30 秒看懂
在这期 2024 年 11 月的视频中,Matthew Berman 介绍 ChatGPT Search 的发布,并将几个回答与 Perplexity 比较。他发现两者各有优势和错误,指出引用来源以及是否进行搜索都很重要;视频由 Vultr 赞助。
- 1搜索进入 ChatGPTBerman 认为这一整合会与其他搜索产品竞争,也展示了平台风险。
- 2两位 Rob ThomasPerplexity 的一个回答混淆了电视剧创作者和 Matchbox Twenty 主唱;ChatGPT 区分了两人。
- 3餐厅结果的呈现两个产品都显示地图,但 Berman 更喜欢 Perplexity 对餐厅回答的组织方式。
- 4核对游戏机制Factorio 测试说明,对于细节问题,附有相关来源的回答可能更有用。
- 5一次历史市场数据测试ChatGPT 给出一份带日期的股票列表;演示中 Perplexity 表示无法提供实时价格。
要点建议
- ChatGPT Search 于 2024 年 10 月推出时将对话式回答与网页链接结合,最初向付费用户及候补名单用户开放。
- 一个例子中,Perplexity 混淆了两位名叫 Rob Thomas 的人,而 ChatGPT 在追问后区分了他们。
- 一个 Factorio 问题说明了核对引用来源和速度比较条件的重要性。
- 餐厅与股票比较是小规模的历史演示,而非受控基准测试。
按章节阅读整理后的全文
发布与搜索工作方式
Berman 介绍 2024 年的发布、初期访问范围,以及产品如何使用第三方搜索和出版商内容。他认为这会与现有搜索工具竞争。
ChatGPT Search 已经整合进 ChatGPT,正如我试用早期 SearchGPT 原型之后所预料的那样。我认为这直接挑战了 Perplexity 和 Google Search,也提醒我们注意平台风险:建立在另一家公司技术之上的企业,可能发现技术供应商自己也加入了类似功能。
OpenAI 的界面中有一个地球图标,可以用来启动网页搜索,ChatGPT 也可以自行决定是否搜索。我想看看它能多快找到最新信息,以及它的回答和 Perplexity 相比如何。这期视频发布于 2024 年 11 月,因此这里描述的是当时的界面和访问情况。
发布时,[OpenAI 表示](https://openai.com/index/introducing-chatgpt-search/) Plus、Team 用户和 SearchGPT 候补名单用户可以使用该功能,Enterprise、Edu 和免费用户计划稍后获得访问权限。该公告后来更新称,搜索于 2025 年 2 月向支持地区的所有人开放。访问权限和产品行为都可能变化。
发布时,产品提供来源链接,以及天气、股票、体育、新闻和地图的专门展示形式。OpenAI 称,搜索模型基于微调后的 GPT-4o,并通过包括蒸馏 o1-preview 输出在内的合成数据进行后训练。这些细节描述的是 2024 年发布时的情况,不一定适用于今天使用的模型。
OpenAI 表示,它依靠第三方搜索提供商以及合作伙伴提供的内容,其中包括新闻出版商。我认为这些出版合作关系是将及时信息引入回答的策略之一,但有来源本身并不能保证回答准确。
寻找播客并区分同名人物
最初的比较包括寻找特定访谈,以及区分两位名叫 Rob Thomas 的人。Perplexity 的一个回答混淆了两人,ChatGPT 则作出了区分。
第一次测试中,我让两个工具找到 Joe Rogan 采访 Donald Trump 的那一期节目。ChatGPT 直接给出 YouTube 链接。这一次 Perplexity 的响应速度差不多,但它补充了访谈内容和反响的背景,因此找到实际链接的路径没有那么直接。

之前我在 Perplexity 搜索“Rob Thomas party down”时遇到一个更严重的错误。它把电视剧 Party Down 的联合创作者 Rob Thomas 和同名的 Matchbox Twenty 主唱混为一谈。回答错误地说他们是同一个人,还把电视剧的灵感归因于歌手的音乐生涯。

我在 ChatGPT Search 中尝试同样的查询。它较简短的回答识别了电视创作者,并介绍了 Party Down;当我明确追问他是否与歌手是同一人时,它回答说两人不同。这个个例显示它作出了正确区分,并不是全面的准确率比较。

餐厅与 Factorio
披露 Vultr 赞助后,Berman 比较餐厅地图,并测试一个细致的游戏机制问题。他讨论了来源的重要性。
本视频由 Vultr 赞助。Berman 介绍了其 GPU 云基础设施、可用的 NVIDIA 硬件和 Kubernetes 服务,并提到一项推广额度。这些是赞助商在 2024 年的说法和优惠;供应情况、价格与活动条款可能变化。
接下来我询问 Las Vegas 最好的餐厅。ChatGPT 给出一张包含餐厅的交互式地图,但我更希望看到一份独立列表,而不是让结果只显示在地图里。Perplexity 按类型组织回答,提供交互式地图并显示 Yelp 评分;这次测试中我更喜欢它的呈现方式。
对于一个更专业的问题,我询问 Factorio 中的长机械臂是否比普通机械臂慢。ChatGPT 似乎没有使用搜索,并回答说长机械臂更慢;我认为这不对。Perplexity 引用了游戏维基,称长机械臂更快。

[Factorio 维基](https://wiki.factorio.com/inserters)列出的长机械臂基础旋转速度高于普通机械臂。实际吞吐量取决于取放位置等条件,因此旋转速度并不能说明全部情况。这个例子很好地说明,为什么面对具体事实主张时,我希望看到参考来源。
在这些例子中,Perplexity 似乎每次都进行搜索,而 ChatGPT 有时不搜索就直接回答。这是我从少数查询中得到的观察,并不是对任一产品的全面测试。检索有助于获取最新事实,但搜索结果也可能被误解或错误转述。
股票数据与初步印象
两个产品对当天科技股表现的问题给出了不同回答。Berman 以这组少量测试后的个人偏好作结。
最后,我询问今天表现最好的科技股,也就是 2024 年 10 月 31 日。ChatGPT 进行了搜索,并给出一份标注来源为 Investor’s Business Daily 的列表,不过我无法让它显示 OpenAI 发布材料中展示的图表。画面中的数字是历史数据,不应当作当前市场行情。

Perplexity 给出了另一份列表,似乎更注重长期表现,而不是当天的价格变动。当我澄清自己询问的是当天涨跌时,它表示无法访问实时数据。就这一个问题而言,我更喜欢 ChatGPT 的回答,尽管我没有独立核查所有股票数字。
我计划继续测试并使用这两个产品。Perplexity 在几个例子中的呈现方式给我留下了深刻印象,而 ChatGPT 在另一些问题上更直接。对于我自己的工作流程,我预计会减少使用 Google Search;这只是少量演示之后的个人偏好,并非系统性评估。
同频道的其他文章
34:21EN → 简体中文
0:26EN → 简体中文
0:36EN → 简体中文
0:21EN → 简体中文
25:50EN → 简体中文
32:20EN → 简体中文