ChatGPT Search 与 Perplexity:2024 年初体验

原标题ChatGPT Search vs. Perplexity: A 2024 First Look

Matthew Berman 用播客链接、人物身份、餐厅地图、Factorio 和股票问题测试新推出的搜索功能。

MBMatthew Berman讲者 · Forward Future
频道
Matthew Berman
发布
2024年11月1日
视频
11:29
阅读
6 分钟
幻灯片
5
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

在这期 2024 年 11 月的视频中,Matthew Berman 介绍 ChatGPT Search 的发布,并将几个回答与 Perplexity 比较。他发现两者各有优势和错误,指出引用来源以及是否进行搜索都很重要;视频由 Vultr 赞助。

  1. 1搜索进入 ChatGPTBerman 认为这一整合会与其他搜索产品竞争,也展示了平台风险。
  2. 2两位 Rob ThomasPerplexity 的一个回答混淆了电视剧创作者和 Matchbox Twenty 主唱;ChatGPT 区分了两人。
  3. 3餐厅结果的呈现两个产品都显示地图,但 Berman 更喜欢 Perplexity 对餐厅回答的组织方式。
  4. 4核对游戏机制Factorio 测试说明,对于细节问题,附有相关来源的回答可能更有用。
  5. 5一次历史市场数据测试ChatGPT 给出一份带日期的股票列表;演示中 Perplexity 表示无法提供实时价格。

要点建议

  1. ChatGPT Search 于 2024 年 10 月推出时将对话式回答与网页链接结合,最初向付费用户及候补名单用户开放。
  2. 一个例子中,Perplexity 混淆了两位名叫 Rob Thomas 的人,而 ChatGPT 在追问后区分了他们。
  3. 一个 Factorio 问题说明了核对引用来源和速度比较条件的重要性。
  4. 餐厅与股票比较是小规模的历史演示,而非受控基准测试。
全文

按章节阅读整理后的全文

只看原始文稿
01

发布与搜索工作方式

Berman 介绍 2024 年的发布、初期访问范围,以及产品如何使用第三方搜索和出版商内容。他认为这会与现有搜索工具竞争。

ChatGPT Search 已经整合进 ChatGPT,正如我试用早期 SearchGPT 原型之后所预料的那样。我认为这直接挑战了 Perplexity 和 Google Search,也提醒我们注意平台风险:建立在另一家公司技术之上的企业,可能发现技术供应商自己也加入了类似功能。

OpenAI 的界面中有一个地球图标,可以用来启动网页搜索,ChatGPT 也可以自行决定是否搜索。我想看看它能多快找到最新信息,以及它的回答和 Perplexity 相比如何。这期视频发布于 2024 年 11 月,因此这里描述的是当时的界面和访问情况。

发布时,[OpenAI 表示](https://openai.com/index/introducing-chatgpt-search/) Plus、Team 用户和 SearchGPT 候补名单用户可以使用该功能,Enterprise、Edu 和免费用户计划稍后获得访问权限。该公告后来更新称,搜索于 2025 年 2 月向支持地区的所有人开放。访问权限和产品行为都可能变化。

发布时,产品提供来源链接,以及天气、股票、体育、新闻和地图的专门展示形式。OpenAI 称,搜索模型基于微调后的 GPT-4o,并通过包括蒸馏 o1-preview 输出在内的合成数据进行后训练。这些细节描述的是 2024 年发布时的情况,不一定适用于今天使用的模型。

OpenAI 表示,它依靠第三方搜索提供商以及合作伙伴提供的内容,其中包括新闻出版商。我认为这些出版合作关系是将及时信息引入回答的策略之一,但有来源本身并不能保证回答准确。

02

寻找播客并区分同名人物

最初的比较包括寻找特定访谈,以及区分两位名叫 Rob Thomas 的人。Perplexity 的一个回答混淆了两人,ChatGPT 则作出了区分。

第一次测试中,我让两个工具找到 Joe Rogan 采访 Donald Trump 的那一期节目。ChatGPT 直接给出 YouTube 链接。这一次 Perplexity 的响应速度差不多,但它补充了访谈内容和反响的背景,因此找到实际链接的路径没有那么直接。

直接指向播客的搜索结果
幻灯片 1 / 5直接指向播客的搜索结果ChatGPT 给出所请求的 Joe Rogan 访谈,并附上 YouTube 来源。

之前我在 Perplexity 搜索“Rob Thomas party down”时遇到一个更严重的错误。它把电视剧 Party Down 的联合创作者 Rob Thomas 和同名的 Matchbox Twenty 主唱混为一谈。回答错误地说他们是同一个人,还把电视剧的灵感归因于歌手的音乐生涯。

Perplexity 混淆两个人
幻灯片 2 / 5Perplexity 混淆两个人画面中的回答错误地将同名的音乐人和电视编剧 Rob Thomas 当成一人。

我在 ChatGPT Search 中尝试同样的查询。它较简短的回答识别了电视创作者,并介绍了 Party Down;当我明确追问他是否与歌手是同一人时,它回答说两人不同。这个个例显示它作出了正确区分,并不是全面的准确率比较。

ChatGPT 识别电视创作者
幻灯片 3 / 5ChatGPT 识别电视创作者另一条回答介绍了 Party Down 的联合创作者,没有把歌手的经历归到他身上。
03

餐厅与 Factorio

披露 Vultr 赞助后,Berman 比较餐厅地图,并测试一个细致的游戏机制问题。他讨论了来源的重要性。

本视频由 Vultr 赞助。Berman 介绍了其 GPU 云基础设施、可用的 NVIDIA 硬件和 Kubernetes 服务,并提到一项推广额度。这些是赞助商在 2024 年的说法和优惠;供应情况、价格与活动条款可能变化。

接下来我询问 Las Vegas 最好的餐厅。ChatGPT 给出一张包含餐厅的交互式地图,但我更希望看到一份独立列表,而不是让结果只显示在地图里。Perplexity 按类型组织回答,提供交互式地图并显示 Yelp 评分;这次测试中我更喜欢它的呈现方式。

对于一个更专业的问题,我询问 Factorio 中的长机械臂是否比普通机械臂慢。ChatGPT 似乎没有使用搜索,并回答说长机械臂更慢;我认为这不对。Perplexity 引用了游戏维基,称长机械臂更快。

Factorio 机械臂比较
幻灯片 4 / 5Factorio 机械臂比较Perplexity 显示了附有来源的比较;实测吞吐量取决于游戏中的具体条件。

[Factorio 维基](https://wiki.factorio.com/inserters)列出的长机械臂基础旋转速度高于普通机械臂。实际吞吐量取决于取放位置等条件,因此旋转速度并不能说明全部情况。这个例子很好地说明,为什么面对具体事实主张时,我希望看到参考来源。

在这些例子中,Perplexity 似乎每次都进行搜索,而 ChatGPT 有时不搜索就直接回答。这是我从少数查询中得到的观察,并不是对任一产品的全面测试。检索有助于获取最新事实,但搜索结果也可能被误解或错误转述。

04

股票数据与初步印象

两个产品对当天科技股表现的问题给出了不同回答。Berman 以这组少量测试后的个人偏好作结。

最后,我询问今天表现最好的科技股,也就是 2024 年 10 月 31 日。ChatGPT 进行了搜索,并给出一份标注来源为 Investor’s Business Daily 的列表,不过我无法让它显示 OpenAI 发布材料中展示的图表。画面中的数字是历史数据,不应当作当前市场行情。

历史股票搜索示例
幻灯片 5 / 5历史股票搜索示例画面中的数据来自 2024 年 10 月 31 日,并非当前市场数据。

Perplexity 给出了另一份列表,似乎更注重长期表现,而不是当天的价格变动。当我澄清自己询问的是当天涨跌时,它表示无法访问实时数据。就这一个问题而言,我更喜欢 ChatGPT 的回答,尽管我没有独立核查所有股票数字。

我计划继续测试并使用这两个产品。Perplexity 在几个例子中的呈现方式给我留下了深刻印象,而 ChatGPT 在另一些问题上更直接。对于我自己的工作流程,我预计会减少使用 Google Search;这只是少量演示之后的个人偏好,并非系统性评估。

同频道的其他文章

12 张幻灯片34:21EN → 简体中文
Matthew Berman· 2026年10月27日Matthew Berman 解读 Anthropic 的上市文件、AI 增长与治理Matthew Berman, Sam Altman · Forward Future主持人审视 S-1 中的财务指标、算力战略和投票结构,并质疑 AI 快速发展与安全之间的张力。AnthropicAI Safety企业 AI+2
0:26EN → 简体中文
Matthew Berman· 2026年10月25日Sam Altman 谈 AI 世界中的人类价值与问题解决Sam Altman · OpenAI在一段简短的访谈摘录中,Altman 思考解决难题的乐趣,以及人在解读结果时的作用。Human-AI CollaborationFuture of WorkAI Strategy
2 张幻灯片0:36EN → 简体中文
Matthew Berman· 2026年10月25日Kimi K3.1 与魔方求解演示Matthew Berman · Forward FutureMatthew Berman 展示一个被打乱的虚拟魔方如何复原,并对 Kimi K3.1 的测试给予积极评价。评估编程智能体Open-weight models
2 张幻灯片0:21EN → 简体中文
Matthew Berman· 2026年10月24日AI 生成的 Kimi 基准图表使用了虚构分数Matthew Berman · Forward FutureMatthew Berman 要求生成一张 Kimi K3.1 Pro 基准图表,随后发现图中的数字只是示意性占位值。Benchmarks评估Generative media
6 张幻灯片25:50EN → 简体中文
Matthew Berman· 2026年10月24日Kimi K3.1 Pro 实测:3D 演示出色,表现不一,价格有竞争力Matthew Berman · Forward FutureMatthew Berman 测试这款开放权重模型的编程、3D 渲染和视觉讲解能力,并比较基准成绩与价格。Open-weight modelsBenchmarksAI cost & performance+1
2 张幻灯片32:20EN → 简体中文
Matthew Berman· 2026年10月23日本地 AI 究竟适合谁?成本、取舍与混合模式的未来Matthew Berman · Forward FutureMatthew Berman 权衡数据控制和自主权,与硬件成本、设置复杂度及推理速度之间的关系。Local inferenceOpen-weight modelsAI cost & performance+1