Harrison Chase 谈 AI 智能体的规划、界面设计与记忆

原标题Harrison Chase on Planning, Interface Design and Memory for AI Agents

LangChain CEO 梳理智能体开发中的开放问题,Matthew Berman 补充了对监督、工作流程和记忆的看法。

HCHarrison Chase嘉宾 · LangChain
频道
Matthew Berman
发布
2024年5月2日
视频
16:22
阅读
5 分钟
幻灯片
4
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

在 2024 年的一场 Sequoia 演讲中,LangChain 联合创始人 Harrison Chase 讨论了 AI 智能体的三个挑战:规划、用户体验和记忆。Matthew Berman 暂停讲解这些观点,并提出自己对框架和模型架构的预测。Berman 披露自己是 CrewAI 的投资人,Pythagora 也曾赞助他的频道。

  1. 1作为系统的智能体Chase 描述模型如何与世界互动;Berman 展示其周围的工具、记忆和行动。
  2. 2规划仍是开放问题Chase 询问规划提示是暂时的权宜之计还是长期必要的组件。
  3. 3流程工程人类设计的图可以编码部分计划,而不必将每一步都交给模型决定。
  4. 4人工监督两位发言者权衡可靠性和过度干预带来的自动化损失。
  5. 5程序性与个人记忆Chase 演示记住偏好的写作风格,并讨论保存个人事实。

要点建议

  1. 智能体将语言模型与应用循环、工具、记忆和行动结合起来。
  2. 明确的规划和反思可以组织工作,但 Chase 询问未来模型 API 是否会吸收其中部分步骤。
  3. 流程工程将部分规划决定放进人类设计的工作流程。
  4. 人工监督需要在可靠性与自动化收益之间取得平衡。
  5. 回退和编辑界面可以帮助用户在智能体走错方向时重新引导。
  6. 智能体记忆既可以保存做事方式,也可以保存个人事实,由此引出信息更新与遗忘的问题。
全文

按章节阅读整理后的全文

只看原始文稿
01

智能体由什么组成

Chase 介绍智能体,Berman 解释工具、记忆、规划和行动。

Matthew Berman 介绍了 LangChain 联合创始人兼 CEO Harrison Chase 在 Sequoia 活动上的演讲,并在播放过程中不时暂停,加入自己的评论。这场 2024 年 5 月的讨论聚焦 AI 智能体的规划、用户体验和记忆。Berman 在视频简介中披露,自己是 CrewAI 的投资人,而他在讨论中称赞了这个框架。

Chase 从高层面将智能体描述为与外部世界互动的语言模型。Berman 结合一张图进一步说明了日历、搜索和代码执行等工具,以及记忆、规划和行动。模型是更大系统中的一个组件,而不是整个应用。

智能体周围的组件
幻灯片 1 / 4智能体周围的组件图示连接了工具、短期与长期记忆、规划和行动。

Berman 区分了短期对话上下文与长期保存的信息,后者例如通过 RAG 在之后检索的材料。他说,框架可以增加反思、自我评估和将任务拆分为子目标等规划方法。他对某个框架性能的说法属于个人判断,并非本次演讲中的受控比较。

Chase 提供了一个简单的理解方式:循环运行语言模型,执行它选择的行动,报告结果,再询问下一步,直到任务完成。他关心的是开发者如何将这个想法变成可靠、可用于生产的应用,特别是通过规划、界面设计和记忆。

02

规划与流程工程

两人讨论反思、明确的工作流程,以及未来模型是否会内化规划能力。

Berman 将反思解释为先生成初始答案,再询问模型哪里可以改进,并提到 Tree of Thoughts 是另一种规划方法。他猜测未来模型和传闻中的系统可能更善于规划,同时指出自己并未在所提例子中证实这类能力。

规划与反思研究
幻灯片 2 / 4规划与反思研究幻灯片将 Tree of Thoughts 和 Reflexion 作为外部策略的例子。

Chase 说,在演讲时,模型还不够可靠,无法在没有辅助的情况下选择并执行每一个下一步。因此,开发者会在开始时加入明确规划,或在结束时加入反思。他问,这些提示和编排技术是否仍将必要,还是会成为模型 API 的一部分。

Berman 猜测,更强的推理能力可能需要超越 Transformer 的架构,但他明确表示这只是猜测。他认为,即使模型进步,框架仍可用于协调模型、工具和智能体。Chase 明确表示,对于哪些规划技术会持久存在,他提出的是问题,而不是确定的答案。

Chase 讨论了“流程工程”,并以 AlphaCodium 为例,说明如何通过明确设计的图或状态机改进编程工作流程。在这个思路中,人类工程师提前做出部分规划决定,而不是让模型决定每一步。Berman 认为,工作流程设计是提示词编写之外的一个独立实验领域。

03

人工监督与智能体界面

讨论涵盖可靠性、干预和回退编辑界面。

谈到智能体的用户体验,Chase 说,由于智能体还不够可靠,人的参与仍然重要。Berman 同意企业重视一致性和质量,但强调其中的取舍:干预过多会削弱自动化的价值。他建议审查重要交付成果,同时试验在哪些环节进行人工监督最有用。

Chase 称赞了 Devin 演示中的回退和编辑交互:用户可以返回较早的时间点,修改智能体的状态或工作,再从那里继续引导。他认为这种方式可以让智能体更容易被引导。Berman 也喜欢将聊天、浏览器、终端和代码放在一起的界面,同时承认外界对原始演示实际完成了什么存在争议。

编码智能体工作区
幻灯片 3 / 4编码智能体工作区示例将聊天、终端、浏览器和代码放在同一个界面。

Berman 还以 Pythagora 为例,说明用户可以回到项目的较早步骤,修改后继续。他披露 Pythagora 曾赞助他的频道。他对这一界面的热情属于产品判断,并不能证明仅靠回退就能确保结果可靠。

04

程序性与个性化记忆

Chase 演示记住偏好,Berman 则思考企业记忆应如何演变。

Chase 转向记忆话题,展示用户通过对话纠正助手写作风格的例子。收到反馈后,应用在下次访问时会记住偏好的风格,并允许进一步调整。Chase 将其称为程序性记忆:记住用户希望如何完成一项任务。

纠正写作风格
幻灯片 4 / 4纠正写作风格演示展示用户如何通过自然语言反馈完善助手的输出。

Chase 将程序性记忆与个性化事实区分开来。在一个日志应用示例中,用户谈到烹饪课后,应用记住了其对意大利菜的兴趣。他预计两类记忆都会对未来智能体很重要,但这些例子只是演示,并不能证明系统可以完美记忆。

Berman 将记忆与企业应用联系起来:智能体可以检索组织知识,并保留对未来工作有用的上下文。他还提出实际问题:应该保存什么、何时遗忘,以及企业变化时如何更新记忆。他认为,在 2024 年,工具、模型、记忆和监督的最佳组合仍是一个有待解决的设计问题。

同频道的其他文章

12 张幻灯片34:21EN → 简体中文
Matthew Berman· 2026年10月27日Matthew Berman 解读 Anthropic 的上市文件、AI 增长与治理Matthew Berman, Sam Altman · Forward Future主持人审视 S-1 中的财务指标、算力战略和投票结构,并质疑 AI 快速发展与安全之间的张力。AnthropicAI Safety企业 AI+2
2 张幻灯片0:36EN → 简体中文
Matthew Berman· 2026年10月25日Kimi K3.1 与魔方求解演示Matthew Berman · Forward FutureMatthew Berman 展示一个被打乱的虚拟魔方如何复原,并对 Kimi K3.1 的测试给予积极评价。评估编程智能体Open-weight models
6 张幻灯片25:50EN → 简体中文
Matthew Berman· 2026年10月24日Kimi K3.1 Pro 实测:3D 演示出色,表现不一,价格有竞争力Matthew Berman · Forward FutureMatthew Berman 测试这款开放权重模型的编程、3D 渲染和视觉讲解能力,并比较基准成绩与价格。Open-weight modelsBenchmarksAI cost & performance+1
2 张幻灯片32:20EN → 简体中文
Matthew Berman· 2026年10月23日本地 AI 究竟适合谁?成本、取舍与混合模式的未来Matthew Berman · Forward FutureMatthew Berman 权衡数据控制和自主权,与硬件成本、设置复杂度及推理速度之间的关系。Local inferenceOpen-weight modelsAI cost & performance+1
6 张幻灯片1:03:37EN → 简体中文
Matthew Berman· 2026年10月23日Matthew Berman 团队测试 Kimi K3.1:动画、游戏与图表Matthew Berman, Alex, Brian · Forward Future一场团队直播问答变成了对 Kimi K3.1 的非正式测试,内容涵盖个人智能体工作流、动态图形、浏览器游戏和基准图表。编程智能体Generative media评估+2
0:53EN → 简体中文
Matthew Berman· 2026年10月22日Sam Altman 谈 AI 与新知识的发现Sam Altman · OpenAIAltman 预计,数学发现方面的进展将延伸到生物学、材料和能源领域。AI for scienceMathematicsComputational Biology+1