Jev 的快速决策:演示、取舍与可靠性声明

原标题Jev's Fast Decisions: Demos, Tradeoffs and Reliability Claims

Matthew Berman 通过路由、模拟世界、国际象棋和游戏控制示例,探索一个面向决策的 AI 模型。

MBMatthew Berman主持 · Forward Future
频道
Matthew Berman
发布
2026年9月18日
视频
12:31
阅读
4 分钟
幻灯片
5
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

Matthew Berman 介绍 TypeSafe 的 Jev:一个为快速结构化决策设计的模型,并回顾从客服工单分类到模拟角色和游戏的演示。他强调宣称的速度和低成本,同时指出它并非通用聊天或编程模型。视频中的零幻觉说法不应被理解为决策正确的保证;模拟驾驶演示也不能证明真实道路上的安全性。

  1. 1不同的输出方式TypeSafe 介绍了 RLCD,即用于校准决策的强化学习,并将 Jev 定位为结构化决策工具,而非通用聊天工具。
  2. 2快速交互演示视频展示游戏控制和浏览器导航竞赛,但速度取决于设置,也不能证明广泛任务上的准确性。
  3. 3工单路由一个示例根据输入状态和预定义输出类型,对客服请求类别、紧急程度和优先级进行判断。
  4. 4可靠性需要评估Berman 重复了零幻觉的说法。结构化回答仍可能出错,因此高风险用途需要针对任务的验证和监督。
  5. 5模拟小镇Berman 展示 50 个角色对广播作出反应,演示中不到一秒就返回了决策。
  6. 6国际象棋与其他演示计时棋局说明,即使棋面较弱,快速回应也可能影响结果。后续例子包括路由和模拟驾驶。

要点建议

  1. Jev 被介绍为返回结构化选择或分数的决策模型,而不是通用对话模型。
  2. 速度和成本比较取决于任务、设置、并发及定价条款;视频中的倍数是产品声明。
  3. 即使避免了自由文本中的编造,受限的输出格式也不能防止错误分类或决策。
  4. 示例包括工单路由、模拟智能体、模型路由、国际象棋和游戏;这些演示不是独立可靠性测试。
  5. 驾驶示例是模拟,不能证明自主驾驶系统已通过验证。
全文

按章节阅读整理后的全文

只看原始文稿
01

Jev 简介

Berman 介绍这个决策模型以及开发者对速度、成本和训练的声明。

Matthew Berman 介绍 TypeSafe 的面向决策的 AI 模型 Jev。他对发布演示中展示的速度印象深刻,认为它以通用聊天和编程能力换取快速结构化决策。他引用的速度和价格倍数是发布时的声明,并非普遍适用的测量结果。

公司将其训练方法称为用于校准决策的强化学习,简称 RLCD。Berman 将面向决策的输出与对话模型作比较,介绍了回应速度最高快 200 倍、成本更低等声明,以及 2026 年 9 月所展示的免费输出 token 方案。价格和限制可能变化。

报告的准确率与成本比较
幻灯片 1 / 5报告的准确率与成本比较发布图表在所列评测设置下比较了四种工作流。
02

游戏、浏览器与工单路由

他展示快速交互示例,并解释结构化客服工单决策。

Doom 演示展示模型在游戏循环中作出选择。另一个维基百科导航竞赛比较 Jev 与其他模型连续选择链接的速度。这些例子展示了特定交互设置,不能单独衡量所有工作负载下的准确性或速度。

在客服工单示例中,客户报告重复扣费并要求尽快解决。输入包含账户信息,问题则要求给出类别、紧急标记和优先级分数。Berman 表示,许多这样的决策可以并行处理。

客服工单路由输入
幻灯片 2 / 5客服工单路由输入结构化示例要求给出类别、紧急程度和优先级。
03

可靠性与模拟

视频讨论可靠性,并演示模拟小镇和分类可视化。

Berman 重复了 Jev 零幻觉的说法,并提到安全关键场景。结构化选择仍可能错误、有偏差或校准不佳;避免自由文本并不能保证真实性或决策安全。实际部署需要有代表性的测试、监控和适当的人类监督。

Berman 说,他使用另一个编程模型构建了模拟小镇,再用 Jev 处理角色决策。在关于面包店促销的广播后,界面显示约 0.6 秒内收到了 50 个回应:大多数角色继续原有活动,少数前去查看或参与。

模拟小镇决策
幻灯片 3 / 5模拟小镇决策界面显示 50 个模拟角色对广播的回应。

第二条提示让许多角色走向喷泉。另一个可视化示例对彩色糖果分类,Berman 称其中的决策并行进行。这些展示的是人工环境中的响应速度和编排,而非普遍真实环境可靠性的证据。

糖果分类可视化
幻灯片 4 / 5糖果分类可视化演示将大量分类决策可视化。
04

象棋、路由与驾驶演示

Berman 回顾其他人的实验,最后展望快速决策的可能用途。

Berman 强调 Jev 并非为了在所有任务中取代对话模型。他认为,在系统提供状态并要求结构化答案的大量选择场景中,它具有潜力。他也提到开发者提醒,这个模型在国际象棋方面不如通用模型合适。

计时国际象棋演示说明了速度的取舍:据介绍,一位对手棋面更强却因超时落败,另一位则击败了 Jev。Berman 认为限时条件下快速决策可能重要,但少数棋局不能证明整体棋力。

其他例子包括用 Jev 将提示路由给其他模型,以及一个分类并移除不需要的网页内容的工具。Berman 还展示了一位创作者制作的模拟驾驶环境,由 Jev 选择转向动作。该模拟并非 Tesla 的生产系统,也不能证明模型能够安全驾驶真实车辆。

模拟驾驶演示
幻灯片 5 / 5模拟驾驶演示画面展示模拟中的决策输出,并非经过验证的真实驾驶。

最后一个例子展示实时控制游戏。Berman 总结说,开发者仍在探索快速、低成本决策的有效用途,并期待更多实验帮助厘清其中的取舍。

同频道的其他文章

6 张幻灯片25:50EN → 简体中文
MBMatthew Berman· 2026年10月24日Kimi K3.1 Pro 实测:3D 演示出色,表现不一,价格有竞争力Matthew Berman · Forward FutureMatthew Berman 测试这款开放权重模型的编程、3D 渲染和视觉讲解能力,并比较基准成绩与价格。Open-weight modelsBenchmarksAI cost & performance+1
2 张幻灯片32:20EN → 简体中文
MBMatthew Berman· 2026年10月23日本地 AI 究竟适合谁?成本、取舍与混合模式的未来Matthew Berman · Forward FutureMatthew Berman 权衡数据控制和自主权,与硬件成本、设置复杂度及推理速度之间的关系。Local inferenceOpen-weight modelsAI cost & performance+1
45:08EN → 简体中文
MBMatthew Berman· 2026年10月21日Sam Altman 谈 AI 发现、意识、算力与以人为本的未来Matthew Berman, Sam Altman · Forward Future在与 Matthew Berman 的对谈中,Altman 讨论科学进步、个人助手、递归自我改进与人类自主权。AI for sciencePersonal agentsConsciousness+2
0:32EN → 简体中文
MBMatthew Berman· 2026年10月21日Sam Altman 谈持续存在的软件工作需求Sam Altman, Matthew Berman · OpenAI在一段简短访谈中,Altman 表示,尽管 AI 正在改变软件的制作方式,软件需求可能比人们预想的更大。Future of WorkSoftware engineering编程智能体
5 张幻灯片12:14EN → 简体中文
MBMatthew Berman· 2026年10月14日Gemini 4 Argon 实测:3D 演示、电子表格原型与基准成绩Matthew Berman · Forward FutureMatthew Berman 用游戏和视觉项目测试 Google 模型,并比较公布的编程与智能体基准。GeminiBenchmarks编程智能体+1
5 张幻灯片10:36EN → 简体中文
MBMatthew Berman· 2026年10月13日Meta Muse Wonder 实测:基准成绩强劲,演示表现不一,额度限制影响体验Matthew Berman · Forward FutureMatthew Berman 测试 Meta 模型的浏览器演示,并分析公开的基准成绩、使用方式和成本。模型与训练BenchmarksAI cost & performance+1