30 秒看懂
2024 年 1 月,Matthew Berman 观看 Rabbit 创始人兼首席执行官 Jesse Lyu 介绍 R1。这是一款围绕自然语言交互和所谓“大型动作模型”设计的掌上 AI 伴侣。发布演示展示了服务登录、音乐、叫车、订餐、旅行规划、视觉功能和实验性教学模式。 这些例子来自 Rabbit 的发布会和产品声明,并非对交付硬件的独立测试。Berman 对这一概念充满热情,同时质疑动作模型与语言模型有何区别;他对软件和编程的预测属于推测。
- 1大型动作模型Rabbit 创始人 Jesse Lyu 描述了一套旨在代表用户操作界面的系统;这是公司对其技术方法的解释。
- 2掌上硬件发布会展示了一款独立设备,配有触摸屏、按住说话按钮、滚轮和旋转摄像头。
- 3连接服务Rabbit 演示了用于连接服务的网页门户,并展示音乐、叫车和订餐的例子。
- 4实验性教学模式Lyu 录制一个 Midjourney 工作流,并展示之后如何用学习到的流程处理新请求。
- 5发布价格与时间Rabbit 宣布售价 199 美元、无需订阅,并计划于 2024 年春季发货。
- 6Berman 的评价他质疑动作模型的术语,并推测自然语言计算最终可能减少对应用程序的依赖。
要点建议
- Rabbit 将 R1 定位为独立的掌上伴侣,用户可以通过自然语言请求跨服务执行操作。
- 发布视频展示了音乐、叫车、订餐和旅行工作流,部分交易需要用户先确认。
- Rabbit 称第三方认证通过各服务自身完成,且公司不存储凭据;发布会没有独立验证这些说法。
- 教学模式被描述为实验性功能,演示通过录制 Midjourney 工作流进行。
- 发布时公布的价格为 199 美元,无需订阅,计划于 2024 年春季发货;这些是当时的条款。
- Berman 预测应用和编程可能最终消失,这是他的观点,并非演示已经证实的结果。
按章节阅读整理后的全文
Rabbit 对自然语言界面的构想
Berman 介绍发布视频。Rabbit 创始人 Jesse Lyu 认为基于应用的移动工作流过于分散,并概述其提出的大型动作模型。
Matthew Berman 介绍了 Rabbit 于 2024 年 1 月发布的掌上 AI 助手 R1,并播放公司的发布演示。他认为这一概念指向人与计算机交互的另一种方式;他的热情评价出现在对设备进行独立测试之前。
Rabbit 创始人兼首席执行官 Jesse Lyu 说,公司希望打造一台以自然语言为中心的简单计算机。这款设想中的伴侣设备不要求用户学习许多界面,而是理解请求并代用户完成任务。
Lyu 认为,现代智能手机用户要叫车或购买食品,可能需要在许多独立应用、菜单和按钮之间切换。他认为,理解请求的系统与能够完成相关操作的系统之间仍有差距。
Lyu 说,早期语音助手常常无法理解或完成请求,而语言模型改善了自然语言交互。他以旅行预订为例,认为聊天机器人和现有智能体仍难以可靠地完成端到端任务。
Rabbit 表示,公司研究了人们如何与不同设备上的软件界面交互。Lyu 提议让 AI 代用户操作界面,而不是只依赖各应用的 API 或浏览器扩展。
他将 Rabbit 的方法称为“大型动作模型”,即 LAM,并描述为一套学习界面并执行用户意图的系统。这些是公司对其架构和通用性的说法;发布会并未独立证明它能够操作所有界面。
Rabbit 将模型集成到 Rabbit OS 中,并推出与 Teenage Engineering 共同设计的独立设备 R1。发布会将它定位为智能手机的伴侣,而不是替代品。
R1 设备与连接的服务
发布会介绍 R1 硬件,展示语音提问、服务认证、音乐、叫车和订餐。这些都是公司控制下的演示。
Lyu 展示了硬件:触摸屏、按住说话按钮、滚轮、麦克风、扬声器,以及名为 Rabbit Eye 的旋转摄像头。他说设备支持 Wi-Fi、蓝牙,并配有用于 4G LTE 连接的 SIM 卡槽。

Rabbit 声称响应时间约为 500 毫秒,并称其快于其他语音助手。Lyu 演示了语音提问,并说摇动设备会弹出键盘;这一速度比较是发布时的声明,而非受控测量结果。
为了在第三方服务中执行操作,Lyu 介绍了名为 Rabbit Hole 的网页门户。用户选择服务并登录;他演示了 Spotify,并说包括 Uber 和 DoorDash 在内的其他服务已在发布会前完成认证。
Lyu 说,Rabbit 会将用户重定向至各服务的登录页面,不存储第三方用户名和密码,也不追踪用户数据。这些是公司的隐私声明;发布演示并不是对凭据和任务数据处理方式的独立审计。
演示展示了设备播放一首歌和同一专辑的另一首歌,然后回答关于词曲作者和音乐影响的问题。这说明了服务控制与信息检索的结合,并不证明每个生成答案都正确。
在叫车示例中,Lyu 请求搭车回家,随后修改需求,要求容纳六个人和行李。设备推荐了一辆更大的车,并在下单前请求确认。

在订餐演示中,他请求一份 12 英寸 Pizza Hut 披萨,并接受点单最多的选项。助手描述选中的披萨并请求确认。演示展示的是预期流程,并不保证任意订餐任务都能成功。
旅行、翻译与视觉任务
演示展示了设备规划旅行、回答有关冰箱的问题和处理文档。发布会还介绍了翻译和记笔记功能。
Lyu 要求设备为家庭伦敦旅行制订计划,给出日期、一名儿童、直飞航班、相邻座位、SUV 和提供 Wi-Fi 的酒店等条件。助手报告了航班、酒店和租车选项,并要求逐项确认。
随后他要求制订行程,并进一步要求安排得更轻松。Rabbit 用修改后的计划展示系统如何在调整结果时保留对话上下文;视频没有独立检查每项预订或行程细节的质量。
发布会还介绍了双向翻译和记笔记功能。Lyu 说,设备能够识别口语语言,并使用摄像头理解周围环境;双击按钮即可启动摄像头。
在一个视觉示例中,Rabbit 查看冰箱里的食材,并建议用现有食材制作低热量煎蛋。另一个演示让它检查问卷表格、添加匹配列并通过邮件发送结果,然后根据回复进一步调整所需列。
实验性教学模式
Lyu 演示录制 Midjourney 工作流,并通过新提示词调用它。Rabbit 将教学模式标为实验性功能。
Lyu 将教学模式介绍为一项实验,用于设备尚未学会的工作流。他把教系统执行任务比作向另一个人示范;演示展示的是一个具体录制例子,并不能证明它具备通用学习能力。

他通过网页门户录制在 Discord 上使用 Midjourney 生成图像的步骤:选择服务器和频道、输入图像生成命令并等待结果。随后他为工作流添加说明,以便后续请求能够替换为不同主题。
处理录制内容后,Lyu 要求 R1 使用学到的工作流生成一只像素风格的兔子。发布会展示了返回的图像,并将这一过程称为观察、学习和重复。教学模式被定位为实验性功能,视频没有展示独立的可靠性测试。

发布条款与 Berman 的反应
Rabbit 将 R1 定位为手机的伴侣设备,公布初始价格与发货计划。Berman 讨论设备可能产生的影响,以及他对模型术语的疑问。
Lyu 说,Rabbit 并不试图取代手机。他总结了预期能力:自然语言提问与执行操作、视觉输入、笔记、翻译和教学模式。他认为,新一代 AI 原生设备可以与基于应用的手机共存。
发布会将 R1 与智能手机、智能音箱及其他已公布的 AI 设备进行比较。Rabbit 宣布售价 199 美元,无需订阅或隐藏费用,并计划在 2024 年复活节发货。这些是发布时宣布的价格和时间安排。
Berman 说他已经订购了一台,喜欢橙色设计,也认为它比 Humane AI Pin 更便宜。他尤其感兴趣的是,这款设备能够接受自然语言请求,并在演示中学习额外的工作流。
Berman 质疑“大型动作模型”是否描述了一种本质不同的模型,还是部分属于针对操作任务改造语言模型的营销术语。他讨论了 Rabbit 展示人们操作应用的材料,并推测系统通过训练学习了这些交互。

他推测,AI 可能先为用户操作现有应用,最终通过直接的自然语言计算取代应用。他将这一想法与自己对编程未来的更广泛预测联系起来;发布演示并未证实这两种结果。
Berman 承认,类似体验也许可以通过手机应用实现,但平台限制可能产生影响。他预计主要手机制造商会推出相关功能,但更欣赏 Rabbit 探索专用设备形态的尝试。视频录制时,这款设备能否成功仍是未知数。
同频道的其他文章
34:21EN → 简体中文
0:36EN → 简体中文
25:50EN → 简体中文
32:20EN → 简体中文
1:03:37EN → 简体中文
0:53EN → 简体中文