30 秒看懂
2024 年 3 月,Matthew Berman 回顾 1X EVE、NVIDIA Project GR00T、Boston Dynamics Spot、Apptronik 与 Mercedes-Benz 的试点、Xiaomi CyberDog 2、一架语音控制无人机和 Anduril 的 ALTIUS-700M。他对机器人学习与模拟的进展充满热情。 这些例子混合了宣传片、公开目标和试点项目,不能证明 AGI 或普遍自主能力。视频没有口播赞助内容,但简介包含 MassedCompute 的折扣链接。
- 11X EVE1X 称其精选片段使用单一神经网络策略和自主控制;这不能证明无需针对任务进行训练。
- 2Project GR00TNVIDIA 提出一个多模态机器人基础模型,由模拟、计算编排和硬件支持。
- 3Spot 行走能力Boston Dynamics 比较了旧版和新版控制系统在湿滑表面上的行走表现。
- 4Apollo 试点Apptronik 与 Mercedes-Benz 宣布了制造业试点,并未证明大规模自主运行已经实现。
- 5ALTIUS-700MAnduril 展示的系统是一种巡飞弹,相关性能说法来自制造商。
要点建议
- 1X 将 EVE 片段描述为自主运行、由一组神经网络权重控制;这不意味着无需训练。
- NVIDIA 将 GR00T 宣布为机器人学习计划,而非已展示的人工通用智能。
- 模拟和强化学习可以产生机器人训练经验,但向真实任务迁移的效果必须经过评估。
- Boston Dynamics 在其 4.0 更新中展示了 Spot 在部分具有挑战性的表面上改进后的行走能力。
- Mercedes-Benz 与 Apptronik 宣布了一项试点;Anduril 的 ALTIUS-700M 则是一种巡飞弹。
- 产品价格、试验和相关主张属于历史信息;简介包含 MassedCompute 折扣链接。
按章节阅读整理后的全文
1X EVE 与自主性
Berman 播放 1X 的 EVE 视频,并讨论其单一网络的说法。这些精选演示没有展示具备通用智能的机器人。
2024 年 3 月,我回顾一系列机器人公告,首先是 1X 的 EVE。公司视频展示一台机器人执行多项类似家务的任务。1X 将片段描述为自主运行、正常速度播放,由一组神经网络权重控制;这是公司对精选演示的描述,而非独立可靠性研究。

我说单一端到端网络意味着机器人没有针对展示的动作进行专门编程。这里需要仔细区分:学习得到的控制与逐个手工编写动作不同,但仍需要训练、数据和工程工作。精选的自主运行演示不能证明通用智能,也不能证明每项家务都无需干预。
NVIDIA Project GR00T
Berman 讨论机器人基础模型、模拟、OSMO 和 Jetson Thor。NVIDIA 宣传片解释了拟议的工作流程。
接下来我讨论 NVIDIA 和 Jim Fan 在智能体、模拟及机器人学习方面的工作。他此前的 Minecraft 智能体和模拟训练展示了不同的研究方法;这些并未证明实体机器人能够不经指导就学会任何任务。
Project GR00T 被宣布为一项面向人形机器人学习的基础模型计划。NVIDIA 的目标是理解多模态指令和示范,并支持不同机器人身体。我将其描述为无需明确训练就已掌握任何任务的 AGI,超出了公告所确立的范围;具身 AI 不会自动成为 AGI。

我介绍 NVIDIA 的工具栈:Isaac Lab 和 Isaac Sim 用于机器人学习及模拟,OSMO 协调计算工作流程,已宣布的 Jetson Thor 机器人计算机用于部署。这些是拟议开发流程的组成部分,不能证明所有机器人都能安全执行任意真实世界任务。
我提到 Isaac Gym 和模拟速度提高 1,000 倍的说法。[Isaac Gym](https://developer.nvidia.com/blog/introducing-isaac-gym-rl-for-robotics/) 使用 GPU 加速物理模拟和并行环境,为强化学习生成经验;模拟吞吐量取决于工作负载,合成数据也不一定由 AI 模型创建。这个数字并非适用于所有真实场景的加速倍数。
我播放了一部 NVIDIA 关于设计和训练机器人的宣传片。旁白将 GR00T 描述为接收多模态任务指令和先前交互、进而产生机器人动作的模型。影片说明了公司希望实现的工作流程,其中包含宣传性和前瞻性主张。

NVIDIA 介绍基于 Isaac Sim 的 Isaac Lab,以及在多个计算系统之间协调训练和模拟的 OSMO。影片称模拟训练的技能可以零样本迁移至实体机器人,少量示范就能支持新任务。这种迁移取决于任务和条件;片段没有量化成功率,也没有证明通用可靠性。
NVIDIA 影片展示了语言指挥的动作,包括击掌和跳舞,并将 Jetson Thor 描述为计划使用的机器人计算平台。一项成功的精选交互不能证明每个动作都是自主的,或在未见过的情况下依然稳健。NVIDIA 的 [2024 年公告](https://nvidianews.nvidia.com/news/foundation-model-isaac-robotics-platform)将该项目及许多能力描述为前瞻性内容。
我将 GR00T 与 NVIDIA 的 GEAR 研究团队联系起来,并提到 Fan 和 Figure 创始人 Brett Adcock 的友好交流。我猜测双方团队可能密切合作;这次交流本身并不能证明存在合作关系。
Boston Dynamics Spot
演示展示 Spot 的强化学习控制器如何通过具有挑战性的地形。Berman 比较了新旧画面。
Boston Dynamics 介绍其 Spot 机器人的强化学习改进。我回忆 Atlas 跑步和跑酷的画面,随后聚焦 Spot 如何在楼梯、平台和湿滑地形上行走。我认为这家公司领先于竞争对手,这是一种观点,并非受控比较。
Spot 必须根据变化的地形调整步态和姿势。我将基于模拟的训练与 NVIDIA 的工作相比,尽管两者系统和实现方式不同。Boston Dynamics 表示其新控制器改善了具有挑战性的表面上的表现;公司并未声称每次运动决策都是从头新创的,也未声称所有地形都安全。

视频比较了早期 Spot 软件与强化学习版本在湿滑表面和高台上的表现。在展示的测试中,新控制器看起来更好。[Boston Dynamics](https://bostondynamics.com/blog/starting-on-the-right-foot-with-reinforcement-learning/) 将其称为 Spot 4.0 行走能力更新;精选片段没有给出所有环境下的失败率。
工厂机器人、CyberDog 与无人机控制
综述涵盖 Mercedes-Benz 的 Apollo 试点、Xiaomi CyberDog 2 和语音控制 DJI 无人机的演示。

Mercedes-Benz 和 Apptronik 宣布了一项在制造业使用 Apollo 人形机器人的试点。计划是探索零件物流等重复性体力任务,不能证明工厂已经完全由自主的人形机器人工作。我表示自己仍在了解 Apptronik,随后播放 Apollo 演示画面。

我展示 Xiaomi 的 CyberDog 2,并引用帖子中约 3,000 美元的价格。与工业系统相比,这是一款相对容易获得的四足机器人,不过价格和可用性取决于市场和时间。精选演示不能证明消费者在所有地区都可以买到它,也不能独立证明性能。
我介绍 Yondu 以及一个涉及 DJI 无人机的语音控制演示。一位演示者要求无人机起飞、升高、转身并跟随一名穿白色连帽衫的人。片段展示的是一个特定的指令工作流程,不能证明自然语言可以控制所有机器人。
我期待机器人将来更容易通过日常语言操作,并将这视为对未来的希望。演示不能证明仅凭语言指令就能让自主运行在所有环境中都可靠或安全。
Anduril 与机器人前景
Berman 播放 ALTIUS-700M 巡飞弹的画面,并以自己对机器人技术的展望收尾。

接下来是 Anduril Industries——一家与 Oculus 创始人 Palmer Luckey 有关联的国防承包商——及其 ALTIUS-700M。画面中的公司帖子将其描述为巡飞弹,而非通用人形机器人。该宣传片不能独立证明其所宣称的性能或操作自主性。
最后,我对未来人形机器人的发展感到兴奋,并提到一份供观众查看的公司名单。在这些例子中,研究目标、公司精选演示、试点和商业上可靠的能力各不相同;视频没有口播赞助披露。
同频道的其他文章
34:21EN → 简体中文
0:26EN → 简体中文
0:36EN → 简体中文
0:21EN → 简体中文
25:50EN → 简体中文
32:20EN → 简体中文