谢晨:机器人仿真、合成数据与现实之间的差距

从自动驾驶经验到具身智能,讨论场景构建、物理校准和训练数据。

谢谢晨Gast · 光轮智能
Kanal
Zhang Xiaojun Podcast
Veröffentlicht
15. Juli 2025
Video
1:41:09
Lesezeit
4 Min.
Original
Chinesisch (vereinfacht)
Auf YouTube öffnen
Beim Scrollen schrumpft das Video in die rechte untere Ecke und läuft weiter. Untertitel folgen Ihrer Lesesprache.
LesespracheIn 2 Sprachen verfügbar
Diesen Artikel gibt es noch nicht auf Deutsch, daher wird das Original (Chinesisch (vereinfacht)) angezeigt.
ZUSAMMENFASSUNG

In 30 Sekunden

张小珺与光轮智能创始人谢晨讨论仿真与合成数据如何用于机器人训练。他解释 Sim2Real 和 Real2Sim,以行人、冰箱门和机器人手为例说明场景多样性与物理校准。 访谈还涉及产业分工、公司合作与规模化前景。公司市场地位和未来发展相关表述是受访者在 2025 年的观点。

  1. 1仿真与现实Sim2Real 关注训练结果向真实环境的迁移。
  2. 2扩展稀有场景通过修改行人等要素生成多种测试情况。
  3. 3冰箱门的物理属性铰链、磁吸和接触力影响操作。
  4. 4校准机器人模拟与真实机器人的差异也影响迁移。
  5. 5行业仍在探索他认为规模化训练配方仍是开放问题。

Das Wichtigste

  1. 合成数据可以增加难以采集场景的变化。
  2. 仿真结果需要在真实环境中验证。
  3. 物体和机器人自身的物理属性都需要校准。
  4. 感知精度和仿真吞吐量之间存在工程取舍。
  5. 数据比例和产业预测不能直接推广到所有项目。
VOLLTEXT

Den bearbeiteten Text nach Kapiteln lesen

Nur das Transkript
01

仿真与合成数据

介绍基本概念和自动驾驶经验。

张小珺采访光轮智能创始人谢晨,讨论机器人仿真、合成数据与从仿真迁移到现实的困难。谢晨此前从事自动驾驶仿真工作。

谢晨解释 Sim2Real:在仿真环境中训练的方法要用于真实机器人和场景,但两者之间的差异可能导致实际表现下降。

合成数据则由程序化方法生成,可以通过仿真、算法或二者结合产生。机器人任务中,它可能包含三维场景、动作轨迹和人工参与的数据。

他回顾在自动驾驶行业开展仿真工作的经历,说明安全关键系统需要反复测试大量现实中难以高频采集的场景。

仿真可以构造和修改场景,再让算法在不同条件下运行。价值在于更快形成测试与改进的循环,但结果需要与真实世界对照。

02

场景生成与机器人任务

讨论稀有场景、物理交互和数据。

他以行人突然出现为例:先选定一个较少见的场景,再改变行人的外观、位置和行为,生成更多变化以供训练或测试。

他认为自动驾驶和机器人都需要感知,但机器人操作还要面对接触、力、物体运动等物理交互,数据和仿真要求因此不同。

真实与合成数据如何配比取决于任务、质量和验证结果,访谈中提到的单一团队比例不应直接推广到所有机器人项目。

谢晨回忆自己从蔚来离开创业前的交接,认为产业合作让他看到了仿真与机器人结合的机会。这是他的个人经历。

03

从现实建立仿真

讨论物体、机器人和物理模型的校准。

Real2Sim 指把真实场景、物体和机器人映射到仿真环境。这个过程不仅要还原外观,还要处理可交互的物理属性。

他以冰箱门为例:铰链、磁吸、碰撞形状以及不同角度所需的力,都会影响机器人拉门的过程。

刚体、布料和液体的模拟难度不同。团队需要采集相关参数,并根据任务改进场景资产与仿真工具。

他指出,机器人的仿真模型也需要校准:如果模拟的手与真实手在负载或接触行为上不同,训练效果可能无法直接迁移。

在强化学习中,并行运行的环境数量和是否包含视觉感知会影响计算效率,因此精度和吞吐量之间需要权衡。

他介绍公司在资产制作、物理模拟和工具链上的工作,也提到与其他机构的合作。有关市场地位和客户关系的表述是他在访谈中的公司观点。

04

数据与产业分工

讨论团队、合成数据瓶颈和产业链。

讨论 Physical Intelligence 时,他认为研发团队需要在真实数据和仿真之间做取舍,并需要具备跨领域协作的能力。对其他公司的内部情况,他的说法只是个人了解。

两人谈到 Meta 与 Scale AI 的交易和数据产业竞争。对交易影响和人物战略的判断属于受访者观点,不是对未来结果的保证。

他认为仿真与现实之间的差距不会自动消失,需要通过物理校准、数据多样性和真实环境测试持续缩小。

他把具身智能产业粗略分为硬件、基础模型、软硬件结合的应用,以及以仿真为核心的服务等不同部分。

比较中美产业机会时,他讨论分工、资本和产品路线的差别,并给出自己对哪些公司适合做模型的判断;这些判断并非确定结果。

05

工具、规模与创业

讨论仿真工具、训练前景和创业经历。

他回忆英伟达内部对仿真的重视,把图形、计算和模拟联系起来,说明仿真不仅是视觉展示,也是构造和测试环境的工具。

对于游戏数据,他认为其多样性可能对预训练有帮助,但是否适用于特定机器人任务,还需要考虑物理信息和数据质量。

他认为具身智能仍处在早期,行业尚未找到被广泛证明的规模化配方。这个阶段性判断反映 2025 年的访谈背景。

回顾创业,他说组建人才团队和确定方向都经历了不确定性,需要从基础问题开始学习,并通过具体项目不断验证。

Mehr aus diesem Kanal

1:59:52EN
Zhang Xiaojun Podcast· 21. Okt. 2026Podcast · 2 StimmenDavid Qian on Succession, Robotics, and Finding His Own AmbitionGast: David Qian (Qian Cheng) · Moderation: 张小珺Ecovacs CEO David Qian reflects on inheriting a founder-built company, learning to lead through mistakes, and choosing a patient path in robotics. His account treats succession as an ongoing effort to build the company for a new era, not a finish line.Unternehmen & StrategieLeadershipCompany Building+2
2:51:18EN
Zhang Xiaojun Podcast· 15. Okt. 2026Podcast · 2 StimmenLindon Gao on Building Dyna Robotics and Finding a Path Through the FogGast: Lindon Gao · Moderation: 张小珺Dyna Robotics CEO Lindon Gao explains why his company builds intelligence through real workflows, how hardware and research must evolve together, and how a founder can find clarity by letting go of the need to be right.RoboticsProduct StrategyModelle & Training+2
2:51:18ZH
Zhang Xiaojun Podcast· 15. Okt. 2026Podcast · 2 StimmenDyna Robotics 创始人 Lindon Gao:从折叠任务到完整工作流Gast: Lindon Gao · Moderation: 张小珺从无人零售到机器人创业,Gao 讲述产品研究、真实部署的难题和在不确定性中寻找方向。RoboticsCompany BuildingFounders+2
2:34:18EN
Zhang Xiaojun Podcast· 3. Sept. 2026Podcast · 2 StimmenZeng Ming on AI’s New Era: Why Great Companies and New Organizations EmergeGast: Zeng Ming · Moderation: 张小珺Zeng Ming argues that AI is changing the foundations of business: models will become infrastructure, while new Agent-native applications and organizations create the next wave of value. His advice to founders is to embrace uncertainty, rethink strategy continuously, and build around meaningful work rather than inherited structures.AI StrategyUnternehmen & StrategieAgenten+2
2:34:18ZH
Zhang Xiaojun Podcast· 3. Sept. 2026Podcast · 2 Stimmen曾鸣:AI 产业化的三阶段与公司组织的消亡Gast: 曾鸣 · Moderation: 张小珺战略学者曾鸣以互联网、工业革命和电气化的历史周期为参照,提出 AI 正从基础设施走向 Agent 应用,并最终进入原生应用阶段。他认为,旧公司的科层制难以穿越范式转型,下一代组织将围绕任务、创造力和人机协同重构。AI StrategyStrategyAgenten+2
1:09:50ZH
Zhang Xiaojun Podcast· 19. Aug. 2026Podcast · 2 Stimmen苏庭灏:一位高中生的 AI 研究、教育与快乐Gast: 苏庭灏 · Moderation: 张小珺从自学 Transformer 和发表论文,到思考 AI 时代的学习、焦虑与人与人的连接。AI researchEducationMachine Learning+2