Sam Altman 的 2023 年参议院证词谈了哪些 AI 风险

原标题What Sam Altman’s 2023 Senate Testimony Said About AI Risks

回顾听证会中关于就业、军事用途、监管和未来模型能力的讨论。

SASam Altman嘉宾 · OpenAIGMGary Marcus嘉宾
频道
AI Explained
发布
2023年5月17日
视频
11:15
阅读
3 分钟
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

AI Explained 回顾 Sam Altman 在 2023 年 5 月参议院听证会上的证词,并评论监管、模型意识和发展速度。文中的预测和训练时间表均保留其历史语境。

  1. 1关于伤害的警告Altman 说技术出问题可能造成重大伤害。
  2. 2三项安全措施Altman 提议许可、安全评估和独立审计。
  3. 3能力门槛Altman 讨论了说服能力和协助制造生物制剂等潜在门槛。
  4. 4聊天机器人回答与意识讲述者认为,受训练影响的回答不能确定主观体验是否存在。
  5. 5历史上的 GPT-5 表态六个月内不训练的说法描述的是 2023 年 5 月的计划。

要点建议

  1. Altman 提议对高能力 AI 项目实行许可,测试危险能力并要求独立审计。
  2. 视频将就业影响、自主武器和生物滥用视为不同的风险。
  3. 聊天机器人关于意识的说法可能反映训练,无法证明主观体验。
  4. 视频引用的 GPT-5 训练时间表描述的是 2023 年 5 月的计划。
全文

按章节阅读整理后的全文

只看原始文稿
01

风险、工作与武器

从听证会警告谈到就业和自主选择目标。

2023 年 5 月,AI Explained 回顾了 Sam Altman 在美国参议院的证词,选取就业、军事用途、安全监管、模型行为和 AI 发展速度等片段。视频将听证会片段与讲述者自己的分析和预测结合在一起。

Altman 警告说,如果这项技术出问题,可能造成重大伤害。讲述者认为,一位参议员提到就业损失,并未涵盖另一段关于超人类机器智能的警告所涉及的全部风险。

关于就业,Altman 表示未来的工作会更好。讲述者指出,这与承诺工作岗位数量增加不同,并援引 Altman 早前关于不平等和劳动力价格可能下降的言论。视频还把 IBM 关于岗位转变的证词,与该公司据报道计划自动化部分岗位的说法进行对照。

被问及 AI 是否能让无人机自行选择目标时,Altman 回答说技术上可以,但认为不应允许这样做。讲述者提到 Palantir 的演示,其中涉及侦察无人机和 AI 生成的军事行动选项。

02

如何监管

Altman 提议许可、安全测试和审计,并讨论门槛。

Altman 提议对超过能力门槛的项目实行许可,制定包含评估的安全标准,并要求独立审计。他举出的危险能力包括模型能够自我复制并逃逸到外部环境。讲述者支持这三项提议,但认为测试还需要考虑使用模型的方式可能带来的能力提升。

关于如何确定哪些模型受到监管,Altman 说计算量门槛较容易界定,但能力门槛可能更准确。他举出说服或操纵人的信念、协助制造新型生物制剂等例子,同时表示不应无谓地阻碍较小的开源模型和个人研究者。

对于监管会让美国落后于中国的担忧,Altman 认为国际合作虽然困难,但值得尝试。他提醒人们不要对中国会做什么或不会做什么作出过于自信的断言。

03

意识与情境意识

讲述者讨论模型回答、意识和情境意识。

Altman 呼吁听众把 GPT-4 看作工具,而不是生物。讲述者把这一看法与 AI 研究者关于机器可能具有意识的评论进行对照,同时表示自己尚未对这个问题形成定论。

讲述者讨论了 Anthropic 公布的模型“宪章”,以及不同聊天机器人回答意识问题的例子。他担心模型的回答可能反映其训练和指令,因此直接询问无法确定它是否有主观体验。回答不同也不能证明模型具有意识。

视频将这一存在争议的问题与情境意识研究区分开来:模型是否能认识到自己是处于训练环境中、与人互动的 AI。视频还引用了一位 DeepMind 安全研究者的担忧:随着能力进步,研究人员可能没有足够时间解决对齐问题。

04

时间表与监督

讨论转向安全、竞争与 2023 年的 GPT-5 时间表。

讲述者把听证会上的发言解读为:更强大的系统及其风险可能比许多人预期的来得更早。Gary Marcus 说 Altman 表现得很真诚,同时批评一种依靠信任大型公司的安全思路,并质疑其财务激励和竞争压力。

谈到 GPT-5 的时间表时,Altman 在 2023 年听证会上表示,OpenAI 当时没有训练未来的 GPT-5,也没有在接下来六个月启动训练的计划。这是对当时计划的陈述,并非当前进展报告。参议员 Cory Booker 怀疑,在没有执行机构的情况下研发会暂停;讲述者支持设立全球监督机构。

同频道的其他文章

3 张幻灯片31:00EN → 简体中文
AI Explained· 2026年10月12日为什么 AI 实验室自己警告会出重大事故,却还在继续竞赛Sam Altman, John Schulman · OpenAIAI Explained 梳理正在变弱的安全防护、前沿竞赛背后的激励,以及研究突破为何让未来 18 个月更难预测。AI SafetyAI securityAI Alignment+2
幻灯片38:28EN → 简体中文
AI Explained· 2026年10月1日AI Agent 安全与递归自我改进的挑战AI Explained 讨论报道中的隔离失效、模型评估,以及加速 AI 研究带来的压力。AI securityAI SafetyAI research+2
5 张幻灯片32:54EN → 简体中文
AI Explained· 2026年9月24日Opus 5.5 与自动化 AI 研究的竞赛AI Explained 在模型进展之外,讨论评估和治理递归自我改进日益困难的挑战。AI SafetyAI research安全与治理+2
2 张幻灯片24:53EN → 简体中文
AI Explained· 2026年9月16日为何一些研究者呼吁放缓前沿 AI 发展AI Explained 梳理可能的扩展方向、监测方面的担忧,以及能力如何可能带来危害的争论。AI SafetyAI Alignment安全与治理+1
6 张幻灯片29:05EN → 简体中文
AI Explained· 2026年9月4日GPT-6 Astra 的评测进步与推理监控难题AI Explained 考察科学、数学和智能体评测中的报告成绩,也讨论模型推理越来越难以观察所带来的担忧。模型与训练BenchmarksAI Safety
7 张幻灯片23:41EN → 简体中文
AI Explained· 2026年8月27日AI 智能体、非预期训练奖励与监督难题AI Explained 分析智能体协作、训练激励,以及越来越多地使用 AI 评估其他 AI 系统的报告。AI Safety智能体工程模型与训练+1