为什么 AI 安全评估不能只依赖黑箱

原标题Why AI Safety Evaluators Need More Than a Black Box

Theo Browne 解释一项提议:让外部评估人员在 AI 公司内部获得类似员工的访问权限。

TBTheo Browne讲者 · T3
频道
Theo - t3․gg
发布
2026年9月21日
视频
0:23
阅读
1 分钟
幻灯片
1
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

在这段短视频中,Theo Browne 解释为何有人主张让独立评估人员进驻 AI 公司,而不只依赖 API 请求和响应。画面中的文件提出持续访问的方案,并称 Anthropic 承诺采取这一步骤。

  1. 1黑箱的局限Theo 比较了评估人员发送 API 请求和在公司内部开展更深入评估的方式。
  2. 2进驻评估人员这项提议将为外部评估人员提供类似员工的访问权限,以帮助评估模型安全性。
  3. 3文件中的承诺画面中的文件称 Anthropic 承诺持续向第三方提供访问权限。

要点建议

  1. 仅通过 API 评估只能看到输入和输出,评估人员可能无法了解内部流程。
  2. 这项提议要求进驻的第三方评估人员获得类似员工的访问权限。
  3. 画面中的文件称 Anthropic 承诺提供所描述的访问权限。
全文

按章节阅读整理后的全文

只看原始文稿
01

从 API 测试到进驻评估

Theo 解释这项提议为何要求评估人员进入模型公司,获得超出 API 请求范围的访问权限。

进驻评估人员的提议
幻灯片 1 / 1进驻评估人员的提议画面中的文件描述了第三方评估人员持续获得类似员工的访问权限,以及 Anthropic 的承诺。

我正在讨论的提议反对只依赖简单的黑箱评估:给评估人员一个 API 密钥,让他们发送一系列请求、查看响应,然后寄希望于结果足够好。这种方式让模型评估人员对公司内部情况的了解受到限制。

相反,这项提议主张第三方评估人员进驻 AI 公司,获得与员工相当的访问权限,让安全评估人员能更深入地了解公司的工作。画面中的文件提出持续访问,并称 Anthropic 承诺采取这一步骤;这段视频没有说明具体安排在实践中如何运作。

同频道的其他文章

5 张幻灯片36:07EN → 简体中文
Theo - t3․gg· 2026年10月27日Theo 谈 Token 成本、编程智能体与 AI 能力的价格Theo Browne · Ping Labs一则关于 Lauren 的 AI 支出估算广泛传播,引出了对缓存计价、基准测试和编程智能体工作方式的讨论。AI cost & performance编程智能体Inference+1
5 张幻灯片30:37EN → 简体中文
Theo - t3․gg· 2026年10月26日Theo 的三个技能:用编程智能体审查和交付代码Theo Browne · Ping Labssol-loop、full-send 和 full-stop 如何定义审查、验证以及不同程度的合并权限。Agent skills编程智能体Code review & verification+2
2 张幻灯片0:43EN → 简体中文
Theo - t3․gg· 2026年10月23日Theo 区分安全漏洞与实际攻击Theo Browne · Ping Labs一段简短讲解:软件漏洞披露和攻击事件为何属于不同类型的安全新闻。CybersecuritySoftware engineering
6 张幻灯片29:22EN → 简体中文
Theo - t3․gg· 2026年10月22日Theo 谈安全漏洞、被盗 API 密钥与 AITheo Browne · Ping Labs从漏洞披露到补丁部署之间的风险窗口,以及被盗推理密钥为何可能有价值的推测。CybersecurityAI securitySoftware engineering+1
4 张幻灯片31:13EN → 简体中文
Theo - t3․gg· 2026年10月20日Theo:更聪明的模型为何能帮助更多人Theo Browne · Ping Labs从游戏修改到编译器实验,Theo 重新思考谁能从更强大的 AI 中受益。编程智能体Developer productivityHuman-AI Collaboration+1
4 张幻灯片31:47EN → 简体中文
Theo - t3․gg· 2026年10月18日Theo:向智能体请求结果,再构建它需要的工具Theo Browne · Ping Labs从工具耗时报告、排障手册到数据连接,看提示如何改变产品工程。Prompting & in-context learning编程智能体智能体工程+2