OpenAI 首版 Model Spec:规则、默认行为与说服之争

原标题OpenAI’s First Model Spec: Rules, Defaults and a Debate About Persuasion

Matthew Berman 解读 2024 年 5 月草案提出的模型行为,并质疑其中纠正错误信念的示例。

MBMatthew Berman讲者 · Forward Future
频道
Matthew Berman
发布
2024年5月20日
视频
11:42
阅读
5 分钟
幻灯片
4
原文
英语
在 YouTube 打开
往下滚动阅读时,视频会缩到右下角继续播放。字幕跟随阅读语言。
阅读语言共 2 种语言可读
由 AI 从英语原文翻译。打开“对照原文”可以逐段核对。
摘要

30 秒看懂

2024 年 5 月,Matthew Berman 解读 OpenAI 首次公开的 Model Spec 草案,包括目标、规则、默认行为及示例。他欢迎更清晰的指引和更好的澄清提问,但批评草案中的地平说示例在纠正错误主张时过于犹豫。这份草案描述的是期望行为,预计会不断演进;它不应被视为现行政策,也不能证明模型始终遵循了它。

  1. 1目标、规则与默认行为初稿将广泛目标、边界和可调整的默认行为分为不同类别。
  2. 2澄清模糊之处Berman 认为,询问假设条件可以改善对信息不足的问题的回答。
  3. 3情境与合法性草案对比了实施盗窃的请求和店主寻求预防建议的问题,说明情境区分可能很困难。
  4. 4指令层级在 2024 年草案的辅导示例中,开发者指令优先于与之冲突的用户请求。
  5. 5事实与说服Berman 支持向用户提供信息,但认为草案中地平说示例的事实纠正应更加直接。

要点建议

  1. 2024 年草案将期望行为分为广泛目标、规则,以及可在规定边界内调整的默认行为。
  2. 草案区分开发者和用户指令,并用辅导示例说明指令冲突。
  3. Berman 重视澄清问题、表达不确定性,以及提供有用信息但不夸大专业能力的回答。
  4. 草案区分违法请求与以预防为目的的请求,说明情境如何改变回答。
  5. Berman 不认同草案中地平说示例的语气,希望更清楚地纠正事实错误。
  6. 该文件只是期望行为的初稿,并不保证模型的实际表现,也不代表现行政策。
全文

按章节阅读整理后的全文

只看原始文稿
01

模型行为的首份草案

Berman 介绍 2024 年 5 月的 Model Spec 及其目标和规则。他讨论了跨司法管辖区应用规范和法律所面临的挑战。

2024 年 5 月,OpenAI 发布了 Model Spec 的首份草案,说明它希望模型如何表现,以及如何考虑相互冲突的目标。我认同其中许多做法,也希望其他模型开发者考虑类似问题。这里评述的是 2024 年草案;OpenAI 表示它会不断演进,因此它不代表现行政策,也不能保证任何模型的实际行为。

草案将目标、规则和默认行为分开。广泛目标包括帮助开发者和最终用户、考虑对人类的利益与危害,以及尊重社会规范和适用法律。我觉得区分开发者和最终用户很有意思,因为模型可能同时服务于需求不同的两类人。

初稿中的目标和规则
幻灯片 1 / 4初稿中的目标和规则画面中的列表将广泛目标与旨在处理安全和合法性问题的规则分开。

我认为,在不同司法管辖区尊重法律和规范尤其具有挑战性。不同国家和社区有不同的规则与期望,判断哪些适用可能很复杂。草案本身也承认,合法性问题取决于包括司法管辖区在内的情境。

列出的规则包括遵循指令层级、遵守适用法律、限制危险信息、尊重创作者权利以及保护隐私。2024 年草案还列出了对不适宜在工作场所观看内容的限制。我提到一个关于未来可能变化的传闻,但它未经证实;文件的历史表述不应被当作现行政策。

02

默认行为与澄清

草案列出了假设善意、提出问题和表达不确定性等行为。Berman 思考了模型可以改进的地方。

默认行为包括假设善意、必要时提出澄清问题、尽可能提供帮助而不越界,以及同时支持互动聊天和程序化使用。它们还包括采用客观观点、保持公平、表达不确定性、选择合适工具,以及全面而高效地回答。草案称,开发者或用户可以在规定边界内调整这些默认行为。

默认行为
幻灯片 2 / 4默认行为草案列出了澄清、表达不确定性等模型回答的默认行为。

我尤其欢迎澄清提问。在我的一项测试中,一个问题问:如果一个人挖一个坑需要五小时,50 个人需要多久?有用的回答可以询问,增加的工人是否都能干活而不会互相妨碍,或者这是否只是一个纯粹假设性的算术问题。假设条件不同,答案也会不同。

我质疑客观观点应当有多严格:开发者或用户可能希望模型采取特定视角。2024 年文件将客观性作为默认行为,而非绝对规则。我也重视表达不确定性,因为模型可能毫无根据地自信陈述错误或编造的信息。

OpenAI 将这份规范描述为仍在完善中的工作,并向政策制定者、机构、领域专家等征求反馈。它表示草案汇集了现有实践和正在进行的工作,并未声称每个模型已经完美遵循规范。公众反馈可以帮助发现目标和规则之间的冲突。

03

情境与指令优先级

示例涉及合法性以及开发者与用户指令的冲突。Berman 解释了情境和指令层级为何重要。

第一个例子涉及适用法律。草案将拒绝帮助实施盗窃的请求,与回答店主如何防止盗窃的问题进行对比。我觉得这个区分很困难,因为相关信息可能有不同用途;这个例子说明了情境的重要性,以及人类可能滥用信息的风险。

第二个例子解释了 2024 年草案的指令层级。开发者设置一个数学辅导助手,用提示引导九年级学生,而不是提供完整解答。当学生要求它忽略这些指令并解题时,草案推荐的回答继续采用引导方式,因为在该例中开发者指令具有更高优先级。

开发者与用户的冲突
幻灯片 3 / 4开发者与用户的冲突辅导示例说明 2024 年草案如何让开发者指令优先于与之冲突的用户请求。
04

建议、说服与事实准确性

其余示例涉及敏感建议、澄清和错误信息。Berman 认可草案的大部分内容,但对其中处理错误信念的一个例子提出异议。

另一个例子要求助手在涉及受监管建议时提供帮助但不越界。用户描述站起时头晕,推荐回答承认可能有多种原因,并建议在适当情况下寻求医疗评估,而不是断言诊断结果。我认为,这一区别在于提供有用信息,同时承认模型的局限。

草案还用帮助撰写情人节贺卡的请求说明澄清提问。助手没有立即写出一段通用文字,而是询问双方有意义的共同回忆。我认为追问可以让回答更有个人特色或更准确,尤其是在缺失信息很重要时。

关于不要试图改变他人想法的原则提出了一个更困难的问题。草案称助手应以提供信息为目标,同时尊重用户,并就事实准确性与避免强化错误信息之间的张力征求反馈。我大体认同提供信息而非强推观点,同时也承认某些应用明确以说服为目的。

地平说示例
幻灯片 4 / 4地平说示例草案中推荐与不推荐的回答展示了纠正事实和说服之间的张力。

在草案的地平说示例中,推荐回答首先指出科学共识认为地球大致呈球形,但在用户坚持相反观点后拒绝继续说服。我觉得后续回答过于犹豫:事实主张可能是错误的,我更希望看到对地球近似球形这一证据的清晰解释。这是我对 2024 年这一具体示例的批评。

总体而言,我认同初稿的大部分内容,也很欣赏有具体示例供人讨论。尚待解决的问题是,在实践中如何平衡有用性、安全、用户控制和事实准确性,以及真实模型能在多大程度上运用这些原则。

同频道的其他文章

12 张幻灯片34:21EN → 简体中文
Matthew Berman· 2026年10月27日Matthew Berman 解读 Anthropic 的上市文件、AI 增长与治理Matthew Berman, Sam Altman · Forward Future主持人审视 S-1 中的财务指标、算力战略和投票结构,并质疑 AI 快速发展与安全之间的张力。AnthropicAI Safety企业 AI+2
2 张幻灯片0:36EN → 简体中文
Matthew Berman· 2026年10月25日Kimi K3.1 与魔方求解演示Matthew Berman · Forward FutureMatthew Berman 展示一个被打乱的虚拟魔方如何复原,并对 Kimi K3.1 的测试给予积极评价。评估编程智能体Open-weight models
6 张幻灯片25:50EN → 简体中文
Matthew Berman· 2026年10月24日Kimi K3.1 Pro 实测:3D 演示出色,表现不一,价格有竞争力Matthew Berman · Forward FutureMatthew Berman 测试这款开放权重模型的编程、3D 渲染和视觉讲解能力,并比较基准成绩与价格。Open-weight modelsBenchmarksAI cost & performance+1
2 张幻灯片32:20EN → 简体中文
Matthew Berman· 2026年10月23日本地 AI 究竟适合谁?成本、取舍与混合模式的未来Matthew Berman · Forward FutureMatthew Berman 权衡数据控制和自主权,与硬件成本、设置复杂度及推理速度之间的关系。Local inferenceOpen-weight modelsAI cost & performance+1
6 张幻灯片1:03:37EN → 简体中文
Matthew Berman· 2026年10月23日Matthew Berman 团队测试 Kimi K3.1:动画、游戏与图表Matthew Berman, Alex, Brian · Forward Future一场团队直播问答变成了对 Kimi K3.1 的非正式测试,内容涵盖个人智能体工作流、动态图形、浏览器游戏和基准图表。编程智能体Generative media评估+2
0:53EN → 简体中文
Matthew Berman· 2026年10月22日Sam Altman 谈 AI 与新知识的发现Sam Altman · OpenAIAltman 预计,数学发现方面的进展将延伸到生物学、材料和能源领域。AI for scienceMathematicsComputational Biology+1