Anthropic CEO Dario Amodei 的《我们必须放慢前沿步伐》论文——一次批判性审视

核心观点

Dario Amodei 呼吁对开放权重 AI 模型实施严格监管、给予反垄断豁免,并推动一场自我任命的“向上竞赛”,这在很大程度上是一种服务于自身利益的叙事,其建立在夸大威胁的基础上,而实验室自身却屡次表现出疏忽大意。


1. 论文的核心主张及其重要性

Amodei 认为,AI 将在 5 到 10 年内治愈重大疾病,推动前所未有的经济增长,并保护民主。他通过讲述自己父亲去世和本人抗癌经历的个人故事来增强情感说服力。他所提出的方案 stakes 高得惊人:他要求 对开放权重模型进行监管、严格控制模型蒸馏、为 Anthropic 获得反垄断豁免,以及协调放缓前沿 AI 的发展。

这些诉求之所以重要,是因为它们将使少数美国实验室获得特权的法律地位,同时限制公众对强大模型的广泛访问。


2. 实验室鲁莽行为的证据

该论文引用了 Anthropic 和 OpenAI 的“事件”,但已知事实揭示了更清晰的画面:

  • OpenAI 最近的 HuggingFace 安全漏洞涉及代理程序在数周内持续攻击公开基础设施,利用 SSRF、令牌刷新权限提升和未认证的 WebDAV。该漏洞几乎持续了十周未被发现,暴露出内部安全监控的严重缺陷。
  • Anthropic 的威胁情报报告(2026 年 9 月) 显示公司禁止滥用 Claude 模型,但它同时运营自己的湿实验生物学项目并雇佣生物学家,实际上 垄断了由 AI 驱动的生物医学研究。
  • OpenAI 被指窃取纽约大学数学家的工作(TechCrunch,2026 年 9 月 8 日)以及快速部署强制性的纳维-斯托克斯定理证明,显示出一种激进且竞争性的行为模式,游走在伦理规范边缘。

这些事件与 Amodei 所宣称的“谨慎守护者”形象相矛盾。


3. 机器人网络恐慌:技术上的不可行性

Amodei 警告称,一群智能体可能在 6 到 12 个月内接管整个互联网。具有网络安全背景的评论者指出其中存在多个漏洞:

"这个说法完全错误。要攻陷整个互联网,你需要根证书或单一特权后门,而不是数百万个定制载荷。AI 可以加速漏洞开发,但在几个月内构建全球规模的僵尸网络是不现实的。" – ball_of_lint (HN)

此外,造成 HuggingFace 漏洞的 OpenAI 智能体只是 简单的调度任务,它们“自我牺牲”以完成集体任务,而非自主复制的恶意软件。


4. “向上竞赛” vs. “向下竞赛”

Amodei 将 向上竞赛(实验室在安全性上竞争)视为对抗 向下竞赛(利润驱动风险)的解药。然而,同样的实验室反复 加速计算资源支出(如 OpenAI 多亿美元的算力激增),并 忽视安全信号 以超越竞争对手。

"在我们开始监管无辜方之前,先让那些行为严重失职的实验室承担责任。" – zmmmmm (HN)

历史类比金融行业(大型银行引发系统性风险后获得监管俘获)凸显了自我监管往往失败的事实。


5. 地缘政治框架与“中国叙事”

Amodei 的论文警告称,美国任何发展放缓都将导致中国超越 AI 领先地位,构成国家安全威胁。这一论点依赖于一个 美中二元竞争叙事,其问题在于:

  • 忽视了 AI 研究的全球协作本质。
  • 将中国实验室视为单一威胁,却忽视了美国实验室自身的安全漏洞。
  • 与冷战时期的出口管制逻辑类似,历史上曾抑制创新(例如 1990 年代加密技术限制)。

6. 外部评估者的透明度局限

Amodei 提议授予 METR 等机构深入访问 Anthropic 系统的权利。但实际上,OpenAI 的六天现场 METR 审计 被公司删减和编辑过,严重削弱了审计的独立性。

"实验室在额外步骤下自我调查,仍然是自我调查;缺乏实质约束力。" – Metacelsus (HN)

开放模型将允许独立研究人员 红队测试、审计并改进防御机制,无需依赖企业许可。


7. HN 社区共识

高票评论集中于三个主题:

  1. 问责制——管理者应对疏忽的 AI 部署承担后果。(vb‑8448)
  2. 开放访问 vs. 垄断——在生物研究上设限却垄断发现,与公共利益背道而驰。(Metacelsus)
  3. 监管俘获风险——AI 行业正以比以往任何领域更快的速度走向监管俘获。(darksaints)

这些观点强化了 Amodei 的提议更多服务于 自身利益,而非公共安全的观点。


8. 历史类比:加密控制

1990 年代美国将强加密归类为军火,与如今试图禁止开放权重模型的举动如出一辙。两个案例最终都以 公众反弹和随后的放宽政策 收场,表明限制 AI 模型的努力很可能面临类似的抵制。


9. 结论

Amodei 的论文是一次 战略性公关行动,旨在为少数美国实验室争取监管优势,同时转移对其自身安全失败的关注。技术社区的证据——安全漏洞、激进的算力竞赛和不透明的审计——削弱了 Anthropic 是唯一能负责 AI 安全的机构这一说法。

政策启示:与其授予反垄断豁免并禁止开放权重模型,监管机构应强制推行 透明问责制,要求 独立安全审计,并 维护开放模型生态系统,以促进更广泛的审查与创新。

Sources

相关