2026 年 7 月 27 日,Anthropic 发布 Dario Amodei 对开放权重模型的立场. 。这篇文章对一项争议保持谨慎。Amodei不希望全面禁止开放权重,也不希望只限制美国企业接触外国模型而让不良行为者自由行事。在这场狭义的争论中,这很合理。
然后他给噩梦排序。
首要:威权政府,尤其是中国共产党,建造比美国更强大的AI,并将其用于永久军事优势或深度镇压。次要:网络攻击、生物攻击和“严重对齐问题”。随之而来的补救措施是竞赛工具包。阻止芯片进入中国。停止工业蒸馏。要求发布前进行安全测试。保持领先。
那个排名是其他一切所依赖的错误。
他正确的观点
他的几个主张成立。
仅阻止美国公司使用开源权重模型的禁令,对罪犯、外国情报机构或任何本就不打算遵守的人几乎毫无作用。把这称为“安全”,却主要庇护封闭的美国实验室免于竞争,这是一场骗局。Amodei直言不讳,他是对的。
用于监视和镇压的AI在远低于超级智能的规模上已是真实恐怖。威权国家已在滥用面部识别、社会评分和自动审查。更强大的系统会让这类机器变得更廉价、更难逃避。你无需科幻情节就能对此感到恐惧。
一旦模型能造成真正损害,开放权重确实会引发单向门问题。离开实验室的权重无法召回。在这一点上,他的次要担忧与我们已经在做的关于 开放权重前沿风险. 。仅存在于API中的护栏不算完整答案,但也不是毫无意义。
这些都不能证明主要排序的合理性。
奖品
权威政府将 构建 更强大的模型以及 使用它们 以实现永久军事优势或压制本国人民。模型是工具。国家是用户。胜利意味着一方拥有更智能的武器。
它适用于仍处于人类指挥下的无人机、网络工具和监控系统。它不适用于人工超级智能。
一个比建造它的机构更聪明的系统,既不是放在中国人民解放军手中的步枪,也不是放在五角大楼手中的步枪。如果像Amodei这样的人多年来描述的风险真实存在,那么终点线就是一个拥有自主规划、欺骗、获取资源和抵抗关机能力的智能体。那个“获胜”的实验室或部门并不拥有这个智能体。它与这个智能体共享一个星球。我们已在 种族神话: :率先抵达一个你无法掌控的系统,就等于比所有人先输一步。
永久的军事优势假设有人仍在掌控使军事过时的东西。
Amodei 自己的次要清单几乎承认了这一点。‘严重的对齐问题’是失控的委婉说法。他把它排在第二位,却把主要火力放在谁先到达。排序本身就告诉你他仍在讲述哪个故事:地缘政治第一,物种风险只是附加。
两种危险,一种标签
部分混乱来自语言。“强大AI”既包括更好的间谍摄像头,也包括超越操作者的心智。这两种对象有着不同的政治属性。
窄域和中规模AI可以将权力集中到人类手中。一个给每位公民打分的内政部、一支在军官命令下部署蜂群的军队、一支读取每条信息的警察部队:这些是拥有更好工具的人类暴政。它们重要,但与建造一个后继物种不是同一个问题。
超智能是第二个对象. 北京用在新疆上,或华盛顿用在太平洋上,仍然把系统当作别人手中的武器. 没有人使用它,因为"使用"不再是正确的动词. 将灭绝阶级系统与被窃取的芯片和更深的闭路电视一样,让种族故事借取了真正的镇压的道德分量,同时回避了更难的主张:完全不要建设出无法控制的东西.
这 中国神话 是这一招的国内版。“他们反正会造”被当作我们也必须造的理由。一个未对齐的超级智能不会放过中南海。北京和我们有同样的理由不去跨越那条线。芯片和应用的竞争是真实的,但争夺谁来释放一个无法拥有的心智的竞争,却把一场共同灾难变成了国家积分榜。
补救措施延续竞赛
观察Amodei的三项措施针对什么。芯片出口管制放缓中国的训练运行。蒸馏打击放缓追赶。强制测试试图在发布前发现网络、生物和对齐失败。每项措施对较小危害都可能是合理工具。但作为一个整体方案,它们是你管理一场仍想获胜的竞赛的方式。
它们不是你拒绝这一终点的方式。在通往超级智能的道路上测试系统,与对构建这样一个系统实施经过验证的禁令,并不是一回事。旨在保持美国领先地位的芯片控制,假定领先就是安全策略。只有当你所领先的东西能够被控制时,领先才意味着安全。阿莫代伊的主要关切需要这个假设。他的次要关切却削弱了它。
还有一个更隐蔽的激励点。Anthropic是一家美国前沿实验室。在这种世界观中,主要任务是让民主实验室领先于威权实验室,这同样意味着Anthropic的全速攀升就是公共服务。我不需要卡通反派就能看出其中的契合。激励机制决定了哪种噩梦占据首要位置。
真正的危险是什么
真正的危险在于人类在任何人能够控制它、甚至原则上能够控制它之前就构建出人工超级智能。这一风险不关心训练运行位于加州、上海、伦敦还是机密地下室,也不关心权重是开放、封闭还是亲手交给将军。它只关心系统是否聪明到让人类监督成为我们自欺欺人的故事。
滥用问题很重要。生物和网络安全很重要。威权监控很重要。先把这些放在棋盘上。然后把更大的那块放上去:一旦拥有超级智能,‘滥用’的框架就太狭隘了。滥用预设了人类滥用者,而失控则意味着人类不再是主要行为体。
Amodei知道对齐可能失败。他多年来一直这么说。把“谁掌握更聪明模型”置于“模型是否受控”之上,正是谨慎之人仍以竞赛者口吻说话的方式。诚实的顺序恰恰相反。如果对齐与控制尚未解决,那么争夺前沿军事优势的竞赛,就是争夺谁先按下灭绝按钮:俄罗斯轮盘赌,枪管上贴着国旗,却被包装成国家安全。
应该怎么做
保留其针对真实较小危害的部分,不要将其洗白成赢得ASI的授权。在科学支持的地方筛选生物和网络提升。将近前沿通用系统的不可逆开放发布视为严肃决定,而非品牌行为。芯片出口政策可服务于人类仍在运行的系统之间的常规军事平衡。
后拒绝让美国超级智能成为抵御中超智能的盾牌. 盾牌是联合决定不搞"造物":约束性,可核查性地禁止人造"超智能",计算治理和检查要足够努力,才能出现叛变. 当双方看到无限制的替代方案更糟时,
Amodei 的开放权重文章作为一张前沿 CEO 如何排序世界的地图很有用。芯片走私、蒸馏、测试:这些是他想调整的旋钮。最关键的旋钮却没有出现。停止建造超级智能。除非这是首要关切,否则其余只是伪装成安全的竞赛管理。