国际AI安全治理的理由:问题所在、所需措施,以及证明其可行的先例。
人工超级智能(在每个领域都超越人类智能的系统)正由监管极少的私营公司积极开发。领先人工智能实验室已在内部表示,预计将在本十年内达到这一门槛。
与以往技术风险不同,超级智能尚无任何现有国际治理架构。没有条约、没有核查机构、没有多边安全标准,也没有在出现警告信号时叫停开发的机制。治理空白是彻底的。
国际治理框架需要数年谈判才能建立。《核不扩散条约》在首次核试验后历经十年外交;《蒙特利尔议定书》则在实现多边采纳前需要持续的科学共识构建。
AI能力开发正在加速。曾经需要数年才能取得的改进,现在只需数月。一旦出现足够强大的系统,可能就太晚了,无法施加有意义的约束。治理必须先于能力,而非跟随其后。
超过500名AI科学家,包括诺贝尔奖得主杰弗里·辛顿和约书亚·本吉奥,以及OpenAI和DeepMind的CEO,签署了2023年声明,将灭绝级AI风险称为“与流行病和核战争同等的全球优先事项”。
UK政府于2023年成立了全球首个AI安全研究所(现为AI安全研究所)。EU《人工智能法案》引入了AI系统的强制风险分类。US人工智能行政命令要求对前沿模型进行安全评估。国际框架尚不存在,但政治意愿正在形成。现在正是行动的时刻。
Nakada Foundation to Save Humanity倡导国际人工智能安全治理。我们提供政策专业知识、公众教育和倡导支持。欢迎联系我们,为你的办公室或团队安排简报。