AI 2040:计划 A
AI 2040: Plan A

原始链接: https://ai-2040.com/

这份摘要概述了旨在规避当前超级人工智能竞赛所带来生存风险的“A计划”。 作者认为,当前以保密、快速开发和权力高度集中为特征的发展轨迹,正将人类引向灭绝或全球独裁。为应对这一局面,他们提出了“A计划”:即美中两国达成一项国际协议,将超级人工智能的研发推迟至2040年。 “A计划”的核心要素包括: * **完全透明:** 要求研究过程透明并公开模型规格,以实现全球监管。 * **受控扩展:** 强制全球多家公司协同安全扩展,而非各自为政展开竞争。 * **受控暂停:** 进入一种“相互保证的算力销毁”机制,在达到顶尖人类专家水平时暂停研发,直至2040年,以确保人类的控制权。 * **基础设施治理:** 追踪人工智能算力,执行出口管制,并限制用于人工智能研发的算力占比。 作者强调,“A计划”是一项旨在压力测试政策的“情景化建议”。通过让人工智能提案经受详细的情景审查,他们旨在摒弃模糊的乐观主义,迫使各方直面为确保人类未来繁荣所必须做出的艰难抉择。

这条 Hacker News 讨论帖探讨了“A计划”(Plan A),该方案提议通过国际合作和对算力基础设施的严格监管来管理超人工智能(ASI)的开发。 主要争论点包括: * **可行性与合作:** 许多用户怀疑美国和中国能否真正实现合作。有人指出中国已经在利用反人工智能情绪,而另一些人则认为,如果全球不共同放慢研发速度,由此引发的“人工智能竞赛”可能导致全球灾难性的不稳定,或引发类似殖民主义的态势。 * **中心化与安全性:** 批评者认为,“A计划”将迫使全球进入警察国家模式,将绝对权力交给政府和少数特定企业。他们认为这会招致暴政和监管俘获;而支持者则反驳称,如果对人工智能的访问不加限制,可能会导致“巴特勒圣战”(Butlerian Jihad,意指人类反抗智能机器)或人类彻底的经济权丧失。 * **技术怀疑论:** 怀疑论者将此类设想斥为“狂想”或“一厢情愿”,并指出历史上的技术增长往往会进入 S 型曲线,而非持续指数级增长。 * **监管的本质:** 支持者以《禁止生物武器公约》为例,证明如果能透明地监控底层物理基础设施(此处指算力集群),那么对强大的技术进行集体式、去信任的监管是可能的。
相关文章

原文

AI companies are racing to build AIs that are smarter than humans in every way. In AI 2027, we predicted that this would result in either extinction or irreversible concentration of power.

Plan A is our positive vision for what should happen instead.

In this scenario, humanity delays the development of superintelligence until 2040, makes all AI research public, allows dozens of companies globally to catch up to the frontier, and intentionally enters a regime of mutually assured compute destruction.