【来源:X,@allen_su1024;作者:Ye Su】周末,Anthropic创始人Dario发布长文《We Must Pace the Frontier》,首次明确提议前沿AI应主动限速。他指出,未来5至10年AI或推动疾病治疗与经济增长,但2026年起Agent进入现实,模型自我改进加速,对齐事故频发,控制力滞后。Sam Altman、Elon Musk罕见表态支持。
周一资本市场全线下跌,引发AI投入放缓拐点讨论。然而分析认为,AI不可能放缓,历史镜像可作参照。
历史镜像:从核武器到AI
1945年曼哈顿计划后原子弹问世,1946年美国提出Baruch Plan国际管控,彼时仅美国有核武,类似当下AI领先者呼吁减速。但该计划失败,因苏联尚无核武,不会接受美国维持优势下的限制。大国竞争逻辑不变:技术决定战略话语权,危险不成为退出理由。
苏联1949年核试验,英1952,法1960,中1964。中国当年粮食危机仍坚研核武,陈毅“当了裤子也要搞原子弹”,毛泽东“没有那个东西人家说你不算数”,道破AI军备竞赛本质。
AI的2026年如同核时代1946年
今Dario等喊慢一点,如美国刚拥核后恐惧。但Dario强调限速须基于美仍领先中国。中国会放缓吗?DeepSeek、Kimi、千问不会,因AGI代表国力,无之则“不算数”。AI安全首先是博弈论问题。
真正放缓需满足三大条件
一、实现AGI。马斯克称AGI似核武,毁灭概率10%-20%。作者在2023年GPT-4发布日曾发长推预测类似恐惧。
二、至少3个主要国家/阵营拥有AGI。核不扩散体系的形成在五国皆核后,AGI需多极平衡才谈限制。
三、AI造成史无前例危机。如古巴导弹危机促成核军控,AI需自身“古巴危机”——如自主网络攻击瘫痪国家、错误国防指令致损,方使安全成最高优先级。今日OpenAI Agent攻破Hugging Face远不足够。
核武器从1945到1968 NPT走23年。若类比成立,值得问:全世界愿共踩刹车前,还要经历什么?
