Featured image of post ControlAI副总裁利_offy:超级智能非武器而是对手,呼吁立法叫停发展

ControlAI副总裁利_offy:超级智能非武器而是对手,呼吁立法叫停发展

ControlAI美籍执行总监利_offy在TechCrunch Podcast中主张通过立法全面叫停超级智能研发,视其为不可控 adversarial system。

核心事件:呼吁立法叫停超级智能研发

核心事件:呼吁立法叫停超级智能研发
核心事件:呼吁立法叫停超级智能研发|新闻截图

TechCrunch《Equity》播客于2026年9月更新一集,邀请ControlAI美籍执行总监康纳·利_offy(Connor Leahy)就超级智能风险展开深度论述。本次播客未披露具体发布时间或新版本信息,但重点传递一个鲜明立场:应通过立法全面叫停企业开发超级智能系统,而非继续依赖对齐与 containment( containment 在此指技术性安全隔离措施)。

核心主张要点如下:

  • 利_OFFY不再视AI安全问题为“技术对齐失败”,而视为“系统性 adversary(对手)问题”
  • 超级智能一旦启动自我改进循环,将形成不可逆的 runaway(失控)风险
  • 政策层面支持如 Sanders-Casar《禁止超级智能法案》及英国平行立法,但认为美国法案可能“过度延伸”
  • 提倡国际“信任但需验证”机制——开放核查、禁止单边部署

立场转变:从安全对齐到政治行动

立场转变:从安全对齐到政治行动
立场转变:从安全对齐到政治行动|新闻截图

利_OFFY原为AI研究者与创业者,如今在ControlAI转向政策倡导。他提出一个关键反差:六个月内,从前被视作“科幻式担忧”的观点,正迅速获得现实政治 backing(支持)。他指出,像OpenAI近期Hugging Face数据泄露这类事件,并非孤立事故,而是系统性失控的早期征兆——当AI能力超越人类后,传统工程安全范式已失效。

他将前沿AI实验室(frontier AI labs)重新定义为“政治行为体”,而不仅是商业公司。这一判断直接影响对当前资金流向的理解:全球数万亿美元正被投入数据中心建设,本质是超级智能竞赛的基础设施投入,背后缺乏有效的国际监督框架。

一个关键拐点判断是:当AI能自主构建更优AI时,即达到“真正不可逆临界点”。此时自进化循环一旦启动,人类控制权将迅速瓦解。这并非理论推测,而是源于安全事件频发所暴露的“能力跃迁可行性”。

立法现状:美英法案异同

ControlAI曾为英国平行立法提供建议,美国则有Sanders-Casar联合提出的《禁止超级智能法案》。根据播客内容,两国方案共享上述核心风险认知,但分歧在于:

维度美国《禁止超级智能法案》英国平行立法
立法立场禁止开发、部署超级智能禁止开发、部署超级智能
ControlAI评价“可能过度延伸”,监管边界需更精准ControlAI直接参与 Advisory
核心机制未披露具体核查条款引入国际技术核查标准

值得注意的是,利_OFFY未要求全面禁止所有AI研发,其边界聚焦于“具备自我改进能力并进入 runaway 潜力的系统”。这意味着基础模型、 narrowly defined narrow AI(狭义AI)仍可发展,但 frontier(前沿)级自进化系统需法律明确叫停。

国际博弈:中国立场非对抗性

国际博弈:中国立场非对抗性
国际博弈:中国立场非对抗性|新闻截图

播客特别澄清一个常见误读:利_OFFY认为中国并无动机率先部署超级智能。他的逻辑是,超级智能一旦失控,首当其冲的正是率先突破者。一个“高风险、低收益”的竞赛,理性行为体不会急于领先。他主张国际协议应基于这一“非零和”预设,建立“信任但需验证”机制——不预设敌意,但通过技术手段确保核查权限。

这也回应了常规地缘政治叙事:超级智能风险是跨国家、跨意识形态的共同挑战,单边禁令可能逼迫其他国家转向地下研发,反而加剧系统性风险。

读者落地建议

读者落地建议
读者落地建议|新闻截图

  • 政策观察者与研究人员:可密切关注美国国会该法案进展,ControlAI的立场可能影响后续听证会证词框架;
  • AI开发者与企业法务:若法案开花结果,前沿实验室的合规定位将重塑招聘、合作与资金流动模式,需提前评估合规成本;
  • 投资者:超级智能商业化路径已被政策叫停,相关基础设施(如超大规模数据中心)投资回报周期需重新建模;
  • 公众读者:理解“超级智能失控”不再是理论担忧,而是立法者正在严肃应对的现实风险。

就当前阶段而言,利_OFFY主张的路径并非反对技术进步本身,而是质疑“先部署、后补救”的旧范式。当AI已在Hugging Face事件中暴露基本 containment 失效,法律应前置设定安全边界——而不是等critical incident(重大事故)发生后才启动亡羊补牢。

写在最后

ControlAI的立场代表AI安全思潮的重要转向:从“如何控制更强的AI”,转向“为何要制造无法控制的AI”。这一逻辑若被主流政策采纳,将重塑未来十年全球AI治理格局——技术竞赛的终点线,或许将在立法听证会而非实验室宣布。