资讯

‘Gambling with our lives’: Anthropic researcher quits, warns against self-improving AI

TechCrunch·2026/9/9 15:02:47🔗 原文

📋总体概括

Anthropic研究员Jacob Coxon因对AI灭绝性风险的担忧辞职,公开警告反对研发自我改进型AI,并呼吁各大AI实验室之间达成节奏协议,放缓竞速式开发。此事折射出前沿AI公司内部对失控风险的真实焦虑:当模型具备自我改进能力,进步速度可能超出人类监管与对齐技术的承载极限。在AI人才竞争白热化的背景下,一名在职研究员以辞职方式发出警告,对行业的安全文化与治理节奏都是一次尖锐拷问。

关键信息

  • Anthropic研究员Jacob Coxon因AI灭绝风险担忧宣布辞职
  • 他明确警告不应开发具备自我改进能力的AI系统
  • 他呼吁各AI实验室之间建立节奏协议,协调放缓开发速度
  • 辞职行为本身被视为对前沿实验室安全承诺的公开质疑
  • 事件凸显AI竞速与安全对齐研究之间的结构性矛盾

🔥犀利点评

讽刺的是,这件事发生在Anthropic——一家以安全为立身之本的AI公司。连内部研究员都觉得是在「拿人命赌博」而选择出走,说明安全叙事与实际研发节奏之间隔着一条鸿沟。节奏协议听起来美好,但没有强制力就是一张废纸:谁先停谁吃亏,博弈论早就给出答案。真正的问题不是某个研究员的良心,而是整个行业把对齐研究当营销素材、把竞速当生存本能。自我改进AI的警钟,不该只靠离职者的告别信来敲。

本文由本站自动聚合,以下为原始来源:前往 TechCrunch 阅读全文