突发!Anthropic呼吁全员停止AI研究
是说芯语·2026-06-06 09:08

文章核心观点 - Anthropic公司发布长文博客,提出AI已进入“递归自我提升”阶段,其AI模型Claude正加速AI自身发展,可能实现AI自我设计和构建下一代AI [1][2][3][11] - 公司内部数据显示,Claude在代码生成、审查、研究等多个环节的能力已接近或超越人类,并呈现加速提升趋势 [4][7][10][11] - 这种“自进化”趋势可能彻底改变社会,带来巨大利益,但也可能因对齐问题叠加而导致失控 [12] - Anthropic与OpenAI近期均发布类似观点,表明AI自进化趋势已成为行业共识,发展速度可能超预期 [66][67][68][70] AI能力加速的衡量维度 - Anthropic创建了“AI能独立完成的任务时长”作为新衡量维度,Claude的能力从2024年3月的4分钟任务,提升至2025年的1.5小时,再到2026年的12小时,最新内测模型Mythos已能连续工作至少16小时 [18][19][20][21][22] - 该维度的翻倍速度从每7个月加速至每4个月,若趋势不变,2027年可能达到数周 [23][24] Claude在代码开发中的参与度与质量 - 截至2026年5月,Anthropic代码库中超过80%的代码由Claude编写,而在Claude Code发布前,这一比例仅为个位数 [4][5][27][28] - 2026年第二季度,工程师每日合并的代码量是2024年的8倍 [32] - 在最开放、模糊的编程任务上,Claude的成功率在六个月内从26%提升至76%,跳升50个百分点 [7][8] - 公司内部工程师认为,Claude的代码质量已与人类打平,并预计年内将超过 [10][11] - 公司使用Claude自动审查所有代码提交,回溯分析显示,此举可拦截约三分之一曾导致线上事故的bug [38] Claude在研究领域的创造力与效率 - 在优化小型AI模型运行速度的任务中,Claude Opus 4(2025年5月)将速度提升3倍,而Claude Mythos Preview(2026年4月)实现了52倍加速 [43][44] - 作为对比,熟练的人类研究员需4到8小时才能达到4倍加速 [45] - 在一项AI安全研究中,两名人类研究员花费约一周时间将问题差距缩小23%,而Claude花费约800小时、1.8万美元算力后,将差距缩小了97% [46][47] 人类在AI开发中的角色演变 - 人类在AI开发流程中的角色正在收窄,代码编写、代码审查、实验执行乃至部分实验设计环节已由Claude承担 [49][50] - 人类目前仅存的比较优势是研究品味和判断力,但Anthropic不确定这一优势能维持多久,可能像AI其他能力一样被突然掌握 [51] - 即便AI无法完全替代人类思考,仅通过承担所有执行任务,也能将人类研究员的精力聚焦于仅占5%的方向选择上 [53] 递归自我提升的可能演化方向 - 停滞:指数增长可能实为S曲线,受限于研究判断力、全新架构突破或能源、芯片等物理供应链瓶颈,但即便能力停滞在现有水平,也将对世界产生重大影响 [55][56][57][58] - 持续加速,人类主导:AI持续加速提升组织效率,但人类仍掌握主导权,这是Anthropic认为最可能发生的场景,但瓶颈会从一处转移至另一处(如从代码编写转移至代码审查) [61][62][63] - 完全的递归自我提升:AI实现自我迭代并构建下一代AI,发展速度完全取决于算力,人类退居监督角色,此能力可能迁移至其他科学领域带来全面突破,但也存在因对齐失败而最终失控的风险 [64][65]

突发!Anthropic呼吁全员停止AI研究 - Reportify