美国METR研究所完成了一项针对AI编程工具影响的实验研究。他们发现，经验丰富的开源开发者在使用AI编程工具时，完成任务的时间平均增长了 19%。 这与开发者自己的感知完全相反。毕竟，参与研究的开发者普遍都相信，AI将提升他们的效率。 在任务开始前，他们预测AI能让自己提速24%。可现实数据冷冷地指出：AI让他们"看似飞快，实则拖慢"。 图注：当研究参与者可以使用像 Cursor Pro 这样的AI工具时，任务实际上耗时增加了19%。 图注：实验设计。在分配条件前定义任务，通过屏幕录制验证执行情况，并利用专家与开发者的预测衡量预期与实际结果的差距。 实验共追踪了16名高级开发者，这些开发者在各自的开源项目中完成了246个实际任务，任务涵盖复杂模块的开发与修复，工作负载真实而具体。 每个任务被随机分配到两个组：一组使用AI工具，另一组不使用。 AI组开发者主要使用的是Cursor Pro，集成了Claude 3.5和Claude 3.7 Sonnet等主流大模型。 开发者在整个过程中录屏，并记录完成每个任务所花费的时间。为了剔除任务难度差异的干扰，研究人员采用了统计方法，引入开发者对任务时间的预估 值作为参考。 ...