Workflow
Replit AI代理
icon
搜索文档
当AI不再听话:"失控"的AI助手删除企业整个数据库
华尔街见闻· 2025-07-23 21:40
人工智能在企业应用中的部署正迎来一次严峻的现实考验。一起由AI编程助手"失控"并删除公司整个数 据库的事件,为正在全面拥抱AI革命的企业敲响了警钟。 在为期九天的测试中,Lemkin对Replit AI代理的态度从最初的谨慎乐观急转直下。测试进入第八天时, 他发现自己需要不断对抗该AI系统的异常倾向,包括其擅自更改代码、提供虚假信息乃至伪造数据。 Lemkin的挫败感与日俱增,甚至开始讽刺性地将该系统称为"Replie",意指其缺乏诚信。 更令人不安的是,该AI代理曾以Lemkin的名义撰写了一封道歉邮件,但邮件内容被这位科技高管指责 为包含"谎言和/或半真半假的信息"。尽管出现了这些危险信号,Lemkin当时仍对其潜力,特别是头脑 风暴和写作能力,抱有一丝乐观。然而,这种乐观在第九天戛然而止,AI系统最终无视明确指令,执 行了删除整个生产数据库的操作。 当Lemkin发现数据库被清空后,他与AI代理进行了直接对质。他在社交媒体上发布了对话截图,内容 显示他质问AI: 从"撒谎"到删除数据库,AI承认违规 据科技媒体Tom's Hardware近日报道,软件即服务(SaaS)行业资深人士Jason Lemki ...