Workflow
科林格里奇困境
icon
搜索文档
智能体调查:七成担忧AI幻觉与数据泄露,过半不知数据权限
21世纪经济报道· 2025-07-02 08:59
行业趋势与定位 - 2025年被称为"智能体元年",AI发展从对话生成跃迁到自动执行,智能体成为最重要的商业化锚点和下一代人机交互范式[1] - 智能体尚未像通用大语言模型一样在各行各业被广泛使用,当前调研聚焦已落地的国内核心玩家(互联网大厂、手机厂商、头部AI创业公司)[5] 安全合规认知现状 - 67.4%受访者认为智能体安全合规"非常重要"(平均分4.48/5),但优先级未进TOP 3[7][9] - 行业对安全重视程度存在分歧:48.8%认为投入不足,34.9%认为缺乏有效关注,仅16.3%认为已过度重视[9] - 最需优先解决的TOP 3问题为任务稳定性与完成质量(67.4%)、场景探索与产品化(60.5%)、基础模型能力增强(51.2%)[9] 主要风险关注点 - 最受关注的安全问题:AI幻觉与错误决策(72%)、数据泄露(72%)、有害内容输出(53.5%)[13] - 潜在后果担忧:用户数据泄露(81.4%)、非授权操作导致业务损失(53.49%)、监管调查(44.19%)[15] - 研发方最担心监管调查(72%),使用方/服务方更聚焦数据泄露(90%)[16] 治理挑战与实践 - 62.8%受访者认为智能体风险"过于复杂和新颖"是最大治理挑战[17] - 58%使用方不清楚智能体权限与数据访问范围,仅研发方明确掌握相关控制[19][20] - 51%公司无明确智能体安全负责人,16.2%由研发团队兼管安全,仅3%设专职团队[23] 行业生态特征 - 受访者角色分布:研发厂商(33%)、使用方(28%)、独立研究团队(23%)、服务合作者(16%)[6] - 技术团队占比67%,产品运营团队占30%,反映技术驱动型讨论主导[6] - 60%受访者否认发生过安全事件,40%拒绝透露,实际案例多被业务考量掩盖[5][19]