Workflow
生成式人工智能(GenAI)
icon
搜索文档
“作品灵魂的关键在于作家本身,AI永远无法替代优秀作家”|破晓访谈
腾讯研究院· 2025-12-19 17:12
生成式人工智能 (GenAI) 正引爆一场深刻的内容生产力范式革命。以Sora的文生视频、Suno的AI音乐 为代表的一系列惊艳应用,正在打破高质量动态内容生成的壁垒,将过去被认为是人类专属的复杂创意 工作 (如影视叙事、音乐创作) 推向机器可及的范围。这种指数级的技术进步,给文化产业带来"战略性 焦虑"与"机遇性渴望"并存的复杂局面:一方面,所有市场参与者都看到GenAI在降本增效、拓展创意边 界上的巨大潜力;另一方面,这种颠覆性力量也带来前所未有的挑战,既有的价值链、商业模式与内容 生态等正面临全面重塑,引发全行业对未来的深刻追问。 腾讯研究院与中国传媒大学文化产业管理学院合作推进的《破晓:GenAI重塑文化产业》研究项目,将 聚焦 GenAI在长视频、短视频、音乐、动画、网络文学等重点领域的应用,研究文化产业在人工智能时 代的系统性变革,探索文化产业智能化发展路径。 我们希望,"破晓"系列研究可以透过纷繁变化的产业现象,洞察多领域产品、产线的变化趋势,汇聚技 术涌现的"智能之光"与人类永恒的"智慧之光",迎接文化产业即将到来的"破晓"时刻。 继第一期和第二期专题访谈之后,本期我们聚焦AI对网络文学的影响 ...
小学生如何与AI“共舞”
人民网· 2025-11-20 09:01
调研核心发现 - 全国首份针对小学生的生成式人工智能素养白皮书在南京发布 [1] - 调研覆盖南京市12个区17所学校3至6年级的8795名小学生,并对74名学生进行深度访谈 [2] 学生GenAI应用现状 - 57.24%的学生将GenAI作为评价反馈工具批改作业 [2] - 42.28%的学生使用AI推荐或生成学习资料 [2] - 42.11%的学生利用AI根据知识薄弱点出题 [2] - 40.34%的学生使用AI帮助制定学习计划 [2] - 53.20%的学生通过社交媒体等网络资源自学使用GenAI [2] - 54.96%的学生每周使用GenAI 1至2次,17.31%的学生每天至少使用一次 [2] GenAI应用深度与能力短板 - 学生应用多停留在资料查询、作业批改等基础学习层面,缺乏与学科深度融合、支持复杂问题解决的实践 [3] - 超过80%的学生对GenAI生成内容有较强批判意识,能主动质疑其真实性和可靠性 [3] - 近半数学生缺乏系统有效的幻觉识别方法与策略,在内容筛选、交叉比对、事实核查等环节存在能力短板 [3] - 部分学生因担心惩罚或伦理边界模糊而选择隐瞒使用AI辅助作业,反映学校评价体系与AI应用脱节 [4] 教育体系发展建议 - 建议将GenAI素养教育融入中小学人工智能教育体系,开设专门课程 [5] - 学校需出台清晰的GenAI学术使用指南,明确使用边界和贡献标注规范 [5] - 教师评价重点应从结果转向过程与思考 [5] - 建议学校与科技馆、科研院所、高等院校等建立合作机制,组织面向家长与社会的科普活动 [5] - 依托社交媒体平台系统推广科学、专业、正确的GenAI应用案例 [5]
小学生如何与AI“共舞” ——全国首份小学生生成式人工智能素养白皮书发布
科技日报· 2025-11-20 07:42
行业现状与用户行为 - 全国首份针对小学生的生成式人工智能素养白皮书在南京发布 勾勒出南京小学生对GenAI的应用偏好与素养现状[1] - 57.24%的受访小学生将GenAI作为评价反馈工具“批作业” 42.28%的学生用其推荐或生成学习资料 42.11%的学生用其根据知识薄弱点出题 40.34%的学生用于帮助制定学习计划[2] - 45.35%的受访小学生与GenAI“讨论学习上的难题” 三年级学生在语数学科中利用GenAI“帮助我写作业”的比例较高 分别为34.56%和29.35%[1] - 参与调研的小学生中 53.20%通过社交媒体等网络资源自学学会使用GenAI 多数学生应用体现出低频但理性特征 54.96%的学生每周使用1至2次 17.31%的学生每天至少使用一次[2] 应用深度与能力挑战 - 小学生对GenAI的应用多停留在资料查询、作业批改、学习答疑等基础学习层面 缺乏与学科深度融合、支持复杂问题解决的实践 在项目探究、批判性思维培养等高阶学习活动中的应用不多[3] - 超过80%的学生表现出对GenAI生成内容较强的批判意识 能够主动质疑内容的真实性和可靠性 然而近半数学生陷入“想查却查不出”的困境 缺乏系统有效的幻觉识别方法与策略[3] - 学生在生成内容筛选、交叉比对、事实核查等环节存在明显能力短板 尤其面对复杂或隐蔽的内容生成幻觉时 难以运用科学的批判性思维工具进行深入辨析与判断[3] 使用规范与伦理困境 - 62.06%的受访学生知晓需要向老师告知AI的使用 但其中仅有32.35%能“每次告知”[1] - 在AI辅助作业领域 部分学生因担心惩罚或伦理边界模糊而选择隐瞒 反映了学校评价体系与生成式人工智能广泛应用的脱节[4] 教育体系与发展建议 - 建议将GenAI素养教育融入中小学人工智能教育体系 学校应开设相关课程 让学生了解技术原理知识 重点提高提示词优化能力、批判能力、学术诚信与道德决策力[5] - 建议学校出台清晰的GenAI学术使用指南 明确作业中AI的使用与标注规范 教师需将对GenAI学习应用的评价重点从结果转向过程与思考[5] - 建议学校与科技馆、科研院所、高等院校等专业机构建立合作 共同组织面向家长与社会的GenAI科普活动 并依托社交媒体平台系统推广科学、专业、正确的GenAI应用案例[6] - 该白皮书有望推动我国中小学人工智能教育向着更加科学、更加公平、更高质量的方向迈进[6]
GenAI难破优质内容创作的“不可能三角”|破晓访谈
腾讯研究院· 2025-11-19 16:33
文章核心观点 - 生成式人工智能正在引发文化产业生产力范式的深刻革命,行业面临“战略性焦虑”与“机遇性渴望”并存的复杂局面[2] - GenAI在长视频、短视频、音乐、动画、网络文学等重点领域的应用正推动系统性变革,核心趋势是人机协同、效率革命与生态重塑[2][7] - AI原生内容将“消灭平庸”,迫使人类创作者向上突破,行业竞争从“量的竞争”转向“质的竞争”[7][15] GenAI在文化产业的落地应用现状 - 网络文学领域AI应用已覆盖基础描写、灵感激发和资料查阅环节,但产出质量仍较粗糙,难以替代对作品质量有要求的作者[10] - 音乐行业AI已广泛应用于创作、混音、编曲等环节,平台榜单出现AI制作歌曲,对话式AI工具使普通人通过聊天即可生成音乐[11] - AI漫剧成为最适合的产业落地场景,实现了成本革命和存量市场开拓,形成“轻IP、高效率、高产能”运营模式[12][13][16] - 内容创作工程化需要三大要素:原始IP资产、人机交汇的创作平台能力以及核心创意[12][13] GenAI带来的产业变革与商业模式创新 - “超级个体”或“微型团队”将成为新常态,人机协同能力是未来核心竞争力[7][19][20] - 文化产业价值中心向产业链“两极”转移:顶层创意架构设计和直接面向市场的运营变现[7] - IP形态呈现“长、中、短”并存竞争格局,短IP优势在于低门槛和高参与度,未来可能走向“每个人看的都不一样”的极致个性化[26] - 可能催生新型商业模式如创作者直接与平台对接的“旗舰店”模式,实现创作者与消费者直接对接[24] GenAI的技术能力边界与内容质量挑战 - AI在生成类型化、风格鲜明的音乐方面表现更成熟,如爵士、放克、摇滚等风格化音乐[15] - AI目前存在四大主要问题:一致性、自然多样性、物理世界拟真度、人物情感表达[16] - 人类创作者需重点提升情感细腻表达、计谋复杂设计、人情世故深度刻画等AI不擅长领域[14] - 高质量作品必须有人类创意投入,低人力劳动、低技术成本与高作品质量不可能同时实现[33] 消费者接受度与内容价值演进 - 消费者对AI内容接受度核心取决于内容质量高低,而非是否由AI生成[27][28] - GenAI推动消费动机从浅层“情绪刺激”升级为深度“情感与价值观认同”[29] - 小IP只要与粉丝价值观高度契合,即使仅有5000个粉丝,每人年消费1000元即可创造500万元收入[29] 行业潜在风险与生态影响 - GenAI可能导致传统“人才成长路径断裂”与“圈层固化”风险,新人作者可能失去实践提升机会[31][32] - AI核心优势是“多元性”,难点是“可控性”,随机性带来内容多元性的同时导致精确控制成本升高[33] - 音乐行业平均水准歌曲暴增可能稀释整个曲库价值,使音乐创作变得平均化[28]
七大“深度科技”将引领全球农业变革
科技日报· 2025-11-13 09:00
文章核心观点 - 全球农业面临气候变化、资源退化、人口结构变动与地缘政治动荡等空前压力,亟须一场由深度科技引领的系统性变革 [1] - 世界经济论坛报告指出,未来十年,以生成式人工智能、计算机视觉、边缘物联网、卫星遥感、机器人、CRISPR基因编辑及纳米技术为代表的深度科技,有望成为推动全球农业转型的关键引擎 [1] - 深度科技旨在助力构建更具韧性、更可持续且效率更高的农业体系 [1] 生成式人工智能 - 应用受益于大语言模型快速发展和农业数据日益丰富,场景广泛包括提供个性化作物管理建议、生成高度本地化农事方案、预测农产品市场价格 [2] - 结合自然语言处理技术可实现智能交互,成为农民的AI顾问,例如印度瓦德瓦尼AI研究所开发的AgriAI Collect能快速回应各类农业咨询 [2] - 能协助政府制定宏观作物规划、帮助企业模拟气候影响、识别优良基因并预测基因编辑效果,从而加速新品种作物研发 [2] - 高质量训练数据缺乏,尤其是适用于本地化场景的数据,是制约其推广的关键难题 [2] 计算机视觉 - 作为AI重要分支,赋予机器看懂图像与视频的能力,通过解析视觉信息结合机器学习算法直接生成决策建议,显著降低对人工分析的依赖 [3] - 应用场景正快速拓展,已能精准识别作物病害、杂草与害虫,并实时监测作物生长压力 [3] - 是农业机器人、自动化分拣分级系统等智能装备的核心技术 [3] - 农田环境充满变数,不同生长阶段的光照条件、植株形态变化多样,制约着技术的大规模应用 [3] 边缘物联网 - 核心架构是将物联网数据直接在设备端或邻近网络边缘处理,无需远传至云端,实现低延时实时响应并加速自主决策进程 [4] - 适用于网络覆盖薄弱农村地区,应用场景包括灌溉自动化、作物病害早期预警和肥料精准施用 [4] - 这些应用融合了机器学习、计算机视觉与生成式人工智能技术,使农业生产更加智能高效 [4] - 面临设备购置成本较高以及不同边缘系统之间互操作性有待提升的双重挑战 [4] 卫星遥感技术 - 随着空间与光谱分辨能力提升以及数据采集频次增加,正被广泛应用于农业领域 [6] - 能够高效获取大范围地理区域时空数据,以较低成本实现大规模监测 [6] - 结合机器学习方法,数据可用于评估作物健康状况、监测养分与水分分布,并预测病虫害发生趋势 [6] - 面对小规模分散农田或多季作物轮作等复杂场景时,技术精度仍有待提升 [7] 机器人技术 - 指利用自主机械系统完成劳动密集或高度复杂任务,系统集成了感知与决策能力,无需人工直接干预即可高效运行 [8] - 随着人工智能感知能力提升及云边协同技术成熟,农业机器人正迎来更广阔应用空间 [8] - 与计算机视觉等技术结合,能够实现精准播种、智能除草、自动化采收、实时作物监测与精准施肥 [8] - 目前技术成本较高,在劳动力充裕、工资水平较低的国家推广面临挑战 [9] CRISPR技术 - 以其精准高效特点成为推动农业发展关键力量,可对生物体DNA进行精确修改,引入优良性状或剔除不良性状 [10] - 有助于加速培育抗旱、抗病虫害、营养价值更高且生长周期更短的作物 [10] - 有望在实际应用中提升产量、减少农药使用,并增强作物对气候变化适应能力 [10] - 繁琐的审批流程与公众接受度问题是其商业化道路上的主要挑战 [11] 纳米技术 - 当材料被缩小至纳米尺度会展现出与宏观状态截然不同的性质,在农业领域展现出显著潜力 [12] - 可广泛应用于病虫害防治、养分精准管理、农业投入品的可控释放及生物传感等多个方向 [12] - 由于缺乏长期环境与健康影响数据,该项技术的大规模应用仍面临挑战 [12]
GenAI时代的内容飓风|破晓访谈
腾讯研究院· 2025-11-12 17:34
文章核心观点 - 生成式人工智能正在引发文化产业内容生产的范式革命,打破高质量动态内容生成的壁垒,将复杂创意工作推向机器可及的范围 [2] - 技术带来“战略性焦虑”与“机遇性渴望”并存的局面,既有价值链、商业模式与内容生态面临全面重塑 [2] - 研究聚焦GenAI在长视频、短视频、音乐、动画、网络文学等领域的应用,探索文化产业智能化发展路径 [2] GenAI在文化内容生产中的渗透与能力边界 - GenAI已深入渗透文化内容生产环节,但在不同细分领域介入程度各异,在重复性劳动且制作成本高的环节可形成精准替代,但并非所有环节都能实现“降本增效” [6] - 真正的智能剪辑在当前时期难以实现,AI对素材的理解能力不足,用现有算力分析500小时素材进行逐帧分析,成本和效率完全不成正比 [8] - AI在影视创作中,前中期环节如策划、剧本创作、分镜设计等应用较为深入,后期环节如商业化剪辑仍主要依靠人工 [9] - AI对于内容加工处理的决策支持仍有难度,因为AI会忘记和乱想,编剧需要将工作拆解成分散、分阶段的任务交给AI完成 [10] AI原生内容的定义与价值 - 完全AI原生内容意味着AI演变为能深度洞察并主动塑造用户心理的“超级有机体”,商业逻辑从“争夺用户注意力”转向对用户“潜在需求与情绪”的精准筛选与创造 [12] - 当前所有AI创作或人机协同内容,传统影视都能完成,AI只是实现降本增效,人类价值在于定义方向和情绪 [13] - 未来有价值的是超越传统影视的能力,如实时影像生成、交互式内容生成,AI技术让内容在发布后可继续生长、延展、修改 [14] - 2D路线AI可制作短视频或对一致性要求较低的内容,如AI漫剧,一分钟制作成本与真人剧存在量级差距,但无法胜任长线叙事或影视级内容 [15][16] - 3D路线使命是打破2D天花板,可能让原本需要大团队、巨量资金和时间的影视剧集,变为个人低成本快速完成 [16] GenAI赋能下的新型内容生产者 - 未来可能出现“视频作家”这一新职业,导演层面的画面能力和编剧层面的文笔能力可能被AI取代,编剧和导演行业可能合二为一 [17] - AI技术带来影视话语权下放,出现“超级个体”或小型团队,能完成原本需大型团队的工作,降低视听语言和专业门槛 [18] - AI技术促使认知体系和工作流程发生根本性重构,通过将复杂任务拆解为标准化模块,实现“一人+AI”的极简操作,取代传统重型作业模式 [19] GenAI时代的版权与商业模式变革 - 版权概念可能发生根本变化,未来可能出现内容不由单一机构或个人拥有,实现“参与者即版权拥有者”的新模式 [20] - 当内容生成平台积累亿级用户时,核心商业模式将从显性广告转向欲望按需生产,形成“需求识别-内容生成-消费满足”的零时差闭环,颠覆传统消费主义逻辑 [20] 消费者对AI内容的接受度与付费意愿 - 消费者对AI原生内容完全能接受,只要内容足够好、达到人类需求的基本品质标准,普通观众不会刻意关注“含AI量”,只在乎内容本身吸引力 [5][22] - 观众觉得AI内容“假”源于模型对物理世界规律模拟的不足,当平台能通过世界模型实现高度拟真的物理模拟,结合美学控制,就会形成精品AI影像 [21] - 主要矛盾是人们对好影视作品的需求未被满足,生产力不足才是问题根本,AI必须达到人类所需作品的水平 [23] AI内容爆发式增长的行业隐忧 - 在AI热潮中可能陷入极其残酷的价格战,由于AI成本远低于传统影视,可能出现大量同质化、低质内容冲击优质内容的情况 [25] - 作为技术发明者,更多关注的是能力不足的问题,需要继续努力从不能变成能 [25]
联想全面升级基础设施筑牢算力底座
证券日报网· 2025-11-10 15:16
公司业绩与行业认可 - 公司在2025中国高性能计算机性能TOP100排行榜中,以43套系统蝉联年度数量总份额冠军,连续第十一次获此殊荣 [1] - 公司获评“2025中国算力领军企业”称号,其“联想万全大模型训推一体解决方案”入选《2025中国算力应用经典案例》 [1] - 公司助力吉利星睿智算HPC集群性能升至榜单第十六位,展示AI基础设施的创新实力 [1] - 根据2025年上半年中国AI服务器市场数据,公司在市场销售额维度跻身行业前三 [4] 行业趋势与市场前景 - 市场对算力的需求正从训练阶段向推理与后训练阶段迁移,推理算力需求呈现爆发式增长 [3] - Gartner预测2025年全球生成式人工智能支出将达到6440亿美元,较2024年增长76.4%,其中约80%用于AI硬件,主要用于推理场景 [3] - 模型推理系统面临的关键问题来源于传输、计算、存储、调度等关键要素及其协同问题,算力基础设施迎来关键进化节点 [3] 公司技术布局与产品战略 - 公司通过全面布局和技术创新推动AI落地,推出数据处理算力服务器、AI训练算力服务器、推理应用算力服务器三大家族产品 [4] - 联想AI训练服务器在万全异构智算平台3.0加持下,实现对异构计算集群的管理调度,新增AI推理加速算法集、AI编译优化器等突破性技术 [4] - 公司战略围绕“全栈AI基础设施”,坚持“AI导向”与“本地化”,旨在为企业打造稳定高效的算力底座 [6] 应用案例与业务拓展 - 公司推动AI在制造、教育、金融等行业规模化落地,案例涵盖教育科研、工业制造、云计算等领域 [5] - 公司为南京大学高性能计算中心打造的新一代液冷高性能计算平台“蓝鲸一号”已投入运行,集成360台计算节点与2套高性能存储系统,占地面积不足三十平方米 [5] - 公司将持续扩展更多业务场景,助力千行万业智能化转型 [6]
内地资本新潮涌动 创投机构跨过香江
中国证券报· 2025-11-03 04:16
内地创投机构赴港战略行动概述 - 内地创投机构正进行一场以"跨过香江"为代号的战略行动,目标直指南方,旨在找寻更广阔的资金来源与多元化的投资机遇 [1] - 具体行动包括成立战略基金、筹备香港办公室、以及多家VC/PE公司成功拿下香港4类、9类牌照 [1] - 内地私募创投机构走向海外被视为资本市场国际化的重要驱动力,有助于拓展全球业务布局、优化资产配置结构,并提升中国资管品牌的全球影响力 [1] 新设立的香港相关基金 - CMC资本与香港投资管理有限公司共同创立"CMC AI创意基金",并作为联合领投方参与了LiblibAI的B轮融资,本轮融资总额达1.3亿美元,是今年以来AI应用赛道最大的一笔融资 [2] - "CMC AI创意基金"聚焦生成式人工智能在创意产业的应用与创新,依托香港国际化数据环境及政策优势,助力香港建设亚洲GenAI创新枢纽 [2] - 香港科技大学、港投公司与戈壁创投成立全新战略基金Gobi-RIF,重点培育由香港科技大学孵化的早期初创企业,旨在促进前沿学术研究产业化 [3] - Gobi-RIF基金期限为7-8年,将加快生物科技、工业4.0、人工智能与机器人及金融科技四大重点领域的科研成果商业化进程,目标投资15家至20家初创公司,目前已投资3家 [4] 创投机构获取香港牌照情况 - 博华资本于9月份成功获香港证监会批准,取得第4类(就证券提供意见)及第9类(提供资产管理)牌照,标志着其在国际化金融服务领域实现关键突破 [4] - 江远投资亦于近期成功获批第4类及第9类牌照,以进一步提升基金管理与运营的国际化能力 [5] - 香港证监会网站显示,9月份绿洲资本、XVC等多家私募创投机构也拿到了香港4类牌照和9类牌照 [6] - 多家创投机构的香港办公室正在筹备中,例如专注早期科创投资的中科创星正规划在港设点 [6] 赴港战略的驱动因素 - 从资金端看,香港近两年出台了一系列利好政策,募资环境被寄予较高期待 [6] - 从投资端看,不少香港本地基金对投向要求比较宽松,给予了财务运作更多空间 [6] - 二级市场行情向好为一级市场注入信心,截至10月末,恒生指数、恒生科技指数今年以来的涨幅均为30%左右,使得一级机构的退出通道显得比较明朗 [7] - 香港对科创产业的扶持力度正在不断抬升,最新施政报告阐述了建设国际创新科技中心的多方面举措,包括完善创科建设策略布局、加速新型工业化发展等 [8] 赴港战略的目标与展望 - 通过引入耐心资本专项基金,旨在撬动包括主权基金在内的长线资金,为科技项目提供更长周期的支持 [4] - 促进产学研深度融合,利用香港多所世界一流大学的资源,推动更多实验室技术走向市场 [4] - 连接国际资源,利用香港市场的国际化优势,帮助被投企业对接全球市场和技术资源 [4] - CMC资本希望以资本赋能产业,以科技反哺金融,培育具有新经济增长引擎作用的企业,同时在香港形成国际科创企业集聚效应 [3]
S&P Global Gears Up to Report Q3 Earnings: What's in the Offing?
ZACKS· 2025-10-28 00:21
财报发布日期与历史表现 - 公司计划于10月30日开盘前发布2025年第三季度财报 [1][11] - 公司在过去四个季度均超出Zacks一致预期,平均超出幅度为6.1% [1] 2025年第三季度整体业绩预期 - 总收入预期为38亿美元,同比增长7.3% [2][11] - 调整后税息折旧及摊销前利润预期为21亿美元,同比增长3.6% [8] - 调整后税息折旧及摊销前利润率预期为56.3%,而去年同期为57% [8] - 每股收益预期为4.40美元,同比增长13.1% [8][11] 各业务部门收入预期 - 市场情报部门收入预期为12亿美元,同比增长6.3%,增长动力包括收入转型、客户留存率提升以及对Wall Street Office和Notice Manager的高需求 [3] - 评级部门收入预期为11亿美元,同比增长1.6%,增长由非交易收入、成功的私人信贷策略和AI驱动的CreditCompanion推动 [4] - 大宗商品洞察部门收入预期为5.554亿美元,同比增长6.4%,得益于企业合同的商业势头和全球交易服务的强劲表现 [5] - 移动出行部门收入预期为4.474亿美元,同比增长8.6%,由CARFAX经销商收入的强劲增长以及金融与其他业务线承保量的改善所驱动 [6] - 指数部门收入预期为4.351亿美元,同比增长4.6%,因更高的交易所交易基金资产管理规模带来的资产挂钩费用以及交易所交易衍生品交易量增加而改善 [7] 盈利预测模型指标 - 公司目前的盈利ESP为+1.66%,Zacks评级为3 [9] - 模型预测公司此次财报将超出盈利预期 [9]
彭博首席技术官办公室刊文:理解与缓解金融领域生成式AI的风险
彭博Bloomberg· 2025-10-24 15:05
文章核心观点 - 生成式人工智能在金融行业的高速应用凸显了安全与合规的紧迫性,通用AI安全机制存在显著的领域特定风险识别缺口 [5][7] - 研究提出了首个面向金融服务的AI内容安全分类体系,旨在弥合通用框架与金融实际应用间的差距 [5][7] - 实证研究表明,当前主流防护机制在应对金融领域复杂、语境敏感的风险时有效性不足,亟需构建具备上下文感知能力的安全框架 [9][21] 研究背景与目标 - 研究由彭博首席技术官办公室下属的多个团队跨部门协作完成,旨在填补金融服务领域特定AI内容安全框架的空白 [6] - 核心目标是帮助金融机构以更负责任的方式部署生成式AI系统,结合红队测试、上下文感知防护及与监管要求一致的风险分类方法 [7] 金融行业关键利益相关方及其风险 - 买方机构(如共同基金、对冲基金)负有受托责任,生成式AI在研究支持、个性化服务等方面的应用需确保内容的可靠性、可解释性与合规性 [8] - 卖方机构(如投资银行、经纪交易商)需平衡技术创新与合规要求,尤其在面向零售客户时需遵循严格的适当性标准 [8] - 技术供应商在将生成式AI嵌入其系统时面临直接或间接的监管审查,需深入理解技术设计对客户的影响 [10] 三大关键风险领域 - 信息源风险:涉及敏感客户数据和重大非公开信息的处理,一旦发生隐私泄露或MNPI滥用,机构将面临严重监管后果 [10] - 沟通风险:市场营销、客户沟通等受严格内容规范约束,生成式AI若产生误导性陈述或遗漏关键风险,可能构成监管违规 [11] - 投资活动风险:AI在交易策略支持等应用可能引发市场操纵、欺诈甚至非故意内幕交易,卖方机构和技术供应商均需高度警惕 [11] AI风险分类体系构建 - 研究区分“系统无关风险”(如模型训练数据缺陷导致的错误信息)和需结合金融场景评估的全面风险 [12][14] - 倡导采用全面风险评估方法,充分考虑买方、卖方及技术供应商在职责分工与风险暴露方面的差异 [14] - 定量技术手段(如静态基准测试与红队测试)可支持对生成式AI行为进行规模化评估,两种方法相辅相成 [15] 金融服务领域首个AI内容安全分类体系 - 分类体系包含机密信息披露、反事实叙述、歧视、金融服务公正性、金融服务不当行为等16个具体风险类别 [16][17] - 分类区分了违反正式法规的内容和可能引发声誉风险的内容,使机构能根据具体应用语境灵活调整防护机制 [16][19] - 该框架具备良好适应性,可根据不同司法辖区的监管要求、组织角色及系统设计约束进行调整 [19] 实验关键发现 - 对广泛使用的AI防护系统测试显示,其在处理金融相关查询时无法有效识别大量领域特定风险,存在显著安全缺口 [21] - 即便引入扩展后的风险分类体系,通用防护机制的识别能力仍有限,常遗漏重要金融风险类别或产生过多误报 [21] 讨论与建议 - 实现有效的生成式AI安全管理需嵌入多层次的防护策略,包括自动化机制、人工审核及违规升级处理 [23] - 风险缓解策略需与实际应用场景匹配,例如对敏感金融查询提供免责声明,对涉及MNPI的问题实施严格屏蔽 [23] - 通用安全框架在金融领域必须进行调整,领域特定风险框架需明确界定金融建议、不当行为等类别,并考虑法律义务和司法辖区差异 [24]