Workflow
AI合成技术
icon
搜索文档
明星IU经常看中医?原来是AI合成的!小红书发布治理公告,13个违规账号被禁言
扬子晚报网· 2025-05-14 21:28
AI技术滥用与虚假内容治理 - 韩国顶流明星IU(李智恩)的AI合成视频中虚假宣传含何首乌的洗发水,热播剧《爱你》男主张凌赫的AI合成视频虚假推荐茯苓膏产品 [1][2] - 短视频平台出现大量标签为"医生讲解""专家建议"的AI生成内容,涉及"癌症预防""孩子长高秘诀"等健康话题 [2] - AI技术专家指出这些视频通过面部提取建模和声音合成进行"深度伪造",部分内容半真半假掺杂真实科普信息以增强可信度 [3] AI虚假内容的商业链条与危害 - 虚假视频背后存在引流、带货和非法推广保健品的商业链条,通过"名医讲解"积累流量后引导用户跳转第三方平台变现 [4] - 部分视频直接捆绑商品,利用AI合成的"专家"口吻推荐所谓"包治百病"的偏方和产品 [4] - 专家认为这种行为构成"信息污染",虚假医学建议可能直接影响用户健康判断 [4] 平台治理与监管现状 - 小红书清理265条违规内容,对13个违规账号实施禁言,重点整治AI批量生产虚假内容涨粉、引流带货等行为 [6][7] - 部分短视频平台尝试引入AI内容标识机制,对上传视频进行溯源与分类管理 [8] - 国家网信办等四部门3月发布《人工智能生成合成内容标识办法》,要求对AI生成内容进行显式和隐式标识 [5] 行业挑战与建议 - 平台对AI伪造内容的识别和处置存在滞后,部分高超合成技术视频未能及时下架 [5] - 业内人士建议社交媒体平台设置AI专区进行规范管理,公众应提高媒介素养并从官方渠道获取信息 [8] - 律师指出制造不实信息的发布者可能因侵犯名誉权、虚假宣传等被追究法律责任 [5]
谁在冒充全红婵的家人?
新浪财经· 2025-04-30 10:25
社交媒体AI滥用现象 - 多个账号使用AI合成全红婵及其家人声音,以相同文案宣称为其家建新房博取流量 [1] - AI合成视频中携带骆驼奶粉、土鸡蛋、洗衣液等商品链接,部分用户被骗下单购买 [4] - 演员刘晓庆、刘德华、靳东等多位明星成为AI伪造视频素材,其中刘德华电影公司发布声明提醒防范AI语音合成骗局 [10][11] 三农电商发展现状 - 全红婵大哥全进华从事三农主播工作,主要带货湛江本地特产水果如菠萝,旨在解决农产品滞销问题 [6] - 全进华表示做三农主播原因包括照顾患病母亲和帮助当地果农解决周期性滞销问题 [6] - 全进华虽非大流量博主,但希望通过自媒体渠道帮助湛江及周边地区农产品销售 [7] 法律法规与行业监管 - 《中华人民共和国民法典》明确规定自然人的肖像、声音权益受法律保护,未经授权的AI合成属侵权行为 [11] - 2023年国家网信办等三部门联合出台《互联网信息服务深度合成管理规定》,禁止利用深度合成技术制作传播违法信息 [11] - 2024年网信办发布《人工智能生成合成内容标识办法(征求意见稿)》,要求对AI生成内容进行标识以便公众识别 [12]
用AI合成全红婵家人声音,这样的带货走火入魔了
新京报· 2025-04-29 20:04
文章核心观点 AI合成技术被不法分子滥用,伪造公众人物形象和声音欺骗消费者,冲击消费市场信任环境,需规范其应用营造健康网络和消费市场 [1][2][4] 分组1:AI合成技术滥用现象 - 奥运冠军全红婵家人声音被AI合成冒用带货,多个账号用其家人声音介绍建房并携带商品链接,不少消费者已下单,全红婵家建房无官方回应 [1] - 此前明星刘晓庆、古天乐、张馨予等声音、视频被AI合成用于代言、带货,还出现AI造神医为贴牌膏药带货事件 [1] 分组2:AI合成技术滥用危害 - “全红婵家人事件”侵犯个人肖像权、名誉权及声音相关权益,伪造者行为涉嫌违法犯罪 [2] - 消费者因信任下单受骗,会蒙受经济损失并怀疑网络信息真实性,冲击短视频平台消费市场信任环境 [2] - AI合成技术滥用导致信息真假难辨,给监管带来挑战,易引发社会乱象,增加监管部门查处难度 [2] - 网络虚假信息传播快、范围广,难以控制,溯源和处理成本高,对传统监管模式和技术手段提出更高要求 [2] 分组3:应对措施 - 国家四部门联合发布《人工智能生成合成内容标识办法》,2025年9月1日起施行,为AI生成内容设定标识规范 [3] - 加大对侵权行为惩罚力度,让违法者付出高昂代价 [4] - 平台要提升技术手段,识别和标注AI合成内容,清理虚假信息,封禁违规账号 [4] - 消费者要提高辨别能力和防范意识,不轻信、传播未经证实消息,不轻易下单 [4]