AI技术滥用
搜索文档
换脸拟声等AI技术被滥用,平台如何发力“精准识别”?
环球网资讯· 2025-07-21 16:42
文章核心观点 - 中央网信办自2025年4月启动“清朗·整治AI技术滥用”专项行动,第一阶段已处置违规AI产品3500余款、清理违法违规信息96万余条、处置账号3700余个 [2] - 专家指出当前AI技术滥用治理面临技术迭代快、内容隐蔽性强、责任主体碎片化、治理标准缺位等难点 [2][3][4] - 平台企业需通过提升多模态检测技术、建立分层审核机制、强化内容标识与内部合规来构建长效治理机制 [5][6] - 精准治理需政府、平台、社会多元协同,包括加强源头监管、研发反制工具、健全举报机制及提升公众数字素养 [6][7][8] 当前AI技术滥用治理难点 - AI滥用手段进化速度超过检测技术,深度伪造已升级至动态表情和光影细节模拟,并可绕过现有检测工具 [2] - 滥用内容隐蔽性强,如真实视频中替换几秒对话或新闻中夹杂AI生成文字,传统批量扫描技术难以识别局部篡改 [3] - 各平台监测标准与处置流程不统一,难以形成全链条拦截 [4] - 责任主体碎片化,从训练数据收集到终端使用的长链条导致取证困难、归责复杂 [4] - 治理标准缺位,现行部门规章罚则偏软,对境外开源模型缺乏有效管辖手段 [4] 平台企业治理能力提升路径 - 提升多模态AI检测能力,结合声纹、语义、画面匹配度快速识别违规AI内容 [5] - 建立“AI+人工”分层审核机制,AI初步筛选高风险内容后推送人工复审 [5] - 推进内容标识制度,强制用户显性标识AI内容,并采用隐式数字水印追踪源头 [5][6] - 加强内部合规管理,建立跨部门团队、畅通投诉渠道、定期开展合规评估 [6] - 严格数据输入筛查、嵌入算法审计模块、部署内容溯源技术,构建全流程监测机制 [6] 多元协同治理建议 - 推动监管前移,加强对AIGC模型训练数据、技术提供者资质及输出能力的源头审查 [6] - 强化技术反制能力,研发深度伪造检测工具并开放公共检测接口 [7] - 健全快速举报与处置机制,提升执法协同效率 [7] - 加强AI伦理教育与公众科普,培养开发者责任意识及用户防范能力 [7][8] - 监管部门需完善法律法规,建立常态化检测机制,并通过典型案例提升全民数字素养 [8]
AI生成非“法外之地”,恶意造谣终成流量囚徒
齐鲁晚报· 2025-07-07 16:10
AI技术滥用现象 - 湖南怀化网警查处一起利用AI生成“35岁女子从28楼跳下”虚假视频案件,视频获得数万次转发[1] - 上海警方破获利用AI工具编造“某茶饮企业使用过期原料”不实信息案件,导致门店营业额骤降超20%[1] - 湖南禹某为提升账号关注度,通过输入“高空坠楼、家庭悲剧”等关键词在某AI平台生成视频片段[1] - 上海姚某、陈某等人为博取广告收益,使用AI工具“洗稿”拼凑企业不实信息[2] - 技术门槛降低催生AI造谣灰色产业链,某平台“悲剧模板”月下载量超10万次[2] 行业影响与危害 - AI生成内容被扭曲为流量时代的新型造谣工具,虚假信息如病毒般裂变传播[1][2] - 虚假信息引发公众恐慌,并重创企业商誉,技术滥用恶果由整个社会共担[2] - 部分内容创作者为追求流量,将技术伦理抛诸脑后,社会责任让位于点击率[2] 法律与监管框架 - 利用AI生成传播虚假信息属违法行为,依据《治安管理处罚法》可处以罚款拘留,情节严重者面临有期徒刑[3] - 《人工智能生成合成内容标识办法》要求平台对AI内容进行显著标识[3] - 监管机构可对未履行责任的平台采取暂停更新乃至行业禁入等严厉措施[3]
3500余款违规AI产品被处置!南都曾起底造假起号生意
南方都市报· 2025-06-20 18:28
行业监管动态 - 中央网信办自4月启动"清朗·整治AI技术滥用"专项行动 聚焦AI换脸拟声侵权和内容标识缺失等乱象 [1] - 第一阶段累计处置违规AI产品3500余款 清理违法违规信息96万余条 处置账号3700余个 [2] - 第二阶段将重点整治AI造谣、低俗内容等7类问题 构建技术监测体系并推动内容标识落地 [2] AI技术滥用产业链 - 不法分子利用AI深度伪造内容快速起号引流 通过带货、卖课或转卖账号变现 [2][3] - 部分虚拟数字人账号未标注AI生成身份 粉丝量达数万至十余万 部分账号已开通商品橱窗 [3] - 单条AI生成视频播放量可达数百万 挂车卖书等变现方式收益高达25万元 [3] 平台治理措施 - 网信部门切断违规AI产品营销渠道 督促平台健全技术保障措施 [2] - 专项行动推动生成合成内容标识加速落地 旨在形成长效工作机制 [2]
中央网信办深入开展“清朗·整治AI技术滥用”专项行动第一阶段工作
快讯· 2025-06-20 17:10
清朗·整治AI技术滥用专项行动 - 专项行动自2025年4月启动 聚焦AI换脸拟声侵犯公众权益和AI内容标识缺失误导公众等乱象 [1] - 中央网信办深入推进第一阶段重点整治任务 部署各地网信部门加大违规AI产品处置力度 [1] - 切断违规产品营销引流渠道 督促重点网站平台健全技术安全保障措施 [1] - 推动生成合成内容标识加速落地 [1] 第一阶段整治成果 - 累计处置违规小程序、应用程序、智能体等AI产品3500余款 [1] - 清理违法违规信息96万余条 [1] - 处置账号3700余个 [1]
AI换脸、跨平台引流 反诈防线如何“破壁升级”
环球网资讯· 2025-06-17 06:15
电信诈骗现状与特征 - 电信网络诈骗呈现技术智能化、组织产业化、链条跨境化特征 [1] - 诈骗手法高度多样化 2025年监测到超过100种不同类型案例 并呈现季节性变化规律 夏季以色情诱骗和虚假购物充值类为主 [3] - 诈骗目标人群呈现全年龄段覆盖特点 假冒"平台客服"类骗局使受骗群体从老年人扩展至年轻人 [4] 高发诈骗类型与手段 - 5类主要高发诈骗形式包括刷单返利、虚假网贷、虚假理财、冒充公检法、冒充客服 [2] - 高考季针对考生家庭的升学类诈骗高发 包括招生录取、查分改分、内部名额等类型 [3] - AI技术被黑灰产滥用 用于批量生成逼真文本图像 实施深度伪造 短时间内生成大量涉诈应用 [4] 行业反诈技术措施 - 首创App反诈电子标识认证 试点中涉案量最高降幅达90% [2] - 推广"反诈名片"服务 公安机关反诈电话日均提醒量55万次 [2] - 抖音自研多模态大模型 每日封禁涉诈账号超8万个 拦截异常投稿评论超400万条 发送站内信提醒700万条 [4] 平台治理与用户防护 - 抖音新增客服联系记录、动态验证口令等功能 日均保护潜在受害人超5万名 [5] - 用户可通过拨打官方客服95152或使用"验证助手"进行信息核验 [5] - 平台邀请8位创作者担任反诈大使 通过线上线下多渠道开展反诈宣传 [5] 跨部门协作机制 - 形成"打击、防范、治理、宣传"四位一体综合发力模式 [2] - 北京通管局联合公安网信等部门提升全链条打击效能 [5] - 需政府监管、企业履责、行业自律和用户参与同向发力 [5]
女子收到多条验证码未理会,隔天6万元没了,钱是怎么消失的?
新浪财经· 2025-05-31 07:22
新型电信诈骗技术分析 - 木马程序通过伪装短信、链接或文件窃取手机权限,实时监控短信验证码、通讯录及支付类APP信息[3] - 不法分子结合拦截的验证码与窃取的个人信息,直接通过网银或第三方支付平台发起无感转账,资金可在几分钟内转移至多级账户[4] - 部分平台的小额免密支付功能被滥用,木马可触发支付指令绕过二次验证[5] 手机木马感染预警信号 - 手机突然卡顿或发热提示后台木马运行占用资源[6] - 自动跳转陌生界面如不明网站或APP下载页面[7] - 非本人操作的银行、支付类短信验证码激增[8] - 手机莫名出现陌生APP,可能为木马自动下载的恶意软件[8] 紧急止损与防范措施 - 发现异常立即断网阻断木马通信,并冻结银行及支付账户[9][10] - 报警时需留存短信、通话记录等证据协助追踪资金流向[11] - 日常防护需避免点击不明链接,关闭小额免密支付功能,定期用正规安全软件查杀病毒[12][13][14] - 废弃手机需彻底清除数据防止信息残留[15] 诈骗电话识别原则 - 自称银行或电商客服的来电需挂断后回拨官方号码核实[16] - 绝不向对方透露验证码、密码或身份证号等敏感信息[17] - 境外号码或"00""952"开头的虚拟号段多为诈骗电话应直接拒接[18] 技术型诈骗发展趋势 - AI技术滥用可能导致诈骗手段智能化,如模拟亲友声音或伪造转账记录[19] - 手机安全漏洞成为新型诈骗突破口,需通过更新系统、限制敏感权限提升防护[19]
整理:4月30日欧盘美盘重要新闻汇总
快讯· 2025-04-30 23:10
国内政策与监管动态 - 国家召开"十五五"经济社会发展座谈会 强调科学谋划未来战略重点 [1] - 移动互联网未成年人模式正式发布 家长可一键启动所有APP未成年模式 [1] - 民营经济促进法将于5月20日起正式施行 [1] - 七部门联合发布《终端设备直连卫星服务管理规定》规范卫星通信服务 [1] - 中央网信办部署开展"清朗·整治AI技术滥用"专项行动 [1] 经济与市场数据 - 4月制造业PMI为49.0% 较上月下降1.5个百分点 制造业景气水平回落 [1] - 中国市场黄金ETF总持仓创历史新高 [1] - 中国人民银行开展12000亿元买断式逆回购操作 采用固定数量利率招标方式 [1] - 新一轮国内油价调整搁浅 [1] 国际地缘政治与贸易 - 法国财长与贝森特讨论相互实行零关税 对方认为该想法并非不切实际 [2] - 乌克兰可能在周三晚些时候与美国签署矿产协议 但英媒报道签署遇阻 [2] - 俄罗斯军队大幅增加波克罗夫斯克方向战斗行动强度 [2] 全球宏观经济 - 交易员完全定价美联储2025年底前将进行四次25个基点降息 [2] - 美国一季度GDP下降0.3% 为2022年以来首次经济收缩 [2] - 美国ADP就业人数仅增长6.2万 出现断崖式暴跌 [2] 技术与产业发展 - DeepSeek发布Prover-V2模型 参数量达6710亿 [1] - 第一季度全球黄金需求创2016年以来最高季度水平 [2] 金融监管人事变动 - 中国证监会副主席王建军涉嫌严重违纪违法 正接受中央纪委国家监委调查 [1]