“一键换声”绝不可任性

2025-02-14 06:44 来源:广州日报

  网上冲浪,亲耳听到的就是真的吗?未必。网络平台上,AI声音随处可见。“新华视点”记者调查发现,随着人工智能技术和语音大模型应用的发展,AI合成声音App大量出现,最快只需十几秒便可“克隆”出来。与此同时,AI声音滥用现象愈发突出。(2月13日新华社)

  过去,人们总是笃信自己亲眼看到的、亲耳听到的信息。但这些年,“有图有声有真相”这一判断标准一再受到冲击,你以为的事实很可能是由AI生成的。随手打开一个短视频平台,并以“AI声音克隆”为关键词检索发现,明星翻唱、新闻播报、吐槽点评等大量视频涉及AI声音,混淆公众认知。“假赵本山”用英文演小品、“假雷军”辣评热点话题、“假张文宏”深夜直播带货……越来越多人借着AI模拟名人声音招摇撞骗,逼真程度堪比真人、叫人难以招架。

  技术在狂飙,风险也在加剧。用张文宏的话说,这些假的AI合成信息,就像漫天飞过来的“蝗虫”一样害人。今天可以模仿名人逗你一笑,或是借网红明星之口引流带货,明天就有可能用你的声音“移花接木”,为网络诈骗埋雷。这并非危言耸听。据新闻报道,有不法分子通过“AI换声”仿冒一位老人的孙子,诈骗老人2万元,类似的诈骗案件在全国已发生多起,有的诈骗金额甚至达到上百万元。此类案件提醒我们,在泛滥的“一键变声”面前,每个人都可能成为“受害者”。技术滥用对普通人造成的安全隐患和威胁,绝对不容小觑。

  以上种种也表明,对AI声音进行规范管理,必要且紧迫。近年来,有关主管部门出台《人工智能生成合成内容标识办法(征求意见稿)》等规定,一定程度上给AI技术使用画定了红线。然而,落脚到现实操作中,对于AI声音应用涉及的造谣侵权、道德伦理等问题,如何形成具体细化的规则,还有待进一步思考。此外,短视频平台对AI内容审核机制滞后,部分侵权内容在投诉后仍反复出现。这需要相关部门继续加大对滥用AI声音侵权的打击力度、形成更完善的常态化治理机制,也需要平台“用魔法打败魔法”、不断升级更新审核检测技术,以应对层出不穷的AI仿声骗局。

 

查看余下全文
(责任编辑:年巍)
当前位置     首页 > 滚动 > 正文
中经搜索

“一键换声”绝不可任性

2025年02月14日 06:44   来源:广州日报   付迎红

  网上冲浪,亲耳听到的就是真的吗?未必。网络平台上,AI声音随处可见。“新华视点”记者调查发现,随着人工智能技术和语音大模型应用的发展,AI合成声音App大量出现,最快只需十几秒便可“克隆”出来。与此同时,AI声音滥用现象愈发突出。(2月13日新华社)

  过去,人们总是笃信自己亲眼看到的、亲耳听到的信息。但这些年,“有图有声有真相”这一判断标准一再受到冲击,你以为的事实很可能是由AI生成的。随手打开一个短视频平台,并以“AI声音克隆”为关键词检索发现,明星翻唱、新闻播报、吐槽点评等大量视频涉及AI声音,混淆公众认知。“假赵本山”用英文演小品、“假雷军”辣评热点话题、“假张文宏”深夜直播带货……越来越多人借着AI模拟名人声音招摇撞骗,逼真程度堪比真人、叫人难以招架。

  技术在狂飙,风险也在加剧。用张文宏的话说,这些假的AI合成信息,就像漫天飞过来的“蝗虫”一样害人。今天可以模仿名人逗你一笑,或是借网红明星之口引流带货,明天就有可能用你的声音“移花接木”,为网络诈骗埋雷。这并非危言耸听。据新闻报道,有不法分子通过“AI换声”仿冒一位老人的孙子,诈骗老人2万元,类似的诈骗案件在全国已发生多起,有的诈骗金额甚至达到上百万元。此类案件提醒我们,在泛滥的“一键变声”面前,每个人都可能成为“受害者”。技术滥用对普通人造成的安全隐患和威胁,绝对不容小觑。

  以上种种也表明,对AI声音进行规范管理,必要且紧迫。近年来,有关主管部门出台《人工智能生成合成内容标识办法(征求意见稿)》等规定,一定程度上给AI技术使用画定了红线。然而,落脚到现实操作中,对于AI声音应用涉及的造谣侵权、道德伦理等问题,如何形成具体细化的规则,还有待进一步思考。此外,短视频平台对AI内容审核机制滞后,部分侵权内容在投诉后仍反复出现。这需要相关部门继续加大对滥用AI声音侵权的打击力度、形成更完善的常态化治理机制,也需要平台“用魔法打败魔法”、不断升级更新审核检测技术,以应对层出不穷的AI仿声骗局。

 

(责任编辑:年巍)

分享到:
中国经济网版权及免责声明:
1、凡本网注明“来源:中国经济网” 或“来源:经济日报-中国经济网”的所有作品,版权均属于
  中国经济网(本网另有声明的除外);未经本网授权,任何单位及个人不得转载、摘编或以其它
  方式使用上述作品;已经与本网签署相关授权使用协议的单位及个人,应注意该等作品中是否有
  相应的授权使用限制声明,不得违反该等限制声明,且在授权范围内使用时应注明“来源:中国
  经济网”或“来源:经济日报-中国经济网”。违反前述声明者,本网将追究其相关法律责任。
2、本网所有的图片作品中,即使注明“来源:中国经济网”及/或标有“中国经济网(www.ce.cn)”
  水印,但并不代表本网对该等图片作品享有许可他人使用的权利;已经与本网签署相关授权使用
  协议的单位及个人,仅有权在授权范围内使用该等图片中明确注明“中国经济网记者XXX摄”或
  “经济日报社-中国经济网记者XXX摄”的图片作品,否则,一切不利后果自行承担。
3、凡本网注明 “来源:XXX(非中国经济网)” 的作品,均转载自其它媒体,转载目的在于传递更
  多信息,并不代表本网赞同其观点和对其真实性负责。
4、如因作品内容、版权和其它问题需要同本网联系的,请在30日内进行。

※ 网站总机:010-81025111 有关作品版权事宜请联系:010-81025135 邮箱:

精彩图片
关于经济日报社关于中国经济网网站大事记网站诚聘版权声明互联网视听节目服务自律公约广告服务友情链接纠错邮箱
经济日报报业集团法律顾问:北京市鑫诺律师事务所    中国经济网法律顾问:北京刚平律师事务所
中国经济网 版权所有  互联网新闻信息服务许可证(10120170008)   网络传播视听节目许可证(0107190)  京ICP备18036557号

京公网安备 11010202009785号