“想换谁的脸就换谁的脸，好玩、刺激！”

虞某第一次接触到“AI换脸”技术后

制作并传播虚假换脸淫秽视频

(相关资料图)

口令红包收了200余次

总金额共计6万余元

等待他的是法律的制裁 “换脸，不能随心就换！ ”

今年6月，浙江省杭州市萧山区检察院对一起利用“AI换脸”技术侵犯公民个人信息案依法提起民事公益诉讼。

“真是后悔莫及啊！”对于现年36岁的虞某来说，当初对“换脸”的好奇换来的除了刑罚，还要承担相应的民事责任。

“想换谁的脸就换谁的脸，好玩、刺激！”2020年过年前后，虞某第一次从互联网上接触到“AI换脸”技术时，十分好奇，莫名兴奋。随后，虞某便从网上下载了换脸软件并熟练掌握了相关视频合成的技术。在使用这项技术时，虞某发现了其中的“商机”：利用“AI换脸”软件，制作生成虚假的换脸淫秽视频，在网络社交软件上进行传播，能够吸引较多关注。

从2021年6月开始，虞某以牟利为目的，在未取得被编辑人同意的情况下，利用上述“AI换脸”软件，将从互联网等渠道收集到的他人人脸信息与部分淫秽视频中的人脸信息进行替换合成，制作生成虚假的换脸视频，在网络社交软件上进行传播。

与此同时，虞某还在社交软件上创建了多个群组为他人提供换脸视频定制服务，根据客户提供的视频或照片，制作换脸视频。此外，虞某在网络社交软件上销售“AI换脸”软件、提供换脸素材并传授使用教程。

“让一切遮挡消失！手机就可操作，明星网红素人都可，30秒内出结果！购买软件私信联系！”“只要是能看到脸的都能换！”“请问有提供定制换脸视频吗？想把我暗恋的女生换上。如何收费？”“没问题，费用……通过口令红包发我！”……一段时间，在虞某的社交软件群组内热闹非凡，生意红火。口令红包收了200余次，总金额共计6万余元。

2022年8月，公安机关发现了虞某在网上制作、传播淫秽物品牟利的犯罪行为，依法对其立案侦查。2022年11月，虞某被移送萧山区检察院审查起诉。今年3月28日，该院依法对虞某以涉嫌制作、传播淫秽物品牟利罪提起公诉。

8月4日，杭州互联网法院经过审理后依法对该案作出判决，支持检察机关作为公益诉讼起诉人的全部诉讼请求：判令被告虞某立即停止侵权，删除其在社交软件群组中留存的所有涉案个人信息；在国家级媒体上刊发向社会公众赔礼道歉的声明，以消除影响、进行警示并支付侵害社会公共利益的损害赔偿款6万元。 8月22日，这一判决正式生效。

“换脸，不能随心就换！我们希望通过该案的办理提醒社会公众，在使用新兴技术时，不能忘记法律的规制和道德伦理的约束，这是所有技术发展应有的边界。” 承办该案的杭州市萧山区检察院检委会专职委员章蕾告诉记者。

“仅凭几张照片，任何人都可能成为受害者。”章蕾说，近年来，滥用“AI换脸”技术实施各类侵犯个人信息的行为并不鲜见，仅凭一张换脸照片或者一段换脸视频，或编造新闻、炒作热点，或侮辱诽谤、实施勒索诈骗，“该类行为在网络传播的叠加下，危害结果会产生裂变，对被侵权人造成的伤害往往是长久的、持续的、难以弥补的。”

今年来“AI换脸”诈骗频发

除了侵犯个人信息权益外，今年来利用AI技术实施的新型电信诈骗模式也屡次发生。

今年上半年，包头市公安局电信网络犯罪侦查局发布一起使用智能AI技术进行电信诈骗的案件。

据介绍，4月20日11时40分左右，福州市某科技公司法人代表郭先生的好友突然通过微信视频联系到他。短暂聊天后，好友告诉郭先生，自己的朋友在外地投标，需要430万元保证金，且需要公对公账户过账，想借用郭先生公司的账户走一下账。

好友向郭先生要了银行卡号，声称已经把钱打到账户上，还把银行转账底单的截图发给郭先生。基于视频聊天的信任，郭先生没有核实钱是否到账，于11时49分先后分两笔把430万元给对方打了过去。

可当郭先生主动给好友微信发消息，称事情已经办妥时，好友竟然不知情。他这才意识到遇上了“高端”骗局，对方通过智能AI换脸技术，佯装成好友对他实施了诈骗。

“从头到尾都没有和我提借钱的事情，就说会先把钱给我打过来，再让我给他朋友账户转过去，而且当时给我打了视频，我在视频中也确认了面孔和声音，所以才放松了戒备。”郭先生说。

值得注意的是，骗子并没使用一个仿真的好友微信添加郭先生为好友，而是直接用好友微信发起视频聊天，这也是郭先生被骗的原因之一。 骗子极有可能通过技术手段盗用了郭先生好友的微信。

也是今年4月，安徽安庆经开区发生一起“冒充熟人”诈骗案，诈骗分子使用了一段9秒钟的智能AI换脸视频佯装“熟人”，让受害人放松警惕从而实施诈骗，骗走245万元。

除了佯装“熟人脸”实施诈骗，AI换脸还可能出现在直播带货中。最近，网上出现了一些“换脸直播”教程，教程发布者声称实时变脸软件可以帮助用户轻松“变脸”，极大地助力引流卖货。

在一个展示换脸直播效果的视频中，使用者把名为“成龙”的模型载入相关软件后，摄像头前的人在直播画面中就有了与成龙相似的五官，但脸型和发型还保持原样。

△发布者展示换脸为“成龙”的实时效果和软件界面（视频截图）

据了解，公安部8月10日在京召开新闻发布会，通报公安机关打击侵犯公民个人信息违法犯罪成效情况。公安部网安局政委孙劲峰介绍，针对“AI换脸”导致群众被欺诈的问题，公安机关发起专项会战，侦破相关案件79起，抓获犯罪嫌疑人515名。

AI技术存在滥用风险

务必提高防范意识

为规范人工智能发展，去年12月，《互联网信息服务深度合成管理规定》正式发布，明确了合成数据和技术管理规范。其中提到：深度合成服务提供者对使用其服务生成或编辑的信息内容，应当添加不影响使用的标识。提供智能对话、合成人声、人脸生成、沉浸式拟真场景等生成或者显著改变信息内容功能的服务的，应当进行显著标识，避免公众混淆或者误认。

近期，也有平台和企业发布了“关于人工智能生成内容的平台规范暨行业倡议”，明确禁止利用生成式人工智能技术创作、发布侵权内容，包括但不限于肖像权、知识产权等，一经发现，平台将严格处罚。

对于个人而言，除了在形形色色的“明星脸”中保持清醒，避免陷入虚假宣传，更重要的是面对花样翻新的AI诈骗，必须保持防范意识。

01：保护信息，提高警惕。 不要轻易透露自己的身份证、银行卡、验证码等信息，不要轻易提供人脸、指纹等个人生物信息给他人，不过度公开或分享动图、视频等；

02：多重验证，确认身份。 如果有人自称“熟人”“领导”等通过社交软件、短信以各种理由诱导汇款，或涉及网络转账交易行为时，务必通过电话、见面等多途径核验对方身份，不要未经核实随意转账汇款；

03：如不慎被骗或遇可疑情形，请注意保护证据，并立即拨打96110报警。

民警给出两个识别AI换脸的小技巧：

1）可以要求对方将一根手指或其他物品放在脸前来回移动

2）可以要求对方将脸转左或转右，观察其侧脸是否有扭曲变形的现象

来源：央视新闻、新华社、检察日报、北京日报、大皖新闻