5月22日，话题#AI诈骗正在全国爆发#，冲上微博热搜。

据“平安包头”微信公众号消息，近日，包头市公安局电信网络犯罪侦查局发布一起使用智能AI技术进行电信诈骗的案件，福州市某科技公司法人代表郭先生10分钟内被骗430万元。

“平安包头”的警情通报显示，4月20日中午，郭先生的好友突然通过微信视频联系他，自己的朋友在外地竞标，需要430万保证金，且需要公对公账户过账，想要借郭先生公司的账户走账。基于对好友的信任，加上已经视频聊天核实了身份，郭先生没有核实钱款是否到账，就分两笔把430万转到了好友朋友的银行卡上。

事后，郭先生拨打好友电话才知道被骗，原来骗子通过智能AI换脸和拟声技术，佯装好友对他实施了诈骗。

值得注意的是，骗子并没有使用一个仿真的好友微信添加郭先生为好友，而是直接用好友微信发起视频聊天，这也是郭先生被骗的原因之一。骗子极有可能通过技术手段盗用了郭先生好友的微信。幸运的是，接到报警后，福州、包头两地警银迅速启动止付机制，成功止付拦截336.84万元，但仍有93.16万元被转移。

据华西都市报此前报道，2022年2月，有位陈先生到浙江温州市公安局瓯海分局仙岩派出所报案称，自己被“好友”诈骗了近5万元。经警方核实，诈骗分子利用陈先生好友“阿诚”在社交平台发布的视频，截取其面部视频画面后再利用“AI换脸”技术合成，制造陈先生与“好友”视频聊天的假象骗取其信任，从而实施诈骗。浙江温州公安曾发布消息，2021年拱宸桥派出所接到报警，受害人小陈称他在与女网友视频聊天后被对方敲诈勒索。经警方调查，对方利用AI换脸技术，将小陈视频中的面部合成到不雅视频中，借此对其实施勒索。2020年，上海某公司高管因对方使用AI换脸与人工生成的语音技术制作公司领导的面孔，并要该高管转账，致使该高管被诈骗150万元。

AI技术改变诈骗，诈骗成功率接近100%

AI技术发展迅速，最近爆火的AI换脸，只需要提供一张带脸的照片，就可以把自己置换成视频、电视剧中的男（女）主角，而且拟真度非常高，毫无违和感。

有人把鹿晗的脸置换到刘亦菲扮演的“小龙女”角色中，就是下面这个效果。

再来看看AI诈骗常用手法

第一种： 声音合成

骗子通过骚扰电话录音等来提取某人声音，获取素材后进行声音合成，从而可以用伪造的声音骗过对方。

某公司财务小王接到领导电话，要求立刻给供应商转款2万元，并将转账信息以邮件形式发送，转款理由是避免缴纳滞纳金。由于老板的口音十分逼真，小王信以为真，在1小时内转款完成，后发现被骗。

第二种：AI换脸

人脸效果更易取得对方信任，骗子用AI技术换脸，可以伪装成任何人，再通过视频方式进行信息确认，真是防不胜防！

骗子首先分析公众发布在网上的各类信息，根据所要实施的骗术，通过AI技术筛选目标人群。在视频通话中利用AI换脸，骗取信任。

小李的大学同学通过QQ跟她借钱。对方打过来一段四五秒的视频电话，小李看到确实是本人，便放心转账3000元。然而，她在第二次转账时感觉异常，便再次拨通对方电话，这才得知同学的账号被盗，遂报案。警方判断，那段视频很有可能是被人换了脸。

第三种：转发微信语音

骗子在盗取微信号后，便向其好友“借钱”，为取得对方的信任，他们会转发之前的语音，进而骗取钱款。

尽管微信没有语音转发功能，但他们通过提取语音文件或安装非官方版本（插件），实现语音转发。

“迪丽热巴”、“杨幂”等明星直播卖货？

AI换脸或涉嫌侵权

据中新财经报道，AI实时换脸，正在直播间悄然出现。

“点进直播间一看，‘迪丽热巴’居然在直播卖货。”近日，有网友点开直播间，却发现正在卖货的竟是当红女星。然而再定睛一看，这些带货“明星”很快露出了马脚——身穿中式服装，正在卖力带货的“明星”们，其实只是使用了AI实时换脸技术的普通主播。

红星新闻视频截图

杨幂、迪丽热巴、angelababy等当红女星，成为了AI换脸的重点对象。目前的AI实时换脸，在直播中已能达到以假乱真的地步，不少人点进直播间以后以为主播只是长得像明星，不过也有一些直播间出现了人身比例失调的违和现象。

有网友指出了其中一些破绽：“主播低头整理头发的时候，脑门上全是黑的。”　“现在普通人的脸已经不配直播了。”有网友如此感慨。

网友评论截图

有视频换脸研究者表示，实时换脸不存在延迟，也不会有Bug，而直播画面传输的延迟则取决于使用者的网络配置和进行直播的平台。

据一家提供“换脸软件”的网站客服表示，他们提供的全套模型购买价格为3.5万元，AI实时换脸可适用于各大直播平台。

在一些提供换脸软件的教程或网站上，提供者均提醒要警惕使用AI换脸进行诈骗或者侵权的行为。

那么，在AI换脸直播中，平台是否负有责任？北京云嘉律师事务所律师赵占领表示，平台对于平台内商家的侵权行为不承担直接侵权的责任，而是否构成帮助侵权，主要是看平台对于商家的侵权行为是否属于明知或应知。

但对于如何判定平台对用户、权利人的投诉是否明知或应知，在一般情况下很难认定。

此前百万粉丝女网红被曝AI换脸

据报道，此前4月份，一名拥有百万粉丝的女网红被曝出了一起“AI换脸”事件。

这名女网红表示，她的视频评论区突然涌来了很多人说看过她的“视频”，但她从未发布过这样的视频。

该女网红发现，在境外社交平台上有人冒充她注册了假账号。对方先是顶着她的名义搬运她的日常内容，等到粉丝人数差不多的时候，就以会员订阅的方式贩卖视频。

有法律界人士认为：近年来，“AI换脸”走红网络，一些“AI换脸”的App使用明星的图片制作换脸视频进行推广，其趣味性背后暗藏不少法律风险和侵权纠纷。

4月11日，国家网信办起草了《生成式人工智能服务管理办法（征求意见稿）》，向社会公开征求意见，意见反馈截止时间为2023年5月10日。