（原標題：“AI換臉”詐騙430萬，如何用“法”打敗“魔法”？）

1.“AI換臉10分鐘狂騙430萬”新聞中直接利用AI換臉騙取錢款的行為人構成詐騙罪，若AI換臉技術的提供方與行為人共謀，則AI換臉技術提供方（自然人）構成詐騙罪的共同正犯。若雙方無共謀，則AI換臉技術提供方則有可能構成幫助信息網(wǎng)絡犯罪活動罪。

2.“AI換臉10分鐘狂騙430萬”新聞中提及的技術即AI深度合成技術，是廣義的AIGC（人工智能生成內(nèi)容）技術群的組成部分，目前在我國，深度合成技術直接受到《互聯(lián)網(wǎng)信息服務深度合成管理規(guī)定》的規(guī)制。今年4月，國家互聯(lián)網(wǎng)信息辦公室管理《生成式人工智能服務管理辦法（征求意見稿）》亦公開征求意見，該意見稿定稿發(fā)布后，深度合成技術將受到進一步規(guī)制。

3.除刑事犯罪外，未經(jīng)允許運用AI換臉等深度合成技術還可能構成侵犯肖像權、侵犯名譽權等民事侵權糾紛，目前司法實務中已經(jīng)存在AI換臉技術構成民事侵權的判決例。

4.涉及深度合成等技術的AIGC創(chuàng)業(yè)公司需要遵守信息發(fā)布審核、個人信息保護等20個合規(guī)義務，以確保自身業(yè)務合規(guī)，具體合規(guī)內(nèi)容可見文末。

一、AI換臉新騙局，中國互聯(lián)網(wǎng)協(xié)會發(fā)文提醒

就在幾天前，內(nèi)蒙古包頭等地出現(xiàn)AI換臉新騙局，被害人好友突然通過微信視頻聯(lián)系被害人，并稱自己在外地競標，需要430萬保證金，且需要對公賬戶過賬，需要借被害人的公司走賬。被害人基于對好友的信任，加之已經(jīng)視頻聊天確認了其身份，便分兩筆將430萬轉(zhuǎn)到了好友的銀行卡上。事后被害人撥打好友電話才知道被騙。在該案中，騙子通過AI換臉技術將自己在微信視頻中偽裝成被害人好友的樣子，再利用聲音合成技術合成被害人好友的聲音，進而對被害人實施詐騙。

針對日漸猖獗的AI換臉詐騙事件，多地發(fā)文提醒公眾注意防騙風險。5月23日，四川綿陽市反電信網(wǎng)絡詐騙中心發(fā)出預警，提醒公眾注意相應的詐騙風險。就在昨天，中國互聯(lián)網(wǎng)協(xié)會向公眾發(fā)出預警，今年以來，伴隨著深度合成技術的開放開元，深度合成產(chǎn)品和服務逐漸增多，利用“AI換臉”、“AI換聲”等虛假音視頻進行詐騙、誹謗等的違法行為屢見不鮮。

目前世界范圍內(nèi)有據(jù)可查的第一起利用深度合成技術的詐騙案件發(fā)生在2019年。

深度合成詐騙第一案

2019年3月，一家國際能源公司首席執(zhí)行官接到了一個未知來電，很快，他就認出了電話那頭的人——德國母公司的CEO，也是他的頂頭上司。在這通電話中，母公司CEO表示當前公司出現(xiàn)運營危機，急需世界各地分公司緊急提供220000歐元或243000美元的資金支援，隨后這位母公司CEO提供了一個匈牙利的銀行賬戶，并宣稱該筆資金需要直接支付給某匈牙利供應商，母公司將在資金周轉(zhuǎn)過來后為分公司報銷這筆支出。雖然該指示聽起來不是既不合規(guī)又不靠譜，又涉及如此大的一筆資金流轉(zhuǎn)，但被害人考慮再三還是選擇了執(zhí)行命令，原因很簡單：電話里的聲音確實是自己的頂頭上司無誤，甚至連那標志性的輕微德國口音和語氣習慣都與自己老板平時說話時毫無區(qū)別。至此，雖然受害人還有所懷疑，但依然向“老板”電話中提供的匈牙利賬戶完成了轉(zhuǎn)賬。在這起案件中，被轉(zhuǎn)出的資金從匈牙利流向墨西哥，然后再被分散到其他地方，截至2023年5月，涉案資金仍未追回。

正因上述案件在全球范圍內(nèi)層出不窮，傳統(tǒng)的技術中立觀點在法學界已經(jīng)鮮有支持，各國對于深度合成技術亦逐步加強監(jiān)管?！痘ヂ?lián)網(wǎng)信息服務深度合成管理規(guī)定》是我國專門規(guī)制深度合成技術的規(guī)范性文件。除此之外，《網(wǎng)絡安全法》《數(shù)據(jù)安全法》《個人信息保護法》《互聯(lián)網(wǎng)信息服務管理辦法》《網(wǎng)絡信息內(nèi)容生態(tài)治理規(guī)定》《互聯(lián)網(wǎng)信息服務算法推薦管理規(guī)定》《網(wǎng)絡音視頻信息服務管理規(guī)定》等亦涉及到對深度合成技術的規(guī)管。當然，《刑法》作為最后的保護手段，亦有諸多罪名可規(guī)制利用AI深度合成技術犯罪的行為。

二、AI換臉技術服務提供者有構成幫信罪的刑事風險

不可否認目前深度合成技術是“朝陽產(chǎn)業(yè)”，隨著技術迭代深度合成技術成本急劇降低，相關企業(yè)甚至可以達到通過“走量”賺取暴利，根據(jù)調(diào)查，目前制作一套“露臉且說話”視頻的成本低至數(shù)十元，且只需要提供正面照片就能生成視頻，生成的視頻不僅眼睛、嘴巴、頭會動，如果提供文字和聲音內(nèi)容，甚至口型都能對得上，而這一切只需要幾小時就可完工。有商家稱利用照片生成一段1分鐘時長的視頻僅需要30元，質(zhì)量要求不高的幾元就可以做到。

值得注意的是，這類行為具有巨大的刑事風險，《中華人民共和國刑法》第二百八十七條之二規(guī)定了幫助信息網(wǎng)絡犯罪活動罪。幫助信息網(wǎng)絡犯罪活動罪即明知他人利用信息網(wǎng)絡實施犯罪，為其提供互聯(lián)網(wǎng)接入、服務器托管、網(wǎng)絡存儲、通訊傳輸?shù)燃夹g支持，或者提供廣告推廣、支付結算等幫助，情節(jié)嚴重的行為。此處的“明知”在實務中往往通過客觀證據(jù)即可認定，而不依賴于行為人的主觀說辭，同時，為客戶提供AI換臉技術，亦可以被解釋為“為其提供……等技術手段”。換言之，在AI換臉技術引發(fā)的電信詐騙案件如此猖獗的情況下，客戶無正當理由，且沒有顯著證據(jù)證明其獲得了照片人的認可而要求AI換臉技術提供者利用照片生成視頻，而相關技術提供者制作了視頻，又被客戶用以行騙時，AI換臉技術提供者極易陷入幫助信息網(wǎng)絡犯罪活動罪的刑事風險之中。

三、未經(jīng)允許的AI換臉技術亦有可能構成嚴重的民事侵權

除上述構成幫助信息網(wǎng)絡犯罪活動罪之刑事風險外，未經(jīng)允許的AI換臉技術亦有可能構成嚴重的民事侵權行為，實際上這種判決例已經(jīng)出現(xiàn)。如在（2022）滬0116民初13856號肖像權糾紛判決中，被告上海某科技有限公司在其運營的“AI換臉”軟件中使用了古風漢服模特廖某所拍攝的古風造型視頻模板。本案中，原告廖某對肖像享有肖像權，并且被告雖然將原告視頻中的人物形象的臉部進行替換，但仍能通過其他未修改的相應場景和細節(jié)識別出對應主體為原告廖某。原告據(jù)此主張被告構成肖像權侵權。AI換臉技術作為一種典型的與肖像有關的技術，其破壞了肖像和主體的同一性，一方面肖像主體有權拒絕其身體形象被冠以他人面目，另一方面肖像主體也有權拒絕將其面部形象嫁接至他人身體之上。結合一般肖像權侵權的構成要件，以AI換臉技術侵害肖像權的構成要件為：1.自然人對特定肖像享有肖像權；2.行為人無論是否具有盈利目的，未經(jīng)他人同意利用信息技術手段對權利人的肖像進行篡改、偽造和自動生成，產(chǎn)生難以甄別的效果。

除肖像權侵權外，利用AI換臉技術制作惡意丑化他人的視頻、圖片并在互聯(lián)網(wǎng)上廣泛傳播的，則有可能構成名譽權侵權。如在實際生活當中存在大量利用換臉視頻調(diào)侃明星、網(wǎng)紅的情形，例如制作換臉惡搞視調(diào)侃某明星唱、跳、打籃球的技巧問題，就有可能構成名譽權侵權。

寫在最后

深度合成技術作為人工智能領域最有生命力的運用，其必將會在今后迸發(fā)出極大的生產(chǎn)力，也正因如此，該領域的合規(guī)問題必須受到重視，這是深度合成技術健康發(fā)展的前提，在當今法學界，純粹的技術中立學說已經(jīng)鮮有人主張，技術本身具有自己的價值傾向性已經(jīng)深入人心，基于深度合成技術的各種風險，颯姐團隊總結了相關從業(yè)者的合規(guī)邊界以及20個合規(guī)義務，以此助力深度合成產(chǎn)業(yè)健康發(fā)展并供從業(yè)者參考：

生成內(nèi)容的合規(guī)邊界

1.不得從事涉政涉黃；

2.不得合成虛假新聞，非持牌不得傳播非國家規(guī)定范圍內(nèi)的單位發(fā)布的新聞；

3.不得違背公序良俗（例如第三者如何搶奪原配家產(chǎn)）；

4.不得生成違法和不良信息，這方面可以健全相應“特征庫”，篩選健康信息；

5.不得惡意貶損他人名譽和企業(yè)商譽（法律后果是會被起訴名譽權侵權）；

6.對于不可控的創(chuàng)作內(nèi)容，及時刪除降低社會危害。

具體的合規(guī)義務

1.健全用戶注冊制度；

2.算法機制機理審核；

3.科學倫理審查；

4.信息發(fā)布審核；

5.數(shù)據(jù)安全管理制度；

6.個人信息保護制度；

7.反電信詐騙制度；

8.應急處置管理制度；

9.在App或網(wǎng)站，公開管理規(guī)則、平臺公約，完善服務協(xié)議，以顯著方式提示各方承擔信息安全義務;

10.健全用于識別違法和不良信息的特征庫，留存日志；

11.發(fā)現(xiàn)違法和不良信息，有向主管機關報告的義務；

12.發(fā)現(xiàn)違法和不良信息，對使用者依法依約，采取處置措施；

13.全辟謠機制；

14.設置便捷申訴和舉報入口，及時反饋結果；

15.加強訓練數(shù)據(jù)管理；

16.定期審核、評估、驗證生成合成類算法機制機理；

17.依法自行或委托專業(yè)機構開展安全評估；

18.對生成內(nèi)容，采取技術措施添加不影響用戶使用的標識；

19.不得刪除、篡改、隱匿深度合成標識；

20.按照《互聯(lián)網(wǎng)信息服務算法推薦管理規(guī)定》履行備案、變更、注銷備案手續(xù)。

本文系未央網(wǎng)專欄作者:肖颯 發(fā)表，內(nèi)容屬作者個人觀點，不代表網(wǎng)站觀點，未經(jīng)許可嚴禁轉(zhuǎn)載，違者必究！

免責聲明：信息網(wǎng)轉(zhuǎn)載此文目的在于傳遞更多信息，不代表本站的觀點和立場。文章內(nèi)容僅供參考，不構成投資建議。如果您發(fā)現(xiàn)網(wǎng)站上有侵犯您的知識產(chǎn)權的作品，請與我們?nèi)〉寐?lián)系，我們會及時修改或刪除。

Tags：[db:TAG標簽](1531004)

轉(zhuǎn)載請標注：信息網(wǎng)——“AI換臉”詐騙430萬，如何用“法”打敗“魔法”？