文|智東西 ZeR0

編輯|漠影

智東西2月24日報道，近年來，視頻換臉、合成語音、修復影像、虛擬數字人等越來越頻繁的出現在社交娛樂、影視制作、教育、廣告營銷等領域，發展出多元化的商業應用。

這些應用的背后，是深度合成技術在發揮作用。

深度合成技術，是指用以深度學習、虛擬現實為代表的生成合成類算法，制作文本、圖像、音頻、視頻、虛擬場景等信息的技術。

而在使用需求不斷涌現的同時，部分惡意利用該技術生成的音視頻，如篡改人臉的色情視頻、偽造人臉視頻破解身份核驗等應用，不僅給個人、企業造成了聲譽損害和財產損失，也對社會、國家安全造成威脅。

為了對人工智能和深度合成技術的健康發展提供參考和指引，清華大學人工智能研究院、北京瑞萊智慧科技有限公司、清華大學智媒研究中心、國家工業信息安全發展研究中心、北京市大數據中心近日聯合發布《深度合成十大趨勢報告（2022）》（以下簡稱《報告》）。

《報告》從技術研究、領域應用、發展趨勢等多個方面，全面深入地介紹和研判深度合成技術及應用帶來的機遇與挑戰，并就其發展與治理給出切實可行的建議和措施。

01.落地多領域，深度合成內容迎爆發式增長

深度合成的圖像、視頻、音頻、文本等內容，例如熱門影視劇片段、話題明星的換臉視頻等等，具有極強的娛樂性與傳播性。

隨著技術日臻成熟，越來越多創作者在互聯網上發布和分享深度合成內容，數量逐年高速增長。

《報告》顯示，在國內外主流音視頻網站、社交媒體平臺上，2021年新發布的深度合成視頻數量較2017年已增長10倍以上。

其中，深度合成視頻數量最多的類型是影視音樂，涉及電影、電視劇、音樂等內容；第二是科技教育，此類視頻關注對深度合成技術的講解和討論，分享最新的研究成果等。排名第三到第五的視頻類型分別是生活、娛樂和資訊類。

用流暢手語解說北京冬奧會谷愛凌奪冠的手語AI合成主播“小聰”、登上2021年央視春晚的虛擬偶像洛天依等虛擬數字人均應用了深度合成技術。

在影視制作領域，深度合成技術已經成為受劣跡藝人行為拖累的作品的救場工具，《長安十二時辰》、《光榮時代》等影視作品均采用這一技術。

與此同時，深度合成內容的關注度也呈指數級增長，通過對互動數據進行統計，2021年新發布的深度合成視頻的點贊數已超過3億。

此前“英國女王發表圣誕賀詞”、“阿湯哥表演硬件魔術”等一系列深度合成視頻曾火爆“出圈”，引發平臺用戶大量熱討。

瑞萊智慧CEO田天表示，研究論文的持續增加、開源技術工具和大量代表性方法的涌現，令深度合成內容的效果更加逼真、制作也更加高效，尤其是生成對抗網絡（GAN）等算法的出現，讓合成內容達到了“真假難辨”的程度。

相關數據顯示，2017年以來深度合成領域的論文數量正持續增長。其中針對圖像類生成視頻的研究占比最高，達到64%，音頻和文本占比分別為12%和24%。

一些面向公眾開發的合成類產品也陸續推出，視頻、語音和文本形式的服務最為普遍。

例如支持風格定制的特效視頻制作軟件等風靡網絡；語音方向衍生出了語音導航、有聲讀物、自動新聞播報等應用；文本合成則在新聞報道、詩文創作、聊天問答等方面發揮著重要作用。

深度合成技術還極大地豐富了虛擬數字空間的信息內容，為“元宇宙”等新商業思維提供支撐。

阿里巴巴安全感知與認知智能部負責人薛輝說，比如虛擬人、數字人即是深度合成的主要應用，也是“元宇宙”的重要組成部分。

清華大學新聞與傳播學院常務副院長陳昌鳳認為，深度合成將重新定義虛擬數字化空間，從傳播社會學意義上看，一個新的人類生存場景將以深度合成技術為基石展開。

02.風險加劇，技術檢測成重要應對舉措

深度合成激發了新內容創造力的同時，也帶來了新的威脅。

2017年。名為“Deepfakes”的用戶利用深度合成技術制作的成人視頻在Reddit社區中瘋狂傳播，迫于公眾輿論壓力，Reddit網站將該用戶封號。

該用戶隨即在全球最大代碼開源平臺GitHub上公開了實現該技術的源代碼，瞬時引發了技術愛好者的廣泛關注與討論，并引爆了創造和豐富深度合成相關技術項目及代碼的風潮。

統計數據顯示，2017年以來，深度合成領域的開源項目發布數量持續增長。

以圖像、音頻、文本方向中具有代表性的5個開源項目（分別可實現面部替換、動作或表情操縱、圖像生成、聲音復刻、文本生成）為例，其Star數量在2021年均已突破1萬。

隨著技術普及，不法分子可輕易偽造音頻、視頻，實施誣陷、誹謗、詐騙、勒索等違法行為，甚至捏造國家政要言論擾亂社會與政治秩序。

例如在2018年4月，有技術團隊制作了美國前總統奧巴馬的換臉視頻，視頻中的假“奧巴馬”罵當時任美國總統的特朗普是“徹頭徹尾的白癡”。

2021年10月，安徽合肥警方曾查獲一起非法利用深度合成技術偽造手機用戶人臉動態視頻破解身份核驗，為黑灰產業提供注冊虛擬手機卡等技術支撐的案件。近年來，類似事件開始更多的進入公眾視野。

深度合成內容模糊了真實和虛假的邊界，將對社會信任、媒體信任、政治信任產生巨大的影響。

陳昌鳳認為，虛假內容的高難度甄別影響了事實核查的有效性，在社會重大事件或政治事件節點上，深度合成技術可能被用于操作輿論意見，借助社交媒體，使虛假信息短時間內引發產生病毒式擴散，激化社會矛盾。

負面風險不斷加劇，如何有效甄別深度合成內容就成為了關鍵，但隨著合成質量的不斷提升，傳統基于生物特征的鑒別方式越來越難發揮作用。

在浙江大學網絡空間安全學院院長任奎看來，目前對深度合成的檢測主要依賴于人工智能模型，依賴于訓練數據的完備性，包括檢測器泛用性低、公開數據集適用性、數據敏感等，這些都將帶來諸多挑戰。

中國工程院院士鄔賀銓認為，深度合成的治理有兩項要點。第一，要持續發展技術，不能“一刀切”地禁止，避免阻礙正向應用與創新。第二，衍生出的安全問題要從源頭上解決，利用技術創新、技術對抗等方式，持續提升和迭代檢測技術的能力。

田天也談道，新型偽造方法層出不窮、網絡傳播環境的日趨復雜，加上基于檢測算法存在漏洞缺陷等，反深偽檢測技術面臨“強對抗性”，需要持續更新與迭代。

《報告》顯示，目前學術界和產業界均已對反深偽檢測投入了大量研究，Meta、谷歌、微軟等機構均推出了深度合成視頻認證的方法或產品。

在國內，清華大學、中科大等高校在深度偽造內容檢測方面取得顯著成果。

清華大學孵化團隊瑞萊智慧RealAI、騰訊優圖實 驗室等企業機構已構建人臉合成檢測平臺并發布針對性的檢測產品，支持對多種換臉方法進行檢測。例如，瑞萊智慧推出的深度偽造內容檢測平臺DeepReal擁有工業級的檢測性能和應對實網環境對抗變化的檢測能力。

清華大學人工智能研究院基礎理論研究中心主任朱軍認為，深度合成檢測面臨持續的攻防和博弈，未來還需融合多模態內容的取證分析、基于數字水印的溯源技術等多方面能力，實現精準識別。

03.構建多維度治理機制，引導技術良性發展

深度合成技術的良性發展，離不開多維度治理機制的探索。

《報告》顯示，除了發展深度偽造內容檢測技術以外，近幾年來，針對深度合成技術惡意使用所帶來的挑戰，世界各國紛紛出臺相關法律法規，探索深度合成的治理路徑。

國際方面，美國從聯邦和州層面進行專門立法，歐盟將深度合成納入《通用數據保護條例（GDPR）》等現有法律框架規制。此外，德國、新加坡、英國、韓國等國家，均有適用于深度合成技術相關犯罪案件審理的法律法規。

我國也在積極探尋有效的治理機制。

2019年11月起先后出臺的《網絡音視頻信息服務管理規定》、《網絡信息內容生態治理規定》、《中華人民共和國民法典》、《互聯網信息服務算法推薦管理規定》，均對生成合成類內容等提出了不同程度的監管要求。

今年1月，國家網信辦公布了《互聯網信息服務深度合成管理規定（征求意見稿）》，對深度合成內容的用途、標記、使用范圍以及濫用處罰作出了具體規定。

對于深度合成內容治理路徑的探索，陳昌鳳認為可以從技術、倫理與法制等幾個方面努力，技術方面，通過政府與社會組織參與、協同治理；倫理方面，確立和倡導相關的深度合成原則。

中國社科院哲學所科技哲學研究室主任段偉文建議，對深度合成技術引發的社會、法律和倫理問題，應展開有系統性、前瞻性的跨學科研究，對其可能出現的高風險應用場景，進行有針對性的治理與監管。

中科院自動化所研究員、聯合國教科文組織AI倫理特設專家組專家曾毅則倡導產研發展自律自治，在他看來，在法律法規不完全成熟及體系化之前，產業界自身應強化“理論先行”意識，作為產業共同體共同防范濫用、嚴禁惡用。

對外經濟貿易大學法學院副教授許可談道，社會層面應加大宣傳普及力度，強化公民對深度合成等人工智能技術的認識，提高全社會的防范意識，推動公民作為負責任的深度合成技術的使用者，主動標識合成內容并積極踐行社會監督。

對此，田天也有類似的觀點，深度偽造的本質問題是透明度不足，因此提高公眾對深度合成技術的認知尤為重要，只有將門檻降低到所有受眾能夠在共同的框架下去認識、討論、理解這個問題的時候，深度合成技術才能健康良性發展。

04.結語：深度合成急需有法可依

總體來看，隨著深度合成技術逐漸成熟，合成過程更加高效、內容更為逼真，越來越多的相關正向應用正產生豐富的商用價值。同時面對當前技術仍存在的不安全隱患，檢測深度偽造的技術還需持續研究與迭代。

《報告》提出建議，監管部門需提前進行前瞻布局，在保護深度合成技術良性發展的基礎上，制訂針對不良深度合成引用的配套法規，管理條例；同時各方應與時俱進落實好新的規范要求，并在此前提下不斷追求技術突破，不斷開拓深度合成技術應用場景，創立示范標桿，形成對人工智能行業整體的帶動效應，從而促進新技術的持續健康發展。