1. 首頁 > 科技 > >

清華大學|清華大學人工智能研究院：人工智能換臉開源項目數量，持續攀升

GitHub清華大學

清華大學|清華大學人工智能研究院：人工智能換臉開源項目數量，持續攀升

文章圖片

清華大學|清華大學人工智能研究院：人工智能換臉開源項目數量，持續攀升

文章圖片



《深度合成十大趨勢報告（2022）》發布 ， 其中談到：“趨勢四：深度合成領域開源項目數與討論度持續攀升” 。

2017年 ， 名為“Deepfakes”的用戶利用深度合成技術制作的成人視頻在Reddit社區中瘋狂傳播 ， 迫于公眾輿論壓力 ， Reddit網站將該用戶封號 。
該用戶隨即在全球最大的代碼開源平臺GitHub上公開了實現該技術的源代碼 ， 瞬時引發了技術愛好者的廣泛關注與討論 。 此后 ， 開發者們不斷創造和豐富更多的深度合成相關技術的項目與代碼 ， 以“GAN”、“NeRF”、“TTS”等關鍵詞進行檢索后發現 ， 2017年以來的深度合成領域的項目數量顯著增長 。
在這些開源項目中 ， 也涌現出了一些很有代表性的方法 ， 這些方法受到越來越多的關注 ， 也被應用在了不同的場景之中 。

如faceswap項目 ， 可實現識別和交換視頻中的人臉的功能 ， 自2018年初開源 ， 曾一度登上GitHub排行榜第二位 ， 目前已獲得超過4萬的關注量 。

基于這些開源方法 ， 更多的技術愛好者持續討論并且做出補充和貢獻 ， 共同促進深度合成方法在合成質量、制作效率等方面不斷升級和迭代 。

以圖像方向、音頻方向、文本方向中具有代表性的5個開源項目為例 ， 其Star數量在2021年均已突破1萬（GitHub中Star數超過1萬的項目占總項目數的比例低于百萬分之九） 。
其中 ， DeepFaceLab、first-order-model、stylegan、Real-Time-Voice-Cloning、gpt-2項目可分別實現面部替換、動作或表情操縱、人臉等圖像生成、聲音復刻、文本生成的功能 。

【清華大學|清華大學人工智能研究院：人工智能換臉開源項目數量，持續攀升】四種深度合成形式在目前都存在一定局限 ， 比如人臉替換需要對源圖像和目標圖像進行多角度的面部特征數據訓 ， 面部表情操控實現的前提是目標人物面部直對鏡頭 ， 并且能保持一段時間 ， 想要變換人臉角度就要更多的數據 ， 更多的訓練 。 而且 ， 自然融入運行的視頻之中的語音 ， 用語音合成技術也較為困難 ， 都需要很多技術和人力的投入 。
《深度合成十大趨勢報告（2022）》由清華大學人工智能研究院、北京瑞萊智慧科技有限公司、清華大學智媒研究中心、國家工業信息安全發展研究中心、北京市大數據中心近日聯合發布 。
（完）
出品人 ， 親愛的數據

    相關經驗推薦