By accepting you will be accessing a service provided by a third-party external to https://www.incgmedia.com/

繪製草圖即可生成真實臉蛋!全新 AI 人臉生成器 DeepFaceEditing 獲 SIGGRAPH 2021 認可

隨著 AI 人臉辨識技術的提升,要打造出一個擬真的 CG 人像,可說是越來越容易。在還沒到來的 SIGGRAPH 2021,就已經有團隊搶先公布自己的 AI 人臉生成器,並獲得官方的認可,這個名為 DeepFaceEditing 的人臉生成器究竟有多猛?一起跟著 CG 世界的腳步,來看看這個新的黑科技吧!

本文已獲得 CG 世界授權。


透過草圖,編輯 CG 臉部圖像  

人臉生成器 DeepFaceEditing 由來自中國科學院計算技術研究所等優秀院校的幾個工程師們研發而成。他們提出了一種允許使用者直覺地編輯人臉圖像,並透過詳細控制來操縱其幾何形狀(geometry)和外觀特徵(appearance)的方法,目前這個方法已經被 SIGGRAPH 2021 所認可。 

目前市面上常見的臉部合成方法,都是透過現有的條件來生成模型的,或是藉由草圖,儘可能地描繪出臉部的形狀,比如臉部的輪廓、頭髮的結構以及臉上的皺紋等等,但這些都缺乏了對外觀的控制,而外觀又是受到顏色、材質、燈光等條件的影響的。而 DeepFaceEditing 就是專門為臉部圖像而設計的一種結構化的框架,這個框架可以實現一系列靈活的臉部編輯工作。舉例來說,根據參考圖像更改外觀,同時保留幾何形狀;又或者說在保留外觀的同時,用草圖替換臉部的幾何形狀;還有使用草圖編輯幾何形狀,並同時編輯幾何形狀和外觀特徵。 


DeepFaceEditing 案例解析與分享  

在團隊釋出的影片中,也可以看到 DeepFaceEditing 的使用案例,例如下方從 a 到 f 的圖片,分別代表不同步驟。

 ♦a:要找好一張用來參考的人臉圖像

♦b:根據選好的人臉圖像,在更改外觀的同時,比如膚色和髮色,還可以保留住幾何特徵

♦c:這個方法還可以在保持外觀的同時,用草圖替換臉部的幾何形狀

♦d:通過 DeepFaceEditing 的方法,不僅可以將真實的人臉解構成幾何和外觀,還可以非常完美的重建出我們用來參考的人臉圖像

♦e:通過草圖來編輯幾何形狀

◆f:編輯幾何和外觀

特別提醒一下,圖片裡用綠色小框框出來的是外觀特徵,用橙色框框出來的是幾何特徵。然後可以根據下面這張圖大致了解一下它的流程。

這是 DeepFaceEditing的框架概述,這個流程採用了一種叫做local-to-global的方法,右上方顯示了用於「右眼」的局部解構模板,右下方則是全局融合模板。  


以圖像解析 DeepFaceEditing 的使用方式  

下圖是一張利用草圖進行臉部編輯的截圖,(a)和(b)是分別覆蓋在幾何圖像,並在相應生成的臉部圖像上輸入草圖。 (c)是控制功能面板,可以看到具體的功能,(d)則是分別生成的圖像列表。  

下是使用手繪草圖來進行的人臉「合體」。透過控制外觀,DeepFaceEditing可以從手繪草圖生成各種逼真的臉部。  

最後,在下方圖片中,藉由左上角和右下角的人臉圖像,也就是兩個紅色框裡的圖片,可以利用解構,實現不同的臉部成果。其餘的人臉圖像則是使用 DeepFaceEditing 自動生成。 


本文經 CG 世界 授權發布,內容僅有做字詞修改,保留作者所述內容,但不代表映CG 立場。如需轉載請聯絡原作者。

NFT 應用再擴大!國際動畫工作室紛紛運用 NFT 打造動畫影集
風格化DC、漫威角色,橫跨動畫及遊戲領域的數位藝術家分享創意靈感與秘訣

相關文章

非常興奮向大家介紹這期映CG 雜誌的主題「The Magic behind Visual Effects:迷人的視效魔法,特效製作的眉角」。這一期我們深入挖掘了視覺特效在影視、動畫作品中的神奇之處,以及背後的製作秘辛。透過全方位的報導,將視效藝術家們的心血、技術創新,以及行業現況呈現在您面前。
還沒有帳號嗎? 點此立即註冊!

登入您的帳號