近年來 AI 圖像演算技術愈發成熟,海外常有一些網路工具能把二次元圖像的角色變為真人,甚至 Tiktok 也有自己的換臉工具。那麼輪到 3D 化的遊戲角色,AI 是否能算出更貼近現實人臉的結果呢?有些可以,但有些不行。
其實 AI 算臉的原理來自機器學習「生成對抗網路」(GANs;generative adversarial networks)的應用,透過大量的資料「餵食」讓 AI 學習人臉辨識與轉換。NVidia 在 2018 年推出「StyleGAN」開源代碼,2 代則在去年初發布。
如今,海外開發者 Max Woolf 結合 OpenAI 推出的文字圖像預訓練模型「CLIP」(Connecting Text and Images)開源碼,寫出了一個全新的「StyleCLIP」AI 換臉工具,讓你將遊戲的角色圖像模型轉換為真實的人臉。
是的,海外團隊 Corridor Crew 利用「StyleCLIP」拍了一支影片,展示了許多知名遊戲或經典作品的 AI 換臉結果,例如《巫師 3》的傑洛特換臉便相當不錯。
這類的換練演算對於臉部建模愈細膩的角色,其真人圖像就愈自然,但也是有一些角色因臉型或是美術風格的差異而導致變型。
當然,「StyleCLIP」也是有極限的。
俄羅斯《快打旋風》選手 Siberian_644 便對許多《快打旋風 5》的角色進行 AI 換臉,有些人物的臉模還算正常。
— Siberian_644 (@Siberian_644) August 30, 2021
Laura #1 pic.twitter.com/j0WlmDVg9t
— Siberian_644 (@Siberian_644) August 30, 2021
Balrog (Vega) pic.twitter.com/RNuo2JhYZd
— Siberian_644 (@Siberian_644) August 30, 2021
但是,「StyleCLIP」會從圖像演算的範圍除了五官輪廓之外,還包含了髮型與臉部飾品,例如眼罩、頭帶或面罩,同時過於誇張的美術風格人臉,就會出現相當搞笑的結果。
Ryu #2 pic.twitter.com/8UGenoxFRL
— Siberian_644 (@Siberian_644) August 30, 2021
Let's continue (there's left just a few images). Gill #1 pic.twitter.com/Mg9zNQTfcc
— Siberian_644 (@Siberian_644) August 31, 2021
Dictator, LMAO ? pic.twitter.com/wsL2LOC5Ff
— Siberian_644 (@Siberian_644) August 30, 2021
貝卡將軍突然變得那麼斯文,還真不大習慣。?