真人熱舞變動畫美少女,StableDiffusion運用「Multi-ControlNet」AI動畫引發熱議

collage

 

近日,推特瘋傳一支動畫,一位動畫美少女表演韓國女團「宇宙少女」(WJSN)2019 年推出的歌曲〈Boogie Up〉熱舞的影片,不到兩天已超過 400 萬次瀏覽,角落還附上了一位真人跳舞的畫面,很明顯告訴大眾這是一部運用 AI 技術 StableDiffusion 生成的動畫。

 

該動畫的焦點除了美少女的神韻到位與肢體動作流暢度相當高之外,如果仔細暫停觀看,你會發現動畫美少女的衣服會改變,她的手指有時候會有不自然的地方,這些都是 StableDiffusion 過去的通病,但若播放後這些小細節便很難察覺,也獲得許多網友高度讚賞。

 

 

而這部影片則是海外網友 neilwong2012 透過 StableDiffusion 的外掛插件「ControlNet」所製作,這是一個在 AI 生成圖片前由使用者來印上一個基礎的圖上,再透過 ControlNet 來補上其他的部份。

 

以簡單的角度來說,今年 2 月,ControlNet 插件有了新的功能,「Muti-ControlNet」,可以連續生成圖片,於是這樣的技術便被 neilwong2012 所運用,他將這支真人熱舞的影片,直接運用 ControlNet 連續算圖而產生。

 

06ozgnunloja1
Credit: Reddit

 

I transform real person dancing to animation using stable diffusion and multiControlNet
by u/neilwong2012 in StableDiffusion

 

當然,不論是 StableDiffusion 或是 ControlNet,這並非一般玩家或使用者就能短時間學會使用,通常許多細節地方必須不斷調整才有較可看性的作品,但比起傳統作畫或動畫製作的耗時過程, StableDiffusion 儼然已經掀起了新的工業革命。

 

事實上,海外 YouTube 創作團隊 Corridor Crew 上個月也發布了他們運用真人拍攝結合 StableDiffusion 技術製作的動畫影片,影片中他們也強調未來 AI 這項技術將會大幅衝擊日後動畫工業。

 

 

換言之,我們之後只會看到更多 AI 輔助生成的動畫,這也是科技演化的必經之路。

 

 

推薦電競新聞

繼續閱讀
Source 真人熱舞變動畫美少女,StableDiffusion運用「Multi-ControlNet」AI動畫引發熱議 https://www.4gamers.com.tw/news/detail/57635/someone-transform-real-person-dancing-to-animation-using-stable-diffusion-and-multicontrolnet……