迪士尼的新 AI 能輕易將演員相貌變老或變年輕

這套名為 FRAN 的方案只要 5 秒就能處理好單格畫面中的某個角色。

Disney FRAN
Disney FRAN

迪士尼的研究人員日前開發出了一套名為 FRAN(face re-aging network,面部重構年齡網路)的 AI 系統,它可以很高效地將演員的相貌變老或變年輕。在其產出的結果基礎上,後製人員仍可進行手動調整,以確保效果看起來盡可能逼真。根據官方介紹,FRAN 最快只要 5 秒就能處理好單格畫面中的某個角色,這無疑能幫人省去大量的繁複工作。

在 FRAN 之前,也有人嘗試過用神經網路和機器學習技術來使重構不同年齡面貌的過程自動化。但迪士尼指出之前的方案大多只對靜態的圖像比較有效,一旦面對連續的影格其就「容易出現面部特徵丟失、解析度低、成像不穩定等問題」。在他們眼中,FRAN 是「首個實用、全自動、可用於製作」的影片圖像人臉重塑方案。

開發團隊在論文中寫到,要用真人數據集來訓練 FRAN 幾乎是不可能的。因為這需要成對的圖像,來顯示同一主體在保持相同表情、姿勢、燈光和背景的情況下在兩個不同已知年齡呈現出來的狀態。為克服這個問題,研究員創建了一個由數千張隨機生成面孔組成的數據庫,然後利用現有的機器學習方案來加工出不同年齡的效果,再把結果輸入 FRAN 進行訓練。

FRAN 會對面部圖像進行分析,並預測臉上的哪些部分會受到年齡的影響,最終它會把皺紋、磨皮等效果作為附加層蓋到原本的面孔之上。迪士尼稱這套方案能在保持演員特徵、外型不變的前提下重塑他們,即使其頭部、面部在鏡頭中處於移動或遇到光線變化也都沒有問題。而且和其它方法不同,FRAN 也不需要額外的面部對齊步驟。

對於坐擁龐大影視資源的迪士尼來說,在 FRAN 這樣的技術上投資完全是可以預料到的事情。之前 Netflix 在拍攝《愛爾蘭人》時,據稱光是為三大男主角在視覺上「裝嫩」就花掉了高達 2 億美元的預算。如果 FRAN 未來進一步成熟的話,那可想而知它在迪士尼未來的影視製作過程中能起到多大的效果啊。