Adobe 的 Cloak 實驗功能將可輕鬆移除影片中的物件

「內容感知」的應用範圍越來越廣泛了。

以往如果需要移除影片之中的雜物(路人、車輛、電線桿等),基本上都還是需要龐大的特效團隊後製才可能處理的盡如人意,不過在這次的 Adobe MAX 大會,該公司的研發團隊則是端出了個可以用更輕鬆、省錢的方式達成差不多效果的「Cloak」實驗功能。將可運用類似 Photoshop 中的內容感知(content-aware),來選取並在影片之中刪除特定的物件 -- 效果可以看看底下的影片,真的是相當神奇!能在影片之中達成這樣的效果真的是相當厲害的一件事情。根據我們 Engadget 美國同事向官方詢問所得到的資訊,這項技術目前還是處於實驗階段,並且尚無正式推出的時程計畫,但有準備要給大眾搶鮮嘗試的機會。這樣的技術假若真的夠可靠的話,顯然將為專業製片如好萊塢的製作團隊乃至於 VR 與 AR 相關內容的製作團隊,提供一個強而有力的後製工具 -- 特別是很容易在 360 影片之中不得不「露面」的拍攝團隊,都能化為無形。

自然,影片中的內容感知要比起照片要難上更多,除了要追蹤想要移除的目標以外,還得要逐格填補上自然的內容,才能避免看起來破綻百出。有意思的是,在攝影鏡位或物體本身會移動的影片裡,其實相對靜態照片而言也是有相對的優勢存在的,畢竟比起(單張的)靜態照片,影片其實更有機會藉由不同影格參考到欲移除的物件背後的景物特徵。除此之外,研發團隊也透露之所以影片中的 content-aware 偵測功能能成為現實,也歸功於優異的動態追蹤技術。

現階段而言,Cloak 雖然表現已經相當優異,但其實在影子還有一些模糊處理上還是看得出一定的破綻,但實話講,就目前為止的表現已經算是相當厲害了,更讓人期待未來在更進一步修正之後,在更多 Adobe app 中被應用。


Adobe 'Smart Erase' for Video
Adobe 'Smart Erase' for Video

%Vidible-59e7a462c214e36dec94556e%

來源: Engadget