在這次MAX 2017活動中,Adobe對公眾展示了新的計劃:Project Cloak! 再次展示智慧演算在影像上的新應用。
前身:Content Aware(內容感知)
從前幾代的Photoshop開始,就已有所謂的「智慧內容感知(Content Aware)」的填滿功能(Fill),相信許多影像工作者、尤其是平面影像的朋友們都不陌生,想輕易且快速的移除畫面中的某樣物件或人物,使用該功能搭配「仿製印章工具」,可說是易如反掌。
連續的動態影像可就沒這麼容易了,過去我們在影片後期的實務應用上,也常為了達到以上目的,大量的使用了After Effects的Mask遮罩功能,用周圍的區塊遮住特定元素,但主要仍針對固定背景的素材(Fixed Shots),對於攝影機有移動的畫面,也別無他法。
Cloak計劃
自從有了PS的「內容感知」後,相信不少人也曾想過:「要是能應用在AE上就好了…」,看來Adobe聽見大家的心聲,或是說開發團隊自己也早有此意,於是有了這個Cloak計劃,研發針對動態影片的內容感知、消除物件的功能,全新的演算法,是個不小的挑戰。
有件好笑的事,我想不少人都幹過,那就是將影片轉成圖檔、送到PS去做「內容感知」的處理,再還原成影片。想去除的東西雖然去除了,每個畫格的內容感知結果卻都大不相同,別說做白工了,沒做可能還比做了的好。看來Adobe也明瞭不少人幹過這檔蠢事,現場又勾出咱心裡的痛。
Cloak計劃如果順利推出,準確度應更勝PS原本的內容感知,為什麼? 別說我是看了展示影片才這麼說,除了Adobe的成果展示(看以下畫面)以外,就技術理論而言:因為PS的內容感知是依照選取區周圍的像素數值、邏輯、規律…等要件進行分析、進而演算出選取區域內應填滿的資訊 ; 如果是影片的「內容感知」,除了以上資訊的取樣參考以外,還多了前後多張畫格(Frame)的資訊、幫助提升分析準確度,這也是為什麼該功能在動態影像的應用上,比平面還要值得期待的原因。
而Cloak究竟何時可於Creative Cloud內搭載,Adobe並無提供準確的日期,如果將來順利上線,預計可在After Effects、Premiere等自家工具中直接、或以外掛的方式呼叫使用。
再強,仍是輔助
儘管後期技術應用越來越強大,前置作業仍不失關鍵角色,即使Cloak帶來極大方便,仍無法超越完善的前置作業所帶來的成果(至少現在看起來是如此),想消除畫面中的路人甲,與其靠後期,不如拍攝當下做好交通管制。這類功能再強大,只是為了彌補前置作業上的不足或疏失,真要要求完美影像,仍是前置為主、修片為輔。
MAX 2017的Project Cloak展示實況: