《愛爾蘭人》、《復仇者聯盟》，AI視效如何讓今年奧斯卡提名電影大放異彩？

《愛爾蘭人》、《復仇者聯盟》，AI視效如何讓今年奧斯卡提名電影大放異彩？

本次奧斯卡最佳視覺效果獎提名電影中，有兩部都用到了一項新技術：AI賦力的視覺效果。

兩部奧斯卡最佳視覺效果獎提名影片，《愛爾蘭人》和《復仇者聯盟4：終局之戰》均借助AI技術重新定義了人類演員和數字角色之間邊界。 AI技術在電影《愛爾蘭人》中為演員帶來了無痕減齡，又賦予《復仇者聯盟4：終局之戰》中臭名昭著的惡棍滅霸以生命。

在電影中具有開創性的AI技術背後是視覺特效工作室工業光魔（Industrial Light＆Magic）和Digital Domain，它們採用了NVIDIA Quadro RTX GPU來加速製作流程。

AI 時光機

從第二次世界大戰到2000年的療養院， Netflix出品的電影《愛爾蘭人》通過殺手弗蘭克·希蘭（Frank Sheeran）一生中不同時期的場景講述了一個震撼人心的故事。

但是電影中的三個主角，羅伯特·德尼羅（Robert DeNiro），阿爾·帕西諾（Al Pacino）和喬·佩西（Joe Pesci）都已經70多歲。 化妝部無法自然地將演員通過妝容打造成20多歲和30多歲。 導演馬丁·斯科塞斯（Martin Scorcese）反對使用常用的動態捕捉標記和其他干擾性設備實現對演員年齡的改變，因為這些設備會妨礙拍攝過程中的自然表演。

為了滿足這一需求，工業光魔開發了一種全新的拍攝模式，即“三個攝影機”拍攝法捕捉演員的表演。 導演攝影機及兩側的兩個紅外攝影機會同時用來記錄3D幾何形狀和紋理。 此外，該團隊還開發了一個名為ILM Facefinder的軟件，該軟件借助AI篩選了演員們過去表演作品中的數千幅圖像。

該軟件可以找到與攝像機角度、取景框、照明和渲染場景表達相匹配的幀，為工業光魔的藝術家們提供了相關參考，從而實現與鏡頭中的每個幀進行比較。 這些視覺參考用來完善為每個演員創建的數字雙打，以將其轉換為電影中每個特定場景的目標年齡。

“ AI和機器學習正在成為我們在視覺特效中所做一切工作的一部分，”工業光魔《愛爾蘭人》視效總監Pablo Helman表示， “NVIDIA Quadro RTX GPU為了我們的生產流程提供了強大動力，這些技術使我們為未來十年能夠取得的成就充滿期待。”

打造視效驚人的反派

《復仇者聯盟4：終局之戰》是有史以來票房最高的電影，其中包括2500多個視覺效果鏡頭。 Digital Domain的視效團隊使用機器學習在數字版本上將演員喬什·布洛林（Josh Brolin）的表演動畫化，從而打造了電影中“壞出精彩”的大反派滅霸。

該團隊開發了一種名為Masquerade的機器學習系統，以對演員的表演和麵部動作進行低分辨率掃描，然後將其表情準確地轉移到滅霸面部的高分辨率網格上。 該技術為視效藝術家節省了時間，如果沒有這項技術，藝術家們則不得不耗費精力手工製作微妙的面部動作動畫，以生成逼真且栩栩如生的數字人。

Digital Domain數字人類負責人Darren Hendler表示， “此過程的關鍵是人物情感表現的實時逼真渲染預覽，這可以藉助NVIDIA GPU技術實現。 現在，我們採用NVIDIA RTX技術來驅動我們所有的實時光線追踪數字化人類項目。”

無處不在的 RTX ：工作室、 App 均採用 AI 加速的視覺效果

越來越多的視覺效果工作室和應用程序採用了NVIDIA RTX GPU加速的AI工具，工業光魔和Digital Domain只是其中兩個。

在HBO的《佈道家庭》電視劇中，男主角約翰·古德曼（John Goodman）看起來比他實際年齡年輕了30歲，這種減齡效果是通過Shapeshifter實現的。 Shapeshifter是一款使用AI分析面部運動的自定義軟件，它能夠分析皮膚如何在肌肉和骨骼之上拉伸和移動。

視效工作室Gradient Effects借助Shapeshifter轉換演員的面部，在NVIDIA GPU的助力下，這一過程僅需耗時數周而不是數月。

Adobe、Autodesk和Blackmagic Design等公司已經開發了RTX加速的應用程序，以應用AI解決其他視覺效果挑戰，包括實景場景深度填充、色彩調整、補光和修飾、速度扭曲運動預估以進行重定時和放大。

Netflix 為 AI 賦力的預測開綠燈

除了大熒幕，諸如Netflix之類的流媒體也在使用基於AI的推薦引擎，根據客戶的觀看歷史或相似性指數為客戶提供個性化的內容，該相似性指數可為觀看習慣相似的人推送相應內容。

Netflix還會自定義電影縮略圖以吸引個體用戶，並藉助AI在較低帶寬下優化流質量。 該公司採用NVIDIA GPU來加速其處理複雜數據模型的工作流程，從而實現快速迭代。

在 GTC 2020 發現更多精彩

頂級工作室包括盧卡斯影業ILMxLAB、Magnopus和Digital Domain將會亮相於3月23日-26日聖何塞舉辦的NVIDIA GTC 2020。