場景描述：機器學(xué)習(xí)、VR、AR等技術(shù)助力電影特效鏡頭的制作，不僅大大改善科幻電影視覺效果，同時也節(jié)省大量人力與時間成本。

關(guān)鍵詞：機器學(xué)習(xí)計算機視覺 視覺特效

期盼已久的《復(fù)仇者聯(lián)盟：終局之戰(zhàn)》終于在今天上映了！近 300 萬人在今日國內(nèi)午夜零點場熬夜觀看。

迄今為止，在電影界有著如此大的吸引力的，恐怕非漫威莫屬了。有人說：「特效始于電影，高至漫威」。因此，除了精彩的劇情，《復(fù)聯(lián)》系列帶來的視覺沖擊也是它實力圈粉的原因。

據(jù)統(tǒng)計，《復(fù)聯(lián) 3 》里包含2680個特效鏡頭，獲得第 22 屆好萊塢電影最佳視覺效果獎。而距離 3 首映僅一年，《復(fù)聯(lián) 4 》就帶著超過3000個特效鏡頭趕來。這背后是12家特效公司、上千人團(tuán)隊以及計算機的工作。

今天我們不聊劇情，聊聊特效與它的新武器人工智能的那些事。

假如復(fù)聯(lián)沒有特效

很難想象沒有特效的復(fù)聯(lián)會是什么效果。而沒有強大的技術(shù)力量，《復(fù)聯(lián) 4 》可能也不會這么快與我們見面。要知道，曾經(jīng)以特效驚艷觀眾的《阿凡達(dá)》每幀畫面平均耗費了 4 萬個人工小時。

特效是指影視作品拍攝和制作中，利用數(shù)字技術(shù)的手段「制作」出難以完成或者有危險的畫面。

我們常說的「大場面」就是優(yōu)秀的視覺特效了。

《復(fù)聯(lián) 3 》全片 2680 個特效鏡頭，只有 4 個鏡頭沒使用特效。刷新了當(dāng)時漫威電影的特效鏡頭紀(jì)錄，這些特效制作成本高達(dá) 2.5 億美元。所以如此打造的視覺盛宴，誰能扛得住。

如果沒有特效，你看到的復(fù)聯(lián)，畫風(fēng)完全是另一個模樣

但特效的制作一般需要花費巨大的心血和財力，所以特效做的不好的話會被戲稱「五毛特效」。而隨著機器學(xué)習(xí)的發(fā)展，以及 VR， AR 技術(shù)的成熟，視覺特效這項工作已經(jīng)在人工智能的幫助下，開啟了新篇章。

特效的 AI 核武器之一：工業(yè)光魔

參與《復(fù)聯(lián) 4 》制作的 12 家特效公司之一，工業(yè)光魔（ILM，Industrial Light and Magic ），憑《星球大戰(zhàn)》開創(chuàng)了特效新時代，一舉成為電影特技的「領(lǐng)頭羊」。

迄今為止，工業(yè)光魔已經(jīng)為多達(dá) 300 部的影片制作特效，并獲得過 15 次奧斯卡最佳視覺效果獎。《加勒比海盜》、《變形金剛》等電影特效都是工業(yè)光魔參與制作。

在《復(fù)聯(lián) 3 》中，瓦坎達(dá)之戰(zhàn)是由工業(yè)光魔參與制作的，包括滅霸飛船、瓦坎達(dá)上的所有戰(zhàn)斗、反浩克裝甲戰(zhàn)斗等片段，共有近 400 位視效藝術(shù)家完成了 600 個特效鏡頭。

瓦坎達(dá)之戰(zhàn)中的特效

如今，工業(yè)光魔正致力于使用人工智能對光線追蹤產(chǎn)生的圖像進(jìn)行去噪。這將減少 CPU 的負(fù)擔(dān)并大幅度地節(jié)省時間。

公司負(fù)責(zé)人還介紹說，「我們還在研究以半自動方式識別和替換人臉的技術(shù)，這將會是一次巨大的飛躍?！顾岬降膿Q臉技術(shù)，便是類似于前段時間很火的 deepfake 技術(shù)。

工業(yè)光魔制作的綠巨人特效

利用這種技術(shù)，工業(yè)光魔團(tuán)隊可以將一位演員的樣子映射到表演者臉上，并且制作效率大大提高。

工業(yè)光魔 CTO Rob Bredow 在一次演講中表示，在電影中用一個 deepfake 算法的話，實現(xiàn)的效果質(zhì)量還不夠高。但是他們已經(jīng)確定了什么是限制所在。不久后，他們會將類似 deepfake 但是質(zhì)量更高的技術(shù)用在電影中。

特效 AI 武器之二：數(shù)字王國

在《復(fù)聯(lián) 3 》里，滅了一半宇宙的「大紫薯」滅霸，就是著名的特效公司數(shù)字王國（ Digital Domain ） 利用了機器學(xué)習(xí)等技術(shù)打造而來。

曾有媒體報道，滅霸的外部形象為這個人物注入了靈魂。有沒有一種感覺，看到滅霸的樣子，就能感受到他是個狠人。

數(shù)字王國的一位工作人員說，如果你的特效軟件里沒有用機器學(xué)習(xí)，那你就會做錯

數(shù)字王國通過全新技術(shù)捕捉了演員 Brolin 的面部表演，并通過機器學(xué)習(xí)的技術(shù)，將他的表演轉(zhuǎn)化為極具存在感的主角——滅霸。

數(shù)字王國使用Masquerade 定制機器學(xué)習(xí)軟件，通過兩個垂直方向的高清攝像頭捕獲面部數(shù)據(jù)，細(xì)致追蹤面部的100 到 150 個跟蹤點。

之后，通過計算機視覺的技術(shù)，訓(xùn)練和調(diào)試機器學(xué)習(xí)模型，自動將得到的臉部渲染映射到滅霸這個角色上，最終得到自然的面部視覺效果。

滅霸扮演者 Brolin 被「特效」后的對比

通過他們的努力，我們看到了這個偏執(zhí)，兇狠，硬氣，而又帶點柔情的大反派。如果沒有這些技術(shù)，也許滅霸的形象就不會這么豐滿，也不是那個為了看日落而實行「人口控制」的狠角了。

特效的 AI 核武器之三：全面降維打擊

借助于 AI 技術(shù)，視覺特效將不再需要大量斥資，就能得到更好的視覺體驗。

同時利用到云計算，高性能的 GPU 等硬件，以往需要兩個小時渲染的幀，可能只需要兩秒鐘就能完成。

得益于這些技術(shù)，行業(yè)內(nèi)的設(shè)計師、藝術(shù)家能夠節(jié)約更多時間去創(chuàng)作更多有趣的東西。

如此一來，只要你有一個較小的工作室，甚至是獨立的藝術(shù)家，利用技術(shù)就能獲得蜘蛛俠或者 X 戰(zhàn)警電影中看到的效果。

真實拍攝和制作后的鏡頭對比

現(xiàn)在機器學(xué)習(xí)已經(jīng)被用于在基于物理的動畫和媒體藝術(shù)中，創(chuàng)造出有趣的效果，但是隨著計算變得更加高效和新穎的方法，如深度強化學(xué)習(xí)技術(shù)，將會創(chuàng)建出更具可擴展性的模型。

如果這項技術(shù)成為主流，工作室電影和獨立電影的視覺特效成本將會大大降低，對于熱愛電影的人士，無異于又一個福音 。

復(fù)聯(lián) 4 ：驚喜遠(yuǎn)不止特效

相比于《復(fù)聯(lián) 3 》最終收獲了奧斯卡最佳視覺的多項提名，《復(fù)聯(lián) 4 》不知道又會帶來什么樣的視覺盛宴。

根據(jù)已經(jīng)公布的 12 家參與制作特效公司名單陣容，加之整部電影中超過 3000 個特效鏡頭?？上攵?，《復(fù)聯(lián) 4 》絕對是頂級的制作水準(zhǔn)。

而且漫威對自己這個系列的收官之作，想必也是不會掉以輕心，畢竟那么優(yōu)秀的前作 3 ，似乎都是在收著，為了 4 做鋪墊。

所以雷神會不會用毀天滅地的大錘爆發(fā)雷霆之力，火箭浣熊怎么繼承格魯特成為搞笑擔(dān)當(dāng)，以及滅霸和聯(lián)盟之間的戰(zhàn)爭能夠壯觀到什么程度，也許只有親自去影院，為信仰充值一下，才能知曉結(jié)果了。

祝愿每一個要去看電影的小可愛，都沒有在觀影前被強行劇透，然后在影院里看得盡興！

超神經(jīng)百科

CG （CG 影視動畫，Computer Animation）

CG 是借助計算機來制作動畫的技術(shù)。大致可以分為二維動畫（2D）和三維動畫（3D）兩種。

CG 原為 Computer Graphics 的英文縮寫。隨著以計算機為主要工具進(jìn)行視覺設(shè)計和生產(chǎn)的一系列相關(guān)產(chǎn)業(yè)的形成,國際上習(xí)慣將利用計算機技術(shù)進(jìn)行視覺設(shè)計和生產(chǎn)的領(lǐng)域通稱為 CG。

它既包括技術(shù)也包括藝術(shù)，幾乎囊括了當(dāng)今電腦時代中所有的視覺藝術(shù)創(chuàng)作活動，如平面印刷品的設(shè)計、網(wǎng)頁設(shè)計、三維動畫、影視特效、多媒體技術(shù)、以計算機輔助設(shè)計為主的建筑設(shè)計及工業(yè)造型設(shè)計等。