夢想動畫林家齊談「LED虛擬實景攝影棚」

4/28 MeTec 2021 春季版活動我們邀請夢想動畫執行長林家齊擔任我們的開場講者！林家齊當天與現場觀眾分享夢想動畫從傳統虛擬攝影棚，到小規模LED虛擬實景攝影棚，甚至到大型LED虛擬實景攝影棚的應用與原理，讓現場觀眾快速了解「LED虛擬實景攝影棚」的特性與優勢。

以下是我們特別整理了林家齊在這場演講中部分內容逐字稿(編修版)，也附上了當日他完整演講(包括夢想動畫的介紹)，的錄影 Youtube 連結！請大家閱讀逐字稿時，可參考 Youtube 裡的投影片，

今天分享的主軸，是關於 Virtual production 的流程，過去做虛擬製作是指傳統的綠幕去背即時合成。它其實就像各位所看到的一樣，就是我們在拍攝現場直接用了一個，現在比較像是 Qtake，或是我們那時候是用 TouchDesigner 去完成的流程，就可以直接做到去背合成，讓所有的這個包含導演、攝影師、燈光師，他們都可以在現場看到這個畫面初步完成的感覺。然後大家就可以更清楚知道我們要怎麼樣在後期和在拍攝當下去做搭配。

傳統虛擬攝影棚
第一個階段之後，我們開始自己建了一個虛擬的攝影棚，在這個環境裡面，我們背景是用了這個藍KEY，然後我們有裝非常非常多的動作捕捉系統，它可以去捕捉攝影機的運鏡鏡位，然後背景我們搭配了Unreal Engine，去做一些現場虛擬的布景，這樣的型態就是比較傳統的 Virtual production，虛擬製作的形式。

當時我們其實也把很多這種即時角色，動態捕捉變成影像，這種即時成像的技術也都一起完成在裡面。我們主要是希望讓虛、實可以整合，包含 motion capture 的這些角色跟真實的人物，可以合成在同一個畫面上面。然後我們也用了相關的技術去做，像是這種虛擬角色，我們就是拿來製作成動畫影集。各位可以看到這是現場直播出來，就是完成的直接LIVE的，就會是這個動畫的內容。然後用這種方式去產製大量的動畫兒童節目，它其實成本可以降低更多。因為它不需再回到傳統的動畫工法裡面去重新後修，現場也可以直接看到完成畫面。

像這樣的技術優勢，其實在拍攝的過程中，我們可以很快的確定，像以前拍綠key的時候，早期在拍去背合成的時候，綠幕前面我們要拍好幾次，然後我們要想像去把它合成。用這種方式製作，可以減少後期製作，然後縮短拍攝工時，提升工作品質。之前我們還做了各式各樣不同型態的業配，或是用Virtual production 去玩了很多不一樣的表演。

LED 虛擬實景攝影棚
接下來是關於LED虛擬實景攝影棚，當我把原本的藍背、去背合成的過程，背景全部換成LED的時候，它就變成一個新型態的虛擬攝影棚。它可以運用在很多需要在室內拍室外戲的一些情境。它的基本的邏輯是我們用即時引擎 Unreal 去做成像，就可以把攝影機的這個定位，傳送到電腦裡面，然後在虛擬的攝影機裡面，把虛擬攝影機所看到的畫面，投放在LED上面，達到之間的連動。

有一個典型的例子，大家可以看到左下角這張，它只是一個平面，所以你當只是給它一個圖片的時候，你即便怎麼移動，它就是一個沒有透視的變化。那左上角就是它有透視變化之後，攝影機在移動過程中，有一些些微的透視變化，你就會覺得這個背景，不是一個平面，而是一個有延伸的空間。那右邊就是一個比較典型的一個示範案例，我們攝影機在移動的時候，這個背景會隨著攝影機的位置的透視，稍微做一些變化，就可以達到這個虛擬攝影。

虛擬攝影的表現形態，有很多很多的方式，像它有圓形的，也有這種L形的，它可以應用在包含像是舞台節目，又或者是戲劇電影，這些都是虛擬攝影現在一些新的趨勢。那曼達洛人在2019年的時候，它其實就做了一個超級大的LED，除了地板以外，因為地板會跟人有接觸，所以地板我們一定會實搭。那左上角大家可以看到，這個攝影機在移動的時候，你們有發現這個背景的LED，就會把這個攝影機所拍到的範圍，整個3D的場景，會有透視上的變化，藉此背景會看起來像是一個有延伸的背景，而不是只是一個單純的平面，用這種方式去做拍攝的時候，就可以達到說，我在棚內小小的空間，我可以拍攝到，感覺是一個很碩大的空間。

LED虛擬實景攝影棚的優勢

1. 不受天候時間影響
這就是為什麼拍片的時候，我們要在攝影棚裡面去拍攝，因為要是今天在室外的時候，我可能會因為太陽，日出日落或是天氣，會有一些因素去影響。那在攝影棚內的話，我就可以完全照著原本的schedule 去執行，就不會有變數。

2. 大幅減少後期處理時間
過去拍片，現場都是藍Key或綠Key，然後我們全部都要靠後期製作，去把這個藍背、綠背去背去掉之外，連那個機身飛機機身，或是汽車車上那些板金的反光，這些全部都是用動畫把它做回去的，也就是說以前我們在拍汽車廣告的時候，拍的過程，我們要把這汽車做一個一模一樣的3D汽車，然後把反射的算出來，把它貼回去。那現在透過這種 LED Virtual production，它其實可以整個整合起來。我在現場裡面拍攝到的畫面、完成的畫面，也就會是我們所看到的畫面。而且整個場景的設計跟製作，你完全就可以在這個虛擬的這個環境裡面去完成。我今天要一座山，我要一些樹，我要改變這個場景，我完全都是現場可以完成的，直接在虛擬世界裡面就完成，我不需要再去找劇組，去馬上砍一棵樹，或是去種樹甚麼之類的，全部都可以在現場直接拍攝，當下就是把它溝通討論完成。

虛擬實景車戲拍攝
我們在去年9月買了一小塊的LED，然後我們做了一個很小很小的測試的場域空間，做一些測試。當時我們運用在一部，接下來今年十月會上的時代劇『茶几』上面，它需要1960年代的場景背景，我們不可能去真的去蓋出一個1960年代的街景。因為它只是拍車戲，其實還好，我們就用那種方式，我們用一些數位的模型，去做了一些1960年代的房屋，讓這個車子在裡面拍的時候，可以去完成拍攝的畫面。像這個是車子開過台北橋，裡面有演員在對話，然後我們現場就是直接照這個鏡頭透視，去播放這樣的場景。

那這也是一個現場，我們在拍一場車的戲，你可以看到，這就是直接導演看到的就是拍攝完成的畫面，不用再說，我到時候要去背、要合成，或長甚麼樣子。而且所有的光影，因為它是跟這個拍攝現場連搭的，大家也看到像這過去這種只有在外景，用拖車拖才可以拍出這些車裡面很多細微光影的變化。這些東西，其實全部在現場的 monitor 上面可以直接呈現。等於是說過去我要去背合成的，或是我真的要拖車外景的，去封路然後去拍車戲，我全部可以在內景，室內這個棚內去完成。除此之外，其實我們因為拍攝一些廣告，像這種拍攝廣告的時候，像這樣的灰煙煙的劇情，其實是講說他從一個烏煙瘴氣的城市，然後開車到一個像北歐國家風景環境。那假如我們要用後期動畫去做的話，其實它會有非常非常多，就是需要在後期一直不斷修改的一個過程。那假如今天我們用這種方式去拍攝的話，那現場全部拍完之後，剪接之後，基本上就可以完成了。

大型LED攝影棚
嘗試完這樣小型的棚之後，我們也希望跟國外一樣，來做一些很大型的這種LED攝影棚，來嘗試看看。那我們那時候就租了一個，長20米，高4米，然後240度環形包覆的方式。然後我們來拍一場線上的發表會。像 Virtual production 最大的優勢，我現場可以改各種的光影，調整變化，這些都可以現場去做調整。然後在拍攝當下，其實你們看到這個就是直接拍攝當下拍出來的畫面，因為去年在疫情發生了之後，所以其實原本這個腳本裡面，有很多室外的場景，這些室外場景，我們也不可能像過去劇組，就是整個飛到國外去拍攝。我們其實全部就是買那種素材的授權影片，然後先後就修一下，就直接可以做拍攝。

像這種電競廠商，他們這種虛擬的電競場景，過去是真的去搭景，那每一次搭景，大概都要花到一、兩百萬，用這種 Virtual production 的話，其實就可以現場很快的去把這個場景完成，而且各位看到畫面，其實就是現場拍出來的畫面。

這邊有一段，是我覺得很有趣的部份。這一段其實是這樣，這個段落是我們在一個虛擬的場景裡面，不斷在運鏡在往前進，那其實演員從頭到尾，只是走這個跑步機上面，它其實就可以拍出一種，這演員在這個場景裡面，在跑動的一個畫面。像這樣的拍攝拍完之後，我們也想說，那我們下一次再來玩一些不一樣的，我們可以做舞台式的，做一個直角包覆型的這個 LED 攝影棚，它有天幕還有地，可以做一些舞台性的表演。

這一支是比較偏向更藝術性一點，就是比較抽象一點的一些效果。像這種虛擬拍攝，我覺得最好的是，包含演員本身或是講者本身，或是客戶本身，他們直接可以看到這個現場完成的效果是什麼。我覺得對於整個工作流程，還有對於他們這個認知上面，都非常完整。我們比較不會發生後期的時候，再一直不斷的修改，直接在現場，其實就大家都溝通完，直接確定了，就把它拍攝完成。

與傳統綠幕去背的比較
傳統的綠幕去背，我們在設定場景燈光，還有現場執行的費用，其實都會蠻高的，而且我們光影的變化，其實大部分都會在後製合成的時候去仰賴。其實大家看到很多電影，像漫威這種電影，基本上有百分之五十以上都是動畫做的，然後他們演員每次拍攝完成，我相信在後期，做了很多動畫特效，我們就要開始去把這演員，去做一個一模一樣的3D模型，然後把它這個反射一些光影，全部在算回到這個演員身上，這些其實是非常非常的細膩，而且非常非常的花時間的工。那其實搭配用 LED Virtual production 的話，它就可以大量、大幅的減少這樣的工作內容。

而且在現場，過去綠背要合成的時候，全部都是靠甚麼？全部都是靠這個導演跟攝影師，然後還有我們的動畫師，去想像說，我們今天要做出甚麼樣的畫面，讓怎麼樣看起來去調整。在LED虛擬攝影棚，直接就可以看出現場到底我們要做的是甚麼樣子的內容。

那其實像這樣的 LED Virtual production，它其實有大概四個執行的條件門檻，一個是它需要一個非常大的這個攝影棚空間，然後再來就是它需要很多的 LED 面板設備，再來就是這種虛擬製作的技術。像其實在現場我們要調燈光，我們要改一些顏色光影，都是直接可以去做調整的。然後還有包含我們要做大量的內容，它其實就很適用在商業廣告，戲劇電影、展會表演…等等。

未來的可能
那就用這種方式，其實可以節省大量這種成本，也可以做很多不一樣的延伸，我們最希望就是，未來在台灣，也可以拍一部台灣的科幻片。像這種 Virtual production 的需求，它一直是蠻蓬勃的，我們今年也是接了好幾場的發表會跟演唱會，都是做 Virtual production 的形式。這是我們希望未來有機會，可以在這個後期的製作產業上面，去做一些革新，我們變成說，動畫公司不只是後期，而是我們在前期的時候，就可以一起參與，然後去幫忙設計，去幫忙做出一些不一樣的可能。

這是目前我們在嘗試的一個比較高精度的這種 LED 攝影棚，它的差別在過去 LED 攝影棚，大概都是P2.5，P2.5就是指每0.25公分，會有一個pixel，那但是那樣的細緻度，其實你的攝影機，是沒有辦法對焦到背景的屏幕上面的，會有摩爾紋。那我們現在嘗試的是，你們看到這一塊，其實這一小塊，大概就這4個4K的顯示的像素，所以你的攝影機是可以直接對焦到背景上面的，那這也是我們在新做的一些嘗試。這攝影棚現在目前我們內湖的攝影棚裡面，大家未來有機會的話，其實我們會蠻有興趣為大家去做一些介紹。