無所不在的舞台、無所不能的表演者，及無敵觀演第一排——XR 媒體開拓虛實融合的無限可能
XR 延展實境是現代科技中很重要的一個名詞，它不僅融合了所謂的 AR 擴增實境、VR 虛擬實境與 MR 混合實境等意涵，將所謂的虛擬世界、虛擬物件、真實環境之融合綜合詮釋，更意味著體驗者在虛擬世界中，可以如同在真實世界中進行各種交互；或者也可以理解在真實世界中，隨時將任一虛擬環境即時呼叫進來，達到視覺穿梭或同步的效果。
既然 XR 延展實境代表了進一步的把虛實的邊界完全模糊或完全打開，就需要進一步提到如何製作這種場景或素材的相關議題，本文將會由「虛擬製作」的歷史進程開始，説明各類虛擬製作上的表現與差異，讓大家更清楚在 5G 或大量運算的環境中，虛擬製作模式產出的各種樣貌與應用。
虛擬製作並不是新的想法，最早期的虛擬製作就是所謂的背景投影，開始於 1930 年代的電影業，演員站在螢幕前，而螢幕後面的投影儀投射背景的反轉圖像，導演就可以在靜態場景中拍攝演員正在開車的場景，但早期的虛擬製作基本上就是靜態的，相機無法移動，否則視覺就會穿幫。隨後，在電腦動畫、動態捕捉、AR/VR 等技術的成熟下，逐漸催生新一代的虛擬製作。
新一代虛擬製作的代表，是 2009 年由導演詹姆斯柯麥隆所執導的《阿凡達》，當時該電影在虛擬製作上取得的重大突破，成為當時最先進的電影技術之一，包含使用了 3D 攝影機，讓觀眾能夠沉浸在潘朵拉星球的奇妙世界中；影片中的大部分場景與生物都是透過電腦視覺生成的，特別是潘朵拉星球的環境與生態系統，展示了虛擬製作的精湛技術，而劇中的飾演納美人的演員更是穿戴動態捕捉服，再透過虛擬攝影機來捕捉演員的動作與表情，導演在一旁可即時觀看完整的過程，而不再透過後期製作才了解。
也因此，現在的電影與電視製作工作，大部分都把後製需求往前拉，在規劃過程就可預先製作虛擬場景與物件、影像等，在拍攝現場就可搭配演員的表現，即時結合虛擬場景進行拍攝，省去了大量對場地的需求、演員與劇組時間，以及後期製作成本等。
虛擬製作意味著在一個固定的攝影棚中，無所限制地在任何天候、地點拍攝或穿越，並且拍攝技術智慧化，拍攝品質較傳統更精緻、拍攝速度更快、成本也更低，演員可能上一秒還在海灘，後一秒就到了月球，對劇情的想像力更可無限放大。
因此，XR 虛擬製作就是一個結合擴增實境（AR）和虛擬實境（VR）技術的領域，用於電影、電視和各類媒體製作中。這種技術通常用於創建虛擬背景、特效和場景，以增強視覺效果和渲染。
XR 虛擬製作通常包括以下元素：
• 虛擬背景： 透過AR和VR技術，製作人可以創建逼真的虛擬背景，使演員能夠在完全虛擬的環境中工作。
• 即時特效： 使用XR技術，可以在實時中加入各種特效，例如火焰、爆炸和粒子效果，以增強場景的真實感。
• 即時預覽： 製作人可以使用AR和VR設備來即時預覽虛擬效果，以便調整和優化場景。
• 虛擬攝影機： XR 虛擬製作還包括虛擬攝影機技術，允許攝影師即時模擬實際攝影中的角度和運動，以更好地捕捉虛擬場景與演員表現。
• 動態捕捉： 通常在虛擬製作中會配置動態捕捉系統與衣服，以在拍攝過程中即時捕捉演員或角色的動作細節，通常動捕系統中包含了感應器與攝影機，用於追蹤並記錄動作，有助於創建更逼真的角色動作與場景。
• 虛擬角色： 有時候劇情中若是有卡通角色、虛構角色、動物角色或外星生物等，就可以在虛擬製作中即時插入預先建置好的虛擬角色，搭配真人演出互動非常有趣味性與臨場感。
• 異地共演： 隨著網路技術的進步與虛擬製作的發達，輕量化的虛擬攝影棚可以移師到他地或在異地同步即時演出，透過直播的方式串連兩地或多地的即時演出，突破了表演的場域限制與達到拍攝的即時互動性，因此虛擬製作目前也適合支援表演、活動或晚會的直播場次，讓觀眾可看到更有趣精彩的虛實交互節目。
• 跨屏協作： 在虛擬攝影棚中，也可在拍攝的當下，透過手機或平板載具，上傳虛擬物件，透過 AR 擴增實境方式參與互動，適合在電視頻道或直播畫面中達到即時觀眾參與，增加臨場感並達到虛實融合的參與感。
近年來的 XR 虛擬製作知名案例為迪士尼的《曼達洛人》，該製片人在製作 2019 年《獅子王》時就嘗試用 XR 技術搭建佈景，後續更是用 XR 虛擬製作完成了《曼達洛人》的拍攝。在片中的各種環境與場景，包含冰凍行星、貧瘠沙漠到星際飛船的內部，XR 虛擬製作為演員、工作人員提供了逼真背景並節省了大量工作時間。
2021 年的美國福斯電視台知名歌唱選秀節目更使用的 XR 虛擬製作技術，讓每位參賽者都化身虛擬人，穿戴動補裝置搭配自己的分身在舞台上表演，自己則放心在後台專心唱歌，而日、韓等國在疫情下也紛紛推出虛擬偶像與帶狀節目，形象或擬真或動漫，但只要有才華，一樣可以像傳統的真人偶像般，吸引大批粉絲追逐，而更多演唱會、產品發佈會、影像製作，也都可以用 XR 虛擬製作省去大量後製成本，因此XR虛擬製作技術目前可謂讓一般影片或活動場次終於有機會達到好萊塢影片的製作等級。
目前 XR 虛擬製作空間配置有採用 LED 牆之設計或一般綠幕設置兩種，造價差別極大，但製作成果差異有限。XR 虛擬製作大量減低了影像後製的時間與成本，也讓影像製作過程的自由度增高、場景穿梭與運鏡靈活無限制，拍攝團隊與演員整體協作度提升，但團隊對於 XR 技術運用與 3D 渲染技術的掌握依然是一大重點，也是未來 XR 延展實境發展的新里程碑。
延伸閱讀
身心靈大滿足的 XR 療癒之旅——健體篇
當其他科技業者積極投資，蘋果的人工智慧策略是虛是實？
【白璧珍觀點】XR 就是有趣好玩的遊樂場，揭開 AWE 神秘面紗！