虛擬現實技術在《牡丹亭》中的創新與應用

周智嫻

（南京郵電大學傳媒與藝術學院,江蘇南京 210000）

中國傳統戲曲歷史悠久，它萌芽于先秦時期，醞釀于隋唐時期，到了宋朝已經初步形成，元朝時期達到鼎盛繁榮，一直能發展演變至明清，當下已經形成一套非常完整的體系。本次應用是將虛擬現實技術與《牡丹亭》這部經典巨作里的片段加以結合創新，嘗試運用較為新穎的呈現方式傳播經典戲曲。希望能對虛擬現實技術與傳統戲曲藝術相互融合的創作應用，以及今后進一步的改進提高積累一定的經驗。

一、作品的前期準備與拍攝過程

1.器材的改變

自戲曲從傳統的舞臺表演傳播形式轉換為影視戲曲傳播方式之后，戲曲的創作就開始發生了變化。隨著傳播方式與途徑發生改變，戲曲由單純舞臺空間的演繹轉化為多維度呈現方式。正如董新穎提出的：“中國戲曲發展史就是戲曲藝術使用不同媒介進行傳播的歷史。”對于以VR為最終呈現方式的《牡丹亭》而言，因為吸納了新技術，所以整個作品不再停留在前期劇本與表演階段，此部《牡丹亭》作品更側重于中期拍攝與后期制作這兩個部分。

首先，VR視頻在拍攝器材上不同于以往傳統拍攝視頻的器材，它需選取與作品相匹配的VR攝像機。因為VR視頻的畫面概念上發生了改變，視頻不再是純粹平面化呈現，而是360度全方位環繞式畫面展示。為了展現更大的戲曲舞臺空間，作品拍攝時需要使用多個鏡頭同時進行拍攝，以便獲取更多的視頻素材提供中后期拼接制作。

其次，通常VR視頻拍攝，一個場景只需架設一部VR專業機位就可以實現全方位360度無死角拍攝。和傳統的一機一鏡不同，專業的VR攝像機需一機多鏡。其目的是獲取全方位的視頻素材，以便將畫面縫合制作出360度VR所需的場景畫面，此外多個鏡頭的畫面比例、分辨率、幀率也需保持一致。作品《牡丹亭》拍攝時選擇使用了Insta 360 pro全景相機進行拍攝。這種具有8k專業級的3D VR全景相機，不但擁有6個魚眼鏡頭可以做到實時拼接和同步監看。而且有助于規避拍攝時畫面、分辨率以及幀率不同等帶來的后期制作中的隱患問題。

2.場景搭建

為了使觀眾可以從某種傳統的、舊式的、固定的視角中掙脫出來，在影像內容的引導下，相對自由地選擇觀察方向與角度進行觀賞，更好地給予觀眾一定的參與感與新奇感。作品《牡丹亭》抓住了中國戲曲的虛擬性的藝術特點，借助VR技術搭建了與之所需的場景。

首先，作品《牡丹亭》中沒有景別與鏡頭運動的變化。全程只有一個全景鏡頭來表現場景的全貌和戲曲內容。其次，參照分鏡設計，在現場拍攝時，對如何設計演員走位、如何引導觀眾觀賞視線等多個方面均進行了反復推敲之后，再結合摳像技術，初步確定作品所展現的舞臺場景，為確定和進一步細化場景提供條件。最后，摳像的人物與虛擬三維動畫場景相結合，渲染生成3D水墨動畫效果。

3.拍攝要點

不同影視作品都或多或少的具有一定獨特的藝術特征與藝術表現形式，因此就會擁有相應的技術要點。對于通過VR展示的《牡丹亭》而言，有以下五個拍攝要點值得與之分享探討。

第一，傳統影視作品可以通過多個鏡頭遠近高低的安排與運動鏡頭組接交代事件、傳遞情感、烘托氣氛，但通常VR視頻中則不會有這些鏡頭變化，只有固定鏡頭。所以在VR視頻拍攝中，鏡頭的位置變得尤為重要，它的安放以觀眾觀看角度與高度為準。《牡丹亭》在拍攝前，導演已初步確定機位與鏡頭高度，并設計記錄人物活動的范圍，后將測試視頻傳到電腦上進行反復調試，以確定場景鏡頭最終的遠近高低。此外，拍攝中使用的Insta 360 pro全景相機還可以直接將視頻傳入到手機app進行同步監看，這樣即便在沒有電腦的情況下也可以通過觀看手機對演員的位置與走位進行及時調整。值得說明的一點，雖然常規視頻的鏡頭語言在VR視頻中并不起作用，為避免視頻畫面過于單一，我們可以通過調整被攝人物的位置，變換場景元素，增加畫面層次，增加交互切換等方法，人為制造蒙太奇假象，從而給觀眾帶來豐富的視覺變化體驗。

第二，在條件允許的情況下，盡量使用專業VR攝像一體機進行拍攝。一體機可同時開啟多個攝像頭，有效防止因開始時間差帶來的視頻畫面不一致，導致后期畫面縫合幀率不同步，以至畫面無法合成。

第三，關于拍攝現場是否要清場的問題。通常的VR視頻拍攝時，需要進行清場。因為在360度全景拍攝下，會拍攝到到場內工作人員導致鏡頭“穿幫”。但這也有例外，例如《牡丹亭》，因為作品采用了三維動畫虛擬場景作為場景，劇組只選擇了120度拍攝區域，所以本次拍攝沒有進行清場。處于這樣的拍攝區域，導演可以站在演員對面的位置，指導演員表演。

第四，為了減少拍攝器材的出鏡率，VR拍攝在進行360度全景拍攝中大多使用獨腳架進行拍攝，原因也是減少“穿幫”，減輕后期修圖的工作量。但同樣也有例外，例如《牡丹亭》只選擇了120度的拍攝區域，為了獲得更高的穩定性，劇組選擇了三腳架進行拍攝。

第五，還需關注一些拍攝參數。目前根據此次項目的需要，視頻選擇了25幀/秒進行拍攝制作，但隨著5G網絡逐漸完善，VR技術迅速發展下，視頻的幀數越高，帶給觀眾的沉浸感更真實。以后，VR視頻的每秒幀率還將大幅度提升。

二、作品的后期制作

拍攝之后的VR視頻需要進行大量精細的后期制作。在VR視頻的后期制作中，不僅需要進行傳統的視頻后期制作，而且需要對于左右眼的視差進行分析，縫合視頻周圍圖像，以及解決硬件適配等問題。在《牡丹亭》中，具體體現在把拍攝的演員視頻進行縫合，再將所制作的背景與演員視頻適配起來，輔之以聲音的變幻，再加以硬件調試，最終完成《牡丹亭》的VR展現形式。

1.素材整理

在正式后期制作之前，我們首先需要將前期拍攝的影像素材進行分類整理。由于VR一體機是多目拍攝，每輸出一條拍攝素材實際上等同于輸出幾段視頻素材，比傳統后期多出了幾倍的工作量。按照《牡丹亭》的呈現效果的需要，我們使用了6個攝像頭，所以獲得的是6段視頻。但又因為作品拍攝時選用的Insta 360 pro全景相機，它可以在拍攝后自動進行機內縫合，所以不需要再將視頻進行重新分類與手動人工初步縫合，從而提高了一定的工作效率。

2.縫合適配

單鏡頭的多目縫合工作是VR后期制作中基礎的一步也是關鍵的一步。面對6個方向的素材進行后期編輯并非在于傳統的剪和接，而在于對拍攝的6個畫面的縫合，盡管Insta 360 pro全景相機會在機內進行初步縫合，但是針對一些視頻素材的過縫處理，無縫修補以及畫面穿幫物體的擦除等問題，還是需要進一步精細處理。縫合拼接是非常精細化的工作，非常考驗團隊的視頻縫合處理能力。我們在VR視頻后期拼接中主要使用了mistika、Kolor AutopanoVideo，Nuke等軟件。要引起注意的是，Kolor Autopano Video對素材進行縫合運用的是捕捉鏡頭間像素特征點進行拼接的原理，但在初期拼合過程中，由于360pro不能與像人眼一樣很好的處理近遠景，近景畫面會產生裂縫，所以我們使用mistika進行深度縫合，將畫面調整成符合人眼規律的畫面。之后，再通過3D建模、后期特效處理等將水墨建筑、動植物立體化后，以達到最終虛實相生的視覺效果。

三、作品中人文情懷的體現

縱觀世界藝術史，不難看出以中國畫為代表的中國繪畫有著獨特的藝術訴求，中國畫在畫面美學上在講究筆墨、氣韻、氣勢、意境、寫、散、玄虛、形、寫意、空白等的表現。《牡丹亭》在創作中雖然使用了現代三維立體動畫技術，但仍將中國繪畫的美學訴求融入戲曲中并進行重構，利用VR的呈現方式產生具有自由、流動、深層、沉浸的全新戲曲藝術展現形式。觀眾不止看到影像本身，更能激發觀眾進行對內容主動聯想。

《牡丹亭》在設計之初就跳出常規的VR表現框框，即逼真的虛擬世界。湯顯祖的《牡丹亭》飽含著深刻的人文主義精神和情懷，經過對歷史的考察和求證，以及對湯顯祖所處的時代背景和思想主流形態進行探討之后，作品采用東方水墨化風格的背景與 真實人物的藝術創作手法。一方面是對戲曲文化本身的理解與詮釋，另一方面也傳達出中國傳統的藝術價值觀，這是中華文化、中華故事的凝聚，有利于傳統文化的弘揚和繼承。當觀眾最終佩戴上VR眼鏡進行觀賞時，戲曲則變得更具觀賞性、去儀式性，甚至交互性。因此，在戲曲創作中運用VR技術是戲曲表演在數字化浪潮中得以延續的可行途徑之一。

四、作品實際投放效果與未來的發展之路

戲曲的VR展現形式主要是通過對視覺系統進行了重塑，展現了一種沉浸式的三維立體場景。VR版本的《牡丹亭》，不僅可以呈現立體影像信息，還能使觀眾從中獲取更加豐富、多元的場景再現，讓觀眾真正置身于《牡丹亭》的真實場景中，從被動觀看者轉變成故事的參與者和體驗者。

《牡丹亭》在江蘇大劇院進行展示，江蘇大劇院能夠容納七千多觀眾，當天到場人數近五千。我們在現場進行調研后發現，《牡丹亭》的VR展示吸引了大部分的觀眾，有近80%的入場觀眾會進行拍照留念，多數年輕觀眾會上前觀看。該片的總時長約為十分鐘，每位觀賞的觀眾大概停留時間近七分鐘。約70%的觀眾愿意使用VR眼鏡觀看，其中男生約60%，女生約40%人。大部分的觀看過的觀眾表示，這種VR展示十分有趣，人物栩栩如生，一致對中國傳統文化的創新形式十分贊賞，感受到了科技與藝術的融合，重新認識了戲曲文化。

從投放的效果和反饋來看，這種VR展現戲曲表演的形式可以吸引廣大觀眾尤其是年輕觀眾的目光，戲曲藝術與虛擬現實技術的結合能夠讓觀眾更立體地了解中國故事，以新的觀念、新的認知、新的維度感受全新的中國戲曲文化。中國戲曲未來的發展之路應該堅守中國戲曲的文化內涵，在此基礎上進行內容、形式、載體、途徑、傳播方法等創新，不斷地將新技術與傳統戲曲相互融合滲透。