范式、交互與時空：AIGC賦能VR影像的敘事創(chuàng)設(shè)研究

王 馥

人類運(yùn)用影像認(rèn)知、表達(dá)乃至影響世界的歷史由來已久。從照相技術(shù)的發(fā)明，到電影這一“活動的相片”問世，直至智能媒體時代的各種新興影像，人類影像的演進(jìn)路徑似乎契合了安德烈·巴贊“電影是現(xiàn)實(shí)的漸近線”的著名論斷。從影像視聽感官的逼真感升級，到受眾逐步參與敘事的設(shè)置，再到VR（Virtual Reality）影像的虛擬立體空間的交互敘事，創(chuàng)作者正在從“仿造真實(shí)”“逼近真實(shí)”向著“超越真實(shí)”邁進(jìn)。自2016年全球VR元年以來，VR影像在360°全息鏡頭語言創(chuàng)新、受眾交互敘事與虛擬時空維度提升等方面產(chǎn)生了突飛猛進(jìn)的發(fā)展，但是仍有諸多技術(shù)不足限制了藝術(shù)想象力的“變現(xiàn)”。AIGC（AI Generated Content）的出現(xiàn)，無疑為VR影像在各個維度的突破帶來了希望。2019年，AIGC正式進(jìn)入工業(yè)生產(chǎn)領(lǐng)域，2022年AIGC的全球知名產(chǎn)品ChatGPT（Chat Generative Pre-trained Transformer）問世后，對于VR影像“人工+智能”范式的建立、VR類型化交互設(shè)計，以及VR虛擬“高維時空”的創(chuàng)設(shè)，具有巨大的賦能潛質(zhì)。

一、AIGC賦能下VR影像“人工+智能”范式創(chuàng)設(shè)

VR影像相較于傳統(tǒng)影視，在敘事的各個環(huán)節(jié)都產(chǎn)生了顛覆性革新。在VR影像的劇本設(shè)計、全景鏡頭設(shè)計、虛擬數(shù)字人表演、影像即時渲染與信息組合生成等每個階段，AIGC在目前技術(shù)水平下都能夠予以一定的賦能，使得“VR 影像+AIGC”形成一定的可行性范式。

（一）“多通道”優(yōu)化：“VR影像+AIGC”的劇本創(chuàng)作范式

VR影像賦予受眾參與故事建構(gòu)的“權(quán)利”，產(chǎn)生了有別于傳統(tǒng)影視既定式非線性敘事的結(jié)構(gòu)，體現(xiàn)為劇作的“多通道”結(jié)構(gòu)。在一些相對成熟的VR敘事作品中，受眾置身于情境之中，被賦予角色身份，以第一人稱視角參與敘事，這就決定了VR劇本創(chuàng)作在非線性結(jié)構(gòu)上顯現(xiàn)為“多通道”敘事。美國首部VR劇集《尋蹤》（Gone）講述的是一位母親尋找失蹤女兒的故事。作者設(shè)計了一些隱藏秘密但有時效性的區(qū)域，當(dāng)受眾透過VR眼鏡聚焦于這些區(qū)域時，可以結(jié)合提示信息，影響母親尋女的情節(jié)走勢。這是從“單向性”向“多通道”過度的一種典型非線性結(jié)構(gòu)。但是，即使是《尋蹤》這樣較為典型的作品，也只是在虛擬三維時空預(yù)先設(shè)計了一些可供體驗(yàn)者參與的環(huán)節(jié)，在參與劇情的選擇上也較為機(jī)械，其表現(xiàn)出的智能化與想象力仍有欠缺。

AIGC的智能化編劇在傳統(tǒng)電影領(lǐng)域的“試水”初見成效，隨著這種智能化編劇能力的提升，AIGC 賦能VR 影像敘事的“多通道”敘事指日可待。就當(dāng)前AIGC在傳統(tǒng)電影編劇中的表現(xiàn)而言，“2020年美國查普曼大學(xué)影視制作專業(yè)的兩名學(xué)生使用基于GPT-3的AI編劇Shortly Read，續(xù)寫了電影劇本并拍成短片《目擊者》（Solicitors）。人類創(chuàng)作者給了AI編劇一個由兩三句話組成的‘激勵事件’（Inciting Incident），之后AI續(xù)寫了接下來的故事情節(jié)”。1這一嘗試的關(guān)鍵不在于Shortly Read智能系統(tǒng)根據(jù)“激勵事件”完成寫作，而在于其創(chuàng)造性地在關(guān)鍵情節(jié)點(diǎn)設(shè)計了兩個“轉(zhuǎn)折”。

AIGC這種包括“轉(zhuǎn)折”情節(jié)的設(shè)計能力在未來賦能VR“多通道”敘事方面具有巨大潛質(zhì)。由VR受眾在虛擬情境中的不同交互而產(chǎn)生的“多通道”敘事，大都是在關(guān)鍵情節(jié)點(diǎn)由“轉(zhuǎn)折”引起的不同情節(jié)走向。但是，通過什么樣的人物關(guān)系變化或突發(fā)事件引發(fā)情節(jié)的轉(zhuǎn)折，以及VR體驗(yàn)者通過什么樣的交互方式為故事開創(chuàng)出不同的情節(jié)路徑，對于VR編劇而言，是一項工作量巨大，且需要更多想象力的挑戰(zhàn)。AIGC具備的這種情節(jié)“轉(zhuǎn)折”的創(chuàng)造力還可能在未來為我們呈現(xiàn)“重復(fù)”“省略”“設(shè)懸”“解懸”“突變”等時空敘事的修辭，這無疑為VR“多通道”非線性敘事帶來更多可能。基于AIGC對文本的學(xué)習(xí)、記憶和智能算法，在未來“VR影像+AIGC”的劇本設(shè)計中，AIGC可以基于故事的關(guān)鍵詞、人物小傳、敘事線索，進(jìn)行智能化“排列組合”，并從其“數(shù)據(jù)庫”調(diào)取關(guān)聯(lián)度較高的信息與故事模型，給出大量的情節(jié)路徑。AIGC相較于人類記憶力，其“數(shù)據(jù)庫”存儲與調(diào)取功能更勝一籌。一部AIGC系統(tǒng)的存儲、編輯、組織信息的功能可能遠(yuǎn)超一個創(chuàng)作團(tuán)隊。當(dāng)然，AIGC還無法替代人類特有的藝術(shù)靈感、情感以及情緒的敏感性，這是人類在編劇藝術(shù)中的不可替代性。未來VR智能化的“多通道”敘事既有賴于AIGC提供的大量參考信息，也離不開編劇們對這些參考信息的篩選和加工，而“人工+智能”VR劇本創(chuàng)作范式的建立，有望為我們呈現(xiàn)一個更為豐富并充盈著想象力的虛擬故事世界。

（二）“即時”與“協(xié)同”：“VR影像+AIGC”的影像設(shè)計范式

從目前AIGC在傳統(tǒng)電影領(lǐng)域的應(yīng)用來講，已經(jīng)具備了智能化鏡頭的自動呈現(xiàn)功能。由中外多所高校與科研院所研究人員共同開發(fā)的AIGC系統(tǒng)Write-A-Video能夠根據(jù)文學(xué)腳本直接生成視頻，步驟分為：“（1）用戶進(jìn)行信息的輸入，主要以編輯文本的形式；（2）工具自動搜索語義匹配視頻庫中的候選鏡頭；（3）優(yōu)化組合視頻蒙太奇。視覺語義匹配分段的文本和鏡頭通過關(guān)鍵字匹配和視覺語義嵌入。”22022 年的微電影《安全地帶》（The Safe Zone）便是主創(chuàng)團(tuán)隊“訓(xùn)練”ChatGPT自主“掌鏡”的一場實(shí)驗(yàn)。在團(tuán)隊引導(dǎo)ChatGPT思考故事架構(gòu)之后，團(tuán)隊選出一個主題及其“激勵事件”，由ChatGPT在完善情節(jié)的同時，實(shí)施鏡頭語言轉(zhuǎn)化。ChatGPT最終不僅提供了完整劇本和約6分鐘分鏡頭腳本，而且給出了燈光布置、鏡頭語言、人物服飾等一系列建議。從傳統(tǒng)電影到VR影像，也是從傳統(tǒng)非線性剪輯的“既定”影像邁向由用戶隨機(jī)交互而生成的“隨機(jī)”影像，這種轉(zhuǎn)型為AIGC的賦能帶來機(jī)遇和挑戰(zhàn)。從鏡頭語言角度而言，AIGC對VR的賦能范式表現(xiàn)為“即時性”與“協(xié)同性”。

一方面是“即時性”。體驗(yàn)者進(jìn)入VR情境后產(chǎn)生了隨機(jī)交互，VR后臺系統(tǒng)需要據(jù)此即時渲染場景。但是，傳統(tǒng)VR后臺硬件和軟件都無法滿足超過一定數(shù)量的交互渲染指令。此時，AIGC可以發(fā)揮其“即時性”的大量運(yùn)算與即時成像的功能優(yōu)勢。不妨對Sheffield國際紀(jì)錄片電影節(jié)獲獎作品《失明日記》（Note on Blindness）運(yùn)用AIGC實(shí)施優(yōu)化。這部作品是對盲人腦海中世界面目的復(fù)原想象，創(chuàng)作團(tuán)隊采取了白色與藍(lán)色相間的星點(diǎn)幻化成不同景象。這些成像包括郊外的涼亭、道路上的轎車、草叢里玩耍的孩童等。體驗(yàn)者根據(jù)VR情境提示，按下指定按鍵，眼前又呈現(xiàn)出涓涓細(xì)流和茂密叢林等。如果在AIGC賦能語境下，可以在用戶面前設(shè)計出多個可供選擇的圖形，包括日月星辰、山川河流，還可以是各種人文古跡、現(xiàn)代文明元素等。當(dāng)體驗(yàn)者隨機(jī)選擇一些圖像后，眼前可即時地呈現(xiàn)出所選擇圖像經(jīng)過系統(tǒng)整合后的多重視覺景觀。當(dāng)然，這有賴于AIGC強(qiáng)大的運(yùn)算與渲染能力。這種構(gòu)想，是基于當(dāng)前AIGC在圖像設(shè)計上的功能。微信視頻號“AI科技解碼”顯示了兩種或多種物象經(jīng)過AIGC程序后可以即時地智能生成新物象（如圖1）。這種智能化地融合實(shí)際上不是機(jī)械地組合、疊加與拼貼，而是帶有創(chuàng)造性的智能運(yùn)行。

另一方面是“協(xié)同性”。VR影像360°全景攝影機(jī)由若干個鏡頭向各個方向發(fā)散，每個鏡頭之間設(shè)有“安全距離”。除了使用“縫合技術(shù)”刪掉鏡頭所攝的公共區(qū)域外，所有鏡頭內(nèi)容被剪輯“縫合”成為一個包圍著VR體驗(yàn)者的虛擬立體空間。相較于傳統(tǒng)電影鏡頭之間的線性排列，VR影像360°全景鏡頭則是同時呈現(xiàn)給受眾，VR影像的各個鏡頭最終不是“非此即彼”的進(jìn)入剪輯軌道，而是經(jīng)由“縫合技術(shù)”實(shí)現(xiàn)“彼此協(xié)同”的鏡語呈現(xiàn)。當(dāng)然，目前大多數(shù)VR作品還停留在以虛擬立體空間吸引體驗(yàn)者的層面，沒有真正發(fā)揮出鏡頭語言的“協(xié)同性”優(yōu)勢。在AIGC賦能下，這種“協(xié)同性”理應(yīng)被更進(jìn)一步地開掘，體現(xiàn)為多個鏡頭同步協(xié)調(diào)的蒙太奇切換、景深變化以及鏡頭運(yùn)動。當(dāng)前AIGC的智能水平可以通過相對精密的智能算法協(xié)助VR影像導(dǎo)演實(shí)施全景拍攝與后期剪輯工作。新華智云公司曾研發(fā)出我國首個Vlog機(jī)器人。這套AIGC機(jī)器人設(shè)備“集合了360°環(huán)視高清攝像機(jī)、專業(yè)攝影機(jī)和超高算力邊緣計算節(jié)點(diǎn)，通過激光視覺多傳感器混合定位導(dǎo)航、人物識別追蹤等技術(shù)，能自由移動、自主采集視頻、自動識別人物、自行生成專屬 VLOG”。3AIGC 基于其智能學(xué)習(xí)能力與強(qiáng)大的“數(shù)據(jù)庫”，不僅能夠通過智能算法協(xié)助VR主創(chuàng)團(tuán)隊提升影像的精度與制作效率，而且已經(jīng)具備了一定的自主“掌鏡”功能。筆者據(jù)此對由北京理工大學(xué)光學(xué)實(shí)驗(yàn)研究所聯(lián)合華誼兄弟共同出品的VR實(shí)地探索類作品《尋龍?zhí)矫亍纷龀鯝IGC的VR“協(xié)同性”鏡語優(yōu)化。原作品中的體驗(yàn)者戴著VR眼鏡，在實(shí)體空間按照虛擬“小仙女”指引，經(jīng)過山川叢林，探尋神龍奧秘，鏡頭只是呈現(xiàn)出一個虛擬的立體空間。如果在AIGC賦能下，實(shí)時攝錄的多個鏡頭、體驗(yàn)者VR眼鏡中的陀螺儀、加速度計和重力感應(yīng)器彼此實(shí)現(xiàn)智能化協(xié)同，一同跟蹤體驗(yàn)者的位移、視線和交互，并把這些信息傳遞到AIGC后臺處理系統(tǒng)。系統(tǒng)根據(jù)運(yùn)動、視線和交互信息，以及不同鏡頭方位的視覺畫面進(jìn)行高速的重組和再造，然后由“縫合技術(shù)”生成不同方位圖像。這一過程的系統(tǒng)智能化協(xié)同無疑增強(qiáng)了體驗(yàn)者在虛擬情境中的逼真體驗(yàn)。

從工作量而言，VR敘事鏡語的體量巨大，鏡頭的“安全距離”長度和角度如何確定，受眾交互可能產(chǎn)生多少種“多通道”情節(jié)，這些單純依靠人工計算和排布，制作周期過長，且計算精度不足，未來可以由AIGC幫助VR創(chuàng)作團(tuán)隊完成一定的攝制與剪輯工作。尤其是不斷迭代的ChatGPT具備了“準(zhǔn)導(dǎo)演”功能，可以分擔(dān)VR影像導(dǎo)演的部分工作，并給出相關(guān)運(yùn)鏡策劃，甚至直接給出生成式智能影像，從而為VR主創(chuàng)團(tuán)隊提供參考。

（三）多模態(tài)融合：“VR影像+AIGC”的角色行動范式

不論是劇本創(chuàng)作還是鏡頭安設(shè)，都是圍繞人物塑造、人物沖突、人物譜系的呈現(xiàn)開展工作，VR影像的人物塑造與傳統(tǒng)電影存在巨大差異。電影演員在行動調(diào)度中要具有“軸線”意識。但是在360°全景攝影機(jī)營造的立體空間中，當(dāng)體驗(yàn)者戴著VR眼鏡在場景中漫步時，運(yùn)動軌跡相對隨機(jī)，此時VR情境中再無傳統(tǒng)電影鏡頭的“越軸”情形，而是需要人物角色根據(jù)受眾所在的觀看方位，隨時調(diào)整自身運(yùn)動軌跡，并依據(jù)受眾的隨機(jī)交互，隨時調(diào)取相應(yīng)的動作模型。在當(dāng)前相對成熟的VR影像敘事作品中，情境中設(shè)定的人物角色還難以達(dá)到“隨機(jī)應(yīng)變”的智能水平。這就需要通過“VR影像+AIGC”來實(shí)現(xiàn)多模態(tài)虛擬數(shù)字人在動作上的賦能。

AIGC 多模態(tài)虛擬數(shù)字人可以對真人動作進(jìn)行信息記錄、分類、調(diào)取與重組。當(dāng)數(shù)字人從單模態(tài)向多模態(tài)演進(jìn)，除了具備從AIGC“數(shù)據(jù)庫”調(diào)取語言文字信息這種單模態(tài)功能，還具備隨時調(diào)整交流語態(tài)、交流表情、肢體動作乃至大幅度的場面調(diào)度。在多模態(tài)功能中，這些對真人的擬態(tài)功能都可以并行不悖地即時實(shí)現(xiàn)。真人與虛擬數(shù)字人的聯(lián)動涉及比VR概念外延更大的XR（Extended Reality）。XR是對VR的虛擬情境與現(xiàn)實(shí)情境的進(jìn)一步疊加和延申，是虛擬和現(xiàn)實(shí)兩種時空的進(jìn)一步融合（如圖2）。例如，位于我國華南地區(qū)的5G·AI/XR未來影像拍攝基地目前具備國內(nèi)尖端的“元宇宙”虛擬動作捕捉影棚，整體占地面積達(dá)300平方米。在高精度實(shí)時動作捕捉下，攝影棚的AIGC系統(tǒng)可將演員的表情動作完全捕捉下來。

圖2.基于真人動作捕捉的XR“延展現(xiàn)實(shí)”對比圖

AIGC“數(shù)據(jù)庫”在輸入與儲存這些信息的同時，也在同步輸出和生成信息，即形成虛擬數(shù)字人相應(yīng)的表情和動作。該基地的光學(xué)與慣性動捕設(shè)備具備高精度動作捕捉功能、數(shù)字人掃描建模功能、XR 虛擬攝制功能，以及智能光照還原等功能，這套設(shè)備是我國AIGC 中處于領(lǐng)先水平的代表。結(jié)合這些功能，筆者對由Google Spotlight Stories出品的VR 劇情短片《特別追擊》（Special Delivery）做出人物動作智能優(yōu)化。該作品講述了一名守衛(wèi)抓捕神秘的不速之客的故事。在原作品中，當(dāng)體驗(yàn)者的視線游離于關(guān)鍵信息之外時，這些信息的傳達(dá)則會中止，受眾視線移至何處，便會觸動相應(yīng)位置的事件發(fā)展。但是，這名“守衛(wèi)”的捕捉過程，無法由體驗(yàn)者操控。如果有了AIGC技術(shù)支撐，我們可以將“守衛(wèi)”置換為的多模態(tài)虛擬數(shù)字人，體驗(yàn)者可以被賦予第一人稱視角的“守衛(wèi)”，并在虛擬情境中出現(xiàn)“奔跑”“跳躍”“打拳”“回旋踢”“動作組合”等選項，又在動作的圖示提示下，做出簡單動作。系統(tǒng)捕捉后，“守衛(wèi)”則渲染出相應(yīng)的高難度動作來實(shí)施追捕任務(wù)。這無疑增強(qiáng)了虛擬情境的逼真感與體驗(yàn)者的沉浸感。

多模態(tài)虛擬數(shù)字人的VR賦能主要是從真人的動作信息中實(shí)施捕捉、存儲、復(fù)制、組合、渲染。當(dāng)一名體驗(yàn)者以某一人物身份參與VR情境敘事時，情境中的其他人物角色在沒有人為操縱的情況下，對體驗(yàn)者動作做出的反映，這也是從已有“數(shù)據(jù)庫”中調(diào)取動作信息的智能組合。在此基礎(chǔ)上，還應(yīng)當(dāng)進(jìn)一步利用當(dāng)前AIGC功能，實(shí)現(xiàn)虛擬數(shù)字人對“非文字語言”“非動作”的其它外部刺激做出反映。比如，“隨著GAN、Diffusion等生成式模型的提出，AIGC已經(jīng)可以生成高真實(shí)感的3D體動作。目前國內(nèi)外主流的3D人體動畫生成算法可以分為合成式和生成式兩類。合成式方法在生成人體動作的時長和真實(shí)感上占據(jù)優(yōu)勢，生成式方法則在生成人體動作的多樣性上占據(jù)優(yōu)勢。”4以合成式方法為例，網(wǎng)易的ChoreoMaster舞蹈編程系統(tǒng)使用了類似函數(shù)映射的方式，使音樂與舞蹈形成映射關(guān)系，并加入了節(jié)奏匹配與舞到設(shè)計約束等條件。在VR情境中，人物動作的“隨機(jī)應(yīng)變”也可參照自變量（聲音）來激發(fā)因變量（動作）的一一映射，并在其它約束條件下形成受眾與角色的隨機(jī)互動。如果說初級ChatGPT已實(shí)現(xiàn)文字語言的智能交流，那么VR所呼喚的“動作自由”則正在從實(shí)驗(yàn)走向現(xiàn)實(shí)，而對各種外界刺激都能做出反映的虛擬數(shù)字人，也在逐步提上日程。未來多模態(tài)虛擬數(shù)字人也必將為VR情境人物帶來更多超乎想象的智能優(yōu)化。

不論是AIGC賦能下未來VR智能化“多通道”敘事的劇本創(chuàng)作，還是具有“即時性”“協(xié)同性”的影像制作，抑或是虛擬數(shù)字人的“多模態(tài)”VR融合，AIGC對當(dāng)前VR影像敘事在各個制作環(huán)節(jié)的效能提升具有巨大的賦能潛質(zhì)，并且正在形成一定的“VR影像+AIGC”范式。這種融合與賦能從根本上得益于人類無窮的藝術(shù)想象力與運(yùn)用影像來表達(dá)自我、表達(dá)世界、影響世界的“集體無意識”，這種想象力與意識集合則源自人類無窮的精神潛能。

二、AIGC賦能下VR影像類型化交互敘事創(chuàng)設(shè)

與傳統(tǒng)電影相較，VR影像通過情境交互消解了“創(chuàng)作美學(xué)”與“接受美學(xué)”的壁壘，實(shí)現(xiàn)了二者的融合。近年來，VR影像已經(jīng)在“人機(jī)交互”方面取得了較大進(jìn)展，但整體上交互仍然較為機(jī)械。AIGC依據(jù)“數(shù)據(jù)庫”和智能算法能夠帶來傳統(tǒng)VR情境所不具備的“智能交互”與即興故事合成，即在一種大數(shù)據(jù)算法支撐下以智能式交互方式不斷地拓展VR原有的故事版圖。當(dāng)前VR影像交互大致分為兩大類別，AIGC具備促進(jìn)其智能化交互升級的潛質(zhì)。

（一）情境漫游類交互賦能

這類VR影像以漫游觀賞為主，包括常見的“海底漫游”“宇宙探秘”等。《前往TRAPPIST-1星系》（“終極大熊”出品）、《美宇航員月球漫步》（USA TODAY出品）、《飛向漩渦星云》（Donny Ortiz出品）、《類地行星探秘》（Donny Ortiz出品）、《土星探測船卡西尼號》（Donny Ortiz出品）等作品都設(shè)計了乘坐宇宙飛船遨游于浩瀚宇宙的類似情境。但是，當(dāng)前此類影像的情境交互主要停留于視覺渲染的初級階段。也就是說，當(dāng)受眾步入“海底世界”或“浩瀚宇宙”，畫面隨著受眾視線變化而渲染成像。

AIGC憑借“數(shù)據(jù)庫”和對各種交互的算法預(yù)設(shè)，在視點(diǎn)設(shè)置、距離設(shè)置、運(yùn)動速度、運(yùn)動軌跡等方面可以設(shè)計更為豐富的交互方式。AIGC擁有目前領(lǐng)先水平的計算機(jī)圖形渲染生成技術(shù)與動作捕捉識別技術(shù)，可以賦予VR受眾更多的自主性和參與性。一方面是在既定虛擬景象中增強(qiáng)VR受眾的行動自由。比如，AIGC可以允許VR體驗(yàn)者自主地操控手柄，控制行進(jìn)速度，通過方向盤來控制方向。在海洋、天空乃至宇宙，可以設(shè)計一些類似網(wǎng)絡(luò)游戲的伸縮地圖或智能路標(biāo)為體驗(yàn)者提供選擇。體驗(yàn)者可以根據(jù)地圖與路標(biāo)自由選擇前往的空間。在虛擬的旅途中，借助AIGC還可以設(shè)計一些和海底生物或外星人的簡單互動，增強(qiáng)受眾的自主性與參與感。另一方面是“人工+智能”的VR景觀生成。筆者認(rèn)為，可以借鑒動漫《哪吒之魔童降世》中“山河社稷圖”的設(shè)計。當(dāng)哪吒和敖丙在卷軸內(nèi)打斗時，李靖夫婦在畫外“觀戰(zhàn)”。而在“山河社稷圖”中，中國山水畫的鳶飛魚躍、天人合一的靈境隨著太乙真人猶如游戲手柄的畫筆揮舞，隨時幻化成不同景象。憑借動作捕捉識別技術(shù)，VR受眾可以揮動手柄，在虛擬環(huán)境中隨意勾勒圖形，而AIGC捕捉到手柄軌跡后，進(jìn)行識別和“數(shù)據(jù)庫”映射，隨機(jī)顯示出相似的虛擬景觀。

（二）故事建構(gòu)類交互賦能

從傳統(tǒng)電影到VR影像，受眾實(shí)現(xiàn)了從“我觀看故事”到“我在故事中”的轉(zhuǎn)變，與創(chuàng)作者共同繪制故事譜系。在敘事類VR作品中，受眾需要通過“靜觀”掌握人物關(guān)系、戲劇沖突與情節(jié)走勢，從而審時度勢，做出選擇，實(shí)施情境“交互”。在VR情境中，創(chuàng)作美學(xué)與接受美學(xué)融為一體，再次印證了智能媒介之自主性、參與性、建構(gòu)性的受眾轉(zhuǎn)向。

美國電視“艾美獎”交互式媒體內(nèi)容杰出創(chuàng)新獎（Outstanding Innovation in Interactive Media）作品VR影像《花房姑娘》（The Line）講述了一個愛情故事。男主人公佩德羅是鎮(zhèn)上的一名送報員，他鼓起勇氣，努力突破循環(huán)往復(fù)的舒適圈，向心上人羅莎表白，追求美好愛情。在《花房姑娘》中，“影像場景以微縮互動模型的方式呈現(xiàn)，用戶通過手柄觸摸微縮模型前面的多種按鈕推動故事進(jìn)一步發(fā)展，用同種提示音引導(dǎo)用戶與影像進(jìn)行互動。VR影像提示音的出現(xiàn)，既避免用戶在虛擬世界中因找不到交互按鈕無法推動劇情的發(fā)展，又為其過于沉迷虛擬世界中迷失自我起到引導(dǎo)的作用。”5該作品為選擇型交互的劇情類作品提供了范本，但是受眾在推動劇情發(fā)展中的探索性有余，選擇性不足。

圖3.電影《羅拉快跑》劇照

筆者認(rèn)為，運(yùn)用AIGC可以對《花房姑娘》實(shí)施交互的優(yōu)化。原作品的故事情境被設(shè)計成一個猶如機(jī)械裝置的景觀小鎮(zhèn)，受眾按照既定的故事走向展開探索。如果在與GPT-3同等功能的AIGC“數(shù)據(jù)庫”中，它則能夠根據(jù)主要情節(jié)在諸多關(guān)節(jié)點(diǎn)發(fā)散出不同路徑。在這個猶如機(jī)械裝置的故事世界里，體驗(yàn)者的“大手”可以操縱佩羅德騎行的道路，這似乎也決定著其愛情的命運(yùn)走向。GPT-3根據(jù)基本故事元素，可以進(jìn)行“排列組合”式的情節(jié)段落重組，如在佩羅德騎行時間、路徑的選擇上，在可供佩羅德送給心上人的黃花數(shù)量上，在佩羅德能否走出舒適圈的選擇上，以及佩羅德與羅莎能否終成眷屬的結(jié)局上，都可以設(shè)置成多重選擇的路徑。這種基于GPT-3“數(shù)據(jù)庫”的“多通道”敘事不再受到既定幾條情節(jié)線索的有限性選擇制約，而是能夠在體驗(yàn)者進(jìn)入情境后，隨機(jī)生成多重選項，可供體驗(yàn)者更大限度地實(shí)施交互。這樣獲得的文本，不再是相對機(jī)械簡單的、由一條線索發(fā)散成幾條路徑的“選擇型”結(jié)構(gòu)，而是時時發(fā)生變化的“網(wǎng)狀型”結(jié)構(gòu)。或者說，由AIGC智能算法賦能的VR交互敘事令受眾在N次進(jìn)入情境后會獲得N種故事版本，從而由這些類似虛擬“平行空間”的文本，在互文性、聯(lián)動性的關(guān)系中建構(gòu)出源于某個母題的VR“故事世界”。

三、AIGC賦能下VR影像虛擬“高維時空”創(chuàng)設(shè)

隨著AIGC對VR交互敘事的賦能，在智能式人機(jī)交互中，人們可以在虛擬時空中穿越。眾所周知，“零維”的點(diǎn)只有位置而無長短，“一維”的直線只有長短而無寬度，“二維”的平面只有面積而無厚薄，“三維”的空間只有體積而無時間。VR影像從模擬真實(shí)到超越真實(shí)，在虛擬時空中讓人們體驗(yàn)了“人生可以從頭再來”的時空魔幻。在VR世界里，虛擬三維時空獲得了“升維”。雖然傳統(tǒng)電影也有類似《羅拉快跑》《盜夢空間》般的時空重置，但是銀幕的二維平面與現(xiàn)實(shí)的三維世界作用于人的感官效果不同。VR影像以虛擬“三維時空”作為基準(zhǔn)時空，是對現(xiàn)實(shí)世界的一種復(fù)刻。在這種基準(zhǔn)之上，人們在與情境的智能交互中，獲得了有別于現(xiàn)實(shí)世界的時空體驗(yàn)。但是，由于技術(shù)和算法限制，許多關(guān)于VR虛擬“高維時空”的藝術(shù)想象難以兌現(xiàn)。不必諱言，當(dāng)前的VR作品大都還停留在對三維時空的仿造和機(jī)械化的簡單交互層面。AIGC的智能算法在VR影像的時空“升維”問題上具有重大推動潛力。根據(jù)VR自身的時空特性與AIGC的“數(shù)據(jù)庫”功能，筆者認(rèn)為，未來的VR影像可以開創(chuàng)出“網(wǎng)狀”式、“螺旋循環(huán)”式、“環(huán)狀套層”式等虛擬時空。

（一）“網(wǎng)狀”式虛擬時空

這是對當(dāng)前VR“發(fā)散”式時空的一種全面升級。在當(dāng)前的一些VR文本中，體驗(yàn)者在一些預(yù)設(shè)的“情節(jié)點(diǎn)”實(shí)施選擇型交互，出現(xiàn)了類似“人生AB劇”相對機(jī)械的發(fā)散路徑。AIGC利用其高密度、高精度、大體量的運(yùn)算能力，運(yùn)用其智能算法，通過代碼設(shè)置、數(shù)據(jù)運(yùn)算、自動識別判斷，從而進(jìn)行決策的一套機(jī)制，使簡單機(jī)械的“發(fā)散”成為繁復(fù)多變的“網(wǎng)狀”時空結(jié)構(gòu)。

入圍第74屆威尼斯國際電影節(jié)的VR劇情短片《拾夢老人》講述了一個中年男人放棄了音樂夢想，把吉他丟棄在路旁，恰好一位拾夢老人和他養(yǎng)的小狗在“夢想回收站”拾荒，收集人們遺失的夢想。原作品中，受眾進(jìn)入VR情境，以客觀視角按照順敘的故事時間觀看全片。如果采取AIGC賦能下的“網(wǎng)狀”式虛擬時空敘事，我們就可以設(shè)定人物A、人物B、人物C、人物D、人物E所遺棄的“夢想”都被拾夢老人收集起來。于是在喚醒人們夢想的故事中，就可以設(shè)計ABCDE五條路徑，而故事中的這五個人物應(yīng)當(dāng)存在著一定的人物關(guān)系。在這樣的設(shè)定下，不同線索彼此交織，形成了一張故事行進(jìn)的“網(wǎng)絡(luò)”。不論體驗(yàn)者首先選擇哪一條路徑，都會以意想不到的某種方式介入其他人物的故事路徑中，并通過反復(fù)進(jìn)入虛擬情境，與設(shè)計者共同編織故事世界的“大網(wǎng)”。

（二）“螺旋循環(huán)”式虛擬時空

這是為了改變某一事件結(jié)果而不斷產(chǎn)生“異文重復(fù)”的非線性時空安設(shè)。“異文重復(fù)”是在兩個或多個相同情形下，由于細(xì)微的差異性而引人注目，并由于這些“同中有異”的細(xì)微差別而產(chǎn)生不同的結(jié)果。這是對《羅拉快跑》式銀幕敘事的一種VR升級。這種升級一方面體現(xiàn)在VR影像借助AIGC的動作捕捉、跟蹤、識別、畫面渲染、即興創(chuàng)作的功能，在體驗(yàn)者每一次重復(fù)進(jìn)入既定時空后，令其擁有更大限度地自主性和更為智能化的交互性。另一方面，這種升級有賴于AIGC強(qiáng)大的“數(shù)據(jù)庫”儲存功能。針對前N次重復(fù)的內(nèi)容記錄，由AIGC給出第（N+1）次的虛擬場景，從而不斷優(yōu)化劇情，通過不斷地“異文重復(fù)”達(dá)到對作品主旨的揭示與升華。這是一種“螺旋式上升”的演進(jìn)式時空修辭。體驗(yàn)者在一次又一次亦真亦幻、如夢如幻的時空體驗(yàn)中，與作品創(chuàng)作者共同揭示并升華故事主題。

第六屆北京國際電影節(jié)展映的VR劇情短片《活到最后》中，受眾只能以類似電影觀眾的視角，觀看這場幾個朋友由“殺人游戲”帶來的生死迷局。在此，我們可以對《活到最后》做出“螺旋循環(huán)”的時空創(chuàng)設(shè)。例如，由于“我”思慮不周，被旁人蠱惑，導(dǎo)致同伴蒙冤而死，最終“我”在慌亂之中也成為“替罪羊”。在即將“全軍覆沒”的一刻，可以設(shè)計時間倒流回某一時刻的選項，于是這一次的“我”認(rèn)真思考迷局。當(dāng)然，虛擬情境根據(jù)“我”的隨機(jī)選擇，通過“數(shù)據(jù)庫”的信息調(diào)取與重新組合，又出現(xiàn)了新情況。比如在一種“羊群效應(yīng)”的心理戰(zhàn)術(shù)下，或在某種勢力的壓迫下令“我”做出選擇，最后導(dǎo)致自己出局。時間再次倒流，這一次的“我”加強(qiáng)了對緊張局勢的冷靜分析和對各色人物的細(xì)微觀察，一步步逼近真相，查明真兇，使自己與同伴“活到最后”。可以說，通過對《活到最后》基于“螺旋循環(huán)”型時空結(jié)構(gòu)的創(chuàng)設(shè)，我們在自我“對照”中不斷自我完善，并經(jīng)由最佳“人生路徑”實(shí)現(xiàn)了理想的“人生結(jié)局”。

（三）“環(huán)狀套層”式虛擬時空

這是一種適用于VR任務(wù)型交互的時空創(chuàng)設(shè)，若干時空層層嵌套，猶如層層疊疊的圓環(huán)。我們可以在科幻電影《盜夢空間》中尋找時空創(chuàng)設(shè)原型。該片以“利用造夢尋找機(jī)密”為動機(jī)，呈現(xiàn)造夢師利用催眠術(shù)制造了多層夢境，每一層夢境以上一層夢境的時空為依托，時間計算存在一定比例，并以倒計時的“任務(wù)時限”方式制造戲劇沖突。在未來的VR“環(huán)狀套層”時空設(shè)計中，體驗(yàn)者可以在一個母題中從AIGC給出的“數(shù)據(jù)庫”中隨機(jī)選擇若干關(guān)鍵詞，然后輸入給AIGC系統(tǒng)，由其自動生成任務(wù)和相關(guān)提示，并自動渲染相關(guān)場景。當(dāng)體驗(yàn)者步入第一層虛擬時空，AIGC根據(jù)體驗(yàn)者的交互情況，渲染出第二層時空。由于每個體驗(yàn)者在第N層時空的交互情況有別，所以不同體驗(yàn)者進(jìn)入的第“N+1”層時空都有著諸多差異性。這些差異性也有賴于AIGC的智能算法與記憶“庫存”。

例如，由“幻維世界”旗下VR影視制作部出品的VR連續(xù)劇《67號宇宙》講述了男主人公程序員華生由于極限運(yùn)動腦部受傷，在住院期間由一名神秘女護(hù)士帶往虛擬宇宙，并遇到了已故的女友小桃的經(jīng)歷。劇中，華生在現(xiàn)實(shí)世界的醫(yī)院和虛擬的67號宇宙之間徘徊，形成一種穿梭于亦真亦幻的平行宇宙的任務(wù)型敘事。原作品中的觀眾只能以“上帝視角”觀看主人公的奇幻經(jīng)歷。如果在AIGC賦能下，體驗(yàn)者可以選擇以華生的第一人稱視角進(jìn)入VR情境，并且可以為主人公（體驗(yàn)者）設(shè)計敘事任務(wù)。比如在“環(huán)狀套層”的宇宙中尋找女友死亡的真相，或是要求體驗(yàn)者找到能夠使現(xiàn)實(shí)中瀕臨癱瘓的肉身恢復(fù)正常神經(jīng)系統(tǒng)的智能療法。可以設(shè)計在每一層虛擬宇宙，體驗(yàn)者都能找到新的線索，從而層層深入，最后找到解開謎團(tuán)或恢復(fù)健康的“密匙”，再重返現(xiàn)實(shí)世界。

結(jié)語

AIGC賦能VR影像后，VR影像設(shè)計者在各個環(huán)節(jié)能夠更加充分地發(fā)揮出VR影像獨(dú)特的敘事功能。VR影像通過諸多交互設(shè)計，使受眾與創(chuàng)作者共筑一方虛擬影像的藝術(shù)世界。與此同時，虛擬時空也有望從虛擬三維的“基準(zhǔn)時空”獲得“升維”。AIGC 賦能VR 影像是為了賦予受眾更多的自主性與能動性，更大限度地開發(fā)人類在虛擬“高維時空”的想象力與創(chuàng)造力。當(dāng)然，就當(dāng)前AIGC的功能而言，還存在諸多欠缺，甚至與藝術(shù)的原創(chuàng)性相抵牾，這些都有待我們進(jìn)一步去探索和完善。阿恩海姆在《藝術(shù)與視知覺》的“引言”中寫道：“視覺形象永遠(yuǎn)不是對感性材料的機(jī)械復(fù)制，而是對現(xiàn)實(shí)的一種創(chuàng)造性的把握，它把握到的形象是含有豐富的想象性、創(chuàng)造性、敏銳性的美的形象。一個不可否認(rèn)的事實(shí)是：那些賦予思想家和藝術(shù)家的行為以高貴性的東西只能是心靈。”6不論是已然風(fēng)靡多時的VR影像還是作為技術(shù)“后起之秀”的AIGC，都是人類心靈世界的外化與延展，其融合與發(fā)展的根源仍然在于人類無限的精神動力。總而言之，“VR影像+AIGC”在未來具備無限的可能性。比如，AIGC在幫助人類運(yùn)用新興影像認(rèn)知、表達(dá)和影響世界上也必將發(fā)揮出巨大潛能。從未來看今天，本文的探索與展望也只是智能影像初始時代一段淺淺的引言。

【注釋】

1 趙瑜,張亦弛.ChatGPT將如何影響影視產(chǎn)業(yè)？——生成式人工智能背景下的影視產(chǎn)業(yè)發(fā)展趨向[J].電影新作，2023（02）：4-13.

2 MiaoWang，Guo-Wei Yang，Shi-Min Hu，Shing-Tung Yau，Ariel Shamir.Write-A-Video:Computational Video Montage from Themed Text[J].Association for Computing Machinery,2019(6):1-13.

3 新華智云，國內(nèi)首個VLOG機(jī)器人，新華智云智造！[EB/OL].https://www.sohu.com/a/402392137_120250948.2020-6-17.

4 趙鋆凡,蘇明揚(yáng),李秀.AIGC賦能高效電影制作——以3D人體動畫生成工具為例[J].現(xiàn)代電影技術(shù)，2023（07）：4-9.

5 王彥惠.沉浸·交互·想象：接受美學(xué)視域下VR影像的審美特性[J].影視制作，2023，29（05）：93-97.

6 [德]魯?shù)婪颉ぐ⒍骱Ｄ?藝術(shù)與視知覺[M].騰守堯等譯.北京：中國社會科學(xué)出版社，1984：2.