AI影視制作新時代

如今，隨著AIGC技術不斷發展，數字人需求正在迎來階梯性的增長，目前已廣泛應用在包括直播、游戲、影視、短視頻等多個業務場景中，為這些行業發展起到了降本增效的作用。聚力維度成立于2016年，一直致力于數字人創新技術研發。早在2014年我們就開始涉足AI與影視制作的研究。當時主要是運用計算機視覺技術，在影視行業進行后期制作相關工作，一直想將人工智能技術全面應用于影視制作的全流程。經過幾輪人工智能技術革新和浪潮，我們現在已經非常接近這個目標。2021年，由聚力維度全面研發的人工智能數字人驅動引擎“賽博演猿”正式推出。

讓影視制作更簡單高效

“賽博演猿”的推出，主要是基于我們在深入研究影視行業的成本構成后，發現其中最主要的成本來源是將人物畫面置入虛擬場景拍攝。因為，傳統的影視制作通常有兩種方式——實拍結合后期制作和純虛擬動畫制作，這個過程還包括原畫設計、建模、后期渲染等步驟。盡管這些方式能制作高質量影視作品，但成本高昂且制作周期長。

為了解決這個問題，我們提出了一種全新制作思路。這一思路以AIGC數字人為核心，在元宇宙的3D數字世界中拍攝，形成一種新型AI影視制作工具，結合鏡頭、燈光等交互工具，就能夠實現數字化直接拍攝，既可以直播，也可以錄制電影。

我們的研究與Sora在核心目標上存在共鳴，都期望AI成為生產力主體，而非僅作為輔助工具。在研究AI技術對于影視行業的應用時，很多人認為，僅僅在現有人工流程中嵌入AI環節，可能無法充分發揮AI潛力。我們堅信，真正的AI影視制作應當是一個多模態過程，不限于文字和像素的輸入和輸出，還包括聲音、情緒表達和肢體動作等方面。因此，我們致力于開發一個多模態制作流程，從而更全面地展現創作者意圖和情感。

在AI輸出方面，我們希望輸出的是結構化圖形，而不是單純像素，所以決定在生成數字人時，采納多模態生成方式。例如，在塑造人臉時，相較于煩瑣的文字描述，圖像描述更為直觀，若需對鼻子進行微調，使其高度增加，通過鼠標直接拖拽調整顯然更為高 效。

值得一提的是，我們的方法與Sora有所不同，這得益于對成本的優化。首先，數字人與真人相比，無須承擔吃、住、行等相應成本支出；其次，在虛擬環境中拍攝虛擬場景，成本也低于現實世界的實景拍攝成本，甚至都不用后期制作。因此，通過AI協助，既能夠將成本降低，也能確保電影級畫質。

讓每個人都能成為導演

目前，我們的核心技術主要圍繞數字人的生成與應用，包括其來源、建模、語音及動作制作等方面，并且已經將數字人集成至虛擬拍攝軟件中，以實現更高效的創作過程。

在技術研發方面，我們最先研究的是通過視覺捕捉技術來解決表演問題。通過該技術，無須演員參與，即可實現高質量視覺捕捉效果。可以說，在全球范圍內，在這一領域的技術水平處于領先地位。這項技術不僅為后續AI直接生成動作提供了前置支持，并且不管是細微的表情，還是比較夸張的表情，以及手指活動，都可以用AI精準捕捉。通過拉遠鏡頭，我們的技術還能進行全身精準捕捉，其中涉及肩膀和胯部的捕捉尤為精準，同時實現了對腳部在地面滑動的細膩捕捉。此外，還能根據輸入的文字生成聲音，并生成與文字相匹配的表情和口型，為演員提供更為便捷的表演方式。

關于數字人的產生，推出了數字人AI生產端平臺——賽博演猿，其具備隨機生成、圖像生成和文字生成功能。生成的數字人不是靜態圖片，而是可以被驅動的實體。以圖像生成為例，用戶可通過此功能自動生成與自身相似的圖像，并通過鼠標鍵盤或文字指令調整數字人的面部特征，如鼻子寬度等，并且無版權及法律風險。例如，影視劇導演可以根據作品需求生成各類角色，如男女主角、男女配角等，還可以實現實時更換。此外，數字拍攝的優勢在于快速調用和特效生成，使電影特效制作變得輕而易舉，像不同的天氣效果、穿墻效果等都可以實現一鍵切換、一鍵調用。雖然我們目前主要拍攝動畫片，但隨著技術不斷成熟，預計在2025年，在影視制作中的渲染效果將實現與實拍效果無縫銜接。在此過程中，需要始終確保數據內容的結構化，并實現與虛擬對象的交互。

打造AI影視產業新生態

在內容創作方面，還積極探索AI在短劇制作中的應用。雖然傳統短劇制作成本高，但通過AI技術創新，在降低成本的同時，將實現單人獨立制作短劇的目標。這一舉措不僅體現了對技術創新的追求，也展示了在提升內容生產效率和降低成本方面的決心。

今年，將加大在影視劇內容制作方面的技術研發力度，最終目標是實現“個人日產10分鐘影視級內容”的目標。如果影視劇制作能像小說創作一樣，實現個人日產數分鐘影視內容，其影響將會是顛覆性的。以前，在面向企業的服務中，往往是按要求為客戶用AI技術制作企業宣傳片或節目，但隨著技術不斷進步，AI化趨勢日益明顯，客戶對全流程AI制作的需求也日益迫切。

特別是在直播方面，利用數字人作為企業宣傳主持人，或是作為帶領大家進行文旅體驗的主播，等等，流量都非常亮眼。近期，我們為三星堆打造了一項創新體驗，此項體驗的核心在于攝像頭技術。觀眾將有機會通過攝像頭，實時控制數字人的表情與動作，展開一場別開生面的互動之旅。

值得一提的是，我們還推出了一項創新功能，即利用圖片生成個人臉部模型，與IP角色進行互動。為了更廣泛地推廣這一技術，建立了數字人標準，使得第三方創作者也能將自己的數字人導入平臺，希望最終能夠賦能幾十萬企業和千千萬萬個人創作者。當下，我們正在推動“數字橫店計劃”，致力于打造一個虛擬影視產業生態。盡管AI生成的3D模型目前尚未達到影視級別，但我們相信，隨著技術不斷進步，這一愿景將成為現實。

我們對未來充滿期待，希望在2024年能夠推出一系列全球領先的AI電視劇、電影等作品。隨著AI技術不斷發展，更加有信心將這些作品推向更廣闊的舞臺。W

（作者趙天奇系北京聚力維度科技有限公司創始人、 CEO）