基于類元宇宙技術的融媒可視化表達探索

2023-12-29 00:00:00喻茂

新聞研究導刊 2023年20期

摘要：2022年，“元宇宙”概念爆火后遇冷，但構建元宇宙的基礎技術并未停止進步，一些類元宇宙的應用仍在悄然成長，或將成為下一個互聯網創新突破點。無論是VR、AR、三維建模還是AI繪畫，這些類元宇宙技術均能與移動互聯網傳播格局下的數字媒體深度融合，或是助力生產視覺效果突出、交互方式多樣的融媒產品，或是拓展新聞宣傳的維度及深度，或是為采編生產流程提質增效。自2017年起，四川日報便開始在各類主題宣傳報道中引入類元宇宙技術。采編團隊和技術團隊基于“小步快跑，快速迭代”的互聯網技術演化思路，在實戰中探索前進，逐步打通技術瓶頸、跑通生產流程，以前沿數字技術為新形態融媒傳播產品賦能。文章結合四川日報全媒體在各類重大主題報道中借助類元宇宙技術進行的融合創新案例，分析移動互聯網傳播格局下，各種新技術在可視化傳播中的應用模式，以此展望未來數字化傳媒的深融發展路徑。

關鍵詞：元宇宙；VR；AR；三維建模；AI繪圖；可視化表達

中圖分類號：G210.7；G206 文獻標志碼：A 文章編號：1674-8883（2023）20-0015-04

從鉛與火、光與電到數與網，傳播形態始終隨著介質不斷進化，以不同的方式刺激受眾的大腦皮層，從而完成信息的傳遞[1]。拓印工藝實現了文圖的復制、模擬電波承載了音像的傳輸……技術進步催生出更多媒介形態。

移動互聯網時代，數字和算法構成了傳播的基石。如何使用新視覺手段占領新傳播陣地、如何借助類元宇宙的可視化表達技術生產更多跨界新聞產品，成為媒體探索的重點。對此，四川日報全媒體進行了諸多具有現實意義的嘗試，文章以其為例，剖析類元宇宙技術在可視化傳播中的應用模式。

一、元宇宙：嚴冬未過，新芽破土

因立場不同，不同商家對“元宇宙”概念的理解不同，因而至今未形成精確的定義[2]。但《頭號玩家》《黑客帝國》等電影，在很大程度上描繪出普通人對元宇宙的想象。Meta牽涉的技術分支龐雜，無論是顯示技術、視覺識別、云端算力等工程問題，還是能量密度、通訊效率、腦機交互等基礎理論，元宇宙的生態取決于木桶的最短板，每個技術領域缺一不可[3]。

2022年，“元宇宙”概念爆火后遇冷。2023年，微軟、谷歌等多家大廠開始削減元宇宙投資，更名為“梭哈”元宇宙的臉書，也遭遇了輿論和市場的雙重滑鐵盧。當下，元宇宙的社會性膨脹中確有巨大的泡沫成分，但它的深遠價值是在更高的維度上確立了未來互聯網發展的方向。

目前，一些類元宇宙的應用仍在悄然成長。無論是資本、技術還是業務，都在調整期進行新一輪的洗牌和重組。寒冬的市場似乎尚無能力孕育出整個生態鏈，但種子卻已在各個角落悄然萌芽。

視覺傳達既是元宇宙世界首要的信息傳播方式，也是移動互聯網傳播依賴的重要路徑。本文將支撐元宇宙應用的幾項基礎軟硬件技術稱為“類元宇宙視覺技術”，包含增強現實、虛擬現實、三維建模以及圖像生成等不同的技術領域。媒體作為應用主體，只有跑通各項技術的生產流程，在形成持續生產力的同時錘煉隊伍、驗證模式，才能讓技術為我所用。四川日報全媒體自2017年組建專門團隊以來，持續探索各項技術的媒體應用轉換，生產了一系列出色的可視化新聞產品，逐步提升了傳播力和影響力。

二、VR：從現實“回歸”數字世界

2016年，HTC和Oculus兩家廠商分別推出頭戴顯示設備，讓顯示和交互的邏輯迭代升級。彼時，VR頭顯均基于PC運行，高昂的硬件價格和復雜的配置勸退了大量用戶。而VR內容需使用unity、虛幻等游戲引擎開發，傳統的傳媒機構沒有能力介入，更別說在傳媒領域應用。

在此后的實踐中，媒體時常有意無意地將已存在多年的拼接影像技術稱為“VR”[4]。這種基于現實場景，以環繞拍攝形成的寬比例圖像，部署簡單且兼容性強，在手機上即可瀏覽。再加上消費級全景相機和無人機的普及，全景展示幾乎成為媒體的標配[5]。

全景VR對用戶相對友好，晃動手機或是滑動屏幕即可瀏覽，在初始時具有一定的新鮮感。但這種體驗容易乏味，其精度不及相機，也難談構圖、光影的美感，擯棄了攝影的取舍之美，僅能還原場景。這在諸如看房類的剛需應用中或有價值，但對常態的傳媒需求聊勝于無。對于媒體來說，全景VR是必需品，怎么用才能用出新意，還需在實戰中研判。

2021年底，四川稻城皮洛出土了手斧、薄刃斧等大量史前人類所使用的器具。從科普的角度看，介紹一件文物最好的方式就是通過講述故事描繪出它的歷史。四川日報全媒體創作團隊采用三維建模技術，重構了13萬年前遠古部落的生活場景，輸出為VR標準圖片，并在交互系統中將每件文物與遠古人類的生活場景一一匹配，直觀地展現文物的功用。VR漫畫作品《我在皮洛打石器》，采用了年輕化的動畫風格，將極具代表性的文物還原到使用場景中，讓用戶自主瀏覽、選擇參與體驗，了解文物的實際用途。此外，該作品還加入了3D掃描的文物數字孿生，用戶在場景中可以自由查看文物的立體形態和紋理細節，基于多維視角幾何級地拓展信息量。

相比實景采集，通過建模構建VR全景，能夠將分散的信息進行可視化的集中，這在重大主題外宣題材中同樣適用[6]。

黨的二十大期間，四川日報全媒體創作團隊將四川具有象征意義的代表性點位匯聚在一張傳統水墨畫風的長卷圖中，并以此為主題構建了一個三維展廳，將畫卷鋪陳上墻，讓用戶進入VR全景中體驗虛擬游覽。通過熱點技術，將畫中的點位與對應的成就性報道一一鏈接，使其成為展現四川各方面“成績單”的可視化入口，具有一定的交互效果。

三、AR：用信息拓展用戶的視野

AR的核心功能是將可視化的信息與真實的環境影像疊加，讓用戶在看見物品的同時，接收到與之對應的信息，實現對人類視覺的延伸[7]。其背后的機理，是通過畫面采集、實時視頻流分析，讓算法識別所拍攝的物體，并將與之關聯的信息投射到物體上，實現合成顯示效果。

AR的理想硬件載體是眼鏡等半透明的介質，通過光反射等技術，將畫面投射到鏡片上，在保留環境的現實感的同時，完成虛擬圖像的疊加[8]。如今，市面上已有效果不錯的透明顯示眼鏡，但要集成能耗低、算力強的識別設備來實現AR功能尚待時日。

不過，智能手機也能借助算法和前置攝像頭呈現出與AR類似的效果。2017年，川觀新聞APP開通AR應用，通過智能手機實現了畫面識別和顯示增強。與APP配合，四川日報開辟了《VR動新聞》欄目，用戶在讀報時使用AR模塊掃描報紙，即可彈出與版面對應的可視化內容，體驗動畫、圖表、交互場景及短視頻等增強視效，實現信息的多維拓展（見圖1）。

四川省兩會期間，川觀新聞APP又將LBS定位技術加入AR實景掃描功能中，并在兩會會場等10余個地標設置了觸發匹配畫面。會議期間，用戶將手機對準兩會主會場或各地標建筑，即可通過GPS和畫面識別場景，隔空查看政府工作報告的解讀短視頻。

在AR之上，還衍生出MR技術。與AR融于實景的觀察方式不同，MR是以視頻為載體，通過添加效果實現信息的疊加[9]。在實踐中，MR的生產流程以后端特效為主，更接近于傳統的視頻生產模式，目前已在訪談、晚會等場景中有較多成熟的應用[10]。

2021年1月，成都天府國際機場進行真機試飛。在前期準備中，四川日報全媒體策劃團隊多次到建設施工場地踏勘，提出了將MR技術融于實景戶外直播的想法。為了讓用戶有更直觀的觀感，技術團隊根據記者采集的實景航拍影像及建設方提供的設計圖紙，對機場進行了全局建模，并同步制作了當日起降機型的三維模型。視覺元素構建完畢后，后方根據當日直播點位的物理空間、主播出鏡位置，構建出虛擬機位，同時根據場景、鏡頭焦距、環境光等參數提前預制了視覺疊加特效。直播當天，前后端團隊密切配合，換用多套視效、直播系統，完成了遠端5G流媒體信號與后期特效通道的可視化疊加，實現了很好的視覺表達效果。

（一）頁面三維交互：以立體化提升沉浸感

在互聯網誕生后的很長一段時間里，用戶只能通過瀏覽器接收二維畫面。HTML5和WebGL技術的誕生，讓三維化內容得以通過數據包直接傳輸到瀏覽器中，實現視效升維[11]。該技術不僅能在瀏覽器中加載三維物體，還能用鼠標或觸控方式實現對物體的縮放、旋轉、拖拽、點擊等，便捷地控制想要觀察的各個立面，為用戶提供不同于傳統二維平面畫面的縱深感和沉浸感[12]。

在天府國際機場投運的相關報道中，四川日報全媒體創作團隊利用機場設計圖和多角度實景圖片，在3DS Max軟件中全面重構了機場的三維模型。一方面，將模型渲染成特效圖層，為投運當天的MR直播提供視覺元素；另一方面，在Web環境中構建以模型為核心的數字沙盤，讓用戶通過手機在立體空間中自由探索。如《快來探秘“迷你版”天府國際機場》的頁面設計頗具科技感，內置了視頻、圖集等系列報道，將傳統的圖文專題升級為立體導覽（見圖2）。此外，該作品還加入了“線框”模式，將機場的地下交通網線、行李系統等不可見元素，均以示意圖形式進行可視化表達。

2023年全國兩會期間，四川日報全媒體采編團隊對白鶴灘水電站、成都大運會主場館、北川縣石椅村等代表性點位進行了建模，并將之置于半擬真的虛擬空間中，推出“熊貓跑酷新天府”互動游戲。在這款游戲中，用戶可通過“吃雞”的操作方式游覽整個地圖，通過尋找NPC并與之對話的方式，了解每個點位的發展現狀。此外，該游戲還內嵌了云劇場、云新聞中心、云博物館等五大虛擬空間，為兩會相關融媒內容提供了集中入口。游戲中集成了互動聊天和海報生成功能，用于引導用戶參與分享，形成二次傳播。整個產品兼具交互性和可玩性，以輕松的方式為成就性報道增色[13]。

（二）AI繪畫：為融媒生產流程提質增效

2023年，GPT將人工智能從IT界拓展到通用領域，由數據“喂養”的各類模型開始被各行業使用。除了寫作業、編報告，利用AI生圖，能進一步為媒體視覺化生產提質增效[14]。

在日常工作中，四川日報全媒體視覺中心需要承擔頭圖、海報等大量視覺設計工作。不同題材的新聞事實，需要靈活多變的設計風格。設計人員即便底蘊深厚、功底扎實、見識廣博，其擅長的視覺風格始終存在局限。將AI引入流程，就是要借助機器的能力彌補個體的局限，實現內容生產的提質增效。

技術團隊在本地部署了AI繪畫引擎，并挑選出一系列與日常設計業務風格相符的模型。設計人員根據不同題材輸入相應提示詞，即可在數十秒內輸出色調、畫風、情緒各異的畫面，從中選出畫面主體內容適宜的圖片，導入后期軟件添加文字等設計元素，即可很快完成設計工作。設計人員也可倒轉流程，先設計出與主題相符的畫面關鍵元素，再交由程序生成不同風格的背景圖案、配色方案，形成不同的視覺風格，使產品更符合創作意圖的表達。如成都第31屆世界大運會期間，川觀新聞推出的創意海報See you in Chengdu，采用AI繪畫技術生產，在設計風格和生產效率上均實現了大幅提升（見圖3）。

目前，四川日報全媒體團隊正嘗試利用圖片數據庫中匯集的影像資源，將四川主要的地標建筑、重大工程以及文化遺址“投喂”機器，現已初步構建出符合四川特色的AI模型，可高效輸出不同組合、不同畫風、不同情緒的畫面場景。

從算法的角度理解，AI繪畫與GPT的工作原理接近，都是通過自然語言處理工具，讓機器“讀懂”提示詞，再依靠模型隨機組合元素形成相符的內容。這些模型都來源于海量的數據“投喂”，其數量遠超人類個體能夠學習、存儲、轉化的知識上線。通過AI，能夠有效彌補設計人員的技能儲備局限，為創作提供更多靈感。

并且，AI繪圖在操作層面并不復雜，具備基本審美和后期技巧的采編人員接受簡單訓練后也能熟練掌握，這在客觀上拓展了團隊的設計能力。同時，算力也大幅提升了單個產品的生產效率，讓各環節的流水線能夠將更多精力集中于創意本身[15]。

（三）內容守正、技術創新，構建融媒傳播新格局

對于媒體而言，保證敏銳的技術嗅覺是進行跨界傳播的先決條件。一項新技術是否能成為傳播工具、是否具備形成產品的研發實力、是否能為用戶帶來良好的體驗、是否能支撐起研發成本，都需要決策者進行預判。在實踐中，雖然時常可見點歪科技樹的案例，但所幸媒體介入的多數項目都屬于產業鏈的中下游，技術流程已較為成熟，試錯成本較低。未來，媒體不妨用前瞻的眼光進行多點開花式的技術驗證，容許犯錯，在犯錯中探尋合適的路徑。

行業的競爭力取決于人才，信息產業尤其如此。在移動互聯網傳播格局下，要做好融媒傳播，離不開既懂傳播，又了解技術的跨界人才。一方面，要根據自身定位，合理配置工種，在內部形成思維風暴的反應池，鼓勵催生新的創意；另一方面，要建立并健全機制，鼓勵員工跳出媒介看媒介，形成自我學習、進化迭代的氛圍，推動融媒人才的成長。

媒體的特性決定了其在基礎研發上不占優勢，只能從應用層面做文章。基于成本考慮，與社會化的研發機構合作，是理性的選擇。

一種新的融媒形態能否持續健康成長，還需經過市場的驗證。無論是地方性還是行業性的媒體，在整合各類社會資源上均具有優勢。在發行、廣告收入持續走低的背景下，將傳統的宣傳服務升級為融媒體技術服務，是具有更高利潤率的創收模式。