臺(tái)前虛擬、幕后AI，文娛終變無人工產(chǎn)業(yè)

徐丹瑩

摘要：「虛擬文娛」，正在入侵「現(xiàn)實(shí)文娛」，甚至即將發(fā)動(dòng)傳媒史上一場最大風(fēng)暴的革命。它以未來之勢，將從「內(nèi)容」「場景」「職業(yè)」「產(chǎn)業(yè)」，全面滲透甚至取代當(dāng)下文娛，最終「虛擬文娛」與「現(xiàn)實(shí)文娛」將會(huì)形成彼此交融又分庭抗禮的兩大文娛陣營。

關(guān)鍵詞：虛擬文娛;職業(yè);產(chǎn)業(yè)

談起虛擬偶像、歌姬、模特、主持人等虛擬職業(yè)名人，一襲水藍(lán)色長發(fā)的「公主殿下」初音未來肯定榜上有名。

B站一年一度的BML（BILIBILI MACRO LINK）演唱會(huì)在上海梅賽德斯如期舉行，日本超人氣虛擬歌姬初音未來與國內(nèi)頂級(jí)虛擬歌姬洛天依首次在線下演唱會(huì)同臺(tái)，與B站站娘2233四人共唱《再來一杯》，臺(tái)下熒光棒的海洋此起彼伏「嗶哩嗶哩干杯」的應(yīng)援，與真人演唱會(huì)并無差別。

第二屆世界人工智能大會(huì)上，讓包括鄧麗君在內(nèi)的多位已逝歌手、演員重返舞臺(tái)、熒幕的數(shù)字王國（Digital Domain），同時(shí)也是《復(fù)仇者聯(lián)盟4》《頭號(hào)玩家》等電影的特效制作公司，其華人CEO謝安分享，在最新機(jī)器學(xué)習(xí)與游戲引擎的幫助下，影片中虛擬人角色可實(shí)時(shí)渲染生成，成本下降了三分之二。

虛擬歌姬、虛擬人角色、虛擬偶像等虛擬職業(yè)已成為文娛產(chǎn)業(yè)中不可缺少的一部分，在娛樂業(yè)近5年趨勢預(yù)測報(bào)告中，也一直有這樣一個(gè)認(rèn)知，當(dāng)5G開放時(shí)，VR會(huì)第一個(gè)再次爆發(fā)，謝安亦在前不久舉行的世界人工智能大會(huì)上表示「我們離《頭號(hào)玩家》的世界僅差一個(gè)5G，虛擬時(shí)代已經(jīng)來臨。 」基于此大勢，本文將帶大家一起總結(jié)目前文娛產(chǎn)業(yè)中的虛擬職業(yè)，分為臺(tái)前與幕后上下兩篇，在梳理各個(gè)職業(yè)的同時(shí)對(duì)其以后的升級(jí)迭代展開暢想。

一、虛擬人技術(shù)發(fā)展迅猛，演員仍難替代

虛擬歌姬、虛擬現(xiàn)實(shí)等鏈接三次元世界的「虛擬」概念并不是近十年隨著科技的進(jìn)步才誕生的。

早在17世紀(jì)，人類就幻想過用機(jī)器模擬人聲與樂聲，并嘗試用特質(zhì)的管風(fēng)琴模擬人的元音發(fā)音，19世紀(jì)時(shí)，人們開始研制Panharmonicon這件可模仿其他音色的自動(dòng)演奏樂器。

也在同一時(shí)期，蘇格蘭科學(xué)家Davis Brewster發(fā)明了透鏡式立體鏡，讓兩眼感知兩個(gè)不同的平面圖像從而有3D成像效果的手持設(shè)備，后來受到電影誕生的沖擊，這個(gè)概念便進(jìn)入了休眠，直到近年VR的橫空出世，它才重回視野。同樣，直到計(jì)算機(jī)的問世，機(jī)器模擬人聲的幻想才成為夢想，并得以實(shí)現(xiàn)。

（一） 二次元世界的虛擬明星

1961年，電腦音樂大師麥克斯·馬修斯第一次讓電腦成功演唱歌曲，在當(dāng)時(shí)最先進(jìn)的IBM 7094電腦上制作出模擬人聲演唱《Daisy Bell》，可看作為虛擬歌手的初代雛形。https：//v.qq.com/x/page/s03971prrsd.html（IBM7094《Daisy Bell試聽》）

虛擬歌姬依托的歌聲合成引擎載體Vocaloid 并不是為打造虛擬歌姬誕生的，而是為了使真人歌聲更好聽而研制的，該公司當(dāng)時(shí)希望研制出一款幫助「音癡」在KTV變「歌神」的軟件。永遠(yuǎn)16歲的「公主殿下」是在為達(dá)到更好的產(chǎn)品宣傳效果，將軟件「娘化」「擬人形象化」為手持麥克風(fēng)的紅發(fā)姑娘起音美可和穿風(fēng)衣的男孩始音海人大賣后才精心布局的。

2007年，其完美的人設(shè)一經(jīng)問世，便迅速在ACG圈走紅，一個(gè)月內(nèi)將公司市場占有率由6%提升到33.9%，隨后依托全息投影技術(shù)，初音未來成為第一個(gè)舉辦演唱會(huì)的虛擬藝人，也是首個(gè)走進(jìn)大眾視野的虛擬歌姬。

五年后的2012年，屬于中國自己的虛擬歌姬洛天依問世，可能許多人不太明白虛擬歌姬與虛擬偶像的差別，在此明確一下，虛擬歌姬是指以初音未來為代表的依托Vocaloid程序合成聲音的二次元女性歌手角色產(chǎn)品，虛擬偶像則是二次元?jiǎng)勇宋锱枷?，基本有真人聲?yōu)配音。

這類二次元藝人與現(xiàn)實(shí)世界中的藝人一樣，有明確的職業(yè)分工，二次元偶像、二次元模特、二次元演員、二次元樂隊(duì)、二次元rapper等，二次元偶像產(chǎn)業(yè)的巨大商業(yè)價(jià)值吸引日本最大的男子偶像事務(wù)所，旗下?lián)碛心敬逋卦?、KinKi Kids、嵐、山下智久等人氣偶像的杰尼斯也建立了「虛擬杰尼斯」項(xiàng)目，并于2月19日推出首批二次元虛擬偶像——海堂飛鳥和苺谷星空兩位少年。

除帶著明顯的明星光環(huán)的二次元藝人外，2016年誕生了首個(gè)VTuber虛擬UP主——絆愛，她轉(zhuǎn)變了原有的受眾消費(fèi)模式，將單向欣賞轉(zhuǎn)向如普通YouTuber一樣的實(shí)時(shí)互動(dòng)新模式。她會(huì)直播玩游戲，會(huì)回答問題，甚至?xí)凑誫oogle map去游覽東京，并且做出解說。

VTuber是通過實(shí)時(shí)渲染和人物建模等技術(shù)虛擬背后真人的動(dòng)作表演，加之同步聲優(yōu)配音的二次元主播，粉絲們把她背后的表演者稱之為「中之人」。截至目前，絆愛頻道的訂閱數(shù)已高達(dá)2，673，436， 她的出世也點(diǎn)燃了日本VTuber市場，「VTuber」一詞被票選為2018年日本流行語第一位，根據(jù)調(diào)研社User Local統(tǒng)計(jì)，2019年5月YouTube虛擬偶像總數(shù)已突破8000大關(guān)。

二次元虛擬藝人在霓虹的熱潮也隨著B站UP主的搬運(yùn)被帶來了國內(nèi)，在8月初舉行的2019 China Joy盛會(huì)，網(wǎng)易伏羲實(shí)驗(yàn)室?guī)砹巳虻谝粋€(gè)引入AI技術(shù)的虛擬偶像「曲大師」的升級(jí)版「曲師師」，自稱是具備「完備知識(shí)和感情的芯片」的唱跳愛豆全新人設(shè)，今后曲師師也將逐步開展直播。

以上二次元世界的虛擬職業(yè)中，Vocaloid系虛擬歌姬除合成音源數(shù)據(jù)來源于聲優(yōu)之外，相較于其他虛擬藝人，對(duì)于背后真人的參與度較低。

（二）三次元形象的虛擬名人

回歸到三次元世界，虛擬人在文娛產(chǎn)業(yè)中都有哪些擔(dān)當(dāng)呢？

虛擬歌手活躍在臺(tái)前的多為已逝歌手或搖滾樂隊(duì)成員：

2012年數(shù)字王國（Digital Domain）公司用全息投影技術(shù)在Coachella 搖滾音樂節(jié)上復(fù)活了已去世 的美國著名饒舌歌手 Tupac Shakur之后，這個(gè)技術(shù)便被廣泛的應(yīng)用于已逝音樂人的「復(fù)活」;

2013年周杰倫臺(tái)北小巨蛋演唱會(huì)與全息投影鄧麗君跨時(shí)空對(duì)唱《紅塵客?！放c《千里之外》開啟了鄧麗君的復(fù)活之路，2017年日本綜藝用AR和全息投影帶來了更真實(shí)版的《我只在乎你》。

「復(fù)活」已逝名人的技術(shù)不僅被用于舞臺(tái)，亦被用于去世演員大熒幕的復(fù)活，如《速度與激情7》中的保羅·沃克與《星球大戰(zhàn)外傳：俠盜一號(hào)》中的彼得·庫欣。

大熒幕中的虛擬角色，也稱虛擬演員可能是觀眾最為熟悉的虛擬職業(yè)，他們幾乎遍布所有好萊塢真人爆米花電影，依靠真人動(dòng)作捕捉生成影片中的虛擬角色是好萊塢電影特效產(chǎn)業(yè)重要的一環(huán)，成功跨越「恐怖谷」每一幀都在燒錢的《阿麗塔》更將該技術(shù)領(lǐng)入新的「表演捕捉」高峰。

在前不久的巴黎時(shí)裝周上，柏林的創(chuàng)意二人組Trashy Muse帶來了全球首場虛擬時(shí)裝秀，模特中不乏知名虛擬KOL、超模，Shudu就在其中。此次嘗試，或給科技公司與時(shí)尚品牌打開了新領(lǐng)域的合作。不夸張的說，模特極有可能成為首個(gè)完全被虛擬人取代的行業(yè)。

（三）虛擬主持人

最后我們來談下虛擬主持人，2000年全球首個(gè)虛擬新聞主播Ananova在網(wǎng)絡(luò)誕生，她極具科幻感的面容與機(jī)器聲線，與真人新聞主播的差距很大。真正將新聞主播帶上「像真人」行列的還是在AI主播誕生后，2018年11月，新華社聯(lián)合搜狗將語音合成、唇形合成、表情合成以及深度學(xué)習(xí)融合在一起，發(fā)布了全球首個(gè)AI合成主播，將語音合成、唇形合成、表情合成以及深度學(xué)習(xí)融合在一起，在這之后，撒貝寧的「孿生」AI主持人也在今年的央視春晚亮相。

就上文的梳理來看，虛擬職業(yè)可以說已涉及到整體文娛行業(yè)的臺(tái)前職業(yè)，真人職業(yè)是否會(huì)被取代取決于觀眾對(duì)該職業(yè)「像真人」要求的強(qiáng)度。時(shí)尚行業(yè)的需求可能更偏重于外表，目前的CG虛擬技術(shù)極有可能使它成為首個(gè)被虛擬人取代的行業(yè)，這也可以很好的解釋，為何人形角色目前不可擺脫真人表演的輔助，因?yàn)橛^眾對(duì)于表演的要求不僅在外貌，更在感情的真實(shí)與感染力，所以真人演員的幕后表演是虛擬角色毫無違和感存在真人影片中的保障。

虛擬職業(yè)在三次元世界中的最高追求「像真人」，在外表更真實(shí)的基礎(chǔ)之上其智商也要更像人甚至超越人。長久以來，文娛產(chǎn)業(yè)的臺(tái)前職業(yè)都是有血肉的真人從事的，我們憑過往歷史與經(jīng)驗(yàn)認(rèn)識(shí)、了解這個(gè)行業(yè)，所以都在盡力縮短虛擬人與真人的距離。

二、AI內(nèi)容生產(chǎn)，滲透各領(lǐng)域

2017年5月湛廬文化出版了由「微軟小冰」創(chuàng)作的詩集《陽光失了玻璃窗》;同年，「AIVA」為盧森堡國慶日慶典開幕式作曲;2017年雙11，阿里「魯班」制作了4億張海報(bào);2017年底「媒體大腦」10秒寫稿…..引號(hào)的名字都是 AI內(nèi)容生產(chǎn)系統(tǒng)，在機(jī)器學(xué)習(xí)、深度學(xué)習(xí)與循環(huán)神經(jīng)網(wǎng)絡(luò)等算法進(jìn)步的推動(dòng)下， AI已在文娛產(chǎn)業(yè)各幕后崗位上崗，或具備可以上崗工作的能力，作為讀者的您或許早已看過它們撰寫的新聞和天氣預(yù)報(bào)。文章的下篇，我們就盤點(diǎn)一下文娛內(nèi)容生產(chǎn)領(lǐng)域的各位在職AI。

幕后虛擬職業(yè)與上篇中提到的虛擬藝人最大的不同便是外形與智能，幕后AI生產(chǎn)者并沒有具體外形，基本為程序或軟件，但它們有著與人類一樣甚至過人的工作能力。

（一）文學(xué)創(chuàng)作

AI在內(nèi)容生產(chǎn)領(lǐng)域的應(yīng)用，也就是AI在文娛產(chǎn)業(yè)幕后擔(dān)任的職位，可分為四大類，分別為文字、音頻、圖像和視頻。首先，文字創(chuàng)作方面，詩歌/詞創(chuàng)作、新聞和天氣預(yù)報(bào)的撰寫、劇集編劇、小說撰寫，廣告詞創(chuàng)作等工作均有AI「工作者」任職。希望機(jī)器寫出暢銷的文學(xué)作品的想法并不是 AI出現(xiàn)后誕生的，早在上世紀(jì)40年代《1984》的作者George Orwell就想過此事，AI 讓夢想逐漸成為現(xiàn)實(shí)。

AI 寫詩，開頭提到的「微軟小冰」是現(xiàn)代詩集的AI創(chuàng)作者，「編詩姬」等是古典AI詩人。

AI編劇在2016年創(chuàng)作出首部非人類撰寫的科幻劇本《Sunspring》，該劇本被拍成9分鐘的電影，參加了倫敦電影節(jié)48小時(shí)短片挑戰(zhàn)賽。劇本中的每句話都為通順的語句，但整體沒有邏輯。

AI機(jī)器人寫新聞稿應(yīng)該是AI最早涉足的文字創(chuàng)作領(lǐng)域，2014年，《洛杉磯時(shí)報(bào)》的QuakeBot生成地震報(bào)告，美聯(lián)社亦應(yīng)用AI撰寫財(cái)經(jīng)新聞;2016年里約奧運(yùn)會(huì)，《華盛頓郵報(bào)》運(yùn)用Heliograf進(jìn)行第一時(shí)間的體育新聞報(bào)道。

除文字工作的創(chuàng)作生產(chǎn)， AI亦可擔(dān)任上下游的輔助工作，如「GiveMeSport」擔(dān)任體育新聞前期資料收集與分類;根據(jù)過往電影資料提供編劇方向建議等準(zhǔn)備工作，以及后期擔(dān)任校對(duì)對(duì)文章進(jìn)行糾錯(cuò);為新聞報(bào)道配圖加視頻等工作。

（二）音視頻領(lǐng)域

其次，音頻創(chuàng)作領(lǐng)域，AI可擔(dān)任作曲、編曲、歌曲制作人、模擬人聲等工作。AI 作曲主要有五種方式，第一，Amper Music為代表的選擇樂曲情緒、風(fēng)格、樂器、用途等生成樂曲;第二，根據(jù)照片圖片生成樂曲的「神經(jīng)卡拉OK」;第三，輸入簡單旋律，可編寫整首曲子的「Google Magenta」;第四，開頭提到的AIVA等直接譜曲的AI，多為古典音樂創(chuàng)作;最后則是「The Seed」，可根據(jù)歌詞譜曲。

編曲與歌曲制作人的工作，Amper Music和Flow Machines目前均有自己的代表作問世，前者完成了Taryn Southern歌曲《Break Free》的編曲工作;后者創(chuàng)作了《Daddy’s Car》與《Mister Shadow》兩首風(fēng)格迥異的歌曲。

模擬人聲則是指Adobe的Voco項(xiàng)目，通過學(xué)習(xí)人聲素材，模擬合成人的講話聲音，從而根據(jù)文字指示，生成新的音頻。

再次，圖像設(shè)計(jì)制作領(lǐng)域，充滿大家較為熟悉的舊照高清修復(fù)、圖片去水印等「黑科技」，AI可擔(dān)任設(shè)計(jì)、圖片后期、繪制照片等工作。設(shè)計(jì)包括海報(bào)設(shè)計(jì)、logo設(shè)計(jì)、配色方案、設(shè)計(jì)提案等AI都可完成;修圖、調(diào)色、去障礙物、手繪等美術(shù)后期工作AI亦可包攬。

最后，視頻制作領(lǐng)域，主要工作分為兩部分，前期拍攝與后期剪輯，「VEO」丹麥創(chuàng)業(yè)公司自主研發(fā)的AI可以進(jìn)行球賽的拍攝;6月11日，全球首款A(yù)I自導(dǎo)演攝像機(jī)——OBSBOT尋影正式亮相2019中國上海亞洲消費(fèi)電子展，創(chuàng)造性地推出 AI 追蹤、智能構(gòu)圖和手勢感應(yīng)，可為短視頻內(nèi)容創(chuàng)作者帶來了顛覆性的拍攝體驗(yàn)。

后期剪輯方面，2016年IMBWaston為20世紀(jì)?？怂沟捏@悚片《Morgan》剪輯了預(yù)告片，Watson通過對(duì)電影進(jìn)行視覺分析，識(shí)別角色、物體和場景，挑選出它認(rèn)為最適合放在預(yù)告片中的高能內(nèi)容再進(jìn)行拼接，今年7月，流媒體巨頭Netflix表示，看到的下一個(gè)電影預(yù)告片可能會(huì)由AI剪輯制作。

除了對(duì)創(chuàng)意要求較高的影視和影視預(yù)告片的剪輯之外，短視頻平臺(tái)對(duì)技術(shù)要求較低的視頻剪輯中，AI參與制作的比重要大得多。尤其是產(chǎn)品展示類視頻，Alibaba Wood可在1分鐘之類制作200個(gè)商品展示短視頻;智影人工智能在線視頻制作，上傳文字腳本后系統(tǒng)會(huì)根據(jù)內(nèi)容的關(guān)鍵字、人名、事件等信息自動(dòng)匹配相關(guān)視頻素材，快速生成視頻。

「邏輯創(chuàng)意」四個(gè)字也成為目前文娛產(chǎn)業(yè)幕后AI工作的最大限制，所以在音頻與圖像兩個(gè)更偏重「感受」的創(chuàng)作領(lǐng)域中，AI的表現(xiàn)要明顯優(yōu)于文字與視頻的內(nèi)容生產(chǎn)。

因此在討論AI或虛擬人與現(xiàn)實(shí)人類的關(guān)系時(shí)，李開復(fù)提出的「五秒原則」可判斷該職業(yè)的從業(yè)人員是否會(huì)被取代，即一項(xiàng)職業(yè)所從事的工作，如果可以在5秒鐘之內(nèi)對(duì)工作中需要思考和決策的問題作出相應(yīng)決定，那么該職業(yè)在未來基本是會(huì)被取代的。以此原則來判定文娛產(chǎn)業(yè)中的內(nèi)容生產(chǎn)領(lǐng)域，我們可以說，在一段時(shí)間內(nèi)，這些幕后職業(yè)是不會(huì)被取代的，與AI「同事」的關(guān)系為協(xié)作促進(jìn)的關(guān)系，更多時(shí)候AI扮演輔助工具的角色，從時(shí)間周期上提升內(nèi)容產(chǎn)品的產(chǎn)出速度，從內(nèi)容上提高文娛產(chǎn)業(yè)產(chǎn)品的質(zhì)量。

三、結(jié)束語

在搜集資料的過程中，筆者看到最多的標(biāo)題便是「XX要失業(yè)了」等一系列的標(biāo)題，《衛(wèi)報(bào)》則在《Deepfake時(shí)代，虛擬演員是否會(huì)將演員取代》一文中為演員站臺(tái)，表示現(xiàn)有的人形角色仍離不開背后的真人捕捉，可能演員會(huì)不以自己的真是面貌出鏡，但他們的表演是真實(shí)的。

或許未來是個(gè)眼見耳聽均難辨真假的時(shí)代，但我們的感受是真實(shí)的，而這一切的虛擬也是為我們的體驗(yàn)更真實(shí)。

參考文獻(xiàn)：

[1]2019 BML全息演唱會(huì)開演，初音未來與洛天依首次同臺(tái)

https：//new.qq.com/omn/20190720/20190720A0D2EL00.html

[2]虛擬歌手的歷史和存在的意義——論VOCALOID、UTAU、KONTAKT以及人力VOCALOID的創(chuàng)作

https：//www.bilibili.com/read/cv2362211/