交互式多方位電視直播系統(tǒng)設(shè)計(jì)

盧勇文

(廣東廣播電視臺(tái)，廣東 廣州 510066)

交互式多方位電視直播系統(tǒng)設(shè)計(jì)

盧勇文

(廣東廣播電視臺(tái)，廣東 廣州 510066)

詳細(xì)介紹了交互式多方位電視直播系統(tǒng)的硬件結(jié)構(gòu)和適用節(jié)目類型，以及與傳統(tǒng)電視直播系統(tǒng)的區(qū)別，同時(shí)詳細(xì)介紹了如何有效地進(jìn)行視頻數(shù)據(jù)壓縮編碼這一交互式多方位電視直播系統(tǒng)的關(guān)鍵技術(shù)問題。交互式多方位電視直播相對(duì)于傳統(tǒng)電視直播模式有更多的優(yōu)勢(shì)，未來(lái)將會(huì)越來(lái)越多地采用交互式多方位電視直播的模式。

電視直播；攝像機(jī)位；多方位；交互式

1 電視直播

電視直播是電視傳播最重要的特點(diǎn)，它把現(xiàn)場(chǎng)的畫面、聲音以及畫外的解說(shuō)聲同步傳送給觀眾，讓觀眾在第一時(shí)間可以了解到現(xiàn)場(chǎng)的信息，在同步性、信息量、現(xiàn)場(chǎng)感和參與感等方面都比其他媒體具有更明顯的優(yōu)勢(shì)，利于快速、大范圍地傳播信息并在瞬間造成巨大影響[1]，是廣大受眾最歡迎的傳播方式。

電視直播的全過(guò)程由開始的只敘述現(xiàn)場(chǎng)的發(fā)展進(jìn)程和結(jié)果，沒有主持人出鏡，也沒有背景介紹的全直播開始，發(fā)展到即時(shí)錄制主持人在演播室介紹或解說(shuō)的信號(hào)，然后和現(xiàn)場(chǎng)情況交替、串聯(lián)播出的準(zhǔn)直播階段，到現(xiàn)在已經(jīng)非常普遍的以現(xiàn)場(chǎng)直播為主體、交替運(yùn)用演播室直播、字幕滾動(dòng)直播、現(xiàn)場(chǎng)記者連線、觀眾采訪等手段綜合在一起的立體式直播方式[1]。可以說(shuō)，電視直播已經(jīng)綜合運(yùn)用了現(xiàn)代各種傳播手段，盡可能地將眾多與現(xiàn)場(chǎng)相關(guān)的信息通過(guò)有線網(wǎng)絡(luò)、衛(wèi)星、無(wú)線通信網(wǎng)絡(luò)等手段傳播到全世界。

2 電視直播信號(hào)的特點(diǎn)

在目前一般的電視直播中，雖然在現(xiàn)場(chǎng)會(huì)設(shè)置多個(gè)攝像機(jī)機(jī)位，但是在某一時(shí)刻只有一路信號(hào)是經(jīng)過(guò)導(dǎo)演切換后送給播出的，最后再通過(guò)有線或無(wú)線等網(wǎng)絡(luò)傳輸設(shè)施輸送到觀眾端，如圖1所示。觀眾對(duì)畫面沒有選擇權(quán)，只能被動(dòng)地接受導(dǎo)演的選擇。因此，在任意時(shí)刻只有一個(gè)機(jī)位的視音頻信號(hào)輸出給觀眾是目前電視直播的一個(gè)顯著特點(diǎn)。這種方式帶來(lái)的好處，一是導(dǎo)播可以完全控制并引導(dǎo)整個(gè)直播的過(guò)程，使得節(jié)目更為緊湊，二是可以節(jié)省頻道資源。對(duì)于這種需要導(dǎo)播來(lái)進(jìn)行切換重組的方式，有人認(rèn)為現(xiàn)場(chǎng)直播并非真正的直播[2]，理論上更偏向于由導(dǎo)播做主導(dǎo)的對(duì)現(xiàn)場(chǎng)的重組再現(xiàn)過(guò)程[3]。

圖1 現(xiàn)有電視直播的信號(hào)流程圖

但是，這是否是唯一的、也是最好的直播方式？隨著攝像機(jī)位的增多，同一時(shí)間采集到的信息就越來(lái)越多，在某時(shí)間段只選擇其中一個(gè)機(jī)位的信號(hào)傳輸給觀眾，導(dǎo)演的這種選擇一定就是所有觀眾都最想要看的嗎？是否會(huì)因?yàn)檫x擇了這路信號(hào)而漏掉了其他重要的信息？由于觀眾的興趣愛好各不相同，必然會(huì)造成眾口難調(diào)的局面。

3 交互式多方位電視直播系統(tǒng)

為了解決以上問題，在一場(chǎng)電視節(jié)目直播中，電視臺(tái)可以采用多個(gè)攝像機(jī)位進(jìn)行拍攝，并且將這些不同方位的攝像機(jī)信號(hào)通過(guò)一組視頻通道傳輸給觀眾。這樣觀眾就可以通過(guò)機(jī)頂盒進(jìn)行控制，根據(jù)自己的喜好，選擇某一個(gè)機(jī)位的信號(hào)來(lái)觀看，了解到更感興趣的信息，滿足不同觀眾的不同需求。例如，直播現(xiàn)場(chǎng)設(shè)有5臺(tái)攝像機(jī)，那么每位觀眾都可以隨時(shí)選擇不同的機(jī)位所拍攝到的圖像進(jìn)行觀看，這樣鏡頭的切換和操控權(quán)就從導(dǎo)演的手中轉(zhuǎn)到觀眾的手中。除了不同的攝像機(jī)機(jī)位信號(hào)外，還應(yīng)包含作為公共信號(hào)的、內(nèi)容一致的解說(shuō)，以及字幕圖文信息等信號(hào)，這樣既可以保持不同的直播視點(diǎn)，又能共享一些比較重要的信息。

微軟亞洲研究院的IMV系統(tǒng)是將多部攝像機(jī)以共點(diǎn)陣列排列，同步拍攝同一對(duì)象，從而可以實(shí)現(xiàn)三維全息的圖像體驗(yàn)的形式[4]，例如電影《黑客帝國(guó)》里基奴里維斯的慢鏡動(dòng)作。交互式多方位電視直播系統(tǒng)不應(yīng)只包括這種形式，還應(yīng)包括分布在不同地方，拍攝不同對(duì)象的多機(jī)位同時(shí)直播形式，例如不同城市的聯(lián)合直播節(jié)目等。

3.1 交互式多方位電視直播系統(tǒng)的硬件結(jié)構(gòu)

實(shí)際上，這種多方位電視直播方式是交互電視的一種很典型的表現(xiàn)類型。對(duì)于可交互式多方位電視直播來(lái)說(shuō)，視頻信號(hào)的提供與普通電視的現(xiàn)場(chǎng)直播相類似。只是在交互式多方位電視直播中，一旦選擇了某幾個(gè)機(jī)位的信號(hào)作為直播信號(hào)，考慮到在任何時(shí)間這些信號(hào)都可能會(huì)有觀眾選擇觀看，所以這些信號(hào)就必須要一直處于播出的狀態(tài)，而且這些攝像機(jī)不能隨意轉(zhuǎn)換場(chǎng)景，否則就可能使畫面混亂。

交互式多方位電視直播系統(tǒng)的結(jié)構(gòu)如圖2所示，有m個(gè)攝像機(jī)位(包括演播室機(jī)位)，輸出n個(gè)視頻節(jié)目(n≤m)， 其中1路是由導(dǎo)演負(fù)責(zé)切換的主節(jié)目(PGM)信號(hào)，這1路信號(hào)與原來(lái)傳統(tǒng)的節(jié)目制作方式一樣，其他n-1個(gè)信號(hào)通路則是經(jīng)過(guò)篩選后的疊加了字幕等公共信息的其他機(jī)位信號(hào)。這n路獨(dú)立的信號(hào)經(jīng)過(guò)視頻采集端和視頻流服務(wù)器的處理后，再通過(guò)有線電視網(wǎng)絡(luò)、電信網(wǎng)和計(jì)算機(jī)網(wǎng)絡(luò)等傳到客戶端。

圖2 交互式多視角實(shí)時(shí)視頻的系統(tǒng)架構(gòu)

圖2中，視頻采集端負(fù)責(zé)對(duì)多路的實(shí)時(shí)原始圖像進(jìn)行采集、編碼、發(fā)送，而且這幾個(gè)步驟都要同步協(xié)調(diào)，這樣可以保證實(shí)時(shí)視頻數(shù)據(jù)的壓縮速度，而且通過(guò)異步處理，能夠及時(shí)將壓縮后的視頻流傳輸至服務(wù)器。視頻服務(wù)器則是為用戶提供各種交互式的服務(wù)，具體包括負(fù)責(zé)多視角視頻數(shù)據(jù)的緩存、編輯和轉(zhuǎn)發(fā)，用戶管理等。傳輸網(wǎng)絡(luò)把視頻流從視頻服務(wù)器傳輸?shù)娇蛻舳说木W(wǎng)絡(luò)，其可用帶寬直接決定了系統(tǒng)對(duì)用戶的服務(wù)質(zhì)量。客戶端的主要設(shè)備是電視機(jī)加機(jī)頂盒，還可以使用PC和移動(dòng)設(shè)備，分別為電視觀眾、互聯(lián)網(wǎng)用戶及移動(dòng)設(shè)備用戶提供播放服務(wù)。用戶可以根據(jù)自己的喜好來(lái)選擇觀看哪個(gè)機(jī)位的信號(hào)或視覺特效服務(wù)，可以隨時(shí)進(jìn)行信號(hào)切換。

3.2 適用節(jié)目類型

交互式多方位電視直播的系統(tǒng)特別適合以下幾種節(jié)目類型：

1)體育比賽

每種體育比賽都會(huì)設(shè)置一定數(shù)量的機(jī)位，以便能在不同的方位記錄下比賽的瞬間，這樣才能充分展現(xiàn)體育比賽的各種精彩鏡頭。以羽毛球比賽為例，直播時(shí)的機(jī)位通常多達(dá)11個(gè)：位于比賽場(chǎng)地正后方一定俯視角度、可以攝錄整個(gè)比賽場(chǎng)地的主機(jī)位，位于2個(gè)半場(chǎng)旁邊負(fù)責(zé)運(yùn)動(dòng)員特寫的側(cè)機(jī)位，2個(gè)負(fù)責(zé)慢鏡的后場(chǎng)機(jī)位，1個(gè)負(fù)責(zé)記錄網(wǎng)前球的中線機(jī)位，負(fù)責(zé)側(cè)線和底線的4個(gè)機(jī)位，還有1個(gè)用于臨時(shí)特寫鏡頭的流動(dòng)機(jī)位等(其實(shí)還可以增加一些其他角度的機(jī)位，如正后方、頂部機(jī)位等)。

導(dǎo)播會(huì)根據(jù)這11個(gè)機(jī)位采集到的信號(hào)，結(jié)合自身對(duì)轉(zhuǎn)播的要求進(jìn)行機(jī)位的切換來(lái)完成整個(gè)比賽的直播。如果能進(jìn)行交互式多方位直播，那么許多觀眾必然會(huì)根據(jù)自己的喜好來(lái)選擇不同的機(jī)位信號(hào)，例如中線機(jī)位或側(cè)機(jī)位可以很清晰地看到運(yùn)動(dòng)員網(wǎng)前球的手法，正后方機(jī)位可以更強(qiáng)烈地知道背對(duì)機(jī)位方運(yùn)動(dòng)員的場(chǎng)地感受，以及羽毛球飛向?qū)Ψ降能壽E等。長(zhǎng)期有針對(duì)性地選擇這些機(jī)位信號(hào)進(jìn)行觀看，會(huì)讓觀眾學(xué)到更多的羽毛球技巧。當(dāng)然，導(dǎo)播的選擇(包括慢鏡)可以作為主畫面播出。

又以賽車比賽為例，可能某些觀眾更多地想關(guān)注駕駛員的動(dòng)作，以了解其如何換擋、打方向等駕駛技巧，另一些觀眾可能會(huì)關(guān)注駕駛員前方場(chǎng)景，還有一些觀眾可能關(guān)注車后其他對(duì)手的場(chǎng)景等，如果都由導(dǎo)播控制切換播出信號(hào)，觀眾的需求必然不能得到最大的滿足。

國(guó)外的電視臺(tái)已經(jīng)有為電視觀眾提供這種高質(zhì)量、可交互、多角度電視實(shí)況直播的服務(wù)，例如英國(guó)著名的衛(wèi)星電視商BskyB在2001年的溫布爾頓網(wǎng)球賽中同時(shí)提供5個(gè)場(chǎng)地的直播供用戶選擇。國(guó)內(nèi)中央電視臺(tái)于2001年九運(yùn)會(huì)期間，也進(jìn)行了類似的試播，雖然只有有線網(wǎng)絡(luò)經(jīng)營(yíng)者和記者可以看到，但畢竟也是國(guó)內(nèi)多方位直播的首次嘗試，隨后在2002年的澳網(wǎng)賽事上再次實(shí)驗(yàn)，同步直播6個(gè)場(chǎng)地的比賽[5]。

2)新聞直播

對(duì)于某些特發(fā)性的新聞事件，也可以采用交互式多方位的直播方式。例如恐怖襲擊事件、地震、火山噴發(fā)等，如果能將不同場(chǎng)景的機(jī)位信號(hào)傳輸給觀眾，將會(huì)帶來(lái)更大的直播效果。

3)大型的文藝演出

以古典音樂會(huì)演出為例，沒有特別需求的觀眾可以選擇主機(jī)位信號(hào)，愛好指揮藝術(shù)的觀眾可以選擇只拍攝指揮正面動(dòng)作的機(jī)位信號(hào)，對(duì)樂手的演奏過(guò)程感興趣的觀眾可以選擇某些拍攝樂手近鏡的機(jī)位信號(hào)。

而對(duì)于搖滾音樂演出，由于樂隊(duì)主要成員一般都很少，可以設(shè)置為1個(gè)樂手1個(gè)專門機(jī)位，這樣觀眾就可以選擇最想關(guān)注的機(jī)位來(lái)觀看了，例如主唱、鼓手、BASS手、吉他手等。

4)科學(xué)探索

能進(jìn)行交互式多角度直播的科學(xué)探索活動(dòng)有許多，例如各種物理或化學(xué)的實(shí)驗(yàn)，各類機(jī)器的試驗(yàn)，火箭發(fā)射，登陸月球等。

4 交互式多方位電視直播系統(tǒng)的關(guān)鍵技術(shù)問題

隨著拍攝機(jī)位的增加，獲取的視頻數(shù)據(jù)量會(huì)變得越來(lái)越龐大，在網(wǎng)絡(luò)資源有限的情況下，如何有效地將視頻數(shù)據(jù)進(jìn)行壓縮成為多方位電視直播系統(tǒng)最關(guān)鍵的技術(shù)問題。

對(duì)于系統(tǒng)中某一個(gè)攝像機(jī)位而言，在某一段時(shí)間內(nèi)，其拍攝的必然是同一對(duì)象。而對(duì)于同一拍攝對(duì)象，由于攝錄所得的視頻幀與幀之間圖像的變化并不大，因此像素?cái)?shù)據(jù)之間存在著極大的相關(guān)性，視頻數(shù)據(jù)中無(wú)論在時(shí)間上還是空間上均存在著大量的冗余。利用其相關(guān)性，可從上一幀的一部分像素?cái)?shù)據(jù)推出下一幀的一部分像素?cái)?shù)據(jù)，因而可以最大程度地減少冗余數(shù)據(jù)，達(dá)到壓縮視頻的目的。目前幾乎所有關(guān)于視頻壓縮技術(shù)的研究都是利用相關(guān)性，并依靠一定的預(yù)測(cè)機(jī)構(gòu)來(lái)進(jìn)行的，這方面的例子很多，最著名的是由國(guó)際標(biāo)準(zhǔn)化組織和國(guó)際電信聯(lián)盟組織聯(lián)合頒發(fā)的H.264標(biāo)準(zhǔn)(也指MPEG-4的第10部分)，它是具有多種預(yù)測(cè)模式、基于幀間圖像的時(shí)空相關(guān)性來(lái)進(jìn)行壓縮編碼的標(biāo)準(zhǔn)[6]，相比于MPEG-2、MPEG-4標(biāo)準(zhǔn)，H.264具有更高的壓縮比率，同時(shí)擁有高質(zhì)量流暢的圖像。其他利用相關(guān)性進(jìn)行視頻編碼的研究還有很多，例如陳普坤提出的基于小波變換的視頻編碼技術(shù)[7]、劉淑杰提出的非對(duì)稱編碼技術(shù)[8]、張軍提出的多視角紋理深度聯(lián)合編碼方案[9]等。

有了高效的視頻壓縮編碼技術(shù)，就可以有效地節(jié)省網(wǎng)絡(luò)資源，傳播更多的節(jié)目頻道，且可以保證有較強(qiáng)實(shí)時(shí)性的同時(shí)，提供終端用戶互動(dòng)的流暢度。

5 總結(jié)

本文討論了交互式多方位電視直播的模式，與傳統(tǒng)在任何時(shí)間內(nèi)只能輸出一路機(jī)位信號(hào)的直播方式不同，它可以同時(shí)輸出多路不同機(jī)位的直播信號(hào)，這些信號(hào)可以根據(jù)要求，選擇經(jīng)由人工控制或部分不經(jīng)人工控制后直接輸出到電視中心，再輸送給觀眾。與傳統(tǒng)的電視直播方式相比，交互式多方位電視直播系統(tǒng)可以將更多的現(xiàn)場(chǎng)信息傳遞給觀眾，并讓觀眾根據(jù)自己的喜好來(lái)選擇觀看的信號(hào)，真正達(dá)到多方位立體式同步直播的目的，如果能在新聞、體育比賽、文藝演出以及科學(xué)探索等形式的節(jié)目上有選擇地試行，應(yīng)能給予觀眾一個(gè)全新的直播體驗(yàn)。

多方位電視直播的視頻數(shù)據(jù)量比一般的電視直播的視頻數(shù)據(jù)量大，如何在保證畫質(zhì)的同時(shí)，對(duì)視頻信號(hào)進(jìn)行高效壓縮，且保證實(shí)時(shí)性和互動(dòng)性，是交互式多方位電視直播系統(tǒng)的關(guān)鍵問題。相信隨著計(jì)算機(jī)技術(shù)和信息技術(shù)的高速發(fā)展，交互式多方位電視直播的模式將會(huì)逐步推行。

[1] 黃淑敏. 新聞學(xué)視覺下的電視直播研究[D].西安：西北師范大學(xué)，2009.

[2] 崔林. 現(xiàn)場(chǎng)并非直播——兼談電視新聞現(xiàn)場(chǎng)直播的敘述方式[J].現(xiàn)代傳播，2005(5)：100-102.

[3] 陶劼. 試析電視現(xiàn)場(chǎng)直播的三維范式構(gòu)建[D].南寧：廣西大學(xué)，2013.

[4] LOU Jianguang，CAI Hua，LI Jiang. A real time interactive multi-view video system[C]//Proc. ACM Multimedia's 05. [S.l.]：ACM，2005：161-170.

[5] 孟群. 電視節(jié)目制作技術(shù)[M].北京：高等教育出版社，2006.

[6] ITU-T Rec，H.264/ISO/IEC 11490-10. Advanced video coding final committee draft, Document JVT-E022[S].2003.

[7] 陳普坤. 基于小波變換的多視角視頻編碼研究[D].廣州：中山大學(xué)，2007.

[8] 劉淑杰. 多視角視頻編碼的關(guān)鍵性技術(shù)研究[D].合肥：中國(guó)科技大學(xué)，2008.

[9] 張軍. 多視角紋理深度視頻聯(lián)合編碼的關(guān)鍵技術(shù)研究[D].合肥：中國(guó)科技大學(xué)，2011.

責(zé)任編輯：任健男

Design of Interactive Multi-view Live TV System

LU Yongwen

(GuangdongRadioandTVStation,Guangzhou510066,China)

The structure of interactive multi-view live TV system and it’s suitable programs, the difference with normal live TV system are introduced in detail in this paper. The key technical problem of this system that how to compress the video data effectively is also discussed. The superiority compared to normal live TV shows that the interactive multi-view live TV should be the popular live TV mode in future.

live TV; camera; multi-view; interactive

TN948

B

10.16280/j.videoe.2015.18.017

2015-06-29

【本文獻(xiàn)信息】盧勇文.交互式多方位電視直播系統(tǒng)設(shè)計(jì)[J].電視技術(shù),2015，39(18).