論多媒體聲音與圖像的合成

聲音與圖像的合成，是影視等多媒體藝術(shù)在制作工作中的一個工作階段。在這個工作階段，要求按照創(chuàng)作意圖，完成圖像與聲音的有機(jī)結(jié)合，基本定型藝術(shù)作品的整體效果。

在一般性的影視制作工作中，聲音與圖像的合成，屬于后期工作范疇。在這個階段的工作中，圖像已經(jīng)基本剪輯完成。聲音（音頻）部分，則開始制作、收集、整理并且與圖像進(jìn)行合成。

影視等多媒體藝術(shù)中的聲音部分，并不是將生活中的聲音完全一樣地填充，而是在作品的創(chuàng)作階段，就已經(jīng)整合思考的藝術(shù)元素。其中包括客觀的聲音，就是指有音源的聲音，包括環(huán)境音響、背景人聲、同期聲、動作配音（動作音效）、對白以及客觀音樂等。是在聽到聲音的同時(shí)可以在畫面或者敘事環(huán)境中找到聲源，并直接或間接與之相統(tǒng)一、相匹配，為了還原和立體化真實(shí)感知而建立的音響。還有主觀聲音，是指畫面上沒有顯示音源的超自然的音響，主要包括主觀音樂（主題音樂、插曲、背景音樂）、內(nèi)心獨(dú)白及描寫主觀感受的音效。

由于不同的多媒體藝術(shù)作品，存在著的音響形式也不盡相同，所以，我們要先明確和劃分多媒體藝術(shù)的種類。

首先，從聲音和圖像兩個元素的依附和主從關(guān)系上，可以劃分為：1.以圖像為聲音素材準(zhǔn)備和編輯依據(jù)的合成形態(tài)，如電影、電視劇、動畫片、專題片、新聞、媒體的包裝片、風(fēng)光片、網(wǎng)頁互動、幻燈片、課件等。2.以聲音為圖像素材準(zhǔn)備和編輯的依據(jù)的合成形態(tài)，如音樂電視（MTV）、音樂視頻（windows 系統(tǒng)自帶的media play中的視頻音樂軟件）等。3.互動形態(tài)，網(wǎng)頁以及電子游戲的按鈕音效、背景音樂等。

然后，從聲音播出的觸發(fā)方式的被動與互動層面上，可以分為：1.被動聲音與互動聲音。如劇情類電影、電視劇、動畫片等，受眾只能被動地接受劇情和相應(yīng)的聲音的發(fā)展。2.互動作品中的聲音，如互動網(wǎng)頁的按鈕與連接音效、電腦游戲的配音音效等。這些聲音和圖像相統(tǒng)一，都是被受眾控制的、主動的、選擇的，是依附于游戲或者網(wǎng)頁開發(fā)的程序安排而捆綁在程序上的。

總之，影視以及多媒體藝術(shù)是通過多種媒體的結(jié)合，來建立立體的、升華的多媒體藝術(shù)感知和傳達(dá)，從而表現(xiàn)特定的時(shí)間、空間、事件的藝術(shù)形式。

聲音與圖像的合成的概念和設(shè)備要求

聲音與圖像的合成的概念。聲音與圖像的合成，是指按照創(chuàng)作意圖，完成圖像與聲音的有機(jī)結(jié)合，基本定型藝術(shù)作品的整體效果。在一般性的影視制作工作中，聲音與圖像合成屬于后期工作范疇。在這個階段的工作中，圖像已經(jīng)基本剪輯完成，聲音（音頻）部分則開始制作、收集、整理并且與圖像進(jìn)行合成。

因此，聲音與圖像的合成，實(shí)質(zhì)目的就是將聲音與圖像按照創(chuàng)作意圖所要求的結(jié)構(gòu)，進(jìn)行整體的編排與對位。

設(shè)備要求。錄音棚系統(tǒng)是合成的首要設(shè)備。一個大型的錄音棚，好的錄音的標(biāo)準(zhǔn)主要是：1.建筑聲學(xué)的合理運(yùn)用與否。這將直接影響到錄制的音色與混響特點(diǎn)2.音頻設(shè)備的優(yōu)劣程度。在計(jì)算機(jī)技術(shù)全面推廣的今天，計(jì)算機(jī)音頻處理和音樂輔助創(chuàng)作已經(jīng)顯現(xiàn)出其革命性的優(yōu)勢了，就錄音系統(tǒng)來說，就有MIDI制作軟件cakewalk、多音軌錄音軟件cool edit、錄音軟件sound forge 等專業(yè)的工具軟件。計(jì)算機(jī)技術(shù)正在發(fā)揮著重大的制作和編輯潛力。

另外，還有一些外圍輔助設(shè)備，如硬盤錄音裝置、麥克（包括多指向性麥克根據(jù)需要配備）、麥克功率放大器、監(jiān)聽耳機(jī)、音響、相應(yīng)的話筒架等，可以根據(jù)需要加以配置。

聲音與圖像的合成方法與分類

多媒體藝術(shù)的種類，內(nèi)容決定形式，目標(biāo)決定方法，這么多形態(tài)的合成，自然是有著相應(yīng)的合成方法和技術(shù)手段的。要研究聲音與圖像的合成技術(shù)，首先就要將聲音與圖像的合成類型進(jìn)行細(xì)分。

聲音與圖像的合成技術(shù)一般有兩種方式，基本上可以分為：1.以圖像為依據(jù)，線性同步錄制。這種方法，音頻的制作和合成基本上是同時(shí)進(jìn)行的，有量體裁衣的感覺。2.通過搜集音頻素材，進(jìn)行非線性編輯。

線性同步錄制。線性編輯，就是順序地、由開始到結(jié)束地存放素材的方式的編輯。簡單地說，每部有劇情影片，其音頻部分都是獨(dú)一無二的、量身定做的，沒有完全一樣的身材，也沒有完全一樣的影片。這是由電影藝術(shù)的基本特點(diǎn)所決定的。

通過剛才我們劃分的音頻種類，我們來歸納一下哪些是需要使用線性同步錄音合成的。

首先是背景音樂。在制片方選擇了導(dǎo)演和劇本之后，導(dǎo)演就開始創(chuàng)作了，需要什么樣的音樂，導(dǎo)演會選擇一個音樂家。當(dāng)作品基本定型以后，就可以組織樂隊(duì)排練了，樂隊(duì)水平根據(jù)預(yù)算和技術(shù)特點(diǎn)來選擇，然后依據(jù)樂隊(duì)和作曲家之間的默契程度，來決定排練的時(shí)間長度。

背景音樂，顧名思義就是作為背景使用的，那么背景就要求和主體相襯托、相協(xié)調(diào)。因此，背景音樂和畫面節(jié)奏的速度要統(tǒng)一。但是，如果獨(dú)立地錄制背景音樂，是不會與畫面完全吻合的。所以背景音樂的錄制，特別是管弦樂隊(duì)的錄音，必須要在錄音的同時(shí)，將剪輯好的鏡頭動態(tài)展示給樂隊(duì)指揮。具體展示方法就是在錄音棚設(shè)置大屏幕。在錄制時(shí)，樂隊(duì)指揮依據(jù)畫面的節(jié)奏，動態(tài)調(diào)整演奏速度和起伏。

其次，還有語言，包括對白、旁白、內(nèi)心獨(dú)白的制作。

非線性合成。非線性編輯，是不需要順序地、由開始到結(jié)束地存放素材的方式的編輯。多用于環(huán)境音效部分，因?yàn)椴蓸訖C(jī)配合高精度麥克風(fēng)，可以到自然界采集音頻素材。用在相應(yīng)的圖像段落里，因?yàn)檫@些聲音的音源并不是圖像中直接可見的，所以不需要像對口型那樣，精確它的編輯位置。

不同類型的圖像，會選擇不同的聲像合成技術(shù)，這其中也有制片成本的問題，很多電視劇為了節(jié)省音頻制作部分的成本，可以使用一些音頻素材庫來編輯音效和音樂。

網(wǎng)頁、游戲等信息時(shí)代產(chǎn)生的藝術(shù)形式，也是這種編輯方式。就網(wǎng)頁來說，如果需要背景音樂，就要選擇一個和頁面風(fēng)格統(tǒng)一的背景音樂，然后通過程序編輯設(shè)定其播放時(shí)機(jī)，這樣在瀏覽的時(shí)候，受眾就會在你的安排下，收聽到你設(shè)置的音樂了。

電子游戲的發(fā)展，這些年可以說是突飛猛進(jìn)，無論是動作游戲還是益智類游戲，那絢麗的音效一定給人們增添了不少樂趣。總之，游戲和flash動畫的音頻合成，是最能體現(xiàn)非線性編輯的了。

不同類型的音頻元素，選擇不同的制作和編輯方法。當(dāng)然，在科技和藝術(shù)飛速發(fā)展的今天，新的藝術(shù)形式對計(jì)算機(jī)技術(shù)還會提出更高的要求，兩者相互促進(jìn)、相互發(fā)展，相信今天的總結(jié)和歸納，只是點(diǎn)擊明天的按鈕，科技會給我們一個意外的鏈接。

（作者單位：東華大學(xué)）

編校：張紅玲