音畫互通：音樂視覺化的路徑分析

（江南大學 214122）

一、音樂旋律的音畫對位

音樂的旋律是由不同或相同高低關系的音組成的序列、對于人的視覺感官來說相當于線條的概念，不同音高的音形成的線條組織形式——旋律線，在接下來研究旋律的音畫對位的過程中，筆者會選擇經典的音樂視覺化作品，具體分析作品中音樂旋律、旋律線以及動態視覺元素來探究音樂旋律與畫面的對位關系。

圖1 音樂樂譜、旋律線及對應畫面

奧斯卡.費欽格的作品《研習第七號》對德國音樂大師勃拉姆斯的《匈牙利舞曲第五號》旋律進行了視覺呈現。在圖1中的編號1，筆者截取樂譜前兩小節的旋律線和畫面的序列圖像進行比對后分析發現，音樂的旋律線呈現一種先大幅上升然后下降的趨勢，畫面中的矩形圖形也呈現出由下自上再向下的運動，在第一小節中矩形的運動狀態為畫著8字左右向上飛舞著對應著旋律線向上的趨勢，第二小節中的運動狀態是根據圓心順時針旋轉一圈后向下消逝，對應著旋律線向下的趨勢。畫面中圖形的運動方向與音樂旋律線的指向保持一致，隨著旋律線的上升，畫面中的矩形也旋轉著上升，在旋律線開始向下時，畫面中的矩形的運動方向也是旋轉向下。

瑪麗.艾倫.布特的《色彩交響曲第4號：逃離》，選擇了巴赫的《d小調托卡塔與賦格》進行視覺化嘗試。在引子之后出現了一段帶有非常密集節拍的旋律，如圖1中編號2，觀察樂譜可以清晰的看到，旋律線呈現一個階梯狀上升的狀態，在表現這段音樂旋律的時候，作者運用了排列有序的三角形梯隊進行再現，三角形梯隊依次從右下至左上、左下至右上、正下方至正上方依次有序出現，緊接著以不斷放大的單個三角形結束。三角形梯隊都是由下至上排列出現，對應著音樂旋律上升的狀態。最后以一個三角形的放大來對應旋律中的長音。

奧斯卡.費欽格的另一部作品《一部視覺詩歌》選取了李斯特的《匈牙利狂想曲第二號》進行視覺呈現，在短片開始部分，作者用圓形來進行視覺表達，圖1編號3所示為音樂的前2小節，第1小節是一個聲音漸弱的長音，在畫面上體現的是一個圓形不斷的縮小，在第2小節中，旋律的變化呈現一種密集且豐富的變化，在畫面上體現為小型的圓形按照音樂的行進不斷的出現并且縮小。音樂的第3第4小節跟第一小節的結構保持一致，先是長音而后呈現豐富變化，在畫面上也是先試一個大圓形不斷縮小，然后不同顏色的小圓形根據旋律的跳躍行進不斷出現并且縮小。作者用圓的縮小來表達每個音的行進，在圖形與旋律的對應關系來說，當旋律線呈現相對較平穩的時候畫面表達的圖形以及動態就比較單一，當旋律豐富、旋律線呈現不斷跳躍行進狀態的時候圖形及其動態就開始變得多樣起來。

音樂旋律與畫面的對位關系的結論：

1.當音樂旋律上揚、旋律線呈現上升狀態時，畫面中的視覺圖形也呈現上升的運動狀態，當音樂旋律下降時，畫面中的圖形元素也對應著向下運動。

2.當音樂旋律的變化相對舒緩、旋律線表現平穩時，畫面中的圖形及圖形運動狀態也較為純粹和單一，當音樂的旋律變化豐富、旋律線呈現不斷跳躍行進的時候，圖形及圖形動態也變得復雜多樣起來。

二、音樂節奏律的音畫對位

在現代音樂視覺化設計領域，藝術家們往往將音樂的節奏作為重要設計對象、根據音樂節奏的變化來進行動態視覺設計，所以音樂視覺化設計作品中的視覺表達常常與音樂的節奏存在著對應關系。音樂的節奏變化在樂譜上表現為音符的疏密變化，音樂的節奏決定了音樂行進的快慢，一般而言快節奏的音樂能夠使人產生緊張刺激的感覺，而節奏相對舒緩的音樂讓感到放松；除此之外，音樂節奏還包含節拍的概念，強弱關系不同的節拍組織了節奏有序的音樂，重音上的叫強拍，表現為較為強烈的聲音給人以震撼感，無重音的叫弱拍，給人的感覺相對微弱。

圖2 動畫序列幀及音樂波形圖、節奏對應序列幀

來自于Audioreact Lab的《Yves De Mey - Metrics -2013》是表達節奏與視覺對位的優秀作品，作品用具有強烈對比的黑白兩色進行視覺表現、用線條及塊面的位移以及閃動來與音樂節奏對應。筆者截取了作品中一小段短片的畫面將他們組成序列、并且用與之相對應音頻的波形圖來做音畫節奏的對位研究得出：當波形圖到達峰值時，音樂也是處于節奏點位上，在畫面上呈現出全屏幕的白色頻閃效果，而且音樂的節奏按照其特有的頻率程周期式的出現，畫面中的頻閃也呈周期性顯現，短片中畫面的頻閃與音樂的節奏鼓點有著巧妙的對位關系：當音樂的節奏出現時，畫面出現頻閃效果，且音樂的節奏呈周期性循環往復出現，頻閃視覺效果也呈周期性出現。

來自Evelyn Lambart & Norman McLaren的《Begone Dull Care》，作品選取Oscar Peterson Trio的爵士樂來作為背景音樂，音樂的主樂器為鋼琴，作品中的圖形變化豐富，筆者從短片中截取了一段序列幀及其對應的音樂波形圖，發現節奏點呈周期性的出現在波形圖的峰值位置，當音樂行進到達節奏點時，畫面中顯現出出紅白色條紋和純黑色的交錯閃爍的畫面，而在其他時候，畫面的設計都是音樂旋律主導的：紅色背景下的抽象圖形的上下飛舞。我們可以得出，當音樂行進到節奏點位時，畫面會相應的出現短暫的畫面停頓以及閃現出與音樂節奏點位前后都不一樣的畫面。

來自youtube用戶&Jacopsen的《Alva Noto-Uni dia（video：Jacopsen VJ）》也是將音樂的節奏視覺化的優秀設計作品，作品中的音樂選擇《Univrs》專輯中的《Uni Dia》電子樂，短片的畫面以黑色為底色，用類似顯示屏故障的條紋線條來表達電子樂中類似機器故障的聲音，筆者同樣取作品中的一小段序列動畫幀與音樂波形圖相對應后發現：當波形圖達到峰值時，音樂的節奏出現、此時的畫面不呈現任何圖像和顏色，而在節奏的前后畫面呈現黃色和白色的閃爍，在節奏出現時通過畫面的停頓來表現，而節奏點前后閃動的畫面也能襯托節奏出現時的黑色停頓畫面；作者通過畫面的停頓來響應節奏，通過節奏前后圖像的頻閃來襯托節奏。

音樂節奏的音畫對位結論：

1.通過頻閃來響應節奏，以及根據節奏的周期性出現，頻閃也周期性顯現

2.通過停頓來響應節奏，即音樂節奏出現時，畫面不顯示任何圖像，一般表現為沒有內容的純黑色

3.用變異來響應節奏，用與節奏前后的視覺內容的風格、形式、色彩形成明顯差異化的視覺呈現來突出節奏。

三、結語

隨著多媒體技術的不斷發展，音樂視覺化表現有了更便捷的實現路徑，但是不論實現方式如何改變，音樂視覺化的核心內容還是在于視覺如何更好的對音樂進行表達，這就要求設計師們更多的關注音樂本身，去理解音樂中的節奏、旋律等各要素的組織關系，在理解音樂的基礎上產出音畫關系更為和諧、視聽體驗更為震撼的音樂視覺化作品。