新媒體數位藝術——聲音與影像的跨界融通

楊 君

（河南大學 新聞與傳播學院，河南 開封 475001）

一、聲音裝置藝術

聲音藝術（Sound Art）從最初在傳統音樂下突破制式的架構、創造新的樂音及作品形式的種種改變，即可說是在過往既定的架構下，刻板于音樂種種美學感知中，還原其音樂的本質，用聲音來創造一個新的美學概念，使音樂有了更多的空間及可能性。而聲音藝術可能是當代藝術形態中較難定義的類型之一，它不以硬體器材設備取勝，因為任何使用聲音為媒體素材的創作都有成為廣義聲音的可能。［1］

新媒體數位藝術中的聲音裝置將傳統藝術的結構分為“視、聽、動、靜”四部分，它們之間相互融通，從而能夠創造出極其美妙的數位藝術。其中，聲音是受眾接受外界信息的主要渠道之一，在新媒體數位藝術中，聲音發揮著重要的作用，對于新媒體數位藝術來說，它的作品的藝術價值發揮著舉足輕重的作用。

二、新媒體藝術在臺灣

臺灣的新媒體數位藝術發展迅速，2000年以后，自電影與錄像開始出現在美術館和博物館之后，音像很快受到人們的重視，這也意味著聲音藝術的脈絡有著明朗化的發展。音像與數位技術緊密的結合，利用錄像藝術、聲音裝置、聲音與影像現場及時表演等方式，成就聲音裝置藝術的完美展出。

姚仲涵從2007年開始著手以日光燈進行創作，日光燈不穩定的模糊狀態是讓姚仲涵感興趣的主因，也成就其卓越的創作。姚仲涵的多數作品皆搜集來自日光燈閃爍過程的聲響，再透過電腦放大、改變音頻、構筑為作品中的聲響元素。已被國立臺灣美術館典藏的《流竄座標》便是以聲光、身體與空間為基礎，透過三者的關聯互動觸發觀者的「身音經驗」，《流竄座標》更使觀者的身體成為聲音、光、位置三者匯聚的焦點，進而在藝術創作中實踐身體、聲光與空間的彼此關系。

簡而言之，聲音和其他藝術形式最大的不同在于，人們必須要先聽完才知道發生了什么事，才能確定自己體驗到了什么但是在聽完之前，受眾要先排除自己的心理障礙。因為聽覺是接受度最窄的一種感官，而且受慣性所牽制。［2］所以，長期以來，音像被看成是聽覺和聲音以不可見的抽象媒體素材來完成的具體實踐形式。

我們可以看出，聲音作為人類獲取信息的主要渠道之一，在新媒體數位藝術中發揮著重要的作用。但是，在媒體市場中，聲音裝置技術與藝術水平還有待提高。在今后的新媒體數位藝術創作中，必須重視聲音設計在新媒體中的重要影響力。

三、新媒體藝術在大陸

近年來，新媒體藝術逐漸在中國大陸各大藝術館、美術館樹立起較為完整的一套藝術體系。新媒體藝術與科技密切相連，這種藝術手法與傳統的藝術手法迥異，這是一書中的創新。例如，上海第十屆雙年展城市館的“人機未來”、上海21世紀民主美術館開館展“多重宇宙”、中央美院美術館第二屆未來站“創客創客”等。這種藝術集合了網絡、計算機、音像與影像并與觀眾進行互動這種形式，他們展現了炫酷的特技，令人眼花繚亂。

張尕，媒體藝術家，媒體中國2008年策展人，紐約帕森斯藝術學院教授。曾參加許多重要國際展覽如Ars Electronica Center （奧地利）、Adelaide Art Festival（澳大利亞）等。從2004年至2006年之間，他組織并策劃了北京國際新媒體數位藝術展及論壇，將國際新媒體藝術引向中國大陸。2015年起，他將參與指導上海新媒體藝術中心展覽，談談新媒體數位藝術究竟是什么。

四、影像，是一種聽覺經驗

當代新媒體數位藝術家利用科技媒體，創造了充滿媒介性（mediality）元素的藝術品、虛擬環境、表演以及裝置，并標志著越來越電腦化處理的媒體元素（如、圖像、活動影像、聲音、形象、空間和文字）。這些人工制造出的成果，被稱為是“顛覆矩形視窗”、“視覺圖像認知”以及帶動互動性展演的“新界面”，藝術家、作家以及影像創作者都不斷地實驗這種新思維，以及新視覺界面和敘事結構的模式。

聲音與影像之間的關系，不僅能夠表現、引起、召喚、緩和情緒，說明情節、促進聯想、加深視覺印象。人類在真實生活中運用到的感官體驗，聽到或是看到的東西并不能給我們完全立體的感受。若是把影像獨立，除去聲音的部分，會是怎樣的情形？反之，又會是怎樣的體驗？加入經典的原著少了影像，或是缺了聲音，作品本質仍然存在或是變成另一件不同的，甚至是迥異的作品？

為了使聲音和影像之間能夠更好地融通，受眾在新媒體數位藝術的表演中起著重要作用。新媒體藝術是一個互動性較強的藝術樣式，通過搜集各種資料，形成新的藝術作品，呈現在受眾的面前，吸引受眾參與其中，這是媒體的一大飛躍式進程。它是全新的藝術形態，受眾與影像及聲音互動的過程，就是社會和科技文化進步的過程。

五、聲音與影像的密切聯系

新媒體數位藝術主要是通過視覺、聽覺、觸覺等身體感官器官的刺激來獲得親身體驗與感受。其中，視覺和聽覺就像是孿生姐妹，是一個整體。沒有視覺，聽覺就不完整；沒有聽覺，視覺就無法完美地呈現出來。但是，聲音在新媒體數位藝術中的作用是無可厚非的。“聲音藝術”成為一個極其難以論述的藝術創作方式，當人們的感官器官不斷受到挑戰與刺激的時候，我們更難以對“聲音”傳統思維的定義“聲音是用聽覺感知來體會的”加以確定。一般來說，人們對“聲音”的認知只是淺層面上的理解，只是純粹的聽覺感官上的刺激。在數位藝術下，聽覺、視覺與感官器官相融合，創造出集視覺、聽覺、觸覺為一體的完美體驗。在網絡發達的時代，數位科技在聲音（sound）與音樂（music）藝術創作及其傳輸上的影響不言而喻，聲音的音像傳播面向的創作計劃經常是以互動裝置的形式表現出來，反映出不同使用者對如何置入或是轉化資料結構成為聲音與視覺的展現。

所以，在聲音中，受眾參與的每一個藝術家的作品之中，都會由一種新的生命的形式呈現出來。從而，受眾對于之后的每一次感知形式的廣泛理解以及感知理論的發展開啟了一扇新窗。不同層次的新媒體數位藝術作品對于聲音的要求各不相同。

一是人機之間的互動藝術。這個數位藝術比較簡單，就是人與機器之間的直接觸覺接觸。例如，教育類的數位游戲，檢測人們的大腦反應情況進行簡單的測試。二是能實現人機、人人，低水平的互動游戲。例如，憤怒的小鳥，人的手指與屏幕接觸，屏幕受到手指的控制，來完成整個游戲。這種虛擬現實的特點主要依靠手指與屏幕進行互動，這種互動信息傳送的效率較低，成員之間的呼應較困難。三是能夠實時進行成員之間的直接對話。這是高級虛擬的訓練系統，如飛行員模擬駕駛、消防員模擬救生訓練等。

在新媒體數位藝術聲音音像中，聲音被作為一種訊號“signal”，其含義是從電腦到其他裝置之間的輸入和輸出。正如勞雷爾（Brenda Laurel）所言：“即使人們看不到聲音，但卻常說：聲音被音響給展示（displayed）出來?！睆堄肋_對上述有了明確的表示：“不管是視覺藝術或是其他領域，聲音是在幫助或輔助視覺的建構，使它更清楚地表達，就像是一開始的無聲電影到有聲電影，其實是幫助我們進入視覺所要呈現的狀態，彌補一些不足?！?/p>

［1］ 林其蔚.聲音藝術的定義困境I——讓人迷惑的藝術［J］.藝術Issue，2010（8）：44.

［2］ 張蘊之.聲音藝術，臺灣發聲——從五線譜中離開：聲音藝術對話錄［J］.幼獅文藝，2005（621）：43.

［3］ 何巖.VIDEO 新媒體藝術中的動態影像藝術［J］.長春教育學院，2010（23）.

［4］ 姜超遷.從作品《得廣廈千間-致萬安》看中國新媒體聲音裝置藝術［J］. 2013（6）.

［5］ 孫霞.關于交互設計中“視與聽”元素的研究［J］. 2013（zl）.