藝術(shù)空間中聲音的特性研究

陸鈞怡 黃秋野 （南京航空航天大學(xué) 211106）

人類自電子時(shí)代開始便逐漸推動(dòng)聽覺與聲音媒介的利用。留聲機(jī)、隨身聽等電子媒介的出現(xiàn)為聽覺打破了時(shí)空限制，高質(zhì)量的聲音記錄使聲音這種傳播媒介越來越受重視。20世紀(jì)60年代。加拿大著名學(xué)者馬歇爾·麥克盧漢（Marshall McLuhan，1911-1980）提出“重新部落化”以及“聽覺回歸”理論，強(qiáng)調(diào)了在重新部落時(shí)代，數(shù)字媒介的爆炸式發(fā)展促進(jìn)了聽覺功能的延伸。針對(duì)麥克盧漢的聽覺理論，許多學(xué)者展開了聽覺方面的研究與嘗試。

一、藝術(shù)空間及聲音的特性

在對(duì)聽覺的研究方面，王敦指出，麥克盧漢認(rèn)為由于耳朵不像眼睛那樣能夠聚焦、透視和分割信息，因此聽覺空間是有機(jī)的、流動(dòng)的、發(fā)散的。韓志方在《麥克盧漢的聽覺與視覺空間理論研究》中提到電子時(shí)代信息的快速流動(dòng)導(dǎo)致信息傳遞量和傳遞速度的激增。特倫斯·戈登（Terrence Gordon）指出在麥克盧漢的理解中，媒介即信息，媒介與媒介相互嵌套，前者包含后者，而后者是前者的信息。

在聽覺與聲音的關(guān)系中，聽覺感官接收并包含聲音，聲音包含各類信息。以此為推斷，在聽覺空間中，運(yùn)載信息的聲音被感官接收進(jìn)而影響感官主體，構(gòu)成了聽覺主體與聲音之間的嵌套方式。眾多學(xué)者表明，聲音以自由式發(fā)散的狀態(tài)流動(dòng)在物理空間中，而這種流動(dòng)的聲音信息能夠被聽覺主體有目的地接收。加拿大作曲家默里·謝弗(Raymond Murray Schafer)在1970年提出“聲音景觀”的概念，謝弗認(rèn)為由于每個(gè)聽眾個(gè)體的歷史因素各不相同，他們?cè)诼牭酵瑐€(gè)聲音元素時(shí)會(huì)產(chǎn)生不同的聲音印象，當(dāng)聽覺主體身處特定聲音空間中，在塑造著外部聲音空間以及內(nèi)部聲音印象。這種印象與情緒類似，本質(zhì)上是源于歷史和生活的信息流動(dòng)造成的影響。聲音空間中的情緒化信息以聽覺主體為交叉點(diǎn)，強(qiáng)化聽覺主體心理層面的建設(shè)及其對(duì)整個(gè)聲音空間的感知。

魏佳在《“藝術(shù)空間”概念探究》中將空間體驗(yàn)劃分為客觀空間（或物理空間）、視覺空間、心理空間和藝術(shù)空間。客觀世界的信息流由感官接收形成感知主體的主觀印象，通過心理層面的傳導(dǎo)將主觀印象與客觀世界結(jié)合，構(gòu)成藝術(shù)作品的呈現(xiàn)空間。由此可見，針對(duì)不同種空間概念的映射，感知主體能以自身主觀能動(dòng)性的反饋形成對(duì)應(yīng)狀態(tài)下的心理空間。“空間”的概念也一直以不同的形式表征于藝術(shù)創(chuàng)作中，從聽覺角度出發(fā)表現(xiàn)為聲音空間及聽覺空間。客觀空間、聽覺空間及心理空間的相互穿插、逐層深入，共同構(gòu)建藝術(shù)空間的完整性及多樣性。

數(shù)字技術(shù)的發(fā)展促使藝術(shù)作品創(chuàng)作形式與方法的多樣化，使藝術(shù)作品更強(qiáng)調(diào)交互性，以多感官交互聯(lián)結(jié)心理知覺，推動(dòng)藝術(shù)空間多維度發(fā)展。聲音具備內(nèi)容屬性、情緒性及交互性，如何針對(duì)聲音信息中的各項(xiàng)聲音元素作出細(xì)致變化，使之匹配其它感官信息，豐富體驗(yàn)者的心理空間構(gòu)建，是數(shù)字藝術(shù)設(shè)計(jì)過程中需要仔細(xì)揣摩的問題。多感官之間緊密有機(jī)地結(jié)合能刺激觀眾的情緒共鳴，通過藝術(shù)空間的共通聯(lián)系人與人心理空間，為聲音交互性的利用提供了方向。

數(shù)字技術(shù)時(shí)代，聽覺感官已經(jīng)加入數(shù)字藝術(shù)交互的考慮范圍內(nèi)。聲音視覺化、聲音交互的利用為聲音加上了時(shí)代烙印，為人們帶來更多聽覺刺激的同時(shí)，感官接收到的聲音信息能量也會(huì)同步輻射至心理層面。隨著對(duì)聲音刺激接受度的增長(zhǎng)，對(duì)聽覺認(rèn)知的刻板印象也會(huì)進(jìn)一步發(fā)生顛覆。

二、聲音的視覺化塑造情緒化場(chǎng)景

聲音同時(shí)具備具象與抽象的能量，具象的能量即聲能，是介質(zhì)中存在的機(jī)械波，可改變物理空間的布局或形態(tài)；抽象能量可表現(xiàn)為聲音對(duì)聽覺主體的誘導(dǎo)作用，通過情緒化的方式引起體驗(yàn)者的共鳴，進(jìn)而塑造心理空間。眾多學(xué)者針對(duì)聲音片段誘導(dǎo)不同情緒的研究表明，根據(jù)記憶的偏差，聽覺主體接收聲音信息會(huì)產(chǎn)生不同的情緒。這兩種能量在聲音信息的流動(dòng)過程中以各自的方式影響藝術(shù)作品的呈現(xiàn)空間。借由二者不同的表現(xiàn)手法，聲音能夠得到不同的視覺化方式，借此引導(dǎo)觀眾對(duì)聲音情緒信息的接收，引導(dǎo)體驗(yàn)者對(duì)其心理空間進(jìn)行深入塑造。

1.聲音能量的視覺認(rèn)知

聲音具備聲能，是以聲波的形式存在的能量，這一物質(zhì)屬性賦予了聲音影響物理空間的能力，即視覺化屬性。創(chuàng)作者曾就聲音的視覺化作出嘗試，嘗試賦予這種波形以可視的形態(tài)進(jìn)行藝術(shù)創(chuàng)作。原創(chuàng)音樂制作人奈杰爾·斯坦福（Nigel Stanford）曾以自己的音樂作品進(jìn)行了CYMATICS創(chuàng)作嘗試（借助沙或水等媒介的振動(dòng)來實(shí)現(xiàn)聲音視覺化的過程）。作品中每樣樂器對(duì)應(yīng)不同的視覺化介質(zhì)，通過不同的音響設(shè)備將原有的擴(kuò)散型聲波轉(zhuǎn)換為指向性明確的聲駐波，根據(jù)駐波的不同類型設(shè)計(jì)多種聲音的視覺化方式。奈杰爾設(shè)計(jì)由不同樂器演奏出的音樂通過砂礫、火焰、魯本氏管（Ruben's Tube）、特斯拉線圈（Tesla Coil）、鐵液（Ferro Fluid）的現(xiàn)象演示，展示了不同媒介傳導(dǎo)聲音的形態(tài)（如圖1）。

圖1 CYMATICS聲音視覺化示例

大多數(shù)人未嘗試過以視覺“感知”聲音。聲能在對(duì)物理空間產(chǎn)生影響的同時(shí)，不僅將聲音本身的存在可視化，更賦予了整個(gè)聲音空間以視覺屬性。這類視覺屬性與以往構(gòu)建于觀眾視覺空間的符號(hào)元素來源不同，前者源于聲音，是聲音元素經(jīng)過物理轉(zhuǎn)化的視覺空間符號(hào)，后者源于觀察，來自客觀世界的各種視覺元素。就感官空間而言，觀眾在體驗(yàn)CYMATICS作品時(shí)，能通過視覺感知聲音，也能通過聲音認(rèn)知畫面，視覺化的聲音元素將兩種感官相互串聯(lián)，將聲音承載的信息流寓于視覺空間中。視覺與聽覺功能的高度搭配強(qiáng)調(diào)感官空間多維化。在數(shù)字藝術(shù)創(chuàng)作中，多感官的藝術(shù)體驗(yàn)并不是將不同感官?gòu)?qiáng)硬拼湊，而是需要以交疊的感官空間層次提升作品表現(xiàn)力度，使聲音信息的流動(dòng)橫向擴(kuò)散，同時(shí)傳播于不同的感官層次，形成感官網(wǎng)絡(luò)。不同感官的功能特質(zhì)造就感官信息的差異性，這些感官信息的集合形成接收主體最終對(duì)一件藝術(shù)作品的復(fù)雜感受，滿足了情緒的復(fù)雜性，并為心理空間塑造附加可能性。

2.聲音能量的情緒化場(chǎng)景塑造

通過對(duì)聲音的藝術(shù)塑造，能夠表達(dá)、渲染各方面的情緒。這一點(diǎn)在電影藝術(shù)中體現(xiàn)地尤為明顯，陳功在《電影聲音“空間感”的設(shè)計(jì)規(guī)律與方法》中提出，聲音設(shè)計(jì)應(yīng)有其特殊的原則、規(guī)律與手法。他將聲音設(shè)計(jì)分為兩種模式，一種是聲音環(huán)境與畫面環(huán)境空間不匹配的聲音設(shè)計(jì)模式，大多以“畫外音”的形式出現(xiàn)在電影或紀(jì)錄片中；另一種是二者相互匹配的聲音設(shè)計(jì)模式，大多沉浸式藝術(shù)、交互藝術(shù)等數(shù)字藝術(shù)都符合這一點(diǎn)。格蘭莫頤文化藝術(shù)集團(tuán)（International GLA Art Group Limited）開展了名為“瑰麗”的沉浸式數(shù)字意境展，其中的“千里江山”作品營(yíng)造出《千里江山圖》古樸的自然意境，音樂及音效匹配細(xì)致入微。

隨著周圍光影的變化，背景音樂以響度漸強(qiáng)的方式出現(xiàn)，且保持一個(gè)平緩的節(jié)奏，用以渲染宇宙廣闊，奠定作品聲音空間的基調(diào)。隨著其它音效的出現(xiàn)，背景音樂由第一聲音層級(jí)逐漸后退，以持續(xù)烘托氣氛的功效存在于聲音空間內(nèi)。鳥鳴聲、樹葉聲、風(fēng)聲的相繼出現(xiàn)將觀眾帶入大自然的聲音空間中。

作者意圖營(yíng)造真實(shí)的聲音環(huán)境，使之匹配視覺場(chǎng)景。聲音是多方位的、三維流動(dòng)的有機(jī)整體，其聲音屬性時(shí)刻保持變化。根據(jù)作品的價(jià)值內(nèi)涵、視覺效果、甚至是作品展示空間對(duì)聲音元素進(jìn)行取舍和組織，具體表現(xiàn)為調(diào)整或設(shè)置聲音層級(jí)、清晰度、頻率、響度等聲音元素來營(yíng)造聲音場(chǎng)景，賦予聲音的強(qiáng)弱、遠(yuǎn)近、深度、方向等空間特征，以觀者的感官為中心，依次構(gòu)建聲音空間內(nèi)的近景、中景、遠(yuǎn)景三個(gè)層次，塑造獨(dú)屬于這個(gè)作品聲音空間內(nèi)的聲音的景別。好萊塢聲音設(shè)計(jì)師沃爾特·摩奇（Walter Murch）認(rèn)為在同個(gè)場(chǎng)景中，觀眾的注意力最多只能集中在兩個(gè)聲音元素上，而第三個(gè)聲音元素會(huì)被加強(qiáng)用以吸引觀眾的注意力，或被弱化從而歸于背景音樂的一部分。作品“千里江山”開頭音效的層級(jí)衰減烘托了后來風(fēng)聲鳥叫的音效。由此可見，伴隨視覺場(chǎng)景的切換，聲音的主次地位會(huì)發(fā)生變化。不同聲音元素的調(diào)配使整個(gè)聲音空間變得立體，在不同景別的堆疊下，感官空間有了一定的深度，加深了聲音信息流浸入的邊界，感知主體更容易使自己的情緒與作品藝術(shù)空間產(chǎn)生共鳴。

眾所周知，人類的情緒是豐富多變的，自然中的聲音也是如此。數(shù)字藝術(shù)作品中的聲音由于藝術(shù)化處理，較自然中的聲音變得失真。因此針對(duì)聲音元素的細(xì)致調(diào)控需盡可能貼近自然聲音的表達(dá)，引起體驗(yàn)者情緒上的共鳴，帶動(dòng)心理空間的構(gòu)建。作品《千里江山》自然化的聲音元素與觀眾的歷史認(rèn)知發(fā)生共鳴，產(chǎn)生了情緒誘導(dǎo)的作用。如果利用聲音信息流串聯(lián)不同感官是對(duì)感官空間的橫向擴(kuò)展，那么針對(duì)這些聲音元素的調(diào)控便是在這個(gè)橫向擴(kuò)展面上的細(xì)致化處理（如圖2）。沉浸式聲音場(chǎng)景的視覺化輸出有利于聽覺主體接收并感知聲音的情緒。這使聲音信息流動(dòng)在橫向感知擴(kuò)散的層面深化了一個(gè)層級(jí)，每個(gè)聲音元素的變化都在影響聽覺主體感受到的情緒屬性。相互協(xié)調(diào)的聲音元素、情緒與視覺信息相互串聯(lián)，能夠形成聽覺主體主觀意識(shí)下的情緒化場(chǎng)景。此外，由于聯(lián)覺效應(yīng)與交互行為的介入，這種由聽覺單方面輸入的信息會(huì)產(chǎn)生支流，將針對(duì)聲音信息產(chǎn)生的感觸細(xì)分至其他感官，這為不同感官接收到的信息疊加了一層聲音特質(zhì)，由聲音元素誘導(dǎo)的情緒信息也能以此增加其擴(kuò)散面。

圖2 空間體驗(yàn)深入過程演變

聲音的情緒化是通過對(duì)其他感官的影響構(gòu)建的復(fù)雜情緒感知。這種情緒并非聲音信息的情緒，而是依賴于能夠引起聽覺主體情緒化體驗(yàn)的視覺化方式對(duì)具象和抽象的聲音信息能量進(jìn)行的深化。抽象的聲音視覺化主要體現(xiàn)在情緒化場(chǎng)景的構(gòu)建。與具象化聲音信息能量不同的是，具象化聲音能量借助裝置進(jìn)行可視化，以多感官的綜合作用構(gòu)建模糊、簡(jiǎn)單的情緒體驗(yàn)，抽象化聲音信息能夠通過調(diào)控不同聲音元素，對(duì)復(fù)雜情緒體驗(yàn)進(jìn)行細(xì)化與深入，與聽覺主體的主觀意識(shí)結(jié)合，剝離潛意識(shí)認(rèn)知的多余情緒，最終構(gòu)建為具體、清晰的情緒化場(chǎng)景，形成立體心理空間。由于聲音的情緒性，聲音信息在心理層面有了較為綜合的塑造功能，即橫向連接多重感官，縱向深入情緒體驗(yàn)，使情緒化場(chǎng)景立體化。因此在數(shù)字藝術(shù)創(chuàng)作中，針對(duì)視覺效果設(shè)計(jì)并調(diào)整各項(xiàng)聲音元素在作品中的作用，同時(shí)考慮到各元素之間的相互協(xié)調(diào)能夠產(chǎn)生什么樣的情緒化反映，從而利用聲音元素的細(xì)微調(diào)控，使聽覺主體在體驗(yàn)過程中的情緒感知更為細(xì)膩，塑造清晰立體心理空間，提升作品觀感。

三、聲音構(gòu)建藝術(shù)空間的共情關(guān)系

交互聲音的介入使觀眾之間與作品之間能構(gòu)成“共情”關(guān)系。由于每個(gè)感官主體的動(dòng)作、思想、個(gè)人經(jīng)歷各不相同，因此在對(duì)作品進(jìn)行交互時(shí)產(chǎn)生的情感具備特殊性，即心理空間具備特殊性。同時(shí)，體驗(yàn)者在多人交互空間下能夠接收到他人發(fā)出的交互信息，在被聲音擴(kuò)展的感官空間基礎(chǔ)上，聲音交互信息作用于不同主體，使感官主體能夠接收并體會(huì)他人的感受。

Teamlab的數(shù)字交互作品水粒子宇宙（Universe of Water Particles）是在一個(gè)近乎密閉的場(chǎng)館內(nèi)展現(xiàn)沉浸式虛擬自然空間。視覺上，持續(xù)流動(dòng)的粒子瀑布作大背景，花朵由綻放至衰敗的即時(shí)演算動(dòng)畫，在場(chǎng)館內(nèi)演繹季節(jié)的變換。聽覺上，花開無(wú)聲，流水有聲，作品以玄妙的音樂作背景，輔以持續(xù)不斷的流水音效，與視覺環(huán)境結(jié)合構(gòu)成了作品基本的藝術(shù)空間（如圖3）。所有體驗(yàn)者共享一片感官空間，共同接收空間內(nèi)的聲音信息，形成的心理空間存在相似性，都是對(duì)同一體驗(yàn)空間產(chǎn)生的主觀印象。在觀眾與作品之間，體驗(yàn)者能以站立、行走、觸摸的交互行為帶來作品中花朵綻放、瀑布分流的效果。由交互動(dòng)作引起的音效為原有的聲音空間中注入了新的聲音信息。即便這些音效并不強(qiáng)烈，但眾多聲音元素中充分的變化，使流水聲自然多變。體驗(yàn)者的交互行為引起水流分支、花團(tuán)形狀與變化，聲音和視效的即時(shí)演繹賦予了交互的隨機(jī)性與聲音情緒的真實(shí)性。這種真實(shí)性由感官空間逐層深入，在視聽效果造就的情緒化場(chǎng)景上添磚加瓦，完成視覺、聲音共享感官空間的建設(shè)。在具體化心理空間的同時(shí)，交互行為也使體驗(yàn)者之間產(chǎn)生聯(lián)系。在觀眾之間，交互行為成為了傳遞感知的媒介。由于體驗(yàn)者之間共享感官空間，能夠接收相互間交錯(cuò)的聲音信息，由交互動(dòng)作產(chǎn)生的聲音信息具備動(dòng)作發(fā)出者的思維意識(shí)，以此為媒介實(shí)現(xiàn)情緒共通，即心理空間的共享。交互聲音將體驗(yàn)者之間串聯(lián)起來，在藝術(shù)空間中構(gòu)成一個(gè)復(fù)雜閉環(huán)，這個(gè)閉環(huán)內(nèi)的體驗(yàn)者能夠在保留自身獨(dú)到感受的同時(shí)，通過交互動(dòng)作與他人共情。

圖3 水粒子宇宙視覺效果

麥克盧漢認(rèn)為媒介是感官的延伸，而在講究多感官融合的新媒體藝術(shù)中，聲音傳遞人的感受，能夠在交互聲音信息傳遞過程中串聯(lián)不同體驗(yàn)主體的情緒。這就使數(shù)字藝術(shù)空間由單向感知情緒的形式轉(zhuǎn)變?yōu)樘N(yùn)含共享復(fù)雜情緒的藝術(shù)空間。《狼圖騰》聲音設(shè)計(jì)師王鋼認(rèn)為，聲音設(shè)計(jì)要盡量利用一切藝術(shù)創(chuàng)作手段避免聲音元素的循環(huán)和重復(fù)，最終讓觀眾聽起來每個(gè)場(chǎng)景都有它的“聲音情緒性”。人類的情緒是復(fù)雜多變的，自然情緒也是同樣。原本復(fù)雜的聲音信息通過感官接收形成情緒化場(chǎng)景，在交互過程中匯聚了新的交互聲音，升華了聲音信息的復(fù)雜性，使數(shù)字藝術(shù)作品在表意、表情的狀態(tài)上更具沉浸性。

對(duì)體驗(yàn)者來說，每個(gè)獨(dú)立個(gè)體都有其自身的社交網(wǎng)絡(luò)，數(shù)字聲音交互將復(fù)雜的社交行為的過程模糊化，將其保持在僅能感知作品或他人動(dòng)作的簡(jiǎn)單程度。通過交互行為，體驗(yàn)者能夠與藝術(shù)空間內(nèi)的任何人取得感知，體驗(yàn)并享受簡(jiǎn)化的人際交流過程，在心理空間上為已經(jīng)清晰立體化的情緒化場(chǎng)景拓寬邊界，“共情”的同時(shí)也在與他人共享心理空間。在如LINES這類并未過多強(qiáng)調(diào)視覺的藝術(shù)空間中，聲音的的各方面特性被襯托得尤為明顯。由于聲音元素的簡(jiǎn)單化，體驗(yàn)者的情緒場(chǎng)景主要由聲音交互行為構(gòu)成。簡(jiǎn)單的聲音元素?zé)o法構(gòu)成細(xì)致立體的心理空間，通過交互行為，體驗(yàn)者增添了聲音層次、音調(diào)、響度的變化，甚至利用物理空間的布置產(chǎn)生回聲，共同豐富了交互中的聲音元素。與水粒子宇宙的本質(zhì)不同在于，LINES的聲音元素完全由體驗(yàn)者自身創(chuàng)作與調(diào)控。在這種狀態(tài)下，聲音的交互性作為塑造心理空間、強(qiáng)化主體藝術(shù)空間體驗(yàn)的重要一環(huán)，直接將聽覺主體接收的聲音信息進(jìn)行整合規(guī)劃，有目的、有秩序地組成個(gè)性化的體驗(yàn)感知。

視覺效果的沉浸度可輔助聲音擴(kuò)展聲音信息的流動(dòng)范圍。而不同作品中聲音元素的復(fù)雜程度各有參差，對(duì)聲音元素細(xì)致的作品來說，情緒化場(chǎng)景的構(gòu)建以及獲得藝術(shù)空間的細(xì)致體驗(yàn)是一個(gè)兩步走的過程；對(duì)聲音元素簡(jiǎn)單的作品來說，這兩步即可融入交互行為內(nèi)，擁有更大干涉作品表現(xiàn)的權(quán)力。兩類數(shù)字藝術(shù)作品都能在聲音的情緒性和交互性的趨使下，使心理空間逐步細(xì)致化、立體化，在與感官體驗(yàn)的相輔相成中獲得更完善的藝術(shù)空間體驗(yàn)。

四、結(jié)語(yǔ)

在藝術(shù)空間體驗(yàn)中，聲音信息貫穿空間體驗(yàn)深入的全過程。由于對(duì)感官空間的不同表征手法，聲音信息從橫向擴(kuò)展感官空間，縱向深化心理空間，兩種流動(dòng)方向的交錯(cuò)構(gòu)成立體情緒化場(chǎng)景的雛形。根據(jù)數(shù)字藝術(shù)作品形式的差異，聲音元素不完全以既定的方式呈現(xiàn)給體驗(yàn)者。與創(chuàng)作手段相結(jié)合的聲音信息有著將感官空間與心理空間體驗(yàn)共同納入自身塑造范圍的潛力。但不論是何種呈現(xiàn)方式，設(shè)計(jì)者及體驗(yàn)者對(duì)聲音元素的共同調(diào)控能在豐富化、立體化心理空間的基礎(chǔ)上，為體驗(yàn)者提供綜合完善的藝術(shù)空間。

隨著數(shù)字技術(shù)的發(fā)展，聲音的存在形式愈發(fā)多樣，“共享空間”的理念充斥在各種類型的數(shù)字藝術(shù)作品中，而空間定義的多樣化也確定了共享方式的多樣化。體驗(yàn)者們借助聽覺空間共享聲音信息，借助心理空間共享情緒，在整個(gè)作品下共享藝術(shù)空間。交互是共享的手段，聲音將其內(nèi)容性、情緒性、交互性融入其中，為藝術(shù)化的聲音體驗(yàn)注入活力與真實(shí)。聲音藝術(shù)形式借助科學(xué)技術(shù)的發(fā)展不斷多樣化，以怎樣的手段在創(chuàng)作中調(diào)控聲音元素能最大效率地調(diào)動(dòng)體驗(yàn)者的情緒，是否有更多方式讓體驗(yàn)者加入聲音藝術(shù)的創(chuàng)作中，以及如何進(jìn)一步拉近物理空間與心理空間的距離，都是需要我們進(jìn)一步思考的內(nèi)容。聲音的各類特性在藝術(shù)空間的表達(dá)和塑造方面都有著至關(guān)重要的作用，有助于逐步推動(dòng)各空間層級(jí)的深入，對(duì)數(shù)字藝術(shù)設(shè)計(jì)的發(fā)展有著前瞻性作用。