跨感官感知的負向空間

方龍 劉佳郡

如同奶油的香味總是從烤面包中散發出來一樣，聲音一直都被視為視覺的陪伴，似陰影一般被視覺所仆役。錄音的出現打破了這一“常規”，把聲音與視覺分開，使聲音得以獲得一種獨立的物質性，而時間線軟件擴展了這一“自由”，使得原始錄音的速度、次序、音色可以隨意改變，并與各種影像巧妙組合。這種重新組合最開始應用于電影擬音當中以“還原”現實的聲音，后來被應用于影像空間的擴展，主要得益于電影較之其他藝術媒介更為靈活的跨感官特性。電影擁有更為靈活的跨感官特性，通過一個充滿混響的腳步聲，人腦得以構建一個安靜空曠的空間圖繪。

正是這一特性，讓電影視聽的重組更具張力與深意。通過對聲音客觀源起的拆解，使其有了更自由的表達空間，對畫面內容的擴展也更為靈活。這種因視覺與聲音的差異被大腦綜合出來的“附加價值”并不存在于真實的視聽感受中，而由藝術家喚醒，存在于觀眾頭腦的想象中。在此，以雕塑學中的“負向空間”隱喻這一自發的由差異喚起的“虛幻”。這個詞最早源于建筑學中的正負形概念，一定的形體占據一定的空間，其體積深度便具有了空間的含義。形體本身被稱為正形，其周圍的‘空白可稱為負形。[1]將負向空間的概念引入電影，比喻聲音與影像的錯位而產生的附加價值。

一、聲音源起與聲音空間

（一）源起模糊

聲音的“客觀源起”一直是學術界廣受爭議的話題，卡薩迪與多基奇曾對這一問題進行討論，并認為客觀源起經常是難以定位的。最為明顯的例子是人們常常難以定位一條溪流聲音的具體源起。水流在持續不斷地更新，而人耳聽到的水聲卻是不同定位水聲的無數次疊加。正如卡薩迪所言：“沿著溪流，其源頭漸趨在空間中沖淡。”[2]

用湯勺敲擊一只銅碗，那么什么是聲音的源起呢？就這個問題可能會有數十種答案，可以說是湯勺，也可以說是銅碗，甚至是人的手。李煜在《搗練子》中有過這樣的詞句：深院靜，小庭空，斷續寒砧斷續風。這首詞便是對聲音單獨源起思想的反駁，其中的“斷續寒砧”本指婦女的搗衣聲，一方面無法判定這搗衣聲是由寒砧還是搗衣的木棍發出，另一方面，由于其中婦女對征夫的思念，這“斷續寒砧”也有了客觀聲音本身之外的表象。

（二）時間線上的心理空間

現代之初，隨著時間線軟件的發展，時間和空間得以具象化呈現，連續的時間開始流離散化。法國哲學家貝爾納·斯蒂格勒指出：“時間線軟件作為將視覺流數碼式語法化的裝置，容許我們分析式的進入構成電影的各離散單位，注釋它們并重新安排它們。”[3]時間線軟件通過將影像與其所投射的聲音分離、重組，在銀幕內容與觀眾頭腦間激蕩出一種戲劇化的張力，這一由影像與聲音的差異所形成的聲音空間，不存在于人的視覺中，而由藝術家喚起，生成于觀眾的頭腦中。

二、通過感官的知覺

（一）聲音中的跨感官感知

跨感官感覺，特指來自某一感官的感覺可以通過其他感官到達知覺的現象。對現實世界的不同體驗的相關性和相似性構成了跨感官隱喻概念的心理體驗基礎。[4]感覺并非一個封閉于一個感官系統的整體，每一個感覺并不代表一個單一知覺領域，那些認為聽覺的感受僅僅來自耳朵的看法顯然是錯誤的。當人們來到一個大城市為那種生機與活力所震撼時，絕不會具體去區分，哪些感覺來自眼睛，或是耳朵，而是生成一個全面整體的印象。

（二）耳朵的視覺與眼睛的聽覺

電影可以給予比蘭波的十四行詩《元音》更豐富的跨感官感受。蘭波參照字母的讀音為其選定特定的色彩，將字母的聲音與視覺上的顏色結合起來（A黑，E白，I紅，O藍，U綠）。而電影則是一種真正的多感官互動。在一個視覺段落中，你可以為影像注入聲音所特有的感覺也可以為其注入視覺所特有的感覺。

在實際生活中，眼睛所產生的信息和感受只有一部分被認定是明確的視覺化的，即不可以通過聽覺表現的，如顏色，而多數信息橫跨不同的感官領域。同樣，耳朵所接受的信息也只有很小一部分被封閉于聽覺的單一系統中。“感覺并非孤立與分割的，它是一種通道和途徑而非轄區和領域。”[5]

三、“凹陷”的視聽與“多余”的幻覺

（一）“凹陷”的視聽

直到現在，視聽聯姻所造成的影像效果依然是聲音工作者思考的一部分，但這里不妨說這種效果同樣建立在缺失上。通過影像與聲音一方的懸置或兩者的不協調對位，增值再一次產生。例如，在一個影片段落中，“凹陷”的聲音指畫面所暗示的但不被聽到的聲音，這種懸置增添懸念與戲劇性。在一個視覺場景中，知覺總是自動假定其背景聲的存在，懸置將背景音中斷，除去環境音的部分，而其源起依然繼續出現在觀眾的視覺范圍內。這樣的處理往往會產生一種神秘的、威脅性的暗示，亦或超現實效果。在《卡比利亞之夜》中，費里尼展示了一片風景如畫的樹林，觀眾可以看到林中徘徊的鳥，卻聽不到任何鳥叫聲，正是這樣的處理，為劇中男人將女孩帶到懸崖邊最終殺死她埋下了伏筆。而視聽對位的不協調指的是聲音不指向其表現對象的現象。

（二）幻象的“負空間”

在電影中，聲音通過其附加價值將活力賦予特定的視覺細節，在銀幕上給視覺以可觸及的真實感。而這種所謂的真實感，在事實上，只存在于觀眾的心理維度，僅僅作為一種由視聽的分離重組所產生的“幻象”，在此，這一幻像可被形象地喻為“負向空間”。

聲音與影像的錯位所產生的張力，提供了與雙眼物理距離所產生的差異相似的張力。兩厘米的間隙讓雙眼產生兩個相似但不相同的影像，而大腦不滿足于這種近似性的二元性。通過向兩個平面影像添加純心理的三維性，將兩個相似影像合為一個。而事實上，這個由大腦通過想象合成的影像不存在于任何一只眼的視覺中，而是其為了解決二者差異添加進來的，僅作為一種幻想或負向空間存在。在電影中，以相似的方式，大腦融合錯位影像與聲音的努力，使得其在銀幕上投射出一個純心理影像，人眼似乎看到了一些東西，但它只存在于我們的大腦而非視覺感受中。

在《于洛先生的假期》中，海灘上是疲憊的休假的人們，可聲音卻展示了歡樂美好的信息。影像中的角色很煩惱，而處于聽覺中的人們卻是高興的。這兩種相異信息通過同步整合的疊加，反饋給大腦一種歡快的度假人群的印象，而這個印象便是上面所提及的“負向空間”，這一隱喻的出現可以形象地展現視聽聯姻所產生的附加價值。

（三）負空間的附加價值及其生成效果

正如影子是身體的投射，在聽覺中，人們往往將聲音定義為影像自然而然的投射。影像總是注意力有意識的聚焦點，而聲音則為影像提供了效果、感覺和意義方面的增值。看起來聲音總是自然地從影像中“發散”出來，如同泡菜的味道總伴隨陶罐的開啟。

視覺與聽覺的聯合所產生的附加效果并不僅限于聽覺對視覺的增值，在那些知覺有意識的投注于聽覺的情況下，視覺也會給予聽覺同樣的增值。附加價值這種信息或表達“自然”地來自我們所看到的，已經融入了影像本身。[6]

視聽的聯合并非兩個類似或相反元素的簡單相加，而是一種一加一大于二的效果，二者的聯合產生了一些全然不同的、全新的東西，這些東西可以姑且稱為附加價值。較為普遍的情況是，當一個聲音為影像附加一個意義，人們總是下意識地認為這個意義本身便來自影像，產生一種一切都是看到的印象，而實際上人們是既看到也聽到。這一普遍現象對感覺主體來說是無意識產生的，只有當視覺與聽覺的混合被拆解開，對二者進行隔離觀察，才能最終發現聲音是如何影響人們所看到的東西。

視聽聯姻的生成效果可分為描繪、對比、擴張、時間化四種。

描繪涉及聲音的表現而非復制。在這里，聲音被作為一種描繪的手段，而非客觀源起的簡單復制，這得益于聲音源起模糊的靈活性。這種視聽聯合中，聲音并不指向影像的來源，不作為某個物體的代言詞，而表現一種特征或情感。比較常見的如影視作品中刀劍的“吁吁”聲、蠟燭的燃燒聲、拳頭揮舞的聲音等。它表現一種力度或構成物的質感，賦予影像一種視覺所不能傳達的知覺與印象。

視聽距離的對比建立在同步整合的基礎上。同步整合是一種自發的、反射的心理生理反應，它為完全不相關的聲音與影像的接合提供了可能。在《愛情神話》中，費里尼運用了相反的手法，將一個空無一人或人物偏離中心位置的遠景畫面配以一個近乎夢囈的聲音，這些人物和發出聲音的身體似乎并不在同一距離下，其聲音似乎是侵入的、耳語的，猶如在夢中。

擴張在電影中表現為聽覺系統對視覺的擴充，它為視覺構建一個更加寬廣的心理印象。在影片中，當所聽到的聲音僅僅是從影像所給定的封閉空間發出時，擴張便會受到限制。相反，當畫面中一個主人公的書房，加入畫外街道或鄰近住宅的聲音時，知覺將呈現一個更加自由、開放和豐富的空間。

聲音亦可在心理上縮短或延長影像在觀眾知覺上的長度。影片《馬布斯博士的遺囑》中，當鏡頭跟隨主人公的視線掃過陳列舊物的地窖，假如沒有聲音，這個探索的過程伴隨的等待將使影像顯得冗長而無聊。此外，聲音亦可作為一條單獨的時間流逝線構成敘事的一部分。

附加價值指向富于表現力和信息量的內容，有了這些生成效果，聲音不僅可以在電影中充實一個個給定的影像，甚至能夠沖破畫框和時空的限制，產生“超敘事空間”，構建出一個全新的敘事框架。[7]

結語

最好的聲音不僅改變觀眾看到的，更應該進一步激發影像與聲音間的共鳴。在此，引用好萊塢剪輯大師沃爾特·默奇的一句話結束本文：“總有某些關于聲音的東西繞過我們，使我們驚詫，而我們必定永遠不能完全地馴服那舞動的陰影和歌唱的靈魂。”[8]

參考文獻：

[1]孫彤輝.平面構成[M].湖北：湖北美術出版社，2009.

[2]米歇爾·希翁.聲音[M].張艾弓，譯.北京：北京大學出版社，2013：147.

[3]貝爾納·斯蒂格勒.人類紀里的藝術[M].陸興華，許煜，譯.重慶：重慶大學出版社，2016：100.

[4]石琳.體驗哲學對通感隱喻認知基礎的解釋[J].長沙理工大學學報（社會科學版），2013（03）：100-104.

[5]米歇爾·希翁.視聽：幻覺的構建[M].黃英俠，譯.北京：聯合出版公司，2014：122.

[6]米歇爾·西昂，孫暉.影像中的聲音投射[J].電影藝術，2012（03）：90-97.

[7]劉盈.論聲音對影視敘事空間的塑造和延展作用[J].當代電視，2015（04）：62-63.

[8]米歇爾·希翁.視聽：幻覺的構建[M]//沃爾特·默奇.推薦序：拜訪聲音女王.北京：聯合出版公司，2014：25.