基于多感官體驗的新媒體交互藝術

王超

摘 要：在數字媒體時代的語境下，數字技術與藝術的聯姻誕生了新媒體藝術這個時代寵兒。作為新媒體藝術分支之一的交互藝術改變了傳統媒體的線性秩序敘事方式，強調觀眾參與的積極性和能動性，通過視、聽、觸、嗅等多感官手段的結合建立起新的認知體驗，實現即時交互以達到全身心的融入、沉浸和交流。

關鍵詞：交互;多感官;參與度 ;體驗;沉浸感

藝術從本質上講是一種信息傳達和情感交流的活動。交互藝術作為新興的一門新媒體藝術形式， 特指觀眾能夠通過視、聽、觸、嗅等感覺手段和智能化技術使藝術作品實現即時交互，得到多感官的沉浸式體驗。

1 “互動”到“交互”的延展

“互動”原為社會學概念，自20世紀60年代以來成為計算機領域的專有名詞，譯為參與活動的對象根據相應的指令后而相應地做出反應的過程及行為。而“交互”也被認定為新媒體藝術的核心和靈魂。

“互動”是人與世界、自然，以及一切事物進行交互活動的一個過程，人類是地球上最具交互性的動物。在我們與他人面對面時，用視覺的、聽覺的、嗅覺的、觸摸的方式從對方吸收各種不同信息，再經消化反饋給對方。

在新媒體交互藝術領域，“交互”的意思就是通過多感官和動覺紐帶，在觀賞者和藝術作品之間建立聯結，從而使觀賞者能夠參與到作品當中，與藝術作品甚至創作者雙向交流，并能從作品中得到愉悅和共鳴。交互的目標是要依靠交互技術達到人和虛擬對象自然和諧、即時雙向的交流方式，引導用戶更好地認知所要傳達的信息并且做出反饋。交互技術融合了多感官體驗，將我們對圖像的理解轉變為一個基于時間空間框架的多感官交互空間。在這樣的虛擬空間中，環境也會與人產生互動，觀眾還可以在某種程度內調整他們所發現的環境，營造最強的沉浸感。

交互藝術是以人機相互作用為基礎的藝術形式，它強調人與機器之間的相互影響，交互藝術還強調觀眾的積極性和能動性，它要求觀眾參與到作品中來并通過這種互動使作品本身發生可逆或不可逆的變化， 從而產生實時的、可變的藝術效果。

2 交互藝術的特性——基于感官的輸入輸出

交互藝術作品需要經過“連結”、“融入”、“互動”、“轉化”、“初入”五個階段實現。羅伊·阿斯柯特認為新媒體藝術最鮮明的特征是它的“連結性”與 “互動性”。“互動”或者說“交互”過程是參與對象之間的信息交流過程，其目的是實現某一特定的目標。觀眾或者說“人”的介入和參與是互動藝術不可分割的一部分，觀眾角色被賦予了新的、積極的意義，“參與度”和“沉浸感”成為互動藝術的重要衡量標準。

互動藝術家探索如何能夠調動人類的五大感官、動作和姿態借助于既有的技術資源從而使之主動、深度參與互動中來。其通常的形式是通過數字攝像頭、遙控器、紅外線感應等多種采集工具將觀眾的語言、表情、動作或其他肢體語言進行捕捉和數據分析，并根據計算機的程序處理，通過聲音、圖像、音樂、光線、數字視頻、動畫和機械互動裝置等給觀眾反饋信息，完成與觀眾即時的對話或情感交流。觸發形式往往多是聲音、觸合成摸或動態動作。如上海世博會德國館動力之源大廳的互動金屬球，金屬球的基座設有聲控及互動控制裝置，能夠對外來聲音產生反應，只要金屬球頂部的基座接收到輕微的震動，就能將懸掛于其下的金屬球帶入擺動狀態。當觀眾齊聲高喊時，球內的聲控驅動裝置就能夠左右金屬球擺動的方向，球體表面上不斷變化的影像和色彩也隨之投映至大廳。這種以聲音觸發的虛擬現實技術為沉浸式交互藝術的發展體。

圖1上海世博會德國館動力之源大廳的互動金屬球

在交互設計中，通過感官獲得的感知體驗也顯得尤為重要。卡納基梅隆大學設計學院前任院長 Dan Boyarski曾說過，交互的目標是用戶來體驗，使用者有良好的體驗。而“交互藝術”借助虛擬現實技術、 三維實境技術、多通道交互技術或機械數控裝置打 造出用戶體驗的“沉浸”環境。但它是理解媒介發展的一個關鍵詞匯。沉浸是指精神的全神貫注，是一種精神狀態到另一種精神狀態的發展、變化和過渡的過程，增加對當前事件的情感投入。

沉浸式交互藝術作品主要是在藝術場館、博物館、公共空間中展。這種藝術作品通過計算機捕捉人的多種感覺（如言語、眼神、臉部表情唇動、觸 覺、嗅覺或味覺等）和動作通道（如語音、手寫、 姿勢、 視線、表情等），并實現即時反饋， 而觀眾則以并行或非精確的方式 “沉浸”于虛擬計算機交互環境中。沉浸式交互作品通常需要一個“相對封閉式的交互藝術空間”或“虛擬展廳”來實現觀眾的沉浸體驗。此外也有利于電子屏幕、聲光電效果或其他模擬自然環境的效果干擾地反饋給觀眾，由此達到最佳的用戶體驗效果。上海世博會沙特館（圖2） 就是一個懸浮在空中的封閉球面體，享受720度空間多媒體視聽盛宴。封閉的空間內四周布滿美輪美奐的畫面，就連腳底都有壯觀的影像。達到了沉浸式全面面影像，懸浮體驗”的夢幻效果。

圖2上海世博會沙特館

沉浸式交互藝術作品的反饋形式通常有直接反饋和間接反饋兩種：間接反饋型的交互藝術通過“環境交互”的方式使觀眾與作品進行接觸和交互，觀眾對環境的沉浸體驗是這些作品構成的重要因素。其交互作品對參與者行為的反饋為間接的、環繞式的或“滯后”的。有的交互作品并不需要觀眾的直接接觸，而是通過“探測”的方式與觀眾進行“互動”。中國藝術家黃石、李敬峰創作的《空窗子》是通過分析觀眾腦電波來實現互動的藝術裝置。如眨眼時竹葉落下。觀眾的注意力集中程度、眨眼頻率也會對畫面產生影響。直接反饋使觀眾通過較直接方式與作品進行接觸和互動， 對周圍環境的依賴相對較小，其接觸方式包括控制桿、遙控器、 語言、手勢或肢體動作。如上海世博會園區內加拿大館的“輪轉之都”觀眾腳蹬自行車前方屏幕上將不斷變換的城市風景中穿越。這些交互作品普遍強調觀眾的“接觸”行為并可以直接體驗到互動的結果。這些互動作品充分調動觀眾的多感覺通道，普遍強調觀眾的體驗行為， 并在沉浸環境中體驗到互動的藝術結果。

3 交互藝術在現實中的應用

互動藝術已逐漸走出藝術與科技的象牙塔， 滲透、參與到現實生活中的方方面面。現如今，在廣告與品牌營銷領域中、在互動游戲裝置中、在各類展覽會當中都不難捕捉到互動藝術裝置的身影，它以獨特的趣味性與互動性吸引著公眾的注意力，帶給人們特有的驚喜。

凌仕機場互動廣告，廣告凌仕香水在倫敦維多利亞機場里上演了與天使邂逅相逢的場面。 借助AR增強現實技術只要站在天使翅膀形狀的標識物中，程序便可以檢測到，從而觸發播放特效，預先攝制好的美女模特扮演的天使就從天而降，并可以根據觀者的肢體動作做出相應的交互。

IKEA（宜家）是當今時代令人人眩目的商業奇跡之一。宜家采用“生動化營銷”的方式。宜家把各種配套產品進行家居組合，以充分展現每種產品的現場效果。為了使樣板間更加的生動，宜家 極富創意地在床墊上放置互動裝置，該裝置是用投影機在床墊上投下一個熟睡的男主人影像 ，他以一種熟睡的姿態睡覺，仿佛這里不是宜家的樣板間而是走進了剛剛裝修好的房間。當你用手拍拍床墊的時候，男主人將會翻身。攝像頭用來捕捉客人的動作，然后軟件處理視頻的變化。這一互動裝置制造強烈的真實情境還原，給觀眾一種體驗上的沉浸感。

4 結語

隨著虛擬現實技術和多通道交互技術的進一步發展，沉浸式交互藝術將以更加自然、和諧的交互方式、更新穎的藝術表現形式，拓展人人類感官的體驗，多維度的感知，互動設計使我們的感官得到更加全面。互動設計將是人們感官體驗釋放的加速器，它的逐漸完善必然會使得觀眾的愉悅、奇想、 領悟、發現的過程更加生動。

參考文獻：

[1] 羅一平.走出“獨語”狀態[J].美術觀察.2005（06）：5-7.

[2] 段運冬.新媒體藝術的語言品格探察[J].裝飾.2004（12）：24.

[3] 范迪安.從媒體變革到文化視線——在中國當代藝術研討會開幕式上的講話[J].美術研究.2002（03）：66.

[4] 張烈.虛擬體驗設計的基本原則[J].裝飾.2008（09）：86-88.

[5]楊國杰.論現代博物館職能演化的進程[J].中山大學學報論叢.2007

（08）：181-184.

[6] 桑瑞娟，李亞軍.源于感官的體驗設計[J].鄭州輕工業學院學報： 社會科學版.2005（06）：38-40.

[7] 徐偉峰，付永民.利用感性工學原理設計產品造型[J].焦作工學院學報： 自然科學版.2003（05）：406-409.

[8] 榮國棟，孟祥旭.Inspeck 3D-DF三維掃描儀在數字博物館中的應用[J].計算機工程與應用.2002（16）：237-239.

[9] 李紅霞.基于網絡的虛擬三維環境中人機交互功能的實現[J].微型機與應用.2002（04）：58-60.

[10]徐麗.藝術設計專業技能創新性實踐與研究—"星元素"視覺工作室實踐開展紀實[J].工業設計.2015（5）：141-142.

[11]李文杰."大空間"與設計的敘事性[J].工業設計.2015（6）：101-102.

[12]李蕩.復合材料設計的回顧與方向[J].工業設計.2015（8）：53-54 .

[13]楊曉荷.基于組織創新法的鏟式擔架的創新設計[J].工業設計.

2015（2）：100-102.

[14]王靜.淺談中國民俗文化對現代藝術設計的影響[J].工業設計.

2015（4）：69-70.

[15]趙立石.多維度理念下的城市視覺形象設計研究[J].工業設計.

2015（2）：86-89.