VR應用于舞臺空間與觀演體驗創新研究

■王 琛，謝 欣 Wang Chen &Xie Xin

(1.華南理工大學設計學院，廣東廣州 510006；2.哈爾濱工業大學人文與社會科學學院，廣東深圳 518055）

千百年來，演藝一直是人類社會不可或缺的消閑活動。作為舞臺藝術的集大成者，戲劇堪稱眾多演藝活動中發展最完善的一種形式。舞臺設計是戲劇空間的創造者，空間是舞臺設計的對象。由于需要在原本“空的空間”中創造出多時空戲劇場景，為演員的表演與動作提供支點，實現空間、時間與動作的綜合，因而相比其他空間類型而言，舞臺所涉及到的技術更顯前衛復雜、綜合集成。縱觀戲劇藝術發展的不同階段，舞臺空間的觀念、表現形式與設計方法，每一次重要變革都與當時所采用的新技術密不可分，觀演體驗也隨之不斷推陳出新。進入二十一世紀，舞臺空間中開始融入更多的數字化技術元素和觀念，其中又以VR（Virtual Reality,虛擬現實技術）最具革新性，迅速成為戲劇、舞蹈等藝術領域研究與演藝行業應用的熱點與前沿。

1 舞臺空間中的VR應用

1.1 VR應用于舞臺空間的溯源

VR采用以計算機為核心的相關技術，在一定范圍內生成與真實環境在視、聽、觸等感官方面高度近似的數字化環境，或稱虛擬環境（Virtual Environment,VE）[1]。20世紀90年代初，少數具有跨藝術與技術專業背景的藝術家或機構敏銳地嗅探到VR這一原本應用于軍工領域的技術，率先嘗試將其應用于新媒體藝術創作。1992年至1994年期間，在加拿大班芙藝術中心（Banff Centre），由計算機科學家與藝術家合作，開創性地完成了一系列將真人表演與計算機虛擬環境相結合的新媒體藝術作品，包括《占位符》（Placeholder）、《滲透》（Osmose）、《與虛擬苦行僧共舞：虛擬身體》（Dancing with The Virtual Dervish:Virtual Bodies）等，這些作品中的舞臺空間不僅為參與者營造出高度的沉浸式體驗，還為其身體與虛擬環境之間的復雜交互提供了可能。同一時期，美國堪薩斯大學（University of Kansas）虛擬現實探索研究所（The Institute for the Exploration of Virtual Realities，簡稱i.e.VR）也開始了VR及其衍生技術在戲劇制作和表演中的應用研究，其代表作品《加法機》（The Adding Machine）（1995）被公認為第一部使用實時的、VR布景的戲劇現場表演作品。

總體而言，在初始階段，VR在舞臺空間中的應用十分有限，究其原因，主要受限于昂貴的技術裝備、不菲的資金投入、跨專業的專家團隊協作等。近年來，VR從尖端科學領域“降檻”成為大眾化的傳播媒介，特別是在被稱作“VR元年”的2016年前后，VR在娛樂、教育等民用領域中得到廣泛地推廣和應用，在戲劇、舞蹈等表演舞臺空間中的應用也逐漸增多。

1.2 VR應用于舞臺空間的發展現狀

VR及其衍生技術應用于舞臺空間可創造虛實程度不同的戲劇場景，演員與觀眾沉浸其中并通過身體與數字場景發生實時交互，也產生與以往迥異的觀演體驗方式。

1.2.1 虛擬現實舞臺空間

VR包括立體頭盔（Head-Mounted Display,HMD）與大型沉浸（或半沉浸）式投影型系統兩種圖形顯示方式[2]，分別與舞臺空間結合產生兩類不同的觀演體驗方式。

①HMD。在場或不在場觀眾通過HMD與互聯網，獲得近距離、多視角、可交互的觀演體驗。從VR內容上劃分，一是由計算機生成一個完全虛擬的舞臺空間以演繹戲劇內容，班芙藝術中心1992年至1994年期間創作的表演與虛擬環境結合的系列作品基本都屬于此類；二是全景化錄制真實劇場中的演出，以直播或錄播的方式呈現，觀眾使用HMD觀賞。例如，非在場觀眾可以通過Jaunt VR多視點觀看百老匯《獅子王》（The Lion King）（2015），包括站在演員中間去觀賞舞臺演出。

②大型沉浸式投影。將360°三維圖像投影在舞臺屏幕或物理對象上作為全景布景，并可與身體發生交互，觀眾裸眼或借助偏振眼鏡進行觀賞。筆者設計的哈工大（深圳）機器人表演數字小劇場中，將VR-CAVE系統（Computer Automatic Virtual Environment，俗稱“洞穴”）與舞臺三維空間整體結合，實現一種裸眼觀賞的沉浸交互式虛擬現實舞臺空間，營造出“人在畫中游”、步移景異的觀演體驗（圖1）。

■圖1 哈工大（深圳）機器人表演數字小劇場

1.2.2 混合現實舞臺空間

VR衍生出的AR（Augmented Reality，增強現實技術）將由計算機生成的虛擬信息實時準確地疊加到真實舞臺空間中，可增強現實環境效果，構造出介于完全現實與完全虛擬之間的一種混合現實舞臺空間。相比虛擬現實舞臺，其優勢在于觀眾不必佩戴沉重的VR設備，或者被迫進入一個由計算機生成的封閉空間，演員和觀眾定位更加容易，同時依然允許在新的行為領域間進行交互[3]。AR包括透視式HMD（AR眼鏡）、手持顯示與投影顯示三種圖形顯示方式，他們分別將虛擬數字場景信息在近觀眾端或近舞臺端呈現并與舞臺實體場景疊加，產生兩類混合現實舞臺空間及相應的觀演體驗方式。

①觀眾端混合現實。虛擬信息在觀眾佩戴的透視式HMD或手持顯示屏中呈現，同時與舞臺現實場景匹配疊加。例如在《翅膀》（Wings）（1996）中，觀眾通過透視式HMD既可以看到舞臺上的演員演出，也可看到HMD中展現角色內心世界的虛擬圖像，觀眾耳機中的聲音與現場聲同步混合（圖2）。在《仙蹤元素》（Elements of OZ）（2017）中，觀眾可通過移動終端APP看到虛擬成像與舞臺空間實景的疊加效果（圖3）。

■圖2 《翅膀》透視式HMD中的場景

■圖3 《仙蹤元素》觀演方式

②舞臺端混合現實。在實體舞臺空間中，將計算機生成的虛擬信息直接投影到真實場景物體上，為舞臺空間提供立體布景、虛擬角色或道具等場景環境要素。例如在《魔笛》（The Magic Flute）（2003）中，投影屏圍繞著舞臺表演區，將整部歌劇置于虛擬環境之中，“龍”是其中的虛擬角色（圖4）。

■圖4 《魔笛》混合現實舞臺場景

2 舞臺空間與虛擬環境的本體同一性

盡管基于計算機技術的VR概念直到上世紀80年代方才正式出現，但人類對虛擬環境的追求由來已久。在藝術領域，人們從未停止過對其基本幻象的塑造，而這種基本幻象實際上就是藝術的本質特征所在[4]。正如新媒體藝術家黛安·格羅瑪拉（Diane Gromala）所說，“VR的歷史先例可以追溯到通過儀式、模型、藝術、文學和戲劇的虛擬仿真建立起來的虛幻世界……喚起和感知一個共享的但另外一個世俗的地方，在其中人類可以延伸和投射他們的代理”[5]。在戲劇觀演中，演員通過想象與觀眾“合謀”，讓觀眾萌生出“自愿暫時停止懷疑”的共鳴，一處空蕩蕩的舞臺因此成為戲劇中角色生活的場景。可以說，無關乎技術的介入程度，舞臺空間本質上都是一種虛擬環境。從更廣泛意義上討論，VR創造虛擬環境的方法與戲劇藝術相似，都是通過模擬、虛擬來再現與表現生活的意義。

蘇珊·朗格（Susanne K.Langer）認為，“舞臺無論有無描述性布景，都為虛構的動作提供了一個‘天地’，由于要把一個布景變成一個‘場所’，舞臺設計往往創造出一種造型幻象”[6]。舞臺設計在某種程度上可以混淆戲劇場景與現實世界的界限，使觀眾沉浸在由演員和舞臺空間構成的戲劇世界之中。文學劇本中形形色色的故事場景首先會出現在舞臺設計者的想象之中，舞臺設計者進而將文學劇本中的戲劇性“有形化”，使之成為觀眾可直接感受到的景象。廣義而言，舞臺空間中所涉及到的布景、道具、機械、燈光、投影等元素，都可作為實現戲劇性“有形化”，在舞臺空間中構建虛擬環境的技術工具。以布景為例，從古希臘的景屋、景片、三棱柱旋轉布景，到中世紀的景觀站、同臺多景，再到文藝復興時期平面、側片構成的布景體系與其鏡框式舞臺，直至當下的投影、視頻、VR等新媒體技術的應用，我們會發現，盡管布景的形式在不斷變化演繹，但其作為舞臺空間中虛擬環境構建的功能卻始終如一。

3 VR創新觀演體驗的目標訴求

藝術家的創造欲望即創造第二現實的欲望會受到媒介手段毫不留情的限制[7]。現有技術條件下，鏡框式舞臺、布景體系仍然是舞臺空間創造虛擬環境最為有效的技術手段，而這種人造幻象又不得不將觀眾隔絕、排斥在舞臺空間之外。在當今廣泛使用的鏡框式舞臺劇場中，觀（觀眾區）、演（表演區）空間涇渭分明，演員與觀眾的直接交流被舞臺前的“第四堵墻”打斷，舞臺空間成為純粹愉悅觀眾眼睛的工具，舞臺設計長期以來被桎梏在“創建人造真實”觀念中。戲劇體驗的核心是演員——觀眾的關系，一種即時的、個人化的交流，他們之間互通的化學反應與魔力賦予戲劇特殊的品質[8]。為了抗衡將戲劇故事囿于鏡框式舞臺，切斷觀眾席與舞臺之間關系的近代寫實戲劇及映像藝術的進攻，現代新戲劇所努力追求的，無非就是用演員與觀眾之間生機勃勃的直接交流來恢復其創造性的時間及空間體驗[9]。

“體驗”作為人的基本生命活動，帶有“以身體之，以心驗之”的含義。觀演體驗包括直接觀察與親身經歷兩個不同深度層次。現象學家莫里斯·梅洛-龐蒂（Maurice Merleau-Ponty）突破西方傳統哲學中以笛卡爾為代表的身心二元論并提出“具身主體性”（Embodied Subjectivity），承認人類對世界的認識是以身體為中介，通過身體的知覺與整個世界發生關系。心理學界發展了“具身”思想并形成“具身認知”(Embodied Cognition)理論，明確以身心一體論為基礎，強調并闡釋了身體與環境的相互作用及其在認知過程中的作用[10]。據此理論，鏡框式舞臺前靜坐觀演，觀眾身體與表演舞臺脫離，以“離身認知”的方式在舞臺技術手段構建的虛擬環境之外，通過視聽獲取并處理信息，屬于一種直接觀察式的、“身心二分”的淺層觀演體驗。若要實現“身心合一”的深層觀演體驗，則需要使演員與觀眾共同地以“具身認知”的方式親身經歷戲劇空間，彼此之間無縫交流。

VR的構想性（Imagination）技術特點，以非物質、低成本、高效率的數字化手段，可在舞臺空間中為戲劇演出模擬出兼具現實與超現實、寫實與抽象的虛擬場景環境。然而，如果僅停留在對三維視覺效果模擬與呈現層面討論，那么VR便只是繼繪畫、投影、視頻之后，舞臺布景的一種新材料、新媒介而已，觀演不僅仍然停留在身心二分式淺層體驗，而且舞臺空間中切斷演員觀眾直接交流的“第四堵墻”依舊存在。因此，觀演體驗若要實現創新式發展，VR在舞臺空間中的應用必須謀求更為開闊的思路。為此，VR需要積極調動構想性之外的另外兩項技術特點——沉浸感（Immersion）與交互性（Interaction），從模擬對象跨越至模擬體驗（圖5）。

■圖5 VR創新觀演體驗的途徑

4 VR創新觀演體驗的實現途徑

4.1 親身參與的深層觀演體驗

媒介理論家馬歇爾·麥克盧漢（Marshall McLuhan）認為，“人類正在逼近人類延伸的最后一個階段，即從技術上模擬意識階段”[11]。隨著計算機圖像、音頻素材的分析能力的提升，根據用戶個性化需求，自動大規模生產在視、聽、力、觸、體等方面與真實世界類似的VR內容，已經不再是天方夜譚[12]。通過對全感官沉浸與多通道交互功能的開發運用，VR使演員與觀眾可以憑借“身體”積極地參與到戲劇場景中，產生親身經歷戲劇空間的主觀感受，獲得“身心合一”的深層觀演體驗。全感官沉浸是指通過“欺騙”身體的視、聽、嗅、味、觸等多種器官，給人帶來身臨其境、真假難辨的真實感、臨在感。演員和觀眾以身體多感官協同的方式，沉浸于虛擬環境之中，身心以開放的狀態全面地凝視、傾聽與感知戲劇世界的環境信息。多通道交互是指，在虛擬環境中為演員與觀眾提供人性化的操作界面，模擬出人與真實環境的自然反饋過程，包括使用、參與、操縱，通過對身體的動作、表情、語言、聲音及其他可測生理信號的捕捉、計算與轉化，VR可實現周身與虛擬環境之間主動、實時的、近乎自然的交互。如此，虛擬環境不僅是活性的和可視化的，而且可被再造和重組，增減和轉換。當虛擬環境與參與主體的行為活動緊密聯系，成為他們身體活動實際指涉的客體，虛擬環境也同時通過從其與主體行為的相互作用中被把握，便作為角色所生活的想象世界而存在，進一步強化參與主體對戲劇空間的相關感受。

在該途徑的實踐探索方面，班芙藝術中心早期作品《滲透》做出了開創性貢獻。該作品的革新意義在于，通過使用復雜的數據衣“讀取”包括用戶呼吸在內的多種身體信息，引發虛擬場景中自然要素的生長變化，既增強了沉浸感，也契合了作品有機的、自然的體驗感知主題（圖6）。哈工大（深圳）數字小劇場首演話劇《來到深圳的豆芽菜》（2018）中，演員與觀眾置身于相同的戲劇時空場景之中，光學傳感器實時追蹤身體的動態細微變化，轉化為實時連接傳輸的數據，再經過交叉演算，并配合音樂、燈光驅動全景場景實時變化（圖7）。

■圖6 《滲透》觀演方式

■圖7 《來到深圳的豆芽菜》交互式全景場景

4.2 觀演雙方感官意識的互聯互通

從物理意義上打破舞臺空間中的第四堵墻，使演員與觀眾共同置身于相同的戲劇時空中，但這并非等同于演員、觀眾彼此之間自動完成了無縫的溝通交流。演員所扮演角色在戲劇時空中的感知體驗、內心世界和情感變遷，即戲劇體驗最核心、最具魅力的部分，觀眾依舊難以感知。換言之，演員與觀眾心理上的“第四堵墻”依然存在。開創時期的VR新媒體藝術實驗，盡管受限于當時技術設備條件，但其創作理念日久彌新。《溝通機》（Inter Discommunication Machine）(1993)使用了一款兩人參與的VR新媒體裝置，兩位參與者的HMD可以將其對虛擬游樂場的視覺和聲音感知相互投射，從而混淆了“你”和“我”之間的界限，力求使用者可體驗彼此之間的身體感知。《機械》（Machinal）原作運用了表現主義形式，注重表現角色內心的感受。在其2000年VR版中，舞臺布景可隨著演員的移動與動作發生主動的、實時的改變，既在視覺上強調了年輕女性所面對的外部嘈雜的日常生活環境，也清晰地展現出她內心躁動不安的情緒。

此后，觀演感官意識的互聯互通成為VR新媒體與舞臺實驗一直以來的主題與探索方向。一方面，VR作為觀眾身體感官的延伸。觀眾真實地感知、參與虛擬場景的同時，用角色的視角感知、體驗一切，獲得與演員一致的生理感受；另一方面，VR作為演員表演的延伸。演員的心靈與認知不僅發生在腦內，也可通過表演中的動作、表情、語言等身體生理體征與環境物理現象建立耦合系統，擴展身體語言，彰顯內心世界，傳達并感染觀眾。在這種觀演雙方感官意識的互聯互通中，戲劇體驗的核心——演員與觀眾間的無縫交流變為可能。《最后一眼》(Les Falaises de V.)（2018）中，在場觀眾全程在病床上佩戴HMD觀賞，嘗試通過帶入第一人稱視角，體驗身體和情感的變化（圖8）。

■圖8 《最后一眼》觀演方式與HMD中的場景

在互聯網、身體傳感、遙在等各種新興技術的協同支持下，VR及其衍生技術將身體感知能力向超越身體視域的空間擴展，在場或不在場觀眾能夠與不同時空中的角色互動交流、彼此影響，極大突破了戲劇觀演體驗的物理空間限制[13]。與此同時，還需要予以特別注意的是，盡管舞臺空間發展出完全虛擬的電子空間形態，但戲劇體驗的核心和魅力——演員與觀眾之間勃勃生機的交流依舊存在。

5 結語

VR應用于舞臺空間與現場表演方興未艾，其觀演形式多種多樣。剝去形式的外衣，從舞臺空間的本質與戲劇體驗的核心出發確立觀演體驗的創新方向，即從“身心分離”式淺層體驗向“身心合一”式深層體驗更迭，演員與觀眾之間的無縫交流。為此，VR應用于舞臺空間需要從模擬對象跨越至模擬體驗，使演員與觀眾憑借全感官沉浸與多通道交互共同地親身經歷戲劇時空，通過感官意識的互聯互通彼此之間無縫交流。基于本文所探究的邏輯方法，舞臺空間將有望從物理與心理上徹底推翻以往為制造虛擬幻境阻隔于演員與觀眾之間的“第四堵墻”，向時空相容、體驗共享、生理共振與精神共鳴的觀演體驗創新邁進。