互動媒體京劇《真假美猴王》實(shí)驗(yàn)短片的藝術(shù)表現(xiàn)研究

摘要：互動媒體京劇《真假美猴王》實(shí)驗(yàn)短片集合了沉浸式虛擬場景、增強(qiáng)現(xiàn)實(shí)特效、同虛擬人物實(shí)時(shí)交互表演等綜合技術(shù)運(yùn)用場景，為了解、欣賞、體驗(yàn)戲曲提供了更多的可能。基于此，本文探索傳統(tǒng)藝術(shù)與現(xiàn)代科技結(jié)合以增強(qiáng)藝術(shù)生命力的意義及其未來價(jià)值。

關(guān)鍵詞：互動媒體技術(shù);AR技術(shù);京劇;《真假美猴王》

互動媒體技術(shù)最早被應(yīng)用于游戲、軍事、醫(yī)學(xué)等實(shí)用領(lǐng)域，涉及演藝領(lǐng)域時(shí)，受人追捧的影視、歌舞類大型表演首先受到影響，但這僅是一個(gè)開始。近年來，互動媒體技術(shù)更是在話劇、戲曲等傳統(tǒng)表演藝術(shù)形式中不斷拓展。然而，傳統(tǒng)表演形式極高的程式化、規(guī)范化的特點(diǎn)，反而成了與這些科技結(jié)合的限制，因此結(jié)合顯得尤為困難，甚至牽強(qiáng)，所以局部或小范圍的嘗試很有必要，而京劇《真假美猴王》實(shí)驗(yàn)短片正是基于這樣的思考產(chǎn)生的一部實(shí)驗(yàn)作品。

1 京劇《真假美猴王》實(shí)驗(yàn)短片的設(shè)計(jì)主旨

2020年可以說是互動媒體技術(shù)在舞臺演藝領(lǐng)域的應(yīng)用和嘗試最為廣泛的一年，并且在2021年的央視春節(jié)晚會上得到了集中的體現(xiàn)。例如，首次采用8K超高清視頻進(jìn)行演播，首次運(yùn)用AR（增強(qiáng)現(xiàn)實(shí)）、XR（擴(kuò)展現(xiàn)實(shí)）技術(shù)直播。千變?nèi)f化的全景虛擬場景讓演員可以根據(jù)屏幕畫面與身邊的虛擬元素互動。有專業(yè)人士表示，2021年春晚是有史以來最重視科技的一屆，可稱為“科技春晚”。正如藝術(shù)家譚盾所說，“今天已經(jīng)是一個(gè)科技的時(shí)代，涉及科技美學(xué)的問題，這就是藝術(shù)甚至聽覺和視覺（領(lǐng)域）要關(guān)注的問題”[1]。

基于互動媒體技術(shù)在舞臺藝術(shù)方面的全面展開，我們將焦點(diǎn)聚集在如何將其應(yīng)用于傳統(tǒng)戲曲表演上，經(jīng)過調(diào)研和前期設(shè)計(jì)，最終決定制作京劇《真假美猴王》實(shí)驗(yàn)短片，以真假美猴王的對打?yàn)楹诵模尸F(xiàn)一段基于互動媒體技術(shù)的京劇表演。這段表演集合了沉浸式虛擬場景、增強(qiáng)現(xiàn)實(shí)特效以及同虛擬人物實(shí)時(shí)交互表演等綜合技術(shù)運(yùn)用場景。最終，通過戲曲藝術(shù)與互動媒體技術(shù)的結(jié)合，拓展傳統(tǒng)舞臺表現(xiàn)的維度，進(jìn)而探索現(xiàn)代科技助力傳統(tǒng)藝術(shù)的新方式，增強(qiáng)傳統(tǒng)演藝形式的表現(xiàn)力，使其更加符合時(shí)代審美，煥發(fā)新的光彩。同時(shí)，為戲曲藝術(shù)的普及與推廣提供更加多元和便捷的平臺，為更多的受眾了解戲曲、體驗(yàn)和欣賞戲曲、熱愛戲曲提供更多新的可能。

2 京劇《真假美猴王》實(shí)驗(yàn)短片中互動媒體技術(shù)的設(shè)計(jì)應(yīng)用

《真假美猴王》的故事在我國家喻戶曉，我國各傳統(tǒng)戲曲劇種都曾表演過這個(gè)故事。不同的是，我們并不滿足于傳統(tǒng)戲曲中對于兩個(gè)猴王的同度刻畫，而是在短劇中賦予了假猴王更加豐富的含義，他不僅是取經(jīng)路上的一個(gè)妖魔，還是對于取經(jīng)人意志的考驗(yàn)，他的樣貌與真猴王無二，與其說他是妖魔，不如說他就是孫悟空的鏡像，是他心中的心魔，在取經(jīng)路上不僅僅有“打怪升級”，更為艱難的是對信心的考驗(yàn)，悟空最終戰(zhàn)勝心魔，堅(jiān)定了取經(jīng)的決心。有了這個(gè)理由，我們就為此段亦真亦假、魔幻的AR特效表現(xiàn)找到了恰當(dāng)?shù)牧⒆泓c(diǎn)。

2.1 AR表現(xiàn)概念設(shè)計(jì)

此次研究的目標(biāo)不僅僅是要在舞臺上呈現(xiàn)沉浸的虛擬場景、增強(qiáng)現(xiàn)實(shí)特效，重要的是體現(xiàn)劇中真假兩個(gè)猴王對打和斗法的即時(shí)互動感。基于此，我們最終決定通過諾亦騰動作捕捉技術(shù)達(dá)到這個(gè)目的，即用3D軟件制作一個(gè)虛擬的美猴王，覆蓋貼圖和綁定骨骼之后，一位穿戴動作捕捉無限傳感器的京劇演員在表演場地外控制3D虛擬猴王（圖1），捕捉場外演員的動作信息，其身體的運(yùn)動和姿態(tài)數(shù)據(jù)可以實(shí)時(shí)傳輸?shù)絅otch渲染引擎中，數(shù)據(jù)再從Notch傳輸?shù)絛isguise服務(wù)器，最終再由disguise將數(shù)據(jù)信息輸?shù)絃ED屏幕，此時(shí)舞臺上便會出現(xiàn)活動的虛擬美猴王。該模型所有的動作信息與場外京劇演員的表演動作完全匹配，虛擬美猴王實(shí)時(shí)呈現(xiàn)在舞臺上，真猴王與虛擬假猴王就能實(shí)現(xiàn)實(shí)時(shí)互動了。

2.2 AR特效路線設(shè)計(jì)

這出戲的核心是AR技術(shù)的表現(xiàn)。傳統(tǒng)京劇表演的動作程式比較嚴(yán)謹(jǐn)規(guī)范，舞臺效果較為單一，當(dāng)融入了AR特效后，如美猴王在翻騰或者舞動金箍棒時(shí)，會伴有各種炫酷奪目的特效，從而增強(qiáng)現(xiàn)場的美感和激烈程度。

我們現(xiàn)在看到的多數(shù)戲曲類視覺特效以“傳統(tǒng)錄制+后期特效”的技術(shù)為主。例如，錄制好表演視頻后，用Adobe公司的After Effects和Premiere等軟件進(jìn)行后期剪輯和處理。這種方法雖能方便地將現(xiàn)場錄制和特效設(shè)計(jì)準(zhǔn)確結(jié)合，但無法呈現(xiàn)表演的臨場互動感，并且大量使用特效極易導(dǎo)致人們的審美疲勞，這與AR技術(shù)所營造的現(xiàn)場實(shí)時(shí)的直觀感受相差甚遠(yuǎn)。

我們的目標(biāo)是力求達(dá)到現(xiàn)場與虛擬人物表演和AR特效實(shí)時(shí)呈現(xiàn)的舞臺效果，這就一定要避免“錄制+特效”的方式。因此，實(shí)驗(yàn)采用Notch實(shí)時(shí)渲染引擎來制作完成AR部分的特效。Notch制作舞臺效果優(yōu)勢突出，具有實(shí)時(shí)渲染能力和復(fù)雜的粒子生成、高度的場域、程序化、燈光及材質(zhì)的設(shè)置和操控功能，并能將所有的AR效果向Disguise GX2播控設(shè)備進(jìn)行無障礙數(shù)據(jù)傳輸，最終達(dá)到現(xiàn)場表演時(shí)在攝像機(jī)前端實(shí)時(shí)疊加AR特效的目的，觀眾就能夠通過攝像機(jī)和輸出屏幕實(shí)時(shí)觀看有AR特效的京劇表演了。

2.3 實(shí)時(shí)動作捕捉技術(shù)路線設(shè)計(jì)

動作捕捉也是本實(shí)驗(yàn)劇的重要一環(huán)，如演員②配合演員①表演劇中的互動情節(jié)（圖1）。雖然兩位演員仍依據(jù)傳統(tǒng)京劇動作程式表演，但兩人的空間位置關(guān)系發(fā)生了根本上的改變。演員①扮演的真猴王在舞臺中表演，觀眾可見;演員②則身著動作捕捉裝備在舞臺一側(cè)表演，通過對他動作的跟蹤采集，操控虛擬猴王模型在舞臺上表演。這最大限度地呈現(xiàn)了真猴王的現(xiàn)場表現(xiàn)力，同時(shí)增強(qiáng)了虛擬猴王的虛幻感，從而產(chǎn)生了不同于傳統(tǒng)京劇的表現(xiàn)形式（傳統(tǒng)京劇中真假猴王都由真實(shí)的演員直接裝扮表演），讓人立刻感受到戲中“真與假”的表演暗示和意想不到的視覺效果（見圖1）。

在動作捕捉技術(shù)操控方面，目前較多使用光線追蹤技術(shù)實(shí)施，這要求在設(shè)有若干攝像機(jī)或布滿攝像頭的實(shí)體場域中進(jìn)行，攝像頭數(shù)量決定動作捕捉的精確度，比較典型的設(shè)備是OptiTrack，現(xiàn)場需搭起腳手架支撐攝像機(jī)，演員需穿著專門的動作捕捉服裝表演。這種做法成本較高，并且特制的動作捕捉服限制了演員的臨場表現(xiàn)和發(fā)揮，所以我們選擇了采用無線數(shù)據(jù)傳輸模式的諾亦騰動作捕捉設(shè)備。這個(gè)設(shè)備的好處是比較輕便、易于攜帶，且不受場地和服裝的限制，完全可以適應(yīng)大多數(shù)應(yīng)用場景[2]。在實(shí)驗(yàn)彩排時(shí)，采用了代級較低的Perception Neuron2.0系列，所以只能捕捉到演員大的肢體動作，細(xì)微的手勢動作就無法捕捉了，因此就出現(xiàn)了虛擬猴王手型僵直、無法彎曲的情況，這有違人體動態(tài)規(guī)律，是預(yù)演中暴露出來的問題。接下來我們擬采用代級更高的諾亦騰設(shè)備解決這一問題，力圖達(dá)到精確捕捉人物動態(tài)的目的。

相較而言，在預(yù)演階段采用的動作捕捉設(shè)備是一款入門級有線動作捕捉系統(tǒng)，雖輕便易操作，但由于沒有裝載無線傳輸信號感應(yīng)器，現(xiàn)場操作時(shí)常常會出現(xiàn)對演員動作捕捉不精確的問題。這就要求我們必須采用具有全身無線數(shù)據(jù)傳輸、低延遲高精度、高電磁耐受性等特性的高端設(shè)備。而諾亦騰專業(yè)級動作捕捉設(shè)備Perception Neuron Studio系列憑借其專有的嵌入式數(shù)據(jù)融合系統(tǒng)和人體動力學(xué)系統(tǒng)以及物理引擎算法，不僅可以使骨骼信息被精確捕捉到，也能為使用者提供平滑而準(zhǔn)確的動作捕捉數(shù)據(jù)，完全滿足以上的需求。

3 京劇《真假美猴王》實(shí)驗(yàn)短片的最終呈現(xiàn)

最終，在2021年3月6日的匯報(bào)演出中使用了諾亦騰專業(yè)級動作捕捉設(shè)備Perception Neuron Studio系列。此設(shè)備是諾亦騰公司的最新產(chǎn)品，比前幾代設(shè)備更加精準(zhǔn)，其在硬件、軟件、算法、易用性及環(huán)境適應(yīng)性等方面均有多項(xiàng)提升，并且增強(qiáng)了手部動作捕捉能力，解決了預(yù)演時(shí)虛擬模型無法識別真人手部彎曲動作的難題，這樣在表演時(shí)就可以捕捉更多的細(xì)微動作，增強(qiáng)虛擬猴王的生動性了。

在預(yù)演過程中，由于慣性動作捕捉設(shè)備的特點(diǎn)，假猴王被真猴王棒擊后，總是出現(xiàn)卡頓、無法消失的問題。因此我們在更新動作捕捉設(shè)備的基礎(chǔ)上，最后又增加了一個(gè)AR粒子消散的特效，以表現(xiàn)虛擬猴王的“幻滅”效果，加強(qiáng)真猴王驅(qū)除心魔的寓意。

3.1 最終呈現(xiàn)中的VR特效設(shè)計(jì)

VR（虛擬現(xiàn)實(shí)）部分重點(diǎn)體現(xiàn)的是美猴王的內(nèi)心活動及其跟場景、佛像的互動，此環(huán)節(jié)的特效更加多元，比如真猴王對佛像下跪時(shí)，伴隨鐘聲佛像顯靈，顯現(xiàn)佛光效果，暗示佛祖對真猴王的內(nèi)心的感應(yīng)和指引。

再比如真假美猴王打斗環(huán)節(jié)的VR特效，在第一次棒擊假猴王時(shí)，假猴王變化出了一個(gè)“光盾”進(jìn)行抵擋，這實(shí)際上是做了一個(gè)VR多排圓圈特效，從視覺上看上去很像一個(gè)“光盾”，同時(shí)也是為了與最終棒擊假猴王湮滅的特效形成對比，特意區(qū)分兩次棒擊的效果，形成視覺反差，使打斗場面顯得更加激烈和精彩，同時(shí)調(diào)節(jié)觀眾的情緒。

3.2 最終呈現(xiàn)中的AR特效設(shè)計(jì)

真猴王在開場時(shí)有一個(gè)翻跟斗的亮相動作，在此特意設(shè)計(jì)了翻滾的AR前景粒子特效，以強(qiáng)化演員翻滾的方向感和動勢，增強(qiáng)了高難度動作表演的視覺效果。

為了體現(xiàn)美猴王高強(qiáng)的本領(lǐng)和調(diào)皮的性格，專門設(shè)計(jì)了多處跳躍和舞動金箍棒的動作，我們在此疊加了兩層AR特效，一層是用Notch設(shè)計(jì)的旋轉(zhuǎn)的黃色粒子特效，一層是用AE設(shè)計(jì)的帶有通道的紫色電流特效。兩層AR特效疊加豐富了魔法的既視感，將打斗場面和視覺效果推向了高潮。

3.3 最終呈現(xiàn)中的MR特效設(shè)計(jì)

打斗場面是整部短片的高潮，我們使用了VR和AR結(jié)合的MR（混合現(xiàn)實(shí)）特效，即背景LED屏實(shí)時(shí)渲染的紅色旋渦粒子VR特效，混合疊加在前景層圍繞假猴王旋轉(zhuǎn)的AR利劍動畫特效。兩種不同的視覺特效穿插在一起，給打斗場面增加了更多的即時(shí)互動感和強(qiáng)烈的視覺感受（見圖2）。

可以說，最終整部短劇的排演克服了預(yù)演中出現(xiàn)的大多問題，最終達(dá)到了各種互動媒體技術(shù)的一個(gè)極優(yōu)的呈現(xiàn)，這對于全體課題組成員來說是最好的激勵(lì)。當(dāng)然，作為一部實(shí)驗(yàn)作品，其中還存在很多不足和缺點(diǎn)，比如視覺場景的優(yōu)化不夠、石頭和地面缺乏材質(zhì)和肌理感，虛擬美猴王造型的制作還顯粗糙，骨骼綁定和UV貼圖的真實(shí)性與精細(xì)度也有待提高，以及各種特效的進(jìn)一步優(yōu)化和處理，我們將會在接下來的工作中逐步解決和完善此類問題。

4 互動媒體技術(shù)與戲曲藝術(shù)融合的展望

今天，隨著新媒體時(shí)代的來臨，現(xiàn)代舞臺迎來了大的變革和機(jī)遇，這給予了新科技與傳統(tǒng)藝術(shù)融合無限的發(fā)展前景。我們已經(jīng)可以看到，VR、AR、MR，乃至XR等技術(shù)在很多的現(xiàn)代舞臺藝術(shù)中被頻繁應(yīng)用，從其中優(yōu)秀者中不難看出它在未來的應(yīng)用價(jià)值。因此，我們應(yīng)該在傳統(tǒng)舞臺藝術(shù)中大膽地進(jìn)行此類技術(shù)的嘗試與創(chuàng)新，用符合時(shí)代審美的新技術(shù)達(dá)到弘揚(yáng)傳統(tǒng)文化的目的，為傳統(tǒng)戲曲注入新的活力。

當(dāng)然，我們在熱情嘗試的同時(shí)還要時(shí)刻保持一種理智而冷靜的研究態(tài)度，避免在創(chuàng)作中對新科技的刻意而生硬的應(yīng)用，這樣只會破壞傳統(tǒng)藝術(shù)本來的美感，從而適得其反。正如京劇大師梅蘭芳曾提過的“移步而不換形”[3]，要使戲曲藝術(shù)隨著時(shí)代發(fā)展而不斷進(jìn)步，發(fā)揚(yáng)和升華其精神內(nèi)涵與意象之美。這就要求我們藝術(shù)科研人員要不斷地加深自己在傳統(tǒng)文化方面的底蘊(yùn)和修養(yǎng)，同時(shí)積極主動地了解和學(xué)習(xí)當(dāng)代新的演藝科學(xué)技術(shù)，掌握這些新技術(shù)的應(yīng)用模式和表現(xiàn)特點(diǎn)，使其有效地融合于傳統(tǒng)文化。

5 結(jié)語

互動媒體京劇《真假美猴王》實(shí)驗(yàn)短劇從開始的創(chuàng)意、劇目的選擇與策劃，到前期排練、中期合練與修改，再到最終短劇演示攝錄完成歷時(shí)一年多，是創(chuàng)作團(tuán)隊(duì)共同努力的成果。期間，問題不斷地出現(xiàn)和被解決，最終團(tuán)隊(duì)取得了較為理想的呈現(xiàn)結(jié)果。

這次小小的嘗試讓大家深刻地感受到了新的互動媒體技術(shù)帶給傳統(tǒng)戲曲藝術(shù)不同于以往的觀看感受和體驗(yàn)。它極大地拓展了傳統(tǒng)舞臺的呈現(xiàn)形式，利用數(shù)字互動媒體技術(shù)的數(shù)字化表現(xiàn)，構(gòu)建了炫酷的舞臺效果，強(qiáng)化了舞臺藝術(shù)形象，烘托了現(xiàn)場氛圍，使觀眾在觀演時(shí)獲得了更具有時(shí)代感的審美體驗(yàn)。因此，小到創(chuàng)作小品，大到創(chuàng)作劇目，與互動媒體技術(shù)的結(jié)合都值得積極嘗試和探索，這非常有利于戲曲藝術(shù)在當(dāng)代的推廣和發(fā)展，也勢必會推動一種全新的戲曲表現(xiàn)形式的發(fā)展。

參考文獻(xiàn)：

[1] 劉彤.春晚不好看了？牛年春晚借力科技煥發(fā)新機(jī)[J].人民郵電，2021（02）：1.

[2] 從動作捕捉到虛擬現(xiàn)實(shí)——諾亦騰的成長之路[J].互聯(lián)網(wǎng)經(jīng)濟(jì)，2016（12）：42-43.

[3] 程從梅.戲曲文化傳播中公共交互媒體藝術(shù)的設(shè)計(jì)研究[D].北京：中國戲曲學(xué)院，2018：1.

作者簡介：張曉華（1978—），男，山西大同人，碩士，助理研究員，研究方向：數(shù)字藝術(shù)與設(shè)計(jì)。