基于Touch Designer的非物質(zhì)文化遺產(chǎn)交互展示項(xiàng)目開發(fā)

王文瑞

關(guān)鍵詞：Toueh Designer;非物質(zhì)文化遺產(chǎn);交互展示;開發(fā);平遙推光漆

山西省擁有豐富的傳統(tǒng)文化資源，但目前展示方式不夠新穎，展示內(nèi)容較受限，推廣程度受地域性限制較高，影響力不足。平遙推光漆也不例外，主要依靠平遙古城的旅游資源采用實(shí)體展示與售賣一體的經(jīng)營模式，宣傳推廣的成果不夠理想。非物質(zhì)文化遺產(chǎn)（以下簡稱非遺）的宣傳推廣和傳承保護(hù)工作可以從兩方面考慮：

1）非遺傳播展示的常規(guī)研究。包括非遺本身承載的傳統(tǒng)文化、技藝特色、傳承發(fā)展現(xiàn)狀、數(shù)字輔助開發(fā)、數(shù)字宣傳推廣內(nèi)容方式的分析研究。

2）關(guān)注新技術(shù)可能帶來的行業(yè)影響和發(fā)展契機(jī)，應(yīng)用最具影響力的技術(shù)手段對非遺進(jìn)行宣傳推廣，令其以最新鮮的方式再度進(jìn)入大眾視野，提高知名度，挖掘潛在青少年用戶，讓非遺能在青少年中傳承下去。

本文主要探討基于Touch Designer的非遺項(xiàng)目互動展示開發(fā)研究，屬新媒體交互藝術(shù)范疇。

新媒體交互藝術(shù)是與傳感藝術(shù)、電子藝術(shù)、網(wǎng)絡(luò)藝術(shù)、沉浸式藝術(shù)結(jié)合發(fā)展而來的一種融合新媒體特征、富有現(xiàn)代化氣息，積極引導(dǎo)觀眾參與影響作品順序、情節(jié)、狀態(tài)的藝術(shù)表現(xiàn)形式。新媒體交互藝術(shù)關(guān)注的焦點(diǎn)是溝通和合作，不斷探索新行為模式和新媒介。其具有互動連接性、專業(yè)技術(shù)性、虛擬性的特點(diǎn)，在交互裝置、虛擬仿真、人工智能、社交互動、商業(yè)活動等方面都有廣闊的應(yīng)用，現(xiàn)已成為大眾生活中不可或缺的一部分。

在國內(nèi)，大多數(shù)非遺保護(hù)工作是由高校、非盈利機(jī)構(gòu)、小型團(tuán)隊(duì)負(fù)責(zé)開發(fā)的，而新媒體交互藝術(shù)開發(fā)涉及學(xué)科門類眾多，協(xié)同需求高，準(zhǔn)入門檻高，使得高質(zhì)量的非遺交互展示項(xiàng)目稀缺。而TD則為我們提供一個(gè)新的解決方案，其對程序進(jìn)行了封裝，由數(shù)百種節(jié)點(diǎn)元件構(gòu)成，每一個(gè)元件執(zhí)行一個(gè)具體的、微小的獨(dú)立動作，通過元件的鏈接排序最終生成美輪美奐的交互視覺效果。這為我們對非遺進(jìn)行高質(zhì)量新媒體交互展示項(xiàng)目開發(fā)提供了新的可能。

1 ToUCh Designer概述

Touch Designer（以下簡稱TD）由加拿大Derivative軟件公司開發(fā)，是專門面向交互藝術(shù)設(shè)計(jì)開發(fā)的基于節(jié)點(diǎn)式的視覺化編程語言。在歐美和日本，TD在商業(yè)應(yīng)用上已有較大規(guī)模發(fā)展，也有固定群體對TD進(jìn)行不斷地探索實(shí)驗(yàn)。例如位于美國芝加哥的Leviathan體驗(yàn)設(shè)計(jì)工作室為谷歌、三星、空中客車、迪土尼、太平洋電器等多家科技與娛樂公司進(jìn)行了項(xiàng)目開發(fā);蒙特利爾的Moment Factory工作室為安大略的亨利堡開發(fā)了沉浸式新媒體公共藝術(shù)項(xiàng)目;紐約的VoluoxLabs工作室為微軟藝術(shù)長廊進(jìn)行了交互展示項(xiàng)目開發(fā);上海的Digital FUN工作室也利用TD制定了大眾CC上海船舶館發(fā)布會和Audi A8L三亞發(fā)布會，打造出了令人驚嘆的沉浸式交互演出。TD在互動裝置、演出視覺裝置投影、建筑外觀投影、展會視覺設(shè)計(jì)、機(jī)械控制、VR體驗(yàn)、概念原型設(shè)計(jì)等多種實(shí)際工作中大放異彩。

一般情況下，用戶交互信息采集、界面設(shè)計(jì)、交互控制、項(xiàng)目輸出都依靠TD自身來進(jìn)行制作，而動畫影像資源的制作則可以依靠TD制作、外部資源導(dǎo)入、外部資源協(xié)作三種方式。TD包含COMP（合成與控件）、CHOP（信號輸入與處理）、TOP（二維圖像圖片輸入與處理）、SOP（三維圖形制作與渲染）、DAT（備注文檔、存儲數(shù)據(jù)、執(zhí)行命令）、MAT（三維圖形材質(zhì)與貼圖）六大種類元件，包含輸入型元件、運(yùn)算性元件和輸出型元件。設(shè)計(jì)師可以通過各種元件的疊加，通道引用、轉(zhuǎn)換與代碼控制來制作二維、三維動畫及特效動畫，生成炫目的動態(tài)效果。外部制作的視頻影像可通過movie file in TOP元件導(dǎo)入DT進(jìn)行進(jìn)一步加工處理，外部制作的三維文件可通過file in SOP元件導(dǎo)入DT加工處理，貼圖文件可通過PBR MAT導(dǎo)入，支持表面貼圖、高光貼圖、粗糙度貼圖、環(huán)境貼圖、自發(fā)光貼圖、法線貼圖等，從而實(shí)現(xiàn)高精度的材質(zhì)貼圖效果。對于三維模型與貼圖的制作采用Maya、3Dsmax、UVlayout、Substance Painter、PhotoShop等制作完成后導(dǎo)入TD效率更高。特效動畫也可以采用將houdini等軟件制作的動畫效果導(dǎo)入TD使用的方式。

此外，TD還支持Substances Designer、Notch、Ableton Link等軟體，支持OSC、TCP/IP、UDP、UDT等網(wǎng)絡(luò)協(xié)議，支持Web瀏覽器和工具，支持OpenGL等圖形語言，支持Pixar USD等3D場景，支持物理動力學(xué)等，為項(xiàng)目開發(fā)者提供眾多適合自己的選擇。

2基于Touch Designer的非物質(zhì)文化遺產(chǎn)交互展示項(xiàng)目開發(fā)方式

交互作品由用戶交互信息采集，信息計(jì)算與邏輯控制，用戶交互與信息輸出三部分組成，每個(gè)階段都需要相應(yīng)的硬件設(shè)備支持。TD提供眾多硬件接口，為交互藝術(shù)的信息采集和輸出提供了極大的可能性。以平遙推光漆為例，我們分析研究其可能實(shí)現(xiàn)的交互展示開發(fā)方式，具體內(nèi)容如下：

2.1體感識別交互展示

體感識別交互展示是現(xiàn)今最受歡迎的現(xiàn)場展示方式之一。TD提供了Kinect元件接口，Kinect是微軟公司2010年開始投放市場的體感交互外部硬件設(shè)備，通過TD連接Kinect即可進(jìn)行墻面交互投影展示、地面交互投影展示或沉浸式交互投影展示項(xiàng)目開發(fā)。例如，默認(rèn)狀態(tài)投影展示推光漆技藝常用圖案的動畫，通過Kinect采集用戶動作反饋到控制程序后，投影中的推光漆圖案的運(yùn)動方向、運(yùn)動速度便會受到用戶相應(yīng)動作的影響，給用戶造成一種進(jìn)入推光漆中的新鮮體驗(yàn)。

2.2手勢識別交互展示

手勢識別交互展示也是現(xiàn)今非常受觀眾喜愛的現(xiàn)場展示方式。TD提供了Leap Motion元件接口，通過TD連接LeapMotion即可進(jìn)行手勢交互展示項(xiàng)目開發(fā)。例如，可以在投影中展示推光漆首飾盒，利用Leap Motion采集用戶手勢，從而實(shí)現(xiàn)對首飾盒的操作，如移動、放大、縮小、切換，或者打開盒蓋與抽屜，取出盒中虛擬的各種首飾等。再如，通過手勢采集，實(shí)現(xiàn)用戶在首飾盒上繪制圖案、上漆和推光的虛擬體驗(yàn)等。