多系統跨媒介交互電子音樂創作研究*

王立川

（四川音樂學院，四川 成都 610021）

一、多系統平臺

多系統平臺：即多個平臺的操作系統。如PC電腦所使用的Windows系統、蘋果電腦所使用的Mac OS X系統、手機和平板所使用的Android和iOS系統等。把這些若干個操作系統通過一定的通信方式連接起來組合運行，便構成了一個多系統平臺。下面就多系統平臺作下詳細介紹。

（一）為什么要用多系統平臺

在過去很長的一個歷史時期中，由于系統間通信協議及軟硬件接口標準的制約，軟硬件工程師和電子音樂家們致力于開發能力更強的軟硬件，以滿足電子音樂不斷增長的系統需求。這便導致了一個較為嚴重的問題，就是硬件和軟件系統越來越復雜，開發和設計的難度越來越大，價格也越來越高昂，而系統的靈活性則相對較低。但對于今天而言，硬件制造技術、網絡通信技術、多媒體技術和接口標準化等相關技術的發展，越來越多的硬件系統可以協同工作，并且能夠以模塊化的方式進行組合運行。

每個硬件系統的運算處理能力都是有限的，即使科技發展到今天，如果我們想要獲得一個運算能力非常高的硬件，往往也要花費較高的代價。但如果搭建和使用多系統平臺，往往可以提高幾倍的效率以及節約相當高的成本，并且同樣可以獲得相同的效果。

（二）多系統平臺的特點及優勢

操作系統的發展和標準化，使得不同的操作系統之間可以更容易地實現相互通信和控制，在共享數據上的障礙也逐漸消失；不同的系統和軟件之間利用標準的接口協議，可以很容易地進行數據通信，并且可以實現低延遲的數據傳輸和協同運算。并且由于無線通信技術和移動運算技術的發展，不同類型的軟硬件之間可以進行標準化的信號傳遞和控制，實現更豐富的效果。

合理的利用不同軟硬件系統組合，在一定程度上能夠減少操作系統運行的壓力，使各個應用軟件能更好的適用各個操作系統，減少系統資源浪費，提升各個系統的運算能力。能夠有效的解決單一系統、單一模式下程序調試復雜、系統運算吃力等諸多問題。因此，利用多種不同的軟硬件平臺來構建靈活、高效、適應性強且成本可控的電子音樂創作系統是非常科學及可行的，并應該獲得更多的關注與應用。

（三）利用多系統平臺創作電子音樂作品

筆者就多系統平臺創作了一首跨媒介交互電子音樂《迷失太空》，在這首作品中筆者搭建了由四個不同的操作系統所組成的多系統平臺。四個操作系統分別為Windows系統、Mac OS X系統、iOS系統以及Android系統。設備為PC電腦一臺、iMac電腦一臺、iPad一部、安卓手機一部。選用的這四個設備及操作系統都是我們生活中經常接觸的，大眾都不會對這些硬件和操作系統陌生。作品在第三章將做詳細介紹。

二、跨媒介交互電子音樂的創作思維

（一）跨媒介藝術

藝術媒介意為藝術材料，指藝術家在藝術創作的過程中用于表現的物質手段，即用來表現藝術構思的物質材料。如聲音、繪畫、影像、舞蹈等藝術形態都是生活中最常見的藝術媒介。在電子音樂創作中，我們所用的媒介往往就只有聲音。電子音樂應用在生活中，我們感知這種藝術往往也只是通過聲音這個媒介。如聽到的CD唱片、數字音頻等。

跨媒介是一種新的藝術創作思維，它可以將不同的藝術材料相結合，是一種對傳統藝術審美進行擴充、變革的新型藝術形態。早在20世紀50年代，電子音樂創作家們就逐漸從聲音藝術的單一模式發展為視覺和聽覺相結合的模式，融合舞蹈、戲劇、表演等元素，形成跨界發展的態勢。直至今天，跨媒介思維已成為電子音樂創作的主流趨勢，已有數不勝數的跨媒介電子音樂作品展現在世界各地舞臺上，并獲得了廣泛的認可。

（二）交互電子音樂

交互電子音樂是指通過技術手段，使人或其它對象與計算機產生互動，并實時控制聲音、圖像等材料變化和發展的藝術形式，如圖一所示。交互電子音樂的創作思路與跨媒介藝術的思維是息息相關的。早在1946年計算機的問世，并以驚人的速度發展，藝術的表現形式也在逐漸的變革，計算機對藝術的表現形式與手段產生的巨大影響：從單媒體到多媒體、從實境到虛擬現實、從被動到互動。如今，人類已經進入了一個互動的時代，交互技術毫無疑問是電子音樂的重要創作手段。

圖一：作曲家在演奏交互電子音樂

（三）跨媒介與交互電子音樂的結合

把跨媒介與交互電子音樂結合起來看，它無疑是電子音樂領域中最前衛的表達形式。既融合了音樂以外的藝術媒介，使其有著獨特的藝術表達形式，又引入了交互這一創作手法，使其在演出中創作者能夠實時的參與到音樂的發展中來；既能夠使藝術表達更加新穎、豐富，又順應了時代發展的需求。因此，跨媒介交互電子音樂的創作思維是電子音樂中最重要的創作思維之一。

三、多系統跨媒介交互電子音樂作品《迷失太空》

在第一章里筆者提到的利用多系統平臺創作的電子音樂作品《迷失太空》將在這一章節里做詳細介紹。這部作品的創作靈感來源于電影《星際穿越》，圖二為其電影截圖。龐大浩瀚的宇宙太空，蟲洞與時間旅行的詭異莫測，黑洞與多維時空的無窮奧秘，激發了筆者寫下這部電子音樂作品。意圖描寫人類的一場太空旅行。利用“跨媒介”手段將音樂與影像結合起來，并用“互動”的方式實時控制音樂中的部分聲音以及影像的變化。整部作品是由多個系統同時協助工作，利用聲音和影像兩個媒介，并以人實時觸發聲音素材及影像互動共同構成的一部作品。

圖二：電影《星際穿越》中的黑洞概念圖

（1）多系統平臺的搭建

完成這部作品的第一部是搭建多系統平臺，多系統平臺的優勢及特點在本文第一章節里已經寫過，這部作品利用多系統平臺的目的就是要充分發揮和利用每個平臺的優勢，減少系統資源的浪費，并將其與跨媒介交互式的理念完美結合。在這部作品中，筆者搭建了由4個不同的硬件操作系統所組成的多系統平臺。4個操作系統分別為Windows系統、Mac OS X系統、iOS系統以及Android系統。所用到的設備為PC電腦一臺、Mac電腦一臺、iPad一部以及安卓手機一部。PC電腦下的Windows系統所使用的軟件為Cubase 7.5；Mac OS X系統所使用的軟件為Resolume Arena 4.2。iOS系統所使用的軟件為Cubasis LE，如圖三所示；Android系統所使用的軟件為TouchOSC，如圖四所示。除了以上軟硬件設備，還需要無限局域網絡，和路由器一臺。

圖三：Cubasis LE操作界面

圖四：TouchOSC操作界面

（2）連接與操作設計

將這些設備關聯起來的核心工具是網絡，通過局域網絡，iPad上的Cubasis LE軟件可發送MIDI信號到PC電腦的Cubase軟件里的midi軌道上，從而實現用Cubasis里的軟鍵盤去控制Cubase中midi軌道的midi音符，達到現場互動的效果。用于演奏的軟鍵盤界面如圖四所示。再者通過局域網絡，可以將安卓手機中TouchOSC軟件里的控制參數實時發送給Mac電腦中的Arena視頻處理軟件，亦實現了用手機控制電腦中的影像。該作品在展示時需要兩個人同時參與音樂與視頻的交互，其中一人負責播放PC電腦中的音樂，并用iPad實時控制作品中的一些音符元素（音高、力度、時值等）；另一人則負責在音樂開始演奏的同時播放Mac電腦中的視頻，并用安卓手機實時對視頻中的一些素材做處理和變化，音樂與視頻是相互呼應、相得益彰的，而不是各自獨立。多系統平臺的搭建、軟硬件的互聯、人實時的控制，都充分體現了跨媒介交互電子音樂的創作思維。

圖五：Cubasis中的軟鍵盤

（3）《迷失太空》的“音樂”創作

看似復雜的多系統跨媒介交互電子音樂，其核心部分依然是“音樂”本身。音樂是首先要被設計出來的藝術媒介，在設計音樂的同時也要考慮到與影像的結合的方式以及互動操作的可行性，這樣設計出來的音樂再添加影像或其它媒介以及添加人機交互技術時才能更完美的將其融合，能夠更加精致的表達其藝術的魅力與內涵。

圖六：《迷失太空》的MIDI工程制作截圖

制作這個“音樂”的技術手段為MIDI與合成器技術。制作平臺及軟件為PC電腦與Cubase 7.5，音色為Kontakt采樣音色與合成器音色。因其作品風格是與“太空”相關，所以筆者在制作這個音樂時將合成器音色定位整部作品最主要的音色。因為浩瀚的太空并不像我們人類所接觸的大自然那樣可以用那些“具體”聲音來描繪，而真實樂器是由地球大自然中的一些具體物理材料制作而成，幾百年來作曲家們運用這些樂器來表達世間萬物與情感，已將其發揮的淋漓盡致，但始終幾乎脫離不開人與地球世界。設想一下如果脫離了地球，進入那些未知的太空領域，這些由具體的音色組織而成的音樂還能繼續發揮其“魅力”嗎？答案肯定是不能。自從合成器的誕生，大量非物理碰撞形成的聲音被制作出來，這預示著人類對未知文化的無窮探索，對未來音樂的無窮設想。世界著名電影配樂大師Hans Zimmer在他的公開課上曾說過：如果你能將合成器使用得當，你就獲得了一把通往另一個音色新世界的鑰匙；一旦你能玩轉它，你就可以掌握這個世界。可見合成器是一件多么有能量的“法寶”。其獨特之處就在于它能夠制作產生出我們自然界所沒有的各種“神秘”的音色。用這些音色來描繪一些未知的空間與事物是非常符合邏輯的。因此，筆者將合成器音色定位這首音樂的核心，音樂的主題也是用合成器音色來表達。

圖七：《迷失太空》的音樂頻譜

音樂共分為三段。第一段（0″—1′30″）開頭由一個合成器Pad音色引入，再由一個點狀合成器音色加以點綴，共同構成音樂的主題，意為“浩瀚的宇宙，美麗的星空”。其后Pad音色經過處理變得顫抖起來（顫音），點綴音色持續添加，并引入了一個經過處理的雙簧管音色演奏一段抒情旋律。

圖八：經過處理的雙簧管音色演奏的旋律片段

這段主旋律意代表人類本身，背景為其置身于太空旅行的場景。其后雙簧管旋律逐漸變得不穩定，隨機化。雙簧管音色在經過處理后也逐漸變得模糊，不穩定，伴隨著點綴音色和抖動的Pad音色逐漸淡出，第一段就此結束。

第二段（1′30″—2′25″）由一個經過反轉處理的合成音色引入，類似于物體被引力突然“吸”進去的一種效果。此時背景音色用調制的弦樂隊的音色鋪底，聲場比第一段使用的合成器Pad音色更加寬廣，意示著人類來到了宇宙深處，此時前方是一片未知。點綴音色大量使用不穩定音程，如小二度、增四度。被“吸”進去的音色持續出現，標示著在宇宙深處的旅行中各種不穩定可能性的發生。持續到2″左右時出現了一個相對穩定的點綴聲音循環，但此時背景音色開始變得嘈雜、多變。意味著一個明確的、十分恐怖的場景即將到來。

第三段（2′25″—4′41″）著重描寫了這個十分恐怖的場景。音樂開始是由一段純粹的循環的點狀音色引入，無任何其它音色介入。其后首先引入了一個抖動的低音Pad。其后又引入了一個合成打擊樂音色，類似木魚，其空間混響調制的十分龐大，由它奏響了一個漆黑、恐懼的不明空間。其后緊跟著各種點狀恐懼的合成音色，如類似于弦樂震音、大鐘、管風琴低音等等音色交織在一起，此起彼伏的出現。其后類似木魚的合成打擊樂音色持續演奏兩個八度音高，將恐懼推向高潮，直到第二段的被“吸”進去的音色再次出現，結束高潮并進入尾聲。尾聲與第一段描寫的場景類似，標示著人類“逃”出了這個恐懼的不明空間，再次返回“浩瀚的宇宙，美麗的星空”這個場景內。

（4）與影像的結合

這部作品的影像部分筆者采用的方法是對若干預制視頻文件做實時效果處理。首先筆者收集了若干“星空”素材的影像視頻文件，將其導入到Mac電腦中的Resolume Arena視頻軟件里，如圖九所示。選擇要進行效果處理的模塊并標記下來。

圖九：Resolume Arena視頻軟件操作界面

其次將安卓手機的TouchOSC軟件通過Mac端的Touch Resolume與Arena視頻軟件連接，連接好后就可以將TouchOSC軟件里的控制信息實時發送給Arena視頻軟件的效果處理器，這樣就可以通過安卓手機來實時控制視頻的效果變化，如光效、速度、色調等等。將這些實時控制的影像串聯起來，與音樂相結合，共同構成《迷失太空》整部作品。

圖十：被實時處理的“星空”影像素材截圖

四、結語

在《迷失太空》作品中，筆者實驗性的組合了四種不同的硬件系統，將四個操作系統下的軟件互相關聯、相互控制。并創作以虛幻的太空為主題的音樂一首，將其置于這個多平臺系統中，抽取音樂中的某些素材在作品展示時實時添加和控制。并且為音樂搭配影像，同樣的實時控制其影像效果變化。這種形態的電子音樂作品國內還沒有足夠數量相關領域研究，但在國外相關領域已經成為了電子音樂創作的主流手段，也是電子音樂發展的基本趨勢之一。因此，多系統跨媒介交互式的理念在國內應得到更深入的研究。構建專業的計算機音樂系統，進行更深入的應用和創作。

當今時代下的電子音樂創作，已幾乎很少能看到作品只是單一的計算機音樂與聲音藝術。越來越多的電子音樂作品采用實時交互，多媒融合等手段。電子音樂在語匯、風格、樣式上越來越“多元化”發展。筆者創作的這部《迷失太空》正是順應了當今電子音樂發展的主流趨勢。此外，當代電子音樂的背景由于是在現代音樂的大環境下，許多純粹的聲音作品并不能夠被大眾廣泛認可，但在加入視覺藝術、舞蹈藝術等藝術形式與音樂藝術相結合的情況下，亦能夠給觀眾帶來許多新鮮的感受，使藝術形態更加升華。

如今，這種新形態的電子音樂創作已不再僅僅是一臺計算機對聲音進行某些處理就能夠完成的。使用多平臺、多系統的協同工作能夠完美的實現這種新形態電子音樂創作的需求，因此，多系統平臺正是跨媒介交互電子音樂最靈活、最高效的創作平臺。合理搭建與使用多系統平臺對當代電子音樂的發展有著極大的促進作用。相信在不久的將來，多系統跨媒介交互電子音樂理念能夠引領更多的青年作曲家創作出更多優秀的作品。

[1]程伊兵.聲音合成與制作基礎[J].中央音樂學院出版社,2004.

[2]楊萬鈞.多系統平臺協作電子音樂系統研究與實現[J].中國教育技術裝備,2014.

[3]陸敏捷.中國新媒體藝術之互動音樂發展初探[J].音樂探索,2013,01.

[4]張小夫.電子音樂概念界定[J].中央音樂學院學報,2002.