景宇陽
(南京藝術學院,江蘇 南京 210013)
Leap motion控制器在計算機音樂創作中的使用前景
景宇陽
(南京藝術學院,江蘇 南京 210013)
Leap motion是一款紅外線體感控制設備,它可以選擇是否識別生物體,例如人手和手部模型,這個功能可以巧妙地利用,例如在手上拿一只鉛筆,就可以模擬小提琴演奏家拿著弓子,更好的模仿演奏家的演奏。這款控制器可以運用在游戲,教育,醫療,互聯網,人工智能等領域,用途十分寬廣。Leap motion為音樂的創作提供了無限的可能。
交互音樂;MIDI;音樂科技
Leap motion通過USB連接電腦,安裝與其配套的驅動程序后,即可控制電腦與軟件,使用Leap motion。它擁有1/100毫米,150°超寬幅的空間三維視場的超高精度,擁有超過200幀的速度追蹤手部移動,通過對手部動作的捕捉轉化為各種控制信號,它可以追蹤全部10只手指,同時顯示兩只手的運動狀態。
Leap motion通過與DAW連接,能夠輕松地控制各種MIDI信號,調音臺Automation信息等。此處以Logic Pro X為例,將Leap motion與電腦相連接,系統自動掃描后,指示燈為為綠色即可使用。隨后打開MIDI信息編輯界面,輸入您想控制的MIDI信息,此時宿主軟件就會顯示相應的MIDI信息輸入源,Logic MIDI信號檢測窗也會有提示。隨后,在MIDI編輯界面鎖定一種手勢,便可以單獨的控制一種信息,可以是向上向下,也可以是向左向右,鎖定后,您通過手的操作即可成功觸發設置好的MIDI信息,從而控制DAW中樂器的參數。

例如通過手部的向上和向下運動,觸發11號控制器(表情控制)從而控制虛擬樂器的音量大小,可以制造出強弱起伏,有細節變化的聲音。通過錄音鍵可以錄制下您用手繪制出來的MIDI信息。您也可以選擇解鎖MIDI信息編輯界面的solo模式,這樣就可以用多種手勢發送多組控制信息,例如左手的上下動作用來控制音量大小,右手的張開與閉合控制小提琴琴弓的運動,以達到更逼真的演奏方式。

Leap motion提供了全新的音樂創作方式。以前,我們更多是用鼠標來繪制MIDI CC信號,或者是用MIDI控制器來控制,這樣操作起來往往需要大量時間反復的修改,且不夠準確,靈感轉瞬即逝且效率低下。而現在,通過Leap motion,即可享受一種全新的控制方式,這種方式更為直接,更為直觀,更為準確,更為流暢。試想一下通過手部的動作,即可控制樂器的強弱,演奏技法,效果器的參數。通過Leap motion體感控制器,將我們的肢體運動與音樂結合起來,一方面更富有表演性,能夠使人看到更多的控制過程,使音樂不再是靠聽,將視覺與聽覺結合起來,更富有藝術性。另一方面,通過手的運動,可以像指揮家一樣控制自己的虛擬樂團,使音樂創作更具可玩性,而不是枯燥的寫入各種控制信息。
Leap motion同樣適用于現場音樂表演。通過巧妙地設置和練習可以運用在現場打擊樂演奏上。使用一個或多個Leap motion控制器的組合,可以組成一套空氣鼓,即用手勢觸發各個鼓的部件,用鼓棒隔空演奏虛擬架子鼓。創造出一種全新的表演方式。在DJ表演現場,通過Turntable的配合使用,使用手部的動作信息控制各種音頻效果器,控制碟盤的前進、后退、加速、倒放等,產生一種或多種音響效果的組合。控制器的使用,代替了傳統打碟機,更加方便,快捷,高效。Leap motion與Muse的組合能發揮更強大的作用。Muse是為Leap motion開發的一款控制軟件,使用Muse可以用來演奏復雜的和弦、多個聲部的聲音、錯綜復雜的節奏,且可以自由的升降調。使用Muse時,將手掌放到距離屏幕近距離時,可以對音色、混響、聲像等參數進行控制,當揮動手指時,即可加入和聲、嗡嗡聲、和各類效果聲音,當我們打開Auto muse功能時,隨即觸發了軟件內的琶音器,讓軟件自由的演奏,同時還可以疊加上各種聲部。通過手勢的操作,可以調節效果器的混合量和EQ。
Leap motion已經不再是一個單純的硬件設備,它已經成為一種平臺,開發者可以根據不同的需要寫出各類新奇實用的軟件,來達到不同的效果。如果說以前的創作方式是在紙上寫完譜子再找樂手演奏,那么現在,通過使用一臺筆記本電腦和體感控制器,即可一個人完成所有的事情,一個DJ只用一臺筆記本電腦和Leap motion就能得心應手的演奏。從此,音樂的創作從靈感的迸發,到樂器的演奏到成品音響的呈現,一切都是那么簡單和自由。
音樂的發展離不開科技,科技的靈感源自音樂。從而使在我們創造音樂的同時,更注重音樂的內涵,讓音樂回歸于它最美好,最純潔的本質——感動人心。