VR（虛擬現實）電影聲音制作流程探析

羅興

（江西財經大學軟件與通信工程學院，江西 南昌 330032）

VR（虛擬現實）電影聲音制作流程探析

羅興

（江西財經大學軟件與通信工程學院，江西 南昌 330032）

VR電影作為一種新型的觀影模式，越來越被大眾所熟知。要想實現最佳的觀影效果，電影制作過程中對于聲音的加工至關重要。VR電影的聲音加工和傳統的聲音編輯既有相同點又有不同點，簡單來說，VR電影的聲音加工要更加復雜，因為要采用3D環繞聲的形式，同時觀影方式一般是采用穿戴式設備播放，這就要求聲音播放的時候需要配合觀影人員的動作、視角等進行調整，從而使觀影者如身臨其境。本文對VR電影聲音制作的整個流程進行梳理，并且對常見的一些工具和適用范圍等做簡要介紹。

VR電影；VR聲音制作流程；拾音；聲音編輯混錄；聲音導出

VR電影通過各種特效，讓觀影者如身臨其境。為了讓受眾有這種感受，一般采用的聲音制作方式為三維環繞聲格式，這能帶給觀影者最大程度接近現實生活的視聽感受。其中，最為基礎的是耳機還放技術，采用兩聲道的虛擬環繞聲的形式進行播放，通過結合頭部相關傳輸函數編碼，配合頭部跟蹤數據，實現不論觀眾頭部如何轉動，聲音仍舊保持在原來的方位上，使觀眾產生聲音是獨立于耳機存在的幻覺。VR電影的聲音制作先要進行前期錄音再進行后期制作，然后將輸出的聲音母帶和畫面合成，才能獲得最終用來發行的電影母版。不同于傳統電影的是，在制作的過程中要考慮如何收錄三維聲場里的聲音，以及如何能夠確保實現耳機還放技術，如何使聲畫同步以及如何進行聲音母帶輸出、選用哪種合適的輸出模式等。

1 拾音環節

拾音環節就是在電影聲音制作過程中，用于素材收集的環節。常見的包括同期聲錄音中對于對白的錄音、單獨對音響效果或環境聲的錄音，以及后期制作時的模擬音等。在VR電影中，聲音錄制主要采用以下三種形式：雙耳拾音技術中的人工頭或類人工頭拾音，聲場合成技術的原場傳聲器拾音，以及記錄水平和高度信息的環繞傳聲器進行拾音。這三種方式各有各的特點。

首先，雙耳拾音技術中的人工頭或類人工頭拾音，主要是采用模擬人耳聽覺的外部模型的方式進行聲音素材的采集。其特點是便于操作，簡單便攜且清晰明了［1］。這種技術比較適合于用耳機收聽，如果是用揚聲器收聽聲音的話，會因為其技術局限性導致電影聲音HRTF信息不能完全匹配，導致聲音信息重現，從而出現誤差。

其次，聲場合成技術的原場傳聲器拾音，本質上是一種球形三維環繞聲拾音技術。它的優點是對于不同格式的揚聲器設置都有很高的適應性。這種技術分為一階原場系統和高階系統，一般情況下，階數越高代表通道數越多，可以輸出的數據量也就大大增加。因為能夠對聲音進行全方位記錄，可以支持任何方向的視角轉換。相較于前種拾音方式，該方式的三維空間有更好的表現力。

最后，記錄水平和高度信息的環繞傳聲器進行拾音，相較于前兩種拾音方式，聲場的整體性和連貫性有所欠缺，但是獲得的聲音聲道分離度較好，便于聲音后期加工制作。

2 聲音編輯與混錄環節

VR電影在聲音編輯和混錄環節和傳統電影存在很大不同，主要體現在以下三個方面。

2.1 3D視頻還放

為實現聲音編輯效果，要求3D視頻還放最好是可以實現球形視頻在電腦屏幕上的還放，并且可以使用鼠標來調整觀看的角度，這就需要一些專業軟件的支持，傳統的頭戴式設備是不能實現的。

這里不得不提的是以下兩個軟件：Kolor Eyes軟件，可以支持上述還放模式；SpookSyncVR軟件，可以實現音視頻視聽角度同步，從而可以讓聲音編輯師在編輯過程中實時掌握編輯情況，簡化編輯過程，使編輯工作更加直觀、高效。

2.2 音頻工作站及空間處理插件

在完成聲音素材的收集后就需要對聲音素材進行編輯，VR電影中的聲音編輯工具主要是能夠實現多路母線輸出的音頻工作站和可以完成空間聲音處理的插件。原則上來說，只要是可以實現多路母線輸出的音頻工作站都可以用來制作VR視頻，如常見的Nuendo、ProTools HD、Reaper，三者支持的母線輸出數量不同，分別為12路母線輸出、8路母線輸出、64路母線輸出。不同的VR電影需要的母線輸出數量也有所不同，所以具體聲音編輯的音頻工作站的選擇最后還是需要根據電影的實際情況進行判定。

而VR聲音在三維空間感處理和三維空間內聲音定位的操作，就需要用專門的全景聲制作軟件來完成。比如，用于VR的杜比全景聲軟件就包含四個工具，即用于實現3D聲像定位和元數據生成的Dolby Atmos Panner Plugin for Pro Tools，將音頻和輸出的元數據加工成可應用于杜比的格式的VR Renderer，對所有聲音對象的空間定位等進行監看的Monitor Application和用于視頻還放的Video Player，每個環節都不可或缺。這些工具保證監聽時可以實現實時雙耳監聽，輸出的母版格式多樣，這樣就確保了文件的高適配性［2］。

2.3 監聽

VR電影一般采用的監聽方式為耳機監聽，這就需要對工作站的監聽信號進行處理，實現雙耳實時渲染并同時輸出給耳機。這項技術的實現主要是依靠現有的用于VR聲音制作的插件，這些插件實現雙耳的渲染輸出，一般采用的方法是通過對元數據加入現有的HRTF函數從而達到一種仿真效果。這樣，呈現在耳機中的聲音就可以重現聲音在三維空間的位置，從而實現虛擬全景聲監聽和頭部跟蹤。

3 聲音導出環節

在對聲音素材完成編輯混錄等加工過程后，需要將聲音母版導出，再和視頻進行合并，得到的文件再送往各個播放平臺，這才是最終能夠進行播放的電影。

隨著科技的進步，觀影體驗要求的提升，相應的VR電影聲音制作技術也會持續發展。市場上能夠用于VR電影聲音制作的各種工具也會不斷被開發出來，原有的工具也會進一步完善。專家也在不斷努力尋找從前期素材收集的拾音階段到后期的編輯混錄、母版輸出、監聽和播放一體化的解決方案。發展較早且相對成熟的游戲聲音制作工具和方式也為VR聲音的制作提供了很多思路和參考。未來的VR聲音制作較現在一定會更加進步，在保證觀影者有良好體驗的同時，也能實現操作加工過程的便捷性，這對于VR電影的推廣、發行也極為重要。

［1］李芳瑜.VR（虛擬）技術在電影制作中的實際應用及影響研究［J］.藝術科技，2016（9）：45-46.

［2］姜荷.VR虛擬現實技術下影像表現形式的可行性分析及對電影產業格局的沖擊與挑戰［J］.當代電影，2016（5）：134-137.

Analysis on the Production Process of VR Movie Sound

Luo Xing
（School of Software and Communication Engineering,Jiangxi University of Finance and Economics，Nanchang Jiangxi 330032）

VR film as a new mode of viewing,more and more known by the public.In order to achieve the best viewing effect,the film production process for the sound processing is also essential.VR film sound processing and traditional sound editing both have the same point and different points,simply VR film sound processing to be more complex,because to use the form of 3D surround sound,while viewing mode is generally used to wear Equipment playback,which requires the sound when playing the need to be able to achieve with the viewing staff of the action, perspective and so on to adjust,so as to maximize the viewers to achieve immersive perception.This paper summarized the whole process of VR film production,and give a brief introduction to some common tools and scope of application.

VR movie；VR soundproduction process；pickup sound；edit sound mixing

J933

A

1003-5168（2017）07-0017-02

2017-06-03

羅興（1995-），男，本科在讀，研究方向：軟件工程。