電影聲音后期回套工藝要點解析

王 玨

(北京電影學院聲音學院,北京100088)

隨著中國電影工業化進程的加快,聲音制作流程的規范和高效越來越受到人們的重視,這一目標的實現取決于聲音部門和畫面部門的共同努力。在時間碼技術逐漸普及的今天,采用聲音后期回套工藝的必要性正在凸顯,但這一需要聲畫部門協作的工藝在實踐中遇到了各種各樣的困難,操作過程的不規范導致的元數據丟失使得回套難以成功,極大地打擊了使用該技術的積極性,阻礙了電影聲音制作工業化的發展。電影聲音后期回套工藝的實施是個系統性工程,涉及從同期錄音、數據管理、畫面剪輯、聲畫部門數據傳輸以及聲音編輯的各個環節,本文擬對其中的要點加以解析,梳理電影聲音后期回套工藝的流程和技術要點。

1 電影聲畫同步與聲音后期回套工藝

電影采用雙系統拍攝時,聲音與畫面記錄在不同的媒介上,后期制作時需要將兩者在同一媒介上同步。達到這一目的需要滿足兩個條件,第一是使聲音和畫面在播放起始點上對齊,即起點同步;第二是聲音與畫面要按照拍攝時的速度播放,或者以相同的比率變速,才能在起點同步的基礎上達到播放過程的同步。模擬時代的聲畫同步采用場記板拍板,將板合的第一幀和“啪”的合板聲對齊,就找到了聲畫同步的起始點,然后依靠晶體振蕩器來控制攝影機和錄音機的轉速穩定以保證過程同步。數字時代到來時,時間碼取代磁帶上的導頻脈沖信號成為聲畫同步的參考點,一并解決了起點同步和過程同步的問題。只要保證音頻文件和視頻文件具有相同的穩定運行的時間碼,在工作站上把兩者按時間碼對齊就完成了同步。

現場拍攝時的時間碼記錄已經不是一個難題,通過時碼追蹤(jam sync)接口,攝影機和錄音機都可以調整自身時碼與外接時碼保持一致。單獨的時碼發生器(時碼盒)被用來給攝影機和錄音機提供時碼參考,其精度由晶振控制,可以滿足嚴苛的系統要求。為便于記錄和查找,時間碼通常會按照拍攝時的實際時間來設置,并且每隔3～4小時做一下校對,以保證攝影機、錄音機的時碼運行統一。

傳統的電影聲音制作方式,是將現場錄制的同期聲交給畫面剪輯部門,由畫面剪輯部門完成音頻素材和視頻素材的同步,并用同步好的聲音和畫面進行剪輯。畫面定剪后,給聲音部門提供參考畫面,以及從視頻工作站上導出的OMF或AAF文件,聲音部門在音頻工作站上利用參考畫面和OMF/AAF文件展開后期制作。這種工作模式的缺點是,畫面剪輯師需要帶著全部的同期聲軌來完成剪輯,當聲音是由多只話筒記錄的多軌信號時,會導致畫面剪輯工程上的聲軌過多,不僅讓剪輯師的工作變得繁瑣,還因為這些沒有精剪過的聲軌疊加在一起,很可能產生染色效應,嚴重影響監聽質量。另外,聲音后期制作所用的同期聲完全依賴于畫面剪輯部門輸出的OMF/AAF文件,也可能因剪輯師操作不當而存在一些風險,比如因聲軌操作失誤造成同期聲丟失,甚至因采樣率、量化比特率選擇不當而帶來音質損失。

為了便于畫面剪輯,以及給聲音編輯提供最大的靈活度和最佳聲音質量,更為理想的制作方式是在同期錄音時除了將各個話筒的聲音分軌記錄外(isolate tracks),還進行現場混音并錄下混音軌(mix tracks)。分軌記錄保證了各個話筒信號以最佳信噪比單獨記錄,后期制作時可以有充分的時間,在標準監聽環境下對素材進行挑選和混合,以獲得最佳的音色、空間感和動態,現場混音則在保證信噪比的基礎上得到了較高質量的混合信號,為畫面剪輯提供了最佳聲音參考。混音軌的數量一般是2軌,分別記錄吊桿話筒的混合信號和領夾話筒的混合信號。這兩組混合信號被提供給畫面部門以完成聲畫同步剪輯,畫面剪輯用到的聲軌數大大減少,并且經過現場混音的聲軌具有較高的質量,這極大地減輕了畫面剪輯師的工作負擔。畫面定剪之后,將攜帶現場混音軌的工程文件(OMF或AAF)、參考畫面(MOV)和聲音定剪單(Audio EDL)交給聲音部門,聲音部門在音頻工作站上根據元數據(metadata)信息,利用從同期錄音師或畫面剪輯師手里拿到的原始同期素材和場記單,將同期分軌素材按照定剪后的時間標尺自動回套(post conform)到聲音工程文件上,從而達到利用原始同期分軌素材進行聲音后期編輯的目的。這一用混合聲軌作為參考軌完成畫面剪輯、自動采集原始同期分軌對齊剪輯點的過程就是電影聲音后期回套,其重點在于從同期錄音到聲音編輯的各個環節要實現有效的元數據管理,元數據在音、視頻部門之間傳輸時不能損壞或丟失,只有在嚴格的流程控制和規范的操作之下才能確保回套成功。

2 元數據的記錄與管理

聲音回套要依托記錄在聲音文件里的元數據信息。所謂元數據,就是關于數據的數據。對聲音文件來說,指除了音頻信號之外,文件中所包含的用來說明音頻信號自身參數的數據。聲音文件的元數據主要包括以下信息:聲音卷號、文件識別碼、文件用戶名、文件備注、文件類型、文件大小、時間碼信息、采樣頻率、量化比特率、聲軌信息、錄音日期等。聲音卷號(Sound Roll)也叫聲音帶號(Tape Ref),代表聲音文件所處的文件夾,一般用拍攝日期或拍攝天數命名,比如18Y10M19或Day_18。文件識別碼(Index File ID)是錄音機分配給聲音文件的唯一識別碼,如AATON的Cantar X3錄音機分配給某個文件的識別碼IO8866,該識別碼從錄音機啟用起就不會重復,無論文件怎樣命名,其識別碼都是唯一的。文件名(File Name)一般以該文件所對應的場號(Scene)、鏡號(Shot)、鏡次(Take)來命名,比如54場1鏡1次的文件命名為54-1-t1,美式打板將場號和鏡號合并,形成場鏡合一信息和鏡次信息,并用字母來代替鏡號,54場1鏡1次記錄為54A-t1,54場2鏡3次記錄為54B-t3,以此類推。結合文件識別碼和文件用戶名,每個文件都有了唯一的識別標志。文件備注(Notes或Comments)是用戶給文件寫入的備注信息,比如OK條或NG條信息、單收信息(wild track,不帶畫面的聲軌)、演員和景別信息等。文件類型(Type)指的是文件記錄模式,分為復合通路模式(Polyphonic,單一文件里包含多條聲軌)、雙通路模式(Stereophonic,單一文件里包含兩條聲軌)和單通路模式(Monophonic,單一文件里只有一條聲軌)。文件大小(Size)是文件所占用硬盤空間大小,如54.5MB。時間碼信息包括文件的起始時碼(TC Start)、結束時碼(TC End)和時長(Duration或Length)。采樣頻率(Sample Rate)一般采用48kHz(也有用96kHz高采樣率錄音),量化比特率(Bit Depth)一般采用24bits(也有用32bits錄音)。聲軌信息(Tracks)用來描述錄音機里每條聲軌的大致分配,如Track1為Mix LBoom,Track2為Mix R-Lav,Track3、Track4為Boom1、Boom2,Track5、Track6為Lav-Wu、Lav-Yu等。錄音日期(Date)為具體的拍攝日期,如2018-10-19等。

不同的錄音機具有不同的元數據記錄能力,高端錄音機能記錄完整的元數據。要實現分軌素材回套,需要元數據里包含有能找到該文件的基本信息,包括文件名稱和地址信息,涉及聲音卷號、文件名、文件類型、時間碼等。同期錄音常見的WAV文件包含的元數據有文件名、音頻編碼格式(PCM或MPEG)、通路數(WAV文件內部所包含的通路數。采用復合通路模式記錄時,看上去是單個的WAV文件實際上可能包含4、6、8甚至更多條獨立通路,用來記錄多軌數據。這樣的多軌單文件將多條分軌信號綁定在一起,比單軌記錄的多個文件更有利于管理和傳輸)、采樣頻率、量化比特率等,但不包含時間碼信息。BWF(Broadcast Wave Format)文件是WAV文件的擴展格式,除了WAV文件里已有的元數據之外,還在廣播擴展塊(BEXT)里儲存了更多的元數據,如對文件創建人或出品人的說明、文件創建日期和時間、聲音卷號、時間碼信息、版本、素材標識等,其中的時間碼信息為聲音回套提供了地址,豐富的元數據使其成為同期錄音的標準格式。

圖1 AATON Cantar X3導出的PDF場記單

圖2 AATON Cantar X3導出的CSV場記單

圖3 AATON Cantar X3導出的ALE轉換成Excel文本

規范的場記單能為元數據管理提供參考,有利于素材回套和尋找替條。錄音過程中可以自動或手動寫入元數據,高端錄音機能自動生成信息完備的電子場記單。場記單的標題欄包含所有音頻文件的共有信息,如片名(Project/Title)、制片方(Production)、導演(Director)、錄音師(Sound Mixer)、錄音機型號(如Cantar 200)、時間碼幀率(TC fps,如24Fps)、參考電平(Tone level,如-20dB)、采樣頻率(Fs,如48kHz)、量化比特率(Bits,如24bits)、文件類型(Type,如Polyphonic)、存儲媒介(Media,如USB)等,另外還可以添加錄音師聯系方式(EmailPhone)等用戶信息。針對每條音頻文件,場記單主要體現出文件名、時間碼信息和聲軌分配信息等。

電子場記單有PDF、CSV和ALE三種格式,PDF簡潔清晰,便于觀看。大部分錄音機支持CSV格式輸出,可以在Mac OS中預覽,也可以用Numbers或Excel導入,便于對數據進行修改整理。ALE全名Avid Log Exchange,即Avid日志交互文件,它不僅具有場記單功能,更重要的是它可以在不同的軟件系統上導入、導出并傳輸元數據。同期錄音時,AATON的Cantar錄音機支持ALE導出;主流的DIT和調色轉碼軟件如Silverstack、DaVinci、Livegrade等都支持與ALE交互;畫面剪輯時,Avid的Media Composer可以將素材屜(Bin)里所有素材的數據導出為ALE文本,并可以手動選擇需要導出的元數據種類,也可以導入ALE,將其中的信息合并進素材的已有信息里。ALE不僅包含自動記錄的元數據,還允許手動修改和增減,并將新的元數據合并進素材,使之跟隨素材在平臺間轉移。

3 音視頻文件交接及元數據在平臺間的轉移

就音頻而言,元數據在平臺間的轉移涉及從現場拍攝的記錄媒介(如SD存儲卡)轉移到DIT(Digital Imaging Technician)部門的數據管理媒介(如DaVinci),然后進入視頻剪輯媒介(如Avid的Media Composer),最后進入聲音編輯媒介(如Pro Tools)。無論是聲音回套還是版本修改,元數據都會給工作帶來很大的便利。

在電影制作全面數字化的今天,后期制作的第一步是將拍攝素材交給DIT部門,由DIT部門完成轉碼后交給畫面部門進行剪輯。聲畫合板既可以由DIT部門完成,也可以由畫面剪輯部門完成。經驗豐富的DIT工程師會同時負責合板,如果經驗不足則有可能造成元數據丟失。

DIT部門的合板工作通常在DaVinci、Silverstack里完成,可以實現批量合板,出現問題的原因在于合板后沒有正確導出元數據。要避免元數據丟失,在把合板后的素材給到剪輯部門的同時,需要在DaVinci里導出ALE文件,然后在Avid里導入該文件,選擇“Settings – Import - Shot Log –Merge events with known master clips”,把ALE拖拽到Bin里的素材上,就能使因平臺轉換而丟失的元數據并入從DaVinci給到Avid的素材里,這樣Avid里的元數據就完整了。

圖4 從DaVinci導出ALE文件

圖5 從Avid導入ALE合并元數據到現有素材

如果在Avid里合板,只需要選中所有的音頻素材和視頻素材,然后選擇“autosync”,就能批量合板并生成音視頻合并的子素材(sub-clip)。Avid可以導入、導出ALE文件,如前所述,導入ALE文件可以將來自其他平臺的元數據并入現有素材,導出ALE則可以將元數據送往其他平臺,比如用于調色或套底。如果在FCP7或PR里合板,借助第三方插件可以實現批量合板,否則只能單個文件合板。FCP7不能導入、導出ALE文件,輸出端只能出OMF文件。PR能導出ALE文件,但不能導入,輸出端能出OMF和AAF文件。

畫面剪輯完成后,剪輯部門將參考畫面、OMF/AAF文件和音頻定剪單(EDL)交給聲音部門,必要時還要移交原始同期錄音素材和場記單,就完成了剪輯部門和聲音部門的文件交接。

Pro Tools支持的參考畫面格式包括QuickTime封裝的.mov格式和MXF封裝的.mxf格式,Pro Tools 10以及更早的版本僅支持QuickTime封裝的視頻,Pro Tools 11及之后的版本采用了Avid Media Composer同樣的視頻引擎,可以原生支持QuickTime封裝的視頻和MXF封裝的高清視頻。MOV格式內部編解碼(codecs)可選擇Avid的DNxHR(支持4K分辨率)或DNxHD(支持HD分辨率)、Apple的ProRes 422(包括HQ、LT或Proxy,碼率由高到低)、H.264、DV25或DV50(標清視頻)。注意QuickTime播放條件下也可以采用MP4或M4V進行封裝,但這兩者只能采用H.264進行編解碼(采用其它方式編解碼則無法在Pro Tools上播放)。MXF是專業視頻通用格式,除了Sony、Panasonic等攝影機采用該格式外(內部編解碼采用XAVC-Intra、AVC-Intra、XDCAM HD/EX等),它也是Avid的標準視頻封裝格式(內部編碼采用DNxHR或DNxHD,也可以采用ProRes 422),Avid視頻工作站在剪輯之前一般會把畫面轉碼成DNxHD或DNxHR并封裝成MXF OP-Atom這樣的剪輯格式,放到Avid MediaFiles文件夾。在剪輯完成后,輸出視頻也會是DNxHD或DNxHR的MXF OP-Atom(.mxf)視頻。從穩定性和流暢度來看,采用DNxHR/DNxHD編解碼的MXF格式支持度最高,但從最大的播放兼容度來看,最常見的是采用DNxHR/DNxHD編解碼的MOV格式,其次是采用ProRes 422編解碼的MOV格式。H.264不僅占用電腦資源,而且不夠穩定,不做推薦。綜合來看,常用格式為DNxHR/DNxHD編解碼的MOV格式,幀率24fps,按照20～30分鐘時長分本,在畫面上添加水印(比如DI To Sound 20190806)和剪輯時碼、鏡頭時碼、版本號等明碼(burn-in),并在頭尾添加標準利達片(Leader)。

圖6 從Avid選擇編解碼格式導出視頻文件

圖7 從Avid導出AAF文件

OMF和AAF都是用來實現跨平臺文件轉移的媒體交換格式。Avid公司于1992年推出OMF(Open Media Framework Interchange),即開放式媒體框架交換文件,將視頻工作站上的聲音剪輯數據(聲音素材來源、聲音素材在時間線上的位置、剪輯動作參數等)轉移到音頻工作站,并設置過渡幀尺寸(Handle Size)來保證音頻塊剪輯點前后的素材預留。由于出現的時間較早,OMF對早期視頻剪輯軟件的兼容性較好,很多視頻剪輯軟件都能導出OMF,但它對內嵌的單個文件有2G的容量限制,并且導出時不會保留音頻片段的元數據信息,導致片段的文件名和時間碼丟失。

AAF(Advanced Authoring Format)即高級制作格式,是Avid和微軟聯營的AAF協會在OMF基礎上開發的功能更為強大的媒體交換文件,除了不再有內嵌單個文件小于2G的限制之外,它還保證了文件交換過程中元數據的完整性,提供了比OMF更穩定、抗故障能力更強的文件交換。AAF攜帶了盡可能多的元數據,讓源文件信息在新的媒介中得以保留,也讓復雜的編輯、合成和特效信息在后期制作的不同設備和平臺間充分傳遞。交給音頻部門的AAF文件既包含了視頻工作站上的剪輯數據,也保留了每個音頻片段的原始文件名和時間碼信息,從而方便進行聲音后期回套。

圖8 從Avid導出音頻EDL,保留源素材的文件名和卷號

音頻EDL(Audio Editing List)是由視頻工作站生成的剪輯單文件,標準格式是CMX3600,另外還有File16、File32格式,里面包含每個剪輯單元的剪輯動作、聲音通道信息、素材來源、源素材時間碼和在剪輯時間線上的時間碼等。利用第三方軟件如Ediload,聲音部門可以通過EDL完成聲音回套,也可以通過對比不同版本視頻輸出的EDL來完成聲音剪輯工程的自動修改。

4 音頻工作站上的聲音回套和版本修改

圖9 將混合聲軌設為同期錄音機參考軌

圖10 選擇所需匹配的文件包所在位置

畫面剪輯部門通過AAF將剪輯好的工程文件和元數據傳遞給聲音部門后,在PT 10以上的版本中,聲音回套的操作很容易完成。由于混合聲軌與同期分聲軌具有相同且唯一的時間碼,選擇好聲音卷號,回套可以在一瞬間完成。AAF在Pro Tools上打開后,在混合聲軌的名稱位置點擊鼠標右鍵,將其設為同期參考軌(Field Recorder Guide Track),然后選擇同期分軌素材所處的文件包(Select Areas to Search),檢查需要匹配的數據(Field Recorder Channels Match Criteria),確認完成后點擊擴展通路到新的軌道(Expand Channels To New Tracks By Match Criteria),工作站將把同期分軌素材按照混合聲軌在時間線上的剪輯點,擴展成新的聲軌并自動對齊到工程文件中。

圖11 檢查回套時需要匹配的參數

圖12 選擇按匹配條件將原始分軌素材擴展到新的軌道上

圖13 同期分軌素材擴展成新的軌道且剪輯點自動對齊

OMF或AAF里的元數據不完整時,利用EDL結合Ediload軟件也能完成聲音回套。在Ediload上導入Avid輸出的EDL,選擇按聲軌或按時間線合并多個EDL文件(每個EDL包含4條聲軌,多于4條聲軌需要多個EDL;不同本畫面的起始時間不同,如第一本畫面是01∶00∶00∶00,第二本畫面是02∶00∶00∶00,按時間線合并可以把它們的EDL合并在一起,放到同一個Pro Tools工程中),可以將多本畫面及多條聲軌的EDL合并在一個文件里,對EDL進行清理,最后導出為Pro Tools工程文件(Pro Tools Session - Conform Ref Tracks),新推出的Ediload V4還可以導出AAF文件。由于所導出的工程文件里的參考軌包含了完整的元數據,就可以將其設為同期參考軌(Field Recorder Guide Track)完成同期分軌回套。

如果需要修改畫面,務必攜帶參考聲軌一起剪輯,修改完成后出V2版的畫面和EDL,聲音部門利用Conformalizer、Ediload等第三方軟件,對比V1和V2版的EDL,點擊conform完成Pro Tools上的音頻剪輯點修改。如果增加了新的場次,Pro Tools上沒有新增部分的音頻,則需要畫面部門重出新增部分的AAF,將增加的音頻導入到音頻工作站中來。Ediload還可以直接導入AAF或FCP7 XML,來完成畫面修改后的Pro Tools工程修改。

圖14 將Ediload上的EDL導出為PTX工程

綜上所述,電影聲音回套的必要條件,是在同期錄音時采用BWF文件格式,記錄下完整的音頻元數據信息,包括文件名、時間碼信息和帶號信息;在轉碼和視頻剪輯環節保證元數據的完整傳輸:用Avid MC來合板有利于保留元數據,用DaVinci Resolve合板則要導出ALE文件,并在將音視頻素材給到Avid 時,在Avid里導入ALE,將元數據合并到Bin里,使Bin里的素材元數據完整;在聲畫部門交接環節,通過AAF文件交接有利于元數據的傳輸和回套,通過OMF文件交接時因無時間碼信息,需要出音頻EDL,并利用Ediload導入EDL來輸出PTX或AAF文件,讓元數據完整地傳輸到音頻工作站;在音頻工作站上的聲音回套,將來自AAF文件的參考軌設定為同期錄音機參考軌,利用Pro Tools 10以上版本自帶的同期聲回套功能即可完成回套。如果涉及畫面版本修改,由畫面部門輸出新版本的參考畫面、AAF和EDL,利用Conformalizer、Ediload等第三方軟件對EDL的版本進行比較,通過Conform操作完成對Pro Tools工程的修改。總之,只要保證了元數據的有效記錄和完整傳輸,就可以成功實現電影聲音回套,使剪輯流程更加科學而高效。