鄭勇

2022年,黨的二十大報告提出“加快發展數字經濟,促進數字經濟和實體經濟深度融合”。在過去幾年中,優酷推動數字技術在影視行業的應用,通過幀享數字化制作、影視資產數字管理平臺、云尚制片等行業解決方案,加速行業數實融合。
幀享數字化制作,通過整體解決方案為劇組拍攝降本增效
為了能夠通過技術創新幫助劇組提升拍攝制作能力,幀享從2019年開始布局數字化制作業務,從產業發展和劇組的真實需求出發,打磨出一套完善、先進、穩定的數字化制作整體解決方案,通過LED屏幕作為數字背景的方式,提升了拍攝效率與效果。2022年末,幀享整體解決方案完成了從1.0到2.0的迭代。
在1.0時代,幀享重點攻克了遠景的拍攝,主要包括窗外景和車戲兩個場景,使用LED屏幕配合數字資產,打造逼真的外景效果,替代傳統綠幕或實景拍攝方案,演員與導演等主創團隊能夠在更真實可見的場景中完成表演與拍攝,同時不受外景天氣、光線等客觀因素限制,提升拍攝效率。
在窗外景和車戲的拍攝中,對比綠幕拍攝,幀享方案能夠節約50%預算、提升30%拍攝效率,也是憑借這一亮眼的效果,幀享目前已經服務上百項目,拿下國內影視劇LED數字背景拍攝方案80%的市場占有率。
在2.0時代,幀享重點建設了兩個獨特能力——虛擬拍攝OS與數字資產平臺。這也是整體幀享方案中關乎穩定性與可持續性的兩個基石:生態拓展與資產積累。幀享虛擬拍攝OS是一套基于自研算法與技術的軟硬件生態體系,以幀享主控系統為核心,打通周邊各類軟硬件合作與開發,從影視級屏幕、播控和渲染服務器到現場資產呈現與實時調整等,幀享有能力做到端到端的全流程把控,為拍攝現場的效果與穩定性負責。
數字資產作為整套方案中“降本與效果”的關鍵,幀享做了重點打磨。目前,幀享數字資產平臺上有超過5000條可復用的標準化資產,覆蓋各類街景、標志性建筑、不同季節天氣等,都經過了幀享實驗室獨家標準化流程,并且“一套資產”能夠同時滿足離線渲染要求和實時演算的“雙重需求”,極大提升內容質量和拍攝效果,構建虛擬拍攝的落地可能。
在圍繞數字化制作的技術探索與建設過程中,幀享打造了通過iPad終端進行實時后處理的現場調整能力,考慮到LED數字背景通常會與現場實景與燈光進行配合,但數字資產制作環節在前,會出現部分資產與現場環境在亮度、色溫、色調等方面無法完美匹配,需要臨時調整與美化,為保障現場拍攝進度不受影響,幀享LED數字背景拍攝方案,通過提高硬件設備運算能力,優化圖像處理算法,使播控服務器在播放數字資產的同時能夠進行實時后處理,實現根據現場環境對數字資產進行實時調整。通過iPad遠程控制終端,能夠對LED屏幕陣列內容進行智能的進行區域分割,針對每一塊區域,進行獨立的亮度,色溫,飽和度,色相,以及自定義Lut的調整,且這些調整都可以隨著時間的推進而漸變,通過以上調整,不僅能解決數字資產與現場環境不匹配的問題,還能給導演更多的創作空間。
另外,對于“如何保證更好的拍攝效果呈現”這一問題,幀享從技術層面對數字資產的色階、色偏、摩爾紋等業內難題進行了深入研究,提供了一套行之有效的解決方案。
數字資產中一片顏色接近的區域,如天空,墻面等,當這些區域的顏色不能柔和漸變,而是出現了斷層時,就會出現一條條顏色漸變的色帶,即色階問題,這通常是由顏色位深不足或視頻過度壓縮引起的,幀享方案通過標準化的數字資產制作流程、深度定制的軟硬件,以及行業領先的轉碼算法和色階矯正算法,能保障整個視頻處理過程都支持10bit以上的色彩位深,從而完全解決色階問題。
LED屏幕陣列上呈現的畫面色彩與數字資產真實的色彩存在一定的偏差,既包括畫面整體的色彩偏差、局部色彩與整體不一致,也包括攝像機拍攝角度不同時的色彩差異。導致整體的色彩偏差的因素有很多,如LED屏幕色域覆蓋范圍限制,LED屏幕色域與數字資產色域不一致,數字資產與LED屏幕Gamma曲線不一致,LED屏幕的服役過程中正常的亮度衰減,LED屏幕溫度過高導致的光譜變化,播控軟件或顯卡驅動等軟件后處理引入的色彩偏差,發送卡、視頻處理服務器等硬件設備中內置調色功能引入的色彩偏差,解決這類色彩問題,需要獲取到鏈路上各個節點輸出的色彩數據,將色彩數據與數字資產原始數據進行比對,分析引入色差的模塊,再對相應模塊進行針對性的調整。對于整體色偏和色彩不一致問題,幀享方案是通過軟硬件認證、全鏈路監控系統、色彩矯正算法來解決。幀享方案中接入的播控軟件、顯卡、發送卡、視頻處理器,LED屏幕全部通過了幀享數字化制作認證,各節點支持的色域范圍,允許開啟的調色能力都有嚴格的限制,各節點對色彩的處理效果都經過單元驗證;幀享數字化制作方案中接入的軟硬件設備都要求開放設備型號,規格參數,輸入輸出兼容能力的查詢接口,幀享全鏈路監控系統會收集這些信息,規避色域設置不匹配、型號差異過大等導致色偏的問題。對于LED屏幕批次差異引入的局部色偏,幀享數字化制作方案中提供了能夠進行局部色彩矯正的能力,在有限硬件條件下解決此類問題。對于拍攝角度不同導致的彩色差異,幀享案定制的LED屏幕在生產設計階段就考慮到了此問題,因此在屏幕設計時就增大了屏幕的有效可視范圍,為攝像機提供了更大的拍攝空間。對于外部燈光的影響,幀享數字化制作方案提供了實時的局部亮度、色溫調節的能力,能夠很好地適配現場燈光的變化。
當使用攝像機對著LED屏幕進行拍攝時,在攝像機拍攝的畫面中,有時會看到帶狀或水波紋一樣擴散的紋路,即摩爾紋。通過肉眼直接觀察LED屏幕不會觀察到摩爾紋,它只出現在攝像機拍攝的畫面中。摩爾紋是一種光學現象,光線從LED屏幕發出,經過屏幕上涂抹的保護凝膠、空氣、其他可能的遮擋物,如玻璃、煙霧、攝像機透鏡,到達攝像機感光元件,所有這些光路通過的物體,都會對摩爾紋的產生有影響,除此之外,屏幕的像素密度,攝像機的拍攝角度,攝像機與屏幕的距離,攝像機的焦點,焦距也都能影響摩爾紋的產生。經過實踐驗證,我們找到了一些方法能夠減弱摩爾紋的影響。減小現場攝像機的景深,將焦點盡量放在LED屏幕前面的物體上,虛化LED屏幕的內容;調整攝像機的角度或攝像機到LED屏幕的位置,在某些角度和拍攝距離下,摩爾紋會更弱;減小LED屏幕的像素間距,也可以減弱摩爾紋現象。幀享方案采用特殊定制的LED屏幕,在LED屏幕的生產設計階段,就考慮到虛擬拍攝應用場景下對LED屏幕的特殊要求,因此我們要求屏幕的像素間距在2.5mm以內,最大限度的減少了摩爾紋的出現。
基于對影視制作的研究與持續的應用打磨,幀享才能夠挖掘到實拍中真正會遇到的問題,通過自研算法進行解決。而在這一過程中,幀享也有自己的“測試與拍攝基地”。早在2020年,幀享就建設起第一個數字影棚,2023年也對影棚進行了全面升級,配備影視級LED屏幕、多套業界領先的媒體服務器與媒體渲染器、專業動捕與光學追蹤方案,現場也有專業的技術服務支持團隊,幀享數字影棚是現在國內領先的能實現LED數字背景拍攝、XR拍攝、綠幕拍攝、動捕面捕等全方位制作功能的數字化制作基地。目前,幀享影棚已經在全國多個城市落地,包括北京、廈門、寧波,未來也會有更多的影棚建成,擴大輻射的服務范圍。
影視資產數字管理平臺,實現劇組道具的綠色可持續使用
傳統上,每個劇組在拍攝籌備階段都會根據劇情需要進行服裝、道具的采買與制作,大到戰爭片的坦克與現代戲的全套家具,小到古裝戲演員的發簪,道具的準備往往需要花費大量人力、預算與時間。而當拍攝結束后,服裝道具大多會當做廢品直接處理掉,這不僅是資源的浪費,也會造成環境污染。
關注到這一問題,2019年,優酷著手搭建影視資產數字管理平臺,進行服裝、道具的回收與管理,通過分門別類的梳理與呈現,劇組可以直接在小程序進行道具的瀏覽與租賃,讓道具能夠循環利用,為劇組節約了成本與大量制作時間。4年來,平臺累計回收服裝道具33萬余件,支持劇組超1000個,為行業節省成本超1億元。2023年春節檔電影《流浪地球2》和《滿江紅》中,部分道具就是出自這一平臺。
從中國劇組的現狀與需求出發,云尚制片實現制片管理流程化與數字化
云尚制片立足影視制作行業現狀,利用優酷前沿技術研發制片全流程數字化管理工具,涵蓋劇本管理、劇組財務管理、拍攝周期管理、現場數字化、在線看片、薪酬管理、文件管理等多種能力。自2019年7月上線至今,云尚制片穩定、安全地幫助400余家制作公司的超過1000個劇組規范制作流程、提高工作效率、控制制作成本、把控項目品質和風險,為《司藤》、《你好,火焰藍》等爆款作品保駕護航。
為了提升拍攝現場協同效率及品控,解決拍攝內容監看及回放難題,云尚制片經過一年悉心打磨,正式推出云尚現場管理系統。通過電腦端、手機端、iPad等多端平臺,導演組可以隨時查看回放及粗剪,避免漏拍錯拍,判斷成片的大致影像觀感;無法親臨拍攝現場的管理層及投資人,可遠程同步監看拍攝現場,在流暢穩定的觀看體驗中把控拍攝品質;服化道等劇組主創則可根據監看畫面完成現場協作,通過實時查閱已拍攝素材完成接戲,防止穿幫錯漏。云尚現場已在多個劇組測試跑通,目前正在劇集項目《孤鷹》拍攝現場全程投入使用,以“高性價比+本土化”的方式讓拍攝過程“有畫可依,高效品控”。
當前,AIGC的浪潮席卷各行各業,尤其在影視制作領域,已經能看到有越來越多的應用可能與機會。
未來,優酷將堅持數實融合與前沿領域的探索,加速技術在制片管理、現場拍攝等環節的應用,助推文娛產業的升級。W