視頻生成AI 大模型Sora 的推出,展示了AIGC 技術在電影領域應用的強大潛力,其可理解與電影攝制密切相關的畫面風格、拍攝手法、鏡頭特點等,并能通過輸入文本、圖片、視頻等信息智能生成最長時長為60 秒、分辨率為1080p 的高品質逼真視頻,受到行業廣泛關注。近年來傳統計算機圖形學(CG)方法與深度學習技術不斷交匯融合,將現有語言、視覺、聲音等AI大模型垂直應用于電影劇本和故事板、視覺預演、動作和表演捕捉、聲音制作等工藝環節,已形成新技術、新算法、新應用與新實踐。未來,該領域研究將持續關注多模態大模型、實時渲染和人機交互技術。人工智能技術已成為電影攝制創新升級的加速器,為電影攝制實踐帶來了創新性變革和革命性影響,并加快推進形成電影行業新質生產力。本期遴選虛擬數字人新范式、基于深度學習的電影智能化攝制技術、電影工業美學和技術美學、技術革新視野下動畫媒介發展的機遇與挑戰等論文,論述了電影行業與智能科技加速融合下的技術動向和行業生態。此外,全國農村電影管理平臺數據可視化的研發與實現、基于計量電影學的電影色彩風格可視化方法,展示了數據可視化技術的電影行業實操應用;電影沉浸式音頻碼流規范及功能特性研究、沉浸式劇場實時粒子特效系統研究則展現了沉浸式視覺、聽覺技術的最新研究與實踐,歡迎感興趣的讀者予以關注。
——本期責編
虛擬數字人是計算機圖形圖像領域的研究熱點,伴隨智慧時代和元宇宙時代來臨,在新一代信息技術和現代智能科技迅猛發展與廣泛應用的背景下,虛擬數字人已成為影視傳媒領域的應用熱點。虛擬數字人的研究與實現關鍵在于對其幾何造型、材質紋理、語義信息等進行精準描述和有效表征,其制作生成涉及掃描、建模、驅動、渲染等關鍵核心技術。從技術品質上看,電影級虛擬數字人既要在人物真實感方面突破恐怖谷效應,達到超寫實水準,又要支持與真人和場景的智能實時交互與無縫虛實融合。伴隨人類社會智能化升級的持續推進和不斷深化,向AI 類人智能體(Agent)發展演進成為虛擬數字人迭代升級的重要趨勢和必然要求。《虛擬數字人新范式:SIGGRAPH ASIA 2023 電影制作相關研究綜述》一文結合電影制作發展需求分析總結了SIGGRAPH ASIA 2023 會議虛擬數字人的最新研究成果和技術發展趨勢,從幾何造型、運動控制、動作捕捉等方面細致闡述了虛擬數字人技術應用及其實現方法,并對虛擬數字人服務電影創作生產提出了有價值的深層次思考。虛擬數字人是數字經濟時代的發展新動能,具有極其廣闊的發展與應用前景。未來,虛擬數字人技術應充分汲取計算機圖形圖像和人工智能領域的融合創新成果,統籌提升真實感、智能化、交互性、魯棒性、穩定性等技術性能,為服務電影制作創新升級和產業提質優化發揮積極作用。
——劉達,正高級工程師,中國電影科學技術研究所(中央宣傳部電影技術質量檢測所)總工程師,《現代電影技術》主編
當前,我國電影產業蓬勃發展,科技正在為電影產業的發展進步提供強大助力;深度學習技術在人類社會生產生活的各個領域得到廣泛應用,且在效率和性能方面不斷凸顯優勢,為深度學習技術在電影產業的應用提供了新思路。與此同時,電影工業也逐步進入轉型階段,進一步催生了深度學習與電影產業結合的需求。論文《基于深度學習的電影智能化攝制技術研究》以電影攝制流程為主線,介紹了深度學習技術在電影攝制領域的應用;從電影前期籌備、中期拍攝到后期制作,詳細梳理介紹了當前電影智能化攝制的先進技術及應用情況,同時總結了電影智能化過程中面臨的相關問題及技術挑戰,并對深度學習與電影攝制結合的發展需求和未來趨勢進行了分析與展望。論文通過介紹深度學習技術在電影攝制過程中的研究進展及應用,可以拓寬電影從業人員的技術視野;通過總結當前電影智能化攝制面臨的技術挑戰,可以為相關研究提供方向和重點,有助于進一步優化完善深度學習技術在電影領域的應用;其對于技術發展趨勢的展望也有助于激發電影創新活力。
——季向陽,教授,清華大學自動化系腦與認知科學研究所所長,中國人工智能學會深度學習專委會主任
數據已成為數字經濟時代的第五大生產要素,隨著人工智能技術的飛速發展,數據的重要性愈發凸顯。我國具有海量數據資源的獨特優勢,電影行業也不例外。影片從創作到放映的過程中,產生了大量圖像、視頻、音頻、文本等非結構化數據和結構化數據。在此基礎上,院線市場、二級市場、農村公益放映等電影多元化放映體系進一步提升了數據的多樣性和海量性。通過對多源、異構、海量數據進行采集、清洗、預處理和挖掘,并結合數據可視化技術,利用圖形、圖表、地圖等可視元素,將繁雜的數據以動態、實時、多維度、交互式的方式進行可視化展現,將有助于洞察數據規律與趨勢,服務科學決策,推動產業提質升級增效。《全國農村電影管理平臺數據可視化的研發與實現》一文基于我國農村電影公益放映實際需求,運用數據預處理、數據分析、可視化結果生成等技術實現全國農村電影公益放映數據的可視化展現,并利用異步通信、分步加載、漸進式渲染等方式解決了海量數據加載與更新問題,對于推動我國農村電影公益放映優化升級與高質量發展具有重要意義。
——王萃,正高級工程師,中國電影科學技術研究所(中央宣傳部電影技術質量檢測所)高新技術研究處副處長