透視、全景、處理克服管理VR/360°內容的挑戰

大衛·施萊佛

在生活中，我們被各種線索環繞，使我們知道如何適應3D空間。我們很多感覺和對那些信息的反應都基于生存本能——聽到某人來到我們身后，看到我們周邊視覺中的移動，在我們移動身體或轉頭時感覺我們的方向的能力。在我們度過每一天，喝咖啡，開車，穿過人群，跳入游泳池以及作為地球上人類一員會做的一切時，我們的感覺產生我們能夠無瑕疵理解的可怕數據量。

由于用于電影講故事的技術和手段已經發展了一個多世紀，我們已經學會了一種新語言、一種基于開啟另一個世界的窗口——屏幕理解世界的新方式。在這個屏幕上，我們已經習慣了位置、視角、時間和空間的跳躍。此屏幕有時用環繞聲補充，但將我們獲得的數據編入人的故事通常需要我們的想象力。

特寫、廣角鏡頭、搖攝、變焦、強迫透視、切換及其它很多技法構成講故事人的工具箱。然后和虛擬現實和360°一起，突然之間我們有一種極想伸手去拿根本沒有的東西的傾向。我們失去了合理判斷，我們迷失了。

雖然VR和360°內容有區別，但這兩種媒體提供栩栩如生的沉浸式體驗，能夠顯示觀眾周圍發生的活動。由于VR/360°影像更接近表現人類體驗世界的方式（因為他們的沉浸感更被從傳統電影攝制技術移除），電影制片人努力利用它們為講故事服務。

讓我們身體力行

作為虛擬現實體驗的觀眾，我們有一些脫節。主要的一個是我們沒有身體上穿過VR頭顯內的世界；我們能夠轉體和向上向下看，但我們沒有引導到環境內我們的表現的所有正常提示。我們沒有走進場景，因此我們不得不朝四周察看，獲得我們的方位，仿佛我們剛剛被瞬息移動進來。

Primestream的Xchange Suite現在支持球形VR/360°資產管理，實現媒體播放和檢查，用“空間/360”視覺標記注解突出360°空間關注區域。圖示為適用于Adobe Premiere Pro創意云的Xchange擴展面板。

下一個障礙：我們不能在3D空間真正四處移動。我們僅限于轉頭看180°平面內的或正好在我們周圍的360°球面空間的東西。VR可能為觀眾提供一些通過一個環境的能動作用，但一般不是以走向你看到的東西的典型方式。因此我們有一點迷失。因此，在本質上是一個有動作發生在我們必須發現的某處的靜態場景中，我們需要時間確定方位。

VR是一種發展中的講故事媒體。導演已經使用了一個多世紀的引導2D電影觀眾的技術通常不適用于在VR體驗中講故事。導演可以不再依賴長久以來非常有效的快速切換鏡頭、變焦和節奏。因此，有時太多關注VR項目的新穎，對發明創造在變化的世界中講故事的技術關注不多。

當前在進行大量試驗，很多試驗是在拍攝方面，研究如何采集更好、更沉浸式畫面并且將它們拼接在一起。例如我們Primestream從事這些文件的管理工作。在最基本層面，我們的工具實現一個處理流程，即捕獲圖像、圖像中加入描述元數據，接著組織一個圍繞它們的工作流程。

這使我們能夠很好地了解如何更好地利用這些新資產講故事，討論創意過程。隨著如Adobe Premiere Pro等的創作工具發展，滿足使用它們的剪輯師的要求，我們正在開發管理增加這些捕獲的圖像之價值的數據和元數據手段。

360° MAM

近年來媒體資產管理（MAM）提供商和非線性編輯廠家一直在追逐不斷變化的格式，因此我們的工作流程發展到包括格式無關性，但廠家對他們正在處理的文件所做出的假設始終是有限制的。

處理360°素材的第一步是了解如何處理球形文件（360°球狀全景圖）。第二步是了解可能有被加入標準格式（如MPEG）的VR或360°專屬信息的位置。最后，為了便利一個端到端工作流程，建立合作關系以及制定在拍攝和完成工具箱內都得到支持的標準很重要。

我們面臨的挑戰之一是如同數據流的分發標準，拍攝和分發格式也處于不斷變化之中。SDI控制你的網絡設施的SMPTE標準一去不復返了。新建或現代化的設施正在擁抱基于文件的工作流程和基于IP的傳輸。

以項目為中心的工作流程使Primestream用戶和團隊能夠直觀地在 Xchange Suite內的項目上創建、共享和協作，或通過Adobe Premiere Pro創意云內的Xchange擴展面板。用戶現在能夠組織原始鏡頭或容易地在代理和高分辨率源素材之間切換，進行有效的遠程/站外編輯。

在某種意義上，由于廠商正在利用如MPEG-4或H.264等的現有格式，開頭不難，但為了創作更沉浸式內容，攝像機正超越它們能夠拍攝的極限。如果你以前對4K很滿意，現在你需要360°的4K分辨率。攝像機上每個鏡頭、每只“眼睛”都在拍攝需要拼接為觀眾可插入的無縫球體的4K畫面。每個鏡頭8K可能遠遠落后？你還希望有3D空間聲音，用來營造更連通和更沉浸式的體驗。達到所有這一切要求空間數據及其它標記。

我們無法強迫市場按照一個特定的方向發展，而是必須在那里，當用戶到達時支持他們。我們可以參與指導發展方向的合作，比如當一家攝像機廠家和一家編解碼提供商合作建立一個端到端解決方案時，但最終我們需要對市場中來自無論什么地方的變化做出反應。會從球形格式轉換到環境反射圖和金字塔圖或別的東西嗎？如果這種情況真的出現，我們必須在那里。

我們不再簡單地使用基于時間的標記跟蹤內容片段，相反，內容必須用方向數據在時空標記——感興趣的內容何時何地出現。

隨著隨著時間的推移人們弄明白如何用VR/360°資產管理完善其講故事技巧，我們完全可以預期它會繼續演進，而且我們知道創作工具必須迅速行動，不落后我們創新重塑的講故事方式。我們還沒有到那個地步，但你可能已經看到我們正在打造一種激動人心的新創造性敘事的初步跡象。B&P;