孔冰欣
仿佛江風獵獵。
人在小舟上,船行天地間。其實連人帶船整體移動的速度也稱不上快,但兩岸飛流直下似銀河倒懸,金粉朱光濺起滿腔“吾與君同”的壯懷,這一刻,如果醉得夠厲害,你只會覺得自己在飛。
脫下VR眼鏡,《新民周刊》記者從蘇東坡的赤壁回到了現實的魔都,在上海圖書館東館美術文獻館(以下簡稱上圖美術文獻館)的“雪泥鴻爪——沉浸式VR交互游戲”里,悟到了歷史彼岸與此間紅塵可以完全共通的一點靈犀——
人生到處知何似,應似飛鴻踏雪泥。往日崎嶇何足慮,吟嘯徐行送風雨。
今年夏天,中國文青蓋章認定的老法師、老朋友坡仔很忙。
關于他的紀錄片《定風波》在央視播出了;上海書展主賓省的主題是“四川的東坡 世界的蘇軾”;就連記者無聊時下載的某款國風武俠手游,都特意安排了坡仔支線,只是劇情比較夸張:詐死后,蘇先生隱居杭州,玩家為了他靈隱求魚、龍井問茶、鬧市賣扇,結果伊呵呵笑著又云蹤杳渺了,害得一位千里迢迢趕來追星的癡心女粉絲(退休歌姬)撲了個空,而玩家已無力吐槽:子瞻兄,儂究竟有幾個好妹妹……
“雪泥鴻爪——沉浸式VR交互游戲”,則是近來“坡仔嘉年華”五光十色的文化產品中,最讓記者感到驚喜的。其“碧空卷微云”“孤光為誰來”“河漢落酒樽”“水天浮起四座”的四個場景,取自聶子述《郁孤臺法帖》(現唯存上圖館藏宋拓孤本殘帙二冊)。跟著前人的足跡,玩家莊周夢蝶,先是來到了熙寧四年(1071年)的杭州,采蓮西湖,徘徊林泉,隨遇而安;然后見證了元豐二年(1079年)的身陷囹圄,檣傾楫摧,孤鴻只影;再然后被貶至遠離汴京的荒僻黃州,混跡漁樵,出入阡陌,穿林打葉;最后,日啖荔枝,酒煮生蠔,登亭遠眺——群山掩映,然一輪紅日冉冉升起,于是,所有對生命的熱愛,也因此全面蘇醒了……蘇軾是誰?入雪泥鴻爪境,東坡照眾生,眾生皆東坡。
值得一提的是,坡仔不同時期的展品,如《試院煎茶》、游虎跑泉詩刻、月梅圖、南海浴日亭詩刻等,于“雪泥鴻爪”各章巧妙嵌入,呼應特定的創作背景,亦堪稱點睛之筆。“河漢落酒樽”一節尤其驚艷:置身茅草屋,梁上孤零零的錢串、灶臺上漸漸冷掉的紅燒肉,捎帶幾分“空庖煮寒菜,破灶燒濕葦”的寒意。走出小院,竹林披雨霧;扁舟一葉,穩泛滄浪空闊。驚鴻浮光質感的BGM響起,四周高聳的崖壁上,上圖館藏的蘇軾小楷精品《赤壁賦》,以及美術館館員書寫的《念奴嬌·赤壁懷古》自眼前掠過,而旅程的盡頭,是天際千古相迎的皎皎銀輪——挾飛仙以遨游,抱明月而長終,當是時也,明月不笑多情人,愿與坡仙共逍遙。

化身東坡游赤壁。
上海圖書館歷史文獻中心研究館員、“雪泥鴻爪”項目策劃人黃薇向《新民周刊》記者介紹道:“幾乎每一個中國人,都會在人生的不同境遇里與蘇軾相遇。我們吟誦他筆下的詩賦,游覽他走過的山河。他在天上,也在人間。這次的‘雪泥鴻爪,也是上圖美術文獻館與來自上海戲劇學院(上海市虛擬環境下的文藝創作重點實驗室)的開發團隊的二度合作,非常感謝上戲創意學院副院長鐵鐘的支持與付出。”
據悉,鐵鐘帶領的上戲開發團隊嘗試運用AIGC技術中的人工智能圖像生成技術,探索人工智能協作藝術創作的可能性。團隊使用自然語言的處理技術,將圍繞每個場景的主題文字通過AI系統(Chat GPT-3.5)描述為可感的文字關鍵詞,進而向AI繪圖系統提供提示和布局,實現對圖像內容的自動生成。根據不同軟件的特性,前期主要采用Midjourney完成草圖繪制;后期采用Stable Diffusion加關鍵詞引導的方式,旨在獲得更穩定可控的創作效果。以一千多張圖片為訓練數據,團隊廣泛試驗Dreambooth、LoRa和Hypernetworks等不同的訓練方式,旨在“調教”出效果最佳的專屬風格模型,激發國風山水的多樣想象。“用比較通俗的語言來講,就是我們廣泛參考AI生成的畫面,依靠虛幻引擎進行數字創作及場景的搭建與深化。此外,這個項目還用到了OptiTrack Motive系統對真人進行三維空間的數據記錄提取,將攝像機跟蹤數據與VR場景、動捕數據及虛擬形象組合、渲染,實現了數字虛擬人和VR場景的深度融合。”
與上圖美術文獻館之前推出的VR互動游戲不同,“雪泥鴻爪”不再以單獨的作品闡釋作為切入點,而是鋪墊蘇軾生平游蹤的線索,將一代文豪的詩賦還原到具體創作的歷史場景,從而導引玩家主動領悟山水與書法、自然與人文的彼此成全。不知不覺,旁觀者竟成畫中客,在現代科技的加持下,人們輾轉于江南、嶺南、海南,待日光破曉飛鳥出,宦海沉浮、料峭迷霧、胸中暗郁,終一掃而空。黃薇分享了一些她個人的策劃心聲:“很多人問過我,你們這次為什么不干脆還原一個真實的赤壁?其實,團隊追求的恰恰是‘藝術性。‘雪泥鴻爪里的赤壁,參考了武元直的畫意,最后的呈現,既兼顧了工筆山水的細節,又加入‘黑科技發光粒子,更具視覺沖擊的國風場景,顯示了數字創意產業在技術創新方面的巨大潛力。”
為了營造如夢似幻的震撼效果,項目的后期優化花了很長時間。仔細凝視所謂“黑科技”粒子,原是碑帖上的文字幻變而來;水面的反光、云與月的位置、鳥的飛行軌跡,都做過反復的調試,精益求精;清幽、朦朧的色調,亦富有古色古香的儀式感,便于玩家“一秒入戲”……團隊的終極目標是:程序要跑得動,審美要帶得動。
黃薇表示,“雪泥鴻爪”不是謎題破解,不是通關任務,不強行在玩家耳邊絮絮叨叨地灌輸文博知識點,“戴上VR眼鏡,只須靜靜感受就可以了。如果你的確被打動,那么試玩后你自會再去搜尋更多的東坡往事,了解他的生平”。
2023年 5月19日起,上圖美術文獻館即推出展覽“游目騁懷——北宋書家的人文之旅”,以館藏宋四家(蘇軾、黃庭堅、米芾、蔡襄)的碑帖為基礎,帶領讀者穿越到北宋文人的山水世界。作為展覽中出現頻率最高的“頂流”(共有14件相關的碑帖作品),東坡引無數觀眾競折腰,善解人意、與時俱進的館方,遂趁勢舉辦了一系列關于坡仔的文化活動,包括6月11日的一蓑煙雨任平生·蘇軾共讀會,6月22日端午節的以書祈福,“粽”享安康——跟著北宋F4過端午,7月16日的“紙上藝林”第三講《黃州寒食帖》,8月12日起開放的“雪泥鴻爪”等等。8月22日起,展覽“斯文不滅——宋代摩崖石刻里的文字風景”與市民朋友見面,“雪泥鴻爪”將與之密切配合,亟欲體驗全套游戲者,請速于上圖官方小程序預約周末的活動名額。
《新民周刊》記者獲悉,有87歲的退休教師在報紙上看到相關信息,奔赴上圖問詢VR游戲;另有讀者電話預約,想帶高齡的老母親體驗一番“雪泥鴻爪”的妙趣。不只老人家們興味盎然,小朋友們也玩得開心,這場“雪泥鴻爪”的大夢,寓教于樂,余韻無窮。
夢境很美。同時,“造夢”的沖動,正成為當下一股不可阻擋的潮流。
隨著Roblox(世界最大的多人在線創作游戲)在美國的上市,元宇宙的商業化之路漸次明晰。在中國國內,依托技術發展和成本降低,文化IP向數字轉化的速度也逐日加速;被談論多年的“元宇宙文娛”,似已悄然落地,開始成為普通人可以消費的文化內容。如“消失的法老——胡夫金字塔沉浸式探索項目”,系全球首個在埃及胡夫金字塔內部和周圍環境進行掃描勘測,后于虛擬引擎上以1∶1高精度重建還原的沉浸式項目。游戲中,黑貓形象的巴斯泰托女神(Bastet)會引領觀眾登上金字塔頂,將吉薩高原的風光盡收眼底。如組合了《風起洛陽》《昆侖迷宮》《火星營救》等多個VR全感劇場的“X-META|機遇時空”國潮元宇宙主題樂園——拜馬親王孵化出的歷史同人大IP所賜,戴上VR頭顯的玩家能化身劇中人物,在大唐的神都上躥下跳,與春秋道斗智斗勇,戲精附體且癡且癲。又如西岸鳳巢的《三體·引力之外》沉浸式體驗劇、1933老場坊的“迷塔城1933”元宇宙沉浸式景區等等。

河漢落酒樽,明月來相迎,小玩家驚嘆不已。
與上述純商業項目相比,上圖歷史文獻中心各展館打造的數字媒體展覽,更注重文化內涵的挖掘與實驗性技術的探索,講究的是“戲玩載道”。2022年,美術文獻館首次推出“靈境石語——VR沉浸式交互游戲”項目,令觀眾置身作品產生的時空情境,通過積極互動,消除與文物之間的距離感,以全新的眼光審視、慨嘆、理解之。上圖館方舉例,“靈境石語”一期項目中,館員在“石不語——碑帖藝術與建筑文化”的數十件展品里,選擇了《九成宮醴泉銘》《城隍廟碑》《龍藏寺碑》等三件作為VR互動游戲的對象。因上圖的鎮館之寶《四歐寶笈》里的《九成宮醴泉銘》中,還有一幅著名書畫家吳湖帆親手繪制的《九成宮》圖,故策展方與開發團隊靈機一動,將碑文故事復原到中國青綠山水風格的虛擬場景中,讓玩家變身唐太宗,再現“涌泉”的經典時刻。而為了復原《龍藏寺碑》所在地河北正定隆興寺摩尼殿壁畫,策展團隊仔細繪制了該殿的平剖面圖,從佛像的位置到香爐的形制,無一遺漏。“去年的‘靈境石語一期項目獲得了學界、業界和觀眾的一致好評,還拿到了2022年中國數字人文年會優秀項目最佳互動獎。今年的‘雪泥鴻爪是‘靈境石語二期項目,也等于是我們和上戲的開發團隊再接再厲,第二次攜手合作。”
事實上,上圖東館建設之初,上圖歷史文獻中心即開始在多年累積的數字人文項目和研究的基礎上,嘗試性開展數字化與文旅展示相結合的實踐。如位于上圖東館一樓、以上圖館舍變遷為主題的“閱·動70”展項,生動演繹了70年來圖書館經歷的三次重大變遷和轉型。又如上圖東館地方文獻館的“上海之源”系列數字展,吸納了上圖“上海年華”項目組十數年的整理與研究碩果——
“上海之源·文化年譜”,以時間視角重現近代上海城市文化不斷孕育發展的歷程,著重體現文化史重要元素的關聯與演進。文化年譜的視覺呈現狀如大樹,寓意綿延生長、傳承有序的旺盛生命力。觀眾在現場觸屏后,代表近代上海文化歷史事件關鍵詞的“種子”,從樹根向上圍繞豎軸螺旋生長出枝干,散開形成年譜樹的巨大樹冠。12種顏色,指向12種不同文化類別,覆蓋新聞、出版、戲劇、戲曲、美術、電影、建筑、文學等諸多領域,且人物、社會團體與地標建筑盤根錯節,往往點開一個,背后就牽涉到另一個,海量信息紛至沓來,仿若奔涌不息的賽博洪流。
“上海之源·文化地標”,則以上海紅色革命紀念地、上海優秀歷史建筑、上海不可移動文物和老上海影戲院四個主要板塊為核心,將其還原定位在20世紀20、30、40、50年代及現代等不同歷史時期的城市空間,集中展示知名海派文化地標的前世今生。館方結合上海輿圖資源,以Touchdesigner實時交互多媒體設計聯動Kinect互動技術,打造了體感控制互動展向,創造出絢麗多彩而饒富趣致的沉浸式閱覽體驗。除了中共一大紀念館、申報館大樓、四行倉庫等歷史建筑,對于諸如卡爾登大戲院、上海大學青云路校區等名噪一時,卻又遺憾未能保留至今的“消失的老友們”,該展項的3D復原顯然有助于激發今天的觀眾追索建筑隱秘的意愿。
未來,“上海之源”系列數字展還能根據數據資料整理的情況,不斷進行深化拓展,與上圖業已建設完畢的線上程序“初心之地——尋找紅色革命紀念地”“尋找武康路”等實現更多的聯動。
總的來說,這一屆觀眾熟諳ACG文化,日常看的是國外最新大片、沉浸式戲劇,玩的是3A大作、劇本殺、真人密室,希冀攫取他們的視線,不放點大招是不行的。“雪泥鴻爪”這樣的VR游戲,倘若預備“會當凌絕頂,一覽眾山小”,劇本必須更接近一流電影級別,建模精度、聲光變化、操作感的細節,也必須做更進一步的優化處理。唯有苦心孤詣,不斷打磨,才能構建出隔絕現實的夢幻場域,玩家穿行其間,全情投入,經歷了歷史的冒險,觸摸到文明的碎片。


老玩家寫了表揚的感言。
論制作水平,“靈境石語”等數字化項目可以代表較高水準的多媒體展項體驗;但是,在實際的服務過程中,團隊也遇到不少現實的問題。目前,該項目仍作為線下展覽的附屬產品,未能獲得獨立的開發預算和空間,導致題材受到限制,運用場景也較為局限。而參考消費市場上相關文旅項目的解決方案和運營經驗,VR展完全可以成為文博機構新的展示平臺和服務項目。另外,設計思路上,“靈境石語”一期和二期分別嘗試了“重交互”和“重場景”的兩種模式。一期更偏重于知識傳遞和觀眾交互,在內容呈現和博物館教育的層面更具代表意義,但現場實踐中卻導致對部分觀眾教育成本過高,操作體驗不甚友好。二期項目偏重沉浸式的氛圍,現場體驗感優于一期,但不熟悉蘇軾生平背景的玩家,或認為缺乏有效信息的獲得途徑。

“靈境石語”一期項目中搭建的VR體驗場景。

《四歐寶笈》中吳湖帆繪制九成宮場景。

策展團隊仔細繪制了摩尼殿的平剖面圖。

“上海之源·文化年譜”,觀眾在現場觸屏后,海量信息紛至沓來,仿若奔涌不息的賽博洪流。
上圖館方表示,GALM(gallery - 畫廊,library - 圖書館,archive - 檔案館,museum - 博物館)儼然大勢所趨,“四位一體”值得擁抱。而無論是商業項目還是公益項目,VR游戲等多媒體技術的介入,能夠突破傳統媒介限制,讓觀眾徹底“身臨其境”“有感而發”,是真正對“讓收藏在博物館里的文物,陳列在廣闊大地上的遺產,書寫在古籍里的文字都活起來”的最好詮釋。接下來,上圖東館家譜館計劃于國慶節的時候推出配合家譜館全新展覽的AR交互作品。“內容上,我們會挑出三件珍稀家譜來講述若干屬于上海的城市故事。比如從董其昌的家譜談起,看海派文明的一個發展脈絡,‘閱人;從討論徐家匯和徐光啟、陸家嘴和陸深,從青龍港到上海務的一段段歲月變遷,‘閱城;從《廣東中山北嶺徐氏宗譜》(填補了中國人參加第一屆世博會歷史的最早紀錄),分析西學東漸,‘閱世界……技術上,我們在向多人交互的目標努力(類似于從單機游戲到網游的轉變)。歡迎大家屆時來上圖打卡!”

“上海之源·文化地標”。