技術可供性視角下兒童科普圖書多媒介文本建構及其功能*

□文│李小華 周嘉琪

閱讀在人類文明史上是如此重要，進入現代社會，技術日新月異，信息海量增長，閱讀更是無時不在、無處不在；可以說閱讀正成為一種生活方式。自2014年以來，“全民閱讀”連續九次被寫入政府工作報告。2022年的政府工作報告再次提及要繁榮新聞出版、廣播影視等事業，“深入推進全民閱讀”。從“倡導”到“深入推進”充分體現了政府對推動全民閱讀、建設書香社會的高度重視。

兒童是祖國的未來、民族的希望，啟蒙閱讀對兒童的心智發展意義重大。習近平總書記在首屆全民閱讀大會賀信中指出，“希望孩子們養成閱讀習慣，快樂閱讀，健康成長”。[1]要培養兒童愛閱讀的習慣，首先要有優質的閱讀文本。當今，科技發展為兒童圖書的融媒體出版、多媒介呈現提供了前所未有的條件和可能性。本文即從技術可供性的視角探討兒童科普圖書的多媒介文本構建問題，即媒介技術如何參與了兒童科普圖書的文本生產，多媒介建構的兒童科普圖書如何更好地實現信息內容的呈現，從而促進兒童的多維閱讀和科普知識的有效傳播。

一、數字技術為兒童科普圖書的出版賦能

“可供性”是由美國著名生態心理學家詹姆斯·吉布森（James Jerome Gibson）提出的一個心理學概念，指環境屬性使得個體的某種行為得以實施的可能性，即環境提供或供應了什么。[2]伊恩·哈奇比（Ian Hutchby）將“可供性”引入技術社會學，認為要認識到可供性具有功能性與關系性，而且它是構建而非決定與客體相關的主體行動的可能性，強調了主體與環境/物之間的互動。[3]納吉（Peter Nagy）、聶夫（Gina Neff）認為，在“可供性”的應用場景中，應將技術物質性、社會結構和人類行為的探討有機結合起來。[4]威廉·W.蓋弗（William W. Gaver）指出吉布森基本只關注肉眼可見的可供性，而實際上可供性還可通過觸覺、聽覺等其他感官來感知，并提出“技術可供性”的概念；即技術的潛在功能如何為人們設計和使用提供可能性，指向對人造物體現出來的人們心理訴求和設計合理性方面的探討。[5]技術可供性不具備天然的“好”“壞”之分，既有積極屬性也可能存在消極影響，在一定程度上彌合了技術決定論與建構主義理論間的罅隙，為人們分析技術環境、描摹主體行為以及厘清連接關系提供了新的理論依據。[6]

當前技術可供性多用于探討媒介與用戶兩端的關系，解釋技術如何干預用戶對媒介的使用。縱觀人類社會的發展，出版業的變遷史實則是一部與技術進步互動的歷史。出版技術體系中的一種或幾種重大創新或變革，導致了三大重要出版形態的形成：古代出版（抄本、手工印本）、近代出版（機械制造）、現代出版（數字出版）。[7]如今，出版物的表現形態已全面泛化，整個行業進入多種技術融合互補的數字出版時代。技術使出版內容日趨多元，使出版形式更便于讀者接收信息；技術與出版業正如榫卯一般，在人的推力下緊密結合。但技術發展永不會止步，隨著大數據、人工智能等新技術的更新迭代，出版行業也在不斷轉型升級，進入智能化發展階段。[8]而且，云計算、物聯網、區塊鏈、AR/VR、5G和元宇宙也是當前推動出版發展的技術前沿。[9]《出版業“十四五”時期發展規劃》明確指出，以5G、大數據、人工智能等為代表的新一輪科技革命正加速推進，促進了產業變革深入發展，為出版發行業轉型升級提供了有力的技術支撐。

在各種新興技術的驅動下，圖書出版也獲得了新的機遇和發展。緣于數字技術的賦能，圖書文本的呈現表現出多媒介融合的特征。這種多媒介共現的情形，如同麥克盧漢所言，與其說是新興媒介替代了舊有媒介，不如說是新舊媒介趨于錯綜復雜的互動。[10]在同一出版圖書中，圖、文、音頻、視頻不同媒介形式互現的情形日益普遍，近年又增加了AR、VR等技術的運用，使讀者能夠打破現實空間的藩籬，超越時空的局限去體驗圖書中的多彩世界。新技術彌補了傳統紙質出版物靜態性、互動性弱的缺陷，為豐富閱讀場景和讀者體驗提供了更多可能。

在兒童讀物出版方面，紙質圖書的多媒介共現也重塑了受眾的閱讀體驗；由原先單向的視覺攝入轉為多感官接觸，文字、圖像、動畫、音頻、視頻等共同構建閱讀文本。與傳統的兒童圖書相比，多媒介呈現的文本強調運用圖文聲像等信息載體和數字技術對科普知識進行編碼和重組，注重閱讀中的雙向互動，著力提升兒童的閱讀興趣，從而促進科學知識的有效傳輸。伴隨網絡、傳播技術的革新升級，越來越多的媒介技術被運用于兒童科普圖書出版，其互動性、趣味性、影像化、游戲化等優勢先天契合了兒童的閱讀能力和習慣。[11]目前，國內外不少兒童科普圖書采用了多媒介組合的呈現方式，在傳統的圖文信息基礎上增加了新技術元素，使紙質圖書也能展現生動的聲像世界。

二、延伸閱讀空間：兒童科普圖書的音視頻連接

可兼容是體現新媒介移動可供性的一項重要指標，如提供圖文視聽元素的多屏共享。[12]在媒介融合時代，具有移動性、多終端、沉浸化等特點的音頻、視頻信息文本被整合進紙質出版物中，用以構建多媒介的圖書文本。

當前，兒童科普圖書構建多媒介文本的手段之一即是在書中插入音頻、視頻的鏈接，而所負載的音視頻通常有三種表現形式：釋義、描述和改編。釋義是對較難理解的文字文本用視聽的形式體現；描述則重在展示某種過程，如用音視頻記錄某一科學原理或檢驗某種假設；改編類音視頻是將知識融于生活化場景，再以故事的形式呈現。視聽媒介對兒童科普圖書內容的“描摹”并非機械式的復制粘貼，而是基于兒童的閱讀特性，經由劇本策劃、鏡頭設計、場面調度等處理，將信息通過聲音和影像展示出來。融入了音視頻的科普圖書在聲像互動中豐富了兒童的認知體驗，形成了融知識性與趣味性于一體、有別于純文字的閱讀文本。比如，由北京聯合出版有限公司出版的《小小牛頓幼兒館》STEAM系列書，基于移動互聯網“信息+體驗+場景”模式，通過印刷于書中的二維碼載入視頻拓展課，讓兒童對科學有直觀的感受。如從魚缸換水這一日常生活場景引入“連通器”的概念，通過真人示范與動畫解說，完成了基于兒童行為邏輯與科普知識傳輸的適配，激發兒童的“悅讀”興趣。

二維碼、小程序、APP軟件是音視頻超文本的主要表現形式。超文本鏈接不僅連接既定的文字文本與音視頻文本，而且改變了文本被閱讀和理解的方式，使閱讀文本在空間向度上變得立體多維，實現從現實物理空間向移動數字空間的遷移。愛德華·W.索亞（Edward W. Soja）認為空間可分為三類：第一空間為物理空間，第二空間為精神（心理）空間，第三空間則是對前兩種空間的整合與重構，具有徹底開放、自由的特點。[13]由媒介建構出來的聲像空間是一種空間的再現，[14]即由現實的感知空間延伸而來的“構想空間”。兒童科普圖書中載入的音視頻是對圖書內容進行選擇與改編，從而創造出可供讀者進行個性化解讀的第三意義空間。此外，在所連接的音視頻播放界面常設有留言區，作者、編輯、讀者可以自由討論、評價文本的內容。其動態性功能實現了作者與觀眾、觀眾與文本、觀眾與觀眾之間的多元互動，使知識在各方的交互中流通；[15]為音視頻文本賦予內容與意義上的增值，進一步拓展了圖書的閱讀空間。而且，基于移動閱讀的特性，音視頻文本也成為關系流的一個新入口，聚合了兒童的閱讀行為與社交活動。因此，乘著“互聯網+”的大潮，借助音頻化與視頻化的靈犀，在多媒互動的今天，聲像的延伸是紙質圖書實現多媒介呈現的重要通路。根據當前音視頻文本在兒童科普圖書中的應用，其多媒介文本和閱讀空間的建構如圖1所示。

圖1 音視頻在兒童科普圖書中的應用

三、情景化交互：兒童科普圖書的虛擬成像運用

隨著媒介技術的快速發展，增強現實（Augmented Reality，簡稱 AR） 和虛擬現實（Virtual Reality，簡稱VR）作為一種新興技術也被應用于兒童圖書出版中，成為現實世界和虛擬世界無縫連接的橋梁。AR/VR為文本再造和沉浸式閱讀提供的可能性雖仍處于發展階段，但所有的開發皆基于此技術本身的最大可供力——場景的提供。AR技術具有虛實結合、實時交互、三維注冊的特點，能夠使虛擬的事物在真實環境中呈現。利用AR技術，人們在閱讀時可以看到跳脫紙面的虛擬模型，還可進一步對虛擬模型進行旋轉、拆解。在三維注冊技術的支持下，虛擬信息能夠與現實場景信息進行對位匹配，例如根據讀者與圖書的距離遠近調整虛擬模型的大小。VR技術賦予主體較強的存在感和自主性，當人們進入VR虛擬場景時，能夠突破自身身體“不在場”的局限，完成現實中無法獲至的場景體驗。

從技術可供性層面看，AR、VR通過APP、二維碼以及其他外接媒介實現其交互功能，具體的交互方式可分為操作型、選擇型和生成型。操作型交互是指通過對AR、VR文本進行點擊、滑動、旋轉等操作，三維模型可得到全方位展示。如在安徽少年兒童出版社出版的《皮影中國》AR圖書中，讀者可翻轉、移動皮影戲的戲臺以實現虛實交互。選擇型交互指人在虛擬環境中可對情節、角色等進行選擇，從而引發不同的閱讀路徑。生成型交互指人們在閱讀的過程中需要主動創作，然后生成個體敘事。如在澳大利亞知名科幻作家蘭斯·鮑爾欽（Lance Balchin）創作的《未來機械世界》這本書中，通過移動終端的拍攝功能，其中的機械生物能夠3D立體地呈現在屏幕上，并收集書中出現過的生物，組建自己的戰隊與其他玩家進行游戲對抗。AR、VR在技術層面上的設計為兒童打造了獨特的沉浸式閱讀體驗，使兒童能夠在閱讀虛擬成像科普圖書時形成與真實環境、現實中的人之間的循環互動，在“情景化交互”中達成知識性和社會性認知目的。

兒童的認知通常內嵌于情境體驗中，[16]因此，如何利用AR、VR技術創設情景化閱讀是兒童科普圖書設計的關鍵。為此，除了客觀上的技術保障，還需在文本建構方面具備一定的故事與情感元素。[17]為實現兒童與圖書有效互動并產生情感共振，AR、VR的文本表達需趨于趣味性和臨場感。如《跟著 Wolly 游世界》系列圖書采用大量繪圖和少量文字相結合的表現形式，介紹世界各地著名景點的特色。每冊書中配有8到10個AR，并配有AR益智游戲挑戰題，使兒童足不出戶便能開啟一場身臨其境的城市探索之旅，極大地增強了兒童閱讀中的趣味性與現場感。而且，AR、VR文本結構設計的系統性、完整性適合兒童形象化的思維和學習習慣。此外，AR、VR文本閱讀模式的場景化、社交化也能促使人們在共享閱讀中提升沉浸感。如北京少年兒童出版社的VR科普童書《大開眼界：恐龍世界大冒險》，由10多個恐龍世界的VR虛擬實境建構了親子閱讀模式，創設了主體共同參與的情景。

少兒對具有互動游戲功能的虛擬成像技術擁有天然的親近感，更青睞具有沉浸式交互體驗的閱讀文本。交互式兒童科普圖書兼顧可讀性與愉悅感，在表達形式上更契合兒童想象力豐富、好奇心強等特點，從而增強科學傳播的效能。AR、VR技術在圖書多媒介展示方面協作互補，在技術合力下改變了兒童科普圖書的閱讀模式，增強了閱讀的立體感。AR、VR文本基于情景化交互的敘事設計邏輯為兒童營造了全新的閱讀體驗，把與周圍環境相交互的經驗轉換為身體與心理的愉悅。根據AR、VR技術在兒童科普圖書中的應用，其多媒介成像和情景化功能建構如圖2所示。

圖2 虛擬成像技術在兒童科普圖書中的應用

四、具身性體驗：兒童科普圖書的多感官設計

任何媒介都不外乎是人的感覺和感官的擴展或延伸：文字和印刷媒介是人的視覺能力的延伸，廣播是人的聽覺能力的延伸，電視則是人的視覺、聽覺和觸覺能力的綜合延伸。[18]因此，媒介是人的延伸，而身體其實也是一種媒介。作為身體的延伸，多媒介不僅指向物理意義上的載體多樣性，還意味著能夠調動讀者身體感官的信息多樣性。多媒介文本運用不同媒介的特性創造出一種包括視覺、聽覺、觸覺、嗅覺等全方位的感知性符號系統。[19]兒童科普圖書對多種媒介進行整合，在內容呈現上實現了媒介互聯。除了前文所說的在書中接入音頻、視頻、AR、VR等媒介文本，有的還嵌入了實物性載體，這些實物載體具有媒介的功能。技術可供性的一個面向是不將媒介物簡單視為一種工具，而認為媒介同樣具有能動性，能夠影響主體的行為。當兒童閱讀這類科普讀物時，需要調動多種感官來完成，這類多感官設計也是一種技術賦能。隨著兒童圖書數量的激增，多感官共存的閱讀設計成為科普讀物的重要元素之一。

在視覺文本建構中，常用的是插圖設計，通過手繪示意圖、剖析圖、地圖、實景圖等，將微觀的世界放大，將宏觀的世界縮小，把抽象的知識具象化，把專業的知識通俗化，將生活場景直觀化。多感官參與的科普圖書文本建構主要通過負載實物媒介以延伸讀者的聽覺、觸覺等感官。聽覺感官的延伸主要利用高科技發聲內嵌裝置、點讀配件等完成。在觸覺方面，其體驗的創設來源于多種圖書材料的組合和特殊的裝幀技術。此外，心理學研究表明，“嗅覺具有感情的特性”，它能幫助人們產生情感反應；兒童科普圖書中的嗅覺建構主要來源于環保無毒材料的使用。在多種實物媒介的參與下，兒童多感官的體驗得以延伸。

在多感官參與下，兒童能在感知與實踐探究中萌發學習興趣，然后建立起自己的認知體系。“具身認知”理論認為認知離不開身體，學習是全身心參與的過程，即“學習者通過身體及其感知系統參與環境的交互，從而獲取具身經驗，使個體在行為或行為潛能上產生積極的、相對持久的變化”。[20]

在閱讀多感官設計的科普圖書時，具身認知的產生主要通過以下3個環節：身體介入、情境生成以及交互作用。緣于科普圖書畫面的動態設計，圖書的趣味性得到提高，兒童翻閱圖書的愉悅感也得到提升；在多感官設計的感染下，兒童觸發具身閱讀行為。如由阿根廷插畫師伊萬·卡爾梅（Ivan Kalme）繪制的《美味的閱讀》主打“香味科普啟蒙”，收集了24種水果、花朵、食物的氣味，通過指引兒童用手指觸摸圖示區域，沾上香味后吸入，充分調動兒童的視覺、觸覺、嗅覺感官，使閱讀突破視覺中心主義，由二維閱讀轉向三維體驗，拓展兒童具身感知維度。

認知是具身的，而身體又是嵌入環境的，環境對個體認知的效能發揮離不開情境的生成。因此，在文本設計的過程中需要兼顧生活化的內容與符號化的情境。中國環境出版社發行的科普書《聽，什么聲音》將動物進行擬人化處理，繪制了樂器演奏、交通工具駕駛、自然現象等多個現實主題圖畫；書中加入了現實生活常見的聲音符號設計，主要起到指令或提示作用，通過點擊而觸發主題圖畫的原聲音頻，以提高沉浸式“視+聽+觸”閱讀體驗的流暢性。

認知、身體和環境是有機組合的動態統一體，以身體為媒介創建交互式學習，并利用具身化場景構筑多元的閱讀感受，通過具身打通“知—行”的認知路徑，方能讓兒童更好地內化知識信息。如由英國插畫師、兒童圖書作家本吉·戴維斯 （Benji Davies）所著繪、被翻譯成23種語言出版的《小熊很忙》通過小熊扮演各類角色，如消防員、宇航員，向兒童普及職業與生活知識，同時進行英語閱讀啟蒙。圖書由厚紙板制作，置入拉、滑、旋等動作，如扭轉方向盤、操控火箭發射等，通過這些交互設計填補了單一視覺感官無法實現的真實體驗；同時強調過程性思考，實現了從感官到體驗再到情感的聯結。

傳統的科普圖書已為兒童帶來了視覺體驗，如今科普童書中的多感官設計依托書中的實物媒介擴展了人體的功能，完成了由具身體驗到具身認知的轉化，在多維閱讀層面實現科普的目的。從圖書設計趨勢來看，技術提供越來越多維的可能，從單向輸出到沉浸體驗，從表層認知到深度思考，兒童科普圖書的前景越來越廣闊；而基于多感官體驗的精細化設計也將在更多的紙質科普圖書中得以應用。根據多感官設計在兒童科普圖書中的應用，其多媒介文本建構和具身性體驗路徑如圖3所示。

圖3 多感官設計在兒童科普圖書中的應用

五、結語

在一定程度上，“可供性”概念是對“主—客”二元對立思維方式的否定，它打破了傳統意義上技術與人的界限，將技術與人之間的關系視作更加多元的互動連接。在可供性的視域下，技術不再只是被賦予完全被動意義的人造物客體，而是具有更為對等的生態意涵。將技術可供性引入兒童科普圖書出版領域，既是對現代閱讀方式的重新思考，也是對深層文化潛能的挖掘與釋放。

多媒介建構兒童科普圖書，是對文本生產與再生產、鏈接與超鏈接模式新的探索。新型兒童科普圖書對兒童在視覺、聽覺、觸覺、嗅覺等感官體驗的關注，創設了一種更為具象化、更具親近性的科普學習方式，讓閱讀從視聽范疇延伸至更為寬廣的技術示能場域。兒童科普圖書的超文本、多媒介建構，讓閱讀從扁平走向立體，從線性走向多維乃至非線性，激發兒童的創新意識與各種潛能。新型兒童科普圖書的數字化、移動化發展趨勢，不僅使文本信息更易存儲和讀取，使閱讀場景更加豐富和靈活；而且能夠超越速度與距離，推動共享型、互動型閱讀方式的革新。增強現實（AR）、虛擬現實（VR）等科技與兒童科普圖書的聯結，大大拓展了新型讀物的展現空間，容納更為豐富多樣的學習內容，有助兒童在閱讀時跳脫原本抽象的知識思維。

在技術蓬勃發展的今天，將會有越來越多的新興技術被應用于紙質圖書的多媒介文本建構中，實現更加豐富多元的閱讀體驗。如大數據和人工智能可優化編輯工作流程、提高生產出版效能；[21]而元宇宙的應用將會催生一個完全突破現實限制的虛擬世界，全方位地連接人體感官，[22]使讀者深度卷入圖書文本中。但要實現這些愿景，一方面，需要我們具備前瞻的視野，關注新生媒介，找到其與圖書之間的共通點；另一方面也須注意，技術不能簡單疊加于紙本之上，應與文本內容緊密相聯。