基于移動增強現實技術的兒童繪本設計研究

【摘要】童謠一直是繪本創作者比較重視的題材，但傳統童謠是以口傳念唱為載體，紙質繪本對這一特點的表達空間有限。文章以閩南童謠繪本設計為研究對象，分析童謠繪本的現狀和問題，探討在現代繪本設計方法的基礎上，融入移動增強現實技術的可行性開發路徑，以期為童謠題材兒童繪本的出版提供新的思路。

【關 ?鍵 ?詞】兒童繪本;閩南童謠;增強現實

【作者單位】陳超淼，泉州師范學院。

【基金項目】福建省社會科學規劃項目一般項目“非物質文化傳承視野下基于AR技術的閩南童謠繪本展示與傳播研究”（FJ2018B141）;福建省高校人文社科基地海絲視覺文化藝術研究中心研究成果。

【中圖分類號】G230.7【文獻標識碼】A 【DOI】10.16491/j.cnki.cn45-1216/g2.2021.04.025

近年來，隨著我國文化自信的不斷增強，原創繪本中以“傳統文化”為題材的創作所占比重逐漸加大，涵蓋民間文學、民間習俗、民間藝術、童謠和古典文學等內容。其中，童謠是創作者比較重視的題材，但傳統童謠是以口傳念唱為載體的民間藝術形式，紙質繪本對這一特點的表達空間十分有限。

當下，國內以傳統童謠為題材的兒童繪本可以分為兩類。一類是以文字為主的插圖繪本。這些繪本收集了豐富的童謠，一首童謠配一幅精心設計的插圖，集多首童謠成冊;另一類是現代意義上的繪本，以童謠為藍本創作故事，應用敘事性圖畫創作成繪本。傳統童謠表現的內容多源自中國古代社會，與現代社會生活脫離，而學齡前兒童對于脫離他們實際生活經驗的事物和圖式是很難理解的，也就很難激發他們的情感共鳴和有效認知。因此，以傳統童謠為題材的繪本設計若只是一味地單向呈現給兒童，忽視從體驗和交互的角度加入對當代大眾審美、生活環境、高新科技等因素，缺乏時代“帶入感”，就很難在競爭激烈的兒童圖書市場中生存。

一、閩南童謠繪本存在的問題

1.以文本為主、插畫為輔，不易被兒童理解

當前國內正式出版的閩南童謠繪本只有一套《閩南童謠繪本》叢書，該叢書以童謠文本為主、插畫為輔，文本內容既有傳統童謠，又有新近創作的童謠，內容涵蓋閩南的傳統風俗、生活情境、人情世故、昆蟲花草、家禽動物等，充分體現了閩南童謠朗朗上口、節奏明快、率真童趣、詼諧幽默、通俗易懂的特點。但是，由于插圖類繪本以文字為主，而兒童的邏輯思維還沒完全形成，對文字內容的理解比較困難。因此，家長在輔導幼兒學習閩南童謠過程中，需要運用許多不同的詮釋策略，才能引導兒童理解文字內容和插畫之間的關系。如果單幅的插畫不能準確地表達文字信息，那么這幅插畫唯一的作用就是吸引兒童去翻看那本書。此情況和心理學家塞繆爾斯的研究結果相似，即“當圖畫和文字同時呈現的時候，圖畫的刺激很容易讓孩子分心，干擾他們的閱讀反應”。繪本作為大眾普及型讀物，需要父母陪伴兒童閱讀，而普通父母并不具備老師的教學方法，在閩南語語境下引導孩子認識和理解童謠具有一定的難度。

2.缺乏形象化的整體聲色體驗

閩南童謠擁有豐富的詞匯和優美的發音，被稱為古漢語的“活化石”[1]，流傳于福建、潮汕地區、海陸豐地區、臺灣地區和東南亞等海外華人之間，是閩南人千百年來世代口傳下來的念謠或唱謠。在以普通話為基礎的語言環境中，閩南童謠出版物（包括繪本）為了保留童謠的語音原貌，一般采用閩南語發音的擬聲字進行編寫。當讀者認讀這些字時，需要對擬聲字進行辨識轉譯，這一過程對兒童來說顯然過于復雜。雖然采用手機掃描二維碼可以獲取每首童謠念唱結合的音頻方式，使讀者配合繪本的圖文更好地認知童謠，但是音頻信息被大腦感知后，需要有充分的形象化素材才能形成對童謠內容的想象。從佩里·諾德曼的兒童繪本認知理論來分析，繪本文字、插畫、音頻這三個變量仍然是分離的。因此，閱讀繪本的同時接受語音信息，需要有一連串明確的形象化、情境化的視覺體驗與之相匹配，否則僅憑一幅插畫是無法在文字和語音之間搭建起有效連接的。

二、閩南童謠繪本融入增強現實體驗的可能性

增強現實技術簡稱AR，就是一種將計算機生成的數字化內容（動畫、影像、聲音、文本等）疊加到真實場景中，并能實時與用戶交互的技術。AR出版物是指在傳統紙質出版物上，利用AR技術識別標識或圖形，在屏幕上顯示虛擬的三維物體和場景，打造虛實結合、實時交互的立體出版物[2]。兒童繪本應用AR技術，可以在靜態的圖畫上增加動畫、聲音、影像、游戲交互等多媒體內容。

隨著手持移動設備的AR功能日趨完善，AR兒童繪本出版持續升溫，2016年后各出版社相繼出版了多種AR兒童繪本，內容主要集中在文化知識和科普類讀物領域，如《中國年》（全2冊）、《皮影中國》（全3冊）、《小牛頓魔法科普館》（全30冊）、《艾布克的立體筆記》（全3冊）等。這些AR繪本在紙質圖書的基礎上充分發揮AR技術的優勢，提升了繪本閱讀的趣味性、知識性和游戲性。

具體來看，將AR技術融入閩南童謠有以下作用。

1.激發形象思維，提升藝術感知力

傳統紙質繪本形式是平面靜態的圖畫和文字，認知維度比較單一。而童謠內容中往往會出現各種自然的或神話的人物、動物、植物等角色形象。兒童在閱讀繪本時，可通過AR全息數字化視聽技術觀看繪本中的角色躍然紙上，栩栩如生地念唱童謠，從而有效激發兒童的多維感知，滿足兒童喜歡新奇有趣的事物、形象化思維、對聲音敏感等認知特點，拉近其與繪本的距離，增強其對閩南文化的興趣和認知。

2.增強繪本的游戲性，提升閱讀樂趣

兒童對藝術的感知往往通過觀看和觸摸來體驗。西班牙科學家一項針對 4—5 歲學齡前兒童的臨床試驗發現，每天使用AR讀物的兒童，無論其閱讀時長還是質量，較之于傳統圖書都有明顯提高[3]。隨著現代經濟社會的變革，閩南童謠已悄然從閩南地區兒童的生活中淡去，因此，通過故事將童謠演繹為繪本，并融入AR技術，能使圖畫中的角色活靈活現地與兒童互動，使兒童在“聲色影畫”的情境中感受繪本所傳達的信息，在游戲中自覺獲得關于童謠的知識。

3.親子互動，增進對閩南文化的了解

親子閱讀是繪本最主要的閱讀方式，而在文化全球化洗禮下成長起來的一代年輕父母，對閩南文化和閩南童謠本身就知之甚少，更不用說輔導孩子閱讀。但如果將AR多媒體功能融入繪本，增加寓教于樂的數字化內容，就能改變傳統線性教育的認知模式，大大降低學習門檻;加上AR出版物閱讀需要使用智能手機等移動設備，從而促使父母陪伴孩子一起觀看，與孩子在閱讀中一起了解閩南童謠，拉近親子關系。

三、閩南童謠繪本融入增強現實體驗的設計策略

人類的每種感官都有其特定的感知維度，多感官之間的相互轉換便形成了通感。通感在設計領域的應用主要借助基于感知經驗的觸發和聯想，把用戶不同的感官體驗綜合融通，觸發多維度用戶體驗，從而帶給用戶豐富而美好的體驗過程[4]。閩南童謠繪本融入AR多媒體交互體驗，可以讓讀者通過個體的綜合多感官體驗，感受繪本的情感傳遞，促進童謠與兒童間的交互，從而加深兒童對閩南童謠的認知和記憶。

從圖1可以看出，在閩南童謠AR繪本的交互設計時，要注意以下幾點。

1.視覺：童謠故事的主角形象代言

AR融入閩南童謠繪本是通過立體的角色念唱、動作表演與兒童形成交互，交互的主題是閩南童謠。當交互時出現多個形象，會使兒童的注意力集中在視覺感官上，反而削弱了聽覺等其他感官的感知效果，干擾了主題表達。

因此，每首童謠只安排1—2個故事中的角色出場最為合適，并且專注于營造1—2個交互角色，這樣不僅節省移動終端大量的運行資源，還能保證AR成像和交互功能能夠在中低端移動設備上順暢運行。

2.動態：把地方文化融入動畫表演

只要AR出版物中的角色會動，在設計上就存在“怎么動”的問題。 在國際化的技術背景下，東方美學與西方美學的差異不再體現在工具上，而體現在審美層面。兩者在題材、風格、節奏、敘事方法上有著明顯的差異，而這些差異更多來源于文化[5]。因此，閩南童謠繪本的AR角色動畫設計應從傳統文化主題出發，表演風格是一個可探討的創新點。

雖然當下AR繪本角色動畫設計大多采用以迪士尼為代表的西式動畫運動規律，但在設計傳統文化主題的AR繪本角色動畫時，設計者可以嘗試導入本土文化價值對其進行塑造，把握好本地區傳統文化的優勢，創造出既有現代審美價值又有傳統藝術美感的動畫表演風格。例如，結合閩南提線木偶戲的表演形態，把以下四個特點應用到動畫設計中，可使繪本角色的動畫表演呈現“偶趣”的一面。

一是身形如吊。由于提線木偶的各個關節是被懸絲牽引著的，所以表演時其肩、肘、臀都會有被提吊著的視覺感，而沒有線的部位會呈現松軟感，一緊一松兩種變化構成一個形體，無論靜止還是運動，都呈現一種獨特的肢體造型。

二是四肢彎曲、形態多菱角。由于提線木偶動作時四肢關節被懸絲提吊，呈彎曲狀，特別是肘部彎曲的同時向外伸展（在表演線規中稱為“提肘”），兩肘在肢體兩側分開，看上去“棱角分明”，與幽默大師卓別林分開雙腳的標志性表演造型有異曲同工之處。

三是手足配合，手臂動作大。由于提線木偶“臂長及膝”，腿部比例偏短，所以在運動中手臂的動作幅度較大，再加上“提肘”，動作顯得夸張，配合腿部運動頻率快、幅度小，自然形成一種獨特的幽默動態。

四是“慣性動作”添趣味。由于提線木偶是靠撥弄懸絲動作的，停頓時各關節自然會產生慣性的顫動。正如泉州高甲戲“傀儡丑”，刻意模仿“富有趣味和詩意的慣性動作來強調肢體的受限和被操縱感”[6]。這種有意追求的動作定式，增強了整組動作的韻律感和節奏感。

3.聲音：符合主角形象的擬人化語音

聲音是實現AR人機交互的關鍵因素之一，缺少聲音配合，再好看的造型、再有趣的動畫也會使人機交互體驗像隔了一堵墻。閩南童謠AR繪本應重視不同形象（人物、動物、植物）擬人化的語音設計，一方面，可以通過卡通角色的動作和童謠念唱表演加強對繪本內容的表達，發揮AR繪本多媒體技術優勢，提升兒童對以閩南語為語言基礎的閩南童謠的接受程度;另一方面，符合角色形象的語音設計是塑造一個完整的角色形象所不能忽視的，有好聲音的立體卡通角色，可以讓兒童對閩南童謠產生親近感，降低童謠認知的難度。

4.交互：寓教于樂的游戲形式

AR作為一種數字化技術手段融入童謠繪本，目的是豐富繪本的感官內容，使讀者可以輕松愉快地從中獲取知識。在當前新媒體技術創新教育模式的背景下，游戲知識化和知識游戲化是大趨勢，因此童謠繪本中的游戲互動設計，可利用AR技術中將虛擬世界和現實世界結合的技術特點進行開發[7]。例如，設置錄音功能，將讀者學習念唱童謠的聲音錄制下來在設備上播放，AR繪本中的角色會實時做出各種鼓勵性動作和發出相關語音，讓兒童感受到虛擬角色與其有情感上的交互，引導和鼓勵兒童主動學習。

文化傳播的關鍵在于讓人和文化發生關系，對非遺文化進行跨時間和地域邊界的創新探索，也是當前文化創意產業發展的一個重要契機[7]。閩南童謠繪本應適當融入AR多媒體交互設計，創造與插畫繪本認知體驗相異的表達形式，提升繪本的親和力，激發兒童的認知興趣，降低兒童對以閩南語為語言載體、以念唱為表達形式的閩南童謠的認知難度，讓兒童在閱讀和交互中獲得傳統文化的熏陶。

|參考文獻|

[1]鷺白. 母語的溫度與文化根脈——以《閩南童謠繪本》點亮童年記憶[J]. 福建教育，2018（51）：56-57.

[2]周榮庭，顧斐. 增強現實童書的擬人化創新路徑研究[J]. 出版廣角，2017（24）：6-9.

[3]上官大堰. 增強現實兒童圖書優勢分析與設計策略構建[J]. 科技與出版，2017（2）：75-80.

[4]梁婷，湯曉穎，羅立宏. 基于粵語童謠的多感官設計研究[J]. 包裝工程，2020（18）：199-205.

[5]唐紅平. 透過水印木刻視覺語言探索水墨動畫創新[J]. 裝飾，2019（6）：102-105.

[6]吳慧穎. 高甲戲“傀儡丑”表演形態初探[J]. 戲劇，2012（3）：79-85.

[7]呂中意. 活態傳承視域下的非遺產品開發[J]. ?藝術百家，2019（3）：185-190.