多模態(tài)兒童繪本的讀者閱讀認知調(diào)查研究

陳俊?劉玉君

【摘 要】 兒童繪本是由圖像、文字、色彩等模態(tài)符號構(gòu)成的多模態(tài)語篇。文章運用調(diào)查問卷和訪談的方式，對讀者選擇兒童繪本，閱讀繪本的時長，對繪本模態(tài)的閱讀傾向，閱讀繪本的認知感受及情感反應(yīng)等方面進行調(diào)查，發(fā)現(xiàn)學(xué)生和家長已經(jīng)意識到閱讀兒童繪本的重要性，學(xué)生傾向于先閱讀繪本中的圖像模態(tài)，每天保持10分鐘閱讀時長的較多。兒童繪本能夠充分調(diào)動讀者的視覺、觸覺、聽覺等感官，使讀者得到更好的理解、認知和情感體驗。

【關(guān) 鍵 詞】兒童繪本；多模態(tài)；讀者認知

【作者單位】陳俊，淮陰工學(xué)院外國語學(xué)院；劉玉君，淮陰工學(xué)院。

繪本是以圖畫為主，并附有少量文字的圖畫書。目前市面上的繪本以低幼兒童的閱讀對象為主，人們稱之為兒童繪本。近年來，家長和教師越來越重視對幼兒、小學(xué)低年級（1—2年級）學(xué)生閱讀意識的培養(yǎng)。對于這一年齡段的孩子來說，如果讓他們?nèi)プR別那些由抽象文字符號所組成的文章，可能會給其帶來不小的閱讀障礙，而且會降低他們的閱讀興趣。而兒童繪本符合這一年齡段孩子認知閱讀的特點，在教師或者家長的陪同下，孩子能夠借助兒童繪本順利地掃除抽象文字所帶來的閱讀障礙，逐漸培養(yǎng)閱讀的興趣。因此，對兒童繪本進行研究，可以更好地探究讀者閱讀兒童繪本時所產(chǎn)生的心理體驗和情感反應(yīng)，便于科學(xué)合理地利用兒童繪本進行教育教學(xué)。

一、文獻回顧

兒童繪本是一種由文字、圖畫等模態(tài)符號組成的多模態(tài)語篇，研究多模態(tài)兒童繪本，首先要了解模態(tài)和多模態(tài)的概念。朱永生 （2007）指出，模態(tài)包括語言、技術(shù)、圖像、顏色、音樂等符號系統(tǒng)。綜合利用聽覺、視覺和觸覺等三個或三個以上的感官，通過語言、聲音、顏色、圖像等多種模態(tài)符號創(chuàng)造和傳達意義的方式則叫多模態(tài)。張德祿（2009）認為，多模態(tài)語篇是運用聽覺、視覺、觸覺等多種感覺，通過語言、圖像、聲音、動作等多種手段和符號資源進行交際的現(xiàn)象。多模態(tài)語篇的多種符號資源在同一語篇中相互作用，各自發(fā)揮作用。

近年來，國內(nèi)外有關(guān)兒童繪本多模態(tài)語篇的研究主要集中在以下幾個方面。國外學(xué)者Perry Nodelman（2010）對兒童繪本的圖像與文字關(guān)系、圖像如何敘述故事、多種模態(tài)意義進行了解讀；Gibbons（2012）探討了讀者在閱讀具有圖形、插圖和文字的多模態(tài)小說的過程中的心理活動和閱讀感受；David Lewis研究了繪本中圖與文的關(guān)系，他認為圖與文可以步調(diào)一致地講述故事，也可以輪流來講故事，而且二者是相互激勵的、靈活的和復(fù)雜的。在國內(nèi)，陳文亮（2012）分析了幾米的繪本作品，指出繪本作品中圖像與文字的互文效果能夠增強繪本的表現(xiàn)力和隱喻色彩；周俐（2014）、謝妮妮（2014）分析了兒童繪本、插圖繪本中圖文模態(tài)間的相互關(guān)系；趙秀鳳等（2014）探究了讀者閱讀繪本時的審美感受。

國內(nèi)外學(xué)者主要分析了多模態(tài)兒童繪本語篇中圖像、文字、聲音的相互關(guān)系，以及模態(tài)的轉(zhuǎn)隱喻構(gòu)建特征等，對于讀者的認知感受和體驗也有所涉及，但鮮有從讀者（包括在家長陪同下）的閱讀角度去調(diào)查他們在閱讀過程中的認知感受和情感反應(yīng)。本文擬從讀者（包括家長）的閱讀認知角度入手，運用問卷調(diào)查的方法，對小學(xué)低年級學(xué)生的繪本閱讀認知情況進行調(diào)查研究，以探究讀者（包括兒童和家長）在閱讀多模態(tài)兒童繪本作品時的心理體驗和情感反應(yīng)。

二、研究設(shè)計

1. 提出問題

本研究試圖解決以下兩個主要問題。哪種模態(tài)的兒童繪本題材更吸引讀者且有助于激發(fā)他們的閱讀興趣？讀者在閱讀多模態(tài)兒童繪本作品時的認知感受以及情感反應(yīng)是什么？

2.研究對象

本研究以江蘇省淮安市兩所小學(xué)一、二年級的學(xué)生及其家長作為研究對象，其中一所為市重點小學(xué)，另一所為普通小學(xué)。分別在這兩所小學(xué)對部分學(xué)生及其家長進行問卷調(diào)查，包括100名一、二年級的小學(xué)生和100名相對應(yīng)的家長，總共發(fā)放問卷200份，實際回收問卷193份，問卷回收率達96.5%。實際有效問卷190份，其中一年級學(xué)生及其家長的問卷97份，二年級學(xué)生及其家長的問卷93份，最終實際有效問卷率為95%。

3.主要調(diào)查內(nèi)容

本研究的調(diào)查問卷由兩個部分構(gòu)成：第一部分是對小學(xué)一、二年級的學(xué)生及其家長基本情況的調(diào)查；第二部分圍繞以上兩個主要問題展開，包括對家長選擇的兒童繪本題材及其依據(jù)的調(diào)查（即依據(jù)什么選擇兒童繪本），繪本閱讀的時長與閱讀環(huán)境的選擇，對于繪本中圖畫、文字等模態(tài)的閱讀傾向，在兒童繪本親子閱讀中學(xué)生、家長的認知感受及情感反應(yīng)四個主要方面。

4.研究方法

本研究主要采用問卷調(diào)查的方法，并且根據(jù)實際情況設(shè)計個別訪談環(huán)節(jié)作為輔助方法，即隨機對部分學(xué)生及其家長進行個人訪談，以便更好地了解學(xué)生、家長對多模態(tài)兒童繪本閱讀的認知感受以及情感反應(yīng)。

三、結(jié)果與討論

1.兒童繪本閱讀題材的選擇及其依據(jù)

兒童繪本是一種以圖畫模態(tài)為主，附以少量文字模態(tài)或其他模態(tài)符號的書籍，創(chuàng)作的題材一般涉及故事、科普知識、教育、文學(xué)等方面。通過問卷調(diào)查可以發(fā)現(xiàn)，選擇故事類兒童繪本的占54.7%，選擇科普知識類的占31.2%，選擇教育類的占14.1%。這說明家長和學(xué)生以選擇故事類的兒童繪本為主，其次是科普知識類的繪本，再次是教育類題材的繪本。從選擇繪本閱讀題材的依據(jù)來看，一半以上的家長和學(xué)生選擇故事類的兒童繪本，家長們認為故事類繪本有助于孩子身心健康的發(fā)展，同時也受到教師或同事、朋友的推薦，以及大型圖書網(wǎng)站或書店的宣傳影響。值得一提的是，在這些繪本題材中，獲得國內(nèi)外著名繪本獎項的作品是學(xué)生和家長的首選對象，這也要求繪本創(chuàng)作者應(yīng)多創(chuàng)作出優(yōu)秀的兒童繪本作品。

2.閱讀時長與閱讀環(huán)境的選擇

以下是小學(xué)一、二年級學(xué)生每日兒童繪本閱讀時長的調(diào)查情況，如圖1所示。

從圖1可以看出，學(xué)生的每日兒童繪本閱讀時長在10分鐘左右的占43.2%，閱讀時長在20分鐘左右的占25.4%，閱讀時長在30分鐘至1小時的占18.1%，閱讀時長超過1小時的僅占13.3%。調(diào)查過后，筆者隨機對部分學(xué)生及其家長進行個人訪談，發(fā)現(xiàn)他們繪本閱讀時間較少的原因主要是家長們認為繪本閱讀固然重要，但是每次閱讀超過1小時，閱讀時間過長，孩子不容易集中注意力，不符合這一年齡段孩子的心理發(fā)展特點。

此外，在繪本閱讀環(huán)境或場所的選擇方面，47.2%的學(xué)生和家長首選家里的書房或臥室作為閱讀場所，33.5%選擇書店作為閱讀場所，19.3%的學(xué)生選擇學(xué)校作為閱讀場所。筆者向部分學(xué)生及其家長了解到，學(xué)生最喜歡在家里閱讀繪本的原因主要是有家長陪伴且環(huán)境安靜；把書店作為繪本閱讀的第二場所是因為書店繪本書籍的種類多；而將學(xué)校作為繪本閱讀地點的學(xué)生僅占19.3%，一方面說明目前有些學(xué)校對兒童繪本閱讀不夠重視，另一方面說明在學(xué)校閱讀繪本的時間較少。

3.讀者對兒童繪本圖像、文字等模態(tài)的閱讀傾向

一般來說，小學(xué)一、二年級的學(xué)生觀察周圍事物的方式是直觀的，他們對色彩比較鮮艷的圖片、文字表現(xiàn)出極大的興趣。周俐（2014）指出，兒童繪本的作者和插畫家們借助圖像、文字、色彩等多種模態(tài)創(chuàng)作繪本，繪本的圖、字等模態(tài)相互作用，共同敘述故事。雖然一些學(xué)者認為兒童繪本中的圖像、文字、色彩等模態(tài)相互協(xié)調(diào)，共同敘事，但在研究調(diào)查中發(fā)現(xiàn)，學(xué)生在閱讀繪本時，對于不同模態(tài)的關(guān)注傾向程度有所不同。75.7%的學(xué)生閱讀繪本喜歡先觀看優(yōu)美的圖像，特別是色彩鮮艷的圖畫；24.3%的學(xué)生先注意繪本上的文字，尤其是排版特別、字體特殊的文字，隨后再結(jié)合圖像去閱讀繪本。因此，繪本作者和插畫家除了要注重繪本的內(nèi)容情節(jié)，更要重視繪本圖像、色彩的合理運用。

4.讀者對兒童繪本閱讀的認知感受以及情感反應(yīng)

小學(xué)一、二年級學(xué)生的思維具有具體性，他們一般從自己的角度認識和感知周圍比較熟悉的事物。因此，對于兒童繪本的選擇、閱讀要符合這一年齡段孩子的思維特點。戴雪紅（2016）認為，“兒童繪本是滿足孩子認知閱讀的需求，閱讀的目的在于理解，理解實際就是一個學(xué)習(xí)者以信息接收、編碼為基礎(chǔ)，根據(jù)已有的信息建立內(nèi)部的心理表征，進而獲取意義的過程，兒童閱讀圖畫書的過程實際上是從圖書的符號中取得意義的心理過程”。本研究對小學(xué)一、二年級學(xué)生在閱讀繪本過程中的識記內(nèi)容、主要識記方式、閱讀認知感受以及情感反應(yīng)進行重點調(diào)查，調(diào)查結(jié)果見表1。

如表1所示，在閱讀繪本過程中，37.3%的學(xué)生能夠利用視覺、觸覺記住由圖像、色彩等模態(tài)所描述的主要人物或事物，因為直觀的人或物的圖像能夠引起他們的注意和興趣。學(xué)生有時候還會和家長或同學(xué)進行角色扮演，揣摩繪本中人物的特點，甚至不少家長或?qū)W生深受繪本中正面人物形象的影響，并向他們學(xué)習(xí)，這對學(xué)生身心健康的發(fā)展起到積極作用，隨后在對一些學(xué)生及其家長的訪談中也印證了這一點。

對于繪本中故事情節(jié)的復(fù)述，34.6%的學(xué)生能夠通過視覺、聽覺、觸覺對由圖像、文字、色彩等模態(tài)相結(jié)合的繪本進行理解，然后借助手勢、聲音等手段繪聲繪色地敘述繪本的故事情節(jié)，甚至結(jié)合自己的生活經(jīng)歷進行表演。這樣一來，學(xué)生在無形中融入了繪本的故事情節(jié)，隨著主人公的情感變化而變化，豐富了自身的情感體驗。同時，這樣的方式既有助于提高學(xué)生的語言表達能力、認知能力，又能夠培養(yǎng)其再創(chuàng)作能力和想象力。筆者在訪談中了解到，有些兒童繪本使家長和學(xué)生在情感上產(chǎn)生共鳴，如《大腳丫學(xué)芭蕾》，該繪本的主人公貝琳達能夠勇敢地面對自己，一直不放棄夢想。同時，通過復(fù)述繪本的故事，學(xué)生的口頭表達能力也得到了明顯的提高。

28.1%的學(xué)生通過自己觀察繪本中的圖像、文字或家長閱讀講解繪本的方式，運用視覺、聽覺等感官與繪本人物、情節(jié)進行交流互動，體會其所要表達的主題思想，明白一些做人、做事的道理，學(xué)生的情感受到陶冶，身心得以健康發(fā)展。

四、結(jié)語

本次調(diào)查發(fā)現(xiàn)，學(xué)生及其家長都意識到繪本閱讀的重要性，表示兒童繪本在培養(yǎng)低年級學(xué)生閱讀能力、表達能力以及認知能力方面起著重要的作用。但是，在研究過程中尚存在局限，如調(diào)查內(nèi)容比較粗略、數(shù)據(jù)分析方法有待改進等，在今后的研究中需要努力克服。

|參考文獻|

[1]朱永生. 多模態(tài)話語分析的理論基礎(chǔ)與研究方法[J]. 外語學(xué)刊，2007（5）.

[2]張德祿. 多模態(tài)話語分析綜合理論框架探索[J]. 中國外語，2009（1）.

[3]培利·諾德曼. 話圖[M]. 臺灣：財團法人兒童文化藝術(shù)基金會，2010.

[4]Gibbons Alison. Multimodality，Cognition，and ExperimentalLiterature[M]. London：Routledge，2012.

[5]Lewis David. Reading Contemporary Picturebooks：Picturing Text[M]. London and New York：Routledge，2001.

[6]陳文亮. 成人中心主義的解構(gòu)：幾米繪本的文化學(xué)分析[J]. 汕頭大學(xué)學(xué)報（人文社會科學(xué)版），2012（3）.

[7]周俐. 兒童繪本中的圖、文、音——基于系統(tǒng)功能多模態(tài)語篇研究及社會符號學(xué)理論的分析[J]. 外國語文，2014（3）.

[8]謝妮妮. 《格林童話》中圖文關(guān)系的邏輯語義擴展探討[J]. 外語教學(xué)，2014（1）.

[9]趙秀鳳，李曉巍. 認知詩學(xué)視域下“情緒”的多模態(tài)轉(zhuǎn)喻構(gòu)建——以幾米繪本《時光電影院》為例[J]. 北京科技大學(xué)學(xué)報（社會科學(xué)版），2014（6）.

[10]戴雪紅. 基于認知閱讀的兒童繪本設(shè)計[J]. 包裝工程，2016（2）.