初級漢語聽力測試信度研究
2015-05-30 03:43:17賀雪霏宋春陽
現代語文 2015年4期
賀雪霏 宋春陽
摘 要：利用SPSS軟件對留學生初級漢語聽力試卷進行統計分析，檢測其難度、區分度及內在信度，分析該試卷存在的不足，并針對試卷編寫提出改進建議。
關鍵詞：初級漢語 聽力測試 難度 信度
一、引言
聽力是第二語言教學雙方都十分重視的一項語言技能，也是衡量一個人綜合語言能力的一項重要指標。聽力測試是語言測試中一個非常重要的部分，一份高質量的試卷可以在最大程度上測試出學生的實際能力。本文對上海交通大學國際教育學院的留學生初級漢語聽力測試期末試卷進行分析，主要對試卷的難度和內在信度兩個方面進行檢驗，分析學生聽力的薄弱點，希望對試卷編寫和聽力教學提供一定幫助。
二、測試概況
（一）研究對象
本研究選取了上海交通大學國際教育學院2014年1月，初三漢語聽力測試期末試卷作為研究對象，被試是初等三級的漢語學習者，共有148人，實際參加考試的人數共為105人，有效試卷為105份。
（二）研究方法
本文通過統計出每道題的答對率，運用SPSS軟件，分析試卷的難度、區分度，采用a信度系數法和分半信度法檢測試卷的內在信度。
三、試卷分析
（一）試卷結構
該套試卷由50道單項選擇題構成，每小題答對得2分，共計100分。試題分為三個部分：第一部分是兩個人的一問一答第三個人就對話提一個問題，共15道題；第二部分是兩個人的簡短對話，第三個人根據對話提一個問題，共20道題；第三部分是幾段簡短的對話或講話，每段話后，被試將聽到若干個問題，共15道題。所有聽力材料都會念兩遍。
（二）測試成績分析
圖1：
表1：描述統計量
N 極小值 極大值 均值 標準差 方差
聽力成績 105 22.00 86.00 58.9905 15.50217 240.317
有效的N（列表狀態） 105
表2：各分數段比重
分數段 >=80 79～70 69～60 59～50 49～40 39～30 29～20
人數 13 17 28 14 20 9 4
百分比 12.38% 16.19% 26.67% 13.33% 19.05% 8.57% 3.80%
圖1為根據此次聽力成績繪制的直方圖，由該圖可以看出，此次聽力測試的整體成績基本呈正態曲線分布，分數主要集中在40～70之間。表1、2顯示，該測試最高分為86，最低分為22，高分與低分差距懸殊，且低分很低。從以上數據還可以看出，及格率較低，為55.2%，且平均分很低，為58.99<60。通常考試的標準差應控制在9～15之間比較恰當。如果標準差小于8，說明成績分布較為集中，試卷區分度太小，中等難度的題目偏多；標準差如果大于16，則說明成績過于分散。該測試學生成績標準差為15.50217>15，說明成績有一定分化，具有較高區分度。
（三）難度分析
難度是衡量試題難易程度的指數，本文采用考生對試題的答對率作為難度系數，即答對的分數除以總分，難度一般用字母“P”表示，難度系數越小，題目難度越大。一般來說，當P>0.7時，試題太易；當P<0.4時，試題太難；當0.4
（四）信度分析
信度也叫測試的可靠性，指的是測試結果是否穩定可靠。試卷信度可用信度系數來表示，系數越大，信度越高，試卷可信程度也就越高。信度系數為1，表明研究工具（如試卷）完全可靠；相關系數為0，表明該研究工具完全不可靠。一般認為，小于0.6的試卷，內部一致性低，信度較低；介于0.6和0.8之間的試卷，信度較高；大于0.8的試卷，內部一致性高，信度非常高。
本文首先采用克朗巴赫a系數評價試卷信度，從該套試卷的三個題型之間的相關程度來檢測其內在一致性。
表3：可靠性統計量
Cronbach's Alpha 基于標準化項的 Cronbachs Alpha 項數
0.837 0.840 3
表3中，本套試卷的Cronbach's a值達到0.837，大于0.8，一致性信度很好，測試的可靠性比較高。
表4：項間相關性矩陣
題型一 題型二 題型三
題型一 1.000 0.641 0.555
題型二 0.641 1.000 0.713
題型三 0.555 0.713 1.000
表5：摘要項統計量
均值 極小值 極大值 范圍 極大值/極小值 方差 項數
項之間的相關性 0.636 0.555 0.713 0.158 1.285 0.005 3
表4、表5為項間相關性系數，即三個體型的內在相關一致性。表4中，題型一和題型二之間的相關系數是0.641，與題型三之間的相關系數為0.555，題型二與題型三之間的相關系數是0.713。通過數據可以看出，題型一與題型三之間內部一致性低，題型一與題型二、題型二與題型三之間內部一致性較高，考查內容較為相近，且后者一致性明顯高于前兩組。表5給出了各項間相關系數的平均值，為0.636，在0.6～0.8的區間內，說明三道大題間整體一致性保持良好，信度可靠。
四、學生答題反饋的問題
該套試卷中，部分題目學生答對率很低，答對人數僅占30%左右，甚至更低。本文將選取其中一些出錯率高的試題，分析學生出錯的原因，提出試題的改進建議。
（一）干擾信息過多，未能突出關鍵信息
（26）A：我剛下樓去取了賬單，水費56，電費160，話費單300……
B：這個月的話費又這么多。
A：電話費是不是錯了？咱們家這個月沒打很多長途啊，怎么這么多錢？
B：長途是沒打幾個，可你一拿起電話就不停地說，電話費還能不往上漲？
問：這個月電話費為什么很多？
A.錯了 B.打了長途 C.打得次數太多 D.聊得很久
（43）……我想，坐地鐵肯定來不及，因為走到地鐵站還要15分鐘，在地鐵上差不多也要10分鐘，下了地鐵還要走5分鐘。我想，干脆打個車吧。等了5分鐘左右，來了一輛。我告訴師傅地址，還告訴他開快點兒。他說“好嘞！”還好路上沒等很多紅綠燈。我10分鐘以后就到了教學樓……
問：從他家到教學樓坐地鐵要多長時間？
A.15分鐘 B.20分鐘 C.25分鐘 D.30分鐘
以上兩題學生答對率都僅為10.48%。第26題中，出現多個在現實生活中可能引起電話費貴的因素，如“出錯、打長途次數多、通話時間長”，且選項中的答案客觀上似乎合乎常理，學生只能通過對所聽語料進行仔細甄別，排除干擾信息，提取正確信息。但這里的干擾信息過多，而且關鍵信息的詞匯等級也較高，如“不停地”“聊”，所以造成答對率過低。而在第43題中，在這個語段中出現了多個時間點，學生易產生混淆，并且此題還涉及數字運算，選擇正確的信息進行相加，進一步增加試題的難度。
（二）詞匯或句式過難，超出了學生的理解能力
（40）……
B：好的，租金怎么付？
A：付三押一。一個月租金是5000。
……
問：要租這套房子，第一次應該付多少錢？
A.5000 B.1000 C.15000 D.20000
（4）A：我父母都希望這次比賽我能得冠軍，看來要讓他們失望了。
B：你最近都沒怎么訓練，不過只要從現在起努力，得冠軍也不是不可能的。
問：第二個人認為能得冠軍嗎？
A.能 B.不能 C.可能 D.不可能
以上兩題，學生答對率分別為21.9%和33.33%。第40題中，關鍵詞是“付三押一”，該詞難度大，意思是“付三個月房租和另付一個月作為押金”，“付”不難理解，但“押”學生不容易理解，且這種省略緊縮形式，即使學生聽對讀音，也不清楚詞的意思。第4題中，學生出錯的原因是沒有掌握“雙重否定”這一表達“肯定”的語法結構，“不是不可能”意思是“有可能”，但絕大多數學生將其理解為“不可能”，造成錯誤。
五、結語
通過分析，整套試卷質量較好，區分度高，將不同水平的學生能力測試了出來。在題目的難易程度安排上，結構合理，內部一致性高，信度很好，測試結果具有穩定性，但各題型之間的內在一致性仍需提高。該試卷設計比較理想，但其中有些詞匯超出學生現階段接受能力，對聽力材料的選擇可以更加完善。這次考試反映出學生能力差異過大，教師應當平衡學生整體素質，以免差距繼續拉大。對能力差的同學應采取有效的補救措施，因材施教，針對弱點，教授聽力技巧，幫助其提高聽力。此外，通過學生答題情況分析，學生排除干擾、跳躍障礙的能力較弱，對關鍵信息的處理能力有待提高。聽力雖然屬于一項語言技巧，但需要系統扎實的語言知識作為支撐。掌握詞義和語法知識對聽力有著重要意義，因此教師不可忽視對語言知識的講解。
參考文獻：
[1]柴省三.漢語水平考試（HSK）聽力測驗構想效度研究[J].語言文字應用，2011，（1）.
[2]谷陵.論漢語聽力測試中應考查的六種聽力技能[J].云南師范大學學報（對外漢語教學與研究版），2003，（6）.
[3]金琰如，王佶旻.初級階段留學生漢語聽力能力結構探究[J].語言教學與研究，2012，（3）.
[4]李慧.漢語作為第二語言的測試研究[M].北京：北京語言大學出版社，2011.
[5]楊瑞和.語言研究應用SPSS軟件實例大全[M].北京：中國社會科學出版社，2004.
[6]趙金銘.語言測試理論及漢語測試研究[M].北京：商務印書館，2006.
[7]朱正才，范開泰.語言聽力理解能力的認知結構與測試[J].語言教學與研究，2001，（3）.
（賀雪霏 宋春陽 上海交通大學國際教育學院 200030）
