基于模擬測試的泰國高考漢語PAT7.4效度分析

陳善美 宋春陽

摘 要：本文基于大樣本的模擬測試并以真實的泰國漢語高考PAT7.4成績作為效標，對泰國高考漢語PAT7.4的效度進行了研究。

關鍵詞：泰國漢語高考PAT7.4 信度 效度

一、引言

有關泰國高考漢語PAT7.4效度問題，已經有若干研究成果。但由于歷年考生的答卷都是保密的，不能對測試的成績進行統計，所以前人研究結果基本都是基于試卷的內容、題型、試卷結構、時間或部分考生考試的感受及反饋的問卷，并結合某種測試理論或語言教學理論對其效度做出推斷和提出改進建議，如：春麗娟（2012）、周國鵑和春麗娟（2013）、泰宗（2013）、萬惜春（2014）、李穎（2015）、楊凱（2016）等。這些論文由于缺乏大樣本的答卷統計數據的支持，顯得不夠客觀。為此，本文基于大規模模擬測試被試的成績統計，對泰國高考漢語PAT7.4的效度進行研究。

二、被試、試卷及測試的實施

（一）被試

本次泰國高考漢語PAT7.4的模擬考試一共有120人參加，考試模擬被試為泰國文科漢語班的高中三年級學生以及考過泰國漢語高考PAT7.4考試的大學生。參加模擬泰國漢語高考PAT7.4考試的學生分為三組，這三組學生分別來自泰國不同的地方：玫瑰園中學是在首都曼谷的學校、宋卡沃拉娜麗查棱學校是在宋卡南方的學校、考過泰國漢語高考PAT7.4考試的大學生是宋卡王子大學的學生。這些學生年齡一般在18～20歲之間。

（二）試卷

模擬試卷是根據課程教學大綱高中階段六個學期內的知識能力的要求進行的模擬命題。泰國高考漢語的命題內容和要求如下：

1.泰國高考漢語試題分為兩部分，一部分用簡體字，另一部分用繁體字，學生可以任意選擇其中一個部分。

2.所有的試題均是100道題目，分數為300分，考試的時間是180分鐘，每道題的平均使用時間是1分鐘30秒。

3.泰國高考漢語試題的內容所占比重：語法知識占40%，詞匯知識占40%，語音知識占5%，文字知識占5%，文化知識占10%。

4.泰國高考漢語試題只測試“閱讀能力”，沒有測試聽力能力、寫作能力、說話能力。

5.泰國高考漢語試題分為七個部分：正確選擇詞語的位置、詞語辨析、判斷正確、同義詞替換、閱讀理解、選詞填空、句子的排列。

總體來說，模擬測試的內容與真題涉及的考查內容一致，對學生的語音、語法、詞匯等語言知識和語言運用能力進行了綜合性的考察，同時也對學生關于中國文化歷史風俗等的了解情況進行了測試，試題難易結合，由淺入深。

（三）測試的實施

本次測試分三次進行：第一次在宋卡沃拉娜麗查棱學校進行，宋卡位于泰國南部，是一個港口城市，沃拉娜麗查棱學校是宋卡王子大學孔子學院簽署合作教學點的三所學校之一；第二次在玫瑰園中學進行，玫瑰園中學坐落于曼谷的唐人街，該校建于一百二十七年前，已經成立孔子學堂，這是泰國第三家正式的孔子學堂；第三次在宋卡王子大學，對象是參加泰國漢語高考PAT7.4考試的大學生。此次調查選取的三所學校都是具有濃厚的中華文化氛圍的學校。

在正式測試開始的前一周，我們會通知學生進行PAT 7.4模擬考試的日期，并且告訴學生可以就測試的項目有意識地進行必要的考前準備，在指定的日期參加模擬考試。雖然已經告訴學生這只是模擬考試，但有些學生在模擬考試過程中依然比較緊張，這說明了學生對模擬測試的重視程度很高。

三、PAT7.4模擬測試質量分析

（一）試卷結構效度分析

這次泰國高考漢語PAT7.4的模擬考試試卷分為八個部分：選擇詞語正確答案（判斷正誤）、選擇填空、同義詞替代、詞語辨析、完成對話、理解句子、閱讀理解、按要求選擇、句子排列。具體情況見表1。

表1：泰國高考漢語PAT7.4的模擬考試試卷題型及得分率

題型 題量 分值 總計 得分率

一、判斷詞語正誤 10 3 30 56.25%

二、選擇詞填空 10 3 30 57.08%

三、同義詞替代 10 3 30 59.25%

四、詞語辨析 27 3 81 45.49%

五、理解句子 8 3 24 55.83%

六、指定詞語完成對話 7 3 21 49.40%

七、按要求選擇 10 3 30 47.41%

八、句子排列 3 3 9 53.88%

九、閱讀理解 15 3 45 53.66%

合計 100 300 53.14%

從表1可以看出，本次泰國高考漢語PAT7.4的模擬考試試卷的題量總數為100題。其中讓考生從事先擬定的答案中辨認出正確答案的客觀題為82題，包括第一部分選擇詞語正確答案、第二部分選詞填空、第三部分同義詞替代、第四部分詞語辨析、第七部分按要求選擇、第九部分閱讀理解，共計246分；考察考生理解能力的主觀題共18題，包括第五部分理解句子、第六部分完成對話、第八部分句子排列，共計54分。這次試題題量適中，主客觀題比例分布處于比較合理的范圍。

（二）考試總體成績分布

120名考生的考試成績中，最高分是279分，最低分是54分，平均分是151.6分。

表2：泰國高考漢語PAT7.4的模擬考試成績分數段人數及比重統計

分數段 0～30 31～60 61～90 91～120 121～150 151～180 181～210 211～240 241～270 271～300

人數 0 2 29 13 14 19 17 20 5 1

得分率 0% 1.6% 24.1% 10.8% 11.6% 15.8% 14.1% 16.6% 4.1% 0.8%

由表2可以看出，考生分數基本上集中在30～180分，211～300分的人數明顯減少，150分以上的人數為62人，占整個考生人數的51.67%。本次泰國高考漢語PAT7.4的模擬考試考生平均成績為151.6分，說明本次模擬考試考生的成績不太理想，大多數考生成績在61～90分，因而拉低了平均成績。

（三）試卷各題型的難度

難度（得分率）是測試質量的一個重要指標。本次試卷的五種題型的得分率從表1可以看出：本次泰國高考漢語PAT7.4的模擬考試各題型得分率很低，說明簡單題目較少，難題很多，該試卷偏難。從卷面分析和反饋看，學生的考試成績呈兩極分化狀態，其中失分最嚴重的是完成會話與改錯句等主觀寫作題，這說明學生漢語綜合運用能力較低，尤其是對漢語的語感與寫作還處在較低水平上。

（四）試卷的內部信度分析

根據表3的相關數據，利用SPSS軟件，從語音、文字、詞匯、語法、文化、閱讀六個方面以及與總分之間的相關性進行數據分析，結果如下：

表3：試卷測試內容相關性分析 Inter-Item Correlation Matrix

語音 文字 詞匯 語法 文化 閱讀 總分

語音 1.000 .348 .454 .485 .437 .489 .566

文字 .348 1.000 .441 .421 .389 .431 .504

詞匯 .454 .441 1.000 .860 .673 .798 .920

語法 .485 .421 .860 1.000 .704 .792 .928

文化 .437 .389 .673 .704 1.000 .871 .824

閱讀 .489 .431 .798 .792 .871 1.000 .945

總分 .566 .504 .920 .928 .824 .945 1.000

根據教育測量學家的研究，相關值介于0.71～0.99屬于高度相關，0.5～0.7屬于中度相關，0.3～0.49屬于低度相關，低于0.3說明相關性過低。通過相關性的分析，可以得出下列結論：

1.在本次泰國高考漢語PAT7.4的模擬考試中，閱讀和總分的相關性最高，達0.945。閱讀、詞匯、語法、文化與總分都呈高度相關。

2.語音、文字和總分相關性為0.566和0.504，屬于中度相關。

3.詞匯、語法、文化與閱讀的相關度分別為0.798、0.792和0.871，屬于高度相關。

4.語音、文字和閱讀的相關度分別為0.489和0.431，屬于低度相關。

（五）模擬成績與PAT7.4真實成績比較

120名考生的模擬考試成績與泰國高考漢語PAT7.4真實成績之間的相關性數據表如下：

表4：模擬考試成績與真實考試成績的相關性數據表

Paired Samples Statistics

Mean N Std. Deviation Std. Error Mean

Pair 1 模擬成績 151.6000 120 61.18074 5.58501

高考成績 120.9333 120 52.20028 4.76521

表4給出了泰國高考漢語PAT7.4模擬考試成績與泰國高考漢語PAT7.4真實成績的平均分（Mean）、參考數目（N）、標準差及標準誤差（Std.Deviation&Std.Error; Mean）這四項基本的描述統計指標。

表5：模擬成績與PAT7.4真實成績相關檢驗

Paired Samples Correlations

N Correlation Sig.

Pair 1 模擬成績&高考成績 120 .948 .000

表5是泰國高考漢語PAT7.4模擬考試成績與泰國高考漢語PAT7.4真實成績相關檢驗表。該表顯示共有120對參考值，相關系數為0.948。

表6：Paired Samples Test

Paired Differences

95% Confidence Interval of the Difference

Lower Upper t df Sig.（2-tailed）

Pair 1 模擬成績—高考成績 27.00411 34.32923 16.579 119 .000

從表6可以看出標準差及95%的置信區間。配對成績T測試結果表明，t值為16.579，雙側顯著值為0.000。0.000小于0.05，顯示差異具有顯著意義，這說明泰國高考漢語PAT7.4模擬考試成績高的考生，其泰國高考漢語PAT7.4的真實成績也比較高。

四、結語

本次泰國高考漢語PAT7.4的模擬考試，盡管總體分數與真實測試的總體分數具有較大差異，但二者在平均分、標準差等指標方面具有較高的相關性。這說明模擬測試具有較高的質量，可以將其作為PAT7.4的一個樣本分析。從題型角度分析，各題型得分率比較接近，說明題型沒有對難度造成較大影響。從試卷各部分的內容構成看，漢語詞匯量、漢語語法、閱讀理解能力與文化知識這四個部分的內容相關性也較高。這說明試卷各部分內容內部一致性信度較高，考察對象具有同質性。例如第一大題中的選擇詞語正確答案，既有對學生漢語詞匯量的考察又有對其閱讀理解能力的考察，可以看出泰國高考漢語PAT7.4的模擬考試的首要目的是考查考生綜合運用漢語的能力。

綜上所述，就本次模擬測試成績統計而言，2015年的泰國高考漢語PAT7.4考試較好地考查了學生的漢語應用能力。

參考文獻：

[1]春麗娟.泰國漢語高考PAT7.4調查[D].蘇州：蘇州大學碩士學位論文，2012.

[2]泰宗.泰國高考漢語研究[D].哈爾濱：黑龍江大學碩士學位論文，2013.

[3]周國鵑，春麗娟.泰國漢語高考PAT7.4分析調查[J]海外華文教育，2013，（1）.

[4]萬惜春.泰國高考漢語試題研究[D].天津：天津師范大學碩士學位論文，2014.

[5]李穎.泰國漢語高考PAT7.4試題分析研究[D].昆明：云南大學碩士學位論文，2015.

[6]楊凱.對泰國漢語高考試題PAT7.4的研究分析[D].西安：西安外國語大學碩士學位論文，2016.

[7]楊瑞和.語言研究應用SPSS軟件實例大全[M].北京：中國社會科學出版社，2004.

[8]趙金銘.語言測試理論及漢語測試研究[M].北京：商務印書館，2006.

（陳善美（[泰]KANITHA JUTUNCHUN） 宋春陽 上海交通大學人文學院漢語國際教育中心 200030）