TEM4閱讀任務(wù)語(yǔ)篇輸入及預(yù)期回答分析

崔婷婷 劉敏

摘 ?要：文章以2016年改革后的三套TEM4閱讀試題為研究對(duì)象（2016-2018），以《關(guān)于英語(yǔ)專業(yè)四級(jí)考試（TEM4）題型調(diào)整的說(shuō)明》（以下簡(jiǎn)稱《調(diào)整說(shuō)明》為參照依據(jù)，以Bachman和Palmar（1996）的任務(wù)特性框架為理論依據(jù)，從語(yǔ)篇輸入及預(yù)期回答特征兩個(gè)維度探討改革后TEM4閱讀試題的內(nèi)容效度[1]。研究結(jié)果表明，改革后TEM4閱讀試題的語(yǔ)篇輸入特征與預(yù)期回答特征總體上達(dá)到了《調(diào)整說(shuō)明》的要求，具有較高的內(nèi)容效度。但在語(yǔ)篇類(lèi)型的選取上仍可進(jìn)一步提高：命題人可適當(dāng)增大應(yīng)用文在體裁中的占比，提高對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋度。

關(guān)鍵詞：TEM4閱讀測(cè)試;內(nèi)容效度;語(yǔ)篇輸入;預(yù)期回答

中圖分類(lèi)號(hào)：G640 文獻(xiàn)標(biāo)志碼：A 文章編號(hào)：2096-000X（2019）11-0091-04

Abstract： The article takes the three sets of TEM4 reading questions after the reform in 2016 as the research object （2016-2018）， and the "Description of the adjustment of the English majors （TEM4） questions" （hereinafter referred to as "adjustment instructions"） as the reference.The task characterization framework of Bachman and Palmar（1996）is based on the theoretical basis， and discusses the content validity of the post-reform TEM4 reading test from the two dimensions of text input and expected answer characteristics. The results suggest that the reading test enjoys higher content validity. However， further improvement can be made in material selection. Test designers are advised to include more passages of practical genre and passages related to science， economy and education.

Keywords： TEM4 readingtest; content validity; discourseinput; expected response

一、概述

高校英語(yǔ)專業(yè)四級(jí)考試（TEM4）是面向全國(guó)英語(yǔ)專業(yè)本科二年級(jí)學(xué)生的一項(xiàng)大規(guī)模、標(biāo)準(zhǔn)化考試，其權(quán)威性與影響力不斷擴(kuò)大，于2010年考生數(shù)量已達(dá)約27萬(wàn)人次[2]，已成為評(píng)估英語(yǔ)專業(yè)本科“教與學(xué)”的一項(xiàng)重要指標(biāo)。

2015年，外語(yǔ)專業(yè)教學(xué)測(cè)試委員會(huì)對(duì)TEM4試題的研討商榷推動(dòng)了新一輪調(diào)整方案的出臺(tái)，其中閱讀測(cè)試部分有較大調(diào)整：題型從過(guò)去單一的選擇題調(diào)整為客觀選擇題與主觀簡(jiǎn)答題相組合，題量由20題減少為15題，測(cè)試時(shí)長(zhǎng)由25分鐘延長(zhǎng)至35分鐘，而總分?jǐn)?shù)與權(quán)重均保持不變（見(jiàn)表1）[3]。

“考試效度研究項(xiàng)目的實(shí)施，對(duì)考試的可持續(xù)發(fā)展具有非同尋常的意義”（鄒申，陳煒2010）。[2]?？荚囆Ф仁侵缚荚囘_(dá)到其預(yù)期測(cè)試目標(biāo)的程度[4]。作為效度研究的一部分，內(nèi)容效度研究旨在檢測(cè)實(shí)際考試內(nèi)容與考試大綱的吻合度，為考試的改進(jìn)提供參考。鑒于TEM4逐年遞增的影響力和2016年TEM4閱讀測(cè)試任務(wù)的題型調(diào)整，對(duì)改革后的閱讀理解試題進(jìn)行內(nèi)容效度研究十分必要。

二、文獻(xiàn)綜述

在國(guó)內(nèi)，研討TEM4閱讀測(cè)試內(nèi)容效度的文獻(xiàn)很多，但研究樣本多為《調(diào)整說(shuō)明》正式實(shí)施前的試題，如侯艷萍（2011）[5]、李恩耀（2012）[6]、強(qiáng)亞麗（2014）[7]等?！墩{(diào)整說(shuō)明》執(zhí)行后，少數(shù)以2016年新大綱樣題或真題為研究對(duì)象的文獻(xiàn)開(kāi)始出現(xiàn)，如何錫梗（2016）[8]、劉寶全、胡芳芳（2018）[9]等，但以改革后2016-2018年試題為研究對(duì)象的文獻(xiàn)仍處空缺狀態(tài)。

為對(duì)改革后的閱讀測(cè)試進(jìn)行更全面的內(nèi)容效度研究，本文結(jié)合《調(diào)整說(shuō)明》，以近三年（2016-2018）的TEM4閱讀測(cè)試內(nèi)容作為研究對(duì)象，從語(yǔ)篇輸入和預(yù)期回答兩個(gè)維度分析其內(nèi)容效度，以期為試題命制者和考生提供一定價(jià)值的參考意見(jiàn)。

三、研究設(shè)計(jì)

（一）研究對(duì)象

本研究收錄了近3年（2016-2018）的TEM4閱讀理解試題，閱讀材料共計(jì)9篇文章，包括45道問(wèn)題（選擇題30道，簡(jiǎn)答題15道）。

（二）研究框架與理?yè)?jù)

如表2所示，本研究以Bachman和Palmar（1996）提出的任務(wù)特性框架為理論依據(jù)，結(jié)合《調(diào)整說(shuō)明》，制定 TEM4閱讀測(cè)試內(nèi)容效度的分析框架。其中，語(yǔ)篇輸入任務(wù)特征主要包括語(yǔ)篇類(lèi)型（體裁、題材）、閱讀速度（總字?jǐn)?shù)、時(shí)間）與語(yǔ)言難度（易讀度）;預(yù)期回答任務(wù)特征主要包括回答類(lèi)型及技能考察。

四、結(jié)果與討論

（一）語(yǔ)篇輸入特征

1. 語(yǔ)篇類(lèi)型

（1）體裁

根據(jù)《調(diào)整說(shuō)明》，閱讀材料應(yīng)保證體裁設(shè)置多樣化，需涵蓋描寫(xiě)文、說(shuō)明文、議論文、記敘文、應(yīng)用文（說(shuō)明書(shū)、圖表、廣告）等體裁[3]。

如表3所示， 改革后閱讀試題中議論文與記敘文占比最大，分別為45%和33%;說(shuō)明文與描寫(xiě)文占比較小，均為11%;應(yīng)用類(lèi)文本的占比為零。

可以看出改革后的閱讀材料具有較強(qiáng)的多樣性，達(dá)到了《調(diào)整說(shuō)明》中的選材要求，但仍有繼續(xù)提高的空間。通常來(lái)講，議論文主要以抽象的思維方式來(lái)表達(dá)作者的主張與見(jiàn)解，側(cè)重考察考生的思辨能力與批判性思維，的確是測(cè)試中不可或缺的體裁。但同時(shí)，作為實(shí)用性最強(qiáng)的文體之一，應(yīng)用類(lèi)文本能對(duì)學(xué)生檢索信息并整合信息的能力進(jìn)行有效考察。因此，在體裁的選擇上，試題命制者可適當(dāng)增加說(shuō)明書(shū)、圖表、廣告等應(yīng)用類(lèi)文本。

（2）題材

根據(jù)《調(diào)整說(shuō)明》，閱讀材料的題材選擇應(yīng)具有多樣性，需涵蓋文化、社會(huì)、科技、學(xué)習(xí)、常識(shí)、人物等題材[3]。

如表4所示，改革后閱讀試題中人物題材的占比為45%，社會(huì)和文化緊隨其后，分別為22%和33%。

由此可見(jiàn)，改革后的閱讀材料涵蓋了社會(huì)、文化和人物三種題材，占比相對(duì)均勻，符合《調(diào)整說(shuō)明》中的選材要求， 但對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋尚有不足，不利于促進(jìn)考生在學(xué)習(xí)過(guò)程中廣泛涉獵不同題材，拓寬閱讀面。因此，試題命制者可在題材的選擇上稍作調(diào)整，進(jìn)一步拓廣題材的涵蓋面。

2. 閱讀速度

閱讀速度是影響考生閱讀成績(jī)的一個(gè)不可忽視的因素?！墩{(diào)整說(shuō)明》對(duì)考生的閱讀速度也提出了一定要求：TEM4閱讀材料總字?jǐn)?shù)可控制在1800字的范圍，要求考生每分鐘閱讀約120個(gè)單詞[3]。

由于考生需要分配一部分時(shí)間用于讀題并作答，實(shí)際閱讀時(shí)間與考試規(guī)定的總時(shí)長(zhǎng)存在一定偏差。根據(jù)楊惠中和Weir（1998）[10]提出的時(shí)間比例公式，當(dāng)閱讀任務(wù)的回答類(lèi)型為選擇題時(shí)，候選人閱讀材料的時(shí)間與回答問(wèn)題的時(shí)間之比約為1：0.75。據(jù)此推算出TEM4考生的實(shí)際閱讀時(shí)長(zhǎng)約為20分鐘，答題時(shí)長(zhǎng)約為15分鐘。

如表5所示，改革后閱讀材料的平均長(zhǎng)度為1948詞，符合《調(diào)整說(shuō)明》中對(duì)字?jǐn)?shù)的要求;閱讀速度平均保持每分鐘98個(gè)單詞左右，稍慢于《調(diào)整說(shuō)明》中要求的閱讀速度。由于閱讀測(cè)試中有一部分問(wèn)答題，計(jì)算得出的閱讀速度存在一定偏差，考生的實(shí)際閱讀速度應(yīng)略高于每分鐘98詞，試題總體符合《調(diào)整說(shuō)明》中的要求。

3. 語(yǔ)言難度

《調(diào)整說(shuō)明》要求考生能讀懂英美國(guó)家出版的語(yǔ)言難度中等的文字材料[3]。易讀度，作為測(cè)量閱讀材料難度的指標(biāo)，主要用于描述文字材料易于閱讀理解的程度，與文字材料的句子長(zhǎng)度、語(yǔ)法復(fù)雜程度等等緊密相關(guān)[11]。

本研究應(yīng)用了Flesh易讀度計(jì)算公式對(duì)2016-2018年閱讀試題的易讀度進(jìn)行計(jì)算，其參考量表如表6所示：易讀度數(shù)值和文字材料的難度成反比關(guān)系，指數(shù)越高，表明閱讀材料易于理解的程度越低。

計(jì)算結(jié)果如表7所示，改革后TEM4閱讀材料的平均易讀度為63.73，難度介于中等（standard）和略難（Fairly difficult）之間，與《調(diào)整說(shuō)明》中提出的測(cè)試要求高度契合，內(nèi)容效度非常良好。

（二）預(yù)期回答特征

1. 技能考察

根據(jù)《調(diào)整說(shuō)明》，從技能考察方面來(lái)看，TEM4閱讀測(cè)試要求考生“掌握材料的主旨大意，理解事實(shí)和細(xì)節(jié);理解字面意義以及判斷和推理;理解單個(gè)句子的意義以及上下文的邏輯關(guān)系”。[3]

據(jù)此，TEM4閱讀題型可劃分為四大類(lèi)：大意類(lèi)、細(xì)節(jié)類(lèi)、推斷類(lèi)和釋義類(lèi)。其中，大意題注重考生對(duì)篇章、段落大意的把握，考察總結(jié)概括能力;細(xì)節(jié)題注重考察考生檢索信息與整合信息進(jìn)行綜合判斷的能力;推斷題注重考察考生對(duì)非字面信息的推理判斷能力;釋義題注重考察考生對(duì)詞匯短語(yǔ)的語(yǔ)義理解能力。

如表8所示，在改革后TEM4閱讀試題中，細(xì)節(jié)類(lèi)與推斷類(lèi)題型占比最高，分別為38%和36%;大意類(lèi)與釋義類(lèi)的占比稍低，分別為16%與10%。由此可見(jiàn)，在保持對(duì)基礎(chǔ)能力考察的同時(shí)，改革后的TEM4閱讀十分注重對(duì)考生推理判斷能力的考察，有效地檢驗(yàn)了考生對(duì)文本的真實(shí)理解，也對(duì)考生提出了較高的要求。

2. 回答類(lèi)型

根據(jù)《調(diào)整說(shuō)明》，TEM4閱讀題型采用選擇題和問(wèn)答題相結(jié)合的回答類(lèi)型，不再使用單一的選擇題形式。

通常來(lái)說(shuō)，選擇題的作答有許多應(yīng)試技巧，猜測(cè)、排除法的使用在一定程度上阻礙了考生真實(shí)的語(yǔ)言能力的體現(xiàn)，但改革后新增的問(wèn)答題較好地彌補(bǔ)了這一不足。從表9來(lái)看，問(wèn)答題中推斷題占比53%，釋義題及大意題占比分別為13%和7%，從而有效地考察了考生的文本理解能力和語(yǔ)言產(chǎn)出能力，保證了試題對(duì)考生的閱讀理解能力的切實(shí)反映。

總體來(lái)看，改革后的TEM4閱讀任務(wù)技能考察比例分布得當(dāng)，回答類(lèi)型設(shè)計(jì)合理;在注重考生推理判斷能力與信息提取整合能力的同時(shí)，也對(duì)考生的總結(jié)概括能力和語(yǔ)義理解能力進(jìn)行了合理考察，表明改革后的試題達(dá)到了《調(diào)整說(shuō)明》的要求，具有較好的內(nèi)容效度。

五、結(jié)束語(yǔ)

研究結(jié)果表明，改革后的TEM4閱讀試題設(shè)計(jì)與《調(diào)整說(shuō)明》基本吻合，內(nèi)容效度較高。從語(yǔ)篇輸入角度來(lái)看，改革后TEM4的閱讀速度和語(yǔ)言難度與《調(diào)整說(shuō)明》高度契合，但在語(yǔ)篇類(lèi)型的選擇上仍有提升空間，試題命制者可在體裁與題材的選擇上稍做調(diào)整，提高對(duì)科學(xué)、經(jīng)濟(jì)、教育等題材的涵蓋度。此外，應(yīng)用文在往年試題中基本被忽略，而這一體裁具有較好的真實(shí)性，建議在今后的試題中適當(dāng)提高其比例。從預(yù)期回答角度來(lái)看，改革后的TEM4閱讀試題技能考察比例分布得當(dāng)，回答類(lèi)型設(shè)計(jì)合理，減少了考生對(duì)應(yīng)試技巧的依賴，能夠?qū)忌拈喿x能力進(jìn)行較為準(zhǔn)確的考察。

參考文獻(xiàn)：

[1]Bachman， L. F. & A. S. Palmer. Language Testing in Practice [M].Oxford： Oxford University Press，1996.

[2]鄒申，陳煒.回顧與展望——寫(xiě)在英語(yǔ)專業(yè)四、八級(jí)考試開(kāi)考20周年之際[J].外語(yǔ)界，2010.

[3]高校外語(yǔ)專業(yè)教學(xué)測(cè)試辦公室.關(guān)于英語(yǔ)專業(yè)四級(jí)考試（TEM4）題型調(diào)整的說(shuō)明[R].2016.

[4]王麗紅.論提高英語(yǔ)閱讀測(cè)試效度的方法[J].高教學(xué)刊，2016.

[5]侯艷萍.近七年英語(yǔ)專業(yè)四級(jí)閱讀理解內(nèi)容效度評(píng)估[J].河北大學(xué)學(xué)報(bào)（哲學(xué)社會(huì)科學(xué)版），2012.

[6]李恩耀.TEM4閱讀理解測(cè)試內(nèi)容效度分析[J].黑龍江教育學(xué)院學(xué)報(bào)，2012，31（11）：165-167.

[7]強(qiáng)亞麗.英語(yǔ)專業(yè)四級(jí)閱讀理解測(cè)試（2007-2013）內(nèi)容效度研究[D].廣西師范大學(xué)，2014.

[8]何錫梗.新考綱下2016年英語(yǔ)專業(yè)四級(jí)考試閱讀理解題的延續(xù)與創(chuàng)新[J].寧德師范學(xué)院學(xué)報(bào)（哲學(xué)社會(huì)科學(xué)版），2016.

[9]劉寶權(quán)，胡芳芳.英語(yǔ)專業(yè)四級(jí)閱讀測(cè)試效度研究——以TEM4（2016）新大綱樣題閱讀任務(wù)為例[J].外語(yǔ)電化教學(xué)，2018.

[10]楊惠中，Weir， C.J.大學(xué)英語(yǔ)四、六級(jí)考試效度研究[M].上海外語(yǔ)教育出版社，1998.

[11]Richard， J. C. et al. Longman Dictionary of Language Teaching and Applied Linguistics[M].Beijing： Foreign Language Teaching and Research Press，2005.