TEM-8 閱讀測試內容效度分析

劉 凌, 易莎莎

(湖北工業大學外國語學院， 湖北 武漢 430068)

?

TEM-8 閱讀測試內容效度分析

劉 凌, 易莎莎

(湖北工業大學外國語學院， 湖北 武漢 430068)

選取2010年到2015年專八真題的閱讀理解試題進行內容效度分析，發現其內容效度較高，能夠較科學衡量學生的學習水平，但在選材、閱讀速度以及閱讀能力考察上存在一些問題。結合2016年專八閱讀測試的改革對上述問題進行分析，提出完善建議，進一步提高閱讀測試的內容效度。

專業英語八級； 閱讀理解； 內容效度； 考試大綱

專業英語八級考試旨在全面檢查完成英語專業高年級階段課程的學生是否具備了《高等學校英語專業英語教學大綱》(以下簡稱《大綱》)所需要掌握的英語語言綜合運用能力標準及英語專業知識。《大綱》明確規定專業英語八級考試屬于標準型教學檢查類考試，即學業測試(achievement test)。考試范圍囊括了《大綱》規定的聽、說、讀、寫、譯四個方面的能力以及英語專業知識。

學業測試是用于檢測學生某一課程學習情況的考試，即一項基于教學大綱的考試 ( syllabus- based)。效度是衡量測試的一個重要指標，而內容效度又是效度的重要組成部分。Kerlinger (1973)提出內容效度(content validity)是“一測量工具內容上(包括材料、題材、題目)的代表性或所選內容樣本的充分性”。[1]

對專業英語八級測試中閱讀部分的內容效度分析是衡量試題的閱讀理解部分是否與考試大綱預期測試意圖相一致。專業英語八級考試自1994年開展至今已有20余年，其考試大綱也一再修訂。2015年又在2004年新考綱的基礎上進行了新的改革，并于2016年開始實施。在2004年至2015年期間，不少研究者對專八真題進行分析，尤其是閱讀部分。陳云、李潔在系統功能語法中的語篇分析理論框架下，對專八閱讀理解的文本進行分析，為專八考生備考提供參考；[2]胡曉丹，倪蓉通過分析專八試卷與考生的成績，為專八考試提出意見；[3]唐美華通過自建語料庫對專四專八的閱讀理解文本內容的難度進行了對比分析，為閱讀教和學提出建議；[4]此外還有不少的碩士畢業論文，研究主要集中于專八考試和大學英語四六級[5]和雅思、托福的對比研究[6]，以及對專八閱讀測試的內容效度分析[7]。

綜上所述，專八閱讀測試的內容效度分析研究比較豐富，本文在此基礎上進一步研究2010-2015的專八真題閱讀理解測試的內容效度，并結合2015年8月專八新改革考綱提出本文的完善建議。

1 選材是否符合大綱

新《考綱》要求專業英語八級閱讀理解的選材應符合以下原則：1)題材廣泛，包括社會、科技、文化、經濟、文學、語言學、人物傳記等；2)體裁多樣，包括記敘文、描寫文、說明文、議論文等；3)閱讀材料的語言難度中等偏上。

表1 2010-2015年TEM-8閱讀材料題材體裁一覽表

表1是對2010年至2015年專八閱讀理解文章在題材和體裁兩方面的統計。從表1中可看出，專八的閱讀理解文章在選材上符合大綱題材廣泛的原則，各類題材的文章都滲透在了閱讀理解的文章當中，并且囊括了社會的熱點問題。就2015年的閱讀理解篇章而言，文章的題材包括了網絡購物、兒童教育問題中的榜樣，一場在西非的滑稽旅行，以及介紹科技的進一步發展。這都說明了2015年的閱讀理解文章選題之廣和選題之細。廣泛的選題也符合《高級英語》教材的特點。

本研究首先統計了閱讀材料的體裁(見表1)，議論文和說明文占70%左右；記敘文描寫文僅占8.3%。周瑞英曾指出說明文和議論文在《高級英語》教材中所占比例為45%；文學作品的比例為35%。[8]羅長田也提出高級英語的教學原則中應包含“培養文體意識，提高學生文體分析能力和文學鑒賞能力”。[9]相比之下，專八閱讀測試中關于文學作品的考查較少，筆者認為，專八閱讀在選材上應更加契合高級英語的教學原則。在文章的體裁上適當增加對文學作品的考查，確保測試與高級英語教學目標一致。

2 閱讀速度是否達到測試要求

《考綱》對考生閱讀速度的要求：閱讀材料共計3000個單詞左右；閱讀速度為每分鐘150個單詞；考試時間為30分鐘。

表2是對2010年至2015年專八閱讀材料字數的統計。根據計算，從2010年到2015年平均閱讀字數為2734，這與考綱的要求基本符合。總體而言，每年閱讀材料的字數差距不大。但2015年的閱讀材料的字數比2013、2014多出398個單詞，懸殊較大，對2015年的考生有失公平性。

表2 2010-2015年TEM-8閱讀材料字數一覽表

3 閱讀能力的考察是否符合測試要求

《考綱》明確從主旨大意，事實和細節；字面意義和隱含意義；根據所給信息進行判斷和推理；總結材料的思想觀點、語篇結構、語言特點和修辭手法等方面來考察學生的閱讀理解能力。表3對2010年到2015年的閱讀理解的試題考點進行統計。

表3 2010-2015年TEM-8閱讀理解試題考點一覽表

從表3的數據中可以看出試題的分布符合考綱的要求。各類考點均出現在試題當中，但各類考點的比例卻不是很均衡。由圖中的數據中不難發現，每年考試試題中事實細節題目所占比重都超過了50%，但是關于篇章結構的試題只有2010年和2012年的考試中有所涉及。羅長田概括總結了高級英語的教學原則包括：培養語篇意識，提高學生語篇分析能力；培養文體意識，提高學生文體分析能力和文學鑒賞能力；培養文化意識，提高學生跨跨文化交際能力。[9]根據這些原則，出題人在出題時應該根據這些原則適當增加對篇章結構、文學鑒賞能力和跨文化交際能力的考查。

4 建議和總結

本文對2010年至2015年的專八閱讀測試進行了內容效度分析，近6年來專八閱讀理解測試內容效度較高，命題科學、嚴謹、規范，達到考綱的測試要求。閱讀理解的難度選擇適當，選題題材廣泛，涉及考綱中規定的各個方面。體裁豐富，各類主要體裁均出現在閱讀材料中。在題型設置方面也符合考綱的規定，從不同的角度考查考生的閱讀技能。

但專八的閱讀理解測試仍有完善的空間。從2010-2015年的閱讀材料的選題而言，可以以高級英語課程的特點和教學目標為出發點進行取舍，使專八閱讀篇章的題材和體裁更加貼合學生實際生活和學習中的閱讀篇章類型。從閱讀速度而言，盡可能保證每年的材料長度相當。不能單一的要求考生達到每分鐘150詞，還應當考慮到考生做題和填涂答題卡的時間。從閱讀能力角度而言，考點的設置上還需要有所改進，使教學中需要培養和提高的能力在閱讀理解的題目中都有所考查。

2016年專八《考綱》增加了閱讀理解的題型：簡答題。Arthur Hughes對于簡答題的優勢與缺點也做了如下分析：簡答題的設置相較于選擇題的優勢在于猜測因素和作弊因素對閱讀能力考查的影響減小；從一定程度上減少了干預信息對閱讀能力體現的減少；對于試題題干而言，更易于試題的編寫。但簡答題也有缺點，例如單位時間內受試者能做出的題目數量少，并且需要受試者通過個人的理解回答問題；對于評分而言，評分的時間增加并且會降低分數的效度和信度。[10]簡答題在國內外語考試中的均被應用，如CET4,CET6中偶有涉及，TOEFL中也有類似題型，此次在專八考試中第一次采用簡答題的形式，并且對于回答的字數也限制在10個單詞以內，這不僅對試卷的出題者和評閱者帶來了考驗，也給考生帶來了壓力。對于出題者而言，如何合理設置問題，如何合理編寫題干都是應當反復斟酌的問題，對此出題者可以借鑒TOEFL中的出題方法，并以此來編排專八的閱讀測試；對于評閱者，在對該部分評分時應該采用何種給分方式給考生一個相對公平的分數也是一個難點問題；測試對于教學具有反撥作用，要求教師在教學中應當更加注重考生在規定字數內回答問題的能力。

本文認為2016年的專八改革彌補了2004年《新考綱》的不足之處，并在專八考試中首次采用了簡答題的形式來考試考生的閱讀理解能力實屬創新之舉。究其優點和缺點，在簡答題的設置上應該做到揚長避短，提高專八閱讀測試的內容效度。

[1] 鄒申. 簡明英語測試教程[M]. 北京：高等教育出版社, 2013:30-31，43.

[2] 陳云,李潔. 功能語篇分析在TEM-8閱讀理解考試中的應用[J]. 新余學院學報. 2012(8):74-76.

[3] 胡曉丹,倪蓉. 英語專業八級試卷分析[J]. 語文學刊·外語教育教學. 2015(7):128-130.

[4] 唐美華. 英語專業等級考試中閱讀理解對比分析[J]. 吉林省教育學院學報. 2009(1):75-77 .

[5] 張書琦. 閱讀測試在CET、TOEFL、和IELTS中的對比研究[D].南京：東南大學，2006.

[6] 劉希. 專八和雅思考試中閱讀理解測試的對比研究[D]. 武漢：華中師范大學，2009.

[7] 陳詩霏. 英語專業八級閱讀理解內容效度研究(2009-2013)[D]. 桂林：廣西師范大學，2014.

[8] 周瑞英.高級英語課程的要求特點及教學手段探討[J]. 武漢科技學院學報.2006(12):163-165.

[9] 羅長田. 論高級英語課程目標及教學原則[J].四川外語學院學報.2004(5): 142-145.

[10] Arthur H. Testing for language teachers[M]. Beijing: Foreign Language Teaching and Research Press, 2013:79.

[責任編校： 張巖芳]

An Analysis of Content Validity in the Reading Part of TEM-8

LIU Ling, YI Shasha

(SchoolofForeignLanguages,HubeiUniv.ofTech.,Wuhan430068,China)

Test for English Major Band Eight (short for TEM-8) is an achievement test. This paper analyzes the content validity of the reading comprehension parts selected from 2010 to 2015 TEM-8. The results show that the test has a relatively high content validity and it can scientifically measure the students’ language competence. However, there are still problems in selecting materials and measuring reading speed and ability. In accordance with these problems and the reform of TEM-8 in 2016, the author provides some suggestions to improve the content validity of reading comprehension of TEM-8.

test for English Major Band Eight (TEM-8); reading comprehension; content validity; syllabus

1003-4684(2016)06-0093-03

H310.4

A

2015-03-05

湖北省教育廳項目(13Y039)

劉凌(1974- )，女，湖南邵陽人，文學碩士，湖北工業大學副教授，研究方向為外國語言學及應用語言學

易莎莎(1992- )，女，湖北潛江人，湖北工業大學碩士研究生，外國語言學及應用語言學