高考英語寫作任務的設計

張允 高存

摘 ? 要

高考英語寫作測試雖深受業界關注，但仍有必要進一步規范測試開發程序。Bachman和Palmer提出的測試使用論證為考試任務的設計和傳統意義上的效度檢驗提供了行動依據，以該框架指導高考英語寫作考試任務的開發，可以科學規劃任務設計程序，清楚認識任務開發過程中所需要完成的各項工作，同時也有利于收集測試合理化論證所需要的證據。

關鍵詞

高考英語測試 ?寫作考試任務 ?測試使用論證 ?測試開發

任何測試的使用都會對受眾造成影響，所以，必須對測試使用進行合理化論證，以確保根據分數所做出的決策是公平的、產生的后果是有益的。[1]因此，一項好的寫作測試遠不止是簡單地想出一個話題讓學生去寫，爾后根據我們的判斷來對寫作樣本進行排序[2]。周群指出，我國高考現有考試設計缺少教育和心理測量理論指導，設計過程流于行政化程序，考試設計開發結果缺少質量保障[3]。高考英語在一定程度上也存在類似問題，其寫作測試雖深受業界關注，但仍有必要進一步規范測試開發程序。鑒于此，本文將結合Bachman和Palmer提出的測試使用論證（Assessment Use Argument，簡稱AUA）探討如何科學規劃高考英語寫作考試任務開發程序，以期為高考英語測試的整體效度論證提供合理化依據。

一、寫作能力的界定

寫作研究分為三大類，以文本為中心的研究視寫作為文本產品，主要考慮在創造文本時可以利用的語言或修辭資源;以作者為中心的研究主要探討在面臨寫作任務時優秀作者的行為，以尋求構建能夠更好地幫助學習者習得這些技能的方式;以讀者為中心的研究則將寫作情境特征上升到文本最終能夠達到的目的，認為作者選擇話語的目的是與他人交往，其呈現個人觀點的方式主要是為了方便讀者理解[4]。這些研究從不同角度對寫作的性質進行了闡釋，其中涉及語言知識、交際目的、策略能力、修辭能力、情境以及體裁等多個因素，在設計測試任務時需要將這些因素結合起來才能更好地把握寫作行為的全貌?？傊?，寫作本質上是一個交際行為，僅僅掌握書面英語規范不足以確保交際的順利進行[5]。寫作是寫作環境（如寫作目的、目標讀者等）與作者為完成寫作任務、滿足讀者需求所采取的行動之間的一種磋商，其表述的清晰性和觀點展示的有效性取決于作者聚焦、組織信息的能力以及正確使用語言規范的能力。

二、寫作考試任務開發的理論依據

Hughes認為，在測量產出性語言技能時，直接測量更容易操作。[6]然而，“直接測量”這一表述本身并不確切，如同所有的心理測量、語言測試，不管是采用多項選擇的形式，還是要求考生進行短文撰寫，提供的信息都只是關于某一內在特質的間接指標[7]，因此可以說語言測試從未對語言行為背后的真實能力進行過直接測量[8]。事實上，行為并不等同于能力，如果考生表現較差，其原因不一定是語言能力欠缺，也可能是情緒低落、對任務話題不夠熟悉或者沒有準確理解考試任務[9]。所以，僅僅因為某種試題不是多項選擇題、就機械地選用它的做法是不明智的。

1.AUA框架

AUA框架為測試開發提供了新視角，更為傳統意義上的效度驗證提供了可付諸實踐的理論模式[10]，可作為高考英語寫作考試任務開發的行動依據。根據該框架，測試合理化論證過程包括兩個相互關聯的活動：清楚表述AUA聲明（claim），以支撐“后果”和“考生表現”間的聯系;收集支持AUA聲明的相關證據（見圖1）[1]。

圖1：AUA框架[1]

AUA借鑒了Toulmin提出的實用推理模型，采用“數據→聲明”的推理機制。[11]在整個推理鏈中，上一推理做出的聲明成為下一推理需要的數據。比如，最基層推理依靠的數據是“考生表現”，而推理得出的聲明包括“測試記錄”和相關質量屬性，在下一個推理過程中，測試記錄則成為推理依靠的數據，以此類推。Toulmin的實用推理模型還包括另外兩個元素，即理由（warrant）和反駁（rebuttal）。反駁指挑戰或拒絕聲明中所含質量屬性的陳述，反駁能否成立需要通過相關證據來證實。理由指闡釋聲明中一個或多個質量屬性的陳述，同樣需要通過相關證據來證實。

測試開發包括兩個平行的過程，即測試合理化論證過程和測試生產過程。[1]測試合理化論證是為了使測試的預計使用合理化。測試生產過程包括策劃、設計、操作和試測，目的在于生產測試產品。將兩者相結合才能確保能夠使用測試來達到期望的目的。總之，測試開發者的首要責任是使決策者信服測試記錄具有一致性，基于測試的解釋有意義，不存在偏見，具有概括性、相關性和充分性，同時開發者還必須了解需要做出的決策，以及測試使用期望帶來的后果[1]。

2.考試任務的開發

操作階段的重心是開發考試任務，包括兩個階段，即確定任務開發的具體情境和撰寫相應的考試任務說明[1]。任務開發的具體情境主要有三種：（1）目標語言使用任務特征需要經過調整后方可用作考試任務說明;（2）目標語言使用任務可直接用作考試任務;（3）不存在目標語言使用范圍，需要依據構念定義和考生特征來設計考試任務。

為確保對所測能力的解釋具有概括性，需要界定和描述目標語言使用范圍，并從中選取任務以作為考試任務開發的基礎。Millman和Greece提出可以從兩個維度對教育測量進行分類：所要做的推理類型（例如個人成績、個人水平或群體成績）和推理所適用的范圍（例如所要做的推理是關于內容知識的掌握程度、認知或思維能力的獲取、抑或是將來某個場景中的表現行為）。[12]在語言測試中，推理所適用的范圍即為目標語言使用范圍，包括一系列的任務或刺激、觀測條件以及對反饋做出評價的原則[13]。該范圍可大致分為兩類：教學范圍和真實生活范圍。[1]前者的界定主要取決于推理類型，一項測試如果是用來檢驗考生對所學課程的掌握情況（即個人成績或群體成績），界定其目標范圍就需要依據教學大綱、課程專家的判斷和具體授課情況;如果是用來檢驗考生是否達到了規定的入學要求（即個人水平），則需要依據需求分析（例如調研勝任大學低年級學習的基本要求）。真實生活范圍的界定則主要依據需求分析，例如衡量考生是否具備某一領域對外語能力的基本要求時，需要重點考慮該領域對外語能力的具體要求。

考試任務說明主要包括以下幾個部分：考試構念的界定、考試任務的環境特征（如考試任務的時間分配）、任務輸入和輸出特征以及輸入和輸出的關系、記錄考生行為的方式和任務作答指示。[1]撰寫考試任務說明有助于在測試開發過程中采取防范措施以盡量減少不相關的因素，這樣可以使推理更可靠、決定更公正。[14]一般來說，一項考試的風險性越大，其考試任務說明應該越詳細。

三、高考英語寫作考試任務的設計

1.關于考試任務的開發

目標語言使用任務模板通常需要經過調整才能用作考試任務說明[1]，這一點同樣適用于高考英語寫作考試任務的開發。高考英語測試的目標范圍是高校英語教學，包括大學英語教學和專業英語教學。因此，在開發寫作考試任務前需要對高校英語教學中典型的寫作任務進行調研，以確定其主要特征。

任務特征主要包括三部分內容，即情境、文本材料和測試量規。[15]NAEP寫作框架將寫作任務開發指南分成三個部分，即話題、交際目的和目標讀者。從這三個方面對目標任務進行調研實際上就是在探究任務的情境特征。Jamieson等人將語言使用任務的話題分為學術話題、課堂相關話題和課外話題[15]，其中高考英語寫作測試所涉及的話題主要是后兩種。話題也就是寫作的題材，其選擇是否恰當會直接影響考生的行為表現。寫作任務的話題必須貼近考生的生活實際，因此選題既要參考對目標語言使用范圍的調查，又要考慮考生對所選話題的熟悉程度。調研交際目的是為了確定寫作的體裁。體裁可按照形式和功能來劃分，從形式上可分為書信、實驗報告、和議論文等，而從功能上既可以按照交際功能分為描寫、邀請和致歉等類別，也可以按照話語模式（discourse mode）分為敘述、描寫、說明和議論[2]。寫作體裁在很大程度上取決于概化域，即考生在考試外將不得不完成的寫作任務類型[2]。根據NAEP寫作框架，在K-12、高等教育以及職業場所中，最常見的寫作目的是說理（to persuade）、解釋（to explain）和傳達（to convey experience）。董曼霞等研究發現，高考英語寫作測試考查最多的體裁是應用文和說明文，未曾涉及議論文。[16]因此，有必要在充分調研的基礎上增加對說理性體裁（即議論文）的考查。此外，展示讀者意識是最重要的寫作技能之一[17]，寫作，作為一項社會行為，通常是為了和他人交流思想，寫作的成功與否取決于作者能否滿足讀者的閱讀需求。因此，在設計寫作考試任務時要充分考慮目標語言使用情境中典型的目標讀者，并在寫作提示中予以明確。

對于獨立性寫作（independent writing），如現有高考英語測試中的書面表達題，文本材料指作答提示，而對于綜合性寫作（integrated writing），如讀寫結合題，文本材料則指所提供的閱讀或聽力文本。無論采用哪種形式，其目的均是為了測量考生的寫作能力，因此需要控制文本材料的難度，以免聽力或閱讀能力影響到寫作能力的發揮。現有的高考英語書面表達題用漢語提供作答提示，可以很好地避免因為看不懂提示而無法答題的情況。然而，對于一些省份采用的讀寫結合題，所提供的閱讀材料的難度和長度是否適當目前尚缺乏實證研究的支撐，這涉及到考試效度的檢驗。

測試量規主要包括三個參數：問題、作答形式和評分標準[15]，其中與寫作測試相關的是作答形式和評分標準。高考英語寫作測試中常見的作答形式有建構性作答（constructed response，即書面表達題）和有限性產出作答（limited production response，即改錯題和讀寫結合題）。相比之下，書面表達題效度較高，測量也較準確，但是需要制定合理的評分標準和嚴格的評分程序才能確保評分的可靠性。此外，為了確保對所測能力解釋的概括性，對考生作答的評價方式應該與目標語言使用范圍中對類似任務作答的評價方式保持一致。[1]因此，評分標準的制定在一定程度上依賴于對目標范圍的調查。此外，不管采用整體評分法還是分析性評分法，評分標準制定的出發點均是考試構念。由于現有考試缺乏對考試構念的明確界定，其評分標準主要關注對語言知識的考查，雖提及語言運用能力，但由于沒有明確觀測語言運用能力的具體維度，因而不具備可操作性。修訂現有評分標準，首先需要將考試構念細化為具體的考核指標，使其具有可操作性，然后參照NAEP寫作測試的做法，圍繞觀點發展、觀點組織和語言運用等三個方面制定具體的評價維度，以便突出對語言運用能力而不是語言知識的考查。

從以上分析可以看出，對目標語言使用任務特征的調研主要包括情境特征和評價方式兩部分內容。確定了目標語言使用任務的特征，接下來的工作是撰寫考試任務說明?？荚嚾蝿照f明的第一項是考試構念的界定。界定考試構念也就是對所要測量的語言能力進行描述，其依據可以是課程大綱、需求分析、語言能力理論或者幾項內容的綜合[1]。根據Bachman的交際語言能力模型[1][7]，語言能力包括語言知識和策略能力。寫作測試不僅涉及考生的語言知識（如語法、詞匯和修辭知識），還涉及其策略能力（如設定寫作目標、評價任務需求和可用內在資源以及規劃文章的組織結構）[1]。因此，在確定高考英語寫作測試的構念時，需要調研完成目標語言使用任務需要哪些方面的語言知識和策略能力，具體可參照Rosenfeld等人的做法從內容、組織、進展和語言等四個方面以任務說明的形式對高校英語寫作學習中的典型任務進行調查，并在此基礎上將考試構念細化為具體的聲明，以使其具有可操作性[18]。除了考試構念，在撰寫任務說明時還需要明確考試任務的環境特征、任務輸入和輸出特征以及輸入和輸出的關系、記錄考生行為的方式和任務作答指示等內容。

2.關于測試的合理化論證

根據周群的觀點，改變現有寫作測試僅僅參照中學課程標準命題的做法，把高校需求作為命題依據，可以提高考試的構念效度，進而有利于高校選拔合格新生。此外，將考試構念細化為可以操作的具體指標，并改變現有評分標準主要關注語言知識的做法，不僅可以更加有效地測量考生的書面語言運用能力，而且可以更好地指引中學英語教學，改變重知識輕能力的現狀。

前文提到，不同的研究與教學途徑對寫作性質的認識不同，因而也會影響考試構念的界定。調研高校需求，可以充分了解高校任課教師對寫作能力的理解和認識。

此外，根據對目標語言使用任務特征的調查，選擇貼近學生生活的話題，避免對部分考生不利的話題，可以確保測試的公平性。參照目標語言使用任務特征來設計考試任務，并使考試評價方式與目標范圍中對類似任務作答的評價方式保持一致，可以確保對所測能力的解釋具有概括性。同時，依據需求分析來設計考試任務并對考生行為進行充分取樣（如根據交際目的不同設計兩個書面表達任務），可以提高對所測能力解釋的相關性和充分性。

另外，通過制定嚴格的評分程序（包括評分員培訓），可以確保評分的可靠性和測試記錄的一致性。

總之，對測試內容、形式和取樣方式做出的所有決定都是效度證據的重要組成部分[19]，因此，開發高考英語寫作考試任務的過程也是收集支撐AUA聲明的相關證據的過程。高考英語寫作測試雖然只是高考英語科目考試的一部分，但是其開發過程可以為整個考試的合理化論證提供證據支持。

四、結語

作為一項高利害考試，高考英語測試的任務設計如果不合理，必然會造成巨大的負面效應。AUA框架將測試生產過程和合理化論證過程結合在一起，目的是為了實現測試的使用能夠帶來有益后果。將該框架作為寫作考試任務開發的理論依據，可以科學規劃任務設計程序，清楚認識任務開發過程中所需要完成的各項工作，同時也有利于收集測試合理化論證所需要的證據。事實上，AUA框架同樣適用于聽力、閱讀和口語考試任務的開發。用該框架指導高考英語測試改革，可以使命題程序規范化、科學化與合理化。

參考文獻

[1] Bachman，L.& A.Palmer.Language Assessment in Practice[M].Oxford：Oxford University Press，2010.

[2] Weigle，S.C.Assessing Writing[M].Cambridge：Cambridge University Press，2002.

[3] 周群.基于效度的中美大學入學考試開發比較研究[J].中國高教研究，2010（11）.

[4] Hyland，K.Teaching and Researching Writing[M].Harlow：Pearson，2009.

[5] Cumming，A.，et al.TOEFL 2000 Writing Framework：A Working Paper.Princeton，NJ：Educational Testing Service，2000.

[6] Hughes，A.Testing for Language Teachers[M].Cambridge：Cambridge University Press，1989.

[7] Bachman，L.Fundamental Considerations in Language Testing[M].Oxford：Oxford University Press，1990.

[8] Brown，J.D.Testing in Language Programs：A Comprehensive Guide to English Language Assessment[M].New York： MacGraw-Hill，2005.

[9] Carr，N.T.Designing and Analyzing Language Tests[M].Oxford： Oxford University Press，2011.

[10] 韓寶成，羅凱洲.語言測試效度及其驗證模式的嬗變[J].外語教學與研究，2013（3）.

[11] Toulmin，S.The Uses of Argument[M].Cambridge：Cambridge University Press，2003.

[12] Schmeiser，C.B.& C.J.Welch.Test development[A]. In Brennan，R.L.（ed.）.Educational Measurement[C].Washington，DC：American Council on Education，2006.

[13] Kane，M.Content-related validity evidence in test development[A].In Downing，S.M.& T.M.Haladyna（eds）：Handbook of Test Development[C].Mahwah，NJ：Lawrence Erlbaum，2006.

[14] Fulcher，G.Assessment in English for academic purposes：putting content validity in its place [J].Applied Linguistics，1999（2）.

[15] Jamieson，J.M.，S.Jones，I.Kirsch，P.Mosenthal & C.Taylor.TOEFL 2000 Framework：A Working Paper.Princeton，NJ：Educational Testing Service，2000.

[16] 董曼霞，高曉瑩，楊志強.高考英語全國卷書面表達題歷時分析與研究（1989～2011）[J].教育測量與評價，2011.（10）.

[17] Harris，M.What does the instructor want？In Sullivan，P.& H.Tinburg（eds.）.What is College-level Writing？[C].Urbana，IL：NCTE，2006.

[18] Rosenfeld，M.，S.Leung & P.K.Oltman.The Reading，Writing，Speaking，and Listening Tasks Important for Academic Success at the Undergraduate and Graduate Levels.Princeton，NJ：Educational Testing Service，2001.

[19] Downing，S.M.Twelve steps for effective test development[A].In Downing，S.M.&T.M.Haladyna（eds）.Handbook of Test Development[C].Mahwah，NJ：Lawrence Erlbaum，2006.

[作者：張允（1977-），男，山東金鄉人，天津商業大學外國語學院副教授，北京外國語大學中國外語教育研究中心在讀博士;高存（1979-），女，山東鄆城人，天津商業大學外國語學院副教授，天津師范大學文學院在讀博士。]

【責任編輯 ?陳國慶】