認(rèn)知效度研究綜述

聶建中　賈櫻

【摘 要】認(rèn)知效度，前身為理論效度，相比于其他效度（內(nèi)容效度、預(yù)測(cè)效度、表面效度、后果效度等），是語(yǔ)言評(píng)價(jià)領(lǐng)域研究相對(duì)較少的一種。自Weir 2005年提出社會(huì)——認(rèn)知效驗(yàn)框架后逐漸受到關(guān)注，盡管國(guó)內(nèi)研究較少，但其重要性不可忽視。本文簡(jiǎn)要介紹了認(rèn)知效度的概念意義、研究方法及所涉及的語(yǔ)言技能的一般認(rèn)知過(guò)程。

【關(guān)鍵詞】認(rèn)知效度 概念 意義 研究方法 認(rèn)知過(guò)程

一、概念及意義

效度是對(duì)語(yǔ)言測(cè)試的根本要求之一，基于其基礎(chǔ)性，對(duì)于效度的研究自其提出以來(lái)得到不斷發(fā)展。并不是說(shuō)一項(xiàng)測(cè)試有或沒(méi)有效度，而是指根據(jù)測(cè)試分?jǐn)?shù)做出的推論在多大程度上可以反映出受試者的語(yǔ)言能力及水平。認(rèn)知效度是效度研究中較少談?wù)摰囊环N，但其具有綱領(lǐng)性意義。

認(rèn)知效度在教育測(cè)量領(lǐng)域產(chǎn)生了巨大影響。它可用于測(cè)量科學(xué)、邏輯思維推理，測(cè)量其他形式的高級(jí)推理；可以用于評(píng)價(jià)概念圖示或者是作為一種評(píng)價(jià)自我報(bào)告的工具來(lái)評(píng)價(jià)課堂內(nèi)容的精熟度。也有研究者探究醫(yī)療診斷測(cè)試時(shí)的認(rèn)知過(guò)程，及其對(duì)做決定的幫助。Snow， Corno， Jackson在1996年建立了其在能力測(cè)試方面的效驗(yàn)框架。

作為Weir2005年社會(huì)——認(rèn)知效驗(yàn)框架的一部分，認(rèn)知效度最初以理論效度之名被引入中國(guó)。

隨著社會(huì)——認(rèn)知效驗(yàn)框架的不斷改進(jìn)，認(rèn)知效度逐漸取代了理論效度。作為結(jié)構(gòu)效度的一個(gè)方面，它關(guān)注測(cè)試的認(rèn)知要求在多大程度上可以體現(xiàn)目標(biāo)語(yǔ)境的認(rèn)知要求，一般可以從兩方面收集認(rèn)知效度的證據(jù)：一是測(cè)試前；二是測(cè)試后的數(shù)據(jù)收集。Weir指出，過(guò)去的研究幾乎忽略了認(rèn)知效度非數(shù)據(jù)方面的證據(jù)，大多是在測(cè)試后收集數(shù)據(jù)，通過(guò)數(shù)據(jù)分析的方法，以一種因果顛倒的順序進(jìn)行效度驗(yàn)證的，例如通過(guò)因子分析法分析測(cè)試分?jǐn)?shù)，建立所測(cè)量構(gòu)念的本質(zhì)。他對(duì)此法提出質(zhì)疑：懷疑所分析的數(shù)據(jù)是否有可能受到測(cè)試形式、內(nèi)容及設(shè)計(jì)測(cè)試時(shí)假設(shè)的影響，認(rèn)為僅僅依靠測(cè)試結(jié)果來(lái)追溯導(dǎo)致這個(gè)結(jié)果的過(guò)程的方式有一定的危險(xiǎn)性。對(duì)此，他認(rèn)為有必要在測(cè)試設(shè)計(jì)前，將理論聯(lián)系到具體測(cè)試中，作為一個(gè)補(bǔ)充方法來(lái)效驗(yàn)關(guān)于所要評(píng)價(jià)的構(gòu)念本質(zhì)的外部經(jīng)驗(yàn)性證據(jù)。也就是說(shuō)，測(cè)試設(shè)計(jì)前要清楚地明白將要測(cè)量什么（即所要測(cè)量的構(gòu)念）。

認(rèn)知效度在語(yǔ)言測(cè)試領(lǐng)域主要關(guān)注以下幾方面：在學(xué)習(xí)方面，根據(jù)測(cè)試分?jǐn)?shù)預(yù)測(cè)受試者是否適合大學(xué)階段、研究生階段及更高階段的學(xué)習(xí)研究，例如雅思學(xué)術(shù)類考試；在工作方面，預(yù)測(cè)受試者能否完成所在領(lǐng)域，例如商務(wù)、醫(yī)藥衛(wèi)生、教育教學(xué)、旅游業(yè)等的工作任務(wù)；在生活方面，它會(huì)影響到移民計(jì)劃，例如雅思培訓(xùn)類考試。起初，諸如此類的測(cè)試主要在語(yǔ)言技能方面對(duì)考生提出不同要求，而語(yǔ)言技能通常以一種表象呈現(xiàn)時(shí)并不足以全面展示受試者在語(yǔ)言知識(shí)方面是否達(dá)到標(biāo)準(zhǔn)水平，只有思維維度的認(rèn)知過(guò)程可以普遍反映言語(yǔ)行為是否達(dá)到目標(biāo)語(yǔ)境的要求。如果測(cè)試所引起的認(rèn)知過(guò)程與真實(shí)語(yǔ)境所需要的認(rèn)知過(guò)程存在較大差異，那么測(cè)試的預(yù)測(cè)力就應(yīng)受到質(zhì)疑。

二、研究方法

目前對(duì)于認(rèn)知效度有兩個(gè)衡量標(biāo)準(zhǔn)：一方面是以預(yù)測(cè)效度為標(biāo)準(zhǔn)，對(duì)比受試者（即非本族語(yǔ)者）在測(cè)試及非測(cè)試環(huán)境下完成某個(gè)任務(wù)的認(rèn)知過(guò)程，考查測(cè)試任務(wù)是否可以預(yù)測(cè)其真實(shí)語(yǔ)言能力；另一方面是以本族語(yǔ)者的認(rèn)知過(guò)程為標(biāo)準(zhǔn)，經(jīng)過(guò)長(zhǎng)期的經(jīng)驗(yàn)性調(diào)查模式化本族語(yǔ)者的認(rèn)知過(guò)程，將受試者（非本族語(yǔ)者）在測(cè)試環(huán)境下完成某個(gè)任務(wù)的認(rèn)知過(guò)程與本族語(yǔ)者在真實(shí)環(huán)境中的認(rèn)知過(guò)程做對(duì)比。

根據(jù)衡量標(biāo)準(zhǔn)的不同，有兩種方法可以探究認(rèn)知效度。（一）模型化技能本身，即學(xué)習(xí)者通過(guò)學(xué)習(xí)所要達(dá)到的目標(biāo)行為。這就需要了解目標(biāo)行為所要求的認(rèn)知過(guò)程。通常來(lái)講，語(yǔ)言的接受性技能大致有五個(gè)認(rèn)知階段：輸入解碼——詞匯搜尋——語(yǔ)法解析——意義構(gòu)建——語(yǔ)篇構(gòu)建。產(chǎn)出性技能的認(rèn)知階段有：概念化——組織——語(yǔ)法編碼——詞匯編碼——音系/圖像編碼——執(zhí)行——監(jiān)控。（二）研究受試者的行為，比如通過(guò)口頭匯報(bào)，可以具體了解受試者的行為與真實(shí)語(yǔ)境中行為的相似度，包括其在考試時(shí)的思維、行為情況，即做了什么，怎樣做的。

認(rèn)知過(guò)程調(diào)查問(wèn)卷可以幫助獲取受試者的口頭報(bào)告，此類問(wèn)卷大多根據(jù)不同技能的認(rèn)知過(guò)程具體設(shè)計(jì)。受試者及環(huán)境兩變量都會(huì)影響到同一認(rèn)知過(guò)程的精細(xì)度，進(jìn)而影響到認(rèn)知效度。

三、四種技能的認(rèn)知過(guò)程

語(yǔ)言測(cè)試中認(rèn)知效度的研究，必然涉及聽(tīng)、說(shuō)、讀、寫(xiě)四種技能的認(rèn)知過(guò)程，而認(rèn)知過(guò)程又與對(duì)技能本身的本質(zhì)認(rèn)識(shí)密切相關(guān)。對(duì)此，不同學(xué)者各有其獨(dú)到認(rèn)識(shí)。這些過(guò)程在具體實(shí)施中或多或少會(huì)受到測(cè)試步驟、測(cè)試方法、測(cè)試題型等的影響，也會(huì)有許多的循環(huán)往復(fù)，故并非是單向的線性過(guò)程，但同一種技能的主要過(guò)程大體還是一致的。

聽(tīng)力的認(rèn)知過(guò)程大體包括：目標(biāo)設(shè)定（評(píng)估相應(yīng)的語(yǔ)言任務(wù)情況，包括在任務(wù)開(kāi)始前評(píng)估自己的知識(shí)水平、內(nèi)外部可及資源及當(dāng)時(shí)條件的限制）——視/聽(tīng)覺(jué)輸入——解碼/詞匯搜尋（搜尋合適的詞匯，并與相應(yīng)的聲學(xué)信號(hào)相匹配，成功后相應(yīng)的聲學(xué)信號(hào)會(huì)轉(zhuǎn)化成意義單位；不成功時(shí)相應(yīng)的聲學(xué)信號(hào)會(huì)以一種類似回聲的聲音回蕩在聽(tīng)者腦中與轉(zhuǎn)化成的意義單位一起等待進(jìn)一步處理）——形式合成（應(yīng)用語(yǔ)法知識(shí)拼湊上一步中等待處理的聲音及意義單位，結(jié)合語(yǔ)言語(yǔ)篇、社會(huì)文化等各方面的知識(shí)構(gòu)建更大的意義單位，或者在大腦中形成相關(guān)內(nèi)容的畫(huà)面形象）——監(jiān)控（聽(tīng)者在任務(wù)中需要不斷核查自己的行為表現(xiàn)的有效性）。（Weir，2005）

閱讀涉及的認(rèn)知過(guò)程有：目標(biāo)設(shè)定（確定閱讀目的，選擇達(dá)到此目標(biāo)的最合適的閱讀方法，例如精讀或泛讀，默讀或朗讀等）——視覺(jué)輸入（目標(biāo)文本）——詞匯識(shí)別（將視覺(jué)輸入的詞匯與頭腦內(nèi)已存儲(chǔ)的拼寫(xiě)形式進(jìn)行匹配、關(guān)聯(lián)）——詞匯提取/詞匯通達(dá)（按照事物類別等關(guān)聯(lián)、排列、檢索對(duì)應(yīng)單詞）——句子結(jié)構(gòu)解析（依照語(yǔ)法知識(shí)解析句子成分）——確立命題意義（理解字面意思）——推斷（推測(cè)所要表達(dá)的觀點(diǎn)）——構(gòu)建心智模型（結(jié)合新、舊信息，已有情景語(yǔ)境，豐富正在處理的命題的意義）——內(nèi)部構(gòu)建文本結(jié)構(gòu)（閱讀者自己內(nèi)部簡(jiǎn)要構(gòu)建有條理的文本意義結(jié)構(gòu)）。

說(shuō)的認(rèn)知過(guò)程大致有： 概念化（利用相關(guān)知識(shí)，包括發(fā)言的具體情景語(yǔ)境、背景知識(shí)、已談?wù)搩?nèi)容等確立表達(dá)意圖，遴選可實(shí)現(xiàn)此意圖的相關(guān)信息，并將所要表達(dá)的信息排序）——言語(yǔ)生成（包括兩部分：語(yǔ)法編碼及音系編碼。語(yǔ)法編碼旨在利用句法結(jié)構(gòu)及相關(guān)詞匯構(gòu)建句法上有意義的、可被理解的句子；音系編碼是指將之前的抽象輸出以音位的形式體現(xiàn)）——語(yǔ)音預(yù)演（即內(nèi)部言語(yǔ)，說(shuō)話者本身內(nèi)部模擬，預(yù)想言辭怎樣發(fā)音）——發(fā)聲（即通過(guò)發(fā)聲器官執(zhí)行上一步的語(yǔ)音計(jì)劃）——自我監(jiān)控（說(shuō)話者在表達(dá)前后都需留心表達(dá)信息的準(zhǔn)確性、流暢性、適切性及邏輯性）。

寫(xiě)作的認(rèn)知過(guò)程是：目標(biāo)設(shè)定（確定寫(xiě)作目的）——主題及體裁確定（文章主要關(guān)于什么，以何種體裁呈現(xiàn)）——整體規(guī)劃（收集觀點(diǎn)，了解在體裁、讀者群等方面的要求及限制）——組織（將觀點(diǎn)分類，并安排以適當(dāng)順序呈現(xiàn)；判斷所列觀點(diǎn)間的關(guān)系，如并列、遞進(jìn)、因果等）——微觀規(guī)劃（主要關(guān)注即將著筆的部分要寫(xiě)什么、寫(xiě)作目的、怎樣寫(xiě)）——翻譯（將設(shè)想命題轉(zhuǎn)化成通順、連貫的語(yǔ)言）——監(jiān)察（時(shí)常留心檢查所寫(xiě)內(nèi)容的拼寫(xiě)、發(fā)音、句法等）——評(píng)估與修正（聯(lián)系上下文，修改不滿意、不合適的地方）。

四、結(jié)語(yǔ)

認(rèn)知過(guò)程作為認(rèn)知效度的主要研究對(duì)象，是很難直接測(cè)量的，而引出認(rèn)知過(guò)程的媒介，例如調(diào)查問(wèn)卷、口頭匯報(bào)等又并非面面俱到地覆蓋所有的細(xì)節(jié)過(guò)程，而且后期收集、轉(zhuǎn)寫(xiě)、整理也較為耗時(shí)、耗力。此外，由于研究對(duì)象的不同，也沒(méi)有統(tǒng)一的調(diào)查、匯報(bào)模式，所以得到的結(jié)論通常是歸納性而非結(jié)論性的。

而我們國(guó)內(nèi)對(duì)于認(rèn)知效度的研究尚未普遍展開(kāi)，研究隊(duì)伍有待壯大，方向及具體研究課題也有待加深。但鑒于其對(duì)于語(yǔ)言測(cè)試設(shè)計(jì)方面的重要意義，未來(lái)研究者可以考慮利用更科學(xué)的方式，例如認(rèn)知語(yǔ)言學(xué)及大腦科學(xué)方面的知識(shí)，提供更為客觀的證據(jù)，來(lái)開(kāi)發(fā)新的研究路徑。

【參考文獻(xiàn)】

[1]Snow， R.E.， Corno， L. & Jackson， D.， Individual differences in affective and conative functions [M]， in D.C. Berliner & R.C. Calfee， eds. Handbook of Educational Psychology. New York： Simon & Schuster Macmillan，1996：243–310.

[2]Weir， C. J.， Language Testing and Validation[M].北京：外語(yǔ)教學(xué)與研究出版社，2005.

[3]修旭東.英語(yǔ)寫(xiě)作測(cè)試中“理論效度”的理論依據(jù)模式[J].外語(yǔ)與外語(yǔ)教學(xué)， 2002（11）.