基于學生體驗的電子檔案袋測評感知價值調查分析

林莉蘭 洪葉

一、引言

檔案袋測評是基于表現的測評。與傳統的測試不同，檔案袋呈現的不僅是最終成果，也是學習過程。電子檔案袋測評為數字化學習環境提供了各類成果證據存儲的無限空間，更重要的是體現了認知主義和建構主義學習理論觀，被視為促進學生發展的工具，支持個性化學習和促進學生自主學習能力發展。雖然電子檔案袋測評被廣泛推崇，但在理論主張與實踐之間仍存在鴻溝。

國內研究者更感興趣的是如何在數字化學習環境下結合課程教學融入檔案袋的促學和測評功能，多基于教師視角描述電子檔案袋的設計和應用，尚未有學者從學生視角研究學生的使用感受。電子檔案袋測評反映的是一種全新的學習觀和測評觀，通過學生的自我測評和反思來促進學生承擔更多的學習職責，學生是測評的參與者，而不是客體。對于大學生來說，他們是否適應這一新的測評文化以及所涉及的新興技術？他們如何評價使用感受及效果？本研究擬通過調查回答上述問題，以期對相關電子檔案袋設計和運用提供啟示。

二、研究方法

（一）研究環境和目的

本研究的電子檔案袋（以下簡稱PALA）系筆者所在項目組設計開發，用于所在學校大學英語自主學習項目，目的是輔助課程學習，促進學生自主能力發展。感知價值在本文中指學生根據電子檔案袋測評體驗及感知的收獲而形成的判斷。為了捕捉受試體驗，調查涉及三個變量：感知PALA促進自主價值、感知電子檔案袋技術價值、感知檔案袋測評價值。研究將考察影響學生體驗PALA的因素以及因素間的關系，分析學生對這三個變量的反應。

（二）研究工具

1.問卷

“感知PALA促進自主價值”以自主學習能力構念為框架。項目組在前期實證研究基礎上，確定了大學生外語自主學習能力操作化定義包括五個維度：目標管理能力、自我反思能力、互動交流能力、自我評估能力、外語（英語）使用能力。根據這一定義以及前期研究成果編制初始項目16個，其中4題為干擾題。“感知電子檔案袋技術價值”以技術接受模型（Technology Acceptance Modeling，TAM）為框架，旨在通過感知有用性、感知易用性、對使用特定技術（包括電子檔案袋）態度以及后續行為意愿之間的關系來解釋用戶如何感知和使用技術。參照這一模型設計了12題來測量學生感知電子檔案袋技術的價值。第三個變量借鑒Brown的“學生測評觀”（Student Conceptions of Assessment，SCoA）量表模型。該量表用于解釋學生如何看待測評及測評的作用，涉及四個構念：測評促進了我的學和教師教（促進）;測評與我無法控制的外部因素有關（外部）;測評對我的學習環境有積極的社會和情感影響（情感）;測評干擾了我的學習（無關）。參照SCoA模型設計了22道題來測量學生如何評估檔案袋測評的作用。初始50道題采用李克特五級量式，最后一部分還設計了3道開放題，以了解學生對改進PALA的建議。

2.訪談

鑒于問卷獲得的學生對開放性問題的回應有限，研究添加了訪談。訪談采用半結構化形式，圍繞如下問題：英語學習目的、平時英語學習時間、是否適應自主學習模式、是否曾經使用過學習檔案袋、PALA是否有用、使用PALA的體驗、改進PALA的建議。6名任課老師分別從實驗班中推薦了自主學習能力強、一般和弱三個等次的6名學生參加訪談（實際參加訪談學生35人）。2018年6月底，筆者對這些學生進行了一對一的訪談，訪談按照事先確定的時間和地點舉行，在三個半天內完成。

（三）數據收集及分析

參實驗組的兩輪學生（筆者所在學校2016級和2017級非英語專業本科生）分別于2018年6月和2019年1月參加了網絡問卷調查，共收到有效問卷295份（77.2%）。為確定三個擬測變量間的關系，同時驗證問卷的構念效度，研究采用因子分析技術。將232份問卷分成兩部分，運用SPSS24.0對132份問卷進行探索性因子分析，運用AMOS24.0對100份問卷進行驗證性因子分析。訪談的定性數據分析方法如下：兩位教師運用內容分析法對訪談內容獨立編碼。對編碼存在爭議部分由筆者參與討論，使編碼趨于一致。筆者根據兩位教師編碼，對數據進行描述性統計分析。

三、結果分析

（一）感知PALA價值模型

初始問卷的信度系數為0.97，內部一致性統計結果表明，題項V34-40的CITI值低于0.5的標準，刪除這7項后，問卷的一致性程度得到提高。

問卷的樣本測度值KMO為0.96，Bartlett球形檢驗的統計顯著（p=.000），表明數據適合做因子分析。采用主成分分析法和最大正交旋轉方式來實現對觀測變量進行降維處理。最后，問卷的43個題項獲得的3個因子解釋了76.54%的方差。因子1共有16題，解釋了29.69%的方差，與“PALA促進自主價值”構念一致。因子2共有12題，解釋了24.14%的方差，與“感知電子檔案袋技術價值”構念一致。因子3解釋了22.71%的方差，與“感知檔案袋測評價值”構念一致，共15題。

另一部分數據用于對獲得的三因子模型驗證。采用了四個步驟：模型設定、模型估計、模型評估和模型修正。根據修正指數，結合理論，刪除了8題后，模型擬合度達到了理想標準（X2/df、GFI、NFI、IF、CFI、RMSEA值均達到標準）。最終問卷為35題，信度為0.98，各維度的信度均在0.97-0.98之間，說明量表有較好的信度，各題項能較好地反映所在維度構念。

最終問卷的感知PALA促進自主價值變量共12題（因子分析過程中刪除了4道干擾題），反映了本研究的自主學習能力理論假設。感知電子檔案袋技術價值變量保留了初始12道題。在感知檔案袋測評價值這部分，因子分析過程中刪除了情感（V30、V31、V32）、無關（V34、V35、V36、V37、V38）和外部因子（V38、V39、V40、V50），僅保留“促進”因子（共11題）。這一結果表明，僅“促進”因子反映了感知PALA價值構念，而其他三個因子與感知PALA價值相關性低或無相關。

從圖1顯示三因子的關系模型可看出，外源性潛在構念與內源性潛在構念（變量）之間的路徑均為正相關，具有統計學意義，因此接受本研究提出的感知PALA價值假設模型。感知PALA促進自主價值、感知技術價值和感知檔案袋測評價值三因子解釋了79%的感知PALA價值方差，其中感知技術價值因子貢獻略高，其次是感知檔案袋測評價值和感知促進自主價值，說明三個因子都在一定程度上影響學生的感知PALA價值。學生對檔案袋測評的感知價值與感知電子檔案袋的技術價值存在高度相關，對檔案袋測評的感知價值與感知PALA促進自主價值也是顯著相關，感知PALA促進自主價值和感知電子檔案袋技術價值存在中度相關。這一結果不僅表明三個變量之間的線性關系程度，還表明某一變量的變化會同時引起另外兩個變量變化。

（二）感知PALA價值定量分析

對學生問卷各項答題進行百分比統計。在感知PALA促進自主這一維度上，每一題持“贊同”和“完全贊同”的學生都在75%以上，表明多數受測學生肯定PALA促進他們自主學習能力的價值，肯定了PALA在促進他們管理學習目標、自我反思、互動交流、自我評估和英語使用能力的價值。在感知技術價值這一維度，對電子檔案袋有用性（V17-19）和易用性（V20-22）持肯定評價的學生占總數75%-82%，在使用態度（V23-25）和后續使用意愿（V26-28）持肯定評價的百分比略低（72%-78%）。感知檔案袋測評價值這一維度的11題均是對其促學和促教的評價。80%以上受測學生認為檔案袋測評促進了教師的教學（V46、V47和V49），促進了他們融入學習過程（V29），提高了學習效率（V33），了解了自己學習現狀（V45、V48）。但問及是否重視測評結果（V43）或如何使用測評結果調整后續學習（V42、V44）時，50%左右的學生不置可否，只有34%左右的學生給與肯定答復。這一結果似乎說明不少學生還不能使用測評結果調整和改進學習方法。

（三）定性數據分析

42.9%的受訪學生表示“喜歡”英語，而17.1%的學生明確表明“不喜歡”英語。大多數受訪學生（82.8%）表示能適應自主學習模式，僅有8.6%的學生尚不能適應。所有受訪學生此前無使用檔案袋的學習經歷。當問及PALA在他們的英語學習過程中是否有用時，多數學生（77.2%）給予了肯定答復，而5.7%的受訪學生認為“無用”。這一結果與問卷調查結果基本一致，即大多數學生肯定了PALA的使用價值。PALA的“反思”（51.4%）和“學習過程軌跡圖”（29.6%）被認為是PALA最有用的部分。當問及PALA使用感受時，多數學生給與了充分肯定（71.4%），多集中在提高自我管理學習能力（22.9%）、幫助適應學習方式轉變（22.9%）、感受PALA對促進學習的作用（25.7%）。受訪學生對PALA的改進建議回應不多，收集的建議分別是：增加師生互動（25.7%）、精簡和優化系統界面（5.7%）、細化反思部分提示（5.7%）、提高系統運行的穩定性（5.7%）、增加自主學習測試頻率（5.7%）。總的來說，多數受訪學生認為PALA在促進他們管理自己學習、適應學習模式的轉變以及促進學習方面持肯定態度。

四、結論與討論

首先，多數受試能適應檔案袋這種新的測評方法。雖然受試在實驗前從未接觸和使用過檔案袋學習方法，但本研究的因子分析結果在感知檔案袋測評價值因子上拒絕了原假設的“外部”“情感”和“無關”因子。根據SCoA理論，“情感”和“外部”因子指學生將檔案袋測評與同伴的關系、學習環境和學校教學質量相關聯，反映了學生缺乏自主和自我控制，“無關”因子則反映了學生拒絕承認檔案袋測評的有效性。已有研究也驗證了持促進觀的學生能適應學習測評模式，而持外部、情感歸因或認為測評與自己無關的學生難以適應測評模式。本研究所保留的促進因子驗證了PALA的促進價值，也反映了學生適應檔案袋測評學習法。描述性統計數據和訪談也表明，多數學生適應這種測評方法。其次，多數學生認可PALA所采用的技術。這一結果一方面可能是PALA將多種數據集合到一個平臺，方便了學生了解和監控學習過程。另一個可能的原因是PALA所采用的結構化構架。電子檔案袋的優勢如何在教學中得以顯現并得到學生的認可，關鍵在于要基于使用群體的現狀提出合理的設計方案。本研究采用結構化的構架是基于前期實施條件分析后做出的決定。結構化的檔案袋更適用于自主學習能力仍處于“反應性自主”階段的學生。這一舉措為成功實施PALA提供了很好的鋪墊。最后，PALA基本達到了其設定的促進學生自主能力發展和促學的目標。從問卷和訪談數據看，多數學生肯定了PALA在支持他們實施學習決策和促進他們自我管理學習的能力，促進了他們反思學習過程和成效，也提高了他們對學習過程的認識，提高了他們學習績效。這一結果驗證了有關檔案袋測評能力促進學生自主能力發展和促進學習的推論。

雖然PALA取得了理想效果，但在如何加強教師的導學方面仍有改進的空間。調查發現，只有三分之一的學生能根據測評結果調整后續學習。檔案袋測評被認為是替代傳統考試的一個理想的方法，其優勢之一就是通過學生參與測評來實現不斷改進和提高的目的。上述結果可能是學生不理解檔案袋測評的意義，或是不知道如何調整學習方法。PALA雖然有教師針對學生學習過程的反饋，計算機技術也能提供機評和學習過程記錄反饋，但對自主能力仍處在發展階段的學生來說，仍需要老師指導他們如何解決學習過程中的問題，如何調整學習方法。

本研究為電子檔案袋測評設計和研究提供了一個新視角。已有研究主要基于TAM或SCoA模型來探討電子檔案袋測評的作用。本研究除了上述兩個模型外，還從PALA目的設計了擬測變量。因子分析驗證了本研究的理論假設，即學生感知PALA價值模型由感知PALA促進自主價值、感知技術價值和感知測評的促進價值三因子組成。因子模型圖也表明，三因子相互關聯，互相影響。也就是說，以促進學生自主為目標的電子檔案袋測評設計需同時考慮學生是如何理解自主、電子檔案袋技術和測評的促進功能。本研究的啟示是，電子檔案袋測評的設計既要考慮測評的目的和實現方式，也要考慮平臺技術的呈現方式。

作者簡介：

林莉蘭：教授，博士，研究方向為二語習得、英語語言教學（lin5928@163.com）。

洪葉：講師，碩士，研究方向為英美文學（hy@ahjzu.edu.cn）。