基于AACSB認證中AOL標準的學習效果評量機制設計

曹海濤 魏勤

［摘? ? ? ? ? ?要］? 以AACSB國際認證中的AOL標準為基準，設計經管學院研究生學習效果的評量機制。同時，以管理經濟學課程為例，具體說明此學習效果的評量機制如何實施。

［關? ? 鍵? ?詞］? AOL；學習效果；評量機制

［中圖分類號］? G642? ? ? ? ? ? ? ? ? ? ［文獻標志碼］? A? ? ? ? ? ? ? ? ? ［文章編號］? 2096-0603（2023）15-0109-04

一、AACSB認證中的AOL評估標準簡介

商管學院的教育目標是為社會培養合格的經營管理人才。學生的學習成效是評估商管教育是否符合社會需求的重要環節之一。國際商學院促進協會（The Association to Advance Collegiate Schools of Business，簡稱AACSB）是著名的提供商管學科教育評估的國際認證機構之一，其評估準則現已成為眾多國家商管課程學習成效評估的主要參照。AACSB的評估強調商管學院在參與、創新與影響力（Engagement，Innovation and Impact）等方面的表現。即借由評估過程，提高商管教育的質量，強化學校、師生和產業之間的互動，促進教育、學術或專業的創新，從而使學院對社會有所貢獻。

本文主要目的就是以AACSB的第8項評估標準——學習確保（Assurance of Learning，AOL）為基準，討論經管學院研究生學習成效評估機制的設計；同時，以管理經濟學課程為例，就具體課程學習成效評估的實施進行討論。

二、以AOL設計學習評量機制

AACSB的評估標準共計15條（2013年修訂版），其中第8條主要關注學生學習成效衡量，其內容如下：學院利用健全的文書制度與系統化的程序，制定或修改各學位學程的學習目標；協助學位學程建立課程設計、教學方法與課程改進的機制來實現學習目標，并應體現學位學程的學習目標達成之效果。

此項評估標準強調課程管理（Curricula Manage-ment）和學生學習成效的保證（Assurance Of Learning）。首先，培養方案要能反映社會對學員的需求；其次，制訂學習目標；最后，衡量學習結果是否達到學習目標，進而修訂課程設計與教學內容。所以，AOL的評估過程就是衡量學生在參與課程學習中是否達到預期學習目標的過程。值得注意的是，AACSB關注的學習目標是整個學位學程層次的目標，而不是單一課程所設定的細節目標。借由衡量學習成效的過程，學院得以確認學習目標的達成情況，提供回饋和改善的指引，協助教師改善課程設計和教學內容。

借鑒AOL的評估準則，我們可嘗試建構經管學院研究生學習成效的評估機制。這一機制主要由以下部分組成：

（一）設定學習目標（learning goals）

設立學習目標和/或子目標（learning objectives），制訂學習目標和子目標的主要內涵。

（二）建立學習成果評估指標體系（rubrics）

此指標體系包括考察學習結果的不同維度（dime-nsions），以及針對每一維度制訂的評量標準（criteria）。

（三）施測結果分析與討論

每門課程的教師根據施測結果進行分析，并做成分析報告，交由各級教學主管部門討論。

（四）反饋與改善

施測結果討論后的改善意見，即成為各門課程后續教學中的改進措施，由此形成教學精進與學習成果評量的有效循環（loop）。

三、設立評量標準

根據前文的討論，我們把經管學院研究生學習成效評估機制的具體操作步驟總結如下圖：

（一）建立學習目標

以經管學院研究生教育為例，根據多年的教學實踐以及借鑒國內外商管學院的經驗，我們將學習目標總結為以下五項：

1.專業能力（Professional skills），指基本的實務知識與技能。

2.溝通能力（Communication skills），指口頭溝通/演講、書面溝通/寫作。

3.分析與問題解決能力（Analysis and problem-solv-ing skills），指具有基本的分析思維與問題解決技能。

4.道德觀（Code of ethics），指倫理認知與社會責任。

5.國際視野（Global perspectives），對國內外政治、經濟、商業發展有基本的認識。

（二）學習子目標

每一個學習目標可發展出能具體衡量的學習子目標或學習目的。如專業能力的學習目標可以繼續發展出兩個子目標，包括：（1）本科生應能描述其專業領域之初級或中級專業知識與技能，以有助于其職業及（或）進階的持續學習。（2）本科生應能展現其基本的能力，以一般及專業之管理技能與知識來處理問題。

（三）發展評量標尺

依據學習目標發展出多個學習成果維度的評量標準之評量標尺。例如，衡量專業能力這一學習目標的維度可設為：D1.具備本學科基礎專業知識；D2.初步具備整合跨學科專業知識的基本能力；D3.具備本學科相關領域時事議題的基本創新思辨能力；D4.初步具備運用專業知識定義問題并進行決策的能力；D5.初步具備運用各種資源進行自主學習的能力；D6.初步具備判斷不同情境案例中需要有效領導方式的能力。同時，每一個維度可分成三個等級的評量標準，例如：1＝弱，2＝中，3＝強。每一維度對應的評量標準都應提供相應的情況描述，例如：D4-3（強），可描述為“能夠較充分應用專業知識、證據和所有相關情境因素，洞悉問題所在，并針對問題做出的決策能基本滿足或符合不同層面需求”。

（四）執行評量作業

由授課教師于學期初始、學期中或學期末執行學習成效評量。使用的測量工具可以包括報告、簡報、期中考、期末考、小考等多種測量工具或評量設計，但授課教師必須確認各測量工具或其中的某個特定部分是衡量評量標尺中的哪一個維度。例如：“管理經濟學”課程期中考和期末考的紙筆測驗，授課教師必須確認考題中的哪些題目是測量“分析與問題解決能力”的第一個維度，哪些題目分別測量第二和第三個維度。

（五）資料分析并依分析結果提供改進建議

根據評量標尺上的不同評量維度，授課教師對每位學生的表現評分。事后，教師統計修課學生分數，計算出各維度的達成比率及總達成比率是否高于當初設定的“目標達標率”。施測完畢后，依施測所得到的結果填寫“討論與建議”，包括重要的發現、改善方法、評量標尺或“目標達標率”的總結。最后，針對各項資料加以分析，就各項統計數據說明并提供改善建議，做成學習成效報告。例如“管理經濟學”課程的學習成效在“專業能力”各維度皆有通過“目標達標率”80%，顯示學生對管理經濟學主要理論模型和基本的國際經濟問題有較深入的理解，從而可以提出說明和建議，如可以適度提高達標率標準；同時，也可增加評量問題的深度、廣度，以得到較高的鑒別度。

（六）召開各級會議討論學習成效報告和審查改善建議

利用各項會議，如教研室會議、院系會議等討論改善建議。會議完成后，評量結果必須有系統地收集、分析與傳閱給教學主管部門和相關授課教師等，并依據改善建議和時程執行改進措施。例如管理經濟學課程在“專業能力”學習目標的“目標達標率”完成80%的情況下，下一次授課時可將達標率提高至82.5%，或維持“目標達標率”80%，但增加評量問題中較困難題目的比例。

（七）學習成效評量的持續改善

本次課程學習評量后，應在下次課程教學中執行改善建議，并重新評量學生表現，檢視是否確實改善。針對本次施測結果，檢查學生尚未達成教學目標之處，教學單位要努力改進缺失，提出改進措施的執行方法與時間表，在下回執行學習成效評估后進行比較，由此完成一次循環（close the loop）。

四、管理經濟學課程評量機制的具體運作

本節我們以管理經濟學課程為例，詳細說明某一具體課程如何根據學院設定的學習成效評估機制進行學習成效的評量。

（一）管理經濟學課程評量與施測

假設管理經濟學課程的學習目標是培養學生的專業能力和國際觀，而專業能力中我們選擇三個維度D1、D2、D4進行評量，國際觀（假設共有六個維度）中我們也選擇三個維度D1、D2、D5進行評量，對這兩項學習目標評量和施測的操作如文末表1和表2所示。

（二）管理經濟學課程評量的檢討

根據課程施測結果進行檢討，具體情形可以包括：

1.以評量標尺說明學生學習成效評估情形

（1）專業能力

管理經濟學課程的專業能力評估結果中，三個維度平均通過率為79.7%，基本達到80%的目標通過率，顯示學生已經具備管理經濟學的專業知識能力。其中，表現較弱的維度是D4以本學科基本模型分析相關時事議題的基本能力，學生對時事議題的認知較為薄弱，學理的運用能力還可加強。

（2）國際觀

管理經濟學課程國際觀的評估結果，三個維度平均通過率為67%，低于80%的目標通過率，可見學生對管理經濟學中的國際觀內容較弱。教學中，教師對全球化意識、管理經濟學發展以及對產業的影響這些方面的知識可以多加補充介紹。

2.依據表格數據說明未來課程改善的對應方法

（1）專業能力

專業能力D4平均未達成目標通過率的改善方法：學生對把剛掌握的管理經濟學模型應用到具體事例的分析能力還有所欠缺，教師可透過課堂討論或習題演練等方式提高學生這方面的能力。

（2）國際觀

D1、D2、D5全球管理經濟學認知較弱的改善方法：全球化及世界經濟的認知，可透過教師課堂上多討論國際性案例和重大經濟事件來補充增進，或是改以國際版之教科書教學。

3.舉行會議進行討論

舉行課程教學會議討論評估結果和改進措施。討論內容可以包括在下次執行學習成效評估時是否有針對評量標尺或教學方法進行修正，以得到較好的評估結果。同時制成評估結果報告，分別送到課程委員會、各院系和教研室主管、相關授課教師參閱。最后，執行改善建議及設定時程，在本課程會議（由共同科目教學教師組成）上討論并擬訂改善措施，并于下一學年度執行改善。

五、結語

經管學院或商學院的研究生教育，目的是為社會培養合格的經營管理人才。如何衡量研究生的學習成果是否符合社會需求、如何持續改進和完善研究生教育，成為研究生教育評估的重要環節之一。本文以AACSB國際認證中的AOL標準為基準，設計經管學院研究生學習效果的評量機制。同時，根據我們多年的教學經驗，以管理經濟學課程為例，具體說明此學習效果的評量機制如何實施。

AOL的學習成效評估機制，是希望通過學習目標確立、教學過程管理、施測結果的檢討，使學生對課程有深入領悟，使教師對教學能持續改進。

參考文獻：

楊宜，陳建斌.城市型、應用型大學商科教育質量提升的探索與實踐：基于AACSB國際認證的視角［M］.北京：經濟科學出版社，2018.