“三閉環”持續改進機制下畢業要求達成度多樣性評價實踐

張薇薇，苑明海，樓力律，彭利平

（河海大學 機電工程學院，江蘇 常州 213022）

一、引言

2017年12月，中國工程教育專業認證協會受理了河海大學機械工程專業工程教育認證申請，2018年10月，專家進校對本專業進行了考察并通過認證申請。本文正是在相關背景下，探索了基于工程教育專業認證的畢業要求達成度評價，制定了畢業要求達成度的評價方法。對每項畢業要求，采用直接評價與間接評價相結合的評價方法，從課程成績評價、用人單位評價、畢業生自評、專任教師評價四個維度對畢業要求進行評價。

二、畢業要求達成度評價方法

河海大學機械工程專業的畢業要求與2017年工程教育認證工作指南中的12條要求一致。為便于畢業要求達成的舉證，每項畢業要求分解為若干個指標點。在畢業要求指標點分解中要特別注意以下幾個問題：（1）指標點分解要具體合理，每項畢業要求分解成3—5個指標點。（2）各指標點之間的內容要相對獨立，避免相互涵蓋。（3）要體現復雜工程問題的專業屬性，即要與專業復雜工程問題的界定相呼應。本專業采用課程成績分析法（直接評價）和問卷調查法（間接評價）對畢業要求達成度進行評價，畢業要求達成度評價以課程考核成績分析為主，調查問卷作為補充。

1.課程成績分析法。本方法是通過課程成績分析來進行畢業要求達成度評價，先對每項畢業要求進行分解，然后確定教學環節對各項畢業要求指標點支撐的“強（H）、中（M）、弱（L）”關系，選擇與各指標點關聯度較高的課程進行分析，由OBE工作組確定其對畢業能力要求支撐的權重系數。所選的支撐某項指標點的課程，其權重目標值之和為1.0，以課程考試、考核材料作為主要評價依據，對照課程教學大綱設定的課程教學目標進行逐項評價，根據每項課程教學目標的達成度評價結果，計算出該課程達成度評價結果。依據畢業要求各分解指標點所涉及全部課程的達成度評價結果及其對所支撐分解指標點的權重，逐項計算各分指標點的達成度，依據畢業要求各分解指標點的達成度評價結果，逐項評價其所支撐各項畢業要求的達成度。

課程成績分析法的具體步驟：（1）試卷數據采樣與處理。采集畢業生試卷中各題的題分與得分，計算各題平均得分，將各題按照課程培養目標進行分類，計算“課程分目標對應試題總題分（ΣT）”“課程目標對應試題總得分（ΣD）”和“課程分目標平均試題得分率（ΣD/ΣT）”。對于一個題對應多課程目標的情況，在每個對應的課程目標中重復統計；對平時作業、實驗報告的得分進行數據采樣與統計，按照上述試題處理方法，計算畢業生的“課程分目標作業均得分率”和“課程分目標實驗均得分率”。（2）計算課程目標達成度。課程目標達成度=考試權重×試題均得分率+作業權重×作業均得分率+實驗權重×實驗均得分率。（3）畢業要求分指標點達成度評價。基于成績分析法的畢業要求分指標點達成度=培養目標支持畢業要求的權重×課程目標。（4）畢業要求綜合達成度。本專業以同一指標點在評價周期內各年度達成評價的最小值作為該指標點達成綜合評價結果，即本評價周期畢業要求綜合達成度。

根據《河海大學授予學士學位的規定》，學生被授予學士學位的必要條件之一是學生“修滿本專業指導性培養計劃規定的學分，學位課程平均學分績點≥3.0”，即相當于70%及以上的滿足度，因此將學生畢業要求達成期望值規定為0.7，視為本項指標達成。

2.問卷調查法。問卷調查對象包括四類：接收畢業生較多的用人單位、畢業五年左右的校友、應屆畢業生和專任教師。問卷調查內容為本專業公開的12項畢業要求的分指標點，對每項畢業要求的分指標點分別設五個檔次，非常不認同（賦分1）、基本不認同（賦分2）、基本認同（賦分3）、認同（賦分4）、非常認同（賦分5）。

問卷調查法中針對各類調查對象的有效反饋問卷，進行畢業要求分指標點的達成評價值計算，則最終的畢業要求指標點的達成度評價值=用人單位達成度×35%+畢業五年左右的校友×35%+應屆畢業生×15%+專任教師×15%。

以本專業畢業要求達成度評價指標的“達成”標準，確定為每項畢業要求的評級目標，不低于0.7，當畢業要求達成度評價結果大于0.7，則認為該項畢業要求達成。

三、評價結果與分析

根據本專業一個評價周期的課程評價過程的原始記錄文檔和畢業要求達成評價過程的原始記錄文檔進行畢業要求達成度計算。在畢業要求達成度評價中，各項畢業要求評價的目標值為0.7。用人單位的有效問卷為28份，畢業五年左右的往屆生有效問卷為82份，2018屆應屆畢業生的有效問卷為241份，專任教師的有效問卷為38份。圖1和圖2分別為2017屆、2018屆基于成績分析法和問卷調查法的畢業要求達成情況。

圖1 基于成績分析法畢業要求達成情況雷達圖

圖2 基于問卷調查法的畢業要求達成情況雷達圖

從圖1、圖2可知，除2017屆畢業要求2、5、6、7和11外，基于課程成績分析法和問卷調查法的畢業要求達成度均高于0.7，達到了本專業的期望值；對用人單位、往屆畢業生、應屆畢業生和專任教師進行問卷調查獲得的綜合達成度整體上略優于課程考核分析法，且大于0.9，說明機械工程專業的社會、企業認可度和畢業生能力達成的滿意程度較好。

2018屆畢業要求指標點4-3達成度評價結果略低（0.72），是由于機械設計課程達成度值低造成的。機械設計課程支撐指標點4-3的達成情況為0.635，相對達成情況比較弱，需要對機械設計的教學內容、方法及評價方式進行持續改進。

2017屆畢業要求2、5、6、7和11的達成度分別為0.58、0.51、0.58、0.53和0.50，小于0.7，造成了畢業要求達成情況綜合評價的雷達圖出現“凸尖”現象（圖1a），主要是因為對2017屆畢業生未開設熱工基礎、管理學和計算方法課程，在達成度計算過程中，這些課程的達成度均設置為零，降低了畢業要求指標點的達成度。

基于問卷調查法的畢業要求達成度綜合評價的雷達圖（圖2）顯示，畢業要求1—12的達成度比較穩定。評估結果反映出隨著知識積累以及工作經驗的增多，學生對自身能力的認知越來越清晰，間接反映出基于課程評價的畢業要求達成度具有科學性和合理性。