“三圈三全十育人”理念下雙創教學質量的CIPP評價模型構建與監測
——以上海2所高職院校為例

沈青青，馮江華，朱保生

(上海電子信息職業技術學院，上海 201411)

0 引言

2015年5月，《國務院辦公廳關于深化高等學校創新創業教育改革的實施意見》(國辦發〔2015〕36號)文件頒布，提高雙創教育人才培養質量已成為各高校深化創新創業教育改革的重要內容之一。上海作為我國對外開放的窗口之一，各院校已然建成了各種規模的創業基地，且形成了自身一定特色的雙創教育教學模式，特別是牢牢把握立德樹人這一根本任務，提出了“三圈三全十育人”理念，狠抓思想政治理論教育教學改革，推動習近平新時代中國特色社會主義思想入腦入心。在此背景下，以CIPP評價模型為切入點，在“三圈三全十育人”理念指導下，充分運用修正版德爾菲法和層次分析法，構建起較為科學合理且具有上海特點的雙創教學質量評價指標體系，并對上海地區2所高職院校創新創業教育教學的實施效果展開評價，具有較強的理論與現實意義。

1 文獻綜述

1.1 CIPP評價模型

CIPP評價模型由美國學者斯塔弗爾比姆(Stufflebeam,D.L.)開發，由背景(Context)、輸入(Input)、過程(Process)和成果(Product)4項評價指標英文首字母縮寫構成。背景評價：涉及對社會與環境的背景和條件等對各方需求的滿足情況進行評價，幫助評估者評估目標。輸入評價：即評價項目的可行性，幫助評價者改進工作及其內容，制訂可實施的行動計劃。過程評價：評估是否偏離前期設計好的計劃，并總結實施過程中所發現的各類問題。成果評價：評估實施效果，為提升教育教學質量提供對策[1]。

以中國知網為檢索平臺，較典型的研究成果有：高振強于1998年針對CIPP教育評價模型展開說明，是國內較早研究此工具應用的專家學者[2]。時至今日，以CIPP模型為基礎展開課程評價的研究已輻射到各個領域。其中，在雙創教育教學領域展開典型研究的學者有：對9所本科高校開展創業教育質量評價研究的葛莉[3]，對創業導師指導效果展開評價的陳立平[4]等。然而結合上海特點，針對本地高職院校的創新創業教育質量展開研究的文獻則較少，在此背景下，通過構建科學的CIPP模型，對上海地區高職院校創新創業教育教學的實施效果展開評價，具有較強的理論與現實意義。

1.2 三圈三全十育人

“三圈三全十育人”即以“三全育人”為基礎，形成了“內圈、中圈和外圈”三圈的育人范圍，涵蓋了課堂育人即“內圈”；第二課堂和網絡、第三課堂協同育人的“中圈”以及社會育人的“外圈”，由此全面打通了課堂育人、科研育人、文化育人、實踐育人、網絡育人、管理育人、服務育人、心理育人、資助育人以及組織育人的“十育人”閉環，也讓上海在2018年成為首批“三全育人”綜合改革試點地區，同時也形成了向全國推廣上海“課程思政”模式的樣例[5]。

1.3 創新創業教育

美國學者柯林·博爾觀點：通過理實結合的手段，培育個體創業綜合素質，就是創新創業教育的內涵體現[6]。全美創業教育中心認為：個體創業實操能力、創業意識與精神、目標式導向等模塊均是創業教育需包含的內容[7]。梁保國等學者(1999)[8]指出：要在知識結構、文化視野、健全人格以及創業意識等因素上下功夫。因此，依據國內外研究成果，本課題將創新創業教育界定為在高職層次培養學生的創業意識、創業實踐能力和操作技能等內容，以期提高學生創業的綜合素養，為促進學生就業創業全面發展奠定基礎。

2 研究設計

2.1 研究方法及對象

研究方法：第一，在“三圈三全十育人”理念指導下，結合文獻研讀和工作經驗，根據CIPP模型初步提煉出具有上海特色的雙創教學質量評價指標體系；第二，經修正版德爾菲法，對CIPP評價指標體系進行優化；第三，經層次分析法，確定CIPP評價指標中各層級元素的權重。第四，用此指標體系評價2所當地院校的雙創教學質量，并提出相應建議。

咨詢對象：修正版德爾菲法和層次分析法中涉及的專家(主要有20位)，涵蓋了一線雙創教師、思政教師、雙創部門及教學單位主任、企業創業導師以及科研行政人員等，從多角度對雙創教學質量評價指標體系進行優化。

2.2 指標體系草案

根據文獻資料與筆者工作經驗，按照CIPP評價模型涉及的背景、輸入、過程和成果4項評價指標，將“十育人”理念融入過程評價之中，初步建立了20項二級指標，62項三級指標的CIPP指標體系草案。具體包括：

一是雙創教學宏微觀環境(背景評價)，涵蓋外部環境(1國家雙創政策指導、2當地政府支持、3所在區域創業活躍度)，學校環境(4人才培養方案、5雙創組織管理機構、6制度政策支持力度、7創業氛圍營造、8已開展的產教研合作情況)，學生背景(9學生父母從商比例、10有兼職或工作經歷的學生比例、11將創業作為畢業后目標的學生比例)3項二級指標，11項三級指標。

二是雙創教學資源配置(輸入評價)，涵蓋師資條件(12校內專任教師配比、13校內有創業實戰經驗教師配比、14校內兼職教師配比、15外聘創業導師配比、16教師高級職稱情況)，經費支持(17校內專項雙創教育教學經費、18校內專項“互聯網+”比賽經費配套、19創業基地建設經費支持、20創業項目孵化經費支持、21師資培訓經費支持)，硬件支持(22創業實踐基地數量、23雙創教學辦公條件、24創業實訓模擬平臺)，課程教材(25雙創類校本教材、26雙創類課程門數、27雙創類課程覆蓋面、28實操性強的雙創類課程體系設計、29課程教育教學實施方案)4項二級指標，18項三級指標。

三是雙創教學“十育人”(過程評價)，涵蓋課堂育人(30創業模擬實訓內容設計與實施、31創業理實內容設計與講授、32案例和游戲互動內容設計與實施)，網絡育人(33線上雙創教學資源拓展、34教師線上互動答疑)，文化育人(35課程思政融合、36雙創時政熱點推送與發布)，服務育人(37“互聯網+”賽事輔導、38創業導師幫扶指導)，資助育人(39種子項目資助、40上海地區創業類基金申報培訓)，科研育人(41師生共創、42雙創類講座/沙龍開展、43學生科研成果)，組織育人(44雙創學生社團建設、45市區級創業指導站建設)，心理育人(46創業大賽心理壓力疏導、47創業心理準備、48創就業心理困惑解答)，實踐育人(49學生參加各類型雙創比賽、50參觀調研各類型創業園)，管理育人(51考勤管理、52作業管理、53課堂互動管理)10項二級指標，24項三級指標。

四是雙創教學育人成效(成果評價)，涵蓋賽事結果(54“互聯網+”賽事獲市級及以上獎項、55“互聯網+”賽事獲得過優秀組織獎)，社會影響(56培育成功項目數、57校企合作孵化基地數、58項目帶動就業情況)，育人成效(59優秀校友個數、60畢業生創業人數、61學生對雙創類課程滿意度、62學生創業意識培養)3項二級指標，9項三級指標。

3 實證分析

3.1 指標評估與篩選

根據修正版德爾菲法要求，就指標草案進行兩輪問卷咨詢。課題組自擬問卷“高職雙創教學質量CIPP評價指標體系咨詢問卷1/2”，通過在線發送鏈接的形式，收集20位專家對62項評估指標重要性的判斷數據。首輪和次輪咨詢問卷的選項程度評價均以李克特五級量表來設計，即1～5分別代表“完全不重要、不太重要、一般、比較重要、非常重要”五種程度。首輪指標篩選標準為各項指標的平均分超過“一般和比較重要”選項臨界中間值3.5分以上者即保留，3.5分及以下者將被淘汰；次輪指標篩選標準為在首輪剔除被淘汰指標后的體系上，將標準提升至4分及以上者保留，其他淘汰。

3.2 指標體系確定

一是20位雙創領域專家(含一線教師)基本信息：

性別：男女各占一半，各10人(50%)。

學歷：專科及以下1人(5%)、本科2人(10%)、碩士16人(80%)、博士1人(5%)。

職稱：無職稱8人(40%)、初級4人(20%)、中級7人(35%)、副高及以上1人(5%)。

職業資格：無職業資格14人(70%)、三級1人(5%)、技師2人(10%)、高級技師3人(15%)。

職務：專任教師6人(30%)、行政8人(40%)、教研主任3人(15%)、企業導師3人(15%)。

二是根據首輪指標篩選標準剔除均值3.5分及以下指標，包括序號9、10、11、16、43等5項三級指標和1項二級指標學生背景(因它對應9～11項三級指標，故均被剔除)。

三是在首輪指標篩查完成的基礎上，更新版問卷再次征詢20位專家的意見，并剔除4分以下指標，包括序號8、14、19、20、23、26、33、39、41、47、57、59等三級指標。

由此，得到雙創教學宏微觀環境背景評價7項(1～7)，雙創教學資源配置輸入評價12項(12、13、15、17、18、21、22、24、25、27～29)，雙創教學“十育人”過程評價19項(30～32、34～38、40、42、44～46、48～53)，雙創教學育人成效成果評價7項(54～56、58、60～62)等19項二級指標和45項三級指標的CIPP雙創教育教學質量評價體系(如表2所示)。經SPSS24.0計算后按降序形式排列得到表1結果，其指標均值均在4分以上，標準差均低于1，表明專家意見基本趨同。表1、表2中序號詳見上文指標體系草案。

表1 雙創教學質量CIPP評價三級指標體系(N=20)

3.3 信效度分析

利用SPSS24.0完成了次輪指標問卷調研的信度與效度分析。其中信度Cronbach’s alpha值為0.951。效度方面，經KMO和Bartlett球形檢驗，各模塊KMO值均大于0.5，顯著性為0.000。其中，網絡育人、資助育人和科研育人3項二級指標，因剔除不合格指標后對應的三級指標均僅有1項，所以未參與檢測。

3.4 層次分析法下指標權重分配

一是構建3個層次分析結構，包括：首層(目標層)，即雙創教學質量CIPP評價指標體系；二層(準則層)，涵蓋背景、輸入、過程及成果評價4項，鑒于Yaahp模型中一個節點影響因素不能超9項，指標體系中雙創教學“十育人”過程評價項有10項二級指標，故將它拆分為“十育人”之課堂過程和“十育人”之課外過程2項二級指標；三層(方案層)，涵蓋了外部環境、學校環境、師資條件、經費支持、硬件支持以及課程教材等19項二級指標(如圖1所示)。

二是構建判斷矩陣。根據雙創教學質量CIPP評價指標體系自擬“高職雙創教學質量CIPP評價指標權重專家咨詢問卷”。再次邀請上述20位專家完成各同層指標的兩兩比較。評價等級以1～9進行賦分，從1到9代表指標重要程度不斷提高，其中2、4、6、8代表中間值，如A相對于B的重要性之比為a,則B相對于A的重要性之比為1/a，以此構建起兩兩比較矩陣。基于圖1結構共建立6個判斷矩陣，三級指標因數量過多，為降低專家判斷任務量，三級指標權重以等額形式賦值，專家可集中精力完成一、二級兩兩指標對比的判斷任務。

圖1 雙創教學質量的CIPP評價模型構建與監測層次結構模型

三是一致性檢驗，即對20位專家的判斷邏輯是否合理進行檢驗，即CR(一致性比率)<0.1代表檢驗通過。如存在不一致性問題，則通過Yaahp軟件進行修正，最終20位專家均通過一致性檢驗。如將專家1的一級指標判斷數據導入Yaahp平臺，得CR=0.0695<0.1，且通過一致性檢驗。

四是群決策與權重確定。本項目借助Yaahp軟件，將20位專家的判斷矩陣數據導入平臺，經模型檢查、一致性檢驗、以各專家排序向量加權算數平均的算法完成專家數據集結，且各層級組合一致性比例均低于0.1，由此得到了綜合20位專家數據后的“三圈三全十育人”理念下雙創教學質量的CIPP評價指標權重體系(如表2所示)。

4 指標體系應用

4.1 基本情況

以表2指標體系為依據，課題組確定了“‘三圈三全十育人’理念下雙創教學質量的CIPP評價問卷調研表”，選取上海當地A、B兩所院校實地應用。選項以“完全不符合、不太符合、基本符合、比較符合、完全符合”李克特五級量表式設計，并以1～5分賦分，以線上調研形式進行。A學院是一所辦學有近60年的公辦工科類國家示范高等職業院校建設單位；該校設有專門的創新創業教育中心，承接了全校性雙創教育通識課程。B學院是一所辦學有二十余年的全國首批教育創新示范性民辦學校；該校有師生團隊獨立運營、商業化的電商平臺，在雙創理實教育方面有著豐富的經驗。

表2 “三圈三全十育人”理念下A、B兩學院雙創教學質量的CIPP評測結果

4.2 調研對象

采集了A、B兩學院各15位曾上過雙創類課程的教師及行政領導，總計30位。A學院包括2位教研室主任、4位一線專任教師，6位校內兼課教師，3位一線輔導員教師；B學院包括1位二級學院院長，1位教研室主任，6位一線專任教師，7位一線輔導員教師。

4.3 主要結果

經線上調研和權重結果計算，A學院為3.93分，B學院為3.41分(如表2所示)。

4.4 結果應用

4.4.1 主要問題

據表2結果，總結主要問題有：

一是“三圈三全十育人”理念下A學院在雙創教學質量的CIPP評測結果中優于B學院。A學院總體評價接近“比較符合”(3.93分)；B學院總體評價以“基本符合”為主(3.41分)。

二是以A學院為例，在19項二級指標綜合評分中，只有學校環境、網絡育人、管理育人、服務育人、組織育人、賽事結果以及育人成效7項指標分值在4分以上，僅占19項指標的37%，仍有非常大的提升空間。其中，心理育人(3.6)、師資條件(3.6)、資助育人(3.7)、硬件支持(3.8)、科研育人(3.8)，這 5項指標是19項二級指標中排名較后的項目。

4.4.2 A學院的主要對策

一是加強心理健康師資培訓，打造專業化師資隊伍。針對教師在創業大賽心理壓力疏導、創業就業心理困惑解答等方面的短板，可通過加強教師在此領域的培訓與學習，取得相應資質證書，并協同學工線思政教師以更好更專業的知識體系和人生經驗來解答學生在創業大賽、創業就業過程中遇到的問題，更好地服務學生。

二是加強校內外合作，優化專兼師資人才庫。針對專兼及實戰導師配比、資助政策宣講及培訓、師生科研能力不盡人意等問題，可通過加強與校內其他二級學院教學部門、校外政企機構、實戰導師、校外兄弟院校等機構人員開展教育教學和科研項目合作，充分利用線上平臺，開展集體備課、雙創知識講座、線上沙龍以及資助政策宣講解答等活動，靈活配套人員勞務經費支出，發揮各層級人才的專長，彌補院校在師資、資助政策宣講以及科研等方面的短板。

三是聯動孵化園，實現課程—實踐—服務一體化的雙創教育閉環。充分整合學院資源，積極創建區級、市級創業指導站，積極爭取政策和經費支持，與區、市級各類型項目孵化園建立聯系，努力探索創建具有學院特色的雙創課程理論學習、雙創項目基地實踐、創業項目孵化服務的一體化雙創教育體系，實現從課堂到基地實踐再到真實項目跟蹤培育指導的雙創育人閉環。

5 結語

本課題在“三圈三全十育人”理念下，結合CIPP模型、修正版德爾菲法和層次分析法獲得了評價指標體系，完成了對上海2所院校的調研。鑒于課題主持人及成員水平有限，無法完全去除指標篩查、提煉以及權重確定過程中的人為因素，指標體系也無法全面覆蓋，但為監測自身雙創教學質量提供了一種分析樣例，經不斷優化與靈活調整，以期為各兄弟院校在“三圈三全十育人”理念下開展雙創教育教學質量評價發揮更大作用。