基于“云平臺”的臨床技能考官培訓模式在考前培訓中應用效果分析

陳 超 陳麗芬 朱慶雙 陳 晨 王亞軍

(首都醫科大學宣武醫院教育處,北京 100053)

隨著醫學教育改革在世界范圍內的不斷發展與推進,臨床實踐教學規范化、標準化、科學化的必要性日益凸顯。臨床實踐技能考核是檢驗培訓過程和教學效果的重要依據,考官正是影響考核科學、規范、公平、公正的主要因素[1-2]。考官的培訓越到位,考試過程中出現問題的概率越低,工作效率越高,因此規范有效的考官培訓就顯得尤為重要[3-4]。考官培訓多分為日常通識技能培訓和考前針對性培訓兩種形式。通過整合云平臺資源,利用信息技術與教育深度融合,迎合了時代的需要,使教育突破時間和空間的限制,從封閉走向開放[5]。為探索應用云平臺的考官培訓模式提升培訓效果和效率的可行性,我們對首都醫科大學臨床技能會考中應用云平臺進行考官考前培訓及其培訓效果進行了調查、分析和評價。

1 對象與方法

1.1 調查對象

2021年3月參加首都醫科大學臨床技能會考的考官190名。遴選標準為:中級以上職稱,2年以上臨床教學經驗,通過校級考官資格認證培訓。

1.2 培訓方法

考官培訓分為日常通識技能培訓和考前針對性培訓兩種形式。日常通識技能培訓包括職業素養、考試的基本理論、命題的方法、考試設計方法、考試實施路徑、評價量表的應用方法、考試結果的分析評價方法7個方面。考前針對性培訓主要針對考試紀律、考核流程、考核物品的使用方法、評價量表的應用標準、試評分等5個方面。

此次培訓為考前針對性培訓,師資為考核實施負責人、首都醫科大學遴選的專家型考官以及臨床技能中心工作人員;培訓時間共計2 h。培訓手段與方法如下。

(1)建立云教室:利用云平臺通過手機號碼邀請考官進入具備在線通知、視頻直播、在線完成作業、線上線下實時互動、填寫問卷、打卡簽到等功能的云教室形成云班級,并根據不同的專業進行分組,每組配備專職管理員,負責組織培訓期間的所有教學活動。

(2)云平臺在線統一培訓:由考核各環節負責人采用在線互動直播的形式對相關內容進行講授及問題解答。

(3)云評分模擬考核現場場景:采用考核現場使用的信息化考評系統的云平臺版本,在線模擬考核現場場景。在培訓前根據各考核項目中易錯點和易誤判點設定腳本,錄制模擬技能操作考核視頻,并制定相應的標準評分表(標準分為85分)。授課教師(專家型考官)對有關要點進行指導并講解評分標準。有疑問的考官可以直接提問,現場交流和解答問題,讓考官可以充分了解評分標準,達到同質化的要求。然后在云平臺模擬考核場景并播放視頻,由考官進行評價,結果實時反饋并了解培訓效果,并對評價差異較大(誤差大于5分)的考官進行二次培訓。

1.3 評價方法

1.3.1 培訓效果分析

培訓前結合評分量表,參考既往難點,選擇各專業具有代表性的操作項目,按照85分的標準分數進行操作視頻腳本設計與拍攝, 使用云平臺進行評分。分析經過培訓后不同專業(內科、外科、婦產科、兒科、急診科、護理等)考官應用云平臺模擬評分結果與標準分數的差異,評價培訓效果,驗證培訓有效性。

1.3.2 問卷調查

采用自設問卷,利用問卷星平臺對研究對象實施自填式問卷調查,調查內容包括調查對象的基本情況、培訓需求匹配度、培訓形式匹配度、培訓內容合理性、培訓效果認可度、培訓效果自評、軟件應用熟練度、繼續參加考核意愿、培訓流程滿意度等。采用Likert 11級評分法[6]對每個指標11個等級由低到高分別賦值0～11分,按照由低級指標得出高級指標的運算方向,依次計算各指標的算術平均分。共發放問卷190份,回收有效問卷190分,有效回收率為100%。

1.4 統計學方法

計量資料采用均數±標準差(±s)表示,計數資料采用頻數(百分比)表示。利用可靠性分析、KMO和Bartlett球形檢驗的方法對考官培訓效果的認同程度進行評價,采用主成分分析的方法對問卷測量指標的信息進行降維處理,采用單樣本t檢驗的方法評價模擬效果。所有數據處理與分析采用SPSS 26.0軟件,雙側檢驗,以P＜0.05為差異具有統計學意義。

2 結 果

2.1 考官的基本情況

參加培訓的考官均來自首都醫科大學21家臨床醫學院、附屬醫院及教學醫院,其中男性55名(28.95%),女性135名(71.05%);年齡33～59歲,平均44.56±6.16歲,其中30～39歲46名(24.21%)、40～49歲105名(55.26%)、50～59歲39名(20.53%);職稱為中級35名(18.43%)、副高級121名(63.68%)、正高級34名(17.89%),其中84名(44.2%)具有中級及以上教學職稱;參加臨床教學年限2～37年,平均14.16±7.81年,10年 以 下55人(28.95%),10～19年88人(46.31%),20～29年36人(18.95%),30年及以上11人(5.79%);所從事的專業(二級學科)內科66人(34.74%)、外科37人(19.47%)、婦產科30人(15.79%)、兒科29人(15.29%)、護理20人(10.53%)、急診科8人(4.21%)。

2.2 模擬評價效果分析

應用單樣本t檢驗,檢驗值為85,對考官評分結果按照專業進行分析,各專業考官評價結果與標準分數間無顯著性差異(P＞0.05)(表1)。其中各專業中均存在相較標準分數誤差大于±5分的情況,針對相應考官進行二次培訓。

表1 各專業模擬評價成績分析

2.3 培訓效果反饋分析

從需求匹配度、形式匹配度、內容合理性、效果認可度、培訓效果自評、軟件應用熟練度、繼續參加考核意愿、培訓流程滿意度8個方面測量考官對此次培訓效果的認同程度。利用可靠性分析、KMO和Bartlett球形檢驗進行因子分析適當性檢驗。本研究得出克隆巴哈系數為0.87,說明上述8個問題的內在一致性較好。KMO為0.82,Bartlett球形檢驗值為815.18(P＜0.01),說明適合進行因子分析。根據特征根大于1 的原則,采取主成分分析法提取公因子。最終得到1個公因子,累計貢獻率為55.71 %,基本符合要求,說明這8個指標基本可以解釋大部分測量指標的信息,但解釋度略顯不足,若能增加指標數量,貢獻率可進一步提升。考官對培訓各方面反饋評分均值大于10分,其中培訓對軟件應用熟練度提升效果最好(10.71±0.81),形式匹配度(10.43±1.25)、效果認可度(10.42±1.29)相對較低(表2)。

表2 培訓結果反饋 (n=190)

3 討 論

《中國教育現代化2035》中明確指出,要加快信息化時代教育變革,相關政策鼓勵醫療健康行業通過多元化培訓模式提高教育培訓的質量,利用好信息化技術為醫療培訓服務。本研究在既有的臨床實踐技能考官培訓模式的基礎上,借助多媒體技術、在線考核評價系統等信息化技術,利用云平臺突破培訓在空間和時間上的限制,形成了全新的“云”上培訓模式,有效地提升了培訓效率,達到了預期的培訓效果,對在實踐技能考核中執考規范、評價同質化起到了積極的促進作用。

3.1 改革了傳統的考前培訓模式

目前,各醫學院校和臨床醫學院均在開展各類型的考官培訓,部分單位建立了考官庫,考核能力水平得到了日益的提升[7]。但是在各類的臨床實踐技能考試組織與實施的過程中,考官隊伍多為根據考核內容與要求臨時組建或抽調組成的,來自多個單位橫跨多個專業,穩定性、專業性和熟練程度存在著一定的差異,對當前考試的內涵和規則理解也不夠充分,容易造成集中度和規范度欠缺。因此,考前的集中培訓是必不可少的。對于成熟考官而言,傳統的考核前考官培訓通常采用的是考核前一天或者一周進行集中的短時培訓,考核規模越大則要求場地和占用資源越大,組織的難度隨之增加,造成培訓效果的實時反饋愈加困難,所以隨著培訓規模的擴大,培訓效果不斷下降。采用云平臺的培訓模式,不受空間限制,組織難度隨之降低,通過研究可以看到,對于培訓需求的匹配度、培訓形式的匹配度等方面評價分數均在10分以上,可以匹配考官培訓的要求。

3.2 在保證質量的同時提高了培訓和考核效率

傳統的考前考官培訓模式多為專家授課講解,實際操作欠缺,培訓后承擔考官工作存在標準職責模糊的情況,影響到評價的一致性。通過信息化網絡平臺應用在考官培訓過程中,結合視頻還原考核場景,豐富了培訓形式,了解考核內涵更為直接,在線模擬考官評分,增加互動,提升了參與度并可集中注意力。隨著智能化的考核管理平臺的使用,信息化評分系統使用的培訓也是保障考核順利實施的必要條件[8-11]。在研究中可以看到,對于培訓內容的合理性、培訓效果的認可度評分均大于10分。通過考官自評結合各專業模擬評價的成績均和標準成績差異無統計學意義。可以看出,運用此模式培訓后可以有效地保障培訓質量,并可促進評價標準的統一,培訓效果反饋較好。軟件應用熟練度評分最高,可以看出應用與實際考核中相同的評價系統進行考官培訓可以有效地提升考核效率。同時多專業同時開展培訓工作,省時省力,節約人力資源,能有效地實現資源利用最大化,提高培訓的整體效率。

3.3 減輕了集中考官培訓所帶來的疲勞感

隨著考核方式的不斷完善、內容的不斷豐富、規模的日益增加,臨床教師在承擔教學工作的同時還要承擔繁重的臨床診療工作[12-13]。傳統培訓模式的集中考官團體培訓,占用了組織者、授課教師和考官的整段時間,由于近期公共衛生事件頻發,集中培訓防疫壓力陡增,增加了的考官和管理者的壓力和疲勞感。尤其是多單位、多科室參加或者是多中心同時開展的大型考試考核工作,參加和培訓的過程中浪費了考官們大量的時間,尤其是培訓前后花費在路程上的時間和精力,采用基于云平臺的考官培訓模式對于培訓效果以及減輕培訓壓力有著不可替代的優勢。

4 結 語

基于云平臺的學習和培訓模式已成為現階段社會主要發展趨勢,將云平臺的考官培訓模式應用于考核評價工作中,可以切實地提高考核培訓的效率和質量。但是也發現了一定的不足,培訓過程考官很容易受到干擾,這也從側面反映出了相關管理人員應當對考官在線學習的實際狀況進行實時監督,只有這樣才能從源頭上促進培訓質量的全面提升。

利益沖突所有作者均聲明不存在利益沖突

作者貢獻聲明陳超:提出論文構思,收集、整理相關數據,撰寫論文;陳麗芬:提出論文構思,撰寫論文;朱慶雙、王亞軍:總體把關,審訂論文;陳晨:收集、整理相關數據