芻議軍隊職業教育在線學習評價的策略方法

賈紅雁 郝凱亭

摘 要：本文采用系統分析的方法，密切結合軍隊職業教育在線學習實踐，闡述了在線學習評價策略及其實現方式，論證了在線學習評價的一般方法，為軍隊職業教育在線學習評價的組織實施提供策略方法指導。

關鍵詞：軍隊職業教育；在線學習評價；策略方法

中圖分類號：G717 文獻標識碼：A

從教育技術應用的角度考察軍隊職業教育在線學習評價的策略方法，必須從主客體結合的角度，考慮技術支持的可行性和功能實現的必要性，結合軍隊職業教育在線學習系統的功能實現，來制定切實可行的策略和方法，才能為學習評價提供行之有效的指導。

一、軍隊職業教育在線學習評價策略

評價策略既是一種設計評價的理念引領，也是實施評價的現實依托，充分體現學習設計和學習技術對評價的支撐作用。以此為基礎，可以細化為職業教育在線學習評價的組織形式、評價程序和方法步驟，同時也可以指導具體的評價方法實施，確保評價指向的有效性和可行性。

（一）量規定向策略

網絡教學上看，量規是用于評價、指導、管控和改善學習行為而設計的某種標準或一套標準。在量規基礎上制定評價指標，才能更科學、更系統，更具指導學習、提升績效的指向性。就軍隊職業教育在線學習評價而言，量規導向策略具體化為如下三個方面：

一是指導職業教育在線學習行為。基于主體的指標量規主要面向職業教育在線學習行為，它是以知識習得、技能生成、思維發展和情感培育四方面一級指標為目標，將目標與學習行為進行對位分析，細化為二級和三級指標。這個指標體系一方面用于評價學習行為的價值及其實現程度，另一方面也起著規范學習主體的職業教育在線學習行為的重要作用。同時，對教員在職業教育在線學習中科學指導、規范管理也發揮著不可替代的引領作用。

二是規范職業教育在線學習系統。為了完成職業教育在線學習目標而實施的職業教育在線學習行為，需要有職業教育在線學習系統及其功能模塊的配合，是一個主客體結合的過程。基于客體的評價指標體系，就是一套關于客體系統功能實現的量規，其意義指向就是對知識內容表達和系統功能進行評價和規范，同時也能對系統研發者提出針對性、指向性的要求，以便系統為主體行為提供合適的知識呈現、適宜的功能載體和滿足要求的行為環境。

三是牽引“慕課”建設。作為職業教育在線學習的基礎，“慕課”建設不僅要遵從網絡課程建設標準，也要參照職業教育在線學習評價量規。無論是基于主體的評價量規還是基于客體的評價量規，都是對職業教育在線學習的主客體雙方一種標準化的要求。參照這一要求，“慕課”建設才能建立在滿足學員主體需求，適應學員認知水平的基礎上，實現網絡教學的根本目標。

（二）診斷導航策略

對職業教育在線學習主體的初始能力進行評判，對學員認知個性和興趣偏好的分析和確定，不僅對后續評價其學習行為產生意義，還對了解學員認知能力、知識基礎、興趣指向、學習風格，為學員提供個性化的、適合于自己的導航有著重要價值。診斷導航策略具體化為如下三個方面：

一是確定初始能力和認知水平。初始能力和認知水平，是檢驗學員能夠順利進入職業教育在線學習過程，并最終達成教學大綱既定的學習目標的基礎，對學員知識習得成果的判定，必須以初始認知能力為基本參照。廣域網的各類學習系統是面向廣大官兵的，其有教無類的特點，決定了學員的認知水平千差萬別，如沒有針對學習個體的指向性強的導航，個性化學習就是一句空話。所以，確定初始能力，才能準確判定學員的知識基礎，對其知識習得的軌跡做一個規劃，為導航系統的設計提供主要依據。

二是明確認知風格和學習偏好。認知風格和學習偏好涉及學員的學習動機和價值觀，是學習評價中最重要的指標之一。認知風格表現為鮮明的個性心理特征，與學習偏好是具有因果聯系的一對要素，在某種程度上，認知風格決定著學習偏好，而學習偏好則能夠客觀反映認知風格的類型。職業教育在線學習系統設計中，可以在后臺設計系列認知風格心理模型，在前臺以多種媒體優化組合的方式，通過問答、闖關等形式進行測試，得到大致的認知風格類型，并將其結果與認知水平相匹配，共同為個性化學習導航提供設計的科學依據，也為教員在教學過程中的人工干預提供參考。

三是引領和指引個性化學習。診斷評價的結果為導航提供依據，這僅僅是導航策略的一個組成部分。在職業教育在線學習進程中，導航還要結合形成性評價而不斷修正，才能更好地引導和指引個性化學習。如《美學基礎》職業教育在線學習實驗中，職業教育在線學習評價系統將導航結果與形成性及時評價適時結合，設計了學員成績的自動升降級機制，將學習成績、態度、動機和價值觀相結合，綜合評價學員學習行為，適時修正導航路徑，將成績評價與激勵評價很好地融合在一起，使導航成為引領和指引個性化學習可靠效能工具。

（三）協作互評策略

協作互評是職業教育在線學習的一種重要的評價策略，也是一種重要的評價組織形式。與協作學習一樣，互評實際上經常滲透于協作行為之中，是協作行為及其結果的重要構成。在依托系統進行的協作互評中，按照指標設置互評功能模塊，使之與協作機制相配合，能夠激勵學習熱情，加強互動體驗，對提升學習績效有著確切的效果?；ピu策略的基本內涵如下：

一是評價知識運用過程。知識習得的目的是為了運用，知識運用的外顯性表現有很多種，其中協作行為是重要途徑。協作行為包括集體交流發言、發帖表述意見、提示資源運用路徑、舉例解釋原理概念等等。教員作為引導者參與互評，可以提示評價標準，網絡教學把握互評進程，并及時總結歸納互評效果；學員通過互評，能夠達到互相啟發、互相激勵、互相支持的效果，從而推進對知識的理解和實踐性應用。

二是檢驗技能獲得水平。在現有職業教育在線學習平臺中，動作技能的呈現和獲得受媒體表現力的局限。隨著網絡多媒體技術的迅猛發展，特別是虛擬技術在網絡課程中的廣泛運用，動作技能的呈現獲得了更多的形式。如總部統籌設計建設的百門虛擬實驗室，就初步實現了動作技能的虛擬化；各軍兵種的模擬仿真訓練科目，也逐漸被搬上網絡課堂，使得動作技能的學習有了更加廣闊的空間。因此，通過互評方式檢驗技能生成，將是未來職業教育在線學習評價的重要形式。

三是考察方法運用能力。方法運用究其本質是思維能力，也是職業教育在線學習評價中難以考察的難點。通過互評方式考察方法運用，是評價學員綜合能力的重要途徑。雖然方法運用體現在整個學習過程中，如問答、解題、發帖或者創作，但與知識習得、技能生成不同的是，方法運用效果經常表現為問題解決的過程或結果中，因此，設計方法運用能力的評價模式，也是評價系統設計的一個難點?，F行職業教育在線學習平臺中，典型方法運是指揮訓練教學中的評價。運用一體化作戰指揮訓練平臺，對合成指揮員進行作戰決策思維的檢驗評測，通過互評環節，教員和學員可以借助于系統，對作戰預案進行評價和修正，或者通過改變作戰想定的某些條件，干預作戰訓練進程中的某些要素，來進行決策思維訓練，并在互相評價中得到驗證，達到思維水平提升的目的。

（四）產品驗證策略

從技術學習的角度看，學習活動是綜合運用智能技術和物質技術，整合技術、資源、環境等因素，最后形成學習產品的過程。因此，產品是學習績效的最后驗證。通過產品評價職業教育在線學習效果，也是職業教育在線學習評價的重要構成。

一是通過產品設計評價知識應用。學習產品設計是指運用教學設計原理，結合職業教育在線學習特點，按照指定要求對指定任務進行籌劃、設計，并最終形成學習產品設計藍圖或創作思路的過程。沒有對知識的融會貫通的理解，知識運用就不可能進入產品創造過程。如網絡課程《軍事電視編導》測試“場面調度”知識點，首先提供了某單位國慶升旗視頻場景，要求設計一個場面調度規劃。學員要對攝像機角度、畫框運動、主體運動、陪體運動、景深變化等多種視覺要素綜合把握，并在頭腦中形成完整的連續運動畫面雛形，涉及到所學的視覺元素、畫面運動、導演工作等多方面知識的靈活運用，才能提出一個切實可行、技術與藝術都符合要求的場面調度方案。

二是通過產品技術評價技能把握。學習產品的支撐技術包含兩類：一類是智能設計技術，另一類是物質技術。所有職業教育在線學習產品都離不開這兩類技術的支持。因此，通過產品運用技術的水平和層次，可以檢驗技能掌握的程度、水平和效果。對設計技術而言，產品方案的可行性分析、結構體系、邏輯層次、效果預測都是衡量的重要指標；對物質技術運用而言，產品創造中應用哪些技術、怎樣應用技術、技術應用是否合理熟練、技術應用方法是否得當等等都是評測的重要指標。

三是通過產品效果評價實踐能力。產品作為職業教育在線學習的直接結果，其效果和效益是決定產品優劣的關鍵。通過產品效果評測，不僅能夠檢驗學員理論認知、技術運用、方法把握等關鍵知識點，還能夠評價其理論結合實際的能力、學以致用的視角和講求實效的學習態度。因此，學習產品雖然一般作為學習的結果而不會直接用于實踐，但對其實踐效果的檢驗更能夠佐證職業教育在線學習的效益，增加職業教育在線學習評價的維度和視角。

二、軍隊職業教育在線學習評價方法

職業教育在線學習的評價方法種類繁多，但因其視角的不同，而呈現不同的結果。下面我們將在軍隊職業教育在線學習背景下，對常用的兩大類評價方法進行分析，找出其在軍隊職業教育在線學習中方法運用的規律和特點。

（一）定性評價法

定性評價是指對評價資料進行質的分析，一般采取分析與綜合、比較與分類、歸納與演繹等邏輯分析的方法，對評價對象進行思維加工。定性評價的優勢是依據現代人本思想和發展性評價原則，對評價對象進行觀察分析、歸納和描述，能夠揭示評價對象的個體獨特性；缺點是評價結果相對籠統和模糊，帶有評價主體意圖和主觀指向性，難以精準把握。

1.基于過程的定性評價

職業教育在線學習過程中，學習效果往往隱含于各類學習行為中，如答疑、研討、發帖、咨詢等等。這些帶有鮮明的個性化特征的網絡行為，僅僅靠量的統計分析不能確定學員知識技能的掌握程度，情感態度和價值觀更不能依靠數據統計而獲得。因此，需要采取系統評價和人工裁決相結合的方法，依靠評價專家的經驗和評價指標的具體化，來評價各種學習行為的效果。

具體到職業教育在線學習形成性評價中，定性評價方法表現為以下三個方面：

一是定性評價知識理解的創造性表達。職業教育在線學習中軍校學員對知識理解有多種表達方式，其中，創造性的表達方式是檢驗其對知識消化理解的關鍵所在。而創造性的表達一般常見于發帖、聊天、研討等眾多活動中。因此，依靠數量統計的方法無法準確評價檢驗其學習成果，必須依靠教員或測評專家，按照評價指標進行針對性評價，才會達成評價效果。

二是定性評價協作技能及其方式。協作技能涉及知識的綜合運用、方法的揚棄吸收和對知識運用的綜合判斷，是職業教育在線學習中檢驗軍校學員能力生成的重要指標。協作技能也不能依靠數量統計來檢測，也需要采用專家評判的方法，按照評價標準，對協作技能的內涵、方式、效果進行梳理分析，得出成績。

三是定性評價思維遷移與發展。思維遷移與發展是知識學習的高級階段，其表現方式也不像概念習得和技能運用那樣簡單，而是復雜多樣且帶有明顯的個性特征。因此，評價思維發展，不僅僅要依靠評價指標，還要因時制宜，組成相關評價專家對評價屬性進行研究，對評價指標進行修正，使人工裁決具有扎實的現實基礎。如基于戰術想定網絡課程的網上研討中，對于給定的條件，學員會得出思路不同、方法各異的作戰方案，數量統計完全不能進行評價，而采取人工裁決的方式，依據評價指標，對學員研討中戰術知識運用的內涵方法、準確程度進行評點，并給出成績，才會得出相對精準的結論。

2.基于產品的定性評價

傳統意義的總結性評價一般只重視考試結果，而忽視產品生成對學習的促進作用，實際上是一個很大的誤區。學習產品作為檢驗學員知識技能思維的載體，從設計理念到技術運用，都貫穿著其對知識的理解、方法的掌握、技能的使用和思維的發展。

一是定性評價產品設計理念及其知識運用。學習產品的設計不僅是知識理解的體現，也是方法和技術使用的具體化。教育技術領域的學習產品，一般都具有應用理念和技術理念相交織的雙重特征。如對三維動畫的學習產品的設計，可能是一個靜物、一支槍、一輛坦克，越是復雜的產品其設計理念就越趨于復雜化。這樣的學習產品的設計，既需要學員將對三維動畫建模及技術的理解，也需要對其的深入認識。對其評價也要依靠專家進行研究分析，按照技術和藝術相結合，理念和實用相結合的標準，針對性裁決評價。

二是定性評價產品技術應用合理性。技術應用于學習產品。首先要進行科學性、合理性的價值判斷。技術運用熟練，不等于技術運用合理。合理運用技術是指能夠按照設計目標，以可用性為指向，以藝術性為依托，以技術的熟練準確使用為原則，以產品績效為目的。對技術引用的評判，要結合具體的技能生成評價指標，由人工裁決完成。

三是定性評價產品可用性及其績效。產品可用性是學習成品最后的檢測標準。滿足需求是產品績效的唯一標識。確定一個學習產品是否滿足某種需求，需要對其進行必要性、可行性分析，還要對其進行設計理念合理性、技術運用效應性進行綜合評判，單純的量化統計無法達成評價目標，必須要靠對其進行定性分析，人工干預完成。

（二）定量評價法

定量評價是采取數學的方法，如教育測量與統計方法、模糊數學方法等，用量化統計取得數值，對評價對象進行測評和判斷的方法。定量評價強調評價對象的規律性、一致性、共同性等共性特征，其精確性、科學性和穩定性方面，要高于定性評價。將定性與定量評價相結合，把系統評價與人工裁決相融合，是軍隊職業教育在線學習評價的發展走向。

1.基于過程的定量評價

基于過程的數據量化，是職業教育在線學習系統評價的主要途徑。隨著大數據技術的不斷發展，數據統計分析技術已經達到了相當高的智能化程度，對職業教育在線學習行為數據的統計分析、對比量化，已完全可以支持所有定量評價指標。下面舉三個典型的定量指標例子來對職業教育在線學習定量評價做分析。

一是評價態度動機的定量指標。態度動機體現軍校學員的學習價值觀和行為觀，它們一般是隱含在職業教育在線學習行為中，不易被統計分析的指標，卻又是非常重要、作為評價重要維度之一的指標。雖然通過定量評價，可以間或發現情感動機的線索，但要做精確的統計分析，還是有很多的不確定因素。所以，運用系統設置的數據統計功能，可以從學員的上網時間、上網頻度、上網頻次、對同一內容的點擊頻率、對熱點問題的關注率等數據統計，來分析其學習動機的指向性、學習態度的積極性、學習價值觀的關注度以及學習行為觀的閾值，來達到分析評價其態度動機的目的。當然，僅僅做數據統計是不夠的，還要比對評價標準，在系統后臺建立與態度動機指標相關的評價模型，作為分析數據的基礎，就可以實現計算機系統對情感動機的量化評價了。

二是評價認知行為頻率的定量指標。認知行為頻率指的是與知識技能習得相關的行為發生頻率，如學員打開網絡課程、登錄課程界面、進入網絡教室、觀看教學錄像、提問或作業、進行交流研討等學習行為，對這些行為的數據統計，可以分析出學員行為與其知識技能掌握結果的因果聯系。在絕大多數情況下，行為頻率與學習效果呈正向分布，也就是行為頻率越高，其學習結果越好，反之亦然。但也有不同或者相反的結果產生。比如一個具有較好知識基礎的學員，對某一門網絡課程又相對熟悉，那么對他在同一門網絡課程的學習行為頻率統計分析，就很有可能與其學習成績呈反向分布，也就是其學習行為越少，說明其原有相關知識越扎實，其成績反而越好。因此，這一定量指標的測評，必須與定性評價結合起來才會有實際意義。

三是評價交互技能頻次的定量指標。一般而言，職業教育在線學習交互作為一種技能，是逐漸訓練的結果，即訓練次數越多，其交互的技能越純熟，反之亦然。基于這一基本共識，職業教育在線學習系統評價都會設置交互頻次數據統計，用來分析某位學員在交互研討中的行為頻度和頻次，作為其交互技能掌握乃至學習方法掌握的評價依據。隨著網絡通訊技術的不斷發展，交互工具層出不窮，對交互工具的認知也是技能生成的一部分。因此，交互頻度的數據統計分析，不僅具有評價知識技能掌握的意義，也有評價方法獲得的意義。

2.基于產品的定量評價

對學習產品的定性評價初步決定了產品創造者的學習績效，但是，要實現對學習產品評價的精確化，就離不開對學習產品相關的數據進行量化，為定性評價提供佐證和支撐。

一是產品被關注的頻度數量。學習產品作為學員直接的學習結果放到網上，一定會受到某種程度的關注。其關注熱度與產品的創造力、可用性、被需求性相關。特別是在廣域網開放的職業教育在線學習環境中，這種關注度能夠證明學習產品的意義和效果。因此，量化統計學習產品被關注的頻度，是對學習產品進行精準全面評價的重要參照。

二是產品被評價的頻度數量。評價的頻度與關注的頻度相比，更加能夠說明學習產品的效用性和需求性。因為評價是對學習產品的價值、意義、創造性等指標進行定性評價，而且這些評價是在不同標準、不同條件、不同背景下提出的，因此就更能說明問題。評價的頻度數量與關注頻度數量相結合進行分析，能夠更好地依據評價標準，結合定性評價分析，對評價對象學習績效做出科學評價結論。

參考資料

[1]楊紅穎.網絡教學評價系統的設計與實現[J].現代遠距離教育，2007（5）.

[2]彭文輝.網絡學習行為分析及建模[D].武漢：華中師范大學，2012.

[3]丁麗.網絡環境下成人合作學習策略研究[D].成都：四川師范大學，2014.

[4]林真真.基于個性化學習的網絡教學平臺研究[D].石家莊：河北師范大學，2015.

[5]趙楊.關聯規則技術在網絡學習評價中的應用研究[D].桂林：廣西師范大學，2014.

[6]張依歡.關聯規則算法在教學評價中的應用研究[D].長春：吉林大學，2016.