基于綜合評判的模擬訓練管理效能評估研究

孫青虎

(北京理工大學 管理與經濟學院, 北京 100081)

基于綜合評判的模擬訓練管理效能評估研究

孫青虎

(北京理工大學 管理與經濟學院, 北京 100081)

隨著模擬訓練成為信息化軍事訓練的主要形態,基于信息技術的模擬訓練管理效能正逐漸成為制約部隊模擬訓練的主要因素之一。通過對模擬訓練管理效能現狀與問題的分析,建立了效能評估指標體系,建構了效能評估評判模型,提出了運用綜合評判方法解決模擬訓練管理效能評估的問題的一種方法。

模擬訓練； 管理效能評估； 信息技術

1 模擬訓練現狀與評估需求分析

1.1 現狀與問題

當前我軍初步建立了涵蓋各軍(兵)種專業、層次銜接、體系較為完整的模擬訓練管理體系,模擬訓練與基地訓練、網絡訓練已經成為信息化軍事訓練的重要常態模式之一。與蓬勃發展的模擬訓練需求相比,模擬訓練管理及效能評估有些滯后,目前模擬訓練管理效能評估主要采用經驗法、比較法和概略評判法,缺乏科學的、定量的、精確的評估[1-3]。存在的問題主要表現在以下幾個方面[4-7]:

一是模擬訓練管理效能評估理論滯后。模擬訓練管理效能評估是信息化軍事訓練催生的新生事物,還沒有建立起比較成熟的模擬訓練效能評估理論體系,目前僅有的研究深度不夠、視野不寬,運用的技術方法與模擬訓練管理的實踐契合度不高。

二是模擬訓練管理效能評估手段落后。目前,模擬訓練中心基本使用傳統的效能評估手段,沒有相應的信息系統提供保證,主要依靠管理人員的經驗對模擬訓練管理效能進行定性評判,往往造成評估結果失真、數據失準,評估的效度、信度和大眾認可度不高。

三是模擬訓練管理效能評估標準缺乏。截至目前,全軍性的模擬訓練管理效能評估指標體系還沒有建立,導致各單位評估沒有統一的標準,評估點的選擇不一,以至于在實踐中往往容易造成參評單位對評估結果質疑。

1.2 需求分析

模擬訓練保障管理效能評估對象是模擬訓練保障管理活動,主要包括模擬訓練保障管理中涉及的資源,如人、財、物、技術和信息的管理能力和水平,模擬訓練保障管理過程中的指揮、控制、處理和反饋等作用的實際效果,以及對模擬訓練保障管理的績效評價等。模擬訓練管理評估包括“效”與“能”2個方面:“效”是指模擬訓練保障管理的效果,主要包括模擬訓練保障管理過程中的目標實現程度、資源投入產生的效益、經費使用的情況等；“能”是指模擬訓練保障管理所生成或者達到的能力,主要包括模擬訓練保障所能夠承擔的科目、提供的資源、可保障的施訓規模以及通過模擬訓練所達到的作戰能力等。模擬訓練保障管理效能評估是對模擬訓練保障管理進行的綜合性、評價性考核,是衡量模擬訓練保障質量效益的依據,是改進模擬訓練保障管理的基礎。

模擬訓練保障管理評估的最終效果由模擬訓練保障對軍事訓練的效果決定,只有模擬訓練保障管理產生正能量、促進軍事訓練水平提升,才能達到管理的真正意義。模擬訓練保障管理效能評估指標體系、各類評估對象以及關鍵評估點的選取,應當堅持信息主導、技術推動,以建設推動軍事訓練轉變的模擬訓練系統、解決軍事斗爭準備現實問題、提高訓練質量效益和確保訓練安全為評估重點,以便有針對性地改進模擬訓練保障管理方法,優化保障資源配置和管理決策過程、促進模擬訓練保障管理的科學發展。信息化條件下模擬訓練保障管理效能評估的意義主要有3個方面:

一是以評“析”管。評估對管理具有診斷作用,評估過程是嚴格的程序分析過程,是從評估內容的確定、指標體系的建立、被評估問題的定性與定量計算,到多種方案比較和優化的過程。這些過程可以發現模擬訓練保障管理中不易發現的潛力或存在的問題,從而有利于采取有效的措施,揚長避短、防患于未然。

二是以評“導”管。評估對于模擬訓練保障具有導向、牽引作用。模擬訓練保障評估指標體系的每一個指標,都是模擬訓練保障管理總目標的具體體現,可能因為某項指標的確立,使模擬訓練系統的建設走上良性發展的道路,也可能由于某項指標的缺失,使模擬訓練系統成為短期產品、曇花一現。

三是以評“促”管。通過對模擬訓練保障管理績效評估,可以科學、客觀、全面地反映軍事模擬訓練保障水平及其對國防建設的外溢績效,對比不同方案的優劣得失,從而為管理決策提供重要的現實依據和理論支持,提高決策工作的科學性及合理性,促進有限模擬訓練保障資源的最優化配置。

2 效能評估指標體系設計

設計評估指標時,既要考慮滿足當前軍事斗爭準備現實需求的近期效益,還要考慮影響未來長遠發展的潛在效益；既要考慮與軍事需求的契合性和由此帶來的軍事效益,同時還要考慮通過融合式發展而催生的外溢社會效益；既要考慮對科研成果技術水平的推動效益,還要考慮對軍地人才培養的引導效益。因此,信息化條件下模擬訓練保障管理效能評估的指標體系可以分為相互聯系又互為不同的4部分:軍事效益、社會效益、技術水平和管理效率。

2.1 軍事效益指標

信息化條件下模擬訓練保障管理軍事效益可以分為近期軍事效益和長遠軍事效益。近期軍事效益主要由軍事模擬訓練的有用性、完整性、逼真性和易操作性來決定；長遠效益體現在軍事模擬訓練的擴展性、人才培養以及軍事影響力方面。其中模擬訓練的有用性以配發的模擬訓練器材(系統)對戰斗力的影響程度以及是否滿足承訓任務量為主要指標進行評判；模擬訓練完整度可以通過模擬訓練內容和訓練評價的完整性來評判；模擬訓練逼真度可以通過對模擬訓練系統的模型數據真實度、戰場環境仿真度、操作使用仿真度和考核分析客觀性來評判；模擬訓練的易操作可通過系統界面友好性、運行流暢性以及使用培訓、安裝部署、維護保養的方便性來判斷；模擬訓練擴展性主要由所建模擬訓練系統的功能擴展性和規模的擴展性來決定；人才培養主要體現在對管理人員、專家隊伍、開發人員、保障人員的培養和鍛煉,其指標量由人才培養的數量和質量來決定；模擬訓練的外溢影響力主要以訓練演習產生的對外軍事威懾力大小為指標進行評判。

2.2 經濟和社會效益指標

軍事模擬訓練保障管理在地方經濟、社會等非軍事領域中產生的效益,可分為近期效益和長遠效益。近期效益主要包括經濟效益和社會效益2方面：其中經濟效益由模擬訓練系統建設投入到地方的資金規模和利用率以及對相關產業發展的促進作用所決定；社會效益主要體現在促進地方從業人員就業方面。長期效益也包括經濟效益和社會效益2個方面：經濟效益主要體現在模擬訓練保障管理對產業的規模化、專業化發展以及相關的軟、硬件基礎產業發展的促進作用；社會效益主要包括對地方人才隊伍的建設以及由訓練演習產生的國防宣傳影響力來決定。

2.3 技術水平指標

該項指標旨在考核模擬訓練系統建設的技術水平高低和自主創新程度,主要包括技術先進性、創新性和標準化、規范化程度以及國產化和合作化程度等。技術的先進性、創新性主要是模擬訓練系統在建模、網絡通信、戰場環境仿真、人機交互、人工、開發工具及框架等關鍵技術方面的性能量化指標；標準化、規范化程度則是實現模擬訓練系統互聯、互通、互操作的關鍵指標；國產化主要體現在仿真應用程序、操作系統等軟件方面的國產化程度以及模擬仿真平臺、計算機平臺等硬件方面的國產化程度,是反映我國模擬仿真領域自主創新能力的重要標志。合作化體現在軍內和軍地的合作建設程度,合作開發是未來軍事工程建設的重要途徑,有利于促進模擬訓練系統走專業化、集約化、規模化的發展道路。

2.4 管理效率指標

該項指標從模擬訓練保障管理的效率角度出發,主要為了考查模擬訓練保障管理的規范性、經費使用情況、項目建設的時效性3個方面。模擬訓練保障管理的規范性評估主要體現在是否能落實有關管理規定,嚴格按照項目論證、研制、鑒定、配發,組織人員培訓、維護保養和提供技術支持的規程,嚴密組織工作、科學安排任務；經費的使用情況評估主要考察模擬訓練系統的研制經費、生產經費、維護保養經費相對于同類系統的使用情況；模擬訓練保障管理的時效性評估主要體現在要考察項目的建設周期。對于一般項目來說,從研制到配發部隊并形成戰斗力的周期不能太長,同時由于一些項目存在不確定性和風險性,還要考察項目進度是否可控。

3 效能評估評判模型構建

對信息化條軍事模擬訓練保障管理績效能估模型建立步驟如下:

第一,確定評判對象的因素論域U=(u1,u2,…,un),U表示評判因素的集合。

第二,確定評價指標的權重。本文采用相鄰指標比較法,確定評價指標的權重向量。通常在進行成對比較時,人們頭腦中通常有5種明顯等級,用1—9尺度可以方便地表示[8],見表1。

表1 尺度aij的含義

以二級評價指標“近期軍事效益”為例,根據簡易表格進行指標權重的比較,對應的量化值如表2所示。

表2 “近期軍事效益”指標權重比較表

由表2可得到判斷矩陣。由于計算矩陣的特征根和特征向量相當困難,且通過定性比較得到的概略結果用精確計算沒有必要,所以可以用簡便近似方法計算,本文采用“和法”。

列向量歸一化得到:

按行求和得到:WK12

歸一化得到:

由此得到該項的權重指標W=(0.58,0.21,0.14,0.07),同理可求出其他指標的權重向量,見表3。

第三,確定評語等級論域。V(v1,v2,…,vn)為各評語組成的集合。本文選取優、良、中、差4個等級,其等級量化值分別為1、0.8、0.6、0.3。用德爾菲法,由n位專家給出模糊矩陣R。

式中rij為U中第i個因素對應V中等級Vj的隸屬關系,與等級量化值合成后,U的專家評判結果R′為:

R′=R·V-1

第四,進行單因素評定結果加權評判。A(α1,α2,…,αn)是各因素對被評對象的隸屬關系。因此單因素加權量化值為:

第五,對評價主體進行加權綜合評判。求出單因素評判結果后,再根據單因素的權重系數W,得出最終評價主體的量化值。

B=W·[B1,B2,…,Bi]-1

第六,評判結果的分析處理。

表3 軍事模擬訓練保障管理績效評估指標的權重

4 綜合評估方法應用案例

以“陸軍部隊模擬訓練中心”建設方案評估為例,具體探討效能評估方法的應用。

4.1 陸軍模擬訓練中心建設背景

陸軍部隊模擬訓練中心總體的建設目標是:以陸軍兵種(專業)模擬訓練為重點,以裝甲兵、機械化步兵、炮兵、防空兵、工程兵、電子對抗兵、陸軍航空兵等若干個部隊(或院校)模擬訓練中心為基礎,建成覆蓋陸軍各主要兵種與主戰裝備、體現陸軍特色、信息化水平較高的陸軍部隊模擬訓練中心體系,具備組織和保障主要陸軍裝備操作技能訓練、單車(單平臺)協同訓練和分隊戰術(多平臺協同)訓練的能力,并能夠與大型合同戰術訓練基地、部隊軍官訓練中心、院校作戰實驗室有機銜接和功能互補,共同保障模擬訓練在陸軍部隊、院校廣泛深入開展。

實現該目標總體上采取試點先行、分步建設的方法。但由于模擬訓練中心體系的建設涉及單位多、訓練內容復雜、系統互聯、互操作性要求高,因此增大了建設難度,也出現不同的方案構想,孰優孰劣需要管理者進行科學的論證。

方案一:統一建設方案構想。即“統一領導、統一標準協議、統一平臺、資源共享、合作開發建設”。該方案是由軍委機關(原總部機關)負責全軍模擬訓練中心的頂層設計,制定建設總體方案、管理辦法和技術標準；統一組織全軍公用的訓練信息系統以及陸軍訓練裝備器材和信息系統的研制配發；各模擬訓練中心發揮各自特色,利用全軍各種公共資源實現優勢互補；按照統一的數據標準、模型標準、接口標準,遵循公共平臺信息交互協議,實現模擬訓練中心內部和中心之間的互聯、互通、互操作,構成協同訓練綜合環境。這一方案的主要優點是能夠充分利用全軍的優勢資源,減少重復建設,模擬訓練系統的互聯、互通、互操作性好。但由于采取統一建設方法,不僅建設難度較大、需要對開發人員進行專業化培訓,而且建設周期較長,特別是改造原有模擬器材的工作量巨大。

方案二:分散各自建設方案構想。即“統一領導、統一標準協議的前提下,發揮陸軍各兵種特色優勢,立足自身應用、依靠各單位自身實力開發建設”。該方案也是在軍委機關(原總部機關)的統一組織領導下,各模擬訓練中心按照項目建設要求,遵循全軍統一的標準和協議,立足自身實力和獲取的各種資源,不拘泥使用特定的平臺和開發工具,充分發揮自身優勢構建系統,以標準的接口和協議支持與其他系統間的連通。這一方案的主要優點是可以較為迅速地完成模擬訓練系統的建設或改造升級,開發人員的培訓量較少。但由于采取分散建設方法,不僅不能充分利用公共資源和提供自身資源，實現資源的集中高效利用,而且模擬訓練系統的互聯、互通、互操作性較差,影響模擬訓練的擴展性。

4.2 陸軍模擬訓練中心建設的績效評估

由于陸軍模擬訓練中心的建設是模擬訓練保障管理工作的一項重要內容,其績效評估指標體系參照軍事模擬訓練保障管理績效評估的指標體系,為減少計算量,本論文直接把二級指標作為評價的單因素指標,選取10位專家對模擬訓練中心建設的2個方案的基本內容和預期效果進行評判。

例如:對方案一的“近期軍事效益”的專家評價結果如表4所示。

表4 “近期軍事效益”專家評價表

根據前面評語等級量化值,該指標的專家評判結果為:

同理可求出其他指標的評判結果,見表5。

而后,根據“近期軍事效益”各項的評判結果和隸屬度,得出方案一“最終近期軍事效益”評判值為:

最終各項計算結果如下。

4.2.1 方案一:近期軍事效益為

[0.86,0.78,0.76,0.84]-1=0.82

長期軍事效益為

[0.93,0.86,0.94]-1=0.90

表5 全軍模擬訓練中心建設績效評估的指標權重及評判值

近期地方效益為

長期地方效益為

技術水平為

[0.93,0.91,0.94,0.82,0.95]-1=0.92

管理效率為

[0.92,0.840.72]-1=0.81

4.2.2 方案二

近期軍事效益為

[0.88,0.84,0.82,0.83]-1=0.86

長期軍事效益為:

[0.75,0.76,0.80]-1=0.76

近期地方效益為

長期地方效益為

技術水平為

[0.90,0.87,0.82,0.70,0.85]-1=0.83

管理效率為

[0.85,0.860.84]-1=0.85

方案一的最終綜合績效為

B=A·R′=[0.3,0.16,0.06,0.11,0.25,0.12]·

[0.82,0.90,0.65,0.87,0.92,0.81]-1=0.85

方案二的最終綜合績效為

B=A·R′=[0.3,0.16,0.06,0.11,0.25,0.12]·

[0.86,0.76,0.65,0.69,0.83,0.85]-1=0.80

4.3 陸軍模擬訓練中心建設效能評估結果分析處理

通過對2個方案評估結果的分析比較,可以看出方案一(集中統一建設方案)總體上要優于方案二(分散各自建設方案),但優勢并不十分明顯。具體來說:在“近期軍事效益”“管理效率”方面,方案一要劣于方案二,原因在于統一建設相對分散建設難度較大,系統建設周期相對較長,進度可控性相對較差,不利于快速形成戰斗力。但在“長期軍事效益”“長期地方效益”以及“技術水平”方面,方案一有明顯優勢,特別是在標準化、規范化建設,以及促進產業規模化、專業化發展和人才培養方面有明顯優勢。根據上述評判結果,方案一更加符合未來模擬訓練系統建設和發展的趨勢。當然,在個別不利情況下,方案二是對方案一的較好補充,對快速生成戰斗力、節約經費和時間有一定幫助。

根據上述分析,可以得出結論:陸軍模擬訓練中心建設應采取“以統為主,統分結合”的建設模式,這樣既能夠保證全軍部隊模擬訓練中心體系的完整,又能夠實現陸軍模擬訓練中心建設在上級統一領導下的特色發展,取得最大建設效益。

References)

[1] 張波,劉非平,榮昶.合同戰術實兵演習訓練模擬系統研究[M].北京:海潮出版社,2014.

[2] 李江濤,劉非平,榮昶.基于模擬的作戰實驗管理框架[M].北京:海潮出版社,2014.

[3] 劉麗巧,劉非平,榮昶.作戰系統數學形態研究[M].北京:海潮出版社,2014.

[4] 杜立平.信息化條件下軍事訓練保障研究[M].北京:軍事科學出版社,2011.

[5] 姬世峰,李文清.模擬訓練基本問題研究[M].北京:海潮出版社,2014.

[6] 杜立平.軍事訓練保障學[M].北京:軍事科學出版社,2014.

[7] 榮昶,楊斌,王振東.軍隊院校教學保障[M] . 北京:解放軍出版社,2013.

[8] 姜啟源,謝金星,葉俊.數學模型[M].3版.北京:高等教育出版社,2003.

Research on management effectiveness evaluation of simulation training based on comprehensive assessment method

Sun Qinghu

(School of Management and Economics,Beijing Institute of Technology, Beijing 100081,China)

With the simulation training as the main form of information military training, the simulation training management effectiveness based on information technology is gradually becoming one of the main factors that restrict the military simulation training. By analyzing present situation and problem of management effectiveness evaluation of simulation training, an effectiveness evaluation index system is constructed, an effectiveness evaluation model is built, and a method of applying comprehensive evaluation to solve the problem of management effectiveness evaluation of simulation training is also presented in this paper.

simulation training; management effectiveness evaluation; information technology

10.16791/j.cnki.sjg.2016.12.053

2016-06-15

孫青虎(1972—),男,山東平度,博士研究生,主要研究方向為模擬仿真技術與管理.

E-mail：sunqinghu@126.com

G423.04

: A

: 1002-4956(2016)12-0208-06