關于軟科學成果評價體系的應用研究

[摘要]本評價體系設計是分別研究專家評價系統（定性與定量結合）和定量評價系統，基于兩個系統構建成果應用績效評價體系。并且采用開放式設計，隨著評價次數的增加和實踐經驗的積累，在進一步的軟科學成果應用績效評價中，可以再根據越來越豐富的樣本數據，不斷積累的評價經驗，來動態的調整和修改評價體系。

[關鍵詞]軟科學；評價體系；灰色模型

本文以系統理論為指導，綜合軟科學多學科理論和方法，不過分強調方法的復雜性，而重視成果應用績效指標的全面、系統、可測性和數據的可獲性以及評價方法應用上的可操作性。探討定性與定量相結合的多層次、多角度整合的，適合并能應用于地方軟科學項目管理的，軟科學成果應用績效評價體系的設計與構建。由于軟科學成果應用績效評價體系的構建與應用還處于探索階段，體系結構和各指標之間的內在聯系和規律以及指標的量化問題還存在很大的探索空間，不能沒有專家的評判完全采用定量評價。由此，

1、應用績效評價體系的作用分析

目前，國內軟科學成果績效評價研究的指標體系設計，基本上都是由定性指標構成，即使一些量化指標的設計也很少全面量化，多以“相當大、有較大、有、沒有”等類似的籠統的指標逐一賦分作為專家評分的量化標準，顯然以此量化評價難以避免專家帶有的個人偏差。定量評價以客觀定量數據為依據，并以科學的計算方法來進行評價，有較好的科學性和可靠性，但在比較復雜的情況下，存在有些評價目標很難用確切的數量表示和評價方法很難準確的問題等。而定性評價的缺點是評價中的隨機因素影響較多。因此，急需定性與定量相結合的軟科學成果應用績效評價體系的設計與研究。近期，山東省軟科學辦公室適應改革發展的需要，在國內率先推出軟科學項目網上結項管理改革，并對結項等次優秀的成果通過應用績效等評價擇優評出一定數量的項目，給予后補助資金獎勵或延伸立項支持。科學、可操作的評價體系成為現實需要。軟科學研究成果應用績效評價是軟科學研究項目管理中的一個重要環節，也是為強化管理工作改革提供的配套手段。設計研究成果應用績效評價體系，客觀、合理地評價軟科學研究成果績效，對于推進科研管理創新，調動廣大軟科學研究人員的積極性和創造性，促進軟科學研究成果的應用乃至軟科學事業的發展都具有重要的現實意義。

2、應用績效評價方法的選擇

軟科學成果應用績效評價要求的不是設計出指標、權重和對應的分值給每一個成果應用績效情況累加積分，而是要對特定應用領域有特定要求導向的綜合應用績效評價并排序，有著明確的應用目標要求，重要的是評價方法得能操作。基于這一點，在評價方法研究上要綜合多學科理論和方法，探討定性與定量相結合的多層次、多角度整合的評價方法，計算不應過分強調方法的復雜性，應重視應用上的可操作性。由此，對于第一層次的整合，采用“標桿法”，即以各截面目標要求確定標桿，并以各截面的最高水平的成果為標桿，按照實際績效指標與標桿之間的比例定值。各第二、第三級指標采用定性與定量相結合的方法，確定科學的目標和權重，最終整合定量評價和專家評價兩個系統結果排序，實現擇優選項的評價目的。

3、績效評價指標體系的設計

成果應用績效評價指標體系的設計，要研究軟科學的學科體系結構和特點，分析軟科學學科分布，探討軟科學成果應用所涉及到的領域，以及成果應用的目標要求和趨向，為指標體系研究設計奠定理論基礎；在軟科學成果應用領域研究和軟科學應用績效相關因素分析的基礎上，依據管理部門的目標要求、政策導向，結合成果應用方應用需求調查及專家咨詢，確定指標體系層次結構，選擇評價指標，研究指標目標和權重，構建評價指標體系。

3.1指標體系層次結構的設計

依據管理部門目標要求、政策導向，結合成果應用方應用需求調查及專家咨詢，在軟科學成果應用領域研究和軟科學應用績效相關因素分析和成果應用所涉及的各個層面、各種類型及方式分析的基礎上，設計評價指標體系層次結構。選擇成果應用；成果出版、發表、引用、轉載；學術活動及人才培養、獲獎5個截面，形成指標體系的第一層次，各層次下設二級、三級指標形成第二、第三個層次。各層次間的關系形成指標體系的體系結構。指標的選擇以成果應用價值、應用潛力、應用水平等作為應用績效指標體系的功能單元，分別根據各功能單元所體現出的應用績效特征。

3.2指標目標的量化和權重的確定

軟科學成果應用績效指標目標的量化和指標權重確定是否合理，直接關系到軟科學成果應用績效評價結果的準確性和科學性。由于軟科學研究成果有鮮明的應用性和輔助決策、提供咨詢服務的目標，因此，在軟科學成果應用績效評價指標體系中，不同的指標的目標要求以及反映出的成果應用績效的重要程度是不一樣的，不能采用等值和等權法。通常指標體系設計中的目標量化和權重的確定采用兩種方法，即：客觀賦權法和主觀賦權法。前者采用統計分析和其他數學分析法，但存在很多限制；后者主要由專家根據自己的主觀判斷分配確定，但不同專家對不同領域、不同問題中的復雜的指標的權重分配很難達成一致意見，給目標和權重的確定帶來很大的不確定性。因此，軟科學成果應用績效評價指標體系目標和權重的確定應定量與定性相結合，有選擇地運用主、客觀賦權法，最大限度地避免兩者的局限性。為體現軟科學輔助決策、提供咨詢服務的應用性管理目標，第一層次的目標量化通過專家咨詢法結合管理目標的要求，以成果在特定領域特定方面的軟科學成果應用價值取向為依據來確定。各截面權重的確定，主要依據成果應用方應用需求調查及專家咨詢，結合管理部門的政策導向和要求確定。第二、第三層次的指標目標和權重的確定，則結合數理計算方法確定。

4、結束語

近年來，軟科學事業隨著決策科學化進程的推進得到了加速發展，有的研究注重理論與模型的研究，理論與模型研究距應用之間的研究空缺而無法操作；有的量化指標缺乏具體的指標的描述，以“好、一般、差”等賦值加權構建指標體系，以各指標得分累加定值，缺乏基本的科學性。到目前為止，沒有一項研究（除山東在試行基于本設計思路研究的評價體系外）可為地方軟科學管理部門提供可操作的評價體系手段。這樣的現實雖為成果績效評價體系設計研究提供了空間，同時也給設計研究帶來了無從借鑒的困難。創新，則面對著一系列難解問題和困難。目前本設計面對的主要問題：一是指標目標和權重的確定怎樣解決定性與定量相結合的科學的銜接問題；二是采用“標桿法”評價如果當評價成果出現極端的情況，即當最高得分的應用績效的成果在目標要求高的層面實際得分很低，達不到應有的基本要求時，也獲取該截面標桿（最高）得分將會給評價造成偏差。此問題的解決將是本設計研究采用標桿法遇到的難以回避的難解問題。

參考文獻

[1]楊海深.大數據時代軟科學情報關鍵詞提取方法[J].情報資料工作，2013.

[2]蔣昌金.基于軟科學提取的中文網頁自動文摘方法研究[D].華南理工大學，2015