山東省自然科學基金項目績效評價研究

賈辛欣，郭夢縈

(山東省科技統(tǒng)計分析研究中心 ,山東 濟南 250101)

山東省自然科學基金項目績效評價研究

賈辛欣，郭夢縈

(山東省科技統(tǒng)計分析研究中心 ,山東 濟南 250101)

為進一步加強對山東省自然科學基金的管理、優(yōu)化科技資源、提高科技投入的資金運行效率，在國內(nèi)外相關(guān)學者已有的研究基礎(chǔ)上，建立山東省自然科學基金績效的概念模型和評價指標體系，采用兩階段數(shù)據(jù)包絡(luò)分析模型對山東省自然科學基金項目進行評價。實證分析結(jié)果顯示，山東省自然科學基金項目整體績效水平較高，但不同項目類別、不同學科之間差距較大，對此應(yīng)進一步扶持弱勢學科，加大財政科技投入及對基礎(chǔ)研究領(lǐng)軍人才的引進和培養(yǎng)。

自然科學基金；兩階段數(shù)據(jù)包絡(luò)分析；績效評價

山東省自然科學基金作為省級科技計劃項目的重要組成部分，致力于推動原始性創(chuàng)新，以資助的方式管理其支持的基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究，發(fā)現(xiàn)、培養(yǎng)和引進高層次創(chuàng)新人才，培育自主知識產(chǎn)權(quán)，增加科技與人才儲備，為增強科技持續(xù)創(chuàng)新后勁發(fā)揮積極的作用。為了更好地發(fā)揮自然科學基金對科技的資助作用，我國近年也在不斷地推行和完善自然科學基金制。績效評價作為一項重要的管理手段，對自然科學基金的管理、優(yōu)化科技資源、提高科技投入的資金運行效率起到了重要的作用。因此，對于科技基金項目的績效評價方法的研究越來越得到同行的重視。

國外學者對科技計劃項目績效評價方面的研究比較成熟，除了運用同行評議法、案例分析法、訪談問卷法、文獻計量法等傳統(tǒng)評價方法外，還結(jié)合計量經(jīng)濟學、數(shù)學、運籌學等組成綜合性評價方法，從各種角度對科技計劃項目進行績效評價。Martin等[1]對基礎(chǔ)研究項目進行評價研究，提出了基礎(chǔ)研究績效評價的四個維度，即科學自身維度、技術(shù)維度、教育維度和文化維度。Garcia等[2]提出了一種新的評價方法，即采用領(lǐng)航操作(Pilot exercise)來構(gòu)建指標體系。

相比國外來說，我國對于科技計劃項目的績效評價工作起步較晚，但經(jīng)過這些年的不斷探索，在這方面也有一定的進步和發(fā)展。白坤朝等[3]通過對數(shù)學、物理領(lǐng)域國家杰出青年科學基金項目績效評估(結(jié)題審查和中期檢查)實踐的分析，研究和探討建立完善基礎(chǔ)研究項目績效評估指標和有關(guān)方法等。徐敏[4]結(jié)合浙江省自然科學基金管理的實踐，探索了多層次的績效評價指標體系。

目前國內(nèi)外大多學者只從投入和產(chǎn)出兩個維度評價研發(fā)項目的績效，忽略服務(wù)過程的重要性。因而本文重點從研究投入-過程-產(chǎn)出角度，利用數(shù)據(jù)包絡(luò)分析模型對山東省自然科學基金進行績效評價，更有科學意義，對決策應(yīng)用的價值更大。

1 指標體系及模型構(gòu)建

山東省自然科學基金是省科技計劃體系中重要一類科技計劃，以培養(yǎng)優(yōu)秀青年科技人才為主要目的，重點支持基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究。山東省自然科學基金項目績效系統(tǒng)包括投入系統(tǒng)、實施過程系統(tǒng)、產(chǎn)出系統(tǒng)。其中，投入系統(tǒng)包括人力投入、經(jīng)費投入、物力投入；產(chǎn)出系統(tǒng)包括科研成果、人才培養(yǎng)、爭取高級別項目等；實施過程系統(tǒng)包括人員活動情況、經(jīng)費使用、計劃執(zhí)行和實施形式等。省自然科學基金的投入系統(tǒng)通過實施過程影響產(chǎn)出水平，同時產(chǎn)出系統(tǒng)又反作用于實施系統(tǒng)和投入系統(tǒng)。三者之間相互聯(lián)系、相互影響、相互作用、相輔相成[5]。如一個產(chǎn)學研創(chuàng)新系統(tǒng)，高水平的創(chuàng)新產(chǎn)出，會激勵產(chǎn)學研組織的良性互動和創(chuàng)新投入，高效的產(chǎn)學研合作也會促使各組織單位增加創(chuàng)新投入。因此，科技創(chuàng)新是一個具有投入-過程-產(chǎn)出特征的動態(tài)過程系統(tǒng)[6]。

基于以上分析，建立省自然科學基金績效評價的概念模型，如圖1所示。

圖1 省自然科學基金績效系統(tǒng)的概念模型Fig.1 Conceptual model of performance system of Provincial Natural Science Foundation

1.1 指標體系構(gòu)建原則

山東省自然科學基金項目評價指標體系選取的基本原則是從山東省的具體情況出發(fā)，根據(jù)當?shù)卣芾淼默F(xiàn)狀和特點，全面真實地反映山東省的發(fā)展情況，兼顧當前與長遠的發(fā)展。因此，在構(gòu)建山東省自然科學基金項目的績效評價指標體系時，遵循重點性和系統(tǒng)性相結(jié)合、現(xiàn)實性和發(fā)展性相結(jié)合、科學實用性與針對性相結(jié)合、動態(tài)性與靜態(tài)性相結(jié)合、定量與定性相結(jié)合的原則。

1.2 指標的選擇

根據(jù)數(shù)據(jù)的可得性，我們初步選取數(shù)據(jù)完整的指標作為評價指標，在經(jīng)過數(shù)據(jù)的同樣性和相關(guān)性分析后，確立最終選取的指標。其中，投入指標包括研究人員和研究經(jīng)費；過程指標選取按時結(jié)題情況和產(chǎn)學研聯(lián)合情況兩個指標；產(chǎn)出指標選取發(fā)表論文數(shù)、培養(yǎng)人才數(shù)、項目成果和專利。其中各指標定義如下：

研究人員——指從事科學研究工作的在職在崗專業(yè)技術(shù)人員，包括研究實習員、助理研究員、副研究員、研究員以及各高等院校的科研人員和參與科研的研究生等；

研究經(jīng)費——指科學研究經(jīng)費的總和，包括政府資金、企事業(yè)單位委托和其他經(jīng)費等；

按時結(jié)題情況——主要評價各科研機構(gòu)、高等院校等機構(gòu)是否能夠按照項目申請書的要求按時按量完成相應(yīng)的任務(wù)；

產(chǎn)學研聯(lián)合情況——指企業(yè)與高等院校、企業(yè)與科研機構(gòu)、高等院校與科研機構(gòu)的合作情況；

發(fā)表論文數(shù)——主要統(tǒng)計發(fā)表的中文核心期刊論文數(shù)和三大檢索機構(gòu)SCI(科學引文索引)、EI(工程索引)、STP(科技會議錄索引)收錄論文數(shù)；

培養(yǎng)人才數(shù)——包括通過基金項目培養(yǎng)的博士研究生和碩士研究生；

項目成果和專利中項目成果——指獲省部級以上科技獎勵數(shù)和爭取到國家級科研項目數(shù)；

專利數(shù)——指發(fā)明專利授權(quán)數(shù)。

1.3 數(shù)據(jù)包絡(luò)分析(DEA)模型的構(gòu)建

數(shù)據(jù)包絡(luò)分析(data envelopment analysis, DEA)是一種處理多投入-多產(chǎn)出的多目標決策的效率評價方法。傳統(tǒng)的DEA只考慮投入和產(chǎn)出兩個過程，忽略了評價對象的內(nèi)部結(jié)構(gòu)和投入資源的配置情況。因此，我們將實施過程作為一個獨立的系統(tǒng)，通過BC2模型將綜合效率分解為純技術(shù)效率和規(guī)模效率，判斷評價對象是處于規(guī)模報酬不變、遞增還是遞減階段，通過C2R模型判定決策單元是否同時達到效率有效性和技術(shù)有效性。其動態(tài)研究模型如圖2所示。據(jù)此，可以清楚地發(fā)現(xiàn)山東省自然科學基金項目從基礎(chǔ)投入到形成科技成果的整個過程和各個子階段的相對有效性，從而有針對性地尋找其績效改進的手段，這對山東省自然科學基金項目的管理和發(fā)展更具有現(xiàn)實意義。

圖2 考慮過程的自然科學基金項目績效評價兩階段動態(tài)DEA模型Fig.2 Two-Stage dynamic DEA model for performance evaluation of Natural Science Foundation Project considering process

如圖2所示：

第一階段：科技服務(wù)階段作為科技計劃績效評價的第一個子階段，其產(chǎn)出是整個科技計劃活動的中間產(chǎn)出，該階段產(chǎn)出以服務(wù)水平和服務(wù)質(zhì)量為主，其中，服務(wù)水平和服務(wù)質(zhì)量包括按時結(jié)題情況和產(chǎn)學研聯(lián)合情況等。

第二階段：知識轉(zhuǎn)化階段作為科技計劃績效評價的第二個子系統(tǒng)，其產(chǎn)出主要包括培養(yǎng)人才數(shù)，發(fā)表論文數(shù)以及項目成果的獲獎等。知識轉(zhuǎn)化作為完整的生產(chǎn)過程，其成果的產(chǎn)出不能自動出現(xiàn)，該過程的順利實施需要科技人員的服務(wù)。因此，以第一階段的產(chǎn)出作為第二階段的投入指標。

2 實證分析

根據(jù)動態(tài)DEA模型，運用MaxDEA 6.5軟件對山東省自然科學基金項目按照不同類型、不同學科分別進行DEA分析，由于結(jié)果較為復(fù)雜和多樣，只給出相對簡單且重要的部分結(jié)果，具體結(jié)果如表1、表2所示，規(guī)模收益的結(jié)果較為復(fù)雜，僅根據(jù)上述規(guī)模收益判定的原理，給出最終的結(jié)論。

表1 按四種類型劃分的DEA分析結(jié)果

注：crste，vrste，scale分別表示綜合效率、純技術(shù)效率和規(guī)模效率，下同。綜合效率是在固定投入量下，產(chǎn)品的實際產(chǎn)出與最大產(chǎn)出之間的比率。規(guī)模效率=綜合效率/純技術(shù)效率，前者測算決策單元處于規(guī)模報酬的某一階段，后者反映規(guī)模因素對綜合效率的影響力有多大。

由表1可知，四類項目在第一階段的綜合效率平均值為0.949，純技術(shù)效率值為0.983，規(guī)模效率值為0.96，說明山東省自然科學基金項目在科技服務(wù)階段的整體績效較好，但在技術(shù)水平以及規(guī)模等方面還存在著一些問題，尚需要改進。其中青年基金和面上項目綜合效率為1，且邊際投入等于邊際產(chǎn)出，故規(guī)模收益保持不變。由此可知，青年基金和面上項目的整體水平相對較好，處于較高的水平。重點項目的純技術(shù)效率為1，但由于其規(guī)模效率值小于1，導(dǎo)致其綜合效率值小于1，表明重點項目的資源配置能力是有效的，但由于規(guī)模不合理導(dǎo)致其綜合效率值小于1，同時由于重點項目的邊際產(chǎn)出大于邊際投入，因此導(dǎo)致重點項目的規(guī)模效益為遞增，在日后的管理中，應(yīng)調(diào)整資源的比例，適當改變其規(guī)模，同時可適當?shù)卦黾悠渫度胭Y源，進而達到較高的績效水平。中青年項目，又稱博士基金，其純技術(shù)效率和規(guī)模效率值均小于1，故導(dǎo)致其綜合效率值小于1，說明中青年基金項目在資源的配置、資源的利用等方面均存在著不足，日后應(yīng)加強資源的配置，資源的利用等。

四類項目在第二階段的知識轉(zhuǎn)化過程中，純技術(shù)效率的平均值為1，處于相對較好的水平，規(guī)模效率的平均值為0.991，盡管規(guī)模效率依然存在一定的不足，但處于較高的水平，綜合來看四類項目在知識轉(zhuǎn)化階段的水平相對較好。特別是青年基金、重點項目和面上項目的三項效率值均為1，表明三者在知識轉(zhuǎn)化階段的資源投入、資源配置、資源利用等各方面相對較好，整體績效相對較理想。中青年項目的純技術(shù)效率值為1，但規(guī)模效率值小于1，其邊際產(chǎn)出小于邊際投入，規(guī)模報酬遞減，因此在日后的管理中，應(yīng)該減小經(jīng)營規(guī)模，以減少冗余，提高資源利用效率。

表2 按不同學科劃分的DEA分析結(jié)果

由表2可知，八個學科類別的項目在科技服務(wù)階段的綜合效率平均值為0.728，純技術(shù)效率的平均值為0.92，規(guī)模效率的平均值為0.799。由此可知八類學科的純技術(shù)效率的平均值較高，整體水平不高的原因是由于規(guī)模效率的平均值較低。其中，地球科學和信息科學三項效率值均為1，表明地球科學和信息科學的績效水平相對較高。生物科學、工程與材料科學和醫(yī)學科學的純技術(shù)效率值為1，而綜合效率值小于1是由于規(guī)模效率值小于1所導(dǎo)致的。且這三個學科的邊際產(chǎn)出均小于邊際投入，規(guī)模報酬處于遞減狀態(tài)，因此在日后的管理中，應(yīng)該縮小經(jīng)營規(guī)模，以減少冗余，提升總體效率。數(shù)理科學、化學科學和管理科學的純技術(shù)效率、規(guī)模效率均低于1，因此三者的綜合效率小于1，三者的邊際產(chǎn)出均大于邊際投入，規(guī)模報酬處于遞增狀態(tài)，因此在管理中，應(yīng)該擴大經(jīng)營規(guī)模，發(fā)揮范圍經(jīng)濟和規(guī)模經(jīng)濟，提升總體效率。

在知識轉(zhuǎn)化階段，八類項目的綜合效率平均值為0.863，純技術(shù)效率的平均值為0.964，規(guī)模效率的平均值為0.892，該階段的效率平均值均高于第一階段的科技服務(wù)階段，說明八類學科在知識轉(zhuǎn)化階段的效率水平要高于科技服務(wù)階段的技術(shù)水平。其中，數(shù)理科學、生物科學、工程與材料科學和信息科學的綜合效率值為1，表明四者在知識轉(zhuǎn)化階段的績效水平較高。化學科學、地球科學和管理科學三者的純技術(shù)效率值為1，表明三者在資源配置方面是有效的，之所以綜合效率水平較低是由于投入資源的規(guī)模不當造成了整體水平較低，因此，應(yīng)該注重資源的規(guī)模效益，發(fā)揮規(guī)模經(jīng)濟的優(yōu)勢。在八類學科中，僅醫(yī)學科學的純技術(shù)效率和規(guī)模效率均小于1，因此應(yīng)該加強醫(yī)學科學的資源投入、資源配置等，提高資源的利用率，提高醫(yī)學科學的整體績效水平。

3 結(jié)語

根據(jù)兩階段數(shù)據(jù)包絡(luò)分析的結(jié)果可知，山東省自然科學基金項目整體績效水平較高，但不同項目類別、不同學科之間的差距較大。項目類別上，青年基金和面上項目整體績效水平較高；重點項目資源配置相對有效，但規(guī)模不合理；中青年基金項目在資源的配置、資源的利用等方面均存在著不足，日后應(yīng)加強資源的配置和利用。學科類別上，信息科學是山東省的優(yōu)勢學科，其他學科在資源配置、利用率上都存在相應(yīng)不足。

對此，應(yīng)進一步加大對弱勢學科的扶持力度，持續(xù)穩(wěn)定地增加政府財政科技投入，提高資助強度，重視對基礎(chǔ)研究領(lǐng)軍人才引進和培養(yǎng)，擴大對中青年科研人員的支持規(guī)模，激發(fā)青年人才的科研熱情，從而形成一批在國內(nèi)外有一定影響力的學術(shù)帶頭人和研究團隊。

[1]MARTIN B R, IRVINE J. Assessing basic research: Some partial indicators of scientific progress in radio astronomy[J]. Research Policy, 1983, 12(2):61-90.

[2]GARCIA C E，SANZ-MENENDEZ L.Competition for funding as an indicator of research competitiveness[J].Scientometrics，2005，64(3)：271-300.

[3]白坤朝,汲培文.基礎(chǔ)研究項目績效評估的實踐與探索——國家杰出青年科學基金項目績效評估案例研究[J].中國科學基金,2013,(1):22-25.

[4]徐敏.地方科學基金項目管理探析[J].浙江師范大學學報(自然科學版),2010,33(2):236-240.

[5]吳銳.安徽省自然科學基金績效評價體系研究[J].安徽科技(交流與探討),2010,(1):41-43.

[6]馮鴻雁,肖廣嶺,蘇俊斌.省級自然科學基金的目標定位與績效評估——以河北省自然科學基金為案例[J].科學管理研究,2005,23(4):49-52.

ResearchonperformanceevaluationoftheprojectsofShandongProvincialNaturalScienceFoundation

JIAXin-xin，GUOMeng-ying

(ShandongScienceandTechnologyStatisticalAnalysisandResearchCenter,Jinan250101,China)

∶To further strengthen the management of Shandong provincial Natural Science Fundation, optimize the scientific and technological resources, and improve the efficiency of capital investment in science and technology, the conceptual model and evaluation index system of Shandong Provincial Natural Science Fundation was established on the basis of the existing research. Furthermore, the two-stage DEA model was used to evaluate the projects Shandong Provincial Natural Science Foundation.The empirical results show that the overall performance level of the projects of Shandong Provincial Natural Science Foundation is relatively high. However, there is a big gap between different project categories and different disciplines. Therefore, attention should be paid to further supporting of the weak disciplines, the increase of financial investment in science and technology, and the introduction and cultivation of leading talents in basis research.

∶Shandong Provincial Natural Science Foundation; two stage DEA; performance evaluation

10.3976/j.issn.1002-4026.2017.06.018

2017-10-11

山東省重點研發(fā)計劃(2015GSF122005)

賈辛欣(1970—) 女， 研究員， 研究方向為科技統(tǒng)計分析與評價。

N2;G311

A

1002-4026(2017)06-0110-05