“全評(píng)價(jià)”體系在科技查新質(zhì)量評(píng)價(jià)中的應(yīng)用研究

孫清玉，陳剛

（1.河海大學(xué) 圖書(shū)館，江蘇 南京210098；2.河海大學(xué) 科技處，江蘇 南京210098）

科技查新是進(jìn)行科研管理和成果評(píng)價(jià)的一個(gè)重要環(huán)節(jié)，保證查新工作質(zhì)量尤為重要。通過(guò)對(duì)科技查新質(zhì)量相關(guān)文獻(xiàn)的調(diào)研，發(fā)現(xiàn)大多數(shù)查新質(zhì)量控制與評(píng)價(jià)的文獻(xiàn)都是關(guān)于查新報(bào)告質(zhì)量、文獻(xiàn)檢索質(zhì)量的理論研究及部分指標(biāo)體系探討，較少涉及從科技查新全過(guò)程來(lái)進(jìn)行查新質(zhì)量的控制與評(píng)價(jià)。

科技查新質(zhì)量評(píng)價(jià)體系應(yīng)是一個(gè)經(jīng)由對(duì)投入的資源和條件進(jìn)行質(zhì)量評(píng)價(jià)，進(jìn)而對(duì)查新過(guò)程各環(huán)節(jié)質(zhì)量進(jìn)行評(píng)價(jià)，直到對(duì)所完成的查新報(bào)告及用戶(hù)檢驗(yàn)為止的全過(guò)程的系統(tǒng)評(píng)價(jià)過(guò)程。

南京大學(xué)葉繼元教授在《人文社會(huì)科學(xué)評(píng)價(jià)體系探討》一文中首次提出了全評(píng)價(jià)理論，提出了形式評(píng)價(jià)、內(nèi)容評(píng)價(jià)和效用評(píng)價(jià)“三位一體”的概念組合。南京大學(xué)陳銘在《基于“全評(píng)價(jià)”體系的圖書(shū)館電子書(shū)評(píng)價(jià)研究》[2]一文中，分析了“全評(píng)價(jià)”體系在圖書(shū)館電子書(shū)評(píng)價(jià)中的運(yùn)用，并深入研究了圖書(shū)館電子書(shū)形式評(píng)價(jià)、內(nèi)容評(píng)價(jià)和效用評(píng)價(jià)的指標(biāo)體系構(gòu)建。南京大學(xué)范佳佳在《全評(píng)價(jià)理論在學(xué)科館員評(píng)價(jià)中的應(yīng)用研究——以天津外國(guó)語(yǔ)大學(xué)圖書(shū)館學(xué)科館員評(píng)價(jià)為例》一文中，分析了全評(píng)價(jià)理論應(yīng)用于學(xué)科館員評(píng)價(jià)的可能性，并以天津外國(guó)語(yǔ)大學(xué)圖書(shū)館學(xué)科館員為例建立全評(píng)價(jià)體系。葉繼元教授等以中國(guó)科技論文在線優(yōu)秀期刊為例，分析了“全評(píng)價(jià)”體系在開(kāi)放存取期刊學(xué)術(shù)質(zhì)量評(píng)價(jià)上的應(yīng)用，并從開(kāi)放存取期刊的評(píng)價(jià)主體、評(píng)價(jià)客體、評(píng)價(jià)目的、評(píng)價(jià)標(biāo)準(zhǔn)、評(píng)價(jià)指標(biāo)、評(píng)價(jià)方法和評(píng)價(jià)制度等方面,對(duì)開(kāi)放存取期刊質(zhì)量的形式評(píng)價(jià)、內(nèi)容評(píng)價(jià)和效用評(píng)價(jià)的指標(biāo)體系進(jìn)行了構(gòu)建。

綜合上述理論研究成果可以得出：科技查新質(zhì)量評(píng)價(jià)體系如果缺少評(píng)價(jià)目的、評(píng)級(jí)主體、評(píng)價(jià)客體、評(píng)價(jià)方法、評(píng)價(jià)標(biāo)準(zhǔn)與指標(biāo)、評(píng)價(jià)制度這六要素的任何一種都不能稱(chēng)之為完整的評(píng)價(jià)體系。因此科技查新作為科研管理和成果評(píng)價(jià)的重要部分，其服務(wù)質(zhì)量完全適合根據(jù)全評(píng)價(jià)理論模型進(jìn)行評(píng)價(jià)。

一、“全評(píng)價(jià)”體系在科技查新系統(tǒng)中的應(yīng)用

全評(píng)價(jià)理論是基于人文社會(huì)科學(xué)評(píng)價(jià)提出的，科技查新服務(wù)的理論基礎(chǔ)大部分來(lái)自于圖書(shū)館學(xué)、情報(bào)學(xué)，屬于社會(huì)科學(xué)學(xué)科范疇，符合該理論提出的前提要求。根據(jù)“全評(píng)價(jià)”體系的理論依據(jù)，把其運(yùn)用在科技查新質(zhì)量的評(píng)價(jià)中，來(lái)科學(xué)合理地分析科技查新質(zhì)量的目的、評(píng)價(jià)主體、客體、標(biāo)準(zhǔn)及指標(biāo)、方法和制度，從而真正掌握科技查新質(zhì)量評(píng)價(jià)的根本所在。

（一）評(píng)價(jià)目的

評(píng)價(jià)目的是評(píng)價(jià)要達(dá)到的總的期望和要求，制約和引導(dǎo)著整個(gè)評(píng)價(jià)的方向和具體操作方法。科技查新質(zhì)量的評(píng)價(jià)目的就是對(duì)科技查新中所顯示的各種屬性及其利用效果進(jìn)行分析，對(duì)科技查新的功能、價(jià)值及其發(fā)揮作用和對(duì)用戶(hù)需求滿(mǎn)足程度的評(píng)估，使科技查新服務(wù)更符合社會(huì)與用戶(hù)需要。

（二）評(píng)價(jià)主體和評(píng)價(jià)客體

評(píng)價(jià)的實(shí)施者即為評(píng)價(jià)主體，科技查新質(zhì)量評(píng)價(jià)主體的確定與評(píng)價(jià)目的、評(píng)價(jià)客體密切關(guān)聯(lián)，查新質(zhì)量評(píng)價(jià)主體應(yīng)為接受查新服務(wù)的用戶(hù)和相關(guān)職能部門(mén)的科技查新管理人員。考慮到被服務(wù)一方的評(píng)價(jià)具有最直接的參考價(jià)值，因此接受查新服務(wù)的用戶(hù)評(píng)分應(yīng)占較高權(quán)重為60%，相關(guān)職能部門(mén)的科技查新管理人員的評(píng)分占權(quán)重為40%。

評(píng)價(jià)的客體就是指評(píng)價(jià)對(duì)象，也就是科技查新質(zhì)量。科技查新服務(wù)是一種深層次的信息咨詢(xún)服務(wù)，它有別于其它的參考咨詢(xún)服務(wù)，目前已經(jīng)發(fā)展成為涉及社會(huì)各領(lǐng)域用于判斷項(xiàng)目新穎性的鑒證手段。科技查新質(zhì)量直接關(guān)系到對(duì)科學(xué)研究創(chuàng)新程度評(píng)價(jià)的客觀、公正與否。評(píng)價(jià)和控制查新質(zhì)量是查新管理的重要內(nèi)容，也是查新質(zhì)量管理的關(guān)鍵環(huán)節(jié)。

（三）評(píng)價(jià)標(biāo)準(zhǔn)和評(píng)價(jià)指標(biāo)

評(píng)價(jià)的標(biāo)準(zhǔn)依賴(lài)于評(píng)價(jià)目的。首先明確科技查新是一項(xiàng)深層次信息咨詢(xún)，它具有和其他咨詢(xún)服務(wù)同樣的屬性，它的評(píng)價(jià)標(biāo)準(zhǔn)是以其服務(wù)滿(mǎn)足社會(huì)與用戶(hù)需要為最高標(biāo)準(zhǔn)。在進(jìn)行評(píng)價(jià)時(shí)需要注重其具有項(xiàng)目鑒定、鑒證的功能。

其次，全評(píng)價(jià)體系中的形式評(píng)價(jià)、內(nèi)容評(píng)價(jià)和效用評(píng)價(jià)對(duì)評(píng)價(jià)客體來(lái)說(shuō)也是一種評(píng)價(jià)標(biāo)準(zhǔn)。具體到科技查新質(zhì)量的形式評(píng)價(jià)，就是對(duì)科技查新所表現(xiàn)出來(lái)的外部特征的評(píng)價(jià)，主要包括對(duì)查新人員素質(zhì)、文獻(xiàn)資源配置、查新報(bào)告質(zhì)量、查新系統(tǒng)等進(jìn)行評(píng)價(jià)。科技查新質(zhì)量?jī)?nèi)容評(píng)價(jià)就是對(duì)科技查新的權(quán)威性、新穎性、學(xué)術(shù)性、完整性等內(nèi)容質(zhì)量進(jìn)行評(píng)價(jià)，如文獻(xiàn)檢索質(zhì)量、專(zhuān)家咨詢(xún)質(zhì)量、查新課題整體水平的評(píng)價(jià)。科技查新質(zhì)量的效用評(píng)價(jià)就是用戶(hù)或相關(guān)職能部門(mén)的科技查新管理人員在看到查新報(bào)告一段時(shí)間后，對(duì)查新報(bào)告產(chǎn)生效用的評(píng)價(jià)，可以反映出他們對(duì)查新報(bào)告的認(rèn)可度、滿(mǎn)意度及如何提升的一些需求。

根據(jù)科技查新質(zhì)量的形式、內(nèi)容和效用評(píng)價(jià)的分析，可以把里面的每一概念進(jìn)行細(xì)化，從而對(duì)科技查新質(zhì)量的屬性進(jìn)行概括。根據(jù)這些細(xì)化的指標(biāo)就可以構(gòu)建科技查新質(zhì)量評(píng)價(jià)的指標(biāo)體系。

（四）評(píng)價(jià)方法和評(píng)價(jià)制度

1.文獻(xiàn)調(diào)研法

在查閱教育部等查新管理部門(mén)制定的相關(guān)查新質(zhì)量評(píng)價(jià)指標(biāo)，參考了國(guó)內(nèi)科技查新質(zhì)量評(píng)價(jià)指標(biāo)文獻(xiàn)的基礎(chǔ)上，并通過(guò)查看科技查新用戶(hù)反饋的統(tǒng)計(jì)資料和數(shù)據(jù)，探討查新質(zhì)量評(píng)價(jià)指標(biāo)體系的建立。

2.層次分析法與模糊綜合評(píng)價(jià)法的結(jié)合

主要體現(xiàn)在將科技查新質(zhì)量評(píng)價(jià)指標(biāo)體系分成遞階層次結(jié)構(gòu)，運(yùn)用層次分析法確定各指標(biāo)的權(quán)重，然后分層次進(jìn)行模糊綜合評(píng)價(jià)，最后綜合出總的評(píng)價(jià)結(jié)果。

二、科技查新質(zhì)量評(píng)價(jià)指標(biāo)體系構(gòu)建

設(shè)立科技查新質(zhì)量評(píng)價(jià)指標(biāo)體系，須依據(jù)一定原則：首先所設(shè)指標(biāo)體系應(yīng)能全面反映評(píng)價(jià)客體的本質(zhì)特征，指標(biāo)之間既相互獨(dú)立，又互為補(bǔ)充。其次評(píng)價(jià)指標(biāo)應(yīng)該是較易于獲得具體數(shù)據(jù)的，指標(biāo)量化工作相對(duì)容易實(shí)現(xiàn)。另外選擇的指標(biāo)應(yīng)具有代表性，能夠全面反應(yīng)評(píng)價(jià)客體的性能，避免指標(biāo)過(guò)多或過(guò)少；再次指標(biāo)體系層次需清楚、結(jié)構(gòu)合理。

（一）科技查新質(zhì)量形式評(píng)價(jià)

根據(jù)評(píng)價(jià)指標(biāo)的設(shè)立原則和科技查新質(zhì)量本身的特征，通過(guò)對(duì)科技查新質(zhì)量全評(píng)價(jià)體系六大要素的逐一分析，筆者從形式評(píng)價(jià)的角度出發(fā)，擬將科技查新形式評(píng)價(jià)指標(biāo)體系劃分成4個(gè)一級(jí)指標(biāo)，14個(gè)二級(jí)指標(biāo)的體系結(jié)構(gòu)。

表1 科技查新形式評(píng)價(jià)指標(biāo)體系

（三）科技查新質(zhì)量效用評(píng)價(jià)研究

用戶(hù)在收到查新報(bào)告一段時(shí)間后，對(duì)查新報(bào)告產(chǎn)生的效用評(píng)價(jià)，是評(píng)定查新報(bào)告對(duì)用戶(hù)申報(bào)項(xiàng)目、獎(jiǎng)項(xiàng)的作用；查新管理部門(mén)在年檢、抽檢對(duì)查新質(zhì)量調(diào)查也是效用評(píng)價(jià)的一部分。效用評(píng)價(jià)部分指標(biāo)不適合用定量化的指標(biāo)來(lái)評(píng)定，本文選擇從用戶(hù)反饋、查新管理部門(mén)指導(dǎo)意見(jiàn)進(jìn)行判斷。評(píng)價(jià)采用調(diào)查問(wèn)卷表的形式（見(jiàn)表2，表3）。

表2 查新用戶(hù)調(diào)查問(wèn)卷

表3 查新管理人員調(diào)查問(wèn)卷

三、結(jié)束語(yǔ)

本文從“全評(píng)價(jià)”體系的理論入手，深入分析了“全評(píng)價(jià)”體系在科技查新質(zhì)量評(píng)價(jià)中的運(yùn)用，構(gòu)建了科技查新質(zhì)量形式評(píng)價(jià)、內(nèi)容評(píng)價(jià)和效用評(píng)價(jià)的指標(biāo)體系。指標(biāo)較全面地覆蓋了科技查新工作的全過(guò)程及質(zhì)量評(píng)價(jià)的主要影響因素，且相對(duì)易于獲得。隨著科技查新質(zhì)量管理的不斷規(guī)范和完善，在保證評(píng)價(jià)指標(biāo)相對(duì)穩(wěn)定的同時(shí)，應(yīng)及時(shí)調(diào)整相應(yīng)指標(biāo)，以期實(shí)現(xiàn)查新質(zhì)量的持續(xù)改進(jìn)。

[1]葉繼元．人文社會(huì)科學(xué)評(píng)價(jià)體系探討[J]．南京大學(xué)學(xué)報(bào)（哲學(xué)·人文科學(xué)·社會(huì)科學(xué)），2010,47(1):97-110.

[2]陳銘.基于“全評(píng)價(jià)”體系的圖書(shū)館電子書(shū)評(píng)價(jià)研究[J]．圖書(shū)與情報(bào)，2012(1):22-26．

[3]范佳佳．全評(píng)價(jià)理論在學(xué)科館員評(píng)價(jià)中的應(yīng)用研究：以天津外國(guó)語(yǔ)大學(xué)圖書(shū)館學(xué)科館員評(píng)價(jià)為例[J]．圖書(shū)館雜志，2012(9):75-82．

[4]葉繼元，陳銘．開(kāi)放存取期刊學(xué)術(shù)質(zhì)量“全評(píng)價(jià)”體系研究——以“中國(guó)科技論文在線優(yōu)秀期刊”為例[J]．圖書(shū)與情報(bào)，2013(2):81-87．