美國國家信息標準化組織替代計量項目研究

嚴焱峰

美國國家信息標準化組織替代計量項目研究

嚴焱峰

替代計量學是博客、社交媒體、機構存儲等在線學術交流模式下的必然產物，為構建替代計量學統一評價標準及評價模型，NISO開啟替代計量項目，項目一階段形成9大領域的25項目潛在行動計劃，并通過問卷調研確定項目二階段的5大行動項目，該項目對國內學術評估機制的構建有著一定的啟迪意義。

替代計量NISO潛在行動計劃優先級次

開放科學運動的深入，博客、社交媒體、機構存儲等新學術交流模式的發展，催生了新的學術計量方法——A lternativemetrics（簡稱為Altmetrics），Altmetric是對以網絡環境和在線工具為基礎的學術活動影響力評估的研究及應用[1]。關于Altmetrics的翻譯，國內學者持以下觀點：（1）替代計量學，余厚強等學者認為，Alternativemetrics中的Alternative（替代）部分是指對傳統研究計量，即僅使用引文測度影響力方法的替代，由于引文測度方式的滯后性、片面性及固有缺陷，已經無法適應新型在線科研環境中的學術評價需求，大有被即時性、全面性、科學的研究計量方法囊括、取代之勢[2]；（2）網媒影響計量學，武夷山等學者認為，A ltmetrics研究對象為網絡中或社交媒體中能夠起到評價作用的因素，因而被稱為網媒影響計量學[1]；（3）綜合計量學，還有學者認為Altmetrics是對傳統學術評價指標和社交媒體影響力評價指標的集成與整合，故應譯做綜合計量學。本文暫稱Altmetrics為替代計量學。替代計量學不僅可用作一般文獻測度，還可適用于人、期刊、書本、數據集、PPT、視頻、源代碼庫、網頁等對象，評價指標不僅包括引用指標，還包括影響力的其他表現方式，如數據/數據庫指向、文章瀏覽、下載、在社會媒體中的提及等[3]。替代計量學以一種更為全面的視角重新審視、評估科研人員工作的重要性，并在極大程度上影響著圖書館發展和館藏評估的方式。2013年6月，受Alfred P.Sloan基金會資助，美國國家信息標準化組織（National Information Standards O rganization，NIS O）的替代計量項目正式開啟。

1 美國學術評估替代計量項目的背景介紹

替代計量學的概念于2010年提出，歷經2011年的大討論及替代計量學運動階段，學術出版界均表現出對替代計量學可能引發變革的極大關注，并就評價數據的采集、操縱、分析、質量控制及計量指標體系構建開展研究。2012年后，替代計量學進入應用研究的深化階段，一時間出現了ImpactStory、Plum Metrics、PL O SArticle-Level Metrics影響指標、Altmetrics等多重應用，搜集和分析社交網站和開放存取平臺數據，提供替代計量指標用以輔助過濾及評價文獻、評估自身的學術影響力的做法已為廣大科研學者所接受和使用[2]。隨著相關理論研究與實踐應用的不斷完善和成熟，替代計量學必然會朝著更為線性化的測度流程、更為標準化的評價模式發展。NIS O作為與信息系統、產品、出版商、圖書館、書目和信息服務相關業務一致性標準的制定者，有責任也有能力與研究人員共同分析學術影響力測算方式，與出版商、科研機構、資助方、社會公眾合作創建新的學術評價標準。NIS O替代計量項目目標在于探索、發現、

不斷完善學術評價標準及最佳實踐，為學術社區提供一套創新的影響力評價體系，包括以使用量為基準的評價、社會媒體反響評價、基于網絡行為的評價，此外，項目還將針對非傳統學術產出成果，如數據集、可視化數據、軟件及其他應用程序開發潛在評價標準。整個項目分為兩個階段：（1）揭示替代計量學潛在評價標準的可研究領域，由學術社區共同確定各研究項目的優先級次；（2）依據第一階段確定的潛在研究項目，第二階段將重點推進和發展一批最受學術社區關注、由項目董事會批準的標準應用及最佳實踐模型類項目[4]。

2 替代計量項目解析

2.1 NIS O替代計量項目研究方法解析

NIS O替代計量項目在于建立起學術界公正合理、科學完善的評價機制，切實促進科學研究、傳播、管理、評價的良性循環，而學術評價新秩序、新標準的建立必須依賴學術共同體的創新力量。學術共同體是通過內部的學術活動機制（如學術爭鳴、學術交鋒、學術討論）而形成的共同體，作為學術活動的主體和承擔者、學術規范的制定者和執行者，學術共同體擔負著創造和評價學術成果的職能[5]。NIS O替代計量項目的研究中極大體現了學術共同體集聚力量的發揮：（1）NIS O替代計量項目組通過建立Wiki在線工作空間、e-mail列表開展項目營銷、會議召集及資源發布；（2）與ALA（美國圖書館協會）、CNI（網絡信息聯盟）等機構合作，聽取學術共同體內部最廣泛意見，建立項目初始問題列表，規劃后續研討會進程；（3）通過ALA仲冬年會嵌入、開放式網絡研討會、小組會議、深度訪談等形式與學術界共同探討構建評價標準的潛在途徑和方法，在此基礎上形成項目第一階段白皮書草案；（4）對所有項目資料（包括草案、會議記錄、會議PPT）實行開放存取，此外，項目組依據初步研究成果整合形成需要評價領域、評價實踐/標準建議列表，并就項目草案、建議列表通過ALA年會、JCDL（數字圖書館聯合會議）及類似渠道進行宣傳，發放調查問卷，就25項建議領域、建議行動的重要性展開調查，以收集學術界最廣泛的反饋意見[6]。

2.2 NIS O替代計量項目階段性成果

歷經2013年末至2014年中旬的數次大規模會議及網絡研討會，參與專家學者提供了超過250條替代計量學、學術評價相關建議。NIS O替代計量項目組將這些觀點、建議整合為9大研究領域25項行動策劃項目（表1中1、2列）。

25項行動策劃可以說是學術共同體在學術評價領域共同智慧的結晶，為科學評價體系的構建指明了方向和目標，NIS O替代計量項目組需要做的，是在以此25項行動策劃為依據建立項目目標體系的基礎上，劃分不同目標的優先等級，制定相應的實施計劃，有重點、有步驟地通過階段性目標向整體目標的過渡與銜接，構建起科學完善的學術評價機制。項目一階段所確立的重點研究領域的科學與否將直接決定項目二階段的未來走勢，傾聽廣大科研學者的意見，發揮學術共同體的巨大力量能夠確保研究項目朝著正確的方向邁進。2014年8月11—29日，NIS O項目組向118名科研學者發送調研問卷，要求被訪者從25項潛在行動中選擇至少5項亟待實施的項目，并確定其優先級次，調查結果如表1中3～8列所示，以“給出替代計量學一詞明確定義”行動項為例，118人中有54人認為該類研究非常必要，并有30人（占55.6%）將其列為第一優先級。

通過對反饋結果的細致、縝密分析，NIS O項目組確立了項目二階段的研究方向：（1）給出替代計量評估方法中所有常用術語的明確定義；（2）就科研數據、軟件、社科類科研產出等當前未能被充分評估的學術產出，制定其相應的評估量表及計算方法及評價方法使用指南；（3）集中研究影響評價的數據質量類問題，提出改進數據質量建議，或是澄清替代計量評估對數據的要求和限制；（4）與其他項目計劃合作，發揮永久性數據標識符在學術評價中的作用；（5）針對不同利益相關者，明確替代計量評估的主要用途，并詳細闡述替代計量評估在科研評估中的重大作用[9]。

2.3 替代計量項目展望

項目二階段可以說是NIS O替代計量項目的攻堅階段，當一階段白皮書審議通過后，項目組將根據5大研究方向分別組建工作小組，2014年末至2015年8月，各工作組將推出研究領域內最佳實踐、評價標準草案，再次通過網絡研討會等線上/線下渠道進行傳播，以供學術團體討論、提出改進建議。2015年秋冬，NIS O將統一發布評價標準、建議實踐模型及相關培訓材料，并向Sloan基金會提交最終的項目報告[6]。

3 替代計量項目帶來的啟示

3.1 廣開言路，集思廣益，發揮學術共同體的強大力量

學術共同體致力于構筑學科共同體成員間遵循自由、平等、自主原則，使處于創新前沿的學者具有更多的學術話語權。這便意味著：（1）學術共同體實行充分的自治和自律，無論是學術規范的形成，還是

學術評價機制，學術風氣、學術氛圍的發展都依賴于學術共同體集聚力量的發揮；（2）通過賦予處于創新前沿的學者更多的學術話語權有利于充分調動學術共同體的主動性和創造性，進而重塑學術新風、構建學術新秩序、完善學術評估機制。替代計量學是在線科研交流發展到一定階段而產生的創新學術評價機制，該評價系統的發展完善同樣需要學術團體的共同努力。NIS O替代計量項目正是在廣開言路、集思廣益的基礎上，形成項目潛在行動計劃及建議列表，明確研究方向，細化研究內容，充分保障了項目的科學走勢。發揮學術共同體的力量，重點需要做到以下幾點：（1）使用各類在線工具、網絡平臺，如網絡研討會、郵件列表、社交網絡等開展項目推介、項目營銷，通過與科研人員的充分互動，采集相關意見、建議；（2）借助學術共同體內部權威組織、權威會議的影響力，以會議嵌入、機構合作方式促進學術團體對項目的關注及參與；（3）對項目相關資料實行開放存取，促進項目資源的傳播和使用。

表1 NISO替代計量項目行動策劃及優先級次一覽表[7-8]

3.2 明確方向，緊抓核心，解決學術團體的切實性需求替代計量學提供了新的指標來評價科研人員工作的重要性，相對于傳統文獻計量學，這是一個全新的學術評價體系，對該項未知領域的探索學術界存在多項空白，僅以NIS O替代計量項目為例，在其第一階段的白皮書公開征求意見期便有數百位學者提出數十項潛在研究領域及行動內容，后經項目組提煉歸納為25項行動計劃。這25項行動計劃較為客觀地反映了學術團體當前的評價需求，但由于受項目資源、時間等因素的限制，不可能在項目二階段同時開展，NIS O項目隨即以公開問卷調查形式明確了現階段替代計量評估方法最迫切需要展開的行動。無論是公開征求意見，還是問卷調查，均體現了項目組對學術團體切實性需求的充分尊重與滿足，這種

以用戶需求為導向確定研究方向和研究內容的方式能夠進一步擴大學術共同體對項目的充分參與及后期評價標準的普及與應用。

3.3 著眼全局，系統思考，構建科學完善學術評價機制

替代計量評估方法中涉及多方利益，包括科研人員、科研機構、出版商、資助方、公眾等，從整體層面上看，替代計量學不僅為科研人員、科研機構引入新的學術評估模型，同時對出版商、對社會公眾也有著積極的意義。首先，替代計量評估為出版社的社會學術影響力評價提供了新視角；其次，替代計量方法中對媒體影響力、公眾影響力的側重和關注，能夠使公眾更易獲取到研究成果，并使學者更易得到讀者反饋；最后，從長遠來看，替代計量評估方法有利于促進開放科學、開放存取進程及學術成果的傳播和活化利用。因此，替代計量評估標準和評估指標的建立，需要充分考慮到以上利益相關者的綜合需求，從促進學術知識流通、激發學術成果活化利用角度出發，放眼未來，系統思考，構建公正合理、科學完善的替代計量學術影響評估模型。

3.4 緊跟技術，充分利用多類信息工具

博客、社交媒體、機構存儲等在線學術交流環境是替代計量方法的產生基礎，那么在替代計量學的發展過程中，應充分利用在線學術交流環境中的現有工具，通過替代計量方法與數據管理工具、學術規范化工具的融合，解決評價中存在的數據采集、數據管理等問題，提升評價效率。從現階段看，替代計量學發展可有如下設想：（1）與ORCID的融合使用，ORCID是目前在學術論文投稿、基金申請提交、科研產出管理和傳播等系列性科研活動中對科研人員身份識別的主流方式，通過學者身份唯一標識符與個人學術影響力評估的結合，自動匯總統計一些諸如網絡點擊數量、書簽標記數、下載數、被推次、博客轉發數據，將大大增強評估數據的精確性和權威性；（2）與現有數據管理計劃、共享計劃的融合，如通過元數據格式的統一規范或是標準化數據接口程序開發，為替代計量方法應用創建好的數據環境；（3）對現有替代計量方法的借鑒，如ImpactStory評價的5大類別（瀏覽、討論、保存、引用、推薦），Plum Metrics的測度方法（使用、抓取、提及、社會媒體、引用），PL O SArticle-level影響指標模型等。

4 結語

在線學術交流催生了更為全面的學術影響評估方法——替代計量學，替代計量是對科研產出學術影響力、媒體影響力、公眾影響力和國際影響力的綜合評價方式。NIS O的替代計量項目旨在通過對評價標準及最佳實踐探索和研究，為學術社區科研產出的影響力評價提供更為線性化的測度流程和更為標準化的評價模式。目前，該項目正處于評價標準和模型制定的攻堅階段。替代計量方法的出現不僅創新了科研產出的評價模型，同時也將極大影響著圖書館的未來發展，如如何與科研人員共同分析學術影響的測算方法、構建評價模型，如何利用替代計量模型促進館藏發展等等，這都值得圖書館人深思。

[1]有人系統整理了網媒影響計量學的相關文獻[EB/ OL].[2015-04-19].http：//blog.sciencenet.cn/blog-1557-804613.html.

[2]邱均平，余厚強.替代計量學的提出過程與研究進展[J].圖書情報工作，2013（10）：5-12.

[3]替代計量學（Altmetrics）備記[EB/OL].[2015-04-15]. http：//catwizard.net/posts/20140601113706.html.

[4]NISO A lternative Assessment Metrics（Altmetrics）Initiative[EB/OL].[2015-04-15].http：//www.niso.org/topics/tl/altmetrics_initiative/#phase2.

[5]高等學校科學技術學術規范指南[EB/OL].[2015-04-15].http：//www.haie.edu.cn/web/ShowArticle.asp?ArticleID=10874.

[6]Estimated Timeline[EB/OL].[2015-04-17].http：//www. niso.org/topics/tl/altmetrics_initiative/#phase2.

[7]Alternative Metrics Initiative Phase 1White Paper[EB /OL].[2015-04-17].http：//www.niso.org/apps/group_public/download.php/13809/Altmetrics_project_phase1 _white_paper.pdf.

[8]NISOAlternativeAssessmentPotentialAction Items[EB/ OL].[2015-04-17].http：//www.niso.org/apps/group_public/download.php/13661/Altmetrics%20survey%20input%20-%20selected.pdf.

[9]Phase2 Projects[EB/OL].[2015-04-17].http：//www.niso. org/topics/tl/altmetrics_initiative/#phase2.

嚴焱峰南通大學圖書館館員。江蘇南通，226019。

Study on NISO Alternative AssessmentMetrics Project

Yan Yanfeng

Alternativemetrics is the doomed product of online academic communicationmodule such as blog,SNS,institute repository and so on.In order to build standard assessmentmodule and index,NISO initiated alternativemetrics project.In phase 1 of the project,NISO concluded academ ic community’s ideas into 25 actions in 9 categories,and set up 5 main tasks for phase 2 via survey.The projectgivesmuch inspiration for domestic academic community.

A lternativemetrics.NISO.Potential action plan.Priority.

G250.252

2015-05-31編校：鄒婉芬）