美國大學圖書館科研影響力評價服務實踐研究

摘 要 論文以美國研究型大學圖書館為調查對象，從網站欄目建設、常規服務形式、館員配置和常用工具資源等方面總結其科研影響力評價服務概況。美國大學圖書館以科學管理與維護數字身份、增強科研影響力實踐策略指導、開發利用科研影響力數據分析工具、探索科研影響力綜合評價指標模型為科研影響力評價服務關鍵策略。以此為借鑒，為應對國內科研評價體系的改革，我國大學圖書館當應科學規劃科研評價服務內容，開展提升大學師生科研影響力素養系列活動，促進研究產出的科學管理與利用，加強科研影響力評價體系的研究，創建科研影響力評價服務實踐范例。

關鍵詞 科研評價 科研影響力 大學圖書館 美國大學

Abstract Taking the American research university libraries as survey subjects， the paper summarizes its research impact evaluation service from the aspects of website construction， regular service modes， librarian configuration and common tools. The American research university libraries take scientific management and maintenance of digital identity， practice strategy guidance of enhancing research impact， development of analysis tools for research impact， and exploring the index model of research impact comprehensive evaluation as the key strategies. In response to the reform of the domestic research evaluation system， academic libraries in China are supposed to carry out a series of activities to enhance the research impact literacy of university teachers and students， promote the scientific management and utilization of research output， strengthen research on the evaluation system of research impact， and create practical examples of research impact evaluation service.

KeywordsResearch evaluation. Research impact. Academic library. American university.

0 引言

當前，知識共享發生了范式轉移，學術交流方式發生了巨大變化。研究成果不再限于傳統期刊論文和圖書，還包括數據集、源代碼和會議演示等其他非傳統在線展示類型，這也使得現有科研評價指標和標準的局限性越來越明顯[1]。《舊金山科研評價宣言》指出，科研評價要基于研究本身的價值，而不是通過研究成果發表的期刊進行評價[2]。在英國最新頒布的高等教育評價指南“科研卓越框架”（2021）中，降低了科研產出的要素權重，增加了科研影響要素權重，更加重視科研成果的非學術影響力[3]。美國政府和研究資助機構基于科研產出的績效評價，也開始從基于文獻計量方法量化研究成果總體價值向更有意義的影響力評價轉變[4]。在我國雙一流大學建設積極推進過程中，如何發揮高校的科研影響力是大學重點關注的問題之一。2018年開始，國家教育部、科技部等陸續開展排除四維、五維行動，該行動對于國內學術、科技評價體系無疑是一個破而后立、建立中國特色新型評價體系的重要契機[5]。在大學科研評價領域，大學圖書館面臨著參與和發展的新機遇。對此，通過分析美國大學圖書館科研影響力評價服務實踐，為國內大學圖書館創新科研影響力支持服務提供借鑒，可以使其更加從容應對科研評價體系的改革，進而促進大學科研影響力的提升。

1 美國大學圖書館科研影響力評價服務概況

美國卡耐基高等院校分類標準把從事最高研究水平的博士授予類大學劃分為R1類別，即研究密集型大學[6]，故R1類大學圖書館可以代表美國大學圖書館科研影響力服務的較高水平。本文以美國R1類大學（共131所）圖書館為調查對象，分析其科研影響力評價服務概況。

1.1 網站欄目建設

訪問131所R1類大學圖書館網站，有125所（95.4%）圖書館網站提供科研影響力服務相關內容專欄。圖書館網站科研評價服務上層菜單多為圖書館指南、研究指南和研究交流等?？蒲性u價服務網站主題名稱主要為科研（學術）影響力（32.1%）、影響力評價（23.7%）、影響力指標（19.8%）三種類型，少數大學圖書館以文獻計量學、引用分析和學術身份管理命名欄目。科研影響力評價服務是美國大學圖書館科研支持服務的重要組成部分，從網站欄目建設可以側面反映圖書館科研評價服務的廣度與深度，部分圖書館服務內容不僅包括科研影響力評價，還覆蓋了科研影響力理論知識普及與提升策略指導等內容。

1.2 常規服務形式

1.2.1 提供基于傳統計量指標的科研評價服務

美國大學圖書館創建基于文獻計量學方法的科研評價測度指標資源指南，幫助師生了解定量評價文章、作者、期刊和機構影響力的基本方法。圖書館鼓勵教師自己利用相關資源來展示學術出版物和學術影響力，在其任期、晉升審查和申請資助時提供證明信息[7]。同時，圖書館利用引文跟蹤數據庫和各種數據可視化工具，幫助師生追蹤出版物，為個人、部門和學校提供定制報告，主題涉及生產力、協作分析、資金分析、研究趨勢和研究影響力分析等[8]。毋庸置疑，利用文獻計量指標量化學術工作的影響力、普及科研影響力評價基本方法和提供定制報告是大學圖書館科研影響力評價服務的最常見內容。

1.2.2 替代計量指標的推廣與應用實踐

開放獲取、學術交流和開放數據運動的發展催生了科研評價的新方法。替代指標幫助創建更完整的學術活動圖像，是傳統指標評價科研影響力方法和同行評審過程的必要補充。美國大學圖書館提供有關替代計量的專業知識，引導師生在評價科研影響的過程中考慮和實施在線出版和交流所帶來的系列影響。調查對象中有110所大學（84%）圖書館網站介紹了替代指標在衡量科研影響力方面的專業知識，并提供指向替代計量指標統計平臺和工具的鏈接。此外，美國大學圖書館在館藏開發和研究支持的核心活動中嵌入替代計量指標工具，增強相應條目的影響顯示。此舉幫助學者們更好地了解在數字研究環境中展示學術成果研究影響力的新形式，明確了替代指標對展示和提升科研影響力的潛在價值。

1.2.3 咨詢與培訓

美國大學圖書館基于科研影響力相關咨詢服務的主題內容包括：制定成功的發布和傳播策略;管理或跟蹤出版物;保持有效的在線身份;按學科評價科研影響及將科研影響傳達給不同群體。為了突出個人咨詢主題特點，北德克薩斯州大學圖書館推出學術影響咨詢清單，用戶需要事先填寫查問卷，圖書館根據用戶實際需求來制定咨詢服務內容[9]。圖書館基于科研影響力內容培訓主要分為面對面的講習班，個性咨詢及在線學習教程三種形式。培訓旨在普及影響力評價指標知識，促使師生養成影響力證據收集和監測影響的新習慣。表1為部分大學圖書館網站揭示的相關研討會主題信息。

科研影響力挑戰賽[16]是美國大學圖書館吸引師生參與了解科研影響力的一種常見培訓活動形式，挑戰任務由多個活動組成，線上完成。任務旨在幫助創建專業的在線學術形象，科學管理在線學術活動;促進個人作品的傳播以吸引新的受眾;理解研究的影響范圍和衡量個人研究的影響力。

1.3 館員配置

美國大學圖書館選擇不同的人員配置模式來開展科研影響力服務，有作為一個部門或專業的服務團隊而存在的正式服務，也有采用分散的非專職館員（如學科館員）根據用戶需求提供服務。在2018年之前，全美大學圖書館僅有幾個科研影響力服務相關的專職崗位[17]。時隔兩年，在本次調查中筆者發現已有多家大學圖書館已經專門設立或正在招聘科研影響力專職館員崗位，這意味著圖書館科研影響力評價服務將由專人統籌規劃，傳統的科研評價服務將轉變為以提升科研影響力為最終目標的綜合性服務。表2為美國研究型大學圖書館提供科研影響力評價服務的代表性崗位設置情況。

1.4 常用工具和資源

美國大學圖書館網站提供常用的科研影響力評價工具和平臺資源，協助學者利用評價工具了解和分析影響力。現階段美國大學圖書館研究影響力評價服務的主要關鍵工具是Web of Science和Google Scholar平臺，表3為美國研究型大學圖書館科研影響力服務常用平臺工具及向讀者推薦使用的用于監測和衡量科研影響力的資源。

2 美國大學圖書館科研影響力評價服務關鍵策略

美國大學圖書館在做好常規性科研影響力評價工作的同時，也在為提升大學學術研究的影響力鋪平道路，協助大學師生最大程度地發揮科研影響力，促使師生科研影響力整體觀的形成，確保了科研影響力評價服務工作的可持續性。

2.1 科學管理與維護數字身份

數字身份是傳達學術成果研究影響的關鍵因素。美國大學圖書館提升大學科研影響力服務的首要策略就是協助大學師生做好個人數字身份的塑造與管理，解決其在創建管理數字身份時遇到的實際問題。圖書館圍繞學術身份標識創建、管理學術檔案、在線形象的策劃與監控等主題，指導大學師生在社交媒體平臺創建個人檔案，全面展示其研究情況。

永久性身份標識符ORCID作為科研人員身份管理的關鍵組成部分，大學圖書館提供ORCID的基本理論知識和配置文件平臺，協助大學師生創建與維護ORCID工作。德克薩斯A&M大學圖書館[19]將ORCID數據集成到學位論文的發布過程中，幫助學校研究生注冊和獲取學術身份ORCID，同時將數據推送到校園的其他功能系統如機構存儲庫等科研信息系統中。該圖書館最終目標旨在創建和維護包括研究生、博士后、教師和全職研究人員在內的完整而準確的ORCID身份信息數據庫，并維持新ORCID數據的生成過程。大學社區ORCID身份數據覆蓋率的提升為大學圖書館有效跟蹤大學與師生的科研產出奠定了基礎。

2.2 增強科研影響力實踐策略指導

2.2.1 提高研究成果可見性

提高研究成果的可見性是提升科研影響力的重要途徑。弗吉尼亞理工大學圖書館在2020—2025年戰略計劃中指出，通過使用預定義的研究影響指標，圖書館對選定的個人或團隊進行重點支持，將提高其研究可見性作為提高機構影響力的主要措施之一[20]。

開放獲取是提高研究可見性的重要途徑。美國大學圖書館積極推進校園學術成果的開放獲取出版，圖書館為師生提供開放獲取政策信息、資助機構要求和作者權利等知識，幫助識別和確定合適的開放獲取出版平臺，設立開放獲取基金鼓勵師生在開放獲取平臺發表學術成果。華盛頓大學圖書館與Springer Open等開放獲取學術期刊合作，為本校作者提供開放獲取文章處理費用的優惠折扣，圖書館還提供開放存取期刊免費托管服務[21]。

優化大學機構庫的可見性，鼓勵師生將研究成果保存在本校機構庫中。IUScholar Works[22]是印第安那大學圖書館提供的一項開放存取庫服務，旨在保存和交付印第安那大學各種形式的學術資料（如白皮書、演示文稿、數據、教育材料、研究文章和海報演示等）。IUScholar Works為所有作品在Google上建立了索引，并提供了永久標識符，保證了材料的長期保存，有效改善了本校師生的研究成果在搜索引擎中的索引量和排名。同時，IUScholar Works嵌入Altmetric.com徽章，用戶將可以查看該項目已收到社交媒體關注的簡短報告，包括推文、學術博客文章及有關Mendeley等服務的社交書簽[23]。

信息搜索從搜索引擎開始，這已日益成為一種常態。圖書館員熟悉信息檢索的流程，明確索引和關鍵字的重要性，可以幫助研究人員了解搜索引擎的工作或排名方式，利用發布策略來改善研究的可見性。加州大學洛杉磯分校圖書館提供針對作者的搜素引擎優化策略指導，對研究成果的標題、關鍵字、摘要和圖表等方面提出建議，從而提高成果的可見性[24]。

2.2.2 倡導數字參與

美國大學圖書館積極探索在數字環境中創建、傳播和保存學術成果的新途徑，提供公開可用在線研究平臺工具，引導和鼓勵師生突破傳統研究成果出版物的交流方式，利用社交媒體等交流渠道向公眾分享科學研究、知識和思想，利用社交網絡平臺分析工具監測研究影響，尋找最有效的推廣渠道，以獲得更廣泛的受眾和尋找合適的項目協作者。圖書館協助本校師生評估選擇發布平臺，創建學術博客、在線課程與新媒體出版等數字空間，如東北大學圖書館開發了CERES展示工具包，幫助師生構建媒體豐富的策劃網站來展示研究成果[25]，通過促進大學研究成果的多方位展示，達到提升大學及其個人影響力的目的。

2.2.3 協助制定影響力規劃

增強影響力的最佳方法是制定適合自己需求的影響力計劃。美國大學圖書館推薦適合研究目標的最佳評價形式，規劃提升影響力的相關活動，具體包括：與不同的受眾進行有意義的對話;探討如何與潛在的合作研究人員建立聯系;通過不同策略來吸引資助機構等利益相關者;提升研究資源共享和出版效率等，從而幫助研究人員設計規劃研究生命周期各個階段捕獲、跟蹤和保存影響力數據的方法，使科學研究產生更廣泛的影響。

2.3 開發利用科研影響數據分析工具

美國大學圖書館提供的影響力報告大多是規范化的定制報告，手動創建這些報告需要大量人力和時間。雖然當前也存在許多提供專有和開源分析的平臺，但是這些系統在功能上有部分重疊，并不能滿足特定機構的所有需求。定制平臺可以根據大學科研評價實際需求提供定期更新的出版物影響指標報告，還可以根據對基礎數據新用途需求而增加新的查詢和分析形式。明尼蘇達大學圖書館[26]開發了用于分析和可視化研究影響的Mainfold平臺。Manifold平臺為精準滿足明尼蘇達大學醫學院的特定需求而量身定制，建立在標準的LAMP架構上，可通過API自動從Scopus提取教師的出版物數據，通過自動化分析計算影響指標，并動態生成可視化的報告文件?？的螤柎髮W威爾醫學院圖書館[19]利用作者姓名歧義消除的自動化工具ReCiter，可以快速準確地將出版物分配給研究人員檔案。該圖書館還和相關部門合作開發了引文影響工具，系統可以根據相同類型、領域和時間發表的論文為基線，計算學術論文被引用次數的百分位排名。

2.4 探索科研影響力綜合評價指標模型

澳大利亞研究委員會指出科研影響力是指科學研究對經濟、社會、環境和文化做出的明顯貢獻，它超出了對學術研究的貢獻[27]。出版物和引文數據通常被用作研究成果的量度，但它們沒有考慮科學研究可能對政策和實踐產生的影響。傳統的文獻計量學評價方法可以被視為僅給出了全部影響的局部描述[28]。全面衡量科學研究的影響力仍然是一項模糊而困難的工作。作為高等教育領域科研評價服務的主要提供者，大學圖書館也開始嘗試對科研影響力進行更廣泛的研究，探討科學研究對實踐、政策、服務和社會的多層次影響及用來記錄和評價這些影響的方式。華盛頓大學貝克爾醫學圖書館開發了科研影響力評價模型[29]，幫助用戶了解為科學評價研究影響力而必須考慮持續收集的基于出版文獻引用指標以外的信息證據，為分析生物醫學領域的研究影響提供了更穩健和全面的視角。評價模型由量化和記錄科研影響力指南、定位科研影響力證據資源、增強科研影響力的策略三部分組成。模型全面揭示了生物醫學研究領域的科研影響力評價指標，詳細指標如表4所示，為大學圖書館記錄和量化相關學科領域影響力工作提供了參考借鑒。

3.1 開展提升大學師生科研影響力素養系列活動

Bayley等認為科研影響力素養的內涵包括確定適當的影響力目標和指標，嚴格評估和優化影響途徑，以及反思在各種情況下量身定制方法所需的技能[30]。大學圖書館開展科研影響力服務的首要任務就是提升大學師生的科研影響力素養水平?？蒲杏绊懥ο嚓P宣傳與培訓活動是吸引大學師生關注科研影響力的基礎，也是普及影響力知識的重要途徑?，F階段大學師生對科研評價的認識大多還局限在傳統的基于文獻計量學方法的評價層面。圖書館不能僅僅作為影響力顧問專家去提供咨詢服務，而應通過教育培訓重塑師生對科研影響力的認識和理解，激發師生思考提升科研影響力的有效性策略。圖書館利用網站提供豐富的科研影響力相關理論知識，以在線學術身份、影響力評價指標工具和證據收集等為主題開發相關線上課程。線下咨詢和研討活動則將科研影響力途徑概念化，探討如何產生和展示影響，確定基于需求或可以挑戰的研究方法，制定符合自身特色的科研影響力評價與提升策略。通過系列教育培訓活動，使高校師生能夠科學創建和管理在線學術身份，建立對研究評價指標和策略的正確理解，識別并明確不同的評價指標所代表的影響力內涵，進而從更全面的角度分析學術研究產生的影響力。

3.2 促進研究產出的科學管理與利用

研究產出是體現研究成果的任何形式的材料，包括期刊文章、書籍、數據集、創意作品、培訓材料、公開演講、視頻、播客或軟件[31]。大學圖書館在開發和維護用于科學管理研究產出的流程和工具上已經投入大量精力。目前，圖書館研究產出管理工作集中在機構庫建設與科研數據管理兩方面，研究產出類型局限于發表期刊論文、出版著作和研究數據，對其他類型的研究產出尚未形成科學管理辦法，同時現有的管理平臺也無法做到無障礙訪問。在當前學術生態環境下，大學圖書館應擴大研究成果的管理范圍，同時增強研究產出管理平臺與其他機構系統和服務的集成度，促進大學研究產出的合理共享和利用，使研究產出通過知識轉移產生更大的科研影響。只有這樣才能使大學社區范圍內各利益相關者認識到研究產出管理平臺作為可靠數據源可以助其展示并最大化研究成果的價值和影響，主動支持配合圖書館研究產出管理平臺的建設工作。

3.3 加強科研影響力評價體系的研究

歐洲大學協會在“向開放科學過渡的科研評估”研究報告中指出，大學已經意識到目前現有的評價指標不夠完善，而大學在開發和實施科研評估方法方面很大程度上是自主的[32]?？蒲杏绊懥Φ脑u價是復雜且迅速發展的研究領域，評價目的的不同（包括對其進行評估的利益相關者、預期的影響和證據的類型等）導致了評價指標體系的多樣性。教育部在2020年11月公布的《第五輪學科評估工作方案》中指出，學術評價應注重多元評價，采取多維方法[33]。開放互聯的學術生態環境為多樣化的科研影響力評價提供了支撐。大學圖書館基于文獻計量指標的評價策略應逐漸轉變為以多維指標評價體系為基礎的科研影響力的全面衡量。圖書館應就科研影響力服務與校園內外不同的利益相關者建立開放的交流渠道，相應縮減數據驅動的衡量方法，綜合考慮所評價對象的所屬學科、成果類型、研究背景與目的，設計收集影響證據和評價影響力的方法，尋找和開發全面、可靠的評價指標和分析工具，并將其應用于日常評價工作實踐。圖書館要密切關注科研評價制度改革的最新動態，拓展科研影響力評價服務范圍，從幫助服務對象綜合考慮評價指標的支持層面，發展為協助大學相關部門制定相關政策，開發和實施科學全面的科研影響力評價方法體系，制定增強研究收益的關鍵策略，促進科研影響力服務的持續發展。

3.4 創建科研影響力評價服務實踐范例

由于不同學科領域科研影響力的發展途徑和評價方法有所不同，圖書館可以設置支持影響力證據收集和評價資助等活動，通過創建科研影響力案例示范，指導師生如何將科研影響力理論知識與評價工具用于提升影響力具體實踐中。案例研究從特定角度展示不同的利益相關者實施科研評價策略的區別，可以幫助館員和用戶更好的理解基于不同研究領域的科研影響力的展現與評價。圖書館可以邀請學科專家擔任指導顧問，選擇有代表性的學科咨詢案例，量身定做影響力支持服務規劃。圖書館在全面了解用戶研究內容的基礎上，提供影響力評價方法和工具建議，探討相關研究可能涉及的替代計量（包括政策引用、下載和社交媒體報道）方法，科學制定研究影響路徑實施方案，在此基礎上從科學研究生命周期的各個階段實施影響力提升策略。圖書館利用網站推廣最佳案例，通過代表性案例內容陳述，展示科研影響力數據從確定、捕獲、保存到跟蹤階段圖書館所提供的相關服務措施?？蒲杏绊懥Ψ諏嵺`范例的推廣為大學師生提供了提升影響力策略的交流平臺，有助于師生更好地了解科研評價方法和指標體系，并能夠評判性地拓展影響力證明途徑。

參考文獻：

EZEMA I J， UGWU C I.Correlating research impact of library and information science journals using citation counts and altmetrics attention[J]. Information Discovery and Delivery，2019， 47（3）：143-153.

San Francisco Declaration on research assessment [EB/OL].[2019-12-05]. https：//sfdora.org/read/.

胡科，陳武元，段世飛.英國高?？蒲性u估改革的新動向[J].中國高教研究，2019（8）：54-61.

Washington University in St. Louis.An overview of measuring academic productivity and changing definitions of scientific impact[EB/OL].[2020-04-11].https：//digitalcommons.wustl.edu/cgi/viewcontent.cgi？article=1048&context=becker_pubs.

中國科技評價改革：如何演變？趨勢如何？[EB/OL].[2019-12-18].https：//tech.ifeng.com/c/7p9VAlXjIgX.

Wikipedia.Research I university[EB/OL].[2020-03-18].https：//en.wikipedia.org/wiki/Research_I_university.

Iowa State University. Promotion & tenure resource guide[EB/OL].[2020-04-08].https：//instr.iastate.libguides.com/tenure.

Johns Hopkins University.Scholarly impatct services[EB/OL].[2020-04-08].http：//guides.library.jhu.edu/scholarly-impact-services.

University of North Texas.Scholarly impact consultation checklist[EB/OL].[2020-03-09].https：//guides.library.unt.edu/ld.php？content_id=54220572.

Yale University.Research impact workshops[EB/OL].[2020-04-22].https：//guides.library.yale.edu/impact/workshops.

University of Rochester.Research impact workshops[EB/

OL].[2020-03-04].https：//www.library.rochester.edu/services/research-impact-workshops.

University of Pittsburgh.Upcoming workshops[EB/OL].[2020-05-29].https：//www.library.pitt.edu/bibliometric-services.

UCSD.Workshops at the library[EB/OL].[2020-05-29].https：//library.ucsd.edu/visit/library-workshops/index-old.html.

University of Illinois.Savvy researcher workshops[EB/OL].[2020-03-04].https：//calendars.illinois.edu/list/4068.

Virginia Tech University.Tell your story-impact & engagement：upcoming workshops[EB/OL].[2020-04-22].https：//guides.lib.vt.edu/TellYourStory/workshops.

Brown University.Impact challenge[EB/OL].[2020-05-09].https：//libguides.brown.edu/scholarlyimpact/challenge.

Virginia Tech University.New research impact librariantracks scholarship[EB/OL].[2020-04-10].https：//vtnews.

vt.edu/articles/2018/11/univ-lib-researchimpactlibrarian.html.

GUTZMAN K E，BALES M E，BELTER C W，et al.Researchevaluation support services in biomedical libraries[J].Journal of the Medical Library Association，2018， 106（1）：1-14.

THOMAS W J，CHEN B，CLEMENT G.ORCID Identifiers：Planned and Potential Uses by Associations，Publishers and Librarians[EB/OL].[2020-04-22].https：//www.tandfonline.com/doi/full/10.1080/0361526X.2015.1017713.

University Libraries at Virginia Tech Strategic Plan 2020-2025[EB/OL].[2020-09-10]. https：//lib.vt.edu/content/dam/lib_vt_edu/about/strategicplan/UL%20Strategic%20Plan%202020%20v2-2.pdf.

University of Washington.UW Libraries investments in open access[EB/OL].[2020-04-03].https：//www.lib.washington.edu/scholpub/open-access/uw-libraries-investments-in-open-access.

Benefits of depositing scholarship into IUScholarWorks[EB/OL].[2020-02-26]. https：//scholarworks.iu.edu/about.

Indiana University.Social media metrics for IUScholarWorks content now available [EB/OL].[2019-11-07].https：//libraries.indiana.edu/social-media-metrics-iuscholarworks-content-now-available.

UCLA.SEO for authors：a how-to cuide[EB/OL].[2020-04-12].https：//guides.library.ucla.edu/seo/author.

李春卉.美國高校圖書館數字學術項目實踐研究[J].圖書館學研究，2019（15）：84-89.

BRAUN S.Manifold：a custom analytics platform to visualize research impact[EB/OL].[2020-03-04].https：//journal.code4lib.org/articles/10948.

Australian Research Council.Research impact principlesand framework[EB/OL].[2020-04-21].https：//www.arc.gov.au/policies-strategies/strategy/research-impact-principles-framework.

PENFIELD T， BAKER M J， SCOBLE R，et al.Assessment，evaluations，and definitions of researchimpact：a review[J].Research Evaluation， 2014，23（1）：21-32.

Washington University in St. Louis.Becker medical library model for assessment of research impact[EB/OL].[2019-12-02].https：//becker.wustl.edu/impact-assessment/model.

BAYLEY J，PHIPPS D.Extending the concept of research impact literacy：levels of literacy， institutional role and ethical considera[EB/OL].[2020-07-20].https：//pdfs.semanticscholar.org/4cc3/50c55c5488278f6a3fe10ce88981b74522b6.pdf.

Research Impact：What is research impact？[EB/OL].[2020-07-21].https：//libguides.library.usyd.edu.au/c.php？g=717256&p=5270210.

EUA launches report on research assessment in the transition to open science[EB/OL].[2020-07-21].https：//sciencebusiness.net/network-updates/eua-launches-report-research-assessment-transition-open-science.

重磅！教育部公布《第五輪學科評估工作方案》和指標體系[EB/OL].[2020-11-03]. https：//www.sohu.com/a/429139956_273375.