本科畢業論文文獻質量評價方法和工具研究

王 潔, 周寬久, 侯 剛(大連理工大學 軟件學院， 遼寧 大連 116620)

?

本科畢業論文文獻質量評價方法和工具研究

王 潔, 周寬久, 侯 剛
(大連理工大學 軟件學院， 遼寧 大連 116620)

簡述本科學位論文的重要性，闡述了參考文獻對于本科畢業論文的重要性，總結了目前畢業論文參考文獻撰寫和監督管理存在的問題。從參考文獻規范性評價和參考文獻引用質量評價兩個方面展開了研究和實踐，基于模板匹配方法檢測著錄規范性，采用灰色關聯分析方法檢測引用質量，并編寫了軟件工具實現自動化評價。通過實驗詳細分析了樣本學位論文文獻規范性和引用質量的量化結果，為加強本科學位論文質量提供了依據、方法和工具。

本科畢業論文； 參考文獻質量； 灰色關聯分析； 規范性； 引用質量

0 引 言

隨著我國高等教育的迅速發展，每年的本科畢業生數目均在迅速增加。資料顯示，2013年全國畢業的本科生規模達699萬，每位畢業生在畢業前需要完成一篇畢業論文，這是所有高校共同面臨的問題。畢業設計(論文)是大學實踐教學環節的重要組成部分，也是大學階段最后一個教學環節，擔當畢業生培養質量出口把關的重任[1]。 本科畢業論文是培養本科生科研和動手實踐能力的主要方式，也是培養本科生運用所學知識解決實際問題和知識創新的主要途徑。它不僅擔負著向學生傳授知識，培養學生綜合運用知識、文獻綜述等能力的任務，而且還影響學生的世界觀、工作作風以及綜合素質。本科畢業論文質量直接反映了高等教育人才培養質量。

任何一篇本科畢業論文的完成，從問題的提出、資料的收集整理和觀點的建立、論證的完成、結論的得出，需要不斷地查閱和參考大量的相關文獻，離不開對前人已有研究成果的借鑒和利用，這是人類文明得以自然延續的不竭動力，也是學術研究的必然。對于一篇合格的畢業論文，參考文獻是不可或缺的模塊。參考文獻著錄的規范性和質量反應出學生工作態度以及畢業論文完成質量，也從側面反映出指導教師對學生論文的指導態度和監督管理質量。參考文獻的規范性和引用質量是一個直觀的標尺，反映出了學生學習態度、教師指導責任心和高校教育管理水平，其質量降低勢必影響學術風氣，也違背人才培養的宗旨，因此必須要嚴格把關。

1 本科畢業論文參考文獻質量現狀分析

畢業設計(論文)的教學質量近年來受到了高校內部和社會的高度關注，主要從畢業設計的質量監控體系方面展開了大量研究工作[2-4]，但較少有針對本科畢業論文參考文獻質量評價的研究。近年來國內高校本科畢業論文總體質量滑坡已成為不爭的事實，且有可能呈每況愈下的發展態勢，以致引發了是否還需要保留畢業論文的話題[5]。引起這一問題的原因是多方面的，涉及到學生、教師和環境這些主客觀、內外因錯綜復雜的作用[6]。參考文獻的不規范和質量低下恰恰反映出這種情況。目前，本科畢業論文參考文獻撰寫和監督管理存在的問題主要有：

(1) 未認真閱讀文獻，隨意引用。部分學生沒有認真閱讀參考文獻，沒有正確的去借鑒前人的工作，甚至為了拼湊參考文獻的數量和類型，在論文完成后“補寫”文獻的情況。更有甚者羅列了大量文獻，但正文中沒有標注引用(空文獻)，或者胡亂標注。

(2) “二手文獻”引用不規范。部分學生雖然閱讀了一些文獻，但對源頭文獻沒有認真閱讀，直接把幾篇文章的參考文獻直接拿來使用，成為“二手文獻”，格式不規范，甚至拼寫、卷期號、頁碼錯誤頻出。

(3) 文獻質量低下。部分學生不愿意閱讀新近刊出的有一定難度高水平的期刊和會議文獻，大量引用陳舊文獻、不規范的網絡文獻、低質量期刊等。

(4) 指導教師管理監督不嚴。由于本科生擴招導致部分學校生師比較低，指導教師工作繁重，在指導畢業設計時，更關注畢業設計實踐工作完成、論文整體寫作質量，參考文獻問題沒有引起足夠重視。

(5) 缺少規范的評價方法和工具。很多高校每年有幾千篇甚至上萬篇的本科畢業論文，通常對畢業設計答辯后的論文提交采用抽查和優秀論文重點檢查的方式，也造成對整體論文參考文獻質量監督把控不嚴格，目前也缺少成熟的工具對所有論文進行篩查。

提高本科生畢業論文質量需要建立一個規范的質量監督和評價體系并且在實踐過程中得到有效地貫徹實施。對于參考文獻引用的規范性和質量，除了有明確的規范標準，要在實踐教學中提出有效地評價方法和自動化檢測工具。

質量評價方法

國內外針對科技論文參考文獻元數據自動提取展開了研究[7-9]，但本科畢業論文的參考文獻錄入規范性不高，很難從中正確提取出元數據。文獻[10]對全國優秀博士學位論文參考文獻使用情況進行統計與分析，有助于了解論文參考文獻使用的整體情況，但是無法對參考文獻引用質量和規范性等指標給出定量評價。本文從參考文獻規范性評價和參考文獻引用質量評價兩個方面展開研究和實踐，并編寫了軟件工具實現自動化評價。

2.1 參考文獻規范性評價

對本科畢業論文參考文獻定量評價引用規范性，首先需要從論文中提取出參考文獻字符串，然后再確定不同類型參考文獻包含的元數據。

本科畢業論文參考文獻是按照國家標準 GB/T 7714-2005[11]進行著錄。對于不同類型的參考文獻，都有各自對應的元數據。參考文獻的元數據主要包括4個部分：作者、標題、類型和出版信息。而在類型和出版信息中，還包含更多的子元數據，不同類型的參考文獻，其子元數據的類型也不同。在文獻元數據提取和規范性評價之前，需要為每種類型的參考文獻的所有元數據設定一個權值。

采用包含錯誤修復的模式匹配算法，在提取參考文獻元數據之前，先對參考文獻中存在的錯誤進行修復。對于標點符合格式不正確、文獻結尾點號丟失、多余空格等錯誤，為每條參考文獻條目分配一個基礎規范性得分α。在模板庫中，僅有一個完全規范模板樣式。對于參考文獻字符串，首先讀取文獻類型，然后根據文獻類型使用給定的模板樣式庫進行解析，獲得該條參考文獻的規范性得分Fref，計算公式如下：

(1)

每篇本科畢業論文文獻引用的規范性可以用所有參考文獻規范性得分的平均值表示。根據參考文獻類型選擇獲得最大相似度值的模板樣式進行解析，從而得到參考文獻規范性的量化評價結果。同時將文獻元數據提取出來，為參考文獻引用質量評價做好準備。

2.2 參考文獻引用質量評價

為了對文獻引用質量進行合理評價，需要對文獻使用情況進行統計，并從中選擇部分重要的統計結果作為評價指標。采用基于灰色關聯分析[12-14]的文獻質量評價方法，對本科畢業論文參考文獻的引用質量進行基于層次分析發[15]的綜合評價。

設在系統中有n篇畢業論文，每篇畢業論文有m個評價指標，其中每個評價對象的每個評價指標屬性值構成如下屬性矩陣：

(2)

這里采用文獻引用質量評價的5個指標：文獻量L、期刊量J、英文期刊量E、文獻平均年份Y和空文獻量O。最終可得每篇論文文獻的綜合評價值為：

(3)

3 實驗分析結果

基于上述方法編寫了工具軟件，隨機選取本單位以往3屆120篇本科畢業設計論文作為實驗樣本數據，對其參考文獻統計與分析。

3.1 規范性評價實驗分析

參考文獻規范性得分分布如圖1所示。本科畢業論文文獻的規范性兩極分化嚴重。80～89分區間的人數最多，占總人數的31%，90～100分區間的人數占總人數的18%。80分以上的人數占到總人數的一半，說明一半左右畢業生的畢業論文參考文獻引用還是比較規范的。但是80～89分內的人數較多，體現了能著錄出高規范性的參考文獻的學生還是偏少。對于60～79分區間的畢業論文，占總人數41%，這部分學生規范性得分較低的主要原因是對文獻著錄格式不了解，從而造成文獻元數據缺失和文獻著錄格式錯誤。

圖1 參考文獻規范性得分分布

3.2 引文質量評價實驗分析

對樣本論文的參考文獻引用質量進行評價，統計信息結果如圖2所示，可以看出：

(1) 平均每篇引用的參考文獻數目為15.95篇，說明學生在完成畢業設計前能夠查閱一定數量的文獻資料。

圖2 參考文獻部分統計結果

(2) 主要的參考文獻類型是期刊論文和書籍資料，平均每篇論文引用的期刊文獻數目為6.69，學位論文和會議論文也有一定的比例。

(3) 中文文獻占了文獻總數的58%，英文文獻為42%。統計結果顯示，每篇論文中英文文獻的平均數目為6.4，反映出本單位本科畢業生有較好的英文文獻閱讀能力。

(4) 引用文獻的時間主要在2000年以后，同時48%的學生能夠引用近5年內的論文，這體現出本單位本科畢業設計引用文獻還是比較新。

在上述工作基礎上，將各項數據轉化成質量評價指標，基于灰色關聯分析的文獻質量評價算法，對樣本論文參考文獻質量進行評價，得出樣本數據中畢業論文文獻質量的合格率如圖3(a)所示；將空文獻量指標剔除，重新對樣本論文文獻的質量進行打分，得到新的合格率如圖3(b)所示。從中可以看出，空文獻是影響本科畢業論文文獻質量重要因素。

圖3 文獻質量合格率

3.3 指導教師監督管理評價實驗分析

樣本數據來自5個專業方向，20多名指導教師。綜合規范性和引用質量的量化分析結果可以對專業方向畢業論文質量、指導教師監督質量進行量化分析，如表1所示。分數的高低可以從側面反映出各個專業方向和指導教師對于畢業論文質量管理的工作效果。若本文的研究成果得以推廣，可為高校加強本科生畢業論文質量提供量化分析的依據和自動化檢測工具。

表1 專業方向和指導教師監督管理評價打分表

4 結 語

本科畢業論文參考文獻著錄的規范性和質量反應出學生工作態度以及畢業論文完成質量，也從側面反映出指導教師對學生論文的指導態度和監督管理質量。通過參考文獻規范性評價和參考文獻引用質量評價兩個方面的研究和實踐，實現自動化的量化分析與評價，為加強本科學位論文質量提供了依據、方法和工具。本文在畢業論文管理參考文獻的評價進行了初步探索和嘗試，對于畢業論文參考文獻評價可作為評價本科畢業論文質量的重要參考依據，為以后的畢業論文工作提出合理建議，同時對于論文整體質量評價的方法和工具研究還存在很大的空間。

參考文獻(References)：

[1] 李國華. 對本科畢業設計(論文)工作的再思考[J]. 實驗技術與管理, 2013,30(5): 120-122.

[2] 張麗麗. 提高畢業設計(論文)質量的探索與研究[J]. 中國電子教育, 2013(1):20-24.

[3] 程航東, 靳永銘, 于 泓, 等. 嚴格管理努力探索不斷提高畢業設計(論文)質量[J]. 中國大學教學,2007(9): 72-74

[4] 齊再前, 白守禮, 郭廣生. 不斷創新教學管理 切實提高畢業設計(論文)質量[J]. 中國大學教學, 2005(8): 33-34.

[5] 楊卓娟, 楊曉東. 本科畢業設計(論文)存廢之辨析[J]．黑龍江高教研究, 2011(9):160-162.

[6] 張芳萍, 任志峰, 趙春江. 關于提高本科生畢業設計(論文)質量的研究[J]. 大學教育, 2013(1): 118-119.

[7] 郭志鑫, 金 海, 陳漢華. SemreX中基于語義的文檔參考文獻元數據信息提取[J].計算機研究與發展, 2006, 43(8):1368-1374.

[8] Day M Y,Tsai R T H,Sung C L,etal.Reference metadata extraction using a hierarchical knowledge representation framework[J].Decision Support Systems, 2007, 43(1): 152-167.

[9] 張 玲, 黃鐵軍, 高 文. 基于隱馬爾可夫模型的引文信息提取[J].計算機工程, 2003, 29(20):33-34.

[10] 俞以勤, 余 農, 龔 裕. 對1999～ 2004年全國優秀博士學位論文文后參考文獻的統計與分析[J]. 現代情報, 2007, 27(6):212-216.

[11] GB/T 7714-2005, 文后參考文獻著錄規則[S]. 2005.

[12] 穆 瑞, 張家泰. 基于灰色關聯分析的層次綜合評價[J].系統工程理論與實踐,2008,10(10):125-130.

[13] 張 莎. 灰色關聯分析新算法研究及其意義[D].長春:東北師范大學, 2012.

[14] 王雙英, 王群偉, 曹 澤. 多指標面板數據聚類方法及應用[J]. 數理統計與管理, 2014,33(1): 42-49.

[15] 鄧 雪, 李家銘, 曾浩健, 等. 層次分析法權重計算方法分析及其應用研究[J]. 數學的實踐與認識, 2012, 42(7): 93-100.

Research on Method and Tool in Quality Evaluation of Undergraduate Thesis References

WANGJie,ZHOUKuan-jiu,HOUGang
(School of Software Technology, Dalian University of Technology, Dalian 116620, China)

The significance of undergraduate thesis is pointed out. The importance of references of the undergraduate thesis is expounded, and the problems of writing and management of references are summarized. Evaluation on both normalization and cited quality of references are studied and practiced. A software tool is designed for automated evaluation which can detect record normalization based on template matching, and check the cited quality of references by gray correlation analysis. Normalization and cited quality of references are quantitatively analyzed through experiments. The tool can provide basis, methods and tools for enhancing quality of undergraduate theses.

undergraduate theses; references quality; grey relational analysis; normalization; cited quality

2014-03-10

國家自然科學基金項目(61272174); 大連理工大學教育教學改革基金重點項目(ZD201304)

王 潔(1979-)，男，遼寧大連人，博士，講師，主要研究方向為：計算機系統結構、并行計算、FPGA應用設計等研究。

Tel.：0411-87571609; E-mail:wangjie1003@163.com

G 642.477

A

1006-7167(2015)02-0160-03