基于“閉環(huán)”質(zhì)量監(jiān)控的碩士論文量化評價模型

韓 楠，喬少杰，李艾鮮，陳權(quán)亮，黃 萍

（1.成都信息工程大學 管理學院，四川 成都 610103；2.成都信息工程大學 軟件工程學院，四川 成都 610225；3.成都信息工程大學 網(wǎng)絡(luò)空間安全學院，四川 成都 610225；4.成都信息工程大學 研究生處，四川 成都 610225）

1 概述

培養(yǎng)研究生的重要環(huán)節(jié)之一是碩士生學位論文的撰寫[1]。在學位論文質(zhì)量評價過程中，許多高等院校在進行專業(yè)型碩士生學位論文評價時仍沿用學術(shù)型研究生的方法和模式。這導致了以下幾個問題：①不同類型碩士生培養(yǎng)方式和方向不明確；②碩士生學位論文評價標準側(cè)重于理論研究而輕視實踐應用和操作；③碩士生具備的技能不符合當前行業(yè)的要求。文獻[2]中的調(diào)查研究表明，當前碩士研究生的科研學術(shù)動力隨年級升高而呈現(xiàn)下降趨勢，這說明碩士研究生在科研期間缺乏正確的引導進而導致科研學術(shù)動力下降。文獻[3]中提到計算機專業(yè)學術(shù)型碩士生的培養(yǎng)存在培養(yǎng)目標模糊、培養(yǎng)環(huán)境相對封閉、導師重學術(shù)而輕實踐等問題；學位論文選題以各類算法的理論研究和改進為主，鮮有工程應用或理論研究應用的課題等諸多問題。文獻[4]中指出研究生學位論文在創(chuàng)新方面上存在沒有新觀點、新見解，沒有取得實際成果等問題。此外，碩士研究生學位論文還缺少對當前新興研究成果的學術(shù)性見解和對各種前沿技術(shù)方法的理論性分析[5]。文獻[6]中研究發(fā)現(xiàn)我國碩士研究生培養(yǎng)過程中實行雙導師制度的比例較低，這可能導致科研與實踐的脫節(jié)。

在碩士生培養(yǎng)過程中相關(guān)課程的設(shè)置和教學培養(yǎng)是碩士生教育的研究重點[7]。在碩士生的教學和實踐環(huán)節(jié)中，實踐教學研究是目前較為熱門的研究點[8-9]。課程設(shè)置的研究主要集中在兩點：①如何更好地設(shè)計碩士研究生的相關(guān)課程，讓碩士研究生能夠緊跟社會發(fā)展需求打下堅實的基礎(chǔ)；②學術(shù)型碩士生與專業(yè)型碩士生課程設(shè)置之間的異同及培養(yǎng)方式的不同。

1.1 專業(yè)型與學術(shù)型碩士

碩士研究生有兩種不同的培養(yǎng)類型，一種是學術(shù)型碩士（academic master’s degree），一種是專業(yè)型碩士（professional master’s degree）。專業(yè)型碩士研究生的培養(yǎng)目標是培養(yǎng)具有較強專業(yè)能力并能夠根據(jù)社會特定領(lǐng)域的不同需要進行專業(yè)領(lǐng)域?qū)嵺`工作的高水平專業(yè)人員。學術(shù)型碩士生是我國過去很長時間內(nèi)培養(yǎng)的主要類型的碩士生，一般是指被授予者在其研究領(lǐng)域已經(jīng)達到一定的學術(shù)水平，掌握系統(tǒng)的理論知識，具有獨立科研能力等，在培養(yǎng)過程中側(cè)重于培養(yǎng)基礎(chǔ)知識及理論和科學研究素養(yǎng)。

1.2 專業(yè)碩士與學術(shù)碩士培養(yǎng)對比分析

目前國內(nèi)對于兩種類型的碩士研究生培養(yǎng)采取“同等對待”，無論是學校、學院還是導師，多采取“無差別培養(yǎng)”的培養(yǎng)模式。文獻[10]中通過問卷調(diào)查的方式發(fā)現(xiàn)部分教師對不同類型研究生培養(yǎng)目標和規(guī)格不了解，對專業(yè)和學術(shù)碩士培養(yǎng)不加區(qū)別。通過研究發(fā)現(xiàn)實踐是專業(yè)型碩士學位培養(yǎng)的主要特征，也是國家發(fā)展專業(yè)型研究生教育的主要目的。文獻[11]中建議學校、導師和公司企業(yè)共同建立專業(yè)型碩士生實踐教學基地，同時，通過上述措施開設(shè)多學科課程，進而有效地改革專業(yè)型碩士生的培養(yǎng)模式。

2 計算機類碩士生學位論文質(zhì)量體系

圖1 學術(shù)型和專業(yè)型碩士學位論文撰寫各階段任務

學位論文撰寫是一項系統(tǒng)性的工作，學術(shù)型和專業(yè)型碩士各階段任務如圖1 所示。

研究生學位論文像紐帶一樣連接起理論基礎(chǔ)和實踐應用[12]。創(chuàng)新是科學研究的靈魂和最基本的需求。學位論文是研究生科研水平的主要表現(xiàn)方式，是學習生涯中研究成果的總結(jié)和凝練。研究生的學位論文在創(chuàng)新性上，存在著缺乏新見解、缺乏實際意義、缺乏研究成果、沒有緊跟前沿科學技術(shù)等問題。此外，還存在研究生教育教學工作的支撐環(huán)節(jié)不足、部分研究生的學位論文缺乏原創(chuàng)力等問題[13]。同時，研究生在讀期間找不到自己的定位和研究方向，無法適應學術(shù)研究者的角色，也不敢挑戰(zhàn)權(quán)威，因此學位論文質(zhì)量也會受到影響[14]。

學位論文評價模式包括論文函評加論文答辯的方式，這樣的評價模式存在著明顯的局限性。現(xiàn)有的論文函評或者網(wǎng)絡(luò)評審方法分為盲審和明審。研究表明，明審的專家評價普遍高于盲審。從論文質(zhì)量的角度來看，盲審的評審效果要明顯優(yōu)于明審[15]。

當前學位論文質(zhì)量評價存在以下幾方面問題：①在定性評價方面，由于評審專家個人的研究方向、評審標準和評審寬嚴程度不同，同一篇學位論文會出現(xiàn)評價不一致的情況，因此導致論文的質(zhì)量無法分辨，甚至優(yōu)秀研究生的論文與一篇基本合格的研究生論文相比，我們很難從評審意見上看出文章的水平高低。評審專家的學位論文評閱意見以及答辯決議部分存在表述重復、刻意拔高或者貶低的問題[16]。②針對定量的打分評價法，通常采用數(shù)學統(tǒng)計方法[16]，結(jié)果缺乏客觀性和可靠性。③學位論文評價中還存在學科差異的問題，僅僅采用傳統(tǒng)的評閱方法和計分法進行評價，結(jié)果是不好進行橫向比較的。④在學位論文答辯過程中，存在著答辯過程管理不規(guī)范、教管部門監(jiān)督不力、人際關(guān)系等因素，答辯過程的不公平有礙于碩士生學位論文的有效評估。

3 碩士生培養(yǎng)模式和學位論文評價

在碩士研究生學位論文評價模型中，制訂科學合理的評價指標是至關(guān)重要的第一步，本文設(shè)計了全新的碩士生學位論文評價指標，并對其進行影響力分析。此外，需要在實踐過程中注重學術(shù)型碩士生和專業(yè)型碩士生的區(qū)別培養(yǎng)，學位論文的評價過程也應加以區(qū)別。碩士生學位論文是其科研水平、實踐能力的綜合體現(xiàn)，高質(zhì)量的學位論文離不開科學的培養(yǎng)方法和培養(yǎng)模式。

符合碩士生培養(yǎng)的“閉環(huán)”質(zhì)量監(jiān)控法將碩士研究生培養(yǎng)與學位論文連接成線，成為一個連貫閉合的過程，形成良好的培養(yǎng)模式，進而保證高質(zhì)量碩士生學位論文的產(chǎn)出。在學位論文評審中，通過第三方外審機制評價碩士生學位論文質(zhì)量。實踐結(jié)果表明，外審機制對于客觀評價論文質(zhì)量具有顯著提升作用。

3.1 基于閉環(huán)質(zhì)量監(jiān)控的研究生培養(yǎng)模式

研究生培養(yǎng)是一個閉環(huán)過程，如圖2 所示。圖中研究生導師在教學儲備階段，需要充分了解研究生的專業(yè)特長，發(fā)掘其興趣點。在教學儲備階段，以提升學生知識面、增強動手能力、培養(yǎng)創(chuàng)新思維為目的，采用基礎(chǔ)知識學習與實踐動手能力相結(jié)合的辦法，同時注重因材施教。

傳統(tǒng)的研究生培養(yǎng)模式往往是單向的，忽視學生自己的學習意愿和個人特性，缺乏科學合理的評價機制和評價指標。在教學反饋階段，注重接收學生的學習反饋，并采用新型評價指標和綜合性的考核機制；導師根據(jù)學生和教學過程中的反饋結(jié)果在教學儲備階段對教學內(nèi)容進行改進和提升。

圖2 基于“閉環(huán)”質(zhì)量監(jiān)控的碩士生培養(yǎng)模式

當前研究生教育的癥結(jié)是用單一的碩士學位論文的質(zhì)量優(yōu)劣來評判碩士生培養(yǎng)的過程。通過在長期的教學實踐中總結(jié)研究生教育培養(yǎng)過程存在的問題，提出改進方案并將方案運用到教學中改進教學方法。結(jié)合已有的教育學研究和實踐經(jīng)驗，我們設(shè)計出如圖2 所示的適合我國碩士研究教學的“閉環(huán)”培養(yǎng)和質(zhì)量監(jiān)控模式。在教學階段，教師應對學生的想法、知識和能力基礎(chǔ)進行深入了解，然后根據(jù)學生的學習水平和基礎(chǔ)設(shè)計科學合理的教學計劃。在教學過程中，采用啟發(fā)和激勵式教學方法，激發(fā)學生學習熱情；然后堅持對教學情況進行總結(jié)和反思，培養(yǎng)學生專業(yè)技能，挖掘?qū)W生研究興趣點。圖2 中教學評價部分是“閉環(huán)”培養(yǎng)模型的關(guān)鍵環(huán)節(jié)，科學的量化評價指標可以減輕導師的評價負擔，更有利于讓研究生清晰認識到學習過程中存在的盲區(qū)。“閉環(huán)”式質(zhì)量監(jiān)控法使教學過程良性循環(huán)。“閉環(huán)”教學模式以興趣為導向，激發(fā)學生學習熱情，使其獲得高于書本的知識，培養(yǎng)學生的綜合能力，讓學生不受限于單一的教學，主觀能動地驅(qū)動自己去發(fā)現(xiàn)、去學習。

科學的培養(yǎng)模式促進優(yōu)質(zhì)碩士研究生學位論文的產(chǎn)生，同時，高質(zhì)量學位論文離不開正確的指導，二者相輔相成。

3.2 碩士生學位論文質(zhì)量評價指標

研究生創(chuàng)新能力的培養(yǎng)對于學位論文來說至關(guān)重要，需要綜合考慮創(chuàng)新性、實用性、可操作性等多方面因素，并建立合理的評價指標。結(jié)合成都信息工程大學2016—2018 年的碩士研究生學位論文外審打分和答辯評價標準，建立評價指標體系，見表1。

表1 評價指標及量化權(quán)重

（續(xù)）表1

通過測算碩士研究生學位論文質(zhì)量評價體系的權(quán)重系數(shù)，計算其一致性比例CR(consistency ratio)＜0.1，認為該判斷符合邏輯一致性，證明碩士生論文評價指標系統(tǒng)可以科學地指導學生提升其學位論文的質(zhì)量。

3.3 碩士生學位論文評價模式改革措施

針對評價模式中存在的虛高評價問題，逐步采取盲審的方式，以成都信息工程大學網(wǎng)絡(luò)空間安全學院2016 屆畢業(yè)生為例，隨機選取40%（外審占比率逐年遞增20%～100%）交送外校專家進行盲審，避免評審老師打“人情分”的問題。通過引入第三方的機制，更加客觀地評價碩士生學位論文的創(chuàng)新性。

以成都信息工程大學為試點，在學位論文評價過程中，應用基于“閉環(huán)”質(zhì)量監(jiān)控模式。在實際監(jiān)管過程中，發(fā)現(xiàn)學位論文的獨創(chuàng)性。學術(shù)創(chuàng)新可分為思想創(chuàng)新、研究方法創(chuàng)新等，如果是研究方法上的創(chuàng)新，則應關(guān)注該研究使用的方法是否被其他人采用過，該方法的試驗效果是否良好。監(jiān)管過程包括開題擬定、中期檢查等，定期對學位論文的進度進行跟進并對內(nèi)容進行評價和反饋，這樣可以及時督促研究生完成學位論文撰寫工作。針對專業(yè)型碩士，考慮到碩士生培養(yǎng)的連貫性，在評價過程中要求專業(yè)實踐與畢業(yè)設(shè)計方向一致，避免學生在學習過程中出現(xiàn)研究不連貫的問題。

通過對2016—2018 屆91 名畢業(yè)生進行問卷調(diào)查，得到如圖3 所示的結(jié)果。圖3（a）是統(tǒng)計采用本文所提方法進行碩士研究生學位論文評價模式改革的滿意度調(diào)查結(jié)果；圖3（b）是統(tǒng)計基于“閉環(huán)”質(zhì)量監(jiān)控的研究生培養(yǎng)模式滿意度調(diào)查結(jié)果。從學生匿名評價得到的反饋結(jié)果和碩士生學位論文質(zhì)量的提升來看，基于“閉環(huán)”質(zhì)量監(jiān)控的碩士論文量化評價模型是一種讓研究生滿意且切實有效的新型碩士生培養(yǎng)方法。

圖3 問卷調(diào)查結(jié)果分析

4 結(jié)語

學術(shù)型和專業(yè)型碩士生的培養(yǎng)和評價在我國尚處于一個模糊的階段。大多數(shù)學校是將專業(yè)型研究生與學術(shù)型研究生同等培養(yǎng)，以一樣的指標來評價，這是不科學和不合理的。根據(jù)研究生性質(zhì)的不同、培養(yǎng)方式的差異，評價指標也應該因人而異。

成都信息工程大學自2003 年獲得碩士學位授予權(quán)后，全日制研究生招生人數(shù)逐年增加。學校響應《國家中長期教育改革和發(fā)展規(guī)劃綱要（2010—2020 年）》指導，以培養(yǎng)計算機類研究生應用實踐能力和提升創(chuàng)新能力為目的，以項目驅(qū)動的方式引入企業(yè)實戰(zhàn)案例，建立“成創(chuàng)空間”為學生創(chuàng)業(yè)創(chuàng)新助力，形成獨具特色的復合型專業(yè)碩士研究生培養(yǎng)新模式。

從教學實踐上看，研究生的培養(yǎng)和學位論文評價模式的改革是非常必要的。基于“閉環(huán)”質(zhì)量監(jiān)控的研究生培養(yǎng)模式和碩士研究生學位論文量化評價模型，在研究生培養(yǎng)及畢業(yè)論文質(zhì)量監(jiān)控上取得了較好的效果。針對不同類型的研究生，設(shè)計合理的評價模型和方法，明確不同類型研究生培養(yǎng)的目標，是今后研究生學位論文評價模式研究的新方向。