第三方軟件測(cè)試流程以及實(shí)施中存在的問(wèn)題和建議

陳銀平，王榮

[摘 要]第三方軟件測(cè)試具有公正、獨(dú)立、專(zhuān)業(yè)的特點(diǎn)，隨著軟件企業(yè)和用戶對(duì)軟件質(zhì)量提出了更高的要求，第三方軟件測(cè)試必將得到快速發(fā)展。本文主要分析了國(guó)內(nèi)軟件測(cè)試行業(yè)的現(xiàn)狀以及第三方軟件測(cè)試的發(fā)展，并闡述了第三方軟件測(cè)試的一般流程，并針對(duì)第三方軟件檢測(cè)過(guò)程中遇到的問(wèn)題給出了幾點(diǎn)建議。

[關(guān)鍵詞]第三方；軟件測(cè)試；流程

doi：10.3969/j.issn.1673 - 0194.2018.08.033

[中圖分類(lèi)號(hào)]TP311.52 [文獻(xiàn)標(biāo)識(shí)碼]A [文章編號(hào)]1673-0194（2018）08-00-02

1 國(guó)內(nèi)軟件測(cè)試行業(yè)的現(xiàn)狀

隨著我國(guó)加入WTO，軟件全球化競(jìng)爭(zhēng)日益加劇，用戶對(duì)軟件質(zhì)量提出了更高的要求，越來(lái)越多的軟件企業(yè)和用戶已經(jīng)意識(shí)到軟件測(cè)試的重要性。但是國(guó)內(nèi)軟件測(cè)試與歐美國(guó)家相比還存在很大差距，主要表現(xiàn)在以下幾個(gè)方面。首先，軟件測(cè)試在軟件產(chǎn)業(yè)中的地位較低，很多軟件公司特別是小公司認(rèn)為測(cè)試可有可無(wú)，經(jīng)常在軟件開(kāi)發(fā)完成后才進(jìn)入測(cè)試階段，沒(méi)有把軟件質(zhì)量保證工作貫穿在軟件的整個(gè)生命周期。其次，軟件測(cè)試人員的配置不能滿足需求。國(guó)內(nèi)測(cè)試人員和開(kāi)發(fā)人員的比例遠(yuǎn)遠(yuǎn)低于國(guó)外知名企業(yè)的人員配置比例，例如，國(guó)外知名IT企業(yè)的開(kāi)發(fā)人員和測(cè)試人員的比例通常為1：1，有些甚至是1：2，而中國(guó)的開(kāi)發(fā)人員和測(cè)試人員比例為5：1，從而導(dǎo)致最終開(kāi)發(fā)完成的軟件產(chǎn)品存在較大的缺陷。最后，軟件測(cè)試技術(shù)相對(duì)落后，行業(yè)規(guī)范有待完善。國(guó)外軟件測(cè)試發(fā)展較早，軟件測(cè)試技術(shù)、測(cè)試工具以及測(cè)試管理工具都比國(guó)內(nèi)先進(jìn)。

2 第三方軟件測(cè)試的發(fā)展

第三方軟件測(cè)試在我國(guó)已有二三十年的發(fā)展歷史，為我國(guó)軟件產(chǎn)業(yè)的健康發(fā)展做出了重要貢獻(xiàn)。在一些對(duì)功能、性能、信息安全等要求較高的領(lǐng)域，如金融、航空、軍方等，都較早地采用了第三方軟件測(cè)試這種模式。隨著用戶越來(lái)越重視軟件質(zhì)量，越來(lái)越多的使用財(cái)政資金建設(shè)的信息化項(xiàng)目將由第三方軟件測(cè)試報(bào)告作為項(xiàng)目驗(yàn)收的一個(gè)條件，一些非財(cái)政資金建設(shè)的信息化項(xiàng)目也逐步接受了第三方軟件測(cè)試。將軟件測(cè)試通過(guò)合同關(guān)系委托給第三方測(cè)試機(jī)構(gòu)承擔(dān)，有效地提高了軟件產(chǎn)品的質(zhì)量，這種模式已被軟件用戶和軟件企業(yè)認(rèn)可。

軟件用戶方通常不具備專(zhuān)業(yè)的測(cè)試軟硬件設(shè)備和技術(shù)能力，并且由于行政干預(yù)等因素，導(dǎo)致測(cè)試不全面，而軟件第三方檢測(cè)則具備一定的優(yōu)勢(shì)。第三方軟件測(cè)試具有客觀、公正和獨(dú)立等特點(diǎn)，已成為保障軟件質(zhì)量的一個(gè)重要手段，需要具由專(zhuān)業(yè)的測(cè)試人員進(jìn)行測(cè)試。

3 第三方軟件測(cè)試的一般流程

第三方軟件測(cè)試機(jī)構(gòu)簽訂了委托測(cè)試合同后，開(kāi)始進(jìn)行測(cè)試需求分析、測(cè)試項(xiàng)目策劃、測(cè)試分析、測(cè)試設(shè)計(jì)、測(cè)試執(zhí)行、編制測(cè)試報(bào)告和測(cè)試總結(jié)等工作。工作流程圖如圖1所示，每個(gè)階段的具體內(nèi)容如下。

3.1 測(cè)試需求分析

測(cè)試需求人員通過(guò)與客戶進(jìn)行溝通和閱讀軟件相關(guān)文檔，獲取客戶的顯性和隱性測(cè)試需求信息，形成《測(cè)試需求說(shuō)明書(shū)》。《測(cè)試需求說(shuō)明書(shū)》要經(jīng)過(guò)相關(guān)方評(píng)審，并體現(xiàn)出用戶的真實(shí)需求。

3.2 測(cè)試項(xiàng)目策劃

測(cè)試策劃人員根據(jù)委托方提供的被測(cè)軟件、與被測(cè)軟件相關(guān)的文檔、《測(cè)試需求說(shuō)明書(shū)》等內(nèi)容制定《測(cè)試計(jì)劃》。測(cè)試計(jì)劃的主要內(nèi)容包括識(shí)別測(cè)試任務(wù)、定義測(cè)試目標(biāo)和為了實(shí)現(xiàn)測(cè)試目標(biāo)而進(jìn)行的測(cè)試活動(dòng)。此外，相關(guān)方需要對(duì)《測(cè)試計(jì)劃》進(jìn)行評(píng)審。

3.3 測(cè)試分析和設(shè)計(jì)階段

本階段的主要任務(wù)包括以下幾個(gè)方面：①評(píng)審測(cè)試依據(jù)，包括需求分析、用戶手冊(cè)、說(shuō)明書(shū)等；②設(shè)計(jì)測(cè)試用例并確定優(yōu)先級(jí)；③確認(rèn)測(cè)試條件和測(cè)試用例所需要的測(cè)試數(shù)據(jù)；④測(cè)試環(huán)境的搭建和確認(rèn)測(cè)試需要的設(shè)施設(shè)備。本階段要設(shè)計(jì)測(cè)試用例，并編寫(xiě)《測(cè)試用例》文檔，《測(cè)試用例》要經(jīng)過(guò)相關(guān)方評(píng)審。

3.4 測(cè)試實(shí)現(xiàn)和執(zhí)行階段

本階段的主要任務(wù)包括以下幾個(gè)方面的內(nèi)容：①測(cè)試用例開(kāi)發(fā)、實(shí)現(xiàn)并確定優(yōu)先級(jí)；②創(chuàng)建測(cè)試數(shù)據(jù)，設(shè)計(jì)自動(dòng)規(guī)劃測(cè)試腳本；③確認(rèn)已正確搭建了測(cè)試環(huán)境；④根據(jù)計(jì)劃的執(zhí)行順序，執(zhí)行測(cè)試用例；⑤記錄測(cè)試執(zhí)行的結(jié)果；⑥比較實(shí)際測(cè)試結(jié)果和預(yù)期結(jié)果，如果之間存在差異，上報(bào)給項(xiàng)目經(jīng)理，對(duì)缺陷進(jìn)行確認(rèn)，并分析引起差異的原因；⑦缺陷修正后，重新進(jìn)行測(cè)試。該階段形成《測(cè)試執(zhí)行記錄》和《缺陷列表》。

3.5 評(píng)估出口準(zhǔn)則和編寫(xiě)測(cè)試報(bào)告

評(píng)估出口準(zhǔn)則是將測(cè)試的執(zhí)行結(jié)果與已定義的測(cè)試目標(biāo)進(jìn)行比較，評(píng)估是否需要進(jìn)行更多的測(cè)試，或者需要更改測(cè)試的出口準(zhǔn)則。項(xiàng)目經(jīng)理和測(cè)試執(zhí)行人共同根據(jù)測(cè)試結(jié)果編寫(xiě)測(cè)試報(bào)告。測(cè)試報(bào)告一般有編制人員、審核人員和批準(zhǔn)人簽字。

3.6 測(cè)試總結(jié)

測(cè)試結(jié)束后，需要從已完成的測(cè)試任務(wù)中收集和整合有用的數(shù)據(jù)，主要包括：檢查提交可交付產(chǎn)品；記錄和歸檔測(cè)試環(huán)境、測(cè)試設(shè)備等；分析和整理獲得的經(jīng)驗(yàn)教訓(xùn)等。

4 第三方軟件測(cè)試實(shí)施中遇到的問(wèn)題

（1）軟件企業(yè)重開(kāi)發(fā)、輕測(cè)試，這在國(guó)內(nèi)軟件企業(yè)中普遍存在。由于對(duì)軟件測(cè)試不夠重視，導(dǎo)致軟件產(chǎn)品的售后服務(wù)大幅度增加，從而大大提高了軟件成本。成本增加導(dǎo)致企業(yè)更不愿意做軟件第三方測(cè)試，即使做也只愿意花很少的資金。作為第三方軟件測(cè)試機(jī)構(gòu)，經(jīng)常面臨工作量大但收入少的情況，從而縮小了第三方檢測(cè)機(jī)構(gòu)的盈利空間，導(dǎo)致人才招聘和檢測(cè)設(shè)備購(gòu)買(mǎi)受到限制，這已成為制約第三方軟件檢測(cè)機(jī)構(gòu)發(fā)展的一個(gè)瓶頸。

（2）第三方軟件測(cè)試一般是在系統(tǒng)集成和驗(yàn)收兩個(gè)階段開(kāi)始介入，通過(guò)測(cè)試發(fā)現(xiàn)軟件功能、效率、信息安全等存在重要問(wèn)題。但第三方測(cè)試對(duì)軟件的設(shè)計(jì)階段、需求分析階段以及編碼階段涉足甚少，缺少對(duì)軟件整個(gè)生命周期進(jìn)行質(zhì)量控制。

（3）第三方測(cè)試是在項(xiàng)目后期才進(jìn)行的，留給第三方測(cè)試的時(shí)間較短，需求文檔、用戶手冊(cè)等文檔可能不夠完善、詳細(xì)，導(dǎo)致第三方測(cè)試機(jī)構(gòu)對(duì)軟件需求理解不全面。此外，設(shè)計(jì)文檔不齊全，測(cè)試人員需要花大量的時(shí)間熟悉被測(cè)軟件，會(huì)對(duì)測(cè)試結(jié)果帶來(lái)不良影響。

（4）軟件第三方測(cè)試，一般是第三方檢測(cè)機(jī)構(gòu)與軟件用戶簽訂委托測(cè)試合同，但是在開(kāi)展工作的過(guò)程中需要軟件開(kāi)發(fā)方的協(xié)助配合。因此第三方測(cè)試機(jī)構(gòu)需要協(xié)調(diào)好與用戶和開(kāi)發(fā)商的關(guān)系，否則很可能會(huì)影響測(cè)試工作的質(zhì)量和效率。

（5）用戶、軟件開(kāi)發(fā)方、第三方測(cè)試機(jī)構(gòu)的權(quán)責(zé)不明確。在第三方測(cè)試工作的實(shí)施過(guò)程中，有些用戶甚至是軟件開(kāi)發(fā)商認(rèn)為，進(jìn)行了第三方測(cè)試的軟件都沒(méi)有錯(cuò)誤，將軟件質(zhì)量的高低寄托于第三方測(cè)試機(jī)構(gòu)。一旦軟件不能滿足預(yù)期的需求，就歸罪于第三方機(jī)構(gòu)。雖然軟件測(cè)試能夠發(fā)現(xiàn)軟件的錯(cuò)誤，但是軟件中的錯(cuò)誤可能發(fā)生在軟件項(xiàng)目的各個(gè)環(huán)節(jié)，從而不能保證軟件不發(fā)生錯(cuò)誤。

5 第三方軟件測(cè)試發(fā)展的建議

（1）樹(shù)立質(zhì)量意識(shí)。第三方測(cè)試具有客觀、公正、獨(dú)立等特點(diǎn)，通過(guò)第三方測(cè)試能夠發(fā)現(xiàn)軟件的問(wèn)題，提高軟件的質(zhì)量，但測(cè)試不能保證軟件沒(méi)有錯(cuò)誤，也不能發(fā)現(xiàn)全部的問(wèn)題。要提高軟件的質(zhì)量，用戶和軟件開(kāi)發(fā)商必須要樹(shù)立質(zhì)量意識(shí)，對(duì)軟件的整個(gè)生命周期進(jìn)行控制。

（2）用戶積極參與。用戶積極參與不僅可以快速有效地解決測(cè)試中遇到的許多問(wèn)題，還可以監(jiān)督測(cè)試工作的運(yùn)行情況，以保證測(cè)試質(zhì)量。此外，用戶參與測(cè)試，可以更好地了解測(cè)試的思路、測(cè)試的依據(jù)、測(cè)試的出口準(zhǔn)則等，從而使用戶更容易接受測(cè)試方的理念和思路，還能起到溝通橋梁的作用，督促軟件開(kāi)發(fā)方配合第三方測(cè)試工作，從而提高測(cè)試質(zhì)量和效率。

（3）加強(qiáng)人才隊(duì)伍建設(shè)。國(guó)內(nèi)軟件測(cè)試行業(yè)是新興行業(yè)，處于起步階段，專(zhuān)業(yè)的軟件測(cè)試人才比較緊缺，而從事軟件測(cè)試的人才大多是從軟件開(kāi)放等相關(guān)領(lǐng)域轉(zhuǎn)過(guò)來(lái)的。為了推動(dòng)軟件測(cè)試行業(yè)健康、快速地發(fā)展，我國(guó)必須建立完整的軟件測(cè)試人才的培養(yǎng)體系，在高校中設(shè)置軟件測(cè)試專(zhuān)業(yè)，在社會(huì)中鼓勵(lì)成立軟件測(cè)試培訓(xùn)機(jī)構(gòu)，為第三方軟件軟件測(cè)試行業(yè)的發(fā)展培育專(zhuān)業(yè)的人才。

（4）規(guī)范第三方軟件測(cè)試市場(chǎng)。隨著第三方軟件檢測(cè)需求的不斷增加，第三方軟件檢測(cè)機(jī)構(gòu)不斷增多，一些企業(yè)甚至在購(gòu)買(mǎi)一兩套自動(dòng)化測(cè)試工具、招聘幾個(gè)軟件專(zhuān)業(yè)相關(guān)的人員情況下，就成立了軟件測(cè)試中心，導(dǎo)致測(cè)試的軟件質(zhì)量不過(guò)關(guān)，用戶不滿意，用戶漸漸會(huì)不信任第三方軟件測(cè)試，從而會(huì)影響軟件測(cè)試行業(yè)的可持續(xù)發(fā)展。為了使我國(guó)第三方軟件測(cè)試行業(yè)健康發(fā)展，我國(guó)需要規(guī)范第三方軟件檢測(cè)機(jī)構(gòu)的入市條件，為軟件測(cè)試行業(yè)的發(fā)展制定一系列的規(guī)范，確保第三方檢測(cè)市場(chǎng)健康發(fā)展。

6 結(jié) 語(yǔ)

第三方軟件測(cè)試在我國(guó)已經(jīng)有了二三十年的發(fā)展歷史，為我國(guó)軟件產(chǎn)業(yè)的健康發(fā)展做出了突出貢獻(xiàn)，且由于第三方測(cè)試具有客觀、公正、獨(dú)立等特點(diǎn)，已經(jīng)逐漸被軟件用戶接受。在第三方軟件測(cè)試中，經(jīng)常會(huì)遇到時(shí)間緊、任務(wù)重、責(zé)任大、三方關(guān)系不好協(xié)調(diào)等問(wèn)題，但是隨著軟件企業(yè)和用戶對(duì)軟件質(zhì)量的要求不斷提高，第三方軟件測(cè)試服務(wù)需求將不斷增加，必將迎來(lái)蓬勃發(fā)展。

主要參考文獻(xiàn)

[1]鄭麗娜，王威，周悅.中國(guó)第三方軟件測(cè)試發(fā)展現(xiàn)狀分析[J].軟件產(chǎn)業(yè)與工程，2012（5）.

[2]周萍，吳娓娓.軟件第三方測(cè)試實(shí)施中的問(wèn)題及建議[J].軟件設(shè)計(jì)開(kāi)發(fā)，2009（28）.

[3]陳锃基，黃茂生.軟件第三方確認(rèn)測(cè)試的管理與策略[J].電子產(chǎn)品可靠性與環(huán)境試驗(yàn)，2005（4）.

[4]楊文娟.試論第三方軟件測(cè)試發(fā)展現(xiàn)狀及對(duì)策[J].網(wǎng)絡(luò)與信息工程，2016（10）.