摘要：隨著現(xiàn)代移動(dòng)通信技術(shù)的快速發(fā)展，通信行業(yè)軟件產(chǎn)品在各個(gè)領(lǐng)域中得到了廣泛的應(yīng)用，軟件的質(zhì)量成為用戶更加重視的問(wèn)題。傳統(tǒng)人力方式的通信軟件測(cè)試方法，既費(fèi)時(shí)又費(fèi)力，而且無(wú)法充分保障軟件測(cè)試的準(zhǔn)確性、縮短軟件開發(fā)周期和節(jié)約資源。自動(dòng)化測(cè)試技術(shù)是現(xiàn)階段軟件測(cè)試研究的一個(gè)熱點(diǎn)。為了解決通信業(yè)務(wù)軟件測(cè)試過(guò)程中存在的問(wèn)題，本文結(jié)合移動(dòng)通信軟件系統(tǒng)和自動(dòng)化測(cè)試工具的應(yīng)用，以解決自動(dòng)化測(cè)試平臺(tái)的應(yīng)用問(wèn)題。

關(guān)鍵詞：通信軟件；自動(dòng)化測(cè)試；測(cè)試腳本

引言

自動(dòng)化測(cè)試指的是指軟件測(cè)試的自動(dòng)化，把以人為驅(qū)動(dòng)的測(cè)試行為轉(zhuǎn)化為機(jī)器執(zhí)行的一種實(shí)踐過(guò)程，通過(guò)軟件和硬件的測(cè)試方式，大量節(jié)省人力，為保障軟件質(zhì)量，減少重復(fù)性測(cè)試工作，自動(dòng)化測(cè)試已被廣泛運(yùn)用。

1. WEB自動(dòng)化測(cè)試介紹

軟件回歸測(cè)試作為一種具有反復(fù)測(cè)試行為系數(shù)較高的軟件測(cè)試方法，軟件的測(cè)試貫穿了整個(gè)軟件開發(fā)的生命周期，對(duì)包含了階段性的軟件產(chǎn)品進(jìn)行了驗(yàn)證及活動(dòng)過(guò)程的確認(rèn)，充分解決了軟件中存在的問(wèn)題、用戶需求和不一致性等[1]。利用自動(dòng)化測(cè)試工具等或者其他方法，結(jié)合回歸測(cè)試運(yùn)行模型，能夠?qū)崿F(xiàn)對(duì)軟件的自動(dòng)化測(cè)試，以達(dá)到縮短軟件測(cè)試周期、提高軟件性能、保障軟件質(zhì)量的目的。因此，自動(dòng)化測(cè)試能夠有效反映出軟件測(cè)試的效率，降低測(cè)試時(shí)的成本消耗，并且還能夠解決某些無(wú)法手動(dòng)執(zhí)行的測(cè)試項(xiàng)目，對(duì)其進(jìn)行自動(dòng)化測(cè)試。自動(dòng)化測(cè)試是利用腳本來(lái)實(shí)現(xiàn)的，只需要對(duì)測(cè)試腳本進(jìn)行修改，實(shí)現(xiàn)自動(dòng)化測(cè)試，由此降低某些項(xiàng)目的測(cè)試工作量，提高測(cè)試效率。簡(jiǎn)單來(lái)說(shuō)，WEB自動(dòng)化測(cè)試能力是通過(guò)模擬人在WEB界面的操作，實(shí)現(xiàn)WEB系統(tǒng)的業(yè)務(wù)全流程自動(dòng)化測(cè)試。

2. 自動(dòng)化測(cè)試遇到的問(wèn)題

在被測(cè)試系統(tǒng)重新發(fā)布時(shí)，因?yàn)楸粶y(cè)系統(tǒng)服務(wù)停止，自動(dòng)化場(chǎng)景將呈現(xiàn)大范圍出錯(cuò)。現(xiàn)有的應(yīng)對(duì)方式有以下兩種，但均有缺點(diǎn)：（1）無(wú)法停止場(chǎng)景的繼續(xù)執(zhí)行，任由場(chǎng)景報(bào)錯(cuò)，只能寄希望于被測(cè)系統(tǒng)能盡快啟動(dòng)完成，被測(cè)系統(tǒng)重啟完成后，繼續(xù)執(zhí)行剩下的場(chǎng)景，執(zhí)行完成后，再分析和重新執(zhí)行出錯(cuò)的場(chǎng)景。但這樣會(huì)產(chǎn)生大量出錯(cuò)的場(chǎng)景，產(chǎn)生臟數(shù)據(jù)，給后期分析測(cè)試結(jié)果增加難度，并且耗時(shí)，大量出錯(cuò)還容易掩蓋真正的系統(tǒng)故障，極大提高了測(cè)試結(jié)果的分析難度和故障遺漏的概率。（2）人工到每一臺(tái)執(zhí)行機(jī)中，強(qiáng)行終止計(jì)劃執(zhí)行，然后被測(cè)系統(tǒng)重新發(fā)布完成后，重新下發(fā)整個(gè)測(cè)試計(jì)劃。目前每一次自動(dòng)化測(cè)試場(chǎng)景已經(jīng)達(dá)到了1000個(gè)以上，需要30臺(tái)以上執(zhí)行機(jī)執(zhí)行。需要到每一臺(tái)執(zhí)行機(jī)中去強(qiáng)制停止計(jì)劃，耗時(shí)耗力。如何在各種突發(fā)問(wèn)題出現(xiàn)時(shí)暫停自動(dòng)化測(cè)試再啟動(dòng)確保正常執(zhí)行，這是當(dāng)前急需解決的痛點(diǎn)。

3. 通信行業(yè)軟件系統(tǒng)的自動(dòng)化測(cè)試平臺(tái)設(shè)計(jì)研究

為了解決該痛點(diǎn)，我們?cè)O(shè)計(jì)了自動(dòng)化測(cè)試平臺(tái)的“剎車”功能，即自動(dòng)化執(zhí)行的暫停重啟。該功能用于出現(xiàn)各種意外問(wèn)題時(shí)進(jìn)行的中斷執(zhí)行，待問(wèn)題解決后可以再次正常啟動(dòng)[2]。其他功能包括斷點(diǎn)調(diào)試、條件暫停、手動(dòng)干預(yù)等。這些功能提供了靈活的暫停執(zhí)行方式，使測(cè)試人員能夠在需要時(shí)進(jìn)行調(diào)試、驗(yàn)證、人工干預(yù)等操作。通過(guò)斷點(diǎn)調(diào)試，測(cè)試人員可以在關(guān)鍵位置暫停執(zhí)行，檢查環(huán)境和變量值；條件暫停允許根據(jù)特定條件暫停執(zhí)行，以便進(jìn)行驗(yàn)證；手動(dòng)干預(yù)功能讓測(cè)試人員能夠手動(dòng)暫停執(zhí)行，進(jìn)行人工操作?；谧詣?dòng)化軟件工具SilkTest特有的4Test語(yǔ)言開發(fā)，并且在SilkTest工具的自動(dòng)化框架基礎(chǔ)之上進(jìn)行改造，自動(dòng)化測(cè)試管理平臺(tái)下發(fā)測(cè)試計(jì)劃后調(diào)度SilkTest生成工程文件，在自動(dòng)化執(zhí)行流程當(dāng)中的用例初始化階段進(jìn)行定時(shí)檢測(cè)暫停標(biāo)識(shí)，執(zhí)行機(jī)中獲取當(dāng)前計(jì)劃執(zhí)行的測(cè)試數(shù)據(jù)回傳到自動(dòng)化管理平臺(tái)服務(wù)器，再次啟動(dòng)將會(huì)進(jìn)行先進(jìn)先出原則的排隊(duì)機(jī)制有序執(zhí)行，測(cè)試數(shù)據(jù)、測(cè)試報(bào)告依據(jù)獲取的暫停前狀態(tài)標(biāo)識(shí)正常銜接，具體設(shè)計(jì)框圖如圖1所示。

3.1 一鍵暫停標(biāo)識(shí)模塊

測(cè)試人員決策是否暫停，可對(duì)暫停標(biāo)識(shí)進(jìn)行配置，執(zhí)行機(jī)中探測(cè)執(zhí)行暫停標(biāo)識(shí)，可支持錯(cuò)開時(shí)間隨機(jī)處理暫停，統(tǒng)一為執(zhí)行機(jī)暫停自動(dòng)化，保存測(cè)試計(jì)劃當(dāng)前進(jìn)度，保存待下次啟動(dòng)隊(duì)列排隊(duì)。

（1）在測(cè)試過(guò)程中的關(guān)鍵階段TestcaseEnter和TestcaseExit中，添加條件判斷語(yǔ)句。根據(jù)特定條件判斷是否滿足暫停測(cè)試的條件。

（2）如果滿足暫停條件，則觸發(fā)暫停操作。通過(guò)使用暫停標(biāo)識(shí)作為依據(jù)，在一定的時(shí)間范圍內(nèi)循環(huán)獲取暫停標(biāo)識(shí)，只要反饋還處于暫停狀態(tài)，繼續(xù)等待，并不再繼續(xù)執(zhí)行用例步驟，從而實(shí)現(xiàn)暫停測(cè)試執(zhí)行的目的。

（3）在暫停期間，可以記錄相關(guān)信息，如計(jì)劃的RunID、PlanID、案例名稱、場(chǎng)景名稱、暫停時(shí)間、測(cè)試結(jié)果等，這些記錄有助于后續(xù)的跟蹤和分析。

3.2 保存執(zhí)行狀態(tài)模塊

利用記錄相關(guān)信息，如計(jì)劃的RunID、PlanID、案例名稱、場(chǎng)景名稱、暫停時(shí)間、測(cè)試結(jié)果等，有助于后續(xù)的跟蹤和分析。創(chuàng)建一個(gè)數(shù)據(jù)表用于記錄暫停反饋信息，包括暫停時(shí)間、測(cè)試結(jié)果等字段。在測(cè)試腳本中，當(dāng)觸發(fā)暫停操作時(shí)，將相關(guān)暫停反饋信息插入到數(shù)據(jù)表中。

3.3 暫停環(huán)節(jié)模塊

記錄當(dāng)前測(cè)試計(jì)劃暫停的相關(guān)信息，同時(shí)，記錄一個(gè)待啟動(dòng)的計(jì)劃隊(duì)列，按照測(cè)試工號(hào)為主的對(duì)應(yīng)測(cè)試計(jì)劃RunID排列，以便在下一次啟動(dòng)計(jì)劃時(shí)按照隊(duì)列順序有序啟動(dòng)。在測(cè)試腳本的TestcaseEnter和TestcaseExit階段處理暫停操作[3]。在TestcaseEnter階段，檢查是否存在待處理的自動(dòng)化暫停標(biāo)識(shí)，并在數(shù)據(jù)表中記錄當(dāng)前測(cè)試計(jì)劃暫停的相關(guān)信息，同時(shí)，記錄一個(gè)待啟動(dòng)的計(jì)劃隊(duì)列，按照測(cè)試工號(hào)為主的對(duì)應(yīng)測(cè)試計(jì)劃RunID排列，以便在下一次啟動(dòng)計(jì)劃時(shí)按照隊(duì)列順序有序啟動(dòng)。在TestcaseExit階段，再次檢查是否存在待處理的自動(dòng)化暫停標(biāo)識(shí)，處理的邏輯依然是記錄計(jì)劃暫停的相關(guān)信息和計(jì)劃待啟動(dòng)的隊(duì)列。

3.4 再次啟動(dòng)計(jì)劃模塊

處理已存儲(chǔ)的暫停計(jì)劃相關(guān)信息，維護(hù)一個(gè)待啟動(dòng)的測(cè)試隊(duì)列，使用先進(jìn)后出（FIFO）的方式。再次啟動(dòng)執(zhí)行計(jì)劃，在TestcaseEnter階段，檢查自動(dòng)化暫停標(biāo)識(shí)是不是已開放，如果暫停已經(jīng)開放，不再循環(huán)等待，開始繼續(xù)執(zhí)行流程。當(dāng)重新啟動(dòng)測(cè)試執(zhí)行時(shí)，從關(guān)聯(lián)測(cè)試工號(hào)的待啟動(dòng)隊(duì)列獲取首個(gè)RunID，并根據(jù)當(dāng)前測(cè)試計(jì)劃的RunID情況進(jìn)行判斷。如果符合當(dāng)前測(cè)試計(jì)劃的RunID，則開始執(zhí)行，否則繼續(xù)暫停，繼續(xù)循環(huán)獲取暫停標(biāo)識(shí)是否開放。恢復(fù)后繼續(xù)執(zhí)行測(cè)試，在測(cè)試場(chǎng)景的具體步驟中，直到已完全打開登錄系統(tǒng)后的頁(yè)面，才將待啟動(dòng)隊(duì)列中的首個(gè)RunID移除。其他執(zhí)行機(jī)同樣獲取待啟動(dòng)隊(duì)列RunID，直到隊(duì)列中的所有RunID都被處理完畢。在重新啟動(dòng)執(zhí)行時(shí)，為避免自動(dòng)化測(cè)試工號(hào)的登錄沖突，可以在啟動(dòng)之前設(shè)置一定的隨機(jī)時(shí)間作為延遲測(cè)試工號(hào)的登錄。使用合適的函數(shù)，如一個(gè)固定時(shí)間加一個(gè)隨機(jī)時(shí)間數(shù)，在啟動(dòng)之前等待一段時(shí)間。

3.5 暫停異常處理模塊

在測(cè)試計(jì)劃中捕獲可能引發(fā)暫停、重啟動(dòng)的異常，例如特定的錯(cuò)誤或條件。當(dāng)出現(xiàn)異常時(shí)，測(cè)試計(jì)劃會(huì)暫停執(zhí)行，并可以在異常處理程序中定義相關(guān)操作，例如記錄錯(cuò)誤信息、生成報(bào)告或觸發(fā)其他操作。

3.6 日志信息處理模塊

在軟件測(cè)試工作開始之前，傳統(tǒng)的通信軟件測(cè)試平臺(tái)的操作步驟和過(guò)程非常復(fù)雜，場(chǎng)景較多。因此，為了解決測(cè)試過(guò)程中存在的各種復(fù)雜問(wèn)題，需要對(duì)自動(dòng)化平臺(tái)當(dāng)中的日志信息進(jìn)行文件保存，以此能夠完成對(duì)測(cè)試結(jié)果的標(biāo)準(zhǔn)進(jìn)行對(duì)比。

4. 測(cè)試結(jié)果與成效

4.1 測(cè)試工具

為了進(jìn)一步驗(yàn)證本文開發(fā)設(shè)計(jì)功能模塊的可行性，本文選擇使用Silktest作為測(cè)試工具，SilkTest是一款對(duì)企業(yè)級(jí)應(yīng)用進(jìn)行功能測(cè)試的產(chǎn)品，可用于測(cè)試Web、Java或是傳統(tǒng)的C/S結(jié)構(gòu)。SilkTest 提供了許多功能，使用戶能夠高效率地進(jìn)行軟件自動(dòng)化測(cè)試。這些功能包括：測(cè)試的計(jì)劃和管理；直接的數(shù)據(jù)庫(kù)訪問(wèn)及校驗(yàn)；靈活、強(qiáng)大的4Test 腳本語(yǔ)言，內(nèi)置的恢復(fù)系統(tǒng)（Recovery System）；具有使用同一套腳本進(jìn)行跨平臺(tái)、跨瀏覽器和技術(shù)進(jìn)行測(cè)試的能力。

4.2 實(shí)踐測(cè)試與成效分析

實(shí)踐測(cè)試結(jié)果見表1，其結(jié)果支持一鍵配置自動(dòng)化暫停標(biāo)識(shí)，同時(shí)支持統(tǒng)一調(diào)度執(zhí)行機(jī)中斷/執(zhí)行，通過(guò)中途暫停自動(dòng)化執(zhí)行，可以調(diào)試和排查問(wèn)題、提高測(cè)試效率和允許人工干預(yù)，還可以提供靈活性和可控性、適應(yīng)多環(huán)境測(cè)試以及驗(yàn)證測(cè)試結(jié)果等。

實(shí)踐證明本設(shè)計(jì)具有技術(shù)先進(jìn)性和獨(dú)立性，此能力可有效解決自動(dòng)化測(cè)試中斷后不能再續(xù)的痛點(diǎn)。其價(jià)值體現(xiàn)在調(diào)試和排查問(wèn)題、提高測(cè)試效率、提供靈活性和可控性以及適應(yīng)多環(huán)境測(cè)試等方面，可以幫助測(cè)試人員更好地管理測(cè)試進(jìn)度和資源，并提高自動(dòng)化測(cè)試的質(zhì)量和效果。本方案的成果好處主要體現(xiàn)在以下幾個(gè)方面：

（1）提高測(cè)試效率：斷點(diǎn)和繼續(xù)執(zhí)行功能可以避免重復(fù)執(zhí)行已經(jīng)完成的測(cè)試用例。當(dāng)遇到問(wèn)題或異常情況時(shí)，自動(dòng)化測(cè)試可以暫停，而不需要從頭開始執(zhí)行整個(gè)測(cè)試計(jì)劃。這節(jié)省了執(zhí)行時(shí)間，提高了測(cè)試效率。

（2）精確定位問(wèn)題：通過(guò)剎車啟停方案，可以在測(cè)試過(guò)程中剎車暫停，使得測(cè)試人員可以精確地定位問(wèn)題所在。測(cè)試人員可以檢查失敗的測(cè)試用例、錯(cuò)誤日志等信息，以便更準(zhǔn)確地分析問(wèn)題的根本原因。

（3）減少資源消耗：剎車啟停方案可以減少資源的消耗。當(dāng)出現(xiàn)問(wèn)題時(shí)，可以及時(shí)暫停測(cè)試，避免產(chǎn)生臟數(shù)據(jù)。

（4）提高測(cè)試準(zhǔn)確性：被測(cè)系統(tǒng)如果遇到異常情況（如重新發(fā)布），未有本方案前，自動(dòng)化測(cè)試場(chǎng)景會(huì)大范圍報(bào)錯(cuò)，大量的報(bào)錯(cuò)加大了測(cè)試人員分析結(jié)果難度，極大可能掩蓋了系統(tǒng)真正的故障。采用本剎車啟停方案，則避免了此類大范圍報(bào)錯(cuò)的發(fā)生，測(cè)試人員可以集中精力分析真正的出錯(cuò)故障，提高故障檢出能力，有效提高測(cè)試準(zhǔn)確性。

結(jié)語(yǔ)

綜上所述，自動(dòng)化軟件測(cè)試是充分保障軟件質(zhì)量的一種手段。因此，根據(jù)自動(dòng)化測(cè)試工具的基本原理，以及自動(dòng)化工具自身可靈活擴(kuò)展的一套自動(dòng)化框架，設(shè)計(jì)了一種自動(dòng)化測(cè)試暫停重啟方案并已開發(fā)完成，本文詳細(xì)介紹了該平臺(tái)的主要功能設(shè)計(jì)與實(shí)現(xiàn)?？傮w來(lái)說(shuō)，通信行業(yè)軟件系統(tǒng)的自動(dòng)化測(cè)試平臺(tái)設(shè)計(jì)需要結(jié)合具體的業(yè)務(wù)需求和技術(shù)環(huán)境進(jìn)行綜合考慮，通過(guò)科學(xué)合理的設(shè)計(jì)和實(shí)施，可以提高軟件的質(zhì)量和效率，降低人力成本，為企業(yè)的研發(fā)和運(yùn)營(yíng)帶來(lái)巨大的價(jià)值。

參考文獻(xiàn)：

[1]劉麗麗，杜永鋒.通信設(shè)備技術(shù)指標(biāo)自動(dòng)測(cè)試與故障診斷系統(tǒng)設(shè)計(jì)[J].軟件， 2023，44（5）：52-56.

[2]王奚，王新月，李航，等.面向PLC產(chǎn)品的自動(dòng)化測(cè)試系統(tǒng)平臺(tái)設(shè)計(jì)與實(shí)現(xiàn)[J].自動(dòng)化儀表，2022，43（5）：8-11，19.

[3]傅瑞華.面向測(cè)試用例生成的自動(dòng)化方法研究[D].成都：四川大學(xué)，2022.

作者簡(jiǎn)介：陳陽(yáng)，本科，工程師，研究方向：開發(fā)測(cè)試。