天天看點

自動化測試架構: 與FinalBuilder結合

當自動化測試的腳本編輯器完成之後,根據使用者回報,這樣确實大大提高了工作效率。并且代碼的管理确實變得有效和可控。現在此項目已經開始向另一個管理系統嘗試應用。可以預計,會有一些新的功能加入。

不過,我們回過頭來思考一個問題——自動化的問題。這是我們最終的目的。雖然說自動化測試架構能夠解決軟體本身的執行問題,但是一次完整的測試,必然是要覆寫全過程的。很顯然,我們的架構不能解決這個問題。

我做過很多項目的每日版本構造,是以對finalbuilder比較熟悉。我也同時意識到finalbuilder可以彌補我們架構在這方面的缺陷。很自然的,我将這個軟體引入到我們系統中來。

這個軟體在業界是非常有名的,很多人都很熟悉其用法。不過原來都是開發人員在做,測試人員不是很熟悉。是以我在最近對參與自動化測試的幾位測試人員,做了簡單的教育訓練。考慮到這篇文章的部分讀者也是測試人員,是以我在這裡也簡單的介紹一下finalbuilder。如果你使用過finalbuilder,可以跳過下面這段文字。

finalbuilder解決的是任務流的問題。就像我們以前的dos系統的大部分程式一樣,沒有界面互動部分,一次輸入,直接傳回最終處理結果。這點和我們的自動化目标不謀而合。

在finalbuilder中,最本質的就是一次任務的執行。任務的執行包括兩部分:執行環境+執行資料。執行環境往往包括windows系統自帶的一些程式,包括copy,xcopy等等shell指令。也有系統中已經安裝的程式,如delphi、vc、svn等等。而執行資料,則是指我們的輸入了!由于我們要達到在執行中不存在界面互動,那麼就必然要求我們将所有需要互動的資訊一次性地輸入。于此同時,我們的環境程式,也必須同時支援此種模式(一般這種模式,稱之為指令行模式)。

對于使用finalbuilder的人來講,就有必要了解相關程式的指令行調用方式。這樣有助于我們使用和編寫任務。如果是我們自己研發一個程式,那麼因為要使用到finalbuilder中來,也有必要支援指令行模式。

在finalbuilder中,最主要的還是順序流程,當然它也支援條件(if)、分支(case)、循環(loop)。最新的版本還有多線程協同。不過在使用初期,主要還是以順序流程為主了。

最關鍵最有用的就是run dos command和execute programe兩個action(任務)了。有了這兩個,你幾乎可以完成任何事情。當然了finalbuilder還提供了很多現成的控件,使得你可以通過配置(而不是指令行)來編寫任務。這大大降低了使用難度。不過,不可避免的會有一些需求需要我們自己編寫指令行,是以着兩個action必須掌握。

finalbuilder的自動執行,是使用windows的計劃任務來完成的。在其菜單中有生成計劃任務的功能。順便說一句,finalbuilder也一樣支援指令行模式,是以多個finalbuilder之間可以互相調用。這對我們的自動化非常有利。

好了,經過簡單介紹之後,我們可以發現,使用finalbuilder确實可以幫助我們解決問題。

那麼,我們需要解決哪些問題呢?下面是我列出的一份清單,這份清單是按照順序列出的:

解除安裝已經安裝的目标軟體。

删除所有目标軟體想過目錄,保障幹淨環境

擷取并複制目标軟體安裝程式

擷取自動化測試腳本和架構程式

安裝目标軟體

安裝自動化測試架構

執行目标軟體

執行目标軟體的自動化測試腳本,如:冒煙測試

生成自動化執行日志,分析結果

發送郵件通知自動化負責人

上面的這些事情,所有需要完成的功能,其實都已經做好了。因為我們通過手工确實可以走到最後。但是要做到覆寫全過程的自動化的想法,還需要各個工具軟體互相協調。

首先是軟體的安裝和解除安裝,這需要程式保障指令行模式的安靜運作。(安裝和解除安裝都是需要人工互動的),剛好我們公司的安裝程式支援這個模式,省去了很多麻煩。不過,很多安裝軟體也都是支援的,隻要多查查資料就可以了。

複制檔案就簡單多了,finalbuilder和windows都已經提供了很多指令。

關于自動化測試的執行,就對我們的自動化腳本編輯器提出了需求。針對這個需求,我好幾天加班加點才加進去。主要是程式的協同性問題。必須等到目标軟體的主窗體完全啟動完畢。另外,需要對中途的意外退出,作出嚴格的防範,保障自動化測試能夠有始有終。這裡面增加了一個逾時的概念,可以保障最後程式的退出。

分析日志更是重要,事實上,沒有日志的自動化測試沒有人願意去做。目前還是先根據一些簡單的需求,做了一些統計,相信以後還會增加的功能是版本日志對比。這樣可以看到系統的穩定性變化趨勢。

ok,在使用finalbuilder之後,我們已經初步将一個完整的自動化測試過程建構起來。不過正如部落格上的一位讀者所說的,下面要重點關注腳本的方案設計了。 

繼續閱讀