天天看點

螞蟻金服開源自動化測試架構 SOFAACTS

SOFAStack

Scalable Open Financial Architecture Stack

是螞蟻金服自主研發的金融級分布式架構,包含了建構金融級雲原生架構所需的各個元件,是在金融場景裡錘煉出來的最佳實踐。

螞蟻金服在 SOFAStack 體系内研發了基于模型驅動的自動化接口測試架構 SOFAACTS。

GitHub 位址:

https://github.com/alipay/sofa-acts

背景

伴随着業務需求的爆發,螞蟻金服金融級分布式架構品質測試活動變得複雜起來,表現在測試的業務場景複雜,諸如分布式事務處理流程場景、并發性、賬戶狀态多樣性、幂等性和相容性等等。在原有的自動化測試架構下,測試流程編排極易出現測試資料備援分散、可維護性差、人工編碼成本高和測試驗證點易遺漏的問題。

如何解決上面的問題呢?

SOFAACTS 介紹

SOFAACTS 由 IDE 和測試引擎組成,下圖為産品架構圖:

螞蟻金服開源自動化測試架構 SOFAACTS

架構适配 TestNg+Spring 的測試上下文環境,以 YAML 為資料載體并在此上建構資料模型驅動,具有契合快速網際網路發展和複雜分布式金融系統特點的優良特性:

模型驅動和标準執行引擎;

精細化校驗和資料的自動回寫;

具有靈活的可擴充性;

用例可視化維護。

1.模型驅動和标準化

在測試用例資料與測試代碼分離的探索上,很多測試架構采用資料驅動的方式,但這也無法從容應對金融級的複雜業務場景。架構對用例資料進行了深度抽象,提出模型驅動理念,研發出基于模型的資料驅動和标準化執行引擎,實作了資料和代碼的分離管理,同時對測試過程中的資料清理、資料準備、用例執行、結果校驗階段進行标準化,做到測試資料維護和測試代碼的簡潔優雅。用例執行時使用者無需關注資料如何加載,結果和期望資料如何比對,隻需要關注測試資料和執行結果。

接下來,我們介紹如何使用 SOFAACTS 來高效率地完成一鍵生成資料模型生成和一鍵生成測試腳本。

資料模型生成

首先進行資料模型的準備,以友善之後模版化地快速建立對象和表,按照如下方式來準備 DB 資料、接口請求參數和傳回結果對象模型。

DB 資料模型生成

1.任意測試代碼中右擊-> SOFAACTS 功能->生成 DB 表結構模闆;

螞蟻金服開源自動化測試架構 SOFAACTS

2.選擇生成的目标測試工程;

螞蟻金服開源自動化測試架構 SOFAACTS

3.點選确認後選擇并添加需要生成模型的表即可生成。

類對象模型生成

1.待構模組化型的類定義的任意方法上右擊-> SOFAACTS 功能->模闆生成,生成目前對象的模型;

螞蟻金服開源自動化測試架構 SOFAACTS

2.生成完成後,我們可以在下圖位置找到生成的資料對象模型;

螞蟻金服開源自動化測試架構 SOFAACTS

3.按照上述步驟,這樣我們就生成了接口對象模闆。

現在,我們開始進行腳本一鍵生成:

測試腳本生成

SOFAACTS IDE 提供測試腳本自動生成功能,無需手動編碼。操作方式如下:

1.被測接口方法上點選,選擇 SOFAACTS 功能-->生成測試用例;

螞蟻金服開源自動化測試架構 SOFAACTS

2.這時會彈出一個文本框,填寫腳本生成的位置和編碼格式,如下:

螞蟻金服開源自動化測試架構 SOFAACTS

3.填寫完成後,點選 OK 即可自動生成如下測試腳本,可以看出模型驅動生成的腳本精簡而優雅。

螞蟻金服開源自動化測試架構 SOFAACTS

原來資料驅動下的腳本是如下面圖這樣的,測試資料備援分散,人工編碼成本高維護性差。

螞蟻金服開源自動化測試架構 SOFAACTS

實踐證明 SOFAACTS 用例的測試代碼建構效率提高 80% ,測試資料精簡到 1/case 數。

2.精細化校驗

在解決複雜業務場景下測試驗證難、易遺漏等問題時,SOFAACTS 基于代碼行為跟蹤和分析理念,通過反射機制和日志解析實作結果資料的自動采集,以此做為場景用例校驗的資料基線,并在持續內建時進行基線全量因子比對來達到精細化驗證。如下圖:

螞蟻金服開源自動化測試架構 SOFAACTS

同時,為了提高自動采集後資料回填的效率,架構支援預校驗資料的自動寫入能力,進一步實作了資料的自動化精細校驗。如下圖:一鍵點選即可采集到校驗資料基線,在螞蟻内部實踐中 ACTS 做到了結果校驗效率提升至少 80%,場景驗證 0 遺漏。

螞蟻金服開源自動化測試架構 SOFAACTS

3.靈活可擴充

架構為了應對各種特殊業務測試情況而不需要過多改動,設計上應用高内聚與低耦合原則,支援既可以複用架構底層代碼又可以針對業務個性化情況做擴充的能力。整個架構提供了豐富的 API,測試執行過程每個方法、每個類以便測試執行過程的每個階段(如下圖)都能夠在測試腳本裡面被重新為其他方法或者被其他多态的子類替換,這樣讓架構變得更通用,既賦予了架構輕量性又增加了靈活性。

螞蟻金服開源自動化測試架構 SOFAACTS

自定義的 API 如下:

螞蟻金服開源自動化測試架構 SOFAACTS

API 的具體使用請詳細學習産品使用手冊。

4.用例可視化維護

架構支援研發內建環境的一站式編輯,高效的用例腳本和資料維護,有效減少重複性的資料準備代碼。如下圖:

螞蟻金服開源自動化測試架構 SOFAACTS

總結

以上是對 SOFAACTS 測試架構的基本介紹,SOFAACTS 還有諸多能力,歡迎查閱詳細的使用手冊(連結見底部)。

目前,SOFAACTS 已經在螞蟻金服大範圍使用,分鐘級用例編寫 10 倍效能提升,累計用例個數 10w 以上,高頻功能使用可達近 2000 次/日,并持續保持着旺盛的生命力。

目前,代碼已開源托管在 GitHub 上,歡迎關注,同時也歡迎業界愛好者共同創造更好的 SOFAACTS。

GitHub 項目位址:

相關連結

SOFAACTS :

API 産品使用手冊:

https://www.sofastack.tech/sofa-acts/docs/Usage-API

SOFAACTS 詳細使用手冊:

https://www.sofastack.tech/sofa-acts/docs/Home

繼續閱讀