簡介

許多組織在采購測試自動化工具時沒有進(jìn)行適當(dāng)?shù)难芯克教瘢涣私庠S可模式顷级、所需的專業(yè)支持或內(nèi)部技術(shù)專長的可用性，結(jié)果是失望而歸谒麦。

采購過程可能是痛苦和耗時的。許多組織有采購流程和團(tuán)隊來協(xié)助測試自動化團(tuán)隊收集信息并代表他們采購工具哆致。建立和批準(zhǔn)新的工具供應(yīng)商需要時間和大量的后續(xù)工作绕德。

解許可證模式

軟件許可證管理器用于控制軟件產(chǎn)品的使用地點和使用方式。許可證管理器保護(hù)摊阀、遵守耻蛇、監(jiān)測和跟蹤軟件許可證協(xié)議和使用情況踪蹬。許可證管理器提供廣泛的許可證模式，如產(chǎn)品激活臣咖、試用許可證跃捣、訂閱許可證、基于功能的許可證和浮動許可證夺蛇。在許多情況下疚漆，許可證管理器通過互聯(lián)網(wǎng)遠(yuǎn)程檢查許可證是否到位，并跟蹤軟件的使用情況刁赦。

軟件資產(chǎn)管理或日志娶聘。這是由最終用戶用來管理他們從許多不同的軟件供應(yīng)商那里采購或授權(quán)的軟件。這些都是用來核對軟件許可證的截型，對于大多數(shù)小型組織來說，主要是通過電子表格進(jìn)行管理儒溉。大型和中型組織維護(hù)一個 "配置管理數(shù)據(jù)庫 "或 "CMDB庫"宦焦，作為資產(chǎn)管理的數(shù)據(jù)倉庫。CMDB存儲了關(guān)于IT環(huán)境顿涣、組件波闹、硬件資產(chǎn)、軟件資產(chǎn)（被稱為配置項目）和許可證的信息涛碑。

產(chǎn)品激活精堕。這是一種許可證驗證機(jī)制，它可以防止違反軟件許可證蒲障。當(dāng)用戶從使用其免費版本轉(zhuǎn)為購買許可證時歹篓，激活可以使軟件停止阻止用戶使用。

產(chǎn)品密鑰揉阎。這可以檢查并確認(rèn)該軟件是來自供應(yīng)商的原件庄撮。例如，微軟Windows的實體拷貝在包裝盒內(nèi)的標(biāo)簽或卡片上有一個25個字符的產(chǎn)品密鑰毙籽，或者性能測試工具LoadRunner的許可證密鑰可以為現(xiàn)有客戶在線下載洞斯。

下面的列表涵蓋了不同類型的許可證模式和相關(guān)費用，通常用于測試自動化工具坑赡。

• 公共領(lǐng)域烙如。這些工具在公共領(lǐng)域可用，沒有所有權(quán)毅否，如版權(quán)亚铁、商標(biāo)或?qū)＠糜谛薷暮头职l(fā)。它們可以免費使用螟加。

圖片.png

• 無許可證刀闷。這些工具可供自由使用熊泵、修改和分發(fā)，只要版權(quán)由原所有者保留甸昏。
• 免費和開放源碼軟件（FOSS Free and open-source software）顽分。這些工具可自由授權(quán)使用，并鼓勵與社區(qū)自愿分享源代碼以改進(jìn)軟件施蜜。比如Pytest卒蘸、Selenium, Appium。
• 原始設(shè)備制造商（OEM Original equipment manufacturer）翻默。OEM許可證一般由制造商安裝在新的設(shè)備上缸沃，不能在其他機(jī)器上使用，例如微軟的Windows和防病毒軟件都預(yù)裝在新的Windows筆記本上修械。這種許可證一般只有很短的使用期趾牧，除非續(xù)期。
• 通用公共許可證（GPL）肯污。這是一個供最終用戶學(xué)習(xí)翘单、分享和修改軟件的免費許可證。
• 多重許可證蹦渣。這是在兩套或更多不同的條款和條件下分發(fā)軟件哄芜，例如，軟件供應(yīng)商將同一個軟件以GPL和OEM的形式分發(fā)給兩套不同的終端用戶柬唯。軟件的功能是相同的认臊。但是，使用方式是不同的锄奢。
• 允許性軟件許可證失晴。一種自由軟件許可證，對使用拘央、修改和分發(fā)的限制最少师坎。
• 專有軟件。這是在嚴(yán)格的版權(quán)許可下堪滨，源代碼通常向最終用戶隱藏胯陋，防止修改，例如袱箱，Tosca和Eggplant遏乔。
• 訂閱許可。這是一種定期更新的許可发笔，例如Azure DevOps的用戶可以通過Azure按月付費盟萨，或者購買傳統(tǒng)的軟件許可，這需要3年的承諾了讨。BlazeMeter是另一個基于年度訂閱的工具捻激。
• 并發(fā)/浮動許可證制轰。一種基于同時訪問的用戶數(shù)量的軟件許可證。軟件許可證經(jīng)理一般會跟蹤和監(jiān)控使用情況胞谭，任何超過最大并發(fā)量的用戶都被禁止使用垃杖。
• 固定許可證。這是專門針對一臺機(jī)器的丈屹，也被稱為座位调俘，在任何時候都由一個用戶使用。
• 命名許可旺垒。這是一個分配給單個用戶的單一許可證彩库。
• 虛擬用戶（VU）。這通常是一個定義的虛擬用戶或 "Vusers "的數(shù)量先蒋，可以在一個時期內(nèi)無限次使用該工具骇钦。這通常用于性能測試工具。
• 隨用隨付的許可證竞漾。這是一種基于使用量的許可眯搭。

接口測試工具

• API/Web服務(wù)測試工具
  • SoapUI
    • 廣泛用于REST、SOAP畴蹭、Web服務(wù)和API測試
    • 支持HTTP通信的記錄坦仍、編輯和回放
    • 易于使用鳍烁，包括 "拖放 "和與其他工具集成
    • 允許開發(fā)您自己的功能集作為SoapUI的插件
    • 高度安全和開放源代碼
    • 用于網(wǎng)絡(luò)服務(wù)的自動化功能叨襟、回歸、安全幔荒、API和負(fù)載測試
    • 支持領(lǐng)先的技術(shù)和標(biāo)準(zhǔn)
• 火狐chrome插件restclient和客戶端工具Postman
  • 流行的API測試工具
  • 可在Windows糊闽、Mac和Linux上運行
  • 促進(jìn)API數(shù)據(jù)的協(xié)作和共享
  • 可在Postman界面中編寫布爾測試
• curl/requests/httpie
  • 命令行或后臺運行，方便自動化
  • 強(qiáng)悍的編程能力爹梁。
• REST測試REST服務(wù)的框架
• Assured
  • Java領(lǐng)域特定語言的開源平臺
  • 良好的社區(qū)支持
• RapidAPI
  • 廣泛使用右犹，擁有龐大的社區(qū)基礎(chǔ)
  • 測試各種各樣的API
  • 用于網(wǎng)絡(luò)服務(wù)的功能和性能測試
  • 與CI/CD工具集成
• Katalon Studio
  • 支持SOAP和RESTful請求
  • 用于API/網(wǎng)絡(luò)服務(wù)、UI功能和移動測試
  • 支持?jǐn)?shù)據(jù)驅(qū)動的方法

單元測試工具

• Pytest/nose/unittest 類似有java的junit和testNG等

  • 開源的單元測試框架
  • 支持TDD環(huán)境
  • 專門為Python編程而設(shè)計姚垃，也可用作自動化測試基礎(chǔ)框架
  • 廣泛使用和流行

• HtmlUnit

  • 支持JavaScript的開源單元測試框架
  • 測試Web應(yīng)用程序的框架
  • 它提供GUI功能念链，如表單、鏈接和表格
  • 提供開源的Java庫
  • 支持HTTP积糯、HTTPS等協(xié)議

功能和網(wǎng)絡(luò)測試工具

• Selenium

  • 開源的功能測試工具
  • 流行和廣泛使用
  • 用于網(wǎng)絡(luò)應(yīng)用程序測試
  • 接受各種語言的測試腳本掂墓，如Python、C#看成、Java君编、Perl、PHP川慌、Ruby和Groovy吃嘿。
  • 良好的社區(qū)支持
  • 與各種瀏覽器祠乃、Windows、Mac和Linux兼容
  • 提供記錄和回放功能
  • 與Agile兑燥、DevOps和CD工作流程相結(jié)合
  • 與Selenium Grid集成亮瓷，允許使用BrowserStack和SauceLabs等工具進(jìn)行基于云的跨瀏覽器測試
  • 支持移動測試
  • 提供大量的插件庫
  • 提供跨瀏覽器、跨平臺和第三方的集成
  • 支持并行測試執(zhí)行

• UFT One/QTP/Testcomplete等贪嫂，很貴寺庄，擴(kuò)展性一般，國內(nèi)主流公司一般不用力崇。

• 領(lǐng)先的功能和網(wǎng)絡(luò)自動化工具

• 授權(quán)軟件

• 支持Java斗塘、.Net、SAP亮靴、Oracle馍盟、Web服務(wù)

• 支持移動測試、跨瀏覽器和第三方集成

• 支持?jǐn)?shù)據(jù)驅(qū)動和關(guān)鍵字驅(qū)動的測試

• 領(lǐng)先的測試管理工具

• Tosca

• 端到端的功能和網(wǎng)絡(luò)測試工具

• 使用基于模型的方法

• 獨立于軟件技術(shù)

• 用于功能和移動測試

• 提供儀表盤茧吊、分析贞岭、集成和分布式執(zhí)行

• 支持持續(xù)集成和DevOps實踐

• 容易上手

• Eggplant

• 用于功能、網(wǎng)絡(luò)和移動測試的流行工具

• 測試案例可以從命令行運行

• 支持Windows搓侄、macOS瞄桨、iOS和Android

移動測試工具

• Appium

  • 開源的測試自動化工具
  • 移動測試工具，適用于混合讶踪、本地和基于Web的應(yīng)用程序
  • 它支持跨平臺芯侥，可在Mac和Windows上使用
  • 創(chuàng)建UI測試并支持代碼重用
  • 支持多種編程語言的測試腳本，如Python乳讥、Java柱查、Ruby、JavaScript云石、PHP唉工。
  • 與CI/CD工具集成
  • 與不同的測試工具集成

• TestComplete 較貴

• 為網(wǎng)絡(luò)、桌面和移動應(yīng)用提供UI測試

• 允許測試本地和混合移動應(yīng)用程序

• 多個移動平臺上進(jìn)行測試

• 支持Python汹忠、JavaScript淋硝、JScript、C#和C++宽菜。

• 與各種CI/CD工具集成

• 提供記錄和回放功能谣膳，支持關(guān)鍵字驅(qū)動的測試

• 建立在Appium開源框架之上

• Kobiton

• 廣泛應(yīng)用于移動測試

• 支持Appium

• 與CI/CD工具集成

• 與各種框架和其他工具集成

測試管理和缺陷管理工具

測試管理工具提供管理端到端測試生命周期和過程的功能。缺陷或錯誤管理工具促進(jìn)了缺陷和錯誤的報告赋焕、跟蹤参歹、監(jiān)控、關(guān)閉和度量隆判。強(qiáng)烈建議使用同一供應(yīng)商的測試管理犬庇、缺陷管理僧界、功能測試自動化和非功能測試自動化工具套件，因為這有助于跨工具的數(shù)據(jù)流臭挽，提供更準(zhǔn)確的質(zhì)量狀況捂襟、詳細(xì)報告和單一的集中許可管理。這些工具在測試自動化中發(fā)揮著重要作用欢峰，因為它們有助于以集中的方式運行測試葬荷，無論是在預(yù)定的夜間構(gòu)建還是在持續(xù)集成構(gòu)建中。

• ALM

  • Micro Focus應(yīng)用生命周期管理（ALM）提供了需求管理纽帖、測試計劃宠漩、測試用例開發(fā)、測試執(zhí)行和缺陷管理的功能懊直。
  • 受瀑布式項目的歡迎
  • 基于網(wǎng)絡(luò)的工具
  • 廣泛用于測試和缺陷管理
  • 有企業(yè)內(nèi)部和云版本

• Azure DevOps

  • 提供版本控制扒吁、需求管理、自動構(gòu)建室囊、測試雕崩、報告和發(fā)布管理
  • 受到敏捷和DevOps項目的歡迎
  • 廣泛用于缺陷管理
  • 基于網(wǎng)絡(luò)的工具，有企業(yè)內(nèi)部和云端的版本

• Jira

  • 提供測試融撞、需求盼铁、缺陷、報告和發(fā)布管理的功能
  • 許多測試功能來自于第三方的附加產(chǎn)品尝偎，需要支付額外的許可費用
  • 基于網(wǎng)絡(luò)的工具饶火，在Agile和Kanban項目中很受歡迎

跨瀏覽器測試工具

跨瀏覽器測試工具提供了在短時間內(nèi)在多個瀏覽器上測試網(wǎng)絡(luò)應(yīng)用的功能。這被稱為瀏覽器兼容性測試冬念，在Chrome趁窃、Firefox牧挣、Internet Explorer（IE）急前、Edge、Safari和其他瀏覽器上驗證解決方案瀑构。

• LamdaTest

  • 基于云的跨瀏覽器測試平臺
  • 支持手動裆针、視覺和自動測試
  • 在桌面和移動瀏覽器上驗證跨瀏覽器測試

• BrowserStack

• 支持超過2000種不同的真實瀏覽器和設(shè)備版本

• 提供驗證網(wǎng)絡(luò)解決方案的跨瀏覽器和操作系統(tǒng)測試的功能

• 支持CI/CD

• 支持Windows、Android寺晌、iOS和macOS平臺

• Browsera

• 驗證網(wǎng)絡(luò)解決方案的跨瀏覽器布局和腳本錯誤

• 提供自動化的瀏覽器兼容性測試

• 網(wǎng)站爬行功能允許對單個網(wǎng)站的所有網(wǎng)頁進(jìn)行測試

性能和負(fù)載測試工具

• Locust

  • 廣泛使用和流行的工具, github星級最高的性能測試工具
  • python開源世吨，用于負(fù)載測試，底層c實現(xiàn)呻征，性能遠(yuǎn)超其他工具耘婚。
  • 有大量的用戶社區(qū)
  • 支持多種類型的協(xié)議，python編碼陆赋，表現(xiàn)力極強(qiáng)

• LoadRunner 很貴沐祷，擴(kuò)展性一般嚷闭，國內(nèi)主流公司一般不用

  • 廣泛使用和流行的工具
  • 基于許可證的測試工具，用于負(fù)載測試
  • 有大量的用戶社區(qū)
  • 與Windows和Linux兼容
  • 在多個企業(yè)環(huán)境中工作
  • 支持多種類型的協(xié)議

• JMeter/ngrinder

  • 開源
  • 用于負(fù)載測試的開源工具
  • 廣泛使用赖临，擁有龐大的用戶群體
  • 支持各種服務(wù)器類型

• BlazeMeter

  • 廣泛用于移動應(yīng)用程序胞锰、網(wǎng)站和API的負(fù)載測試
  • 基于許可證的負(fù)載測試工具

• Silk Performer

  • 用于負(fù)載測試的基于許可證的測試工具
  • 有大量的用戶社區(qū)

安全和滲透測試工具

• Netsparker

  • 安全測試工具，用于檢查Web應(yīng)用程序中的漏洞
  • 流行和廣泛使用的滲透測試工具
  • 搜索網(wǎng)絡(luò)應(yīng)用中可利用的SQL和跨站腳本（XSS）漏洞
  • 驗證跨站腳本與SQL注入的關(guān)系

• Acunetix

  • 檢查網(wǎng)絡(luò)應(yīng)用程序中漏洞的安全測試工具
  • 廣泛使用的滲透測試工具
  • 驗證跨站腳本測試和深入的SQL注入
  • 提供企業(yè)內(nèi)部和云測試解決方案

AI/ML驅(qū)動的測試工具

由AI和ML驅(qū)動的測試工具可以預(yù)測哪里最可能出現(xiàn)質(zhì)量問題兢榨，關(guān)聯(lián)數(shù)據(jù)嗅榕，并快速識別和解決相應(yīng)問題。

• Applitools SDK

  • 支持所有主要的測試自動化框架和編程語言吵聪，涵蓋Web凌那、移動和桌面應(yīng)用程序
  • 與GitHub、Microsoft Azure吟逝、DevOps等集成案怯。

• Eggplant AI

  • 使用基于模型的方法來自動生成測試案例
  • 通過設(shè)計基于用戶行為的測試用例，提高測試覆蓋率

• Retest

  • 自動實現(xiàn)測試自動化
  • 檢測功能差異和視覺差異

• Mabl

  • 提供測試生成和執(zhí)行的功能
  • 提供無腳本測試澎办、跨瀏覽器測試和自適應(yīng)自動修復(fù)功能
  • 測量應(yīng)用程序的性能

測試框架工具

這些工具比單一的測試自動化工具或庫更能實現(xiàn)數(shù)據(jù)驅(qū)動的測試和關(guān)鍵字驅(qū)動的測試嘲碱。

• pytest: 前面已經(jīng)有介紹
• RobotFramework：廣泛使用的開源框架，用于驗收測試比較佳局蚀。不建議在功能測試中使用麦锯，屏蔽了python的部分靈活性，庫支持比較費勁琅绅。
• pytest-bdd/Cucumber/Behat/JBehave/Fitnesse/Serenity
  • 使用面向業(yè)務(wù)的文檔扶欣，用于ATDD
  • 開源

本文僅列出了部分工具，更多工具請參考https://github.com/china-testing/python-api-tesing 千扶。

成本

成本是測試自動化和測試自動化工具設(shè)置的一個關(guān)鍵因素料祠。了解工具采購、許可模式澎羞、年度維護(hù)髓绽、專業(yè)服務(wù)以及最重要的是建立測試自動化工具所需的基礎(chǔ)設(shè)施所涉及的各種成本是很重要的。以下是在工具設(shè)置階段需要考慮和進(jìn)一步探討的成本因素清單妆绞。

• 工具基礎(chǔ)設(shè)施和設(shè)置 - 開源和許可的自動化工具設(shè)置涉及基礎(chǔ)設(shè)施成本顺呕。性能測試涉及高的基礎(chǔ)設(shè)施成本和大量的虛擬用戶±ㄈ模客戶端株茶、服務(wù)器、數(shù)據(jù)庫图焰、報告和存儲都需要被考慮启盛。
• SaaS、PaaS和混合 - 云和企業(yè)內(nèi)部版本的工具涉及不同的成本〗┐常基于云的版本涉及啟用對云的訪問笤闯，并將測試環(huán)境配置到SaaS/PaaS平臺上。這可能涉及改變防火墻棍厂、負(fù)載平衡器配置颗味、網(wǎng)絡(luò)變化、將互聯(lián)網(wǎng)協(xié)議（IP）地址添加到白名單等牺弹。在訪問基于云的測試工具時浦马，應(yīng)考慮安全問題。在估計工作和成本時张漂，需要考慮上述所有因素晶默。
• 企業(yè)內(nèi)部 - 企業(yè)內(nèi)部和獨立的安全環(huán)境需要額外的成本，將工具下載到單獨的媒體航攒，并將工具實際安裝到環(huán)境中磺陡。測試團(tuán)隊可能需要特殊的權(quán)限和對環(huán)境的訪問來部署該工具。這涉及到建立和訪問物理或虛擬基礎(chǔ)設(shè)施漠畜。與供應(yīng)商币他、基礎(chǔ)設(shè)施團(tuán)隊協(xié)調(diào)的時間，安排停機(jī)時間來做升級憔狞，如果出了問題就回滾等等都需要考慮蝴悉。
• 詳細(xì)的設(shè)計 - 自動化工具是環(huán)境中的另一個軟件應(yīng)用程序，環(huán)境中的任何工具在安裝和部署前都可能需要詳細(xì)的設(shè)計和工程團(tuán)隊的批準(zhǔn)瘾敢。有時需要一個變更委員會來批準(zhǔn)安裝拍冠。這將涉及測試團(tuán)隊和其他團(tuán)隊的額外努力，如技術(shù)架構(gòu)師或變更管理簇抵。
• 采購 - 在咨詢或SI環(huán)境中庆杜，建議通過SI采購自動化工具，因為他們在為許多客戶采購工具方面有很好的專業(yè)知識碟摆，并與工具合作伙伴有長期的合作關(guān)系晃财。這有助于以一個相當(dāng)?shù)偷膬r格采購工具。然而焦履，SI會收取一定的服務(wù)費拓劝。
• 培訓(xùn) - 許多工具都有學(xué)習(xí)成本雏逾，工具供應(yīng)商對培訓(xùn)和安裝支持收取費用嘉裤。
• 專業(yè)服務(wù) - 來自工具供應(yīng)商的持續(xù)支持和維護(hù)。
• 許可證模式 - 了解許可證費用是如何運作的栖博，例如屑宠，市場上一個領(lǐng)先的性能測試工具有一個 "使用和損失 "的模式，因為每次負(fù)載測試都會從采購的總數(shù)量中減少Vusers仇让。
• 更新 - 更新費用是另一個需要考慮的工具選擇和成本的因素典奉。

在采購測試自動化工具之前躺翻，考慮所有上述成本因素是很重要的。你可能需要聯(lián)系現(xiàn)有的工具用戶和各自的供應(yīng)商卫玖，以了解測試自動化工具所涉及的成本公你。