![]()
01、测试行业现状分析
快速获得反馈以了解在软件交付生命周期内更改所产生的影响，是构建高质量软件的关键。以前，团队依靠人工测试和代码检查来验证系统的正确性。此类检查和测试工作通常在开发完成后的一个单独阶段进行。然而，这种方法存在一些缺点：
- 手动回归测试耗时且费用高昂，成为整个流程中的瓶颈，导致无法频繁发布软件，开发者无法快速获得反馈。
- 人工检查和测试不可靠，人们在手动回归测试等重复性任务中通常表现不佳，并且很难通过检查来预测复杂软件系统的更改会产生什么样的影响。
- 开发者必须等待很长时间才能获取其更改的相关反馈，并且需要大量工作来对缺陷进行分类和修复。性能、安全性和可靠性问题通常需要进行设计更改，如果在此阶段发现这些问题，费用更高。
- 较长的反馈周期让开发者难以了解如何构建质量代码，质量有时会被视为“其他人的问题”。
- 开发者不负责测试自己的代码，很难了解如何编写可测试的代码。
- 对于不断改进的系统，及时更新测试文档需要大量的努力。
相反，团队应该：
ZadigX 具备管理软件开发全生命周期能力，几乎支持市面上所有测试工具和服务、以及平台系统，同时支持多种测试框架和不同的测试类型，通过强大的运行时环境治理和自定义工作流能力，为测试团队提供强有力的工程支撑
ZadigX 帮助测试团队，将测试服务和能力左移、右移到开发团队、运维团队等全生命周期中，尽早发现问题，让其他角色也参与到质量建设中来，规避因修复此类问题而造成额外成本。
02、持续测试实践思路
持续测试[2]是一种具体的工程实践，旨在确保系统在可靠性、安全性、操作性能和可用性方面的稳定性。它涵盖了多种测试类型，包括左移测试、右移测试、冒烟测试、单元测试、集成和消息传递测试、性能测试、功能测试、回归测试和用户验收测试等等。将持续测试[3]融入 ZadigX 的整个 DevOps 流程，能够实现高效的业务部署、快速发现和修复错误、改善用户体验，并最小化业务中断的成本。
![]()
03、用 ZadigX 落地持续测试
编排不同测试类型
静态代码扫描
支持主流的静态安全工具例如 SonarQube、Coverity，和任何自定义扫描工具。
如何配置：以 SonarQube 示例，新增代码扫描，指定扫描工具 <SonarQube>，配置待扫描的代码库、扫描脚本，开启质量门禁检查并配置触发器，具体的配置步骤可参考文档：如何配置静态代码扫描[4]。
![]()
如何编排：编辑自定义工作流，在指定阶段（比如：构建之前）添加<代码扫描>任务即可。
![]()
单元测试
支持对 Java、Golang、Python、C++、JavaScript、C#、PHP、Ruby 等各种语言的技术栈执行单元测试
如何配置：新增测试，配置基本信息、代码信息和测试脚本，在<测试报告配置>中指定报告目录，添加触发器配置并增加 IM 通知，具体的配置步骤可参考文档：如何配置测试[5]。
![]()
如何编排：编辑自定义工作流，在指定阶段（比如：部署之后，执行自动化测试）添加<测试>任务即可。
![]()
集成测试
支持的测试类型包括但不限于：API 接口测试、UI 测试、端到端测试、压力测试、场景测试...
配置过程和单元测试类似，此处不再赘述。具体编排：编辑自定义工作流，添加<测试>任务并填写配置，以下图示例说明参数：
![]()
此外，为自定义工作流配置触发器和通知，实现基于代码变更自动运行测试、测试结果及时同步 IM。参考文档：触发器配置[6]、通知配置[7]。
系统测试
支持产品级别的测试，对产品进行全面的系统测试，从整体充分把握系统质量。测试配置中的任务类型选择<产品测试>，其他的配置和集成测试类似，此处不再赘述。
![]()
运行持续测试场景
开发阶段：静态扫描打基础
流程：代码实现 > 代码提交 > 自动触发静态代码扫描质量门禁 > 开发人员及时获得反馈 > 有的放矢改进
代码开发完毕提交 PR 后会自动触发代码扫描执行，可有效拦截未通过质量门禁的代码变更。扫描结果会自动 comment 在代码变更中，开发人员可点击快速获得扫描结果，针对反馈进一步优化代码。从代码源头来规避质量风险，做到 fail fast > feedback fast > fix fast。
![]()
测试阶段：组合策略赋能力
流程：静态扫描（开启质量门禁） > 构建 > 部署 > 自动化测试 > IM 通知
ZadigX 可一键拉起独立的开发、测试环境（参考文档：创建环境[8]），只需要将测试编排进自定义工作流中就可以实现在开发环境、测试环境分别建设自动化测试套件，将测试能力编排进团队日常合作的每一个环节中：
![]()
![]()
此外，工作流运行结果可及时通知到 IM 群中，团队内每个人都能及时感知自动化执行情况，为质量负责。
![]()
发布阶段：多重保障保质量
流程：发布质量门禁 > 发布委员会人工审核 > 分批次灰度发布 > 系统测试 > IM 通知
测试验收通过后进行发布上线操作，建议几种配置策略：
-
建设发布门禁，通过自定义任务自动获取安全扫描、单元测试、集成测试等质量结果来判断是否允许上线，作为上线过程的卡点，确保版本验收通过并且符合质量要求后再做上线操作。
-
灵活编排蓝绿、金丝雀、分批次灰度、Istio 等发布策略，以确保发布可靠性，可参考：发布工作流[9]。
-
发布工作流适当增加测试团队人工审批，以确保业务流程上的发布合规性。
![]()
04、One More Thing：如何度量持续测试效果
任何实践都要讲求投入产出比，而持续测试的效果可以通过：测试的编写人员比例，发现的 Bug 数量，自动化测试的有效性，以及是否在 CI/CD 中运行自动化测试来衡量等方面来度量，具体如下：
![]()
05、小结
通过 ZadigX 支撑持续测试和自动化测试的实施，帮助测试团队更好地应对当前的测试行业挑战，确保软件交付的质量和稳定性，提高开发和交付过程的效率。
参考链接
阅读原文 https://mp.weixin.qq.com/s/meO6yqzZdMQfBoEsAcr1Ig
[1]持续交付流水线：https://continuousdelivery.com/implementing/patterns/#the-deployment-pipeline
[2]持续测试：https://cloud.google.com/architecture/devops/devops-tech-test-automation
[3]持续测试：https://www.ibm.com/cn-zh/topics/continuous-testing
[4]如何配置静态代码扫描：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/scan/
[5]如何配置测试：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/test/
[6]触发器配置：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/common-workflow/#触发器配置
[7]通知配置：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/common-workflow/#通知配置
[8]创建环境：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/env/k8s/
[9]发布工作流：https://docs.koderover.com/zadig/ZadigX%20v1.5.0/project/release-workflow/
