DevOps中的测试实践

腾讯WeTest · 发表于 2020-12-15 12:46:09

万物皆可pipeline，流程自动化解放生产力。在DevOps的pipeline中，我们发现测试环节也需要一套流水线化的能力，来保证研发流程的大批pipeline稳定高品质交付。

下面介绍下DevOps中如何构建高水平全面的测试能力。

· 在DevOps中构建测试工作的难点（流程）

在DevOps趋势下，测试部门从原先的大量集中测试，变成了高频快速测试。

原先大部分企业采用纯手工测试的方式，从根本上无法适应DevOps的高频快节奏需求。滋生了对自动化测试的诉求。

· 头部企业测试部门的现状（组织架构）

文化、流程、组织架构，以及新技术（容器技术等）多重力量，助推测试的敏捷化。

基于DevOps对测试提出的新要求，市面上也越来越多自动化测试的工具，开发者面对大量工具系统，往往需要经验和时间成本去筛选：

问题一、测试可以渗透到哪些环节

在DevOps文化中，强调打破不同职能之间的隔阂，对于测试部门而言，意味着测试活动的"左移"和"右移"，从需求分析到产品上线，各个环节把控质量。在一些偏研发和偏运维的环节，测试人员可以帮助建立整套质量评体系和工具组，来保障上下游的整体质量。

问题二、在人员结构和组织架构等约束条件下，各环节选取什么样的测试方法和工具？

· 测试管理

这种实际环境下，对测试管理平台灵活性的要求就很高。

· 工作流程灵活可配置

· 可集成现有管理系统

· 过程/结果的可视化

目前我们平台支持按工作流来组织测试计划，并分配任务，项目进度、人力分配可视化跟踪。

测试本身也是一条流水线，支持用户向右无线扩展测试环节；每个测试环节支持向下无线扩展"测试任务项。

同时，平台支持jira/tapd等管理系统的集成，需求和缺陷打通。脚本方面支持打通git和svn，直接同步脚本到WeTest测试平台。

· UI测试

UI测试是门槛最低，最常见的一种测试类型。一般在功能验收，以及专项测试阶段比较常用。UI测试有web端和移动端。web端的测试主要以selenium框架为主。市面上也有比较通用的录制回放工具。移动端的UI自动化测试由于设备型号多而杂，给测试部门带来更大的挑战，近几年出现的移动端测试框架也越来越多。

之前提到组织架构里外包比重较高，因此，UI自动化测试工具的使用门槛一定要低。业界有较多的脚本录制回放工具。在实际操作过程中，往往会发现这些工具有以下弱点

除工具问题外，由于移动端UI测试涉及到大量设备的运维管理，在稳定运营的基础上，有效降低运维成本，提升运维效率，是进行日常UI测试的前提。对于硬件的运维，WeTest在管理上万台设备的过程中，总结出43条运维规则，自动识别和秒速处理"开发者模式误触关闭""内存占满""熄屏锁屏"等问题。保证机房7x24小时稳定运行，实现1个运维人员可管理上千台设备的效果。