2.6 管理自动化测试我们的测试过程在持续改进,并且我们为测试设计了一个可记录的生命周期,如图2-2所示。测试被开发出来之后,会进行评审,如果审查通过,这个测试就会被包含到候选队列中(一个测试集合用来尝试是否应该包含到整个自动化套件中)。如果一个候选测试在一行中有4天都失败了,那么它会被提取出来重新进行开发。在测试本身没有任何失效一周之后,这个测试会设置为“有效”状态,并可以包含到每晚的或者每周的测试套件中。
图2-2 测试的生命周期如果产品的功能改变了但是其测试没有更新,测试可以“挂起”。根据挂起的原因,测试将来可能会成为“有效”状态或者候选测试状态(故障的原因被修复之后)。不同测试套件的内容会进行周期性分析。度量指标用来衡量运行这些特定测试的收益。根据这一过程的结果,一个测试可以从一个测试套件移到另一个测试套件(依据测试的运行频率),或者在某些情况下转移到“退出”状态。如果某一个测试可能不会再用到了,团队就会考虑删除它。我们制定了很多度量标准,都使管理层非常满意,而且非常关注我们,并提高了团队的优先级。毫无疑问,相比于之前,他们对产品审批过程的信任有了大幅提升。
相关资源:《自动化测试最佳实践:来自全球的经典自动化测试案例解析》迷你书