2023-05-16 · Software Testing

为不稳定测试建立分流处理流程

隔离、诊断、删除——一套处理「会说谎的测试」的例行流程。

前言

不稳定的测试会训练团队忽略变红的构建。这份清单包含自动发现 flaky 测试、指定负责人的隔离通道,以及导致大多数问题的四类根因。

现场笔记

在处理 Software Testing 问题的过程中,反复出现的几个模式:

  • 简单的版本撑过了每次重构,聪明的版本没有。
  • 边做边写的文档,比事后补写的耐用得多。
  • 同一个问题第二次出现时,它就已经是一个模式了——给它起个名字。

可以直接抄的检查清单

  • 问题可以用一条命令复现。
  • 修复附带一个没有它就会失败的测试。
  • 作者本人之外的人也在自己的机器上跑过。

写在最后

写下未来那个自己真正会读的短版本——这就是全部的诀窍。