2025 年 8 月 16 日,Alperen Keles 在《A Better Vocabulary for Testing》中提出,单元测试、集成测试和端到端测试很难说清一条测试到底做了什么。他主张把测试范围、状态、假设、输入策略和失败判据分开写。这套写法比单个标签更能指导工程决策,代价是团队得把原来省略的条件讲明白。比如,同样测一遍下单流程,确认页面显示成功,和确认重试后库存只扣一次,查的是两种不同的错误。
Keles 拆开测试标签,让团队知道该改哪里
ISTQB 已经区分测试层级、类型和技术。系统集成测试属于层级,端到端测试主要描述是否走完一条业务流程,模糊测试则是一种生成输入的技术。Keles 的提议无须替换这些术语。它补的是一条测试记录应当怎样把不同维度组合起来,供评审者看出当前方案漏掉了什么。
拿库存预留服务作例子。一条测试可以写成:在隔离环境中测试带持久状态的整个服务,生成预留与重试的操作序列,在操作之间安排服务重启,再用简化账本核对同一笔预留是否重复扣库存。有了这份描述,即使预算只够保留固定的操作序列,团队也知道自己牺牲的是探索广度,不必连账本核对一起删掉。
覆盖率能指路,业务规则才会判错
覆盖率引导模糊测试会保留触达新分支的输入,继续对它们做变异。这样能扩大代码探索范围,却看不出两笔预留之间的业务关系。重复扣库存时,服务可能照常返回成功,库存也可能仍是正数;只检查服务有没有崩溃,或库存有没有变成负数,都会放过错误。简化账本在这里充当测试预言机,也就是判断一次执行是否符合预期的机制。账本若照搬生产代码的扣减逻辑,则可能和它一起算错。

有状态测试的工时也容易估错。同一次重试会不会触发重复扣减,取决于重启前哪些写入已经落盘、哪些响应还没发出。把最终库存值塞进测试输入,构造不出这段历史;只记下随机种子,也未必能重现运行时序。测试团队还得记录起始状态和关键事件顺序,并试着删掉与失败无关的操作,留下能稳定重放的最短序列。
找到罕见故障,不能拿来估算线上故障率
为了尽快找出重复扣减,工程师可以让测试频繁在预留后重启服务,再立刻重试。这样的分布适合找反例,却不能回答线上用户多常遇到同样的问题。要测故障率或延迟,团队需要另设实验,让请求组合、到达节奏和故障频率尽量贴近它要描述的运行环境。
这一区别会改变测试预算的花法。如果团队已经能稳定重放故障,却判断不了库存是否扣错,继续加机器只会多跑一些无法判定的场景。此时更值得买的是工程师的时间,用来和业务团队核对取消、重试和超时各该怎样记账;这些规则没定下来,参考模型也只能把争议写进代码。
