基于模型的测试:先画状态机再让它自己造用例
基于模型的测试(Model-Based Testing,MBT)的核心动作只有一个:先给被测系统(SUT,System Under Test)画一个数学模型描述它应该怎么行为,然后让工具从模型里自动生成一堆测试用例去打真实系统。人不再一条条写用例,而是维护一份规格——用例是规格的副产品。
它不是新东西。1990 年代欧洲电信业为了测程控交换机就在用 SDL 和 UML 状态图做 MBT,AT&T 有过用有限状态机自动生成协议 conformance 测试的实践。MBT 一直没在通用软件里火起来,是因为建模成本高——但在协议栈、嵌入式、支付系统这类"错一次损失惨重"的领域里,它一直是标准做法。近几年 TLA+ 因为 Amazon 的实践(DynamoDB、S3)重新受到关注,让 MBT 的思想再次进入主流工程师视野。
1. 为什么要建模
想象你在测一个 ATM 取款流程。手写测试用例的话大概会写:
测试1: 插卡 → 输密码 → 输金额 → 出钞
测试2: 插卡 → 输错密码 → 提示重输
测试3: 插卡 → 输错密码三次 → 吞卡
测试4: 插卡 → 余额不足 → 提示
测试5: 插卡 → 网络异常 → 退卡
...
写了 20 条你会觉得差不多了。但状态机分析告诉你可能的路径远不止 20 条:状态数 × 事件数是指数级组合。手工写永远会漏掉一些角落——比如"输错密码两次 → 余额不足 → 网络异常"这种组合场景。
MBT 的价值不是"写得快"(建模其实更慢),而是**"覆盖得系统"**。它把测试空间的完整度从人工判断变成图算法:只要模型正确,工具能保证覆盖所有 transition、所有状态对、所有长度为 k 的路径。这是手工方式无论多认真都做不到的。
另一个隐藏的收益是规格本身的价值。建模过程逼迫团队严格定义系统的状态和转移,很多"我以为大家理解一致"的模糊点会在这时暴露。业界的一个说法:"MBT 项目里 60% 的 bug 是在建模阶段发现的——测试还没跑,模型的存在已经问出了以前没人问过的问题"