组合测试
概述
组合测试是一种软件测试技术，用于在多个输入参数的不同组合之间进行测试。在实际软件中，经常会有多个参数需要测试，每个参数又有多个取值，如果对所有参数的所有取值组合进行测试（全面测试），测试用例数量会呈指数级增长，这在实际测试中往往不可行。
组合测试的产生背景
当软件有多个输入参数时，穷举所有可能的参数组合会产生大量的测试用例。例如：
- 目的地城市（A）：北京、上海、广州（3个选项）
- 价格范围（B）：经济型、舒适型、豪华型（3个选项）
- 入住天数（C）：1天、2天、3天（3个选项）
全组合测试需要：3 × 3 × 3 = 27个测试用例
当参数和选项更多时，组合数量会急剧增加，因此需要采用组合测试方法来减少测试用例数量。
组合测试强度
1. 单因素测试（1-way）
每个参数至少取一个值进行测试。
2. 成对组合测试（Pairwise / 2-way）
每个参数的所有取值都与至少另一个参数的所有取值成对组合测试。研究表明，约70%的缺陷是由两个因素相互作用引起的，因此成对组合测试是一种非常有效的测试策略。
例如：有3个因素，每个因素有3个水平
- 成对组合测试可以将测试用例从27个减少到约9-12个
3. 三因素组合测试（3-way）
每个参数的所有取值都与至少另外两个参数的所有取值进行组合测试。这种方法可以发现更多的多因素交互缺陷，但测试用例数量会比成对组合多。
4. 全面组合测试（All combinations）
测试所有参数的所有可能组合。这是最彻底的测试，但也是测试用例数量最多的方法。
成对组合测试（Pairwise Testing）
核心思想
成对组合测试的核心思想是：确保每一对参数值（两个参数的任意取值组合）在测试用例中至少出现一次。
为什么选择成对组合
- 效率高：相比全组合，测试用例数量大幅减少
- 效果好：能够发现大多数由双因素交互引起的缺陷
- 实用性强：在测试时间和资源有限的情况下，仍然能够保证较好的测试覆盖率
成对组合测试步骤
- 识别所有参数及其取值
- 确定使用成对组合策略
- 生成测试用例，确保每对参数值至少出现一次
- 可以使用专业工具辅助生成（如PICT）
组合测试工具
PICT工具
PICT（Pairwise Independent Combinatorial Testing tool）是微软开发的免费工具，可以自动生成成对组合测试用例。
主要特点：
- 支持多种参数类型
- 可以指定参数之间的约束条件
- 输出格式灵活（文本、Excel等）
- 免费使用
使用方法：
- 定义参数和取值
- 运行PICT工具
- 自动生成成对组合测试用例
组合测试与其他方法的关系
- 正交试验法：也是一种减少测试用例的方法，但更注重”均匀分散”
- 决策表法：适用于有明确逻辑规则的情况
- 组合测试：专门针对参数组合问题，更关注参数两两之间的交互
适用场景
- 多个输入参数的软件测试
- 配置测试
- 兼容性测试
- 多因素影响的场景
总结
组合测试通过减少测试用例数量来提高测试效率，同时保持较好的缺陷检测能力。成对组合测试是最常用的组合测试策略，能够在测试覆盖率和测试效率之间取得很好的平衡。