美团技术团队
·
基于接口数据变异的App健壮性测试实践
💡
原文中文，约5400字，阅读约需13分钟。
📝
内容提要
本文介绍了移动端App健壮性测试的概念和设计方案，包括基于接口数据变异的静态和动态检测方法。静态检测通过代码扫描来控制代码规范和风险，动态检测通过构造变异数据并注入到App中来识别异常。文章还介绍了变异数据构造和异常检测的方法，并提出了精简变异数据的方案。最后，总结了当前工具的建设情况和未来发展方向。
🎯
关键要点
- 健壮性是计算机系统处理错误并继续正常运行的能力。
- 移动端App的健壮性指在环境异常或输入异常下的正常运行能力。
- 环境异常包括操作系统、外部环境和硬件环境异常，输入异常分为系统输入和用户输入。
- 未处理的异常可能导致用户体验不佳，如App崩溃或功能缺失。
- 基于接口数据变异的健壮性测试方案包括静态检测和动态检测。
- 静态检测通过代码扫描控制代码规范，动态检测通过变异数据识别异常。
- 变异数据构造需关注请求数据、实验策略等因素以确保唯一性。
- 变异数据的构造面临全面性和准确性挑战，需要语义匹配规则。
- 精简变异数据的方案包括删减构造用例数和引入编辑距离算法。
- 通过优化构造逻辑，变异数据量可减少40%，同时保持健壮性问题发现能力。
- 美团App和优选App已接入该工具，发现了多个问题。
- 未来将继续优化异常构造和检测能力，提升测试效率。
➡️
