基于视觉的移动应用图形用户界面测试：一项调查

《ACM Computing Surveys》：Vision-Based Mobile App GUI Testing: A Survey

移动应用GUI测试研究综述：系统分析271篇文献，重点探讨92篇基于计算机视觉的测试方法，揭示传统代码/布局测试的局限性，提出视觉技术如何重构测试框架、自动化测试及智能分析等前沿方向。

　　

摘要

图形用户界面（GUI）已成为移动应用程序（apps）中最重要的组成部分之一。它是移动应用与终端用户之间的直接桥梁，直接影响终端用户的体验。忽视GUI的质量会削弱整个移动应用解决方案的价值和有效性。大量的研究工作致力于GUI测试，这是确保移动应用质量的有效方法之一。通过进行严格的GUI测试，开发者可以确保移动应用的视觉和交互元素不仅满足功能需求，还能提供无缝且用户友好的体验。然而，传统的测试方法依赖于源代码或布局文件，在效率和效果方面都存在挑战，因为实际呈现的GUI与预期之间存在差距。随着计算机视觉技术的发展，基于视觉的移动应用GUI测试方法应运而生，并取得了令人瞩目的进展。在这篇综述论文中，我们对271篇相关论文进行了全面研究，其中92篇是关于基于视觉的测试方法的研究。该综述涵盖了GUI测试的不同主题，如GUI测试生成、GUI测试记录与回放、GUI测试框架等。特别是，我们强调了基于视觉的技术在重塑传统移动应用GUI测试方法中的作用，并分析了这些技术如何推动测试领域的发展。基于对现有研究的分析，我们指出了（基于视觉的）移动应用GUI测试所面临的挑战和机遇，并提出了结合新兴技术的研究方向。