RUM 与综合测试有何不同？

真实用户监控 (RUM) 和综合测试是收集数据以及优化应用程序和网站性能的两种不同方法。这两种方法都提供了有关用户体验和应用程序性能的宝贵见解，并且它们都可以发现潜在的性能问题。

在决定使用 RUM 还是综合测试时，必须了解每种性能监控方法的优势和局限性，以及 实时用户监控 和综合监控可以捕获的数据类型

RUM 监控 是一种被动监控形式，可实时收集有关用户与网站和应用程序交互的数据。Akamai mPulse 等 RUM 工具将轻量级软件（如 JavaScript 标签）等嵌入应用程序代码中，以收集有关各种指标的性能数据。这些数据可能包括页面加载时间数据、用户行为相关信息、用户地理位置数据以及有关延迟和 API 响应时间的性能指标。RUM 仪表板提供了对真实用户体验的全面监测能力，使团队能够有效识别瓶颈并解决可能会影响最终用户使用网站或应用程序的体验的性能问题。

综合测试也称综合监控，是一种主动进行应用程序和 Web 性能测试的方法。综合监控工具使用脚本来模拟应用程序内的用户操作或网站上的用户历程。综合测试在受控环境中进行，可为基准测试和比较提供一致的基准条件。利用综合测试，团队能够使用一组受控变量来测试不同的地理位置、网络、浏览器和设备。

RUM 的优势

• 真实用户见解：RUM 工具提供了有关实际用户行为和长期趋势的宝贵见解，而综合测试可能无法预测或测试这些行为和趋势。这其中包括有关页面加载时间和 API 响应速度等性能指标如何影响电商网站上实际体验（如结账过程）的数据。
• 问题检测：RUM 具有实时监测能力和即时告警功能，使 IT 团队能够快速排除和修复用户遇到的实际性能问题。
• 针对地理位置和设备进行优化：RUM 工具可帮助团队了解不同位置和设备的性能差异，从而实现有针对性的优化。
• 了解用户参与度：RUM 解决方案可以更好地将应用程序性能与用户参与度及业务目标的关键性能指标相关联。
• 提升转化率：通过跟踪用户参与度数据和转化率指标，RUM 使团队能够改进用户浏览网站的体验，从而提高转化率。

综合测试的优势

• 定期测试：为了在潜在问题影响实际用户之前主动发现这些问题，综合监控可以按计划的时间间隔运行任务，也可以全天候运行。
• 基准测试：综合测试可以根据预定义的指标建立基准性能，帮助团队持续优化 Web 性能。
• 可用性监控：综合测试方法可确保网站和 Web 应用程序在世界各地都保持正常且良好的运行状况，即使实际用户流量增加，它们也不会发生停机。
• 预生产测试：综合监控使开发团队能够在网站和应用程序迁移到生产环境之前对它们进行测试。
• 跟踪 SLA 合规性：通过综合测试，团队可以跟踪潜在的违反服务级别协议的情况。

RUM 的局限性

• 无法提供主动监控：RUM 在本质上是被动的，只能在问题影响到实际用户后才能识别这些问题。
• 需要流量：当应用程序、网站和移动应用程序有足够的流量时，RUM 的效果最佳。
• 数据量：从真实用户处收集的数据量可能会迅速增长，导致难以进行处理和管理。
• 数据隐私问题：收集真实用户数据可能会导致出现数据隐私问题。

综合测试的局限性

• 缺少真实用户输入：综合测试无法捕捉真实用户交互以及发生交互的各种环境的全部复杂性和不可预测性。
• 可预测性：由于综合测试由开发团队和管理员创建，他们可能对网站或应用程序的工作方式有先入为主的想法，因此综合测试可能无法解决某些类型的用户体验问题。

选择 RUM 还是综合测试，通常取决于开发团队和 IT 管理员的具体应用场景及测试目标。

• 优化用户体验：RUM 提供了有关用户实时体验的更多详细信息，使团队能够更好地优化数字化体验。
• 确保正常运行时间和可用性：综合测试非常适合于持续确保网站和应用程序可供不同位置的用户使用。
• 发布前测试：对于希望在网站或应用程序发布之前测试功能的开发团队来说，综合测试也是更好的选择。
• 用户参与度：RUM 更适合跟踪用户参与度并将其与转化率相关联。
• 及早检测：RUM 和综合测试都可以帮助团队快速地准确找到和修复问题。综合测试擅长在活跃用户遇到问题之前识别这些问题，而来自 RUM 的告警可以在用户遇到问题时为团队提供即时通知。
• 故障排除：在排除问题和中断的根本原因方面，RUM 与综合测试没有明显的优劣之分，它们可以同时使用，互为补充，以简化故障排除工作。当综合测试未能发现问题时，RUM 数据将揭示对最终用户体验的实时影响。当 RUM 数据发现性能问题时，综合测试可以在不同的网络和地理位置上重现这些问题，以主动进行修复。

通过将 RUM 与综合测试相结合，团队能够实施最全面的监控策略。