RUM과 합성 테스트는 무엇이 다른가요?

실제 사용자 모니터링(RUM)과 합성 테스트는 데이터를 수집하고 애플리케이션과 웹사이트의 성능을 최적화하는 두 가지 다른 접근 방식입니다. 두 방법 모두 사용자 경험과 애플리케이션 성능에 대한 귀중한 인사이트를 제공하며, 잠재적인 성능 문제를 발견할 수 있습니다.

RUM과 합성 테스트 중 하나를 선택해야 할 때, 각 성능 모니터링 접근 방식의 장점과 한계, 그리고 실시간 사용자 모니터링 및 합성 모니터링이 포착할 수 있는 데이터의 종류를 이해해야 합니다.

RUM 모니터링 은 웹사이트와 애플리케이션에 대한 사용자 상호 작용에 관한 데이터를 실시간으로 수집하는 수동적 모니터링의 한 형태입니다. Akamai mPulse와 같은 RUM 툴은 JavaScript 태그와 같은 경량 소프트웨어를 애플리케이션 코드에 삽입해 광범위한 지표에 대한 성능 데이터를 수집합니다. 여기에는 페이지 로딩 시간, 사용자 행동에 관한 정보, 사용자의 지리적 위치에 관한 데이터, 지연 시간 및 API 응답 시간과 관련된 성능 지표가 포함될 수 있습니다. RUM 대시보드는 실제 사용자 경험을 완벽하게 파악할 수 있도록 지원해, 팀이 웹사이트나 애플리케이션의 병목을 효과적으로 파악하고 최종 사용자 경험에 영향을 미칠 수 있는 성능 문제를 해결할 수 있도록 해줍니다.

합성 테스트 또는 합성 모니터링은 애플리케이션 및 웹 성능 테스트에 대한 능동적인 접근 방식입니다. 합성 모니터링 툴은 스크립트를 사용해 애플리케이션 내에서의 사용자 행동이나 웹사이트에서의 사용자 여정을 시뮬레이션합니다. 합성 테스트는 통제된 환경에서 수행되어 벤치마킹 및 비교를 위한 일관된 기준 조건을 제공합니다. 팀은 합성 테스트를 통해 통제된 변수 집합을 사용하고 다양한 지역, 네트워크, 브라우저, 디바이스를 테스트할 수 있습니다.

RUM의 장점

• 실제 세계에 대한 인사이트: RUM 툴은 합성 테스트로는 예측하거나 테스트할 수 없는 실제 사용자 행동과 장기적인 트렌드에 대한 귀중한 인사이트를 제공합니다. 여기에는 페이지 로딩 시간 및 API 응답성과 같은 성능 지표가 이커머스 사이트의 결제 절차와 같은 실제 경험에 미치는 영향에 대한 데이터가 포함됩니다.
• 문제 탐지: IT 팀은 실시간 옵저버빌리티 기능과 즉각적인 알림 기능을 갖춘 RUM을 사용하면 실제 상황에서 사용자가 겪는 성능 문제를 신속하게 해결하고 바로잡을 수 있습니다.
• 지역 및 디바이스에 대한 최적화: RUM 툴은 팀이 위치와 디바이스에 따라 성능이 어떻게 달라지는지 이해하는 데 도움이 되어, 목표에 맞는 최적화를 가능하게 합니다.
• 사용자 몰입도 파악: RUM 솔루션은 애플리케이션 성능과 사용자 몰입도 및 비즈니스 목표에 대한 핵심 성과 지표를 더 잘 연관시킬 수 있습니다.
• 전환율 향상: 팀이 RUM으로 데이터 사용자 몰입도와 전환 지표를 추적해 웹사이트를 통한 사용자 여정을 개선하고 전환율을 높일 수 있습니다.

합성 테스트의 장점

• 정기 테스트: 합성 모니터링은 예정된 간격이나 연중무휴 24시간으로 작업을 실행할 수 있으므로 잠재적인 문제가 실제 사용자에게 영향을 미치기 전에 발견할 수 있습니다.
• 벤치마킹: 팀은 합성 테스트에서 미리 정의된 지표에 대한 기준 성능을 설정할 수 있으므로 웹 성능을 지속적으로 최적화할 수 있습니다.
• 가용성 모니터링: 합성 테스트 방법은 웹사이트와 웹 애플리케이션이 전 세계의 다양한 지역에서 이용 가능하고 성능이 양호한지를 확인함으로써 실제 사용자 트래픽이 증가하기 전에 다운타임을 방지하는 데 도움이 됩니다.
• 프리프로덕션 테스트: 개발팀은 합성 모니터링을 통해 웹사이트와 애플리케이션을 프로덕션 환경으로 옮기기 전에 테스트할 수 있습니다.
• SLA 컴플라이언스 추적: 팀은 합성 테스트를 통해 서비스 수준 협약의 잠재적 위반 사항을 추적할 수 있습니다.

RUM의 한계

• 사전 대응이 불가능: RUM은 본질적으로 사후 대응적이며 실제 사용자에게 영향을 미치고 나서야 문제를 파악합니다.
• 트래픽 필요: RUM은 애플리케이션, 웹사이트, 모바일 앱에 대한 트래픽이 충분할 때 가장 잘 작동합니다.
• 데이터 양: 실제 사용자로부터 수집된 데이터의 양이 빠르게 증가해 처리 및 관리가 어려워질 수 있습니다.
• 데이터 프라이버시 문제: 실제 사용자 데이터를 수집하면 데이터 프라이버시 문제가 발생할 수 있습니다.

합성 테스트의 한계

• 실제 사용자 인풋의 부족: 합성 테스트는 실제 사용자 상호 작용의 복잡성과 예측 불가능성 그리고 다양한 환경에서의 상호 작용을 모두 포착할 수 없습니다.
• 예측 가능성: 합성 테스트는 사이트나 애플리케이션의 작동 방식에 대해 선입견을 가지고 있는 개발팀과 관리자에 의해 만들어지기 때문에, 특정 종류의 사용자 경험 문제를 간과할 수 있습니다.

RUM과 합성 테스트 중에서 선택하는 것은 일반적으로 개발팀과 IT 관리자의 특정 사용 사례와 테스트 목표에 달려 있습니다.

• 사용자 경험 최적화: 팀은 RUM을 통해 사용자의 실시간 경험에 대한 더 자세한 정보를 파악해 디지털 경험을 더 잘 최적화할 수 있습니다.
• 가동 시간과 가용성 보장: 합성 테스트는 웹사이트와 애플리케이션이 여러 위치의 사용자에게 지속적인 가용성을 보장하는 데 이상적입니다.
• 출시 전 테스트: 웹사이트나 애플리케이션을 출시하기 전에 기능을 테스트하려는 개발팀에게도 합성 테스트가 바람직합니다.
• 사용자 몰입도: RUM은 사용자 몰입도를 추적하고 이를 전환율과 연관시키는 데 더 좋은 툴입니다.
• 조기 탐지: RUM과 합성 테스트는 모두 팀이 문제를 신속하게 찾아내고 해결하는 데 도움이 될 수 있습니다. 합성 테스트는 실제 사용자가 문제를 겪기 전에 문제를 식별하는 데 탁월하며, RUM의 알림 기능은 사용자가 문제를 겪을 때 팀에 즉시 알림을 제공할 수 있습니다.
• 문제 해결: 문제와 중단 사태의 근본 원인을 해결하는 데 있어 RUM과 합성 테스트 중 어느 것이 더 나은지는 명확히 알 수 없습니다. 두 가지 방법을 동시에 보완적으로 활용함으로써 문제 해결 노력을 효율화할 수 있습니다. 합성 테스트가 문제를 발견하지 못하면 RUM 데이터가 최종 사용자 경험에 미치는 영향을 실시간으로 보여줄 것입니다. RUM 데이터가 성능 문제를 발견하면, 합성 테스트를 통해 네트워크와 지리적 위치 전반에 걸쳐 문제를 재현함으로써 사전에 문제를 해결할 수 있습니다.

팀은 RUM과 합성 테스트를 결합하면 가장 포괄적인 모니터링 전략을 구축할 수 있습니다.