개요

브라우저 테스트는 Datadog가 웹 애플리케이션에서 실행하는 시나리오입니다. 정기적인 간격을 구성하여 여러 장소, 기기, 브라우저에서 테스트를 실행하거나 CI/CD 파이프라인에서 테스트를 할 수 있습니다.

신서틱 브라우저 테스트의 개요

이러한 테스트는 사용자가 애플리케이션에서 주요 비즈니스 트랜잭션을 수행할 수 있는지, 최신 코드 변경으로 인해 악영향을 받지 않았는지 확인합니다.

브라우저 테스트 생성하기

다음 예시에서는 장바구니에 상품을 추가하는 단계부터 결제 완료까지 사용자의 여정을 매핑하는 브라우저 테스트 생성 방법을 설명합니다.

사용자 여정을 매핑하는 브라우저 테스트

테스트 상세 설정

  1. Datadog 사이트에서 왼쪽 메뉴의 UX Monitoring 위에 커서를 올리고 **Synthetic Tests**를 선택합니다.

  2. 상단 오른쪽 모서리에서 New Test > **Browser Test**를 클릭합니다.

  3. 브라우저 테스트 정의하기:

    • 모니터링할 웹사이트 URL을 추가합니다. 어디에서부터 시작해야 할지 모르겠다면 테스트용 이커머스 웹 애플리케이션인 https://www.shopist.io를 사용해보세요.
    • Advanced Options를 선택해 사용자 설정 요청 옵션, 인증서, 인증 자격 등을 설정할 수 있습니다. 이번 예시에서는 특정 고급 옵션이 필요하지 않습니다.
    • 테스트 이름을 지정하고 env:prodapp:shopist 등의 태그를 설정하세요. 태그를 사용하면 테스트 스위트(suite)를 정리하고, 홈페이지에서 관심 있는 테스트를 빠르게 찾을 수 있습니다.
    • 테스트할 브라우저와 기기를 선택합니다.

위치 선택

테스트를 실행할 Managed Locations 또는 Private Locations 하나 이상을 선택하세요.

관리형 위치(Managed locations)를 사용하면 공개용 웹사이트와 엔드포인트를 테스트할 수 있습니다. 내부 애플리케이션을 테스트하거나 별도 지역의 사용자 행동을 시뮬레이션하는 경우에는 프라이빗 위치(private locations)를 선택하세요.

Shopist 애플리케이션은 https://www.shopist.io/에 공개되어 있으므로, 관리형 위치를 선택해 테스트를 실행할 수 있습니다.

테스트 빈도 지정

테스트를 실행할 빈도를 선택합니다. 기본 빈도인 1시간을 그대로 둘 수도 있습니다.

스케줄에 따라 신서틱 테스트를 실행할 뿐만 아니라 CI/CD 파이프라인에서 수동으로 또는 직접 트리거할 수 있습니다.

경고 조건 정의

경고 조건을 정의하여 이따금 일시적으로 발생하는 네트워크 문제 등에 대하여 테스트가 트리거되지 않도록 설정할 수 있습니다. 이렇게 하면 애플리케이션에 실제 문제가 발생한 경우에만 경고를 받습니다.

위치에서 실행할 수 없다고 판단하기 전에 발생해야 하는 연속 실패 횟수를 지정할 수 있습니다.

Retry test 2 times after 300 ms in case of failure

또한 애플리케이션이 특정 시간 동안, 특정 개수의 위치에서 실행에 실패했을 때만 알림을 보내도록 테스트를 설정할 수도 있습니다. 다음 예시에서는 서로 다른 위치 두 곳에서 테스트가 3분간 실패할 경우 알림을 전송하도록 경고 규칙이 설정되어 있습니다.

An alert is triggered if your test fails for 3 minutes from any 2 of 13 locations

테스트 모니터 구성

경고 메시지를 설정하고 테스트 경고를 보낼 이메일 주소를 추가하세요

또한 Slack, PagerDuty, Microsoft Teams, 웹훅 등의 알림 통합을 사용할 수도 있습니다. 이러한 도구에서 신서틱 경고를 트리거하려면 먼저 해당하는 통합을 설정해야 합니다.

테스트 설정을 저장하고 모니터할 준비가 되면 Save & Edit Recording을 클릭합니다.

자세한 내용은 신서틱 테스트 모니터 사용을 참고하세요.

기록 생성하기

테스트 설정을 저장하면 Datadog은 Datadog 테스트 레코더 Chrome 확장 프로그램을 다운로드하여 설치하라는 메시지를 표시합니다.

확장 프로그램을 설치했다면 Start Recording을 클릭해 테스트 절차 기록을 시작하세요.

기록 페이지 오른쪽에 있는 iframe에서 탐색할 수 있습니다. div, 이미지, 페이지 중 한 곳을 선택하면 Datadog에서 브라우저 테스트와 관련된 단계를 기록하고 작성합니다.

테스트 절차 기록을 종료하려면 Stop Recording을 클릭하세요.

아래 예시는 장바구니에 상품을 추가한 후 https://www.shopist.io에서 정상적으로 결제 완료할 때까지 사용자 여정을 매핑하는 방법을 보여줍니다.

  1. 샘플 웹사이트에서 Chairs 등의 가구 섹션 중 하나로 이동한 다음 Add to cart를 선택합니다.
  2. CartCheckout을 클릭합니다.
  3. Add New 아래에서 Assertion을 선택하고 **“Test that some text is present on the active page”**를 클릭합니다.
  4. 결제 완료 후 “Thank you!” 문구가 표시되는지 확인하려면 Value 필드에서 Thank you!를 입력하세요.
  5. Save & Quit를 누릅니다.

Assertion을 사용해 브라우저 테스트를 완료하는 것이 중요합니다. 이렇게 해야 애플리케이션이 정의된 사용자 여정 이후에 예상한 상태에 확실히 도달하기 때문입니다.

예시 웹 사이트에서는 정기적으로 오류를 발생시키고 의도적으로 실패하게 합니다. Notify your team 필드에 이메일 주소를 입력하면 테스트 실패 및 복구 시 이메일 알림을 받을 수 있습니다.

테스트 결과 보기

Browser Test 상세 페이지에는 테스트 설정 개요, 글로벌 및 위치별 업타임, 상호작용하기까지 걸린 시간과 테스트 기간에 대한 그래프, 성공한 테스트 결과와 실패한 테스트 결과 샘플, 모든 테스트 결과의 목록이 표시됩니다. 테스트 길이에 따라 첫 번째 테스트 결과가 표시될 때까지 몇 분 기다려야 할 수 있습니다.

실패한 테스트를 트러블슈팅하려면 실패한 테스트 결과를 선택하고 실패한 단계에 이르기까지의 스크린샷을 확인하세요. 잠재적인 Errors & Warnings, Resources, 및 **Core Web Vitals**를 확인하여 문제를 진단할 수도 있습니다.

아래 예시에서는 서버 타임아웃으로 인하여 실패한 테스트 사례를 볼 수 있습니다.

Datadog의 신서틱 모니터링과 APM 통합을 사용하여 Traces 탭에서 실행된 테스트를 통해 백엔드에서 생성된 트레이스를 확인할 수 있습니다.

참고 자료

PREVIEWING: rtrieu/product-analytics-ui-changes