스테이징 리플레이로 잡는 품질 구멍
프로덕션에서만 이벤트를 보면 이미 대시보드가 오염된 뒤입니다. 스테이징 리플레이는 같은 사용자 여정을 의도적으로 한 번 더 밟으며, 기대한 페이로드가 순서대로 도착하는지 확인하는 절차입니다.
체크리스트는 두 칸으로 나눕니다. 왼쪽은 골든 경로 — 회원가입, 결제, 재생 시작처럼 매출·활성에 직결된 흐름입니다. 오른쪽은 실패 주입 — 네트워크 지연, 권한 거부, 부분 입력 취소입니다. 실패 경로에서 이벤트가 아예 안 나가거나, 반대로 성공으로 잘못 찍히는 경우가 많습니다.
리플레이 기록에는 타임스탬프, 기기, 앱 버전, 스키마 버전, 원시 페이로드 링크를 남깁니다. “대충 맞아 보인다”는 메모는 다음 배포에서 도움이 되지 않습니다. 차이가 있으면 차단할지, 경고만 할지를 미리 합의한 기준표에 대조합니다.
도구가 달라도 원칙은 같습니다. 스테이징이 프로덕션과 너무 다르면 리플레이 가치가 떨어지므로, 샘플링된 설정과 피처 플래그 상태를 맞추는 데 시간을 씁니다.