답변
랜딩페이지 실험 로드맵을 확장할 때 효율 저하를 사후에 알아차리면 이미 예산을 다 쓴 뒤입니다. 조기 감지를 위한 경보 지표가 필요합니다. 예산을 확장할 때는 직전 기간 대비 CPA·ROAS 변동폭에 미리 경보 임계값(예: 20~30% 이상 악화)을 정해두고, 그 선을 넘으면 자동으로 알림이 오도록 모니터링해야 한다. 임계값 없이 '느낌'으로 지켜보면 효율 저하를 이미 예산을 다 태운 뒤에야 알아차리게 된다. 실험 로드맵을 확장해 여러 실험을 동시에 진행할 때는 같은 유저가 여러 실험에 동시에 노출돼 결과가 서로 오염되는 실험 간 간섭이 없는지, 그리고 실험과 무관하게 전환율 자체가 절대적으로 하락하는 사이트 이슈가 없는지를 조기에 살펴야 한다. 이 지표들을 임계값과 함께 미리 설정해두면, 효율이 무너지는 걸 예산을 다 쓰기 전에 알아차릴 수 있습니다.