답변
품절·재입고 알림을 바꾼 효과는 느낌이 아니라 최소한의 표본이 쌓인 뒤에 판단하셔야 합니다. 프로모션 변경 효과는 최소 표본이 쌓인 뒤 판단해야 한다. 일 평균 주문 건수가 적을수록(예: 하루 5건 미만) 하루이틀의 반응만으로 성패를 판단하면 우연한 변동에 속기 쉽다. 실무 기준으로는 최소한 하나의 결제·재구매 주기(보통 1~2주)와 과거 같은 유형 프로모션의 평균 진행 기간만큼은 데이터를 모아야 하고, 과거 동일 유형 프로모션이 있었다면 같은 기간 길이로 비교하는 것이 원칙이다. 표본이 작다면(주문 수십 건 미만) 단순 평균 비교보다 재구매율처럼 방향성이 뚜렷한 지표를 우선 보고, 확정 판단은 데이터가 더 쌓인 뒤로 미루는 편이 안전하다. 다만 품절·재입고 알림 특성상 고려해야 할 부분이 하나 더 있습니다. 품절·재입고 알림은 새 매출을 만드는 장치가 아니라 '놓친 수요'를 회수하는 장치다. 핵심 지표는 알림 신청자 수 대비 재입고 후 실제 구매전환율이며, 재입고 물량이 신청자 수보다 현저히 적으면 알림을 보내고도 재품절이 반복돼 오히려 신뢰가 깎인다. 반대로 알림을 지나치게 자주 보내면 스팸으로 인식돼 수신거부·채널 차단이 늘어난다. 품절·재입고 알림의 변경이 잘 됐는지는 위 기준만큼 데이터를 모은 뒤에 판단하시고, 그 전까지는 방향성만 참고 지표로 삼으시길 권합니다.