두 방식은 실제로 무엇이 다른가

브로드 타겟팅은 관심사를 지정하지 않고 연령·성별·위치 정도만 지정하는 방식입니다. 이때 위치와 최소 연령만 강제 조건으로 남고, 나머지는 시스템이 크리에이티브 반응과 전환 신호를 학습해 스스로 타겟을 찾아가는 방식으로 작동합니다.

상세 타겟팅도 예전처럼 닫힌 조건이 아닙니다. 어드밴티지+ 상세 타겟팅을 켜면 광고주가 고른 관심사·행동 세그먼트는 시스템의 출발 신호로만 쓰이고, 학습 단계에서 실제로 반응한 유저의 패턴을 분석해 그 조건 밖 유사 성향 유저에게까지 노출이 확장됩니다. 다만 위치·연령·성별·언어 같은 인구통계 조건과 제외 조건에는 확장이 적용되지 않습니다.

즉 두 방식의 차이는 닫힘과 열림이 아니라 출발 신호를 주느냐 마느냐에 가깝습니다. 이 구조를 모르고 비교하면 결과 해석이 어긋납니다.

단순 성과 비교가 왜 틀리나

첫째 이유는 중복입니다. 브로드 세트와 세그먼트 세트를 같이 켜면 두 세트가 같은 사람에게 노출될 수 있고, 그러면 두 세트가 서로 경매에서 경쟁합니다. 각 세트의 성과는 상대의 예산과 입찰 상태에 따라 달라지므로 타겟팅 방식의 차이를 측정한 것이 아니게 됩니다.

둘째 이유는 학습입니다. 새로 만든 세트는 학습 구간을 지나야 안정되며, 이 구간의 성과는 원래 불안정합니다. 두 세트의 생성 시점이 다르면 학습 위상도 다릅니다.

셋째 이유는 소재입니다. 브로드는 성과가 소재 품질에 크게 좌우되는 구조입니다. 두 세트에 다른 소재를 넣고 비교하면 소재 차이를 타겟팅 차이로 읽게 됩니다.

공정한 비교를 위한 설계 조건은 무엇인가

네 가지를 맞춰야 합니다.

첫째, 소재를 동일하게 넣습니다. 개수와 포맷 구성까지 같아야 합니다. 둘째, 최적화 이벤트와 캠페인 목적을 동일하게 둡니다. 셋째, 시작일과 종료일을 맞춥니다. 넷째, 모수가 겹치지 않게 만듭니다. 세그먼트 세트에 넣은 조건을 브로드 세트에서 제외 조건으로 걸면 겹침을 줄일 수 있습니다. 다만 시스템 확장 때문에 완전히 분리되지는 않으므로, 진행 전과 진행 중에 오디언스 중복을 확인합니다. 광고 관리자에서 오디언스를 최대 5개까지 선택해 중복 비율을 퍼센트로 볼 수 있습니다.

여기에 하나를 더합니다. 변경 요소를 하나로 한정하는 원칙입니다. 타겟팅 방식만 다르고 나머지는 전부 같아야 결과 차이의 원인을 타겟팅으로 돌릴 수 있습니다.

매체 실험 도구로 돌릴 때의 제약은 무엇인가

매체가 제공하는 분할 테스트를 쓰면 모수를 지정한 비율로 나눠 같은 조건에서 비교할 수 있습니다. 메타와 구글 모두 자체 분할 테스트 기능을 제공하며, 메타 쪽 실험 도구는 측정 및 보고 메뉴 안에서 캠페인·광고 세트 단위로 여러 버전을 비교하는 방식으로 제공됩니다.

제약도 있습니다. 구글 애즈 실험은 시작 후 처음 7일 데이터를 통계 계산에서 제외하고, 최소 46주 이상 진행을 권장하며 구매 주기가 긴 업종은 전환 주기 12회를 기다리라고 안내합니다. 즉 타겟팅 비교는 짧게 끝낼 수 있는 실험이 아닙니다. 기간을 확보하지 못할 상황이라면 실험 대신 순차 운영으로 방향을 바꾸는 편이 낫습니다.

결과 해석에서 흔한 오독은 무엇인가

첫 번째 오독은 CTR로 승패를 가르는 것입니다. 브로드는 모수가 넓어 평균 CTR이 낮게 나오는 경향이 있지만 전환 효율은 더 나을 수 있습니다. 비교 지표는 캠페인 목적에 맞는 하단 지표여야 합니다.

두 번째 오독은 초반 며칠로 판단하는 것입니다. 중간 결과를 보다가 유의해 보이는 순간 멈추면 실제 위양성률이 크게 높아집니다. 종료 시점은 시작 전에 정합니다.

세 번째 오독은 한 번의 결과를 계정 전체의 원칙으로 굳히는 것입니다. 결과는 그 상품, 그 시기, 그 소재 조합에 한정됩니다. 회고에 재사용 조건을 함께 적어두어야 다음에 잘못 옮겨 쓰이지 않습니다.