홀드아웃 그룹
홀드아웃 그룹(대조군)
이메일 마케팅
홀드아웃 그룹은 메시지가 행동을 실제로 얼마나 바꿨는지 재려고 일부러 메시지를 보내지 않는, 대상 중 무작위로 고른 일부예요.
홀드아웃 그룹이란?
A/B 테스트는 메시지와 메시지를 비교해요. 홀드아웃은 메시지와 메시지 없음을 비교해요. 이메일을 받고 구매한 사람 중 일부는 어차피 샀을 사람이고, 홀드아웃은 그 수가 얼마인지 보여 줘요.
작동 방식: 자동화나 캠페인 대상 중 예컨대 10%를 무작위로 빼고, 이들의 구매율을 메시지를 받은 사람들의 구매율과 비교해요. 그 차이가 증분 효과예요.
SmartyTap에서는 A/B 테스트가 버전을 비교하고, 메시지 없는 그룹을 자동으로 만들지는 않아요. 따로 떼어 둔 세그먼트를 캠페인에서 제외하고 그 세그먼트의 주문을 메시지를 받은 사람들의 주문과 비교하면 비슷하게 할 수 있어요.
예시
이탈 고객 되찾기 자동화를 이탈 고객의 90%에게 보내고 10%에게는 아무것도 보내지 않아요. 30일 뒤 메시지를 받은 그룹은 6%, 홀드아웃은 4%가 재주문했어요. 2%포인트의 증분 효과예요.
홀드아웃 그룹, 왜 중요한가요?
매출 추적은 클릭 뒤의 모든 주문을 세요. 홀드아웃은 메시지가 실제로 일으킨 주문이 어느 것인지 알려 줘요.
홀드아웃 그룹 자주 묻는 질문
홀드아웃 그룹은 어느 정도 크기여야 하나요?
보통 대상의 5~20%로, 주문 차이가 보일 만큼 커야 해요.
사람들을 빼면 매출을 잃는 것 아닌가요?
잠시 조금은 잃어요. 메시지가 비용보다 더 많이 버는지 알기 위한 대가예요.
