A/B 테스트
A/B 테스트(분할 테스트)
이메일 마케팅
A/B 테스트는 메시지의 두 가지 이상 버전을 작은 그룹들에 보내 어느 쪽 성과가 더 좋은지 측정하고, 승자를 나머지 모두에게 보내는 방식이에요.
A/B 테스트란?
A/B 테스트는 제목, 제안, 버튼 같은 한 가지를 바꾸고 결과로 결정해요.
맞는 지표를 고르세요. 제목은 오픈(Apple Mail Privacy Protection 때문에 조심해서), 콘텐츠는 클릭, 제안은 주문으로 보세요.
SmartyTap에서는 이메일과 문자 캠페인에서 최대 7개 버전을 테스트할 수 있어요. 테스트 규모(10%~100%)를 정하고, 승자 기준을 오픈율, 클릭률, 주문 완료율 중에서 고르고(문자는 주문 완료율을 써요), 테스트 기간(1~72시간)을 정하면, 승자가 나머지 모두에게 자동으로 발송돼요. SmartyTap은 버전 전체를 비교하고 다변량 테스트는 하지 않아요.
예시
스토어가 “오늘 무료 배송”과 “주말을 위한 선물”을 수신자 목록의 20%에 6시간 동안 테스트해요. 클릭 기준 승자가 나머지 80%에게 나가요.
A/B 테스트, 왜 중요한가요?
테스트마다 추측이 증거로 바뀌고, 그 교훈은 이후 모든 캠페인에 이어져요.
A/B 테스트 자주 묻는 질문
A/B 테스트 규모는 어느 정도여야 하나요?
버전마다 수백 명에게 닿을 만큼은 커야 해요. 수신자 목록이 작다면 더 큰 비율로 테스트하거나 목록 전체를 나누세요.
한 번에 여러 가지를 바꿔 테스트해도 되나요?
할 수는 있지만 어떤 변경이 차이를 만들었는지 알 수 없어요. 테스트마다 한 가지만 바꾸세요.
