작은 그룹에 이메일이나 문자의 최대 일곱 가지 버전을 테스트하세요. SmartyTap이 오픈, 클릭, 주문 기준으로 승자를 골라 나머지 모두에게 보내요.
한마디로
A/B 테스트는 메시지의 여러 버전을 작은 그룹에 보내 어느 버전의 성과가 가장 좋은지 측정하고, 승자를 나머지 모두에게 보내는 방법이에요. SmartyTap에서는 각 버전이 완전한 이메일이나 문자이고, 오픈율, 클릭률, 주문율 중 무엇으로 정할지 스토어가 골라요.
문제
모든 제목은 누군가 읽기 전까지는 추측이에요. 테스트를 하지 않으면 약한 메시지가 수신자 목록 전체에 나가고, 다음에 쓸 만한 배움도 남지 않아요. SmartyTap은 아이디어를 먼저 작은 그룹에 시험하므로, 가장 좋은 버전이 나머지 모두에게 가고 다음 캠페인은 앞선 상태에서 시작해요.
제목, 미리보기 텍스트, 내용 중 원하는 것을 바꾸세요. 각 버전은 완전한 이메일이나 문자예요.
테스트가 끝나면 가장 좋은 버전이 테스트에 포함되지 않은 모두에게 발송돼요.
오픈율, 클릭률, 주문율로 승자를 고르세요.
테스트 규모는 10%에서 100%까지, 기간은 1시간에서 72시간까지 고르세요.
기다리고 싶지 않나요? 테스트 결과에서 어떤 버전이든 나머지 모두에게 보낼 수 있어요.
문자를 복제하고 문구를 바꿔 테스트하세요. 승자는 주문율로 정해져요.
메시지를 열고 Create A/B test를 클릭하세요.
무엇이 차이를 만들었는지 알고 싶다면 한 가지만 바꾸세요.
테스트 규모, 승자를 고르는 방법, 기다릴 시간을 고르세요.
SmartyTap이 테스트를 실행하고, 시간이 되면 승자를 보내요.
까다로운 경우를 SmartyTap이 어떻게 처리하는지 간단히 정리했어요.
결과가 동점이면 Version A가 나머지 모두에게 발송돼요.
테스트 규모를 100%로 설정하면 모두가 버전 중 하나를 받고, 승자는 발송되지 않아요. 전체 수신자에 걸쳐 비교할 때 좋아요.
승자를 고르는 테스트는 한 시각에 발송돼요. 버전을 비교하면서 수신자별 현지 시간에 보내려면 100% 분할을 쓰세요.
테스트에 포함된 사람은 한 버전만 받고, 테스트 밖의 사람만 승자를 받아요. 같은 캠페인의 메시지는 Smart Sending 집계에 들어가지 않아요.
무엇을 얼마나 크게 테스트할지와 흔한 실수는 이메일 A/B 테스트 가이드에서 확인하세요.
모든 설정은 A/B 테스트 문서에 설명되어 있어요.
바꾼 요소에 맞는 숫자를 고르세요.
| 승자 기준 | 테스트 대상 | 처음 테스트 기간 |
|---|---|---|
| 오픈율 | 제목과 미리보기 텍스트. 이메일 전용 | 6시간 |
| 클릭률 | 내용과 제안. 링크 추적을 켜야 함. 이메일 전용 | 6시간 |
| 주문율 | 버전을 구분할 만큼 주문이 있을 때의 제안. 이메일과 문자 | 24시간 |
SmartyTap은 버전 전체를 비교해요. 변경 사항을 하나씩 따로 측정하는 다변량 테스트는 실행하지 않아요.
AI 도움
캠페인 에이전트가 제목부터 이메일 전체까지 테스트할 추가 버전의 초안을 만들어요.
테스트할 버전은 많게, 쓰는 시간은 적게.
수신자 대부분은 이미 효과가 증명된 버전을 받아요.
결과가 캠페인과 함께 남으니, 다음 캠페인은 효과 있었던 것에서 시작해요.
아무도 발송 버튼을 누르지 않아도 테스트가 실행되고 승자가 나가요.
이메일, 문자, 양식, 자동화, 고객 데이터, AI가 앱 하나에서 함께 움직여요.
메시지의 여러 버전을 작은 그룹에 보내 어느 버전의 성과가 가장 좋은지 측정하고, 승자를 나머지 모두에게 보내는 방법이에요. SmartyTap에서는 오픈율, 클릭률, 주문율 중 무엇으로 정할지 스토어가 골라요.
이메일이나 문자 모두 버전을 최대 일곱 개까지 테스트할 수 있어요. 각 버전은 완전한 메시지예요.
결정 기준이 되는 숫자와 테스트 기간(1시간에서 72시간)은 스토어가 골라요. 시간이 되면 가장 좋은 버전이 테스트에 포함되지 않은 모두에게 발송돼요. 결과가 동점이면 Version A가 발송돼요.
네. 문자 테스트는 주문율을 써요. 휴대폰이 오픈을 알려 주지 않기 때문이에요.
아니요. SmartyTap은 버전 전체를 비교해요. 무엇이 차이를 만들었는지 알고 싶다면 한 번에 한 가지만 바꾸세요.
Starter는 월 US$20에 연락처 2,500개, 이메일 25,000통, SMS 크레딧/세그먼트 250개를 제공해요. Pro는 월 US$199(또는 연 US$1,990)에 연락처 25,000개, 이메일 250,000통, SMS 크레딧/세그먼트 2,500개를 제공해요. 새 워크스페이스에서 발송하려면 유료 요금제가 필요해요.
