필요 기간・방문자 수 추정
"A/B 테스트는 결과가 나올 때까지 실제로 얼마나 걸릴까?"에 답하는 계산기입니다. 통계 지식이 없어도, 세 개의 숫자만 입력하면 목표치를 알 수 있습니다. Pro 플랜 전용 기능입니다.
입력하는 세 가지 항목
- 1일 평균 방문자 수: 테스트 대상 페이지 전체의 하루 방문자 수
- 테스트 패턴 수: 컨트롤(기존 패턴)을 포함해 비교할 패턴의 총 개수
- 평균 전환율: 현재의 실제 수치(%)
결과 보는 법
실제 차이가 5%, 10%, 20%, 30%일 것이라고 가정하고, 각각에 대해 "결과가 판명되기까지의 기간"과 "필요한 총 방문자 수"를 표시합니다. 차이가 작을수록 확인하는 데 시간이 걸리고, 차이가 크면 의외로 빨리 알 수 있습니다. 방문자 수 아래에는 패턴당 내역도 작게 함께 표시됩니다.
내부 계산 방법
업계 표준인 이표본 비율 검정의 표본 크기 공식을 사용합니다(신뢰수준 95%・검정력 80%). Adobe Target Sample Size Calculator와 대조 검증을 마쳤으며 거의 동일한 수치를 보입니다.