Reverzereverze

A/B 테스트 표본 크기 계산기

무료 계산기

목표 상승률을 감지하기 위해 각 변형에 필요한 방문자수를 유의수준 95%, 검정력 80%로 계산합니다. 즉시, 비공개.

100% 비공개

브라우저에서 실행 — 수치가 기기를 떠나지 않습니다.

테스트 조건

%

현재(대조군) 전환율.

%

감지하려는 최소 '상대' 상승률 (예: 20% = 5% → 6%).

변형당 표본 크기

8,146

유의수준 95%, 검정력 80%에서 결과를 신뢰하기 위해 각 변형(A와 B)에 필요한 방문자수.

총 표본 크기

16,292

두 변형 합계 (A + B).

목표 전환율 (B)

6.00%

상승률 달성을 위해 변형 B가 도달해야 하는 전환율.

사용 방법

1

기준 입력

현재(대조군) 전환율을 입력하세요.

2

상승률 설정

감지하려는 최소 상대 개선치를 입력하세요.

3

표본 크기 확인

변형당 필요한 방문자수가 실시간으로 갱신됩니다.

4

테스트 계획

일일 트래픽으로 나누어 필요한 기간을 추정하세요.

모든 테스트에 더 강한 변형을

Reverze는 A/B용 스크린샷 변형을 생성해 테스트가 실제로 뚜렷이 다른 크리에이티브를 비교하게 합니다.

A/B 테스트 표본 크기 계산기는 어떻게 작동하나요?

A/B 테스트 표본 크기 계산기는 결과를 신뢰하기 전에 각 변형에 필요한 방문자수를 알려줍니다. 기준 전환율, 감지하려는 최소 상승률, 신뢰도와 검정력 목표라는 세 가지에서 거꾸로 계산합니다. 이 도구는 관례적인 두 목표 — 유의수준 95%(위양성 5%)와 검정력 80%(실제 효과를 놓칠 확률 20%) — 를 고정하고 두 비율 공식을 변형당 표본 크기에 대해 풉니다.

감지하려는 효과가 작고 기준율이 낮을수록 필요한 트래픽은 늘어납니다(때로는 극적으로). 그래서 과감한 크리에이티브 변경이 사소한 조정보다 효과를 입증하기 쉽습니다. 기대 상승률이 클수록 표본은 작아도 됩니다. 현실적인 수치를 입력하고, 변형당 표본을 일일 트래픽으로 나누면 테스트를 며칠 돌려야 하는지 알 수 있습니다.

자주 묻는 질문

A/B 테스트 표본 크기 계산기는 어떻게 작동하나요?
두 비율의 표본 크기 공식을 풉니다. 기준 전환율과 감지하려는 최소 상대 상승률로부터, 유의수준 95%와 검정력 80%(이 도구의 기본값)에 도달하기 위해 변형당 필요한 방문자수를 계산합니다.
최소 감지 가능 효과란?
최소 감지 가능 효과(MDE)는 테스트가 잡아내야 할 최소 상대 개선치입니다. 예를 들어 20%는 전환율 5%에서 6%로의 변화를 뜻합니다. MDE가 작을수록 필요한 표본은 훨씬 커집니다.
왜 이렇게 많은 방문자가 필요한가요?
유의성은 효과 크기와 표본 크기 모두에 달려 있습니다. 기준율이 낮고 목표 상승률이 작으면 신호 대비 잡음이 커져, 차이가 실제임을 확신하려면 더 많은 방문자가 필요합니다.
A/B 테스트는 얼마나 오래 돌려야 하나요?
변형당 표본 크기에 2를 곱해(두 변형) 해당 페이지의 일일 트래픽으로 나누세요. 최소 그 기간(이상적으로는 온전한 주 단위) 동안 돌려 요일별 변동을 반영한 뒤 판단하세요.