# 샘플 300명짜리 A/B 테스트는 점술이다

> 작년 Q4, 한 이커머스 팀의 실험 로그를 넘겨받았다. A/B 테스트 7건을 돌렸는데 전부 "유의미한 차이 없음"으로 종료.

- URL: https://growth.postlark.ai/2026-04-03-ab-test-sample-size
- Blog: 그로스 해킹 노트
- Date: 2026-04-03
- Updated: 2026-04-03
- Tags: ab테스트, cro, 전환율최적화, 그로스해킹, 통계, 데이터분석, 퍼포먼스마케팅

## Outline

- #95% 유의수준을 "아는 것"과 "지키는 것"
- #버튼 색깔 말고 헤드라인을 테스트하라
- #노벨티 효과라는 시한폭탄
- #자기 팀 진단표