기능 토글로 사용자 50/50 나눠서 새 UI 테스트
핵심: 측정 지표 미리 정해놓고 시작
우리는 "30일 retention"으로 봄
2주 돌려서 결과:
- A (기존): 32% retention
- B (새 UI): 38% retention
6%p 차이 (n=2000, p<0.05)
새 UI 전체 적용
기능 토글로 사용자 50/50 나눠서 새 UI 테스트
핵심: 측정 지표 미리 정해놓고 시작
우리는 "30일 retention"으로 봄
2주 돌려서 결과:
- A (기존): 32% retention
- B (새 UI): 38% retention
6%p 차이 (n=2000, p<0.05)
새 UI 전체 적용