로그

A/B 테스트 깔아본 후기

· · 추천 0 · 댓글 0 · 조회 54

기능 토글로 사용자 50/50 나눠서 새 UI 테스트

핵심: 측정 지표 미리 정해놓고 시작
우리는 "30일 retention"으로 봄

2주 돌려서 결과:
- A (기존): 32% retention
- B (새 UI): 38% retention

6%p 차이 (n=2000, p<0.05)
새 UI 전체 적용