아티클
모닝레이브 - 아침에 열리는 광란의 파티
파티 특유의 화려함과 에너지는 유지하되, 알코올 중심의 밤문화가 아닌 아침의 각성을 음악과 가벼운 음료로 건강하게 발산하는 방식
AI 기반 이터레이션 & 광고 개선
2-2 a/b테스트의 핵심 개념과 설계 원리
독립변수: 인과 관계에서 원인이 되는 변수 ,종속변수에 영향을 줄 것이라고 기대되는 변수
->설명 변수, 예측변수
종속변수: 독립변수에 의해 영향을 받을 것으로 기대되는 변수, 인과 관계에서 결과가 되는 변수
통제변수: 독립변수는 아니지만, 종속변수에 영향을 줄 수 있기 때문에 동일하게 유지해야 하는 조건들
대조군- 비교 가준
실험군- 변화가 적용된 버전
단변수 테스트: 하나의 변수만 변경해 테스트
다변수 테스트: 두 개이상의 요소를 동시에 변경해 테스트
원인과 결과가 명확해야 무엇이 효과가 있었는지 정확히 학습할 수 있기때문에 반드시 하나만 바꿔야 함
2-3 a/b테스트 가설 수립
가설- 전체 성공을 좌우하는 핵심 요소
3가지 효과
-실험 목적이 명확해짐
-해석이 명확해짐
-전략적 선택이 가능해짐
3가지 조건
명확성- 변경하려는 원인과 그로 인해 개선될 것으로 기대하는 결과를 정확히 표현
측정가능성 - 수치로 검증해야함
-> 기대효과:MDE : 실험의 현실성 있는 기준 "최소 변화량 "
전략적 중요성 : 기여도와 중요성을 판단해서 우선순위를 세워야함
->ice framework : 우선순위 판단을 위한 실무 프레임 워크 "영향,확신.용이성 "
가설 템플릿:"만약 [독립변수 A]를 [독립변수 B]로 변경하면, [종속변수]가 [기대 효과(MDE) %] 개선될 것입니다."
가드레일 지표 :a/b 테스트는 주 kpi만 상승하면 되는 것이 아닙니다. 수익성, 고객경험,장기 성과등에 부정적인 영향을 주지 않는지 확인해야함 이를 감시하는 지표가 가드레일 지표
2-4 신뢰도 높은 a/b 테스트 설계
문제발견>문제분석 및 정의 > 가설정의 > 실험 우선순위 결정> 실험 설계
사용자 심리 효과
초두효과: 기존 버전에 익숙한 사용자들이 초반에 더 안정적인 행동을 보임
신기 효과: 새로운 버전이 신선함으로 인해 초반에 과대 성과를 보임
2-5 a/b 테스트를 위한 통계 이야기
통계적 유의성: 이 차이가 우연이 아닐 확률이 충분히 높다
p-value (유의 확률): 우연일 확률
3-1 a/b 테스트 기획서 작성
테스트 목적 및 문제 정의
가설 수립
a/b테스트 안
kpi 지표 설정
타겟 조건
예산/기간
사용자 분배
'본캠프' 카테고리의 다른 글
| 20260220 (0) | 2026.02.20 |
|---|---|
| 20260219 (0) | 2026.02.19 |
| 20260210 til (0) | 2026.02.10 |
| 20260206 TIL (0) | 2026.02.06 |
| 20260205 TIL (0) | 2026.02.05 |