본캠프

20260212

gainzzang 2026. 2. 12. 11:25

아티클

모닝레이브 - 아침에 열리는 광란의 파티 

파티 특유의 화려함과 에너지는 유지하되, 알코올 중심의 밤문화가 아닌 아침의 각성을 음악과 가벼운 음료로 건강하게 발산하는 방식 


AI 기반 이터레이션 & 광고 개선

2-2 a/b테스트의 핵심 개념과 설계 원리 

독립변수: 인과 관계에서 원인이 되는 변수 ,종속변수에 영향을 줄 것이라고 기대되는 변수 

->설명 변수, 예측변수 

종속변수: 독립변수에 의해 영향을 받을 것으로 기대되는 변수, 인과 관계에서 결과가 되는 변수 

통제변수: 독립변수는 아니지만, 종속변수에 영향을 줄 수 있기 때문에 동일하게 유지해야 하는 조건들 

대조군- 비교 가준 

실험군- 변화가 적용된 버전 

단변수 테스트: 하나의 변수만 변경해 테스트

다변수 테스트: 두 개이상의 요소를 동시에 변경해 테스트 

원인과 결과가 명확해야 무엇이 효과가 있었는지 정확히 학습할 수 있기때문에 반드시 하나만 바꿔야 함

 


2-3 a/b테스트 가설 수립

가설- 전체 성공을 좌우하는 핵심 요소 

3가지 효과 

-실험 목적이 명확해짐

-해석이 명확해짐

-전략적 선택이 가능해짐 

3가지 조건

명확성- 변경하려는 원인과 그로 인해 개선될 것으로 기대하는 결과를 정확히 표현 

측정가능성 - 수치로 검증해야함

-> 기대효과:MDE : 실험의 현실성 있는 기준 "최소 변화량 "

전략적 중요성 : 기여도와 중요성을 판단해서 우선순위를 세워야함 

->ice framework : 우선순위 판단을 위한 실무 프레임 워크 "영향,확신.용이성 "

가설 템플릿:"만약 [독립변수 A]를 [독립변수 B]로 변경하면, [종속변수]가 [기대 효과(MDE) %] 개선될 것입니다."

가드레일 지표 :a/b 테스트는 주 kpi만 상승하면 되는 것이 아닙니다. 수익성, 고객경험,장기 성과등에 부정적인 영향을 주지 않는지 확인해야함 이를 감시하는 지표가 가드레일 지표 


2-4 신뢰도 높은 a/b 테스트 설계 

문제발견>문제분석 및 정의 > 가설정의 > 실험 우선순위 결정> 실험 설계 

사용자 심리 효과 

초두효과: 기존 버전에 익숙한 사용자들이 초반에 더 안정적인 행동을 보임 

신기 효과: 새로운 버전이 신선함으로 인해 초반에 과대 성과를 보임 


2-5 a/b 테스트를 위한 통계 이야기 

통계적 유의성: 이 차이가 우연이 아닐 확률이 충분히 높다 

p-value (유의 확률): 우연일 확률


3-1 a/b 테스트 기획서 작성 

테스트 목적 및  문제 정의 

가설 수립 

a/b테스트 안 

kpi 지표 설정

타겟 조건 

예산/기간 

사용자 분배


 

'본캠프' 카테고리의 다른 글

20260220  (0) 2026.02.20
20260219  (0) 2026.02.19
20260210 til  (0) 2026.02.10
20260206 TIL  (0) 2026.02.06
20260205 TIL  (0) 2026.02.05