# AB Test 잘 진행하기 위한 규칙

  • 실험 전
      1. 실험의 목표가 무엇인지, 어떤 지표가 중요한지 미리 결정하기
      1. 실험의 결과 멘탈 시뮬레이션하기
      1. 회사에 임팩트를 줄 수 있는 실험 진행하기
      1. 실험을 통해 타겟팅할 잠재 고객 구체적으로 정의하기
      1. 필요한 표본 크기, 최소 탐지 기간을 미리 추정하기
      1. 처음부터 실험군 대조군을 50:50으로 배포할 필요는 없다
      1. 답정너 실험 진행하지 않기
  • 실험 중
      1. 실험이 진행되는 기간에 사내 전파하기
      1. 계획한 전체 기간에 Test를 실행한 후, 끝나고 통계적 유의성을 확인
      1. 실험 중간에 결론내지 않기
  • 실험 후
      1. 엄청 좋아보이는, 효과적인 결과가 나오면 의심하기
      1. 항상 실험에 대한 내용을 잘 기록하고, 실험에서 깨닫고 배운 내용 기록하기
      1. 분석 자동화 진행하기




CC-BY-NC-ND-4.0 Licensed | Copyright 2023-present. 카일스쿨