AB 테스트7 [A/B테스트] 03 지표는 왜 필요하고 어떤 것들이 있을까? 책 의 '06 조직 운영을 위한 지표'를 요약 및 관련 사례조사를 정리한 내용입니다. 0. 지표의 필요성 조직은 진보와 행동에 대한 설명책임을 측정하기 위해 좋은 지표를 필요로 합니다. 예를 들어, 조직을 운영하는 방법 하나는 OKR(목표 핵심 결과)를 사용하는 것인데, 여기서 목표는 장기 목표이며 핵심 결과는 목표를 향해 나아가는 단기적이고 측정 가능한 결과입니다. OKR 시스템을 사용하는 경우, 그러한 목표를 향한 진보를 추적하기 위해서는 좋은 지표가 핵심이라고 할 수 있습니다. 상이한 종류의 조직을 위한 지표, 이러한 지표들이 충족해야 하는 중요한 기준, 지표의 작성 및 평가방법 및 시간에 걸친 반복 시행의 중요성을 이해하는 것은 데이터를 기반으로 의사결정을 수행하기 위해 필요한 통찰력을 얻는 데 .. 2023. 7. 25. [A/B테스트] 02 조직의 실험 플랫폼은 어떻게 구축되어 있을까? 책 의 '04 실험 플랫폼과 문화'를 요약 및 관련 사례조사를 정리한 내용입니다. 1. 실험 성숙도 모델 조직이 강력하고 신뢰할 수 있는 실험 플랫폼을 구축하고, 실험 문화를 정착하기 위해서는 실험 성숙도를 관찰하고 개선하는 것이 중요합니다. 조직들이 A/B 실험을 통해 모든 변화를 실행하는 과정에서 겪을 수 있는 단계를 구성한 것이 '실험 성숙도 모델'이고 4단계가 있습니다. 아래 표를 보며 단계별 특징 몇 가지를 살펴보겠습니다. - 여기어때 항공팀 사례 22년 9월, A/B테스트 제품 개발툴 기업인 '핵클'의 인터뷰에서 '여기어때 항공팀'은 조직이 실험 성숙도 모델에서 걸음마 단계라고 말했습니다. 종종 ‘해당 안이 당연히 좋을 것 같은데 꼭 실험을 해야할까요?’하는 질문을 받기도 하는데, 막상 실험을.. 2023. 7. 17. [A/B 테스트] 01 온라인 종합 대조 실험 사례들 책 의 '01 소개와 동기'를 요약 및 관련 사례 조사를 정리한 내용입니다. 1장의 시작은 검색 엔진 '빙'의 사례였습니다. 2012년 빙은 광고 헤드라인 표시법을 바꾸기 위해 6개월 이상 여러 아이디어를 구현하고 평가했지만, 결과적으로는 두 줄이었던 타이틀 라인을 하나로 합치는 작고 쉬운 코드 수정을 통해서 매출 증가를 이룰 수 있었습니다. 이것은 지금부터 공부를 시작할 A와 B 또는 대조군과 실험군의 2개 종류를 비교하는 가장 간단한 형태의 종합 대조 실험, 즉 'A/B 테스트'의 예시입니다. 위 빙의 사례를 통해 온라인 종합 대조 실험의 핵심 주제를 알 수 있습니다. 아이디어의 가치는 평가하기 힘들다. 작은 변화도 큰 영향을 줄 수 있다. 큰 영향을 발생시키는 실험은 드물다. 실험을 실행하는 오버헤.. 2023. 6. 26. 이전 1 2 다음
