🌈 쿠팡 UX Club 3. 테스트 결과가 예상과 다를 때 🎁 이 글을 추천하는 이유 - 쿠팡의 UX 팀에서 AB Test를 어떻게 진행하고 있는지 작성된 글입니다 - AB Test를 하다보면 테스트 결과가 예상과 다른 경우가 많이 있습니다. 이런 경우 어떤 방식으로 해결하는지 고민이 담겨있습니다 - 디자이너 관점으로 작성되어 있지만 데이터에 관심있는 모든 분들이 보시면 좋은 글입니다! ✍ 내용 요약 - 공통 고민 - 1) 프로덕트 오너와 의견이 엇갈리면 어떻게 해결점을 찾을까? - 2) 막막한 딥다이브, 어떻게 시작할까? - 3) AB Test에서 솔루션의 성과가 좋지 않을때는 어떻게 해야할까? - AB 테스트에서 솔루션 성과가 좋지 않을 때, 다시 테스트하고 싶다면 어떻게 해야하죠? - (쿠팡 UX팀 리드의 답변) 미리 설정한 주요 지표에 따라 테스트의 성공 여부를 판단 - 개선해야 할 문제임에도 불구하고 솔루션의 성과가 좋지 않다면 기존에 정의한 문제, 가설, 솔루션에 허점이 없는지 확인 - 이 과정을 통해 테스트를 종료할지, 개선해서 더 할 수 있을지 판단할 수 있음 - 실패한 테스트를 그저 결과로 바라보지 않고 새로운 인사이트를 얻는 지점으로 활용하면 몇 번의 이터레이션을 통해 성공적인 결과를 이끌 수 있음 - 사이즈 탐색 문제를 해결할 때 사용한 사례 설명 => 러닝 포인트를 찾고 실험 - 테스트에 실패했어도 놓친 문제가 무엇인지 파악하며 새로운 인사이트를 얻는게 중요