6-6강 질문

안녕하세요! 연휴에 강의를 듣고 계시다니 넘 멋지시네요!

우선.. 지표가 높다 낮다라는 것은 말씀하신 것처럼 기준선이 없으면 어려울 수 있어요. 어떤 문제인지에 따라 다를 것 같아요

CTR의 경우 우리 제품의 여러 CTR의 평균을 잡고 베이스라인으로 잡는다거나, 퍼널의 앞쪽의 CTR 평균을 쓴다거나로 결정하고 나아가곤 합니다. 최초엔 이렇게 설정하고 그 후엔 해당 기능의 평균선을 잡고 베이스로 씁니다. 다만 여기서 중요한 것은 평균선은 임의로 정의하고 그것보다 높아지고 있을 때, 낮아지고 있을 때 어떻게 할 것인지가 중요합니다. 베이스라인 선은 일단 임의로 잡고 해도 괜찮은 경우가 많았습니다. 첫 기능일 때는 이 기능을 토대로 어느정도 개선을 기대하는지를 기대해서 계산하곤 합니다(예를 들어 특정 화면에 VIEW가 10% 이상 증가)

말씀해주신 부분에선 기준선을 어떻게 잡든 상관없이 높을 때 내가 어떻게 할 것인가, 낮을 때 어떻게 할 것이다가 더 중요하긴 했습니다!

추가로, 만약 CTR, CVR 지표가 둘다 생각보다 효과적이지 않게 나올 경우, 만든 기능은 그냥 두는 게 낫나요, 아니면 계속 해당 기능을 개선해나가는 게 중요할까요?

(애초에 가설이 잘못된 경우도 있는 등 지표가 잘 안 나온 이유는 다양하겠지만 해당 기능이 애초에 효과적이지 않은 기능이라면.. 굳이 만들어야했는데 빼야할까?라고 생각할 수도 있고, 필요없다면 빼야지. 할 수도 있을 것 같아서요!)

이를 판단하는 기준도 어떻게 세울 수 있는지 알려주시면 감사하겠습니다!!ㅎㅎ