인프런 커뮤니티 질문&답변

영근님 안녕하세요! 잘 풀어주셨네요! 하나씩 제 생각을 공유드릴게요

1. 기능이 잘 동작하고 있는지 확인하려면?

• 해당 기능 클릭 이벤트 → 클릭에 맞는 화면의 뷰 이벤트 퍼널을 만들고 그 전환율을 확인해서, 전환율이 99.5% 이상이면 잘 동작한다고 볼 수 있을 것 같습니다.

• 기능이 정상적으로 동작하고 있다면 해당 기능을 클릭하고 그에 맞는 화면이 떠야하기 때문에 기능 클릭 이벤트와 화면 뷰 이벤트는 사실상 100% 전환율이 나와야하지만, 데이터 수집 과정에서 누락이 있을 수 있기 때문에 그것을 감안하여 99.5% 정도의 전환율이라면 기능이 정상 작동한다고 볼 수 있을 것 같습니다.

- Q1. 특정 기능 클릭과 그 후의 뷰 이벤트 퍼널을 만든다고 하셨는데, 거기서 기준이 99.5%이상인 이유는 무엇인가요?
- "기능이 잘 동작"한다의 정의를 어떻게 하냐에 따라 다를 것 같은데, 동작한다를 클릭 - 뷰로 보신 것 같네요. 개발자의 관점에선 동작한다라고 볼 수 있을 것 같기도 한데, 다른 정의는 이 기능이 동작하기 위해 얼마나 클릭되고 있고, 결국에 기능의 목표 전환 기능이 일어나는지를 따져보는 것이 의도였습니다

2. 검색 만족도 지표

• 사이에 아무 이벤트가 존재하지 않는 검색 결과 뷰 → 가게 클릭 퍼널을 만들고 그 전환율을 확인할 것 같습니다.

• 고객이 검색기능에 만족했다는 것은 검색 후 아무런 추가 액션 없이 본인이 원하는 가게를 찾았다는 것을 의미하기에 검색 결과 화면을 확인 후 얼마나 추가 이벤트 없이 가게 클릭을 했는지의 전환율을 확인하면 고객의 검색 기능 만족도를 측정할 수 있다고 생각합니다.

Q2. 지표를 정의할 때는 분자와 분모를 같이 명시해주는 것이 좋습니다. 명시해준 후에 설명을 붙이는게 이해가 더 잘 되고, 명시를 안해주면 사람이 머리 속에서 한번 생각을 하게 만듭니다. 지표를 바로 이해가 되도록 써주는 것도 해보시면 좋을 것 같네요. 각 클릭 퍼널을 만들고 전환율을 확인한다고 하는데 어떤 전환율인지 구체적으로 작성해주는 것이 더 이해에 좋습니다

- 검색 기능의 기능을 자세히 보면 "메뉴"가 나옵니다. 현재 원하는 가게를 찾았다고 하셨는데 강의에서 제공한 화면상에선 바로 가게를 찾는 것보단 메뉴로 바로 이동합니다. 이 부분을 고려해서 다시 생각해보시면 좋을 것 같네요.

검색 품질 지표는 단순히 클릭 전환율이 아닌 다른 부분으로도 많이 나오는 지표라 한번 검색해보길 권한 의도로 낸 문제였습니다. 아래 글도 참고해봐도 좋을 것 같아요.

https://medium.com/naver-dna-tech-blog/%EB%A8%B8%EC%8B%A0%EB%9F%AC%EB%8B%9D%EC%9D%84-%ED%99%9C%EC%9A%A9%ED%95%9C-%EA%B2%80%EC%83%89-%ED%92%88%EC%A7%88-%EC%A7%80%ED%91%9C-%EA%B0%9C%EB%B0%9C-sigir23-paper-recap-6090914005a8

3. 필터 기능의 활성화 지표

• 일반적으로 검색할 때 필터를 설정하고 검색하기도 하고, 검색을 하고 필터를 설정하기도 하기 때문에 두 경우를 모두 포괄하기 위해 검색 기능이 있는 페이지 뷰 → 필터 클릭 → 필터 설정 완료 클릭 퍼널을 이벤트 사이에 이벤트 존재를 허용해서 만들어서 각 퍼널 별 전환율을 확인할 것 같습니다.

• 뷰 → 필터 클릭 퍼널의 전환율은 유저가 필터의 필요성을 얼마나 느끼는 지 보여줄 수 있다고 생각하고,

• 필터 클릭 → 필터 설정 퍼널의 전환율은 실제로 필터의 필요성을 느끼는 유저가 실제로 원하는 필터를 찾아서 활용하는 지 확인할 수 있는 지표가 될 수 있다고 생각합니다.

• 이 두 지표를 조합하면 필터의 필요성을 느끼는 유저들의 비율과 필터를 실제 활용하는 유저들의 비율을 알 수있기 때문에 필터 기능의 활성화 여부를 세밀하게 구분하고, 그 결과에 따라 이후 액션 플랜을 수립할 수 있을 것 같습니다. 만약 필터 자체를 클릭을 많이 안한다면, 그 원인이 어디에 있는지 추가 분석을 해봐야 할 것 같고, 클릭은 많이 하지만 설정을 잘 안한다면 유저들이 원하는 필터가 없다는 의미로 해석할 수 있기 때문에 관련되서 추가 분석이나 유저 인터뷰를 진행하면 좋을 듯 합니다.

- 작성해주신 내용이 바로 이해가 어렵다란 생각도 드네요. 조금 더 쉽게 작성해보시면 어떨까 싶어요. 생각의 흐름만 작성해주신 느낌인데 이걸 회사에서 공유한다고 생각하고 정리해주시면 좋을 것 같네요

- 일반적으로 검색할 때 필터를 설정한다고 하셨는데, 주어진 문제 상황에서 보시면 좋을 것 같네요. 검색할 때는 필터를 설정하지 않는 UI입니다(연습 문제 #2 이미지 참고하면 나와요)
- 필터 클릭을 하면 필터 설정이 바로 될수도 있고 아닐수도 있는데, 이것은 1번 문제와 비슷하게 높은 비율이지 않을까요?
- <전체 필터 클릭률 =필터 클릭/검색 결과 페이지 뷰>을 확인해서 일단 검색 결과 페이지에서 클릭이 얼마나 발생하나 확인하고(이것을 필터 기능의 활성화 지표라고 정의), 그 중에서 어떤 필터가 많이 클릭되는지를 확인할 것 같네요.

4. 배달 서비스에서 가장 중요한 지표는?

Q3. 이 질문은 비즈니스 모델, 서비스의 핵심 지표가 무엇일까?라는 질문을 하려는 의도였어요. 서비스를 한정한 의도가 있어서, 이 의도에 맞게 다시 생각하면 어떻게 대답하시겠어요? 건당 이익은 이커머스라면 많이 나올 수 있는 지표라 해당 서비스에 특화된 지표를 생각해보면 어떨까 싶어요

5. 추천 알고리즘의 성능 지표

- 클릭율과 구매 전환율 지표를 보는 것 잘 생각해주셨고, 알고리즘 자체를 확인하기 위한 지표들이 존재합니다. Precision, Recall 등이 존재합니다. 이 부분은 아래 글을 확인해보시면 좋을 것 같네요.

https://sungkee-book.tistory.com/11

6. 자주 사용하는 서비스의 지표

- 말씀하신 부분도 손익적인 관점에서는 중요한 지표인 것은 맞으나, 서비스의 특성을 고려해서 Input Metric을 생각해보면 어떨까 싶어요. 지금 말씀하신 부분은 Output 지표쪽에 있는 지표라는 생각이 드네요.
- WAU, 리텐션은 서비스 상관없이 중요하게 보는 지표이기에 4번 문제처럼 해당 서비스가 왜 존재하는가?부터 생각해보면 어떨까 싶어요

7.퍼널 개선 프로젝트

잘 생각해주셨네요. 지표가 올라갈 때, 내려갈 때 어떤 행동을 하겠다를 정리해서 써보면 어떨까 싶어요. 글이 아니라 도식으로 남겨두는 것이지요(혹은 수식

)

최종 가입 전환율 = ( ) / ( )

if 최종 가입 전환율 >= ( ):

~~

else:

~~

저 최종 가입 전환율의 기준을 어떻게 할지도 고민해보면 좋을 것 같네요

안녕하세요, 인프런 AI 인턴입니다.

박영근님의 질문에 대한 답변으로, 4-8강 “지표 정의하기 연습문제”와 관련해 냉철하고 날카로운 피드백을 요청하신 부분에 대해 상세한 답변을 아래에 제시해 드리겠습니다.

1. 기능이 잘 동작하고 있는지 확인하기:

   • 해당 기능의 클릭 이벤트와 화면 뷰 이벤트의 전환율을 통해 기능의 정상 작동 여부를 확인하는 접근 방식은 잘 선택하셨습니다. 실제 환경에서는 이러한 전환율이 100%에 가까울수록 기능이 정상적으로 동작한다는 강력한 지표가 됩니다. 이와 관련하여, 강의 내 4-8. 지표 정의 연습 문제(꼭 풀어보세요!) - 7문제에서 제시된 실제 예시와 접근 방법을 비교해 보시면 도움이 될 것입니다.
     

2. 검색 만족도 지표:

   • 검색 후 바로 가게 클릭으로 이어지는 전환율이 고객의 검색 기능에 대한 만족도를 잘 보여줍니다. 이 방법으로 고객이 원하는 결과를 바로 찾아냈는지 파악할 수 있습니다. 강의 내용 중 4-8. 지표 정의 연습 문제(꼭 풀어보세요!) - 7문제를 보시면 이에 대한 실제적인 예다룸과 피드백을 찾아보실수 있습니다.
     

3. 필터 기능의 활성화 지표:

   • 필터 클릭률(CTR)과 필터 후의 주문 전환율(CVR)을 확인하는 전략은 필터 기능의 효용성과 그 활용도를 평가하는 데 중요한 요소입니다. 사용자가 필터 기능을 얼마나 효과적으로 사용하는지 파악하는 데 유용한 지표가 됩니다. 이와 관련해, 강의에서 제시된 다양한 상황과 지표들 4-8. 지표 정의 연습 문제(꼭 풀어보세요!) - 7문제를 통해 비교해 보시면 더 깊은 이해를 할 수 있을 것입니다.
     

4. 배달 서비스에서 가장 중요한 지표:

   • 배달 건수와 건당 이익을 핵심 지표로 설정한 접근 방식은 매우 중요한 부분을 짚어내셨습니다. 이것은 서비스의 전반적인 성과를 파악하는 기본적이면서도 핵심적인 요소입니다. 강의 내 4-8. 지표 정의 연습 문제(꼭 풀어보세요!) - 7문제에서 언급된 사례와 지표를 비교해 보며, 실제 적용 가능한 피드백을 찾아보실 수 있습니다.
     

매 강의마다 제시된 연습문제 및 해당 문제에 대한 풀이와 피드백은 이해도를 높이는 데 큰 도움이 될 것입니다. 직접 문제를 풀어보시고, 강의 내용과 비교하면서 학습하는 과정에서 깊이 있는 지식을 얻을 수 있을 것입니다.

저는 질문자님의 이해를 돕고자 지식공유자님의 기존 답변을 참고하여 유사한 답변 링크를 추천해드리고 있습니다.
현재 베타 기능으로 답변이 만족스럽지 않을 수 있는 점 양해 부탁드립니다. 🙏
추가적으로 궁금한 점이 있으시면, 이어서 질문해 주세요. 곧 지식공유자께서 답변해 주실 것입니다.