인프런 커뮤니티 질문&답변

S0님 안녕하세요 :) 좋은 질문해주셔서 감사합니다! 사소한 것은 없지요!!

이렇게 질문해주시는 자세가 넘 좋은 자세라고 생각합니다.

신규 유저를 고려하는 것은 여러가지 상황에서 가능해요
- 신규 유저만 겪는 기능을 설계하는 경우 : 예를 들면 온보딩 기능
- 모든 유저에게 AB Test를 하기엔 부담스러운 경우 : 리스크가 있을 것 같은 기능인 경우 혹은 아직 가능성을 고민하는 시기인 경우
- 기존 유저들이 많고, 오래된 서비스라 사용성이 둔화되었다는 판단이 되는 경우 : 신규 유저에 집중해서 기능을 내서 성과를 확인하고 싶은 경우입니다. 전체 유저를 대상으로 하면 수치가 잘 오르지 않고, 크게 반응하지 않는다는 근거가 있다면 이런 방식을 고려해봅니다
- 기존 유저와 신규 유저의 경험이 달라지는 경우 : 온보딩과 유사한데 기존 유저가 경험하면 혼란이 될 수 있으면 신규 유저에게만 실험할 수 있습니다

다르게 표현하면 특정 세그먼트를 고려하는 실험이 점점 생길 수 있다라는 의미입니다. 서비스가 작은 경우엔 신규 유저가 아닌 전체 유저 대상으로 해도 괜찮을 수도 있지요(샘플 사이즈의 이슈도 존재하기에) 점점 실험을 많이 하다보면 세그먼트를 집중해서 실험하는 경우가 생길거에요-!