인프런 커뮤니티 질문&답변

munjihey1127님의 프로필 이미지

작성한 질문수

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

작업형2 모의고사 풀어보기 (구 버전 help dir 예시문제)

작2 전처리 과정 질문

해결된 질문

23.11.23 15:52 작성

·

196

0

작업형 2

전처리작업 하실때

결측값이 범주형+수치형 섞여있는 경우에는

수치형만 결측값을 처리하고

범주형은 데이터가 많은 경우 그냥 버리시던데

결측값이 없는 데이터도 버리시더라고요

eda진행했을때 데이터가 너무 많은 것은 버리면

성능이 좋아지나요?

 

루틴을 만드려고 하는데

  1. 결측값이 범주형+수치형 있는경우

범주형은 드랍 ,수치형은 0으로 대체

 

  1. 결측치가 있는건 아니지만 범주형 데이터 중 데이터수가 많은 경우도 드랍

     

  2. 결측치도 없고 데이터수가 많지 않은 범주형 데이터는

    라벨인코딩으로 수치형으로변환

이렇게 하면 괜찮을까요?

 

 

답변 1

0

퇴근후딴짓님의 프로필 이미지
퇴근후딴짓
지식공유자

2023. 11. 24. 00:47

우선 버리면 성능이 좋아지나요?를 답변드리면 버리고 베이스라인(간단한 모델) 만들고 검증데이터로 점수를 확인한 다음 살리는 방법을 찾아보는 것이 좋아요. 성능과 관련해서는 알 수 없음입니다.

 

결측치가 있다면 범주형은 최빈값으로 채우고 성능을 비교 해보는 것을 추천해요!!

범주형 데이터 중 데이터수가 많다는게 결측수가 많다는 뜻이죠?? 50%이상이 결측치라면 버릴 것 같아요

그외엔 잘 하고 계신 것 같습니다. 💪

 

참고로 6회까진 작업형2의 경우 결측치가 있는 데이터가 출제된적이 없어요!