인프런 커뮤니티 질문&답변

yb님의 프로필 이미지

작성한 질문수

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

5회 기출유형 (작업형2)

작업형2에서 pop 함수

해결된 질문

작성

·

150

0

train = train.drop['ID']

target = train.pop['target']

test_ID = test.pop['ID']

 

작업형2에서 위의 코드들을 쓰시는데, 정확히 이 코드들은 어느 단계에서 쓰는걸까요?

1) 피처 엔지니어링 전

2) 피처 엔지니어링 후, train / validation 데이터 분리 전

 

답변 1

0

퇴근후딴짓님의 프로필 이미지
퇴근후딴짓
지식공유자

모두 데이터 전처리 단계에서 진행해야 하므로 train / validation 데이터 분리 전에 필요합니다.

  1. 아래 두 코드는

  • ID가 범주형이면 반드시 필요함. "원핫인코딩"전에 실행

  • ID가 숫자면 "스케일링" 전에 실행

  • 결론: 데이터 전처리에서 가장 먼저 실행

train = train.drop['ID']
test_ID = test.pop['ID']

 

  1. 타겟

  • 범주형일 때 "원핫인코딩"전에 실행

  • 수치형일 때 "스케일링" 전에 실행

target = train.pop['target']

 

결과적으로 모두 원핫인코딩 또는 스케일일에서 값이 변경되지 않도록 전에 처리하면 좋을 것 같아요!

 

추가로 ID가 숫자면 그냥 둬도 모델에서 중요도를 알아서 낮게 잡고 학습합니다.

 

yb님의 프로필 이미지

작성한 질문수

질문하기