인프런 커뮤니티 질문&답변

박윤정님의 프로필 이미지
박윤정

작성한 질문수

[퇴근후딴짓] 빅데이터 분석기사 실기 (작업형1,2,3)

3-4 로버스트 스케일링

해결된 질문

작성

·

229

0

선생님, 안녕하세요.

 

로버스트 스케일링이 적용되지 않는 칼럼이 있는 것 같아 문의글 남깁니다.

def get_nc_data():
    X_train = pd.read_csv("X_train.csv")
    X_test = pd.read_csv("X_test.csv")
    y_train = pd.read_csv("y_train.csv")

    n_train = X_train.select_dtypes(exclude='object').copy()
    n_test = X_test.select_dtypes(exclude='object').copy()
    c_train = X_train.select_dtypes(include='object').copy()
    c_test = X_test.select_dtypes(include='object').copy()
    return n_train, n_test, c_train, c_test
cols = ['age', 'fnlwgt', 'education.num', 'capital.gain', 'capital.loss', 'hours.per.week']
from sklearn.preprocessing import RobustScaler
n_train, n_test, c_train, c_test = get_nc_data() # 데이터 새로 불러오기

scaler = RobustScaler()
display(n_train.head())
n_train[cols] = scaler.fit_transform(n_train[cols])
n_test[cols] = scaler.transform(n_test[cols])
display(n_train.head())

이렇게 선생님께서 올려주신 강의노트에서

head(2) 부분만 head() 로 수정하여 실행시켜 보았는데요,

실행시킨 결과를 보면 capital.gain, capital.loss 두 칼럼에 대해서는 값이 그대로 나옵니다.

(민-맥스, 표준화 스케일링에서는 정상 처리된 것으로 확인되었습니다.)

제가 놓친 부분이 있는지 확인 가능하실까요?

 

답변 2

1

퇴근후딴짓님의 프로필 이미지
퇴근후딴짓
지식공유자

X_train[['capital.gain', 'capital.loss']].describe()을 통해 값을 확인해보면
대부분의 값이 0이에요.
IQR(사분위 범위)이 0인 두 특성에 대해 RobustScaler를 적용해도 데이터의 대부분의 값이 변경되지 않습니다. 스케일링 공식에서 IQR로 나누는데, IQR이 0이므로 나눌 수 없기 때문에 IQR이 0인 모든 항목의 원래 값이 그대로 유지됩니다.

0

박윤정님의 프로필 이미지
박윤정
질문자

엇 강의에서도 해당 칼럼 값이 바뀌지 않았네요..!

칼럼 특성상 로버스트 스케일링 후에도 동일한 값을 가지는 것인가요?

박윤정님의 프로필 이미지
박윤정

작성한 질문수

질문하기