[ADSP 데이터분석준전문가자격증]3과목 데이터분석 / 이상값 검색(boxplot)과 데이터가공과 관리

이상값은 의도하지 않게 잘못입력하거나, 의도하지않게 입력되거나, 분석목적에 부학하지 않은경우, 불량인경우

분석에서 어떻게 전처리를 할지 결정할 때나 부정사용방지 시스템에서 규칙을 발견하는 데 사용

이상값은 상자그림으로 판별

 

인식방법 ESD - 평균으로부터 3표준편차 떨어진값

trimming 10%절단(상위5퍼하위5퍼절단)

 

boxplot

y = rmorm -> 난수 갯수

outlier 평균과 가장 차이가 많이 나는 값

변수구간화방법

binning = 신용평가모형의 개발에서 연속형 변수를 범주형 변수로 구간화할때

의사결정나무 = 연속형변수가 반복적으로 선택할 경우

 

데이터EDA(탐색적 자료분석)

summary()