빅데이터분석기사 필기
시험 직전 요약장
판단 기준과 헷갈리는 개념, 대표 예제를 짧게 확인하세요.
이상값 탐지와 처리
원래 이론 →판단 기준
- 탐지 임곗값은 이상값 후보를 찾는 규칙이지 오류 확정 기준이 아니다.
- IQR 경계와 같은 값은 일반적인
경계 밖조건에 해당하지 않는다. - z점수는 평균·표준편차, 수정 z점수는 중앙값·MAD를 사용한다.
- 다변량 거리는 상관을 고려하지만 공분산 추정과 분포 가정의 영향을 받는다.
- 회귀 영향점은 잔차, 레버리지, 제거 시 적합 변화로 판단한다.
- 검열, 절단, 윈저화는 서로 다른 개념이다.
- 데이터에서 학습한 이상값 처리 기준은 훈련 데이터 또는 각 훈련 폴드에서만 추정한다.
헷갈리는 개념
표를 좌우로 밀어 나머지 열을 확인하세요. 키보드: ←·→, Home·End
| 구분 | 의미 | 먼저 확인할 사항 |
|---|---|---|
| 오류값 | 단위 오입력, 센서 고장, 중복 적재처럼 실제 현상을 잘못 기록 | 원천 로그, 단위, 허용 범위, 중복 키 |
| 희귀 정상값 | 실제로 발생한 고액 거래, 기록적 기온, 장기 배송 | 업무 증빙과 발생 가능성 |
| 맥락적 이상 | 시간·지역·집단 등 특정 조건에서만 비정상 | 비교 집단과 조건 변수 |
| 집단적 이상 | 개별 값보다 연속 구간이나 값의 묶음이 비정상 | 순서, 구간, 군집 패턴 |
| 분석 대상 이상 | 사기·고장·침입처럼 탐지해야 할 사건 | 라벨 품질과 탐지 비용 |
| 영향점 | 회귀계수나 예측 결과를 크게 바꾸는 관측치 | 잔차, 레버리지, 재적합 결과 |
대표 계산·예제
예를 들어 , 이면 , 하한은 0, 상한은 32다. 따라서 32는 상한과 같아 후보가 아니고 35는 후보이다. 표본이 작거나 사용하는 소프트웨어의 사분위수 계산 방식이 다르면 과 가 달라질 수 있으므로 계산 규칙을 함께 기록한다.
내 최근 연습 오답
현재 브라우저의 연습 채점 기록에서 공개된 단원과 연결된 오답을 확인합니다.
오답 기록을 확인하고 있습니다.