KNN
댓글수 1 ·
2025.05.28
K-Nearest Neighbors (K-최근접 이웃 알고리즘) KNN입력된 샘플에 대해 학습 데이터 중 가장 가까운 K개의 이웃을 찾아, 그들의 다수결(분류) 또는 평균(회귀) 을 기반으로 예측하는 방법입니다. k = 1 일 때,데이터에 가장 민감한 결정 경계를 그림매우 복잡한 경계 → Overfitting 발생노이즈나 이상치에도 민감 k = 5, k의 기본값일 때,대체로 균형 잡힌 결정 경계일반적으로 가장 많이 쓰이는 값 중 하나 k = 9 ~ 일 때,대부분의 포인트가 많은 데이터(설정된 k값 만큼)를 반영, k값이 커질수록 전체 데이터를 대상으로 반영하는 쪽으로 형성 → 경계가 단순해짐주 클래스(majority class) 만 예측 → 과속적합 경향 구분Overfitting (과적합)Underfit..