다음 절에서는 이 4가지 카테고리를 이용해 다양한 성능 척도를 만듭니다.
성능 척도
성능 척도는 훈련된 모델의 성능을 정량화하는 데 사용하며, 다음과 같이 네 척도를 정의합니다.
▼ 표 7-3 성능 척도 및 공식
척도 |
공식 |
정확도(accuracy) |
|
재현율(recall) |
|
정밀도(precision) |
|
F1 점수(F1 score) |
정확도는 전체 예측 중 제대로 예측한 결과의 비율입니다. 정확도를 계산할 때는 TP와 TN을 따로 나누지 않습니다. 정확도를 이용한 모델 평가는 직관적으로 이해할 수 있다는 장점이 있지만 경우에 따라서는 다른 척도가 필요합니다.
다음과 같이 희귀한 이벤트를 예측하는 모델일 때는 모델을 평가하는 데 정확도 이외의 척도가 필요합니다.
• 은행 거래 데이터에서 사기 거래를 예측하는 모델
• 비행기의 엔진 부품이 기계적 결함을 일으킬 확률을 예측하는 모델