확률 0.8은 정말 80%일까? 예측 확률의 보정과 Brier score
합성 문서 15건으로 평균 예측 확률·실제 양성 비율·Brier 점수를 계산한다. 빈 구간과 확률 1의 경계를 확인하고, Brier 하나로 보정 품질을 단정할 수 없는 이유를 설명한다.
AI
정확도만 보면 놓치는 오류: 혼동행렬과 precision·recall 계산
검토 대상 문서 100건의 합성 예로 정확도·정밀도·재현율의 서로 다른 분모를 계산한다. 전부 음성으로 분류하면 정확도 90%여도 재현율은 0%이며, 0분모는 별도로 표시한다.