micro·macro·weighted F1, 같은 분류 결과의 점수가 다른 이유
합성 혼동행렬 한 개로 클래스별 F1과 micro·macro·weighted 집계, 정확도를 검산한다. 희소 클래스와 빈 클래스, 0분모 정책이 평균에 미치는 영향도 구분한다.
AI 운영
사람 검토자 90% 일치면 충분할까? Cohen의 kappa 계산
두 검토자의 관측 일치율이 똑같이 90%인 합성표에서 주변분포에 따라 kappa가 달라지는 이유를 계산한다. 기대 일치·정의 불가 경계·정답 정확도와의 차이를 설명한다.