사람 검토자 90% 일치면 충분할까? Cohen의 kappa 계산
두 검토자의 관측 일치율이 똑같이 90%인 합성표에서 주변분포에 따라 kappa가 달라지는 이유를 계산한다. 기대 일치·정의 불가 경계·정답 정확도와의 차이를 설명한다.
두 검토자의 관측 일치율이 똑같이 90%인 합성표에서 주변분포에 따라 kappa가 달라지는 이유를 계산한다. 기대 일치·정의 불가 경계·정답 정확도와의 차이를 설명한다.
100건에서 실패 0건이면 관측 실패율은 0%지만, 이항 가정의 단측 95% 상한은 약 2.95%다. 정확식·3/n 근사와 독립성·고정 표본 수·빈도주의 해석을 구별한다.