RAG 검색 평가: Recall@k와 MRR로 누락과 순위를 나누기
고정 문서 ID와 합성 검색 순위로 Recall@k·MRR@k를 계산한다. 전체 정답 분모, 질의 평균, 무정답·중복·청크 정책과 최종 답변 평가의 차이를 확인한다.
인공지능, IT
인공지능(AI)과 IT 분야 정보 모음
이 카테고리 글 목록
micro·macro·weighted F1, 같은 분류 결과의 점수가 다른 이유
합성 혼동행렬 한 개로 클래스별 F1과 micro·macro·weighted 집계, 정확도를 검산한다. 희소 클래스와 빈 클래스, 0분모 정책이 평균에 미치는 영향도 구분한다.