OCR 업무의 자동화 수준은 항목의 중요도, 오류의 발견 가능성, 복구 가능성을 함께 보고 정해야 한다.
- 중요한 결과를 바꿀 수 있는 오류는 사람 검토 후보로 본다.
- 검토 조건에 해당하는 문서는 별도 경로로 보낼 수 있다.
- 신뢰도는 정답 보증이 아니다.
- 운영 중에는 오류 유형, 검토 전환 이유, 수정 결과를 살펴 기준을 조정한다.
좋은 자동화 기준은 위험한 결과가 조용히 통과하지 못하게 하는 규칙이다.
위험을 묻고 처리 경로를 나눈다
대표 문서와 실제 용도를 평가해 검토 기준을 조정하고, 하나의 보편 임계값을 적용하지 않는다. 자세한 근거는 Microsoft의 OCR 특성 및 한계 안내에서 확인할 수 있다.
신뢰도 근거의 범위는 Microsoft의 Document Intelligence 신뢰도 안내에서 확인할 수 있다.
자동처리 규칙을 만들 때는 다음 질문을 함께 본다.
- 원본 품질: 스캔 상태, 페이지 방향, 글자 크기 또는 잘림이 의심되는가?
- 항목 중요도: 값이 승인, 지급, 권한, 공식 기록 같은 결과를 바꾸는가?
- 구조 의존성: 값의 의미가 표의 행·열 또는 주변 항목과의 연결에 달려 있는가?
- 교차 확인: 원문에 합계, 형식, 대응 항목처럼 비교할 근거가 있는가?
- 발견 가능성: 잘못된 결과가 후속 단계에서 자연스럽게 드러나는가?
- 복구 가능성: 처리 뒤 원문을 찾아 안전하게 되돌릴 수 있는가?
처리 경로는 이 조건들의 조합으로 나눈다.
- 자동 진행: 오류 영향이 제한적이고 원문 추적, 후속 단계의 오류 발견, 안전한 복구가 가능한 경우
- 보류 후 검토: 검토 조건에 해당하거나 핵심값 누락, 구조 불일치, 교차 확인 실패가 발견된 경우
- 처리 중단: 원문을 판독할 수 없거나 업무상 중요한 값의 근거를 확인할 수 없는 경우
검토와 중단 뒤의 조치를 연결한다
명시적 가상 상황에서 문서가 흐리거나 핵심 필드가 비어 있거나 서로 비교할 수 있는 값이 맞지 않는다면 자동 확정을 멈추고 담당자에게 원문과 추출 결과를 함께 보여준다. 검토자는 의심되는 값, 연결된 머리글과 행, 불일치 이유를 확인한다.
처리 중단에는 재스캔 요청이나 원문 재확보 같은 다음 조치를 연결한다. 사람 검토에서는 검토 대상, 판단 근거, 수정된 핵심값과 수정 이유를 남겨 같은 유형의 문서에 기준을 다시 적용할 수 있게 한다.
OCR 추출과 후속 AI 해석은 서로 다른 단계다. 기술적 범위는 Google의 Document AI OCR 안내에서 확인할 수 있다. 오류가 발견되면 추출 결과와 후속 규칙을 나눠 점검한다.
운영하면서 기준을 조정한다
운영 기록에서 어떤 오류가 자동 통과하고 어떤 이유로 사람 검토에 전환되는지 살핀다. 운영 기록에는 다음 항목을 남길 수 있다.
- 검토 전환을 일으킨 조건
- 원본 품질 문제와 추출 오류의 구분
- 문자 오류와 표 연결 오류의 구분
- 담당자가 수정한 핵심값과 수정 이유
- 잘못 자동처리된 결과의 발견 지점과 복구 가능 여부
특정 오류가 반복되면 원본 입력, 표 구조 확인, 후속 규칙 중 어느 지점을 바꿀지 먼저 판단한다. 기준을 바꾼 뒤에는 이전의 안전 사례와 검토 전환 사례를 함께 다시 적용한다.
기준 변경의 성공은 검토 건수의 감소가 아니라, 기존 위험 사례가 계속 차단되고 기존 안전 사례가 불필요하게 막히지 않는지로 판단한다.
전체 검증 관점은 문서 OCR 결과, 왜 그대로 업무에 쓰면 안 될까에서 확인할 수 있다. 표의 행·열과 숫자 관계를 검사하는 방법은 OCR 표와 숫자 오류는 어떻게 생기고 무엇을 확인해야 할까에서 이어진다.
자주 묻는 질문
기준 하나로 자동처리 여부를 결정하면 안 되나?
본문의 여섯 질문을 함께 적용해 자동 진행, 보류 후 검토, 처리 중단 중 어느 경로가 맞는지 판단한다.
사람이 검토하면 OCR 위험이 모두 사라지나?
검토자에게 원문, 추출 결과, 의심 항목, 구조 관계를 함께 제시하고 실제 확인 결과를 남긴다.
자동처리 기준은 한 번 정하면 계속 사용할 수 있나?
본문의 재검증 절차에 따라 기존 안전 사례와 검토 전환 사례를 다시 적용해 기준을 평가한다.
“OCR 자동처리와 사람 검토 기준을 어떻게 나눌까”에 대한 1개의 생각