AI 인용 위치가 어긋날 때: offset 단위와 원문 판본 맞추기
인용 구간 숫자가 맞아도 다른 문장을 가리킬 수 있다. UTF-16·코드 포인트·바이트 단위와 정규화·줄바꿈 뒤의 위치 변화를 합성 예로 비교하고 판본 대조 기준을 설명한다.
데이터 관리
이모지가 잘리는 글자 수 제한: 바이트·코드 포인트·그래핌을 구별하기
같은 문자열도 바이트·UTF-16 코드 단위·코드 포인트·그래핌 수가 다르다. 이모지와 결합 문자 예시로 잘리는 경계를 확인하고 UTF-8 예산 안의 접두 문자열을 고른다.