이 평가 벤치마크는 1908년에 석판 인쇄된 우르두어 사전의 라인 단위 이미지 161개와 원어민 전문가가 검증한 정답 텍스트로 구성되어 있습니다. 또한 최신 AI 모델의 단어 단위 오류 분석 및 확신도 플래그 데이터를 함께 제공합니다.
활용 사례
- 고문헌 서체 OCR·VLM 벤치마크 평가: 라인 단위 이미지와 원어민 전문가가 교차 검증한 정답 텍스트를 활용하여, 석판 인쇄된 우르두어 문헌에 대한 OCR 및 시각언어모델(VLM)의 문자 인식 성능을 평가할 수 있습니다.
- 모델별 오류 패턴 분석: 모델별 단어 단위 오류 분석 및 확신도 플래그 데이터를 활용하여, OCR·VLM이 나스탈리크체를 인식하는 과정에서 발생하는 오류 유형과 취약 지점을 분석할 수 있습니다.