ahnyeonchan/KolmOCR_v251129

KolmOCR v251129

KolmOCR은 기존의 olmOCR를 한국어 문서에 학습한 모델로 이미지·PDF를 구조화된 Markdown으로 변환합니다.

학습에 활용된 코드

https://github.com/posicube-services/KolmOCR

KolmOCR Benchmark

• 표/이미지/코드/그래픽 등 다양한 한국어 문서를 포함한 Markdown 생성 과업 평가용 데이터 및 평가 스크립트
• 데이터셋 위치: kolmocr_bench 폴더
• 평가 스크립트: olmocr/kolmocr_eval/scripts/evaluate.py

Split	Docs	특징
fail document in qwen2.5 7b	100	Qwen2.5-7B-Instruct의 MD생성 성능이 미흡한 문서셋
success document in qwen2.5 7b	100	Qwen2.5-7B-Instruct의 MD생성 성능이 좋은 문서셋
table	10	셀 병합/멀티헤더 포함
graphic	10	이미지 캡션·도표
code_blocks	10	코드/리스트 혼재
multicolumn	10	다단문서

• 상기 모든 split에 대한 text_edit(Text), table_f1(Table) image_iou(Image IoU), f1_score (Heading, List) score가 사용됨. Image IoU 현재 평가 코드상 오류로 N/A로 표시됨.

LeaderBoard using KolmOCR Benchmark

Element	KolmOCR 7B v251129 (Ours)	Qwen2.5-VL-7B-Instruct	Qwen2.5-VL-32B-Instruct
Text	0.5695	0.5993	0.5938
Heading	0.3099	0.3775	0.3197
List	0.1931	0.3256	0.2448
Table	0.5857	0.1333	0.364
Image IoU	N/A	N/A	N/A
Code-Block	0.0143	0.0321	0.037

Metrics

메트릭	설명	출력 파일
text_edit	본문 기준 Normalized Edit Distance 및 유사도, 헤딩/리스트 F1 점수	text_edit.csv
table_f1	테이블 블록 매칭 기반 precision/recall/F1 (구조/내용 모두 제공)	table_f1.csv
image_iou	이미지 bbox 순서 매칭 기반 평균 IoU	image_iou.csv
code_TED	코드 블록 추출 후 언어별 트리 변환 및 Tree Edit Distance 유사도 (지원: python, c, cpp, java)	code_TED.csv
overall	주요 지표 평균: text_edit, reading_order, table_TEDS, table_TEDS_S, formula_cdm	overall.csv
f1_score	헤딩/리스트 구조 F1 점수만 별도 저장	f1_score.csv