Luminir Document Parser · 벤치마크 성능
벤치마크 측정 조건과 결과
모든 점수는 각 벤치마크가 공개한 데이터와 채점 코드로 르몽이 직접 잰 값이고(자체 측정), 1.0이면 정답과 같다는 뜻입니다. 잰 날짜와 세부 점수를 함께 적었습니다.
요약
| 벤치마크 | 데이터 | 대표 점수 | 비교 | 측정일 |
|---|---|---|---|---|
| opendataloader-bench | 한컴 공개, 영어 문서 200쪽 | 0.914 | 공개 1위 점수(0.907)보다 높음 | 2026-10-12 |
| KoOCR-Bench | schift-io v1.2, 한국어 실제 문서 604쪽 | 0.759 | 설치형 엔진 중 최고 점수 | 2026-10-12 |
| DP-Bench | Upstage 공개, 영어 문서 200쪽 | 0.962 | 공개 리더보드 1위 점수(0.961)보다 높음 | 2026-09-23 |
| OmniDocBench v1.5 | 문서 1,651쪽 | 0.934 | — | 2026-10-23 |
opendataloader-bench
- 데이터
- 한컴 공개, 영어 문서 200쪽
- 대표 지표
- 읽기 순서와 표, 제목을 합친 종합 점수
- 측정일
- 2026-10-12
- 원문
- 데이터·채점 코드 ↗리더보드 ↗
| 지표 | Luminir Document Parser | 공개 1위 (opendataloader hybrid) |
|---|---|---|
| 종합 | 0.914 | 0.907 |
| 읽기 순서 (NID) | 0.944 | 0.934 |
| 표 (TEDS) | 0.934 | 0.928 |
| 제목 단계 (MHS) | 0.834 | 0.821 |
KoOCR-Bench
- 데이터
- schift-io v1.2, 한국어 실제 문서 604쪽
- 대표 지표
- 글자와 표, 읽기 순서, 제목, 위치를 합친 종합 점수
- 측정일
- 2026-10-12
- 원문
- 데이터 ↗
| 지표 | Luminir Document Parser |
|---|---|
| 종합 | 0.759 |
| 요소 위치 좌표 | 0.976 |
DP-Bench
- 데이터
- Upstage 공개, 영어 문서 200쪽
- 대표 지표
- 표 구조와 내용이 정답과 얼마나 같은지(TEDS)
- 측정일
- 2026-09-23
- 원문
- 데이터·채점 코드 ↗
| 지표 | Luminir Document Parser |
|---|---|
| 표 구조·내용 일치도 (TEDS) | 0.962 |
| 표 구조 일치도 (TEDS-S) | 0.976 |
| 표 검출 F1 | 0.973 |
| 글자 순서 일치도 (NID) | 0.958 |
- 벤치마크 저장소에 공개된 상용 파서 결과와 같은 채점 코드로 비교했을 때 표 검출(F1)과 표 구조·내용(TEDS)이 가장 높았습니다.
OmniDocBench v1.5
- 데이터
- 문서 1,651쪽
- 대표 지표
- 표 구조와 내용이 정답과 얼마나 같은지(TEDS)
- 측정일
- 2026-10-23
- 원문
- 데이터·채점 코드 ↗
| 지표 | Luminir Document Parser |
|---|---|
| 표 구조·내용 일치도 (TEDS) | 0.934 |
| 표 구조 일치도 | 0.960 |
| 본문 틀린 글자 비율 (편집 거리, 낮을수록 좋음) | 0.037 |
- 메일
- support@lemong.ai
기관명, 문서 종류와 양, 서버 환경을 적어 주시면 빠르게 안내해 드립니다.