벤치마크
정확도만이 아니라 속도, 비용, 비공개 처리 여부까지 같이 봅니다.
| 정확도 | 장당 처리 시간 | 운영 조건 | |||||||
|---|---|---|---|---|---|---|---|---|---|
| 모델 | 종합 | 표 | 본문 | 필기 | 읽기 순서 | RTX 4090 | H200 | 1,000장 비용 | ZDR (데이터 미보관) |
| Schift OCR 2가중치 미공개 | 0.899 | 0.896 | 0.894 | 0.892 | 0.935 | 미공개 | 미공개 | 미공개 | 미공개 |
| Claude Opus 5.5 | 0.918 | 0.920 | 0.901 | 0.948 | 0.941 | API 응답 21.0초 | – | 제공처마다 다름 | |
| Codex (gpt-6.1-sol) | 0.912 | 0.913 | 0.897 | 0.945 | 0.934 | API 응답 21.2초 | – | 제공처마다 다름 | |
| Schift OCR | 0.881 | 0.885 | 0.872 | 0.848 | 0.930 | 0.70초 | 0.33초 | 1만 원 | 가능 |
| Gemini 3.8 Flash | 0.877 | 0.904 | 0.806 | 0.964 | 0.926 | API 응답 12.7초 | – | 제공처마다 다름 | |
| Chandra 2 | 0.854 | 0.886 | 0.804 | 0.816 | 0.933 | – | 1.17초 이하 | – | – |
| PaddleOCR-VL | 0.853 | 0.879 | 0.814 | 0.755 | 0.976 | – | 1.42초 | – | – |
| MinerU 2.5 | 0.792 | 0.804 | 0.810 | 0.478 | 0.984 | – | 2.07초 | – | – |
종합 = 표 .44 · 본문 .36 · 필기 .10 · 읽기 순서 .10 · Bench 2.0 최신 측정값 (2026-11-01). 모든 모델을 같은 1,070쪽(인쇄 939 · 필기 131)과 같은 채점기로 잽니다.
처리 시간: GPU 한 장에 문서 묶음을 동시에 보내 다 읽을 때까지 걸린 시간 ÷ 쪽수(동시 요청 Schift OCR: RTX 4090 8건 · H200 32건, 비교 모델 4~8건) · API 모델은 쪽당 응답 시간 중앙값 · 비용: Schift 가격표(일반 모드). 비교 모델의 비용과 데이터 보관은 제공처마다 달라 비워 둡니다. Schift OCR 2는 출시 전이라 점수만 공개합니다. Gemini 3.8 Flash는 40쪽(대부분 의약품 설명서)을 RECITATION으로 비워 돌려줘 0점 처리했습니다.
