Handwriting Transcription on IAM
0.63CEROCR+PAGEN
Evaluation results
| Method | Links | ||||
|---|---|---|---|---|---|
| OCR+PAGENModel=GEMINI-2.5-PRO, Input=OCR+PAGEN2025.02 | 0.63 | 6.71 | 1.8 | 1.04 | |
| OCR+IMAGESModel=GEMINI-2.5-PRO, Input=OCR+IMAGES2025.02 | 0.64 | 8.1 | 1.63 | 1.32 | |
| OCR+PAGE1Model=GEMINI-2.5-PRO, Input=OCR+PAGE12025.02 | 0.65 | 6.63 | 2.51 | 1 | |
| IMAGES-ALL-AT-ONCEModel=GEMINI-2.5-PRO, Input=IMAGES-ALL-AT-ONCE2025.02 | 0.7 | 5.5 | 1.77 | 1.37 | |
| OCR+IMAGESModel=GPT-4O, Input=OCR+IMAGES2025.02 | 0.72 | 12.69 | 1.86 | 1.21 | |
| OCR+PAGE1Model=GPT-4O, Input=OCR+PAGE12025.02 | 0.85 | 8.94 | 1.66 | 1.2 | |
| OCR+PAGENModel=GPT-4O, Input=OCR+PAGEN2025.02 | 0.87 | 9.04 | 1.95 | 1.29 | |
| IMAGES-ALL-AT-ONCEModel=GPT-4O, Input=IMAGES-ALL-AT-ONCE2025.02 | 0.92 | 9.29 | 1.82 | 1.59 | |
| IMAGESModel=GPT-4O, Input=IMAGES2025.02 | 0.92 | 9.81 | 2.06 | 1.79 | |
| IMAGESModel=GEMINI-2.5-PRO, Input=IMAGES2025.02 | 1.16 | 5.56 | 1.66 | 1.47 | |
| OCRModel=GPT-4O, Input=OCR2025.02 | 1.21 | 6.17 | 2.81 | 1.86 | |
| OCR+PAGE1Model=GEMMA-3-27B, Input=OCR+PAGE12025.02 | 1.36 | 2.46 | 2.41 | 2.03 | |
| OCRModel=GEMINI-2.5-PRO, Input=OCR2025.02 | 1.57 | 5.21 | 1.64 | 1.22 | |
| OCR+IMAGESModel=GEMMA-3-27B, Input=OCR+IMAGES2025.02 | 1.78 | 2.47 | 2.78 | 2.66 | |
| IMAGES-ALL-AT-ONCEModel=GEMMA-3-27B, Input=IMAGES-ALL-AT-ONCE2025.02 | 1.97 | 0.19 | 3.45 | 4.05 | |
| OCR+PAGENModel=GEMMA-3-27B, Input=OCR+PAGEN2025.02 | 2.17 | 2.55 | 3.44 | 2.22 | |
| IMAGESModel=GEMMA-3-27B, Input=IMAGES2025.02 | 2.31 | 0.19 | 2.65 | 4.32 | |
| OCRModel=GEMMA-3-27B, Input=OCR2025.02 | 2.93 | 2.42 | 3.97 | 3.17 | |
| OCRInput=OCR2025.02 | 3.81 | 2.26 | 3.61 | 5.11 | |
| PYLAIAInput=PYLAIA2025.02 | 6.51 | 0 | — | — |