Single-needle retrieval on Visual Haystacks single-needle challenge
90.2Recall@1Detector Oracle
Evaluation Results
| Method | Links | |
|---|---|---|
| Detector OracleDatabase size (D)=12026.04 | 90.2 | |
| Detector OracleDatabase size (D)=22026.04 | 89.6 | |
| Gemini-3 ProDatabase size (D)=22026.04 | 89.2 | |
| Gemini-3 ProDatabase size (D)=12026.04 | 88.9 | |
| Detector OracleDatabase size (D)=32026.04 | 88.8 | |
| T-RENDatabase size (D)=12026.04 | 88.5 | |
| Gemini-1.5 ProDatabase size (D)=12026.04 | 88.4 | |
| Detector OracleDatabase size (D)=52026.04 | 88.3 | |
| InternVL-2Database size (D)=12026.04 | 88.1 | |
| Gemini-3 ProDatabase size (D)=32026.04 | 87.3 | |
| Gemini-3 ProDatabase size (D)=52026.04 | 87.2 | |
| Detector OracleDatabase size (D)=102026.04 | 86.9 | |
| T-RENDatabase size (D)=22026.04 | 86.4 | |
| LLaVA-v1.5Database size (D)=12026.04 | 85.8 | |
| Gemini-3 ProDatabase size (D)=102026.04 | 85.7 | |
| Detector OracleDatabase size (D)=202026.04 | 85.4 | |
| T-RENDatabase size (D)=32026.04 | 85.3 | |
| mPLUG-OWL3Database size (D)=12026.04 | 84.4 | |
| T-RENDatabase size (D)=52026.04 | 83.9 | |
| Gemini-3 ProDatabase size (D)=202026.04 | 83.5 | |
| MIRAGEDatabase size (D)=12026.04 | 83.2 | |
| T-RENDatabase size (D)=102026.04 | 82.6 | |
| GPT-4oDatabase size (D)=12026.04 | 82.5 | |
| Gemini-1.5 ProDatabase size (D)=22026.04 | 82 | |
| Detector OracleDatabase size (D)=502026.04 | 81.7 | |
| RENDatabase size (D)=12026.04 | 81.2 | |
| Qwen-2-VLDatabase size (D)=12026.04 | 80.9 | |
| Phi-3Database size (D)=12026.04 | 80.5 | |
| InternVL-2Database size (D)=22026.04 | 80.5 | |
| GPT-4oDatabase size (D)=22026.04 | 79.9 | |
| T-RENDatabase size (D)=202026.04 | 79.6 | |
| RENDatabase size (D)=22026.04 | 78.6 | |
| Gemini-1.5 ProDatabase size (D)=32026.04 | 78.3 | |
| MIRAGEDatabase size (D)=22026.04 | 77.8 | |
| Detector OracleDatabase size (D)=1002026.04 | 77.5 | |
| GPT-4oDatabase size (D)=32026.04 | 77.5 | |
| RENDatabase size (D)=32026.04 | 77.4 | |
| LLaVA-v1.5Database size (D)=22026.04 | 77.1 | |
| Qwen-2-VLDatabase size (D)=22026.04 | 76.6 | |
| MIRAGEDatabase size (D)=32026.04 | 76.6 | |
| Gemini-1.5 ProDatabase size (D)=52026.04 | 76 | |
| RENDatabase size (D)=52026.04 | 76 | |
| LLaVA-v1.5Database size (D)=32026.04 | 75.8 | |
| T-RENDatabase size (D)=502026.04 | 75.2 | |
| Detector OracleDatabase size (D)=5002026.04 | 74.8 | |
| Gemini-3 ProDatabase size (D)=502026.04 | 74.3 | |
| Gemini-3 ProDatabase size (D)=1002026.04 | 74.1 | |
| RENDatabase size (D)=102026.04 | 74 | |
| T-RENDatabase size (D)=1002026.04 | 74 | |
| Detector OracleDatabase size (D)=1K2026.04 | 73.9 | |
| Qwen-2-VLDatabase size (D)=32026.04 | 73.6 | |
| GPT-4oDatabase size (D)=52026.04 | 73.3 | |
| MIRAGEDatabase size (D)=52026.04 | 72.8 | |
| DINOv3 dino.txtDatabase size (D)=12026.04 | 72.7 | |
| InternVL-2Database size (D)=32026.04 | 72.3 | |
| RENDatabase size (D)=202026.04 | 72.1 | |
| SigLIP-2Database size (D)=12026.04 | 72 | |
| Gemini-1.5 ProDatabase size (D)=102026.04 | 71.9 | |
| DINOv3 dino.txtDatabase size (D)=22026.04 | 71.3 | |
| Gemini-3 ProDatabase size (D)=5002026.04 | 71 | |
| MIRAGEDatabase size (D)=102026.04 | 70.5 | |
| SigLIP-2Database size (D)=22026.04 | 69.2 | |
| DINOv3 dino.txtDatabase size (D)=32026.04 | 69.2 | |
| Phi-3Database size (D)=22026.04 | 69.1 | |
| Gemini-1.5 ProDatabase size (D)=202026.04 | 68.6 | |
| LLaVA-v1.5Database size (D)=52026.04 | 68.6 | |
| RENDatabase size (D)=502026.04 | 68.3 | |
| GPT-4oDatabase size (D)=102026.04 | 68.2 | |
| DINOv3 dino.txtDatabase size (D)=52026.04 | 68.2 | |
| T-RENDatabase size (D)=5002026.04 | 68.2 | |
| SigLIP-2Database size (D)=32026.04 | 68.1 | |
| Gemini-3 ProDatabase size (D)=1K2026.04 | 67.9 | |
| Qwen-2-VLDatabase size (D)=52026.04 | 67.9 | |
| Phi-3Database size (D)=32026.04 | 67.3 | |
| DINOv3 dino.txtDatabase size (D)=102026.04 | 66.1 | |
| mPLUG-OWL3Database size (D)=22026.04 | 66 | |
| MIRAGEDatabase size (D)=202026.04 | 66 | |
| RENDatabase size (D)=1002026.04 | 65.5 | |
| GPT-4oDatabase size (D)=202026.04 | 65.4 | |
| SigLIP-2Database size (D)=52026.04 | 65.3 | |
| T-RENDatabase size (D)=1K2026.04 | 65.2 | |
| SigLIP-2Database size (D)=102026.04 | 64.1 | |
| InternVL-2Database size (D)=52026.04 | 63.9 | |
| LongVILADatabase size (D)=12026.04 | 63.8 | |
| LLaVA-v1.5Database size (D)=102026.04 | 63.6 | |
| MIRAGEDatabase size (D)=502026.04 | 63.6 | |
| DINOv3 dino.txtDatabase size (D)=202026.04 | 63.2 | |
| Gemini-1.5 ProDatabase size (D)=502026.04 | 62.8 | |
| Qwen-2-VLDatabase size (D)=102026.04 | 62.6 | |
| RENDatabase size (D)=5002026.04 | 62.3 | |
| mPLUG-OWL3Database size (D)=32026.04 | 62.1 | |
| Phi-3Database size (D)=52026.04 | 62 | |
| MIRAGEDatabase size (D)=1002026.04 | 62 | |
| DINOv3 dino.txtDatabase size (D)=502026.04 | 60.9 | |
| LLaVA-v1.5Database size (D)=202026.04 | 60.4 | |
| SigLIP-2Database size (D)=202026.04 | 60.3 | |
| DINOv3 dino.txtDatabase size (D)=1002026.04 | 60.2 | |
| GPT-4oDatabase size (D)=502026.04 | 59.7 | |
| RENDatabase size (D)=1K2026.04 | 59.2 | |
| Qwen-2-VLDatabase size (D)=202026.04 | 59.1 |