Retrieval-augmented Reasoning on CSQA
85.42AccuracyEFFGEN
Evaluation results
| Method | Links | |
|---|---|---|
| EFFGENModel=Gemma 3 (27B)2026.01 | 85.42 | |
| EFFGENModel=GPT-OSS (20B)2026.01 | 84.35 | |
| SmolagentsModel=Gemma 3 (27B)2026.01 | 83.58 | |
| Raw ModelModel=Gemma 3 (27B)2026.01 | 81.65 | |
| EFFGENModel=Gemma 3 (4B)2026.01 | 81.35 | |
| EFFGENModel=Gemma 3 (12B)2026.01 | 81.27 | |
| AutoGenModel=Gemma 3 (27B)2026.01 | 80.42 | |
| LangChainModel=Gemma 3 (27B)2026.01 | 80.24 | |
| Raw ModelModel=Gemma 3 (12B)2026.01 | 79.45 | |
| Raw ModelModel=GPT-OSS (20B)2026.01 | 78.63 | |
| SmolagentsModel=GPT-OSS (20B)2026.01 | 77.92 | |
| LangChainModel=GPT-OSS (20B)2026.01 | 77.45 | |
| LangChainModel=Gemma 3 (12B)2026.01 | 77.28 | |
| SmolagentsModel=Gemma 3 (12B)2026.01 | 74.63 | |
| Raw ModelModel=Gemma 3 (4B)2026.01 | 71.28 | |
| AutoGenModel=Gemma 3 (4B)2026.01 | 68.45 | |
| LangChainModel=Gemma 3 (4B)2026.01 | 66.82 | |
| AutoGenModel=GPT-OSS (20B)2026.01 | 60.28 | |
| EFFGENModel=Gemma 3 (1B)2026.01 | 60.15 | |
| Raw ModelModel=Gemma 3 (1B)2026.01 | 58.24 | |
| AutoGenModel=Gemma 3 (12B)2026.01 | 56.92 | |
| AutoGenModel=Gemma 3 (1B)2026.01 | 45.63 | |
| LangChainModel=Gemma 3 (1B)2026.01 | 42.15 | |
| SmolagentsModel=Gemma 3 (4B)2026.01 | 38.62 | |
| SmolagentsModel=Gemma 3 (1B)2026.01 | 26.38 |