List your company
ResearchFormerly WizWand

Mathematical Reasoning (Calculator) on GSM-PLUS

76.54AccuracyEFFGEN
7.598425.496743.39561.2933Jan 31, 2026
Updated 8mo ago

Evaluation results

MethodLinks
EFFGENModel=Gemma 3 (27B)2026.0176.54
Raw ModelModel=Gemma 3 (27B)2026.0174.58
AutoGenModel=Gemma 3 (27B)2026.0174.12
LangChainModel=Gemma 3 (27B)2026.0173.25
SmolagentsModel=Gemma 3 (27B)2026.0172.46
EFFGENModel=GPT-OSS (20B)2026.0170.15
Raw ModelModel=Gemma 3 (12B)2026.0169.83
AutoGenModel=Gemma 3 (12B)2026.0168.92
Raw ModelModel=GPT-OSS (20B)2026.0168.42
AutoGenModel=GPT-OSS (20B)2026.0167.58
EFFGENModel=Gemma 3 (12B)2026.0166.28
LangChainModel=Gemma 3 (12B)2026.0165.42
LangChainModel=GPT-OSS (20B)2026.0164.75
SmolagentsModel=GPT-OSS (20B)2026.0163.92
SmolagentsModel=Gemma 3 (12B)2026.0162.73
EFFGENModel=Gemma 3 (4B)2026.0159.67
Raw ModelModel=Gemma 3 (4B)2026.0157.4
AutoGenModel=Gemma 3 (4B)2026.0155.27
LangChainModel=Gemma 3 (4B)2026.0153.92
SmolagentsModel=Gemma 3 (4B)2026.0147.35
EFFGENModel=Gemma 3 (1B)2026.0116.04
Raw ModelModel=Gemma 3 (1B)2026.0114.6
AutoGenModel=Gemma 3 (1B)2026.0113.42
LangChainModel=Gemma 3 (1B)2026.0112.83
SmolagentsModel=Gemma 3 (1B)2026.0110.25