Medical Report Generation on BIMCV n=1,505 cases (test) benchmark leaderboard · SOTA2 Research

Medical Report Generation on BIMCV n=1,505 cases (test)

0.2624RaTE ScoreAstra

Evaluation Results

Method	Links
Astra2026.05		0.2624	0.4133	0.3783	0.2755	0.3448	0.353
LLaVA2026.05		0.2189	0.2636	0.2513	0.143	0.197	0.2137
Gemini-32026.05		0.2076	0.2286	0.2066	0.1586	0.1596	0.1884
Lingshu-32B2026.05		0.201	0.1571	0.1709	0.0739	0.078	0.12
Qwen3-VL-8B2026.05		0.1954	0.1683	0.1669	0.1041	0.1043	0.1359
HuluMed-7B2026.05		0.1907	0.1702	0.1736	0.0832	0.0817	0.1272
HuluMed-32B2026.05		0.1904	0.1728	0.1747	0.0836	0.0814	0.1281
HuluMed-14B2026.05		0.1904	0.173	0.1753	0.0832	0.0819	0.1284
R2GenGPT2026.05		0.1823	0.1947	0.1752	0.1284	0.1856	0.171
M3D2026.05		0.1803	0.1755	0.1552	0.0665	0.0547	0.113
RadFM2026.05		0.1769	0.128	0.1153	0.0729	0.0468	0.0907
Lingshu-7B2026.05		0.1598	0.0927	0.0766	0.0394	0.0448	0.0634
MedGemma-27B2026.05		0.1479	0.0571	0.05	0.0239	0.0277	0.0397
MedGemma-4B2026.05		0.14	0.0417	0.0508	0.0175	0.0165	0.0317