Multilingual Document Retrieval on MIRACL (Evaluation set) benchmark leaderboard · SOTA2 Research

Multilingual Document Retrieval on MIRACL (Evaluation set)

71.7nDCG@10DRAMA1B

Evaluation Results

Method	Links
DRAMA1B2025.02		71.7	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
DRAMA0.3B2025.02		71.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
DRAMA1B (768d)2025.02		70.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
DRAMA0.1B2025.02		70.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
M3-BGE-Dense2025.02		69.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
mE5-Inst2025.02		66	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
mE5-large2025.02		65.4	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
ArcticEmb-v2-L2025.02		64.9	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
MistralE52025.02		62.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
mGTE-Dense2025.02		62.1	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
mE5-base2025.02		60.1	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
ArcticEmb-v2-M2025.02		59.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
Gecko2025.02		56.2	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
BM252025.02		38.5	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—	—
BM252023.04		—	48.1	50.8	35.1	31.9	33.3	55.1	18.3	45.8	44.9	36.9	41.9	33.4	38.3	49.4	48.4	18	—	—	—
BM25 + mDPR2023.04		—	67.3	65.4	54.9	64.1	59.4	67.2	52.3	61.6	44.3	57.6	60.9	53.2	44.6	60.2	59.9	52.6	—	—	—
mContriever2023.04		—	55.3	54.2	37.9	34.1	42.6	51.2	31.5	40.6	36.8	38.3	46.2	39.9	44.4	48.7	52.4	27.4	32.9	32.9	41.5
mContriever2023.04		—	64.6	66.4	41.2	40.3	46.3	61.9	42.9	41.9	44.6	55.6	55.4	48.1	65.3	77.6	69.3	45.9	39.6	41.9	52.7
mDPR2023.04		—	49.9	44.3	39.4	47.8	48	47.2	43.5	38.3	27.2	43.9	41.9	40.7	29.9	35.6	35.8	51.2	—	—	—
mXTRbase2023.04		—	66.1	64.7	49.4	40.5	47.9	62.2	37.5	51.4	46.9	56.8	64	49.8	43	67.7	69.2	47.2	34.5	40.6	52.2
mXTRbase2023.04		—	73	73.9	46.1	42.6	51	70.5	39.3	51.3	54.2	62.3	67.7	54.5	69.7	80.7	76.1	51.4	36.1	46.8	58.2
mXTRxxl2023.04		—	74.1	75.5	56	52.4	56.1	75.1	51.4	61.8	52	68.7	67.4	61.3	69.7	76	76.9	56.9	51.7	60.3	63.5
mXTRxxl2023.04		—	77.8	78.4	52.5	48.9	56	76	52.9	61.5	54.9	73.4	68.5	66.2	79.4	84.3	80.7	58.9	52.8	62.4	65.9