Embedding Alignment on Natural Questions (test)
100Top-1 Accuracymini-vec2vec
Evaluation results
| Method | Links | |||||
|---|---|---|---|---|---|---|
| mini-vec2vecM1=gtr, M2=gran.2025.09 | 100 | 1.01 | 0.31 | 0.58 | 0.57 | |
| vec2vecM1=gte, M2=stella2025.09 | 100 | 1 | — | — | — | |
| mini-vec2vecM1=gte, M2=stella2025.09 | 100 | 1 | 0.42 | 0.7 | 0.71 | |
| mini-vec2vecM1=gte, M2=e52025.09 | 100 | 1 | 0.33 | 0.6 | 0.61 | |
| vec2vecM1=stel., M2=gtr2025.09 | 100 | 1.1 | — | — | — | |
| vec2vecM1=stel., M2=e52025.09 | 100 | 1 | — | — | — | |
| mini-vec2vecM1=stel., M2=e52025.09 | 100 | 1 | 0.43 | 0.61 | 0.62 | |
| vec2vecM1=stel., M2=gte2025.09 | 100 | 1 | — | — | — | |
| mini-vec2vecM1=stel., M2=gte2025.09 | 100 | 1 | 0.42 | 0.69 | 0.69 | |
| vec2vecM1=e5, M2=stel.2025.09 | 100 | 1 | — | — | — | |
| mini-vec2vecM1=e5, M2=stel.2025.09 | 100 | 1 | 0.44 | 0.64 | 0.65 | |
| vec2vecM1=e5, M2=gte2025.09 | 100 | 1 | — | — | — | |
| mini-vec2vecM1=e5, M2=gte2025.09 | 100 | 1 | 0.33 | 0.61 | 0.62 | |
| vec2vecM1=gran., M2=gtr2025.09 | 99 | 1.19 | — | — | — | |
| mini-vec2vecM1=gran., M2=gtr2025.09 | 99 | 1.02 | 0.25 | 0.58 | 0.57 | |
| mini-vec2vecM1=gran., M2=stel.2025.09 | 99 | 1.03 | 0.38 | 0.59 | 0.6 | |
| mini-vec2vecM1=gran., M2=e52025.09 | 99 | 1.05 | 0.28 | 0.52 | 0.53 | |
| vec2vecM1=gtr, M2=gran.2025.09 | 99 | 1.02 | — | — | — | |
| vec2vecM1=gtr, M2=stel.2025.09 | 99 | 1.03 | — | — | — | |
| mini-vec2vecM1=gte, M2=gran.2025.09 | 99 | 1.03 | 0.31 | 0.57 | 0.58 | |
| vec2vecM1=gte, M2=e52025.09 | 99 | 5.91 | — | — | — | |
| mini-vec2vecM1=stel., M2=gran.2025.09 | 99 | 1.02 | 0.37 | 0.58 | 0.59 | |
| vec2vecM1=e5, M2=gran.2025.09 | 99 | 2.2 | — | — | — | |
| mini-vec2vecM1=e5, M2=gran.2025.09 | 99 | 1.04 | 0.3 | 0.54 | 0.56 | |
| vec2vecM1=gran., M2=stel.2025.09 | 98 | 1.05 | — | — | — | |
| vec2vecM1=gran., M2=e52025.09 | 98 | 1.11 | — | — | — | |
| mini-vec2vecM1=gran., M2=gte2025.09 | 98 | 1.05 | 0.35 | 0.54 | 0.56 | |
| mini-vec2vecM1=gtr, M2=stel.2025.09 | 98 | 1.03 | 0.29 | 0.53 | 0.54 | |
| mini-vec2vecM1=gtr, M2=e52025.09 | 98 | 1.06 | 0.22 | 0.48 | 0.49 | |
| mini-vec2vecM1=gtr, M2=gte, clusters=302025.09 | 98 | 1.05 | 0.29 | 0.5 | 0.51 | |
| mini-vec2vecM1=gte, M2=gtr, clusters=302025.09 | 98 | 1.04 | 0.26 | 0.51 | 0.52 | |
| vec2vecM1=stel., M2=gran.2025.09 | 98 | 1.08 | — | — | — | |
| mini-vec2vecM1=stel., M2=gtr2025.09 | 96 | 1.1 | 0.28 | 0.54 | 0.54 | |
| mini-vec2vecM1=e5, M2=gtr2025.09 | 96 | 1.1 | 0.22 | 0.49 | 0.51 | |
| vec2vecM1=gran., M2=gte2025.09 | 95 | 1.18 | — | — | — | |
| vec2vecM1=gte, M2=gran.2025.09 | 95 | 1.22 | — | — | — | |
| vec2vecM1=gtr, M2=gte, clusters=302025.09 | 93 | 2.31 | — | — | — | |
| vec2vecM1=gte, M2=gtr, clusters=302025.09 | 91 | 2.64 | — | — | — | |
| vec2vecM1=gtr, M2=e52025.09 | 84 | 2.88 | — | — | — | |
| vec2vecM1=e5, M2=gtr2025.09 | 82 | 2.56 | — | — | — |