Wikidata
Benchmarks
Task NameDataset NameSOTA ResultTrendResults
Wikidata5M (test)
0.493MRR
58
WikiData recent
100Edit Success Rate
43
Wikidata knowledge infusion
64.69Accuracy
18
WikiData counterfact
100Edit Success Rate
15
Wikidata5M IND (test)
0.799MRR
13
Wikidata12k (test)
0.299MRR
12
WIKIDATA one-shot (out-of-distribution)
66.66Precision
12
Wikidata (test)
86.2Macro F1
12
Wikidata (test)
85.36Macro F1
12
Wikidata (test)
88.6Precision
12
WIKIDATA Interpolation 12k (test)
0.251Hits@1
10
WikiData
52.1F1 Score
9
Wikidata inductive 5M (test)
71.4MRR
8
Wikidata transductive 5M (test)
0.358MRR
8
wikidata12k
0.334MRR
7
Wikidata
47.69MRR
7
Wikidata Easier (test)
36Precision
6
WikiData recent (test)
100Edit Success Rate
5
Wikidata
0.31MRR
5
WikiData
94Recall
4
Wikidata (test)
0.45MRR
3
Wikidata zh-my 2014
43.49Hits@1
2
Wikidata zh-lo 2014
0.622Hits@1
2
Wikidata zh-th 2014
24.07Hits@1
2
Wikidata zh-km 2014
67.25Hits@1
2