AIDA
Benchmarks
Task NameDataset NameSOTA ResultTrendResults
AIDA A
89.8Micro F1
43
AIDA B
0.832Macro F1
30
AIDA (testb)
88.6Micro F1
28
AIDA (test)
95.9Micro InKB F1
25
AIDA (testa)
92.9Micro F1
23
AIDA-B (test)
0.831Micro F1
12
AIDA (test)
83.7Micro F1
8
AIDA (test)
86.58Micro P@1.0
8
AIDA
91.5Recall
7
AIDA
88.2Accuracy
7
AIDA CoNLL03 (test)
82.4Strong F1
7
AIDA testa CoNLL03 (val)
89.4Strong F1
7
AIDA CoNLL-2003 (test)
0.84InKB micro F1
6
AIDA in-domain (test)
86.4inKB Micro F1
5
AIDA w/o NIL (testb)
88.6OAC
5
AIDA-B
85.5Macro F1
5
AIDA w/ NIL (testb)
84.42Non-NAC Accuracy
4
AIDA-B (test)
85.7Micro F1
4
AIDA-b (test)
97.05Recall@10
3
AIDA CoNLL-2003 (testb)
—Micro-F1
0
AIDA CoNLL-2003 (testa)
—Micro-F1
0