NYT
Benchmarks
Task NameDataset NameSOTA ResultTrendResults
NYT (test)
85.1Accuracy
10
NYT-570K long-tail (test)
81.8Hits@10 (Macro)
9
NYT-570K long-tail (<100 training instances) (test)
77.8Hits@15 (Macro)
9
NYT (test)
91.9F1 Score
9
NYT (test)
93.9P@100
9
NYT* last word annotation (test)
94.5Precision
9
NYT (test)
74.6Micro-F1
9
NYT24 (test)
94.5Precision
9
NYT29 (test)
0.846Precision
9
NYT All sentences 10 (test)
87P@100
9
NYT Two sentences 10 (test)
85P@100
9
NYT One sentence 10 (test)
83P@100
9
NYT-10 (test)
69.3Precision
9
NYT-570K
0.889Precision@100
8
NYT-520K
83Precision@100
8
NYT Bag Size All 570K
94P@100
8
NYT Bag Size Two 570K
95P@100
8
NYT11 HRL
57.53Relation Strict F1
8
NYT24
75.6Accuracy (ACC)
8
NYT Bag Size One 570K
95P@100
8
NYT (test)
76.42EM
8
NYT 21
62.06Precision
8
NYT10 520K filtered (test)
42.89AUC
8
NYT11-HRL (test)
53.8Precision
8
NYT
93.7Micro-F1
8