NYT
Benchmarks
TaskDatasetSOTA resultTrendResults
NYT50 limited length (test)
46.66ROUGE-1
8
NYT10-D
50.8AUC
7
NYT10 570K non-filtered (test)
45.52AUC
7
NYT
0.017TC
7
NYT11-plus (test)
46.6Precision
7
NYT (test)
60S-F1
7
NYT 11
34.15F1 Score
6
NYT10
42.04F1 Score
6
NYT
17.88Average Computing Time
6
NYT partial match (test)
92.4Micro-F1
6
NYT
57.19R1
6
NYT-10d (test)
0.534AUC
6
NYT single triplet version (test)
61.5Precision
6
NYT (test)
58.9Accuracy
6
NYT Joint
95.9Entity F1
5
NYT
0.33NMI
5
NYT dataset
44.72auPR
5
NYT ConvoSumm 1.0 (test)
36.6ROUGE-1
5
NYT-10 (test)
0.424AUC
5
NYT Freebase
84.9Precision @10%
5
NYT whole span annotation (test)
91.4Precision
5
NYT10-HRL (test)
77.7Precision
5
NYT50 (test)
45.33ROUGE-1
5
NYT synthetic rewrites
0Epsilon (ε)
4
NYT partial match (test)
95.8Micro-F1
4