ConvAI2
Benchmarks
TaskDatasetSOTA resultTrendResults
CONVAI2
3.77BLEU
48
ConvAI2 (dev)
90.3R@1/20
25
ConvAI2 (test)
3.38BLEU
20
ConvAI2 (test)
87.9R@20
16
ConvAI2 (test)
90.68Hits@1
10
ConvAI2
38.6RSR
9
ConvAI2
90.7R@1
9
ConvAI2 (Human Evaluation)
80Readability
8
NO-ConvAI2 NLEBench (test)
4.28BLEU
7
ConvAI2
11.85BLEU-1
7
ConvAI2 (filtered hard positive)
2,120RSR
7
ConvAI2 filtered (test)
16.9RSR
7
ConvAI2
2.27Coherence
5
ConvAI2 (C2)
10.2Perplexity
4
ConvAI2 (val)
21.7F1 Score
4
ConvAI2-CG (test)
2.17Persona Consistency
3
ConvAI2 (test)
186P Score
3
ConvAI2 (val)
20.72F1 Score
3