AbstentionBench
Benchmarks
TaskDatasetSOTA resultTrendResults
AbstentionBench Normal Prompt
67F1 Score
28
AbstentionBench Abstention Prompt
74.9F1 Score
28
AbstentionBench Clean-merged (test)
92.7Precision
10
AbstentionBench KUQ Cont
100Abstention F1
4
AbstentionBench QAQA
75.8Abstention F1
4
AbstentionBench UMWP
80.9Abstention F1
4
AbstentionBench FreshQA
75.2Abstention F1
4
AbstentionBench BBQ
97Abstention F1
4
AbstentionBench BB Known Unk.
95.8Abstention F1
4
AbstentionBench
53Recall
2