Question Answering on NQ (racc and asr)
60RACCKeyword
Evaluation results
| Method | Links | ||
|---|---|---|---|
| KeywordLLM=GPT-4o2025.06 | 60 | 1.2 | |
| AV FilterLLM=GPT-4o, alpha=∞2025.06 | 58.8 | 1.6 | |
| KeywordLLM=Llama-3.12025.06 | 58 | 2 | |
| AV FilterLLM=GPT-4o, alpha=52025.06 | 58 | 3.8 | |
| AV FilterLLM=GPT-4o, alpha=102025.06 | 57.8 | 3 | |
| VanillaLLM=Llama2-C2025.06 | 56.8 | 5.8 | |
| VanillaLLM=GPT-4o2025.06 | 56.4 | 5.2 | |
| DecodingLLM=Mistral-7B2025.06 | 56 | 1 | |
| AV FilterLLM=Llama-3.1, alpha=∞2025.06 | 54.4 | 4.2 | |
| AV FilterLLM=Mistral-7B, alpha=52025.06 | 53.4 | 6.2 | |
| AV FilterLLM=Mistral-7B, alpha=102025.06 | 52.8 | 6.6 | |
| AV FilterLLM=Mistral-7B, alpha=∞2025.06 | 52.8 | 4 | |
| VanillaLLM=Mistral-7B2025.06 | 52 | 9.2 | |
| AV FilterLLM=Llama2-C, alpha=∞2025.06 | 51.8 | 3.6 | |
| AV FilterLLM=Llama2-C, alpha=102025.06 | 51.2 | 6.2 | |
| KeywordLLM=Llama2-C2025.06 | 51 | 2 | |
| AV FilterLLM=Deepseek-R1, alpha=52025.06 | 51 | 9 | |
| AV FilterLLM=Llama-3.1, alpha=102025.06 | 50.6 | 5.2 | |
| AV FilterLLM=Llama-3.1, alpha=52025.06 | 50.2 | 5 | |
| AV FilterLLM=Llama2-C, alpha=52025.06 | 49.8 | 6.2 | |
| KeywordLLM=Mistral-7B2025.06 | 49 | 1 | |
| DecodingLLM=Llama-3.12025.06 | 49 | 10 | |
| VanillaLLM=Deepseek-R12025.06 | 48.6 | 7.3 | |
| AV FilterLLM=Deepseek-R1, alpha=102025.06 | 48.6 | 7.3 | |
| AV FilterLLM=Deepseek-R1, alpha=∞2025.06 | 48.6 | 5.3 | |
| KeywordLLM=Deepseek-R12025.06 | 44 | 2 | |
| DecodingLLM=Deepseek-R12025.06 | 43 | 0 | |
| VanillaLLM=Llama-3.12025.06 | 41 | 10.8 | |
| DecodingLLM=Llama2-C2025.06 | 40 | 4 |