Question Answering on RQA MC
77.2RACC (Accuracy)AV Filter
Evaluation Results
| Method | Links | ||
|---|---|---|---|
| AV FilterLLM=Mistral-7B, alpha=102025.06 | 77.2 | 6 | |
| AV FilterLLM=Mistral-7B, alpha=52025.06 | 76.6 | 5.8 | |
| AV FilterLLM=Mistral-7B, alpha=∞2025.06 | 76.2 | 7.2 | |
| AV FilterLLM=Mistral-7B, alpha=∞2025.06 | 73.8 | 8.4 | |
| AV FilterLLM=Llama2-C, alpha=∞2025.06 | 72 | 12.6 | |
| AV FilterLLM=Mistral-7B, alpha=102025.06 | 71.6 | 8.2 | |
| AV FilterLLM=Llama2-C, alpha=102025.06 | 70.8 | 12.4 | |
| AV FilterLLM=Mistral-7B, alpha=52025.06 | 70 | 10 | |
| AV FilterLLM=Llama2-C, alpha=102025.06 | 69.6 | 13 | |
| AV FilterLLM=Llama2-C, alpha=∞2025.06 | 68.8 | 16.8 | |
| AV FilterLLM=Llama2-C, alpha=52025.06 | 67.8 | 18.4 | |
| AV FilterLLM=Llama2-C, alpha=52025.06 | 65.6 | 18.4 | |
| AV FilterLLM=GPT-4o, alpha=102025.06 | 64.2 | 4.6 | |
| AV FilterLLM=GPT-4o, alpha=52025.06 | 63.8 | 5.2 | |
| AV FilterLLM=GPT-4o, alpha=∞2025.06 | 63.8 | 5.4 | |
| KeywordLLM=GPT-4o2025.06 | 63 | 4.2 | |
| VanillaLLM=Llama2-C2025.06 | 62.8 | 27.6 | |
| KeywordLLM=GPT-4o2025.06 | 62.6 | 4.4 | |
| VanillaLLM=Mistral-7B2025.06 | 62.2 | 30 | |
| KeywordLLM=Llama-3.12025.06 | 61 | 7 | |
| VanillaLLM=GPT-4o2025.06 | 60.2 | 19.6 | |
| VanillaLLM=Mistral-7B2025.06 | 59.6 | 31 | |
| KeywordLLM=Llama-3.12025.06 | 58 | 6 | |
| KeywordLLM=Mistral-7B2025.06 | 57 | 7 | |
| DecodingLLM=Mistral-7B2025.06 | 55 | 5 | |
| DecodingLLM=Llama-3.12025.06 | 55 | 7 | |
| KeywordLLM=Mistral-7B2025.06 | 55 | 6 | |
| AV FilterLLM=GPT-4o, alpha=52025.06 | 55 | 7.6 | |
| KeywordLLM=Llama2-C2025.06 | 54 | 6 | |
| DecodingLLM=Mistral-7B2025.06 | 54 | 13 | |
| KeywordLLM=Llama2-C2025.06 | 53 | 5 | |
| DecodingLLM=Llama-3.12025.06 | 51 | 17 | |
| AV FilterLLM=GPT-4o, alpha=∞2025.06 | 50.8 | 6.8 | |
| AV FilterLLM=GPT-4o, alpha=102025.06 | 50.4 | 10.4 | |
| AV FilterLLM=Llama-3.1, alpha=102025.06 | 44.2 | 2.8 | |
| VanillaLLM=GPT-4o2025.06 | 43.6 | 25 | |
| AV FilterLLM=Llama-3.1, alpha=52025.06 | 43 | 2.6 | |
| AV FilterLLM=Llama-3.1, alpha=∞2025.06 | 42.2 | 3.2 | |
| VanillaLLM=Llama-3.12025.06 | 42 | 15 | |
| DecodingLLM=Deepseek-R12025.06 | 42 | 1 | |
| DecodingLLM=Deepseek-R12025.06 | 42 | 1 | |
| KeywordLLM=Deepseek-R12025.06 | 40 | 3 | |
| DecodingLLM=Llama2-C2025.06 | 40 | 5 | |
| DecodingLLM=Llama2-C2025.06 | 38 | 12 | |
| AV FilterLLM=Llama-3.1, alpha=∞2025.06 | 36.4 | 6 | |
| AV FilterLLM=Llama-3.1, alpha=102025.06 | 36.2 | 7 | |
| KeywordLLM=Deepseek-R12025.06 | 36 | 3 | |
| AV FilterLLM=Llama-3.1, alpha=52025.06 | 35.8 | 10.6 | |
| AV FilterLLM=Deepseek-R1, alpha=102025.06 | 35.3 | 2.3 | |
| AV FilterLLM=Deepseek-R1, alpha=52025.06 | 35 | 1 | |
| VanillaLLM=Llama2-C2025.06 | 33.4 | 63 | |
| VanillaLLM=Llama-3.12025.06 | 30.6 | 19.2 | |
| AV FilterLLM=Deepseek-R1, alpha=∞2025.06 | 29.3 | 2.3 | |
| AV FilterLLM=Deepseek-R1, alpha=∞2025.06 | 27.6 | 6.3 | |
| VanillaLLM=Deepseek-R12025.06 | 26 | 2.6 | |
| AV FilterLLM=Deepseek-R1, alpha=102025.06 | 25.6 | 6 | |
| VanillaLLM=Deepseek-R12025.06 | 23.6 | 9.6 | |
| AV FilterLLM=Deepseek-R1, alpha=52025.06 | 21 | 8.6 |