Sycophancy Mitigation on MMLU (on-the-fly)
0.524BRRBCT
Evaluation Results
| Method | Links | |
|---|---|---|
| BCTModel=Gemma-3-4B, Phase=Post2026.06 | 0.524 | |
| BCTModel=Gemma-3-4B, Phase=Pre2026.06 | 0.52 | |
| ACTModel=Gemma-3-4B, Phase=Pre2026.06 | 0.52 | |
| AttCTModel=Gemma-3-4B, Phase=Pre2026.06 | 0.52 | |
| MLPCTModel=Gemma-3-4B, Phase=Pre2026.06 | 0.52 | |
| BCTModel=Gemma-3-27B, Phase=Pre2026.06 | 0.451 | |
| ACTModel=Gemma-3-27B, Phase=Pre2026.06 | 0.451 | |
| AttCTModel=Gemma-3-27B, Phase=Pre2026.06 | 0.451 | |
| MLPCTModel=Gemma-3-27B, Phase=Pre2026.06 | 0.451 | |
| BCTModel=Gemma-3-27B, Phase=Post2026.06 | 0.413 | |
| BCTModel=Qwen3-4B, Phase=Pre2026.06 | 0.378 | |
| ACTModel=Qwen3-4B, Phase=Pre2026.06 | 0.378 | |
| AttCTModel=Qwen3-4B, Phase=Pre2026.06 | 0.378 | |
| MLPCTModel=Qwen3-4B, Phase=Pre2026.06 | 0.378 | |
| BCTModel=Qwen3-8B, Phase=Post2026.06 | 0.245 | |
| BCTModel=Qwen3-4B, Phase=Post2026.06 | 0.242 | |
| BCTModel=Llama-3.1-8B, Phase=Pre2026.06 | 0.202 | |
| ACTModel=Llama-3.1-8B, Phase=Pre2026.06 | 0.202 | |
| AttCTModel=Llama-3.1-8B, Phase=Pre2026.06 | 0.202 | |
| MLPCTModel=Llama-3.1-8B, Phase=Pre2026.06 | 0.202 | |
| BCTModel=Qwen3-8B, Phase=Pre2026.06 | 0.198 | |
| ACTModel=Qwen3-8B, Phase=Pre2026.06 | 0.198 | |
| AttCTModel=Qwen3-8B, Phase=Pre2026.06 | 0.198 | |
| MLPCTModel=Qwen3-8B, Phase=Pre2026.06 | 0.198 | |
| BCTModel=Llama-3.1-8B, Phase=Post2026.06 | 0.189 | |
| AttCTModel=Qwen3-4B, Phase=Post2026.06 | 0.086 | |
| MLPCTModel=Qwen3-4B, Phase=Post2026.06 | 0.072 | |
| MLPCTModel=Gemma-3-4B, Phase=Post2026.06 | 0.039 | |
| MLPCTModel=Gemma-3-27B, Phase=Post2026.06 | 0.027 | |
| MLPCTModel=Qwen3-8B, Phase=Post2026.06 | 0.025 | |
| ACTModel=Llama-3.1-8B, Phase=Post2026.06 | 0.019 | |
| AttCTModel=Qwen3-8B, Phase=Post2026.06 | 0.017 | |
| AttCTModel=Llama-3.1-8B, Phase=Post2026.06 | 0.016 | |
| MLPCTModel=Llama-3.1-8B, Phase=Post2026.06 | 0.014 | |
| AttCTModel=Gemma-3-4B, Phase=Post2026.06 | 0.013 | |
| ACTModel=Qwen3-8B, Phase=Post2026.06 | 0.011 | |
| ACTModel=Gemma-3-27B, Phase=Post2026.06 | 0.008 | |
| AttCTModel=Gemma-3-27B, Phase=Post2026.06 | 0.003 | |
| ACTModel=Qwen3-4B, Phase=Post2026.06 | 0.002 | |
| ACTModel=Gemma-3-4B, Phase=Post2026.06 | 0.001 |