Speech Quality Assessment on SpeechEval benchmark leaderboard · SOTA2 Research

Speech Quality Assessment on SpeechEval

0.748PCC - OverallUTMOS

Evaluation Results

Method	Links
UTMOS2026.05		0.748	0.716	0.74	0.524	0.569	0.519	0.623	0.745	0.7	0.717	0.506	0.573	0.52	0.624
JASTIN2026.05		0.662	0.655	0.69	0.481	0.564	0.509	0.534	0.67	0.638	0.685	0.429	0.567	0.506	0.542
AES-CE2026.05		0.661	0.616	0.705	0.512	0.563	0.502	0.564	0.657	0.616	0.713	0.508	0.577	0.505	0.55
NISQA2026.05		0.62	0.584	0.611	0.419	0.503	0.467	0.515	0.63	0.573	0.605	0.42	0.515	0.47	0.524
AES-PQ2026.05		0.602	0.563	0.677	0.525	0.553	0.489	0.483	0.592	0.57	0.678	0.535	0.548	0.483	0.467
AES-CU2026.05		0.573	0.533	0.625	0.502	0.522	0.456	0.462	0.539	0.523	0.626	0.522	0.506	0.434	0.421
SpeechEval2026.05		0.52	0.505	0.592	0.329	0.434	0.378	0.456	—	—	—	—	—	—	—
Gemini-3-Pro2026.05		0.497	0.463	0.529	0.176	0.306	0.289	0.449	0.496	0.477	0.524	0.181	0.315	0.281	0.456
Gemini-2.5-Flash2026.05		0.437	0.229	0.415	0.303	0.166	0.209	0.353	0.44	0.217	0.426	0.279	0.182	0.198	0.339
Qwen3-Omni2026.05		0.407	0.406	0.241	0.081	0.063	0.125	0.169	0.414	0.391	0.241	0.127	0.055	0.12	0.198
Gemini-2.5-Pro2026.05		0.343	0.295	0.226	0.055	0.197	0.168	0.255	0.302	0.236	0.22	-0.027	0.186	0.14	0.25
Qwen2-Audio2026.05		0.097	0.064	0.018	-0.003	-0.003	0.113	0.056	0.117	-0.029	0.005	0.022	0.069	0.126	0.053
AudioFlamingo32026.05		0	0.033	0.093	0.156	-0.055	-0.038	0.112	0.012	0.04	0.099	0.149	-0.061	-0.019	0.144
AES-PC2026.05		-0.141	-0.138	-0.182	-0.163	-0.145	-0.144	-0.079	-0.042	-0.069	-0.153	-0.143	-0.137	-0.122	-0.011