List your company

Tokenization on Gujarati (gu)

2.91NSL ScoreLLaMA-3.2-1B
0.44521.08511.7252.3649Nov 5, 2025

Evaluation results

MethodLinks
LLaMA-3.2-1BReference Model=Base LLaMA-42025.112.91
Qwen-3Reference Model=Base LLaMA-42025.112.59
DeepSeek-R1Reference Model=Base LLaMA-42025.111.48
Mistral-NemoReference Model=Base LLaMA-42025.111.09
LLaMA-4Reference Model=Base LLaMA-42025.111
Gemma-3Reference Model=Base LLaMA-42025.110.76
GPT-OSSReference Model=Base LLaMA-42025.110.71
SutraReference Model=Base LLaMA-42025.110.68
SarvamReference Model=Base LLaMA-42025.110.64
MUTANT-IndicReference Model=Base LLaMA-42025.110.54