List your company

Tokenization on Assamese (as)

1.9NSL ScoreLLaMA-3.2-1B
0.3920.78351.1751.5665Nov 5, 2025

Evaluation results

MethodLinks
LLaMA-3.2-1BReference Model=Base LLaMA-42025.111.9
Qwen-3Reference Model=Base LLaMA-42025.111.68
LLaMA-4Reference Model=Base LLaMA-42025.111
Mistral-NemoReference Model=Base LLaMA-42025.111
SarvamReference Model=Base LLaMA-42025.110.99
DeepSeek-R1Reference Model=Base LLaMA-42025.110.83
Gemma-3Reference Model=Base LLaMA-42025.110.63
GPT-OSSReference Model=Base LLaMA-42025.110.63
SutraReference Model=Base LLaMA-42025.110.55
MUTANT-IndicReference Model=Base LLaMA-42025.110.45