List your company
ResearchFormerly WizWand

Tokenization on Santali (sat) (NSL score)

1.45NSL ScoreSarvam
0.21240.53370.8551.1763Nov 5, 2025
Updated 7mo ago

Evaluation results

MethodLinks
SarvamReference Model=Base LLaMA-42025.111.45
GPT-OSSReference Model=Base LLaMA-42025.111.43
LLaMA-3.2-1BReference Model=Base LLaMA-42025.111.34
Mistral-NemoReference Model=Base LLaMA-42025.111.34
LLaMA-4Reference Model=Base LLaMA-42025.111
Qwen-3Reference Model=Base LLaMA-42025.110.96
DeepSeek-R1Reference Model=Base LLaMA-42025.110.69
Gemma-3Reference Model=Base LLaMA-42025.110.59
MUTANT-IndicReference Model=Base LLaMA-42025.110.45
SutraReference Model=Base LLaMA-42025.110.26