List your company
ResearchFormerly WizWand

Tokenization on Dogri doi (NSL score)

1.85NSL ScoreQwen-3
0.73721.02611.3151.6039Nov 5, 2025
Updated 7mo ago

Evaluation results

MethodLinks
Qwen-3Reference Model=Base LLaMA-42025.111.85
LLaMA-3.2-1BReference Model=Base LLaMA-42025.111.36
DeepSeek-R1Reference Model=Base LLaMA-42025.111.29
Mistral-NemoReference Model=Base LLaMA-42025.111.07
LLaMA-4Reference Model=Base LLaMA-42025.111
SarvamReference Model=Base LLaMA-42025.111
GPT-OSSReference Model=Base LLaMA-42025.110.96
SutraReference Model=Base LLaMA-42025.110.92
Gemma-3Reference Model=Base LLaMA-42025.110.91
MUTANT-IndicReference Model=Base LLaMA-42025.110.78