Patent Claim Evaluation on Patent-CE (test) benchmark leaderboard · SOTA2 Research

Patent Claim Evaluation on Patent-CE (test)

0.4Completeness ($ au$)PatClaimEval

Evaluation Results

Method	Links
PatClaimEval2025.05		0.4	0.504	0.461	0.518	0.354	0.424	0.419	0.518	0.477	0.602
G-Eval-42025.05		0.377	0.41	0.412	0.481	0.276	0.353	0.35	0.385	0.277	0.31
UniEval2025.05		0.339	0.383	0.337	0.375	0.261	0.302	0.301	0.338	0.337	0.381
METEOR2025.05		0.316	0.358	0.371	0.414	0.307	0.355	0.324	0.364	0.292	0.331
BLEU-12025.05		0.305	0.345	0.359	0.401	0.284	0.329	0.335	0.376	0.326	0.369
ROUGE-12025.05		0.305	0.342	0.314	0.351	0.238	0.279	0.301	0.341	0.292	0.332
ROUGE-22025.05		0.305	0.342	0.28	0.312	0.215	0.251	0.268	0.303	0.269	0.306
ROUGE-L2025.05		0.282	0.317	0.28	0.312	0.261	0.303	0.316	0.351	0.303	0.344
BLEU-42025.05		0.271	0.304	0.28	0.312	0.227	0.263	0.256	0.289	0.269	0.305
BERTScore2025.05		0.241	0.279	0.251	0.281	0.242	0.283	0.272	0.303	0.239	0.268
MoverScore2025.05		0.199	0.227	0.199	0.217	0.223	0.264	0.231	0.265	0.21	0.243
SimCSE2025.05		0.177	0.196	0.165	0.173	0.143	0.165	0.22	0.246	0.165	0.186
BARTScore2025.05		0.165	0.188	0.13	0.146	0.211	0.242	0.196	0.219	0.164	0.185
AlignScore2025.05		0.146	0.162	0.145	0.16	0.261	0.305	0.2	0.226	0.224	0.255