MathVista
Benchmarks
TaskDatasetSOTA resultTrendResults
MathVista
229.2Score
566
MathVista
86.81Accuracy
448
MathVista
89.2Accuracy
382
MathVista
85.6Accuracy
276
MathVista mini
86.2Accuracy
151
MathVista MINI
0.878Accuracy
124
MathVista (testmini)
85.9Accuracy
121
MathVista mini (test)
77.1Overall Accuracy
114
MathVista
85.9Accuracy
89
MathVista (testmini)
79.3Accuracy
88
MathVista
85.6Accuracy
87
MathVista mini (test)
80.2Accuracy
75
MathVista (test)
84.44Accuracy
66
MathVista
74.8MathVista
55
MathVista
83.5Accuracy
50
MathVista
74.7MathVista Accuracy
48
MathVista
81.9Score
46
MathVista mini
73.9Score
43
MathVista
88.9Accuracy (All)
43
MathVista GPS
95.7Accuracy
38
MathVista
74.2Accuracy
37
MathVista MVistam
73.4Accuracy
36
MathVista
89.8Pass@1
36
MathVista (test)
74.2Accuracy
34
MathVista mini
55.2Score
32