List your company

Video Understanding on MVBench

100AccuracyLLaVA-Video-7B
68.07276.36184.6592.939Dec 6, 2024Mar 11, 2025Jun 14, 2025Sep 17, 2025Dec 21, 2025Mar 26, 2026Jun 29, 2026

Evaluation results

MethodLinks
LLaVA-Video-7BPrefilling FLOPs (T)=80.2, FLOPs Ratio=100%, Before LLM Retained Ratio=100%2026.0310060.2——————————————————————————————60.4——
AOTPrefilling FLOPs (T)=9.3, FLOPs Ratio=18.9%, Before LLM Retained Ratio=25%2026.0396.858.3——————————————————————————————59.2——
AOTPrefilling FLOPs (T)=9.3, FLOPs Ratio=11.6%, Before LLM Retained Ratio=15%2026.0395.157.3——————————————————————————————57.7——
PDropPrefilling FLOPs (T)=19.5, FLOPs Ratio=24.3%, Before LLM Retained Ratio=100%2026.0394.256.7——————————————————————————————55.9——
VisionZipPrefilling FLOPs (T)=9.3, FLOPs Ratio=18.9%, Before LLM Retained Ratio=25%2026.0394.256.7——————————————————————————————56.7——
VisionZipPrefilling FLOPs (T)=9.3, FLOPs Ratio=11.6%, Before LLM Retained Ratio=15%2026.0394.256.7——————————————————————————————56.7——
FastVPrefilling FLOPs (T)=17.1, FLOPs Ratio=21.3%, Before LLM Retained Ratio=100%2026.0392.455.6——————————————————————————————54.3——
MACDBackbone=Qwen2-VL-7B2026.0290——————————————————————————————————
PLM-7B2026.0677.1——————————————————————————————————
MACDBackbone=Qwen3-VL-2B2026.0277——————————————————————————————————
AdaCodecToken budget=comparable, Backbone=Qwen2-VL-7B2026.0676.6——————————————————————————————————
InternVL-2.5-26B (Reproduction)Backbone=InternVL-2.5-26B, Red. Ratio=0.00%, Latency=2.9142, Speedup=-2025.1276.47——————————————————————————————————
InternVL-2.5-26B + LUVCBackbone=InternVL-2.5-26B, Red. Ratio=61.32%, Latency=1.2255, Speedup=2.38x2025.1276.13——————————————————————————————————
Molmo2-8B2026.0675.9——————————————————————————————————
Gemini 1.5 pro#Frames=1 fps2026.0175.69——————————————————————————————————
InternVL-3-8BFrames=82026.0175.4——————————————————————————————————
InternVL3-8B2025.1275.4——————————————————————————————————
InternVL3Model Category=MLLMs2025.1275.4——————————————————————————————————
TimeChat-Online-7B#Frames=1 fps2026.0175.36——————————————————————————————————
InternVL-2.5-26B + PACTBackbone=InternVL-2.5-26B, Red. Ratio=59.61%, Latency=1.3548, Speedup=2.15x2025.1275.3——————————————————————————————————
AdaCodecToken budget=1/7, Backbone=Qwen2-VL-7B2026.0675.3——————————————————————————————————
InternVL-2.5-26BBackbone=InternVL-2.5-26B, Red. Ratio=0.00%, Latency=2.9142, Speedup=-2025.1275.2——————————————————————————————————
PhyVLLMModel Category=Video LLMs, Frames Input=162025.1275.1——————————————————————————————————
Eagle-X5-7B2026.0674.8——————————————————————————————————
Molmo2-O-7B2026.0674.8——————————————————————————————————
InternVL3-8BModel Type=Open-Source2026.0574.3——————————————————————————————————
GPT-4o2026.0674.1——————————————————————————————————
VideoChat-Flash-7B2026.0674——————————————————————————————————
Gemini-3.1-ProModel Type=Proprietary2026.0573.6——————————————————————————————————
GPT-4o#Frames=642026.0173.28——————————————————————————————————
InternVL-2.5-8B (Reproduction)Backbone=InternVL-2.5-8B, Red. Ratio=0.00%, Latency=1.2480, Speedup=-2025.1273.25——————————————————————————————————
InternVL3-8B2026.0373.2——————————————————————————————————
L2-VMASBackbone=Qwen3-VL-8B, Mode=Thinking2026.0173.1——————————————————————————————————
GLM-4.5V2026.0473——————————————————————————————————
L2-VMASBackbone=Qwen3-VL-8B, Mode=Instruct2026.0172.9——————————————————————————————————
RLER2026.0472.9——————————————————————————————————
RETOOL-VIDEOSize=9B2026.0572.9——————————————————————————————————
Claude 3.5 Sonnet#Frames=202026.0172.44——————————————————————————————————
InternVL-2.5-26B + VTWBackbone=InternVL-2.5-26B, Red. Ratio=66.67%, Latency=1.2586, Speedup=2.32x2025.1272.43——————————————————————————————————
Streamo-7BModel Category=Streamo Framework, Parameters=7B2025.1272.3——————————————————————————————————
Qwen3-VL-30B-A3B-InstructInference scheme=no-thinking2026.0472.3——————————————————————————————————
Vanilla MoEBackbone=QWEN3-VL-30B-A3B-INSTRUCT2026.0472.29——————————————————————————————————
MACS (Ours)Backbone=QWEN3-VL-30B-A3B-INSTRUCT2026.0472.11——————————————————————————————————
InternVL3.5Size=8B2026.0272.1——————————————————————————————————
InternVL-3.5Model Size=8B2026.0372.1——————————————————————————————————
InternVL3.5-30B-A3BInference scheme=no-thinking2026.0472.1——————————————————————————————————
InternVL3.5-30B-A3BSize=30B2026.0572.1——————————————————————————————————
InternVL3.5Architecture Type=Modular, Parameter Scale=8B, Training Stage=Instruct2026.0572.1——————————————————————————————————
InternVL2-8B2026.0672.1——————————————————————————————————
Vanilla MoEBackbone=INTERNVL3.5-30B-A3B2026.0472.06——————————————————————————————————
InternVL2.5#S (Model Size)=7B, #F (Number of input frames)=64, Architecture=AR Baseline2026.0172——————————————————————————————————
InternVL-2.5-8BFrames=82026.0172——————————————————————————————————
InternVL2.5Model Category=Open-Source General MLLMs, Parameter Scale=8B2026.0172——————————————————————————————————
InternVL-2.5-8BBackbone=InternVL-2.5-8B, Red. Ratio=0.00%, Latency=1.2480, Speedup=-2025.1272——————————————————————————————————
InternVL2.5Model Category=MLLMs2025.1272——————————————————————————————————
InternVL2.5Model Category=Offline Video-LLMs / LVLMs2026.0672——————————————————————————————————
MACS (Ours)Backbone=INTERNVL3.5-30B-A3B2026.0471.89——————————————————————————————————
InternVL-2.5-8B + LUVCBackbone=InternVL-2.5-8B, Red. Ratio=62.12%, Latency=0.6293, Speedup=1.98x2025.1271.73——————————————————————————————————
Penguin-VLModel Size=8B2026.0371.7——————————————————————————————————
MACS (w/o Expanded)Backbone=QWEN3-VL-30B-A3B-INSTRUCT2026.0471.63——————————————————————————————————
AdaTooler-V-7BFrames=1282025.1271.5——————————————————————————————————
InternVL-2.5-8B + PACTBackbone=InternVL-2.5-8B, Red. Ratio=55.41%, Latency=0.6949, Speedup=1.80x2025.1271.35——————————————————————————————————
MACS (w/o Expanded)Backbone=INTERNVL3.5-30B-A3B2026.0471.14——————————————————————————————————
VMASBackbone=Qwen3-VL-8B, Mode=Thinking2026.0170.8——————————————————————————————————
InternVL-2.5-8B + VTWBackbone=InternVL-2.5-8B, Red. Ratio=56.25%, Latency=0.6482, Speedup=1.93x2025.1270.8——————————————————————————————————
NEO-ovArchitecture Type=Native, Parameter Scale=8B, Training Stage=Instruct2026.0570.7——————————————————————————————————
VideoChat-R1.52026.0470.6——————————————————————————————————
Gemini 1.5 ProSource=[60]2026.0670.6——————————————————————————————————
InternVL2.5-8B2026.0370.5——————————————————————————————————
InternVL2.5-8B2026.0470.5——————————————————————————————————
Qwen2.5-VLSize=72B2026.0270.4——————————————————————————————————
Gemini 1.5 ProSource=[59]2026.0670.4——————————————————————————————————
VisReflect2026.0670.4——————————————————————————————————
Qwen2.5-Omni-7B2026.0370.3——————————————————————————————————
Qwen3-VL-4B + T-GRPOBackbone=Qwen3-VL-4B, Post-training Method=T-GRPO2026.0570.3——————————————————————————————————
VMASBackbone=Qwen3-VL-8B, Mode=Instruct2026.0170.2——————————————————————————————————
StreamForest-7B#Frames=1 fps2026.0170.2——————————————————————————————————
AdaTooler-V-7BFrames=642025.1270.2——————————————————————————————————
CogniRoute2026.0670.2——————————————————————————————————
Qwen3-VL-4B + ArrowRLBackbone=Qwen3-VL-4B, Post-training Method=ArrowRL2026.0569.9——————————————————————————————————
LiveStarProModel Category=Online Assistants2026.0669.8——————————————————————————————————
VideoLLaMA3Size=7B2026.0269.7——————————————————————————————————
VideoLLaMA3-7B2025.0569.7——————————————————————————————————
VideoLLaMA3-7BParameters=7B2026.0369.7——————————————————————————————————
Qwen3-VL-8B + ArrowRLBackbone=Qwen3-VL-8B, Post-training Method=ArrowRL2026.0569.7——————————————————————————————————
Qwen3-VL-8B + CRPOBackbone=Qwen3-VL-8B, Post-training Method=CRPO2026.0569.7——————————————————————————————————
VideoLLaMA3Architecture Type=Modular, Parameter Scale=8B, Training Stage=Instruct2026.0569.7——————————————————————————————————
Qwen2.5-VLSize=7B2026.0269.6——————————————————————————————————
Qwen2.5-VL#S (Model Size)=7B, #F (Number of input frames)=64, Architecture=AR Baseline, reproduced=true2026.0169.6——————————————————————————————————
QwenVL-2.5-7BFrames=fps=12026.0169.6——————————————————————————————————
Qwen2.5-VL-7BModel Category=Streamo Framework, Parameters=7B2025.1269.6——————————————————————————————————
Qwen2.5-VLModel Category=MLLMs2025.1269.6——————————————————————————————————
VanillaBackbone=Qwen2.5-VL 7B, Token reduction ratio=0%2024.1269.6————————————————————————————————100—
Qwen2.5 VL-7B2025.0569.6——————————————————————————————————
Qwen2.5-VLModel Category=Offline Video-LLMs / LVLMs2026.0669.6——————————————————————————————————
Qwen3-VL-8B + T-GRPOBackbone=Qwen3-VL-8B, Post-training Method=T-GRPO2026.0569.5——————————————————————————————————
Qwen3 Omni 30BParameters=30B2026.0669.5——————————————————————————————————
Demo-ICL (SFT)Size=7B2026.0269.4——————————————————————————————————
VideoLatent-7B (Ours)Frames=32, Architecture Category=Latent MLLM2026.0669.4——————————————————————————————————
LinVT-Qwen2-VLSize=7B2024.1269.3——————————————————————————————————