首个以情景/答案依赖链度量视频对话记忆的基准,最佳模型仅得45.7%
Zhengdong Hu, Chao Wang, Kaituo Feng, Huanjin Yao, Mingfei Lu, Hehe Fan, Yi Yang
2026-11-05
基准评测
多模态大模型
多轮对话
视频理解
长上下文记忆
VLM 只读带时间戳的转录并自主搜证,全模态基准反超直接听音频的 omni 模型
Peiran Wu, Fangfei Gou, Zhaoxi Mu, Changhao Zhang, Jian Liu, Weiqiang Wang,...
2026-11-05
ASR
LLM智能体
多模态
无训练
视频理解
智能体四阶段流水线把原始视频自动转化为10万条理解、编辑与统一任务指令数据,并按训练反馈自迭代
Tengju Ru, Weitong Lian, Zecong Tang, Lingyi Meng, Haoran Li, Zhejun Cui,...
2026-11-04
LLM智能体
多模态数据合成
指令微调数据集
统一多模态模型
视频理解
提出Lab2Sim基准与EduVideo2Code框架,把实验视频变成可交互的虚拟实验
Xusen Hei, Jiali Chen, Jinyu Yang, Yi Cai
2026-11-03
前端代码生成
基准评测
多模态大模型
科学教育
视频理解
首个为流式视频理解引入ask动作的多轮基准,评估模型面对不确定性时何时提问、问什么、何时作答
Lu Wang, Zhuoran Jin, Longxiang Wang, Junhong Chen, Yupu Hao, Yao Xu,...
2026-10-30
不确定性
主动交互
基准测试
多模态大模型
流式视频
提出'代码即视频描述'范式并构建323视频基准,代码保留视频信息优于自然语言,动态时序仍最弱
Jiafu Tang, Yifan Xu, Eric Tang, Junjie Zhao, Shipeng Luo, Te Sun, Haoxuan...
2026-10-28
代码生成
多模态大模型
视频描述
视频理解
评测基准
按时间序回放异构空间监督并平衡接口损失,让单一模型同时提升三类流式空间基准
Yihao Hu, Yitong Lin, Pan Wang, Zhihao Wen, Hang Wang, Yiwen Zhao, Deyuan...
2026-10-28
后训练/SFT
多任务学习
多模态大模型
流式空间智能
视频理解
用世界建模统一视角,把视频理解、生成、统一与交互组织为读、写、共享、交互四大操作
Shengqiong Wu, Meng Luo, Bobo Li, Ziwei Liu, Shuicheng Yan, Ming-Hsuan Yang,...
2026-10-26
世界模型
统一多模态模型
综述
视频理解
视频生成
提出视频中心深度研究报告生成任务并构建OmniDR-Bench,最强智能体仅得63.3/100分
Jiahao Meng, Qize Yang, Yuxuan Wang, Yunfei Chu, Wensi Dai, Jin Xu, Yunhai Tong
2026-10-23
LLM-as-a-Judge
基准评测
多模态检索
报告生成
深度研究智能体
把AI视频检测拆解为检查规划、证据验证、证据聚合三能力,全程人类锚定监督
Zhuoran Zhang, Yang Shi, Qixun Wang, Tengfei Liu, Yuqi Tang, Xuanyu Zhu,...
2026-10-23
AI生成内容检测
可解释性
基准评测
多模态大模型
强化学习
用相邻帧关系查询差异的校准注入,破解视频场景图生成中的关系语义惯性
Jaeyeon Heo, Geuntaek Lim, Yukyung Choi
2026-10-23
DETR查询机制
Transformer
时序建模
视频场景图生成
视频理解
用配对目标指定、视听双轨道和时空定位统一评测50个大模型的视频理解能力
Xuyang Liu, Shihao Wang, Xinyu Wei, Minghan Li, Zeqing Wang, Zuhao Yang,...
2026-10-16
基准评测
多模态大模型
时序定位
空间定位
视频理解
用共享打分头替代自回归解码,统一时序定位与视频问答,推理提速最高129倍
Yuhan Zhu, Xiangyu Zeng, Qingyi Si, Chenxu Yang, Yifei Li, Luozheng Qin,...
2026-10-14
System One
多模态大模型
时序定位
视频理解
视频问答
用50段真实视频与360个标注片段考核12个前沿模型以智能体方式重建可编辑动态3D场景的能力
Jialei Wang, Zehan Wang, XiaoYang Wu, Ziang Zhang, Siyu Chen, Jiaer Huang,...
2026-10-14
3D重建
Blender
VLM评测
智能体基准
视频理解
训练时用密集帧当参考,让模型仅凭稀疏帧也能可靠定位与问答
Wenfang Sun, Yingjun Du, Cees G. M. Snoek
2026-10-12
多模态大模型
强化学习
视频理解
高效推理
首个数据视频理解基准:961个视频、6775题,最强模型70.0%仍落后人类21.7个百分点
Yupeng Xie, Zhenyang Wang, Jiayi Zhu, Yinghao Tang, Zhouan Shen, Yiyu Chen, Yuyu Luo
2026-10-12
叙事理解
基准测试
多模态大模型
数据可视化
视频理解
冻结模型兼任求解器与编辑器,回看视频诊断失败、演化执行框架,准确率与帧数成本双优
Bingjun Luo, Jialin Guo, Siqi Li
2026-10-12
代码演化
智能体自我改进
视频理解
长视频问答
提出SESD任务与Video2Skill基准,揭示VLM难以从流式视频中积累可复用技能
Jianshu Zhang, Ce Zhang, Xiyuan Yang, Chenwei Xu, Haoran Lu, Yijiang Li,...
2026-10-06
具身智能
基准评测
技能发现
视觉语言模型
视频理解
构建感知-推理-评估闭环基准,系统诊断16个VLM的物理理解短板
Xinge Peng, Yiting Lu, Tianwu Zhi, Wen Wen, Jianzhao Liu, Xin Li, Zhibo Chen
2026-10-02
基准测试
模型评估
物理智能
视觉语言模型
视频理解
揭示批内高相似性是流式自监督学习瓶颈,StreamMAE以运动感知管线解决
Ivan Martinović, Lukas Knobel, Yuki M. Asano
2026-10-01
MAE
流式学习
自监督学习
表征学习
视频理解