构建OpenCoF-17K数据集,通过多样化时间监督和推理token机制提升视频生成模型的推理能力
Xinyan Chen, Ziyu Guo, Renrui Zhang, Dongzhi Jiang, Hongsheng Li
2026-07-10
Chain-of-Frame
Diffusion Transformer
数据集构建
视觉推理
视频生成
提出P2R框架,将细粒度视觉推理解耦为感知定位和推理回答两个阶段,仅需最终答案监督
Hongxing Li, Xiufeng Huang, Dingming Li, Wenjing Jiang, Zixuan Wang, Haolei...
2026-07-02
多模态大模型
强化学习
感知推理解耦
细粒度视觉理解
视觉推理
解耦感知与推理的多轮视觉推理agent,通过mask引导和语义BFS实现高效证据定位
Dengxian Gong, Yuanzheng Wu, Haobo Yuan, Zhengdong Hu, Tao Zhang, Yikang...
2026-07-02
主动感知
多轮决策
工具增强
视觉推理
视觉语言模型
提出GauntletBench基准测试,评估AI智能体在专业复杂场景中的泛化能力
Mykola Vysotskyi, Runqi Lin, Grzegorz Biziel, Michal Zakrzewski, Sebastian...
2026-06-26
基准测试
多模态大模型
智能体评估
视觉推理
计算机使用
无需文本标注答案,通过对比正负视觉证据门控提升细粒度视觉推理能力
Haoxiang Sun, Zhihang Yi, Langxuan Deng, Yuhao Zhou, Peiqi Jia, Jian Zhao,...
2026-06-25
在线策略蒸馏
多模态大语言模型
对比学习
视觉推理
门控机制
通过可验证的数据构建解决视觉数学推理中的数据质量和奖励信号可靠性问题
Haoling Li, Kai Zheng, Jie Wu, Can Xu, Qingfeng Sun, Han Hu, Yujiu Yang
2026-06-24
多模态学习
强化学习
数学推理
数据验证
视觉推理
让视觉推理轨迹显式指向图像证据,提升计数和空间理解能力
Junkai Zhang, Yihe Deng, Kai-Wei Chang, Wei Wang
2026-06-19
强化学习
接地学习
视觉推理
视觉语言模型
通过主动视觉推理实现视觉原生的多模态深度搜索代理
Zhengbo Zhang, Changtao Miao, Jinbo Su, Zhaowen Zhou, Chunxia Zhang, Xukai...
2026-06-17
主动视觉
多模态大语言模型
智能代理
深度搜索
视觉推理
提出单策略多智能体框架,通过角色解耦优化和KV缓存重用,在视觉推理任务上显著减少幻觉并提升推理效率
Haoran Xu, Hongyu Wang, Yifei Gao, Jiaze Li, Zizhao Tong, Xiaofeng Zhang,...
2026-06-12
多智能体系统
强化学习
视觉推理
视觉语言模型
角色解耦
提出Actor-Critic框架和ArogyaBodha数据集,解决7种印度语言医疗推理问题
Tanmoy Kanti Halder, Akash Ghosh, Subhadip Baidya, Arijit Roy, Sriparna Saha
2026-06-12
Actor-Critic
医疗AI
多模态学习
多语言理解
智能体系统
利用Fisher-Rao距离检测注意力转移,动态重加权token级优势以提升MLLM跨模态推理。
Hangui Lin, Yan Shu, Zhengyang Liang, Chi Liu, Xiangrui Liu, Minghao Qin,...
2026-06-11
多模态大模型
强化学习
注意力机制
视觉推理
跨模态协调
首个基于像素级确定性评估的精确视觉编辑基准,揭示当前多模态模型在基本栅格操作上的显著局限性。
Kai Xu, Ellis Brown, Shrikar Madhu, Rob Fergus, He He, Saining Xie
2026-06-04
图像编辑
基准测试
多模态模型
确定性评估
视觉推理
用520个可规则验证的在线生成器-验证器环境,为视觉推理RL提供无限新鲜训练信号。
Tianze Yang, Yucheng Shi, Ruitong Sun, Jingyuan Huang, Ninghao Liu, Jin Sun
2026-06-03
DAPO
VLM后训练
多模态大模型
强化学习RLVR
程序化生成
用专用图像编辑器替代工具调用与统一多模态,让MLLM真正“用图像思考”。
Beichen Zhang, Yuhong Liu, Jinsong Li, Yuhang Zang, Jiaqi Wang, Dahua Lin
2026-05-25
GRPO
LoRA微调
图像编辑
多模态大模型
强化学习
VideoRLVR框架用可验证奖励优化视频模型,提升规则验证任务的推理能力
Tinghui Zhu, Sheng Zhang, James Y. Huang, Selena Song, Xiaofei Wen, Yuankai...
2026-05-20
Flow-Matching
强化学习
扩散模型
视觉推理
视频生成
用词表里的功能 token 统一 agentic 与 latent 视觉推理。
Ziyu Guo, Rain Liu, Xinyan Chen, Pheng-Ann Heng
2026-05-15
GRPO
VLM
功能 token
强化学习
视觉推理
训练免费的提示框架,让VLM在原图上叠加SVG可视化注释来解释推理
Brandon Collins, Logan Bolton, Hung Huy Nguyen, Mohammad Reza Taesiri, Trung...
2026-04-28
SVG注释
人机交互
可解释AI
提示工程
视觉推理
用两阶段RL课程让多模态大模型自主掌握视觉工具调用以解决复杂视觉推理
Qihua Dong, Gozde Sahin, Pei Wang, Zhaowei Cai, Robik Shrestha, Hao Yang,...
2026-04-23
GRPO
多模态大模型
工具调用
强化学习
视觉推理
首个基于ART认知分类法评估MLLM视觉空间推理能力的合成基准,揭示人类与模型间30+个百分点的能力鸿沟。
Rohit Sinha, Aditya Kanade, Sai Srinivas Kancheti, Vineeth N...
2026-04-22
基准测试
多模态大语言模型
流体智能
视觉推理
认知科学
提出 AVR 框架,让视觉推理模型按任务复杂度动态选择直接回答、感知或完整推理三种格式,token 消耗降低 50–90%。
Yixu Huang, Tinghui Zhu, Muhao Chen
2026-04-20
GRPO
多模态大模型
强化学习
推理效率
视觉推理