系统性研究如何将通用VLM适配到电商领域,在保留通用能力的同时大幅提升商品理解性能
Matteo Nulli, Vladimir Orshulevich, Tala Bazazo, Christian Herold, Michael...
2026-02-13
多模态
微调
电商
视觉语言模型
领域适配
提出EXSTRUCTINY基准,评估VLM在多文档类型上的结构化信息抽取能力
Mathieu Sibue, Andres Muñoz Garza, Samuel Mensah, Pranav Shetty, Zhiqiang...
2026-02-13
信息抽取
基准数据集
文档理解
结构化输出
视觉语言模型
显式建模推理延迟,实现秒级VLM推理下的实时机器人导航
Zhiyu Huang, Yun Zhang, Johnson Liu, Rui Song, Chen Tang, Jiaqi Ma
2026-02-12
延迟感知
异步推理
强化学习
机器人导航
视觉语言模型
首个开源视觉语言模型,在物理奥赛中斩获12枚金牌,排名第3
Yun Luo, Futing Wang, Qianjia Cheng, Fangchen Yu, Haodi Lei, Jianhao Yan,...
2026-02-11
多模态推理
强化学习
物理奥赛
科学AI
视觉语言模型
多智能体分层框架实现4K原生分辨率高保真多轮图像编辑
Ruijie Ye, Jiayi Zhang, Zhuoxin Liu, Zihao Zhu, Siyuan Yang, Li Li, Tianfu...
2026-02-11
人机交互
图像编辑
多智能体系统
视觉语言模型
高分辨率处理
提出LATENTLENS方法,证明LLM中视觉token在各层均具有高度可解释性
Benno Krojer, Shravan Nayak, Oscar Mañas, Vaibhav Adlakha, Desmond Elliott,...
2026-02-11
可解释性
多模态学习
表示对齐
视觉语言模型
提出Octopus框架,通过配对推理轨迹实现VLM的可控自我纠正能力学习
Yi Ding, Ziliang Qiu, Bolian Li, Ruqi Zhang
2026-02-11
rollout增强
强化学习
推理增强
自我纠正
视觉语言模型
首个系统评估VLM在图像化文本与纯文本间性能差距的基准测试
Qing'an Liu, Juntong Feng, Yuhao Wang, Xinzhe Han, Yujie Cheng, Yue Zhu,...
2026-02-11
OCR
基准测试
文本理解
模态对齐
视觉语言模型
将动作视为潜在变量,通过前向-逆向模型交替优化实现无标注世界建模
Yifu Qiu, Zheng Zhao, Waylon Li, Yftah Ziser, Anna Korhonen, Shay B. Cohen,...
2026-02-09
GRPO
世界模型
强化学习
潜在变量
自改进学习
将视觉感知与语言推理解耦为两阶段流水线,以更少token实现更强视觉推理
Niccolo Avogaro, Nayanika Debnath, Li Mi, Thomas Frick, Junling Wang, Zexue...
2026-02-09
感知-推理解耦
模块化架构
测试时扩展
视觉推理
视觉语言模型
统一视觉语言模型,将自然语言指令直接转化为人形机器人的自我中心动作序列
Yu Bai, MingMing Yu, Chaojie Li, Ziyi Bai, Xinlong Wang, Börje F. Karlsson
2026-02-05
人形机器人
任务规划
移动操作
自我中心感知
视觉语言模型
提出训练无关的推理时引导框架,利用VLM生成可微奖励函数来引导冻结的机器人扩散策略适应分布外场景。
Shuo Liu, Ishneet Sukhvinder Singh, Yiqing Xu, Jiafei Duan, Ranjay Krishna
2026-02-05
扩散策略
推理时适应
机器人学习
模仿学习
视觉语言模型
提出1400对真实场景视觉QA基准,揭示VLM空间推理与人类差距超30个百分点
Azmine Toushik Wasi, Wahid Faisal, Abdur Rahman, Mahfuz Ahmed Anik, Munem...
2026-02-05
3D理解
基准测试
多模态评估
空间推理
视觉语言模型
用两个协作智能体自动构建平衡评测基准并生成可执行评测流程,压缩85%冗余样本、降低77%评测成本
Shuai Zhang, Jiayu Hu, Zijie Chen, Zeyuan Ding, Yi Zhang, Yingji Zhang, Ziyi...
2026-02-05
具身智能
多智能体系统
自动化评估
视觉语言模型
评测基准
两阶段DPO框架,无需长视频标注即可让短上下文VLM理解超长视频
Zhenpeng Huang, Jiaqi Li, Zihan Jia, Xinhao Li, Desen Meng, Lingxue Song, Xi...
2026-02-05
DPO
位置偏差
偏好优化
视觉语言模型
视频问答
提出首个评估VLM自适应推理模式选择能力的基准,揭示准确率与模式选择能力解耦现象
Xintong Zhang, Xiaowen Zhang, Jongrong Wu, Zhi Gao, Shilin Yan, Zhenxin...
2026-02-04
基准测试
多模态推理
工具调用
自适应推理
视觉语言模型
通过在预填充阶段裁剪深层网络、在解码阶段保留完整模型,实现 1.37 倍加速且精度几乎无损
Junhui He, Zhihui Fu, Jun Wang, Qingan Li
2026-02-04
KV缓存
大语言模型
推理加速
模型剪枝
视觉语言模型
提出CoViP框架,通过个性化图像摘要和强化学习实现上下文视觉个性化
Yeongtak Oh, Sangwon Yu, Junsung Park, Han Cheol Moon, Jisoo Mok, Sungroh Yoon
2026-02-04
上下文理解
个性化
多模态学习
强化学习
视觉语言模型
通过生成可渲染Web代码而非直接像素来建模移动GUI状态转换
Woosung Koh, Sungjun Han, Segyu Lee, Se-Young Yun, Jamin Shin
2026-02-03
GUI代理
世界模型
代码生成
移动计算
视觉语言模型
0.9B参数VLM在文档解析达到94.5% SOTA,新增印章识别与文本定位能力
Cheng Cui, Ting Sun, Suyin Liang, Tingquan Gao, Zelun Zhang, Jiaxuan Liu,...
2026-02-02
OCR
多任务学习
布局分析
文档解析
视觉语言模型