用固定程序在结构化解析上算出答案,以逐断言校验取代多数投票,让 VLM 可靠自进化
Ahmed Heakl, Sungik Choi, Moontae Lee, Salman Khan
2026-09-29
GRPO
可验证奖励
场景图解析
数据合成
自进化
可预演可修正的视觉工作区让VLM驾驶机器人,LIBERO-Pro达75.6%成功
Yehang Zhang, Haojian Huang, Yifan Chang, Jianchong Su, Bohan Zhou, Yingjie...
2026-09-25
具身智能
技能学习
智能体系统
机器人操作
视觉语言模型
用三级交互课程与特权在线蒸馏,教会VLM建模状态转移并提升长时程空间推理
Kaixiang Yao, Xu Wang, Miao Pan, Hu Xiyue, Weishi Wang, Daniel Dahlmeier,...
2026-09-24
强化学习
数据集构建
知识蒸馏
空间推理
视觉语言模型
现成VLM智能体通过上下文即可指导机器人学习新任务,无需梯度更新,但精准执行仍是短板。
Dongzhou Cheng, Taoran Yi, Ye Fang, Xingwu Zhang, Fan Feng, Yixuan Li,...
2026-09-17
上下文学习
具身智能
智能体
机器人操作
模仿学习
把短语接地建模为掩码候选选择,配合人标基准PanoCaps实现密集像素级全场景描述
Sara Pieri, Evangelos Kazakos, Shizhe Chen, Josef Sivic, Cordelia Schmid
2026-09-17
像素级视觉接地
图像分割
图像描述生成
基准数据集
视觉语言模型
首个开源分块扩散视觉语言 GUI 智能体,性能与速度双超同级自回归模型
Zhangxuan Gu, Haoxing Chen, Qi Qin, Yi Xin, Kai Gan, Lin Liu, Long Cui,...
2026-09-15
GUI智能体
MoE
多模态大模型
扩散语言模型
智能体导航
用成对图像替换审计,量化放射报告可用性对医学VLM图像敏感度的影响
Sebastián Andrés Cajas Ordóñez, Maximin Lange, Quang Bui, Anqi Peter Li,...
2026-09-15
医学AI
反事实评估
可解释性
模型审计
视觉语言模型
用NDR覆盖感知指标评测20个VLM把K线证据变成交易建议的全链路可靠性
Xiaoya Wang, Yutong Xu, Junjie Wang
2026-09-15
基准评测
多模态
幻觉评估
视觉语言模型
金融NLP
受控重建揭示合成OCR数据迁移关键,零真实标签训练出超越Typhoon 7B的泰语OCR模型
Kunat Pipatanakul
2026-09-14
OCR
低资源语言
合成数据
数据工程
泰语
提出TRACE火灾损伤基准与即插即用FRM模块,将受损特征映射回完好对齐表征以识别烧毁物体。
Aditi Tiwari, Sofia Stoica, Savya Khosla, David Forsyth, Heng Ji
2026-09-14
火灾损伤基准
特征恢复
目标检测
视觉语言模型
视觉鲁棒性
仅用15k合成积木题训练,LVLM域外空间推理全面超越空间专精模型
Soohyun Ryu, Sohee Kim, Eunho Yang
2026-09-11
GRPO
合成数据
后训练
强化学习
空间智能
仅训封闭任务即浮现开放报告能力,冠脉造影端到端可审计解读
Jia-Jen Lee, Shih-Yen Hou, Kee Koon Ng, Wei-Chun Wang, Shih-Sheng Chang
2026-09-11
医学影像AI
可解释性
强化学习
视觉语言模型
仅用3D坐标、免训练地把多视角词元精确剪到目标数量,8%词元保留93.5%性能
Nhat-Tan Bui, Varshini Elangovan, Arun Reddy Anugu, Sreyas Mohan, Wei Ye,...
2026-09-09
免训练方法
多视角3D推理
推理加速
视觉词元剪枝
视觉语言模型
蒸馏2D编辑模型、VLM与3D生成先验,无配对数据训练前馈3D编辑器
Hao Wen, Weibin Yun, Hongxing Fan, Haotian Lu, Rui Chen, Zehuan Huang, Lu Sheng
2026-09-09
3D编辑
3D高斯泼溅
分布匹配蒸馏
前馈编辑
无配对监督
提出KoNA基准,以配对单/复合查询评测VLM选择性拒答,并用SFT+GRPO实现组件级不遵从。
Minji Kim, Jihyoung Jang, Hyounghun Kim
2026-09-07
LLM-as-judge
SFT+GRPO微调
基准评测
幻觉
拒答与安全对齐
用视觉语言模型替代手工规则推理变化位置与类型转移,合成高质量遥感变化检测训练数据
Yaoyi Qi, Xingxing Weng, Chao Pang, Yongkang Cui, Xiangyu Hao, Xiaokang...
2026-09-07
变化检测
扩散模型
数据合成
视觉语言模型
语义分割
TFO用Whisper转写把冻结VLM零训练改造成语音全模态模型,56个基准上媲美甚至超越原生Omni
Ankan Deria, Hanoona Rasheed, Xilin He, Fahad Shahbaz Khan, Salman Khan
2026-09-07
免训练多模态
全模态大模型
能力保持评测
视觉语言模型
语音理解
用冻结图像嵌入的对比对齐替代描述标注,单次推理即可逼近多阶段验证管线的细粒度描述质量
Suryaansh Jain, Rahasya Barkur, Vishal G, Ryan Rossi, Franck Dernoncourt,...
2026-09-03
LoRA微调
图像描述生成
对比学习
强化学习
无参考监督
模块化流水线将147万张历史报纸扫描转化为163亿token的开放数据集
Matteo Cargnelutti, Catherine Brobston, Eben English, Jake Sadow, Kacie...
2026-09-03
LLM预训练数据
OCR
数字人文
数据集构建
版面分析
不改VLM架构,外挂BEV感知头与规划专家,统一3D感知、驾驶问答与运动规划
Xin Zhou, Zongchuang Zhao, Zhibo Yang, Mingsheng Li, Humen Zhong, Shuai Bai,...
2026-09-02
3D感知
强化学习
流匹配
端到端规划
自动驾驶