利用预训练视频生成模型构建统一通用的多任务视觉感知框架
Letian Wang, Chuhan Zhang, Rishabh Kabra, Jasper Uijlings, Steven Waslander,...
2026-07-13
多任务学习
扩散模型
视觉-语言对齐
视频生成
通用视觉模型
通过生成大量廉价草稿候选并进行多阶段筛选,实现扩散模型在固定墙钟时间预算下的高效推理扩展
Ruchit Rawal, Reza Shirkavand, Sayak Paul, Yuxin Wen, Heng Huang, Yizheng...
2026-07-10
扩散模型
推理时扩展
文生图
计算优化
验证器引导
首个开源MoE视频基础模型,通过稀疏专家架构、机器人增强数据和多维奖励系统实现物理世界的精确模拟。
Shuailei Ma, Jiaqi Liao, Xinyang Wang, Jingjing Wang, Chaoran Feng, Zijing...
2026-07-09
具身智能
扩散模型
混合专家模型
物理模拟
视频生成
OPSD-V通过真实长视频上下文进行缓存感知的在线策略自蒸馏,提升少步自回归视频生成的长视距稳定性
Hongyu Liu, Chun Wang, Feng Gao, Xuanhua He, Yue Ma, Ziyu Wan, Yong Zhang,...
2026-07-09
扩散模型
知识蒸馏
缓存优化
自回归模型
视频生成
融合LLM规划器和VLM批评者,将视频生成器转化为任务感知的世界模型,显著提升长周期机器人操作性能
Hanan Gani, Tejal Kulkarni, Madhoolika Chodavarapu, Nicklas Hansen, Manmohan...
2026-07-09
世界模型
层次化规划
扩散模型
机器人学习
视频生成
同步生成RGB、深度和光流的4D世界模型,实现高精度机器人操作
Haoyu Zhao, Xingyue Zhao, Siteng Huang, Xin Li, Deli Zhao, Zhongyu Li
2026-07-08
4D场景建模
世界模型
扩散模型
机器人操作
视频生成
基于像素空间扩散的单目3D点图预测方法,无需VAE,边界更锐利
Haofei Xu, Rundi Wu, Philipp Henzler, Nikolai Kalischek, Michael Oechsle,...
2026-07-08
3D重建
单目深度估计
扩散模型
视觉Transformer
统一双向与自回归视频生成的灵活分块框架,实现质量与效率的动态权衡
Xinyin Ma, Julius Berner, Chao Liu, Arash Vahdat, Weili Nie, Xinchao Wang
2026-07-08
双向注意力
扩散模型
推理效率
自回归生成
视频生成
提出三模式LM,联合AR和扩散训练,实现AR/扩散/自投机三种解码方式,在精度和速度上超越SOTA开源模型
Yonggan Fu, Lexington Whalen, Abhinav Garg, Chengyue Wu, Maksim Khadkevich,...
2026-07-08
并行生成
扩散模型
推理加速
自投机解码
语言模型
首个无需预设相机轨迹的户外3D场景生成框架,自动调度视图并提供对象级外观和几何控制
Geonung Kim, Jeongeun Park, Nuri Ryu, Di Liu, Sunghyun Cho
2026-07-08
3D场景生成
3D高斯溅射
几何条件化
对象级控制
扩散模型
Bridge模块解决跨空间蒸馏,让SD 1.5从现代教师学习高质量生成
Anh Nguyen, Ngan Nguyen, Duc Vu, Trung Dao, Viet Nguyen, Quan Dao, Kien...
2026-07-08
扩散模型
模型蒸馏
生成式AI
知识迁移
跨空间对齐
首个支持四玩家实时交互的动态环境世界模型,在单张GPU上实现20fps生成且能保持数小时稳定
Anthony Hu, Václav Volhejn, Adrien Ramanana Rahary, Chris Mulder, Aditya...
2026-07-07
世界模型
多智能体建模
扩散模型
游戏模拟
视频生成
从扩散解码轨迹中自生成特权信息,实现dLLM的有效在策略自蒸馏
Phuong Tuan Dat, Qi Li, Xinchao Wang
2026-07-07
在策略学习
扩散模型
数学推理
自蒸馏
语言模型
通过4D几何先验和时空自强迫机制实现任意长度的多视角视频生成
Gal Fiebelman, Hadar Averbuch-Elor, Sagie Benaim
2026-07-07
几何先验
多视角合成
扩散模型
自回归生成
视频生成
两阶段框架生成全局一致的大规模3D场景,先创建2D模板再转换为3D高斯点云
Paul Engstler, Iro Laina, Christian Rupprecht, Andrea Vedaldi
2026-07-07
3D场景生成
卷积推理
图像到3D
扩散模型
高斯点云
通过旋转基共享 Lloyd-Max 码本实现数据无关的 DiT 低比特量化,无需校准数据即可跨模态应用
Donghyun Lee, Jitesh Chavan, Duy Nguyen, Sam Huang, Liming Jiang,...
2026-07-06
Transformer
后训练量化
图像生成
扩散模型
视频生成
通过估计源图像的光学指纹并迁移到目标设置,实现无需重建全清晰图像的任意散景编辑
Xinyu Hou, Xiaoming Li, Zongsheng Yue, Chen Change Loy
2026-07-06
光学建模
图像编辑
扩散模型
散景渲染
深度估计
提出分布级奖励框架解决样本级RL的reward hacking问题,显著提升生成质量
Ruihang Li, Mengde Xu, Shuyang Gu, Leigang Qu, Fuli Feng, Han Hu, Wenjie Wang
2026-07-03
Flow Matching
分布匹配
强化学习
扩散模型
模型合并
基于VLM自动建立文本-视觉对应关系,实现无标注多实例精确可控图像生成
Xiaoyu Liu, Huan Wang, Fan Li, Zhixin Wang, Jiaqi Xu, Ming Liu, Wangmeng Zuo
2026-07-03
可控图像生成
多实例生成
扩散模型
掩码细化
视觉语言模型
将离散扩散语言模型应用于放射科报告生成,支持任意顺序填充,性能匹配或超越自回归模型且速度更快
Max Van Puyvelde, Halil Ibrahim Gulluk, Wim Van Criekinge, Olivier Gevaert
2026-07-03
交互式写作
医学影像
扩散模型
报告生成
视觉问答