预训练扩散模型融合立体DSM与卫星影像,密集城区高程RMSE从6.00米降至3.45米
Antoine Lorentz, Stéphane May, Valentine Bellet, Dawa Derksen, Bastien Nespoulous
2026-09-28
ControlNet
多模态条件化
扩散模型
数字表面模型
流匹配
用稀疏视觉增量替代密集未来帧建模,流式增量记忆让机器人世界模型又快又稳。
Han Yan, Zishang Xiang, Haokai Jiang, Zeyu Zhang, Qilin Wang, Weiyu Guo,...
2026-09-25
世界模型
双臂操作
扩散变换器
机器人学习
机器人操作
异步视频-动作双专家架构:慢速预测缓存复用、快速动作实时纠偏,16.47Hz 闭环操作
Jisong Cai, Yao Mu, Ganlin Yang, Zhe Cao, Zhangzheng Tu, Xing Gao, Kailin...
2026-09-24
力觉与触觉
异步推理
机器人操作
流匹配
物理世界模型
重建微调的高维表征因维度坍缩使v预测失效,改用x0预测即可高效扩散
Chao Feng, Zhiyang Xu, Bowei Chen, Yuanjun Xiong, Xiyao Wang, Jui-Hsien...
2026-09-24
x0-prediction
扩散模型
文本生成图像
流匹配
表征自编码器
把几何基础模型特征重参数化为紧凑潜空间,让感知与生成共享同一状态
Jiahao Lu, Minghao Yin, Wenbo Hu, Hengyu Liu, Wang Zhao, Sai-Kit Yeung, Ying...
2026-09-23
3D一致生成
世界模型
几何基础模型
流匹配
潜空间表示
用冻结的可提示3D定位骨干替代语言/视频基座,让机器人操作策略直接建立在显式物体几何之上
Gehao Zhang, Weikai Huang, Shailesh Shailesh, Yiyan Peng, Jiafei Duan, Ranjay Krishna
2026-09-22
3D视觉定位
Sim2Real
世界-动作模型
机器人操作
流匹配
以十六进制色码为统一提示接口,微调单个模型同时实现精确颜色生成与编辑
Ji Xie, Dewei Zhou, Xinyu Huang, Zhennan Chen, Xun Wang
2026-09-21
图像编辑
数据合成
文生图
流匹配
颜色控制
5B自回归世界模型,键盘导航与文本指令联合实时控制,480p 24FPS,每分钟约0.009美元
Mingyang Chen, Shengdong Chen, Xiaoxiao Fu, Bosheng Gong, Haoyuan Guo, Bowen...
2026-09-17
世界模型
交互式视频生成
分布匹配蒸馏
实时推理
流匹配
MoE 自回归 + 单码本音乐 token + ABC 显式编曲规划的长时音乐生成模型
Chengli Feng, Zhiyue Wu, Jiahao Song, Zheqi Dai, Boyang Wang, Ruibin Yuan,...
2026-09-16
MoE
偏好对齐
思维链
流匹配
音乐生成
按点轨迹→DINO→深度→RGB顺序自回归预测多模态未来再生成动作的机器人世界-动作模型
Adam Hung, Bardienus P. Duisterhof, Deva Ramanan, Jeffrey Ichnowski
2026-09-16
世界模型
多模态生成
机器人操作
模仿学习
流匹配
开源模块化研究栈把世界-动作模型预训练变成受控实验,提炼三大准则并开源6400小时数据预训练模型
Yuran Wang, Siqiao Huang, Mingleyang Li, Chenhao Zhang, Jiaqi Liang, Weiyang...
2026-09-09
世界-动作模型
具身智能
具身预训练
机器人操作
流匹配
输入任意拓扑的绑定3D资产与文本提示,单次前向直接合成骨骼动画
Linzhan Mou, Jiahui Lei, Zhiyang Dou, Chenyue Cai, Chaoyue Song, Adam...
2026-09-07
3D角色动画
基础模型
拓扑感知Transformer
文本到运动
流匹配
98%真实数据从头训练6B扩散Transformer,登顶开源SOTA并蒸馏至2-4步推理
Chuyan Chen, Haoxing Chen, Kun Chen, Zhenglin Cheng, Long Cui, Ruishan Fang,...
2026-09-04
dLLM
图像编辑
少步蒸馏
开源配方
扩散Transformer
不改VLM架构,外挂BEV感知头与规划专家,统一3D感知、驾驶问答与运动规划
Xin Zhou, Zongchuang Zhao, Zhibo Yang, Mingsheng Li, Humen Zhong, Shuai Bai,...
2026-09-02
3D感知
强化学习
流匹配
端到端规划
自动驾驶
用12万小时自我中心视频预训练世界动作模型,真机零样本成功率从36.1%升至77.8%
Xionghao Wu, Yijun Yang, Shiyang Zhou, Haoze Sun, Jianhui Liu, Songsong Yu,...
2026-09-02
VLA
世界动作模型
双系统架构
机器人操作
流匹配
在无视觉先验的受控原生设置下,从表示、任务、系统三层次揭示理解与生成何时协同、何时冲突
Penghao Wu, Haiwen Diao, Weichen Fan, Lewei Lu, Dahua Lin, Ziwei Liu
2026-09-02
原生多模态
多任务迁移
架构设计
流匹配
理解-生成协同
通过VAE重建审计选定编解码器,从零训练双流DiT流匹配模型完成SAR到光学图像转换
Jeonghyeok Do, Seungchul Lee, Munchurl Kim
2026-09-02
SAR到光学图像转换
流匹配
潜在生成模型
表示对齐
遥感
7B 开源原生音视频联合生成模型:门控跨模态注意力+多模态 RL+一步 2K 精修
Jiashu Zhu, Yanhao Zheng, Ruitian Tian, Rujing Dang, Shen Zhang, Bingze...
2026-09-01
一步蒸馏
多模态强化学习
开源模型
扩散Transformer
流匹配
用3D补丁记忆与分块相机注意力统一长时记忆与相机控制,实现720p实时交互世界生成
Runjia Qian, Zile Wang, Jihai Zhang, Kai Zou, Wei Yu, Jiaxing Li, Zexiang...
2026-09-01
交互式世界模型
分布匹配蒸馏
实时生成
流匹配
相机控制
可微分令牌取舍机制让视频 VAE 按内容复杂度自适应压缩,生成更快更省
Yeonkyeong Lee, Hyunsung Go, Jongmin Kim, Sewoong Lim, Donghoon Lee
2026-09-01
VAE
流匹配
潜在扩散模型
自适应压缩
视觉分词器