提出iKCE诊断方法揭示世界模型长期预测失败的本质是运动学而非动力学想象
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
同步生成RGB、深度和光流的4D世界模型,实现高精度机器人操作
用生成式世界模型替代真实机器人,实现实时数字遥操作数据生成
系统研究世界模型作为机器人策略评估器的关键设计要素,提出GigaWorld-1实现14.9%性能提升
通过前瞻令牌从冻结视频模型中蒸馏动力学先验的统一机器人操作框架
基于表示自编码器的多人交互世界模型
👍 26首个支持四玩家实时交互的动态环境世界模型,在单张GPU上实现20fps生成且能保持数小时稳定
通过逆动力学验证轨迹可实现性,提升世界模型规划的鲁棒性
解耦语义编排与视频生成,实现动态对象持久记忆的可控世界模拟
通过三层对齐机制解决移动操作中时序粒度、动作空间和训练推理一致性的结构化不匹配问题
Valdi:价值扩散世界模型
👍 12结合扩散模型与价值函数的在线模型预测控制方法
虎鲸:世界在您心中
👍 449统一世界基础模型,从多模态信号学习世界潜在空间
用学习型查询token解决视频世界模型的长期记忆问题
修剪视觉世界建模评估的长尾
👍 40TailOR基准测试揭示视觉生成模型在长尾物理交互场景下的局限性
通过适配开源视频先验,在消费级GPU上实现14-15 FPS的实时可控世界模拟
提出神经隐式场景(NIS)作为固定长度可渲染状态,解耦状态转移与观测合成
通过动作条件预训练世界模型,获得可复用的机器人动力学先验
通过分层物理对齐提升机器人视频生成的物理合理性,用于世界模拟和策略学习
通过动作前缀并行预测替代自回归rollout,在提升视觉规划成功率的同时大幅降低计算开销
从数据覆盖角度研究世界模型幻觉,提出三种检测方法并验证缓解效果
提出物理感知的世界模型EO-WM,实现更可靠的地球观测预测