用干预式基准诊断视频生成模型是否真正理解物理规律。
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
把终端输出 token 当作监督信号,叠加到 GRPO 损失上,让失败轨迹也产生梯度。
SCOPE 用按像素时序条件化把 FPS 动作的局部分析与全局稳定解耦
无需训练,靠KV缓存的视角检索与相似度压缩,让视频世界模型拥有长程一致记忆
自调节模拟规划让30B智能体以更少token匹敌1T模型
WorldString:统一表征铰接/蒙皮/软体三类可动作对象的隐式神经占据场。
用 LLM 先验从纯观测轨迹中归纳可执行 POMDP,摆脱对真实隐藏状态的依赖。
2.6B参数高效分钟级720p相机控制世界模型,单卡可部署
DAWN:世界-动作交互模型的开端
👍 25提出WAIM范式与DAWN模型,让世界预测与轨迹生成在隐空间中递归互炼。
世界动作模型:具身智能的下一前沿
👍 73首篇系统综述将世界模型融入动作生成的具身基础模型范式,提出 Cascaded/Joint WAM 二分法。
可读规则下运行时发现优于离线世界模型
机器人学习中的世界模型:一份综合性综述
👍 16系统梳理世界模型在机器人策略学习、模拟器、视频生成与导航驾驶中的架构范式、功能角色与评测体系。
把视频生成评测重定义为世界状态预测,提供436个结构化推理用例与6K专家偏好对的诊断式基准。
提出残差潜在动作RLA,在紧凑潜在空间中流匹配预测DINO特征动力学
把BEV表征、LLM语义推理和未来点云预测整合到一个框架中,让语言理解直接指导几何演化。
用第三人称视频生成作为中间表征,把任务指令转化为可执行的人形机器人行为,无需任务专属数据采集。
X-WAM:统一4D世界动作模型,联合预测多视角RGB-D视频与机器人动作
用强化学习把视频生成模型对齐 3D 几何,无需改架构即可获得 3D 一致性
DeFI:将视频预测与动作推理解耦预训练,再端到端融合实现高效通用机器人策略。
智能体世界建模:基础、能力、规律与展望
👍 157提出 L1/L2/L3 三级能力 × 物理/数字/社会/科学四规律的二维世界建模分类法