38B统一具身合成模型,兼做世界模型与机器人数据引擎
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
首个开源MoE视频基础模型,通过稀疏专家架构、机器人增强数据和多维奖励系统实现物理世界的精确模拟。
首个真实世界城市规模多模态数据集,支持街景重建和具身智能研究
通过参数隔离将触觉能力注入小型MLLM,在避免灾难性遗忘的同时实现SOTA触觉推理
通过前瞻令牌从冻结视频模型中蒸馏动力学先验的统一机器人操作框架
通过SVA框架将MCTS搜索蒸馏为轻量级评估器,实现冻结VLA模型的测试时间缩放
用40M潜空间监视器检测动作漂移并在线纠错,让VLA动作时域自适应化。
通过三层对齐机制解决移动操作中时序粒度、动作空间和训练推理一致性的结构化不匹配问题
虎鲸:世界在您心中
👍 449统一世界基础模型,从多模态信号学习世界潜在空间
通过分层物理对齐提升机器人视频生成的物理合理性,用于世界模拟和策略学习
Vesta:通才型具身推理模型
👍 12统一定位、导航、推理和规划的通用具身模型,超越各领域专家模型
提出评测长期有状态具身智能体的基准和观察者锚定记忆框架
实验证明自我视角视频预训练在泛化能力上超越机器人数据预训练
用 2K 仿真轨迹蒸馏到 4B 模型,实现前沿级操作性能
以自然语言为统一动作接口,跨场景训练具身视频世界模型。
腾讯 Robotics X 提出端到端 VLA 栈:10K小时UMI数据+4B MoT VLM+FlowPRO离线RL,跨形态零遥操作部署。
iMaC把未来动作渲染成运动图与接触图,注入视频扩散模型做策略评估。
统一的8B参数具身基础模型,整合认知、规划和定位能力,实现SOTA性能
首个统一评估多模态智能体在异构3D环境中交互式空间推理能力的基准
解耦世界规划与动作执行,异步双系统机器人策略提升闭环控制效率