通过低成本微调将预训练视频扩散模型转化为金字塔模型,实现4.5倍FLOPs降低且无质量损失
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
单一框架统一图像视频生成编辑的多模态扩散模型
一种可扩展的4D世界建模方法,支持从单目视频进行重建、新轨迹视频生成和多种下游应用
按去噪阶段重要性分配大/小模型,实现1.65×加速且保持质量
提出3D物体流作为通用中间接口,将视频生成模型的视觉预测转化为机器人可执行动作,实现零样本开放世界操作
提出轻量级历史嵌入,通过两阶段学习在自回归视频生成中保持一致性
通过物理感知数据管道和组式DPO框架提升视频生成的物理一致性
首个统一实现音频-视频理解与生成的多模态大语言模型
首个实现相机运动与时间序列完全解耦的视频扩散模型,支持从单目视频生成自由时空探索的新视角视频。