层次化去噪替代逐块生成,实现高质量长视频
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
利用时序冗余的潜在空间剪枝加速视频生成
提出解耦世界演化与渲染的框架,让视野外实体持续演化
大规模人体数据集+非对称注意力,实现跨视角身份一致视频生成
物理模拟器在环视频生成
👍 12将物理模拟器嵌入视频生成循环,确保运动符合物理规律
MLLM推理+DiT上下文学习的参考视频特效迁移框架
通过联合建模多源世界知识(运动、语义、几何),实现物理一致的视频生成。
通过物理仿真桥接3D动作与视频生成,实现实时交互
Helios:真正的实时长视频生成模型
👍 174首个在单H100上以19.5 FPS运行的14B视频生成模型,支持分钟级长视频
通过位置注入和多角色转换建模实现长叙事视频生成
统一DiT框架编排身体/面部/手部异构运动,实现高保真跨身份角色动画
利用全局几何记忆和立体记忆两种机制,从单张图片生成多轨迹一致视频并重建高质量3D场景
首次提出“微观世界仿真”概念,构建专家审核的显微视频基准、9.6K 数据集与微调模型。
用解耦扩散Transformer将短视频保真度与长时序一致性分离,实现分钟级快速视频生成
用网络敏感度指导缓存决策,加速视频扩散模型推理
一致性三位一体:定义通用世界模型的核心原则
👍 190提出模态/空间/时间三维一致性框架及CoW-Bench基准,系统评估世界模型的物理模拟能力
双流MMDiT架构统一视频-音频联合生成、修复与编辑任务
首个多人 Minecraft 视频世界模型,支持多视角一致性生成
通过频谱演化感知的缓存策略,在保留内容质量的同时加速扩散模型推理
首个统一评估视频基础模型理解、生成、编辑和重构能力的综合基准