提出TriLayer三元组数据集与双分支扩散框架,实现视频物体的显式分层插入与分解。
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
面向快速图像与视频生成的并行解码蒸馏
👍 16训练并行解码器,用单次前向同时预测多个去噪步的速度,实现少步、高质、高多样性的扩散与流模型蒸馏。
重新审视策略内扩散蒸馏中的无分类器引导
👍 46揭示CFG组合OPD的分支歧义缺陷,提出分支感知的PDM目标稳定跨尺度蒸馏
将动态路由、稀疏计算与近似校正统一到单次在线softmax中的免训练稀疏注意力
ID-V2V:保持身份的视频重新风格化
👍 10把身份保持建模为视频重打光,用重打光人脸+法线+关键帧+深度联合控制,实现关键帧编辑的逐帧扩散传播。
混合线性与softmax注意力,单卡生成比全softmax视频DiT快3.2倍
用持久的世界状态寄存器让多智能体视频世界模型保持跨视角一致性
自梯度强制:原生长视频外推
👍 27两阶段训练修复自生成历史KV缓存写入的梯度缺口,让5秒训练窗口外推到数分钟视频
训练免修的稀疏注意力系统,用P2P头部迁移和空闲补偿消除多GPU视频生成的负载不均
键盘可控、单卡实时的视频世界模型,可连续推演数十小时
基于15B扩散Transformer的交互式长时程世界模型,蒸馏至4步实现低延迟生成
用像素空间掩码轨迹作为视频模型动作接口,单模型兼顾正/逆世界模型。
首个将视频物理推理锚定到物理定律并分阶段诊断的基准
用可学习规划Token与分数旋转位置编码实现帧级可控多镜头视频生成
用冻结视频基础模型做编码器,统一支持连续与离散视频生成,收敛快5倍。
以游戏引擎的动作-状态-观测循环为框架重审交互式世界模型,并发布90小时悟空数据集
视频 = 世界 + 事件流
👍 22Wan-Streamer v0.3 将视频分解为世界与事件流,实现通用预训练可迁移的实时音视频交互。
首个无需训练、无需骨架先验的跨物种视频动作迁移框架
视频生成模型是通用视觉学习器
👍 82利用预训练视频生成模型构建统一通用的多任务视觉感知框架
Vidu S1:实时交互式视频生成模型
👍 148支持语音控制的实时交互式数字人物视频生成系统