高效RL框架对齐蒸馏视频模型与人类偏好
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
通过关系注意力机制显式绑定人脸-属性,实现精准多主体视频定制
无需训练的视频内容、动作与动态多样化编辑
👍 18DynaEdit:免训练视频编辑方法,支持修改动作、插入交互物体、改变全局效果
EgoForge 仅凭单张自我中心图像+高层指令+可选外中心图,生成目标驱动的连贯第一人称视频
融合显式3D与隐式注意力的Patch级混合空间记忆机制
揭秘视频推理:扩散模型中的推理机制
👍 115视频扩散模型的推理沿去噪步骤展开,而非跨帧进行
用相机位姿统一动作控制与3D一致性,构建交互式游戏世界模型
基于真实世界的城市场景世界模拟模型:首尔世界模型
👍 154首尔世界模型:用街景图像检索增强,实现真实城市级别的世界模拟视频生成
统一视频扩散框架,实现场景、多视角主体和运动的解耦控制
通过混合扩散和对抗训练实现少步轨迹可控视频生成,质量与精度双提升
用预训练视频模型激活复原先验,仅需1K样本实现少样本图像复原
通过多智能体问答框架实现视频生成的评估与迭代优化
提出Plan-then-Control框架,用VLM自动规划电影级相机轨迹,实现多镜头视频精准控制
统一框架实现多主体身份保持与全方位运动控制,通过潜在空间强化学习优化身份保真度
提出ELIT机制,通过可变长度潜在接口实现扩散变换器的弹性计算分配和多预算推理
通过内容自适应的token分配,在保持重建质量的同时节省24%以上的视频token开销
用 Doob h-变换把粗引导信号注入扩散采样,无需训练和前向算子。
多智能体竞争框架自动生成1-2分钟喜剧小品视频
通过误差感知路由和无参数线性补偿,高效加速视频扩散Transformer注意力计算
基于对角蒸馏的流式自回归视频生成
👍 5对角蒸馏实现31FPS实时视频生成,加速277倍