首个视频去反射闭环框架:物理增强合成配对数据、一步扩散去除模型与专用基准S2R-Bench
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
用对抗学习的动态表征补足静态Fréchet目标盲区,抑制Fréchet hacking
让全模态对话模型不仅开口说话,还能以参考形象生成口型同步的视频回应
用方向标志训练单一双向扩散模型,以前后往返的不一致自监督估计展开误差。
统一模型实现多镜头视频生成、参考生成与编辑,单GPU达16.74FPS。
首个支持用户与世界内角色进行社交互动的视频世界模型
用像素桥接与可切换适配器把异构教师能力蒸馏进单一学生
轻量可复现的流式视频世界模型框架,单机8卡数日即可从零训练
用抽象运动视图自举跨类别配对,再内化为端到端视频运动迁移。
可复现的指定-渲染-检查流水线构建 9401 张人物图像数据集 Poplar-9K
视觉生成中文本条件化的缩放特性
👍 41信息量而非长度才是文本-图像的缩放轴:结构化提示预测扩散损失
PhiZero:围绕物理语言构建的物理世界模型
👍 175从野外视频自监督学习离散'物理语言',先推理后渲染的物理世界模型。
用可执行 Blender 代码充当过程级思维链,双引擎系统生成物理一致视频。
训练时探索K个候选并训练最优者,为生成模型新增缩放轴并实现端到端生成
提出TriLayer三元组数据集与双分支扩散框架,实现视频物体的显式分层插入与分解。
把试穿重新定义成多参考理解驱动生成,靠数据引擎+CPT-SFT-RL达到任意品类SOTA
将组合生成建模为内在奖励对齐,导出闭式倾斜分布与原则性扩散引导
用频谱先验降低扩散模型的曝光偏差
👍 7推理时用FFT频谱对齐校正扩散模型曝光偏差,开销仅3-4%
用持久的世界状态寄存器让多智能体视频世界模型保持跨视角一致性
用可编辑的有向交互图取代轨迹控制,冻结视频DiT加LoRA实现多物体可控生成