潜在空间几何引导的4D世界一致性视频生成框架
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
在T2V模型token空间添加偏移向量实现连续属性控制
系统综述视频生成模型作为世界模拟器时的效率优化技术,涵盖建模范式、架构设计和推理算法三个维度。
将轨迹重建重新定义为地图视觉视频生成任务,用视频模型直接在地图上绘制连续GPS路径
提出混合记忆范式,让视频世界模型追踪离屏动态主体
三段式KV缓存压缩策略,5秒训练生成120秒长视频
因果多镜头架构实现16FPS实时交互式长叙事视频生成
用独立LoRA在并行画布上训练13种音视频控制模态,仅需55K步即可超越VACE等基线
运动脉搏:从视觉动力学测量物理帧率
👍 18提出Visual Chronometer预测视频物理帧率,解决时间尺度幻觉
开源统一视频生成模型,融合多模态组合与推理能力,支持文本/图像/视频自由形式输入
通过动态混合精度量化与时间增量缓存,实现视频DiT 1.92倍加速和3.32倍内存缩减
PhyGenesis 通过轨迹矫正与异构训练实现物理一致的驾驶视频生成
从《怪物猎人:荒野》采集的1亿帧游戏数据集,支持动作条件世界建模
用视频扩散模型将3D引擎渲染视频转化为照片级真实感视频
从视频历史轨迹预测未来密集运动轨迹的生成框架
提出14B参数物理对齐世界模型,生成符合物理定律的机器人操作视频
以简驭繁:面向快速音视频生成的单流架构基础模型
👍 125daVinci-MagiHuman单流架构实现高效音视频同步生成
首个以交互为中心的视频世界模型评测基准,揭示当前模型在因果一致性和物理交互上的核心短板。
视频生成强化学习中的流形感知探索方法
👍 34通过微观精确SDE和宏观双重信任区域,使视频GRPO探索保持在数据流形附近
通过感知约束的动态缓存,将视频世界模型推理速度提升2.3倍同时保持99.4%质量