将触觉感知融入预测式视频世界模型,实现接触丰富操作的鲁棒控制
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
视觉语言模型
世界模型
GRPO
多模态大模型
多智能体系统
多模态学习
智能体
知识蒸馏
图像生成
代码生成
LLM智能体
注意力机制
LLM Agent
具身智能
流匹配
多模态大语言模型
视频理解
数学推理
检索增强生成
可解释性
图像编辑
多模态
机器人学习
机器人操作
工具使用
自监督学习
Transformer
基准评测
对比学习
长上下文
RLVR
多模态推理
计算机视觉
数据合成
LLM评估
信息检索
推理加速
3D重建
扩散语言模型
自回归模型
视觉推理
Flow Matching
RAG
参数高效微调
LoRA
视觉-语言-动作模型
模型压缩
自回归生成
视觉-语言模型
后训练
工具调用
持续学习
高效推理
RLHF
策略优化
评估多主体图像生成中属性绑定错误的基准测试与诊断方法
将几何基础模型复用于多视角扩散
👍 48用几何基础模型的特征空间替代VAE作为多视角扩散的潜空间,实现更快更好的新视角合成
视频生成强化学习中的流形感知探索方法
👍 34通过微观精确SDE和宏观双重信任区域,使视频GRPO探索保持在数据流形附近
生成模型与编码器共享高斯隐空间,支持线性语义编辑
基于快照的广义离散扩散模型
👍 11统一框架支持任意离散扩散,首次大规模超越自回归
通过感知约束的动态缓存,将视频世界模型推理速度提升2.3倍同时保持99.4%质量
LoRA2让每个LoRA组件自适应学习最优秩,在保持生成质量的同时大幅降低内存消耗
提出基于ControlNet的两阶段伪装攻击框架,生成既欺骗检测器又对人类隐蔽的车辆伪装图案
通过关系注意力机制显式绑定人脸-属性,实现精准多主体视频定制
提出D-MMD方法将离散扩散模型蒸馏为少步生成器,在文本和图像上超越教师
EgoForge 仅凭单张自我中心图像+高层指令+可选外中心图,生成目标驱动的连贯第一人称视频
从视频生成模型提取3D先验增强MLLM空间理解
将视频编辑分解为语义锚定和运动对齐,实现高精度指令跟随和强时序一致性
提出MoTok,将运动生成解耦为离散语义规划与扩散式精细重建,实现高效可控运动生成
联合学习视频物体移除与插入,利用逆任务一致性擦除物体副作用效果
基于聚类的最优传输流匹配方法
👍 2通过聚类和簇内最优传输,实现更直的流匹配轨迹,提升生成质量
提出DPL和RSL协同去噪框架,实现语义驱动的部分级文本到3D生成
融合显式3D与隐式注意力的Patch级混合空间记忆机制
立体世界模型:相机引导的立体视频生成
👍 11首个相机条件约束的立体世界模型,联合学习外观与双目几何,实现端到端立体视频生成