用 Masking Warmup 把 CLIP 对比学习与文生图生成在单阶段端到端模型中真正统一,并带来推理时自导向的语义对齐解码。
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
用非线性MLP传输映射+几何条件门控,解决T2I激活引导的安全-质量权衡
从规模到速度:图像编辑的自适应测试时缩放
👍 135ADE-CoT通过难度感知分配、编辑验证和自适应停止,实现2倍加速
基于混合扩散框架的统一多模态模型,解耦离散/连续扩散实现理解与生成
利用全局几何记忆和立体记忆两种机制,从单张图片生成多轨迹一致视频并重建高质量3D场景
将Sonar文本嵌入空间扩展到图像和视频,实现多模态统一的潜空间推理模型
通过奖励模型增强图像生成中的空间理解
👍 60提出专用空间奖励模型与数据集,显著提升图像生成的多对象空间关系理解能力
用解耦扩散Transformer将短视频保真度与长时序一致性分离,实现分钟级快速视频生成
用网络敏感度指导缓存决策,加速视频扩散模型推理
通过条件引导调度实现混合并行,将扩散模型推理加速2.3倍同时保持图像质量
提出CMDM框架,结合因果扩散和自回归建模,实现高质量文本到动作生成
DyaDiT生成社交感知的双人对话手势
双流MMDiT架构统一视频-音频联合生成、修复与编辑任务
统一框架同时实现参考生成、视频编辑和音频驱动动画三任务
首个多人 Minecraft 视频世界模型,支持多视角一致性生成
将图像编辑重新定义为物理状态转移,利用视频监督学习物理先验,提升编辑的物理合理性。
基于MoE架构、时序对齐RoPE和音视频DPO,实现高质量同步音视频联合生成
三模态掩码扩散模型的设计空间
👍 4首个统一文本、图像、音频的三模态掩码扩散模型,通过SDE参数化消除最优批量大小搜索
通过频谱演化感知的缓存策略,在保留内容质量的同时加速扩散模型推理
首个系统评估扩散模型在CT重建中性能的综合基准测试平台