将RLHF和OPD应用于扩散模型,提升图像生成与编辑质量
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
低维中间状态+并行rollout近似,刷新像素空间AR生成SOTA
通过训练时范数约束抑制RL post-training的感知质量退化
DanceOPD:在线策略生成场蒸馏
👍 84通过硬路由和单查询场匹配,实现多能力图像生成模型的统一蒸馏
通过统一智能体框架解决文本到图像生成中的上下文差距问题
提出统一训练框架NANOGEN和综合基准DIFFUSIONBENCH,揭示ImageNet和文本生成图片性能不相关
通过挖掘社区LoRA构建大规模数据集,实现高质量的风格-内容双重参考图像生成。
提出判别器引导的强化学习(DRL),在不依赖人类偏好的情况下修正流匹配模型的分布偏差
像素空间扩散的谱强制:显露信号,隐藏噪声
👍 21用时变2D-DCT低通掩码为像素空间整流流扩散提供无参数输入先验,显式化移动的频率边界。
单一离散视觉 token 实现理解生成统一的自回归框架
参考引导生成内容超分辨率与精细化
👍 9首次提出RefGC-SR²任务,利用原始高分辨率参考图联合修复生成伪影并提升分辨率。
用 Noisy ViT 编码器统一视觉空间,解耦扩散解码器与文本解码,实现理解与生成的协同提升。
首个多智能体框架,通过规划-生成-批评流程赋予任意图像生成器交错生成能力
首个在单个ViT中统一图像视频tokenization的UMM框架
将8步扩散模型蒸馏为2步生成器,通过三种技术突破2步生成的质量和稳定性瓶颈
融合浅层与深层特征实现高质量离散视觉token
用统一离散视觉token实现图像理解、生成和编辑的自回归模型
表示强制:无瓶颈统一多模态模型
👍 61通过预测理解表示来指导像素空间生成,消除VAE瓶颈
代码驱动的智能体图像生成
👍 38用代码作为画笔,将图像生成分解为概念化、草图和着色三阶段
提出DLA模块和多阶段去噪策略,整合MLLM与VAE实现高质量主题驱动图像生成