基于离散扩散LLM的统一多模态模型,语义VQ+MoE主干+扩散解码器三件套打通图文
Inclusion AI, Tiwei Bie, Haoxing Chen, Tieyuan Chen, Zhenglin Cheng, Long...
图像生成
图像编辑
多模态统一模型
扩散语言模型
视觉问答
用同条训练跑上稍后的 checkpoint 当老师,做 Q/V 折中最优的混合策略 RLVR。
Chuanyu Qin, Chenxu Yang, Qingyi Si, Naibin Gu, Dingyu Yao, Zheng Lin, Peng...
RLVR
多模态推理
强化学习
混合策略
策略优化
用 10K 开放数据和两阶段训练打造前沿 4B 边缘级深度研究智能体
Venus Team, Sunhao Dai, Yong Deng, Jinzhen Lin, Yusheng Song, Guoqing Wang,...
IGPO 奖励设计
SFT+RL 流水线
小模型强化学习
开放数据训练
深度研究智能体
提出代理压缩假设(PCH)统一解释RLHF/RLAIF/RLVR下的奖励黑客,并系统梳理检测与缓解框架。
Xiaohua Wang, Muzhao Tian, Yuqi Zeng, Zisu Huang, Jiakang Yuan, Bowen Chen,...
AI安全
RLHF
代理压缩假设
奖励黑客
对齐
解耦探索与任务生成,策略切换采样错误恢复轨迹,让开源数据追平闭源 70% AndroidWorld。
Kanzhi Cheng, Zehao Li, Zheng Ma, Nuo Chen, Jialin Cao, Qiushi Sun, Zichen...
GUI Agent
数据合成
模仿学习
移动智能体
视觉语言模型
用视频扩散模型规划 HOI,从合成视频提 3D 人+2D 物目标驱动物理灵巧模仿。
Hyeonwoo Kim, Jeonghwan Kim, Kyungwon Cho, Hanbyul Joo
SMPL-X
人-物交互
强化学习
灵巧操作
物理仿真
提出 GSI-Bench:首个生成式空间智能基准,仿真训练可提升空间编辑与理解。
Muzhi Zhu, Shunyao Jiang, Huanyi Zheng, Zekai Luo, Hao Zhong, Anzhou Li,...
Sim2Real
图像编辑
基准评测
多模态大模型
生成式空间智能
TACO自演化压缩终端观测,免训练省token并保留关键证据。
Jincheng Ren, Siwei Wu, Yizhi Li, Kang Zhu, Shu Xu, Boyu Feng, Ruibin Yuan,...
LLM Agent
上下文压缩
测试时适应
终端智能体
自演化
把图像生成器指令微调成统一视觉模型,所有任务都重映射为 RGB 生成。
Valentin Gabeur, Shangbang Long, Songyou Peng, Paul Voigtlaender, Shuyang...
分割
图像生成
指令微调
法向量估计
深度估计
在 MoE 中途复制专家扩容,固定 top-K 不增加推理成本,省 24–32% GPU 小时。
Chaitanya Dwivedi, Binxuan Huang, Himanshu Gupta, Pratik Jayarao, Neeraj...
Mixture-of-Experts
持续预训练
模型扩展
稀疏路由
计算最优
首个真实编码智能体交互数据集,揭示人机协作模式与失败机制
Joachim Baumann, Vishakh Padmakumar, Xiang Li, John Yang, Diyi Yang, Sanmi Koyejo
AI Agent
Coding Agent
人机交互
代码安全
实证研究
用世界基础模型把点云生成多视角一致RGB图,再与几何分支做概率融合,实现零样本点云配准。
Yuval Haitman, Amit Efraim, Joseph M. Francos
3D点云配准
Vision Foundation Model
世界基础模型
概率融合
训练自由
用结构化轨迹摘要+RTV+PDR,在长程智能体编码上系统提升测试时计算增益。
Joongwon Kim, Wannan Yang, Kelvin Niu, Hongming Zhang, Yun Zhu, Eryk...
LLM
SWE-Bench
代码生成
推理扩展
智能体
通过模态感知自适应混合 SFT+RL 后训练,约束偏好优化于文本通道并锚定语音通道,缓解口语对话模型中 IQ/EQ 难以同步提升的矛盾。
Yifu Chen, Shengpeng Ji, Qian Chen, Tianle Liang, Yangzhuo Li, Ziqing Wang,...
偏好优化
口语对话模型
后训练
多模态生成
强化学习
用 GRPO 强化学习联合优化显式弃答与拒答后澄清质量,3B 模型对不可答题表现匹敌 671B DeepSeek-R1。
Skylar Zhai, Jingcheng Liang, Dongyeop Kang
GRPO
可验证奖励
大语言模型对齐
幻觉抑制
强化学习
揭示 LLM 数字表征的"频谱 vs 几何"两级收敛分离,证明 Fourier 尖峰普遍但模运算可分性苛刻
Deqing Fu, Tianyi Zhou, Mikhail Belkin, Vatsal Sharan, Robin Jia
Fourier 分析
LLM
可解释性
数字表征
机制可解释性
25,000+ 次实验揭示 LLM 智能体执行工作流却不会科学推理
Martiño Ríos-García, Nawaf Alampara, Chandan Gupta, Indrajeet Mandal, Sajid...
AI for Science
LLM智能体
基准测试
科学推理
认知评估
提出 BEHEMOTH 基准与 CluE 集群进化方法,解决异构 LLM 记忆提取难题。
Yuqing Yang, Tengxiao Liu, Wang Bill Zhu, Taiwei Shi, Linxin Song, Robin Jia
LLM 记忆系统
基准评测
异构任务
智能体
自进化提示词
用视觉隐空间世界模型给VLA加上前瞻规划,实现工业机械臂零人工干预
Adriana Aida, Walida Amer, Katarina Bankovic, Dhruv Behl, Fabian Busch,...
世界模型
工业部署
机器人操作
流匹配
视觉-语言-动作模型
揭示多轮用户压力下前沿编程智能体普遍利用暴露的公开标签作弊的现象。
Hardy Chen, Nancy Lau, Haoqin Tu, Shuo Yan, Xiangyan Liu, Zijun Wang,...
基准测试
奖励黑客
智能体安全
编程智能体
评测作弊
构建1400+小时古兰经音频数据集,600+朗读者,提出AAM语义对齐pipeline。
Faisal Alherran
古兰经
数据集
自监督学习
语音识别
音频处理
用期望效用和Shapley值做多轮社交对话的逐句奖励分配,让7B模型在社交任务上击败GPT-4o
Xiachong Feng, Yi Jiang, Xiaocheng Feng, Deyi Yin, Libo Qin, Yangfan Ye, Lei...
Shapley值
信用分配
合作博弈论
多智能体强化学习
对话智能体
用两阶段RL课程让多模态大模型自主掌握视觉工具调用以解决复杂视觉推理
Qihua Dong, Gozde Sahin, Pei Wang, Zhaowei Cai, Robik Shrestha, Hao Yang,...
GRPO
多模态大模型
工具调用
强化学习
视觉推理
用可学习query token对齐MLLM与扩散模型的低成本统一多模态生成框架
Zijie Li, Yichun Shi, Jingxiang Sun, Ye Wang, Yixuan Huang, Zhiyao Guo,...
图像编辑
多模态生成
扩散模型
表征对齐
视觉语言模型
图像优先解耦外观与时序,用FLUX图像先验+Wan免训练精修实现姿态与视角可控的人体视频生成。
Zhengwentai Sun, Keru Zheng, Chenghong Li, Hongjie Liao, Xihe Yang, Heyuan...
LoRA微调
SMPL-X
人体视频生成
免训练时序精修
图像优先
在非线性潜变量模型下,仅靠依赖结构稀疏性就能可识别地恢复潜变量的集合交、并、对称差,乃至全部因子。
Yujia Zheng, Zijian Li, Shunxing Fan, Andrew Gordon Wilson, Kun Zhang
因果表征学习
字典学习
潜变量模型可识别性
稀疏自编码器
非线性ICA
语义聚类指导的分布感知采样,DoRA+持续学习缓解跨语言负迁移
Noah Flynn
DoRA
参数高效微调
多语言适应
持续学习
数据选择
多智能体机制感知系统,实现可解释的HTML5游戏迭代进化
Hongnan Ma, Han Wang, Shenglin Wang, Tieyue Yin, Yiwei Shi, Yucong Huang,...
代理奖励
代码生成
创意AI
多智能体
游戏生成
把半马尔可夫 CRF 的 O(TKC²) 边张量彻底消除,实现基因组规模精确推理
Benjamin K. Johnson, Thomas Goralski, Ayush Semwal, Hui Shen, H. Josh Jang
GPU 推理
Triton 内核
半马尔可夫条件随机场
基因组分割
流式动态规划
良性音频微调可使音频LLM的越狱成功率飙升至87%
Jaechul Roh, Amir Houmansadr
Audio LLM
安全对齐
嵌入空间邻近度
架构条件性
良性微调