利用SAE捕获模型内在属性指导RL数据工程,提升训练效率与性能
Yi Jing, Zao Dai, Jinwu Hu, Zijun Yao, Lei Hou, Juanzi Li, Xiaozhi Wang
2026-05-28
后训练数据工程
强化学习
数据选择
机制可解释性
稀疏自编码器
提出评估GUI代理在环境干扰下鲁棒性的基准和增强框架
Jingwei Sun, Jianing Zhu, Yuanyi Li, Tongliang Liu, Xia HU, Bo Han
2026-05-28
GUI代理
强化学习
环境破坏
鲁棒性评估
9.8B 激活参数的 MoE 大模型,通过 Agent 数据管线+Forge 强化学习系统+自我进化,在编码与办公 Agent 任务上比肩头部闭源模型
MiniMax, Aili Chen, Aonian Li, Baichuan Zhou, Bangwei Gong, Binyang Jiang,...
2026-05-27
Agent
MoE
Speculative Decoding
代码生成
强化学习
NoisyAgent:在训练中显式注入用户与工具噪声以提升LLM智能体鲁棒性
Yuxin Chen, Xiaodong Cai, Junfeng Fang, Zhuowen Han, Yu Wang, Yaorui Shi, Yi...
2026-05-27
GRPO
LLM智能体
噪声注入
强化学习
课程学习
用单源奖励作锚点,量化多源融合的信息增益
Fanhu Zeng, Zhicong Luo, Zefan Wang, You Li, Chi Chen, Maosong Sun
2026-05-27
优势归一化
多模态推理
强化学习
视觉理解
将长时程智能体的记忆管理建模为状态自适应问题,通过线索-页面架构实现意图驱动的记忆检索
Yuyang Hu, Hongjin Qian, Shuting Wang, Jiongnan Liu, Ziliang Zhao, Jiejun...
2026-05-27
强化学习
智能体
记忆管理
长时程推理
首个支持单轮并行多工具调用的视频智能体RL框架PARA-GRPO,破解工具先验悖论。
Zuhao Yang, Kaichen Zhang, Sudong Wang, Keming Wu, Zhongyu Yang, Bo Li,...
2026-05-26
多模态大模型
工具调用
强化学习
智能体
长视频理解
三智能体对抗流水线为电脑操作代理规模化合成带可验证奖励的RLVR数据
Bowen Wang, Dunjie Lu, Junli Wang, Tianyi Bai, Shixuan Liu, Zhipeng Zhang,...
2026-05-26
可验证奖励
强化学习
数据合成
智能体
计算机使用
提出基于验证器失败诊断的智能体-环境协同共演化框架 SEAL,用同一诊断信号同时驱动训练接口进化与策略梯度更新。
Yihao Hu, Zhihao Wen, Xiujin Liu, Pan Wang, Xin Zhang, Wei Wu
2026-05-26
GRPO
LLM智能体
失败诊断
工具调用
强化学习
把终端输出 token 当作监督信号,叠加到 GRPO 损失上,让失败轨迹也产生梯度。
Vaishnavi Shrivastava, Piero Kauffmann, Ahmed Awadallah, Dimitris Papailiopoulos
2026-05-26
GRPO
LLM Agent
世界模型
强化学习
智能体训练
提出 CMRP 新任务和 UniCharacter 框架,用极少样本让统一多模态模型同时学会角色的语言风格与视觉外观。
Chao Tang, Jianzong Wu, Qingyu Shi, Ye Tian, Aixi Zhang, Hao Jiang,...
2026-05-26
GRPO
个性化生成
多模态大模型
强化学习
文生图
两阶段框架RTDMD统一DMD与RL,在4步内实现少步文生图SOTA。
Yushi Huang, Xiangxin Zhou, Ruoyu Wang, Chi Zhang, Jun Zhang, Tianyu Pang
2026-05-26
分布匹配
少步生成
强化学习
扩散模型蒸馏
文生图
揭示多时间尺度PPO中可微路由器被代理目标利用的失败模式并提出Target Decoupling。
Jing Sun
2026-05-26
GAE
PPO
多时间尺度价值
强化学习
时序信用分配
用专用图像编辑器替代工具调用与统一多模态,让MLLM真正“用图像思考”。
Beichen Zhang, Yuhong Liu, Jinsong Li, Yuhang Zang, Jiaqi Wang, Dahua Lin
2026-05-25
GRPO
LoRA微调
图像编辑
多模态大模型
强化学习
用全轨迹后视分析挑选失败步骤,仅在相关动作片段做反馈条件蒸馏。
Woongyeng Yeo, Yumin Choi, Taekyung Ki, Sung Ju Hwang
2026-05-25
LLM智能体
信用分配
强化学习
自蒸馏
长程任务
通过协同进化策略与解码器解决离散AR T2I模型中的潜在协变量偏移问题
Siyong Jian, Siyuan Li, Luyuan Zhang, Zedong Wang, Xin Jin, Ying Li, Cheng...
2026-05-25
VQ-VAE
后训练
强化学习
文本到图像生成
自回归模型
首个用强化学习做相机控制视频重拍的框架,用度量3D评估器约束相机轨迹精度。
Zizun Li, Haoyu Guo, Runzhe Teng, Chunhua Shen, Tong He
2026-05-25
GRPO
强化学习
新视角合成
相机控制
视频生成
把视觉感知、文本推理、视觉推理拆成三个独立阶段做后训练,VLM 的视觉推理准确率涨、推理链还变短了。
Juncheng Wu, Hardy Chen, Haoqin Tu, Xianfeng Tang, Freda Shi, Hui Liu,...
2026-05-25
GRPO
后训练
强化学习
视觉感知
视觉语言模型
把RLVR更新视为token梯度上的线性判别器,用判别式系数重塑正负质心。
Kaiyi Zhang, Wei Wu, Yankai Lin
2026-05-22
DAPO
RLVR
token信用分配
判别器视角
强化学习
首个面向真实 Excel 的端到端强化学习框架,让开源 4B 模型表格任务通过率近乎翻倍。
Banghao Chi, Yining Xie, Mingyuan Wu, Jingcheng Yang, Jize Jiang, Zhaoheng...
2026-05-22
Excel 自动化
GRPO
LLM 后训练
多轮智能体
强化学习