SLIM:把外部技能集当成可训练变量,动态增删扩展
Junhao Shen, Teng Zhang, Xiaoyan Zhao, Hong Cheng
2026-05-12
GRPO
LLM Agent
工具调用
强化学习
技能管理
用 Instructor–Follower 闭环共进化让指令难度随模型能力自动升级,无需外部教师即可提升开源 LLM 的多约束指令遵循能力
Qingyu Ren, Qianyu He, Jiajie Zhu, Xingzhou Chen, Jingwen Chang, Zeye Sun,...
2026-05-12
GRPO
LLM 对齐
强化学习
指令遵循
自我博弈
提出双前向传播RL框架,使MLLM抗视觉退化且不牺牲干净精度。
Rui Liu, Dian Yu, Haolin Liu, Yucheng Shi, Tong Zheng, Runpeng Dai, Haitao...
2026-05-12
GRPO
多模态大模型
强化学习
视觉退化
鲁棒性
将多模态奖励评估重构为计划-执行两阶段过程,用多角色强化学习联合优化规划与验证
Rui Liu, Dian Yu, Zhenwen Liang, Yucheng Shi, Tong Zheng, Runpeng Dai,...
2026-05-12
GRPO
多模态奖励模型
强化学习
视觉-语言模型
评估基准
首个面向已构建RAG知识库的强化学习后精炼框架
Haoyu Huang, Jiaxin Bai, Shujie Liu, Yang Wei, Hong Ting Tsang, Yisen Gao,...
2026-05-12
GRPO
LLM智能体
RAG
强化学习
知识图谱
首个将OPD引入Flow Matching T2I的多任务对齐框架
Zhen Fang, Wenxuan Huang, Yu Zeng, Yiming Zhao, Shuang Chen, Kaituo Feng,...
2026-05-11
Flow Matching
GRPO
On-Policy Distillation
Reinforcement Learning
Stable Diffusion 3.5
用单次并行「定位+检索」原子动作+双粒度RL,让多实体搜索又快又准。
Guankai Li, Jiabin Chen, Yi Xu, Xichen Zhang, Yuan Lu
2026-05-11
GRPO
IMEB
On-Policy Distillation
基准测试
多模态搜索Agent
用语义化评分标准替代教师 logits 的黑箱在线蒸馏框架。
Junfeng Fang, Zhepei Hong, Mao Zheng, Mingyang Song, Gengsheng Li, Houcheng...
2026-05-11
GRPO
LLM对齐
强化学习
知识蒸馏
评分标准奖励
用响应级熵代理实现无监督信用分配与自适应探索-利用切换
Haotian Zhao, Songlin Zhou, Yuxin Zhang, Stephen S. -T. Yau, Wenyu Zhang,...
2026-05-11
GRPO
LLM智能体
信用分配
强化学习
熵正则化
提出平衡多维奖励的RL框架,统一效用、正确性与流畅性
Shaokai Ye, Vasileios Saveris, Yihao Qian, Jiaming Hu, Elmira Amirloo, Peter Grasch
2026-05-11
GRPO
图像描述
多模态大语言模型
奖励设计
强化学习
用单一任务结果信号同时驱动技能选择、利用与蒸馏三阶段协同演化
Yaorui Shi, Yuxin Chen, Zhengxi Lu, Yuchun Miao, Shugui Liu, Qi GU, Xunliang...
2026-05-08
GRPO
LLM Agent
Long-horizon Tasks
Reinforcement Learning
Skill Library
在GRPO失败样本前添加Lorem Ipsum乱文,破解零优势困境以拓宽LLM推理探索。
Langlin Huang, Chengsong Huang, Jinyuan Li, Donghong Cai, Yuyi Yang, Jiaxin Huang
2026-05-08
GRPO
LLM推理
强化学习
探索策略
提示工程
在 episode 起始采样全局策略,条件化后续所有动作,层级化 GRPO 训练。
Xiangyuan Xue, Yifan Zhou, Zidong Wang, Shengji Tang, Philip Torr, Wanli...
2026-05-08
GRPO
LLM agents
agentic RL
hierarchical policy
long-horizon tasks
用语义验证替代坐标监督,实现无标注的地理空间定位自进化
Liang Yao, Fan Liu, Shengxiang Xu, Chuanyi Zhang, Rui Min, Shimin Di, Yuhui Zheng
2026-05-08
GRPO
地理空间推理
多模态大模型
强化学习
自监督
揭示 GRPO 中两种聚合规则的偏差,提出均衡聚合 BA。
Zhiyuan Zeng, Jiameng Huang, Zhangyue Yin, Jiashuo Liu, Ziniu Li, Bingrui...
2026-05-08
GRPO
LLM推理
RLVR
强化学习
聚合偏差
把CoT推理与最终打分解耦的视频奖励模型,解决生成式奖励训练不稳定。
Yuan Wang, Ouxiang Li, Yulong Xu, Borui Liao, Jiajun Liang, Jinghan Li, Meng...
2026-05-08
Bradley-Terry
CoT推理
DeScore
GRPO
MLLM
首个开源多模态深度搜索智能体训练配方,含数据管线、七工具环境与致命感知GRPO
Shuang Chen, Kaituo Feng, Hangting Chen, Wenxuan Huang, Dasen Dai, Quanxin...
2026-05-07
GRPO
多模态智能体
工具调用
强化学习
数据合成
用隐藏态投影残差解耦正负样本的语义重叠,保护共享token免受误罚。
Zihan Lin, Xiaohan Wang, Jie Cao, Jiajun Chai, Li Wang, Xiaodong Lu, Wei...
2026-05-07
GRPO
LLM推理
Lazy Likelihood Displacement
NSR
Pass@1与Pass@k
首篇系统梳理 LLM 强化学习 rollout 设计的综述,提出 GFCR 四阶段框架。
Rohan Surana, Gagan Mundada, Xunyi Jiang, Chuhan Wang, Zhenwei Tang, Difan...
2026-05-06
GRPO
LLM 推理
RLVR
rollout 策略
强化学习
用Tsallis q-对数统一SFT与RLVR,提出GARL/PAFT在固定q上训练推理模型。
Chu-Cheng Lin, Eugene Ie
2026-05-06
GRPO
RLVR
SFT后训练
Tsallis损失族
冷启动