构建医疗 RL 训练场并提出 TT-OPD 自蒸馏框架解决多轮崩塌问题
Minbyul Jeong
2026-05-06
GRPO
LLM智能体
医疗AI
多轮推理
强化学习
用ELBO代理扩散模型似然,把GRPO嫁接到文生图后训练上,比MDP路线快2-3倍且SOTA。
Bingda Tang, Yuhui Zhang, Xiaohan Wang, Jiayuan Mao, Ludwig Schmidt, Serena...
2026-04-29
ELBO
GRPO
RLHF
在线强化学习
扩散模型
四阶段流水线(SFT+GRPO+提示增强+自回归蒸馏)弥合视频扩散模型预训练与部署差距。
Zeyue Xue, Siming Fu, Jie Huang, Shuai Lu, Haoran Li, Yijun Liu, Yuming Li,...
2026-04-29
GRPO
RLHF
后训练
扩散模型
自回归蒸馏
在短上下文GRPO中按推理步置信度屏蔽优势,稳定高效压缩推理链。
Han Wang, Xiaodong Yu, Jialian Wu, Jiang Liu, Ximeng Sun, Mohit Bansal, Zicheng Liu
2026-04-28
DeepScaleR
GRPO
强化学习
推理压缩
步级信用分配
用强化学习让 7B 小模型端到端生成可部署的多页网站,匹敌 671B 模型。
Juyong Jiang, Chenglin Cai, Chansung Park, Jiasi Shen, Sunghun Kim, Jianguo...
2026-04-24
GRPO
Web 开发
代码生成
多模态奖励
强化学习
用 GRPO 强化学习联合优化显式弃答与拒答后澄清质量,3B 模型对不可答题表现匹敌 671B DeepSeek-R1。
Skylar Zhai, Jingcheng Liang, Dongyeop Kang
2026-04-23
GRPO
可验证奖励
大语言模型对齐
幻觉抑制
强化学习
用两阶段RL课程让多模态大模型自主掌握视觉工具调用以解决复杂视觉推理
Qihua Dong, Gozde Sahin, Pei Wang, Zhaowei Cai, Robik Shrestha, Hao Yang,...
2026-04-23
GRPO
多模态大模型
工具调用
强化学习
视觉推理
用VLM奖励+Flow-GRPO后训练,让图像编辑更贴合人类审美。
Fan Li, Chonghuinan Wang, Lina Lei, Yuping Qiu, Jiaqi Xu, Jiaxiu Jiang,...
2026-04-22
GRPO
RLHF
人类偏好对齐
图像编辑
奖励模型
首次将GRPO引入均匀离散扩散,通过将最终干净样本作为动作并用前向过程重构轨迹,解决训练崩溃。
Jiaqi Wang, Haoge Deng, Ting Pan, Yang Liu, Chengyuan Wang, Fan Zhang,...
2026-04-22
GRPO
RLHF
强化学习
扩散模型
文本到图像
1978个MCP环境+19822工具,GRPO自演化闭环训练,23个基准全面领先开源基线。
Guanting Dong, Junting Lu, Junjie Huang, Wanjun Zhong, Longxiang Liu, Shijue...
2026-04-21
GRPO
MCP
可验证奖励
工具调用
强化学习
RLVR 弱监督泛化由预训练先验与推理忠实性决定,Thinking SFT 可恢复
Salman Rahman, Jingyan Shen, Anna Mordvina, Hamid Palangi, Saadia Gabriel,...
2026-04-21
GRPO
RLVR
奖励饱和
弱监督学习
推理忠实性
首次系统证明在情感支持对话中,一个支持者回复可以同时包含多种支持策略,并提出两种生成方法结合认知推理与强化学习。
Jie Zhu, Huaixia Dou, Junhui Li, Lifan Guo, Feng Chen, Jinsong Su, Chi...
2026-04-21
GRPO
LLM微调
强化学习
情感支持对话
策略建模
用PPL空间解耦破解RLVR训练中探索-利用的两难困境
Xiaofan Li, Ming Yang, Zhiyuan Ma, Shichao Ma, Jintao Du, Yu Cheng, Weiqiang...
2026-04-20
GRPO
LLM后训练
RLVR
困惑度
强化学习
提出 AVR 框架,让视觉推理模型按任务复杂度动态选择直接回答、感知或完整推理三种格式,token 消耗降低 50–90%。
Yixu Huang, Tinghui Zhu, Muhao Chen
2026-04-20
GRPO
多模态大模型
强化学习
推理效率
视觉推理
遗忘算法后测 LLM 能否独立重发明 Dijkstra 等基础算法
Jian Zhao, Haoren Luo, Yu Wang, Yuhan Cao, Pingyue Sheng, Tianxing He
2026-04-20
GRPO
LLM遗忘学习
基础算法创新
思考坍缩
测试时强化学习
用扩散生成器采样轨迹、RL判别器在低维打分,再配BEV特征级仿真,把闭环规划的安全性提升56%。
Hao Gao, Shaoyu Chen, Yifan Zhu, Yuehao Song, Wenyu Liu, Qian Zhang, Xinggang Wang
2026-04-17
GRPO
强化学习
扩散模型
端到端学习
自动驾驶
分层动作加密集奖励GRPO,把LVLM改造成统一视觉RAG智能体。
Jun Wang, Shuo Tan, Zelong Sun, Tiancheng Gu, Yongle Zhao, Ziyong Feng,...
2026-04-17
GRPO
主动视觉感知
多模态推理
强化学习
文档理解
用几何可验证的3D场景,让单VLM自问自答持续提升空间推理。
Dinging Li, Yingxiu Zhao, Xinrui Cheng, Kangheng Lin, Hongbo Peng, Hongxing...
2026-04-16
3D视觉
GRPO
VLM
几何验证
空间推理
提出 PreRL 与 DSRL:在预训练空间以 NSR 修剪错误推理路径,再切换到标准 RL 精调。
Yuqiao Tan, Minzheng Wang, Bo Liu, Zichen Liu, Tian Liang, Shizhu He, Jun...
2026-04-16
GRPO
Policy Reincarnation
RLVR
强化学习
推理增强
把组内候选重加权变成闭式目标分布,用交叉熵直接拟合,梯度自动消失。
Jean Kaddour
2026-04-16
GRPO
LLM 强化学习
PPO
RLVR
强化学习