SDPO用模型自身反馈做自蒸馏,突破RL信用分配瓶颈
Jonas Hübotter, Frederike Lübeck, Lejs Behric, Anton Baumann, Marco...
2026-01-29
信用分配
后训练
大语言模型
强化学习
自我蒸馏
揭示GRPO等群组相对RL算法中优势估计的固有偏差,并提出HA-DW自适应修正方案
Fengkai Yang, Zherui Chen, Xiaohan Wang, Xiaodong Lu, Jiajun Chai, Guojun...
2026-01-19
GRPO
LLM推理
优势估计
后训练
强化学习
证明SFT和RL在后训练中相互耦合,顺序执行必然导致一方退化
Xueyan Niu, Bo Bai, Wei Han, Weixi Zhang
2026-01-13
SFT
后训练
大语言模型
强化学习
理论分析
SOP通过分布式机器人在线经验共享实现VLA模型的高效多任务后训练
Mingjie Pan, Siyuan Feng, Qinglin Zhang, Xinchen Li, Jianheng Song, Chendi...
2026-01-07
分布式机器人学习
后训练
在线学习
机器人操作
视觉-语言-动作模型