用反事实回放为GRPO分配令牌级信用,无需训练评分器即可提升指令跟随RL效果
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
把游戏求解器的状态价值变化转成逐回合信用信号,注入 RLVR 实现无需 logits 的策略蒸馏
单一策略在任务序列中边解题边整理技能文档,实现端到端的可迁移技能学习。
统一在线蒸馏框架修复三大失效模式,0.5B学生达GSM8K 69.8%
用于代码优化的强化学习
👍 13让RL真正学会写更快的正确代码:从测试、沙箱、奖励到GRPO全链路改造。
系统诊断小模型PPO对齐的三大失效模式,提出工程化稳定框架与能力余量假说
机器人学习中的进度奖励建模:一份全面综述
👍 111统一框架梳理机器人学习进度奖励模型:接口、构造机制、数据与评测
用结构化JSON协议蒸馏专有模型推理能力,提升开源模型智能体搜索
把试穿重新定义成多参考理解驱动生成,靠数据引擎+CPT-SFT-RL达到任意品类SOTA
用可控环境系统揭示长程规划能力在预训练、GRPO/OPD、多教师蒸馏三阶段的获取、塑造与整合规律。
用逐字引用+检索替代坐标框,让VLM证据归因召回率提升数倍
用协同进化的技能库协调出题与解题双方自博弈,破解LLM自进化的多样性与验证困境。
AREX:面向深度研究的递归自我改进智能体
👍 107AREX用内外双循环递归地自我改进,靠验证驱动的研究状态刷新深度搜索水平。
从智能体经验中样本高效地学习
👍 18把智能体交互经验蒸馏进权重,无需额外环境采样即可保留大部分上下文学习增益。
基于前缀重放的多轮在线策略蒸馏
👍 12复用教师轨迹做离线多轮 agent 蒸馏,零工具调用、4倍加速且不掉点。
用轻量代理与容器编排解耦训练与推理,让任意 harness 和环境直接接标准 RL 训练
仅用单目RGB即达具身导航SOTA的8B视觉语言模型
用散度方向导数重定义信任域方向判据,改进LLM强化学习稳定性。
从黎曼几何修正PPO裁剪,等距更新RIPO显著缓解探索坍缩。
用代理似然把结果奖励RL引入潜在推理,实现潜在测试时扩展