用 RL 学习每个预测动作块该执行多长,冻结长分块策略即可样本高效在线适配
Xu Luo, Jiaying Yang, Hao Wu, Junlin Xie, Zijin Hong, Ji Zhang, Lianli Gao,...
2026-11-11
动作分块
强化学习
机器人操作
真实世界机器人
离线强化学习
构造可验证的奖励-上下文冲突任务,揭示RL捷径习得规律,并训练可迁移的上下文安全行为
Xinjie Shen
2026-11-11
AI安全
上下文合规
可验证环境
奖励劫持
强化学习
世界模型预测候选后果、critic估值,双通道校准让ALFWorld成功率63.5%升至87.5%
Chenghao Gao, Zhi Zhang, Dian Jin, Yihe Pan, Doudou Zhou
2026-11-11
LLM智能体
PPO
世界模型
信用分配
强化学习
构造证据稠密/稀疏视频对,用两阶段强化学习教会模型按证据充分性选择直答或推理
Changti Wu, Ruizhe Fan, Bin Wang, Lei Zhang, Yuxiang Zhang
2026-11-11
多模态推理
强化学习
数据构建
自适应思考
视频理解
以观测状态为对齐对象的两阶段后训练,让视觉智能体真正获取并依赖工具返回的证据。
Haozhi Yuan, Handong Li, Yifan Zhang, Qianshan Wei
2026-11-10
多教师在线策略蒸馏
多模态大模型
工具使用
强化学习
智能体视觉推理
三智能体分工微调RAG流水线,8B模型五基准平均EM超次优6.45%
Yingtao Ren, Xiao Luo, Yiwei Fu, Jinzhao Zhou, Yu-Cheng Chang, Chin-Teng Lin
2026-11-10
GRPO
RAG
多智能体
多跳问答
强化学习
系统地将五种扩散模型RL目标适配到少步蒸馏模型,统一代码库对比并给出选型指南
Haitao Lin, Minsi Ren, Yang Li, Xingtong Ge, Zheyuan Hu, Peiyan Hu, Tailin Wu
2026-11-10
后训练
少步生成
强化学习
扩散模型
文生图
训练独立的启动模型引导冻结的响应模型,用解耦创意过程的方式逃逸创意悖论
Alon Albalak, Sebastian Gabriel, David B. D'Ambrosio, Joel Lehman,...
2026-11-10
GRPO
LLM后训练
创造力
多样性
强化学习
用免密度的价值比较门控逐转移决定多步目标延伸,使离线Q学习随视界增长保持精确
Haoran Xu, Pragya Srivastava, Xinjie Liu, Siddhant Agarwal, Amy Zhang
2026-11-10
值函数学习
多步TD
强化学习
离线RL
长视界
加固到答案无法泄露的沙箱里,几乎所有前沿编码模型仍会挖仓库历史找答案而非解题
Yuntao Gui
2026-11-09
AI安全
LLM智能体
代码评测
奖励黑客
强化学习
用神经 ODE 学习动作的向量场,每个动作由前一个动作积分而来,策略天然连续、高效、平滑。
Jindou Jia, Jingliang Li, Kuangji Zuo, Tuo An, Yuxuan Hu, Mengfei Zhao,...
2026-11-09
VLA
世界动作模型
人形机器人
动作分块
强化学习
开源决策模型家族Drex,无自回归解码直接输出选项概率分布,以极低成本媲美前沿模型
Nischay Dhankhar, Alisher Amantay, Zhanibek Datbayev, Darkhan Akhmetov, Yash...
2026-11-06
决策模型
判别式推理
多模态
开源模型
强化学习
开源PLatour用RL训练大小模型间线性桥,PACT-Check揭示部分收益并非真正来自信息传递
Zhenyi Shen, Junru Lu, Wei Liu, Jiangnan Ye, Jiazheng Li, Di Yin, Xing Sun,...
2026-11-06
参数高效微调
大模型协作
强化学习
推理效率
潜在通信
TurnWise 以回合级信用分配与回合均值聚合改进流式视频 GRPO
Shuai Dong, Kanghui Tian, Linghan Chen, Wenqi Shao, Hongrui Wu, Haowen Hou,...
2026-11-05
GRPO
主动交互
信用分配
多模态大模型
强化学习
用实例级反思门控与跨轮次奖励记忆,自适应校准多源情感奖励的信任权重
Mingzhe Zheng, Yue Wu, Jing Tan, Chang Zou, Dengyang Jiang, Zeyue Tian,...
2026-11-05
GRPO
后训练
奖励校准
强化学习
情感计算
仅用两阶段SFT加强化学习,训练出比肩前沿商业模型的全开源智能体基座模型
Yuqi Jia, Yunjie Tian, Jiayu Zheng, Yijun Liang, Jingchen Sun, Mengyu Zhao, Di Fu
2026-11-04
GRPO
开源
强化学习
数据合成
智能体基座模型
从真实执行轨迹挖掘工具依赖,跨环境合成可回放验证的长程智能体训练数据
Guanting Dong, Zhichao Sun, Xinyu Yang, Rui Wang, Xin Deng, Jiajie Jin,...
2026-11-04
MCP
工具使用
强化学习
数据合成
智能体
4B 混合 CUA 经五阶段课程与进化脚手架,OSWorld-Verified 达 66.0%。
Xiaoyi Zhang, Haoqing Wang, Xinjie Zhang, Xiang Ming, Xing Wang, Senqiao...
2026-11-04
GUI与终端混合执行
强化学习
数据合成
知识蒸馏
端侧智能
用动作分歧筛选训练状态并按任务进度自适应决定 rollout 范围,交互成本降 56-61%
Yuxiang Chai, Quyu Kong, Panrong Tong, Steven Hoi, Yue Wang
2026-11-04
GRPO
GUI智能体
强化学习
智能体训练
样本效率
双循环飞轮从视频挖种子、按原语合成任务并快照回滚采轨迹,27B 模型四大基准比肩闭源旗舰
Xinlei Yu, Gen Li, Ji Zhao, Zhangquan Chen, Congcong Wang, Shuai Dong, Zelin...
2026-11-03
GUI+CLI 混合动作空间
强化学习
数据合成
视频轨迹挖掘
计算机操作智能体