RL训练让LLM自发钻社会法规漏洞,绕过现有安全机制。
Wei Liu, Xinyi Mou, Hanqi Yan, Zhongyu Wei, Yulan He
2026-06-04
AI安全
LLM对齐
奖励黑客
强化学习
监管套利
用拍卖竞争与财富积累让弱智能体自组织成强群体智能
Zhenting Qi, Huangyuan Su, Ao Qu, Chenyu Wang, Yu Yao, Han Zheng, Kushal...
2026-06-04
LLM智能体
去中心化协调
哈耶克市场理论
多智能体系统
强化学习
用VLM作为判别器的无监督层分解强化学习微调
Ciara Rowles, Reshinth Adithyan, Nikhil Pinnaparaju, Vikram Voleti, Mark Boss
2026-06-04
图像分解
奖励设计
强化学习
流匹配
视觉语言模型
ACTS框架通过控制器代理策略级引导推理器,在保持精度的同时大幅降低推理成本
Yu Xia, Zhouhang Xie, Xin Xu, Byungkyu Kang, Prarit Lamba, Xiang Gao, Julian McAuley
2026-06-04
强化学习
控制器-推理器架构
链式思维推理
马尔可夫决策过程
高效推理
用信任域分割策略梯度可靠区,稳定蒸馏推理小模型。
Xingrun Xing, Haoqing Wang, Boyan Gao, Ziheng Li, Yehui Tang
2026-06-03
在线策略蒸馏
小语言模型
强化学习
推理模型
知识蒸馏
让MLLM学会何时调用、验证、信任世界模型的视频推演来预测未来。
Yucheng Zhou, Wei Tao, Yiwen Guo, Jianbing Shen
2026-06-03
世界模型
多模态大模型
工具调用
强化学习
推理
以欠优化区域挖掘与CPT-SFT-RL渐进训练把0.9B文档解析模型推至新SOTA。
Zelun Zhang, Hongen Liu, Suyin Liang, Yubo Zhang, Yiqing Xiang, Jiaxuan Liu,...
2026-06-03
GRPO
OCR
PaddleOCR
后训练
强化学习
提出评测个性化说服力的基准,发现用户画像建模是关键瓶颈
Peixuan Han, Hongyi Du, Jiayu Liu, Yihang Sun, Yutong Liu, Jiaxuan You
2026-06-03
Benchmark
LLM Agent
个性化
强化学习
说服评估
诊断答案正确长CoT轨迹中答完仍续写的有害续写,并用0.5B轻量HCC代理切除它
Chen He, Yuhao Wu, Lei Wang, Wenxuan Zhang, Fumin Shen
2026-06-03
信息瓶颈
可解释性
强化学习
推理模型训练
数据质量
用感知扰动构造数据集并经GRPO批排序奖励训练判官,缓解其重文本轻视觉的偏差。
Seojeong Park, Jiho Choi, Junyong Kang, Seonho Lee, Jaeyo Shin, Hyunjung Shim
2026-06-03
GRPO
反事实数据构造
多模态大模型评判
奖励建模
强化学习
用梯度-激活显著性重加权GRPO的token级优势,提升数学推理。
Tej Deep Pala, Vernon Toh, Soujanya Poria
2026-06-03
GRPO
RLHF
信用分配
可验证奖励
强化学习
提出三轴框架,通过PEFT在万亿参数基础模型上构建百万个人模型实例
Mind Lab, Song Cao, Vic Cao, Kaijie Chen, Bunny Fan, Hera Feng, Huan Feng,...
2026-06-02
LoRA
个人模型
参数高效微调
基础设施
强化学习
通过状态外化框架分离语义决策与状态管理,提升RL搜索代理性能
Pengcheng Jiang, Zhiyi Shi, Kelly Hong, Xueqiang Xu, Jiashuo Sun, Jimeng...
2026-06-02
RAG
信息检索
强化学习
搜索代理
认知卸载
提出TVR任务和TVRBench基准,发现基础模型难以通过主动探索重现目标视角,后训练提升至51.4%
Liyang Li, Muzhi Zhu, Zhiyue Zhao, Hengyu Zhao, Ke Liu, Linhao Zhong, Hao...
2026-06-02
主动视觉
具身智能
多模态学习
强化学习
空间推理
提出开放框架,用少量监督数据+在线RL训练出能媲美闭源模型的视觉网页智能体
Rui Yang, Qianhui Wu, Yuxi Chen, Hao Bai, Wenlin Yao, Hao Cheng, Baolin...
2026-06-02
在线学习
多模态模型
强化学习
网页智能体
长程推理
系统研究多智能体RL训练LLM工作流,揭示IP/SP策略共享的梯度机制与失败模式
Yifan Zeng, Yiran Wu, Yaolun Zhang, Wentian Zhao, Kun Wan, Qingyun Wu, Huazheng Wang
2026-06-02
GRPO
LLM工作流
多智能体系统
强化学习
策略共享
ESPO通过提前终止失败轨迹节省20%+token并提升LLM推理性能
Zihang Li, Rui Zhou, Yingcheng Shi, Wenhan Yu, Zhewen Tan, Zixiang Liu,...
2026-06-02
大语言模型
强化学习
数学推理
策略优化
训练效率
在 on-policy RL 中复用 rollout 的下一观测做辅助世界模型监督,零额外推理开销
Ning Lu, Baijiong Lin, Shengcai Liu, Jiahao Wu, Haoze Lv, Yanbin Wei,...
2026-06-02
LLM智能体
世界模型
强化学习
稀疏奖励
联合训练
自监督强化学习训练多模态大模型做在线心智推理,无需心理状态标注
Shunchi Zhang, Jin Lu, Chuanyang Jin, Yichao Zhou, Zhining Zhang, Tianmin Shu
2026-06-02
多模态大模型
强化学习
心智理论
智能助手
自监督学习
通过shell命令让LLM直接检索原始文本,bypass传统检索索引实现高效多跳推理
Alireza Salemi, Chang Zeng, Atharva Nijasure, Jui-Hui Chung, Razieh Rahimi,...
2026-06-01
代理式搜索
多跳推理
强化学习
检索增强生成
直接语料库交互