← 前一天
2026-10-12
后一天 → 今日

发现多模态大模型内部存在三维线性空间工作区,坐标可读出可编辑,空间推理瓶颈在视角变换计算。

Zhiyuan Shi, Xiang Li, Xingzhuo Guo, Shangchen Miao, Weiliang Chen, Qiyu...
因果干预 多模态大模型 机制可解释性 空间推理 线性表征

把自蒸馏重写外包给稍大的同家族模型并配合拒绝采样,让小模型学新领域能力而不遗忘旧能力。

Woosung Koh, Hyunsoo Lee, Kyungjae Lee, Haeju Park, Dahyun Lee, Dasol Hwang,...
分布对齐 合成数据 小型语言模型 持续学习 灾难性遗忘

用并行批量打分恢复扩散草稿块内依赖,前缀优先选路,投机解码吞吐最高提升6.6倍

Roy Eisenstadt, Harel Lidar, Tal Gonen, Omer Luxembourg, Itamar Zimerman,...
LLM推理加速 并行草稿 扩散语言模型 投机解码 高并发服务

用K-RPBH随机旋转把激活变为可预测分布,无需校准数据即实现dLLM的4bit量化与加速

Donghyun Lee, Arkapravo Ghosh, Varun Manjunath, Bumjoon Kyle Rhee, Hyunho...
KV缓存量化 低比特推理 免校准 后训练量化 扩散语言模型

用低维瓶颈与表征引导目标,让普通Transformer学会真正服务于像素生成的内部表征。

Zihao Pan, Mengting Chen, Cheng Shi, Taihang Hu, Zhengrong Yue, Zikang Wang,...
像素扩散 扩散Transformer 文生图 流匹配 自引导

让框架持有研究状态、智能体彻底无状态,十亿token长程实验全面领先且省84%以上token

Qizheng Zhang, Changxiu Ji, Isaac Sun, Yuetai Li, Shubhangi Upasani, Sherry...
上下文工程 多智能体 自动化科研 长时程任务

在前向读写之上引入反向修订,让智能体积累的经验能在线纠错、随流适应

Yuxin Xiao, Zhiyun Lu, Jianyu Wang, Yangtian Zhang, Yang Song, Qifan Wang,...
LLM智能体 在线适应 智能体持续学习 经验修订 记忆与反思

把未来MH接受/拒绝结果组织成预取子树,一次批量调用生成提议,转移核不变地将幂采样加速2.3倍

Nan Jiang, Panagiotis Theodoropoulos, Wei Deng
LLM推理加速 MCMC采样 Metropolis-Hastings vLLM系统优化 测试时计算

把每层专家当作内生鲁棒组做分布鲁棒优化,显著提升稀疏MoE的路由鲁棒性与精度

Xin Teng, Muxiao Li, Hongyi Wen
分布鲁棒优化 大模型预训练 混合专家模型 路由鲁棒性

用扰动、证据冲突、探针和推理链审计六个生物推理模型,发现它们常依赖文本而非基础模型表征。

Ada Fang, Nikitha Thoduguli, Lukas Fesser, Hanlin Zhang, Sham M. Kakade,...
多模态LLM评估 推理链忠实性 生物推理模型 线性探针 证据冲突

把专家与参考模型的策略差异当作隐式奖励做任意到任意的蒸馏,并系统刻画何时可迁移

Rong Wu, Daocheng Fu, Yu Yang, Xuemeng Yang, Siqi Li, Shu Zou, Yao Zhu,...
在线策略蒸馏 大模型后训练 强化学习 相对策略差异迁移 隐式奖励

让智能体学习摊销式递归心理理论隐状态并耦合奖励模型,训练出可独立部署的伙伴建模策略

Hanan Gani, Lulu Shao, Manmohan Chandraker
LLM智能体 多智能体系统 奖励模型 强化学习 心智理论