提出harness编排层概念,通过多智能体协作实现跨类型跨条件科学图表生成与可编辑转换
Haozhe Zhao, Shuzheng Si, Zhenhailong Wang, Zheng Wang, Liang Chen, Xiaotong...
多智能体系统
栅格到SVG转换
科学图表生成
结构化规范
迭代精炼
提出三轴框架,通过PEFT在万亿参数基础模型上构建百万个人模型实例
Mind Lab, Song Cao, Vic Cao, Kaijie Chen, Bunny Fan, Hera Feng, Huan Feng,...
LoRA
个人模型
参数高效微调
基础设施
强化学习
通过轻量级因果校正块,在保持低开销的同时恢复块并行草稿的因果依赖建模,实现最高5.49×的推理加速
Jianuo Huang, Yaojie Zhang, Qituan Zhang, Hao Lin, Hanlin Xu, Linfeng Zhang
LLM推理加速
因果建模
并行草稿
投机解码
提出TASTE方法自动生成困难且覆盖广泛工具使用模式的Agent评测任务
Tomer Keren, Nitay Calderon, Asaf Yehudai, Yotam Perlitz, Michal...
Agent评估
基准测试生成
工具使用
自动化评测
上下文管理效果取决于检索器-模型能力匹配度,呈现倒U型非单调模式
Haoxiang Zhang, Qixin Xu, Zhuofeng Li, Lei Zhang, Pengcheng Jiang, Yu Zhang,...
上下文管理
代理系统优化
搜索代理
检索增强生成
注意力分析
通过状态外化框架分离语义决策与状态管理,提升RL搜索代理性能
Pengcheng Jiang, Zhiyi Shi, Kelly Hong, Xueqiang Xu, Jiashuo Sun, Jimeng...
RAG
信息检索
强化学习
搜索代理
认知卸载
首个韩语网页浏览智能体基准,包含400个多步推理问题,揭示模型在韩语环境下的显著性能下降
Nahyun Lee, Dongkeun Yoon, Guijin Son, Geewook Kim, Dayoon Ko, Jeonghun...
基准测试
多步推理
智能体评测
网页浏览
韩语NLP
提出步骤级故障归因的训练无关技能自适应方法,提升 LLM 智能体长周期任务性能
Zhuoyun Yu, Xin Xie, Wuguannan Yao, Chenxi Wang, Lei Liang, Xiang Qi, Shumin Deng
Fault Attribution
LLM Agent
Skill Adaptation
Training-free
Trajectory Learning
提出Draft-OPD,通过错误位置重放机制在验证时错误上训练draft模型,实现5倍以上无损加速
Haodi Lei, Yafy Li, Haoran Zhang, Shunkai Zhang, Qianjia Cheng, Xiaoye Qu,...
大语言模型
投机解码
推理加速
模型蒸馏
首个多流流媒体理解基准,评估MLLMs的并发流处理能力
Peiwen Sun, Xudong Lu, Huadai Liu, Yang Bo, Dongming Wu, Huankang Guan,...
基准测试
多模态大语言模型
多流理解
流媒体理解
视频理解
通过在隐空间预测浅层语义表示,正则化表示几何,提升下游任务性能
Xiangdong Zhang, Debing Zhang, Shaofeng Zhang, Xiaohan Qin, Yu Cheng, Junchi Yan
Mixture-of-Experts
几何正则化
自监督学习
表示学习
预训练目标
提出TVR任务和TVRBench基准,发现基础模型难以通过主动探索重现目标视角,后训练提升至51.4%
Liyang Li, Muzhi Zhu, Zhiyue Zhao, Hengyu Zhao, Ke Liu, Linhao Zhong, Hao...
主动视觉
具身智能
多模态学习
强化学习
空间推理
VLM-as-Teacher范式,通过测试时优化提升视频推理能力
Junhao Cheng, Liang Hou, Tianxiong Zhong, Xin Tao, Pengfei Wan, Kun Gai, Jing Liao
多模态学习
奖励学习
测试时优化
视频推理
视频生成
通过线性集成多个独立水印模型可破坏水印检测能力,仅需3个模型即可使检测失效
Zhihao Wu, Gracia Gong, Qinglin Zhu, Yudong Chen, Runcong Zhao
AI安全
文本检测
模型集成
模型鲁棒性
水印攻击
首个将MLA应用于视频扩散的工作,压缩KV缓存92.7%同时保持长时生成质量
Hidir Yesiltepe, Jiazhen Hu, Tuna Han Salih Meral, Adil Kaan Akan, Kaan...
KV缓存压缩
MLA
注意力机制优化
视频生成
长时扩散模型
通过冻结特征探测发现VLMs强于语义分组、VGMs强于3D几何预测,简单融合可结合两者优势
Haozhan Shen, Tiancheng Zhao, Kangjia Zhao, Jianwei Yin
多任务学习
特征探测
空间智能
视觉-语言模型
视频生成模型
提出开放框架,用少量监督数据+在线RL训练出能媲美闭源模型的视觉网页智能体
Rui Yang, Qianhui Wu, Yuxi Chen, Hao Bai, Wenlin Yao, Hao Cheng, Baolin...
在线学习
多模态模型
强化学习
网页智能体
长程推理
ESPO通过提前终止失败轨迹节省20%+token并提升LLM推理性能
Zihang Li, Rui Zhou, Yingcheng Shi, Wenhan Yu, Zhewen Tan, Zixiang Liu,...
大语言模型
强化学习
数学推理
策略优化
训练效率
通过检索历史生成内容解决AR长视频生成的错误累积问题
Qixin Hu, Shuai Yang, Wei Huang, Song Han, Yukang Chen
扩散模型
检索增强生成
自回归模型
视频生成
长视频
提出MASA框架,根据模型能力定制技能表述
Jianxiang Yu, Jiapeng Zhu, Bochen Lin, Qier Cui, Zichen Ding, Xiang Li
LLM智能体
技能库
搜索优化
模型适配
系统研究多智能体RL训练LLM工作流,揭示IP/SP策略共享的梯度机制与失败模式
Yifan Zeng, Yiran Wu, Yaolun Zhang, Wentian Zhao, Kun Wan, Qingyun Wu, Huazheng Wang
GRPO
LLM工作流
多智能体系统
强化学习
策略共享
解耦LLM编排器与短窗DiT,实现实时流式角色音视频生成
Linrui Tian, Qi Wang, Bang Zhang
LLM编排
扩散变压器
流式音视频生成
知识蒸馏
角色动画
首个面向真实个性化MCP工具的智能体评测基准,揭示SOTA模型仍难及格
Wenhao Wang, Peizhi Niu, Gongyi Zou, Xiyuan Yang, Jingxing Wang, Haoting...
MCP
个性化助手
基准测试
工具调用
智能体评测
用代码覆盖率作为新颖性奖励,联合训练潜变量记忆与探索策略
Shizuo Tian, Xiaohong Weng, Rui Kong, Yuxuan Chen, Guohong Liu, Yuebing...
GUI智能体
代码覆盖率
内在奖励
探索策略
智能体记忆
提出TVIR基准与多智能体框架,攻克图文交错研究报告生成与评估难题。
Xinkai Ma, Zhiqi Bai, Dingling Zhang, Pei Liu, Yishuo Yuan, He Zhu, Jiakai...
图文交错报告
基准测试
多智能体框架
多模态评测
深度研究智能体
无训练块稀疏注意力,旋转全局锚点+局部窗口,长视频扩散3.17倍加速
Gael Glorian, Ioannis Lamprou, Zhen Zhang, Yujie Yuan, Hongsheng Liu
无训练外推
稀疏注意力
视频Transformer
视频扩散模型
长视频生成
从fMRI脑信号直接回答视觉问题,并附NSD-VQA受控新基准。
Roman Beliy, Matias Cosarinsky, Oliver Heinimann, Navve Wasserman, Michal Irani
InstructBLIP
fMRI脑解码
多模态大模型
神经科学
脑机接口
用隐式多跳Minecraft任务评测MLLM智能体的开放世界探索
Tianjie Ju, Yueqing Sun, Zheng Wu, Wei Zhang, Yaqi Huo, Xi Su, Qi Gu,...
MLLM智能体
Minecraft基准
具身评测
多跳任务合成
开放世界探索
在 on-policy RL 中复用 rollout 的下一观测做辅助世界模型监督,零额外推理开销
Ning Lu, Baijiong Lin, Shengcai Liu, Jiahao Wu, Haoze Lv, Yanbin Wei,...
LLM智能体
世界模型
强化学习
稀疏奖励
联合训练
从图像生成的物理因素出发,评测具身场景下VLM在材质/视角/光照/几何四类视觉应力下的鲁棒性。
Leyi Wu, Yifan Zhao, Jinjie Zhang, Suzeyu Chen, Wosong Chen, Zhifei Chen,...
具身智能
视觉定位
视觉语言模型
视觉问答
逆向图形学
提出视觉技能范式,用视觉先验克服技能表示的文本瓶颈。
Binxiao Xu, Ruichuan An, Bocheng Zou, Hang Hua
GUI定位
多模态智能体
多模态绑定
技能学习
文本瓶颈
把目标LLM切成n级流水线,用多深度特征聚合并行投机下一token,零气泡隐藏延迟
Yijiong Yu, Huazheng Wang, Shuai Yuan, Ruilong Ren, Ji Pei
LLM推理加速
多深度特征聚合
投机解码
流水线并行
自投机解码
以「空间锚点token+条件化弹性query」分工压缩视觉token,单模型支持16~256多预算推理
Selim Kuzucu, Alessio Tonioni, Vasile Lup, Bernt Schiele, Federico Tombari,...
Matryoshka表示学习
PaliGemma-2
弹性推理
注意力机制
视觉-语言模型
AFUN 单次前向联合预测功能性掩码与3D贝塞尔运动曲线,迈向开放世界机器人操作。
Zhaoning Wang, Yi Zhong, Jiawei Fu, Henrik I. Christensen, Jun Gao
RGB-D感知
分割基础模型
可供性理解
机器人操作
视觉-语言模型
评测12个前沿VLM用Blender代码做过程化3D建模的智能体基准
Yipeng Gao, Lei Shu, Genzhi Ye, Xi Xiong, Ameesh Makadia, Meiqi Guo, Laurent...
3D生成
Blender
VLM智能体
人类偏好
代码生成
通过微调轻量级交叉注意力层实现高效长上下文压缩
Mengmeng Ji, Ravi Shanker Raju, Jonathan Lingjie Li, Chen Wu
上下文压缩
注意力机制
跨家族泛化
长上下文推理
通过将问题分解为可检查的子问题并逐条验证候选答案,提升智能搜索系统的准确性和可解释性。
James Xu Zhao, Hui Chen, Bryan Hooi, See-Kiong Ng
候选选择
智能搜索
测试时计算扩展
自验证
证据验证
首个基于分类法的语义对象对应基准,评估100个类别、100万+对应对的视觉和多模态基础模型
Olaf Dünkel, Basavaraj Sunagad, Haoran Wang, David T. Hoffmann, Christian...
基准测试
大视觉语言模型
结构化对象理解
视觉基础模型
语义对应关系
提出 UDS 指标,用两阶段激活修补因果量化遗忘知识的擦除深度。
Jaeung Lee, Dohyun Kim, Jaemin Jo
机制可解释性
机器遗忘
激活修补
评估指标
隐私保护
用抽取式VerbatimRAG给ACL论文做无幻觉问答,150M小模型登顶。
Gábor Recski, Szilveszter Tóth, Nadia Verdha, István Boros, Ádám Kovács
ACL Anthology
ModernBERT
VerbatimRAG
token分类
学术问答
用现成大模型对固定长度分块打分,生成时引导小模型推理,免训练即可匹敌 PRM
Atoosa Chegini, Soheil Feizi
免训练方法
对比解码
推理时扩展
数学推理
过程奖励模型
用管理者模型将CUA任务分解为DAG,并行调度子智能体,提升长程任务成功率
Jing Yu Koh, Ruslan Salakhutdinov, Daniel Fried
DAG规划
任务分解
多智能体系统
并行执行
测试时计算
把多选题改造成机器人抓取任务,诊断VLA是否真懂指令语义。
Bin Yu, Yao Zhang, Haishan Liu, Shijie Lian, Yuliang Wei, Xiaopeng Lin,...
VLA模型
具身智能
基准测试
机器人操作
模仿学习
用团队体育作动态微观世界,构建覆盖感知到智能体合成的战略视频智能基准
Yulu Pan, Han Yi, Seongsu Ha, Md Mohaiminul Islam, Benjamin Zhang, Lorenzo...
体育视频
因果推理
多模态大模型
战略推理
智能体
重构分词器+均值映射+离线蒸馏,高效把多语言教师适配到土耳其语
M. Ali Bayram, Banu Diri, Savaş Yıldırım
分词器适配
句子嵌入
土耳其语NLP
模型压缩
知识蒸馏
提出同时建模多维度变量并精确外推神经网络缩放行为的统一函数形式
Ethan Caballero, Priyank Jaini, David Krueger, Irina Rish
函数形式
多维缩放
大模型训练
模型外推
神经缩放定律
用日本政府白皮书构建日语图表 VQA 基准,揭示开源与闭源 VLM 的巨大能力差距。
Issa Sugiura, Shuhei Kurita, Yusuke Oda, Naoaki Okazaki
图表理解
基准数据集
多模态评测
政府白皮书
日语基准
在RLVR中引入时间调度维度,按时序从后向前渐进优化轨迹百分位token
Jinghao Zhang, Ruilin Li, Feng Zhao, Jiaqi Wang
GRPO
RLVR
token级优化
信用分配
时间调度
梳理 Physical AI 运行时动作授权,揭示黑盒模型到物理执行之间的静默失败与护栏缺口。
Barak Or
Physical AI
VLA模型
安全护栏
文献综述
自主系统
自监督强化学习训练多模态大模型做在线心智推理,无需心理状态标注
Shunchi Zhang, Jin Lu, Chuanyang Jin, Yichao Zhou, Zhining Zhang, Tianmin Shu
多模态大模型
强化学习
心智理论
智能助手
自监督学习