首个导航-场景冲突感知驾驶VLA:模式token解耦冲突推理,世界模型做梦兼顾指令遵循与安全
Shaoyuan Xie, Zihan Zhang, Jingxuan Wang, Jiashu Qu, Xiaoqing Liang,...
2026-10-15
VLA
世界模型
基准评测
安全对齐
自动驾驶
为文本任务解析计算每例真值类概率,直接评估模型概率质量与校准方法
Yuyang Dai, Yuting Tang, Futoshi Futami, Takashi Ishida
2026-10-15
LLM评估
不确定性量化
基准评测
校准
贝叶斯误差
用软件演化找出智能体友好接口三属性,自动合成接口使成功率升、token省73%
Alan Wu, Wei Tao, Yiwen Guo
2026-10-14
LLM智能体
基准评测
接口合成
桌面软件
软件演化
六大前沿 Agent 功能通过率近九成,功能与安全双达标最高仅 25.1%。
Tianyi Wu, Chao Ge, Peng Chen, Fengji Zhang, Yongxing Wu, Yuchong Xie, Jian...
2026-10-14
Vibe Coding
基准评测
安全代码生成
漏洞复现
编程Agent
评测真实生活与办公场景深度研究智能体的中英双语基准,最强模型仅得63.4%
Yibo Wang, Senjie Jin, Yansong Ning, Xinbing Liang, Haotian Luo, Jiazheng...
2026-10-14
LLM-as-a-Judge
中英双语
基准评测
深度研究智能体
真实用户任务
首个覆盖智能体创建、编辑、优化全生命周期的基准,测出编码智能体“演示”与“交付”间的巨大鸿沟
Jiahao Wang, Hongjin Qian, Yuyang Hu, Jiajun Zhang, Zheng Liu
2026-10-13
基准评测
智能体构建
泛化与过拟合
编码智能体
软件工程
把异构上下文编译为可执行约束,让交互式视频续写同时忠于源、前缀与请求
Bingxuan Li, Yiwen Song, Xueqing Wu, Yanzhou Pan, Yang Li, Kuang Su, Jingyun...
2026-10-13
上下文接地
交互式叙事
基准评测
约束推理
视频生成
提出结构化消歧范式并构建ARCS基准,歧义问题使最强模型端到端准确率仅51%
Yihao Hu, Yanlin Feng, Naoki Otani, Nikita Bhutani
2026-10-13
Text-to-SQL
人机交互
基准评测
大语言模型
歧义消解
构建 AAArena 基准,评估 AI 智能体通过改写游戏代码登顶人类天梯的能力
Kaisen Yang, Qingle Liu, Kejin Wang, Yicheng Zhao, Jieming Li, Shenghan...
2026-10-12
AI智能体
代码进化
启发式学习
基准评测
对抗游戏
蚂蚁集团推出统一OCR基础模型家族PolyOCR,用数据引擎加CGPO后训练在五大基准达到SOTA
GuangJian Team, Kaili Huang, Yongshuo Zhang, Bingtao Fu, Changjiang Jiang,...
2026-10-12
OCR
基准评测
多模态大模型
强化学习
知识蒸馏
用跨 DSL 同题配对实验首次量化 Agent 自蒸馏技能的真实复用价值
Xueyi Chen, Shiyu Liu, Xin Jin, Yuhua Zheng, Xin Li, Haolei Bai, Junhan Zhu,...
2026-10-12
GPU Kernel 优化
LLM Agent
基准评测
技能蒸馏
知识迁移
面向选项选择式模型的图决策诊断基准,覆盖结构认知、图文融合与序列构造
Xianliang Yang, Yapu Zhang, Li Zhao
2026-10-12
图算法
基准评测
大语言模型
提出推理编辑基准 RISEBench++(1000例双语)与免训练智能体 RISE-Agent。
Xue Yang, Peiyuan Zhang, Yilun Zhu, Qihao Yang, Mingxin Liu, Xiangyu Zhao,...
2026-10-09
LMM-as-a-Judge
图像生成
基准评测
多模态推理
智能体框架
首个以卷尺实测距离直接评测3D基础模型点对距离估计能力的统一基准,覆盖四类设置
Siyu Chen, Zehan Wang, Jiayang Xu, Yihan Wu, Jialei Wang, Junming Chen,...
2026-10-09
3D基础模型
基准评测
度量深度
深度补全
空间智能
以41个可执行参考游戏构建247个任务,用运行时证据加视觉评审评测六大模型的游戏开发能力
Xiaoyu Chen, Lai Wei, Jin Wang, Xiangyu Zou, Ruochen Fan, Enze Luo, Mingzhe...
2026-10-08
代码智能体
基准评测
多模态评估
游戏开发
运行时验证
把网页智能体每步视为解析-执行-反馈-观察四阶段往返并加固,得分从31升至57
Jiangang Han
2026-10-08
GUI智能体
Web Agent
基准评测
多模态大模型
智能体工程
首个评估 LLM 智能体生成可建造、可运行 3D 结构的四层级基准
Jiateng Liu, Rushi Wang, Cheng Qian, Xuejun Zhang, Sun Li, Jiayu Liu, Yifan...
2026-10-06
3D 生成
CAD 装配
LLM Agent
功能可供性
基准评测
构建真正需要音视频协同的基准、11.2万条证据接地数据与模态分解自蒸馏训练方法,提升全模态联合推理
Junming Lin, Yuxuan Wang, Zhenxin Lei, Yuxin Liu, Ruixun Liu, Yinsong Yan,...
2026-10-06
基准评测
多模态大模型
强化学习
数据引擎
自蒸馏
用2814个递进子目标和6.7万条人工步级标注,把CUA评测从只看结果升级为跟踪全过程。
Zhilin Wang, Shaokun Zhang, Yifan Zhang, Hao Zhang, Jin Xu, Binfeng Xu, Jian...
2026-10-06
GUI智能体
LLM-as-Judge
基准评测
计算机使用智能体
过程式评估
配对反事实基准把智能体任务能力与故障恢复分离,揭示名义成功率掩盖的阶段性恢复缺陷
Dolly Sah, Tanmay Sah, Harshul Jain, Tanya Sah
2026-10-06
LLM智能体
分布式系统
副作用安全
基准评测
幂等性