统一数据选择、混合和重加权的动态训练框架
Hao Liang, Zhengyang Zhao, Meiyi Qiang, Mingrui Chen, Lu Ma, Rongyi Yu,...
分布式训练
动态训练
大语言模型
数据中心AI
数据选择
系统综述语言模型潜空间研究的全景综述,按机制与能力双轴梳理200余项工作。
Xinlei Yu, Zhangquan Chen, Yongbo He, Tianyu Fu, Cheng Yang, Chengming Xu,...
大语言模型
潜在推理
潜空间
综述
连续思维
从AAA游戏提取大规模G-buffer数据集,实现双向渲染突破
Zheng-Hui Huang, Zhixiang Wang, Jiaming Tan, Ruihan Yu, Yidan Zhang, Bo...
数据集构建
生成式模型
计算机图形学
逆向渲染
通过上下文强化学习将agent技能内化到模型参数,实现零样本自主行为
Zhengxi Lu, Zhiyuan Yao, Jinyang Wu, Chengcheng Han, Qi Gu, Xunliang Cai,...
LLM Agent
上下文学习
强化学习
技能内化
智能体
用物理因果推理实现视频对象及其交互的真实移除
Saman Motamed, William Harvey, Benjamin Klein, Luc Van Gool, Zhuoning Yuan,...
VLM引导
对象移除
物理推理
视频编辑
SteerViT通过早期融合交叉注意力让冻结ViT可文本操控,并保持原表征质量
Jona Ruthardt, Manu Gaur, Deva Ramanan, Makarand Tapaswi, Yuki M. Asano
可解释性
多模态
提示引导
视觉Transformer
视觉表征
自主多智能体进化框架用于开放性发现
Ao Qu, Han Zheng, Zijian Zhou, Yihao Yan, Yihong Tang, Shao Yong Ong, Fenglu...
LLM智能体
多智能体系统
开放性发现
自主智能体
进化算法
首个将三维点云作为可更新世界状态、闭环驱动自我中心手物交互视频生成的模拟器。
Jinkun Hao, Mingda Jia, Ruiyan Wang, Xihui Liu, Ran Yi, Lizhuang Ma,...
三维重建
世界模型
具身智能
机器人
自我中心视觉
大模型先做决定再找理由
Esakkivel Esakkiraja, Sai Rajeswar, Denis Akhiyarov, Rajagopal Venkatesaramani
因果分析
工具调用
思维链
激活导向
激活探针
使用匹配背景的近身份干扰项解决视觉编码器中身份与上下文的混淆问题
Aleksandar Cvejic, Rameen Abdal, Abdelrahman Eldesokey, Bernard Ghanem, Peter Wonka
个性化图像生成
对比学习
度量学习
表征学习
身份识别
统一语义空间表示所有模态,支持交织跨模态推理
Jiachun Jin, Zetong Zhou, Xiao Yang, Hao Zhang, Pengfei Liu, Jun Zhu, Zhijie Deng
世界建模
多模态统一模型
自回归生成
视觉-语言模型
跨模态推理
自主研究管线自动发现多模态记忆架构,LoCoMo F1+411%
Jiaqi Liu, Zipeng Ling, Shi Qiu, Yanqing Liu, Siwei Han, Peng Xia, Haoqin...
多模态记忆
智能体
混合检索
知识图谱
自主研究
用Mixture-of-Transformers三专家解耦感知与推理,解决VLA自驾感知-语义冲突
Yongkang Li, Lijun Zhou, Sixu Yan, Bencheng Liao, Tianyi Yan, Kaixin Xiong,...
Mixture-of-Transformers
稀疏感知
端到端规划
自动驾驶
视觉-语言-动作模型
一个具备认知库与分析器的智能体进化框架,在架构、数据、RL算法三大 AI 子领域同步发现超越人类专家的设计。
Weixian Xu, Tiantian Mi, Yixiu Liu, Yang Nan, Zhimeng Zhou, Lyumanshan Ye,...
AI-for-AI
LLM Agent
强化学习算法设计
数据清洗
智能体框架
AI代理生成的代码变更更大但更不稳定
Razvan Mihai Popescu, David Gros, Andrei Botocan, Rahul Pandita, Prem...
AI代码代理
GitHub数据挖掘
代码维护性
代码质量
实证研究
提出GateControl框架,通过门控机制在高效线性注意力模型上实现多类型可控图像生成
Yuhe Liu, Zhenxiong Tan, Yujia Hu, Songhua Liu, Xinchao Wang
可控生成
扩散模型
端侧部署
线性注意力
门控机制
GPA通过单次演示实现确定性、高隐私的GUI自动化
Zirui Zhao, Jun Hao Liew, Yan Yang, Wenzhuo Yang, Ziyang Luo, Doyen Sahoo,...
GUI自动化
RPA
UI定位
从演示学习
流程自动化
统一2D/3D生成,用跨模态一致性约束缓解3D数据稀缺问题
Chongjie Ye, Cheng Cao, Chuanyu Pan, Yiming Hao, Yihao Zhi, Yuanming Hu,...
3D生成
多模态学习
指令编辑
自回归模型
跨模态对齐
首个在VLA模拟环境中端到端优化3D对抗纹理的攻击框架,实现高达96.7%任务失败率
Jiawei Chen, Simin Huang, Jiawei Du, Shuaihang Chen, Yu Tian, Mingjie Wei,...
3D纹理攻击
可微分渲染
对抗性攻击
机器人安全性
视觉-语言-动作模型
15B多域RLVR后训练,30-50%更短推理链
Rafael Pardinas, Ehsan Kamalloo, David Vazquez, Alexandre Drouin
GSPO
LLM后训练
PipelineRL
RLVR
多域强化学习
500题+5级层次化评估协议,证明主流视频MLLM在长视频细粒度时空证据定位上几乎全部失败(Level-5最高仅1%)。
Jiahao Meng, Tan Yue, Qi Xu, Haochen Wang, Zhongwei Ren, Weisong Liu, Yuhao...
Thinking-with-Videos
基准测试
多模态大模型
时空定位
视频理解
视频扩散模型在前几步去噪就锁定路径,由此提出 ChEaP,把长程迷宫准确率从 7% 拉到 67%。
Kaleb Newman, Tyler Zhu, Olga Russakovsky
推理时计算
早期计划承诺
视频扩散模型
迷宫求解
链式生成
首个用 VQA 四层级问答评测学术插图逻辑正确性的细粒度基准
Zhaohe Liao, Kaixun Jiang, Zhihang Liu, Yujie Wei, Junqiu Yu, Quanhao Li,...
T2I模型
VQA评估
多模态评测基准
学术插图生成
视觉-逻辑一致性
在4B参数T5Gemma编解码器上引入PM-RoPE跨注意力机制,实现多语言零样本TTS。
Chihiro Arata, Kiyoshi Kurihara
Codec Language Model
Encoder-Decoder
Multilingual
PM-RoPE
Text-to-Speech
Sony AI 发布音效基础模型,集成音频编解码、文本对齐、文本到音频与视频到音频扩散生成
Gaëtan Hadjeres, Marc Ferras, Khaled Koutini, Benno Weck, Alexandre Bittar,...
CLAP
多模态生成
流匹配
潜在扩散模型
视频到音频
提出AutoMIA框架,自动发现并演化成员推理攻击策略,在多模型上超越人工设计基线。
Ruhao Liu, Weiqi Huang, Qi Li, Xinchao Wang
大模型隐私
成员推理攻击
自动化攻击
视觉语言模型
闭环优化
首个覆盖17种语言、3400张数字+拍照文档的多语言解析基准,揭示开源模型在拍照与非拉丁脚本上大幅崩塌
Zhang Li, Zhibo Lin, Qiang Liu, Ziyang Zhang, Shuo Zhang, Zidun Guo, Jiajun...
VLM评测
基准测试
多语言OCR
文档解析
真实场景
用合成光流替代合成视频,解耦运动与外观生成高动态视频。
Wonjoon Jin, Jiyun Won, Janghyeok Han, Qi Dai, Chong Luo, Seung-Hwan Baek,...
光流
合成数据
扩散模型
相机控制
视频生成
用端到端微调 LLM 从新闻预测供应链中断概率,显著优于 GPT-5 等基线。
Benjamin Turtel, Paul Wilczewski, Kris Skotheim
LLM微调
LoRA
供应链风险
强化学习
校准
提出无模型调用的轨迹信号分类体系,将智能体采样信息率从54%提至82%
Shuguang Chen, Adil Hafeez, Salman Paracha
RLHF/DPO
τ-bench
偏好数据构建
智能体系统
轨迹分诊
系统教程:将科学发现重构为黑盒优化问题,详解GP-UCB等BO核心组件并以5个真实科学案例验证。
Zhongwei Yu, Rasul Tutunov, Alexandre Max Maraval, Zikai Xie, Zhenzhi Tan,...
催化剂设计
分子优化
教程
科学发现
自动实验设计
用稀疏自编码器定位昆虫部位,再让多模态大模型生成可解释的形态特征描述。
Vardaan Pahuja, Samuel Stevens, Alyson East, Sydne Record, Yu Su
多模态大模型
弱监督定位
形态学
特征提取
生物多样性
用冻结LM做教师配合层间KV共享,在零额外参数下恢复VLM的语言能力。
Patrick Amadeus Irawan, Erland Hilman Fuadi, Shanu Kumar, Alham Fikri Aji,...
KV缓存共享
多模态学习
灾难性遗忘
知识蒸馏
视觉语言模型
提出不确定性感知多智能体框架,让 LLM 编码代理像人类开发者一样识别指令缺失并主动提问。
Nicholas Edwards, Sebastian Schuster
LLM Agent
SWE-bench
不确定性估计
主动澄清
交互式评估
实证分析 ColBERT 类晚期交互检索的长度偏差与 MaxSim 相似度分布。
Antoine Edy, Max Conti, Quentin Macé
ColBERT
Information Retrieval
Late Interaction
Length Bias
Multi-Vector Retrieval
用模块化桥接方案将前馈重建与扩散生成统一为协同框架,从稀疏无位姿图像恢复高保真三维网格。
Zhisheng Huang, Jiahao Chen, Cheng Lin, Chenyu Hu, Hanzhuo Huang, Zhengming...
3D生成
3D重建
多视角几何
扩散模型
稀疏视图
MultiGen 用显式外部记忆+三模块架构,让扩散游戏引擎支持关卡可编辑与多人一致性
Ryan Po, David Junhao Zhang, Amir Hertz, Gordon Wetzstein, Neal Wadhwa, Nataniel Ruiz
世界模型
关卡设计
外部记忆
多人交互
扩散游戏引擎
为视频世界模型引入主体状态token与空间RoPE偏置,解决多智能体动作绑定难题
Alexander Pondaven, Ziyi Wu, Igor Gilitschenski, Philip Torr, Sergey...
DiT
世界模型
动作绑定
多智能体控制
属性绑定
把FlowEdit速度分解为保真项与引导项,仅缩放引导项即实现稳定滑块控制。
Taichi Endo, Guoqing Hao, Kazuhiko Sumi
FlowEdit
Rectified Flow
免训练
图像编辑
扩散模型
提出并行执行范式与 EAGER 框架,将 LLM 代码生成与执行流水线化以降低端到端延迟。
Zhensu Sun, Zhihao Lin, Zhi Chen, Chengran Yang, Mingyi Zhou, Li Li, David Lo
LLM代码生成
代码执行
延迟优化
流水线
系统优化
统一VLM框架,融合情景记忆+数据关联+探索策略,跨视角生成一致物体描述
Tommaso Galliena, Stefano Rosa, Tommaso Apicella, Pietro Morerio, Alessio...
主动探索
具身智能
情景记忆
数据关联
物体描述生成
首个动作条件化的第一人称视频世界模型,融合人体姿态联合建模。
Quankai Gao, Jiawei Yang, Qiangeng Xu, Le Chen, Yue Wang
世界模型
人机交互
具身智能
扩散模型
视频生成
冻结 MoE-LoRA 栈 + 零空间投影 + 经验路由,发现适配器实际编码可迁移的认知原语。
Mohammad R. Abu Ayyash
LLM多域适配
MoE-LoRA
参数高效微调
持续学习
认知能力
用稳定性评分定位大模型中的稀疏"祖母细胞",并在 7 个模型中验证其因果操控性。
Itay Yona, Dan Barzilay, Michael Karasik, Mor Geva
MLP 神经元
事实召回
机制可解释性
祖母细胞假说
稀疏编码
基于XEUS与SelfCTC的通用音素识别SOTA模型
Shikhar Bharadwaj, Chin-Jou Li, Kwanghee Choi, Eunjung Yeo, William Chen,...
CTC损失
多语种
自监督学习
语音识别
音素识别