标签： 全部 强化学习 扩散模型 大语言模型 基准测试 视频生成 视觉语言模型 世界模型 GRPO 多模态大模型 知识蒸馏 LLM智能体 多智能体系统 智能体 多模态学习 流匹配 具身智能 图像生成 基准评测 代码生成 LLM Agent 检索增强生成 注意力机制 机器人操作 多模态大语言模型 视频理解 可解释性 数学推理 图像编辑 多模态 机器人学习 RLVR 自监督学习 长上下文 后训练 Transformer 工具使用 对比学习 数据合成 视觉-语言-动作模型 推理加速 工具调用 LoRA 多模态推理 RAG 计算机视觉 LLM评估 信息检索 视觉推理 评测基准 高效推理 参数高效微调 扩散语言模型 自蒸馏 综述 Flow Matching 3D重建 模型压缩 自回归生成 持续学习 自回归模型
找到 79 条结果
相关性 | 日期

HyQuant：面向大语言模型注意力的混合精度量化

👍 17

保留少数垂直线token和局部窗口为全精度，其余低比特量化，实现近无损长上下文推理加速

Jiatong Ding, Bingxin Xing, Yu Zhang, Dian Ding, Xiaodong Yi, Xianbin... 2026-09-11
KV缓存压缩 LLM推理加速 模型量化 注意力机制 混合精度
✅ 已总结
详情 →

滑窗注意力胜过线性注意力

👍 14

零训练的带槽滑窗注意力在短长上下文任务上追平甚至碾压昂贵的后训练线性注意力

Alexia Jolicoeur-Martineau, Rhea Sanjay Sukthanker, Pashmina Cameron, Emy Gervais 2026-08-31
KV缓存 LLM推理效率 注意力机制 滑窗注意力 线性注意力
✅ 已总结
详情 →

Kimi K3：开放的前沿智能

👍 431

首个开源3T级原生多模态MoE，配1M上下文与多档强化学习

Kimi Team, Tongtong Bai, Yifan Bai, Yiping Bao, M. C., Jianfeng Cai, Xinyuan... 2026-07-28
Mixture-of-Experts 原生多模态 大语言模型 智能体强化学习 长上下文
✅ 已总结
详情 →

长上下文 LLM 的自引导测试时训练

👍 18

让LLM自主选择训练片段提升长上下文推理性能

Xinyu Zhu, Zhe Xu, Xiaohan Wei, Yunchen Pu, Fei Tian, Chonglin Sun, Kaushik... 2026-07-13
参数高效微调 注意力机制 测试时训练 自适应推理 长上下文
✅ 已总结
详情 →

德语和英语的主权开源基础模型

👍 8

30B总参数仅激活3B的双语MoE模型，长上下文服务效率领先，德语能力突出

The Soofi-Team, Benedikt Droste, David Fitzek, Ruben Härle, Lukas Helff,... 2026-07-13
Mixture-of-Experts 多语言模型 开源模型 德语模型 混合架构
✅ 已总结
详情 →