通过训练时区域蒸馏取代推理时工具缩放,实现单次前向传播的细粒度视觉感知。
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
通过分层合成数据框架为推荐LLM建立首个幂律缩放定律
首个百万级全合成隐私数据集,4B模型超越GPT-5
用1800万模板将预训练文档转为指令-答案对,提升LLM预训练效率
提出代码驱动的科学图像生成框架ImgCoder和评测基准SciGenBench,揭示精度-表现力权衡
K-means聚类构建多样化子表+LLM生成查询+对比微调提升表格检索
24B参数模型通过合成数据训练生成带内联引用的可验证长文档摘要
Upstage 102B 韩英双语 MoE 模型,合成数据+SnapPO 突破低资源瓶颈
用完全合成数据训练7B代码模型,在竞赛编程基准上超越14B真实数据模型
升级方向估计模型,统一处理旋转对称性和相对旋转估计
首个端到端训练的开源文档问答智能体,通过探索-合成数据管道在长文档理解基准上超越人类表现