通过透明高效的训练流程,用不到500万科学样本构建竞争性的科学多模态大模型
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
提出评估AI理解音视频模因能力的基准,揭示当前模型在文化理解和无文本音频上的不足
单遍处理60分钟音频,统一ASR/说话人分离/时间戳的端到端框架
首个覆盖感知/推理/预测/决策四维度的多模态时间序列推理基准,评测30+主流模型
Qwen系列首个TTS模型,双轨架构实现97ms超低延迟流式语音合成,支持10语言500万小时训练
首个端到端多模态深度研究基准,评估智能体的图文证据整合与报告生成能力
1B参数VLM在OCR基准上超越9B模型,支持图像定位与高效推理
首个可复现Suno级别商业系统的开源音乐基础模型家族,支持长达6分钟的可控歌曲生成
Mistral 3B/8B/14B 模型,级联蒸馏实现高效训练
首个用强化学习优化文本到可视化生成的框架,通过多目标奖励提升图表质量
通过正交几何基统一运动码本与LLM嵌入空间
真实用户的模糊查询导致VLM准确率不足50%,显式化查询可提升8-22分
用动态窗口对齐学习将视觉推理压缩到潜在空间,97%省token
揭示链式思考推理在细粒度视觉分类中的'思考代价'现象,提出ReFine-RFT框架实现最优性能
首个大规模非洲语言多模态文化QA基准,涵盖15种语言和文本语音双模态
科学AI评估工具包,覆盖七大核心能力
首个RL框架实现文本指导物体平移、旋转、缩放