通过长度归一化消除GSPO的长度偏差,提升RLVR训练稳定性和性能
标签:
全部
强化学习
扩散模型
大语言模型
基准测试
视频生成
LLM智能体
世界模型
视觉语言模型
GRPO
多模态大模型
知识蒸馏
基准评测
具身智能
流匹配
机器人操作
多智能体系统
智能体
LLM Agent
可解释性
图像生成
代码生成
多模态学习
检索增强生成
注意力机制
RLVR
后训练
视频理解
机器人学习
长上下文
多模态
数学推理
图像编辑
VLA
数据合成
多模态大语言模型
推理加速
高效推理
评测基准
自监督学习
工具调用
对比学习
扩散语言模型
视觉-语言-动作模型
参数高效微调
Transformer
工具使用
LoRA
持续学习
LLM评估
自蒸馏
多模态推理
RAG
模仿学习
综述
LLM推理
信息检索
信用分配
在线策略蒸馏
模型压缩
合成数据
提出可动态切换文本/视觉/交错三种推理模式的混合自回归多模态推理模型
视频原生推理重排序器,两阶段训练实现31% nDCG@10提升
提出首个评估VLM自适应推理模式选择能力的基准,揭示准确率与模式选择能力解耦现象
用多格漫画作为图像和视频之间的中间推理媒介,兼顾时序结构与计算效率
构建1.8M高质量推理数据集,通过数据为中心策略显著提升VLM推理能力
通过强化学习训练多模态模型自适应选择和编排视觉工具,实现复杂推理任务的突破性性能。
视觉生成通过多模态世界模型实现类人推理
👍 25视觉生成作为世界模型在物理世界任务中显著优于纯语言推理
提出代码驱动的科学图像生成框架ImgCoder和评测基准SciGenBench,揭示精度-表现力权衡
智能体驱动的超长视频理解
👍 22提出EGAgent框架,通过实体场景图实现跨天超长视频的多跳推理问答
Think3D:用空间思考来实现空间推理
👍 47让VLM通过主动探索3D点云空间进行推理,而非被动接受2D图像
难度过滤是多模态推理数据策划的核心,多样性启发式无额外收益
统一多种多模态推理技能为生成范式,用SFT+RL实现
首个视频深度研究基准,要求模型结合视频线索与开放网络进行多跳推理
提出双路径框架ATLAS,通过集群路由和强化学习实现动态模型-工具协同编排。
首个音频地理定位基准AGL1K,评估16个音频语言模型的地理推理能力
通过对比感知损失增强VLM视觉推理能力的RL微调方法
将多模态推理重新定义为图像到图像生成任务,在长时程视觉推理任务上显著超越SOTA MLLMs,实现了高效、可控、并行且可协作的推理范式
提出FIGR方法,将可执行的图表构建集成到多轮推理中,通过强化学习学习何时以及如何外化中间结构作为视觉状态。