多模态推理 具身智能 3D 空间理解 自适应路由
摘要

在 3D 环境中,具身智能体需结合自然语言、RGB 图像、点云等多模态数据进行空间推理以回答问题。现有视觉 - 语言模型通常仅针对单一模态微调,忽视了问题语义对特定模态的偏好。为此,本文提出 MASER 框架,训练五个共享主干的模态适配器,并学习神经路由策略,根据问题动态选择最佳适配器。实验表明,没有单一模态 universally 最优,MASER 的路由准确率显著优于基线方法。

AI 推荐理由

论文聚焦具身智能体在 3D 环境中的空间推理,通过多模态自适应路由优化推理效果。

研究机构
Boston University
论文信息
作者 Hilton Raj, Vishnuram AV
发布日期 2026-06-01
arXiv ID 2606.02463
相关性评分 8/10 (高度相关)