摘要
通用多模态检索需统一嵌入模型以解释多样用户意图。现有方法将多模态大语言模型局限于静态编码器,难以应对需逻辑推导的复杂意图。本文提出 TRACE,融合生成式推理与判别式表示学习:先生成结构化思维链显式推理查询,再将其压缩为紧凑嵌入。通过构建 M-BEIR-CoT 数据集训练,该模型在复杂查询上自动激活推理,简单查询则跳过,平衡了精度与效率,并在零-shot 迁移中表现卓越。
AI 推荐理由
论文核心提出基于思维链的推理机制,显式处理复杂查询逻辑,是提升检索性能的关键。
研究机构
中国科学院自动化研究所
中国科学院大学
论文信息