摘要
现有“图像思维”研究多依赖生成式方法,存在工具协议复杂或训练成本高的问题。本文提出 ReVisIT,一种免训练框架,通过将检索到的图像 - 标签对视为视觉思维单元,实现动态视觉推理。该方法结合结构化类定义、多模态检索及交替注入机制,在多个基准测试中显著提升了不同规模模型的推理性能,证明了检索质量是性能提升的关键来源,并发布了新的 MAAC-Bench 基准。
AI 推荐理由
论文提出通过检索图像作为视觉思维单元,直接增强多模态模型的上下文推理能力,核心聚焦于推理机制。
研究机构
Meituan
论文信息