Visual Reasoning VLM Fine-grained Action Understanding Self-guided Robotics
摘要

针对机器人在日常环境中理解细粒度人类动作的难题,现有方法在信息丰富度与事实准确性间存在权衡。本文提出“黄金点位狙击手”(GPS)框架,赋予轻量级视觉语言模型自引导多模态推理能力。该框架包含黄金点位提取器、选择性苏格拉底式提问者和语义蕴含评估器三个模块,分别负责识别关键细节、通过自我提问验证 refine 细节以及量化评估事实一致性。实验表明,GPS 显著提升了模型性能,部分达到 GPT-4o 水平且事实准确性更优,为家庭机器人安全交互奠定基础。

AI 推荐理由

论文提出自引导多模态推理框架,核心在于通过自我提问和语义评估提升细粒度推理能力。

研究机构
中国科学院自动化研究所
论文信息
作者 Haodi Liu, Xinhang Yang, Kunda Yan, Sen Cui, Zeyu Zhang et al.
发布日期 2026-06-21
arXiv ID 2606.22409
相关性评分 9/10 (高度相关)