摘要
针对铰接式 3D 物体数据集匮乏的瓶颈,本文提出利用大语言模型(LLM)规模化生成此类资产。我们将生成任务转化为程序编写问题,并引入名为 Articraft 的新型代理系统自动完成该过程。该系统设计了专用编程接口与环境,引导 LLM 调用领域特定 SDK 来定义部件、组合几何体、指定关节并编写验证测试。通过提供受限工作空间及结构化反馈机制,使 LLM 免受底层细节干扰。实验表明,该方法生成的资产质量优于现有最先进生成器及通用编码代理,并构建了包含超 1 万个资产的数据集 Articraft-10K,展示了其在机器人仿真等下游应用中的价值。
AI 推荐理由
论文核心是构建 Agentic 系统,利用 LLM 调用专用 SDK 和编写代码生成资产,属于典型的工具使用与技能执行。
研究机构
University of Cambridge
University of Oxford
Nanyang Technological University
论文信息