autonomous driving world model discrete tokenizer planning geometry-aware
摘要

离散视觉 Token 应为基于 Token 的自动驾驶世界建模与规划提供紧凑表示。然而,现有 Tokenizer 多继承自图像生成,侧重像素重建,难以满足驾驶决策需求。本文提出一种表示引导且几何增强的 Tokenizer,在联合监督下学习离散 Token。该方法通过特征解码将离散瓶颈与冻结的 DINO 特征空间对齐,同时利用感知与对抗损失保留外观信息。此外,引入相邻帧深度与相对位姿监督以注入几何状态线索,并通过多码本量化稳定联合目标。实验表明,该方法在重建 fidelity、表示一致性及规划性能上均表现优异。

AI 推荐理由

论文提出面向自动驾驶规划的离散 Tokenizer,直接服务于世界模型与规划任务,是核心组件。

研究机构
北京大学 小米汽车
论文信息
作者 Ziyang Yao, Zeyu Zhu, YunCheng Jiang, Zibin Guo, Huijing Zhao
发布日期 2026-06-01
arXiv ID 2606.01935
相关性评分 8/10 (高度相关)