《将单目无人机 6 自由度定位锚定在视觉-几何-语义地图先验上》-arXiv-2026
论文题目英文题目AeroMap3D: Anchoring Monocular UAV 6-DoF Localization to Visual-Geometric-Semantic Map Priors中文题目AeroMap3D将单目无人机 6 自由度定位锚定在视觉-几何-语义地图先验上1. 论文采用方法与解决问题解决问题跨视图差异解决无人机图像与北向卫星地图之间因高度、视场角和航向导致的严重尺度和偏航角Scale/Yaw不匹配问题。结构不一致性解决公开的数字高程模型DEM仅包含地形高度而忽略建筑高度导致在城市建筑区域进行 2D-3D 提升Lifting时产生几何偏差的问题。部署限制旨在摆脱对特定区域 3D 重建、人工标注或预渲染数据库的依赖利用公开可得的地图数据实现快速部署。采用方法提出了AeroMap3D框架。该系统引入了一个轻量级适配器用于校正尺度和偏航并利用OpenStreetMap (OSM)语义信息过滤掉不可靠的建筑区域匹配点最后通过RANSAC-PnP和延迟状态扩展卡尔曼滤波EKF实现连续的6自由度定位。2. 数据集情况 (UAV-Terra3D)规模与范围包含20条轨迹总长55公里的真实世界连续无人机飞行视频覆盖面积达22.4 平方公里。采集细节在德克萨斯州奥斯汀的8个地点采集使用大疆 Air 2S 无人机配备校准过的云台相机。地图层构成数据集集成了对齐的视觉层NAIP 卫星影像、几何层USGS 1米分辨率 bare-earth DEM和语义层OSM 建筑轮廓。特点提供了比以往数据集更广泛的 3D 覆盖范围和连续的轨迹样本专门用于评估地图锚定的6-DoF 定位能力。3. 主要技术路线1总体概括框架从粗略初始化开始通过尺度-偏航适配器归一化图像利用冻结的密集匹配器建立对应关系通过OSM 语义过滤剔除偏差点结合DEM 提升构建 2D-3D 约束最后由PnP 求解器和EKF 融合输出连续位姿。2分项介绍轻量级适配器 (Scale-Yaw Adapter)输入单目无人机图像与北向卫星图切片。流程采用轻量级 Siamese CNNMobileNetV3-Small提取特征并回归尺度比例和偏航偏移在匹配前对切片进行预校正。输出预测的尺度 \(\hat{s}_t\) 和偏航角 \(\hat{\theta}_t\)。技术优势无需微调即可让现有的密集匹配器如 RoMa处理跨视图配准将配准成功率从 62.4% 提升至 99.2%且仅增加 35ms 延迟。语义过滤与 2D-3D 提升 (Semantic Filtering Lifting)输入2D-2D 匹配点对、OSM 建筑物掩码。流程根据 OSM 建筑轮廓剔除落在建筑上方的匹配点仅保留地形表面的匹配点并结合 DEM 获取这些点的海拔高度。输出地形支撑的 2D-3D 对应关系。技术优势排除了因 DEM 缺乏建筑高度导致的结构性偏差显著提高几何一致性。PnP 求解与 EKF 融合输入2D-3D对应关系、相对运动先验如视觉里程计/IMU。流程使用RANSAC-PnP估算全局相机位姿随后通过延迟状态EKF将视觉观测与运动先验融合。输出在WGS84坐标系下的精确6-DoF位姿及连续轨迹。技术优势实现了漂移受限的长距离连续轨迹估计。3损失函数对齐损失 (Align Loss, \(L_{align}\))用于训练适配器。公式\(L_{align} | \log \hat{s}_t - \log s^*_t | \beta (1 - \cos(\hat{\theta}_t - \theta^*_t))\)。描述该损失函数最小化预测值与合成监督目标\(s^*_t, \theta^*_t\)之间的对数尺度差异和余弦偏航差异其中 \(\beta\) 平衡尺度和偏航项。4. 实验结果概括1评价指标成功率 (Success %)3D 定位误差在 50 米以内的帧所占比例。平均 3D 误差 (Mean 3D Error)预测位置与真值之间的欧氏距离平均值。马氏门限 (Mahalanobis Gating)\(\gamma_k r_k^\top S_k^{-1} r_k\)用于 EKF 判定并拒绝错误的视觉定位更新。2评测结果单帧定位对比AeroMap3D 实现了95.69%的成功率和14.11米的平均误差远优于基于 DINOv2的检索方法成功率16.47%和未进行语义过滤的PnP方法成功率88.24%。轨迹估计结果在 55 公里的总飞行路径中AeroMap3D 实现了100%的轨迹成功率平均 3D误差仅为5.88米。对比结论相比于GeoVINS风格的检索方法AeroMap3D的平均误差降低了约65.8%有效解决了长航程下的轨迹漂移问题。