当前位置: X-MOL 学术arXiv.cs.RO › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
自我监督的几何感知
arXiv - CS - Robotics Pub Date : 2021-03-04 , DOI: arxiv-2103.03114
Heng Yang, Wei Dong, Luca Carlone, Vladlen Koltun

我们提出了自我监督的几何感知(SGP),这是第一个通用的框架,用于学习无需任何真实的几何模型标签(例如,相机姿势,刚性变换)进行对应匹配的特征描述符。我们的第一个贡献是将几何感知公式化为一个优化问题,可以在给定大量视觉测量(例如图像,点云)的情况下共同优化特征描述符和几何模型。在这种优化公式下,我们显示了视觉方面的两个重要研究流,即稳健的模型拟合和深度特征学习,对应于优化一个未知变量块,同时固定另一个块。这种分析自然导致了我们的第二个贡献-SGP算法执行交替最小化以解决联合优化。SGP迭代执行两个元算法:一位老师根据给定的学习特征进行健壮的模型拟合,以生成几何伪标签;另一名学生在嘈杂的伪标签监督下进行深度特征学习。作为第三贡献,我们将SGP应用于大规模真实数据集上的两个感知问题,即MegaDepth上的相对相机姿态估计和3DMatch上的点云配准。我们证明SGP达到了与使用地面真相标签训练的受监督甲骨文相同或更高的最新性能。我们将SGP应用于大规模真实数据集上的两个感知问题,即MegaDepth上的相对相机姿态估计和3DMatch上的点云配准。我们证明SGP达到了与使用地面真相标签训练的受监督甲骨文相同或更高的最新性能。我们将SGP应用于大规模真实数据集上的两个感知问题,即MegaDepth上的相对相机姿态估计和3DMatch上的点云配准。我们证明SGP达到了与使用地面真相标签训练的受监督甲骨文相同或更高的最新性能。



"点击查看英文标题和摘要"

更新日期:2021-03-05
down
wechat
bug