三维全景地图-故宫地图3d全景地图

自1967年卫星导航技术开放民用以来，经过50多年发展，导航定位已广泛应用于交通物流、地理信息、高精度测量等多种行业中，提升了现代社会的运营效率，也为个人生活和出行都带来巨大便利。

不过，尽管导航定位技术在室外场景中已非常普及，室内导航应用却一直未取得很好发展。

一方面由于卫星信号的衰减，卫星导航定位在室内几乎毫无用武之地。

另一方面，尽管基于蓝牙信标定位、Wi-Fi信号等专用设备的解决方案在一定程度上可以辅助室内导航定位，但却部署和维护成本高昂，不具备大规模推广的条件。

那么，有没有一种易实现、低成本、易扩展的室内导航解决思路？

以更低成本、更易普及的AI视觉技术为核心，商汤科技SenseMARS火星混合现实平台，能以高效低成本的方式实现室内外精准定位和AR导航。

▎基于视觉高精定位的AR导航

室内导航的难点在哪里？

展览馆、博物馆、商场、交通枢纽等大型室内场景环境复杂，规模巨大，并存在很多无纹理空间区域和视觉歧义区域三维全景地图，地图数据的采集、制作及表达是一大难点。

同时，伴随光照、视点变化，用户如何精准快速地实现重定位也是一项挑战。

无纹理空间区域和视觉歧义区域

商汤SenseMARS火星混合现实平台由浙江大学-商汤科技三维视觉联合实验室与商汤产品团队联合打造，具备专业级高精度三维数字化地图构建、跨平台和终端的空间感知计算、全场域厘米级的端云协同定位等空间定位和构建能力，并可支持Android/iOS/Web/小程序等系统平台，以及手机、平板电脑、AR/MR眼镜等多种终端设备，从而实现室内、室外等不同场景的AR/MR特效、导航和导览等功能。

对于定位导航应用来说，首先需要构建高精度三维数字化地图（具体又可以分为稀疏点云地图构建和稠密三维几何构建），然后基于视觉重定位和SLAM技术可以实现连续的精准跟踪定位。

让机器看懂场景和环境

稀疏点云地图构建采用运动恢复结构（Structure from Motion，简称SfM）技术。

利用离线采集的视频或图片提取场景中的视觉特征，恢复图片的相机位姿和场景的稀疏三维点云，视觉特征和三维点云主要用于视觉重定位，而相机位姿可用来做进一步的稠密三维几何构建。

稀疏点云地图

稠密三维点云

以采集的视频或图片以及SfM恢复的相机位姿为输入，经过稠密深度估计、深度融合、网格构建和纹理贴图，最终输出场景的精细化稠密点云和带纹理的三维网格模型三维全景地图，这就是稠密三维几何构建。

得益于商汤在原创技术研发上的产学研优势，浙江大学-商汤三维视觉联合实验室研究团队经过两年多时间的技术攻关和打磨，提出基于单目/多目/全景相机、惯性测量单元、GPS等多源数据的采集方案和多源数据融合建图算法，实现了高效稳定的地图数据采集、重建和更新。

2万平米场景一般可在1小时内完成数据采集，6个小时左右完成三维重建和纹理贴图（单节点服务器上），重建精度可达厘米级。

稠密三维几何

重建的高精度三维网格可以用来正确处理虚拟物体和真实场景的遮挡以及碰撞关系，实现具有高度真实感的增强现实效果。