小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦( 二 )


得益于商汤在原创技术研发上的产学研优势 , 浙江大学-商汤三维视觉联合实验室研究团队经过两年多时间的技术攻关和打磨 , 提出基于单目/多目/全景相机、惯性测量单元、GPS等多源数据的采集方案和多源数据融合建图算法 , 实现了高效稳定的地图数据采集、重建和更新 。
2万平米场景一般可在1小时内完成数据采集 , 6个小时左右完成三维重建和纹理贴图(单节点服务器上) , 重建精度可达厘米级 。
小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦
文章图片

文章图片

稠密三维几何
重建的高精度三维网格可以用来正确处理虚拟物体和真实场景的遮挡以及碰撞关系 , 实现具有高度真实感的增强现实效果 。
大规模3D地图重建 , SenseMARS生成的
50万平方米杭州钱江世纪城园区地图
小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦
文章图片

文章图片

高精度三维数字化模型和纹理贴图 , SenseMARS生成的变压器三维模型
让机器输出准确匹配场景
有了地图数据之后 , 用户如何透过终端将导航指示箭头等虚拟内容无缝融合在现实场景中?
关键就在于实时、准确地获取用户的相机位姿 , 由视觉重定位和SLAM一起来实现 。
视觉重定位以用户拍摄图像为输入 , 将图像中的特征与地图数据中的特征进行匹配 , 获取图像特征点和地图三维点的2D-3D对应关系 , 并计算图像相机位姿 , 在SLAM过程中帮助进行累积误差的矫正 。
SenseMARS视觉定位技术在商超、展馆等典型室内场景成功率高于95% , 结合SLAM 技术实现连续稳定的位姿跟踪 , 同时拓展地图未覆盖到的区域 。
SLAM技术利用相机、IMU等常见的传感器信息可以实时计算出当前设备的6DoF位姿 , 保证图像上AR效果与真实环境的一致性、稳定性及贴合性 。
再借助离线高精度地图和高精定位结果 , 就可以保证在大尺度场景下长时间的高精定位和跟踪 。
此外 , 针对目前APP方案比较重且SLAM算法的机型覆盖率不足的问题 , 商汤同时提供了轻量级的Web SLAM能力 , 能够在H5和小程序中实时运行 。
用户无需安装App只需简单扫描二维码 , 即可体验完整的室内外定位和AR导航导览能力 。
小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦
文章图片

文章图片

▎内容增强 , 让导航更直观和有趣味
基于以上这些技术 , 商汤SenseMARS平台可以支撑多种实际复杂场景中的高精度增强/混合现实需求 。
在GPS信号难以覆盖的区域 , 让用户可通过图像或视频实时准确地获取自身位置 。
小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦
文章图片

文章图片

【小程序|精度厘米级,高效低成本的室内外精准定位和AR导航来啦】结合商汤SLAM技术还能以增强/混合现实的方式获取场景的额外信息如导航、导览、商家介绍等基于位置的内容增强 , 切身感受AR与生活场景的巧妙融合 。


推荐阅读