AR空间计算能力平台包含哪些？核心功能有哪些？

AR 空间计算能力平台包含移动端 SDK、数据采集工具、算法组件、管理平台。

1.总体框架

前端展示层：平台提供的 SDK 将可以使开发者将 AR 开发内容部署至移动端，PC 端，眼镜端进行展示。

开发工具层：支持开发者进行 AR 内容开发的工具：Unity 负责主要交互逻辑开发， 空间建图采集工具负责将大场景空间数据通过视觉传感技术进行采集，空间标注上传 工具负责将空间数据上传至后端进行分析，验证工具负责空间数据特征比对结果的验 证，Web 管理后台负责管理用户的资源和权限。

SDK 层：主要为 Unity SDK，其中包括大空间特征识别、空间标注、平面图像识别、 模型识别、可用性检查等 API。

算法组件层：负责平台的算法部分，视觉特征点提取、空间定位算法负责计算大 空间下的定位，平面图像识别算法负责视觉分析识别设备摄像头中特定的图像，模型 识别算法负责视觉分析识别设备摄像头中特定的三维物体。

云服务：支撑通用的用户及授权管理，同时围绕 AR 空间计算能力平台的功能， 管理视频、图片等素材，及算法组件生成的空间地图数据，点云特征库，提供云定位 服务。

数据存储层：MySQL 用于支撑管理平台的数据存储；分布式文件存储系统要存储 视频和图片素材，以及算法组件生成的空间地图数据文件。Redis 缓存库和 ES 搜索库 按需使用。

2.核心功能 

采集设备支持

支持多种数据采集技术和硬件设备，如手机、单反、鱼眼、相机阵列、激光雷达、 RGBD 扫描仪等，可以轻松上手。

 稀疏空间建图

稀疏空间地图建图通过扫描环境并构建三维环境点云，每一个三维点都记录周围 的局部视觉信息，定位过程通过将当前相机图像和地图的三维点进行视觉匹配并尝试 计算对应位姿来恢复相应的位姿。

稠密空间建图

稠密空间建图利用相机图像对周围环境进行三维稠密重建，得到稠密的点云地图。 利用稠密空间地图可以让虚拟内容创作者标注虚拟物体时可以在更真实环境之中操 作，用以实现真实物体和虚拟物体正确标注、遮挡、碰撞等 AR 应用。

大场景空间建图与定位

在大场景下取景界面内的现实特征点，根据特征点将虚拟物件准确定位到现实物 件中，大场景的概念定为 2000 平方米以上的现实场景。用户在调用接口后会先验证 权限是否足够，权限通过后调用云端特征点对比算法，算法返回特征点识别结果以及 特征点位置数据，用户根据特征点位置数据加入自己的 AR 内容。

平面图像识别

对现实中的平面图像进行实时识别与跟踪，支持同时识别多个平面目标，调用接 口后会返回图像识别特征点的位置数据，用户根据特征点位置数据加入自己的 AR 内 容。

 3D 运动跟踪

运用三维空间物体检测与识别系统，能够精确地估计出物体的 6D 姿态，并实时 稳定的跟踪，应用于 AR 场景中。该功能可用于日常生活、工业环境、博物馆等场景 下将丰富纹理或弱纹理的 3D 物体信息进行增强展示。

空间标注

开发者通过视觉分析得到预处理的点云模型后，在点云模型上进行特征点标注， 以及标记特征点所关联的 AR 内容。在用户使用大空间特征识别接口时会返回特征点 信息，再根据此信息展现所关联的 AR 内容。

 对外服务

Unity SDK Unity 游戏引擎专用的开发工具包，它是基于真实地图数据建立的统一应用程序的 工具集合，帮助 Unity-AR 开发人员在开发中轻松添加需要 AR 技术支持的应用场景。 如大空间特征识别、空间标注、平面图像识别、模型识别等。基于 Unity 开发，可以 极大降低了 Unity 开发者的接入成本。

SDK 初始化完成后，开发者用户调用 API:GetIamgeMap，请求服务端得到最新的图 库信息，通过 HTTP 接口请求得到数据，参数 token 为 SDK 初始化完成时返回的临时 变量，用于验证用户权限；返回参数主要为图库信息列表 json；

未下载的图片会下载到 PersistentDataPath 文件夹内，此文件夹用于兼容 PC、 Android、IOS 平台的存储管理机制。将所有图片下载完毕后，根据不同平台将图片动 态 添 加 到 算 法 组 件 中 ， 调 用 算 法 组 件 进 行 运 算 ， 得 到 识 别 结 果 会 回 调 TrackingStateChange 事件，返回给用户识别结果以及点位。