VR有哪些交互技术？

VR 摄像头起到环境感知、动作捕捉、透视、眼球追踪等多重作用。随着 VR/AR 设备带来的三维 视觉体验越来越受到重视，眼球追踪、inside-out 定位等交互技术在消费级 VR 产品中应用更加广 泛，VR/AR 产品中摄像头的数量也会相应增加。根据 Omdia 预测，outside-in 的 VR 架构将被nside-out 架构取代，VR 依靠自带的摄像头和传感器即可完成空间定位和人机交互，全彩透视的 渗透率会进一步提高，眼球追踪将成为 VR 设备的标配功能。另外，VR 还需要捕捉从肢体到脸部、 唇部等细节部位的动作以满足社交应用需求。在这些趋势的影响下，Omdia 预测未来消费级 VR 头显至少会配备 6 个不同种类的摄像头，其中包括 2 个定位摄像头、2 个眼球追踪摄像头、1 个 ToF 摄像头和 1 个 RGB 摄像头，分别用来完成 inside-out tracking 设备自身的定位、眼球追踪、 手势追踪，以及实现 see through 等功能。

1) 眼球追踪为 VR/AR 带来独特价值

眼球追踪技术开启 C 端产品应用。在最近一年预计将要发布的新 VR/AR 产品中，不少都具备了 眼动追踪这一交互功能，眼动追踪在索尼、Meta 等厂商的下一代消费级产品上的运用是其在消费 端 VR 产品普及的关键信号。目前最常见的眼动追踪技术是以 Tobii 为代表的技术提供商所采用的 瞳孔角膜反射法。该方案主要由眼动摄像机、光源和算法共同完成。光源发射红外光在眼角膜反 射形成闪烁点，眼动摄像机捕捉眼睛的高分辨率图像，再经由算法解析，实时定位闪烁点与瞳孔 的位置，最后借助模型估算出用户的视线方向和落点。眼动追踪技术在 VR/AR 产品上的运用能够 带来优化算力资源分配、提高社交体验、协助用户行为分析等独特价值。

2) Inside-out 定位技术渐成主流

从目前市场上的 VR 头显来看，Inside-out 已经成为主流的追踪方案。区别于需要事先放置定位点 设备的 Outside-in 方案，Inside-out 不需要外置定位基站，而是通过头显内部的多个摄像头，采集 环境中的特征点进行匹配，并通过算法实现定位。目前采用此定位方法的头显多会装备 2-6 个用 于空间定位的摄像头。

3) See-Through 技术带来虚实结合体验

VR 为用户提供了一个完全密闭的虚拟空间，而 See-Through 技术则打破了这一限制，让用户在 不摘除 VR 头显的情况下也可以看到周围现实世界的情况，甚至与外部进行交互，从而使 VR 设备 具备一定 MR 及 AR 功能。See-Through 又分为光学透视（OST）和视频透视（VST），其中 VR 设备选择较多的 VST 是一种通过相机采集周围环境的实时图像并通过屏幕进行显示的技术，因此 需要摄像头的支持。