苹果新专利：360°视频通过分区渲染和缓冲，可优化 VR 视

近日，美国专利商标局公布了苹果一项专利申请，该专利申请涉及在头显中串流 360° 沉浸视频的优化方案。

苹果在其专利背景中指出，一般来说，计算机系统可以生成沉浸式视频内容。例如，沉浸式视频内容包括可以根据一系列观看方向和/或观看位置呈现的视觉数据。沉浸式视频内容可以分区渲染和缓冲，然后有选择地呈现给用户，以给用户一种感觉，即她正在根据特定的视野和/或观看视角查看视觉数据。

在某些实现中，沉浸式视频内容可以使用可穿戴显示设备（例如?VR 或?AR 头显）以 3D 方式呈现给用户。此外，沉浸式视频内容的不同部分可以呈现给用户，这取决于用户身体和/或用户输入的位置和方向，从而设置视图缓冲区，让每一帧图像可以更流畅的衔接。

苹果专利图 7 是流式传输沉浸式视频内容以使用多个通信链路向用户演示的示例系统图；图 2A? 是用于呈现沉浸式视频内容的示例视口图；图 2B 是用户身体运动自由度的示例图。

更具体地说，如苹果专利图 2A 所示，沉浸式视频内容 #200 可以包括可视数据，其可以根据一系列观看方向和/或相对于用户 #102 的观看位置来呈现（在图 2A 中表示为围绕用户的球体）。

可以选择视口 #202 以向用户呈现部分沉浸式视频内容（基于用户头部的位置和/或方向），给用户一种感觉，即她正在根据特定的视野和/或观看视角查看视觉数据。此外，视口可以根据用户的移动不断更新，给用户一种他们在视觉环境中转移视线的感觉。

图中标注的传感器可以检测用户沿这些轴中的一个或多个平移头部和/或围绕这些轴中的一个或多个旋转头部。

作为另一个示例，传感器可以检测用户何时绕 x 轴旋转头部，有时称为“滚动”运动。作为另一个例子，传感器可以检测用户何时绕 y 轴旋转头部，有时称为“俯仰”运动。

作为另一个例子，传感器可以检测用户何时绕 z 轴旋转头部，有时称为“偏航”运动。