苹果将开发高效率VR转码格式

今天美国专利及商标局公布了一份名为“Projection Format in Multi-Directional Video(多向视频的投影格式)”的苹果专利。这项发明涉及用于多向成像系统的编码/解码系统,尤其是将最初为平面图像开发的编码技术用于多向图像数据。这项发明有可能最终出现在与混合现实图像相关的开发工具之中。

 

在多向成像中,二维图像表示从多个视场拍摄的图像内容。全向成像属于一种多向成像,其中单个图像表示从所有方向上的视点所看到的内容,360度水平和360度垂直。其他多向图像可能是在非完整360度的视场中捕捉数据。

在编码多向图像时,现代编码协议往往效率低下。多向图像多是以基本固定的方式来将图像分配给不同的视场。例如,大多数多向成像格式都是均等地将图像分配给不同的视场。一些多向成像格式则以不固定的方式,并不均匀地将图像分配给视场。另外,许多消费多向成像的应用程序往往在渲染期间仅使用多向图像的一部分,从而造成资源浪费。

 

显然,苹果意识到有必要改进编码系统以提高多向图像数据的效率。

 

毫无疑问,这是一份针对未来编码工具的专利。苹果指出,他们的发明提供了用于实现多向视频结构配置,以及在它们之间进行切换的技术。源图像可分配给可能在编码会话期间发生改变的格式。当格式之间发生改变时,视频编码器和解码器可以将解码的参考帧从第一配置变换到第二配置。然后,系统可以将变换的参考帧作为预测源,并编码或解码第二配置中的新帧。通过这种方式,视频编码器和解码器就可以使用帧间编码技术并实现高效率的高效率。

 

简单来说,苹果的新发明是用于处理360度图像。更具体地说,“它可以在头显中呈现多向视频(如虚拟现实应用),或者它可以存储多向视频供以后使用。”

 

苹果专利20190004414最初是于2017年6月提交申请。由于这只是一份专利,无法确定相关发明将于何时与大家见面。