CN107318008A - 全景视频播放方法及播放装置 - Google Patents

Abstract

本发明提供一种全景视频播放方法，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放，其包括：获取多个不同拍摄角度的局部画面；获取用户的视频观看角度；根据视频观看角度，获取对应的局部画面；以及使用局部画面进行视频播放操作。本发明还提供一种全景视频播放装置，本发明的全景视频播放方法及全景视频播放装置不需要对局部画面进行拼接，从而可以节省拼接操作的资源；同时也不需要对3D全景画面进行局部画面的提取，因此提高了3D全景画面的传输效率、节省了3D全景画面的局部画面提取资源以及存储资源。

Description

全景视频播放方法及播放装置

技术领域

本发明涉及图像处理技术领域，特别是涉及一种全景视频播放方法及播放装置。

背景技术

随着虚拟现实(Virtual Reality)与增强现实(Augmented Reality)技术的发展，各种各样虚拟现实应用被开发出来，如3D全景影片播放、3D全景游戏体验以及3D全景画面现场直播等。

现有的3D全景画面基本都是通过全景摄像机在一固定点使用多个不同摄像角度的全景摄像头进行360度全景拍摄形成。3D全景影片制作商获取每个全景摄像头的局部画面后，需要进行局部画面的拼接以及拼接后画面的编码，以获取最终的3D全景画面供用户进行播放。

其中视频画面的拼接是指将相邻全景摄像头拍摄的两个局部画面合成为一个角度更大的局部画面，合成后的局部画面包括上述两个全景摄像头拍摄的局部画面的全部内容，这样将所有相邻的局部画面相互进行拼接，最终形成一360度无死角的3D全景画面。视频画面的编码即对上述拼接后的3D全景画面进行编码压缩，便于传输以及存储。

随着3D全景视频采集时的全景摄像头数量的逐渐增加，上述视频画面的拼接计算量越来越大，拼接消耗的时间以及资源越来越多；同时拼接后的3D全景画面可能由于体积太大也不利于传输以及存储。

故，有必要提供一种全景视频播放方法及播放装置，以解决现有技术所存在的问题。

发明内容

本发明实施例提供一种不需要对局部画面进行拼接，从而可以节约拼接操作的资源，以及提高3D全景画面的传输效率的全景视频播放方法及播放装置；以解决现有的全景视频播放方法及播放装置中视频画面的拼接计算量较大、接消耗的时间以及资源越来越多、以及拼接后的3D全景画面不利于传输以及存储的技术问题。

本发明实施例提供一种全景视频播放方法，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其包括：

获取多个不同拍摄角度的局部画面，其中每个所述局部画面由至少一所述全景摄像头拍摄形成；

获取用户的视频观看角度；

根据所述视频观看角度，获取对应的局部画面；以及

使用所述局部画面进行视频播放操作。

在本发明所述的全景视频播放方法中，所述全景视频播放方法还包括：

将所述视频观看角度按所述局部画面的拍摄角度进行分类，每一类所述视频观看角度对应一所述局部画面；

所述根据所述视频观看角度，获取对应的局部画面的步骤包括：

判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值；

如大于等于所述设定值，则获取所述当前视频观看角度对应的局部画面；以及

如小于所述设定值，则获取所述前一类别的视频观看角度对应的局部画面。

在本发明所述的全景视频播放方法中，所述全景视频播放方法还包括：

根据相邻的局部画面，生成相应的边界补偿画面；

所述根据所述视频观看角度，获取对应的局部画面的步骤具体为：

根据所述视频观看角度，获取对应的局部画面以及所述局部画面对应的边界补偿画面；

所述使用所述局部画面进行视频播放操作的步骤具体为：

使用所述局部画面以及所述局部画面对应的边界补偿画面进行视频播放操作。

在本发明所述的全景视频播放方法中，所述边界补偿画面设置在相应的局部画面的四周。

在本发明所述的全景视频播放方法中，所述根据相邻的3D局部画面，生成相应的边界补偿画面的步骤包括：

获取相邻的第一局部画面和第二局部画面；

根据第一局部画面和第二局部画面，生成相应的平面单应矩阵；其中所述平面单应矩阵用于对所述第一局部画面中的像素坐标和所述第二局部画面的像素坐标进行转换；

使用所述平面单应矩阵，将所述第二局部画面中的像素转换为所述第一局部画面对应的边界补偿画面的像素。

本发明实施例还提供一种全景视频播放方法，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其中所述局部画面包括左眼3D局部画面以及右眼3D局部画面；所述全景视频播放方法包括：

获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个所述左眼3D局部画面和对应的右眼3D局部画面均由至少一所述全景摄像头拍摄形成；

获取用户的左眼视频观看角度和右眼视频观看角度；

根据所述左眼视频观看角度，获取对应的左眼3D局部画面；根据所述右眼视频观看角度，获取对应的右眼3D局部画面；以及

使用所述左眼3D局部画面和所述右眼3D局部画面进行视频播放操作。

本发明实施例还提供一种全景视频播放装置，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其包括：

局部画面拍摄模块，用于获取多个不同拍摄角度的局部画面，其中每个所述局部画面由至少一所述全景摄像头拍摄形成；

观看角度获取模块，用于获取用户的视频观看角度；

局部画面获取模块，用于根据所述视频观看角度，获取对应的局部画面；以及

视频播放模块，用于使用所述局部画面进行视频播放操作。

在本发明所述的全景视频播放装置中，所述全景视频播放装置还包括：

分类模块，用于将所述视频观看角度按所述局部画面的拍摄角度进行分类，每一类所述视频观看角度对应一所述局部画面；

所述局部画面获取模块包括：

判断单元，用于判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值；

第一局部画面获取单元，用于如大于等于所述设定值，则获取所述当前视频观看角度对应的局部画面；以及

第二局部画面获取单元，用于如小于所述设定值，则获取所述前一类别的视频观看角度对应的局部画面。

在本发明所述的全景视频播放装置中，所述全景视频播放装置还包括：

边界补偿画面生成模块，用于根据相邻的局部画面，生成相应的边界补偿画面；

所述局部画面获取模块具体用于根据所述视频观看角度，获取对应的局部画面以及所述局部画面对应的边界补偿画面；

所述视频播放模块具体用于使用所述局部画面以及所述局部画面对应的边界补偿画面进行视频播放操作。

本发明实施例还提供一种全景视频播放装置，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其中所述局部画面包括左眼3D局部画面以及右眼3D局部画面；所述全景视频播放装置包括：

局部画面拍摄模块，用于获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个所述左眼3D局部画面和对应的右眼3D局部画面均由至少一所述全景摄像头拍摄形成；

观看角度获取模块，用于获取用户的左眼视频观看角度和右眼视频观看角度；

局部画面获取模块，用于根据所述左眼视频观看角度，获取对应的左眼3D局部画面；根据所述右眼视频观看角度，获取对应的右眼3D局部画面；以及

视频播放模块，用于使用所述左眼3D局部画面和所述右眼3D局部画面进行视频播放操作。

相对现有技术的全景视频播放方法及全景视频播放装置，本发明的全景视频播放方法及全景视频播放装置不需要对局部画面进行拼接，从而可以节省拼接操作的资源；同时也不需要对3D全景画面进行局部画面的提取，因此提高了3D全景画面的传输效率、节省了3D全景画面的局部画面提取资源以及存储资源；解决了现有的全景视频播放方法及播放装置中视频画面的拼接计算量较大、接消耗的时间以及资源越来越多、以及拼接后的3D全景画面不利于传输以及存储的技术问题。

附图说明

图1为本发明的全景视频播放方法的第一优选实施例的流程图；

图2为本发明的全景视频播放方法的第二优选实施例的流程图；

图3为本发明的全景视频播放方法的第二优选实施例的视频观看角度设置示意图；

图4为本发明的全景视频播放方法的第三优选实施例的流程图；

图5为本发明的全景视频播放方法的第四优选实施例的流程图；

图6为本发明的全景视频播放装置的第一优选实施例的结构示意图；

图7为本发明的全景视频播放装置的第二优选实施例的结构示意图；

图8为本发明的全景视频播放装置的第二优选实施例的局部画面获取模块的结构示意图；

图9为本发明的全景视频播放装置的第三优选实施例的结构示意图；

图10为本发明的全景视频播放装置的第四优选实施例的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的全景视频播放方法和全景视频播放装置可用于对全景摄像机的全景摄像头拍摄的局部画面进行播放，其包括各种可用于进行视频播放的电子设备，优选为供个人使用的3D全景播放移动终端。由于播放过程不需要对局部画面进行拼接处理，可以较好的节约电子设备进行拼接操作的资源。同时由于不需要将拼接后的3D全景画面传输至电子设备，因此提高了电子设备的3D全景画面的传输效率以及存储效率。

请参照图1，图1为本发明的全景视频播放方法的第一优选实施例的流程图。本优选实施例的全景视频播放方法可使用上述的电子设备进行实施，该全景视频播放方法包括：

步骤S101，获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；

步骤S102，获取用户的视频观看角度；

步骤S103，根据视频观看角度，获取对应的局部画面；

步骤S104，使用局部画面进行视频播放操作。

下面详细说明本优选实施例的全景视频播放方法的各步骤的具体流程。

在步骤S101中，电子设备从全景摄像机的各个全景摄像头拍摄的局部画面，由于全景摄像机的每个全景摄像头的拍摄角度均不同，因此可以获取多个不同拍摄角度的局部画面，其中每个局部画面均是由全景摄像机的至少一全景摄像头拍摄形成。随后转到步骤S102。

在步骤S102中，电子设备获取用户观看视频的视频观看角度，如该电子设备如头戴式3D全景播放终端，这该视频观看角度通过该头戴式3D全景播放终端上的运动传感器获得。如可以预设用户开始播放视频的角度为主角度或预设角度，则通过运动传感器采集的用户头部运动信号，可获取用户之后相对主角度转到的角度，从而获取相应的视频观看角度。随后转到步骤S103。

在步骤S103中，电子设备根据步骤S102获取的视频观看角度，从步骤S101中获取的多个局部画面中获取相应的局部画面。这里用户的视频观看角度与全景摄像头的拍摄角度是对应的，这里可根据视频观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的一个或多个全景摄像头以及相应的局部画面。随后转到步骤S104。

在步骤S104中，电子设备直接使用步骤S103获取的局部画面进行视频播放操作。

这样即完成了本优选实施例的全景视频播放方法的全景视频播放过程。

由于用户在同一时间只能观看到某个拍摄角度的局部画面，因此本优选实施例的全景视频播放方法根据用户的视频观看角度，及时提取相应的局部画面，从而不需要对局部画面进行拼接处理，节省了画面拼接资源；同时播放时只需要对单一局部画面进行播放，不需要对一拼接后的全景画面进行画面提取处理，节省了画面播放资源。

本发明的全景视频播放方法不需要对局部画面进行拼接，从而可以节省拼接操作的资源；同时也不需要对3D全景画面进行局部画面的提取，因此提高了3D全景画面的传输效率、节省了3D全景画面的局部画面提取资源以及存储资源。

请参照图2，图2为本发明的全景视频播放方法的第二优选实施例的流程图。本优选实施例的全景视频播放方法可使用上述的电子设备进行实施，该全景视频播放方法包括：

步骤S201，获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；

步骤S202，获取用户的视频观看角度；

步骤S203，将视频观看角度按局部画面的拍摄角度进行分类，每一类视频观看角度对应一局部画面；

步骤S204，根据视频观看角度，获取对应的局部画面；

步骤S205，使用局部画面进行视频播放操作。

下面详细说明本优选实施例的全景视频播放方法的各步骤的具体流程。

步骤S201-步骤S202的具体工作原理与第一优选实施例的步骤S101和步骤S102中的描述相同，具体请参见上述全景视频播放方法的第一优选实施例的步骤S101和步骤S102中的相关描述。

在步骤S203中，电子设备将步骤S202获取的视频观看角度按步骤S201中的局部画面的拍摄角度进行分类，每一类视频观看角度对应一局部画面。即每个视频观看角度的全部画面由一个或多个全景摄像头拍摄形成。请参照图3，图3中的视频观看角度分为八类，分别为A、B、C、D、E、F、G、H。随后转到步骤S204。

在步骤S204中，电子设备根据视频观看角度的变化，获取对应的局部画面，具体为：

电子设备判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值。

请参照图3，这里的设定值为局部画面切换的触发值，如用户的前一类别的视频观看角度为A，这里设置设定值为b1(b1＝a1)，当用户的当前视频观看角度为B中的b1部分时，当前视频观看角度与前一类别的视频观看角度A的最小角度差小于设定值b1；当用户的当前视频观看角度为B中的b2部分时，当前视频观看角度与前一类别的视频观看角度A的最小角度差大于设定值b1。

同理，如用户的前一类别的视频观看角度为B，当用户的当前视频观看角度为A，当用户的当前视频观看角度为A中的a1部分时，当前视频观看角度与前一类别的视频观看角度B的最小角度差小于设定值a1；当用户的当前视频观看角度为A中的a2部分时，当前视频观看角度与前一类别的视频观看角度B的最小角度差大于设定值a1。

如用户的当前视频观看角度与前一类别的视频观看角度的最小角度差大于等于设定值，则对局部画面进行切换，局部画面由前一类别的视频观看角度对应的局部画面切换为当前视频观看角度对应的局部画面，以使得当前显示画面更加稳定以及全面。

如用户的当前视频观看角度与前一类别的视频观看角度的最小角度差小于设定值，则暂时不对局部画面进行切换，继续获取前一类别的视频观看角度对应的局部画面。由于每个视频观看角度对应的局部画面和相邻视频观看角度对应的局部画面均有部分重叠，如用户仅仅是在某个视频观看角度对应的局部画面的边缘区域进行观看，则可不对局部画面进行切换，以避免频繁进行局部画面的切换操作。通过设定值的设置可以对该边缘区域进行调整。随后转到步骤S205。

在步骤S205中，电子设备直接使用步骤S204获取的局部画面进行视频播放操作。

这样即完成了本优选实施例的全景视频播放方法的全景视频播放过程。

在第一优选实施例的基础上，本优选实施例的全景视频播放方法可根据视频观看角度的变化，对播放的局部画面进行智能调整，进一步优化了3D全景画面的显示效果。

请参照图4，图4为本发明的全景视频播放方法的第三优选实施例的流程图。本优选实施例的全景视频播放方法可使用上述的电子设备进行实施，该全景视频播放方法包括：

步骤S401，获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；

步骤S402，根据相邻的局部画面，生成相应的边界补偿画面；

步骤S403，获取用户的视频观看角度；

步骤S404，根据视频观看角度，获取对应的局部画面以及局部画面对应的边界补偿画面；

步骤S405，使用局部画面以及局部画面对应的边界补偿画面进行视频播放操作。

下面详细说明本优选实施例的全景视频播放方法的各步骤的具体流程。

步骤S401的具体工作原理与第一优选实施例的步骤S101中的描述相同，具体请参见上述全景视频播放方法的第一优选实施例的步骤S101中的相关描述。

在步骤S402中，电子设备根据步骤S401获取的相邻的局部画面，生成相应的边界补偿画面。该边界补偿画面设置在相应的局部画面的四周，具体的生成相应的边界补偿画面的步骤包括：

首先电子设备获取相邻的第一局部画面以及第二局部画面；

随后电子设备根据第一局部画面和第二局部画面，生成相应的平面单应矩阵，该平面单应矩阵用于对第一局部画面中的像素坐标和第二局部画面中的像素坐标进行转换；

最后电子设备使用上述平面单应矩阵，将第二局部画面中的像素转换为第一局部画面对应的边界补偿画面的像素。

边界补偿画面的设置可以较好的实现相邻局部画面之间的平滑过渡，避免局部画面切换时画面跳跃现象的产生。随后转到步骤S403。

步骤S403的具体工作原理与第一优选实施例的步骤S102中的描述相同，具体请参见上述全景视频播放方法的第一优选实施例的步骤S102中的相关描述。

在步骤S404中，电子设备根据步骤S403获取的视频观看角度，从步骤S401中获取的多个局部画面中获取相应的局部画面，以及从步骤S402获取的局部画面对应的边界补偿画面。这里用户的视频观看角度与全景摄像头的拍摄角度是对应的，这里可根据视频观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的全景摄像头以及相应的局部画面和边界补偿画面。随后转到步骤S405。

在步骤S405中，电子设备直接使用步骤S404获取的局部画面以及局部画面对应的边界补偿画面进行视频播放操作。

这样即完成了本优选实施例的全景视频播放方法的全景视频播放过程。

在第一优选实施例的基础上，本优选实施例的全景视频播放方法在局部画面的周围设置有边界补偿画面，进一步提高了每个局部画面的画面完整性，以及局部画面切换时的流畅性，进一步优化了3D全景画面的显示效果。

请参照图5，图5为本发明的全景视频播放方法的第四优选实施例的流程图。本优选实施例的全景视频播放方法可使用上述的电子设备进行实施，该电子设备为左右眼3D视频播放移动终端，其中局部画面包括左眼3D局部画面以及右眼3D局部画面，上述左眼3D局部画面以及相应的右眼3D局部画面在人眼中合成为3D画面。该全景视频播放方法包括：

步骤S501，获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个左眼3D局部画面和对应的右眼3D局部画面均由至少一全景摄像头拍摄形成；

步骤S502，获取用户的左眼视频观看角度和右眼视频观看角度；

步骤S503，根据左眼视频观看角度，获取对应的左眼3D局部画面；根据右眼视频观看角度，获取对应的右眼3D局部画面；

步骤S504，使用左眼3D局部画面和右眼3D局部画面进行视频播放操作。

下面详细说明本优选实施例的全景视频播放方法的各步骤的具体流程。

在步骤S501中，电子设备从全景摄像机的各个全景摄像头拍摄的左眼3D局部画面以及相应的右眼3D局部画面，由于全景摄像机的每个全景摄像头的拍摄角度均不同，因此可以获取多个不同拍摄角度的左眼3D局部画面以及相应的右眼3D局部画面，其中每个左眼3D局部画面以及相应的右眼3D局部画面均是由全景摄像机的至少一全景摄像头拍摄形成。随后转到步骤S502。

在步骤S502中，电子设备获取用户观看的左眼视频观看角度和右眼视频观看角度，随后转到步骤S503。

在步骤S503中，电子设备根据步骤S502获取的左眼视频观看角度，从步骤S501中获取的多个左眼3D局部画面获取相应的左眼3D局部画面；并根据步骤S502获取的右眼视频观看角度，从步骤S501中获取的多个右眼3D局部画面中获取相应的右眼3D局部画面。

这里用户的左眼视频观看角度和右眼视屏观看角度均分别与全景摄像头的拍摄角度是对应的，这里可根据左眼视频观看角度或右眼视屏观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的全景摄像头以及相应的左眼3D局部画面或右眼3D局部画面。随后转到步骤S504。

在步骤S504中，电子设备直接使用步骤S503获取的左眼3D局部画面和右眼3D局部画面进行视频播放操作，左眼3D局部画面进入用户的左眼，相应的右眼3D局部画面进行用户的右眼，这样左眼3D局部画面和相应的右眼3D局部画面在用户眼中合成为3D画面。

这样即完成了本优选实施例的全景视频播放方法的全景视频播放过程。

在第一优选实施例的基础上，本优选实施例的全景视频播放方法中全景摄像机的全景摄像头同时拍摄左眼3D局部画面和对应的右眼3D局部画面，从而可以进一步提高3D全景画面的3D显示效果。

本发明还提供一种全景视频播放装置，请参照图6，图6为本发明的全景视频播放装置的第一优选实施例的结构示意图。本优选实施例的全景视频播放装置可使用上述的全景视频播放方法的第一优选实施例进行实施。本优选实施例的全景视频播放装置60包括局部画面拍摄模块61、观看角度获取模块62、局部画面获取模块63以及视频播放模块64。

局部画面拍摄模块61用于获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；观看角度获取模块62用于获取用户的视频观看角度；局部画面获取模块63用于根据视频观看角度，获取对应的局部画面；视频播放模块64用于使用局部画面进行视频播放操作。

本优选实施例的全景视频播放装置60使用时，首先局部画面拍摄模块61从全景摄像机的各个全景摄像头拍摄的局部画面，由于全景摄像机的每个全景摄像头的拍摄角度均不同，因此可以获取多个不同拍摄角度的局部画面，其中每个局部画面均是由全景摄像机的至少一全景摄像头拍摄形成。

随后观看角度获取模块62获取用户观看视频的视频观看角度，如该电子设备如头戴式3D全景播放终端，这该视频观看角度通过该头戴式3D全景播放终端上的运动传感器获得。如可以预设用户开始播放视频的角度为主角度或预设角度，则通过运动传感器采集的用户头部运动信号，可获取用户之后相对主角度转到的角度，从而获取相应的视频观看角度。

然后局部画面获取模块63根据观看角度获取模块62获取的视频观看角度，从局部画面拍摄模块61获取的多个局部画面中获取相应的局部画面。这里用户的视频观看角度与全景摄像头的拍摄角度是对应的，这里可根据视频观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的全景摄像头以及相应的局部画面。

最后视频播放模块64直接使用局部画面获取模块63获取的局部画面进行视频播放操作。

这样即完成了本优选实施例的全景视频播放装置60的全景视频播放过程。

由于用户在同一时间只能观看到某个拍摄角度的局部画面，因此本优选实施例的全景视频播放装置60根据用户的视频观看角度，及时提取相应的局部画面，从而不需要对局部画面进行拼接处理，节省了画面拼接资源；同时播放时只需要对单一局部画面进行播放，不需要对一拼接后的全景画面进行画面提取处理，节省了画面播放资源。

本优选实施例的全景视频播放装置不需要对局部画面进行拼接，从而可以节省拼接操作的资源；同时也不需要对3D全景画面进行局部画面的提取，因此提高了3D全景画面的传输效率、节省了3D全景画面的局部画面提取资源以及存储资源。

请参照图7，图7为本发明的全景视频播放装置的第二优选实施例的结构示意图。本优选实施例的全景视频播放装置70可使用上述的全景视频播放方法的第二优选实施例进行实施。本优选实施例的全景视频播放装置70包括局部画面拍摄模块71、分类模块72、观看角度获取模块73、局部画面获取模块74以及视频播放模块75。

局部画面拍摄模块71用于获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；观看角度获取模块73用于获取用户的视频观看角度；局部画面获取模块74用于根据视频观看角度，获取对应的局部画面；视频播放模块75用于使用局部画面进行视频播放操作；分类模块72用于将视频观看角度按局部画面的拍摄角度进行分类，每一类视频观看角度对应一局部画面。

请参照图8，图8为本发明的全景视频播放装置的第二优选实施例的局部画面获取模块的结构示意图。该局部画面获取模块74包括判断单元81、第一局部画面获取单元82以及第二局部画面获取单元83。

判断单元81用于判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值；第一局部画面获取单元82用于如大于等于设定值，则获取当前视频观看角度对应的局部画面；第二局部画面获取单元83用于如小于设定值，则获取前一类别的视频观看角度对应的局部画面。

本优选实施例的全景视频播放装置70和第一优选实施例的全景视频播放装置60的区别在于，

分类模块72将观看角度获取模块73获取的视频观看角度按局部画面拍摄模块71获取的局部画面的拍摄角度进行分类，每一类视频观看角度对应一局部画面。即每个视频观看角度的全部画面由至少一全景摄像头拍摄形成。

随后局部画面获取模块74根据视频观看角度的变化，获取对应的局部画面，具体为：

局部画面获取模块74的判断单元81判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值。

请参照图3，这里的设定值为局部画面切换的触发值，如用户的前一类别的视频观看角度为A，这里设置设定值为b1(b1＝a1)，当用户的当前视频观看角度为B中的b1部分时，当前视频观看角度与前一类别的视频观看角度A的最小角度差小于设定值b1；当用户的当前视频观看角度为B中的b2部分时，当前视频观看角度与前一类别的视频观看角度A的最小角度差大于设定值b1。

同理，如用户的前一类别的视频观看角度为B，当用户的当前视频观看角度为A，当用户的当前视频观看角度为A中的a1部分时，当前视频观看角度与前一类别的视频观看角度B的最小角度差小于设定值a1；当用户的当前视频观看角度为A中的a2部分时，当前视频观看角度与前一类别的视频观看角度B的最小角度差大于设定值a1。

如用户的当前视频观看角度与前一类别的视频观看角度的最小角度差大于等于设定值，则第一局部画面获取单元82对局部画面进行切换，局部画面由前一类别的视频观看角度对应的局部画面切换为当前视频观看角度对应的局部画面，以使得当前显示画面更加稳定以及全面。

如用户的当前视频观看角度与前一类别的视频观看角度的最小角度差小于设定值，则第二局部画面获取单元83暂时不对局部画面进行切换，继续获取前一类别的视频观看角度对应的局部画面。由于每个视频观看角度对应的局部画面和相邻视频观看角度对应的局部画面均有部分重叠，如用户仅仅是在某个视频观看角度对应的局部画面的边缘区域进行观看，则可不对局部画面进行切换，以便频繁进行局部画面切换操作。

在第一优选实施例的基础上，本优选实施例的全景视频播放装置70可根据视频观看角度的变化，对播放的局部画面进行智能调整，进一步优化了3D全景画面的显示效果。

请参照图9，图9为本发明的全景视频播放装置的第三优选实施例的结构示意图。本优选实施例的全景视频播放装置可使用上述的全景视频播放方法的第三优选实施例进行实施。本优选实施例的全景视频播放装置90包括局部画面拍摄模块91、边界补偿画面生成模块92、观看角度获取模块93、局部画面获取模块94以及视频播放模块95。

局部画面拍摄模块91用于获取多个不同拍摄角度的局部画面，其中每个局部画面由至少一全景摄像头拍摄形成；观看角度获取模块93用于获取用户的视频观看角度；局部画面获取模块94用于根据视频观看角度，获取对应的局部画面；视频播放模块95用于使用局部画面进行视频播放操作；边界补偿画面生成模块92用于根据相邻的局部画面，生成相应的边界补偿画面。

本优选实施例的全景视频播放装置90和第一优选实施例的全景视频播放装置60的区别在于，

边界补偿画面生成模块92根据局部画面拍摄模块91获取的相邻的局部画面，生成相应的边界补偿画面。该边界补偿画面设置在相应的局部画面的四周，具体的生成相应的边界补偿画面的步骤包括：

首先边界补偿画面生成模块92获取相邻的第一局部画面以及第二局部画面；

随后边界补偿画面生成模块92根据第一局部画面和第二局部画面，生成相应的平面单应矩阵，该平面单应矩阵用于对第一局部画面中的像素坐标和第二局部画面中的像素坐标进行转换；

最后边界补偿画面生成模块92使用上述平面单应矩阵，将第二局部画面中的像素转换为第一局部画面对应的边界补偿画面的像素。

边界补偿画面的设置可以较好的实现相邻局部画面之间的平滑过渡，避免局部画面切换时画面跳跃现象的产生。

随后观看角度获取模块93获取用户观看视频的视频观看角度，如该电子设备如头戴式3D全景播放终端，这该视频观看角度通过该头戴式3D全景播放终端上的运动传感器获得。如可以预设用户开始播放视频的角度为主角度或预设角度，则通过运动传感器采集的用户头部运动信号，可获取用户之后相对主角度转到的角度，从而获取相应的视频观看角度。

然后局部画面获取模块94根据观看角度获取模块93获取的视频观看角度，从局部画面拍摄模块91获取的多个局部画面中获取相应的局部画面，以及从边界补偿画面生成模块92获取的局部画面对应的边界补偿画面。这里用户的视频观看角度与全景摄像头的拍摄角度是对应的，这里可根据视频观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的全景摄像头以及相应的局部画面和边界补偿画面。

最后视频播放模块95直接使用局部画面获取模块94获取的局部画面以及对应的边界补偿画面进行视频播放操作。

这样即完成了本优选实施例的全景视频播放装置90的全景视频播放过程。

在第一优选实施例的基础上，本优选实施例的全景视频播放装置在局部画面的周围设置有边界补偿画面，进一步提高了每个局部画面的画面完整性，以及局部画面切换时的流畅性，进一步优化了3D全景画面的显示效果。

请参照图10，图10为本发明的全景视频播放装置的第四优选实施例的结构示意图。本优选实施例的全景视频播放装置可使用上述的全景视频播放方法的第四优选实施例进行实施。本优选实施例中的局部画面包括左眼3D局部画面以及右眼3D局部画面。本优选实施例的全景视频播放装置100包括局部画面拍摄模块101、观看角度获取模块102、局部画面获取模块103以及视频播放模块104。

局部画面拍摄模块101用于获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个左眼3D局部画面和对应的右眼3D局部画面均由至少一全景摄像头拍摄形成；观看角度获取模块102用于获取用户的左眼视频观看角度和右眼视频观看角度；局部画面获取模块103用于根据左眼视频观看角度，获取对应的左眼3D局部画面；根据右眼视频观看角度，获取对应的右眼3D局部画面；视频播放模块104用于使用左眼3D局部画面和右眼3D局部画面进行视频播放操作。

本优选实施例的全景视频播放装置100使用时，首先局部画面拍摄模块101从全景摄像机的各个全景摄像头拍摄的左眼3D局部画面以及相应的右眼3D局部画面，由于全景摄像机的每个全景摄像头的拍摄角度均不同，因此可以获取多个不同拍摄角度的左眼3D局部画面以及相应的右眼3D局部画面，其中每个左眼3D局部画面以及相应的右眼3D局部画面均是由全景摄像机的至少一全景摄像头拍摄形成。

随后观看角度获取模块102获取用户观看的左眼视频观看角度和右眼视频观看角度。

然后局部画面获取模块103根据观看角度获取模块102获取的左眼视频观看角度，从局部画面拍摄模块101获取的多个左眼3D局部画面获取相应的左眼3D局部画面；并根据观看角度获取模块102获取的右眼视频观看角度，从局部画面拍摄模块101获取的多个右眼3D局部画面中获取相应的右眼3D局部画面。

这里用户的左眼视频观看角度和右眼视屏观看角度均分别与全景摄像头的拍摄角度是对应的，这里可根据左眼视频观看角度或右眼视屏观看角度获取相应的拍摄角度，再通过拍摄角度找到对应的全景摄像头以及相应的左眼3D局部画面或右眼3D局部画面。

最后视频播放模块104直接使用局部画面获取模块103获取的左眼3D局部画面和右眼3D局部画面进行视频播放操作，左眼3D局部画面进入用户的左眼，相应的右眼3D局部画面进行用户的右眼，这样左眼3D局部画面和相应的右眼3D局部画面在用户眼中合成为3D画面。

这样即完成了本优选实施例的全景视频播放装置100的全景视频播放过程。

在第一优选实施例的基础上，本优选实施例的全景视频播放装置中全景摄像机的全景摄像头同时拍摄左眼3D局部画面和对应的右眼3D局部画面，从而可以进一步提高3D全景画面的3D显示效果。

本发明的全景视频播放方法及全景视频播放装置不需要对局部画面进行拼接，从而可以节省拼接操作的资源；同时也不需要对3D全景画面进行局部画面的提取，因此提高了3D全景画面的传输效率、节省了3D全景画面的局部画面提取资源以及存储资源；解决了现有的全景视频播放方法及播放装置中视频画面的拼接计算量较大、接消耗的时间以及资源越来越多、以及拼接后的3D全景画面不利于传输以及存储的技术问题。

如本申请所使用的术语“组件”、“模块”、“系统”、“接口”、“进程”等等一般地旨在指计算机相关实体：硬件、硬件和软件的组合、软件或执行中的软件。例如，组件可以是但不限于是运行在处理器上的进程、处理器、对象、可执行应用、执行的线程、程序和/或计算机。通过图示，运行在控制器上的应用和该控制器二者都可以是组件。一个或多个组件可以有在于执行的进程和/或线程内，并且组件可以位于一个计算机上和/或分布在两个或更多计算机之间。

本文提供了实施例的各种操作。在一个实施例中，所述的一个或多个操作可以构成一个或多个计算机可读介质上存储的计算机可读指令，其在被电子设备执行时将使得计算设备执行所述操作。描述一些或所有操作的顺序不应当被解释为暗示这些操作必需是顺序相关的。本领域技术人员将理解具有本说明书的益处的可替代的排序。而且，应当理解，不是所有操作必需在本文所提供的每个实施例中存在。

而且，本文所使用的词语“优选的”意指用作实例、示例或例证。奉文描述为“优选的”任意方面或设计不必被解释为比其他方面或设计更有利。相反，词语“优选的”的使用旨在以具体方式提出概念。如本申请中所使用的术语“或”旨在意指包含的“或”而非排除的“或”。即，除非另外指定或从上下文中清楚，“X使用A或B”意指自然包括排列的任意一个。即，如果X使用A；X使用B；或X使用A和B二者，则“X使用A或B”在前述任一示例中得到满足。

而且，尽管已经相对于一个或多个实现方式示出并描述了本公开，但是本领域技术人员基于对本说明书和附图的阅读和理解将会想到等价变型和修改。本公开包括所有这样的修改和变型，并且仅由所附权利要求的范围限制。特别地关于由上述组件(例如元件、资源等)执行的各种功能，用于描述这样的组件的术语旨在对应于执行所述组件的指定功能(例如其在功能上是等价的)的任意组件(除非另外指示)，即使在结构上与执行本文所示的本公开的示范性实现方式中的功能的公开结构不等同。此外，尽管本公开的特定特征已经相对于若干实现方式中的仅一个被公开，但是这种特征可以与如可以对给定或特定应用而言是期望和有利的其他实现方式的一个或多个其他特征组合。而且，就术语“包括”、“具有”、“含有”或其变形被用在具体实施方式或权利要求中而言，这样的术语旨在以与术语“包含”相似的方式包括。

本发明实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。上述提到的存储介质可以是只读存储器，磁盘或光盘等。上述的各装置或系统，可以执行相应方法实施例中的方法。

综上所述，虽然本发明已以优选实施例揭露如上，但上述优选实施例并非用以限制本发明，本领域的普通技术人员，在不脱离本发明的精神和范围内，均可作各种更动与润饰，因此本发明的保护范围以权利要求界定的范围为准。

Claims (10)

1.一种全景视频播放方法，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其特征在于，包括：

获取多个不同拍摄角度的局部画面，其中每个所述局部画面由至少一所述全景摄像头拍摄形成；

获取用户的视频观看角度；

根据所述视频观看角度，获取对应的局部画面；以及

使用所述局部画面进行视频播放操作。

2.根据权利要求1所述的全景视频播放方法，其特征在于，所述全景视频播放方法还包括：

将所述视频观看角度按所述局部画面的拍摄角度进行分类，每一类所述视频观看角度对应一所述局部画面；

所述根据所述视频观看角度，获取对应的局部画面的步骤包括：

判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值；

如大于等于所述设定值，则获取所述当前视频观看角度对应的局部画面；以及

如小于所述设定值，则获取所述前一类别的视频观看角度对应的局部画面。

3.根据权利要求1所述的全景视频播放方法，其特征在于，所述全景视频播放方法还包括：

根据相邻的局部画面，生成相应的边界补偿画面；

所述根据所述视频观看角度，获取对应的局部画面的步骤具体为：

根据所述视频观看角度，获取对应的局部画面以及所述局部画面对应的边界补偿画面；

所述使用所述局部画面进行视频播放操作的步骤具体为：

使用所述局部画面以及所述局部画面对应的边界补偿画面进行视频播放操作。

4.根据权利要求3所述的全景视频播放方法，其特征在于，所述边界补偿画面设置在相应的局部画面的四周。

5.根据权利要求3所述的全景视频播放方法，其特征在于，所述根据相邻的3D局部画面，生成相应的边界补偿画面的步骤包括：

获取相邻的第一局部画面和第二局部画面；

根据第一局部画面和第二局部画面，生成相应的平面单应矩阵；其中所述平面单应矩阵用于对所述第一局部画面中的像素坐标和所述第二局部画面的像素坐标进行转换；

使用所述平面单应矩阵，将所述第二局部画面中的像素转换为所述第一局部画面对应的边界补偿画面的像素。

6.一种全景视频播放方法，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其特征在于，所述局部画面包括左眼3D局部画面以及右眼3D局部画面；所述全景视频播放方法包括：

获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个所述左眼3D局部画面和对应的右眼3D局部画面均由至少一所述全景摄像头拍摄形成；

获取用户的左眼视频观看角度和右眼视频观看角度；

根据所述左眼视频观看角度，获取对应的左眼3D局部画面；根据所述右眼视频观看角度，获取对应的右眼3D局部画面；以及

使用所述左眼3D局部画面和所述右眼3D局部画面进行视频播放操作。

7.一种全景视频播放装置，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其特征在于，包括：

局部画面拍摄模块，用于获取多个不同拍摄角度的局部画面，其中每个所述局部画面由至少一所述全景摄像头拍摄形成；

观看角度获取模块，用于获取用户的视频观看角度；

局部画面获取模块，用于根据所述视频观看角度，获取对应的局部画面；以及

视频播放模块，用于使用所述局部画面进行视频播放操作。

8.根据权利要求7所述的全景视频播放装置，其特征在于，所述全景视频播放装置还包括：

分类模块，用于将所述视频观看角度按所述局部画面的拍摄角度进行分类，每一类所述视频观看角度对应一所述局部画面；

所述局部画面获取模块包括：

判断单元，用于判断用户的当前视频观看角度与前一类别的视频观看角度的最小角度差是否大于等于设定值；

第一局部画面获取单元，用于如大于等于所述设定值，则获取所述当前视频观看角度对应的局部画面；以及

第二局部画面获取单元，用于如小于所述设定值，则获取所述前一类别的视频观看角度对应的局部画面。

9.根据权利要求7所述的全景视频播放装置，其特征在于，所述全景视频播放装置还包括：

边界补偿画面生成模块，用于根据相邻的局部画面，生成相应的边界补偿画面；

所述局部画面获取模块具体用于根据所述视频观看角度，获取对应的局部画面以及所述局部画面对应的边界补偿画面；

所述视频播放模块具体用于使用所述局部画面以及所述局部画面对应的边界补偿画面进行视频播放操作。

10.一种全景视频播放装置，用于对全景摄像机的全景摄像头拍摄的局部画面进行播放；其特征在于，所述局部画面包括左眼3D局部画面以及右眼3D局部画面；所述全景视频播放装置包括：

局部画面拍摄模块，用于获取多个不同拍摄角度的左眼3D局部画面和相应的右眼3D局部画面，其中每个所述左眼3D局部画面和对应的右眼3D局部画面均由至少一所述全景摄像头拍摄形成；

观看角度获取模块，用于获取用户的左眼视频观看角度和右眼视频观看角度；

局部画面获取模块，用于根据所述左眼视频观看角度，获取对应的左眼3D局部画面；根据所述右眼视频观看角度，获取对应的右眼3D局部画面；以及

视频播放模块，用于使用所述左眼3D局部画面和所述右眼3D局部画面进行视频播放操作。