CN114025150A

CN114025150A - 多头戴设备的视频帧同步方法、装置、头戴设备及介质

Info

Publication number: CN114025150A
Application number: CN202111274494.9A
Authority: CN
Inventors: 颜振
Original assignee: Goertek Optical Technology Co Ltd
Current assignee: Goertek Techology Co Ltd
Priority date: 2021-10-29
Filing date: 2021-10-29
Publication date: 2022-02-08

Abstract

本发明公开了一种多头戴设备之间的视频帧同步方法、装置、头戴设备及计算机可读存储介质，包括：主头戴设备按照预设规则对目标视频进行处理得到视频同步信息；视频同步信息包括主头戴设备当前播放视频的目标视频帧；将视频同步信息发送至与主头戴设备互联配对成功的从头戴设备，以便从头戴设备依据视频同步信息判断自身当前播放的当前视频帧是否与目标视频帧一致，若不一致，则将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放；本发明在使用过程中能够实现从头戴设备与主头戴设备之间的视频帧同步，使用户观影过程中的用户体验更高。

Description

多头戴设备的视频帧同步方法、装置、头戴设备及介质

技术领域

本发明涉及头戴设备技术领域，特别是涉及一种多头戴设备的视频帧同步方法、装置、头戴设备及计算机可读存储介质。

背景技术

随着VR等头戴设备的逐渐普及，人们对多个VR设备互联的场景需求也日益增强，例如VR观影、VR课堂或VR会议等。在多个VR设备互联的应用场景中，多个VR设备播放的画面需要尽量保持一致，而现有技术中各个互联的VR设备之间没有进行视频同步，导致用户体验较差。

鉴于此，如何实现多头戴设备之间的视频帧同步、提升用户的使用体验成为本领域技术人员需要解决的问题。

发明内容

本发明实施例的目的是提供一种多头戴设备的视频帧同步方法、装置、头戴设备及计算机可读存储介质，在使用过程中能够实现从头戴设备与主头戴设备之间的视频帧同步，使用户观影过程中的用户体验更高。

为解决上述技术问题，本发明实施例提供了一种多头戴设备之间的视频帧同步方法，应用于主头戴设备，包括：

按照预设规则对目标视频进行处理得到视频同步信息；所述视频同步信息包括所述主头戴设备当前播放视频的目标视频帧；

将所述视频同步信息发送至与所述主头戴设备互联配对成功的从头戴设备，以便所述从头戴设备依据所述视频同步信息判断自身当前播放的当前视频帧是否与所述目标视频帧一致，若不一致，则将所述当前视频帧更新为所述目标视频帧，并对更新后的当前视频帧进行视频播放。

可选的，所述按照预设规则对目标视频进行处理的过程为：

对目标视频的各个视频帧进行编码处理得到帧队列；所述帧队列包括多个按照时间顺序排列的帧队列元素；

依据所述帧队列及与当前播放的目标视频帧对应的目标帧队列元素生成帧序列，并将所述帧序列作为所述视频同步信息。

可选的，所述对目标视频的各个视频帧进行编码处理得到帧队列的过程为：

对目标视频的每个视频帧添加对应的帧时间标志位，分别得到每个帧队列元素；

将每个所述帧队列元素按照时间顺序进行排序，得到帧队列。

可选的，所述依据所述帧队列及与当前播放的目标视频帧对应的目标帧队列元素生成帧序列的过程为：

提取所述帧队列中的各个帧时间标志位构成帧时间序列；

在所述帧时间序列的头部添加帧起始标志位，在所述帧时间序列的尾部添加校验帧标志位和帧结束标志位，以生成帧序列；其中，所述校验帧标志位包括主头戴设备当前播放视频的时间信息；

则，所述依据所述视频同步信息判断自身当前播放的当前视频帧是否与所述目标视频帧一致的过程为：

依据所述帧序列中的帧起始标志位和校验帧标志位，得到与所述主头戴设备当前播放视频对应的目标帧时间；

获取与当前播放的当前视频帧对应的当前帧时间；

判断所述当前帧时间与所述目标帧时间是否一致。

可选的，还包括：

在所述帧起始标志位之前添加标志位主从设备标志位；

则，所述将所述视频同步信息发送至与所述主头戴设备互联配对成功的从头戴设备的过程为：

根据所述帧序列中的主从设备标志位，将所述帧序列发送至与所述主头戴设备互联配对成功的、与所述主从设备标志位对应的从头戴设备。

本发明实施例还提供了一种多头戴设备之间的视频帧同步装置，应用于主头戴设备，包括：

处理模块，用于按照预设规则对目标视频进行处理得到视频同步信息；所述视频同步信息包括所述主头戴设备当前播放视频的目标视频帧；

发送模块，用于将所述视频同步信息发送至与所述主头戴设备互联配对成功的从头戴设备，以便所述从头戴设备依据所述视频同步信息判断自身当前播放的当前视频帧是否与所述目标视频帧一致，若不一致，则将所述当前视频帧更新为所述目标视频帧，并对更新后的当前视频帧进行视频播放。

本发明实施例还提供了一种多头戴设备之间的视频帧同步方法，应用于从头戴设备，包括：

接收主头戴设备发送的视频同步信息，所述视频同步信息包括所述主头戴设备当前播放视频的目标视频帧；其中，所述视频同步信息为所述主头戴设备按照预设规则对目标视频进行处理后得到的；

依据所述视频同步信息判断当前播放的当前视频帧是否与所述目标视频帧一致，若不一致，则将所述当前视频帧更新为所述目标视频帧，并对更新后的当前视频帧进行视频播放。

本发明实施例还提供了一种多头戴设备之间的视频帧同步装置，应用于从头戴设备，包括：

接收模块，用于接收主头戴设备发送的视频同步信息，所述视频同步信息包括所述主头戴设备当前播放视频的目标视频帧；其中，所述视频同步信息为所述主头戴设备按照预设规则目标视频进行处理后得到的；

判断模块，用于依据所述视频同步信息判断当前播放的当前视频帧是否与所述目标视频帧一致，若不一致，则触发更新模块；

所述更新模块，用于将所述当前视频帧更新为所述目标视频帧，并对更新后的当前视频帧进行视频播放。

本发明实施例还提供了一种头戴设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上述所述多头戴设备之间的视频帧同步方法的步骤。

本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述多头戴设备之间的视频帧同步方法的步骤。

本发明实施例提供了一种多头戴设备之间的视频帧同步方法、装置、头戴设备及计算机可读存储介质，该方法中的主头戴设备按照预设规则对所播放的目标视频进行处理得到视频同步信息，然后将该视频同步信息发送至与该主头戴设备互联配对成功的从头戴设备，其中，该视频同步信息包括主头戴设备当前播放视频的目标视频帧，从头戴设备接收到视频同步信息后，依据该视频同步信息判断从头戴设备自身当前播放的当前视频帧是否与视频同步信息中的目标视频帧一致，若不一致，则从头戴设备将其当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放，从而实现从头戴设备与主头戴设备之间的视频帧同步，使用户观影过程中的用户体验更高。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种多头戴设备之间的视频帧同步方法的流程示意图；

图2为本发明第一实施例示意图；

图3为本发明实施例提供的一种多头戴设备之间的视频帧同步装置的结构示意图；

图4为本发明实施例提供的另一种多头戴设备之间的视频帧同步方法的流程示意图；

图5为本发明实施例提供的另一种多头戴设备之间的视频帧同步装置的结构示意图。

具体实施方式

本发明实施例提供了一种多头戴设备的视频帧同步方法、装置、头戴设备及计算机可读存储介质，在使用过程中能够实现从头戴设备与主头戴设备之间的视频帧同步，使用户观影过程中的用户体验更高。

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参照图1，图1为本发明实施例提供的一种多头戴设备之间的视频帧同步方法的流程示意图。该方法应用于主头戴设备，包括：

S110：按照预设规则对目标视频进行处理得到视频同步信息；视频同步信息包括主头戴设备当前播放视频的目标视频帧；

需要说明的是，本发明实施例中的主头戴设备可以预先向多个位于同一个局域网下的从头戴设备发送互联配对请求，从头戴设备在接收到互联配对请求后可以参与配对，并且在参与配对后即与主头戴设备互联配对成功，从而可以与主头戴设备一起播放同一个视频，该视频可以称为目标视频，其中，主头戴设备还可以根据自身以及按照从头戴设备参与互联配对的先后顺序对各个从头戴设备进行编号。主头戴设备在需要对与其连接的从头戴设备进行视频同步时，可以按照预设规则对所播放的目标视频进行处理，得到包括主头戴设备当前播放视频的目标视频帧的视频同步信息。

S120：将视频同步信息发送至与主头戴设备互联配对成功的从头戴设备，以便从头戴设备依据视频同步信息判断自身当前播放的当前视频帧是否与目标视频帧一致，若不一致，则将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

具体的，在得到视频同步信息后，将该视频同步信息发送至从头戴设备，从头戴设备接收到视频同步信息后，获取该视频同步信息中的主头戴设备当前播放视频的目标视频帧，然后将从头戴设备自身当前播放的当前视频帧与该目标视频帧进行对比，若两者一致，则说明当前已同步，若两者不一致，则说明从头戴设备的播放进度与主头戴设备的播放进度不同，两者未同步，此时从头戴设备需要对其自身的播放进度进行调整，具体可以将自身当前播放的当前视频帧更新为(也即调节至)主头戴设备所播放的目标视频帧处，然后再继续播放，从而使从头戴设备完成与主头戴设备之间的视频帧同步。

进一步的，上述S110中按照预设规则对目标视频进行处理的过程，具体可以为：

对目标视频的各个视频帧进行编码处理得到帧队列；帧队列包括多个按照时间顺序排列的帧队列元素；

依据帧队列及与当前播放的目标视频帧对应的目标帧队列元素生成帧序列，并将帧序列作为视频同步信息。

需要说明的是，主头戴设备具体可以对目标视频的各个视频帧进行编码处理得到帧队列，具体可以根据对目标视频的每个视频帧添加对应的帧时间标志位，分别得到每个帧队列元素，该帧队列元素包括位于头部的帧时间标志位和位于该帧时间标志位后面的视频帧数据，然后再将每个帧队列元素按照时间顺序进行排序，得到帧队列。其中，帧队列元素以及帧队列的具体格式如图2中所示。

进一步的，上述依据帧队列及与当前播放的目标视频帧对应的目标帧队列元素生成帧序列的过程，具体可以为：

提取帧队列中的各个帧时间标志位构成帧时间序列；

在帧时间序列的头部添加帧起始标志位，在帧时间序列的尾部添加校验帧标志位和帧结束标志位，以生成帧序列；其中，校验帧标志位包括主头戴设备当前播放视频的时间信息；

也即，为了减少数据传输量，提高视频同步效率，本发明实施例中可以从帧队列中提取出每个帧元素的帧时间标志位，将各个帧时间标志位按照时间顺序构成帧时间序列，其具体格式如图2中所示的帧时间序列，然后在帧时间序列的头部添加帧起始标志位，例如帧起始标志位为T₀，在帧时间序列的尾部依次添加校准帧标志位和帧结束标志位，从而生成帧序列。

则，上述依据视频同步信息判断自身当前播放的当前视频帧是否与目标视频帧一致的过程，具体可以为：

依据帧序列中的帧起始标志位和校验帧标志位，得到与主头戴设备当前播放视频对应的目标帧时间；

获取与当前播放的当前视频帧对应的当前帧时间；

判断当前帧时间与目标帧时间是否一致。

需要说明的是，从头戴设备在接收到视频同步信息(帧序列)后，从该帧序列中获取帧起始标志位和校验帧标志位，然后根据该帧起始标志位和帧校验标志位能够确定出主头戴设备当前播放视频对应的目标帧时间，也即，主头戴设备当前播放视频具体位于哪个帧时间T内，例如位于T1内，然后从头戴设备获取自身当前播放的当前视频帧对应的当前帧时间，例如T2内，则说明两者不一致，则需要将从头戴设备当前播放的视频帧跳转至T1处，从而实现视频的帧同步。更进一步的，该方法还可以包括：

在帧起始标志位之前添加标志位主从设备标志位；

则，将视频同步信息发送至与主头戴设备互联配对成功的从头戴设备的过程具体可以为：

根据帧序列中的主从设备标志位，将帧序列发送至与主头戴设备互联配对成功的、与主从设备标志位对应的从头戴设备。

具体的，本发明实施例中还可以在帧序列的头部位置、位于帧起始标志位之前添加主从设备标志位，当然还可以添加主设备标志位，具体可以根据实际需要进行确定，从而在将帧序列发送至指定的从头戴设备。

另外，还需要说明的是可以在视频开始播放时首次对从头戴设备进行视频帧同步，还可以在视频播放过程中随时根据需求对从头戴设备进行视频帧同步，具体可以根据实际需要执行。

可见，本发明中的主头戴设备按照预设规则对所播放的目标视频进行处理得到视频同步信息人，然后将该视频同步信息发送至与该主头戴设备互联配对成功的从头戴设备，其中，该视频同步信息包括主头戴设备当前播放视频的目标视频帧，从头戴设备接收到视频同步信息后，依据该视频同步信息判断从头戴设备自身当前播放的当前视频帧是否与视频同步信息中的目标视频帧一致，若不一致，则从头戴设备将其当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放，从而实现从头戴设备与主头戴设备之间的视频同步，使用户观影过程中的用户体验更高。

在上述实施例的基础上，本发明实施例还提供了一种多头戴设备之间的视频帧同步装置，具体请参照图3，该装置应用于主头戴设备，包括：

处理模块11，用于按照预设规则对目标视频进行处理得到视频同步信息；视频同步信息包括主头戴设备当前播放视频的目标视频帧；

发送模块12，用于将视频同步信息发送至与主头戴设备互联配对成功的从头戴设备，以便从头戴设备依据视频同步信息判断自身当前播放的当前视频帧是否与目标视频帧一致，若不一致，则将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

需要说明的是，本发明实施例中的多头戴设备之间的视频帧同步装置具有与上述实施例中所提供的多头戴设备之间的视频帧同步方法相同的有益效果，并且对于本发明实施例中所涉及到的多头戴设备之间的视频帧同步方法的具体介绍请参照上述实施例，本发明在此不再赘述。

在上述实施例的基础上，本发明实施例还提供了一种多头戴设备之间的视频帧同步方法，具体请参照图4，该方法应用于从头戴设备，包括：

S210：接收主头戴设备发送的视频同步信息，视频同步信息包括主头戴设备当前播放视频的目标视频帧；其中，视频同步信息为主头戴设备按照预设规则对目标视频进行处理后得到的；

S220：依据视频同步信息判断当前播放的当前视频帧是否与目标视频帧一致，若不一致，则进入S230；

S230：将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

具体的，本发明实施例中的主头戴设备可以预先向多个位于同一个局域网下的从头戴设备发送互联配对请求，从头戴设备在接收到互联配对请求后可以参数配对，并且在参与配对后即与主头戴设备互联配对成功，从而可以与主头戴设备一起播放同一个视频，该视频可以称为目标视频。主头戴设备在需要对与其连接的从头戴设备进行视频同步时，可以按照预设规则对所播放的目标视频进行处理，得到包括主头戴设备当前播放视频的目标视频帧的视频同步信息，并将该视频同步信息发送至从头戴设备，从头戴设备接收到视频同步信息后，获取该视频同步信息中的主头戴设备当前播放视频的目标视频帧，然后将从头戴设备自身当前播放的当前视频帧与该目标视频帧进行对比，若两者一致，则说明当前已同步，若两者不一致，则说明从头戴设备的播放进度与主头戴设备的播放进度不同，两者未同步，此时从头戴设备需要对其自身的播放进度进行调整，具体可以将自身当前播放的当前视频帧更新为(也即调节至)主头戴设备所播放的目标视频帧处，然后再继续播放，从而使从头戴设备完成与主头戴设备之间的视频帧同步。

具体的，主头戴设备与从头戴设备之前实现帧同步的过程可以参数上述方法实施例，本发明在此不再赘述。

在上述实施例的基础上，本发明实施例还提供了一种多头戴设备之间的视频帧同步装置，具体请参照图5，该装置应用于从头戴设备，包括：

接收模块21，用于接收主头戴设备发送的视频同步信息，视频同步信息包括主头戴设备当前播放视频的目标视频帧；其中，视频同步信息为主头戴设备按照预设规则目标视频进行处理后得到的；

判断模块22，用于依据视频同步信息判断当前播放的当前视频帧是否与目标视频帧一致，若不一致，则触发更新模块23；

更新模块23，用于将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

在上述实施例的基础上，本发明实施例还提供了一种头戴设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序时实现如上述多头戴设备之间的视频帧同步方法的步骤。

例如，本发明实施例中的处理器具体可以用于实现按照预设规则对目标视频进行处理得到视频同步信息；视频同步信息包括主头戴设备当前播放视频的目标视频帧；将视频同步信息发送至与主头戴设备互联配对成功的从头戴设备，以便从头戴设备依据视频同步信息判断自身当前播放的当前视频帧是否与目标视频帧一致，若不一致，则将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

或具体用于实现接收主头戴设备发送的视频同步信息，视频同步信息包括主头戴设备当前播放视频的目标视频帧；其中，视频同步信息为主头戴设备按照预设规则对目标视频进行处理后得到的；依据视频同步信息判断当前播放的当前视频帧是否与目标视频帧一致，若不一致，则将当前视频帧更新为目标视频帧，并对更新后的当前视频帧进行视频播放。

在上述实施例的基础上，本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述多头戴设备之间的视频帧同步方法的步骤。

该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其他实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims

1.一种多头戴设备之间的视频帧同步方法，其特征在于，应用于主头戴设备，包括：

2.根据权利要求1所述的多头戴设备之间的视频帧同步方法，其特征在于，所述按照预设规则对目标视频进行处理的过程为：

3.根据权利要求2所述的多头戴设备之间的视频帧同步方法，其特征在于，所述对目标视频的各个视频帧进行编码处理得到帧队列的过程为：

4.根据权利要求3所述的多头戴设备之间的视频帧同步方法，其特征在于，所述依据所述帧队列及与当前播放的目标视频帧对应的目标帧队列元素生成帧序列的过程为：

提取所述帧队列中的各个帧时间标志位构成帧时间序列；

获取与当前播放的当前视频帧对应的当前帧时间；

判断所述当前帧时间与所述目标帧时间是否一致。

5.根据权利要求4所述的多头戴设备之间的视频帧同步方法，其特征在于，还包括：

在所述帧起始标志位之前添加主从设备标志位；

则，所述将所述帧序列发送至与所述主头戴设备互联配对成功的从头戴设备的过程为：

根据所述视频同步信息中的主从设备标志位，将所述帧序列发送至与所述主头戴设备互联配对成功的、与所述主从设备标志位对应的从头戴设备。

6.一种多头戴设备之间的视频帧同步装置，其特征在于，应用于主头戴设备，包括：

7.一种多头戴设备之间的视频帧同步方法，其特征在于，应用于从头戴设备，包括：

8.一种多头戴设备之间的视频帧同步装置，其特征在于，应用于从头戴设备，包括：

9.一种头戴设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述多头戴设备之间的视频帧同步方法的步骤或实现如权利要求7所述多头戴设备之间的视频帧同步方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述所述多头戴设备之间的视频帧同步方法的步骤或实现如权利要求7所述多头戴设备之间的视频帧同步方法的步骤。