CN115695923B - 弹幕人物遮罩显示方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明提供一种弹幕人物遮罩显示方法、装置、电子设备及存储介质，通过在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在客户端将通过时间戳确定蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer属性，在播放视频的过程中，根据maskLayer属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

Description

弹幕人物遮罩显示方法、装置、电子设备及存储介质

技术领域

本发明涉及视频播放技术领域，尤其涉及一种弹幕人物遮罩显示方法、装置、电子设备及存储介质。

背景技术

在当前的视频应用产品中基本都具有弹幕功能，通过弹幕功能能够为用户提供非常便捷、有趣的社交互动方式，能够极大的提升用户在视频应用产品内的活跃度及粘性，进而提升产品的使用度及留存。

但是，目前在视频播放的过程中，存在弹幕量过多会遮挡视频中的主要人物区域，影响观看效果的问题。

发明内容

有鉴于此，本发明实施例提供一种弹幕人物遮罩显示方法、装置、电子设备及存储介质，以解决现有视频播放过程中弹幕会遮挡视频中的主要人物区域，影响观看效果的问题。

为实现上述目的，本发明实施例提供如下技术方案：

本发明实施例第一方面公开了一种弹幕人物遮罩显示方法，应用于客户端，所述方法包括：

若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件并存储于本地；

当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据所述第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找所述当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；

若存在蒙版渲染资源信息，读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；

将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性；

在播放所述第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围；

若不存在蒙版渲染资源信息，查询触发前一次显示弹幕图层对应的显示范围为扣除特定人像的反选范围的时间戳，将所述时间戳作为遮罩时间戳；

计算当前播放时间戳与所述遮罩时间戳的差值；

判断所述差值是否大于阈值，以及查询弹幕遮罩效果是否存在；

若弹幕遮罩效果仍存在且差值大于阈值，关闭弹幕遮罩效果，等待下一次屏幕刷新率计时器刷新；

其中，所述遮罩文件预先基于人物视频帧画面在服务端生成，所述遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，所述时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒。

可选的，在将得到解压缩后的第二视频文件并存储于本地的过程中，包括：

若所述第二视频文件中存在遮罩文件，读取所述遮罩文件中每帧蒙版图片的蒙版图片名称；

根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；

将所述蒙版渲染资源信息集合至蒙版渲染资源集合中。

可选的，还包括：若当前为缓存离线视频时，下载并解压视频资源压缩包，并将解压后的视频资源存储于本地；

若所述视频资源中包含遮罩文件，读取所有遮罩文件中每帧蒙版图片的蒙版图片名称；

根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，每一遮罩文件的最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；

集合所述蒙版渲染资源信息得到蒙版渲染资源集合；

当播放离线视频时，读取所述蒙版渲染资源集合中的蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；

将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性；

根据maskLayer属性，在存在遮罩文件的当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

可选的，读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件，包括：

读取所述蒙版渲染资源信息中的遮罩文件包含的每秒N帧蒙版图片；

在异步线程中，基于当前播放器的尺寸和坐标，对每秒N帧蒙版图片进行形状变换，并以ScaleAspectFit填充模式进行缩放；

将缩放后的每秒N帧蒙版图片渲染至CALayer图层上。

可选的，当屏幕刷新率计时器刷新时，还包括：

判断所述客户端的显示帧率是否小于50fps；

若所述显示帧率小于50fps，关闭弹幕遮罩效果。

本发明实施例第二方面公开了一种弹幕人物遮罩显示方法，应用于服务端，所述方法包括：

对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像；

基于所述人物视频帧画面生成预设帧率的遮罩文件，所述预设帧率为每秒N帧蒙版图像，每一蒙版文件以时间戳格式命名，所述时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个遮罩文件的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒；

以每M分钟的播放进度对所述遮罩文件进行切片打包，并与所述视频文件进行压缩，得到包含遮罩文件的视频文件压缩资源包，M为大于等于1的正数；

当接收到客户端发送的缓存离线视频请求时，将所述视频文件压缩资源包缓存至客户端的本地存储；

当接收到客户端发送的在线播放视频请求时，将所述视频文件压缩资源包以每M分钟的播放进度分割为多个分片压缩包，分片下发至客户端的本地存储，M的取值为大于等于1的正数。

本发明实施例第三方面公开了一种弹幕人物遮罩显示装置，所述装置包括：

缓存模块，用于若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件；将所述第二视频文件存储于本地；

刷新模块，用于当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据所述第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找所述当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；若存在蒙版渲染资源信息，执行弹幕渲染模块；

弹幕渲染模块，用于读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性；

播放模块，用于在播放所述第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围；

其中，所述遮罩文件预先基于人物视频帧画面在服务端生成，所述遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，所述时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒。

本发明实施例第四方面公开了一种弹幕人物遮罩显示装置，所述装置包括：

识别模块，用于对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像；

遮罩文件生成模块，用于基于所述人物视频帧画面生成预设帧率的遮罩文件，所述预设帧率为每秒N帧蒙版图像，每一遮罩文件以时间戳格式命名，所述时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个蒙版文件的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒；

压缩模块，用于以每M分钟的播放进度对所述蒙版文件进行切片打包，并与所述视频文件进行压缩，得到包含遮罩文件的视频文件压缩资源包，M的取值为大于等于1的正数。

本发明实施例第五方面公开了一种电子设备，所述电子设备用于运行程序，其中，所述程序运行时执行如本发明实施例第一方面的弹幕人物遮罩显示方法，或者所述程序运行时执行如本发明实施例第二方面公开的弹幕人物遮罩显示方法。

本发明实施例第六方面公开了一种存储介质，所述存储介质包括存储程序，其中，在所述程序运行时控制所述存储介质所在设备执行如本发明实施例第一方面公开的弹幕人物遮罩显示方法，或者执行如本发明实施例第二方面公开的弹幕人物遮罩显示方法。

基于上述本发明实施例提供的一种弹幕人物遮罩显示方法、装置、电子设备及存储介质，在具体实现中，若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件；将所述第二视频文件存储于本地；当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据所述第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找所述当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；若存在蒙版渲染资源信息，读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性；在播放所述第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围；其中，所述遮罩文件预先基于人物视频帧画面在服务端生成，所述遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，所述时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识。在本发明实施例中，在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在客户端将通过时间戳确定的蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer属性，在播放视频的过程中，根据maskLayer属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种弹幕人物遮罩显示系统框架图；

图2为本发明实施例提供的一个去除人物部分的反选黑色蒙版图像示意图；

图3为本发明实施例提供的一种弹幕人物遮罩显示方法的流程图；

图4为本发明实施例提供的另一种弹幕人物遮罩显示方法的流程图；

图5为本发明实施例提供的一种弹幕人物遮罩显示装置的示意图；

图6为本发明实施例提供的另一种弹幕人物遮罩显示装置的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本申请中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

由背景技术可知目前在视频播放的过程中，存在弹幕量过多会遮挡视频中的主要人物区域，影响观看效果的问题。

因此，本发明实施例公开了一种弹幕人物遮罩显示方案，通过服务端预先基于人物视频帧画面生成遮罩文件，在客户端进行视频播放时，基于该遮罩文件逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

如图1所示，为本发明实施例公开的一种弹幕人物遮罩显示系统框架，主要包括客户端11、客户端12和服务端13。

服务端13对上传的视频文件进行人物识别，具体的可设置特定人物，对特定人物进行识别，确定出现特定人物的人物视频帧图像，确定该人物视频帧图像中人物形象的范围，生成如图2所示去除人物部分的反选黑色蒙版图像，具体的，有人物形象的画面生成每秒钟包含15至25张蒙版图片的遮罩文件，需要说明的是，根据人物动作变化的差异程度，会降低遮罩文件中蒙版图片的帧数。该遮罩文件为SVG格式。

服务端13按照时间戳格式为每一蒙版图片进行命名，该时间戳格式为h_m_s_ms，例如3分58秒200毫秒的蒙版图片被命名为“0_3_58_200.svg”。

需要说明的是，因人物出现是一段连续画面，而不同连续画面之间是离散的。所以人物视频帧图像实际上是分段的。服务端13在每段结束的最后一帧蒙版图片上生成标识“x”，例如3分58秒200毫秒的蒙版图片为最后一帧蒙版图片，则其命名为“0_3_58_400_x.svg”，用于代表该帧显示完后将没有下一帧遮罩需要显示。

服务端13以每2分钟的播放进度对遮罩文件进行切片打包，并与视频文件进行压缩，得到包含遮罩文件的视频文件压缩资源包。以便于后续客户端请求时下载。

客户端11向服务端13发送缓存离线视频请求，服务端13将该视频文件压缩资源包缓存至客户端11的本地临时存储文件中进行存储，具体的存储过程为：解压该视频资源压缩包，并基于解压后得到的遮罩文件控制弹幕图层的渲染范围，使得在播放该离线缓存视频时特定人物周围不渲染弹幕。

客户端12向服务端13发送在线播放视频请求，服务端13将视频文件压缩资源包以每2分钟的播放进度分割为多个分片压缩包，当在线播放当前段视频时，下载下一段视频对应的分片压缩包下发至客户端12，并解压后存储于本地临时存储文件中。在到达下一段视频播放时，基于该解压后的分片压缩包得到的遮罩文件控制弹幕图层的渲染范围，使得在播放该离线缓存视频时特定人物周围不渲染弹幕。

在客户端11和客户端12退出播放时，删除本地临时存储文件中已下载的遮罩文件，释放本地存储空间。

在本发明实施例公开的弹幕人物遮罩显示系统框架中，在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在客户端将通过时间戳确定的蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer 属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

如图3所示，为本发明实施例公开的一种弹幕人物遮罩显示方法的流程图，该方法应用于客户端，该客户端可以为上述图1示出的客户端，该方法主要包括如下步骤：

S301：判断当前触发的是在线播放视频还是离线缓存视频，若当前为在线播放视频，执行S302；若当前为离线缓存视频，执行离线缓存视频流程。

S302：在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件并存储至本地。

需要说明的是，在线播放视频是分段缓存然后再播放的，因此在播放当前时段的第一视频的过程中，下载并解压下一时段的视频文件，然后将解压得到的视频文件存储于本地临时缓存文件夹中，等待该时段到达时，读取相应的视频文件进行播放。

在具体执行S302的过程中，在下载并解压下一时段的第二视频文件之后，将得到的解压缩后的第二视频文件存储于本地临时缓存文件夹的过程中，确认该段第二视频文件中是否包含遮罩文件，如果存在遮罩文件则基于时间戳确认遮罩文件中的蒙版图片出现在视频文件中的时间位置，并将确定位置的蒙版图片，即遮罩文件集合至蒙版渲染资源信息集合中。

其中，遮罩文件预先基于人物视频帧画面生成，遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒。该蒙版文件优选的为svg格式，但也可以是其他格式，在后续渲染的过程中进行适应性的调整。

例如：1小时52分08秒400毫秒的蒙版图片被命名为“1_52_8_400.svg”。

在本发明一实施例中，将解压缩后的第二视频文件存储至本地的过程中，首先，确认第二视频文件中是否存在遮罩文件，如果存在，则读取遮罩文件中每帧蒙版图片的蒙版图片名称。

然后，根据蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息。该空资源信息用于指示蒙版渲染到此停止。

最后，将蒙版渲染资源信息集合至蒙版渲染资源集合中。

S303：监控屏幕刷新率计时器是否刷新，若刷新，执行S304，若未刷新执行S303。

在具体执行S303的过程中，以当前屏幕刷新帧的频率发送通知，告知需要渲染遮罩的当前视频画面帧的时间戳，随着视频播放启动暂停屏幕刷新率计时器。

在本发明一实施例中，若屏幕刷新率计时器刷新，则同时计算播放当前视频的客户端的显示帧率，并判断该显示帧率是否小于50fps。如果显示帧率小于50fps，关闭弹幕遮罩效果，在本次刷新阶段不启动弹幕遮罩效果。因为显示帧率小于50fps会影响用户观看效果，所以需要关闭弹幕遮罩效果，来缓解CPU压力。

S304：调用存储于本地的第二视频文件，根据第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；若存在，执行S305，若不存在，执行S308。

S305：读取蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件。

在异步线程中具体执行S305，首先，读取蒙版渲染资源信息中的遮罩文件包含的每秒N帧蒙版图片。

然后，在异步线程中，基于当前播放器的尺寸和坐标，对每秒N帧蒙版图片进行形状变换，并以ScaleAspectFit填充模式进行缩放。

具体以ScaleAspectFit填充模式进行缩放的过程为：使蒙版图片居中，缩放至蒙版图片的最小边与播放容器重合，剩余部分透明。

最后，将缩放后的每秒N帧蒙版图片渲染至CALayer图层上。

具体的，将缩放后的每秒N帧蒙版图片渲染至CALayer图层上之后，透明的部分填补上不透明的view。

S306：将渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性。

回归到主线线程执行S306，将渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性。

S307：在播放第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

在具体执行S307播放第二视频文件的过程中，利用弹幕图层的maskLayer属性的透明部分不显示、不透明部分才显示的机制，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层的显示范围为扣除人像的反选范围。

在执行S307之后，返回执行S303，等待下一次屏幕刷新率计时器刷新。

S308：查询触发前一次显示弹幕图层对应的显示范围为扣除特定人像的反选范围的时间戳，将所述时间戳作为遮罩时间戳。

在具体执行S308的过程中，查询上一次显示弹幕遮罩效果的时间戳，将该时间戳作为遮罩时间戳。

S309：计算当前播放时间戳与遮罩时间戳的差值。

S310：判断差值是否大于阈值，以及查询弹幕遮罩效果是否存在。若弹幕遮罩效果仍存在且差值大于阈值，执行S311，反之执行S303。

在S310中，该阈值的取值范围包括0.3s至0.5s。

在具体执行S310的过程中，若弹幕遮罩效果仍存在且差值大于阈值，则说明后续帧已不再需要遮罩，则关闭弹幕遮罩效果。

S311：关闭弹幕遮罩效果，执行S303等待下一次屏幕刷新率计时器刷新。

需要说明的是，在退出播放时，删除本地临时存储文件中已下载的遮罩文件，释放本地存储空间。

在本发明实施例公开的弹幕人物遮罩显示方法中，在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在客户端采用分片式处理，即播即下载，将通过时间戳确定的蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

基于上述本发明实施例公开的弹幕人物遮罩显示方法，在执行S301若当前为离线缓存视频，执行离线缓存视频流程。该离线缓存视频流程如图4所示，主要包括如下步骤：

S401：若当前为缓存离线视频时，下载并解压视频资源压缩包，并将解压后的视频资源压缩包存储于本地。

S402：若视频资源中包含遮罩文件，读取所有遮罩文件中每帧蒙版图片的蒙版图片名称。

S403：根据蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息。

在S403中，每一遮罩文件的最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息。

S404：集合蒙版渲染资源信息得到蒙版渲染资源集合。

S405：当播放离线视频时，读取蒙版渲染资源集合中的蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件。

在具体执行S405中的读取蒙版渲染资源集合中的蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件的执行过程与上述S305的执行过程相同，可参考，这里不再赘述。

S406：将渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性。

具体执行S406的过程与上述S306的执行过程相同，可参考，这里不再赘述。

S407：根据maskLayer属性，在存在遮罩文件的当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

具体执行S407的过程与上述S307的执行过程相似，可参考，这里不再赘述。

在本发明实施例公开的弹幕人物遮罩显示方法中，与在线播放视频不同的是将完整的视频文件压缩包解压缩存储至本地临时缓存文件夹中，获取所有遮罩文件的名称，生成对应的蒙版渲染资源集合。同样的在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在客户端将通过时间戳确定蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer 属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

基于上述本发明实施例公开的一种，本发明实施例还公开了另一种弹幕人物遮罩显示方法，该弹幕人物遮罩显示方法应用于服务端，该服务端可以为图1中示出的服务端。该弹幕人物遮罩显示方法主要包括：

S501：对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像。

S502：基于所述人物视频帧画面生成预设帧率的遮罩文件。

在S502中，预设帧率为每秒N帧蒙版图像，每一蒙版文件以时间戳格式命名，所述时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个蒙版文件的命名中携带有结束标识。

S503：以每M分钟的播放进度对所述蒙版文件进行切片打包，并与所述视频文件进行压缩，得到包含蒙版文件的视频文件压缩资源包。

S504：当接收到客户端发送的缓存离线视频请求时，将所述视频文件压缩资源包缓存至客户端的本地存储。

S505：当接收到客户端发送的在线播放视频请求时，将所述视频文件压缩资源包以每M分钟分割为多个分片压缩包，分片下发至客户端的本地存储。

在S505中，M的取值为大于等于1的正数。优选的M的取值为2。

在本发明实施例公开的弹幕人物遮罩显示方法中，在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，以便于后续客户端请求在线播放视频或者离线缓存视频后，在播放视频的过程中，将通过时间戳确定蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer 属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

基于上述本发明实施例公开的弹幕人物遮罩显示方法，本发明实施例还公开了一种弹幕人物遮罩显示装置，该装置可设置于客户端，该客户端可以为图1示出的客户端，该弹幕人物遮罩显示装置如图5所示，主要包括：缓存模块51、刷新模块52、弹幕渲染模块53和播放模块54。

缓存模块51，用于若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件；将第二视频文件存储于本地。

刷新模块52，用于当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；若存在蒙版渲染资源信息，执行弹幕渲染模块53。

弹幕渲染模块53，用于读取蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；将渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性；

播放模块54，用于在播放第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

其中，遮罩文件预先基于人物视频帧画面生成，该遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25。

在本发明一实施例中，缓存模块51在将得到解压缩后的第二视频文件并存储于本地的过程中，具体包括：

若所述第二视频文件中存在遮罩文件，读取所述遮罩文件中每帧蒙版图片的蒙版图片名称；根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；将所述蒙版渲染资源信息集合至蒙版渲染资源集合中。

在本发明一实施例中，缓存模块51还用于：若当前为缓存离线视频时，下载并解压视频资源压缩包，并将解压后的视频资源存储于本地；若所述视频资源中包含遮罩文件，读取所有遮罩文件中每帧蒙版图片的蒙版图片名称；根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，每一遮罩文件的最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；集合所述蒙版渲染资源信息得到蒙版渲染资源集合。

在本发明一实施例中，弹幕渲染模块53，还用于当播放离线视频时，读取所述蒙版渲染资源集合中的蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer 属性。

播放模块54还用于：根据maskLayer属性，在存在遮罩文件的当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

在本发明一实施例中，该弹幕人物遮罩显示装置还包括：

查询模块，用于若不存在蒙版渲染资源信息，查询触发前一次显示弹幕图层对应的显示范围为扣除特定人像的反选范围的时间戳，将所述时间戳作为遮罩时间戳。

关闭效果模块，用于计算当前播放时间戳与所述遮罩时间戳的差值；判断所述差值是否大于阈值，以及查询弹幕遮罩效果是否存在；若弹幕遮罩效果仍存在且差值大于阈值，关闭弹幕遮罩效果，等待下一次屏幕刷新率计时器刷新。

在本发明一实施例中，该读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件的弹幕渲染模块53，具体用于：

读取所述蒙版渲染资源信息中的遮罩文件包含的每秒N帧蒙版图片；在异步线程中，基于当前播放器的尺寸和坐标，对每秒N帧蒙版图片进行形状变换，并以ScaleAspectFit 填充模式进行缩放；将缩放后的每秒N帧蒙版图片渲染至CALayer图层上。

在本发明一实施例中，该刷新模块52还用于：当屏幕刷新率计时器刷新时，判断所述客户端的显示帧率是否小于50fps；若所述显示帧率小于50fps，关闭弹幕遮罩效果。

在本发明实施例公开的弹幕人物遮罩显示装置中，基于服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，在线播放视频或者离线缓存视频后，在播放视频的过程中，将通过时间戳确定蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer 属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

基于上述本发明实施例公开的弹幕人物遮罩显示方法，本发明实施例还公开了一种弹幕人物遮罩显示装置，该装置可设置于服务端，该服务端可以为图1示出的服务端。该弹幕人物遮罩显示装置如图6所示包括：识别模块61、遮罩文件生成模块62和压缩模块63。

识别模块61，用于对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像。

遮罩文件生成模块62，用于基于人物视频帧画面生成预设帧率的遮罩文件，预设帧率为每秒N帧蒙版图像，每一蒙版文件以时间戳格式命名，时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个蒙版文件的命名中携带有结束标识。

压缩模块63，用于以每M分钟的播放进度对遮罩文件进行切片打包，并与所述视频文件进行压缩，得到包含遮罩文件的视频文件压缩资源包，M的取值为大于等于1的正数。

该弹幕人物遮罩显示装置还包括下发模块，该才发模块用于当接收到客户端发送的缓存离线视频请求时，将所述视频文件压缩资源包缓存至客户端的本地存储；当接收到客户端发送的在线播放视频请求时，将所述视频文件压缩资源包以每M分钟的播放进度分割为多个分片压缩包，分片下发至客户端的本地存储，M的取值为大于等于1的正数。

本发明实施例提供了一种电子设备，所述电子设备用于运行程序，其中，所述程序运行时执行如上述实施例公开的适用于客户端的弹幕人物遮罩显示方法，或者所述程序运行时执行如上述实施例公开的适用于服务端的弹幕人物遮罩显示方法。

本发明实施例提供了一种存储介质，所述存储介质包括存储程序，其中，在所述程序运行时控制所述存储介质所在设备执行上述图3示出的弹幕人物遮罩显示方法，或者执行如上述图4示出的弹幕人物遮罩显示方法。

综上所述，本发明实施例公开的弹幕人物遮罩显示方案，通过在服务端预先基于人物视频帧画面生成遮罩文件，并采用时间戳格式命名遮罩文件中的蒙版图片，以便于后续客户端请求在线播放视频或者离线缓存视频后，在播放视频的过程中，将通过时间戳确定蒙版图片渲染至CALayer图层上，并将其设置为弹幕图层的maskLayer 属性，在播放视频的过程中，根据maskLayer 属性在存在遮罩文件时触发弹幕遮罩效果，逐帧控制弹幕图层对应的显示范围为扣除特定人像的反选范围，从而实现在播放视频时使弹幕避开特定人物，达到更好的观看效果，提升用户体验的目的。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的系统及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种弹幕人物遮罩显示方法，其特征在于，应用于客户端，所述方法包括：

若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件并存储于本地；

当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据所述第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找所述当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；

若存在蒙版渲染资源信息，读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；

将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性；

在播放所述第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围；

若不存在蒙版渲染资源信息，查询触发前一次显示弹幕图层对应的显示范围为扣除特定人像的反选范围的时间戳，将所述时间戳作为遮罩时间戳；

计算当前播放时间戳与所述遮罩时间戳的差值；

判断所述差值是否大于阈值，以及查询弹幕遮罩效果是否存在；

若弹幕遮罩效果仍存在且差值大于阈值，关闭弹幕遮罩效果，等待下一次屏幕刷新率计时器刷新；

其中，所述遮罩文件预先基于人物视频帧画面在服务端生成，所述遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，所述时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒。

2.根据权利要求1所述的方法，其特征在于，在将得到解压缩后的第二视频文件并存储于本地的过程中，包括：

若所述第二视频文件中存在遮罩文件，读取所述遮罩文件中每帧蒙版图片的蒙版图片名称；

根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；

将所述蒙版渲染资源信息集合至蒙版渲染资源集合中。

3.根据权利要求1所述的方法，其特征在于，还包括：

若当前为缓存离线视频时，下载并解压视频资源压缩包，并将解压后的视频资源存储于本地；

若所述视频资源中包含遮罩文件，读取所有遮罩文件中每帧蒙版图片的蒙版图片名称；

根据所述蒙版图片名称中的时间戳和遮罩文件地址生成对应的蒙版渲染资源信息，其中，每一遮罩文件的最后一帧蒙版图片对应的蒙版渲染资源信息中的遮罩文件地址为空资源信息；

集合所述蒙版渲染资源信息得到蒙版渲染资源集合；

当播放离线视频时，读取所述蒙版渲染资源集合中的蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；

将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性；

根据maskLayer属性，在存在遮罩文件的当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围。

4.根据权利要求1所述的方法，其特征在于，读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件，包括：

读取所述蒙版渲染资源信息中的遮罩文件包含的每秒N帧蒙版图片；

在异步线程中，基于当前播放器的尺寸和坐标，对每秒N帧蒙版图片进行形状变换，并以ScaleAspectFit填充模式进行缩放；

将缩放后的每秒N帧蒙版图片渲染至CALayer图层上。

5.根据权利要求1至4中任一项所述的方法，其特征在于，当屏幕刷新率计时器刷新时，还包括：

判断所述客户端的显示帧率是否小于50fps；

若所述显示帧率小于50fps，关闭弹幕遮罩效果。

6.一种弹幕人物遮罩显示方法，其特征在于，应用于服务端，所述方法包括：

对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像；

基于所述人物视频帧画面生成预设帧率的遮罩文件，所述预设帧率为每秒N帧蒙版图像，每一蒙版文件以时间戳格式命名，所述时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个遮罩文件的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒；

以每M分钟的播放进度对所述遮罩文件进行切片打包，并与所述视频文件进行压缩，得到包含遮罩文件的视频文件压缩资源包，M为大于等于1的正数；

当接收到客户端发送的缓存离线视频请求时，将所述视频文件压缩资源包缓存至客户端的本地存储；

当接收到客户端发送的在线播放视频请求时，将所述视频文件压缩资源包以每M分钟的播放进度分割为多个分片压缩包，分片下发至客户端的本地存储，M的取值为大于等于1的正数。

7.一种弹幕人物遮罩显示装置，其特征在于，所述装置包括：

缓存模块，用于若当前为在线播放视频时，在播放当前时段的第一视频的过程中，下载并解压下一时段的第二视频文件，得到解压缩后的第二视频文件；将所述第二视频文件存储于本地；

刷新模块，用于当屏幕刷新率计时器刷新时，调用存储于本地的第二视频文件，根据所述第二视频文件的当前播放时间戳在本地的蒙版渲染资源集合中，查找所述当前播放时间戳起始两帧内是否存在蒙版渲染资源信息；若存在蒙版渲染资源信息，执行弹幕渲染模块；

弹幕渲染模块，用于读取所述蒙版渲染资源信息，并在异步线程中进行渲染，得到渲染至CALayer图层上的遮罩文件；将所述渲染至CALayer图层上的遮罩文件设置为弹幕图层的maskLayer属性；

播放模块，用于在播放所述第二视频文件的过程中，根据maskLayer属性，在存在遮罩文件时触发弹幕遮罩效果，使当前播放时间戳控制弹幕图层对应的显示范围为扣除特定人像的反选范围；

其中，所述遮罩文件预先基于人物视频帧画面在服务端生成，所述遮罩文件的预设帧率为每秒N帧蒙版图片，每帧蒙版图片的名称以时间戳格式命名，所述时间戳格式为h_m_s_ms，每一遮罩文件中最后一帧蒙版图片的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒。

8.一种弹幕人物遮罩显示装置，其特征在于，所述装置包括：

识别模块，用于对上传的视频文件进行特定人物识别，得到出现特定人物的人物视频帧图像；

遮罩文件生成模块，用于基于所述人物视频帧画面生成预设帧率的遮罩文件，所述预设帧率为每秒N帧蒙版图像，每一遮罩文件以时间戳格式命名，所述时间戳格式为h_m_s_ms，不连续的蒙版文件中最后一个蒙版文件的命名中携带有结束标识，N的取值范围包括15至25，h为小时、m为分钟、s为秒、ms为毫秒；

压缩模块，用于以每M分钟的播放进度对所述蒙版文件进行切片打包，并与所述视频文件进行压缩，得到包含遮罩文件的视频压缩资源包，M的取值为大于等于1的正数。

9.一种电子设备，其特征在于，所述电子设备包括处理器及存储器；

所述存储器用于存储计算机程序；

所述处理器用于根据所述计算机程序执行如权利要求1至5中任一所述的弹幕人物遮罩显示方法，或者执行如权利要求6所述的弹幕人物遮罩显示方法。

10.一种存储介质，其特征在于，所述存储介质包括存储程序，其中，在所述程序运行时控制所述存储介质所在设备执行如权利要求1至5中任一所述的弹幕人物遮罩显示方法，或者执行如权利要求6所述的弹幕人物遮罩显示方法。

Images