CN112752164B - 一种隐藏式字幕显示方法、智能终端以及存储介质 - Google Patents

Abstract

本发明公开了一种隐藏式字幕显示方法、智能终端及存储介质，所述隐藏式字幕显示方法包括：获取隐藏式字幕数据中的字符属性；根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕；将所述隐藏式字幕显示在视频帧上。本发明提供的隐藏式字幕显示方法，通过在隐藏式字幕绘制过程中，根据需要显示的字幕的字符属性调用对应的绘图引擎，实现了针对不同的字符属性绘制需要调用不同的绘图引擎，避免了在隐藏式字幕绘制过程中，始终使用同一种CPU占用率高的绘图引擎，在保证隐藏式字幕绘制成功的基础上，降低了隐藏式字幕绘制线程的CPU占用率。

Description

一种隐藏式字幕显示方法、智能终端以及存储介质

技术领域

本发明涉及视频处理技术领域，特别涉及一种隐藏式字幕显示方法、智能终端以及存储介质。

背景技术

隐藏式字幕(CC，Closed Captioning)是为了方便听力障碍或者有特殊需要的人士观看视频所设计的字幕，由于隐藏式字幕中除了包含视频中人物的对话内容之外，还需要对视频中的场景进行必要的解释，使得观看者能够完全实现无音观看视频，所以隐藏式字幕中往往有大量的文字需要被显示出来，这样，隐藏式字幕的绘制线程会占用比较多的CPU资源，会导致设备运行卡顿甚至无法运行等问题。

因此现有技术还有待改进和提高。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种隐藏式字幕显示方法、智能终端及存储介质，旨在解决现有技术中隐藏式字幕绘制线程CPU占用率过高，造成设备运行卡顿的问题。

为了解决上述技术问题，本发明所采用的技术方案如下：

一种隐藏式字幕显示方法，其中，所述方法包括：

获取隐藏式字幕数据中的字符属性；

根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕；

将所述隐藏式字幕显示在视频帧上。

所述的隐藏式字幕显示方法，其中，所述获取隐藏字幕数据中的字符属性之前包括：

获取隐藏式字幕设置信息，当所述隐藏式字幕设置信息为显示所述隐藏式字幕时，获取与视频对应的所述隐藏式字幕数据。

所述的隐藏式字幕显示方法，其中，所述获取隐藏式字幕数据中的字符属性具体包括：

获取所述隐藏式字幕数据的时间轴；

获取所述视频的视频帧对应的时间点，根据所述时间点获取所述时间轴上与所述时间点对应的时间段，获取所述时间段对应的所述隐藏式字幕的所述字符属性。

所述的隐藏式字幕显示方法，其中，所述字符属性包括：描边色属性和组合字符属性。

所述的隐藏式字幕显示方法，其中，所述绘图引擎包括第一绘图引擎和第二绘图引擎，所述根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕具体包括：

当所述描边色属性为有描边色和/或所述组合字符为组合字符时，调用所述第一绘图引擎绘制所述隐藏式字幕；

当所述描边色属性为无描边色且所述组合字符属性为非组合字符时，调用所述第二绘图引擎绘制所述隐藏式字幕。

所述的隐藏式字幕显示方法，其中，所述第二绘图引擎的CPU占用率低于所述第一绘图引擎的CPU占用率。

所述的隐藏式字幕显示方法，其中，所述第一绘图引擎为Skia绘图引擎，所述第二绘图引擎为FreeType绘图引擎。

所述的隐藏式字幕显示方法，其中，所述将所述隐藏式字幕显示在视频帧画面上具体包括：

根据所述时间轴将所述隐藏式字幕显示在当前播放视频的视频帧上。

一种智能终端，其中，所述智能终端包括：处理器、与处理器通信连接的存储介质，所述存储介质适于存储多条指令，所述处理器适于调用所述存储介质中的指令，以执行实现上述任一项所述的隐藏式字幕显示方法的步骤。

一种存储介质，其中，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现上述任一项所述的隐藏式字幕显示方法的步骤。

有益效果：与现有技术相比，本发明提供了一种隐藏式字幕显示方法，通过在隐藏式字幕绘制过程中，根据需要显示的字幕的字符属性调用对应的绘图引擎，实现了针对不同的字符属性绘制需要调用不同的绘图引擎，避免了在隐藏式字幕绘制过程中，始终同一种CPU占用率高的绘图引擎，在保证隐藏式字幕绘制成功的基础上，降低了隐藏式字幕绘制线程的CPU占用率。

附图说明

图1为本发明提供的隐藏式字幕显示方法的实施例一的流程图；

图2为本发明提供的隐藏式字幕显示方法的实施例一中S100的子步骤流程图；

图3为本发明提供的隐藏式字幕显示方法中字符属性为组合字符的字符示意图；

图4为本发明提供的隐藏式字幕显示方法中字符属性为有描边色的字符示意图；

图5为本发明提供的隐藏式字幕显示方法中字符属性为无描边色的字符示意图；

图6为本发明提供的智能终端的实施例的结构原理图。

具体实施方式

为使本发明的目的、技术方案及效果更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。

本发明提供的隐藏式字幕显示方法，可以应用于终端中。其中，终端可以但不限于是各种个人计算机、笔记本电脑、手机、平板电脑、车载电脑和便携式可穿戴设备。

实施例一

请参照图1，图1为本发明提供的隐藏式字幕显示方法的实施例一的流程图。所述方法包括：

S100、获取隐藏式字幕数据中的字符属性。

对于提供隐藏式字幕功能的视频来说，会配有对应的隐藏式字幕数据，所述隐藏式字幕数据中包括了所述视频的隐藏式字幕的显示内容、字符属性、显示时间等信息。所述字符属性表示了对应的显示内容，即，字符属性反映了字符是以什么样的形式显示出来，例如，字符的字号、字体、颜色等等。

由于隐藏式字幕显示的文字较多，对于不需要隐藏式字幕的观看者来说，隐藏式字幕会影响观看效果，因此，因此，在本实施例中，在获取所述隐藏式字幕数据中的字符属性之前还包括：

获取隐藏式字幕设置信息，当所述隐藏式字幕设置信息为显示所述隐藏式字幕时，获取与视频对应的所述隐藏式字幕数据。这样，在观看所述视频时，需要所述隐藏式字幕的观看者，可以设置显示所述隐藏式字幕，不需要所述隐藏式字幕的观看者，可以设置不显示所述隐藏式字幕。

下面请参照图2，所述获取隐藏式字幕数据中的字符属性具体包括：

S110、获取所述隐藏式字幕数据的时间轴。

具体地，所述隐藏式字幕数据中包括时间轴，所述隐藏式字幕数据中的时间轴反映了所述隐藏式字幕在何时被显示。

S120、获取所述视频的视频帧对应的时间点，根据所述时间点获取所述时间轴上与所述时间点对应的时间段，根据所述时间段获取所述时间段对应的所述字符属性。

前面已经说明，所述时间轴反映了所述隐藏式字幕在何时被显示，具体地，是反映所述隐藏式字幕中的某一句字幕在哪个时间段被显示，例如“你好”这句字幕在10分30秒到10分32秒内需要被显示。在绘制所述视频对应的所述隐藏式字幕时，是获取当前播放的所述视频帧对应的时间点，例如，当前播放的视频帧位于所述视频的10分31秒，获取所述时间轴中包含所述时间点的时间段，例如，所述时间点为10分31秒，在所述时间轴中，包含所述时间点的所述时间段为10分30秒到10分32秒，10分30秒到10分32秒的时间段对应的字幕为“你好”，那么获取“你好”这句字幕的字符属性。

具体地，所述字符属性是预先设置在所述隐藏式字幕数据中，通过解码所述隐藏式字幕数据可以得到所述字符属性。

在一种可能的实现方式中，为了节约CPU资源，在所述隐藏式字幕数据设置信息为不显示所述隐藏式字幕时，不对所述隐藏式字幕数据进行解码和后续的绘制程序。当在所述视频的播放过程中，接收到将所述隐藏式字幕设置数据设置为显示所述隐藏式字幕的指令时，则从接收到所述指令时开始进行所述隐藏式字幕设置数据的解码并绘制，也就是说，绘制接收到所述指令之后的所述隐藏式字幕。

在获取到所述隐藏式字幕的字符属性后，可以根据所述字符属性调用对应的绘图引擎来绘制所述隐藏式字幕，在本实施例中，所述字符属性包括：组合字符属性以及描边色属性。

所述描边色属性反映了所述隐藏式字幕中字符是否有描边色，所述组合字符属性反映了所述隐藏式字幕中字符是否为组合字符。

所述组合字符属性包括组合字符和非组合字符，所述组合字符属性反映了对应的所述隐藏式字幕中的字符是否为组合字符。具体地，组合字符是指所述字符不是单一的一种字符，而是由两种不同的标准字符组成的字符，例如，文字加下划线组成的字符、文字外加了一个圈形字符组成的字符等，如图3所示，图3中框出的部分即为组合字符的示例。

具体地，所述描边色属性包括有描边色和无描边色。描边色，又叫字符装饰色(character ornament colour)，是指所述字符的主体边缘有的一圈不同于字符主体颜色的描边颜色。而当所述字符的描边色属性为有描边色时，所述字符除了有主体颜色之外，字符边缘有一圈其他颜色的描边处理，如图4所示，图4中框出的部分即为有描边色的示例，可以看到，图4中的字符周围有一圈不同于主体颜色的描边色。为了便于理解描边色，请进一步参考图5，图5中的字符对应的字符的所述字符属性为无描边色，可以看到，图5中的字符只有主体颜色和背景颜色(框出的部分背景色为透明)，字符边缘没有其他颜色的描边处理。

根据前面对组合字符的说明，可以看出，当所述组合字符属性为组合字符时，反映了对应的所述隐藏式字幕的字符不是标准字符，当所述组合字符属性为非组合字符时，反映了对应的所述隐藏式字幕的字符为标准字符，而绘制非标准字符时需要大量的算法实现将两种字符组合起来，因此，不难看出，对于所述组合字符属性为非组合字符的所述隐藏式字幕，绘制过程会与绘制所述组合字符属性为组合字符的所述隐藏式字幕简单，那么，对于绘图引擎的要求也低于所述组合字符属性为组合字符时对绘图引擎的要求。同样的，根据前面对描边色的说明，可以看出，当所述描边色属性为有描边色属性时，反映了在绘制对应的所述隐藏式字符的字符时，除了字符主体颜色和背景颜色之外，还需要根据字符的形状在字符边缘增加描边，同样需要大量的算法来实现，不难看出，对于所述描边色属性为无描边色的所述隐藏式字幕，绘制过程会比绘制所述描边色属性为有描边色的所述隐藏式字幕简单，对于绘图引擎的要求也低于所述描边色属性为有描边色时对绘图引擎的要求。也就是说，对于不同的所述字体属性，对绘图引擎的要求不一样，在本实施例中，根据不同的所述字体属性，对应调用不同的绘图引擎来满足绘制要求。

具体地，在本实施例中，预先设置有两种不同的绘图引擎，为了便于说明，下面分别成为第一绘图引擎和第二绘图引擎，即，所述绘图引擎包括第一绘图引擎和第二绘图引擎。所述根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕包括：

S210、当所述描边色属性为有描边色和/或所述组合字符为组合字符时，调用所述第一绘图引擎绘制所述隐藏式字幕；

S220、当所述描边色属性为无描边色且所述组合字符属性为非组合字符时，调用所述第二绘图引擎绘制所述隐藏式字幕。

具体地，所述第二绘图引擎的CPU占用率低于所述第一绘图引擎。当所述字符属性对应的字符能够通过简单的绘制过程实现绘制，对绘图引擎的要求更低时，此时调用CPU占用率低的所述第二绘图引擎完成绘制。当所述字符属性对应的字符绘制过程更复杂，对绘图引擎的要求更高时，调用CPU占用率高的所述第一绘图引擎完成绘制。

当所述组合字符属性为组合字符时，对绘图引擎的要求高，因此，此时调用第一绘图引擎绘制所述隐藏式字幕，而当所述描边色属性为有描边色时，对绘图引擎的要求高，因此，此时调用所述第一绘图引擎绘制所述隐藏式字幕，也就是说，当所述隐藏式字幕对应的字符属性中，所述组合字符属性为组合字符以及所述描边色属性为有描边色两个条件中只要满足其中之一，便调用所述第一绘图引擎绘制所述隐藏式字幕，即，所述组合字符属性为组合字符和/或所述描边色属性为有描边色时，调用所述第一绘图引擎绘制所述隐藏式字幕。而当所述组合字符属性为非组合字符且所述描边色属性为无描边色时，对绘图引擎的要求低，此时调用所述第二绘图引擎绘制即可以完成所述隐藏式字幕的绘制，则调用CPU占用率低的所述第二绘图引擎绘制所述隐藏式字幕，既可以实现完成所述隐藏式字幕的绘制，还可以绘制线程的CPU占用率。

在一种可能的实现方式中，所述第一绘图引擎可以为Skia(一个2D向量图形处理函数库)绘图引擎，所述第二绘图引擎可以为Freetype(一个开源、高质量且可移植的字体引擎)绘图引擎，当然，本领域技术人员可以根据上述说明，选用不同的绘图引擎来实现本发明所提供的所述隐藏式字幕显示方法，例如，将所述第一绘图引擎设置为pango－cairo(pango是一个开放源代码的自由函数库，用于高质量地渲染国际化的文字，cairo是一个C语言编写的开源绘图引擎)绘图引擎，将所述第二绘图引擎设置为Freetype绘图引擎，本发明对此不做具体的限定。

下面参照图1，在根据所述字符属性调用对应的绘图引起绘制所述隐藏式字幕之后，所述隐藏式字幕显示方法还包括：

S300、将所述隐藏式字幕显示在视频帧上。

在所述隐藏式字幕绘制完成后，将所述隐藏式字幕显示在视频帧上，实现让用户结合所述隐藏式字幕观赏所述视频。具体地，是根据所述隐藏式字幕对应的所述时间轴将所述隐藏式字幕显示在视频帧上，所述隐藏式字幕的时间轴是根据所述视频对应设置的，因此，根据所述时间轴显示所述隐藏式字幕，保证所述隐藏制字幕与视频播放内容相匹配。

不难看出，本实施例通过在所述隐藏式字幕的绘制线程中引入两种CPU占用率不同的绘图引擎，对于具有不同的字符属性的所述隐藏式字幕，对应调用不同的绘图引擎进行绘制，相对于只使用一种绘图引擎满足所有字符属性的隐藏式字幕绘制的方案，合理分配了隐藏式字幕绘制线程中绘图引擎的CPU占用率，实现降低隐藏式字幕绘制线程CPU占用率，提升设备运行流畅性。如表1所示，表1是根据本发明提供的隐藏式字幕显示方法进行所述隐藏式字幕绘制和根据现有技术进行所述隐藏式字幕绘制的线程CPU占用率比较表(备注：测试码流：ISDB0466－20120724＿231315＿[63.1TV Brasil HD]＿[]ginga(NCL).ts，备注：由于实时显示隐藏式字幕的字符数量不同，导致CPU占用率在不停的变化，因此表中的CPU占用率为一个范围值)。可以看出，经过实际验证，本发明提供的一种隐藏式字幕显示方法，可以明显地降低线程CPU占用率。

表1

	现有技术	本发明
			线程CPU占用率(p)	80％＜p＜95％	65％＜p＜75％

综上所述，本实施例提供一种隐藏式字幕显示方法，通过在隐藏式字幕绘制过程中，根据需要显示的字幕的字符属性调用对应的绘图引擎，实现了针对不同的字符属性绘制需要调用不同的绘图引擎，避免了在隐藏式字幕绘制过程中，始终使用同一种CPU占用率高的绘图引擎，在保证隐藏式字幕绘制成功的基础上，降低了隐藏式字幕绘制线程的CPU占用率。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本发明所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

实施例二

基于上述实施例，本发明还提供了一种智能终端，其原理框图可以如图6所示。该智能终端包括通过系统总线连接的处理器、存储器、网络接口、显示屏、温度传感器。其中，该智能终端的处理器用于提供计算和控制能力。该智能终端的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该智能终端的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种隐藏式字幕显示方法。该智能终端的显示屏可以是液晶显示屏或者电子墨水显示屏，该智能终端的温度传感器是预先在智能终端内部设置，用于检测内部设备的当前运行温度。

本领域技术人员可以理解，图6中示出的原理框图，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的智能终端的限定，具体的智能终端可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种智能终端，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时至少可以实现以下步骤：

获取隐藏式字幕数据中的字符属性；

根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕；

将所述隐藏式字幕显示在视频帧上。

其中，所述获取隐藏字幕数据中的字符属性之前包括：

获取隐藏式字幕设置信息，当所述隐藏式字幕设置信息为显示所述隐藏式字幕时，获取与视频对应的所述隐藏式字幕数据。

其中，所述获取隐藏式字幕数据中的字符属性具体包括：

获取所述隐藏式字幕数据的时间轴；

获取所述视频的视频帧对应的时间点，根据所述时间点获取所述时间轴上与所述时间点对应的时间段，获取所述时间段对应的所述隐藏式字幕的所述字符属性。

其中，所述字符属性包括：描边色属性和组合字符属性。

其中，所述绘图引擎包括第一绘图引擎和第二绘图引擎，所述根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕具体包括：

当所述描边色属性为有描边色和/或所述组合字符为组合字符时，调用所述第一绘图引擎绘制所述隐藏式字幕；

当所述描边色属性为无描边色且所述组合字符属性为非组合字符时，调用所述第二绘图引擎绘制所述隐藏式字幕。

其中，所述第二绘图引擎的CPU占用率低于所述第一绘图引擎的CPU占用率。

其中，所述第一绘图引擎为Skia绘图引擎，所述第二绘图引擎为FreeType绘图引擎。

其中，所述将所述隐藏式字幕显示在视频帧画面上具体包括：

根据所述时间轴将所述隐藏式字幕显示在当前播放视频的视频帧上。

实施例三

本发明还提供了一种存储介质，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现上述实施例所述的隐藏式字幕显示方法的步骤。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (6)

1.一种隐藏式字幕显示方法，其特征在于，所述方法包括：

获取隐藏式字幕数据中的字符属性；

根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕；

将所述隐藏式字幕显示在视频帧上；

所述字符属性包括：描边色属性和组合字符属性；

所述绘图引擎包括第一绘图引擎和第二绘图引擎，所述根据所述字符属性调用对应的绘图引擎绘制所述隐藏式字幕具体包括：

当所述描边色属性为有描边色和/或所述组合字符属性为组合字符时，调用所述第一绘图引擎绘制所述隐藏式字幕；

当所述描边色属性为无描边色且所述组合字符属性为非组合字符时，调用所述第二绘图引擎绘制所述隐藏式字幕；

所述第二绘图引擎的CPU占用率低于所述第一绘图引擎的CPU占用率；

所述第一绘图引擎为Skia绘图引擎，所述第二绘图引擎为FreeType绘图引擎。

2.根据权利要求1所述的隐藏式字幕显示方法，其特征在于，所述获取隐藏字幕数据中的字符属性之前还包括：

获取隐藏式字幕设置信息，当所述隐藏式字幕设置信息为显示所述隐藏式字幕时，获取与视频对应的所述隐藏式字幕数据。

3.根据权利要求2所述的隐藏式字幕显示方法，其特征在于，所述获取隐藏式字幕数据中的字符属性具体包括：

获取所述隐藏式字幕数据的时间轴；

获取所述视频的视频帧对应的时间点，根据所述时间点获取所述时间轴上与所述时间点对应的时间段，根据所述时间段获取所述时间段对应的所述隐藏式字幕的所述字符属性。

4.根据权利要求3所述的隐藏式字幕显示方法，其特征在于，所述将所述隐藏式字幕显示在视频帧画面上具体包括：

根据所述时间轴将所述隐藏式字幕显示在当前播放视频的视频帧上。

5.一种智能终端，其特征在于，所述智能终端包括：处理器、与处理器通信连接的存储介质，所述存储介质适于存储多条指令，所述处理器适于调用所述存储介质中的指令，以执行实现上述权利要求1－4任一项所述的隐藏式字幕显示方法的步骤。

6.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1－4任一项所述的隐藏式字幕显示方法的步骤。

Images