CN113014834B - 图片字幕显示方法、装置及相关装置 - Google Patents

Abstract

本发明提供了一种图片字幕显示方法、装置及相关装置通过加载字幕文件并进行解析和解码，将解析后的与字幕文件对应的调色板的数据组的索引信息循环存储在存储单元的多个子内存中，应用模块读取存储单元的子内存中的与字幕文件对应的调色板的数据组的索引信息，根据与字幕文件对应的调色板的数据组的索引信息读取对应的字幕数据，显示与字幕文件对应的调色板的数据组的索引信息所对应的字幕，显示完成后释放存储在子内存中的与字幕文件对应的调色板的数据组的索引信息，如此循环使用该存储单元。可以解决现有技术中图片字幕显示方式占用内存较大的技术问题。

Description

图片字幕显示方法、装置及相关装置

技术领域

本发明涉及视频播放技术领域，尤其涉及一种图片字幕显示方法、装置及相关装置。

背景技术

多媒体视频播放过程中，可能会带有字幕信息，例如电影、电视剧、戏剧等等。字幕分为文本字幕和图片字幕。图片字幕是一种图片形式，需要经过解码后存储再到显示的过程。当前主流的多媒体框架对图片字幕的支持情况如下：(1)不支持图片字幕或者(2)支持图片字幕，支持图片字幕则会直接传输解码后的数据送去显示，中间不进行任何的转换，整个传输过程需要传输很大的数据量，直到显示结束。在直接进行显示的情况下，假设图片字幕解码出来是RGBA格式，整体过程按RGBA的存储方式传输至应用去显示，一个图片的R信息需要宽乘高的大小，则传输使用内存为4倍的图片尺寸(宽乘高)，耗费的内存较大。如果出现跨进程的情况，则需要数据拷贝，需重新分配内存，由此而产生的内存碎片会增多。

发明内容

本发明主要解决的技术问题是现有的图片字幕显示方式占用内存较大的技术问题。

为解决上述技术问题，本发明采用的第一个技术方案是：提供了一种图片字幕显示方法，包括：加载字幕文件并进行解析；划分存储单元为多个子内存；将字幕文件进行解码，并将字幕文件对应的调色板的数据组的索引信息循环存储在存储单元的多个子内存中；读取存储单元的子内存中的数据组的索引信息；根据数据组的索引信息读取对应的字幕数据，显示数据组的索引信息所对应的字幕；释放存储单元的子内存中的数据组的索引信息。

还提供了一种图片字幕显示装置，包括：解析模块，解析模块用于将已经加载的字幕文件解析得到字幕文件的调色板；存储单元，存储单元和解析模块连接，存储单元包括多个子内存，存储单元用于循环存储调色板的数据组的索引信息；解码模块，解码模块和解析模块连接，解码模块用于将字幕文件解码得到调色板的数据组的索引信息；应用模块，应用模块和存储单元、解析模块连接，应用模块用于加载字幕文件，应用模块用于读取存储单元的子内存中的调色板的数据组的索引信息并根据调色板的数据组的索引信息读取对应的字幕数据，将字幕数据进行格式转换传递给显示模块；显示模块用于显示调色板的数据组的索引信息对应的字幕。

本发明的有益效果是：通过加载字幕文件并进行解析和解码，将解析后的与字幕文件对应的调色板的数据组的索引信息循环存储在存储单元的多个子内存中，应用模块读取存储单元的子内存中的与字幕文件对应调色板的数据组的索引信息，根据与字幕文件对应调色板的数据组的索引信息读取对应的字幕数据，显示与字幕文件对应调色板的数据组的索引信息所对应的字幕，显示完成后释放存储在子内存中的与字幕文件对应调色板的数据组的索引信息，如此循环使用该存储单元。可以解决现有技术中图片字幕显示方式占用内存较大的技术问题。

附图说明

图1是本发明图片字幕显示方法一实施例的流程示意图；

图2是本发明图片字幕显示装置一实施例的结构示意图；

图3是本发明智能装置一实施例的结构示意图；

图4是本发明存储介质的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

目前Android或Gstreamer等框架都不支持图片字幕，鉴于图片字幕的多样性，图片字幕显示方式有很多种。应用使用bitmap格式去显示图片字幕，bitmap有多种存储方式。根据应用的显示需要，将图片字幕解码成相应的格式，例如ARGB。解码后的数据可以直接存储于bitmap的数据区域然后进行显示。由于字幕的颜色信息比较单一，也可以使用bitmap的index mode方式存储，即使用调色板的数据组的索引信息，将调色板的数据组的索引信息预先存在一个存储单元里，然后存储单元的内存值实际上表示的是调色板的数据组的索引信息，该存储单元的调色板的数据组的索引信息在图片字幕全部显示完毕，则进行释放。假设原本一个像素需要ARGB为4byte，现在只需要一个索引值即1byte，由此传输过程中降低内存使用为原来的1/4。

请参阅图1，是本发明图片字幕显示方法一实施例的流程示意图。在本实施例中，图片字幕显示方法包括：

步骤S01，对字幕文件进行压缩，使得压缩后的字幕文件的调色板的数据组的个数相比于压缩之前的字幕文件的调色板的数据组的个数少。

图片字幕的文件一般较大，里面可以包含调色板的多个数据组的信息，但是当对字幕的颜色要求较少的情况下，可以对图片字幕的文件进行压缩，减少图片字幕所包含的调色板的数据组的个数，虽然调色板的数据组的个数减少了，但是只要字幕颜色和图片背景色区别开来，则字幕仍然可以显示。即图片字幕的背景为黑色，图片字幕的字部分为白色，或者图片字幕的背景成为白色，图片字幕的字部分为黑色。那么该图片字幕只需要调色板的两个数据组对应的字幕数据就可以显示该字幕。

在本实施例中，对图片字幕的文件的压缩算法不做限制，只要能将图片字幕的文件进行压缩并减少调色板的数据组的个数即可。而且在压缩过程中，可以设置压缩后的图片字幕的文件所包含的调色板的数据组的个数，以满足不同的视频背景对字幕颜色的要求。

在其他实施例中，本步骤：对字幕文件进行压缩，使得压缩后的字幕文件的调色板的个数相比于压缩之前的字幕文件的调色板的个数少，可以省略。

步骤S02，加载字幕文件并进行解析。

当视频播放时，播放视频的应用加载该视频对应的字幕文件，并将该字幕文件解析得到：字幕的调色板、编码的字幕数据、字幕显示时间数据以及相应的字幕显示位置数据。还需要对字幕文件进行解码，得到调色板的数据组的索引信息形式的字幕数据，即，字幕数据经过解码后与调色板的数据组建立映射关系，然后将字幕文件对应的调色板的数据组的索引信息存储在存储单元的多个子内存内。

步骤S03，划分存储单元为多个子内存。

解析后的字幕文件还需要进行解码，解码后的字幕文件需要一个存储单元，解析模块map一块内存，将解码后的字幕文件对应的调色板的数据组的索引信息存储进去，在应用需要显示字幕的时候，只需重新map到相应的内存地址，取得与字幕文件对应的调色板的数据组索引信息，再根据与字幕文件对应的调色板的数据组的索引信息映射读取对应的字幕数据并将其转换成相应的数据格式就可以显示。

在解析开始之前，map一块存储单元，并将这一块存储单元作为循环存储内存。在存储解析后的字幕文件时，一块存储单元分为多个大小相同的子内存，多个子内存循环对解码后的与字幕文件对应的调色板的数据组的索引信息进行存储，在应用提取了调色板的某一数据组的索引信息对应的字幕数据进行显示后，存储在该子内存内的调色板的数据组的索引信息被释放，然后该存储单元的该子内存继续存储即将要进行显示的图片字幕的调色板的数据组的索引信息。

步骤S04，将字幕文件进行解码，并将字幕文件对应的调色板的数据组的索引信息循环存储在存储单元的多个子内存中。

在本实施例中使用共享内存方式，解析模块map一块内存，切分成4块子内存分为0、1、2、3，将四块子内存地址保存下来。解码后，得到调色板的数据组的索引信息，其中索引信息可以是根据数据组的个数从0递增的二进制编码，字幕数据由多个像素点组成，字幕数据经过解码后，每个像素点对应一个数据组的索引信息。存储的时候，按顺序存储。即0存储完一个索引信息，下一个索引信息放入1，1存储完一个索引信息，下一个索引信息放入2，2存储完一个索引信息，下一个索引信息放入3，3存储完一个索引信息，下一个索引信息继续放入0。如此循环使用存储单元。子内存中存储索引信息相当于存储的是与索引信息对应的字幕数据的像素点，而该像素点的颜色值即为对应的索引信息对应的数据组的数据值，字幕进行显示时，应用读取索引信息，通过索引信息找到与索引信息对应的数据组，读取并显示数据组中的数据值，此时显示的数据值即就是像素点的颜色值。

而且在存储与字幕文件对应的调色板的数据组的索引信息的同时应用也会提取与字幕文件对应的调色板的数据组的索引信息，提取的与字幕文件对应的调色板的数据组索引信息是已经存储在子内存中的与字幕文件对应的调色板的数据组的索引信息，首先子内存传输该子内存的编号给应用模块，应用模块根据该编号提取子内存中的与字幕文件对应的调色板的数据组的索引信息，然后根据与字幕文件对应的调色板的数据组的索引信息映射对应的字幕数据传输给显示模块进行显示，显示完成后子内存释放与字幕文件对应的调色板的数据组的索引信息，所以每个子内存中始终存储的只有数据组的索引信息，所以本发明的技术方案可以有效地减少图片字幕在传输过程中所占用的内存。存储单元在需要显示字幕的时候，只需要传输0-3子内存的编号，应用根据该编号提取该子内存内的与字幕文件对应的调色板的数据组的索引信息即可。最后在应用模块使用与字幕文件对应的调色板的数据组的索引信息对此地址进行映射，即可提取到与字幕文件对应的调色板的数据组的索引信息对应的字幕数据进行显示。在本实施例中将存储单元分为4个子内存，在其他实施例中可以分为任意的个数大于2的子内存。

在另一实施例中图片字幕的调色板如下：

palette:000000,828282,828282,828282,828282,828282,828282,ffffff,828282,bababa,828282,828282,828282,828282,828282,828282。

例如828282代表R为0x82，G为0x82，B为0x82，有16个数据组，每个数据组使用四个bit即可标识，将数据组编码为0、1、2、3、…、15即为数据组的索引信息。在存储已解析的字幕文件的时候，解析模块根据解码后的字幕数据映射这些与字幕文件对应的调色板的数据组的索引信息，并将数据组的索引信息循环存储到存储单元的多个子内存中，每一个子内存中首先存储一个调色板的数据组的索引信息。一条字幕显示完成后释放该条字幕存储在子内存中的与字幕文件对应的调色板的数据组的索引信息，所以本发明的技术方案所占用的内存大大少于现有技术图片字幕所占有的内存。假设当前图片字幕的宽和高为8X4，则有32个像素点即字幕数据，现有技术中每个像素点按ARGB的存储格式存储，每个像素点需要32bit,共需要32X32＝128byte，需要128byte标识。但是基于本发明的技术方案，每个像素点只需要4bit，共需要32X 4/8＝16Byte(1byte＝8bit)标识。整体传输过程中的存储降低了128/16＝8倍的内存。由于在更多的视频显示过程中，字幕的颜色较少，可以进一步再缩小字幕文件。减少到4个数据组。那么在数据组个数为4的情况下，像素点不变，每个调色板的索引信息只需要2个bit即可标识。2bit是1/4Byte。整体内存使用可继续降低为32/4＝8Byte。整体内存降低为128/8＝16倍。所以在图片字幕进行显示前进行压缩可以更进一步的减少该与字幕文件对应的调色板的数据组的个数，从而降低图片字幕显示所占用的内存。

步骤S05，读取存储单元的子内存中的与字幕文件对应的调色板的数据组的索引信息，根据与字幕文件对应的调色板的数据组的索引信息读取对应的字幕数据，将字幕数据进行格式转换，显示与字幕文件对应的调色板的数据组的索引信息对应的字幕。

步骤S06，释放存储单元的子内存中的调色板的数据组的索引信息。

应用在显示字幕时，首先需要显示字幕的子内存传输该子内存的编号给应用，应用根据该编号读取存储单元的子内存中的与字幕文件对应的调色板的数据组的索引信息，根据与字幕文件对应的调色板的数据组的索引信息映射读取对应的字幕数据即就是数据组的数据值(也为像素点的像素值)，将该字幕数据进行格式转换，传输至显示模块进行显示，显示完成后该子内存立即释放该与字幕文件对应的调色板的数据组的索引信息，释放完成后存储即将要显示的字幕的与字幕文件对应的调色板的数据组的索引信息，读取的索引信息始终是已经存储在子内存中的索引信息。

具体提取方式可以为：解析模块map一块内存，切分成4块子内存分为0、1、2、3，将四块子内存地址保存下来。存储的时候，按顺序存储，即0存储完一个索引信息，下一个索引信息放入1，在0存储完该索引信息后立即进行提取，首先提取0子内存中索引信息，然后根据索引信息映射读取对应的字幕数据进行显示，显示完成后0子内存释放该索引信息，所以0子内存中始终存储的只有一个索引信息。1存储完一个索引信息，下一个索引信息放入2，在1存储完该索引信息后立即进行提取，首先提取1子内存中的索引信息，然后根据索引信息映射读取对应的字幕数据进行显示，显示完成后1子内存释放该索引信息，所以1子内存中始终存储的只有一个索引信息。2存储完一个索引信息，下一个索引信息放入3，在2存储完该索引信息后立即进行提取，首先提取2子内存中的索引信息，然后根据索引信息映射读取对应的字幕数据进行显示，显示完成后2子内存释放该索引信息，所以2子内存中始终存储的只有一个索引信息。3存储完一个索引信息，下一个索引信息继续放入0。各个子内存如此循环使用。

本发明的图片字幕显示方法通过加载字幕文件并进行解析、解码，将解析后的与字幕文件对应的调色板的数据组的索引信息循环存储在存储单元的多个子内存中，应用模块读取存储单元的子内存中的与字幕文件对应的调色板的数据组的索引信息，根据与字幕文件对应的调色板的数据组的索引信息读取对应的字幕数据，显示与字幕文件对应的调色板的索引信息所对应的字幕，显示完成后释放存储在子内存中的与字幕文件对应的调色板的数据组的索引信息，如此循环使用该存储单元。可以解决现有技术中图片字幕显示方式占用内存较大的技术问题。

请参阅图2，是本发明图片字幕显示装置一实施例的结构示意图。在本实施例中，图片字幕显示装置包括：解析模块4、存储单元6、解码模块5、应用模块2、显示模块1和控制模块3。显示模块1和应用模块2相连，应用模块2分别和控制模块3和存储单元6连接，控制模块3和解析模块4、解码模块5依次连接，解析模块4连接存储单元6。

解析模块4用于解析已经加载的字幕文件得到每条字幕对应的调色板、编码的字幕数据、字幕显示时间数据以及相应的字幕显示位置数据。解析模块4还用于给存储单元6划分子内存。存储单元6用于循环存储调色板的数据组的索引信息。解码模块5用于将字幕文件解码得到与字幕文件对应的调色板的数据组的索引信息。应用模块2用于加载字幕文件，在控制模块3的控制下读取存储单元6的子内存中的与字幕文件对应的调色板的数据组的索引信息并根据与字幕文件对应的调色板的数据组的索引信息映射读取对应的字幕数据，将字幕数据进行格式转换传递给显示模块1，显示模块1显示字幕数据对应的字幕，显示完成后，存储单元6释放已经显示的与字幕文件对应的调色板的数据组的索引信息。其中存储与字幕文件对应的调色板的数据组的索引信息与读取存储单元6的子内存中的与字幕文件对应的调色板的数据组的索引信息是同时进行的，并且读取的与字幕文件对应的调色板的数据组的索引信息始终是已经存储在存储单元6的子内存中的与字幕文件对应的调色板的数据组的索引信息。

索引信息是调色板的多个数据组的从0递增的二进制编码，字幕数据由多个像素点组成，字幕数据解码后每个所述像素点对应一个编码。子内存中存储索引信息相当于存储的是与索引信息对应的字幕数据的像素点，而该像素点的颜色值即为对应的索引信息对应的数据组的数据值，字幕进行显示时，应用读取索引信息，通过索引信息找到与索引信息对应的数据组，读取并显示数据组中的数据值，此时显示的数据值即就是像素点的颜色值。

本发明的图片字幕显示装置通过将存储单元划分为多个子内存，并且将与字幕文件对应的调色板的数据组的索引信息循环存储在多个子内存中，存储的同时应用模块进行提取显示图片字幕，提取完成后释放存储在多个子内存中的调色板的数据组的索引信息。可以解决现有技术中图片字幕显示方式占用内存较大的技术问题。

图3是本发明智能装置一实施例的结构示意图。

智能装置包括处理器63及存储器62，其中，存储器62用于存储实现图片字幕显示方法的程序指令，处理器63用于执行存储器62存储的程序指令。

其中，处理器63还可以称为CPU(Central Processing Unit，中央处理单元)。处理器63可能是一种集成电路芯片，具有信号的处理能力。处理器63还可以是通用处理器63、数字信号处理器63(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器63可以是微处理器63或者该处理器63也可以是任何常规的处理器63等。

存储器62可以为内存条、TF卡等，可以存储图片字幕显示装置中的全部信息，包括输入的原始数据、计算机程序、中间运行结果和最终运行结果都保存在存储器62中。它根据控制器指定的位置存入和取出信息。有了存储器62，图片字幕显示装置中的存储器62按用途存储器62可分为主存储器62(内存)和辅助存储器62(外存)，也有分为外部存储器62和内部存储器62的分类方法。外存通常是磁性介质或光盘等，能长期保存信息。内存指主板上的存储部件，用来存放当前正在执行的数据和程序，但仅用于暂时存放程序和数据，关闭电源或断电，数据会丢失。

请参阅图4，为本发明存储介质的结构示意图。本申请的存储介质存储有能够实现上述所有图片字幕显示方法的程序文件71，其中，该程序文件71可以以软件产品的形式存储在上述存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本申请各个实施方式方法的全部或部分步骤。而前述的存储装置包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质，或者是计算机、服务器、手机、平板等终端设备。

以上仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (13)

1.一种图片字幕显示方法，其特征在于，包括：

加载图片字幕文件并进行解析；

划分存储单元为多个子内存；

将所述图片字幕文件进行解码，并将所述图片字幕文件对应的调色板的数据组的索引信息循环存储在所述存储单元的多个所述子内存中；

读取所述存储单元的所述子内存中的所述数据组的索引信息；

根据所述数据组的索引信息读取对应的字幕数据，显示所述数据组的索引信息所对应的字幕；

释放所述存储单元的所述子内存中的所述数据组的索引信息，并继续存储即将要进行显示的所述图片字幕文件对应的调色板的数据组的索引信息。

2.根据权利要求1所述的图片字幕显示方法，其特征在于，在所述加载图片字幕文件并进行解析的步骤中，解析得到：字幕的调色板、编码的字幕数据、字幕显示时间数据以及相应的字幕显示位置数据。

3.根据权利要求2所述的图片字幕显示方法，其特征在于，所述索引信息是所述调色板的多个所述数据组的从0递增的二进制编码，所述字幕数据由多个像素点组成，所述字幕数据解码后每个所述像素点对应一个所述编码。

4.根据权利要求3所述的图片字幕显示方法，其特征在于，在所述加载图片字幕文件并进行解析的步骤之前还包括步骤：

对所述图片字幕文件进行压缩，使得压缩后的所述图片字幕文件的调色板的所述数据组的个数少于压缩之前的所述字幕文件的调色板的所述数据组的个数。

5.根据权利要求4所述的图片字幕显示方法，其特征在于，所述读取的所述调色板的所述数据组的索引信息始终是已经存储在所述存储单元的多个所述子内存中的所述调色板的所述数据组的索引信息。

6.根据权利要求1所述的图片字幕显示方法，其特征在于，所述根据所述数据组的索引信息读取对应的字幕数据，显示所述数据组的索引信息所对应的字幕还包括：将所述字幕数据进行格式转换。

7.一种图片字幕显示装置，其特征在于，包括：

解析模块，所述解析模块用于将已经加载的图片字幕文件解析得到图片字幕文件的调色板；

存储单元，所述存储单元和所述解析模块连接，所述存储单元包括多个子内存，所述存储单元用于循环存储所述调色板的数据组的索引信息；

解码模块，所述解码模块和所述解析模块连接，所述解码模块用于将所述图片字幕文件解码得到调色板的所述数据组的索引信息；

应用模块，所述应用模块和所述存储单元、所述解析模块连接，所述应用模块用于加载图片字幕文件，所述应用模块用于读取所述存储单元的所述子内存中的所述调色板的所述数据组的索引信息并根据所述调色板的所述数据组的索引信息读取对应的字幕数据，将所述字幕数据进行格式转换传递给显示模块；

所述显示模块用于显示所述调色板的所述数据组的索引信息对应的字幕；

所述存储单元还用于在显示所述数据组的索引信息对应的字幕后，释放所述存储单元的所述子内存中的所述数据组的索引信息，并继续存储即将要进行显示的所述图片字幕文件对应的调色板的数据组的索引信息。

8.根据权利要求7所述的图片字幕显示装置，其特征在于，还包括：控制模块，所述控制模块和所述应用模块、所述解析模块连接，所述控制模块用于控制所述应用模块进行字幕显示。

9.根据权利要求7所述的图片字幕显示装置，其特征在于，所述解析模块用于将已经加载的图片字幕文件解析得到字幕文件的调色板的步骤还解析得到：编码的字幕数据、字幕显示时间数据以及相应的字幕显示位置数据。

10.根据权利要求9所述的图片字幕显示装置，其特征在于，所述索引信息是所述调色板的多个所述数据组的从0递增的二进制编码，所述字幕数据由多个像素点组成，所述字幕数据解码后每个所述像素点对应一个所述编码。

11.根据权利要求10所述的图片字幕显示装置，其特征在于，所述应用模块读取的所述数据组的索引信息始终是已经存储在所述存储单元的多个所述子内存中的所述数据组的索引信息。

12.一种智能装置，其特征在于，包括处理器及存储器，其中，

所述存储器用于存储实现如权利要求1-6任一项所述的图片字幕显示方法的程序指令；

所述处理器用于执行所述存储器存储的所述程序指令。

13.一种存储介质，其特征在于，存储有程序文件，所述程序文件能够被执行以实现如权利要求1-6任一项所述的图片字幕显示方法。