具体实施方式
为了解决采用现有技术的字幕图文信息生成方法会耗费较多处理资源和存储空间的问题,本发明实施例提供了一种新型的字幕图文信息生成方案。通过针对用于生成满足第二制式的字幕图文信息的素材,自动计算并设置用以表征该素材在第一制式下的尺寸参数值与第一制式下的视频图像的尺寸参数值的相关性的归一化尺寸参数值,从而当需要根据该素材生成满足上述字幕图文信息时,可以根据该归一化尺寸参数值和第二制式下的视频图像的尺寸参数值,确定该素材在第二制式下相应的尺寸参数值,并基于确定的该尺寸参数值生成上述字幕图文信息。由于基于归一化尺寸参数值,能够确定素材在不同制式下的尺寸参数值,因此采用该方案,即使字幕图文系统所生成的字幕图文信息需要叠加于多种不同制式的视频图像中,也可以基于存储的一份素材,实现灵活地根据归一化尺寸参数值和不同制式下的视频图像的尺寸参数值,来对该素材进行编辑并生成字幕图文信息。从而采用本发明实施例提供的方案,无需针对不同制式而编辑、存储不同制式下的素材,因此与现有技术相比,大大节省了处理资源和存储空间。
以下结合附图,对本发明实施例提供的上述方案进行详细说明。
首先,本发明实施例提供一种如图1所示的字幕图文信息生成方法,包括如下步骤:
步骤11,分别确定用于生成字幕图文信息的素材中的每个图元的归一化尺寸参数值;
其中,可以假设该字幕图文信息满足第二制式。这里所说的第二制式即可以是高清制式,也可以是标清制式,或者是除这两种制式外的其他制式。
而用于生成字幕图文信息的素材中的任意图元的归一化尺寸参数值则可以为:该图元在第一制式下的尺寸参数值与满足第一制式的视频图像的尺寸参数值的比值。
一般地,这里的尺寸参数值可以为高度值和宽度值,或者,尺寸参数值也可以为高度值或宽度值。在尺寸参数值为高度值和宽度值时,归一化尺寸参数值可以由下式[1]、[2]表示。需要说明的是,为了便于区分描述,针对高度值的归一化尺寸参数值可以称为归一化高度值(用符号H表示),而针对宽度值的归一化尺寸参数值可以称为归一化宽度值(用符号W表示)。
H=图元在第一制式下的高度值/满足第一制式的视频图像的高度值 [1]
W=图元在第一制式下的宽度值/满足第一制式的视频图像的宽度值 [2]
本发明实施例中,用于生成字幕图文信息的素材也可以称为字幕图文素材,其是由称为“图元”的基本元素构成的。按照图元的内容对图元进行划分,可以将其划分为文字图元(TrueType字符序列)、形状图元(规则或不规则的几何形状)、图片图元(图片文件)、和视频纹理图元(输入视频或avi,mpeg动画文件)等。需要说明的是,按照图元的分辨率与图元尺寸的相关性来对图元进行划分,还可以将图元划分为矢量图元和非矢量图元。其中,矢量图元的分辨率(即其单位面积包含的像素点的个数)不会随图元尺寸的变化而变化,缩放后不失真,比如文字图元和形状图元就属于矢量图元;而非矢量图元的分辨率则会随着图元尺寸的变化而变化(一般是尺寸变大,则分辨率降低;反之,则分辨率提高),缩放后会失真,比如图片图元和视频纹理图元就属于非矢量图元。
一般地,图元的高度值可以由包络整个图元的最小像素矩形包含的一整列像素点的个数来表征,而图元的宽度值则可以由包络整个图元的最小像素矩形包含的一整行像素点的个数来表征。类似的,视频图像的高度值可以由包络整个视频图像的最小像素矩形包含的一整列像素点的个数来表征,而视频图像的宽度值则可以由包络整个视频图像的最小像素矩形包含的一整行像素点的个数来表征。比如,满足高清制式的视频图像的高度值可以为1080(或720),宽度值可以为1920;而满足标清制式的视频图像的高度值可以为576(或488),宽度值可以为720。
一般地,图元中还可以包含运动特效。运动特效主要用作使字幕图文产生特殊视觉效果(如文字淡入淡出效果、图片分解效果等等)。针对包含运动特效的图元而言,其尺寸参数值可以为运动参数(如速度,每帧的位移或状态变化等),而尺寸参数值则可以为帧率。不包含运动特效的图元可以称为普通图元,后文将分别针对普通图元或含有运动特效的图元的情况,详细说明如何采用本发明实施例提供的方案,在对素材的编辑过程中通过运算获得归一化尺寸参数值及其他用于在不同制式下生成相应的字幕图文的必要参数(或用户选项),在此不再赘述。
步骤12,根据确定的归一化尺寸参数值和满足第二制式的视频图像的尺寸参数值,分别确定用于生成满足第二制式的字幕图文信息的素材中的每个图元在第二制式下的尺寸参数值;
具体地,可以通过下式[3]计算素材在第二制式下的尺寸参数值A:
A=满足第二制式的视频图像的尺寸参数值*归一化尺寸参数值 [3]
当尺寸参数值为高度值和宽度值时,若以A1表示高度值,以A2表示宽度值,则基于公式[1]、[2],可以通过下式[4]、[5],分别计算出素材在第二制式下的高度值A1和宽度值A2:
A1=H*满足第二制式的视频图像的高度值 [4]
A2=W*满足第二制式的视频图像的宽度值 [5]
依据上述公式[4]、[5],若假设尺寸参数值和尺寸参数值均为高度值和宽度值、第一制式为标清制式、第二制式为高清制式,则如果某图元在第一制式下的尺寸为256×320,可据此确定相应的H=256/576,W=320/720,则有:A1=H*满足高清制式的视频图像的高度值(假设为1080)=(256/576)*1080A2=W*满足高清制式的视频图像的宽度值(假设为1920)=(320/720)*1920
步骤13,基于预先存储的素材和针对素材的每个图元分别确定的其在第二制式下的尺寸参数值,生成满足第二制式的字幕图文信息。
一般的,素材中的每个图元的位置信息(即图元的坐标),也与相应制式的视频图像的宽高相关,可以根据前述计算图元宽高的归一化值同样的方法得到图元位置参数的归一化值,从而在基于素材生成相应制式下的字幕图文信息时,确定相应的图元在素材中的排列位置。由于相应的过程与前述技术类似,本发明实施例略去对该过程的详细描述。
本发明实施例中,图1所示步骤的执行主体可以是可实现该方法流程的任意装置,如服务器、芯片、终端等等。
通过图1所示的上述步骤,本发明实施例提供的字幕图文信息生成方法基于归一化尺寸参数值,能够确定素材中的图元在不同制式下的尺寸参数值,并基于存储的单一素材,实现灵活地根据归一化尺寸参数值和不同制式下的视频图像的尺寸参数值,生成相应制式下的字幕图文信息,因此无需针对不同制式分别编辑、存储不同制式下的素材,大大节省了处理资源和存储空间。
本发明实施例中,针对不同类型的素材,步骤11-13可以有不同的实现方式。以下针对几种典型的素材,通过几个不同的实施例分别对步骤11-13的具体实现方式进行说明:
实施例1
实施例1中假设用于生成满足第二制式的字幕图文信息的素材包括普通图元和包含运动特效的图元。
在播放叠加了字幕图文信息的视频图像时,其中带有运动特效的图元需要配合图像呈现动态的视觉效果。比如,出现在视频图像中的字幕图元的淡入淡出特效。由于不同制式下视频图像的播放帧率不同,相应制式下的字幕的淡入淡出速率必须与视频图像相适应,通过对运动参数(本例中对应的是图元每帧的通透值的变化)进行归一化处理可以达到上述目的。
实施例1在图1所示的流程的基础上,进一步包括了下述步骤:
首先,分别确定每个包含运动特效的图元的归一化运动参数值,该归一化运动参数值为:包含运动特效的图元在第一制式下的运动参数值与满足第一制式的视频图像的每帧持续时间(即视频图像在播放时的每帧持续时间)的比值。其中,每帧持续时间为视频图像的播放帧率的倒数;
比如,可以采用下式[6]计算该归一化运动参数值,其中,N为归一化运动参数值,N1为包含运动特效的图元在第一制式下的运动参数值,满足第一制式的视频图像的每帧持续时间为V1。
N=N1/V1 [6]
然后,根据确定的归一化运动参数值和满足第二制式的视频图像的每帧持续时间,分别确定特效素材在第二制式下的运动参数值。
比如,基于上式[6],可以通过下式[7]计算包含有运动特效的图元在第二制式下的运动参数值N2:
N2=N*V2=(N1/V1)*V2 [7]
基于计算得到的N2,前文所述步骤13的具体实现过程可以包括:基于预先存储的素材、针对包含运动特效的图元所确定的其在第二制式下的运动参数值和针对素材所包含的每个图元所确定的其在第二制式下的尺寸参数值,生成满足第二制式的字幕图文信息。
需要说明的是,对于包含运动特效的图元来说,其在不同制式下的高度值和宽度值一般也不同,因此仍然需要通过如步骤11~13所述的方式,确定其在第二制式下的尺寸参数值。
实施例2
实施例2中假设用于生成满足第二制式的字幕图文信息的素材中包含非矢量图元。
当满足第二制式的视频图像的分辨率高于满足第一制式的视频图像的分辨率,从而需要将图元的尺寸调大时,由于非矢量图元具有分辨率随着尺寸的变化而变化的特性,因此直接增大非矢量图元的尺寸会使得调整后的非矢量图元的分辨率降低而导致图元失真,从而不能再满足第二制式对视频图像的分辨率要求。
为了避免上述情况,实施例2中可以采用下述子步骤实现前文所述步骤13。需要说明的是,在下述子步骤中,假设尺寸参数值和尺寸参数值均为高度值和宽度值。
子步骤一:比较满足第一制式的视频图像的尺寸参数值和满足第二制式的视频图像的尺寸参数值,在比较得到满足第一制式的视频图像的尺寸参数值大于满足第二制式的视频图像的尺寸参数值(比如第一制式为高清,第二制式为标清)时,执行子步骤二,而在比较得到满足第一制式的视频图像的尺寸参数值小于满足第二制式的视频图像的尺寸参数值(比如第一制式为标清,第二制式为高清)时,执行子步骤三;
子步骤二:分别确定预先设置的针对非矢量图元的尺寸调整第一方式;并根据确定的尺寸调整第一方式(如切边等裁剪方式),分别将素材中的每个非矢量图元的高度值和宽度值调整为与相应的非矢量图元在第二制式下的尺寸参数值一致;以及基于调整后得到的各个非矢量图元、素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成满足第二制式的字幕图文信息;
子步骤三:分别确定预先设置的针对非矢量图元的尺寸调整第二方式;并根据确定的尺寸调整第二方式(如拼接等不改变图元分辨率的扩展方式),生成高度值和宽度值分别与确定出的所述非矢量图元在第二制式下的尺寸参数值一致的图元;以及基于生成的图元、素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成满足第二制式的字幕图文信息。
实施例3
实施例3的实施前提与实施例2的实施前提类似,也是假设用于生成满足第二制式的字幕图文信息的素材包含有非矢量图元,且假设尺寸参数值和尺寸参数值均为高度值和宽度值。
与实施例2不同的是,在比较得到满足第一制式的视频图像的尺寸参数值小于满足第二制式的视频图像的尺寸参数值(比如第一制式为标清,第二制式为高清)时,是会从预先存储的非矢量图元中获取与该素材所包含的非矢量图元的显示属性(如显示内容、颜色等等)匹配一致的非矢量图元;并基于获得的图元、素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成字幕图文信息。其中,预先存储的非矢量图元满足:其在第一制式下的尺寸参数值不小于其在第二制式下的尺寸参数值。
具体地,基于获得的图元、素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成字幕图文信息,具体可以为:
先按照尺寸调整第三方式(如切边等裁剪方式),对获得的图元的高度值和宽度值进行调整,使调整后的图元的高度值和宽度值分别与素材包含的非矢量图元在第二制式下的尺寸参数值一致;然后,再基于调整得到的图元、素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成满足第二制式的字幕图文信息。
实施例4
实施例4中假设用于生成满足第二制式的字幕图文信息的素材包含用作文字背景的形状图元。
一般地,上述形状图元所在区域中会包含文字图元(如节目中显示的文字的外围往往会有边框),且文字图元与形状图元之间往往相距一定的距离。为了在满足第二制式的视频图像中重现形状图元以及其所在区域的文字图元,并保证文字图元与形状图元之间的相对合理的位置关系不变,实施例4中可以在图1所示的流程图中新增下述步骤:
首先,分别确定素材中包括的各个形状图元的归一化边距值;
其中,任意形状图元的归一化边距值可以为:该形状图元的第一水平边距值与满足第一制式的视频图像的宽度值的比值,以及该形状图元的第一垂直边距值与满足第一制式的视频图像的高度值的比值。其中,第一水平边距值为该形状图元在第一制式下的边界在水平方向相距位于第一制式下的该形状图元所在区域的文字图元的最小距离值,第一垂直边距值为该形状图元在第一制式下的边界在垂直方向相距位于第一制式下的该形状图元所在区域的文字图元的最小距离值。
然后,根据确定的归一化边距值和满足第二制式的视频图像的宽度值和高度值,分别确定素材中包含的各个形状图元在第二制式下的第二水平边距值和第二垂直边距值。
其中,任意形状图元的第二水平边距值为该形状图元在第二制式下的边界在水平方向相距位于第二制式下的该形状图元所在区域的文字图元的最小距离值,第二垂直边距值为该形状图元在第二制式下的边界在垂直方向相距位于第二制式下的该形状图元所在区域的文字图元的最小距离值。
基于上述步骤,前文所述步骤13的具体实现过程可以包括:基于预先存储的用于生成满足第二制式的字幕图文信息的素材、针对该素材中的每个图元所分别确定的其在第二制式下的尺寸参数值,以及确定出的上述第二水平边距值和第二垂直边距值,生成满足第二制式的字幕图文信息。
实施例5
实施例5中,假设用于生成满足第二制式的字幕图文信息的素材包含文字图元,且该文字图元包含的文字沿水平方向排列。
一般地,文字图元包含的相邻文字之间会有一定的距离,该距离可称为文字间距值。为了在满足第二制式的视频图像中重现文字图元,并保证重现的文字图元的文字间距值与满足第二制式的视频图像的宽度值之间的比例基本不变,实施例5中可以在图1所示的流程图中新增下述步骤:
首先,分别确定素材包含的各个文字图元的归一化水平间距值;
其中,归一化水平间距值为:文字图元在第一制式下的文字间距值与满足第一制式的视频图像的宽度值的比值。
然后,根据确定的归一化水平间距值和满足第二制式的视频图像的宽度值,确定各个文字图元在第二制式下的文字间距值。
基于上述步骤,前文所述步骤13的具体实现过程可以包括:
基于预先存储的用于生成满足第二制式的字幕图文信息的素材、针对素材中的每个图元所分别确定的其在第二制式下的尺寸参数值和文字图元在第二制式下的文字间距值,生成满足第二制式的字幕图文信息。
实施例6:
实施例6中,假设用于生成满足第二制式的字幕图文信息的素材包含文字图元,且文字图元包含的文字沿垂直方向排列。
针对实施例6中的文字图元,首先需要分别确定素材中包含的各个文字图元的归一化垂直间距值;然后,再根据确定的归一化垂直间距值和满足第二制式的视频图像的高度值,分别确定各个文字图元在第二制式下的文字间距值。
其中,归一化垂直间距值为:文字图元在第一制式下的文字间距值与满足第一制式的视频图像的高度值的比值。
基于确定出的文字图元在第二制式下的文字间距值,前文所述步骤13的具体实现方式可以包括:基于预先存储的用于生成满足第二制式的字幕图文信息的素材、针对素材中的每个图元所分别确定的其在第二制式下的尺寸参数值,以及分别确定出的各个文字图元在第二制式下的文字间距值,生成满足第二制式的字幕图文信息。
通过执行实施例6所述的方案,可以实现在满足第二制式的视频图像中重现文字图元,并保证重现的文字图元的文字间距值与满足第二制式的视频图像的高度值之间的比例基本不变。
实施例7
实施例7中,假设用于生成满足第二制式的字幕图文信息的素材包含视频纹理图元。
一般地,视频纹理图元是非矢量图元,其分辨率会随着图元尺寸的变化而变化,且其表现出的纹理特征也会随着图元尺寸的变化而变化。
为避免纹理图元由于尺寸变化而在不同制式下的视频图像中表现出不同的分辨率和纹理特征,实施例7中可以预先存储对应于不同制式的视频纹理图元。且存储的纹理图元的分辨率与满足相应制式的视频图像的分辨率匹配一致。基于存储的纹理图元,前文所述步骤13的具体实现方式可以包括下述子步骤:
首先,从预先存储的对应于不同制式的视频纹理图元中,获得高度值与针对视频纹理图元所确定的其在第二制式下的高度值匹配一致,且宽度值与针对视频纹理图元所确定的其在第二制式下的宽度值匹配一致,且纹理特征与素材中包含的视频纹理图元的纹理特征一致的视频纹理图元;
然后,基于预先存储的除视频纹理图元外的其他用于生成满足第二制式的字幕图文信息的图元、针对除视频纹理图元外的其他图元所确定的其在第二制式下的尺寸参数值,以及获得的视频纹理图元,生成满足第二制式的字幕图文信息。
总结上述实施例可知,通过本发明实施例提供的方案,针对不同制式下的字幕图文信息,可以只存储一套用于生成字幕图文信息的素材。基于该素材和所含图元的归一化参数,本发明实施例提供的方案可以将素材编辑为能适应叠加任意制式(分辨率、帧率等)下的视频图像的需要,从而保证了字幕图文的清晰度,并保证了文字、特效等的移动(或变化)速率能适应于视频图像所满足的制式。
基于上述实施例,实际应用中的一个从编辑素材到播出视频图像的过程如图2所示,包括下述步骤:
步骤21,字幕图文系统获得用于生成字幕图文信息的原始素材在标清制式下的尺寸参数值;
一般地,字幕图文系统中可以存储原始素材,该原始素材的尺寸参数的值的大小以及该原始素材的属性(如颜色、显示内容等)都是可编辑的。用户可以通过字幕图文系统提供的用户界面,输入该些原始素材的尺寸参数的具体值(即尺寸参数值),从而实现使字幕图文系统获得用于生成字幕图文信息的素材在某制式下的尺寸参数值。
特别地,针对包含运动特效的图元,还可以获得该类图元在标清制式下的运动参数值。
步骤22,针对生成字幕图文信息需要使用到非矢量图元的情况,字幕图文系统还需要确定高清制式下的非矢量图元,同时,字幕图文系统也可以确定标清制式下的相应的非矢量图元,以便后续调用;
与前文类似的,高清、标清制式下的非矢量图元都可以是用户通过字幕图文系统提供的用户界面所指定的。比如,用户可以指定非矢量图元的读取路径,以使得字幕图文系统能够方便地确定并调用非矢量图元。
或者,字幕图文系统也可以接受用户输入的非矢量图元,并对其进行存储,以便后续调用。
此外,字幕图文系统还可以存储尺寸调整方式,用于为调整非矢量图元的尺寸提供调整方式。
步骤23,字幕图文系统基于原始素材、原始素材在标清制式下的尺寸参数值,生成待调用素材;
比如,字幕图文系统基于原始素材中包含的各个图元以及用户输入的在标清制式下的各个图元的尺寸参数值,就可以生成由具备相应的尺寸参数值的图元构成的待调用素材。
特别地,字幕图文系统还可以基于原始素材中的包含运动特效的图元,以及该类图元在标清制式下的运动参数值,生成相应的待调用的包含运动特效的图元。生成的待调用的包含运动特效的图元视为包含于待调用素材中。
步骤24,字幕图文系统根据上述尺寸参数与满足标清制式的视频图像的高度值和宽度值,确定待调用素材的归一化尺寸参数值,即分别确定待调用素材所包含的各个图元的归一化尺寸参数值,特别地,针对待调用素材中的包含运动特效的图元,还需要确定该些图元的归一化运动参数值。
比如,针对任意图元,以其尺寸参数为高度值和宽度值为例,可以计算该图元的高度值和满足标清制式的视频图像的高度值的比值(为了便于描述,后文简称高度比值),并计算该图元的宽度值和满足标清制式的视频图像的宽度值的比值(为了便于描述,后文简称宽度比值),并以这两个比值作为该图元的归一化尺寸参数值。以此类推,可以得到每个图元的归一化尺寸参数值。
而针对包含运动特效的图元,其归一化运动参数值为:该包含运动特效的图元在标清制式下的运动参数与满足标清制式的视频图像在播放时的每帧持续时间的比值。
步骤25,字幕图文系统存储待调用素材和确定的归一化尺寸参数值;
为了便于后续调用,具体存储方式可以为:对待调用素材所包含的各个图元与该图元的归一化尺寸参数值进行对应存储。
通过执行上述步骤21~步骤25,字幕图文系统完成了对原始素材的编辑,其存储的待调用素材和归一化尺寸参数值已可以被调用于生成某制式下的图文字幕信息。其中,其存储的该些待用素材可以称为模板。以下通过下述步骤,进一步介绍具体的调用过程:
步骤26,字幕图文系统获得图文字幕信息生成指令,该指令中包含有将要与生成的图文字幕信息相叠加的视频图像所满足的制式的信息;
本实施例中,假设该制式的信息表征了该视频图像满足的制式为高清制式,则以下进一步执行步骤27。
步骤27,字幕图文系统确定满足高清制式的视频图像的高度值和宽度值;
步骤28,字幕图文系统根据存储的归一化尺寸参数值和确定出的满足高清制式的视频图像的高度值和宽度值,确定存储的待调用素材在高清制式下的高度值和宽度值;
具体地,字幕图文系统可以分别计算待调用素材所包含的各个图元的高度比值乘以满足高清制式的视频图像的高度值所得的乘积值(为了便于描述,后文简称第一乘积值),并分别计算待调用素材所包含的各个图元的宽度比值乘以满足高清制式的视频图像的宽度值所得的乘积值(为了便于描述,后文简称第二乘积值),并将第一乘积值确定为待调用素材在高清制式下的高度值,而将第二乘积值确定为待调用素材在高清制式下的宽度值。
特别地,针对待调用素材中的包含运动特效的图元,还需要根据归一化运动参数值和满足第二制式的视频图像在播放时的每帧持续时间的比值,分别确定待调用素材中的每个包含运动特效的图元在高清制式下的运动参数值。
此外需要说明的是,针对待调用素材中包含非矢量图元的情况,字幕图文系统可以无需计算该些非矢量图元在高清制式下的高度值和宽度值,而是可以根据用户指定的读取路径获得高清制式下的非矢量图元,并将获得的非矢量图元作为后续生成字幕图文信息的非矢量图元。或者,字幕图文系统也可以先按照存储的尺寸调整方式(如对标清制式下的非矢量图元进行拼接等)对标清制式下的非矢量图元的尺寸进行调整,使其尺寸增大即使在高清制式下,调整后的非矢量图元也能满足相应的分辨率需求;然后,再将通过调整尺寸而得到的非矢量图元作为后续生成字幕图文信息的非矢量图元。
步骤29,字幕图文系统根据待调用素材,以及确定出的待调用素材在高清制式下的高度值和宽度值,生成满足高清制式的字幕图文信息,流程结束。
特别地,针对待调用素材中有包含运动特效的图元的情况,步骤29的具体实现方式为:基于针对每个包含运动特效的图元所确定的其在高清制式下的运动参数值、针对待调用素材中的每个图元所分别确定的其在高清制式下的尺寸参数值和存储的待调用素材,生成高清制式下的字幕图文信息。
此外,针对待调用素材中有非矢量图元的情况,步骤29的具体实现方式为:基于通过调整尺寸而得到的非矢量图元、待调用素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成字幕图文信息。或者,步骤29的具体实现方式还可以为:基于根据用户指定的读取路径而获得的高清制式下的非矢量图元、待调用素材中包含的其他图元和为其他图元所分别确定的其在第二制式下的尺寸参数值,生成字幕图文信息。
本发明实施例中的字幕图文系统还可以具备告警功能。比如,当监控到用于生成字幕图文信息的待调用素材存在缺失的情况时,可以输出告警信息,或者在字幕图文系统的显示装置上显示告警信息等。
由上述流程可见,采用本发明实施例提供的方案,无需针对不同制式分别编辑、存储不同制式下的素材,从而相比于现有技术,可以大大节省处理资源和存储空间。
对应于本发明实施例提供的字幕图文信息生成方法,本发明实施例还提供一种字幕图文信息生成装置,用以解决采用现有技术的字幕图文信息生成方法会耗费较多处理资源和存储空间的问题。该装置的具体结构示意图如图3所示,包括以下功能单元:
归一化尺寸参数值确定单元31,用于分别确定用于生成字幕图文信息的素材中的每个图元的归一化尺寸参数值,其中,任意图元的归一化尺寸参数值为:该图元在第一制式下的尺寸参数值与满足第一制式的视频图像的尺寸参数值的比值;所述字幕图文信息满足第二制式;
尺寸参数值确定单元32,用于根据归一化尺寸参数值确定单元31确定的所述归一化尺寸参数值和满足第二制式的视频图像的尺寸参数值,分别确定所述素材中的每个图元在第二制式下的尺寸参数值;
字幕图文信息生成单元33,用于基于预先存储的所述素材和尺寸参数值确定单元针对所述素材中的每个图元所分别确定的其在第二制式下的尺寸参数值,生成所述字幕图文信息。
可选的,尺寸参数值为高度值和宽度值。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材中包括包含运动特效的图元时,所述装置还包括:
比值确定单元,用于分别确定所述素材包括的每个包含运动特效的图元的归一化运动参数值,其中,任意包含运动特效的图元的归一化运动参数值为:该包含运动特效的图元在第一制式下的运动参数与满足第一制式的视频图像在播放时的每帧持续时间的比值;
运动参数值确定单元,用于根据比值确定单元确定的所述归一化运动参数值和满足第二制式的视频图像在播放时的每帧持续时间的比值,分别确定所述素材包括的每个包含运动特效的图元在第二制式下的运动参数值;则
字幕图文信息生成单元33具体用于:基于针对每个包含运动特效的图元所确定的其在第二制式下的运动参数值、针对所述素材中的每个图元所分别确定的其在第二制式下的尺寸参数值和预先存储的所述素材,生成所述字幕图文信息。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材中包含非矢量图元时,字幕图文信息生成单元33具体包括:
比较子单元,用于比较满足第一制式的视频图像的尺寸参数值和满足第二制式的视频图像的尺寸参数值;
字幕图文信息生成子单元,用于在比较子单元比较得到满足第一制式的视频图像的尺寸参数值大于满足第二制式的视频图像的尺寸参数值时,分别确定预先设置的针对非矢量图元的尺寸调整第一方式;并根据确定的所述尺寸调整第一方式,分别将所述素材中的每个非矢量图元的高度值和宽度值调整为与确定出的所述非矢量图元在第二制式下的尺寸参数值一致;以及基于调整后得到的各个非矢量图元、所述素材中包含的其他图元和为所述其他图元所分别确定的其在第二制式下的尺寸参数值,生成所述字幕图文信息;以及
在比较子单元比较得到满足第一制式的视频图像的尺寸参数值小于满足第二制式的视频图像的尺寸参数值时,分别确定预先设置的针对非矢量图元的尺寸调整第二方式;并根据确定的所述尺寸调整第二方式,生成高度值和宽度值分别与确定出的所述非矢量图元在第二制式下的尺寸参数值一致的图元;以及基于生成的图元、所述素材中包含的其他图元和为所述其他图元所分别确定的其在第二制式下的尺寸参数值,生成所述字幕图文信息。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材包含非矢量图元时,字幕图文信息生成单元33具体包括:
比较子单元,用于比较满足第一制式的视频图像的尺寸参数值和满足第二制式的视频图像的尺寸参数值;
字幕图文信息生成子单元,用于在比较子单元比较得到满足第一制式的视频图像的尺寸参数值大于满足第二制式的视频图像的尺寸参数值时,分别确定预先设置的针对非矢量图元的尺寸调整第一方式;并根据确定的所述尺寸调整第一方式,分别将所述素材中的每个非矢量图元的高度值和宽度值调整为与确定出的所述非矢量图元在第二制式下的尺寸参数值一致;以及基于调整后得到的各个非矢量图元、所述素材中包含的其他图元和为所述其他图元所分别确定的其在第二制式下的尺寸参数值,生成所述字幕图文信息;以及
在比较子单元比较得到满足第一制式的视频图像的尺寸参数值小于满足第二制式的视频图像的尺寸参数值时,获得预先存储的非矢量图元;并基于获得的图元、所述素材中包含的其他图元和为所述其他图元所分别确定的其在第二制式下的尺寸参数值,生成所述字幕图文信息;
其中,所述预先存储的非矢量图元在第一制式下的尺寸参数值不小于其在第二制式下的尺寸参数值。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材中包括作为文字背景的形状图元时,所述装置还可以包括:
归一化边距值确定单元,用于分别确定所述素材中包括的各个形状图元的归一化边距值,其中,任意形状图元的归一化边距值为:该形状图元的第一水平边距值与满足第一制式的视频图像的宽度值的比值,以及该形状图元的第一垂直边距值与满足第一制式的视频图像的高度值的比值;其中,第一水平边距值为该形状图元在第一制式下的边界在水平方向相距位于第一制式下的该形状图元所在区域的文字图元的最小距离值,第一垂直边距值为该形状图元在第一制式下的边界在垂直方向相距所述文字图元的最小距离值;
水平和垂直边距值确定单元,用于根据归一化边距值确定单元确定的所述归一化边距值和满足第二制式的视频图像的宽度值和高度值,分别确定所述素材中包括的各个形状图元在第二制式下的第二水平边距值和第二垂直边距值;其中,任意形状图元的第二水平边距值为该形状图元在第二制式下的边界在水平方向相距位于第二制式下的该形状图元所在区域的文字图元的最小距离值,第二垂直边距值为该形状图元在第二制式下的边界在垂直方向相距位于第二制式下的该形状图元所在区域的文字图元的最小距离值;则
字幕图文信息生成单元具体用于:基于预先存储的所述素材、针对所述素材中每个图元所分别确定的其在第二制式下的尺寸参数值、水平和垂直边距值确定单元针对所述各个形状图元所分别确定的所述第二水平边距值和所述第二垂直边距值,生成所述字幕图文信息。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材包含文字图元,且文字图元包含的文字沿水平方向排列时,所述装置还可以包括:
水平间距值确定单元,用于分别确定所述素材包含的各个文字图元的归一化水平间距值,其中,归一化水平间距值为:文字图元在第一制式下的文字间距值与满足第一制式的视频图像的宽度值的比值;
文字间距值确定单元,用于根据水平间距值确定单元确定的所述归一化水平间距值和满足第二制式的视频图像的宽度值,分别确定所述各个文字图元在第二制式下的文字间距值;则
字幕图文信息生成单元33具体可以用于:基于预先存储的所述素材、针对所述素材中的每个图元所分别确定的其在第二制式下的尺寸参数值,以及文字间距值确定单元针对所述各个文字图元所分别确定的其在第二制式下的文字间距值,生成所述字幕图文信息。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材中包含文字图元,且文字图元中包含的文字沿垂直方向排列时,所述装置还可以包括:
垂直间距值确定单元,用于分别确定所述素材中包含的各个文字图元的归一化垂直间距值,其中,归一化垂直间距值为:文字图元在第一制式下的文字间距值与满足第一制式的视频图像的高度值的比值;
文字间距值确定单元,用于根据垂直间距值确定单元确定的所述归一化垂直间距值和满足第二制式的视频图像的高度值,分别确定各个文字图元在第二制式下的文字间距值;
则此时字幕图文信息生成单元33具体可以用于:基于预先存储的所述素材、针对所述素材中的每个图元所分别确定的其在第二制式下的尺寸参数值,以及文字间距值确定单元确定的所述各个文字图元在第二制式下的文字间距值,生成所述字幕图文信息。
当尺寸参数值为高度值和宽度值时,可选的,当所述素材中包含视频纹理图元时,字幕图文信息生成单元33具体可以包括:
视频纹理图元获得子单元,用于从预先存储的对应于不同制式的视频纹理图元中,获得高度值与针对视频纹理图元所确定的其在第二制式下的高度值匹配一致,且宽度值与针对纹理图元所确定的其在第二制式下的宽度值匹配一致,且纹理特征与所述素材中包含的视频纹理图元的纹理特征一致的视频纹理图元;
字幕图文信息生成子单元,用于基于所述素材所包含的除所述视频纹理图元外的其他图元、针对除所述视频纹理图元外的其他图元所确定的其在第二制式下的尺寸参数值,以及视频纹理图元获得子单元获得的视频纹理图元,生成所述字幕图文信息。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。