CN115484504A - 图像显示方法、装置、电子设备及存储介质 - Google Patents

图像显示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115484504A
CN115484504A CN202211116526.7A CN202211116526A CN115484504A CN 115484504 A CN115484504 A CN 115484504A CN 202211116526 A CN202211116526 A CN 202211116526A CN 115484504 A CN115484504 A CN 115484504A
Authority
CN
China
Prior art keywords
bubble
image
displayed
barrage
target video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211116526.7A
Other languages
English (en)
Inventor
王玉龙
李亚涛
李国庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing QIYI Century Science and Technology Co Ltd
Original Assignee
Beijing QIYI Century Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing QIYI Century Science and Technology Co Ltd filed Critical Beijing QIYI Century Science and Technology Co Ltd
Priority to CN202211116526.7A priority Critical patent/CN115484504A/zh
Publication of CN115484504A publication Critical patent/CN115484504A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供了一种图像显示方法、装置、电子设备及存储介质。所述方法包括:获取目标视频图像;获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;对所述泡泡特征信息进行处理,生成泡泡图像;根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;显示所述泡泡弹幕图像。本达到模拟显示泡泡作为视频图像的弹幕的目的,丰富了弹幕的表现形式。

Description

图像显示方法、装置、电子设备及存储介质
技术领域
本申请涉及图像处理技术领域,特别是涉及一种图像显示方法、装置、电子设备及存储介质。
背景技术
随着计算机技术的发展,人们进行沟通交流的方式越来越丰富,采用弹幕的方式对多媒体进行评论、与他人进行交流互动的现象也越来越普遍。
目前,弹幕的表现形式多为文本弹幕,弹幕表现形式较为单一,很难再提高用户的观影氛围。
发明内容
本申请实施例的目的在于提供一种图像显示方法、装置、电子设备及存储介质,以达到模拟显示泡泡作为视频图像的弹幕的目的,丰富了弹幕的表现形式。具体技术方案如下:
在本申请实施的第一方面,首先提供了一种图像显示方法,包括:
获取目标视频图像;
获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
对所述泡泡特征信息进行处理,生成泡泡图像;
根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
显示所述泡泡弹幕图像。
可选地,所述获取目标视频图像,包括:
获取目标视频文件中每帧视频图像对应的图像场景;
将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
可选地,所述指定场景包括:七夕节场景、情人节场景、婚礼场景中的任一种。
可选地,在N大于1时,获取所述待显示泡泡对应的位置信息,包括:
获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向;
根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离;
根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
可选地,所述对所述泡泡特征信息进行处理,生成泡泡图像,包括:
根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框;
对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
可选地,所述根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框,包括:
调用图形处理器内的顶点着色器根据所述泡泡特征信息,计算得到所述待显示泡泡的几何矩形框,并计算得到所述几何矩形框对应的纹理贴图的纹理坐标;
所述对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像,包括:
调用所述图形处理器内的片段着色器根据所述纹理坐标,获取所述纹理贴图上每个像素点的色值,并根据色值对所述纹理贴图上的每个像素点进行着色处理,生成所述泡泡图像。
可选地,所述泡泡特征信息包括:显示尺寸;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
根据所述位置信息和所述显示尺寸对所述泡泡图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取所述屏幕上显示的文本弹幕;
对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息;
对所述背景波纹特征信息进行处理,生成背景波纹图像;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度;
在所述待显示泡泡的生命周期内,在屏幕上显示的所述待显示泡泡在所述生命周期内各个时刻的显示位置、尺寸、透明度均不相同。
可选地,在所述显示所述泡泡弹幕图像之后,还包括:
在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡;
创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
在本申请实施的第二方面,提供了一种图像显示装置,包括:
目标图像获取模块,用于获取目标视频图像;
泡泡特征获取模块,用于获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
泡泡图像生成模块,用于对所述泡泡特征信息进行处理,生成泡泡图像;
泡泡弹幕图像生成模块,用于根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
泡泡弹幕图像显示模块,用于显示所述泡泡弹幕图像。
可选地,所述目标图像获取模块包括:
图像场景获取单元,用于获取目标视频文件中每帧视频图像对应的图像场景;
目标图像获取单元,用于将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
可选地,所述指定场景包括:七夕节场景、情人节场景、婚礼场景中的任一种。
可选地,在N大于1时,所述泡泡特征获取模块包括:
泡泡特征获取单元,用于获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向;
运动距离确定单元,用于根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离;
显示位置确定单元,用于根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
可选地,所述泡泡图像生成模块包括:
几何矩形框绘制单元,用于根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框;
泡泡图像生成单元,用于对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
可选地,所述几何矩形框绘制单元包括:
纹理坐标计算子单元,用于调用图形处理器内的顶点着色器根据所述泡泡特征信息,计算得到所述待显示泡泡的几何矩形框,并计算得到所述几何矩形框对应的纹理贴图的纹理坐标;
所述泡泡图像生成单元包括:
泡泡图像生成子单元,用于调用所述图形处理器内的片段着色器根据所述纹理坐标,获取所述纹理贴图上每个像素点的色值,并根据色值对所述纹理贴图上的每个像素点进行着色处理,生成所述泡泡图像。
可选地,所述泡泡特征信息包括:显示尺寸;
所述泡泡弹幕图像生成模块包括:
第一弹幕图像生成单元,用于根据所述位置信息和所述显示尺寸对所述泡泡图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,所述装置还包括:
文本弹幕获取模块,用于获取所述屏幕上显示的文本弹幕;
文本弹幕图像获取模块,用于对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色;
所述泡泡弹幕图像生成模块包括:
第二弹幕图像生成单元,用于对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,所述装置还包括:
背景波纹特征获取模块,用于获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息;
背景波纹图像生成模块,用于对所述背景波纹特征信息进行处理,生成背景波纹图像;
所述泡泡弹幕图像生成模块包括:
第三弹幕图像生成单元,用于对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度;
在所述待显示泡泡的生命周期内,在屏幕上显示的所述待显示泡泡在所述生命周期内各个时刻的显示位置、尺寸、透明度均不相同。
可选地,所述装置还包括:
泡泡停止显示模块,用于在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡;
下一泡泡显示模块,用于创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
在本申请实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一所述的图像显示方法。
在本申请实施的又一方面,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一所述的图像显示方法。
本申请实施例提供的方案,通过获取目标视频图像,获取在第N时刻的待显示泡泡的泡泡特征信息、待显示泡泡对应的位置信息,N为大于等于1的正整数,对泡泡特征信息进行处理,生成泡泡图像,根据位置信息对泡泡图像和目标视频图像进行合成处理,生成泡泡弹幕图像,泡泡弹幕图像是指以模拟显示的泡泡作为目标视频图像的弹幕的图像,显示泡泡弹幕图像。本申请实施例通过结合泡泡特征信息生成泡泡图像,并将泡泡图像与目标视频图像进行合成得到以模拟显示的泡泡作为目标视频图像的弹幕的泡泡弹幕图像,可以达到模拟显示泡泡作为视频图像的弹幕的目的,丰富了弹幕的表现形式。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。
图1为本申请实施例提供的一种图像显示方法的步骤流程图;
图2为本申请实施例提供的一种目标视频图像获取方法的步骤流程图;
图3为本申请实施例提供的一种位置信息确定方法的步骤流程图;
图4为本申请实施例提供的一种泡泡图像生成方法的步骤流程图;
图5为本申请实施例提供的一种泡泡弹幕的示意图;
图6为本申请实施例提供的一种泡泡在各阶段特征的示意图;
图7为本申请实施例提供的一种泡泡弹幕图像生成方法的步骤流程图;
图8为本申请实施例提供的另一种泡泡弹幕图像生成方法的步骤流程图;
图9为本申请实施例提供的泡泡特效弹幕实现流程的示意图;
图10为本申请实施例提供的一种显示泡泡创建方法的步骤流程图;
图11为本申请实施例提供的一种图像显示装置的结构示意图;
图12为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
图1为本申请实施例提供的一种图像显示方法的步骤流程图,如图1所示,该图像显示方法可以包括:步骤101、步骤102、步骤103、步骤104和步骤105。
步骤101:获取目标视频图像。
本申请实施例可以应用于生成以模拟显示的泡泡作为视频的弹幕的泡泡弹幕图像的场景中。
本申请实施例可以应用于CPU(Central Processing Processor,中央处理器),即执行主体为CPU。
目标视频图像是指需要添加模拟显示的泡泡作为弹幕的视频图像,在本示例中,目标视频图像可以为视频文件中隶属指定图像场景的视频图像。
在播放目标视频文件的过程中,可以根据目标视频文件中每帧视频图像的图像场景,以从视频图像中筛选出目标视频文件。对于目标视频文件的筛选过程可以结合图2进行如下详细描述。
参照图2,示出了本申请实施例提供的一种目标视频图像获取方法的步骤流程图,如图2所示,该目标视频图像获取方法可以包括:步骤201和步骤202。
步骤201:获取目标视频文件中每帧视频图像对应的图像场景。
在本实施例中,图像场景是指视频图像内显示的画面所属的场景。
在播放目标视频文件的过程中,可以获取目标视频文件中每帧视频图像对应的图像场景。具体地,可以对每帧视频图像的图像画面(如画面内显示的人物、景色等)进行分析,以分析图像画面所属的场景,进而可以得到每帧视频图像对应的图像场景。
在获取到目标视频文件中每帧视频图像对应的图像场景之后,执行步骤202。
步骤202:将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
指定场景是指预先设置的用于筛选制作以模拟显示的泡泡作为弹幕的视频图像的场景。在本示例中,指定场景可以为七夕节场景、情人节场景、婚礼场景等场景中的任一种。
在获取到目标视频文件中每帧视频图像对应的图像场景之后,可以将视频图像中图像场景隶属于指定场景的视频图像作为目标视频图像。
本申请实施例通过预先设置指定场景进行目标视频图像的筛选,从而可以筛选出指定场景的视频图像进行泡泡弹幕图像的制作,能够进一步烘托图像场景的氛围。
步骤102:获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数。
第N时刻是指显示待显示泡泡对应的泡泡弹幕的时刻,在具体实现中,待显示泡泡从开始创建到停止显示有一个完整的生命周期,第N时刻即为该待显示泡泡的生命周期内的某个时刻,在本示例中,N为大于等于1的正整数。
泡泡特征信息可以包括:待显示泡泡的纹理信息(即形状)、透明度信息、显示尺寸信息等特征。
位置信息是指第N个时刻的待显示泡泡对应的泡泡弹幕在屏幕上显示的位置信息。
在显示泡泡弹幕时,可以由CPU预先设定显示的泡泡的数量,每个泡泡在屏幕上的初始显示位置(即泡泡开始显示的位置)、形状(如圆形、椭圆形等)、尺寸等,以及每个泡泡的运动方向和运动速度,同时,也可以预先设定每个泡泡在不同显示时刻的尺寸等信息。
在实际应用中,如果同时存在的泡泡数量很少,则消散泡泡与新生成泡泡可能无法形成一个连续的大循环。若同时存在大量的泡泡,并赋予泡泡合适的初始位置、运动速度、映射纹理、尺寸、生命周期(即泡泡从开始生成到停止显示的时长)等特性,就可以模拟出自然界中连续不断的泡泡飘散的效果。因此,为了实现泡泡弹幕的动画效果,可以将泡泡数量设置为80个以上等,以避免泡泡数量过少无法模拟出泡泡运动飘散的效果。
在具体实现中,可以预先设置泡泡弹幕特效对应的触发控件,在播放多媒体文件(如视频等)时,可以在由用户触控该触发控件,以显示泡泡弹幕。然后,CPU可以获取自定义的第N时刻的待显示泡泡的泡泡特征信息,以及待显示泡泡对应的位置信息。
可以理解地,待显示泡泡的泡泡特征信息可以为CPU自定义的特征信息,如泡泡的显示尺寸、透明度等信息。为了体现出泡泡运动飘散的效果,针对同一个泡泡,在不同时刻的显示尺寸、透明度均不相同,针对该泡泡在每个时刻的泡泡特征均可以由CPU进行预定义,即CPU在每个时刻均需要配置该泡泡的泡泡特征信息。
在N=1时,泡泡在屏幕上的显示位置(即泡泡的初始显示位置)可以是CPU自定义的,每个泡泡的初始显示位置可以是不相同的。同时,CPU定义了每个待显示泡泡的运动方向,通常来讲,泡泡的运动方向是从屏幕的左下方到右上方(即以屏幕中显示画面内人物头像的朝向为正向,即上方)。
同时,CPU预定义了每个泡泡的运动速度,若N大于1,则可以根据N和泡泡的运动速度,计算出泡泡在第N时刻的显示位置,对于该实现过程可以结合图3进行如下详细描述。
参照图3,示出了本申请实施例提供的一种位置信息确定方法的步骤流程图,如图3所示,该位置信息确定方法可以包括:步骤301、步骤302和步骤303。
步骤301:获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向。
在本实施例中,初始显示位置是CPU预先定义的每个待显示泡泡初始生成时在屏幕上的位置。在本示例中,每个待显示泡泡的初始显示位置是不相同的。
运动速度是指CPU预先定义的每个待显示泡泡在模拟飘散过程中的运动的速度。在本示例中,每个待显示泡泡的运动速度可以是相同的,也可以是不相同的,具体地,对于每个待显示泡泡的运动速度可以根据业务需求而定,本实施例对此不加以限制。
在N大于1时,若需要获取每个待显示泡泡在屏幕上的显示位置,则可以先获取预先设定的待显示泡泡的初始显示位置、运动速度和运动方向。
在获取到预先设定的待显示泡泡的初始显示位置、运动速度和运动方向之后,执行步骤302。
步骤302:根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离。
在获取到预先设定的待显示泡泡的运动速度之后,可以根据运动速度和第N时刻,确定出待显示泡泡的运动距离,具体地,运动距离S=N×运动速度v。
在根据运动速度和第N时刻确定出待显示泡泡的运动距离之后,执行步骤303。
步骤303:根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
在根据运动速度和第N时刻确定出待显示泡泡的运动距离之后,可以根据运动方向、运动距离和初始显示位置,确定出待显示泡泡在第N时刻的显示位置。
本申请实施例通过自定义待显示泡泡的运动速度,通过运动速度和显示时刻可以计算出待显示泡泡在不同时刻在屏幕上的显示位置,从而可以达到模拟泡泡飘散效果的目的。
在获取到在第N时刻的待显示泡泡的泡泡特征信息以及待显示泡泡对应的位置信息之后,执行步骤203。
步骤203:对所述泡泡特征信息进行处理,生成泡泡图像。
在获取到在第N时刻的待显示泡泡的泡泡特征信息之后,可以对泡泡特征信息进行处理,以生成泡泡图像。具体地,在该泡泡特征信息中包含有待显示泡泡的顶点信息,根据该顶点信息可以绘制得到待显示泡泡的几何矩形框,然后对该几何矩形框进行着色处理,从而可以得到泡泡图像。对于该实现过程可以结合图4进行如下详细描述。
参照图4,示出了本申请实施例提供的一种泡泡图像生成方法的步骤流程图,如图4所示,该泡泡图像生成方法可以包括:步骤401和步骤402。
步骤401:根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框。
在本实施例中,泡泡特征信息中包含有待显示泡泡对应的顶点信息。
在得到待显示泡泡的泡泡特征信息之后,可以根据泡泡特征信息中包含的顶点信息绘制得到待显示泡泡对应的几何矩形框。具体地,可以调用图形处理器内的顶点着色器根据泡泡特征信息,计算得到待显示泡泡的几何矩形框,并计算得到几何矩形框对应的纹理贴图的纹理坐标。
在具体实现中,顶点着色器(即Vertex Shader)为在GPU(Graphics ProcessingUnit,GPU)中加载的一段程序,可以作用于顶点上。
在得到泡泡特征信息之后,可以由CPU将该泡泡特征信息发送给GPU。在GPU得到CPU发送的待显示泡泡特征的泡泡特征信息之后,可以调用顶点着色器根据泡泡特征信息计算得到待显示泡泡的几何矩形框,然后,可以计算得到该几何矩形框对应的纹理贴图的纹理坐标。
可以理解地,在GPU的顶点着色器内可以指定几何矩形框的中心点、边长信息,顶点着色器根据该顶点信息、以及指定的中心点和边长信息,可以绘制得到一个几何矩形框。本申请实施例相比于传统矩形框的多个顶点绘制方式,使用的顶点数大大减少,能够充分利用GPU的渲染能力,提高了渲染效率。
在根据泡泡特征信息中包含的顶点信息绘制得到待显示泡泡对应的几何矩形框之后,执行步骤402。
步骤402:对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
在根据泡泡特征信息中包含的顶点信息绘制得到待显示泡泡对应的几何矩形框之后,可以对几何矩形框进行着色处理,以生成模拟泡泡形状的泡泡图像。具体地,可以调用图形处理器内的片段着色器根据纹理坐标,获取纹理贴图上每个像素点的色值,并根据色值对纹理贴图上的每个像素点进行着色处理,生成模拟泡泡形状的泡泡图像。
在具体实现中,片段着色器(Fragment Shader)为在GPU内加载的一段程序,可以作用于每个像素点,以对每个像素点进行着色处理。
在泡泡特征信息中包含有待显示泡泡的对应纹理贴图ID,在片段着色器中可以通过该纹理贴图ID找到对应的纹理贴图,然后再根据纹理坐标获取该纹理贴图的指定位置的色值,进而可以根据获取的色值对纹理贴图上的每个像素点进行着色处理,以得到模拟泡泡形状的泡泡图像。具体地,对于生成的待显示泡泡的几何矩形框,可以将几何矩形框的边缘部分染色为无色,对几何矩形框内椭圆或圆形部分染色为指定颜色,进而可以得到视觉效果上的泡泡形状的泡泡图像。
在本实施例中,对每个像素进行着色的颜色可以根据实际播放的多媒体文件的类型而定,例如,在多媒体文件的指定剧集场景(如恋爱剧的甜蜜场景等)、或指定的节假日(如七夕、情人节等)等场景,可以对每个像素点添加粉色等颜色等。
可以理解地,上述示例仅是为了更好地理解本申请实施例的技术方案而列举的示例,不作为对本实施例的唯一限制。
本申请实施例通过图形处理器内的顶点着色器和片段着色器生成模拟泡泡形状的泡泡图像,仅需要一个单独的顶点和指定的宽度即可实现泡泡矩形框的绘制,相比于使用真正的纹理矩形框,使用的顶点数据将大大减少,可以提高渲染效率。
在本申请实施例中,GPU接收的泡泡特征信息还包含待显示泡泡对应的泡泡矩形框内每个像素的透明度信息,在调用片段着色器对泡泡矩形框内每个像素点进行着色处理之后,可以对每个像素点的透明度进行调整,以得到最终的泡泡图像,通过对每个像素点的透明度进行调整,从而可以在泡泡图像与目标视频图像合成之后,可以在实现泡泡特效弹幕的基础上,不影响目标视频图像的正常观看。
在对泡泡特征信息进行处理生成泡泡图像之后,执行步骤204。
步骤204:根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像。
泡泡弹幕图像是指以模拟显示的泡泡作为目标视频图像的弹幕的图像。
在对泡泡特征信息进行处理生成泡泡图像之后,可以根据待显示泡泡的位置信息对泡泡图像和目标视频图像进行合成处理,以生成泡泡弹幕图像。通过该泡泡弹幕图像即可实现在视频图像内模拟显示泡泡的目的。如图5所示,在屏幕内可以预先设置弹幕区域501,在视频图像的图像场景为“婚礼场景”时,可以在该弹幕区域501内可以显示多个泡泡,以模拟显示的泡泡作为视频图像的弹幕。
可以理解地,在进行泡泡矩形框绘制的过程是采用指定大小的矩形框进行绘制的,因此,在对泡泡图像和目标视频图像进行合成处理时,还可以根据CPU定义的待显示泡泡在第N时刻的显示尺寸对泡泡图像进行尺寸调整,进而将尺寸调整后的泡泡图像与目标视频图像进行合成处理,从而得到泡泡弹幕图像。
在本实施例中,每个泡泡均预先设置有对应的生命周期,在待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度,在待显示泡泡的生命周期内,在屏幕上显示的待显示泡泡在生命周期内各个时刻的显示位置、尺寸、透明度均不相同。如图6所示,在泡泡创建阶段,泡泡可以以初始透明度、初始尺寸显示于屏幕上的初始位置处,在泡泡运动阶段,泡泡的显示位置不断变化,透明度升高,泡泡尺寸逐步变大,在泡泡小时阶段,该泡泡的显示位置不断变化,透明度逐渐降低,且尺寸进一步变大。在此过程中,泡泡位置不断变化,尺寸由小变大,透明度先升高再降低,逐渐降低至为0时,则该泡泡显示,则可以达到模拟泡泡从生成到消亡的整个过程。在此过程中,可以由CPU采用轨迹算法根据泡泡的运动特征信息(如预先设定的每个泡泡的运动方向和运动速度的特征信息)计算出泡泡在每个时刻的显示位置,以及按照预先设定泡泡在每个时刻的尺寸信息、透明度信息,从而可以生成一系列连续的泡泡图像,这些泡泡图像按帧显示即可模拟泡泡从生成到消亡的整个过程。
在本实施例中,在显示泡泡弹幕的同时,若目标视频图像内显示有文本弹幕,则可以对文本弹幕的颜色进行渲染处理,以调整文本弹幕的颜色,然后,将渲染得到文本弹幕图像、泡泡图像和目标视频图像进行合成,得到泡泡弹幕图像。对于该过程可以结合图7进行如下详细描述。
参照图7,示出了本申请实施例提供的一种泡泡弹幕图像生成方法的步骤流程图,如图7所示,该泡泡弹幕图像生成方法可以包括:步骤701、步骤702和步骤703。
步骤701:获取所述屏幕上显示的文本弹幕。
在进行文本弹幕的颜色渲染时,可以获取屏幕上显示的文本弹幕。
在获取到屏幕上显示的文本弹幕之后,执行步骤702。
步骤702:对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色。
目标颜色是指与待显示泡泡的颜色相同的颜色,例如,在待显示泡泡的颜色为粉色时,该目标颜色即为粉色等。在具体实现中,待显示泡泡的颜色可以是由业务人员预先设置的,例如,在播放目标视频的过程中,在视频播放界面可以预先设置待显示泡泡的颜色为目标颜色(如粉色等)。CPU可以向GPU传入设置的目标颜色,GPU可以根据目标颜色对待显示泡泡进行着色处理时,可以按照设置的目标颜色对待显示泡泡进行着色,同时,设置的目标颜色即为文本弹幕所需渲染成的颜色。
在获取到屏幕上显示的文本弹幕之后,可以对获取的文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像。具体地,可以调用图形处理器内的片段着色器对文本弹幕内的每个像素进行着色处理,以生成目标颜色的文本弹幕图像。
在对文本弹幕进行渲染处理得到目标颜色的文本弹幕图像之后,执行步骤703。
步骤703:对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
在对文本弹幕进行渲染处理得到目标颜色的文本弹幕图像之后,可以对泡泡图像、文本弹幕图像与目标视频图像进行合成处理,生成泡泡弹幕图像。
本申请实施例通过结合待显示泡泡的颜色对文本弹幕的颜色进行渲染处理,可以进一步烘托出显示的视频图像的图像场景,提高用户的观影氛围,并且能够进一步增加弹幕的多样性。
在本实施例中,还可以绘制背景波纹图像,将背景波纹图像、泡泡图像和目标视频图像进行合成得到泡泡弹幕图像,以实现图像背景的水波效果(即实现图像背景的水波纹的效果)。对于该实现过程可以结合图8进行如下详细描述。
参照图8,示出了本申请实施例提供的另一种泡泡弹幕图像生成方法的步骤流程图,如图8所示,该泡泡弹幕图像生成方法可以包括:步骤801、步骤802和步骤803。
步骤801:获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息。
在本实施例中,背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息。
背景波纹信息是指含有多个(如6个等)顶点的几何矩形框信息、以及显示的背景波纹的连续进度信息。
在实现第N时刻的波纹特效及泡泡弹幕特效时,可以获取在第N时刻的背景波纹特征信息。
在获取到在第N时刻的背景波纹特征信息之后,执行步骤802。
步骤802:对所述背景波纹特征信息进行处理,生成背景波纹图像。
在获取到在第N时刻的背景波纹特征信息之后,可以对背景波纹特征信息进行处理,以生成背景波纹图像。在本示例中,可以调用图形处理器先根据背景波纹特征信息绘制波纹纹理矩形框,然后对波纹纹理矩形框进行着色处理,以生成背景波纹图像。
在具体实现中,在背景特征信息中包含有待显示背景波纹对应的纹理贴图的贴图ID。在GPU接收到CPU发送的背景波纹特征信息之后,可以调用图形处理器内的顶点着色器根据背景波纹特征信息,计算得到背景几何矩形框,然后,可以计算出背景几何矩形框对应的纹理贴图的纹理坐标。
在片段着色器中可以通过该纹理贴图ID找到对应的纹理贴图。然后由片段着色器采用扭曲算法对纹理贴图内的每个像素点的纹理坐标进行偏移处理,并获取偏移后的纹理坐标。进而可以获取偏移后的纹理贴图上的每个像素点对应的色值(该色值即为像素点坐标偏移后的色值),进而,可以根据色值对偏移后的纹理贴图上的每个像素点进行着色处理,以得到背景波纹图像。在实际应用中,每一帧图像都存在不同程度的偏移,多帧连续起来形成波纹波动的效果。
在对背景波纹特征信息进行处理生成背景波纹图像之后,执行步骤803。
步骤803:对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
在对背景波纹特征信息进行处理生成背景波纹图像之后,可以对泡泡图像、背景波纹图像和目标视频图像进行合成处理,以生成泡泡弹幕图像。
本申请实施例通过将背景波纹图像与泡泡弹幕图像进行合成并渲染至屏幕上,从而可以在实现泡泡弹幕特效同时,行成波纹波动的效果,可以使显示的泡泡弹幕更加逼真,进一步提高了用户的观影氛围。
在本申请实施例中,还可以将文本弹幕图像、背景波纹图像、泡泡图像和目标视频共同合成为泡泡弹幕图像,具体地,可以结合图9进行如下详细描述。
参照图9,示出了本申请实施例提供的一种泡泡特效弹幕实现流程的示意图。如图9所示,在业务层,可以由业务人员进行运营配置,以开启泡泡弹幕特效。在渲染层,可以通过三条渲染管线分别渲染得到文本弹幕图像、泡泡图像和背景波纹图像。如图9所示,在在第一条线路中,在CPU阶段可以指定文本弹幕为目标颜色,将该信息发送给GPU,然后由GPU内的顶点着色器计算顶点数据,并由片段着色器给指定文本弹幕上色,以得到文本弹幕图像。在第二条线路中,在CPU阶段可以管理泡泡状态信息,将泡泡状态信息发送给GPU,然后由GPU内的顶点着色器处理泡泡状态信息,由片段着色器映射泡泡纹理,进而可以得到泡泡图像。在第三条线路中,在CPU阶段管理背景波纹信息,将该背景波纹信息发送给GPU,然后由GPU内的顶点着色信息处理背景波纹信息,以得到背景波纹对应的几何矩形框,并获取几何矩形框对应的纹理贴图的纹理坐标,然后由片段着色器通过扭曲算法对每个纹理坐标进行扭曲处理,以获取每个纹理坐标在进行扭曲处理后的偏移坐标的色值,然后根据该色值对扭曲处理后的偏移坐标进行着色处理,从而得到背景波纹图像。最后可以将文本弹幕图像、泡泡图像、背景波纹图像和目标视频图像进行合成处理,以生成泡泡弹幕图像。
本申请实施例通过对文本弹幕图像、泡泡图像、背景波纹图像和目标视频图像进行合成处理得到泡泡弹幕图像,从而可以得到具备波纹波动效果的泡泡特效弹幕,更进一步地提升了用户的观影氛围。
在得到泡泡弹幕图像之后,执行步骤205。
步骤205:显示所述泡泡弹幕图像。
在得到泡泡弹幕图像之后,则可以显示该泡泡弹幕图像。具体地,可以调用调用图形处理器内图形渲染引擎(如Metal/OpenGL等)将泡泡弹幕图像渲染显示于屏幕上。如图9所示,在得到泡泡弹幕图像之后,可以将泡泡弹幕图像显示于屏幕上,以显示模拟泡泡特效弹幕的视频图像。
在本实施例中,若第一时刻与第N时刻之间的时长达到待显示泡泡的生命周期,则停止显示待显示泡泡,并创建下一待显示泡泡,并在下一生命周期内进行显示。对于该实现过程可以结合图10进行如下详细描述。
参照图10,示出了本申请实施例提供的一种显示泡泡创建方法的步骤流程图。如图10所示,该显示泡泡创建方法可以包括:步骤1001和步骤1002。
步骤1001:在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡。
在本实施例中,针对每个泡泡,预先均设置有相应的生命周期,针对显示的多个泡泡,生命周期可以是相同的,也可以是不相同的,具体地,对于单个泡泡的生命周期的设置方式可以根据业务需求而定,本实施例对此不加以限制。
在显示第N时刻的待显示泡泡对应的泡泡弹幕图像之后,可以判断第一时刻与第N时刻之间的时长是否达到预先设置的待显示泡泡的生命周期。
若第一时刻与第N时刻之间的时长达到预先设置的待显示泡泡的生命周期,则停止显示待显示泡泡。
在停止显示待显示泡泡之后,执行步骤1002。
步骤1002:创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
在停止显示待显示泡泡之后,可以创建待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示下一待显示泡泡,该下一待显示泡泡的显示方式与上述待显示泡泡的显示方式相同,即在下一生命周期内,根据下一待显示泡泡的泡泡特征信息生成泡泡图像,然后将泡泡图像与对应的视频图像合成为泡泡弹幕图像并显示。
在此过程中,由于每个泡泡开始生成的时刻不同,在同一时间内屏幕上显示有多个泡泡,在泡泡达到生命周期停止显示之后,自动创建对应的下一待显示泡泡并显示,如此即可行成一个创建、运动、消失的循环,能够达到模拟泡泡显示的目的。
本申请实施例通过在达到待显示泡泡的生命周期之后,对待显示泡泡进行回收并重置为新的泡泡在下一生命周期内显示,如此循环,可以使屏幕上不断有泡泡小时,并有新的泡泡生成,因此能够达到模拟泡泡飘散效果的目的。
本申请实施例提供的图像显示方法,通过获取目标视频图像,获取在第N时刻的待显示泡泡的泡泡特征信息、待显示泡泡对应的位置信息,N为大于等于1的正整数,对泡泡特征信息进行处理,生成泡泡图像,根据位置信息对泡泡图像和目标视频图像进行合成处理,生成泡泡弹幕图像,泡泡弹幕图像是指以模拟显示的泡泡作为目标视频图像的弹幕的图像,显示泡泡弹幕图像。本申请实施例通过结合泡泡特征信息生成泡泡图像,并将泡泡图像与目标视频图像进行合成得到以模拟显示的泡泡作为目标视频图像的弹幕的泡泡弹幕图像,可以达到模拟显示泡泡作为视频图像的弹幕的目的,丰富了弹幕的表现形式。
参照图11,示出了本申请实施例提供的一种图像显示装置的结构示意图,如图11所示,该图像显示装置1100可以包括以下模块:
目标图像获取模块1110,用于获取目标视频图像;
泡泡特征获取模块1120,用于获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
泡泡图像生成模块1130,用于对所述泡泡特征信息进行处理,生成泡泡图像;
泡泡弹幕图像生成模块1140,用于根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
泡泡弹幕图像显示模块1150,用于显示所述泡泡弹幕图像。
可选地,所述目标图像获取模块1110包括:
图像场景获取单元,用于获取目标视频文件中每帧视频图像对应的图像场景;
目标图像获取单元,用于将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
可选地,所述指定场景包括:七夕节场景、情人节场景、婚礼场景中的任一种。
可选地,在N大于1时,所述泡泡特征获取模块1120包括:
泡泡特征获取单元,用于获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向;
运动距离确定单元,用于根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离;
显示位置确定单元,用于根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
可选地,所述泡泡图像生成模块1130包括:
几何矩形框绘制单元,用于根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框;
泡泡图像生成单元,用于对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
可选地,所述几何矩形框绘制单元包括:
纹理坐标计算子单元,用于调用图形处理器内的顶点着色器根据所述泡泡特征信息,计算得到所述待显示泡泡的几何矩形框,并计算得到所述几何矩形框对应的纹理贴图的纹理坐标;
所述泡泡图像生成单元包括:
泡泡图像生成子单元,用于调用所述图形处理器内的片段着色器根据所述纹理坐标,获取所述纹理贴图上每个像素点的色值,并根据色值对所述纹理贴图上的每个像素点进行着色处理,生成所述泡泡图像。
可选地,所述泡泡特征信息包括:显示尺寸;
所述泡泡弹幕图像生成模块1140包括:
第一弹幕图像生成单元,用于根据所述位置信息和所述显示尺寸对所述泡泡图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,所述装置还包括:
文本弹幕获取模块,用于获取所述屏幕上显示的文本弹幕;
文本弹幕图像获取模块,用于对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色;
所述泡泡弹幕图像生成模块1140包括:
第二弹幕图像生成单元,用于对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,所述装置还包括:
背景波纹特征获取模块,用于获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息;
背景波纹图像生成模块,用于对所述背景波纹特征信息进行处理,生成背景波纹图像;
所述泡泡弹幕图像生成模块1140包括:
第三弹幕图像生成单元,用于对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度;
在所述待显示泡泡的生命周期内,在屏幕上显示的所述待显示泡泡在所述生命周期内各个时刻的显示位置、尺寸、透明度均不相同。
可选地,所述装置还包括:
泡泡停止显示模块,用于在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡;
下一泡泡显示模块,用于创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
本申请实施例提供的图像显示装置,通过获取目标视频图像,获取在第N时刻的待显示泡泡的泡泡特征信息、待显示泡泡对应的位置信息,N为大于等于1的正整数,对泡泡特征信息进行处理,生成泡泡图像,根据位置信息对泡泡图像和目标视频图像进行合成处理,生成泡泡弹幕图像,泡泡弹幕图像是指以模拟显示的泡泡作为目标视频图像的弹幕的图像,显示泡泡弹幕图像。本申请实施例通过结合泡泡特征信息生成泡泡图像,并将泡泡图像与目标视频图像进行合成得到以模拟显示的泡泡作为目标视频图像的弹幕的泡泡弹幕图像,可以达到模拟显示泡泡作为视频图像的弹幕的目的,丰富了弹幕的表现形式。
本申请实施例还提供了一种电子设备,如图12所示,包括处理器1201、通信接口1202、存储器1203和通信总线1204,其中,处理器1201,通信接口1202,存储器1203通过通信总线1204完成相互间的通信,
存储器1203,用于存放计算机程序;
处理器1201,用于执行存储器1203上所存放的程序时,实现如下步骤:
获取目标视频图像;
获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
对所述泡泡特征信息进行处理,生成泡泡图像;
根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
显示所述泡泡弹幕图像。
可选地,所述获取目标视频图像,包括:
获取目标视频文件中每帧视频图像对应的图像场景;
将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
可选地,所述指定场景包括:七夕节场景、情人节场景、婚礼场景中的任一种。
可选地,在N大于1时,获取所述待显示泡泡对应的位置信息,包括:
获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向;
根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离;
根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
可选地,所述对所述泡泡特征信息进行处理,生成泡泡图像,包括:
根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框;
对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
可选地,所述根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框,包括:
调用图形处理器内的顶点着色器根据所述泡泡特征信息,计算得到所述待显示泡泡的几何矩形框,并计算得到所述几何矩形框对应的纹理贴图的纹理坐标;
所述对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像,包括:
调用所述图形处理器内的片段着色器根据所述纹理坐标,获取所述纹理贴图上每个像素点的色值,并根据色值对所述纹理贴图上的每个像素点进行着色处理,生成所述泡泡图像。
可选地,所述泡泡特征信息包括:显示尺寸;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
根据所述位置信息和所述显示尺寸对所述泡泡图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取所述屏幕上显示的文本弹幕;
对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息;
对所述背景波纹特征信息进行处理,生成背景波纹图像;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
可选地,在所述待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度;
在所述待显示泡泡的生命周期内,在屏幕上显示的所述待显示泡泡在所述生命周期内各个时刻的显示位置、尺寸、透明度均不相同。
可选地,在所述显示所述泡泡弹幕图像之后,还包括:
在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡;
创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,简称RAM),也可以包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(Digital Signal Processing,简称DSP)、专用集成电路(Application SpecificIntegrated Circuit,简称ASIC)、现场可编程门阵列(Field-Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本申请提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的图像显示方法。
在本申请提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一所述的图像显示方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。

Claims (14)

1.一种图像显示方法,其特征在于,包括:
获取目标视频图像;
获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
对所述泡泡特征信息进行处理,生成泡泡图像;
根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
显示所述泡泡弹幕图像。
2.根据权利要求1所述的方法,其特征在于,所述获取目标视频图像,包括:
获取目标视频文件中每帧视频图像对应的图像场景;
将所述视频图像中图像场景隶属于指定场景的视频图像作为所述目标视频图像。
3.根据权利要求2所述的方法,其特征在于,所述指定场景包括:七夕节场景、情人节场景、婚礼场景中的任一种。
4.根据权利要求1所述的方法,其特征在于,在N大于1时,获取所述待显示泡泡对应的位置信息,包括:
获取预先设定的所述待显示泡泡的初始显示位置、运动速度和运动方向;
根据所述运动速度和所述第N时刻,确定所述待显示泡泡的运动距离;
根据所述运动方向、运动距离和所述初始显示位置,确定所述待显示泡泡在第N时刻的所述显示位置。
5.根据权利要求1所述的方法,其特征在于,所述对所述泡泡特征信息进行处理,生成泡泡图像,包括:
根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框;
对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像。
6.根据权利要求5所述的方法,其特征在于,所述根据所述泡泡特征信息中包含的顶点信息,绘制得到所述待显示泡泡对应的几何矩形框,包括:
调用图形处理器内的顶点着色器根据所述泡泡特征信息,计算得到所述待显示泡泡的几何矩形框,并计算得到所述几何矩形框对应的纹理贴图的纹理坐标;
所述对所述几何矩形框进行着色处理,生成模拟泡泡形状的所述泡泡图像,包括:
调用所述图形处理器内的片段着色器根据所述纹理坐标,获取所述纹理贴图上每个像素点的色值,并根据色值对所述纹理贴图上的每个像素点进行着色处理,生成所述泡泡图像。
7.根据权利要求1所述的方法,其特征在于,所述泡泡特征信息包括:显示尺寸;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
根据所述位置信息和所述显示尺寸对所述泡泡图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
8.根据权利要求1所述的方法,其特征在于,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取所述屏幕上显示的文本弹幕;
对所述文本弹幕进行渲染处理,以得到目标颜色的文本弹幕图像;所述目标颜色为与所述待显示泡泡的颜色相同的颜色;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述文本弹幕图像与所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
9.根据权利要求1所述的方法,其特征在于,在所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像之前,还包括:
获取在所述第N时刻的背景波纹特征信息,所述背景波纹特征信息用于指示显示的视频图像的图像背景的波纹特征信息;
对所述背景波纹特征信息进行处理,生成背景波纹图像;
所述根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像,包括:
对所述泡泡图像、所述背景波纹图像和所述目标视频图像进行合成处理,生成所述泡泡弹幕图像。
10.根据权利要求1所述的方法,其特征在于,在所述待显示泡泡处于消失阶段的情况下,第N-1时刻显示的目标视频图像内的待显示泡泡的透明度低于第N时刻显示的目标视频图像内的待显示泡泡的透明度;
在所述待显示泡泡的生命周期内,在屏幕上显示的所述待显示泡泡在所述生命周期内各个时刻的显示位置、尺寸、透明度均不相同。
11.根据权利要求1所述的方法,其特征在于,在所述显示所述泡泡弹幕图像之后,还包括:
在第一时刻与所述第N时刻之间的时长达到预先设置的所述待显示泡泡的生命周期时,停止显示所述待显示泡泡;
创建所述待显示泡泡对应的下一待显示泡泡,以在下一生命周期内显示所述下一待显示泡泡。
12.一种图像显示装置,其特征在于,包括:
目标图像获取模块,用于获取目标视频图像;
泡泡特征获取模块,用于获取在第N时刻的待显示泡泡的泡泡特征信息、所述待显示泡泡对应的位置信息;N为大于等于1的正整数;
泡泡图像生成模块,用于对所述泡泡特征信息进行处理,生成泡泡图像;
泡泡弹幕图像生成模块,用于根据所述位置信息对所述泡泡图像和所述目标视频图像进行合成处理,生成泡泡弹幕图像;所述泡泡弹幕图像是指以模拟显示的泡泡作为所述目标视频图像的弹幕的图像;
泡泡弹幕图像显示模块,用于显示所述泡泡弹幕图像。
13.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-11中任一所述的方法步骤。
14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-11中任一所述的方法。
CN202211116526.7A 2022-09-14 2022-09-14 图像显示方法、装置、电子设备及存储介质 Pending CN115484504A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211116526.7A CN115484504A (zh) 2022-09-14 2022-09-14 图像显示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211116526.7A CN115484504A (zh) 2022-09-14 2022-09-14 图像显示方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115484504A true CN115484504A (zh) 2022-12-16

Family

ID=84423867

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211116526.7A Pending CN115484504A (zh) 2022-09-14 2022-09-14 图像显示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115484504A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011013283A1 (ja) * 2009-07-28 2011-02-03 パナソニック株式会社 画像合成装置、符号化装置、プログラム、媒体
CN107566914A (zh) * 2017-10-23 2018-01-09 咪咕动漫有限公司 一种弹幕的显示控制方法、电子设备以及存储介质
WO2019006939A1 (zh) * 2017-07-05 2019-01-10 武汉斗鱼网络科技有限公司 弹幕显示方法、装置及电子设备
CN111601141A (zh) * 2020-04-30 2020-08-28 维沃移动通信有限公司 弹幕显示方法、装置、电子设备及可读存储介质
US20210203859A1 (en) * 2020-05-27 2021-07-01 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and Apparatus for Processing Video
CN114095774A (zh) * 2022-01-20 2022-02-25 浙大宁波理工学院 一种视频弹幕展示方法、计算机设备及存储介质
CN114511359A (zh) * 2022-02-17 2022-05-17 北京优酷科技有限公司 显示方法、装置、设备及介质
CN115022726A (zh) * 2022-05-09 2022-09-06 北京爱奇艺科技有限公司 环绕信息生成和弹幕显示方法、装置、设备及存储介质
CN115022701A (zh) * 2022-05-30 2022-09-06 北京达佳互联信息技术有限公司 视频播放方法、终端、装置、电子设备、介质及程序产品

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011013283A1 (ja) * 2009-07-28 2011-02-03 パナソニック株式会社 画像合成装置、符号化装置、プログラム、媒体
WO2019006939A1 (zh) * 2017-07-05 2019-01-10 武汉斗鱼网络科技有限公司 弹幕显示方法、装置及电子设备
CN107566914A (zh) * 2017-10-23 2018-01-09 咪咕动漫有限公司 一种弹幕的显示控制方法、电子设备以及存储介质
CN111601141A (zh) * 2020-04-30 2020-08-28 维沃移动通信有限公司 弹幕显示方法、装置、电子设备及可读存储介质
US20210203859A1 (en) * 2020-05-27 2021-07-01 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and Apparatus for Processing Video
CN114095774A (zh) * 2022-01-20 2022-02-25 浙大宁波理工学院 一种视频弹幕展示方法、计算机设备及存储介质
CN114511359A (zh) * 2022-02-17 2022-05-17 北京优酷科技有限公司 显示方法、装置、设备及介质
CN115022726A (zh) * 2022-05-09 2022-09-06 北京爱奇艺科技有限公司 环绕信息生成和弹幕显示方法、装置、设备及存储介质
CN115022701A (zh) * 2022-05-30 2022-09-06 北京达佳互联信息技术有限公司 视频播放方法、终端、装置、电子设备、介质及程序产品

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
施勇;朱永海;: "Premiere视频特效与关键帧的结合应用――以编辑"GPU特效"为例", 淮南师范学院学报, no. 04 *
王德玲、张宇民: "《After Effects 7.0影视后期特效制作技能入门》", 中国铁道出版社, pages: 298 - 300 *

Similar Documents

Publication Publication Date Title
US11335379B2 (en) Video processing method, device and electronic equipment
US11494993B2 (en) System and method to integrate content in real time into a dynamic real-time 3-dimensional scene
JP4481166B2 (ja) ユーザによる合成画像およびビデオ画像のリアルタイムのミキシングを可能にする方法およびシステム
US9652880B2 (en) 2D animation from a 3D mesh
JP6909554B2 (ja) 視覚効果を有するオブジェクトを表示する装置及び方法
CN109102560B (zh) 三维模型渲染方法及装置
CN106658145A (zh) 一种直播数据处理方法和装置
CN104469179A (zh) 一种将动态图片结合到手机视频中的方法
US9704229B2 (en) Post-render motion blur
US9183654B2 (en) Live editing and integrated control of image-based lighting of 3D models
CN110968962B (zh) 基于云渲染在移动端或大屏三维展示方法及系统
CN106447756B (zh) 用于生成用户定制的计算机生成动画的方法和系统
CN111476851B (zh) 图像处理方法、装置、电子设备及存储介质
US20080295035A1 (en) Projection of visual elements and graphical elements in a 3D UI
CN113436343A (zh) 用于虚拟演播厅的画面生成方法及装置、介质及电子设备
WO2021253640A1 (zh) 阴影数据确定方法、装置、设备和可读介质
CN112053370A (zh) 基于增强现实的显示方法、设备及存储介质
CN111462205B (zh) 图像数据的变形、直播方法、装置、电子设备和存储介质
CN115484504A (zh) 图像显示方法、装置、电子设备及存储介质
CN115830210A (zh) 虚拟对象的渲染方法、装置、电子设备及存储介质
CN115311395A (zh) 三维场景渲染方法、装置及设备
CN111340931A (zh) 场景处理方法、装置、用户端及存储介质
CN110662099A (zh) 用于显示弹幕的方法和装置
CN113676753B (zh) Vr场景中展示视频的方法、装置、电子设备和存储介质
CN113821345B (zh) 游戏中的移动轨迹渲染方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination