CN114005076B - 一种图像防遮挡方法、系统及电子设备 - Google Patents
一种图像防遮挡方法、系统及电子设备 Download PDFInfo
- Publication number
- CN114005076B CN114005076B CN202111636180.9A CN202111636180A CN114005076B CN 114005076 B CN114005076 B CN 114005076B CN 202111636180 A CN202111636180 A CN 202111636180A CN 114005076 B CN114005076 B CN 114005076B
- Authority
- CN
- China
- Prior art keywords
- output
- image
- area
- frame image
- key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Processing (AREA)
Abstract
本申请公开了一图像防遮挡方法、系统及电子设备,通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
Description
技术领域
本申请涉及图像处理领域,尤其涉及一种图像防遮挡方法、系统及电子设备。
背景技术
在通过客户端或网站播放视频时,若打开弹幕功能,则会在播放视频画面的同时,播放弹幕内容,这就会导致屏幕上的弹幕内容对视频画面中的人像造成遮挡,影响观看体验。
发明内容
有鉴于此,本申请提供一种图像防遮挡方法、系统及电子设备,其具体方案如下:
一种图像防遮挡方法,包括:
若满足预设图像输出条件,获得待输出帧图像;
确定所述待输出帧图像的关键信息区域;
获得所述关键信息区域中的关键区域图像;
控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡。
进一步的,所述若满足预设图像输出条件,获得待输出帧图像,包括:
若确定用于输出所述待输出帧图像的应用当前时刻输出帧图像的同时,输出弹幕信息,获得待输出帧图像。
进一步的,还包括:
确定所述待输出帧图像在视频图像中的输出时间信息;
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出具有所述遮罩区域的待输出帧图像。
进一步的,所述确定所述待输出帧图像的关键信息区域,包括:
基于预先设置的关键人脸信息,通过人脸识别方式确定所述待输出帧图像的关键人脸区域。
进一步的,所述基于预先设置的关键人脸信息,通过人脸识别方式确定所述待输出帧图像的关键人脸区域,包括:
通过人脸识别方式确定所述待输出帧图像的不少于一个人脸区域;
对所述不少于一个人脸区域的轮廓进行帧间平滑处理;
从所述不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域。
进一步的,还包括:
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出关键信息区域未被弹幕信息遮挡的帧图像。
进一步的,所述输出关键信息区域未被弹幕信息遮挡的帧图像,包括:
确定在到达所述待输出帧图像在视频图像中的输出时间信息时,弹幕信息在屏幕的位置;
若所述弹幕信息在屏幕的位置与所述帧图像中关键信息区域在屏幕的位置对应,则输出通过遮罩区域避免所述关键信息区域被所述弹幕信息遮挡的帧图像;
若所述弹幕信息在屏幕的位置与所述帧图像中关键信息区域在屏幕的位置不对应,输出待输出帧图像。
一种图像防遮挡系统,包括:
第一获得单元,用于在满足预设图像输出条件时,获得待输出帧图像;
确定单元,用于确定所述待输出帧图像的关键信息区域;
第二获得单元,用于获得所述关键信息区域中的关键区域图像;
控制单元,用于控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡。
一种电子设备,包括:
处理器,用于在满足预设图像输出条件时,获得待输出帧图像,确定所述待输出帧图像的关键信息区域,获得所述关键信息区域中的关键区域图像,控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡;
存储器,用于存储所述处理器执行上述处理过程的程序。
一种可读存储介质,用于至少存储一组指令集;
所述指令集用于被调用并至少执行如上任一项的图像防遮挡的方法。
从上述技术方案可以看出,本申请公开的图像防遮挡方法、系统及电子设备,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种图像防遮挡方法的流程图;
图2为本申请实施例公开的一种待输出帧图像、遮罩区域及弹幕信息的示意图;
图3为本申请实施例公开的一种图像防遮挡方法的流程图;
图4为本申请实施例公开的一种图像防遮挡方法的流程图;
图5为本申请实施例公开的一种图像防遮挡系统的结构示意图;
图6为本申请实施例公开的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请公开了一种图像防遮挡方法,其流程图如图1所示,包括:
步骤S11、若满足预设图像输出条件,获得待输出帧图像;
步骤S12、确定待输出帧图像的关键信息区域;
步骤S13、获得关键信息区域中的关键区域图像;
步骤S14、控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。
在对视频进行播放时,若弹幕功能开启,则当前用户和/或其他用户输出的弹幕信息会对视频中的图像画面造成遮挡,影响用户的观看体验。
为了避免这一问题,本方案中通过遮挡区域对弹幕进行遮挡,并将遮挡区域遮挡住的图像本身显示在遮挡区域上,从而实现了弹幕在图像的下层显示,避免弹幕对图像造成遮挡的问题。
具体的,只有在满足预设图像输出条件时,才会预先获得待输出的帧图像,该预设图像输出条件,即用于输出待输出帧图像的应用当前时刻输出帧图像的同时,输出弹幕信息,则会预先获得待输出的帧图像。
若帧图像通过某个特定网页输出,则在该网页开启弹幕信息显示的功能时,则会预先获得待输出的帧图像,并进一步对该帧图像的关键信息区域及关键区域图像进行确定并获得,以便于对该待输出的帧图像设置遮罩区域,避免关键区域图像被弹幕信息遮挡;若帧图像通过某个特定的应用程序输出,则在该应用程序开启弹幕信息显示的功能时,会预先获得待输出的帧图像,以便于对该待输出的帧图像设置遮罩区域,避免关键区域图像被弹幕信息遮挡。
另外,满足预设图像输出条件,还可以包括:当前已开启AI弹幕开关。
获得待输出的帧图像之后,对该待输出的帧图像的关键信息区域进行确定。该关键信息区域可以为:该帧图像拍摄时的焦点的预设范围内的区域,也可以为:该帧图像所要表达的重点信息的区域,如:该帧图像要突出的是一盆花,则该盆花就是该帧图像的关键信息区域;若帧图像要突出的是一个人,则该人就是该帧图像的关键信息区域,或者,该人的人脸是该帧图像的关键信息区域。
在确定关键信息区域后,将该关键信息区域内的图像确定为关键信息图像,并对该关键信息图像进行提取,以便于将提取出的关键信息图像显示在遮罩区域上。
将遮罩区域覆盖在关键信息区域上,通过遮罩区域覆盖遮罩区域之下的内容,以使遮罩区域之下的内容不可见。该遮罩区域可以与关键信息区域完全匹配,大小及位置均完全匹配,或者,遮罩区域的大小至少不小于关键信息区域,遮罩区域的位置与关键信息区域的位置匹配。
具体的,在对帧图像进行输出时,其是分不同层进行输出显示的,帧图像本身显示在最底层,当有弹幕信息同时显示时,弹幕信息显示在帧图像之上,若存在遮罩区域,则遮罩区域位于帧图像及弹幕信息之上,即从下到上依次是:帧图像、弹幕信息、遮罩区域。当输出帧图像的同时输出遮罩区域,则遮罩区域遮盖住的图像及弹幕信息均不可见。
如图2所示,包括:待输出帧图像21,遮罩区域22及弹幕信息23。遮罩区域所覆盖的待输出帧图像上的关键信息区域处的关键区域图像不可见,且遮罩区域所覆盖的弹幕信息也不可见。
在通过遮罩区域遮挡住位于其下方的弹幕信息及关键区域图像的同时,将预先提取出的关键区域图像显示在遮罩区域之上,以便于能够在弹幕信息的上方显示关键区域图像,避免了关键区域图像被遮挡的情况发生。
本实施例公开的图像防遮挡方法,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
本实施例公开了一种图像防遮挡方法,其流程图如图3所示,包括:
步骤S31、若满足预设图像输出条件,获得待输出帧图像;
步骤S32、确定待输出帧图像在视频图像中的输出时间信息,确定待输出帧图像的关键信息区域;
步骤S33、获得关键信息区域中的关键区域图像;
步骤S34、若当前时刻满足待输出帧图像在视频图像中的输出时间信息,输出具有遮罩区域的待输出帧图像,遮罩区域上显示有关键区域图像,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。
在对待输出帧图像进行关键信息区域确定之前,或同时,还需要确定待输出帧图像的输出时间信息,即若该待输出帧图像是视频图像中的一帧图像,则需要确定该帧图像是该视频图像中哪一时刻的输出图像,或者,在对视频图像进行输出时,在哪一时刻会输出该帧图像。
或者,也可以为:在对视频图像进行输出时,对还未输出的多个帧图像进行关键信息区域的确定,确定哪一个帧图像具有关键信息区域,并对具有关键信息区域的帧图像中的关键信息区域进行遮罩覆盖,即对该输出的视频图像中的所有具有关键信息区域的帧图像的关键信息区域进行遮罩覆盖,以避免任一一帧图像中的关键信息区域被弹幕信息遮挡。
若在对视频图像进行输出时,对该视频图像中所有具有关键信息区域的帧图像的关键信息区域进行遮罩覆盖,则需要在预先确定所有具有关键信息区域的帧图像后,记录每一帧图像的输出时间信息,以便于在对具有关键信息区域的帧图像进行遮罩覆盖后,能够在基于输出时间信息确定当前已达到该帧图像的输出时刻时,对该进行遮罩覆盖的帧图像进行输出。
如:一个视频图像中,第一帧图像不具有关键信息区域,第二帧图像具有关键信息区域,第三帧图像具有关键信息区域。则首先对第二帧图像的关键信息区域进行确定,并通过遮罩区域覆盖其关键信息区域,在遮罩区域上显示该关键信息区域处的图像,同时,对第三针图像的关键信息区域进行确定,并通过遮罩区域覆盖其关键信息区域,在遮罩区域上显示该关键信息区域处的图像;在对第二帧图像及第三帧图像进行遮罩处理结束后,将经过遮罩处理的第二帧图像及第三帧图像按照时间顺序进行排列,并且标记第二帧图像的输出时间信息以及第三帧图像的输出时间信息。
在对视频图像进行输出时,由于第一帧图像不具备关键信息区域,则第一帧图像正常输出,无需经过处理,在第一帧图像输出后,其输出时间已与第二帧图像的输出时间信息匹配,即当前已达到了第二帧图像的输出时刻,需要对第二帧图像进行输出,此时,从预先按时间顺序排列的经过遮罩处理的第二帧图像及第三帧图像中选择第二帧图像,在输出第一帧图像后,输出经过遮罩处理的第二帧图像;在输出第二帧图像之后,当前已达到了第三帧图像的输出时刻,需要对第三帧图像进行输出,此时,选择经过遮罩处理的第三帧图像,在输出第二帧图像后,输出经过遮罩处理的第三帧图像。
对于不存在关键信息区域的帧图像,则无需经过处理,直接输出即可。
另外,获得待输出的帧图像,其可以具体为获得视频图像的资源包svg文件,之后进行解压,其中,svg文件是一种图像的文件格式,是由算法组生成对应帧识别出的矢量图像。
在确定输出时间信息时,可以对视频图像中每一帧图像的svg文件进行排列,得到svg列表,对其进行格式加工,以便获得每个svg文件对应的时间戳。
具体的,对svg列表进行格式加工,可以为:缓存解压缩后,对文件列表进行预处理,解析文件名,获取时间戳,svg对应的时间戳是对应视频画面里该帧图像的输出时刻,帧动画文件由Uint8转换为Base64字符。
本实施例公开的图像防遮挡方法,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
本实施例公开了一种图像防遮挡方法,其流程图如图4所示,包括:
步骤S41、若满足预设图像输出条件,获得待输出帧图像;
步骤S42、基于预先设置的关键人脸信息,通过人脸识别方式确定待输出帧图像的关键人脸区域;
步骤S43、获得关键人脸区域中的关键人脸图像;
步骤S44、控制关键人脸图像显示在遮罩区域上,遮罩区域覆盖在关键人脸区域上,遮罩区域与关键人脸区域匹配,用于避免在待输出帧图像输出时关键人脸图像被遮挡。
关键信息区域为帧图像中的人脸区域,并且是预先设置的关键人脸的人脸区域,即只有当帧图像中存在关键人脸,且弹幕信息输出被启动时,才表明满足预设图像输出条件,能够对该帧图像进行遮罩处理。
将帧图像中的关键人脸区域确定为关键信息区域,对其进行遮罩处理,以使关键人脸区域通过遮罩区域显示在弹幕信息的上方,避免被弹幕信息遮挡。
对于帧图像中的除预先设置的关键人脸外的其他人脸,则无需进行处理,其他人脸在被弹幕信息遮挡时是无需进行处理的。
帧图像中无需进行遮罩覆盖的区域包括:除关键人脸外的其他人脸,如:群演的人脸,或者其他非主角或非焦点位置处的人脸,还可以包括:其他物体,如:扇子、衣服、山水等;或者,若帧图像中存在关键人脸,如:存在主角的人脸,但是该关键人脸以虚化形式显示,则也无需对其进行遮罩覆盖;
或者,若帧图像中存在关键人脸,但是该关键人脸在帧图像中所占的面积大于某一预设值,则也无需对其进行遮罩覆盖,只有当关键人脸在帧图像中的占比较小时,才会对其进行遮罩覆盖,这就需要在确定满足预设图像输出条件时,不仅需要确定帧图像中存在关键人脸区域,以及弹幕信息输出被启动,还需要确定该关键人脸区域所占的面积与帧图像的面积之间的比例,确定该比例是否超出某一预设值。
具体的,基于预先设置的关键人脸信息,通过人脸识别方式确定待输出帧图像的关键人脸区域,包括:通过人脸识别方式确定待输出帧图像的不少于一个人脸区域,对不少于一个人脸区域的轮廓进行帧间平滑处理,从不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域。
确定不少于一个人脸区域可通过人脸检测和识别的方式确定,即将帧图像中存在的所有人脸区域全部识别出,之后通过实例分割算法,分割出画面中出现的人物轮廓,对视频进行镜头分割,对同一镜头内的人物轮廓线进行帧间平滑处理,得到流畅、精细的人物轮廓线,最后筛选出其中与预先设置的关键人脸匹配的人脸轮廓线区域,以生成最终的蒙板。
将关键人脸图像显示在遮罩区域上,之后将遮罩转换成网页或应用能够识别的blob对象,把blob对象赋值给mask-image属性的对象;之后同步播放器功能的操作,增加清除机制、对帧图像进行优化。对帧图像进行优化是通过标识优化,是指对指定时间范围内重复的帧图像进行优化,即在指定时间范围内的帧图像的关键信息区域采用固定的遮罩,以减少资源文件的大小。
进一步的,若当前时刻满足待输出帧图像在视频图像中的输出时间信息,输出关键信息区域未被弹幕信息遮挡的帧图像。即当到达该帧图像的输出时刻时,输出的是关键信息区域不会被弹幕遮挡的帧图像,即关键信息区域处的图像位于弹幕上方,以避免弹幕对关键信息区域的遮挡。
具体可以为:确定在到达待输出帧图像在视频图像中的输出时间信息时,弹幕信息在屏幕的位置;若弹幕信息在屏幕的位置与帧图像中关键信息区域在屏幕的位置对应,则输出通过遮罩区域避免关键信息区域被弹幕信息遮挡的帧图像;若弹幕信息在屏幕的位置与帧图像中关键信息区域在屏幕的位置不对应,输出待输出帧图像。
即预先确定在到达待输出帧图像的输出时刻时,确定在该时刻弹幕信息的位置,如果在输出该待输出帧图像时,弹幕信息的位置恰好到达该帧图像中关键信息区域的位置,则需要启动遮罩,通过遮罩遮挡住位于遮罩下方的区域的内容,如:遮罩下方的弹幕以及遮罩下方的关键区域图像,并在遮罩上显示关键区域图像,以使得关键区域图像显示在弹幕上方。
或者,也可以为:在到达待输出帧图像的输出时刻时,无论弹幕信息的位置是否恰好与该待输出帧图像中的关键信息区域的位置匹配,都会启动遮罩,通过遮罩避免关键信息区域的图像被遮挡。
本实施例公开的图像防遮挡方法,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
本实施例公开了一种图像防遮挡系统,其结构示意图如图5所示,包括:
第一获得单元51,确定单元52,第二获得单元53及控制单元54。
其中,第一获得单元51用于在满足预设图像输出条件时,获得待输出帧图像;
确定单元52用于确定待输出帧图像的关键信息区域;
第二获得单元53用于获得关键信息区域中的关键区域图像;
控制单元54用于控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。
进一步的,第一获得单元用于:在确定用于输出所述待输出帧图像的应用当前时刻输出帧图像的同时,输出弹幕信息,获得待输出帧图像。
进一步的,本实施例公开的图像防遮挡系统,还可以包括:
时间确定单元,用于确定待输出帧图像在视频图像中的输出时间信息;
输出单元,用于在当前时刻满足待输出帧图像在视频图像中的输出时间信息,输出具有遮罩区域的待输出帧图像。
进一步的,确定单元用于:基于预先设置的关键人脸信息,通过人脸识别方式确定待输出帧图像的关键人脸区域。
进一步的,确定单元用于:
通过人脸识别方式确定待输出帧图像的不少于一个人脸区域;对不少于一个人脸区域的轮廓进行帧间平滑处理;从不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域。
进一步的,输出单元用于:
在当前时刻满足待输出帧图像在视频图像中的输出时间信息,输出关键信息区域未被弹幕信息遮挡的帧图像。
进一步的,输出单元用于:
确定在到达待输出帧图像在视频图像中的输出时间信息时,弹幕信息在屏幕的位置;若弹幕信息在屏幕的位置与帧图像中关键信息区域在屏幕的位置对应,则输出通过遮罩区域避免关键信息区域被弹幕信息遮挡的帧图像;若弹幕信息在屏幕的位置与帧图像中关键信息区域在屏幕的位置不对应,输出待输出帧图像。
本实施例公开的图像防遮挡系统是基于上述实施例公开的图像防遮挡方法实现的,在此不再赘述。
本实施例公开的图像防遮挡系统,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
本实施例公开了一种电子设备,其结构示意图如图6所示,包括:
处理器61及存储器62。
其中,处理器61用于在满足预设图像输出条件时,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡;
存储器62用于存储处理器执行上述处理过程的程序。
本实施例公开的电子设备是基于上述实施例公开的图像防遮挡方法实现的,在此不再赘述。
本实施例公开的电子设备,若满足预设图像输出条件,获得待输出帧图像,确定待输出帧图像的关键信息区域,获得关键信息区域中的关键区域图像,控制关键区域图像显示在遮罩区域上,遮罩区域覆盖在关键信息区域上,遮罩区域与关键信息区域匹配,用于避免在待输出帧图像输出时关键区域图像被遮挡。本方案通过在满足预设图像输出条件时,获得待输出的帧图像,并进一步确定其关键信息区域,并提取关键信息区域的图像,以便于能够在遮罩区域上显示关键区域图像,从而实现在对待输出帧图像进行输出时,其输出的是具有遮罩区域的帧图像,该遮罩区域覆盖在关键信息区域之上,并能够在遮罩区域之上显示关键信息区域处的图像,避免了当有弹幕输出时该关键信息区域处的图像被遮挡的情况,提高了用户的观看体验。
本申请实施例还提供了一种可读存储介质,其上存储有计算机程序,所述计算机程序被处理器加载并执行,实现上述图像防遮挡方法的各步骤,具体实现过程可以参照上述实施例相应部分的描述,本实施例不做赘述。
本申请还提出了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。电子设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该电子设备执行上述图像防遮挡方法方面或图像防遮挡系统方面的各种可选实现方式中所提供方法,具体实现过程可以参照上述相应实施例的描述,不做赘述。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (7)
1.一种图像防遮挡方法,其特征在于,包括:
若满足预设图像输出条件,获得待输出帧图像;
确定所述待输出帧图像的关键信息区域;
获得所述关键信息区域中的关键区域图像;
控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡;
所述确定所述待输出帧图像的关键信息区域,包括:
通过人脸识别方式确定所述待输出帧图像的不少于一个人脸区域;其中,通过实例分割算法,分割出画面中出现的人物轮廓,对视频进行镜头分割;
对同一镜头内的人物轮廓线进行帧间平滑处理,得到处理后的人物轮廓线;
从所述不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域;
确定所述待输出帧图像在视频图像中的输出时间信息;
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出具有所述遮罩区域的待输出帧图像;
其中,所述获得待输出帧图像为获得视频图像的资源包svg文件,所述确定所述待输出帧图像在视频图像中的输出时间信息,包括:
对视频图像中每一帧图像的svg文件进行排列,得到svg列表;
对所述svg列表进行格式加工,获得每个svg文件对应的时间戳;所述svg对应的时间戳是对应视频图像里该帧图像的输出时刻。
2.根据权利要求1所述的方法,其特征在于,所述若满足预设图像输出条件,获得待输出帧图像,包括:
若确定用于输出所述待输出帧图像的应用当前时刻输出帧图像的同时,输出弹幕信息,获得待输出帧图像。
3.根据权利要求2所述的方法,其特征在于,还包括:
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出关键信息区域未被弹幕信息遮挡的帧图像。
4.根据权利要求3所述的方法,其特征在于,所述输出关键信息区域未被弹幕信息遮挡的帧图像,包括:
确定在到达所述待输出帧图像在视频图像中的输出时间信息时,弹幕信息在屏幕的位置;
若所述弹幕信息在屏幕的位置与所述帧图像中关键信息区域在屏幕的位置对应,则输出通过遮罩区域避免所述关键信息区域被所述弹幕信息遮挡的帧图像;
若所述弹幕信息在屏幕的位置与所述帧图像中关键信息区域在屏幕的位置不对应,输出待输出帧图像。
5.一种图像防遮挡系统,其特征在于,包括:
第一获得单元,用于在满足预设图像输出条件时,获得待输出帧图像;
确定单元,用于确定所述待输出帧图像的关键信息区域;
第二获得单元,用于获得所述关键信息区域中的关键区域图像;
控制单元,用于控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡;
所述确定所述待输出帧图像的关键信息区域,包括:
通过人脸识别方式确定所述待输出帧图像的不少于一个人脸区域;其中,通过实例分割算法,分割出画面中出现的人物轮廓,对视频进行镜头分割;对同一镜头内的人物轮廓线进行帧间平滑处理,得到处理后的人物轮廓线;从所述不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域;
确定所述待输出帧图像在视频图像中的输出时间信息;
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出具有所述遮罩区域的待输出帧图像;
其中,所述获得待输出帧图像为获得视频图像的资源包svg文件,所述确定所述待输出帧图像在视频图像中的输出时间信息,包括:
对视频图像中每一帧图像的svg文件进行排列,得到svg列表;
对所述svg列表进行格式加工,获得每个svg文件对应的时间戳;所述svg对应的时间戳是对应视频图像里该帧图像的输出时刻。
6.一种电子设备,其特征在于,包括:
处理器,用于在满足预设图像输出条件时,获得待输出帧图像,确定所述待输出帧图像的关键信息区域,获得所述关键信息区域中的关键区域图像,控制所述关键区域图像显示在遮罩区域上,所述遮罩区域覆盖在所述关键信息区域上,所述遮罩区域与所述关键信息区域匹配,用于避免在所述待输出帧图像输出时所述关键区域图像被遮挡;
所述确定所述待输出帧图像的关键信息区域,包括:通过人脸识别方式确定所述待输出帧图像的不少于一个人脸区域;其中,通过实例分割算法,分割出画面中出现的人物轮廓,对视频进行镜头分割;对同一镜头内的人物轮廓线进行帧间平滑处理,得到处理后的人物轮廓线;从所述不少于一个人脸区域中选取与预设的关键人脸信息匹配的人脸区域,将其确定为关键人脸区域;确定所述待输出帧图像在视频图像中的输出时间信息;
若当前时刻满足所述待输出帧图像在视频图像中的输出时间信息,输出具有所述遮罩区域的待输出帧图像;
其中,所述获得待输出帧图像为获得视频图像的资源包svg文件,所述确定所述待输出帧图像在视频图像中的输出时间信息,包括:
对视频图像中每一帧图像的svg文件进行排列,得到svg列表;
对所述svg列表进行格式加工,获得每个svg文件对应的时间戳;所述svg对应的时间戳是对应视频图像里该帧图像的输出时刻;
存储器,用于存储所述处理器执行上述处理过程的程序。
7.一种可读存储介质,用于至少存储一组指令集;
所述指令集用于被调用并至少执行如权利要求1-4中任一项所述的图像防遮挡的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111636180.9A CN114005076B (zh) | 2021-12-30 | 2021-12-30 | 一种图像防遮挡方法、系统及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111636180.9A CN114005076B (zh) | 2021-12-30 | 2021-12-30 | 一种图像防遮挡方法、系统及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114005076A CN114005076A (zh) | 2022-02-01 |
CN114005076B true CN114005076B (zh) | 2022-04-26 |
Family
ID=79932206
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111636180.9A Active CN114005076B (zh) | 2021-12-30 | 2021-12-30 | 一种图像防遮挡方法、系统及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114005076B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019007281A1 (zh) * | 2017-07-04 | 2019-01-10 | 上海全土豆文化传播有限公司 | 一种弹幕展示方法及客户端 |
CN111954060A (zh) * | 2019-05-17 | 2020-11-17 | 上海哔哩哔哩科技有限公司 | 弹幕蒙版的渲染方法、计算机设备及可读存储介质 |
CN112492347A (zh) * | 2019-09-12 | 2021-03-12 | 上海哔哩哔哩科技有限公司 | 处理信息流、显示弹幕信息的方法及信息流处理系统 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110868623A (zh) * | 2018-08-27 | 2020-03-06 | 上海哔哩哔哩科技有限公司 | 视觉焦点区域的弹幕隐藏方法及处理装置 |
CN109089170A (zh) * | 2018-09-11 | 2018-12-25 | 传线网络科技(上海)有限公司 | 弹幕显示方法及装置 |
CN111385665A (zh) * | 2018-12-29 | 2020-07-07 | 百度在线网络技术(北京)有限公司 | 弹幕信息的处理方法、装置、设备及存储介质 |
CN111954052B (zh) * | 2019-05-17 | 2022-04-05 | 上海哔哩哔哩科技有限公司 | 显示弹幕信息的方法、计算机设备及可读存储介质 |
CN110784755A (zh) * | 2019-11-18 | 2020-02-11 | 上海极链网络科技有限公司 | 一种弹幕信息的显示方法、装置、终端和存储介质 |
CN111654747B (zh) * | 2020-06-12 | 2022-07-26 | 杭州海康威视数字技术股份有限公司 | 弹幕显示方法及装置 |
-
2021
- 2021-12-30 CN CN202111636180.9A patent/CN114005076B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019007281A1 (zh) * | 2017-07-04 | 2019-01-10 | 上海全土豆文化传播有限公司 | 一种弹幕展示方法及客户端 |
CN111954060A (zh) * | 2019-05-17 | 2020-11-17 | 上海哔哩哔哩科技有限公司 | 弹幕蒙版的渲染方法、计算机设备及可读存储介质 |
CN112492347A (zh) * | 2019-09-12 | 2021-03-12 | 上海哔哩哔哩科技有限公司 | 处理信息流、显示弹幕信息的方法及信息流处理系统 |
Also Published As
Publication number | Publication date |
---|---|
CN114005076A (zh) | 2022-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9661239B2 (en) | System and method for online processing of video images in real time | |
CN110475072B (zh) | 拍摄图像的方法、装置、终端和存储介质 | |
JP5607079B2 (ja) | 前景−背景制約伝播に基づくビデオマッティング | |
EP3254283B1 (en) | User sliders for simplified adjustment of images | |
CN110827204B (zh) | 图像处理方法、装置及电子设备 | |
KR101349699B1 (ko) | 영상 추출 및 합성 장치, 이의 방법 | |
EP3644599A1 (en) | Video processing method and apparatus, electronic device, and storage medium | |
CN110971841B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN111988672A (zh) | 视频处理方法、装置、电子设备和存储介质 | |
JP4328397B2 (ja) | 画像データ処理方法及び装置並びに記憶媒体 | |
CN111429551A (zh) | 图像编辑方法、装置、电子设备和存储介质 | |
US20240153097A1 (en) | Methods and Systems for Automatically Generating Backdrop Imagery for a Graphical User Interface | |
CN114005076B (zh) | 一种图像防遮挡方法、系统及电子设备 | |
CN107564085B (zh) | 图像扭曲处理方法、装置、计算设备及计算机存储介质 | |
CN111968605A (zh) | 曝光度调整方法及装置 | |
CN114862729A (zh) | 图像处理方法、装置、计算机设备和存储介质 | |
CN113794831B (zh) | 视频拍摄方法、装置、电子设备及介质 | |
CN112752110B (zh) | 视频呈现方法及装置、计算设备、存储介质 | |
CN113012085A (zh) | 图像处理方法和装置 | |
CN115988259A (zh) | 一种视频处理方法、装置、终端、介质及程序产品 | |
CN112085025A (zh) | 物体分割方法、装置、设备 | |
CN111935508B (zh) | 信息处理和获取方法、装置、电子设备及存储介质 | |
CN116887033A (zh) | 一种图像处理方法及装置 | |
CN113703901A (zh) | 图形码显示方法、装置及电子设备 | |
WO2016044983A1 (zh) | 一种图像处理方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |