CN112416191A - 录屏处理方法、装置、计算机设备和计算机可读存储介质 - Google Patents

录屏处理方法、装置、计算机设备和计算机可读存储介质 Download PDF

Info

Publication number
CN112416191A
CN112416191A CN202010979162.XA CN202010979162A CN112416191A CN 112416191 A CN112416191 A CN 112416191A CN 202010979162 A CN202010979162 A CN 202010979162A CN 112416191 A CN112416191 A CN 112416191A
Authority
CN
China
Prior art keywords
icon
floating window
screen recording
acquiring
frame image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010979162.XA
Other languages
English (en)
Other versions
CN112416191B (zh
Inventor
蔡政和
薛德威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN202010979162.XA priority Critical patent/CN112416191B/zh
Publication of CN112416191A publication Critical patent/CN112416191A/zh
Application granted granted Critical
Publication of CN112416191B publication Critical patent/CN112416191B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording

Abstract

本申请提供了一种录屏处理方法、装置、计算机设备和计算机可读存储介质。该录屏处理方法包括:获取录屏的帧图像;获取帧图像中包括悬浮窗图标的图标区域;将图标区域内的悬浮窗图标去除,以得到目标图像;以及根据目标图像生成录屏视频。通过本申请,能够在录屏过程中使用悬浮窗进行操作,同时,生成的录屏视频中不包括悬浮窗图标。

Description

录屏处理方法、装置、计算机设备和计算机可读存储介质
技术领域
本申请涉及图像处理技术领域,尤其涉及一种录屏处理方法、装置、计算机设备和计算机可读存储介质。
背景技术
录屏是指对终端屏幕进行录像,以记录在终端上的操作过程。现有技术中,在移动终端录屏的场景下,为了使录屏操作更加便利,用户通常会通过在系统桌面上开启悬浮窗进行录屏操作,其中,悬浮窗为录屏过程中的常见组件,悬浮在系统级别的窗口中,用户可以在系统任意界面操作悬浮窗来控制录屏流程,例如查看录屏进度,控制录屏流程等,但是使用悬浮窗录屏会带来新的问题。
因此,如何更好地使用悬浮窗录屏,成为本领域亟需解决的技术问题。
发明内容
本申请的目的是提供一种录屏处理方法、装置、计算机设备和计算机可读存储介质,用于解决现有技术中的上述技术问题。
一方面,为实现上述目的,本申请提供了一种录屏处理方法。
该录屏处理方法包括:获取录屏的帧图像;获取所述帧图像中包括悬浮窗图标的图标区域;去除所述图标区域内的悬浮窗图标,以得到目标图像;以及根据所述目标图像生成录屏视频。
可选地,在一种实施例中,去除所述图标区域内的悬浮窗图标,以得到目标图像的步骤包括:获取所述图标区域的色值信息;获取所述悬浮窗图标的色值信息;以及根据所述图标区域的色值信息和所述悬浮窗图标的色值信息得到所述目标图像的色值信息。
可选地,在一种实施例中,采用以下公式计算得到所述目标图像的色值信息:r2=(r-r1)/(1-a1);g2=(g-g1)/(1-a1);b2=(b-b1)/(1-a1);其中,r、g和b为所述图标区域的像素的rgb值,r1、g1、b1和a1为所述悬浮窗图标的像素的rgba值,r2、g2和b2为所述目标图像的色值信息。
可选地,在一种实施例中,获取所述帧图像中包括悬浮窗图标的图标区域的步骤包括:获取所述悬浮窗图标的移动路径文件,其中,所述移动路径文件包括所述悬浮窗图标的坐标,所述坐标包括所述悬浮窗图标所在的帧图像的帧标识信息和所述悬浮窗图标在系统窗口上的位置信息;确定所述帧图像的帧标识信息;在所述移动路径文件提取所述帧标识信息对应的位置信息;以及获取所述帧图像在所述位置信息处的像素。
可选地,在一种实施例中,在获取所述悬浮窗图标的移动路径文件之前,所述录屏处理方法还包括:在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息和所述悬浮窗图标所在帧图像的帧标识信息;根据所述位置信息和所述帧标识信息生成所述坐标;将所述坐标写入内存;以预设时长为间隔,获取所述内存中的坐标,以得到坐标组;将所述坐标组中位置信息相同的连续n个坐标进行合并,其中,n大于或等于2;以及将合并处理后的所述坐标组写入所述移动路径文件。
可选地,在一种实施例中,获取录屏的帧图像的步骤包括:获取录屏得到的原始视频;解析所述原始视频的参数;根据解析到的参数对所述原始视频进行解码;以及对解码后得到的数据进行渲染,以得到所述帧图像。
可选地,在一种实施例中,在获取录屏的帧图像的步骤之前,所述录屏处理方法包括:在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息;获取录屏的帧图像的步骤包括:对当前帧画面进行编码,以得到所述帧图像;获取所述帧图像中包括悬浮窗图标的图标区域的步骤包括:获取所述帧图像中所述位置信息处的像素。
另一方面,为实现上述目的,本申请提供了一种录屏处理装置。
录屏处理装置包括:第一获取模块,用于获取录屏的帧图像;第二获取模块,用于获取所述帧图像中包括悬浮窗图标的图标区域;处理模块,用于去除所述图标区域内的悬浮窗图标,以得到目标图像;以及生成模块,用于根据所述目标图像生成录屏视频。
为实现上述目的,本申请还提供一种计算机设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,该处理器执行计算机程序时实现上述方法的步骤。
为实现上述目的,本申请还提供计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述方法的步骤。
本申请提供的录屏处理方法、装置、计算机设备和计算机可读存储介质,获取到包括悬浮窗图标的帧图像后,进一步获取帧图像中包括悬浮窗图标的图标区域,将帧图像中该图标区域内的悬浮窗图标去除,得到不包括悬浮窗图标的目标图像,最后根据该目标图像生成录屏视频,通过本发明,用户既可以在录屏过程中使用悬浮窗功能,基于悬浮窗进行录屏操作,方便用户,同时,生成的录屏视频中不会出现悬浮窗的信息,视频的每帧画面中均不包括悬浮窗图标,避免悬浮窗图标对录屏视频的影响,提升用户体验。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本申请的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1为本申请实施例一提供的录屏处理方法的流程图;
图2为本申请实施例二提供的录屏处理装置的框图;
图3为本申请实施例三提供的计算机设备的硬件结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本申请,并不用于限定本申请。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
发明人对现有技术中录屏工具研究发现,在移动端录屏的场景下,用户习惯使用悬浮窗来查看录屏进度并控制录屏流程,而基于悬浮窗进行录屏操作时,悬浮窗图标作为终端桌面显示的一部分,会与录制的目标图像叠加出现在视频图像中,而悬浮窗作为用户录屏操作的控件,实质上并不属于录制的目标内容,因此,录制的视频图像中包括悬浮窗图标,影响了用户的录屏体验。如果希望录屏视频中不显示悬浮窗图标,用户只能关闭悬浮窗功能。无法通过悬浮窗进行快捷操作,需要回到录屏软件或者使用通知栏操作录屏流程,用户体验不佳。
为了解决上述技术问题,本申请提出一种录屏处理方法、装置、计算机设备和计算机可读存储介质。在该录屏处理方法中,获取录屏的帧图像,该帧图像包括悬浮窗图标,然后获取帧图像中包括悬浮窗图标的图标区域,去除图标区域内的悬浮窗图标后,帧图像被处理为目标图像,目标图像中不含有悬浮窗图标,最后根据目标图像生成录屏视频,基于操作悬浮窗进行录屏产生的录屏视频中不包括悬浮窗图标。从而用户既可以在录屏过程使用悬浮窗功能,最终录制的录屏视频中还不会出现悬浮窗的信息,大幅度提升了用户体验。同时,本申请的方案有跨平台的特性,可以移植到Android、IOS、H5多平台使用。
关于本申请提供的录屏处理方法、装置、计算机设备和计算机可读存储介质的具体实施例,将在下文中详细描述。
实施例一
本申请实施例提供了一种录屏处理方法,通过该方法,能够在录屏过程中基于悬浮窗进行录屏操作,同时生成的录屏视频中不包括悬浮窗图标,提升用户体验。具体地,图1为本申请实施例一提供的录屏处理方法的流程图,如图1所示,该实施例提供的录屏处理方法包括如下的步骤S101至步骤S104。
步骤S101:获取录屏的帧图像。
具体地,在录屏过程中,通过悬浮窗进行录屏操作,包括开始录制、暂停录制、停止录制以及打开录屏工具主页等,录制的帧图像为录屏过程中终端屏幕上显示的一帧画面,该帧图像包括悬浮窗图标。
在一种情况下,可以在录制过程中每形成一帧图像后便获取该帧图像;在另一种情况下中,也可以在全部录制完成后获取视频文件中的帧图像。
步骤S102:获取帧图像中包括悬浮窗图标的图标区域。
具体地,在一种情况下,录制过程中悬浮窗位于系统窗口的固定位置,则获取该固定位置的位置信息后,即可确定帧图像中包括该悬浮窗图标的区域,例如,悬浮窗图标固定于系统窗口的中心,则帧图像中对应该中心处的部分即为图标区域。在另一种情况下,录制过程中悬浮窗的位置可在系统窗口自有移动,例如响应于用户的操作进行移动,基于此,在录制过程中,记录悬浮窗图标的位置信息,并与帧图像的帧标识信息进行关联,从而在获取帧图像后,可通过该帧图像的帧标识信息确定与之关联的悬浮窗图标的位置信息,进而可确定帧图像中该位置信息处的部分即为图标区域。
步骤S103:去除图标区域内的悬浮窗图标,以得到目标图像。
具体地,在该步骤中,可基于图像处理技术,使用图像算法进行去除悬浮窗的后处理操作,以将图标区域内的悬浮窗图标的部分去除,图标区域外的部分不变,图标区域内的部分仅包括与悬浮窗图标叠加的图像内容,得到目标图像。
其中,悬浮窗图标可以为一个或一个以上,当悬浮窗图标包括一个以上时,可在上述步骤S102中获取帧图像中包括各个悬浮窗图标的图标区域,并在该步骤S103中,将每个图标区域内的悬浮窗图标均去除,进而得到目标图像。
步骤S104:根据目标图像生成录屏视频。
最后根据若干帧目标图像生成录屏视频,使得该录屏视频中的图像均不包括悬浮窗图标。
在该实施例提供的录屏处理方法中,获取到包括悬浮窗图标的帧图像后,进一步获取帧图像中包括悬浮窗图标的图标区域,将帧图像中该图标区域内的悬浮窗图标去除,得到不包括悬浮窗图标的目标图像,最后根据该目标图像生成录屏视频,采用该实施例提供的录屏处理方法,用户既可以在录屏过程中使用悬浮窗功能,基于悬浮窗进行录屏操作,方便用户,同时,生成的录屏视频中不会出现悬浮窗的信息,视频的每帧画面中均不包括悬浮窗图标,避免悬浮窗图标对录屏视频的影响,提升用户体验。
可选地,在一种实施例中,去除图标区域内的悬浮窗图标,以得到目标图像的步骤包括:获取图标区域的色值信息;获取悬浮窗图标的色值信息;以及根据图标区域的色值信息和悬浮窗图标的色值信息得到目标图像的色值信息。
具体而言,图标区域的色值信息是指图标区域内各个像素的rgb值,悬浮窗图标的色值信息是指悬浮窗图标自身像素的rgb值。在该实施例中,一方面,在确定图标区域后,可在帧图像的色值信息中提取出图标区域的色值信息;另一方面,可根据悬浮窗的设置参数等,获取到悬浮窗的色值信息,然后可根据图标区域的色值信息和悬浮窗图标的色值信息进行后处理操作,以扣除图标区域内的悬浮窗图标的信息,得到目标图像的色值信息,也即目标图像。可选地,通过基于OpenGL的反混合图像算法,根据悬浮窗图标与底部界面的混合颜色的色值信息,与悬浮窗图标本身的颜色的色值信息,反推出去除悬浮窗图标后底部界面的颜色的色值信息,也即目标图像的色值信息。
采用该实施例提供的录屏处理方法,基于对图标区域的色值信息和悬浮窗图标的色值信息进行处理,来得到目标图像的色值信息,无需处理图标区域外的部分,减小数据处理量。
可选地,在一种实施例中,采用以下公式计算得到目标图像的色值信息:r2=(r-r1)/(1-a1);g2=(g-g1)/(1-a1);b2=(b-b1)/(1-a1);其中,r、g和b为图标区域的像素的rgb值,r1、g1、b1和a1为悬浮窗图标的像素的rgba值,r2、g2和b2为目标图像的色值信息。
具体而言,rgb值为像素的rgb信息,rgba值包括像素的rgb信息和透明度信息。在计算目标图像的色值信息时,也即计算图标区域中去除悬浮窗图标后的色值信息时,对该图标区域的每个像素的rgb值采用上述公式进行反混合操作,最终得到终端界面上除掉悬浮窗图标后界面的色值信息,也即目标图像的色值信息。
可选地,在一种实施例中,获取帧图像中包括悬浮窗图标的图标区域的步骤包括:获取悬浮窗图标的移动路径文件,其中,移动路径文件包括悬浮窗图标的坐标,坐标包括悬浮窗图标所在的帧图像的帧标识信息和悬浮窗图标在系统窗口上的位置信息;确定帧图像的帧标识信息;在移动路径文件提取帧标识信息对应的位置信息;以及获取帧图像在位置信息处的像素。
具体而言,在录屏过程中,实时记录悬浮窗图标的坐标,该坐标包括悬浮窗图标在系统窗口的位置,以及悬浮窗图标处于该位置时其所在帧图像的帧标识信息,利用记录的坐标形成移动路径文件并存储。在获取帧图像中包括悬浮窗图标的图标区域时,获取待移动路径文件,并确定帧图像的帧标识信息,该帧标识信息包括视频帧对应的显示时间戳,然后在移动路径文件中确定包括该帧标识信息的坐标,该坐标所包括的位置信息即为在帧图像中悬浮窗图标所在的位置,因此,获取帧图像中该位置信息处的像素,也即获取到帧图像中包括悬浮窗图标的图标区域。
采用该实施例提供的录屏处理方法,在录屏过程中记录悬浮窗图标的位置信息,并基于帧图像的帧标识信息将位置信息与帧图像关联起来,从而可将录制与去除悬浮窗图标进行异步处理,能够合理利用处理资源。
可选地,悬浮窗图标的坐标采用以下的数据结构:<left,right,top,bottom,pts>,其中,left、right、top和bottom依次对应矩形悬浮窗图标的左右上下的位置信息,pts为帧图像的帧标识信息。其中,需要说明的是,该数据结构可以对应于矩形悬浮窗图标,也可以为其他任意形状的悬浮窗图标,只要带透明度的悬浮窗图标都适用,也即,只要带透明度,可以采用该数据结构表征任意形状的悬浮窗图标的坐标。原因在于,在例如Android等系统中,所有图标都是以矩形来定义的,即使设计的图标为圆形,该图标的底为矩形,由于边角是透明的,所以视觉效果是圆形,但图标本身仍然可以采用上述数据结构来表示坐标。
可选地,在一种实施例中,在获取悬浮窗图标的移动路径文件之前,录屏处理方法还包括:在录屏过程中,实时获取悬浮窗图标在系统窗口的位置信息和悬浮窗图标所在帧图像的帧标识信息;根据位置信息和帧标识信息生成坐标;将坐标写入内存;以预设时长为间隔,获取内存中的坐标,以得到坐标组;将坐标组中位置信息相同的连续n个坐标进行合并,其中,n大于或等于2;以及将合并处理后的坐标组写入移动路径文件。
在该实施例中,在录制过程中实时形成移动路径文件。具体而言,录屏过程中,对每帧画面进行编码之前,实时获取悬浮窗图标的位置信息和其所在帧图像的帧标识信息后,构建为图标,以帧为单位,将该图标保存在内存中,以减少实时写入本地移动路径文件所需的资源开销。对于写入内存中的坐标,每间隔预设时长,例如间隔半分钟,获取内存中的坐标数据写入移动路径文件。其中,在将内存中的坐标数据写入移动路径文件时,对内存中的坐标进行合并,合并规则在于:如果连续n个坐标的位置信息相同,则表明在这段时间内悬浮窗坐标并未发送位移变化,此时则将该n个坐标进行合并,在合并时,可删除后n-1个坐标,而保留第1个坐标,或者也可删前n-1个坐标,而保留第n个坐标,从而能够减少移动路径文件中的冗余信息。例如n=5,将该5个坐标进行合并,删除后4个坐标,而保留第1个坐标。
如果在合并时删除后n-1个坐标,而保留第1个坐标,则在移动路径文件中提取帧标识信息对应的位置信息时,如果查找不到帧标识信息A对应的位置信息,则查找与该帧标识信息A最接近,且位于该帧标识信息A前一帧的帧标识信息对应的位置信息;如果在合并时删除前n-1个坐标,而保留第n个坐标,则在移动路径文件中提取帧标识信息对应的位置信息时,如果查找不到帧标识信息B对应的位置信息,则查找与该帧标识信息B最接近,且位于该帧标识信息B后一帧的帧标识信息对应的位置信息;总之,该处的逻辑可依据合并规则相应变化。
可选地,在一种实施例中,获取录屏的帧图像的步骤包括:获取录屏得到的原始视频;解析原始视频的参数;根据解析到的参数对原始视频进行解码;以及对解码后得到的数据进行渲染,以得到帧图像。
在该实施例中,在录屏过程中,先录制包括悬浮窗图标的视频,得到原始视频。在录制完成后,搭建OpenGL环境,将视频导入编辑器中,解码原始视频,然后在OpenGL环境中,对每帧画面进行后处理操作,根据记录的悬浮窗位置信息与反混合算法,扣除每帧画面中指定位置的悬浮窗信息,得到去除悬浮窗图标信息的录屏视频。具体而言,首先对解析原始视频,以对原始视频进行解码,然后对解码后得到的数据进行渲染,以得到帧图像,对渲染出来的每帧图像,也即每帧画面进行反混合的后处理操作,去除每帧画面中悬浮窗图标所在位置处的悬浮窗图标的信息,得到目标图像,然后再对目标图像进行编码和复合,最终生成录屏视频。
可选地,在一种实施例中,在获取录屏的帧图像的步骤之前,录屏处理方法包括:在录屏过程中,实时获取悬浮窗图标在系统窗口的位置信息;获取录屏的帧图像的步骤包括:对当前帧画面进行编码,以得到帧图像;获取帧图像中包括悬浮窗图标的图标区域的步骤包括:获取帧图像中位置信息处的像素。
在该实施例中,在录屏过程中,实时获取每帧图像中悬浮窗图标的位置,实时对每帧图像进行去除悬浮窗图标的处理。具体地,在录屏过程中,对每帧画面进行编码前,先获取悬浮窗图标在系统窗口的位置信息,然后对当前帧画面进行编码,以得到帧图像,进而获取帧图像中该位置信息处的像素,对这部分像素进行处理,去除悬浮窗图标的信息,得到的图像为目标图像。
实施例二
对应于上述实施例一,本申请实施例二提供了一种录屏处理装置,相应的技术特征细节和对应的技术效果可参考上述实施例一,在该实施例中不再赘述。图2为本申请实施例二提供的录屏处理装置的框图,如图2所示,该装置包括:第一获取模块201、第二获取模块202、处理模块203和第一生成模块204。
其中,第一获取模块201用于获取录屏的帧图像;第二获取模块202用于获取所述帧图像中包括悬浮窗图标的图标区域;处理模块203用于去除所述图标区域内的悬浮窗图标,以得到目标图像;以及第一生成模块204用于根据所述目标图像生成录屏视频。
可选地,在一种实施例中,处理模块203包括:第一获取单元、第二获取单元和计算单元,其中,第一获取单元用于获取所述图标区域的色值信息;第二获取单元用于获取所述悬浮窗图标的色值信息;以及计算单元用于根据所述图标区域的色值信息和所述悬浮窗图标的色值信息得到所述目标图像的色值信息。
可选地,在一种实施例中,计算单元采用以下公式计算得到所述目标图像的色值信息:r2=(r-r1)/(1-a1);g2=(g-g1)/(1-a1);b2=(b-b1)/(1-a1);其中,r、g和b为所述图标区域的像素的rgb值,r1、g1、b1和a1为所述悬浮窗图标的像素的rgba值,r2、g2和b2为所述目标图像的色值信息。
可选地,在一种实施例中,第二获取模块202包括第三获取单元、确定单元、提取单元和第四获取单元,其中,第三获取单元用于获取所述悬浮窗图标的移动路径文件,其中,所述移动路径文件包括所述悬浮窗图标的坐标,所述坐标包括所述悬浮窗图标所在的帧图像的帧标识信息和所述悬浮窗图标在系统窗口上的位置信息;确定单元用于确定所述帧图像的帧标识信息;提取单元用于在所述移动路径文件提取所述帧标识信息对应的位置信息;第四获取单元用于获取所述帧图像中所述位置信息处的像素。
可选地,在一种实施例中,所述录屏处理装置还包括第三获取模块、第二生成模块、第一写入模块、第四获取模块、合并模块和第二写入模块,其中,第三获取模块用于在获取所述悬浮窗图标的移动路径文件之前,在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息和所述悬浮窗图标所在帧图像的帧标识信息;第二生成模块用于根据所述位置信息和所述帧标识信息生成所述坐标;第一写入模块用于将所述坐标写入内存;第四获取模块用于以预设时长为间隔,获取所述内存中的坐标,以得到坐标组;合并模块用于将所述坐标组中位置信息相同的连续n个坐标进行合并,其中,n大于或等于2;以及将第二写入模块用于合并处理后的所述坐标组写入所述移动路径文件。
可选地,在一种实施例中,第一获取模块201包括第五获取单元、解析单元、解码单元和渲染单元,其中,第五获取单元用于获取录屏得到的原始视频;解析单元用于解析所述原始视频的参数;解码单元用于根据解析到的参数对所述原始视频进行解码;以及渲染单元用于对解码后得到的数据进行渲染,以得到所述帧图像。
可选地,在一种实施例中,所述录屏处理装置包括第五获取模块,用于在获取录屏的帧图像的步骤之前,在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息;第一获取模块包括编码单元,用于对当前帧画面进行编码,以得到所述帧图像,第二获取模块在获取所述帧图像中包括悬浮窗图标的图标区域时,具体执行的步骤包括:获取所述帧图像在所述位置信息处的像素。
实施例三
本实施例还提供一种计算机设备,如可以执行程序的智能手机、平板电脑、笔记本电脑、台式计算机、机架式服务器、刀片式服务器、塔式服务器或机柜式服务器(包括独立的服务器,或者多个服务器所组成的服务器集群)等。如图3所示,本实施例的计算机设备01至少包括但不限于:可通过系统总线相互通信连接的存储器011、处理器012,如图3所示。需要指出的是,图3仅示出了具有组件存储器011和处理器012的计算机设备01,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。
本实施例中,存储器011(即可读存储介质)包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,存储器011可以是计算机设备01的内部存储单元,例如该计算机设备01的硬盘或内存。在另一些实施例中,存储器011也可以是计算机设备01的外部存储设备,例如该计算机设备01上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。当然,存储器011还可以既包括计算机设备01的内部存储单元也包括其外部存储设备。本实施例中,存储器011通常用于存储安装于计算机设备01的操作系统和各类应用软件,例如实施例二的录屏处理装置的程序代码等。此外,存储器011还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器012在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器012通常用于控制计算机设备01的总体操作。本实施例中,处理器012用于运行存储器011中存储的程序代码或者处理数据,例如录屏处理方法等。
实施例四
本实施例还提供一种计算机可读存储介质,如闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘、服务器、App应用商城等等,其上存储有计算机程序,程序被处理器执行时实现相应功能。本实施例的计算机可读存储介质用于存储录屏处理装置,被处理器执行时实现实施例一的录屏处理方法。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (10)

1.一种录屏处理方法,其特征在于,包括:
获取录屏的帧图像;
获取所述帧图像中包括悬浮窗图标的图标区域;
去除所述图标区域内的悬浮窗图标,以得到目标图像;以及
根据所述目标图像生成录屏视频。
2.根据权利要求1所述的录屏处理方法,其特征在于,去除所述图标区域内的悬浮窗图标,以得到目标图像的步骤包括:
获取所述图标区域的色值信息;
获取所述悬浮窗图标的色值信息;以及
根据所述图标区域的色值信息和所述悬浮窗图标的色值信息得到所述目标图像的色值信息。
3.根据权利要求2所述的录屏处理方法,其特征在于,采用以下公式计算得到所述目标图像的色值信息:
r2=(r-r1)/(1-a1);
g2=(g-g1)/(1-a1);
b2=(b-b1)/(1-a1);
其中,r、g和b为所述图标区域的像素的rgb值,r1、g1、b1和a1为所述悬浮窗图标的像素的rgba值,r2、g2和b2为所述目标图像的色值信息。
4.根据权利要求1至3中任一项所述的录屏处理方法,其特征在于,获取所述帧图像中包括悬浮窗图标的图标区域的步骤包括:
获取所述悬浮窗图标的移动路径文件,其中,所述移动路径文件包括所述悬浮窗图标的坐标,所述坐标包括所述悬浮窗图标所在的帧图像的帧标识信息和所述悬浮窗图标在系统窗口上的位置信息;
确定所述帧图像的帧标识信息;
在所述移动路径文件提取所述帧标识信息对应的位置信息;以及
获取所述帧图像在所述位置信息处的像素。
5.根据权利要求4所述的录屏处理方法,其特征在于,在获取所述悬浮窗图标的移动路径文件之前,所述录屏处理方法还包括:
在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息和所述悬浮窗图标所在帧图像的帧标识信息;
根据所述位置信息和所述帧标识信息生成所述坐标;
将所述坐标写入内存;
以预设时长为间隔,获取所述内存中的坐标,以得到坐标组;
将所述坐标组中位置信息相同的连续n个坐标进行合并,其中,n大于或等于2;以及
将合并处理后的所述坐标组写入所述移动路径文件。
6.根据权利要求4所述的录屏处理方法,其特征在于,获取录屏的帧图像的步骤包括:
获取录屏得到的原始视频;
解析所述原始视频的参数;
根据解析到的参数对所述原始视频进行解码;以及
对解码后得到的数据进行渲染,以得到所述帧图像。
7.根据权利要求1至3中任一项所述的录屏处理方法,其特征在于,
在获取录屏的帧图像的步骤之前,所述录屏处理方法包括:在录屏过程中,实时获取所述悬浮窗图标在系统窗口的位置信息;
获取录屏的帧图像的步骤包括:对当前帧画面进行编码,以得到所述帧图像;
获取所述帧图像中包括悬浮窗图标的图标区域的步骤包括:获取所述帧图像中所述位置信息处的像素。
8.一种录屏处理装置,其特征在于,包括:
第一获取模块,用于获取录屏的帧图像;
第二获取模块,用于获取所述帧图像中包括悬浮窗图标的图标区域;
处理模块,用于去除所述图标区域内的悬浮窗图标,以得到目标图像;以及
生成模块,用于根据所述目标图像生成录屏视频。
9.一种计算机设备,包括存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
CN202010979162.XA 2020-09-17 2020-09-17 录屏处理方法、装置、计算机设备和计算机可读存储介质 Active CN112416191B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010979162.XA CN112416191B (zh) 2020-09-17 2020-09-17 录屏处理方法、装置、计算机设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010979162.XA CN112416191B (zh) 2020-09-17 2020-09-17 录屏处理方法、装置、计算机设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112416191A true CN112416191A (zh) 2021-02-26
CN112416191B CN112416191B (zh) 2022-08-19

Family

ID=74855345

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010979162.XA Active CN112416191B (zh) 2020-09-17 2020-09-17 录屏处理方法、装置、计算机设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112416191B (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102724503A (zh) * 2012-06-13 2012-10-10 广东威创视讯科技股份有限公司 视频压缩方法和系统
CN102842036A (zh) * 2011-11-30 2012-12-26 三峡大学 面向船闸视频监控的智能多目标检测方法
CN103179359A (zh) * 2011-12-21 2013-06-26 北京新岸线移动多媒体技术有限公司 控制视频终端的方法及装置、视频终端
CN105487680A (zh) * 2015-11-24 2016-04-13 小米科技有限责任公司 用于终端截屏的方法、装置及终端
CN106970754A (zh) * 2017-03-28 2017-07-21 北京小米移动软件有限公司 截屏处理的方法及装置
CN107957836A (zh) * 2017-12-05 2018-04-24 广东欧珀移动通信有限公司 录屏方法、装置及终端
CN109167974A (zh) * 2018-10-25 2019-01-08 洪磊 一种板书录制系统
CN109379625A (zh) * 2018-11-27 2019-02-22 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN110505498A (zh) * 2019-09-03 2019-11-26 腾讯科技(深圳)有限公司 视频的处理、播放方法、装置及计算机可读介质
CN111556278A (zh) * 2020-05-21 2020-08-18 腾讯科技(深圳)有限公司 一种视频处理的方法、视频展示的方法、装置及存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102842036A (zh) * 2011-11-30 2012-12-26 三峡大学 面向船闸视频监控的智能多目标检测方法
CN103179359A (zh) * 2011-12-21 2013-06-26 北京新岸线移动多媒体技术有限公司 控制视频终端的方法及装置、视频终端
CN102724503A (zh) * 2012-06-13 2012-10-10 广东威创视讯科技股份有限公司 视频压缩方法和系统
CN105487680A (zh) * 2015-11-24 2016-04-13 小米科技有限责任公司 用于终端截屏的方法、装置及终端
CN106970754A (zh) * 2017-03-28 2017-07-21 北京小米移动软件有限公司 截屏处理的方法及装置
CN107957836A (zh) * 2017-12-05 2018-04-24 广东欧珀移动通信有限公司 录屏方法、装置及终端
CN109167974A (zh) * 2018-10-25 2019-01-08 洪磊 一种板书录制系统
CN109379625A (zh) * 2018-11-27 2019-02-22 Oppo广东移动通信有限公司 视频处理方法、装置、电子设备和计算机可读介质
CN110505498A (zh) * 2019-09-03 2019-11-26 腾讯科技(深圳)有限公司 视频的处理、播放方法、装置及计算机可读介质
CN111556278A (zh) * 2020-05-21 2020-08-18 腾讯科技(深圳)有限公司 一种视频处理的方法、视频展示的方法、装置及存储介质

Also Published As

Publication number Publication date
CN112416191B (zh) 2022-08-19

Similar Documents

Publication Publication Date Title
US8902229B2 (en) Method and system for rendering three dimensional views of a scene
CN111464858A (zh) 一种视频播放方法和装置
CN110727825A (zh) 动画播放的控制方法、装置、服务器和存储介质
CN107766703B (zh) 水印添加处理方法、装置及客户端
CN112416191B (zh) 录屏处理方法、装置、计算机设备和计算机可读存储介质
CN113538502A (zh) 图片裁剪方法、装置、电子设备及存储介质
CN112714338A (zh) 视频传输、播放方法、装置、计算机设备及存储介质
CN109862295B (zh) Gif生成方法、装置、计算机设备及存储介质
CN108989704B (zh) 图像生成方法和装置、终端设备
CN111589111A (zh) 图像处理方法、装置、设备和存储介质
CN114419193B (zh) 图像绘制方法、装置、电子设备及计算机可读存储介质
CN108520259B (zh) 一种前景目标的提取方法、装置、设备及存储介质
CN111599449B (zh) 电子图像的自动播放方法、装置、设备及存储介质
CN110287437B (zh) 网页截图方法、装置、存储介质及终端
CN114219812A (zh) 标号避让方法、装置、电子设备及存储介质
CN113379768A (zh) 一种图像处理方法、装置、存储介质和计算机设备
CN114363697A (zh) 视频文件生成、播放方法及装置
CN113691835A (zh) 视频植入方法、装置、设备及计算机可读存储介质
CN114185784A (zh) 弹幕渲染测试方法及装置
CN113408032A (zh) 一种生成门窗大样图的方法、设备及可读存储介质
CN108346126B (zh) 基于内存拷贝方式绘制手机图片的方法及装置
CN106331720B (zh) 一种视频解码相关信息存储方法和装置
CN111739084A (zh) 图片处理方法、图集处理方法、计算机设备和存储介质
US20210150788A1 (en) Media vectorization
CN112419141A (zh) 图片处理方法、装置、计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant