CN115908116A - 一种图像处理方法、装置、设备及存储介质 - Google Patents

一种图像处理方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115908116A
CN115908116A CN202211517370.3A CN202211517370A CN115908116A CN 115908116 A CN115908116 A CN 115908116A CN 202211517370 A CN202211517370 A CN 202211517370A CN 115908116 A CN115908116 A CN 115908116A
Authority
CN
China
Prior art keywords
image
processed
stylized
region
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211517370.3A
Other languages
English (en)
Inventor
林敏轩
李梦天
曾子琦
黄海斌
马重阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Priority to CN202211517370.3A priority Critical patent/CN115908116A/zh
Publication of CN115908116A publication Critical patent/CN115908116A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本公开关于一种图像处理方法、装置、设备及存储介质,涉及计算机技术领域,可以高效地将真实图像转换为风格化图像。该图像处理方法包括:在对待处理图像进行风格化处理的过程中,显示待处理图像;待处理图像包括对象区域和背景区域;响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;风格化图像中的对象区域的分辨率和风格化图像中的背景区域的分辨率不同;显示风格化图像。

Description

一种图像处理方法、装置、设备及存储介质
技术领域
本公开涉及计算机技术领域,尤其涉及一种图像处理方法、装置、设备及存储介质。
背景技术
风格化图像是指对真实图像进行风格化处理后,得到的具有独特艺术风格的图像。例如,像素风格的风格化图像中的人或物可以呈现锯齿状低分辨率的风格,具有独特的像素艺术化的效果。
相关技术中,在对真实图像进行风格化处理时,主要是通过训练好的神经网络模型直接将真实图像转换为风格化图像。采用这种方法时,通常需要搜集大量的风格化图像和真实图像作为样本数据,并基于无监督的深度学习框架来训练得到神经网络模型,从而实现真实图像和风格化图像之间的转换。
然而,搜集大量的样本数据并进行训练往往耗时耗力。并且,基于神经网络模型生成包括具体风格特征的图像时,往往需要消耗大量的计算资源,效率较低。
发明内容
本公开提供一种图像处理方法、装置、设备及存储介质,可以高效地将真实图像转换为风格化图像。
本公开实施例的技术方案如下:
根据本公开实施例的第一方面,提供一种图像处理方法,包括:在对待处理图像进行风格化处理的过程中,显示待处理图像;待处理图像包括对象区域和背景区域;响应于用户对所述待处理图像执行的风格化操作,对所述待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;所述风格化图像中的对象区域的分辨率和所述风格化图像中的背景区域的分辨率不同;显示风格化图像。
可选地,得到风格化图像之后,该图像处理方法,还包括:确定风格化图像中的对象区域的轮廓;在风格化图像中显示轮廓。
可选地,响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像的方法,具体包括:根据待处理图像中各区域的属性信息,确定第一参数和第二参数;基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像。
可选地,属性信息包括待处理图像中对象区域和背景区域的面积占比信息;根据待处理图像中各区域的属性信息,确定第一参数和第二参数的方法,具体包括:根据待处理图像中的对象区域在待处理图像中的面积占比信息,确定第一参数;根据待处理图像中的背景区域在待处理图像中的面积占比信息,确定第二参数。
可选地,基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像的具体方法,包括:对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像;基于第一参数对第一图像进行像素化处理,得到处理后第一图像;处理后第一图像包括像素化处理后的对象区域;基于第二参数对第二图像进行像素化处理,得到处理后第二图像;处理后第二图像包括像素化处理后的背景区域;对处理后第一图像和处理后第二图像进行图像融合处理,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。
可选地,确定风格化图像中的对象区域的轮廓的具体方法,包括:按照预设遍历方向在风格化图像中滑动预设滑动窗口,得到多个窗口区域;每个窗口区域包括风格化图像内的多个像素值;将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合;目标窗口区域包括风格化图像中的对象区域内的像素值,以及风格化图像中的背景区域内的像素值;将目标窗口区域集合中的每个目标窗口区域的中心点填充为预设像素值,得到轮廓。
可选地,对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像之前,该图像处理方法,还包括:对待处理图像进行图像平滑处理,得到平滑后图像。
根据本公开实施例的第二方面,提供一种图像处理装置,包括:显示单元和处理单元;显示单元,被配置为在对待处理图像进行风格化处理的过程中,显示待处理图像;待处理图像包括对象区域和背景区域;处理单元,被配置为响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;风格化图像中的对象区域的分辨率和风格化图像中的背景区域的分辨率不同;显示单元,还被配置为显示风格化图像。
可选地,该图像处理装置,还包括:确定单元;确定单元,被配置为确定风格化图像中的对象区域的轮廓;显示单元,还被配置为在风格化图像中显示轮廓。
可选地,处理单元,具体被配置为:根据待处理图像中各区域的属性信息,确定第一参数和第二参数;基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像。
可选地,属性信息包括待处理图像中对象区域和背景区域的面积占比信息;处理单元,具体被配置为:根据待处理图像中的对象区域在待处理图像中的面积占比信息,确定第一参数;根据待处理图像中的背景区域在待处理图像中的面积占比信息,确定第二参数。
可选地,处理单元,还被配置为对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像;处理单元,还用于基于第一参数对第一图像进行像素化处理,得到处理后第一图像;处理后第一图像包括像素化处理后的对象区域;处理单元,还用于基于第二参数对第二图像进行像素化处理,得到处理后第二图像;处理后第二图像包括像素化处理后的背景区域;处理单元,还用于对处理后第一图像和处理后第二图像进行图像融合处理,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。
可选地,确定单元,具体被配置为:按照预设遍历方向在风格化图像中滑动预设滑动窗口,得到多个窗口区域;每个窗口区域包括采样后遮罩图像内的多个像素值;将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合;目标窗口区域包括风格化图像中的对象区域内的像素值,以及风格化图像中的背景区域内的像素值;将目标窗口区域集合中的每个目标窗口区域的中心点填充为预设像素值,得到轮廓。
可选地,处理单元,还被配置为对待处理图像进行图像平滑处理,得到平滑后图像。
根据本公开实施例的第三方面,提供一种电子设备,可以包括:处理器和用于存储处理器可执行指令的存储器;其中,处理器被配置为执行所述指令,以实现上述第一方面中任一种可选地图像处理方法。
根据本公开实施例的第四方面,提供一种计算机可读存储介质,计算机可读存储介质上存储有指令,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行上述第一方面中任一种可选地图像处理方法。
根据本公开实施例的第五方面,提供一种计算机程序产品,该计算机程序产品包括计算机指令,当计算机指令在电子设备的处理器上运行时,使得电子设备执行如第一方面中任一种可选地实现方式所述的图像处理方法。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
本公开的实施例提供的技术方案至少带来以下有益效果:
基于上述任一方面,本公开中,电子设备在对待处理图像进行风格化处理的过程中,显示待处理图像中的对象区域和背景区域后,可以响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,从而可以进一步得到风格化图像,并显示对象区域的分辨率和背景区域的分辨率不同的风格化图像。
相比于相关技术中需要搜集大量的样本数据训练得到神经网络模型,再基于神经网络模型对图像整体直接进行风格化转换的方法,本公开采取了直接对待处理图像中的不同区域分别进行风格化处理,以将待处理图像转换为风格化图像的方法。例如,本公开可以基于对待处理图像的图像分割处理和像素化处理等处理方式,完成图像的风格化转换。因此,本公开不仅可以避免搜集大量的样本数据并进行训练导致的耗时耗力的问题,还可以降低生成风格化图像时对于计算资源的消耗,提升生成风格化图像的效率。因此,本公开可以高效地将真实图像转换为风格化图像。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理,并不构成对本公开的不当限定。
图1示出了本公开实施例提供的一种图像处理系统的结构示意图;
图2示出了本公开实施例提供的一种电子设备的结构示意图;
图3示出了本公开实施例提供的一种图像处理方法的流程示意图一;
图4示出了本公开实施例提供的一种风格化图像的示意图;
图5示出了本公开实施例提供的一种图像处理方法的流程示意图二;
图6示出了本公开实施例提供的一种图像处理方法的流程示意图三;
图7示出了本公开实施例提供的一种图像处理方法的流程示意图四;
图8示出了本公开实施例提供的一种图像处理方法的流程示意图五;
图9示出了本公开实施例提供的一种图像处理方法的流程示意图六;
图10示出了本公开实施例提供的一种图像处理方法的流程示意图七;
图11示出了本公开实施例提供的一种图像处理装置的结构示意图;
图12示出了本公开实施例提供的一种终端的结构示意图;
图13示出了本公开实施例提供的一种服务器的结构示意图。
具体实施方式
为了使本领域普通人员更好地理解本公开的技术方案,下面将结合附图,对本公开实施例中的技术方案进行清楚、完整地描述。
需要说明的是,本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
需要说明的是,本公开所涉及的用户信息(包括但不限于用户设备信息、用户个人信息、用户行为信息等)和数据,均为经用户授权或者经过各方充分授权的信息和数据。
通用技术中,在对真实图像进行风格化处理时,主要是通过训练好的神经网络模型直接将真实图像转换为风格化图像。采用这种方法时,通常需要搜集大量的风格化图像和真实图像作为样本数据,并基于无监督的深度学习框架来训练得到神经网络模型,从而实现真实图像和风格化图像之间的转换。
然而,搜集大量的样本数据并进行训练往往耗时耗力。并且,基于神经网络模型生成包括具体风格特征的图像时,往往需要消耗大量的计算资源,效率较低。
基于此,本公开实施例提供一种图像处理方法,电子设备在对待处理图像进行风格化处理的过程中,显示待处理图像中的对象区域和背景区域后,可以响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,从而可以进一步得到风格化图像,并显示对象区域的分辨率和背景区域的分辨率不同的风格化图像。
相比于相关技术中需要搜集大量的样本数据训练得到神经网络模型,再基于神经网络模型对图像整体直接进行风格化转换的方法,本公开采取了直接对待处理图像中的不同区域分别进行风格化处理,以将待处理图像转换为风格化图像的方法。例如,本公开可以基于对待处理图像的图像分割处理和像素化处理等处理方式,完成图像的风格化转换。因此,本公开不仅可以避免搜集大量的样本数据并进行训练导致的耗时耗力的问题,还可以降低生成风格化图像时对于计算资源的消耗,提升生成风格化图像的效率。因此,本公开可以高效地将真实图像转换为风格化图像。
图1为本公开实施例提供的一种图像处理系统示意图,如图1所示,该图像处理系统100可以包括:电子设备101和服务器102。电子设备101和服务器102之间可以通过有线网络和无线网络建立通信连接。
电子设备101可以配置有用于进行像素化处理(例如上采样处理和下采样处理等)、图像平滑处理、图像分割处理和图像融合处理等的资源文件,还可以配置有预设参数的资源文件。
一种可能的方式中,电子设备101还可以包含有数据库或与数据库连接,本公开中用于对图像进行缩放处理、平滑处理和分割处理等操作的资源文件可以存储于数据库中。
可选地,图1中的电子设备101可以是手机、平板电脑、桌面型、膝上型、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmentedreality,AR)\虚拟现实(virtual reality,VR)设备等可以安装并使用内容社区应用的设备,本公开对该终端的具体形态不作特殊限制。其可以与用户通过键盘、触摸板、触摸屏、遥控器、语音交互或手写设备等一种或多种方式进行人机交互。
图1中的服务器102也可以配置有用于对图像进行缩放处理、平滑处理和分割处理等操作的资源文件,还可以配置有预设参数的资源文件。
一种可能的方式中,电子设备101需要得到待处理图像对应的风格化图像是,还可以向服务器102发送携带有待处理图像的处理请求消息。相应的,服务器102可以基于配置的资源文件将待处理图像转换为风格化图像后,向电子设备101发送携带有风格化图像的处理响应消息。基于此,电子设备101可以显示待处理图像对应的风格化图像。
可选地,图1中的服务器102可以是单独的一个服务器,或者,也可以是由多个服务器构成的服务器集群。部分实施方式中,服务器集群还可以是分布式集群。本公开对服务器的具体实现方式也不作限制。
可选地,上述图1所示的图像处理系统中,电子设备101可以与至少一个服务器102进行通信连接。服务器102也可以和至少一个电子设备101进行通信连接。本公开对电子设备101和服务器102的数量及类型均不作限制。
本公开实施例提供的图像处理方法可以应用于前述图1所示的应用场景中的电子设备101。
结合图1,如图2所示,为本公开实施例提供的一种电子设备101的结构示意图。电子设备101可以配置有输入模块21、显示模块22和通信模块23。其中,输入模块21可以是鼠标和键盘等计算机外接输入设备,用于用户执行风格化操作等。显示模块22可以是液晶显示屏等设备,用于显示图像等。通信模块23可以是收发器一类的装置,可以用于电子设备101和服务器102之间进行通信连接。
下面结合附图对本公开实施例提供的图像处理方法进行详细介绍。
如图3所示,当图像处理方法应用于电子设备时,该图像处理方法可以包括:
S301、电子设备在对待处理图像进行风格化处理的过程中,显示待处理图像。
其中,待处理图像可以包括对象区域和背景区域。
一种可以实现的方式中,结合图2,在对待处理图像进行风格化处理前,用户可以通过电子设备配置的输入模块,对待处理图像执行选中操作。响应于该选中操作,电子设备通过配置的显示模块显示待处理图像。后续,电子设备还可以响应于用户执行的风格化操作,执行对待处理图像的风格化处理。并且,在完成对待处理图像的风格化处理前,即在对待处理图像进行风格化处理的过程中,电子设备还可以持续显示待处理图像,以便于用户查看待处理图像。
可选地,对象区域可以是用于显示人像(例如人脸)的区域,也可以是用于显示特定元素(例如卡通元素、植物和动物等)的区域。并且,待处理图像中可以包括一个或多个对象区域。应理解,背景区域可以是待处理图像中除去对象区域以外的其他区域。本公开实施例对此不作限定。
S302、电子设备响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像。
其中,风格化图像中的对象区域的分辨率和风格化图像中的背景区域的分辨率不同。
一种可以实现的方式中,结合图2,用户可以通过电子设备配置的输入模块,对电子设备通过显示模块显示的待处理图像执行风格化操作(例如点击风格化处理按钮)。响应于该风格化操作,电子设备可以对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像。
具体而言,电子设备可以先根据待处理图像中的对象区域的属性信息,确定第一参数,并根据待处理图像中的背景区域的属性信息,确定第二参数。接着,电子设备可以再基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,从而得到风格化图像。
基于此,风格化图像中的对象区域可以具备与第一参数对应的分辨率,且风格化图像中的背景区域可以具备与第二参数对应的分辨率,以实现风格化图像中的对象区域和背景区域均可以呈现不同的像素艺术化的效果。
一种可能的方式中,风格化处理可以是像素化处理(例如下采样处理等)。
S303、电子设备显示风格化图像。
一种可以实现的方式中,结合图2,电子设备可以在对待处理图像进行风格化处理,得到风格化图像后,通过配置的显示模块显示风格化图像,以便于用户查看风格化图像。
一种可能的方式中,电子设备可以在风格化图像中显示具备与第一参数对应的分辨率的对象区域,并同时显示具备与第二参数对应的分辨率的背景区域。
一种可能的方式中,电子设备还可以在同一个界面中,同时显示待处理图像和风格化图像,以便于用户了解待处理图像和风格化图像之间的区别。
一种可能的示例中,如图4所示,图4中的a为待处理图像。图4中的b为待处理图像对应的风格化图像。
上述实施例提供的技术方案至少带来以下有益效果:由S301-S303可知,电子设备在对待处理图像进行风格化处理的过程中,显示待处理图像中的对象区域和背景区域后,可以响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,从而可以进一步得到风格化图像,并显示对象区域的分辨率和背景区域的分辨率不同的风格化图像。相比于相关技术中需要搜集大量的样本数据训练得到神经网络模型,再基于神经网络模型对图像整体直接进行风格化转换的方法,本公开采取了直接对待处理图像中的不同区域分别进行风格化处理,以将待处理图像转换为风格化图像的方法。例如,本公开可以基于对待处理图像的图像分割处理和像素化处理等处理方式,完成图像的风格化转换。因此,本公开不仅可以避免搜集大量的样本数据并进行训练导致的耗时耗力的问题,还可以降低生成风格化图像时对于计算资源的消耗,提升生成风格化图像的效率。因此,本公开可以高效地将真实图像转换为风格化图像。
在一种实施例中,在得到风格化图像之后,如图5所示,本公开提供的图像处理方法,还包括:S401-S402。
S401、电子设备确定风格化图像中的对象区域的轮廓。
一种可以实现的方式中,在得到风格化图像后,电子设备可以确定风格化图像中的对象区域的边界像素值。接着,电子设备可以将对象区域的边界像素值填充为相同的第一像素值,以得到风格化图像中的对象区域的轮廓。具体的,该过程可以参考下述S901-S903中的描述,在此不再赘述。
一种可能的方式中,第一像素值可以由工作人员预先配置在电子设备中。例如,第一像素值可以是用于表示黑色的像素值。基于此,风格化图像中的对象区域的轮廓可以是围绕对象区域的黑色线框,且具有锯齿状的特殊效果。
S402、电子设备在风格化图像中显示轮廓。
一种可能的方式中,在确定风格化图像中的对象区域的轮廓后,电子设备可以通过图像相乘和图像相加等处理操作,将风格化图像中的对象区域的轮廓叠加在风格化图像中。
一种可以实现的方式中,结合图2,电子设备在确定风格化图像中的对象区域的轮廓后,可以在显示风格化图像时,同时在风格化图像显示围绕风格化图像中的对象区域的轮廓,以突出显示对象区域。
上述实施例提供的技术方案至少带来以下有益效果:由S401-S402可知,电子设备在得到风格化图像后,可以进一步确定风格化图像中的对象区域的轮廓,并在风格化图像中显示围绕风格化图像中的对象区域的轮廓,以表明风格化图像中对象区域和背景区域的差异性,突出对象区域的像素化效果。
在一种实施例中,结合图3,在上述S302中,即电子设备响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像时,如图6所示,本公开提供一种可选的实现方式,包括:S501-S502。
S501、电子设备根据待处理图像中各区域的属性信息,确定第一参数和第二参数。
可选地,待处理图像中各区域的属性信息,可以包括待处理图像中对象区域和背景区域的面积占比信息,也可以包括待处理图像中对象区域和背景区域的饱和度信息,还可以包括待处理图像中对象区域和背景区域的对比度信息。本公开实施例对此不作限制。
一种可能的方式中,在待处理图像中各区域的属性信息包括待处理图像中对象区域和背景区域的面积占比信息时,电子设备可以根据待处理图像中各区域的面积占比信息,确定第一参数和第二参数。具体而言,电子设备可以先确定待处理图像中对象区域在待处理图像中的面积占比信息,以及待处理图像中背景区域在待处理图像中的面积占比信息。接着,电子设备可以根据待处理图像中对象区域在待处理图像中的面积占比信息,确定第一参数。并且,电子设备可以根据待处理图像中背景区域在待处理图像中的面积占比信息,确定第二参数。该方式的具体实现过程可以参考以下S601-S602中的描述,在此不再赘述。
一种可能的方式中,在待处理图像中各区域的属性信息包括待处理图像中对象区域和背景区域的饱和度信息时,电子设备可以根据待处理图像中各区域的饱和度信息,确定第一参数和第二参数。具体而言,电子设备可以先对待处理图像进行分割处理,得到包括待处理图像中对象区域的第一图像,以及包括待处理图像中背景区域的第二图像。接着,电子设备可以确定该第一图像的饱和度信息和该第二图像的饱和度信息。接着,电子设备可以根据第一图像的饱和度信息,确定第一参数。并且,电子设备可以根据第二图像的饱和度信息,确定第二参数。
可选地,电子设备根据第一图像的饱和度信息,确定第一参数时,可以先确定第一图像的饱和度信息和预设饱和度阈值的大小关系。若第一图像的饱和度信息大于预设饱和度阈值,则表明对象区域的饱和度较高,需要使风格化处理后的对象区域具备较高的分辨率,以保证对象区域的显示效果。则电子设备可以将值较小的第一候选因子确定为第一参数。若第一图像的饱和度信息小于或等于预设饱和度阈值,则表明对象区域的饱和度较低。这种情况下,电子设备可以将值较大的第二候选因子确定为第一参数,以使得风格化处理后的对象区域具备更明显的风格化效果。其中,预设饱和度阈值、第一候选因子和第二候选因子可以由工作人员预先设置在电子设备中。例如,预设饱和度阈值可以是50%。第一候选因子可以是5。第二候选因子可以是10。
应理解,电子设备根据第二图像的饱和度信息,确定第二参数的方式,可以参考电子设备根据第一图像的饱和度信息,确定第一参数的具体描述,在此不再赘述。
一种可能的方式中,在待处理图像中各区域的属性信息包括待处理图像中对象区域和背景区域的对比度信息时,电子设备可以根据待处理图像中各区域的对比度信息,确定第一参数和第二参数。具体而言,电子设备可以先对待处理图像进行分割处理,得到包括待处理图像中对象区域的第一图像,以及包括待处理图像中背景区域的第二图像。接着,电子设备可以确定该第一图像的对比度信息和该第二图像的对比度信息。接着,电子设备可以根据第一图像的对比度信息,确定第一参数。并且,电子设备可以根据第二图像的对比度信息,确定第二参数。
可选地,电子设备根据第一图像的对比度信息,确定第一参数时,可以先确定第一图像的对比度信息和预设对比度阈值的大小关系。若第一图像的对比度信息大于预设对比度阈值,则表明对象区域的对比度较高,需要使风格化处理后的对象区域具备较高的分辨率,以保证对象区域的清晰和鲜明效果。则电子设备可以将值较小的第三候选因子确定为第一参数。若第一图像的对比度信息小于或等于预设对比度阈值,则表明对象区域的对比度较低。这种情况下,电子设备可以将值较大的第四候选因子确定为第一参数,以使得风格化处理后的对象区域具备更明显的风格化效果。其中,预设对比度阈值、第三候选因子和第四候选因子可以由工作人员预先设置在电子设备中。例如,预设对比度阈值可以是120。第三候选因子可以是3。第四候选因子可以是8。
应理解,电子设备根据第二图像的对比度信息,确定第二参数的方式,可以参考电子设备根据第一图像的对比度信息,确定第一参数的具体描述,在此不再赘述。
S502、电子设备基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像。
一种可以实现的方式中,电子设备在确定第一参数和第二参数后,可以先对待处理图像进行分割处理,得到包括待处理图像中对象区域的第一图像,以及包括待处理图像中背景区域的第二图像。接着,电子设备可以基于第一参数对第一图像进行风格化处理,并基于第二参数对第二图像进行风格化处理。接着,电子设备可以将处理后的第一图像和第二图像进行融合,以得到风格化图像。
上述实施例提供的技术方案至少带来以下有益效果:由S501-S502可知,给出了电子设备响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像的一种实现方式。电子设备可以根据待处理图像中各区域的属性信息,确定第一参数和第二参数后,再基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,从而分别对待处理图像中的对象区域和背景区域进行风格化处理,得到风格化图像。基于此,风格化图像中的对象区域和背景区域可以呈现不同的风格化效果。
在一种实施例中,在待处理图像中各区域的属性信息包括待处理图像中对象区域和背景区域的面积占比信息时,结合图6,在上述S501中,即电子设备根据待处理图像中各区域的属性信息,确定第一参数和第二参数时,如图7所示,本公开提供一种可选的实现方式,包括:S601-S602。
S601、电子设备根据待处理图像中的对象区域在待处理图像中的面积占比信息,确定第一参数。
一种可以实现的方式中,电子设备对待处理图像中的对象区域进行风格化处理时,可以先确定待处理图像中的对象区域在待处理图像中的面积占比信息,并进一步根据待处理图像中的对象区域在待处理图像中的面积占比信息,确定第一参数,从而可以基于第一参数对待处理图像中的对象区域进行风格化处理。
一种可能的方式中,电子设备在确定待处理图像中对象区域在待处理图像中的面积占比信息时,可以先确定待处理图像包括的像素个数,并对待处理图像进行图像分割处理,以得到待处理图像中的对象区域。接着,电子设备可以确定对象区域包括的像素个数。基于此,电子设备可以将对象区域包括的像素个数和待处理图像包括的像素个数的比值,确定为待处理图像中对象区域在待处理图像中的面积占比信息。
一种可能的方式中,电子设备根据待处理图像中对象区域在待处理图像中的面积占比信息,确定第一参数时,可以先确定待处理图像中对象区域在待处理图像中的面积占比信息和第一预设数值的乘积,再将该乘积进行取整后得到第一参数。其中,第一预设数值可以由工作人员预先设置在电子设备中。
一种可能的示例中,待处理图像中对象区域在待处理图像中的面积占比信息可以为0.65,第一预设数值可以为10。则待处理图像中对象区域在待处理图像中的面积占比信息和第一预设数值的乘积为6.7,以四舍五入的方式取整后可得到第一参数为7。
需要说明的是,在对象区域在待处理图像中的面积占比较低时,即对象区域较小时,为了保证风格化处理后的对象区域的清晰度,需要保证风格化处理后的对象区域具备较高的分辨率。这种情况下,需要保证第一参数的值较低。而对象区域在待处理图像中的面积占比较低时,电子设备根据待处理图像中对象区域在待处理图像中的面积占比信息确定到的第一参数的值也较低。因此,电子设备根据待处理图像中对象区域在待处理图像中的面积占比信息确定到的第一参数,可以很好地保证待处理图像中的对象区域的风格化处理效果。
可选地,电子设备根据待处理图像中对象区域在待处理图像中的面积占比信息,确定第一参数时,也可以先确定待处理图像中对象区域在待处理图像中的面积占比信息和第一预设阈值的大小关系。若待处理图像中对象区域在待处理图像中的面积占比信息大于第一预设阈值,则电子设备可以将第一候选因子确定为第一参数。若待处理图像中对象区域在待处理图像中的面积占比信息小于或等于第一预设阈值,则电子设备可以将第二候选因子确定为第一参数。其中,第一预设阈值、第一候选因子和第二候选因子可以由工作人员预先设置在电子设备中。例如,第一预设阈值可以是0.5。第一候选因子可以是10。第二候选因子可以是5。一种可能的方式中,待处理图像中的对象区域在待处理图像中的面积占比可以记作x_scale。
S602、电子设备根据待处理图像中的背景区域在待处理图像中的面积占比信息,确定第二参数。
一种可以实现的方式中,电子设备对待处理图像中的背景区域进行风格化处理时,可以先确定待处理图像中的背景区域在待处理图像中的面积占比信息,并进一步根据待处理图像中的背景区域在待处理图像中的面积占比信息,确定第一参数,从而可以基于第一参数对待处理图像中的背景区域进行风格化处理。
一种可能的方式中,电子设备在确定待处理图像中背景区域在待处理图像中的面积占比信息时,可以先确定待处理图像包括的像素个数,并对待处理图像进行图像分割处理,以得到待处理图像中的背景区域。接着,电子设备可以确定背景区域包括的像素个数。基于此,电子设备可以将背景区域包括的像素个数和待处理图像包括的像素个数的比值,确定为待处理图像中背景区域在待处理图像中的面积占比信息。
可选地,基于S601中的描述,电子设备也可以将1和待处理图像中对象区域在待处理图像中的面积占比信息之间的差值,确定为待处理图像中背景区域在待处理图像中的面积占比信息。
应理解,电子设备根据待处理图像中背景区域在待处理图像中的面积占比信息,确定第二参数的方式,可以参考电子设备根据待处理图像中对象区域在待处理图像中的面积占比信息,确定第一参数的具体描述,在此不再赘述。
上述实施例提供的技术方案至少带来以下有益效果:由上述S601-S602可知,给出了一种电子设备根据待处理图像中各区域的属性信息,确定第一参数和第二参数的具体实现方式。由于第一参数为待处理图像中的对象区域在待处理图像中的面积占比,第二参数为待处理图像中的背景区域在待处理图像中的面积占比,因此,基于第一参数对待处理图像中的对象区域进行风格化处理,以及基于第二参数对待处理图像中的背景区域进行风格化处理后,可以保证风格化图像中各区域的像素化程度和各区域的面积大小存在较好的适应性,实现更加具有观赏性的风格化效果。
在一种实施例中,本公开提供的图像处理方法,还包括:S701。
S701、电子设备将预设参数确定为第二参数。
需要说明的是,为了突出对象区域的风格化处理效果,可以考虑基于特定的参数对待处理图像中的背景区域进行风格化处理,以弱化背景区域的风格化效果。这种情况下,电子设备可以将预设参数确定为第二参数,以对待处理图像中的背景区域进行风格化处理。
一种可能的方式中,预设参数可以由工作人员根据经验预先设置在电子设备中,可以记作bg_scale。
在一种实施例中,结合图6,在上述S502中,即电子设备基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像时,如图8所示,本公开提供一种可选的实现方式,包括:S801-S804。
S801、电子设备对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像。
一种可以实现的方式中,电子设备可以根据预设分割算法,对待处理图像进行图像分割处理,以得到针对于对象区域的遮罩图像。遮罩图像可以用于划分对象区域和背景区域。接着,电子设备可以将待处理图像和遮罩图像相乘,以得到包括待处理图像中的对象区域的第一图像。并且,电子设备可以将待处理图像和取反后的遮罩图像相乘,以得到包括待处理图像中的背景区域的第二图像。
一种可能的方式中,在该遮罩图像中,可以用一种像素(例如255像素)表示对象区域,并用另一种像素表示背景区域(例如0像素)。
可选地,遮罩图像可以被命名为x_human_seg。
可选地,预设分割算法可以是mask-RCNN算法,也可以是U方网络(U square net,U^2-Net)算法,或者其他分割算法。本公开实施例对此不作限定。
可选地,若遮罩图像为针对于背景区域的遮罩图像,则电子设备可以将待处理图像和遮罩图像相乘,以得到包括待处理图像中的背景区域的第二图像。并且,电子设备可以将待处理图像和取反后的遮罩图像相乘,以得到包括待处理图像中的对象区域的第一图像。
可选地,第一图像可以被命名为x_smooth_human。第二图像可以被命名为x_smooth_background。取反后的遮罩图像可以被命名为x_background_seg。
S802、电子设备基于第一参数对第一图像进行像素化处理,得到处理后第一图像。
其中,处理后第一图像包括像素化处理后的对象区域。
一种可能的方式中,电子设备基于第一参数对第一图像进行像素化处理时,可以基于第一参数对第一图像进行下采样处理,以得到处理后第一图像。
一种可能的方式中,电子设备基于第一参数对第一图像进行像素化处理时,可以基于第一参数先对第一图像进行上采样处理,再基于第一参数进行下采样处理,以得到处理后第一图像。
一种可能的方式中,电子设备基于第一参数对第一图像进行像素化处理时,可以根据第一参数,先对第一图像进行下采样处理,再基于第一参数进行上采样处理,从而得到处理后第一图像。
需要说明的是,若像素化处理同时包含了上采样处理和下采样处理两个过程,由于下采样处理和上采样处理采用了相同的采样因子(即第一参数),因此,处理后第一图像和第一图像的大小一致。若像素化处理仅包含了下采样处理,则处理后第一图像与第一图像相比要小。其中,处理后第一图像的分辨率低于第一图像的分辨率。
S803、电子设备基于第二参数对第二图像进行像素化处理,得到处理后第二图像。
其中,处理后第二图像包括像素化处理后的背景区域。
一种可能的方式中,电子设备可以采用与第一图像相同的像素化处理过程,基于第二参数对第二图像进行像素化处理,得到处理后第二图像。基于此,处理后第一图像和处理后第二图像的大小可以保持一致,以便于将处理后第一图像和处理后第二图像进行图像融合处理得到风格化图像。
S804、电子设备对处理后第一图像和处理后第二图像进行图像融合处理,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。
一种可以实现的方式中,为了便于对处理后第一图像和处理后第二图像进行图像融合处理,电子设备可以基于第一参数对遮罩图像采取与第一图像相同的像素化处理过程,以得到处理后遮罩图像。
基于此,在得到处理后遮罩图像、处理后第一图像和处理后第二图像后,电子设备可以根据处理后遮罩图像对处理后第一图像和处理后第二图像进行融合,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。其中,处理后遮罩图像、处理后第一图像、处理后第二图像和风格化图像满足第一公式。第一公式为:
x_pixelate_human_seg×x_pixelate_fg+(1-x_pixelate_human_seg)×x_pixelate_bg=x_stylization。
其中,x_pixelate_human_seg为处理后遮罩图像。1-x_pixelate_human_seg用于表示对处理后遮罩图像进行取反。x_pixelate_fg为处理后第一图像。x_pixelate_bg为处理后第二图像。x_stylization风格化图像。
上述实施例提供的技术方案至少带来以下有益效果:由S801-S804可知,给出了一种电子设备基于第一参数对待处理图像中的对象区域进行风格化处理,以及基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像的具体实现方式。电子设备可以先对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像,并基于第一参数对第一图像进行像素化处理,得到处理后第一图像,以及基于第二参数对第二图像进行像素化处理,得到处理后第二图像,从而可以对处理后第一图像和处理后第二图像进行图像融合处理,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。这样一来,电子设备可以对待处理图像中的不同区域进行不同程度的缩放,从而保证缩放后的对象区域的像素化程度和对象区域的面积大小存在较好的适应性,实现更加具有观赏性的风格化效果。
在一种实施例中,结合图5,在上述S401中,电子设备确定缩放后图像中的对象区域的轮廓时,如图9所示,本公开提供一种可选的实现方式,包括:S901-S903。
S901、电子设备按照预设遍历方向在风格化图像中滑动预设滑动窗口,得到多个窗口区域。
其中,每个窗口区域包括风格化图像内的多个像素值。
一种可能的方式中,在得到风格化图像后,电子设备可以按照预设遍历方向在风格化图像中,以预设的滑动速度滑动预设滑动窗口,并在每次滑动后将预设滑动窗口对于的区域确定为一个窗口区域,从而得到多个窗口区域。
可选地,预设遍历方向可以包括从上至下、从下至上、从左至右和从右至左中的至少一个方向。
可选地,预设的滑动速度可以用于表示每次滑动一个或多个像素。
可选地,预设滑动窗口可以是边长为S的正方形窗口。例如,边长S可以是两个像素点的长度。
S902、电子设备将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合。
其中,目标窗口区域包括风格化图像中对象区域内的像素值和风格化图像中对象区域外的像素值。
一种可能的方式中,预设条件可以是包括风格化图像中对象区域内的像素值、且包括风格化图像中对象区域外的像素值。
基于此,在得到多个窗口区域后,电子设备可以将既包括风格化图像中对象区域内的像素值,又包括风格化图像中对象区域外的像素值的窗口区域确定为目标窗口区域,从而得到包括多个符合预设条件的窗口区域的目标窗口区域集合。
一种可能的方式中,在上述处理后遮罩图像中,对象区域内的像素会被标识为同一种像素值(例如255像素),对象区域外的像素会被标识为另一种像素值(例如0像素)。基于此,电子设备还可以按照预设遍历方向在处理后遮罩图像中滑动预设滑动窗口,得到多个窗口区域,并进一步将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合。
S903、电子设备将目标窗口区域集合中的每个目标窗口区域的中心点填充为预设像素值,得到轮廓。
具体的,在得到目标窗口区域集合后,电子设备可以确定目标窗口区域集合中每个目标窗口区域的中心点,并将每个目标窗口区域的中心点填充为预设像素值,从而得到风格化图像中的对象区域的轮廓。
可选地,预设像素值可以是用于表示黑色的像素值。
示例性的,缩放后图像中的对象区域的轮廓图像可以为如图9所示的轮廓图像。
上述实施例提供的技术方案至少带来以下有益效果:由S901-S903可知,给出了一种电子设备确定缩放后图像中的对象区域的轮廓图像的具体实现方式。电子设备可以基于预设滑动窗口得到多个窗口区域,并将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,从而可以进一步将每个目标窗口区域的中心点填充为预设像素值,以得到风格化图像中的对象区域的轮廓。
在一种实施例中,结合图8,在上述S801之前,即电子设备对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像之前,如图10所示,本公开提供的图像处理方法,还包括:S1001。
S1001、电子设备对待处理图像进行图像平滑处理,得到平滑后图像。
可以理解的是,待处理图像在拍摄时,可能受到相机传感器和大气等因素的影响,会存在亮度变化过大的区域,或者高亮度的像素点(也可以称为噪声)。为了降低这种影响以保证待处理图像对应的风格化图像的效果,电子设备可以对待处理图像进行图像平滑处理,以得到图像亮度趋于平缓的平滑后图像。后续,电子设备可以基于遮罩图像,对平滑后图像进行抠图,以得到包括平滑后图像中的对象区域的第一图像,以及包括平滑后图像中的背景区域的第二图像。
上述实施例提供的技术方案至少带来以下有益效果:由S1001可知,电子设备可以对待处理图像进行图像平滑处理,以得到图像亮度趋于平缓的平滑后图像,从而保证待处理图像对应的风格化图像的效果。
可以理解的是,在实际实施时,本公开实施例所述的终端/服务器可以包含有用于实现前述对应图像处理方法的一个或多个硬件结构和/或软件模块,这些执行硬件结构和/或软件模块可以构成一个电子设备。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的算法步骤,本公开能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本公开的范围。
基于这样的理解,本公开实施例还对应提供一种图像处理装置。图11示出了本公开实施例提供的图像处理装置的结构示意图。如图11所示,该图像处理装置可以包括:显示单元1101和处理单元1102;
显示单元1101,被配置为在对待处理图像进行风格化处理的过程中,显示待处理图像;待处理图像包括对象区域和背景区域;
处理单元1102,被配置为响应于用户对待处理图像执行的风格化操作,对待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;风格化图像中的对象区域的分辨率和风格化图像中的背景区域的分辨率不同;
显示单元1101,还被配置为显示风格化图像。
可选地,该图像处理装置,还包括:确定单元1103;确定单元1103,被配置为确定风格化图像中的对象区域的轮廓;显示单元1101,还被配置为在风格化图像中显示轮廓。
可选地,处理单元1102,具体被配置为:根据待处理图像中各区域的属性信息,确定第一参数和第二参数;基于第一参数对待处理图像中的对象区域进行风格化处理,并基于第二参数对待处理图像中的背景区域进行风格化处理,得到风格化图像。
可选地,属性信息包括待处理图像中对象区域和背景区域的面积占比信息;处理单元1102,具体被配置为:根据待处理图像中的对象区域在待处理图像中的面积占比信息,确定第一参数;根据待处理图像中的背景区域在待处理图像中的面积占比信息,确定第二参数。
可选地,处理单元1102,还被配置为对待处理图像进行图像分割处理,得到包括待处理图像中的对象区域的第一图像和包括待处理图像中的背景区域的第二图像;处理单元1102,还用于基于第一参数对第一图像进行像素化处理,得到处理后第一图像;处理后第一图像包括像素化处理后的对象区域;处理单元1102,还用于基于第二参数对第二图像进行像素化处理,得到处理后第二图像;处理后第二图像包括像素化处理后的背景区域;处理单元1102,还用于对处理后第一图像和处理后第二图像进行图像融合处理,得到包括像素化处理后的对象区域和像素化处理后的背景区域的风格化图像。
可选地,确定单元1103,具体被配置为:按照预设遍历方向在风格化图像中滑动预设滑动窗口,得到多个窗口区域;每个窗口区域包括采样后遮罩图像内的多个像素值;将多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合;目标窗口区域包括风格化图像中的对象区域内的像素值,以及风格化图像中的背景区域内的像素值;将目标窗口区域集合中的每个目标窗口区域的中心点填充为预设像素值,得到轮廓。
可选地,处理单元1102,还被配置为对待处理图像进行图像平滑处理,得到平滑后图像。
如上所述,本公开实施例可以根据上述方法示例对图像处理装置进行功能模块的划分。其中,上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。另外,还需要说明的是,本公开实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。
关于上述实施例中的图像处理装置,其中各个模块执行操作的具体方式、以及具备的有益效果,均已经在前述方法实施例中进行了详细描述,此处不再赘述。
本公开实施例还提供一种终端,终端可以是手机、电脑等用户终端。图12示出了本公开实施例提供的终端的结构示意图。该终端可以是图像处理装置可以包括至少一个处理器61,通信总线62,存储器63以及至少一个通信接口64。
处理器61可以是一个处理器(central processing units,CPU),微处理单元,ASIC,或一个或多个用于控制本公开方案程序执行的集成电路。
通信总线62可包括一通路,在上述组件之间传送信息。
通信接口64,使用任何收发器一类的装置,用于与其他设备或通信网络通信,如服务器、以太网,无线接入网(radio access network,RAN),无线局域网(wireless localarea networks,WLAN)等。
存储器63可以是只读存储器(read-only memory,ROM)或可存储静态信息和指令的其他类型的静态存储设备,随机存取存储器(random access memory,RAM)或者可存储信息和指令的其他类型的动态存储设备,也可以是电可擦可编程只读存储器(electricallyerasable programmable read-only memory,EEPROM)、只读光盘(compact disc read-only memory,CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。存储器可以是独立存在,通过总线与处理单元相连接。存储器也可以和处理单元集成在一起。
其中,存储器63用于存储执行本公开方案的应用程序代码,并由处理器61来控制执行。处理器61用于执行存储器63中存储的应用程序代码,从而实现本公开方法中的功能。
在具体实现中,作为一种实施例,处理器61可以包括一个或多个CPU,例如图12中的CPU0和CPU1。
在具体实现中,作为一种实施例,终端可以包括多个处理器,例如图12中的处理器61和处理器65。这些处理器中的每一个可以是一个单核(single-CPU)处理器,也可以是一个多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。
在具体实现中,作为一种实施例,终端还可以包括输入设备66和输出设备67。输入设备66和输出设备67通信,可以以多种方式接受用户的输入。例如,输入设备66可以是鼠标、键盘、触摸屏设备或传感设备等。输出设备67和处理器61通信,可以以多种方式来显示信息。例如,输出设备61可以是液晶显示器(liquid crystal display,LCD),发光二级管(light emitting diode,LED)显示设备等。
本领域技术人员可以理解,图12中示出的结构并不构成对终端的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。
本公开实施例还提供一种服务器。图13示出了本公开实施例提供的服务器的结构示意图。该服务器可以是图像处理装置。该服务器可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器71和一个或一个以上的存储器72。其中,存储器72中存储有至少一条指令,至少一条指令由处理器71加载并执行以实现上述各个方法实施例提供的图像处理方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。
本公开还提供了一种包括指令的计算机可读存储介质,所述计算机可读存储介质上存储有指令,当所述计算机可读存储介质中的指令由计算机设备的处理器执行时,使得计算机能够执行上述所示实施例提供的图像处理方法。例如,计算机可读存储介质可以为包括指令的存储器63,上述指令可由终端的处理器61执行以完成上述方法。又例如,计算机可读存储介质可以为包括指令的存储器72,上述指令可由服务器的处理器71执行以完成上述方法。可选地,计算机可读存储介质可以是非临时性计算机可读存储介质,例如,所述非临时性计算机可读存储介质可以是ROM、RAM、CD-ROM、磁带、软盘和光数据存储设备等。
本公开还提供了一种计算机程序产品,该计算机程序产品包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行上述图3,以及图5至图10任一附图所示的图像处理方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (10)

1.一种图像处理方法,其特征在于,包括:
在对待处理图像进行风格化处理的过程中,显示所述待处理图像;所述待处理图像包括对象区域和背景区域;
响应于用户对所述待处理图像执行的风格化操作,对所述待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;所述风格化图像中的对象区域的分辨率和所述风格化图像中的背景区域的分辨率不同;
显示所述风格化图像。
2.根据权利要求1所述的图像处理方法,其特征在于,所述得到风格化图像之后,还包括:
确定所述风格化图像中的对象区域的轮廓;
在所述风格化图像中显示所述轮廓。
3.根据权利要求1所述的图像处理方法,其特征在于,所述响应于用户对所述待处理图像执行的风格化操作,对所述待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像,包括:
根据所述待处理图像中各区域的属性信息,确定第一参数和第二参数;
基于所述第一参数对所述待处理图像中的对象区域进行风格化处理,并基于所述第二参数对所述待处理图像中的背景区域进行风格化处理,得到所述风格化图像。
4.根据权利要求3所述的图像处理方法,其特征在于,所述属性信息包括所述待处理图像中对象区域和背景区域的面积占比信息;所述根据所述待处理图像中各区域的属性信息,确定第一参数和第二参数,包括:
根据所述待处理图像中的对象区域在所述待处理图像中的面积占比信息,确定所述第一参数;
根据所述待处理图像中的背景区域在所述待处理图像中的面积占比信息,确定所述第二参数。
5.根据权利要求3所述的图像处理方法,其特征在于,所述基于所述第一参数对所述待处理图像中的对象区域进行风格化处理,并基于所述第二参数对所述待处理图像中的背景区域进行风格化处理,得到所述风格化图像,包括:
对所述待处理图像进行图像分割处理,得到包括所述待处理图像中的对象区域的第一图像和包括所述待处理图像中的背景区域的第二图像;
基于所述第一参数对所述第一图像进行像素化处理,得到处理后第一图像;所述处理后第一图像包括像素化处理后的对象区域;
基于所述第二参数对所述第二图像进行像素化处理,得到处理后第二图像;所述处理后第二图像包括像素化处理后的背景区域;
对所述处理后第一图像和所述处理后第二图像进行图像融合处理,得到包括所述像素化处理后的对象区域和所述像素化处理后的背景区域的所述风格化图像。
6.根据权利要求2所述的图像处理方法,其特征在于,所述确定所述风格化图像中的对象区域的轮廓,包括:
按照预设遍历方向在所述风格化图像中滑动预设滑动窗口,得到多个窗口区域;每个窗口区域包括所述风格化图像内的多个像素值;
将所述多个窗口区域中符合预设条件的窗口区域确定为目标窗口区域,得到目标窗口区域集合;所述目标窗口区域包括所述风格化图像中的对象区域内的像素值,以及所述风格化图像中的背景区域内的像素值;
将所述目标窗口区域集合中的每个目标窗口区域的中心点填充为预设像素值,得到所述轮廓。
7.根据权利要求5所述的图像处理方法,其特征在于,所述对所述待处理图像进行图像分割处理,得到包括所述待处理图像中的对象区域的第一图像和包括所述待处理图像中的背景区域的第二图像之前,还包括:
对所述待处理图像进行图像平滑处理,得到平滑后图像。
8.一种图像处理装置,其特征在于,包括:显示单元和处理单元;
显示单元,被配置为在对待处理图像进行风格化处理的过程中,显示所述待处理图像;所述待处理图像包括对象区域和背景区域;
处理单元,被配置为响应于用户对所述待处理图像执行的风格化操作,对所述待处理图像中的对象区域和背景区域分别进行风格化处理,得到风格化图像;所述风格化图像中的对象区域的分辨率和所述风格化图像中的背景区域的分辨率不同;
显示单元,还被配置为显示所述风格化图像。
9.一种电子设备,其特征在于,所述电子设备包括:
处理器;
用于存储所述处理器可执行指令的存储器;
其中,所述处理器被配置为执行所述指令,以实现如权利要求1-7中任一项所述的图像处理方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,其特征在于,当所述计算机可读存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1-7中任一项所述的图像处理方法。
CN202211517370.3A 2022-11-29 2022-11-29 一种图像处理方法、装置、设备及存储介质 Pending CN115908116A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211517370.3A CN115908116A (zh) 2022-11-29 2022-11-29 一种图像处理方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211517370.3A CN115908116A (zh) 2022-11-29 2022-11-29 一种图像处理方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115908116A true CN115908116A (zh) 2023-04-04

Family

ID=86472558

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211517370.3A Pending CN115908116A (zh) 2022-11-29 2022-11-29 一种图像处理方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN115908116A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117036203A (zh) * 2023-10-08 2023-11-10 杭州黑岩网络科技有限公司 一种智能绘图方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117036203A (zh) * 2023-10-08 2023-11-10 杭州黑岩网络科技有限公司 一种智能绘图方法及系统
CN117036203B (zh) * 2023-10-08 2024-01-26 杭州黑岩网络科技有限公司 一种智能绘图方法及系统

Similar Documents

Publication Publication Date Title
US11734851B2 (en) Face key point detection method and apparatus, storage medium, and electronic device
US10437541B2 (en) Graphics engine and environment for efficient real time rendering of graphics that are not pre-known
CN110555795A (zh) 高解析度风格迁移
CN110189246B (zh) 图像风格化生成方法、装置及电子设备
CN109410141B (zh) 一种图像处理方法、装置、电子设备及存储介质
US20210064919A1 (en) Method and apparatus for processing image
US11367163B2 (en) Enhanced image processing techniques for deep neural networks
US20230401672A1 (en) Video processing method and apparatus, computer device, and storage medium
CN111727424A (zh) 跨显示屏的自适应界面转换
EP4207051A1 (en) Image super-resolution method and electronic device
US10846889B2 (en) Color handle generation for digital image color gradients using machine learning
EP4123595A2 (en) Method and apparatus of rectifying text image, training method and apparatus, electronic device, and medium
US10930033B1 (en) Content aware tracing for generating vector drawings
CN115908116A (zh) 一种图像处理方法、装置、设备及存储介质
CN115984856A (zh) 文档图像矫正模型的训练方法、文档图像的矫正方法
US10445921B1 (en) Transferring motion between consecutive frames to a digital image
CN108520532B (zh) 识别视频中物体运动方向的方法及装置
CN115731341A (zh) 三维人头重建方法、装置、设备及介质
CN113240576A (zh) 风格迁移模型的训练方法、装置、电子设备及存储介质
CN112721150A (zh) 一种光固化3d打印方法、装置、设备及存储介质
CN116884004A (zh) 图像处理方法、装置、电子设备和存储介质
CN114882313B (zh) 生成图像标注信息的方法、装置、电子设备及存储介质
CN114419322B (zh) 一种图像实例分割方法、装置、电子设备及存储介质
US10319126B2 (en) Ribbon to quick access toolbar icon conversion
CN113284156A (zh) 实时无绿幕抠图方法、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination