CN111402111B - 图像虚化方法、装置、终端及计算机可读存储介质 - Google Patents

图像虚化方法、装置、终端及计算机可读存储介质 Download PDF

Info

Publication number
CN111402111B
CN111402111B CN202010096777.8A CN202010096777A CN111402111B CN 111402111 B CN111402111 B CN 111402111B CN 202010096777 A CN202010096777 A CN 202010096777A CN 111402111 B CN111402111 B CN 111402111B
Authority
CN
China
Prior art keywords
image
blurring
processing
background
resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010096777.8A
Other languages
English (en)
Other versions
CN111402111A (zh
Inventor
陈焜
任思捷
张帆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Sensetime Technology Co Ltd
Original Assignee
Shenzhen Sensetime Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Sensetime Technology Co Ltd filed Critical Shenzhen Sensetime Technology Co Ltd
Priority to CN202010096777.8A priority Critical patent/CN111402111B/zh
Publication of CN111402111A publication Critical patent/CN111402111A/zh
Application granted granted Critical
Publication of CN111402111B publication Critical patent/CN111402111B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本申请公开了图像虚化方法、装置、终端及计算机可读存储介质,图像虚化方法包括:获取第一图像中的背景图像;对背景图像进行膨胀处理,得到第一处理图像;对第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径;将虚化处理后的第一处理图像与第一图像中的前景部分结合,得到虚化结果图像。通过本方法,可以很好地解决因图像虚化而产生光晕的问题。

Description

图像虚化方法、装置、终端及计算机可读存储介质
技术领域
本申请涉及图像处理领域,特别是涉及图像虚化方法、装置、终端及计算机可读存储介质。
背景技术
如今人们生活中越来越离不开拍照摄影,同时,无论是在个人生活还是商业用途中,都对照片的质量有着更高的要求。为了凸显照片中的前景部分,通常的处理办法就是对照片进行虚化。
发明内容
本申请主要解决的技术问题是提供图像虚化方法、装置、终端及计算机可读存储介质,可以很好地解决因图像虚化而产生光晕的问题。
为解决上述技术问题,本申请采用的第一个技术方案是:一种图像虚化方法,包括:获取第一图像中的背景图像;对背景图像进行膨胀处理,得到第一处理图像;对第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径;将虚化处理后的第一处理图像与第一图像中的前景部分结合,得到虚化结果图像。
其中,对背景图像进行膨胀处理,得到第一处理图像,包括:
将背景图像的分辨率缩小到第一分辨率;
对位于第一分辨率的背景图像进行膨胀处理,获得第一处理图像。
其中,对位于第一分辨率的背景图像进行膨胀处理,获得第一处理图像后,包括:
将第一处理图像的分辨率放大到第二分辨率;
将位于第二分辨率的第一处理图像与第一图像对应的背景图像结合,获得结合后的第一处理图像;
对结合后的第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径。
其中,将第一处理图像的分辨率放大到第二分辨率之前,包括:
确定第一图像对应的背景图像的分辨率,作为第二分辨率。
其中,对第一处理图像进行虚化处理,包括:
检测第一处理图像的有效区域的参数信息;
根据预设规则利用参数信息确定虚化参数;
利用虚化参数对第一处理图像进行虚化处理。
其中,检测第一处理图像的有效区域的参数信息,包括:
当第一处理图像的有效区域包括至少两个子区域时,分别检测每一所述子区域的所述参数信息;
根据预设规则利用参数信息确定虚化参数,包括:
根据预设规则分别确定每一参数信息对应的虚化参数;
利用虚化参数对第一处理图像进行虚化处理,包括:
分别利用每一子区域的虚化参数对第一处理图像的有效区域中对应的子区域进行虚化。
其中,获取第一图像中的背景图像,包括:
获取区分第一图像中前景部分和背景部分的掩膜;
利用掩膜获取与第一图像对应的背景图像。
为解决上述技术问题,本申请采用的第二个技术方案是:一种装置,包括:获取模块,用于获取第一图像中的背景图像;膨胀处理模块,用于对背景图像进行膨胀处理,得到第一处理图像;虚化处理模块,用于对第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径;结合模块,用于将虚化处理后的第一处理图像与第一图像中的前景部分结合,得到虚化结果图像。
为解决上述技术问题,本申请采用的第三个技术方案是:一种终端,包括存储器和处理器,处理器耦接存储器,用于执行图像虚化方法。
为解决上述技术问题,本申请采用的第四个技术方案是:一种计算机可读存储介质,其上存储有计算机程序指令,计算机程序指令被处理器执行时实现图像虚化方法。
本申请的有益效果:通过在获取第一图像中的背景图像后,在对背景图像进行虚化处理之前,先对背景图像进行膨胀处理,获得第一处理图像,再对获得的第一处理图像进行虚化处理,且虚化处理的虚化半径小于膨胀处理的膨胀半径。可以很好地防止在前景边界处滤波时,滤波半径内有前景出现对滤波造成干扰,从而很好地防止图像虚化后出现光晕问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,其中:
图1是本申请图像虚化方法实施例的流程示意图;
图2是本申请图像虚化方法实施例的第一图像示意图;
图3是本申请图像虚化方法实施例的第一处理图像示意图;
图4是本申请图像虚化方法实施例的另一第一图像示意图;
图5是本申请图像虚化方法实施例的对比图示意图;
图6是本申请图像虚化方法实施例的虚化结果图像示意图;
图7是本申请图片虚化装置实施例的结构示意图;
图8是本申请终端实施例的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,均属于本申请保护的范围。
请参阅图1,图1是本申请图像虚化方法实施例的流程示意图。如图1所示,本实施例的图像虚化方法包括如下步骤:
S101:获取第一图像中的背景图像。
第一图像可以是从一段视频中获取的图像,也可是经过相机拍摄的图片,还可以是相册中存储的图像或网络上下载的图像,对第一图像的获取途径不限于此。第一图像可以简单称其为待虚化图像。
获取第一图像中的背景图像的过程中,先获取区分第一图像中的前景部分和背景部分的掩膜。掩膜,用于覆盖的特定图像或物体。即可利用掩膜,对处理的图像(全部或局部)进行遮挡,来控制图像处理的区域或处理过程。本实施例中所说的掩膜为0和1像素组成的图像,当然在其他实施例中掩膜也可以为其他不同数值组成的图像,例如掩模可以由255和256组成,或由其他数值组成,主要是在掩模中通过不同的数值表示将背景和前景区分开,因此本申请提供的实施例中对掩模中的具体数值不做限定。
获取第一图像的掩膜的步骤可以包括:获取第一图像的幅值图像和相位图像。其中,包括将第一图像转换为灰度图,经过傅立叶变换可以把灰度图中的每一个像素点的像素值转变成复数。由于每一个复数都有模长和方向两个量组成,因此可以分离出幅值图像和相位图像。获取第一图像的幅值图像和相位图像之后,分别计算幅值图像和相位图像的图像掩码,即计算幅值图像中每个像素点在预设区域范围内的相关数据作为幅值图像的相关数据,计算相位图像中每个像素点在预设区域范围内的相关数据作为相位图像的相关数据,这个计算过程实质上就是对幅值图像和相位图像采用滤波器进行低通滤波处理,滤波器可以是矩形滤波器,也可以是球形滤波器,滤波器的滤波范围即为预设区域。对获得的幅值图像和相位图像的相关数据进行二值阈值处理,获得幅值图像和相位图像的图像掩码。将幅值图像的掩码和相位图像的图像掩码进行合并,获得第一图像的掩膜。当然,获取第一图像掩膜的方式还可以是通过双目相机图片计算得到的深度图信息的方式以及通过人像分割技术得到,因此,本申请对于获得第一图像的掩膜的方式并不做具体地限定。
获取区分第一图像中前景部分和背景部分的掩膜之后,利用掩膜获取与第一图像对应的背景图像。具体地,对第一图像与该掩膜进行乘法操作,获得与第一图像对应的前景图像。在乘法操作后,保留第一图像中对应掩膜为1的部分,该部分为前景部分,将第一图像中对应掩膜为0的区域透明化,获得与第一图像对应的前景图像。
将第一图像与前景图像进行减法操作。具体地,将第一图像与前景图像中对应像素点的像素进行相减,获得与第一图像对应的背景图像。背景图像中像素不为零的部分皆为对应第一图像的背景部分,像素为零的部分皆为对应第一图像的前景部分,其中对应第一图像的前景部分为无效部分。
S102:对背景图像进行膨胀处理,得到第一处理图像。
获得与第一图像对应的背景图像之后,对背景图像进行膨胀处理。具体地,背景图像中至少包括一个无效部分,即对应第一图像的前景部分。背景图像按照一定的膨胀半径进行膨胀之后,无效部分的面积缩小,即背景图像中的前景部分面积缩小,从而获得第一处理图像。
一些实施例中,在对背景图像进行膨胀处理之前,将背景图像的分辨率缩小到第一分辨率。其中,第一分辨率可以是背景图像的原分辨率的二分之一或三分之一,这个比例可以根据用户的具体需求进行调整,本申请不做具体限定。
对位于第一分辨率的背景图像进行膨胀处理,获得第一处理图像。其中,从背景图像中的前景部分与背景部分的边界往前景部分的中心进行膨胀,使得前景部分从边界往中心缩小,从而实现对前景部分进行填充,进而获得第一处理图像。
在进行膨胀处理之前将背景图像的分辨率缩小,然后再对分辨率缩小后的背景图像进行膨胀处理,相比直接对背景图像进行膨胀处理而言,前者因为分辨率减小所以像素点数减少,进行膨胀处理的膨胀半径小于直接对背景图像操作的膨胀半径。因此,膨胀处理所需时间也就越短,即加快了膨胀处理时间,这对于实时性要求高的应用场景,比如说视频虚化,对时间的把控就显得很重要。
如果直接将背景图像进行膨胀操作,这种方式适合对实时性要求不高的场景,例如,对少量图片进行虚化时,可以直接将背景图像进行膨胀,操作过程减少,使得操作方便。
在获得第一处理图像之后,将第一处理图像的分辨率放大到第二分辨率。其中,将述第一处理图像的分辨率放大到第二分辨率之前,可确定第一图像对应的背景图像的分辨率,作为第二分辨率。即将第一处理图像的分辨率还原到原分辨率。
将位于第二分辨率的第一处理图像同与第一图像对应的背景图像结合,获得结合后的第一处理图像。其中,结合的方式可以是根据区分第一图像的前景部分和背景部分的掩膜将位于第二分辨率的第一图像与背景图像进行融合,进而得到结合后的第一处理图像。
同时参见图2和图3,图2是本申请图像虚化方法实施例的第一图像示意图,图3是本申请图像虚化方法实施例的第一处理图像示意图。如图2所示,第一图像20包括前景部分21和背景部分22,其中,前景部分21为第一图像20的中间部分,即用框圈出来的中间部分为第一图像20的前景部分21,背景部分22为除前景部分21之外的部分。如图3所示,第一处理图像30包括背景部分31和前景部分32,其中,前景部分32包括像素为零的部分和像素不为零的部分,像素为零的部分即为斜线填充部分。其中,第一处理图像30的前景部分32中像素不为零的部分以及背景部分31统称为第一处理图像30的有效区域。因为前述的膨胀处理,使得相对于第一图像20中的前景部分21来说,第一处理图像30中前景部分32变小。在膨胀之后,将第一处理图像30的分辨率放大到第二分辨率,将位于第二分辨率的第一处理图像同与第一图像对应的背景图像结合,获得结合后的第一处理图像。
通过将第一处理图像的分辨率放大到第二分辨率,并与背景图像进行结合可以提高照片的质量,即画质更加清晰。其中,通过将第一处理图像的分辨率放大到原分辨可以方便后续的操作,即因为分辨率相同可方便将第一处理图像与背景图像结合。
S103:对第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径。
其中,第一处理图像可以是直接将背景图像进行膨胀处理后获得,也可是上述位于第二分辨率的第一处理图像与背景图像结合获得。
在进行虚化之前,获取膨胀处理的膨胀半径。根据预设比例获取与膨胀半径对应的虚化半径。预设比例为膨胀半径与虚化半径的比例。预设比例可以由用户自行设置,也可由系统自行设置。
通过获取膨胀处理的膨胀半径自动获取虚化处理的虚化半径,不需要用户自己输入虚化半径的值,可以避免因用户输入的虚化半径大于膨胀处理的膨胀半径,虚化之后出现光晕问题。
其中,检测第一处理图像的有效区域的参数信息。其中,第一处理图像的有效区域如上所述,此处不再赘述。其中,参数信息包括但不限于物理距离信息,图片的亮度,颜色信息等等。物理距离信息指的是背景部分中每个像素到图像采集装置的距离。颜色信息包括图片颜色的饱和度和色调等等。根据预设规则利用参数信息确定虚化参数。利用虚化参数对第一处理图像进行虚化处理。其中,预设规则包括确定不同参数信息在确定虚化参数时所占比例。
通过综合这些参数信息来确定虚化参数可以根据每张图像的实际情况进行虚化,而不是一成不变的所有图像都使用同一虚化参数,从而可以使得虚化的效果更好。
当第一处理图像的有效区域包括至少两个子区域时,分别检测每一子区域的参数信息。根据预设规则分别确定每一参数信息对应的虚化参数。分别利用每一子区域的虚化参数对第一处理图像的有效区域中对应的子区域进行虚化。即一张图像的不同背景部分可以采用不同的虚化参数。
通过给不同子区域各自的情况确定虚化参数,而不是当存在多个子区域时每个子区域都是同样的虚化参数,可以使得整张的照片的虚化效果更佳。
当虚化半径小于膨胀半径时,在前景部分与背景部分的边界处滤波时,滤波半径内没有前景,就不会有前景的干扰,进而从根源上减少了光晕的产生。其中,膨胀半径至少比虚化半径大一个像素点,即膨胀半径至少比虚化半径大1。
S104:将虚化处理后的第一处理图像与第一图像中的前景部分结合,得到虚化结果图像。
其中,将虚化处理后的第一处理图像与第一图像根据区分第一图像中前景部分和背景部分的掩膜进行结合,获得虚化结果图像;或,将虚化处理后的第一处理图像与利用第一图像获得的前景图像根据区分第一图像中前景部分和背景部分的掩膜进行融合,获得虚化结果图像。因为有区分前景部分和背景部分的掩膜,所以无论是将第一图像与虚化后的第一处理图像根据掩膜进行融合还是将根据第一图像获得的前景图像与虚化后的第一处理图像根据掩膜进行融合都能得到最终的虚化结果图像。
参见图4、图5和图6,图4是本申请图像虚化方法实施例的另一第一图像示意图,图5是本申请图像虚化方法实施例的对比图示意图,图6是本申请图像虚化方法实施例的虚化结果图像示意图。
图4中的第一图像,即为待虚化图像,图5是利用现有技术对图像虚化获得的结果图,作为本申请的对比图示意图。可以看到,图5中人像的周围有一圈很明显的光晕,而图6是使用本申请提供的方法获得的虚化结果图像,很明显,人像周围并没有光晕,通过使用本申请提供的方法使得作为前景的人像和背景融合得更加自然。
在对图像进行虚化之前,先进行膨胀处理,且膨胀半径大于虚化半径,因为虚化半径小于膨胀半径,所以第一图像中前景和背景的边界处不会在虚化过程中因为有前景的干扰产生光晕,即根据本申请提供的方法可以减少因为图像虚化而产生光晕的问题。
通过在膨胀之前将背景图像的分辨率缩小,然后再对缩小后得到的背景图像进行膨胀处理,相比直接对背景图像进行膨胀处理而言,对分辨率缩小之后的背景图像进行膨胀处理的膨胀半径小于直接对背景图操作的膨胀半径,因此,膨胀处理所需时间也就越短,适合实时性要求高的应用场景,比如说视频虚化,对时间的把控就显得很重要。
虽然本申请提供的是图像虚化的方法,但是并不限定于单张图像虚化过程中去除光晕,视频虚化处理中也可以适用。
在视频虚化中,通过从视频中获取一帧一帧的图像并对这些图像一次进行虚化,每一帧图像虚化过程同上。如果视频是通过同一设备拍摄,那么从视频中获取的每一帧图像的分辨率相同,通过先缩小背景图像的分辨率到第一分辨率后再进行膨胀处理,之后再把图像的分辨率放大到原来的分辨率,加快了膨胀处理所花时间,而且每张图像皆可缩小到第一分辨率,批量操作起来相对于每张缩小的分辨率都不同的情况更方便。再者,视频虚化过程中,对每帧图像的膨胀半径和虚化半径皆可统一一致,虚化后得到的虚化结果图更相近,而且也是加快了视频虚化的时间。
请参阅图7,图7是本申请图片虚化装置实施例的结构示意图。如图7所示,本申请提供一种图片虚化装置70,包括获取模块71、膨胀处理模块72、虚化处理模块73及结合模块74。
获取模块71,用于获取第一图像中的背景图像。其中,获取模块71可以从视频中获取待虚化图像,也可是从终端中的数据库中存储的图像或者是从网上获取待虚化图像等等,获取途径不限于此。
膨胀处理模块72,用于对背景图像进行膨胀处理,得到第一处理图像。
虚化处理模块73,用于对第一处理图像进行虚化处理,其中,膨胀处理的膨胀半径大于虚化处理的虚化半径。
结合模块74,用于将虚化处理后的第一处理图像与第一图像中的前景部分结合,得到虚化结果图像。
当然,图片虚化装置70还可包括缩放模块放模块(图未示)用于缩小和放大图像的分辨率。具体地,在膨胀处理模块72对背景图像进行膨胀处理之前,先对背景图像的分辨率缩小到第一分辨率,也可在膨胀处理模块72对背景图像进行膨胀处理后得到的第一处理图像的分辨率放大到第二分辨率。
该装置中各模块的功能参见上述方法实施例中国的相关描述,此处不再赘述。
综上所述,本实施例中的图片虚化装置70,一方面通过在虚化处理模块73对图像虚化之前,先通过膨胀处理模块72对图像进行膨胀处理,可以在一定程度上减轻或避免虚化之后的图像产生光晕;另一方面通过缩放模块对图像的分辨率进行缩小之后,膨胀处理模块72才对图像进行膨胀处理,加快了膨胀操作所花时间。
请参阅图8,图8是本申请终端实施例的结构示意图。如图8所示,本实施例的终端80包括存储器81和处理器82。处理器82耦接存储器81,用于执行图像虚化方法。
存储器81用于存储计算机程序指令,处理器82和存储器81耦接以调用计算机程序指令来执行图像虚化方法。
处理器82还用于储存原始视频或原始图像,以及原始视频或原始图像虚化后的视频或图像。
处理器82用于从视频中获取第一图像,或从终端存储数据库中获取的图片亦或者是从网上获取第一图像。第一图像可以简单称其为待虚化图像。
处理器82获取第一图像中的背景图像。获取第一图像中的背景图像的过程中,处理器82先获取区分第一图像中的前景部分和背景部分的掩膜。掩膜,用于覆盖的特定图像或物体。即可利用掩膜,对处理的图像(全部或局部)进行遮挡,来控制图像处理的部分或处理过程。本申请的实施例所说的掩膜为0和1像素组成的图像,在其他实施例中,掩膜也可以为其他不同数值组成的图像,然后经转换得到0和1像素组成的图像。
其中,处理器82获取第一图像的掩膜的步骤可以包括:处理器82获取第一图像的幅值图像和相位图像。其中,包括将第一图像转换为灰度图,经过傅立叶变换可以把灰度图中的每一个像素点的像素值转变成复数。由于每一个复数都有模长和方向两个量组成,因此可以分离出幅值图像和相位图像。获取第一图像的幅值图像和相位图像之后,处理器82分别计算幅值图像和相位图像的图像掩码,即计算幅值图像中每个像素点在预设部分范围内的相关数据作为幅值图像的相关数据,计算相位图像中每个像素点在预设部分范围内的相关数据作为相位图像的相关数据,这个计算过程实质上就是对幅值图像和相位图像采用滤波器进行低通滤波处理,滤波器可以是矩形滤波器,也可以是球形滤波器,该滤波器的滤波范围即为预设部分。处理器82对获得的幅值图像和相位图像的相关数据进行二值阈值处理,获得幅值图像和相位图像的图像掩码。将幅值图像的掩码和相位图像的图像掩码进行合并,获得第一图像的掩膜。当然,获取图形掩膜的方式还可以是通过双目相机图片计算得到的深度图信息的方式以及通过人像分割技术得到,因此,本申请并不限制获取第一图像掩膜的方式。
处理器82获取区分第一图像中前景部分和背景部分的掩膜之后,对第一图像与该掩膜进行乘法操作,获得与第一图像对应的前景图像。具体地,在乘法操作后,保留第一图像中对应掩膜为1的部分,该部分为前景部分,将第一图像中对应掩膜为0的部分透明化,获得与第一图像对应的前景图像。
处理器82将第一图像与前景图像进行减法操作。具体地,将第一图像与前景图像中对应像素点的像素进行相减,获得与第一图像对应的背景图像。当然,该背景图像中像素不为零的部分皆为对应第一图像的背景部分,像素为零的部分皆为对应第一图像的前景部分,其中对应第一图像的前景部分为无效部分。
处理器82获得与第一图像对应的背景图像之后,对背景图像进行膨胀处理。具体地,背景图像中至少包括一个无效部分,即对应第一图像的前景部分。背景图像按照一定的膨胀半径进行膨胀之后,无效部分的面积缩小,即背景图像中的前景部分面积缩小,从而获得第一处理图像。
一些实施例中,处理器82对背景图像进行膨胀处理之前,将背景图像的分辨率缩小到第一分辨率。其中,第一分辨率可以是背景图像的原分辨率的二分之一或三分之一,这个比例可以根据用户的具体需求进行调整,本申请不做具体限定。
处理器82对位于第一分辨率的背景图像进行膨胀处理,获得第一处理图像。在一实施方式中,处理器82控制从背景图像中的前景部分的边界往前景部分中间进行膨胀,使得前景部分与背景部分的边界往前景部分的中部靠拢,从而获得第一处理图像。
在进行膨胀处理之前,处理器82将背景图像的分辨率缩小,再对缩小后得到的背景图像进行膨胀处理,相比直接对背景图像进行膨胀处理而言,前者因为分辨率减小所以像素点数减少,进行膨胀处理的膨胀半径小于直接对背景图像操作的膨胀半径。因此,膨胀处理所需时间也就越短,即加快了膨胀处理时间,适合实时性要求高的应用场景,比如说视频虚化,对时间的把控就显得很重要。
处理器82获得与第一图像对应的背景图像后,直接将背景图像按进行膨胀操作,适合对实时性要求不高的场景,例如,对少量图片进行虚化时,可以直接将背景图像进行膨胀,操作过程减少,使得操作方便。
获得第一处理图像后,处理器82将获得的第一处理图像的分辨率放大到第二分辨率。其中,将述第一处理图像的分辨率放大到第二分辨率之前,可确定第一图像对应的背景图像的分辨率,作为第二分辨率。当然,在其他实施例中,第二分辨率也可不等于与第一图像对应的背景图像的分辨率。
处理器82将位于第二分辨率的第一处理图像与第一图像对应的背景图像结合,获得结合后的第一处理图像。其中,结合的方式可以是根据区分第一图像的前景部分和背景部分的掩膜将位于第二分辨率的第一图像与背景图像进行融合,进而得到结合后的第一处理图像。
将第二分辨率的大小设置成与第一图像对应的背景图像的分辨率相等时,后续操作和按照直接通过背景图像膨胀处理获得的图像的后续操作进行,不需要额外设计操作步骤,便于后续操作。
处理器82在进行虚化之前,先获取膨胀处理的膨胀半径。处理器82根据预设比例获取与膨胀半径对应的虚化半径。预设比例为膨胀半径与虚化半径的比例。预设比例可以由用户自行设置,也可由系统自行设置。
处理器82用于检测第一处理图像的有效区域的参数信息。其中,第一处理图像的有效区域如图像虚化方法实施例所述,此处不再赘述。其中,参数信息包括但不限于物理距离信息,图片的亮度,颜色信息等等。物理距离信息指的是背景部分中每个像素到图像采集装置的距离。颜色信息包括图片颜色的饱和度和色调等等,可以根据这些综合确定虚化参数。利用虚化参数对第一处理图像进行虚化处理。
当第一处理图像的有效区域包括至少两个子区域时,处理器82分别检测每一子区域的参数信息。处理器82根据预设规则分别确定每一所述参数信息对应的虚化参数。处理器82分别利用每一所述子区域的虚化参数对所述第一处理图像的有效区域中对应的子区域进行虚化。即一张图像的不同背景部分可以采用不同的虚化参数。
当虚化半径小于膨胀半径,在前景部分与背景部分的边界处滤波时,滤波半径内没有前景,就不会有前景的干扰,进而从根源上减少了光晕的产生。其中,膨胀半径至少比虚化半径大一个像素点,即膨胀半径至少比虚化半径大1。
处理器82将虚化处理后的第一处理图像与第一图像根据区分第一图像中前景部分和背景部分的掩膜进行融合,获得结果图;或,将虚化处理后的第一处理图像与利用第一图像中前景部分和背景部分的掩膜进行融合,获得虚化结果图像。因为有区分前景部分和背景部分的掩码,所以无论是将第一图像与虚化后的第一处理图像根据掩膜进行融合还是将根据第一图像获得的前景图像与虚化后的第一处理图像根据掩膜进行融合都能得到最终的虚化结果图像。
虽然本申请提供的是图像虚化的方法,但是并不限定于图像虚化过程中去除光晕,在视频虚化处理中也可以适用。
处理器82在对图像进行虚化之前,先进行膨胀处理,且膨胀半径大于虚化半径,因为虚化半径小于膨胀半径,所以第一图像中前景和背景的边界处不会在虚化过程中因为有前景的干扰产生光晕,即根据本申请提供的方法可以减少因为图像虚化而产生光晕的问题。
本申请还提供一种计算机可读存储介质,其上存储有计算机程序指令,计算机程序指令被处理器执行时实现图像虚化方法。
本申请实施例中,计算机可读存储介质。所述存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算系统的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)TM)、闪存设备以及存储卡等中的一者或更多。
以上所述仅为本申请的实施方式,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。

Claims (10)

1.一种图像虚化方法,其特征在于,包括:
获取第一图像中的背景图像;
对所述背景图像进行膨胀处理,得到第一处理图像;
对所述第一处理图像进行虚化处理,其中,所述膨胀处理的膨胀半径大于所述虚化处理的虚化半径;
将虚化处理后的所述第一处理图像与所述第一图像中的前景部分结合,得到虚化结果图像;
其中,所述对所述背景图像进行膨胀处理,得到第一处理图像,包括:
从所述背景图像中的前景部分与背景部分的边界往前景部分进行膨胀。
2.根据权利要求1所述的方法,其特征在于,所述对所述背景图像进行膨胀处理,得到第一处理图像,包括:
将所述背景图像的分辨率缩小到第一分辨率;
对位于所述第一分辨率的所述背景图像进行膨胀处理,获得所述第一处理图像。
3.根据权利要求2所述的方法,其特征在于,所述对位于所述第一分辨率的所述背景图像进行膨胀处理,获得所述第一处理图像后,包括:
将所述第一处理图像的分辨率放大到第二分辨率;
将位于所述第二分辨率的所述第一处理图像与所述第一图像对应的背景图像结合,获得结合后的第一处理图像;
对所述结合后的第一处理图像进行虚化处理,其中,所述膨胀处理的膨胀半径大于所述虚化处理的虚化半径。
4.根据权利要求3所述的方法,其特征在于,所述将所述第一处理图像的分辨率放大到第二分辨率之前,包括:
确定所述第一图像对应的背景图像的分辨率,作为所述第二分辨率。
5.根据权利要求1所述的方法,其特征在于,所述对所述第一处理图像进行虚化处理,包括:
检测所述第一处理图像的有效区域的参数信息;
根据预设规则利用所述参数信息确定虚化参数;
利用所述虚化参数对所述第一处理图像进行虚化处理。
6.根据权利要求5所述的方法,其特征在于,所述检测所述第一处理图像的有效区域的参数信息,包括:
当所述第一处理图像的有效区域包括至少两个子区域时,分别检测每一所述子区域的所述参数信息;
所述根据预设规则利用所述参数信息确定虚化参数,包括:
根据预设规则分别确定每一所述参数信息对应的虚化参数;
所述利用所述虚化参数对所述第一处理图像进行虚化处理,包括:
分别利用每一所述子区域的虚化参数对所述第一处理图像的有效区域中对应的子区域进行虚化。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述获取第一图像中的背景图像,包括:
获取区分所述第一图像中前景部分和背景部分的掩膜;
利用所述掩膜获取与所述第一图像对应的背景图像。
8.一种图片虚化装置,其特征在于,包括:
获取模块,用于获取第一图像中的背景图像;
膨胀处理模块,用于对所述背景图像进行膨胀处理,得到第一处理图像;
虚化处理模块,用于对所述第一处理图像进行虚化处理,其中,所述膨胀处理的膨胀半径大于所述虚化处理的虚化半径;
结合模块,用于将虚化处理后的所述第一处理图像与所述第一图像中的前景部分结合,得到虚化结果图像;
其中,所述膨胀处理模块,用于对所述背景图像进行膨胀处理,得到第一处理图像,包括:
从所述背景图像中的前景部分与背景部分的边界往前景部分进行膨胀。
9.一种终端,包括存储器和处理器,其特征在于,所述处理器耦接所述存储器,用于执行如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,所述计算机程序指令被处理器执行时实现权利要求1-7中任意一项所述的方法。
CN202010096777.8A 2020-02-17 2020-02-17 图像虚化方法、装置、终端及计算机可读存储介质 Active CN111402111B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010096777.8A CN111402111B (zh) 2020-02-17 2020-02-17 图像虚化方法、装置、终端及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010096777.8A CN111402111B (zh) 2020-02-17 2020-02-17 图像虚化方法、装置、终端及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN111402111A CN111402111A (zh) 2020-07-10
CN111402111B true CN111402111B (zh) 2023-11-03

Family

ID=71430321

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010096777.8A Active CN111402111B (zh) 2020-02-17 2020-02-17 图像虚化方法、装置、终端及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN111402111B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113965664B (zh) * 2020-07-20 2024-02-09 武汉Tcl集团工业研究院有限公司 一种图像虚化方法、存储介质以及终端设备
CN112150486B (zh) * 2020-09-30 2024-05-28 维沃移动通信有限公司 图像处理方法及装置
CN112598687B (zh) * 2021-01-05 2023-07-28 网易(杭州)网络有限公司 图像分割方法和装置、存储介质、电子设备
CN113673474B (zh) * 2021-08-31 2024-01-12 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009054130A (ja) * 2007-07-27 2009-03-12 Ricoh Co Ltd 画像処理装置、画像処理方法およびデジタルスチルカメラ
CN101587586A (zh) * 2008-05-20 2009-11-25 株式会社理光 一种图像处理装置及图像处理方法
CN107481186A (zh) * 2017-08-24 2017-12-15 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN108830780A (zh) * 2018-05-09 2018-11-16 北京京东金融科技控股有限公司 图像处理方法及装置、电子设备、存储介质
CN109509237A (zh) * 2017-09-15 2019-03-22 展讯通信(上海)有限公司 滤镜处理的方法、装置及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009054130A (ja) * 2007-07-27 2009-03-12 Ricoh Co Ltd 画像処理装置、画像処理方法およびデジタルスチルカメラ
CN101587586A (zh) * 2008-05-20 2009-11-25 株式会社理光 一种图像处理装置及图像处理方法
CN107481186A (zh) * 2017-08-24 2017-12-15 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN109509237A (zh) * 2017-09-15 2019-03-22 展讯通信(上海)有限公司 滤镜处理的方法、装置及电子设备
CN108830780A (zh) * 2018-05-09 2018-11-16 北京京东金融科技控股有限公司 图像处理方法及装置、电子设备、存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于贝叶斯抠图的图像背景虚化技术;李晓颖;周卫星;吴孙槿;李丹;胡晓晖;;电脑知识与技术(28);全文 *
基于边缘检测的图像背景虚化方法;吴晨琛;杨杰;冷冰;李小江;李悦;;信息通信(04);全文 *

Also Published As

Publication number Publication date
CN111402111A (zh) 2020-07-10

Similar Documents

Publication Publication Date Title
CN111402111B (zh) 图像虚化方法、装置、终端及计算机可读存储介质
US7599568B2 (en) Image processing method, apparatus, and program
US7356254B2 (en) Image processing method, apparatus, and program
CN111986129B (zh) 基于多摄图像融合的hdr图像生成方法、设备及存储介质
US8194996B2 (en) Image processing apparatus, image processing method, image processing program, and image capturing apparatus
CN107172354B (zh) 视频处理方法、装置、电子设备及存储介质
Im et al. Single image-based ghost-free high dynamic range imaging using local histogram stretching and spatially-adaptive denoising
CN110910330B (zh) 图像处理方法、图像处理装置、电子设备和可读存储介质
JP2009282979A (ja) 画像処理装置及び画像処理方法
CN112602088B (zh) 提高弱光图像的质量的方法、系统和计算机可读介质
CN109785264B (zh) 图像增强方法、装置及电子设备
CN111161136B (zh) 图像虚化方法、图像虚化装置、设备及存储装置
JP7375208B2 (ja) スーパー夜景画像の生成方法、装置、電子機器および記憶媒体
CN111028170A (zh) 图像处理方法、图像处理装置、电子设备和可读存储介质
CN111031241B (zh) 图像处理方法及其装置、终端和计算机可读存储介质
CN115082350A (zh) 频闪图像处理方法、装置、电子设备和可读存储介质
JP2020031422A (ja) 画像処理方法及び装置
CN112235505B (zh) 去除图像闪烁的方法、装置及存储介质
CN111083359B (zh) 图像处理方法及其装置、电子设备和计算机可读存储介质
CN110992284A (zh) 图像处理方法、图像处理装置、电子设备和计算机可读存储介质
JP2006050070A (ja) 画像処理方法および装置並びにプログラム
CN110992283A (zh) 图像处理方法、图像处理装置、电子设备和可读存储介质
CN112106352A (zh) 一种图像处理方法及设备
Uchida et al. Pixelwise jpeg compression detection and quality factor estimation based on convolutional neural network
CN115035013A (zh) 图像处理方法、图像处理装置、终端及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant