CN112508774A - 图像的处理方法及装置 - Google Patents
图像的处理方法及装置 Download PDFInfo
- Publication number
- CN112508774A CN112508774A CN202011332247.5A CN202011332247A CN112508774A CN 112508774 A CN112508774 A CN 112508774A CN 202011332247 A CN202011332247 A CN 202011332247A CN 112508774 A CN112508774 A CN 112508774A
- Authority
- CN
- China
- Prior art keywords
- image
- style
- target
- characteristic
- label
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title description 14
- 230000005012 migration Effects 0.000 claims abstract description 119
- 238000013508 migration Methods 0.000 claims abstract description 119
- 238000000034 method Methods 0.000 claims abstract description 66
- 238000004891 communication Methods 0.000 abstract description 6
- 238000010586 diagram Methods 0.000 description 18
- 230000000007 visual effect Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 235000021384 green leafy vegetables Nutrition 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000002023 wood Substances 0.000 description 2
- 241001464837 Viridiplantae Species 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请公开了一种图像的处理方法及装置,属于通信技术领域。包括:获取风格图像和内容图像,并确定风格图像和内容图像各自包含的特征对象;确定风格图像中的第一特征对象,及内容图像中与第一特征对象对应的第二特征对象;基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像,本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
Description
技术领域
本申请属于通信技术领域,具体涉及一种图像的处理方法及装置。
背景技术
风格迁移是利用图像算法技术,其目的是将一张风格图像的视觉风格迁移到另一张内容图像,从而生成风格化的图像。
目前,图像风格迁移利用图像算法技术,根据两张图像像素点与特征图之间的差异,确定两张图像的风格差距,从而将其中一张内容图像进行风格迁移,填补风格差距,使其具有另一张风格图像的视觉风格,例如,可以选择一张晚霞照片作为确定迁移风格的风格图像,选择一张具有天空内容的内容图像,在将该风格图像中的晚霞风格迁移至内容图像上,使得被执行风格迁移的内容图像中的天空进行晚霞风格迁移,内容图像中的天空呈现偏红色彩的晚霞风格的过程中,被执行风格迁移的内容图像的整张照片也都呈现偏红色彩的状态。
在实现本申请的过程中,发明人发现现有技术中至少存在如下问题,由于风格迁移是针对整张图片,因而容易导致被执行风格迁移的内容图像中图像整体风格偏离原图像风格,使得风格迁移的适配性降低,用户体验较差。
发明内容
本申请实施例的目的是提供一种图像的处理方法及装置,能够解决现有技术中进行图像的风格迁移时,被执行风格迁移的内容图像中图像整体风格产生跑偏,风格迁移的适配性较低的问题。
为了解决上述技术问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种图像的处理方法,该方法包括:
获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
第二方面,本申请实施例提供了一种图像的处理装置,该装置包括:
获取模块,用于获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
选取模块,用于在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
第一迁移模块,用于基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
第三方面,本申请实施例还提供了一种电子设备,该电子设备包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例还提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
在本申请实施例中,获取风格图像和内容图像,并确定风格图像和内容图像各自包含的特征对象;在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,确定风格图像中的第一特征对象,及内容图像中的与第一特征对象对应的第二特征对象;基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像,本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
附图说明
图1是本申请实施例提供的一种图像的处理方法的步骤流程图;
图2是本申请实施例提供的一种风格图像示意图;
图3是本申请实施例提供的一种内容图像示意图;
图4是本申请实施例提供的一种电子设备的显示示意图;
图5是本申请实施例提供的一种选取特征对象过程的示意图;
图6是本申请实施例提供的一种风格迁移处理的示意图;
图7是本申请实施例提供的另一种图像的处理方法的步骤流程图;
图8是本申请实施例提供的一种特征参数的显示示意图;
图9是本申请实施例提供的一种调节程度的选择示意图;
图10是本申请实施例提供的一种图像的处理装置的框图;
图11是本申请实施例提供的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像的处理进行详细地说明。
图1是本申请实施例提供的一种图像的处理方法的步骤流程图,如图1所示,该方法可以包括:
步骤101、获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象。
在该步骤中,在获取到风格图像和内容图像之后,可以进一步确定所述风格图像和所述内容图像中各自包含的特征对象。
具体的,图像的风格迁移是指利用图像算法技术,可以将图像A的视觉风格迁移到另一张图像B中,使得图像B可以具有与图像A相同的视觉风格,其中,用于确定视觉风格的图像A可以称作风格图像,应用该视觉风格的图像B可以称作内容图像。
进一步的,每张图像中可以包含多个特征对象,图2是本申请实施例提供的一种风格图像示意图,如图2所示,风格图像10中包含有三个特征对象,分别为:具有点状填充的圆11、具有斜纹填充的三角形12,以及具有方格填充的矩形13;图3是本申请实施例提供的一种内容图像示意图,如图3所示,内容图像20中包含也有三个特征对象,分别为:没有填充的椭圆21、六边形22,以及L形结构23。
在本申请实施例中,用户可以通过电子设备选择并打开一张图片,例如,图4是本申请实施例提供的一种电子设备的显示示意图,如图4所示,用户在电子设备的显示界面中选择并打开一张风格图像10,同时,可以在显示风格图像10的显示界面中设置针对风格图像10进行操作的相关按钮,如分享、识图、编辑、删除和风格迁移,用户可以通过点击风格迁移按钮开始进行风格迁移操作,进一步的,可以在点击风格迁移按钮之后,显示内容图像的选择界面,在该界面中,可以显示风格图像10,以及按钮“请添加想要进行效果迁移的图片”,在接收到用户点击该按钮之后,可以在电子设备存储的图片中选择一张内容图像20,并同时将风格图像10和内容图像20显示在电子设备的显示界面中。
进一步的,在确定风格图像和内容图像各自包含的特征对象之后,可以解析特征对象,确定特征对象对应的实体名称,并将实体名称的文字或图标以标签的形式标注在特征对象的区域内,以供用户识别各特征对象。
步骤102、在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象。
在该步骤中,用户可以在电子设备的显示界面中的风格图像中选取第一特征对象,在内容图像中选取与第一特征对象对应的第二特征对象,以供后续实现基于图像中的特征对象进行风格迁移的过程,因此,电子设备可以在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,根据所述选择操作,在风格图像中确定第一特征对象,在内容图像中确定与第二特征对象。
在本申请实施例中,图5是本申请实施例提供的一种选取特征对象过程的示意图,如图5所示,可以在将风格图像10和内容图像20显示在电子设备的显示界面中,显示提示信息“将第一特征对象拖动至与第二特征对象重合”,从而用户可以通过拖动操作,从风格图像10中选择第一特征对象为具有斜纹填充的三角形12,从内容图像20中选择第二特征对象为六边形22。此外,若风格图像10和内容图像20中标注有各特征对象对应的标签时,则所述拖动操作也可以是将第一特征对象对应的标签拖动至与第二特征对象对应的标签重合,从而确定第一特征对象和第二特征对象。
步骤103、基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
在该步骤中,在从风格图像中确定了第一特征对象,从内容图像中确定了第二特征对象之后,可以基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
图6是本申请实施例提供的一种风格迁移处理的示意图,如图6所示,若用户通过拖动操作,从风格图像10中选择第一特征对象为具有斜纹填充的三角形12,从内容图像20中选择第二特征对象为六边形22,则可以通过风格迁移处理,使得内容图像20中第二特征对象六边形22也具有斜纹填充,最终得到包含风格迁移后的第二特征对象的目标内容图像30,所述目标内容图像30包含的三个特征对象则变更为:没有填充的椭圆31、及L形结构33,以及具有斜纹填充的六边形32。
综上所述,本申请实施例提供的一种图像的处理方法,包括:获取风格图像和内容图像,并确定风格图像和内容图像各自包含的特征对象;在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,确定风格图像中的第一特征对象,及内容图像中的与第一特征对象对应的第二特征对象;基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像,本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
图7是本申请实施例提供的另一种图像的处理方法的步骤流程图,如图7所示,该方法可以包括:
步骤201、获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象。
本步骤的实现方式与上述步骤101的实现过程类似,此处不再赘述。
步骤202、生成所述风格图像中每个特征对象对应的第一标签,并显示所述风格图像以及所述第一标签。
在该步骤中,在确定了风格图像包含的特征对象之后,可以过解析特征对象,确定特征对象对应的实体名称,并将实体名称的文字或图标以标签的形式标注在特征对象的区域内或旁边,以供用户识别各特征对象。
具体的,参照图2,风格图像10中包含有三个特征对象,分别为:具有点状填充的圆11、具有斜纹填充的三角形12,以及具有方格填充的矩形13,因此,可以分别生成第一标签“圆”、“三角形”和“矩形”,并显示在对应的特征对象的旁边。若风格图像为一张包含特征对象:天空、建筑物和绿植的图片,则可以生成和天空、建筑物和绿植对应的图标作为第一标签,并显示在对应的特征对象的区域内或旁边。
步骤203、生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签。
在该步骤中,在确定了内容图像包含的特征对象之后,可以过解析特征对象,确定特征对象对应的实体名称,并将实体名称的文字或图标以标签的形式标注在特征对象的区域内或旁边,以供用户识别各特征对象。
参照图3,内容图像20中包含有三个特征对象,分别为:没有填充的椭圆21、六边形22,以及L形结构23,因此,可以分别生成第二标签“椭圆”、“六边形”和“L形结构”,并显示在对应的特征对象的旁边。
步骤204、在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象。
在该步骤中,用户可以通过针对风格图像和内容图像中包含的特征对象的选择操作,在电子设备的显示界面中的风格图像中选取第一特征对象,在内容图像中选取与第一特征对象对应的第二特征对象,以供后续实现基于图像中的特征对象进行风格迁移的过程,因此,电子设备可以在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,根据所述选择操作,在风格图像中确定第一特征对象,在内容图像中确定与第二特征对象。
其中,所述选择操作可以包括:将所述风格图像中第一特征对象对应的目标第一标签,拖动至所述内容图像中第二特征对象对应的目标第二标签的位置的拖动操作。
具体的,由于风格图像中可以包含多个特征对象以及每个特征对象对应的第一标签,因此,用户可以通过所述选择操作,从多个特征对象中确定进行风格迁移的第一特征对象,该第一特征对象对应的第一标签则为目标第一标签;同时,内容图像中也可以包含多个特征对象以及每个特征对象对应的第二标签,因此,用户也可以通过所述选择操作,从多个特征对象中确定进行风格迁移的第二特征对象,该第二特征对象对应的第二标签则为目标第二标签。
步骤205、确定所述第一特征对象包含的至少一个特征参数。
在该步骤中,在通过选择操作确定了第一特征对象以及对应的目标第一标签、第二特征对象以及对应的目标第二标签之后,由于第一特征对象用于确定进行风格迁移处理的视觉风格,因此,可以进一步确定第一特征对象包含的至少一个特征参数,从而根据第一特征对象包含的特征参数,对第二特征对象进行风格迁移处理。
其中,所述特征参数可以包括:图像风格、曝光度、饱和度和色温中的任意一种或多种。
具体的,所述图像风格用于表征第一特征对象的图像纹理等特征,例如,若第一特征对象为具有木纹的特征对象,则可以根据该图像风格对内容图像中的第二特征对象进行风格迁移处理,使得第二特征对象也具有木纹的特征。
此外,还可以第一特征对象的曝光度、饱和度和色温等特征参数,对内容图像中的第二特征对象进行风格迁移处理,使得第二特征对象也具有与第一特征对象相同的曝光度、饱和度和色温。
在本申请实施例中,在风格迁移处理的过程中,可以从第一特征对象的多个特征参数中,选择特定的特征参数,从而使得第一特征对象中特定的特征参数迁移至第二特征对象上。
步骤206、在与所述目标第二标签的位置之间的距离小于预设距离的位置,显示所述第一特征对象包含的每个特征参数对应的第三标签。
在该步骤中,可以在确定了第一特征对象包含的至少一个特征参数之后,生成第一特征对象包含的每个特征参数对应的第三标签,所述第三标签可以为包含有对应特征参数名称的标签,并在与目标第二标签的位置间的距离小于预设距离的位置,显示上述第三标签,以供用户选择特定的目标第三标签对应的第一目标特征参数,从而仅将第一特征对象中第一目标特征参数迁移至第二特征对象上。
在本申请实施例中,所述预设距离可以是预先设置的距离值,例如1厘米,或两厘米等。
图8是本申请实施例提供的一种特征参数的显示示意图,如图8所示,第一特征对象12包含的特征参数有图像风格、曝光度、饱和度和色温,因此分别生成相应的第三标签,并与第二特征对象22的目标第二标签“六边形”的位置之间的距离小于预设距离的位置,显示上述第三标签。
步骤207、在接收到拖动目标第三标签至所述目标第二标签的位置的操作的情况下,确定所述目标第三标签对应的第一目标特征参数,并根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
在该步骤中,用户可以在多个第三标签中,选择需要进行风格迁移处理的特征参数对应的目标第三标签,并拖动目标第三标签至目标第二标签的位置,从而可以根据第一特征对象的目标第三标签对应的第一目标特征参数,对第二特征对象进行风格迁移处理。
可选的,步骤207中根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理的过程,具体可以包括:
子步骤2071、显示所述第一目标特征参数对应的调节程度选择区域。
在该步骤中,还可以在根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理的过程中,控制第二特征对象的调节程度。
具体的,图9是本申请实施例提供的一种调节程度的选择示意图,如图9所示,若检测到拖动第三标签“色温”至第二标签“六边形”的位置,确定目标第三标签为“色温”,对应的第一目标特征参数为第一特征对象的色温,进一步的,可以显示与特征参数色温对应的调节程度选择区域,以供用户可以通过调节程度选择区域,控制在利用第一特征对象的特征参数色温对第二特征对象进行风格迁移处理的过程中,第二特征对象的调节程度。
子步骤2072、通过对所述调节程度选择区域的调节操作,获取所述第一目标特征参数对应的第一调节程度值。
在该步骤中,可以通过对第一目标特征参数对应的调节程度选择区域的调节操作,获取用户输入的第一目标特征参数对应的第一调节程度值,从而可以根据第一调节程度值,在利用第一特征对象的特征参数色温对第二特征对象进行风格迁移处理的过程中,控制第二特征对象的调节程度。
子步骤2073、根据所述第一特征对象的第一目标特征参数,以及所述第一目标特征参数对应的第一调节程度值,对所述第二特征对象进行风格迁移处理。
在该步骤中,可以根据第一特征对象的第一目标特征参数,以及所述第一目标特征参数对应的第一调节程度值,对所述第二特征对象进行风格迁移处理,使得第二特征对象具有与第一特征对象相同的第一目标特征参数。
例如,若风格图像中确定的第一特征对象为具有晚霞的天空,内容图像中确定的第二特征对象为蓝色的天空,且确定第一特征对象的第一目标特征参数为色温,对应的第一调节程度值为20%,即通过风格迁移处理,使得内容图像中蓝色天空的色温为风格图像中具有晚霞的天空的色温的20%。
步骤208、在接收到拖动所述风格图像至所述内容图像中的空白位置的操作的情况下,确定所述风格图像包含的至少一个特征参数,并在所述内容图像的中心显示所述风格图像包含的每个特征参数对应的第四标签,所述空白位置为所述内容图像中除所述第二标签所处位置外的区域。
在步骤203,即在风格图像中确定了包含的特征对象,以及每个特征对象对应的第一标签,在内容图像中确定了包含的特征对象,以及每个特征对象对应的第二标签之后,若接收到拖动风格图像至内容图像中除第二标签所处位置外的空白位置的操作,则可以根据整个风格图像,对内容图像的整体进行风格迁移处理。
进一步的,还可以确定风格图像包含的至少一个特征参数,从而根据风格图像包含的特征参数,对内容图像的整体进行风格迁移处理。
具体的,可以在内容图像的中心位置显示所述风格图像包含的每个特征参数对应的第四标签,所述第四标签可以为包含有对应特征参数名称的标签,以供用户选择特定的目标第四标签对应的第二目标特征参数,从而仅将风格图像中第二目标特征参数迁移至内容图像上。
步骤209、在接收到针对目标第四标签的选择操作的情况下,确定与所述目标第四标签对应的第二目标特征参数,并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理。
在该步骤中,用户可以在多个第四标签中,选择需要进行风格迁移处理的特征参数对应的目标第四标签,从而可以根据风格图像的目标第四标签对应的第二目标特征参数,对内容图像进行风格迁移处理。
可选的,步骤209中根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理的过程,具体可以包括:
子步骤2091、显示所述第二目标特征参数对应的调节程度选择区域。
在该步骤中,还可以在根据风格图像的第二目标特征参数对内容图像进行风格迁移处理的过程中,控制内容图像的调节程度。
具体的,可以显示所述第二目标特征参数对应的调节程度选择区域,以供用户可以通过调节程度选择区域,控制在利用风格图像的第二目标特征参数对内容图像进行风格迁移处理的过程中,内容图像的调节程度。
子步骤2092、通过对所述调节程度选择区域的调节操作,获取对所述第二目标特征参数的第二调节程度值。
在该步骤中,可以通过对第二目标特征参数对应的调节程度选择区域的调节操作,获取用户输入的第二目标特征参数对应的第二调节程度值,从而可以根据第二调节程度值,在利用风格图像的第二目标特征参数对内容图像进行风格迁移处理的过程中,控制内容图像的调节程度。
子步骤2093、根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理。
在该步骤中,在该步骤中,可以根据风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理,使得内容图像具有与风格图像相同的第二目标特征参数。
例如,若风格图像为一幅具有晚霞的天空的图片,内容图像为一幅景观图,且确定风格图像的第二目标特征参数为色温,对应的第二调节程度值为20%,即通过风格迁移处理,使得内容图像的色温为风格图像整体色温的20%。
可选的,在子步骤2092之后,还可以包括:
子步骤2094、在接收到拖动所述调节程度选择区域至所述内容图像中的第三特征对象所处位置的操作的情况下,根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像中的第三特征对象进行风格迁移处理。
在该步骤中,若接收到拖动所述调节程度选择区域至所述内容图像中的第三特征对象所处位置的操作,则可以根据整个风格图像,对内容图像中的第三特征对象进行风格迁移处理。
具体的,可以根据风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像的第三特征对象进行风格迁移处理,使得内容图像中的第三特征对象具有与风格图像相同的第二目标特征参数。
例如,若风格图像为一幅具有晚霞的天空的图片,内容图像为一幅包含天空、建筑物和绿植的图片,且确定风格图像的第二目标特征参数为色温,对应的第二调节程度值为20%,内容图像中的第三特征对象为天空,则通过风格迁移处理,使得内容图像中天空的色温为风格图像整体色温的20%。
综上所述,本申请实施例提供的一种图像的处理方法,包括:获取风格图像和内容图像,并确定风格图像和内容图像各自包含的特征对象;在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,确定风格图像中的第一特征对象,及内容图像中的与第一特征对象对应的第二特征对象;基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像,本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
此外,还可以基于第一特征对象特定的特征参数,对第二特征对象进行风格迁移处理,并可以控制特征参数调节的程度,从而进一步减小风格迁移操作的颗粒度减小,提高图像风格迁移的精准性。
需要说明的是,本申请实施例提供的图像的处理方法,执行主体可以为图像的处理装置,或者该图像的处理装置中的用于执行加载图像的处理方法的控制模块。本申请实施例中以图像的处理装置执行加载图像的处理方法为例,说明本申请实施例提供的图像的处理方法。
图10是本申请实施例提供的一种图像的处理装置的框图,如图6所示,该装置300包括:
获取模块301,用于获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
选取模块302,用于在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
第一迁移模块303,用于基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
可选的,所述装置还包括:
第一生成模块,用于生成所述风格图像中每个特征对象对应的第一标签,并显示所述风格图像以及所述第一标签;
第二生成模块,用于生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签;
所述选择操作包括:将所述风格图像中第一特征对象对应的目标第一标签,移动至所述内容图像中第二特征对象对应的目标第二标签的位置的操作。
可选的,所述第一迁移模块303,具体包括:
第一确定子模块,用于确定所述第一特征对象包含的至少一个特征参数;
第一显示子模块,用于在与所述目标第二标签的位置之间的距离小于预设距离的位置,显示所述第一特征对象包含的每个特征参数对应的第三标签;
第二确定子模块,用于在接收到拖动目标第三标签至所述目标第二标签的位置的操作的情况下,确定所述目标第三标签对应的第一目标特征参数,并根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理;
其中,所述特征参数包括:图像风格、曝光度、饱和度和色温中的任意一种或多种。
可选的,所述装置还包括:
显示模块,用于在接收到拖动所述风格图像至所述内容图像中的空白位置的操作的情况下,确定所述风格图像包含的至少一个特征参数,并在所述内容图像的中心显示所述风格图像包含的每个特征参数对应的第四标签,所述空白位置为所述内容图像中除所述第二标签所处位置外的区域;
第二迁移模块,用于在接收到针对目标第四标签的选择操作的情况下,确定与所述目标第四标签对应的第二目标特征参数,并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理。
可选的,所述第二迁移模块,具体包括:
第二显示子模块,用于显示所述第二目标特征参数对应的调节程度选择区域;
接收子模块,用于通过对所述调节程度选择区域的调节操作,获取对所述第二目标特征参数的第二调节程度值;
迁移子模块,用于根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理。
本申请实施例中的图像的处理装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的图像的处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像的处理装置能够实现图1和图7的方法实施例中图像的处理装置实现的各个过程,为避免重复,这里不再赘述。
综上所述,本申请实施例提供的一种图像的处理装置,包括:获取风格图像和内容图像,并确定风格图像和内容图像各自包含的特征对象;在接收到对风格图像和内容图像中包含的特征对象的选择操作的情况下,确定风格图像中的第一特征对象,及内容图像中的与第一特征对象对应的第二特征对象;基于第一特征对象,对第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像,本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
可选的,本申请实施例还提供一种电子设备,包括处理器,存储器,存储在存储器上并可在所述处理器上运行的程序或指令,该程序或指令被处理器执行时实现上述图像的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图11为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、以及处理器410等部件。
本领域技术人员可以理解,电子设备400还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器410逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图11中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器410,用于获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
可选的,处理器410,还用于生成所述风格图像中每个特征对象对应的第一标签,并显示所述风格图像以及所述第一标签;
生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签;
所述选择操作包括:将所述风格图像中第一特征对象对应的目标第一标签,移动至所述内容图像中第二特征对象对应的目标第二标签的位置的操作。
可选的,显示单元406,用于确定所述第一特征对象包含的至少一个特征参数;
在与所述目标第二标签的位置之间的距离小于预设距离的位置,显示所述第一特征对象包含的每个特征参数对应的第三标签;
处理器410,还用于在接收到拖动目标第三标签至所述目标第二标签的位置的操作的情况下,确定所述目标第三标签对应的第一目标特征参数,并根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理;
其中,所述特征参数包括:图像风格、曝光度、饱和度和色温中的任意一种或多种。
可选的,显示单元406,还用于在接收到拖动所述风格图像至所述内容图像中的空白位置的操作的情况下,确定所述风格图像包含的至少一个特征参数,并在所述内容图像的中心显示所述风格图像包含的每个特征参数对应的第四标签,所述空白位置为所述内容图像中除所述第二标签所处位置外的区域;
处理器410,还用于在接收到针对目标第四标签的选择操作的情况下,确定与所述目标第四标签对应的第二目标特征参数,并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理。
可选的,显示单元406,还用于显示所述第二目标特征参数对应的调节程度选择区域;
通过对所述调节程度选择区域的调节操作,获取对所述第二目标特征参数的第二调节程度值;
处理器410,还用于根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理。
本申请中,首先确定风格图像和内容图像各自包含的特征对象,从而可以基于风格图像中的单个第一特征对象,对内容图像中的单个第二特征对象进行风格迁移处理,从而实现基于图像中的特征对象进行风格迁移,使得风格迁移操作的颗粒度减小,从而提高了图像风格迁移的精准性,确保图像风格迁移的适配性高,提高用户体验。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述图像的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述图像的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (10)
1.一种图像的处理方法,其特征在于,所述方法包括:
获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
2.根据权利要求1所述的方法,其特征在于,在所述获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象的步骤之后,所述方法还包括:
生成所述风格图像中每个特征对象对应的第一标签,并显示所述风格图像以及所述第一标签;
生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签;
所述选择操作包括:将所述风格图像中第一特征对象对应的目标第一标签,移动至所述内容图像中第二特征对象对应的目标第二标签的位置的操作。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一特征对象,对所述第二特征对象进行风格迁移处理的步骤,具体包括:
确定所述第一特征对象包含的至少一个特征参数;
在与所述目标第二标签的位置之间的距离小于预设距离的位置,显示所述第一特征对象包含的每个特征参数对应的第三标签;
在接收到拖动目标第三标签至所述目标第二标签的位置的操作的情况下,确定所述目标第三标签对应的第一目标特征参数,并根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理;
其中,所述特征参数包括:图像风格、曝光度、饱和度和色温中的任意一种或多种。
4.根据权利要求2所述的方法,其特征在于,在所述生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签的步骤之后,所述方法还包括:
在接收到拖动所述风格图像至所述内容图像中的空白位置的操作的情况下,确定所述风格图像包含的至少一个特征参数,并在所述内容图像的中心显示所述风格图像包含的每个特征参数对应的第四标签,所述空白位置为所述内容图像中除所述第二标签所处位置外的区域;
在接收到针对目标第四标签的选择操作的情况下,确定与所述目标第四标签对应的第二目标特征参数,并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理。
5.根据权利要求4所述的方法,其特征在于,所述并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理的步骤,具体包括:
显示所述第二目标特征参数对应的调节程度选择区域;
通过对所述调节程度选择区域的调节操作,获取对所述第二目标特征参数的第二调节程度值;
根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理。
6.一种图像的处理装置,其特征在于,所述装置包括:
获取模块,用于获取风格图像和内容图像,并确定所述风格图像和所述内容图像各自包含的特征对象;
选取模块,用于在接收到对所述风格图像和所述内容图像中包含的特征对象的选择操作的情况下,确定所述风格图像中的第一特征对象,及所述内容图像中的与所述第一特征对象对应的第二特征对象;
第一迁移模块,用于基于所述第一特征对象,对所述第二特征对象进行风格迁移处理,得到包含风格迁移后的第二特征对象的目标内容图像。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第一生成模块,用于生成所述风格图像中每个特征对象对应的第一标签,并显示所述风格图像以及所述第一标签;
第二生成模块,用于生成所述内容图像中每个特征对象对应的第二标签,并显示所述内容图像以及所述第二标签;
所述选择操作包括:将所述风格图像中第一特征对象对应的目标第一标签,移动至所述内容图像中第二特征对象对应的目标第二标签的位置的操作。
8.根据权利要求7所述的装置,其特征在于,所述第一迁移模块,具体包括:
第一确定子模块,用于确定所述第一特征对象包含的至少一个特征参数;
第一显示子模块,用于在与所述目标第二标签的位置之间的距离小于预设距离的位置,显示所述第一特征对象包含的每个特征参数对应的第三标签;
第二确定子模块,用于在接收到拖动目标第三标签至所述目标第二标签的位置的操作的情况下,确定所述目标第三标签对应的第一目标特征参数,并根据所述第一特征对象的第一目标特征参数对所述第二特征对象进行风格迁移处理;
其中,所述特征参数包括:图像风格、曝光度、饱和度和色温中的任意一种或多种。
9.根据权利要求7所述的装置,其特征在于,所述装置还包括:
显示模块,用于在接收到拖动所述风格图像至所述内容图像中的空白位置的操作的情况下,确定所述风格图像包含的至少一个特征参数,并在所述内容图像的中心显示所述风格图像包含的每个特征参数对应的第四标签,所述空白位置为所述内容图像中除所述第二标签所处位置外的区域;
第二迁移模块,用于在接收到针对目标第四标签的选择操作的情况下,确定与所述目标第四标签对应的第二目标特征参数,并根据所述风格图像的第二目标特征参数对所述内容图像进行风格迁移处理。
10.根据权利要求9所述的装置,其特征在于,所述第二迁移模块,具体包括:
第二显示子模块,用于显示所述第二目标特征参数对应的调节程度选择区域;
接收子模块,用于通过对所述调节程度选择区域的调节操作,获取对所述第二目标特征参数的第二调节程度值;
迁移子模块,用于根据所述风格图像的第二目标特征参数,以及所述第二目标特征参数对应的第二调节程度值,对所述内容图像进行风格迁移处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011332247.5A CN112508774B (zh) | 2020-11-24 | 图像的处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011332247.5A CN112508774B (zh) | 2020-11-24 | 图像的处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112508774A true CN112508774A (zh) | 2021-03-16 |
CN112508774B CN112508774B (zh) | 2024-05-24 |
Family
ID=
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190244329A1 (en) * | 2018-02-02 | 2019-08-08 | Nvidia Corporation | Photorealistic Image Stylization Using a Neural Network Model |
CN110310222A (zh) * | 2019-06-20 | 2019-10-08 | 北京奇艺世纪科技有限公司 | 一种图像风格迁移方法、装置、电子设备及存储介质 |
US20190325628A1 (en) * | 2018-04-23 | 2019-10-24 | Accenture Global Solutions Limited | Ai-driven design platform |
CN110473141A (zh) * | 2019-08-02 | 2019-11-19 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110598781A (zh) * | 2019-09-05 | 2019-12-20 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备及存储介质 |
US20200202502A1 (en) * | 2018-12-19 | 2020-06-25 | General Electric Company | Methods and system for transforming medical images into different styled images with deep neural networks |
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190244329A1 (en) * | 2018-02-02 | 2019-08-08 | Nvidia Corporation | Photorealistic Image Stylization Using a Neural Network Model |
US20190325628A1 (en) * | 2018-04-23 | 2019-10-24 | Accenture Global Solutions Limited | Ai-driven design platform |
US20200202502A1 (en) * | 2018-12-19 | 2020-06-25 | General Electric Company | Methods and system for transforming medical images into different styled images with deep neural networks |
CN110310222A (zh) * | 2019-06-20 | 2019-10-08 | 北京奇艺世纪科技有限公司 | 一种图像风格迁移方法、装置、电子设备及存储介质 |
CN110473141A (zh) * | 2019-08-02 | 2019-11-19 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110598781A (zh) * | 2019-09-05 | 2019-12-20 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111654635A (zh) | 拍摄参数调节方法、装置及电子设备 | |
CN109298912B (zh) | 主题色彩的调节方法、装置、存储介质及电子设备 | |
CN112269522A (zh) | 图像处理方法、装置、电子设备和可读存储介质 | |
CN113905175A (zh) | 视频生成方法、装置、电子设备及可读存储介质 | |
CN112836086A (zh) | 一种视频处理方法、装置和电子设备 | |
CN112532882A (zh) | 图像显示方法和装置 | |
CN113379866A (zh) | 一种壁纸设置方法和装置 | |
CN112288666A (zh) | 图像处理方法和装置 | |
CN112449110B (zh) | 图像处理方法、装置及电子设备 | |
CN112702531B (zh) | 拍摄方法、装置及电子设备 | |
CN111885298B (zh) | 图像处理方法及装置 | |
CN112541955A (zh) | 图像处理方法、装置及设备 | |
CN112698762A (zh) | 图标显示方法、装置及电子设备 | |
CN107608733A (zh) | 图片显示方法、装置和终端设备 | |
CN112508774B (zh) | 图像的处理方法及装置 | |
CN115562539A (zh) | 控件显示方法及装置、电子设备和可读存储介质 | |
CN113794831B (zh) | 视频拍摄方法、装置、电子设备及介质 | |
CN112312021B (zh) | 拍摄参数调整方法及装置 | |
CN112732958B (zh) | 图像显示方法、装置和电子设备 | |
CN113362426B (zh) | 图像编辑方法和图像编辑装置 | |
CN112508774A (zh) | 图像的处理方法及装置 | |
CN114518821A (zh) | 应用图标管理方法、装置和电子设备 | |
CN112162805B (zh) | 截图方法、装置和电子设备 | |
CN113805709A (zh) | 信息输入方法、装置 | |
CN114679546A (zh) | 一种显示方法及其装置、电子设备和可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |