CN110084766A - 一种图像处理方法、装置和电子设备 - Google Patents
一种图像处理方法、装置和电子设备 Download PDFInfo
- Publication number
- CN110084766A CN110084766A CN201910380543.3A CN201910380543A CN110084766A CN 110084766 A CN110084766 A CN 110084766A CN 201910380543 A CN201910380543 A CN 201910380543A CN 110084766 A CN110084766 A CN 110084766A
- Authority
- CN
- China
- Prior art keywords
- image
- area
- target
- target area
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 28
- 238000012545 processing Methods 0.000 claims abstract description 126
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000000605 extraction Methods 0.000 claims description 20
- 238000012549 training Methods 0.000 claims description 18
- 238000004590 computer program Methods 0.000 claims description 9
- 230000000694 effects Effects 0.000 description 21
- 230000011218 segmentation Effects 0.000 description 13
- 238000010586 diagram Methods 0.000 description 10
- 230000001360 synchronised effect Effects 0.000 description 6
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 210000001624 hip Anatomy 0.000 description 5
- 238000007906 compression Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000000295 complement effect Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000001788 irregular Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000005429 filling process Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000009469 supplementation Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/18—Image warping, e.g. rearranging pixels individually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例公开了一种图像处理方法、装置和电子设备。所述方法包括：获得包含有目标对象的第一图像；对所述目标对象进行图像变形处理，生成第二图像；识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
Description
技术领域
本发明涉及图像处理技术，具体涉及一种图像处理方法、装置和电子设备。
背景技术
随着互联网技术的飞速发展，出现了各种图像处理工具，能够对图像中的目标对象(例如人物)进行变形处理，例如对人物进行瘦腿、瘦腰等处理。然而，在对图像中的目标对象进行图像变形处理过程中，会影响到目标对象附近的背景部分，导致目标对象附近的背景部分发生形变，使得图像处理结果不自然。
基于此，如何在对目标对象进行图像变形处理过程中解决背景形变的问题，目前尚无有效解决方案。
发明内容
为解决现有存在的技术问题，本发明实施例提供一种图像处理方法、装置和电子设备。
为达到上述目的，本发明实施例的技术方案是这样实现的：
本发明实施例提供了一种图像处理方法，所述方法包括：
获得包含有目标对象的第一图像；
对所述目标对象进行图像变形处理，生成第二图像；
识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；
基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
上述方案中，所述对所述目标对象进行图像变形处理，生成第二图像，包括：提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中的第二区域；所述第二区域对应于所述第一图像中除所述目标对象以外的背景区域；
对所述第一区域进行图像变形处理，基于图像变形处理后的所述第一区域和所述第二区域生成第二图像。
上述方案中，所述基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像，包括：
将所述第二图像输入生成对抗网络，获得第三图像，以利用所述生成对抗网络基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理。
上述方案中，所述将所述第二图像输入生成对抗网络，获得第三图像，包括：基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
上述方案中，所述生成对抗网络包括生成器和判别器；所述生成对抗网络的训练方法包括：
获得第一样本图像，所述第一样本图像包括待填补区域；
通过生成对抗网络的生成器对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像；
通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果；
在所述判别结果为所述重建样本图像为不真实的情况下，调整所述生成器和所述判别器的参数。
上述方案中，所述通过生成对抗网络对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像，包括：
基于所述生成器对所述第一样本图像进行特征提取，获得样本特征图，将所述样本特征图填充至所述待填补区域，获得重建样本图像。
上述方案中，所述通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果，包括：
获得第二样本图像；其中，所述第一样本图像为所述第二样本图像中去除对应的所述待填补区域的图像获得；
将所述重建样本图像和所述第二样本图像输入所述判别器，获得表征所述重建样本图像是否真实的判别结果。
上述方案中，所述方法还包括：识别所述第一图像或所述第三图像中除所述目标对象以外的其他对象，从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像；所述第四图像中包括对应于所述其他对象的待填补区域的第三目标区域以及所述背景区域中除所述待填补区域以外的其他区域的第四目标区域；
基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像。
上述方案中，所述基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像，包括：识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像；
基于所述第四目标区域以及所述强结构补全图像对所述第三目标区域进行填充处理，获得第五图像。
上述方案中，所述识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像，包括：
识别所述第四目标区域中的多个强结构，确定所述多个强结构中满足预设条件的目标强结构，基于所述目标强结构生成强结构补全图像。
本发明实施例还提供了一种图像处理装置，所述装置包括：获取单元、变形处理单元和填充单元；其中，
所述获取单元，用于获得包含有目标对象的第一图像；
所述变形处理单元，用于对所述目标对象进行图像变形处理，生成第二图像；
所述填充单元，用于识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
上述方案中，所述变形处理单元，用于提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中的第二区域；所述第二区域对应于所述第一图像中除所述目标对象以外的背景区域；对所述第一区域进行图像变形处理；基于图像变形处理后的所述第一区域和所述第二区域生成第二图像。
上述方案中，所述填充单元，用于将所述第二图像输入生成对抗网络，获得第三图像，以利用所述生成对抗网络基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理。
上述方案中，所述填充单元，用于基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
上述方案中，所述装置还包括训练单元，用于训练生成对抗网络；所述生成对抗网络包括生成器和判别器；
所述训练单元，具体用于获得第一样本图像，所述第一样本图像包括待填补区域；通过生成对抗网络的生成器对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像；通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果；响应于所述判别结果为所述重建样本图像为不真实的情况，调整所述生成器和所述判别器的参数。
上述方案中，所述训练单元，用于基于所述生成器对所述第一样本图像进行特征提取，获得样本特征图，将所述样本特征图填充至所述待填补区域，获得重建样本图像。
上述方案中，所述训练单元，用于获得第二样本图像；其中，所述第一样本图像为所述第二样本图像中去除对应的所述待填补区域的图像获得；将所述重建样本图像和所述第二样本图像输入所述判别器，获得表征所述重建样本图像是否真实的判别结果。
上述方案中，所述装置还包括分割单元；其中，
所述分割单元，用于识别所述第一图像或所述第三图像中除所述目标对象以外的其他对象，从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像；所述第四图像中包括对应于所述其他对象的待填补区域的第三目标区域以及所述背景区域中除所述待填补区域以外的其他区域的第四目标区域；
所述填充单元，还用于基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像。
上述方案中，所述装置还包括生成单元，用于识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像；
所述填充单元，还用于基于所述第四目标区域以及所述强结构补全图像对所述第三目标区域进行填充处理，获得第五图像。
上述方案中，所述生成单元，用于识别所述第四目标区域中的多个强结构，确定所述多个强结构中满足预设条件的目标强结构，基于所述目标强结构生成强结构补全图像。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明实施例所述方法的步骤。
本发明实施例还提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现本发明实施例所述方法的步骤。
本发明实施例提供的图像处理方法、装置和电子设备，所述方法包括：获得包含有目标对象的第一图像；对所述目标对象进行图像变形处理，生成第二图像；识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。采用本发明实施例的技术方案，只针对图像中的目标对象的图像变形处理，而目标对象以外的背景区域不进行变形，避免了相关技术中针对目标对象进行变形处理导致的背景部分形变、从而使得图像处理结果不自然的问题；并且，本申请实施例的技术方案对目标对象的图像变形处理带来的空白区域(即第二目标区域)按照背景区域(即第一目标区域)进行填充处理，一方面保证了图像处理结果的完整性，另一方面也使得空白区域的填充效果与背景区域相一致，实现了空白区域的填充效果与图像的整体效果的和谐一致，提升了图像处理效果。
附图说明
图1为本发明实施例的图像处理方法的一种流程示意图；
图2为本发明实施例的图像处理方法的另一种流程示意图；
图3为本发明实施例的图像处理方法中的生成对抗网络的结构示意图；
图4为本发明实施例的图像处理方法中的生成对抗网络的训练方法的流程示意图；
图5为本发明实施例的图像处理方法的又一种流程示意图；
图6为本发明实施例的图像处理装置的一种组成结构示意图；
图7为本发明实施例的图像处理装置的另一种组成结构示意图；
图8为本发明实施例的图像处理装置的又一种组成结构示意图；
图9为本发明实施例的电子设备的硬件组成结构示意图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细的说明。
本发明实施例提供了一种图像处理方法。图1为本发明实施例的图像处理方法的一种流程示意图；如图1所示，所述方法包括：
步骤101：获得包含有目标对象的第一图像；
步骤102：对所述目标对象进行图像变形处理，生成第二图像；
步骤103：识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；
步骤104：基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
本实施例的图像处理方法应用于图像处理装置中，图像处理装置可位于手机、平板电脑、笔记本电脑等移动终端中，也可位于台式电脑、一体机电脑等终端中。
本实施例的图像处理方法对第一图像进行图像处理，首先识别出所述第一图像中的目标对象；其中，所述目标对象作为待处理对象，可以是真人，可以理解为图像中的真实人物；在其他实施方式中，目标对象也可以是虚拟人物或者其他事务。
本实施例步骤102中，所述对所述目标对象进行图像变形处理，作为一种实施方式，是对所述目标对象进行压缩处理。以所述目标对象为真实人物为例，对所述目标对象进行图像变形处理例如是对所述目标对象的腰部区域、肩部区域、腿部区域、脚部区域、手臂区域、手部区域、臀部区域、胸部区域中的至少一个区域的压缩处理。
针对目标对象进行压缩处理后，所述目标对象与所述第一图像中除所述目标对象以外的背景区域(记为第一目标区域)之间存在空白区域，该空白区域记为第二目标区域，也即所述第二图像中包括图像变形处理后的目标对象、背景区域以外，还包括目标对象与背景区域之间的空白区域。本实施例的图像处理方法正是对所述空白区域进行填充。
本实施例步骤104中，所述基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，具体是将所述第一目标区域中的图像特征填充至所述第二目标区域中，以使填充后的所述第二目标区域具有所述第一目标区域的图像特征，也即使填充后的所述第二目标区域与周围的背景区域(即第一目标区域)协调一致。
采用本发明实施例的技术方案，只针对图像中的目标对象的图像变形处理，而目标对象以外的背景区域不进行变形，避免了相关技术中针对目标对象进行变形处理导致的背景部分形变、从而使得图像处理结果不自然的问题；并且，本申请实施例的技术方案对目标对象的图像变形处理带来的空白区域(即第二目标区域)按照背景区域(即第一目标区域)进行填充处理，一方面保证了图像处理结果的完整性，另一方面也使得空白区域的填充效果与背景区域相一致，实现了空白区域的填充效果与图像的整体效果的和谐一致，提升了图像处理效果。
本发明实施例还提供了一种图像处理方法。图2为本发明实施例的图像处理方法的另一种流程示意图；如图2所示，所述方法包括：
步骤201：获得包含有目标对象的第一图像；
步骤202：提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中的第二区域；所述第二区域对应于所述第一图像中除所述目标对象以外的背景区域；
步骤203：对所述第一区域进行图像变形处理，基于图像变形处理后的所述第一区域和所述第二区域生成第二图像；
步骤204：将所述第二图像输入生成对抗网络(GAN，Generative AdversarialNetworks)，获得第三图像，以利用所述生成对抗网络基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理。
本实施例步骤201的相关描述可参照前述实施例中步骤101的详细阐述，这里不在赘述。
本实施例步骤202中，确定待进行图像变形处理的目标对象，从所述第一图像中提取出目标对象，获得所述目标对象对应的第一区域以及对应于背景区域的第二区域，也即将所述目标对象从所述第一图像中分割出来，单独对所述目标对象所在的第一区域进行图像变形处理，而对第二区域不进行任何变形处理，也不会受到所述第一区域的图像变形处理的影响而发生形变；相当于对所述第一图像进行了前景背景分离操作。
作为一种实施方式，本实施例可通过分割模型提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中除所述目标对象以外的其他对象的第二区域。其中，所述分割模型具体是基于语义的分割模型，通过将所述第一图像输入至所述分割模型，以及输入目标对象的关键字；通过所述分割模型对所述目标对象的关键字进行语义分析，确定输入的第一图像中待进行分割的目标对象，从而输出仅包括该目标对象的第一区域的图像。
本实施例步骤203中，所述对所述第一区域进行图像变形处理，具体是对所述第一区域进行压缩处理。作为一种实施例，所述对所述第一区域进行压缩处理具体是对所述目标对象的腰部区域、肩部区域、腿部区域、脚部区域、手臂区域、手部区域、臀部区域、胸部区域中的至少一个区域的压缩处理。进一步地，本步骤中，所述基于图像变形处理后的所述第一区域和所述第二区域生成第二图像，包括：将图像变形处理后的所述第一区域重新填充至所述第一图像中，生成第二图像。可以理解，将所述第一区域从第一图像中分割后，将图像变形处理后的第一区域重新填充至第一图像中分割后的空白区域，生成第二图像。
其中，由于针对目标对象对应的第一区域进行了压缩处理，则所述第二图像中所述目标对象与背景区域(记为第一目标区域)之间存在空白区域，该空白区域记为第二目标区域，也即所述第二图像中包括图像变形处理后的目标对象、背景区域以外，还包括目标对象与背景区域之间的空白区域。本实施例的图像处理方法正是对所述空白区域进行填充。
本实施例步骤204中，基于生成对抗网络对所述第二图像中的第二目标区域进行填充操作，具体是基于生成对抗网络的生成器对所述第二图像中的第一目标区域的图像特征进行学习，以将所述第一目标区域的图像特征填充至所述第二目标区域。
作为一种实施方式，所述将所述第二图像输入生成对抗网络，获得第三图像，包括：基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
本实施例的生成对抗网络具体包括生成器和判别器，在用于图像填充的图像处理过程中，只使用生成对抗网络的生成器，用于对第二目标区域进行填充处理；在网络训练过程中，需要使用生成器和判别器，通过生成器和判别器的互相监督学习，训练获得本申请实施例的生成对抗网络(具体是生成器)。则作为一种实施方式，所述将所述第二图像输入生成对抗网络，获得第三图像，包括：基于生成对抗网络的生成器对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
其中，所述基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，包括：基于所述生成器对所述第二图像进行下采样处理，对下采样处理后的第二图像的第一目标区域进行特征提取；相应的，所述将所述特征图填充至所述第二目标区域中，生成第三图像，包括：基于所述生成器将所述特征图进行上采样处理，将上采样处理后的特征图填充至所述第二目标区域，获得第三图像。这里，对第二图像进行下采样处理的作用在于，一方面可以减少数据处理量，另一方面能够提取深度特征。
图3为本发明实施例的图像处理方法中的生成对抗网络的结构示意图，图3所示的生成对抗网络具体是生成对抗网络中的生成器；具体的，所述生成器采用编码器(Encoder)-残差模块-解码器(Decoder)。其中，编码器包括多个卷积层，用于对输入的第二图像进行下采样以及特征提取处理；解码器具有与编码器对称的结构，用于对输入的图像进行上采样以及图像恢复处理，使输出的图像恢复到与输入的第二图像相同的尺寸。
其中，编码器和解码器包括的卷积层的数量与输入的所述第二图像的尺寸相关联；作为一种示例，所述第二图像的尺寸越大，编码器和解码器包括的卷积层的数量越多。
其中，残差模块中可包括多个相同的残差块(Residual Block)，用于解决网络难以训练的问题。作为一种示例，每个残差块的处理过程相当于在输入和输出之间添加一个“快捷链接”，可以理解，残差块的输入为x，残差块的输出为y，则残差为(x+y)。
基于图3所示的生成器，则将第二图像输入至编码器，基于编码器对所述第二图像进行下采样处理，并对下采样处理后的第二图像中的所述第一目标区域进行特征提取，生成特征图(feature map)，将特征图通过残差模块进行处理后输入至解码器，由解码器将将特征图填充至所述第二目标区域中，并通过上采样处理恢复至原始尺寸，生成第三图像。
在本发明的一种可选实施例中，在执行本实施例步骤204之前，首先对生成对抗网络进行训练。
图4为本发明实施例的图像处理方法中的生成对抗网络的训练方法的流程示意图；如图4所示，所述方法包括：
步骤301：获得第一样本图像，所述第一样本图像包括待填补区域；
步骤302：通过生成对抗网络的生成器对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像；
步骤303：通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果；
步骤304：响应于所述判别结果为所述重建样本图像为不真实的情况，调整所述生成器和所述判别器的参数。
本实施例中，所述第一样本图像为完整的图像中去除某块区域的图像；该去除的某块区域为待填补区域。作为一种示例，若第二样本图像为完整的图像，则将所述第二样本图像中去除某个区域获得所述第一样本图像。
其中，若生成对抗网络主要用于对图像中的人形区域进行填充，则所述待填补区域为人形区域相关的区域，可以理解，所述第二样本图像为包含目标对象为真人的图像，则将第二样本图像中的人物对应的区域去除，得到所述第一样本图像，所述第一样本图像中的待填充区域对应于人形区域。在其他实施方式中，所述第一样本图像中的待填充区域也可以是其他形状，例如方形、矩形、圆形或者不规则形状等等。
本实施例步骤302中，通过生成对抗网络的生成器对第一样本图像中的待填补区域进行填充处理。作为一种示例，所述通过生成对抗网络对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像，包括：基于所述生成器对所述第一样本图像进行特征提取，获得样本特征图，将所述样本特征图填充至所述待填补区域，获得重建样本图像。
在本发明的一种可选实施例中，所述基于所述生成对抗网络对所述第一样本图像进行特征提取，包括：基于所述生成器对所述第一样本图像进行下采样处理，对下采样处理后的第一样本图像进行特征提取；相应的，所述将所述样本特征图填充至所述待填补区域，获得重建样本图像，包括：基于所述生成器将所述样本特征图进行上采样处理，将上采样处理后的样本特征图填充至所述待填补区域，获得重建样本图像。
其中，上述通过生成器对第一样本图像的待填补区域进行填补处理的具体过程可参照前述实施例中针对第二图像的第二目标区域的填补处理过程，这里不再赘述。
这里，由于初始的生成对抗网络的生成器的初始参数并不完善，因此通过生成器获得的重建样本图像中针对待填补区域的填补效果并不佳，有可能出现例如第一样本图像中的背景部分具有直线、而待填补区域本应该具有与背景部分的直线相连接的直线，但最终获得的重建样本图像中的待填补区域的并不具有直线或者直线的位置不匹配导致待填补区域与背景区域不协调的情况发生。基于此，本实施例在生成对抗网络的训练过程中，需要借助判别器的判别结果，对生成对抗网络中的生成器和判别器的参数进行调整更新，从而使得生成器生成的重建样本图像越来越趋近于真实图像(即第二样本图像)。
基于此，本实施例步骤303中，所述通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果，包括：获得第二样本图像；其中，所述第一样本图像为所述第二样本图像中去除对应的所述待填补区域的图像获得；将所述重建样本图像和所述第二样本图像输入所述判别器，获得表征所述重建样本图像是否真实的判别结果。
本实施例中，将作为真实图像的第二样本图像和所述重建样本图像作为判别器的输入数据，通过判别器识别所述重建样本图像与所述第二样本图像之间的差异程度，确定所述重建样本图像是否为真实的判别结果。作为一种实施方式，所述判别器识别所述重建样本图像与所述第二样本图像之间的差异程度，根据该差异程度得到一个得分；其中，得分的分值越高，表明所述重建样本图像约趋近于第二样本图像，得分的分值越低，表明所述重建样本图像越背离所述第二样本图像。实际应用中，可通过预先设置阈值的方式，若得分高于阈值，则获得重建样本图像为真实的判别结果；若得分小于等于阈值，则获得重建样本图像为不真实的判别结果。
本实施例步骤304中，在所述判别结果为所述重建样本图像为不真实的情况，调整所述生成器和所述判别器的参数，以通过调整后的参数，重新将第一样本图像输入至生成器进行待填补区域的填充处理，获得重建样本图像，并重新基于判别器对重建样本图像进行判别，也即重新执行步骤302至步骤304的过程，直至获得判别结果为重建样本图像为真实。
采用本发明实施例的技术方案，只针对图像中的目标对象的图像变形处理，而目标对象以外的背景区域不进行变形，避免了相关技术中针对目标对象进行变形处理导致的背景部分形变、从而使得图像处理结果不自然的问题；并且，本申请实施例的技术方案对目标对象的图像变形处理带来的空白区域(即第二目标区域)按照背景区域(即第一目标区域)进行填充处理，一方面保证了图像处理结果的完整性，另一方面也使得空白区域的填充效果与背景区域相一致，实现了空白区域的填充效果与图像的整体效果的和谐一致，提升了图像处理效果。
本发明实施例还提供了一种图像处理方法。图5为本发明实施例的图像处理方法的又一种流程示意图；在前述实施例的基础上，如图5所示，所述方法还可以包括：
步骤401：识别所述第一图像或所述第三图像中除所述目标对象以外的其他对象，从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像；所述第四图像中包括对应于所述其他对象的待填补区域的第三目标区域以及所述背景区域中除所述待填补区域以外的其他区域的第四目标区域；
步骤402：基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像。
本实施例针对第一图像或第三图像中的除目标对象以外的其他对象进行分割。其中，所述第一图像中的目标对象指的是图像变形处理前的目标对象；所述第三图像中的目标对象指的是图像变形处理后的目标对象。而其他对象指的是第一图像或第三图像中除目标对象以外的对象。例如，第一图像中的前景有一个人物，后景有三个人物，则所述目标对象可以是前景中的人物，而对该人物进行图像变形处理后得到所述第三图像；所述其他对象可以是所述第一图像或所述第三图像的后景中的三个人物中的至少一个人物。
本实施例步骤401中，所述从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像，包括：通过分割模型从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像。其中，所述分割模型具体可以是基于语义的分割模型。作为一种示例，将所述第一图像或所述第三图像输入至分割模型中，获得仅包括所述其他对象的图像，相应的获得不包括所述其他对象的图像(即第四图像)。
本实施例中，所述第四图像中包括对应于待填补区域的第三目标区域以及背景区域中除所述待填补区域以外的其他区域的第四目标区域(即不包括所述目标对象和所述其他对象的区域)。作为一种示例，所述第三目标区域可以对应于其他对象的区域，以其他对象为人为例，则所述第三目标区域可以对应于人形区域，或者，所述第三目标区域也可以是能够包含人形区域的矩形区域、或不规则区域等等。
本实施例步骤402中，通过对所述第四目标区域进行特征提取生成特征图，将所述特征图填充至所述第三目标区域中，从而实现填充后的所述第三目标区域具有背景区域的特征，使填充效果与背景区域和谐一体。
在本发明的一种可选实施例中，针对步骤402，所述基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像，包括：识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像；基于所述第四目标区域以及所述强结构补全图像对所述第三目标区域进行填充处理，获得第五图像。
本实施例中，所述强结构也可称为强线条，为图像的背景区域中视觉影响较强烈的结构、线条或纹理，可以理解为，背景区域中的强结构容易被看到，或者容易吸引到关注点等，作为一种示例，所述强结构可以为具有背景区域中线条特征明显的结构，例如柱子、门等等。由于本实施例是对第三目标区域进行填充操作，填充的内容一方面与第四目标区域(背景区域)的特征相关，更与第四目标区域中的强结构相关。可以理解，针对第三目标区域的填充，需要对第三目标区域的边缘的强结构进行连接，也即针对强结构的补全；如果强结构补全的效果不佳，则第三目标区域的填充效果会很差，基于此，本实施例通过识别第四目标区域中的强结构，基于识别出的强结构生成强结构补全图。
本实施例中，所述识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像，包括：识别所述第四目标区域中的多个强结构，确定所述多个强结构中满足预设条件的目标强结构，基于所述目标强结构生成强结构补全图像。
作为一种实施方式，所述确定所述多个强结构中满足预设条件的目标强结构，包括：确定所述多个强结构中至少部分强结构的长度以及所述至少部分强结构与所述第一目标区域的距离，获得所述长度超过第一预设阈值以及所述距离小于第二预设阈值的多个目标强结构。可以理解，所述至少部分强结构为所述多个强结构中的至少一个强结构，或者所述多个强结构中的每个强结构。这样，通过初步筛选，去除长度较短的并且距离第一目标区域较远的强结构，保留长度较长并且距离第一目标区域较近的强结构作为目标强结构，以减少计算量。
在本发明的一种可选实施例中，所述基于所述目标强结构生成强结构补全图像，包括：确定多个目标强结构中至少部分目标强结构与特定方向的夹角，基于所述夹角对所述至少部分目标强结构进行分组，获得强结构分组，所述强结构分组中包括至少一个目标强结构；基于所述强结构分组中的目标强结构的夹角和对应的位置生成强结构补全图像。
本实施例中，对于筛选后的长度较长且距离第一目标区域较近的多个目标强结构，按照目标强结构与特定方向的夹角进行分组；作为一种示例，所述特定方向可以是水平方向或竖直方向，则确定每个目标强结构与水平方向或竖直方向的夹角，按照夹角的大小进行分组。
作为一种实施方式，所述基于所述夹角对所述至少部分目标强结构进行分组，获得强结构分组，包括：基于夹角大小对所述至少部分目标强结构进行排序，基于排序结果确定相邻两个目标强结构对应夹角之间的角度差，基于所述角度差对所述至少部分目标强结构进行分组获得强结构分组；其中，所述强结构分组中的相邻两个目标强结构对应夹角之间的角度差小于所述强结构分组对应的角度差阈值。
本实施例中，基于生成对抗网络对所述第四图像的第三目标区域进行填充操作，具体是基于生成对抗网络的生成器对所述第四目标区域和强结构补全图像的图像特征进行学习，以将所述第四目标区域的图像特征结合强结构补全图像的特征填充至所述第三目标区域。
作为一种实施方式，所述基于所述第四目标区域以及所述强结构补全图像对所述第三目标区域进行填充处理，获得第五图像，包括：将所述第四图像和所述强结构补全图像输入生成对抗网络，获得第五图像。具体的，基于生成对抗网络对所述第四图像中的所述第四目标区域以及所述强结构补全图像进行特征提取，获得特征图，将所述特征图填充至所述第三目标区域中，生成第五图像。
本实施例中的生成对抗网络的结合与前述实施例中的生成对抗网络的结构可相同，训练过程也基本类似。区别在于，本实施例中增加了强结构补全图像，强结构补全图像使没有颜色的，也即强结构补全图像通过一个通道的数据表示。在将第四图像和强结构补全图像输入至编码器之前，将所述第四图像的三个通道的数据和强结构补全图像的一个通道的数据拼接形成四个通道的数据，将该四个通道的数据输入至编码器。
本实施例的技术方案能够实现图像中的其他对象的分隔以及分割后的待填充区域的填充(基于背景区域的特征对待填充区域的补充)，一方面保证了图像处理结果的完整性，另一方面也使得待填补区域的填充效果与背景区域相一致，尤其与背景区域的强结构保持一致，实现了待填补区域的填充效果与图像的整体效果的和谐一致，提升了图像处理效果。
本发明实施例还提供了一种图像处理装置。图6为本发明实施例的图像处理装置的一种组成结构示意图；如图6所示，所述装置包括：获取单元41、变形处理单元42和填充单元43；其中，
所述获取单元41，用于获得包含有目标对象的第一图像；
所述变形处理单元42，用于对所述目标对象进行图像变形处理，生成第二图像；
所述填充单元43，用于识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
在本发明的一种可选实施例中，所述变形处理单元42，用于提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中的第二区域；所述第二区域对应于所述第一图像中除所述目标对象以外的背景区域；对所述第一区域进行图像变形处理；基于图像变形处理后的所述第一区域和所述第二区域生成第二图像。
在本发明的一种可选实施例中，所述填充单元43，用于将所述第二图像输入生成对抗网络，获得第三图像，以利用所述生成对抗网络基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理。
在本发明的一种可选实施例中，所述填充单元43，用于基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
在本发明的一种可选实施例中，如图7所示，所述装置还包括训练单元44，用于训练生成对抗网络；所述生成对抗网络包括生成器和判别器；
所述训练单元44，具体用于获得第一样本图像，所述第一样本图像包括待填补区域；通过所述训练单元44训练的所述生成对抗网络的生成器对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像；通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果；响应于所述判别结果为所述重建样本图像为不真实的情况，调整所述生成器和所述判别器的参数。
在本发明的一种可选实施例中，所述训练单元44，用于基于所述生成器对所述第一样本图像进行特征提取，获得样本特征图，将所述样本特征图填充至所述待填补区域，获得重建样本图像。
在本发明的一种可选实施例中，所述训练单元44，用于获得第二样本图像；其中，所述第一样本图像为所述第二样本图像中去除对应的所述待填补区域的图像获得；将所述重建样本图像和所述第二样本图像输入所述判别器，获得表征所述重建样本图像是否真实的判别结果。
在本发明的一种可选实施例中，如图8所示，所述装置还包括分割单元45；其中，
所述分割单元45，用于识别所述第一图像或所述第三图像中除所述目标对象以外的其他对象，从所述第一图像或所述第三图像中分割所述其他对象，获得第四图像；所述第四图像中包括对应于所述其他对象的待填补区域的第三目标区域以及所述背景区域中除所述待填补区域以外的其他区域的第四目标区域；
所述填充单元43，还用于基于所述第四目标区域对所述第三目标区域进行填充处理，获得第五图像。
作为一种实施方式，如图8所示，所述装置还包括生成单元46，用于识别所述第四目标区域中的强结构，基于所述强结构生成强结构补全图像；
所述填充单元43，用于基于所述第四目标区域以及所述强结构补全图像对所述第三目标区域进行填充处理，获得第五图像。
作为一种实施方式，所述生成单元46，用于识别所述第四目标区域中的多个强结构，确定所述多个强结构中满足预设条件的目标强结构，基于所述目标强结构生成强结构补全图像。
本发明实施例中，所述图像处理装置中的获取单元41、变形处理单元42、填充单元43、训练单元44、分割单元45和生成单元46，在实际应用中均可由中央处理器(CPU，CentralProcessing Unit)、数字信号处理器(DSP，Digital Signal Processor)、微控制单元(MCU，Microcontroller Unit)或可编程门阵列(FPGA，Field－Programmable Gate Array)实现。
需要说明的是：上述实施例提供的图像处理装置在进行图像处理时，仅以上述各程序模块的划分进行举例说明，实际应用中，可以根据需要而将上述处理分配由不同的程序模块完成，即将装置的内部结构划分成不同的程序模块，以完成以上描述的全部或者部分处理。另外，上述实施例提供的图像处理装置与图像处理方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本发明实施例还提供了一种电子设备。图9为本发明实施例的电子设备的硬件组成结构示意图，如图9所示，所述电子设备包括存储器52、处理器51及存储在存储器52上并可在处理器51上运行的计算机程序，所述处理器51执行所述程序时实现本发明实施例所述图像处理方法的步骤。
可以理解，电子设备中的各个组件通过总线系统53耦合在一起。可理解，总线系统53用于实现这些组件之间的连接通信。总线系统53除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图9中将各种总线都标为总线系统53。
可以理解，存储器52可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(ROM，Read Only Memory)、可编程只读存储器(PROM，Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM，Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM，Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM，ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM，Compact Disc Read-Only Memory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM，Random AccessMemory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(SRAM，Static Random Access Memory)、同步静态随机存取存储器(SSRAM，Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM，Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM，SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM，Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM，SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM，Direct Rambus Random Access Memory)。本发明实施例描述的存储器52旨在包括但不限于这些和任意其它适合类型的存储器。
上述本发明实施例揭示的方法可以应用于处理器51中，或者由处理器51实现。处理器51可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器51中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器51可以是通用处理器、DSP，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器51可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤，可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器52，处理器51读取存储器52中的信息，结合其硬件完成前述方法的步骤。
本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明实施例所述图像处理方法的步骤。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。
上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外，在本发明各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。
本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
或者，本发明上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
本申请所提供的几个方法实施例中所揭露的方法，在不冲突的情况下可以任意组合，得到新的方法实施例。
本申请所提供的几个产品实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的产品实施例。
本申请所提供的几个方法或设备实施例中所揭露的特征，在不冲突的情况下可以任意组合，得到新的方法实施例或设备实施例。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。
Claims (10)
1.一种图像处理方法，其特征在于，所述方法包括：
获得包含有目标对象的第一图像；
对所述目标对象进行图像变形处理，生成第二图像；
识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；
基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
2.根据权利要求1所述的方法，其特征在于，所述对所述目标对象进行图像变形处理，生成第二图像，包括：
提取所述第一图像中的目标对象，获得对应于所述目标对象的第一区域以及所述第一图像中的第二区域；所述第二区域对应于所述第一图像中除所述目标对象以外的背景区域；
对所述第一区域进行图像变形处理，基于图像变形处理后的所述第一区域和所述第二区域生成第二图像。
3.根据权利要求1所述的方法，其特征在于，所述基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像，包括：
将所述第二图像输入生成对抗网络，获得第三图像，以利用所述生成对抗网络基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理。
4.根据权利要求3所述的方法，其特征在于，所述将所述第二图像输入生成对抗网络，获得第三图像，包括：
基于生成对抗网络对所述第二图像中的所述第一目标区域进行特征提取，获得特征图，将所述特征图填充至所述第二目标区域中，生成第三图像。
5.根据权利要求3或4所述的方法，其特征在于，所述生成对抗网络包括生成器和判别器；所述生成对抗网络的训练方法包括：
获得第一样本图像，所述第一样本图像包括待填补区域；
通过生成对抗网络的生成器对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像；
通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果；
在所述判别结果为所述重建样本图像为不真实的情况下，调整所述生成器和所述判别器的参数。
6.根据权利要求5所述的方法，其特征在于，所述通过生成对抗网络对所述第一样本图像中的待填补区域进行填充处理，获得重建样本图像，包括：
基于所述生成器对所述第一样本图像进行特征提取，获得样本特征图，将所述样本特征图填充至所述待填补区域，获得重建样本图像。
7.根据权利要求5所述的方法，其特征在于，所述通过所述生成对抗网络的判别器判别所述重建样本图像是否真实，获得判别结果，包括：
获得第二样本图像；其中，所述第一样本图像为所述第二样本图像中去除对应的所述待填补区域的图像获得；
将所述重建样本图像和所述第二样本图像输入所述判别器，获得表征所述重建样本图像是否真实的判别结果。
8.一种图像处理装置，其特征在于，所述装置包括：获取单元、变形处理单元和填充单元；其中，
所述获取单元，用于获得包含有目标对象的第一图像；
所述变形处理单元，用于对所述目标对象进行图像变形处理，生成第二图像；
所述填充单元，用于识别所述第二图像中的第一目标区域和第二目标区域，所述第一目标区域对应于所述第一图像中除所述目标对象以外的背景区域，所述第二目标区域为图像变形处理后的所述目标对象与所述第一目标区域之间的空白区域；基于所述第一目标区域对所述第二图像中的所述第二目标区域进行填充处理，生成第三图像。
9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。
10.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至7任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910380543.3A CN110084766A (zh) | 2019-05-08 | 2019-05-08 | 一种图像处理方法、装置和电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910380543.3A CN110084766A (zh) | 2019-05-08 | 2019-05-08 | 一种图像处理方法、装置和电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110084766A true CN110084766A (zh) | 2019-08-02 |
Family
ID=67419291
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910380543.3A Pending CN110084766A (zh) | 2019-05-08 | 2019-05-08 | 一种图像处理方法、装置和电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110084766A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111428734A (zh) * | 2020-03-17 | 2020-07-17 | 山东大学 | 一种基于残差对抗推理学习的图像特征提取方法、装置和计算机可读存储介质 |
| CN111738961A (zh) * | 2020-06-30 | 2020-10-02 | 北京酷豹科技有限公司 | 一种电子图像的修复方法、装置、设备及可读存储介质 |
| WO2021098338A1 (zh) * | 2019-11-19 | 2021-05-27 | 腾讯科技（深圳）有限公司 | 一种模型训练的方法、媒体信息合成的方法及相关装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005056231A (ja) * | 2003-08-06 | 2005-03-03 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
| CN103578085A (zh) * | 2013-10-18 | 2014-02-12 | 清华大学深圳研究生院 | 基于可变块的图像空洞区域修补方法 |
| CN107707818A (zh) * | 2017-09-27 | 2018-02-16 | 努比亚技术有限公司 | 图像处理方法、装置及计算机可读存储介质 |
| CN109191414A (zh) * | 2018-08-21 | 2019-01-11 | 北京旷视科技有限公司 | 一种图像处理方法、装置、电子设备及存储介质 |
-
2019
- 2019-05-08 CN CN201910380543.3A patent/CN110084766A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005056231A (ja) * | 2003-08-06 | 2005-03-03 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
| CN103578085A (zh) * | 2013-10-18 | 2014-02-12 | 清华大学深圳研究生院 | 基于可变块的图像空洞区域修补方法 |
| CN107707818A (zh) * | 2017-09-27 | 2018-02-16 | 努比亚技术有限公司 | 图像处理方法、装置及计算机可读存储介质 |
| CN109191414A (zh) * | 2018-08-21 | 2019-01-11 | 北京旷视科技有限公司 | 一种图像处理方法、装置、电子设备及存储介质 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2021098338A1 (zh) * | 2019-11-19 | 2021-05-27 | 腾讯科技（深圳）有限公司 | 一种模型训练的方法、媒体信息合成的方法及相关装置 |
| CN111428734A (zh) * | 2020-03-17 | 2020-07-17 | 山东大学 | 一种基于残差对抗推理学习的图像特征提取方法、装置和计算机可读存储介质 |
| CN111428734B (zh) * | 2020-03-17 | 2022-08-09 | 山东大学 | 一种基于残差对抗推理学习的图像特征提取方法、装置和计算机可读存储介质 |
| CN111738961A (zh) * | 2020-06-30 | 2020-10-02 | 北京酷豹科技有限公司 | 一种电子图像的修复方法、装置、设备及可读存储介质 |
| CN111738961B (zh) * | 2020-06-30 | 2023-03-17 | 北京酷豹科技有限公司 | 一种电子图像的修复方法、装置、设备及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| WO2020119527A1 (zh) | 人体动作识别方法、装置、终端设备及存储介质 | |
| CN110136052B (zh) | 一种图像处理方法、装置和电子设备 | |
| CN110084766A (zh) | 一种图像处理方法、装置和电子设备 | |
| CN110619334B (zh) | 基于深度学习的人像分割方法、架构及相关装置 | |
| CN109978077B (zh) | 视觉识别方法、装置和系统及存储介质 | |
| CN115631112B (zh) | 一种基于深度学习的建筑轮廓矫正方法及装置 | |
| CN112949707A (zh) | 一种基于多尺度语义信息监督的跨模态人脸图像生成方法 | |
| JP2023027782A (ja) | 画像遷移方法及び画像遷移モデルの訓練方法、装置、電子機器、記憶媒体及びコンピュータプログラム | |
| CN110766607A (zh) | 一种图像处理方法、装置和计算机存储介质 | |
| CN117557689B (zh) | 图像处理方法、装置、电子设备及存储介质 | |
| CN114926734A (zh) | 基于特征聚合和注意融合的固体废弃物检测装置及方法 | |
| CN111401335B (zh) | 一种关键点检测方法及装置、存储介质 | |
| CN111476741B (zh) | 图像的去噪方法、装置、电子设备和计算机可读介质 | |
| CN116912148A (zh) | 图像增强方法、装置、计算机设备及计算机可读存储介质 | |
| JP7479507B2 (ja) | 画像処理方法及び装置、コンピューター機器、並びにコンピュータープログラム | |
| EP3929866A2 (en) | Inpainting method and apparatus for human image, and electronic device | |
| CN116883770A (zh) | 深度估计模型的训练方法、装置、电子设备及存储介质 | |
| CN112200774A (zh) | 图像识别设备 | |
| CN116309274B (zh) | 图像中小目标检测方法、装置、计算机设备及存储介质 | |
| CN114119564B (zh) | 肋骨ct图像的处理方法及系统 | |
| CN116645524B (zh) | 边缘检测方法及图像分割方法 | |
| CN117994173B (zh) | 修复网络训练方法、图像处理方法、装置及电子设备 | |
| CN112669212B (zh) | 人脸图像超分辨率重建方法、装置、计算机设备及介质 | |
| CN113128253B (zh) | 一种三维人脸模型的重建方法及装置 | |
| CN118118737A (zh) | 视频生成方法、装置、电子设备、存储介质以及程序产品 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190802 |
|
| RJ01 | Rejection of invention patent application after publication |