CN112861661B - 图像处理方法及装置、电子设备及计算机可读存储介质 - Google Patents

图像处理方法及装置、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN112861661B
CN112861661B CN202110090411.4A CN202110090411A CN112861661B CN 112861661 B CN112861661 B CN 112861661B CN 202110090411 A CN202110090411 A CN 202110090411A CN 112861661 B CN112861661 B CN 112861661B
Authority
CN
China
Prior art keywords
hair
segmented
image
mask
pixel point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110090411.4A
Other languages
English (en)
Other versions
CN112861661A (zh
Inventor
李祯禧
蓝劲鹏
孙文秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen TetrasAI Technology Co Ltd
Original Assignee
Shenzhen TetrasAI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen TetrasAI Technology Co Ltd filed Critical Shenzhen TetrasAI Technology Co Ltd
Priority to CN202110090411.4A priority Critical patent/CN112861661B/zh
Publication of CN112861661A publication Critical patent/CN112861661A/zh
Priority to PCT/CN2021/107017 priority patent/WO2022156167A1/zh
Application granted granted Critical
Publication of CN112861661B publication Critical patent/CN112861661B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Color Image Communication Systems (AREA)

Abstract

本申请公开了一种图像处理方法及装置、电子设备及计算机可读存储介质。该方法包括：获取待处理图像；所述待处理图像包含待分割对象的毛区域；获取所述待分割对象的毛颜色值范围；确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点。

Description

图像处理方法及装置、电子设备及计算机可读存储介质
技术领域
本申请涉及图像处理技术领域，尤其涉及一种图像处理方法及装置、电子设备及计算机可读存储介质。
背景技术
通过对图像进行分割处理，可确定图像中语义信息为待分割对象的像素点，进而将待分割像素点与语义信息不是待分割对象的像素点区分开。但通过目前的分割处理得到的分割准确度低。
发明内容
本申请提供一种图像处理方法及装置、电子设备及计算机可读存储介质。
第一方面，提供了一种图像处理方法，所述方法包括：
获取待处理图像；所述待处理图像包含待分割对象的毛区域；
获取所述待分割对象的毛颜色值范围；
确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点。
在该方面中，由于毛颜色值范围可视为待分割对象的毛像素点的颜色值的参考范围，图像处理装置依据毛颜色值范围判断毛区域内的像素点是否为毛像素点，可确定毛区域内的背景像素点，从而提高待处理图像中待分割对象的分割准确度。
结合本申请任一实施方式，所述获取所述待分割对象的毛颜色值范围，包括：
对所述待处理图像进行毛分割处理，得到第一毛掩码；
缩小所述第一毛掩码中的毛区域，得到第二毛掩码；
依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围。
在该种实施方式中，图像处理装置通过缩小第一毛掩码，得到包含高置信度毛像素点的第二毛掩码。这样，图像处理装置依据第二毛掩码所对应的像素点的颜色值，得到毛颜色值范围，可提高毛颜色值范围的准确度。
结合本申请任一实施方式，所述待分割对象包括待分割人物，所述毛包括头发，在所述缩小所述第一毛掩码中的毛区域，得到第二毛掩码之前，所述方法还包括：
对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置；
依据所述人脸区域的位置，从所述待处理图像中确定所述待分割人物的头发区域；
所述缩小所述第一毛掩码中的毛区域，得到第二毛掩码，包括：
缩小所述第一毛掩码中的头发区域，得到头发掩码；
依据所述头发掩码，确定所述待分割人物的头发区域中的头发像素点，得到所述第二毛掩码。
在该种实施方式中，由于头发掩码所对应的像素点均为高置信度头发像素点，图像处理装置依据头发掩码，确定待分割人物的头发区域中的头发像素点，可确定待分割人物的头发区域中的高置信度头发像素点，进而得到第二毛掩码。
结合本申请任一实施方式，所述对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置，包括：
对所述待处理图像进行人脸检测处理，得到至少一个人脸框；
选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框；
将所述待分割人物的人脸框的位置和所述待分割人物的人脸框的尺寸，作为所述待分割人物的人脸区域的位置。
结合本申请任一实施方式，所述选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框，包括：
选取所述至少一个人脸框中面积最大的人脸框，作为所述待分割人物的人脸框。
结合本申请任一实施方式，在所述确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点之前，所述方法还包括：
对所述待处理图像进行人像分割处理，得到第一人像掩码；
依据所述第一人像掩码，确定所述待分割人物的头发区域中的人像像素点，得到第二人像掩码；
所述确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点，包括：
确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，得到至少一个第一像素点；
依据所述第二人像掩码，确定所述至少一个第一像素点中的人像像素点，得到至少一个第二像素点；
去除所述至少一个第一像素点中的所述至少一个第二像素点，得到所述背景像素点。
在该种实施方式中，图像处理装置通过去除至少一个第一像素点中的至少一个第二像素点，可将至少一个第一像素点中的人像像素点去除得到背景像素点，从而提高背景像素点的准确度。
结合本申请任一实施方式，所述依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围，包括：
获取毛颜色值区间长度；
统计所述第二毛掩码所对应的像素点的颜色直方图；
依据所述颜色直方图，得到所对应的像素点的数量最多、且长度为所述毛颜色值区间长度的毛颜色值区间，作为所述毛颜色值范围。
结合本申请任一实施方式，所述待处理图像还包括非待分割对象区域，所述非待分割对象区域为所述待处理图像中除所述待分割对象所覆盖的像素点区域之外的像素点区域；所述方法还包括：
改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割对象的留色图像；在所述留色图像中，所述非待分割对象区域的颜色和所述背景像素点的颜色相同。
在该种实施方式中，非待分割对象区域和待分割对象所覆盖的像素点区域通过对待处理图像进行分割处理得到。
在待分割对象的边缘存在毛，且边缘毛存在镂空区域的情况下，分割处理难以将镂空区域中的非毛像素点区域从镂空区域中准确分割出来，进而将非毛像素点区域误识别为前景像素点。因此，在待处理图像中，待分割对象覆盖的像素点区域包括镂空区域中的非毛像素点，非待分割对象区域不包含镂空区域中的非毛像素点。
图像处理装置通过改变背景像素点的颜色和非待分割对象区域的颜色，可提升留色效果，得到待分割对象的留色图像。
结合本申请任一实施方式，所述方法还包括：
对所述留色图像中的所述背景像素点和所述留色图像中的所述非待分割对象区域进行虚化处理，得到所述待分割对象的留色虚化图像。
结合本申请任一实施方式，所述改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割对象的留色图像，包括：
对所述背景像素点和所述非待分割对象区域进行灰度化处理，得到所述留色图像。
结合本申请任一实施方式，所述方法还包括：
对所述第二毛掩码与所述第二人像掩码进行融合处理，得到优化后的前景掩码；
根据所述优化后的前景掩码，确定所述待处理图像中的优化背景区域；
改变所述优化背景区域的颜色，得到留色图像。
第二方面，本申请还提供了一种图像处理装置，所述装置包括：
第一获取单元，用于获取待处理图像；所述待处理图像包含待分割对象的毛区域；
第二获取单元，用于获取所述待分割对象的毛颜色值范围；
处理单元，用于确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点。
结合本申请任一实施方式，所述第二获取单元，具体用于：
对所述待处理图像进行毛分割处理，得到第一毛掩码；
缩小所述第一毛掩码中的毛区域，得到第二毛掩码；
依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围。
结合本申请任一实施方式，所述待分割对象包括待分割人物，所述毛包括头发；
所述处理单元，还用于在所述缩小所述第一毛掩码中的毛区域，得到第二毛掩码之前，对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置；
以及用于依据所述人脸区域的位置，从所述待处理图像中确定所述待分割人物的头发区域；
所述第二获取单元，具体用于：
缩小所述第一毛掩码中的头发区域，得到头发掩码；
依据所述头发掩码，确定所述待分割人物的头发区域中的头发像素点，得到所述第二毛掩码。
结合本申请任一实施方式，所述处理单元，具体用于：
对所述待处理图像进行人脸检测处理，得到至少一个人脸框；
选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框；
将所述待分割人物的人脸框的位置和所述待分割人物的人脸框的尺寸，作为所述待分割人物的人脸区域的位置。
结合本申请任一实施方式，所述处理单元，具体用于：
选取所述至少一个人脸框中面积最大的人脸框，作为所述待分割人物的人脸框。
结合本申请任一实施方式，所述处理单元，还用于在所述确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点之前，对所述待处理图像进行人像分割处理，得到第一人像掩码；
以及依据所述第一人像掩码，确定所述待分割人物的头发区域中的人像像素点，得到第二人像掩码；
以及确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，得到至少一个第一像素点；
以及依据所述第二人像掩码，确定所述至少一个第一像素点中的人像像素点，得到至少一个第二像素点；
以及去除所述至少一个第一像素点中的所述至少一个第二像素点，得到所述背景像素点。
结合本申请任一实施方式，所述第二获取单元，具体用于：
获取毛颜色值区间长度；
统计所述第二毛掩码所对应的像素点的颜色直方图；
依据所述颜色直方图，得到所对应的像素点的数量最多、且长度为所述毛颜色值区间长度的毛颜色值区间，作为所述毛颜色值范围。
结合本申请任一实施方式，所述待处理图像还包括非待分割对象区域，所述非待分割对象区域为所述待处理图像中除所述待分割对象所覆盖的像素点区域之外的像素点区域；
所述处理单元，还用于改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割对象的留色图像；在所述留色图像中，所述非待分割对象区域的颜色和所述背景像素点的颜色相同。
结合本申请任一实施方式，所述处理单元，还用于：
对所述留色图像中的所述背景像素点和所述留色图像中的所述非待分割对象区域进行虚化处理，得到所述待分割对象的留色虚化图像。
结合本申请任一实施方式，所述处理单元，具体用于：
对所述背景像素点和所述非待分割对象区域进行灰度化处理，得到所述留色图像。
结合本申请任一实施方式，所述处理单元，还用于：
对所述第二毛掩码与所述第二人像掩码进行融合处理，得到优化后的前景掩码；
根据所述优化后的前景掩码，确定所述待处理图像中的优化背景区域；
改变所述优化背景区域的颜色，得到留色图像。
第三方面，提供了一种电子设备，其特征在于，包括：处理器和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如上述第一方面及其任意一种可能实现的方式的方法。
第四方面，提供了另一种电子设备，包括：处理器、发送装置、输入装置、输出装置和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如上述第一方面及其任意一种可能实现的方式的方法。
第五方面，提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，在所述程序指令被处理器执行的情况下，使所述处理器执行如上述第一方面及其任意一种可能实现的方式的方法。
第六方面，提供了一种计算机程序产品，所述计算机程序产品包括计算机程序或指令，在所述计算机程序或指令在计算机上运行的情况下，使得所述计算机执行上述第一方面及其任一种可能的实现方式的方法。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本申请。
附图说明
为了更清楚地说明本申请实施例或背景技术中的技术方案，下面将对本申请实施例或背景技术中所需要使用的附图进行说明。
此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本申请的实施例，并与说明书一起用于说明本申请的技术方案。
图1为本申请实施例提供的一种镂空区域示意图；
图2为本申请实施例提供的一种图像处理方法的流程示意图；
图3为本申请实施例提供的一种第二毛掩码示意图；
图4为本申请实施例提供的一种第二人像掩码示意图；
图5为本申请实施例提供的一种优化后的前景掩码示意图；
图6为本申请实施例提供的一种待处理图像示意图；
图7为本申请实施例提供的一种中间人像分割掩码示意图；
图8为本申请实施例提供的一种优化后的前景掩码示意图；
图9为本申请实施例提供的一种图像处理装置的结构示意图；
图10为本申请实施例提供的一种图像处理装置的硬件结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
应当理解，在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上，“至少两个(项)”是指两个或三个及三个以上，“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”可表示前后关联对象是一种“或”的关系，是指这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”，其中a，b，c可以是单个，也可以是多个。字符“/”还可表示数学运算中的除号，例如，a/b＝a除以b；6/3＝2。“以下至少一项(个)”或其类似表达。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
分割处理指，确定图像中语义信息为待分割对象的像素点。例如，在待分割对象为人像的情况下，通过对图像进行人像分割处理，可确定图像中语义信息为人像的像素点，进而将人像像素点与非人像像素点区分开。
为表述方便，下文将语义信息为待分割对象的像素点称为前景像素点，并将语义信息不是待分割对象的像素点称为背景像素点。
但在待分割对象的边缘存在毛，且边缘毛存在镂空区域的情况下，目前的待分割对象分割处理方法难以将镂空区域中的非毛像素点区域从镂空区域中准确分割出来，进而将非毛像素点区域误识别为前景像素点，从而导致对待分割对象的分割准确度低。上述非毛像素点指语义信息不是毛的像素点。
例如，假设待分割对象为人像。在图1中，人像的头发区域中存在镂空区域，在镂空区域中，头发与头发之间存在非头发像素点。本申请实施中，非头发像素点至语义信息不是头发的像素点。由于非头发像素点为背景像素点，而人像分割处理方法会将非头发像素点区域误识别为头发像素点，对图1的人像进行分割处理得到的分割准确度低。
基于此，本申请实施例提供了一种技术方案，以减少镂空区域中被误识别为前景像素点的背景像素点的数量，从而提高分割准确度。
在进行接下来的描述之前，首先对下完将要出现的掩码进行定义。本申请实施例中，掩码指图像特定语义掩码。图像特定语义掩码中的元素与图像中的像素点一一对应。掩码中元素的取值包括第一值和第二值，其中，第一值与第二值不同。第一值表示与该元素对应的像素点的语义是特定语义，第二值表示与该元素对应的像素点的语义不是特定语义。可选的，第一值为1，第二值为0。
例如，图像1包括像素点A、像素点B、像素点C和像素点D。图像1的头发掩码包括元素a、元素b、元素c和元素d，即特定语义为头发。其中，元素a与像素点A对应，元素b与像素点B对应，元素c与像素点C对应，元素d与像素点D对应。假设第一值为1，第二值为0。若元素a的取值1，元素b的取值为0，元素c的取值为1，元素d的取值为0。那么，像素点A的语义为头发，即像素点A为头发像素点；像素点B的语义不是头发，即像素点B不是头发像素点；像素点C的语义为头发，即像素点C为头发像素点；像素点D的语义不是头发，即像素点D不是头发像素点。
为表述方便，本申请实施例中，[α，β]表示大于或等于α且小于或等于β的取值区间。本申请实施例的执行主体为图像处理装置，其中，图像处理装置可以是任意一种可执行本申请方法实施例所公开的技术方案的电子设备。可选的，图像处理装置可以是以下中的一种：手机、计算机、服务器、平板电脑。
应理解，本申请方法实施例还可以通过处理器执行计算机程序代码的方式实现。下面结合本申请实施例中的附图对本申请实施例进行描述。请参阅图2，图2是本申请实施例提供的一种图像处理方法的流程示意图。
201、获取待处理图像，其中，上述待处理图像包含待分割对象的毛区域。
本申请实施例中，待处理图像包含待分割对象，其中，待分割对象可以是任意物体。例如，待分割对象可以是人物；又例如，待分割对象可以是毛衣；再例如，待分割对象可以是毛衣和人物。
本申请实施例中，待分割对象包含毛区域，其中，毛区域包括以下至少一种：体毛区域、绒毛区域、羽毛区域。例如，假设待分割对象为人物，毛区域可以是体毛区域；又例如，假设待分割对象为蒲公英，毛区域可以是绒毛区域；再例如，假设待分割对象为鸟，毛区域可以是羽毛区域；再例如，假设待分割对象为人物和鸟，毛区域可以包括体毛区域和羽毛区域；再例如，假设待分割对象为人物、鸟和蒲公英，毛区域可以包括体毛区域、羽毛区域和绒毛区域。
在一种获取待处理图像的实现方式中，图像处理装置接收用户通过输入组件输入的待处理图像获取待处理图像。上述输入组件包括：键盘、鼠标、触控屏、触控板和音频输入器等。
在另一种获取待处理图像的实现方式中，图像处理装置接收终端发送的待处理图像获取待处理图像。可选的，终端可以是以下任意一种：手机、计算机、平板电脑、服务器、可穿戴设备。
在又一种获取待处理图像的实现方式中，图像处理装置装载有摄像组件，其中，摄像组件包括摄像头。图像处理装置通过使用摄像组件采集包含待分割对象的图像作为待处理图像。
在又一种获取待处理图像的实现方式中，图像处理装置从获取到的视频流中选取一帧图像作为待处理图像。
202、获取上述待分割对象的毛颜色值范围。
本申请实施例中，颜色值可以是以下中的一种：像素值、灰度值。待分割对象的毛颜色值指待处理图像中待分割对象的毛像素点的颜色值。例如，假设待分割对象为张三，待分割对象的毛为张三的头发。那么待分割对象的毛颜色值可以是待处理图像中张三的头发像素点的像素值；又例如，假设待分割对象为鸟，待分割对象的毛为鸟的羽毛。那么待分割对象的毛颜色值可以是待处理图像中鸟的羽毛像素点的灰度值。
本申请实施例中，毛颜色值范围用于判断像素点是否为毛像素点，具体的，颜色值处于毛颜色值范围内的像素点可视为毛像素点。即毛颜色值范围可视为待分割对象的毛像素点的颜色值的参考范围。例如，假设毛颜色值范围为头发像素点的灰度值范围，且头发像素点的灰度值范围为[50，70]。那么灰度值处于[50，70]内的像素点为头发像素点，灰度值处于[50，70]外不是头发像素点。
应理解，毛颜色值范围可以是一个具体数值。例如，毛颜色值范围为[60，60]，此时，毛颜色值为60。那么颜色值不等于60的像素点均不是毛像素点，颜色值为60的像素点为毛像素点。
在一种获取待分割对象的毛颜色值范围的实现方式中，图像处理装置通过对待处理图像进行毛分割处理，得到待分割对象的毛像素点。统计待分割对象的毛像素点的颜色值的直方图，并将直方图中像素点数量最多的毛颜色值范围作为待分割对象的毛颜色值范围。
在另一种获取待分割对象的毛颜色值范围的实现方式中，图像处理装置将用户通过输入组件输入的毛颜色值范围作为待分割对象的毛颜色值范围。
在又一种获取待分割对象的毛颜色值范围的实现方式中，图像处理装置将终端发送的毛颜色值范围作为待分割对象的毛颜色值范围。
203、确定上述毛区域内颜色值处于上述毛颜色值范围之外的像素点，得到背景像素点。
图像处理装置依据毛颜色值范围和毛区域内像素点的颜色值，可判断毛区域内的像素点是否为毛像素点。具体的，确定颜色值处于毛颜色值范围内的像素点为毛像素点；确定颜色值处于毛颜色值范围外的像素点不是毛像素点(即为背景像素点)。
可选的，本实施例中的毛区域通过对图像进行毛分割处理得到。例如，假设毛区域为头发区域。通过对待处理图像进行头发分割处理，可确定头发区域。
应理解，对待处理图像进行的毛分割处理的执行主体可以是图像处理装置，也可以不是图像处理装置。例如，终端通过对图像a进行毛分割处理，确定图像a中的毛像素点，并在图像a中将毛像素点标记出来，得到待处理图像。终端将待处理图像发送至图像处理装置，这样，在图像处理装置获取到的待处理图像中，已将毛区域标记出来。
本实施例中，由于毛颜色值范围可视为待分割对象的毛像素点的颜色值的参考范围，图像处理装置依据毛颜色值范围判断毛区域内的像素点是否为毛像素点，可确定毛区域内的背景像素点，从而提高待处理图像中待分割对象的分割准确度。
作为一种可选的实施方式，图像处理装置在执行步骤202的过程中执行以下步骤：
1、对上述待处理图像进行毛分割处理，得到第一毛掩码。
本申请实施例中，毛分割处理用于从图像中确定语义信息为毛的像素点。例如，假设毛分割处理为头发分割处理。通过对图像进行头发分割处理，可确定图像中语义信息为头发的像素点；又例如，假设毛分割处理为羽毛分割处理。通过对图像进行羽毛分割处理，可确定图像中语义信息为羽毛的像素点。
本申请实施例中，毛掩码中的元素与待处理图像中的像素点一一对应，且毛掩码中取值为第一值的元素所对应的像素点是毛像素点，毛掩码中取值为第二值的元素所对应的像素点不是毛像素点。
2、缩小上述第一毛掩码中的毛区域，得到第二毛掩码。
本步骤中，第一毛掩码中的毛区域指，取值为第一值的元素所构成的区域。缩小第一毛掩码中的毛区域指，将毛区域的边界向毛区域的中心缩小。
由于通过毛分割处理得到的毛区域的边缘易出现分割误差(即将非毛像素点识别为毛像素点)，毛区域的边缘处的像素点为毛像素点的置信度较低(下文将毛区域边缘处的像素点称为低置信度毛像素点)，毛区域内除低置信度毛像素点之外的像素点为毛像素点的置信度较高(下文将称为低高置信度毛像素点)，图像处理装置通过缩小第一毛掩码中的毛区域得到第二毛掩码，可将第一毛掩码中非毛像素点的取值更新为第二值，从而将低置信度毛像素点从第一毛掩码所对应的像素点中剔除，并在第二毛掩码所对应的像素点中保留高置信度毛像素点。
可选的，图像处理装置可将毛区域的边界向中心缩小，得到第二毛掩码。假设第一掩码包括毛区域a，图像处理装置通过将毛区域a向中心缩小n个像素点，得到第二毛掩码中的毛区域b。若毛区域b的面积/毛区域a的面积＝m，可选的，m的取值范围为[10/11，12/13]。
3、依据上述第二毛掩码所对应的像素点的颜色值，得到上述毛颜色值范围。
在一种可能实现的方式中，图像处理装置计算第二毛掩码所对应的像素点的颜色值的均值，作为毛颜色值范围。
在又一种可能实现的方式中，图像处理装置计算第二毛掩码所对应的像素点的颜色值的中值，作为毛颜色值范围。
在另一种可能实现的方式中，图像处理装置统计第二毛掩码所对应的像素点的颜色值的直方图，并将直方图中像素点数量最多的毛颜色值范围作为待分割对象的毛颜色值范围。
由于第二毛掩码所对应的像素点均为高置信度毛像素点，图像处理装置依据第二毛掩码所对应的像素点的颜色值，得到毛颜色值范围，可提高毛颜色值范围的准确度。
作为一种可选的实施方式，待分割对象包括待分割人物，待分割对象的毛包括待分割人物的头发。图像处理装置在执行步骤2之前，还执行以下步骤：
4、对上述待处理图像进行人脸检测处理，得到上述待分割人物的人脸区域的位置。
本申请实施例中，图像处理装置可通过对待处理图像进行人脸检测处理，确定待处理图像是否包含人脸区域。进一步，在确定待处理图像包含人脸区域的情况下，还可确定人脸区域的位置。
本申请实施例中，人脸区域的位置指人脸区域在待处理图像的像素坐标系下的坐标。可选的，图像处理装置通过对待处理图像进行人脸检测处理，可得到包含人脸区域的人脸框，并将人脸框在待处理图像中的位置作为人脸区域的位置。
可选的，人脸框在待处理图像中的位置包括：人脸框中任意一个顶点在待处理图像的像素坐标系下的坐标，以及人脸框的尺寸。例如，人脸框的位置包括：人脸框的左上顶点在待处理图像的像素坐标系下的坐标、人脸框的长以及人脸框的宽。
在一种对待处理图像进行人脸检测处理的实现方式中，图像处理装置通过对待处理图像进行人脸特征提取处理，得到待处理图像的人脸特征数据。进而可依据该人脸特征数据确定待处理图像中是否包含人脸区域，并在待处理图像中包含人脸区域的情况下，确定人脸区域的位置。
在另一种对待处理图像进行人脸检测处理的实现方式中，图像处理装置使用人脸检测神经网络对待处理图像进行处理，以确定待处理图像中是否包含人脸区域，并在待处理图像中包含人脸区域的情况下，确定人脸区域的位置。该人脸检测神经网络以带有标注信息的训练图像为训练数据训练得到，其中，标注信息包括训练图像中是否包含人脸，以及与人脸区域对应的人脸框的位置。
在待处理图像包含1个人脸区域时，图像处理装置将该人脸区域作为待分割人物的人脸区域；在待处理图像包含的人脸区域的数量超过1时，图像处理装置可从所有人脸区域中选取一个作为待分割人物的人脸区域。
5、依据上述人脸区域的位置，从上述待处理图像中确定上述待分割人物的头发区域。
本申请实施例中，待分割人物的头发区域指待分割人物的头顶处的头发区域。由于头发区域与人脸区域之间的相对位置关系为经验关系，人脸区域的尺寸与头发区域的尺寸之间的关系也为经验关系，图像处理装置依据人脸区域的位置，可确定待分割人物的头发区域。
在一种可能实现的方式中，人脸区域的位置包括：人脸框的左上顶点在像素坐标系下的坐标、人脸框的长和人脸框的宽。图像处理装置依据人脸框的左上顶点的坐标、人脸框和头发框的位置关系，得到头发框左上顶点在像素坐标系下的坐标，其中，头发框包含待分割人物的头发区域。图像处理装置依据人脸框的长得到头发框的长，并依据人脸框的宽得到头发框的宽。这样，图像处理装置可确定头发框的位置以及头发框的尺寸，进而从待处理图像中确定头发区域。
可选的，假设人脸框左上顶点的横坐标为xf，人脸框左上顶点的纵坐标为yf，人脸框的长为hf，人脸框的宽为wf，头发框左上顶点的横坐标为xh，头发框左上顶点的纵坐标为yh，头发框的长为hh，头发框的宽为wh。
xf，yf，hf，wf，xh，yh，hh，wh满足下式：
Figure BDA0002912270710000121
其中，α、β、δ和ε均为正数。可选的，α、β、δ和ε的取值范围均为[1.1，1.2]。
在得到待分割人物的头发区域后，图像处理装置在执行步骤2的过程中执行以下步骤：
6、缩小上述第一毛掩码中的头发区域，得到头发掩码。
本步骤的实现方式与步骤2的实现方式相同。而与步骤2不同的是，本步骤中第一毛掩码即为待处理图像的头发掩码，第一毛掩码中的毛区域为头发区域。
7、依据上述头发掩码，确定上述待分割人物的头发区域中的头发像素点，得到上述第二毛掩码。
由于待处理图像中可能除待分割人物的头发区域之外的头发像素点，第一毛掩码所对应的像素点中也可能会包含除待分割人物的头发区域之外的头发像素点。显然，依据除待分割人物的头发区域之外的头发像素点的颜色值，确定待分割人物的头发毛颜色值范围，会降低待分割人物的头发毛颜色值范围的准确度。
由于头发掩码所对应的像素点均为高置信度头发像素点，图像处理装置依据头发掩码，确定待分割人物的头发区域中的头发像素点，可确定待分割人物的头发区域中的高置信度头发像素点，进而得到第二毛掩码。即第二毛掩码所对应的像素点为待分割人物的头发区域中的高置信度头发像素点。
例如，头发掩码包括元素a、元素b和元素c，其中，元素a的取值为第一值，元素b的取值为第二值，元素的取值为第三值。待分割人物的头发区域包括像素点A、像素点B、像素点C和像素点D。若元素a所对应的像素点为像素点A，元素b所对应的像素点为像素点B，元素c所对应的像素点为像素点C，那么，像素点A和像素点C为待分割人物的头发区域中的高置信度头发像素点。
这样，图像处理装置再依据第二毛掩码所对应的像素点的颜色值得到待分割对象的毛颜色值范围，可提高毛颜值范围的准确度。
作为一种可选的实施方式，图像处理装置在执行步骤4的过程中执行以下步骤：
8、对上述待处理图像进行人脸检测处理，得到至少一个人脸框。
本步骤中的人脸检测处理的实现方式可参见步骤4中人脸检测处理的实现方式，此处将不再赘述。上述至少一个人脸框中每个人脸框均包含一个人脸区域，且任意两个人脸框所包含的人脸区域不同。
9、选取上述至少一个人脸框中尺度最大的人脸框，作为上述待分割人物的人脸框。
本申请实施例中，近处的物体在图像中尺度大，远处的物体在图像中尺度小。本申请实施例中的“远”指图像中物体对应的真实物体与采集上述图像的成像设备之间的距离远，“近”指图像中物体对应的真实物体与采集上述图像的成像设备之间的距离近。尺度最大的人脸框包含的人脸为距离采集待处理图像的成像设备最近的人脸。
在某些场景下拍摄人物照时，由于拍摄场景中有很多除拍摄对象之外的人，拍摄得到的图像中会包含除拍摄对象的人脸之外的人脸。因此，图像处理装置从至少一个人脸框中选取尺度最大的人脸框，作为待分割人物的人脸框，可实现将上述拍摄对象作为待分割人物。
例如，小明在景点旅游时，觉得景点的风景很好，故请小红为他拍一张照片。但是景点的游客众多，在小红给小明拍的照片中，小明后面有很多游客。图像处理装置在对小明的照片进行处理时，确定照片中尺度最大的人脸框所包含的人脸为小明的人脸，并对小明的人脸区域进行分割处理。
在一种可能实现的方式中，图像处理装置分别确定每个人脸框的测度，并将测度最大的人脸框作为尺度最大的人脸框。其中，人脸框的测度指人脸框的最大边长。例如，人脸框a的长为10，人脸框a的宽6，那么人脸框a的测度为10；又例如，人脸框b的长为7，人脸框b的宽9，那么人脸框b的测度为9。
10、将上述待分割人物的人脸框的位置和上述待分割人物的人脸框的尺寸，作为上述待分割人物的人脸区域的位置。
作为一种可选的实施方式，图像处理装置在执行步骤9的过程中执行以下步骤：
11、选取上述至少一个人脸框中面积最大的人脸框，作为上述待分割人物的人脸框。
作为一种可选的实施方式，图像处理装置在执行步骤203之前，还执行以下步骤：
12、对上述待处理图像进行人像分割处理，得到第一人像掩码。
本步骤中的人像分割处理用于确定待处理图像中语义信息为人像的像素点(下文将称为人像像素点)。图像处理装置通过执行步骤12，确定待处理图像的中人像像素点，得到第一人像掩码。即第一人像掩码中取值为第一值的元素所对应的像素点为人像像素点。
13、依据上述第一人像掩码，确定上述待分割人物的头发区域中的人像像素点，得到第二人像掩码。
与步骤7中，依据头发掩码，确定待分割人物的头发区域中的高置信度头发像素点的实现方式相同。图像处理装置依据第一人像掩码，确定待分割人物的头发区域中的人像像素点，得到第二人像掩码。即第二人像掩码中取值为第一值的元素所对应的像素点为，待分割人物的头发区域中的人像像素点。
在得到第二人像掩码后，图像处理装置在执行步骤203的过程中执行以下步骤：
14、确定上述毛区域内颜色值处于上述毛颜色值范围之外的像素点，得到至少一个第一像素点。
本步骤的实现方式与步骤203的实现方式相同，此处将不再赘述。应理解，在本步骤中，得到的不是背景像素点，而是至少一个第一像素点。
15、依据上述第二人像掩码，确定上述至少一个第一像素点中的人像像素点，得到至少一个第二像素点。
图像处理装置从至少一个第一像素点中，确定与第二人像掩码中取值为第一值的元素对应的像素点，作为第二像素点。例如，第二人像掩码包括元素a和元素b，其中，元素a的取值为第一值，元素b的取值和元素c的取值均为第二值。至少一个第一像素点包括像素点A和像素点B。若像素点A为元素a所对应的像素点，像素点B为元素b所对应的像素点，那么至少一个第二像素点包括像素点A。
由于图像处理装置在执行步骤14时，可能将待分割人物的头发像素点误识别为非头发像素点，从而确定该头发像素点为第一像素点。这样，至少一个第一像素点将包括头发像素点。
因为待分割人物的头发像素点属于待分割人物的人像像素点，图像处理装置通过执行步骤15，可确定至少一个第一像素点中的头发像素点(即第二像素点)。
例如，待分割人物的头发区域(即毛区域)包括像素点a、像素点b和像素点c，其中，像素点a和像素点b均为头发像素点，像素点c为背景像素点。由于像素点b的颜色值处于毛颜色值范围外，图像处理装置确定像素点b为背景像素点，并将像素点b作为第二像素点。此时，至少一个第二像素点包括像素点b和像素点c。
第二人像掩码包括元素A、元素B和元素C，其中，元素A的取值和元素B的取值均为第一值，元素C的取值为第二值，且元素A所对应的像素点为像素点a，元素B所对应的像素点为像素点b，元素C所对应的像素点为像素点c。这样，图像处理装置依据第二人像掩码，可确定像素点b为头发区域的人像像素点(即头发像素点)，从而确定像素点b为第二像素点。
16、去除上述至少一个第一像素点中的上述至少一个第二像素点，得到上述背景像素点。
由于第二像素点为头发像素点，图像处理装置通过执行步骤16，可提高背景像素点的准确度。
作为一种可选的实施方式，图像处理装置在执行步骤3的过程中执行以下步骤：
17、获取毛颜色值区间长度。
本申请实施例中，毛颜色值区间长度指毛颜色值范围所对应的区间的长度。例如，毛颜色值范围为[50，80]，此时，毛颜色值范围的跨度为30。
18、统计上述第二毛掩码所对应的像素点的颜色直方图。
19、依据上述颜色直方图，得到所对应的像素点的数量最多、且长度为上述毛颜色值区间长度的毛颜色值区间，作为上述毛颜色值范围。
作为一种可选的实施方式，上述颜色值包括灰度值，上述颜色值直方图包括灰度直方图。
在图像处理领域，为突出图像中某个对象(下文将称为留色对象)，通常会对该留色对象进行留色处理。具体的，通过改变图像中除留色对象之外的像素点区域(下文将称为非待分割对象区域)的颜色，并保留留色对象所覆盖的像素点区域(下文将称为前景区域)的颜色，以取得突出留色对象的效果。
例如，在留色对象是人像时，可通过对图像进行人像留色处理，保留人像的颜色，并将非人像区域的颜色变为灰色，得到人像留色图像。这样，在人像留色图像中，可突出人像，弱化非待分割对象区域。
在改变非待分割对象区域的颜色之前，需要先对图像进行留色对象分割处理，以从图像中确定前景区域和非待分割对象区域。因此，对留色对象的分割准确度直接影响留色对象的留色效果。图像处理装置基于前文所提供的技术方案，还可对待分割对象进行留色处理，以提升留色效果。
作为一种可选的实施方式，图像处理装置还执行以下步骤：
20、改变上述背景像素点的颜色和非待分割对象区域的颜色，得到上述待分割对象的留色图像，其中，在上述留色图像中，上述非待分割对象区域的颜色和背景像素点的颜色相同。
本步骤中，图像处理装置可将背景像素点的颜色和非待分割对象区域的颜色改变为任意颜色。例如，图像处理装置可将背景像素点的颜色和非待分割对象区域的颜色均改变为黑色；又例如，图像处理装置可将背景像素点的颜色和非待分割对象区域的颜色均改变为白色；再例如，图像处理装置可将背景像素点的颜色和非待分割对象区域的颜色均改变为红色。
可选的，在将背景像素点的颜色和非待分割对象区域的颜色改变为相同的同时，图像处理装置还将保留前景区域的颜色。这样，可得到待分割对象的留色图像。
可选的，在前景区域为人像时，在将背景像素点的颜色和非待分割对象区域的颜色改变为相同的同时，图像处理装置还可对前景区域进行美颜处理。
作为一种可选的实施方式，图像处理装置在执行步骤20后还执行以下步骤：
21、对上述留色图像中的上述背景像素点和上述留色图像中的上述非待分割对象区域进行虚化处理，得到上述待分割对象的留色虚化图像。
图像处理装置通过对留色图像中的背景像素点和留色图像中的非待分割对象区域进行虚化处理，可进一步突出留色图像中的待分割对象，得到待分割对象的留色虚化图像。
作为一种可选的实施方式，图像处理装置在执行步骤20的过程中执行以下步骤：
22、对上述背景像素点和上述非待分割对象区域进行灰度化处理，得到上述留色图像。
作为一种可选的实施方式，在图像处理装置执行步骤13得到第二毛掩码的情况下，图像处理装置还执行以下步骤：
23、对上述第二毛掩码与上述第二人像掩码进行融合处理，得到优化后的前景掩码。
本步骤中，图像处理装置通过对第二毛掩码与第二人像掩码进行融合处理，确定第二毛掩码与第二人像掩码中取值为第一值的元素的并集，得到优化后的前景掩码。
例如，图3所示的为第二毛掩码，图4所示为第二人像掩码。图像处理装置取第二毛掩码和第二人像掩码的并集，得到图5所示的优化后的前景掩码。
24、根据上述优化后的前景掩码，确定上述待处理图像中的优化背景区域。
本步骤中，优化背景区域包括优化后的前景掩码中取值为第二值的元素所对应的像素点，即为优化后的前景掩码所对应的像素点之外的像素点。例如，在图5所示的优化后的前景掩码中，第一值为1，第二值为0。优化背景区域包括取值为0的元素所对应的像素点。
25、改变上述优化背景区域的颜色，得到留色图像。
若将通过对待处理图像进行人像分割处理，得到的待分割人物的人像掩码称为中间人像分割掩码。基于本申请实施例提供的技术方案对中间人像分割掩码进行处理，得到优化后的前景掩码，可修正中间人像分割掩码中被误识别为前景像素点的背景像素点。
例如，在图6所示的待处理图像中，像素点A、像素点B、像素点C、像素点D、像素点E、像素点H、像素点J、像素点K均为背景像素点，像素点F、像素点G、像素点I、像素点L、像素点M、像素点N、像素点O、像素点P均为人像像素点，其中，像素点J和像素点K即为镂空区域内的背景像素点。通过对该待处理图像进行分割处理，得到图7所示的中间人像分割掩码，其中，取值为1的元素所对应的像素点为人像像素点，取值为0的元素所对应的像素点为背景像素点。显然，在图7所示的中间人像分割掩码中，像素点J和像素点K被误判为人像像素点。基于本申请实施例提供的技术方案，得到图8所示的优化后的前景掩码，在该优化后的前景掩码中，取值为1的元素所对应的像素点为人像像素点，取值为0的元素所对应的像素点为背景像素点。显然，在该优化后的前景掩码中，像素点J和像素点K被修正为背景像素点。
因此，图像处理装置通过改变优化背景区域的颜色得到留色图像，可提升留色效果。
可选的，在图像处理装置执行步骤13得到第二毛掩码的情况下，图像处理装置可在执行步骤22的过程中执行以下步骤：
26、对上述第二毛掩码与上述第二人像掩码进行融合处理，得到优化后的前景掩码。
本步骤的实现方式可参见步骤23，此处将不再赘述。
27、根据上述优化后的前景掩码，确定上述待处理图像中的优化背景区域。
本步骤的实现方式可参见步骤23，此处将不再赘述。
28、对上述优化背景区域进行灰度化处理，得到上述留色图像。
图像处理装置通过执行步骤26～步骤28得到留色图像，可减少数据处理量，提升处理速度。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
上述详细阐述了本申请实施例的方法，下面提供了本申请实施例的装置。
请参阅图9，图9为本申请实施例提供的一种图像处理装置的结构示意图，该图像处理装置1包括：第一获取单元11、第二获取单元12、处理单元13，其中：
第一获取单元11，用于获取待处理图像；所述待处理图像包含待分割对象的毛区域；
第二获取单元12，用于获取所述待分割对象的毛颜色值范围；
处理单元13，用于确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点。
结合本申请任一实施方式，所述第二获取单元12，具体用于：
对所述待处理图像进行毛分割处理，得到第一毛掩码；
缩小所述第一毛掩码中的毛区域，得到第二毛掩码；
依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围。
结合本申请任一实施方式，所述待分割对象包括待分割人物，所述毛包括头发；
所述处理单元13，还用于在所述缩小所述第一毛掩码中的毛区域，得到第二毛掩码之前，对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置；
以及用于依据所述人脸区域的位置，从所述待处理图像中确定所述待分割人物的头发区域；
所述第二获取单元12，具体用于：
缩小所述第一毛掩码中的头发区域，得到头发掩码；
依据所述头发掩码，确定所述待分割人物的头发区域中的头发像素点，得到所述第二毛掩码。
结合本申请任一实施方式，所述处理单元13，具体用于：
对所述待处理图像进行人脸检测处理，得到至少一个人脸框；
选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框；
将所述待分割人物的人脸框的位置和所述待分割人物的人脸框的尺寸，作为所述待分割人物的人脸区域的位置。
结合本申请任一实施方式，所述处理单元13，具体用于：
选取所述至少一个人脸框中面积最大的人脸框，作为所述待分割人物的人脸框。
结合本申请任一实施方式，所述处理单元13，还用于，在所述确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，作为背景像素点之前，对所述待处理图像进行人像分割处理，得到第一人像掩码；
以及依据所述第一人像掩码，确定所述待分割人物的头发区域中的人像像素点，得到第二人像掩码；
以及确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，得到至少一个第一像素点；
以及依据所述第二人像掩码，确定所述至少一个第一像素点中的人像像素点，得到至少一个第二像素点；
以及去除所述至少一个第一像素点中的所述至少一个第二像素点，得到所述背景像素点。
结合本申请任一实施方式，所述第二获取单元12，具体用于：
获取毛颜色值区间长度；
统计所述第二毛掩码所对应的像素点的颜色直方图；
依据所述颜色直方图，得到所对应的像素点的数量最多、且长度为所述毛颜色值区间长度的毛颜色值区间，作为所述毛颜色值范围。
结合本申请任一实施方式，所述待处理图像还包括非待分割对象区域，所述非待分割对象区域为所述待处理图像中除所述待分割对象所覆盖的像素点区域之外的像素点区域；
所述处理单元13，还用于改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割对象的留色图像；在所述留色图像中，所述非待分割对象区域的颜色和所述背景像素点的颜色相同。
结合本申请任一实施方式，所述处理单元13，还用于：
对所述留色图像中的所述背景像素点和所述留色图像中的所述非待分割对象区域进行虚化处理，得到所述待分割对象的留色虚化图像。
结合本申请任一实施方式，所述处理单元13，具体用于：
对所述背景像素点和所述非待分割对象区域进行灰度化处理，得到所述留色图像。
结合本申请任一实施方式，所述处理单元13，还用于：
对所述第二毛掩码与所述第二人像掩码进行融合处理，得到优化后的前景掩码；
根据所述优化后的前景掩码，确定所述待处理图像中的优化背景区域；
改变所述优化背景区域的颜色，得到留色图像。
本实施例中，第一获取单元11和第二获取单元12可以是相同的数据接口，第一获取单元11和第二获取单元12也可以是不同的数据接口，处理单元13可以是处理器。
在一些实施例中，本申请实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法，其具体实现可以参照上文方法实施例的描述，为了简洁，这里不再赘述。
图10为本申请实施例提供的一种图像处理装置的硬件结构示意图。该图像处理装置2包括处理器21，存储器22，输入装置23，输出装置24。该处理器21、存储器22、输入装置23和输出装置24通过连接器相耦合，该连接器包括各类接口、传输线或总线等等，本申请实施例对此不作限定。应当理解，本申请的各个实施例中，耦合是指通过特定方式的相互联系，包括直接相连或者通过其他设备间接相连，例如可以通过各类接口、传输线、总线等相连。
处理器21可以是一个或多个图形处理器(graphics processing unit，GPU)，在处理器21是一个GPU的情况下，该GPU可以是单核GPU，也可以是多核GPU。可选的，处理器21可以是多个GPU构成的处理器组，多个处理器之间通过一个或多个总线彼此耦合。可选的，该处理器还可以为其他类型的处理器等等，本申请实施例不作限定。
存储器22可用于存储计算机程序指令，以及用于执行本申请方案的程序代码在内的各类计算机程序代码。可选地，存储器包括但不限于是随机存储记忆体(random accessmemory，RAM)、只读存储器(read-only memory，ROM)、可擦除可编程只读存储器(erasableprogrammable read only memory，EPROM)、或便携式只读存储器(compact disc read-only memory，CD-ROM)，该存储器用于相关指令及数据。
输入装置23用于输入数据和/或信号，以及输出装置24用于输出数据和/或信号。输入装置23和输出装置24可以是独立的器件，也可以是一个整体的器件。
可理解，本申请实施例中，存储器22不仅可用于存储相关指令，还可用于存储相关数据，如该存储器22可用于存储通过输入装置23获取的待处理图像，又或者该存储器22还可用于存储通过处理器21得到的背景像素点等等，本申请实施例对于该存储器中具体所存储的数据不作限定。
可以理解的是，图10仅仅示出了一种图像处理装置的简化设计。在实际应用中，图像处理装置还可以分别包含必要的其他元件，包含但不限于任意数量的输入/输出装置、处理器、存储器等，而所有可以实现本申请实施例的图像处理装置都在本申请的保护范围之内。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。所属领域的技术人员还可以清楚地了解到，本申请各个实施例描述各有侧重，为描述的方便和简洁，相同或类似的部分在不同实施例中可能没有赘述，因此，在某一实施例未描述或未详细描述的部分可以参见其他实施例的记载。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriberline，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，数字通用光盘(digital versatiledisc，DVD))、或者半导体介质(例如固态硬盘(solid state disk，SSD))等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质包括：只读存储器(read-only memory，ROM)或随机存取存储器(random access memory，RAM)、磁碟或者光盘等各种可存储程序代码的介质。

Claims (13)

1.一种图像处理方法，其特征在于，所述方法包括：
获取待处理图像；所述待处理图像包含待分割人物的毛区域；
对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置；
依据所述人脸区域的位置，从所述待处理图像中确定所述待分割人物的头发区域；
对所述待处理图像进行人像分割处理，得到第一人像掩码；
依据所述第一人像掩码，确定所述待分割人物的头发区域中的人像像素点，得到第二人像掩码；
获取所述待分割人物的毛颜色值范围；
确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，得到至少一个第一像素点；
依据所述第二人像掩码，确定所述至少一个第一像素点中的人像像素点，得到至少一个第二像素点；
去除所述至少一个第一像素点中的所述至少一个第二像素点，得到背景像素点。
2.根据权利要求1所述的方法，其特征在于，所述获取所述待分割人物的毛颜色值范围，包括：
对所述待处理图像进行毛分割处理，得到第一毛掩码；
缩小所述第一毛掩码中的毛区域，得到第二毛掩码；
依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围。
3.根据权利要求2所述的方法，其特征在于，所述缩小所述第一毛掩码中的毛区域，得到第二毛掩码，包括：
缩小所述第一毛掩码中的头发区域，得到头发掩码；
依据所述头发掩码，确定所述待分割人物的头发区域中的头发像素点，得到所述第二毛掩码。
4.根据权利要求3所述的方法，其特征在于，所述对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置，包括：
对所述待处理图像进行人脸检测处理，得到至少一个人脸框；
选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框；
将所述待分割人物的人脸框的位置和所述待分割人物的人脸框的尺寸，作为所述待分割人物的人脸区域的位置。
5.根据权利要求4所述的方法，其特征在于，所述选取所述至少一个人脸框中尺度最大的人脸框，作为所述待分割人物的人脸框，包括：
选取所述至少一个人脸框中面积最大的人脸框，作为所述待分割人物的人脸框。
6.根据权利要求2至5中任意一项所述的方法，其特征在于，所述依据所述第二毛掩码所对应的像素点的颜色值，得到所述毛颜色值范围，包括：
获取毛颜色值区间长度；
统计所述第二毛掩码所对应的像素点的颜色直方图；
依据所述颜色直方图，得到所对应的像素点的数量最多、且长度为所述毛颜色值区间长度的毛颜色值区间，作为所述毛颜色值范围。
7.根据权利要求1至5中任意一项所述的方法，其特征在于，所述待处理图像还包括非待分割对象区域，所述非待分割对象区域为所述待处理图像中除所述待分割人物所覆盖的像素点区域之外的像素点区域；所述方法还包括：
改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割人物的留色图像；在所述留色图像中，所述非待分割对象区域的颜色和所述背景像素点的颜色相同。
8.根据权利要求7所述的方法，其特征在于，所述方法还包括：
对所述留色图像中的所述背景像素点和所述留色图像中的所述非待分割对象区域进行虚化处理，得到所述待分割人物的留色虚化图像。
9.根据权利要求7所述的方法，其特征在于，所述改变所述背景像素点的颜色和非待分割对象区域的颜色，得到所述待分割人物的留色图像，包括：
对所述背景像素点和所述非待分割对象区域进行灰度化处理，得到所述留色图像。
10.根据权利要求2所述的方法，其特征在于，所述方法还包括：
对所述第二毛掩码与所述第二人像掩码进行融合处理，得到优化后的前景掩码；
根据所述优化后的前景掩码，确定所述待处理图像中的优化背景区域；
改变所述优化背景区域的颜色，得到留色图像。
11.一种图像处理装置，其特征在于，所述装置包括：
第一获取单元，用于获取待处理图像；所述待处理图像包含待分割人物的毛区域；
处理单元，用于对所述待处理图像进行人脸检测处理，得到所述待分割人物的人脸区域的位置；
所述处理单元，还用于依据所述人脸区域的位置，从所述待处理图像中确定所述待分割人物的头发区域；
所述处理单元，还用于对所述待处理图像进行人像分割处理，得到第一人像掩码；
所述处理单元，还用于依据所述第一人像掩码，确定所述待分割人物的头发区域中的人像像素点，得到第二人像掩码；
第二获取单元，用于获取所述待分割人物的毛颜色值范围；
所述处理单元，还用于确定所述毛区域内颜色值处于所述毛颜色值范围之外的像素点，得到至少一个第一像素点；
所述处理单元，还用于依据所述第二人像掩码，确定所述至少一个第一像素点中的人像像素点，得到至少一个第二像素点；
所述处理单元，还用于去除所述至少一个第一像素点中的所述至少一个第二像素点，得到背景像素点。
12.一种电子设备，其特征在于，包括：处理器和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如权利要求1至10中任意一项所述的方法。
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，在所述程序指令被处理器执行的情况下，使所述处理器执行权利要求1至10中任意一项所述的方法。
CN202110090411.4A 2021-01-22 2021-01-22 图像处理方法及装置、电子设备及计算机可读存储介质 Active CN112861661B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202110090411.4A CN112861661B (zh) 2021-01-22 2021-01-22 图像处理方法及装置、电子设备及计算机可读存储介质
PCT/CN2021/107017 WO2022156167A1 (zh) 2021-01-22 2021-07-19 图像处理方法及装置、电子设备、计算机可读存储介质、计算机程序及程序产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110090411.4A CN112861661B (zh) 2021-01-22 2021-01-22 图像处理方法及装置、电子设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112861661A CN112861661A (zh) 2021-05-28
CN112861661B true CN112861661B (zh) 2022-11-08

Family

ID=76008125

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110090411.4A Active CN112861661B (zh) 2021-01-22 2021-01-22 图像处理方法及装置、电子设备及计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN112861661B (zh)
WO (1) WO2022156167A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112861661B (zh) * 2021-01-22 2022-11-08 深圳市慧鲤科技有限公司 图像处理方法及装置、电子设备及计算机可读存储介质
CN113222973B (zh) * 2021-05-31 2024-03-08 深圳市商汤科技有限公司 图像处理方法及装置、处理器、电子设备及存储介质
WO2022261828A1 (zh) * 2021-06-15 2022-12-22 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN113989395A (zh) * 2021-10-29 2022-01-28 北京字节跳动网络技术有限公司 一种绒毛效果生成方法、系统、设备、介质及产品
CN116957524B (zh) * 2023-09-21 2024-01-05 青岛阿斯顿工程技术转移有限公司 一种技术转移过程中人才信息智能管理方法及系统
CN117522760B (zh) * 2023-11-13 2024-06-25 书行科技(北京)有限公司 图像处理方法、装置、电子设备、介质及产品

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9928601B2 (en) * 2014-12-01 2018-03-27 Modiface Inc. Automatic segmentation of hair in images
CN104484664B (zh) * 2014-12-31 2018-03-20 小米科技有限责任公司 人脸图片处理方法和装置
CN109961453B (zh) * 2018-10-15 2021-03-12 华为技术有限公司 一种图像处理方法、装置与设备
CN111179276B (zh) * 2018-11-12 2024-02-06 北京京东尚科信息技术有限公司 一种图像处理方法和装置
CN110189340B (zh) * 2019-06-03 2022-01-21 北京达佳互联信息技术有限公司 图像分割方法、装置、电子设备及存储介质
CN111598903B (zh) * 2020-05-21 2023-09-29 Oppo广东移动通信有限公司 人像分割方法、装置、存储介质和电子设备
CN112861661B (zh) * 2021-01-22 2022-11-08 深圳市慧鲤科技有限公司 图像处理方法及装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
WO2022156167A1 (zh) 2022-07-28
CN112861661A (zh) 2021-05-28

Similar Documents

Publication Publication Date Title
CN112861661B (zh) 图像处理方法及装置、电子设备及计算机可读存储介质
CN112884637B (zh) 特效生成方法、装置、设备及存储介质
CN107771336B (zh) 基于颜色分布的图像中的特征检测和掩模
JP5554984B2 (ja) パターン認識方法およびパターン認識装置
US10991103B2 (en) Method for extracting person region in image and apparatus using the same
Butler et al. Real-time adaptive foreground/background segmentation
CN110276308B (zh) 图像处理方法及装置
CN112419170A (zh) 遮挡检测模型的训练方法及人脸图像的美化处理方法
CN114187633B (zh) 图像处理方法及装置、图像生成模型的训练方法及装置
CN112135041B (zh) 一种人脸特效的处理方法及装置、存储介质
CN113222973B (zh) 图像处理方法及装置、处理器、电子设备及存储介质
CN107272899B (zh) 一种基于动态手势的vr交互方法、装置及电子设备
CN112862852A (zh) 图像处理方法及装置、电子设备及计算机可读存储介质
CN114782984A (zh) 一种基于tof相机的坐姿识别遮挡判定方法及智能台灯
CN113205011B (zh) 图像掩膜确定方法及装置、存储介质和电子设备
CN113034416A (zh) 图像处理方法及装置、电子设备及存储介质
CN112784854A (zh) 基于数理统计的服装颜色分割提取方法、装置和设备
CN108491820B (zh) 图像中肢体表示信息的识别方法、装置及设备、存储介质
CN110992371A (zh) 一种基于先验信息的人像分割方法、装置及电子设备
CN110766631A (zh) 人脸图像的修饰方法、装置、电子设备和计算机可读介质
CN111652792A (zh) 图像的局部处理、直播方法、装置、设备和存储介质
CN110059742A (zh) 基于深度学习的安全护具穿戴识别方法及设备
CN115273184A (zh) 人脸活体检测模型训练方法及装置
CN111784563B (zh) 一种背景虚化方法、装置、计算机设备及存储介质
CN112101479B (zh) 一种发型识别方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40045384

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant