CN109190536B - 人脸图像处理方法、装置及设备 - Google Patents
人脸图像处理方法、装置及设备 Download PDFInfo
- Publication number
- CN109190536B CN109190536B CN201810967081.0A CN201810967081A CN109190536B CN 109190536 B CN109190536 B CN 109190536B CN 201810967081 A CN201810967081 A CN 201810967081A CN 109190536 B CN109190536 B CN 109190536B
- Authority
- CN
- China
- Prior art keywords
- virtual object
- face image
- image processing
- face
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 36
- 238000012545 processing Methods 0.000 claims abstract description 142
- 238000000034 method Methods 0.000 claims abstract description 39
- 230000008569 process Effects 0.000 claims description 13
- 230000009471 action Effects 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 4
- 235000002566 Capsicum Nutrition 0.000 description 24
- 239000006002 Pepper Substances 0.000 description 18
- 241000722363 Piper Species 0.000 description 18
- 235000016761 Piper aduncum Nutrition 0.000 description 18
- 235000017804 Piper guineense Nutrition 0.000 description 18
- 235000008184 Piper nigrum Nutrition 0.000 description 18
- 239000003221 ear drop Substances 0.000 description 17
- 239000000779 smoke Substances 0.000 description 10
- 210000003128 head Anatomy 0.000 description 9
- 239000000243 solution Substances 0.000 description 8
- 208000002874 Acne Vulgaris Diseases 0.000 description 5
- 206010046865 Vaccinia virus infection Diseases 0.000 description 5
- 206010000496 acne Diseases 0.000 description 5
- 238000004891 communication Methods 0.000 description 5
- 210000005069 ears Anatomy 0.000 description 5
- 208000007089 vaccinia Diseases 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 235000015220 hamburgers Nutrition 0.000 description 4
- 240000008574 Capsicum frutescens Species 0.000 description 3
- 241000758706 Piperaceae Species 0.000 description 3
- 239000001390 capsicum minimum Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 210000001061 forehead Anatomy 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 208000020154 Acnes Diseases 0.000 description 1
- 235000019504 cigarettes Nutrition 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229940047652 ear drops Drugs 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明实施例提供一种人脸图像处理方法、装置及设备，该方法包括：在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体。提高了人脸图像处理的灵活性。
Description
技术领域
本发明实施例涉及图像处理技术领域，尤其涉及一种人脸图像处理方法、装置及设备。
背景技术
随着图像处理技术的不断发展，终端设备可以对人脸图像进行特效处理，例如，对人脸进行美颜、在人脸图像中增加虚拟物体(或者虚拟元素)等。
在现有技术中，在终端设备对人脸图像进行特效处理时，获取用户在虚拟物体列表中选择的一个虚拟物体，对人脸图像进行人脸识别以确定虚拟物体在人脸图像中的位置，并在人脸图像中相应的位置添加虚拟物体。然而，在上述人脸图像特效处理过程中，图像处理方式单一死板，导致人脸图像处理的灵活性较差。
发明内容
本发明实施例提供一种人脸图像处理方法、装置及设备，提高了人脸图像处理的灵活性。
第一方面，本发明实施例提供一种人脸图像处理方法，包括：
在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；
在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体。
在一种可能的实施方式中，所述在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
在检测到所述第一部位位于所述第一区域，且在预设时段内检测到所述第一部位执行预设动作时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理。
在另一种可能的实施方式中，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
获取所述第一虚拟物体对应的第二虚拟物体；
在所述人脸图像中确定所述第二虚拟物体的添加位置；
在所述添加位置中添加所述第二虚拟物体。
在另一种可能的实施方式中，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
确定所述第一虚拟物体对应的图像处理方法；
根据所述第一虚拟物体对应的图像处理方法，对所述人脸图像进行图像处理。
在另一种可能的实施方式中，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理之后，还包括：
在检测到所述人脸图像中与第二虚拟物体对应的第二部位位于所述第二虚拟物体对应的第二区域中时，对所述第一图像处理后的人脸图像进行第二图像处理。
在另一种可能的实施方式中，所述至少一个虚拟物体在所述拍摄界面中移动。
在另一种可能的实施方式中，所述对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，还包括：
在所述拍摄界面中取消显示所述第一虚拟物体。
在另一种可能的实施方式中，所述在所述拍摄界面中显示所述至少一个虚拟物体中每个虚拟物体对应的分数。
在另一种可能的实施方式中，所述对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，还包括：
在用户得分中累加所述第一虚拟物体对应的分数得到更新后的用户分数，并在所述拍摄界面中显示所述更新后的用户分数。
第二方面，本发明实施例提供一种人脸图像处理装置，包括显示模块和处理模块，其中，
所述显示模块用于，在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；
所述处理模块用于，在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体。
在一种可能的实施方式中，所述处理模块具体用于：
在检测到所述第一部位位于所述第一区域，且在预设时段内检测到所述第一部位执行预设动作时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理。
在另一种可能的实施方式中，所述处理模块具体用于：
获取所述第一虚拟物体对应的第二虚拟物体；
在所述人脸图像中确定所述第二虚拟物体的添加位置；
在所述添加位置中添加所述第二虚拟物体。
在另一种可能的实施方式中，所述处理模块具体用于：
确定所述第一虚拟物体对应的图像处理方法；
根据所述第一虚拟物体对应的图像处理方法，对所述人脸图像进行图像处理。
在另一种可能的实施方式中，所述处理模块还用于：
在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的第一图像处理之后，在检测到所述人脸图像中与第二虚拟物体对应的第二部位位于所述第二虚拟物体对应的第二区域中时，对所述第一图像处理后的人脸图像进行第二图像处理。
在另一种可能的实施方式中，所述至少一个虚拟物体在所述拍摄界面中移动。
在另一种可能的实施方式中，所述显示模块还用于：
在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在所述拍摄界面中取消显示所述第一虚拟物体。
在另一种可能的实施方式中，所述显示模块还用于，所述在所述拍摄界面中显示所述至少一个虚拟物体中每个虚拟物体对应的分数。
在另一种可能的实施方式中，所述处理模块还用于，在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在用户得分中累加所述第一虚拟物体对应的分数得到更新后的用户分数；
所述显示模块还用于，在所述拍摄界面中显示所述更新后的用户分数。
第三方面，本发明实施例提供一种终端设备，包括：处理器，所述处理器与存储器耦合；
所述存储器用于，存储计算机程序；
所述处理器用于，执行所述存储器中存储的计算机程序，以使得所述终端设备执行上述第一方面任一项所述的人脸图像处理方法。
第四方面，本发明实施例提供一种可读存储介质，包括程序或指令，当所述程序或指令在计算机上运行时，如上述第一方面任意一项所述的人脸图像处理方法被执行。
本发明实施例提供的人脸图像处理方法、装置及设备，每个虚拟物体有其对应的人脸部位和图像处理方法，当人脸图像中一个虚拟物体对应的人脸部位位于该虚拟物体所在的区域时，则对人脸图像进行该虚拟物体对应的图像处理。在上述过程中，用户只需移动头部使得人脸图像中同一人脸部位位于不同的虚拟物体所在区域，进而可以对人脸图像进行不同的图像处理，进而提高了人脸图像处理的灵活性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的人脸图像处理的应用场景示意图；
图2为本发明实施例提供的人脸图像处理方法的流程示意图一；
图3为本发明实施例提供的人脸图像处理方法的流程示意图二；
图4为本发明实施例提供的拍摄界面示意图；
图5为本发明实施例提供的人脸图像处理装置的结构示意图；
图6为本发明实施例提供的终端设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明实施例提供的人脸图像处理的应用场景示意图。请参见图1，终端设备中设置有摄像装置A。可选的，该摄像装置A可以为前置摄像头。
摄像装置A可以进行图像采集，并将采集得到的图像显示在拍摄界面，例如，可以将摄像装置A采集得到的人脸图像P1显示在拍摄界面。拍摄界面中还可以显示多个虚拟虚体P2，例如，虚拟物体P2可以为辣椒、口红、汉堡、太阳等。
可选的，用户可以移动自己的头部，以改变人脸图像P1在拍摄界面中的位置。多个虚拟物体P2可以位于拍摄界面的固定位置，多个虚拟物体P2还可以在拍摄界面中移动，例如，虚拟物体P2可以按照预设轨迹在拍摄界面中移动。
在本申请中，每个虚拟物体有其对应的人脸部位和图像处理方法，当人脸图像中一个虚拟物体对应的人脸部位位于该虚拟物体所在的区域时，则对人脸图像进行该虚拟物体对应的图像处理。在上述过程中，用户只需移动头部使得人脸图像中同一人脸部位位于不同的虚拟物体所在区域，进而可以对人脸图像进行不同的图像处理，进而提高了人脸图像处理的灵活性。
下面，通过具体实施例对本申请所示的技术方案进行详细说明。需要说明的是，下面几个具体实施例可以相互结合，对于相同或相似的内容，在不同的实施例中不再进行重复说明。
图2为本发明实施例提供的人脸图像处理方法的流程示意图一。请参见图2，该方法可以包括：
S201、在终端设备的拍摄界面中显示至少一个虚拟物体、以及终端设备的摄像装置采集的人脸图像。
本发明实施例的执行主体可以为终端设备，也可以为设置在终端设备中的人脸图像处理装置。可选的，人脸图像处理装置可以通过软件实现，也可以通过软件和硬件的结合实现。
可选的，终端设备可以为手机、电脑等设备。当然，在实际应用过程中，终端设备还可以为其它，本发明实施例对此不作具体限定。
可选的，终端设备中包括摄像装置。例如，该摄像装置可以为终端设备的前置摄像头。
可选的，可以在终端设备中安装图像处理应用程序，当用户在终端设备中打开该图像处理应用程序之后，该图像处理应用程序可以调用终端设备中的摄像装置，并在终端设备的显示屏幕中显示拍摄界面。在终端设备的显示屏幕中显示拍摄界面之后，在拍摄界面中显示多个虚拟物体和摄像装置采集得到的图像。
可选的，虚拟物体可以辣椒、口红、汉堡、太阳、耳坠等。
当然，在实际应用过程中，虚拟物体还可以为其它，本发明实施例对此不作具体限定。
可选的，虚拟物体可以位于拍摄界面中的固定位置。
可选的，虚拟物体还可以在拍摄界面中移动。
例如，虚拟物体可以在拍摄界面中按照预设轨迹移动，或者，虚拟物体可以在拍摄界面中随机移动。
可选的，拍摄界面中不同时刻显示的虚拟物体可以不同。例如，拍摄界面中显示的虚拟物体可以每1分钟更换一次。
S202、在检测到人脸图像中与第一虚拟物体对应的第一部位位于第一虚拟物体对应的第一区域中时，对人脸图像进行第一虚拟物体对应的第一图像处理。
其中，第一虚拟物体为至少一个虚拟物体中的任意一个虚拟物体。
可选的，第一部位可以为眉毛、眼睛、鼻子、嘴巴、耳朵等。
当然，第一部位还可以为其它，例如，第一部位还可以为额头、头发等。
可选的，每个虚拟物体有其对应的区域，例如，虚拟物体对应的区域可以为虚拟物体所占的区域。相应的，第一虚拟物体对应的第一区域可以为第一虚拟物体所占的区域。
可选的，每个虚拟物体对应至少一个部位。例如，虚拟物体“辣椒”对应的部位为嘴巴，虚拟物体“耳坠”对应的部位为耳朵。
可选的，每个虚拟物体有其对应的图像处理。例如，虚拟物体“辣椒”对应的图像处理为：耳朵冒烟、脸上长痘。虚拟物体“汉堡”对应的图像处理为：脸变胖。虚拟物体“太阳”对应的图像处理为：脸变黑。虚拟物体“耳坠”对应的图像处理为：带耳坠。
例如，假设第一虚拟物体为辣椒，辣椒对应的第一部位为嘴巴，辣椒对应的第一图像处理为：耳朵冒烟、脸上长痘。
终端设备实时识别辣椒所在的第一区域中的人脸图像，当终端设备在辣椒所在的第一区域识别得到人脸图像中的嘴巴时，则终端设备对人脸图像进行第一图像处理，以使第一图像处理之后的人脸图像中耳朵冒烟、脸上长痘。
需要说明的是，当拍摄界面中包括多个虚拟物体时，终端设备分别实时检测每个虚拟物体所在的区域中是否存在虚拟物体对应的人体部位，若是，则对人脸图像进行该虚拟物体对应的图像处理。
可选的，虚拟物体还可以对应有预设动作，当检测到虚拟物体对应的部位位于虚拟物体所在的区域时，且虚拟物体对应的部位执行了预设动作之后，才对人脸图像进行虚拟物体对应的图像处理。
例如，假设第一虚拟物体为辣椒，辣椒对应的第一部位为嘴巴，辣椒对应的预设动作为嘴巴张开和闭合，辣椒对应的第一图像处理为：耳朵冒烟、脸上长痘。
终端设备实时识别辣椒所在的第一区域中的人脸图像，当终端设备在辣椒所在的第一区域识别得到人脸图像中的嘴巴，且嘴巴进行了张开和闭合动作时，则终端设备对人脸图像进行第一图像处理，以使第一图像处理之后的人脸图像中耳朵冒烟、脸上长痘。
可选的，终端设备可以通过至少如下两种可行的实现方式对人脸图像进行第一虚拟物体对应的第一图像处理：
一种可行的实现方式：
获取第一虚拟物体对应的第二虚拟物体，在人脸图像中确定第二虚拟物体的添加位置，在添加位置中添加第二虚拟物体。
例如，假设第一虚拟物体为辣椒，辣椒对应的第二虚拟物体包括烟雾和痘痘，烟雾对应的添加位置为耳朵旁，痘痘对应的添加位置为脸颊。
另一种可行的实现方式：
确定第一虚拟物体对应的图像处理方法，根据图像处理方法，对人脸图像进行图像处理。
可选的，不同的虚拟物体对应的图像处理方法可能不同。
例如，虚拟物体“口红”对应的图像处理方法为将人脸图像中的嘴唇设置为红色。虚拟物体“太阳”对应的图像处理方法为将人脸图像中的人脸颜色设置为黑色。
可选的，可以对人脸图像进行多次图像处理，该多次图像处理的效果可以累加。
例如，在时刻t1，对人脸图像进行第一次图像处理后的人脸图像中的耳朵冒烟、脸上长痘。在时刻t2，对人脸图像进行第二次图像处理后的人脸图像中的嘴唇颜色变红。即，时刻t2之后，人脸图像中的耳朵冒烟、脸上长痘、嘴唇变红。
本发明实施例提供的人脸图像处理方法，每个虚拟物体有其对应的人脸部位和图像处理方法，当人脸图像中一个虚拟物体对应的人脸部位位于该虚拟物体所在的区域时，则对人脸图像进行该虚拟物体对应的图像处理。在上述过程中，用户只需移动头部使得人脸图像中同一人脸部位位于不同的虚拟物体所在区域，进而可以对人脸图像进行不同的图像处理，进而提高了人脸图像处理的灵活性。
在图2所示实施例的基础上，下面，结合图3所示的实施例，对图2所示的实施例进行进一步详细说明。
图3为本发明实施例提供的人脸图像处理方法的流程示意图二。在图2所示实施例的基础上，请参见图3，该方法可以包括：
S301、在终端设备的拍摄界面中显示至少一个虚拟物体。
其中，每个虚拟物体在拍摄界面中实时移动。
需要说明的是，S301的执行过程可以参见S201，本发明实施例此处不再进行赘述。
S302、在拍摄界面中显示摄像装置采集的人脸图像。
其中，当用户移动自己的头部时，人脸图像在拍摄界面中的位置也发生变化。
需要说明的是，S302的执行过程可以参见S201，本发明实施例此处不再进行赘述。
S303、在检测到人脸图像中的第一部位位于第一虚拟物体所在的第一区域时，对人脸图像进行第一虚拟物体对应的第一图像处理。
S304、将用户分数确定为第一虚拟物体对应的分数。
可选的，可以为用户的人脸图像设置用户分数，初始时，用户分数为0。
可选的，每一个虚拟物体对应一个分数，当对人脸图像进行了一个虚拟物体对应的图像处理时，则将用户分数累加上该虚拟物体对应的分数。
可选的，不同虚拟物体对应的分数可能不同。
例如，用于对人脸进行美化的虚拟物体对应的分数可以为正数，用于对人脸进行丑化的虚拟物体对应的分数可以为负数。
S305、在拍摄界面中取消显示第一虚拟物体。
S306、正在检测到人脸图像中的第二部位位于第二虚拟物体所在的第二区域时，对人脸图像进行第二虚拟物体对应的第二图像处理。
S307、将用户分数更新为第一虚拟物体对应的分数和第二虚拟物体对应的分数之和。
S308、在拍摄界面中取消显示第二虚拟物体。
在图3所示的实施例中，拍摄界面中的虚拟物体可以实时移动，用户可以移动头部以改变人脸图像在拍摄界面中的位置，进而使得人脸图像中的人脸部位位于不同虚拟物体所在区域，进而对人脸图像进行不同的图像处理，增强了用户与终端设备的互动性，进一步提高了人脸图像处理的灵活性。
下面，结合图4，通过具体示例对上述实施例所示的人脸图像处理方法进行进一步详细说明。
图4为本发明实施例提供的拍摄界面示意图。请参见图4，包括拍摄界面401-拍摄界面406
当用户在终端设备中打开图像处理应用程序时，图像处理应用程序调用终端设备的前置摄像头，并显示拍摄界面。
请参见拍摄界面401，在拍摄界面中显示多个虚拟物体，例如，在拍摄界面底部显示如下虚拟物体：汉堡、口红、辣椒和耳坠。终端设备的前置摄像头还进行图像采集，并将采集得到的人脸图像显示在终端设备的拍摄界面中。还在拍摄界面顶部显示用户分数，由于还未对人脸图像进行图像处理，此时，用户分数为0。
用户可以移动头部，以改变人脸图像在拍摄界面中的位置。多个虚拟物体从拍摄界面的底部向上移动，各个虚拟物体的移动速度可以不同，且各个虚拟物体的移动路径也可以不同。
请参见拍摄界面402，在时刻t1，用户通过移动自己的头部，使得人脸图像中的嘴巴位于辣椒所在区域，且进行张嘴、闭嘴动作(模仿吃辣椒动作)。终端设备在辣椒所在区域中检测到了用户的嘴巴，且确定嘴巴执行了张开、闭合动作，则对人脸图像执行辣椒对应的图像处理，具体的，请参见界面403。
请参见拍摄界面403，终端设备确定辣椒对应的第二虚拟物体包括烟雾和痘痘，并确定烟雾的添加区域为耳朵旁，痘痘的添加区域为额头、脸颊和下巴，则终端设备将烟雾添加至耳朵旁，将痘痘添加至额头、脸颊和下巴。终端设备还在拍摄界面中取消显示辣椒。假设辣椒的分数为-5分，则此次用户分数为-5分。
请参见拍摄界面404，在时刻t2，用户通过移动自己的头部，使得人脸图像中的耳朵位于耳坠所在区域。终端设备在耳坠所在区域中检测到了用户的耳朵，则对人脸图像执行耳坠对应的图像处理，具体的，请参见界面405。
请参见拍摄界面405，终端设备确定耳坠对应的第二虚拟物体为一左耳坠和右耳坠，并确定左耳坠的添加区域为左耳朵下，右耳坠的添加区域为右耳朵下，则终端设备将左耳坠添加至左耳朵下，将右耳坠添加至右耳朵下。终端设备还在拍摄界面中取消显示耳坠。假设耳坠的分数为3分，则此次用户分数为(-5)+3＝(-2)分。
请参见界面406，当终端设备确定拍摄界面中的虚拟物体的数量小于预设数量时，则在拍摄界面中显示新的虚拟物体。例如，当终端设备确定拍摄界面中的虚拟物体的数量小于3时，则在拍摄界面中显示新的虚拟物体太阳。
图5为本发明实施例提供的人脸图像处理装置的结构示意图。请参见图5，该装置可以包括显示模块11和处理模块12，其中，
所述显示模块11用于，在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；
所述处理模块12用于，在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体。
本发明实施例提供的人脸图像处理装置可以执行上述方法实施例所示的技术方案，其实现原理以及有益效果类似，此处不再进行赘述。
在一种可能的实施方式中，所述处理模块12具体用于：
在检测到所述第一部位位于所述第一区域，且在预设时段内检测到所述第一部位执行预设动作时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理。
在另一种可能的实施方式中，所述处理模块12具体用于：
获取所述第一虚拟物体对应的第二虚拟物体；
在所述人脸图像中确定所述第二虚拟物体的添加位置；
在所述添加位置中添加所述第二虚拟物体。
在另一种可能的实施方式中，所述处理模块12具体用于：
确定所述第一虚拟物体对应的图像处理方法；
根据所述第一虚拟物体对应的图像处理方法，对所述人脸图像进行图像处理。
在另一种可能的实施方式中，所述处理模块12还用于：
在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的第一图像处理之后，在检测到所述人脸图像中与第二虚拟物体对应的第二部位位于所述第二虚拟物体对应的第二区域中时，对所述第一图像处理后的人脸图像进行第二图像处理。
在另一种可能的实施方式中，所述至少一个虚拟物体在所述拍摄界面中移动。
在另一种可能的实施方式中，所述显示模块11还用于：
在所述处理模块12对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在所述拍摄界面中取消显示所述第一虚拟物体。
在另一种可能的实施方式中，所述显示模块11还用于，所述在所述拍摄界面中显示所述至少一个虚拟物体中每个虚拟物体对应的分数。
在另一种可能的实施方式中，所述处理模块12还用于，在所述处理模块12对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在用户得分中累加所述第一虚拟物体对应的分数得到更新后的用户分数；
所述显示模块11还用于，在所述拍摄界面中显示所述更新后的用户分数。
本发明实施例提供的人脸图像处理装置可以执行上述方法实施例所示的技术方案，其实现原理以及有益效果类似，此处不再进行赘述。
图6为本发明实施例提供的终端设备的硬件结构示意图，如图6所示，该终端设备包括：至少一个处理器21和存储器22。可选地，该终端设备还包括通信部件23。其中，处理器21、存储器22以及通信部件23通过总线24连接。
在具体实现过程中，至少一个处理器21执行所述存储器22存储的计算机执行指令，使得至少一个处理器21执行如上方法实施例所示的方法。
通信部件23可以与服务器进行数据交互。
处理器21的具体实现过程可参见上述方法实施例，其实现原理和技术效果类似，本实施例此处不再赘述。
在上述的图6所示的实施例中，应理解，处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：Application SpecificIntegrated Circuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合发明所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
存储器可能包含高速RAM存储器，也可能还包括非易失性存储NVM，例如至少一个磁盘存储器。
总线可以是工业标准体系结构(Industry Standard Architecture，ISA)总线、外部设备互连(Peripheral Component，PCI)总线或扩展工业标准体系结构(ExtendedIndustry Standard Architecture，EISA)总线等。总线可以分为地址总线、数据总线、控制总线等。为便于表示，本申请附图中的总线并不限定仅有一根总线或一种类型的总线。
本申请还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上所述的方法实施例所示的方法。
上述的计算机可读存储介质，上述可读存储介质可以是由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。可读存储介质可以是通用或专用计算机能够存取的任何可用介质。
一种示例性的可读存储介质耦合至处理器，从而使处理器能够从该可读存储介质读取信息，且可向该可读存储介质写入信息。当然，可读存储介质也可以是处理器的组成部分。处理器和可读存储介质可以位于专用集成电路(Application Specific IntegratedCircuits，简称：ASIC)中。当然，处理器和可读存储介质也可以作为分立组件存在于设备中。
所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上各实施例仅用以说明本发明实施例的技术方案，而非对其限制；尽管参照前述各实施例对本发明实施例进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明实施例方案的范围。
Claims (16)
1.一种人脸图像处理方法，其特征在于，包括：
在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；
在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体；
所述对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
获取所述第一虚拟物体对应的第二虚拟物体；
在所述人脸图像中确定所述第二虚拟物体的添加位置；
在所述添加位置中添加所述第二虚拟物体；
所述在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
在检测到所述第一部位位于所述第一区域，且在预设时段内检测到所述第一部位执行预设动作时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理。
2.根据权利要求1所述的方法，其特征在于，所述对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，包括：
确定所述第一虚拟物体对应的图像处理方法；
根据所述第一虚拟物体对应的图像处理方法，所述对所述人脸图像进行图像处理。
3.根据权利要求1或2所述的方法，其特征在于，所述对所述人脸图像进行所述第一虚拟物体对应的第一图像处理之后，还包括：
在检测到所述人脸图像中与第二虚拟物体对应的第二部位位于所述第二虚拟物体对应的第二区域中时，对所述第一图像处理后的人脸图像进行第二图像处理。
4.根据权利要求1或2所述的方法，其特征在于，所述至少一个虚拟物体在所述拍摄界面中移动。
5.根据权利要求1或2所述的方法，其特征在于，所述对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，还包括：
在所述拍摄界面中取消显示所述第一虚拟物体。
6.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：
在所述拍摄界面中显示所述至少一个虚拟物体中每个虚拟物体对应的分数。
7.根据权利要求6所述的方法，其特征在于，所述对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，还包括：
在用户得分中累加所述第一虚拟物体对应的分数得到更新后的用户分数，并在所述拍摄界面中显示所述更新后的用户分数。
8.一种人脸图像处理装置，其特征在于，包括显示模块和处理模块，其中，
所述显示模块用于，在终端设备的拍摄界面中显示至少一个虚拟物体、以及所述终端设备的摄像装置采集的人脸图像；
所述处理模块用于，在检测到所述人脸图像中与第一虚拟物体对应的第一部位位于所述第一虚拟物体对应的第一区域中时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理，所述第一虚拟物体为所述至少一个虚拟物体中的任意一个虚拟物体；
所述处理模块具体用于：
获取所述第一虚拟物体对应的第二虚拟物体；
在所述人脸图像中确定所述第二虚拟物体的添加位置；
在所述添加位置中添加所述第二虚拟物体；
所述处理模块具体用于：
在检测到所述第一部位位于所述第一区域，且在预设时段内检测到所述第一部位执行预设动作时，对所述人脸图像进行所述第一虚拟物体对应的第一图像处理。
9.根据权利要求8所述的装置，其特征在于，所述处理模块具体用于：
确定所述第一虚拟物体对应的图像处理方法；
根据所述第一虚拟物体对应的图像处理方法，对所述人脸图像进行图像处理。
10.根据权利要求8或9所述的装置，其特征在于，所述处理模块还用于：
在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的第一图像处理之后，在检测到所述人脸图像中与第二虚拟物体对应的第二部位位于所述第二虚拟物体对应的第二区域中时，对所述第一图像处理后的人脸图像进行第二图像处理。
11.根据权利要求8或9所述的装置，其特征在于，所述至少一个虚拟物体在所述拍摄界面中移动。
12.根据权利要求8或9所述的装置，其特征在于，所述显示模块还用于：
在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在所述拍摄界面中取消显示所述第一虚拟物体。
13.根据权利要求8或9所述的装置，其特征在于，所述显示模块还用于：
在所述拍摄界面中显示所述至少一个虚拟物体中每个虚拟物体对应的分数。
14.根据权利要求13所述的装置，其特征在于，
所述处理模块还用于，在所述处理模块对所述人脸图像进行所述第一虚拟物体对应的图像处理之后，在用户得分中累加所述第一虚拟物体对应的分数得到更新后的用户分数；
所述显示模块还用于，在所述拍摄界面中显示所述更新后的用户分数。
15.一种终端设备，其特征在于，包括：处理器，所述处理器与存储器耦合，其中，
所述存储器用于，存储计算机程序；
所述处理器用于，执行所述存储器中存储的计算机程序，以使得所述终端设备执行权利要求1-7任一项所述的人脸图像处理方法。
16.一种可读存储介质，其特征在于，包括程序或指令，当所述程序或指令在计算机上运行时，如所述权利要求1-7任一项所述的人脸图像处理方法被执行。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810967081.0A CN109190536B (zh) | 2018-08-23 | 2018-08-23 | 人脸图像处理方法、装置及设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810967081.0A CN109190536B (zh) | 2018-08-23 | 2018-08-23 | 人脸图像处理方法、装置及设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109190536A CN109190536A (zh) | 2019-01-11 |
| CN109190536B true CN109190536B (zh) | 2023-12-26 |
Family
ID=64919698
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810967081.0A Active CN109190536B (zh) | 2018-08-23 | 2018-08-23 | 人脸图像处理方法、装置及设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109190536B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111240482B (zh) * | 2020-01-10 | 2023-06-30 | 北京字节跳动网络技术有限公司 | 一种特效展示方法及装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105468249A (zh) * | 2014-09-09 | 2016-04-06 | 联胜（中国）科技有限公司 | 智能互动系统及其控制方法 |
| CN106357971A (zh) * | 2016-08-25 | 2017-01-25 | 维沃移动通信有限公司 | 一种虚拟装饰方法及移动终端 |
| CN107707839A (zh) * | 2017-09-11 | 2018-02-16 | 广东欧珀移动通信有限公司 | 图像处理方法及装置 |
| CN109840019A (zh) * | 2019-02-22 | 2019-06-04 | 网易（杭州）网络有限公司 | 虚拟人物的控制方法、装置及存储介质 |
| CN111240482A (zh) * | 2020-01-10 | 2020-06-05 | 北京字节跳动网络技术有限公司 | 一种特效展示方法及装置 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3246879A1 (en) * | 2016-05-20 | 2017-11-22 | Thomson Licensing | Method and device for rendering an image of a scene comprising a real object and a virtual replica of the real object |
-
2018
- 2018-08-23 CN CN201810967081.0A patent/CN109190536B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105468249A (zh) * | 2014-09-09 | 2016-04-06 | 联胜（中国）科技有限公司 | 智能互动系统及其控制方法 |
| CN106357971A (zh) * | 2016-08-25 | 2017-01-25 | 维沃移动通信有限公司 | 一种虚拟装饰方法及移动终端 |
| CN107707839A (zh) * | 2017-09-11 | 2018-02-16 | 广东欧珀移动通信有限公司 | 图像处理方法及装置 |
| CN109840019A (zh) * | 2019-02-22 | 2019-06-04 | 网易（杭州）网络有限公司 | 虚拟人物的控制方法、装置及存储介质 |
| CN111240482A (zh) * | 2020-01-10 | 2020-06-05 | 北京字节跳动网络技术有限公司 | 一种特效展示方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 基于部件的人脸编辑与美化算法;蔡珍妮;刘青山;;数据采集与处理(第06期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109190536A (zh) | 2019-01-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107886032B (zh) | 终端设备、智能手机、基于脸部识别的认证方法和系统 | |
| US20230136669A1 (en) | Event camera-based gaze tracking using neural networks | |
| CN108229239B (zh) | 一种图像处理的方法及装置 | |
| CN112419170B (zh) | 遮挡检测模型的训练方法及人脸图像的美化处理方法 | |
| US11132544B2 (en) | Visual fatigue recognition method, visual fatigue recognition device, virtual reality apparatus and storage medium | |
| CN110956691B (zh) | 一种三维人脸重建方法、装置、设备及存储介质 | |
| EP3692461A1 (en) | Removing personally identifiable data before transmission from a device | |
| CN108805047A (zh) | 一种活体检测方法、装置、电子设备和计算机可读介质 | |
| WO2014094199A1 (en) | Facial movement based avatar animation | |
| CN113422977B (zh) | 直播方法、装置、计算机设备以及存储介质 | |
| CN110738116B (zh) | 活体检测方法及装置和电子设备 | |
| CN111627117B (zh) | 画像展示特效的调整方法、装置、电子设备及存储介质 | |
| CN107590474B (zh) | 解锁控制方法及相关产品 | |
| WO2022252866A1 (zh) | 一种互动处理方法、装置、终端及介质 | |
| CN107944420A (zh) | 人脸图像的光照处理方法和装置 | |
| CN107590859A (zh) | 一种混合现实画面处理方法及服务设备 | |
| WO2021120626A1 (zh) | 一种图像处理方法、终端及计算机存储介质 | |
| CN114283052A (zh) | 妆容迁移及妆容迁移网络的训练方法和装置 | |
| CN109753145B (zh) | 一种过渡动画的展示方法和相关装置 | |
| CN109190536B (zh) | 人脸图像处理方法、装置及设备 | |
| US20100289912A1 (en) | Camera arrangement with image modification | |
| CN111988525A (zh) | 图像处理方法及相关装置 | |
| JP2017204280A (ja) | ビデオフレームを選択する方法、システム及び装置 | |
| CN111143007A (zh) | 一种页面控制方法、装置、设备及介质 | |
| CN113176827B (zh) | 基于表情的ar交互方法、系统、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |