CN113902790A - 美容指导方法、装置、电子设备和计算机可读存储介质 - Google Patents

美容指导方法、装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN113902790A
CN113902790A CN202111495016.0A CN202111495016A CN113902790A CN 113902790 A CN113902790 A CN 113902790A CN 202111495016 A CN202111495016 A CN 202111495016A CN 113902790 A CN113902790 A CN 113902790A
Authority
CN
China
Prior art keywords
point
difference
user
depth
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111495016.0A
Other languages
English (en)
Other versions
CN113902790B (zh
Inventor
寇鸿斌
付贤强
何武
朱海涛
户磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Dilusense Technology Co Ltd
Original Assignee
Beijing Dilusense Technology Co Ltd
Hefei Dilusense Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dilusense Technology Co Ltd, Hefei Dilusense Technology Co Ltd filed Critical Beijing Dilusense Technology Co Ltd
Priority to CN202111495016.0A priority Critical patent/CN113902790B/zh
Publication of CN113902790A publication Critical patent/CN113902790A/zh
Application granted granted Critical
Publication of CN113902790B publication Critical patent/CN113902790B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Instructional Devices (AREA)

Abstract

本申请实施例涉及计算机技术领域,公开了一种美容指导方法、装置、电子设备和计算机可读存储介质,上述美容指导方法包括:拍摄包含用户完整面部的深度图;遍历所述深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点;根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点;计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值;根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,本申请实施例提供的美容指导方法,可以在保护用户个人隐私的前提下,为用户提供针对性的美容指导,大幅提升用户的使用体验。

Description

美容指导方法、装置、电子设备和计算机可读存储介质
技术领域
本申请实施例涉及计算机技术领域,特别涉及一种美容指导方法、装置、电子设备和计算机可读存储介质。
背景技术
随着科学技术的飞速发展和生活水平稳步提高,人们对生活质量的美好需求也越来越高,人们对自己的容貌也越来越在意,虽然不同时代背景下人们的审美观一直在改变,但人们对美容的追求从未改变,美容是通过特定的手段和方式美化人的容貌和形体的过程和方法,一般可以分为生活美容和医学美容两种,生活美容是通过在人的面部施以各种按摩,以及各式化妆品来改善及美化面容,而医学美容是从医学的角度出发,遵循医学和美学的原则,运用医学手段维护、修复和塑造人的面容。
然而,本申请的发明人发现,虽然市面上已经推出的各种美妆软件、医学软件可以实现远程识别用户面部,检测用户的面部皮肤是否衰老、松弛,用户可以通过这些软件远程听取美容专家、整形医师就自身容貌的美容指导意见,但这些检测、识别和评价都是基于用户面部的照片或视频进行的,安全性很差,用户的隐私无法得到保障。
发明内容
本申请实施例的目的在于提供一种美容指导方法、装置、电子设备和计算机可读存储介质,可以在保护用户个人隐私的前提下,为用户提供针对性的美容指导,大幅提升用户的使用体验。
为解决上述技术问题,本申请的实施例提供了一种美容指导方法,包括以下步骤:拍摄包含用户完整面部的深度图;遍历所述深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点;根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点;计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值;根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见。
本申请的实施例还提供了一种美容指导装置,包括:相机模块、定位模块、计算模块和提示模块;所述相机模块用于拍摄包含用户完整面部的深度图;所述定位模块用于遍历所述深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点,并根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点;所述计算模块用于计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值;所述提示模块用于根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见。
本申请的实施例还提供了一种电子设备,包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述美容指导方法。
本申请的实施例还提供了一种计算机可读存储介质,存储有计算机程序,所述计算机程序被处理器执行时实现上述美容指导方法。
本申请的实施例提供的美容指导方法、装置、电子设备和计算机可读存储介质,终端拍摄包含用户完整面部的深度图,先遍历深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点,再根据基准点、除基准点外各点的深度值以及预设的搜索方法,在深度图中确定出目标点,并计算基准点与目标点之间的第一距离,以及基准点的深度值与目标点的深度值之间的第一差值,最后根据计算出的基准点与目标点之间的第一距离和深度值第一差值,获取与用户对应的美容指导意见,考虑到对用户面部拍摄的彩色图像、视频中包含大量用户的个人隐私信息,一旦使用这些使用彩色图像、视频的软件受到不法分子的攻击,用户的个人隐私将面临着难以估量的泄露风险,而本申请的实施例只拍摄获取包含用户完整面部的深度图,由于深度图本身自带安全性、隐私性的属性,因此根据深度图进行容貌检测、给出美容指导意见的全过程非常安全,从而实现了在保护用户个人隐私的前提下,为用户提供针对性的美容指导,大幅提升了用户的使用体验。
另外,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:获取所述用户的身份信息;其中,所述身份信息至少包括所述用户的性别和年龄;根据所述用户的身份信息,确定所述用户对应的第二距离和第二差值;其中,所述第二距离为所述基准点与所述目标点之间的标准距离,所述第二差值为所述基准点的深度值与所述目标点的深度值之间的标准差值;计算所述第一距离与所述第二距离之间的第三差值,以及所述第一差值和所述第二差值之间的第四差值;若所述第三差值的绝对值大于第一预设阈值,或所述第四差值的绝对值大于第二预设阈值,则根据所述第三差值和/或所述第四差值,生成与所述用户对应的美容指导意见,即在获取与用户对应的美容指导意见时,可以先获取用户的身份信息,根据用户的身份信息生成基准点与目标点之间的标准距离,以及基准点的深度值与目标点深度值之间的标准差值,若第一距离与标准距离之间的差值过大,或第一差值与标准差值之间的差值过大,终端都会判定用户的面部状态不佳,随即根据第一距离与标准距离之间的差值,和/或,第一距离与标准距离之间的差值,生成科学、合理的美容指导意见。
另外,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:将所述深度图、所述第一距离和所述第一差值发送至与所述用户的第一终端建立通信连接的第二终端;接收所述第二终端发送来的与所述用户对应的美容指导意见;其中,所述与所述用户对应的美容指导意见是所述第二终端根据所述深度图、所述第一距离和所述第一差值确定的,本申请的实施例支持用户通过远程方式取美容专家、整形医师就自身容貌的美容指导意见,终端只将深度图、第一距离以及第一差值发送给美容专家、整形医师,供美容专家、整形医师进行判断,做出美容指导意见,美容专家、整形医师并不知道用户的真实身份,传输过程中也不会泄露用户的个人隐私。
另外,所述目标点为多个,所述计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值,包括:分别计算所述基准点与各所述目标点之间的第一距离,以及所述基准点的深度值与各所述目标点的深度值之间的第一差值;计算各所述目标点两两之间的第三距离,以及各所述目标点的深度值两两之间的第三差值;所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:根据所述基准点与各所述目标点之间的第一距离、所述基准点的深度值与各所述目标点的深度值之间的第一差值、各所述目标点两两之间的第三距离和各所述目标点的深度值两两之间的第三差值,获取与所述用户对应的美容指导意见,终端根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定出的目标点为多个,在获取与用户对应的美容指导意见时,还考虑这些目标点两两之间的距离,以及这些目标点两两之间的深度值的差值,可以更好地衡量用户的面部状态,从而获取到更合理、更符合用户的实际情况的美容指导意见。
另外,所述拍摄包含用户完整面部的深度图,包括:在预设的时间间隔下,拍摄包含用户完整面部的若干张深度图,即基于不同时间间隔的深度图进行综纵向判断,即通过纵向对比确定用户容貌的变化,可以获得更合理、更符合用户的实际情况的美容指导建议。
另外,所述拍摄包含用户完整面部的深度图,包括:在不同角度下,拍摄包含用户完整面部的若干张深度图;其中,所述不同角度至少包括主视角度、俯视角度和侧视角度,即基于不同角度的深度图进行综合判断,可以获得更合理、更符合用户的实际情况的美容指导建议。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定。
图1是根据本申请的一个实施例的美容指导方法的流程图一;
图2是根据本申请的一个实施例中,根据第一距离和第一差值,获取与用户对应的美容指导意见的流程图一;
图3是根据本申请的一个实施例中,根据第一距离和第一差值,获取与用户对应的美容指导意见的流程图二;
图4是根据本申请的另一个实施例的美容指导方法的流程图二;
图5是根据本申请的一个实施例中,根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定目标点的流程图;
图6是根据本申请的另一个实施例的美容指导装置的示意图;
图7是根据本申请的另一个实施例的电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合附图对本申请的各实施例进行详细的阐述。然而,本领域的普通技术人员可以理解,在本申请各实施例中,为了使读者更好地理解本申请而提出了许多技术细节。但是,即使没有这些技术细节和基于以下各实施例的种种变化和修改,也可以实现本申请所要求保护的技术方案。以下各个实施例的划分是为了描述方便,不应对本申请的具体实现方式构成任何限定,各个实施例在不矛盾的前提下可以相互结合相互引用。
本申请的一个实施例涉及一种美容指导方法,应用于电子设备,其中,电子设备可以为终端或服务器,本实施例以及以下个各个实施例中电子设备以终端为例进行说明,下面对本实施例的美容指导方法的实现细节进行具体的说明,以下内容仅为方便理解提供的实现细节,并非实施本方案的必须。
本实施例的美容指导方法的具体流程可以如图1所示,包括:
步骤101,拍摄包含用户完整面部的深度图。
在具体实现中,终端在进行美容指导时,可以调用自身的摄像头,或调用与终端建立有蓝牙等无线连接的相机,对用户的面部进行拍摄,得到包含用户完整面部的深度图。
步骤102,遍历深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点。
在具体实现中,终端拍摄得到包含用户完整面部的深度图后,可以遍历深度图中各点的深度值,确定该深度图中深度值最小且不为0的像素点的位置,终端将该深度值最小且不为0的像素点作为基准点,考虑到对于正面的人脸来说,人的鼻子是面部最高的位置,终端确定的深度值最小且不为0的像素点即用户的鼻尖点。
步骤103,根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定目标点。
在具体实现中,终端在深度图中确定出基准点后,可以根据基准点的位置和深度值、深度图中除基准点外的各点的深度值,以及预设的搜索方法,在深度图中确定出目标点的位置,其中,预设的搜索方法可以由本领域的技术人员根据实际需要进行设置。
在一个例子中,目标点包括左鼻翼点和右鼻翼点,终端以基准点,即鼻尖点为基准,根据预设的鼻子轮廓搜索范围,在深度图中确定用户的鼻子区域,再以鼻尖点为基准做垂直线,以该垂直线为基准左右平行搜索,确定与该垂直线平行的其它垂直线与鼻子区域相切出的两个交点,这两个交点即左鼻翼点和右鼻翼点这两个目标点。
步骤104,计算基准点与目标点之间的第一距离,以及基准点的深度值与目标点的深度值之间的第一差值。
在具体实现中,终端在深度图中确定出目标点的位置后,可以计算基准点与目标点之间的第一距离,并计算基准点的深度值与目标点的深度值之间的第一差值。
在一个例子中,基准点即用户的鼻尖点,目标点包括左鼻翼点和右鼻翼点,终端根据鼻尖点的坐标和左鼻翼点的坐标,计算出鼻尖点与左鼻翼点之间的第一距离,根据鼻尖点的深度值和左鼻翼点的深度值,计算出鼻尖点的深度值与左鼻翼点的深度值之间的第一差值,根据鼻尖点的坐标和右鼻翼点的坐标,计算出鼻尖点与右鼻翼点之间的第一距离,根据鼻尖点的深度值和右鼻翼点的深度值,计算出鼻尖点的深度值与右鼻翼点的深度值之间的第一差值。
步骤105,根据第一距离和第一差值,获取与用户对应的美容指导意见。
在一个例子中,终端计算出第一距离和第一差值后,可以根据第一距离和第一差值,以及预设的评分标准,对第一距离、第一差值进行评分,即对包含用户完整面部的深度图进行评分,根据得分生成与用户对应的美容指导意见,其中,预设的评分标准可以由本领域的技术人员根据实际需要进行设置,本申请的实施例对此不作具体限定。
在一个例子中,终端计算出的第一距离包括鼻尖点与左鼻翼点之间的第一距离和鼻尖点与右鼻翼点之间的第一距离,第一差值包括鼻尖点的深度值与左鼻翼点的深度值之间的第一差值和鼻尖点的深度值与右鼻翼点的深度值之间的第一差值,终端可以根据鼻尖点与左鼻翼点之间的第一距离、鼻尖点与右鼻翼点之间的第一距离、鼻尖点的深度值与左鼻翼点的深度值之间的第一差值、鼻尖点的深度值与右鼻翼点的深度值之间的第一差值,确定与用户的鼻子对应的美容指导意见。
本实施例,相较于美妆软件、医学软件直接调用彩色相机,拍摄用户面部的彩色图像或视频来进行容貌识别、给出美容指导意见的技术方案而言,本申请的实施例,终端拍摄包含用户完整面部的深度图,先遍历深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点,再根据基准点、除基准点外各点的深度值以及预设的搜索方法,在深度图中确定出目标点,并计算基准点与目标点之间的第一距离,以及基准点的深度值与目标点的深度值之间的第一差值,最后根据计算出的基准点与目标点之间的第一距离和深度值第一差值,获取与用户对应的美容指导意见,考虑到对用户面部拍摄的彩色图像、视频中包含大量用户的个人隐私信息,一旦使用这些使用彩色图像、视频的软件受到不法分子的攻击,用户的个人隐私将面临着难以估量的泄露风险,而本申请的实施例只拍摄获取包含用户完整面部的深度图,由于深度图本身自带安全性、隐私性的属性,因此根据深度图进行容貌检测、给出美容指导意见的全过程非常安全,从而实现了在保护用户个人隐私的前提下,为用户提供针对性的美容指导,大幅提升了用户的使用体验。
在一个实施例中,终端根据第一距离和第一差值,获取与用户对应的美容指导意见,可以通过如图2所示的各步骤实现,具体包括:
步骤201,获取用户的身份信息。
具体而言,用户的身份信息至少包括用户的性别和年龄。
在一个例子中,用户在注册美妆软件、医学软件时,需要填写包括性别和年龄在内的身份信息,终端将用户的身份信息保存在存储器中,当终端需要进行美容指导时,可以从存储器中调用预存的用户的身份信息。
在另一个例子中,终端在进行美容指导时,可以弹出输入框,供用户实时输入包括性别和年龄的身份信息。
步骤202,根据用户的身份信息,确定用户对应的第二距离和第二差值。
在具体实现中,终端获取到用户的身份信息后,可以根据用户的身份信息和预设的容貌比例标准,确定用户对应的第二距离和第二差值,第二距离即基准点与目标点之间的标准距离,第二差值即基准点的深度值与目标点的深度值之间的标准差值,其中,预设的容貌比例标准可以由本领域的技术人员根据实际需要进行设置,本申请的实施例对此不作具体限定。
步骤203,计算第一距离与第二距离之间的第三差值,以及第一差值和第二差值之间的第四差值。
步骤204,若第三差值的绝对值大于第一预设阈值,或第四差值的绝对值大于第二预设阈值,则根据第三差值和/或第四差值,生成与用户对应的美容指导意见。
在具体实现中,终端在确定用户对应的第二距离和第二差值后,可以计算第一距离与第二距离之间的第三差值,并计算第一差值与第二差值之间的第四差值,终端判断第三差值的绝对值是否大于第一预设阈值,同时判断第四差值的绝对值是否大于第二预设阈值,若第三差值的绝对值大于第一预设阈值,或者第四差值的绝对值是否大于第二预设阈值,说明用户的面部状态不佳,终端随即根据第三差值和/或第四差值,生成与用户对应的美容指导意见,若第三差值的绝对值小于或等于第一预设阈值,并且第四差值的绝对值小于或等于第二预设阈值,说明用户的面部状态良好,继续保持即可,其中,第一预设阈值和第二预设阈值均可以由本领域的技术人员根据实际需要进行设置,本申请的实施例对此不做具体限定。
本实施例,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:获取所述用户的身份信息;其中,所述身份信息至少包括所述用户的性别和年龄;根据所述用户的身份信息,确定所述用户对应的第二距离和第二差值;其中,所述第二距离为所述基准点与所述目标点之间的标准距离,所述第二差值为所述基准点的深度值与所述目标点的深度值之间的标准差值;计算所述第一距离与所述第二距离之间的第三差值,以及所述第一差值和所述第二差值之间的第四差值;若所述第三差值的绝对值大于第一预设阈值,或所述第四差值的绝对值大于第二预设阈值,则根据所述第三差值和/或所述第四差值,生成与所述用户对应的美容指导意见,即在获取与用户对应的美容指导意见时,可以先获取用户的身份信息,根据用户的身份信息生成基准点与目标点之间的标准距离,以及基准点的深度值与目标点深度值之间的标准差值,若第一距离与标准距离之间的差值过大,或第一差值与标准差值之间的差值过大,终端都会判定用户的面部状态不佳,随即根据第一距离与标准距离之间的差值,和/或,第一距离与标准距离之间的差值,生成科学、合理的美容指导意见。
在一个实施例中,用户对应的终端称为第一终端,第一终端根据第一距离和第一差值,获取与用户对应的美容指导意见,可以通过如图3所示的各步骤实现,具体包括:
步骤301,将深度图、第一距离和第一差值发送至与用户的第一终端建立通信连接的第二终端。
在具体实现中,用户使用美妆软件、医学软件听取美妆专家、整形医生的美容指导建议,用户的第一终端与远程的美妆专家、整形医生的第二终端保持通信连接,终端拍摄包含用户完整面部的深度图,并确定基准点与目标点的之间第一距离和基准点的深度值与目标点的深度值之间的第一差值后,可以将深度图、第一距离和第一差值发送至与用户的第一终端建立通信连接的第二终端,即发送给远程的美妆专家、整形医生。
步骤302,接收第二终端发送来的与用户对应的美容指导意见,第二终端根据深度图、第一距离和第一差值确定的。
在具体实现中,美妆专家、整形医生的第二终端在收到第一终端发送的深度图、第一距离和第二距离后,可以根据深度图、第一距离和第一差值确定与该用户对应的美容指导意见,并发送给第一终端,第一终端接收到第二终端发送来的与用户对应的美容指导意见后,可以展示该美容指导意见。
本实施例,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:将所述深度图、所述第一距离和所述第一差值发送至与所述用户的第一终端建立通信连接的第二终端;接收所述第二终端发送来的与所述用户对应的美容指导意见;其中,所述与所述用户对应的美容指导意见是所述第二终端根据所述深度图、所述第一距离和所述第一差值确定的,本申请的实施例支持用户通过远程方式取美容专家、整形医师就自身容貌的美容指导意见,终端只将深度图、第一距离以及第一差值发送给美容专家、整形医师,供美容专家、整形医师进行判断,做出美容指导意见,美容专家、整形医师并不知道用户的真实身份,传输过程中也不会泄露用户的个人隐私。
本申请的另一个实施例涉及一种美容指导方法,本实施例中目标点为多个,下面对本实施例的美容指导方法的实现细节进行具体的说明,以下内容仅为方便理解提供的实现细节,并非实施本方案的必须,本实施例的美容指导方法的具体流程可以如图4所示,包括:
步骤401,拍摄包含用户完整面部的深度图。
步骤402,遍历深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点。
步骤403,根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定目标点。
其中,步骤401至步骤403与不住101至步骤103大致相同,此处不再赘述。
步骤404,分别计算基准点与各目标点之间的第一距离,以及基准点的深度值与各目标点的深度值之间的第一差值。
在具体实现中,终端在深度图中确定出各目标点的位置后,可以分别计算基准点与各目标点之间的第一距离,并分别计算基准点的深度值与各目标点的深度值之间的第一差值。
在一个例子中,基准点即用户的鼻尖点,各目标点包括左鼻翼点和右鼻翼点,终端根据鼻尖点的坐标和左鼻翼点的坐标,计算出鼻尖点与左鼻翼点之间的第一距离,根据鼻尖点的深度值和左鼻翼点的深度值,计算出鼻尖点的深度值与左鼻翼点的深度值之间的第一差值,根据鼻尖点的坐标和右鼻翼点的坐标,计算出鼻尖点与右鼻翼点之间的第一距离,根据鼻尖点的深度值和右鼻翼点的深度值,计算出鼻尖点的深度值与右鼻翼点的深度值之间的第一差值。
步骤405,计算各目标点两两之间的第三距离,以及各目标点的深度值两两之间的第五差值。
在一个例子中,各目标点包括左鼻翼点和右鼻翼点,终端可以计算左鼻翼点与右鼻翼点之间的第三距离,并计算左鼻翼点的深度值与右鼻翼点的深度值之间的第五差值。
在一个例子中,各目标点包括目标点甲、目标点乙和目标点丙,终端可以计算目标点甲与目标点乙之间的第三距离、目标点甲与目标点丙之间的第三距离、以及目标点乙与目标点丙之间的第三距离,并计算目标点甲的深度值与目标点乙的深度值之间的第五差值、目标点甲的深度值与目标点丙的深度值之间的第五差值、以及目标点乙的深度值与目标点丙的深度值之间的第五差值。
步骤406,根据基准点与各目标点之间的第一距离、基准点的深度值与各目标点的深度值之间的第一差值、各目标点两两之间的第三距离和各目标点的深度值两两之间的第五差值,获取与用户对应的美容指导意见。
在具体实现中,终端计算出基准点与各目标点之间的第一距离、基准点的深度值与各目标点的深度值之间的第一差值、各目标点两两之间的第三距离和各目标点的深度值两两之间的第五差值后,可以根据基准点与各目标点之间的第一距离、基准点的深度值与各目标点的深度值之间的第一差值、各目标点两两之间的第三距离和各目标点的深度值两两之间的第五差值,获取与用户对应的美容指导意见。
本实施例,所述目标点为多个,所述计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值,包括:分别计算所述基准点与各所述目标点之间的第一距离,以及所述基准点的深度值与各所述目标点的深度值之间的第一差值;计算各所述目标点两两之间的第三距离,以及各所述目标点的深度值两两之间的第五差值;所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:根据所述基准点与各所述目标点之间的第一距离、所述基准点的深度值与各所述目标点的深度值之间的第一差值、各所述目标点两两之间的第三距离和各所述目标点的深度值两两之间的第五差值,获取与所述用户对应的美容指导意见,终端根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定出的目标点为多个,在获取与用户对应的美容指导意见时,还考虑这些目标点两两之间的距离,以及这些目标点两两之间的深度值的差值,可以更好地衡量用户的面部状态,从而获取到更合理、更符合用户的实际情况的美容指导意见。
在一个实施例中,基准点即用户的鼻尖点,目标点包括用户的左眼内眼角、左眼外眼角、右眼内眼角和右眼外眼角,终端根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定目标点,可以通过如图5所示的各步骤实现,具体包括:
步骤501,以基准点为中心做水平线和垂直线,并根据垂直线,将深度图的水平线以上的区域划分为左眼区域和右眼区域。
在具体实现中,考虑到鼻尖点在人脸中的位置,以鼻尖点为中心做水平线和垂直线,水平线以下的区域可以认为是嘴的区域,水平线以上即左眼区域和右眼区域。
步骤502,将左眼区域中深度值最大的点作为左眼内眼角,并以左眼内眼角为基准,在左眼区域中确定第一目标区域。
在具体实现中,左眼内眼角应该为人脸区域的左眼区域中最低的点,反映在深度图中左眼内眼角应该为人脸区域的左眼区域中深度值最大的点,终端将左眼区域中深度值最大的点作为左眼内眼角,并以左眼内眼角为基准,结合预设的标准眼睛数据,在左眼区域中确定第一目标区域,第一目标区域即左眼外眼角所在的区域。
步骤503,将第一目标区域中深度值最大的点作为左眼外眼角。
在具体实现中,终端确定出第一目标区域,即左眼外眼角所在的区域后,可以将第一目标区域中深度值最大的点作为左眼外眼角。
步骤504,将右眼区域中深度值最大的点作为右眼内眼角,并以右眼内眼角为基准,在右眼区域中确定第二目标区域。
在具体实现中,右眼内眼角应该为人脸区域的右眼区域中最低的点,反映在深度图中右眼内眼角应该为人脸区域的右眼区域中深度值最大的点,终端将右眼区域中深度值最大的点作为右眼内眼角,并以右眼内眼角为基准,结合预设的标准眼睛数据,在右眼区域中确定第二目标区域,第二目标区域即右眼外眼角所在的区域。
步骤505,将第二目标区域中深度值最大的点作为右眼外眼角。
在具体实现中,终端确定出第二目标区域,即右眼外眼角所在的区域后,可以将第二目标区域中深度值最大的点作为右眼外眼角。
在一个实施例中,终端拍摄包含用户完整面部的深度图时,可以在预设的时间间隔下,拍摄包含用户完整面部的若干张深度图,基于不同时间间隔的深度图进行纵向判断,即通过纵向对比确定用户容貌的变化,可以获得更合理、更符合用户的实际情况的美容指导建议。
在一个实施例中,终端拍摄包含用户完整面部的深度图时,可以在不同角度下,拍摄包含用户完整面部的若干张深度图,其中,不同角度至少包括主视角度、俯视角度和侧视角度,即基于不同角度的深度图进行综合判断,可以获得更合理、更符合用户的实际情况的美容指导建议。
上面各种方法的步骤划分,只是为了描述清楚,实现时可以合并为一个步骤或者对某些步骤进行拆分,分解为多个步骤,只要包括相同的逻辑关系,都在本专利的保护范围内;对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计,但不改变其算法和流程的核心设计都在该专利的保护范围内。
本申请的另一个实施例涉及一种美容指导装置,下面对本实施例的美容指导装置的实现细节进行具体的说明,以下内容仅为方便理解提供的实现细节,并非实施本方案的必须,本实施例的美容指导装置的示意图可以如图6所示,包括:相机模块601、定位模块602、计算模块603和提示模块604。
相机模块601用于拍摄包含用户完整面部的深度图。
定位模块602用于遍历深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点,并根据基准点、除基准点外各点的深度值和预设的搜索方法,在深度图中确定目标点。
计算模块603用于计算基准点与目标点之间的第一距离,以及基准点的深度值与目标点的深度值之间的第一差值。
提示模块604用于根据第一距离和所述第一差值,获取与用户对应的美容指导意见。
值得一提的是,本实施例中所涉及到的各模块均为逻辑模块,在实际应用中,一个逻辑单元可以是一个物理单元,也可以是一个物理单元的一部分,还可以以多个物理单元的组合实现。此外,为了突出本申请的创新部分,本实施例中并没有将与解决本申请所提出的技术问题关系不太密切的单元引入,但这并不表明本实施例中不存在其它的单元。
本申请另一个实施例涉及一种电子设备,如图7所示,包括:至少一个处理器701;以及,与所述至少一个处理器701通信连接的存储器702;其中,所述存储器702存储有可被所述至少一个处理器701执行的指令,所述指令被所述至少一个处理器701执行,以使所述至少一个处理器701能够执行上述各实施例中的美容指导方法。
其中,存储器和处理器采用总线方式连接,总线可以包括任意数量的互联的总线和桥,总线将一个或多个处理器和存储器的各种电路连接在一起。总线还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路连接在一起,这些都是本领域所公知的,因此,本文不再对其进行进一步描述。总线接口在总线和收发机之间提供接口。收发机可以是一个元件,也可以是多个元件,比如多个接收器和发送器,提供用于在传输介质上与各种其他装置通信的单元。经处理器处理的数据通过天线在无线介质上进行传输,进一步,天线还接收数据并将数据传送给处理器。
处理器负责管理总线和通常的处理,还可以提供各种功能,包括定时,外围接口,电压调节、电源管理以及其他控制功能。而存储器可以被用于存储处理器在执行操作时所使用的数据。
本申请另一个实施例涉及一种计算机可读存储介质,存储有计算机程序。计算机程序被处理器执行时实现上述方法实施例。
即,本领域技术人员可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory ,简称:ROM)、随机存取存储器(Random Access Memory,简称:RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域的普通技术人员可以理解,上述各实施例是实现本申请的具体实施例,而在实际应用中,可以在形式上和细节上对其作各种改变,而不偏离本申请的精神和范围。

Claims (10)

1.一种美容指导方法,其特征在于,包括:
拍摄包含用户完整面部的深度图;
遍历所述深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点;
根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点;
计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值;
根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见。
2.根据权利要求1所述的美容指导方法,其特征在于,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:
获取所述用户的身份信息;其中,所述身份信息至少包括所述用户的性别和年龄;
根据所述用户的身份信息,确定所述用户对应的第二距离和第二差值;其中,所述第二距离为所述基准点与所述目标点之间的标准距离,所述第二差值为所述基准点的深度值与所述目标点的深度值之间的标准差值;
计算所述第一距离与所述第二距离之间的第三差值,以及所述第一差值和所述第二差值之间的第四差值;
若所述第三差值的绝对值大于第一预设阈值,或所述第四差值的绝对值大于第二预设阈值,则根据所述第三差值和/或所述第四差值,生成与所述用户对应的美容指导意见。
3.根据权利要求1所述的美容指导方法,其特征在于,所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:
将所述深度图、所述第一距离和所述第一差值发送至与所述用户的第一终端建立通信连接的第二终端;
接收所述第二终端发送来的与所述用户对应的美容指导意见;其中,所述与所述用户对应的美容指导意见是所述第二终端根据所述深度图、所述第一距离和所述第一差值确定的。
4.根据权利要求1所述的美容指导方法,其特征在于,所述目标点为多个,所述计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值,包括:
分别计算所述基准点与各所述目标点之间的第一距离,以及所述基准点的深度值与各所述目标点的深度值之间的第一差值;
计算各所述目标点两两之间的第三距离,以及各所述目标点的深度值两两之间的第三差值;
所述根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见,包括:
根据所述基准点与各所述目标点之间的第一距离、所述基准点的深度值与各所述目标点的深度值之间的第一差值、各所述目标点两两之间的第三距离和各所述目标点的深度值两两之间的第三差值,获取与所述用户对应的美容指导意见。
5.根据权利要求1至权利要求4中任一项所述的美容指导方法,其特征在于,所述基准点即所述用户的鼻尖点,所述目标点包括所述用户的左眼内眼角、左眼外眼角、右眼内眼角和右眼外眼角,所述根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点,包括:
以所述基准点为中心做水平线和垂直线,并根据所述垂直线,将所述深度图的所述水平线以上的区域划分为左眼区域和右眼区域;
将所述左眼区域中深度值最大的点作为所述左眼内眼角,并以所述左眼内眼角为基准,在所述左眼区域中确定第一目标区域;
将所述第一目标区域中深度值最大的点作为所述左眼外眼角;
将所述右眼区域中深度值最大的点作为所述右眼内眼角,并以所述右眼内眼角为基准,在所述右眼区域中确定第二目标区域;
将所述第二目标区域中深度值最大的点作为所述右眼外眼角。
6.根据权利要求1至权利要求4中任一项所述的美容指导方法,其特征在于,所述拍摄包含用户完整面部的深度图,包括:
在预设的时间间隔下,拍摄包含用户完整面部的若干张深度图。
7.根据权利要求1至权利要求4中任一项所述的美容指导方法,其特征在于,所述拍摄包含用户完整面部的深度图,包括:
在不同角度下,拍摄包含用户完整面部的若干张深度图;其中,所述不同角度至少包括主视角度、俯视角度和侧视角度。
8.一种美容指导装置,其特征在于,包括:相机模块、定位模块、计算模块和提示模块;
所述相机模块用于拍摄包含用户完整面部的深度图;
所述定位模块用于遍历所述深度图中各点的深度值,确定深度值最小且不为0的像素点为基准点,并根据所述基准点、除所述基准点外各点的深度值和预设的搜索方法,在所述深度图中确定目标点;
所述计算模块用于计算所述基准点与所述目标点之间的第一距离,以及所述基准点的深度值与所述目标点的深度值之间的第一差值;
所述提示模块用于根据所述第一距离和所述第一差值,获取与所述用户对应的美容指导意见。
9.一种电子设备,其特征在于,包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至7中任一所述的美容指导方法。
10.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的美容指导方法。
CN202111495016.0A 2021-12-09 2021-12-09 美容指导方法、装置、电子设备和计算机可读存储介质 Active CN113902790B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111495016.0A CN113902790B (zh) 2021-12-09 2021-12-09 美容指导方法、装置、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111495016.0A CN113902790B (zh) 2021-12-09 2021-12-09 美容指导方法、装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN113902790A true CN113902790A (zh) 2022-01-07
CN113902790B CN113902790B (zh) 2022-03-25

Family

ID=79025866

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111495016.0A Active CN113902790B (zh) 2021-12-09 2021-12-09 美容指导方法、装置、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN113902790B (zh)

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106667496A (zh) * 2017-02-10 2017-05-17 广州帕克西软件开发有限公司 一种面部数据测量方法及装置
CN107392874A (zh) * 2017-07-31 2017-11-24 广东欧珀移动通信有限公司 美颜处理方法、装置及移动设备
CN107800965A (zh) * 2017-10-31 2018-03-13 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
CN108765273A (zh) * 2018-05-31 2018-11-06 Oppo广东移动通信有限公司 人脸拍照的虚拟整容方法和装置
CN108830901A (zh) * 2018-06-22 2018-11-16 维沃移动通信有限公司 一种图像处理方法和电子设备
CN109635783A (zh) * 2019-01-02 2019-04-16 上海数迹智能科技有限公司 视频监控方法、装置、终端和介质
CN109961021A (zh) * 2019-03-05 2019-07-02 北京超维度计算科技有限公司 一种深度图像中人脸检测方法
US20190279398A1 (en) * 2018-02-27 2019-09-12 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Control method, control device, terminal and computer device
US20200068110A1 (en) * 2018-04-28 2020-02-27 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing methods and apparatuses, computer readable storage media, and electronic devices
CN111966852A (zh) * 2020-06-28 2020-11-20 北京百度网讯科技有限公司 基于人脸的虚拟整容的方法和装置
CN112329726A (zh) * 2020-11-27 2021-02-05 合肥的卢深视科技有限公司 人脸识别方法及装置
CN112370166A (zh) * 2020-11-09 2021-02-19 深圳蓝胖子机器智能有限公司 激光美容系统及应用激光美容系统进行激光美容的方法
KR20210051273A (ko) * 2019-10-30 2021-05-10 주식회사 포켓메모리 뎁스 카메라를 이용한 ai 스타일링 제공 방법 및 장치
CN113763273A (zh) * 2021-09-07 2021-12-07 北京的卢深视科技有限公司 人脸补全方法、电子设备和计算机可读存储介质

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106667496A (zh) * 2017-02-10 2017-05-17 广州帕克西软件开发有限公司 一种面部数据测量方法及装置
CN107392874A (zh) * 2017-07-31 2017-11-24 广东欧珀移动通信有限公司 美颜处理方法、装置及移动设备
CN107800965A (zh) * 2017-10-31 2018-03-13 广东欧珀移动通信有限公司 图像处理方法、装置、计算机可读存储介质和计算机设备
US20190279398A1 (en) * 2018-02-27 2019-09-12 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Control method, control device, terminal and computer device
US20200068110A1 (en) * 2018-04-28 2020-02-27 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Image processing methods and apparatuses, computer readable storage media, and electronic devices
CN108765273A (zh) * 2018-05-31 2018-11-06 Oppo广东移动通信有限公司 人脸拍照的虚拟整容方法和装置
CN108830901A (zh) * 2018-06-22 2018-11-16 维沃移动通信有限公司 一种图像处理方法和电子设备
CN109635783A (zh) * 2019-01-02 2019-04-16 上海数迹智能科技有限公司 视频监控方法、装置、终端和介质
CN109961021A (zh) * 2019-03-05 2019-07-02 北京超维度计算科技有限公司 一种深度图像中人脸检测方法
KR20210051273A (ko) * 2019-10-30 2021-05-10 주식회사 포켓메모리 뎁스 카메라를 이용한 ai 스타일링 제공 방법 및 장치
CN111966852A (zh) * 2020-06-28 2020-11-20 北京百度网讯科技有限公司 基于人脸的虚拟整容的方法和装置
CN112370166A (zh) * 2020-11-09 2021-02-19 深圳蓝胖子机器智能有限公司 激光美容系统及应用激光美容系统进行激光美容的方法
CN112329726A (zh) * 2020-11-27 2021-02-05 合肥的卢深视科技有限公司 人脸识别方法及装置
CN113763273A (zh) * 2021-09-07 2021-12-07 北京的卢深视科技有限公司 人脸补全方法、电子设备和计算机可读存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
YIKUIZHAI等,: "BeautyNet: Joint Multiscale CNN and Transfer Learning Method for Unconstrained Facial Beauty Prediction", 《COMPUTATIONAL INTELLIGENCE AND NEUROSCIENCE》 *
杨福猛 等,: "基于稀疏表示的快速三维人脸识别方法", 《安徽师范大学学报(自然科学版)》 *

Also Published As

Publication number Publication date
CN113902790B (zh) 2022-03-25

Similar Documents

Publication Publication Date Title
TWI751161B (zh) 終端設備、智慧型手機、基於臉部識別的認證方法和系統
US10068128B2 (en) Face key point positioning method and terminal
CN110349081B (zh) 图像的生成方法、装置、存储介质和电子设备
CN108012081B (zh) 智能美颜方法、装置、终端和计算机可读存储介质
CN110363867B (zh) 虚拟装扮系统、方法、设备及介质
US9443307B2 (en) Processing of images of a subject individual
WO2021218293A1 (zh) 图像处理方法、装置、电子设备和存储介质
US20120007859A1 (en) Method and apparatus for generating face animation in computer system
CN105096353B (zh) 一种图像处理方法及装置
CN111353336B (zh) 图像处理方法、装置及设备
EP4113430A1 (en) Beauty treatment method and device
CN105657249A (zh) 一种图像处理方法及用户终端
CN112927363A (zh) 体素地图构建方法及装置、计算机可读介质和电子设备
CN111311733A (zh) 三维模型处理方法及装置、处理器、电子设备及存储介质
CN110866139A (zh) 一种化妆处理方法、装置及设备
TWI557601B (zh) 瞳孔追蹤系統及其方法、電腦程式產品、及電腦可讀取紀錄媒體
KR20230085901A (ko) 탈모 상태 정보 제공 방법 및 장치
CN111597928A (zh) 三维模型处理方法及装置、电子设备、存储介质
CN113327191A (zh) 人脸图像合成方法及装置
KR20140006138A (ko) 가상성형 단말기 및 그를 이용한 가상성형 시스템
CN111028318A (zh) 一种虚拟人脸合成方法、系统、装置和存储介质
CN113902790B (zh) 美容指导方法、装置、电子设备和计算机可读存储介质
KR101507410B1 (ko) 모바일 단말의 라이브 메이크업 촬영 방법 및 장치
CN113342157A (zh) 眼球追踪处理方法及相关装置
CN115223240B (zh) 基于动态时间规整算法的运动实时计数方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20230411

Address after: 230091 room 611-217, R & D center building, China (Hefei) international intelligent voice Industrial Park, 3333 Xiyou Road, high tech Zone, Hefei, Anhui Province

Patentee after: Hefei lushenshi Technology Co.,Ltd.

Address before: 100083 room 3032, North B, bungalow, building 2, A5 Xueyuan Road, Haidian District, Beijing

Patentee before: BEIJING DILUSENSE TECHNOLOGY CO.,LTD.

Patentee before: Hefei lushenshi Technology Co.,Ltd.

TR01 Transfer of patent right