CN109712065A - 身体信息分析装置及其脸形模拟方法 - Google Patents

身体信息分析装置及其脸形模拟方法 Download PDF

Info

Publication number
CN109712065A
CN109712065A CN201711011882.1A CN201711011882A CN109712065A CN 109712065 A CN109712065 A CN 109712065A CN 201711011882 A CN201711011882 A CN 201711011882A CN 109712065 A CN109712065 A CN 109712065A
Authority
CN
China
Prior art keywords
face
shape
parameter
value
preset value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201711011882.1A
Other languages
English (en)
Inventor
沈轼荣
季敏昶
林晖腾
王靖维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cal Comp Big Data Inc
Original Assignee
Cal Comp Big Data Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cal Comp Big Data Inc filed Critical Cal Comp Big Data Inc
Priority to CN201711011882.1A priority Critical patent/CN109712065A/zh
Priority to US15/870,996 priority patent/US10558850B2/en
Priority to KR1020180006651A priority patent/KR102045228B1/ko
Priority to JP2018007969A priority patent/JP6498802B1/ja
Priority to EP18161768.9A priority patent/EP3477537A1/en
Publication of CN109712065A publication Critical patent/CN109712065A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A45HAND OR TRAVELLING ARTICLES
    • A45DHAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/149Segmentation; Edge detection involving deformable models, e.g. active contour models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/164Detection; Localisation; Normalisation using holistic features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • G06V40/175Static expression

Abstract

本发明公开身体信息分析装置及其脸形模拟方法。身体信息分析装置拍摄外部影像,于外部影像中识别人脸,对人脸的多个部位进行定位并决定人脸的原始脸形,依据原始脸形与目标脸形对人脸执行变形处理以获得脸形符合目标脸形的模拟人脸影像,并显示所获得的模拟人脸影像。本发明经由依据使用者的原始脸形执行不同的脸形变形处理,可有效产生使用者套用目标脸形后的模拟影像,并可使所产生的模拟影像更为自然。

Description

身体信息分析装置及其脸形模拟方法
技术领域
本发明涉及装置与方法,特别涉及身体信息分析装置及其脸形模拟方法。
背景技术
一般来说,每个人的脸形种类是天生的。然而,人们往往仍会想知道改变为期望的脸形后的样貌以作为整形或装扮(如经由配戴饰品或化妆来于视觉上呈现期望的目标脸形)的参考。
为了获得改变脸形后的样貌,于现有技术中,是由个人委托专业人士使用修图软件来绘制模拟影像。上述方式不仅费时而且费用昂贵。
有鉴于此,目前极需一种辅助装置,可有效地依据个人的原始脸形及目标脸形来自动产生模拟影像。
发明内容
本发明的目的在于提供身体信息分析装置及其脸形模拟方法,可自动产生使用者套用期望的目标脸形后的模拟人脸影像。
于一实施例中,该身体信息分析装置包括:
一影像撷取模块,用以拍摄一外部影像;
一显示模块;
一记忆体,储存对应一脸形变数的一预设值,其中该脸形变数对应一目标脸形;及
一处理单元,电性连接该影像撷取模块、该显示模块及该记忆体,该处理单元包括:
一脸部分析模块,用以于该外部影像中识别一人脸,并对该人脸的多个部位进行定位;
一脸形检测模块,用以依据该多个部位决定该人脸的一原始脸形;
一变形模块,用以依据该原始脸形对该人脸执行一变形处理以获得一模拟人脸影像,其中该模拟人脸影像的该脸形变数符合该预设值;及
一输出控制模块,用以控制该显示模块显示该模拟人脸影像。
如上所述,其中该身体信息分析装置更包括一输入界面,电性连接该处理单元,该输入界面用以接受选择多个目标脸形的其中之一的一目标脸形选择操作;
其中,该记忆体储存该多个脸形变数的该多个预设值,该多个脸形变数分别对应该多个目标脸形;该变形模块执行该变形处理以调整该人脸的对应所选择的该目标脸形的该脸形变数为该预设值。
如上所述,其中该处理单元更包括一计算模块,用以依据该人脸的眉毛与嘴部之间的垂直距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第一脸形变数的值,计算该人脸的轮廓的一脸颊角度并作为该人脸的一第二脸形变数的值,并依据该人脸的额头两侧之间的水平距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第三脸形变数的值。
如上所述,其中该脸形检测模块是于判断该人脸的该第一脸形变数的值符合一第一预设值时判定该人脸为椭圆形,于判断该人脸的该第一脸形变数的值符合一第二预设值且该人脸的该第二脸形变数的值大于一第三预设值时判定该人脸为方形,于判断该人脸的该第一脸形变数的值符合该第二预设值且该人脸的该第二脸形变数的值不大于该第三预设值时判定该人脸为圆形,于判断该人脸的该第三脸形变数的值符合一第四预设值时判定该人脸为倒三角形,于判断该人脸的该第三脸形变数的值符合一第五预设值时判定该人脸为菱形,并于判断该人脸的该第三脸形变数的值不符合该第四预设值与该第五预设值时判定该人脸为长形。
如上所述,其中该变形模块更包括:
一第一变形模块,于该目标脸形为椭圆形时调整该人脸的该第一脸形变数为该第一预设值,并于该目标脸形为方形或圆形时调整该人脸的该第一脸形变数为该第二预设值;
一第二变形模块,于该目标脸形为方形时调整该人脸的该第二脸形变数为大于该第三预设值,并于该目标脸形为圆形时调整该人脸的该第二脸形变数为不大于该第三预设值;及
一第三变形模块,于该目标脸形为倒三角形时调整该人脸的该第三脸形变数为该第四预设值,并于该目标脸形为菱形时调整该人脸的该第三脸形变数为该第五预设值。
如上所述,其中该处理单元更包括一评估模块,用以依据该人脸的该脸形变数的值与该脸形变数的该预设值决定一变形量,并依据该原始脸形与该目标脸形决定该人脸的一变形范围;
其中该变形模块是依据该变形量对该人脸的该变形范围执行该变形处理。
如上所述,其中该评估模块于该目标脸形为椭圆形且该原始脸形为方形、圆形或倒三角形时,设定该变形范围为该人脸的下颚区域,并设定一变形方式为水平内缩,于该目标脸形为椭圆形且该原始脸形为倒三角形时,设定该变形范围为该人脸的下颚区域,并设定该变形方式为水平扩增,于该目标脸形为椭圆形且该原始脸形为菱形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为水平扩增,并于该目标脸形为椭圆形且该原始脸形为长形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为垂直内缩。
如上所述,其中该变形模块是依据该变形量及该变形方式对该人脸的该变形范围执行该变形处理以调整该人脸的该脸形变数为该预设值。
于一实施例中,该脸形模拟方法应用于该身体信息分析装置,其特征在于,该脸形模拟方法包括以下步骤:
a)自该身体信息分析装置的一记忆体读取一脸形变数的一预设值,其中该脸形变数对应一目标脸形;
b)经由该身体信息分析装置的一影像撷取模块拍摄一外部影像;
c)控制该身体信息分析装置的一处理单元于该外部影像中识别出一人脸时,对该人脸的多个部位进行定位;
d)依据该多个部位决定该人脸的一原始脸形;
e)依据该原始脸形对该外部影像的该人脸执行一变形处理以获得一模拟人脸影像,其中该模拟人脸影像的该脸形变数符合该预设值;及
f)输出该模拟人脸影像。
如上所述,其中该脸形模拟方法于该步骤a)包括以下步骤:
a1)经由该身体信息分析装置的一输入界面接受选择多个目标脸形的其中之一的一目标脸形选择操作;及
a2)取得该脸形变数的该预设值,其中该脸形变数对应所选择的该目标脸形。
如上所述,其中该步骤d)包括以下步骤:
d1)依据该人脸的眉毛与嘴部之间的垂直距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第一脸形变数的值;
d2)于判断该人脸的该第一脸形变数的值符合一第一预设值时,判定该人脸为椭圆形;
d3)于判断该人脸的该第一脸形变数的值符合一第二预设值时,计算该人脸的轮廓的一脸颊角度并作为该人脸的一第二脸形变数的值;
d4)于判断该人脸的该第一脸形变数的值符合一第二预设值且该人脸的该第二脸形变数的值大于一第三预设值时,判定该人脸为方形;
d5)于判断该人脸的该第一脸形变数的值符合该第二预设值且该人脸的该第二脸形变数的值不大于该第三预设值时,判定该人脸为圆形;
d6)依据该人脸的额头两侧之间的水平距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第三脸形变数的值;
d7)于判断该人脸的该第三脸形变数的值符合一第四预设值时,判定该人脸为倒三角形;
d8)于判断该人脸的该第三脸形变数的值符合一第五预设值时,判定该人脸为菱形;及
d9)于判断该人脸的该第三脸形变数的值不符合该第四预设值与该第五预设值时,判定该人脸为长形。
如上所述,其中该步骤e)是于该目标脸形为椭圆形时调整该人脸的该第一脸形变数为该第一预设值,于该目标脸形为方形时调整该人脸的该第一脸形变数为该第二预设值并调整该人脸的该第二脸形变数为大于该第三预设值,于该目标脸形为圆形时调整该人脸的该第一脸形变数为该第二预设值并调整该人脸的该第二脸形变数为不大于该第三预设值,于该目标脸形为倒三角形时调整该人脸的该第三脸形变数为该第四预设值,并于该目标脸形为菱形时调整该人脸的该第三脸形变数为该第五预设值。
如上所述,其中该步骤e)包括以下步骤:
e1)依据该人脸的该脸形变数的值与该脸形变数的该预设值决定一变形量;
e2)依据该原始脸形与该目标脸形决定该人脸的一变形范围;及
e3)依据该变形量对该人脸的该变形范围执行该变形处理。
如上所述,其中该步骤e2)包括以下步骤:
e21)于该目标脸形为椭圆形且该原始脸形为方形、圆形或倒三角形时,设定该变形范围为该人脸的下颚区域,并设定一变形方式为水平内缩;
e22)于该目标脸形为椭圆形且该原始脸形为倒三角形时,设定该变形范围为该人脸的下颚区域,并设定该变形方式为水平扩增;
e23)于该目标脸形为椭圆形且该原始脸形为菱形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为水平扩增;及
e24)于该目标脸形为椭圆形且该原始脸形为长形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为垂直内缩。
如上所述,其中该步骤e3)是依据该变形量及该变形方式对该人脸的该变形范围执行该变形处理以调整该人脸的该脸形变数为该预设值。
本发明经由依据使用者的原始脸形执行不同的脸形变形处理,可有效产生使用者套用目标脸形后的模拟影像,并可使所产生的模拟影像更为自然。
以下结合附图和具体实施例对本发明进行详细描述,但不作为对本发明的限定。
附图说明
图1为本发明的第一实施例的系统的架构图;
图2为本发明的身体信息分析装置的第一示意图;
图3为本发明的身体信息分析装置的第二示意图;
图4为本发明的第一实施例的身体信息分析装置的架构图;
图5为本发明的第一实施例的记忆体的示意图;
图6为本发明的第一实施例的脸形模拟方法的流程图;
图7为本发明的第二实施例的脸形模拟方法的部分流程图;
图8A为本发明的第三实施例的脸形模拟方法的第一部分流程图;
图8B为本发明的第三实施例的脸形模拟方法的第二部分流程图;
图9为本发明的第四实施例的脸形模拟方法的部分流程图;
图10为本发明的第五实施例的脸形模拟方法的部分流程图;
图11为本发明的第一脸形变数的示意图;
图12为本发明的第二脸形变数的示意图;
图13为本发明的第三脸形变数的示意图;
图14A为本发明的模拟人脸影像的示意图;
图14B为本发明的第一原始脸形的示意图;
图14C为本发明的第二原始脸形的示意图;
图14D为本发明的第三原始脸形的示意图;
图14E为本发明的第四原始脸形的示意图;及
图14F为本发明的第五原始脸形的示意图。
其中,附图标记:
1…身体信息分析装置
10…处理单元
11…镜面屏幕
111…显示模块
12…影像撷取模块
13…按键
14…感测器
15…输入界面
16…无线传输模块
17…记忆体
2…电子装置
21…软件
30…无线路由器
32…网际网络
34…服务器
4…镜像
500…脸部分析模块
501…计算模块
502…脸形检测模块
503…评估模块
504…变形模块
505…输出控制模块
506…第一变形模块
507…第二变形模块
508…第三变形模块
6…人脸
7、700-703、710-712、720-726、730-731、742-743、740-741…特征点
80…模拟人脸影像
81-85…人脸
D1-D4…距离
L1-L3…脸颊切线
θ1-θ2…脸颊夹角
S10…S16…脸形模拟步骤
S20-S21…目标脸形选择步骤
S300-S313…脸形检测步骤
S40-S42…变形处理步骤
S50-S55…变形范围设定步骤
具体实施方式
下面结合附图和具体实施例对本发明技术方案进行详细的描述,以更进一步了解本发明的目的、方案及功效,但并非作为本发明所附权利要求保护范围的限制。
本发明公开了一种身体信息分析装置1(下面简称为分析装置1),所述分析装置1主要用以执行一种脸形模拟方法,可依据使用者的脸形种类及目标脸形产生模拟人脸影像,而令使用者可轻易得知套用目标脸形后的样貌。
参阅图1,为本发明的第一实施例的系统的架构图。于图1的实施例中,使用者可操作电子装置(移动装置)2来对分析装置1进行设定。
具体而言,电子装置2的记忆单元(图未标示)安装有软件21。软件21用来与分析装置1建立连接(如分析装置1的制造商所开发并提供的应用程序)。并且,使用者可经由操作软件21来对分析装置1进行各种设定动作,例如输入使用者的数据、注册使用者的影像(如脸部影像)及/或设定各种预设值(如后述的各种脸形变数的预设值)等。
于一实施例中,使用者亦可直接操作分析装置1的输入界面(如图4所示的输入界面15)来进行各种设定动作。
于一实施例中,分析装置1的无线传输模块(如图4所示的无线传输模块16)可通过Wi-Fi通讯技术、蓝牙通讯技术、Zigbee通讯技术、无线射频(RF)通讯技术、红外线通讯技术、光通讯技术、声音通讯技术及/或其他无线通讯技术来与电子装置2进行数据传输。
于一实施例中,分析装置1可连接至所在区域中的无线路由器30,以经由无线路由器30连接网际网络32。藉此,分析装置1可经由网际网络32进行固件更新、数据上传与下载等动作。并且,分析装置1还可经由网际网络32将使用者的身体信息(如后述的外部影像、人脸影像及/或模拟人脸影像等等)传送至远端的服务器34以令使用者于远端进行查看,或是藉此实现异地备援的目的。
请同时参阅图2及图3,图2为本发明的身体信息分析装置的第一示意图,图3为本发明的身体信息分析装置的第二示意图。图2及图3的实施例的分析装置1主要设置于使用者的卧室或化妆室,以便使用者进行身体信息(例如脸部、颈部、手部或肌肤)的检测与分析。
分析装置1具有镜面屏幕11。当分析装置1启动(如图2所示)时,可通过镜面屏幕11显示图形使用者界面(Graphical User Interface,GUI),并藉由图形使用者界面与使用者进行互动。另一方面,当分析装置1被关闭(如图3所示)时,镜面屏幕11可做为单纯的镜子来使用,以反射使用者的光学的镜像4。
本发明主要是通过分析装置1来自动检测使用者的脸形种类,并显示对应的脸形信息来供使用者知悉,以协助使用者进行对应的装扮,因此镜面屏幕11可以显示图形使用者界面并且同时反射使用者的光学的镜像4,以利于在使用者化妆时对使用者的脸形种类进行分析,并且同时提供辅助(容后详述)。
于一实施例中,分析装置1还具有影像撷取模块12,设置于分析装置1上并且可接受角度的调整。于一实施例中,影像撷取模块12可对使用者拍摄高解析度影像(例如脸部影像、颈部影像或手部影像等),分析装置1可藉由所述影像分析使用者的身体信息及/或化妆进度。于另一实施例中,影像撷取模块12可撷取外部的信息(例如一维条码、二维条码等),以藉由信息的内容来取得对应数据。
并且,分析装置1是将经由影像撷取模块12所拍摄的影像即时显示于镜面屏幕11中。藉此,即便镜面屏幕11未关闭,使用者亦可即时于镜面屏幕11中查看自身的电子的镜像4。
更进一步地,分析装置1还可先对所拍摄的影像进行即时处理(如于拍摄影像上绘制对应的轮廓图案或嵌入图文信息),再将处理后的影像显示于镜面屏幕11。
藉此,分析装置1可经由扩增实境的方式(Augmented Reality,AR),于使用者化妆时即时且直觉地于镜面屏幕11上提供辅助信息,而可有效提升使用者体验。
于一实施例中,镜面屏幕11可为触控式屏幕,使用者可通过镜面屏幕11对分析装置1进行数据的输入动作。
分析装置1还可具备多个按键13。本实施例中,多个按键13可为实体按键(button)或触控按键(touch key),不加以限定。使用者可藉由触发按键13对上述图形使用者界面进行操控(例如控制图形使用者界面回到首页、上一页或下一页等),或是令分析装置1快速执行对应的功能(例如开启镜面屏幕11、关闭镜面屏幕11、启动影像撷取模块12等)。
分析装置1还可具有一或多个感测器14(例如为温度感测器、湿度感测器等),以感测分析装置1所在环境的环境数据,藉此提升分析装置1对使用者的身体信息的检测与分析的准确率。于一实施例中,所述感测器14还可为动作感测器(motion sensor),分析装置1可藉由动作感测器感测使用者的移动手势(例如向左挥、向右挥、向上挥、向下挥、往前推或往后拉等)。如此一来,使用者可藉由手势来对分析装置1进行数据输入动作,不需触碰上述镜面屏幕11或按键13,以避免指纹的残留。
续请参阅图4,为本发明的第一实施例的身体信息分析装置的架构图。如图4所示,分析装置1主要包括处理单元10,以及与处理单元10电性连接的显示模块111、影像撷取模块12、输入界面15、无线传输模块16及记忆体17。
于一实施例中,影像撷取模块12为相机或摄影机,用以拍摄外部影像(如使用者的脸部影像)与外部信息。分析装置1可通过外部影像对使用者进行识别(例如脸部识别、颈部识别或手部识别等),以对使用者的脸部、颈部或手部等部位进行分析,或是通过外部信息的内容来执行对应的动作。
显示模块111用以显示上述的图形使用者界面。于一实施例中,显示模块111安装于所述镜面屏幕11之中。当显示模块111被致能时,显示模块111的光源可穿透镜面屏幕11的单向玻璃(图未标示)并投射至使用者眼中,而令使用者可于镜面屏幕11看见图形使用者界面。当显示模块111被禁能时,由于单向玻璃的单面透光特性,使用者仅可于镜面屏幕11上看见自身的光学的镜像4。于一实施例中,分析装置1还可调整显示模块111的光源强度或是显示区域,以令镜面屏幕11可以在反射使用者的光学的镜像4的同时显示图形使用者界面。
分析装置1通过输入界面15接收使用者的外部输入,藉此使用者可与图形使用者界面进行互动,或是进行所需的设定动作。于一实施例中,输入界面15可为上述的感测器14,用以感测使用者的手势输入。于另一实施例中,输入界面15可为上述的影像撷取模块12,用以撷取外部影像或外部信息。于又一实施例中,输入界面15可为触控屏幕或按键13,可接受使用者的输入动作。于再一实施例中,输入界面15可为麦克风,用以接收外部音频。
无线传输模块16用以连接网际网络32。具体而言,使用者可藉由网际网络32从远端连接至分析装置1,以随时查看分析装置1所记录的各种信息(例如身体信息)。
记忆体17用以储存数据。于一实施例中,记忆体17可储存使用者的脸形种类、使用者的身体信息历程、分析装置1的语音指令、使用者持有的化妆品的信息、化妆教学影片及/或后述的预设值等等。
处理单元10连接显示模块111、影像撷取模块12、输入界面15、无线传输模块16及记忆体17,并且记忆体17(如非暂态储存媒体)储存有电脑可执行程序码(图未标示)。处理单元10通过执行前述电脑可执行程序码,可进一步实现本发明的脸形模拟方法。
请同时参阅图5,为本发明的第一实施例的处理单元的示意图。具体而言,上述电脑可执行程序码包括用以实现功能模块的程序码:脸部分析模块500、计算模块501、脸形检测模块502、评估模块503、变形模块504、输出控制模块505、第一变形模块506、第二变形模块507及第三变形模块508。并且,处理单元10主要是通过执行上述电脑可执行程序码来实作各功能模块,进而实现本发明的脸形模拟方法中的各个功能。
脸部分析模块500用以对影像撷取模块12所撷取的外部影像执行人脸识别处理,并对所识别的人脸的多个部位进行定位。具体而言,脸部分析模块500可于外部影像中识别出人脸(如图11-13所示的人脸6)的影像,并于人脸6中识别特定部位的影像的多个特征点(如图11-13所示的多个特征点7与特征点700-743),其中各特征点7分别对应使用者的不同脸部部位(如眼睛、嘴部或眉毛等等)的不同特征(如眼角、嘴角、下唇或眉尾等等)。
计算模块501用以依据前述多个特征点7计算执行脸形检测处理所需的变数值(如后述的第一脸形变数的值、第二脸形变数的值与第三脸形变数的值)。
脸形检测模块502用以对当前的人脸6执行脸形检测处理,以检测人脸6的原始脸形。
评估模块503用以依据人脸6的变数值及目标脸形计算执行变形处理所需的变形变数(如变形范围、变形方式及变形量)。
变形模块504对人脸6执行变形处理以产生模拟人脸影像。
于一实施例中,变形模块504包括第一变形模块506、第二变形模块507及第三变形模块508。第一变形模块506用以调整人脸6的第一脸形变数的值,第二变形模块507用以调整人脸6的第二脸形变数的值,第三变形模块508用以调整人脸6的第三脸形变数的值。
输出控制模块505用以控制输出装置(如显示模块111)输出模拟人脸影像。于一实施例中,输出控制模块505更包括一辅助信息产生模块(图未标示)。具体而言,辅助信息产生模块可依据人脸6及模拟人脸影像产生辅助信息(如人脸6及模拟人脸影像之间的相似度、变形处理的范围或方向或变形量),并将辅助信息显示于显示模块111。藉此,本发明可令使用者查看自身的脸形与目标脸形之间的差异信息,而可有效提升用户体验。
藉此,使用者可于显示模块111中查看套用目标脸形后的模拟的样貌。
续请参阅图6,为本发明的第一实施例的脸形模拟方法的流程图。本发明的分析装置1是通过处理单元10执行上述的电脑可执行程序码(如上述各功能模块500-508),进而实现本发明各实施例的脸形模拟方法的各步骤。
本实施例的脸形模拟方法包括用以实现脸形模拟功能的以下步骤。
步骤S10:分析装置1的处理单元10自记忆体17中读取脸形变数的预设值,其中所述脸形变数是对应一种使用者期望的目标脸形。
步骤S11:处理单元10控制影像撷取模块12对使用者进行拍摄,以取得包括使用者的影像的外部影像。
于一实施例中,处理单元10可即时控制显示模块111显示所拍摄的外部影像,以呈现电子镜效果。
步骤S12:处理单元10经由脸部分析模块500对外部影像执行人脸识别处理,以判断外部影像中是否包括完整的人脸6。
若处理单元10判断于外部影像中识别人脸6,则执行步骤S13。否则,再次执行步骤S11以重新拍摄一张外部影像。
步骤S13:处理单元10经由脸部分析模块500于外部影像中识别人脸6的位置与范围,并依据所识别的人脸6的位置与范围自外部影像中裁切出人脸6。
接着,处理单元10经由脸部分析模块500来对人脸6执行脸部分析处理,以识别人脸6的多个部位(如眉毛、额头、嘴部、轮廓或眼睛等等)。
于一实施例中,前述脸部分析处理是一种特征分析处理,可识别人脸6的特定部位的多个特征。
具体而言,前述特征分析处理是通过特征标记(Feature Landmark)演算法对人脸6进行分析,以对人脸6的特定部位(如眉毛、额头、嘴部、人脸轮廓或眼睛)的多个特征进行定位,但不加以限定。更进一步地,前述特征标记演算法是使用Dlib函式库(Library)来加以实现。
请参阅图11至图13,图11为本发明的第一脸形变数的示意图,图12为本发明的第二脸形变数的示意图,图13为本发明的第三脸形变数的示意图。于执行特征分析处理时,脸部分析模块500是通过上述特征标记演算法对人脸6进行分析。前述特征标记演算法为本技术领域中的常用技术手段,其可基于机器学习(Machine Learning)技术对人脸6进行特定部位的分析,以于人脸6中辨识一或多个人脸的特定部位(如眉毛、额头、嘴部、人脸轮廓或眼睛)的多个特征点7,并且各特征点分别对应至所述特定部位的不同特征。
以辨识眉毛为例,各特征点可分别对应眉毛的眉头、梅峰或眉尾等等;以辨识嘴部为例,各特征点可分别对应嘴部的上唇、嘴角或下唇。前述特征点的数量可为68个特征点、198个特征点或其他数量特征点,不加以限定。
并且,前述特征标记演算法可进一步将特定部位的多个特征点标记于人脸6。如图11至图13所示,特征标记演算法可将多个特征点7标记于人脸6。
于一实施例中,脸部分析模块500可依据各特征点所属的部位及所对应的特征对各特征点进行编号。藉此,本发明可依据多个特征点的号码、形状、排序等信息而于人脸6中确定各个部位的位置,以识别特定部位。
复请参阅图6。于步骤S13后,处理单元10已经由脸部分析模块500识别出人脸6的多个部位(如多个部位的多个特征点7),并接着执行步骤S14:处理单元10经由脸形检测模块502依据所识别的人脸6的多个部位(或多个的多个特征点7)执行一或多种脸形检测处理(如椭圆形脸检测处理、方形脸检测处理、圆形脸检测处理、倒三角形脸检测处理、菱形脸检测处理或长形脸检测处理等等),以决定当前的人脸6的原始脸形。
于一实施例中,处理单元10可经由计算模块501依据人脸6计算执行脸形检测处理所需的脸形变数的值,再经由脸形检测模块502依据所计算的脸形变数的值执行脸形检测处理。
于一实施例中,处理单元10可依序执行椭圆形脸检测处理、方形脸检测处理、圆形脸检测处理、倒三角形脸检测处理、菱形脸检测处理及长形脸检测处理,以依序判断当前的人脸6是否为椭圆形、方形、圆形、倒三角形、菱形或长形。
步骤S15:处理单元10经由变形模块504依据所检测到的原始脸形对人脸6执行变形处理,以产生模拟人脸影像。并且,所产生的模拟人脸影像的脸形变数的值符合步骤S10所取得的预设值,所产生的模拟人脸影像的脸形符合目标脸形。
于一实施例中,处理单元10是依据原始脸形及目标脸形设定变形范围,再依据步骤S10所取得的脸形变数的预设值及人脸6的相同的脸形变数的值来计算变形量,并依据所设定的变形范围及所计算的变形量对人脸6执行变形处理来获得模拟人脸影像。
步骤S16:处理单元10经由输出控制模块505将步骤S15所产生的模拟人脸影像显示于显示模块111。
于另一实施例中,处理单元10可经由无线传输模块16输出模拟人脸影像至外部(如电子装置2或服务器34)。
本发明经由依据使用者的原始脸形执行不同的脸形变形处理,可有效产生使用者套用目标脸形后的模拟影像,并可使所产生的模拟影像更为自然。
续请参阅图11-13,接着示例性说明本发明的脸形变数的定义。
于本发明的一实施例中,是依据脸形变数的值来执行脸形检测处理或变形处理。具体而言,于执行脸形检测处理时,分析装置1可依据人脸6的各脸形变数的值来决定人脸6的原始脸形。于执行变形处理时,分析装置1可经由使人脸6发生变形来改变人脸6的特定脸形变数的值,进而使人脸6的特定脸形变数的值变更为预设值。
本发明的一实施例更定义了人脸中的三种脸形变数(分别为第一脸形变数、第二脸形变数及第三脸形变数)。
请参阅图11,首先说明如何计算第一脸形变数的值。于计算第一脸形变数的值时,计算模块501选择眉毛的眉尾特征点700、702的其中之一(以选择眉尾特征点700为例),选择嘴部的嘴角特征点701、703的其中之一(以选择嘴角特征点703为例),并计算眉毛与嘴部(如眉尾特征点700与嘴角特征点703)之间的垂直距离(如图11所示的第一距离D1)。接着,计算模块501计算人脸轮廓的多个轮廓特征点(如选择与下唇特征点710相同高度的轮廓特征点711、712)之间的水平距离。具体而言,计算模块501选择多个轮廓特征点的其中之二,并计算所选择的两轮廓特征点的水平距离(如图11所示的第二距离D2)。最后,计算模块501经由第一计算模块501计算第一距离D1与第二距离D2的比值并作为第一脸形变数的值。举例来说,若第一距离D1为500像素,第二距离D2为800像素,则第一脸形变数的值为
请参阅图12,首先说明如何计算第二脸形变数的值。首先,计算模块501选择多个轮廓特征点(以选择相邻的轮廓特征点720-722为例),并依据所选择的多个轮廓特征点720-722计算脸颊切线L1。接着,计算模块501再次选择多个轮廓特征点(以选择相邻的轮廓特征点722-724为例,所选择的轮廓特征点可先前选择的轮廓特征点部份相同或完全不同),并依据所选择的多个轮廓特征点722-724计算脸颊切线L2。接着,计算模块501再次选择多个轮廓特征点(以选择相邻的轮廓特征点724-726为例,所选择的轮廓特征点可先前选择的轮廓特征点部份相同或完全不同),并依据所选择的多个轮廓特征点724-726计算脸颊切线L3。接着,计算模块501计算脸颊切线L1与脸颊切线L2之间的第一脸颊角度θ1,并计算脸颊切线L2与脸颊切线L3之间的第二脸颊角度θ2。最后,计算模块501自第一脸颊角度θ1与第二脸颊角度θ2中选择其中之一(如选择最大的脸颊角度)做为第二脸形变数的值。
值得一提的是,虽于本实施例中是以计算两组脸颊角度为例进行说明,但不以此限定。于其他实施例中,计算模块501亦可仅计算一组脸颊角度,或计算三组以上脸颊角度。
请参阅图13,首先说明如何计算第三脸形变数的值。首先,计算模块501选择额头两侧的额头特征点730、731,并计算两额头特征点730、731之间的水平距离(如图13所示的第三距离D3),选择多个轮廓特征点的其中之二,并计算所选择与眼睛的眼底特征点740、741相同高度的轮廓特征点742、743两轮廓特征点的水平距离(如图13所示的第四距离D4)。最后,计算模块501计算第三距离D3与第四距离D4的比值并作为第三脸形变数的值。举例来说,若第三距离D3为800像素,第四距离D4为1000像素,则第三脸形变数的值为
于一实施例中,所述额头特征点730、731可定义为由两眼的眼尾分别垂直向上延伸到额头的位置,但不以此为限。
续请同时参阅图6及图7,图7为本发明的第二实施例的脸形模拟方法的部分流程图。于本实施例中,使用者可操作输入界面15来选择任一种脸形(如椭圆形)做为目标脸形。并且,于本实施例中,记忆体17储存多个脸形变数的多个预设值,前述多个脸形变数分别对应不同的多个目标脸形。相较于图6所示的实施例,本实施例的脸形模拟方法的步骤S10包括以下步骤。
步骤S20:处理单元10经由输入界面15接受目标脸形选择操作,前述目标脸形选择操作是选择多个目标脸形(如椭圆形、方形、圆形、倒三角形、菱形或长型)的其中之一。
步骤S21:处理单元10决定对应所选择的目标脸形的脸形变数,并自记忆体17读取此脸形变数的预设值。
藉此,使用者可将期望的脸形设定为目标脸形,并查看套用期望的目标脸形后的模拟样貌。
续请同时参阅图6、图8A及图8B,图8A为本发明的第三实施例的脸形模拟方法的第一部分流程图,图8B为本发明的第三实施例的脸形模拟方法的第二部分流程图。相较于图6所示的实施例,本实施例的脸形模拟方法的步骤S14包括用以实现脸形检测功能的以下步骤。
步骤S300:处理单元10经由计算模块501计算所拍摄的外部影像中的人脸6的第一脸形变数的值。第一脸形变数的计算方式请参阅前述图11的相关说明,于此不再赘述。
步骤S301:处理单元10经由脸形检测模块502自记忆体17读取第一脸形变数的第一预设值(如1),并比较人脸6的第一脸形变数的值是否符合第一预设值。
若处理单元10判断人脸6的第一脸形变数的值符合第一预设值,则执行步骤S302。否则,处理单元10执行步骤S303。
步骤S302:处理单元10经由脸形检测模块502判定人脸6为椭圆形。接着,处理单元10执行步骤S15。
若于步骤S301中处理单元10判断人脸6的第一脸形变数的值不符合第一预设值,则执行步骤S303:处理单元10经由脸形检测模块502自记忆体17读取第一脸形变数的第二预设值并比较人脸6的第一脸形变数的值是否符合第二预设值。
于一实施例中,前述预设值(如第一预设值及第二预设值)可为数值范围(如0.9-1.1或0.6-0.7),处理单元10是于人脸6的第一脸形变数的值落入前述数值范围时判定人脸6的第一脸形变数的值符合预设值。
若处理单元10判断人脸6的第一脸形变数的值符合第二预设值,则执行步骤S304。否则,处理单元10执行步骤S308。
步骤S304:处理单元10经由计算模块501计算所拍摄的外部影像中的人脸6的第二脸形变数的值。第二脸形变数的计算方式请参阅前述图12的相关说明,于此不再赘述。
步骤S305:处理单元10经由脸形检测模块502自记忆体17读取第二脸形变数的第三预设值(如5°),并比较人脸6的第二脸形变数的值是否符合第三预设值。
于一实施例中,处理单元10是于人脸6的第二脸形变数的值大于第三预设值时判定人脸6的第二脸形变数的值符合预设值,并于不大于第三预设值时判定人脸6的第二脸形变数的值不符合预设值。
于一实施例中,前述第三预设值可为数值范围(如3°-5°),处理单元10是于人脸6的第二脸形变数的值落入前述数值范围时判定人脸6的第二脸形变数的值符合第三预设值。
若处理单元10判断人脸6的第二脸形变数的值符合第三预设值,则执行步骤S306。否则,处理单元10执行步骤S307。
步骤S306:处理单元10经由经由脸形检测模块502判定人脸6为方形。接着,处理单元10执行步骤S15。
步骤S307:处理单元10经由经由脸形检测模块502判定人脸6为圆形。接着,处理单元10执行步骤S15。
若于步骤S303中处理单元10判断人脸6的第一脸形变数的值不符合第二预设值,则处理单元10执行步骤S308:处理单元10经由计算模块501计算所拍摄的外部影像中的人脸6的第三脸形变数的值。第三脸形变数的计算方式请参阅前述图13的相关说明,于此不再赘述。
步骤S309:处理单元10经由脸形检测模块502自记忆体17读取第三脸形变数的第四预设值(如1),并比较人脸6的第三脸形变数的值是否符合第四预设值。
若处理单元10判断人脸6的第三脸形变数的值符合第四预设值,则执行步骤S310。否则,处理单元10执行步骤S311。
步骤S310:处理单元10经由经由脸形检测模块502判定人脸6为倒三角形。接着,处理单元10执行步骤S15。
若于步骤S309中处理单元10判断人脸6的第三脸形变数的值不符合第四预设值,则处理单元10执行步骤S311:处理单元10经由脸形检测模块502自记忆体17读取第三脸形变数的第五预设值并比较人脸6的第三脸形变数的值是否符合第五预设值。
于一实施例中,前述预设值(如第四预设值及第五预设值)可为数值范围(如0.9-1.1或0.65-0.67),处理单元10是于人脸6的第三脸形变数的值落入前述数值范围时判定人脸6的第三脸形变数的值符合预设值。
若处理单元10判断人脸6的第三脸形变数的值符合第五预设值,则执行步骤S312。否则,处理单元10执行步骤S313。
步骤S312:处理单元10经由经由脸形检测模块502判定人脸6为菱形。接着,处理单元10执行步骤S15。
步骤S313:处理单元10经由经由脸形检测模块502判定人脸6为长形。接着,处理单元10执行步骤S15。
藉此,本发明可有效判断人脸6的原始脸形的种类。
续请同时参阅图6及图9,图9为本发明的第四实施例的脸形模拟方法的部分流程图。相较于图6所示的实施例,本实施例的脸形模拟方法的步骤S15包括用以实现脸形变形功能的以下步骤。
步骤S40:处理单元10经由评估模块503依据步骤S13所检测出的人脸6的原始脸形与使用者期望的目标脸形决定人脸6的变形范围。
于一实施例中,处理单元10依据原始脸形与目标脸形于几何图形上的差异来设定变形范围,并可进一步设定变形方式(如水平内缩、水平扩增、垂直内缩、垂直扩增、增加脸颊角度或减少脸颊角度)。
举例来说,若人脸6的原始脸形为方型且目标脸形为圆形,则处理单元10可将人脸6的脸颊下轮廓设定为变形范围,并且,于后续的变形处理中是经由减少人脸6的脸颊角度来将人脸6的原始脸形自方型修整为圆形。
于另一例子中,若人脸6的原始脸形为椭圆型且目标脸形为菱形,则处理单元10可将人脸6的上轮廓(如额头)与下轮廓设定为变形范围,并且,于后续的变形处理中是经由减少人脸6的上轮廓的两侧之间的距离及下轮廓的两侧之间的距离来将人脸6的原始脸形自椭圆形修整为菱形。
步骤S41:处理单元10经由评估模块503依据人脸6的脸形变数(如前述第一脸形变数、第二脸形变数或第三脸形变数)的值与相同的脸形变数的预设值决定变形量。
于一实施例中,处理单元10依据脸形变数的值与预设值之间的差值来决定变形量。
步骤S42:处理单元10经由变形模块504依据变形量使用以决定的变形方式来对人脸6的变形范围执行变形处理以调整人脸6的脸形变数为符合预设值,并将调整后的人脸6做为模拟人脸影像。
于一实施例中,处理单元10是依据当前的目标脸形选择第一变形模块506、第二变形模块507或第三变形模块508至少其中之一来调整人脸6的对应目标脸形的脸形变数。
举例来说,处理单元10可于目标脸形为椭圆形时经由第一变形模块506调整人脸6的第一脸形变数6为第一预设值。并且,处理单元10可于目标脸形为方形时经由第一变形模块506调整人脸6的第一脸形变数为第二预设值并经由经由第二变形模块507调整人脸的第二脸形变数为大于第三预设值。并且,处理单元10可于目标脸形为圆形时经由第一变形模块506调整人脸的第一脸形变数为第二预设值并经由经由第二变形模块507调整人脸的第二脸形变数为不大于第三预设值。并且,处理单元10可于目标脸形为倒三角形时经由第三变形模块508调整人脸的第三脸形变数为第四预设值。并且,处理单元10可并于目标脸形为菱形时经由第三变形模块508调整人脸的第三脸形变数为第五预设值。
本发明经由依据人脸6的原始脸形来计算变形相关变数并执行变形处理,可使所产生的模拟人脸影像更为自然
续请同时参阅图6、图9、图10及图14A至图14F,图10为本发明的第五实施例的脸形模拟方法的部分流程图,图14A为本发明的模拟人脸影像的示意图,图14B为本发明的第一原始脸形的示意图,图14C为本发明的第二原始脸形的示意图,图14D为本发明的第三原始脸形的示意图,图14E为本发明的第四原始脸形的示意图,图14F为本发明的第五原始脸形的示意图。
本实施例的脸形模拟方法可依据不同的原始脸形来设定不同的变形变数(如变形范围与变形方法)。于本实施例中,目标脸形为椭圆形(即于后续变形处理中,是对人脸的第一脸形变数进行调整,且第一脸形变数的预设值为1)。并且,不同脸形的人脸(如图14B至图14F所示的人脸81-85)经过本实施例的变形处理后,可获得脸形为椭圆形的模拟人脸影像(如图14A所示的模拟人脸影像80)。
值得一提的是,虽本实施例是以目标脸形为椭圆形为例进行说明,但本技术领域的技术人员依据本说明书的公开内容亦可将本发明应用于其他目标脸形。
相较于图9所示的实施例,本实施例的脸形模拟方法的步骤S40包括以下步骤。
步骤S50:处理单元10于人脸6的原始脸形为椭圆形时经由输出控制模块505输出一组不须变形信息以告知使用者人脸6的原始脸形已属于目标脸形。并且,处理单元10不会设定任何变形参数,而不会执行任何变形处理。
步骤S51:处理单元10于人脸6的原始脸形为方形时经由评估模块503将变形范围设定为人脸6的下颚区域,并将变形方式设定为水平内缩。
举例来说,如图14B所示,人脸81的脸形为方型且人脸81的第一脸形变数为因此,处理单元10判断人脸81的下颚区域过宽,而须执行水平内缩变形处理以将人脸81的第一脸形变数调整为1,并对应设定变形范围与变形方式。
步骤S52:处理单元10于人脸6的原始脸形为圆形时经由评估模块503将变形范围设定为人脸6的下颚区域,并将变形方式设定为水平内缩。
举例来说,如图14C所示,人脸82的脸形为圆形且人脸82的第一脸形变数为因此,处理单元10判断人脸82的下颚区域过宽,而须执行水平内缩变形处理以将人脸82的第一脸形变数调整为1,并对应设定变形范围与变形方式。
步骤S53:处理单元10于人脸6的原始脸形为倒三角形时经由评估模块503将变形范围设定为人脸6的下颚区域,并将变形方式设定为水平扩增。
举例来说,如图14D所示,人脸83的脸形为倒三角形且人脸83的第一脸形变数为因此,处理单元10判断人脸83的下颚区域过窄,而须执行水平扩增变形处理以将人脸83的第一脸形变数调整为1,并对应设定变形范围与变形方式。
步骤S54:处理单元10于人脸6的原始脸形为菱形时经由评估模块503将变形范围设定为人脸6的额头区域与下颚区域,并将变形方式设定为水平扩增。
举例来说,如图14E所示,人脸84的脸形为菱形且人脸84的第一脸形变数为因此,处理单元10判断人脸84的额头区域与下颚区域皆过窄,而须执行水平扩增变形处理以将人脸84的第一脸形变数调整为1,并对应设定变形范围与变形方式。
步骤S55:处理单元10于人脸6的原始脸形为长形时经由评估模块503将变形范围设定为人脸6的额头区域与下颚区域,并将变形方式设定为垂直内缩。
举例来说,如图14F所示,人脸85的脸形为长形且人脸85的第一脸形变数为因此,处理单元10判断人脸85的额头区域与下颚区域皆过窄且人脸85的垂直距离过长,而须执行垂直内缩变形处理以将人脸85的第一脸形变数调整为1,并对应设定变形范围与变形方式。
接着,处理单元10执行步骤S41。
藉此,本发明可根据不同的原始脸形的人脸来产生对应目标脸形的模拟人脸影像。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (15)

1.一种身体信息分析装置,其特征在于,包括:
一影像撷取模块,用以拍摄一外部影像;
一显示模块;
一记忆体,储存对应一脸形变数的一预设值,其中该脸形变数对应一目标脸形;及
一处理单元,电性连接该影像撷取模块、该显示模块及该记忆体,该处理单元包括:
一脸部分析模块,用以于该外部影像中识别一人脸,并对该人脸的多个部位进行定位;
一脸形检测模块,用以依据该多个部位决定该人脸的一原始脸形;
一变形模块,用以依据该原始脸形对该人脸执行一变形处理以获得一模拟人脸影像,其中该模拟人脸影像的该脸形变数符合该预设值;及
一输出控制模块,用以控制该显示模块显示该模拟人脸影像。
2.如权利要求1所述的身体信息分析装置,其特征在于,该身体信息分析装置更包括一输入界面,电性连接该处理单元,该输入界面用以接受选择多个目标脸形的其中之一的一目标脸形选择操作;
其中,该记忆体储存该多个脸形变数的该多个预设值,该多个脸形变数分别对应该多个目标脸形;该变形模块执行该变形处理以调整该人脸的对应所选择的该目标脸形的该脸形变数为该预设值。
3.如权利要求1所述的身体信息分析装置,其特征在于,该处理单元更包括一计算模块,用以依据该人脸的眉毛与嘴部之间的垂直距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第一脸形变数的值,计算该人脸的轮廓的一脸颊角度并作为该人脸的一第二脸形变数的值,并依据该人脸的额头两侧之间的水平距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第三脸形变数的值。
4.如权利要求3所述的身体信息分析装置,其特征在于,该脸形检测模块是于判断该人脸的该第一脸形变数的值符合一第一预设值时判定该人脸为椭圆形,于判断该人脸的该第一脸形变数的值符合一第二预设值且该人脸的该第二脸形变数的值大于一第三预设值时判定该人脸为方形,于判断该人脸的该第一脸形变数的值符合该第二预设值且该人脸的该第二脸形变数的值不大于该第三预设值时判定该人脸为圆形,于判断该人脸的该第三脸形变数的值符合一第四预设值时判定该人脸为倒三角形,于判断该人脸的该第三脸形变数的值符合一第五预设值时判定该人脸为菱形,并于判断该人脸的该第三脸形变数的值不符合该第四预设值与该第五预设值时判定该人脸为长形。
5.如权利要求4所述的身体信息分析装置,其特征在于,该变形模块更包括:
一第一变形模块,于该目标脸形为椭圆形时调整该人脸的该第一脸形变数为该第一预设值,并于该目标脸形为方形或圆形时调整该人脸的该第一脸形变数为该第二预设值;
一第二变形模块,于该目标脸形为方形时调整该人脸的该第二脸形变数为大于该第三预设值,并于该目标脸形为圆形时调整该人脸的该第二脸形变数为不大于该第三预设值;及
一第三变形模块,于该目标脸形为倒三角形时调整该人脸的该第三脸形变数为该第四预设值,并于该目标脸形为菱形时调整该人脸的该第三脸形变数为该第五预设值。
6.如权利要求1所述的身体信息分析装置,其特征在于,该处理单元更包括一评估模块,用以依据该人脸的该脸形变数的值与该脸形变数的该预设值决定一变形量,并依据该原始脸形与该目标脸形决定该人脸的一变形范围;
其中该变形模块是依据该变形量对该人脸的该变形范围执行该变形处理。
7.如权利要求6所述的身体信息分析装置,其特征在于,该评估模块于该目标脸形为椭圆形且该原始脸形为方形、圆形或倒三角形时,设定该变形范围为该人脸的下颚区域,并设定一变形方式为水平内缩,于该目标脸形为椭圆形且该原始脸形为倒三角形时,设定该变形范围为该人脸的下颚区域,并设定该变形方式为水平扩增,于该目标脸形为椭圆形且该原始脸形为菱形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为水平扩增,并于该目标脸形为椭圆形且该原始脸形为长形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为垂直内缩。
8.如权利要求7所述的身体信息分析装置,其特征在于,该变形模块是依据该变形量及该变形方式对该人脸的该变形范围执行该变形处理以调整该人脸的该脸形变数为该预设值。
9.一种脸形模拟方法,应用于一身体信息分析装置,其特征在于,该脸形模拟方法包括以下步骤:
a)自该身体信息分析装置的一记忆体读取一脸形变数的一预设值,其中该脸形变数对应一目标脸形;
b)经由该身体信息分析装置的一影像撷取模块拍摄一外部影像;
c)控制该身体信息分析装置的一处理单元于该外部影像中识别出一人脸时,对该人脸的多个部位进行定位;
d)依据该多个部位决定该人脸的一原始脸形;
e)依据该原始脸形对该外部影像的该人脸执行一变形处理以获得一模拟人脸影像,其中该模拟人脸影像的该脸形变数符合该预设值;及
f)输出该模拟人脸影像。
10.如权利要求9所述的脸形模拟方法,其特征在于,该脸形模拟方法于该步骤a)包括以下步骤:
a1)经由该身体信息分析装置的一输入界面接受选择多个目标脸形的其中之一的一目标脸形选择操作;及
a2)取得该脸形变数的该预设值,其中该脸形变数对应所选择的该目标脸形。
11.如权利要求9所述的脸形模拟方法,其特征在于,该步骤d)包括以下步骤:
d1)依据该人脸的眉毛与嘴部之间的垂直距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第一脸形变数的值;
d2)于判断该人脸的该第一脸形变数的值符合一第一预设值时,判定该人脸为椭圆形;
d3)于判断该人脸的该第一脸形变数的值符合一第二预设值时,计算该人脸的轮廓的一脸颊角度并作为该人脸的一第二脸形变数的值;
d4)于判断该人脸的该第一脸形变数的值符合一第二预设值且该人脸的该第二脸形变数的值大于一第三预设值时,判定该人脸为方形;
d5)于判断该人脸的该第一脸形变数的值符合该第二预设值且该人脸的该第二脸形变数的值不大于该第三预设值时,判定该人脸为圆形;
d6)依据该人脸的额头两侧之间的水平距离与该人脸的轮廓两侧之间的水平距离计算该人脸的一第三脸形变数的值;
d7)于判断该人脸的该第三脸形变数的值符合一第四预设值时,判定该人脸为倒三角形;
d8)于判断该人脸的该第三脸形变数的值符合一第五预设值时,判定该人脸为菱形;及
d9)于判断该人脸的该第三脸形变数的值不符合该第四预设值与该第五预设值时,判定该人脸为长形。
12.如权利要求11所述的脸形模拟方法,其特征在于,该步骤e)是于该目标脸形为椭圆形时调整该人脸的该第一脸形变数为该第一预设值,于该目标脸形为方形时调整该人脸的该第一脸形变数为该第二预设值并调整该人脸的该第二脸形变数为大于该第三预设值,于该目标脸形为圆形时调整该人脸的该第一脸形变数为该第二预设值并调整该人脸的该第二脸形变数为不大于该第三预设值,于该目标脸形为倒三角形时调整该人脸的该第三脸形变数为该第四预设值,并于该目标脸形为菱形时调整该人脸的该第三脸形变数为该第五预设值。
13.如权利要求9所述的脸形模拟方法,其特征在于,该步骤e)包括以下步骤:
e1)依据该人脸的该脸形变数的值与该脸形变数的该预设值决定一变形量;
e2)依据该原始脸形与该目标脸形决定该人脸的一变形范围;及
e3)依据该变形量对该人脸的该变形范围执行该变形处理。
14.如权利要求13所述的脸形模拟方法,其特征在于,该步骤e2)包括以下步骤:
e21)于该目标脸形为椭圆形且该原始脸形为方形、圆形或倒三角形时,设定该变形范围为该人脸的下颚区域,并设定一变形方式为水平内缩;
e22)于该目标脸形为椭圆形且该原始脸形为倒三角形时,设定该变形范围为该人脸的下颚区域,并设定该变形方式为水平扩增;
e23)于该目标脸形为椭圆形且该原始脸形为菱形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为水平扩增;及
e24)于该目标脸形为椭圆形且该原始脸形为长形时,设定该变形范围为该人脸的下颚区域与额头区域,并设定该变形方式为垂直内缩。
15.如权利要求14所述的脸形模拟方法,其特征在于,该步骤e3)是依据该变形量及该变形方式对该人脸的该变形范围执行该变形处理以调整该人脸的该脸形变数为该预设值。
CN201711011882.1A 2017-10-25 2017-10-25 身体信息分析装置及其脸形模拟方法 Pending CN109712065A (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201711011882.1A CN109712065A (zh) 2017-10-25 2017-10-25 身体信息分析装置及其脸形模拟方法
US15/870,996 US10558850B2 (en) 2017-10-25 2018-01-14 Body information analysis apparatus and method of simulating face shape by using same
KR1020180006651A KR102045228B1 (ko) 2017-10-25 2018-01-18 신체 정보 분석 장치 및 얼굴형 모의 방법
JP2018007969A JP6498802B1 (ja) 2017-10-25 2018-01-22 生体情報解析装置及びその顔型のシミュレーション方法
EP18161768.9A EP3477537A1 (en) 2017-10-25 2018-03-14 Body information analysis apparatus and method of simulating face shape by using same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711011882.1A CN109712065A (zh) 2017-10-25 2017-10-25 身体信息分析装置及其脸形模拟方法

Publications (1)

Publication Number Publication Date
CN109712065A true CN109712065A (zh) 2019-05-03

Family

ID=61691673

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711011882.1A Pending CN109712065A (zh) 2017-10-25 2017-10-25 身体信息分析装置及其脸形模拟方法

Country Status (5)

Country Link
US (1) US10558850B2 (zh)
EP (1) EP3477537A1 (zh)
JP (1) JP6498802B1 (zh)
KR (1) KR102045228B1 (zh)
CN (1) CN109712065A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113449542A (zh) * 2020-03-24 2021-09-28 浙江宇视科技有限公司 一种换脸识别方法、装置、设备和介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10963990B2 (en) * 2019-01-28 2021-03-30 Applied Materials, Inc. Automated image measurement for process development and optimization
US10963753B2 (en) 2019-01-28 2021-03-30 Applied Materials, Inc. Automated image measurement for process development and optimization
CN113496459A (zh) * 2020-04-01 2021-10-12 华为技术有限公司 辅助化妆方法、终端设备、存储介质及程序产品

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040075672A (ko) * 2003-02-21 2004-08-30 정보통신연구진흥원 계층적 가상 성형시뮬레이션 방법
KR20040106844A (ko) * 2003-06-11 2004-12-18 이응주 유무선 온라인 얼굴영상 해석을 이용한 얼굴 관상 정보 및관상학적 이성 정보제공 시스템과 정보제공 방법
EP1589476A1 (en) * 2003-01-31 2005-10-26 Sony Corporation Image processing device and image processing method, and imaging device
US20090059030A1 (en) * 2007-09-05 2009-03-05 Seiko Epson Corporation Image Processing Apparatus, Image Processing Method, and Image Processing System
EP2953090A1 (en) * 2013-02-01 2015-12-09 Panasonic Intellectual Property Management Co., Ltd. Makeup assistance device, makeup assistance system, makeup assistance method, and makeup assistance program

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100064873A (ko) * 2008-12-05 2010-06-15 엘지전자 주식회사 단말기 및 그 제어 방법
EP2985732B1 (en) * 2013-04-08 2017-08-02 Panasonic Intellectual Property Corporation of America Image processing device, image processing method, and program, capable of virtual reproduction of makeup application state
KR102169523B1 (ko) * 2013-05-31 2020-10-23 삼성전자 주식회사 디스플레이장치 및 그 제어방법
KR20140146965A (ko) * 2013-06-18 2014-12-29 삼성전자주식회사 디스플레이 장치, 서버를 포함하는 변환 시스템 및 디스플레이 장치의 제어 방법
US9760762B2 (en) 2014-11-03 2017-09-12 Anastasia Soare Facial structural shaping
KR20170134256A (ko) * 2016-05-26 2017-12-06 주식회사 시어스랩 얼굴 윤곽 보정 방법 및 장치
US10614623B2 (en) * 2017-03-21 2020-04-07 Canfield Scientific, Incorporated Methods and apparatuses for age appearance simulation

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1589476A1 (en) * 2003-01-31 2005-10-26 Sony Corporation Image processing device and image processing method, and imaging device
KR20040075672A (ko) * 2003-02-21 2004-08-30 정보통신연구진흥원 계층적 가상 성형시뮬레이션 방법
KR20040106844A (ko) * 2003-06-11 2004-12-18 이응주 유무선 온라인 얼굴영상 해석을 이용한 얼굴 관상 정보 및관상학적 이성 정보제공 시스템과 정보제공 방법
US20090059030A1 (en) * 2007-09-05 2009-03-05 Seiko Epson Corporation Image Processing Apparatus, Image Processing Method, and Image Processing System
EP2953090A1 (en) * 2013-02-01 2015-12-09 Panasonic Intellectual Property Management Co., Ltd. Makeup assistance device, makeup assistance system, makeup assistance method, and makeup assistance program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113449542A (zh) * 2020-03-24 2021-09-28 浙江宇视科技有限公司 一种换脸识别方法、装置、设备和介质

Also Published As

Publication number Publication date
US10558850B2 (en) 2020-02-11
JP6498802B1 (ja) 2019-04-10
KR20190046592A (ko) 2019-05-07
US20190122029A1 (en) 2019-04-25
JP2019079481A (ja) 2019-05-23
EP3477537A1 (en) 2019-05-01
KR102045228B1 (ko) 2019-11-15

Similar Documents

Publication Publication Date Title
CN109712065A (zh) 身体信息分析装置及其脸形模拟方法
CN106056064B (zh) 一种人脸识别方法及人脸识别装置
CN109583261A (zh) 身体信息分析装置及其辅助比对眉型方法
KR20190019824A (ko) 자세 가이드 제공 방법 및 그 장치
US20160162673A1 (en) Technologies for learning body part geometry for use in biometric authentication
CN107874739A (zh) 眼底图像捕获系统
JP6799525B2 (ja) 生体情報解析装置及び手肌解析方法
JP6547013B2 (ja) 生体情報解析装置及びその頬紅解析方法
CN105518708A (zh) 用于验证活体人脸的方法、设备和计算机程序产品
Maisto et al. An accurate algorithm for the identification of fingertips using an RGB-D camera
CN109427075A (zh) 身体信息分析装置及其眼影分析方法
CN109325456A (zh) 目标识别方法、装置、目标识别设备及存储介质
CN112533335B (zh) 一种舞台灯光控制方法、装置以及系统
CN109583263A (zh) 结合扩增实境的身体信息分析装置及其眉型预览方法
CN109427078A (zh) 身体信息分析装置及其唇妆分析方法
CN102479322A (zh) 以具有角度的脸部影像分析脸部缺陷的系统、装置及方法
CN109410138B (zh) 修饰双下巴的方法、装置和系统
KR102160128B1 (ko) 인공지능 기반 스마트 앨범 생성 방법 및 장치
CN117529699A (zh) 使用光学数据来推断用户姿势
WO2022074865A1 (ja) 生体検知装置、制御方法、及びコンピュータ可読媒体
WO2015181729A1 (en) Method of determining liveness for eye biometric authentication
JP6547012B2 (ja) 生体情報解析装置及びその基礎化粧解析方法
Tu et al. Face and gesture based human computer interaction
Jain et al. Human computer interaction–Hand gesture recognition
CN109299636A (zh) 可标示腮红区域的身体信息分析装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190503

WD01 Invention patent application deemed withdrawn after publication