CN111202495A - 皮肤分析装置 - Google Patents

皮肤分析装置 Download PDF

Info

Publication number
CN111202495A
CN111202495A CN201911132381.8A CN201911132381A CN111202495A CN 111202495 A CN111202495 A CN 111202495A CN 201911132381 A CN201911132381 A CN 201911132381A CN 111202495 A CN111202495 A CN 111202495A
Authority
CN
China
Prior art keywords
face
user
skin analysis
face image
analysis device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911132381.8A
Other languages
English (en)
Inventor
田冈宏毅
松本博志
武井一朗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN111202495A publication Critical patent/CN111202495A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Human Computer Interaction (AREA)
  • Dermatology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Studio Devices (AREA)

Abstract

本公开涉及的皮肤分析装置具备：壳体；摄像头和显示器，设置于所述壳体的主平面；辅助镜，在所述壳体的左端部和右端部分别安装有所述辅助镜的侧端部；以及控制部，使所述摄像头拍摄用户的正面和侧面的面部图像，使用该面部图像分析所述用户的面部的皮肤，由所述显示器的主平面与所述辅助镜的主平面形成的内角(θ)是在所述用户的正面的面部映现于所述辅助镜的任一方的状态下所述摄像头能够拍摄到所述用户的侧面的面部图像的角度。由此，能够用前置摄像头稳定地拍摄用户的不同朝向的面部。

Description

皮肤分析装置
技术领域
本公开涉及皮肤分析装置。
背景技术
以往，流行基于从多个不同的方向拍摄用户的面部(脸部)得到的面部图像来分析面部皮肤的状态。专利文献1中公开了如下的面部拍摄装置：具备摄像头(camera)和照明装置的可动拍摄照明单元围绕人脸旋转，从不同的方向对用户的面部进行拍摄。
现有技术文献
专利文献1：日本特开2005-211581号公报
发明内容
如专利文献1那样通过机器设备活动来从不同的方向拍摄用户的面部的装置存在设置面积增大的倾向，难以设置于例如诊所那样的狭窄的地方。
另一方面，让用户改变脸的朝向并用前置(正面)摄像头拍摄不同朝向的面部的装置虽然能够使设置面积减小，但是由于无法将用户的脸固定，因而难以稳定地拍摄不同朝向的面部。
本公开的非限定性的实施例有助于提供能够用前置摄像头稳定地拍摄用户的不同朝向的面部的皮肤分析装置。
本公开的一个技术方案涉及的皮肤分析装置具备：壳体；摄像头和显示器，设置于所述壳体的主平面；辅助镜，在所述壳体的左端部和右端部分别安装有所述辅助镜的侧端部；以及控制部，使所述摄像头拍摄用户的正面和侧面的面部图像，使用该面部图像分析所述用户的面部的皮肤，由所述显示器的主平面与所述辅助镜的主平面形成的内角θ是在所述用户的正面的面部映现于所述辅助镜的任一方的状态下所述摄像头能够拍摄到所述用户的侧面的面部图像的角度。
此外，上述总括性的或者具体的技术方案既可以由系统、方法、集成电路、计算机程序或者记录介质来实现，也可以由系统、装置、方法、集成电路、计算机程序以及记录介质的任意组合来实现。
根据本公开的一个技术方案，能够用前置摄像头稳定地拍摄用户的不同朝向的面部。
从说明书及附图可知晓本公开的一个技术方案中的进一步的优点及效果。上述优点和/或效果分别由若干个实施方式和说明书及附图所记载的特征提供，但无需为了获得一个或一个以上相同的特征而提供所有的实施方式和特征。
附图说明
图1是表示实施方式1涉及的皮肤分析装置的利用方式的例子的图。
图2是表示实施方式1涉及的皮肤分析装置的利用步骤的例子的流程图。
图3是表示实施方式1涉及的皮肤分析装置的功能性结构的例子的图。
图4是表示从正面对实施方式1涉及的皮肤分析装置进行观察的例子的图。
图5是表示从上面对实施方式1涉及的、辅助镜部被打开的皮肤分析装置进行观察的例子的图。
图6是表示从上面对实施方式1涉及的、辅助镜部被合上的皮肤分析装置进行观察的例子的图。
图7是表示在对正面的面部图像进行拍摄的情况下的拍摄引导(guide，指导)UI(User Interface，用户界面)的例子的图。
图8是表示在对右侧面的面部图像进行拍摄的情况下的拍摄引导UI的例子的图。
图9是表示在对左侧面的面部图像进行拍摄的情况下的拍摄引导UI的例子的图。
图10是用于说明面部图像的拍摄视场角的图。
图11是表示从正面对实施方式2涉及的皮肤分析装置进行观察的例子的图。
图12是表示在实施方式2涉及的皮肤分析装置中辅助镜部没有被收纳的情况下的例子的图。
图13是表示在实施方式2涉及的皮肤分析装置中辅助镜部被收纳了的情况下的例子的图。
图14是表示从正面对实施方式3涉及的皮肤分析装置进行观察的例子的图。
图15是表示实施方式3涉及的皮肤分析装置的变形例的图。
图16是表示本公开涉及的硬件结构的例子的图。
标号说明
10皮肤分析装置；11壳体；12a左辅助镜部；12b右辅助镜部；13上部照明；14a左部照明；14b右部照明；15底座；16a左支柱；16b右支柱；21正面镜；22a左辅助镜；22b右辅助镜；23a、23b方向指示LED；31a、31b铰链；40a、40b标记(marker)；90数据库；101摄像头；102显示器；103扬声器；104输入I/F(接口)；105存储部；106控制部；201拍摄处理部；202面部部位识别部；203分析区域设定部；204皮肤分析执行部；300拍摄引导UI。
具体实施方式
以下，适当参照附图，详细对本发明的实施方式进行说明。但是，有时会省略过于详细的说明。例如，有时会省略对已经公知的事项的详细说明和/或实质上相同的构成的重复说明。这是为了避免以下的说明变得不必要地冗长，使本领域技术人员容易理解。
(实施方式1)
＜皮肤分析装置的利用例＞
图1表示皮肤分析装置的利用方式的例子。图2的流程图表示皮肤分析装置的利用步骤的例子。接着，参照图1及图2，说明皮肤分析装置的利用步骤的一例。
如图1所示，用户2坐在皮肤分析装置10的前面，指示皮肤分析装置10开始进行皮肤分析。皮肤分析装置10受到该开始的指示，开始接下来的动作。
皮肤分析装置10在显示器102中显示拍摄引导UI300(参照图7、图8、图9)和正在用摄像头101拍摄的用户2的面部图像(以下称为“拍摄中面部图像”)(S11)。拍摄引导UI300是用于引导用户2以使得能够适当地拍摄该用户2的面部的UI。此外，关于拍摄引导UI300的详情，将会在后面说明。
皮肤分析装置10指示用户2以让其朝向正面，拍摄该用户2的正面的面部图像。另外，皮肤分析装置10指示用户2以让其朝左，拍摄该用户2的右侧面的面部图像。另外，皮肤分析装置10指示用户2以让其朝右，拍摄该用户2的左侧面的面部图像(S12)。以下，将拍摄到的面部图像称为“拍摄后面部图像”。此外，皮肤分析装置10也可以取代指示用户2以让其改变面部朝向，而让用户2坐着的椅子C自动地旋转，由此拍摄用户2的右侧面及左侧面的面部图像。
皮肤分析装置10对拍摄后面部图像进行面部部位的识别处理(S13)。所谓面部部位，例如是脸的轮廓、眼、鼻、嘴、眉以及头发的发际等脸上特征性的部分。此外，也可以将面部部位表达为脸部部位、面部器官或者面部特征部分等。
皮肤分析装置10基于通过S13识别出的面部部位的位置等，设定要对拍摄后面部图像进行皮肤分析的区域(以下称为“皮肤分析区域”)(S14)。
皮肤分析装置10针对通过S14所设定的各皮肤分析区域，执行皮肤分析(S15)。
皮肤分析装置10将通过S15执行了的皮肤分析的结果显示于显示器102(S16)。
如上所述，用户2通过利用皮肤分析装置10，能够简单地接受皮肤分析。以下，详细进行说明。
＜皮肤分析装置的功能性结构＞
接着，参照图3，对皮肤分析装置10的功能性结构进行说明。
皮肤分析装置10例如具备摄像头101、显示器102、扬声器103、输入I/F104、存储部105以及控制部106。另外，皮肤分析装置10可以与数据库90连接。
摄像头101拍摄用户2的面部。此外，在图1中，摄像头101内置于皮肤分析装置10，但是摄像头101也可以是与皮肤分析装置10分开的装置。在该情况下，摄像头101通过预定的有线通信或者无线通信，将拍摄到的面部图像发送给皮肤分析装置10。
显示器102显示图像以及信息等。此外，在图1中，显示器102内置于皮肤分析装置10，但是显示器102也可以是与皮肤分析装置10分开的装置。在该情况下，皮肤分析装置10将显示用的数据通过预定的有线通信或者无线通信发送给显示器102。
扬声器103输出声音(语音)。例如，扬声器103输出对拍摄开始以及拍摄结束等进行传达的声音。
输入I/F104受理来自用户2的指示。此外，皮肤分析装置10也可以具备多个输入I/F104。例如，皮肤分析装置10也可以具备触摸面板、鼠标、键盘、拍摄指示用的按钮以及声音输入用的麦克风等作为输入I/F104。另外，输入I/F104也可以是与皮肤分析装置10分开的装置。在该情况下，输入I/F104将被输入的数据通过预定的有线通信或者无线通信发送给皮肤分析装置10。
存储部105存储控制部106所使用的数据。存储部105既可以是DRAM(DynamicRandom Access Memory：动态随机存取存储器)等易失性存储器，也可以是SSD(SolidState Drive：固态硬盘)等非易失性存储器。或者，存储部105也可以是它们的组合。
控制部106例如是CPU(Central Processing Unit)，实现皮肤分析装置10所具有的功能。例如，控制部106通过执行存储于存储部105的计算机程序，实现后述的拍摄处理部201、面部部位识别部202、分析区域设定部203以及皮肤分析执行部204所涉及的功能。
拍摄处理部201生成拍摄引导UI300并将其显示于显示器102。另外，拍摄处理部201将拍摄中面部图像实时地显示于显示器102。另外，拍摄处理部201分别拍摄用户的正面的面部图像、左侧面的面部图像以及右侧面的面部图像，并生成拍摄后面部图像。
面部部位识别部202例如通过接下来的处理，识别面部部位。即，面部部位识别部202首先利用公知的图像处理技术，从面部图像提取特征点。接着，面部部位识别部202根据该提取到的特征点，识别脸的轮廓、眼、鼻、嘴、眉以及头发的发际等面部部位。此外，面部部位识别部202可以不限于对拍摄后面部图像进行面部部位的识别处理，而在拍摄中也对面部图像进行面部部位的识别处理。
分析区域设定部203基于由面部部位识别部202识别出的面部部位的位置，在面部图像中至少设定一个皮肤分析区域。
皮肤分析执行部204对由分析区域设定部203在面部图像中设定的各皮肤分析区域执行皮肤分析。例如，皮肤分析执行部204对面部图像中的皮肤分析区域内应用公知的图像处理，分析皱纹、色斑和/或毛孔等的量。
数据库90将各用户2的面部图像与该面部图像的皮肤分析结果相关联地进行管理。此外，在图3中，数据库90是与皮肤分析装置10分开的装置，但是数据库90也可以内置于皮肤分析装置10。
＜皮肤分析装置的物理结构＞
接着，参照图4、图5及图6，对实施方式1涉及的皮肤分析装置10的物理结构进行说明。图4表示从正面对皮肤分析装置10进行观察得到的图的一例。图5表示从上面对左辅助镜部12a及右辅助镜部12b被打开的皮肤分析装置10进行观察得到的图的一例。图6表示从上面对左辅助镜部12a及右辅助镜部12b被合上的皮肤分析装置10进行观察得到的图的一例。其中，在图5及图6中省略了上部照明13。
如图4所示，皮肤分析装置10具备壳体11、左辅助镜部12a、右辅助镜部12b、上部照明13、镜子(正面镜)21、摄像头101以及显示器102。此外，在不对左辅助镜部12a和右辅助镜部12b进行区分的情况下，表达为辅助镜部12。
壳体11为平板形状，其在用户2侧的主平面具备正面镜21、摄像头101以及显示器102。显示器102设置在正面镜21的内侧。或者，显示器102也可以与正面镜21为一体式构成(例如具备半反射镜的镜面显示器)。摄像头101设置在显示器102的上方。上部照明13设置在壳体11的上端部。上部照明13可以由多个LED(Light Emitting Diode)元件构成。
左辅助镜部12a为平板形状，其在用户2侧的主平面具备镜子(左辅助镜)22a以及作为光源的一例的方向指示LED23a。同样地，右辅助镜部12b为平板形状，其在用户2侧的主平面具备镜子(右辅助镜)22b以及作为光源的一例的方向指示LED23b。此外，关于方向指示LED23a、23b的详情，将会在后面说明。另外，在不对左辅助镜部12a的方向指示LED23a与右辅助镜部12b的方向指示LED23b进行区分的情况下，表达为方向指示LED23。
如图5所示，左辅助镜部12a的右侧端部29a通过铰链31a连结于壳体11的左端部。左辅助镜部12a可以以铰链31a的轴为中心，沿向正面镜21靠近的方向和从正面镜21远离的方向移动。右辅助镜部12b的左侧端部29b通过铰链31b连结于壳体11的右端部。右辅助镜部12b可以以铰链31b的轴为中心，沿向正面镜21靠近的方向和从正面镜21远离的方向移动。
另外，如图6所示，左辅助镜部12a及右辅助镜部12b可以是在将左辅助镜部12a及右辅助镜部12b合上时覆盖正面镜21的尺寸及形状。即，正面镜21、左辅助镜22a以及右辅助镜22b采用所谓的三面镜的构造。由此，在不使用皮肤分析装置10时，能够将正面镜21、左辅助镜22a以及右辅助镜22b合上，防止镜子21、22a、22b的露出。由此，例如能够防止在诊室中进行激光治疗的情况下激光在镜子21、22a、22b上反射。
将左辅助镜部12a最大程度地打开时的由左辅助镜22a的主平面与正面镜21的主平面形成的角度(内角)θmax是如下角度：当用户2面向左，正面的面部映现于左辅助镜22a时，用户2的双眼和脸的右侧面的轮廓适当地映现于摄像头101的角度。铰链31a具备在角度θmax将左辅助镜部12a固定的锁定机构。此外，右辅助镜部12b以及铰链31b也与左辅助镜部12a以及铰链31a是同样的构造。
另外，在左辅助镜部12a中，设置有用于在用户2将正面的面部映现于左辅助镜22a时调节其正面的面部的位置及大小的标记40a。例如，左辅助镜22a中设置有表示将双眼定位的位置的标记(以下称为“眼睛标记”)41a。眼睛标记41a可以设置在与摄像头101相同的高度。另外，在左辅助镜部12a中，也可以除了眼睛标记41a之外或者取而代之地设置有表示将脸的轮廓定位的位置的标记(以下称为“轮廓标记”)(未图示)。由此，通过用户2朝向左辅助镜部12a并使双眼和/或脸的轮廓分别与眼睛标记41a和/或轮廓标记相符，从而能够稳定地拍摄右侧面的面部图像。此外，关于右辅助镜部12b中的眼睛标记41b以及轮廓标记(未图示)，也是同样的。
另外，在摄像头101设置于正面镜21的内侧的情况下，用户2难以对摄像头101的位置进行视觉识别。于是，在摄像头101的附近设置作为光源的一例的LED50，控制部106在拍摄时使该LED50点亮。由此，用户2能够在拍摄时视觉识别出摄像头101的位置，能够将视线朝向摄像头101。
＜拍摄引导UI＞
接着，参照图7、图8及图9，对拍摄引导UI300进行说明。图7是表示拍摄正面的面部图像时的拍摄引导UI300的一例的图。图8是表示拍摄右侧面的面部图像时的拍摄引导UI300的一例的图。图9是表示拍摄左侧面的面部图像时的拍摄引导UI300的一例的图。
拍摄引导UI300例如具有拍摄中面部图像区域310、过去面部图像区域320、拍摄按钮330以及脸部位置引导线(guide)400。
拍摄中面部图像区域310内显示用户2的拍摄中面部图像。过去面部图像区域320内显示相同的用户2的在过去拍摄到的面部图像(以下称为“过去面部图像”)。此外，过去面部图像存储在数据库90中。
拍摄处理部201在拍摄正面的面部图像的情况下，将相同的用户2的正面的过去面部图像显示于过去面部图像区域320。同样地，拍摄处理部201在拍摄右侧面的面部图像的情况下，将相同的用户2的右侧面的过去面部图像显示于过去面部图像区域320，在拍摄左侧面的面部图像的情况下，将相同的用户2的左侧面的过去面部图像显示于过去面部图像区域320。如此，通过与拍摄中面部图像一起显示过去面部图像，用户2能够移动面部来调整拍摄中面部图像的位置、尺寸及朝向以使得与过去面部图像的位置、尺寸及朝向共通。由此，能够以更高的精度比较对于过去面部图像的皮肤分析结果与对于拍摄后面部图像的皮肤分析结果。
拍摄处理部201在拍摄中面部图像区域310内显示脸部位置引导线400。脸部位置引导线400包含脸的轮廓线的引导线401、眼的位置的引导线402以及脸的中心线的引导线403。此外，如图7、图8及图9所示，脸的轮廓线的引导线401、眼的位置的引导线402以及脸的中心线的引导线403可以是根据要拍摄的面部朝向而不同的配置。
用户2在面部图像的拍摄时使拍摄中面部图像的轮廓与脸的轮廓线的引导线401对准、使拍摄中面部图像的眼睛的位置与眼的位置的引导线402对准、使拍摄中面部图像的中心线(鼻梁)与脸的中心线的引导线403对准。由此，拍摄处理部201能够拍摄适合用于进行皮肤分析的位置、尺寸及朝向的面部图像。
拍摄处理部201也可以通过脸部位置引导线400的颜色来表示拍摄中面部图像是否与脸部位置引导线400的位置、尺寸及朝向相符。例如，拍摄处理部201可以在面部部位识别部202成功进行了面部部位的识别、且拍摄中面部图像与脸部位置引导线400的位置、尺寸及朝向相符的情况下，将脸部位置引导线400的颜色更换为蓝色。另外，拍摄处理部201可以在面部部位识别部202成功进行了面部部位的识别、且拍摄中面部图像与脸部位置引导线400的位置、尺寸及朝向不相符的情况下，将脸部位置引导线400的颜色更换为红色。另外，拍摄处理部201可以在面部部位识别部202没有成功进行面部部位的识别的情况下，将脸部位置引导线400的颜色更换为橙色。另外，拍摄处理部201可以在拍摄中面部图像与脸部位置引导线400的位置、尺寸及朝向不相符的情况下，不开始进行拍摄。由此，能够高效地拍摄适合于皮肤分析的面部图像。
另外，拍摄按钮330设置在拍摄引导UI300内的左端部分和右端部分的双方。由此，医护人员(例如护士)等不论在位于皮肤分析装置10的左侧和右侧中的哪一侧的情况下，都能够点击拍摄按钮330，而不会在摄像头101及显示器102与用户2的面部之间造成阻挡。此外，拍摄按钮330也可以设置在拍摄引导UI300内的左端部分和右端部分的任一方，该拍摄按钮330的位置能够根据设定进行更换。
＜方向指示LED＞
用户2在朝着辅助镜22期间(也即是说面部的侧面的拍摄时)无法观察显示在正面的显示器102上的脸部位置引导线400。辅助镜部12的方向指示LED23用于在用户2看着辅助镜22时针对该用户2引导其脸的朝向以使得脸的侧面的拍摄中面部图像与脸部位置引导线400相符。
接着，对设置于左辅助镜部12a的方向指示LED23a的动作的一例进行说明。此外，关于设置于右辅助镜部12b的方向指示LED23b的动作，也是同样的。
例如，拍摄处理部201在脸的右侧面的拍摄中面部图像过于朝上的情况下，使表示下方的方向指示LED23aD点亮(或者闪烁)。也即是说，指示用户2让其稍稍朝下。拍摄处理部201在脸的右侧面的拍摄中面部图像过于朝下的情况下，使表示上方的方向指示LED23aU点亮(或者闪烁)。也即是说，指示用户2让其稍稍朝上。拍摄处理部201在脸的右侧面的拍摄中面部图像过于朝左的情况下，使表示右方的方向指示LED23aR点亮(或者闪烁)。也即是说，指示用户2让其稍稍朝右。拍摄处理部201在脸的右侧面的拍摄中面部图像过于朝右的情况下，使表示左方的方向指示LED23aL点亮(或者闪烁)。也即是说，指示用户2让其稍稍朝左。拍摄处理部201在脸的右侧面的拍摄中面部图像是适当的朝向的情况下，使所有的方向指示LED23aD、23aU、23aR、23aL点亮(或者闪烁)。也即是说，向用户2表示朝向正确。
＜拍摄开始时以及拍摄完成时＞
接着，详细对在拍摄开始时以及拍摄完成时的拍摄处理部201的动作的一例进行说明。
拍摄处理部201可以在即将拍摄脸的右侧面之前以及即将拍摄脸的左侧面之前，从扬声器103输出表示拍摄开始的声音。由此，拍摄处理部201能够将拍摄开始告知给朝着左或者右而难以观察显示在正面的显示器102上的拍摄引导UI300的用户2。另外，拍摄处理部201也可以在拍摄完成后从扬声器103输出表示拍摄完成的声音。
另外，拍摄处理部201也可以使用设置于辅助镜部12的方向指示LED23来通知拍摄开始以及拍摄完成。例如，拍摄处理部201也可以在即将拍摄之前使所有的方向指示LED闪烁，在拍摄完成后使所有的方向指示LED23熄灭。
另外，面部部位识别部202也可以判定在拍摄中面部图像的前额的区域内是否遮盖着头发，在判定为遮盖着头发的情况下，将要整理头发的指示显示于拍摄引导UI300。另外，在该情况下，拍摄处理部201也可以不开始进行拍摄。
另外，拍摄处理部201可以在拍摄正面的面部的情况下将摄像头101的焦点调节到双眼的位置。拍摄处理部201可以在拍摄右侧面的面部的情况下将摄像头101的焦点调节到右眼(离摄像头101较近的眼睛)的位置。拍摄处理部201可以在拍摄左侧面的面部的情况下将摄像头101的焦点调节到左眼(离摄像头101较近的眼睛)的位置。眼睛位于脸的进深的中央附近，因而通过这样调节摄像头101的焦点，能够拍摄适合于皮肤分析的面部图像。
另外，如图10所示，拍摄处理部201可以以比仅能包含人脸的视场角α1广的视场角α2进行拍摄。而且，拍摄处理部201可以从以该广的视场角α2拍摄到的图像500提取拍摄有面部图像的区域501，生成拍摄后面部图像。由此，例如拍摄处理部201能够在拍摄后调整拍摄后面部图像以使其与过去面部图像相符。
另外，拍摄处理部201可以在拍摄多个相同朝向的面部图像的情况下，修正各拍摄后面部图像以使得面部的尺寸及位置在多个拍摄后面部图像中共通。例如，拍摄处理部201针对相同朝向的面部，由上部照明13照射横向偏振的光来拍摄第1面部图像，由上部照明13照射纵向偏振的光来拍摄第2面部图像，没有光的照射地拍摄第3面部图像。而且，拍摄处理部201在面部的尺寸和/或位置在第1、第2以及第3面部图像中不一致的情况下，修正第1、第2以及第3面部图像以使它们变为共通。此外，拍摄处理部201可以利用公知的模板匹配(template matching)技术检测各拍摄后图像之间的偏差。
(实施方式2)
参照图11，对实施方式2涉及的皮肤分析装置10的物理结构例进行说明。相对于图4的图11的主要的差异之处在于，辅助镜部12的尺寸小。此外，对于与实施方式1同样的构成要素，有时会省略说明。
如图11所示，皮肤分析装置10具备壳体11、左辅助镜部12a、右辅助镜部12b、上部照明13、左部照明14a、右部照明14b、正面镜21、摄像头101以及显示器102。此外，关于壳体11、上部照明13、正面镜21、摄像头101以及显示器102，由于与图4同样，因此省略说明。
左辅助镜部12a的右侧端部29a安装在壳体11的左端部的、摄像头101的高度成为左辅助镜22a的上端和下端之间的位置。同样地，右辅助镜部12b的左侧端部29b安装在壳体11的右端部的、摄像头101的高度成为右辅助镜22b的上端和下端之间的位置。另外，左辅助镜部12a以及右辅助镜部12b分别以在图5中说明的角度θmax安装于壳体11。
另外，左辅助镜22a的尺寸是在用户2面向左时映现于左辅助镜22a的正面的面部整体几乎恰好地容纳于内的尺寸。右辅助镜22b的尺寸也是同样的。换言之，在图11中，左右的辅助镜22中的至少一个比在用户2以侧面对着摄像头101时映现于辅助镜22的用户2的正面的面部整体大，该辅助镜22的长和宽的长度分别比正面镜21的长和宽的长度短。
左部照明14a设置在壳体11的左端部的比左辅助镜部12a靠下方的部分。右部照明14b设置在壳体11的右端部的比右辅助镜部12b靠下方的部分。
此外，如图12及图13所示，辅助镜部12也可以能够通过滑动机构而收纳在壳体11内。由此，能够在不使用皮肤分析装置10时将辅助镜部12收纳在壳体11内，能够预防诊室内的医护人员或者就诊人员等误被辅助镜部12钩挂到。
另外，如图11所示，辅助镜22也可以能够以水平轴511为中心来调整角度ψ。由此，能够将辅助镜22的表面按照用户2的面部的高度位置进行调整。
(实施方式3)
参照图14，对实施方式3涉及的皮肤分析装置10的物理结构例进行说明。相对于图11的图14的主要的差异之处在于，辅助镜部12与壳体11分离。此外，对于与实施方式2同样的构成要素，有时会省略说明。
如图14所示，皮肤分析装置10具备壳体11、左辅助镜部12a、右辅助镜部12b、上部照明13、左部照明14a、右部照明14b、底座15、左支柱16a、右支柱16b、正面镜21、摄像头101以及显示器102。
壳体11固定于底座15。关于壳体11、上部照明13、正面镜21、摄像头101以及显示器102，由于与图4同样，因此省略说明。
左支柱16a固定在底座15的、壳体11的左侧的位置，沿高度方向延伸。左辅助镜部12a以与正面镜21形成在图5中说明的角度θmax的方式固定于左支柱16a的上端部。右支柱16b固定在底座15的、壳体11的右侧的位置，沿高度方向延伸。右辅助镜部12b以与正面镜21形成在图5中说明的角度θmax的方式固定于右支柱16b的上端部。
另外，左辅助镜部12a可以以摄像头101的高度位置成为左辅助镜22a的上端和下端之间的方式固定于左支柱16a。同样地，右辅助镜部12b可以以摄像头101的高度成为右辅助镜22b的上端和下端之间的方式固定于右支柱16b。但是，左辅助镜部12a以及右辅助镜部12b的高度不限于此，例如也可以如图15所示那样比摄像头101的高度位置低。
左部照明14a以及右部照明14b分别设置在壳体11的左端部以及右端部。如此，与图11相比，将辅助镜部12从壳体11分离，由此，能够在壳体11的左端部以及右端部设置比图11的长的左部照明14a以及右部照明14b。
＜本公开的归纳总结＞
在本公开中，皮肤分析装置10具备：壳体11；摄像头101和显示器102，设置于壳体11的主平面；辅助镜部12a、12b，在壳体11的左端部和右端部分别安装有其侧端部29a、29b；以及控制部106，使摄像头101拍摄用户2的正面和侧面的面部图像，使用该面部图像分析用户2的面部的皮肤，由显示器102的主平面与辅助镜部12a、12b的主平面形成的内角θ是在用户2的正面的面部映现于辅助镜部12a、12b中的任一方的状态下摄像头101能够拍摄到用户2的侧面的面部图像的角度。换言之，例如，内角θ是能够从摄像头101至少拍摄到用户2的双眼的(能看见双眼的)角度即可。或者，内角θ是能够从摄像头101拍摄到用户2的面部的最跟前(近侧)和最里面(远侧)这两侧的轮廓的角度即可。或者，内角θ是从摄像头101来看用户2的面部的最里面(远侧)的脸颊的轮廓没有被鼻子遮住的角度即可。或者，内角θ可以是能够从摄像头101拍摄到用户2的双眼、和用户2的面部的从最跟前(较近的)的耳朵到下巴间的轮廓双方的角度。
根据该构成，通过用户2面向辅助镜22a、22b以使得正面的面部映现于辅助镜22a、22b，能够用前置摄像头101稳定地(也即是说以几乎相同的朝向)拍摄侧面的面部图像。由此，能够以更高的精度对本次拍摄到的面部图像的皮肤分析结果与过去拍摄到的面部图像的皮肤分析结果进行比较。
以上，参照附图详细说明了本公开涉及的实施方式，而上述的皮肤分析装置10的功能能够通过计算机程序实现。
图16是表示通过程序来实现各装置的功能的计算机的硬件结构的图。该计算机2100具备：键盘或鼠标、触摸板等输入装置2101；显示器102或扬声器等输出装置2102；CPU(Central Processing Unit)2103；ROM(Read Only Memory)2104、RAM(Random AccessMemory)2105、硬盘装置或SSD(Solid State Drive)等存储装置2106；从DVD-ROM(DigitalVersatile Disk Read Only Memory)或USB(Universal Serial Bus)存储器等记录介质读取信息的读取装置2107；经由网络进行通信的通信装置2108，各部通过总线2109连接。
而且，读取装置2107从记录有用于实现上述各装置的功能的程序的记录介质读取该程序，并使存储装置2106存储。或者，通信装置2108与连接于网络的服务器装置进行通信，并使存储装置2106存储从服务器装置下载的用于实现上述各装置的功能的程序。
而且，CPU2103将存储于存储装置2106的程序复制(copy)到RAM2105，将该程序所包含的命令从RAM2105依次读出并执行，由此实现上述各装置的功能。
本公开能够由软件、硬件或者与硬件协同工作的软件实现。
上述实施方式的说明中使用的各功能块也可以部分地或者整体地实现为作为集成电路的LSI，在上述实施方式中说明的各过程(process)也可以部分地或者整体地由一个LSI或LSI的组合控制。LSI既可以由一个个芯片构成，也可以以包含功能块的一部分或全部的方式由一个芯片构成。LSI也可以具备数据的输入和输出。根据集成度的不同，LSI有时也被称为IC、系统LSI、超大(super)LSI、特大(ultra)LSI。
集成电路化的方法不限于LSI，也可以由专用电路、通用处理器或专用处理器实现。另外，也可以利用能够在LSI制造后编程的FPGA(FieldProgrammable Gate Array：现场可编程门阵列)、能够重构LSI内部的电路单元的连接或设定的可重构处理器。本公开也可以实现为数字处理或模拟处理。
再者，如果出现通过半导体技术的进步或派生的其他技术来置换LSI的集成电路化的技术，当然，也可以使用该技术进行功能模块的集成化。也存在应用生物技术等的可能性。
产业上的可利用性
本公开的一个技术方案对于拍摄人脸的系统是有用的。

Claims (19)

1.一种皮肤分析装置，具备：
壳体；
摄像头和显示器，设置于所述壳体的主平面；
辅助镜，在所述壳体的左端部和右端部分别安装有所述辅助镜的侧端部；以及
控制部，使所述摄像头拍摄用户的正面和侧面的面部图像，使用该面部图像分析所述用户的面部的皮肤，
由所述显示器的主平面与所述辅助镜的主平面形成的内角(θ)是在所述用户的正面的面部映现于所述辅助镜的任一方的状态下所述摄像头能够拍摄到所述用户的侧面的面部图像的角度。
2.根据权利要求1所述的皮肤分析装置，
能够拍摄到所述用户的侧面的面部图像的角度是能够从所述摄像头拍摄到所述用户的双眼的角度。
3.根据权利要求1所述的皮肤分析装置，
能够拍摄到所述用户的侧面的面部图像的角度是能够从所述摄像头拍摄到所述用户的面部的最跟前和最里面这两侧的轮廓的角度。
4.根据权利要求1所述的皮肤分析装置，
能够拍摄到所述用户的侧面的面部图像的角度是能够从所述摄像头拍摄到所述用户的双眼、和所述用户的面部的从最跟前的耳朵到下巴间的轮廓双方的角度。
5.根据权利要求1至4中任一项所述的皮肤分析装置，
所述辅助镜中设置有用于在正面的面部映现于该辅助镜时定位眼睛位置的标记。
6.根据权利要求1至4中任一项所述的皮肤分析装置，
所述辅助镜通过铰链连结于所述壳体，能够以所述铰链的轴为中心沿所述内角(θ)变小的方向移动。
7.根据权利要求1至4中任一项所述的皮肤分析装置，
所述辅助镜的大小为，在所述用户以侧面对着所述摄像头时映现于所述辅助镜的所述用户的正面的面部整体纳于所述辅助镜的大小。
8.根据权利要求7所述的皮肤分析装置，
所述摄像头的高度位置是所述辅助镜的上端与下端之间。
9.根据权利要求7或8所述的皮肤分析装置，
所述辅助镜能够沿将所述辅助镜收纳于所述壳体内的方向移动。
10.根据权利要求1至4中任一项所述的皮肤分析装置，
在所述摄像头的附近设置有第1灯，
所述控制部在拍摄所述正面的面部图像时，使所述第1灯点亮。
11.根据权利要求1至4中任一项所述的皮肤分析装置，
在所述辅助镜的附近设置有第2灯，
所述控制部在拍摄所述侧面的面部图像时，使所述第2灯点亮。
12.根据权利要求11所述的皮肤分析装置，
所述第2灯是表示上下方向和/或左右方向的配置，
所述控制部在所述侧面的面部图像偏离于预定的面部朝向的情况下，使与校正该偏离的方向对应的所述第2灯点亮。
13.根据权利要求1至4中任一项所述的皮肤分析装置，
所述控制部，在拍摄所述正面的面部图像时，使所述摄像头的焦点聚焦于双眼，在拍摄所述侧面的面部图像时，使所述摄像头的焦点聚焦于离所述摄像头较近的一只眼。
14.根据权利要求1至4中任一项所述的皮肤分析装置，
所述控制部，在拍摄所述正面的面部图像时，将用于调节正面的面部的位置及尺寸的正面用的引导线显示于所述显示器，在拍摄所述侧面的面部图像时，将用于调节侧面的面部的位置及尺寸的侧面用的引导线显示于所述显示器。
15.根据权利要求14所述的皮肤分析装置，
所述控制部在所述面部图像的位置及尺寸与所述引导线的位置及尺寸不相符的情况下，不开始进行所述面部图像的拍摄。
16.根据权利要求14所述的皮肤分析装置，
所述控制部根据所述面部图像的位置及尺寸是否与所述引导线的位置及尺寸相符，更换所述引导线的形态。
17.根据权利要求1至4中任一项所述的皮肤分析装置，
所述控制部在检测到在所述面部图像中头发遮盖着前额的区域的情况下，不开始进行所述面部图像的拍摄。
18.根据权利要求1至4中任一项所述的皮肤分析装置，
所述控制部在所述显示器的左端部和右端部双方显示受理要开始拍摄的拍摄按钮。
19.根据权利要求1至4中任一项所述的皮肤分析装置，
所述控制部将所述用户的过去拍摄到的面部图像与所述用户的正在拍摄的面部图像一起显示于所述显示器。
CN201911132381.8A 2018-11-22 2019-11-19 皮肤分析装置 Pending CN111202495A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018219041A JP2020088557A (ja) 2018-11-22 2018-11-22 肌分析装置
JP2018-219041 2018-11-22

Publications (1)

Publication Number Publication Date
CN111202495A true CN111202495A (zh) 2020-05-29

Family

ID=68468578

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911132381.8A Pending CN111202495A (zh) 2018-11-22 2019-11-19 皮肤分析装置

Country Status (4)

Country Link
US (1) US20200167549A1 (zh)
EP (1) EP3657384A1 (zh)
JP (1) JP2020088557A (zh)
CN (1) CN111202495A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108960841A (zh) * 2018-07-16 2018-12-07 阿里巴巴集团控股有限公司 支付方法、装置及系统
US11042726B2 (en) * 2018-11-05 2021-06-22 Panasonic Intellectual Property Management Co., Ltd. Skin analyzer, skin analysis method, and non-transitory computer-readable recording medium
US12041338B1 (en) * 2020-09-23 2024-07-16 Apple Inc. Personalized content creation
JP7462534B2 (ja) 2020-11-02 2024-04-05 株式会社Ｎｔｔドコモ 画像記録システム
JP2023053733A (ja) * 2021-10-01 2023-04-13 パナソニックＩｐマネジメント株式会社 撮像誘導装置、撮像誘導方法及びプログラム
WO2024128486A1 (ko) * 2022-12-15 2024-06-20 삼성전자주식회사 디스플레이 장치 및 디스플레이 방법

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS469073Y1 (zh) * 1968-08-29 1971-03-31
US7738032B2 (en) * 2001-11-08 2010-06-15 Johnson & Johnson Consumer Companies, Inc. Apparatus for and method of taking and viewing images of the skin
US7233693B2 (en) * 2003-04-29 2007-06-19 Inforward, Inc. Methods and systems for computer analysis of skin image
JP2005211581A (ja) 2004-02-02 2005-08-11 Inforward Inc 顔撮影装置
JP2009009069A (ja) * 2007-06-29 2009-01-15 Noritsu Koki Co Ltd 顔撮影装置
JP2013145323A (ja) * 2012-01-16 2013-07-25 Panasonic Corp カメラ付きミラー装置、ミラー付き什器
WO2014156146A1 (ja) * 2013-03-29 2014-10-02 パナソニック株式会社 電子ミラー装置
JP2016161685A (ja) * 2015-02-27 2016-09-05 リコーイメージング株式会社 Ａｆ機能を備えた撮影装置
JP6200483B2 (ja) * 2015-12-23 2017-09-20 株式会社オプティム 画像処理システム、画像処理方法、および画像処理プログラム
JP6244483B2 (ja) * 2017-01-05 2017-12-06 任天堂株式会社 情報処理装置、情報処理システム、ならびに起動用プログラムおよびそれを記憶した記憶媒体

Also Published As

Publication number Publication date
JP2020088557A (ja) 2020-06-04
US20200167549A1 (en) 2020-05-28
EP3657384A1 (en) 2020-05-27

Similar Documents

Publication Publication Date Title
CN111202495A (zh) 皮肤分析装置
WO2022077800A1 (zh) 眼底相机及眼底图像全自动拍摄方法
EP3298452B1 (en) Tilt shift iris imaging
EP1714184B1 (en) Custom eyeglass manufacturing method
US7845797B2 (en) Custom eyeglass manufacturing method
US9245168B2 (en) Authentication apparatus, authentication program, and authentication method
US7599526B2 (en) Imaging system and program for detecting a movement of a subject and initializing imaging devices to perform subject authentication based on the movement
JP7269711B2 (ja) 生体認証システム、生体認証方法およびプログラム
JP6651074B2 (ja) 眼球の運動を検出する方法、そのプログラム、そのプログラムの記憶媒体、及び、眼球の運動を検出する装置
CN112220447B (zh) 眼底相机及眼底图像拍摄方法
US20070127781A1 (en) Animal eye biometrics
JP6160148B2 (ja) 生体情報入力装置、生体情報入力プログラム、生体情報入力方法
KR102160137B1 (ko) 특징점 변동을 이용한 위조 얼굴 판별장치 및 그 방법
US20050089197A1 (en) Authentication system and program
CN112075921A (zh) 眼底相机及其焦距调整方法
US11042726B2 (en) Skin analyzer, skin analysis method, and non-transitory computer-readable recording medium
JP2024026287A (ja) 撮像システム、撮像方法及び撮像プログラム
JP2017162302A (ja) 生体認証装置、生体認証方法および生体認証プログラム
CN112075920B (zh) 眼底相机及其工作距离调整方法
JP2006318374A (ja) 眼鏡判別装置および認証装置ならびに眼鏡判別方法
WO2009107704A1 (ja) 虹彩認証装置
CN113723147A (zh) 虹膜人脸多模态活体检测和识别方法、装置、介质及设备
JP2007058507A (ja) 視線検出装置
JP2020075080A (ja) 肌分析装置、肌分析方法、及び、コンピュータプログラム
CN112220448B (zh) 眼底相机及眼底图像合成方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200529

WD01 Invention patent application deemed withdrawn after publication