CN110177486A - 涂布控制装置、涂布控制方法、程序以及记录介质 - Google Patents

涂布控制装置、涂布控制方法、程序以及记录介质 Download PDF

Info

Publication number
CN110177486A
CN110177486A CN201780083270.5A CN201780083270A CN110177486A CN 110177486 A CN110177486 A CN 110177486A CN 201780083270 A CN201780083270 A CN 201780083270A CN 110177486 A CN110177486 A CN 110177486A
Authority
CN
China
Prior art keywords
skin
coating
section
image data
cosmetic preparation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780083270.5A
Other languages
English (en)
Other versions
CN110177486B (zh
Inventor
胜山智祐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shiseido Co Ltd
Original Assignee
Shiseido Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shiseido Co Ltd filed Critical Shiseido Co Ltd
Publication of CN110177486A publication Critical patent/CN110177486A/zh
Application granted granted Critical
Publication of CN110177486B publication Critical patent/CN110177486B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D44/005—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms for selecting or displaying personal cosmetic colours or hairstyle
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J3/00—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed
    • B41J3/407—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed for marking on special material
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J3/00—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed
    • B41J3/44—Typewriters or selective printing mechanisms having dual functions or combined with, or coupled to, apparatus performing other functions
    • B41J3/445—Printers integrated in other types of apparatus, e.g. printers integrated in cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B41—PRINTING; LINING MACHINES; TYPEWRITERS; STAMPS
    • B41J—TYPEWRITERS; SELECTIVE PRINTING MECHANISMS, i.e. MECHANISMS PRINTING OTHERWISE THAN FROM A FORME; CORRECTION OF TYPOGRAPHICAL ERRORS
    • B41J3/00—Typewriters or selective printing or marking mechanisms characterised by the purpose for which they are constructed
    • B41J3/44—Typewriters or selective printing mechanisms having dual functions or combined with, or coupled to, apparatus performing other functions
    • B41J3/46—Printing mechanisms combined with apparatus providing a visual indication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/174—Segmentation; Edge detection involving the use of two or more images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/40—Analysis of texture
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • A—HUMAN NECESSITIES
    • A45—HAND OR TRAVELLING ARTICLES
    • A45D—HAIRDRESSING OR SHAVING EQUIPMENT; EQUIPMENT FOR COSMETICS OR COSMETIC TREATMENTS, e.g. FOR MANICURING OR PEDICURING
    • A45D44/00—Other cosmetic or toiletry articles, e.g. for hairdressers' rooms
    • A45D2044/007—Devices for determining the condition of hair or skin or for selecting the appropriate cosmetic or hair treatment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30088—Skin; Dermal

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Cosmetics (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

本发明的一实施方式所涉及的涂布控制装置包括：获取部，所述获取部获取肌肤的图像数据；分割部，所述分割部将图像数据分割成200μm以下的多个区段；以及计算部，所述计算部根据图像数据的单一或多个区段的值而计算涂布于肌肤的各部分的化妆料的涂布量。

Description

涂布控制装置、涂布控制方法、程序以及记录介质
技术领域
本发明涉及涂布控制装置、涂布控制方法、程序以及记录有该程序的记录介质。
背景技术
自然化妆法的魅力在于保留自然肤色的质感的上妆感，是受各个年龄段的大多女性的欢迎的化妆法之一。自然化妆法的根本在于使粉底薄薄地附着。但是，由于随着年龄的增加而产生斑点或雀斑、色斑，因此随着衰老很难做自然化妆。因此，采用对有斑点或雀斑的部分使用高遮盖性的遮瑕膏或者大量涂抹粉底等方法。
但是，将遮瑕膏或粉底这样的化妆料只涂布于有斑点的部分等肌肤的特定部分的方法是对于一般使用者来说技术难易度极高且非常困难的方法。这是因为，由于遮瑕膏或粉底这样的化妆料直接或者使用刷子或海绵这样的化妆用工具或者手指涂布于肌肤上，因此被涂布的区域与未涂布的区域之间的边界显得不自然。因此，为了消除该边界的不自然度，广泛利用跨越斑点与明亮部(没有斑点的区域)之间的边界而逐渐减少化妆料的涂布量之类的方法。但是，若涂平被涂布的化妆料，则导致想遮盖的位置的遮盖力不足，若相反地将化妆料重复涂在斑点上，则导致对周围的本来无需涂布的自然肤色的明亮部分也附着过量的化妆料。
因而，虽然对自然化妆的需求高，但是为了消除涂布化妆料的区域与未涂布的区域之间的边界的不自然度而使其漂亮，需要非常高的涂布精度和实施精细的涂敷处置的时间，存在一般使用者很难在日常生活中进行之类的问题。
并且，除了斑点或雀斑以外，还对例如肌肤的一部分比周围白的白斑等肌肤中的所有局部性明度差异，涂布化妆料来进行遮盖的情况下，存在与斑点或雀斑相同的问题。
针对所述问题，在专利文献1中记载有以下方法：以随着靠近规定部位而接近该规定部位的光学特性的方式，在皮肤或嘴唇形成粘附物，实质上消除边界而赋予自然的印象。并且，在专利文献1中记载了能够使用注入而形成粘附物。
现有技术文献
专利文献
专利文献1：日本专利第5603331号公报
发明内容
发明要解决的技术课题
但是，根据专利文献1所涉及的方法，也仍然避免不了涂布必要以上的化妆料，因此无法没有不协调感地充分遮盖肌肤中的局部性明度差异，要求进一步改善。
本发明是鉴于上述诸问题而完成的，其目的在于提供一种自然地遮盖肌肤中的局部性明度差异的化妆料的涂布控制装置、涂布控制方法、程序以及记录介质。
用于解决技术课题的手段
本发明的一实施方式所涉及的涂布控制装置包括：获取部，所述获取部获取肌肤的图像数据；分割部，所述分割部将所述图像数据分割成200μm以下的多个区段；以及计算部，所述计算部根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量。
并且，本发明的一实施方式所涉及的涂布控制方法包括：获取肌肤的图像数据的获取工序；将所述图像数据分割成200μm以下的多个区段的分割工序；以及根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量的计算工序。
并且，本发明的一实施方式所涉及的程序用于使计算机执行以下处理：获取处理,其获取肌肤的图像数据；分割处理，其将所述图像数据分割成200μm以下的多个区段；以及计算处理，其根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量。
并且，本发明的一实施方式所涉及的计算机能够读取的记录介质记录有上述的程序。
发明效果
根据本发明，能够提供一种自然地遮盖肌肤的局部性明度差异的涂布控制装置、涂布控制方法、程序以及记录介质。
附图说明
图1是示出第1实施方式所涉及的涂布系统中的结构的一例的外观图。
图2是示出第1实施方式所涉及的涂布系统中的结构的一例的框图。
图3是示出人的肌肤的结构的一例的概略图。
图4是示出肌肤表面上的N个区段的一例的示意图。
图5是示出第1实施方式所涉及的涂布控制方法的动作的流程图。
图6是示出高斯滤波器的一例的图。
图7是示出第1实施方式所涉及的涂布量计算的流程的流程图。
图8是示出第2实施方式所涉及的涂布量计算的流程的流程图。
图9是示出第3实施方式所涉及的涂布量计算的流程的流程图。
图10是示出斑点肌肤模型的反射率分布的图表。
图11是示出光照射到无斑点的肌肤模型时的脉冲响应函数的图表。
图12是示出斑点肌肤模型中的m(k)的分布的图表。
图13是示出斑点肌肤模型中的化妆料的涂布量分布的图表。
图14是示出化妆料涂布前的反射率分布和实施例1～3的反射率分布的图表。
图15是示出比较例1的反射率分布的图表。
图16是示出比较例2的反射率分布的图表。
具体实施方式
接着，关于本发明所涉及的涂布控制装置、涂布控制方法、程序以及记录介质，参照表示其实施方式的附图进行进一步详细说明。以下叙述的实施方式是本发明的优选的实施方式，因此在技术方面附加了优选的各种限定，但是只要在以下说明中未记载限定本发明的内容，则本发明的范围并不限于这些方式。
(第1实施方式)
[涂布系统]
图1是示出本实施方式所涉及的涂布系统10中的结构的外观图。涂布系统10包括涂布装置100、摄像部200以及涂布控制装置300。涂布装置100是用于将化妆料涂布于肌肤的装置，由用户抓握。涂布装置100具有棱柱状的壳体，在壳体的一端面设置有涂布头101。涂布装置100的形状只要是用户易于抓握的形状，则无限定，也可以呈圆柱状、半球状。并且，涂布装置100也可以具有手柄等抓握部件。
涂布头101例如由注入头构成，具有排出化妆料的多个喷嘴。多个喷嘴二维排列，能够对肌肤的规定区域排出化妆料而形成化妆料的涂膜。在涂布装置100安装有化妆料罐102，从化妆料罐102向涂布头101供给化妆料。化妆料罐102也可以设置在涂布装置100内。作为化妆料，能够使用用于遮盖包含面部在内的人的肌肤中的带来局部性明度差异的部分例如斑点、雀斑、毛孔、白斑以及各种瘢痕等的液状遮瑕膏或液状粉底等。
在涂布装置100的壳体侧面(上表面)以与涂布头101相同的朝向设置有摄像部200。摄像部200包括透镜、摄像元件等，能够拍摄通过涂布头101进行涂布的窄范围的肌肤的图像(第2图像)。摄像部200与涂布头101连接，摄像部200相对于涂布头101的相对位置固定。摄像部200也可以与涂布头101一体地形成。
涂布装置100以及摄像部200由涂布控制装置300控制。涂布控制装置300经由USB(Universal Serial Bus)电缆等有线连接或Bluetooth(注册商标)、Wi-Fi等无线连接，与涂布装置100以及摄像部200连接。涂布控制装置300也可以内置于涂布装置100内，在涂布控制装置300内置于涂布装置100内的情况下，涂布控制装置300也可以具有图1所示的涂布装置100中所包含的部件例如涂布头101等。涂布控制装置300预先存储有包含成为涂布对象的斑点、雀斑、毛孔等的肌肤的宽范围的图像(第1图像、肌肤的图像数据)。涂布控制装置300通过将从摄像部200获取的第2图像与第1图像进行比较，能够掌握涂布头101在肌肤中的位置。涂布控制装置300具有显示器301，在显示器301显示肌肤的图像、涂布头101的状态等各种信息。
若用户抓握涂布装置100并使涂布头101靠近肌肤，则涂布控制装置300识别涂布头101在肌肤中的位置，并将涂布头101的当前位置显示于显示器301。用户一边确认显示器301，一边使涂布头101沿着肌肤移动，当涂布头101到达涂布对象所在的位置时，自动进行化妆料的涂布。此时，根据涂布控制装置300所计算出的化妆料的涂布量(在后面详细叙述)而涂布化妆料。
图2是示出本实施方式所涉及的涂布系统10中的结构的一例的框图。涂布装置100包括涂布头101、化妆料罐102、移动机构103、操作部104、距离传感器105以及动作传感器106。涂布控制装置300包括显示器301、图像处理电路302、间隙控制电路303、头控制电路304、CPU305、RAM306、ROM307、存储装置308、扬声器309以及I/F310。CPU305能够作为获取部、分割部、计算部发挥功能。并且，存储装置308能够作为存储部发挥功能。
涂布头101是例如压电方式的注入头，由喷嘴、压力室、压电元件以及驱动电路等构成。在压力室内填充有化妆料，若从驱动电路向压电元件施加电压，则压力室的体积通过压电元件的变形而发生变化。由此，从喷嘴呈液滴状排出化妆料。另外，涂布头101也可以是通过加热体对化妆料进行加热并通过所产生的气泡的压力而排出化妆料的热敏式的注入头。涂布头101根据来自头控制电路304的控制信号而工作。
化妆料罐102收纳化妆料，向涂布头101供给化妆料。化妆料罐102能够设成容易更换的盒式类型。化妆料是能够从涂布头101排出的具有规定的粘性的液体。作为化妆料，具体可以列举遮瑕膏、粉底、白粉等能够遮盖肌肤中的局部性明度差异的化妆料。化妆料罐102也可以为了收纳种类或色调不同的多个化妆料而设置有多个。例如，为了能够涂布黄色、品红色以及青色这三个颜色的化妆料和能够调节亮度的化妆料，能够设置四个化妆料罐102，并将与各化妆料对应的四个喷嘴组设置于涂布头101。
移动机构103由致动器、导向部件等构成，能够驱动涂布头101在涂布装置100的长度方向上进退，该长度方向是在使涂布头101与肌肤相对时垂直于肌肤的方向。移动机构103按照来自间隙控制电路303的控制信号进行涂布头101的位置控制。
操作部104包括电源开关、菜单按钮以及用于执行涂布的涂布按钮等操作部件，用于用户对涂布装置100提供指示。涂布控制装置300按照从操作部104输入的用户的指示，对涂布装置100的动作进行控制。涂布按钮优选配置于在用户抓握涂布装置100的状态下能够容易地操作的位置处，例如配置于在用户抓握涂布装置100时与手指接触这样的位置处。由此，用户即使在将涂布装置100移动到无法直接目视确认的部位(脸颊等)时，也能够摸索操作涂布按钮。
距离传感器105例如是红外线传感器、超声波传感器等，朝向物体照射红外线、超声波等检测波，并接收其反射波。距离传感器105能够根据在照射检测波之后到接收反射波为止的时间检测与物体之间的距离。并且，距离传感器105在涂布头101的周围设置有多个，还能够检测涂布头101相对于肌肤的倾斜度。涂布控制装置300能够根据来自距离传感器105的检测信号而恒定地保持肌肤与涂布头101之间的距离，并且以例如在涂布头101相对于肌肤倾斜的情况下不排出化妆料的方式对涂布头101进行控制。
动作传感器106包含加速度传感器、陀螺仪传感器以及地磁传感器，检测涂布头101的移动、旋转等移动。加速度传感器例如由静电电容检测元件构成，能够检测施加于涂布头101的加速度。陀螺仪传感器例如由压电振动元件构成，具有检测涂布头101的朝向的功能。地磁传感器能够通过检测地磁而掌握涂布头101的方位。涂布控制装置300能够根据来自动作传感器106的检测信号，以例如在涂布头101的移动较快的情况下不排出化妆料的方式对涂布头101进行控制。
摄像部200包括光学系统、摄像元件以及A/D(Analog/Digital)变换器。光学系统包含光学滤波器、固定透镜以及聚焦透镜，使来自被摄体(肌肤)的光成像于摄像元件的摄像面，形成被摄体像。在光学系统中能够安装偏振滤波器，从而能够减少镜面反射。摄像元件例如是CMOS(Complementary Metal Oxide Semiconductor)图像传感器、CCD(ChargeCoupled Device)图像传感器，包括二维排列的多个像素、滤色器以及微透镜。多个像素能够包含摄像用的像素、焦点检测用的像素。并且，摄像元件具有控制电荷蓄积时间的电子快门功能。多个像素分别输出基于来自光学系统的入射光的像素信号。A/D变换器由比较电路、锁存电路等构成，将来自摄像元件的模拟的像素信号变换为数字的RAW数据。摄像部200除了能够输出静态图像之外，还能够输出规定帧频的动态图像。另外，本实施方式所涉及的摄像部200具有拍摄通过涂布头101进行涂布的窄范围的肌肤的图像(第2图像)的功能，但是也可以兼具拍摄能够成为涂布对象的肌肤的宽范围的图像(第1图像)的功能。
显示器301例如由液晶显示器、有机EL(Electro Luminescence)显示器构成。显示器301根据来自CPU305的数据，进行来自摄像部200的图像、存储装置308内存储的图像、涂布头101的状态信息、菜单画面等的各种显示。显示器301也可以是触摸面板，还能够作为操作部104发挥功能。
图像处理电路302包含数值运算电路，对来自摄像部200的RAW数据进行去马赛克处理，按照每个像素生成具有R(红色)、G(绿色)、B(蓝色)这各色值的图像数据(RGB图像)。图像处理电路302还具有对图像数据进行白平衡调整、伽马校正、轮廓强调、灰度变换、减噪、压缩等数字图像处理的功能。
间隙控制电路303通过向移动机构103输出控制信号，对肌肤与涂布头101之间的间隔(间隙)进行控制。间隙控制电路303能够根据来自距离传感器105的检测信号，以相对于肌肤保持一定距离的方式对涂布头101的位置进行控制。头控制电路304根据来自CPU305的指示，将排出化妆料的喷嘴的信息、表示涂布量等的控制信号输出到涂布头101。
CPU(Central Processing Unit)305包括CPU核、高速缓存存储器等，对涂布控制装置300的各部分进行统括控制。并且，关于CPU305在后面进行详细叙述，CPU305从存储装置308中获取肌肤的图像数据(获取部)，将该图像数据分割成多个区段(分割部)，计算涂布于肌肤的化妆料的涂布量(计算部)。RAM(Random Access Memory)306例如是DRAM(DynamicRAM)，使用于CPU305的工作区域、程序的加载区域等。RAM306暂时性地存储CPU305的处理所需的数据、在图像处理电路302中生成的图像数据、从存储装置308中读出的图像数据等。ROM(Read Only Memory)307例如是EEPROM(Electrically Erasable Programmable ROM)，存储各种设定文件、OS(Operating System)等基本程序、用于对涂布装置100的动作进行控制的控制程序。
存储装置(存储部)308例如是闪存、硬盘，能够存储宽范围的肌肤的图像数据(第1图像)、进行化妆料的涂布的窄范围的肌肤的图像(第2图像)以及其他图像等。存储装置308能够存储来自摄像部200的RAW数据、在图像处理电路302中生成的图像数据等。并且，存储装置308还能够经由I/F310存储通过外部的摄像装置拍摄的图像数据，而且还能够经由I/F310存储因特网上的图像数据。并且，存储装置308也可以是便携式存储介质，能够构成为能够借助存储卡槽、USB连接器等而相对于涂布控制装置300装卸。
扬声器309包括压电式的振动单元、驱动电路等，输出基于来自CPU305的数据的声波信号。扬声器309能够再生语音信息、效果音等，例如为了向用户通知涂布装置100的动作状态而使用。
I/F(Interface)310与互联网或各种周边设备等外部进行数据的收发。
<涂布系统的动作>
接着，对涂布系统10的动作进行说明。
首先，涂布控制装置300根据存储装置308中存储的肌肤的图像数据而计算涂布于肌肤的化妆料的涂布量(在后面详细叙述)。然后，涂布装置100根据涂布控制装置300所计算出的化妆料的涂布量，从涂布头101向肌肤涂布化妆料。
此时，涂布控制装置300判定第2图像(进行涂布的窄范围的肌肤的图像)在第1图像(肌肤的宽范围的图像数据)中的位置。然后，涂布控制装置300能够以成为涂布控制装置300所计算出的化妆料的涂布量分布中的该判定位置处的涂布量的方式，对涂布头101进行控制。关于第2图像在第1图像中的位置的判定方法，并无特别限制，能够设成任意的方法。
在本实施方式中，判定摄像部200所拍摄的第2图像在预先存储于存储装置308内的第1图像中的位置，并根据其判定结果从涂布头101涂布化妆料，但是本发明并不限于所述方式。例如，也可以是根据由摄像部200拍摄的图像而实时计算涂布量并以其涂布量涂布化妆料的方式。
[涂布控制装置、涂布控制方法]
接着，在对本发明所涉及的涂布控制装置以及涂布控制方法的更详细的实施方式进行说明之前，对在本实施方式以及后述的其他实施方式中使用的计算模型进行说明。
<肌肤的结构>
图3是示出在计算模型中设想的人的肌肤的层结构的一例的概略图，具体图示了面部肌肤的概略结构。另外，即使是面部以外的肌肤，各层的厚度虽然不同(例如，脚底的角质层比面部厚)，但是层结构也与图3所示的例相同。
人的肌肤从最表层侧向内部大致区分为包含角质层411a的表皮层411、真皮层412以及皮下组织413，呈层状结构。角质层411a在表皮层411中位于最表面。
在表皮层411的最下部生成黑色素。黑色素起到保护肌肤不受紫外线的伤害的作用。但是，该生成的黑色素因衰老等各种各样的影响而沉着在表皮层411内，成为黑色素沉着部411b，其结果是，肌肤看起来发黑而被识别为斑点。
在位于表皮层411的内侧的真皮层412的内部密布有血管。血管由连成一体的动脉414和静脉415构成。从心脏输送的动脉血在真皮层412中的动脉414内循环，进行氧/二氧化碳的授受等各种各样的物质移动之后，成为静脉血而在真皮层412中的静脉415内流动，再次到达心脏。
皮下组织413在肌肤中位于最内侧，其大部分由皮下脂肪构成。此外，在肌肤的内部密布有省略图示的神经或汗腺、淋巴管等。
<通过涂布物产生的肌肤的质感的变化>
接着，关于通过在如图3所示的肌肤上存在高遮盖性的涂布物而导致肌肤产生不透明的质感的情况，根据照射到肌肤的光和肌肤的形状以及特性进行说明。
构成肌肤的组织中的包含角质层411a的表皮层411以及真皮层412的组织半透明，容易使可视光线渗透。渗透到肌肤的光被肌肤内部的组织反射，并且一部分光一边被血液或黑色素反复吸收，一边在内部扩散，扩散的一部分光再次从肌肤表面射出。在此，当考虑向肌肤的某一点照射光时，能够观察到再次从肌肤射出的光以入射点为中心呈同心圆状扩展的样子。这样，被照射到肌肤的光在肌肤内部扩散并从包含入射点的宽范围射出这一情况就好比是用光从里侧照射肌肤表面的情况，可以认为具有相同的效果。
接着，对通过具有从里侧照射肌肤的效果而导致肌肤的外观如何发生变化的情况进行说明。在肌肤表面存在皱纹或被称作肌肤纹理的微细的凹凸，但是在此考虑肌肤表面的微细的凹凸的外观。
在通常的室内照明下，由于照度因凹凸面的朝向与照明方向之间的关系而发生变化，因此产生明亮部和暗部。该明暗的对比度才可以说是表示表面存在微细的凹凸的信号，但是对比度比越大，则越容易识别表面。这还可以说是等同于以眼睛与表面对焦时对比度比最大的方式移动的机构。但是，假设从凹凸面的里侧照射，则凹凸的对比度减小，相反地不易识别表面。前者明确地识别表面的存在，而后者不明确。若用质感来置换这些表面的识别容易度，则可以认为前者感觉到不透明感，后者感觉到纵深感或者透明感。
即，在肌肤的情况下，由于容易渗透光，所渗透的光从里侧照射肌肤，因此减小表面凹凸的对比度，其结果是感觉到纵深感、透明感。另一方面，在高遮盖性的涂布物存在于肌肤表面的情况下，由于光不渗透到肌肤内部，因此大部分光在入射点附近被反射。因此，从里侧照射的照明效果变小，由存在于肌肤表面的凹凸形成的影子只取决于从外部照射的照明环境，与肌肤表面不存在高遮盖性的涂布物的情况相比，看起来明暗被强调。即，被涂布高遮盖性的涂布物的肌肤看起来凹凸清晰可见。这样，若在肌肤上存在涂布物，则变成不透明的质感，因此涂布物较少的自然化妆法保留自然肤色的质感，因此受大多女性的欢迎。
<在边界处出现不自然度的理由>
然后，对产生形成有涂布物的区域与未形成有涂布物的区域之间的边界处的不自然度的理由进行说明。在此，考虑将具有遮盖力的涂布物局部附着于肌肤上的情况。
在说明肌肤的质感的变化时，提及在使光入射到肌肤的一点时产生的效果，但是在此考虑相反地从肌肤的一点射出的光。能够认为从肌肤的一点射出的光的成分包含了从该点的周围入射并在肌肤内部扩散环绕的光。因此，若在稍微远离该点的位置处存在妨碍光入射到肌肤的物体，则本来应从该处环绕的光无法到达，变暗其相应量。高遮盖性的涂布物正是妨碍入射的物体，越靠近涂布物的边界，其影响越大。其结果是，产生涂布物的边界附近比周围暗之类的现象。因而，涂布物的周围被暗的影子包围，成为经涂布的部分被强调之类的状态，这关系到不自然度。根据该理由，在将粉底没有不自然地只涂布于斑点部分的情况下，需要尤其慎重地调整边界部分的涂布量分布。
但是，如前述，对于一般使用者来说，很难以跨越肌肤中的有斑点的区域(暗部)与无斑点的区域(明亮部)之间的边界而平滑地减少化妆料的涂布量的方式进行涂布。
因此，本发明人发现，利用规定的计算模型计算化妆料的涂布量，并使用涂布装置而以成为计算出的化妆料的涂布量的方式进行涂布，由此能够自然地遮盖肌肤中的局部性明度差异。尤其。本发明人深入研究之后发现，化妆料的涂布边界处的不自然度起因于以下两点：(1)肌肤所具有的独特的光学特性即光的渗透扩散的性质；以及(2)涂布量的计算精度以及涂布精度。因而，根据预先考虑了这些中的至少一方的计算模型，能够在理论上求出各点中优选的涂布量。并且，假设相对于斑点知道包括边界在内用于完全没有不自然地掩盖的适当的涂布量分布，则并不仅限于使用设备进行涂布的情况，即使在使用者自己涂布化妆料的情况下，也能够成为有用的参考信息。
于是，本发明人等对以下所示的计算模型进行了研究。以下，对计算模型进行详细叙述。
<计算模型>
利用计算模型计算对如图3所示的层结构的肌肤进行涂布的化妆料的涂布量。
在该计算模型中，考虑在肌肤表面上存在N个区段。图4是示出肌肤表面上的N个区段的一例的示意图。N个区段均由相同面积的正方形构成。依次配置有第1个区段1、第2个区段2、第3个区段3、……、第k个区段k、……、第N-2个区段N-2、第N-1个区段N-1以及第N个区段N。
在此，第k个区段k的反射率R表示R(k)，或者如Rk那样用下标表示。若是第k个区段k的涂布量，则表示为xk。并且，将从第k个区段k向第k’个区段k’的光的扩散当作肌肤的空间脉冲响应函数来对待，如Ik(k，k’)这样表示。空间脉冲响应函数是指朝向无限小区域供给光时的反射光亮度值的分布，被称作点扩散函数(Point Spread Function：PSF)。即，空间脉冲响应函数是在用区段考虑的情况下向某一区段均匀地照射光时表示从包含其区段的周围的区段射出多少光的函数。
并且，如下定义rout、rin、tout以及tin。另外，下标out表示相对于肌肤表面朝向外侧，下标in表示相对于肌肤表面朝向内侧。
rout表示向区段照射光时区段的反射率中的不经由肌肤而直接从涂布物反射的反射率。如后述，由于假设不存在从肌肤表面的反射，因此可以说rout只考虑了从涂布物反射的光。
rin表示从肌肤的里侧向区段照射光时从区段反射的反射率。与rout同样地，可以说只考虑了从涂布物反射(朝向肌肤内部)的光。
tout表示从区段的内部朝向外部的透射率。
tin表示从区段的外部朝向内部的透射率。
由于这些由涂布物的涂布量规定，因此在将涂布量设为x时，表示为rout(x)、rin(x)、tout(x)以及tin(x)。
若将以上全部总结起来，则区段n的反射率Rn用式(1)表示。
[数式1]
在此，第1行右边第1项表示照射到区段n的光被涂布物反射，第1行右边第2项表示从区段n或其他区段的外部透射到内部，并直接到达区段n。第2行表示从区段n或其他区段的外部透射到内部，在任一区段的内表面反射一次之后，到达区段n。第3行表示同样地反射两次，以下，第4行以后是其反复。
而且，由于通过涂布量x唯一地规定rout、rin、tout、tin，因此只要预先掌握其相关性，则实质的未知数成为N个。因而，只要关于N个涂布量x求解式(1)即可。
另外，本发明可以利用式(1)所示的计算模型以外的计算模型而计算化妆料的涂布量，并且也可以对包含式(1)所示的计算模型在内的各种计算模型施加简化方法而计算化妆料的涂布量。关于以下所示的具体例，也进行用于简化计算的假设，但是本发明并不限于此。
·计算模型的简化
在式(1)中，Ik(k，n)记述为在各区段中不同，但是为了简化，假设为Ik(k，n)＝m(n)m(k)I(k，n)。其中，I(k，n)是表示从区段k入射的光在区段n射出的比率的脉冲响应函数，I(k，k’)如下述式那样标准化。
[数式2]
在此，设k’为包围k的m个区段的编号。m(n)m(k)表示从k点入射并从n点射出时在肌肤内部传播时失去的能量。在该假设中，在肌肤内失去的能量由入射点和射出点决定。
若采用至式(1)的第2行，将成为各区段的目标的化妆料的涂布后的反射率设为Rp，则能够获得式(2)所示的N个非线性联立方程式。另外，化妆料的涂布后的反射率Rp可以在肌肤的所有部分中设定为相同，也可以根据肌肤的部位而设定任意的Rp。
[数式3]
与区段n的涂布量xk相关的偏导数系数用式(3)表示。
[数式4]
其中，在式(3)中，δi，j是克罗内克的δ记号。
[数式5]
只要能适当地设定初始值，则能够利用偏导数系数并通过牛顿法求出非线性联立方程式。另外，在后面对初始值的设定方法进行叙述。
·m(k)的估计
若按照前述的计算模型，则R(n)用式(4)表示。
[数式6]
其中，设R(k)、m(k)为区段k中的各自的反射率和能量损耗。由于这是未知数N的非线性联立方程式，因此按照常规方法，如式(5)那样设置N个函数，并如式(6)那样设定偏导数系数。
[数式7]
[数式8]
在此，如下显示了m(k)。
[数式9]
m(k)＝mk
并且，初始值如式(7)那样设定。
[数式10]
然后，利用式(5)、式(6)以及式(7)求出m(k)。
·涂布量计算的第1具体例(有肌肤内反射的方法)
在此，在表示具体的涂布量的计算方法时，如以下式(8)那样设定涂布物、涂布方式以及涂布量分布。
[数式11]
rout＝x
tin＝1-x…式(8)
涂布量分布用如下的物理量来表示，该物理量规定对肌肤上的各区段的涂布物的体积、重量、厚度等涂布物的量。在此，按照设定于肌肤上的每个微小的区段进行涂布，求出涂布量分布是表示求出对各区段的涂布量。另外，由于区段具有规定的面积，因此涂布于各区段的涂布面积率也能够视为涂布量。因此，涂布物在各区段内以规定的面积比率涂布。涂布物的厚度以透射率为大致零的方式被涂布。为了使讨论简单，假设涂布物自身不具有吸收光的作用，与涂布物接触的光无能量损耗地反射。这即为设想了将遮盖性极高的白色涂布物以规定的面积率涂布于各区段的情况。例如，在以面积比率0.4涂布于某一区段的情况下，均等地照射到区段内的光中的0.4被反射，剩余的0.6到达肌肤。
式(8)表示从肌肤表面的外侧照射的光在该肌肤表面中的反射以及透射，但是另一方的从肌肤表面的内侧到达的光的反射以及透射如式(9)那样表示。
[数式12]
rin＝x
tout＝1-x…式(9)
在未形成有涂布物的无涂布的肌肤中，设成内表面反射为零、透射为1。另外，当x＝0时，rin＝0，但是这即为假设了在无涂布的肌肤中从内侧到达的光全部透射到外侧而未产生内表面反射的情况。该简易模型中的rout、rin、tout、tin相对于x的变化率如以下式(10)以及式(11)。
[数式13]
[数式14]
然后，若将式(8)～(11)代入式(2)、式(3)中，则获得式(12)、式(13)。
[数式15]
[数式16]
1～N’表示影响着眼点的范围。在1～N的范围(关心区域)外的情况下，假设涂布量为零，但是表示光的环绕的(1-xk)成为1，影响结果，因此将1～N’的范围用于计算。
设：用于求解式(12)的初始值为式(14)。
[数式17]
该初始值相当于光并未全部在肌肤内部扩散而只在照射的位置处射出时的涂布量。
由于包含来自肌肤的内侧的光通过涂布物反射到肌肤内的项而进行计算，因此将以上方法称作有肌肤内反射的方法。
·涂布量计算的第2具体例(无肌肤内反射的方法)
但是，式(12)的右边第4项表示从肌肤内部到达表面的光与涂布物的点碰撞并反射到肌肤内部之后、再次到达表面并从表面射出的量。若省略该第4项而改写第3项，则如式(15)那样表示。
[数式18]
若将式(15)改写成联立方程式的形式，则获得如式(16)这样的简化的式。
[数式19]
在式(16)的中括号理解成从反射率R(n)减少了涂布物的点所产生的脉
冲的量(中括号内的第2项的量)。
如下表示偏导数值，获得简略型的式(17)。
[数式20]
由于来自肌肤的内侧的光并未通过涂布物反射到肌肤内而直接消失，因此将以上方法称作无肌肤内反射的方法。
然后，以下对利用以上示出的计算模型的本发明的各实施方式所涉及的涂布控制装置以及涂布控制方法进行说明。
<涂布控制装置的动作>
图5是示出本发明的第1实施方式所涉及的涂布控制装置中的动作的流程图。以下，依次对涂布控制装置的动作的各步骤进行说明。
·肌肤图像数据获取(步骤S1；获取工序)
首先，CPU305从存储装置308获取外部的摄像装置(未图示)所拍摄的作为涂布化妆料的对象的肌肤的图像数据，并读出到RAM306。肌肤的图像数据预先存储于存储装置308内。肌肤的图像数据例如可以从摄像装置或个人计算机等外部设备经由I/F310而存储于存储装置308，或者也可以从因特网上经由I/F310而存储于存储装置308内。并且，也可以将预先存储有肌肤的图像数据的作为存储装置308的存储卡安装于涂布控制装置300所具有的存储卡槽(未图示)来利用。CPU305构成了获取部。
肌肤的图像数据至少包含分别与多个像素对应的光学信息和位置信息。作为光学信息，优选包含亮度值，例如可以列举YUV形式的信息。位置信息只要包含二维的位置信息，则可以是任何信息。
在以下说明中，根据亮度值计算了涂布量，但是可以使用特定的波长区域(颜色成分)的信号，也可以使用各颜色的值。因而，可以使用带通滤波器等而选择任意的可视区域的波长、优选600nm以上的波长，也可以从RGB信号中选择任意的信号、优选R信号，还可以从YUV信号中选择任意的信号、优选Y信号。
所获取的图像数据的尺寸能够分割成多个区段，只要是能够在后述的涂布量计算处理(步骤S3)中高精度地计算涂布量的尺寸，则无特别限制。分辨率优选为高达能够通过人的肉眼目视确认的限度的分辨率，也可以是比这高的分辨率，但是优选为在图像处理中不成为过度的高负荷的程度的高分辨率。
·分割成多个区段(步骤S2；分割工序)
接着，CPU305将所获取的图像数据分割成多个区段。CPU305构成了分割部。
图像数据分割成区段的一个边为200μm以下、优选20μm以上且150μm以下。通过分割成区段的一个边为200μm以下，能够计算精密到不易通过肉眼判别的级别的涂布量分布，能够自然地遮盖局部性明度差异。并且，通过设为150μm以下，能够更加自然地遮盖局部性明度差异，通过设为20μm以上，能够减小后述的涂布量计算处理的处理负荷。
具体地说，如图4所示，CPU305能够将图像数据分割成N个区段。各区段的一个边是200μm以下，是相同面积的正方形。另外，区段的形状并非必须是正方形，也可以是长方形或者任意的多边形。在该情况下，相邻的区段的中心间距离优选为200μm以下例如20μm以上且150μm以下。图像数据的分割能够通过将比上述的像素间距高精细的多个像素的亮度值平均化而进行。例如，CPU305能够将10μm间距的多个像素的亮度值平均化而计算期望的像素间距的区段。
并且，CPU305不仅进行将图像数据分割成多个区段的图像处理，而且还可以进行其他图像处理。在本实施方式中，优选在分割处理之前进行图像数据的噪声去除，去除来源于肌肤上存在的微小的异物或毛孔等的噪声。
·涂布量计算处理(步骤S3；计算工序)
然后，CPU305根据分割出的N个区段各自的值而计算涂布于与各个区段对应的肌肤的各部分的化妆料的涂布量。CPU305构成了计算部。并且，用于计算涂布量的区段的值是区段所具有的光学信息，优选为亮度值。
在计算涂布量时，也可以利用N个区段中的单一区段的值而计算涂布于与该单一区段对应的肌肤的部分的化妆料的涂布量。然后，也可以通过关于N个区段全部反复进行这样的涂布量的计算而计算关于肌肤的各部分的涂布量。并且，也可以利用N个区段中的多个区段的值而计算涂布于与该多个区段对应的肌肤的各部分的化妆料的涂布量。另外，在本实施方式中，利用所有N个区段的亮度值而计算涂布于与N个区段对应的肌肤的各部分(N个区域)的化妆料的涂布量，但是在后面对具体的化妆料的涂布量的计算进行叙述。
在本实施方式中，在计算涂布于肌肤的化妆料的涂布量之后，关于按照每个区段获得的化妆料的涂布量，CPU305进行平滑化处理而使其平滑化。关于平滑化处理，并无特别限制，能够使用各种空间滤波器进行，例如可以列举通过图6所示的高斯滤波器进行处理的方法。通过进行平滑化处理，能够平滑且更加自然地遮盖肌肤的局部性明度差异。
另外，在根据如下的反射率而计算了化妆料的涂布量的情况下，在反射率较低的波长中涂布量稍微过剩,其中，该反射率是关于不特定的宽范围(例如可视区域全域)的波长不区分各波长而全部含有来处理的反射率。并且，在根据关于特定波长(颜色)的反射率计算化妆料的涂布量的情况下，在其特定波长以外的波长中，涂布量有可能稍微过量与不足。因此，为了补偿所产生的过量与不足而避免不自然，优选适当地通过化妆料进行着色。例如，在如涂布量过剩的情况下，优选在过剩的部位中补偿不足的吸收进行着色。此时，例如在式(2)中，将rout、rin、tout、tin设为吸收率的函数，将吸收率设为偏微分，由此能够计算在各波长中所提供的吸收。因而，例如根据在计算出的各波长中所提供的吸收，并按照每个区段涂布与各波长(颜色)相应的涂布物，由此能够实施色泽也良好的化妆。例如，为了通过混杂在区段上而呈现期望的颜色，也可以涂布配合有黄色、品红色、青色这三个颜色的三种涂布物。
<通过有肌肤内反射的方法进行的涂布量计算>
接着，对第1实施方式中的化妆料的涂布量的具体计算进行说明。图7是示出本发明的第1实施方式所涉及的涂布量计算的流程的流程图。在本实施方式中的涂布量计算处理中，CPU305利用有肌肤内反射的方法的计算模型即前述的计算模型中记载的式(12)以及式(13)而进行化妆料的涂布量的计算。
·脉冲响应函数设定(步骤S311)
首先，CPU305对在图5的步骤S2中分割的N个区段分别设定脉冲响应函数。脉冲响应函数表示分别与N个区段对应的肌肤的各部分之间的光的扩散。将N个区段中的一个设为对象区段，将对象区段以外的区段设为非对象区段。在该情况下，脉冲响应函数是表示以下比例的函数：入射到与对象区段对应的肌肤的对象部分的光从该肌肤的对象部分的表面射出的比例；或者入射到与非对象区段对应的肌肤的非对象部分的光从肌肤的对象部分的表面射出的比例。
此时，也可以对第1个～第N个区段全部设定相同的脉冲响应函数。并且，也可以通过测量第1个～第N个各区段中的脉冲响应，按照每个区段设定不同的(如N个)脉冲响应函数。
·亮度值获取(步骤S312)
接着，CPU305分别从第1个～第N个区段中获取亮度值。
·吸收系数m(k)设定(步骤S313)
而且，CPU305利用式(5)以及式(6)分别对第1个～第N个区段设定吸收系数m(k)。
·涂布量计算(步骤S314)
然后，CPU305通过式(12)以及式(13)所示的有内部反射的计算模型而计算涂布于分别与第1个～第N个区段对应的肌肤的各部分的化妆料的涂布量，结束涂布量计算处理(图5的步骤S3)。
换句话说，根据如下的光的反射扩散模型而进行该步骤S314中的化妆料的涂布量的计算。即，关于在步骤S314中使用的光的反射扩散模型，在将N个区段中的一个设为对象区段时，在与对象区段对应的肌肤的对象部分中获得的光至少包含下述(A)～(C)所记载的成分。
(A)朝向与对象区段对应的肌肤的对象部分的表面射出的光中的、从该肌肤的对象部分的表面不透射到内部而被反射的成分。
(B)朝向与对象区段对应的肌肤的对象部分的表面射出的光中的、从该肌肤的对象部分的表面透射到内部之后反射并从该肌肤的对象部分的表面射出的成分。
(C)朝向与对象区段以外的非对象区段对应的肌肤的非对象部分的表面射出的光中的、从该肌肤的非对象部分的表面透射到内部之后被反射并从肌肤的对象部分的表面射出的成分。
根据以上说明的第1实施方式，通过分割成200μm以下的区段，能够计算精密到不易通过肉眼判别的级别的涂布量分布，从而能够自然地遮盖局部性明度差异。并且，通过使用考虑到肌肤内部的反射和基于脉冲响应函数的肌肤内部的光的扩散的计算模型，能够更加准确地计算涂布量，因此能够更加自然地遮盖肌肤的局部性明度差异。
(第2实施方式：无肌肤内反射的方法)
接着，对第2实施方式中的化妆料的涂布量的具体计算进行说明。图8是示出本发明的第2实施方式所涉及的涂布量计算的流程的流程图。在本实施方式中的涂布量计算处理中，CPU305利用无肌肤内反射的方法的计算模型即前述的计算模型所记载的式(16)以及式(17)进行了化妆料的涂布量的计算。
与上述的第1实施方式(有肌肤内反射的方法)相比，第2实施方式只有涂布量计算(图7的步骤S314)不同。即，关于肌肤图像数据获取(图5的步骤S1)以及分割成多个区段(图5的步骤S2)相同。并且，关于涂布量计算处理(图5的步骤S3)，从脉冲响应函数设定(图7的步骤S311、图8的步骤S321)至吸收系数m(k)设定(图7的步骤S313、图8的步骤S323)也相同。因而，在此只对涂布量计算(图8的步骤S324)进行说明，省略其他说明。
·涂布量计算(步骤S324)
对第1个～第N个区段分别设定脉冲响应函数、亮度值、吸收系数m(k)。CPU305通过式(16)以及式(17)所示的无内部反射的计算模型，计算分别关于第1个～第N个区段的化妆料的涂布量，结束涂布量计算处理(图5的步骤S3)。
换句话说，关于该步骤S324中的涂布量的计算，可以说根据第1实施方式的步骤S314(图7)中的除了(C)所记载的成分的光的反射扩散模型(即，上述(A)以及(B)所记载的成分)而计算了涂布量。
根据以上说明的第2实施方式，通过分割成200μm以下的区段，能够计算精密到不易通过肉眼判别的级别的涂布量分布，从而能够自然地遮盖局部性明度差异。并且，通过使用考虑基于脉冲响应函数的肌肤内部的光的扩散的计算模型，能够更加准确地计算涂布量，因此能够更加自然地遮盖肌肤的局部性明度差异。另外，虽然未考虑肌肤内部的反射，但是能够相应地减小涂布量计算处理中的处理负荷。
(第3实施方式：使用初始解的方法)
而且，对第3实施方式中的化妆料的涂布量的具体计算进行说明。图9是示出本发明的第3实施方式所涉及的涂布量计算的流程的流程图。在本实施方式中的涂布量计算处理中，CPU305利用将初始解适用于计算模型的方法即前述的计算模型所记载的式(14)进行了化妆料的涂布量的计算。
在第3实施方式中，与上述的第1、第2实施方式相比，只有涂布量计算处理(图5的步骤S3)不同。即，关于肌肤图像数据获取(图5的步骤S1)以及分割成多个区段(图5的步骤S2)相同。因而，在此只对涂布量计算处理(图5的步骤S3)进行说明，省略其他说明。
·k＝1的设定(步骤S331)
首先，CPU305设定k＝1。
·第k个区段的亮度值获取(步骤S332)
接着，CPU305从在图5的步骤S2中分割的N个区段中的第k个区段中获取亮度值。
·涂布量计算(步骤S333)
而且，CPU305利用式(14)所示的初始解，并根据上述的计算模型而计算关于第k个区段的化妆料的涂布量。
·k＝k+1的设定(步骤S334)
然后，CPU305将k的值与1相加，设为k＝k+1。
·k＝N的判定(步骤S335)
之后，CPU305判定k与N是否相等。在判定的结果为否的情况下，由于存在未计算涂布量的区段，因此返回到步骤S332。在判定的结果为是的情况下，由于计算了N个区段所有的涂布量，因此结束涂布量计算处理(图5的步骤S3)。
根据以上说明的第3实施方式，通过分割成200μm以下的区段，能够计算精密到不易通过肉眼判别的级别的涂布量分布，从而能够自然地遮盖局部的明度差异。另外，虽然未考虑肌肤内部的光的扩散和肌肤内部的反射，但是能够使涂布量计算处理中的处理负荷显著地减小其相应量。
在上述的第1～第3实施方式中，获取部、分割部以及计算部均为涂布控制装置300所具有的CPU305，但是也可以用云计算代用这些的一部分或全部。
并且，上述的化妆料的涂布量计算的方法的适用目的并不仅限于在采用注入法等的涂布装置中对化妆料的涂布进行控制。根据上述的化妆料的涂布量计算的方法，还能够提供以计算出的涂布量实施化妆的化妆模拟图像，或者提供建议化妆的化妆建议系统。
[程序、记录介质]
本发明的一实施方式所涉及的程序使计算机执行上述第1～第3实施方式所记载的控制的各工序。程序的语言等并无特别限制，能够使用周知惯用的任何语言。
并且，本发明的一实施方式所涉及的记录介质是记录了上述程序的计算机能够读取的记录介质。记录介质的种类等并无特别限制，能够使用周知惯用的任何种类。
实施例
以下，通过实施例以及比较例对本发明进行进一步详细的说明，但是本发明并不受这些例的任何限定。
在实施例以及比较例中，对于肌肤的斑点，对将初始解适用于计算模型的情况(实施例1、式(14))、有肌肤内反射的计算模型(实施例2、式(12)、(13))以及无肌肤内反射的计算模型(实施例3、式(16)、式(17))进行比较。并且，作为比较例1以及2，还一并示出分别向200μm内侧和外侧错开而涂布化妆料时的结果。并且，在实施例以及比较例中，通过作为实验的可靠性较高的蒙特卡罗模拟进行了确认。
[实施例1～3]
(1)斑点肌肤模型
设肌肤为多层膜模型，对各层的光学特性的参数设定了通常肌肤的值。关于斑点，在12.8平方毫米的肌肤中，将中央的6.4平方毫米部分设为斑点。在中央截面中，按照100平方微米的每个区段计算了反射率。为了作为每个区段的平均值体现，使用了在区段内(面积10,000μm2)内测量出的亮度16点的平均值。将该平均值作为R(k)用于以下计算。
关于斑点肌肤模型，将在蒙特卡罗模拟中模拟出的结果示于图10。图10是示出斑点肌肤模型的反射率分布的模拟结果的图表，是示出相对于斑点肌肤模型的中央截面的位置的反射率的图表。
由图10可知，能够确认到在设定斑点并产生光的吸收的中央部分反射率下降。边界部分未呈直角形状而发生平缓的变化的情况可以认为是在肌肤中也呈现了内部扩散的效果。
(2)脉冲响应函数
接着，设定无斑点的肌肤模型，向中央100平方微米处以零度的入射角度均匀地照射光，测量了从周围向零度方向射出的亮度。测量在5.1mm×5.1mm的范围内进行，并按照100平方微米的每个区段进行了平均化。在该范围内，以合计为1的方式对获得的亮度进行了标准化。图11是示出模拟向无斑点的肌肤模型照射光时而获得的脉冲响应函数的图表。
(3)m(k)的导出
根据在上述(1)中求出的斑点肌肤的反射率分布，并利用式(5)以及式(6)设为非线性联立方程式，求出了m(k)的分布。并且，利用初始解(式(7))求出了m(k)的分布。在12.8平方毫米处，将区段设为100平方微米。联立方程式的数量是16384(＝1282)个。
图12是示出在模拟中获得的斑点肌肤模型中的m(k)的分布的图表。在将误差设为1.0e-6时，计算的解已收敛。由于将m(k)的平方根设为初始解(虚线)，因此初始解成为边界平缓的变化，但是根据式(5)以及式(6)获得的m(k)的分布(实线)变得陡峭，更接近在肌肤模型中设定为直角形状的吸收分布。
(4)涂布量导出
根据在上述(3)中求出的m(k)，并根据有肌肤内反射的式(12)以及式(13)、无肌肤内反射的式(16)以及式(17)求出了化妆料的涂布量分布。并且，关于将初始解适用于计算模型的情况(式(14))，也求出了化妆料的涂布量分布。此时，在本实施方式中，化妆料的涂布后的反射率Rp(作为目标的反射率)在肌肤的所有部分中相同地设定为0.42。并且，在实施例1中计算到与Rp之间的误差为0.00001以下，在实施例2中计算到与Rp之间的误差为0.0001以下(实施例3由于是初始解，因此不产生误差)，但是本发明并不限于这些。例如，若将误差设定为0.001以下，则无需过剩的处理负荷而能够获得良好的结果。
图13是示出在模拟中获得的斑点肌肤模型中的化妆料的涂布量分布的图表。根据图13，相对于初始解(虚线)，有肌肤内反射(粗线)和无肌肤内反射(细线)均增加了涂布量。尤其在无肌肤内反射(粗线)的情况下，其增加变大。可以认为这起因于假设了光已发生损耗。
(5)通过蒙特卡罗模拟进行的涂布量分布评价
接着，对在上述(4)中设定的肌肤模型的表面导入了基于涂布物的效果。涂布物视为无厚度。关于入射到涂布区域的光中的表面反射，进行根据双向反射函数(Bidirectional Reflectance Distribution Function)的计算，进入涂布物内的光视为全部作为完全散射光从入射的位置射出。
分别通过利用式(14)的初始解获得的涂布量分布、利用有肌肤内反射的式(12)以及式(13)获得的涂布量分布、利用无肌肤内反射的式(16)以及式(17)获得的涂布量分布，计算区段内的涂布物的面积比率，并示出涂布后的反射率分布。
将各计算结果示于图14。粗线是根据有肌肤内反射的式(12)以及式(13)求出的实施例1的反射率分布。细线是根据无肌肤内反射的式(16)以及式(17)求出的实施例2的反射率分布。虚线是将初始解(式(14))适用于计算模型而求出的实施例3的反射率分布。并且，单点划线是化妆料涂布前的反射率分布。根据该图14，可知以下情况。
在实施例3中可知，反射率的下降即斑点被大幅改善。在实施例3中可知，由于完全未考虑随着光的扩散而产生的损耗，因此与实施例1～2相比，校正稍微不足，但是获得了良好的遮盖效果。并且，由于利用初始解，无需求解复杂的联立方程式，因此实施例3的处理负荷极低。
在实施例2中可知，反射率的下降即斑点被大幅改善。在实施例2中，由于将随着肌肤内部的光扩散产生的损耗估算为最大限度，因此可以推测稍微较高地校正了斑点部位，但是获得了良好的遮盖效果。
在实施例1中，反射率的下降即斑点被大幅改善，变得大致均匀。在实施例1中可知，通过将内表面反射进行至两次，稍微过剩地观察到损耗，因此虽然稍微较高地校正了斑点部位，但是获得了非常良好的遮盖效果。
但是，观察图14的涂布量的分布，在实施例1～3中只有涂布量的绝对值不同，但是边界处的涂布量变化的样子能够视为包含初始解在内大致相同。若将实施例3考虑为完全无损耗的情况并将实施例2考虑为过剩地观察到损耗的情况，则可以认为优选的涂布量在此期间出现，即使利用初始解获得的分布乘以适当的校正倍率，也能够获得优选的涂布量分布。因而，将利用初始解获得的涂布量分布的图案重复涂抹多次的情况也能够包含于本发明的范围内。
[比较例1]
接着，将在实施例3中获得的涂布量分布设为从中央向外侧错开200μm的涂布量分布，并将该涂布量分布导入到肌肤模型的表面，除此以外与实施例3相同地进行，获得了涂布化妆料之后的反射率分布。图15是示出比较例1的反射率分布的图表。
由图15明确可知，出现两处较大的峰(凸部)，成为不自然的边界。
[比较例2]
接着，将在实施例3中获得的涂布量分布设为朝向中央向内侧错开200μm的涂布量分布，并将该涂布量分布导入到肌肤模型的表面，除此以外与实施例3相同地进行，获得了涂布化妆料之后的反射率分布。图16是示出比较例2的反射率分布的图表。
由图16明确可知，出现两处较大的峰(凹部)，成为不自然的边界。
在比较例1～2中，在将化妆料涂布于肌肤的情况下，因产生200μm的偏移，无法自然地遮盖局部性明度差异。
由以上实施例1～3以及比较例1～2明确可知，通过进行200μm以下的精密的区段的分割而计算化妆料的涂布量，自然地遮盖肌肤的局部性明度差异。
符号说明
10涂布系统、100涂布装置、101涂布头、102化妆料罐、103移动机构、104操作部、105距离传感器、106动作传感器、200摄像部、300涂布控制装置、301显示器、302图像处理电路、303间隙控制电路、304头控制电路、305CPU(获取部、分割部、计算部)、306RAM、307ROM、308存储装置(存储部)、309扬声器、310I/F、411表皮层、411a角质层、411b黑色素沉着部、412真皮层、413皮下组织、414动脉、415静脉。

Claims (10)

1.一种涂布控制装置，其包括：
获取部，所述获取部获取肌肤的图像数据；
分割部，所述分割部将所述图像数据分割成200μm以下的多个区段；以及
计算部，所述计算部根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量。
2.根据权利要求1所述的涂布控制装置，其中，
在所述多个区段中相邻的区段的中心间距离是20μm以上且150μm以下。
3.根据权利要求1或2所述的涂布控制装置，其中，
所述计算部利用脉冲响应函数并根据所述图像数据的多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量，其中，所述脉冲响应函数表示分别与所述多个区段对应的所述肌肤的各部分之间的光的扩散。
4.根据权利要求3所述的涂布控制装置，其中，
设所述多个区段中的一个区段为对象区段时，所述脉冲响应函数表示以下比例：
入射到与该对象区段对应的所述肌肤的对象部分的光从该肌肤的对象部分的表面射出的比例；或者
入射到与所述对象区段以外的非对象区段对应的所述肌肤的非对象部分的光从所述肌肤的对象部分的表面射出的比例。
5.根据权利要求3或4所述的涂布控制装置，其中，
所述计算部根据光的反射扩散模型而计算所述化妆料的涂布量，
在该反射扩散模型中，设所述多个区段中的一个区段为对象区段时，在与该对象区段对应的所述肌肤的对象部分中获得的光至少包含以下成分：
朝向与所述对象区段对应的所述肌肤的对象部分的表面射出的光中的、从该肌肤的对象部分的表面未被透射到内部而被反射的成分；
朝向与所述对象区段对应的所述肌肤的对象部分的表面射出的光中的、从该肌肤的对象部分的表面透射到内部之后被反射并从该肌肤的对象部分的表面射出的成分；以及
朝向与所述对象区段以外的非对象区段对应的所述肌肤的非对象部分的表面射出的光中的、从该肌肤的非对象部分的表面透射到内部之后被反射而从所述肌肤的对象部分的表面射出的成分。
6.根据权利要求1至5中任意一项所述的涂布控制装置，其中，
所述图像数据包含亮度值。
7.根据权利要求1至6中任意一项所述的涂布控制装置，其中，
所述涂布控制装置还包括：
存储部，所述存储部存储所述图像数据；以及
涂布头，所述涂布头根据所述计算部计算出的所述化妆料的涂布量而向所述肌肤排出该化妆料，形成该化妆料的涂膜，
所述获取部从所述存储部获取所述图像数据。
8.一种涂布控制方法，其包括：
获取工序，其获取肌肤的图像数据；
分割工序，其将所述图像数据分割成200μm以下的多个区段；以及
计算工序，其根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量。
9.一种程序，其用于使计算机执行以下处理：
获取处理，其获取肌肤的图像数据；
分割处理，其将所述图像数据分割成200μm以下的多个区段；以及
计算处理，其根据所述图像数据的单一或多个区段的值而计算涂布于所述肌肤的各部分的化妆料的涂布量。
10.一种计算机能够读取的记录介质，其记录有权利要求9所述的程序。
CN201780083270.5A 2016-12-20 2017-12-18 涂布控制装置、涂布控制方法、程序以及记录介质 Active CN110177486B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016246652 2016-12-20
JP2016-246652 2016-12-20
PCT/JP2017/045299 WO2018117020A1 (ja) 2016-12-20 2017-12-18 塗布制御装置、塗布制御方法、プログラムおよび記録媒体

Publications (2)

Publication Number Publication Date
CN110177486A true CN110177486A (zh) 2019-08-27
CN110177486B CN110177486B (zh) 2022-04-08

Family

ID=62627698

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780083270.5A Active CN110177486B (zh) 2016-12-20 2017-12-18 涂布控制装置、涂布控制方法、程序以及记录介质

Country Status (7)

Country Link
US (1) US11501456B2 (zh)
EP (1) EP3560376B1 (zh)
JP (1) JP7051712B2 (zh)
KR (1) KR102528866B1 (zh)
CN (1) CN110177486B (zh)
TW (1) TW201828861A (zh)
WO (1) WO2018117020A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114206426A (zh) * 2019-08-16 2022-03-18 强生消费者公司 用于通过带格栅端部执行器涂敷化妆品组合物的装置和方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021131852A1 (ja) * 2019-12-26 2021-07-01 株式会社資生堂 化粧支援装置、化粧支援方法、化粧支援プログラム、及び化粧支援システム
KR20210100907A (ko) * 2020-02-07 2021-08-18 (주)우리아이들플러스 피부 도포량 산출 방법
JP7521996B2 (ja) 2020-10-13 2024-07-24 株式会社 資生堂 シミュレーション画像生成方法、コンピュータ、およびプログラム
EP4355285A2 (en) * 2021-06-18 2024-04-24 Merz Pharma (Schweiz) AG Application compliance device
FR3145154A1 (fr) * 2023-01-19 2024-07-26 L'oreal Assistance visuelle pour un positionnement précis des outils de beauté et une application autonome à domicile
WO2024094589A1 (en) * 2022-10-31 2024-05-10 L'oreal Visual assistance for precise beauty tool positioning and self application at home

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101287607A (zh) * 2005-08-12 2008-10-15 里克·B·耶格尔 用于喷涂反射率修改剂以改善人的皮肤的视觉美观度的系统和方法
CN104540445A (zh) * 2012-08-17 2015-04-22 索尼公司 图像处理装置、图像处理方法、程序和图像处理系统
CN106175780A (zh) * 2016-07-13 2016-12-07 天远三维（天津）科技有限公司 面肌运动捕捉分析系统及其分析方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS55328A (en) 1978-06-19 1980-01-05 Japan Synthetic Rubber Co Ltd Preparation of styrene
JP5363696B2 (ja) * 2005-03-23 2013-12-11 株式会社 資生堂 肌化粧料用色材組成物、それを用いたファンデーション、化粧方法
JP2006290745A (ja) 2005-04-06 2006-10-26 Kao Corp 化粧料の評価方法
US8184901B2 (en) * 2007-02-12 2012-05-22 Tcms Transparent Beauty Llc System and method for applying a reflectance modifying agent to change a person's appearance based on a digital image
JP5211507B2 (ja) 2007-02-27 2013-06-12 凸版印刷株式会社 メイクアップ方法
US8597667B2 (en) * 2008-05-09 2013-12-03 Elc Management Llc Targeted and individualized cosmetic delivery
FR2933581B1 (fr) 2008-07-10 2011-12-02 Oreal Procede de maquillage et dispositif pour la mise en oeuvre d'un tel procede
FR2944898B1 (fr) * 2009-04-23 2018-03-16 Lvmh Recherche Procede et appareil de caracterisation des imperfections de la peau et procede d'appreciation de l'effet anti-vieillissement d'un produit cosmetique
JP6241853B2 (ja) * 2012-12-06 2017-12-06 国立大学法人北海道大学 非侵襲型生体脂質濃度計測器、非侵襲型生体脂質代謝機能計測器、非侵襲による生体脂質濃度計測方法および非侵襲による生体脂質代謝機能検査方法
JP6008323B2 (ja) 2013-02-01 2016-10-19 パナソニックＩｐマネジメント株式会社 メイクアップ支援装置、メイクアップ支援方法、およびメイクアップ支援プログラム
WO2016054164A1 (en) * 2014-09-30 2016-04-07 Tcms Transparent Beauty, Llc Precise application of cosmetic looks from over a network environment
US20160357578A1 (en) * 2015-06-03 2016-12-08 Samsung Electronics Co., Ltd. Method and device for providing makeup mirror
KR20160142742A (ko) * 2015-06-03 2016-12-13 삼성전자주식회사 메이크업 거울을 제공하는 디바이스 및 방법
JP6655789B2 (ja) * 2016-03-08 2020-02-26 パナソニックＩｐマネジメント株式会社 画像処理装置および画像処理方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101287607A (zh) * 2005-08-12 2008-10-15 里克·B·耶格尔 用于喷涂反射率修改剂以改善人的皮肤的视觉美观度的系统和方法
CN104540445A (zh) * 2012-08-17 2015-04-22 索尼公司 图像处理装置、图像处理方法、程序和图像处理系统
CN106175780A (zh) * 2016-07-13 2016-12-07 天远三维（天津）科技有限公司 面肌运动捕捉分析系统及其分析方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114206426A (zh) * 2019-08-16 2022-03-18 强生消费者公司 用于通过带格栅端部执行器涂敷化妆品组合物的装置和方法

Also Published As

Publication number Publication date
KR102528866B1 (ko) 2023-05-04
JP7051712B2 (ja) 2022-04-11
US20190318489A1 (en) 2019-10-17
EP3560376B1 (en) 2021-08-18
CN110177486B (zh) 2022-04-08
JPWO2018117020A1 (ja) 2019-10-24
EP3560376A1 (en) 2019-10-30
WO2018117020A1 (ja) 2018-06-28
EP3560376A4 (en) 2020-07-15
KR20190099227A (ko) 2019-08-26
TW201828861A (zh) 2018-08-16
US11501456B2 (en) 2022-11-15

Similar Documents

Publication Publication Date Title
CN110177486A (zh) 涂布控制装置、涂布控制方法、程序以及记录介质
US6810130B1 (en) Apparatus for assisting makeup and an assembly constituted by such apparatus and apparatus for delivering makeup having a predetermined BRDF as selected by the apparatus for assisting makeup
RU2385669C2 (ru) Система и способ для медицинского мониторинга и обработки посредством косметического мониторинга и обработки
KR101800102B1 (ko) 피부 진단 및 화상 처리 방법
US20160267708A1 (en) Head mounted system and method to compute and render a stream of digital images using a head mounted display
US10905331B2 (en) Image capturing device and sensing protection device
CN102469971B (zh) 医用图像摄影装置以及医用图像诊断装置
CN102037488B (zh) 个人认证方法及用于其的个人认证装置
WO2016054164A1 (en) Precise application of cosmetic looks from over a network environment
CN113761796B (zh) 基于虚拟现实的心脏出血与止血模型的仿真系统和方法
CN107005642B (zh) 图像捕获设备与感测保护设备
KR20170057479A (ko) 휴대폰을 이용한 피부상태 측정장치
Vanlierde et al. The role of visual experience in mental imagery
JP2007179517A (ja) 画像生成方法および装置ならびに化粧シミュレーション方法および装置
CN108140362A (zh) 显示方法、装置、电子设备和计算机程序产品
CN108830915B (zh) 口腔影像3d模拟动画实现方法及装置
JPWO2019073626A1 (ja) 化粧用シートおよびその製造方法、画像処理装置、および画像処理方法
KR101897512B1 (ko) 3차원 얼굴 인식스캐너를 이용한 체형별 얼굴 맞춤 눈썹문신 시스템
JP2010094536A (ja) メイクアップシミュレーション方法
US20060084845A1 (en) Method for determining the anxiety level of a human being
KR101923967B1 (ko) 화장료의 효능 평가 방법
Allred Approaching color with Bayesian algorithms
JP4487961B2 (ja) メイクアップシミュレーション方法
CN111557643A (zh) 一种肌肤健康报告的展示方法、装置及护肤设备
Hartle Perceived Depth in Virtual and Physical Environments

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant