CN105338887B - 肌肤的感官评价装置以及肌肤的评价方法 - Google Patents

Abstract

本发明提供一种肌肤的感官评价装置以及肌肤的评价方法。该评价方法根据图像来决定肌肤的感官评价值，获取包含被检者的肌肤的图像，从所述图像提取肌肤区域，在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标，基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值。

Description

肌肤的感官评价装置以及肌肤的评价方法

技术领域

本申请涉及决定肌肤的透明感等感官评价值的评价装置以及评价方法。

背景技术

在美容领域中，需要测定肌肤的状态的装置。例如，测定肌肤的雀斑、皱纹的装置已经被实现。此外，需要不仅测定这种肌肤的物理特征量、还要测定肌肤的透明感这种感官评价值的装置。

例如，专利文献1公开了一种使肌肤接触或者接近探测器，来评价肌肤的局部透明感的方法。

在先技术文献

专利文献

专利文献1：日本专利第4105554号公报

发明内容

-发明要解决的课题-

通过专利文献1中公开的方法来求得的透明感是局部的肌肤的透明度，不是例如从脸部的脸颊整体等宽阔的部分求得的透明度。因此，存在例如与看脸部整体时感觉的肌肤的透明感不一致的情况。

本申请的非限定而只是示例的一实施方式提供一种能够决定肌肤的感官评价值的感官评价装置以及肌肤的评价方法。

-解决课题的手段-

本申请的一实施方式所涉及的评价方法根据图像来决定肌肤的感官评价值，(a)获取包含被检者的肌肤的图像，(b)从所述图像提取肌肤区域，(c)在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标，(d)基于所计算出的至少2个特征指标，决定肌肤的感官评价值。

-发明效果-

根据本申请中公开的感官评价装置以及肌肤的评价方法，通过使用2 个以上的肌肤的图像的特征指标，能够高精度地决定肌肤的感官评价值。

附图说明

图1(a)示意性地表示肌肤的感官评价装置的一实施方式的结构。(b) 表示感官评价装置的控制装置的结构。(c)表示云服务器的结构。

图2(a)以及(b)是表示感官评价装置的摄像装置、光源以及显示装置的配置的主视图以及侧视图。

图3是示意性地表示肌肤的内部的构造的图。

图4(a)是感官评价装置的功能框图，(b)是云服务器的功能框图。

图5是表示通过感官评价装置来进行肌肤的评价的顺序的流程图。

图6(a)以及(b)表示在感官评价前显示在显示装置的画面例。

图7是表示被拍摄的图像的肌肤区域以及单位块的图。

图8(a)至(d)表示在感官评价后显示在显示装置的画面例。

图9(a)以及(b)表示在感官评价后显示在显示装置的另一画面例。

图10(a)至(d)表示在感官评价后显示在显示装置的另一画面例。

图11是表示基于主观评价的透明感与决定的透明感的关联的图。

图12是表示基于主观评价的透明感与雀斑量的关联的图。

图13是表示在云服务器中，求解回归方程式的顺序的流程图。

具体实施方式

本发明的肌肤的感官评价装置以及肌肤的评价方法的一方式的概要如下。

根据本发明的一方式所涉及的图像来决定肌肤的感官评价值的评价方法：(a)获取包含被检者的肌肤的图像，(b)根据所述图像，提取肌肤区域，(c)在所述肌肤区域中，计算出表示所述图像的特征的至少2 个特征指标，(d)基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值。

在所述步骤(b)中，将所述肌肤区域分割为多个单位块，在所述步骤(c)以及(d)中，按照每个所述单位块，计算所述至少2个特征指标，并决定所述肌肤的感官评价值，(e)也可以将按照每个所述单位块求得的肌肤的感官评价值与所述单位块的位置相关联地显示在显示装置。

所述步骤(b)也可以在所述图像中，检测所述被检者的脸部，基于检测到的所述脸部的位置，在所述图像上，通过除去脸部部件的区域来提取所述肌肤区域。

所述步骤(e)也可以通过与按照每个所述单位块求得的肌肤的感官评价值相应的色调或者灰度，而与所述单位块的位置相关联地显示在所述显示装置。

所述特征指标也可以是从由所述肌肤的雀斑、皱纹、纹理以及毛孔、所述脸部的法令纹、所述单位块的像素值的平均、方差以及色相、所述肌肤表面的反射率、水分、油分以及颜色不均构成的群中选择的一个。

所述感官评价值也可以是从由所述肌肤的透明感、所述被检者的肌肤年龄、所述被检者的肌肤印象构成的群中选择的一个。

所述步骤(d)也可以基于由多个被检者预先测定的所述至少2个特征指标与对所述多个被检者的肌肤进行评价而决定的感官评价值的关联关系，来决定所述肌肤的感官评价值。

所述关联关系也可以通过多重回归分析来求得。

也可以将与所计算出的所述特征指标或者所决定的所述感官评价值关联的美容设备或者与化妆品有关的信息进一步显示在所述显示装置。

本发明的一方式所涉及的感官评价装置具备：摄像部，其获取包含被检者的肌肤的图像；肌肤区域提取部，其从所述图像提取肌肤区域；特征指标计算部，其在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标；和感官评价值决定部，其基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值。

所述感官评价装置还具备显示部，所述肌肤区域提取部将所述肌肤区域分割为多个单位块，所述特征指标计算部按照每个所述单位块来计算所述至少2个特征指标，所述感官评价值决定部按照每个所述单位块来决定所述肌肤的感官评价值，所述显示部也可以将按照每个所述单位块求出的肌肤的感官评价值与所述单位块的位置相关联地进行显示。

肌肤区域提取部也可以在所述图像中，检测所述被检者的脸部，基于检测到的所述脸部的位置，在所述图像上，通过除去脸部元件的区域来提取所述肌肤区域。

所述显示部也可以通过与所述感官评价值相应的色调或者灰度，将按照每个所述单位块求得的肌肤的感官评价值与所述单位块的位置相关联地进行显示。

所述特征指标也可以是从由所述肌肤的雀斑、皱纹、纹理以及毛孔、所述脸部的法令纹、所述单位块的像素值的平均、方差以及色相、所述肌肤的表面的反射率、水分、油分以及颜色不均构成的群中选择的一个。

所述感官评价值也可以是从由所述肌肤的透明感、所述被检者的肌肤年龄、所述被检者的肌肤印象构成的群中选择的一个。

所述感官评价值决定部也可以基于由多个被检者预先测定的所述至少2个特征指标与对所述多个被检者的肌肤进行评价而决定的感官评价值的关联关系，来决定所述肌肤的感官评价值。

所述关联关系也可以通过多重回归分析来求得。

所述显示部也可以将与所计算出的所述特征指标或者所决定的所述感官评价值关联的美容设备或者与化妆品有关的信息进一步显示。

本发明的另一方式所涉及的感官评价装置具备：摄像装置、包含存储元件以及运算元件的控制装置、显示装置、和被记录在所述存储元件并构成为能够由所述运算元件执行的程序，所述程序(a)使其获取包含被检者的肌肤的图像，(b)从所述图像提取肌肤区域，(c)在所述肌肤区域，计算表示所述图像的特征的至少2个特征指标，(d)基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值，(e)使所决定的所述肌肤的感官评价值显示在所述显示装置。

以下，参照附图，来详细说明本发明的肌肤的感官评价装置以及肌肤的评价方法的实施方式。

图1(a)示意性地表示基于本发明的肌肤的感官评价装置的一实施方式的结构。本实施方式的感官评价装置101获取被检者24的脸部的图像，在脸部的肌肤区域，从图像中计算2个以上表示图像的特征的特征指标。此外，根据计算出的2个以上的特征指标来决定肌肤的感官评价值。在本申请说明书中，所谓表示图像的特征的特征指标，是指在拍摄出的图像中包含的肌肤区域，将图像中表现的特征指标化的值。具体来讲，所谓特征指标，是指将与图像中表现的肌肤的雀斑、皱纹、纹理以及毛孔有关的图像数据指标化的值以及与图像的像素值有关地指标化的值。更具体来讲，是指将图像中表现的肌肤的雀斑、皱纹的量指标化的值、将由毛孔的数量、面积、浓度中的任意一个以上的组合表示的毛孔的数量指标化的值、将纹理(肌理)的细度指标化的值、将法令纹的长度、粗度、深度中的任意一个以上的组合指标化的值、将肌肤区域的规定的单位块的图像的像素值的平均以及方差、像素的色相指标化的值、将肌肤表面的反射率、水分、油分以及颜色不均指标化的值。此外，所谓肌肤的感官评价值，是指不能从图像直接求出的主观评价值。具体来讲，是指肌肤的透明感、肌肤年龄以及肌肤印象。一般来讲，肌肤的感官评价值是评价者观察被检者的肌肤而主观决定的。本实施方式的感官评价装置基于通过评价者预先评价多个被检者的肌肤而决定的肌肤的感官评价值与2个以上的特征指标的关联关系，根据评价中的被检者的2个以上的特征指标来决定感官评价值。评价者优选是对肌肤的透明感、肌肤年龄、肌肤印象进行评价的美容领域的专家，但也可以为不是专门进行这些评价的一般用户，并不仅限于专家。

为此，图1(a)所示的肌肤的感官评价装置101具备：摄像装置10、光源12、显示装置14和控制装置18。图1(b)表示控制装置18的结构。控制装置具备：存储器18A和运算部18B。通过感官评价装置101的摄像装置10，拍摄被检者24的脸部，获取脸部的图像。此时，在本实施方式中，为了更准确对计算图像的特征指标，使用射出偏振光的光源12。

图2(a)以及(b)是表示感官评价装置101的摄像装置10、光源12 以及显示装置14的配置的主视图以及侧视图。在本实施方式中，光源12 被设置在显示装置14的上方，光源12包含第1光源12A以及第2光源 12B。第1光源12A射出例如在垂直方向(图2(a)中为y方向)具有偏振光轴的白色的直线偏振光La，第2光源12B射出在水平方向(图2(a) 中为x方向)具有偏振光轴的白色的直线偏振光Lb。在摄像装置10的透镜光学系统中，设置例如在垂直方向(图2(a)中为y方向)具有偏振光轴的偏光板。图2(a)中所示的两个箭头表示偏振光轴的方向。

如图2(b)所示，在使用感官评价装置101来求取肌肤的感官评价值的情况下，被检者将头部24h保持在距离显示装置14例如距离D左右的位置，并将脸部朝向显示装置14。在该状态下，按照能够以适当的大小以及分辨率拍摄脸部整体的方式，设定摄像装置10的光学系统。显示装置 14的大小的一个例子是，宽度W为30cm左右，高度H为50cm左右。此外，距离D是30cm至70cm左右。

控制装置18从摄像装置10接收图像的数据，计算2个以上的图像的特征指标。此外，基于预先求得的肌肤的感官评价值与2个以上的特征指标的关联关系，决定肌肤的感官评价值。显示装置14显示拍摄到的图像。此外，显示通过控制装置18来求得的图像的特征指标以及肌肤的感官评价值。也可以在显示装置14的画面设置触摸面板16等用户接口。换句话说，显示装置14也可以是触摸屏显示器等。

摄像装置10是一般的摄像机或者数码静态照相机。为了进行利用偏振光的拍摄，在摄像装置10的光学系统中，设置具有与规定的方向、例如垂直方向平行的偏振光轴的偏光板。此外，控制装置18可以是个人计算机等，也可以由专用的电路等构成。此外，在图1(a)中，将控制装置 18与显示装置14分离表示，但控制装置18以及显示装置14也可以被收纳在一体的壳体中，也可以是平板型的便携信息终端等。

如图1(a)以及(b)所示，控制装置18也可以还具备通信部18C，经由通信网络22，与应用关于肌肤的感官评价的服务的服务提供者的云服务器20连接。在该情况下，通信部18C将被拍摄的图像、图像的特征指标、肌肤的感官评价值等发送到云服务器20。在图1(a)中，仅表示了一个感官评价装置101，但云服务器20能够与多个感官评价装置101连接。

图1(c)表示云服务器20的结构。云服务器20具备：数据库20A、存储器20B、运算部20C和通信部20D。云服务器20通过通信部20D，从多个感官评价装置101接收所拍摄到的图像、图像的特征指标、肌肤的感官评价值等。云服务器20基于从多个感官评价装置101接收的图像的特征指标，求出肌肤的感官评价值与2个以上的特征指标的关联关系。此外，通过通信部20D将求出的关联关系发送到各感官评价装置101。

以下，详细说明感官评价装置101的结构以及使用了感官评价装置 101的肌肤的评价方法。

首先，说明肌肤图像的特征指标的测定方法。图3示意性地表示人肌肤的剖面。肌肤图像中包含肌肤的雀斑、皱纹、毛孔、法令纹等各种信息。通过从肌肤图像选择地提取这些信息，来计算特征指标。如图3所示，肌肤300包含：从肌肤300的表面300S向内部处于0.06mm以上0.2mm左右深度范围的表皮300A、和更靠内部存在的真皮300B。肌肤的雀斑、皱纹、毛孔、法令纹在肌肤中的形状以及这些存在于肌肤300中的深度位置不同。因此，若能够得到来自肌肤不同深度的图像，进行基于形状的识别，则能够计算特征指标。

来自肌肤不同深度的图像的信息能够通过使用偏振光、颜色成分来得到。例如，在以与规定的方向平行的直线偏振光为光源来拍摄肌肤的情况下，直线偏振光在肌肤的表面300S被维持偏振光方向并反射。另一方面，在表皮300A的内部反射的直线偏振光由于散射而导致偏振光方向散乱并从表皮300A出射。因此，若使用射出直线偏振光的光源，检测与光源平行的偏振光(平行偏振光条件)，则能够得到肌肤表面的信息多而内部的信息少的图像。此外，若使用射出直线偏振光的光源，检测与光源正交的偏振光(正交偏振光条件)，则能够得到肌肤内部的信息多而表面的信息少的图像。换句话说，通过将偏振光用作为光源，能够得到选择地包含肌肤内部的信息、表面的信息的图像。

此外，来自光源的光的波长越长，则越向表皮300A的内部入射，在内部反射。因此，在拍摄了肌肤的图像中，蓝色(B)成分更多包含肌肤的表面的信息，红色(R)、红外成分更多包含表皮300A的内部的信息。

此外，存在雀斑、皱纹等特征指标具有容易吸收特定的波长区域的光等性质的情况。在这样的情况下，通过利用该特定的波长区域的光的成分，能够计算特定的指标。

表1中表示用于计算特征指标的条件的一个例子。

【表1】

指标	偏振光条件	颜色成分条件	滤波器条件
				雀斑	正交偏振光	BR差分	阈值处理
皱纹	平行偏振光	BR差分	线检测滤波器
				毛孔	正交偏振光	B	点检测滤波器
法令纹	平行偏振光	BR差分	线检测滤波器

上述特征指标中，雀斑存在于表皮300A的内部。此外，已知雀斑越深，从雀斑部分得到的光中蓝色成分与红色成分的光量的差越小。因此，在能够更多得到内部信息的正交偏振光的条件下进行拍摄，求出图像的各像素中蓝色与红色的像素值的差分，通过阈值处理，能够从摄影图像有选择地提取雀斑的部分。

皱纹以及法令纹存在于肌肤300的表面300S附近。若在能够更多得到表面信息的平行偏振光的条件下进行拍摄，求出图像的各像素的蓝色与红色像素值的差分，则能够抑制肌肤表面的光反射所带来的影响，能够得到更多包含皱纹以及法令纹的信息的图像。此外，通过使用线检测滤波器来处理图像，能够得到更多包含皱纹以及法令纹的信息的图像。在希望区分皱纹与法令纹的情况下，也可以进一步进行基于检测到的部分的长度的阈值处理。

另外，为了得到较多包含皱纹以及法令纹的信息的图像，虽然这里求出蓝色与红色的像素值的差分，但也可以只求出蓝色像素值，此外，例如，也可以使用绿色等其他颜色的像素值，并不仅限于求出蓝色与红色的像素值的差分。

毛孔存在于肌肤300的表面300S附近。但是，在能够更多得到表面信息的平行偏振光的条件下，感官评价装置101更强受到所被使用的环境的照明的影响。另一方面，毛孔在图像比较容易识别。特别地，在使用点检测滤波器的情况下，更容易提取图像上的毛孔。因此，在本实施方式中，为了抑制照明的影响，再现性更好地计算特征指标，在正交偏振光的条件下进行拍摄。此外，通过提取图像的各像素的蓝色成分，使用点检测滤波器来处理图像，能够得到更多包含毛孔的信息的图像。

另外，表1所示的条件是用于计算特征指标的一个例子，也可以采用其他条件来获取脸部的图像。由表1可知，即使不使用偏振光条件，而使用颜色成分条件以及滤波器条件，也能够分别计算出表1所示的特征指标。因此，虽然在本实施方式中，感官评价装置101具备射出偏振光的光源12，感官评价装置也可以不具备射出偏振光的光源12。

接下来，详细说明感官评价装置101的结构。图4(a)表示感官评价装置101的功能模块。如图4(a)所示，感官评价装置101具备：摄像部 32、肌肤区域提取部34、特征指标计算部36、感官评价值决定部42、显示数据生成部44和显示部45。此外，具备：控制各功能模块的控制部46、和对控制部46提供指示的输入部48。在与云服务器102进行通信的情况下，感官评价装置101还具备发送部38和接收部40。

图4(a)所示的各功能模块中，摄像部32、显示部45、控制部46以及输入部48分别由图1(a)所示的摄像装置10、显示装置14、控制装置 18以及触摸面板16构成。发送部38以及接收部40分别通过控制装置18 的通信部18C来实现。

肌肤区域提取部34、特征指标计算部36以及感官评价值决定部42 的功能通过软件来实现。具体来讲，通过运算部18B执行存储于存储器 18A的程序，来实现这些功能模块的功能。此外，根据该程序，运算部18B 控制摄像装置10、光源12以及显示装置14。

基于被检者或者感官评价装置101的操作者的指示，感官评价装置 101首先开始动作，摄像部32拍摄被检者的脸部，获取包含脸部的图像。肌肤区域提取部34从得到的图像中提取肌肤区域。特征指标计算部36在肌肤区域中，计算至少2个得到的图像的特征指标。该特征指标的计算是在将肌肤区域分割为多个单位块的基础上，按照每个单位块而进行的。

感官评价值决定部42基于计算出的至少2个特征指标，决定肌肤的感官评价值。感官评价值也是按照每个单位块而决定的。显示数据生成部 44生成用于将按照每个单位块求得的肌肤的感官评价值与单位块的位置相关联地显示在显示部的显示数据。显示部45显示生成的显示数据。

发送部38将由肌肤区域提取部提取出的肌肤区域的图像数据以及图像的特征指标发送到云服务器102。此外，接收部40从云服务器102接收表示肌肤的感官评价值与2个以上的特征指标的关联关系的信息，具体来讲，接收通过多重回归分析而决定的回归方程式的系数。该信息被保持在感官评价值决定部42，并被用于决定感官评价值。

被保持在感官评价值决定部42的回归方程式的系数可以预先被存储于感官评价装置101，也可以在通过感官评价装置101来决定感官评价值时，从云服务器102获取。

图4(b)表示云服务器102的功能模块。云服务器102具备：发送部52、接收部54、感官评价值输入部56、数据库58、回归分析运算部60 和回归方程式保持部62。这些功能模块是通过软件来实现的。具体来讲，通过运算部20C执行存储于图1(c)所示的云服务器102的存储器20B 的程序，来实现这些功能模块的功能。

云服务器102从经由通信网络22来连接的多个感官评价装置101，接收肌肤区域的图像数据以及图像的特征指标。评价者观察集中在云服务器 102的肌肤区域的图像，决定该图像的感官评价值，并将感官评价值输入到感官评价值输入部56。数据库58将与肌肤区域的图像对应的2种以上的图像的特征指标与被决定的感官评价值相关联地存储。

回归分析运算部60根据蓄积在数据库58中的2种以上的特征指标与被决定感官评价值的组合来求出特征指标与感官评价值的关联关系。具体来讲，通过多重回归分析，决定根据2种以上的特征指标来求得感官评价值的回归方程式的系数。决定的回归方程式的系数被保持在回归方程式保持部62，并在规定的定时发送给感官评价装置101。

图5是表示肌肤的评价方法的顺序的流程图。参照图4(a)以及图5，更详细地说明使用了感官评价装置101的肌肤的评价方法。

如图5所示，首先，获取被检者的脸部的图像(步骤S1)。在本实施方式中，使用偏振光来分别在正交偏振光条件以及平行偏振光条件下进行拍摄。因此，例如，首先点亮第1光源12A来进行第1次拍摄，在熄灭第 1光源12A后，点亮第2光源12B来进行第2次拍摄。由此，第1次在平行偏振光条件下进行拍摄，第2次在正交偏振光条件进行拍摄。第1光源 12A以及第2光源12B的光强度、点亮时间、摄像装置10的曝光条件可以相同，也可以不同。通过第1次拍摄以及第2次拍摄分别生成第1图像以及第2图像。特征指标的计算中，使用第1图像以及第2图像之中在适合该特征指标的计算的条件下被拍摄的图像。也可以使用两个图像来计算特征指标。以下，在不需要特别区别的情况下，称为将第1图像以及第2 图像结合拍摄出的脸部的图像。

图6(a)表示显示在感官评价装置101的显示装置14的拍摄前的初始画面的一个例子。显示装置14的显示区域包含：面积较大的主画面70、和位于主画面70的下侧并且面积较小的子画面72。在初始画面中，拍摄的图像被实时地显示在主画面70，作为数字反射镜而起作用。在子画面 72也可以显示例如时间、天气预报等信息。

图6(b)表示即将开始拍摄前的画面。如上所述，在显示装置14的表面设置有触摸面板16，通过被检者用手指等触摸触摸面板16，从而在子画面72的上部80以及左侧部78显示操作菜单、功能的切换菜单。在主画面70也可以显示用于诱导被检者的脸部位置的引导76。此外，也可以显示表示拍摄的定时的标记、数字74。

此外，例如，在子画面72的右侧72R实时地显示被拍摄的脸部的图像，在左侧72L显示日历。在日历例如也可以显示表示在过去使用感官评价装置101进行拍摄的标记等。在图6(b)所示的显示之后，如上述那样进行拍摄。

若脸部的拍摄结束，则肌肤区域提取部34图7所示，确定被拍摄的图像302上的脸部312的位置。图像302上的脸部312的位置的确定中，能够使用公知的脸部认证图像处理技术。在确定出脸部312的位置之后，从脸部312的区域除去作为脸部部件(部位)的眼、口、眉毛的区域，并在图像上确定出作为肌肤的肌肤区域310(步骤S3)。

肌肤区域提取部34接下来分割提取出的肌肤区域310，生成单位块310u(S4)。单位块310u具有适合于决定计算的特征指标的大小。例如，单位块310u具有10像素×10像素的大小。单位块310u也可以被设置为一部分相互重叠。在图7中，为了容易理解而较大地表示单位块310u。

接下来，按照每个单位块来计算特征指标(步骤S5a、S5b、S5c)。在本实施方式中，按照每个单位块，将雀斑量以及皱纹量计算为特征指标。雀斑量以及皱纹量例如是被计算为雀斑或者皱纹的区域的像素数。此外，由于得到的图像的亮度影响透明感的评价，因此计算每个单位块的亮度等级。如表1所示，由于在正交偏振光下拍摄的图像适合于雀斑量的计算，因此使用第2图像。此外，皱纹量的计算中使用第1图像。在计算雀斑量的情况下，求出单位块310u内的全部像素的蓝色的像素值与红色的像素值的差分，通过阈值处理，计算雀斑量。在计算皱纹量的情况下，求出单位块310u内的全部像素的蓝色的像素值与红色的像素值的差分，进行线检测滤波处理并将边缘检测出的部分计算为皱纹量。此外，使用第1图像或者第2图像或者两者，计算单位块310u的亮度等级。

感官评价值决定部42使用计算出的雀斑量、皱纹量以及亮度等级，决定作为感官评价值的透明感(步骤S6)。具体来讲，预先通过多重回归分析来求出雀斑量、皱纹量以及亮度等级与透明感的关联关系，回归方程式的系数被存储在感官评价值决定部42，使用回归方程式来决定透明感。例如，在将雀斑量、皱纹量、亮度等级以及透明感设为x1、x2、x3以及y的情况下，则存储由y＝a+b1·x1+b2·x2+b3·x3表示的回归方程式的系数a、b1、b2、b3。

显示数据生成部44将作为求出的感官评价值的透明感与得到该透明感的单位块310u在肌肤区域310中的坐标相关联，生成应显示的图像的图像数据。

通过从步骤S4到S7的反复来决定肌肤区域310内的全部单位块310u 的透明感(步骤S8)。

另外，虽然在本实施方式中，按照每个单位块310u来计算特征指标，并依次决定透明感，但也可以计算肌肤区域内的全部单位块310u的特征指标，接着求出全部单位块310u的透明感。

显示部45显示以得到的单位块310u为单位的透明感的位图。位图也可以通过与透明感的值相应的色调、灰度来显示。

图8(a)至(d)表示测定结束后显示在显示装置14的画面的一个例子。例如，在按照上述的顺序结束测定的情况下，显示出图8(a)所示的画面。如图8(a)所示，在主画面70，实时地显示通过摄像装置10来拍摄的图像。在子画面的右侧72R，计算出的特征指标被表示为例如雷达图表82。在图中显示测定的肌肤区域整体的平均特征指标。此外，在左侧 72L表示测定时拍摄的脸部的图像。在子画面72的上部80，显示指定脸部的位置的菜单，在左侧部78显示对显示的内容、功能进行切换的菜单。被检者例如通过触摸子画面72的上部80以及左侧部78，能够显示脸部的特定的肌肤区域，或者变更显示的内容。

图8(b)是被检者指定的场所以及指定的特征指标被显示在子画面 72的右侧72R的例子。拍摄的图像的一部分被在被检者指定的位置放大显示。此外，雀斑以及皱纹的部分被表示为红色的区域。

图8(c)表示决定的透明感以每个肌肤区域的平均值显示在主画面的例子。这样，感官评价值也可以被表示为数值。

图8(d)表示透明感的基于单位块310u的映射显示。例如，在图8 (d)中，与拍摄的图像重叠，透明感低的单位块86被表示为规定的颜色。

这样，根据本实施方式，通过使作为决定的感官评价值的透明感与拍摄的脸部的图像重叠显示，从而能够容易地识别出脸部整体中哪部分的透明感高等。

感官评价装置101也可以基于感官评价值的结果，将附加信息显示在显示装置14。图9(a)表示在如图8(a)所示那样，在主画面，透明感被表示为每个肌肤区域的平均值的情况下，显示由感官评价值的降低影响的特征指标的例子。在图9(a)中，表示对雀斑量使透明感的评价降低进行表示的显示87。

此外，图9(b)表示在如图8(b)所示那样，透明感被显示为基于单位块310u的映射的情况下，强调显示感官评价值低的区域的例子。在图9(b)中，通过标识符88来强调表示透明感低的区域。

如图9(a)、(b)所示，在表示感官评价值低的理由、区域的情况下，也可以在子画面72进一步显示用于改善感官评价值的建议、用于改善感官评价值的化妆品、美容设备的信息。这种与感官评价值相关的信息例如可以预先存储于感官评价装置101的控制装置18的存储器18A，也可以控制装置18从云服务器102接收这些信息。

图10(a)至(d)表示被显示在显示装置14的子画面72的信息的例子。例如，如图10(a)所示，也可以在子画面显示日历。在日历中表示在过去进行了测定的信息，例如若被检者触摸子画面的相应信息，则能够使过去的测定结果显示在主画面70。如图10(b)所示，在该情况下，也可以进一步在子画面72显示特征指标的雷达图表。此外，如图10(c)所示，也可以显示基于感官评价值的结果的、与肌肤的护理等美容有关的建议。此外，也可以如图10(d)所示，详细地显示用于改善感官评价值的化妆品、美容设备的信息。

图11表示主观评价的透明感与使用回归方程式来决定的透明感的关联。在图11中，所谓教师数据，是指为了决定回归方程式的系数而使用的数据(肌肤区域的图像)。此外，所谓测试数据，是指使用所决定的系数，通过感官评价装置101来决定透明感的数据。

为了调查关联，针对教师数据，也通过感官评价装置101来决定透明感。此外，针对测试数据，评价者主观地评价了透明感。

如图11所示，根据教师数据而得到的基于主观评价的透明感与通过感官评价装置101来决定的透明感的相关系数R²大约为0.89。这表示在使用为教师数据的图像中，基于主观评价的透明感与根据雀斑量、皱纹量以及亮度等级决定的透明感之间存在较高的关联。

此外，根据测试数据得到的基于主观评价的透明感与通过感官评价装置101来决定的透明感的相关系数R²大约为0.79。这表示根据教师数据而得到的回归方程式在教师数据以外的图像中，也能够适当地用于根据雀斑量、皱纹量以及亮度等级，高关联地推断透明感。

图12表示评价者主观地评价透明感的图像中的雀斑量与基于主观评价的透明感的关联。雀斑量与基于主观评价的透明感的相关系数R²大约为0.41，并不太高。本申请的发明人针对皱纹量、法令纹、毛孔量也同样地求出一个特征指标与基于主观评价的透明感的相关系数R²之后，可知均为0.4左右。由此可知，若仅使用一个从肌肤区域的图像直接得到的雀斑、皱纹等特征指标，难以高关联地推断肌肤的透明感。与此相对地，在使用2个以上的特征指标的情况下，能够高精度地推断肌肤的透明感。在本实施方式中，以透明感为感官评价值进行了说明，但同样地，肌肤年龄、肌肤印象也能够决定为与肌肤相关的主观指标。此外，在该情况下，能够同样地高精度地根据肌肤的图像的特征指标来决定这些感官评价值。

这样，根据本实施方式，通过使用2个以上的肌肤的图像的特征指标，能够高精度地决定肌肤的感官评价值。

此外，根据本实施方式，能够通过非接触的测定来决定肌肤的感官评价值，能够更简单地决定感官评价值。此外，由于例如能够按照每个脸部的肌肤的部位以某个程度的大小的单位来决定，因此能够自动求出与观察脸部来实际评价的情况下的感官评价值关联高的感官评价值。

接下来，参照图4以及图13，说明通过云服务器102来决定表示图像的特征指标与感官评价值的关联关系的回归方程式的方法。图13是表示决定云服务器102中的回归方程式的顺序的流程图。

云服务器102也可以决定被最初设定在感官评价装置101中的回归方程式的系数。此外，云服务器102也可以从与云服务器102连接的多个感官评价装置101依次接收肌肤区域的图像以及图像的特征指标，每当这些数据达到规定量时，就更新回归方程式，并向连接的多个感官评价装置101 发送被更新的回归方程式。

如图13所示，感官评价装置101如上述那样执行步骤S1至S4以及步骤S5a、5b、5c，计算作为单位块内的特征指标的雀斑量、皱纹量以及亮度等级。云服务器102从感官评价装置101接收这些数据。此外，也接收求出这些特征指标的肌肤区域的图像的数据。

感官评价值输入部56接收评价者观察肌肤区域的图像，并根据该图像主观判断的透明感(步骤S26)。由于基于评价者的透明感的评价难以按照每个单位块进行，因此按照脸部的肌肤区域来进行。在该情况下，针对相同的肌肤区域内的单位块对应相同的透明感。基于评价者的透明感的评价也可以不是直接评价者访问云服务器102来进行。例如，云服务器102 也可以向评价者能够利用的信息终端发送评价所需的肌肤区域的图像的数据。评价者也可以观察显示在信息终端的图像并评价透明感，将评价结果与图像建立关联后从信息终端发送到云服务器102。

被输入的透明感被按照每个单位块，与雀斑量、皱纹量以及亮度等级的数据建立对应后记录于数据库58(步骤S27)。将该顺序针对相同的肌肤区域内的整体单位块进行(步骤S28)。进一步地，针对还未输入透明感的全部图像，按照同样的顺序来评价透明感，并记录于数据库58(步骤 29)。

若针对全部图像评价透明感，则回归分析运算部60为了决定雀斑量、皱纹量以及亮度等级与透明感的关联关系，进行这些数值的多重回归分析，求出回归方程式的系数(步骤S30)。回归方程式保持部62保持所决定的回归方程式。具体来讲，存储回归方程式的系数(步骤S31)。

这样决定的回归方程式的系数被通过云服务器102的发送部52，发送到各感官评价装置101。由此，各感官评价装置101能够根据需要，更新回归方程式，通过更新的回归方程式来决定透明感。

另外，虽然在本实施方式中，为了更高精度地计算特征指标而具备射出偏振光的光源，但也能够如参照表1来说明的那样，即使不具有偏振光也能够分别计算特征指标。在不使用偏振光的情况下，本发明的感官评价装置例如通过，具备显示部和位于显示部一侧的照相机的智能电话、平板型信息设备、笔记本电脑等便携信息设备也能够实现。在该情况下，执行按照图4所示的顺序来决定肌肤的感官评价值的评价方法的程序被存储于便携信息设备，通过利用便携信息设备的运算部来执行程序，能够如上述那样实施本发明。

本实施方式的感官评价装置以及决定感官评价值的评价方法也可以用于脸部以外的例如手的肌肤的感官评价。此外，虽然在本实施方式中，仅以脸部为评价对象，但除了脸部，也可以拍摄胸部，并测定脖子、胸部的感官评价值。

-工业可用性-

本申请中公开的感官评价装置以及决定感官评价值的评价方法能够被适当地用于肌肤的感官评价。

-符号说明-

10 摄像装置

12 光源

12A 第1光源

12B 第2光源

14 显示装置

16 触摸面板

18 控制装置

18A 存储器

18B 运算部

18C 通信部

20 云服务器

20A 数据库

20B 存储器

20C 运算部

20D 通信部

22 通信网络

24 被检者

24h 头部

32 摄像部

34 肌肤区域提取部

36 特征指标计算部

38 发送部

40 接收部

42 感官评价值决定部

44 显示数据生成部

45 显示部

46 控制部

48 输入部

52 发送部

54 接收部

56 感官评价值输入部

58 数据库

60 回归分析运算部

62 回归方程式保持部

70 主画面

72 子画面

72L 左侧

72R 右侧

101 感官评价装置

102 云服务器

Claims (11)

1.一种评价方法，其通过记录于存储元件并由运算元件来执行的程序，根据图像来决定肌肤的感官评价值，

(a)获取包含被检者的肌肤的图像，

(b)在所述图像中，检测所述被检者的脸部，基于检测到的所述脸部的位置，将从所述图像除去脸部元件的区域后的区域作为肌肤区域，

(c)在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标，

(d)基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值，

所述至少2个特征指标是雀斑量、皱纹量以及亮度等级，

所述肌肤的感官评价值是肌肤的透明感的评价值，

基于与预先对多个被检者的肌肤进行评价而决定的肌肤的透明感的评价值的关联关系，决定所述肌肤的透明感的评价值。

2.根据权利要求1所述的评价方法，其中，

在步骤(b)中，将所述肌肤区域分割为多个单位块，

在步骤(c)以及(d)中，按照每个所述单位块，计算所述至少2个特征指标，决定所述肌肤的感官评价值，

(e)将按照每个所述单位块求出的肌肤的感官评价值与所述单位块的位置相关联地显示在显示装置。

3.根据权利要求2所述的评价方法，其中，

步骤(e)通过与按照每个所述单位块求出的肌肤的感官评价值相应的色调或者灰度来与所述单位块的位置相关联地显示在所述显示装置。

4.根据权利要求1所述的评价方法，其中，

所述关联关系是通过多重回归分析来求出的。

5.根据权利要求1至4的任意一项所述的评价方法，其中，

将与所计算出的所述特征指标或者所决定的所述感官评价值关联的美容设备或者与化妆品有关的信息进一步显示在显示装置。

6.一种感官评价装置，具备：

摄像部，其获取包含被检者的肌肤的图像；

肌肤区域提取部，其在所述图像中，检测所述被检者的脸部，基于检测到的所述脸部的位置，将从所述图像除去脸部元件的区域后的区域作为肌肤区域；

特征指标计算部，其在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标；和

感官评价值决定部，其基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值，

所述至少2个特征指标是雀斑量、皱纹量以及亮度等级，

所述肌肤的感官评价值是肌肤的透明感的评价值，

基于与预先对多个被检者的肌肤进行评价而决定的肌肤的透明感的评价值的关联关系，决定所述肌肤的透明感的评价值，

所述肌肤区域提取部、所述特征指标计算部和所述感官评价值决定部的功能通过软件来执行。

7.根据权利要求6所述的感官评价装置，其中，

还具备显示部，

所述肌肤区域提取部将所述肌肤区域分割为多个单位块，

所述特征指标计算部按照每个所述单位块计算所述至少2个特征指标，

所述感官评价值决定部按照每个所述单位块决定所述肌肤的感官评价值，

所述显示部将按照每个所述单位块求出的肌肤的感官评价值与所述单位块的位置相关联地进行显示。

8.根据权利要求7所述的感官评价装置，其中，

所述显示部通过与所述感官评价值相应的色调或者灰度，将按照所述单位块求出的肌肤的感官评价值与所述单位块的位置相关联地进行显示。

9.根据权利要求8所述的感官评价装置，其中，

所述关联关系是通过多重回归分析来求出的。

10.根据权利要求7至9的任意一项所述的感官评价装置，其中，

所述显示部进一步显示与所计算出的所述特征指标或者所决定的所述感官评价值关联的美容设备或者与化妆品有关的信息。

11.一种肌肤的感官评价装置，具备：

摄像装置；

控制装置，其包含存储元件以及运算元件；

显示装置；和

程序，其被记录于所述存储元件，并构成为能够通过所述运算元件来执行，

所述程序，

(a)获取包含被检者的肌肤的图像，

(b)在所述图像中，检测所述被检者的脸部，基于检测到的所述脸部的位置，将从所述图像除去脸部元件的区域后的区域作为肌肤区域，

(c)在所述肌肤区域中，计算表示所述图像的特征的至少2个特征指标，

(d)基于所计算出的所述至少2个特征指标，决定肌肤的感官评价值，

(e)使所决定的所述肌肤的感官评价值显示在所述显示装置，

所述至少2个特征指标是雀斑量、皱纹量以及亮度等级，

所述肌肤的感官评价值是肌肤的透明感的评价值，

基于与预先对多个被检者的肌肤进行评价而决定的肌肤的透明感的评价值的关联关系，决定所述肌肤的透明感的评价值。