JP2017113140A - Skin condition evaluation method - Google Patents
Skin condition evaluation method Download PDFInfo
- Publication number
- JP2017113140A JP2017113140A JP2015249825A JP2015249825A JP2017113140A JP 2017113140 A JP2017113140 A JP 2017113140A JP 2015249825 A JP2015249825 A JP 2015249825A JP 2015249825 A JP2015249825 A JP 2015249825A JP 2017113140 A JP2017113140 A JP 2017113140A
- Authority
- JP
- Japan
- Prior art keywords
- skin
- image
- difference
- value
- absolute value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Abstract
Description
本発明は、肌状態評価方法、肌化粧料または肌施術の評価方法、ならびに肌状態評価装置に関する。 The present invention relates to a skin condition evaluation method, a skin cosmetic or skin treatment evaluation method, and a skin condition evaluation apparatus.
肌表面の「つや」は肌の美しさの重要な要素の一つであり、化粧や美容施術の仕上がり状態の良し悪しを判断する指標の一つでもある。「つや」とは別の肌の光沢を表す言葉として「テカリ」がある。「つや」は美しさを想起させる好ましい要素であるのに対し、「テカリ」は美しさを損なう好ましくない要素として広く認識されており、化粧崩れの悩みの主要な要因にもなっている。しかしながら、肌の光沢が「つや」にあたるか「テカリ」にあたるかを正確に見極めることは未だ完全には行われていない。また、「テカリ」の度合いを定量評価するための主たる手法は目視による官能評価であり、客観的な評価方法は未だ確立されていない。 “Shiny” on the skin surface is one of the important elements of skin beauty, and is also one of the indicators for judging the quality of makeup and beauty treatments. There is “tekari” as another term for the gloss of the skin, which is different from “tsuya”. “Tsuya” is a favorable element reminiscent of beauty, whereas “Tecari” is widely recognized as an undesirable element that impairs beauty, and is also a major factor in the problem of makeup loss. However, it has not yet been fully determined whether the gloss of the skin is “shiny” or “shine”. In addition, the main method for quantitatively evaluating the degree of “shine” is visual sensory evaluation, and an objective evaluation method has not yet been established.
下記の特許文献１には、肌表面で鏡面反射した光成分のデータをウェーブレット変換して複数の周波数成分に分離したうえで高周波成分を選択して肌画像を再構成し、再構成された肌画像のピクセル成分の平均分散値と肌の美しさとを関連づけることが記載されている。 In Patent Document 1 below, the data of the light component specularly reflected on the skin surface is subjected to wavelet transform and separated into a plurality of frequency components, then the high frequency component is selected to reconstruct the skin image, and the reconstructed skin It is described that the average dispersion value of pixel components of an image is associated with the beauty of skin.
下記の特許文献２には、肌画像とそのぼかし画像との明差分画像および暗差分画像を生成し、これら明差分画像および暗差分画像に関する分散値などの統計値に基づいて肌画像の見え方を定量化することが記載されている。明差分画像は、対象の肌画像と、基準となるぼかし画像と、の間で画素値を画素ごとに減算し、減算された差分値が０以下の場合には当該画素の画素値を０とし、それ以外の場合には上記差分値を当該画素の画素値とした画像である。そして暗差分画像は、明差分画像とは逆に、ぼかし画像の画素値から肌画像の画素値を画素ごとに減算し、減算された差分値が０以下の場合には当該画素の画素値を０とし、それ以外の場合には上記差分値を当該画素の画素値とした画像である。特許文献２の方法によれば、明差分画像の統計値である明スコアに基づいてテカリの度合いが評価され、暗差分画像の統計値である暗スコアに基づいて色ムラや凹凸ムラの度合いが評価される。特許文献３は後述するように顔画像の特徴点を抽出する方法を開示する文献である。 Japanese Patent Application Laid-Open No. 2004-228561 generates a bright difference image and a dark difference image between a skin image and a blurred image thereof, and how the skin image looks based on statistical values such as variance values regarding the bright difference image and the dark difference image. Is described. In the bright difference image, the pixel value is subtracted for each pixel between the target skin image and the reference blurred image, and when the subtracted difference value is 0 or less, the pixel value of the pixel is set to 0. In other cases, it is an image in which the difference value is the pixel value of the pixel. In contrast to the bright difference image, the dark difference image is obtained by subtracting the pixel value of the skin image from the pixel value of the blurred image for each pixel, and if the subtracted difference value is 0 or less, the pixel value of the pixel is calculated. In other cases, the image is an image in which the difference value is the pixel value of the pixel. According to the method of Patent Document 2, the degree of shine is evaluated based on the bright score that is the statistical value of the bright difference image, and the degree of color unevenness and unevenness is determined based on the dark score that is the statistical value of the dark difference image. Be evaluated. Patent Document 3 is a document disclosing a method for extracting feature points of a face image as described later.
特許文献１の方法は、顔などの肌画像から低周波成分を除去して高周波成分を再構成するものであるため、顔の骨格や肉付きなどの全体形状を示す低周波成分が肌画像から除かれ、高周波成分に含まれる毛穴などの微細な特徴が強調される。しかしながら、毛穴と同様に微細な特徴である睫毛や眉毛などの体毛も高周波成分の要因となるため、高周波成分を再構成した画像には、毛穴の特徴だけでなく、肌の美しさと無関係の体毛の特徴も包含されることとなる。このため、高周波成分の再構成画像の平均分散値と肌の美しさとは必ずしも対応しているとはいえない。
特許文献２では、過剰な皮脂は肌テクスチャのぼやけを阻害してテカリとして視認されるため明スコアによって評価する一方、毛穴の汚れやシミ、そばかす等は光の内部拡散を減少させて色ムラとして視認されるため暗スコアによって評価するとされている。このため特許文献２の方法では、毛穴の汚れなどの高周波成分の影響は暗差分画像に基づいて評価することとなる。
Since the method of Patent Document 1 reconstructs a high frequency component by removing a low frequency component from a skin image of a face or the like, the low frequency component indicating the entire shape such as the face skeleton or flesh is removed from the skin image. In addition, fine features such as pores included in the high-frequency component are emphasized. However, since the body hair such as eyelashes and eyebrows, which are fine features like the pores, also contributes to the high frequency component, the reconstructed image of the high frequency component is not only related to the features of the pores but also to the beauty of the skin. Features of body hair will also be included. For this reason, it cannot be said that the average dispersion value of the reconstructed image of the high frequency component and the beauty of the skin correspond to each other.
In Patent Document 2, excessive sebum is evaluated as a bright score because it obstructs blurring of the skin texture and is evaluated as a bright score. On the other hand, dirt, stains, freckles, etc. in pores reduce the internal diffusion of light as color unevenness. Since it is visually recognized, it is supposed to be evaluated by a dark score. For this reason, in the method of Patent Document 2, the influence of high-frequency components such as pore dirt is evaluated based on the dark difference image.
本発明者らの検討によれば、肌を観察する者が肌の光沢をテカリと認識する要因としては、肌の表面反射光由来の光沢のうち、頬や額の光沢の大まかな形やコントラストなどの低周波成分だけでなく、毛穴や肌理（キメ）などの細かい凹凸の影や、光沢の細かい輪郭などの微細な特徴である高周波成分も含まれるとの知見に至った。このことは、毛穴の数量や大きさを変化させ、その他のテクスチャを共通とした複数枚の肌画像を目視対比して官能評価することにより明らかとなっている。すなわち肌の光沢が不変でも、毛穴が目立たない場合はその光沢を「つや」と認識し、毛穴が目立つ場合は「テカリ」と認識する傾向があるなど、つやとテカリとの区別は観察者の心理にも影響される。このため、肌のテカリをつやと区別して定量評価するためには、特許文献１のように高周波成分のみで肌画像を再構成するだけでは不十分である。また、毛穴の影響が現れにくい明差分画像でテカリを評価する特許文献２の方法もまた、尚改良の余地があるといえる。 According to the study by the present inventors, as a factor that the person who observes the skin recognizes the gloss of the skin as the gloss, the rough shape and contrast of the gloss on the cheeks and the forehead among the glosses derived from the reflected light on the surface of the skin In addition to low-frequency components such as, it has been found that high-frequency components that are fine features such as fine uneven shadows such as pores and textures and glossy contours are also included. This has been clarified by changing the number and size of pores and performing sensory evaluation by visually comparing a plurality of skin images having other textures in common. In other words, even if the skin gloss remains unchanged, if the pores are inconspicuous, the gloss is recognized as `` shiny '', and if the pores are noticeable, it tends to be recognized as `` shine ''. Also affected by psychology. For this reason, it is not sufficient to reconstruct a skin image with only a high-frequency component, as in Patent Document 1, in order to distinguish and evaluate the skin shine from gloss. Moreover, it can be said that there is still room for improvement in the method of Patent Document 2 that evaluates shine with a bright difference image in which the influence of pores is less likely to appear.
一方で、肌のテカリは化粧崩れの悩みの最上位に位置するともいえるが、その評価は目視を通じた官能評価に主として依存しており客観性に欠ける。 On the other hand, it can be said that the skin shine is at the top of the problem of makeup collapse, but the evaluation mainly depends on the sensory evaluation through visual observation and lacks objectivity.
本発明は上記の課題に鑑みてなされたものであり、つやとテカリに代表されるような、肌の見た目の美しさの度合いを客観的に評価することが可能な新たな技術を提供する。 The present invention has been made in view of the above-described problems, and provides a new technique capable of objectively evaluating the degree of appearance of skin, as represented by gloss and shine.
本発明の第一の態様は、肌状態評価方法に関するものであり、肌表面が撮影された肌画像と、前記肌画像に対してぼかし処理を施して取得されたぼかし画像と、の画素ごとの差分絶対値の分散度を示す指標値に基づいて前記肌表面の見かけ状態を評価するものである。 The first aspect of the present invention relates to a skin condition evaluation method, and includes a skin image obtained by photographing a skin surface and a blurred image obtained by performing a blurring process on the skin image. The apparent state of the skin surface is evaluated based on an index value indicating the degree of dispersion of the absolute difference value.
本発明の第二の態様は、肌化粧料または肌施術の評価方法に関するものであり、肌表面が撮影された第一の肌画像、ならびに肌化粧料もしくは肌施術が施された前記肌表面が撮影された第二の肌画像と、前記第一の肌画像および前記第二の肌画像に対してぼかし処理をそれぞれ施して取得された第一および第二のぼかし画像を取得し、前記第一の肌画像と前記第一のぼかし画像との画素ごとの差分絶対値の分散度を示す第一の指標値、および前記第二の肌画像と前記第二のぼかし画像との画素ごとの差分絶対値の分散度を示す第二の指標値に基づいて、前記肌化粧料または前記肌施術による前記肌表面の見かけ状態への影響度合いを評価するものである。 The second aspect of the present invention relates to a skin cosmetic or skin treatment evaluation method, wherein the first skin image in which the skin surface is photographed and the skin surface to which the skin cosmetic or skin treatment has been applied are provided. The first and second blurred images acquired by performing the blurring process on the photographed second skin image and the first skin image and the second skin image, respectively, The first index value indicating the degree of variance of the absolute difference value for each pixel between the skin image and the first blurred image, and the absolute difference for each pixel between the second skin image and the second blurred image Based on the second index value indicating the degree of dispersion of the value, the degree of influence of the skin cosmetic or the skin treatment on the apparent state of the skin surface is evaluated.
本発明の第三の態様は、肌状態評価装置に関するものであり、肌表面が撮影された肌画像に対してぼかし処理を施すことによりぼかし画像を取得するぼかし処理手段と、前記肌画像と前記ぼかし画像との画素ごとの差分絶対値を算出する差分算出手段と、前記差分絶対値の分散度を示す指標値を算出する指標値算出手段と、を備えるものである。 A third aspect of the present invention relates to a skin condition evaluation apparatus, a blur processing means for obtaining a blur image by performing blur processing on a skin image obtained by photographing a skin surface, the skin image, and the skin image Difference calculating means for calculating an absolute difference value for each pixel from the blurred image, and index value calculating means for calculating an index value indicating a degree of dispersion of the difference absolute value.
本発明により提供される技術によれば、肌画像とぼかし画像との画素ごとの差分絶対値の分散度によって肌表面の見かけ状態を客観的に評価することが可能である。 According to the technique provided by the present invention, it is possible to objectively evaluate the apparent state of the skin surface by the degree of dispersion of the absolute difference value for each pixel of the skin image and the blurred image.
以下、本発明の実施形態について図面を用いて説明する。図１（ａ）は肌画像の例であり、図１（ｂ）はぼかし画像の例である。図１（ｃ）は、評価対象領域が抽出された差分絶対値画像の例である。はじめに、本実施形態の概要について説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1A is an example of a skin image, and FIG. 1B is an example of a blurred image. FIG. 1C is an example of a difference absolute value image from which an evaluation target region is extracted. First, an outline of the present embodiment will be described.
本実施形態の肌状態評価方法（以下、本方法という場合がある）は、肌表面が撮影された肌画像と、この肌画像に対してぼかし処理を施して取得されたぼかし画像と、の画素ごとの差分絶対値の分散度を示す指標値に基づいて肌表面の見かけ状態を評価するものである。 The skin condition evaluation method of the present embodiment (hereinafter also referred to as the present method) is a pixel of a skin image obtained by photographing a skin surface and a blurred image obtained by performing a blurring process on the skin image. The apparent state of the skin surface is evaluated based on the index value indicating the degree of dispersion of the absolute value of each difference.
肌画像は、人間の肌の表面の少なくとも一部が写り込んだ静止画像である。肌の対象部位は特に限定されないが、顔の少なくとも一部、または首から胸元までの領域であるデコルテの少なくとも一部を例示することができる。顔を対象部位とする場合、肌画像は、額から鼻先にかけての皮脂腺が活発部位である、いわゆるＴゾーンを含む画像であることが好ましい。図１（ａ）に例示する肌画像は、人間の顔の正面画像であり、より具体的には、額を上限、鼻の下（人中）を下限とし、両頬を含む顔画像である。本方法では、後述するように評価対象領域を部分的に抽出することができるため、肌画像としては、テカリを評価したい評価対象領域を包含する、より広範囲の画像を用いることができる。具体的には、例えば顔全体画像など、両目や鼻を含む領域が写り込んだ画像を用いることができる。 The skin image is a still image in which at least a part of the surface of human skin is reflected. Although the target site | part of skin is not specifically limited, At least one part of the decollet which is the area | region from the neck to the chest at least part of the face can be illustrated. When the face is the target site, the skin image is preferably an image including a so-called T zone in which the sebaceous gland from the forehead to the nose tip is an active site. The skin image illustrated in FIG. 1A is a front image of a human face, and more specifically is a face image including both cheeks with the upper limit of the forehead and the lower limit of the nose (in the middle). . In this method, since an evaluation target area can be partially extracted as will be described later, a wider range of images including an evaluation target area for which shine is to be evaluated can be used as the skin image. Specifically, for example, an image including a region including both eyes and nose, such as an entire face image, can be used.
肌画像は、カラー画像でもよく、または淡色の濃淡（グレースケール）画像でもよい。カラー画像として撮影した画像を淡色（グレースケール）に変換して肌画像とする場合、カラー画像における明度情報、輝度情報またはＲＧＢのＧ値などを用いて淡色化することができる。このうち、輝度情報が用いられることが望ましい。輝度情報は人間の視覚で捉えられる明るさに近いため、テカリの度合いを評価することに適している。明度情報とは例えばＨＳＶモデルの明度（Value）成分の値であり、輝度情報とは例えばグレースケール変換で得られる輝度値である。 The skin image may be a color image or a light-colored (grayscale) image. When an image captured as a color image is converted into a light color (grayscale) to be a skin image, it can be lightened using lightness information, luminance information, or RGB G value in the color image. Of these, it is desirable to use luminance information. Luminance information is close to the brightness perceived by human vision, and is suitable for evaluating the degree of shine. The brightness information is, for example, the value of the brightness (Value) component of the HSV model, and the brightness information is, for example, a brightness value obtained by gray scale conversion.
ぼかし画像は肌画像をぼかし処理した画像であり、肌画像の全体をぼかし処理した画像であることが好ましい。肌画像としてデジタル画像を用い、ぼかし処理はデジタル処理として行うとよい。ぼかし処理には、市販のフォトレタッチソフトを使用することができる。ぼかし処理で用いられるぼかし強度は、肌から観察者までの目視距離に相当する。ぼかし処理は、肌画像（元画像）に含まれる大局的な空間情報（低周波成分）を維持しつつ、局所的な特徴（高周波成分）を平均化する処理が好ましい。これにより、肌画像とぼかし画像との差分絶対値を算出することで、大局的な空間情報は捨象され、局所的な特徴を表す情報が抽出される。ぼかし処理の具体的実現手法を特に限定しないが、平滑化フィルタ、またはメディアンフィルタなどの非平滑化処理によるノイズ除去フィルタが好ましい。平滑化フィルタとしては、具体的に、ガウシアン（Gaussian）フィルタ、移動平均フィルタ、加重平均フィルタ、ローパスフィルタが挙げられる。中でもガウシアンフィルタを用いることがより好ましい。これは、つやのある美肌に特有の「ぼやけ感」を実現する、入射点と出射点との間の光の空間減衰パターンがガウス曲線に近いからである。ガウシアンフィルタを用いてぼかし画像を生成するとともに肌画像との差分絶対値を取ることで、「つや」と認識される光沢の特徴が捨象され、「テカリ」と認識される光沢の特徴が差分絶対値として抽出される。 The blurred image is an image obtained by performing blur processing on the skin image, and is preferably an image obtained by performing blur processing on the entire skin image. A digital image may be used as the skin image, and the blurring process may be performed as a digital process. Commercially available photo retouching software can be used for the blurring process. The blur strength used in the blur processing corresponds to the viewing distance from the skin to the viewer. The blurring process is preferably a process of averaging local features (high frequency components) while maintaining global spatial information (low frequency components) included in the skin image (original image). Thus, by calculating the absolute difference between the skin image and the blurred image, the global spatial information is discarded, and information representing local features is extracted. Although the specific implementation method of the blurring process is not particularly limited, a noise removal filter such as a smoothing filter or a non-smoothing process such as a median filter is preferable. Specific examples of the smoothing filter include a Gaussian filter, a moving average filter, a weighted average filter, and a low-pass filter. Among these, it is more preferable to use a Gaussian filter. This is because the spatial attenuation pattern of light between the entrance point and the exit point that realizes a “blurring feeling” peculiar to glossy skin is close to a Gaussian curve. By generating a blurred image using a Gaussian filter and taking the absolute value of the difference from the skin image, the gloss feature recognized as “shiny” is discarded, and the gloss feature recognized as “shine” is absolute difference Extracted as a value.
ぼかし処理の強さを表すぼかし半径は特に限定されない。肌画像に写る肌表面の毛穴がぼかし画像において十分にぼかされることで、肌画像とぼかし画像との差分絶対値に毛穴の情報が十分に抽出されるため好ましい。ここで、毛穴の一般的な直径は０．０２ｍｍ以上、０．６ｍｍ以下程度であることが知られている。このため、ぼかし半径は、肌画像に写る毛穴の半径（０．０１ｍｍ以上０．３ｍｍ以下）よりも十分に大きいことが好ましく、具体的には毛穴の半径の３倍以上２５００倍以下程度とすることが好ましい。 The blur radius representing the strength of the blur processing is not particularly limited. It is preferable that pores on the skin surface appearing in the skin image are sufficiently blurred in the blurred image, so that the pore information is sufficiently extracted as the absolute value of the difference between the skin image and the blurred image. Here, it is known that the general diameter of a pore is about 0.02 mm or more and 0.6 mm or less. For this reason, the blur radius is preferably sufficiently larger than the radius of the pores (0.01 mm or more and 0.3 mm or less) reflected in the skin image, specifically, about 3 to 2500 times the radius of the pores. It is preferable.
差分絶対値は、肌画像と、そのぼかし画像との間で画素ごとに画素値を差分して求められる絶対値である。肌画像とぼかし画像の画素数が等しい場合、差分絶対値は当該画素数だけ存在する。したがって、肌画像を構成する各画素に対して、差分絶対値を画素値としてそれぞれ設定することで差分絶対値画像を生成することができる。 The difference absolute value is an absolute value obtained by subtracting the pixel value for each pixel between the skin image and the blurred image. When the number of pixels of the skin image and the blurred image is equal, the absolute difference value exists by the number of pixels. Therefore, the difference absolute value image can be generated by setting the difference absolute value as the pixel value for each pixel constituting the skin image.
本方法では、差分絶対値の分散度を示す指標値（以下、単に「指標値」という場合がある）に基づいて肌表面の見かけ状態を評価する。本発明者らは、後述するように、肌画像とぼかし画像との画素ごとの差分絶対値の分散度が、肌または肌画像に見られるテカリの度合いに関する官能評価結果と強く相関することを明らかにし、もって本発明の完成に至った。
分散度としては、代表的には、ヒストグラムの偏差の二乗平均である分散、および分散の平方根である標準偏差が例示されるが、これに限られない。例えば、観測値（本方法では差分絶対値）を昇順または降順に並べて四等分した場合の第１四分位と第３四分位との差である四分位範囲や、四分位範囲を２で除した四分位偏差など、データの分散度合いを示す種々の統計値を用いることができる。
In this method, the apparent state of the skin surface is evaluated based on an index value indicating the degree of dispersion of the difference absolute value (hereinafter, sometimes simply referred to as “index value”). As will be described later, the present inventors clearly show that the degree of variance of the difference value for each pixel of the skin image and the blurred image strongly correlates with the sensory evaluation result relating to the degree of shine found in the skin or the skin image. Thus, the present invention has been completed.
Typical examples of the degree of dispersion include, but are not limited to, a variance that is a mean square of the deviation of a histogram and a standard deviation that is a square root of the variance. For example, the quartile range or the quartile range is the difference between the first and third quartiles when the observed values (in this method, the absolute difference value) are arranged in ascending or descending order and divided into four equal parts. Various statistical values indicating the degree of data dispersion such as quartile deviation obtained by dividing by 2 can be used.
本方法による肌表面の見かけ状態の評価としては、テカリの度合いが代表的に例示されるが、これに限られない。テカリの度合いに代えて、被験者の肌と同等のテカリの度合いを有する一般的な年齢を、肌年齢として評価してもよい。このほか、後述するように素肌対して肌化粧料を塗布したり肌の美容施術（肌施術）を適用したりすることで肌の見た目のテカリは変化する。このことから、肌化粧料や肌施術が施される前後の肌におけるテカリの度合いの変化量を算出して、当該肌化粧料や肌施術の効果を評価してもよい。同様に、肌化粧料や肌施術を複数とおりに変化させた場合の、肌表面のテカリへの影響度合いの差異を評価してもよい。 As an evaluation of the apparent state of the skin surface by this method, the degree of shine is typically exemplified, but is not limited thereto. Instead of the degree of shine, a general age having the same degree of shine as the skin of the subject may be evaluated as the skin age. In addition, as will be described later, the appearance of the skin changes by applying a skin cosmetic to the bare skin or applying a skin beauty treatment (skin treatment). From this, the amount of change in the degree of shine on the skin before and after the skin cosmetic or skin treatment is calculated may be calculated to evaluate the effect of the skin cosmetic or skin treatment. Similarly, the difference in the degree of influence on the skin surface when the skin cosmetics and skin treatments are changed in multiple ways may be evaluated.
本方法によれば肌のテカリの状態が客観的に指標化されるため、テカリを抑制または誘発する化粧品等の製品の性能評価や製品間の性能比較をする際に、簡便かつ客観的な評価結果を得ることができる。 According to this method, since the state of skin shine is objectively indexed, simple and objective evaluation is possible when evaluating the performance of products such as cosmetics that suppress or induce shine, and when comparing performance between products. The result can be obtained.
以下、本方法について更に詳細に説明する。はじめに、被験者の肌表面の見かけ状態を評価するにあたり、肌の実目視に代えて肌画像の目視評価をすることの妥当性について説明する。本発明者らは、本方法の完成に先立ち、肌の実目視によって捉えられるテカリを、当該肌を撮影した肌画像でも同様に評価できることを予備実験により確認した。
予備実験の条件は以下とした。サンプル被験者を２０名の成人女性とし、ベース化粧料（ファンデーション）を朝に塗布して約１時間経過した時点（第一時点）の顔画像と、化粧直しをすることなく更に６時間が経過した後の時点（第二時点）の顔画像と、をサンプル被験者ごとに１枚ずつ撮影した。顔画像の撮影は、同条件で行った。具体的には、照明には色温度約６５００［Ｋ］のＤ６５蛍光灯を用いて天井点灯させ、机上照度は約９００［ｌｘ］とした。
撮影には、ＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）などのイメージングセンサが搭載されたデジタルカメラを用い、焦点距離を１０５ｍｍ、撮影距離を１５０ｃｍ、画素数を縦方向６０００画素×横方向４０００画素とした。
併せて、第一時点と第二時点のそれぞれにおいて、鏡に映る自身の顔をサンプル被験者本人が目視して、テカリの度合いを７段階で官能評価して目視スコアとした。目視スコアは、テカリが極めて強く発生していると感じた場合に最高の７点とし、テカリが発生していないと感じた場合に最低の１点とし、テカリが少ないほど小さな点数とした。ただし、本人以外の評価者が、サンプル被験者の肌（顔）を実目視して目視スコアを決定するようにしてもよい。
一方、上記にて各サンプル被験者から２枚ずつ撮影した合計４０枚の顔画像を５名の評価者がそれぞれ目視観察して、テカリが発生していると感じる度合いを０から１０までの１１段階に官能評価して点数を付け、５名の官能評価結果の平均値をテカリ指数として算出した。点数は、テカリが極めて強く発生していると感じた場合に最高の１０点とし、テカリが発生していないと感じた場合に最低の０点とし、テカリが少ないほど小さな点数とした。５名の評価者は、４０枚の顔画像をランダムな順序で、また顔画像まで６０ｃｍの距離にて目視観察して点数を決定した。また、テカリ指数を決定した５名の評価者は、目視スコアを決定した者（サンプル被験者）とは異なる女性とした。これにより、肌の実目視による官能評価および肌画像の目視における官能評価における恣意性を排除した。
Hereinafter, this method will be described in more detail. First, in evaluating the apparent state of the skin surface of the subject, the validity of visual evaluation of the skin image instead of the actual visual inspection of the skin will be described. Prior to the completion of this method, the present inventors have confirmed through preliminary experiments that shine captured by actual visual inspection of the skin can be similarly evaluated with a skin image obtained by photographing the skin.
The conditions for the preliminary experiment were as follows. The sample subjects were 20 adult women, and after about 1 hour has passed since the base cosmetic (foundation) was applied in the morning (first time point), and after 6 hours have passed without re-dressing One face image at each time point (second time point) was taken for each sample subject. The face image was taken under the same conditions. Specifically, a D65 fluorescent lamp with a color temperature of about 6500 [K] was used for lighting, and the desk illuminance was about 900 [lx].
For photography, a digital camera equipped with an imaging sensor such as a CCD (Charge-Coupled Device) or CMOS (Complementary Metal Oxide Semiconductor) is used. The focal length is 105 mm, the shooting distance is 150 cm, and the number of pixels is 6000 pixels in the vertical direction. The horizontal direction is 4000 pixels.
In addition, at each of the first time point and the second time point, the sample subject himself / herself visually observed his / her face reflected in the mirror, and the degree of shine was sensory evaluated in seven stages to obtain a visual score. The visual score was a maximum of 7 points when it was felt that shine was extremely strong, and a minimum score of 1 when it was felt that no shine was generated. However, an evaluator other than the user may determine the visual score by actually viewing the skin (face) of the sample subject.
On the other hand, five evaluators visually observe 40 face images taken from each sample subject as described above, and the degree of feeling that shininess has occurred is 11 steps from 0 to 10. A sensory evaluation was given to each and scored, and an average value of the sensory evaluation results of five persons was calculated as a shine index. The score was a maximum of 10 when it was felt that shine was extremely strong, a minimum of 0 when it was felt that no shine was occurring, and a smaller score as the shine was low. Five evaluators determined the score by visually observing 40 face images in a random order and at a distance of 60 cm to the face images. In addition, the five evaluators who determined the shine index were females different from those who determined the visual score (sample subjects). Thereby, the arbitraryness in the sensory evaluation by the visual observation of the skin and the visual evaluation of the skin image was eliminated.
図２は、肌の実目視によるテカリの評価値である目視スコア（１〜７点）と、肌画像の目視によるテカリの評価値であるテカリ指数（０〜１０点）との相関を示すグラフである。図２に示すように、４０のサンプルに対して目視スコアとテカリ指数とはよく相関しており、決定係数（Ｒ２）は０．８３、相関係数（Ｒ）は０．９１となった。また、テカリ指数（ｘ）と目視スコア（ｙ）との関係を示す、最小二乗法による一次関数として求めた近似式を図中に示す。 FIG. 2 is a graph showing a correlation between a visual score (1 to 7 points) that is an evaluation value of shine by actual visual inspection of the skin and a shine index (0 to 10 points) that is an evaluation value of shine by visual inspection of the skin image. It is. As shown in FIG. 2, the visual score and the shine index were well correlated with 40 samples, the determination coefficient (R 2 ) was 0.83, and the correlation coefficient (R) was 0.91. . Moreover, the approximate expression calculated | required as a linear function by the least squares method which shows the relationship between a shine index (x) and visual score (y) is shown in a figure.
一般に、決定係数（Ｒ２）が０．４以上で正の相関がみられると判断することができ、０．７以上で強い正の相関がみられると判断することができる。したがって、肌を本人が実目視して評価したテカリの度合いと、当該肌の肌画像を複数人の他人によって官能評価したテカリの度合いとの間には強い正の相関がある。よって、肌画像に基づいてテカリ指数を求めることで、肌を本人が実目視して評価した状態を良好に摸擬できることが分かった。
更に本発明者らは、肌画像とぼかし画像との画素ごとの差分絶対値の分散度が、高い相関係数をもってテカリ指数と相関することを明らかにした。このため、差分絶対値の分散度によって、テカリ指数ひいては肌を本人が実目視した評価を示す目視スコアを高精度で評価できることが分かった。以下説明する。
In general, it can be determined that a positive correlation is observed when the coefficient of determination (R 2 ) is 0.4 or more, and it can be determined that a strong positive correlation is observed when the coefficient of determination is 0.7 or more. Therefore, there is a strong positive correlation between the degree of shine evaluated by the actual visual observation of the skin and the degree of sensual evaluation of the skin image of the skin by a plurality of others. Therefore, it was found that by obtaining the shine index based on the skin image, it is possible to simulate well the state in which the skin was actually visually evaluated by the person himself / herself.
Furthermore, the present inventors have clarified that the degree of variance of the absolute value of each pixel difference between the skin image and the blurred image correlates with the Tekari index with a high correlation coefficient. For this reason, it turned out that the visual score which shows the evaluation by which the person himself / herself visually observed the shine index and thus the skin can be evaluated with high accuracy by the degree of dispersion of the absolute difference. This will be described below.
図１（ａ）は肌画像として被験者の顔画像（ただし、目元には加工を施している）を用いた例を示し、図１（ｂ）はぼかし画像の例を示す。この肌画像は、額から鼻先にかけてのＴゾーンおよび両頬の一部を含み、顔の輪郭線を含まないように顔の中央近傍を撮影した画像である。肌画像は、顔全体を含む画像から一部を切り出して生成したものでもよい。肌画像は、カラー画像として撮影された顔画像から、例えば緑色の強度（Ｇ値）を抜き出してグレースケール化した画像を用いることができる。
ぼかし画像は、肌画像の全画素に対して、後記のぼかし強度でぼかし処理を施したものである。
FIG. 1A shows an example in which a subject's face image (however, the eyes are processed) is used as a skin image, and FIG. 1B shows an example of a blurred image. This skin image is an image obtained by photographing the vicinity of the center of the face so as to include the T zone extending from the forehead to the nose and part of both cheeks and not including the outline of the face. The skin image may be generated by cutting out a part from an image including the entire face. As the skin image, for example, an image obtained by extracting a green intensity (G value) from a face image photographed as a color image and converting it into a gray scale can be used.
The blurred image is obtained by performing a blurring process on all the pixels of the skin image with the blurring intensity described later.
図１（ｃ）は、肌画像とぼかし画像との差分絶対値を画素値とする差分絶対値画像から、眼窩下縁および眉毛を含む眼窩周縁領域、または左右の鼻孔を含む鼻孔領域の少なくとも一方を除去して評価対象領域を抽出した画像の例である。図１（ｃ）に示すように、本実施形態では肌画像として閉眼画像を用いた。眼窩周縁領域としては、眼窩と略同形状であって目を閉じたときの睫毛および眉毛が下限と上限にそれぞれ内接する略矩形の領域を左右に個別に設定した。閉眼画像を肌画像とする場合、眼窩中央にあたる瞼の領域は評価対象領域としてもよく、または図１（ｃ）に示すように除去対象としてもよい。瞼にアイシャドウ等の光沢のある化粧料を塗布している場合には、当該化粧料の光沢が差分絶対値画像のノイズにならないように瞼の領域も除去対象とすることが好ましい。瞼に化粧料を塗布していない場合や、塗布している化粧料が非光沢性の場合は、瞼を評価対象領域に加えて解析対象を広くしてもよい。このほか、目を開いた開眼画像を肌画像として用いてもよい。この場合、差分絶対値画像から除去する眼窩周縁領域としては、下睫毛および眉毛が下限と上限にそれぞれ内接する略矩形の領域を設定し、眼窩中央の眼球領域も除去対象にするとよい。
また鼻孔領域として、左右の鼻孔を幅方向の両端とする鼻の下縁の領域を設定した。そして、左右の眼窩周縁領域および鼻孔領域を差分絶対値画像から除去することにより、残る画像領域を評価対象領域として抽出した。
そのうえで、図１（ｃ）の差分絶対値画像のうち評価対象領域における各画素の画素値のヒストグラムの偏差の二乗平均である分散を算出した。
サンプル被験者に関する４０枚の肌画像に対して、上記のように差分絶対値画像を生成して評価対象領域を抽出し、分散を算出した。
FIG. 1 (c) shows at least one of an orbital peripheral area including the lower edge of the orbit and eyebrows, or a nostril area including the left and right nostrils, from the difference absolute value image having the difference absolute value between the skin image and the blurred image as a pixel value This is an example of an image in which an evaluation target region is extracted by removing the. As shown in FIG. 1C, a closed eye image is used as a skin image in this embodiment. As the orbital peripheral region, a substantially rectangular region having substantially the same shape as the orbit and inscribed with the eyelashes and eyebrows when the eyes are closed is respectively set on the left and right sides. When the closed eye image is a skin image, the eyelid region corresponding to the center of the eye socket may be an evaluation target region, or may be a removal target as shown in FIG. When a glossy cosmetic material such as eye shadow is applied to the eyelid, it is preferable that the area of the eyelid is also a removal target so that the gloss of the cosmetic material does not become noise in the difference absolute value image. When cosmetics are not applied to the eyelids or when the applied cosmetics are non-glossy, the analysis target may be widened by adding the eyelids to the evaluation target area. In addition, an open eye image with open eyes may be used as the skin image. In this case, as the orbital peripheral area to be removed from the difference absolute value image, a substantially rectangular area in which the lower eyelashes and the eyebrows are inscribed at the lower limit and the upper limit is set, and the eyeball area at the center of the orbit is also a removal target.
As the nostril region, a region of the lower edge of the nose with the right and left nostrils as both ends in the width direction was set. The left and right orbital peripheral areas and nostril areas were removed from the difference absolute value image, and the remaining image areas were extracted as evaluation target areas.
After that, the variance which is the root mean square of the deviation of the histogram of the pixel value of each pixel in the evaluation target region in the difference absolute value image of FIG.
The difference absolute value image was generated as described above for the 40 skin images related to the sample subject, the evaluation target region was extracted, and the variance was calculated.
このように本方法においては、差分絶対値を画素値とする差分絶対値画像を生成し、差分絶対値画像から部分的に抽出された評価対象領域に関して指標値を算出して見かけ状態を評価する。これにより、眉毛、睫毛および鼻毛など、毛穴と同等のサイズの微細な特徴であり、かつテカリに影響を与えない要因が評価対象領域から排除される。このほか、目や鼻孔の輪郭に由来する高周波成分も差分絶対値画像から除去することができる。
このため、算出される差分絶対値には、テカリに影響を与える高周波成分が抽出される。よって、かかる差分絶対値の分散度を示す指標値を算出することで、毛穴や肌理などの細かい凹凸や光沢の細かい輪郭などの高周波成分に由来するテカリの度合いを定量的に評価することができる。
これに対し、上記の特許文献１の方法では肌画像を周波数分解して高周波成分を再構成するため、眉毛や睫毛などの微細な特徴の影響を除くためには、特定の評価対象領域のみが写り込んだ肌画像を予め用意しておく必要がある。同様に特許文献２の方法でも、明差分や暗差分に供される肌画像には、目や鼻などの輪郭線を含まない肌のテクスチャのみの画像が用いられている。
As described above, in this method, a difference absolute value image having a difference absolute value as a pixel value is generated, and an index value is calculated for an evaluation target region partially extracted from the difference absolute value image to evaluate an apparent state. . Thereby, factors that are fine features having the same size as the pores, such as eyebrows, eyelashes, and nose hairs, and that do not affect the shine are excluded from the evaluation target region. In addition, high frequency components derived from the contours of eyes and nostrils can be removed from the difference absolute value image.
For this reason, a high-frequency component that affects shine is extracted from the calculated difference absolute value. Therefore, by calculating an index value indicating the degree of dispersion of the absolute difference value, it is possible to quantitatively evaluate the degree of shine caused by high-frequency components such as fine irregularities such as pores and textures and fine outlines of gloss. .
On the other hand, in the method of Patent Document 1 described above, the skin image is frequency-resolved to reconstruct a high-frequency component. Therefore, in order to remove the influence of fine features such as eyebrows and eyelashes, only a specific evaluation target region is It is necessary to prepare a reflected skin image in advance. Similarly, in the method of Patent Document 2, an image having only a skin texture that does not include contour lines such as eyes and nose is used as a skin image subjected to a bright difference or a dark difference.
本方法においては、肌画像とぼかし画像との差分絶対値画像に対して任意の評価対象領域を設定することが可能である。仮に肌画像において一部領域を除去して評価対象領域を設定した場合、除去された一部領域のエッジが差分絶対値への高周波ノイズの原因となるところ、本方法のように差分演算後の差分絶対値画像において評価対象領域を設定することにより、かかる高周波ノイズが発生しない。
また、評価対象領域の設定は、差分絶対値画像をディスプレイ装置に表示した状態で、マウスなどの入力デバイスを用いて行うとよい。具体的には、差分絶対値画像における一部領域を囲うように入力デバイスを用いて指定することにより、除去または抽出する対象を決定することができる。このほか、上記の特許文献３に記載されているように顔画像に写る顔の特徴点に基づいて自動的に評価対象領域を判別する方法を利用することもできる。このように、画像操作によって評価対象領域を設定することで、テカリの評価対象として必要または不要な部分を確認しながら当該操作を行うことができる。なお、評価対象領域を設定する際には、テカリが見られる領域のみを選択するのではなく、テカリが見られる領域を包含するように、テカリの領域よりも広い範囲を選択するとよい。これにより、テカリの発生原因である微細な特徴が評価対象領域の内部で分散した状態となるため、指標値が過少に算出されることが防止される。
In this method, it is possible to set an arbitrary evaluation target region for the absolute difference image between the skin image and the blurred image. If the evaluation target area is set by removing a partial area in the skin image, the edge of the removed partial area causes high-frequency noise to the difference absolute value. By setting the evaluation target region in the difference absolute value image, such high frequency noise does not occur.
The evaluation target area may be set using an input device such as a mouse in a state where the difference absolute value image is displayed on the display device. Specifically, an object to be removed or extracted can be determined by specifying with an input device so as to surround a partial region in the difference absolute value image. In addition, as described in Patent Document 3 described above, a method of automatically determining the evaluation target region based on the facial feature points appearing in the face image can also be used. In this way, by setting the evaluation target region by image operation, it is possible to perform the operation while confirming a necessary or unnecessary portion as the evaluation target of the shine. When setting the evaluation target area, it is preferable to select a range wider than the shining area so as to include the shining area instead of selecting only the area where shining is seen. As a result, fine features that are the cause of the occurrence of shine are dispersed in the evaluation target area, so that the index value is prevented from being excessively calculated.
図３（ａ）は、４０枚の上記の肌画像から求めた、評価対象領域における差分絶対値（画素値）のヒストグラムの分散（以下、単に「差分絶対値の分散」という場合がある）を横軸とし、４０枚の顔画像を５名の評価者が官能評価した点数の平均値であるテカリ指数を縦軸としたときの相関を示すグラフである。ぼかし処理にはガウシアンフィルタを用い、ぼかし半径は５０画素とした。 FIG. 3A shows the variance of the absolute difference (pixel value) histogram in the evaluation target area obtained from the 40 skin images described above (hereinafter simply referred to as “difference of absolute difference” in some cases). It is a graph which shows a correlation when the horizontal axis | shaft is set and the Tekalis index which is the average value of the score which five evaluators sensory-evaluated 40 face images is set to the vertical axis | shaft. For the blurring process, a Gaussian filter was used, and the blur radius was 50 pixels.
差分絶対値の分散とテカリ指数との間には強い相関が見られ、決定係数（Ｒ２）は０．５１、相関係数（Ｒ）は０．７２となった。分散（ｘ）とテカリ指数（ｙ）との関係を示す、最小二乗法による一次関数として求めた近似式を図中に示す（図３（ｂ）、図４（ａ）、図４（ｂ）、図５（ａ）においても同様とする）。なお、差分絶対値の分散度を示す指標値として分散に代えて標準偏差を用いる場合は、多項式近似などの曲線近似を用いて決定係数を算出してもよい。 A strong correlation was found between the variance of the absolute difference value and the shine index, with a determination coefficient (R 2 ) of 0.51 and a correlation coefficient (R) of 0.72. Approximate expressions obtained as a linear function by the least square method, showing the relationship between the variance (x) and the shine factor (y) are shown in the figure (FIG. 3 (b), FIG. 4 (a), FIG. 4 (b)). The same applies to FIG. 5A). Note that when the standard deviation is used instead of the variance as the index value indicating the variance of the absolute difference, the determination coefficient may be calculated using curve approximation such as polynomial approximation.
図３（ａ）に示す結果から、本方法のように肌画像とぼかし画像との差分絶対値の分散度を示す指標値（同図では分散）に基づいて、顔画像におけるテカリの度合いを推定できることが分かった。そして図２に示した結果と併せることで、上記の指標値に基づいて、肌（顔）を本人が実目視した場合に感じるテカリの度合いを評価できることが分かった。 From the result shown in FIG. 3A, the degree of shine on the face image is estimated based on an index value (dispersion in the figure) indicating the degree of dispersion of the absolute value of the difference between the skin image and the blurred image as in this method. I understood that I could do it. Then, in combination with the results shown in FIG. 2, it was found that the degree of shine felt when the person actually looks at the skin (face) can be evaluated based on the above index value.
つぎに、ぼかし処理で用いられるぼかし強度を変化させた場合に、差分絶対値の分散度を示す指標値とテカリの度合いを示す官能評価結果との関係がどのように変動するかについて説明する。詳細には、ぼかし半径を１００画素、１５０画素、２００画素、そして２５０画素に変更した場合の、差分絶対値の分散とテカリ指数との関係をそれぞれ求めた。 Next, how the relationship between the index value indicating the degree of variance of the absolute difference value and the sensory evaluation result indicating the degree of shine changes when the blur intensity used in the blur process is changed will be described. Specifically, the relationship between the variance of the absolute difference and the shine index when the blur radius is changed to 100 pixels, 150 pixels, 200 pixels, and 250 pixels was obtained.
図３（ｂ）は、ぼかし半径を１００画素とした場合の差分絶対値の分散（横軸：ｘ）とテカリ指数（縦軸：ｙ）との相関を示すグラフである。決定係数（Ｒ２）は０．６６、相関係数（Ｒ）は０．８１となった。
図４（ａ）は、ぼかし半径を１５０画素とした場合の差分絶対値の分散（横軸：ｘ）とテカリ指数（縦軸：ｙ）との相関を示すグラフである。決定係数（Ｒ２）は０．７０、相関係数（Ｒ）は０．８４となった。
図４（ｂ）は、ぼかし半径を２００画素とした場合の差分絶対値の分散（横軸：ｘ）とテカリ指数（縦軸：ｙ）との相関を示すグラフである。決定係数（Ｒ２）は０．７１、相関係数（Ｒ）は０．８４となった。
図５（ａ）は、ぼかし半径を２５０画素とした場合の差分絶対値の分散（横軸：ｘ）とテカリ指数（縦軸：ｙ）との相関を示すグラフである。決定係数（Ｒ２）は０．６６、相関係数（Ｒ）は０．８１となった。
図５（ｂ）は上記の結果をまとめたものであり、ぼかし半径と決定係数（Ｒ２）との関係を示すグラフである。
FIG. 3B is a graph showing the correlation between the variance of absolute difference values (horizontal axis: x) and the shine index (vertical axis: y) when the blur radius is 100 pixels. The coefficient of determination (R 2 ) was 0.66 and the correlation coefficient (R) was 0.81.
FIG. 4A is a graph showing the correlation between the variance of absolute difference values (horizontal axis: x) and the shine index (vertical axis: y) when the blur radius is 150 pixels. The determination coefficient (R 2 ) was 0.70, and the correlation coefficient (R) was 0.84.
FIG. 4B is a graph showing the correlation between the variance of absolute difference values (horizontal axis: x) and the shine index (vertical axis: y) when the blur radius is 200 pixels. The determination coefficient (R 2 ) was 0.71 and the correlation coefficient (R) was 0.84.
FIG. 5A is a graph showing the correlation between the variance of absolute difference values (horizontal axis: x) and the shine index (vertical axis: y) when the blur radius is 250 pixels. The coefficient of determination (R 2 ) was 0.66 and the correlation coefficient (R) was 0.81.
FIG. 5 (b) summarizes the above results and is a graph showing the relationship between the blur radius and the determination coefficient (R 2 ).
以上の結果から、ぼかし半径を５０画素から２５０画素まで変化させた場合に、肌画像とぼかし画像との差分絶対値の分散とテカリ指数との決定係数はいずれも０．５を超え、いずれのぼかし半径を用いてもテカリ指数を評価できることが分かった。また、図５（ｂ）に示す結果から、ぼかし半径には好適な範囲が存在し、本実施形態の条件では、ぼかし半径を１００画素以上２５０画素以下とした場合に、より精度よくテカリを評価できることが分かった。更に、ぼかし半径を１５０画素以上２００画素以下としたときに決定係数が０．７またはそれ以上となり、差分絶対値の分散とテカリ指数とが強い正の相関をもつと言える。このため、差分絶対値の分散度を示す指標値（分散など）そのもの、または当該指標値から換算される他の数値を、テカリの度合いを示すテカリスコアとして用いることができ、またかかるテカリスコアにより被験者の肌のテカリの度合いを精度よく評価できる。 From the above results, when the blur radius is changed from 50 pixels to 250 pixels, the variance of the absolute value of the difference between the skin image and the blur image and the coefficient of determination of the shine factor both exceed 0.5, It was found that the shine index can be evaluated using the blur radius. Further, from the result shown in FIG. 5B, there is a suitable range for the blur radius, and under the conditions of this embodiment, when the blur radius is 100 pixels or more and 250 pixels or less, the shine is evaluated more accurately. I understood that I could do it. Further, when the blur radius is 150 pixels or more and 200 pixels or less, the determination coefficient is 0.7 or more, and it can be said that the variance of the difference absolute value and the shine factor have a strong positive correlation. For this reason, the index value (dispersion etc.) itself indicating the variance of the difference absolute value or other numerical values converted from the index value can be used as a shine score indicating the degree of shine. The degree of skin shine of the subject can be accurately evaluated.
本方法では、ぼかし画像の平均輝度が、元の肌画像の平均輝度よりも有意に変化するぼかし強度で肌画像をぼかし処理してもよい。 In this method, the skin image may be subjected to blurring processing with a blur intensity at which the average brightness of the blurred image changes significantly compared to the average brightness of the original skin image.
上述の撮影環境で、サンプル被験者以外の新たな被験者から肌画像を撮影し、かかる肌画像に対して上記のぼかし強度でぼかし処理を施してから画素ごとに差分絶対値を算出して、差分絶対値画像を生成するとよい。そして、上記のサンプル被験者の肌画像（顔画像）と同様に、差分絶対値画像において評価対象領域を抽出したうえで、差分絶対値の分散度を示す指標値を算出してテカリスコアを決定するとよい。これにより、多数の被験者の肌のテカリの度合いを個別に評価することができる。 In the above-described shooting environment, a skin image is taken from a new subject other than the sample subject, the blur processing is performed on the skin image with the blur strength described above, and then an absolute difference value is calculated for each pixel. A value image may be generated. Then, similarly to the skin image (face image) of the sample subject described above, after extracting the evaluation target area in the difference absolute value image, calculating the index value indicating the degree of variance of the difference absolute value and determining the shine score Good. Thereby, the degree of shine of the skin of many test subjects can be individually evaluated.
なお、好ましいぼかし半径は肌画像の撮影条件により変動する。本発明者らの検討によれば、顔画像を撮影するデジタルカメラの画素数（縦横方向のうち画素数が多い方）に対して１／２００から１／８の画素数をぼかし半径とすることが好適であり、１／１２０から１／２４の画素数のぼかし半径とすることが更に好適である。 Note that the preferable blur radius varies depending on the imaging condition of the skin image. According to the study by the present inventors, the blur radius is set to 1/200 to 1/8 of the number of pixels of the digital camera that captures the face image (the one with the larger number of pixels in the vertical and horizontal directions). Is preferable, and it is more preferable to set the blurring radius of the number of pixels from 1/120 to 1/24.
非平滑化フィルタであるメディアンフィルタを用いてぼかし処理を行う場合は、着目画素の周囲に、上述したぼかし半径に相当する局所領域を設定して画素値を昇順または降順に並べて中央値を選択するとよい。 When blurring is performed using a median filter that is a non-smoothing filter, a local region corresponding to the blur radius described above is set around the pixel of interest, and pixel values are arranged in ascending or descending order and a median value is selected. Good.
肌画像（顔画像）の撮影環境を変更する場合、上記にて予め決定されたぼかし強度を共通に適用して肌画像をぼかし処理して差分絶対値を算出し、その分散度を示す分散や標準偏差等の指標値を算出してもよい。
ただし、より高精度にテカリの度合いを評価するためには、撮影環境を変更して撮影された肌画像に対して改めて上記のように目視にて官能評価を行ってテカリ指数を決定するとよい。一方で、複数とおりのぼかし強度で肌画像をぼかし処理し、かかるぼかし画像と元の肌画像との差分絶対値を算出して複数の指標値を決定しておく。そして、複数の指標値のうち、テカリ指数と最も強く相関する指標値を特定し、当該指標値にかかるぼかし強度を決定する。これにより、新たな撮影環境で被験者の肌画像を撮影する場合にも当該被験者の肌のテカリの度合いを精度よく評価することができる。
When changing the shooting environment of a skin image (face image), the blur intensity previously determined above is commonly applied to blur the skin image to calculate the absolute value of the difference. An index value such as a standard deviation may be calculated.
However, in order to evaluate the degree of shine with higher accuracy, it is preferable to determine the shine index by performing a sensory evaluation on the skin image taken by changing the photographing environment as described above. On the other hand, a skin image is blurred with a plurality of different blur intensities, and a difference absolute value between the blurred image and the original skin image is calculated to determine a plurality of index values. Then, an index value that correlates most strongly with the shine index is identified from among a plurality of index values, and the blur intensity applied to the index value is determined. Thereby, even when a subject's skin image is photographed in a new photographing environment, the degree of shine of the subject's skin can be accurately evaluated.
上記に説明した本方法では、ぼかし処理で行うぼかし強度を変化させることにより、算出される指標値とテカリ指数との相関が変化することを説明した。このことを利用して、ぼかし強度が異なる複数とおりのぼかし処理をそれぞれ行った複数枚のぼかし画像を用いて差分絶対値画像を当該複数枚生成し、複数個の指標値を算出してもよい。そして、複数個の指標値に基づいて、元の肌画像のテカリの度合いを評価してもよい。これにより、被験者の肌の見かけ状態を多面的に評価することができる。 In the method described above, it has been described that the correlation between the calculated index value and the shine index is changed by changing the blurring intensity performed in the blurring process. Using this, a plurality of difference absolute value images may be generated using a plurality of blurred images obtained by performing a plurality of types of blurring processing with different blurring intensities, and a plurality of index values may be calculated. . Then, the degree of shine of the original skin image may be evaluated based on a plurality of index values. Thereby, the apparent state of the subject's skin can be evaluated from multiple aspects.
以下、本方法を実現する肌状態評価装置１００について説明する。図６は、肌状態評価装置１００の機能ブロック図である。また、図７（ａ）は肌画像の例であり、図７（ｂ）はそのぼかし画像である。図７（ｃ）は、図７（ａ）の肌画像と図７（ｂ）のぼかし画像との差分絶対値画像である。 Hereinafter, the skin condition evaluation apparatus 100 which implement | achieves this method is demonstrated. FIG. 6 is a functional block diagram of the skin condition evaluation apparatus 100. FIG. 7A shows an example of a skin image, and FIG. 7B shows the blurred image. FIG. 7C is a difference absolute value image between the skin image of FIG. 7A and the blurred image of FIG. 7B.
本実施形態の肌状態評価装置１００は、肌画像取得部１０、ぼかし処理部１２、差分算出部３０および指標値算出部４０を備えている。
肌画像取得部１０は、評価対象となる肌表面が撮影された肌画像を取得する手段であり、具体的にはデジタルカメラや、予め撮影された肌画像の画像データを肌状態評価装置１００の外部から有線接続、無線接続または記憶メディアを通じて取り込むための入力インタフェースとすることができる。図７（ａ）に示すように、肌画像には顔の一部画像を用いることができる。肌画像取得部１０は、撮影または取り込む肌画像がカラー画像である場合、当該カラー画像をグレースケールに変換する処理を行って肌画像を取得してもよい。
The skin condition evaluation apparatus 100 according to the present embodiment includes a skin image acquisition unit 10, a blurring processing unit 12, a difference calculation unit 30, and an index value calculation unit 40.
The skin image acquisition unit 10 is a means for acquiring a skin image obtained by photographing the skin surface to be evaluated. Specifically, the skin image obtaining unit 10 obtains image data of a skin image that has been photographed in advance using a digital camera. It can be an input interface for taking in through a wired connection, a wireless connection or a storage medium from the outside. As shown in FIG. 7A, a partial image of a face can be used as the skin image. When the skin image captured or captured is a color image, the skin image acquisition unit 10 may acquire the skin image by performing processing for converting the color image into a gray scale.
ぼかし処理部１２は、肌画像取得部１０が取得した肌画像に対してぼかし処理を施すことによりぼかし画像を取得する手段である。ぼかし処理部１２は、ガウシアンフィルタなどのフィルタ手段を備え、本方法について上述したぼかし処理を実行する。ぼかし処理部１２のぼかし強度は可変に設定されていてもよい。ぼかし処理部１２は、肌画像の全画素に対してぼかし処理を行う（図７（ｂ）参照）。
差分算出部３０は、肌画像とぼかし画像との画素ごとの差分絶対値を算出する手段である。すなわち差分算出部３０は、肌画像およびぼかし画像から、対応する画素位置ごとに画素値を読み取って差分し、当該差分値を二乗したうえで平方根をとることにより差分絶対値を算出する。差分絶対値は画素ごとに算出されるため、差分絶対値画像として画像形式で表示することができる（図７（ｃ）参照）。
指標値算出部４０は、この差分絶対値の分散度を示す指標値を算出する手段である。指標値としては分散や標準偏差などデータの分散度合いを示す種々の統計値を採用することができる。
The blur processing unit 12 is a unit that acquires a blur image by performing blur processing on the skin image acquired by the skin image acquisition unit 10. The blur processing unit 12 includes filter means such as a Gaussian filter, and executes the blur processing described above for this method. The blur intensity of the blur processing unit 12 may be set variably. The blurring processing unit 12 performs a blurring process on all the pixels of the skin image (see FIG. 7B).
The difference calculation unit 30 is a means for calculating an absolute difference value for each pixel between the skin image and the blurred image. That is, the difference calculation unit 30 calculates a difference absolute value by reading the pixel value for each corresponding pixel position from the skin image and the blurred image, taking the difference, and taking the square root after squaring the difference value. Since the difference absolute value is calculated for each pixel, the difference absolute value image can be displayed in an image format (see FIG. 7C).
The index value calculation unit 40 is a means for calculating an index value indicating the degree of dispersion of the difference absolute value. As the index value, various statistical values indicating the degree of data dispersion such as dispersion and standard deviation can be adopted.
肌状態評価装置１００はデータ格納部２０を備えている。データ格納部２０は、肌画像取得部１０が撮影または外部から取得した肌画像のデータを格納するための手段である。ぼかし処理部１２は、肌画像取得部１０から肌画像のデータを受け取って、またはデータ格納部２０に格納されている肌画像のデータを読み出して、当該データに対してぼかし処理を実行してぼかし画像を生成する。 The skin condition evaluation apparatus 100 includes a data storage unit 20. The data storage unit 20 is a means for storing skin image data captured by the skin image acquisition unit 10 or acquired from the outside. The blur processing unit 12 receives the skin image data from the skin image acquisition unit 10 or reads the skin image data stored in the data storage unit 20 and executes the blur processing on the data to blur. Generate an image.
肌状態評価装置１００は、コンピュータプログラムを読み取って対応する処理動作を実行できるように、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、インタフェースユニット等の汎用デバイスで構築されたハードウェア、所定の処理動作を実行するように構築された専用の論理回路、これらの組み合わせ、等として実施することができる。肌状態評価装置１００の各種の構成要素は、その機能を実現するように形成されていればよく、例えば、所定の機能を発揮する専用のハードウェア、所定の機能がコンピュータプログラムにより付与されたデータ処理装置、コンピュータプログラムによりデータ処理装置に実現された所定の機能、これらの任意の組み合わせ、等として実現することができる。データ格納部２０がデータを格納するとは、データ格納部２０がデータを記憶する機能を有することを意味しており、当該データが常に格納されていることを必ずしも要しない。 The skin condition evaluation apparatus 100 is a general-purpose device such as a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), or an interface unit so that it can read a computer program and execute a corresponding processing operation. It can be implemented as hardware constructed, a dedicated logic circuit constructed to execute a predetermined processing operation, a combination thereof, or the like. The various components of the skin condition evaluation apparatus 100 may be formed so as to realize the function. For example, dedicated hardware that exhibits a predetermined function, data provided with a predetermined function by a computer program It can be realized as a processing device, a predetermined function realized in the data processing device by a computer program, an arbitrary combination thereof, or the like. The data storage unit 20 storing data means that the data storage unit 20 has a function of storing data, and it is not always necessary to store the data.
肌画像取得部１０は、複数のサンプル被験者の肌画像、またはテカリの度合いを評価する対象者である被験者の肌画像を取得してデータ格納部２０に格納する。ぼかし処理部１２は、肌画像取得部１０またはデータ格納部２０から肌画像を取得して所定のぼかし強度にて肌画像にぼかし処理を施す。ぼかし処理部１２は、平滑化フィルタ、または非平滑化処理によるノイズ除去フィルタを備えている。ぼかし処理部１２は、肌画像の画素ごとに、肌表面に含まれる毛穴の直径よりも大きな画素領域を対象としてそれぞれぼかし処理を行う。 The skin image acquisition unit 10 acquires a skin image of a plurality of sample subjects or a skin image of a subject who is a subject who evaluates the degree of shine, and stores the skin images in the data storage unit 20. The blur processing unit 12 acquires a skin image from the skin image acquisition unit 10 or the data storage unit 20, and performs blur processing on the skin image with a predetermined blur strength. The blurring processing unit 12 includes a smoothing filter or a noise removal filter by non-smoothing processing. The blurring processing unit 12 performs a blurring process for each pixel of the skin image, with a pixel area larger than the diameter of the pore included in the skin surface as a target.
差分算出部３０は、肌画像およびぼかし画像を用いて画素ごとの差分絶対値を算出する。本実施形態の差分算出部３０は、差分絶対値を画素値とする差分絶対値画像を生成する。肌状態評価装置１００は、差分絶対値画像から部分的に評価対象領域を指定する入力を受け付ける領域指定部３２を更に備えている。なお、評価対象領域を指定するとは、肌画像または差分絶対値画像のうち、評価対象とする領域を指定することと、評価対象とせずに除去する領域を指定して残余の領域を評価対象とすることの両者を少なくとも含む。図７（ｃ）に示す差分絶対値画像では、被験者の鼻孔に対応する領域を除去する領域として指定し、残余の領域を評価対象としている。
領域指定部３２は、差分絶対値画像を表示出力するディスプレイ装置と、マウスなどの入力デバイスと、を備えている。肌状態評価装置１００のユーザ（被験者または操作者）は、ディスプレイ装置に表示された差分絶対値画像に対して入力デバイスを操作して評価対象領域を指定する。そして指標値算出部４０は、この評価対象領域に関して指標値を算出する。
The difference calculation unit 30 calculates a difference absolute value for each pixel using the skin image and the blurred image. The difference calculation unit 30 of the present embodiment generates a difference absolute value image having the difference absolute value as a pixel value. The skin condition evaluation apparatus 100 further includes an area specifying unit 32 that receives an input for partially specifying an evaluation target area from the difference absolute value image. Specifying the evaluation target area means specifying the area to be evaluated in the skin image or the absolute difference image, and specifying the area to be removed without being the evaluation target, and setting the remaining area as the evaluation target. Including at least both. In the difference absolute value image shown in FIG. 7C, an area corresponding to the nostril of the subject is designated as an area to be removed, and the remaining area is an evaluation target.
The area designating unit 32 includes a display device that displays and outputs a difference absolute value image, and an input device such as a mouse. The user (subject or operator) of the skin condition evaluation apparatus 100 operates the input device on the difference absolute value image displayed on the display device and designates the evaluation target region. Then, the index value calculation unit 40 calculates an index value for this evaluation target area.
指標値算出部４０は、評価対象領域の画素を対象として差分絶対値の平均値を算出し、この平均値および評価対象領域の画素の差分絶対値の個々の値から、公知の方法で指標値を算出する。指標値算出部４０は、差分絶対値のヒストグラムを生成してもよい。 The index value calculation unit 40 calculates an average value of absolute difference values for pixels in the evaluation target area, and calculates an index value by a known method from the average value and individual values of the absolute difference values of the pixels in the evaluation target area. Is calculated. The index value calculation unit 40 may generate a histogram of difference absolute values.
本実施形態の肌状態評価装置１００によれば、肌画像取得部１０が取得した肌画像に基づいて指標値算出部４０により上記指標値が算出されるため、肌画像に写る肌表面のテカリの度合い等の見かけ状態の評価値を得ることができる。 According to the skin condition evaluation apparatus 100 of the present embodiment, since the index value calculation unit 40 calculates the index value based on the skin image acquired by the skin image acquisition unit 10, the skin surface shine reflected in the skin image is calculated. An evaluation value of an apparent state such as a degree can be obtained.
図６に示すように、本実施形態の肌状態評価装置１００は評価処理部５０を備えている。評価処理部５０は、指標値算出部４０が算出した分散や標準偏差などの指標値を、予め定められた演算またはテーブル照合により他の値に置換することにより、テカリの度合いを示すテカリスコアを導出してもよい。一例として、指標値の四捨五入や、Ａ〜Ｄなどの多段階化、テカリの度合いを示すメッセージへの変換などが挙げられる。このほか、肌のテカリおよびその他の要因を考慮した、肌の見た目の美しさに関する総合的な評価結果を導出してもよい。
出力部６０は、評価処理部５０が算出した評価結果をディスプレイ画面への表示や紙媒体への印刷などによって出力する手段である。
As shown in FIG. 6, the skin condition evaluation apparatus 100 according to this embodiment includes an evaluation processing unit 50. The evaluation processing unit 50 replaces an index value such as variance or standard deviation calculated by the index value calculation unit 40 with another value by a predetermined calculation or table collation, thereby obtaining a shine score indicating the degree of shine. It may be derived. As an example, rounding of index values, multi-stages such as A to D, conversion to a message indicating the degree of shine, and the like can be mentioned. In addition, it is also possible to derive a comprehensive evaluation result regarding the beauty of the appearance of the skin in consideration of skin shine and other factors.
The output unit 60 is a means for outputting the evaluation result calculated by the evaluation processing unit 50 by displaying on the display screen or printing on a paper medium.
肌状態評価装置１００は、条件指定部４２を更に備えている。条件指定部４２は、被験者の性別や年齢（実年齢）などの属性情報や、被験者自身の肌に対する意識や自己評価などの肌意識情報、または被験者が使用している化粧品を示す化粧品情報などの各種情報に関する入力を評価条件として受け付けるインタフェースである。属性情報としては、上記のほか人種などを含めてもよい。条件指定部４２は評価条件として、被験者が肌に施した肌化粧料や肌施術（詳細は後述）を識別する識別番号の入力を受け付けてもよい。
評価処理部５０は、指標値算出部４０が算出した指標値と条件指定部４２に入力された評価条件とに基づいて、被験者の肌表面に関するテカリの度合い等の見かけ状態の評価結果を算出してもよい。
The skin condition evaluation apparatus 100 further includes a condition specifying unit 42. The condition specifying unit 42 includes attribute information such as the subject's sex and age (actual age), skin awareness information such as the subject's own awareness of the skin and self-evaluation, and cosmetic information indicating the cosmetics used by the subject. This interface accepts input related to various types of information as evaluation conditions. The attribute information may include races in addition to the above. The condition designating unit 42 may accept an input of an identification number for identifying a skin cosmetic or skin treatment (details will be described later) applied to the skin by the subject as an evaluation condition.
Based on the index value calculated by the index value calculation unit 40 and the evaluation condition input to the condition specifying unit 42, the evaluation processing unit 50 calculates an evaluation result of an apparent state such as a degree of shine on the skin surface of the subject. May be.
また、本方法および肌状態評価装置１００を用いることで、肌化粧料や肌施術が肌表面の見かけ状態に与えている影響度合いを定量的に評価することができる。
ファンデーションなどのメイクアップ化粧料や、クレンジング剤や化粧水などのスキンケア化粧料を肌に塗布することで肌のテカリが抑えられたり、逆に肌の保湿性を高めるなどの目的で化粧料に油分が多く含まれることで肌のテカリを誘発したりする。また、スキンケア手技や毛穴治療など美容施術と呼ばれる各種の肌施術を肌に適用することで、皮脂の発生を抑えてテカリを抑制することも行われている。ただし、ここでいう肌施術とは非医療施術をいう。
Moreover, by using this method and the skin condition evaluation apparatus 100, it is possible to quantitatively evaluate the degree of influence that the skin cosmetics or skin treatment has on the appearance of the skin surface.
Applying makeup cosmetics such as foundation, and skin care cosmetics such as cleansing agents and lotions to the skin can reduce skin shine and conversely improve the moisture content of the skin. It contains a lot of skin and induces skin shine. In addition, by applying various skin treatments called beauty treatments such as skin care techniques and pore treatments to the skin, generation of sebum is suppressed and shine is also suppressed. However, skin treatment here refers to non-medical treatment.
そこで、被験者の素肌の肌表面の画像と、肌化粧料や肌施術が施された肌表面の画像と、に基づいてそれぞれ指標値を算出して対比することで、肌化粧料や肌施術によるテカリの抑制効果を定量評価することができる。すなわち本方法および肌状態評価装置１００の応用例として、肌診断方法および肌診断システムが提供される。
かかる肌診断方法および肌診断システムでは、はじめに、第一および第二の肌画像ならびに第一および第二のぼかし画像を取得する。第一の画像は被験者の肌表面が撮影された画像であり、第二の画像は肌化粧料または肌施術が施された肌表面が撮影された画像である。第一のぼかし画像は第一の肌画像に対してぼかし処理を施して取得された画像であり、第二のぼかし画像は第二の肌画像に対してぼかし処理を施して取得された画像である。第一および第二の肌画像の撮影条件は共通とし、第一および第二の肌画像に適用するぼかし処理も共通とする。
つぎに、第一の肌画像と第一のぼかし画像との画素ごとの差分絶対値の分散度を示す第一の指標値、および第二の肌画像と第二のぼかし画像との画素ごとの差分絶対値の分散度を示す第二の指標値に基づいて、肌化粧料または肌施術による肌表面の見かけ状態への影響度合いを評価する。これにより、肌化粧料または肌施術によるテカリの抑制またはテカリの誘発の効果を定量評価することができる。
Therefore, by calculating and comparing the index values based on the skin surface image of the subject's bare skin and the skin surface image on which the skin cosmetic or skin treatment has been applied, It is possible to quantitatively evaluate the inhibitory effect of shine. That is, as an application example of the present method and skin condition evaluation apparatus 100, a skin diagnosis method and a skin diagnosis system are provided.
In such a skin diagnostic method and skin diagnostic system, first, first and second skin images and first and second blurred images are acquired. The first image is an image obtained by photographing the skin surface of the subject, and the second image is an image obtained by photographing the skin surface subjected to skin cosmetic or skin treatment. The first blurred image is an image obtained by performing a blurring process on the first skin image, and the second blurred image is an image obtained by performing a blurring process on the second skin image. is there. The imaging conditions for the first and second skin images are common, and the blurring process applied to the first and second skin images is also common.
Next, a first index value indicating the degree of variance of the absolute difference value for each pixel between the first skin image and the first blurred image, and each pixel of the second skin image and the second blurred image. Based on the second index value indicating the degree of dispersion of the absolute difference, the degree of influence of the skin cosmetic or skin treatment on the apparent state of the skin surface is evaluated. Thereby, it is possible to quantitatively evaluate the effect of shine prevention or skin induction by skin cosmetics or skin treatment.
上記の肌診断方法および肌診断システムの更なる応用例として、複数の肌化粧料ごとまたは肌施術ごとの対比評価を行ってもよい。詳細には、上記の肌化粧料または肌施術とは異なる他の肌化粧料または肌施術が施された肌を撮影して第三の肌画像を取得する。そして、第三の肌画像をぼかし処理して第三のぼかし画像を生成し、第三の肌画像と第三のぼかし画像との差分絶対値の分散度を示す第三の指標値を算出する。
そして、第三の指標値と上記第二の指標値とを対比することで、肌化粧料ごとまたは肌施術ごとの、テカリの抑制または誘発の効果の大小が定量的に対比される。
条件指定部４２において、肌に適用した肌化粧料または肌施術を識別する識別番号を入力しておき、評価処理部５０は、肌化粧料または肌施術の識別番号と指標値とを関連づけて記録するとよい。これにより、肌化粧料や肌施術と、テカリの抑制または誘発の効果の大小との関係を示すデータベースを構築することができる。更に評価処理部５０は、被験者の肌画像に基づいて算出した指標値を当該データベースと照合することにより、たとえば被験者の指標値が所定以上であると判断された場合にはテカリの抑制効果が有る肌化粧料や肌施術の識別番号を抽出するとよい。そして、評価処理部５０が抽出した肌化粧料や肌施術の識別番号または名称等の情報を出力部６０で出力することにより、被験者に推奨される肌化粧料や肌施術を被験者に知得させることができる。
As a further application example of the above skin diagnostic method and skin diagnostic system, a comparative evaluation may be performed for each of a plurality of skin cosmetics or for each skin treatment. Specifically, a third skin image is obtained by photographing the skin subjected to another skin cosmetic or skin treatment different from the above-described skin cosmetic or skin treatment. Then, the third skin image is blurred to generate a third blurred image, and a third index value indicating the degree of dispersion of the absolute difference between the third skin image and the third blurred image is calculated. .
Then, by comparing the third index value and the second index value, the magnitude of the effect of suppressing or inducing shine is quantitatively compared for each skin cosmetic or for each skin treatment.
In the condition designating unit 42, an identification number for identifying the skin cosmetic or skin treatment applied to the skin is input, and the evaluation processing unit 50 records the identification number of the skin cosmetic or skin treatment in association with the index value. Good. Thereby, the database which shows the relationship between skin cosmetics and skin treatment, and the magnitude | size of the effect of suppression or induction of shine can be constructed | assembled. Further, the evaluation processing unit 50 collates the index value calculated based on the skin image of the subject with the database, and has an effect of suppressing shine when it is determined that the index value of the subject is equal to or greater than a predetermined value, for example. The identification number of skin cosmetics or skin treatment may be extracted. Then, by outputting information such as the identification number or name of the skin cosmetic and skin treatment extracted by the evaluation processing unit 50 at the output unit 60, the subject is made aware of the recommended skin cosmetic and skin treatment. be able to.
以上、図面を参照して本発明の実施形態について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。また、本発明は上述の実施形態に限定されるものではなく、本発明の目的が達成される限りにおける種々の変形、改良等の態様も含む。 As mentioned above, although embodiment of this invention was described with reference to drawings, these are the illustrations of this invention, Various structures other than the above are also employable. The present invention is not limited to the above-described embodiment, and includes various modifications and improvements as long as the object of the present invention is achieved.
肌の表面反射光の輝度値（光沢）が高く、かつテカリが少ない肌は、つやがある肌であると評価することができる。一方、肌に発生するテカリは、光沢の大まかな形やコントラストなどの低周波成分と、毛穴等の微細な凹凸や輪郭による高周波成分とが複合して発生している。本方法は、肌画像とぼかし画像との差分絶対値の分散度によって高周波成分の影響を推算してテカリの度合いを定量評価するものである。したがって、肌の表面反射光の輝度値（肌画像の平均輝度）が高く、かつ本方法により評価されるテカリの度合いが低い肌を、つやの有る肌であると評価することができる。このように、本方法で算出される指標値は、それ単独で肌表面の見かけ状態の評価に用いてもよく、または肌画像の平均輝度など他の情報と組み合わせて肌表面の見かけ状態の評価に用いてもよい。
更に、本方法により導出された肌のテカリやつやなどの光沢に関する見かけ状態に加えて、肌の色ムラなどの他の要因を総合した指標を導出してもよい。
Skin with a high brightness value (gloss) of surface reflected light on the skin and less shine can be evaluated as shiny skin. On the other hand, the shine generated on the skin is generated by combining a low-frequency component such as a rough shape of gloss and contrast, and a high-frequency component due to fine irregularities and contours such as pores. In this method, the degree of shine is quantitatively evaluated by estimating the influence of the high-frequency component based on the degree of dispersion of the absolute difference between the skin image and the blurred image. Therefore, it is possible to evaluate a skin having a high brightness value (average brightness of the skin image) of the surface reflection light of the skin and a low degree of shine evaluated by the present method as shiny skin. In this way, the index value calculated by this method may be used alone for evaluating the appearance state of the skin surface, or in combination with other information such as the average brightness of the skin image, You may use for.
Furthermore, in addition to the apparent state relating to the luster of the skin, such as shine and gloss derived by the present method, an index that integrates other factors such as skin color unevenness may be derived.
本発明の肌状態評価装置１００の各種の構成要素は、個々に独立した存在である必要はない。複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等を許容する。また、本発明の肌状態評価方法や肌化粧料または肌施術の評価方法を説明するにあたり、順番に記載された複数の工程を用いて説明する場合があるが、その記載の順番は複数の工程を実行する順番やタイミングを限定するものではない。複数の工程の順番は内容的に支障のない範囲で変更することができ、また複数の工程の実行タイミングの一部または全部が互いに重複していてもよい。 The various components of the skin condition evaluation apparatus 100 of the present invention do not have to be individually independent. A plurality of components are formed as one member, a component is formed of a plurality of members, one component is a part of another component, and one component is And a part of other components are allowed to overlap. Further, in describing the skin condition evaluation method and skin cosmetics or skin treatment evaluation method of the present invention, there may be a case where a plurality of steps described in the order are used. This does not limit the order or timing of execution. The order of the plurality of steps can be changed within a range that does not hinder the contents, and some or all of the execution timings of the plurality of steps may overlap each other.
本発明は、上述した実施形態に関し、以下の肌状態評価方法、肌化粧料または肌施術の評価方法、ならびに肌状態評価装置を開示する。 The present invention relates to the above-described embodiment, and discloses the following skin condition evaluation method, skin cosmetic or skin treatment evaluation method, and skin condition evaluation apparatus.
＜１＞肌表面が撮影された肌画像と、前記肌画像に対してぼかし処理を施して取得されたぼかし画像と、の画素ごとの差分絶対値の分散度を示す指標値に基づいて前記肌表面の見かけ状態を評価する肌状態評価方法。
＜２＞前記差分絶対値を画素値とする差分絶対値画像を生成し、前記差分絶対値画像から部分的に抽出された評価対象領域に関して前記指標値を算出して前記見かけ状態を評価する上記＜１＞に記載の肌状態評価方法。
＜３＞前記肌画像が被験者の顔画像であり、前記差分絶対値画像から、眼窩下縁および眉毛を含む眼窩周縁領域、または左右の鼻孔を含む鼻孔領域の少なくとも一方を除去して前記評価対象領域を抽出する上記＜２＞に記載の肌状態評価方法。
＜４＞肌表面が撮影された第一の肌画像、ならびに肌化粧料もしくは肌施術が施された前記肌表面が撮影された第二の肌画像と、前記第一の肌画像および前記第二の肌画像に対してぼかし処理をそれぞれ施して取得された第一および第二のぼかし画像を取得し、前記第一の肌画像と前記第一のぼかし画像との画素ごとの差分絶対値の分散度を示す第一の指標値、および前記第二の肌画像と前記第二のぼかし画像との画素ごとの差分絶対値の分散度を示す第二の指標値に基づいて、前記肌化粧料または前記肌施術による前記肌表面の見かけ状態への影響度合いを評価する、肌化粧料または肌施術の評価方法。
＜５＞肌表面が撮影された肌画像に対してぼかし処理を施すことによりぼかし画像を取得するぼかし処理手段と、前記肌画像と前記ぼかし画像との画素ごとの差分絶対値を算出する差分算出手段と、前記差分絶対値の分散度を示す指標値を算出する指標値算出手段と、を備える肌状態評価装置。
＜６＞前記差分算出手段は、前記差分絶対値を画素値とする差分絶対値画像を生成し、前記肌状態評価装置は、前記差分絶対値画像から部分的に評価対象領域を指定する入力を受け付ける領域指定手段を更に備え、前記指標値算出手段は、前記評価対象領域に関して前記指標値を算出する上記＜５＞に記載の肌状態評価装置。
＜７＞前記ぼかし処理手段は、前記肌画像の画素ごとに、前記肌表面に含まれる毛穴の直径よりも大きな画素領域を対象としてそれぞれ前記ぼかし処理を行う上記＜５＞または＜６＞に記載の肌状態評価装置。
<1> The skin based on an index value indicating a degree of dispersion of a difference absolute value for each pixel between a skin image obtained by photographing a skin surface and a blurred image obtained by performing a blurring process on the skin image. Skin condition evaluation method for evaluating the apparent state of the surface.
<2> Generating a difference absolute value image having the difference absolute value as a pixel value, calculating the index value for an evaluation target region partially extracted from the difference absolute value image, and evaluating the apparent state <1> The skin condition evaluation method according to <1>.
<3> The skin image is a face image of a subject, and at least one of an orbital peripheral region including an orbital lower edge and eyebrows or a nostril region including left and right nostrils is removed from the difference absolute value image The skin condition evaluation method according to <2>, wherein the region is extracted.
<4> A first skin image obtained by photographing the skin surface, a second skin image obtained by photographing the skin surface subjected to skin cosmetic or skin treatment, the first skin image, and the second The first and second blurred images obtained by performing the blurring process on the skin image of each are obtained, and the variance of the absolute difference value for each pixel between the first skin image and the first blurred image Based on the first index value indicating the degree and the second index value indicating the degree of dispersion of the absolute difference value for each pixel of the second skin image and the second blurred image, An evaluation method for skin cosmetics or skin treatment, which evaluates the degree of influence of the skin treatment on the apparent state of the skin surface.
<5> Blur processing means for obtaining a blur image by performing blur processing on a skin image on which the skin surface is photographed, and difference calculation for calculating a difference absolute value for each pixel between the skin image and the blur image A skin condition evaluation apparatus comprising: means; and index value calculation means for calculating an index value indicating a degree of dispersion of the difference absolute value.
<6> The difference calculation means generates a difference absolute value image having the difference absolute value as a pixel value, and the skin condition evaluation device receives an input for partially specifying an evaluation target region from the difference absolute value image. The skin condition evaluation apparatus according to <5>, further including an area designation unit that receives the index value calculation unit, wherein the index value calculation unit calculates the index value with respect to the evaluation target region.
<7> The above-described <5> or <6>, wherein the blur processing unit performs the blur processing for each pixel region of the skin image, with each pixel region larger than the diameter of a pore included in the skin surface. Skin condition evaluation device.
１０ 肌画像取得部
１２ ぼかし処理部
２０ データ格納部
３０ 差分算出部
３２ 領域指定部
４０ 指標値算出部
４２ 条件指定部
５０ 評価処理部
６０ 出力部
１００ 肌状態評価装置
DESCRIPTION OF SYMBOLS 10 Skin image acquisition part 12 Blur processing part 20 Data storage part 30 Difference calculation part 32 Area | region specification part 40 Index value calculation part 42 Condition specification part 50 Evaluation processing part 60 Output part 100 Skin condition evaluation apparatus
Claims (7)
前記差分絶対値画像から、眼窩下縁および眉毛を含む眼窩周縁領域、または左右の鼻孔を含む鼻孔領域の少なくとも一方を除去して前記評価対象領域を抽出する請求項２に記載の肌状態評価方法。 The skin image is a face image of a subject;
The skin condition evaluation method according to claim 2, wherein the evaluation target region is extracted by removing at least one of an orbital peripheral region including an orbital lower edge and eyebrows or a nostril region including right and left nostrils from the difference absolute value image. .
前記第一の肌画像および前記第二の肌画像に対してぼかし処理をそれぞれ施して取得された第一および第二のぼかし画像を取得し、
前記第一の肌画像と前記第一のぼかし画像との画素ごとの差分絶対値の分散度を示す第一の指標値、および前記第二の肌画像と前記第二のぼかし画像との画素ごとの差分絶対値の分散度を示す第二の指標値に基づいて、前記肌化粧料または前記肌施術による前記肌表面の見かけ状態への影響度合いを評価する、肌化粧料または肌施術の評価方法。 A first skin image in which the skin surface is photographed, and a second skin image in which the skin surface to which skin cosmetics or skin treatment is applied is photographed;
Obtaining the first and second blurred images obtained by performing a blurring process on the first skin image and the second skin image, respectively;
The first index value indicating the degree of variance of the difference absolute value for each pixel between the first skin image and the first blurred image, and for each pixel of the second skin image and the second blurred image Evaluation method of skin cosmetic or skin treatment, which evaluates the degree of influence of the skin cosmetic or skin treatment on the apparent state of the skin surface based on a second index value indicating the degree of dispersion of the absolute value of the difference .
前記肌画像と前記ぼかし画像との画素ごとの差分絶対値を算出する差分算出手段と、
前記差分絶対値の分散度を示す指標値を算出する指標値算出手段と、を備える肌状態評価装置。 Blur processing means for acquiring a blur image by performing blur processing on a skin image in which the skin surface is photographed;
Difference calculating means for calculating a difference absolute value for each pixel of the skin image and the blurred image;
A skin condition evaluation device comprising: index value calculation means for calculating an index value indicating the degree of dispersion of the difference absolute value.
前記肌状態評価装置は、前記差分絶対値画像から部分的に評価対象領域を指定する入力を受け付ける領域指定手段を更に備え、
前記指標値算出手段は、前記評価対象領域に関して前記指標値を算出する請求項５に記載の肌状態評価装置。 The difference calculation means generates a difference absolute value image having the difference absolute value as a pixel value,
The skin condition evaluation apparatus further includes an area specifying unit that receives an input for specifying an evaluation target area partially from the difference absolute value image,
The skin condition evaluation apparatus according to claim 5, wherein the index value calculation unit calculates the index value with respect to the evaluation target region.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015249825A JP6530703B2 (en) | 2015-12-22 | 2015-12-22 | Skin condition evaluation method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015249825A JP6530703B2 (en) | 2015-12-22 | 2015-12-22 | Skin condition evaluation method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017113140A true JP2017113140A (en) | 2017-06-29 |
| JP6530703B2 JP6530703B2 (en) | 2019-06-12 |
Family
ID=59233194
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015249825A Active JP6530703B2 (en) | 2015-12-22 | 2015-12-22 | Skin condition evaluation method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6530703B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10325146B2 (en) * | 2016-05-08 | 2019-06-18 | Modiface Inc. | Hierarchical differential image filters for skin analysis |
| JP2020051750A (en) * | 2018-09-21 | 2020-04-02 | 日本製紙クレシア株式会社 | Evaluation method and evaluation device |
| WO2020080137A1 (en) * | 2018-10-16 | 2020-04-23 | 株式会社資生堂 | Skin evaluation method and skin evaluation device |
| CN111836575A (en) * | 2018-06-21 | 2020-10-27 | 松下知识产权经营株式会社 | Skin evaluation device, skin evaluation system, skin evaluation method, and computer-readable recording medium storing program for skin evaluation |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2006057314A1 (en) * | 2004-11-25 | 2006-06-01 | Inforward, Inc. | Image processing device, and image processing method |
| JP2008293325A (en) * | 2007-05-25 | 2008-12-04 | Noritsu Koki Co Ltd | Face image analysis system |
| JP2013078520A (en) * | 2011-10-05 | 2013-05-02 | Kao Corp | Skin image analysis apparatus and skin image analysis method |
| JP2014093043A (en) * | 2012-11-06 | 2014-05-19 | Kao Corp | Face image analyzer and face image analysis method |
| WO2015191821A2 (en) * | 2014-06-13 | 2015-12-17 | The Procter & Gamble Company | Apparatus and methods for modifying keratinous surfaces |
-
2015
- 2015-12-22 JP JP2015249825A patent/JP6530703B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2006057314A1 (en) * | 2004-11-25 | 2006-06-01 | Inforward, Inc. | Image processing device, and image processing method |
| JP2008293325A (en) * | 2007-05-25 | 2008-12-04 | Noritsu Koki Co Ltd | Face image analysis system |
| JP2013078520A (en) * | 2011-10-05 | 2013-05-02 | Kao Corp | Skin image analysis apparatus and skin image analysis method |
| JP2014093043A (en) * | 2012-11-06 | 2014-05-19 | Kao Corp | Face image analyzer and face image analysis method |
| WO2015191821A2 (en) * | 2014-06-13 | 2015-12-17 | The Procter & Gamble Company | Apparatus and methods for modifying keratinous surfaces |
Non-Patent Citations (1)
| Title |
|---|
| 長坂 洋輔 他: "顔画像フレーム間の肌特徴に基づく領域適応的誇張法", ＳＳＩＩ２０１４ 第２０回画像センシングシンポジウム 講演論文集, JPN6019017176, 12 June 2014 (2014-06-12), JP, pages 2 - 13, ISSN: 0004033046 * |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10325146B2 (en) * | 2016-05-08 | 2019-06-18 | Modiface Inc. | Hierarchical differential image filters for skin analysis |
| US10755089B2 (en) | 2016-05-08 | 2020-08-25 | L'oreal | Hierarchical differential image filters for skin analysis |
| CN111836575A (en) * | 2018-06-21 | 2020-10-27 | 松下知识产权经营株式会社 | Skin evaluation device, skin evaluation system, skin evaluation method, and computer-readable recording medium storing program for skin evaluation |
| JP2020051750A (en) * | 2018-09-21 | 2020-04-02 | 日本製紙クレシア株式会社 | Evaluation method and evaluation device |
| JP7102648B2 (en) | 2018-09-21 | 2022-07-20 | 日本製紙クレシア株式会社 | Evaluation method and evaluation device |
| WO2020080137A1 (en) * | 2018-10-16 | 2020-04-23 | 株式会社資生堂 | Skin evaluation method and skin evaluation device |
| JP7455753B2 (en) | 2018-10-16 | 2024-03-26 | 株式会社 資生堂 | Skin evaluation method and skin evaluation device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6530703B2 (en) | 2019-06-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5081157B2 (en) | Method and apparatus for evaluating characteristics of defective part of skin and method for evaluating anti-aging effect of cosmetic product | |
| JP5885344B2 (en) | Method for characterizing skin or skin tone | |
| JP7235895B2 (en) | Apparatus and method for visualizing cosmetic skin characteristics | |
| JP5656162B2 (en) | Method and apparatus for characterizing skin defects, and methods for evaluating the effectiveness of cosmetic agents, skin agents, or treatments for skin defects using agents | |
| JP6086573B2 (en) | Method and apparatus for characterizing pigmented spots and its application in methods for evaluating the coloring or depigmenting effect of cosmetic, skin or pharmaceutical products | |
| US20080304736A1 (en) | Method of estimating a visual evaluation value of skin beauty | |
| JP2004321793A (en) | Method and system for computational analysis of skin image | |
| WO2020219613A1 (en) | Apparatus and method for determining cosmetic skin attributes | |
| JP6530703B2 (en) | Skin condition evaluation method | |
| JP2007252891A (en) | Estimation method of evaluation value by visual recognition of beauty of skin | |
| JP2021532915A (en) | How to identify the color of the pores | |
| JP2009082338A (en) | Skin discrimination method using entropy | |
| JP7197708B2 (en) | Preprocessing method and storage device for fundus image quantitative analysis | |
| JP5250956B2 (en) | Evaluation method for elasticity | |
| KR20130141285A (en) | Method and appartus for skin condition diagnosis and system for providing makeup information suitable skin condition using the same | |
| JP6124295B2 (en) | Method for evaluating the texture of bare skin or makeup skin | |
| JP5399874B2 (en) | Image processing apparatus and image processing method | |
| Nurhudatiana | A computer-aided diagnosis system for vitiligo assessment: A segmentation algorithm | |
| JP6886773B2 (en) | How to extract the part that determines the appearance of the face, how to extract the determinants of the appearance of the face, how to distinguish the appearance of the face | |
| JP7436708B2 (en) | Method for identifying dendritic pores | |
| JP2007252892A (en) | Estimation method of evaluation value by visual recognition of three-dimensional shape of skin surface | |
| KR20220164006A (en) | Smart systems for skin testing and custom formulation and manufacturing of cosmetics | |
| JP7201318B2 (en) | Method for visualizing or quantifying characteristics of rough hands | |
| JP6730051B2 (en) | Skin condition evaluation method | |
| JP5516772B2 (en) | Display object |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181003 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190410 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190514 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190517 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6530703 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |