JP2016051444A - Evaluation method of aesthetic impression of lip and support device for supporting evaluation - Google Patents

Evaluation method of aesthetic impression of lip and support device for supporting evaluation Download PDF

Info

Publication number
JP2016051444A
JP2016051444A JP2014178082A JP2014178082A JP2016051444A JP 2016051444 A JP2016051444 A JP 2016051444A JP 2014178082 A JP2014178082 A JP 2014178082A JP 2014178082 A JP2014178082 A JP 2014178082A JP 2016051444 A JP2016051444 A JP 2016051444A
Authority
JP
Japan
Prior art keywords
image
lips
lip
aesthetic impression
evaluation method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014178082A
Other languages
Japanese (ja)
Other versions
JP6359389B2 (en
Inventor
悠 齋藤
Hisashi Saito
悠 齋藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kao Corp
Original Assignee
Kao Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kao Corp filed Critical Kao Corp
Priority to JP2014178082A priority Critical patent/JP6359389B2/en
Publication of JP2016051444A publication Critical patent/JP2016051444A/en
Application granted granted Critical
Publication of JP6359389B2 publication Critical patent/JP6359389B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a technique for objectively quantizing aesthetic impression of a lip based on an image.SOLUTION: An evaluation method of aesthetic impression of a lip performed by a computer includes the steps of: obtaining an image on which an objective lip is imaged (S11); identifying a gloss part on the objective lip in the image (S12); and calculating at least one of, for example, an average area, area dispersion, a number, and the ratio of an outer periphery to an area (S13) as an index value correlated with aesthetic impression of a lip regarding a plurality of identified gloss parts.SELECTED DRAWING: Figure 1

Description

本発明は、唇が写る画像の分析技術に関する。   The present invention relates to a technique for analyzing an image showing lips.

下記特許文献1には、立体感が異なる合成顔画像を生成する手法が提案されている。この提案手法は、各々規格化された複数人の顔画像の色について主成分分析を行い、主成分分析により得られる固有ベクトルの中から顔の立体感に寄与する固有ベクトルを特定する。下記特許文献2には、顔画像の上唇及び下唇の輪郭を検出し、唇の光沢を表すためのハイライト処理を施すことで、その顔画像にメークアップ処理を施す手法が提案されている。下記特許文献3には、被験者の顔の表面で反射された反射光成分からなる表面顔画像データに色又は強度の変化を与え、変化後の表面顔画像データと内部顔画像データとを合成する化粧シミュレーション手法が提案されている。下記特許文献4には、内部散乱光顔画像にその表面反射光成分として有彩色成分を合成した有彩色光沢顔画像を、表面反射光成分の色相を異ならせて複数個提示する顔画像の光沢色の提示方法が提案されている。この提示方法では、各有彩色光沢顔画像の光沢感が揃えられる。   Patent Document 1 below proposes a method of generating synthetic face images with different stereoscopic effects. In this proposed method, principal component analysis is performed on the colors of the face images of a plurality of persons that have been standardized, and eigenvectors that contribute to the stereoscopic effect of the face are identified from among the eigenvectors obtained by principal component analysis. The following Patent Document 2 proposes a method for detecting the contours of the upper and lower lips of a face image and applying a highlight process to express the gloss of the lips, thereby performing a makeup process on the face image. . In the following Patent Document 3, a change in color or intensity is given to surface face image data composed of a reflected light component reflected on the surface of the subject's face, and the changed face image data and internal face image data are synthesized. A makeup simulation technique has been proposed. In Patent Document 4 below, the gloss of a face image that presents a plurality of chromatic gloss face images obtained by synthesizing a chromatic color component as a surface reflected light component with an internally scattered light face image with different hues of the surface reflected light components. Color presentation methods have been proposed. In this presentation method, the glossiness of each chromatic gloss face image is aligned.

特許第5035524号公報Japanese Patent No. 5035524 特開2004−30007号公報Japanese Patent Laid-Open No. 2004-30007 特開2003−256812号公報JP 2003-256812 A 特開2008−6224号公報JP 2008-6224 A

上述の各手法は、唇に特化した評価手法を提示していない。
唇は、外方に凸状に張り出した丸みを帯びた形状を有し、その表面には縦ジワやキメが形成されている。このような形状から、乾燥や紫外線等の外的な影響により、縦ジワやキメが粗くなったり、皮むけが生じたりする。そこで、唇用の様々な化粧料が提供されている。
Each of the above-described methods does not present an evaluation method specialized for lips.
The lips have a rounded shape that protrudes outwardly, and vertical wrinkles and textures are formed on the surface thereof. From such a shape, vertical wrinkles and textures become rough or peeled due to external influences such as drying and ultraviolet rays. Therefore, various cosmetics for lips are provided.

口元の印象が顔全体の印象に影響を与えることが知られており、口元、特に、唇の美的印象は、女性にとって非常に重要な事柄である。唇の美的印象で望まれるものは、流行に左右されるが、現在では、みずみずしくふっくらと立体感を伴う印象を与える唇が望まれている。よって、唇用の化粧料もこのような美的印象を与え得る商品が提供されている。   It is known that the impression of the mouth affects the impression of the entire face, and the aesthetic impression of the mouth, especially the lips, is a very important matter for women. What is desired for the aesthetic impression of the lips depends on the fashion, but now, lips that give a fresh, plump and three-dimensional impression are desired. Therefore, products that can give such aesthetic impression to cosmetics for lips are also provided.

本発明は、このような課題に鑑みてなされたものであり、画像に基づいて唇の美的印象を客観的に定量化する技術を提供する。   The present invention has been made in view of such problems, and provides a technique for objectively quantifying the aesthetic impression of lips based on images.

本発明の各態様では、上述した課題を解決するために、それぞれ以下の構成を採用する。   Each aspect of the present invention employs the following configurations in order to solve the above-described problems.

第一の態様は、コンピュータにより実行される唇の美的印象の評価方法に関する。第一の態様に係る評価方法は、対象唇が写る画像を取得し、画像内の対象唇上のツヤ部を特定し、特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する、ことを含む。   A 1st aspect is related with the evaluation method of the aesthetic impression of the lips performed by computer. The evaluation method according to the first aspect obtains an image in which a target lip is captured, specifies a glossy portion on the target lip in the image, and an index correlated with an aesthetic impression of the lips regarding the plurality of specified glossy portions Including calculating a value.

第二の態様は、唇の美的印象の評価を支援する支援装置に関する。第二の態様に係る支援装置は、対象唇が写る画像を取得する画像取得手段と、画像内の対象唇上のツヤ部を特定する特定手段と、特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する算出手段と、算出された指標値の出力処理を行う出力処理手段と、を備える。   A 2nd aspect is related with the assistance apparatus which assists evaluation of the aesthetic impression of a lip. The support device according to the second aspect includes an image acquisition unit that acquires an image of the target lip, a specifying unit that specifies a gloss part on the target lip in the image, and a plurality of specified gloss parts. A calculation unit that calculates an index value correlated with an aesthetic impression; and an output processing unit that performs an output process of the calculated index value.

なお、本発明の別態様としては、上記第一態様に係る評価方法をコンピュータに実行させるプログラムであってもよいし、このようなプログラムを記録したコンピュータが読み取り可能な記憶媒体であってもよい。この記録媒体は、非一時的な有形の媒体を含む。   As another aspect of the present invention, a program that causes a computer to execute the evaluation method according to the first aspect described above may be used, or a computer-readable storage medium that records such a program may be used. . This recording medium includes a non-transitory tangible medium.

上記各態様によれば、画像に基づいて唇の美的印象を客観的に定量化することができる。   According to each aspect described above, the aesthetic impression of the lips can be objectively quantified based on the image.

第一実施形態における唇の美的印象を評価する評価方法を示すフローチャートである。It is a flowchart which shows the evaluation method which evaluates the aesthetic impression of the lips in 1st embodiment. ツヤ部に関する外周と面積との割合を説明するための図である。It is a figure for demonstrating the ratio of the outer periphery regarding a gloss part, and an area. 指標値を二次元グラフで出力する例を示す図である。It is a figure which shows the example which outputs an index value with a two-dimensional graph. 第一実施形態における支援装置のハードウェア構成例を概念的に示す図である。It is a figure which shows notionally the hardware structural example of the assistance apparatus in 1st embodiment. 第一実施形態における支援装置の処理構成例を概念的に示す図である。It is a figure which shows notionally the process structural example of the assistance apparatus in 1st embodiment. 2種類の異なる化粧料がそれぞれ塗布された一人の被験者の唇を写した2つの画像を示す図である。It is a figure which shows two images which copied one test subject's lip to which 2 types of different cosmetics were each applied. 唇の美的印象とツヤ量及びツヤ形状との関係を模式的に示す図である。It is a figure which shows typically the relationship between the aesthetic impression of lips, the amount of gloss, and the gloss shape. 第二実施形態における唇の美的印象を評価する評価方法を示すフローチャートである。It is a flowchart which shows the evaluation method which evaluates the aesthetic impression of the lips in 2nd embodiment. 第二実施形態における支援装置の処理構成例を概念的に示す図である。It is a figure which shows notionally the process structural example of the assistance apparatus in 2nd embodiment. 被写体を側方から見た場合の撮影環境を概念的に示す図である。It is a figure which shows notionally the imaging | photography environment at the time of seeing a to-be-photographed object from the side. 被写体側からカメラ方向を見た場合の撮影環境を概念的に示す図である。It is a figure which shows notionally the imaging environment at the time of seeing a camera direction from a to-be-photographed object side. 実施例における唇の美的印象の評価方法を示す図である。It is a figure which shows the evaluation method of the aesthetic impression of the lips in an Example. 立体感スコアと画像から抽出された指標値との関係を示すグラフである。It is a graph which shows the relationship between a stereoscopic effect score and the index value extracted from the image. 立体感スコア及び画像から抽出された指標値の相関係数を示す表である。It is a table | surface which shows the correlation coefficient of the index value extracted from the stereoscopic score and the image. 個数及び平均面積の2軸を持つ二次元グラフと立体感との関係例を示す図である。It is a figure which shows the example of a relationship between the two-dimensional graph with two axes | shafts of a number and an average area, and a three-dimensional effect. 平均面積及び面積分散の2軸を持つ二次元グラフと立体感との関係例を示す図である。It is a figure which shows the example of a relationship between the two-dimensional graph which has two axes of an average area and area dispersion, and a three-dimensional effect. 個数及び平均面積の2軸を持つ二次元グラフで表される立体感の経時変化の例を示す図である。It is a figure which shows the example of the time-dependent change of the three-dimensional effect represented by the two-dimensional graph with two axes | shafts of a number and an average area.

以下、本発明の実施の形態について説明する。なお、以下に挙げる各実施形態はそれぞれ例示であり、本発明は以下の各実施形態の構成に限定されない。   Embodiments of the present invention will be described below. In addition, each embodiment given below is an illustration, respectively, and this invention is not limited to the structure of each following embodiment.

[第一実施形態]
〔評価方法〕
図1は、第一実施形態における唇の美的印象を評価する評価方法を示すフローチャートである。第一実施形態における評価方法は、後述する支援装置のようなコンピュータにより実行される。第一実施形態における評価方法は、唇画像を取得する工程(S11)、ツヤ部を特定する工程(S12)、指標値を算出する工程(S13)及び指標値を出力する工程(S14)を含む。
[First embodiment]
〔Evaluation method〕
FIG. 1 is a flowchart showing an evaluation method for evaluating the aesthetic impression of lips in the first embodiment. The evaluation method in the first embodiment is executed by a computer such as a support device described later. The evaluation method in the first embodiment includes a step of acquiring a lip image (S11), a step of specifying a glossy portion (S12), a step of calculating an index value (S13), and a step of outputting an index value (S14). .

本実施形態で評価する唇の美的印象とは、唇を見た者がその唇から受ける美しさ全般を意味する。美しさには、可愛らしさ、セクシーさ等も含まれる。唇の美しさは、より具体的には、外方に凸状に張り出した丸みを帯びた形状に伴う、ふっくらと柔らかそうな感じや、みずみずしい感じも含む。唇のこのような具体的な印象は立体感とも呼ばれる。   The aesthetic impression of the lips evaluated in this embodiment means the overall beauty that a person who sees the lips receives from the lips. Beauty includes cuteness and sexyness. More specifically, the beauty of the lips includes a soft and soft feeling that is accompanied by a rounded shape protruding outwardly. Such a specific impression of the lips is also called a three-dimensional effect.

工程(S11)において、コンピュータは、対象唇が写る画像(唇画像と表記される)を取得する。取得される画像のデータは、例えば、JPEG(Joint Photographic Experts Group)形式、BMP(Bitmap image)形式、TIFF(Tagged Image File Format)形式、GIF(Graphic Interchange Format)形式等の画像ファイルとして取得される。但し、画像のデータ形式は、制限されず、各画素の明暗情報が羅列される形式であってもよい。また、取得される画像は、カラー画像であってもよいし、カラー画像がグレースケール化されることで得られるグレースケール画像であってもよい。コンピュータは、唇画像を撮像したカメラからその画像を取得してもよいし、他のコンピュータや可搬型記録媒体からその画像を取得してもよい。   In step (S11), the computer acquires an image (denoted as a lip image) in which the target lips are shown. The acquired image data is acquired, for example, as an image file in JPEG (Joint Photographic Experts Group) format, BMP (Bitmap image) format, TIFF (Tagged Image File Format) format, GIF (Graphic Interchange Format) format, or the like. . However, the data format of the image is not limited, and may be a format in which the brightness information of each pixel is listed. Further, the acquired image may be a color image or a gray scale image obtained by converting the color image to gray scale. The computer may acquire the image from the camera that captured the lip image, or may acquire the image from another computer or a portable recording medium.

取得される画像は、唇の表面反射光画像であることが望ましい。本評価方法は、唇のツヤに伴う唇の美的印象を評価対象とするからである。画像内の唇のツヤは、唇の表面で反射した光を撮像することで得られる。表面反射光画像は、偏光を用いて、例えば次のように取得することができる。表面反射光画像は、対象唇(被験者の唇)にS偏光を投射しS偏光及びP偏光を撮像して得られる各偏光画像から取得される。コンピュータは、各偏光画像を他の機器や他のコンピュータや可搬型記録媒体等から取得し、それらを用いて、表面反射光画像を当該唇画像として生成することもできる。   The acquired image is preferably a surface reflected light image of the lips. This is because this evaluation method is intended for evaluation of the aesthetic impression of the lips accompanying the gloss of the lips. The gloss of the lips in the image is obtained by imaging the light reflected from the surface of the lips. The surface reflected light image can be acquired using polarized light, for example, as follows. The surface reflected light image is acquired from each polarization image obtained by projecting S-polarized light on the target lips (the lips of the subject) and imaging S-polarized light and P-polarized light. The computer can acquire each polarized image from another device, another computer, a portable recording medium, or the like, and use them to generate a surface reflected light image as the lip image.

具体的には、コンピュータは、S偏光を投射しS偏光を撮像して得られる偏光画像(S−S偏光画像)と、S偏光を投射しP偏光を撮像して得られる偏光画像(S−P偏光画像)との差分を取る。S−S偏光画像は、対象唇の表面反射光成分が強く、内部反射光成分が少ない画像であり、S−P偏光画像は、対象唇の内部反射光成分が強い画像である。よって、S−S偏光画像とS−P偏光画像との差分を得ることにより、表面反射光成分以外のノイズを更に抑えた表面反射光画像が取得される。更に、コンピュータは、P偏光を投射しS偏光を撮像して得られるP−S偏光画像と、P偏光を投射しP偏光を撮像して得られるP−P偏光画像とを更に用いて、表面反射光画像を取得するようにしてもよい。これにより、表面反射光成分以外のノイズを更に抑えた表面反射光画像を取得することができる。但し、P−S偏光画像及びP−P偏光画像を用いる場合には、撮影時間が長くなり、画像間における被写体のずれが生じ易いこと、より多くの撮影設備が必要となることといった問題点がある。よって、このような問題点とノイズの抑制という効果との対比によれば、上述のようなS−S偏光画像とS−P偏光画像との組み合わせのみを用いる手法が望ましい。但し、表面反射光画像の取得手法についても制限されない。   Specifically, the computer projects a polarized image obtained by projecting S-polarized light and imaging S-polarized light (SS polarized image), and a polarized image obtained by projecting S-polarized light and captured P-polarized light (S- The difference from the (P-polarized image) is taken. The SS polarized image is an image having a strong surface reflected light component of the target lip and a small amount of internally reflected light component, and the SP polarized image is an image having a strong internal reflected light component of the target lip. Therefore, by obtaining the difference between the SS polarized image and the SP polarized image, a surface reflected light image in which noise other than the surface reflected light component is further suppressed is acquired. Further, the computer further uses a PS polarization image obtained by projecting P polarization and imaging S polarization, and a PP polarization image obtained by projecting P polarization and imaging P polarization, A reflected light image may be acquired. Thereby, the surface reflected light image which further suppressed noises other than the surface reflected light component can be acquired. However, when using a P-S polarized image and a P-P polarized image, there is a problem that the photographing time becomes long, the subject is easily shifted between images, and more photographing equipment is required. is there. Therefore, according to the comparison between such a problem and the effect of noise suppression, a method using only the combination of the SS polarization image and the SP polarization image as described above is desirable. However, the method for acquiring the surface reflected light image is not limited.

取得される画像内の対象唇は、被験者の素唇であってもよいし、化粧料が塗布された状態の唇であってもよい。但し、本評価方法は、唇のツヤに伴う唇の美的印象を評価対象とするため、当該対象唇は、化粧料が塗布された状態の唇であることが望ましい。また、取得される画像に写る被写対象は、唇を含めば、特に制限されない。当該画像には唇以外の人の部位や背景が写っていてもよいし、唇の一部のみが写っていてもよい。但し、取得される画像は、下唇の中央部の所定の大きさの画像であることが望ましい。下唇の中央部が、唇の美的印象に差を生じさせ易いことが本発明者により見出されたからである。所定の大きさは、下唇をはみ出さない範囲で設定されればよい。また、取得される画像の形も方形に制限されない。   The target lips in the acquired image may be the lips of the subject or the lips in a state where cosmetics are applied. However, in this evaluation method, since the aesthetic impression of the lips accompanying the gloss of the lips is an evaluation target, it is desirable that the target lips are lips with a cosmetic applied. Further, the object to be imaged in the acquired image is not particularly limited as long as it includes lips. The image may include a person's part other than the lips and the background, or only a part of the lips. However, it is desirable that the acquired image is an image having a predetermined size at the center of the lower lip. This is because it has been found by the present inventor that the central portion of the lower lip tends to cause a difference in the aesthetic impression of the lips. The predetermined size may be set in a range that does not protrude the lower lip. Further, the shape of the acquired image is not limited to a square.

コンピュータは、取得された画像内における、下唇の中央部の所定の大きさに対応する画像領域を切り出し、その画像領域を当該唇画像として取得することもできる。この場合、コンピュータは、周知の画像認識手法を用いて、画像内から唇を自動で認識することができる。また、コンピュータは、唇の画像領域をユーザに指定させる画面を表示し、その画面に対するユーザ操作を検出することで、唇の画像領域を特定することもできる。   The computer can cut out an image area corresponding to a predetermined size at the center of the lower lip in the acquired image, and acquire the image area as the lip image. In this case, the computer can automatically recognize the lips from the image using a known image recognition method. The computer can also specify a lip image region by displaying a screen that allows the user to specify a lip image region and detecting a user operation on the screen.

工程(S12)において、コンピュータは、画像内の対象唇上のツヤ部を特定する。「ツヤ部」とは、画像内の対象唇上におけるツヤ成分を強く表す画素群を意味する。「非ツヤ部」とは、画像内の対象唇上におけるツヤ部に該当する画素以外の画素群を意味する。以降、ツヤ部に含まれる画素は「ツヤ画素」と表記される場合があり、非ツヤ部に含まれる画素は「非ツヤ画素」と表記される場合がある。言い換えれば、「ツヤ部」とは、四連結又は八連結しているツヤ画素の集合、即ち、「非ツヤ部に囲まれたツヤ部」を意味する。但し、「ツヤ部」の条件は更に厳しく設定されてもよい。例えば、「ツヤ部」の条件に画素数の下限が追加されてもよい。   In step (S12), the computer specifies a glossy part on the target lip in the image. “Glossy part” means a pixel group that strongly expresses the glossy component on the target lip in the image. The “non-glossy part” means a pixel group other than the pixels corresponding to the glossy part on the target lip in the image. Hereinafter, the pixels included in the glossy part may be referred to as “shiny pixels”, and the pixels included in the non-glossy part may be referred to as “non-shiny pixels”. In other words, the “shiny portion” means a set of four or eight connected gloss pixels, that is, a “shiny portion surrounded by a non-shiny portion”. However, the “shiny part” condition may be set more strictly. For example, a lower limit of the number of pixels may be added to the “shiny part” condition.

コンピュータは、ツヤ画素と非ツヤ画素との判別のために、(S11)で取得された画像内の唇の画像領域に対して二値化処理を実行してもよい。二値化処理で用いられる二値化閾値は、固定的に予め決められていてもよいし、モード法、p−タイル法等の周知の手法により算出されてもよい。また、コンピュータは、当該唇画像をグレースケール画像に変換した後に、変換されたグレースケール画像に対して二値化処理を実行してもよい。この場合、コンピュータは、黒色画素を非ツヤ画素として扱い、白色画素をツヤ画素として扱う。但し、コンピュータは、二値化処理を行なわず、当該二値化閾値を用いて、ツヤ画素と非ツヤ画素とを判別することもできる。   The computer may execute binarization processing on the image area of the lips in the image acquired in (S11) in order to distinguish between glossy pixels and non-glossy pixels. The binarization threshold value used in the binarization process may be fixedly determined in advance, or may be calculated by a known method such as a mode method or a p-tile method. The computer may perform binarization processing on the converted grayscale image after converting the lip image into a grayscale image. In this case, the computer treats black pixels as non-glossy pixels and white pixels as glossy pixels. However, the computer can also determine the glossy pixel and the non-gloss pixel using the binarization threshold without performing the binarization process.

工程(S13)において、コンピュータは、(S12)で特定された複数のツヤ部に関する指標値を算出する。即ち、指標値は、ツヤ部に関する情報を用いて算出される値であり、唇の美的印象と相関を有する値である。具体的には、コンピュータは、複数のツヤ部に関する、平均面積、面積分散、個数、及び、外周と面積との割合の少なくとも1つを当該指標値として算出する。個数は、ツヤ部の数を示す。平均面積は、ツヤ部に含まれる画素数(面積)の合計を当該個数で除算して得られる値である。面積分散は、ツヤ部の面積の分散を示し、各面積の偏差の二乗平均である。外周と面積との割合は、ツヤ部の面積とその外周を形成する非ツヤ画素の数との比である。外周と面積との割合は、ツヤ部の面積合計とツヤ部の外周合計との比であってもよいし、各ツヤ部について算出される割合の平均であってもよい。   In step (S13), the computer calculates index values related to the plurality of gloss parts specified in (S12). That is, the index value is a value calculated using information on the gloss part, and is a value having a correlation with the aesthetic impression of the lips. Specifically, the computer calculates, as the index value, at least one of an average area, an area variance, the number, and a ratio between the outer circumference and the area regarding a plurality of gloss parts. The number indicates the number of gloss parts. The average area is a value obtained by dividing the total number of pixels (area) included in the gloss part by the number. The area variance indicates the variance of the area of the gloss part, and is the mean square of the deviation of each area. The ratio between the outer periphery and the area is a ratio between the area of the gloss portion and the number of non-shine pixels forming the outer periphery. The ratio between the outer circumference and the area may be a ratio of the total area of the gloss part and the total outer circumference of the gloss part, or may be an average of the ratios calculated for each gloss part.

図2は、ツヤ部に関する外周と面積との割合を説明するための図である。図2では、ツヤ画素が符号LPで示され、非ツヤ画素が符号MPで示される。ツヤ部の面積S2はツヤ画素の数(9)である。外周Yは、ツヤ部の周辺を囲む非ツヤ画素の数(12)である。図2の例では、ツヤ部を形成するツヤ画素とその外周側の一片を共有する非ツヤ画素の数が外周Yとして算出される。また、外周Yは、ツヤ部の周囲を4連結で囲む非ツヤ画素の数として算出されてもよい。この場合には、外周Yは16と算出される。図2の例では、外周と面積との割合として、面積S2を外周で除算して得られる値が算出される。   FIG. 2 is a diagram for explaining a ratio between an outer periphery and an area relating to the gloss portion. In FIG. 2, glossy pixels are indicated by a symbol LP, and non-shine pixels are indicated by a symbol MP. The area S2 of the gloss portion is the number (9) of gloss pixels. The outer periphery Y is the number (12) of non-shiny pixels surrounding the periphery of the shiny part. In the example of FIG. 2, the number of gloss pixels that form a gloss part and the number of non-gloss pixels that share a piece on the outer circumference side thereof is calculated as the outer circumference Y. Moreover, the outer periphery Y may be calculated as the number of non-shiny pixels surrounding the periphery of the shiny part with four connections. In this case, the outer circumference Y is calculated as 16. In the example of FIG. 2, a value obtained by dividing the area S2 by the outer periphery is calculated as the ratio between the outer periphery and the area.

コンピュータは、外周と面積との割合を用いて算出される、ツヤ部の円形度を当該指標値としてもよい。円形度とは、円形状への近さを示す値であり、円の円形度が最大値を示す。円形度は、例えば、次のように算出することができる。
円形度=ツヤ部の面積(S2)/外周Yから算出される面積(S1)
S1は、外周Yが円と仮定して算出される面積であり、外周Yを用いて次の式で算出可能である。
S1=πr=π(Y/2π)=Y/4π
従って、円形度は、ツヤ部の面積S2と外周Yとを用いて、以下の式で算出可能である。
円形度=S2/S1=4πS2/Y
例えば、各ツヤ部について算出された円形度の平均が指標値として使われる。
The computer may use the circularity of the gloss part calculated using the ratio between the outer periphery and the area as the index value. The circularity is a value indicating the closeness to the circular shape, and the circularity of the circle indicates the maximum value. The circularity can be calculated as follows, for example.
Circularity = area of gloss part (S2) / area calculated from outer periphery Y (S1)
S1 is an area calculated assuming that the outer periphery Y is a circle, and can be calculated by the following equation using the outer periphery Y.
S1 = πr 2 = π (Y / 2π) 2 = Y 2 / 4π
Therefore, the circularity can be calculated by the following formula using the area S2 of the gloss part and the outer periphery Y.
Circularity = S2 / S1 = 4πS2 / Y 2
For example, the average circularity calculated for each gloss part is used as the index value.

(S14)において、コンピュータは、(S13)で算出された指標値を出力する。コンピュータは、指標値を表示装置に表示させてもよいし、指標値を印刷装置に印刷させてもよい。また、コンピュータは、指標値を電子ファイルに格納し、この電子ファイルを可搬型記録媒体や他の装置に送ってもよい。指標値の出力態様は制限されない。   In (S14), the computer outputs the index value calculated in (S13). The computer may cause the index value to be displayed on the display device, or may cause the index value to be printed on the printing device. The computer may store the index value in an electronic file and send the electronic file to a portable recording medium or another device. The output mode of the index value is not limited.

コンピュータは、指標値そのものを出力してもよいし、指標値を加工して出力してもよい。例えば、コンピュータは、平均面積、面積分散、個数、及び、外周と面積との割合の中の2種又は3種の指標値を軸とし、(S13)で算出された指標値がプロットされた二次元又は三次元のグラフを出力する。
図3は、指標値を二次元グラフで出力する例を示す図である。図3では、平均面積が縦軸に、ツヤ部の個数が横軸に設定されており、算出された平均面積及び個数に対応する位置にプロットされている。
The computer may output the index value itself, or may process and output the index value. For example, the computer uses two or three types of index values in the average area, area variance, number, and the ratio between the outer circumference and the area as axes, and the index values calculated in (S13) are plotted. Output a 3D or 3D graph.
FIG. 3 is a diagram illustrating an example in which the index value is output as a two-dimensional graph. In FIG. 3, the average area is set on the vertical axis and the number of gloss parts is set on the horizontal axis, and plotted at positions corresponding to the calculated average area and number.

第一実施形態における評価方法は、(S14)で出力された指標値に基づいて、(S11)で取得された画像に写っている対象唇の美的印象を評価する。指標値に基づく実際の評価は、例えば次のように実施することができる。複数人の唇を対象に上述のような評価方法で算出された各指標値と各唇画像から得られた美的印象スコアとの関係が表される対応表(グラフを含む)を予め準備しておく。評価者又は被験者は、(S14)で出力された指標値とその対応表とを見比べることで、対象唇の美的印象スコアを推定することができる。平均面積、面積分散、個数及び外周と面積との割合のすべてが算出されている場合、評価者又は被験者は、指標値毎の美的印象スコアを推定し、各スコアから、対象唇の美的印象を評価することもできる。指標値に基づく具体的評価手法は様々存在し得る。後述の第二実施形態では他の評価手法が例示される。   The evaluation method in the first embodiment evaluates the aesthetic impression of the target lip in the image acquired in (S11) based on the index value output in (S14). The actual evaluation based on the index value can be performed as follows, for example. Prepare in advance a correspondence table (including graphs) that shows the relationship between each index value calculated by the above evaluation method and the aesthetic impression score obtained from each lip image for multiple lips deep. The evaluator or the subject can estimate the aesthetic impression score of the target lip by comparing the index value output in (S14) with the correspondence table. When all of the average area, area variance, number, and the ratio between the outer circumference and the area are calculated, the evaluator or the subject estimates the aesthetic impression score for each index value, and from each score, the aesthetic impression of the target lip is calculated. It can also be evaluated. There are various specific evaluation methods based on the index value. In the second embodiment described later, other evaluation methods are exemplified.

〔支援装置〕
図4は、第一実施形態における支援装置10のハードウェア構成例を概念的に示す図である。第一実施形態における支援装置10は、いわゆるコンピュータであり、CPU(Central Processing Unit)1、メモリ2、入出力インタフェース(I/F)3、通信ユニット4等を有する。メモリ2は、RAM(Random Access Memory)、ROM(Read Only Memory)、ハードディスク、可搬型記憶媒体等である。通信ユニット4は、他のコンピュータとの通信網を介した通信や、他の機器との信号のやりとり等を行う。通信ユニット4には、可搬型記録媒体等も接続され得る。
[Supporting equipment]
FIG. 4 is a diagram conceptually illustrating a hardware configuration example of the support apparatus 10 in the first embodiment. The support apparatus 10 in the first embodiment is a so-called computer, and includes a CPU (Central Processing Unit) 1, a memory 2, an input / output interface (I / F) 3, a communication unit 4, and the like. The memory 2 is a RAM (Random Access Memory), a ROM (Read Only Memory), a hard disk, a portable storage medium, or the like. The communication unit 4 communicates with other computers via a communication network, exchanges signals with other devices, and the like. A portable recording medium or the like can be connected to the communication unit 4.

入出力I/F3は、出力装置5、入力装置6等と接続可能である。出力装置5は、LCD(Liquid Crystal Display)やCRT(Cathode Ray Tube)ディスプレイのような表示装置、プリンタ等である。入力装置6は、キーボード、マウス等のようなユーザ操作の入力を受け付ける装置である。但し、出力装置5及び入力装置6が一体化されたタッチパネルを支援装置10は有してもよい。支援装置10は、図4に図示しないハードウェア要素を含んでもよく、支援装置10のハードウェア構成は制限されない。   The input / output I / F 3 can be connected to the output device 5, the input device 6, and the like. The output device 5 is a display device such as an LCD (Liquid Crystal Display) or a CRT (Cathode Ray Tube) display, a printer, or the like. The input device 6 is a device that receives an input of a user operation such as a keyboard and a mouse. However, the support device 10 may include a touch panel in which the output device 5 and the input device 6 are integrated. The support device 10 may include hardware elements not shown in FIG. 4, and the hardware configuration of the support device 10 is not limited.

第一実施形態における支援装置10は、唇の美的印象の評価を支援する。
図5は、第一実施形態における支援装置10の処理構成例を概念的に示す図である。第一実施形態における支援装置10は、画像取得部11、特定部12、算出部13、出力処理部14等を有する。これら各処理部は、例えば、CPU1によりメモリ2に格納されるプログラムが実行されることにより実現される。また、当該プログラムは、例えば、CD(Compact Disc)、メモリカード等のような可搬型記録媒体やネットワーク上の他のコンピュータから入出力I/F3又は通信ユニット4を介してインストールされ、メモリ3に格納されてもよい。
The support device 10 in the first embodiment supports the evaluation of the aesthetic impression of the lips.
FIG. 5 is a diagram conceptually illustrating a processing configuration example of the support device 10 in the first embodiment. The support apparatus 10 in the first embodiment includes an image acquisition unit 11, a specification unit 12, a calculation unit 13, an output processing unit 14, and the like. Each of these processing units is realized, for example, by executing a program stored in the memory 2 by the CPU 1. The program is installed from a portable recording medium such as a CD (Compact Disc) or a memory card or another computer on the network via the input / output I / F 3 or the communication unit 4 and is stored in the memory 3. It may be stored.

画像取得部11は、上述の(S11)を実行する。画像取得部11は、入出力I/F3又は通信ユニット4にカメラが接続されている場合には、そのカメラから唇画像を取得することができる。また、画像取得部11は、可搬型記録媒体、他のコンピュータ等から通信ユニット4を経由して当該唇画像を取得することもできる。画像取得部11は、表面反射光画像を外部から取得してもよいし、S−S偏光画像、S−P偏光画像のような各偏光画像を外部から取得し、これら偏光画像の差分を取ることで、表面反射光画像を算出することもできる。また、画像取得部11は、取得された画像から、唇を表す画像領域又は下唇の中央部の所定の大きさに対応する画像領域を切り出し、切り出された画像を唇画像として他の処理部に利用させてもよい。   The image acquisition unit 11 executes (S11) described above. When a camera is connected to the input / output I / F 3 or the communication unit 4, the image acquisition unit 11 can acquire a lip image from the camera. The image acquisition unit 11 can also acquire the lip image via a communication unit 4 from a portable recording medium, another computer, or the like. The image acquisition unit 11 may acquire a surface reflected light image from the outside, or acquire each polarization image such as an SS polarization image or an SP polarization image from the outside, and take a difference between these polarization images. Thus, the surface reflected light image can also be calculated. In addition, the image acquisition unit 11 cuts out an image region representing the lips or an image region corresponding to a predetermined size at the center of the lower lip from the acquired image, and uses the cut out image as a lip image as another processing unit. May be used.

特定部12は、上述の(S12)を実行する。特定部12は二値化処理を実行することもできる。
算出部13は、上述の(S13)を実行する。
The specifying unit 12 executes (S12) described above. The specifying unit 12 can also execute binarization processing.
The calculation unit 13 executes (S13) described above.

出力処理部14は、上述の(S14)を実行する。出力処理部14は、指標値を出力装置5に出力させる。また、出力処理部14は、当該指標値を可搬型記録媒体や他のコンピュータに通信ユニット4を経由して送ることもできる。出力処理部14は、平均面積、面積分散、個数、及び、外周と面積との割合の中の2種又は3種の指標値を軸とし、算出された指標値がプロットされた二次元又は三次元のグラフを出力することもできる。   The output processing unit 14 executes (S14) described above. The output processing unit 14 causes the output device 5 to output the index value. The output processing unit 14 can also send the index value to a portable recording medium or another computer via the communication unit 4. The output processing unit 14 is a two-dimensional or tertiary model in which the calculated index values are plotted with the average area, the area variance, the number, and the two or three index values in the ratio between the outer circumference and the area as axes. You can also output the original graph.

〔第一実施形態における作用及び効果〕
上述のように第一実施形態では、画像内の対象唇上のツヤ部が特定され、この特定されたツヤ部に関する唇の美的印象と相関のある指標値が算出される。当該相関により、算出される指標値は、唇の美的印象を定量化したものとなるため、その指標値を用いて、画像に写る対象唇の美的印象を客観的に評価することができる。
[Operation and Effect in First Embodiment]
As described above, in the first embodiment, the gloss part on the target lip in the image is specified, and an index value correlated with the aesthetic impression of the lip related to the specified gloss part is calculated. Due to the correlation, the calculated index value is obtained by quantifying the aesthetic impression of the lips. Therefore, the aesthetic impression of the target lip appearing in the image can be objectively evaluated using the index value.

図6は、2種類の異なる化粧料がそれぞれ塗布された一人の被験者の唇を写した2つの画像を示す図である。唇全体が写る2つの唇画像を見比べると、明らかに、左側の唇の美的印象のほうが、右側の唇よりも、みずみずしくてふっくらと柔らかそうな感じがして、良い。ここで、下唇の一部を切り出した下方の2つの画像を見比べると、左側の画像のほうが、右側よりも、ツヤが多く、シワで分断されたツヤが少ないことが分かる。逆に、右側の画像には、線で強調しているように、ツヤが少なく、シワで分断されたツヤが多いことが分かる。   FIG. 6 is a diagram showing two images showing the lips of one subject to which two different types of cosmetics are respectively applied. Comparing two lip images showing the entire lips, it is clear that the aesthetic impression of the left lip is more fresh and soft than the right lip. Here, comparing the lower two images obtained by cutting out a part of the lower lip, it can be seen that the left image has more gloss and the wrinkles separated by wrinkles than the right image. On the other hand, it can be seen that the right image has few glosses and many glosses separated by wrinkles, as emphasized by lines.

このような比較から、本発明者は、唇の美的印象を左右する要素として、画像内の唇のツヤ量及びツヤの形状に着目した。そして、本発明者は、相対的に美的印象の良い唇と相対的に美的印象の悪い唇との間のツヤ量及びツヤ形状に次のような関係を見出した。   From such a comparison, the present inventor paid attention to the amount of gloss of the lips and the shape of the gloss in the image as elements that influence the aesthetic impression of the lips. And this inventor discovered the following relations in the gloss amount and gloss shape between the lip with a comparatively good aesthetic impression, and the lip with a comparatively bad aesthetic impression.

図7は、唇の美的印象とツヤ量及びツヤ形状との関係を模式的に示す図である。図7では、上方に美的印象が相対的に良い唇が示され、下方に美的印象が相対的に悪い唇が示されている。更に、左側には、ツヤ部と非ツヤ部とを示す唇の模式図が示され、右側には、各唇の下唇の一部の表面反射光画像が示されている。右側の画像は、下唇の中央部の300×150ピクセルを切り出した画像である。左側の模式図に示されるとおり、美的印象が相対的に良い唇と悪い唇とはそれぞれ次のような特徴を持つ。
美的印象が相対的に良い唇=ツヤ部の各々の面積が大きい。ツヤ部の各々の形状が歪んでいる。ツヤ部の各々の面積が分散している。ツヤ部の数が少ない。
美的印象が相対的に悪い唇=ツヤ部の各々の面積が小さい。ツヤ部の各々の形状が円形。ツヤ部の各々の面積が同一。ツヤ部の数が多い。
FIG. 7 is a diagram schematically showing the relationship between the aesthetic impression of the lips, the gloss amount, and the gloss shape. In FIG. 7, lips with a relatively good aesthetic impression are shown above, and lips with a relatively bad aesthetic impression are shown below. Further, on the left side, a schematic diagram of the lips showing the glossy part and the non-glossy part is shown, and on the right side, a surface reflected light image of a part of the lower lip of each lip is shown. The image on the right side is an image obtained by cutting out 300 × 150 pixels at the center of the lower lip. As shown in the schematic diagram on the left side, lips with relatively good aesthetic impressions and bad lips have the following characteristics.
The area of each of the lips = glossy parts with relatively good aesthetic impression is large. Each shape of the gloss part is distorted. The areas of the gloss parts are dispersed. There are few gloss parts.
The area of each of the lips = glossy parts where the aesthetic impression is relatively bad is small. Each shape of the gloss part is circular. The area of each glossy part is the same. There are many shiny parts.

上述のように、第一実施形態では、このような美的印象の良し悪しを左右する、ツヤ部が画像内で特定され、そのツヤ部に関する特徴(平均面積、数、面積の分散、外周と面積との比(形状歪か円形か))が指標値として抽出される。従って、第一実施形態によれば、この指標値を用いて唇の美的印象を客観的に評価することができる。   As described above, in the first embodiment, the gloss portion that determines the quality of such an aesthetic impression is specified in the image, and the characteristics (average area, number, variance of area, outer periphery and area) regarding the gloss portion are specified. (Shape distortion or circular)) is extracted as an index value. Therefore, according to the first embodiment, it is possible to objectively evaluate the aesthetic impression of the lips using this index value.

[第二実施形態]
第二実施形態では、取得された画像内の対象唇について美的印象スコアが評価結果として算出される。以下、第二実施形態における、唇の美的印象を評価する評価方法及びその評価を支援する支援装置について、第一実施形態と異なる内容を中心説明する。以下の説明では、第一実施形態と同様の内容については適宜省略する。
[Second Embodiment]
In the second embodiment, an aesthetic impression score is calculated as an evaluation result for the target lips in the acquired image. Hereinafter, the evaluation method for evaluating the aesthetic impression of the lips and the support device for supporting the evaluation according to the second embodiment will be described focusing on the contents different from the first embodiment. In the following description, the same contents as those in the first embodiment are omitted as appropriate.

〔評価方法〕
図8は、第二実施形態における唇の美的印象を評価する評価方法を示すフローチャートである。第二実施形態における評価方法は、支援装置のようなコンピュータにより実行される。第二実施形態における評価方法は、工程(S81)から工程(S85)を含む。工程(S81)、工程(S82)及び工程(S83)は、図1に示される工程(S11)、工程(S12)及び工程(S13)と同様である。
〔Evaluation method〕
FIG. 8 is a flowchart showing an evaluation method for evaluating the aesthetic impression of the lips in the second embodiment. The evaluation method in the second embodiment is executed by a computer such as a support device. The evaluation method in the second embodiment includes steps (S81) to (S85). Step (S81), step (S82) and step (S83) are the same as step (S11), step (S12) and step (S13) shown in FIG.

工程(S84)において、コンピュータは、重回帰式に(S83)で算出された指標値を入力することにより、(S81)で取得された唇画像に写る対象唇の美的印象スコアを算出する。重回帰式は、2種以上の指標値を説明変数として画像内の唇の美的印象スコアを目的変数とする重回帰分析を、一人の唇に各々異なる化粧料を塗布した複数状態の唇又は複数人の唇に対応する指標値群及び美的印象スコア群に適用することで得られる。美的印象スコアは、複数人の評価者が各状態の唇が写る画像をそれぞれ見ることで、その画像から感じられる唇の美的印象の良し悪しの程度を数値化したものである。   In step (S84), the computer calculates the aesthetic impression score of the target lip in the lip image acquired in (S81) by inputting the index value calculated in (S83) to the multiple regression equation. The multiple regression equation is a multiple regression analysis using two or more index values as explanatory variables and the aesthetic impression score of the lips in the image as an objective variable. It is obtained by applying to an index value group and an aesthetic impression score group corresponding to human lips. The aesthetic impression score is obtained by quantifying the degree of quality of the aesthetic impression of the lips felt from the images when a plurality of evaluators look at the images in which the lips in each state are reflected.

美的印象スコアの精度を高めるためには、重回帰式の説明変数に用いられる指標値の種類は多いことが望ましい。例えば、平均面積、面積分散、個数、及び、外周と面積との割合の4種の指標値が説明変数として用いられる。   In order to increase the accuracy of the aesthetic impression score, it is desirable that there are many types of index values used for the explanatory variable of the multiple regression equation. For example, four types of index values such as average area, area variance, number, and the ratio between the outer circumference and the area are used as explanatory variables.

また、重回帰分析の対象とされる当該複数状態の唇には、(S81)で取得される唇画像内の対象唇を持つ被験者の唇が用いられることが望ましい。また、重回帰分析の対象とされる当該複数人の唇には、被験者の唇と形状的特徴(唇の形状や唇のシワやキメの付き方等)が近似する唇が用いられることが望ましい。当該コンピュータは、このような重回帰分析を実行し、その結果得られる重回帰式を予め保持してもよいし、他のコンピュータから取得してもよい。   Moreover, it is desirable to use the lips of the subject having the target lips in the lip image acquired in (S81) as the lips in the plurality of states to be subjected to the multiple regression analysis. Further, it is desirable that the lips of the plurality of lips to be subjected to the multiple regression analysis are lips whose shape characteristics (such as the shape of the lips, wrinkles of the lips, and texture) are approximate to the lips of the subject. . The computer may execute such a multiple regression analysis and may hold a multiple regression equation obtained as a result in advance or may be obtained from another computer.

(S85)において、コンピュータは、(S84)で算出された美的印象スコアを出力する。コンピュータは、美的印象スコアを表示装置に表示させてもよいし、そのスコアを印刷装置に印刷させてもよい。また、コンピュータは、美的印象スコアを電子ファイルに格納し、この電子ファイルを可搬型記録媒体や他の装置に送ってもよい。美的印象スコアの出力態様は制限されない。   In (S85), the computer outputs the aesthetic impression score calculated in (S84). The computer may cause the display device to display the aesthetic impression score, or may cause the printing device to print the score. Further, the computer may store the aesthetic impression score in an electronic file, and send the electronic file to a portable recording medium or another device. The output mode of the aesthetic impression score is not limited.

コンピュータは、美的印象スコアのみを出力してもよいし、美的印象スコアに加えて(S83)で算出された指標値を出力してもよい。指標値の出力態様については第一実施形態で述べたとおりである。   The computer may output only the aesthetic impression score, or may output the index value calculated in (S83) in addition to the aesthetic impression score. The output mode of the index value is as described in the first embodiment.

〔支援装置〕
図9は、第二実施形態における支援装置10の処理構成例を概念的に示す図である。第二実施形態における支援装置10は、第一実施形態の構成に加えて、スコア算出部16を更に有する。スコア算出部16は、他の処理部と同様に実現される。
[Supporting equipment]
FIG. 9 is a diagram conceptually illustrating a processing configuration example of the support device 10 in the second embodiment. The support apparatus 10 in the second embodiment further includes a score calculation unit 16 in addition to the configuration of the first embodiment. The score calculation unit 16 is realized in the same manner as other processing units.

スコア算出部16は、上述の(S84)を実行する。スコア算出部16は、上述のような重回帰分析を実行し、その結果得られる重回帰式を予め保持してもよいし、他のコンピュータから取得してもよい。   The score calculation unit 16 executes the above (S84). The score calculation unit 16 may execute the multiple regression analysis as described above, and may hold a multiple regression equation obtained as a result thereof in advance or may be obtained from another computer.

出力処理部14は、上述の(S85)を実行する。出力処理部14は、美的印象スコアを出力装置5に出力させる。また、出力処理部14は、美的印象スコアを可搬型記録媒体や他のコンピュータに通信ユニット4を経由して送ることもできる。出力処理部14は、美的印象スコアと共に、第一実施形態と同様に指標値を出力してもよい。   The output processing unit 14 executes (S85) described above. The output processing unit 14 causes the output device 5 to output an aesthetic impression score. The output processing unit 14 can also send the aesthetic impression score to a portable recording medium or another computer via the communication unit 4. The output processing unit 14 may output the index value together with the aesthetic impression score as in the first embodiment.

〔第二実施形態における作用及び効果〕
上述のように第二実施形態では、ツヤ部に関して算出された複数種の指標値が重回帰式に入力され、結果として、取得された画像内の対象唇の美的印象スコアが算出される。重回帰式は、唇の美的印象と相関のある複数種の指標値を説明変数として、画像内の唇に対する官能評価により得られた美的印象スコアを目的変数とする回帰式である。従って、第二実施形態によれば、対象唇の美的印象の客観的な定量値を美的印象スコアとして取得することができる。
[Operation and Effect in Second Embodiment]
As described above, in the second embodiment, a plurality of types of index values calculated regarding the gloss part are input to the multiple regression equation, and as a result, the aesthetic impression score of the target lip in the acquired image is calculated. The multiple regression equation is a regression equation in which a plurality of types of index values correlated with the aesthetic impression of the lips are used as explanatory variables, and the aesthetic impression score obtained by sensory evaluation for the lips in the image is used as the objective variable. Therefore, according to the second embodiment, an objective quantitative value of the aesthetic impression of the target lip can be acquired as the aesthetic impression score.

[補足]
上述したとおり、取得される画像内の対象唇は、被験者の素唇であってもよいし、化粧料が塗布された状態の唇であってもよい。口唇化粧料を唇に塗布し、その唇を撮像した画像に対して上述のような評価方法を実行して、唇の美的印象を確認することで、口唇化粧料の塗り方やその口唇化粧料と被験者との相性等を評価することができる。
[Supplement]
As described above, the target lips in the acquired image may be the lips of the subject or the lips in a state where cosmetics are applied. Applying lip cosmetics to the lips and executing the evaluation method as described above on the image of the lips to check the aesthetic impression of the lips, how to apply the lip cosmetics and the lip cosmetics And the like can be evaluated.

以下に実施例を挙げ、上述の実施形態を更に詳細に説明する。上述の各実施形態の内容は、以下の内容に限定されない。   Examples will be given below to describe the above-described embodiment in more detail. The contents of the above-described embodiments are not limited to the following contents.

美的印象と唇画像から抽出されるツヤ量及びツヤ形状との関係が次のようにして確認された。まず、一人の被験者の唇に対して一人の者が18種類の化粧料を塗布することで、一人の唇に関する複数状態の唇が写る複数のS−S偏光画像及び複数の表面反射光画像が準備された。18種類の化粧料には、9種類のスティックタイプの化粧料と9種類の液状タイプの化粧料が用いられた。5人の専門評価者に対して当該複数のS−S偏光画像がそれぞれ提示され、各専門評価者により各S−S偏光画像に写る各唇の美的印象が0点以上10点以下でそれぞれ採点された。各専門評価者は、唇の美に関する専門家であり、具体的な美的印象としてみずみずしくふっくらとした印象の感得程度を基準に採点した。唇から得られるみずみずしくふっくらとした印象は、近年、「立体感」と表記される場合も多いため、以降、専門評価者により採点されたスコアを立体感スコアと表記する。「立体感」は「美的印象」の一具体例である。   The relationship between the aesthetic impression and the gloss amount and gloss shape extracted from the lip image was confirmed as follows. First, when one person applies 18 kinds of cosmetics to one subject's lips, a plurality of SS polarization images and a plurality of surface reflected light images showing a plurality of states of lips relating to one lip are obtained. Prepared. For the 18 types of cosmetics, 9 types of stick type cosmetics and 9 types of liquid type cosmetics were used. A plurality of SS polarized images are respectively presented to five expert evaluators, and each expert evaluator gives a score of 0 points to 10 points for the aesthetic impression of each lip reflected in each SS polarized image. It was done. Each expert evaluator is an expert on the beauty of the lips and scored on the basis of the degree of perception of a fresh and plump impression as a concrete aesthetic impression. The fresh and plump impression obtained from the lips is often described as “three-dimensional effect” in recent years. Therefore, the score scored by the expert evaluator is hereinafter referred to as a three-dimensional score. “Stereoscopic” is a specific example of “aesthetic impression”.

複数の表面反射光画像は図10及び図11に示される条件により撮像された。
図10は、被写体を側方から見た場合の撮影環境を概念的に示す図である。
図11は、被写体側からカメラ方向を見た場合の撮影環境を概念的に示す図である。
被写体の正面から0.7メートル(m)の距離に丸型光源LS及びカメラCMが設置され、S偏光成分を透過させる偏光フィルタPF1のみを用いてS−S偏光画像が撮像され、偏光フィルタPF1及びP偏光成分を透過させる偏光フィルタPF2を用いてS−P偏光画像が撮像される。S−S偏光画像とS−P偏光画像との差分を取ることで、表面反射光画像が取得される。更に、丸型光源LSの下方には減灯するための黒ラシャ紙RPが設置された。このように、カメラCMと略同一に置いた丸型光源LSにより、撮影方向と同方向から、被写体を照らすことにより、唇の美的印象(立体感)に差を生じさせ易い唇画像を撮影することができる。
The plurality of surface reflected light images were taken under the conditions shown in FIGS.
FIG. 10 is a diagram conceptually illustrating a shooting environment when a subject is viewed from the side.
FIG. 11 is a diagram conceptually showing a shooting environment when the camera direction is viewed from the subject side.
A round light source LS and a camera CM are installed at a distance of 0.7 meters (m) from the front of the subject, and an S-S polarized image is picked up using only the polarization filter PF1 that transmits the S-polarized component, and the polarization filter PF1. And an S—P polarization image is picked up using the polarization filter PF2 that transmits the P polarization component. The surface reflected light image is acquired by taking the difference between the SS polarization image and the SP polarization image. Further, a black lasha paper RP for light reduction was installed below the round light source LS. In this way, a lip image that easily causes a difference in the aesthetic impression (stereoscopic effect) of the lips is shot by illuminating the subject from the same direction as the shooting direction by the round light source LS placed substantially the same as the camera CM. be able to.

具体的な条件については以下のとおりである。
カメラCM:ニコン社製 D300S
光源:サークライン(丸型蛍光灯)1灯(黒ラシャ紙RPで1/3減灯)
レンズ:マイクロニッコール AiAf60mm f2.8D
撮影倍率:1対10
距離:0.7m
シャッタースピード:1/4(S−S偏光画像撮影時)、1/1.3(S−P偏光画像撮影時)
ホワイトバランス(WB):PRE d−1
出力:JPEG形式
感度:ISO200
部屋の照明:消灯
Specific conditions are as follows.
Camera CM: Nikon D300S
Light source: 1 circle (circular fluorescent lamp) (1/3 reduction with black lasha paper RP)
Lens: Micro Nikkor AiAf60mm f2.8D
Magnification ratio: 1 to 10
Distance: 0.7m
Shutter speed: 1/4 (when photographing an S-polarized image), 1 / 1.3 (when photographing an SP-polarized image)
White balance (WB): PRE d-1
Output: JPEG format Sensitivity: ISO200
Room lighting: Off

図12は、実施例における唇の美的印象の評価方法を示す図である。本実施例では、上述のように取得された各表面反射光画像から下唇の中央部分(以降、唇画像と表記する)が切り出され、この唇画像に対して閾値「40」で二値化処理が行われ、各二値化画像から、ツヤ部に関する平均面積、面積分散、個数及び円形度、並びに、ツヤ部の総面積が算出された。ツヤ部の総面積は、唇画像中の白色画素の総数である。更に、本実施例では、各唇画像の輝度の平均化を行い、各平均化画像から輝度がそれぞれ取得された。輝度は、測定機器(色差計等)でL値として測定された。他の指標値の算出手法は、第一実施形態で述べたとおりである。   FIG. 12 is a diagram illustrating a method for evaluating the aesthetic impression of the lips in the example. In the present embodiment, the center part of the lower lip (hereinafter referred to as a lip image) is cut out from each surface reflected light image acquired as described above, and binarized with a threshold value “40” for this lip image. Processing was performed, and from each binarized image, the average area, area variance, number and circularity of the gloss part, and the total area of the gloss part were calculated. The total area of the gloss portion is the total number of white pixels in the lip image. Further, in this embodiment, the luminance of each lip image is averaged, and the luminance is acquired from each averaged image. The luminance was measured as an L value with a measuring device (such as a color difference meter). The other index value calculation methods are as described in the first embodiment.

図13は、立体感スコアと画像から抽出された指標値との関係を示すグラフである。(A)は輝度と立体感スコアとの関係、(B)はツヤ部の総面積と立体感スコアとの関係、(C)はツヤ部の平均面積と立体感スコアとの関係、(D)はツヤ部の円形度と立体感スコアとの関係、(E)はツヤ部の個数と立体感スコアとの関係、(F)はツヤ部の面積分散と立体感スコアとの関係をそれぞれ示す。
図14は、立体感スコア及び画像から抽出された指標値の相関係数を示す表である。
図13及び図14で示される円形度は、ツヤ部の円形度の平均値である。
FIG. 13 is a graph showing the relationship between the stereoscopic effect score and the index value extracted from the image. (A) is the relationship between the brightness and the stereoscopic score, (B) is the relationship between the total area of the gloss part and the stereoscopic score, (C) is the relationship between the average area of the gloss part and the stereoscopic score, (D). Is the relationship between the circularity of the gloss portion and the stereoscopic score, (E) is the relationship between the number of gloss portions and the stereoscopic score, and (F) is the relationship between the area dispersion of the gloss portion and the stereoscopic score.
FIG. 14 is a table showing the correlation coefficient between the stereoscopic effect score and the index value extracted from the image.
The circularity shown in FIGS. 13 and 14 is an average value of the circularity of the gloss part.

図13及び図14に示されるとおり、ツヤ部に関する平均面積、個数、円形度及び面積分散の各々と立体感スコアとの間の相関が高く、ツヤ部の総面積及び輝度は立体感スコアと相関が低いことが確認された。更に、平均面積及び個数が、面積分散及び円形度よりも相関が高いことが確認された。また、平均面積及び面積分散と立体感スコアとの間には正の相関があり、個数及び円形度と立体感スコアとの間には負の相関があることが確認された。本実施例によれば、ツヤ部に関する平均面積、個数、円形度及び面積分散により、唇の美的印象(立体感)を適切に評価可能なことが立証された。   As shown in FIG. 13 and FIG. 14, there is a high correlation between the average area, the number, the circularity, and the area variance of the gloss part and the stereoscopic score, and the total area and luminance of the gloss part correlate with the stereoscopic score. Was confirmed to be low. Further, it was confirmed that the average area and number were more correlated than the area dispersion and the circularity. It was also confirmed that there was a positive correlation between the average area and area variance and the stereoscopic score, and a negative correlation between the number and circularity and the stereoscopic score. According to the present Example, it was proved that the aesthetic impression (three-dimensional effect) of the lips can be appropriately evaluated by the average area, number, circularity, and area dispersion regarding the gloss part.

図15は、個数及び平均面積の2軸を持つ二次元グラフと立体感との関係例を示す図である。図15では、x軸にツヤ部の個数が割り当てられ、y軸にツヤ部の平均面積が割り当てられている。この二次元グラフにプロットされた点には、立体感スコアが添付されている。図15によれば、この二次元グラフの左上の領域において立体感スコアが高く、その二次元グラフの右下の領域において立体感スコアが低いことが示される。対象唇に関し算出された個数及び平均面積をこの二次元グラフ上にプロットすることで、その対象唇の立体感スコアを高精度に推測することができる。   FIG. 15 is a diagram illustrating an example of a relationship between a two-dimensional graph having two axes of number and average area and a stereoscopic effect. In FIG. 15, the number of gloss parts is assigned to the x-axis, and the average area of the gloss parts is assigned to the y-axis. A stereoscopic effect score is attached to the points plotted on the two-dimensional graph. FIG. 15 shows that the stereoscopic effect score is high in the upper left area of the two-dimensional graph and the stereoscopic effect score is low in the lower right area of the two-dimensional graph. By plotting the number and average area calculated for the target lip on this two-dimensional graph, the stereoscopic effect score of the target lip can be estimated with high accuracy.

図16は、平均面積及び面積分散の2軸を持つ二次元グラフと立体感との関係例を示す図である。図16では、x軸にツヤ部の平均面積が割り当てられ、y軸にツヤ部の面積分散が割り当てられている。この二次元グラフにプロットされた点にも、立体感スコアが添付されている。図16によれば、この二次元グラフの右上の領域において立体感スコアが高く、その二次元グラフの左下の領域において立体感スコアが低いことが示される。対象唇に関し算出された平均面積及び面積分散をこの二次元グラフ上にプロットすることで、その対象唇の立体感スコアを高精度に推測することができる。   FIG. 16 is a diagram illustrating an example of a relationship between a two-dimensional graph having two axes of average area and area dispersion and a stereoscopic effect. In FIG. 16, the average area of the gloss part is assigned to the x-axis, and the area variance of the gloss part is assigned to the y-axis. A stereoscopic effect score is also attached to the points plotted on the two-dimensional graph. According to FIG. 16, the stereoscopic effect score is high in the upper right area of the two-dimensional graph, and the stereoscopic effect score is low in the lower left area of the two-dimensional graph. By plotting the average area and area variance calculated for the target lip on this two-dimensional graph, the three-dimensional score of the target lip can be estimated with high accuracy.

このように、立体感スコアと相関がある2種の指標値を軸とする二次元グラフに対象唇に関し算出された指標値をプロットすることで、対象唇の美的印象(立体感)を高精度に評価することができる。   In this way, by plotting the index value calculated for the target lip on a two-dimensional graph with two types of index values correlated with the stereoscopic score as an axis, the aesthetic impression (three-dimensional effect) of the target lip is highly accurate. Can be evaluated.

図17は、個数及び平均面積の2軸を持つ二次元グラフで表される立体感の経時変化の例を示す図である。図17は、図15と同様のx軸及びy軸を持つ。この二次元グラフの各領域と立体感スコアとの関係は、図15と同様である。即ち、左上の領域において立体感スコアが高く、その二次元グラフの右下の領域において立体感スコアが低い。そこで、図17に示されるように、この二次元グラフに、異なる時間に当該対象唇を撮像した各画像から算出された各指標値をそれぞれプロットすることで、対象唇の立体感スコアの経時変化を推測することができる。図17には二人の唇に関し算出された指標値の経時変化が示されている。図17のグラフによれば、円形でプロットされている唇は、方形でプロットされている唇に比べて、立体感の経時劣化が少ないことが推測される。   FIG. 17 is a diagram illustrating an example of a change in stereoscopic effect with time represented by a two-dimensional graph having two axes, the number and the average area. FIG. 17 has the same x-axis and y-axis as FIG. The relationship between each region of the two-dimensional graph and the stereoscopic effect score is the same as in FIG. That is, the stereoscopic effect score is high in the upper left region, and the stereoscopic effect score is low in the lower right region of the two-dimensional graph. Therefore, as shown in FIG. 17, each index value calculated from each image obtained by imaging the target lip at different times is plotted on the two-dimensional graph, so that the stereoscopic effect score of the target lip changes over time. Can be guessed. FIG. 17 shows changes over time in the index values calculated for the lips of two people. According to the graph of FIG. 17, it is estimated that the lips plotted in a circle are less deteriorated with time in the stereoscopic effect than the lips plotted in a square.

なお、上述の説明で用いた複数のフローチャートでは、複数の工程(処理)が順番に記載されているが、各実施形態で実行される工程の実行順序は、その記載の順番に制限されない。各実施形態では、図示される工程の順番を内容的に支障のない範囲で変更することができる。また、各工程には、人によって実施される内容が含まれていてもよい。例えば、(S11)及び(S81)で取得される画像は、コンピュータに対する人の操作で選択されたファイルからコンピュータにより読み取られてもよい。また、取得された画像から下唇の中央部分を切り取る場合には、その中央部分の位置は、コンピュータに対する人の操作で指定されてもよい。また、上述の各実施形態は、内容が相反しない範囲で組み合わせることができる。   In addition, in the some flowchart used by the above-mentioned description, although several process (process) is described in order, the execution order of the process performed by each embodiment is not restrict | limited to the order of the description. In each embodiment, the order of the illustrated steps can be changed within a range that does not hinder the contents. Each process may include contents executed by a person. For example, the images acquired in (S11) and (S81) may be read by a computer from a file selected by a human operation on the computer. Further, when the center part of the lower lip is cut out from the acquired image, the position of the center part may be designated by a human operation on the computer. Moreover, each above-mentioned embodiment can be combined in the range in which the content does not conflict.

上記の各実施形態及び各実施例の一部又は全部は、次のようにも特定され得る。但し、上述の各実施形態及び各実施例が以下の記載に制限されるものではない。   Part or all of the above embodiments and examples can be specified as follows. However, each above-mentioned embodiment and each Example are not restrict | limited to the following description.

<1>コンピュータにより実行される唇の美的印象の評価方法において、
対象唇が写る画像を取得し、
画像内の前記対象唇上のツヤ部を特定し、
前記特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する、
ことを含む評価方法。
<1> In the evaluation method of the aesthetic impression of the lips executed by a computer,
Get an image of the target lips,
Identify the glossy part on the target lip in the image,
Calculating an index value correlated with the aesthetic impression of the lips with respect to the plurality of specified gloss portions;
Evaluation method including that.

<2>前記指標値の算出は、前記特定された複数のツヤ部に関する、平均面積、面積分散、個数、及び、外周と面積との割合の少なくとも1つを前記指標値として算出する、
<1>に記載の評価方法。
<3>平均面積、面積分散、個数、及び、外周と面積との割合の中の2種又は3種の指標値を軸とし、前記対象唇に関し算出された指標値がプロットされた二次元又は三次元のグラフを出力する、
ことを更に含む<2>に記載の評価方法。
<4>前記グラフに、異なる時間に前記対象唇を撮像した各画像から算出された各指標値をそれぞれプロットする、
ことを更に含む<2>又は<3>に記載の評価方法。
<5>ツヤ部に関する2種以上の指標値を説明変数として画像内の唇の美的印象スコアを目的変数とする重回帰分析を、一人の唇に各々異なる化粧料を塗布した複数状態の唇又は複数人の唇に対応する指標値群及び美的印象スコア群に適用することで得られた重回帰式を用いて、前記対象唇の美的印象スコアを算出する、
ことを更に含む<1>から<4>のいずれか1つに記載の評価方法。
<6>前記画像を二値化する、
ことを更に含み、
前記非ツヤ部は黒色画素群であり、前記ツヤ部は白色画素群である、
<1>から<5>のいずれか1つに記載の評価方法。
<7>前記取得される画像は、下唇の中央部の所定の大きさを表示する画像である、
<1>から<6>のいずれか1つに記載の評価方法。
<8>前記取得される画像は、前記対象唇の表面反射光画像である、
<1>から<7>のいずれか1つに記載の評価方法。
<9>唇の美的印象の評価を支援する支援装置において、
対象唇が写る画像を取得する画像取得手段と、
画像内の前記対象唇上のツヤ部を特定する特定手段と、
前記特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する算出手段と、
前記算出された指標値の出力処理を行う出力処理手段と、
を備える支援装置。
<10>前記算出手段は、前記特定された複数のツヤ部に関する、平均面積、面積分散、個数、及び、外周と面積との割合の少なくとも1つを前記指標値として算出する、
<9>に記載の支援装置。
<11>前記出力処理手段は、平均面積、面積分散、個数、及び、外周と面積との割合の中の2種又は3種の指標値を軸とし、前記対象唇に関し算出された指標値がプロットされた二次元又は三次元のグラフを出力する、
<10>に記載の支援装置。
<12>前記出力処理手段は、前記グラフに、異なる時間に前記対象唇を撮像した各画像から算出された各指標値をそれぞれプロットする、
<10>又は<11>に記載の支援装置。
<13>ツヤ部に関する2種以上の指標値を説明変数として画像内の唇の美的印象スコアを目的変数とする重回帰分析を、一人の唇に各々異なる化粧料を塗布した複数状態の唇又は複数人の唇に対応する指標値群及び美的印象スコア群に適用することで得られた重回帰式を用いて、前記対象唇の美的印象スコアを算出するスコア算出手段、
を更に備える<9>から<12>のいずれか1つに記載の支援装置。
<14>前記特定手段は、前記画像を二値化し、二値化された画像内の前記対象唇上のツヤ部を特定し、
前記非ツヤ部は黒色画素群であり、前記ツヤ部は白色画素群である、
<9>から<13>のいずれか1つに記載の支援装置。
<15>前記画像取得手段は、下唇の中央部の所定の大きさを表示する画像を取得する、
<9>から<14>のいずれか1つに記載の支援装置。
<16>前記画像取得手段は、前記対象唇の表面反射光画像を取得する、
<9>から<15>のいずれか1つに記載の支援装置。
<17><1>から<8>のいずれか1つに記載の評価方法をコンピュータに実行させるプログラム。
<18>口唇化粧料を唇に塗布し、<1>から<8>のいずれか1つに記載の評価方法で美的印象を確認する方法。
<2> The calculation of the index value is performed by calculating, as the index value, at least one of an average area, an area variance, a number, and a ratio between an outer periphery and an area regarding the plurality of specified gloss parts.
The evaluation method as described in <1>.
<3> An average area, area variance, number, and two-dimensional or three-dimensional index values plotted with respect to the target lip, with two or three index values in the ratio between the outer circumference and the area as axes. Output a three-dimensional graph,
The evaluation method according to <2>, further comprising:
<4> Each index value calculated from each image obtained by imaging the target lips at different times is plotted on the graph.
The evaluation method according to <2> or <3>, further comprising:
<5> A multiple regression analysis using two or more kinds of index values related to the gloss part as explanatory variables and an aesthetic impression score of the lips in the image as a target variable, Using the multiple regression equation obtained by applying to the index value group and aesthetic impression score group corresponding to the lips of a plurality of people, to calculate the aesthetic impression score of the target lips,
The evaluation method according to any one of <1> to <4>, further including:
<6> Binarize the image.
Further including
The non-shiny part is a black pixel group, and the shiny part is a white pixel group.
The evaluation method according to any one of <1> to <5>.
<7> The acquired image is an image that displays a predetermined size of the center of the lower lip.
The evaluation method according to any one of <1> to <6>.
<8> The acquired image is a surface reflected light image of the target lips.
The evaluation method according to any one of <1> to <7>.
<9> In a support device that supports the evaluation of the aesthetic impression of the lips,
Image acquisition means for acquiring an image showing the target lips;
Identifying means for identifying a glossy part on the target lip in the image;
Calculating means for calculating an index value correlated with the aesthetic impression of the lips for the specified plurality of gloss parts;
Output processing means for performing output processing of the calculated index value;
A support device comprising:
<10> The calculation unit calculates, as the index value, at least one of an average area, an area variance, a number, and a ratio between an outer periphery and an area regarding the plurality of specified gloss parts.
The support device according to <9>.
<11> The output processing means includes an average area, an area variance, a number, and two or three index values in the ratio between the outer periphery and the area, and the index value calculated for the target lip is Output a plotted 2D or 3D graph,
<10> The support device according to item 10.
<12> The output processing means plots each index value calculated from each image obtained by imaging the target lips at different times on the graph.
<10> or the support apparatus as described in <11>.
<13> A multiple regression analysis in which two or more kinds of index values relating to the gloss part are used as explanatory variables and an aesthetic impression score of the lips in the image is used as an objective variable. Score calculating means for calculating an aesthetic impression score of the target lip using a multiple regression equation obtained by applying to an index value group corresponding to a plurality of lips and an aesthetic impression score group;
The support device according to any one of <9> to <12>, further including:
<14> The specifying unit binarizes the image, specifies a gloss part on the target lip in the binarized image,
The non-shiny part is a black pixel group, and the shiny part is a white pixel group.
The support device according to any one of <9> to <13>.
<15> The image acquisition means acquires an image displaying a predetermined size of the center part of the lower lip.
The support device according to any one of <9> to <14>.
<16> The image acquisition means acquires a surface reflected light image of the target lips.
The support device according to any one of <9> to <15>.
<17> A program that causes a computer to execute the evaluation method according to any one of <1> to <8>.
<18> A method of applying a lip cosmetic to the lips and confirming an aesthetic impression by the evaluation method according to any one of <1> to <8>.

1 CPU
2 メモリ
3 入出力I/F
4 通信ユニット
5 出力装置
6 入力装置
10 支援装置
11 画像取得部
12 特定部
13 算出部
14 出力処理部
16 スコア算出部
1 CPU
2 Memory 3 Input / output I / F
4 Communication Unit 5 Output Device 6 Input Device 10 Support Device 11 Image Acquisition Unit 12 Identification Unit 13 Calculation Unit 14 Output Processing Unit 16 Score Calculation Unit

Claims (11)

コンピュータにより実行される唇の美的印象の評価方法において、
対象唇が写る画像を取得し、
画像内の前記対象唇上のツヤ部を特定し、
前記特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する、
ことを含む評価方法。
In the method for evaluating the aesthetic impression of lips executed by a computer,
Get an image of the target lips,
Identify the glossy part on the target lip in the image,
Calculating an index value correlated with the aesthetic impression of the lips with respect to the plurality of specified gloss portions;
Evaluation method including that.
前記指標値の算出は、前記特定された複数のツヤ部に関する、平均面積、面積分散、個数、及び、外周と面積との割合の少なくとも1つを前記指標値として算出する、
請求項1に記載の評価方法。
The calculation of the index value is to calculate at least one of an average area, an area variance, a number, and a ratio between the outer periphery and the area as the index value for the plurality of specified gloss parts.
The evaluation method according to claim 1.
平均面積、面積分散、個数、及び、外周と面積との割合の中の2種又は3種の指標値を軸とし、前記対象唇に関し算出された指標値がプロットされた二次元又は三次元のグラフを出力する、
ことを更に含む請求項2に記載の評価方法。
The average area, area variance, number, and 2 or 3 index values in the ratio between the outer circumference and the area are used as axes, and the index values calculated for the target lips are plotted in two or three dimensions. Output a graph,
The evaluation method according to claim 2, further comprising:
前記グラフに、異なる時間に前記対象唇を撮像した各画像から算出された各指標値をそれぞれプロットする、
ことを更に含む請求項2又は3に記載の評価方法。
In the graph, each index value calculated from each image obtained by imaging the target lips at different times is plotted, respectively.
The evaluation method according to claim 2 or 3, further comprising:
ツヤ部に関する2種以上の指標値を説明変数として画像内の唇の美的印象スコアを目的変数とする重回帰分析を、一人の唇に各々異なる化粧料を塗布した複数状態の唇又は複数人の唇に対応する指標値群及び美的印象スコア群に適用することで得られた重回帰式を用いて、前記対象唇の美的印象スコアを算出する、
ことを更に含む請求項1から4のいずれか1項に記載の評価方法。
Multiple regression analysis using two or more kinds of index values related to the gloss as an explanatory variable and the aesthetic impression score of the lips in the image as an objective variable. Using the multiple regression equation obtained by applying the index value group corresponding to the lips and the aesthetic impression score group, the aesthetic impression score of the target lips is calculated.
The evaluation method according to any one of claims 1 to 4, further comprising:
前記画像を二値化する、
ことを更に含み、
前記非ツヤ部は黒色画素群であり、前記ツヤ部は白色画素群である、
請求項1から5のいずれか1項に記載の評価方法。
Binarize the image;
Further including
The non-shiny part is a black pixel group, and the shiny part is a white pixel group.
The evaluation method according to any one of claims 1 to 5.
前記取得される画像は、下唇の中央部の所定の大きさを表示する画像である、
請求項1から6のいずれか1項に記載の評価方法。
The acquired image is an image displaying a predetermined size of the center part of the lower lip.
The evaluation method according to any one of claims 1 to 6.
前記取得される画像は、前記対象唇の表面反射光画像である、
請求項1から7のいずれか1項に記載の評価方法。
The acquired image is a surface reflected light image of the target lip.
The evaluation method according to any one of claims 1 to 7.
唇の美的印象の評価を支援する支援装置において、
対象唇が写る画像を取得する画像取得手段と、
画像内の前記対象唇上のツヤ部を特定する特定手段と、
前記特定された複数のツヤ部に関する、唇の美的印象と相関のある指標値を算出する算出手段と、
前記算出された指標値の出力処理を行う出力処理手段と、
を備える支援装置。
In a support device that supports the evaluation of the aesthetic impression of the lips,
Image acquisition means for acquiring an image showing the target lips;
Identifying means for identifying a glossy part on the target lip in the image;
Calculating means for calculating an index value correlated with the aesthetic impression of the lips for the specified plurality of gloss parts;
Output processing means for performing output processing of the calculated index value;
A support device comprising:
請求項1から8のいずれか1項に記載の評価方法をコンピュータに実行させるプログラム。   The program which makes a computer perform the evaluation method of any one of Claim 1 to 8. 口唇化粧料を唇に塗布し、請求項1から8のいずれか1項に記載の評価方法で美的印象を確認する方法。   A method for applying a lip cosmetic to the lips and confirming an aesthetic impression by the evaluation method according to claim 1.
JP2014178082A 2014-09-02 2014-09-02 Evaluation method for aesthetic impression of lips and support device for supporting the evaluation Active JP6359389B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014178082A JP6359389B2 (en) 2014-09-02 2014-09-02 Evaluation method for aesthetic impression of lips and support device for supporting the evaluation

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014178082A JP6359389B2 (en) 2014-09-02 2014-09-02 Evaluation method for aesthetic impression of lips and support device for supporting the evaluation

Publications (2)

Publication Number Publication Date
JP2016051444A true JP2016051444A (en) 2016-04-11
JP6359389B2 JP6359389B2 (en) 2018-07-18

Family

ID=55658866

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014178082A Active JP6359389B2 (en) 2014-09-02 2014-09-02 Evaluation method for aesthetic impression of lips and support device for supporting the evaluation

Country Status (1)

Country Link
JP (1) JP6359389B2 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07231883A (en) * 1994-02-23 1995-09-05 Kanebo Ltd Skin surface analyzing system, and skin surface analyzing method
JP2000011145A (en) * 1998-06-18 2000-01-14 Shiseido Co Ltd Lipstick color converting system
JP2004030007A (en) * 2002-06-24 2004-01-29 Digital Fashion Ltd Makeup simulation apparatus, makeup simulation method, makeup simulation program and recording medium with program recorded thereon
JP2004166801A (en) * 2002-11-18 2004-06-17 Kose Corp Evaluation method for luster of skin
JP2004187879A (en) * 2002-12-10 2004-07-08 Kose Corp Method of evaluating skin condition
JP2007252891A (en) * 2006-02-23 2007-10-04 Masahiro Nakagawa Estimation method of evaluation value by visual recognition of beauty of skin
WO2008135907A1 (en) * 2007-05-03 2008-11-13 L'oreal A method of evaluating lip type and an evaluation system for implementing such a method
JP2010159230A (en) * 2009-01-09 2010-07-22 Nippon Menaade Keshohin Kk Judging method of vividness of lip, powder composition and lip cosmetic
WO2011162050A1 (en) * 2010-06-21 2011-12-29 ポーラ化成工業株式会社 Age estimation method and gender determination method

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07231883A (en) * 1994-02-23 1995-09-05 Kanebo Ltd Skin surface analyzing system, and skin surface analyzing method
JP2000011145A (en) * 1998-06-18 2000-01-14 Shiseido Co Ltd Lipstick color converting system
JP2004030007A (en) * 2002-06-24 2004-01-29 Digital Fashion Ltd Makeup simulation apparatus, makeup simulation method, makeup simulation program and recording medium with program recorded thereon
JP2004166801A (en) * 2002-11-18 2004-06-17 Kose Corp Evaluation method for luster of skin
JP2004187879A (en) * 2002-12-10 2004-07-08 Kose Corp Method of evaluating skin condition
JP2007252891A (en) * 2006-02-23 2007-10-04 Masahiro Nakagawa Estimation method of evaluation value by visual recognition of beauty of skin
WO2008135907A1 (en) * 2007-05-03 2008-11-13 L'oreal A method of evaluating lip type and an evaluation system for implementing such a method
JP2010159230A (en) * 2009-01-09 2010-07-22 Nippon Menaade Keshohin Kk Judging method of vividness of lip, powder composition and lip cosmetic
WO2011162050A1 (en) * 2010-06-21 2011-12-29 ポーラ化成工業株式会社 Age estimation method and gender determination method

Also Published As

Publication number Publication date
JP6359389B2 (en) 2018-07-18

Similar Documents

Publication Publication Date Title
Lavoué et al. Quality assessment in computer graphics
Villa et al. Quantitative analysis of the morphological changes of the pubic symphyseal face and the auricular surface and implications for age at death estimation
JP6473401B2 (en) Skin gloss evaluation apparatus, gloss evaluation method, and gloss evaluation program
Torkhani et al. A curvature-tensor-based perceptual quality metric for 3D triangular meshes
JP6756524B2 (en) How to analyze the effects of cosmetic procedures
JP6814799B2 (en) Tear condition evaluation method and its device
JP2007130329A (en) Appearance inspection method by image
JP2013212177A (en) Image analysis method, image analyzer, and image analysis program
JP2011130808A (en) Information processing device, information processing method, and program
JP6008698B2 (en) Face image analyzing apparatus and face image analyzing method
JP2018514808A (en) Method and apparatus associated therewith for generating a contrast image with reduced reflection
JP2013078520A (en) Skin image analysis apparatus and skin image analysis method
CN109741285A (en) A kind of construction method and system of underwater picture data set
JP6527765B2 (en) Wrinkle state analyzer and method
JP7171549B2 (en) Image analysis evaluation method, computer program, image analysis evaluation device
Guo et al. Evaluating the local visibility of geometric artifacts
JP2006061170A (en) Discrimination method for skin
Ciocca et al. How to assess image quality within a workflow chain: an overview
Patuano Measuring naturalness and complexity using the fractal dimensions of landscape photographs
JP2017192767A (en) Image analysis method, image analysis device, and image analysis program
JP6359389B2 (en) Evaluation method for aesthetic impression of lips and support device for supporting the evaluation
JP2007252892A (en) Estimation method of evaluation value by visual recognition of three-dimensional shape of skin surface
JP2011196814A (en) Device and method for evaluating glossiness feeling
JP6730051B2 (en) Skin condition evaluation method
JP4954038B2 (en) Evaluation method of makeup scraps

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170607

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180514

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180605

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180620

R151 Written notification of patent or utility model registration

Ref document number: 6359389

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250