WO2011105731A2 - System and method for measuring skin color - Google Patents

System and method for measuring skin color Download PDF

Info

Publication number
WO2011105731A2
WO2011105731A2 PCT/KR2011/001154 KR2011001154W WO2011105731A2 WO 2011105731 A2 WO2011105731 A2 WO 2011105731A2 KR 2011001154 W KR2011001154 W KR 2011001154W WO 2011105731 A2 WO2011105731 A2 WO 2011105731A2
Authority
WO
WIPO (PCT)
Prior art keywords
color
vector
skin
yellow
components
Prior art date
Application number
PCT/KR2011/001154
Other languages
French (fr)
Korean (ko)
Other versions
WO2011105731A3 (en
Inventor
한지연
남개원
김은주
김한곤
김명준
Original Assignee
(주)아모레퍼시픽
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)아모레퍼시픽 filed Critical (주)아모레퍼시픽
Priority to JP2012554900A priority Critical patent/JP5827249B2/en
Publication of WO2011105731A2 publication Critical patent/WO2011105731A2/en
Publication of WO2011105731A3 publication Critical patent/WO2011105731A3/en

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/1032Determining colour for diagnostic purposes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis

Definitions

  • Embodiments relate to skin color measurement systems and methods.
  • Conventional methods used to measure the texture or color of the skin include a method of extracting the distribution of melanin and hemoglobin present in the skin from an image photographed by the digital camera.
  • a method for extracting the distribution of melanin and hemoglobin from an image was published in the Journal of Optical Society of America in 1999 and published in "Independent component analysis of skin color image. And the method described in a paper by Tsumura et al.
  • the skin can be measured from the yellow image representing the basic skin tone and black and red due to the pigment of the skin from the image of the skin, yellow and black skin and before and after the use of the cosmetic product It is possible to provide a system and method for measuring skin color that can be easily observed by displaying the change in red phase as an image.
  • Skin color measurement system converts the color of the image taken by the skin to the color data on the logarithmic coordinate system having a coordinate axis that is the primary color Modles; First measurement modules for arranging a predetermined illumination vector and a plurality of pigment vectors in a polygonal pyramid shape surrounding the color data and measuring a yellow color using a vertex position of the polygonal pyramid; And a low) 2 measurement module for separating the color data into components in the illumination vector direction and components in the respective dye vector directions to measure a plurality of pigment distributions.
  • a method of measuring skin color may include converting a color of an image photographing skin into color data on a logarithmic coordinate system having a coordinate axis that corresponds to a primary color. Placing the data into a polygonal horn shape that encloses the data; Measuring a yellow group using a vertex position of the polygonal pyramid; And dividing the color data into a component in the illumination vector direction and a component in each of the dye vector directions to measure a plurality of pigment distributions.
  • the yellow, black and / or red color of the skin can be measured by separating it into components in the vector direction.
  • the measurement result can be output as an image, so that the change in skin tone before and after using a specific cosmetic product can be clearly displayed.
  • FIG. 1 is a block diagram of a skin color measurement system according to an exemplary embodiment.
  • FIG. 2 is a graph showing color data in which an image of a skin is projected onto an RGB log coordinate system.
  • 3A to 3C are graphs showing color data obtained by using images of skins of different subjects, respectively.
  • 4A to 4C are schematic diagrams illustrating output forms of red, black and yellow groups in a skin color measurement system according to an exemplary embodiment.
  • FIG. 5 is a flowchart illustrating a method for measuring skin color according to an embodiment.
  • FIG. 1 is a block diagram of a skin color measurement system according to an exemplary embodiment.
  • the skin color measurement system includes a transform module 20 and a low U measurement module. 30 and second measurement modules 40.
  • the skin color measurement system may further include imaging modalities 10 and / or output mods 50.
  • a unit, a module, or a system may refer to hardware, a combination of hardware and software, or software for implementing a specific function.
  • a part, module or system may refer to a running process, a processor, an object, an executable, a thread of execution, or a program. It may refer to both a specific application and a device for executing it.
  • the imaging modalities 10 are portions for photographing the subject's skin as an image.
  • the imaging module 10 may include a mobile device or a digital camera provided with a charge coupled device (CCD), and may generate an image by photographing a skin of a target subject.
  • the imaging module 10 may be configured as part of a skin color measurement system.
  • the skin color measurement system may not include the imaging modalities 10 and may receive only the color image by receiving the skin image of the target subject photographed using a separate device.
  • the conversion module 20 forms an RGB log formed by a coordinate axis that subtracts the color of each pixel of the photographed skin image to each primary color of red (R), green (G), and blue (B). This part generates color data by projecting onto a coordinate system.
  • the skin color may be understood that light representing the primary color of the skin is darkened due to pigments such as melanin or hemoglobin.
  • c skin> c base is the base color of the skin
  • the amount of melanin is m
  • the amount of hemoglobin is h
  • the color c skin is expressed by the following equation modelling
  • Equation 1 and o h is the absorption coefficient of melanin and hemoglobin, respectively
  • k light is a scalar value indicating the effect of the light contribution to the color expressed from the skin. If there is no pigment in the skin, the color developed on the skin is c base . k iight .
  • pigments such as melanin and / or hemoglobin are present on the skin, the light emitted from the skin is exponentially exponential from the primary color of the skin as the amount of pigment increases. Decreases.
  • -log (c skin ) -log (cbase)-log (kiight) + o m m + o h h
  • the light expressed from the skin is -log ( Cbase ) reflected on the skin primary color, -log (k light ) reflected on the lighting effect, and 0ra m reduced to light absorption by melanin. And it can be expressed as a linear sum of o h h to the light absorption by hemoglobin.
  • Equations 1 and 2 described above may be independently applied to each of red 00, green (G), and blue (B).
  • each term of Equation 2 may be represented by a three-dimensional vector having components that are respectively defined by red (R), green (G), and blue (B). In the present specification, this is referred to as an RGB vector.
  • -log (c base ) refers to a primary color vector.
  • the color expressed from the skin may be expressed as a vector sum of a primary color vector, an illumination vector, and a plurality of pigment vectors (eg, melanin vector and hemoglobin vector).
  • the color expressed in each pixel of the skin image is converted into an RGB vector, and modeling based on Equations 1 and 2 described above from the RGB vector is performed.
  • the primary color of each skin and the distribution of each pigment can be found.
  • the conversion module 20 may convert the color of each pixel of the skin image into the color data by projecting the color of the pixel on the RGB log coordinate system.
  • 2 is a graph showing the color data projected by the transform model 20 in the RGB log coordinate system.
  • the transform module 20 is formed by three coordinate axes that respectively define the color of each pixel of the skin image in three primary colors of red (R), green (G), and blue (B). Can be projected onto a logarithmic coordinate system.
  • the color of the i-th pixel in the skin image can be expressed as a three-dimensional vector of [C iR , C iG , C iB ], and C iR , C iG , and C iB are the red color of the i-th pixel, respectively. And green and blue components.
  • the logarithm of each color value separated by RGB may be taken and converted into [log (C iR ), log (C iG ), log (C iB )], which can be represented on the above-described RGB log coordinate system.
  • log (C iR ), log (C iG ), log (C iB ) can be represented on the above-described RGB log coordinate system.
  • Each point in the color data shown in FIG. 2 corresponds to the color of one pixel of the skin image projected in the RGB log coordinate system.
  • the points on the RGB log coordinate system are shown on a gray scale, but this does not represent the actual color of the pixel that stands for each point. It will be readily understood by those skilled in the art that the pixel subtracted for each point has a color which is a combination of the red, green and blue components subtracted to the coordinates on the RGB log coordinate system of the point.
  • the first measurement modules 30 may calculate the yellow color of the skin by using the color data generated by the conversion modules 20.
  • the first measurement modules 30 may include a basic color calculator 310 and a yellow color calculator 320.
  • the primary color calculator 310 may calculate the primary color vector of the skin from the color data.
  • the primary color calculator 310 may arrange the illumination vector and the plurality of dye vectors having a predetermined direction in a polygonal pyramid shape that surrounds the color data projected by the conversion module 20 on the RGB log coordinate system.
  • the illumination vector refers to -log (k llght ) in Equation 2 above. Assuming that white illumination is used that includes the RGB components uniformly, the direction of the illumination vector can be expressed as (1, 1, 1). However, this is merely an example, and the illumination vector may be configured to have a different direction in consideration of the characteristics of the light source and / or the white balance characteristic of the camera used for imaging the skin.
  • the plurality of pigment vectors may be, for example, melanin vectors and hemoglobin vectors, and refer to ⁇ ⁇ and o h in Equation 2, respectively.
  • the direction of the melanin vector and hemoglobin vector can be determined in advance using color data of a number of subjects. Methods of extracting melanin vector and hemoglobin vector from any image are well known to those skilled in the art, wherein melanin vector and hemoglobin to be used in embodiments of the present invention based on melanin vector and hemoglobin vector extracted from images of multiple subjects The direction of the vector can be determined.
  • the orientation of the melanin vector and hemoglobin vector to be used in embodiments of the present invention may be determined based on the average of each of the melanin vector and hemoglobin vector extracted from skin images of multiple subjects.
  • the melanin vector and the hemoglobin vector extracted from the skin images of a plurality of subjects when placed in the form of triangular horns together with the above-described illumination vector, may be surrounded by specific melanin that may surround the color data of the plurality of subjects. It may also be selected in the direction of the vector and the hemoglobin vector.
  • the polygonal pyramid means a space surrounded by planes formed by two vectors of these vectors when the illumination vector and the plurality of pigment vectors are disposed at the same starting point.
  • the polygonal pyramid is the plane formed by the illumination vector and the melanin vector, the plane formed by the illumination vector and the hemoglobin vector, and the melanin vector and the hemo In globin vector, it refers to a triangular pyramid-shaped space surrounded by three planes of the plane formed.
  • enclosing color data by a polygonal pyramid does not necessarily mean that all pixels of the color data are located inside the polygonal pyramid, and a certain percentage of all pixels of the color data is included. May refer to a configuration such that they are located inside the pyramid.
  • the polygonal pyramid may be arranged such that about 90% or more of the pixels are located inside the polygonal pyramid, which is illustrative and not limited to the above numerical value.
  • the primary color calculator 310 may arrange an illumination vector, a melanin vector, and a haemoglobin vector whose direction is predetermined in the form of a triangular pyramid surrounding color data of the target subject. Referring to FIG. 2, the orientations of the illuminated back melanin vector and the hemoglobin vector are shown as _log (k light ), o m and o h , respectively. Can yield l0 g (Cbase) - Next, the primary color calculation unit 310 of the primary color vector of the basic color of the target subject skin using the position of the vertex of the triangular pyramid. At this time, -log (Cbase) may be represented as a position relative to the origin of the coordinate system or a specific reference point.
  • the size and / or direction of the base color vector -log (c base ) may vary depending on the person.
  • 3A to 3C are graphs showing color data obtained from images of skins of different testers, respectively.
  • -log (c base ) is a skin primary color vector of a corresponding subject, and the size and / or direction of the primary color vector is different for each subject.
  • the primary color of the skin of each person is a phenomenon in which the overall skin tone is different, which is referred to herein as a yellow group.
  • the yellow color calculator 320 may measure the yellow color of the skin using the primary color vector calculated from the color data by the primary color calculator 310. First, the yellow color calculator 320 calculates a base color vector -log (c base ) in the above-described lighting vector direction and excludes the same. It can be separated into the merging component. That is, the primary color vector separated into components in each direction may be expressed as Equation 3 below.
  • Equation 3 ⁇ and ⁇ are scalar values, and ⁇ is a vector value. (1, 1, 1) is a vector representing an illumination vector and v stbase is a vector representing a standard skin color obtained from a plurality of subjects.
  • the absolute value of stbase + ⁇ can be defined as the yellow color of the skin. For example, assuming that the subject's skin color vector is (3, 4, 5), the remaining component is (0, 1) except for (3, 3, 3), which is the component of the illumination vector direction. , 2) is the yellow color of the subject's skin.
  • the remaining components except for ⁇ (1, 1, 1) are separated into the components in the direction of the predetermined standard skin color vector from the -log (c base ), which is the skin primary color vector can do.
  • a standard skin color vector can be defined as a vector that is treated with the lightest of those based on skin primary color vectors measured from multiple subjects.
  • the standard skin color vector is represented by v stbase in Equation 3 above.
  • the absolute value of Y, except for 3v stbase is defined as a yellow group.
  • the skin color vector is (0, 1, 1) for the subject whose skin component is the (0, 1, 2) except for the component in the direction of the illumination vector, as described above
  • the absolute value of (0, 0, 1) which is the result of subtracting (0, 1, 1) from (0, 1, 2), becomes the yellow color of the subject's skin.
  • the yellow group defined as described in the above embodiments, represents the degree of the color expressed from the subject's skin deviating from the illumination vector, and expresses the overall skin tone except for the effect of the skin pigmentation of the subject as a single value. Therefore, by measuring the yellow color of the skin before and after the use of a particular cosmetic product, there is an advantage that can easily track the change in skin tone due to the use of the product.
  • the second measurement modules 40 are projected by the transform modules 20 into the RGB log coordinate system. From the color data, the components of the melanin vector direction and the hemoglobin vector direction can be calculated. The direction of the melanin vector and hemoglobin vector can be previously determined using the color data of multiple subjects as described above. The components in the melanin vector direction and the components in the hemoglobin vector direction calculated as described above are respectively compared to the melanin distribution and the hemoglobin distribution of the skin of the subject. In addition, melanin distribution is expressed in the black phase of the skin, hemoglobin distribution is expressed in the red phase of the skin. That is, as the amount of melanin or hemoglobin in the skin increases, the black or red phase increases, respectively.
  • the skin color measurement system includes a melanin distribution (ie black) and a hemoglobin distribution (ie, yellow) produced by the first measurement modules 30 and the second measurement module 40.
  • Output module 50 for displaying red color may display the numerical values of the yellow, black and red phases of the skin at specific locations on the coordinate system that are subtracted from these values.
  • the output modules 50 may display the skin image actually photographed at the specific position described above.
  • 4A to 4C are schematic diagrams illustrating an output form by an output module in a skin color measurement system according to an exemplary embodiment.
  • the output modules may display numerical values measured from the skin of the target subject on a coordinate system formed by coordinate axes corresponding to yellow, black and red phases, respectively.
  • the coordinate axes of the yellow, black and red periods may be configured to show a range of 03 ⁇ 4 to 100% of the first measurement result when a plurality of measurements are performed.
  • each coordinate axis of the yellow, black and red phases may be configured to show, for example, a 90% to 110% range or other different range.
  • the output modules include a first image 520 corresponding to the yellow, black and red color values of the subject measured at a first time point (eg, before use of cosmetics), which is the first time of photographing, and a second time point (eg, a schedule). After using the period cosmetics), a second image 530 may be displayed which is measured by the yellow, black and red color values of the subject.
  • a first time point eg, before use of cosmetics
  • a second time point eg, a schedule
  • first and second images 520 and 530 are shown in FIG. 4A, but not only the positions where the first and second images 520 and 530 are located, but also the yellow and black portions of the positions in each other position in the coordinate system. And images corresponding to the red color value may be displayed. In addition, these other images may be generated by adjusting yellow, black and / or red in the photographed image of the actual subject.
  • First image 520 is located on plane 500 determined by the corresponding red phase value
  • the second image 530 is located on another plane 510 which is determined by the corresponding redness value.
  • the redness level of the subject was decreased at the second time point.
  • the second plane 510 moved closer to the phosphorus direction than the first plane 500. .
  • FIG. 4B is a schematic diagram illustrating only the first plane 500 in FIG. 4A
  • FIG. 4C is a schematic diagram illustrating only the second plane 510 in FIG. 4A. 4B and 4C
  • yellow and black values may correspond to 100%, respectively, so that the first image 520 may be displayed at the center on the first plane 500.
  • the second image 530 may be displayed at a point shifted from the center of the crab plane 510 to the lower left on the crab 2 plane 510 since the yellow and black values are decreased compared to the crab 1 image 520, respectively.
  • the red, black, and yellow phases of the subject subject measured at the second time point are 80%.
  • the first image 520 which is the image of the target subject photographed at the first time point
  • the second image which is the image of the target subject photographed at the second time point
  • the image 530 may be output at the position (80, 70, 50) on the coordinate system.
  • the red, black and yellow color of the skin by using a three-dimensional image array (array), it is possible to visually display the skin condition clearly.
  • the efficacy of the corresponding product is changed by changing the position from the crab 1 image 520 to the second image 530. You can see it visually.
  • the efficacy of the product can be represented by the length of the vector that connects the pixels from the particular pixel of the first image 520 to the pixels of the second image 530.
  • the redness, yellowness, and blackness may be expressed in% to indicate the level of decrease in the numerical value, indicating the efficacy of the product.
  • the output forms of the yellow, black and red phases shown in FIGS. 4A-4C are merely exemplary, and the output modalities are the black color of the skin measured in the yellow and the second measured hairs measured in the first measurement hairs, and The red flag may also be output using other suitable display forms.
  • FIG. 5 is a flowchart illustrating a method of measuring skin color according to an embodiment.
  • a skin of a subject may be photographed as an image (S1).
  • color data may be generated by projecting the color of each pixel of the photographed skin image to the RGB log coordinate system (S2).
  • RGB log coordinate systems are red (R), green (G), and blue (B) It may be a coordinate system formed by the coordinate axis of each of the three primary colors of, wherein each coordinate axis may be displayed in a log scale (log scale).
  • Each pixel of the image is represented in the form of an RGB vector in the RGB log coordinate system.
  • the illumination vector and the plurality of dye vectors whose directions are determined in advance can be arranged in a polygonal pyramid (for example, triangular pyramid) shape surrounding the projected color data (S3).
  • the lighting vector is a vector for the effects of the lighting, and may be expressed as an RGB vector of (1, 1, 1) in the case of white lighting.
  • the pigment vector can be a melanin vector and a hemoglobin vector. The direction of the melanin vector and hemoglobin vector can be determined in advance using color data obtained from skin images of a number of subjects.
  • the primary color vector may be calculated using the vertex positions of the triangular pyramid consisting of the lighting vector, the melanin vector and the hemoglobin vector (S4).
  • the primary color vector represents the skin's inherent overall skin tone, with the exception of the optical hop effect by the pigment in the subject's skin.
  • a yellow group may be calculated using the primary color vector (S5).
  • the yellow color can be obtained by dividing the primary color vector into the component of the illumination vector direction and the components of the other directions except this.
  • the yellow group may be defined as the size of the remaining components other than the components in the direction of the illumination vector in the primary color vector.
  • the yellow group may be defined as the size of only the remaining components except the component of the predetermined standard skin color vector direction among the remaining components except the illumination vector direction in the primary color vector.
  • the melanin vector component and the hemoglobin vector component can be calculated from the color data described above (S6).
  • the components of the melanin vector and the components of the hemoglobin vector are subjected to the melanin distribution and the hemoglobin distribution of the subject subjects, respectively.
  • the melanin distribution of the skin is expressed in the black phase of the skin
  • hemoglobin distribution of the skin may be expressed in the red phase of the skin.
  • the red, black and yellow groups calculated by the above process can be output (S7).
  • the skin image photographed at the position of the red, black and yellow phases of the target subject may be output.
  • the change in the skin tone due to the use of the product can be visually confirmed by changing the position of the image before and after use.
  • Skin color measurement method according to an embodiment in the present specification has been described with reference to the flow chart shown in the drawings.
  • Embodiments relate to skin color measurement systems and methods.

Abstract

A skin color measurement system comprises: a transformation module which transforms the color of an image obtained by photographing a skin into color data in a log coordinate system having coordinate axes corresponding to primary colors; a first measurement module which disposes a preset illumination vector and a plurality of pigment vectors in a polygonal cone shape surrounding the color data, and measures a yellowish tone using the position of the vertex of the polygonal cone; and a second measurement module which separates the color data into the directional component of the illumination vector and the directional component of each of the pigment vectors, and measures a plurality of pigment distributions. With the skin measurement system, it is possible to measure a yellowish tone, a blackish tone and/or a reddish tone of a skin, and to output a result of the measurement as an image, and thus it is possible to simply and visibly express a change in a skin tone before and after a specific makeup product is used.

Description

【명세서】  【Specification】
【발명의 명칭】  [Name of invention]
피부 색상 측정 시스템 및 방법  Skin color measurement system and method
【기술분야】  Technical Field
실시예들은 피부 색상 측정 시스템 및 방법에 관한 것이다.  Embodiments relate to skin color measurement systems and methods.
【배경기술】  Background Art
피부의 질감 (texture) 또는 색상을 측정해거나 이를 컴퓨터상의 이미지로 재 현하는 기술은 다양한 이미징 시스템 (imaging system)에 있어서 중요한 기능으로 여겨져 왔다. 특히 최근에는 전하결합소자 (Charge Coupled Device; CCD)가 구비된 이동 장치, 미용 진단 시스템 및 원격 의료 등의 발달과 더불어, 피부의 질감 또는 색상을 정확하게 측정하는 기술은 화상 통신, 피부에 적합한 화장품와 선택 또는 의료 진단 등에 대한 활용도가 증가하고 있다.  Techniques for measuring the texture or color of skin or for representing it as a computer image have been considered important functions in various imaging systems. In particular, with the development of mobile devices equipped with charge coupled devices (CCDs), beauty diagnosis systems, and telemedicine, technology for accurately measuring the texture or color of skin has been selected for cosmetics and cosmetics suitable for visual communication and skin. Increasingly, the utilization of medical diagnosis is increasing.
피부의 질감 또는 색상을 측정하기 위해 사용되는 종래의 방법으로는, 디지 털 카메라에 의해 피부를 촬영한 이미지로부터 피부에 존재하는 멜라닌 (melanin) 및 헤모글로빈 (hemoglobin)의 분포를 추출해내는 방법이 있다. 예를 들어, 이미지 로부터 멜라닌 및 헤모글로빈의 분포를 추출하기 위한 방법은 1999년 미국 광학회 저널 (Journal of Optical Society of America)에 게재되어 "피부 컬러 이미지의 독 립 성분 분석 (Independent component analysis of skin color image)"의 제목을 갖 는 Tsumura 등의 논문에 기재된 방법 등이 있다.  Conventional methods used to measure the texture or color of the skin include a method of extracting the distribution of melanin and hemoglobin present in the skin from an image photographed by the digital camera. For example, a method for extracting the distribution of melanin and hemoglobin from an image was published in the Journal of Optical Society of America in 1999 and published in "Independent component analysis of skin color image. And the method described in a paper by Tsumura et al.
그러나 이러한 종래의 방법을 이용하는 경우에는 색소의 양과 별개로 사람에 따라 상이한 피부의 기본색을 측정하는 것이 불가능하며, 따라서 미용 진단 등에 활용할 경우 화장품 제품 등의 효과가 정확하게 반영되기 어려운 문제점이 있다. 【발명의 상세한 설명】  However, in the case of using such a conventional method, it is impossible to measure the primary colors of different skins according to a person separately from the amount of pigment, and thus, when used in cosmetic diagnosis, it is difficult to accurately reflect the effects of cosmetic products. [Detailed Description of the Invention]
【기술적 과제】  [Technical problem]
본 발명의 일 측면에 따르면, 피부를 촬영한 이미지로부터 기본 피부톤을 나 타내는 노란기 및 피부의 색소로 인한 검은기와 붉은기 등을 측정할 수 있으며, 화 장품 제품 사용 전후의 피부의 노란기, 검은기 및 /또는 붉은기의 변화를 이미지로 표시하여 용이하게 관찰할 수 있는 피부 색상 측정 시스템 및 방법을 제공할 수 있 다.  According to an aspect of the present invention, the skin can be measured from the yellow image representing the basic skin tone and black and red due to the pigment of the skin from the image of the skin, yellow and black skin and before and after the use of the cosmetic product It is possible to provide a system and method for measuring skin color that can be easily observed by displaying the change in red phase as an image.
[기술적 해결방법】  [Technical Solution]
일 실시예에 따른 피부 색상 측정 시스템은, 피부를 촬영한 이미지의 색상 을, 원색에 대웅되는 좌표축을 갖는 로그 좌표계상의 색상 데이터로 변환하는 변환 모들; 미리 설정된 조명 백터 및 복수 개의 색소 백터를 상기 색상 데이터를 에워 싸는 다각뿔 형상으로 배치하고, 상기 다각뿔의 꼭지점 위치를 이용하여 노란기를 측정하는 제 1 측정 모들; 및 상기 색상 데이터를 상기 조명 백터 방향의 성분 및 상기 각 색소 백터 방향의 성분으로 분리하여 복수 개의 색소 분포를 측정하는 저 )2 측정 모듈을 포함할 수 있디 ·. Skin color measurement system according to an embodiment, converts the color of the image taken by the skin to the color data on the logarithmic coordinate system having a coordinate axis that is the primary color Modles; First measurement modules for arranging a predetermined illumination vector and a plurality of pigment vectors in a polygonal pyramid shape surrounding the color data and measuring a yellow color using a vertex position of the polygonal pyramid; And a low) 2 measurement module for separating the color data into components in the illumination vector direction and components in the respective dye vector directions to measure a plurality of pigment distributions.
일 실시예에 따른 피부 색상 측정 방법은, 피부를 촬영한 이미지의 색상을, 원색에 대웅되는 좌표축을 갖는 로그 좌표계상의 색상 데이터로 변환하는 단계: 미 리 설정된 조명 백터 및 복수 개의 색소 백터를 상기 색상 데이터를 에워싸는 다각 뿔 형상으로 배치하는 단계; 상기 다각뿔의 꼭지점 위치를 이용하여 노란기를 측정 하는 단계; 및 상기 색상 데이터를 상기 조명 백터 방향의 성분 및 상기 각 색소 백터 방향의 성분으로 분리하여 복수 개의 색소 분포를 측정하는 단계를 포함할 수 있다.  According to an embodiment, a method of measuring skin color may include converting a color of an image photographing skin into color data on a logarithmic coordinate system having a coordinate axis that corresponds to a primary color. Placing the data into a polygonal horn shape that encloses the data; Measuring a yellow group using a vertex position of the polygonal pyramid; And dividing the color data into a component in the illumination vector direction and a component in each of the dye vector directions to measure a plurality of pigment distributions.
【유리한 효과】  Advantageous Effects
본 발명의 일 측면에 따른'피부 색상 측정 시스템 및 방법을 이용하면, 피부 를 촬영한 이미지에서 각 픽셀의 색상을 RGB 로그 (log) 좌표계 '로 투영하여 생성된 색상 데이터를, 조명 백터 및 각 색소 (pigment) 백터 방향의 성분으로 분리하여 피 부의 노란기, 검은기 및 /또는 붉은기 등을 측정할 수 있다. 또한, 측정 결과를 이 미지로 출력할 수 있에 특정 화장품 제품 사용 전후의 피부톤의 변화를 알기쉽게 가시적으로 표시할 수 있다 . When using the ' skin color measurement system and method according to an aspect of the present invention, the color vector generated by projecting the color of each pixel in the image of the skin to the RGB log coordinate system, the illumination vector and each pigment (pigment) The yellow, black and / or red color of the skin can be measured by separating it into components in the vector direction. In addition, the measurement result can be output as an image, so that the change in skin tone before and after using a specific cosmetic product can be clearly displayed.
【도면의 간단한 설명】  [Brief Description of Drawings]
도 1은 일 실시예에 따른 피부 색상 측정 시스템의 블록도이다.  1 is a block diagram of a skin color measurement system according to an exemplary embodiment.
도 2는 피부를 촬영한 이미지를 RGB 로그 (log) 좌표계로 투영한 색상 데이터 를 나타내는 그래프이다.  2 is a graph showing color data in which an image of a skin is projected onto an RGB log coordinate system.
도 3a 내지 3c는 각각 상이한 피험자의 피부를 촬영한 이미지를 이용하여 얻 은 색상 데이터를 나타내는 그래프이다.  3A to 3C are graphs showing color data obtained by using images of skins of different subjects, respectively.
도 4a 내지 4c는 일 실시예에 따른 피부 색상 측정 시스템에서 붉은기, 검은 기 및 노란기의 출력 형태를 나타내는 개략도이다.  4A to 4C are schematic diagrams illustrating output forms of red, black and yellow groups in a skin color measurement system according to an exemplary embodiment.
도 5는 일 실시예에 따른 피부 색상 측정 방법의 순서도이다.  5 is a flowchart illustrating a method for measuring skin color according to an embodiment.
【발명의 실시를 위한 형태】  [Form for implementation of invention]
이하에서, 도면을 참조하여 본 발명의 실시예들에 대하여 상세히 살펴본다. 도 1은 일 실시예에 따른 피부 색상 측정 시스템의 블록도이다.  Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. 1 is a block diagram of a skin color measurement system according to an exemplary embodiment.
도 1을 참조하면, 피부 색상 측정 시스템은 변환 모들 (20), 저 U 측정 모들 (30) 및 제 2 측정 모들 (40)을 포함할 수 있다. 다른 실시예들에서 피부 색상 측정 시스템은 촬영 모들 (10) 및 /또는 출력 모들 (50)을 더 포함할 수도 있다. 본 명세서 에서 부 (unit), 모듈 (module) 또는 시스템 (system) 등은 특정 기능을 구현하기 위 한 하드웨어, 하드웨어와 소프트웨어의 조합, 또는 소프트웨어를 지칭할 수 있다. 예컨대, 부, 모듈 또는 시스템은 실행중인 프로세스 (process), 프로세서 (processor), 객체 (object), 실행파일 (executable) , 실행 스레드 (thread of execution) 또는 프로그램 (program) 등을 지칭할 수 있으며, 특정 애플리케이션 (application) 및 이를 실행하기 위한 장치의 양쪽 모두를 지칭할 수도 있다. Referring to FIG. 1, the skin color measurement system includes a transform module 20 and a low U measurement module. 30 and second measurement modules 40. In other embodiments the skin color measurement system may further include imaging modalities 10 and / or output mods 50. In the present specification, a unit, a module, or a system may refer to hardware, a combination of hardware and software, or software for implementing a specific function. For example, a part, module or system may refer to a running process, a processor, an object, an executable, a thread of execution, or a program. It may refer to both a specific application and a device for executing it.
촬영 모들 (10)은 피험자의 피부를 이미지로 촬영하기 위한 부분이다. 예를 들어, 촬영 모들 (10)은 전하결합소자 (Charge Coupled Device; CCD)가 구비된 이동 장치 또는 디지털 카메라 둥을 포함할 수 있으며 대상 피험자의 피부를 촬영하여 이미지를 생성할 수 있다. 일 실시예에서 촬영 모듈 (10)은 피부 색상 측정 시스템 의 일부분으로 구성될 수 있다. 그러나 다른 실시예에서는, 피부 색상 측정 시스템 에 촬영 모들 (10)을 포함시키지 않고, 별도의 장치를 사용하여 촬영된 대상 피험자 의 피부 이미지를 전달받아 색상 측정만을 수행할 수도 있다.  The imaging modalities 10 are portions for photographing the subject's skin as an image. For example, the imaging module 10 may include a mobile device or a digital camera provided with a charge coupled device (CCD), and may generate an image by photographing a skin of a target subject. In one embodiment, the imaging module 10 may be configured as part of a skin color measurement system. However, in another embodiment, the skin color measurement system may not include the imaging modalities 10 and may receive only the color image by receiving the skin image of the target subject photographed using a separate device.
변환 모들 (20)은 촬영된 피부 이미지의 각 픽셀 (pixel)의 색상을, 적색 (R), 녹색 (G) 및 청색 (B)의 각 원색에 대웅되는 좌표축에 의하여 형성되는 RGB 로그 (log) 좌표계에 투영하여 색상 데이터를 생성하는 부분이다. 피부 색상은 피부의 기본색을 나타내는 빛이 멜라닌 (melanin) 또는 헤모글로빈 (hemoglobin) 등의 색소 로 인해 어두워져서 발현되는 것으로 이해될 수 있다. 피부로부터 발현되는 색상을 cskin> 피부의 기본색을 cbase, 피부의 멜라닌의 양을 m, 피부의 헤모글로빈의 양을 h 라 할 경우, 피부로부터 발현되는 색상 cskin은 하기 수학식 1에 의하여 모델링The conversion module 20 forms an RGB log formed by a coordinate axis that subtracts the color of each pixel of the photographed skin image to each primary color of red (R), green (G), and blue (B). This part generates color data by projecting onto a coordinate system. The skin color may be understood that light representing the primary color of the skin is darkened due to pigments such as melanin or hemoglobin. When the color expressed from the skin is c skin> c base is the base color of the skin, the amount of melanin is m, and the amount of hemoglobin is h, the color c skin is expressed by the following equation modelling
(modeling)될 수 있다. can be modeled.
【수학식 11  [Equation 11
Cskin = Cbase · k|ight · exp(— omm) · exp(-(jhh) Cskin = Cbase · k | igh t exp (— o m m) · exp (-(j h h)
상기 수학식 1에서 및 oh는 각각 멜라닌 및 헤모글로빈의 흡수 계수이 며, klight 는 피부로부터 발현되는 색상에 조명이 기여하는 효과를 나타내는 스칼라 (scalar) 값이다. 피부에 색소가 전혀 없을 경우 피부에서 발현되는 색상은 cbase. kiight이다. 피부에 멜라닌 및 /또는 헤모글로빈 등의 색소가 있을 경우, 피부로부터 발현되는 빛은 색소의 양이 증가함에 따라 피부의 기본색으로부터 지수함수적으로 감소한다. In Equation 1 and o h is the absorption coefficient of melanin and hemoglobin, respectively, k light is a scalar value indicating the effect of the light contribution to the color expressed from the skin. If there is no pigment in the skin, the color developed on the skin is c base . k iight . When pigments such as melanin and / or hemoglobin are present on the skin, the light emitted from the skin is exponentially exponential from the primary color of the skin as the amount of pigment increases. Decreases.
한편, 전술한 수학식 1의 양변에 로그를 취하면 하기 수학식 2와 같은 선형 식으로 변환될 수 있다.  On the other hand, taking the logarithm to both sides of the above equation 1 can be converted to a linear equation such as the following equation (2).
[수학식 2】  [Equation 2]
- log(cskin) = - log(cbase) - log(kiight) + omm + ohh -log (c skin ) =-log (cbase)-log (kiight) + o m m + o h h
상기 수학식 2와 같이, 피부로부터 발현되는 빛은 피부 기본색에 대웅되는 -log(Cbase)와, 조명 효과에 대웅되는 -log(klight)와, 멜라닌에 의한 광흡수에 대웅되 는 0ram및 헤모글로빈에 의한 광흡수에 대웅되는 ohh의 선형합으로 표현될 수 있 다. As shown in Equation 2, the light expressed from the skin is -log ( Cbase ) reflected on the skin primary color, -log (k light ) reflected on the lighting effect, and 0ra m reduced to light absorption by melanin. And it can be expressed as a linear sum of o h h to the light absorption by hemoglobin.
전술한 수학식 1 및 2는 적색 00, 녹색 (G) 및 청색 (B) 각각에 대해 독립적으 로 적용될 수 있다. 즉, 수학식 2의 각 항은 각각 적색 (R), 녹색 (G) 및 청색 (B)에 대웅되는 성분을 갖는 3차원 백터로 표현될 수 있다. 본 명세서에서는 이를 RGB 백 터로 지칭한다. 또한 본 명세서에서 -log(cbase)는 기본색 백터로 지칭하며,Equations 1 and 2 described above may be independently applied to each of red 00, green (G), and blue (B). In other words, each term of Equation 2 may be represented by a three-dimensional vector having components that are respectively defined by red (R), green (G), and blue (B). In the present specification, this is referred to as an RGB vector. In addition, in the present specification, -log (c base ) refers to a primary color vector.
-log(klight)는 조명 백터로 지칭하고, om는 멜라닌 백터로 지칭하며, Oh는 헤모글 로빈 백터로 지칭한다. 즉, 피부로부터 발현되는 색상은 기본색 백터, 조명 백터 및 복수 개의 색소 백터 (예컨대, 멜라닌 백터 및 헤모글로빈 백터)의 백터합으로 표현될 수 있다. -log (k light ) refers to the lighting vector, o m refers to the melanin vector, and Oh refers to the hemoglobin vector. That is, the color expressed from the skin may be expressed as a vector sum of a primary color vector, an illumination vector, and a plurality of pigment vectors (eg, melanin vector and hemoglobin vector).
본 명세서에서 기술되는 실시예들에 따른 피부 색상 측정 시스템 및 방법에 서는, 피부 이미지의 각 픽셀에 발현되는 색상을 RGB 백터로 변환하고, RGB 백터로 부터 전술한 수학식 1 및 2에 기초한 모델링을 이용하여 피부의 기본색 및 각 색소 분포를 알아낼 수 있다. 이를 위하여, 먼저 변환 모들 (20)은 피부 이미지의 각 픽 셀의 색상을 RGB로그 좌표계에 투영함으로써 이를 색상 데이터로 변환할 수 있다. 도 2는 변환 모들 (20)에 의하여 RGB 로그 좌표계로 투영된 색상 데이터를 나 타내는 그래프이다.  In the skin color measurement system and method according to the embodiments described herein, the color expressed in each pixel of the skin image is converted into an RGB vector, and modeling based on Equations 1 and 2 described above from the RGB vector is performed. The primary color of each skin and the distribution of each pigment can be found. To this end, first, the conversion module 20 may convert the color of each pixel of the skin image into the color data by projecting the color of the pixel on the RGB log coordinate system. 2 is a graph showing the color data projected by the transform model 20 in the RGB log coordinate system.
도 1 및 도 2를 참조하면, 변환 모들 (20)은 피부 이미지의 각 픽셀의 색상을 적색 (R), 녹색 (G) 및 청색 (B)의 3원색에 각각 대웅되는 3개의 좌표축에 의해 형성 되는 로그 좌표계에 투영할 수 있다. 예를 들어, 피부 이미지에서 i번째 픽셀의 색 상은 [CiR, CiG, CiB]의 3차원 백터로 표현될 수 있으며 , CiR, CiG, CiB는 각각 i번째 픽샐의 색상 중 적색, 녹색 및 청색 성분에 대웅된다. RGB 각각으로 분리된 색상값 에 로그를 취하여 [log(CiR), log(CiG), log(CiB)]로 변환하고, 이를 전술한 RGB 로그 좌표계상에 나타낼 수 있다. 피부 이미지의 모든 픽셀에 대하여 전술한 방법을 적 용하면ᅳ 도 2에 도시된 것과 같은 색상 데이터를 얻을 수 있다. Referring to FIGS. 1 and 2, the transform module 20 is formed by three coordinate axes that respectively define the color of each pixel of the skin image in three primary colors of red (R), green (G), and blue (B). Can be projected onto a logarithmic coordinate system. For example, the color of the i-th pixel in the skin image can be expressed as a three-dimensional vector of [C iR , C iG , C iB ], and C iR , C iG , and C iB are the red color of the i-th pixel, respectively. And green and blue components. The logarithm of each color value separated by RGB may be taken and converted into [log (C iR ), log (C iG ), log (C iB )], which can be represented on the above-described RGB log coordinate system. For every pixel in the skin image, write the method described above. Can be used to obtain color data as shown in FIG.
도 2 에 도시된 색상 데이터에서 각각의 점은 RGB 로그 좌표계로 투영된 피 부 이미지의 하나의 픽셀의 색상에 대응된다. 본 명세서에 첨부된 도면들에서 RGB 로그 좌표계상의 점들은 그레이 스케일 (gray scale)로 도시되었으나, 이는 각각의 점에 대웅되는 픽셀의 실제 색상을 나타내는 것은 아니다. 각각의 점에 대웅되는 픽셀은 해당 점의 RGB 로그 좌표계상의 좌표에 대웅되는 적색, 녹색 및 청색 성분 들이 조합되어 이루어지는 색상을 갖는다는 점이 당업자에게 용이하게 이해될 것이 다.  Each point in the color data shown in FIG. 2 corresponds to the color of one pixel of the skin image projected in the RGB log coordinate system. In the figures appended here, the points on the RGB log coordinate system are shown on a gray scale, but this does not represent the actual color of the pixel that stands for each point. It will be readily understood by those skilled in the art that the pixel subtracted for each point has a color which is a combination of the red, green and blue components subtracted to the coordinates on the RGB log coordinate system of the point.
제 1 측정 모들 (30)은 변환 모들 (20)에 의하여 생성된 색상 데이터를 이용하 여 피부의 노란기를 산출할 수 있다. 일 실시예에서, 제 1 측정 모들 (30)은 기본색 산출부 (310) 및 노란기 산출부 (320)를 포함할 수 있다. 기본색 산출부 (310)는 색상 데이터로부터 피부의 기본색 백터를 산출할 수 있다. 기본색 산출부 (310)는, 사전 에 방향이 결정되어 있는 조명 백터 및 복수 개의 색소 백터를, 변환 모듈 (20)에 의하여 RGB 로그 좌표계에 투영된 색상 데이터를 에워싸는 다각뿔 형상으로 배치할 수 있다.  The first measurement modules 30 may calculate the yellow color of the skin by using the color data generated by the conversion modules 20. In one embodiment, the first measurement modules 30 may include a basic color calculator 310 and a yellow color calculator 320. The primary color calculator 310 may calculate the primary color vector of the skin from the color data. The primary color calculator 310 may arrange the illumination vector and the plurality of dye vectors having a predetermined direction in a polygonal pyramid shape that surrounds the color data projected by the conversion module 20 on the RGB log coordinate system.
조명 백터는 전술한 수학식 2에서 -log(kllght)를 지칭한다. RGB 성분을 균일 하게 포함하는 백색 조명을 사용한 것으로 가정할 경우, 조명 백터의 방향은 (1, 1, 1)로 표현될 수 있다. 그러나 이는 예시적인 것으로서, 조명 백터는 광원의 특 성 및 /또는 피부 이미지 촬영에 사용되는 카메라의 화이트 밸런스 (white balance) 특성 등을 고려하여 다른 상이한 방향을 갖도록 구성될 수도 있다. The illumination vector refers to -log (k llght ) in Equation 2 above. Assuming that white illumination is used that includes the RGB components uniformly, the direction of the illumination vector can be expressed as (1, 1, 1). However, this is merely an example, and the illumination vector may be configured to have a different direction in consideration of the characteristics of the light source and / or the white balance characteristic of the camera used for imaging the skin.
복수 개의 색소 백터는 예컨대 멜라닌 백터 및 헤모글로빈 백터일 수 있으 며, 전술한 수학식 2에서 σπ및 oh를 각각 지칭한다. 멜라닌 백터 및 헤모글로빈 백터의 방향은 다수의 피험자들의 색상 데이터를 이용하여 사전에 결정될 수 있다. 임의의 이미지로부터 멜라닌 백터 및 헤모글로빈 벡터를 추출하는 방법은 당업자들 에게 잘 알려져 있는데, 이때 다수의 피험자들의 이미지로부터 추출한 멜라닌 백터 및 헤모글로빈 백터에 기초하여 본 발명의 실시예들에 사용될 멜라닌 백터 및 헤모 글로빈 백터의 방향을 결정할 수 있다. The plurality of pigment vectors may be, for example, melanin vectors and hemoglobin vectors, and refer to σ π and o h in Equation 2, respectively. The direction of the melanin vector and hemoglobin vector can be determined in advance using color data of a number of subjects. Methods of extracting melanin vector and hemoglobin vector from any image are well known to those skilled in the art, wherein melanin vector and hemoglobin to be used in embodiments of the present invention based on melanin vector and hemoglobin vector extracted from images of multiple subjects The direction of the vector can be determined.
예를 들어, 본 발명의 실시예들에 사용될 멜라닌 백터 및 헤모글로빈 백터의 방향은, 다수의 피험자의 피부 이미지로부터 추출된 멜라닌 백터 및 헤모글로빈 백 터 각각의 평균에 기초하여 결정될 수도 있다. 또는, 다수의 피험자의 피부 이미지 로부터 추출된 멜라닌 백터 및 헤모글로빈 백터 중 전술한 조명 백터와 함께 삼각 뿔 형태로 배치할 경우 다수 피험자의 색상 데이터를 에워쌀 수 있는 특정 멜라닌 백터 및 헤모글로빈 백터의 방향으로 선택할 수도 있다. For example, the orientation of the melanin vector and hemoglobin vector to be used in embodiments of the present invention may be determined based on the average of each of the melanin vector and hemoglobin vector extracted from skin images of multiple subjects. Alternatively, the melanin vector and the hemoglobin vector extracted from the skin images of a plurality of subjects, when placed in the form of triangular horns together with the above-described illumination vector, may be surrounded by specific melanin that may surround the color data of the plurality of subjects. It may also be selected in the direction of the vector and the hemoglobin vector.
본 명세서에서 다각뿔이란, 조명 백터 및 복수 개의 색소 백터를 하나의 동 일한 시작점에 배치할 경우, 이들 백터들 중 두 백터에 의하여 형성되는 평면들로 둘러싸이는 공간을 의미한다. 예를 들어 복수 개의 색소 백터가 멜라난 백터 및 헤 모글로빈 백터일 경우, 다각뿔은, 조명 백터와 멜라닌 백터에 의하여 형성되는 평 면, 조명 백터와 헤모글로빈 벡터에 의하여 형성되는 평면, 및 멜라닌 백터와 헤모 글로빈 백터에, 의하여 형성되는 평면의 세 평면으로 둘러싸인 삼각뿔 형상의 공간 을 지칭한다 .  In the present specification, the polygonal pyramid means a space surrounded by planes formed by two vectors of these vectors when the illumination vector and the plurality of pigment vectors are disposed at the same starting point. For example, when the plurality of pigment vectors are melanan vector and hemoglobin vector, the polygonal pyramid is the plane formed by the illumination vector and the melanin vector, the plane formed by the illumination vector and the hemoglobin vector, and the melanin vector and the hemo In globin vector, it refers to a triangular pyramid-shaped space surrounded by three planes of the plane formed.
또한 본 명세서에서 다각뿔 (예컨대, 삼각뿔)에 의해 색상 데이터를 에워싼다 는 것은 반드시 색상 데이터의 모든 픽셀이 다각뿔의 내부에 위치하게 되는 것을 의미하는 것은 아니며, 색상 데이터의 모든 픽셀 중 일정 비율만큼의 픽셀들이 다 각뿔 내부에 위치되는 것과 같은 배치 형태를 지칭할 수 있다. 예컨대, 약 90% 이 상의 픽셀들이 다각뿔 내부에 위치되도록 다각뿔을 배치할 수 있으나, 이는 예시적 인 것으로서 상기 수치에 한정되는 것은 아니다.  In addition, in the present specification, enclosing color data by a polygonal pyramid (for example, a triangular pyramid) does not necessarily mean that all pixels of the color data are located inside the polygonal pyramid, and a certain percentage of all pixels of the color data is included. May refer to a configuration such that they are located inside the pyramid. For example, the polygonal pyramid may be arranged such that about 90% or more of the pixels are located inside the polygonal pyramid, which is illustrative and not limited to the above numerical value.
기본색 산출부 (310)는, 방향이 사전에 결정되어 있는 조명 백터, 멜라닌 백 터 및 해모글로빈 백터를, 대상 피험자의 색상 데이터를 에워싸는 삼각뿔의 형태로 배치할 수 있다. 도 2를 참조하면, 조명 백테 멜라닌 백터 및 헤모글로빈 백터의 방향이 각각 _log(klight), om 및 oh로 도시된다. 다음으로 기본색 산출부 (310)는 상기 삼각뿔의 꼭지점의 위치를 이용하여 대상 피험자 피부의 기본색을 나타내는 기본색 백터인 -l0g(Cbase)를 산출할 수 있다. 이때 -log(Cbase)는 좌표계의 원점 또 는 특정 기준점에 대한 상대적인 위치로 표시될 수 있다. The primary color calculator 310 may arrange an illumination vector, a melanin vector, and a haemoglobin vector whose direction is predetermined in the form of a triangular pyramid surrounding color data of the target subject. Referring to FIG. 2, the orientations of the illuminated back melanin vector and the hemoglobin vector are shown as _log (k light ), o m and o h , respectively. Can yield l0 g (Cbase) - Next, the primary color calculation unit 310 of the primary color vector of the basic color of the target subject skin using the position of the vertex of the triangular pyramid. At this time, -log (Cbase) may be represented as a position relative to the origin of the coordinate system or a specific reference point.
한편, 기본색 백터인 -log(cbase)의 크기 및 /또는 방향은 사람에 따라 상이할 수 있다. 도 3a 내지 3c는 각각 상이한 시험자의 피부를 촬영한 이미지로부터 얻어 진 색상 데이터를 나타낸 그래프들이다. 도 3a 내지 3c의 각 그래프에서 -log(cbase) 는 해당되는 피험자의 피부 기본색 백터로서, 피험자별로 기본색 백터의 크기 및 / 또는 방향이 상이한 것을 확인할 수 있다. 사람마다 피부의 기본색이 상이한 것은 전반적인 피부톤이 상이하여 나타나는 현상이며, 본 명세서에서는 이를 노란기로 지칭한다. On the other hand, the size and / or direction of the base color vector -log (c base ) may vary depending on the person. 3A to 3C are graphs showing color data obtained from images of skins of different testers, respectively. In each graph of FIGS. 3A to 3C, -log (c base ) is a skin primary color vector of a corresponding subject, and the size and / or direction of the primary color vector is different for each subject. The primary color of the skin of each person is a phenomenon in which the overall skin tone is different, which is referred to herein as a yellow group.
노란기 산출부 (320)는, 기본색 산출부 (310)에 의해 색상 데이터로부터 산출 된 기본색 백터를 이용하여 피부의 노란기를 측정할 수 있다. 먼저, 노란기 산출부 (320)는 기본색 백터 -log(cbase)를 전술한 조명 백터 방향의 성분과 이를 제외한 나 머지 성분으로 분리할 수 있다. 즉, 각 방향의 성분으로 분리된 기본색 백터는 하 기 수학식 3과 같이 표현될 수 있다. The yellow color calculator 320 may measure the yellow color of the skin using the primary color vector calculated from the color data by the primary color calculator 310. First, the yellow color calculator 320 calculates a base color vector -log (c base ) in the above-described lighting vector direction and excludes the same. It can be separated into the merging component. That is, the primary color vector separated into components in each direction may be expressed as Equation 3 below.
【수학식 3]  [Equation 3]
-log(Cbase) = 0C(1, 1, 1) + pVstbase + V  -log (Cbase) = 0C (1 , 1 , 1) + pVstbase + V
상기 수학식 3에서 α 및 β는 스칼라 값이며 , γ는 백터값이다. (1, 1, 1) 은 조명 백터를 나타내는 백터이며 vstbase는 다수의 피험자로부터 얻은 표준 피부색 을 나타내는 백터로서 상세히 후술한다. In Equation 3, α and β are scalar values, and γ is a vector value. (1, 1, 1) is a vector representing an illumination vector and v stbase is a vector representing a standard skin color obtained from a plurality of subjects.
일 실시예에서는, 상기 수학식 3과 같이 각 성분으로 분리되는 기본색 백터 -log(cbase) 중 조명 백터 방향의 성분인 α(1, 1, 1)를 제외한 나머지 성분의 크기, 즉 |3vstbase + γ의 절대값을 피부의 노란기로 정의할 수 있다. 예를 들어 , 대상 피 험자의 피부 기본색 백터가 (3, 4, 5)라고 가정할 경우, 이 중에서 조명 백터 방향 의 성분인 (3, 3, 3)을 제외하고 나머지 성분인 (0, 1, 2)의 절대값이 해당 피험자 의 피부의 노란기가 된다. In one embodiment, the size of the remaining components other than α (1, 1, 1), which is a component of the illumination vector direction, among the primary color vectors -log (c base ) separated into respective components as shown in Equation 3, that is, | 3v The absolute value of stbase + γ can be defined as the yellow color of the skin. For example, assuming that the subject's skin color vector is (3, 4, 5), the remaining component is (0, 1) except for (3, 3, 3), which is the component of the illumination vector direction. , 2) is the yellow color of the subject's skin.
다른 실시예에서는, 피부 기본색 백터인 -log(cbase) 중 조명 백터 방향의 성 분인 α(1, 1, 1)를 제외한 나머지 성분을 다시 소정의 표준 피부색 백터 방향의 성분과 나머지 성분으로 분리할 수 있다. 표준 피부색 백터는 다수의 피험자로부터 측정된 피부 기본색 백터에 기초하여, 그 중 가장 옅은 색에 대웅되는 백터로 정의 될 수 있다. 표준 피부색 백터는 상기 수학식 3에서 vstbase로 나타내어진다. 본 실 시예에 따르면, 피부 기본색 백터에서 조명 백터 방향의 성분을 제외한 나머지 성 분인 β Vstbase + Y중에서, 다시 표준 피부색 백터 방향의 성분인 |3vstbase를 제외한 나머지인 Y의 절대값이 노란기로 정의된다. 예를 들어, 전술한 바와 같이 피부 기 본색 백터에서 조명 백터 방향의 성분을 제외한 나머지 성분이 (0, 1, 2)인 피험자 의 경우, 표준 피부색 백터가 (0, 1, 1) 이라고 가정하면, (0, 1, 2) 에서 (0, 1, 1)을 차감한 나머지인 (0, 0, 1)의 절대값이 해당 피험자의 피부의 노란기가 된다. 전술한 실시예들과 같이 정의되는 노란기는 피험자의 피부로부터 발현되는 색상이 조명 백터로부터 벗어난 정도를 나타내는 것으로서, 대상 피험자의 피부색 증 색소에 의한 영향을 제외한 전반적인 피부톤을 단일 수치로 표현한 것이다. 따 라서, 특정 화장품 제품의 사용 전 및 사용 후에 각각 피부의 노란기를 측정함으로 쎄 제품 사용으로 인한 피부톤의 변화를 용이하게 추적할 수 있는 이점이 있다. 한편, 제 2 측정 모들 (40)은 변환 모들 (20)에 의하여 RGB 로그 좌표계로 투영 된 색상 데이터에서 멜라닌 백터 방향 및 헤모글로빈 백터 방향의 성분을 각각 산 출할 수 있다. 멜라닌 백터 및 헤모글로빈 백터의 방향은 전술한 바와 같이 다수의 피험자의 색상 데이터를 이용하여 사전에 결정될 수 있다. 이와 같이 산출된 멜라 닌 백터 방향의 성분 및 헤모글로빈 백터 방향의 성분은, 각각 대상 피험자 피부의 멜라닌 분포 및 헤모글로빈 분포에 대웅된다. 또한, 멜라닌 분포는 피부의 검은기 로 발현되며, 헤모글로빈 분포는 피부의 붉은기로 발현된다. 즉, 피부에서 멜라닌 또는 헤모글로빈의 양이 증가할수록 각각 검은기 또는 붉은기가 증가하게 된다. 일 실시예에서, 피부 색상 측정 시스템은 제 1 측정 모들 (30)에 의하여 산출 된 노란기 및 제 2 측정 모들 (40)에 의하여 산출된 멜라닌 분포 (즉, 검은기) 및 헤 모글로빈 분포 (즉, 붉은기)를 표시하기 위한 출력 모들 (50)을 포함할 수 있다. 예 를 들어, 출력 모들 (50)은 피부의 노란기, 검은기 및 붉은기의 수치를 이들 수치에 대웅되는 좌표계상의 특정 위치에 표시할 수 있다. 또한, 출력 모들 (50)은 전술한 특정 위치에 실제 촬영된 피부 이미지를 표시할 수도 있다. In another embodiment, the remaining components except for α (1, 1, 1), which is a component in the direction of the illumination vector, are separated into the components in the direction of the predetermined standard skin color vector from the -log (c base ), which is the skin primary color vector can do. A standard skin color vector can be defined as a vector that is treated with the lightest of those based on skin primary color vectors measured from multiple subjects. The standard skin color vector is represented by v stbase in Equation 3 above. According to this embodiment, of β Vstbase + Y, which is a component of the skin primary color vector except for the lighting vector direction, the absolute value of Y, except for 3v stbase , which is a component of the standard skin color vector direction, is defined as a yellow group. do. For example, assuming that the skin color vector is (0, 1, 1) for the subject whose skin component is the (0, 1, 2) except for the component in the direction of the illumination vector, as described above, The absolute value of (0, 0, 1), which is the result of subtracting (0, 1, 1) from (0, 1, 2), becomes the yellow color of the subject's skin. The yellow group, defined as described in the above embodiments, represents the degree of the color expressed from the subject's skin deviating from the illumination vector, and expresses the overall skin tone except for the effect of the skin pigmentation of the subject as a single value. Therefore, by measuring the yellow color of the skin before and after the use of a particular cosmetic product, there is an advantage that can easily track the change in skin tone due to the use of the product. On the other hand, the second measurement modules 40 are projected by the transform modules 20 into the RGB log coordinate system. From the color data, the components of the melanin vector direction and the hemoglobin vector direction can be calculated. The direction of the melanin vector and hemoglobin vector can be previously determined using the color data of multiple subjects as described above. The components in the melanin vector direction and the components in the hemoglobin vector direction calculated as described above are respectively compared to the melanin distribution and the hemoglobin distribution of the skin of the subject. In addition, melanin distribution is expressed in the black phase of the skin, hemoglobin distribution is expressed in the red phase of the skin. That is, as the amount of melanin or hemoglobin in the skin increases, the black or red phase increases, respectively. In one embodiment, the skin color measurement system includes a melanin distribution (ie black) and a hemoglobin distribution (ie, yellow) produced by the first measurement modules 30 and the second measurement module 40. Output module 50 for displaying red color). For example, the output modules 50 may display the numerical values of the yellow, black and red phases of the skin at specific locations on the coordinate system that are subtracted from these values. In addition, the output modules 50 may display the skin image actually photographed at the specific position described above.
도 4a 내지 4c는 일 실시예에 따른 피부 색상측정 시스템에서 출력 모듈에 의한 출력 형태를 도시한 개략도이다.  4A to 4C are schematic diagrams illustrating an output form by an output module in a skin color measurement system according to an exemplary embodiment.
도 4a를 참조하면, 출력 모들은 노란기, 검은기 및 붉은기에 각각 대응되는 좌표축에 의하여 형성되는 좌표계상에 대상 피험자의 피부로부터 측정된 수치들을 표시할 수 있다. 도 4a에서 노란기, 검은기 및 붉은기에 대웅되는 좌표축은, 복수 회의 측정을 실시하는 경우 최초의 측정 결과를 100%로 하여 0¾ 내지 의 범위 를 도시하도록 구성될 수 있다. 그러나 이는 예시적인 것으로서, 다른 실시예에서 는 노란기, 검은기 및 붉은기에 대웅되는 각 좌표축이 예컨대 90% 내지 110% 범위 또는 다른 상이한 범위를 도시하도록 구성할 수도 있다.  Referring to FIG. 4A, the output modules may display numerical values measured from the skin of the target subject on a coordinate system formed by coordinate axes corresponding to yellow, black and red phases, respectively. In FIG. 4A, the coordinate axes of the yellow, black and red periods may be configured to show a range of 0¾ to 100% of the first measurement result when a plurality of measurements are performed. However, this is exemplary, and in other embodiments, each coordinate axis of the yellow, black and red phases may be configured to show, for example, a 90% to 110% range or other different range.
출력 모들은 최초 촬영 시점인 제 1 시점 (예컨대, 화장품의 사용 전)에 측정 된 대상 피험자의 노란기, 검은기 및 붉은기 수치에 대응되는 제 1 이미지 (520)와, 제 2 시점(예컨대, 일정 기간 화장품을 사용한 후)에 측정된 대상 피험자의 노란기, 검은기 및 붉은기 수치에 대웅되는 제 2 이미지 (530)를 표시할 수 있다.  The output modules include a first image 520 corresponding to the yellow, black and red color values of the subject measured at a first time point (eg, before use of cosmetics), which is the first time of photographing, and a second time point (eg, a schedule). After using the period cosmetics), a second image 530 may be displayed which is measured by the yellow, black and red color values of the subject.
단순화를 위하여 도 4a에는 제 1 및 제 2 이미지 (520, 530)만을 도시하였으나, 제 1 및 제 2 이미지 (520, 530)가 위치한 위치뿐만 아니라 좌표계상의 다른 각 위치 에도 해당 위치의 노란기, 검은기 및 붉은기 수치에 대응되는 이미지들이 표시될 수도 있다. 또한 이러한 다른 이미지들은 실제 피험자의 촬영 이미지에서 노란기, 검은기 및 /또는 붉은기를 조절하여 생성될 수 있다.  For simplicity, only the first and second images 520 and 530 are shown in FIG. 4A, but not only the positions where the first and second images 520 and 530 are located, but also the yellow and black portions of the positions in each other position in the coordinate system. And images corresponding to the red color value may be displayed. In addition, these other images may be generated by adjusting yellow, black and / or red in the photographed image of the actual subject.
제 1 이미지 (520)는 해당 붉은기 수치에 의하여 결정되는 평면 (500)상에 위치 하게 되며, 마찬가지로 제 2 이미지 (530)는 해당 붉은기 수치에 의하여 결정되는 또 다른 평면 (510)상에 위치하게 된다. 게 1 시점과 비교하여 제 2 시점에서 대상 피험 자의 붉은기 수치가 감소하였으며, 그 결과 제 1 평면 (500)에 비해 제 2 평면 (510)이 붉은기가 인 방향으로 근접하여 이동하였음을 확인할 수 있다. First image 520 is located on plane 500 determined by the corresponding red phase value Similarly, the second image 530 is located on another plane 510 which is determined by the corresponding redness value. Compared to the first time point, the redness level of the subject was decreased at the second time point. As a result, it can be seen that the second plane 510 moved closer to the phosphorus direction than the first plane 500. .
한편, 도 4b는 도 4a에서 제 1 평면 (500)만을 도시한 개략도이며, 도 4c는 도 4a에서 제 2 평면 (510)만을 도시한 개략도이다. 도 4b 및 4c를 참조하면,게 1 이미 지 (520)는 최초로 촬영된 이미지이므로 노란기 및 검은기 수치가 각각 100%에 해당 되어 제 1 평면 (500)상에서 정중앙에 표시될 수 있다. 반면 제 2 이미지 (530)는 게 1 이미지 (520)와 비교하여 노란기 및 검은기 수치가 각각 감소하였으므로, 게 2 평면 (510)상에서 정증앙으로부터 좌측 하단으로 이동한 지점에 표시될 수 있다.  4B is a schematic diagram illustrating only the first plane 500 in FIG. 4A, and FIG. 4C is a schematic diagram illustrating only the second plane 510 in FIG. 4A. 4B and 4C, since the first image 520 is the first photographed image, yellow and black values may correspond to 100%, respectively, so that the first image 520 may be displayed at the center on the first plane 500. On the other hand, the second image 530 may be displayed at a point shifted from the center of the crab plane 510 to the lower left on the crab 2 plane 510 since the yellow and black values are decreased compared to the crab 1 image 520, respectively.
예를 들어, 제 1 시점에 측정된 대상 피험자의 붉은기, 검은기 ^ᅳ 노란기의 수치를 각각 100%로 할 때, 제 2 시점에 측정된 대상 피험자의 붉은기, 검은기 및 노란기가 각각 80%, 70% 및 50%인 것으로 가정할 수 있다. 이때, 제 1 시점에 촬영 된 대상 피험자의 이미지인 제 1 이미지 (520)는 좌표계상에서 (100, 100, 100)의 위 치에 표시되는 반면, 제 2 시점에 촬영된 대상 피험자의 이미지인 제 2 이미지 (530) 는 좌표계상에서 (80, 70, 50)의 위치에 출력될 수 있다.  For example, when the values of the red phase, the black phase, and the yellow phase of the target subject measured at the first time point are 100%, respectively, the red, black, and yellow phases of the subject subject measured at the second time point are 80%. Can be assumed to be%, 70% and 50%. In this case, the first image 520, which is the image of the target subject photographed at the first time point, is displayed at the position of (100, 100, 100) on the coordinate system, while the second image, which is the image of the target subject photographed at the second time point, is displayed. The image 530 may be output at the position (80, 70, 50) on the coordinate system.
이와 같이 3차원 이미지 어레이 (array)를 이용하여 피부의 붉은기, 검은기 및 누런기를 표사함으로써, 피부 상태를 알기 쉽게 가시적으로 표시할 수 있다. 또 한, 제 1 시점 및 제 2 시점을 각각 특정 화장품 제품의 사용 전과 사용 후 일정 기 간 후로 설정하면, 게 1 이미지 (520)로부터 제 2 이미지 (530)로의 위치 변화를 통해 해당 제품의 효능을 가시적으로 파악할 수 있다. 예를 들면 , 제 1. 이미지 (520)의 특 정 픽셀로부터 제 2 이미지 (530)의 대웅되는 픽셀을 연결하는 백터의 길이로 제품의 효능을 나타낼 수 있다. 또는, 붉은기, 노란기 및 검은기 각각의 수치별로 수치의 감소 정도를 %로 나타내여 제품의 효능을 나타낼 수도 있다.  Thus, by expressing the red, black and yellow color of the skin by using a three-dimensional image array (array), it is possible to visually display the skin condition clearly. In addition, if the first time point and the second time point are set before and after a certain period of use of a particular cosmetic product, respectively, the efficacy of the corresponding product is changed by changing the position from the crab 1 image 520 to the second image 530. You can see it visually. For example, the efficacy of the product can be represented by the length of the vector that connects the pixels from the particular pixel of the first image 520 to the pixels of the second image 530. Alternatively, the redness, yellowness, and blackness may be expressed in% to indicate the level of decrease in the numerical value, indicating the efficacy of the product.
도 4a 내지 4c에 도시되는 노란기, 검은기 및 붉은기의 출력 형태는 단지 예 시적인 것으로서, 출력 모들은 제 1 측정 모들에서 측정된 피부의 노란기 및 제 2 측 정 모들에서 측정된 피부의 검은기 및 붉은기를 다른 적당한 표시 형태를 이용하여 출력할 수도 있다.  The output forms of the yellow, black and red phases shown in FIGS. 4A-4C are merely exemplary, and the output modalities are the black color of the skin measured in the yellow and the second measured hairs measured in the first measurement hairs, and The red flag may also be output using other suitable display forms.
도 5는 일 실시예에 따른 피부 색상 측정 방법을 나타내는 순서도이다.  5 is a flowchart illustrating a method of measuring skin color according to an embodiment.
도 5를 참조하면, 먼저 대상 피험자의 피부를 이미지로 촬영할 수 있다 (S1). 다음으로, 촬영된 피부 이미지의 각 픽셀의 색상을 RGB 로그 좌표계로 투영하여 색 상 데이터를 생성할 수 있다 (S2). RGB 로그 좌표계는 적색 (R), 녹색 (G) 및 청색 (B) 의 3원색에 각각 대웅되는 좌표축에 의하여 형성되는 좌표계일 수 있으며, 이때 각 각의 좌표축은 로그 스케일 (log scale)로 표시될 수 있다. 이미지의 각 픽셀은 RGB 로그 좌표계에서 RGB 백터의 형태로 표현된다. Referring to FIG. 5, first, a skin of a subject may be photographed as an image (S1). Next, color data may be generated by projecting the color of each pixel of the photographed skin image to the RGB log coordinate system (S2). RGB log coordinate systems are red (R), green (G), and blue (B) It may be a coordinate system formed by the coordinate axis of each of the three primary colors of, wherein each coordinate axis may be displayed in a log scale (log scale). Each pixel of the image is represented in the form of an RGB vector in the RGB log coordinate system.
다음으로, 사전에 방향이 결정되어 있는 조명 백터 및 복수 개의 색소 백터 를, 투영된 색상 데이터를 에워싸는 다각뿔 (예컨대, 삼각뿔) 형상으로 배치할 수 있다 (S3). 조명 백터는 _조명으로 인한 효과에 대웅되는 백터로서, 백색 조명의 경 우 (1, 1, 1)의 RGB 백터로 표현될 수 있다. 색소 백터는 멜라닌 백터 및 헤모글로 빈 백터일 수 있다, 멜라닌 백터 및 헤모글로빈 백터의 방향은 다수의 피험자의 피 부 이미지로부터 얻어진 색상 데이터를 이용하여 사전에 결정될 수 있다.  Next, the illumination vector and the plurality of dye vectors whose directions are determined in advance can be arranged in a polygonal pyramid (for example, triangular pyramid) shape surrounding the projected color data (S3). The lighting vector is a vector for the effects of the lighting, and may be expressed as an RGB vector of (1, 1, 1) in the case of white lighting. The pigment vector can be a melanin vector and a hemoglobin vector. The direction of the melanin vector and hemoglobin vector can be determined in advance using color data obtained from skin images of a number of subjects.
다음으로, 조명 백터, 멜라닌 백터 및 헤모글로빈 백터로 이루어지는 삼각뿔 의 꼭지점 위치를 이용하여 기본색 백터를 산출할 수 있다 (S4). 기본색 백터는 대 상 피험자 피부에서 색소에 의한 광홉수 효과를 제외하고 피부 본래의 전반적인 피 부톤을 나타낸다.  Next, the primary color vector may be calculated using the vertex positions of the triangular pyramid consisting of the lighting vector, the melanin vector and the hemoglobin vector (S4). The primary color vector represents the skin's inherent overall skin tone, with the exception of the optical hop effect by the pigment in the subject's skin.
다음으로, 기본색 백터를 이용하여 노란기를 산출할 수 있다 (S5). 노란기는 기본색 백터를 조명 백터 방향의 성분과 이를 제외한 나머지 방향의 성분으로 구분 하여 얻을 수 있다. 일 실시예에서, 노란기는 기본색 백터에서 조명 백터 방향의 성분을 제외한 나머지 성분의 크기로 정의될 수 있다. 한편 다른 실시예에서, 노란 기는 기본색 백터에서 조명 백터 방향을 제외한 나머지 성분 중에서, 다시 소정의 표준 피부색 백터 방향의 성분을 제외한 나머지 성분만의 크기로 정의될 수도 있 다.  Next, a yellow group may be calculated using the primary color vector (S5). The yellow color can be obtained by dividing the primary color vector into the component of the illumination vector direction and the components of the other directions except this. In one embodiment, the yellow group may be defined as the size of the remaining components other than the components in the direction of the illumination vector in the primary color vector. Meanwhile, in another embodiment, the yellow group may be defined as the size of only the remaining components except the component of the predetermined standard skin color vector direction among the remaining components except the illumination vector direction in the primary color vector.
한편, 전술한 색상 데이터에서 멜라닌 백터 방향 성분 및 헤모글로빈 백터 방향의 성분을 산출할 수 있다 (S6). 멜라닌 백터 방향 성분 및 헤모글로빈 백터 방 향의 성분은 각각 대상 피험자 괴부의 멜라닌 분포 및 헤모글로빈 분포에 대웅된 다. 또한 피부의 멜라닌 분포는 피부의 검은기로 발현되며, 피부의 헤모글로빈 분 포는 피부의 붉은기로 발현될 수 있다.  Meanwhile, the melanin vector component and the hemoglobin vector component can be calculated from the color data described above (S6). The components of the melanin vector and the components of the hemoglobin vector are subjected to the melanin distribution and the hemoglobin distribution of the subject subjects, respectively. In addition, the melanin distribution of the skin is expressed in the black phase of the skin, hemoglobin distribution of the skin may be expressed in the red phase of the skin.
다음으로, 전술한 과정에 의하여 산출된 붉은기, 검은기 및 노란기를 출력할 수.있다 (S7). 예를 들어, 붉은기, 검은기 및 노란기 각각에 대웅되는 좌표축에 의 하여 형성되는 좌표계에서, 대상 피험자의 붉은기, 검은기 및 노란기 수치에 대웅 되는 위치에 촬영된 피부 이미지를 출력할 수 있다. 이때 특정 화장품 제품 사용 전의 이미지와 사용 후 일정 기간이 경과한 후의 이미지를 함께 표시하면, 사용 전 후의 이미지의 위치 변화를 통하여 제품 사용으로 인한 피부톤의 변화를 가시적으 로 확인할 수 있다. 본 명세서에서 일 실시예에 따른 피부 색상 측정 방법은 도면에 제시된 순서 도를 참조로 하여 설명되었다. 간단히 설명하기 위하여 상기 방법은 일련의 블록들 로 도시되고 설명되었으나, 본 발명은 상기 블록들의 순서에 한정되지 않고, 몇몇 블톡들은 다른 블록들과 본 명세서에서 도시되고 기술된 것과 상이한 순서로 또는 동시에 일어날 수도 있으며, 동일한 또는 유사한 결과를 달성하는 다양한 다른 분 기, 흐름 경로, 및 블록의 순서들이 구현될 수 있다. 또한, 본 명세서에서 기술되 는 방법의 구현을 위하여 도시된 모든 블록들이 요구되지 않을 수도 있다. Next, the red, black and yellow groups calculated by the above process can be output (S7). For example, in the coordinate system formed by the coordinate axes of the red, black and yellow phases, the skin image photographed at the position of the red, black and yellow phases of the target subject may be output. At this time, if the image before and after using a certain cosmetic product after displaying a certain period of time is displayed together, the change in the skin tone due to the use of the product can be visually confirmed by changing the position of the image before and after use. Skin color measurement method according to an embodiment in the present specification has been described with reference to the flow chart shown in the drawings. For simplicity, the method is shown and described as a series of blocks, but the invention is not limited to the order of the blocks, and some blocks may occur in different order or simultaneously with other blocks and as described and described herein. In addition, various other branches, flow paths, and blocks may be implemented in order to achieve the same or similar results. In addition, not all illustrated blocks may be required for the implementation of the methods described herein.
이상에서 살펴본 본 발명은 도면에 도시된 실시예들을 참고로 하여 설명하였 으나 이는 예시적인 것에 불과하며 당해 분야에서 통상의 지식을 가진 자라면 이로 부터 다양한 변형 및 실시예의 변형이 가능하다는 점을 이해할 것이다. 그러나, 이 와 같은 변형은 본 발명의 기술적 보호범위 내에 있다고 보아야 한다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해서 정 해져야 할 것이다.  Although the present invention described above has been described with reference to the embodiments illustrated in the drawings, this is merely exemplary and will be understood by those skilled in the art that various modifications and variations of the embodiments are possible therefrom. . However, such modifications should be considered to be within the technical protection scope of the present invention. Therefore, the true technical protection scope of the present invention will be defined by the technical spirit of the appended claims.
【산업상 이용가능성】  Industrial Applicability
실시예들은 피부 색상 측정 시스템 및 방법에 관한 것이다.  Embodiments relate to skin color measurement systems and methods.

Claims

【청구의 범위】 [Range of request]
【청구항 1】  [Claim 1]
피부를 촬영한 이미지의 색상을, 원색에 대웅되는 좌표축을 갖는 로그 좌표 계상의 색상 데이터로 변환하는 변환 모들;  A conversion model for converting the color of the photographed image of the skin into color data on a logarithmic coordinate system having a coordinate axis that corresponds to the primary color;
미리 설정된 조명 백터 및 복수 개의 색소 백터를 상기 색상 데이터를 에워 싸는 다각뿔 형상으로 배치하고, 상기 다각뿔의 꼭지점 위치를 이용하여 노란기를 측정하는 제 1 측정 모들; 및  First measurement modules for arranging a predetermined illumination vector and a plurality of pigment vectors in a polygonal pyramid shape surrounding the color data and measuring a yellow color using a vertex position of the polygonal pyramid; And
상기 색상 데이터를 상기 조명 백터 방향의 성분 및 상기 각 색소 백터 방향 의 성분으로 분리하여 복수 개의 색소 분포를 측정하는 제 2 측정 모들을 포함하는 것을 특징으로 하는 피부 색상 측정 시스템.  And a second measurement model for separating the color data into a component in the illumination vector direction and a component in the respective dye vector direction to measure a plurality of pigment distributions.
【청구항 2】 [Claim 2]
제 1항에 있어서,  The method of claim 1,
상기 복수 개의 색소 백터는 멜라닌 백터 및 헤모글로빈 백터를 포함하는 것 을 특징으로 하는 피부 색상 측정 시스템.  The plurality of pigment vector is a skin color measurement system, characterized in that it comprises a melanin vector and hemoglobin vector.
【청구항 3】 [Claim 3]
제 1항에 있어서,  The method of claim 1,
상기 제 1측정 모들은,  The first measurement module,
상기 색상 데이터로부터 상기 다각뿔의 꼭지점 위치에 대웅되는 기본색 백터 를 산출하는 기본색 산출부; 및  A basic color calculator configured to calculate a basic color vector from the color data to the vertex position of the polygonal pyramid; And
상기 기본색 백터를 상기 조명 백터 .방향의 성분과 상기 조명 백터 방향의 성분을 제외한 나머지 성분으로 분리하여 노란기를 산출하는 노란기 산출부를 포함 하는 것을 특징으로 하는 피부 색상 측정 시스템. ' And a yellow color calculator calculating the yellow color by dividing the primary color vector into a component in the lighting vector direction and remaining components except for the components in the lighting vector direction. '
【청구항 4】 [Claim 4]
제 3항에 있어서,  The method of claim 3,
상기 노란기는 상기 기본색 백터에서 상기 조명 백터 방향의 성분을 제외한 나머지 성분에 대응되는 것을 특징으로 하는 피부 색상 측정 시스템.  The yellow color system is a skin color measurement system, characterized in that corresponding to the remaining components other than the components in the direction of the illumination vector in the primary color vector.
【청구항 5] [Claim 5]
제 3항에 있어서 상기 노란기 산출부는, 상기 기본색 백터에서 상기 조명 백터 방향의 성분을 제외한 나머지 성분을, 미리 설정된 표준 피부색 백터 방향의 성분 및 상기 표준 피부색 백터 방향의 성분을 제외한 나머지 성분으로 분리하며, The method of claim 3 The yellow color calculator is configured to separate the remaining components excluding the components in the direction of the illumination vector from the primary color vector, into components other than the components of the preset standard skin color vector direction and the components of the standard skin color vector direction,
상기 노란기는, 상기 기본색 백터에서 상기 조명 백터 방향의 성분을 제외한 나머지 성분 중, 상기 표준 피부색 백터 방향의 성분을 제외한 나머지 성분에 대웅 되는 것을 특징으로 하는 피부 색상 측정 시스템.  The yellow color is a skin color measurement system, characterized in that the remaining color except for the component of the standard skin color vector direction of the remaining components except the component of the illumination vector direction in the primary color vector.
【청구항 6] [Claim 6]
제 1항에 있어서'  The method of claim 1
상기 제 1 측정 모들에서 산출된 노란기 및 상기 제 2 측정 모들에서 산출된 복수 개의 색소 분포를, 노란기 및 복수 개의 색소 분포 각각에 대웅되는 좌표축을 갖는 좌표계상에 표시하는 출력 모들을 더 포함하는 것을 특징으로 하는 피부 색상 측정 시스템.  And output outputs for displaying the yellow group calculated in the first measurement models and the plurality of pigment distributions calculated in the second measurement models on a coordinate system having coordinate axes that are respectively subtracted from the yellow group and the plurality of pigment distributions. Skin color measurement system.
【청구항 7】 [Claim 7]
제 6항에 있어서,  The method of claim 6,
상기 출력 모들은, 상기 노란기 및 복수 개의 색소 분포 각각에 대웅되는 좌 표축을 갖는 좌표계상에 피부를 촬영한 이미지를 표시하는 것을 특징으로 하는 피 부 색상 측정 시스템 .  The output modules, the skin color measurement system, characterized in that for displaying the image of the skin photographed on the coordinate system having a left coordinate axis to each of the yellow group and the plurality of pigment distribution.
【청구항 8】 [Claim 8]
피부를 촬영한 이미지의 색상을, 원색에 대웅되는 좌표축을 갖는 로그 좌표 계상의 색상 데이터로 변환하는 단계;  Converting the color of the image of the photographed skin into color data on a logarithmic coordinate system having a coordinate axis that corresponds to the primary color;
미리 설정된 조명 백터 및 복수 개의 색소 백터를 상기 색상 데이터를 에워 싸는 다각뿔 형상으로 배치하는 단계 ;  Arranging a preset illumination vector and a plurality of dye vectors in a polygonal shape surrounding the color data;
상기 다각뿔의 꼭지점 위치를 이용하여 노란기를 측정하는 단계; 및 상기 색상 데이터를 상기 조명 백터 방향의 성분 및 상기 각 색소 백터 방향 의 성분으로 분리하여 복수 개의 색소 분포를 측정하는 단계를 포함하는 것을 특징 으로 하는 피부 색상 측정 방법 .  Measuring a yellow group using the vertex position of the polypyramid; And measuring the plurality of pigment distributions by separating the color data into components in the illumination vector direction and components in the respective dye vector directions.
【청구항 9] [Claim 9]
제 8항에 있어서, 상기 복수 개의 색소 백터는 멜라닌 백터 및 헤모글로빈 백터를 포함하는 것 을 특징으로 하는 피부 색상 측정 방법. The method of claim 8, The plurality of pigment vector is a skin color measurement method comprising a melanin vector and hemoglobin vector.
【청구항 10】 [Claim 10]
제 8항에 있어서,  The method of claim 8,
상기 피부의 노란기를 측정하는 단계는,  Measuring the yellow color of the skin,
상기 색상 데이터로부터 상기 다각뿔의 꼭지점 위치에 대응되는 기본색 백터 를 산출하는 단계; 및  Calculating a primary color vector corresponding to the vertex position of the polygonal pyramid from the color data; and
상기 기본색 백터를 상기 조명 백터 방향의 성분 및 상기 조명 백터 방향의 성분을 제외한 나머지 성분으로 분리하여 노란기를 산출하는 단계를 포함하는 것을 특징으로 하는 피부 색상 측정 방법 .  And calculating the yellow color by separating the primary color vector into the components in the direction of the illumination vector and the remaining components except the components in the direction of the illumination vector.
【청구항 11】 [Claim 11]
제 10항에 있어서,  The method of claim 10,
상기 노란기는 상기 기본색 백터에서 상기 조명 백터 방향의 성분을 제외한 나머지 성분에 대웅되는 것을 특징으로 하는 피부 색상 측정 방법.  The yellow color is a method for measuring skin color, characterized in that the remaining color except for the component in the direction of the illumination vector in the primary color vector.
【청구항 12】 [Claim 12]
제 10항에 있어서,  The method of claim 10,
상기 노란기를 산출하는 단계는, 상기 기본색 백터에서 상기 조명 백터 방향 의 성분을 제외한 나머지 성분을, 미리 설정된 표준 피부색 백터 방향의 성분 및 상기 표준 피부색 백터 방향의 성분을 제외한 나머지 성분으로 분리하는 단계를 포 함하며,  The calculating of the yellow group may include separating the remaining components except for the components in the direction of the illumination vector from the primary color vector into remaining components except for the components of the preset standard skin color vector direction and the components of the standard skin color vector direction. Including,
상기 노란기는, 상기 기본색 백터에서 상기 조명 백터 방향의 성분을 제외한 나머지 성분 중, 상기 표준 피부색 백터 방향의 성분을 제외한 나머지 성분에 대웅 되는 것을 특징으로 하는 피부 색상 측정 방법.  The yellow color is a method for measuring skin color, characterized in that the remaining color except for the component in the direction of the standard skin color vector among the components except the component in the direction of the illumination vector in the primary color vector.
【청구항 13] [Claim 13]
제 8항에 있어서,  The method of claim 8,
산출된 노란기 및 복수 개의 색소 분포를, 노란기 및 복수 개의 색소 분포 각각에 대웅되는 좌표축을 갖는 좌표계상에 표시하는 단계를 더 포함하는 것을 특 징으로 하는 피부 색상 측정 방법 . 【청구항 14】 And displaying the calculated yellow group and the plurality of pigment distributions on a coordinate system having a coordinate axis subtracted from each of the yellow group and the plurality of pigment distributions. [Claim 14]
제 13항에 있어서,  The method of claim 13,
상기 노란기 및 복수 개의 색소 분포 각각에 대웅되는 좌표축을 갖는 좌표계 상에 표시하는 단계는, 산출된 노란기 및 복수 개의 색소 분포에 대웅되는 위 치에 피부를 촬영 한 이 미지를 표시하는 단계를 포함하는 것을 특징으로 하는 피부 색상 측정 방법 .  The displaying on the coordinate system having a coordinate axis that is respectively treated with the yellow group and the plurality of pigment distributions includes displaying an image of the skin photographed at a position that is calculated by the calculated yellow group and the plurality of pigment distributions. Characteristic method of measuring skin color.
PCT/KR2011/001154 2010-02-26 2011-02-22 System and method for measuring skin color WO2011105731A2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012554900A JP5827249B2 (en) 2010-02-26 2011-02-22 Skin hue measuring system and method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020100017815A KR101619342B1 (en) 2010-02-26 2010-02-26 System and method for detecting skin color
KR10-2010-0017815 2010-02-26

Publications (2)

Publication Number Publication Date
WO2011105731A2 true WO2011105731A2 (en) 2011-09-01
WO2011105731A3 WO2011105731A3 (en) 2012-01-12

Family

ID=44507358

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/001154 WO2011105731A2 (en) 2010-02-26 2011-02-22 System and method for measuring skin color

Country Status (3)

Country Link
JP (1) JP5827249B2 (en)
KR (1) KR101619342B1 (en)
WO (1) WO2011105731A2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2890110A1 (en) * 2013-12-24 2015-07-01 Ricoh Company, Ltd. Image processing apparatus and image processing method

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6678928B2 (en) * 2014-08-20 2020-04-15 株式会社林原 Oral beauty agent
CN105686805B (en) * 2016-01-11 2018-09-21 中山德尚伟业生物科技有限公司 A kind of method and cosmetics carrying out skin quality judge with color lump
KR101940054B1 (en) * 2016-09-22 2019-01-21 (주)아모레퍼시픽 System and method for measuring color variation of cosmetic material
US11200673B2 (en) 2017-05-25 2021-12-14 Shinshu University Method for analyzing longitudinal pigmented band on nail plate or skin color hue for diagnosing skin disease, and diagnostic device and computer program therefor

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006087748A (en) * 2004-09-24 2006-04-06 Kao Corp Instrument for measuring optical property of skin
JP2007133518A (en) * 2005-11-08 2007-05-31 Shiseido Co Ltd Cosmetic medical diagnostic method, cosmetic medical diagnostic program, and recording medium with its program recorded thereon
JP2007252891A (en) * 2006-02-23 2007-10-04 Masahiro Nakagawa Estimation method of evaluation value by visual recognition of beauty of skin
KR20080058337A (en) * 2005-08-12 2008-06-25 릭 비. 예거 System and method for medical monitoring and treatment through comsmetic monitoring and treatment
JP2009011824A (en) * 2007-06-19 2009-01-22 Astron Clinica Ltd Method and apparatus for measuring skin texture

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006087748A (en) * 2004-09-24 2006-04-06 Kao Corp Instrument for measuring optical property of skin
KR20080058337A (en) * 2005-08-12 2008-06-25 릭 비. 예거 System and method for medical monitoring and treatment through comsmetic monitoring and treatment
JP2007133518A (en) * 2005-11-08 2007-05-31 Shiseido Co Ltd Cosmetic medical diagnostic method, cosmetic medical diagnostic program, and recording medium with its program recorded thereon
JP2007252891A (en) * 2006-02-23 2007-10-04 Masahiro Nakagawa Estimation method of evaluation value by visual recognition of beauty of skin
JP2009011824A (en) * 2007-06-19 2009-01-22 Astron Clinica Ltd Method and apparatus for measuring skin texture

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2890110A1 (en) * 2013-12-24 2015-07-01 Ricoh Company, Ltd. Image processing apparatus and image processing method
US9355466B2 (en) 2013-12-24 2016-05-31 Ricoh Company, Ltd. Image processing apparatus, image processing system, image processing method, and storage medium

Also Published As

Publication number Publication date
JP2013520274A (en) 2013-06-06
WO2011105731A3 (en) 2012-01-12
KR20110098275A (en) 2011-09-01
JP5827249B2 (en) 2015-12-02
KR101619342B1 (en) 2016-05-11

Similar Documents

Publication Publication Date Title
KR101799174B1 (en) Skin diagnostic and image processing systems, apparatus and articles
US9449412B1 (en) Adaptive, calibrated simulation of cosmetic products on consumer devices
KR101800102B1 (en) Skin diagnostic and image processing methods
CN102782727B (en) For the system using spectrum view data to analyze to the skin treating generating 3D RGB model
US10638968B2 (en) Skin gloss evaluation device, skin gloss evaluation method, and skin gloss evaluation program
US20100284610A1 (en) Skin color evaluation method, skin color evaluation apparatus, skin color evaluation program, and recording medium with the program recorded thereon
US10905331B2 (en) Image capturing device and sensing protection device
CA2560364A1 (en) Image processing method and apparatus
WO2011105731A2 (en) System and method for measuring skin color
Preece et al. Spectral filter optimization for the recovery of parameters which describe human skin
WO2011148776A1 (en) Image processing apparatus and image processing method
JP6323097B2 (en) Color measuring device, color measuring system, color measuring method, and program
CN107005642B (en) Image capturing apparatus and sensing protection apparatus
US20160345887A1 (en) Moisture feeling evaluation device, moisture feeling evaluation method, and moisture feeling evaluation program
KR20160097209A (en) Medical imaging
Tsumura et al. Medical vision: measurement of skin absolute spectral-reflectance image and the application to component analysis
JP4385925B2 (en) Image forming method
Babilon et al. Spectral reflectance estimation of organic tissue for improved color correction of video-assisted surgery
JP7173989B2 (en) Information processing device, program, and information processing method
JP2010061689A (en) Simulation image forming method for skin
JP4683247B2 (en) Image forming method
Jang et al. Makeup color reproduction based on spectrum data
JP6947551B2 (en) Surface condition evaluation method
JP2022088260A (en) Skin color representation method, skin color chart and skin color display device
JP2024034889A (en) Makeup simulation system, makeup simulation method, makeup simulation program, and makeup simulation device

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11747621

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 2012554900

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11747621

Country of ref document: EP

Kind code of ref document: A2