KR20180061629A - Evaluation method for skin condition using image and evaluation apparatus for skin condition using image - Google Patents

Evaluation method for skin condition using image and evaluation apparatus for skin condition using image Download PDF

Info

Publication number
KR20180061629A
KR20180061629A KR1020160161005A KR20160161005A KR20180061629A KR 20180061629 A KR20180061629 A KR 20180061629A KR 1020160161005 A KR1020160161005 A KR 1020160161005A KR 20160161005 A KR20160161005 A KR 20160161005A KR 20180061629 A KR20180061629 A KR 20180061629A
Authority
KR
South Korea
Prior art keywords
image
value
skin region
skin
evaluation
Prior art date
Application number
KR1020160161005A
Other languages
Korean (ko)
Other versions
KR101957773B1 (en
Inventor
홍광석
김민수
이현정
Original Assignee
성균관대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 성균관대학교산학협력단 filed Critical 성균관대학교산학협력단
Priority to KR1020160161005A priority Critical patent/KR101957773B1/en
Publication of KR20180061629A publication Critical patent/KR20180061629A/en
Application granted granted Critical
Publication of KR101957773B1 publication Critical patent/KR101957773B1/en

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Dermatology (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

A skin condition evaluation method using an image includes the steps of: enabling a computer device to acquire a first image acquired by photographing a skin region and a second image acquired by photographing the skin region after the photographing of the first image; enabling the computer device to extract each skin region from the first image and the second image; enabling the computer device to operate a plurality of evaluation values representing a different between the skin region of the first image and the skin region of the second image based on a color value; and enabling the computer device to perform a state evaluation for the sink region by using the plurality of evaluation values. Accordingly, the present invention can easily evaluate a sink condition by using a device such as a smart device without an additional device.

Description

영상을 이용한 피부 상태 평가 방법 및 영상을 이용한 피부 상태 평가 장치{EVALUATION METHOD FOR SKIN CONDITION USING IMAGE AND EVALUATION APPARATUS FOR SKIN CONDITION USING IMAGE}TECHNICAL FIELD [0001] The present invention relates to a skin condition evaluating method using an image, and a skin condition evaluating apparatus using an image. [0002]

이하 설명하는 기술은 영상을 이용하여 피부 상태를 평가하는 기법에 관한 것이다.The technique described below relates to a technique for evaluating skin condition using an image.

최근 헬스 케어에 대한 관심과 더불어 피부 상태를 측정하거나 진단하는 장치가 등장하고 있다. 대부분의 장치는 상태 측정을 위한 센서 장치를 이용한다.Recently, devices for measuring or diagnosing skin conditions have emerged with interest in healthcare. Most devices use sensor devices for status measurements.

한국공개특허 제10-2005-0076233호Korean Patent Publication No. 10-2005-0076233

이하 설명하는 기술은 영상만을 이용하여 사용자의 피부 상태를 평가할 수 있는 방법을 제공하고자 한다.The technique described below is intended to provide a method of evaluating a user's skin condition using only an image.

영상을 이용한 피부 상태 평가 방법은 컴퓨터 장치가 피부 영역을 촬영한 제1 영상 및 상기 제1 영상의 촬영 시점 후에 상기 피부 영역을 촬영한 제2 영상을 획득하는 단계, 상기 컴퓨터 장치가 상기 제1 영상에 및 상기 제2 영상에서 각각 상기 피부 영역을 추출하는 단계, 상기 컴퓨터 장치가 색상값을 기준으로 상기 제1 영상의 피부 영역 및 상기 제2 영상의 피부 영역에 대한 차이를 나타내는 복수의 평가값을 연산하는 단계 및 상기 컴퓨터 장치가 상기 복수의 평가값을 이용하여 상기 피부 영역에 대한 상태 평가를 수행하는 단계를 포함한다.A method for evaluating a skin condition using an image includes the steps of: acquiring a first image of a skin region of a computer device and a second image of the skin region after a shooting time of the first image; Extracting the skin area from the second image and the second image, and the computer device calculates a plurality of evaluation values indicating a difference between the skin area of the first image and the skin area of the second image on the basis of the color value And performing the state evaluation on the skin region using the plurality of evaluation values.

영상을 이용한 피부 상태 평가 장치는 피부 영역을 촬영한 제1 영상 및 상기 제1 영상의 촬영 시점 후에 상기 피부 영역을 촬영한 제2 영상에서 각각 피부 영역을 추출하고, 추출한 피부 영역에 대한 색상값을 기준으로 상기 제1 영상의 피부 영역 및 상기 제2 영상의 피부 영역에 대한 차이를 나타내는 복수의 평가값을 연산하고, 상기 복수의 평가값을 이용하여 상기 피부 영역에 대한 상태 평가를 수행하는 연산 장치를 포함한다.A skin condition evaluating apparatus using an image extracts a skin region from a first image obtained by photographing a skin region and a second image obtained by photographing the skin region after a photographing time point of the first image, Calculating a plurality of evaluation values indicating a difference between a skin region of the first image and a skin region of the second image on the basis of the plurality of evaluation values and performing a state evaluation on the skin region using the plurality of evaluation values, .

이하 설명하는 기술은 추가적인 장치 없이 스마트 기기와 같은 장치를 이용하여 손쉽게 피부 상태를 평가할 수 있다.The techniques described below can easily assess skin conditions using devices such as smart devices without additional devices.

도 1은 영상을 이용한 피부 상태 평가 장치의 구성을 도시한 예이다.
도 2는 영상을 이용한 피부 상태 평가 방법에 대한 순서도의 예이다.
도 3은 피부 상태 평가를 위한 히스토그램에 대한 예이다.
도 4는 피부 치료 상태에 대한 평가값의 우선순위를 도시한 예이다.
도 5는 피부 미용 상태에 대한 평가값의 우선순위를 도시한 예이다.
도 6은 피부 상태를 평가하는 스마트 기기의 화면에 대한 예이다.Fig. 1 shows an example of a configuration of a skin condition evaluating apparatus using images.
2 is an example of a flowchart of a skin condition evaluation method using an image.
3 is an example of a histogram for skin condition evaluation.
Fig. 4 is an example showing the priority of the evaluation value for the skin treatment state.
5 is an example showing a priority order of evaluation values for the skin-beauty condition.
6 is an example of a screen of a smart device for evaluating skin condition.

이하 설명하는 기술은 다양한 변경을 가할 수 있고 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 이하 설명하는 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 이하 설명하는 기술의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.The following description is intended to illustrate and describe specific embodiments in the drawings, since various changes may be made and the embodiments may have various embodiments. However, it should be understood that the following description does not limit the specific embodiments, but includes all changes, equivalents, and alternatives falling within the spirit and scope of the following description.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 해당 구성요소들은 상기 용어들에 의해 한정되지는 않으며, 단지 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 이하 설명하는 기술의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.The terms first, second, A, B, etc., may be used to describe various components, but the components are not limited by the terms, but may be used to distinguish one component from another . For example, without departing from the scope of the following description, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component. And / or < / RTI > includes any combination of a plurality of related listed items or any of a plurality of related listed items.

본 명세서에서 사용되는 용어에서 단수의 표현은 문맥상 명백하게 다르게 해석되지 않는 한 복수의 표현을 포함하는 것으로 이해되어야 하고, "포함한다" 등의 용어는 설시된 특징, 개수, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 의미하는 것이지, 하나 또는 그 이상의 다른 특징들이나 개수, 단계 동작 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 배제하지 않는 것으로 이해되어야 한다.As used herein, the singular " include "should be understood to include a plurality of representations unless the context clearly dictates otherwise, and the terms" comprises & , Parts or combinations thereof, and does not preclude the presence or addition of one or more other features, integers, steps, components, components, or combinations thereof.

도면에 대한 상세한 설명을 하기에 앞서, 본 명세서에서의 구성부들에 대한 구분은 각 구성부가 담당하는 주기능 별로 구분한 것에 불과함을 명확히 하고자 한다. 즉, 이하에서 설명할 2개 이상의 구성부가 하나의 구성부로 합쳐지거나 또는 하나의 구성부가 보다 세분화된 기능별로 2개 이상으로 분화되어 구비될 수도 있다. 그리고 이하에서 설명할 구성부 각각은 자신이 담당하는 주기능 이외에도 다른 구성부가 담당하는 기능 중 일부 또는 전부의 기능을 추가적으로 수행할 수도 있으며, 구성부 각각이 담당하는 주기능 중 일부 기능이 다른 구성부에 의해 전담되어 수행될 수도 있음은 물론이다.Before describing the drawings in detail, it is to be clarified that the division of constituent parts in this specification is merely a division by main functions of each constituent part. That is, two or more constituent parts to be described below may be combined into one constituent part, or one constituent part may be divided into two or more functions according to functions that are more subdivided. In addition, each of the constituent units described below may additionally perform some or all of the functions of other constituent units in addition to the main functions of the constituent units themselves, and that some of the main functions, And may be carried out in a dedicated manner.

또, 방법 또는 동작 방법을 수행함에 있어서, 상기 방법을 이루는 각 과정들은 문맥상 명백하게 특정 순서를 기재하지 않은 이상 명기된 순서와 다르게 일어날 수 있다. 즉, 각 과정들은 명기된 순서와 동일하게 일어날 수도 있고 실질적으로 동시에 수행될 수도 있으며 반대의 순서대로 수행될 수도 있다.Also, in performing a method or an operation method, each of the processes constituting the method may take place differently from the stated order unless clearly specified in the context. That is, each process may occur in the same order as described, may be performed substantially concurrently, or may be performed in the opposite order.

이하 설명하는 기술은 사용자의 영상을 분석하여 사용자의 피부 상태를 평가하는 기법에 관한 것이다. 도 1은 영상을 이용한 피부 상태 평가 장치의 구성을 도시한 예이다. 도 1은 피부 상태 평가 장치가 피부 영역으로 얼굴을 검출하는 예를 도시한다. 피부 상태 평가 장치는 피부 영역을 분석하여 해당 피부 영역에 대한 상태를 평가한다. 피부 상태 평가 장치는 제1 시점의 영상에서 피부 영역을 검출하고, 제1 시점 이후인 제2 시점의 영상에서 동일한 피부 영역을 검출한다. 피부 상태 평가 장치는 제1 시점의 피부 영역과 제2 시점의 피부 영역을 비교분석하여 피부 상태를 평가한다. 이후 설명의 편의를 위해 제1 시점의 피부 영역을 제1 피부 영역이라고 명명하고, 제2 시점의 피부 영역을 제2 피부 영역이라고 명명한다. 피부 상태 평가 장치는 제1 피부 영역의 색상값과 제2 피부 영역에 대한 색상값을 이용하여 피부 상태를 평가하기 위한 척도인 평가값을 연산한다. 피부 상태 평가 장치는 평가값을 기준으로 제1 피부 영역과 제2 피부 영역의 차이를 기준으로 피부 상태(피부 상태의 변화)를 평가한다. 한편 피부 상태에 대한 다양한 항목이 존재한다. 피부 상태를 나타내는 항목에 대해서는 후술한다. The technique described below relates to a technique for evaluating a skin condition of a user by analyzing a user's image. Fig. 1 shows an example of a configuration of a skin condition evaluating apparatus using images. 1 shows an example in which a skin condition evaluating apparatus detects a face in a skin region. The skin condition evaluation device analyzes the skin area and evaluates the condition for the skin area. The skin condition evaluating apparatus detects the skin region from the image at the first view point and detects the same skin region from the image at the second view point after the first view point. The skin condition evaluating apparatus compares and analyzes the skin region of the first time point and the skin region of the second time point to evaluate the skin condition. For convenience of explanation, the skin region at the first viewpoint is referred to as a first skin region, and the skin region at the second viewpoint is referred to as a second skin region. The skin condition evaluating apparatus calculates an evaluation value which is a scale for evaluating the skin condition using the color value of the first skin area and the color value of the second skin area. The skin condition evaluating device evaluates the skin condition (change in skin condition) based on the difference between the first skin area and the second skin area based on the evaluation value. On the other hand, there are various items about skin condition. Items indicating the skin condition will be described later.

도 1(a)는 스마트폰과 같은 스마트 기기(50)를 이용하여 피부 상태를 평가하는 예이다. 사용자는 스마트 기기(50)에 내장된 카메라로 얼굴을 촬영한다. 스마트 기기(50)는 소스 영상에서 얼굴 영역을 검출하고, 얼굴 영역에서 색상값을 추출한다. 스마트 기기(50)는 제1 피부 영역과 제2 피부 영역의 색상값을 이용하여 피부 상태를 평가한다.1 (a) is an example of evaluating a skin condition using a smart device 50 such as a smart phone. The user takes a face with the camera built in the smart device 50. The smart device 50 detects the face area from the source image and extracts the color value from the face area. The smart device 50 evaluates the skin condition using the color values of the first skin area and the second skin area.

도 1(a)에서 스마트 기기(50)는 카메라(51), 저장 장치(52), 연산 장치(53) 및 출력 장치(54)를 포함한다. 카메라(51)는 소스 영상을 획득한다. 연산 장치(53)는 소스 영상에 포함된 피부 영역에 대한 색상값을 추출하고, 색상값을 이용하여 피부 상태를 나타내는 평가값을 연산한다. 저장 장치(52)는 소스 영상을 임시로 저장할 수 있다. 또한 저장 장치(52)는 피부 상태를 평가하는데 사용되는 정보를 저장할 수 있다. 예컨대, 복수의 평가값을 사용하는 경우 피부 상태의 항목에 따라 서로 다른 가중치를 부여할 수 있다. 저장 장치(52)는 평가값을 연산하는 함수, 피부 상태의 항목에 따라 평가값에 부여되는 가중치 등을 저장할 수 있다. 출력 장치(54)는 평가한 피부 상태에 대한 정보를 출력할 수 있다.1 (a), the smart device 50 includes a camera 51, a storage device 52, a computing device 53, and an output device 54. The camera 51 acquires the source image. The arithmetic unit 53 extracts a color value for a skin region included in the source image, and calculates an evaluation value indicating the skin condition using the color value. The storage device 52 may temporarily store the source image. The storage device 52 may also store information used to evaluate the skin condition. For example, when a plurality of evaluation values are used, different weights can be given according to items of the skin condition. The storage device 52 may store a function for calculating an evaluation value, a weight given to the evaluation value according to an item of skin condition, and the like. The output device 54 can output information on the evaluated skin condition.

도 1(b)는 PC와 같은 장치를 이용하여 피부 상태를 평가하는 예이다. 사용자는 컴퓨터(85)에 연결된 카메라(81)로 얼굴을 촬영한다. 컴퓨터(85)는 소스 영상에서 얼굴 영역을 검출하고, 얼굴 영역의 색상값을 추출한다. 컴퓨터(85)는 색상값을 이용하여 피부 상태를 나타내는 평가값을 연산한다. 컴퓨터(85)는 평가값을 기준으로 피부 영역에 대한 피부 상태를 평가한다. 1 (b) is an example of evaluating the skin condition using a device such as a PC. The user shoots the face with the camera 81 connected to the computer 85. The computer 85 detects the face area in the source image and extracts the color value of the face area. The computer 85 calculates an evaluation value indicating the skin condition using the color value. The computer 85 evaluates the skin condition for the skin region based on the evaluation value.

도 1(c)는 사용자 단말(91)로 획득한 영상을 이용하여 원격지에 있는 서버(95)가 피부 상태를 평가하는 예이다. 사용자는 사용자 단말(91)에 내장된 카메라로 얼굴을 촬영한다. 사용자 단말(91)은 촬영한 소스 영상을 네트워크를 통해 서버(95)에 전달한다. 이 경우 사용자 단말(91)은 데이터 전송을 위한 통신 모듈을 포함한다. 서버(95)는 소스 영상에서 얼굴 영역을 검출하고, 얼굴 영역의 색상값을 추출한다. 서버(95)는 색상값을 이용하여 피부 상태를 나타내는 평가값을 연산하고, 평가값을 기준으로 피부 영역에 대한 피부 상태를 평가한다. 서버(95)는 피부 상태에 대한 정보를 사용자 단말(91)에 전달할 수 있다.1 (c) shows an example in which the server 95 at a remote location evaluates the skin condition using the image acquired by the user terminal 91. The user takes a face with a camera built in the user terminal 91. The user terminal 91 transfers the photographed source image to the server 95 via the network. In this case, the user terminal 91 includes a communication module for data transmission. The server 95 detects the face area from the source image and extracts the color value of the face area. The server 95 calculates an evaluation value indicating the skin condition using the color value, and evaluates the skin condition with respect to the skin area based on the evaluation value. The server 95 may transmit information on the skin condition to the user terminal 91. [

경우에 따라서는 사용자 단말(91)이 소스 영상에서 피부 영역을 검출하여 서버(95)에 전달할 수 도 있다. 이 경우 서버(95)는 피부 영역에 대한 색상값을 추출하고, 평가값을 연산하여 피부 상태를 평가한다. 또는 사용자 단말(91)이 소스 영역에서 피부 영역을 검출하고, 피부 영역에 대한 색상값을 추출할 수 있다. 이 경우 사용자 단말(91)은 피부 영역에 대한 색상값을 서버(95)에 전달하고, 서버(95)는 색상값을 이용하여 피부 상태를 평가할 수 있다.In some cases, the user terminal 91 may detect the skin region from the source image and transmit it to the server 95. In this case, the server 95 extracts a color value for a skin region, calculates an evaluation value, and evaluates the skin condition. Alternatively, the user terminal 91 may detect the skin region in the source region and extract the color value for the skin region. In this case, the user terminal 91 transmits the color value for the skin region to the server 95, and the server 95 can evaluate the skin condition using the color value.

도 1에서 다양한 장치를 이용하여 피부 상태를 평가하는 예를 설명하였다. 이하 설명의 편의를 위해 영상에서 피부 영역을 검출하고, 피부 영역에 대한 피부 상태를 평가하는 장치를 컴퓨터 장치라고 명명한다.In FIG. 1, an example of evaluating the skin condition using various devices has been described. For convenience of explanation, an apparatus for detecting a skin region in an image and evaluating a skin condition for a skin region is referred to as a computer apparatus.

도 2는 영상을 이용한 피부 상태 평가 방법에 대한 순서도의 예이다.2 is an example of a flowchart of a skin condition evaluation method using an image.

컴퓨터 장치는 피부 상태 평가를 위한 소스 영상을 획득한다(110). 소스 영상은 동영상 또는 정지 영상일 수 있다. 소스 영상은 전술한 바와 같이 일정한 시간 간격을 갖고 촬영된 제1 영상 및 제2 영상을 의미한다. 소스 영상은 사용자의 피부 영역을 포함한다. 컴퓨터 장치는 카메라로 촬영한 소스 영상에서 피부 영역을 검출한다(120). 컴퓨터 장치가 피부 영역을 검출하는 알고리즘은 종래 알려진 다양한 기법을 이용할 수 있다. 나아가 컴퓨터 장치는 피부 영역 중 특정한 관심 영역을 추출할 수도 있다. 관심 영역은 얼굴 영역의 이마, 볼 등과 같은 영역일 수 있다. 컴퓨터 장치는 영상 분석을 통해 특정한 관심 영역을 자동으로 추출할 수 있다. 나아가 컴퓨터 장치는 사용자로부터 관심 영역을 선택하는 명령을 받아 관심 영역을 설정할 수도 있다.The computer device acquires (110) a source image for skin condition evaluation. The source image may be a moving image or a still image. The source image means the first image and the second image captured at a predetermined time interval as described above. The source image includes a skin area of the user. The computer device detects the skin region from the source image photographed by the camera (120). The algorithm by which the computer device detects the skin area can utilize various techniques known in the art. Further, the computer device may extract a specific region of interest of the skin region. The region of interest may be a region such as a forehead, a ball, or the like of the face region. The computer device can automatically extract a specific region of interest through image analysis. Further, the computer device may receive an instruction to select a region of interest from a user and set a region of interest.

컴퓨터 장치는 제1 영상 및 제2 영상에서 각각 피부 영역 또는 관심 영역에 대한 색상값 히스토그램을 추출한다(130). 컴퓨터 장치는 다양한 색상 체계 중 하나 이상에서 색상값을 추출하여 사용할 수 있다.The computer device extracts a color value histogram for the skin region or the ROI from the first image and the second image, respectively (130). The computer device can extract color values from one or more of the various color schemes and use them.

예컨대, (1) 색상 데이터는 RGB 색상 체계를 기준으로 R값, G값 및 B값 중 적어도 하나를 사용할 수 있다. 색상 데이터는 R값, G값 및 B값 중 적어도 하나에 대한 평균값을 사용할 수도 있다. (2) 컴퓨터 장치는 RGB 색상 체계를 다른 색상 체계로 변환할 수 있다. 예컨대, 컴퓨터 정치는 RGB 색상 체계를 YUV, HSV, YCbCr, YCgCo, 질감 등과 같은 다양한 색상 체계로 변환할 수 있다. 질감은 대표적으로 영상의 Contrast 값을 이용하여 표현될 수 있다. 컴퓨터 장치는 특정 색상 체계의 색차 성분 또는 휘도 성분 중 적어도 하나를 색상값으로 추출할 수 있다. 이 경우 색상 데이터는 주변 환경(조도 등)에 영향을 적게 받는 성분 중 하나를 이용할 수 있다. 예컨대, YCbCr의 경우 Cb 또는 Cr 중 적어도 하나를 이용할 수 있다. YCgCo의 경우는 Cg 또는 Co 중 적어도 하나를 이용할 수 있다. 나아가 두 개의 색차 성분 중 조도의 변화에 보다 강인한 어느 하나를 이용할 수 있다. 예컨대, YCgCo의 경우는 Cg만을 이용할 수 있다. 이 경우 컴퓨터 장치는 피부 영역의 Cg 색상 데이터의 평균값을 색상값으로 추출할 수 있다. (3) 나아가 색상 데이터는 RGB, YUV, HSV, YCbCr, YCgCo, 질감 등과 같은 다양한 색상 체계에서 적어도 하나 이상의 색 성분에 가중치를 적용하여 조합한 값일 수도 있다. 색 성분을 조합하는 경우 색상 데이터는 색상 체계 및 색 성분의 종류에 따라 서로 다른 가중치를 부여한 값을 합산한 값일 수도 있다. For example, (1) the color data may use at least one of an R value, a G value, and a B value based on the RGB color scheme. The color data may use an average value for at least one of R value, G value, and B value. (2) The computer device can convert the RGB color scheme to a different color scheme. For example, computer politics can convert RGB color schemes to various color schemes such as YUV, HSV, YCbCr, YCgCo, texture, and the like. The texture can be represented by using the contrast value of the image. The computer device may extract at least one of a chrominance component or a luminance component of a specific color system as a color value. In this case, the color data may use one of the components that are less influenced by the surrounding environment (illumination, etc.). For example, in the case of YCbCr, at least one of Cb and Cr can be used. In the case of YCgCo, at least one of Cg and Co may be used. Further, one of the two chrominance components, which is more robust to the variation of the illuminance, can be used. For example, in the case of YCgCo, only Cg can be used. In this case, the computer device can extract the average value of the Cg color data of the skin region as a color value. (3) Further, the color data may be a value obtained by combining weights applied to at least one color component in various color systems such as RGB, YUV, HSV, YCbCr, YCgCo, In the case of combining color components, the color data may be a value obtained by adding different weighted values depending on the color system and the type of color component.

컴퓨터 장치는 제1 피부 영역의 색상값 히스토그램 및 제2 영상의 색상값 히스토그램을 기준으로 평가값을 연산한다(140). 평가값은 제1 피부 영역과 제2 피부 영역의 피부 상태의 차이를 나타내는 척도이다. 컴퓨터 장치는 평가값을 기준으로 피부 영역에 대한 상태를 평가한다(150). 피부 상태에 대한 평가는 정략적 평가 내지 정성적 평가를 의미한다.The computer calculates an evaluation value based on the color value histogram of the first skin region and the color value histogram of the second image (140). The evaluation value is a measure indicating a difference in skin condition between the first skin region and the second skin region. The computer device evaluates the condition for the skin area based on the evaluation value (150). The evaluation of the skin condition means a qualitative evaluation or a qualitative evaluation.

피부 상태를 평가하기 위한 척도가 되는 평가값에 대해 설명한다. 컴퓨터 장치는 피부 영역에 대한 색상값만을 기준으로 평가값을 연산할 수 있다. 나아가 컴퓨터 장치는 피부 영역에 대한 히스토그램(Histogram)을 이용하여 평가값을 연산할 수 있다. 도 3은 피부 상태 평가를 위한 히스토그램에 대한 예이다. 이후 도 3을 기준으로 평가값에 대해 설명한다. 컴퓨터 장치는 아래 설명하는 6개의 평가값(d1, d2, d3, d4, d5 및 d6)을 사용하여 피부 상태를 평가할 수 있다.An evaluation value serving as a scale for evaluating the skin condition will be described. The computer device can calculate the evaluation value based on only the color value for the skin area. Furthermore, the computer device can calculate the evaluation value using a histogram of the skin area. 3 is an example of a histogram for skin condition evaluation. The evaluation values will be described with reference to Fig. The computer device can evaluate the skin condition using the six evaluation values (d 1 , d 2 , d 3 , d 4 , d 5 and d 6) described below.

평가값 dEvaluation value d 1One

컴퓨터 장치는 색상값에 대한 히스토그램의 평균값을 기준으로 평가값을 연산할 수 있다. 아래의 수학식 1은 히스토그램의 평균값을 사용한 평가값 d1이다. 아래의 수학식 1에서 mbefore는 이전 시점에 촬영한 제1 영상의 피부 영역(제1 피부 영역)에 대한 히스토그램의 평균값이고, mafter는 제1 영상 이후에 촬영한 제2 영상의 피부 영역(제2 피부 영역)에 대한 히스토그램의 평균값이다.The computer device can calculate the evaluation value based on the average value of the histogram for the color value. Equation 1 below is the evaluation value d 1 using the average value of the histogram. In Equation 1, m before is an average value of a histogram for a skin region (first skin region) of a first image photographed at a previous point, and m after indicates a skin region (second skin region) of a second image photographed after the first image The second skin area).

Figure pat00001
Figure pat00001

평가값 dEvaluation value d 22

컴퓨터 장치는 색상값에 대한 히스토그램에서 피크의 위치를 기준으로 평가값을 연산할 수 있다. 아래의 수학식 2는 히스토그램 상에서 피크의 위치에 해당하는 색상값을 사용한 평가값 d2이다. 아래의 수학식 2에서 Mbefore는 제1 피부 영역에 대한 히스토그램의 피크 위치에 해당하는 색상값이고, Mafter는 제2 피부 영역에 대한 히스토그램의 피크 위치에 해당하는 색상값이다. 도 3에서 하나의 히스토그램에서 피크에 해당하는 위치를 표시하였다.The computer device can calculate the evaluation value based on the position of the peak in the histogram for the color value. Equation 2 below is the evaluation value d 2 using the color value corresponding to the position of the peak on the histogram. In Equation (2), M before is a color value corresponding to the peak position of the histogram for the first skin region, and M after is a color value corresponding to the peak position of the histogram for the second skin region. In FIG. 3, a position corresponding to a peak in one histogram is indicated.

Figure pat00002
Figure pat00002

평가값 dEvaluation value d 33

컴퓨터 장치는 색상값에 대한 표준편차를 기준으로 평가값을 연산할 수 있다. 아래의 수학식 3은 표준편차를 사용한 평가값 d3이다. 아래의 수학식 3에서 σbefore는 제1 피부 영역의 색상값에 대한 표준편차이고, σafter는 제2 피부 영역의 색상값에 대한 표준편차이다.The computer device can calculate the evaluation value based on the standard deviation of the color value. Equation 3 below is the evaluation value d 3 using the standard deviation. In Equation (3), σ before is the standard deviation of the hue value of the first skin region, and σ after is the standard deviation of the hue value of the second skin region.

Figure pat00003
Figure pat00003

평가값 dEvaluation value d 44

컴퓨터 장치는 색상값에 대한 히스토그램 상에서 피크의 좌측에 위치하는 색상값의 개수를 기준으로 평가값을 연산할 수 있다. 컴퓨터 장치는 히스토그램의 피크 위치를 기준으로 피크의 좌측에 위치하는 색상값의 개수를 사용하여 평가값을 결정할 수 있다. 경우에 따라서는 피크의 우측에 위치하는 색상값의 개수를 사용할 수도 있을 것이다. 아래의 수학식 4는 히스토그램에서 피크의 좌측에 위치하는 색상값의 개수를 사용한 평가값 d4이다. 아래의 수학식 4에서 Nbefore는 제1 피부 영역의 히스토그램에서 피크의 위치를 기준으로 좌측에 있는 색상값들의 개수이고, Nafter는 제2 피부 영역의 히스토그램에서 피크의 위치를 기준으로 좌측에 있는 색상값들의 개수이다. 도 3을 기준으로 설명하면 피크의 좌측에 있는 색상값의 개수는 140개 이다.The computer device can calculate the evaluation value based on the number of color values located on the left side of the peak on the histogram for the color value. The computer device can determine the evaluation value using the number of color values located on the left side of the peak based on the peak position of the histogram. In some cases, the number of color values located on the right side of the peak may be used. Equation 4 below is the evaluation value d 4 using the number of color values located on the left side of the peak in the histogram. In Equation (4), N before is the number of color values on the left side with respect to the position of the peak in the histogram of the first skin region, and N after is the number of color values on the left side with respect to the position of the peak in the histogram of the second skin region The number of color values. Referring to FIG. 3, the number of color values on the left side of the peak is 140.

Figure pat00004
Figure pat00004

평가값 dEvaluation value d 55

컴퓨터 장치는 색상값에 대한 히스토그램의 피크를 기준으로 평가값을 연산할 수 있다. 컴퓨터 장치는 히스토그램의 피크의 높이를 기준으로 평가값을 결정할 수 있다. 아래의 수학식 5는 히스토그램 상에서 피크의 높이를 사용한 평가값 d5이다. 아래의 수학식 5에서 Hbefore는 제1 피부 영역의 히스토그램의 피크 높이이고, Hafter는 제2 피부 영역의 히스토그램의 피크 높이이다. 도 3에서는 하나의 히스토그램에 대해 피크의 높이를 표시하였다.The computer device can calculate the evaluation value based on the peak of the histogram for the color value. The computer device can determine the evaluation value based on the height of the peak of the histogram. Equation 5 below is the evaluation value d 5 using the height of the peak on the histogram. In Equation (5), H before is the peak height of the histogram of the first skin region, and H after is the peak height of the histogram of the second skin region. In Fig. 3, the height of the peak is indicated for one histogram.

Figure pat00005
Figure pat00005

평가값 dEvaluation value d 66

컴퓨터 장치는 색상값에 대한 히스토그램의 피크와 최솟값을 기준으로 평가값을 연산할 수 있다. 아래의 수학식 6은 히스토그램에서 피크의 색상값과 최솟값에 해당하는 색상값을 사용한 평가값 d6이다. 히스토그램에서 최솟값은 가장 좌측에 있는 색상값에 해당한다. 아래의 수학식 6에서 Mbefore는 제1 피부 영역의 히스토그램에서 피크 위치의 색상값이고, Mafter는 제2 피부 영역의 히스토그램에서 피크 위치의 색상값이다. 또한 수학식 6에서 minbefore는 제1 피부 영역의 히스토그램에서 최솟값 위치의 색상값이고, minafter는 제2 피부 영역의 히스토그램에서 최솟값 위치의 색상값이다.The computer device can calculate the evaluation value based on the peak and the minimum value of the histogram for the color value. Equation (6) below is the evaluation value d 6 using the color value of the peak and the color value corresponding to the minimum value in the histogram. The minimum value in the histogram corresponds to the leftmost color value. In Equation (6), M before is the color value of the peak position in the histogram of the first skin region, and M after is the color value of the peak position in the histogram of the second skin region. In Equation (6), min before is the color value of the minimum value in the histogram of the first skin region, and min after is the color value of the minimum value position in the histogram of the second skin region.

Figure pat00006
Figure pat00006

컴퓨터 장치는 전술한 복수의 평가값 d1 ~ d6를 이용하여 피부 상태를 평가할 수 있다. 컴퓨터 장치는 복수의 평가값을 사용하는 경우 복수의 평가값을 합산한 값을 기준으로 피부 상태를 평가할 수 있다. 물론 컴퓨터 장치는 복수의 평가값을 다른 방식으로 가공한 결과를 이용하여 피부 상태를 평가할 수도 있을 것이다. 컴퓨터 장치가 복수의 평가값을 합산하거나 가공한 값을 이용하는 경우 복수의 평가값에 대한 가중치를 부여할 수 있다. 피부 상태의 항목에 따라 복수의 평가값에 대한 가중치가 서로 달라질 수 있다. 예컨대, 특정한 피부 상태의 항목인 경우 전술한 평가값 중 우선적으로 사용될 수 있는 값이 있을 수 있다. 나아가 가중치는 어떤 색상 체계를 사용하는지 나아가 어떤 색상 요소를 사용하는지에 따라 달라질 수도 있다.The computer device can evaluate the skin condition using the plurality of evaluation values d 1 to d 6 described above. The computer device can evaluate the skin condition based on a value obtained by adding a plurality of evaluation values when a plurality of evaluation values are used. Of course, the computer device may also be able to evaluate the skin condition using results obtained by processing a plurality of evaluation values in different ways. When a computer device uses a value obtained by summing or processing a plurality of evaluation values, a weight for a plurality of evaluation values can be given. The weights for the plurality of evaluation values may be different from each other depending on items of the skin condition. For example, in the case of an item of a specific skin condition, there may be a value that can be preferentially used among the evaluation values described above. Furthermore, weights may vary depending on which color scheme is used and which color factors are used.

도 4는 피부 치료 상태에 대한 평가값의 우선순위를 도시한 예이다. 도 4는 피부 치료 과정에서 평가가 필요한 피부 상태의 항목에 대한 예이다. 도 4는 여드름 심화, 기미/주근깨 옅어짐, 피부 변색 복구, 피부 패임의 채워짐, 피부 홍조 및 화상 흉터 옅어짐을 예로 도시하였다. Fig. 4 is an example showing the priority of the evaluation value for the skin treatment state. Figure 4 is an example of a skin condition item that needs to be evaluated during the skin treatment process. FIG. 4 shows an example of deepening of acne, lightening of spots / freckles, restoration of skin discoloration, filling of skin depression, skin flushing and burn scarring.

도 4(a)는 RGB 색상 체계에서 B값을 사용하여 평가값을 도출한 예이다. 여드름 심화를 예로 설명하면 평가값 d4가 가장 높은 우선순위를 갖는다. 피부 상태 평가에 대한 평가값의 우선 순위를 실험적 결과에 해당한다. 도 4(a)에서 여드름 심화에 대한 평가값 우선 순위는 d4 > d5 > d6 > d3 > d2 > d1이다. 이는 평가값 d4가 여드름 심화 정도를 판단할 수 있는 가장 좋은 평가값이라는 의미이다. 도 4(a)를 살펴보면 피부 상태의 항목에 따라 평가값 우선 순위가 상이한 것을 알 수 있다. 또한, 사용한 DB에 따라 순위가 일부 달라질 수 있다.4 (a) shows an example of deriving the evaluation value using the B value in the RGB color system. Taking acne deepening as an example, the evaluation value d 4 has the highest priority. The priorities of the evaluation values for skin condition evaluation correspond to experimental results. In FIG. 4 (a), the evaluation value priorities for deepening the acne are d 4 > d 5 > d 6 > d 3 > d 2 > d 1 . This means that the evaluation value d 4 is the best evaluation value for judging the degree of deepening of acne. Referring to FIG. 4 (a), it can be seen that the evaluation value priorities are different according to items of the skin condition. Also, the ranking may be partially changed depending on the DB used.

컴퓨터 장치는 평가값 d4만을 기준으로 피부 상태에 대한 평가를 수행할 수 있다. 나아가 컴퓨터 장치는 모든 평가값을 이용하여 피부 상태에 대한 평가를 수행할 수 있다. 후자의 경우 컴퓨터 장치는 각 평가값에 대해 우선 순위에 따른 가중치를 부여할 수 있다. 예컨대, 전체 가중치의 합을 1이라고 가정하면 1 순위의 평가값은 0.4, 2 순위의 평가값은 0.35, 3 순위의 평가값은 0.25 등의 가중치를 가질 수 있다. The computer device can perform an evaluation of the skin condition based on only the evaluation value d 4 . Furthermore, the computer device can perform an evaluation of the skin condition using all evaluation values. In the latter case, the computer device may assign a weight according to priority to each evaluation value. For example, assuming that the sum of all the weights is 1, the evaluation value of the first order is 0.4, the evaluation value of the second order is 0.35, and the evaluation value of the third order is 0.25.

도 4(b)는 YCbCr 색상 체계에서 Cb값을 사용하여 평가값을 도출한 예이다. 여드름 심화를 예로 설명하면 평가값 d5가 가장 높은 우선순위를 갖는다. RGB의 B를 이용한 도 4(a)와는 다른 결과라는 것을 알 수 있다. 도 4(b)에서 여드름 심화에 대한 평가값 우선 순위는 d5 > d4 > d2 > d6 > d1 > d3이다. 4 (b) is an example of deriving the evaluation value using the Cb value in the YCbCr color system. Taking acne deepening as an example, the evaluation value d 5 has the highest priority. It can be understood that the result is different from Fig. 4 (a) using RGB B's. In FIG. 4 (b), the evaluation value priorities for deepening the acne are d 5 > d 4 > d 2 > d 6 > d 1 > d 3 .

도 5는 피부 미용 상태에 대한 평가값의 우선순위를 도시한 예이다. 도 5는 피부 미용 과정에서 평가가 필요한 피부 상태의 항목에 대한 예이다. 도 5는 잡티 가려짐, 피부톤 밝아짐, 피부톤 일정함, 피부 패임 가려짐 및 홍조 정도를 예로 도시하였다.5 is an example showing a priority order of evaluation values for the skin-beauty condition. Figure 5 is an example of a skin condition item that needs to be evaluated in the skin care process. Fig. 5 shows an example of shading, brightness of skin tone, consistency of skin tone, shrinkage of skin, and degree of flushing.

도 5(a)는 RGB 색상 체계에서 B값을 사용하여 평가값을 도출한 예이다. 잡티 가려짐을 예로 설명하면 평가값 d5가 가장 높은 우선순위를 갖는다. 피부 상태 평가에 대한 평가값의 우선 순위를 실험적 결과에 해당한다. 도 5(a)에서 잡티 가려짐에 대한 평가값 우선 순위는 d5 > d6 > d3 > d1 > d2 > d4이다. 이는 평가값 d5가 여드름 심화 정도를 판단할 수 있는 가장 좋은 평가값이라는 의미이다. 도 5(b)는 ?CbCr 색상 체계에서 Cb값을 사용하여 평가값을 도출한 예이다. 잡티 가려짐을 예로 설명하면 평가값 d2가 가장 높은 우선순위를 갖는다. RGB의 B를 이용한 도 5(a)와는 다른 결과라는 것을 알 수 있다. 도 5(b)에서 잡티 가려짐에 대한 평가값 우선 순위는 d2 > d1 > d6 > d3 > d5 > d4이다. 또한, 사용한 DB에 따라 순위가 일부 달라질 수 있다.5 (a) shows an example of deriving an evaluation value using the B value in the RGB color system. For example, the evaluation value d 5 has the highest priority. The priorities of the evaluation values for skin condition evaluation correspond to experimental results. In FIG. 5 (a), the evaluation value priorities for the shading are d 5 > d 6 > d 3 > d 1 > d 2 > d 4 . This means that the evaluation value d 5 is the best evaluation value for judging the extent of acne deepening. 5 (b) is an example of deriving the evaluation value using the Cb value in the? CbCr color system. For example, the evaluation value d 2 has the highest priority. It can be understood that the result is different from Fig. 5 (a) using RGB B. In FIG. 5 (b), the evaluation value priorities for the shading are d 2 > d 1 > d 6 > d 3 > d 5 > d 4 . Also, the ranking may be partially changed depending on the DB used.

전술한 바와 같이 컴퓨터 장치는 복수의 평가값을 사용하여 피부 상태를 평가할 수 있다. 이 경우 컴퓨터 장치는 아래의 수학식 7을 사용하여 피부 상태를 평가하기 위한 최종 결과를 연산할 수 있다. 수학식 7에서 wi는 평가값 di에 대한 가중치를 의미한다.As described above, the computer device can evaluate the skin condition using a plurality of evaluation values. In this case, the computer device can calculate the final result for evaluating the skin condition using Equation (7) below. In Equation (7), w i denotes a weight for the evaluation value d i .

Figure pat00007
Figure pat00007

한편 컴퓨터 장치는 두 개 이상의 색요소를 이용하여 피부 영역을 분석할 수 있다. 예컨대, RGB 색상 체계에서 G값과 B값을 이용할 수 있다. 이 경우 색상 요소에 따라 서로 다른 가중치를 부여할 수 있다. 나아가 컴퓨터 장치는 복수의 색상 체계를 이용하여 피부 영역을 분석할 수 있다. 예컨대, RGB 색상 체계의 B값과 YCbCr 색상 체계의 Cb값을 이용할 수 있다. 이 경우 색상 체계 내지 색상 요소마다 서로 다른 가중치를 부여할 수 있다. 아래 수학식 8은 복수의 색상 체계 내지 복수의 색상 요소를 이용하여 피부 상태를 평가하는 예이다.On the other hand, the computer device can analyze the skin area using two or more color elements. For example, G and B values can be used in the RGB color scheme. In this case, different weighting factors can be given depending on the color elements. Furthermore, the computer device can analyze the skin area using a plurality of color schemes. For example, the B value of the RGB color scheme and the Cb value of the YCbCr color scheme can be used. In this case, different weights can be given to each color system or color element. Equation (8) below is an example of evaluating the skin condition using a plurality of color systems or a plurality of color elements.

Figure pat00008
Figure pat00008

i는 평가값에 대한 식별자이고, j는 색상 요소에 대한 식별자이다. 예컨대, di1은 R, di2은 G, di3은 B에 대한 평가값이고, wi1은 R, wi2은 G, wi3은 B에 대한 가중치일 수 있다. 이 경우 가중치는 평가값의 종류(i) 및 색상 체계/ 색상 요소의 종류에 따라 서로 다른 값일 수 있다.i is an identifier for the evaluation value, and j is an identifier for the color element. For example, d i1 may be an evaluation value for R, d i2 for G, d i3 for B, w i1 may be a weight for R, w i2 for G, and w i3 for B. In this case, the weight may be a different value depending on the type (i) of the evaluation value and the type of color system / color element.

도 6는 피부 상태를 평가하는 스마트 기기(50)의 화면에 대한 예이다. 도 6을 기준으로 스마트 기기(50)를 사용하여 피부 상태를 평가하는 과정을 설명한다. 도 6의 스마트 기기는 도 1의 스마트 기기(50)에 해당한다.6 is an example of a screen of the smart device 50 for evaluating the skin condition. The process of evaluating the skin condition using the smart device 50 will be described with reference to FIG. The smart device of FIG. 6 corresponds to the smart device 50 of FIG.

도 6(a)는 피부 상태를 평가하는 앱을 실행한 화면에 대한 예이다. 도 6(a)는 제1 영상(Before) 및 제2 영상(After)를 입력하는 메뉴를 표시한다. 사용자는 스마트 기기(50)에 내장된 카메라를 이용하여 제1 영상을 입력하고, 일정한 시간 간격을 갖고 촬영된 제2 영상을 입력할 수 있다('촬영' 메뉴). 또는 사용자는 스마트 기기(50)에 저장한 사진 파일을 불러오는 방식으로 제1 영상 및 제2 영상을 입력할 수도 있다('선택' 메뉴). 도 6(b)는 사용자의 피부 영역이 포함된 제1 영상 및 제2 영상을 입력한 예이다. 도 6(b)는 얼굴 영역을 포함하는 영상을 입력한 예이다.6 (a) shows an example of a screen on which an app for evaluating the skin condition is executed. 6 (a) shows a menu for inputting the first image (Before) and the second image (After). A user can input a first image using a camera built in the smart device 50 and input a second image photographed at a predetermined time interval ('photography' menu). Alternatively, the user may input the first image and the second image by loading the photo file stored in the smart device 50 ('select' menu). 6 (b) is an example of inputting first and second images including a skin region of a user. 6 (b) is an example of inputting an image including a face area.

한편 사용자는 얼굴 영역에서 특정한 관심 영역을 선택할 수 있다. 도 6(c)는 사용자가 얼굴 영역에서 뺨 부위(A로 표시)를 선택한 예이다. 즉, 사용자가 자신의 뺨 영역의 상태에 관심이 있어서 해당 부위를 선택한 예이다.On the other hand, the user can select a specific region of interest in the face region. 6 (c) is an example in which the user selects the cheek area (denoted by A) in the face area. That is, the user is interested in the state of his / her cheek area and selects the corresponding region.

도 6(d)는 사용자가 제1 영상 및 제2 영상을 입력한 후 '결과 확인' 버튼을 눌러 피부 상태에 대한 평가가 수행된 예이다. 도 6(d)에서 스마트 기기(50)는 화면에 잡티 정도는 엷어지고, 피부톤은 밝아지고, 홍조는 조금 높아진 결과를 표시한다. 스마트 기기(50)는 정성적인 분석 뿐만 아니라, 수치를 백분율로 표시하여 정량적인 평가 결과를 도시할 수도 있다. 도 6에 도시하지 않았지만 스마트 기기는 일정한 기간에 대해 피부 상태를 평가한 결과를 누적하여 저장할 수 있다. 이를 이용하여 스마트 기기는 그래프 형식으로 피부 상태를 표시할 수도 있다.FIG. 6D is an example in which the user evaluates the skin condition by inputting the first image and the second image and then pressing the 'confirm result' button. In Fig. 6 (d), the smart device 50 displays a result that the degree of unevenness on the screen becomes thin, the skin tone becomes bright, and the flushing becomes slightly higher. The smart device 50 may display a quantitative evaluation result by displaying the numerical value as a percentage as well as a qualitative analysis. Although not shown in FIG. 6, the smart device can cumulatively store results of skin condition evaluation for a certain period of time. Using this, the smart device can display the skin condition in the form of a graph.

본 실시례 및 본 명세서에 첨부된 도면은 전술한 기술에 포함되는 기술적 사상의 일부를 명확하게 나타내고 있는 것에 불과하며, 전술한 기술의 명세서 및 도면에 포함된 기술적 사상의 범위 내에서 당업자가 용이하게 유추할 수 있는 변형 예와 구체적인 실시례는 모두 전술한 기술의 권리범위에 포함되는 것이 자명하다고 할 것이다.The present embodiment and drawings attached hereto are only a part of the technical idea included in the above-described technology, and it is easy for a person skilled in the art to easily understand the technical idea included in the description of the above- It will be appreciated that variations that may be deduced and specific embodiments are included within the scope of the foregoing description.

50 : 스마트 기기
51 : 카메라
52 : 저장 장치
53 : 연산 장치
54 : 출력 장치
81 : 카메라
85 : 컴퓨터
91 : 사용자 단말
95 : 서버50: Smart devices
51: Camera
52: Storage device
53:
54: Output device
81: Camera
85: Computer
91: User terminal
95: Server

Claims (11)

컴퓨터 장치가 피부 영역을 촬영한 제1 영상 및 상기 제1 영상의 촬영 시점 후에 상기 피부 영역을 촬영한 제2 영상을 획득하는 단계;
상기 컴퓨터 장치가 상기 제1 영상에 및 상기 제2 영상에서 각각 상기 피부 영역을 추출하는 단계;
상기 컴퓨터 장치가 색상값을 기준으로 상기 제1 영상의 피부 영역 및 상기 제2 영상의 피부 영역에 대한 차이를 나타내는 복수의 평가값을 연산하는 단계; 및
상기 컴퓨터 장치가 상기 복수의 평가값을 이용하여 상기 피부 영역에 대한 상태 평가를 수행하는 단계를 포함하는 영상을 이용한 피부 상태 평가 방법.Acquiring a first image of a skin region of a computer device and a second image of the skin region after a photographing time point of the first image;
Extracting the skin region from the first image and the second image, respectively;
Calculating a plurality of evaluation values indicating a difference between a skin region of the first image and a skin region of the second image based on a color value; And
And the computer device performing a state evaluation on the skin region using the plurality of evaluation values. 제1항에 있어서,
상기 컴퓨터 장치가 상기 제1 영상 및 상기 제2 영상에서 대해 각각 추출한 피부 영역에서 관심 영역을 결정하고, 상기 관심 영역에 대하여 상기 복수의 평가값을 연산하는 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the computer apparatus determines an area of interest in a skin area extracted for each of the first image and the second image, and calculates the plurality of evaluation values for the area of interest. 제1항에 있어서,
상기 컴퓨터 장치가 상태 평가의 항목에 따라 상기 복수의 평가값에 서로 다른 가중치를 부여하여 합산한 결과를 기준으로 상기 피부 영역에 대한 상태 평가를 수행하는 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the computer system performs a state evaluation on the skin region based on a result obtained by adding different weights to the plurality of evaluation values in accordance with an item of state evaluation. 제1항에 있어서,
상기 색상값은 RGB, HSV, YUV, YCgCo, YCbCr 또는 질감 중 적어도 하나의 색상 체계의 적어도 어느 하나의 성분에 대한 것인 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the color value is for at least one component of at least one color system of RGB, HSV, YUV, YCgCo, YCbCr or texture. 제1항에 있어서,
상기 복수의 평가값은 상기 색상값에 대한 히스토그램을 기준으로 결정되는 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the plurality of evaluation values are determined based on a histogram of the color values. 제1항에 있어서,
상기 복수의 평가값은 상기 색상값에 대한 히스토그램의 평균, 상기 색상값에 대한 히스토그램에서 피크 위치의 색상값, 상기 색상값에 대한 표준편차, 상기 색상값에 대한 히스토그램에서 피크 위치를 기준으로 왼쪽에 있는 색상값의 개수, 상기 색상값에 대한 히스토그램에서 피크의 높이 및 상기 색상값에 대한 히스토그램에서 피크 위치의 색상값과 가장 좌측에 있는 색상값의 차이를 포함하는 그룹에서 적어도 2개 이상을 이용하여 연산되는 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the plurality of evaluation values include a mean value of a histogram for the hue value, a hue value of a peak position in the histogram for the hue value, a standard deviation for the hue value, and a peak position in the histogram for the hue value. At least two or more groups in the group including the number of color values, the height of the peak in the histogram for the color value, and the difference between the color value of the peak position and the leftmost color value in the histogram for the color value A method for assessing skin condition using computed images. 제1항에 있어서,
상기 컴퓨터 장치는 상기 제1 영상의 피부 영역의 색상값에 대한 히스토그램과 상기 제2 영상의 피부 영역의 색상값에 대한 히스토그램의 차이를 기준으로 상기 평가값을 연산하는 영상을 이용한 피부 상태 평가 방법.The method according to claim 1,
Wherein the computer device calculates the evaluation value based on a difference between a histogram of a color value of the skin region of the first image and a histogram of a color value of the skin region of the second image. 피부 영역을 촬영한 제1 영상 및 상기 제1 영상의 촬영 시점 후에 상기 피부 영역을 촬영한 제2 영상에서 각각 피부 영역을 추출하고, 추출한 피부 영역에 대한 색상값을 기준으로 상기 제1 영상의 피부 영역 및 상기 제2 영상의 피부 영역에 대한 차이를 나타내는 복수의 평가값을 연산하고, 상기 복수의 평가값을 이용하여 상기 피부 영역에 대한 상태 평가를 수행하는 연산 장치를 포함하는 영상을 이용한 피부 상태 평가 장치.Extracting a skin region from a first image obtained by photographing a skin region and a second image obtained by photographing the skin region after a photographing time point of the first image and extracting a skin region of the first image based on a color value of the extracted skin region, And an arithmetic unit for calculating a plurality of evaluation values indicating a difference between the skin region of the first image and the skin region of the second image and performing a state evaluation on the skin region using the plurality of evaluation values, Evaluation device. 제8항에 있어서,
상기 연산 장치는 상태 평가의 항목에 따라 상기 복수의 평가값에 서로 다른 가중치를 부여하여 합산한 결과를 기준으로 상기 피부 영역에 대한 상태 평가를 수행하는 영상을 이용한 피부 상태 평가 장치.9. The method of claim 8,
Wherein the computing device performs a state evaluation on the skin region based on a result obtained by adding different weights to the plurality of evaluation values in accordance with an item of state evaluation, and summing the results. 제8항에 있어서,
상기 연산 장치는 상기 제1 영상의 피부 영역의 색상값에 대한 히스토그램과 상기 제2 영상의 피부 영역의 색상값에 대한 히스토그램의 차이를 기준으로 상기 평가값을 연산하는 영상을 이용한 피부 상태 평가 장치.9. The method of claim 8,
Wherein the computing device calculates the evaluation value based on a difference between a histogram of a color value of the skin region of the first image and a histogram of a color value of the skin region of the second image. 제8항에 있어서,
상기 복수의 평가값은 상기 색상값에 대한 히스토그램의 평균, 상기 색상값에 대한 히스토그램에서 피크 위치의 색상값, 상기 색상값에 대한 표준편차, 상기 색상값에 대한 히스토그램에서 피크 위치를 기준으로 왼쪽에 있는 색상값의 개수, 상기 색상값에 대한 히스토그램에서 피크의 높이 및 상기 색상값에 대한 히스토그램에서 피크 위치의 색상값과 가장 좌측에 있는 색상값의 차이를 포함하는 그룹에서 적어도 2개 이상을 이용하여 연산되는 영상을 이용한 피부 상태 평가 장치.
9. The method of claim 8,
Wherein the plurality of evaluation values include a mean value of a histogram for the hue value, a hue value of a peak position in the histogram for the hue value, a standard deviation for the hue value, and a peak position in the histogram for the hue value. At least two or more groups in the group including the number of color values, the height of the peak in the histogram for the color value, and the difference between the color value of the peak position and the leftmost color value in the histogram for the color value Apparatus for assessing skin condition using computed images.
KR1020160161005A 2016-11-30 2016-11-30 Evaluation method for skin condition using image and evaluation apparatus for skin condition using image KR101957773B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160161005A KR101957773B1 (en) 2016-11-30 2016-11-30 Evaluation method for skin condition using image and evaluation apparatus for skin condition using image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160161005A KR101957773B1 (en) 2016-11-30 2016-11-30 Evaluation method for skin condition using image and evaluation apparatus for skin condition using image

Publications (2)

Publication Number Publication Date
KR20180061629A true KR20180061629A (en) 2018-06-08
KR101957773B1 KR101957773B1 (en) 2019-03-14

Family

ID=62600316

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160161005A KR101957773B1 (en) 2016-11-30 2016-11-30 Evaluation method for skin condition using image and evaluation apparatus for skin condition using image

Country Status (1)

Country Link
KR (1) KR101957773B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020055325A1 (en) * 2018-09-14 2020-03-19 Health Partners Pte Ltd Method and system for determining well-being indicators
KR20210077533A (en) * 2019-12-17 2021-06-25 고려대학교 산학협력단 Method and server for face registration and face analysis

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050076233A (en) 2004-01-20 2005-07-26 (주) 옵토바이오메드 Digital photography process system and method for employing as the same
KR101197863B1 (en) * 2012-02-27 2012-11-05 경일대학교산학협력단 A potable device for skin diagnosis and computer recordable medium storing a method thereof

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20050076233A (en) 2004-01-20 2005-07-26 (주) 옵토바이오메드 Digital photography process system and method for employing as the same
KR101197863B1 (en) * 2012-02-27 2012-11-05 경일대학교산학협력단 A potable device for skin diagnosis and computer recordable medium storing a method thereof

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020055325A1 (en) * 2018-09-14 2020-03-19 Health Partners Pte Ltd Method and system for determining well-being indicators
KR20210077533A (en) * 2019-12-17 2021-06-25 고려대학교 산학협력단 Method and server for face registration and face analysis

Also Published As

Publication number Publication date
KR101957773B1 (en) 2019-03-14

Similar Documents

Publication Publication Date Title
JP6545658B2 (en) Estimating bilirubin levels
US10285624B2 (en) Systems, devices, and methods for estimating bilirubin levels
US20160135730A1 (en) Skin function evaluation device and skin evaluation method
KR20170132644A (en) Method for obtaining care information, method for sharing care information, and electronic apparatus therefor
US10682089B2 (en) Information processing apparatus, information processing method, and program
US20070103551A1 (en) Method and system for measuring video quality
KR101301821B1 (en) Apparatus and method for detecting complexion, apparatus and method for determinig health using complexion, apparatus and method for generating health sort function
RU2652060C2 (en) Medical device or system for measuring hemoglobin levels during accidents using camera-projector system
JP6566240B2 (en) Information processing apparatus, information processing method, and program
CN113642358B (en) Skin color detection method, device, terminal and storage medium
CN113298753A (en) Sensitive muscle detection method, image processing method, device and equipment
KR101957773B1 (en) Evaluation method for skin condition using image and evaluation apparatus for skin condition using image
CN113435353A (en) Multi-mode-based in-vivo detection method and device, electronic equipment and storage medium
CN110378304B (en) Skin state detection method, device, equipment and storage medium
CN112509068A (en) Image dominant color recognition method and device, electronic equipment and storage medium
KR101992403B1 (en) Skin moisture estimating method using image
KR20120117604A (en) Method and apparatus for skin status ananlysis
WO2021256459A1 (en) Image display system and image display method
CN109147911B (en) Method and device for displaying disease information and computer readable storage medium
KR101798227B1 (en) Body temperature estimation method using image and body temperature estimation apparatus using image
US20180116582A1 (en) Elasticity evaluation apparatus, elasticity evaluation method, and elasticity evaluation program
TW202022682A (en) Skin detection method and image processing device
JP6981561B1 (en) Color chart
KR101928501B1 (en) Skin acidity estimating method using image
CN112468794A (en) Image processing method and device, electronic equipment and readable storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
E90F Notification of reason for final refusal
AMND Amendment
X701 Decision to grant (after re-examination)