KR20150061914A - Skin texture predicting method and apparatus - Google Patents
Skin texture predicting method and apparatus Download PDFInfo
- Publication number
- KR20150061914A KR20150061914A KR1020130146258A KR20130146258A KR20150061914A KR 20150061914 A KR20150061914 A KR 20150061914A KR 1020130146258 A KR1020130146258 A KR 1020130146258A KR 20130146258 A KR20130146258 A KR 20130146258A KR 20150061914 A KR20150061914 A KR 20150061914A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- skin
- age
- parameter
- score
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/50—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
Landscapes
- Medical Informatics (AREA)
- Engineering & Computer Science (AREA)
- Public Health (AREA)
- Health & Medical Sciences (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Investigating Or Analysing Biological Materials (AREA)
Abstract
Description
본 발명의 실시예들을 사용자의 생활 패턴을 이용하여 피부 나이를 예측할 수 있는 방법 및 장치에 관한 것이다. Embodiments of the present invention relate to a method and apparatus for predicting skin age using a user's life pattern.
사람의 피부는 몸에서 가장 밖에 존재하는 부위로, 환경적 오염, 세균 등으로부터 우리의 몸을 보호하는 부위로써, 건강에 관련된 유용한 정보를 제공한다.Human skin is the most extrinsic part of the body. It is a part of our body that protects our environment from environmental pollution, bacteria, etc., and provides useful information related to health.
하지만, 피부는 나이가 듦에 따라 노화 관련 증상이 나타나게 되고, 이를 완화 시키려는 화장품이나 시술 등의 개발이 늘어나고 있다. 하지만 자신의 피부 상태를 정량적으로 표현 가능한 기준은 존재하지 않으며, 많은 사람들은 피부과 의사의 견해에 의존으로 하고 있다. However, as the skin becomes older, symptoms related to aging appear, and the development of cosmetics and procedures to alleviate it is increasing. However, there is no criterion to quantify the condition of your skin, and many people are dependent on the opinion of the dermatologist.
이에, 사람의 피부 상태에 대한 정량적 통계치를 구축하고, 이를 기반으로 사람의 피부 나이를 객관적으로 도출하기 위한 방안에 대한 연구가 필요하다.Therefore, it is necessary to establish a quantitative statistic for human skin condition, and to study the method for objectively deriving human skin age based on this.
한편, 사용자들을 스마트폰 등과 같은 사용자 기기를 통해 피부 나이를 예측하는 서비스를 제공받고 있다. 그런데, 지금까지 연구되고 있는 피부 관리 소프트웨어들은 평균이 되는 문턱값에 의해 사용자의 피부를 판단하고 있으며, 원인이 되는 사용자의 생활 패턴에 대해서는 고려하고 있지 않는 문제점이 있다. On the other hand, a service for predicting the skin age is provided through a user device such as a smart phone. However, the skin management software which has been studied so far judges the user's skin by the average threshold value, and does not consider the life pattern of the user causing the problem.
상기한 바와 같은 종래기술의 문제점을 해결하기 위해, 본 발명에서는 사용자의 생활 패턴을 이용하여 피부 나이를 예측할 수 있는 방법 및 장치를 제안하고자 한다. In order to solve the problems of the related art as described above, the present invention proposes a method and apparatus for predicting skin age using a user's life pattern.
본 발명의 다른 목적들은 하기의 실시예를 통해 당업자에 의해 도출될 수 있을 것이다.Other objects of the invention will be apparent to those skilled in the art from the following examples.
상기한 목적을 달성하기 위해 본 발명의 바람직한 일 실시예에 따르면, 제1 시점에서 기 설정된 과거 시간 동안의 사용자의 생활 패턴을 기록하기 위한 정보들을 이용하여 상기 사용자의 피부 나이와 연관된 복수의 파라미터의 점수를 산출하고, 상기 산출된 복수의 파라미터의 점수와 기 설정된 상기 복수의 파라미터의 가중치를 이용하여 상기 사용자의 피부 나이를 추정하는 단계; 상기 사용자의 피부 현미경 영상을 이용하여 상기 사용자의 피부 나이를 측정하는 단계; 상기 추정된 피부 나이 및 상기 측정된 피부 나이를 이용하여 상기 복수의 파라미터의 가중치를 갱신하는 단계; 및 상기 갱신된 가중치 및 상기 산출된 복수의 파라미터의 점수를 이용하여, 상기 제1 시점 이 후의 상기 사용자의 피부 나이를 예측하는 단계;를 포함하는 것을 특징으로 하는 피부 나이 예측 방법이 개시된다. According to a preferred embodiment of the present invention, there is provided a method for recording a user's life pattern for a predetermined time period at a first point of time, Estimating a skin age of the user based on a score of the calculated plurality of parameters and a predetermined weight of the plurality of parameters; Measuring the skin age of the user using the skin microscope image of the user; Updating the weights of the plurality of parameters using the estimated skin age and the measured skin age; And estimating a skin age of the user after the first point of time using the updated weight and the score of the calculated plurality of parameters.
상기 사용자의 생활 패턴을 기록하기 위한 정보들은 SNS(Social Network Service) 게시물, 달력 애플리케이션, 일기장 애플리케이션, 가계부 애플리케이션 중 적어도 하나 이상을 통해 수집될 수 있다. Information for recording the life pattern of the user can be collected through at least one of a social network service (SNS) post, a calendar application, a diary application, and a household application.
상기 복수의 파라미터는, 음식물 섭취 파라미터, 실외 활동 파라미터, 운동 파라미터, 수면 파라미터, 음주 파라미터 및 흡연 파라미터 중 적어도 하나를 포함할 수 있다. The plurality of parameters may include at least one of a food intake parameter, an outdoor activity parameter, a movement parameter, a sleep parameter, a drinking parameter and a smoking parameter.
상기 음식물 섭취 파라미터의 점수는 사용자의 나이, 키, 체중, 상기 사용자가 섭취한 음식물의 열량, 상기 사용자가 섭취한 음식물의 섭취 시간 중 적어도 하나에 기초하여 산출될 수 있다. The score of the food intake parameter may be calculated based on at least one of the user's age, height, weight, calorie of the user's ingested food, and ingestion time of the user's ingested food.
상기 실외 활동 파라미터의 점수는 실외 온도, 상기 사용자의 실외 활동 지속 시간, 상기 사용자가 실외 활동을 한 때의 시간 정보, 구름 운량 중 적어도 하나에 기초하여 산출될 수 있다. The score of the outdoor activity parameter may be calculated based on at least one of an outdoor temperature, an outdoor activity duration of the user, time information when the user performs an outdoor activity, and cloudiness.
상기 운동 파라미터의 점수는 운동 횟수 및 운동 지속 시간 중 적어도 하나에 기초하여 산출될 수 있다. The score of the motion parameter may be calculated based on at least one of the number of motions and the duration of the motions.
상기 수면 파라미터의 점수는 수면 시작 시간 및 수면 지속 시간 중 적어도 하나에 기초하여 산출될 수 있다. The score of the sleep parameter may be calculated based on at least one of a sleep start time and a sleep duration.
상기 음주 파라미터는 상기 사용자의 음주량 및 상기 음주량에 따른 열량 중 적어도 하나에 기초하여 산출될 수 있다. The drinking parameter may be calculated based on at least one of a drinking amount of the user and a calorie amount according to the drinking amount.
상기 사용자의 피부 나이를 측정하는 단계는, 상기 사용자의 피부 현미경 영상을 전처리하여 스켈레톤 영상(skeleton image)으로 변환하는 단계; 상기 스켈레톤 영상에서 폴리건 메시 검출을 통해 피부 셀을 각각 검출하는 단계; 상기 검출된 각 피부 셀의 특징 정보를 추출하는 단계 - 상기 특징 정보는 상기 피부 셀 평균 크기 및 개수를 포함함; 및 상기 피부 셀의 특징 정보를 이용하여 피부 나이를 도출하는 단계;를 포함할 수 있다. The step of measuring the skin age of the user comprises the steps of: pre-processing the skin micrographic image of the user and converting the image into a skeleton image; Detecting each skin cell through polygon mesh detection in the skeleton image; Extracting feature information of each detected skin cell, the feature information including the skin cell average size and number; And deriving skin age using feature information of the skin cell.
또한, 본 발명의 다른 실시예에 따르면, 제1 시점에서 기 설정된 과거 시간 동안의 사용자의 생활 패턴을 기록하기 위한 정보들을 이용하여 상기 사용자의 피부 나이와 연관된 복수의 파라미터의 점수를 산출하고, 상기 산출된 복수의 파라미터의 점수와 기 설정된 상기 복수의 파라미터의 가중치를 이용하여 상기 사용자의 피부 나이를 추정하는 추정부; 상기 사용자의 피부 현미경 영상을 이용하여 상기 사용자의 피부 나이를 측정하는 측정부; 상기 추정된 피부 나이 및 상기 측정된 피부 나이를 이용하여 상기 복수의 파라미터의 가중치를 갱신하는 갱신부; 및 상기 갱신된 가중치 및 상기 산출된 복수의 파라미터의 점수를 이용하여, 상기 제1 시점 이 후의 상기 사용자의 피부 나이를 예측하는 예측부;를 포함하는 것을 특징으로 하는 피부 나이 예측 장치가 제공된다.According to another embodiment of the present invention, there is provided a method for calculating a score of a plurality of parameters associated with a skin age of a user using information for recording a user's life pattern for a predetermined past time at a first time point, An estimating unit that estimates a skin age of the user based on a score of the plurality of calculated parameters and a weight of the predetermined plurality of parameters; A measuring unit measuring the skin age of the user using the skin micrograph image of the user; An updating unit updating the weights of the plurality of parameters using the estimated skin age and the measured skin age; And a predictor for predicting a skin age of the user after the first point of time using the updated weight and the score of the calculated plurality of parameters.
본 발명에 따르면, 사용자의 생활 패턴을 이용하여 피부 나이를 예측할 수 있게 된다. According to the present invention, the skin age can be predicted using the life pattern of the user.
도 1은 본 발명의 일 실시예에 따른 피부 나이 예측 장치의 개략적인 구성을 도시한 도면.
도 2는 본 발명의 일 실시예에 따른 피부 나이 예측 방법의 흐름도를 도시한 도면.
도 3은 FQL(Facebook Query Language)의 개념을 도시한 도면.
도 4는 본 발명의 일 실시예에 따른 피부 현미경 영상을 이용한 피부 나이 측정 방법을 나타낸 순서도.
도 5은 본 발명의 일 실시예에 따른 피부 셀을 검출하는 방법을 나타낸 순서도.
도 6는 본 발명의 일 실시예에 따른 피부 셀 검출을 위한 의사코드를 도시한 도면.
도 7은 본 발명의 일 실시예에 따른 검출된 피부 셀을 나타낸 도면.
도 8은는 본 발명의 일 실시예에 따른 오버 분할된 피부 셀을 설명하기 위해 도시한 도면.
도 9는 본 발명의 일 실시예에 따른 오버 분할된 피부 셀의 병합을 설명하기 위해 도시한 도면.
도 10은 본 발명의 일 실시예에 따른 피부 셀의 특징 정보를 추출하는 방법을 나타낸 순서도.
도 11은 본 발명의 일 실시예에 따른 내접원/외접원 비를 도출하는 방법을 설명하기 위한 순서도.
도 12는 본 발명의 일 실시예에 따른 검출된 내접원과 외접원을 도시한 도면.
도 13은 본 발명의 일 실시예에 따른 교차점 검출을 설명하기 위해 도시한 도면.
도 14는 본 발명의 일 실시예에 따른 교차점간 연결을 예시한 도면.
도 15 내지 도 17는 본 발명의 일 실시예에 따른 나이별 피부 셀의 특징 정보의 통계치를 도시한 도면.
도 18은 본 발명의 일 실시예에 따른 피부 나이 측정 장치의 내부 구성을 개략적으로 도시한 도면.BRIEF DESCRIPTION OF THE DRAWINGS FIG. 1 is a schematic view showing a skin age predicting apparatus according to an embodiment of the present invention; FIG.
2 is a flowchart illustrating a skin age prediction method according to an embodiment of the present invention.
FIG. 3 illustrates the concept of the FQL (Facebook Query Language). FIG.
FIG. 4 is a flowchart illustrating a method of measuring skin age using a skin micrograph image according to an embodiment of the present invention. FIG.
5 is a flowchart illustrating a method of detecting a skin cell according to an embodiment of the present invention.
6 is a diagram illustrating pseudo code for skin cell detection according to an embodiment of the present invention.
7 illustrates a detected skin cell according to one embodiment of the present invention.
FIG. 8 is a view for explaining an over-divided skin cell according to an embodiment of the present invention; FIG.
FIG. 9 is a view for explaining merging of over-divided skin cells according to an embodiment of the present invention; FIG.
10 is a flowchart illustrating a method of extracting feature information of a skin cell according to an embodiment of the present invention.
11 is a flowchart for explaining a method of deriving an inscribed circle / circumference ratio according to an embodiment of the present invention.
12 illustrates a detected inscribed circle and a circumscribed circle according to an embodiment of the present invention.
13 is a view for explaining an intersection detection according to an embodiment of the present invention;
Figure 14 illustrates cross-point connections in accordance with one embodiment of the present invention.
FIGS. 15 to 17 are diagrams illustrating statistics of feature information of skin cells by age according to an embodiment of the present invention; FIG.
18 is a view schematically showing an internal configuration of a skin age measuring apparatus according to an embodiment of the present invention.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. While the invention is susceptible to various modifications and alternative forms, specific embodiments thereof are shown by way of example in the drawings and will herein be described in detail. It should be understood, however, that the invention is not intended to be limited to the particular embodiments, but includes all modifications, equivalents, and alternatives falling within the spirit and scope of the invention. Like reference numerals are used for like elements in describing each drawing.
이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다.
Hereinafter, embodiments according to the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 피부 나이 예측 장치의 개략적인 구성을 도시한 도면이다. FIG. 1 is a view showing a schematic configuration of a skin age predicting apparatus according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 일 실시예에 따른 피부 나이 예측 장치(100)는 스마트폰, 태블릿 PC 등과 같은 스마트 기기일 수 있으며, 수집부(110), 추정부(120), 측정부(130), 갱신부(140) 및 예측부(150)를 포함한다. 1, the
그리고, 도 2는 본 발명의 일 실시예에 따른 피부 나이 예측 방법의 흐름도를 도시한 도면이다. 2 is a flowchart illustrating a skin age prediction method according to an embodiment of the present invention.
이하, 도 1 및 도 2를 참조하여, 피부 나이 예측 장치(100)의 각 구성 요소 별 기능 및 피부 나이 예측 방법의 단계의 과정을 각각 설명하기로 한다. Hereinafter, the function of each component of the skin
먼저, 단계(S210)에서, 수집부(110)는 제1 시점에서 기 설정된 과거 시간 동안의 사용자의 생활 패턴을 기록하기 위한 정보들을 수집한다. First, in step S210, the
여기서, 제1 시점은 "현재 시점"일 수 있으며, 기 설정된 과거 시간은 "일주일"일 수 있다. 이하, 설명의 편의를 위해 제1 시점을 "현재 시점"으로 표현하기로 한다. Here, the first viewpoint may be the "current viewpoint ", and the predetermined past time may be" one week ". Hereinafter, for convenience of explanation, the first viewpoint will be referred to as "current viewpoint ".
본 발명의 일 실시예에 따르면, 수집부(110)는 SNS(Social Network Service) 게시물, 달력 애플리케이션, 일기장 애플리케이션, 가계부 애플리케이션 중 적어도 하나 이상을 통해 사용자의 생활 패턴을 기록하기 위한 정보들을 수집할 수 있다. According to an embodiment of the present invention, the
예를 들어, 수집부(110)는 페이스북의 포스트(타임라인)을 이용하여 사용자의 생활 패턴을 기록하기 위한 정보들을 수집할 수 있다. 이 경우, 수집부(110)는 도 3에 도시된 FQL(Facebook Query Language)을 이용하여 상기 정보들(일례로, 사용자가 방문한 장소, 시간(체크인 시간 포함), 목적 등)을 수집할 수 있다. For example, the
다음으로, 단계(S215)에서, 추정부(120)는 사용자의 생활 패턴을 기록하기 위한 정보들을 이용하여 사용자의 피부 나이와 연관된 복수의 파라미터의 점수를 산출한다. Next, in step S215, the
본 발명의 일 실시예에 따르면, 복수의 파라미터는 음식물 섭취 파라미터, 실외 활동 파라미터, 운동 파라미터, 수면 파라미터, 음주 파라미터 및 흡연 파라미터 중 적어도 하나를 포함할 수 있다. According to one embodiment of the present invention, the plurality of parameters may include at least one of a food intake parameter, an outdoor activity parameter, an exercise parameter, a sleep parameter, a drinking parameter and a smoking parameter.
이하, 각 파라미터 별로 그 내용을 상세히 설명한다.
The contents of each parameter will be described in detail below.
ㄱ. 음식물 섭취 파라미터A. Food intake parameter
음식물 섭취 파라미터의 경우, 수집부(110)는 SNS, 통신망 등을 통해 사용자의 나이, 키, 체중, 사용자가 섭취한 음식물의 열량, 사용자가 섭취한 음식물의 섭취 시간(언제 음식물을 섭취하였는지 여부) 중 적어도 하나를 수집하고, 추정부(120)는 상기의 정보들을 이용하여 음식물 섭취 파라미터의 점수를 산출한다. In the case of the food intake parameter, the
또한, 추정부(120)는 사용자가 섭취한 음식물의 열량을 계산하기 위해 음식물에 대한 공지된 표준 열량을 이용할 수 있으며, 수집부(110)는 통신망(인터넷)을 통해 상기한 표준 열량을 수집할 수 있다. In addition, the estimating
본 발명의 일 실시예에 따르면, 추정부(120)는 하기의 수학식 1에 기초하여 음식물 섭취 파라미터의 점수를 산출할 수 있다.
According to an embodiment of the present invention, the estimating
여기서, DPWeating는 음식물 섭취 파라미터의 점수, BM는 사용자의 나이, 키, 체중에 의해 결정되는 기본 신진 대사(Basic Metabolism), Actual intake는 사용자가 섭취한 음식물의 열량, We , timezone는 음식물 섭취 시간 정보, min( )는 미니멈 함수를 각각 의미한다. 그리고, 기본 신진 대사는 하기의 수학식 2에 기초하여 정의될 수 있다. Here, DPW eating scores of food intake parameters, BM is the primary metabolism, which is determined by your age, height, weight (Basic Metabolism), Actual intake is calorimetry of the food that you consume, W e, timezone is food intake Time information, and min () denotes a minimum function, respectively. The basic metabolism can be defined based on the following equation (2).
또한, 사용자가 밤 늦게 음식물을 섭취하는 것은 피부에 좋지 않는 결과를 초래하며, 이는 수학식 1 내의 음식물 섭취의 We,timezone에 반영되어 있다. 음식물 섭취의 We,timezone는 표 1에 도시된 바와 같이 정의될 수 있다.
In addition, the user consuming food at night late results in bad skin results, which is reflected in the W e , timezone of food intake in equation (1). The W e , timezone of food intake can be defined as shown in Table 1.
정리하면, 음식물 섭취 파라미터의 점수는 미니멈 함수에 의해 0과 1 사이의 값을 가진다. 이 때, 사용자의 기본 신진 대사와 사용자가 섭취한 음식물의 열량이 비슷한 경우 음식물 섭취 파라미터의 점수는 0에 가까운 값을 갖고, 사용자가 너무 많은 음식물을 섭취하거나 너무 적은 음식물 섭취하는 경우 음식물 섭취 파라미터의 점수는 1에 가까운 값을 갖는다.
In summary, the score of the food intake parameter has a value between 0 and 1 by the minimum function. If the caloric value of the user's basic metabolism is similar to that of the user's basic metabolism, the score of the food intake parameter is close to zero, and if the user consumes too much food or consumes too little food, The score has a value close to 1.
ㄴ. 실외 활동 파라미터N. Outdoor activity parameter
실외 활동 파라미터의 경우, 수집부(110)는 SNS, 통신망 등을 통해 실외 온도, 사용자의 실외 활동 지속 시간, 사용자가 실외 활동을 한 때의 시간 정보(몇시에 실외 활동을 하였는지 여부), 구름 운량 정보 중 적어도 하나에 수집하고, 추정부(120)는 상기의 정보들을 이용하여 실외 활동 파라미터의 점수를 산출한다. In the case of the outdoor activity parameter, the
본 발명의 일 실시예에 따르면, 추정부(120)는 하기의 수학식 3에 기초하여 실외 활동 파라미터의 점수를 산출할 수 있다.
According to an embodiment of the present invention, the
여기서, DPWoutdoor는 실외 활동 파라미터의 점수, Tduration는 하루 중 t1°C(일례로, 5°C) 보다 낮거나 t2°C(일례로, 27°C) 보다 높았던 때의 실외 온도, Toutdoor는 하루 중 t1°C 보다 낮거나 t2°C 보다 높았던 때의 실외 활동 지속 시간, Wo,timezone는 사용자가 실외 활동을 한 때의 시간 정보, UVcloud는 하루의 구름 운량, WUV_expo는 상기 하루의 구름 운량을 스케일링 한 값, α,β는 가중치(α=0.3, β=0.7), max( )는 맥시엄 함수를 각각 의미한다. Where DPW outdoor is the outdoor temperature parameter, T duration is the outdoor temperature when the temperature is lower than t 1 ° C (eg, 5 ° C) or t 2 ° C (eg, 27 ° C) T outdoor is the outdoor activity duration when t 1 ° C or higher than t 2 ° C during the day, W o, timezone is the time information when the user is outdoors, UV cloud is the day cloudiness, W UV_expo is a value obtained by scaling the day cloudiness, α and β are weights (α = 0.3, β = 0.7), and max () is a maxima function.
또한, 사용자가 실외 활동을 한 때의 Wo , timezone는 표 2에 도시된 바와 같이 정의될 수 있다.
In addition, W o , timezone when a user performs an outdoor activity can be defined as shown in Table 2.
정리하면, 실외 활동 파라미터의 점수는 α, β 및 맥시엄 함수에 의해 0과 1 사이의 값을 가지되, 사용자의 실외 활동이 거의 없거나 실외 온도가 t1°C 보다 높거나 t2°C 낮은 경우 실외 활동 파라미터의 점수는 0에 가까운 값을 갖고, 사용자의 실외 활동이 많거나 실외 온도가 t1°C 보다 낮거나 t2°C 높은 경우 등에서 실외 활동 파라미터의 점수는 1에 가까운 값을 갖는다.
In sum, the score of the outdoor activity parameter is between 0 and 1 by α, β and maxima function, and the user's outdoor activity is almost zero or the outdoor temperature is higher than t 1 ° C or t 2 ° C lower , The score of the outdoor activity parameter has a value close to 0, and the score of the outdoor activity parameter is close to 1 in a case where the outdoor activity of the user is large or the outdoor temperature is lower than t 1 ° C or t 2 ° C .
ㄷ. 운동 파라미터C. Motion parameter
운동 파라미터의 경우, 수집부(110)는 SNS, 통신망 등을 통해 운동 횟수 및 운동 지속 시간 중 적어도 하나를 수집하고, 추정부(120)는 상기의 정보들을 이용하여 운동 파라미터의 점수를 산출한다. In the case of the exercise parameters, the
본 발명의 일 실시예에 따르면, 추정부(120)는 하기의 수학식 4에 기초하여 운동 파라미터의 점수를 산출할 수 있다.
According to an embodiment of the present invention, the
여기서, DPWexer는 운동 파라미터의 점수, DPWex , init는 운동 파라미터의 점수의 초기값, Texer는 기 설정된 과거 시간 동안의 총 운동 시간, Tex , Rec는 권장하는 운동 시간, TOver는 과도한 운동으로 분류되는 운동 시간의 임계값을 각각 의미한다. Here, DPW exer scores of motion parameters, DPW ex, init is the initial value of the movement parameter score, total exercise time during T exer is a predetermined past time, T ex, Rec is recommended exercise time, T Over excessive And a threshold value of the exercise time classified by the exercise.
정리하면, 운동 파라미터의 점수는 기 설정된 과거 시간 동안의 총 운동 시간, 권장하는 운동 시간 및 과도한 운동으로 분류되는 운동 시간의 임계값에 기초하여 0과 1 사이의 값을 가질 수 있다.
In summary, the score of the exercise parameter may have a value between 0 and 1 based on the threshold of the total exercise time, the recommended exercise time and the exercise time classified as excessive exercise over a predetermined past time.
ㄹ. 수면 파라미터D. Sleep parameters
수면 파라미터의 경우, 수집부(110)는 SNS, 통신망 등을 통해 수면 시작 시간 및 수면 지속 시간 중 적어도 하나를 수집하고, 추정부(120)는 상기의 정보들을 이용하여 수면 파라미터의 점수를 산출한다. In the case of the sleep parameter, the collecting
본 발명의 일 실시예에 따르면, 추정부(120)는 하기의 수학식 5에 기초하여 수면 파라미터의 점수를 산출할 수 있다.
According to an embodiment of the present invention, the
여기서, DPWsleeping는 수면 파라미터의 점수, Tsleeping는 사용자의 수면 지속 시간, Ts , Rec는 추천 수면 시간, TRef _ MASRT는 제1 시간과 제2 시간 사이의 수면 구간(일례로, 22시부터 2시 사이, 상기 구간이 가장 활발한 피부 재생 시간임), TUser _ MASRT는 사용자의 수면 지속 시간 중 제1 시간부터 제2 시간의 포함 여부(예를 들어, 사용자가 23시부터 수면을 취해 다음날 8시에 일어 났다면, TUser _ MASRT은 3(=11~2)임)를 각각 의미한다. In this case, DPW sleeping is the score of the sleep parameter, T sleeping is the sleep duration of the user, T s , Rec is the recommended sleeping time, T Ref _ MASRT is the sleep interval between the first time and the second time emitter being 2 times the period of the most active skin regeneration between the hours), T user _ MASRT is the inclusion of a second time from one hour of your sleep duration (for example, user 23 pm and taken to the surface If the next day was up at 8, T User _ MASRT means 3 (= 11-2) Im), respectively.
정리하면, 수면 파라미터의 점수는 수면 시작 시간 및 수면 지속 시간 중 적어도 하나를 기초하여 0과 1 사이의 값으로 정규화될 수 있다.
Taken together, the score of the sleep parameter can be normalized to a value between 0 and 1 based on at least one of the sleep start time and the sleep duration.
ㅁ. 음주 파라미터ㅁ. Drinking parameter
음주 파라미터의 경우, SNS, 통신망 등을 통해 사용자의 음주량 및 음주량에 따른 열량 중 적어도 하나를 수집하고, 추정부(120)는 상기의 정보들을 이용하여 음주 파라미터의 점수를 산출한다.In the case of the drinking parameter, at least one of the drinking quantity and the calorie quantity according to the drinking quantity of the user is collected through the SNS, the communication network, etc., and the
본 발명의 일 실시예에 따르면, 추정부(120)는 하기의 수학식 6에 기초하여 음주 파라미터의 점수를 산출할 수 있다.
According to an embodiment of the present invention, the estimating
여기서, DPWdrinking는 음주 파라미터의 점수, DPWd , init는 음주 파라미터의 점수의 초기값, CThresh는 하루에 허용되는 음주량(일례로 200 칼로리), Cdrinking는 사용자가 실제로 마신 음주량을 칼로리로 환산한 값, Wd , timezone는 사용자가 음주를 한 때의 시간 정보를 각각 의미한다. In this case, DPW drinking is the score of the drinking parameter, DPW d , init is the initial value of the drinking parameter score, C Thresh is the amount of drinking allowed per day (for example, 200 calories), C drinking is the amount of drinking One value, W d , and timezone , respectively, represent time information when the user drinks alcohol.
또한, 사용자가 음주를 한 때의 Wd , timezone는 표 3에 도시된 바와 같이 정의될 수 있다.
In addition, W d and timezone at the time of drinking by the user can be defined as shown in Table 3.
정리하면, 음주 파라미터의 점수는 CThresh, Cdrinking, 및 Wd , timezone에 기초하여 0과 1 사이의 값으로 정규화될 수 있다. .
Taken together , the score of the drinking parameter can be normalized to a value between 0 and 1 based on C Thresh , C drinking , and W d , timezone . .
ㅂ. 흡연 파라미터F. Smoking parameter
흡연 파라미터의 경우, SNS, 통신망 등을 통해 흡연 정보를 수집하고, 추정부(120)는 상기의 정보들을 이용하여 흡연 파라미터의 점수를 산출한다. 여기서, 사용자의 흡연을 하는 경우 흡연 파라미터의 점수는 1의 값을 가지며, 사용자의 흡연을 하지 않는 경우, 흡연 파라미터의 점수는 0의 값을 가진다.
In the case of the smoking parameter, the smoking information is collected through the SNS, the communication network, and the like, and the
계속하여, 단계(S220)에서, 추정부(120)는 상기 산출된 복수의 파라미터의 점수와 기 설정된 복수의 파라미터의 가중치를 이용하여 사용자의 피부 나이를 추정한다. Subsequently, in step S220, the estimating
즉, 사용자의 나이를 추정하기 위해서는 복수의 파라미터의 점수도 중요하지만 복수의 파라미터가 사용자에 따라 어떠한 영향을 미치는지도 중요한 요소이다. 예를 들어, 특정 사용자가 음주를 많이 함에도 불구하고 피부 나이가 젊은 경우 음주 파라미터의 점수는 특정 사용자의 피부 나이에 큰 영향을 미치지 않는다. 이는 사용자의 유전적 특성에 의해 기인된다. That is, in order to estimate the age of the user, the score of a plurality of parameters is important, but how the plurality of parameters affect the user is an important factor. For example, if the skin age is young, even though a particular user has a lot of alcohol, the score of the drinking parameter does not have a significant effect on the skin age of a particular user. This is due to the genetic characteristics of the user.
따라서, 본 발명의 일 실시예에 따르면, 추정부(120)는 복수의 파라미터 별로, 파라미터의 점수와 가중치의 곱셈 연산을 이용하여 가중치가 반영된 점수를 각각 산출하고, 복수의 가중치가 반영된 점수들을 덧샘 연산하여 사용자의 피부 나이를 추정할 수 있다. Accordingly, in accordance with an embodiment of the present invention, the
본 발명의 일 실시예에 따르면, 복수의 파라미터의 가중치 각각의 초기값은 모두 같은 값을 가질 수 있으며, 하기에서 설명하는 단계(S230)에서 복수의 파라미터의 가중치의 값이 조절된다.According to one embodiment of the present invention, the initial values of the respective weights of the plurality of parameters may all have the same value, and the values of the weights of the plurality of parameters are adjusted in step S230 described below.
다음으로, 단계(S225)에서, 측정부(130)는 사용자의 피부 현미경 영상을 이용하여 사용자의 피부 나이를 측정한다. 즉, 단계(S208)에서는 피부 나이 측정 알고리즘을 이용하여 사용자의 피부 나이를 직접 측정한다. 측정부(130)의 피부 나이 측정 알고리즘의 상세한 설명을 후술하기로 한다. Next, in step S225, the measuring
이 후, 단계(S230)에서는 단계(S220)에서 측정된 추정 피부 나이 및 단계(S225)에서 측정된 측정 피부 나이를 이용하여, 갱신부(140)는 복수의 파라미터의 가중치를 갱신한다. Thereafter, in step S230, the updating
즉, 단계(S230)에서는 추정된 피부 나이와 측정된 피부 나이의 오차를 감소시키기 위해 복수의 파라미터의 가중치 각각의 초기값을 갱신하고, 이를 통해 "사용자의 유전적 특성을 반영"하여 보다 정확한 피부 나이 예측을 수행할 수 있게 된다. That is, in step S230, the initial values of the weight values of the plurality of parameters are updated to reduce the error between the estimated skin age and the measured skin age, Age prediction can be performed.
예들 들어, 앞서 설명한 것과 같이 복수의 파라미터의 가중치가 큰 경우 피부 나이가 늙은 것으로 가정할 때, 사용자가 음주를 많이 함에도 불구하고 측정된 피부 나이가 젊은 경우, 음주는 사용자의 피부 나이에 큰 영향을 끼치지 않는 것으로 분석되며, 따라서 갱신부(140)는 초기의 음주 파라미터의 가중치를 하향 조정할 수 있다. 반대로, 사용자가 흡연을 함에도 불구하고 다른 흡연자들에 비해 측정된 피부 나이가 훨씬 늙은 것으로 판단된 경우, 흡연은 사용자의 피부 나이에 절대적은 영향을 끼친 것으로 분석되며, 따라서, 갱신부(140)는 초기의 흡연 파라미터의 가중치를 상향 조정할 수 있다. For example, as described above, when the weight of a plurality of parameters is large, assuming that the age of the skin is old, when the measured skin age is young despite a lot of drinking by the user, The
본 발명의 일 실시예에 따르면, 갱신부(140)는 히든 마르코프 모델(HMM: Hidden Markov Model)을 이용하여 복수의 파라미터의 가중치를 갱신할 수 있다. According to an embodiment of the present invention, the
보다 상세하게, HMM는 상태 변화(state transition)의 종류를 나타내는 마르코프 모델을 한다. HMM는 시작 값(t = 0), 확률 분포(), 상태 i에서 j로의 전이 분포() 및 방출 또는 관찰 모델(emission or observation model)()로써 표현되어 진다. More specifically, the HMM performs a Markov model representing the type of state transition. The HMM measures the start value (t = 0), the probability distribution ), The transition distribution from state i to j ( ) And an emission or observation model ( ).
한편, 히든 마르코프 모델는 당업계에서 공지된 기술이므로, 이에 대한 상세한 설명은 생략하기로 한다. Meanwhile, since the Hidden Markov model is a technique known in the art, a detailed description thereof will be omitted.
마지막으로, 단계(S235)에서, 예측부(150)는 갱신된 가중치 및 산출된 복수의 파라미터의 점수를 이용하여, 제1 시점 이 후의 사용자의 피부 나이를 예측한다. 여기서, 예측부(150)의 예측은 앞선 추정부(120)의 추정 동작과 똑같이 적용된다.Finally, in step S235, the predicting
한편, 피부 나이가 예측된 후, 본 발명에 따른 피부 나이 예측 장치(100)는 사용자의 유전적 특성을 더 분석하기 위해 반복적으로 단계(S210) 내지 단계(S230)를 수행하여 복수의 파라미터 각각에 따른 가중치를 갱신할 수 있으며, 이에 따라 보다 정확한 피부 나이 예측이 가능해진다. 여기서, 이전의 예측부(150)의 예측값은 다음의 추정부(120)의 추정값일 수 있다. 즉, 추정부(120)와 예측부(150)는 단일 모듈로 구현될 수 있다. On the other hand, after the skin age is predicted, the skin
이하에서는 측정부(130)의 피부 나이 측정 알고리즘을 상세하게 설명한다. Hereinafter, the skin age determination algorithm of the
측정부(130)은 피부 현미경 영상을 전처리한 후 피부를 구성하는 각 셀을 검출하고, 검출된 셀의 개수, 셀의 평균 넓이, 내접원/외접원 비, 교차점 개수, 교차점 길이 등과 같은 셀의 특징을 추출한 후, 이를 기반으로 피부 나이를 정량적으로 도출할 수 있다.The measuring
도 4는 본 발명의 일 실시예에 따른 피부 현미경 영상을 이용한 피부 나이 측정 방법을 나타낸 순서도이다.FIG. 4 is a flowchart illustrating a method of measuring skin age using a skin micrograph image according to an embodiment of the present invention.
단계(S410)에서 측정부(130)는 피부 현미경 영상을 전처리한다.In step S410, the
촬영된 피부 현미경 영상은 촬영 장비나 광원의 한계로 인해, 전체 영역에서 고른 화질을 얻기 어렵고, 비네팅(vignetting) 현상이 발생한다. 이로 인해, 피부 현미경 영상에 대해 그라데이션 마스킹(gradation masking)을 통해 피부 현미경 영상의 비네팅(vignetting)을 제거한 후 중앙부를 샘플링한다. 피부 현미경 영상은 다양한 환경에서 획득되기 때문에 주변 광량의 영향으로 인해 서로 다른 밝기를 가지며, 영상의 대비를 개선하기 위해 히스토그램 평준화 과정을 수행할 수 있다.The photographed skin microscope image is difficult to obtain uniform image quality in the whole area due to limitations of imaging equipment or light source, and vignetting phenomenon occurs. For this reason, vignetting of a skin micrograph image is eliminated by gradation masking on a skin micrograph image, and a center portion is sampled. Because the skin microscope images are acquired in various environments, they have different brightness due to the influence of the ambient light amount, and the histogram leveling process can be performed to improve the contrast of the images.
이어, 피부 현미경 영상에 대한 노이즈 제거를 위해 Otsu의 방법으로 이진화한 후 워터세드 알고리즘을 수행하여 노이즈를 제거할 수 있다.Next, the noise can be removed by performing a water-sheath algorithm after binarizing by Otsu's method to remove noise from a skin micro-image.
Otsu 방법 및 워터세드 알고리즘은 당업자에게는 자명한 사항이므로 이에 대한 상세한 설명은 생략하기로 한다.Since the Otsu method and the water-set algorithm are obvious to those skilled in the art, a detailed description thereof will be omitted.
단계(S415)에서 측정부(130)는 이진화된 영상의 영역을 분할한다.In step S415, the
예를 들어, 측정부(130)는 워터세드 알고리즘을 통해 이진화된 그레이 영상에서, 영역의 경계선을 1 픽셀로 설정하는 스켈레톤 영상으로 나타낸다.For example, the
단계(S420)에서 측정부(130)는 스켈레톤 영상에서 각각의 셀을 검출한다.In step S420, the measuring
예를 들어, 측정부(130)는 임의의 픽셀을 시작점으로 하여 4개의 이웃 경계 라인(예를 들어, 왼쪽 경계 라인, 오른쪽 경계 라인, 위쪽 경계 라인, 아래쪽 경계 라인)으로 연결된 컴포넌트(폴리건)을 각각 검색하고, 검색된 컴포넌트를 각각 피부 셀로 설정할 수 있다.For example, the measuring
이에 대해서는 하기에서 도 5를 참조하여 보다 상세히 설명하기로 한다.This will be described in more detail with reference to FIG. 5 below.
단계(S425)에서 측정부(130)는 검출된 각 피부 셀에 대한 특징 정보를 추출한다.In step S425, the
예를 들어, 측정부(130)는 검출된 각 피부 셀에 대한 평균 셀 크기, 피부 셀 개수, 내접원/외접원 비, 교차점 개수 및 교차점 평균 길이 중 적어도 하나를 특징 정보로 추출할 수 있다. 이에 대해서는 하기에서 도 9을 참조하여 보다 상세히 설명하기로 한다.For example, the measuring
단계(S430)에서 측정부(130)는 추출된 각 피부 셀 특징 정보를 이용하여 피부 나이를 추론한다.In step S430, the measuring
일반적으로 사람의 피부 나이는 나이가 들수록 피부 셀의 영역(크기)가 점점 증가하며, 피부 셀의 개수가 점점 감소하는 경향이 있다. 또한, 피부 셀의 내접원과 외접원의 비(이하에서는 내접원/외접원 비라 칭하기로 함)가 점점 감소하고, 교차점간의 평균 길이가 점점 증가하는 경향이 있다. 이에, 본 발명은 피부 현미경 영상을 통해 각 피부 셀을 검출한 후 피부 셀의 특징 정보를 추출하고, 이를 기반으로 피부 나이를 추론할 수 있다. Generally, as the skin age of a person increases, the area (size) of the skin cell gradually increases, and the number of skin cells tends to decrease gradually. In addition, the ratio of the inscribed circle to the circumscribed circle (hereinafter referred to as inscribed circle / circumscribed circle) of the skin cells gradually decreases, and the average length between the crossed points tends to increase gradually. Accordingly, the present invention extracts feature information of a skin cell after each skin cell is detected through a skin microscope image, and can deduce skin age based on the feature information.
예를 들어, 하기 도 15 내지 도 17와 같이, 각 연령대별 각 피부 셀 특징 정보에 대한 통계치를 참조하여, 피검자의 피부 셀 특징 정보를 비교하여 피부 나이를 추론할 수 있다.For example, as shown in FIGS. 15 to 17, skin age information can be inferred by comparing skin cell characteristic information of a subject with reference to statistical values of skin cell characteristic information for each age group.
도 5는 본 발명의 일 실시예에 따른 피부 셀을 검출하는 방법을 나타낸 순서도이고, 도 6은 본 발명의 일 실시예에 따른 피부 셀 검출을 위한 의사코드를 도시한 도면이고, 도 7은 본 발명의 일 실시예에 따른 검출된 피부 셀을 나타낸 도면이며, 도 8은 본 발명의 일 실시예에 따른 오버 분할된 피부 셀을 설명하기 위해 도시한 도면이고, 도 9는 본 발명의 일 실시예에 따른 오버 분할된 피부 셀의 병합을 설명하기 위해 도시한 도면이다.FIG. 5 is a flowchart illustrating a method of detecting a skin cell according to an embodiment of the present invention. FIG. 6 is a diagram illustrating pseudo code for skin cell detection according to an embodiment of the present invention. FIG. 8 is a view for explaining an over-divided skin cell according to an embodiment of the present invention, and FIG. 9 is a view showing a skin cell according to an embodiment of the present invention FIG. 5 is a view for explaining merging of over-divided skin cells according to FIG.
단계(S510)에서 측정부(130)는 변환된 스켈레톤 영상에서 적어도 4개의 이웃 경계 라인으로 연결된 폴리건을 각각 검출한다. 이와 같이 검출된 폴리건을 이하에서는 피부 셀로 통칭하기로 한다.In step S510, the measuring
단계(S515)에서 측정부(130)는 스켈레톤 영상의 모든 영역에 대해 피부 셀 검출 과정이 완료되었는지 여부를 판단한다.In step S515, the measuring
즉, 측정부(130)는 스켈레톤 영상의 모든 영역에 대해 적어도 4개의 경계 라인으로 연결된 폴리건을 검출하는 과정을 반복적으로 수행할 수 있다.That is, the measuring
도 6에는 스켈레톤 영상에서 적어도 4개의 이웃 경계 라인으로 연결된 폴리건을 피부 셀로 검출하는 의사코드가 예시되어 있다. 또한, 도 7에는 검출된 피부 셀이 예시되어 있다.FIG. 6 illustrates a pseudo code for detecting a polygon connected to at least four neighboring boundary lines in a skeleton image as a skin cell. 7, the detected skin cells are illustrated.
만일 모든 영역에 대한 검출이 완료되지 않았다면, 단계(S510)로 진행한다.If detection for all the areas is not completed, the process proceeds to step S510.
그러나 모든 영역에 대한 검출이 완료되면, 단계(S520)에서 측정부(130)는 검출된 피부 셀의 평균 영역 크기를 계산한다. 물론, 측정부(130)는 검출된 피부 셀의 개수도 저장하고 있을 수 있음은 당연하다.However, when the detection of all the areas is completed, the measuring
이어, 단계(S525)에서 측정부(130)는 오버 분할된 피부 셀을 검출한다.Then, in step S525, the
예를 들어, 측정부(130)는 각각의 셀에 컨벡스 홀(convex hull)을 적용하여 각 셀의 외곽선을 설정한다. 이어, 측정부(130)는 컨벡스 홀이 적용된 각각의 피부 셀을 대상으로 자체 중심점을 가진 임의의 피부 셀이 다른 피부 셀 내부에 존재하는 경우, 해당 피부 셀을 오버 분할된 셀로 검출할 수 있다.For example, the
도 8에 각각의 피부 셀에 컨벡스 홀을 적용하여 검색된 각 셀의 외곽선을 이용하여 오버 분할된 피부 셀을 검색한 일 예가 도시되어 있다. 도 8를 참조하면, 810 및 815 피부 셀은 각각 중심점을 가지고 있으나, 801의 내부에 포함되는 피부 셀로, 오버 분할된 피부 셀로 검색된다. 또한, 820 피부 셀 또한 중심점을 가지고 있으나, 802 내부에 포함되는 피부 셀로 오버 분할된 피부 셀로 검색된다.FIG. 8 shows an example in which a skin cell over-divided is searched using an outline of each cell retrieved by applying a convex hole to each skin cell. Referring to FIG. 8, the skin cells 810 and 815 each have a center point, but are skin cells contained in the skin 801 and are searched for over-divided skin cells. In addition, the 820 skin cells also have center points, but they are searched for skin cells that are over-divided into skin cells contained within 802.
오버 분할된 피부 셀 검색이 완료되면, 단계(S530)에서 측정부(130)는 오버 분할된 피부 셀을 다른 피부 셀로 병합(merge)한다. 예를 들어, 오버 분할된 각각의 피부 셀들을 대상으로, 오버 분할된 피부 셀의 영역이 평균 영역 크기보다 작으면, 해당 오버 분할된 피부 셀은 다른 피부 셀(예를 들어, 해당 셀의 중심점을 포함하는 다른 피부 셀))로 병합될 수 있다. 도 9에는 도 6의 오버 분할된 피부 셀이 병합된 일 예가 도시되어 있다.When the over-divided skin cell search is completed, the measuring
오버 분할된 피부 셀의 머지 과정이 완료되면, 단계(S535)에서 측정부(130)는 피부 셀의 평균 영역 크기 및 피부 셀 개수를 다시 갱신한다.When the merging process of the over-divided skin cells is completed, the measuring
도 5에서는 오버 분할된 피부 셀이 존재하는 것을 가정하여, 단계(S530) 내지 단계(535)가 포함되었으나, 오버 분할된 피부 셀이 존재하지 않으면, 단계(S530) 내지 단계(S535)는 포함되지 않을 수 있음은 당연하다.5, steps S530 to S535 have been performed on the assumption that there are over-divided skin cells, but if there are no over-divided skin cells, steps S530 to S535 are not included It is natural that it may not.
도 10은 본 발명의 일 실시예에 따른 피부 셀의 특징 정보를 추출하는 방법을 나타낸 순서도이고, 도 12은 본 발명의 일 실시예에 따른 교차점 검출을 설명하기 위해 도시한 도면이고, 도 13은 본 발명의 일 실시예에 따른 교차점간 연결을 예시한 도면이다.FIG. 10 is a flowchart illustrating a method of extracting feature information of a skin cell according to an embodiment of the present invention. FIG. 12 is a view for explaining an intersection detection according to an embodiment of the present invention, FIG. 3 illustrates a cross-point connection according to an embodiment of the present invention. FIG.
단계(S1010)에서 측정부(130)는 검출된 피부 셀의 평균 영역 크기와 피부 셀의 개수를 특징 정보로 도출한다.In step S1010, the measuring
이어, 단계(S1015)에서 측정부(130)는 검출된 피부 셀의 내접원/외접원 비를 도출한다. 예를 들어, 측정부(130)는 검출된 피부 셀의 중심점을 기준으로 형태학적 영역을 점진적으로 증가시켜 내접원 및 외접원을 설정한 후 내접원/외접원 비를 도출할 수 있다. 이에 대해서는 하기에서 도 11을 참조하여 보다 상세히 설명하기로 한다.Next, in step S1015, the measuring
단계(S1020)에서 측정부(130)는 검출된 각 피부 셀의 교차점 검출을 통해 교차점 개수 및 교차점간의 평균 길이를 각각 특징 정보로써 도출한다.In step S1020, the
예를 들어, 측정부(130)는 검출된 각 피부 셀의 경계 라인들에 위치한 각 포인트를 대상으로 적어도 3개의 경계 라인과 만나는 포인트를 교차점으로 각각 검출할 수 있다.For example, the measuring
도 13에는 임의 피부 셀을 대상으로 검출된 교차점이 예시되어 있다. 도 13을 참조하면, 1310a 내지 1310f가 각각 적어도 3개의 경계 라인과 만나는 포인트로, 각각 교차점으로 검출된 것을 알 수 있다.FIG. 13 illustrates intersection points detected with respect to arbitrary skin cells. Referring to FIG. 13, it can be seen that 1310a to 1310f are detected as intersections, respectively, at points where they meet at least three boundary lines.
이어, 측정부(130)는 각 피부 셀의 교차점 개수 및 교차점간의 평균 길이를 도출할 수 있다. 이때, 측정부(130)는 임의의 교차점과 다른 교차점간의 직선 거리를 연결하여 각 교차점간의 거리를 계산한 후 평균하여 평균 거리를 계산할 수 있다. 두점간의 직선 거리를 계산하는 방법 자체는 이미 당업자에게는 자명한 사항이므로 이에 대한 별도의 설명은 생략하기로 한다.Then, the measuring
도 14에는 각 피부 셀에 대해 검출된 교차점을 상호간 연결한 일 예가 도시되어 있다.FIG. 14 shows an example in which the intersections detected for each skin cell are connected to each other.
이와 같이, 측정부(130)는 검출된 피부 셀에 대한 다양한 특징 정보를 추출하고, 추출된 특징 정보를 이용하여 피부 나이를 추론할 수 있다.In this way, the measuring
도 11은 본 발명의 일 실시예에 따른 내접원/외접원 비를 도출하는 방법을 설명하기 위한 순서도이고, 도 12는 본 발명의 일 실시예에 따른 검출된 내접원과 외접원을 도시한 도면이다.FIG. 11 is a flowchart illustrating a method of deriving an inscribed circle / circumference ratio according to an embodiment of the present invention, and FIG. 12 is a diagram illustrating detected inscribed circle and circumscribed circle according to an embodiment of the present invention.
단계(S1110)에서 측정부(130)는 각 피부 셀의 중심점을 기준으로 형태학적 영역(예를 들어, 원형)을 점진적으로 확장시킨다.In step S1110, the
단계(S1115)에서 측정부(130)는 형태학적 영역을 점진적으로 확장시키면서 피부 셀의 경계 라인과 최초 만나는 지점(즉, 경계 라인들 중 최초 만나는 지점)까지의 형태학적 영역까지의 원형을 설정하여 내접원으로 설정한다.In step S1115, the measuring
이어, 측정부(130)는 설정된 내접원의 지름을 계산한다.Then, the measuring
이어, 단계(S1120)에서 측정부(130)는 형태학적 영역을 점진적으로 확장시키면서 피부 셀의 경계 라인과 가장 마지막에 만나는 지점(즉, 경계 라인들 중 최종 만나는 지점)까지의 형태학적 영역까지의 원형을 설정하여 외접원으로 설정한다. 이어, 측정부(130)는 설정된 외접원의 지름을 계산한다.Then, in step S1120, the measuring
도 12에는 피부 셀에 대한 내접원과 외접원을 설정한 일 예가 도시되어 있다. 도 12에서 굵은 선의 원형은 내접원을 나타내고, 가는 선의 원형은 외접원을 나타낸다.12 shows an example of setting the inscribed circle and the circumscribed circle to the skin cells. In Fig. 12, the bold line represents the inscribed circle, and the thin line represents the circumscribed circle.
단계(S1120)에서 측정부(130)는 계산된 내접원 지름 및 외접원 지름을 이용하여 내접원/외접원 비를 계산한다.In step S1120, the measuring
이때, 측정부(130)는 계산된 내접원/외접원 비들 중 상위 15개의 내접원/외접원 비를 추출하여 피부 셀의 특징 정보로 이용할 수 있다.At this time, the measuring
도 15 내지 도 17는 본 발명의 일 실시예에 따른 나이별 피부 셀의 특징 정보의 통계치를 도시한 도면이다.15 to 17 are views showing statistical values of feature information of skin cells by age according to an embodiment of the present invention.
도 15 내지 도 17는 각 연령대의 피부 현미경 영상을 통해 피부 셀의 특징 정보를 추출한 후 통계화한 표를 나타낸 것이다. 이와 같이, 각 연령대별 피부 셀에 대한 특징 정보를 통계화하여 저장한 후 피검자의 피부 현미경 영상을 통해 피부 셀의 특징정보를 추출하여 객관적으로 피부 나이를 추론할 수 있다.FIGS. 15 to 17 are tables showing characteristic data of the skin cells extracted from the skin micrographs of the respective ages and then statistical analysis. Thus, the feature information of the skin cells for each age group is statistically stored and then the feature information of the skin cells can be extracted through the skin microscope image of the subject to objectively deduce the skin age.
도 15는 각 연령대의 얼굴 피부 현미경 영상을 이용하여 피부 셀의 특징 정보를 추출하여 통계화한 것이고, 도 16은 각 연령대의 목 피부 현미경 영상을 이용하여 피부 셀의 특징 정보를 추출하여 통계화한 것이며, 도 17는 각 연령대의 손 피부 현미경 영상을 이용하여 피부 셀의 특징 정보를 추출하여 통계화한 것이다.FIG. 15 is a graph showing the feature information of the skin cell extracted using statistical images of facial skin microscopes at various ages. FIG. 16 is a graph showing the characteristics of skin cells extracted from statistical data FIG. 17 is a graph showing the extraction of feature information of skin cells using a hand skin microscope image of each age group and statistical analysis.
본 발명의 일 실시예에서는 각 피부 셀에 대한 특징 정보만을 이용하여 피부 나이를 추론하는 것을 중심으로 설명하였으나, 도 15 내지 도 17에 도시된 바와 같이, 주름의 평균 길이, 너비 및 높이와 같은 정보를 특징정보로써 추출하여 피부 셀의 특징정보와 함께 이용할 수도 있다. In the embodiment of the present invention, the skin age is inferred using only the feature information of each skin cell. However, as shown in FIGS. 15 to 17, information such as average length, width and height of the wrinkles May be extracted as feature information and used together with the feature information of the skin cell.
도 18는 본 발명의 일 실시예에 따른 피부 나이 측정 장치의 내부 구성을 개략적으로 도시한 도면이다.FIG. 18 is a view schematically showing an internal configuration of a skin age measuring apparatus according to an embodiment of the present invention.
도 18를 참조하면, 본 발명의 일 실시예에 따른 측정부(130)는 전처리부(1810), 검출부(1815), 특징 추출부(1820), 추론부(1825), 메모리(1830) 및 제어부(1835)를 포함하여 구성된다.18, a measuring
전처리부(1810)는 피부 현미경 영상에 대해 피부 현미경 영상에 대한 노이즈 제거를 위해 Otsu의 방법으로 이진화한 후 워터세드 알고리즘을 수행하여 노이즈를 제거한다.The
이와 같이 전처리된 영상은 워터세드 알고리즘을 통해 이진화된 그레이 영상에서, 영역의 경계선을 1 픽셀로 설정하는 스켈레톤 영상으로 변환될 수 있다.The preprocessed image can be converted into a skeleton image that sets the boundary line of the region to one pixel in the gray image binarized by the water-seek algorithm.
검출부(1815)는 스켈레톤 영상에서 피부 셀을 검출하기 위한 수단이다. The
예를 들어, 측정부(130)는 임의의 픽셀을 시작점으로 하여 4개의 이웃 경계 라인(예를 들어, 왼쪽 경계 라인, 오른쪽 경계 라인, 위쪽 경계 라인, 아래쪽 경계 라인)으로 연결된 컴포넌트(폴리건)을 각각 검색하고, 검색된 컴포넌트를 각각 하나의 셀로 설정할 수 있다. 이는 도 4를 참조하여 설명한 바와 동일하므로 중복되는 설명은 생략하기로 한다.For example, the measuring
특징 추출부(1820)는 검출된 각 피부 셀에 대한 특징 정보를 추출한다. The
예를 들어, 측정부(130)는 검출된 각 피부 셀에 대한 평균 셀 크기, 피부 셀 개수, 내접원/외접원 비, 교차점 개수 및 교차점 평균 길이 중 적어도 하나를 특징 정보로 추출할 수 있다. 이는 도 7을 참조하여 설명한 바와 동일하므로, 중복되는 설명은 생략하기로 한다.For example, the measuring
추론부(1825)는 추출된 각 피부 셀 특징 정보를 이용하여 피부 나이를 추론한다. The
예를 들어, 추론부(1825)는 도 15 내지 도 17와 같이, 통계화된 각 연령별 피부 셀 특징 정보의 통계치와 피검자의 각 피부 셀의 특징정보를 비교하여 피부 나이를 추론할 수 있다.For example, as shown in FIGS. 15 to 17, the
메모리(1830)는 본 발명의 일 실시예에 따른 피부 나이 측정 방법을 수행하기 위해 필요한 다양한 알고리즘, 각 연령별 피부 셀의 특징 정보의 통계치 등을 저장한다.The
제어부(1835)는 본 발명의 일 실시예에 따른 측정부(130)의 내부 구성 요소들(예를 들어, 전처리부(1810), 검출부(1815), 특징 추출부(1820), 추론부(1825), 메모리(1830) 등)을 제어하기 위한 수단이다.
The
또한 앞서 설명한 기술적 내용들은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예들을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 하드웨어 장치는 실시예들의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.In addition, the above-described technical features may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer-readable medium may include program instructions, data files, data structures, and the like, alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the embodiments or may be available to those skilled in the art of computer software. Examples of computer-readable media include magnetic media such as hard disks, floppy disks and magnetic tape; optical media such as CD-ROMs and DVDs; magnetic media such as floppy disks; Magneto-optical media, and hardware devices specifically configured to store and execute program instructions such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine language code such as those produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter or the like. The hardware device may be configured to operate as one or more software modules to perform the operations of the embodiments, and vice versa.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.As described above, the present invention has been described with reference to particular embodiments, such as specific elements, and limited embodiments and drawings. However, it should be understood that the present invention is not limited to the above- Various modifications and variations may be made thereto by those skilled in the art to which the present invention pertains. Accordingly, the spirit of the present invention should not be construed as being limited to the embodiments described, and all of the equivalents or equivalents of the claims, as well as the following claims, belong to the scope of the present invention .
Claims (10)
상기 사용자의 피부 현미경 영상을 이용하여 상기 사용자의 피부 나이를 측정하는 단계;
상기 추정된 피부 나이 및 상기 측정된 피부 나이를 이용하여 상기 복수의 파라미터의 가중치를 갱신하는 단계; 및
상기 갱신된 가중치 및 상기 산출된 복수의 파라미터의 점수를 이용하여, 상기 제1 시점 이 후의 상기 사용자의 피부 나이를 예측하는 단계;를 포함하는 것을 특징으로 하는 피부 나이 예측 방법. Calculating a score of a plurality of parameters associated with the user's skin age using information for recording a user's life pattern for a predetermined past time at a first point of time, Estimating a skin age of the user using a weight of a plurality of parameters;
Measuring the skin age of the user using the skin microscope image of the user;
Updating the weights of the plurality of parameters using the estimated skin age and the measured skin age; And
And estimating the skin age of the user after the first point of time using the updated weight and the score of the calculated plurality of parameters.
상기 사용자의 생활 패턴을 기록하기 위한 정보들은 SNS(Social Network Service) 게시물, 달력 애플리케이션, 일기장 애플리케이션, 가계부 애플리케이션 중 적어도 하나 이상을 통해 수집되는 것을 특징으로 하는 피부 나이 예측 방법. The method according to claim 1,
Wherein information for recording the life pattern of the user is collected through at least one of a social network service (SNS) post, a calendar application, a diary application, and a household application.
상기 복수의 파라미터는, 음식물 섭취 파라미터, 실외 활동 파라미터, 운동 파라미터, 수면 파라미터, 음주 파라미터 및 흡연 파라미터 중 적어도 하나를 포함하는 것을 특징으로 하는 피부 나이 예측 방법. The method according to claim 1,
Wherein the plurality of parameters comprises at least one of a food intake parameter, an outdoor activity parameter, an exercise parameter, a sleep parameter, a drinking parameter and a smoking parameter.
상기 음식물 섭취 파라미터의 점수는 사용자의 나이, 키, 체중, 상기 사용자가 섭취한 음식물의 열량, 상기 사용자가 섭취한 음식물의 섭취 시간 중 적어도 하나에 기초하여 산출되는 것을 특징으로 하는 피부 나이 예측 방법. The method of claim 3,
Wherein the score of the food intake parameter is calculated based on at least one of a user's age, a height, a weight, a calorie of the food consumed by the user, and an intake time of the food consumed by the user.
상기 실외 활동 파라미터의 점수는 실외 온도, 상기 사용자의 실외 활동 지속 시간, 상기 사용자가 실외 활동을 한 때의 시간 정보, 구름 운량 중 적어도 하나에 기초하여 산출되는 것을 특징으로 하는 피부 나이 예측 방법. The method of claim 3,
Wherein the score of the outdoor activity parameter is calculated based on at least one of an outdoor temperature, an outdoor activity duration of the user, time information when the user performs an outdoor activity, and cloudiness.
상기 운동 파라미터의 점수는 운동 횟수 및 운동 지속 시간 중 적어도 하나에 기초하여 산출되는 것을 특징으로 하는 피부 나이 예측 방법. The method of claim 3,
Wherein the score of the exercise parameter is calculated based on at least one of a number of times of exercise and a duration of exercise.
상기 수면 파라미터의 점수는 수면 시작 시간 및 수면 지속 시간 중 적어도 하나에 기초하여 산출되는 것을 특징으로 하는 피부 나이 예측 방법. The method of claim 3,
Wherein the score of the sleep parameter is calculated based on at least one of a sleep start time and a sleep duration.
상기 음주 파라미터는 상기 사용자의 음주량 및 상기 음주량에 따른 열량 중 적어도 하나에 기초하여 산출되는 것을 특징으로 하는 피부 나이 예측 방법. The method of claim 3,
Wherein the drinking parameter is calculated based on at least one of a drinking amount of the user and a calorie amount corresponding to the drinking amount.
상기 사용자의 피부 나이를 측정하는 단계는,
상기 사용자의 피부 현미경 영상을 전처리하여 스켈레톤 영상(skeleton image)으로 변환하는 단계;
상기 스켈레톤 영상에서 폴리건 메시 검출을 통해 피부 셀을 각각 검출하는 단계;
상기 검출된 각 피부 셀의 특징 정보를 추출하는 단계 - 상기 특징 정보는 상기 피부 셀 평균 크기 및 개수를 포함함; 및
상기 피부 셀의 특징 정보를 이용하여 피부 나이를 도출하는 단계;를 포함하는 피부 나이 예측 방법.The method according to claim 1,
Wherein the measuring the skin age of the user comprises:
Transforming the user's skin micro-scope image into a skeleton image by preprocessing;
Detecting each skin cell through polygon mesh detection in the skeleton image;
Extracting feature information of each detected skin cell, the feature information including the skin cell average size and number; And
And deriving a skin age using feature information of the skin cell.
상기 사용자의 피부 현미경 영상을 이용하여 상기 사용자의 피부 나이를 측정하는 측정부;
상기 추정된 피부 나이 및 상기 측정된 피부 나이를 이용하여 상기 복수의 파라미터의 가중치를 갱신하는 갱신부; 및
상기 갱신된 가중치 및 상기 산출된 복수의 파라미터의 점수를 이용하여, 상기 제1 시점 이 후의 상기 사용자의 피부 나이를 예측하는 예측부;를 포함하는 것을 특징으로 하는 피부 나이 예측 장치.
Calculating a score of a plurality of parameters associated with the user's skin age using information for recording a user's life pattern for a predetermined past time at a first point of time, An estimating unit estimating a skin age of the user using a weight of a plurality of parameters;
A measuring unit measuring the skin age of the user using the skin micrograph image of the user;
An updating unit updating the weights of the plurality of parameters using the estimated skin age and the measured skin age; And
And a predictor for predicting the skin age of the user after the first point of time using the updated weight and the score of the calculated plurality of parameters.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130146258A KR101538231B1 (en) | 2013-11-28 | 2013-11-28 | Skin texture predicting method and apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130146258A KR101538231B1 (en) | 2013-11-28 | 2013-11-28 | Skin texture predicting method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150061914A true KR20150061914A (en) | 2015-06-05 |
KR101538231B1 KR101538231B1 (en) | 2015-07-20 |
Family
ID=53499855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020130146258A KR101538231B1 (en) | 2013-11-28 | 2013-11-28 | Skin texture predicting method and apparatus |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101538231B1 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017052153A1 (en) * | 2015-09-22 | 2017-03-30 | 한국과학기술연구원 | Age changing method based on age of each facial part and environmental factors, and recording medium and device for performing same |
KR20200021733A (en) * | 2018-08-21 | 2020-03-02 | 주식회사 더마프로 | Software tool to rate wrinkled skinusing Deep Learning |
US11079279B2 (en) | 2019-03-22 | 2021-08-03 | Speclipse, Inc. | Diagnosis method using laser induced breakdown spectroscopy and diagnosis device performing the same |
WO2021210838A1 (en) * | 2020-04-14 | 2021-10-21 | 주식회사 클리노믹스 | Method and system for predicting biological age on basis of various omics data analyses |
KR20210158049A (en) * | 2020-06-23 | 2021-12-30 | 피엔케이피부임상연구센타 주식회사 | Skin Age Diagnosis Method and Computer Readable Medium Having Computer Program Recorded Therefor |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008242963A (en) * | 2007-03-28 | 2008-10-09 | Fujifilm Corp | Health analysis display method and health analysis display device |
KR101009959B1 (en) * | 2008-09-25 | 2011-01-20 | 한국생산기술연구원 | System and method health to measure, and record media recorded program for implement thereof |
-
2013
- 2013-11-28 KR KR1020130146258A patent/KR101538231B1/en active IP Right Grant
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017052153A1 (en) * | 2015-09-22 | 2017-03-30 | 한국과학기술연구원 | Age changing method based on age of each facial part and environmental factors, and recording medium and device for performing same |
US10593083B2 (en) | 2015-09-22 | 2020-03-17 | Korea Institute Of Science And Technology | Method for facial age simulation based on age of each part and environmental factors, recording medium and device for performing the method |
KR20200021733A (en) * | 2018-08-21 | 2020-03-02 | 주식회사 더마프로 | Software tool to rate wrinkled skinusing Deep Learning |
US11079279B2 (en) | 2019-03-22 | 2021-08-03 | Speclipse, Inc. | Diagnosis method using laser induced breakdown spectroscopy and diagnosis device performing the same |
US11326949B2 (en) | 2019-03-22 | 2022-05-10 | Speclipse, Inc. | Diagnosis method using laser induced breakdown spectroscopy and diagnosis device performing the same |
US11422033B2 (en) | 2019-03-22 | 2022-08-23 | Speclipse, Inc. | Diagnosis method using laser induced breakdown spectroscopy and diagnosis device performing the same |
US11892353B2 (en) | 2019-03-22 | 2024-02-06 | Speclipse, Inc. | Diagnosis method using laser induced breakdown spectroscopy and diagnosis device performing the same |
WO2021210838A1 (en) * | 2020-04-14 | 2021-10-21 | 주식회사 클리노믹스 | Method and system for predicting biological age on basis of various omics data analyses |
KR20210158049A (en) * | 2020-06-23 | 2021-12-30 | 피엔케이피부임상연구센타 주식회사 | Skin Age Diagnosis Method and Computer Readable Medium Having Computer Program Recorded Therefor |
WO2021261827A1 (en) * | 2020-06-23 | 2021-12-30 | 피엔케이피부임상연구센타 주식회사 | Skin age diagnosis method and storage medium with program for executing same recorded thereon |
Also Published As
Publication number | Publication date |
---|---|
KR101538231B1 (en) | 2015-07-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Richards et al. | Using image recognition to automate assessment of cultural ecosystem services from social media photographs | |
KR101538231B1 (en) | Skin texture predicting method and apparatus | |
CN105740773B (en) | Activity recognition method based on deep learning and multi-scale information | |
Chen et al. | Predicting the effect of street environment on residents' mood states in large urban areas using machine learning and street view images | |
CN109284733A (en) | A kind of shopping guide's act of omission monitoring method based on yolo and multitask convolutional neural networks | |
CN108288106A (en) | A kind of tourist flows prediction technique based on big data | |
CN110689041A (en) | Multi-target behavior action recognition and prediction method, electronic equipment and storage medium | |
CN110225366A (en) | Video data processing and advertisement position determine method, apparatus, medium and electronic equipment | |
Andrienko et al. | Discovering bits of place histories from people's activity traces | |
CN109002492B (en) | Performance point prediction method based on LightGBM | |
CN108334575A (en) | A kind of recommendation results sequence modification method and device, electronic equipment | |
CN110532970A (en) | Age-sex's property analysis method, system, equipment and the medium of face 2D image | |
CN109902912A (en) | A kind of personalized image aesthetic evaluation method based on character trait | |
CN107658001A (en) | A kind of home-use oily health control method and system | |
CN110378736A (en) | The method that tourist experiences satisfaction to natural resources is evaluated by facial expression recognition | |
CN110634557B (en) | Medical care resource auxiliary allocation method and system based on deep neural network | |
CN108492301A (en) | A kind of Scene Segmentation, terminal and storage medium | |
Ahn et al. | A digital twin city model for age-friendly communities: Capturing environmental distress from multimodal sensory data | |
CN108764203A (en) | A kind of pedestrian's quantitative analysis and display systems towards urban planning | |
CN109086794A (en) | A kind of driving behavior mode knowledge method based on T-LDA topic model | |
CN109492537A (en) | A kind of object identification method and device | |
Qiu et al. | The natural focus: Combining deep learning and eye-tracking to understand public perceptions of urban ecosystem aesthetics | |
CN106055875A (en) | Dermatoglyph analysis and processing apparatus based on big data | |
SONG et al. | Social Inequalities in neighborhood-level streetscape perceptions in Shanghai: the coherence and divergence between the objective and subjective measurements | |
CN112489815A (en) | Depression emotion monitoring method and device and readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
FPAY | Annual fee payment |
Payment date: 20180702 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20190708 Year of fee payment: 5 |