KR20230029486A - Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user - Google Patents

Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user Download PDF

Info

Publication number
KR20230029486A
KR20230029486A KR1020220015069A KR20220015069A KR20230029486A KR 20230029486 A KR20230029486 A KR 20230029486A KR 1020220015069 A KR1020220015069 A KR 1020220015069A KR 20220015069 A KR20220015069 A KR 20220015069A KR 20230029486 A KR20230029486 A KR 20230029486A
Authority
KR
South Korea
Prior art keywords
user
cosmetics
users
skin
determined
Prior art date
Application number
KR1020220015069A
Other languages
Korean (ko)
Inventor
설혜진
Original Assignee
주식회사 브이 메이커스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 브이 메이커스 filed Critical 주식회사 브이 메이커스
Priority to KR1020220015069A priority Critical patent/KR20230029486A/en
Publication of KR20230029486A publication Critical patent/KR20230029486A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/44Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
    • A61B5/441Skin evaluation, e.g. for skin disorder diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/12Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02Operational features
    • A61B2560/0242Operational features adapted to measure environmental factors, e.g. temperature, pollution
    • A61B2560/0247Operational features adapted to measure environmental factors, e.g. temperature, pollution for compensation or correction of the measured physiological value

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • General Health & Medical Sciences (AREA)
  • Finance (AREA)
  • Marketing (AREA)
  • Biomedical Technology (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Dermatology (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Multimedia (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

According to various embodiments, a cosmetics recommendation server for recommending customized cosmetics in consideration of cosmetics use information of other users with similar activity areas and work environments. The server comprises: an information acquisition unit for acquiring a face image of a user and activity area information indicating an area for activity of the user from a user terminal; a skin properties determination unit for determining properties of skin of the user, based on the acquired face image; and a cosmetics determination unit for determining cosmetics based on the determined skin characteristics and the cosmetics use information of other users distinct from the user, wherein the cosmetics determination unit determines first users among the other users in the same activity area as the user, determines second users, among the determined first users, who have the same work type as the user and whose average monthly out-of-hours time difference is within a first hour, determines users whose work similarity, which indicates the similarity of the work environment between the user and the second users, is greater than or equal to a threshold among the determined second users as third users, and determines the cosmetics based on the cosmetics use information of the third users.

Description

사용자의 피부 특성 및 사용자와 유사한 환경에 속해있는 다른 사용자들의 화장품 사용 정보에 기초하여 사용자에게 맞춤형 화장품을 추천하는 서비스를 제공하는 방법 및 장치{METHOD AND APPARATUS FOR PROVIDING A SERVICE FOR RECOMMENDING COSTOMIZED COSMETICS TO USER BASED ON THE USER'S SKIN CHARACTERISTICS AND COSMETIC USE INFORMATION OF OTHER USERS BELONGING TO AN ENVIRONMENT SIMILAR TO THE USER}A method and apparatus for providing a service for recommending customized cosmetics to a user based on the user's skin characteristics and other users' cosmetics use information belonging to a similar environment to the user ON THE USER'S SKIN CHARACTERISTICS AND COSMETIC USE INFORMATION OF OTHER USERS BELONGING TO AN ENVIRONMENT SIMILAR TO THE USER}

본 발명은 사용자에게 맞춤형 화장품을 추천하는 방법 및 장치에 관한 것으로, 자세하게는 AI 기반의 인공 신경망에 기초하여, 사용자의 피부 영상을 통해 판단된 사용자의 피부 특성 및 사용자와 유사한 생활 환경 내지 근무 환경에 속해 있는 다른 사용자들의 화장품 사용 정보에 기초하여 사용자에게 맞춤형 화장품을 결정하고 이를 추천하는 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for recommending customized cosmetics to a user. The present invention relates to a method and apparatus for determining and recommending customized cosmetics to a user based on cosmetics use information of other users belonging thereto.

근래에는 미에 대한 관심이 증가하면서, 특히 얼굴의 피부 미용에 대한 관심이 높아지고 있다. 또한, 오늘날 구매자들의 소비 성향은 과거와 확연히 뚜렷한 차이를 보이고 있다. 기존의 구매자들이 오프라인에서 직접 상품을 보고 구매하던 것과는 달리, 오늘 날의 구매자들은 컴퓨터 또는 스마트폰과 같은 기기를 이용하여 통신망을 통하여 다양한 상품을 구매하는 것을 선호하고 있다. 이 경우, 화장품의 구매자들은 화장품 쇼핑몰, 블로그 및 상품의 상품평을 참고하여 화장품 정보를 얻을 수 있다.In recent years, as interest in beauty has increased, in particular, interest in facial skin care has increased. In addition, the consumption propensity of today's buyers is clearly different from that of the past. Unlike existing buyers who directly viewed and purchased products offline, today's buyers prefer to purchase a variety of products through a communication network using devices such as computers or smart phones. In this case, buyers of cosmetics can obtain cosmetics information by referring to cosmetics shopping malls, blogs, and product reviews.

다만, 피부는 내부 요인 뿐 아니라 외부 요인에 따라 영향을 많이 받으므로, 사용자의 피부 타입 및 피부 상태는 생활 환경이 유사한 사람들끼리 비슷할 수 있다. 따라서, 단순히 다른 구매자들의 후기에 의존하는 것보다는 생활 환경(예: 근무 환경)이 유사한 다른 구매자들의 특성을 고려하면 사용자의 특성(예를 들어, 성별, 연령, 피부의 타입, 화장품의 종류, 화장품의 목적 및 효과 등)에 맞는 화장품을 보다 빠르게, 적절한 화장품을 제공할 수 있으므로, 이를 통해 사용자에게 맞는 화장품들을 추천하는 방안이 마련될 필요가 있다.However, since the skin is greatly affected by external factors as well as internal factors, the user's skin type and skin condition may be similar among people with similar living environments. Therefore, rather than simply relying on other buyers' reviews, considering the characteristics of other buyers with similar living environments (eg, working environments), the user's characteristics (eg, gender, age, skin type, type of cosmetics, cosmetics Since it is possible to provide cosmetics suitable for the purpose and effect of the product more quickly and appropriately, it is necessary to prepare a method for recommending cosmetics suitable for the user.

또한, 피부 표면은 외부 환경과 밀접한 관련이 있는데, 특히 외부의 온도 및 습도에 따라 피부 표면에는 많은 변화가 있을 수 있다. 우리나라는 지역별로 기후 특성이 뚜렷하고, 사계절이 뚜렷하기 때문에 외부 환경의 변화가 큰 편에 속하는데, 화장품의 사용 기간 동안 외부 환경의 변화를 반영하여 사용자에게 화장품을 추천하는 것이 필요할 수 있다.In addition, the skin surface is closely related to the external environment, and in particular, there may be many changes on the skin surface depending on the external temperature and humidity. Korea has distinct climate characteristics by region and four distinct seasons, so changes in the external environment are large. It may be necessary to recommend cosmetics to users by reflecting changes in the external environment during the period of use of cosmetics.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 단순히 다른 사용자들의 화장품 사용 정보를 이용하는 것이 아니라, 빅데이터를 활용하여 사용자와 활동 지역 및 근무 환경이 유사한 다른 사용자들의 화장품 사용 정보에 기초하여, 사용자에게 추천할 화장품들을 결정하는 방법 및 장치를 제공한다.The purpose of the present invention to solve the above problems is not simply using the cosmetic use information of other users, but based on the cosmetic use information of other users who have similar activity areas and work environments to the user by utilizing big data, A method and apparatus for determining cosmetics to be recommended to a user are provided.

상기와 같은 문제점을 해결하기 위한 본 발명의 다른 목적은, 사용자의 얼굴 이미지에 대해 인공 신경망을 이용하여 구매 시점에 대응되는 사용자의 피부 특성을 파악하는 것 뿐만 아니라, 화장품을 사용하는 동안 일어날 피부 특성 변화에 기초하여, 사용자에게 추천할 화장품들을 결정하는 방법 및 장치를 제공한다.Another object of the present invention to solve the above problems is to identify the user's skin characteristics corresponding to the point of purchase using an artificial neural network for the user's face image, as well as skin characteristics that will occur while using cosmetics. Based on the change, a method and apparatus for determining cosmetics to be recommended to a user are provided.

다양한 실시 예에 따르면, 활동 지역 및 근무 환경이 유사한 다른 사용자들의 화장품 사용 정보를 고려하여 맞춤형 화장품을 추천하는 화장품 추천 서버는 상기 사용자의 사용자 단말로부터 상기 사용자의 얼굴 이미지 및 상기 사용자의 활동 지역을 지시하는 활동 지역 정보를 획득하는 정보 획득부; 획득된 상기 얼굴 이미지에 기초하여 상기 사용자의 피부 특성을 결정하는 피부 특성 결정부; 결정된 상기 피부 특성 및 상기 사용자와 구별되는 다른 사용자들의 화장품 사용 정보에 기초하여 화장품들을 결정하되, 상기 다른 사용자들 중 상기 사용자와 동일한 활동 지역에 있는 제1 사용자들을 결정하고, 결정된 상기 제1 사용자들 중 상기 사용자와 근무 형태가 동일하고, 상기 사용자와 월 평균 외근 시간의 차이가 제1 시간 이내인 제2 사용자들을 결정하고, 결정된 상기 제2 사용자들 중, 상기 사용자와 상기 제2 사용자들 사이의 근무 환경의 유사도를 나타내는 근무 유사도가 임계값 이상인 사용자들을 제3 사용자들로 결정하고, 상기 제3 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정하는 화장품 결정부를 포함할 수 있다.According to various embodiments of the present disclosure, a cosmetics recommendation server that recommends customized cosmetics in consideration of cosmetics use information of other users with similar activity areas and work environments indicates the user's face image and the user's activity region from the user's user terminal. an information acquisition unit that obtains activity area information to be performed; a skin characteristic determination unit configured to determine skin characteristics of the user based on the obtained face image; Cosmetics are determined based on the determined skin characteristics and cosmetics use information of other users who are distinguished from the user, and among the other users, first users in the same activity area as the user are determined, and the determined first users are selected. determining second users whose work type is the same as that of the user and whose monthly average out-of-office time difference is less than a first hour; A cosmetics determining unit may be configured to determine users whose working environment similarity is equal to or greater than a threshold value as third users, and to determine the cosmetics based on cosmetics use information of the third users.

다양한 실시 예에서, 활동 지역 및 근무 환경이 유사한 다른 사용자들의 화장품 사용 정보를 고려하여 맞춤형 화장품을 추천하는 화장품 추천 서버는 상기 사용자의 사용자 단말로부터 상기 사용자의 얼굴 이미지 및 상기 사용자의 활동 지역을 지시하는 활동 지역 정보를 획득하는 정보 획득부; 획득된 상기 얼굴 이미지에 기초하여 상기 사용자의 피부 특성을 결정하는 피부 특성 결정부; 결정된 상기 피부 특성에 기초하여 상기 사용자에게 필요한 필요 성분 및 필요 효과를 포함하는 화장품들을 결정하는 화장품 결정부; 및 결정된 상기 화장품들의 추천 리스트를 생성하고, 상기 추천 리스트를 상기 사용자 단말에 전송하는 추천 리스트 생성부를 포함할 수 있다. 상기 피부 특성 결정부는, 상기 얼굴 이미지에 기초하여 상기 사용자의 피부의 수분, 유분, 피지, 주름, 모공 상태 및 각질 상태 중 적어도 하나 이상의 피부 특성을 결정하고, 상기 화장품 결정부는, 결정된 상기 사용자의 피부 특성 및 상기 사용자와 구별되는 다른 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정할 수 있다.In various embodiments, a cosmetics recommendation server that recommends customized cosmetics in consideration of cosmetics use information of other users with similar activity areas and work environments may indicate the user's face image and the user's activity area from the user's user terminal an information acquisition unit that acquires activity area information; a skin characteristic determination unit configured to determine skin characteristics of the user based on the obtained face image; a cosmetics determining unit which determines cosmetics including necessary ingredients and necessary effects required for the user based on the determined skin characteristics; and a recommendation list creation unit generating a recommendation list of the determined cosmetics and transmitting the recommendation list to the user terminal. The skin characteristic determination unit determines at least one skin characteristic among moisture, oil, sebum, wrinkles, pore state, and dead skin condition of the user's skin based on the face image, and the cosmetics determination unit determines the determined user's skin characteristics. The cosmetic products may be determined based on characteristics and cosmetic use information of other users distinguished from the user.

다양한 실시 예에서, 상기 피부 특성 결정부는, 획득된 상기 사용자의 얼굴 이미지를 복수 개의 얼굴 영역들로 분할하고, 분할된 상기 복수 개의 얼굴 영역들 각각에 대한 피부 특성을 결정하고, 상기 각각에 대한 피부 특성에 기초하여, 구매 시점에 대응되는 상기 사용자의 피부 특성을 결정할 수 있다.In various embodiments, the skin characteristic determination unit divides the acquired face image of the user into a plurality of face regions, determines skin characteristics for each of the plurality of divided face regions, and determines the skin characteristics for each of the plurality of face regions. Based on the characteristics, the user's skin characteristics corresponding to the point of purchase may be determined.

다양한 실시 예에서, 상기 피부 특성 결정부는, 상기 복수 개의 얼굴 영역들 중 면적이 제1 면적 이상인 제1 얼굴 영역의 피부 특성을 결정하고, 상기 제1 얼굴 영역의 피부 특성을 통해 상기 제1 얼굴 영역과 유사한 피부 특성을 나타내는 제2 얼굴 영역의 피부 특성을 결정하고, 결정된 상기 제1 얼굴 영역의 피부 특성 및 상기 제2 얼굴 영역의 피부 특성에 기초하여 상기 사용자의 피부 특성을 결정할 수 있다.In various embodiments, the skin characteristic determiner may determine the skin characteristic of a first facial region having an area equal to or larger than a first area among the plurality of facial regions, and determine the skin characteristic of the first facial region through the skin characteristic of the first facial region. The skin characteristics of the second facial region exhibiting similar skin characteristics may be determined, and the skin characteristics of the user may be determined based on the determined skin characteristics of the first facial region and the skin characteristics of the second facial region.

다양한 실시 예에서, 상기 피부 특성 결정부는, 상기 구매 시점에 대응되는 상기 사용자의 피부 특성 및 상기 구매 시점으로부터 일정 기간 동안 변하는 피부 특성 변화도에 기초하여, 상기 구매 시점으로부터 상기 일정 기간 이후의 시점인 사용 지속 시점에 대응되는 상기 사용자의 피부 특성을 결정할 수 있다. 상기 화장품 결정부는, 상기 사용 지속 시점에 대응되는 상기 사용자의 피부 특성에 기초하여 상기 화장품들을 결정할 수 있다.In various embodiments, the skin characteristic determination unit determines a time point after the predetermined period from the purchase time based on the user's skin characteristics corresponding to the purchase time and a degree of change in skin characteristics for a predetermined period from the purchase time. It is possible to determine the user's skin characteristics corresponding to the duration of use. The cosmetics determination unit may determine the cosmetics based on the user's skin characteristics corresponding to the duration of use.

다양한 실시 예에서, 상기 화장품 추천 서버는, 상기 사용자의 활동 지역에 대응하는 기후에 따라 달라지는 상기 사용자의 피부 특성 변화도를 결정하는 피부 특성 변화도 결정부를 더 포함하고, 상기 피부 특성 변화도 결정부는, 기상청 서버로부터 획득한 지역별 기후 정보에 기초하여, 상기 구매 시점에 대응되는 상기 활동 지역의 기후 및 상기 사용 지속 시점에 대응되는 상기 활동 지역의 기후를 비교하고, 상기 비교에 기초하여 상기 사용자의 상기 피부 특성 변화도를 결정하고, 상기 구매 시점에 대응되는 상기 사용자의 활동 지역의 기온, 습도 및 상기 사용 지속 시점에 대응되는 사용자의 활동 지역의 기온, 습도 사이의 기온 변화율 및 습도 변화율을 결정하고, 결정된 상기 기온 변화율 및 상기 습도 변화율에 비례하도록 상기 사용자의 피부 특성 중 수분량, 피지량, 모공, 탄력의 변화도를 결정하고, 결정된 상기 기온 변화율 및 상기 습도 변화율에 반비례하도록 상기 사용자의 피부 특성 중 주름, pH, 피부 밝기, 피부 민감도의 변화도를 결정할 수 있다.In various embodiments, the cosmetics recommendation server further includes a skin characteristic gradient determining unit that determines a skin characteristic gradient of the user that varies according to a climate corresponding to an active region of the user, wherein the skin characteristic gradient determining unit Based on the climate information for each region obtained from the Korea Meteorological Administration server, the climate of the activity region corresponding to the purchase time and the climate of the activity region corresponding to the use duration time are compared, and based on the comparison, the user's determining a change in skin characteristics, and determining a temperature change rate and a humidity change rate between the temperature and humidity of the user's active area corresponding to the time of purchase and the temperature and humidity of the user's active area corresponding to the duration of use; Among the skin characteristics of the user, the gradients of moisture, sebum, pores, and elasticity are determined in proportion to the determined rates of change in temperature and rate of change in humidity, and in inverse proportion to the determined rates of change in temperature and humidity, wrinkles among the characteristics of the user's skin, Changes in pH, skin brightness, and skin sensitivity can be determined.

다양한 실시 예에서, 상기 화장품 결정부는, 상기 다른 사용자들 중 상기 사용자와 동일한 활동 지역에 있는 다수의 사용자들을 결정하고, 결정된 상기 다수의 사용자들 중 상기 사용자와 근무 형태가 동일하고, 상기 사용자와 월 평균 외근 시간의 차이가 제1 시간 이내인 제1 사용자들을 결정할 수 있다.In various embodiments, the cosmetics determining unit determines a plurality of users in the same activity area as the user among the other users, has the same work type as the user among the determined plurality of users, and has a monthly month with the user. It is possible to determine first users whose difference in average out-of-office time is within a first time.

다양한 실시 예에서, 상기 화장품 결정부는, 결정된 상기 제1 사용자들 중, 상기 사용자와 상기 제1 사용자들 사이의 근무 환경의 유사도를 나타내는 근무 유사도가 임계값 이상인 사용자들을 제2 사용자들로 결정하고, 상기 제2 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정하며, 상기 화장품 사용 정보는 구매 후기, 사용 기간, 사용 빈도 및 반품 여부 중 적어도 하나를 포함할 수 있다.In various embodiments, the cosmetics determining unit determines, among the determined first users, users having a working similarity representing a similarity of a working environment between the user and the first users equal to or greater than a threshold value as second users, The cosmetics are determined based on cosmetics use information of the second users, and the cosmetics use information may include at least one of purchase reviews, use period, frequency of use, and return status.

다양한 실시 예에서, 상기 화장품 추천 서버는 근무 유사도 결정부를 더 포함하고, 상기 근무 유사도 결정부는, 상기 제1 사용자들을 대상으로 외근 시간에 기초하여 상기 제1 사용자들 각각의 외근 증감도 및 외근 변화도를 산출하고, 상기 사용자의 기준 외근 증감도 및 상기 제1 사용자들 각각의 외근 증감도 사이의 증감 연관도를 이하 수학식을 통해 산출하고,

Figure pat00001
,
Figure pat00002
상기 수학식에서, ID은 상기 증감 연관도고, Io는 상기 제1 사용자들 각각의 외근 증감도고, Ia는 상기 사용자의 기준 외근 증감도고, 상기 사용자의 기준 외근 변화도와 상기 제1 사용자들 각각의 외근 변화도 사이의 유클리디언 거리를 이하 수학식을 통해 산출하고,
Figure pat00003
Figure pat00004
상기 수학식에서, DIS는 유클리디언 거리이고, Go는 상기 제1 사용자들 각각의 외근 변화도고, G-a는 상기 사용자의 기준 외근 변화도이고, 이하 수학식을 통해 상기 근무 유사도를 결정하고,
Figure pat00005
상기 수학식에서, Sw는 상기 근무 유사도이고, k는 증감 연관도(ID)와 유클리디언 거리(DIS) 사이의 가중치를 결정하는 가중치 계수로서 0과 1 사이의 정수이며, DISμ는 결정된 상기 제1 사용자들에 대하여 산출된 유클리디언 거리들의 평균값이고, DISσ는 결정된 상기 제1 사용자들에 대하여 산출된 유클리디언 거리들의 표준편차일 수 있다.In various embodiments, the cosmetics recommendation server further includes a work similarity determination unit, and the work similarity determination unit determines the change in outside work and the change in outside work for each of the first users based on the outside work time for the first users. Calculate the increase and decrease relationship between the user's reference external muscle change and the external muscle increase and decrease of each of the first users through the following equation,
Figure pat00001
,
Figure pat00002
In the above equation, ID is the degree of increase/decrease correlation, I o is the degree of increase or decrease of external muscle of each of the first users, I a is the degree of increase or decrease of external muscle of the user based on the user, and Calculate the Euclidean distance between the external gradients through the following equation,
Figure pat00003
Figure pat00004
In the above equation, DIS is the Euclidean distance, Go is the degree of change in external force of each of the first users, G- a is the degree of change in external force of the user, and the work similarity is determined through the following equation, ,
Figure pat00005
In the above equation, S w is the work similarity, k is an integer between 0 and 1 as a weight coefficient for determining the weight between the incremental association (ID) and the Euclidean distance (DIS), and DISμ is the determined first It may be an average value of Euclidean distances calculated for 1 user, and DISσ may be a standard deviation of the determined Euclidean distances calculated for the first users.

상기 화장품 결정부는, 상기 제2 사용자들의 상기 구매 후기 중 긍적적인 리뷰의 비율이 제1 비율 이상인 화장품의 경우, 상기 제1 비율 이상인 화장품에 대한 가중치를 높이고, 긍정적인 리뷰의 비율이 제1 비율 미만인 화장품의 경우, 상기 제1 비율 이하인 화장품에 대한 가중치를 낮추고, 결정된 화장품에 대한 가중치에 기초하여, 사용자에게 적합한 화장품들을 결정할 수 있다.The cosmetics determining unit, in the case of cosmetics having a ratio of positive reviews among the purchase reviews of the second users equal to or greater than a first ratio, increases a weight for cosmetics having a ratio equal to or greater than the first ratio, and the ratio of positive reviews is less than the first ratio. In the case of cosmetics, weights for cosmetics that are equal to or less than the first ratio may be lowered, and cosmetics suitable for the user may be determined based on the determined weights for cosmetics.

다양한 실시 예에서, 상기 화장품 추천 서버는 사용 지속 시점 결정부를 더 포함하고, 상기 사용 지속 시점 결정부는, 상기 사용자 단말을 통해 입력 받은 사용 화장품에 대한 상기 사용자의 평균 사용 기간을 획득하고, 여기서 상기 사용 화장품은 상기 사용자가 구매하려는 화장품과 동일한 종류이며, 상기 사용자의 평균 사용 기간이 임계 기간 이하인 경우, 상기 구매 시점으로부터 상기 평균 사용 기간의 1/2의 기간 이후의 시점을 상기 사용 지속 시점으로 결정하고, 상기 사용자의 평균 사용 기간이 상기 임계 기간 초과인 경우, 상기 구매 시점으로부터 상기 평균 사용 기간의 1/4의 기간 이후의 시점을 상기 사용 지속 시점으로 결정할 수 있다.In various embodiments, the cosmetics recommendation server further includes a usage duration determining unit, and the usage duration determining unit obtains an average usage period of the user for used cosmetics input through the user terminal, wherein the use duration determination unit Cosmetics are of the same type as the cosmetics that the user intends to purchase, and if the user's average period of use is less than or equal to the critical period, a time point after 1/2 of the average period of use from the purchase time is determined as the usage duration point, , When the average usage period of the user exceeds the threshold period, a time point after 1/4 of the average usage period from the purchase time may be determined as the usage duration time point.

본 문서에 개시되는 다양한 실시 예들에 따르면, 사용자의 생활 환경과 유사한 사람들의 특성을 참고하므로 더 신속하고 정확하게 사용자에게 맞는 화장품을 추천할 수 있다. According to various embodiments disclosed in this document, since characteristics of people similar to the user's living environment are referred to, cosmetics suitable for the user can be recommended more quickly and accurately.

또한, 다양한 실시 예들에 따르면, 지역별 기후, 지역별 계절 변화에 따른 온도 및 습도 변화를 고려하여 구매 시점으로부터 일정 기간 이후의 피부 상태를 예측할 수 있다.In addition, according to various embodiments, a skin condition after a certain period of time may be predicted from the time of purchase in consideration of changes in temperature and humidity according to regional climate and seasonal changes in each region.

또한, 다양한 실시 예에 따르면, 구매 시점으로부터 일정 기간 이후의 피부 상태를 예측하여 화장품을 추천하므로, 화장품의 교체 시기를 늦출 수 있다In addition, according to various embodiments, cosmetics are recommended by predicting the skin condition after a certain period of time from the time of purchase, so the replacement time of cosmetics can be delayed.

또한, 다양한 실시 예에 따르면, 화장품의 교체 시기를 늦춤으로써 쓰지 않고 버려지는 화장품의 양을 줄일 수 있다.In addition, according to various embodiments, the amount of unused cosmetics can be reduced by delaying the replacement time of cosmetics.

이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.In addition to this, various effects identified directly or indirectly through this document may be provided.

도 1은 일 실시 예에 따른 사용자 화장품 추천 시스템을 도시한 도면이다.
도 2는 도 1의 화장품 추천 서버의 구성 요소를 나타낸 도면이다.
도 3은 지역별 기후 특성에 따라 사용자의 피부 특성이 달라지는 것을 설명하기 위한 도면이다.
도 4는 화장품에 대한 사용자의 사용 지속 시점에 대응되는 피부 특성에 적합한 화장품을 결정하는 과정을 설명하는 도면이다.
도 5는 다른 사용자들의 화장품 사용 정보를 고려하기 위해 근무 유사도를 결정하는 것을 설명하기 위한 도면이다.
도 6은 도 1에 따른 서버의 하드웨어 구성을 나타낸 도면이다.
1 is a diagram illustrating a user cosmetics recommendation system according to an embodiment.
FIG. 2 is a diagram showing components of a cosmetics recommendation server of FIG. 1 .
3 is a diagram for explaining that a user's skin characteristics vary according to regional climate characteristics.
FIG. 4 is a diagram explaining a process of determining cosmetics suitable for skin characteristics corresponding to a user's duration of use of cosmetics.
FIG. 5 is a diagram for explaining determining work similarity in order to consider cosmetics usage information of other users.
6 is a diagram showing the hardware configuration of the server according to FIG. 1;

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. Since the present invention can make various changes and have various embodiments, specific embodiments will be illustrated in the drawings and described in detail in the detailed description. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. Like reference numerals have been used for like elements throughout the description of each figure.

제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first, second, A, and B may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention. The terms and/or include any combination of a plurality of related recited items or any of a plurality of related recited items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, but other elements may exist in the middle. It should be. On the other hand, when an element is referred to as “directly connected” or “directly connected” to another element, it should be understood that no other element exists in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "include" or "have" are intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, but one or more other features It should be understood that the presence or addition of numbers, steps, operations, components, parts, or combinations thereof is not precluded.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in the present application, they should not be interpreted in an ideal or excessively formal meaning. don't

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 일 실시 예에 따른 사용자 화장품 추천 시스템(10)을 도시한 도면이다.1 is a diagram illustrating a user cosmetics recommendation system 10 according to an embodiment.

도 1을 참조하면, 사용자 화장품 추천 시스템(10)은 화장품 추천 서버(100), 사용자 단말(200) 등을 포함할 수 있다.Referring to FIG. 1 , the user cosmetics recommendation system 10 may include a cosmetics recommendation server 100 and a user terminal 200 .

화장품 추천 서버(100)는 사용자 화장품 추천 서비스를 운용하기 위해 필요한 정보들을 저장할 수 있다. 사용자 화장품 추천 서비스를 운영하기 위해 필요한 정보들은 상기 서비스를 제공하기 위한 상기 서비스의 운영자가 제공할 수 있는 화장품들 각각의 정보들을 포함할 수 있다. 그리고 화장품 추천 서버(100)는 기존의 다른 구매자들의 화장품 사용 정보를 획득하여 저장할 수 있다. 다른 구매자들의 화장품 사용 정보는 구매 후기, 사용 기간, 사용 빈도, 반품 여부 등을 포함할 수 있다.The cosmetics recommendation server 100 may store information necessary to operate a user cosmetics recommendation service. Information necessary to operate the user cosmetics recommendation service may include information on each of cosmetics that may be provided by an operator of the service for providing the service. In addition, the cosmetics recommendation server 100 may acquire and store cosmetics use information of other existing buyers. Cosmetics use information of other buyers may include purchase reviews, use period, frequency of use, whether or not to return the product, and the like.

화장품 추천 서버(100)는 사용자 단말(200)을 통해 사용자의 얼굴 이미지를 획득하고, 획득된 사용자의 얼굴 이미지를 통해 사용자의 피부 특성을 결정하고, 결정된 피부 특성에 기초하여 사용자에게 추천할 화장품들을 결정할 수 있다. 화장품 추천 서버(100)는 결정된 화장품들의 추천 리스트를 생성하고, 생성된 추천 리스트를 사용자 단말(200)에 전송할 수 있다.The cosmetics recommendation server 100 obtains a user's face image through the user terminal 200, determines the user's skin characteristics through the obtained user's face image, and recommends cosmetics to the user based on the determined skin characteristics. can decide The cosmetics recommendation server 100 may generate a recommendation list of determined cosmetics and transmit the generated recommendation list to the user terminal 200 .

화장품 추천 서버(100)는 결정된 피부 특성에 따른 화장품 추천 모델을 지도학습(supervised learning) 또는 비지도학습할 수 있으며, 화장품 추천 모델은 인공 신경망(Artificial Neural Network, ANN)으로 구현될 수 있다. 인공 신경망은 많은 수의 인공 뉴런(또는, 노드)들을 이용하여 생물학적인 시스템의 계산 능력을 모방하는 소프트웨어나 하드웨어로 구현된 예측 모델이다. 상기 결정된 피부 특성은 구매 시점에 대응하는 사용자의 피부 특성 및/또는 사용 지속 시점에 대응하는 사용자의 피부 특성을 포함할 수 있다.The cosmetics recommendation server 100 may perform supervised learning or unsupervised learning on a cosmetics recommendation model according to the determined skin characteristics, and the cosmetics recommendation model may be implemented as an artificial neural network (ANN). An artificial neural network is a predictive model implemented in software or hardware that mimics the computational power of a biological system using a large number of artificial neurons (or nodes). The determined skin characteristics may include the user's skin characteristics corresponding to the point of purchase and/or the user's skin characteristics corresponding to the duration of use.

화장품 추천 모델은 화장품 추천 모델 학습부에 의해서 '얼굴 이미지'와 '얼굴 이미지에 대응하는 화장품'을 이용하여 지도 학습될 수 있다. 이때 지도 학습이란, 입력값과 그에 따른 출력값이 있는 데이터를 학습 데이터로 이용하여 주어진 입력값에 따른 출력값을 찾는 학습을 의미하며, 정답을 알고 있는 상태에서 이루어지는 학습을 의미한다. 지도 학습에 주어지는 입력값과 출력값 세트를 훈련 데이터(Training Data)라고 한다. 즉, 상술한 '얼굴 이미지'와 '얼굴 이미지에 대응하는 화장품'은 각각 입력값과 출력값으로서, 화장품 추천 모델의 지도 학습을 위한 훈련 데이터로 사용될 수 있다.The cosmetics recommendation model can be supervised and learned by using the 'face image' and 'cosmetics corresponding to the face image' by the cosmetics recommendation model learning unit. At this time, supervised learning means learning to find an output value according to a given input value by using data with input values and corresponding output values as learning data, and means learning that takes place in a state where the correct answer is known. The set of inputs and outputs given to supervised learning is called training data. That is, the aforementioned 'face image' and 'cosmetics corresponding to the facial image' are input values and output values, respectively, and may be used as training data for supervised learning of a cosmetic recommendation model.

예를 들어, 화장품 추천 모델 학습부는 계절을 고유한 제1 원-핫 벡터(one-hot vector)로 변환하여 입력값을 생성하고, 계절에 따른 피부 특성을 고유한 제2 원-핫 벡터로 변환하여 출력값을 생성한 후, 생성된 입력값과 출력값을 이용해 화장품 추천 모델을 지도학습할 수 있다. 여기서, 제1 원-핫 벡터 및 제2 원-핫 벡터는 벡터를 구성하는 성분값들 중 하나가 '1' 이고, 나머지 성분값들은 '0'으로 구성되는 벡터일 수 있다.For example, the cosmetics recommendation model learning unit generates an input value by converting a season into a unique first one-hot vector, and converts skin characteristics according to the season into a unique second one-hot vector. After generating the output value, the cosmetic recommendation model can be supervised using the generated input value and output value. Here, the first one-hot vector and the second one-hot vector may be vectors in which one of the component values constituting the vector is '1' and the other component values are '0'.

사용자 단말(200)은 통신 가능한 데스크탑 컴퓨터(desktop computer), 랩탑 컴퓨터(laptop computer), 노트북(notebook), 스마트폰(smart phone), 태블릿 PC(tablet PC), 모바일폰(mobile phone), 스마트 워치(smart watch), 스마트 글래스(smart glass), e-book 리더기, PMP(portable multimedia player), 휴대용 게임기, 네비게이션(navigation) 장치, 디지털 카메라(digital camera), DMB(digital multimedia broadcasting) 재생기, 디지털 음성 녹음기(digital audio recorder), 디지털 음성 재생기(digital audio player), 디지털 동영상 녹화기(digital video recorder), 디지털 동영상 재생기(digital video player), 및 PDA(Personal Digital Assistant) 등 일 수 있다.The user terminal 200 includes a communicable desktop computer, a laptop computer, a notebook, a smart phone, a tablet PC, a mobile phone, and a smart watch. (smart watch), smart glass, e-book reader, PMP (portable multimedia player), portable game console, navigation device, digital camera, DMB (digital multimedia broadcasting) player, digital voice It may be a digital audio recorder, a digital audio player, a digital video recorder, a digital video player, and a personal digital assistant (PDA).

명세서 전체에서, 사용자 화장품 추천 서비스를 통해 추천되는 제품은 화장품일 수 있으나, 이에 한정되는 것은 아니며 통상적으로 화장품으로 분류되지 않는 다수의 미용 관련 재품들을 모두 포함할 수 있다.Throughout the specification, products recommended through the user cosmetics recommendation service may be cosmetics, but are not limited thereto and may include all of a plurality of beauty-related products that are not normally classified as cosmetics.

도 2는 도 1의 화장품 추천 서버(100)의 구성 요소를 나타낸 도면이다.FIG. 2 is a diagram showing components of the cosmetics recommendation server 100 of FIG. 1 .

도 2를 참조하면, 화장품 추천 서버(100)는 정보 획득부(101), 피부 특성 결정부(102), 피부 특성 변화도 결정부(104), 사용 지속 시점 결정부(103), 근무 유사도 결정부(105), 화장품 결정부(106) 및 추천 리스트 생성부(107) 등을 포함할 수 있다.Referring to FIG. 2, the cosmetics recommendation server 100 includes an information acquisition unit 101, a skin characteristic determination unit 102, a skin characteristic change degree determination unit 104, a usage duration determination unit 103, and a work similarity determination unit. It may include a unit 105, a cosmetics determination unit 106 and a recommendation list generation unit 107, and the like.

정보 획득부(101)는 사용자 단말(200)로부터 획득된 사용자의 얼굴 이미지를 이용하여 사용자의 특성 정보를 결정할 수 있다. 예를 들어, 특성 정보는 사용자의 나이, 성별 및 피부 특성을 포함할 수 있다. 또한, 사용자는 사용자 단말(200)을 이용하여 자신의 얼굴을 촬영하고, 사용자 단말(200)은 촬영된 얼굴 이미지를 화장품 추천 서버(100)에 전송할 수 있다. 사용자 단말(200)은 사용자의 얼굴을 촬영할 수 있는 카메라 및 사용자의 얼굴의 각 지점까지의 거리를 측정할 수 있는 깊이 카메라(depth camera) 등을 포함할 수 있다.The information obtaining unit 101 may determine the user's characteristic information by using the user's face image obtained from the user terminal 200 . For example, the characteristic information may include age, gender, and skin characteristics of the user. Also, the user may photograph his or her face using the user terminal 200, and the user terminal 200 may transmit the photographed face image to the cosmetics recommendation server 100. The user terminal 200 may include a camera capable of photographing the user's face and a depth camera capable of measuring distances to each point on the user's face.

정보 획득부(101)는 사용자 정보로써, 사용자의 나이, 성별, 피부 타입, 피부 상태, 알레르기 정보 중에서 적어도 하나를 획득할 수 있다. 또한, 정보 획득부(101)는 사용자 정보로써, 사용자의 활동 지역 정보를 획득할 수 있다. 정보 획득부(101)는 사용자 단말(200)에 내장된 GPS(Global Positioning System)을 이용하여 감지된 사용자의 위치 정보를 획득하고, 획득된 사용자의 위치 정보에 기초하여 사용자의 활동 지역을 지시하는 활동 지역 정보를 획득할 수 있다.The information acquisition unit 101 may obtain at least one of the user's age, gender, skin type, skin condition, and allergy information as user information. In addition, the information acquisition unit 101 may obtain activity region information of the user as user information. The information obtaining unit 101 acquires the user's location information sensed using the Global Positioning System (GPS) built in the user terminal 200, and indicates the user's activity area based on the obtained user's location information. Activity area information can be obtained.

정보 획득부(101)는 내부의 저장 장치 또는 화장품 추천 서버(100)와 연결된 외부의 화장품 판매 서버로부터 사용자의 개인 정보가 일치하는 계정의 기존 화장품 구매 내역에 관한 정보를 획득할 수 있다. 또는, 정보 획득부(101)는 사용자 단말(200)에서 입력된 기존 화장품 구매 정보를 사용자 단말(200)로부터 획득할 수 있다.The information acquisition unit 101 may acquire information about existing cosmetics purchase history of an account matching user's personal information from an internal storage device or an external cosmetics sales server connected to the cosmetics recommendation server 100 . Alternatively, the information acquisition unit 101 may acquire existing cosmetics purchase information input from the user terminal 200 from the user terminal 200 .

정보 획득부(101)는 구매한 화장품에 대한 사용자의 구매 내역 뿐만 아니라, 사용자의 관심 목록을 획득할 수 있다.The information acquisition unit 101 may acquire the user's interest list as well as the user's purchase history for purchased cosmetics.

피부 특성 결정부(102)는 획득된 사용자의 얼굴 이미지에 기초하여 구매 시점에 대응되는 사용자의 피부 특성을 결정할 수 있다. 피부 특성은 피부 타입 및 피부 상태를 포함할 수 있다. 예를 들어, 피부 특성은 피부의 수분, 유분, 피지, pH도, 민감도, 탄력, 주름, 피부톤, 모공 상태, 색소 침착 및 각질 상태 등을 포함할 수 있다. 피부 특성 결정부(102)는 사용자 단말(200) 외에 별도의 측정 장치(예: 측정 마스크)를 통해 사용자의 피부 특성을 결정할 수 있다.The skin characteristic determining unit 102 may determine the user's skin characteristic corresponding to the point of purchase based on the acquired facial image of the user. Skin characteristics may include skin type and skin condition. For example, skin characteristics may include skin moisture, oil content, sebum, pH level, sensitivity, elasticity, wrinkles, skin tone, pore condition, pigmentation, and keratin condition. The skin characteristic determining unit 102 may determine the user's skin characteristic through a separate measuring device (eg, a measuring mask) in addition to the user terminal 200 .

피부 특성 결정부(102)는 획득된 사용자의 얼굴 이미지를 복수 개의 얼굴 영역들로 분할하고, 분할된 복수 개의 얼굴 영역들 각각에 대한 피부 특성을 결정할 수 있다. 복수 개의 얼굴 영역들은 눈가, 이마, 볼, 입가, 턱, 목 등을 포함할 수 있다.The skin characteristic determination unit 102 may divide the obtained user's face image into a plurality of facial regions and determine skin characteristics for each of the plurality of divided facial regions. The plurality of face regions may include eye rims, forehead, cheeks, mouth rims, chin, neck, and the like.

피부 특성 결정부(102)는 분할된 상기 복수 개의 얼굴 영역들 중 면적이 제1 면적 이상인 제1 얼굴 영역의 상기 피부 특성을 결정할 수 있다. 예를 들어, 피부 특성 결정부(102)는 상기 복수 개의 얼굴 영역들 중 면적이 큰 부위인 이마 및 뺨의 피부 특성을 결정할 수 있다.The skin characteristic determiner 102 may determine the skin characteristic of a first face region having an area greater than or equal to a first area among the plurality of divided face regions. For example, the skin characteristic determination unit 102 may determine skin characteristics of the forehead and cheeks, which are large areas among the plurality of face regions.

피부 특성 결정부(102)는 제1 얼굴 영역의 피부 특성을 통해 상기 제1 얼굴 영역과 유사한 피부 특성을 나타내는 제2 얼굴 영역의 피부 특성을 결정할 수 있다. 예를 들어, 일반적으로 이마와 턱은 유사한 수분량 및 유분량을 가지며, 뺨, 코, 및 눈가는 유사한 수분량과 유분량을 가지고 있으므로, 피부 특성 결정부(102)는 이마의 피부 특성을 통해 턱의 피부 특성을 결정하고, 뺨의 피부 특성을 통해 코 및 눈가의 피부 특성을 결정할 수 있다.The skin characteristic determination unit 102 may determine skin characteristics of the second facial region exhibiting similar skin characteristics to those of the first facial region through skin characteristics of the first facial region. For example, since the forehead and the chin generally have similar moisture and oil content, and the cheeks, nose, and eye area have similar moisture and oil content, the skin characteristic determination unit 102 determines the skin characteristics of the chin through the skin characteristics of the forehead. , and the skin characteristics of the nose and eyes can be determined through the skin characteristics of the cheeks.

피부 특성 결정부(102)는 복수 개의 얼굴 영역들 각각에 대한 피부의 수분, 유분, 피지, pH도, 민감도, 주름, 피부톤, 모공 상태, 색소 침착, 각질 상태 등에 기초하여 사용자의 피부 특성을 결정할 수 있다.The skin characteristic determination unit 102 determines the user's skin characteristics based on moisture, oil, sebum, pH, sensitivity, wrinkles, skin tone, pore condition, pigmentation, dead skin condition, etc. of the skin for each of a plurality of facial areas. can

현재 사용자의 얼굴 이미지를 통해 구매 시점에 대응되는 사용자의 피부 특성에 기초하여 추천할 화장품을 결정하는 것은, 외부 환경에 의하여 영향을 많이 받는 피부의 특성 및 계절 변화에 따라 외부 환경의 변동성이 심한 우리 나라의 기후 특성상 부적합할 수 있다. 다시 말해서, 유분기가 많아지는 여름에 유분기를 가라 앉히는 화장품을 구매했다가 화장품을 사용하는 동안 유분기가 적어지는 계절이 다가오면 상기 유분기를 가라 앉히는 화장품을 지속적으로 사용하기에 부적합할 수 있다.Determining cosmetics to be recommended based on the user's skin characteristics corresponding to the point of purchase through the current user's face image is the skin characteristics that are greatly affected by the external environment and those of us with high variability in the external environment due to seasonal changes. It may be inappropriate due to the climate characteristics of the country. In other words, if you purchase cosmetics that reduce oiliness in the summer when oiliness increases, and the season when oiliness decreases while using cosmetics approaches, it may be unsuitable to continuously use the cosmetics that reduce oiliness.

따라서, 피부 특성 결정부(102)는 이하 피부 특성 변화도 결정부(104)를 통해 결정된 피부 특성 변화도를 추가로 고려하여 특정 시점에 대응되는 사용자의 피부 특성을 결정할 수 있다.Accordingly, the skin characteristic determining unit 102 may determine the user's skin characteristic corresponding to a specific time point by additionally considering the skin characteristic variation determined through the skin characteristic variation determining unit 104 below.

사용 지속 시점 결정부(103)는 사용자의 구매 시점으로부터 일정 기간 이후의 특정 시점인 사용 지속 시점을 결정할 수 있다. 이에 대한 구체적인 설명은 이하 도 4를 통해서 자세히 설명된다.The use continuation time determining unit 103 may determine a use continuation time point, which is a specific time point after a certain period from the user's purchase time point. A detailed description of this will be described in detail with reference to FIG. 4 below.

피부 특성 변화도 결정부(104)는 사용 지속 시점에 대응되는 피부 특성 변화도를 결정할 수 있다. 다시 말해서, 피부 특성 결정부(102)를 통해 결정된 구매 시점에 대응되는 사용자의 피부 특성이 일정 기간 후에 얼마나 변화할지를 나타내는 피부 특성 변화도를 결정할 수 있다. 예를 들어, 피부 특성 변화도 결정부(104)는 사용자의 화장품 구매 시점이 6월인 경우, 6월로부터 일정 기간이 지난 9월에 대응되는 사용자의 피부 특성 변화도를 결정할 수 있다. 사용 지속 시점은, 특정 시점의 피부 특성에 기초하여 화장품을 결정하면 화장품에 대한 사용 기간이 늘어날 수 있는 상기 특정 시점을 의미할 수 있다.The skin characteristic change degree determination unit 104 may determine the skin characteristic change degree corresponding to the duration of use. In other words, a degree of change in skin characteristics indicating how much the user's skin characteristics corresponding to the purchase point determined through the skin characteristic determining unit 102 will change after a certain period of time may be determined. For example, when the user purchases cosmetics in June, the skin characteristic change determination unit 104 may determine the user's skin characteristic change corresponding to September after a predetermined period from June. The usage duration point may refer to a specific point in time at which the use period of the cosmetic product may be extended if the cosmetic product is determined based on skin characteristics at the specific time point.

피부 특성 변화도 결정부(104)는 피부 특성 변화도에 따른 피부 특성 추측 모델을 지도학습(supervised learning) 또는 비지도학습할 수 있으며, 피부 특성 추측 모델은 인공 신경망(Artificial Neural Network, ANN)으로 구현될 수 있다.The skin characteristic gradient determination unit 104 may perform supervised learning or unsupervised learning on a skin characteristic estimation model according to the skin characteristic gradient, and the skin characteristic estimation model is an artificial neural network (ANN). can be implemented

피부 특성 추측 모델은 피부 특성 추측 모델 학습부에 의해서 '계절(날짜)'과 '계절(날짜)에 따른 피부 특성'을 이용하여 지도 학습될 수 있다. 즉, 상술한 '계절(날짜)'과 '계절(날짜)에 따른 피부 특성'은 각각 입력값과 출력값으로서, 화장품 추천 모델의 지도 학습을 위한 훈련 데이터로 사용될 수 있다.The skin characteristic estimation model may be supervised and learned by using the 'season (date)' and 'skin characteristics according to the season (date)' by the skin characteristic estimation model learning unit. That is, the above-described 'season (date)' and 'skin characteristics according to the season (date)' are input and output values, respectively, and may be used as training data for supervised learning of a cosmetics recommendation model.

예를 들어, 피부 특성 추측 모델 학습부는 '계절(날짜)'을 고유한 제3 원-핫 벡터(one-hot vector)로 변환하여 입력값을 생성하고, '계절(날짜)에 따른 피부 특성'을 고유한 제4 원-핫 벡터로 변환하여 출력값을 생성한 후, 생성된 입력값과 출력값을 이용해 피부 특성 추측 모델을 지도학습할 수 있다. 여기서, 제3 원-핫 벡터 및 제4 원-핫 벡터는 벡터를 구성하는 성분값들 중 하나가 '1' 이고, 나머지 성분값들은 '0'으로 구성되는 벡터일 수 있다.For example, the skin characteristic estimation model learning unit converts 'season (date)' into a unique third one-hot vector to generate an input value, and generates an input value, 'skin characteristic according to season (date)' After generating an output value by converting to a unique fourth one-hot vector, a skin characteristic estimation model may be supervised using the generated input value and output value. Here, the third one-hot vector and the fourth one-hot vector may be vectors in which one of the component values constituting the vector is '1' and the other component values are '0'.

화장품 결정부(106)는 사용자의 피부 특성에 기초하여 사용자에게 필요한 필요 성분 및 필요 효과를 결정할 수 있고, 결정된 필요 성분 및 필요 효과를 포함하는 화장품들을 결정할 수 있다. 구체적으로, 화장품 결정부(106)는, 구매 시점에 대응되는 사용자의 피부 특성 및 피부 특성 변화도에 기초하여 결정된, 사용 지속 시점에 대응되는 사용자의 피부 특성에 기초하여 사용자에게 필요한 필요 성분 및 필요 효과를 결정할 수 있고, 결정된 필요 성분 및 필요 효과를 포함하는 화장품들을 결정할 수 있다.The cosmetics determining unit 106 may determine necessary components and effects necessary for the user based on the user's skin characteristics, and may determine cosmetics including the determined necessary components and necessary effects. Specifically, the cosmetics determining unit 106 determines the necessary ingredients and needs of the user based on the skin characteristics of the user corresponding to the point of purchase and the skin characteristics of the user corresponding to the time of continued use, which are determined based on the skin characteristics of the user corresponding to the point of purchase and the change in skin characteristics. The effect can be determined, and cosmetics including the determined necessary component and necessary effect can be determined.

화장품 결정부(106)는 상기 결정된 필요 성분 및 필요 효과 뿐만 아니라, 사용자와 구별되는 다른 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정할 수 있다. 화장품 결정부(106)는 근무 유사도 결정부(105)에 의하여 결정된 근무 유사도가 임계값 이상인 다른 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정할 수 있다.The cosmetics determining unit 106 may determine the cosmetics based on cosmetics use information of other users distinguished from the user, as well as the determined necessary ingredients and necessary effects. The cosmetics determining unit 106 may determine the cosmetics based on cosmetics use information of other users whose work similarity determined by the work similarity determining unit 105 is greater than or equal to a threshold value.

추천 리스트 생성부(107)는 결정된 화장품들에 기초하여 사용자에 대한 화장품들의 추천 리스트를 생성할 수 있다. 추천 리스트 생성부(107)는 생성된 추천 리스트 및 추천 리스트에 포함된 화장품들의 정보를 사용자 단말(200)에 전송할 수 있다.The recommendation list generator 107 may generate a recommendation list of cosmetics for the user based on the determined cosmetics. The recommendation list generator 107 may transmit the generated recommendation list and information on cosmetics included in the recommendation list to the user terminal 200 .

도 3은 지역별 기후 특성에 따라 사용자의 피부 특성이 달라지는 것을 설명하기 위한 도면이다. 도 3을 참조하면, 봄, 여름, 가을 및 겨울 동안의 지역별 기후 특성의 변화 추세와 피부 특성의 변화 추세를 알 수 있다.3 is a diagram for explaining that a user's skin characteristics vary according to regional climate characteristics. Referring to FIG. 3 , it is possible to know the change trend of climate characteristics and skin characteristics for each region during spring, summer, fall and winter.

도 3을 참조하면, 계절 변화에 따른 기후 특성(예: 온도, 습도) 그래프가 나타난다. 우리나라는 사계절의 변화가 뚜렷하고, 지역별로 상이하나 일반적으로 여름인 7월, 8월에 최고 기온을 찍고나서 기온이 점차 떨어지며 1, 2월에 최저 기온이 된다. 마찬가지로, 여름에는 강수량 및 습도가 높으며, 겨울로 갈수록 강수량 및 습도가 낮아질 수 있다.Referring to FIG. 3 , a graph of climate characteristics (eg, temperature and humidity) according to seasonal changes is shown. Korea has clear four seasons, and it varies by region, but in general, the highest temperature is recorded in July and August, which is summer, and then the temperature gradually drops and becomes the lowest temperature in January and February. Similarly, precipitation and humidity may be high in summer and may decrease as winter progresses.

도 3을 참조하면, 외부 환경에 의하여 영향을 많이 받는 피부 특성 중 피부의 수분량, 피지량, 모공, 탄력은 기후 특성 그래프에 대체적으로 비례하고, 피부 특성 중 주름, pH, 피부 밝기, 피부 민감도는 기후 특성 그래프에 대체적으로 반비례하는 것을 알 수 있다.Referring to FIG. 3, among the skin characteristics greatly affected by the external environment, the moisture content, sebum amount, pores, and elasticity of the skin are generally proportional to the climate characteristics graph, and among the skin characteristics, wrinkles, pH, skin brightness, and skin sensitivity are climate characteristics. It can be seen that it is generally inversely proportional to the characteristic graph.

도 4는 화장품에 대한 사용자의 사용 지속 시점에 대응되는 피부 특성에 적합한 화장품을 결정하는 과정을 설명하는 도면이다.FIG. 4 is a diagram explaining a process of determining cosmetics suitable for skin characteristics corresponding to a user's duration of use of cosmetics.

사용 지속 시점 결정부(103)는 사용자의 구매 시점으로부터 일정 기간 이후인 사용 지속 시점을 결정할 수 있다. 사용 지속 시점 결정부(103)는 사용자의 화장품 사용 태양에 기초하여 상기 사용 지속 시점을 결정할 수 있다. 화장품 구매 시점에 대응되는 사용자의 피부 특성에 맞는 화장품을 추천하는 것은 화장품의 사용 기간 및 사용 기간 동안 변화되는 피부 특성을 고려할 때, 지속적으로 사용하기 적합하지 않을 수 있다. 다시 말해서, 도 3에서 화장품의 구매 시점 이후로 사용자의 피부 특성이 변하므로, 화장품 결정부(106)는 화장품의 사용 시점의 피부 특성에 적합한 화장품을 추천하는 것이 아니라, 사용 지속 시점 결정부(103)에 의하여 결정된 사용 지속 시점에 대응되는 사용자의 피부 특성에 적합한 화장품들을 결정할 수 있다.The use continuation time determining unit 103 may determine a use continuation time, which is after a certain period of time from the user's purchase time. The use duration determining unit 103 may determine the duration of use based on the user's use of cosmetics. Recommending cosmetics suitable for the user's skin characteristics corresponding to the point of purchase of cosmetics may not be suitable for continuous use, considering the use period of the cosmetics and the skin characteristics that change during the use period. In other words, since the user's skin characteristics change after purchasing the cosmetics in FIG. Cosmetics suitable for the user's skin characteristics corresponding to the duration of use determined by ) may be determined.

다만, 구매 시점으로부터 너무 가까운 시점을 사용 지속 시점으로 결정하면 사용 지속 시점 이후부터 긴 기간 동안 사용자에게 적합하지 않을 수 있고, 구매 시점으로부터 너무 먼 시점을 사용 지속 시점으로 결정하면 사용 지속 시점 이전까지의 긴 기간 동안 사용자에게 적합하지 않을 수 있다. 따라서, 사용 지속 시점 결정부(103)는 사용자의 화장품 사용 태양에 기초하여 사용 지속 시점을 결정할 수 있다.However, if a point too close to the point of purchase is determined as the point of continuation of use, it may not be suitable for the user for a long period after the point of continuation of use, and if a point of time too far from the point of purchase is determined as the point of continuation of use, May not be suitable for long term users. Accordingly, the usage duration determination unit 103 may determine the usage duration duration based on the user's cosmetic use pattern.

사용 지속 시점 결정부(103)는 사용자 단말(200)을 통해 입력받은 사용자의 사용 화장품에 대한 사용자의 평균 사용 기간을 획득할 수 있다. 상기 사용자의 사용 화장품은 사용자가 구매하려는 화장품과 동일한 종류의 화장품일 수 있다.The usage duration determining unit 103 may obtain the user's average usage period for the user's used cosmetics received through the user terminal 200 . The cosmetics used by the user may be the same type of cosmetics as the cosmetics the user intends to purchase.

사용 지속 시점 결정부(103)는 상기 사용자의 평균 사용 기간이 임계 기간 이하인 경우, 상기 구매 시점으로부터 상기 평균 사용 기간의 1/2의 기간 이후의 시점을 상기 사용 지속 시점으로 결정하고, 상기 사용자의 평균 사용 기간이 상기 임계 기간 초과인 경우, 상기 구매 시점으로부터 상기 평균 사용 기간의 1/4의 기간 이후의 시점을 상기 사용 지속 시점으로 결정할 수 있다.When the user's average usage period is less than or equal to the threshold period, the usage duration determination unit 103 determines a time point after 1/2 of the average usage period from the purchase time as the usage duration time point, and the user's When the average usage period exceeds the critical period, a time point after 1/4 of the average usage period from the purchase time may be determined as the usage continuation time point.

피부 특성 변화도 결정부(104)는 구매 시점에 대응되는 기후 및 사용 지속 시점에 대응되는 기후를 비교하여, 사용자의 피부 특성 변화도를 결정할 수 있다. 피부 특성 변화도 결정부(104)는 기상청 서버로부터 획득한 지역별의 월 평균 기온, 월 최고 기온, 월 최저 기온 및 월 평균 습도 등에 대한 기후 정보에 기초하여, 구매 시점에 대응되는 기후 및 사용 지속 시점에 대응되는 기후를 비교할 수 있다.The skin characteristic gradient determining unit 104 may determine the user's skin characteristic gradient by comparing the climate corresponding to the purchase time and the climate corresponding to the continuous use time. The skin characteristic gradient determining unit 104 determines the climate corresponding to the time of purchase and the time of continued use based on climate information such as monthly average temperature, monthly maximum temperature, monthly minimum temperature, and monthly average humidity for each region obtained from the Korea Meteorological Administration server. corresponding climates can be compared.

피부 특성 변화도 결정부(104)는 구매 시점에 대응되는 사용자의 활동 지역의 기온 및 사용 지속 시점에 대응되는 사용자의 활동 지역의 기온 사이의 기온 변화율을 결정하고, 사용자의 활동 지역의 구매 시점에 대응되는 습도 및 사용 지속 시점에 대응되는 습도 사이의 습도 변화율을 결정할 수 있다.The skin characteristic gradient determining unit 104 determines a temperature change rate between the temperature of the user's activity area corresponding to the purchase time and the user's activity area temperature corresponding to the duration of use, and determines the temperature change rate of the user's activity area at the purchase time. A humidity change rate between the corresponding humidity and the humidity corresponding to the duration of use may be determined.

피부 특성 변화도 결정부(104)는 기온 변화율 및 습도 변화율에 비례하도록 사용자의 피부 특성 중 수분량, 피지량, 모공, 탄력의 변화도를 결정하고, 기온 변화율 및 습도 변화율에 반비례하도록 사용자의 피부 특성 중 주름, pH, 피부 밝기, 피부 민감도의 변화도를 결정할 수 있다.The skin characteristic gradient determining unit 104 determines the gradient of moisture content, sebum amount, pores, and elasticity among the user's skin characteristics in proportion to the temperature change rate and humidity change rate, and determines the change rate of the user's skin characteristics in inverse proportion to the temperature change rate and humidity change rate. Changes in wrinkles, pH, skin brightness, and skin sensitivity can be determined.

피부 특성 결정부(102)는 상기 결정된 피부 특성 변화도에 기초하여 사용 지속 시점에 대응되는 사용자의 피부 특성을 결정할 수 있고, 화장품 결정부(106)는 사용 지속 시점에 대응되는 사용자의 피부 특성에 기초하여 사용자에게 추천할 화장품들을 결정할 수 있다.The skin characteristic determination unit 102 may determine the user's skin characteristics corresponding to the duration of use based on the determined change in skin characteristics, and the cosmetics determination unit 106 may determine the user's skin characteristics corresponding to the duration of use. Based on this, cosmetics to be recommended to the user may be determined.

도 5는 다른 사용자들의 화장품 사용 정보를 고려하기 위해 근무 유사도를 결정하는 것을 설명하기 위한 도면이다. 다른 사용자들의 화장품 사용 정보는 빅데이터로서 저장 및 수집될 수 있다.FIG. 5 is a diagram for explaining determining work similarity in order to consider cosmetics usage information of other users. Cosmetics use information of other users can be stored and collected as big data.

화장품 결정부(106)는 피부 특성 결정부(102)에 의하여 결정된 사용자의 피부 특성에 더하여 다른 사용자들의 화장품 사용 정보에 기초하여 사용자에게 적합한 화장품들을 결정할 수 있다.The cosmetics determining unit 106 may determine cosmetics suitable for the user based on the user's skin characteristics determined by the skin characteristic determining unit 102 as well as cosmetics usage information of other users.

화장품 결정부(106)는, 지역별 기후에 따라 사람들의 피부 특성이 다르고 동일한 지역인 경우 피부 특성이 유사할 확률이 높으므로, 다른 사용자들 중 사용자와 동일한 활동 지역에 있는 다수의 사용자들을 결정할 수 있다.Since the skin characteristics of people are different according to the climate of each region and there is a high probability that the skin characteristics are similar in the same region, the cosmetics determining unit 106 may determine a plurality of users in the same activity area as the user among other users. .

화장품 결정부(106)는 근무 환경이 유사할수록 피부 특성이 유사할 확률이 높으므로, 결정된 상기 다수의 사용자들 중 근무 환경이 유사한 사용자들을 결정할 수 있다.The cosmetics determining unit 106 may determine users with similar working environments among the plurality of determined users, since the probability that the skin characteristics are similar is high as the working environment is similar.

구체적으로, 화장품 결정부(106)는 상기 다수의 사용자들 중 사용자와 근무 형태가 동일하고, 사용자와 월 평균 외근 시간의 차이가 제1 시간 이내인 제1 사용자들을 먼저 결정할 수 있다. 근무 형태는 사무직, 현장직 및 순환근무직 등을 포함할 수 있다. Specifically, the cosmetics determining unit 106 may first determine first users among the plurality of users who have the same working type as the user and have a difference between the user and the average monthly out-of-office time within a first hour. Work types may include office work, field work, and rotational work.

화장품 결정부(106)는 결정된 상기 제1 사용자들 중 근무 유사도가 임계값 이상인 사용자들을 상기 제2 사용자들로 결정할 수 있다. 근무 유사도는 사용자와 다른 사용자들 간 근무 환경의 유사도를 나타낸 것으로, 근무 유사도가 높은수록 사용자와 근무 환경이 유사하고, 근무 유사도가 낮을수록 사용자와 근무 환경이 유사하지 않다는 걸 의미할 수 있다.The cosmetics determining unit 106 may determine users whose work similarity is greater than or equal to a threshold value among the determined first users as the second users. The work similarity indicates the similarity of the working environment between the user and other users. The higher the working similarity, the more similar the user and the working environment are, and the lower the working similarity, the less similar the user and the working environment are.

근무 유사도 결정부(105)는 상기 제1 사용자들을 대상으로 수집된 외근 시간을 기초로 상기 사용자들 각각에 대하여 외근 증감도와 외근 변화도를 산출할 수 있다. 이 때, 기초 자료가 되는 외근 시간은 최근 1년 또는 최근 6개월 내의 자료로 결정될 수 있다. 외근 시간은 매 월에 따른 시간(일)로 표현될 수 있다. 이 때, 외근 증감도는 매월별 외근 시간의 '기울기 부호'를 이용하여 산출될 수 있다. 외근 증감도는 벡터로 표시될 수 있다.The work similarity determination unit 105 may calculate the degree of change in outside work and the degree of change in outside work for each of the first users based on the collected outside work time for the first users. At this time, the out-of-office hours serving as basic data may be determined by data within the last year or the last 6 months. Out-of-office time may be expressed as hours (days) according to each month. At this time, the degree of increase in outside work may be calculated using the 'slope code' of the outside work time for each month. External muscle sensitization can be expressed as a vector.

예를 들어, 3월부터 8월까지 외근 시간이 감소(-), 증가(+), 감소(-), 증가(+), 감소(-), 증가(+)한 경우, 3월부터 8월에 대응하는 외근 증감도는 (-1, +1, -1, +1, -1, +1)일 수 있다. 또 다른 예로 3월부터 8월까지 외근 시간이 동일(0), 감소(-), 증가(+), 증가(+), 감소(-), 증가(+)한 경우, 3월부터 8월에 대응하는 외근 증감도는 (0, -1, +1, +1, -1, +1)일 수 있다.For example, if there is a decrease (-), increase (+), decrease (-), increase (+), decrease (-), increase (+) of out-of-work hours from March to August, then from March to August The extrinsic muscle sensitivity corresponding to may be (-1, +1, -1, +1, -1, +1). As another example, if the out-of-office hours were the same (0), decreased (-), increased (+), increased (+), decreased (-), or increased (+) from March to August, then from March to August The corresponding extensor sensitivity may be (0, -1, +1, +1, -1, +1).

즉, 지난달보다 현재 달에서 외근 시간이 감소한 경우, 현재 달에 대응하는 외근 증감도의 성분값은 '-1'이고, 지난달과 현재 달에서 외근 시간이 동일한 경우, 현재 달에 대응하는 외근 증감도의 성분값은 '0'이고, 지난달보다 현재 달에서 외근 시간이 증가한 경우, 현재 달에 대응하는 외근 증감도의 성분값은 '+1'이 될 수 있다.In other words, if the amount of out-of-office hours decreased in the current month compared to the previous month, the component value of the increase/decrease in outer work corresponding to the current month is '-1'. The component value of is '0', and if the out-of-office time increases in the current month compared to the previous month, the component value of the increase in out-of-work corresponding to the current month may be '+1'.

한편, 외근 변화도는 매월별 외근 시간의 '기울기의 크기'를 이용하여 산출될 수 있다. 예를 들어, 3월부터 8월까지 외근 시간이 -2일, +4일, -3일, +2일, -4일, +1일로 변동된 경우, 외근 변화도는 (2, 4, 3, 2, 4, 1)일 수 있다. 즉, 현재 달에 대응하는 외근 변화도의 성분값은, 외근 시간의 변동일자를 나타낼 수 있다.On the other hand, the degree of change in outside work may be calculated using the 'size of the slope' of the outside work time for each month. For example, if the out-of-office hours fluctuate from -2 days, +4 days, -3 days, +2 days, -4 days, +1 days from March to August, the degree of change in out-of-office hours is (2, 4, 3 , 2, 4, 1). That is, the component value of the degree of change in outside work corresponding to the current month may indicate a date of change in outside work time.

근무 유사도 결정부(105)는 사용자의 기준 외근 증감도와 제1 사용자들 각각의 외근 증감도 사이의 증감 연관도(ID)를 이하 수학식 1에 기초하여 산출할 수 있다.The work similarity determiner 105 may calculate an increase/decrease correlation (ID) between the user's reference increase in external work and the increase in external work of each of the first users based on Equation 1 below.

Figure pat00006
Figure pat00006

Figure pat00007
Figure pat00007

Figure pat00008
Figure pat00008

수학식 1에서, Ia는 상기 사용자의 기준 외근 증감도, Io는 상기 제1 사용자들 각각의 외근 증감도를 의미하고, 분자 부분은 사용자의 기준 외근 증감도와 제1 사용자들 각각의 외근 증감도 사이의 내적 연산일 수 있다.In Equation 1, I a is the user's standard external muscle sensitization, I o means the external muscle sensitization of each of the first users, and the numerator is the user's standard external muscle sensitization and the external muscle sensitization of each of the first users. It can be a dot product operation between degrees.

근무 유사도 결정부(105)는 사용자의 기준 외근 변화도와 제1 사용자들 각각의 외근 변화도 사이의 유클리디언 거리(DIS)를 이하 수학식 2에 기초하여 산출할 수 있다.The work similarity determiner 105 may calculate the Euclidean distance (DIS) between the user's standard external shift and the external shift of each of the first users based on Equation 2 below.

Figure pat00009
Figure pat00009

Figure pat00010
Figure pat00010

수학식 2에서, Ga는 상기 사용자의 기준 외근 변화도, Go는 상기 제1 사용자들 각각의 외근 변화도를 의미하고, 근무 유사도 결정부(105)는 증감 연관도(ID)와 유클리디언 거리(DIS)를 이용하여 이하 수학식 3에 따른 근무 유사도(Sw)를 산출할 수 있다.In Equation 2, Ga is the user's standard external shift, Go is the external shift of each of the first users, and the work similarity determiner 105 determines the increase and decrease correlation (ID) The work similarity (S w ) according to Equation 3 below can be calculated using the Dian distance (DIS).

Figure pat00011
Figure pat00011

수학식 3를 참조하면, k는 증감 연관도(ID)와 유클리디언 거리(DIS) 사이의 가중치를 결정하는 가중치 계수로서 0과 1 사이의 정수이며, DISμ는 결정된 상기 제1 사용자들에 대하여 산출된 유클리디언 거리들의 평균값이고, DISσ는 결정된 상기 제1 사용자들에 대하여 산출된 유클리디언 거리들의 표준편차일 수 있다.Referring to Equation 3, k is an integer between 0 and 1 as a weight coefficient for determining the weight between the incremental association (ID) and the Euclidean distance (DIS), and DISμ is the determined first users. It may be an average value of the calculated Euclidean distances, and DISσ may be a standard deviation of the calculated Euclidean distances for the determined first users.

화장품 결정부(106)는 상기 제1 사용자들 중에서 근무 유사도(Sw)가 임계값 이상인 사용자들을 상기 제2 사용자들로 결정할 수 있다.The cosmetics determining unit 106 may determine users whose work similarity (S w ) is greater than or equal to a threshold value among the first users as the second users.

화장품 결정부(106)는 정보 획득부(101)를 통해 획득한 제2 사용자들의 화장품 사용 정보에 기초하여, 사용자에게 적합한 화장품들을 결정할 수 있다. 화장품 사용 정보는 구매 후기, 사용 기간, 사용 빈도, 반품 여부 등을 포함할 수 있다.The cosmetics determination unit 106 may determine cosmetics suitable for the user based on the cosmetics usage information of the second users acquired through the information acquisition unit 101 . Cosmetics use information may include purchase reviews, use period, use frequency, return status, and the like.

화장품 결정부(106)는 긍정적인 리뷰의 비율이 제1 비율 이상인 화장품의 경우, 상기 화장품에 대한 가중치를 높일 수 있다. 화장품 결정부(106)는 긍정적인 리뷰의 비율이 제1 비율 미만인 화장품의 경우, 상기 화장품에 대한 가중치를 낮출 수 있다. 화장품 결정부(106)는 화장품에 대한 가중치에 기초하여, 사용자에게 적합한 화장품들을 결정할 수 있다.The cosmetics determining unit 106 may increase the weight of the cosmetics in the case of cosmetics having a positive review rate equal to or greater than the first rate. In the case of cosmetics having a positive review rate less than the first rate, the cosmetics determining unit 106 may lower the weight of the cosmetics. The cosmetics determining unit 106 may determine cosmetics suitable for the user based on weights of the cosmetics.

도 6은 도 1에 따른 화장품 추천 서버(100)의 하드웨어 구성을 나타낸 도면이다.FIG. 6 is a diagram showing the hardware configuration of the cosmetics recommendation server 100 according to FIG. 1 .

도 6을 참조하면, 화장품 추천 서버(100)는 적어도 하나의 프로세서(110) 및 상기 적어도 하나의 프로세서(110)가 적어도 하나의 동작(operation)을 수행하도록 지시하는 명령어들(instructions)을 저장하는 메모리(memory)를 포함할 수 있다.Referring to FIG. 6, the cosmetics recommendation server 100 stores at least one processor 110 and instructions instructing the at least one processor 110 to perform at least one operation. May contain memory.

상기 적어도 하나의 동작은, 화장품 추천 서버(100)의 동작이나 기능 중 적어도 일부를 포함하고 명령어들 형태로 구현되어 프로세서(110)에 의하여 수행될 수 있다.The at least one operation may include at least some of the operations or functions of the cosmetics recommendation server 100 and may be implemented in the form of instructions and performed by the processor 110 .

여기서 적어도 하나의 프로세서(110)는 중앙 처리 장치(central processing unit, CPU), 그래픽 처리 장치(graphics processing unit, GPU), 또는 본 발명의 실시예들에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 메모리(120) 및 저장 장치(160) 각각은 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리(120)는 읽기 전용 메모리(read only memory, ROM) 및 랜덤 액세스 메모리(random access memory, RAM) 중 하나일 수 있고, 저장 장치(160)는, 플래시메모리(flash-memory), 하드디스크 드라이브(HDD), 솔리드 스테이트 드라이브(SSD), 또는 각종 메모리 카드(예를 들어, micro SD 카드) 등일 수 있다.Here, the at least one processor 110 may mean a central processing unit (CPU), a graphics processing unit (GPU), or a dedicated processor for performing methods according to embodiments of the present invention. can Each of the memory 120 and the storage device 160 may include at least one of a volatile storage medium and a non-volatile storage medium. For example, the memory 120 may be one of a read only memory (ROM) and a random access memory (RAM), and the storage device 160 may be a flash-memory. , a hard disk drive (HDD), a solid state drive (SSD), or various memory cards (eg, a micro SD card).

또한, 화장품 추천 서버(100)는 무선 네트워크를 통해 통신을 수행하는 송수신 장치(transceiver)(130)를 포함할 수 있다. 또한, 화장품 추천 서버(100)는 입력 인터페이스 장치(140), 출력 인터페이스 장치(150), 저장 장치(160) 등을 더 포함할 수 있다. 화장품 추천 서버(100)에 포함된 각각의 구성 요소들은 버스(bus)(170)에 의해 연결되어 서로 통신을 수행할 수 있다. In addition, the cosmetics recommendation server 100 may include a transceiver 130 that performs communication through a wireless network. In addition, the cosmetics recommendation server 100 may further include an input interface device 140, an output interface device 150, a storage device 160, and the like. Each component included in the cosmetics recommendation server 100 is connected by a bus 170 to communicate with each other.

본 발명에 따른 방법들은 다양한 컴퓨터 수단을 통해 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위해 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The methods according to the present invention may be implemented in the form of program instructions that can be executed by various computer means and recorded on a computer readable medium. Computer readable media may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on a computer readable medium may be specially designed and configured for the present invention, or may be known and usable to those skilled in the art of computer software.

컴퓨터 판독 가능 매체의 예에는 롬(ROM), 램(RAM), 플래시 메모리(flash memory) 등과 같이 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 프로그램 명령의 예에는 컴파일러(compiler)에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터(interpreter) 등을 사용해서 컴퓨터에 의해 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of computer readable media may include hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions may include not only machine language codes generated by a compiler but also high-level language codes that can be executed by a computer using an interpreter and the like. The hardware device described above may be configured to operate with at least one software module to perform the operations of the present invention, and vice versa.

또한, 상술한 방법 또는 장치는 그 구성이나 기능의 전부 또는 일부가 결합되어 구현되거나, 분리되어 구현될 수 있다. In addition, the above-described method or device may be implemented by combining all or some of its components or functions, or may be implemented separately.

상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. Although the above has been described with reference to preferred embodiments of the present invention, those skilled in the art will variously modify and change the present invention within the scope not departing from the spirit and scope of the present invention described in the claims below. You will understand that it can be done.

100: 화장품 추천 서버 200: 사용자 단말100: Cosmetics recommendation server 200: user terminal

Claims (1)

사용자의 피부 특성 및 상기 사용자와 유사한 환경에 속해있는 다른 사용자들의 화장품 사용 정보에 기초하여 상기 사용자에게 맞춤형 화장품을 추천하기 위한 서비스를 제공하는 화장품 추천 서버로서,
상기 사용자의 사용자 단말로부터 상기 사용자의 얼굴 이미지 및 상기 사용자의 활동 지역을 지시하는 활동 지역 정보를 획득하는 정보 획득부;
획득된 상기 얼굴 이미지에 기초하여 상기 사용자의 피부 특성을 결정하는 피부 특성 결정부;
결정된 상기 피부 특성에 기초하여 상기 사용자에게 필요한 필요 성분 및 필요 효과를 포함하는 화장품들을 결정하는 화장품 결정부; 및
결정된 상기 화장품들의 추천 리스트를 생성하고, 상기 추천 리스트를 상기 사용자 단말에 전송하는 추천 리스트 생성부를 포함하고,
상기 피부 특성 결정부는,
상기 얼굴 이미지에 기초하여 상기 사용자의 피부의 수분, 유분, 피지, 주름, 모공 상태 및 각질 상태 중 적어도 하나 이상의 피부 특성을 구매 시점에 따라 결정하고, 상기 구매 시점에 대응되는 상기 사용자의 피부 특성 및 상기 구매 시점으로부터 일정 기간 동안 변하는 피부 특성 변화도에 기초하여, 상기 구매 시점으로부터 상기 일정 기간 이후의 시점인 사용 지속 시점에 대응되는 상기 사용자의 피부 특성을 결정하며,
상기 화장품 결정부는, 상기 사용 지속 시점에 대응되는 상기 사용자의 피부 특성 및 상기 사용자와 구별되는 상기 다른 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정하고,
상기 화장품 추천 서버는,
상기 사용자의 활동 지역에 대응하는 기후에 따라 달라지는 상기 사용자의 피부 특성 변화도를 결정하는 피부 특성 변화도 결정부를 더 포함하고,
상기 피부 특성 변화도 결정부는,
기상청 서버로부터 획득한 지역별 기후 정보에 기초하여, 상기 구매 시점에 대응되는 상기 활동 지역의 기후 및 상기 사용 지속 시점에 대응되는 상기 활동 지역의 기후를 비교하고,
상기 비교에 기초하여 상기 사용자의 상기 피부 특성 변화도를 결정하되,
상기 구매 시점에 대응되는 상기 사용자의 활동 지역의 기온, 습도 및 상기 사용 지속 시점에 대응되는 사용자의 활동 지역의 기온, 습도 사이의 기온 변화율 및 습도 변화율을 결정하고,
결정된 상기 기온 변화율 및 상기 습도 변화율에 비례하도록 상기 사용자의 피부 특성 중 수분량, 피지량, 모공, 탄력의 변화도를 결정하고,
결정된 상기 기온 변화율 및 상기 습도 변화율에 반비례하도록 상기 사용자의 피부 특성 중 주름, pH, 피부 밝기, 피부 민감도의 변화도를 결정하고,
상기 화장품 결정부는,
상기 다른 사용자들 중 상기 사용자와 동일한 활동 지역에 있는 제1 사용자들을 결정하고,
결정된 상기 제1 사용자들 중 상기 사용자와 근무 형태가 동일하고, 상기 사용자와 월 평균 외근 시간의 차이가 제1 시간 이내인 제2 사용자들을 결정하고,
결정된 상기 제2 사용자들 중, 상기 사용자와 상기 제2 사용자들 사이의 근무 환경의 유사도를 나타내는 근무 유사도가 임계값 이상인 사용자들을 제3 사용자들로 결정하고,
상기 제3 사용자들의 화장품 사용 정보에 기초하여 상기 화장품들을 결정하며, 상기 화장품 사용 정보는 구매 후기, 사용 기간, 사용 빈도 및 반품 여부 중 적어도 하나를 포함하고,
상기 화장품 추천 서버는 근무 유사도 결정부를 더 포함하고,
상기 근무 유사도 결정부는,
상기 제2 사용자들을 대상으로 외근 시간에 기초하여 상기 제2 사용자들 각각의 외근 증감도 및 외근 변화도를 산출하고,
상기 사용자의 기준 외근 증감도 및 상기 제2 사용자들 각각의 외근 증감도 사이의 증감 연관도를 산출하고,
상기 사용자의 기준 외근 변화도 및 상기 제2 사용자들 각각의 외근 변화도 사이의 유클리디언 거리를 산출하고,
상기 유클리디언 거리 및 상기 증감 연관도에 기반하여 상기 근무 유사도를 결정하는, 화장품 추천 서버.
A cosmetics recommendation server that provides a service for recommending customized cosmetics to the user based on the user's skin characteristics and cosmetics use information of other users belonging to a similar environment to the user,
an information acquisition unit that obtains a face image of the user and activity area information indicating an activity area of the user from the user terminal of the user;
a skin characteristic determination unit configured to determine skin characteristics of the user based on the obtained face image;
a cosmetics determining unit which determines cosmetics including necessary ingredients and necessary effects required for the user based on the determined skin characteristics; and
A recommendation list generating unit generating a recommendation list of the determined cosmetics and transmitting the recommendation list to the user terminal;
The skin characteristic determining unit,
Based on the face image, at least one skin characteristic among moisture, oil, sebum, wrinkles, pore state, and dead skin condition of the user's skin is determined according to the purchase time point, and the user's skin characteristics corresponding to the purchase time point; and Based on the change in skin characteristics for a predetermined period of time from the purchase time, determining the user's skin characteristics corresponding to the duration of use, which is a time point after the predetermined period from the purchase time;
The cosmetics determination unit determines the cosmetics based on the user's skin characteristics corresponding to the duration of use and cosmetics use information of other users distinguished from the user;
The cosmetics recommendation server,
Further comprising a skin characteristic gradient determination unit for determining a skin characteristic gradient of the user that varies according to a climate corresponding to an active region of the user;
The skin characteristic change degree determining unit,
Based on climate information for each region obtained from the Korea Meteorological Administration server, comparing the climate of the active region corresponding to the time of purchase and the climate of the active region corresponding to the time of continuing use,
Determine the degree of change in the skin characteristics of the user based on the comparison,
determining a rate of change in temperature and humidity between the temperature and humidity of the user's active area corresponding to the purchase time and the temperature and humidity of the user's active area corresponding to the duration of use;
Determine the degree of change in moisture content, sebum amount, pores, and elasticity among the user's skin characteristics in proportion to the determined temperature change rate and humidity change rate;
Determining changes in wrinkles, pH, skin brightness, and skin sensitivity among skin characteristics of the user so as to be inversely proportional to the determined rate of change in temperature and rate of change in humidity;
The cosmetic decision unit,
determine first users among the other users in the same active area as the user;
Among the determined first users, determining second users having the same work type as the user and having a difference between the user and the monthly average outgoing time within a first hour;
Among the determined second users, determining users whose work similarity, which indicates a similarity of working environments between the user and the second users, is equal to or greater than a threshold value as third users;
Determining the cosmetics based on cosmetics use information of the third users, wherein the cosmetics use information includes at least one of purchase reviews, use period, use frequency, and return status;
The cosmetics recommendation server further includes a work similarity determination unit,
The work similarity determining unit,
For the second users, based on the time spent outside, calculating the degree of change in outside work and the degree of change in outside work for each of the second users;
Calculating an increase/decrease correlation between the user's standard external muscle sensitivity and the external muscle sensitivity of each of the second users;
Calculate a Euclidean distance between the user's standard external muscle gradient and the external muscle gradient of each of the second users;
Cosmetics recommendation server for determining the work similarity based on the Euclidean distance and the increasing/decreasing correlation.
KR1020220015069A 2021-08-23 2022-02-04 Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user KR20230029486A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020220015069A KR20230029486A (en) 2021-08-23 2022-02-04 Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020210110697A KR102360993B1 (en) 2021-08-23 2021-08-23 Method and apparatus for providing a service for recommending cosmetics to user
KR1020220015069A KR20230029486A (en) 2021-08-23 2022-02-04 Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020210110697A Division KR102360993B1 (en) 2021-08-23 2021-08-23 Method and apparatus for providing a service for recommending cosmetics to user

Publications (1)

Publication Number Publication Date
KR20230029486A true KR20230029486A (en) 2023-03-03

Family

ID=80266015

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020210110697A KR102360993B1 (en) 2021-08-23 2021-08-23 Method and apparatus for providing a service for recommending cosmetics to user
KR1020220015069A KR20230029486A (en) 2021-08-23 2022-02-04 Method and apparatus for providing a service for recommending costomized cosmetics to user based on the user's skin characteristics and cosmetic use information of other users belonging to an environment similar to the user

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020210110697A KR102360993B1 (en) 2021-08-23 2021-08-23 Method and apparatus for providing a service for recommending cosmetics to user

Country Status (1)

Country Link
KR (2) KR102360993B1 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102450424B1 (en) * 2022-06-28 2022-10-06 주식회사 룰루랩 Method and apparatus for recommending cosmetics suitable for users based on the efficacy of the user's skin type and cosmetic ingredients
KR102528021B1 (en) * 2022-10-19 2023-05-03 주식회사 트레이드미 Method and apparatus for providing a service for recommending cosmetics to user
KR102652693B1 (en) 2023-10-18 2024-03-29 이언주 Artificial intelligence-based makeup kit recommendation system

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI556116B (en) * 2012-02-15 2016-11-01 Hitachi Maxell Skin condition analysis and analysis information management system, skin condition analysis and analysis information management method, and data management server
TWI585711B (en) * 2016-05-24 2017-06-01 泰金寶電通股份有限公司 Method for obtaining care information, method for sharing care information, and electronic apparatus therefor
KR20190033257A (en) * 2017-09-21 2019-03-29 주식회사 엘지생활건강 Customized cosmetic recommendation apparatus and method thereof
KR102387651B1 (en) * 2019-12-30 2022-04-19 (주)씽크포비엘 Method for recommending skin care products or cosmetics based on a machine learning model
KR102184177B1 (en) * 2020-03-10 2020-11-27 주식회사 만컴퍼니 Apparatus and method for recommending cosmetics by analyzing a face image acquired using a user's mobile device
KR102199441B1 (en) * 2020-10-30 2021-01-06 주식회사 모이벡 Product recommendation apparatus for evaluating comsmetics based on evaluation items selected by user information

Also Published As

Publication number Publication date
KR102360993B1 (en) 2022-02-09

Similar Documents

Publication Publication Date Title
KR102360993B1 (en) Method and apparatus for providing a service for recommending cosmetics to user
US9311564B2 (en) Face age-estimation and methods, systems, and software therefor
US20150278350A1 (en) Recommendation System With Dual Collaborative Filter Usage Matrix
KR102203355B1 (en) System and method extracting experience information according to experience of product
KR102619221B1 (en) Machine-implemented facial health and beauty aids
KR102069846B1 (en) A method and program for recommending personalized cosmotics
TW201939400A (en) Method and device for determining group of target users
US10540599B2 (en) Behavior prediction
CN110727860A (en) User portrait method, device, equipment and medium based on internet beauty platform
CN113538070B (en) User life value cycle detection method and device and computer equipment
KR102712741B1 (en) Method and apparatus for providing an encounter matching service based on appearance evaluation information and encounter evaluation information
CN113656699B (en) User feature vector determining method, related equipment and medium
US20230385903A1 (en) System and method for intelligent context-based personalized beauty product recommendation and matching at retail environments
KR102445747B1 (en) Method and apparatus for providing total curation service based on skin analysis
CN113159840B (en) Object type prediction method, device and storage medium
CN117152566A (en) Classification model training method, model, classification method and product
KR102548960B1 (en) A method of matching space rental
KR102528021B1 (en) Method and apparatus for providing a service for recommending cosmetics to user
KR102721193B1 (en) Method and apparatus for providing a personalized cosmetic subscription service in consideration of changes in skin condition after individual cosmetic subscription
KR102151251B1 (en) Method for estimating a turnaround time in hospital
KR102516660B1 (en) Method of providing caregiver matching for users
CN113010728A (en) Song recommendation method, system, intelligent device and storage medium
CN111274560A (en) Identity authentication mode recommendation method, device and equipment
JP7315933B2 (en) Information processing device, information processing method and information processing program
KR102423750B1 (en) Apparatus, system, method and program for providing personalized inner beauty service through artificial intelligence

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right