KR20200092030A - System and method for analysing and recommending products based on shading pictures of color cosmetics - Google Patents

System and method for analysing and recommending products based on shading pictures of color cosmetics Download PDF

Info

Publication number
KR20200092030A
KR20200092030A KR1020190009042A KR20190009042A KR20200092030A KR 20200092030 A KR20200092030 A KR 20200092030A KR 1020190009042 A KR1020190009042 A KR 1020190009042A KR 20190009042 A KR20190009042 A KR 20190009042A KR 20200092030 A KR20200092030 A KR 20200092030A
Authority
KR
South Korea
Prior art keywords
color
information
cosmetics
user
product
Prior art date
Application number
KR1020190009042A
Other languages
Korean (ko)
Inventor
김창희
선세리
루이즈 누네스 마틴스 안드레
Original Assignee
선세리
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 선세리 filed Critical 선세리
Priority to KR1020190009042A priority Critical patent/KR20200092030A/en
Publication of KR20200092030A publication Critical patent/KR20200092030A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0623—Item investigation
    • G06Q30/0625—Directed, with specific intent or strategy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

The present invention relates to a cosmetic product analysis, a recommendation system, and a method and, specifically, to a product analysis, a recommendation system, and a method based on shading pictures of color cosmetics wherein when a user transmits an image, shading information of the color cosmetics of a cosmetic brand is collected in real-time from the image, extracted, and analyzed to recommend the most similar product to the user.

Description

색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법{SYSTEM AND METHOD FOR ANALYSING AND RECOMMENDING PRODUCTS BASED ON SHADING PICTURES OF COLOR COSMETICS}Product analysis and recommendation system and method based on color cosmetics' color development photo {SYSTEM AND METHOD FOR ANALYSING AND RECOMMENDING PRODUCTS BASED ON SHADING PICTURES OF COLOR COSMETICS}

본 발명은 화장품 제품분석 및 추천 시스템 및 방법에 관한 것으로서, 상세하게는 사용자가 색조화장이 도포된 얼굴 이미지(발색사진)를 전송하면 해당 이미지에서 화장품 브랜드의 색조화장품의 발색정보를 실시간으로 수집하고, 추출 및 분석해서 가장 유사한 제품을 사용자에게 추천하도록 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법에 관한 것이다.The present invention relates to a cosmetic product analysis and recommendation system and method, and in detail, when a user transmits a face image (color photo) coated with color cosmetics, the color information of color cosmetics of cosmetic brands is collected from the image in real time. It relates to a product analysis and recommendation system and method based on color photographs of color cosmetics that extract, analyze, and recommend the most similar products to users.

근래, 화장품 시장의 성장과 함께 색조화장품 시장 또한 지속적으로 판매가 증가하고 있다.In recent years, along with the growth of the cosmetics market, the sales of the color cosmetics market is also steadily increasing.

다수의 보고서에서 국내 화장품 시장은 계속 성장할 것으로 전망하고 있으며, 이는 색조화장에 대한 관심과 더불어 접근성 좋은 온라인 및 모바일 채널의 성장으로 인한 색조화장법 정보 공유소비량 증가가 더해져 색조 화장품 시장이 지속적인 성장을 이어가게 될 것이라는 전망이다.In many reports, the domestic cosmetics market is expected to continue to grow, which is due to the growing interest in color cosmetics and the increased consumption of information on the color cosmetics method due to the growth of accessible online and mobile channels. It will be.

최근에는 통신 기술의 발달 및 스마트폰의 대중화에 따라 인터넷 사용이 점차 활발해 지고 있는 추세에 있다.Recently, with the development of communication technology and the popularization of smartphones, the use of the Internet is gradually increasing.

이러한 인터넷 환경의 변화에 따라, 인터넷상에 화장품 제품 관련 정보들이 방대한 양으로 축적되고 있다. 많은 사람이 화장품 제품을 구매하고자 할 때 다른 사람들이 인터넷상에 올려놓은 리뷰를 참고하거나 화장품 제품 판매회사가 올린 화장품 제품 구매 관련 정보인 브랜드명, 가격, 제품의 외관, 포장, 사용법, 화장품 제품 제조시 사용된 성분 등을 검색하고 자신이 원하는 화장품을 찾고 있다.According to the changes in the Internet environment, cosmetics product-related information is being accumulated in a large amount on the Internet. When many people want to buy cosmetic products, refer to reviews posted by other people on the Internet or brand information, price, product appearance, packaging, usage, and cosmetic product manufacturing information related to purchasing cosmetic products posted by cosmetic product sales companies Searching for ingredients used in poetry and looking for the cosmetics they want.

예를 들면, 화장품 제품을 구매하고자 하는 소비자는 블로그(Blog), 쇼핑몰, 오픈 마켓, 화장품 회사 웹사이트 등과 같은 곳에서 화장품 제품을 검색하고 화장품의 제품명, 브랜드명, 가격, 구매자들의 리뷰 등을 보고 화장품 제품을 구매하고 있다.For example, a consumer who wants to purchase a cosmetic product searches for a cosmetic product in a blog, shopping mall, open market, website of a cosmetics company, etc., and reports the product name, brand name, price, and buyer reviews of the cosmetic product. I am buying cosmetic products.

하지만, 화장품 제품 시장에는 다양한 브랜드명, 수많은 제품유형, 유사 제품들이 존재하고 있어 시장 자체가 매우 크고 화장품 제품 종류와 이에 관한 정보 또한 다양하다.However, there are various brand names, numerous product types, and similar products in the cosmetic product market, so the market itself is very large, and there are various types of cosmetic products and information on them.

이로 인해, 화장품 제품 소비자들은 방대한 정보 속에서 어떤 화장품 제품을 선택해서 구매해야 할지를 선택하는데 시간을 소비하게 된다. 특히 최근에는 정보 과잉시대에 결단을 내리지 못하고 끊임없이 망설이는 대중인'햄릿증후군'이 늘어나고 있다. 이는 화장품 제품 선택에 있어서도 마찬가지이며 따라서 화장품 제품 소비자에게 각각에게 맞춤화된 정보를 제공할 필요성이 대두되고 있다.As a result, consumers of cosmetic products spend a lot of time to choose which cosmetic products to buy from a vast amount of information. In particular, the'Hamlet Syndrome', a public that is constantly hesitating and unable to make a decision in the era of over-information, is increasing. This is also true in the selection of cosmetic products, and thus, there is a need to provide personalized information to each cosmetic product consumer.

이러한 요구에 부응하기 위하여 대한민국 공개특허 제10-2014-0119973호인 화장품 검색 및 정보 제공 방법 및 이를 이용하는 장치가 게시되어 있다.In order to meet these demands, Korean Patent Publication No. 10-2014-0119973, a cosmetic search and information providing method, and a device using the same are published.

도 1에 도시된 바와 같이 상기 화장품 검색 및 정보 제공 방법을 이용하는 장치는 단말(100)과 화장품 검색 장치(200)를 포함하여 구성될 수 있다.As illustrated in FIG. 1, an apparatus using the cosmetic search and information providing method may include a terminal 100 and a cosmetic search apparatus 200.

단말 장치(100)는, 화장품 검색을 위한 사용자 인터페이스(UI: User Interface)를 구비하며, 카메라 구동 혹은 이미지 갤러리를 통해서 이미지를 획득하고, 응용환경에 따라 사진을 직접 전송하거나 특징을 추출하여 화장품 검색 장치로 전송한다.The terminal device 100 is provided with a user interface (UI) for cosmetic search, acquires an image through a camera driving or image gallery, transmits a picture directly according to an application environment, or extracts features to search for cosmetics To the device.

화장품 검색 장치(200)는, 적어도 하나의 화장품 관련 정보를 이미지와 관련시켜 저장하는 화장품 정보 데이터베이스(220), 화장품 관련 부가 정보를 저장하는 사용자 정보 데이터베이스(230), 및 화장품 검색 요청을 수신하고 검색 요청에 포함된 화장품 이미지에 기반하여 검색 요청된 화장품 관련 상세 정보를 상기 화장품 정보 데이터베이스에서 검색하여 제공하고, 화장품 관련 부가 정보를 해당 화장품과 연계시켜 상기 사용자 정보 데이터베이스에 저장하여 관리하도록 제어하는, 검색 제어부(210)를 포함할 수 있다.The cosmetic search device 200 receives and searches a cosmetic information database 220 that stores at least one cosmetic-related information in association with an image, a user information database 230 that stores cosmetic-related additional information, and a cosmetic search request Search based on the cosmetic image included in the request. Search and provide detailed information related to the requested cosmetics in the cosmetic information database, and control to store and manage additional information related to cosmetics in the user information database in association with the corresponding cosmetics. It may include a control unit 210.

구체적으로, 검색 제어부(210)는 화장품 이미지 자체 혹은 화장품 이미지로부터 추출된 특징 정보(색상 또는 지역 서술자 등)를 이용해 미리 구축된 데이터베이스(database)에서 유사 화장품 또는 동일 화장품을 검색한다.Specifically, the search control unit 210 searches for similar or identical cosmetics in a pre-built database using the cosmetic image itself or feature information extracted from the cosmetic image (such as a color or a local descriptor).

화장품 정보 데이터베이스(220)는 화장품에 대한 카테고리, 브랜드명, 제품명, 기능, 사용 방법, 성분 정보 등을 저장 관리하고, 사용자의 검색 요청이 있을 경우 검색 제어부(210)에 저장하고 있던 정보를 제공한다. 여기서, 화장품은, 파운데이션, 파우더, 아이섀도우, 립스틱, 아이라이너, 아이브로우, 볼터치 등 다양한 카테고리로 분류될 수 있다.The cosmetic information database 220 stores and manages categories, brand names, product names, functions, usage methods, and ingredient information for cosmetics, and provides information stored in the search control unit 210 when a user requests a search. . Here, the cosmetics may be classified into various categories such as foundation, powder, eye shadow, lipstick, eyeliner, eyebrow, and ball touch.

사용자 정보 데이터베이스(230)는 사용자 간 추천을 위해 사용자가 보유한 화장품 리스트 및 사용자가 평가한 평점 정보를 구축하여 관리하며, 사용자간의 정보 공개 여부도 관리한다.The user information database 230 builds and manages a cosmetic list held by the user and rating information evaluated by the user for recommendation between users, and also manages whether information is disclosed between users.

그러나, 이러한 종래의 화장품 검색 및 정보 제공 방법을 이용하는 장치는 단말 장치에서 이미지를 획득하고, 응용환경에 따라 사진을 직접 전송하거나 특징을 추출하는 데, 이미지의 특징 정보가 화장품의 외관, 예를 들어 용기의 모양, 뚜껑의 형태 등에 대한 형태 정보, 화장품의 색상 정보 등을 바탕으로 검색하여 단순히 화장품 정보만을 제공하는 단순한 형태이기 때문에, 사용자가 연예인, 유명 인사 등의 사진을 이용하여 색조 화장품을 알아보고자 하는 경우에는 서비스를 제공하지 못하는 문제점이 있다.However, a device using such a conventional cosmetic search and information providing method acquires an image from a terminal device, directly transmits a picture or extracts a feature according to an application environment, and the feature information of the image is the appearance of the cosmetic, for example Since it is a simple form that provides only cosmetic information by searching based on the shape information on the shape of the container, the shape of the lid, and the color information of the cosmetic, the user wants to check the color cosmetics using photos of celebrities, celebrities, etc. If there is, there is a problem that can not provide the service.

대한민국 공개특허 제10-2014-0119973호Republic of Korea Patent Publication No. 10-2014-0119973

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로, 사용자가 스마트 폰을 이용하여 얼굴 사진에서 알고 싶은 화장 부위를 터치하면 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 다음 색조화장품이 도포된 얼굴 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외하고, 가장 많은 영역을 차지하고 있는 색조화장품의 핵심색상을 도출한 후 이를 인공지능으로 분석한 후 이를 데이터베이스를 통해 사용자가 알고자하는 색상과 가장 유사한 색조화장품을 검색하여 유사도 순으로 사용자에게 추천하도록 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법을 제공하는데 그 목적이 있다.The present invention is to solve the above problems, and when a user touches a makeup part to be known in a face photo using a smart phone, the makeup part is recognized and the corresponding part is cut out, and then from the face part to which the cosmetic is applied. After excluding the distorted colors due to the effects of lighting and shadows, we derive the core colors of the color cosmetics that occupy the most areas, analyze them with artificial intelligence, and then use the database to make the most similar tones to the colors the user wants to know. The purpose of this is to provide a product analysis and recommendation system and method based on color cosmetics, which are searched for cosmetics and recommended to users in the order of similarity.

또한, 본 발명은 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰 정보 및 할인 코드를 제공하고, 이를 SNS를 통해 공유할 수 있도록 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법을 제공하는데 다른 목적이 있다.In addition, the present invention provides an online shopping mall information and a discount code that can be purchased when recommending color cosmetics, and provides a system and method for analyzing and recommending products based on color cosmetics developed to share them through SNS. have.

또, 본 발명은 추천된 색조화장품을 사용자의 사진 이미지에 합성하여 사용자에게 제공하도록 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법을 제공하는데 또 다른 목적이 있다.In addition, another object of the present invention is to provide a product analysis and recommendation system and method based on a color cosmetics chromophoric photograph that synthesizes and provides the recommended color cosmetics to a user's photo image.

또, 본 발명은 사용자의 선호 색조화장품 정보를 바탕으로 사용자가 좋아할만한 신규 제품 출시시 사용자에게 알려 타겟 마케팅을 수행할 수 있도록 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법을 제공하는데 또 다른 목적이 있다.In addition, the present invention is based on the user's preferred color cosmetics information to provide a product analysis and recommendation system and method based on color cosmetics developed to notify the user when targeted new product launch to perform target marketing There is a purpose.

상기와 같은 목적을 달성하기 위한 본 발명의 특징은,Features of the present invention for achieving the above object,

색조화장품 검색앱이 설치되는 스마트폰과; 각종 색조화장품의 색상정보를 포함한 각종 정보가 저장되는 색조화장품 데이터베이스와; 상기 스마트폰의 색조화장품 검색앱에서 색조화장이 이루어진 얼굴 이미지가 업로드되면 실시간으로 인공지능 알고리즘을 통해 색조화장품 색상정보를 도출하고, 도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 상기 색조화장품 데이터베이스에서 검색하여 상기 스마트폰의 색조화장품 검색앱을 통해 유사도순으로 추천하는 색조화장품 추천 서버를 포함하는 것을 특징으로 한다.A smartphone in which a color cosmetics search app is installed; A color cosmetics database in which various information including color information of various color cosmetics is stored; When a face image with color makeup is uploaded in the color cosmetics search app of the smartphone, color information of color cosmetics is derived in real time through an artificial intelligence algorithm, and color cosmetics with the most similar color information are derived from the color information. It is characterized in that it comprises a color cosmetics recommendation server that searches in the database and recommends in the order of similarity through the color cosmetics search app of the smart phone.

여기에서, 상기 색조화장품 발색사진 기반 제품분석 및 추천 시스템은 색조화장이 도포된 얼굴 이미지에서 도출된 색조화장품 색상정보와, 사용자가 제공한 그 외의 이미지로부터 선택 또는 색상환 혹은 색상팔레트로부터 사용자가 원하는 색상을 조색한 색조화장품 색상정보가 누적 저장되는 사용자별 선호색상 데이터베이스와; 사용자가 직접 기입하거나 제공한 이름, 나이, 성별, 피부타입, 얼굴 이미지를 포함하는 회원 정보와, 사용자의 접속 데이터로부터 생성되는 접속 날짜, 접속 시간, 접속 장소, 접속 후 전체 체류 시간, 접속 후 페이지별 체류 시간, 접속 빈도를 포함하는 접속 정보 및 사용자의 활동 데이터로부터 생성되는 선호 브랜드, 선호 질감, 가상 화장 시도 여부, 검색기록, 추천결과기록, 선호 제품을 포함하는 활동 정보, 구매처, 구매제품, 구매 영향 요소(가상 화장 여부, 광고 노출 여부, 구매에 직간접적으로 영향을 준 시스템 내의 요소)를 포함하는 구매정보가 저장되는 사용자 정보 데이터베이스; 및 홍보 의뢰자가 제공하는 브랜드명, 제품명, 특징, 색상명, 제품 사진이 포함된 색조화장품 정보, 홍보의뢰 제품을 선호하는 사용자 정보 및 홍보의뢰 브랜드를 선호하는 사용자 정보가 저장되는 홍보 의뢰 색조화장품 정보 데이터베이스를 더 포함한다.Here, the product analysis and recommendation system based on the hue cosmetic color photograph is the color information of the hue cosmetic derived from the face image to which the hue cosmetic is applied, and a color desired by the user from a color wheel or color palette or selected from other images provided by the user A user preference color database for accumulating and storing color information of color cosmetics toned; Member information including name, age, gender, skin type, and face image entered or provided by the user, and access date, access time, access place, total residence time after access, and post-access page generated from the access data of the user Preferred brands, preference textures, virtual makeup attempts, search records, recommendation result records, activity information including preferred products, where to buy, purchased products, A user information database in which purchase information including purchase influence factors (whether or not virtual makeup, advertisement exposure, elements directly or indirectly influence purchase) is stored; And promotional product color information database that stores information on color cosmetics including brand name, product name, features, color name, and product photos provided by the sponsor, user information preferring promotional product information, and user information preferring promotional product brands It further includes.

여기에서 또한, 상기 색조화장품 데이터베이스는 불특정 다수 색조화장품의 브랜드명, 라인업명, 색상명, 수치화된 색상정보, 가격, 판매처 정보, 질감이 포함된 색조화장품 정보가 저장된다.Here, the color cosmetics database also stores color cosmetics information including brand names, lineup names, color names, numerical color information, prices, dealer information, and textures of unspecified multiple color cosmetics.

여기에서 또, 상기 사용자 정보 데이터베이스는 파악된 다수의 개별 사용자 정보를 유사도 기준으로 카테고라이징하여 저장하는 그룹 정보 데이터베이스가 구비된다.Here, the user information database is provided with a group information database that categorizes and stores a plurality of identified individual user information based on similarity.

여기에서 또, 상기 인공지능 알고리즘은 사용자가 상기 스마트폰을 이용하여 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면 얼굴 신체 부위를 인식한 다음 해당 얼굴 신체 부위의 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 후 발색 정도를 검출하여 발색 기준값 이상인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출한다.Here, the artificial intelligence algorithm recognizes the body part of the face when the user touches the makeup part to be known from the face image using the smartphone, and then recognizes the makeup part of the body part of the face and cuts out only that part. After detecting the degree of color development, the core color is derived by excluding the distorted color due to the influence of lighting and shadow from the body parts of the face where the color cosmetics are applied.

여기에서 또, 상기 인공지능 알고리즘은 상기 발색 기준값 미만이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출한다.Here, the artificial intelligence algorithm applies the core color and color of the cosmetic area to be applied by accumulatively tracking the change value that occurs when the color cosmetics are moved between the applied and uncoated facial parts if the color is less than the reference value. The degree of application of form and color is derived.

여기에서 또, 상기 발색 기준값은 피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상이다.Here, the reference value of color development is more than the reference value when the skin color is not exposed by comparing the skin color and the product color to see if the skin color is exposed through the product color.

여기에서 또, 상기 인공지능 알고리즘은 최근접이웃찾기(nearest neighbor) 알고리즘, 베이지안 알고리즘, 의사결정트리 알고리즘과 같은 머신러닝 방법을 통하여 추천 정확도가 증가하는 인공지능 알고리즘이다.Here, the artificial intelligence algorithm is an artificial intelligence algorithm that increases recommendation accuracy through a machine learning method such as a nearest neighbor algorithm, a Bayesian algorithm, or a decision tree algorithm.

여기에서 또, 상기 인공지능 알고리즘은 얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출한다.Here, the artificial intelligence algorithm derives the color information of the color cosmetics of the area directly selected by the user from the face image when the face is not detected from the face image, or provides a color wheel or color palette to the user to color the color of the cosmetics with the color selected by the user. Derive information.

여기에서 또, 상기 인공지능 알고리즘은 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보를 함께 제공한다.Here, the artificial intelligence algorithm also provides information of an online shopping mall that can be purchased when recommending color cosmetics.

여기에서 또, 상기 인공지능 알고리즘에서 추천한 화장품 정보는 사용자가 상기 스마트폰을 이용하여 SNS를 통해 공유한다.Here, the cosmetic information recommended by the artificial intelligence algorithm is shared by the user through the SNS using the smartphone.

여기에서 또, 상기 인공지능 알고리즘은 상기 사용자 정보 데이터베이스에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천하고, 상기 홍보 의뢰 색조화장품 정보 데이터베이스의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시킨다.Here, the artificial intelligence algorithm recommends the color cosmetics judged to be the most preferred by the user by inferring from the user information accumulated in the user information database and color information of color cosmetics accumulated in the user preferred color database, and promoting the The characteristics of the product to be promoted in the color cosmetics information database of the request are analyzed and the user who is determined to prefer the characteristic of the product is matched.

여기에서 또, 상기 인공지능 알고리즘은 추천된 색조화장품을 사용자의 얼굴 이미지에서 해당 신체 부위에 가상으로 화장하여 사용자에게 제공한다.Here, the artificial intelligence algorithm virtually makeups the recommended color cosmetics from the user's face image to the corresponding body part and provides them to the user.

본 발명의 다른 특징은,Other features of the invention,

상기의 색조화장품 발색사진 기반 제품분석 및 추천 시스템을 이용한 화장품 발색사진 기반 제품분석 및 추천 방법에 있어서, 사용자가 상기 스마트폰을 이용하여 색조화장이 이루어진 얼굴 이미지를 업로딩하는 업로딩 단계와; 사용자가 상기 업로딩된 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면 얼굴 신체 부위를 인식하는 인식 단계와; 얼굴 신체 부위의 인식이 완료되면 인공지능 알고리즘을 통해 색조화장품 색상정보를 도출하는 색상정보 도출 단계; 및 도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 색조화장품 데이터베이스에서 검색하여 상기 스마트폰의 색조화장품 검색앱을 통해 유사도순으로 추천하는 추천 단계로 이루어지는 것을 특징으로 한다.In the method for analyzing and recommending a product based on a color photograph based on a color analysis of color cosmetics and a recommendation system, the method comprising: a user uploading a face image on which a color makeup is made using the smartphone; A recognition step of recognizing a face body part when a user touches a makeup part to be known from the uploaded face image; A color information derivation step of deriving color information of color cosmetics through artificial intelligence algorithm when the recognition of the face body parts is completed; And a recommended step of searching for color cosmetics having the most similar color information from the derived color information in a color cosmetics database and recommending them in a similar order through the color cosmetics search app of the smartphone.

여기에서, 상기 화장품 발색사진 기반 제품분석 및 추천 방법은 상기 사용자 정보 데이터베이스에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천하고, 상기 홍보 의뢰 색조화장품 정보 데이터베이스의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시키는 매칭 단계를 더 포함한다.Here, the method for analyzing and recommending the product based on the color development of cosmetics is based on the user information accumulated in the user information database and the color information of the color cosmetics accumulated in the user preferred color database to determine the color cosmetics judged to be the most preferred by the user. The method further includes a matching step of recommending and analyzing a characteristic of the promotional request product of the promotional cosmetic color information database to match a user determined to prefer the characteristic of the corresponding product.

여기에서 또한, 상기 색상정보 도출 단계는 얼굴 신체 부위중 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 후 발색 정도를 검출하여 발색 기준값 이상인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출하고, 상기 발색 기준값 미만이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출한다.Here, the step of deriving the color information is to recognize the cosmetic part of the body part of the face, cut out only the relevant part, detect the degree of color development, and if the color is higher than the reference value, the effect of illumination and shadow from the body part of the face where the color cosmetics are applied Therefore, the core color is derived by excluding the distorted color, and if it is less than the color reference value, the core color of the cosmetic area applied by accumulating and tracking the change value that occurs when the color cosmetics move between the applied and uncoated face area. To derive the color application form and color application.

여기에서 또, 상기 발색 기준값은 피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상이다.Here, the reference value of color development is more than the reference value when the skin color is not exposed by comparing the skin color and the product color to see if the skin color is exposed through the product color.

여기에서 또, 상기 색상정보 도출 단계는 얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출한다.Here, in the step of deriving the color information, if the face is not detected from the face image, the user can derive the color information of the color cosmetics of the area directly selected from the face image or provide the color wheel or color palette to the user to make the color cosmetics of the color selected by the user. Color information is derived.

여기에서 또, 상기 추천 단계는 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보를 함께 제공한다.Here, the recommendation step also provides information of an online shopping mall where color cosmetics can be purchased upon recommendation.

상기와 같이 구성되는 본 발명인 색조화장품 발색사진 기반 제품분석 및 추천 시스템 및 방법에 따르면, 사용자가 스마트 폰을 이용하여 얼굴 사진에서 알고 싶은 화장 부위를 터치하면 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 다음 색조화장품이 도포된 얼굴 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외하고, 가장 많은 영역을 차지하고 있는 색조화장품의 핵심색상을 도출한 후 이를 인공지능으로 분석한 후 이를 데이터베이스를 통해 사용자가 알고자하는 색상과 가장 유사한 색조화장품을 검색하여 유사도 순으로 사용자에게 추천함으로써 사용자가 손쉽게 색조화장품을 검색할 수 있어 편의를 제공할 수 있다.According to the product analysis and recommendation system and method based on color cosmetics developed by the present inventors constituted as described above, when a user touches a desired makeup part in a face photo using a smart phone, the makeup part is recognized and only the relevant part is cut out. After extracting the core color of the color cosmetics that occupy the most areas, except for the distorted colors due to the effects of lighting and shadows from the face area where the color cosmetics are applied, analyze them with artificial intelligence and then use them through the database By searching for the color cosmetics most similar to the color that the user wants to know and recommending them to the users in order of similarity, the user can easily search for the color cosmetics, thereby providing convenience.

또한, 본 발명에 따르면 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰 정보 및 할인 코드를 제공하여 제품을 신속하고 저렴하게 구매할 수 있고, 이를 SNS를 통해 정보를 공유할 수 있다.In addition, according to the present invention, it is possible to purchase products quickly and inexpensively by providing online shopping mall information and discount codes that can be purchased when recommending color cosmetics, and sharing information through SNS.

또, 본 발명에 따르면 추천된 색조화장품을 사용자의 사진 이미지에 합성하여 사용자에게 제공하여 매장에 방문하여 피부에 발라볼 필요없이 앱 내에서 리얼한 색상을 직접 확인할 수 있어 구매에 따른 시간을 절약할 수 있다.In addition, according to the present invention, the recommended color cosmetics are synthesized in the user's photo image and provided to the user, so that the user can check the real color directly in the app without having to visit the store and apply it on the skin, saving time on purchase. have.

또, 본 발명에 의해 누적된 사용자의 선호 색조화장품 정보를 바탕으로 사용자가 좋아할만한 신규 제품 출시시 사용자에게 알려 타겟 마케팅을 수행할 수 있어 제품 홍보 효과를 극대화시킬 수 있다.In addition, based on the user's preferred color cosmetics information accumulated by the present invention, a target marketing can be performed by notifying the user when a new product that the user may like is released, thereby maximizing the product promotion effect.

도 1은 종래의 화장품 검색 및 정보 제공 방법을 이용하는 장치의 구성을 나타낸 도면이다.
도 2는 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 시스템의 구성을 나타낸 블록도이다.
도 3은 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 시스템의 구성을 나타낸 개념도이다.
도 4는 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법을 설명하기 위한 동작 흐름도이다.1 is a view showing the configuration of a device using a conventional cosmetic search and information providing method.
Figure 2 is a block diagram showing the configuration of a color analysis-based product analysis and recommendation system according to the present invention.
Figure 3 is a conceptual diagram showing the configuration of a color analysis based product analysis and recommendation system according to the present invention.
4 is an operation flowchart for explaining a method for analyzing and recommending a product based on a color photograph of a color cosmetics according to the present invention.

이하, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 시스템의 구성을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, the configuration of the color analysis-based product analysis and recommendation system according to the present invention will be described in detail with reference to the accompanying drawings.

하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In the following description of the present invention, when it is determined that a detailed description of related known functions or configurations may unnecessarily obscure the subject matter of the present invention, the detailed description will be omitted. In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to a user's or operator's intention or practice. Therefore, the definition should be made based on the contents throughout this specification.

도 2는 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 시스템의 구성을 나타낸 블록도이다.Figure 2 is a block diagram showing the configuration of a color analysis-based product analysis and recommendation system according to the present invention.

도 2를 참조하면, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 시스템(1)은 스마트폰(10)과, 색조화장품 데이터베이스(20)와, 사용자별 선호색상 데이터베이스(30)와, 사용자 정보 데이터베이스(40)와, 홍보 의뢰 색조화장품 정보 데이터베이스(50) 및 색조화장품 추천 서버(60)로 구성된다.2, the product analysis and recommendation system 1 based on a color cosmetics color photograph according to the present invention includes a smartphone 10, a color cosmetics database 20, a user-specific color database 30, and a user It consists of an information database 40, a color cosmetics information database 50 and a color cosmetics recommendation server 60 for promotional requests.

먼저, 스마트폰(10)은 색조화장품 검색앱(11)이 설치되고, 색조화장품 추천 서버(60)와 무선 인터넷 통신을 수행한다. 이때, 스마트폰(10) 외에도 테블릿 PC, 데스크탑, 단말 장치 등의 적용이 가능하다.First, the smart phone 10 is installed with a color cosmetics search app 11, and performs wireless Internet communication with the color cosmetics recommendation server 60. At this time, in addition to the smart phone 10, it is possible to apply a tablet PC, desktop, terminal device, and the like.

그리고, 색조화장품 데이터베이스(20)는 불특정 다수 색조화장품의 브랜드명, 라인업명, 색상명, 수치화된 색상정보, 가격, 판매처 정보, 질감이 포함된 색조화장품 정보가 저장된다.In addition, the color cosmetics database 20 stores color cosmetics information including brand names, line-up names, color names, numerical color information, prices, dealer information, and textures of unspecified multiple color cosmetics.

또한, 사용자별 선호색상 데이터베이스(30)는 색조화장이 도포된 얼굴 이미지에서 도출된 색조화장품 색상정보와, 사용자가 제공한 그 외의 이미지로부터 선택 또는 색상환(미도시) 혹은 색상팔레트(미도시)로부터 사용자가 원하는 색상을 조색한 색조화장품 색상정보가 누적 저장된다.In addition, the user preferred color database 30 is selected from color images and color images (not shown) or color palettes (not shown) selected from other images provided by the user, and color information derived from the face image coated with color makeup. The color information of the color cosmetics that colorize the color desired by the user is accumulated.

또, 사용자 정보 데이터베이스(40)는 사용자가 직접 기입하거나 제공한 이름, 나이, 성별, 피부타입, 얼굴 이미지를 포함하는 회원 정보와, 사용자의 접속 데이터로부터 생성되는 접속 날짜, 접속 시간, 접속 장소, 접속 후 전체 체류 시간, 접속 후 페이지별 체류 시간, 접속 빈도를 포함하는 접속 정보 및 사용자의 활동 데이터로부터 생성되는 선호 브랜드, 선호 질감, 가상 화장 시도 여부, 검색기록, 추천결과기록, 선호 제품을 포함하는 활동 정보, 구매처, 구매제품, 구매 영향 요소를 포함하는 구매정보가 저장된다. 이때, 구매 영향 요소는 색조화장품 검색앱에서 가상 화장을 이용한 여부, 광고 노출 여부, 구매에 직간접적으로 영향을 준 시스템 내의 요소이다. 이때, 사용자 정보 데이터베이스(40)는 사용자가 직접 제공한 정보와, 사용자의 시스템 내의 활동을 통해 지속적으로 누적되는 정보의 결합을 지속적으로 수행한다.In addition, the user information database 40 includes member information including a name, age, gender, skin type, and face image that the user directly fills in or provides, and a connection date, access time, and access location generated from the user's access data, Includes total staying time after accessing, staying time per page after accessing, access frequency including access frequency, and preference brand generated from user's activity data, preference texture, virtual makeup attempt, search record, recommendation result record, preferred product Purchasing information including activity information, where to buy, purchased products, and purchasing influence factors is stored. At this time, the purchase influence factor is an element in the system that directly or indirectly influences whether or not a virtual makeup is used in a color cosmetics search app, advertisement is exposed, or purchased. At this time, the user information database 40 continuously combines information directly provided by the user and information that is continuously accumulated through activities in the user's system.

또한, 사용자 정보 데이터베이스(40)에는 그룹 정보 데이터베이스(40-1)가 구비되는 데, 그룹 정보 데이터베이스(40-1)은 사용자 정보 데이터베이스(40)에서 파악된 다수의 개별 사용자 정보를 유사도 기준으로 카테고라이징하여, a) 어떤 특징을 공유하는 그룹이 b) 어떤 특징의 색조화장품을 선호할 것인지, c) 어떤 종류의 광고가 효과적으로 작용하는지를 판단, 유추하여 광고/마케팅의 효율을 높이는 데 사용된다. 예를 들어, a) 오후 6-8시 사이에 접속하는 20대 서울거주 여성은 일요일 저녁에 b) 짙은 분홍색 립스틱을 많이 찾아보는 경향이 있고, c) 이들에게 구매를 유도하는 가장 효과적인 방법은 가상화장단계에서 홍보 의뢰 색조화장품 정보를 제공하는 것이라는 특정한 상관관계를 도출하여, 색조화장품 데이터베이스(20) 또는 홍보 의뢰 색조화장품 정보 데이터베이스(50)로부터 특정 그룹이 선호할만한 제품 또는 구매 가능성이 높은 제품을 선정하는 데 사용할 수 있다.In addition, the user information database 40 is provided with a group information database 40-1, and the group information database 40-1 categorizes a plurality of individual user information identified in the user information database 40 based on similarity. It is used to increase the efficiency of advertising/marketing by determining and inferring by: a) which group sharing a certain characteristic, b) which characteristic color cosmetics will be preferred, and c) what kind of advertisement works effectively. For example, a) women living in Seoul in their 20s connecting between 6-8 pm tend to look for a lot of dark pink lipstick on Sunday evenings, c) the most effective way to drive them to buy is virtual By deriving a specific correlation that provides cosmetic information requested by the public at the makeup stage, a product that a specific group prefers or a product with high probability of purchase is selected from the cosmetic product database 20 or the promotional cosmetic product information database 50 Can be used to

이어서, 홍보 의뢰 색조화장품 정보 데이터베이스(50)는 홍보 의뢰자가 제공하는 브랜드명, 제품명, 특징, 색상명, 제품 사진이 포함된 색조화장품 정보, 홍보의뢰 제품을 선호하는 사용자 정보 및 홍보의뢰 브랜드를 선호하는 사용자 정보가 저장된다.Subsequently, the promotional request color cosmetics information database 50 includes the brand name, product name, features, color name, product color information including the product picture provided by the promotional requester, user information who prefers the promotional product, and prefers the promotional request brand. User information is stored.

계속해서, 색조화장품 추천 서버(60)는 스마트폰(10)의 색조화장품 검색앱(11)에서 색조화장이 이루어진 얼굴 이미지가 업로드되면 인공지능 알고리즘(AI)을 통해 색조화장품 색상정보를 도출하고, 도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 색조화장품 데이터베이스(20)에서 검색하여 스마트폰(10)의 색조화장품 검색앱(11)을 통해 유사도순으로 추천한다.Subsequently, the color cosmetics recommendation server 60 derives the color information of the color cosmetics through an artificial intelligence algorithm (AI) when the color image of the color cosmetics is uploaded in the color cosmetics search app 11 of the smartphone 10, The color cosmetics having the most similar color information from the derived color information are searched in the color cosmetics database 20 and are recommended in the order of similarity through the color cosmetics search app 11 of the smartphone 10.

그리고, 인공지능 알고리즘(AI)은 사용자가 스마트폰(10)을 이용하여 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면 얼굴 신체 부위를 인식한 다음 해당 얼굴 신체 부위의 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 후 발색 정도를 검출하여 발색 기준값 이상인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출한다. 이때, 발색 기준값은 피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상이다.Then, the artificial intelligence algorithm (AI) recognizes the body parts of the face when the user touches the desired makeup part in the face image using the smartphone 10, and then recognizes the makeup parts of the body parts of the face and cuts only the relevant parts. When the color development degree is detected after out, the core color is derived by excluding the distorted color due to the influence of lighting and shadow from the body parts of the face where the color cosmetics are applied. At this time, the color reference value is more than the reference value when the skin color is not exposed by comparing the skin color and the product color to see if the skin color is exposed through the product color.

반대로, 인공지능 알고리즘(AI)은 발색 기준값 미만이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출한다.On the contrary, the artificial intelligence algorithm (AI) accumulates and traces the change value that occurs when the color cosmetics move between the applied and uncoated facial areas when the color cosmetics are less than the reference value. , Derive the degree of color application.

또한, 인공지능 알고리즘(AI)은 최근접이웃찾기(nearest neighbor) 알고리즘, 베이지안 알고리즘, 의사결정트리 알고리즘과 같은 공지된 보편적 머신러닝 방법을 통하여 추천 정확도가 증가하는 인공지능 알고리즘이다.In addition, the artificial intelligence algorithm (AI) is an artificial intelligence algorithm in which recommendation accuracy increases through known universal machine learning methods such as a nearest neighbor algorithm, a Bayesian algorithm, and a decision tree algorithm.

한편, 색조화장품 추천 서버(60)는 얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출한다.On the other hand, if the face is not detected from the face image, the color cosmetics recommendation server 60 derives the color information of the color cosmetics of the area directly selected by the user from the face image or provides a color wheel or a color palette to the user to make the color cosmetics with the color selected by the user Color information is derived.

또한, 색조화장품 추천 서버(60)는 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보(URL)를 함께 제공하고, 추천된 색조화장품을 사용자의 얼굴 이미지에서 해당 신체 부위에 가상으로 화장하여 사용자에게 제공한다.In addition, the color cosmetics recommendation server 60 provides information (URL) of an online shopping mall where color cosmetics can be purchased when recommending color cosmetics, and virtually makeups the recommended color cosmetics on the corresponding body part from the user's face image to the user to provide.

또, 색조화장품 추천 서버(60)에서 추천한 화장품 정보는 사용자가 스마트폰(10)을 이용하여 SNS를 통해 공유할 수 있다.In addition, the cosmetic information recommended by the color cosmetics recommendation server 60 may be shared by the user through SNS using the smartphone 10.

또, 색조화장품 추천 서버(60)는 사용자 정보 데이터베이스(40)에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스(30)에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천하고, 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시킨다.In addition, the color cosmetics recommendation server 60 derives from the user information accumulated in the user information database 40 and the color cosmetics color information accumulated in the user-specific preference color database 30, and the color cosmetics judged to be the most preferred by the user Recommends, and analyzes the characteristics of the promotional product in the color cosmetics information database 50 to match the users who are determined to prefer the characteristics of the product.

이하, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법을 첨부된 도면을 참조하여 상세하게 설명하면 다음과 같다.Hereinafter, with reference to the accompanying drawings, a method for analyzing and recommending a color-based cosmetic color photograph according to the present invention will be described in detail as follows.

도 4는 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법을 설명하기 위한 동작 흐름도이다.4 is an operation flowchart for explaining a method for analyzing and recommending a product based on a color photograph of a color cosmetic product according to the present invention.

도 4를 참조하면, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법은 업로딩 단계(S10)와, 인식 단계(S20)와, 색상정보 도출 단계(S30) 및 추천 단계(S40)로 이루어진다.Referring to FIG. 4, the method for analyzing and recommending a color-cosmetic color photo based product according to the present invention includes an upload step (S10), a recognition step (S20), a color information derivation step (S30), and a recommendation step (S40). .

《업로딩 단계-S10》《Uploading Step-S10》

먼저, 사용자는 스마트폰(10)을 이용하여 색조화장품 검색앱(11)을 실행하고, 색조화장품 검색앱(11)을 통해 색조화장이 이루어진 얼굴 이미지를 업로딩한다.First, the user executes the color cosmetics search app 11 using the smartphone 10, and uploads the face image on which the color cosmetics are made through the color cosmetics search app 11.

이때, 사용자의 스마트폰(10)에는 색조화장품 검색앱(11)이 설치되고, 설치시 회원 정보를 입력한다.At this time, the color cosmetics search app 11 is installed on the user's smartphone 10, and member information is input during installation.

또한, 얼굴 이미지는 웹에서 다운 또는 캡쳐하거나, 사용자가 카메라로 촬영하여 앨범에 저장한 얼굴 이미지(사진)이다.In addition, the face image is a face image (picture) downloaded or captured from the web or stored by the user in the album.

《인식 단계-S20》《Recognition stage-S20》

색조화장품 검색앱(11)을 통해 얼굴 이미지가 업로딩되면, 이는 색조화장품 추천 서버(60)로 전송되어 사용자 정보 데이터베이스(40)에 저장된다.When the face image is uploaded through the color cosmetics search app 11, it is transmitted to the color cosmetics recommendation server 60 and stored in the user information database 40.

그리고, 사용자가 색조화장품 검색앱(11)을 통해 업로딩된 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면, 색조화장품 추천 서버(60)의 인공지능 알고리즘(AI)에서 얼굴 신체 부위를 인식한다. 이때, 얼굴 신체 부위는 눈(Eyes), 볼(Cheeks), 입술(Lips)로 나뉜다.Then, when a user touches a desired makeup part from the uploaded face image through the color cosmetics search app 11, the artificial intelligence algorithm (AI) of the color cosmetics recommendation server 60 recognizes the face body part. At this time, the body parts of the face are divided into eyes, cheeks, and lips.

《색상정보 도출 단계-S30》《Step of deriving color information-S30》

인공지능 알고리즘(AI)에서 얼굴 신체 부위의 인식이 완료되면, 인공지능 알고리즘(AI)은 색조화장품 색상정보를 도출한다.When recognition of the face body part is completed in the artificial intelligence algorithm (AI), the artificial intelligence algorithm (AI) derives color information of color cosmetics.

인공지능 알고리즘(AI)에서 색조화장품 색상정보를 도출하는 과정을 보다 상세하게 설명하면 다음과 같다.The process of deriving the color information of color cosmetics from the artificial intelligence algorithm (AI) will be described in more detail as follows.

먼저, 인공지능 알고리즘(AI)은 얼굴 신체 부위를 인식한 다음 해당 얼굴 신체 부위의 화장 부위를 인식하여 해당 부분만을 컷아웃시킨다.First, the artificial intelligence algorithm (AI) recognizes a body part of the face, and then recognizes a makeup part of the body part of the face and cuts out only the corresponding part.

그리고, 인공지능 알고리즘(AI)은 컷아웃된 이미지를 이용하여 발색 정도를 검출하여 발색 기준값 이상(예를 들어, 립스틱과 같이 고체 타입 화장품)인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출한다. 이때, 발색 기준값은 피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상이다.In addition, the artificial intelligence algorithm (AI) detects the degree of color development by using the cut-out image, and when the color is higher than the reference value (for example, a solid type cosmetic such as lipstick), lighting and shadows are applied from the body parts of the face to which the color cosmetics are applied. The core color is derived by excluding the distorted color due to the influence of. At this time, the color reference value is more than the reference value when the skin color is not exposed by comparing the skin color and the product color to see if the skin color is exposed through the product color.

반대로, 인공지능 알고리즘(AI)은 발색 기준값 미만(예를 들어, 파우더 타입 화장품)이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출한다.Conversely, if the artificial intelligence algorithm (AI) is less than the reference value for color development (for example, powder type cosmetics), cosmetics applied by accumulating and tracking the change value that occurs when the color cosmetics are moved between the applied and uncoated face parts The core color of the area, the type of color application, and the degree of color application are derived.

그리고, 인공지능 알고리즘(AI)은 얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출한다.In addition, the artificial intelligence algorithm (AI) derives the color information of the color cosmetics of the area directly selected by the user from the face image when the face is not detected from the face image, or provides a color wheel or color palette to the user to color the color of the cosmetics with the color selected by the user. Derive information.

《추천 단계-S40》《Recommended stage-S40》

색조화장품 색상정보가 도출되면, 인공지능 알고리즘(AI)은 도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 색조화장품 데이터베이스(20)에서 검색하여 스마트폰(10)의 색조화장품 검색앱(11)을 통해 색조화장품을 리스트화시켜 유사도순으로 추천한다. 이때, 색조화장품의 제품이미지와 제품명, 제조사 등을 함께 제공하는 것이 바람직하고, 추천한 화장품 정보는 사용자가 스마트폰(10)을 이용하여 SNS를 통해 공유할 수 있다.When the color information of the color cosmetics is derived, the artificial intelligence algorithm (AI) searches the color cosmetics database 20 for the color cosmetics with the most similar color information from the extracted color information and searches for the color cosmetics of the smartphone 10 (11) ) To list color cosmetics and recommend in order of similarity. At this time, it is preferable to provide the product image, product name, manufacturer, etc. of the color cosmetics, and the recommended cosmetic information can be shared by the user through the SNS using the smartphone 10.

그리고, 인공지능 알고리즘(AI)은 색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보(URL)를 함께 제공하고, 추천된 색조화장품을 사용자의 얼굴 이미지에서 해당 신체 부위에 가상으로 화장하여 사용자에게 제공한다.In addition, the artificial intelligence algorithm (AI) provides information (URL) of an online shopping mall where color cosmetics can be purchased upon recommendation, and virtually make-up the recommended color cosmetics on the corresponding body part from the user's face image to the user do.

한편, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법은 인공지능 알고리즘(AI)이 사용자 정보 데이터베이스(40)에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스(30)에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천할 수 있다.On the other hand, the method for analyzing and recommending a color-cosmetic color photo based product according to the present invention includes artificial intelligence algorithm (AI), user information accumulated in the user information database 40, and color-colored cosmetics accumulated in the user preferred color database 30. From the information, it is possible to recommend color cosmetics that are judged to be the most preferred by the user.

또한, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법은 인공지능 알고리즘(AI)이 사용자 정보 데이터베이스(40)에서 분석되는 정보를 바탕으로 색조화장품 데이터베이스(20) 또는 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 정보와 매칭시켜, 사용자 정보를 활용하면 사용자 개인 특성에 최적화된 정보를 제공할 수 있다.In addition, the method for analyzing and recommending a color cosmetics based color photograph according to the present invention is based on information analyzed by the artificial intelligence algorithm (AI) in the user information database 40. Matching with the information of (50), if the user information is used, information optimized for the personal characteristics of the user can be provided.

즉, 도출된 색조화장품 색상정보를 바탕으로 사용자별 선호색상 데이터베이스(30)에 새로운 색상정보가 입력될 때, 그에 해당하는 색조화장품 데이터베이스(20)에서 검색하여 추천할 때 활용할 수 있으며, 이와 더불어 이미 누적된 사용자별 선호색상 데이터베이스(30)를 활용하여 기존 사용자의 선호정보에 해당하는 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 제품을 매칭하여 추천하는 경우에도 적용될 수 있다.That is, when new color information is input to the user-specific preference color database 30 based on the derived color cosmetics color information, it can be utilized when searching and recommending the corresponding color cosmetics database 20, and already It can also be applied to matching and recommending products of the color cosmetics information database 50 for promotional requests corresponding to the preference information of the existing users by utilizing the accumulated preference color database 30 for each user.

또한, 인공지능 알고리즘(AI)은 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시켜서 매칭된 사용자를 대상으로 타겟 마케팅을 수행할 수 있다.In addition, the artificial intelligence algorithm (AI) analyzes the characteristics of the promotional request product in the color cosmetics information database 50, and matches the users who are most likely to prefer the characteristics of the product to target marketing for the matching users You can do

또, 본 발명에 따른 색조화장품 발색사진 기반 제품분석 및 추천 방법은 인공지능 알고리즘(AI)이 그룹 정보 데이터베이스(40-1)에서 분석되는 정보를 바탕으로 색조화장품 데이터베이스(20) 또는 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 정보와 매칭시켜 그룹 정보를 활용하면 보다 빠르고 효율적으로 정보를 제공할 수 있다. In addition, the method for analyzing and recommending color cosmetics based on color development products according to the present invention is based on information analyzed by the artificial intelligence algorithm (AI) in the group information database (40-1). If group information is matched with information in the information database 50, information can be provided more quickly and efficiently.

즉, 도출된 색조화장품 색상정보를 바탕으로 사용자별 선호색상 데이터베이스(30)에 새로운 색상정보가 입력될 때, 그에 해당하는 색조화장품 데이터베이스(20)에서 검색하여 추천할 때 활용할 수 있으며, 이와 더불어 이미 누적된 사용자별 선호색상 데이터베이스(30)를 활용하여 기존 사용자의 선호정보에 해당하는 홍보 의뢰 색조화장품 정보 데이터베이스(50)의 제품을 매칭하여 추천하는 경우에도 적용될 수 있다.That is, when new color information is input to the user-specific preference color database 30 based on the derived color cosmetics color information, it can be utilized when searching and recommending the corresponding color cosmetics database 20, and already It can also be applied to matching and recommending products of the color cosmetics information database 50 for promotional requests corresponding to the preference information of the existing users by utilizing the accumulated preference color database 30 for each user.

본 발명은 다양하게 변형될 수 있고 여러 가지 형태를 취할 수 있으며 상기 발명의 상세한 설명에서는 그에 따른 특별한 실시 예에 대해서만 기술하였다. 하지만 본 발명은 상세한 설명에서 언급되는 특별한 형태로 한정되는 것이 아닌 것으로 이해되어야 하며, 오히려 첨부된 청구범위에 의해 정의되는 본 발명의 정신과 범위 내에 있는 모든 변형물과 균등물 및 대체물을 포함하는 것으로 이해되어야 한다.The present invention can be variously modified and can take various forms, and the detailed description of the invention has been described only for the specific embodiments accordingly. However, it should be understood that the present invention is not limited to the specific forms mentioned in the detailed description, but rather includes all modifications, equivalents, and substitutes within the spirit and scope of the present invention as defined by the appended claims. Should be.

10 : 스마트폰 20 : 색조화장품 데이터베이스
30 : 사용자별 선호색상 데이터베이스
40 : 사용자 정보 데이터베이스 41 : 그룹 정보 데이터베이스
50 : 홍보 의뢰 색조화장품 정보 데이터베이스
60 : 색조화장품 추천 서버 AI : 인공지능 알고리즘10: smartphone 20: color cosmetics database
30: user preferred color database
40: user information database 41: group information database
50: Color cosmetics information database for promotional requests
60: Color cosmetics recommendation server AI: AI algorithm

Claims (19)

색조화장품 검색앱이 설치되는 스마트폰과;
각종 색조화장품의 색상정보를 포함한 각종 정보가 저장되는 색조화장품 데이터베이스와;
상기 스마트폰의 색조화장품 검색앱에서 색조화장이 이루어진 얼굴 이미지가 업로드되면 실시간으로 인공지능 알고리즘을 통해 색조화장품 색상정보를 도출하고, 도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 상기 색조화장품 데이터베이스에서 검색하여 상기 스마트폰의 색조화장품 검색앱을 통해 유사도순으로 추천하는 색조화장품 추천 서버를 포함하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.A smartphone in which a color cosmetics search app is installed;
A color cosmetics database in which various information including color information of various color cosmetics is stored;
When a face image with color makeup is uploaded in the color cosmetics search app of the smartphone, color information of color cosmetics is derived through an artificial intelligence algorithm in real time, and color cosmetics with the most similar color information are extracted from the color information. Product analysis and recommendation system based on color cosmetics color pictures, characterized in that it comprises a color cosmetics recommendation server that is searched in the database and recommends in the order of similarity through the color cosmetics search app of the smartphone. 제 1 항에 있어서,
상기 색조화장품 발색사진 기반 제품분석 및 추천 시스템은,
색조화장이 도포된 얼굴 이미지에서 도출된 색조화장품 색상정보와, 사용자가 제공한 그 외의 이미지로부터 선택 또는 색상환 혹은 색상팔레트로부터 사용자가 원하는 색상을 조색한 색조화장품 색상정보가 누적 저장되는 사용자별 선호색상 데이터베이스와;
사용자가 직접 기입하거나 제공한 이름, 나이, 성별, 피부타입, 얼굴 이미지를 포함하는 회원 정보와, 사용자의 접속 데이터로부터 생성되는 접속 날짜, 접속 시간, 접속 장소, 접속 후 전체 체류 시간, 접속 후 페이지별 체류 시간, 접속 빈도를 포함하는 접속 정보 및 사용자의 활동 데이터로부터 생성되는 선호 브랜드, 선호 질감, 가상 화장 시도 여부, 검색기록, 추천결과기록, 선호 제품을 포함하는 활동 정보, 구매처, 구매제품, 구매 영향 요소(가상 화장 여부, 광고 노출 여부, 구매에 직간접적으로 영향을 준 시스템 내의 요소)를 포함하는 구매정보가 저장되는 사용자 정보 데이터베이스와;
홍보 의뢰자가 제공하는 브랜드명, 제품명, 특징, 색상명, 제품 사진이 포함된 색조화장품 정보, 홍보의뢰 제품을 선호하는 사용자 정보 및 홍보의뢰 브랜드를 선호하는 사용자 정보가 저장되는 홍보 의뢰 색조화장품 정보 데이터베이스를 더 포함하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 1,
The product analysis and recommendation system based on the color photograph of the color cosmetics,
Preferred color for each user who accumulates and stores the color information of the color cosmetics derived from the face image coated with color cosmetics, and the color information of the color cosmetics that colorizes the desired color from a color wheel or color palette or selected from other images provided by the user A database;
Member information including name, age, gender, skin type, and face image entered or provided by the user, and access date, access time, access place, total residence time after access, and post-access page generated from the access data of the user Preferred brands, preference textures, virtual makeup attempts, search records, recommendation result records, activity information including preferred products, where to buy, purchased products, A user information database that stores purchase information including purchase influence factors (whether or not virtual makeup, advertisement exposure, and factors directly or indirectly affect purchase);
Promotional cosmetic product information database that stores information on the color cosmetics including the brand name, product name, features, color name, and product photos provided by the promotional client, user information that prefers the promotional product, and user information that prefers the promotional product brand. Product analysis and recommendation system based on color-coated color development, characterized in that it further comprises. 제 1 항에 있어서,
상기 색조화장품 데이터베이스는,
불특정 다수 색조화장품의 브랜드명, 라인업명, 색상명, 수치화된 색상정보, 가격, 판매처 정보, 질감이 포함된 색조화장품 정보가 저장되는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 1,
The color cosmetics database,
Product analysis and recommendation system based on color cosmetics' chromophoric pictures, characterized by storing color cosmetics information including brand name, lineup name, color name, numerical color information, price, vendor information, and texture of unspecified color cosmetics. 제 3 항에 있어서,
상기 사용자 정보 데이터베이스는,
파악된 다수의 개별 사용자 정보를 유사도 기준으로 카테고라이징하여 저장하는 그룹 정보 데이터베이스가 구비되는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.The method of claim 3,
The user information database,
A product analysis and recommendation system based on color photographs of color cosmetics, characterized in that a group information database is provided to categorize and store the identified multiple individual user information on a similarity basis. 제 1 항에 있어서,
상기 인공지능 알고리즘은,
사용자가 상기 스마트폰을 이용하여 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면 얼굴 신체 부위를 인식한 다음 해당 얼굴 신체 부위의 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 후 발색 정도를 검출하여 발색 기준값 이상인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 1,
The artificial intelligence algorithm,
When the user touches the makeup part to be known from the face image using the smart phone, the face body part is recognized, and then the makeup part of the face body part is recognized to cut out only that part and the degree of color development is detected to exceed the color development reference value. In the case of color cosmetics, product analysis and recommendation system based on color cosmetics, characterized in that the core colors are derived by excluding the distorted colors due to the effects of lighting and shadows from the body parts of the face where the color cosmetics are applied. 제 5 항에 있어서,
상기 인공지능 알고리즘은,
상기 발색 기준값 미만이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.The method of claim 5,
The artificial intelligence algorithm,
If the color is less than the reference value, the change value that occurs when the color cosmetics are moved between the applied and uncoated facial areas is cumulatively tracked to derive the core color, the color application form, and the degree of color application. Product analysis and recommendation system based on color photographs of color cosmetics. 제 6 항에 있어서,
상기 발색 기준값은,
피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상인 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.The method of claim 6,
The color reference value,
A product analysis and recommendation system based on a color photograph based on color cosmetics characterized by comparing the skin color with the product color to see if the skin color is exposed by penetrating the product color. 제 5 항에 있어서,
상기 인공지능 알고리즘은,
최근접이웃찾기(nearest neighbor) 알고리즘, 베이지안 알고리즘, 의사결정트리 알고리즘과 같은 머신러닝 방법을 통하여 추천 정확도가 증가하는 인공지능 알고리즘인 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.The method of claim 5,
The artificial intelligence algorithm,
A color analysis based product analysis and recommendation system, characterized by an artificial intelligence algorithm that increases recommendation accuracy through machine learning methods such as the nearest neighbor algorithm, Bayesian algorithm, and decision tree algorithm. 제 1 항에 있어서,
상기 인공지능 알고리즘은,
얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 1,
The artificial intelligence algorithm,
If a face is not detected from the face image, a color tone characterized by deriving the color information of the color cosmetics of the area selected by the user directly from the face image or by providing the color wheel or color palette to the user to derive the color information of the color cosmetics of the color selected by the user Product analysis and recommendation system based on cosmetic color photo. 제 1 항에 있어서,
상기 인공지능 알고리즘은,
색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보를 함께 제공하는 것을 특징으로 하는 화장품 발색사진 기반 제품분석 및 추천 방법.According to claim 1,
The artificial intelligence algorithm,
Product color analysis based on product analysis and recommendation method, which provides information of online shopping mall where you can purchase color cosmetics when recommending them. 제 1 항에 있어서,
상기 인공지능 알고리즘에서 추천한 화장품 정보는,
사용자가 상기 스마트폰을 이용하여 SNS를 통해 공유하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 1,
Cosmetic information recommended by the artificial intelligence algorithm,
Product analysis and recommendation system based on color-cosmetic color picture, characterized in that the user shares it through SNS using the smart phone. 제 2 항에 있어서,
상기 인공지능 알고리즘은,
상기 사용자 정보 데이터베이스에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천하고, 상기 홍보 의뢰 색조화장품 정보 데이터베이스의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시키는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 시스템.According to claim 2,
The artificial intelligence algorithm,
Based on the user information accumulated in the user information database and the color information of the color cosmetics accumulated in the user's preferred color database, the color cosmetics that are judged to be the most preferred by the user are recommended, and the promotional request products from the color cosmetics information database A product analysis and recommendation system based on color-coded chromophoric pictures, characterized by matching users who are determined to prefer the characteristics of the product by analyzing the characteristics of the product. 제 1 항에 있어서,
상기 인공지능 알고리즘은,
추천된 색조화장품을 사용자의 얼굴 이미지에서 해당 신체 부위에 가상으로 화장하여 사용자에게 제공하는 것을 특징으로 하는 화장품 발색사진 기반 제품분석 및 추천 방법.According to claim 1,
The artificial intelligence algorithm,
Cosmetic color development based product analysis and recommendation method, characterized in that the recommended color cosmetics are virtually cremated on the body part from the user's face image and provided to the user. 제 1 항의 색조화장품 발색사진 기반 제품분석 및 추천 시스템을 이용한 화장품 발색사진 기반 제품분석 및 추천 방법에 있어서,
사용자가 상기 스마트폰을 이용하여 색조화장이 이루어진 얼굴 이미지를 업로딩하는 업로딩 단계와;
사용자가 상기 업로딩된 얼굴 이미지에서 알고 싶은 화장 부위를 터치하면 얼굴 신체 부위를 인식하는 인식 단계와;
얼굴 신체 부위의 인식이 완료되면 인공지능 알고리즘을 통해 색조화장품 색상정보를 도출하는 색상정보 도출 단계; 및
도출된 색상정보로부터 가장 유사한 색상정보를 가진 색조화장품을 색조화장품 데이터베이스에서 검색하여 상기 스마트폰의 색조화장품 검색앱을 통해 유사도순으로 추천하는 추천 단계로 이루어지는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 방법.In the product analysis and recommendation method based on cosmetic color photo using the product analysis and recommendation system based on the color photo of color cosmetics of claim 1,
An uploading step in which a user uploads a face image with color makeup using the smart phone;
A recognition step of recognizing a face body part when a user touches a makeup part to be known from the uploaded face image;
A color information derivation step of deriving color information of color cosmetics through artificial intelligence algorithm when the recognition of the face body parts is completed; And
Product analysis based on color-coded chromophoric pictures, characterized in that it consists of a recommended step in the order of similarity through a color cosmetics search app of the smartphone by searching for color cosmetics with the most similar color information from the derived color information And recommended method. 제 14 항에 있어서,
상기 화장품 발색사진 기반 제품분석 및 추천 방법은,
상기 사용자 정보 데이터베이스에 누적된 사용자 정보와 사용자별 선호색상 데이터베이스에 누적된 색조화장품 색상정보로부터 유추하여 사용자가 가장 선호할 것으로 판단되는 색조화장품을 추천하고, 상기 홍보 의뢰 색조화장품 정보 데이터베이스의 홍보 의뢰 제품의 특성을 분석하여 해당 제품의 특성을 가장 선호할 것으로 판단되는 사용자를 매칭시키는 매칭 단계를 더 포함하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 방법.The method of claim 14,
Product analysis and recommendation method based on the cosmetic color picture,
Based on the user information accumulated in the user information database and the color information of the color cosmetics accumulated in the user's preferred color database, the color cosmetics that are judged to be the most preferred by the user are recommended, and the promotional request products from the color cosmetics information database A method of analyzing and recommending a color based cosmetic color photograph based on a color matching step, further comprising a matching step of analyzing a characteristic of the product and matching a user determined to prefer the characteristic of the product. 제 14 항에 있어서,
상기 색상정보 도출 단계는,
얼굴 신체 부위중 화장 부위를 인식하여 해당 부분만을 컷아웃시킨 후 발색 정도를 검출하여 발색 기준값 이상인 경우 색조화장품이 도포된 얼굴 신체 부위로부터 조명 및 그림자의 영향으로 인해 왜곡된 색상을 제외시켜 핵심 색상을 도출하고, 상기 발색 기준값 미만이면 색조화장품이 도포된 얼굴 부위와 미도포된 얼굴 부위 사이를 이동할 때 발생하는 변화값을 누적 추적하여 도포되는 화장품영역의 핵심 색상, 색상의 도포 형태, 색상의 도포 정도를 도출하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 방법.The method of claim 14,
The step of deriving the color information,
If a part of the body of the face is recognized and the part of the body is cut out after the cut-out is detected, the degree of color development is detected and the color is higher than the color reference value. Derived, and if the color is less than the reference value, the color value that occurs when moving between the uncoated face area and the face area where the color cosmetics are applied is cumulatively tracked, and the core color of the applied cosmetic area, the color application form, and the degree of color application Product analysis and recommendation method based on a color photograph of color cosmetics, characterized by deriving. 제 16 항에 있어서,
상기 발색 기준값은,
피부색과 제품색을 비교하여 제품색을 투과하여 피부색이 노출되는 지의 여부를 확인하여 피부색이 미노출되면 기준값 이상인 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 방법.The method of claim 16,
The color reference value,
A method of analyzing and recommending color-based cosmetic products based on color-coded pictures characterized by comparing the skin color with the product color to see if the skin color is exposed by passing through the product color. 제 16 항에 있어서,
상기 색상정보 도출 단계는,
얼굴 이미지로부터 얼굴이 미검출되면 사용자가 얼굴 이미지로부터 직접 선택한 영역의 색조화장품 색상정보를 도출하거나 사용자에게 색상환 또는 색상팔레트를 제공하여 사용자가 선택한 색상으로 색조화장품 색상정보를 도출하는 것을 특징으로 하는 색조화장품 발색사진 기반 제품분석 및 추천 방법.The method of claim 16,
The step of deriving the color information,
If a face is not detected from the face image, a color tone characterized by deriving the color information of the color cosmetics of the area selected by the user directly from the face image or by providing the color wheel or color palette to the user to derive the color information of the color cosmetics of the color selected by the user Product analysis and recommendation method based on cosmetic color photo. 제 14 항에 있어서,
상기 추천 단계는,
색조화장품을 추천시 구매가 가능한 온라인 쇼핑몰의 정보를 함께 제공하는 것을 특징으로 하는 화장품 발색사진 기반 제품분석 및 추천 방법.The method of claim 14,
The recommended step,
Product color analysis based on product analysis and recommendation method, which provides information of online shopping mall where you can purchase color cosmetics when recommending them.
KR1020190009042A 2019-01-24 2019-01-24 System and method for analysing and recommending products based on shading pictures of color cosmetics KR20200092030A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190009042A KR20200092030A (en) 2019-01-24 2019-01-24 System and method for analysing and recommending products based on shading pictures of color cosmetics

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190009042A KR20200092030A (en) 2019-01-24 2019-01-24 System and method for analysing and recommending products based on shading pictures of color cosmetics

Publications (1)

Publication Number Publication Date
KR20200092030A true KR20200092030A (en) 2020-08-03

Family

ID=72043071

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190009042A KR20200092030A (en) 2019-01-24 2019-01-24 System and method for analysing and recommending products based on shading pictures of color cosmetics

Country Status (1)

Country Link
KR (1) KR20200092030A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102506606B1 (en) * 2021-10-25 2023-03-08 한국생산기술연구원 Makeup thickness prediction algorithm
KR20230173981A (en) 2022-06-20 2023-12-27 최영진 Mirror display with makeup preview system

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140119973A (en) 2013-04-01 2014-10-13 한국전자통신연구원 Method for searching cosmetic products, method for providing cosmetic product information, and apparatus using the methods

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140119973A (en) 2013-04-01 2014-10-13 한국전자통신연구원 Method for searching cosmetic products, method for providing cosmetic product information, and apparatus using the methods

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102506606B1 (en) * 2021-10-25 2023-03-08 한국생산기술연구원 Makeup thickness prediction algorithm
KR20230173981A (en) 2022-06-20 2023-12-27 최영진 Mirror display with makeup preview system

Similar Documents

Publication Publication Date Title
US10783528B2 (en) Targeted marketing system and method
US10755286B2 (en) Targeted marketing system and method
US10360623B2 (en) Visually generated consumer product presentation
US20170024589A1 (en) Smart Beauty Delivery System Linking Smart Products
CN109165992A (en) A kind of intelligent shopping guide method, apparatus, system and computer storage medium
KR102335591B1 (en) Apparatus for providing beauty solution flatform considering private pattern using ai
AU2019240635A1 (en) Targeted marketing system and method
US20230115395A1 (en) Skin Tone Scanning and Cosmetics in Three-Dimensional Skin Tone Color Space
US20220114616A1 (en) Digital anthropology and ethnography system
US20140258271A1 (en) Method of e-commerce
KR102117667B1 (en) Method for providing curation based daily coordination serivce using social media and log activity
US20230401632A1 (en) Methods and Systems for Initiating a Virtual Try-On Application Running on a Computer System and Providing Interactive Augmented Reality (AR) Graphics
CN116762070A (en) System, method, computing platform, and storage medium for providing image recommendations
US10713704B2 (en) System and method for generating output results based on computed relativity measures using relational memory
KR20200092030A (en) System and method for analysing and recommending products based on shading pictures of color cosmetics
US20200234312A1 (en) Post-purchase product interaction
KR102429104B1 (en) Product catalog automatic classification system based on artificial intelligence
Jain et al. Color match: An imaging based mobile cosmetics advisory service
Yamamoto et al. Enhanced IoT-Aware Online Shopping System
KR20160005180A (en) System of online show-window for several companies sharing the fashion medels
KR102703989B1 (en) Attractive product planning system based on big data
CN111105283B (en) Data processing method, apparatus and machine readable medium
WO2024103112A1 (en) System and method for identifying items and services of interest in an online environment
KR20220056994A (en) Device for providing goods information in offline retail environment and control method thereof
KR20220008608A (en) System and method for fashion curation service providing system based on fashion style analysis