KR20180110842A - Customized semi-permanent make-up recommendation system based on virtual experience and its service method - Google Patents

Customized semi-permanent make-up recommendation system based on virtual experience and its service method Download PDF

Info

Publication number
KR20180110842A
KR20180110842A KR1020170040680A KR20170040680A KR20180110842A KR 20180110842 A KR20180110842 A KR 20180110842A KR 1020170040680 A KR1020170040680 A KR 1020170040680A KR 20170040680 A KR20170040680 A KR 20170040680A KR 20180110842 A KR20180110842 A KR 20180110842A
Authority
KR
South Korea
Prior art keywords
image
face
measurement value
measurement
semi
Prior art date
Application number
KR1020170040680A
Other languages
Korean (ko)
Inventor
최진은
Original Assignee
최진은
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 최진은 filed Critical 최진은
Priority to KR1020170040680A priority Critical patent/KR20180110842A/en
Publication of KR20180110842A publication Critical patent/KR20180110842A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M37/00—Other apparatus for introducing media into the body; Percutany, i.e. introducing medicines into the body by diffusion through the skin
    • A61M37/0076—Tattooing apparatus
    • G06K9/00268—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G06T2207/10012—Stereo images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Abstract

The present invention relates to a system for recommending a customized semi-permanent makeup operation based on virtual experience, and a service method thereof. The purpose of the present invention is to provide a system and a service method for recommending a customized semi-permanent makeup operation based on virtual experience, which are capable of reducing psychological burden of a customer before a semi-permanent makeup operation and remarkably reducing a consumer damage case according to the dissatisfaction of a style after the operation. Therefore, to achieve the purpose, the present invention further provides a client server including an object recognition scanner, wherein a user is enabled to virtually experience a result state of a semi-permanent makeup operation by a virtual experience application. The virtual experience application comprises an image receiving unit, a face measurement value extraction unit, an eye measurement value extraction unit, an eye brow measurement value extraction unit, a lip measurement value extraction unit, an object information integrated processing unit, an image grade evaluation unit, and a semi-permanent makeup recommendation providing unit. In addition, a series of a service method using the described system comprises: a face object image extraction step; a face object image measurement value extraction step; an extraction object information integrated processing step; a virtual experience grade evaluation step; and an operation recommendation step.

Description

가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스 방법{Customized semi-permanent make-up recommendation system based on virtual experience and its service method}BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a customized semi-permanent makeup recommendation system based on a virtual experience,

본 발명은 반영구화장 시술 추천시스템에 관한 것으로, 더욱 상세하게는, 아름다움을 오랫동안 유지시키기 위한 화장술, 예컨대, 반영구화장 시술을 행함에 있어, 시술 전, 고객의 얼굴객체에 관한 일련의 정보데이터를 산출하고, 산출된 정보데이터의 연산처리 및 그 연산처리된 정보 값의 대입을 통해 반영구화장 시술의 결과상태를 가상으로 체험해 볼 수 있도록 하여, 고객에게 적합한 시술기법과 가장 어울리는 화장스타일을 추천할 수 있도록 한 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스 방법에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a semi-permanent cosmetic treatment recommendation system, and more particularly, to a system for recommending a semi-permanent cosmetic treatment recommendation system in which a series of information data on a face object of a customer is calculated , And the result state of the semi-permanent make-up treatment can be simulated through calculation processing of the calculated information data and substitution of the arithmetic processed information value, so that it is possible to recommend the make-up style best suited to the technique suitable for the customer The present invention relates to a customized semi-permanent makeup recommendation system based on a virtual experience and a service method thereof.

일반적으로 반영구화장이란, 문신으로부터 발전한 새로운 개념의 화장기법, 예컨대, 아름다움을 오랫동안 유지시키기 위해 개발된 화장술의 한 종류로서, 이러한, 반영구화장은 화장하지 않은 맨얼굴의 미약한 부분을 색의 명암을 통해 보완하여 자연스러운 이미지를 연출할 수 있도록 하고, 또한, 의료적 측면에 있어, 각종 수술부위를 재활하여 환자의 자신감을 회복시켜주는 역할을 행하는 것으로, 오늘날, 획기적인 화장기법의 하나로 자리매김하지 오래이다.In general, semi-permanent make-up is a kind of make-up technique developed from tattoo to develop a new concept of make-up, for example, to maintain beauty for a long time. Such semi-permanent makeup is used to make a weak part of a face It is a long time not to be established as one of the epoch-making make-up techniques because it plays a role of restoring the self-confidence of patients by rehabilitating various surgical parts in terms of medical aspect.

또한, 이와 같은, 반영구화장은, 피부 과학에 입각하여 피부의 표피층에 메이크업을 행하도록 하되, 피부 표피층 중에서도 특히, 최하단부인 기저 층을 대상으로 하는 것임에 따라, 2~3년 정도의 기간(시간)이 경과 하면 표피층 피부 세포의 신진대사로 인해 서서히, 그리고 자연스럽게 색이 지워지는 특징을 갖는 것이다.Such semi-permanent make-up is intended to make up the skin layer of the skin on the basis of dermatological science, and particularly to the base layer which is the lowermost part of the skin surface skin layer, ) Is characterized by the gradual and naturally discolored color due to the metabolism of epidermal layer skin cells.

따라서, 이러한, 반영구화장은, 진피층 깊은 곳에 시술되어 평생 지워지지 않는 문신과 대비하여 볼 때 전혀 다른 개념의 미용기술임을 알 수 있다.Therefore, it can be seen that this semi-permanent makeup is a totally different concept of beauty technology as compared with a tattoo which is performed deep in the dermal layer and is not erased for a lifetime.

또 다르게, 전술한 반영구화장은, 천연 미네랄 색소를 사용, 이를 피부의 표피층과 과립층 사이에만 침착되게 하는 것으로, 신체 알레르기 반응이 거의 없고, 색소변색이 없으며, 특히, 신진대사에 의한 반복적 각질 탈락으로 피부에 침착된 색소가 자연스럽게 지워지므로, 시대변화에 따른 메이크업 트랜드에 맞추어 재 시술을 할 수 있다는 장점을 갖는 것이다.Alternatively, the above-mentioned semi-permanent makeup uses a natural mineral pigment, which is deposited only between the skin layer and the granular layer of the skin. Thereby, there is almost no body allergy reaction, no discoloration of pigment, and in particular, Since the pigment deposited on the skin is naturally erased, it can be re-operated according to the make-up trend according to the age change.

하지만, 전술한 반영구화장은, 디지털 또는 아날로그 방식의 시술전용 머신, 예컨대, 대한민국 특허청에 선출원 등록(특허 제0796238호)된 "반영구 눈썹화장 시술방법" 등의 문헌에 게재된 바와 같이, 반영구화장용 의료보조기기를 필수 장비로 이용하게 되는 것으로, 이에, 신체 통증이나 감염, 또는, 부작용 등의 염려를 유발하며, 시술 전, 고객들에게 상당한 불안감과 심리적 부담감을 주는 것일 뿐만 아니라, 특히, 스타일 불만족 등, 정확하고, 만족스러운 시술 결과를 얻지 못할 경우, 화장교정 내지 화장제거 등의 재 시술을 필요로함에 따라, 고객들로 하여금 선뜻 반영구화장 시술을 선택하지 못하게 하는 문제점을 주는 것이다.However, the above-mentioned semi-permanent make-up can not be used for semi-permanent cosmetic use, as shown in literature such as "digital semi-permanent eyebrow makeup treatment method" The use of a medical assistive device as a necessary device induces anxiety such as body pain, infection, or side effects. In addition to giving considerable anxiety and psychological burden to the patient before the procedure, , When accurate and satisfactory treatment results can not be obtained, re-treatment such as cosmetic correction or removal of makeup is required, thereby causing the problem that the customer can not select semi-permanent cosmetic treatment.

또한, 고객들이 반영구화장 시술을 결정함에 있어 제공받을 수 있는 정보는, 극히 제한된 형태의 정보, 예컨대, 웹사이트에 게재된 타인의 시술 전/후 이미지, 또는, 시술후기 내지 단순한 추천 글 등에 의존하여 스타일매칭을 예견할 수밖에 없음에 따라, 시술정보취득에 있어 상당한 한계성을 갖는 것이고, 이러한, 이유로 인해, 시술 후, 어떠한 형태와 색감으로 화장이 표현될지에 대한 정확한 판단 또한 불가능한 것으로, 시술 후 고객의 불만족 도가 매우 높을 수밖에 없는 문제점을 주는 것이다. In addition, the information that the customers can provide in determining the semi-permanent make-up treatment depends on an extremely limited form of information, such as pre- and post-procedure images of others posted on the website, It is impossible to precisely judge the shape and color of the makeup to be displayed after the procedure because of the reason for this. The problem is that the level of dissatisfaction is very high.

또 다르게, 반영구화장은 얼굴객체, 예컨대, 눈,코,입 등의 위치와 크기, 그들 객체 간의 간격, 그리고, 피부 톤에 따른 맞춤형태로, 고객들 하나하나의 개성에 맞게 스타일매칭이 이루어져야 함에도 불구하고, 전술한 바와 같은, 정보 부재 및 시술 결과에 대한 예측불가로 인해 반영구화장에 대한 상담 및 추천에 있어, 상당한 신뢰성 저하의 문제점 또한 갖는 것이다. Alternatively, semi-permanent make-up may be performed in accordance with the position and size of face objects, such as eyes, nose, and mouth, the spacing between the objects, and the skin tone, And there is also a problem of a considerable lowering of reliability in counseling and recommendation for semi-permanent make-up due to the lack of information and the unpredictability of the procedure result as described above.

한편, 근래에는 전술한 바와 같은, 종래 반영구화장의 일부 문제점을 해소하기 위한 방안, 예컨대, 사진으로 촬영된 고객들의 얼굴이미지에 다양한 스타일의 메이크업과 헤어이미지를 매칭시켜, 시술 후의 결과를 예측해 볼 수 있도록 한 가상 시뮬레이션 프로그램 등이 이용되고 있는 실정이다. Meanwhile, in recent years, a method for solving some problems of the conventional semi-permanent make-up as described above, for example, a method of matching make-up and hair images of various styles to face images of customers photographed, A virtual simulation program is used.

하지만, 상기 가상 시뮬레이션 프로그램은, 고객의 얼굴객체에 대한 세부정보, 예컨대, 눈,코,입 등의 위치와 크기, 그들 객체 간의 간격, 그리고, 얼굴 전체 윤곽 등에 대한 세부적인 정보데이터가 대입되지 못하고, 아울러, 선호하는 다양한 색상 및 개인별 화장기법과 같은, 고객 각자가 희망하는 취향 데이터의 희소성으로 인해, 가상 시뮬레이션 결과물의 수준이 떨어지고, 따라서, 오랜 시간 지속적이고 반복적인 이미지매칭과 수정을 통해 얻은 가상 시뮬레이션 결과물의 정확도가 고객을 만족시키지 못하게 되어, 결국, 고객에 가장 어울리는 반영구화장 스타일의 추천을 불가능하게 하는 문제점을 그대로 상존되게 하는 것이다.However, in the virtual simulation program, detailed information data on the details of the face object of the customer such as position and size of eyes, nose, mouth, space between the objects, and the entire outline of the face are not assigned , And because of the scarcity of taste data desired by each customer, such as various preferred colors and personal make-up techniques, the level of the virtual simulation result is lowered, and therefore, the virtual image obtained through long- The accuracy of the simulation result does not satisfy the customer, and finally, the problem of making the recommendation of the semi-permanent make-up style which is most suitable for the customer becomes impossible.

따라서, 본 발명은 불특정 다수의 고객에게 반영구화장을 추천하고, 그들로 하여금 반영구화장의 시술을 결정토록 하는데 따른 종래 제반적인 문제점을 해결하고자 창안된 것으로;Accordingly, the present invention was made to solve the conventional problems in recommending semi-permanent make-up to an unspecified number of customers and to make them decide on semi-permanent make-up treatment.

본 발명의 목적은, 반영구화장 시술을 행함에 있어, 시술 전, 고객의 얼굴객체에 관한 일련의 정보데이터, 예컨대, 객체 인식스캐너에 의해 대상고객의 얼굴이미지를 스캔하고, 이와 같이, 스캔 된 대상고객의 눈,코,입의 위치와 크기, 그들 객체 간의 간격, 그리고, 얼굴 전체 윤곽 등을 가상체험 어플리케이션에 의해 수치화된 이미지데이터로 산출하며, 재차, 산출된 이미지데이터의 연산처리 및 그 연산처리 정보값 대입에 따른 가상체험을 통해 미적 등급을 평가하여, 반영구화장 시술의 결과상태를 가상으로 체험해 볼 수 있게 함으로서, 시술 전 고객의 심리적 부담감을 대폭 완화되도록 함은 물론, 시술 후, 스타일 불만족에 따른 소비자 피해사례를 극히 감소시킬 수 있도록 한 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스 방법을 제공함에 있다.SUMMARY OF THE INVENTION An object of the present invention is to provide a semi-permanent makeup operation, in which a series of information data concerning a face object of a customer, for example, an object recognition scanner, The position and size of the eyes, nose, and mouth of the customer, the distance between the objects, and the entire outline of the face are calculated as the image data quantified by the virtual experience application, and the calculation processing of the calculated image data and the calculation processing By evaluating the aesthetic grade through the virtual experience based on the information value substitution, it is possible to experience the state of the result of the semi-permanent make-up treatment virtually, thereby greatly alleviating the psychological burden of the customer before the operation, Customized semi-permanent make-up procedure recommendation system based on virtual experience that can reduce the consumer damage cases according to And to provide a service method thereof.

따라서, 상기 목적을 달성하기 위한 본 발명에 따른 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스 방법의 구체적 수단으로는;To achieve the above object, according to the present invention, there is provided a method of recommending a custom semi-permanent makeup treatment system and a service method thereof,

대상고객의 얼굴이미지를 3D 입체형상으로 스캔 처리하는 객체 인식스캐너를 포함하며, 상기 스캔 된 3D 입체영상 이미지 데이터를 전송받아, 가상체험 어플리케이션에 의해 반영구화장 시술의 결과상태를 가상으로 체험해 볼 수 있도록 한 클라이언트서버를 구축하되;And an object recognition scanner that scans the face image of the target customer into a 3D stereoscopic shape, receives the 3D stereoscopic image data, and experiences a virtual state of the result of the semi-permanent makeup operation by the virtual experience application Build a client server so that it can;

상기 가상체험 어플리케이션은, 이미지 수신부와, 얼굴계측값 추출부와, 눈계측값 추출부와, 눈썹계측값 추출부와, 입술계측값 추출부와, 객체정보 통합처리부와, 이미지 등급평가부와, 반영구화장 추천제공부로 이루어지게 하여 달성한다.The virtual experience application includes an image receiving unit, a face measurement value extracting unit, an eye measurement value extracting unit, a eyebrow measurement value extracting unit, a lip measurement value extracting unit, an object information integrating processing unit, And a semi-permanent makeup recommendation providing section.

또한, 전술한 시스템을 이용한 일련의 서비스 방법으로, 얼굴 객체이미지 추출단계와, 얼굴 객체이미지 계측값 추출단계와, 추출객체정보 통합처리단계와, 가상체험 등급평가단계와, 시술추천단계를 행하도록 하여 달성한다.In addition, a series of service methods using the system described above may be used to perform a face object image extraction step, a face object image measurement value extraction step, an extracted object information integration processing step, a virtual experience grade evaluation step, and a procedure recommendation step .

이상, 본 발명에 따른 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스방법은, 객체 인식스캐너에 의해 반영구화장 대상고객의 얼굴이미지를 스캔하고, 상기 스캔 된 대상고객의 눈,코,입의 위치와 크기, 그들 객체 간의 간격, 그리고, 얼굴 전체 윤곽을 객체연산 어플케이션에 의해 이미지데이터로 산출하며, 재차, 이와 같이 산출된 이미지데이터를 좌표값에 의해 연산처리하고, 상기 연산처리된 정보 값 대입에 따른 가상체험을 통해 대상고객 얼굴이미지의 미적 등급을 평가하여, 반영구화장 시술의 결과상태를 가상으로 체험할 수 있게 한 것으로서, 이는, 시술 전 고객의 심리적 부담감을 완화되게 한 것임은 물론, 시술 후, 스타일 불만족에 따른 소비자 피해사례를 극히 감소되게 한 것이며, 특히, 고객에게 적합한 시술기법과 가장 어울리는 화장스타일을 신뢰성 있게 추천할 수 있게 한 것으로, 이는, 매우 유용한 기대효과를 제공한다.As described above, the customized semi-permanent make-up procedure recommendation system and the service method thereof according to the present invention are characterized in that the object recognition scanner scans a face image of a customer for a semi-permanent makeup target, The distance between the objects, and the entire outline of the face are calculated as image data by the object operation application, and the image data thus calculated is again calculated according to the coordinate value, The present invention provides a virtual experience of evaluating the aesthetic grade of the face image of a target customer so as to experience a virtual state of the result of the semi permanent makeup treatment. This not only mitigates the psychological burden of the customer before the treatment, Style dissatisfaction is extremely reduced, and in particular, it is the most appropriate treatment technique Section that can be reliably like style, which is to provide a very useful expected effects.

도 1은 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템의 개념도
도 2는 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템의 블럭구성도
도 3은 본 발명에 의해 산출되는 얼굴계측값 추출표
도 4는 본 발명에 의해 산출되는 눈계측값 추출표
도 5는 본 발명에 의해 산출되는 눈썹계측값 추출표
도 6은 본 발명에 의해 산출되는 입술계측값 추출표
도 7은 본 발명에 따른 고객 맞춤형 반영구화장 시술 추천시스템을 이용한 서비스 방법의 순서도1 is a conceptual diagram of a customized semi-permanent makeup recommendation system based on a virtual experience according to the present invention
2 is a block diagram of a customized semi-permanent make-up procedure recommendation system based on the virtual experience according to the present invention
FIG. 3 is a diagram showing a face measurement value extraction table
FIG. 4 is a diagram showing an eye measurement value extraction table
FIG. 5 is a diagram illustrating an eyebrow measurement value extraction table
Fig. 6 is a diagram showing a lip measurement value extraction table
7 is a flow chart of a service method using a customized semi-permanent make-up procedure recommendation system according to the present invention

이하, 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템 및 그 서비스 방법의 바람직한 실시예 구성을 첨부도면에 의거하여 상세히 설명하기로 한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of a customized semi-permanent makeup recommendation system and a service method thereof based on a virtual experience according to the present invention will be described in detail with reference to the accompanying drawings.

이에, 먼저, 첨부도면을 참고로 하여 본 발명에 따른 고객 맞춤형 반영구화장 시술 추천시스템의 개략적인 구성을 살펴보면;First, with reference to the accompanying drawings, a schematic configuration of a custom semi-permanent make-up procedure recommendation system according to the present invention will be described;

이는, 객체인식 스캐너(1)와, 가상체험 어플리케이션(2)이 설치된 클라이언트 서버(3)로 구성된다.This consists of an object recognition scanner 1 and a client server 3 in which a virtual experience application 2 is installed.

여기서, 먼저, 상기 객체인식 스캐너(1)는, 일반산업분야에 널리 이용되고 있는, 상용화된 기술구성의 3D 스캐너를 의미하는 것인바, 이에, 본 발명에 있어서의, 객체인식 스캐너(1)는, 상기와 같이, 이미 상용화된 기술구성의 3차원 스캐너를 이용, 레이저나 백색광을 반영구화장 시술대상 고객의 얼굴에 투사하여, 고객 얼굴에 대한 형상정보를 취득하고, 이를 디지털 정보로 전환하는 방식, 예컨대, "고객 얼굴의 스캐닝 -> 정렬 및 정합 -> 머징 => 3D 모델링 이미지 데이터 생성"이라는 과정을 행하는 통상의 3D 스캐너를 이용함이 바람직하다. Here, first, the object recognition scanner 1 means a 3D scanner having a commercial technology configuration, which is widely used in the general industrial field. Accordingly, the object recognition scanner 1 according to the present invention , A method of projecting the laser or white light onto the face of the customer of the semi-permanent makeup treatment target by using the three-dimensional scanner of the commercial structure already commercialized and acquiring shape information about the customer face and converting it into digital information, For example, it is preferable to use a conventional 3D scanner that performs the process of "scanning, alignment, matching, merging > 3D modeling image data generation"

또한, 상기 가상체험 어플리케이션(2)은, 고객 맞춤형 반영구화장 시술 추천 서비스를 안정적으로 제공하기 위해 구축된 본 발명의 전용화된 소프트웨어, 예컨대, 후술하는 클라이언트 서버(3)로 설치되는 일종의 전용 프로그램 구성인바, 이에, 이와 같은, 가상체험 어플리케이션(2)은, 도 2로 도시된 바와 같이, 이미지 수신부(21)와, 얼굴계측값 추출부(22)와, 눈계측값 추출부(23)와, 눈썹계측값 추출부(24)와, 입술계측값 추출부(25)와, 객체정보 통합처리부(26)와, 이미지 등급평가부(27)와, 반영구화장 추천제공부(28)로 구성함이 바람직하다.In addition, the virtual experience application (2) is a dedicated software of the present invention constructed to stably provide a customized semi-permanent make-up procedure recommendation service, for example, a kind of dedicated program constituted by a client server (3) 2, the virtual experience application 2 as described above includes an image receiving unit 21, a face measurement value extracting unit 22, an eye measurement value extracting unit 23, The eyebrow measurement value extracting unit 24, the lip measurement value extracting unit 25, the object information integrating processing unit 26, the image rating evaluating unit 27, and the semi-permanent makeup recommending provisioning unit 28 desirable.

이때, 가상체험 어플리케이션(2) 있어, 상기 이미지 수신부(21)는, 전술한 객체 인식스캐너로(1)부터 시술대상 고객에 대한 3D얼굴 입체영상이미지를 데이터 정보로 전송받고, 그 전송받은 3D얼굴 입체영상이미지를 안정적으로 저장 관리토록 하는 기능구성으로 마련되게 함이 바람직하다.At this time, in the virtual experience application 2, the image receiving unit 21 receives the 3D face stereoscopic image for the customer to be treated from the object recognition scanner 1 as data information, It is preferable that the stereoscopic image is provided in a functional configuration for stably storing and managing the stereoscopic image.

또한, 가상체험 어플리케이션(2) 있어, 상기 얼굴계측값 추출부(22)는, 상기 이미지 수신부(21)를 통해 수신된 3D얼굴 입체 영상이미지를 대상으로, X,Y 좌표값에 의해 얼굴 형태에 대한 계측값을 산출하는 수단인바, 이에, 이러한, 얼굴계측값 추출부(22)는, 상기 3D얼굴 입체 영상이미지 데이터를 기초로, 얼굴형태에 대한 계측점과, 계측항목, 그리고, 얼굴형 구분에 따라 세부적인 정보값을 추출하고, 그 추출된 정보값을, 도 3으로 도시된 바와 같이, 이미지와 도표의 표시로 입력 저장, 관리토록 하는 기능구성으로 마련되게 함이 바람직하다.In the virtual experience application 2, the face measurement value extracting unit 22 extracts the 3D face stereoscopic image received through the image receiving unit 21 from the X, Y coordinate values The face measurement value extracting unit 22 extracts the 3D face stereoscopic image based on the measurement point of the face shape, the measurement item, and the face type classification based on the 3D face stereoscopic image image data. It is preferable that a detailed information value is extracted and the extracted information value is provided in a functional configuration for input storage and management as shown in the image and chart display as shown in Fig.

또한, 가상체험 어플리케이션(2) 있어, 상기 눈계측값 추출부(23)는, 상기 이미지 수신부(21)를 통해 수신된 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 눈 모양과, 그 눈 모양에 대한 계측값을 산출하는 수단인바, 이에, 이러한, 눈계측값 추출부(23)는, 상기 3D얼굴 입체 영상이미지 데이터를 기초로, 눈 형태에 대한 계측점과, 계측항목, 그리고, 눈 모양 구분에 따른 세부적인 정보값을 추출하고, 그 추출된 정보값을, 도 4로 도시된 바와 같이, 이미지와 도표의 표시로 입력 저장, 관리토록 하는 기능구성으로 마련되게 함이 바람직하다.In addition, in the virtual experience application 2, the eye measurement value extracting unit 23 extracts eye 3D images based on X, Y coordinate values of the 3D stereoscopic image received through the image receiving unit 21, Eye measurement value extracting unit 23 calculates a measurement value for the eye shape based on the 3D face stereoscopic image data, It is preferable to extract the detailed information value according to the eye shape and to provide the extracted information value as a function configuration for input storage and management as display of images and charts as shown in Fig.

또한, 가상체험 어플리케이션(2) 있어, 상기 눈썹계측값 추출부(24)는, 상기 이미지 수신부(21)를 통해 수신된 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 눈썹 모양과, 그 눈썹 모양에 대한 계측값을 산출하는 수단인바, 이에, 이러한, 눈썹계측값 추출부(24)는, 상기 3D얼굴 입체 영상이미지 데이터를 기초로, 눈썹 형태에 대한 계측점과, 계측항목, 그리고, 눈썹 모양 구분에 따른 세부적인 정보값을 추출하고, 그 추출된 정보값을, 도 5로 도시된 바와 같이, 이미지와 도표의 표시로 입력 저장, 관리토록 하는 기능구성으로 마련되게 함이 바람직하다.In addition, in the virtual experience application 2, the eyebrow measurement value extraction unit 24 extracts the eyebrow shape and the eyebrow shape based on the X, Y coordinate values of the 3D face stereoscopic image received through the image receiving unit 21, The eyebrow measurement value extraction unit 24 extracts the eyebrow shape based on the 3D eye stereoscopic image data, the measurement point about the eyebrow shape, the measurement item, and the eyebrow shape, It is preferable to extract detailed information values according to the eyebrow shape division and to provide the extracted information values in a functional configuration for input storage and management as display of images and charts as shown in Fig.

또한, 가상체험 어플리케이션(2) 있어, 상기 입술계측값 추출부(25)는, 상기 이미지 수신부(21)를 통해 수신된 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 입술 모양과, 그 입술 모양에 대한 계측값을 산출하는 수단인바, 이에, 이러한, 입술계측값 추출부(25)는, 상기 3D얼굴 입체 영상이미지 데이터를 기초로, 입술 형태에 대한 계측점과, 계측항목, 그리고, 입술 모양 구분에 따른 세부적인 정보값을 추출하고, 그 추출된 정보값을, 도 6으로 도시된 바와 같이, 이미지와 도표의 표시로 입력 저장, 관리토록 하는 기능구성으로 마련되게 함이 바람직하다.The lip measurement value extracting unit 25 extracts lip shape information based on the X and Y coordinate values of the 3D face stereoscopic image received through the image receiving unit 21, The lip measurement value extracting unit 25 calculates the measurement values of the lip shape based on the 3D face stereoscopic image image data, the measurement points about the lip shape, the measurement items, It is preferable to extract the detailed information value according to the lip shape and to provide the extracted information value as a function configuration for input storage and management as display of images and charts as shown in Fig.

또한, 가상체험 어플리케이션(2) 있어, 상기 객체정보 통합처리부(26)는, 고객의 전체적인 얼굴 스타일을 종합하여, 판독 처리하는 수단인바, 이와 같은, 객체정보 통합처리부(26)는, 도 2로 도시된 바와 같이, 3D얼굴 입체 영상이미지로부터 추출된 얼굴계측값과, 눈계측값과, 눈썹계측값과, 입술계측값을 통합하여 수집하는 얼굴객체 계측점 수집모드(261)와, 상기 얼굴객체 계측점 수집모드(261)을 통해 수집된 얼굴객체에 대한 위치와 거리를 탐지하여, 그들 얼굴 객체 간 상관관계를 통합 데이터로 추출하는 얼굴객체 위치판독모드(262)와, 상기 판독된 얼굴객체간 상관관계 데이터를 저장관리하는 얼굴객체정보 저장모드(263)로 구성함이 바람직하다. The object information integration processing unit 26 is a means for synthesizing the overall face style of the customer and reading and processing the object face information integration processing unit 26 in the virtual experience application 2, A face object measurement point collection mode 261 for collecting and collecting face measurement values, eye measurement values, eyebrow measurement values, and lip measurement values extracted from the 3D face stereoscopic image, A face object position reading mode 262 for detecting positions and distances of the face objects collected through the acquisition mode 261 and extracting the correlation between the face objects as integrated data, And a face object information storage mode 263 for storing and managing data.

또한, 가상체험 어플리케이션(2) 있어, 상기 이미지 등급평가부(27)는, 전술한, 객체정보 통합처리부(26)에 의해 판독 처리된 고객얼굴에 대한 스타일 이미지를 대상으로, 메이크업 매칭처리작업을 행하고, 매칭처리된 스타일 이미지에 대하여 설정된 단계별 수치 값에 의해 미적 등급을 부여하는 수단인바, 이에, 이와 같은, 이미지 등급평가부(27)는, 도 2로 도시된 바와 같이, 고객 기호에 맞는 화장기법을 선택하는 화장기법 선택모드(271)와, 반영구화장 시술 결과에 대한 샘플이미지 데이터, 예컨대, 반영구화장을 행한 불특정 다수의 다양한 시술결과 얼굴이미지 데이터를 축척 보관하는 샘플 데이터 베이스(272)와, 상기 선택된 화장기법과 축척된 샘플이미지 데이터를, 상기 객체정보 통합처리부(26)에 의해 판독된 고객얼굴 스타일 이미지에 매칭시켜 시술 결과에 대한 가상체험 작업을 수행하고, 가상체험에 의해 매칭된 스타일 이미지에 대하여, 수치 값에 의한 미적등급을 부여하는 스타일 가상체험 모드(273)와, 상기 가상체험 작업에 대한 스타일 이미지 매칭결과정보를 저장관리하는 체험정보 저장모드(274)로 구성함이 바람직하다.In addition, in the virtual experience application 2, the image rating evaluating unit 27 performs a makeup matching processing operation on the style image of the customer face read and processed by the object information integration processing unit 26 2, the image rating evaluating unit 27 evaluates the degree of aesthetics according to the stepwise numerical value set for the matching style image, A sample database 272 for accumulating sample image data of semi-permanent makeup operation result, for example, face image data of a variety of unspecified various procedures performed by semi-permanent makeup, The selected makeup technique and the accumulated sample image data are matched to the customer face style image read by the object information integration processing unit 26, A style virtual experience mode 273 for performing a virtual experience task on the result and assigning an aesthetic grade based on a numerical value to the style image matched by the virtual experience, And an experience information storage mode 274 for storing and managing the experience information.

또한, 가상체험 어플리케이션(2) 있어, 상기 반영구화장 추천제공부(28)는, 선택된 이미지, 예컨대, 상기 체험정보 저장모드(274)에 매칭결과 정보로 저장된 스타일 이미지 중 미적등급이 가장 높은 이미지를 선택하여, 그 선택된 이미지 형태로 시술방법을 행할 것을 추천하는 수단인바, 이에, 이와 같은, 반영구화장 추천제공부(28)는, 도 2로 도시된 바와 같이, 전술한 체험정보 저장모드(274)로 저장된 스타일 이미지 매칭결과정보 중 어느 하나의 스타일 이미지를 선택하는 스타일 최종 선택모드(281)와, 상기 선택된 스타일 이미지에 대한 시술방법을 선택하는 시술방법 선택모드(282)로 구성함이 바람직하다. In addition, in the virtual experience application 2, the semi-permanent makeup recommendation provisioning unit 28 acquires an image having the highest aesthetic rating among the style images stored in the selected image, for example, the experience information storage mode 274 as the matching result information 2, the semi-permanent make-up recommendation provisioning unit 28 performs the above-described experience information storage mode 274, as shown in FIG. 2, A style final selection mode 281 for selecting any one style image from the stored style image matching result information and a procedure selection mode 282 for selecting a procedure for the selected style image.

한편, 상기 클라이언트 서버(3)는, 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템을 이용하여, 불특정 다수의 고객을 대상으로, 맞춤형 반영구화장 시술추천 서비스를 제공하기 위해 마련된 일종의 서비스 운영자 서버를 의미하는 것으로, 이와 같은, 클라이언트 서버(3)는, 인터넷 연결이 가능한 데이터 처리수단으로서, 전술한, 가상체험 어플리케이션(2)이 설치된 컴퓨터 또는, 모바일 단말로 구성함이 바람직하다. On the other hand, the client server 3 may be configured to provide a custom semi-permanent make-up procedure recommendation service to an unspecified number of customers using a custom semi-permanent makeup operation recommendation system based on the virtual experience according to the present invention It is preferable that the client server 3 is constituted by a computer or a mobile terminal in which the virtual experience application 2 is installed as the data processing means capable of connecting to the Internet .

따라서, 상기와 같은, 일련의 구성으로 이루어진 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템은, 그 구축된 시스템을 이용하여, 고객 맞춤형 반영구화장 시술추천 서비스를 제공하게 되는 것으로, 이와 같은, 고객 맞춤형 반영구화장 시술추천 서비스 방법의 특징적 흐름 과정을 살펴보면;Therefore, the customized semi-permanent make-up procedure recommendation system based on the virtual experience according to the present invention having the above-described series of constitutions provides a customized semi-permanent makeup procedure recommendation service using the constructed system , And a characteristic flow of the customized semi-permanent makeup recommendation service method like this is described;

이는, 도 7로 도시된 바와 같이, 얼굴 객체이미지 추출단계(S1)와, 얼굴 객체이미지 계측값 추출단계(S2)와, 추출객체정보 통합처리단계(S3)와, 가상체험 등급평가단계(S4)와, 시술추천단계(S5)로 이루어진다.7, the face object image extraction step S1, the face object image measurement value extraction step S2, the extracted object information integration processing step S3, the virtual experience grade evaluation step S4 And a procedure recommending step S5.

여기서, 먼저, 상기 객체이미지 추출단계(S1)는, 시스템 장비로 구축된 객체 인식스캐너(1)를 이용, 시술 대상고객의 얼굴을 스캔하여, 3D얼굴 입체영상이미지를 생성하고, 재차, 상기 생성된 3D얼굴 입체영상이미지를 데이터 정보로 변환하여, 그 변화된 데이터를 클라이언트 서버(3)로 설치된 가상체험 어플리케이션(2), 즉, 그 가상체험 어플리케이션(2)에 마련된, 이미지 수신부(21)로 전송하는 과정으로 이루어지게 함이 바람직하다.First, the object image extraction step (S1) includes: scanning a face of a customer to be treated using an object recognition scanner (1) built in system equipment to generate a 3D face stereoscopic image, And transmits the changed data to the virtual experience application 2 provided in the client server 3, that is, to the image receiving unit 21 provided in the virtual experience application 2 And a step of performing a predetermined process.

또한, 상기 얼굴 객체이미지 계측값 추출단계(S2)는, 전술한, 객체이미지 추출단계(S1)를 통해 수신된 3D얼굴 입체 영상이미지를 대상으로 하여, 가상체험 어플리케이션(2)에 마련된 얼굴계측값 추출부(22)를 통해, X,Y 좌표값으로 얼굴형태에 대한 계측 정보값을 산출하고, 눈계측값 추출부(23)를 통해 X,Y 좌표값으로 눈형태에 대한 계측 정보값을 산출하며, 눈썹계측값 추출부(24)를 통해 X,Y 좌표값으로 눈썹 형태에 대한 계측 정보값을 산출하고, 재차, 입술계측값 추출부(25)를 통해 통해 X,Y 좌표값으로 입술형태에 대한 계측 정보값을 산출하는 과정으로 이루어지게 함이 바람직하다.The face object image measurement value extracting step S2 is a step of extracting the face object measurement value S0 from the 3D face stereoscopic image image received through the object image extracting step S1, The measurement information value for the face shape is calculated using the X and Y coordinate values through the extraction unit 22 and the measurement information value for the eye shape is calculated as the X and Y coordinate values through the eye measurement value extraction unit 23 The eyebrow measurement value extracting unit 24 calculates measurement information values for the eyebrow shape as the X and Y coordinate values, and again uses the lip measurement value extracting unit 25 as the X, Y coordinate values And a step of calculating a measurement information value with respect to at least one of the plurality of measurement points.

또한, 상기 추출객체정보 통합처리단계(S3)는, 전술한, 얼굴 객체이미지 계측값 추출단계(S2)를 통해 산출된 얼굴형태에 대한 계측 정보값과, 눈형태에 대한 계측 정보값과, 눈썹 형태에 대한 계측 정보값, 그리고, 입술형태에 대한 계측 정보값을 객체정보 통합처리부(26)에 대입하여, 대상고객의 전체적인 얼굴 스타일, 예컨대, 각 객체들이 상호 조합된 형태로서 대상고객의 얼굴 이미지 대한 전체적인 특징을 판독처리하는 과정으로 이루어지게 함이 바람직하다.Also, the extracted object information integration processing step S3 may include a measurement information value for the face shape calculated through the face object image measurement value extraction step S2, a measurement information value for the eye shape, The measurement information value for the shape and the measurement information value for the lip shape are substituted into the object information integration processing unit 26 to determine the face style of the target customer, for example, And a process of reading and processing the overall characteristics of the image processing apparatus.

또한, 상기 가상체험 등급평가단계(S4)는, 전술한, 추출객체정보 통합처리단계(S3) 통해 판독처리된 대상고객의 특징적 얼굴이미지를 대상으로, 다양한 메이크업, 예컨대, 얼굴이미지 객체에 대한 화장색상과 모양, 그리고, 화장법 등은 물론, 샘플 데이터 베이스(272)에 저장된 시술결과 데이터 또한, 다양한 형태로 연속적이고 반복적인 형태, 예컨대, 가상체험 형태로 매칭시켜, 최적의 매칭된 스타일 이미지를 추출하고, 이와 같이, 최적의 형태로 매칭 추출된 스타일 이미지에 대하여, 설정된 수치 값에 의해 미적등급을 부여하는 과정으로 이루어지게 함이 바람직하다. In addition, the virtual experience class evaluation step (S4) is a step of evaluating the virtual experience class using the characteristic face image of the target customer read and processed through the extracted object information integration processing step (S3) The procedure result data stored in the sample database 272 as well as the color and shape, and the cosmetic method are also matched in a continuous and repetitive form such as a virtual experience form in various forms to extract an optimal matched style image Thus, it is preferable that an aesthetic grade is given to the style image matched and extracted in the optimum form by the set numerical value.

또한, 상기 시술추천단계(S5)는, 전술한, 가상체험 등급평가단계(S4)를 통해 평가된 스타일 이미지 중, 미적등급이 가장 우수한 이미지를 선택하고, 그 선택 스타일이미지에 대한 최종 결과정보를 추출하여, 대상고객에게 반영구화장 시술을 추천하는 과정으로 이루어지게 함이 바람직한 것으로, 이러한, 일련의 방법적 단계를 통해 본 발명에 따른 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템을 이용한 서비스 방법을 구현하게 되는 것이다.The procedure recommendation step S5 is a step of selecting an image having the best aesthetic grade among the style images evaluated through the virtual experience class evaluation step S4 as described above, And recommending semi-permanent make-up treatment to the target customer, and it is preferable that the semi-permanent make-up treatment recommendation system based on the virtual experience according to the present invention through a series of method steps Method.

1 : 객체인식 스캐너 2 : 가상체험 어플리케이션
3 : 클라이언트 서버 21 : 이미지 수신부
22 : 얼굴계측값 추출부 23 : 눈계측값 추출부
24 : 눈썹계측값 추출부 25 : 입술계측값 추출부
26 : 객체정보 통합처리부 27 : 이미지 등급평가부
28 : 반영구화장 추천 제공부1: Object Recognition Scanner 2: Virtual Experience Application
3: client server 21: image receiving unit
22: face measurement value extraction unit 23: eye measurement value extraction unit
24: Eyebrow measurement value extraction unit 25: Lip measurement value extraction unit
26: object information integration processing unit 27: image rating evaluation unit
28: semi-permanent makeup recommendation

Claims (5)

반영구화장 대상고객의 얼굴이미지를 3D 입체형상 이미지로 스캔 처리하는 객체 인식스캐너(1)를 포함하고;
상기 스캔 된 3D 입체영상 이미지 데이터를 전송받아, 가상체험 어플리케이션(2)에 의해 반영구화장 시술의 결과상태를 가상으로 체험해 볼 수 있도록 한 클라이언트서버(3)로 구축하되;
상기 가상체험 어플리케이션(2)은, 객체 인식스캐너로부터 3D얼굴 입체영상이미지를 전송받는 이미지 수신부(21);
상기 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 얼굴형태 계측값을 산출하는 얼굴계측값 추출부(22);
상기 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 눈 모양과, 그 눈모양에 대한 계측값을 항목별 구분으로 산출하는 눈계측값 추출부(23);
상기 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 눈썹모양과, 그 눈 눈썹모양에 대한 계측값을 항목별 구분으로 산출하는 눈썹계측값 추출부(24);
상기 3D얼굴 입체 영상이미지를 대상으로 X,Y 좌표값에 의해 입술모양과, 그 눈 입술모양에 대한 계측값을 항목별 구분으로 산출하는 입술계측값 추출부(25);
상기 얼굴계측값 추출부와, 눈계측값 추출부와, 눈썹계측값 추출부와, 입술계측값 추출부로부터 추출된 각 얼굴객체에 대한 계측값을 통합하여, 고객의 얼굴 스타일을 판독하는 객체정보 통합처리부(26);
상기 객체정보 통합처리부(6)에 의해 판독된 고객얼굴에 대한 스타일 이미지를 대상으로, 메이크업 매칭처리작업을 행하고, 매칭처리된 스타일 이미지에 대하여 수치값에 의해 미적 등급을 부여하는 이미지 등급평가부(27);
상기 이미지 등급평가부(27)를 통해 평가된 스타일 이미지를 시술대상 이미지로 출력 선택하고, 선택된 이미지에 대한 시술방법을 선택 추천하는 반영구화장 추천제공부(28)로 이루어짐을 특징으로 하는 고객 맞춤형 반영구화장 시술 추천시스템.
And an object recognition scanner (1) for scanning the face image of the customer for semi-permanent makeup to a 3D stereoscopic shape image;
Constructing a client server (3) that receives the scanned 3D stereoscopic image data and can experience a virtual state of a result state of the semi-permanent makeup operation by the virtual experience application (2);
The virtual experience application (2) includes an image receiving unit (21) for receiving a 3D face stereoscopic image from the object recognition scanner;
A face measurement value extraction unit (22) for calculating a face type measurement value based on X, Y coordinate values of the 3D face stereoscopic image;
An eye measurement value extraction unit (23) for calculating an eye shape based on the X and Y coordinate values of the 3D stereoscopic image and a measurement value of the eye shape by item;
A eyebrow measurement value extraction unit 24 for calculating the eyebrow shape and the measurement value of the eyebrow shape by the X and Y coordinate values with respect to the 3D face stereoscopic image in terms of items;
A lip measurement value extraction unit (25) for calculating the lip shape and the measurement value of the shape of the eye lips based on the X, Y coordinate values of the 3D face stereoscopic image in terms of items;
The face measurement value extraction unit, the eye measurement value extraction unit, the eyebrow measurement value extraction unit, and the measurement values of the respective face objects extracted from the lip measurement value extraction unit, An integration processing unit 26;
An image rating evaluating unit for performing a makeup matching processing operation on the style image of the customer face read by the object information integrating unit 6 and giving an aesthetic grade to the matching style image by numerical values 27);
And a semi-permanent makeup recommendation providing unit (28) for selectively outputting a style image evaluated through the image rating evaluating unit (27) as a procedure image to be selected and recommending a procedure for the selected image. Cosmetic procedure recommendation system.
제 1항에 있어서;
상기 객체정보 통합처리부(26)는, 3D얼굴 입체 영상이미지로부터 추출된 얼굴계측값과, 눈계측값과, 눈썹계측값과. 입술계측값을 통합하여 수집하는 얼굴객체 계측점 수집모드(261)와;
상기 얼굴객체 계측점 수집모드을 통해 수집된 얼굴객체에 대한 위치와 거리를 탐지하여, 그들 얼굴객체간 상관관계를 통합 데이터로 추출하는 얼룩객체 위치판독모드(262)와;
상기 판독된 얼굴객체간 상관관계 데이터를 저장관리하는 얼굴객체정보 저장모드(263)로 이루어짐을 특징으로 하는 고객 맞춤형 반영구화장 시술 추천시스템.
The method of claim 1, further comprising:
The object information integration processing unit 26 integrates face measurement values extracted from the 3D face stereoscopic image, eye measurement values, eyebrow measurement values, A face object measurement point collection mode 261 for collecting and collecting lip measurement values;
A smear object position reading mode 262 for detecting positions and distances of the face objects collected through the face object measurement point collection mode and extracting the correlation between the face objects as integrated data;
And a face object information storage mode (263) for storing and managing correlation data between the read face objects.
제 1항에 있어서;
상기 이미지 등급평가부(27)는, 고객 기호에 맞는 화장기법을 선택하는 화장기법 선택모드(271)와;
반영구화장 시술 결과에 대한 샘플이미지 데이터를 축척 보관하는 샘플 데이터 베이스(272)와;
상기 선택된 화장기법과, 축척된 샘플이미지 데이터를 객체정보 통합처리부에 의해 판독된 고객얼굴 스타일 이미지에 매칭시켜 시술 결과에 대한 가상체험 작업을 수행하고, 가상체험에 의해 매칭된 스타일 이미지에 대하여, 수치 값에 의한 미적등급을 부여하는 스타일 가상체험 모드(273)와;
상기 가상체험 작업에 대한 스타일 이미지 매칭결과정보를 저장관리하는 체험정보 저장모드(274)로 이루어짐을 특징으로 하는 고객 맞춤형 반영구화장 시술 추천시스템.
The method of claim 1, further comprising:
The image rating evaluating section 27 includes a makeup technique selection mode 271 for selecting a makeup technique suitable for a customer's taste;
A sample database 272 for accumulating sample image data of the semi-permanent makeup operation result;
The selected makeup technique and the accumulated sample image data are matched to the customer's face style image read by the object information integration processing unit to perform a virtual experience work on the result of the operation, A style virtual experience mode 273 for giving an aesthetic grade by a value;
And an experience information storage mode (274) for storing and managing style image matching result information for the virtual experience work.
제 1항에 있어서;
상기 반영구화장 추천제공부(28)는, 체험정보 저장모드(274)로 저정된 스타일 이미지 매칭결과정보 중 어느 하나의 스타일 이미지를 선택하는 스타일 최종 선택모드(281)와;
상기 선택된 스타일 이미지에 대한 시술방법을 선택하는, 시술방법 선택모드(282)로 이루어짐을 특징으로 하는 가상체험을 기반으로 하는 고객 맞춤형 반영구화장 시술 추천시스템.
The method of claim 1, further comprising:
The semi-permanent makeup recommendation provisioning unit 28 includes a style final selection mode 281 for selecting any one style image among the style image matching result information stored in the experience information storage mode 274;
And a procedure selection mode (282) for selecting a procedure for the selected style image. The recommendation system according to claim 22, wherein the recommendation method is based on a virtual experience.
객체 인식스캐너(1)를 이용, 시술 대상고객의 얼굴을 스캔하여, 3D얼굴 입체영상이미지를 생성하고, 생성된 3D얼굴 입체영상이미지를 데이터 정보로 변환하여, 그 데이터 정보를 가상체험 어플리케이션(2)에 마련된, 이미지 수신부(21)로 전송하는 객체이미지 추출단계(S1);
상기 수신된 3D얼굴 입체 영상이미지를 대상으로, 가상체험 어플리케이션(2)의 얼굴계측값 추출부(22)를 통해 얼굴형태에 대한 계측 정보값을 산출하고, 눈계측값 추출부(23)를 통해 눈 형태에 대한 계측 정보값을 산출하며, 눈썹계측값 추출부(24)를 통해 눈썹 형태에 대한 계측 정보값을 산출하고, 입술계측값 추출부(25)를 통해 입술형태에 대한 계측 정보값을 산출하는 얼굴 객체이미지 계측값 추출단계(S2);
상기 얼굴형태에 대한 계측 정보값과, 눈형태에 대한 계측 정보값과, 눈썹 형태에 대한 계측 정보값과, 입술형태에 대한 계측 정보값을 객체정보 통합처리부(26)에 대입하여, 대상고객의 얼굴 이미지 대한 전체적인 특징을 판독처리하는 추출객체정보 통합처리단계(S3);
또한, 상기 판독처리된 대상고객의 특징적 얼굴이미지를 대상으로, 메이크업 스타일을 가상체험 형태로 매칭시켜, 최적의 매칭 스타일 이미지를 추출하고, 추출된 스타일 이미지에 대하여, 설정된 수치 값에 의해 미적등급을 부여하는 가상체험 등급평가단계(S4)
또한, 상기 가상체험 등급평가단계(S4)를 통해 평가된 스타일 이미지 중, 미적등급이 가장 우수한 이미지를 선택하고, 그 선택 스타일이미지에 대한 최종 결과정보를 추출하여, 대상고객에게 반영구화장 시술을 추천하는 시술추천단계(S5)를 통해 이루어짐을 특징으로 하는 고객 맞춤형 반영구화장 시술 추천시스템을 이용한 서비스 방법.The face of the customer to be treated is scanned by using the object recognition scanner 1 to generate a 3D face stereoscopic image, the converted 3D stereoscopic image is converted into data information, and the data information is stored in the virtual experience application 2 An object image extracting step (S1) for extracting an object image, which is provided to the image receiving unit (21);
The measurement information value for the face shape is calculated through the face measurement value extraction unit 22 of the virtual experience application 2 on the received 3D face stereoscopic image, and the eye measurement value extraction unit 23 The measurement information value for the eye shape is calculated, the measurement information value for the eyebrow shape is calculated through the eyebrow measurement value extraction unit 24, and the measurement information value for the lip type is calculated through the lip measurement value extraction unit 25 A face object image measurement value extraction step S2 for calculating;
The measurement information value for the face shape, the measurement information value for the eye shape, the measurement information value for the eyebrow shape, and the measurement information value for the lip shape to the object information integration processing unit 26, Extracting object information integrating processing step (S3) for reading out and processing the overall characteristic of the face image;
In addition, an optimum matching style image is extracted by matching the make-up style with a virtual experience form with respect to the characteristic face image of the target customer that has been subjected to the read processing, and an aesthetic grade is determined with respect to the extracted style image The virtual experience class evaluation step (S4)
In addition, among the style images evaluated through the virtual experience class evaluation step (S4), an image having the best aesthetic grade is selected, the final result information about the selected style image is extracted, and a semi-permanent makeup operation is recommended And a recommendation step (S5) of recommending a semi-permanent makeup operation.
KR1020170040680A 2017-03-30 2017-03-30 Customized semi-permanent make-up recommendation system based on virtual experience and its service method KR20180110842A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170040680A KR20180110842A (en) 2017-03-30 2017-03-30 Customized semi-permanent make-up recommendation system based on virtual experience and its service method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170040680A KR20180110842A (en) 2017-03-30 2017-03-30 Customized semi-permanent make-up recommendation system based on virtual experience and its service method

Publications (1)

Publication Number Publication Date
KR20180110842A true KR20180110842A (en) 2018-10-11

Family

ID=63865676

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170040680A KR20180110842A (en) 2017-03-30 2017-03-30 Customized semi-permanent make-up recommendation system based on virtual experience and its service method

Country Status (1)

Country Link
KR (1) KR20180110842A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110069716A (en) * 2019-04-29 2019-07-30 清华大学深圳研究生院 A kind of makeups recommended method, system and computer readable storage medium
CN111476622A (en) * 2019-11-21 2020-07-31 北京沃东天骏信息技术有限公司 Article pushing method and device and computer readable storage medium
CN112819718A (en) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 Image processing method and device, electronic device and storage medium
KR102292629B1 (en) * 2021-01-15 2021-08-23 주식회사 블라썸클라우드 System and method for providing beauty contents using virtual simulation contents

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110069716A (en) * 2019-04-29 2019-07-30 清华大学深圳研究生院 A kind of makeups recommended method, system and computer readable storage medium
CN110069716B (en) * 2019-04-29 2022-03-18 清华大学深圳研究生院 Beautiful makeup recommendation method and system and computer-readable storage medium
CN111476622A (en) * 2019-11-21 2020-07-31 北京沃东天骏信息技术有限公司 Article pushing method and device and computer readable storage medium
KR102292629B1 (en) * 2021-01-15 2021-08-23 주식회사 블라썸클라우드 System and method for providing beauty contents using virtual simulation contents
CN112819718A (en) * 2021-02-01 2021-05-18 深圳市商汤科技有限公司 Image processing method and device, electronic device and storage medium

Similar Documents

Publication Publication Date Title
JP5231685B1 (en) Facial impression analysis method, beauty counseling method and face image generation method
US11617633B2 (en) Method and system for predicting shape of human body after treatment
KR20180110842A (en) Customized semi-permanent make-up recommendation system based on virtual experience and its service method
CN107506559B (en) Star face shaping makeup recommendation method and device based on face similarity analysis
CN110110118A (en) Dressing recommended method, device, storage medium and mobile terminal
KR102014660B1 (en) Improved age modelling method
JP6566373B1 (en) Treatment support system
KR102043626B1 (en) Deep learning-based virtual plastic surgery device for providing virtual plastic surgery image customers by analyzing big data on before and after image of plurality of person who has experience of a plastic surgery
JP2021128807A (en) Evaluation method, evaluation device, and evaluation program
CN109409199A (en) Micro- expression training method, device, storage medium and electronic equipment
US9330300B1 (en) Systems and methods of analyzing images
JP5651385B2 (en) Face evaluation method
KR20140006138A (en) Virtual cosmetic surgery device and virtual cosmetic surgery system thereof
CN109310475A (en) System and method for automatically generating facial repair capsule and application scheme to solve the facial deviation of observable
JP7095849B1 (en) Eyewear virtual fitting system, eyewear selection system, eyewear fitting system and eyewear classification system
KR102239575B1 (en) Apparatus and Method for skin condition diagnosis
KR102267688B1 (en) How to run an application that improves the accuracy of hair self-diagnosis
KR101897512B1 (en) Face Fit Eyebrow tattoo system using 3D Face Recognition Scanner
KR20220156034A (en) How to identify dendritic pores
US20210307498A1 (en) System and method for creating customized brushes
Leta et al. A study of the facial aging-a multidisciplinary approach
CN106030659A (en) Aging analysis method and aging analysis device
WO2022243498A1 (en) Computer-based body part analysis methods and systems
WO2018130291A1 (en) A system for manufacturing personalized products by means of additive manufacturing doing an image-based recognition using electronic devices with a single camera
KR20230080940A (en) Recommendation system and procedure method for semi-permanent make-up of eyebrow using machine learning

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment