KR101920734B1 - A method of self-skin care management based on augmented reality using a portable terminal - Google Patents

A method of self-skin care management based on augmented reality using a portable terminal Download PDF

Info

Publication number
KR101920734B1
KR101920734B1 KR1020180009915A KR20180009915A KR101920734B1 KR 101920734 B1 KR101920734 B1 KR 101920734B1 KR 1020180009915 A KR1020180009915 A KR 1020180009915A KR 20180009915 A KR20180009915 A KR 20180009915A KR 101920734 B1 KR101920734 B1 KR 101920734B1
Authority
KR
South Korea
Prior art keywords
skin
image
module
guide image
portable terminal
Prior art date
Application number
KR1020180009915A
Other languages
Korean (ko)
Inventor
김종민
Original Assignee
주식회사 메디퍼스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 메디퍼스 filed Critical 주식회사 메디퍼스
Priority to KR1020180009915A priority Critical patent/KR101920734B1/en
Application granted granted Critical
Publication of KR101920734B1 publication Critical patent/KR101920734B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis

Abstract

The present invention relates to a method of self-skin care management based on augmented reality using a portable terminal. A skin care procedure area in which wrinkles, freckles, pimple or the like exist in various forms is extracted and is transformed in a virtual guide image, and then a virtual guide image overlaps a real skin care procedure area image and is outputted by mapping in one image. The method of self-skin care management based on augmented reality using a portable terminal comprises: a step (S1) of extracting a procedure area to perform self-skin care procedure at a more accurate location by deleting a guide image of a location which corresponds to an area in which skin care procedure is performed by using a skin care device; a step (S2) of extracting an augmented reality image; a step (S3) of performing a skin care procedure with a skin care device (200); and a step (S4) of deleting a guide image (20).

Description

휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법{A method of self-skin care management based on augmented reality using a portable terminal}[0001] The present invention relates to a self-skin care management based on augmented reality using a portable terminal,

본 발명은 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법에 관련되며, 보다 상세하게는 주름, 기미, 여드름 등이 다양한 형태로 존재하는 피부미용 시술영역을 추출하여 이를 가상의 가이드이미지로 변환하고, 가상의 가이드이미지를 현실의 피미용시술부 이미지에 겹쳐서 하나의 영상으로 맵핑하여 출력한 후, 피부미용기를 이용하여 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지를 실시간으로 삭제처리하는 과정을 거쳐 보다 정확한 위치에 전문성 있는 셀프 미용시술서비스를 제공하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법에 관한 것이다.The present invention relates to an augmented reality-based self-skin care management method using a portable terminal, and more particularly, to extracting a skin aesthetic treatment area in which wrinkles, stains, acne, etc. exist in various forms and converts it into a virtual guide image A virtual guide image is superimposed on the image of the actual beauty treatment unit and is mapped to one image and outputted, and then the guide image of the position corresponding to the area where the beauty treatment is performed is deleted in real time The present invention relates to an augmented reality-based self-skin care management method using a portable terminal that provides a specialized self-treatment service at a more precise position through a mobile terminal.

남여노소 외모에 대한 관심도가 높아지면서 건강하고 아름다운 피부를 유지하기 위해 기능성 화장품을 선호함과 더불어 주기적인 피부관리를 위해 전문 피부샵을 이용하고 있으나, 피부샵 이용에 따른 비용부담 및 시간적 제약으로 인해 근자에는 언제 어디서든 간편하게 피부 마사지할 수 있는 셀프 미용시술 수요가 증가하는 추세이다.In order to maintain healthy and beautiful skin with increasing interest in unisex and younger appearance, functional cosmetics are prefered, and professional skin shop is used for periodic skin care, but due to cost burden and time constraint In recent years, the demand for self-cosmetic treatment which can easily massage skin anytime and anywhere is increasing trend.

하지만, 대부분의 셀프 미용시술방법은 사용자가 피부미용기를 원하는 시술부위에 문지르는 방식으로 이루어지고 있으나, 대부분의 사용자가 피부미용에 대한 전문적인 지식이 없는 상태에서 진행하다 보니 과도한 피부자극으로 오히려 피부에 악영향을 미치는 사례가 빈번하게 발생되고 있다.However, most of the self-cosmetic procedures are performed by rubbing the skin beauty device on the desired area of the operation, but most of the users proceed without the expert knowledge of skin beauty, Adverse effects are frequently encountered.

이에 종래에 개시된 특허 공개특허 10-2017-108529호에서, 마사지를 할 수 있는 기능성화장품에 있어서, 어플리케이션(어플, 앱; Application)에 의해 제어되는 스마트모바일(Smart Mobile)기와, 상기 스마트모바일(Smart Mobile)기의 구성된 어플리케이션(어플, 앱; Application)을 통해 전류의 세기 또는 펄스의 변위를 무선으로 제어할 수 있도록 외부 충전기로부터 연결되어 전류를 충전 받는 충전부와 블루투스(Bluetooth)장치인 블루투스(Bluetooth) 접속 부를 실장하고 피부조사부가 되는 관통 구에 LED광원 부가 결합되며 배면으로는 LED 발광 부가 그리고 회로기판에 실장 된 복수의 LED 칩들을 구비하고 손으로 잡는 손잡이 부 내부에 전류 증폭회로부와 LED구동회로 부가 외주 면에는 동작스위치가 설치된 LED프로브(Light emitting diodeprobe)와, 상기 LED프로브(Light emitting diode probe)가 탈부착 가능하게 대응하는 결합구조를 가지고 뚜껑에 안착 홈이 형성된 화장품 용기와, 상기 화장품 용기에 광 조사(Irradiation)에 도움이 되는 기능성제품이 수용된 화장품에 대한 기술이 선 공개된바 있다.Patent Document 10-2017-108529 discloses a functional cosmetics capable of massaging, a smart mobile device controlled by an application (application, an application), and a smart mobile device (Bluetooth) device, which is connected to an external charger to charge the current, and a Bluetooth (Bluetooth) device so that the current intensity or the displacement of the pulse can be controlled wirelessly through a configured application (application, And a plurality of LED chips mounted on the circuit board, wherein the LED light source unit is coupled to the LED light source unit through a through hole serving as a skin irradiation unit, and a current amplification circuit unit and an LED driver circuit unit A light emitting diode (LED) probe having an operation switch on its outer surface, a light emitting diode (LED) The cosmetic container and has a coupling structure in which a removable lid secured to the corresponding groove is formed, the technology for the light irradiation cosmetic accommodated in the functional product to help (Irradiation) in the cosmetic vessel line is an open bar.

그러나, 상기 종래기술은 어플리케이션(어플, 앱; Application)을 자신의 피부타입에 맞게 세팅하고 스마트모바일(Smart Mobile)기의 디스플레이의 사용화면에 따라 LED프로브를 이용하여 피부 관리하는 것이나, 얼굴의 경우, 주름, 기미, 여드름 등이 다양한 형태로 존재하므로 피부 부위별 맞춤관리가 불가능하고, 특히 시술 후 피부상태 등을 사진으로 찍어 피부의 변화를 확인하는 선시술 후확인 방식으로 인해 피부관리를 처음 행하는 사용자의 경우 LED프로브를 이용한 미용시술 강도, 미용시술 횟수, 미용시술 시간에 대한 정보가 부족하여 시행착오를 격어야 하고, 특히 사용자 마다의 피부특성을 고려한 전문성 있는 셀프 미용시술서비스를 제공하지 못하는 폐단이 따랐다.However, in the related art, the application of the application (application, application) is set according to the skin type of the user and the skin is managed using the LED probe according to the screen of the display of the smart mobile device, , Wrinkles, spots, acne, etc., can not be customized according to the skin area. Especially, it is possible to check the change of the skin by photographing the skin condition after the procedure. In case of the user, trial and error should be given due to lack of information on the intensity of beauty treatment using the LED probe, the number of times of beauty treatment, and the time of cosmetic treatment. Especially, .

이에 따라 본 발명은 상기한 문제점을 해결하기 위해 착안 된 것으로서, 주름, 기미, 여드름 등이 다양한 형태로 존재하는 피부미용 시술영역을 추출하여 이를 가상의 가이드이미지로 변환하고, 가상의 가이드이미지를 현실의 피미용시술부 이미지에 겹쳐서 하나의 영상으로 맵핑하여 출력한 후, 피부미용기를 이용하여 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지를 실시간으로 삭제처리하는 과정을 거쳐 보다 정확한 위치에 셀프 미용시술이 이루어지도록 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법을 제공하는 것에 그 목적이 있다.SUMMARY OF THE INVENTION Accordingly, the present invention has been made to solve the above problems, and it is an object of the present invention to extract a skin cosmetic treatment area in which various types of wrinkles, stains, acne, etc. exist in various forms and convert it into a virtual guide image, And then output the resultant image as a single image. Then, using the skin beauty device, the guide image corresponding to the region where the cosmetic treatment is performed is deleted in real time, and the self-beauty And to provide a self-skinning beauty management method based on an augmented reality using a portable terminal for performing a procedure.

이러한 목적을 달성하기 위해 본 발명의 특징은, According to an aspect of the present invention,

휴대용 단말기(100)의 카메라로 촬영된 피미용시술부 이미지(10)를 영상처리하여 시술영역을 추출하는 단계(S1); 상기 추출된 시술영역을 가이드이미지(20)로 변환하고, 가상의 가이드이미지(20)를 현실의 피미용시술부 이미지(10)에 겹쳐서 하나의 영상으로 맵핑하여 휴대용 단말기(100) 화면을 통하여 실시간으로 증강현실 영상을 출력하는 단계(S2); 상기 증강현실 영상의 가이드이미지(20)와 대응하는 피미용시술부를 피부미용기(200)로 미용시술하는 단계(S3); 상기 미용시술 중에 휴대용 단말기(100) 카메라에서 촬영된 이미지를 실시간으로 영상처리하면서 피부미용기(200) 위치를 검출하여, 피부미용기(200)에 의해 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지(20)가 삭제처리되는 단계(S4);를 포함하여 이루어지는 것을 특징으로 한다.A step (S1) of image-processing the image 10 of the patient's body image taken by the camera of the portable terminal 100 and extracting a procedure area; The extracted operation area is converted into a guide image 20 and the virtual guide image 20 is superimposed on the actual operation part image 10 so as to be mapped to one image and displayed on the screen of the portable terminal 100 A step (S2) of outputting the augmented reality image to the terminal; (S3) cosmetic treatment of the beauty treatment unit corresponding to the guide image (20) of the augmented reality image with the skin beauty device (200); During the beauty treatment, the position of the skin beautifier 200 is detected while real-time image processing of the image taken by the camera of the portable terminal 100 is performed, and a guide image at a position corresponding to the region where the beauty treatment is performed by the skin beautifier 200 (S4) the deletion processing is performed on the first data (20).

이때, 상기 가이드이미지(20)는 피미용시술부 시술영역 상태에 따라 선, 점, 면 중 어느 하나 이상의 형태로 표시되는 것을 특징으로 한다.At this time, the guide image 20 is displayed in the form of a line, a point, or a surface according to the state of the operation area of the operation part.

또한, 상기 가이드이미지(20)는 선 굵기, 색상, 명도 및 채도 중 어느 하나이상의 설정에 의해 미용시술 강도, 미용시술 횟수, 미용시술 시간에 대한 시술정보가 표시되는 것을 특징으로 한다.In addition, the guide image 20 is characterized in that the procedure intensity, the number of cosmetic procedures, and the procedure information on the cosmetic procedure time are displayed by setting at least one of line thickness, hue, brightness and saturation.

또한, 상기 피부미용기(200)에는 선집속 초음파 트랜스듀서 모듈, 점집속 초음파 트랜스듀서 모듈, 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈 중 어느 하나의 모듈(220)이 택일적으로 교체적용되는 것을 특징으로 한다.In addition, the skin beauty device 200 may be provided with a module 220 of any one of an ultrasonic transducer module in an anterior movement state, an ultrasound transducer module in an intellect, an ultrasound massage module, an infrared stimulating module, an ultraviolet stimulating module, And is applied alternately.

또한, 상기 피부미용기(200)는 미용시술 중 실시간으로 위치 추적되도록 표식부(210)가 구비되고, 표식부(210)에 의해 피부미용기(200) 이동경로를 추출하여 미용시술여부를 판단하도록 구비되는 것을 특징으로 한다.In addition, the skin beauty device 200 includes a marking unit 210 for tracking the position of the skin beauty device 200 in real time during the beauty treatment process, and a movement path of the skin beauty device 200 is extracted by the marking unit 210, .

또한, 상기 피부미용기(200)는 모듈(220)의 인피던스 또는 소비전류 변화를 검출하거나, 모듈(220)에 구비되는 터치센서를 통하여 피미용시술부와의 접촉여부를 검출하고, 모듈(220)이 피미용시술부에 접촉된 것으로 검출된 조건에서 피부미용기(200)의 이동경로를 미용시술 중으로 판단하여 가이드이미지(20)가 삭제처리되도록 구비되는 것을 특징으로 한다.The skin beauty device 200 detects the change in impedance or consumption current of the module 220 or detects contact with the operation part through the touch sensor provided in the module 220, And the guide image 20 is erased by judging that the path of the skin beautifier 200 is in the course of beauty treatment under the condition detected as being in contact with the user.

또한, 상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되어, 피부미용기(200)의 미용시술 이동경로상에 위치된 가이드이미지(20)의 시술정보에 따라 모듈(220) 출력이 자동 조절되는 것을 특징으로 한다.The skin beautifier 200 may be synchronized with the portable terminal 100 in a wired or wireless communication manner and may be connected to the module 220 in accordance with the procedure information of the guide image 20 located on the cosmetic procedure moving path of the skin beautifier 200 ) Output is automatically adjusted.

또한, 상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되고, 상기 가이드이미지(20)의 시술정보에는 모듈정보가 함께 지정되어, 미용시술 중에 가이드이미지(20)에 지정된 모듈정보와 피부미용기(200)에 장착된 모듈(220)이 일치될 경우에 해당 가이드이미지(20)가 삭제처리되도록 구비되는 것을 특징으로 한다.In addition, the skin beauty machine 200 is synchronized with the portable terminal 100 by wired or wireless communication. Module information is also assigned to the procedure information of the guide image 20, When the module information is matched with the module 220 mounted on the skin beauty machine 200, the guide image 20 is deleted.

또한, 상기 휴대용 단말기(100)는 미용시술 전, 후 피미용시술부 정보 및 미용시술 정보를 사용자 정보와 함께 서버에 저장되고, 미용시술 정보에 따른 미용시술 전, 후 피미용시술부 이미지를 판독정보로 이용하여 가이드이미지(20)를 통하여 제공되는 시술정보가 업데이트되도록 구비되는 것을 특징으로 한다.In addition, the portable terminal 100 may store information on the operation part before and after the cosmetic operation and the cosmetic operation information together with the user information in the server, and read the image of the operation part before and after the cosmetic operation according to the cosmetic operation information And the procedure information provided through the guide image 20 is updated using the information.

이상의 구성 및 작용에 의하면, 본 발명은 주름, 기미, 여드름 등이 다양한 형태로 존재하는 피부미용 시술영역을 추출하여 이를 가상의 가이드이미지로 변환하고, 가상의 가이드이미지를 현실의 피미용시술부 이미지에 겹쳐서 하나의 영상으로 맵핑하여 출력한 후, 피부미용기를 이용하여 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지를 실시간으로 삭제처리하는 과정을 거쳐 보다 정확한 위치에 셀프 미용시술이 이루어지는 효과가 있다.According to the above-described configuration and operation, the present invention extracts a skin cosmetic treatment area in which wrinkles, stains, acne and the like exist in various forms, converts it into a virtual guide image, and implements a virtual guide image in real- And thereafter, the guide image of the position corresponding to the region where the beauty treatment is performed is deleted in real time using the skin beauty device, thereby performing self-cosmetic treatment at a more accurate position .

도 1은 본 발명의 일실시예에 따른 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법을 개력적으로 나타내는 블록도.
도 2 내지 3은 본 발명의 일실시예에 따른 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법의 증강현실 영상을 출력하는 단계를 나타내는 구성도.
도 4는 본 발명의 일실시예에 따른 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법의 가이드이미지가 삭제처리되는 단계를 나타내는 구성도.FIG. 1 is a block diagram illustrating a method for managing a self-skin beauty using an augmented reality using a portable terminal according to an embodiment of the present invention.
2 to 3 are diagrams illustrating a step of outputting an augmented reality image of a method for managing a skin aesthetic based on an augmented reality using a portable terminal according to an embodiment of the present invention.
FIG. 4 is a diagram illustrating a step of deleting a guide image of a method for managing a self-skin beauty based on an augmented reality using a portable terminal according to an embodiment of the present invention. FIG.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명은 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법에 관련되며, 이때 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법은 여드름 등이 다양한 형태로 존재하는 피부미용 시술영역을 추출하여 이를 가상의 가이드이미지로 변환하고, 가상의 가이드이미지를 현실의 피미용시술부 이미지에 겹쳐서 하나의 영상으로 맵핑하여 출력한 후, 피부미용기를 이용하여 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지를 실시간으로 삭제처리하는 과정을 거쳐 보다 정확한 위치에 셀프 미용시술이 이루어지도록 하기 위해 시술영역을 추출하는 단계(S1), 증강현실 영상을 출력하는 단계(S2), 피부미용기(200)로 미용시술하는 단계(S3), 가이드이미지(20)가 삭제처리되는 단계(S4)를 포함하여 주요구성으로 이루어진다. The present invention relates to an augmented reality-based self-skin care management method using a portable terminal, wherein augmented reality-based self-skin care management method using a portable terminal extracts a skin care treatment area in which various types of acne are present, After converting the virtual guide image into a virtual guide image, the virtual guide image is superimposed on the real image of the beauty treatment unit and is mapped to one image, and then outputted. Then, using the skin beauty machine, (S2) of extracting the augmented reality image (S2), and a skin beauty device (200) as a cosmetic treatment device (Step S3), and step (S4) in which the guide image 20 is deleted, All.

1. 시술영역을 추출하는 단계(S1)1. Extracting a procedure area (S1)

본 발명에 따른 시술영역을 추출하는 단계(S1)는, 휴대용 단말기(100)의 카메라로 촬영된 피미용시술부 이미지(10)를 영상처리하여 시술영역을 추출하는 단계이다. 일예로서, 휴대용 단말기(100)에서 미용시술 어플리케이션을 실행 후, 카메라를 이용하여 사용자 얼굴을 촬영하고, 촬영된 영상을 분석하여 사용자 얼굴에 존재하는 주름, 기미, 여드름 등의 시술부위 정보를 추출하게 된다. The step S1 of extracting the operation area according to the present invention is a step of extracting a procedure area by image-processing the image 10 of a patient's operation section taken by a camera of the portable terminal 100. [ As an example, after executing a cosmetic procedure application in the portable terminal 100, a user's face is photographed using a camera, and the photographed image is analyzed to extract operation site information such as wrinkles, stains, acne, do.

이때 영상 분석방법은, 휴대용 단말기(100) 어플리케이션의 시술영역 추출을 위한 촬영 가이드 기능의 안내에 따라 눈, 코, 입을 일치시키고 정면 얼굴을 정확하게 촬영하고, 촬영된 영상을 명도, 대비 등의 색 보정 및 색 변환, 테두리 검출과 같은 디지털 영상 처리 기법을 통하여 주름, 기미, 여드름 등으로 예상되는 부위를 강조하여 표시함으로써 시술부위 정보를 추출하며, 디지털 영상 처리된 이미지와 어플리케이션에 저장된 임상 데이터를 이미지 매칭하여 주름, 기미, 여드름 중 어떤 시술에 해당되는지 분석하게 된다. 그리고 지속적인 미용시술과정을 거치면서 추출된 사용자의 미용시술 전, 후 영상을 지속적으로 임상 데이터에 추가하고, 빅데이터 분석 기술을 활용하여 보다 정확한 시술부위 정보추출 기술 및 가이드 기술이 업데이트되도록 구비된다. At this time, the image analysis method is a method in which the eyes, nose, and mouth are aligned according to the guidance of the photographing guide function for extracting the procedure area of the portable terminal 100 application, the front face is accurately photographed and the photographed image is subjected to color correction And highlighting and highlighting areas expected to be caused by wrinkles, stains, acne, etc. through digital image processing techniques such as color conversion and border detection, extracts the procedure site information, and stores the clinical image data stored in the digital image- And it analyzes whether it is a wrinkle, a stain or an acne. After the beauty treatment process is continuously performed, the extracted image is continuously added to the clinical data before and after the beauty treatment, and the technique of extracting the detailed operation part information and the guide technology are updated using the big data analysis technique.

한편, 휴대용 단말기는 중앙서버와 연결되어 빅데이터 관리 및 임상 데이터를 포함하는 미용시술 가이드 데이터가 주기적으로 업데이트 된다.Meanwhile, the portable terminal is connected to the central server, and the beauty instruction guide data including the big data management and the clinical data is periodically updated.

그리고, 상기 추출된 시술부위 정보는 피미용시술부 이미지의 기준점 즉, 눈, 코, 입, 눈섭, 귀를 포함하는 현실의 피미용시술부 이미지(10) 상의 특정 지점을 기준으로 시술부위 정보가 생성되면서 안면추적(Face-tracking) 방식을 적용하여 후술하는 피부미용기(200)로 미용시술하는 단계(S3)에서 사용자의 얼굴을 움직이더라도 시술부위가 후술하는 가이드이미지(20) 형태로 정확하게 표시된다.The extracted operation site information is used to display the operation site information on the basis of a specific point on the actual operation part image 10 including the reference points of the image of the operation part, that is, eyes, nose, mouth, Even if the face of the user is moved in step S3 of applying cosmetics to the skin beauty machine 200 to be described later by applying the face-tracking method, the operation part is accurately displayed in the form of the guide image 20 to be described later .

한편, 어플리케이션을 실행한 후에는 사용자의 연령, 피부타입(건성, 지성, 복합형) 및 피부에 영향을 미치는 요소(음주량, 수분흡수량, 1일 평균 햇볕노출시간 등)를 추가적으로 기입하여 후술하는 시술정보 업데이트시 미용시술 개선 요소정보로 활용된다.On the other hand, after the application is executed, it is necessary to additionally fill in the age, skin type (dryness, intelligence, complex type) of the user and factors influencing the skin (amount of drinking water, water absorption amount, It is used as information to improve cosmetic procedures when updating information.

2. 증강현실 영상을 출력하는 단계(S2)2. outputting the augmented reality image (S2)

본 발명에 따른 증강현실 영상을 출력하는 단계(S2)는 상기 추출된 시술영역을 가이드이미지(20)로 변환하고, 가상의 가이드이미지(20)를 현실의 피미용시술부 이미지(10)에 겹쳐서 하나의 영상으로 맵핑하여 휴대용 단말기(100) 화면을 통하여 실시간으로 증강현실 영상을 출력하는 단계이다. 일예로서 도 2 내지 3과 같이 사용자 얼굴이 현실의 피미용시술부 이미지(10)로 출력되고, 현실의 피미용시술부 이미지(10) 상에 가상의 가이드이미지(20)가 겹쳐서 증강현실 영상으로 출력된다.The step S2 of outputting the augmented reality image according to the present invention converts the extracted operation area into the guide image 20 and superimposes the virtual guide image 20 on the actual operation part image 10 And outputs the augmented reality image through the screen of the portable terminal 100 in real time. For example, as shown in FIGS. 2 and 3, a user's face is output to a realistic facial image 10, a virtual guide image 20 is superimposed on an actual facial image 10, .

이때, 상기 가이드이미지(20)는 피미용시술부(예컨대, 미용시술이 이루어지는 대상부위) 시술영역 상태에 따라 선, 점, 면 중 어느 하나 이상의 형태로 표시되는바, 도 2와 같이 이마 주름, 눈가 주름, 팔자주름이 선형의 가이드이미지(20)로 표시된 상태를 나타내고, 도 3은 기미, 주금깨, 피부탄력저하 부분이 면형의 가이드이미지(20)로 표시된 상태를 나타내며, 도면을 통하여 도시하지 않았지만, 여드름과 같은 시술영역은 점형의 가이드이미지(20)로 표시된다. 그리고 선형의 가이드이미지(20)는 후술하는 주름부위에 탄력을 재생하는 선집속 초음파 트랜스듀서 모듈을 이용하여 미용시술하도록 설정되고, 도 3에서 면형의 가이드이미지(20)는 점집속 초음파 트랜스듀서 모듈 또는 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈과 같이 광범위한 영역에 대한 미용시술 모듈이 장착되도록 구성된다.In this case, the guide image 20 is displayed in a form of one or more of lines, dots, and faces according to the state of the operation area of the operation part (for example, a target part where beauty treatment is performed) Eye wrinkles and wrinkles are shown as a linear guide image 20, and Fig. 3 shows a state in which a portion of the stain, the bark and skin elasticity is reduced by the planar guide image 20, A procedure area such as acne is indicated by a pointed guide image 20. The guide image 20 of the linear shape is set to be used for cosmetic surgery using an ultrasonic transducer module in the anterior movement which regenerates elasticity to be described later. In FIG. 3, the planar guide image 20 is set in the ultrasonic transducer module Or a cosmetic procedure module for a wide range of areas such as an ultrasonic massage module, an infrared stimulating module, an ultraviolet stimulating module, and an electric stimulating module.

한편, 상기 가이드이미지(20)의 표시 형태에 따른 모듈은 휴대용 단말기(100)의 어플리케이션에서 설정되고, 설정된 모듈 값과 후술하는 피부미용기(200)에 장착된 모듈(220)이 불일치하는 경우 알림 경고가 출력되거나 후술하는 S4 단계에서 미용시술이 이루어지더라도 가이드이미지(20)의 삭제처리가 이루어지는 않는 방식으로 사용자에게 시술부위에 적합한 모듈장착을 안내하게 된다. A module according to the display form of the guide image 20 is set in an application of the portable terminal 100 and is set to a notification alert when a set module value and a module 220 mounted on a skin beauty machine 200, The user is guided to install the module suitable for the treatment site in a manner that the removal process of the guide image 20 is not performed even if the beauty treatment is performed in step S4 described later.

또한, 상기 가이드이미지(20)는 선 굵기, 색상, 명도 및 채도 중 어느 하나이상의 설정에 의해 미용시술 강도, 미용시술 횟수, 미용시술 시간에 대한 시술정보가 표시된다. 즉, 도 2과 같이 굵은 주름이 형성된 시술영역은 붉은색으로 표시된 상태를 도시하고, 도 3은 시술영역이 면형 가이드이미지(20)로 표시되면서 각 시술영역별 상태에 따라 색상을 상이하게 구분되도록 표시되고, 도면을 통하여 도시하지 않았지만, 시술영역별 가이드이미지(20)의 명도 또는 채도를 상이하게 조절하여 서로 구분되도록 표시하는 구성도 가능하다.In addition, the guide image 20 displays the procedure information on the intensity of cosmetic treatment, the number of times of cosmetic treatment, and the time of cosmetic treatment by setting at least one of line thickness, hue, brightness and saturation. 3, the treatment area is displayed as a planar guide image 20, and the color is differentiated according to the condition of each treatment area. And it is also possible to display the guide image 20 for each treatment area so as to be different from each other by adjusting the brightness or the saturation of the guide image 20 though not shown in the drawings.

그리고, 여기서 가이드이미지(20)는 선 굵기, 색상, 명도 및 채도 중 어느 하나이상의 설정에 대해 시술정보가 함께 제공되는바, 일예로서 도 2와 같이 붉은색 색상으로 표시된 경우 미용시술 강도는 '강', 미용시술 횟수는 '3회', 미용시술 시간은 '60초'로 시술정보가 설정되고, 도 3처럼 목부위 푸른색상은 미용시술 강도는 '약', 미용시술 횟수는 '1회', 미용시술 시간은 '20초'로, 턱부위 보라색상은 미용시술 강도는 '중', 미용시술 횟수는 '2회', 미용시술 시간은 '40초'로 설정되어, 상기 설정된 시술정보에 적합하도록 미용시술기(200)를 수동 또는 유,무선으로 자동 설정하고, 특히 사용자가 미용시술 횟수 및 시간을 만족해야 가이드이미지(20)가 삭제처리된다. 한편, 가이드이미지(20)는 미용시술 횟수 및 시간에 따라 선 굵기, 색상, 명도 및 채도 중 어느 하나의 요소 레벨을 상이하게 표시하는 방식으로 미용시술 진행정도를 사용자에게 알려주는 구성도 가능하다.Here, the guide image 20 is provided with the procedure information for setting at least one of line thickness, color, lightness, and saturation. For example, if the color is displayed in red color as shown in FIG. 2, ', The number of times of beauty treatment is' 3 times ', the time of beauty treatment is' 60 seconds ', and the neck color of the throat is set to' about ', the beauty treatment intensity is' , The cosmetic treatment time is set to '20 seconds', the chin color is set to 'middle', the beauty treatment intensity is set to 'twice', and the cosmetic treatment time is set to '40 seconds' The beauty instructor 200 is automatically set to be manual, wired or wireless so as to be suitable for the user, and in particular, the guide image 20 is deleted after the user satisfies the number of cosmetic procedures and time. Meanwhile, the guide image 20 may be configured to notify the user of the degree of beauty treatment by displaying the element level of any one of line thickness, color, lightness, and saturation differently according to the number of cosmetic procedures and time.

한편, 상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되어, 피부미용기(200)의 미용시술 이동경로상에 위치된 가이드이미지(20)의 시술정보에 따라 모듈(220) 출력이 자동 조절된다.The skin beautifier 200 is synchronized with the portable terminal 100 by radio or wire communication so that the beautician can operate the module 220 in accordance with the procedure information of the guide image 20 positioned on the beauty treatment course of the skin beautifier 200 ) The output is automatically adjusted.

3. 피부미용기(200)로 미용시술하는 단계(S3)3. Step (S3) of cosmetic treatment with the skin beauty machine (200)

본 발명에 따른 피부미용기(200)로 미용시술하는 단계(S3)는 상기 증강현실 영상의 가이드이미지(20)와 대응하는 피미용시술부를 피부미용기(200)로 미용시술하는 단계이다. 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되고, 단부에 커넥터가 구비되어 선집속 초음파 트랜스듀서 모듈, 점집속 초음파 트랜스듀서 모듈, 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈 중 어느 하나의 모듈(220)이 택일적으로 교체적용되도록 구비되며, 각각의 모듈마다 구비된 인식부재에 의해 피부미용기(200)에서 모듈 종류를 포함하는 정보가 검출되고, 검출된 모듈 정보는 휴대용 단말기(100)로 전송되어 가이드이미지(20)에 설정된 사용 모듈(2200과의 일치여부를 판단하게 된다.The step S3 of performing beauty treatment with the skin beautifier 200 according to the present invention is a step of beauty treating the beauty cosmetic unit 200 corresponding to the guide image 20 of the augmented reality image. The skin beautifier 200 is synchronized with the portable terminal 100 in terms of wired and wireless communication and has a connector at an end thereof. The skin beauty cosmetic device 200 includes an ultrasound transducer module, an ultrasound transducer module, an ultrasound massage module, an infrared stimulating module, Module and an electric stimulation module are alternately applied to the skin beauty device 200. Information including the type of module is detected by the skin beauty device 200 by the recognition member provided for each module, Module information is transmitted to the portable terminal 100 to determine whether or not the received module information matches the usage module 2200 set in the guide image 20. [

또한, 상기 피부미용기(200)는 미용시술 중 실시간으로 위치 추적되도록 표식부(210)가 구비되고, 표식부(210)에 의해 피부미용기(200) 이동경로를 추출하여 미용시술여부를 판단하며, 미용시술이 완료된 시술영역의 가이드이미지(20)는 후술하는 S4단계와 같이 휴대용 단말기(100) 화면에서 삭제처리되도록 구비된다. 이때 표식부 광원, 색상, 표식모양 중 적어도 하나 이상의 요소로 구성되고, 피부미용기(200) 본체 단부 또는 모듈(220) 상에 적용된다. 이에 미용시술시 휴대용 단말기(100) 카메라로 촬영된 영상에 표식부(210)가 검출되면, 표식부(210) 이동위치를 기반으로 피부미용기(200) 시술위치를 검출하게 된다.In addition, the skin beautifier 200 includes a marking unit 210 for tracking the position of the beauty cosmetics 200 in real time, and the movement path of the skin beautifier 200 is extracted by the marking unit 210, The guide image 20 of the treatment area in which the beauty treatment is completed is provided to be deleted on the screen of the portable terminal 100 as in step S4 described later. At this time, it is constituted of at least one element of the mark part light source, color, and marking shape, and is applied on the body end of the skin beauty machine 200 or on the module 220. When the marking unit 210 is detected on the image photographed by the portable terminal 100 camera during beauty treatment, the operation position of the skin beautifier 200 is detected based on the moving position of the marking unit 210.

4. 가이드이미지(20)가 삭제처리되는 단계(S4)4. Step (S4) in which the guide image 20 is deleted,

본 발명에 따른 가이드이미지(20)가 삭제처리되는 단계(S4)는 상기 미용시술 중에 휴대용 단말기(100) 카메라에서 촬영된 이미지를 실시간으로 영상처리하면서 피부미용기(200) 위치를 검출하여, 피부미용기(200)에 의해 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지(20)가 삭제처리되는 단계이다. 즉, 도 4와 같이 휴대용 단말기(100)에서 표식부(210)를 통하여 피부미용기(200) 이동이 감지되면 휴대용 단말기(100) 화면의 피미용시술부 이미지(10) 상에서 포인터가 이동하며 피부미용기 위치와 대응하는 위치의 가이드이미지(20)가 삭제처리 된다. 이에 미용시술여부가 실시간으로 한눈에 파악됨과 더불어 보다 정확한 위치에 대해 미용시술이 이루어지는 전문성이 제공된다.The step S4 of deleting the guide image 20 according to the present invention detects the position of the skin beautifier 200 while processing the image photographed by the camera of the portable terminal 100 in real time during the beauty treatment, The guide image 20 at the position corresponding to the area where the beauty treatment is performed by the user 200 is deleted. 4, when the movement of the skin beautifier 200 is detected through the marking unit 210 in the portable terminal 100, the pointer moves on the image 10 of the user's operation unit on the screen of the portable terminal 100, The guide image 20 at the position corresponding to the position is deleted. Thus, it is possible to obtain a real-time view of whether or not a cosmetic operation is performed at a glance, and to provide expertise to perform a cosmetic operation on a more accurate position.

이때, 상기 휴대용 단말기(100)는 표식부(210)를 통하여 검출된 피부미용기(200)의 모듈 종류에 따라 1회 미용시술에 다른 가이드이미지(20)가 삭제처리 반경이 상이하게 설정된다. 일예로서 점집속 초음파 트랜스듀서 모듈의 경우 초음파 조사 영역이 협소하므로 가이드이미지(20)가 삭제처리 반경이 비교적 작게 설정되고, 선집속 초음파 트랜스듀서 모듈, 점집속 초음파 트랜스듀서 모듈, 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈과 같이 1회 미용시술 면적이 넓은 모듈의 경우에는 가이드이미지(20)가 삭제처리 반경이 상기 점집속 초음파 트랜스듀서 모듈 대비 확장된 반경으로 설정된다.At this time, according to the module type of the skin beautifier 200 detected through the marking unit 210, the portable terminal 100 is set to have a different removal radius for the guide image 20 different from the one-time cosmetic procedure. For example, in the case of the ultrasound transducer module in the home office, since the ultrasound irradiation area is narrow, the guide image 20 is set to have a relatively small erasure radius, and the ultrasound transducer module, the ultrasound ultrasound transducer module, In the case of a module having a large cosmetic treatment area such as a stimulation module, an ultraviolet stimulation module, and an electric stimulation module, the guide image 20 is set to have an enlarged radius of the erasing radius compared to the ultrasound transducer module.

이처럼, 상기 가상의 가이드이미지(20)와 현실의 피미용시술부 이미지(10)가 겹져서 하나의 영상으로 맵핑되어 휴대용 단말기(100) 화면을 통하여 실시간으로 증강현실 영상이 출력되면 사용자가 휴대용 단말기(100) 화면을 보면서 가이드이미지에 일치되는 피미용시술부를 피부미용기(200)로 셀프 미용시술하고, 이때 셀프 미용시술이 이루어진 위치의 가이드이미지(20)가 삭제처리되면서 미용시술이 이루어졌는지 여부를 실시간으로 쉽게 판별가능함과 더불어 미용시술이 가이드이미지(20)에 설정된 시술정보를 만족한 후에는 가이드이미지(20)가 화면상에서 삭제되어 불필요하고 과도한 시술로 인한 피부손상이 방지되도록 하는 전문성이 제공된다. When the virtual guide image 20 and the actual beauty department image 10 are overlapped and mapped to one image and the augmented reality image is output in real time through the screen of the portable terminal 100, The user performs the self-cosmetic operation with the skin beauty device 200 corresponding to the guide image while watching the screen of the user 100. At this time, the guide image 20 of the position where the self-beauty treatment is performed is deleted, It is possible to easily identify in real time and after the cosmetic procedure satisfies the procedure information set in the guide image 20, the guide image 20 is deleted on the screen, so that expertise is provided to prevent skin damage due to unnecessary and excessive procedures .

또한, 상기 피부미용기(200)는 모듈(220)의 인피던스 또는 소비전류 변화를 검출하거나, 모듈(220)에 구비되는 터치센서를 통하여 피미용시술부와의 접촉여부를 검출하고, 모듈(220)이 피미용시술부에 접촉된 것으로 검출된 조건에서 피부미용기(200)의 이동경로를 미용시술 중으로 판단하여 가이드이미지(20)가 삭제처리되도록 구비된다. 이에 휴대용 단말기(100) 화면상에서 피부미용기(200)의 이동이 감지되더라도 모듈(220)이 피미용시술부에 접촉되었는지 여부에 따라 미용시술 중인지를 정확하게 판단하므로 상기 가이드이미지(20)가 삭제처리되는 단계(S4)에서의 정확도가 향상되는 이점이 있다.The skin beauty device 200 detects the change in impedance or consumption current of the module 220 or detects contact with the operation part through the touch sensor provided in the module 220, And the guide image 20 is erased by judging that the path of the skin beautifier 200 is in the course of beauty treatment under the condition detected as being in contact with the user. Accordingly, even if the movement of the skin beauty machine 200 is detected on the screen of the portable terminal 100, the guide image 20 is erased and processed because it is accurately determined whether the module 220 is in contact with the medical treatment unit or not, There is an advantage that the accuracy in step S4 is improved.

또한, 상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되고, 상기 가이드이미지(20)의 시술정보에는 모듈정보가 함께 지정되어, 미용시술 중에 가이드이미지(20)에 지정된 모듈정보와 피부미용기(200)에 장착된 모듈(220)이 일치될 경우에 해당 가이드이미지(20)가 삭제처리되도록 구비된다. 이처럼 상기 시술영역을 추출하는 단계(S1)를 통하여 제공되는 시술정보와 동일한 조건에서 사용자 셀프 미용시술이 이루어지도록 철저하게 가이드하므로 미용시술의 전문성이 향상된다. In addition, the skin beauty machine 200 is synchronized with the portable terminal 100 by wired or wireless communication. Module information is also assigned to the procedure information of the guide image 20, When the module information is matched with the module 220 mounted on the skin beauty machine 200, the guide image 20 is deleted. As described above, since the user self-beauty treatment is thoroughly guided in the same condition as the procedure information provided through the step S1 of extracting the treatment area, the expertise of the cosmetic treatment is improved.

또한, 상기 휴대용 단말기(100)는 미용시술 전, 후 피미용시술부 정보 및 미용시술 정보를 사용자 정보와 함께 서버에 저장되고, 미용시술 정보에 따른 미용시술 전, 후 피미용시술부 이미지를 판독정보로 이용하여 가이드이미지(20)를 통하여 제공되는 시술정보가 업데이트되도록 구비된다. 사용자의 피부타입(건성, 지성, 복합성 여부), 연령을 포함하는 사용자 정보, 시술영역을 추출하는 단계(S1)를 통하여 제공되는 시술정보, 피부미용기(200)로 미용시술하는 단계(S3)에서 피부미용기(200)의 이동경로 및 방향을 포함하는 미용시술 패턴 정보를 연산하여, 미용시술 전, 후 피미용시술부 정보 중 개선율이 높은 부위 및 해당 사용자의 미용시술 정보를 빅데이터로 처리하게 된다. 이후 시술영역을 추출하는 단계(S1)를 통하여 제공되는 시술정보를 보완 수정하는 업데이트를 지속적으로 진행하면서 피부타입별 및 사용자 타입별 보다 정확한 맞춤형 시술정보가 제공되는 이점이 있다.In addition, the portable terminal 100 may store information on the operation part before and after the cosmetic operation and the cosmetic operation information together with the user information in the server, and read the image of the operation part before and after the cosmetic operation according to the cosmetic operation information So that the procedure information provided through the guide image 20 is updated. The user information including the skin type (dryness, intelligence, complexity) of the user, user information including the age, operation information provided through step S1 of extracting the operation area, step S3 of performing beauty treatment with the skin beauty machine 200 The beauty treatment pattern information including the movement path and the direction of the skin beauty device 200 is calculated to process the portion of the beauty treatment procedure information before and after the beauty treatment and the beauty treatment information of the user as the big data . There is an advantage in that more accurate customized procedure information is provided for each skin type and user type while continuing the update to supplement and modify the procedure information provided through the step S1 of extracting the treatment area thereafter.

10: 피 시술부이미지 20: 가이드이미지
100: 휴대용 단말기 30: 피부 미용기 10: surgical procedure image 20: guide image
100: portable terminal 30: skin beauty machine

Claims (9)

휴대용 단말기(100)의 카메라로 촬영된 피미용시술부 이미지(10)를 영상처리하여 주름, 기미, 여드름을 포함하는 시술부위에 대한 시술영역을 추출하는 단계(S1);
상기 추출된 시술영역을 가이드이미지(20)로 변환하고, 가상의 가이드이미지(20)를 현실의 피미용시술부 이미지(10)에 겹쳐서 하나의 영상으로 맵핑하여 휴대용 단말기(100) 화면을 통하여 실시간으로 증강현실 영상을 출력하는 단계(S2);
상기 증강현실 영상의 가이드이미지(20)와 대응하는 피미용시술부를 피부미용기(200)로 미용시술하고, 상기 피부미용기(200)에는 선집속 초음파 트랜스듀서 모듈, 점집속 초음파 트랜스듀서 모듈, 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈 중 어느 하나의 모듈(220)이 적용되어 이루어지는 단계(S3);
상기 미용시술 중에 휴대용 단말기(100) 카메라에서 촬영된 이미지를 실시간으로 영상처리하면서 피부미용기(200) 위치를 검출하여, 피부미용기(200)에 의해 미용시술이 이루어진 영역과 대응하는 위치의 가이드이미지(20)가 삭제처리되는 단계(S4);를 포함하여 이루어지고,
상기 가이드이미지(20)는 선 굵기, 색상, 명도 및 채도 중 어느 하나이상의 설정에 의해 미용시술 강도, 미용시술 횟수, 미용시술 시간에 대한 시술정보가 표시되고,
상기 피부미용기(200)는 미용시술 중 실시간으로 위치 추적되도록 표식부(210)가 구비되고, 표식부(210)에 의해 피부미용기(200) 이동경로를 추출하여 미용시술여부를 판단하도록 구비되며,
상기 피부미용기(200)는 모듈(220)의 인피던스 또는 소비전류 변화를 검출하거나, 모듈(220)에 구비되는 터치센서를 통하여 피미용시술부와의 접촉여부를 검출하고, 모듈(220)이 피미용시술부에 접촉된 것으로 검출된 조건에서 피부미용기(200)의 이동경로를 미용시술 중으로 판단하여 가이드이미지(20)가 삭제처리되며,
상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되어, 피부미용기(200)의 미용시술 이동경로 상에 위치된 가이드이미지(20)의 시술정보에 따라 모듈(220) 출력이 자동 조절되는 구성을 포함하여 이루어지는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.(S1) a step of extracting a treatment region for a treatment site including wrinkles, spots, and acne by image-processing the treated patient's image (10) photographed with a camera of the portable terminal (100);
The extracted operation area is converted into a guide image 20 and the virtual guide image 20 is superimposed on the actual operation part image 10 so as to be mapped to one image and displayed on the screen of the portable terminal 100 A step (S2) of outputting the augmented reality image to the terminal;
The beauty treatment unit corresponding to the guide image 20 of the augmented reality image is cosmetically performed by the skin beauty machine 200. The skin beauty machine 200 is provided with an anterior ultrasonic transducer module, an intraluminal ultrasonic transducer module, A step S3 of applying any one of modules, an infrared stimulating module, an ultraviolet stimulating module, and an electric stimulating module;
During the beauty treatment, the position of the skin beautifier 200 is detected while real-time image processing of the image taken by the camera of the portable terminal 100 is performed, and a guide image at a position corresponding to the region where the beauty treatment is performed by the skin beautifier 200 20) is erased, and the step (S4)
The guide image 20 displays the procedure information on the cosmetic intensity, the number of cosmetic procedures, and the cosmetic procedure time by setting one or more of line thickness, color, lightness, and saturation,
The skin beautifier 200 is provided with a marking unit 210 for tracking the position of the skin beauty device 200 in real time during the beauty treatment. The marking unit 210 extracts a movement path of the skin beautifier 200,
The skin beauty machine 200 detects the change in impedance or consumption current of the module 220 or detects contact with the operation part through the touch sensor provided in the module 220, The guide image 20 is erased by judging that the path of the skin beautifier 200 is in the course of beauty treatment under the condition detected as being in contact with the beauty treatment part,
The skin beautifier 200 is synchronized with the portable terminal 100 by radio or wire communication so that the output of the module 220 is output according to the procedure information of the guide image 20 positioned on the cosmetic procedure movement path of the skin beautifier 200. [ Wherein the augmented reality-based self-skin care management method comprises the steps of: 제 1항에 있어서,
상기 가이드이미지(20)는 피미용시술부 시술영역 상태에 따라 선, 점, 면 중 어느 하나 이상의 형태로 표시되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
Wherein the guide image (20) is displayed in a form of one of a line, a point, and a face according to a state of the operation area of the operation part of the user, based on the augmented reality. 제 1항에 있어서,
상기 가이드이미지(20)는 미용시술 횟수 및 시간에 따라 선 굵기, 색상, 명도 및 채도 중 어느 하나의 요소 레벨을 상이하게 표시하는 방식으로 미용시술 진행정도를 사용자에게 알려주도록 구비되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
The guide image 20 is provided to notify the user of the degree of progress of beauty treatment by displaying the element level of any one of line thickness, color, lightness and saturation according to the number of times of beauty treatment and time. A method of self - skin care management based on augmented reality using portable terminal. 제 1항에 있어서,
상기 피부미용기(200)에는 선집속 초음파 트랜스듀서 모듈, 점집속 초음파 트랜스듀서 모듈, 초음파 마시지 모듈, 적외선 자극 모듈, 자외선 자극 모듈, 전기 자극 모듈 중 어느 하나의 모듈(220)이 택일적으로 교체적용되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
The skin beauty device 200 may be selectively replaced with a module 220 of an anterior ultrasonic transducer module, an in-situ ultrasound transducer module, an ultrasound massage module, an infrared stimulating module, an ultraviolet stimulating module, Wherein the augmented reality-based self-skin care management method is implemented using a portable terminal. 삭제delete 삭제delete 제 1항에 있어서,
상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되어, 피부미용기(200)의 미용시술 이동경로 상에 위치된 가이드이미지(20)의 시술정보에 따라 모듈(220) 출력이 자동 조절되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
The skin beautifier 200 is synchronized with the portable terminal 100 by radio or wire communication so that the output of the module 220 is output according to the procedure information of the guide image 20 positioned on the cosmetic procedure movement path of the skin beautifier 200. [ Wherein the augmented reality-based self-skin care management method is implemented using a portable terminal. 제 1항에 있어서,
상기 피부미용기(200)는 휴대용 단말기(100)와 유,무선통신으로 동기화되고, 상기 가이드이미지(20)의 시술정보에는 모듈정보가 함께 지정되어, 미용시술 중에 가이드이미지(20)에 지정된 모듈정보와 피부미용기(200)에 장착된 모듈(220)이 일치될 경우에 해당 가이드이미지(20)가 삭제처리되도록 구비되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
The skin beauty machine 200 is synchronized with the portable terminal 100 by radio communication and the module information is assigned to the procedure information of the guide image 20 so that the module information And the guide image (20) is deleted when the module (220) attached to the skin beauty machine (200) is matched. 제 1항에 있어서,
상기 휴대용 단말기(100)는 미용시술 전, 후 피미용시술부 정보 및 미용시술 정보를 사용자 정보와 함께 서버에 저장하고, 미용시술 정보에 따른 미용시술 전, 후 피미용시술부 이미지를 판독정보로 이용하여 가이드이미지(20)를 통하여 제공되는 시술정보가 업데이트되도록 구비되는 것을 특징으로 하는 휴대용 단말기를 이용한 증강현실 기반의 셀프 피부 미용관리 방법.The method according to claim 1,
The portable terminal 100 stores the information on the operation part before and after the cosmetic operation and the cosmetic operation information together with the user information in the server and displays the image of the operation part before and after the cosmetic operation according to the cosmetic operation information as read information And the procedure information provided through the guide image (20) is updated using the portable terminal.
KR1020180009915A 2018-01-26 2018-01-26 A method of self-skin care management based on augmented reality using a portable terminal KR101920734B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180009915A KR101920734B1 (en) 2018-01-26 2018-01-26 A method of self-skin care management based on augmented reality using a portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180009915A KR101920734B1 (en) 2018-01-26 2018-01-26 A method of self-skin care management based on augmented reality using a portable terminal

Publications (1)

Publication Number Publication Date
KR101920734B1 true KR101920734B1 (en) 2018-11-21

Family

ID=64602757

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180009915A KR101920734B1 (en) 2018-01-26 2018-01-26 A method of self-skin care management based on augmented reality using a portable terminal

Country Status (1)

Country Link
KR (1) KR101920734B1 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110333756A (en) * 2019-06-26 2019-10-15 杜剑波 Holographic augmented reality system for makings aesthetics designing and consuftng
CN111557644A (en) * 2020-04-22 2020-08-21 深圳市锐吉电子科技有限公司 Skin care method and device based on intelligent mirror equipment and skin care equipment
KR102234127B1 (en) * 2020-10-05 2021-03-30 신명수 Facial shape recognition and massage part guidance system through self photographing
KR20210101383A (en) 2020-02-07 2021-08-19 경운대학교 산학협력단 Method and system for determining skin diseases using deep learning
KR102294643B1 (en) 2021-05-18 2021-08-27 (주)이지템 Skin Care Device and Driving Method Thereof
KR102318658B1 (en) 2021-05-17 2021-10-28 (주)이지템 Skin Care Device and Driving Method Thereof
KR20220000432A (en) * 2020-06-25 2022-01-04 조현주 Guide device for fascia massage
KR20220030057A (en) * 2020-09-02 2022-03-10 이호승 Self skin care device using augmented reality image
WO2022050469A1 (en) * 2020-09-02 2022-03-10 이호승 Augmented reality-based skin care device and control method thereof

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110333756A (en) * 2019-06-26 2019-10-15 杜剑波 Holographic augmented reality system for makings aesthetics designing and consuftng
KR20210101383A (en) 2020-02-07 2021-08-19 경운대학교 산학협력단 Method and system for determining skin diseases using deep learning
CN111557644A (en) * 2020-04-22 2020-08-21 深圳市锐吉电子科技有限公司 Skin care method and device based on intelligent mirror equipment and skin care equipment
KR20220000432A (en) * 2020-06-25 2022-01-04 조현주 Guide device for fascia massage
KR102379240B1 (en) 2020-06-25 2022-03-25 조현주 Guide device for fascia massage
KR20220030057A (en) * 2020-09-02 2022-03-10 이호승 Self skin care device using augmented reality image
WO2022050469A1 (en) * 2020-09-02 2022-03-10 이호승 Augmented reality-based skin care device and control method thereof
KR20220030502A (en) * 2020-09-02 2022-03-11 이호승 Skin care device based on augmented reality
KR102583933B1 (en) * 2020-09-02 2023-09-27 이호승 Self skin care device using augmented reality image
KR102583932B1 (en) * 2020-09-02 2023-10-04 이호승 Skin care device based on augmented reality
KR102234127B1 (en) * 2020-10-05 2021-03-30 신명수 Facial shape recognition and massage part guidance system through self photographing
KR102318658B1 (en) 2021-05-17 2021-10-28 (주)이지템 Skin Care Device and Driving Method Thereof
KR102294643B1 (en) 2021-05-18 2021-08-27 (주)이지템 Skin Care Device and Driving Method Thereof

Similar Documents

Publication Publication Date Title
KR101920734B1 (en) A method of self-skin care management based on augmented reality using a portable terminal
US11403964B2 (en) System for cosmetic and therapeutic training
US20220309954A1 (en) Injection training apparatus using 3d position sensor
US10010155B2 (en) Makeup support device, makeup support method, and makeup support program
US11785330B2 (en) Personal care device with camera
KR101307654B1 (en) Eye make-up application machine
RU2385669C2 (en) System and method for medical monitoring and processing by cosmetic monitoring and processing
CN110960036A (en) Intelligent mirror system and method with skin and makeup beautifying guide function
US20140275948A1 (en) Information terminal device
CN109152464B (en) Image processing apparatus and image processing method
KR20150068367A (en) A method and system for cosmetic skin procedures for home use
US20190098149A1 (en) Image processing apparatus and method for processing image
KR101930851B1 (en) A skin analysis and diagnosis system for 3D face modeling
CN111971643B (en) Positioning of personal care devices
CN109982616B (en) Device and method for supporting at least one user to perform a personal care activity
CN108888487A (en) A kind of eyeball training system and method
KR102118099B1 (en) Device for skin diagnosis and analysis of face, neck, scalp, and hair
CN111528807A (en) Face image analysis system and method based on multispectral and 3D model reconstruction
KR20190037051A (en) Body Information Analysis Apparatus Combining with Augmented Reality and Eyebrow Shape Preview Method thereof
KR102301187B1 (en) Skin beauty management and improvement system, and its management and improvement method thereof
KR102583933B1 (en) Self skin care device using augmented reality image
KR101897512B1 (en) Face Fit Eyebrow tattoo system using 3D Face Recognition Scanner
KR20220030501A (en) Method for skin care device based on augmented reality
CN113508438A (en) Projection and measurement system
KR102235032B1 (en) Self skin care device using augmented reality image

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant