KR102195033B1 - Big Data Molding Consulting System - Google Patents

Big Data Molding Consulting System Download PDF

Info

Publication number
KR102195033B1
KR102195033B1 KR1020200040959A KR20200040959A KR102195033B1 KR 102195033 B1 KR102195033 B1 KR 102195033B1 KR 1020200040959 A KR1020200040959 A KR 1020200040959A KR 20200040959 A KR20200040959 A KR 20200040959A KR 102195033 B1 KR102195033 B1 KR 102195033B1
Authority
KR
South Korea
Prior art keywords
image
molding
cosmetic
cosmetic surgery
big data
Prior art date
Application number
KR1020200040959A
Other languages
Korean (ko)
Inventor
전형민
박철민
Original Assignee
주식회사 탭탭글로벌
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 탭탭글로벌 filed Critical 주식회사 탭탭글로벌
Priority to KR1020200040959A priority Critical patent/KR102195033B1/en
Application granted granted Critical
Publication of KR102195033B1 publication Critical patent/KR102195033B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • G06K9/00221
    • G06K9/6201
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work or social welfare, e.g. community support activities or counselling services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Primary Health Care (AREA)
  • Marketing (AREA)
  • Human Resources & Organizations (AREA)
  • Child & Adolescent Psychology (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

An objective of the present invention is to provide a big data cosmetic surgery consulting system for providing a cosmetic surgery prediction image and a lifestyle predicted by the cosmetic surgery prediction image which improves the reliability of cosmetic surgery to undergo the cosmetic surgery in a stable mind. According to the present invention, the big data cosmetic surgery consulting system for providing a cosmetic surgery prediction image and a lifestyle predicted by the cosmetic surgery prediction image comprises: a big data collection unit to collect big data for a pre-cosmetic surgery image and a post-cosmetic surgery image of a cosmetic surgery patient who has undergone cosmetic surgery; a big data analysis unit to divide the pre-cosmetic surgery image and the post-cosmetic surgery image collected by the big data collection unit into portions of the face, analyze the change of each portion of the pre-cosmetic surgery image and the post-cosmetic surgery image to extract a cosmetic surgery portion, and display the extracted cosmetic surgery portion on the pre-cosmetic surgery image and the post-cosmetic surgery image; a cosmetic surgery applicant analysis unit to receive a non-cosmetic surgery face image before cosmetic surgery from a cosmetic surgery applicant who wants to have cosmetic surgery, divide the face from the received non-cosmetic surgery face image into portions to provide the portions for the cosmetic surgery applicant, and receive a desired cosmetic surgery portion from the cosmetic surgery applicant; an image extraction unit to extract a plurality of pre-cosmetic surgery images similar to the non-cosmetic surgery face image from the big data connection unit, extract post-cosmetic surgery images corresponding to the extracted pre-cosmetic surgery images, and extract only post-cosmetic surgery images with a displayed cosmetic surgery portion matching the desired cosmetic surgery portion among the extracted plurality of post-cosmetic surgery images; and a big data prediction unit to apply the cosmetic surgery portion displayed on the post-cosmetic surgery images extracted by the image extraction unit to the non-cosmetic surgery face image to generate a cosmetic surgery prediction image, and provide the cosmetic surgery prediction image for the cosmetic surgery applicant.

Description

성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템{Big Data Molding Consulting System}Big Data Molding Consulting System that provides the expected molding image and the expected lifestyle through the expected molding image {Big Data Molding Consulting System}

본 발명은 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템에 관한 것이다.The present invention relates to a big data molding consulting system that provides an expected molding image and a lifestyle expected through the expected molding image.

성형수술은 사람의 몸 부위나 얼굴 부위를 외형적으로 수정하는 수술로서 종래에는 특수계층에서 필요로 하는 수술이라는 인식이 있었으나, 점차 성형이 미용 개념으로 인식됨에 따라, 현재에는 일반인들에게도 통상적이고 보편적인 수술로 자리 잡아가고 있다. Plastic surgery is a surgery that externally corrects a person's body or face. In the past, it was recognized as a surgery required by a special class, but as plastic surgery is gradually recognized as a beauty concept, it is now common and common among the general public. It is being established with human surgery.

성형을 희망하는 사람은 성형 후의 모습에 대해 궁금해 한다. 이러한 궁금증을 해소하기 위해, 3D 가상 성형프로그램 또는 포토샵을 통해, 만들어진 가상의 성형 후 이미지를 사람에게 제공한다. 이렇게 제공된 이미지를 통해서 성형 후 모습을 상상할 수 있다. People who wish to have plastic surgery are curious about their appearance after plastic surgery. In order to solve this curiosity, the created virtual post-molding image is provided to a person through a 3D virtual molding program or Photoshop. Through the image provided in this way, you can imagine the appearance after molding.

그러나, 가상의 성형 후 이미지는 단지 성형 후를 상상으로 만들어지기 때문에 실제 성형 후의 모습과 다른 경우 컴플레인이 많이 발생하였다. However, since the virtual post-molding image is only made as an imagination after the shaping, a lot of complaints occurred when it was different from the actual shape after shaping.

또한, 실제 성형한 수술자의 모습을 보고, 성형을 판단하기도 하지만, 기 수술자와 성형 희망자의 얼굴형태, 얼굴색채, 수술을 제외한 얼굴특징 등의 차이로, 수술자의 모습과 희망자의 수술 후가 달라 컴플레인이 발생하는 문제점이 있었다. In addition, surgery is judged by looking at the actual plastic surgery, but due to differences in the shape of the face, color of the face, and facial features excluding surgery, the patient's appearance and the applicant's post-surgery are different. There was a problem with this occurring.

대한민국 공개특허 10-2019-0079215Republic of Korea Patent Publication 10-2019-0079215

상술한 바와 같은 문제점을 해결하기 위해 안출된 본 발명의 목적은, 성형수술자의 성형전이미지와 성형후이미지에 대한 빅데이터를 수집하여 성형부위를 추출하고, 성형희망자가 희망하는 성형희망부위에 성형수술자의 성형부위를 미성형얼굴이미지에 적용하여 성형예상이미지를 생성할 뿐만 아니라, 성형얼굴이미지와 성형예상이미지의 유사도로 빅데이터예측부의 예측도를 평가함으로써, 빅데이터예측부의 성능을 더 높일 수 있는 데이터를 확보할 뿐만 아니라, 성형희망자의 성형 수술에 대한 동기부여를 발생시키며, 성형 수술의 신뢰도를 향상시켜 안정된 마음으로 성형수술을 진행할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공하기 위함이다.The object of the present invention, conceived in order to solve the above-described problems, is to collect big data on the image before and after the plastic surgery of the plastic surgeon to extract the plasticized area, and to form the desired area of the plastic surgery. The performance of the big data predictor can be further improved by evaluating the predictive degree of the big data predictor based on the similarity between the face image and the predicted plastic image, as well as generating the predicted plastic image by applying the operator's plastic part to the unshaped face image. In addition to securing existing data, it generates motivation for plastic surgery for plastic surgery applicants, and improves the reliability of plastic surgery so that plastic surgery can be performed with a stable mind, and the expected life through the plastic surgery image. It is to provide a big data molding consulting system that provides style.

또한, 본 발명의 목적은, 성형희망자가 성형 후에, 더 나은 생활을 찾을 수 있도록 온라인이미지 중에서 성형희망자의 퍼스널컬러를 포함한 온라인의류이미지를 추출하여 성형희망자에게 제공할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공하기 위함이다.In addition, it is an object of the present invention to extract an online clothing image including the personal color of the cosmetic applicant from the online image so that the cosmetic candidate can find a better life after the cosmetic surgery, It is to provide a big data molding consulting system that provides the expected lifestyle through expected images.

또한, 본 발명의 목적은, 성형희망자가 성형 후의 얼굴과 유사한 특정유저의 SNS에 업로드된 온라인이미지와 텍스트데이터 및 댓글을 통해 특정유저의 화장 스타일, 의류 스타일, 악세서리 스타일, 음식스타일, 여행스타일 및 화장스타일을 포함하는 라이프스타일을 분석하여 성형희망자에게 제공함으로써, 성형희망자는 타인의 라이프스타일을 통해 성형 후에 변화하는 자신의 얼굴에 잘 어울리는 의류, 악세서리, 화장 등의 스타일을 미리 참고할 수 있으며, 특정유저의 라이프스타일에 만족하는 경우 성형수술의 동기부여가 되며, 성형수술의 신뢰를 통해 성형수술을 진행할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공하기 위함이다.In addition, the object of the present invention is to provide a cosmetic style, a clothing style, an accessory style, a food style, a travel style, and a specific user through online images and text data and comments uploaded to the SNS of a specific user similar to the face after the cosmetic surgery. By analyzing the lifestyle including the makeup style and providing it to the cosmetic applicant, the cosmetic applicant can refer in advance to the style of clothing, accessories, makeup, etc. that suits their changing face after cosmetic surgery through the lifestyle of others. If you are satisfied with the user's lifestyle, it will motivate plastic surgery, and a big data plastic surgery consulting system that provides a plastic surgery projected image that allows you to perform plastic surgery through trust in plastic surgery and a lifestyle expected through the plastic surgery projected image. It is to provide

상기한 바와 같은 목적을 달성하기 위한 본 발명의 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템에 따르면, 성형을 완료한 성형수술자의 성형전이미지와 성형후이미지에 대한 빅데이터를 수집하는 빅데이터수집부; 상기 빅데이터수집부가 수집한 성형전이미지와 성형후이미지를 얼굴을 기준으로 부위별 구획하고, 상기 성형전이미지와 성형후이미지의 부위별 변화를 분석하여 성형부위를 추출하고, 추출한 성형부위를 상기 성형전이미지와 성형후이미지에 표시하는 빅데이터분석부; 성형수술을 희망하는 성형희망자로부터 성형 전의 미성형얼굴이미지를 수신하고, 수신한 미성형얼굴이미지로부터 얼굴을 기준으로 부위별 구획하여 상기 성형희망자에게 제공하고, 상기 성형희망자로부터 희망하는 성형희망부위를 입력받는 성형희망자분석부; 상기 빅데이터수집부로부터 상기 미성형얼굴이미지와 유사한 성형전이미지를 다수 추출하고, 추출한 성형전이미지에 대응되는 성형후이미지를 추출하되, 추출한 다수의 성형후이미지 중에서 상기 성형희망부위와 매칭되는 성형부위가 표시된 성형후이미지만을 추출하는 이미지추출부; 상기 이미지추출부에서 추출한 성형후이미지에 표시된 성형부위를 상기 미성형얼굴이미지에 적용하여 성형예상이미지를 생성하고, 상기 성형희망자에게 제공하는 빅데이터예측부; 및 상기 성형희망자의 성형 후의 성형얼굴이미지와 성형예상이미지의 전체적인 제1유사도 및 상기 성형얼굴이미지와 성형예상이미지의 각 성형부위에 대한 제2유사도를 분석하고, 상기 제1유사도보다 제2유사도의 가중치를 더 높게 설정하여 가중평균을 산출하고, 가중평균을 통해 상기 빅데이터예측부의 예측도를 평가하는 빅데이터평가부;를 포함한다.According to the big data molding consulting system that provides the expected molding image of the present invention to achieve the above object and the lifestyle expected through the expected molding image, the image before and after the molding of the plastic surgeon who completed the molding. A big data collection unit that collects big data on images; The pre-molding image and the post-molding image collected by the big data collection unit are divided by parts based on the face, and the change of the pre-molding image and the post-molding image is analyzed to extract the molded part, and the extracted molded part is recalled. Big data analysis unit for displaying the image before and after the molding; Receives an unshaped face image before plastic surgery from a plastic surgeon who wishes to undergo plastic surgery, divides the received non-shape face image by part based on the face and provides it to the plastic surgery candidate, and provides the desired plastic surgery area from the plastic surgery candidate. A plastic surgery candidate analysis unit receiving input; Extracting a plurality of pre-molding images similar to the unmolded face image from the big data collection unit, extracting a post-molding image corresponding to the extracted pre-molding image, and forming a shape matching the desired area of the extracted multiple post-molding images An image extracting unit that extracts only the post-molded image in which the portion is displayed; A big data prediction unit for generating a shaping prediction image by applying the shaping portion displayed in the post-molding image extracted from the image extracting unit to the unmolded face image, and providing it to the shaping applicant; And a first degree of similarity between the cosmetic face image and the expected cosmetic image after the cosmetic candidate, and a second degree of similarity for each of the cosmetic regions of the cosmetic face image and the expected cosmetic image. And a big data evaluation unit that calculates a weighted average by setting the weight higher, and evaluates the predictability of the big data prediction unit through the weighted average.

또한, SNS에 다수 유저로부터 업로드되어 공개된 온라인이미지 중에서 상기 성형예상이미지와 유사한 온라인유사이미지를 추출하고, 상기 온라인유사이미지를 업로드한 특정유저의 라이프스타일을 분석하여 상기 성형희망자에게 제공하는 라이프스타일제공부;를 더 포함한다.In addition, a lifestyle that extracts an online similar image similar to the expected cosmetic image from among online images uploaded and published on SNS, analyzes the lifestyle of a specific user who uploaded the online similar image, and provides it to the cosmetic applicant. It further includes;

또한, 상기 성형전이미지, 성형후이미지 및 미성형얼굴이미지의 부위별 색채정보를 분석하는 색채정보분석부;를 더 포함하고, 상기 빅데이터예측부는, 상기 이미지추출부에서 추출한 성형후이미지의 성형부위와 상기 미성형얼굴이미지의 성형희망부위를 그레이스케일로 변환한 후, 변환한 그레이스케일의 성형희망부위를 성형부위로 대체하고, 대체된 그레이스케일의 성형부위를 상기 미성형얼굴이미지의 성형희망부위 색채정보로 변환하여 컬러의 성형예상이미지를 생성하는 것을 특징으로 한다.In addition, a color information analysis unit that analyzes color information for each part of the pre-shaping image, post-shaping image, and unshaped face image; further comprising, the big data prediction unit, forming the post-shaping image extracted from the image extracting unit. After converting the part and the desired part of the unformed face image into grayscale, the converted part of the grayscale that is desired to be formed is replaced with the molding part, and the replaced part of the grayscale is replaced with the desired part of the unformed face image. It is characterized in that by converting the color information of the region to generate a color predictive image.

또한, 상기 미성형얼굴이미지의 제1얼굴윤곽라인을 추출하는 윤곽라인추출부와, 상기 제1얼굴윤곽라인을 기준으로 외측 부분에 다수의 색상을 오버랩하며, 상기 성형희망자로부터 어느 하나의 색상을 선택받아 특정색상을 추출하는 특정색상추출부와, 상기 특정색상을 4계절 유형별로 기 분류한 계절색상을 상기 제1얼굴윤곽라인의 외측부분에 오버랩하여 상기 성형희망자로부터 하나 이상의 계절색상을 선택받아 추출하는 계절색상추출부와, 상기 계절색상추출부로 추출된 계절색상을 명도와 채도의 변화에 따라 1 내지 8개로 기 분류한 세부색상을 상기 제1얼굴윤곽라인의 외측부분에 오버랩하여 상기 성형희망자로부터 하나 이상의 세부색상을 선택받아 추출하는 세부색상추출부를 포함하는 퍼스널컬러선정부;를 더 포함하고, 상기 라이프스타일제공부는, 상기 온라인이미지 중에서 상기 계절색상추출부가 추출한 계절색상과 세부색상추출부가 추출한 세부색상에 대응되는 의류색상이 포함된 온라인의류이미지를 추출하여 상기 성형희망자에게 제공하는 것을 특징으로 한다.In addition, a contour line extracting unit for extracting the first facial contour line of the unshaped face image, and overlapping a plurality of colors on the outer portion based on the first facial contour line, and selecting any one color from the cosmetic applicant. A specific color extracting unit that is selected and extracts a specific color, and the seasonal colors pre-classified by four season types are overlapped on the outer portion of the first facial contour line to select one or more seasonal colors from the cosmetic applicant. The extracted seasonal color extraction unit and the detailed colors pre-categorized into 1 to 8 seasonal colors extracted by the seasonal color extraction unit according to changes in brightness and saturation are overlapped on the outer part of the first facial contour line, A personal color selection unit including a detailed color extraction unit for selecting and extracting at least one detailed color from the; further comprising, the lifestyle providing unit, the seasonal color extracted by the seasonal color extraction unit from the online image and the detailed color extraction unit It characterized in that the on-line clothing image including the clothing color corresponding to the detailed color is extracted and provided to the cosmetic applicant.

또한, 상기 윤곽라인추출부는, 상기 온라인의류이미지에서 제2얼굴윤곽라인을 추출하고, 상기 성형예상이미지에서 제3얼굴윤곽라인을 추출하며, 상기 온라인의류이미지는, 상기 제2얼굴윤곽라인을 기준으로 내측부분에 상기 제3얼굴윤곽라인을 기준으로 내측부분인 상기 성형예상이미지의 얼굴을 오버랩하여, 상기 성형희망자의 성형예상이미지 얼굴이 상기 온라인의류이미지의 얼굴에 합성된 상태인 것을 특징으로 한다.In addition, the contour line extracting unit extracts a second facial contour line from the online clothing image, and extracts a third facial contour line from the molding predicted image, and the online clothing image is based on the second facial contour line. By overlapping the face of the expected plastic image, which is the inner part based on the third facial contour line, on the inner part, the face of the expected plastic image of the desired person is synthesized with the face of the online clothing image. .

또한, 상기 라이프스타일제공부는, 상기 특정유저의 SNS에 업로드된 온라인이미지와 텍스트데이터 및 댓글을 통해 상기 특정유저의 화장 스타일, 의류 스타일, 악세서리 스타일, 음식스타일, 여행스타일 및 화장스타일을 포함하는 라이프스타일을 분석하는 것을 특징으로 한다.In addition, the lifestyle providing unit is a lifestyle including the makeup style, clothing style, accessory style, food style, travel style and makeup style of the specific user through online images and text data and comments uploaded to the SNS of the specific user. It is characterized by analyzing the style.

또한, 상기 성형희망자분석부는, 상기 성형희망자가 성형을 완료한 후에, 상기 성형희망자의 SNS 계정에 업로드된 온라인이미지를 추출하고, 추출한 온라인이미지 중에 상기 성형희망자의 미성형얼굴이미지와 유사한 온라인이미지 개수를 추출하고, 성형얼굴이미지 및 성형예상이미지에 유사한 온라인이미지 개수를 추출하여, 상기 성형희망자의 성형 전과 후에 온라인이미지의 업로드 증감률을 분석하고, In addition, the cosmetic candidate analysis unit extracts the online image uploaded to the SNS account of the cosmetic applicant after the cosmetic applicant completes the cosmetic, and among the extracted online images, the number of online images similar to the unformed face image of the cosmetic applicant And extracting the number of online images similar to the cosmetic face image and the expected cosmetic image, and analyzing the upload increase/decrease rate of the online image before and after the cosmetic surgery

상기 라이프스타일제공부는, 상기 업로드 증감률을 통해 상기 성형희망자의 외모자신감을 평가하고, 또 다른 성형희망자에게 성형희망자의 성형 후 외모자신감 평가를 제공하는 것을 특징으로 한다.The lifestyle providing unit is characterized in that it evaluates the appearance confidence of the cosmetic candidate through the upload increase/decrease rate, and provides an evaluation of the appearance confidence of the cosmetic applicant after forming to another cosmetic applicant.

또한, 상기 빅데이터수집부는, 상기 성형전이미지와 성형후이미지에 표시된 성형부위의 유사도를 분석하여, 유사도에 따라 성형전이미지와 성형후이미지를 다수개의 그룹으로 분류하고, 상기 이미지추출부는, 상기 성형후이미지를 추출할 때, 상기 빅데이터수집부가 분류한 그룹별로 성형희망부위와 매칭되는 성형부위가 표시된 성형후이미지만을 추출하며, 상기 빅데이터예측부는, 상기 그룹별로 추출한 성형후이미지에 따라 성형예상이미지를 그룹별로 생성하여 성형희망자에게 제공하는 것을 특징으로 한다.In addition, the big data collection unit analyzes the degree of similarity between the pre-molding image and the molded portion displayed on the post-molding image, and classifies the pre-molding image and the post-molding image into a plurality of groups according to the similarity, and the image extracting unit includes the When extracting the post-molding image, the big data collection unit extracts only the post-molding image displaying the shaping area matching the desired shaping area for each group classified by the big data collection unit, and the big data prediction unit is formed according to the shaping image extracted for each group. It is characterized in that the predicted image is generated for each group and provided to the desired person.

이상 살펴본 바와 같은 본 발명의 효과는, 성형수술자의 성형전이미지와 성형후이미지에 대한 빅데이터를 수집하여 성형부위를 추출하고, 성형희망자가 희망하는 성형희망부위에 성형수술자의 성형부위를 미성형얼굴이미지에 적용하여 성형예상이미지를 생성할 뿐만 아니라, 성형얼굴이미지와 성형예상이미지의 유사도로 빅데이터예측부의 예측도를 평가함으로써, 빅데이터예측부의 성능을 더 높일 수 있는 데이터를 확보할 뿐만 아니라, 성형희망자의 성형 수술에 대한 동기부여를 발생시키며, 성형 수술의 신뢰도를 향상시켜 안정된 마음으로 성형수술을 진행할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공할 수 있다.The effect of the present invention as described above is to collect big data about the image before and after the plastic surgery of the plastic surgeon to extract the plastic surgery area, and to unshape the plastic surgery area on the desired area that the plastic surgeon desires. Not only does it apply to the face image to generate the expected plasticity image, but also by evaluating the predictive degree of the big data prediction unit based on the similarity between the formed face image and the expected plasticity image, not only does it secure data that can further improve the performance of the big data prediction unit. , Big data plastic surgery that generates the motivation for plastic surgery of plastic surgery applicants, and provides a plastic surgery projected image that enables plastic surgery to proceed with a stable mind by improving the reliability of plastic surgery and a lifestyle expected through the plastic surgery projected image. A consulting system can be provided.

또한, 본 발명의 효과는, 성형희망자가 성형 후에, 더 나은 생활을 찾을 수 있도록 온라인이미지 중에서 성형희망자의 퍼스널컬러를 포함한 온라인의류이미지를 추출하여 성형희망자에게 제공할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공할 수 있다.In addition, the effect of the present invention is to extract the online clothing image including the person's personal color from the online image so that the cosmetic applicant can find a better life after the cosmetic surgery, It is possible to provide a big data molding consulting system that provides an expected lifestyle through expected images.

또한, 본 발명의 효과는, 성형희망자가 성형 후의 얼굴과 유사한 특정유저의 SNS에 업로드된 온라인이미지와 텍스트데이터 및 댓글을 통해 특정유저의 화장 스타일, 의류 스타일, 악세서리 스타일, 음식스타일, 여행스타일 및 화장스타일을 포함하는 라이프스타일을 분석하여 성형희망자에게 제공함으로써, 성형희망자는 타인의 라이프스타일을 통해 성형 후에 변화하는 자신의 얼굴에 잘 어울리는 의류, 악세서리, 화장 등의 스타일을 미리 참고할 수 있으며, 특정유저의 라이프스타일에 만족하는 경우 성형수술의 동기부여가 되며, 성형수술의 신뢰를 통해 성형수술을 진행할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공할 수 있다.In addition, the effect of the present invention is the cosmetic style, clothing style, accessory style, food style, travel style, and the online image and text data uploaded to the SNS of a specific user, and By analyzing the lifestyle including the makeup style and providing it to the cosmetic applicant, the cosmetic applicant can refer in advance to the style of clothing, accessories, makeup, etc. that suits their changing face after cosmetic surgery through the lifestyle of others. If you are satisfied with the user's lifestyle, it will motivate plastic surgery, and a big data plastic surgery consulting system that provides a plastic surgery projected image that allows you to perform plastic surgery through trust in plastic surgery and a lifestyle expected through the plastic surgery projected image. Can provide.

또한, 본 발명의 효과는 성형 상담하는 상담사의 주관적인 기준으로 이루어지는 상담보다, 시스템을 통하여 성형 후의 모습을 최대한 객관적이고, 전문적으로 상담함으로써, 신뢰도 높은 성형을 추천할 수 있는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 제공할 수 있다.In addition, the effect of the present invention is that, rather than a consultation based on the subjective criteria of a consultant who consults for plastic surgery, the system provides an objective and professional consultation of the shape after plastic surgery. It is possible to provide a big data molding consulting system that provides a lifestyle expected through images.

도 1은 본 발명의 바람직한 실시예에 따른 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 나타낸 구성도이다.
도 2는 본 발명의 바람직한 실시예에 따른 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템의 성형예상이미지 생성을 나타낸 예시도이다.
1 is a block diagram showing a big data molding consulting system that provides an expected molding image and a lifestyle expected through the expected molding image according to a preferred embodiment of the present invention.
Figure 2 is an exemplary view showing the formation of an expected molding image of a big data molding consulting system that provides a predicted molding image and a lifestyle expected through the expected molding image according to a preferred embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.Advantages and features of the present invention, and a method of achieving them will become apparent with reference to the embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in a variety of different forms, and only these embodiments make the disclosure of the present invention complete, and are common knowledge in the technical field to which the present invention pertains. It is provided to completely inform the scope of the invention to those who have, and the invention is only defined by the scope of the claims. The same reference numerals refer to the same components throughout the specification.

이하, 본 발명의 실시예들에 의하여 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 설명하기 위한 도면들을 참고하여 본 발명에 대해 설명하도록 한다.Hereinafter, the present invention will be described with reference to the drawings for explaining a molding projected image and a big data molding consulting system that provides a lifestyle expected through the molding projected image according to embodiments of the present invention.

도 1 및 도 2를 참고하여, 본 발명에 따른 성형예상이미지(51)와 그 성형예상이미지(51)를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템은, 빅데이터수집부(10), 빅데이터분석부(20), 성형희망자분석부(30), 이미지추출부(40), 빅데이터예측부(50) 및 빅데이터평가부(60)를 포함한다.1 and 2, a big data molding consulting system that provides a predicted molding image 51 according to the present invention and a lifestyle expected through the predicted molding image 51 is, a big data collecting unit 10 , A big data analysis unit 20, a cosmetic candidate analysis unit 30, an image extraction unit 40, a big data prediction unit 50, and a big data evaluation unit 60.

빅데이터수집부(10)는, 성형을 완료한 성형수술자의 성형전이미지와 성형후이미지(11)에 대한 빅데이터를 수집한다.The big data collection unit 10 collects big data about the image before and after the plastic surgery 11 of the plastic surgeon who has completed the plastic surgery.

이때, 빅데이터는 다수의 성형외과로부터 수집된다. 이때, 성형전이미지와 성형후이미지(11)에는 수집된 성형외과, 의사, 비용, 성형부위(21) 등의 성형수술정보를 포함한다.At this time, big data is collected from a number of plastic surgery clinics. At this time, the pre-molding image and the post-molding image 11 include plastic surgery information such as the collected plastic surgeon, doctor, cost, and plastic surgery site 21.

또한, 빅데이터수집부(10)는, 후술할 성형희망자의 미성형얼굴이미지(31)를 성형전이미지로, 성형얼굴이미지를 성형후이미지(11)로 추가하여 빅데이터화한다.In addition, the big data collection unit 10 converts the unshaped face image 31 of the person who will be described later into big data by adding a pre-molding image as a pre-molding image and a shaping face image as a post-molding image 11.

그리고, 미성형얼굴이미지(31), 성형얼굴이미지, 성형전이미지 및 성형후이미지(11)는 모두 동일한 각도, 조명, 이미지상의 얼굴비율 등의 동일한 환경조건에서 촬영되며, 정면, 측면, 정면과 측면 중간 등의 위치에서 촬영된 사진이다. 또한, 성형희망자와 성형수술자는 성형 전과 후 동일한 표정으로 촬영하되, 또 다른 표정으로 성형 전과 후를 다수 촬영함으로써, 성형 전과 후의 변화를 보다 용이하게 파악할 수 있다.In addition, the unshaped face image 31, the molded face image, the pre-molded image and the post-molded image 11 are all photographed under the same environmental conditions, such as the same angle, lighting, and the proportion of the face on the image. This is a picture taken from a position such as the middle of the side. In addition, the plastic surgery applicant and the plastic surgeon are photographed with the same expression before and after the plastic surgery, but by taking multiple pictures before and after the plastic surgery with different facial expressions, it is possible to more easily grasp the changes before and after the plastic surgery.

빅데이터분석부(20)는, 빅데이터수집부(10)가 수집한 성형전이미지와 성형후이미지(11)의 얼굴을 기준으로 부위별 구획한다. 여기서, 구획하는 부위는 이마, 미간, 눈썹, 눈, 옆광대, 앞광대, 콧대, 코끝, 콧볼, 볼, 인디언라인, 애교살, 눈두덩이, 팔자주름, 턱, 옆턱 등이나, 이에 한정하지 않는다.The big data analysis unit 20 divides each part based on the face of the image before and after the molding 11 collected by the big data collection unit 10. Here, the segmented portion is forehead, brow, eyebrows, eyes, side cheekbones, front cheekbones, nose bridge, nose tip, nose cheek, cheek, Indian line, aegyosal, eyelid, nasolabial folds, chin, side chin, etc., but is not limited thereto.

그리고 후술할 성형희망자의 미성형얼굴이미지(31)도 부위별 구획하는데, 얼굴을 부위별 구획하는 이유는, 성형후이미지(11)와 미성형얼굴이미지(31)의 구획된 부위의 위치를 동일하게 하여, 후술할 이미지추출부(40)가 정확한 성형희망부위(32)와 일치하는 성형부위(21)를 추출할 수 있을 뿐만 아니라, 빅데이터예측부(50)가 성형예상이미지(51)를 보다 정확하게 생성할 수 있도록 하기 위함이다. 더불어, 미성형얼굴이미지(31), 성형얼굴이미지, 성형전이미지 및 성형후이미지(11)는 동일한 환경조건으로 촬영되어 부위별 추출 및 적용이 보다 용이하게 진행된다. In addition, the unshaped face image 31 of the person who wishes to undergo a cosmetic surgery, which will be described later, is also partitioned by region. The reason for partitioning the face by region is that the positions of the divided regions of the post-plastic image 11 and the unshaped face image 31 are the same By doing so, the image extracting unit 40 to be described later can extract the forming area 21 that matches the exact forming desired area 32, as well as the big data predicting unit 50 to obtain the expected forming image 51 This is to be able to create more accurately. In addition, the unmolded face image 31, the molded face image, the pre-molded image, and the post-molded image 11 are photographed under the same environmental conditions, so that extraction and application of each part are more easily performed.

또한, 빅데이터분석부(20)는, 성형전이미지와 성형후이미지(11)의 부위별 변화를 분석하여 성형부위(21)를 추출한다. 또한, 성형부위(21)는 성형수술정보로부터 추출할 수도 있다. 변화를 분석함에 있어, 성형전이미지가 성형후이미지(11)로 변화하기 위한 변화량(예를 들어, 크기변화, 위치이동변화 등)으로 분석할 수 있으며, 이미지의 변화량을 분석하는 방법에 대해서는 공지된 기술이므로 이에 상세한 설명은 생략한다. In addition, the big data analysis unit 20 extracts the molded part 21 by analyzing the changes for each part of the image before and after the molding 11. In addition, the cosmetic site 21 may be extracted from the cosmetic surgery information. In analyzing the change, it is possible to analyze the amount of change (for example, change in size, change in position, etc.) to change the image before molding into the image after molding 11, and how to analyze the amount of change in the image is known. Since this is a technology, detailed description will be omitted.

이때, 빅데이터분석부(20)는, 성형부위(21)를 성형전이미지와 성형후이미지(11)에 표시하거나, 성형수술정보로부터 추출한 성형부위(21)와 부위별 변화를 분석하여 추출한 성형부위(21)가 일치하면, 일치하는 성형부위(21)를 성형전이미지와 성형후이미지(11)에 표시한다. At this time, the big data analysis unit 20 displays the molding part 21 on the pre-molding image and the post-molding image 11, or the molding part 21 extracted from the cosmetic surgery information and the extracted molding by analyzing the change of each part. If the parts 21 match, the matching molding parts 21 are displayed on the pre-molding image and the post-molding image 11.

여기서, 성형부위(21)는 성형전이미지에서 성형을 희망하는 부위를 뜻하고, 성형후이미지(11)에는 실제 성형하여 변화한 부위를 뜻한다.Here, the molding part 21 refers to a part desired to be formed in the image before molding, and the post-molding image 11 refers to a part changed by actual molding.

이와 같이, 성형부위(21)의 일치여부를 통해 성형부위(21)를 표시하는 것은, 성형수술자의 성형부위(21)가 후술할 성형희망자의 성형희망부위(32)에 적용되어 성형희망자의 성형예상이지미를 생성하기 때문에, 이를 더 명확하게 하기 위함이다. In this way, the marking of the molding part 21 through the matching of the molding part 21 is applied to the molding part 21 of the plastic surgeon to the molding desired part 32 of the person who will be described later, and It is to make this clearer because it creates an expected image.

성형희망자분석부(30)는, 성형수술을 희망하는 성형희망자로부터 성형 전의 미성형얼굴이미지(31)를 수신하고, 수신한 미성형얼굴이미지(31)로부터 얼굴을 기준으로 부위별 구획하여 성형희망자에게 제공한다.The plastic surgery candidate analysis unit 30 receives the unshaven face image 31 before plastic surgery from the plastic surgery candidate who wishes to undergo plastic surgery, and divides the received non-shaped face image 31 based on the face into each part To provide.

또한, 성형희망자분석부(30)는, 성형희망자로부터 희망하는 성형희망부위(32)를 입력받는다. 여기서, 입력받는 성형희망부위(32)를 2개 이하로 하여, 후술할 빅데이터예측부(50)가 생성하는 성형예상이미지(51)와 미성형얼굴이미지(31)의 전체적인 변화를 줄인다.In addition, the molding desired person analysis unit 30 receives the desired molding region 32 from the molding desired person. Here, by making the number of inputted desired areas 32 to be received less than two, the overall change of the expected shaping image 51 and the unmolded face image 31 generated by the big data prediction unit 50 to be described later is reduced.

성형희망자분석부(30)는, 성형희망자가 성형을 완료한 후에, 성형희망자의 SNS 계정에 업로드된 온라인이미지를 추출하고, 추출한 온라인이미지 중에 성형희망자의 미성형얼굴이미지(31)와 유사한 온라인이미지 개수를 추출하고, 성형얼굴이미지 및 성형예상이미지(51)에 유사한 온라인이미지 개수를 추출하여, 성형희망자의 성형 전과 후에 온라인이미지의 업로드 증감률을 분석할 수 있다.The plastic surgery candidate analysis unit 30 extracts the online image uploaded to the plastic surgery applicant's SNS account after the plastic surgery applicant has completed the plastic surgery, and among the extracted online images, an online image similar to the non-shaping face image 31 of the plastic surgery applicant. By extracting the number, and extracting the number of online images similar to the cosmetic face image and the expected cosmetic image 51, it is possible to analyze the increase/decrease rate of uploading of the online image before and after the forming of the desired person.

이는, 성형희망자가 성형하기 전보다 성형한 후에, 공개적으로 외모자신감을 갖게되는지를 분석할 수 있다. This can be analyzed whether or not a person wanting to be formed has public confidence in appearance after molding rather than before molding.

그리고, 성형희망자분석부(30)는, 성형을 완료한 성형희망자의 업로드 증감률을 주기적으로 분석한다. 주기적으로 분석함으로써, 외모자신감이 성형 수술 직후부터 변화함을 확인할 수 있다. In addition, the molding applicant analysis unit 30 periodically analyzes the upload increase/decrease rate of the molding applicant who has completed the molding. By performing periodic analysis, it can be confirmed that appearance confidence changes immediately after plastic surgery.

본 발명에서의 SNS는 'Social Network Services/Sites'로 사진, 글, 댓글 등을 업로드 할 수 있는 것이며, 온라인이미지는 불특정 다수에게 공개되는 이미지이다.The SNS in the present invention is to be able to upload photos, articles, comments, etc. to'Social Network Services/Sites', and the online image is an image that is disclosed to an unspecified number of people.

이미지추출부(40)는, 빅데이터수집부(10)로부터 미성형얼굴이미지(31)와 유사한 성형전이미지를 다수 추출하고, 추출한 성형전이미지에 대응되는 성형후이미지(11)를 추출하되, 추출한 다수의 성형후이미지(11) 중에서 성형희망부위(32)와 매칭되는 성형부위(21)가 표시된 성형후이미지(11)만을 추출한다. The image extracting unit 40 extracts a number of pre-molding images similar to the unmolded face image 31 from the big data collection unit 10, and extracts the post-molding image 11 corresponding to the extracted pre-molding image, Among the extracted plurality of post-molding images 11, only the post-molding image 11 in which the shaping portion 21 matching the desired shaping portion 32 is displayed is extracted.

즉, 이미지추출부(40)는, 성형희망자의 얼굴과 전체적으로 유사한 성형전이미지를 추출하고, 그 중에서 성형희망자가 입력한 성형희망부위(32)와 일치하는 성형부위(21)가 표시된 성형후이미지(11)만을 다시 추출한다.In other words, the image extracting unit 40 extracts a pre-molding image that is generally similar to the face of a person who wishes to be formed, and among them, a post-molding image in which the forming area 21 matching the desired area 32 input by the forming person is displayed. Only (11) is extracted again.

이에 따라, 이미지추출부(40)를 통해 추출된 성형후이미지(11)는 성형희망자의 얼굴과 전체적으로 유사하고, 성형희망자가 성형수술을 희망하는 부위를 성형수술한 성형수술자의 이미지이다. 무작위의 성형수술자 이미지를 추출하지 않고, 성형희망자의 얼굴과 유사한 성형수술자의 이미지를 추출하고, 성형희망부위(32)와 성형부위(21)가 일치하는 성형후이미지(11)를 추출함으로써, 성형희망자의 조건과 최대한 맞는 상태에서 성형 후 예측되는 성형예측이미지를 보다 더 정확하게 예측할 수 있다.Accordingly, the post-molding image 11 extracted through the image extracting unit 40 is generally similar to the face of a plastic surgeon, and is an image of a plastic surgeon who has undergone plastic surgery on the area that the plastic surgeon wishes for plastic surgery. By extracting the image of the plastic surgeon similar to the face of the desired plastic surgeon without extracting a random plastic surgeon image, and extracting the post-molding image 11 that matches the desired area 32 and the plastic area 21, It is possible to more accurately predict the predicted molding image after molding in a state that matches the desired conditions as much as possible.

빅데이터예측부(50)는, 이미지추출부(40)에서 추출한 성형후이미지(11)에 표시된 성형부위(21)를 미성형얼굴이미지(31)에 적용하여 성형예상이미지(51)를 생성한다.The big data prediction unit 50 applies the shaping area 21 displayed in the post-molding image 11 extracted from the image extracting unit 40 to the unmolded face image 31 to generate a shaping predicted image 51. .

그리고 빅데이터예측부(50)는, 성형희망자에게 생성한 성형예상이미지(51)를 제공한다. 이때, 성형희망자는 성형예상이미지(51)를 통해 가상으로 성형 후를 확인할 수 있다.In addition, the big data prediction unit 50 provides a formed prediction image 51 to a person who wishes to undergo a surgery. At this time, the person who wishes to undergo molding can virtually confirm the after molding through the expected molding image 51.

한편, 빅데이터수집부(10)는, 성형전이미지와 성형후이미지(11)에 표시된 성형부위(21)의 유사도를 분석하여, 유사도에 따라 성형전이미지와 성형후이미지(11)를 다수개의 그룹으로 분류한다. 예를 들어, 유사도의 비율에 따라 0~30%이면 대그룹, 31~70%이면 중그룹, 71~100%이면 소그룹으로 분류할 수 있다.On the other hand, the big data collection unit 10 analyzes the similarity of the molding area 21 displayed on the pre-molding image and the post-molding image 11, and converts a plurality of pre-molding and post-molding images 11 according to the similarity. Classify into groups. For example, according to the ratio of similarity, 0-30% can be classified into large groups, 31-70% are classified into medium groups, and 71-100% can be classified into small groups.

대그룹은 유사도가 작아 성형 전과 후의 변화가 큰 그룹이고, 소그룹은 변화가 미미한 그룹이며, 중그룹은 대그룹과 소그룹의 중간 그룹이다. The large group is a group with large changes before and after surgery due to small similarity, the small group is a group with little change, and the middle group is a middle group between large and small groups.

그리고, 이미지추출부(40)는, 성형후이미지(11)를 추출할 때, 빅데이터수집부(10)가 분류한 그룹별로 성형희망부위(32)와 매칭되는 성형부위(21)가 표시된 성형후이미지(11)만을 추출한다. And, the image extracting unit 40, when extracting the image after the molding 11, the big data collection unit 10 classified by groups, the molding area 21 matching the desired area 32 and the molding is displayed. Only the rear image 11 is extracted.

또한, 빅데이터예측부(50)는, 그룹별로 추출한 성형후이미지(11)에 따라 성형예상이미지(51)를 각 그룹별로 생성하여 성형희망자에게 제공한다. In addition, the big data prediction unit 50 generates a molding predicted image 51 for each group according to the post-molding image 11 extracted for each group, and provides it to the desired person for molding.

이에 따라, 성형희망자는, 그룹별 제공된 성형 전과 후의 성형예상이미지(51)를 통해 예상 변화도를 그룹별로 확인하고, 성형희망자에게 어울리는 그룹을 선택할 수 있다. Accordingly, the plastic surgery applicant can check the predicted degree of change by group through the before and after molding projection images 51 provided for each group, and select a group suitable for the plastic surgery applicant.

그리고, 성형희망자는 3가지 그룹의 성형예상이미지(51)를 통해 변화정도를 통해서 다른 얼굴부위와의 비율을 미리 파악하여 선택할 수 있으며, 그 선택에 따라 성형수술의 만족도를 향상시킬 수 있다. In addition, the plastic surgery applicant can grasp and select the ratio with other facial areas through the degree of change through the three groups of expected plastic images 51, and according to the selection, the satisfaction of plastic surgery can be improved.

또한, 성형예상이미지는 성형희망부위가 성형부위로 대체됨에 따라, 성형부위가 표시된 성형후이미지의 성형수술정보를 포함한다.In addition, as the molding expected image is replaced with a molding part, the cosmetic surgery information of the post-molding image in which the molding part is displayed is included.

이에 따라, 성형희망자는 성형예상이미지를 선택하는 경우, 성형예상이미지에 포함된 성형수술정보를 확인할 수 있으며, 자신에게 적합한 성형수술이 가능한 성형외과, 의사, 비용 등을 확인할 수 있다.Accordingly, when a plastic surgery applicant selects a plastic surgery prediction image, it is possible to check the plastic surgery information included in the plastic surgery prediction image, and check the plastic surgery clinic, doctor, cost, etc. who can perform plastic surgery suitable for them.

그리고, 빅데이터예측부는, 성형희망자로부터 성형예상이미지에 대한 성형수술 예약이 요청되면, 성형예상이미지에 포함된 성형수술정보를 통해 성형외과로 성형예상이미지, 성형희망자의 개인정보를 전달하여 예약이 이루어지도록, 성형외과와 성형희망자를 연결시킨다. In addition, the Big Data Prediction Department, when a cosmetic surgery reservation is requested for a cosmetic surgery image from a cosmetic applicant, transfers the cosmetic surgery image and personal information of the cosmetic surgery candidate to the plastic surgery clinic through the cosmetic surgery information included in the cosmetic surgery image to make a reservation. To achieve this, connect the plastic surgeon and the plastic candidate.

또한, 성형희망자는 성형예상이미지를 선택하는 경우, 성형예상이미지에 포함된 성형부위와 대응되는 성형수술정보를 확인할 수 있으며, 자신에게 적합한 성형수술이 가능한 성형외과, 의사, 비용 등을 확인할 수 있다. In addition, when a plastic surgery applicant selects a plastic surgery prediction image, they can check the plastic surgery information corresponding to the plastic surgery part included in the plastic surgery prediction image, and check the plastic surgery clinic, doctor, and cost that can perform plastic surgery suitable for them. .

빅데이터평가부(60)는, 성형희망자의 성형 후의 성형얼굴이미지와 성형예상이미지(51)의 전체적인 제1유사도 및 상기 성형얼굴이미지와 성형예상이미지의 각 성형부위에 대한 제2유사도를 분석한다. 여기서, 성형희망자분석부(30)는, 성형희망자로부터 성형 후의 성형얼굴이미지를 수신한다. The big data evaluation unit 60 analyzes the overall first similarity of the cosmetic face image and the anticipated cosmetic image 51 after the cosmetic candidate, and the second similarity with respect to each forming part of the cosmetic face image and the anticipated cosmetic image. . Here, the shaping applicant analysis unit 30 receives the shaping face image after shaping from the shaping hope.

이때, 빅데이터평가부(60)는, 제1유사도보다 제2유사도의 가중치를 더 높게 설정하여 가중평균을 산출하고, 가중평균을 통해 빅데이터예측부(50)의 예측도를 평가한다.At this time, the big data evaluation unit 60 calculates a weighted average by setting the weight of the second similarity higher than that of the first similarity degree, and evaluates the predictive degree of the big data prediction unit 50 through the weighted average.

여기서, 성형 이후에 다이어트로 살이 빠지는 등 얼굴에 변화하는 부분이 있으므로, 전체적인 얼굴의 유사함을 분석한 제1유사도만을 통해 빅데이터예측부(50)의 예측도를 평가하기보다, 성형한 부위만 집중적으로 유사함을 분석한 제2유사도를 더 추가하여 평가하는 것이, 성형예상이미지(51)의 예측도를 보다 정밀하게 평가할 수 있다.Here, since there are parts that change on the face, such as losing weight due to diet after plastic surgery, rather than evaluating the predictive degree of the big data prediction unit 50 through only the first similarity that analyzed the similarity of the overall face, only the molded area Further evaluation by adding a second degree of similarity analyzed intensively for similarity can more accurately evaluate the predicted degree of the molding predicted image 51.

이와 같이, 성형예상이미지(51)의 예측도를 수치화함으로써, 성형희망자는 자신의 성형예상이미지(51) 및 성형 후의 얼굴에 좀 더 신뢰감을 갖고, 성형의 진행여부 결정에 활용할 수 있다.In this way, by numerically converting the predicted degree of the expected plastic image 51, the plastic candidate can have more confidence in his/her expected plastic image 51 and the face after the plastic surgery, and can be used to determine whether or not the plastic surgery is performed.

게다가, 딥러닝부는 성형희망자가 성형얼굴이미지의 성형부위(21)와 성형예상이미지(51)의 성형희망부위(32)를 비교하여 차이점을 추출하고, 차이점을 감소시키도록 자동으로 머신러닝을 수행하여, 성형예상이미지(51)를 생성하는 빅데이터예측부(50)의 알고리즘을 갱신한다. In addition, the deep learning unit automatically performs machine learning to extract the differences by comparing the molding part 21 of the molding face image and the molding hope part 32 of the expected molding image 51, and to reduce the difference. Thus, the algorithm of the big data prediction unit 50 that generates the predicted image 51 is updated.

이때, 빅데이터예측부(50)는 갱신된 알고리즘으로 또 다른 성형희망자의 성형예상이미지(51)를 생성하고, 빅데이터평가부(60)는 빅데이터예측부(50)의 예측도를 더 높게 평가하며, 본 발명의 빅데이터 성형컨설팅 시스템은 개선된다.At this time, the big data prediction unit 50 generates a molding predictive image 51 of another plastic candidate with the updated algorithm, and the big data evaluation unit 60 increases the prediction degree of the big data prediction unit 50. Evaluation, and the big data molding consulting system of the present invention is improved.

한편, 본 발명에 따른 성형예상이미지(51)와 그 성형예상이미지(51)를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템은, 라이프스타일제공부(70), 색채정보분석부(80) 및 퍼스널컬러선정부(90)를 더 포함한다.On the other hand, the big data molding consulting system, which provides a predicted molding image 51 and a lifestyle expected through the predicted molding image 51 according to the present invention, includes a lifestyle providing unit 70, a color information analyzing unit 80 ) And a personal color selection unit 90.

라이프스타일제공부는, SNS에 다수 유저로부터 업로드되어 공개된 온라인이미지 중에서 성형예상이미지(51)와 유사한 온라인유사이미지를 추출하고, 온라인유사이미지를 업로드한 특정유저의 라이프스타일을 분석하여 성형희망자에게 제공한다. 그리고 라이프스타일제공부(70)는, 특정유저의 온라인유사이미지를 추가로 제공할 수 있다. The lifestyle providing unit extracts an online similar image similar to the expected cosmetic image 51 from among online images uploaded and published on SNS, and analyzes the lifestyle of a specific user who uploaded the online similar image and provides it to the cosmetic applicant. do. In addition, the lifestyle providing unit 70 may additionally provide an online similar image of a specific user.

특정유저는 성형희망자의 미래 모습으로, 성형희망자에게 성형예상이미지(51) 외에 성형한 후의 라이프스타일도 함께 제공하여 성형 동기부여와 삶의 변화에 대한 기대감을 줄 수 있다.A specific user is the shape of the future of a person who wishes to undergo plastic surgery, and provides a lifestyle after plastic surgery in addition to the expected image 51 for plastic surgery, thereby motivating the plastic surgery and giving an expectation for a change in life.

또한, 라이프스타일제공부(70)는, 특정유저의 SNS에 업로드된 온라인이미지와 텍스트데이터 및 댓글을 통해 특정유저의 라이프스타일을 분석한다.In addition, the lifestyle providing unit 70 analyzes the lifestyle of a specific user through online images, text data and comments uploaded to the SNS of the specific user.

이때, 라이프스타일은, 화장 스타일, 의류 스타일, 악세서리 스타일, 음식스타일, 여행스타일을 포함한다. 더불어, 화장품, 의류, 악세사리 등의 브랜드를 더 추출하여 라이프스타일을 분석할 수 있다. 이때, 특정유저의 라이프스타일은 라이프스타일컨설턴트가 분석한 내용일 수 있다. At this time, the lifestyle includes a makeup style, a clothing style, an accessory style, a food style, and a travel style. In addition, it is possible to analyze the lifestyle by further extracting brands such as cosmetics, clothing, and accessories. In this case, the lifestyle of a specific user may be the content analyzed by the lifestyle consultant.

화장 스타일은 온라인이미지에서 특정유저의 얼굴 부위별 색으로부터 분석할 수 있으며, 의류 스타일은 외투, 모자, 스카프, 바지, 신발 등 종류로 분석할 수 있고, 악세서리 스타일은 귀걸이, 목걸이 등의 크기로 분석할 수 있다. 또한, 브랜드의 경우에는 라이프스타일컨설턴트가 추천 또는 온라인에서 특정유저가 착용한 의류와 악세사리와 유사한 이미지를 통해 분석할 수 있다.The makeup style can be analyzed from the color of a specific user's face in the online image, the clothing style can be analyzed by types such as coat, hat, scarf, pants, shoes, and the accessory style can be analyzed by the size of earrings, necklaces, etc. can do. In addition, in the case of a brand, it can be analyzed through images similar to clothing and accessories recommended by a lifestyle consultant or worn by a specific user online.

그리고, 라이프스타일제공부(70)는 다수의 특정유저에 대한 라이프스타일을 제공할 수 있다. In addition, the lifestyle providing unit 70 may provide a lifestyle for a plurality of specific users.

성형희망자는, 성형 후의 모습으로 특정유저와 같은 또는 유사한 라이프스타일을 생각할 수도 있으며, 특정유저의 라이프스타일을 참고하여 성형희망자의 라이프스타일을 더 좋은 방향으로 변경할 수 있는 계기를 갖을 수 있다. 게다가, 성형희망자는 특정유저의 라이프스타일을 통해 성형에 대한 동기부여가 발생할 수 있으며 성형수술에 대한 신뢰감을 더 향상시키고, 성형 후에 대한 불암감을 줄이고 성형수술에 임할 수 있다.The cosmetic applicant may think of a lifestyle similar to or similar to that of a specific user as the appearance after the cosmetic surgery, and may have an opportunity to change the lifestyle of the cosmetic applicant in a better direction by referring to the lifestyle of a specific user. In addition, plastic surgery applicants may be motivated for plastic surgery through the lifestyle of a specific user, further improve the confidence in plastic surgery, reduce the feeling of lightness after plastic surgery, and engage in plastic surgery.

라이프스타일제공부(70)는, 업로드 증감률을 통해 성형희망자의 외모자신감을 평가하고, 또 다른 성형희망자에게 성형희망자의 성형 후 외모자신감 평가를 제공한다. 평가는 업로드 증감률에 따라, 상승, 유지, 하락 등으로 제공할 수 있다.The lifestyle providing unit 70 evaluates the appearance confidence of the cosmetic candidate through the upload increase/decrease rate, and provides an evaluation of the cosmetic appearance confidence of the cosmetic applicant to another cosmetic applicant. Evaluation can be provided as an increase, a maintenance, a decrease, etc., depending on the upload rate.

이에 따라, 또 다른 성형희망자는, 이미 성형한 성형희망자 또는 성형수술자의 외모자신감의 평가가 증가하였음을 확인하면, 성형수술에 대한 동기부여가 될 수 있으며, 감소하였음을 확인하면 성형수술의 진행여부를 신중히 고려할 수 있는 시간을 갖을 수 있다. 이로 인해, 성형수술에 대한 객관적 판단을 할 수 있으며, 무리한 성형수술을 진행하지 않을 수 있다.Accordingly, if another plastic surgery applicant confirms that the evaluation of the appearance confidence of the plastic surgery candidate or the plastic surgeon has increased, it may be a motivation for the plastic surgery. You can take the time to consider carefully. For this reason, it is possible to make an objective judgment on plastic surgery, and it is possible not to perform excessive plastic surgery.

또한, 라이프스타일제공부(70)는, 성형희망자 또는 성형수술자를 직접 수술을 진행한 병원, 의사의 정보도 제공할 수도 있다.In addition, the lifestyle providing unit 70 may also provide information of a hospital or a doctor who directly performed surgery on a person who wishes to undergo a plastic surgery or a plastic surgeon.

또한, 라이프스타일제공부(70)는, 주기적으로 분석한 업로드 증감률에 따라 외모자신감 평가도 주기적으로 진행하여, 일정기간 동안 외모자신감 평가를 제공한다. 일정기간 중에, 업로드 증감률이 급증할 경우, 성형수술자의 외모자신감이 상승한 것이므로, 성형수술에 만족으로 판단할 뿐만 아니라, 성형 후부터 업로드 증감률이 급증한 시점까지를 성형 후에 부기가 빠지고, 수술자국 등이 사라지며 자연스러워지기까지의 기간으로 판단한다.In addition, the lifestyle providing unit 70 also periodically evaluates the appearance confidence according to the upload increase/decrease rate analyzed periodically, and provides the appearance confidence assessment for a certain period of time. During a certain period, if the upload increase/decrease rate increases rapidly, the cosmetic surgeon's appearance confidence has risen. Therefore, not only is it judged as satisfaction with the cosmetic surgery, but also swelling after plastic surgery is removed from the point when the upload increase/decrease rate increases rapidly, etc. It is judged as the period until disappears and becomes natural.

성형희망자는, 기 수술한 성형희망자 또는 성형수술자의 외모자신감 변화를 확인하고, 성형 후부터 업로드 증감률의 급증한 시기까지를 예상하여 생활하며 기다릴 수 있다. Plastic surgery applicants can check the change in appearance confidence of the plastic surgeon or the plastic surgeon who had previously undergone surgery, and anticipate the period of a sudden increase in upload increase or decrease after the plastic surgery.

보통의 성형수술자는 성형 직후부터 수술부위의 부기와 수술자국 등으로 인해 성형이 잘못되었다는 생각으로 불안감을 갖는다. 이러한 불안감을 성형희망자와 같은 부위를 성형한 성형수술자의 외모자신감 변화를 통해 해소 및 안정시키고, 성형희망자가 성형 직후에 안정적으로 일상생활을 하며, 여유있게 수술부위가 자연스러워질때까지 기다릴 수 있다.Ordinary plastic surgeons have anxiety immediately after plastic surgery because they think that plastic surgery is wrong due to swelling and surgical marks on the surgical site. This anxiety can be relieved and stabilized through changes in the appearance confidence of the plastic surgeon who has formed the same area as the plastic surgery candidate, and the plastic surgery candidate lives a stable daily life immediately after the plastic surgery, and can wait until the surgery site becomes natural.

색채정보분석부(80)는, 성형전이미지, 성형후이미지(11) 및 미성형얼굴이미지(31)의 부위별 색채정보를 분석한다. 이때 부위별은 성형전이미지와 성형후이미지(11)는 성형부위(21)이고, 미성형얼굴이미지(31)는 성형희망부위(32)이나 이에 한정하지 않는다. The color information analysis unit 80 analyzes the color information for each part of the pre-molding image, the post-molding image 11 and the unmolded face image 31. In this case, the pre-molding image and the post-molding image 11 are the shaping area 21, and the unmolded face image 31 is the desired shaping area 32, but is not limited thereto.

빅데이터예측부(50)는, 이미지추출부(40)에서 추출한 성형후이미지(11)의 성형부위(21)와 미성형얼굴이미지(31)의 성형희망부위(32)를 그레이스케일로 변환한 후, 변환한 그레이스케일의 성형희망부위(32)를 성형부위(21)로 대체하고, 미성형얼굴이미지(31)에 대체된 그레이스케일의 성형부위(21)를 미성형얼굴이미지(31)의 성형희망부위(32) 색채정보로 변환하여 컬러의 성형예상이미지(51)를 생성한다.The big data prediction unit 50 converts the shaping portion 21 of the post-molded image 11 extracted from the image extracting unit 40 and the desired shaping portion 32 of the unformed face image 31 into gray scale. After that, the converted gray-scale shaping portion 32 is replaced with the shaping portion 21, and the gray-scale shaping portion 21 replaced with the unmolded face image 31 is replaced with the unmolded face image 31. The desired area 32 is converted into color information to generate a color predicted image 51.

이는, 성형희망자와 성형수술자의 얼굴 색채가 다르기 때문에 미성형얼굴이미지(31)에 대체된 성형부위(21)의 색채를 성형희망부위(32)의 색채로 변환하여 성형예상이미지(51)가 최대한 자연스럽게 보이게 하기 위함이다. 그리고 성형희망자는 자신의 미성형얼굴이미지(31)에서 자신의 얼굴 색채는 유지하며 성형희망부위(32)만 바뀐 성형예상이미지(51)를 봄으로써, 좀 더 성형에 신뢰감을 갖을 수 있다.This is because the color of the face of the plastic surgeon is different from that of the plastic surgeon, so the color of the shaping area 21 replaced in the unshaped face image 31 is converted to the color of the desired area 32, so that the expected shaping image 51 is maximized. This is to make it look natural. And by looking at the expected plastic image 51 in which only the desired area 32 has been changed while maintaining the color of his face in his unshaped face image 31, the person who wishes to undergo plastic surgery can have more confidence in plastic surgery.

퍼스널컬러선정부(90)는, 성형희망자의 퍼스널컬러를 분석하고 성형희망자에게 제공하여 라이프스타일을 갖는데에 도움이 있도록 할 수 있다. The personal color selection unit 90 may analyze the personal color of the person who wishes to undergo cosmetic surgery and provide it to the person who wishes to undergo cosmetic surgery to help them have a lifestyle.

퍼스널컬러선정부(90)는, 특정색상을 계절색상으로 분류하고, 계절색상을 명도와 채도를 변화하여 세부색상으로 분류한 색상을 이용하여 퍼스널컬러를 선정한다. The personal color selection unit 90 classifies a specific color as a seasonal color, and selects a personal color using a color classified as a detailed color by changing the brightness and saturation of the seasonal color.

이러한 퍼스널컬러선정부(90)는, 윤곽라인추출부, 특정색상추출부, 세부색상추출부를 포함한다. The personal color selection unit 90 includes an outline line extraction unit, a specific color extraction unit, and a detailed color extraction unit.

윤곽라인추출부는, 미성형얼굴이미지(31)의 제1얼굴윤곽라인을 추출한다.The contour line extracting unit extracts the first facial contour line of the unformed face image 31.

특정색상추출부는, 제1얼굴윤곽라인을 기준으로 외측 부분에 다수의 색상을 오버랩하며, 성형희망자로부터 어느 하나의 색상을 선택받아 특정색상을 추출한다. The specific color extracting unit overlaps a plurality of colors on the outer portion based on the first facial contour line, and extracts a specific color by selecting any one color from a person who wishes to form the shape.

이때, 특정색상은 빨강(Red), 분홍(Pink), 노랑(Yellow), 초록(Green), 파랑(Blue) 및 갈색(Brown) 등 원색을 말하고, 이 외에 또 다른 색상을 포함할 수 있다. 이러한 특정색상으로 성형희망자에게 어울리는 색상을 파악할 수 있다.At this time, the specific color refers to primary colors such as red, pink, yellow, green, blue, and brown, and may include another color. With this specific color, it is possible to grasp the color that suits the person who wishes to make a cosmetic.

계절색상추출부는, 특정색상을 4계절 유형별로 기 분류한 계절색상을 제1얼굴윤곽라인의 외측부분에 오버랩하여 성형희망자로부터 하나 이상의 계절색상을 선택받아 추출한다. 이때, 특정색상을 통하여 성형희망자에게 어울리는 계절색상을 파악할 수 있다.The seasonal color extracting unit extracts one or more seasonal colors selected from a cosmetic applicant by overlapping the seasonal colors pre-categorized by four season types on the outer portion of the first facial contour line. At this time, through the specific color, it is possible to grasp the seasonal color that suits the person who wishes to make a cosmetic.

예를 들어, 특정색상이 노랑이면, 노랑을 일본 색채 연구 배색 체계에 따라 4계절로 분류한 계절색상을 성형희망자에게 비교하여, 어느 계절색상과 어울리는지 파악한다.For example, if the specific color is yellow, the seasonal colors classified yellow into four seasons according to the Japanese color research color scheme are compared to those who wish to make cosmetic products to determine which season colors match.

일본 PCCS(일본 색채 연구 배색 체계) 색조표를 통해 봄, 여름, 가을, 겨울의 계절색상으로 분류한다.It is classified into the seasonal colors of spring, summer, autumn, and winter through the Japanese PCCS (Japanese Color Research Coloration System) color table.

봄의 색상은 선명한(vivid), 강한(strong), 밝은(light), 연한(pale)에 해당하는 색상들이다. The colors of spring are vivid, strong, light, and pale.

여름의 색상은 탁한(dull), 회색(grayish, 쥐색), 부드러운(soft), 밝은 회색(light grayish), 연한(pale), 흰(white)에 해당하는 색상들이다. Summer colors are dull, grayish, soft, light grayish, pale, and white.

가을의 색상은 부드러운(soft), 탁한(dull), 어두운(dark), 진한(deep)에 해당하는 색상들이다.The colors of autumn are soft, dull, dark, and deep colors.

겨울의 색상은 흰(white), 부드러운(soft), 선명한(vivid), 검은(blackish), 어두운(dark)에 해당하는 색상들이다.Winter colors are white, soft, vivid, blackish, and dark.

세부색상추출부는, 계절색상추출부로 추출된 계절색상을 명도와 채도의 변화에 따라 1 내지 8개로 기 분류한 세부색상을 제1얼굴윤곽라인의 외측부분에 오버랩하여 성형희망자로부터 하나 이상의 세부색상을 선택받아 추출한다.The detailed color extraction unit overlaps the outer portion of the first facial contour line with the detailed colors pre-categorized into 1 to 8 seasonal colors extracted by the seasonal color extraction unit according to the change in brightness and saturation to obtain one or more detailed colors from the shaper. Select and extract.

예를 들어, 노랑의 4계절 색상을 비교했을 때, 성형희망자가 여름계절색상을 선택하면, 선택된 여름계절의 노랑 색상을 명도와 채도의 변화로 분류한 세부색상과 비교한다. 그리고 성형희망자는 어느 하나의 세부색상을 선택한다. For example, when comparing the four season colors of yellow, if a person who wants to make a shape selects a summer season color, the yellow color of the selected summer season is compared with the detailed colors classified by changes in brightness and saturation. And the cosmetic applicant chooses one of the detailed colors.

이렇게 성형희망자에게 어울리는 계절색상과 세부색상이 성형희망자의 퍼스널컬러가 된다.In this way, the seasonal colors and detailed colors that suit the cosmetic applicant become the personal color of the cosmetic applicant.

라이프스타일제공부(70)는, 온라인이미지 중에서 계절색상추출부가 추출한 계절색상과 세부색상추출부가 추출한 세부색상에 대응되는 의류색상이 포함된 온라인의류이미지를 추출하여 성형희망자에게 제공한다.The lifestyle providing unit 70 extracts an online clothing image including a seasonal color extracted by the seasonal color extraction unit and a clothing color corresponding to the detailed color extracted by the detailed color extraction unit from the online image and provides it to a cosmetic applicant.

이에 따라, 성형희망자는 라이프스타일제공부(70)가 제공하는 온라인의류이미지를 통하여 자신에게 어울리는 의류를 살펴볼 수 있고, 성형을 통해 바뀌는 외모와 더불어 라이프스타일도 퍼스널컬러와 온라인의류이미지를 통해 바꿀 수 있다.Accordingly, a person who desires to make a cosmetic can look at clothing that suits him or her through the online clothing image provided by the lifestyle providing unit 70, and change his or her lifestyle through personal color and online clothing image. have.

한편, 윤곽라인추출부는, 온라인의류이미지에서 제2얼굴윤곽라인을 추출하고, 성형예상이미지(51)에서 제3얼굴윤곽라인을 추출한다.On the other hand, the contour line extracting unit extracts the second facial contour line from the online clothing image, and extracts the third facial contour line from the molding predicted image 51.

이때, 빅데이터예측부(50)는, 제2얼굴윤곽라인을 기준으로 내측부분에 제3얼굴윤곽라인을 기준으로 내측부분인 성형예상이미지(51)의 얼굴을 오버랩하여 온라인의류이미지를 예측한다. At this time, the big data prediction unit 50 predicts the online clothing image by overlapping the face of the plastic predicted image 51, which is an inner part, based on the third facial contour line on the inner part based on the second facial contour line. .

예측된 온라인의류이미지는, 제2얼굴윤곽라인을 기준으로 내측부분에 제3얼굴윤곽라인을 기준으로 내측부분인 성형예상이미지(51)의 얼굴이 오버랩된 이미지이다. 즉, 온라인의류이미지는 성형희망자의 성형예상이미지(51) 얼굴이 온라인의류이미지의 얼굴에 합성된 상태인 것이다.The predicted online clothing image is an image in which the face of the predicted plastic image 51, which is an inner part based on the third facial contour line, overlaps with the inner part based on the second facial contour line. In other words, the online clothing image is a state in which the face of the expected cosmetic image 51 of a cosmetic candidate is synthesized with the face of the online clothing image.

이를 통해서, 성형희망자는 성형 후 모습을 간접적으로 확인하는 동시에, 자신에게 어울리는 색상의 의류를 착용한 모습도 살펴볼 수 있다.Through this, a person who wishes to undergo plastic surgery can indirectly check his or her appearance after plastic surgery, while also viewing the appearance of wearing clothing of a color that suits them.

본 발명의 성형예상이미지(51)와 그 성형예상이미지(51)를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템을 통해, 성형뿐만 아니라 성형 후의 미래 모습을 예측해보며, 성형희망자는 성형에 대한 동기부여와 더불어 성형에 대한 신뢰감을 갖게 된다.Through the big data molding consulting system that provides the expected molding image 51 of the present invention and the expected lifestyle through the expected molding image 51, not only the molding but also the future shape after molding is predicted. In addition to motivating them, they have a sense of trust in plastic surgery.

한편, 미성형얼굴이미지는, 성형희망자가 화장하기 전의 이미지이다. On the other hand, the unshaped face image is the image before the cosmetic candidate puts on makeup.

그리고, 빅데이터분석부는, 성형희망자가 성형하기 전, SNS에 업로드한 온라인이미지를 추출하고, 미성형얼굴이미지와 온라인이미지를 비교한다. In addition, the big data analysis unit extracts the online image uploaded to SNS before the plastic surgery applicant is plasticized, and compares the unshaped face image with the online image.

이때, 빅데이터분석부는, 미성형얼굴이미지와 온라인이미지에서 얼굴을 기준으로 부위별 구획한 후, 구획한 부위별로 차이정도를 비교한다. 그리고, 차이정도가 가장 큰 부위를 성형예상부위로 선정한다.At this time, the big data analysis unit divides the unshaped face image and the online image for each part based on the face, and then compares the degree of difference for each divided part. And, the area with the largest difference is selected as the expected plasticity area.

이때, 빅데이터예측부는, 성형외과로 성형예상부위도 함께 전달할 수 있다.At this time, the big data prediction unit may also deliver the expected plastic surgery area to the plastic surgery clinic.

그리고 성형예상부위를 전달받은 성형외과는, 성형예상부위를 통해 성형희망자의 개인적 아름다움 기준을 파악하고, 성형예상부위와 성형희망부위를 고려한 성형 가능여부를 판단하며, 성형희망자와 보다 원활한 상담할 수 있다. In addition, the plastic surgeon who received the expected area of plastic surgery can grasp the individual beauty standards of the desired person through the expected area, determine whether or not plastic surgery is possible considering the expected area and the area desired for plastic surgery, and have a more smooth consultation with the desired plastic surgery. have.

본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구의 범위에 의하여 나타내어지며, 특허청구의 범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다. 더불어, 상술하는 과정에서 기술된 구성의 작동순서는 반드시 시계열적인 순서대로 수행될 필요는 없으며, 각 구성 및 단계의 수행 순서가 바뀌어도 본 발명의 요지를 충족한다면 이러한 과정은 본 발명의 권리범위에 속할 수 있음은 물론이다.Those of ordinary skill in the art to which the present invention pertains will appreciate that the present invention can be implemented in other specific forms without changing the technical spirit or essential features thereof. Therefore, it should be understood that the embodiments described above are illustrative in all respects and not limiting. The scope of the present invention is indicated by the scope of the claims to be described later rather than the detailed description, and all changes or modified forms derived from the meaning and scope of the claims and their equivalent concepts are included in the scope of the present invention. Must be interpreted. In addition, the order of operation of the configurations described in the above-described process does not necessarily need to be performed in a time-series order, and even if the execution order of each configuration and step is changed, if the gist of the present invention is satisfied, such a process will fall within the scope of the present invention. Of course you can.

10 : 빅데이터수집부 11 : 성형후이미지
20 : 빅데이터분석부 21 : 성형부위
30 : 성형희망자분석부 31 : 미성형얼굴이미지
32 : 성형희망부위 40 : 이미지추출부
50 : 빅데이터예측부 51 : 성형예상이미지
60 : 빅데이터평가부 70 : 라이프스타일제공부
80 : 색채정보분석부 90 : 퍼스널컬러선정부
10: Big data collection unit 11: Image after molding
20: big data analysis unit 21: molding area
30: plastic surgery candidate analysis unit 31: unshaped face image
32: desired area for forming 40: image extraction unit
50: big data prediction unit 51: expected plastic surgery image
60: Big Data Evaluation Department 70: Lifestyle Provision Department
80: color information analysis department 90: personal color selection department

Claims (8)

성형을 완료한 성형수술자의 성형전이미지와 성형후이미지에 대한 빅데이터를 수집하는 빅데이터수집부;
상기 빅데이터수집부가 수집한 성형전이미지와 성형후이미지를 얼굴을 기준으로 부위별 구획하고, 상기 성형전이미지와 성형후이미지의 부위별 변화를 분석하여 성형부위를 추출하고, 추출한 성형부위를 상기 성형전이미지와 성형후이미지에 표시하는 빅데이터분석부;
성형수술을 희망하는 성형희망자로부터 성형 전의 미성형얼굴이미지를 수신하고, 수신한 미성형얼굴이미지로부터 얼굴을 기준으로 부위별 구획하여 상기 성형희망자에게 제공하고, 상기 성형희망자로부터 희망하는 성형희망부위를 입력받는 성형희망자분석부;
상기 빅데이터수집부로부터 상기 미성형얼굴이미지와 유사한 성형전이미지를 다수 추출하고, 추출한 성형전이미지에 대응되는 성형후이미지를 추출하되, 추출한 다수의 성형후이미지 중에서 상기 성형희망부위와 매칭되는 성형부위가 표시된 성형후이미지만을 추출하는 이미지추출부;
상기 이미지추출부에서 추출한 성형후이미지에 표시된 성형부위를 상기 미성형얼굴이미지에 적용하여 성형예상이미지를 생성하고, 상기 성형희망자에게 제공하는 빅데이터예측부; 및
상기 성형희망자의 성형 후의 성형얼굴이미지와 성형예상이미지의 전체적인 제1유사도 및 상기 성형얼굴이미지와 성형예상이미지의 각 성형부위에 대한 제2유사도를 분석하고, 상기 제1유사도보다 제2유사도의 가중치를 더 높게 설정하여 가중평균을 산출하고, 가중평균을 통해 상기 빅데이터예측부의 예측도를 평가하는 빅데이터평가부;를 포함하고,
상기 성형전이미지, 성형후이미지 및 미성형얼굴이미지의 부위별 색채정보를 분석하는 색채정보분석부;를 더 포함하고,
상기 빅데이터예측부는, 상기 이미지추출부에서 추출한 성형후이미지의 성형부위와 상기 미성형얼굴이미지의 성형희망부위를 그레이스케일로 변환한 후, 변환한 그레이스케일의 성형희망부위를 성형부위로 대체하고, 대체된 그레이스케일의 성형부위를 상기 미성형얼굴이미지의 성형희망부위 색채정보로 변환하여 컬러의 성형예상이미지를 생성하는 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
A big data collection unit that collects big data on the image before and after the plastic surgery of the plastic surgeon who has completed the plastic surgery;
The pre-molding image and the post-molding image collected by the big data collection unit are divided by parts based on the face, and the change of the pre-molding image and the post-molding image is analyzed to extract the molded part, and the extracted molded part is recalled. Big data analysis unit for displaying the image before and after the molding;
Receives an unshaped face image before plastic surgery from a plastic surgeon who wishes to undergo plastic surgery, divides the received non-shape face image by part based on the face and provides it to the plastic surgery candidate, and provides the desired plastic surgery area from the plastic surgery candidate. A plastic surgery candidate analysis unit receiving input;
Extracting a plurality of pre-molding images similar to the unmolded face image from the big data collection unit, extracting a post-molding image corresponding to the extracted pre-molding image, and forming a shape matching the desired area of the extracted multiple post-molding images An image extracting unit that extracts only the post-molded image in which the portion is displayed;
A big data prediction unit for generating a shaping prediction image by applying the shaping portion displayed in the post-molding image extracted from the image extracting unit to the unmolded face image, and providing it to the shaping applicant; And
Analyzing the overall first similarity of the cosmetic face image and the expected cosmetic image after the cosmetic candidate, and the second similarity for each cosmetic part of the cosmetic face image and the cosmetic predicted image, and the weight of the second similarity rather than the first similarity Including; a big data evaluation unit for calculating a weighted average by setting to higher, and evaluating the predictability of the big data prediction unit through the weighted average,
Further comprising a; color information analysis unit for analyzing the color information for each part of the pre-molding image, the post-molding image and the unmolded face image,
The big data prediction unit converts the shaping portion of the post-molded image extracted from the image extracting unit and the desired shaping portion of the unformed face image into gray scale, and then replaces the shaping desired portion of the converted gray scale with a shaping portion. , A molding projected image characterized in that the replacement grayscale molding part is converted into color information of the molding desired part of the unformed face image to generate a color molding projected image and a lifestyle expected through the molding projected image. Big data molding consulting system provided.
제1항에 있어서,
SNS에 다수 유저로부터 업로드되어 공개된 온라인이미지 중에서 상기 성형예상이미지와 유사한 온라인유사이미지를 추출하고, 상기 온라인유사이미지를 업로드한 특정유저의 라이프스타일을 분석하여 상기 성형희망자에게 제공하는 라이프스타일제공부;를 더 포함하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 1,
A lifestyle providing unit that extracts an online similar image similar to the expected cosmetic image from among online images uploaded and published on SNS, analyzes the lifestyle of a specific user who uploaded the online similar image, and provides it to the cosmetic applicant A big data molding consulting system that provides an anticipated plastic surgery image and a lifestyle expected through the expected plastic surgery image.
삭제delete 제2항에 있어서,
상기 미성형얼굴이미지의 제1얼굴윤곽라인을 추출하는 윤곽라인추출부와,
상기 제1얼굴윤곽라인을 기준으로 외측 부분에 다수의 색상을 오버랩하며, 상기 성형희망자로부터 어느 하나의 색상을 선택받아 특정색상을 추출하는 특정색상추출부와,
상기 특정색상을 4계절 유형별로 기 분류한 계절색상을 상기 제1얼굴윤곽라인의 외측부분에 오버랩하여 상기 성형희망자로부터 하나 이상의 계절색상을 선택받아 추출하는 계절색상추출부와,
상기 계절색상추출부로 추출된 계절색상을 명도와 채도의 변화에 따라 1 내지 8개로 기 분류한 세부색상을 상기 제1얼굴윤곽라인의 외측부분에 오버랩하여 상기 성형희망자로부터 하나 이상의 세부색상을 선택받아 추출하는 세부색상추출부를 포함하는 퍼스널컬러선정부;를 더 포함하고,
상기 라이프스타일제공부는, 상기 온라인이미지 중에서 상기 계절색상추출부가 추출한 계절색상과 세부색상추출부가 추출한 세부색상에 대응되는 의류색상이 포함된 온라인의류이미지를 추출하여 상기 성형희망자에게 제공하는 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 2,
An outline line extracting unit for extracting a first facial outline line of the unshaped face image,
A specific color extracting unit that overlaps a plurality of colors on an outer portion based on the first facial contour line, and extracts a specific color by selecting one color from the person who wishes to form the shape;
A seasonal color extracting unit that selects and extracts one or more seasonal colors from the cosmetic applicant by overlapping the seasonal colors pre-categorized by four season types on the first facial contour line;
By overlapping the outer portion of the first facial contour line, the detailed colors, pre-categorized into 1 to 8 seasonal colors extracted by the seasonal color extracting unit according to the change in brightness and saturation, one or more detailed colors are selected from the cosmetic applicant. Further comprising; a personal color selection unit including a detailed color extraction unit to be extracted,
The lifestyle providing unit extracts an online clothing image including a seasonal color extracted by the seasonal color extraction unit and a clothing color corresponding to the detailed color extracted by the detailed color extraction unit from the online image and provides it to the cosmetic applicant. A big data plastic surgery consulting system that provides an expected plastic surgery image and a lifestyle expected through the expected plastic surgery image.
제4항에 있어서,
상기 윤곽라인추출부는, 상기 온라인의류이미지에서 제2얼굴윤곽라인을 추출하고, 상기 성형예상이미지에서 제3얼굴윤곽라인을 추출하며,
상기 온라인의류이미지는, 상기 제2얼굴윤곽라인을 기준으로 내측부분에 상기 제3얼굴윤곽라인을 기준으로 내측부분인 상기 성형예상이미지의 얼굴을 오버랩하여, 상기 성형희망자의 성형예상이미지 얼굴이 상기 온라인의류이미지의 얼굴에 합성된 상태인 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 4,
The outline line extracting unit extracts a second facial contour line from the online clothing image, and extracts a third facial contour line from the molding predicted image,
The online clothing image overlaps the face of the expected shaping image, which is an inner part based on the third facial contour line, on the inner part based on the second facial contour line, so that the face of the shaping prospective image A big data cosmetic consulting system that provides an expected cosmetic image and a lifestyle predicted through the cosmetic image, characterized in that it is synthesized on the face of an online clothing image.
제2항에 있어서,
상기 라이프스타일제공부는,
상기 특정유저의 SNS에 업로드된 온라인이미지와 텍스트데이터 및 댓글을 통해 상기 특정유저의 화장 스타일, 의류 스타일, 악세서리 스타일, 음식스타일, 여행스타일 및 화장스타일을 포함하는 라이프스타일을 분석하는 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 2,
The lifestyle providing unit,
Analyzing the lifestyle including the makeup style, clothing style, accessory style, food style, travel style, and makeup style of the specific user through the online image and text data and comments uploaded to the specific user's SNS. A big data plastic surgery consulting system that provides an expected plastic surgery image and a lifestyle expected through the expected plastic surgery image.
제6항에 있어서,
상기 성형희망자분석부는,
상기 성형희망자가 성형을 완료한 후에, 상기 성형희망자의 SNS 계정에 업로드된 온라인이미지를 추출하고, 추출한 온라인이미지 중에 상기 성형희망자의 미성형얼굴이미지와 유사한 온라인이미지 개수를 추출하고, 성형얼굴이미지 및 성형예상이미지에 유사한 온라인이미지 개수를 추출하여, 상기 성형희망자의 성형 전과 후에 온라인이미지의 업로드 증감률을 분석하고,
상기 라이프스타일제공부는,
상기 업로드 증감률을 통해 상기 성형희망자의 외모자신감을 평가하고, 또 다른 성형희망자에게 성형희망자의 성형 후 외모자신감 평가를 제공하는 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 6,
The cosmetic candidate analysis unit,
After the cosmetic applicant completes the cosmetic surgery, extract the online image uploaded to the SNS account of the cosmetic applicant, extract the number of online images similar to the unformed face image of the cosmetic applicant among the extracted online images, and By extracting the number of online images similar to the expected cosmetic image, analyze the upload increase/decrease rate of the online image before and after the molding of the cosmetic candidate,
The lifestyle providing unit,
An expected cosmetic image and a lifestyle predicted through the cosmetic image, characterized in that it evaluates the appearance confidence of the cosmetic candidate through the upload increase/decrease rate, and provides an evaluation of the appearance confidence of the cosmetic applicant to another cosmetic applicant. Big data molding consulting system that provides.
제1항에 있어서,
상기 빅데이터수집부는, 상기 성형전이미지와 성형후이미지에 표시된 성형부위의 유사도를 분석하여, 유사도에 따라 성형전이미지와 성형후이미지를 다수개의 그룹으로 분류하고,
상기 이미지추출부는, 상기 성형후이미지를 추출할 때, 상기 빅데이터수집부가 분류한 그룹별로 성형희망부위와 매칭되는 성형부위가 표시된 성형후이미지만을 추출하며,
상기 빅데이터예측부는, 상기 그룹별로 추출한 성형후이미지에 따라 성형예상이미지를 그룹별로 생성하여 성형희망자에게 제공하는 것을 특징으로 하는 성형예상이미지와 그 성형예상이미지를 통해 예상되는 라이프스타일을 제공하는 빅데이터 성형컨설팅 시스템.
The method of claim 1,
The big data collection unit analyzes the similarity of the molding area displayed on the pre-molding image and the post-molding image, and classifies the pre-molding image and the post-molding image into a plurality of groups according to the similarity,
The image extracting unit, when extracting the post-molding image, extracts only the post-molding image in which the shaping portion matching the desired shaping portion is displayed for each group classified by the big data collection unit,
The big data prediction unit generates a molding predicted image for each group according to the post-molding image extracted for each group and provides it to the desired person. Data molding consulting system.
KR1020200040959A 2020-04-03 2020-04-03 Big Data Molding Consulting System KR102195033B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200040959A KR102195033B1 (en) 2020-04-03 2020-04-03 Big Data Molding Consulting System

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200040959A KR102195033B1 (en) 2020-04-03 2020-04-03 Big Data Molding Consulting System

Publications (1)

Publication Number Publication Date
KR102195033B1 true KR102195033B1 (en) 2020-12-24

Family

ID=74087411

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200040959A KR102195033B1 (en) 2020-04-03 2020-04-03 Big Data Molding Consulting System

Country Status (1)

Country Link
KR (1) KR102195033B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102323667B1 (en) * 2021-03-24 2021-11-09 이경수 Method and apparatus for providing simulation information for body management procedure using artificial intelligence

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150001031A (en) * 2013-06-26 2015-01-06 아주대학교산학협력단 Apparatus and method for modeling a personalized lifestyle
KR20180070293A (en) * 2016-12-16 2018-06-26 김효진 Apparatus and method for matching personal color
KR20190079215A (en) 2017-12-27 2019-07-05 주식회사 비앤에이치코리아 Deep learning-based virtual plastic surgery device for providing virtual plastic surgery image customers by analyzing big data on before and after image of plurality of person who has experience of a plastic surgery

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150001031A (en) * 2013-06-26 2015-01-06 아주대학교산학협력단 Apparatus and method for modeling a personalized lifestyle
KR20180070293A (en) * 2016-12-16 2018-06-26 김효진 Apparatus and method for matching personal color
KR20190079215A (en) 2017-12-27 2019-07-05 주식회사 비앤에이치코리아 Deep learning-based virtual plastic surgery device for providing virtual plastic surgery image customers by analyzing big data on before and after image of plurality of person who has experience of a plastic surgery

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102323667B1 (en) * 2021-03-24 2021-11-09 이경수 Method and apparatus for providing simulation information for body management procedure using artificial intelligence

Similar Documents

Publication Publication Date Title
CN101779218B (en) Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program
JP3408524B2 (en) Makeup advice providing method and makeup advice providing program
CN109310196B (en) Makeup assisting device and makeup assisting method
US20070047761A1 (en) Methods Of Analyzing Human Facial Symmetry And Balance To Provide Beauty Advice
JP3582458B2 (en) Makeup advice system
US20210406996A1 (en) Systems and methods for improved facial attribute classification and use thereof
Eckert et al. Facial cosmetics database and impact analysis on automatic face recognition
CN106934073A (en) Face comparison system, method and mobile terminal based on three-dimensional image
CN101755288A (en) Method and apparatus for realistic simulation of wrinkle aging and de-aging
CN110960036A (en) Intelligent mirror system and method with skin and makeup beautifying guide function
KR20200045759A (en) Personal color matching styling system
KR102195033B1 (en) Big Data Molding Consulting System
KR20210004596A (en) Personalized color app recommendations by artificial intelligence
KR100767133B1 (en) Makeup color image sorting method and makeup color image map
US20210279933A1 (en) Method and system to provide a computer-modified visualization of the desired face of a person
CN114305334A (en) Intelligent beauty method, device, equipment and storage medium
KR102195032B1 (en) Big Data Plastic Surgery Recommendation System
KR20190074955A (en) Method and system for facial features analysis and delivery of personalized advice
JP6515459B2 (en) Total beauty advice method
Varshovi Facial makeup detection using HSV color space and texture analysis
JP5782540B2 (en) Beauty counseling method
JP4893968B2 (en) How to compose face images
Feng et al. Quantifying the makeup effect in female faces and its applications for age estimation
KR20220051516A (en) Personal color diagnostic method and system based on machine learning and augmented reality
Choudhary et al. Indexing facial attractiveness and well beings using machine learning

Legal Events

Date Code Title Description
GRNT Written decision to grant