KR20220075482A - Virtual Glasses Fitting System and Method - Google Patents

Virtual Glasses Fitting System and Method Download PDF

Info

Publication number
KR20220075482A
KR20220075482A KR1020200163585A KR20200163585A KR20220075482A KR 20220075482 A KR20220075482 A KR 20220075482A KR 1020200163585 A KR1020200163585 A KR 1020200163585A KR 20200163585 A KR20200163585 A KR 20200163585A KR 20220075482 A KR20220075482 A KR 20220075482A
Authority
KR
South Korea
Prior art keywords
user
glasses
face
fitting
unit
Prior art date
Application number
KR1020200163585A
Other languages
Korean (ko)
Inventor
김강민
Original Assignee
주식회사 띵킹프렌즈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 띵킹프렌즈 filed Critical 주식회사 띵킹프렌즈
Priority to KR1020200163585A priority Critical patent/KR20220075482A/en
Publication of KR20220075482A publication Critical patent/KR20220075482A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0641—Shopping interfaces
    • G06Q30/0643—Graphical representation of items or shoppers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 가상 안경피팅시스템 및 방법에 관한 것으로, 구체적으로는 사용자가 원하는 안경을 가상으로 피팅함으로써 안경점을 방문하지 않거나 또는 안경점에 비치되어 있지 않은 안경까지 피팅할 수 있는 가상 안경피팅시스템 및 방법에 관한 것이다.
본 발명은 사용자가 원하는 안경을 가상으로 피팅할 수 있도록 하는 가상 안경피팅시스템을 제공함으로써 폭넓은 종류의 안경테를 선택할 수 있으며 안경점을 방문하지 않더라도 안경을 시착해볼 수 있어서 사용자에게 편리함을 제공하는 이점이 있다.The present invention relates to a virtual glasses fitting system and method, and more particularly, to a virtual glasses fitting system and method capable of fitting glasses that are not provided in an optician or do not visit an optician by virtually fitting the glasses desired by a user. it's about
The present invention provides a virtual glasses fitting system that enables a user to virtually fit desired glasses, so that a wide range of eyeglass frames can be selected, and the user can try on glasses without visiting an optician, thereby providing convenience to the user. have.

Description

가상 안경피팅시스템 및 방법{Virtual Glasses Fitting System and Method}Virtual Glasses Fitting System and Method

본 발명은 가상 안경피팅시스템 및 방법에 관한 것으로, 구체적으로는 사용자가 원하는 안경을 가상으로 피팅함으로써 안경점을 방문하지 않거나 또는 안경점에 비치되어 있지 않은 안경까지 피팅할 수 있는 가상 안경피팅시스템 및 방법에 관한 것이다.The present invention relates to a virtual glasses fitting system and method, and more particularly, to a virtual glasses fitting system and method capable of fitting glasses that are not provided in an optician or do not visit an optician by virtually fitting the glasses desired by a user. it's about

컴퓨터와 통신 기술의 급진적인 발달은 인류사회에 커다란 변화를 가지고 왔다. 이와 함께, 다양한 컴퓨터, 예컨대, 휴대가 가능한 노트북, 태블릿 컴퓨터, 스마트 폰 등의 등장과 함께 안경원에서 사용하는 여러 장비들은 보다 그 기능이 인터넷 및 장비를 더욱 효율적으로 움직일 수 있는 지능형 소프트웨어와 결합하여 보다 다양화/다기능화 되는 방향으로 진화하고 있다.The radical development of computer and communication technology has brought about great changes to human society. At the same time, with the advent of various computers, for example, portable laptops, tablet computers, and smart phones, various equipment used in the optician's office are more effective in combination with the Internet and intelligent software that can move equipment more efficiently. It is evolving toward diversification/multifunctionality.

안경도 옷이나 액세서리처럼 패션화 되고 있고, 개성을 연출하는 패션의 일부로 인식되고 있다. 어떤 재질과 디자인의 안경을 쓰느냐에 따라 그 사람의 패션 감각과 성격까지도 생각하게 하는 중요한 역할을 하고 있다. Glasses are becoming fashionable like clothes and accessories, and are recognized as a part of fashion that expresses individuality. Depending on the material and design of the glasses you wear, it plays an important role in making you think about a person's fashion sense and personality.

안경을 선택할 경우 안경의 광학적 측면과 미용적 측면을 고려해야 한다. 안경 착용시 인간의 시력을 보완하여 정상적인 시력을 갖도록 하고 불편 없이 일상 생활을 할 수 있도록 해주는 것을 광학적인 측면이라고 하면, 광학적인 측면에서는 일반 안경 구매자의 의견 보다 안경사와 같은 전문가의 의견이 안경 선택에 더욱 큰 영향을 미친다. 즉, 시력 측정에 의한 안경 도수를 반영한 렌즈의 선택, 안경의 무게 등의 경우에는 소비자의 기호보다는 전문가에 의한 정확한 처방을 따라 선택해야 한다.When choosing glasses, you should consider the optical and cosmetic aspects of the glasses. If the optical aspect is to supplement human eyesight when wearing glasses, to have normal vision and to enable daily life without discomfort, in the optical aspect, the opinions of experts such as opticians are more important than the opinions of general spectacle buyers in choosing eyeglasses. have a greater impact That is, in the case of selection of lenses reflecting the power of eyeglasses by eye measurement, weight of eyeglasses, etc., it is necessary to select according to the exact prescription of the expert rather than the preference of the consumer.

그러나, 미용적인 측면에서는 소비자의 얼굴형에 따른 안경테의 모양, 선글라스의 렌즈의 색깔 등의 선택은 전문가의 조언을 받아 소비자 스스로 선택할 수 있는 부분이다. 종래 안경 구매자는 안경점에 직접 가서 안경을 직접 써 보고 안경사와 같은 전문가의 조언을 받아 자신의 얼굴형에 맞는 안경을 골라왔다. However, from a cosmetic point of view, the shape of the eyeglass frame according to the face shape of the consumer, the color of the lens of the sunglasses, etc. can be selected by the consumer with the advice of an expert. Conventional spectacle purchasers have been to go to an optician directly, try on glasses, and receive advice from experts, such as opticians, to select glasses that fit their face shape.

한편, 최근 인터넷을 통한 전자 상거래의 증가로 인터넷 쇼핑이 증가하고 있다. 이 경우, 소비자는 단지 자신이 사고자 하는 상품의 카탈로그나 외형만을 보고 구매해야하는 제한이 있다. 특히, 구매하고자하는 상품이 사람의 신체, 체형에 민감한 경우에는 기존의 인터넷 쇼핑으로는 소비자가 원하는 상품을 구매하기에는 어려움이 있었다. 따라서, 소비자가 자신의 구매하고자하는 상품을 직접 자신의 신체에 씌워본 후 자신에게 가장 잘 어울리는 상품을 선택하는 방식이 필요하다. On the other hand, with the recent increase in e-commerce through the Internet, Internet shopping is increasing. In this case, there is a limitation in that the consumer has to purchase only by looking at the catalog or appearance of the product he wants to buy. In particular, when the desired product is sensitive to a person's body and body type, it is difficult to purchase the product desired by the consumer through conventional Internet shopping. Therefore, there is a need for a method in which a consumer chooses a product that best suits them after putting the product they want to purchase directly on their body.

특히, 안경의 경우 인터넷 등을 통한 온라인 판매는 소비자 자신에게 잘 어울리는 안경을 선택할 수 있는 환경을 제공하는데 많은 어려움이 있다. 안경은 의 류, 액세서리, 모자의 경우와 달리 패션과 같은 미용적 측면 외에도 인간의 시력을 보안하기 위한 의료 기기로도 볼 수 있는 점에서 전문가의 도움 없이 소비자 스스로의 안경 선택에 의한 온라인 판매는 곤란하다. In particular, in the case of eyeglasses, online sales through the Internet, etc. have many difficulties in providing an environment in which consumers can select eyeglasses that suit themselves well. Unlike clothing, accessories, and hats, glasses can be viewed as medical devices to protect human eyesight in addition to cosmetic aspects such as fashion. do.

이와 함께, 소비자가 직접 안경원을 방문하여 자신이 구매하고자 하는 안경을 직접 써본 후 자신에게 가장 잘 어울리는 안경을 선택해야 하는 현재의 방식은, 아직 많은 개선의 여지를 지니고 있다. In addition, the current method in which a consumer directly visits an optician, tries on the glasses they want to purchase, and then selects the glasses that best suit them, still has a lot of room for improvement.

한국특허공개번호 제10-2013-0103153호 (2013.09.23)Korea Patent Publication No. 10-2013-0103153 (2013.09.23) 한국등록특허공보 제10-0386962호 (2003.05.27)Korean Patent Publication No. 10-0386962 (May 27, 2003)

본 발명은 사용자가 원하는 안경을 가상으로 피팅할 수 있도록 하는 가상 안경피팅시스템을 제공함으로써 폭넓은 종류의 안경테를 선택할 수 있으며 안경점을 방문하지 않더라도 안경을 시착해볼 수 있어서 사용자에게 편리함을 제공하는 것이 목적이다.An object of the present invention is to provide a virtual glasses fitting system that enables a user to virtually fit desired glasses, so that a wide range of eyeglass frames can be selected and users can try on glasses without visiting an optician, so it is an object of the present invention to provide convenience to the user. to be.

상기와 같은 문제를 해결하기 위해, 관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 사용자단말기(2)를 통해 입력받는 사용자정보입력부(100)와, 사용자단말기(2)에 형성된 카메라를 통해 입력되는 사용자의 얼굴이 표시된 라인 내에 들어오면 사용자의 얼굴이 인식되는 얼굴인식부(200)와, 상기 얼굴인식부(200)의 인식값추출부(220)를 통해 추출된 인식값을 토대로 사용자에게 맞춤안경을 추천하기 위한 맞춤안경추천부(300)와, 사용자단말기(2)로부터 안경이 선택된 후, 사용자단말기를 통해 인식된 사용자의 얼굴에 선택된 안경이 피팅되는 가상피팅부(400)를 포함하는 것을 특징으로 하고, In order to solve the above problems, the user information input unit 100 that receives user information including the type of product of interest, gender, face size, and age through the user terminal 2, and a camera formed in the user terminal 2 Based on the recognition value extracted through the face recognition unit 200 that recognizes the user's face when the user's face input through A customized glasses recommendation unit 300 for recommending customized glasses to the user, and a virtual fitting unit 400 that fits the selected glasses to the user's face recognized through the user terminal after the glasses are selected from the user terminal 2 characterized in that it comprises,

상기 얼굴인식부(200)는 사용자의 얼굴을 인식하기 위하여 얼굴인식에 관련한 가이드를 제시하는 인식가이드부(210)와, 인식된 사용자의 얼굴에 대한 인식값을 추출하는 인식값추출부(220)를 포함하는 것을 특징으로 하고, 안경이 피팅된 후 안경을 착용한 사용자의 모습을 분석하여 어울림정도를 분석하는 피팅분석부(410)와, 상기 피팅분석부(410)를 통해 분석된 어울림정도를 토대로 사용자의 얼굴에 어울릴만한 안경을 추천하는 대체상품을 안내하는 대체상품안내부(420)를 포함하는 것을 특징으로 하는 가상 안경피팅시스템과,The face recognition unit 200 includes a recognition guide unit 210 that presents a guide related to face recognition in order to recognize a user's face, and a recognition value extraction unit 220 that extracts a recognition value for the recognized user's face. A fitting analysis unit 410 that analyzes the appearance of a user who wears glasses after the glasses are fitted, and analyzes the degree of matching, and the degree of matching analyzed through the fitting analysis unit 410, A virtual glasses fitting system, characterized in that it includes an alternative product guide unit 420 that guides an alternative product that recommends glasses suitable for the user's face based on it;

사용자가 사용자단말기(2)를 통해 관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 입력하는 사용자정보입력단계(S1); 사용자가 사용자단말기(2)에 형성된 카메라를 통하여 사용자의 얼굴을 촬영하고 촬영한 사용자 얼굴 이미지를 입력받는 얼굴인식단계(S2); 얼굴인식단계(S2)를 통해 입력된 사용자 얼굴이미지에서 각 신체부위별로 인식값을 추출하고 사용자정보입력단계(S1)를 통해 입력된 사용자정보와 상기 추출된 인식값을 토대로 사용자에게 맞춤안경을 추천하는 맞춤안경추천단계(S3); 상기 맞춤안경추천단계(S3) 이후, 사용자가 사용자단말기(2)를 통해 피팅을 원하는 안경을 선택하면 선택된 안경이 사용자의 얼굴에 가상 피팅되도록 사용자단말기(2)의 카메라 뷰를 통해 비취는 사용자의 얼굴을 인식하고, 인식된 얼굴에 선택된 안경이 피팅되는 가상피팅단계(S4); 상기 가상피팅단계(S4)를 통해 인식된 얼굴에 선택된 안경이 피팅된 후 인식된 얼굴의 각 신체부위별로 측정된 사이즈와 선택된 안경의 각 위치별 사이즈를 비교하여 어울림정도 수치를 분석하는 어울림정도분석단계(S5);를 포함하는 것을 특징으로 하고, 상기 어울림정도분석단계(S5)를 통해 분석된 어울림수치를 토대로 대체상품을 안내하는 대체상품안내단계(S6);를 더 포함하는 것을 특징으로 하는 가상 안경피팅방법을 제공한다.a user information input step (S1) in which the user inputs user information including the product type of interest, gender, face size, and age through the user terminal (2); a face recognition step (S2) in which the user captures the user's face through the camera formed in the user terminal (2) and receives the captured user's face image (S2); A recognition value is extracted for each body part from the user's face image input through the face recognition step (S2), and customized glasses are recommended to the user based on the user information input through the user information input step (S1) and the extracted recognition value custom glasses recommendation step (S3); After the custom glasses recommendation step (S3), when the user selects the glasses to be fitted through the user terminal 2, the selected glasses are virtually fitted to the user's face. A virtual fitting step (S4) of recognizing a face and fitting selected glasses to the recognized face; After the selected glasses are fitted to the face recognized through the virtual fitting step (S4), the size of each body part of the recognized face is compared with the size of each position of the selected glasses. Step (S5); characterized in that it further comprises a replacement product guide step (S6) of guiding an alternative product based on the matching value analyzed through the matching degree analysis step (S5) A virtual glasses fitting method is provided.

본 발명은 사용자가 원하는 안경을 가상으로 피팅할 수 있도록 하는 가상 안경피팅시스템을 제공함으로써 폭넓은 종류의 안경테를 선택할 수 있으며 안경점을 방문하지 않더라도 안경을 시착해볼 수 있어서 사용자에게 편리함을 제공하는 이점이 있다.The present invention provides a virtual glasses fitting system that enables a user to virtually fit desired glasses, so that a wide range of eyeglass frames can be selected, and the user can try on glasses without visiting an optician, thereby providing convenience to the user. have.

도 1은 본 발명의 가상 안경피팅시스템에 관한 전체적인 블록도이다.
도 2는 본 발명의 가상 안경피팅시스템의 사용자정보입력부(100)에 관한 예시도이다.
도 3 및 도4는 본 발명의 가상 안경피팅시스템의 얼굴인식부(200)에 관한 예시도이다.
도 5는 본 발명의 가상 안경피팅시스템의 맞춤안경추천부(300)에 관한 예시도이다.
도 6 및 도 7은 본 발명의 가상 안경피팅시스템의 가상피팅부(400)에 관한 예시도이다.
도 8은 본발명의 가상 안경피팅방법에 관한 순서도이다.1 is an overall block diagram of a virtual glasses fitting system of the present invention.
2 is an exemplary view of the user information input unit 100 of the virtual glasses fitting system of the present invention.
3 and 4 are exemplary views of the face recognition unit 200 of the virtual glasses fitting system of the present invention.
5 is an exemplary view of the customized glasses recommendation unit 300 of the virtual glasses fitting system of the present invention.
6 and 7 are exemplary views of the virtual fitting unit 400 of the virtual glasses fitting system of the present invention.
8 is a flowchart of a virtual glasses fitting method of the present invention.

본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념을 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다.The terms or words used in the present specification and claims are not to be construed as being limited to their ordinary or dictionary meanings, and the inventor can properly define the concept of the term in order to best describe his invention. Based on the principle, it should be interpreted as meaning and concept consistent with the technical idea of the present invention.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명은 사용자가 원하는 안경을 가상으로 피팅할 수 있도록 하는 가상 안경피팅시스템을 제공함으로써 폭넓은 종류의 안경테를 선택할 수 있으며 안경점을 방문하지 않더라도 안경을 시착해볼 수 있어서 사용자에게 편리함을 제공하는 것이 목적이다.An object of the present invention is to provide a virtual glasses fitting system that enables a user to virtually fit desired glasses, so that a wide range of eyeglass frames can be selected and users can try on glasses without visiting an optician, so it is an object of the present invention to provide convenience to the user. to be.

도 1은 본 발명의 가상 안경피팅시스템(1000)의 전체 블록도로서, 상기 가상 안경피팅시스템(1000)은 사용자정보입력부(100), 얼굴인식부(200), 맞춤안경추천부(300), 가상피팅부(400) 등을 포함하여 구성된다.1 is an overall block diagram of a virtual glasses fitting system 1000 of the present invention, wherein the virtual glasses fitting system 1000 includes a user information input unit 100, a face recognition unit 200, a custom glasses recommendation unit 300, It is configured to include a virtual fitting 400 and the like.

각 구성요소를 구체적으로 설명하면 다음과 같다.Each component is described in detail as follows.

사용자정보입력부(100)는 관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 입력받는 것이다.The user information input unit 100 receives user information including the type of product of interest, gender, face size, and age.

도 2는 본 발명의 사용자정보입력부(100)에 관한 예시도로서 도 2와 같이 관심상품종류, 성별, 얼굴크기, 연령대에 관한 정보를 사용자가 사용자단말기(2)를 통해 선택할 수 있다.FIG. 2 is an exemplary view of the user information input unit 100 of the present invention. As shown in FIG. 2 , the user can select information on the type of product of interest, gender, face size, and age through the user terminal 2 .

도 3 및 도 4는 얼굴인식부(200)에 관한 도면으로 상기 얼굴인식부(200)는 사용자단말기(2)에 형성된 카메라를 통해 입력되는 사용자의 얼굴이 표시된 라인 내에 들어오면 사용자의 얼굴을 인식하는 것이다.3 and 4 are views of the face recognition unit 200, wherein the face recognition unit 200 recognizes the user's face when the user's face input through the camera formed in the user terminal 2 is within the displayed line. will do

상기 얼굴인식부(200)는 사용자가 사용자단말기(2)에 형성된 카메라를 통하여 사용자의 얼굴을 촬영되는 이미지를 입력받는 것이다.The face recognition unit 200 receives an image of the user's face through the camera formed in the user terminal (2).

상기 얼굴인식부(200)는 인식가이드부(210)와 인식값추출부(220)를 포함하여 구성된다.The face recognition unit 200 includes a recognition guide unit 210 and a recognition value extraction unit 220 .

도 3(a)를 참고하면 인식가이드부(210)는 사용자의 얼굴을 인식하기 위하여 얼굴인식에 관련한 가이드를 제시하는 것이다.Referring to FIG. 3A , the recognition guide unit 210 presents a guide related to face recognition in order to recognize a user's face.

예를 들면 상기 인식가이드부(210)는 For example, the recognition guide unit 210 is

i) 특정 거리 떨어진 위치에서 얼굴을 촬영하는 것i) Taking pictures of faces from a certain distance away

ii) 밝은 장소에서 얼굴을 촬영하는 것ii) photographing the face in a bright place

iii) 안경을 벗은 상태에서 얼굴을 촬영하는 것 iii) photographing the face with the glasses off

등과 같은 가이드를 제시하며, 만일 인식가이드부(210)를 통해 제시된 가이드 중에 어느 하나가 지켜지지 않았을 경우 사용자의 얼굴이 촬영되지 않거나, 지켜지지 않은 항목에 대한 재안내 등이 수행된다.A guide such as such is presented, and if any one of the guides presented through the recognition guide unit 210 is not followed, the user's face is not photographed, or re-guidance is performed for items that are not observed.

인식값추출부(220)는 인식된 사용자의 얼굴에 대한 인식값을 추출하는 것이다. 인식값추출부(220)는 도 4를 통해 확인할 수 있는데, 추출된 인식값은 이마의 세로 길이(m1), 눈의 세로 길이(m2), 코의 폭(m3), 인중 세로길이(m4), 입술의 가로길이(m5), 입술의 세로길이(m6), 턱의 세로길이(m7), 피부색 등을 포함한다.The recognition value extraction unit 220 extracts a recognition value for the recognized user's face. The recognition value extraction unit 220 can be confirmed through FIG. 4 , and the extracted recognition values are the vertical length of the forehead (m1), the vertical length of the eyes (m2), the width of the nose (m3), and the vertical length of the pharynx (m4). , including the horizontal length of the lips (m5), the vertical length of the lips (m6), the vertical length of the chin (m7), and skin color.

도 5는 맞춤안경추천부(300)에 관한 도면으로, 도 5(a)는 사용자의 얼굴을 인식하기 전에 나타나는 화면이며 도 5(b)는 얼굴인식부(200)를 통해 사용자의 얼굴을 인식하여 인식값이 추출된 후, 사용자에게 적절한 맞춤안경 리스트들이 제공된 화면을 나타낸 도면이다.5 is a view of the custom glasses recommendation unit 300. FIG. 5 (a) is a screen that appears before recognizing the user's face, and FIG. 5 (b) is the face recognition unit 200 to recognize the user's face. After the recognition value is extracted, it is a view showing a screen in which a list of custom glasses suitable for the user is provided.

맞춤안경추천부(300)는 상기 얼굴인식부(200)의 인식값추출부(220)를 통해 추출된 인식값을 토대로 사용자에게 알맞은 맞춤안경을 추천하기 위한 것이다.The customized glasses recommendation unit 300 is for recommending customized glasses suitable for the user based on the recognition value extracted through the recognition value extraction unit 220 of the face recognition unit 200 .

가상피팅부(400)는 사용자단말기로부터 안경이 선택된 후, 사용자단말기를 통해 인식된 사용자의 얼굴에 선택된 안경이 피팅되는 것이다.The virtual fitting unit 400 is to fit the selected glasses to the face of the user recognized through the user terminal after the glasses are selected from the user terminal.

상기 가상피팅부(400)는 피팅분석부(410), 대체상품안내부(420)를 포함하여 구성된다.The virtual fitting unit 400 is configured to include a fitting analysis unit 410 and an alternative product guide unit 420 .

상기 피팅분석부(410)는 안경이 피팅된 후 안경을 착용한 사용자의 모습을 분석하여 어울림정도를 분석하는 것이다.The fitting analysis unit 410 analyzes the fit of the user by analyzing the appearance of the user who wears the glasses after the glasses are fitted.

상기 피팅분석부(410)는 안경테의 사이즈와 얼굴인식부(200)를 통해 추출된 인식값을 비교하여 기저장된 적정비율값과 어느 정도 차이 나는지 정도를 분석하여 어울림정도값을 추출하는 것이다.The fitting analysis unit 410 compares the size of the spectacle frame with the recognition value extracted through the face recognition unit 200, and analyzes the degree of difference from the pre-stored appropriate ratio value to extract a matching degree value.

특히 안경테의 경우 렌즈 프레임 사이즈, 다리 길이, 브릿지 사이즈 등의 미묘한 차이로 사람의 인상이 크게 바뀌며 쓰는 이의 착용감에도 큰 영향을 미치기 때문에 어울림정도를 파악하는 것을 매우 중요한 항목이다.In particular, in the case of spectacle frames, it is very important to understand the degree of fit because subtle differences in lens frame size, leg length, bridge size, etc. greatly change the impression of a person and greatly affect the wearer's fit.

예를 들면,For example,

도 7과 같이 안경테의 사이즈의 경우, 두 개의 렌즈 프레임 중 하나의 상하길이(k1), 좌우길이(k2)와 두개의 렌즈 프레임 사이를 연결하는 브릿지의 길이(k3), 풀프레임의 길이(k4)가 각 안경테별로 사전에 저장된다.7, in the case of the size of the spectacle frame, the vertical length (k1), the left and right lengths (k2) of one of the two lens frames and the length of the bridge connecting between the two lens frames (k3), and the length of the full frame (k4) ) is saved in advance for each eyeglass frame.

상기 피팅분석부(410)는 사전에 저장된 안경테의 사이즈와 얼굴인식부(200)를 통해 추출된 인식값을 분석하여 어울림정도값을 추출한다.The fitting analysis unit 410 extracts a matching degree value by analyzing the size of the spectacle frame stored in advance and the recognition value extracted through the face recognition unit 200 .

대체상품안내부(420)는 상기 피팅분석부(410)를 통해 분석된 어울림정도를 토대로 사용자의 얼굴에 어울릴만한 안경을 추천하는 대체상품을 안내하는 것이다. The replacement product guide unit 420 guides replacement products for recommending glasses suitable for the user's face based on the degree of fit analyzed through the fitting analysis unit 410 .

상기 대체상품안내부(420)는 피팅분석부(410)를 통해 어울림정도가 높게 나왔다면 비슷한 사이즈의 안경을 더 추천하고, 어울림정도가 낮게 나왔다면 다른 사이즈의 안경을 추천한다.The replacement product guide unit 420 recommends glasses of a similar size if the fit is high through the fitting analysis unit 410, and recommends glasses of a different size if the fit is low.

상기 어울림정도는 사전에 설정된 값으로 예를 들어 1~10으로 구간을 나누어 어울림정도를 수출하며, 7 이상이 되면 어울림 정도가 높음으로 판단하고 3 이하가 되면 어울림 정도가 낮음으로 판단할 수 있다.The degree of matching is a preset value, for example, by dividing the section into 1 to 10, and the degree of matching is exported. If it is 7 or more, it is determined that the degree of matching is high, and when it is 3 or less, it can be determined that the degree of matching is low.

데이터베이스(500)는 사전에 저장된 실제 안경의 안경사이즈 값, 안경 사이즈에 어울릴 얼굴의 부위별 사이즈 범위를 포함하는 적정비율 값, 일정 구간으로 수치가 나뉘어지는 어울림정도 값 등 사용자정보입력부(100), 얼굴인식부(200), 맞춤안경추천부(300), 가상피팅부(400)에 사용되는 DB들이 저장되는 것이다.The database 500 is a user information input unit 100, such as a pre-stored glasses size value of actual glasses, an appropriate ratio value including a size range for each part of the face suitable for the glasses size, a matching degree value that is divided into a certain section, DBs used for the face recognition unit 200 , the custom glasses recommendation unit 300 , and the virtual fitting unit 400 are stored.

상기와 같은 가상 안경피팅시스템을 이용한 가상 안경피팅방법은 다음과 같다.The virtual glasses fitting method using the virtual glasses fitting system as described above is as follows.

도 8은 가상 안경피팅방법의 순서도로서 이를 참고하면, 가상 안경피팅방법은 사용자정보입력단계(S1), 얼굴인식단계(S2), 맞춤안경추천단계(S3), 가상피팅단계(S4), 어울림정도분석단계(S5), 대체상품안내단계(S6)를 포함하는 것이다.8 is a flowchart of a virtual glasses fitting method. Referring to this, the virtual glasses fitting method includes a user information input step (S1), a face recognition step (S2), a customized glasses recommendation step (S3), a virtual fitting step (S4), and matching It is to include a quality analysis step (S5), an alternative product guide step (S6).

S1) 사용자정보입력단계S1) User information input step

사용자정보입력단계(S1)는 사용자가 사용자단말기(2)를 통해 관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 입력하는 단계이다.The user information input step S1 is a step in which the user inputs user information including the product type of interest, gender, face size, and age through the user terminal 2 .

상기 사용자정보입력단계(S1)는 사용자정보입력부(100)를 통해 사용자정보를 입력받는 것이다.The user information input step ( S1 ) is to receive user information through the user information input unit 100 .

S2) 얼굴인식단계S2) Face Recognition Step

얼굴인식단계(S2)는 사용자가 사용자단말기(2)에 형성된 카메라를 통하여 사용자의 얼굴을 촬영하고 촬영한 사용자 얼굴 이미지를 입력받는 단계이다.The face recognition step S2 is a step in which the user photographs the user's face through the camera formed in the user terminal 2 and receives the captured user face image.

상기 얼굴인식단계(S2)는 얼굴인식부(200)로 사용자의 얼굴이 촬영된 이미지를 입력받는다.In the face recognition step (S2), the face recognition unit 200 receives an image of the user's face.

S3) 맞춤안경추천단계S3) Custom Glasses Recommendation Step

맞춤안경추천단계(S3)는 얼굴인식단계(S2)를 통해 입력된 사용자 얼굴이미지에서 각 신체부위별로 인식값을 추출하고 사용자정보입력단계(S1)를 통해 입력된 사용자정보와 상기 추출된 인식값을 토대로 사용자에게 알맞은 맞춤안경을 추천하는 단계이다.The customized glasses recommendation step (S3) extracts a recognition value for each body part from the user face image input through the face recognition step (S2), and the user information input through the user information input step (S1) and the extracted recognition value Based on this, it is a step to recommend customized glasses suitable for the user.

상기 맞춤안경추천단계(S3)는 맞춤안경추천부(300)를 통해 사용자에게 알맞은 맞춤안경을 추천할 수 있다.The customized glasses recommendation step ( S3 ) may recommend customized glasses suitable for the user through the customized glasses recommendation unit 300 .

S4) 가상피팅단계S4) Virtual fitting step

가상피팅단계(S4)는 상기 맞춤안경추천단계(S3) 이후, 사용자가 사용자단말기(2)를 통해 피팅을 원하는 안경을 선택하면 선택된 안경이 사용자의 얼굴에 가상 피팅되도록 사용자단말기(2)의 카메라 뷰를 통해 비취는 사용자의 얼굴을 인식하고, 인식된 얼굴에 선택된 안경이 피팅되는 단계이다.In the virtual fitting step (S4), after the custom glasses recommendation step (S3), when the user selects the glasses to be fitted through the user terminal 2, the camera of the user terminal 2 so that the selected glasses are virtually fitted to the user's face The jade through the view recognizes the user's face, and the selected glasses are fitted to the recognized face.

S5) 어울림정도분석단계S5) Matching degree analysis step

어울림정도분석단계(S5)는 상기 가상피팅단계(S4)를 통해 인식된 얼굴에 선택된 안경이 피팅된 후 인식된 얼굴의 각 신체부위별로 측정된 사이즈와 선택된 안경의 각 위치별 사이즈를 비교하여 어울림정도 수치를 분석하는 단계이다.The matching degree analysis step (S5) is performed by comparing the size measured for each body part of the recognized face after the selected glasses are fitted to the face recognized through the virtual fitting step (S4) and the size for each location of the selected glasses. This is the stage of analyzing the degree figures.

상기 어울림정도분석단계(S5)를 분석된 어울림정도를 통해 사용자는 안경이 얼마나 어울리는지 정도를 객관적으로 확인할 수 있다.Through the matching degree analyzed in the matching degree analysis step (S5), the user can objectively check how well the glasses fit.

S6) 대체상품안내단계S6) Alternative product guidance step

대체상품안내단계(S6)는 상기 어울림정도분석단계(S5)를 통해 분석된 어울림수치를 토대로 대체상품을 안내하는 단계이다.The replacement product guidance step (S6) is a step of guiding the replacement product based on the matching value analyzed through the matching degree analysis step (S5).

만일 어울림수치가 높다면 사용자가 선택한 안경과 유사한 스타일의 안경을 안내하고, 어울림수치가 낮다면 사용자가 선택한 안경과는 다른 스타일의 안경이 안내된다.If the matching value is high, glasses of a style similar to the glasses selected by the user are guided, and if the matching value is low, glasses of a style different from the glasses selected by the user are guided.

이상과 같은 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.The configuration shown in the embodiments and drawings described in the present specification as described above is merely the most preferred embodiment of the present invention and does not represent all of the technical spirit of the present invention, so various equivalents and modifications that can be substituted for them It should be understood that there may be examples.

사용자정보입력부(100)
얼굴인식부(200)
맞춤안경추천부(300)
가상피팅부(400)User information input unit (100)
face recognition unit (200)
Custom glasses recommendation unit (300)
Virtual fitting 400

Claims (5)

관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 사용자단말기(2)를 통해 입력받는 사용자정보입력부(100)와,
사용자단말기(2)에 형성된 카메라를 통해 입력되는 사용자의 얼굴이 표시된 라인 내에 들어오면 사용자의 얼굴이 인식되며 인식된 얼굴의 각 부위별 수치에 관한 인식값이 추출되는 얼굴인식부(200)와,
상기 얼굴인식부(200)를 통해 추출된 인식값을 토대로 사용자에게 맞춤안경을 추천하기 위한 맞춤안경추천부(300)와,
사용자단말기(2)로부터 안경이 선택된 후, 사용자단말기를 통해 인식된 사용자의 얼굴에 선택된 안경이 피팅되는 가상피팅부(400)를 포함하는 것을 특징으로 하는 가상 안경피팅시스템.A user information input unit 100 that receives user information including the type of product of interest, gender, face size, and age through the user terminal 2;
When the user's face input through the camera formed in the user terminal 2 comes within the displayed line, the user's face is recognized and a face recognition unit 200 that extracts recognition values for numerical values for each part of the recognized face;
A customized glasses recommendation unit 300 for recommending customized glasses to a user based on the recognition value extracted through the face recognition unit 200;
and a virtual fitting unit (400) for fitting the selected glasses to the face of the user recognized through the user terminal after the glasses are selected from the user terminal (2). 제1항에 있어서,
상기 얼굴인식부(200)는
사용자의 얼굴을 인식하기 위하여 얼굴인식에 관련한 가이드를 제시하는 인식가이드부(210)와,
인식된 사용자의 얼굴에 대한 인식값을 추출하는 인식값추출부(220)를 포함하는 것을 특징으로 하는 가상 안경피팅시스템.According to claim 1,
The face recognition unit 200
A recognition guide unit 210 that presents a guide related to face recognition in order to recognize the user's face;
Virtual glasses fitting system comprising a recognition value extraction unit 220 for extracting a recognition value for the recognized user's face. 제1항 또는 제2항에 있어서,
상기 가상피팅부(400)는
안경이 피팅된 후 안경을 착용한 사용자의 모습을 분석하여 어울림정도를 분석하는 피팅분석부(410)와,
상기 피팅분석부(410)를 통해 분석된 어울림정도를 토대로 사용자의 얼굴에 어울릴만한 안경을 추천하는 대체상품을 안내하는 대체상품안내부(420)를 포함하는 것을 특징으로 하는 가상 안경피팅시스템.3. The method of claim 1 or 2,
The virtual fitting 400 is
A fitting analysis unit 410 that analyzes the appearance of a user who wears the glasses after the glasses are fitted to analyze the degree of matching;
and an alternative product guide unit (420) for guiding replacement products for recommending glasses suitable for the user's face based on the matching degree analyzed through the fitting analysis unit (410). 사용자가 사용자단말기(2)를 통해 관심상품종류, 성별, 얼굴크기, 연령을 포함하는 사용자정보를 입력하는 사용자정보입력단계(S1);
사용자가 사용자단말기(2)에 형성된 카메라를 통하여 사용자의 얼굴을 촬영하고 촬영한 사용자 얼굴 이미지를 입력받는 얼굴인식단계(S2);
얼굴인식단계(S2)를 통해 입력된 사용자 얼굴이미지에서 각 신체부위별로 인식값을 추출하고 사용자정보입력단계(S1)를 통해 입력된 사용자정보와 상기 추출된 인식값을 토대로 사용자에게 맞춤안경을 추천하는 맞춤안경추천단계(S3);
상기 맞춤안경추천단계(S3) 이후, 사용자가 사용자단말기(2)를 통해 피팅을 원하는 안경을 선택하면 선택된 안경이 사용자의 얼굴에 가상 피팅되도록 사용자단말기(2)의 카메라 뷰를 통해 비취는 사용자의 얼굴을 인식하고, 인식된 얼굴에 선택된 안경이 피팅되는 가상피팅단계(S4);
상기 가상피팅단계(S4)를 통해 인식된 얼굴에 선택된 안경이 피팅된 후 인식된 얼굴의 각 신체부위별로 측정된 사이즈와 선택된 안경의 각 위치별 사이즈를 비교하여 어울림정도 수치를 분석하는 어울림정도분석단계(S5);를 포함하는 것을 특징으로 하는 가상 안경피팅방법.
a user information input step (S1) in which the user inputs user information including the product type of interest, gender, face size, and age through the user terminal (2);
a face recognition step (S2) in which the user captures the user's face through the camera formed in the user terminal (2) and receives the captured user's face image (S2);
A recognition value is extracted for each body part from the user's face image input through the face recognition step (S2), and customized glasses are recommended to the user based on the user information input through the user information input step (S1) and the extracted recognition value custom glasses recommendation step (S3);
After the custom glasses recommendation step (S3), when the user selects the glasses to be fitted through the user terminal 2, the selected glasses are virtually fitted to the user's face. A virtual fitting step (S4) of recognizing a face and fitting selected glasses to the recognized face;
After the selected glasses are fitted to the face recognized through the virtual fitting step (S4), the size of each body part of the recognized face is compared with the size of each position of the selected glasses. Step (S5); Virtual glasses fitting method comprising the.
 제4항에 있어서,
상기 어울림정도분석단계(S5)를 통해 분석된 어울림수치를 토대로 대체상품을 안내하는 대체상품안내단계(S6);를 더 포함하는 것을 특징으로 하는 가상 안경피팅방법.5. The method of claim 4,
The virtual glasses fitting method further comprising; a replacement product guide step (S6) of guiding an alternative product based on the matching value analyzed through the matching degree analysis step (S5).
KR1020200163585A 2020-11-30 2020-11-30 Virtual Glasses Fitting System and Method KR20220075482A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200163585A KR20220075482A (en) 2020-11-30 2020-11-30 Virtual Glasses Fitting System and Method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200163585A KR20220075482A (en) 2020-11-30 2020-11-30 Virtual Glasses Fitting System and Method

Publications (1)

Publication Number Publication Date
KR20220075482A true KR20220075482A (en) 2022-06-08

Family

ID=81981392

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200163585A KR20220075482A (en) 2020-11-30 2020-11-30 Virtual Glasses Fitting System and Method

Country Status (1)

Country Link
KR (1) KR20220075482A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102499864B1 (en) * 2022-07-12 2023-02-16 (주)인터비젼 Customizing progressive lens design device and method

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100386962B1 (en) 2000-11-02 2003-06-09 김재준 Method and system for putting eyeglass' image on user's facial image
KR20130103153A (en) 2012-03-09 2013-09-23 주식회사 퍼비스코리아 Customized virtual fitting method for article of eye

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100386962B1 (en) 2000-11-02 2003-06-09 김재준 Method and system for putting eyeglass' image on user's facial image
KR20130103153A (en) 2012-03-09 2013-09-23 주식회사 퍼비스코리아 Customized virtual fitting method for article of eye

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102499864B1 (en) * 2022-07-12 2023-02-16 (주)인터비젼 Customizing progressive lens design device and method
WO2024014623A1 (en) * 2022-07-12 2024-01-18 (주)인터비젼 User-tailored progressive lens design device and progressive lens design method thereof

Similar Documents

Publication Publication Date Title
US20210215953A1 (en) Systems and methods for creating eyewear with multi-focal lenses
US11867979B2 (en) Method and system to create custom, user-specific eyewear
JP3250184B2 (en) Eyewear simulation system
US20170169501A1 (en) Method and system for evaluating fitness between wearer and eyeglasses
KR20130103153A (en) Customized virtual fitting method for article of eye
KR102174053B1 (en) A method for operating a glasses fitting system using a smart mirror
KR100386962B1 (en) Method and system for putting eyeglass' image on user's facial image
KR20220075482A (en) Virtual Glasses Fitting System and Method
CN113033413A (en) Glasses recommendation method and device, storage medium and terminal
KR102566239B1 (en) Methods for determining a person's postural and visual behavior
KR102356970B1 (en) Method for Supporting Custom Glasses Purchase Using Application Program, and Managing Server Used Therein
KR20240109735A (en) Virtual glasses fitting system and method based on iris tracking
KR102625576B1 (en) System For Providing Customized Glasses to Customers
JP2022033021A (en) Ornaments or daily necessaries worn on face or periphery of face, method for evaluating matching degree of makeup or hairstyle to face of user, system for evaluating the matching degree, recommendation system and design system of spectacles
CN114895747A (en) Intelligent display device, glasses recommendation method, glasses recommendation device and media
KR20180132309A (en) Method for providing customized product and apparatus using the same

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application