KR20220088219A - 스마트 미러 및 이의 동작 방법 - Google Patents

스마트 미러 및 이의 동작 방법 Download PDF

Info

Publication number
KR20220088219A
KR20220088219A KR1020200179038A KR20200179038A KR20220088219A KR 20220088219 A KR20220088219 A KR 20220088219A KR 1020200179038 A KR1020200179038 A KR 1020200179038A KR 20200179038 A KR20200179038 A KR 20200179038A KR 20220088219 A KR20220088219 A KR 20220088219A
Authority
KR
South Korea
Prior art keywords
user
face image
frame
smart mirror
makeup
Prior art date
Application number
KR1020200179038A
Other languages
English (en)
Inventor
강지은
김윤희
김현아
이수인
이지혜
Original Assignee
강지은
김윤희
김현아
이수인
이지혜
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 강지은, 김윤희, 김현아, 이수인, 이지혜 filed Critical 강지은
Priority to KR1020200179038A priority Critical patent/KR20220088219A/ko
Publication of KR20220088219A publication Critical patent/KR20220088219A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G06T2207/30201—Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

스마트 미러 및 이의 동작 방법이 개시된다. 이에 의하면, 스마트 미러는, 사용자의 얼굴 영상이 투사되고, 화장 영역에 대한 프레임이 상기 사용자의 얼굴 영상 위에 겹쳐서 표시되는 디스플레이부; 와, 상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 상기 화장 영역에 대한 프레임을 생성하는 영상 처리부; 및 상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시키는 제어부를 포함할 수 있다.

Description

스마트 미러 및 이의 동작 방법{SMART MIRROR AND OPERATING METHOD OF THE SAME}
본 발명은 스마트 미러 및 이의 동작 방법에 관한 것으로서, 보다 상세하게는 사용자에게 화장 영역에 대한 가이드를 정확하게 제공할 수 있는 스마트 미러 및 이의 동작 방법에 관한 것이다.
1인 미디어 시장이 발전함에 따라, 메이크업을 처음 접하는 사람들을 위한 뷰티 크리에이터들이 많아졌다. 이전과는 다르게 메이크업을 배우고자 할 때 크리에이터들이 소개하는 기초 메이크업 지식이나 다양한 화장법에 쉽게 접근할 수 있다. 그러나, 사람마다 얼굴 고유의 특징(얼굴형, 눈코입의 생김새나 위치, 피부 톤)이 다르기 때문에, 화장법을 따라 하더라도 본인에게 맞지 않아 만족하는 결과를 얻지 못하는 경우가 많다.
메이크업을 도와주는 기존의 스마트 메이크업 거울들은 대부분 튜토리얼 영상만 제공하는 경우가 많다. 나아가, 메이크업에 대한 가이드를 제공하는 미러도 존재하지만, 사용자들은 이를 참조할 뿐 메이크업 수행 시 이를 직접 사용하는 경우는 많지 않다. 이는, 화장 시 사용자가 움직이게 되고, 이에 따라 거울에 표시되는 화장 프레임 영역이 실제로는 사용자의 얼굴과 불일치 되는 등의 문제점에서 기인한다.
본 발명이 해결하고자 하는 과제는, 인공지능과 얼굴인식 기술을 접목하여 사용자의 얼굴 특징에 어울리는 메이크업 스타일 추천하고 쉽게 따라 그릴 수 있도록 튜토리얼을 제공하는 스마트 미러 및 이의 동작 방법을 제공하는 것이다.
또한, 본 발명이 해결하고자 하는 과제는, 사용자의 움직임에 대응하여 화장 프레임 영역을 변경시킴으로써 사용자의 얼굴에 적합한 메이크업 가이드를 제공할 수 있는 스마트 미러 및 이의 동작 방법을 제공하는 것이다.
본 발명의 일 실시예에 의한 스마트 미러는, 사용자의 얼굴 영상이 투사되고, 화장 영역에 대한 프레임이 상기 사용자의 얼굴 영상 위에 겹쳐서 표시되는 디스플레이부; 와, 상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 상기 화장 영역에 대한 프레임을 생성하는 영상 처리부; 및 상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시키는 제어부를 포함할 수 있다.
상기 스마트 미러에 있어서, 상기 제어부는, 상기 사용자의 얼굴 영상에 대한 제1좌표계를 생성하고, 상기 화장 영역에 대한 프레임에 대한 제2좌표계를 생성하며, 상기 특징점을 기준으로 상기 제1좌표계와 상기 제2좌표계를 동기화 시킬 수 있다.
상기 스마트 미러에 있어서, 상기 제어부는, 상기 사용자의 얼굴 영상이 좌우 방향으로 이동하는 경우 이와 동기화되도록 상기 화장 영역에 대한 프레임을 좌우 방향으로 이동시킬 수 있다.
상기 스마트 미러에 있어서, 상기 제어부는, 상기 사용자의 얼굴 영상이 전후 방향으로 이동하는 경우 이에 대응하여 상기 화장 영역에 대한 프레임을 확대시키거나 축소시킬 수 있다.
상기 스마트 미러에 있어서, 상기 제어부는, 복수개의 상기 특징점으로부터 얼굴선을 추출하고 이에 기초하여 얼굴형을 판단한 후, 상기 얼굴형에 맞는 메이크업 스타일에 대응하도록 상기 화장 영역에 대한 프레임을 생성할 수 있다.
본 발명의 다른 실시예에 의한 스마트 미러의 동작 방법은, 상기 스마트 미러에 사용자의 얼굴 영상이 투사되는 단계; 와, 상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 화장 영역에 대한 프레임을 생성하는 단계; 및 상기 화장 영역에 대한 프레임을 상기 사용자의 얼굴 영상 위에 겹쳐서 표시하는 단계를 포함하되, 상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시킬 수 있다.
상기 스마트 미러의 동작 방법에 있어서, 상기 사용자의 얼굴 영상에 대한 제1좌표계를 생성하고, 상기 화장 영역에 대한 프레임에 대한 제2좌표계를 생성하며, 상기 특징점을 기준으로 상기 제1좌표계와 상기 제2좌표계를 동기화 시킬 수 있다.
상기 스마트 미러의 동작 방법에 있어서, 상기 사용자의 얼굴 영상이 좌우 방향으로 이동하는 경우 이와 동기화되도록 상기 화장 영역에 대한 프레임을 좌우 방향으로 이동시킬 수 있다.
상기 스마트 미러의 동작 방법에 있어서, 상기 사용자의 얼굴 영상이 전후 방향으로 이동하는 경우 이에 대응하여 상기 화장 영역에 대한 프레임을 확대시키거나 축소시킬 수 있다.
상기 스마트 미러의 동작 방법에 있어서, 복수개의 상기 특징점으로부터 얼굴선을 추출하고 이에 기초하여 얼굴형을 판단한 후, 상기 얼굴형에 맞는 메이크업 스타일에 대응하도록 상기 화장 영역에 대한 프레임을 생성할 수 있다.
본 발명의 실시예에 따르면, 사용자의 얼굴 특징에 어울리는 메이크업 스타일 추천하고 쉽게 따라 그릴 수 있도록 튜토리얼을 제공할 수 있다.
또한, 본 발명의 실시예에 따르면, 사용자의 움직임에 대응하여 화장 프레임 영역을 변경시킴으로써 사용자의 얼굴에 적합한 메이크업 가이드를 제공할 수 있다.
도 1은 본 발명에 따른 스마트 미러의 외관을 도시한 도면이다.
도 2는 본 발명에 따른 스마트 미러의 구성을 도시한 블록도이다.
도 3은 본 발명에 따른 스마트 미러의 동작 방법을 설명하기 위한 도면이다.
도 4는 본 발명에 따른 스마트 미러의 동작 방법의 일 실시예를 설명하는 도면이다.
도 5는 본 발명에 따른 스마트 미러의 동작 방법의 다른 실시예를 설명하는 도면이다.
도 6은 본 발명의 실시예에 따른, 컴퓨팅 장치를 나타내는 도면이다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서에서, 동일한 구성요소에 대해서 중복된 설명은 생략한다.
또한 본 명세서에서, 어떤 구성요소가 다른 구성요소에 '연결되어' 있다거나 '접속되어' 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에 본 명세서에서, 어떤 구성요소가 다른 구성요소에 '직접 연결되어' 있다거나 '직접 접속되어' 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
또한, 본 명세서에서 사용되는 용어는 단지 특정한 실시예를 설명하기 위해 사용되는 것으로써, 본 발명을 한정하려는 의도로 사용되는 것이 아니다.
또한 본 명세서에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다.
또한 본 명세서에서, '포함하다' 또는 '가지다' 등의 용어는 명세서에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품, 또는 이들을 조합한 것이 존재함을 지정하려는 것일 뿐, 하나 또는 그 이상의 다른 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 할 것이다.
또한 본 명세서에서, '및/또는' 이라는 용어는 복수의 기재된 항목들의 조합 또는 복수의 기재된 항목들 중의 어느 항목을 포함한다. 본 명세서에서, 'A 또는 B'는, 'A', 'B', 또는 'A와 B 모두'를 포함할 수 있다.
또한 본 명세서에서, 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략될 것이다.
도 1은 본 발명에 따른 스마트 미러의 외관을 도시한 도면이다.
본 발명에 따른 스마트 미러(100)는 디스플레이(110)와 카메라(120)를 포함하여 구성될 수 있다.
디스플레이(110)는 실제 영상을 투사할 수 있다. 이 경우, 디스플레이(110)는 거울과 같은 기능을 수행할 수 있다.
디스플레이(110)는 가상 영상을 표시할 수 있다. 구체적으로, 디스플레이(110)는 가상 영상을 생성하고, 이를 표시할 수 있다.
디스플레이(110)에 표시되는 실제 영상과 가상 영상은 서로 겹쳐서 표시될 수 있다.
스마트 미러(100)의 정면에는 카메라(120)가 부착될 수 있다. 바람직하게는, 카메라(120)는 스마트 미러(100)의 상단 정중앙에 배치될 수 있다. 이 경우, 카메라(120)는 스마트 미러(100) 전방의 사용자에 대한 영상을 촬영할 수 있다.
도 2는 본 발명에 따른 스마트 미러의 구성을 도시한 블록도이다.
본 발명에 따른 스마트 미러(100)는 디스플레이부(210), 영상 처리부(220), 좌표 설정부(230) 및 제어부(240)를 포함하여 구성될 수 있다.
디스플레이부(210)는 사용자의 얼굴 영상이 투사되고, 화장 영역에 대한 프레임이 상기 사용자의 얼굴 영상 위에 겹쳐서 표시될 수 있다.
여기서, 화장 영역에 대한 프레임은 증강 현실이나 가상 현실일 수 있다.
영상 처리부(220)는 사용자의 얼굴 영상을 분석하고 이에 대응하여 화장 영역에 대한 프레임을 생성할 수 있다.
좌표 설정부(230)는 사용자의 얼굴 영상과 화장 영역에 대한 프레임 각각에 대해서, 좌표를 추출할 수 있다.
제어부(240)는 사용자의 얼굴 영상으로부터 특징점을 추출하고, 특징점을 기준으로 사용자의 얼굴 영상과 화장 영역에 대한 프레임을 동기화 시킬 수 있다.
제어부(240)는 사용자의 얼굴 영상에 대한 제1좌표계를 생성하고, 화장 영역에 대한 프레임에 대한 제2좌표계를 생성할 수 있다. 이 경우, 제어부(240)는 특징점을 기준으로 제1좌표계와 제2좌표계를 동기화 시킬 수 있다.
제어부(240)는 사용자의 얼굴 영상이 좌우 방향으로 이동하는 경우 이와 동기화되도록 화장 영역에 대한 프레임을 좌우 방향으로 이동시킬 수 있다.
제어부(240)는 사용자의 얼굴 영상이 전후 방향으로 이동하는 경우 이에 대응하여 화장 영역에 대한 프레임을 확대시키거나 축소시킬 수 있다.
제어부(240)는 복수개의 특징점으로부터 얼굴선을 추출하고 이에 기초하여 얼굴형을 판단한 후, 얼굴형에 맞는 메이크업 스타일에 대응하도록 화장 영역에 대한 프레임을 생성할 수 있다.
도 3은 본 발명에 따른 스마트 미러의 동작 방법을 설명하기 위한 도면이다.
스마트 미러(100)의 전방에 사용자가 위치하면, 디스플레이(110)에는 사용자의 얼굴이 투사된다.
스마트 미러(100)는 카메라(120)를 통해 전방에 위치한 사용자의 얼굴을 촬영한다. 이 경우, 스마트 미러(100)는 사용자의 얼굴 이미지로부터 특징점들(301, 302, 303)을 추출할 수 있다. 특징점(301, 302, 303)은 사용자의 실제 얼굴과 화장 프레임 영역을 동기화시키는 기준으로 사용될 수 있다.
또한, 특징점(301, 302, 303)에 기초하여 사용자의 얼굴선 윤곽을 추출하고, 이에 기초하여 사용자의 얼굴형을 예측할 수 있다.
스마트 미러(100)는 사용자 얼굴 이미지와 얼굴형을 분석하고, 이에 기초하여 화장 영역에 대한 프레임(310, 320)을 생성할 수 있다. 이 경우, 스마트 미러(100)는 화장 영역에 대한 프레임(310, 320)을 디스플레이(110)에 표시된 사용자의 얼굴 영상 위에 겹쳐서 표시할 수 있다.
사용자는 디스플레이(110)에 투사된 자신의 얼굴 위에 표시되는 화장 영역에 대한 프레임(310, 320)을 따라서, 메이크업을 수행할 수 있다. 예를 들어, 도 3에 도시된 바와 같이, 눈썹에 대응하여 표시된 화장 영역에 대한 프레임(310, 320)을 따라서 눈썹을 그릴 수 있게 된다.
도 4는 본 발명에 따른 스마트 미러의 동작 방법의 일 실시예를 설명하는 도면이다.
사용자가 디스플레이(110)를 기준으로 좌우 방향으로 이동하게 되면, 스마트 미러(100)는 이와 동기화되도록 화장 영역에 대한 프레임을 좌우 방향으로 이동시킬 수 있다. 도 4에 도시된 바와 같이, 사용자가 왼쪽으로 움직이게 되면(L), 화장 영역에 대한 프레임(310, 320)은 이와 동기화되어 디스플레이(110) 상에서 왼쪽으로 움직인다. 또한, 사용자가 오른쪽으로 움직이게 되면(R), 화장 영역에 대한 프레임(310, 320)은 이와 동기화되어 디스플레이(110) 상에서 오른쪽으로 움직인다.
이 경우, 앞서 설명한 바와 같이, 화장 영역에 대한 프레임(310, 320)은 사용자의 얼굴 영상으로부터 추출된 특징점들을 기준으로 이동되게 된다.
또한, 스마트 미러(100)는 사용자가 좌우 대칭으로 메이크업을 수행할 수 있도록 가이드를 제공할 수 있다. 예를 들어, 아이쉐도우의 프레임 영역 범위의 경우, 얼굴 특징점을 기준으로 눈과 눈썹 사이의 거리를 계산하여 사용자의 얼굴 비율에 맞게 아이섀도우 프레임 영역을 넓은 영역, 중간 영역, 좁은 영역과 같이 다양한 영역으로 지정할 수 있다. 아이라이너와 아이브로우의 길이의 경우, 사용자의 얼굴 비율을 계산하여 비뚤어지지 않게 좌우대칭으로 프레임 선에 따라 그릴 수 있게 한다.
도 5는 본 발명에 따른 스마트 미러의 동작 방법의 다른 실시예를 설명하는 도면이다.
사용자가 앞으로 움직이는 경우 화장 영역에 대한 프레임은 이에 대응하여 크기가 변경될 수 있다. 이 경우, 얼굴 특징점을 기준으로 화장 영역에 대한 프레임의 크기를 동기화시킬 수 있다. 스마트 미러(100)가 얼굴을 인식하는 경우, 얼굴의 특징점인 눈, 코, 입, 턱선을 추출하게 된다. 사용자가 앞뒤로 움직여도 얼굴의 특징점은 변하지 않기 때문에, 사용자의 움직임에 따라 프레임의 크기를 줄이거나 늘림으로써 동기화를 시킬 수 있다.
도 5를 참조하면, 스마트 미러(100)의 디스플레이(110)를 향하여 사용자가 앞으로 움직인다. 이 경우, 앞으로 움직이기 전의 화장 영역에 대한 프레임(310)은, 디스플레이(110)를 향하여 움직인 이후의 화장 영역에 대한 프레임(500) 보다 작다. 즉, 사용자가 스마트 미러(100)를 향해 다가감에 따라, 화장 영역에 대한 프레임(500)의 크기는 증가하게 된다.
한편, 본 발명에 따른 스마트 미러의 동작 과정은, 상기 스마트 미러에 사용자의 얼굴 영상이 투사되는 단계; 와, 상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 화장 영역에 대한 프레임을 생성하는 단계; 및 상기 화장 영역에 대한 프레임을 상기 사용자의 얼굴 영상 위에 겹쳐서 표시하는 단계를 포함하되, 상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시킬 수 있다.
도 6은 본 발명의 실시예에 따른, 컴퓨팅 장치를 나타내는 도면이다. 도 6의 컴퓨팅 장치(TN100)는 본 명세서에서 기술된 스마트 미러(100)일 수 있다.
도 6의 실시예에서, 컴퓨팅 장치(TN100)는 적어도 하나의 프로세서(TN110), 송수신 장치(TN120), 및 메모리(TN130)를 포함할 수 있다. 또한, 컴퓨팅 장치(TN100)는 저장 장치(TN140), 입력 인터페이스 장치(TN150), 출력 인터페이스 장치(TN160) 등을 더 포함할 수 있다. 컴퓨팅 장치(TN100)에 포함된 구성 요소들은 버스(bus)(TN170)에 의해 연결되어 서로 통신을 수행할 수 있다.
프로세서(TN110)는 메모리(TN130) 및 저장 장치(TN140) 중에서 적어도 하나에 저장된 프로그램 명령(program command)을 실행할 수 있다. 프로세서(TN110)는 중앙 처리 장치(CPU: central processing unit), 그래픽 처리 장치(GPU: graphics processing unit), 또는 본 발명의 실시예에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 프로세서(TN110)는 본 발명의 실시예와 관련하여 기술된 절차, 기능, 및 방법 등을 구현하도록 구성될 수 있다. 프로세서(TN110)는 컴퓨팅 장치(TN100)의 각 구성 요소를 제어할 수 있다.
메모리(TN130) 및 저장 장치(TN140) 각각은 프로세서(TN110)의 동작과 관련된 다양한 정보를 저장할 수 있다. 메모리(TN130) 및 저장 장치(TN140) 각각은 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리(TN130)는 읽기 전용 메모리(ROM: read only memory) 및 랜덤 액세스 메모리(RAM: random access memory) 중에서 적어도 하나로 구성될 수 있다.
송수신 장치(TN120)는 유선 신호 또는 무선 신호를 송신 또는 수신할 수 있다. 송수신 장치(TN120)는 네트워크에 연결되어 통신을 수행할 수 있다.
한편, 본 발명의 실시예는 지금까지 설명한 장치 및/또는 방법을 통해서만 구현되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있으며, 이러한 구현은 상술한 실시예의 기재로부터 본 발명이 속하는 기술 분야의 통상의 기술자라면 쉽게 구현할 수 있는 것이다.
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 통상의 기술자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
100: 스마트 미러 110: 디스플레이
120: 카메라 210: 디스플레이부
220: 영상 처리부 230: 좌표 설정부
240: 제어부

Claims (10)

  1. 스마트 미러에 있어서,
    사용자의 얼굴 영상이 투사되고, 화장 영역에 대한 프레임이 상기 사용자의 얼굴 영상 위에 겹쳐서 표시되는 디스플레이부;
    상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 상기 화장 영역에 대한 프레임을 생성하는 영상 처리부; 및
    상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시키는 제어부를 포함하는, 스마트 미러.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 사용자의 얼굴 영상에 대한 제1좌표계를 생성하고, 상기 화장 영역에 대한 프레임에 대한 제2좌표계를 생성하며, 상기 특징점을 기준으로 상기 제1좌표계와 상기 제2좌표계를 동기화 시키는, 스마트 미러.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 사용자의 얼굴 영상이 좌우 방향으로 이동하는 경우 이와 동기화되도록 상기 화장 영역에 대한 프레임을 좌우 방향으로 이동시키는, 스마트 미러.
  4. 제1항에 있어서,
    상기 제어부는,
    상기 사용자의 얼굴 영상이 전후 방향으로 이동하는 경우 이에 대응하여 상기 화장 영역에 대한 프레임을 확대시키거나 축소시키는, 스마트 미러.
  5. 제1항에 있어서,
    상기 제어부는,
    복수개의 상기 특징점으로부터 얼굴선을 추출하고 이에 기초하여 얼굴형을 판단한 후, 상기 얼굴형에 맞는 메이크업 스타일에 대응하도록 상기 화장 영역에 대한 프레임을 생성하는, 스마트 미러.
  6. 스마트 미러의 동작 방법에 있어서,
    상기 스마트 미러에 사용자의 얼굴 영상이 투사되는 단계;
    상기 사용자의 얼굴 영상을 분석하고 이에 대응하여 화장 영역에 대한 프레임을 생성하는 단계; 및
    상기 화장 영역에 대한 프레임을 상기 사용자의 얼굴 영상 위에 겹쳐서 표시하는 단계를 포함하되,
    상기 사용자의 얼굴 영상으로부터 특징점을 추출하고, 상기 특징점을 기준으로 상기 사용자의 얼굴 영상과 상기 화장 영역에 대한 프레임을 동기화 시키는, 스마트 미러의 동작 방법.
  7. 제6항에 있어서,
    상기 사용자의 얼굴 영상에 대한 제1좌표계를 생성하고, 상기 화장 영역에 대한 프레임에 대한 제2좌표계를 생성하며, 상기 특징점을 기준으로 상기 제1좌표계와 상기 제2좌표계를 동기화 시키는, 스마트 미러의 동작 방법.
  8. 제6항에 있어서,
    상기 사용자의 얼굴 영상이 좌우 방향으로 이동하는 경우 이와 동기화되도록 상기 화장 영역에 대한 프레임을 좌우 방향으로 이동시키는, 스마트 미러의 동작 방법.
  9. 제6항에 있어서,
    상기 사용자의 얼굴 영상이 전후 방향으로 이동하는 경우 이에 대응하여 상기 화장 영역에 대한 프레임을 확대시키거나 축소시키는, 스마트 미러의 동작 방법.
  10. 제6항에 있어서,
    복수개의 상기 특징점으로부터 얼굴선을 추출하고 이에 기초하여 얼굴형을 판단한 후, 상기 얼굴형에 맞는 메이크업 스타일에 대응하도록 상기 화장 영역에 대한 프레임을 생성하는, 스마트 미러의 동작 방법.
KR1020200179038A 2020-12-18 2020-12-18 스마트 미러 및 이의 동작 방법 KR20220088219A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200179038A KR20220088219A (ko) 2020-12-18 2020-12-18 스마트 미러 및 이의 동작 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200179038A KR20220088219A (ko) 2020-12-18 2020-12-18 스마트 미러 및 이의 동작 방법

Publications (1)

Publication Number Publication Date
KR20220088219A true KR20220088219A (ko) 2022-06-27

Family

ID=82247198

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200179038A KR20220088219A (ko) 2020-12-18 2020-12-18 스마트 미러 및 이의 동작 방법

Country Status (1)

Country Link
KR (1) KR20220088219A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102543172B1 (ko) 2022-07-22 2023-06-14 주식회사 메타스킨큐어 사용자 단말을 통한 인공지능에 기반한 피부진단용 데이터 수집 방법 및 시스템
KR20240060506A (ko) 2022-10-28 2024-05-08 최정회 안면 인식이 가능한 스마트 미러 키오스크 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102543172B1 (ko) 2022-07-22 2023-06-14 주식회사 메타스킨큐어 사용자 단말을 통한 인공지능에 기반한 피부진단용 데이터 수집 방법 및 시스템
KR20240060506A (ko) 2022-10-28 2024-05-08 최정회 안면 인식이 가능한 스마트 미러 키오스크 시스템

Similar Documents

Publication Publication Date Title
US20240193833A1 (en) System and method for digital makeup mirror
US11423556B2 (en) Methods and systems to modify two dimensional facial images in a video to generate, in real-time, facial images that appear three dimensional
KR102291461B1 (ko) 디스플레이를 위한 캡처된 이미지의 시각을 조정하는 기술들
US11887234B2 (en) Avatar display device, avatar generating device, and program
JP3779570B2 (ja) 化粧シミュレーション装置、化粧シミュレーション制御方法、化粧シミュレーションプログラムを記録したコンピュータ読み取り可能な記録媒体
CN110688948B (zh) 视频中人脸性别变换方法、装置、电子设备和存储介质
US20180204052A1 (en) A method and apparatus for human face image processing
US11288854B2 (en) Information processing apparatus and information processing method
JP3810943B2 (ja) 画像処理装置、画像処理方法および画像処理プログラムを記録した記録媒体
CN111783511A (zh) 美妆处理方法、装置、终端以及存储介质
KR20220088219A (ko) 스마트 미러 및 이의 동작 방법
WO2018005884A1 (en) System and method for digital makeup mirror
KR102131923B1 (ko) 가상 피팅을 위한 실시간 3d 아바타 생성 방법 및 시스템
KR101719927B1 (ko) 립 모션을 이용한 실시간 메이크업 미러 시뮬레이션 장치
Zitnick et al. Manipulation of video eye gaze and head orientation for video teleconferencing
CN115953324A (zh) 图像修复模型的训练方法及相关设备
KR20170055788A (ko) 교육용 콘텐츠 제작 시스템에 포함되는 저작자 단말 및 이를 이용한 가상 신체 정보 생성 및 저장 방법
RU2703327C1 (ru) Способ обработки двухмерного изображения и реализующее его вычислительное устройство пользователя
US20200320761A1 (en) Structural facial modifications in images
CN110264566A (zh) 一种基于人脸ai彩妆替换的多屏显示的装置及方法
WO2021256319A1 (ja) 情報処理装置、情報処理方法および記録媒体
KR20020015229A (ko) 캐리커쳐의 표정변형을 위한 방법 및 장치
JP2024111515A (ja) 情報処理装置、情報処理方法およびプログラム
JPH10105673A (ja) 似顔絵画像作成装置およびその方法
JPH06187399A (ja) 服飾用シュミレーションシステム