KR102505864B1 - 얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법 - Google Patents

얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법 Download PDF

Info

Publication number
KR102505864B1
KR102505864B1 KR1020160033550A KR20160033550A KR102505864B1 KR 102505864 B1 KR102505864 B1 KR 102505864B1 KR 1020160033550 A KR1020160033550 A KR 1020160033550A KR 20160033550 A KR20160033550 A KR 20160033550A KR 102505864 B1 KR102505864 B1 KR 102505864B1
Authority
KR
South Korea
Prior art keywords
impression
makeup
user
classification
support application
Prior art date
Application number
KR1020160033550A
Other languages
English (en)
Other versions
KR20160131873A (ko
Inventor
최명수
Original Assignee
최명수
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 최명수 filed Critical 최명수
Publication of KR20160131873A publication Critical patent/KR20160131873A/ko
Application granted granted Critical
Publication of KR102505864B1 publication Critical patent/KR102505864B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G06Q50/30—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Operations Research (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 실시간 메이크업 지원 방법에 관한 것이다. 본 발명은 얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성할 수 있다. 본 발명의 방법에 따르면 메이크업 지원 애플리케이션이 디바이스에 설치되어 있다. 그리고 그 메이크업 지원 애플리케이션은 인상 분류와 인상 규칙을 매핑하는 인상 분류 테이블을 액세스한다. 사용자는 상기 메이크업 지원 애플리케이션을 실행하고, 디바이스에 내장된 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집한다.
매칭기는 선택된 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 상기 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성한다. 그리고 메이크업 지원 애플리케이션 화면을 통해서 메이크업 지도 콘텐트를 표시한다.

Description

얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법{MAKEUP SUPPORT METHOD OF CREATING AND APPLYING MAKEUP GUIDE CONTENT FOR USER'S FACE IMAGE WITH REALTIME}
본 발명은 컴퓨터 애플리케이션을 이용한 메이크업 기술에 관한다.
사람들은 화장을 한다. 자외선 차단처럼 피부 건강을 위해서 화장을 하는 경우도 있겠지만, 메이크업의 주된 목적은 일반적으로 아름답게 보이기 위함이다. 미에 대한 기준은 사람마다 다르고, 또한 시대와 지역마다 다르다. 그 때문에 미적 기준이 획일적으로 정해지기는 어렵다. 그러나 스스로를 나쁜 사람처럼 보이게끔 하기 위해서 메이크업을 하는 사람은 거의 없다. 즉, 사람들은 메이크업을 통해서 자기 얼굴을 보충하거나 보완함으로써 적어도 타인에게 호감을 주는 인상이 되기를 원한다.
메이크업은 재료와 스타일로 구성된다. 전자는 메이크업에 사용되는 화장품을 의미한다. 사용자들의 피부유형을 고려한 색조화장품뿐만 아니라 다양한 종류의 기능성 화장품이 존재한다. 메이크업의 스타일은 결국 얼굴의 변화를 뜻한다. 어떻게 메이크업을 하는 것이 가장 효과적일까 이것은 매우 어려운 질문이다. 메이크업 테크닉에 관련한 지식과 경험이 필요하기도 하지만, 무엇보다 사람마다 얼굴 특징 및 피부 유형이 다르다는 근본적인 한계가 있다.
메이크업의 지식과 경험을 전하는 전문가들이 존재한다. 그들은 미용숍에서 메이크업 서비스를 대행해준다. 또는 유튜브 등의 동영상 플랫폼뿐만 아니라, 패션 및 메이크업 관련 잡지, 다양한 웹 사이트와 모바일을 통해서 메이크업 기술을 알려주는 콘텐트가 배포/공유되고 있다. 사람들은 숙련된 타인의 메이크업 기술을 구매하거나 혹은 잡지나 웹사이트의 메이크업 방법을 모방하여 활용한다. 이러한 종래기술은 타인에 의존한다는 한계와 문제점이 있다. 혼자서 스스로 메이크업을 할 때에는 도움을 주지 못한다. 특히 사람마다 얼굴 특징 및 피부 유형이 다르다는 점을 중시한다면, '이 사람'의 메이크업 경험과 '저 사람'의 메이크업 지식은 '내게는' 무용하거나 때때로 해로울 수 있다.
혼자서 메이크업을 하기 위해서는 자기 얼굴을 볼 수 있어야 한다. 휴대폰에 내장된 카메라를 통해서 자기 얼굴을 볼 수 있다는 점을 착안할 수 있겠다. 대한민국 공개특허 제2011-0127396호는 메이크업 기능을 제공하는 휴대폰에 대해서 개시하고 있다. 이 특허문헌에는 메이크업 모드가 실행되면 카메라를 이용해서 메이크업 대상 이미지를 획득하고, 메이크업 제품정보를 취득한 다음에, 해당 제품으로 이미지에 가상의 메이크업을 하는 내용이 포함되어 있다.
그러나 이 특허문헌은 자기 얼굴을 예쁘고 호감형으로 꾸미는 메이크업 기술에 관한 것이 아니라 구매하려는 화장품이 어떤 느낌을 주는지 미리 알아보려는 기술에 그친다.
본 발명의 발명가들은 사용자 디바이스에 설치할 수 있는 애플리케이션을 이용해서 스스로 메이크업을 하는 방법론을 연구했다. 어떻게 하면 효과적인 메이크업 기술을 구현할 것인가에 대한 기술적인 해답을 찾기 위해서 오랫동안 연구 노력한 끝에 본 발명을 완성하게 되었다.
사람은 저마다 다르게 생겼다. 그리고 사람마다 상황/장소/시간/기분에 따라 원하는 인상이 달라진다. 메이크업은 인상에 매우 큰 영향을 미친다. 본 발명의 목적은 사용자의 인상학적 특징을 고려해서 최적의 메이크업 지원을 할 수 있는 기술을 제안함에 있다.
사람마다의 인상학적 특징은 카테고라이징될 수 있으며 패턴화될 수 있다. 그러므로 본 발명의 다른 목적은 인상학적 특징의 카테고라이징, 패터닝, 그리고 인상 규칙의 생성을 통해서 메이크업과 인상의 상호 관계를 규명함에 있다.
또한, 본 발명의 또 다른 목적은 사용자의 변동성 니즈에 반응할 수 있도록 하겠다는 것이다. 요컨대 본 발명의 메이크업 지원 방법은 사용자의 얼굴 및 피부 유형이 지니는 고유한 인상학적 특징뿐만 아니라, 사용자가 상황/장소/시간/기분에 따라 원하는 인상학적 특징을 함께 고려한다. 메이크업을 통해서 최종적으로 만들어지는 인상은 매일 달라진다. 본 발명은 그런 현실과 욕망을 중시한다.
사용자가 원하는 최적의 메이크업은 수시로 변화한다. 그렇다면 사용자에게 제공되는 메이크업 지원 서비스도 변해야 한다. 그런 점에서 본 발명의 메이크업 지원 기술은 역동적인 특성을 지닌다.
한편, 본 발명의 명시되지 않은 또 다른 목적들은 하기의 상세한 설명 및 그 효과로부터 용이하게 추론할 수 있는 범위 내에서 추가적으로 고려될 것이다.
이와 같은 과제를 달성하기 위하여 본 발명의 제 1 국면은 메이크업 지원 방법으로서:
디바이스에 설치되어 있는 메이크업 지원 애플리케이션은 인상 분류와 인상 규칙을 매핑하는 인상 분류 테이블을 액세스하며:
상기 메이크업 지원 애플리케이션을 실행하고,
디바이스에 내장된 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집하고,
디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 상기 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성하고,
상기 메이크업 지원 애플리케이션 화면을 통해서 상기 메이크업 지도 콘텐트를 표시하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 바람직한 어느 실시예에 따른 메이크업 지원 방법에 있어서, 상기 메이크업 지원 애플리케이션은 메이크업 목적에 대응하는 인상 분류 선택 인터페이스를 제공하고, 디바이스의 입력수단이 상기 인상 분류 선택 인터페이스를 통해서 인상 분류 선택이벤트를 생성하도록 하거나, 또는
애플리케이션 환경 설정을 통해 수정 가능한 디폴트 값으로 인상 분류가 미리 결정되도록 하는 것인, 메이크업 지원 방법
또한, 본 발명의 바람직한 어느 실시예에 따른 메이크업 지원 방법에 있어서, 상기 메이크업 지도 콘텐트의 생성은 상기 인상 규칙으로서 미리 저장되어 있는 표준 인상 데이터를 상기 사용자의 인상 데이터에 매칭하면서 적용하여 메이크업 지도 콘텐트를 생성하는 것일 수 있다.
또한, 본 발명의 바람직한 어느 실시예에 따른 메이크업 지원 방법에 있어서, 메이크업 지도 콘텐트는 영상 파일이며,
실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 상기 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들이 보정되며, 보정된 사용자의 얼굴 이미지로서 상기 메이크업 지원 애플리케이션 화면을 통해서 표시되도록 할 수 있다.
또한, 본 발명의 바람직한 다른 실시예에 따른 메이크업 지원 방법에 있어서, 메이크업 지도 콘텐트는 텍스트 또는 음성을 포함하며,
실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 상기 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들에 대한 메이크업 가이드 텍스트 또는 음성을 상기 메이크업 지원 애플리케이션 화면 또는 스피커를 통해서 표시되도록 할 수 있다.
또한, 본 발명의 바람직한 어느 실시예에 따른 메이크업 지원 방법에 있어서, 상기 인상 규칙은 미리 정해진 얼굴 영역 분류 데이터를 가지며, 이 얼굴 영역 분류 데이터를 상기 인상 데이터에 적용하여 얼굴 영역마다 패턴 정보를 갖는 메이크업 지도 콘텐트를 생성하는 것일 수 있다.
본 발명의 제 2 국면은 다른 관점의 메이크업 지원 방법으로서:
디바이스에 설치되어 있는 메이크업 지원 애플리케이션은 인상 분류와 인상 규칙을 매핑하는 인상 분류 테이블에 액세스하며:
상기 메이크업 지원 애플리케이션을 실행하고,
디바이스의 메모리에 이미지 파일로 저장되어 있는 사용자의 얼굴 이미지로부터 인상 데이터를 수집하고,
디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 상기 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성하고,
상기 메이크업 지원 애플리케이션 화면을 통해서 상기 메이크업 지도 콘텐트를 표시하는 단계를 포함하며,
상기 인상 규칙은 미리 정해진 얼굴 영역 분류 데이터를 가지며, 이 얼굴 영역 분류 데이터를 상기 인상 데이터에 적용하여 얼굴 영역마다 패턴 정보를 갖는 메이크업 지도 콘텐트를 생성하는 것을 특징으로 한다.
본 발명의 제 3 국면은 인상 분류에 따라 인상 규칙을 적용하는 메이크업 지원 애플리케이션이 설치되어 있으며 카메라 모듈이 내장되어 있는 디바이스로서,
상기 카메라 모듈과 통신하는 적어도 하나의 프로세서; 및
상기 프로세서와 통신하는 적어도 하나의 메모리를 포함하고,
상기 메모리는 명령어들을 포함하며, 상기 명령어들은 상기 프로세서에 의해 실행될 때 상기 프로세서로 하여금:
상기 디바이스가 상기 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집하는 동작;
디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 상기 인상 분류에 따라 미리 저장되어 있는 상기 인상 규칙을 상기 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성하는 동작; 그리고
상기 메이크업 지원 애플리케이션 화면을 통해서 상기 메이크업 지도 콘텐트를 표시하는 동작을 수행하게 하는 디바이스를 특징으로 한다.
사람들은 화장을 통해서 자기 인상을 개선하려고 한다. 소망하는 인상은 사람마다 다르다. 동일인이라 하여도 상황과 기분과 연령 등의 변화에 따라 달라질 수 있다. 본 발명의 발명자들은 이런 심리와 현실을 분석하면서, 인상의 역동적인 의미를 해석하여 시스템을 구축하고 알고리즘을 설계하였다. 결과적으로 본 발명은 인상 분류와 인상 규칙이 서로 매핑됨으로써 최적의 실시간 메이크업 지원을 할 수 있다는 장점이 있다.
사용자 개인의 얼굴 특성을 반영하지 못한 채 단지 표준 모델의 이미지만을 제공하는 종래의 방법을 본 발명은 혁신한다. 본 발명의 메이크업 지도 콘텐트는 개인의 얼굴 특성을 반영한다. 그러므로 가장 정확한 메이크업 지원이 가능하다. 또한 본 발명의 어느 실시예에 따르면 사용자가 처한 상황과 기분과 애플리케이션 실행 시기에 따라 메이크업 지도 콘텐트가 달라진다.
한편, 여기에서 명시적으로 언급되지 않은 효과라 하더라도, 본 발명의 기술적 특징에 의해 기대되는 이하의 명세서에서 기재된 효과 및 그 잠정적인 효과는 본 발명의 명세서에 기재된 것과 같이 취급됨을 첨언한다.
도 1은 본 발명의 어느 실시예에 따른 시스템 구성 예를 개략적으로 나타내는 도면이다.
도 2는 본 발명의 어느 실시예에서의 사용자 디바이스(10)의 내부 전자적 구성의 예를 나타내는 도면이다.
도 3은 본 발명에서 사용자 디바이스의 인상 분류 선택 인터페이스를 예시하는 사용자 화면(110)의 구성 예를 나타낸다.
도 4는 본 발명의 바람직한 어느 실시예에 있어서 매칭기(200)가 메이크업 지도 콘텐트(201)를 생성하는 방법을 개략적으로 나타내는 도면이다.
도 5는 메이크업 지도 콘텐트를 생성함에 있어 사용자의 얼굴(B)에 미리 등록되어 있는 패턴 이미지(X)를 중첩 및 매핑하는 구성을 개념적으로 나타내는 도면이다.
도 6은 본 발명의 세 가지 실시예에 따라서 메이크업 지도 콘텐트를 사용자 디바이스 화면에서 표시하는 시나리오를 나타내는 도면이다.
도 7은 본 발명의 바람직한 실시예에 있어서 메이크업 지도 콘텐트가 얼굴 영역별로 특징 요소를 가지며, 또한 얼굴 영역별로 확대해서 보거나 변경해서 볼 수 있음을 나타내는 화면 시나리오이다.
도 8은 본 발명의 바람직한 어느 실시예에 따른 메이크업 지원 방법의 전체 프로세스를 개략적으로 나타내는 도면이다.
※ 첨부된 도면은 본 발명의 기술사상에 대한 이해를 위하여 참조로서 예시된 것임을 밝히며, 그것에 의해 본 발명의 권리범위가 제한되지는 아니한다.
본 발명을 설명함에 있어서 관련된 공지기능에 대하여 이 분야의 기술자에게 자명한 사항으로서 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다.
도 1은 본 발명의 개략적인 시스템 구성 예를 나타낸다. 사용자 디바이스(10)에는 메이크업 지원 애플리케이션(100)이 설치된다. 그리고 디바이스(10)는 메이크업 지원 애플리케이션(100)을 실행하여 서비스 서버(20)와 통신하면서 본 발명의 메이크업 지원 방법이 실시된다.
서비스 서버(20)는 서비스 매니지먼트, 데이터 처리 및 송수신, 데이터베이스 구축, 보안 및 인증, 얼굴 인식 솔루션 등에 관한 복수의 서버 장치로 구성되며, 하드웨어/소프트웨어 장비를 포함한다. 서비스 서버(20)는 복수의 데이터베이스를 구축하고 관리한다. 데이터베이스(25)는 사용자의 정보를 기록하여 관리할 수 있다. 데이터베이스(23)는 콘텐트를 기록한 콘텐트 데이터베이스일 수 있다. 또한 데이터베이스(21)는 표준 인상 데이터베이스일 수 있다. 기타 로그, 과금, 상품정보 등의 데이터베이스가 추가적으로 더 구성될 수 있다.
본 발명의 서비스 서버(20)에는 매칭기(200)가 포함될 수 있다. 이 매칭기(200)는 인상 분류 테이블을 가지며, 미리 저장되어 있는 인상 분류 및 인상 규칙에 따라 표준 인상 데이터베이스(21)에 있는 표준 인상 데이터를 추출한다. 그리고 사용자 디바이스(10)로부터 전송되는 사용자의 인상 데이터와 매칭해서 메이크업 지도 콘텐트를 생성한다.
서비스 서버(20)는 생성된 메이크업 지도 콘텐트를 네트워크 통신망을 통해 사용자 디바이스(10)로 전송한다.
사용자 디바이스(10)는 서비스 서버(20)가 제공하는 애플리케이션 소프트웨어를 다운로드하여 설치될 수 있으며, 설치된 애플리케이션을 실행할 때 프로세서가 미리 설정된 기능을 연산하고 구현할 수 있는 컴퓨팅 기능이 있어야 한다.
사용자 디바이스(10)는 바람직하게는 스마트폰, 태블릿 PC 등의 모바일 디바이스인 것이 좋다. 도면의 예시는 스마트폰 등의 휴대용 디바이스에 관한 것이지만, 설명의 편의를 위한 것에 그친다. 즉, 반드시 휴대용 디바이스여야 하는 것은 아니다. 본 발명의 다른 실시예에서는 사물 인터넷 디바이스여도 좋다. 카메라와 디스플레이를 갖는 화장대 장치라면 최적의 디바이스로 기능할 수 있을 것이다. 또한, 종래에는 없었지만 본 명세서에서 설명되는 구성을 갖는 새로운 디바이스도 포함될 수 있다. 예를 들면 카메라와 디스플레이가 장착된 메이크업 제품 자동 판매장치 같은 것이다.
메이크업 지원 애플리케이션(100)은 디바이스(10)의 메모리에 상주하며, 본 발명을 실시하는 소프트웨어 모듈들과 리소스들, 그리고 그 모듈들의 실행에 의해서 메이크업 지원 방법을 화면으로 가시화하는 사용자 인터페이스(101) 등을 포함한다. 본 발명의 바람직한 어느 실시예에 있어서는 표준 인상 데이터베이스(103)가 사용자 디바이스에 구축될 수도 있다.
본 발명의 메이크업 지원 애플리케이션(100)이 실행되는 경우, 사용자의 선택이나 또는 애플리케이션의 설정에 의해서 디바이스(10)의 카메라 모듈(13)이 활성화될 수 있다.
도 2는 본 발명의 사용자 디바이스(10)의 내부 전자적 구성 예를 간략하게 나타내었다. 디바이스(10)는 프로세서(11), 메모리(12), 카메라 모듈(13), 무선통신모듈(17)을 포함할 수 있다.
디바이스(10)의 입력기(15)는 소프트웨어 또는 하드웨어 입력기를 포함하며, 도시되어 있지는 않지만 출력기로는 스피커와 디스플레이를 포함한다. 디스플레이는 화면을 출력하는 수단임과 동시에 사용자의 터치 이벤트를 감지하는 입력수단 기능을 함께 실행하는 터치스크린으로 이루어질 수 있다.
디바이스(10)의 내부 메모리(12)는 일반적으로 디바이스에 사용되는 컴퓨터 코드 및 데이터를 저장하는 장소를 제공한다. 본 발명의 일 실시예에 따른 디바이스(10)의 내부 메모리(12)에는 메이크업 지원 애플리케이션의 구동/관리에 필요한 리소스뿐만 아니라 기본적인 입출력 시스템, 운영 체제, 다양한 프로그램들, 애플리케이션들, 또는 디바이스에서 실행되는 사용자 인터페이스 기능들, 프로세서 기능들 등을 포함하는 임의의 디바이스용 펌웨어(firmware)가 저장될 수 있다.
디바이스(10)의 프로세서(11)는 운영체제와 함께 컴퓨터 코드를 실행하고 데이터를 생성하고 사용하는 동작을 실행한다. 또한 프로세서(11)는 일련의 명령어를 사용하여 디바이스(10)의 컴포넌트들 간의 입력 및 출력 데이터의 수신 및 처리를 할 수 있다. 또한 프로세서(11)는 디바이스(10)에 설치된 운영체제 소프트웨어와 각종 애플리케이션 소프트웨어들(메이크업 지원 애플리케이션을 포함)의 기능을 실행하는 제어부 역할을 담당한다. 특히, 프로세서(11)는 메이크업 지원 애플리케이션이 카메라 모듈(13)을 제어하는 소프트웨어에 접속해서 카메라 모듈(13)의 동작을 제어할 수 있다. 또한, 메모리(12)에 저장되어 있는 사진 갤러리에 접속해서 사진 파일을 호출하는 기능을 보장할 수 있다. 카메라 모듈(13)에 의해 생성되는 인상 데이터를 사진의 형태로 메모리(12) 내의 사진 갤러리에 저장을 할 수도 있다.
또한 프로세서(11)는 무선통신모듈(17)이 적시에 실행될 수 있도록 보장한다. 그렇게 함으로써 무선통신모듈(17)을 통해서, 애플리케이션의 실행 및 관리에 관하여, 상기 서비스 서버(20)와 디바이스(10) 사이의 데이터 통신이 이루어지도록 한다.
이제 본격적으로 본 발명의 주요한 기능을 설명한다. 본 발명의 메이크업 지원 방법은 바람직하게는 서버 측에 인상 분류 테이블이 미리 구축되고, 애플리케이션 화면을 통해서 인상 분류가 제공됨으로써 최적화될 수 있다.
본 발명에서 인상 분류라 함은 메이크업의 목적에 대응하여 미리 정의된 하나 이상의 분류를 의미한다. 표 1의 분류와 같이 인상 분류가 사전에 정의될 수 있다. 그리고 해당 인상 분류에 대응하는 인상 규칙이 정의될 수 있다. 인상 규칙은 얼굴 영역마다의 메이크업 패턴 정보를 포함한다. 예컨대 눈, 눈썹, 입술, 볼 등의 영역마다 특징 요소들이 패턴 정보로 등록될 수 있다. 패턴 정보로 등록되는 특징 요소들은 영역분류를 가지며, 얼굴에서 이뤄지는 형태에 관한 벡터, 색채, 농도, 화장품 종류 등의 데이터가 부여된다.
표 1은 본 발명의 바람직한 어느 실시예에 따른 인상 분류 테이블의 개념적인 예를 나타낸다.
인상 분류 인상 규칙
영역분류 패턴정보 표준 인상 데이터

젊은 인상		 영역 1 패턴 1
표준 인상 데이터 1
영역 2 패턴 2
영역 3 패턴 3
… …

섹시한 인상		 영역 1 패턴 11
준 인상 데이터 2
영역 2 패턴 22
영역 3 패턴 33
… …

지적인 인상		 영역 1 패턴 111
표준 인상 데이터 3
영역 2 패턴 222
영역 3 패턴 333
… …

냉정한 인상		 영역 1 패턴 1111
표준 인상 데이터 4
영역 2 패턴 2222
영역 3 패턴 3333
… …

따뜻한 인상		 영역 1 패턴 11111
표준 인상 데이터 5
영역 2 패턴 22222
영역 3 패턴 33333
… …

내추럴한 인상		 영역 1 패턴 1A
표준 인상 데이터 6
영역 2 패턴 2B
영역 3 패턴 3C
… …

귀여운 인상		 영역 1 패턴 11A
표준 인상 데이터 7
영역 2 패턴 22B
영역 3 패턴 33C
… …

관상학적 인상		 영역 1 패턴 1AA
표준 인상 데이터 8
영역 2 패턴 2AB
영역 3 패턴 3AC
… …
… … … …
표 1에 예시되어 있는 것처럼, 각각의 인상 분류의 항목에 따라 영역분류에 해당하는 패턴 정보가 동일할 수도 있고, 다를 수도 있다(편의상 표 1에서는 모두 다르게 표현하였다). 인상 분류 항목에 따라 눈썹의 폭, 폭의 변화, 눈썹 끝의 방향, 눈썹의 색깔과 농도 등이 다르게 정의될 수 있다.
영역들의 집합과 패턴들의 집합에 속하는 원소 쌍들의 중첩 및 매핑을 통해서 표준 인상 데이터를 생성할 수 있다. 바람직한 어느 실시예에 있어서 표준 인상 데이터는 텍스트로 등록될 수 있다. 본 발명의 바람직한 다른 실시예에서는 상기 표준 인상 데이터가 이미지로 생성될 수 있다. 그 경우 표준 인상 데이터는 패턴 이미지가 된다. 이들 표준 인상 데이터는 서비스 서버 측의 데이터베이스에 구축되는 것이 좋지만, 사용자 디바이스에도 구축이 가능하다.
상기 인상 분류는 예시에 불과하다. 그러므로 당업자는 인상 분류를 다르게 정의할 수도 있을 것이다. 한편, 표 1의 관상학적 인상은, 관상학에 의해 축적된 분류로서 재산, 부모, 자녀, 인기, 결혼, 건강, 운수 등의 세부 항목이 더 추가될 수도 있다.
상기 인상 분류는 얼굴인상에 관한 선호도에 따른 분류이다. 이를 상황에 따른 분류로 재구성할 수 있다. 예컨대 인상 분류를, 파티, 데이트, 면접, 직장생활, 여행, 기분에 따른 분류, 날씨에 따른 추천, 의상추천 등으로 재구성할 수 있다. 또한, 본 발명의 다른 실시예에 있어서, 상기 인상 분류는 모방하고자 하는 연예인 스타일의 분류일 수 있다. 인상 분류 항목은 사전에 등록되어 있는 연예인 모델일 수 있다. 인상 분류에 관한 다양한 실시예들은 기본적으로는 전술한 인상 규칙과 같이, (영역분류, 패턴정보, 표준 인상 데이터)를 인상 분류에 따라 정의할 수 있다.
위와 같이 예시하여 설명한 인상 분류 테이블은 사전에 정의된다. 메이크업 지원 애플리케이션은 사용자가 인상 분류 항목을 선택할 수 있는 사용자 인터페이스를 제공할 수 있다. 도 3은 메이크업 지원 애플리케이션의 인상 분류 선택 인터페이스의 화면 구성 예를 나타낸다.
인상 분류 화면(110)에는 인상 분류 항목(111, 113, 115, 117)이 포함될 수 있다. 도면에서는 간략하게 번호로 표시되어 있지만, 바람직하게는 인상 분류의 명칭에 해당하는 텍스트나 또는 인상 분류의 특성을 표현한 아이콘 이미지일 수 있다. 그리고 각 인상 분류 항목마다 해당 인상 분류를 설명하는 해설 항목(111a, 113a, 115a, 117a)가 부가적으로 포함될 수 있다. 물론 이들 항목이 반드시 있어야 하는 것은 아니다.
사용자는 입력수단을 이용해서 인상 분류 항목을 선택한 다음에 시작 버튼(110a)을 누를 수 있다. 그러면 선택 이벤트에 따라 해당 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 호출해서 메이크업 지도 콘텐트를 생성하게 된다.
본 발명의 다른 실시예에서는 어느 한 인상 분류 항목을 디바이스에 설치된 애플리케이션에서 디폴트로 설정해 놓는 방법(사용자가 환경설정에서 항목을 수정할 수 있도록 할 수 있다), 서버에서 어느 한 인상 분류 항목을 결정해 놓는 방법, 메이크업 지원 애플리케이션을 실행하여 디바이스의 카메라 모듈을 활성화시키면 사용자의 얼굴 이미지를 입수하고 분석해서 어느 한 인상 분류 항목을 추천하는 방법 등에 의해서 인상 규칙이 호출되도록 할 수 있다.
도 4는 메이크업 지도 콘텐트를 생성하는 방법을 예시적으로 나타내었다. 본 발명의 기본 정신은 매칭기(200)를 통해서 사용자의 인상 데이터(199)와 상기 표준 인상 데이터(21)를 실시간으로 매칭하여 메이크업 지도 콘텐트를 생성한다는 것이다. 사용자의 인상 데이터(199)는 디바이스의 카메라 모듈을 통해서 입수된다. 표준 인상 데이터(21)는 전술한 것처럼 사전에 등록되어 있다.
표준 인상 데이터(21)가 이미지 파일인 경우에, 사용자의 얼굴과 표준 인상 데이터의 얼굴을 매칭하는 작업은 특별한 연산 규칙이 필요하다. 인간의 얼굴은 불변요소들과 가변요소들로 구성된다. 불변요소들은 얼굴의 일부 또는 전부의 물리적 형태, 즉 개인마다 고유하게 결정된 윤곽, 크기, 위치 등의 얼굴형태에 관한다. 이들을 변경하는 것은 화장의 기능이 아니라 성형수술의 기능이다. 화장에 의해서 가변할 수 있는 부분을 가변요소들로 정의할 수 있다. 인상 규칙은 가변요소들의 변화에 관한 것이다. 이런 점을 감안할 때 표준 인상 데이터(21)는 {불변요소, 가변요소}로 구별되며, 바람직한 어느 실시예에서는 {얼굴형태, 영역별 패턴}으로 볼 수 있다.
예컨대 매칭기(200)는 불변요소에 관해서는 사용자의 얼굴을 적용하고, 가변요소에서는 표준 인상 데이터의 이미지를 적용함으로써 메이크업 지도 콘텐트(201)를 생성할 수 있다. 도 5는 이를 개념적으로 설명한다.
도 5에서 B는 사용자의 실제 얼굴 이미지이다. X는 인상분류에 따라 미리 등록되어 있는 패턴 이미지이다. 매칭기(200)는 이 두 가지 이미지를 중첩 및 매핑시킨다. 바람직하게는 영역별로, 예컨대 (X1, X2, X3, X4)는 각각 (B1, B2, B3, B4)에 중첩 및 매핑시킨다. 이때 얼굴의 불변요소는 (B1, B2, B3, B4)에서 특징 요소들을 추출하여 그대로 반영하고, 얼굴의 가변요소는 (X1, X2, X3, X4)에서 추출된 특징 요소들을 사용자의 얼굴 이미지를 보정한다. 그렇게 해서 생성된 이미지가 메이크업 지도 콘텐트로서 메이크업 지도 이미지가 되는 것이다.
이와 같이 함으로써 본 발명은 사용자 개인의 얼굴 특성을 반영하지 못하고 단지 표준 모델의 이미지만을 제공하는 종래의 방법을 혁신한다. 본 발명의 바람직한 실시예에서의 메이크업 지도 콘텐트는 개인의 얼굴 특성을 반영한 것이다. 그러므로 가장 정확한 메이크업 지원이 가능하다. 또한 사용자의 실제 얼굴 이미지는 애플리케이션을 실행하는 시기와 장소에 따라 달라질 수 있는데, 그때마다 최적의 메이크업 지원도 가능하다.
한편, 인상 규칙을 적용해서 메이크업 지원 콘텐트로서 메이크업 지도 이미지를 생성함에 있어 다음과 같은 방법의 규칙도 적용해 볼 수 있다.
얼굴은 각 영역별로 분할된 얼굴 영역을 포함하는 영역의 집합이라 정의할 수 있으며, 다음과 같이 표현할 수 있다.
전체얼굴 = {영역1, 영역2, …, 영역n}
인상 규칙은 인상 분류의 항목과 얼굴 영역에 따라 적용할 다양한 규칙이 존재할 수 있다. 개개의 규칙 원소를 포함하는 규칙 집합을 다음과 같이 정의할 수 있다.
규칙 = {규칙1, 규칙2, …, 규칙m}
데이터베이스에 저장 및 관리되는 다수의 패턴정보는 표 1에서 예시한 바와 같이, 인상 분류와 얼굴 영역별로 등록되어 있다. 특정 인상 규칙이 특정 영역에 대해 적용될 것이다. 규칙의 조건이 만족되면 해당 규칙이 트리거링되어 해당 규칙과 매칭되는 영역에 적용된다. 이때 해당 영역을 포함하는 지도 이미지를 변경한다. 다음과 같은 연산자 "←"를 사용할 수 있다.
얼굴패턴i = {영역1 ← 규칙1, …, 영역n ← 규칙3}
다음으로 각 얼굴의 패턴정보에 따라 표준 인상 데이터로서의 이미지를 만들 수 있고, 이를 패턴 이미지라고 표현해 보자. 그것은 다음과 같이 표현될 수 있다.
패턴 이미지i ← 얼굴패턴i
패턴 이미지j ← 얼굴패턴j
사용자가 메이크업을 진행하면서 본 발명의 메이크업 지원을 받는 경우를 생각해 보자. 그러면 복수의 패턴 이미지들이 생기게 되며, 각 패턴 이미지마다 메이크업 지도 이미지가 달라진다. 따라서 패턴 이미지는 메이크업을 적용하는 순서에 따라 순차적으로 적층된다고 볼 수 있으며, 이 적층 개념을 연산자 "⇒"를 사용하여 표현할 수 있다. 만약, 파운데이션을 바르고 다음에 립스틱을 사용하는 경우에, 파운데이션을 바른 패턴 이미지i가 존재하고 다음에 립스틱을 사용한 패턴 이미지j가 존재하고, 여기서 메이크업 지도 이미지의 생성순서는 지도이미지i가 지도이미지j에 앞서 생성되어 적용이 된다. 메이크업 지도 이미지는 다음과 같이 표현할 수 있다.
메이크업 지도 이미지 = 패턴 이미지j ⇒ 패턴 이미지i
다시 도 4를 보자. 도 4의 인상 분류(230), 인상 분류 테이블(220), 인상 규칙(210)에 관해서는 표 1에서 설명한 바 있다. 예를 들면 사용자의 선택 이벤트에 의해서 인상 분류(230)가 결정되었다면, 메이크업 지원 애플리케이션은 인상 분류 테이블(220)에 액세스하여 인상 규칙(210)을 특정한다. 그러면 표준 인상 데이터(21)를 추출해서 디바이스의 인상 데이터(199)에 적용하여, 메이크업 지도 콘텐트(201)를 생성하는 것이다.
이처럼, 인상 규칙으로서 미리 저장되어 있는 표준 인상 데이터를 사용자의 인상 데이터에 매칭하면서 적용하여 메이크업 지도 콘텐트를 생성할 수 있다. 본 발명의 바람직한 어느 실시예에서는, 상기 메이크업 지도 콘텐트는 이미지 파일인 것이 좋다. 실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 미리 정의되어 있는 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들이 보정되며, 보정된 사용자의 얼굴 이미지가 메이크업 지원 애플리케이션 화면을 통해서 표시될 수 있다. 보정된 사용자의 얼굴은 메이크업 지도 이미지이며, 그것이 바로 이 실시예의 메이크업 지도 콘텐트이다.
본 발명의 바람직한 다른 실시예에서는 상기 메이크업 지도 콘텐트는 텍스트이거나 또는 음성일 수 있다. 실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 미리 정의되어 있는 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들에 대한 메이크업 지도 텍스트 또는 음성이 디바이스를 통해서 표시될 수 있다. 텍스트는 애플리케이션 화면을 통해서, 음성은 스피커를 통해서 출력될 수 있다.
도 6은 본 발명의 바람직한 어느 실시예들에 따른 화면 시나리오를 나타낸다. 메이크업 지원 애플리케이션이 실행되었다고 가정하자.
도 6(a)는 카메라를 통해서 실시간으로 입수되는 사용자의 얼굴에 인상 규칙을 적용하는 시나리오를 나타낸다. 이 시나리오에서는 메이크업 지도 콘텐트가 애플리케이션 화면에 바로 표시되어 있다.
도 6(a)과 같은 시나리오를 실행하기 위해서, 메이크업 지원 애플리케이션은 실시간 연산을 지원한다. 바람직하게는 메이크업 지원 애플리케이션을 실행하여 메이크업 지원을 요청하면 서비스 서버와 통신하게 되고, 전술한 바와 같이 매칭기가 사용자의 얼굴과 추천할 지도 이미지를 실시간으로 매칭한다. 전자는 사용자의 인상 데이터, 후자는 미리 저장되어 있는 표준 인상 데이터로 표현하였다. 도 6(a)의 애플리케이션 화면(120)의 카메라 영역(121)에는, 처음에는 사용자의 실제 얼굴이 거울처럼 표시되다가, 매칭기의 실시간 연산 작업이 완료됨에 따라 메이크업 지도 콘텐트(A)의 이미지로 변경되어 표시될 것이다. 이때의 메이크업 지도 콘텐트(A)는 인상 분류에 따라 인상 규칙이 적용되어 보정된 얼굴 이미지이다.
버튼(129)을 누르면 메이크업 지도 콘텐트(A)를 캡쳐할 수 있다. 그러면 사용자는 그것을 사진 갤러리에서 해당 이미지를 보면서 화장을 할 수 있다.
도 6(b)는 애플리케이션 화면(120)이 두 개의 파트로 이루어져 있는 시나리오를 나타낸다. 큰 화면(122)은 거울처럼, 카메라 렌즈를 통해 입수된 사용자의 얼굴(B)을 표시한다. 작은 화면에는 인상 규칙을 적용한 메이크업 지도 콘텐트(122a)가 표시될 수 있다. 도 6(b)의 시나리오에서, 사용자는 거울처럼 자기 얼굴을 보면서 메이크업을 할 수도 있으며, 메이크업을 하면서 애플리케이션이 추천한 지도 이미지를 클릭하여 확대하여 봄으로써 메이크업 지도 콘텐트를 참조할 수 있다.
도 6(c)는 카메라 렌즈를 통해서 실시간으로 사용자의 얼굴을 보는 것이 아니라, 메모리에 저장되어 있는 사진 갤러리에 액세스해서 메이크업을 실시하는 시나리오이다.
도 6(c)의 사용자 인터페이스의 애플리케이션 화면(120)의 큰 화면 영역(123)은 본래 사진 갤러리에서 호출한 사용자의 얼굴(C)이다. 메이크업 버튼(125)를 클릭하면 화면(123)에 표시되는 얼굴(C)이 바뀔 것이다. 즉, 애플리케이션은 디바이스의 메모리에 이미지 파일로 저장되어 있는 사용자의 얼굴 이미지로부터 인상 데이터를 수집한다. 또한 애플리케이션은 선택된 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 사용자의 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성할 수 있으며, 이에 해당하는 이미지(C)를 화면에 표시할 수 있다. 한편 카메라 아이콘(127)를 클릭하면 카메라를 이용해서 자기 얼굴을 볼 수 있다. 또한 그 경우, 도 6(a) 또는 도 6(b)의 시나리오에 따를 수 있다.
본 발명의 메이크업 지도 콘텐트는 디바이스에 저장될 수 있다. 애플리케이션은 메이크업 지도 콘텐트(A)를 확대하거나 변경하여 볼 수 있다. 전술한 것처럼, 인상 규칙은 얼굴 영역마다 특징 요소로서 미리 등록되어 있다. 또한 매칭기는 얼굴 영역마다 사용자의 얼굴과 지도 이미지를 매칭한다. 그래서 사용자는 메이크업 지도 콘텐트(A)를 얼굴 영역마다 확대해서 보거나 변경하는 것이 가능하다.
도 7을 보자. 도 7의 애플리케이션 화면(130)은 디바이스의 메모리에 저장한 메이크업 지도 콘텐트(A)를 확대하거나 변경해서 볼 수 있음을 나타낸다. 메인 화면(131) 상의 도트(dots, 130a)는 얼굴 영역마다의 특징 요소를 나타낸다. 사용자는 멀티 터치로 확대해서 이미지를 볼 수 있다.
메이크업 지도 콘텐트(A)를 확대해서 보는 UI 구성에 있어, 선택 버튼(135a, 135b, 135c, 135d, 135e)들은 얼굴 영역을 식별하는 버튼일 수 있다. 예컨대 1번은 눈 부분, 2번은 코 부분, 3번은 입술 부분, 4번은 왼쪽 볼, 5번은 오른쪽 볼, 6번(미도시)은 이마 부분, 7번(미도시)은 턱 부분 등의 구성이다. 사용자가 버튼을 터치할 때마다 메이크업 지도 콘텐트(A)에서 해당 부분을 확대하여 나타낸다.
메이크업 지도 콘텐트(A)를 변경해서 보는 UI 구성에 있어, 선택 버튼(135a, 135b, 135c, 135d, 135e)들은 다른 인상 분류 항목일 수 있다. 예컨대 1번은 젊은 인상, 2번은 섹시한 인상, 3번은 지적인 인상, 4번은 냉정한 인상, 5번은 따뜻한 인상, 6번(미도시)은 내추럴한 인상(화장을 하지 않은 듯한 인상), 7번(미도시)은 귀여운 인상 등으로 메인 화면(131)에 표시되는 메이크업 지도 콘텐트(A)를 변경할 수 있다.
또한 아래의 선택 버튼들은 관상학적 인상 분류를 나타내는 것일 수 있다. 재력에 좋은 관상, 건강에 좋은 관상, 운세가 좋은 관상 등으로 변경할 수도 있을 것이다. 또한 상황에 따른 인상 분류 항목일 수도 있겠다. 1번은 데이트, 2번은 면접, 3번은 파티, 4번은 직장생활, 5번은 여행 등에 알맞은 메이크업 지도 콘텐트일 수 있다.
이상의 상세한 설명을 통해서 이 분야의 당업자들은 본 발명의 메이크업 지원 방법의 특징과 다양한 변형 가능성에 대해서 잘 이해할 수 있을 것이다. 이제 본 발명의 방법의 개략적인 전체 프로세스를 도 8을 참조하여 다시 한 번 요약하여 설명한다.
먼저 사용자는 디바이스에 설치되어 있는 메이크업 지원 애플리케이션을 실행한다(S100). 메이크업 지원 애플리케이션은 다양한 기능 모듈을 포함할 수 있다. 그런 모듈 중에서 전술한 메이크업 지원을 요청하는 모듈이 실행된다면, 디바이스와 서비스 서버는 서로 통신을 개시할 수 있다. 또한 프로세서는 디바이스에 내장된 카메라 모듈을 제어하여, 렌즈가 사용자의 얼굴 방향을 향한 상태에서 카메라 애플리케이션을 실행할 수 있다. 사용자는 디바이스의 카메라가 자기 얼굴을 잘 촬영할 수 있도록 얼굴의 위치를 적절히 조정한다.
그러면 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집한다(S110). 다른 실시예에서는 이 S110 단계를 메모리에 저장되어 있는 사용자의 이미지 파일을 호출하는 것으로 대체될 수 있다.
서비스 서버는 디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 상기 인상 데이터에 적용하여 메이크업 지도 콘텐트를 실시간적으로 생성한다(S120). 바람직한 어느 실시예에서는 인상 규칙으로서 미리 저장되어 있는 표준 인상 데이터(패턴 이미지)와 사용자의 얼굴 이미지를 중첩 및 매핑하는 것일 수 있다.
상기 S120 단계에 있어 서비스 서버에 전송되는 사용자의 인상 데이터는 사용자마다 다르기 때문에, 결국 본 발명은 사용자에 따라 개인화된 메이크업 지도 콘텐트를 생성하는 것이 가능하다. 또한 동일인이라 하더라도 때와 장소에 따른 얼굴 상태가 다를 수 있어서, 그것을 고려한 최적의 맞춤 솔루션을 제공할 수 있다.
다음으로 생성된 메이크업 지도 콘텐트는 메이크업 지원 애플리케이션 화면을 통해서 표시한다(S130).
한편, 전술한 바와 같은 본 발명에 따른 메이크업 지원 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령들은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 상기 매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 반송파를 포함하는 광 또는 금속선, 도파관 등의 전송 매체일 수도 있다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
또한 본 발명의 메이크업 지원 방법을 실행하는 디바이스는 전술한 것처럼 인상 분류에 따라 인상 규칙을 적용하는 메이크업 지원 애플리케이션이 설치되어 있으며 카메라 모듈이 내장되어 있는 디바이스이다. 그리고 카메라 모듈과 통신하는 적어도 하나의 프로세서와, 이 프로세서와 통신하는 적어도 하나의 메모리를 포함한다. 그리고 메모리에는 컴퓨터 판독 가능 매체로서 전술한 바와 같은 명령어들에 의해서, 프로세서는 디바이스가 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집하는 동작과, 디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 인상 데이터에 적용하여 메이크업 지도 콘텐트를 생성하는 동작과, 메이크업 지원 애플리케이션 화면을 통해서 메이크업 지도 콘텐트를 표시하는 동작을 수행한다.
본 명세서에서는 특별히 언급되지는 않았으나, 본 발명의 방법은 다양한 영상처리기술과 얼굴인식기술들이 적용될 수 있다. 본 발명의 기술과제가 특정되고 해결원리가 결정된다면, 그와 같은 기술은 과제와 원리에 맞게 응용되고 적용될 것이다.
또한, 본 발명의 메이크업 지원 방법은 사용자의 메이크업 목적에 맞게 최적의 개인화 솔루션을 제공하는 것이다. 그러므로 사용자의 피부 유형, 색조, 피부 노화 상태 및 피부 트러블 등의 정보를 입력하거나 자동으로 인식하여 메이크업 지도 콘텐트를 변경할 수도 있을 것이다.
사용자의 요청에 의해서 생성된 메이크업 지도 콘텐트는 수집될 수 있으며, 서버 측의 데이터베이스에 기록될 수 있다. 또한 수집된 데이터는 인상규칙을 갱신하거나, 인상규칙을 개인별로 학습시킬 수도 있다.
본 발명의 보호범위가 이상에서 명시적으로 설명한 실시예의 기재와 표현에 제한되는 것은 아니다. 또한, 본 발명이 속하는 기술분야에서 자명한 변경이나 치환으로 말미암아 본 발명이 보호범위가 제한될 수 없음을 다시 한 번 첨언한다.

Claims (11)

  1. 스마트폰인 디바이스에 설치되어 있는 메이크업 지원 애플리케이션은 인상 분류와 인상 규칙을 매핑하는 인상 분류 테이블을 액세스하며:
    상기 메이크업 지원 애플리케이션을 실행하고,
    디바이스에 내장된 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집하여 상기 메이크업 지원 애플리케이션 화면을 통해서 사용자의 실제 얼굴 이미지를 표시하고,
    디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 인상 분류에 따라 미리 저장되어 있는 인상 규칙을 실시간으로 수집되는 상기 사용자의 인상 데이터에 적용하여, 사용자의 실제 얼굴 특성을 반영한 메이크업 지도 콘텐트를 생성하고,
    상기 메이크업 지원 애플리케이션 화면을 통해서 상기 메이크업 지도 콘텐트를 표시하고,
    사용자의 실제 얼굴 이미지와 상기 메이크업 지도 콘텐트가 상기 메이크업 지원 애플리케이션 화면을 통해 선택적으로 보이도록 하는 단계를 포함하며,
    상기 메이크업 지도 콘텐트는 텍스트 또는 음성을 포함하며, 실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 상기 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들에 대한 메이크업 가이드 텍스트 또는 음성을 상기 메이크업 지원 애플리케이션 화면 또는 스피커를 통해서 표시되도록 하는 것인, 메이크업 지원 방법.
  2. 제1항에 있어서,
    상기 메이크업 지원 애플리케이션은 메이크업 목적에 대응하는 인상 분류 선택 인터페이스를 제공하고, 디바이스의 입력수단이 상기 인상 분류 선택 인터페이스를 통해서 인상 분류 선택이벤트를 생성하도록 하거나, 또는
    애플리케이션 환경 설정을 통해 수정 가능한 디폴트 값으로 인상 분류가 미리 결정되도록 하는 것인, 메이크업 지원 방법
  3. 제1항에 있어서,
    상기 메이크업 지도 콘텐트의 생성은 상기 인상 규칙으로서 미리 저장되어 있는 표준 인상 데이터를 상기 사용자의 인상 데이터에 매칭하면서 적용하여 메이크업 지도 콘텐트를 생성하는 것인, 메이크업 지원 방법.
  4. 제1항에 있어서,
    메이크업 지도 콘텐트는 영상 파일이며,
    실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 상기 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들이 보정되며, 보정된 사용자의 얼굴 이미지로서 상기 메이크업 지원 애플리케이션 화면을 통해서 표시되도록 하는 것인, 메이크업 지원 방법.
  5. 삭제
  6. 제1항에 있어서,
    상기 인상 규칙은 미리 정해진 얼굴 영역 분류 데이터를 가지며, 이 얼굴 영역 분류 데이터를 상기 인상 데이터에 적용하여 얼굴 영역마다 패턴 정보를 갖는 메이크업 지도 콘텐트를 생성하는 것인, 메이크업 지원 방법.
  7. 삭제
  8. 삭제
  9. 인상 분류에 따라 인상 규칙을 적용하는 메이크업 지원 애플리케이션이 설치되어 있으며 카메라 모듈이 내장되어 있는 디바이스로서,
    상기 카메라 모듈과 통신하는 적어도 하나의 프로세서; 및
    상기 프로세서와 통신하는 적어도 하나의 메모리를 포함하고,
    상기 메모리는 명령어들을 포함하며, 상기 명령어들은 상기 프로세서에 의해 실행될 때 상기 프로세서로 하여금:
    상기 디바이스가 상기 카메라 모듈을 통해서 사용자의 인상 데이터를 실시간으로 수집하는 동작;
    디바이스를 통해 미리 결정되어 있거나 또는 선택이벤트를 통해 선택되는 상기 인상 분류에 따라 미리 저장되어 있는 상기 인상 규칙을 상기 사용자의 인상 데이터에 적용하여 사용자의 실제 얼굴 특성을 반영한 메이크업 지도 콘텐트를 생성하는 동작;
    상기 메이크업 지원 애플리케이션 화면을 통해서 상기 메이크업 지도 콘텐트를 표시하는 동작; 그리고
    사용자의 실제 얼굴 이미지와 상기 메이크업 지도 콘텐트가 상기 메이크업 지원 애플리케이션 화면을 통해 선택적으로 보이도록 하는 동작을 수행하게 하며,
    상기 메이크업 지도 콘텐트는 텍스트 또는 음성을 포함하며, 실시간으로 수집되는 사용자의 인상 데이터에서 특징 요소들이 추출되고, 상기 인상 규칙에 의해서 적어도 하나 이상의 특징 요소들에 대한 메이크업 가이드 텍스트 또는 음성을 상기 메이크업 지원 애플리케이션 화면 또는 스피커를 통해서 표시되도록 하는 것인, 디바이스.
  10. 제9항에 있어서,
    상기 메이크업 지원 애플리케이션은 메이크업 목적에 대응하는 인상 분류 선택 인터페이스를 제공하고, 디바이스의 입력수단이 상기 인상 분류 선택 인터페이스를 통해서 인상 분류 선택이벤트를 생성하도록 하거나, 또는
    애플리케이션 환경 설정을 통해 수정 가능한 디폴트 값으로 인상 분류가 미리 결정되도록 하는 것인, 디바이스.
  11. 제9항에 있어서,
    상기 메이크업 지원 애플리케이션은, 상기 인상 규칙으로서 미리 저장되어 있는 표준 인상 데이터를 상기 사용자의 인상 데이터에 매칭하면서 적용하여 메이크업 지도 콘텐트를 생성하는 디바이스.
KR1020160033550A 2015-05-06 2016-03-21 얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법 KR102505864B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150063333 2015-05-06
KR20150063333 2015-05-06

Publications (2)

Publication Number Publication Date
KR20160131873A KR20160131873A (ko) 2016-11-16
KR102505864B1 true KR102505864B1 (ko) 2023-03-03

Family

ID=57540866

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160033550A KR102505864B1 (ko) 2015-05-06 2016-03-21 얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법

Country Status (1)

Country Link
KR (1) KR102505864B1 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200099034A (ko) 2019-02-13 2020-08-21 임혜민 메이크업 가이드 플랫폼 및 이를 이용하는 방법
US11335088B2 (en) 2020-03-30 2022-05-17 Snap Inc. Augmented reality item collections
CN115605897A (zh) * 2020-03-31 2023-01-13 斯纳普公司（Us） 用于消息收发系统中的物理产品的增强现实体验
CN113781271B (zh) * 2021-07-30 2024-10-08 北京旷视科技有限公司 化妆教学方法及装置、电子设备、存储介质
KR102515436B1 (ko) 2022-08-01 2023-03-29 주식회사 어썸커머스 인공지능 기반 얼굴 메이크업 처리 방법, 장치 및 시스템
WO2024058468A1 (ko) * 2022-09-16 2024-03-21 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132916A (ja) * 2000-10-26 2002-05-10 Kao Corp メイクアップアドバイスの提供方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8077931B1 (en) * 2006-07-14 2011-12-13 Chatman Andrew S Method and apparatus for determining facial characteristics
US8693768B1 (en) * 2012-07-10 2014-04-08 Lisa LaForgia Cosmetic base matching system

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002132916A (ja) * 2000-10-26 2002-05-10 Kao Corp メイクアップアドバイスの提供方法

Also Published As

Publication number Publication date
KR20160131873A (ko) 2016-11-16

Similar Documents

Publication Publication Date Title
KR102505864B1 (ko) 얼굴 이미지에 대응하여 메이크업 지도 콘텐트를 실시간으로 생성 및 적용하는 메이크업 지원 방법
US10083345B2 (en) Makeup supporting methods for creating and applying a makeup guide content to makeup user's face on a real-time basis
KR102322034B1 (ko) 전환 거울을 구비한 장치의 이미지 디스플레이 방법 및 그 장치
CN108885795A (zh) 自动化头像生成
US11978242B2 (en) Systems and methods for improved facial attribute classification and use thereof
CN108604237A (zh) 个性化交互式智能搜索方法和系统
Losh Beyond biometrics: Feminist media theory looks at Selfiecity
US20160093081A1 (en) Image display method performed by device including switchable mirror and the device
WO2018012136A1 (ja) メイクアップ支援装置およびメイクアップ支援方法
US10755487B1 (en) Techniques for using perception profiles with augmented reality systems
US20220383389A1 (en) System and method for generating a product recommendation in a virtual try-on session
KR102292629B1 (ko) Ai 안면인식을 이용한 뷰티 콘텐츠 제공 시스템 및 방법
US11776187B2 (en) Digital makeup artist
US11430158B2 (en) Intelligent real-time multiple-user augmented reality content management and data analytics system
Li et al. “It Feels Like Taking a Gamble”: Exploring Perceptions, Practices, and Challenges of Using Makeup and Cosmetics for People with Visual Impairments
JP2022527370A (ja) 毛の外観の変更
JP2023539159A (ja) バーチャルフィッティングサービス提供方法、装置およびそのシステム
US11657553B2 (en) Digital makeup artist
Manovich The mobile generation and Instagram photography
US20220284827A1 (en) Systems and methods for generating individualized cosmetic programs utilizing intelligent feedback
Wang et al. Cultural-based visual expression: emotional analysis of human face via Peking Opera Painted Faces (POPF)
TW201945898A (zh) 資訊處理裝置及程式
Baş The construction of beauty by mobile applications
EP4375805A1 (en) Audio output
JP2024028059A (ja) 頭髪スタイルの視覚化を支援する方法、情報処理装置及びプログラム

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)