KR20160128272A - 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기 - Google Patents

가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기 Download PDF

Info

Publication number
KR20160128272A
KR20160128272A KR1020160140452A KR20160140452A KR20160128272A KR 20160128272 A KR20160128272 A KR 20160128272A KR 1020160140452 A KR1020160140452 A KR 1020160140452A KR 20160140452 A KR20160140452 A KR 20160140452A KR 20160128272 A KR20160128272 A KR 20160128272A
Authority
KR
South Korea
Prior art keywords
hair
user
model data
terminal
virtual
Prior art date
Application number
KR1020160140452A
Other languages
English (en)
Inventor
나승원
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020160140452A priority Critical patent/KR20160128272A/ko
Publication of KR20160128272A publication Critical patent/KR20160128272A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/16Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Hardware Design (AREA)
  • Economics (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명은 가상 헤어 적용 서비스에 관한 것으로, 본 발명의 가상 헤어 적용 서비스 시스템은 단말기 및 가상 헤어 적용 장치의 구성을 포함할 수 있다. 여기서 단말기는 얼굴을 포함하는 사용자의 영상을 수집하고 수집된 영상을 외부 가상 헤어 적용 장치에 전송하며, 가상 헤어 적용 장치로부터 해당 영상에 대한 3D 모델 데이터와 3D 모델 데이터에 적용할 적어도 하나의 헤어 오브젝트를 수신하며, 사용자의 움직임에 따라 3D 모델 데이터 및 3D 모델 데이터에 적용한 헤어 오브젝트의 출력면을 조정하여 출력한다.

Description

가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기{Virtual Service System For Hair and Method thereof, and Device supporting the same}
본 발명은 가상 헤어 적용 서비스에 관한 것으로, 특히 사용자의 두부(얼굴과 머리)에 대한 3D 렌더링을 수행하여 3D 모델을 생성하고, 해당 3D 모델에 특정 헤어 오브젝트를 적용하도록 함과 아울러 두부의 회전에 따라 3D 모델 및 헤어 오브젝트를 회전시킴으로써 다양한 각도에서 특정 헤어스타일에 대한 참조가 가능하도록 지원하는 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기에 관한 것이다.
최근 정보통신 기술과 반도체 기술 등의 눈부신 발전에 힘입어 휴대 단말기의 보급과 이용이 급속도로 증가하고 있다. 특히, 최근의 휴대 단말기는 각자의 전통적인 고유 영역에 머무르지 않고 다른 단말기들의 영역까지 아우르는 모바일 융/복합(mobile convergence) 단계에 이르고 있다. 대표적으로 이동통신 단말기의 경우에는 음성통화나 메시지 송수신과 같은 일반적인 통신 기능 외에도 TV 시청 기능(예컨대, DMB(Digital Multimedia Broadcasting)나 DVB(Digital Video Broadcasting)와 같은 이동 방송), 음악 재생 기능(예컨대, MP3(MPEG Audio Layer-3), 사진 촬영 기능, 인터넷 접속 기능 등 다양한 기능들이 부가되고 있다.
한편, 통신망의 발달과 보급 확대에 힘입어 인터넷 인구가 급격한 속도로 증가하고 있으며, 이러한 인터넷의 성장과 함께 전자상거래, 포털(portal) 등을 위시한 다양한 컨텐츠(contents)가 등장하고 있다. 또한, 최근에는 온라인 및 오프라인 영역의 경계가 파괴되어 기존의 오프라인 서비스를 온라인 서비스로 대체해 나가고 있다. 그리고 생활수준이 향상됨에 따라 삶의 질과 개성이 중요시되고 있으며, 헤어스타일 관리에 대한 욕구 및 관심이 크게 증대되고 있다.
그러나 실생활에서는 헤어스타일의 선택이나 관리가 체계적이지 못하고 불편하여 자신에게 맞는 헤어스타일을 선택하고 유지하는데 많은 애로 및 시행착오를 거치게 된다. 실제로 헤어샵 이용자는 미용협회에서 제공되는 잡지 또는 인기 연예인의 사진을 통해 자신의 헤어스타일을 선택하거나 미용사의 자문을 통해 자신의 헤어스타일을 결정하기 때문에 미용 작업 전에는 자신에게 맞는 헤어스타일을 파악하기 힘들었다. 또한, 자신에게 맞는 헤어스타일을 찾았다 하더라도 미용사에 따라 미용 방법 및 미용기술에 차이가 있기 때문에 헤어샵을 바꾸거나 미용사가 바뀔 경우 원하는 헤어스타일을 유지하기가 어려운 문제점이 있었다.
이러한 애로 사항을 개선하기 위하여 일부 헤어샵에서 도입하였던 기술로, 헤어샵을 찾은 고객의 얼굴을 정면에서 디지털카메라로 촬영한 후, 그 영상 데이터를 컴퓨터에 입력하고 미리 컴퓨터에 저장되어 있는 몇 종류의 헤어스타일을 고객의 얼굴 영상에 맞춰보는 시뮬레이션 시스템이 있었다.
그러나 종래 헤어스타일을 제공하는 시뮬레이션 시스템은 2D 영상을 기반으로 정면에서의 헤어스타일에 대한 정보만을 제공하기 때문에 사용자의 전체적인 헤어스타일의 형태에 대한 정확한 정보를 제공하지 못하는 단점이 있다.
한국공개특허 제10-2011-0011115호, 2011년 02월 08일 공개(명칭: 웹 및 스마트폰 기반의 가상 헤어 및 패션스타일 시뮬레이션 시스템)
따라서 본 발명은 전술한 종래 기술의 문제점을 해결하기 위하여 창안된 것으로, 본 발명의 목적은 사용자와 관련된 3D 모델을 기반으로 특정 헤어 오브젝트를 가상으로 적용시켜볼 수 있도록 지원하는 3D 기반의 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기를 제공함에 있다.
또한 본 발명의 목적은 사용자 정보를 가상 헤어 적용 장치 상에 저장 및 제공하도록 지원함으로써 특정 헤어샵에 관계없이 사용자가 원하는 장소나 시간에 사용자가 원하는 다양한 헤어스타일을 자신의 3D 모델에 적용해볼 수 있도록 지원하는 3D 기반의 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기를 제공함에 있다.
상술한 바와 같은 과제를 해결하기 위한 수단으로서, 본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 시스템은, 얼굴을 포함하는 사용자의 영상을 수집하고, 수집된 영상을 가상 헤어 적용 장치에 전송하며, 가상 헤어 적용 장치로부터 사용자의 영상을 3D모델로 생성한 3D 모델 데이터와 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 수신하여, 3D 모델 데이터와 하나의 헤어 오브젝트를 결합하여 출력하되, 사용자의 움직임에 따라 3D 모델 데이터 및 3D 모델 데이터에 적용한 헤어 오브젝트의 출력면을 제어하는 단말기; 및 단말기로부터 사용자의 영상을 수신하여 해당 사용자에 대한 3D 모델 데이터를 생성하며, 3D 모델 데이터에 적용할 적어도 하나의 헤어 오브젝트와 생성한 3D 모델 데이터를 단말기에 전송하는 가상 헤어 적용 장치;를 포함하여 이루어진다.
또한, 본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치는, 단말기로부터 사용자의 영상을 수신하고, 해당 사용자의 영상에 대응하는 3D 모델 데이터 및 적어도 하나의 헤어 오브젝트를 상기 단말기로 전송하는 접속 장치; 접속 장치가 수신한 사용자의 영상을 기반으로 해당 사용자에 대한 3D 모델 데이터를 생성하여 상기 접속 장치에 전달하는 3D 모델 생성 장치; 접속 장치로 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 접속 장치로 제공하는 헤어 오브젝트 지원 장치;를 포함한다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 접속 장치는, 3D 모델 생성 장치가 전달하는 3D 모델 데이터 및 헤어 오브젝트 지원 장치가 전달하는 적어도 하나의 헤어 오브젝트를 저장 관리할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 헤어 오브젝트 지원 장치는, 적어도 하나의 헤어 오브젝트와 관련된 이미지가 배치되는 웹 페이지를 단말기에 제공할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 헤어 오브젝트 지원 장치는, 단말기가 헤어 오브젝트를 변경한 경우, 변경된 헤어 오브젝트를 수신하여 새로운 헤어 오브젝트로 등록할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 헤어 오브젝트 지원 장치는, 단말기로부터 사용자의 움직임 정보를 수신하고, 수신된 움직임 정보를 기반으로 헤어 오브젝트의 출력면을 결정하고, 결정된 헤어 오브젝트의 출력면에 대응하는 데이터를 단말기에 제공할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 3D 모델 생성 장치는, 단말기로부터 상기 사용자의 움직임 정보를 수신하는 경우, 수신된 움직임 정보를 기반으로 3D 모델 데이터의 출력면을 결정하고, 결정된 3D 모델 데이터의 출력면에 대응하는 데이터를 단말기에 제공할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 장치에 있어서, 접속 장치, 헤어 오브젝트 지원 장치 및 3D 모델 생성 장치들 중 적어도 하나가 클라우드 컴퓨팅 기반으로 동작하는 하나 이상의 서버로 구현될 수 있다.
또한, 상술한 과제를 해결하기 위한 또 다른 수단으로서, 본 발명의 바람직한 실시 예에 따른 단말기는, 사용자의 영상을 수집하는 카메라; 수집된 사용자의 영상을 기반으로 사용자에 대응하는 3D 모델 데이터를 생성하고, 생성된 3D 모델 데이터에 헤어 오브젝트를 적용하여 출력하도록 제어하며, 사용자의 움직임에 따라 3D 모델 데이터 및 헤어 오브젝트의 출력면을 제어하는 제어부; 및 제어부의 제어에 따라 3D 모델 데이터에 헤어 오브젝트가 적용된 화면을 출력하는 표시부;를 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 단말기에 있어서, 제어부는, 사용자의 영상을 기반으로 3D 모델 데이터를 생성하는 3D 모델 생성부; 3D 모델 데이터를 표시부에 출력하도록 지원하는 3D 모델 재생부; 및 3D 모델 데이터에 헤어 오브젝트를 적용하여 표시부에 출력하도록 지원하는 헤어 오브젝트 처리부;를 포함하여 이루어질 수 있다.
본 발명의 바람직한 실시 예에 따른 단말기에 있어서, 제어부는, 사용자의 영상 중 얼굴을 인식하여 참조 값을 추출하고, 추출된 참조 값의 변화를 기반으로 사용자의 움직임 정보를 추출하는 영상 분석부를 더 포함하고, 3D 모델 재생부 및 헤어 오브젝트 처리부는, 영상 분석부로부터 움직임 정보를 수신하는 경우 출력되는 3D 모델 데이터 및 헤어 오브젝트의 출력면을 움직임 정보에 대응하도록 변경하여 출력할 수 있다.
본 발명의 바람직한 실시 예에 따른 단말기는, 제어부의 제어에 따라 3D 모델 데이터 및 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 저장하는 저장부;를 더 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 단말기는, 헤어 오브젝트 지원 장치와 통신 채널을 형성하는 통신부;를 더 포함하며, 제어부는 통신부를 통하여 사용자 관련 3D 모델 데이터 또는 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 헤어 오브젝트 지원 장치로부터 수신할 수 있다.
더하여, 상술한 과제를 해결하기 위한 또 다른 수단으로서, 본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법은, 단말기가, 얼굴과 머리를 포함하는 사용자 영상을 수집하는 수집 단계; 수집된 사용자 영상을 기반으로 3D 모델 데이터를 생성하는 단계; 3D 모델 데이터에 3D 타입의 특정 헤어 오브젝트를 적용하는 적용 단계; 헤어 오브젝트가 적용된 3D 모델 데이터를 출력하는 단계; 영상을 기반으로 얼굴 인식을 수행하여 사용자의 움직임을 추출하고 사용자 움직임에 따라 3D 모델 데이터 및 헤어 오브젝트의 출력면을 변경하는 변경 단계;를 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법에 있어서, 수집 단계는, 적어도 두 개의 각도에서 촬영된 사용자의 영상을 수집하는 단계인 것을 특징으로 한다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법에 있어서, 3D 모델 데이터에 적용할 다수의 3D 타입 헤어 오브젝트를 출력하여 하나의 헤어 오브젝트를 선택 받는 단계;를 더 포함하고, 적용 단계는, 선택된 헤어 오브젝트를 3D 모델 데이터에 적용하는 단계인 것을 특징으로 한다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법에 있어서, 변경 단계는, 얼굴 인식에 따른 참조 값을 추출하는 단계; 추출된 참조 값의 변화에 따라 일정 방위 중 적어도 한 방향으로의 사용자 움직임을 확인하는 단계;를 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법에 있어서, 변경 단계는, 사용자가 움직인 방향과 각도 및 거리에 따라 헤어 오브젝트의 방향과 각도 및 거리를 회전시키는 단계; 사용자가 움직인 방향과 각도 및 거리에 따라 3D 모델 데이터의 방향과 각도 및 거리를 회전시키는 단계;를 포함할 수 있다.
본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법은, 헤어 오브젝트를 사용자 제어에 따라 편집하는 단계; 및 헤어 오브젝트를 외부 장치로부터 수신하는 단계;중 적어도 하나의 단계를 더 포함할 수 있다.
또한, 상술한 과제를 해결하기 위한 또 다른 수단으로서, 본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법은, 단말기가, 적어도 하나의 사용자 영상을 수집하는 단계; 수집된 적어도 하나의 사용자 영상을 가상 헤어 적용 장치에 전송하는 단계; 가상 헤어 적용 장치로부터 수집된 영상을 기반으로 생성된 3D 모델 데이터 및 3D 모델 데이터에 적용할 3D 타입의 헤어 오브젝트를 수신하는 단계; 사용자의 움직임 정보를 추출하고, 움직임 정보에 따라 수신한 3D 모델 데이터 및 상기 헤어 오브젝트의 출력면을 조정하여 출력하는 출력 단계;를 포함할 수 있다.
또한, 상술한 과제를 해결하기 위한 또 다른 수단으로서, 본 발명의 바람직한 실시 예에 따른 가상 헤어 적용 서비스 방법은, 가상 헤어 적용 장치가, 단말기로부터 적어도 하나의 사용자 영상을 수신하는 단계; 수신한 사용자 영상을 기반으로 사용자에 대응하는 3D 모델 데이터를 생성하는 단계; 및 3D 모델 데이터 및 3D 모델 데이터에 적용할 헤어 오브젝트를 상기 단말기로 전송하는 단계;를 포함할 수 있다.
또한, 본 발명은 상술한 가상 헤어 적용 서비스 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체를 제공한다.
본 상술한 바와 같이 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기에 따르면, 본 발명은 사용자의 두부를 기반으로 한 3D 모델을 생성하고, 해당 3D 모델에 다양한 헤어 오브젝트를 손쉽게 적용해볼 수 있도록 지원하며, 두부 회전에 따라 3D 모델 및 헤어 오브젝트를 회전시키도록 함으로써 다양한 각도에서의 가상 헤어 오브젝트 적용을 관찰할 수 있도록 지원할 수 있다.
더하여, 본 발명은3D 모델 기반의 가상 헤어 적용 서비스를 제공함으로써, 시간과 공간이 제약 없이 사용자가 원하는 시점과 환경에서 사용자의 현재 상태에 가장 적절하게 어울릴 수 있는 헤어스타일을 다각적으로 보다 정확하게 관찰할 수 있도록 지원할 수 있어 사용자의 요구를 만족할 수 있다.
도 1은 본 발명의 실시 예에 따른 3D 기반의 가상 헤어 적용 서비스 시스템의 구성을 개략적으로 나타낸 도면.
도 2는 본 발명의 실시 예에 따른 단말기의 구성을 보다 상세히 나타낸 도면.
도 3은 본 발명의 단말기 구성 중 제어부를 보다 상세히 나타낸 도면.
도 4는 본 발명의 실시 예에 따른 단말기의 3D 기반 가상 헤어 적용 방법을 설명하기 위한 순서도.
도 5는 본 발명의 실시 예에 따른 3D 기반의 가상 헤어 적용 방법에 따른 각 구성들 간의 신호 흐름을 나타낸 도면.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다. 이때, 첨부된 도면에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한, 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다.
한편, 본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 자명한 것이다.
도 1은 본 발명의 실시 예에 따른 3D 기반의 가상 헤어 적용 서비스 시스템의 구성을 개략적으로 나타낸 도면이다.
도 1을 참조하면, 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 시스템(10)은 단말기(100) 및 가상 헤어 적용 장치(300)의 구성을 포함하며, 상기 단말기(100) 및 가상 헤어 적용 장치(300)는 네트워크(200)를 통해서 연결 된다.
이와 같은 구성을 가지는 본 발명의 가상 헤어 적용 서비스 시스템(10)은 단말기(100)를 이용하여 사용자(50)의 특정 부위, 예를 들면 사용자(50)의 두부 중 적어도 한 측면의 영상을 수집하고, 수집된 두부 영상을 네트워크(200)을 통하여 가상 헤어 적용 장치(300)에 제공한다. 그러면 가상 헤어 적용 장치(300)는 해당 두부 영상을 기반으로 3D 모델을 생성함과 아울러, 3D 모델에 적용할 다양한 스타일의 헤어 오브젝트(153)를 3D 모델 데이터와 함께 단말기(100)에 전달할 수 있다. 단말기(100)는 가상 헤어 적용 장치(300)가 전달한 3D 모델 및 헤어 오브젝트(153)를 합성 출력함으로써 사용자에게 어떠한 헤어 오브젝트(153)가 잘 어울리는지를 확인할 수 있도록 지원하며, 머리 회전에 따라 3D 모델 및 헤어 오브젝트(153)를 회전하도록 함으로써 다양한 각도에서 헤어 오브젝트(153)의 적용 상태를 관찰할 수 있도록 지원한다. 이하 가상 헤어 적용 서비스 시스템(10)의 각 구성에 대하여 보다 상세히 설명하기로 한다.
사용자(50)는 눈과, 코 및 입을 참조 값으로 가지는 인체의 얼굴과 머리를 포함하는 두부가 될 수 있다. 이러한 사용자(50)는 사용자의 제어에 따라 단말기(100)에 장착된 카메라(170)와 일정 거리 이격되어 배치될 수 있으며, 카메라(170) 제어에 따라 사용자의 두부에 대한 적어도 한 각도에서의 영상을 촬영할 수 있다. 그리고 사용자(50)는 사용자의 제어에 따라 일정 각도, 예를 들면 좌우 방향의 일정 각도 및 상하 방향의 일정 각도 회전이 가능하다.
단말기(100)는 장착된 카메라(170)를 이용하여 3D 모델 생성을 위한 사용자(50)의 영상을 수집하고, 수집된 영상을 가상 헤어 적용 장치(300)에 전달하거나, 분석하여 표시부에 출력되는 데이터를 수집할 수 있다. 특히 단말기(100)는 카메라(170)를 이용하여 사용자(50)의 다양한 각도에서의 영상을 수집하여 가상 헤어 적용 장치(300)에 전달함으로써 가상 헤어 적용 장치(300)로부터 3D 모델 데이터를 수신할 수 있다. 또한 단말기(100)는 본 발명의 가상 헤어 적용을 지원하는 가상 헤어 적용 장치(300)로부터 다양한 스타일의 헤어 오브젝트(153)를 다운로드 한 후 3D 모델 출력 시 헤어 오브젝트(153)를 적용하여 출력하도록 지원할 수 있다. 이때 단말기(100)는 카메라(170)의 활성화를 유지하고 사용자(50)의 얼굴 인식을 통하여 참조 값, 예를 들면 눈, 코, 입, 귀 등을 이용하여 사용자(50)의 회전 각도를 연산하고, 연산된 각도에 따라 3D 모델 및 헤어 오브젝트(153)를 회전하여 출력되도록 지원할 수 있다. 이에 따라 단말기(100)는 사용자가 다양한 각도에서 헤어 오브젝트(153)가 적용되는 모습을 관찰할 수 있도록 하여 자신에게 가장 적절한 형태의 헤어 오브젝트(153)를 검색할 수 있도록 지원한다. 이러한 단말기(100)의 가상 헤어 적용에 대하여 도 2 및 도 3을 참조하여 보다 상세히 설명하기로 한다. 이와 같은 단말기(100)로 본 실시 예에서는 휴대 단말기를 예시하였지만 이것에 한정되는 것은 아니다. 예컨대 단말기(100)로는 다양한 통신 시스템들에 대응되는 통신 프로토콜들(communication protocols)에 의거하여 동작하는 모든 이동통신 단말기들(mobile communication terminals)을 비롯하여, PMP(Portable Multimedia Player), 디지털방송 플레이어, PDA(Personal Digital Assistant), 음악 재생기(예컨대, MP3 플레이어), 휴대게임단말, 스마트 폰(Smart Phone), 노트북(Notebook), PC 및 핸드헬드 PC 등 모든 정보통신기기와 멀티미디어기기 및 그에 대한 응용기기를 포함할 수 있다.
네트워크(200)는 단말기(100)와 통신 채널을 형성함으로써 단말기(100)와 가상 헤어 적용 장치(300)간의 통신을 가능하게 한다. 이러한 네트워크(200)는 예를 들면, 인터넷 프로토콜(IP)을 통하여 대용량 데이터의 송수신 서비스 및 끊기는 현상이 없는 데이터 서비스를 제공하는 아이피망으로, 아이피를 기반으로 서로 다른 망을 통합한 아이피망 구조인 All IP망, 유선망, Wibro(Wireless Broadband)망, WCDMA를 포함하는 3 세대 이동통신망, HSDPA(High Speed Downlink Packet Access)망 및 LTE망을 포함하는 3.5세대 이동통신망, LTE advanced를 포함하는 4세대 이동통신망, 위성통신망 및 와이파이(Wi-Fi)망을 포함하는 무선랜 중 하나 이상을 포함하여 이루어질 수 있다.
가상 헤어 적용 장치(300)는 단말기(100)가 요청하는 3D 기반의 가상 헤어 적용 서비스를 지원한다. 이러한 가상 헤어 적용 장치(300)는 가상 헤어 적용 지원을 위하여 접속 장치(301), 헤어 오브젝트 지원 장치(303), 3D 모델 생성 장치(305)를 포함할 수 있다.
접속 장치(301)는 네트워크(200)에 접속되어, 가상 헤어 적용 지원을 위하여 단말기(100)와의 데이터 송수신과, 데이터의 저장 및 이력 관리를 수행한다. 그리고 접속 장치(301)는 단말기(100)로부터 수신된 데이터를 3D 모델 생성 장치(305) 및 헤어 오브젝트 지원 장치(303)에 전달할 수 있다. 이를 보다 상세히 설명하면 접속 장치(301)는 단말기(100)가 접속을 시도하는 경우 인증 정보 확인을 통하여 해당 단말기(100)가 가상 헤어 적용 서비스 가입자인지 확인할 수 있다. 해당 단말기(100)가 유효한 단말기인 경우 접속 장치(301)는 해당 단말기(100)가 전송하는 영상을 3D 모델 생성 장치(305) 및 헤어 오브젝트 지원 장치(303)에 전달할 수 있다. 그리고 접속 장치(301)는 3D 모델 생성 장치(305)가 전달하는 3D 모델 데이터 및 헤어 오브젝트 지원 장치(303)가 전달하는 적어도 하나의 헤어 오브젝트(153)를 단말기(100)에 전달할 수 있다. 이때 접속 장치(301)는 해당 단말기(100)에 전송한 3D 모델 데이터를 저장할 수 있으며, 단말기(100)가 선택한 특정 오브젝트 정보를 저장할 수 있다. 그리고 추후 해당 단말기(100)가 접속하는 경우 접속 장치(301)는 3D 모델 데이터를 새로 생성하지 않고 기 저장된 3D 모델 데이터를 해당 단말기(100)에 전달하도록 제어할 수 있다. 또한 접속 장치(301)는 헤어 오브젝트(153)에 대하여 이전 단말기(100)의 사용자가 선택한 헤어 오브젝트(153)와 유사한 헤어스타일의 헤어 오브젝트(153)들을 우선적으로 단말기(100)에 전송될 수 있도록 지원할 수 있다.
헤어 오브젝트 지원 장치(303)는 다양한 헤어 오브젝트(153)를 분류, 저장하며, 접속 장치(301)를 통하여 단말기(100)가 요청하는 특정 헤어 오브젝트(153)들을 제공하는 구성이다. 이를 위하여 헤어 오브젝트 지원 장치(303)는 다양한 헤어 오브젝트(153)를 열람할 수 있는 웹 페이지를 단말기(100)에 제공할 수 있다. 헤어 오브젝트 지원 장치(303)는 또한 헤어 오브젝트(153) 지원뿐만 아니라, 제공된 헤어 오브젝트(153)의 편집 기능을 웹 상에서 처리할 수 있도록 지원할 수 있다. 그리고 헤어 오브젝트 지원 장치(303)는 단말기(100)에 의하여 특정 헤어 오브젝트(153)가 일정 값 이상으로 변경된 경우, 변경된 해당 헤어 오브젝트(153)를 새로운 스타일의 헤어 오브젝트(153)로 자동 등록하도록 지원할 수 있다. 헤어 오브젝트 지원 장치(303)는 관리자가 업데이트 하는 다양한 스타일의 헤어 오브젝트(153)를 저장하기 위한 데이터베이스를 포함할 수 있다.
3D 모델 생성 장치(305)는 접속 장치(301)를 통하여 단말기(100)가 전달한 사용자(50)와 관련된 영상을 기반으로 3D 모델을 생성하는 구성이다. 이러한 3D 모델 생성 장치(305)는 사용자(50)와 관련된 영상으로부터 깊이 정보를 추출하고, 해당 깊이 정보를 기반으로 촬영한 영상에 대한 3D 모델링을 수행할 수 있다. 이를 위하여 3D 모델 생성 장치(305)는 3D 렌더링 지원을 위한 다양한 알고리즘을 저장할 수 있으며, 각 알고리즘 적용을 통하여 사용자 영상에 대한 3D 모델링을 수행할 수 있다. 3D 모델 생성 장치(305)는 사용자(50)에 대한 3D 모델링을 위하여 다양한 각도의 사용자 영상을 단말기(100)에 요청할 수 있으며, 필요에 따라 획득하지 못한 부위는 인접 영상 간의 임의적인 연산을 통하여 가상으로 생성할 수 있다. 깊이 정보 추출은 해당 영상의 명암 정보를 통하여 획득하거나 단말기(100)의 카메라(170)가 깊이 정보를 수집할 수 있는 기능을 가진 경우 단말기(100)로부터 획득할 수 있다. 3D 모델 생성 장치(305)가 생성한 3D 모델 데이터는 접속 장치(301)에 임시 저장될 수 있으며, 접속 장치(301)를 통하여 단말기(100)에 전달될 수 있다.
한편 상술한 설명에서는 3D 모델 데이터를 단말기(100)가 저장하여 출력하면서 사용자의 움직임을 기반으로 3D 모델 데이터 및 헤어 오브젝트(153)의 변화를 제어하는 것으로 설명하였지만 본 발명이 이에 한정되는 것은 아니다. 즉 3D 모델 데이터는 실시간으로 가상 헤어 적용 장치(300) 특히 3D 모델 생성 장치(305)로부터 수신하여 출력할 수 있다. 이에 따라 단말기(100)는 사용자의 참조 값 변화 정보를 3D 모델 생성 장치(305)에 전송할 수 있으며, 3D 모델 생성 장치(305)는 단말기(100)로부터 수신한 참조 값 변화를 기반으로 3D 모델 데이터의 출력되는 일면을 결정할 수 있다. 즉 3D 모델 생성 장치(305)는 참조 값 변화에 따라 사용자(50)의 움직임 변화를 3D 모델 데이터에 적용하여 3D 모델 데이터를 회전시키고 회전된 면에 대한 정보를 단말기(100)에 제공하여 출력하도록 지원할 수 있다. 이와 유사하게 헤어 오브젝트 지원 장치(303) 또한 단말기(100)로부터 사용자(50)의 얼굴 인식에 따른 참조 값 변화에 해당하는 움직임 정보를 수신하고 단말기(100)에 출력되고 있는 헤어 오브젝트(153)의 회전에 따른 출력면에 결정하고, 결정된 출력면에 대한 데이터를 단말기(100)에 제공할 수 있다. 이러한 구조는 단말기(100)가 화면 구성을 위한 별도의 데이터 연산을 수행하지 않고, 가상 헤어 적용 장치(300)를 기반으로 운용되는 경우에 해당할 수 있다.
이상에서 설명한 바와 같이 본 발명의 가상 헤어 적용 서비스 시스템(10)은 단말기(100)가 촬영한 사용자 관련 영상을 가상 헤어 적용 장치(300)에 전달하여 3D 모델 데이터와, 상기 3D 모델에 적용할 다양한 헤어 오브젝트(153)를 수신하여 출력하도록 지원한다. 이에 따라 본 발명의 가상 헤어 적용 서비스 시스템(10)은 고속 엔진을 필요로 하는 3D 모델 생성을 가상 헤어 적용 장치(300)에서 처리하도록 함으로써 단말기(100)가 3D 모델 생성을 수행하는 부담을 줄일 수 있으며, 가상 헤어 적용 장치(300)로부터 다양한 헤어스타일의 헤어 오브젝트(153)를 수신하여 3D 모델에 적용할 수 있도록 지원할 수 있다. 특히 본 발명의 가상 헤어 적용 서비스 시스템(10)은 단말기(100)가 3D 모델 데이터를 수신하여 출력하는 과정 중에 사용자(50)의 얼굴 인식을 통하여 두부의 회전 각도를 검지하고, 검지된 회전 각도에 따라 3D 모델의 출력 방향을 결정함과 아울러 3D 모델에 적용되는 헤어 오브젝트(153)의 회전 각도를 결정함으로써 사용자가 다양한 각도에서 헤어 오브젝트(153)의 적용 상태를 관찰할 수 있도록 지원할 수 있다.
도 2는 본 발명의 실시 예에 따른 단말기(100)의 구성을 개략적으로 나타낸 블록도이다.
도 2를 참조하면, 본 발명의 단말기(100)는 통신부(110), 입력부(120), 오디오 처리부(130), 표시부(140), 저장부(150), 카메라(170) 및 제어부(160)의 구성을 포함할 수 있다.
상술한 구성을 가지는 단말기(100)는 카메라(170)를 운용하여 사용자(50)에 대한 다양한 각도의 영상을 수집하고, 수집된 영상을 네트워크(200)을 통하여 가상 헤어 적용 장치(300)에 전달한다. 그리고 단말기(100)는 가상 헤어 적용 장치(300)로부터 3D 모델 데이터와 적어도 하나의 헤어 오브젝트(153)를 수신하여 해당 데이터들을 표시부(140)에 출력할 수 있다. 이때 단말기(100)는 사용자(50)의 참조 값 변화를 검출하고, 참조 값 변화에 따라 3D 모델 및 헤어 오브젝트(153)의 출력 각도를 조정 한다. 이하 본 발명의 단말기(100)가 지원하는 가상 헤어 적용 서비스에 대한 각 구성들의 역할과 기능에 대하여 보다 상세히 설명하기로 한다.
통신부(110)는 단말기(100)의 통화 기능 지원을 위한 통신 채널의 형성 및 데이터 전송을 위한 통신 채널의 형성 등을 제어부(160)의 제어 하에 수행한다. 즉, 통신부(110)는 음성 통화 채널, 데이터 통신 채널 및 화상 통화 채널 등을 네트워크(200)을 통해 다양한 장치들과 형성할 수 있다. 특히 통신부(110)는 데이터 통신 채널을 네트워크(200)을 통하여 가상 헤어 적용 장치(300)와 형성한다. 특히, 본 발명에 따른 통신부(110)는 접속 장치(301)로 사용자(50)에 대한 적어도 하나의 영상 데이터를 전송할 수 있는 통신 채널을 형성할 수 있다. 또한 통신부(110)는 가상 헤어 적용 장치(300)로부터 3D 모델 데이터와 적어도 하나의 헤어 오브젝트(153)를 수신할 수 있다. 이렇게 수신된 데이터들은 제어부(160)에 전달될 수 있다.
입력부(120)는 숫자 또는 다양한 문자 정보를 입력 받고, 각종 기능들의 설정 및 단말기(100)의 기능 제어를 위한 입력키 및 기능키들을 포함할 수 있다. 특히 입력부(120)는 본 발명의 실시 예에 따른 사용자(50)에 대한 영상 수집을 위한 카메라 제어와 관련된 입력 신호, 수집된 적어도 하나의 사용자 영상의 저장 및 전송 제어를 위한 입력 신호, 접속 장치(301)와 통신 채널을 형성하고 해당 접속 장치(301)로부터 3D 모델 데이터 및 헤어 오브젝트(153) 수신을 위한 입력 신호 등을 생성할 수 있다. 입력부(120)가 생성한 각 입력 신호들은 제어부(160)로 전달되어 해당 입력 신호에 대응하는 기능 수행을 위한 명령어들로 변환될 수 있다. 이러한 입력부(120)는 단말기(100)의 제공 형태에 따라 터치패드(Touch-pad), 터치스크린(Touch-screen), 일반적인 키 배열의 버튼식 키패드, 쿼티 방식의 버튼식 키패드 등과 같은 입력 장치들 중 어느 하나 또는 이들의 조합으로 형성될 수 있다.
오디오 처리부(130)는 단말기(100)의 운용 과정에서 발생하는 다양한 오디오 데이터의 출력과 단말기(100)의 통화 기능 지원에 필요한 오디오 데이터 수집 등을 담당하기 위하여 스피커(SPK)와 마이크(MIC)를 포함할 수 있다. 이러한 오디오 처리부(130)는 카메라(170) 운용 과정에 필요한 효과음을 스피커(SPK)를 통하여 출력할 수 있으며, 3D 모델 및 헤어 오브젝트(153)의 출력과 관련된 효과음을 출력할 수 있다. 효과음 출력 기능은 사용자 선택에 따라 생략될 수 도 있다.
표시부(140)는 단말기(100)의 각종 메뉴를 비롯하여 사용자가 입력한 정보 또는 사용자에게 제공하는 정보를 표시한다. 즉, 표시부(140)는 단말기(100)의 이용에 따른 다양한 화면, 예를 들어, 대기 화면, 메뉴 화면, 메시지 작성 화면, 통화 화면 등을 제공할 수 있다. 특히, 본 발명의 실시 예에 따른 표시부(140)는 사용자(50)에 대한 영상 수집을 위하여 활성화되는 카메라(170) 관련 화면, 예를 들면 사용자(50)에 대한 프리뷰 이미지 출력 화면을 출력할 수 있다. 또한 표시부(140)는 사용자 영상을 기반으로 생성된 3D 모델 및 3D 모델에 적용할 헤어 오브젝트(153)가 적용된 화면을 출력할 수 있다. 그리고 표시부(140)에 출력되는 3D 모델 및 헤어 오브젝트(153)는 사용자의 움직임에 따라 일정 각도로 회전하여 출력되는 면이 변경될 수 있다. 여기서 헤어 오브젝트(153)는 3D 모델에 적용되는 형태로서 역시 동일 3D 타입으로 모델링된 데이터가 될 수 있다. 이러한 표시부(140)는 다양한 디스플레이 장치로 구현될 수 있는데, 예를 들면, 액정 표시 장치(Liquid Crystal Display: LCD), OLED(Organic Light Emitted Diode), AMOLED(Active Matrix Organic Light Emitted Diode) 등으로 구현될 수 있다. 특히, 표시부(140)가 터치스크린으로 형성되는 경우, 표시부(140)와 입력부(120)의 기능이 결합될 수도 있다.
저장부(150)는 단말기(100)의 동작에 필요한 각종 데이터 및 프로그램을 저장하는 수단으로서, 단말기(100)의 운영체제(OS, Operating System)를 비롯하여, 기타 옵션(options) 기능 예컨대, 소리 재생 기능, 이미지 또는 동영상 재생 기능 등에 필요한 응용 프로그램, 사용자 데이터 및 송수신되는 데이터 등을 저장할 수 있다. 특히, 본 발명에 따른 저장부(150)는 본 발명의 3D 모델링을 위한 사용자의 영상 수집을 지원하는 카메라 제어 프로그램을 저장할 수 있으며, 가상 헤어 적용 장치(300)로부터 수신된 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 저장할 수 있다.
카메라 제어 프로그램은 본 발명의 가상 헤어 적용 서비스 운용을 위한 입력 신호 발생 시 카메라(170)를 활성화하도록 제어하는 루틴, 활성화된 카메라(170)를 기반으로 사용자(50)에 대한 적어도 하나의 영상을 수집하도록 제어하는 촬영 루틴, 촬영된 사용자 영상을 통신부(110)를 통하여 가상 헤어 적용 장치(300)에 전송하도록 제어하는 전송 제어 루틴을 포함할 수 있다. 여기서 촬영 루틴은 사용자(50)에 대한 영상 촬영 시 해당 영상을 기반으로 적절한 3D 모델 데이터를 생성할 수 있도록 사용자(50)에 대한 다양한 각도의 영상 촬영을 지원하는 서브 루틴들을 포함할 수 있다. 예를 들면 촬영 루틴은 사용자(50)의 정면에 대한 영상 수집을 제어하는 서브 루틴, 사용자(50)의 우측면 및 좌측면에 대한 영상 수집을 제어하는 서브 루틴을 포함할 수 있다. 여기서 촬영 루틴의 서브 루틴들은 얼굴 인식을 통하여 눈, 코, 입 등의 참조 값을 확보하고, 해당 참조 값의 변화에 따라 사용자(50)의 정면, 우측면 및 좌측면에 대한 영상 수집을 안내할 수 있다. 즉 참조 값들 간의 거리가 일정 값 이내인 경우 카메라 제어 프로그램은 해당 사용자(50)를 정면으로 인식할 수 있으며, 참조 값들이 변환되어 얼굴의 우측면 또는 좌측면 영상에 대응하는 값들이 수집될 때까지 얼굴 회전을 안내하는 안내음이나 안내 메시지를 표시부(140)에 출력할 수 있다.
저장부(150)에 저장된 3D 모델 데이터(151)는 가상 헤어 적용 장치(300)가 생성하여 전달한 데이터가 될 수 있다. 3D 모델 데이터(151)는 사용자(50)에 대한 영상을 가상 헤어 적용 장치(300)에 전달할 때마다 가상 헤어 적용 장치(300)로부터 새로 수신하여 갱신될 수 있다. 사용자의 신체 변화, 예를 들면 무게가 증가하거나 다양한 성형 또는 사고 등에 의하여 얼굴이 변화될 수 있기 때문에 일정 주기에 따라 해당 3D 모델 데이터(151)를 갱신하는 것이 바람직할 수 있다.
헤어 오브젝트(153)는 가상 헤어 적용 장치(300) 중 헤어 오브젝트 지원 장치(303)로부터 수신하여 저장된 데이터가 될 수 있다. 단말기(100)는 헤어 오브젝트 편집기를 제공할 수 있으며, 사용자는 헤어 오브젝트(153) 편집기를 이용하여 헤어 오브젝트(153)에 대한 간단한 스타일 변경이나 색 변경 등을 수행할 수 있다. 변경된 스타일의 헤어 오브젝트(153)는 사용자 요청에 따라 저장부(150)에 저장될 수 있으며, 헤어 오브젝트 지원 장치(303)의 요청에 따라 해당 장치로 전송될 수 있다.
카메라(170)는 사용자(50)의 영상을 촬영한다. 이러한 카메라(170)는 이미지 센서와 이미지 처리부를 포함할 수 있다. 이미지 센서는 사용자를 전기적인 영상 신호로 변환하는 센서이다. 이러한 이미지 센서는 CMOS(Complementary Metal Oxide Semiconductor) 방식 또는 CCD(Charge Coupled Device) 방식의 이미지 센서일 수 있다. 이미지 처리부는 이미지 센서로부터 입력되는 영상을 가공하여 출력하는 장치이다. 즉, 이미지 처리부는 이미지 센서로부터 입력되는 영상을 리사이즈(Resize), 메모리간 이동, RGB 신호 변환, A/D 변환, 잡음 제거, 디지털 줌(Digital Zoom), 회전(Rotation), 인코딩(Encoding) 등의 이미지 처리 기능을 수행할 수 있다. 특히, 본 발명의 실시 예에 따른 카메라(170)는 사용자(50)에 대한 적어도 하나의 영상을 촬영할 수 있다. 촬영된 영상은 제어부(160)에 전달될 수 있다.
제어부(160)는 단말기(100)의 전반적인 동작 및 단말기(100)의 내부 블록들 간 신호 흐름을 제어하고, 데이터를 처리하는 데이터 처리 기능을 수행할 수 있다. 특히 본 발명에 따른 제어부(160)는 가상 헤어 적용 장치(300) 기반의 3D 가상 헤어 적용 서비스 기능을 지원할 수 있다. 이를 보다 상세히 설명하면, 제어부(160)는 가상 헤어 적용 서비스 운용을 위한 메뉴를 선택하는 입력 신호가 발생하면, 카메라(170)의 활성화를 제어할 수 있다. 이를 위하여 제어부(160)는 표시부(140)를 통해서 가상 헤어 적용 서비스 운용을 위한 항목을 포함하는 메뉴를 제공할 수 있다. 카메라(170)를 활성화한 후, 제어부(160)는 사용자(50)에 대한 영상 촬영 제어를 수행한다. 이때 제어부(160)는 수집된 사용자 영상을 기반으로 사용자(50)의 얼굴 인식을 수행하여 참조 값들의 변화를 기반으로 적절한 3D 모델링을 위해 필요한 다양한 각도의 영상을 수집할 수 있도록 제어할 수 있다. 즉 제어부(160)는 참조 값들의 변화를 기반으로 사용자(50)의 움직임을 인식하여, 정면, 측면 등 다양한 각도의 영상을 수집하도록 안내할 수 있다. 사용자(50)에 대한 영상이 수집되면 제어부(160)는 통신부(110)를 통하여 해당 영상을 가상 헤어 적용 장치(300)에 전송하도록 제어할 수 있다. 추후 제어부(160)는 가상 헤어 적용 장치(300)로부터 사용자(50)와 관련된 3D 모델 데이터(151) 및 해당 3D 모델 데이터(151)에 적용할 적어도 하나의 헤어 오브젝트(153)를 수신하여 저장부(150)에 저장할 수 있다.
한편 제어부(160)는 3D 모델 데이터(151)를 표시부(140)에 출력하도록 제어하는 한편 3D 모델 데이터(151)의 일정 위치 예를 들면 머리털이 배치된 위치에 적어도 하나의 헤어 오브젝트(153)를 적용하여 출력하도록 제어한다. 이때 제어부(160)는 다양한 헤어 오브젝트(153)들의 멀티 이미지를 표시부(140)에 출력하여 사용자가 선택한 특정 헤어 오브젝트(153)를 3D 모델 데이터(151)에 적용하도록 제어할 수 있다. 그리고 제어부(160)는 3D 모델 데이터(151)의 출력 크기를 사용자(50)와 카메라(170) 간의 거리에 따라 조절할 수 있다. 예를 들어 제어부(160)는 사용자(50)와 카메라(170) 간의 거리가 가까워질수록 3D 모델 데이터(151)의 크기를 크게 하여 출력하도록 제어하며 거리가 멀어질수록 3D 모델 데이터(151)의 크기를 작게 하여 출력하도록 제어할 수 있다. 이와 함께 제어부(160)는 헤어 오브젝트(153)의 크기 또한 3D 모델 데이터(151)의 크기 변화에 따라 조절하여 출력하도록 제어할 수 있다. 제어부(160)는 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 크기 변화에 대하여 최대 크기값과 최소 크기값을 제한하여 일정 크기 이상 또는 이하로 표시되지 않도록 제어할 수 있다.
특히 본 발명의 제어부(160)는 사용자(50)의 얼굴 인식을 통하여 눈, 코, 입 등의 참조 값을 추출하고, 해당 참조 값의 변화를 검출하여 사용자(50)의 회전을 판단할 수 있다. 사용자(50)가 일정 각도 회전되었음을 나타내는 참조 값이 검지되면 제어부(160)는 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 회전 각도를 조절하여 출력되도록 제어한다. 예를 들면 제어부(160)는 사용자(50)가 우측으로 일정 각도 회전하면 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 우측으로 일정 각도 회전된 면이 출력되도록 제어할 수 있다.
상술한 바와 같이 본 발명의 단말기(100)는 카메라(170)를 이용하여 사용자(50)에 대한 영상을 수집하고, 해당 영상을 가상 헤어 적용 장치(300)에 전송하고, 가상 헤어 적용 장치(300)로부터 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 수신하여 출력하도록 운용함으로써, 3D 모델 생성의 부담 없이 헤어 오브젝트(153)를 적용할 수 있는 환경을 제공할 수 있다. 또한 단말기(100)는 사용자(50)의 회전을 검지하여 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 회전을 제어하여 다양한 각도의 3D 모델 데이터(151) 및 헤어 오브젝트(153) 일면을 실시간으로 사용자가 손쉽게 확인할 수 있도록 지원할 수 있다.
한편 상술한 바와 같이 구성되는 가상 헤어 적용 장치(300)는 서버 기반 컴퓨팅 방식 또는 클라우드 컴퓨팅 방식으로 동작하는 하나 이상의 서버로 구현될 수 있다. 더 구체적으로 설명하면, 가상 헤어 적용 장치(300)는 접속 장치(301), 3D 모델 생성 장치(305) 및 헤어 오브젝트 지원 장치(303)들이 각각 독립된 하나 이상의 서버로 구현되거나, 상기 다수의 장치들(301 내지 305)을 포함하는 복수개의 서버로 구현될 수 있다. 뿐만 아니라, 이러한 가상 헤어 적용 장치(300)는 단말기(100)에 대하여 클라우드 컴퓨팅 방식으로 가상 헤어 적용 서비스를 제공할 수 있다.
여기서, 클라우드 컴퓨팅이란 인터넷 기술을 활용하여 가상화된 IT 자원, 예를 들어, 하드웨어(서버, 스토리지, 네트워크 등), 소프트웨어(데이터베이스, 보안, 웹 서버 등), 서비스, 데이터 등을 온 디맨드(on demand) 방식으로 서비스하는 기술을 의미한다. 즉, 가상 헤어 적용 장치(300)는 본 발명에 따라서 3D 모델링 기반의 가상 헤어 적용 서비스를 제공하는데 필요한, 하드웨어, 소프트웨어, 서비스, 데이터 중에서 하나 이상을 포함하는 컴퓨팅 자원을 단말기(100)에 제공한다. 예를 들어, 가상 헤어 적용 장치(300)는 단말기(100)에 대하여 3D 모델 데이터(151) 및 헤어 오브젝트(153)가 유통되는 가상의 컴퓨팅 공간을 제공하고, 상기 컴퓨팅 공간을 다양한 헤어 오브젝트(153)의 교환과 공유에 따라 보다 다양한 헤어 오브젝트(153)를 단말기(100)에 서비스할 수 있다. 또한, 가상 헤어 적용 장치(300)는 3D 모델 데이터와 관련된 데이터 및/또는 소프트웨어를 저장하는 저장 공간을 제공하고, 상기 저장 공간을 통해 상술한 기능을 수행할 수 있다.
한편 상술한 바와 같이 구성되는 단말기(100)는 저장부(150)에 사용자 관련 3D 모델 관련 데이터 및 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 저장하는 예를 개시하였지만 이것에 한정되는 것은 아니다. 예컨대 단말기(100)는 사용자 관련 3D 모델 관련 데이터 및 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 통신부(100)를 통하여 가상 헤어 적용 장치(300)의 헤어 오브젝트 지원 장치(303)에 저장할 수 있다.
한편, 본 발명의 다른 실시 예에서는, 단말기(100)가 가상 헤어 적용 장치(300)의 도움 없이, 사용자에 대한 3D 모델을 생성할 수 도 있다.
도 3은 본 발명의 다른 실시 예에 따른 단말기(100)의 운용을 설명하기 위한 제어부(160)의 구성을 보다 상세히 나타낸 도면이다.
도 3을 참조하면, 본 발명의 다른 실시 예에 따른 단말기(100)에 있어서, 제어부(160)는 3D 모델 생성부(161), 3D 모델 재생부(163), 헤어 오브젝트 처리부(165) 및 영상 분석부(167)를 포함할 수 있다. 이와 같은 구성을 가지는 본 발명의 단말기(100)는 실질적으로 3D 모델 생성을 단말기 자체에서 처리함으로써 가상 헤어 적용 장치(300)의 3D 모델 생성 지원을 이용하지 않아도 된다.
3D 모델 생성부(161)는 카메라(170)가 수집하여 전달한 사용자(50) 영상들을 기반으로 3D 모델을 생성한다. 이러한 3D 모델 생성부(161)는 실질적으로 3D 모델 생성 장치(305)의 역할과 유사한 역할을 수행할 수 있다. 다만, 단말기(100)의 특성에 따라 3D 모델 생성 장치(305)에 비하여 상대적으로 연산속도가 느릴 수 있다. 이를 보완하기 위하여, 3D 모델 생성부(161)는 카메라(170)로 촬영된 사용자 영상들로부터 3D 모델을 렌더링 하는 동안 참조점의 개수나 깊이 정보들을 3D 모델 생성 장치(305)에 비하여 상대적으로 적은 수로 설정할 수 있을 것이다. 또한 3D 모델 생성부(161)는 3D 모델 데이터(151)가 생성되면, 생성된 3D 모델 데이터(151)의 운용 과정에서 보다 빠른 움직임 적용을 위하여 데이터 압축을 수행하거나 데이터 필터링을 수행하도록 지원할 수 있다. 3D 모델 생성부(161)는 생성된 3D 모델 데이터(151)를 저장부(150)에 저장하도록 제어할 수 있다.
3D 모델 재생부(163)는 저장부(150)에 저장된 3D 모델 데이터(151)를 표시부(140)에 출력하도록 지원하는 구성이다. 이러한 3D 모델 재생부(163)는 3D 렌더링 된 3D 모델 데이터(151) 출력을 위하여 고속 그래픽 엔진을 운용할 수 있다. 한편 본 발명의 3D 모델 재생부(163)는 영상 분석부(167)로부터 특정 참조 값 변화에 대한 정보를 전달받는 경우, 해당 참조 값 변화에 따라 표시부(140)에 출력되고 있는 3D 모델 데이터(151)의 출력면을 변경하도록 제어할 수 있다. 예를 들어 영상 분석부(167)로부터 사용자(50)가 우측 또는 좌측으로 일정 각도만큼 회전한 경우에 대응하는 참조 값 변화를 전달하는 경우 3D 모델 재생부(163)는 출력 중인 3D 모델 데이터(151)의 출력면을 회전 각도에 대응하도록 조정하여 출력하도록 제어할 수 있다. 또한 3D 모델 재생부(163)는 사용자(50)와 카메라(170) 사이의 거리 변화에 따라 출력되는 3D 모델 데이터(151)의 크기를 변경하도록 지원할 수 있다.
헤어 오브젝트 처리부(165)는 저장부(150)에 저장된 적어도 하나의 헤어 오브젝트(153)를 3D 모델 데이터(151)에 적용하여 출력하도록 지원하는 구성이다. 실질적으로 3D 모델 데이터(151)에 적용되는 헤어 오브젝트(153)는 3D로 구성된 정보가 될 수 있다. 헤어 오브젝트 처리부(165)는 사용자가 원하는 특정 아이템을 선택할 수 있도록 다양한 헤어 오브젝트(153)의 멀티 이미지를 포함하는 화면을 표시부(140)에 출력하도록 지원할 수 있다. 그리고 사용자가 특정 헤어 오브젝트(153)를 선택하는 경우 헤어 오브젝트 처리부(165)는 선택된 헤어 오브젝트(153)를 해당 3D 모델 데이터(151)에 적용하도록 제어할 수 있다. 이때 헤어 오브젝트 처리부(165)는 3D 모델 데이터(151)의 크기 정보를 획득하고, 해당 크기 정보에 따라 헤어 오브젝트(153)의 크기를 변경하여 3D 모델 데이터(151)가 적절한 크기의 헤어 오브젝트(153)를 적용한 형태로 출력하도록 지원할 수 있다. 그리고 헤어 오브젝트 처리부(165)는 3D 모델 재생부(163)와 유사하게 영상 분석부(167)로부터 사용자(50)의 움직임에 대응하는 참조 값 변화를 수신하고, 참조 값 변화에 따라 헤어 오브젝트(153)의 출력면을 조정하도록 제어할 수 있다. 또한 헤어 오브젝트 처리부(165)는 사용자(50)와 카메라(170) 간의 거리 값 변화에 따라 헤어 오브젝트(153)의 크기 변경을 제어할 수 있다. 여기서 3D 모델 재생부(163) 및 헤어 오브젝트 처리부(165)는 참조 값 변화를 통하여 사용자(50)의 거리 변화에 따른 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 크기 변경을 제어할 수 도 있다. 한편 헤어 오브젝트 처리부(165)는 사용자 요청 또는 일정 주기에 따라 헤어 오브젝트 지원 장치(303)에 접속하여, 헤어 오브젝트 지원 장치(303)가 제공하는 다양한 헤어 오브젝트(153)를 수신하여 저장부(150)에 저장하도록 제어할 수 있다. 그리고 헤어 오브젝트 처리부(165)는 헤어 오브젝트 편집기를 제공하여 사용자 제어에 따라 특정 헤어 오브젝트(153)를 사용자 스타일에 맞도록 변경하거나 조정하도록 지원할 수 있다.
영상 분석부(167)는 카메라(170)가 수집하는 영상 또는 프리뷰 영상을 얼굴 인식하여 사용자(50)의 참조 값 예를 들면 눈, 코, 입, 귀 등의 참조 값을 검출하고, 참조 값의 변화를 관찰하는 구성이다. 즉 영상 분석부(167)는 사용자(50)가 좌, 우, 상, 하, 전, 후 등으로 이동하는지를 참조 값 변화를 통하여 검지한다. 그리고 영상 분석부(167)는 해당 사용자(50)의 움직임 발생에 따라 참조 값 변화가 검지되면 해당 결과 값을 3D 모델 재생부(163) 및 헤어 오브젝트 처리부(165)에 전달할 수 있다. 이때 영상 분석부(167)는 3D 모델 재생부(163) 및 헤어 오브젝트 처리부(165)의 연산량 분배를 위하여 참조 값 변화에 따른 방향과 방향각 및 거리 등을 연산하고, 연산결과를 3D 모델 재생부(163) 및 헤어 오브젝트 처리부(165)에 전달할 수 도 있다.
상술한 바와 같이 본 발명의 다른 실시 예에 따른 가상 헤어 적용 서비스는 단말기(100)를 기축으로 3D 모델 생성과 헤어 오브젝트(153) 적용을 지원함으로써 별도의 장치 접속을 보조적으로 활용함으로써 장치 접속이 불가능한 지역에서도 일정한 가상 헤어 적용 서비스를 지원받을 수 있도록 제공할 수 있다.
이상에서는 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 시스템(10)의 각 구성과 각 구성들의 역할에 대하여 설명하였다. 이하에서는 상술한 단말기(100)의 가상 헤어 적용 방법과, 가상 헤어 적용 서비스 시스템(10)의 가상 헤어 적용 서비스 제공 방법에 대하여 각각 도면을 참조하여 보다 상세히 설명하기로 한다.
도 4는 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 지원을 위한 단말기의 운용 방법을 설명하기 위한 순서도이다.
도 4를 참조하면, 본 발명의 실시 예에 따른 단말기의 운용 방법은 먼저 단말기(100)에 전원이 공급되면 제어부(160)는 공급된 전원을 이용하여 단말기(100)의 각 구성을 초기화하도록 제어한다. 그리고 제어부(160)는 초기화 과정이 완료되면 기 설정된 스케줄 정보에 따라 401 단계에서와 같이 대기 화면을 표시부(140)에 출력하도록 제어할 수 있다.
다음으로 제어부(160)는 입력부(120)로부터 입력 신호가 발생하면 403 단계로 분기하여 해당 입력 신호가 가상 헤어 기능을 활성화하도록 하기 위한 입력 신호인지 여부를 확인할 수 있다. 이 단계에서 제어부(160)는 해당 입력 신호가 가상 헤어 기능 활성화를 위한 입력 신호가 아닌 경우 405 단계로 분기하여 입력 신호에 대응하는 단말기(100)의 사용자 기능, 예를 들면 단말기(100) 지원 여부에 따라 파일 재생 기능, 파일 검색 기능, 방송 수신 기능, 통화 기능 등을 수행하도록 제어할 수 있다.
한편 403 단계에서 가상 헤어 기능 활성화를 위한 입력 신호가 발생하면 제어부(160)는 407 단계로 분기하여 3D 모델 생성을 수행할 수 있다. 이를 보다 상세히 설명하면, 제어부(160)는 먼저 카메라(170)를 활성화하도록 제어할 수 있다. 그리고 제어부(160)는 카메라(170)를 기반으로 사용자(50)에 대한 적어도 하나의 영상을 수집하여 3D 모델 데이터(151) 생성을 위한 렌더링을 수행할 수 있다. 이때 제어부(160)는 적절한 3D 모델 데이터(151) 생성을 위하여 다수의 영상 수집을 안내할 수 있으며, 사용자는 표시부(140)나 오디오 처리부(130) 등을 통하여 출력되는 안내에 따라 사용자(50)의 다양한 측면에 대한 영상을 수집할 수 있다. 제어부(160)는 다수의 영상이 수집되면 해당 영상들의 경계 영역을 잇는 작업과, 각 영상들의 깊이 정보를 추출하는 작업, 추출된 깊이 정보와 해당 영상의 색 정보 등을 바탕으로 얼굴 윤곽과 얼굴 색상 등 3D 모델 데이터(151) 생성을 수행하도록 지원할 수 있다. 3D 모델 데이터(151)가 생성되면 제어부(160)는 해당 3D 모델 데이터(151)를 저장부(150)에 저장하도록 지원할 수 있다.
다음으로 제어부(160)는 409 단계에서 3D 모델에 특정 헤어 오브젝트(153)를 적용하여 표시부(140)에 출력하도록 제어할 수 있다. 이를 위하여 단말기(100)는 저장부(150)에 적어도 하나의 헤어 오브젝트(153)를 사전 저장하여 사용자가 선택할 수 있도록 지원하거나, 헤어 오브젝트(153)를 제공하는 헤어 오브젝트 지원 장치(303)에 접속하여 사용자가 요구하는 특정 헤어 오브젝트(153)를 수신할 수 있다. 이렇게 수신된 헤어 오브젝트(153)는 제어부(160) 제어에 따라 저장부(150)에 임시 또는 반영구적으로 저장되는 한편 생성된 3D 모델 데이터(151)에 적용되어 표시부(140)에 출력될 수 있다. 이때 제어부(160)는 3D 모델 데이터(151)에 있어서 두부 크기 정보를 바탕으로 헤어 오브젝트(153)의 크기를 자동 변경하고, 자동 변경된 크기의 헤어 오브젝트(153)를 3D 모델 데이터(151)에 적용하여 표시부(140)에 출력하도록 지원할 수 있다.
한편 제어부(160)는 411 단계에서 사용자(50)에 대한 영상 분석을 수행할 수 있다. 즉 제어부(160)는 사용자(50)의 눈, 코, 입, 귀 중 적어도 하나를 포함하는 참조 값들을 실시간 또는 일정 주기에 따라 수집하도록 제어할 수 있다. 그리고 제어부(160)는 413 단계에서 수집된 참조 값들이 변화되는지 여부를 확인한다. 참조 값들이 변화되는 경우 제어부(160)는 415 단계로 분기하여 참조 값 변화에 맞추어 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 회전하여 해당 데이터들의 다른 일면이 표시부(140)에 출력되도록 제어할 수 있다. 예를 들면, 제어부(160)는 참조 값 변화에 따른 변화된 방향과 각도 및 거리를 포함하는 움직임 정보를 획득하고, 해당 움직임 정보를 토대로 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 출력면을 결정할 수 있다. 한편 제어부(160)는 413 단계에서 참조 값 변화가 없는 경우 다음에서 설명하는 417 단계로 바로 분기할 수 있다.
이후 제어부(160)는 417 단계로 분기하여 가상 헤어 기능 종료를 위한 입력 신호 발생이 있는지 여부를 확인하고, 종료 입력 신호 발생이 없는 경우 409 단계로 분기하여 가상 헤어 기능을 지속적으로 서비스하도록 제어할 수 있다. 한편 종료 입력 신호 발생이 있는 경우 제어부(160)는 가상 헤어 기능을 종료하고 401 단계 이전으로 분기하여 이하 과정을 반복적으로 수행하도록 제어할 수 있다.
도 5는 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 방법을 설명하기 위한 가상 헤어 적용 서비스 시스템(10)의 대표 구성들 간의 신호 흐름을 개략적으로 나타낸 것이다.
도 5를 참조하면, 본 발명의 가상 헤어 적용을 위한 시스템 운용 방법은 먼저, 단말기(100)가 501 단계에서 영상 수집 과정을 수행한다. 이를 보다 상세히 설명하면, 단말기(100) 사용자는 가상 헤어 적용 서비스 이용을 위하여 단말기(100)가 제공하는 가상 헤어 적용 기능을 활성화하기 위한 입력 신호를 생성할 수 있다. 단말기(100)는 가상 헤어 적용 기능 활성화를 위한 입력 신호가 발생하면 해당 기능 지원을 위하여 카메라(170)를 자동으로 활성화하도록 제어할 수 있다. 그리고 단말기(100)는 사용자 제어에 따라 사용자(50)에 대한 적어도 하나의 영상을 수집하도록 지원한다. 이를 위하여 단말기 사용자는 카메라(170)를 이용하여 사용자(50)에 대한 다양한 각도의 영상을 수집할 수 있도록 동작할 수 있다.
사용자(50)에 대한 영상을 수집하면, 단말기(100)는 503 단계에서 수집된 영상을 가상 헤어 적용 장치(300)에 전송한다. 이를 위하여 단말기(100)는 네트워크(200)를 통해 통신 채널을 형성하여 접속 장치(301)에 접속할 수 있다. 그리고 단말기(100)는 경우에 따라 정상 사용자인지 여부를 확인하기 위한 사용자 인증 과정을 수행할 수 있다. 정상 사용자인 경우 또는 별도의 사용자 인증이 요구되지 않는 경우 단말기(100)는 해당 영상을 접속 장치(301)에 전달한다. 접속 장치(301)는 수신한 사용자 영상을 저장함과 아울러 해당 영상을 기반으로 3D 모델 데이터 생성을 위하여 해당 영상을 3D 모델 생성 장치(305)에 전달할 수 있다. 3D 모델 생성 장치(305)는 505 단계에서 접속 장치(301)로부터 사용자 영상을 수신하면, 해당 영상을 기반으로 3D 모델 생성을 위한 렌더링 과정을 수행할 수 있다. 한편 접속 장치(301)는 특정 단말기(100)로부터 3D 모델 생성을 위한 영상 정보를 수신하면 해당 정보를 헤어 오브젝트 지원 장치(303)에 전달할 수 있다. 그러면 헤어 오브젝트 지원 장치(303)는 단말기(100)와 통신 채널을 형성하여 사용자가 특정 헤어 오브젝트(153)를 선택할 수 있는 환경을 제공할 수 있다. 예를 들면 헤어 오브젝트 지원 장치(303)는 적어도 하나의 헤어 오브젝트(153)와 관련된 이미지가 배치된 웹 페이지를 단말기(100)에 제공할 수 있다.
다음으로 가상 헤어 적용 장치(300)는 507 단계에서 생성된 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 단말기(100)에 전송할 수 있다. 특히 단말기(100) 사용자가 특정 헤어 오브젝트(153)를 수신 요청하는 신호를 전송하였거나 또는 헤어 오브젝트 지원 장치(303)의 정책에 따라 헤어 오브젝트(153)는 3D 모델 데이터(151)와 함께 단말기(100)에 전송될 수 있다.
가상 헤어 적용 장치(300)로부터 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 수신하면, 단말기(100)는 509 단계에서 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 표시부(140)에 출력하도록 제어한다. 이 과정에서 단말기(100)는 수신된 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 저장부(150)에 저장하도록 제어할 수 있다. 그리고 단말기(100)는 3D 모델 데이터(151)를 표시부(140)에 임의의 크기로 출력하되 사용자(50)와 카메라(170) 간의 거리에 따라 그 크기를 조절할 수 있다. 또한 단말기(100)는 3D 모델 데이터(151)에 의한 3D 모델의 크기에 따라 헤어 오브젝트(153)의 크기를 조절할 수 있다. 여기서 단말기(100)는 3D 모델 데이터(151)를 표시부(140) 상에 먼저 출력한 후 헤어 오브젝트(153)를 3D 모델 데이터(151)에 맞도록 조정하여 출력하도록 지원하거나, 출력 이전에 3D 모델 데이터(151)와 헤어 오브젝트(153)를 합성하여 일정한 출력면을 가지는 영상으로 표시부(140)에 출력하도록 지원할 수 있다.
한편 단말기(100)는 511 단계에서 영상 분석을 수행하여 사용자(50)의 참조 값 변화에 따라 3D 모델 데이터(151) 및 헤어 오브젝트(153)를 회전하도록 제어할 수 있다. 이를 위하여 단말기(100)는 카메라(170)를 지속적으로 활성화하도록 유지하는 한편 카메라(170)가 수집하는 사용자(50)의 두부 영상에 대하여 영상 분석을 수행하여 얼굴 인식을 위한 참조 값 추출을 수행할 수 있다. 그리고 단말기(100)는 추출된 참조 값들의 변화에 따라 사용자(50)의 회전 방향과 거리 및 각도를 포함하는 움직임 정보를 추출하고, 해당 움직임 정보를 3D 모델 데이터(151) 및 헤어 오브젝트(153)에 적용하여 사용자(50)의 움직임에 대응하는 3D 모델 데이터(151) 및 헤어 오브젝트(153)의 일정 면이 표시부(140)에 출력되도록 제어할 수 있다.
상술한 바와 같이 본 발명의 가상 헤어 적용 서비스 방법은 단말기(100)를 이용하여 가상 헤어 적용 서비스를 지원하거나 장치와 연동되어 가상 헤어 적용 서비스를 지원할 수 있다. 그리고 본 발명의 서비스 방법은 사용자의 기호에 따라 다양한 타입의 헤어 오브젝트(153)를 자신의 두부와 유사한 3D 모델에 적용하여 관찰함으로써 자신에게 어울리는 적절한 헤어스타일을 손쉽게 검색할 수 있도록 지원한다.
한편 이상에서 설명한 본 발명의 실시 예에 따른 가상 헤어 적용 서비스 방법의 경우 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다. 이때, 컴퓨터로 판독 가능한 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 한편, 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
컴퓨터로 판독 가능한 기록매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기매체(Magnetic Media), CD-ROM, DVD와 같은 광기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있다.
이상에서는 본 발명의 실시 예에 따른 식별 코드 운용에 대하여 본 명세서 및 도면을 통해 바람직한 실시 예들에 대하여 설명하였으며, 비록 특정 용어들이 사용되었으나 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위해 일반적인 의미에서 사용된 것일 뿐, 본 발명이 전술한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 기술적 사상에 바탕을 둔 다양한 실시 예가 가능함은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
본 발명은 3D 기반의 가상 헤어 적용을 위한 시스템과 방법 및 이를 지원하는 단말기에 관한 것으로, 사용자의 두부를 기반으로 한 3D 모델을 생성하고, 해당 3D 모델에 다양한 헤어 오브젝트를 손쉽게 적용해볼 수 있도록 지원하며, 두부 회전에 따라 3D 모델 및 헤어 오브젝트를 회전시키도록 함으로써 다양한 각도에서의 가상 헤어 오브젝트 적용을 관찰할 수 있도록 지원할 수 있으며, 3D 모델 기반의 가상 헤어 적용 서비스를 제공함으로써, 시간과 공간이 제약 없이 사용자가 원하는 시점과 환경에서 사용자의 현재 상태에 가장 적절하게 어울릴 수 있는 헤어스타일을 다각적으로 보다 정확하게 관찰할 수 있도록 지원할 수 있어 사용자의 요구를 만족할 수 있다.
100: 단말기 110: 무선통신부 120: 입력부
130: 오디오 처리부 140: 표시부 150: 저장부
151: 3D 모델 데이터 153: 헤어 오브젝트 160: 제어부
161: 3D 모델 생성부 163: 3D 모델 재생부
165: 헤어 오브젝트 처리부 167: 영상 분석부 170: 카메라
200: 네트워크 300: 가상 헤어 적용 장치 301: 접속 장치
303: 헤어 오브젝트 지원 장치
305: 3D 모델 생성 장치

Claims (22)

  1. 얼굴을 포함하는 사용자의 영상을 수집하고, 수집된 영상을 가상 헤어 적용 장치에 전송하며, 상기 가상 헤어 적용 장치로부터 상기 사용자의 영상을 3D모델로 생성한 3D 모델 데이터와 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 수신하여, 상기 3D 모델 데이터와 하나의 헤어 오브젝트를 결합하여 출력하되, 사용자의 움직임에 따라 상기 3D 모델 데이터 및 상기 3D 모델 데이터에 적용한 헤어 오브젝트의 출력면을 제어하는 단말기; 및
    상기 단말기로부터 상기 사용자의 영상을 수신하여 해당 사용자에 대한 상기 3D 모델 데이터를 생성하며, 상기 3D 모델 데이터에 적용할 적어도 하나의 헤어 오브젝트와 상기 생성한 3D 모델 데이터를 상기 단말기에 전송하는 가상 헤어 적용 장치;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 시스템.
  2. 단말기로부터 사용자의 영상을 수신하고, 해당 사용자의 영상에 대응하는 3D 모델 데이터 및 적어도 하나의 헤어 오브젝트를 상기 단말기로 전송하는 접속 장치;
    상기 접속 장치가 수신한 사용자의 영상을 기반으로 해당 사용자에 대한 3D 모델 데이터를 생성하여 상기 접속 장치에 전달하는 3D 모델 생성 장치;
    상기 접속 장치로 상기 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 상기 접속 장치로 제공하는 헤어 오브젝트 지원 장치;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 장치.
  3. 제2항에 있어서,
    상기 접속 장치는
    상기 3D 모델 생성 장치가 전달하는 3D 모델 데이터 및 상기 헤어 오브젝트 지원 장치가 전달하는 적어도 하나의 헤어 오브젝트를 저장 관리하는 것을 특징으로 하는 가상 헤어 적용 장치.
  4. 제2항에 있어서,
    상기 헤어 오브젝트 지원 장치는
    적어도 하나의 헤어 오브젝트와 관련된 이미지가 배치되는 웹 페이지를 상기 단말기에 제공하는 것을 특징으로 하는 가상 헤어 적용 장치.
  5. 제4항에 있어서,
    상기 헤어 오브젝트 지원 장치는
    상기 단말기가 헤어 오브젝트를 변경한 경우, 변경된 헤어 오브젝트를 수신하여 새로운 헤어 오브젝트로 등록하는 것을 특징으로 하는 가상 헤어 적용 장치.
  6. 제2항에 있어서,
    상기 헤어 오브젝트 지원 장치는
    상기 단말기로부터 상기 사용자의 움직임 정보를 수신하고, 수신된 움직임 정보를 기반으로 헤어 오브젝트의 출력면을 결정하고, 결정된 헤어 오브젝트의 출력면에 대응하는 데이터를 상기 단말기에 제공하는 것을 특징으로 하는 가상 헤어 적용 장치.
  7. 제2항에 있어서,
    상기 3D 모델 생성 장치는
    상기 단말기로부터 상기 사용자의 움직임 정보를 수신하는 경우, 수신된 움직임 정보를 기반으로 3D 모델 데이터의 출력면을 결정하고, 결정된 3D 모델 데이터의 출력면에 대응하는 데이터를 상기 단말기에 제공하는 것을 특징으로 하는 가상 헤어 적용 장치.
  8. 제2항 내지 제7항 중 어느 한 항에 있어서,
    상기 접속 장치, 헤어 오브젝트 지원 장치 및 3D 모델 생성 장치들 중 적어도 하나가 클라우드 컴퓨팅 기반으로 동작하는 하나 이상의 서버로 구현되는 것을 특징으로 하는 가상 헤어 적용 장치.
  9. 사용자의 영상을 수집하는 카메라;
    상기 수집된 사용자의 영상을 기반으로 사용자에 대응하는 3D 모델 데이터를 생성하고, 상기 생성된 3D 모델 데이터에 헤어 오브젝트를 적용하여 출력하도록 제어하며, 상기 사용자의 움직임에 따라 상기 3D 모델 데이터 및 상기 헤어 오브젝트의 출력면을 제어하는 제어부; 및
    상기 제어부의 제어에 따라 상기 3D 모델 데이터에 상기 헤어 오브젝트가 적용된 화면을 출력하는 표시부;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스를 지원하는 단말기.
  10. 제9항에 있어서,
    상기 제어부는
    상기 사용자의 영상을 기반으로 3D 모델 데이터를 생성하는 3D 모델 생성부;
    상기 3D 모델 데이터를 상기 표시부에 출력하도록 지원하는 3D 모델 재생부; 및
    상기 3D 모델 데이터에 상기 헤어 오브젝트를 적용하여 상기 표시부에 출력하도록 지원하는 헤어 오브젝트 처리부;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스를 지원하는 단말기.
  11. 제10항에 있어서,
    상기 제어부는
    상기 사용자의 영상 중 얼굴을 인식하여 참조 값을 추출하고, 추출된 참조 값의 변화를 기반으로 상기 사용자의 움직임 정보를 추출하는 영상 분석부를 더 포함하고,
    상기 3D 모델 재생부 및 헤어 오브젝트 처리부는
    상기 영상 분석부로부터 움직임 정보를 수신하는 경우 상기 출력되는 3D 모델 데이터 및 헤어 오브젝트의 출력면을 상기 움직임 정보에 대응하도록 변경하여 출력되도록 지원하는 것을 특징으로 하는 가상 헤어 적용 서비스를 지원하는 단말기.
  12. 제10항에 있어서,
    상기 제어부의 제어에 따라 상기 3D 모델 데이터 및 상기 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 저장하는 저장부;
    를 더 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스를 지원하는 단말기.
  13. 제9항에 있어서,
    헤어 오브젝트 지원 장치와 통신 채널을 형성하는 통신부;를 더 포함하며,
    상기 제어부는 상기 통신부를 통하여 상기 사용자 관련 3D 모델 데이터 또는 상기 3D 모델 데이터에 적용할 3D 타입의 적어도 하나의 헤어 오브젝트를 상기 헤어 오브젝트 지원 장치로부터 수신하여 저장하는 것을 특징으로 하는 가상 헤어 적용 서비스를 지원하는 단말기.
  14. 단말기가, 얼굴과 머리를 포함하는 사용자 영상을 수집하는 수집 단계;
    상기 수집된 사용자 영상을 기반으로 3D 모델 데이터를 생성하는 단계;
    상기 3D 모델 데이터에 3D 타입의 특정 헤어 오브젝트를 적용하는 적용 단계;
    상기 헤어 오브젝트가 적용된 3D 모델 데이터를 출력하는 단계;
    상기 영상을 기반으로 얼굴 인식을 수행하여 사용자의 움직임을 추출하고 상기 사용자 움직임에 따라 상기 3D 모델 데이터 및 헤어 오브젝트의 출력면을 변경하는 변경 단계;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  15. 제14항에 있어서,
    상기 수집 단계는
    적어도 두 개의 각도에서 촬영된 사용자의 영상을 수집하는 단계인 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  16. 제14항에 있어서,
    상기 3D 모델 데이터에 적용할 다수의 3D 타입 헤어 오브젝트를 출력하여 하나의 헤어 오브젝트를 선택 받는 단계;를 더 포함하고,
    상기 적용 단계는
    선택된 헤어 오브젝트를 상기 3D 모델 데이터에 적용하는 단계인 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  17. 제14항에 있어서,
    상기 변경 단계는
    상기 얼굴 인식에 따른 참조 값을 추출하는 단계;
    상기 추출된 참조 값의 변화에 따라 일정 방위 중 적어도 한 방향으로의 사용자 움직임을 확인하는 단계;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  18. 제14항에 있어서,
    상기 변경 단계는
    사용자가 움직인 방향과 각도 및 거리에 따라 헤어 오브젝트의 방향과 각도 및 거리를 회전시키는 단계;
    사용자가 움직인 방향과 각도 및 거리에 따라 3D 모델 데이터의 방향과 각도 및 거리를 회전시키는 단계;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  19. 제14항에 있어서,
    상기 헤어 오브젝트를 사용자 제어에 따라 편집하는 단계; 및
    상기 헤어 오브젝트를 외부 장치로부터 수신하는 단계;
    중 적어도 하나의 단계를 더 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  20. 단말기가, 적어도 하나의 사용자 영상을 수집하는 단계;
    수집된 적어도 하나의 사용자 영상을 가상 헤어 적용 장치에 전송하는 단계;
    상기 가상 헤어 적용 장치로부터 상기 수집된 영상을 기반으로 생성된 3D 모델 데이터 및 상기 3D 모델 데이터에 적용할 3D 타입의 헤어 오브젝트를 수신하는 단계;
    사용자의 움직임 정보를 추출하고, 움직임 정보에 따라 상기 수신한 3D 모델 데이터 및 상기 헤어 오브젝트의 출력면을 조정하여 출력하는 출력 단계;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  21. 가상 헤어 적용 장치가, 단말기로부터 적어도 하나의 사용자 영상을 수신하는 단계;
    상기 수신한 사용자 영상을 기반으로 사용자에 대응하는 3D 모델 데이터를 생성하는 단계; 및
    상기 3D 모델 데이터 및 상기 3D 모델 데이터에 적용할 헤어 오브젝트를 상기 단말기로 전송하는 단계;
    를 포함하는 것을 특징으로 하는 가상 헤어 적용 서비스 방법.
  22. 제14항 내지 제21항 중 어느 한 항에 기재된 가상 헤어 적용 서비스 방법을 실행하는 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체.
KR1020160140452A 2016-10-26 2016-10-26 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기 KR20160128272A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160140452A KR20160128272A (ko) 2016-10-26 2016-10-26 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160140452A KR20160128272A (ko) 2016-10-26 2016-10-26 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020110020305A Division KR20120102275A (ko) 2011-03-08 2011-03-08 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기

Publications (1)

Publication Number Publication Date
KR20160128272A true KR20160128272A (ko) 2016-11-07

Family

ID=57529889

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160140452A KR20160128272A (ko) 2016-10-26 2016-10-26 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기

Country Status (1)

Country Link
KR (1) KR20160128272A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190085801A (ko) * 2018-01-11 2019-07-19 김지환 증강된 가발 서비스 제공 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110011115A (ko) 2009-07-28 2011-02-08 배세훈 웹 및 스마트폰 기반의 가상 헤어 및 패션스타일 시뮬레이션 시스템

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110011115A (ko) 2009-07-28 2011-02-08 배세훈 웹 및 스마트폰 기반의 가상 헤어 및 패션스타일 시뮬레이션 시스템

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190085801A (ko) * 2018-01-11 2019-07-19 김지환 증강된 가발 서비스 제공 방법

Similar Documents

Publication Publication Date Title
KR101987749B1 (ko) 가상 헤어 스타일링 서비스 방법 및 이를 지원하는 단말기
CN109819313B (zh) 视频处理方法、装置及存储介质
CN109874021B (zh) 直播互动方法、装置及系统
KR101768980B1 (ko) 가상 동영상 통화 방법 및 단말
JP7038853B2 (ja) 画像処理方法及び装置、電子機器並びにコンピュータ可読記憶媒体
KR101874895B1 (ko) 증강 현실 제공 방법 및 이를 지원하는 단말기
CN110738595A (zh) 图片处理方法、装置和设备及计算机存储介质
WO2016209438A1 (en) View interpolation for visual storytelling
US11477366B2 (en) Selfie setup and stock videos creation
WO2017157135A1 (zh) 媒体信息处理方法及媒体信息处理装置、存储介质
WO2021190625A1 (zh) 拍摄方法和设备
CN111539882A (zh) 辅助化妆的交互方法、终端、计算机存储介质
JP2019537397A (ja) 映像のための効果共有方法およびシステム
CN113938620B (zh) 图像处理方法、移动终端及存储介质
WO2021057644A1 (zh) 拍摄方法和装置
KR102058190B1 (ko) 캐릭터 서비스 시스템에서의 캐릭터 서비스를 제공하기 위한 장치
KR20160128272A (ko) 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기
KR20120102275A (ko) 가상 헤어 적용 서비스 시스템과 방법 및 이를 지원하는 단말기
KR20130142315A (ko) 캐릭터 서비스 시스템 및 그의 캐릭터 서비스 제공 방법
KR20120119244A (ko) 컨텐츠 제작 방법, 이를 위한 시스템 및 이를 위한 단말기
KR20210081082A (ko) 객체의 모션 데이터 기반의 아바타 컨텐츠를 제공하는 서버, 방법 및 사용자 단말
KR20120103363A (ko) 가상 헤어 스타일링 서비스 시스템과 방법 및 이를 지원하는 단말기
CN111222041A (zh) 拍摄资源数据获取方法、装置、电子设备及存储介质
WO2016131226A1 (zh) 智能终端及其图像处理方法和装置
KR20120037712A (ko) 가상 미용체험 서비스 시스템 및 방법

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E601 Decision to refuse application