KR101514327B1

KR101514327B1 - 얼굴 아바타 생성 장치 및 방법

Info

Publication number: KR101514327B1
Application number: KR1020100109283A
Authority: KR
Inventors: 최윤석; 이지형
Original assignee: 한국전자통신연구원
Priority date: 2010-11-04
Filing date: 2010-11-04
Publication date: 2015-04-22
Also published as: KR20120047616A; US20120113106A1

Abstract

본 발명은 얼굴 사진에서 얼굴 특징점을 추출하고, 이를 기반으로 예술적 효과가 첨가된 개인 2D 아바타와 입체감 있는 3D 얼굴 아바타를 자동으로 생성할 수 있는 장치 및 방법에 관한 것이다.
이를 위하여 본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는 얼굴 사진을 입력받아 얼굴 특징 정보를 추출하는 얼굴 특징 정보 생성부와, 얼굴 특징 정보를 기반으로 얼굴 사진에서 적어도 하나 이상의 영역을 선택하여 과장 또는 미화시켜 2D 아바타 이미지를 생성하는 2D 아바타 생성부와, 얼굴 특징 정보와 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델의 비교를 통해 표준 3차원 얼굴 모델을 변형시켜 3차원 아바타 이미지를 생성하는 3D 아바타 생성부를 포함한다.

Description

얼굴 아바타 생성 장치 및 방법{METHOD AND APPARATUS FOR GENERATING FACE AVATAR}

본 발명은 얼굴 사진을 이용하여 대상 얼굴에 대한 개성있는 2차원 및 3차원 아바타를 생성에 관한 것으로 더욱 상세하게는 얼굴 사진에서 얼굴 특징점을 추출하고, 이를 기반으로 예술적 효과가 첨가된 개인 2D 아바타와 입체감 있는 3D 얼굴 아바타를 자동으로 생성할 수 있는 장치 및 방법에 관한 것이다.

현재 IT 분야에서 가장 큰 두 축인 인터넷과 휴대폰 기술의 발달과 그 시장이 급격하게 팽창하기 시작하였으며 최근 들어서는 무선 인터넷과 스마트폰으로 그 대세를 굳혀가고 있다.

사용자들은 인터넷을 단순히 정보를 취득하는 공간이 아닌 또 다른 세계로 인식하고 그 활용이 점점 더 증가하고 있게 되었다. 이러한 공간에서 사용자들은 자신을 대표하는 또 하나의 자신, 즉 아바타를 사용하기 시작하였다. 초기 인터넷에서는 단순하게 채팅 창에 텍스트로 표시되는 아이디가 자신을 대표하였지만, 하드웨어와 네트워크 인프라의 발달과 더불어 시각적인 요소가 강조되기 시작하면서 사진이나 3차원 모델과 같은 실질적인 아바타가 사용되었다. 실제로 게임 공간에서는 게임 개발자가 미리 제공하는 여러 모델 중에서 하나를 선택하고, 그 모델을 자신의 취향에 맞추어서 다양하게 변화시켜 자신의 아바타로 활용하였다. 그러나 이러한 모델 기반의 아바타는 정해진 패턴에서 선택해야 하며 이는 타인과 중복된 패턴을 소유하게 됨을 의미하였다.

기존에 많은 인터넷 서비스 사이트에서는 이와 유사한 서비스를 제공한다. 예를 들어 최근 가장 많은 인기를 끄는 소셜 네트워크인 "페이스북(Facebook)"에는 많은 플래쉬 기반의 가상 공간 게임을 제공하는데, 여기에서 제공하는 아바타는 머리색, 눈 모양, 머리 모양 등의 전체 얼굴의 특징을 조합하는 수준에서 제공하고 있다.

또 다른 인터넷 서비스인 가상 서비스인 "세컨드 라이프(Second Life)"나 구글의 "라이블리(Lively)"은 3차원 모델 기반의 가상 공간 서비스를 제공하고 있는데, 여기에서 제공하는 아바타 또한 서비스 제공자가 제공하는 모델 정보를 기반으로 여러가지 특징 정보를 조합하여 생성하는 형태로 제공하고 있으며 서비스 이용자 자신의 개성을 반영할 요소를 지원하지 못하고 있다. 결국 보기에는 이쁜 모델을 활용할 수 있지만, 가상 공간 어디엔가에는 자신과 똑같이 생긴 쌍둥이가 존재하는 것은 피할 수 없게 되는 것이다.

현재에는 모바일 인터넷과 스마트폰의 결합으로 이제 어디에서든지 인터넷 내의 가상 공간에서 활동함이 가능하게 됨에 따라 자신의 대리인인 아바타의 사용 빈도가 높아짐과 동시에 사용자들도 자신과 완전히 동떨어진 모델이 아니라, 자신을 특성을 반영하는 아바타를 갖고 싶어하는 욕구도 같이 증가하고 있다.

다양한 효과를 적용하여 남과 차별성이 있는 아바타를 소유하고 싶은 요구에 반응하면서 다양한 프로그램 환경에서 쉽게 활용할 수 있는 아바타의 생성 기술이 절실히 필요로 한다.

상기와 같은 필요성에 의해 안출된 것으로서, 본 발명의 목적은 사용자의 취향에 맞추어 개인의 특징을 잘 나타내는 아바타를 생성하는 방법을 지원하며 사용자들은 개인의 성향과 활동 공간에 따라 적당한 2차원 및 3차원 아바타를 생성하여 이를 활용함으로써 사이버 공간에서의 다양하고 특색 있는 자아를 표현할 수 있도록 하는 얼굴 아바타 생성 장치 및 방법을 제공하는데 있다.

본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 본 발명이 속하는 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.

본 발명의 일 측면에 따르면, 본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는, 얼굴 사진을 입력받아 얼굴 특징 정보를 추출하는 얼굴 특징 정보 생성부와, 상기 얼굴 특징 정보를 기반으로 상기 얼굴 사진에서 적어도 하나 이상의 영역을 선택하여 과장 또는 미화시켜 2D 아바타 이미지를 생성하는 2D 아바타 생성부와, 상기 얼굴 특징 정보와 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델의 비교를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 3차원 아바타 이미지를 생성하는 3D 아바타 생성부를 포함한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는 상기 얼굴 사진의 기하학적 정보를 수정하거나 상기 얼굴 사진의 색상을 보정하는 데이터 처리부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 얼굴 특징 정보 생성부는, 상기 얼굴 사진에서 얼굴 특징 정보를 추출하기 위해 양눈, 코, 입술 또는 얼굴 윤곽 영역 중 적어도 하나 이상을 지정하여 감지하는 자동 특징 인식부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 얼굴 특징 정보 생성부는, 상기 얼굴 사진에서 양눈, 코, 입술 또는 얼굴 윤곽 영역 중 적어도 하나 이상을 지정하여 얼굴의 제 1차 특징 정보를 추출하는 자동 특징 인식부와, 상기 제 1 차 특징 정보를 보정할 수 있는 인터페이스를 제공하며, 상기 인터페이스를 통해 보정된 제 1 차 특징 정보를 상기 얼굴 특징 정보로 추출하는 혼합 특징 인식부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 2D 아바타 생성부는, 기 저장된 통계 정보를 기반으로 상기 추출된 얼굴 특징 정보에 대응되는 상기 얼굴 사진의 소정 부분을 미화시키거나 상기 사용자의 입력에 의거하여 상기 소정 부분을 미화시켜 상기 2D 아바타 이미지를 생성하는 아바타 미화부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는 상기 2D 아바타 생성부에서 생성된 상기 2D 아바타 이미지에 대해서 일러스트, 카툰 또는 유화 중 적어도 하나 이상의 예술적 변환 기법을 적용하는 예술 효과 생성부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 3D 아바타 생성부는, 상기 얼굴 특징 정보와 기 저장된 표준 정보를 바탕으로 생성된 표준 3차원 얼굴 모델에 기 설정된 특징 정보간의 비교를 통해 차이를 계산하는 특징 차이 계산부와, 상기 차이를 바탕으로 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성한 후 이를 기반으로 상기 3D 아바타 이미지를 생성하는 모델 변형부를 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 모델 변형부는, 상기 표준 3차원 얼굴 모델과 상기 얼굴 특징 정보와의 비교하기 위해 왼쪽 눈, 오른쪽 눈, 코, 턱선 또는 입술 윤곽선 중 적어도 하나 이상의 정점을 지정할 수 있는 인터페이스를 제공하는 마킹 처리부와, 상기 인터페이스를 통해 지정된 정점들을 움직일 때 상기 3차원 얼굴 모델에서 변형되는 영역을 n개의 영역으로 구분하고, 상기 구분된 n개의 영역을 제어하는 영역 제어부를 포함하며, 상기 n개의 영역에 대한 제어를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 모델 변형부는, 상기 n개의 영역에 대해서 기 설정된 최대 및 최소값을 설정한 후 이를 토대로 2n개의 3차원 얼굴 모델을 생성하며, 상기 얼굴 특징 정보를 기반으로 상기 n개의 영역 각각에 대한 제어 변수를 계산한 후 상기 제어 변수로 상기 각 3차원 얼굴 모델을 보간하여 상기 변형된 표준 3차원 얼굴 모델을 생성하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는 사용자의 설정에 의거하여 상기 생성된 3D 아바타 이미지를 과장하거나 미화하는 3D 아바타 과장 및 미화부를 더 포함하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 3D 아바타 생성부는, 상기 변형된 3차원 얼굴 모델에 사실감을 부여하기 위한 얼굴의 텍스처를 생성하는 텍스처 생성부를 포함하며, 상기 생성된 얼굴의 텍스처와 상기 변형된 표준 3차원 얼굴 모델을 결합하여 상기 3D 아바타 이미지를 생성하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 텍스처 생성부는, 상기 변형된 표준 3차원 얼굴 모델의 정보와 상기 얼굴 사진을 포함한 3차원 장면 영상을 결합하여 상기 얼굴의 텍스처 정보를 추출하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 텍스처 생성부는, 상기 변형된 표준 3차원 얼굴 모델에 있는 텍스처 좌표를 기반으로 다각형 인덱스 이미지를 생성한 후 상기 다각형 인덱스 정보에 대응되는 다각형이 렌더링될 때 3차원 장면 영상 내의 대응 공간을 계산하고, 상기 다각형 인덱스 이미지 내 텍스처 공간의 다각형과 상기 3차원 장면 영상의 다각형에 대한 변환 과정을 상기 얼굴의 텍스처 정보를 생성하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 텍스처 생성부는,

상기 텍스처 공간의 삼각형과 상기3차원 장면 영상의 삼각형에 대한 변환 과정에서 선형 보간 함수를 사용하여 픽셀 값을 결정하는 것을 특징으로 한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 장치에서 상기 3D 아바타 생성부는, 상기 3D 아바타 이미지와 상기 생성된 텍스처를 다른 응용 프로그램이나 가상 환경에서 사용 가능하도록 표준 문서 포맷에 기반한 모델 익스포팅 기능을 제공하는 아바타 모델 기능부를 더 포함하는 것을 특징으로 한다.

본 발명의 다른 견지에서, 본 발명의 실시 예에 따른 얼굴 아바타 생성 방법은 외부로부터 입력받은 얼굴 사진의 기하학적 정보 또는 색상 정보를 수정한 후 이를 토대로 얼굴 특징 정보를 추출하는 단계와, 상기 얼굴 특징 정보를 기반으로 상기 얼굴 사진에서 적어도 하나 이상의 영역을 선택하여 과장 또는 미화시켜 2D 아바타 이미지를 생성하는 단계와, 상기 얼굴 특징 정보와 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델의 비교를 통해 상기 표준 3차원 얼굴 모델을 변형시켜3차원 아바타 이미지를 생성하는 단계를 포함한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 방법에서 상기 2D 아바타 이미지를 생성하는 단계는, 기 저장된 통계 정보와 상기 추출된 얼굴 특징 정보를 비교하는 단계와, 상기 비교 결과에 의거하여 상기 얼굴 특징 정보에 대응되는 상기 얼굴 사진의 소정 부분을 과장하거나, 미화시켜 상기 2D 아바타 이미지를 생성하는 단계를 포함한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 방법에서 상기 3D 아바타 이미지를 생성하는 단계는, 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델을 생성하고, 상기 생성된 표준 3차원 얼굴 모델의 특징 정보와 상기 얼굴 특징 정보를 비교하여 차이를 계산하는 단계와, 상기 차이를 기반으로 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성한 후 이를 기반으로 상기 3D 아바타 이미지를 생성하는 단계를 포함한다.

본 발명의 실시 예에 따른 얼굴 아바타 생성 방법은 상기 표준 3차원 얼굴 모델과 상기 얼굴 특징 정보와의 비교하기 위해 왼쪽 눈, 오른쪽 눈, 코, 턱선 또는 입술 윤곽선 중 적어도 하나 이상의 정점을 지정할 수 있는 인터페이스를 제공하는 단계와, 상기 인터페이스를 통해 지정된 정점들을 움직일 때 상기 3차원 얼굴 모델에서 변형되는 영역을 n개의 영역으로 구분하는 단계와, 상기 n개의 영역에 대한 제어를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성하여 상기 3D 아바타 이미지를 생성하는 단계를 포함한다.

본 발명의 실시 예는 인터넷이나 스마트폰 등을 이용한 사이버 공간 상에의 활동하면서 필요한 2D 및 3D 아바타를 손쉽게 생성할 수 있는 얼굴 아바타 생성 장치를 제공함과 더불어 생성된 이에 대해 다양한 예술적 효과를 적용할 수 있도록 함으로써, 사용자의 특색이 반영된 아바타를 생성할 수 있다.

또한, 본 발명의 실시 예는 가상 공간의 특성에 맞게 2 차원 이미지 또는 3차원 모델의 2가지 형태로 생성이 가능함에 따라 사용자들은 보다 다양한 가상 공간에서 자신의 아바타를 특성화 할 수 있는 효과가 있다.

본 발명의 실시 예는 아바타를 표준 형태로 저장하고, 서로 다른 공간에서도 해당 아바타를 공유할 수 있도록 지원함으로써, 서로 다른 사이버 공간에서 동일한 아바타를 유지할 수 있을 뿐만 아니라 가상 공간에서의 아바타의 역할 증대 효과를 기대할 수 있다.

도 1은 본 발명의 실시 예에 따른 얼굴 아바타 생성 장치를 도시한 블록도,
도 2a 내지 도 2d는 얼굴 특징 정보의 자동 추출을 위해 사진의 기하 정보를 수정하는 작업을 설명하기 위한 도면,
도 3a 내지 도 3c는 얼굴의 특징점을 추출하는 단계를 설명하기 위한 도면,
도 4a 내지 도 4c는 입력 사진에 대해서 추출된 특징을 이용하여 과장과 미화를 적용한 도면,
도 5는 과장 및 미화를 한 이미지에 예술적 효과를 적용하여 변환한 이미지를 보여주기 위한 도면,
도 6a는 3차원 아바타를 생성하기 위해 얼굴의 특징 및 변형을 위해 미리 지정해 놓은 8 부위를 표시한 도면,
도 6b는 도 6a에서 표시한 부분이 그대로 투영되어 있는 3차원 모델을 도시한 도면,
도 7은 3차원 얼굴 모델의 변형을 위해 사용되는 8개 특징 부분의 최대/최소 얼굴 모델을 도시한 도면,
도 8은 변형된 3차원 얼굴 모델을 기반으로 텍스처를 자동으로 생성하는 과정을 도시한 도면,
도 9 는 입력 사진으로부터 3차원 얼굴 모델을 변형하고, 이에 따라 텍스처를 생성한 다음에 이를 이용하여 3D 아바타를 생성하는 과정을 도시한 도면,
도 10 은 입력 사진으로부터 과장된 이미지를 생성하고, 이를 기반으로 3차원 메시를 변형하여 3D 아바타를 생성하는 과정을 도시한 도면이다.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.

본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.

또한, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시 예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.

이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 상세히 설명하기로 한다.

도 1은 본 발명의 실시 예에 따른 얼굴 아바타 생성 장치를 도시한 블록도이다.

도 1을 참조하면, 본 발명의 실시 예에 따른 얼굴 아바타 생성 장치는 데이터 처리부(100), 얼굴 특징 정보 생성부(110), 2D 아바타 생성부(120), 예술 효과 생성부(130), 3D 아바타 생성부(140) 및 3D 아바타 활용부(150) 등을 포함할 수 있다.

사용자들에 의해 제공되는 아바타 생성을 위한 데이터, 예컨대 얼굴 사진 데이터는 크기나 얼굴의 위치, 색상 등이 모두 각각 다르기 때문에 사진 데이터에서 사용자 얼굴에 대한 특징 정보를 추출하기에 적절하지 않기 때문에 데이터 처리부(100)는 사진 데이터에 대한 자료 처리 작업을 수행한다. 다시말해서, 데이터 처리부(100)는 전체 사진 데이터에서 원하는 부분만을 추출하거나 사진을 회전하여 얼굴 특징점을 추출하기 용아하도록 사전 작업을 수행하는데, 이를 위해 사진 데이터의 기하적인 정보를 수정하는 사진 기하 수정부(101) 및 사진 데이터 내의 색상 등을 수정하는 사진 색상 보정부(102) 등을 포함할 수 있다.

사진 기하 수정부(101)는 도 2a에 도시된 바와 같은 사진 데이터에서 도 2b에 도시된 바와 같이 원하는 부분을 추출하거나, 도 2c에 도시된 바와 같은 사진 데이터를 회전하여 도 2d에 도시된 바와 같은 데이터로 수정할 수 있다.

얼굴 특징 정보 생성부(110)는 데이터 처리부(100)에 의해 사전 작업 수행한 결과 데이터, 즉 사전 작업을 수행한 입력 사진들로부터 얼굴 특징 정보를 추출하는데, 이를 위하여 자동 특징 인식부(111), 사용자 지정 특징 인식부(112) 및 혼합 특징 인식부(113) 등을 포함할 수 있다.

자동 특징 인식부(111)는 기계 학습 기법을 기반으로 얼굴의 눈, 코, 입, 턱 등을 인식하도록 기계 학습 모듈을 구비하며, 기계 학습 모듈을 이용하여 얼굴의 특징 정보를 추출한다.

사용자 지정 특징 인식부(112)는 사용자로부터 입력받은 특징 정보를 기반으로 입력 사진들로부터 얼굴 특징 정보를 추출한다.

혼합 특징 인식부(113)는 자동 특징 인식부(111)의 결과에서 사용자가 직접 특징 정보를 보정할 수 있는 인터페이스를 제공하며, 인터페이스를 통해 보정된 특징 정보를 이용하여 얼굴 특징 정보를 추출한다.

본 발명의 실시 예에서는 자동 특징 인식부(111), 사용자 지정 특징 인식부(112) 및 혼합 특징 인식부(113) 중 어느 하나 또는 조합을 통해 얼굴의 특징 정보를 추출할 수 있다. 예를 들어, 자동 특징 인식부(111)는 기계 학습 모듈을 기반으로 하기에 계산 성능이 많이 필요하기 때문에 이를 스마트폰과 같은 휴대용 기기에 적합하지 않다. 이런 경우에는 사용자 지정 특징 인식부(112)를 이용하여 얼굴의 특징 정보를 추출하거나 스마트폰과 연결 가능한 서버(미도시됨)에 자동 특징 인식부(111)를 설치한 후 이를 이용하여 스마트폰으로부터 제공받은 입력 사진에 대한 얼굴 특징 정보를 추출할 수 있다.

얼굴 특징 정보 생성부(110)가 입력 사진에서 얼굴 특징 정보를 추출하는 예에 대해 도 3a 내지 도 3c를 참조하여 설명하면, 도 3a에 도시된 바와 같은 입력 사진, 즉 데이터 처리부(100)에 의해 사전 보정된 입력 사진은 자동 특징 인식부(111)의 기계 학습 모듈을 통해 도 3b에 도시된 바와 같이 눈, 코, 입술, 턱선 등의 특징이 추출된다. 추출된 특징의 정밀도를 높이기 위해서 사용자 지정 특징 인식부(112) 또는 혼합 특징 인식부(113)에서 제공되는 인터페이스를 통해 추출된 특징에서 원하는 부분에 대한 세부 특징을 수정할 수 있다. 예를 들어, 도 3b에서 눈 부분을 지정한 후 지정된 눈 부분을 도 3c에 도시된 바와 같이 세부 특징을 수정할 수 있다.

2D 아바타 생성부(120)는 추출된 얼굴 특징 정보를 기반으로 크게 과정과 미화 형태의 2D 아바타 이미지를 생성하는데, 이를 위하여 아바타 강조(과장)부(121), 아바타 성형(미화)부(122) 등을 포함할 수 있다.

아바타 과장부(121)는 입력 사진에서 추출한 얼굴 특징 정보를 기반으로 개성 있는 2D 아바타의 얼굴을 생성하는데, 과장을 위해서 얼굴 특징 정보를 이용한다. 예를 들어, 추출된 눈 정보가 미리 계산되어 저장되어 있는 여러 사람들의 평균적인 눈보다 작으면 눈의 크기를 줄이는 방식으로 2D 아바타의 얼굴을 생성하거나, 같은 방법으로 코가 큰 사람은 코를 크게 하여 과장된 이미지를 자동으로 생성할 수 있다.

아바타 미화부(122)는 눈이 작거나 코가 너무 큰 사람은 이를 단점으로 생각하는 경향이 있으므로 아바타 과장부(121)와는 반대로 적용하여 보기 좋게 보이는 아바타 이미지를 생성한다.

아바타 과장부(121) 및 아바타 미화부(122)가 아바타 이미지를 생성하는 예에 대해 도 4a 내지 도 4c를 참조하면, 도 4a에 도시된 바와 같은 얼굴 사진에서 볼의 넓이가 기 저장되어 있는 평균 값보다 큰 경우 아바타 과장부(121)는 도 4b에 도시된 바와 같이 볼을 넓히는 아바타 이미지를 생성하며, 아바타 미화부(122)는 도 4c에 도시된 바와 같이 볼을 좁힌 아바타 이미지를 생성한다.

이러한 아바타 과장 및 미화부(121, 122)는 기 저장된 통계 정보, 즉 사람들의 평균적인 볼 넓이, 눈 크기, 등을 이용할 수 있다.

예술 효과 생성부(130)는 2D 아바타 생성부(120)에서 생성된 2D 아바타 이미지를 기반으로 이를 예술적 변환 기법을 적용하여 보다 보기 좋은 아바타 이미지를 생성하는데, 이를 위하여 카툰 효과 처리부(131), 유화 효과 처리부(132) 및 일러스트 처리부(133) 등을 포함할 수 있다. 즉, 도 5에 도시된 바와 같이, 예술 효과 생성부(130)는 2D 아바타 생성부(120)에서 출력되는 과장과 미화된 아바타 이미지에 카툰, 유화, 목탄 등의 예술적 효과를 적용하여 변환한 이미지를 생성할 수 있다.

3D 아바타 생성부(140)는 입력 사진의 얼굴 부분에서 추출한 특징 정보를 기반으로 얼굴 사진을 닮은 3D 얼굴 메시를 생성하며, 사용자의 설정에 따라 입력으로 과장 또는 미화된 사진을 이용하여 과장 또는 미화된 3D 아바타 이미지를 생성할 수 있다. 다시말해서, 3D 아바타 생성부(140)는 예술 효과 생성부(130)에서 생성된 과장 또는 미화된 2D 아바타 이미지를 입력받아 과장 또는 미화된 3D 아바타 이미지를 생성할 수 있다.

이를 위하여 3D 아바타 생성부(140)는 특징 차이 계산부(141), 모델 변형부(142), 3D 아바타 강조(과장) 및 성형(미화)부(143) 등을 포함할 수 있다.

특징 차이 계산부(141)는 입력 사진의 얼굴부분에 대한 얼굴 특징 정보와 표준 정보를 기반으로 표준 3차원 얼굴 모델을 생성하고, 생성된 표준 3차원 얼굴 모델의 기 설정된 특징 정보과 얼굴 특징 정보 생성부(110)에서 제공받은 얼굴 특징 정보를 비교하여 그 차이를 계산한 후 이를 모델 변형부(142)에 제공한다.

모델 변형부(142)는 특징 차이 계산부(141)에서 계산된 특징 차이를 바탕으로 표준 3차원 얼굴 모델을 변형하여 입력 사진의 얼굴의 형태를 생성한다.

얼굴 표준 모델과 얼굴 사진에서 추출한 특징 정보와의 비교를 위하여 왼쪽 눈, 오른쪽 눈, 코, 턱선, 입술 윤곽선을 구성하는 정점들에 미리 마킹을 수행할 수 있는데, 이를 위하여 모델 변형부(142)는 표준 3차원 얼굴 모델과 얼굴 특징 정보와의 비교하기 위해 왼쪽 눈, 오른쪽 눈, 코, 턱선 또는 입술 윤곽선 중 적어도 하나 이상의 정점을 지정할 수 있는 인터페이스를 제공하는 마킹 처리부(142a)와, 인터페이스를 통해 지정된 정점들을 움직일 때 표준 3차원 얼굴 모델에서 변형되는 영역을 n개의 영역으로 구분하고, 구분된 n개의 영역을 제어하는 영역 제어부(142b)를 포함할 수 있다.

또한, 마킹 처리부(142a)는 각 특징점을 구성하는 정점을 움직일 수 있도록 하기 위한 인터페이스를 제공하며, 인터페이스를 통해 각 특징점을 구성하는 정점들에 대한 제어를 통해 표준 3차원 얼굴 모델을 변형시킬 수 있다. 얼굴 제어 인자는 눈 크기, 미간 넓이, 코 너비, 코 길이, 입 너비, 입 두께, 입 위치, 얼굴 윤곽선 등을 들 수 있으며, 마킹 처리부(142a)는 이러한 얼굴 제어 인자들을 제어하기 제어 변수를 제공하는 인터페이스를 제공하며, 사용자가 인터페이스를 통해 제어 변수를 지정함에 따라 표준 3차원 얼굴 모델인 3D 메시를 변형시킬 수 있다.

다시 말해서, 모델 변형부(142)는 8개의 영역에 대해서 기 설정된 최대 및 최소값을 설정한 후 이를 토대로 16개의 3차원 얼굴 모델을 생성하며, 얼굴 특징 정보를 기반으로 8개의 영역 각각에 대한 제어 변수를 계산한 후 제어 변수로 각 3차원 얼굴 모델을 보간하여 변형된 표준 3차원 얼굴 모델을 생성할 수 있다. 예를 들어, 도 7에 도시된 바와 같이, 모델 변형부(142)는 얼굴의 형태에 대응되는 3차원 얼굴 모델(변형된 표준 3차원 얼굴 모델)을 생성하기 위해 얼굴 제어 인자, 예컨대 8개의 얼굴 제어 인자에 따라 생성한 8쌍의 최대 및 최소 3차원 얼굴 모델을 생성한 후 이를 제어 변수에 의거하여 각 3차원 얼굴 모델을 보간하여 최종적인 얼굴 형태의 얼굴 모델을 생성할 수 있다.

3D 아바타 과장 및 미화부(143)는 얼굴 특징 부분을 조절할 수 있는 인터페이스를 제공하며, 인터페이스를 통한 사용자의 입력을 토대로 변형된 얼굴을 생성한다. 다시말해서, 도 6a에 도시된 바와 같이, 얼굴 사진에 8개의 부위를 표시한 후 이와 대응하는 3차원 얼굴 모델 정보에는 변형의 원활함을 위해 도 6b에 도시된 바와 같이, 그 정점 색상을 각 부위에 대응하도록 지정한다.

3D 아바타 활용부(150)는 생성된 3D 아바타를 활용할 수 있도록 하기 위해 3D 아바타에 효과를 부여하는 것으로, 자동 텍스처 생성부(151) 및 아바타 모델 기능부(152) 등을 포함할 수 있다.

자동 텍스처 생성부(151)는 변형된 표준 3차원 얼굴 모델에 사실감을 부여하기 위해 얼굴의 텍스처를 생성하는데, 다시 말해서 생성된 3D 아바타를 사용할 때, 사실감이 느껴지도록 작업이 필요할 때 얼굴의 텍스처를 생성한다. 이에 따라, 3D 아바타 생성부(140)는 얼굴의 텍스처와 변형된 3차원 얼굴 모델을 결합하여 3D 아바타 이미지를 생성할 수 있다. 더욱 상세하게, 3차원 모델을 화면에 출력하는 기법을 렌더링이라 하는데, 모델의 사실감은 렌더링 작업에 달려있다. 렌더링 작업의 여러 요소 중에서 가장 편리하면서도 쉽게 사실감을 높일 수 있는 작업이 텍스처 매핑 기법이다. 이는 3차원 모델에서 정점이나 광원의 밝기 등을 계산하기 보다 수식이나 2차원의 그림을 삼차원 물체의 표면에 여러 가지 방법을 통하여 적용하고 이에 따라 컴퓨터 그래픽 화면을 만들어 나갈 때 마치 실제의 물체처럼 느껴지게끔 그 세부 묘사를 하는 기법이다. 본 발명의 실시 예에서는 이 작업을 수행하기 위해 도 8과 같은 기법을 사용할 수 있다.

사실 텍스처 매핑 기법은 3차원 모델을 화면에 출력할 때, 해당 모델의 색상을 2차원 이미지에서 읽어와 주변 정보를 혼합하여 화면에 출력하는 것이다. 본 발명의 실시 예에서는 이를 역으로 하여 이미 출력된 도 8에 도시된 바와 같은 3차원 장면 영상(810)을 기반으로 2차원 텍스처 이미지(850)를 자동으로 생성한다. 이를 위하여, 먼저 변형된 표준 3차원 얼굴 모델에 있는 텍스처 좌표(800)을 기반으로 표준 3차원 얼굴 모델의 다각형 인덱스 파일(820)을 생성한다. 여기에서, 다각형 인덱스 파일은 표준 3차원 얼굴 모델 정보를 기반으로 텍스처 공간을 점유하는 3차원 모델의 다각형의 정보를 저장하는 것이다. 다각형 인덱스 파일(820)에서 색상이 없는 공간은 할당된 3차원 다각형이 없음을 의미하고, 색상이 칠해져 있는 부분은 다각형의 인덱스 값을 색상화하여 표시한 것을 의미한다. 이때 텍스처의 각 좌표의 색상(T(u, v)) 값은 미리 저장된 다각형 인덱스 정보(820)를 기반으로 결정할 수 있으며 다각형이 렌더링 되었을 때의 3차원 장면 영상(810) 내의 대응되는 공간, 즉 대응 공간(830)을 추적한다. 이와 같이 대응 공간(830)을 계산한 다음에 다각형 인덱스 파일(820) 내 텍스처 공간의 삼각형 부분과 렌더링된 3차원 장면 영상(810) 내의 삼각형(830)에 대한 변환 과정(840)을 통해 최종 텍스처 영상인 2차원 텍스처 이미지(850)을 생성한다. 여기에서, 텍스처 공간의 삼각형 부분과 3차원 장면 영상(810) 내의 삼각형(830)에 대한 대응 변환 과정에서 선형 보간 함수를 사용하여 모든 픽셀의 값을 결정함으로써, 텍스처 공간과 3차원 장면 영상간 랜더링 공간의 차이로 인한 이산 오류를 방지할 수 있다.

도 9에 도시된 바와 같이, 최종적으로 얼굴 사진에서의 특징을 기반으로 입력된 표준 3차원 얼굴 모델을 변형하여 생성한 3차원 얼굴 모델(910)과 자동 생성한 텍스처(920)을 활용하여 입력 사진을 반영한 3차원 아바타 이미지(930)을 편리하게 생성할 수 있다.

또한, 도 10에 도시된 바와 같이, 입력 사진에 과장 이미지(1000)를 사용하고, 과장 이미지를 기반으로 표준 3차원 얼굴 모델을 변형하여 생성한 3차원 얼굴 모델(1010)과 자동 생성한 텍스처(1020)을 활용하여 과장 이미지를 반영한 3차원 아바타 이미지(1030)를 손쉽게 생성할 수 있다.

아바타 모델 기능부(152)는 3D 아바타 이미지와 생성된 텍스처를 다른 응용 프로그램이나 가상 환경에서 사용 가능하도록 표준 문서 포맷에 기반한 모델 익스포팅 기능을 제공한다.

본 발명의 실시 예에 따르면, 사용자들은 인터넷이나 스마트폰 등을 이용한 사이버 공간 상에의 활동하면서 필요한 2D 및 3D 아바타를 손쉽게 생성할 수 있을 뿐만 아니라 생성된 아바타에 대해 다양한 예술적 효과를 적용함으로써 개인의 특색이 반영된 아바타를 생성할 수 있다.

이상 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 예를 들어 당업자는 각 구성요소의 재질, 크기 등을 적용 분야에 따라 변경하거나, 개시된 실시형태들을 조합 또는 치환하여 본 발명의 실시예에 명확하게 개시되지 않은 형태로 실시할 수 있으나, 이 역시 본 발명의 범위를 벗어나지 않는 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것으로 한정적인 것으로 이해해서는 안 되며, 이러한 변형된 실시예들은 본 발명의 특허청구범위에 기재된 기술사상에 포함된다고 하여야 할 것이다.

100 : 데이터 처리부
110 : 얼굴 특징 정보 생성부
120 : 2D 아바타 생성부
130 : 예술 효과 생성부
140 : 3D 아바타 생성부
150 : 3D 아바타 활용부

Claims

얼굴 사진을 입력받아 얼굴 특징 정보를 추출하는 얼굴 특징 정보 생성부와,
상기 얼굴 특징 정보를 기반으로 상기 얼굴 사진에서 적어도 하나 이상의 영역을 선택하여 선택된 영역을 강조하거나 선택된 영역을 성형하여 2D 아바타 이미지를 생성하는 2D 아바타 생성부와,
상기 얼굴 특징 정보와 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델의 비교를 통해 상기 표준 3차원 얼굴 모델을 변형시켜3차원 아바타 이미지를 생성하는 3D 아바타 생성부를 포함하고,
상기 3D 아바타 생성부는,
상기 얼굴 특징 정보와 기 저장된 표준 정보를 바탕으로 생성된 표준 3차원 얼굴 모델에 기 설정된 특징 정보간의 비교를 통해 차이를 계산하는 특징 차이 계산부와,
상기 차이를 바탕으로 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성한 후 이를 기반으로 상기 3D 아바타 이미지를 생성하는 모델 변형부를 포함하고,
상기 모델 변형부는,
상기 표준 3차원 얼굴 모델과 상기 얼굴 특징 정보와의 비교하기 위해 왼쪽 눈, 오른쪽 눈, 코, 턱선 또는 입술 윤곽선 중 적어도 하나 이상의 정점을 지정할 수 있는 인터페이스를 제공하는 마킹 처리부와,
상기 인터페이스를 통해 지정된 정점들을 움직일 때 상기 표준 3차원 얼굴 모델에서 변형되는 영역을 n개의 영역으로 구분하고, 상기 구분된 n개의 영역을 제어하는 영역 제어부를 포함하며,
상기 n개의 영역에 대한 제어를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 얼굴 사진의 기하학적 정보를 수정하거나 상기 얼굴 사진의 색상을 보정하는 데이터 처리부를 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 얼굴 특징 정보 생성부는,
상기 얼굴 사진의 소정 부분을 지정할 수 있는 인터페이스를 제공하며, 상기 인터페이스를 통해 지정된 소정 부분을 상기 얼굴 특징 정보로 추출하는 사용자 지정 특징 인식부를 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 얼굴 특징 정보 생성부는,
상기 얼굴 사진에서 양눈, 코, 입술 또는 얼굴 윤곽 영역 중 적어도 하나 이상을 지정하여 얼굴의 제 1차 특징 정보를 추출하는 자동 특징 인식부와,
상기 제 1 차 특징 정보를 보정할 수 있는 인터페이스를 제공하며, 상기 인터페이스를 통해 보정된 제 1 차 특징 정보를 상기 얼굴 특징 정보로 추출하는 혼합 특징 인식부를 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 2D 아바타 생성부는,
기 저장된 통계 정보를 기반으로 상기 추출된 얼굴 특징 정보에 대응되는 상기 얼굴 사진의 소정 부분을 성형하여 상기 2D 아바타 이미지를 생성하는 아바타 성형부를 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 2D 아바타 생성부에서 생성된 상기 2D 아바타 이미지에 대해서 일러스트, 카툰 또는 유화 중 적어도 하나 이상의 변환 기법을 적용하는 예술 효과 생성부를 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
삭제
삭제
제 1 항에 있어서,
상기 모델 변형부는,
상기 n개의 영역에 대해서 기 설정된 최대 및 최소값을 설정한 후 이를 토대로 2n개의 3차원 얼굴 모델을 생성하며, 상기 얼굴 특징 정보를 기반으로 상기 n개의 영역 각각에 대한 제어 변수를 계산한 후 상기 제어 변수로 상기 각 3차원 얼굴 모델을 보간하여 상기 변형된 표준 3차원 얼굴 모델을 생성하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
사용자의 설정에 의거하여 상기 생성된 3D 아바타 이미지의 특징을 강조하 거나 상기 생성된 3D 아바타 이미지를 성형하는 3D 아바타 과장 및 미화부를 더 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 1 항에 있어서,
상기 3D 아바타 생성부는,
상기 변형된 표준 3차원 얼굴 모델에 사실감을 부여하기 위한 얼굴의 텍스처를 생성하는 텍스처 생성부를 포함하며,
상기 생성된 얼굴의 텍스처와 상기 변형된 표준 3차원 얼굴 모델을 결합하여 상기 3D 아바타 이미지를 생성하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 11 항에 있어서,
상기 텍스처 생성부는,
상기 변형된 표준 3차원 얼굴 모델의 정보와 상기 얼굴 사진을 포함한 3차원 장면 영상을 결합하여 상기 얼굴의 텍스처 정보를 추출하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 11 항에 있어서,
상기 텍스처 생성부는,
기 출력된 3차원 장면 영상을 기반으로 2차원 텍스처 이미지를 생성함에 있어서,
상기 변형된 표준 3차원 얼굴 모델에 있는 텍스처 좌표를 기반으로 다각형 인덱스 이미지를 생성한 후 상기 다각형 인덱스 이미지에 대응되는 다각형이 렌더링될 때 상기 3차원 장면 영상 내의 대응 공간을 계산하고, 상기 다각형 인덱스 이미지 내 텍스처 공간의 다각형과 상기 3차원 장면 영상의 다각형에 대한 변환 과정에서 상기 얼굴의 텍스처 정보를 생성하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 13 항에 있어서,
상기 텍스처 생성부는,
상기 텍스처 공간의 삼각형과 상기3차원 장면 영상의 삼각형에 대한 변환 과정에서 선형 보간 함수를 사용하여 픽셀 값을 결정하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
제 11항에 있어서,
상기 3D 아바타 생성부는,
상기 3D 아바타 이미지와 상기 생성된 텍스처를 적어도 두개 이상의 응용 프로그램이나 가상 환경에서 사용 가능하도록 표준 문서 포맷에 기반한 모델 익스포팅 기능을 제공하는 아바타 모델 기능부를 더 포함하는 것을 특징으로 하는
얼굴 아바타 생성 장치.
외부로부터 입력받은 얼굴 사진의 기하학적 정보 또는 색상 정보를 수정한 후 이를 토대로 얼굴 특징 정보를 추출하는 단계와,
상기 얼굴 특징 정보를 기반으로 상기 얼굴 사진에서 적어도 하나 이상의 영역을 선택하여 선택된 영역을 강조하거나 선택된 영역을 성형하여 2D 아바타 이미지를 생성하는 단계와,
상기 얼굴 특징 정보와 기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델의 비교를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 3차원 아바타 이미지를 생성하는 단계를 포함하고,
상기 3차원 아바타 이미지를 생성하는 단계는
상기 변형된 표준 3차원 얼굴 모델에 사실감을 부여하기 위한 얼굴의 텍스처를 생성하는 단계와,
상기 생성된 얼굴의 텍스처와 상기 변형된 표준 3차원 얼굴 모델을 결합하여 3D 아바타 이미지를 생성하는 단계와,
상기 3D 아바타 이미지와 상기 생성된 텍스처를 적어도 두개 이상의 응용 프로그램이나 가상 환경에서 사용 가능하도록 표준 문서 포맷에 기반한 모델 익스포팅 기능을 제공하는 단계와,
상기 표준 3차원 얼굴 모델과 상기 얼굴 특징 정보를 비교하기 위해 왼쪽 눈, 오른쪽 눈, 코, 턱선 또는 입술 윤곽선 중 적어도 하나 이상의 정점을 지정할 수 있는 인터페이스를 제공하는 단계와,
상기 인터페이스를 통해 지정된 정점들을 움직일 때 상기 3차원 얼굴 모델에서 변형되는 영역을 n개의 영역으로 구분하는 단계와,
상기 n개의 영역에 대한 제어를 통해 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성하여 상기 3D 아바타 이미지를 생성하는 단계를 포함하는
얼굴 아바타 생성 방법.
제 16 항에 있어서,
상기 2D 아바타 이미지를 생성하는 단계는,
기 저장된 통계 정보와 상기 추출된 얼굴 특징 정보를 비교하는 단계와,
상기 비교 결과에 의거하여 상기 얼굴 특징 정보에 대응되는 상기 얼굴 사진의 소정 부분의 특징을 강조하거나, 상기 소정부분을 성형하여 상기 2D 아바타 이미지를 생성하는 단계를 포함하는
얼굴 아바타 생성 방법.
제 16 항에 있어서,
상기 3D 아바타 이미지를 생성하는 단계는,
기 저장된 표준 정보를 기반으로 표준 3차원 얼굴 모델을 생성하고, 상기 생성된 표준 3차원 얼굴 모델의 특징 정보와 상기 얼굴 특징 정보를 비교하여 차이를 계산하는 단계와,
상기 차이를 기반으로 상기 표준 3차원 얼굴 모델을 변형시켜 상기 얼굴 사진의 얼굴 형태를 생성한 후 이를 기반으로 상기 3D 아바타 이미지를 생성하는 단계를 포함하는
얼굴 아바타 생성 방법.
삭제