KR20030029638A - 무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을생성하기 위한 방법 및 시스템 - Google Patents

무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을생성하기 위한 방법 및 시스템 Download PDF

Info

Publication number
KR20030029638A
KR20030029638A KR10-2003-7001108A KR20037001108A KR20030029638A KR 20030029638 A KR20030029638 A KR 20030029638A KR 20037001108 A KR20037001108 A KR 20037001108A KR 20030029638 A KR20030029638 A KR 20030029638A
Authority
KR
South Korea
Prior art keywords
avatar
head image
animation
image
generating
Prior art date
Application number
KR10-2003-7001108A
Other languages
English (en)
Inventor
패스퀄리 아고스티노 노세라루시아노
네벤하무트
Original Assignee
아이매틱 인터페이시즈, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아이매틱 인터페이시즈, 인크. filed Critical 아이매틱 인터페이시즈, 인크.
Publication of KR20030029638A publication Critical patent/KR20030029638A/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 무표정 얼굴 이미지를 사용한 아바타 애니메이션 변환을 생성하는 방법 및 시스템으로 실현된다. 아바타 편집기는 아바타를 생성하기 위해 무표정 얼굴 모델의 앞 머리 이미지 및 옆 머리 이미지를 사용한다. 아바타는 일래스틱 번치 그래프 매칭을 사용하여 앞 머리 이미지 및 상기 옆 머리 이미지 상의 머리 특징 위치들을 자동으로 찾음으로써 생성된다. 무표정 얼굴 특징들로부터 나온 아바타 메시를 일반적인 아바타 메시에 관계시키는 애니메이션 변환을 생성함으로써 현저한 시간감축이 달성될 수 있다. 무표정 얼굴 특징들에 대한 애니메이션 변환은 얻어진 아바타의 질을 향상시키기 위해 다른 얼굴 표정 아바타 메시들에 적용될 수 있다. 무표정 얼굴 기반의 애니메이션 변환은 각각의 특정한 얼굴 표정(및/또는 자세) 특징에 대한 특정의 애니메이션 변환을 생성함으로써 발생되는 현저한 편집시간 없이도 얼굴 표정 머리 모델들에 현저한 향상을 제공한다.

Description

무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을 생성하기 위한 방법 및 시스템{Method and system for generating an avatar animation transform using a neutral face image}
아바타들로 채워지는 가상공간들은 공유 환경을 체험할 수 있게 하는 흥미를끄는 방법이다. 그러나, 일반적으로, 사진처럼 실제적인 아바타의 수동적인 생성은 시간 소비적이며, 자동 아바타 생성은 아티팩트들 및 특징 왜곡이 되기 쉽다.
따라서, 아바타 머리 모델을 신속하고 신뢰성 있게 생성하는 아바타 편집기에 대한 필요성이 존재한다. 본 발명은 이러한 필요성을 만족시킨다.
관련된 출원들의 크로스 레퍼런스
본 출원은 2000년 7월 24일에 출원된 발명의 명칭이 "METHOD AND SYSTEM FOR GENERATING AN AVATAR ANIMATION TRANSFORM USING A NEUTRAL FACE IMAGE"인 US 임시 출원 시리얼 번호60/220,330에 대한 U.S.C. §119(e)(1) 및 37 C.F.R. §1.78(a)(4) 하의 우선권을 주장하고, 1998년 11월 6일에 출원된 발명의 명칭이 "WAVELET-BASED FACIAL MOTION CAPTURE FOR AVATAR"인 US 특허출원 시리얼 넘버 09/188,079에 대한 부분 계속출원으로서 35 U.S.C. §120 및 37 C.F.R. §1.78(a)(2) 하의 우선권을 주장한다. US 특허 출원 시리얼 번호 09/188,079의 전체 개시는 참조문헌으로써 본 명세서에 포함된다.
본 발명은 아바타 애니메이션에 관한 것으로, 특히 무표정 얼굴 이미지를 사용한 애니메이션 변환의 생성에 관한 것이다.
도 1은 본 발명에 따라서, 무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을 생성하는 방법을 도시한 흐름도.
도 2는 본 발명에 따라서, 아바타를 생성하기 위한 아바타 편집기의 이미지를 보여주는 도면.
도 3은 도 2의 아바타 편집기에 의해 제공된 연결점들을 사용하여 생성된 아바타의 뒷 모습의 이미지를 보여주는 도면.
도 4는 본 발명에 따라서, 아바타 이미지로부터 아티팩트들 및 왜곡들을 제거하기 위해 정정된 연결점 위치들을 사용하여 아바타를 생성하기 위한 아바타 편집기의 이미지를 보여주는 도면.
도 5는 본 발명에 따라서, 도 4에 도시한 정정된 연결점 위치들을 사용하여 생성된 아바타의 뒷 모습의 이미지를 보여주는 도면.
도 6은 감지된 특징들을 아바타 메시에 선형 리그레션 매핑하기 위한 아바타 메시에 대한 얼굴 표정 특징들의 그래프.
발명의 요약
본 발명은 무표정(neutral) 얼굴 이미지를 사용한 아바타 애니메이션 변환을 생성하는 방법, 및 관계된 시스템으로 실현된다. 본 방법은 아바타를 생성하기 위해 무표정 얼굴의 앞 머리 이미지 및 옆 머리 이미지를 제공하고, 일래스틱 번치 그래프 매칭(elastic bunch graph matching)을 사용하여 상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 머리 특징 위치들을 자동으로 찾는 것을 포함한다. 노드들은 앞 머리 이미지 및 옆 머리 이미지 상의 특징 위치들에 자동으로 위치된다. 노드 위치들은 노드 위치들에 근거하여 생성되는 아바타 내에서 아티팩트들을 제거하고 왜곡된 특징들을 최소화하기 위해서 수동으로 검토되고 정정된다.
본 방법은 무표정 얼굴에 대해 정정된 노드 위치들에 근거하여 애니메이션 변환을 생성하는 것을 포함하다. 방법은 또한 아바타를 생성하기 위해 애니메이션 변환을 표정 얼굴 아바타 메시들(expression face avatar meshes)에 적용하는 것을 포함한다.
본 발명의 다른 특징들 및 이점들은 본 발명의 원리를 예로서 도시한 첨부한도면들과 함께 취해진 바람직한 실시예들에 대한 다음의 설명으로부터 명백할 것이다.
본 발명은 도 1에 도시한 방법, 및 무표정 얼굴 이미지 사용한 애니메이션 변환을 생성하는 시스템으로 구현된다. 아바타 편집기는 아바타를 생성하기 위해서 무표정 얼굴 모델의 앞 머리 이미지 및 옆 머리 이미지를 사용한다(블록 12).아바타는 일래스틱 번치 매칭을 사용하여 앞 머리 이미지와 옆 머리 이미지 상의 얼굴 특징 위치들을 자동으로 찾는 것에 의해 생성된다(블록 14). 일래스틱 번치 그래프 매칭을 사용하여 이미지 내 특징들을 찾는 것은 미국특허 출원번호 09/188,079에 개시되어 있다. 일래스틱 그래프 매칭 기술에서, 이미지는 가보 웨이브렛들(Gabor wavelets)에 기초한 웨이브렛 변환들을 사용하여 가보 공간으로 변환된다. 변환된 이미지는 원 이미지의 각 화소에 연관된 복소(complex) 웨이브렛 성분의 값들로 나타내어진다. 일래스틱 번치 그래프 매칭은 연결점들(anchor points)을 갖는 노드 그래픽들을 각각 앞 머리 이미지와 옆 머리 이미지 상에 놓는다. 연결점들은 매칭 프로세스를 사용하여 발견된 얼굴 특징들의 일반적인 위치에 놓여진다(블록 16).
도 2에 도시된 아바타 편집기 윈도우(26)를 사용해서 사용자는 모델과 유사하게 보이게 나타나는 아바타를 생성할 수 있다. 새로운 아바타(28)는 모델의 앞 머리 이미지(30)와 옆 머리 이미지(32)에 근거하여 생성된다. 대안으로, 기존의 아바타를 사용자가 만족할 수 있게 편집할 수도 있다. 앞 머리 이미지와 옆 머리 이미지는 아바타 메시(mesh)에 매핑된다. 아바타는 메시 상의 구동 제어 점들을 이동시킴으로써 애니메이트되거나 구동될 수 있다. 구동 제어 점들의 이동은 얼굴 특징 추적에 의해 방향이 정해질 수 있다.
처음에, 아바타 편집기 윈도우(26)는 사용자에게 아바타 추적기의 추적 정확성을 향상시킬 수 있게 하는 일련의 단계들을 통해 사용자를 안내하는 위자드(wizard)(도시 없음)를 포함한다. 아바타 위자드는 사용자에게 많은 표정들을 짓게 하고 변하는 머리 자세들을 취하게 하는 튜터(tutor) 얼굴을 포함할 수 있다. 각각의 표정 혹은 자세마다의 이미지가 취해지고 얼굴 특징들은 각 얼굴 이미지에 대해 자동으로 찾아진다. 그러나, 이미지의 어떤 아티팩트들로 인해서 특징 프로세스는 특징 노드들을 오류 위치들에 배치하게 할 수도 있다. 또한, 올바른 노드 위치들은 사진처럼 실제적인 아바타를 경감시키는 아티팩트들을 발생할 수도 있다. 따라서, 사용자는 자동으로 찾아진 특징들의 위치들을 수동으로 정정할 기회가 있다(블록 18).
예를 들면, 도 2에 도시한 앞 머리 이미지 및 옆 머리 이미지는 옆 머리 이미지(32)의 프로파일 윤곽으로서 잘못 검출된 쉐도우(shadow) 윤곽을 갖는다. 모델의 양 귀와 같은 어떤 특징들은 오류 노드 배치를 야기할 수도 있는 많은 패턴들을 갖고 있다. 양 눈에 대한 노드와 잎에 대한 노드를 올바르게 배치하는 것이 특히 중요하다. 아바타(28)는 양 눈 및/또는 잎을 벌리고 있는 동안 "노출"되는 인위적 눈 및 치아 삽입물들을 가질 수도 있다. 따라서, 매칭 프로세스가 노드들을 정확하게 배치할 수 있을지라도, 결과적인 아바타는 경감된 특징들을 가질 수도 있다.
노드 위치들의 실험적인 조정에 의해서 보다 사진과 같은 실제적인 아바타로 될 수도 있다. 예로서, 도 3에 도시한 아바타(28)의 뒷 모습은 도 2의 아바타 편집기 윈도우(26)에 도시된 노드 위치들을 사용하여 생성된다. 특히 경감시키는 아티팩트는 머리 뒤쪽의 흰색 패치(white patch:34)이다. 흰색 패치는 자동으로 놓여지는 노드 위치들로 인해서 옆 머리 이미지(32)의 흰색 배경의 부분이 아바타 뒤에 패치되기 때문에 나타난다.
부정확하게 놓여진 노드들은 대응하는 특징들에 노드들의 보다 정확한 배치를 위해서, 도 4에 도시한 바와 같이, 수동으로 조정될 수도 있다. 일반적인 머리 모델들(36, 38)은 사용자가 앞 머리 이미지와 옆 머리 이미지 상에 노드 위치들을 정확하게 배치할 수 있도록 나타내어진 노드 위치들을 갖는다. 노드는 노드 상의 마우스와 같은 포인터를 클릭하고 이 노드를 원하는 위치로 끌고 감으로써 이동된다. 아바타(28')의 앞 모습으로써 보인 바와 같이, 정정된 노드 위치들에 근거한 아바타는 보다 사진과 같이 실제적인 아바타이다. 또한, 옆 머리 이미지 상의 머리 뒤쪽에 노드 위치들은 도 5에 도시된 바와 같이 경감시키는 흰색이 패치를 제거하도록 조정된다.
도 2-5에 도시한 모델 이미지들은 무표정의 얼굴이다. 전술한 바와 같이, 다양한 얼굴 표정 및 자세에 대한 이미지들은 얼굴 표정들을 훈련한 것을 사용하여 획득된다. 도 6에 도시된 바와 같이, 얼굴 표정 특징들()이 감지되고, 결과적인 파라미터들은 변환 T에 의해 대응하는 아바타 메시들()에 매핑될 수 있다. 다양한 얼굴 표정들에 대응하는 몇몇의 아바타 메시들을 사용함으로써, 감지된 얼굴 표정들을 보다 정확히 묘사할 수 있게 된다. 상이한 표정들에 대한 메시들을 모프 타겟(morph target)들이라 한다. 예를 들면, 하나의 아바타 메시()은 미소짓는 얼굴 이미지들로부터의 특징들()을 사용하여 생성될 수 있다. 또 다른 아바타 메시()는 놀람 혹은 감탄을 나타내는 얼굴 이미지들로부터의 얼굴특징들()을 사용하여 생성될 수 있다. 마찬가지로, 무표정의 얼굴 특징들()은 아바타 메시()에 대응한다. 감지된 얼굴 특징들()은 선형 리그레션(linear regression)을 사용하여 대응하는 아바타 메시()에 매핑될 수 있다.
보다 사진과 같은 실제적인 효과를 위해서, 각 표정에 대한 노드 위치들은 수동으로 검토되어야 하고 각각에 대해 제기된 아티팩트들 및 왜곡들을 모델화할 수 있다. 그러나, 실험적인 경험에 따르면 각 아바타 머리 모델에 대한 정정엔 몇분간의 편집 시간이 걸릴 수도 있음을 보였다. 사진과 같은 실제적인 아바타는 14 내지 18가지만큼의 많은 표정에 기반한 아바타 메시들을 필요로 할 수 있다.
무표정의 얼굴 특징들()을 사용하여 애니메이션 변환 ρ을 생성함으로써 현저한 시간 감축이 달성될 수 있다(블록20 - 도1). 결과적인 아바타 메시(MT NEUTRAL)는 식(1)에 나타낸 바와 같은 아바타 변환에 의해 일반적인 아바타 메시(MG NEUTRAL)에 관계된다.
MT NEUTRAL= ρㆍ MG NEUTRAL식(1)
무표정 얼굴 특징들에 대한 애니메이션 변환은 결과적인 아바타들의 질을 향상시키기 위해서 다른 얼굴 표정 아바타 메시들에 적용될 수 있다(블록 22). 예를 들면, 미소에 연관된 아바타 메시는 식(2)에 나타낸 바와 같은 무표정 얼굴 애니메이션 변환 ρ에 의해 변환될 수 있다.
MT SMILE= ρㆍ MG SMILE식(2)
무표정 얼굴 기반의 애니메이션 변환은 각각의 특정한 얼굴 표정(및/또는 자세) 특징에 대한 특정의 애니메이션 변환을 생성함으로써 발생되는 현저한 편집시간 없이도 얼굴 표정 머리 모델들에 현저한 향상을 제공한다.
비록 전술한 바는 본 발명의 바람직한 실시예들을 개시한 것이지만, 이 기술에 숙련된 자들은 본 발명의 범위에서 일탈함이 없이 바람직한 실시예들에 여러 가지 변경들을 행할 수 있음을 알 것이다. 본 발명은 다음의 청구범위들에 의해서만 정해진다.

Claims (13)

  1. 아바타(avatar) 애니메이션 변환을 생성하기 위한 방법에 있어서,
    아바타를 생성하기 위해 무표정 얼굴의 앞 머리(front head) 이미지 및 옆 머리(side head) 이미지를 제공하는 단계;
    일래스틱 번치 그래프 매칭(elastic bunch graph matching)을 사용하여 상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 머리 특징 위치들을 자동으로 찾는 단계;
    상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 특징 위치들에 노드들(nodes)을 자동으로 위치시키는 단계; 및
    상기 노드 위치들에 근거하여 생성되는 아바타 내에서 아티팩트들(artifacts)을 제거하고 왜곡된 특징들을 최소화하기 위해서 상기 노드 위치들을 수동으로 검토하여 정정하는 단계를 포함하는, 아바타 애니메이션 변환 생성 방법.
  2. 제1항에 있어서, 상기 무표정 얼굴에 대한 상기 정정된 노드 위치들에 근거하여 애니메이션 변환을 생성하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  3. 제2항에 있어서, 상기 아바타를 생성하기 위해 상기 애니메이션 변환을 표정얼굴 아바타 메시들(meshes)에 적용하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  4. 제2항에 있어서, 상기 애니메이션 변환을 모프 타겟들(morph targets)에 적용하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  5. 아바타 애니메이션 변환을 생성하는 시스템에 있어서,
    아바타를 생성하기 위해 무표정 얼굴의 앞 머리 이미지 및 옆 머리 이미지를 제공하기 위한 수단;
    일래스틱 번치 그래프 매칭을 사용하여 상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 머리 특징 위치들을 자동으로 찾기 위한 수단;
    상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 특징 위치들에 노드들을 자동으로 위치시키기 위한 수단; 및
    상기 노드 위치들에 근거하여 생성되는 아바타 내에서 아티팩트들을 제거하고 왜곡된 특징들을 최소화하기 위해서 상기 노드 위치들을 수동으로 검토하여 정정하는 수단을 포함하는, 아바타 애니메이션 변환 생성 시스템.
  6. 제5항에 있어서, 상기 무표정 얼굴에 대한 상기 정정된 노드 위치들에 근거하여 애니메이션 변환을 생성하기 위한 수단을 더 포함하는, 아바타 애니메이션 변환 생성 시스템.
  7. 제6항에 있어서, 상기 아바타를 생성하기 위해 상기 애니메이션 변환을 표정 얼굴 아바타 메시들에 적용하는 수단을 더 포함하는, 아바타 애니메이션 변환 생성 시스템.
  8. 제6항에 있어서, 상기 애니메이션 변환을 모프 타켓들(morph targets)에 적용하기 위한 수단을 더 포함하는, 아바타 애니메이션 변환 생성 시스템.
  9. 아바타 애니메이션 변환을 생성하기 위한 방법에 있어서,
    아바타를 생성하기 위해 무표정 얼굴의 앞 머리 이미지 및 옆 머리 이미지를 제공하는 단계;
    상기 각각의 무표정 얼굴의 앞 머리 이미지 및 옆 머리 이미지를 웨이브렛(wavelet) 변환들로부터 생성된 웨이브렛 성분 값들에 근거한 이미지 분석을 사용하여 상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 머리 특징 위치들을 자동으로 찾는 단계;
    상기 앞 머리 이미지 및 상기 옆 머리 이미지 상의 특징 위치들에 노드들을 자동으로 위치시키는 단계; 및
    상기 노드 위치들에 근거하여 생성되는 아바타 내에서 아티팩트들을 제거하고 왜곡된 특징들을 최소화하기 위해서 상기 노드 위치들을 수동으로 검토하여 정정하는 단계를 포함하는, 아바타 애니메이션 변환 생성 방법.
  10. 제9항에 있어서, 상기 무표정 얼굴에 대한 상기 정정된 노드 위치들에 근거하여 애니메이션 변환을 생성하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  11. 제10항에 있어서, 상기 아바타를 생성하기 위해 상기 애니메이션 변환을 표정 얼굴 아바타 메시들에 적용하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  12. 제10항에 있어서, 상기 애니메이션 변환을 모프 타겟들에 적용하는 단계를 더 포함하는, 아바타 애니메이션 변환 생성 방법.
  13. 제7항에 있어서, 상기 웨이브렛 변환들은 가보(Gabor) 웨이브렛들을 사용하는 것인, 아바타 애니메이션 변환 생성 방법.
KR10-2003-7001108A 2000-07-24 2001-07-24 무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을생성하기 위한 방법 및 시스템 KR20030029638A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US22033000P 2000-07-24 2000-07-24
US60/220,330 2000-07-24
PCT/US2001/041397 WO2002009040A1 (en) 2000-07-24 2001-07-24 Method and system for generating an avatar animation transform using a neutral face image

Publications (1)

Publication Number Publication Date
KR20030029638A true KR20030029638A (ko) 2003-04-14

Family

ID=22823129

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2003-7001108A KR20030029638A (ko) 2000-07-24 2001-07-24 무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을생성하기 위한 방법 및 시스템

Country Status (5)

Country Link
EP (1) EP1436781A1 (ko)
JP (1) JP2004509391A (ko)
KR (1) KR20030029638A (ko)
AU (1) AU2001281335A1 (ko)
WO (1) WO2002009040A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11055889B2 (en) 2018-02-23 2021-07-06 Samsung Electronics Co., Ltd. Electronic device displaying avatar motion-performed as per movement of facial feature point and method for operating same
US11069115B2 (en) 2019-02-20 2021-07-20 Samsung Electronics Co., Ltd. Method of controlling display of avatar and electronic device therefor

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070199096A1 (en) 2005-11-14 2007-08-23 E.I. Du Pont De Nemours And Company Compositions and Methods for Altering Alpha- and Beta-Tocotrienol Content
CA2685309C (en) 2007-05-24 2019-06-25 E. I. Du Pont De Nemours And Company Dgat genes from yarrowia lipolytica for increased seed storage lipid production and altered fatty acid profiles in soybean
EP2620501A3 (en) 2008-05-23 2013-10-02 E. I. du Pont de Nemours and Company DGAT genes from oleaginous organisms for increased seed storage lipid production and altered fatty acid profiles in oilseed plants
US8993840B2 (en) 2009-11-23 2015-03-31 E I du Pont de Nemours and Compay Sucrose transporter genes for increasing plant seed lipids
US9386268B2 (en) 2012-04-09 2016-07-05 Intel Corporation Communication using interactive avatars
EP3410399A1 (en) 2014-12-23 2018-12-05 Intel Corporation Facial gesture driven animation of non-facial features
US9824502B2 (en) 2014-12-23 2017-11-21 Intel Corporation Sketch selection for rendering 3D model avatar
US9830728B2 (en) 2014-12-23 2017-11-28 Intel Corporation Augmented facial animation
US10475225B2 (en) 2015-12-18 2019-11-12 Intel Corporation Avatar animation system
WO2019177870A1 (en) * 2018-03-15 2019-09-19 Magic Leap, Inc. Animating virtual avatar facial movements

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU3452697A (en) * 1996-07-05 1998-02-02 British Telecommunications Public Limited Company Image processing
CA2327304A1 (en) * 1998-04-13 1999-10-21 Johannes Bernhard Steffens Wavelet-based facial motion capture for avatar animation

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11055889B2 (en) 2018-02-23 2021-07-06 Samsung Electronics Co., Ltd. Electronic device displaying avatar motion-performed as per movement of facial feature point and method for operating same
US11069115B2 (en) 2019-02-20 2021-07-20 Samsung Electronics Co., Ltd. Method of controlling display of avatar and electronic device therefor

Also Published As

Publication number Publication date
EP1436781A1 (en) 2004-07-14
WO2002009040A1 (en) 2002-01-31
AU2001281335A1 (en) 2002-02-05
JP2004509391A (ja) 2004-03-25

Similar Documents

Publication Publication Date Title
US20020067362A1 (en) Method and system generating an avatar animation transform using a neutral face image
US11189084B2 (en) Systems and methods for executing improved iterative optimization processes to personify blendshape rigs
EP2043049B1 (en) Facial animation using motion capture data
US7239321B2 (en) Static and dynamic 3-D human face reconstruction
US7804997B2 (en) Method and system for a three dimensional facial recognition system
JP4932951B2 (ja) 顔画像処理方法およびシステム
Noh et al. A survey of facial modeling and animation techniques
Alexander et al. The digital emily project: photoreal facial modeling and animation
JP4733318B2 (ja) 顔の特徴をアニメーション化する方法およびシステムならびに表情変換のための方法およびシステム
KR20030029638A (ko) 무표정 얼굴 이미지를 사용하여 아바타 애니메이션 변환을생성하기 위한 방법 및 시스템
US9129434B2 (en) Method and system for 3D surface deformation fitting
US11158104B1 (en) Systems and methods for building a pseudo-muscle topology of a live actor in computer animation
KR20210038609A (ko) 이미지 합성을 위한 방법 및 데이터 처리 시스템
US20220076409A1 (en) Systems and Methods for Building a Skin-to-Muscle Transformation in Computer Animation
US20240169635A1 (en) Systems and Methods for Anatomically-Driven 3D Facial Animation
US11410370B1 (en) Systems and methods for computer animation of an artificial character using facial poses from a live actor
US20230154094A1 (en) Systems and Methods for Computer Animation of an Artificial Character Using Facial Poses From a Live Actor
US11715247B1 (en) Generating a facial rig for use in animating a computer-generated character based on facial scans and muscle models of multiple live actors
US20230260186A1 (en) Generating a facial-hair-free mesh of a subject
US20240185518A1 (en) Augmented video generation with dental modifications
CA3192467A1 (en) Systems and methods for building a muscle-to-skin transformation in computer animation
Haber MEDUSA-A Facial Modeling and Animation System
Cosker Animation of a Hierarchical Appearance Based Facial Model and Perceptual Analysis of Visual Speech

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid