KR100343006B1 - 언어 입력형 얼굴 표정 제어방법 - Google Patents

Abstract

본 발명은 언어 입력형 얼굴 표정 제어방법에 관한 것으로, 본 발명은 컴퓨터 프로그램을 실행하여 버츄얼 캐릭터의 기본형 얼굴 데이터를 텍스트 투 훼이셜 익스프레션 알고리즘에 전송하는 기본 노드를 선택하는 단계와, 버츄얼 캐릭터의 텍스트 투 훼이셜 익스프레션 알고리즘에 기준하는 입모양 키노드 얼굴을 선택하는 단계와, 입력할 단어의 언어 표현 형태를 선택하는 단계와, 선택한 언어 표현 형태에 의해 한글 문자 입력을 하여 립싱크를 완성하는 단계와, 립싱크를 완성한 후 특수 표정키 노드 선택을 하는 단계와, "마우스", "미디 키보드", "키보드", "조이스틱" 중의 어느 디바이스를 사용할 것 인지의 여부를 판단한 다음 립싱크를 실행하는 단계와, 해당 디바이스마다 키노드에 맞는 얼굴이 설정되었는지의 여부를 판단하는 단계와, 디바이스를 사용하여 역동적인 모습을 표현하기 위한 다양한 실시간 특수 표정 모션 캡쳐를 한 후 표정 에니메이션을 완성하여 출력하는 단계를 진행하도록 된 것을 그 특징으로 한다.

Description

언어 입력형 얼굴 표정 제어방법{LANGUAGE INPUT TYPE FACIAL EXPRESSION CONTROL MATHOD}

본 발명은 언어 입력형 얼굴 표정 제어방법에 관한 것으로서, 더욱 상세하게는 컴퓨터 그래픽 에니메이션 업계에서 상업 또는 비상업 목적으로 버츄얼 캐릭터를 개발하여 캐릭터의 얼굴 표정을 에니메이션할 때 작업자가 컴퓨터의 자판을 눌러주는 언어 입력에 의해서 신속하게 완벽한 얼굴 표정 에니메이션 작업을 수행할 수 있도록 한 것이다.

일반적으로 컴퓨터 그래픽 에니메이션 업계에서는 상업 또는 비상업적 목적으로 버츄얼 캐릭터를 개발하여 캐릭터의 얼굴 표정을 에니메이션할 때 작업 실무자들이 가장 필요로 하는 것은 얼굴 표정과 관련된 에니메이션 작업을 용이하게 진행하는 것인 데, 현재 버츄얼 캐릭터의 표정 에니메이션과 관련된 전 세계적인 기술은 매우 미비한 상태로서, 버츄얼 캐릭터와 관련하여 얼굴 표정 에니메이션 시스템이 개발되었다고는 하나, 모두 모핑 매니져의 역할을 크게 벗어나지 못한 한계성을 지닌 것들이어서 현실적인 부분으로 볼 때 종래의 버츄얼 캐릭터의 개발을 필요로 하는 업체에서는 별 효용가치가 없는 것이 대부분이므로 이에 대한 개발이 요구되었다.

따라서, 본 발명은 상기한 제반 문제점을 해결하기 위한 것으로서, 컴퓨터 그래픽 에니메이션 업계에서 상업 또는 비상업 목적으로 버츄얼 캐릭터를 개발하여 캐릭터의 얼굴 표정을 에니메이션할 때 작업자가 컴퓨터의 자판을 눌러주는 언어 입력에 의해서 신속하게 완벽한 얼굴 표정 에니메이션 작업을 수행할 수 있도록 하여 작업 시간 및 작업 인력을 대폭 단축시킬 수 있음에 따른 제작 단가를 크게 절감시킬 수 있을 뿐만 아니라, 작업자의 편의에 따른 다양한 기능을 부여하여 편리한 상태에서 작업을 진행할 수 있는 언어 입력형 얼굴 표정 제어방법을 제공하는 데 그 목적이 있다.

도 1은 본 발명의 동작 상태를 나타낸 전체 흐름도

도 2는 본 발명에 따른 문자 입력을 하여 립싱크를 완성하기까지의 동작 상태를 나타낸 흐름도

상기한 목적을 달성하기 위해 본 발명은 컴퓨터 프로그램을 실행하여 버츄얼 캐릭터의 기본형 얼굴 데이터를 텍스트 투 훼이셜 익스프레션 알고리즘에 전송하는 기본 노드를 선택하는 단계와, 버츄얼 캐릭터의 텍스트 투 훼이셜 익스프레션 알고리즘에 기준하는 입모양 키노드 얼굴을 선택하는 단계와, 입력할 단어의 언어 표현 형태를 선택하는 단계와, 선택한 언어 표현 형태에 의해 한글 문자 입력을 하여 립싱크를 완성하는 단계와, 립싱크를 완성한 후 특수 표정키 노드 선택을 하는 단계와, "마우스", "미디 키보드", "키보드", "조이스틱" 중의 어느 디바이스를 사용할 것 인지의 여부를 판단한 다음 립싱크를 실행하는 단계와, 해당 디바이스마다 키노드에 맞는 얼굴이 설정되었는지의 여부를 판단하는 단계와, 디바이스를 사용하여 역동적인 모습을 표현하기 위한 다양한 실시간 특수 표정 모션 캡쳐를 한 후 표정 에니메이션을 완성하여 출력하는 단계를 진행하도록 된 것을 특징으로 하는 언어 입력형 얼굴 표정 제어방법이 제공된다.

이하, 상기한 목적을 달성하기 위한 본 발명의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다.

도 1은 본 발명의 동작 상태를 나타낸 전체 흐름도이고, 도 2는 본 발명에 따른 문자 입력을 하여 립싱크를 완성하기까지의 동작 상태를 나타낸 흐름도이다.

도 1에 도시한 바와 같이, 본 발명은 컴퓨터 프로그램을 실행하여 버츄얼 캐릭터의 기본형 얼굴 데이터를 텍스트 투 훼이셜 익스프레션(TTFE; Text To Facial Expression) 알고리즘에 전송하는 기본 노드를 선택하고, 버츄얼 캐릭터의 텍스트 투 훼이셜 익스프레션 알고리즘에 기준하는 "아, 이, 우, 에, 오, 으, 어, 음" 등의 입모양 키노드 얼굴을 선택하며, 입력 단어의 사이 사이에 딜레이 타임(Delay Time)을 주는 형태인 타입 1, 사용자 정의의 간격대로 키 플레임(Key Flame)을 생성하는 형태인 타입 2, 말하는 단어의 중성에만 키 플레임을 생성하는 형태인 타입 3중에서 언어 표현 형태를 선택하여 한글 문자 입력을 하여 립싱크를 완성한다.

즉, 상기한 문자 입력을 하여 립싱크를 완성하기까지의 동작 상태를 도 2를참조하여 구체적으로 설명한다.

먼저, 상기한 문자 입력을 하기전에 본 발명은 인간이 어떠한 하나의 발음을 할 때 해부학적인 관점에서는 동, 서양인을 막론하고 그 입모양 등의 해부학적인 형태가 무조건 동일하다는 것을 그 기본 전제로 하며, 입모양을 기준으로 하되 한글의 모음은 "아, 이, 우, 에, 오, 으, 어"로 새로이 정의하고, 자음은 "으, 음"으로 정의하며("으"는 공용), 초성, 중성, 종성은 아래와 같이 세부 정의한다.

상기 초성은 ㅁ, ㅂ, ㅍ의 경우 "음"의 입모양으로 시작하고, 그 나머지는 "으"의 입모양으로 시작한다.

중성은 ㅏ, ㅓ, ㅗ, ㅜ, ㅡ, ㅣ, ㅔ의 기본형과 이들 기본형을 조합한 ㅑ(이 아), ㅕ(이 어), ㅛ(으 오), ㅠ(으 우)로 구성한다.

종성은 ㅁ, ㅂ, ㅍ의 경우에는 "음"의 입모양으로 끝나며, 그 나머지는 "으"의 입모양으로 끝난다.

상기와 같이 세부 정의된 상태에서 도 2와 같이 문자를 입력하여 문장의 끝부분(End Of Sentance)까지 문자 입력이 완료되었다고 판단하면, 조합형 코드로 변경하고, 초, 중, 종성 코드로 분리하며, 초성이 ㅁ, ㅂ, ㅍ 인지의 여부를 판단하여 초성이 ㅁ, ㅂ, ㅍ 이면 "음"의 시작 입모양을 추가하고, 그렇지 않으면 "으"의 시작 입모양을 추가한다. 그 후, 중성 기본형인지의 여부를 판단하여 중성 기본형이면 기본형에 따른 입모양을 추가하며, 그렇지 않으면 복합형은 기본형을 조합한 입모양을 추가한다.

그 다음, 종성이 ㅁ, ㅂ, ㅍ 인지의 여부를 판단하여 종성이 ㅁ, ㅂ, ㅍ 이면 "음"의 종료 입모양을 추가하고, 그렇지 않으면 "으"의 종료 입모양을 추가하는 과정을 반복하며, 상기한 문자를 입력하여 문장의 끝부분까지 문자 입력이 완료되지 않은 것으로 판단되면 에니메이션 키를 생성하고 종료하므로써 립싱크를 완성한다.

그 후, 상기한 립싱크를 완성하면 특수 표정키 노드 선택을 한 다음, "마우스", "미디 키보드", "키보드", "조이스틱" 중의 어느 디바이스를 사용할 것 인지의 여부를 판단한 후, 립싱크를 실행한 다음, 상기 해당 디바이스마다 키노드에 맞는 얼굴이 설정되었는지의 여부를 판단하게 되는 데, 예컨대 키보드 1; 웃는 표정, 조이스틱; 화난 표정, 미디 키보드 "도"; 우는 표정, 마우스; 눈감는 표정으로 설정되었을 경우 이중에서 상기 키노드에 적합한 얼굴을 설정한다.

그 후, 상기 마우스, 키보드, 미디 키보드, 조이스틱을 사용하여 역동적인 모습을 표현하기 위한 다양한 실시간 특수 표정 모션 캡쳐를 한 다음, 표정 에니메이션을 완성한 후, 출력시키게 된다.

이상에서 상술한 바와 같이, 본 발명은 다음과 같은 효과를 갖는다.

첫째, 한글 입력만으로 별도의 가공을 거치지 않고 즉시 에니메이션을 제작할 수 있어서 작업 인력을 대폭 줄일 수 있게 된다.

둘째, 언어 입력 채널과 모션 캡쳐 임포트(import) 채널을 따로 분리하여 채널을 생성하는 방식을 이용하되, 관리는 채널들을 통합 관리하므로써 생산성을 극대화시킬 수 있게 된다.

셋째, "안녕하세요"라는 단어를 입력하고 전체적으로 100%를 기본형으로 할 때 50%, 40% 등으로 사용자의 정의로 에니메이션시 전체 입모양의 크기를 줄일 수도 있으며, 스케일 자체를 에니메이션할 수 있게 된다.

넷째, "안녕하세요"라는 단어를 입력하고, 그 다음 "리얼 스페이스입니다"를 입력해도 덮어쓰기가 되지 않고 무한으로 채널을 부여할 수 있으며, 채널당 선택적으로 토글 기능을 이용하여 ON, OFF할 수 있게 된다.

다섯째, 초성, 중성, 종성을 모두 콘트롤하면서도 에니메이션 키를 원하는 곳에 줄 수 있고, 중성에만 줄 수도 있으며, 단어와 단어 사이의 시간 간격을 원하는대로 줄 수 있게 된다.

여섯째, "안녕하세요" 라는 말을 5초동안 말을 해라, 10초동안 말을 해라 등의 시간 선택 옵션을 줄 수 있게 된다.

Claims (2)

1. 컴퓨터 프로그램을 실행하여 버츄얼 캐릭터의 기본형 얼굴 데이터를 텍스트 투 훼이셜 익스프레션 알고리즘에 전송하는 기본 노드를 선택하는 단계와,

   버츄얼 캐릭터의 텍스트 투 훼이셜 익스프레션 알고리즘에 기준하는 입모양 키노드 얼굴을 선택하는 단계와,

   입력할 단어의 언어 표현 형태를 선택하는 단계와,

   선택한 언어 표현 형태에 의해 한글 문자 입력을 하여 립싱크를 완성하는 단계와,

   립싱크를 완성한 후 특수 표정키 노드 선택을 하는 단계와,

   "마우스", "미디 키보드", "키보드", "조이스틱" 중의 어느 디바이스를 사용할 것 인지의 여부를 판단한 다음 립싱크를 실행하는 단계와,

   해당 디바이스마다 키노드에 맞는 얼굴이 설정되었는지의 여부를 판단하는 단계와,

   디바이스를 사용하여 역동적인 모습을 표현하기 위한 다양한 실시간 특수 표정 모션 캡쳐를 한 후 표정 에니메이션을 완성하여 출력하는 단계를 진행하도록 된 것을 특징으로 하는 언어 입력형 얼굴 표정 제어방법.
2. 제 1 항에 있어서, 상기 입력할 단어의 언어 표현 형태는 입력 단어의 사이 사이에 딜레이 타임을 주는 형태, 사용자 정의의 간격대로 키 플레임을 생성하는형태, 말하는 단어의 중성에만 키 플레임을 생성하는 형태로 된 것을 특징으로 하는 언어 입력형 얼굴 표정 제어방법.