KR20060054678A

KR20060054678A - 음향에 동기 된 캐릭터 동영상 구현 장치 및 구현 방법

Info

Publication number: KR20060054678A
Application number: KR1020040093312A
Authority: KR
Inventors: 김경희; 김규태
Original assignee: 김경희
Priority date: 2004-11-15
Filing date: 2004-11-15
Publication date: 2006-05-23

Abstract

본 발명은 비디오 영상 파일 없이도 음향(음악, 강의 등)에 동기 된 동영상을 보여줄 수 있는 방법과 이를 위한 장치에 관한 것이다.

본 발명의 구성은 캐릭터 영상 파일과, 동작에 관련된 파일(동작 파일, 동작 특성 파일)과, 음향 파일과, 파일 분리 수단과, 스피커가 연결된 음향 재생 수단과, 모션 영상 생성 수단과, 화면 수단으로 구성되며, 필요시엔 음향 분석 수단도 구성된다. 여기서 상기 캐릭터 영상 파일과, 동작 파일과, 음향 파일은 데이터 기록 수단으로부터 공급되거나 아니면 유무선 통신망을 통하여 서비스 제공자로부터 사용자에게로 제공된다. 이렇게 제공되거나 공급된 상기 파일들은 상기 파일 분리 수단에 의해 캐릭터 영상 파일과, 동작에 관련된 파일(동작 파일, 동작 특성 파일)과, 음향 파일로 분리되어 사용자의 음향 및 영상 장치 내에 저장된다. 사용자의 플레이 개시 조작 신호에 의해서 상기 음향 파일은 음향 재생 수단에 의해서 아날로그 음향으로 재생되고, 이 음향 신호에 동기 되어 작동되는 상기 모션 영상 생성 수단은 상기 캐릭터 영상 파일과 동작 정보가 들어가 있는 동작 파일을 이용하여서 상기 캐릭터의 연속 동작상의 수많은 영상들을 생성하여 화면 수단으로 보낸다. 이에 따라서 사용자는 음향에 동기 된 동영상의 캐릭터를 볼 수 있게 된다.

본 발명은 비디오 영상 파일 없이도, 그리고 적은 용량의 데이터 량으로도 긴 시간 동안의 동영상을 음향과 함께 보여 줄 수 있어서 각종의 음악 재생장치의 화면 수단 상에서 음향에 맞추어 춤추는 캐릭터 동영상이 가능하고, 또한 캐릭터가 동영상으로 강의하는 모습을 보면서 강의를 들을 수 있어서 강의 효과가 증대되고, 또한 음악 감상의 즐거움이 증대되는 등의 효과가 있다. 또한 파일의 유통 경비나 제작 경비가 절감되는 효과도 있다.

Description

음향에 동기 된 캐릭터 동영상 구현 장치 및 구현 방법{omitted}

제 1도는 본 발명이 통신망을 통하여 파일들이 제공될 때의 통신망 구성도 일 예.

제 2도는 본 발명 장치의 구동 원리의 개념 구성도 일 예.

제3도는 본 발명의 또 다른 구동 원리의 개념 구성도 일 예.

※도면 중 주요부위에 대한 설명

1.서비스 제공자 2.통신망

3.사용자 4.캐릭터 영상 파일

5,5'동작 파일, 동작 특성 파일 6.음향 파일

7.7'모션 영상 생성 수단 8.음향 재생 수단

9.화면 수단 10.스피커

11.파일 분리 수단 12.12'음향 및 영상 장치

13음향(음악) 분석 수단

본 발명은 음향에 맞추어 움직이는 캐릭터를 실현하고, 이를 각종 음향 및 영상 장치에서 실현되게 하여서 동영상용 종래 비디오 영상 파일을 갖지 않고도 음향(음악, 강의 등)에 동기 되어 움직이는 캐릭터 동영상이 표현되는 음향 및 영상 장치를 제공하고, 또한 이의 유통 방법을 제공할 목적으로 제안되는 것이다.

본 발명은 음향과 동영상이 함께 표현되는 화면 수단을 갖는 음향 및 영상 장치(MP3 플레이어, CD 플레이어, 전축, 음향 재생 장치가 내장된 이동 통신 기기 등)에 관한 것이다.

종래의 화면 수단을 갖는 음향 및 영상 장치들에서는 음향 파일과 함께 비디오 영상 파일을 통신망을 통하여 다운 받거나 데이터 저장 장치(CD, 테이프, 메모리, 하드디스크 등)로부터 읽어서 소리와 동영상을 동시에 실현시켰다. 이러한 종래 기술은 실제 음향을 녹음하여서 만들어진 음향 데이터 파일과 실제 동영상을 촬영하여서 만들어진 동영상 데이터 파일을 다운 받거나 데이터 저장 장치로부터 읽고 이를 다시 재생하는 방법으로 음향과 이에 동기 된 동영상을 재생하였다. 이러한 종래 기술은 비록 데이터의 량을 줄이기 위하여 데이터 압축 기술을 이용하였음에도 불구하고 데이터 량이 매우 큰 단점이 있었다. 데이터 량의 증대는 파일을 다운 받거나 저장 장치에 저장된 것을 구입 할 시에 경비의 상승을 초래하고, 또한 재생 장치의 제조 원가를 상승시키는 단점이 있었다. 또한 종래 비디오 영상 파일은 촬영된 것 그대로만 볼 수 있을 뿐 사용자가 영상의 내용을 변경 할 수 없는 단점이 있었다. 즉 뮤직 비디오의 경우를 예로 들면, 촬영 시에 촬영된 가수의 모습만 볼 수 있고 사용자의 선택에 따른 다른 인물로의 변경은 불가능한 단점이 있었다. 지금까지는 촬영된 그대로의 비디오 영상 파일 없이도 동영상 뮤직 비디오가 가능한 음향 및 영상 장치는 없었다. 음악뿐만 아니라 동영상 강의에서도 마찬가지였다. 이러한 종래 기술의 단점을 해결하기 의하여 제안되는 본 발명은 종래의 음향 재생 장치(MP3 플레이어, CD 플레이어, 전축 등)에서도 화면 수단이 갖춰진 경우에는 용이하게 작은 메모리 용량의 구성으로도 동영상을 보면서 음악이나 강의를 들을 수 있게 한 것으로써 이를 실시 예에 따라 그 구성과 작용을 상세히 설명하면 다음과 같다.

.

[구성]

실시 예 1.

본 실시 예는 음악이나 강의 등을 유무선 통신망을 통하여 다운 받아 이를 PC 또는 화면 수단이 갖춰진 음향 및 영상 장치( 화면 수단이 있는 MP3 플레이어, MP3 플레이어가 내장된 PDA, MP3 플레이어가 내장고 화면 수단이 있는 이동 통신 기기 등)에서 실행 시에 동영상이 함께 실현되는 경우의 실시 예이다. 이러한 본 실시 예의 구성은 다음과 같다.

본 실시 예는 서비스 제공자(1)와 사용자(3)가 유무선 통신망(2)을 통하여 상호 접속되고, 상기 서비스 제공자(1)는 다수의 음향(음악, 강의 등) 파일(6)들과, 다수의 캐릭터 영상 파일(4)들과, 또한 상기 음향 파일(6)에 연계된 다수의 동작 파일(5)들을 동작 특성(예; 춤 스타일)별로 구성하여 이를 데이터 베이스로 구 축하고, 상기 사용자(3)의 음향 및 영상 장치(12)에는 화면 수단(9)과 음향 재생 수단(8)과 모션 영상 생성 수단(7)과 파일 분리 수단(11)을 갖게 구성된다. 여기서 상기 모션 영상 생성 수단(7)은 신체 각 부위의 특정지점의 일정 시간 간격별 좌표 이동 데이터를 이용하여 캐릭터의 일정 시간 간격마다의 연속 동작상의 각 순간들의 영상들을 계산하여 생성하게 구성된다. 또한 상기 동작 파일(5)을 동작 특성(예; 춤 스타일)별로 구성되게 함은 보다 더 다양한 춤동작을 보여 주기 위한 것으로써 필요시엔 하나의 춤동작만으로 구성하여도 가능함은 물론이다. 또한 상기 파일 분리 수단(11)은 외부로부터 유입되는 파일 중에서 음향에 관련된 음향 파일(6)과 캐릭터 영상에 관련된 캐릭터 영상 파일(4)과 상기 캐릭터의 움직임에 관한 정보가 들어있는 동작 파일(5)을 각각 분리하는 역할을 한다. 이러한 파일의 분리는 각 파일의 특정부위에 각 파일을 의미하는 특정 신호를 넣음으로써 용이하게 구분되어 분리 될 수 있다. 또한 상기 모션 영상 생성 수단(7)은 캐릭터의 동작 정보를 포함하는 상기 동작 파일(5)을 이용하여 1 초당 대략 20-30 프레임으로 캐릭터의 연속 동작상의 영상들을 생성하게 구성되며 이를 위하여 CPU(도시하지 않음)와 메모리(도시하지 않음)와 전용의 모션 영상 생성 프로그램으로 구성된다. 여기에 사용되는 상기 모션 영상 프로그램은 종래 기술임은 물론이며 이에 사용되는 CPU와 메모리는 별도로 구성될 수도 있고 아니면 종래의 음향 재생 장치용의 CPU와 메모리를 겸용으로 이용하여 구성할 수도 있다. 또한 상기 파일 분리 수단(11)은 소프트웨어로 구성 될 수 있음도 물론이다. 또한 상기 음향 재생 수단(8)은 종래의 MP3 플레이어, CD 플레이어, PC내의 사운드 장치 등이 사용될 수도 있음은 물론이다. 또한 상기 동작 파일(5)은 캐릭터의 신체 각 부위의 특정 지점들의 위치(좌표)에 대한 정보들로 구성되며 대략 1 초당 20-30회 간격으로 측정된 캐릭터의 신체가 부위의 특정 위치의 좌표 정보들로 구성된다. 이러한 동작 파일(5)은 종래의 모션 캡쳐 기술에 의해 만들어 질 수도 있고 아니면 제작자가 컴퓨터상에서 수 작업으로 만든 캐릭터의 동작에 의해 만들어 질 수도 있다. 또한 상기 음향 파일(6)은 음향(음악, 강의 등)을 디지털로 변환한 것으로써 이를 압축한 파일(MP3 파일) 형태로 구성 될 수도 있음은 물론이다.

[작용]

상기와 같이 구성되는 본 실시 예의 작용을 유무선 통신망을 이용하여 음악을 제공받는 경우를 중심으로 상세히 설명하면 다음과 같다.

제 1도처럼 사용자(3)자 유무선 통신망(2)을 통하여 서비스 제공자(1)에 접속한다. 그런 다음 원하는 곡명과 원하는 캐릭터와 이에 연계된 동작 파일의 스타일(예; 춤 스타일)을 선택한 후 결재 행위를 행한다. 여기서 동작 파일의 스타일이 하나 뿐인 경우에는 곡명을 선택하면 이에 연계된 하나의 춤동작 스타일로 된 동작 파일(5)이 자동으로 선택됨은 물론이다. 그러면 서비스 제공자(1)는 사용자(3)가 선택한 음향(음악) 파일(6)과 캐릭터 영상 파일(4)과 상기 음향 파일에 연계된 동작 파일(5)들 중에서 사용자가 선택한 동작(예; 춤) 스타일의 동작 파일(5)을 상기 사용자(3)에게 전송한다. 또한 사용자(3)의 음향 및 영상 장치(12)가 파일 분리 수단(11)과 모션 영상 생성 수단(7)을 갖고 있지 않은 경우에는 상기 파일 분리 수단(11)용 소프트웨어와 상기 모션 영상 생성 수단(7)용 소프트웨어도 전송되어 사용자(3)의 음향 및 영상 장치에 저장되고 설치된다. 여기서 만약 상기에서 사용자(3)가 선택한 캐릭터가 A 라는 캐릭터이고, 동작 스타일은 예를 들어 마이클 잭슨 스타일로 선택하고 또한 곡명은 B 라는 음악 곡이라면, 사용자(3)의 음향 및 영상 장치(12)에는 B곡의 음향(음악) 파일(6)과 A 캐릭터의 캐릭터 영상 파일(4)과 상기 B 곡에 연계된 마이클 잭선 스타일로 춤출 때의 신체 각 부위 특정 지점의 매 순간별 위치 좌표에 대한 정보가 담긴 마이클 잭슨 스타일의 동작 파일(5)이 전송되며, 전송된 상기 파일들은 상기 파일 분리 수단(11)에 의해 음향파일(6)과 캐릭터 영상 파일(4)과 동작 파일(5)로 파일들이 각각 분리되어 메모리에 각각 저장된다. 그런 다음 사용자(3)가 플레이 시작 버튼을 조작하면, 상기 음향 재생 수단(8)은 상기 음향(음악) 파일을 이용하여 아날로그 음향을 재생한다. 이때 만약 음향 파일(6)이 압축된 상태이면 압축을 풀면서 음향을 재생함은 물론이다. 이러한 재생된 음향 신호에 동기 되어 상기 모션 영상 생성 수단(7)에서는 메모리에 저장된 상기 캐릭터 영상 파일(4)과 상기 선택된 동작(춤) 스타일의 동작 파일(5)을 이용하여 일정 시간 간격마다 조금씩 변화된 캐릭터의 연속 동작상의 각 영상들을 생성하여 이를 화면 수단(9)으로 보낸다. 이때 상기 음향 신호에 동기 되면서 생성된 상기 영상들을 화면 수단(9)으로 보내어서 상기 재생된 음향에 캐릭터 동영상의 움직임이 일치하게 보여준다. 통상 자연스러운 동작을 위해서는 1 초당 대략 20-30 프레임의 영상을 보여준다. 그러면 눈의 잔상 현상에 의해서 사용자(3)에게는 캐릭터가 자연스럽게 움직이는 연속 동작의 동영상으로 인식된다. 그런데 이 동영상이 상기 음향 재생 장치에 동기 되어 생성됨으로 인하여 음악에 맞추어 움직이는(춤추거 나 노래하는 모습의 움직임) 동영상을 보게 된다. 이는 비디오 영상 파일 없이도 마치 뮤직 비디오를 보는 것처럼 느껴진다. 이와같은 본 발명은 동영상을 위한 모든 화면 프레임이 종래 비디오 영상에서처럼 모두 외부에서 주어지지 않고 자체에서 생성되어 만들어져서 화면 수단(7)을 통하여 보여진다. 여기서 캐릭터를 2 이상의 다수고 구성하고, 또한 이에 연계된 상기 동작 파일(5)의 동작(춤)스타일도 2 이상의 다수로 구성하고 또한 다수 캐릭터의 모션 영상을 각각 생성하여 이를 한 화면상에서 동시에 보여지게 함으로써 동일한 하나의 노래에 맞추어서 다수의 캐릭터가 각기 다른 스타일로 춤추며 노래하는 모습을 보여 줄 수도 있다. 여기서 상기 동작 파일(5)은 공지된 모션 캡쳐에 의해 만들어진 파일 일 수도 있고 제작자가 컴퓨터 상에서 임의로 만든 동작의 동작 파일(5)일 수도 있다. 만약 모션 캡쳐에 의해 만들어진 동작 파일(5)인 경우에는 캐릭터의 움직임이 매우 자연스러운 특징이 있다. 여기서 미 설명 부호 10은 스피커이다.

지금까지 유무선 통신망(2)을 통하여 파일을 전송 받는 경우를 중심으로 설명하였다. 만약 사용자(3)가 동영상을 필요로 하지 않는 경우에는 음향 파일(6)만 선택하고 이를 서비스 제공자(1)로부터 전송 받아서 사용자(3)는 음향만 재생하여 즐길 수도 있다. 즉 사용자 선택에 의해 사용자(3)는 음향만 다운 받을 수도 있고, 음향과 캐릭터와 캐릭터 동작에 관련된 파일을 함께 전송 받을 수도 있다. 지금까지는 통신망(2)을 이용하여 파일이 공급되는 경우를 설명하였다. 그러나 본 발명에 필요한 상기 음향 파일(6)과 동작 파일(5)과 캐릭터 영상 파일(4)과 함께 필요시엔 상기 파일 분리 수단용 소프트웨어와 상기 모션 영상 생성 수단용 소프트웨어를 공 지된 데이터 저장 수단(CD, 디스켓 등)에 저장하여 사용자에게 판매되어 전달되고, 이러한 상기 데이터저장 수단(CD, 디스켓 등)을 본 발명의 음향 및 영상 장치(12)에서 실행시킴으로써 사용자(3)는 음향(음악, 강의)에 동기 되어 움직이는 캐릭터 동영상을 즐길 수 있게 된다. 즉 비디오 영상 파일이 없는 형태의 동영상이 가능한 휴대형 데이터 기록 수단(CD, 디스켓, 하드디스크, 메모리 등)의 구현도 가능하게 된다. 즉 용량 대비 많은 시간 분량의 동영상이 가능한 휴대형 데이터 기록 수단이 가능해져서 저렴한 가격의 동영상 기록 장치가 유통 될 수도 있다. 본 발명의 캐릭터 영상 파일은 종래 게임에서의 캐릭터처럼 신체의 각 부위가 따로 만들어진 후 이들이 모두 합체되어 하나의 캐릭터를 형성하게 구성된 파일임은 물론이다.

본 실시 예의 구성에 있어서, 서비스 제공자(1)측에 음악 분석 수단을 갖게 구성하고 사용자가 음악의 일부분을 서비스 제공자(1)에게 들려주면 이를 분석하여 곡명을 판단하고, 판단된 상기 곡명의 음향 파일(5)을 사용자(3)측에 전송하는 공지의 기술을 이용하여 이때 판단된 곡명과 함께 이에 연계된 동작 파일(5)도 함께 사용자(3) 측으로 전송 되게 구성할 수도 있음은 물론이다. 이 경우 캐릭터의 선택과 동작(춤) 스타일의 선택은 사용자(3)가 선택하게 구성할 수도 있고 서비스 제공자(1)측에서 곡명에 맞는 캐릭터와 동작 스타일을 임의로 선택하여 제공할 수도 있음은 물론이다. 본 실시 예의 구성에서 서비스 제공자(1)는 한 종류의 캐릭터 영상 파일만 준비하여서 사용자(3)가 캐릭터를 선택할 필요가 없게 구성할 수도 있음은 물론이다.

[효과]

본 실시 예의 효과는 다음과 같다.

본 실시 예는 비디오 영상 파일 없이도 음향과 이에 동기 된 캐릭터 동영상을 PC상에서, 또는 화면 수단이 있는 MP3 플레이어나 CD 플레이어, 또는 이들이 내장된 이동 통신 기기 등의 종래 음향 재생 수단 상에서 용이하게 보여 줄 수 있는 효과가 있고, 또한 종래 비디오 동영상에 비교하여 적은 용량의 데이터 량으로도 긴 시간 분량의 동영상을 보여 줄 수 있어서 파일 구매 비용이나 통신비용이 절감되고 또한 음향 및 영상 장치의 제조 원가가 절감되는 효과가 있다. 또한 다양한 캐릭터를 준비하고 또한 다양한 동작(춤) 스타일을 준비하여 사용자가 선택하게 함으로써 다양한 캐릭터에 의한 다양한 스타일의 동영상을 이에 연계된 음향(음악)과 함께 보고들을 수 있다. 일 예를 들어서, 선택된 로봇 형상의 캐릭터가 선택된 마이클 잭슨의 노래를 부르면서와 선택된 스타일(예: '싸이' 라는 가수의 춤 스타일)의 춤을 추는 동영상을 볼 수 있는 효과도 있다. 또 다른 예로는 인기 있는 만화 주인공 모습의 캐릭터가 뽀뽀뽀 노래와 이에 맞는 뽀뽀뽀 춤동작을 어린아이의 춤 스타일로 춤추는 모습을 보여 줄 수도 있어서 흥미와 재미를 증대시키는 효과도 있다. 또한 유무선 통신망을 통하여 음향(음악) 파일과 함께 본 발명의 동영상용 파일(캐릭터 영상 파일과 동작 파일)을 전송 받는 것만으로 종래 화면 수단이 갖춰진 휴대형 음향(음악) 재생 장치에서도 손쉽게 동영상 뮤직이나 동영상 강의를 들을 수 있는 효과가 있다. 따라서 수많은 종래 음악 파일에 본 발명의 동영상 기능을 첨가시킬 수 있어서 종래의 각종 음악파일의 부가가치나 효용성을 증대시킬 수 있는 효과가 있다. 또한 음악을 들으면서 춤을 감상하거나 강의를 들으면서 캐릭터 강사의 표정이나 손놀림 및 몸짓을 볼 수 있는 효과가 있어서 강의 효과가 증대하거나 음악 감상의 즐거움이 증대되는 효과가 있다. 또한 서비스 제공자(1)는 음향(음악) 파일뿐만 아니라 동작 파일과 캐릭터에 관련된 캐릭터 영상 파일도 판매할 수 있어서 매출을 증대시킬 수 있는 효과도 있다.

실시 예 2.

본 실시 예는 본 발명의 장치가 캐릭터의 춤동작을 스스로 판단하여 결정하여서 음악의 박자나 장단에 맞추어서 스스로 춤추게 한 경우의 음향에 동기 된 캐릭터 동영상의 실시 예이다. 이를 위한 본 실시 예의 구성은 제 3도와 같다. 즉, 본 실시 예의 음향 및 영상 장치(12')는 음향 파일(6)과, 캐릭터 영상 파일(4)과, 동작 특성(예: 춤 스타일의 특징적 동작에 따른 신체 각 부위별의 동작 특성) 파일(5')과, 파일 분석 수단(11)과, 음향(음악) 분석수단(13)과, 스피커(10)가 연결된 음향 재생 수단(10)과, 모션 영상 생성 수단(7')과 화면 수단(9)으로 구성된다. 여기서 상기 음향 파일(6)과, 캐릭터 영상파일(4)과, 동작 특성 파일(5')은 통신망(2)을 통하여 사용자의 음향 및 영상장치(12')에 전송되어 제공되거나 공지의 데이터 저장 수단에 저장된 것을 읽어서 제공받는다. 만약 사용자의 음향 및 영상 장치(12')에 미리 설치되어 있지 않은 경우에는 상기 음향 분석 수단(13)용 소프트웨어와 상기 모션 영상 생성 수단(7')용 소프트웨어도 통신망(2)을 통하여 전송 받거나, 아니면 데이터 저장 수단(예: CD)에 저장된 것을 읽어서 제공받게 구성된다.

본 실시 예의 구성에 있어서, 상기 동작 특성 파일(5')은 그 동안 유행되었던 각종 스타일의 춤동작에서의 신체 각 부위의 특징적인 움직임들에 관한 정보로 구성된 동작 특성 파일이다. 즉 특정 춤 스타일에서의 팔과 발과 허리와 머리와 가슴과 엉덩이 등등의 신체 각 부위의 움직임 특성에 관한 정보들로 구성되어 있다. 상기 실시 예 1에서는 한 음악이 진행되는 전 과정 동안 이 음악에 맞추어 춤추는 전체 시간 동안의 전체 동작의 움직임에 관한 모든 동작 정보가 상기 동작 파일(5)에 들어 있는데 반해서, 본 실시 예의 동작 특성 파일(5')에는 춤 스타일별 주요 특징적인 동작들의 짧은 시간 동안만의 신체 각 부위별의 동작 정보만 저장되어 있다. 예로 들어서 마이클 잭슨의 춤동작에서의 특징적인 동작시의 신체 각 부위별 움직임들에 관한 일정 짧은 시간 동안의 정보만 들어있다. 이와 같은 다양한 장르별 및 댄서별의 특징적인 춤동작의 정보들이 데이터 베이스로 구축되게 된다. 본 실시예의 또 다른 구성 요소인 상기 음향 분석 수단(13)은 음향(음악)의 박자와 장단과 강약과 멜로디 구성 등을 분석하여서 음향(음악)의 박자와 장단과 음악 스타일(예: 랩 음악, 블루스 음악, 탱고, 뽕짝, 샹송, 군가 등)을 판단하고 이 판단 결과를 상기 모션 영상 생성 수단(7')으로 통보하게 구성된다. 또한 상기 모션 영상 생성 수단(7')은 사용자가 선택한 캐릭터 영상 파일(4)과 춤 스타일별의 동작 특성 파일(5') 데이터 베이스와 상기 음향 분석 수단(13)으로부터 통보 받은 박자, 장단, 음악 스타일에 관한 정보를 이용하여 음악 스타일에 맞는 춤 스타일(동작 특성)을 스스로 결정하고 이 결정된 춤 스타일에 관련된 동작 특성 파일을 하나 또는 다수를 교대로 이용하여서 음악에 맞는 춤동작을 하는 캐릭터 영상을 생성하되 상기에서 축출된 박자와 장단에 맞게 동작하게 하다. 자연스러운 동작을 위해서는 대략 1 초당 20-30 프레임의 캐릭터 영상을 생성하게 구성된다. 여기서 사용자가 직 접 춤 스타일을 지정하게 구성할 수도 있다. 그러면 지정된 춤 스타일의 동작 특성 파일을 이용하여 상기 캐릭터의 영상을 생성한다. 여기서 본 발명의 실시 예 1의 동작 파일(5)이나 실시 예 2의 동작 특성 파일(5')은 반드시 몸 전체의 동작에 관한 정보를 담을 필요는 없다. 때로는 얼굴 부위나 상반신의 동작에 관한 정보만을 담을 수도 있음은 물론이다. 또한 본 실시 예의 동작 특성 파일(5')은 춤 스타일별 주요 특징적인 동작에 대한 모션 캡쳐 된 데이터들로 구성될 수도 있으며 이 경우엔 동작이 매우 자연스러운 특징이 있다. 또한 본 실시 예의 구성 중 상기 동작 특성 파일(5')을 박자별, 음악 장르별로 구분되어 준비되게 구성하고 또한 제법 긴 시간 동안(통상의 한 곡의 최대 실행 시간 정도의 시간)의 임의 음악(박자별 장르별의 임의 음악)의 연주에 의한 실제 춤동작을 모션 캡쳐 하여서 만들어진 데이터를 이용하여 상기 동작 특성파일(5')을 구성 할 수도 있다. 이 경우에는 같은 장르의 같은 박자의 음악에서는 곡에 관계없이 동일한 춤동작을 보여준다.

[작용]

상기와 같이 구성되는 본 실시 예 2의 작용은 다음과 같다.

제 3도에서, 본 발명의 음향 및 영상 장치(12')로 파일들이 통신망(2)을 통하여 서비스 제공자(1)로부터 전송되어 제공되거나 아니면 데이터 저장 수단(CD 등)으로부터 제공되면, 상기 파일 분리 수단(11)에 의해서 캐릭터 영상 파일(4)과 동작 특성 파일(5')과 음향 파일(6)로 각각 분리되어 메모리(도시하지 않음)에 저장된다. 사용자(3)의 조작에 의해 음향 및 영상의 재생이 개시되면, 상기 음향 파일(6)은 공지의 음향 재생 수단(8)에 의해 일정 시간 동안 음향 신호로 재생되어 우선 상기 음향 분석 수단(13)으로 먼저 보내진다. 이때 상기 음향 재생 수단에 연결된 스피커(10)로는 음향을 출력시키지 않는다. 상기 음향 신호를 전달받은 상기 음향(음악) 분석 수단(13)에서는 음향(음악)의 박자, 장단, 강약, 멜로디 구성 등 음악에 관련된 각종 정보가 분석되어 그 결과를 상기 모션 영상 생성 수단(7')으로 보내고 동시에 음향(음악)의 분석이 완료됐음을 알리는 신호를 상기 음향 재생 수단으로 보낸다. 그러면 상기 음향 재생 수단(8)은 상기의 음향 분석이 완료 됐음을 알리는 상기 음향(음악) 분석 수단(13)으로부터 통보되는 분석 완료 신호에 의해 다시 작동이 개시되어서 상기 음향 파일(6)을 아날로그 음향(음악)으로 재생하고 이를 스피커(10)를 통하여 사용자(3)에게 들려주고 또한 재생된 음향 신호를 상기 모션 영상 생성 수단(7')으로도 보낸다. 그러면 상기 모션 영상 생성 수단(7')은 재생된 음향(음악)의 박자와 장단 등에 동기 되게 캐릭터 영상들을 생성하여 상기 화면 수단(9)으로 보낸다. 이때 상기 모션 영상 생성 수단(7')에서는 각종의 춤 스타일별의 동작 특성 파일(5')중에서 상기 음향 분석 수단(13)에서 분석된 음향(음악) 분석 결과에 가장 적합한 동작 특성 파일을 하나 또는 여러 개 선택하고 이를 단독 또는 복합적으로 교대로 이용하여 캐릭터의 춤 스타일을 만들어 간다. 즉, 만약 빠르고 강약이 분명하고 멜로디 스타일이 마이클 잭슨 음악 스타일로 분석되면 상기 동작 특성 파일(5')중에서 마이클 잭슨 스타일의 춤동작에 관한 정보가 들어간 동작 특성 파일(5')을 선택한 후 이를 반복적으로 이용하여서 마이클 잭슨의 춤동작대로 동작되는 모습의 캐릭터 영상을 대략 1 초당 20-30 프레임 정도로 생성한 후 이를 화면 수단(9)으로 보낸다 그러면 사용자(3)눈의 잔상 현상에 의해 캐릭터 가 마치 음악에 맞추어 춤을 추는 동영상으로 보이게 된다. 이때 캐릭터가 추는 춤 스타일은 본 발명의 음악(음향) 분석 수단(13)의 분석 결과에 따라 스스로 선택한 춤 스타일이 된다. 즉, 음악의 박자와 장단에 맞추어 스스로 선택한 춤 스타일로 춤추는 캐릭터의 동영상을 음향과 함께 보고 듣게 된다. 이때 각 동작의 시작 시점과 끝나는 시점이 음향(음악)의 박자와 장단 신호에 맞게끔 상기 캐릭터의 영상이 화면 생성된다. 또 다른 예로는, 멜로디가 서정적인 음악으로 분석된 경우에는 서정적인 분위기일 때의 춤동작에 관련된 동작 특성 파일이 선정되고 이에 따라 캐릭터가 움직이게 캐릭터 영상이 생성된다. 예를 들어 음향(음악) 분석 수단(13)에서 분석된 음향에 대한 분석결과가 민요풍의 음악으로 분석된 경우에는 민요풍의 춤동작을 표현하는 준비된 다수의 춤동작 패턴들 중에서 이에 가장 적합한 패턴의 춤동작을 선택한 후 이 스타일의 춤동작이 음향(음악)의 박자와 장단에 동기 되어 춤추게끔 캐릭터 영상을 생성한다. 필요시엔 멜로디의 고저나 멜로디의 구성 형태로 판단된 음악의 정서를 분석하여서 그에 맞는 몇 개의 춤동작 패턴이 교대로 선택되고 이에 따라 캐릭터의 모션 영상이 생성되게 구성할 수도 있다. 이 경우 캐릭터의 춤동작이 보다 더 다양해지는 특징이 있다. 여기서 본 실시 예에서는 캐릭터가 음악의 박자와 장단에 맞추어 스스로 춤의 스타일을 결정하여 춤을 추게 구성하였지만 필요시엔 사용자가 춤의 스타일(예: 민요 스타일, 재즈 스타일, 트위스트 스타일, 트로트 스타일, 랩 스타일 등)을 지정하게 구성할 수도 있다. 이 경우엔 지정된 춤 스타일의 춤을 음향(음악)의 박자와 장단에 맞추어 춤추는 캐릭터의 영상들을 상기 모션 영상 생성 수단(7')이 생성하게 된다. 이런 경우에는 통상 경험적으로 알고 있는 특정 음악에 맞는 춤동작과는 전혀 다른 춤동작으로 동영상을 만들 수도 있어서 또 다른 즐거움을 줄 수도 있다. 예를 들어서 트로트 음악을 선택하고 또한 재즈 스타일의 동작 특성을 선택하였다면 캐릭터는 재즈 스타일의 춤을 트로트 음악의 박자와 장단에 맞추어 춤추는 동영상을 보여주면서 선택된 트로트 음악을 들려주게 된다. 본 실시 예에서는 캐릭터가 스스로 특정 음악에 맞는 춤 스타일을 결정하고 또한 박자와 장단에 맞추어 춤을 춤으로 인하여 서비스 제공자(1)나 사용자(3)는 물론 누구도 캐릭터가 어떤 춤을 출지 사전에 예측하기 어려우며 따라서 때때로 예측하지 않은 춤이나 몸 동작으로 또 다른 즐거움을 줄 수도 있는 특징이 있다. 상기 모션 영상 생성 수단(7')에서 음악에 맞는 최적의 동작 특성 파일(5')을 선택하거나, 음악의 정서에 맞는 캐릭터 신체 각 부위의 움직임을 위한 판단에 공지의 인공지능 기법을 이용하면 보다 더 자연스러운 춤동작이 가능할 것이다. 본 실시 예에서도 캐릭터를 한 개만 사용하여 사용자가 선택할 수 없도록 구성할 수도 있음은 물론이며, 또 다른 구성으로써 다수의 캐릭터가 다수의 춤 스타일로 각각 춤추는 영상들이 한 화면에서 동시에 구현되게 할 수도 있음은 물론이다.

본 실시 예의 구성 중 상기 동작 특성 파일(5')이 박자별, 음악 장르별로 구분되어서 데이터 베이스로 구축되어 준비되고 또한 제법 긴 시간 동안(통상의 한 곡의 최대 실행 시간 정도의 시간)의 박자별, 장르별의 임의 음악의 연주에 의한 실제 춤동작을 모션 캡쳐 하여서 만들어진 데이터를 이용하여 상기 동작 특성 파일(5')들이 구성된 경우에는, 상기 음향(음악) 분석 수단에서 분석된 음악의 장 르와 박자 정보를 이용하여 이에 연계된 동작 특성 파일(5')을 선택하고, 상기 선택된 동작 특성 파일(5')에 따라 캐릭터의 영상을 생성할 수도 있다. 이 경우에는 음악의 멜로디 특성이나 곡명에 관계없이 같은 장르의 같은 박자의 곡에서는 언제나 같은 춤 스타일의 같은 춤동작이 구현된다. 이 경우에도 음향(음악)에 동기 되어 캐릭터가 움직이게 함은 물론이다.

지금까지 상술한 본 발명 실시 예 1 및 실시 예 2에 있어서, 캐릭터 영상 주변의 배경 화면에 관련된 파일들도 함께 준비하여서 다양한 배경 화면상에서 캐릭터가 동작하게 할 수도 있다. 이러한 배경 화면용 파일도 서비스 제공자(1) 사용자(3) 선택에 의해 전송하여 제공하거나 또는 데이터 기록 수단에 저장된 배경 화면용 파일들 중에서 사용자가 선택하여서 본 발명의 음향 및 영상 장치에 제공되며, 배경 화면과 캐릭터 영상의 합성 기술은 공지된 기술임은 물론이다.

[효과]

본 실시 예의 효과는 다음과 같다.

본 실시 예는 상기 실시 예 1의 효과도 갖으면서 다음의 효과도 갖는다. 즉, 본 실시 예의 캐릭터는 사전에 결정되지 않은 전혀 예상하지 않은 춤동작을 보여주는 효과가 있다. 또한 서비스 제공자(1) 각 음악에 연계된 춤동작에 관련된 동작 파일들을 음악별로 일일이 모두 준비하지 않아도 되는 효과가 있다. 또한 본 실시 예는 음악에 맞는 춤을 스스로 판단하여 춤동작을 결정함으로써 예측하지 못하는 다양한 춤동작을 보여줄 수 있는 효과도 있다. 또한 서비스 제공자는 음향(음악) 파일뿐만 아니라 캐릭터 영상 파일과 동작 특성 파일도 판매할 수 있어서 매출을 증대시킬 수 있는 효과도 있다.

지금까지 상술한 실시 예 1 및 실시 예 2의 구성에 있어서, 상기 모션 영상 생성 수단(7)(7')을 사용자 측에 설치하지 않고 서비스 제공자(1) 측에 설치하여 상기 서비스 제공자(1)측에서 캐릭터의 동영상을 생성하고 이를 사용자측으로 통신망을 통하여 공급하게 구성 할 수도 있음은 물론이다. 이 경우 사용자는 이를 다운 받아 저장한 후 동영상을 즐길 수도 있고, 아니면 실시간으로 실행시켜서 동영상을 즐길 수도 있다. 이 경우는 사용자 측의 음향 및 영상 장치가 성능이 미흡하여서 상기 모션 영상 생성 수단용 소프트웨어를 설치할 수 없는 경우에 유용하다.

.

Claims

통상의 화면 수단을 갖는 음향 및 영상 장치에 있어서,

파일 분리 수단과, 모션 영상 생성 수단과, 스피커가 연결된 음향 재생 수단과, 화면 수단을 음향 및 영상 장치 내에 설치 구성하되 상기 모션 영상 생성 수단과 상기 화면 수단이 상호 연결되게 구성하고, 또한 상기 음향 재생 수단으로부터 나오는 음향 신호에 동기 되어 상기 모션 영상 생성 수단이 작동되게 구성하고, 또한 외부(통신망, 데이터 기록 장치 등)로부터 제공되는 파일이 상기 파일 분리 수단에 의해 사용자가 선택한 동영상용 캐릭터 영상 파일과, 상기 캐릭터의 음향(음악, 강의 등) 정보가 포함된 음향(음악, 강의 등) 파일과, 상기 음향 파일에 연계되고 또한 상기 캐릭터의 동작 정보가 포함된 선택된 동작(춤) 스타일의 동작 파일로 각각 분리되어 메모리에 저장되게 구성하고, 또한 상기 음향 파일은 음향 재생 수단으로 공급되어 스피커를 통하여 음향으로 재생되고, 상기 캐릭터 영상 파일과 상기 동작 파일은 상기 모션 영상 생성 수단으로 공급되고 이곳에서 상기 동작 파일의 일정 시간 간격마다의 동작 정보(캐릭터의 여러 신체 부위의 특정 지점들의 일정 시간 간격마다의 위치 정보)에 따라 일정 시간 간격마다의 캐릭터 동작용 영상을 생성하고, 생성된 상기 캐릭터 영상을 상기 음향 재생 수단의 음향 신호에 동기 되면서 상기 화면 수단으로 보내어 보여지게 하여서, 상기 음향 재생 수단을 통하여 캐릭터가 표현하고자 하는 음향(음악, 강의 등)이 표현되고 또한 상기 화면 수단에서는 상기 음향(음악, 강의 등)에 동기 되어 캐릭터가 움직이는 동영상을 보 여주게 작동되어서, 비디오 영상 파일 없이도 캐릭터의 동영상이 구현되는 구성을 특징으로 하는 음향에 동기 된 캐릭터 동영상 구현 장치.
통상의 화면 수단을 갖는 음향 및 영상 장치에 있어서,

음향 및 영상 장치 내에 스피커가 연결된 음향 재생 수단과, 음향 분석 수단과, 모션 영상 생성 수단과, 파일 분리 수단과 화면 수단을 각각 설치 구성하고, 상기 음향 분석 수단은 상기 음향 재생 수단으로부터 음향 신호를 공급받아 이를 박자, 장단, 멜로디 특성 등을 분석하고 이 결과를 상기 모션 영상 생성 수단으로 전송 되게 구성하고, 또한 상기 파일 분리 수단에 의해 분리되어 메모리에 저장된 캐릭터 영상 파일과 동작 특성 파일도 상기 모션 영상 생성 수단으로 전송 되게 구성되고, 또한 상기 파일 분리 수단에 의해 분리되어 메모리에 저장된 음향 파일은 상기 음향 재생 수단으로 전송되어 이곳에서 재생되게 구성하되 음향(음악) 분석을 위한 재생 시간 동안에는 스피커로는 신호가 전달되지 않게 구성하고, 음향(음악) 분석 완료 신호에 의해 음향(음악)재생이 개시된 때는 재생된 음향(음악)을 상기 스피커와 상기 모션 영상 생성 수단으로 전달되게 구성하고, 또한 상기 모션 영상 생성 수단에는 상기 화면 수단을 연결하여 구성하여서, 상기 음향 파일이 상기 음향 재생 수단에서 음향으로 재생되어 스피커를 통하여 음향(음악, 강의 등)이 들려지고, 또한 상기 모션 영상 생성 수단에서는 상기 음향 분석 수단에서 제공한 음향(음악)의 박자와 장단과 멜로디 특성에 대한 정보를 이용하여 이에 적합한 동작 특성 파일을 선택하고, 이 선택된 동작 특성의 동작으로 움직일 수 있도록 된 일정 시간 간격마다의 캐릭터 연속 동작용 영상들을 생성하되, 상기 생성된 영상들이 만드는 동작의 시작 시점과 끝나는 시점이 상기 음향(음악) 분석 수단에서 분석한 박자와 장단에 맞게 끔 캐릭터 영상들을 생성하고, 상기 생성된 캐릭터 영상들을 상기 화면 수단으로 보내어서 사용자에게 캐릭터의 동영상이 보여지게 구성하여서, 상기 음향 및 영상 장치에 제공된 음향(음악)에 적합한 춤동작을 스스로 분석 판단하여 결정한 후 이를 음향에 동기 된 동작(춤)으로 실현하는 구성을 특징으로 하는 음향에 동기 된 캐릭터 동영상 구현 장치.
유무선 통신망을 통하여 파일을 전송 받아 장치에 설치하고 이를 실행시킴으로써 동영상이 실현되는 것을 포함하는 통상의 동영상 실현 방법에 있어서,

서비스 제공자가 각종 캐릭터 영상 파일들과, 음향(음악)파일들과, 음향 파일에 연계되고 동작에 관련된 파일(동작 파일, 동작 특성 파일)들을 컴퓨터 내에 데이터 베이스로 구축하여 보관 및 전시하고, 상기 서비스 제공자와 유무선 통신망으로 연결된 사용자의 구매행위에 의해 선택된 음향(음악) 파일과, 캐릭터 영상 파일과, 음향에 연계되고 동작에 관련된 파일(동작 파일, 동작 특성 파일)들을 유무선 통신망을 통하여 사용자의 음향 및 영상 장치로 전송하고, 사용자의 음향 및 영상 장치(청구항 1항에 따른 장치, 청구항 2항에 따른 장치 등)내에 설치 구성된 파일 분리 수단과, 음향 재생 수단과, 모션 영상 생성 수단을 이용하고 또한 필요시엔 음향 분석 수단을 이용한 동작에 관련된 파일의 종류를 선택하게 하여서, 상기 전송된 파일들 중에서 캐릭터 영상 파일과, 음향(음악) 파일과, 동작에 관련된 파 일(동작 파일, 동작 특성 파일)이 각각 분리되어 저장되고, 상기 음향 재생 수단으로 상기 음향 파일이 아날로그 음향(음악, 강의 등)으로 재생되고, 상기 캐릭터 영상 파일과 상기 동작에 관련된 파일(동작 파일, 동작 특성 파일)을 이용하여 상기 모션 영상 생성 수단에서는 캐릭터의 연속 동작상의 영상들을 생성하여 상기 음향에 동기 되면서 화면 수단으로 보내어서 서비스 제공자가 제공한 음향 파일과 동작에 관련된 파일(동작 파일, 동작 특성 파일)과 캐릭터 영상 파일을 이용하여 캐릭터 동영상이 음향에 동기 되어 실현되는 방법을 특징으로 하는 음향에 동기 된 캐릭터 동영상 실현 방법.
사운드 신호와 영상 신호가 저장된 통상의 데이터 저장 수단(CD 등)에 기록된 데이터를 읽어서 음향 및 영상을 실현시키는 방법을 포함한 통상의 음향 및 동영상 실현 방법에 있어서,

음향 파일들과, 신체 각 부위가 따로 만들어진 후 합체되어서 된 캐릭터 영상 파일들과, 동작에 관련된 파일(동작 파일, 동작 특성 파일)들과, 필요시엔 파일 분리 수단용 파일과 모션 영상 생성용 파일이 저장된 데이터 기록 수단(CD, 비디오 CD, 하드디스크 등)을 구성하고, 상기 데이터 기록 수단을 플레이 시켜 데이터를 읽을 수 있는 수단이 겸비된 음향 및 영상 장치(청구항 1항에 따른 장치, 청구항 2항에 따른 장치 등)로 상기 데이터 기록 수단에 기록된 파일들을 읽고, 사용자의 음향 및 영상 장치(청구항 1항에 따른 장치, 청구항 2항에 따른 장치 등)내에 설치 구성된 파일 분리 수단과, 음향 재생 수단과, 모션 영상 생성 수단을 이용하고 또 한 필요시엔 음향 분석 수단을 이용한 동작에 관련된 파일의 종류를 선택하게 하여서, 상기 읽혀진 파일들 중에서 캐릭터 영상 파일과, 음향(음악) 파일과, 동작에 관련된 파일(동작 파일, 동작 특성 파일)이 각각 분리되어 저장되고, 상기 음향 재생 수단으로 상기 음향 파일이 아날로그 음향(음악, 강의 등)으로 재생되고, 상기 캐릭터 영상 파일과 상기 동작에 관련된 파일(동작 파일, 동작 특성 파일)을 이용하여 상기 모션 영상 생성 수단에서는 캐릭터의 연속 동작상의 영상들을 생성하여 상기 음향에 동기 되면서 화면 수단으로 보내어서 캐릭터 동영상이 음향에 동기 되어 실현되는 방법을 특징으로 하는 음향에 동기 된 캐릭터 동영상 실현 방법.
음향 파일과 영상 파일이 기록된 통상의 데이터 기록 수단(CD, 비디오 CD, 등)에 있어서,

음향 파일들과, 신체 각 부위가 따로 만들어진 후 합체되어서 된 캐릭터 영상 파일들과, 동작에 관련된 파일(동작 파일, 동작 특성 파일)들과, 필요시엔 파일 분리 수단용 파일과 모션 영상 생성용 파일이 저장되어서 데이터 기록수단을 읽을 수 있는 장치가 겸비된 음향 및 영상 장치(청구항 1항에 따른 장치, 청구항 2항에 따른 장치 등)에서 플레이시킬 때 상기 청구항 1항 및 청구항 2항의 따른 작동에 의해서 비디오 영상 파일 없이도 음향에 동기 된 캐릭터 동영상을 실현할 수 있는 구성을 특징으로 하는 휴대형 데이터 기록 수단(CD, 비디오 CD, 하드디스크, 메모리, 디스켓 등).
상기 청구항 3에 있어서,

모션 영상 생성 수단을 서비스 제공자 측에 설치하고 서비스 제공자 측에서 생성한 캐릭터 영상을 사용자가 전송 받아서 캐릭터 동영상을 실현하는 방법을 특징으로 하는 음향에 동기 된 캐릭터 동영상 실현 방법.