JPH10326353A - Three-dimensional character animation display device, and three-dimensional motion data transmission system - Google Patents

Three-dimensional character animation display device, and three-dimensional motion data transmission system

Info

Publication number
JPH10326353A
JPH10326353A JP13382997A JP13382997A JPH10326353A JP H10326353 A JPH10326353 A JP H10326353A JP 13382997 A JP13382997 A JP 13382997A JP 13382997 A JP13382997 A JP 13382997A JP H10326353 A JPH10326353 A JP H10326353A
Authority
JP
Japan
Prior art keywords
dimensional
data
grid
space
points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP13382997A
Other languages
Japanese (ja)
Inventor
Kenjiro Tsuda
賢治郎 津田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP13382997A priority Critical patent/JPH10326353A/en
Publication of JPH10326353A publication Critical patent/JPH10326353A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To easily generate the motion of a deformed character without using any complicated physical data, by placing a three-dimensional object in a three- dimensional grid space and generating the motion of the three-dimensional character to display it as the frame data based on the three-dimensional motion data. SOLUTION: A three-dimensional position calculation means 10 places a three-dimensional object in a three-dimensional grid space and makes the parts joint points of the three-dimensional object and the grid points of the three- dimensional grid space correspond to each other based on the three-dimensional motion data. A texture mapping means 12 sticks the prescribed texture data onto the surface of the three-dimensional object. Then a perspective conversion means 13 projects the three-dimensional object on a two-dimensional display screen from a coordinate position set in a three-dimensional space and applies the coordinate conversion to the three-dimensional object to obtain the image data. A frame memory means 14 stores the image data as the frame data, and an image display means 15 displays the frame data.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】この発明は、3次元コンピュ
ータグラフィックスの技術において、大量のデータを用
いることなく、簡易にキャラクタの動きを生成して表示
する3次元キャラクタアニメーション表示装置、及び、
この3次元キャラクタアニメーション表示装置における
キャラクタの動きの生成に必要なデータのいずれかを、
通信手段を用いて伝送する3次元動きデータ伝送システ
ムに関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a three-dimensional computer graphics technology, and more particularly, to a three-dimensional character animation display device for easily generating and displaying character movements without using a large amount of data, and
Any of the data required to generate the movement of the character in the three-dimensional character animation display device
The present invention relates to a three-dimensional motion data transmission system for transmitting data using communication means.

【0002】[0002]

【従来の技術】近年、テレビ番組や映画などにおいて、
3次元コンピュータグラフィックスの技術による3次元
キャラクタアニメーションが盛んに用いられるようにな
り、また、この3次元キャラクタアニメーションを用い
たゲートソフトなども数多く制作され、3次元コンピュ
ータグラフィックスの技術が広く普及している。
2. Description of the Related Art In recent years, in television programs and movies,
Three-dimensional character animation using three-dimensional computer graphics technology has become popular, and many gate software and the like using this three-dimensional character animation have been produced. ing.

【0003】上記3次元キャラクタアニメーションに登
場するキャラクタとしては、人物,動物,擬人化された
物体などが多く用いられ、このようなキャラクタの動き
は、図18に示すように、該キャラクタの関節点(図1
8(a) )を結んだスケルトン構造体(図18(b) )の関
節角の変化,関節点の移動などによって、スケルトン構
造体の変形(図18(c) )として表現されることが多
い。このようなスケルトン構造体の変形によってキャラ
クタの動きを表現する場合には、図19(a) ,19(b)
に示すように多関節モデルを定義して、様々な動きに対
応した、関節角の変化の度合い,関節点の移動距離など
の物理的データを、あらかじめデータベース化したもの
を用いるか、若しくは、関節角の変化の度合い,関節点
の移動距離などの物理的データを更新していくことによ
って、随時、動きを生成する。また、後者の場合、これ
らの更新した物理的データを、3次元キャラクタの動き
を表現するデータとして用いるには、例えば、図19に
おいて、(a) に示す関節モデルを、(b) に示す3次元キ
ャラクタを示す3次元オブジェクトの部品A及びBに置
き換え、該関節モデルを(a) から(c) にしたときの物理
的データを、部品Aのa,b,c,d,e,f,g,及
びhの6つの頂点の位置に適用して、部品Aの(b) から
(d) への動きを生成する。
As the characters appearing in the three-dimensional character animation, a person, an animal, an anthropomorphic object, and the like are used in many cases. (Figure 1
8 (a)) is often expressed as a deformation of the skeleton structure (FIG. 18 (c)) due to a change in the joint angle and movement of the joint point of the skeleton structure (FIG. 18 (b)). . When the movement of the character is expressed by such deformation of the skeleton structure, FIGS. 19 (a) and 19 (b)
A multi-joint model is defined as shown in Fig. 3 and physical data such as the degree of change of the joint angle and the moving distance of the joint point corresponding to various movements are stored in a database in advance. By updating physical data such as the degree of change of the angle and the moving distance of the joint point, the movement is generated as needed. In the latter case, in order to use these updated physical data as data expressing the motion of the three-dimensional character, for example, in FIG. 19, the joint model shown in (a) is replaced with the joint model shown in (b). The physical data when the joint model is changed from (a) to (c) is replaced with the parts A, B, c, d, e, f, and Applying to the positions of the six vertices of g and h, from (b) of part A
Generate the movement to (d).

【0004】[0004]

【発明が解決しようとする課題】しかしながら、前者の
ようにデータベース化した場合は、データベースに存在
する以外の動きを表現することができず、一方、後者の
随時更新する場合には、すべての関節について上記物理
的データをいちいち指定しなければならなかった。ま
た、これらの指定された物理的データを、3次元キャラ
クタの動きを表現するデータとして用いるには、上述の
ように、3次元オブジェクトの3次元座標位置に対応さ
せなければならず、データ量が多くなるという問題点が
あった。
However, when a database is used as in the former case, motions other than those existing in the database cannot be expressed. On the other hand, when the latter is updated at any time, all joints cannot be expressed. The above-mentioned physical data had to be specified one by one. Further, in order to use these designated physical data as data expressing the movement of a three-dimensional character, it is necessary to correspond to the three-dimensional coordinate position of the three-dimensional object, as described above. There was a problem that it would increase.

【0005】また、コンピュータグラフィックスの世界
は、シュミレーションの世界とは異なり、現実世界と必
ずしも一致する必要はなく、現実世界と異なるデフォル
メが表現の効果として多用され、コミカルな動きがユー
ザを楽しませる効果として用いられている。従って,3
次元キャラクタアニメーションにおいては、関節角の変
化の度合い,関節点の移動距離などの物理的データに必
ずしも厳密性を追求する必要はなく、複雑な物理的デー
タを用いることなく、簡易にデフォルメされたキャラク
タの動きを生成することが求められている。
Also, unlike the world of simulation, the world of computer graphics does not necessarily have to match the real world, and deformations different from the real world are often used as effects of expression, and comical movements entertain the user. Used as an effect. Therefore, 3
In three-dimensional character animation, it is not always necessary to pursue strictness in physical data such as the degree of change in joint angles and the movement distance of joint points, and a simple deformed character is used without using complicated physical data. There is a need to generate motions of

【0006】この発明は、上記の問題点を解消するため
になされたもので、3次元コンピュータグラフィックス
の技術において、関節点を結んだスケルトン構造体の変
形を示す複雑な物理的データを用いることなく、簡易に
3次元キャラクタのアニメーションを生成して表示する
ことができる3次元キャラクタアニメーション表示装
置、及び、この3次元キャラクタアニメーション表示装
置におけるキャラクタの動きの生成に必要なデータのい
ずれかを、通信手段を用いて伝送することにより、少な
いパラメータで効率よく3次元キャラクタの動きを生成
することができる3次元動きデータ伝送システムを提供
することを目的とする。
SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problem, and in the art of three-dimensional computer graphics, using complicated physical data indicating deformation of a skeleton structure connecting joint points. A three-dimensional character animation display device capable of easily generating and displaying a three-dimensional character animation, and communicating any one of data necessary for generating a character movement in the three-dimensional character animation display device. It is an object of the present invention to provide a three-dimensional motion data transmission system that can efficiently generate a three-dimensional character motion with a small number of parameters by transmitting using a means.

【0007】[0007]

【課題を解決するための手段】上記課題を解決するため
に、本発明(請求項1)にかかる3次元キャラクタアニ
メーション表示装置は、3次元キャラクタの動きを生成
して、画像表示する3次元キャラクタアニメーション表
示装置であって、3次元空間の任意の座標点に相当する
複数のグリッド点とこれを結ぶワイヤフレームよりなる
3次元グリッド空間の形状を記述した3次元グリッド空
間形状データに基づいて、上記3次元グリッド空間を3
次元空間に配置し、3次元キャラクタである、1つ又は
複数の任意の形状を有する3次元部品から構成される3
次元オブジェクトの形状を記述した3次元形状データ、
及び、上記3次元部品の空間内に位置する当該3次元部
品を代表する点である1つ又は2つの代表点と、上記複
数のグリッド点から選択されたグリッド点との対応関係
の時間軸変化を示した3次元動きデータに基づいて、上
記3次元オブジェクトを、上記3次元グリッド空間内に
配置し、上記3次元動きデータに基づいて、上記3次元
キャラクタの動きを生成する3次元位置計算手段と、上
記3次元オブジェクトの面に所定のテクスチャデータを
貼り付けるテクスチャマッピング手段と、上記3次元オ
ブジェクトを、該3次元オブジェクトの3次元空間内で
の座標位置から2次元ディスプレイ面へ投影し、座標変
換してイメージデータを作成する透視変換手段と、上記
イメージデータをフレームデータとして記憶するフレー
ムメモリ手段と、上記フレームデータを表示する画像表
示手段とを備えたものである。
In order to solve the above-mentioned problems, a three-dimensional character animation display device according to the present invention (claim 1) generates a three-dimensional character movement and displays the three-dimensional character image. An animation display device based on three-dimensional grid space shape data describing a shape of a three-dimensional grid space including a plurality of grid points corresponding to arbitrary coordinate points in the three-dimensional space and a wire frame connecting the grid points; 3D grid space 3
A three-dimensional component that is arranged in a three-dimensional space and that is a three-dimensional character and has one or more arbitrary shapes
Three-dimensional shape data describing the shape of a three-dimensional object,
And a time axis change of a correspondence relationship between one or two representative points located in the space of the three-dimensional component and representing one of the three-dimensional components and a grid point selected from the plurality of grid points. Means for arranging the three-dimensional object in the three-dimensional grid space based on the three-dimensional motion data indicating the three-dimensional motion data, and generating the motion of the three-dimensional character based on the three-dimensional motion data Texture mapping means for pasting predetermined texture data on the surface of the three-dimensional object, and projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface, Perspective transformation means for converting to create image data, frame memory means for storing the image data as frame data, It is obtained by an image display means for displaying the serial frame data.

【0008】また、本発明(請求項2)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、上記3次元動きデータに基
づいて、上記代表点と対応する上記選択されたグリッド
点とを記述した対応テーブルを生成し、上記対応テーブ
ルの上記代表点と上記グリッド点との対応関係を、上記
3次元動きデータに基づいて、変更して、時間軸方向に
記憶する記憶手段をさらに備えたものである。
The three-dimensional character animation display device according to the present invention (claim 2) is a three-dimensional character animation display device according to claim 1,
The three-dimensional position calculation means generates a correspondence table describing the representative points and the selected grid points corresponding to the representative points based on the three-dimensional motion data, and generates the correspondence points between the representative points and the grid points in the correspondence table. Is further provided with a storage means for changing the correspondence relationship with the above based on the three-dimensional motion data and storing the changed relationship in the time axis direction.

【0009】また、本発明(請求項3)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、上記3次元部品を、上記2
つの代表点を通る直線である中心軸の軸方向に伸縮する
ことによって、上記2つの代表点とそれぞれ対応関係に
ある2つのグリッド点との距離を調節するものである。
Further, the three-dimensional character animation display device according to the present invention (claim 3) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means converts the three-dimensional part into the two-dimensional part.
By expanding and contracting in the axial direction of the central axis which is a straight line passing through the two representative points, the distance between the two representative points and the two grid points corresponding to each other is adjusted.

【0010】また、本発明(請求項4)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、複数の異なる形状の3次元
グリッド空間を記述した上記3次元グリッド空間形状デ
ータに基づいて、上記3次元グリッド空間を異なる形状
に変更するものである。
[0010] Also, the three-dimensional character animation display device according to the present invention (claim 4) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means changes the three-dimensional grid space to a different shape based on the three-dimensional grid space shape data describing a plurality of differently shaped three-dimensional grid spaces.

【0011】また、本発明(請求項5)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、3次元グリッド位置変更デ
ータを3次元動きデータとして用い、該3次元グリッド
位置変更データ、上記3次元部品の2つの代表点を通る
直線からなる中心軸の一部分であって、該中心軸と交わ
り、該3次元部品の空間の外側、かつ、該2つの関節点
からそれぞれ最短に位置する2つのグリッド点に挟まれ
た部分中心軸を含む3次元グリッド空間のみを、当該部
分中心軸を変形することなく、変形した後、当該3次元
グリッド位置変更データを用いて、3次元オブジェクト
を変形するものである。
Further, the three-dimensional character animation display device according to the present invention (claim 5) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means uses the three-dimensional grid position change data as three-dimensional movement data, and the three-dimensional grid position change data is a part of a central axis formed by a straight line passing through two representative points of the three-dimensional component. Only the three-dimensional grid space that intersects with the central axis and includes the partial central axis outside the space of the three-dimensional component and between the two grid points located at the shortest from the two joint points, respectively, After the partial center axis is deformed without being deformed, the three-dimensional object is deformed using the three-dimensional grid position change data.

【0012】また、本発明(請求項6)にかかる3次元
キャラクタアニメーション表示装置は、請求項1又は請
求項5に記載の3次元キャラクタアニメーション表示装
置において、上記3次元位置計算手段は、上記3次元グ
リッド空間、及び、3次元オブジェクトを上記2次元デ
ィスプレイ面に投影した後、該2次元ディスプレイ面上
で、上記3次元動きデータに基づいて、2次元ディスプ
レイ面上での投影後の上記3次元キャラクタの動きを生
成するものである。
Further, the three-dimensional character animation display device according to the present invention (claim 6) is the three-dimensional character animation display device according to claim 1 or 5, wherein the three-dimensional position calculation means includes the three-dimensional position calculation means. After projecting a three-dimensional object onto the two-dimensional display surface, based on the three-dimensional motion data, the three-dimensional object after being projected on the two-dimensional display surface on the two-dimensional display surface. This is to generate the movement of the character.

【0013】また、本発明(請求項7)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、演奏データから抽出した演
奏パラメータ、又は、音声を分析して得た音声パラメー
タを変換することによって、上記3次元動きデータを生
成するものである。
The three-dimensional character animation display device according to the present invention (claim 7) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculation means generates the three-dimensional motion data by converting performance parameters extracted from performance data or voice parameters obtained by analyzing voice.

【0014】また、本発明(請求項8)にかかる3次元
動きデータ伝送システムは、3次元キャラクタの動きを
生成して、画像表示する3次元キャラクタアニメーショ
ン表示装置に、データ通信手段を用いて送信側からデー
タを伝送する3次元動きデータ伝送システムにおいて、
上記3次元アニメーション表示装置は、3次元空間の任
意の座標点に相当する複数のグリッド点とこれを結ぶワ
イヤフレームよりなる3次元グリッド空間の形状を記述
した3次元グリッド空間形状データに基づいて、上記3
次元グリッド空間を3次元空間に配置し、3次元キャラ
クタである、1つ又は複数の任意の形状を有する3次元
部品から構成される3次元オブジェクトの形状を記述し
た3次元形状データ、及び、上記3次元部品の空間内に
位置する当該3次元部品を代表する点である1つ又は2
つの代表点と、上記複数のグリッド点から選択されたグ
リッド点との対応関係の時間軸変化を示した3次元動き
データに基づいて、上記3次元オブジェクトを、上記3
次元グリッド空間内に配置し、上記3次元動きデータに
基づいて、上記3次元キャラクタの動きを生成する3次
元位置計算手段と、上記3次元オブジェクトの面に所定
のテクスチャデータを貼り付けるテクスチャマッピング
手段と、上記3次元オブジェクトを、該3次元オブジェ
クトの3次元空間内での座標位置から2次元ディスプレ
イ面へ投影し、座標変換してイメージデータを作成する
透視変換手段と、上記イメージデータをフレームデータ
として記憶するフレームメモリ手段と、上記フレームデ
ータを表示する画像表示手段とを備え、上記送信側は、
上記データ通信手段を介して、上記3次元グリッド空間
形状データ、上記3次元形状データ、上記テクスチャデ
ータ、及び、上記3次元動きデータのいずれか1つ以上
を送信するデータ送信サーバを設け、上記3次元キャラ
クタアニメーション表示装置は、上記データ送信サーバ
から送信しない残りのデータを保持するものである。
Further, the three-dimensional motion data transmission system according to the present invention (claim 8) generates a three-dimensional character motion and transmits it to a three-dimensional character animation display device for displaying an image using data communication means. In a three-dimensional motion data transmission system that transmits data from the side,
The three-dimensional animation display device is based on three-dimensional grid space shape data that describes the shape of a three-dimensional grid space consisting of a plurality of grid points corresponding to arbitrary coordinate points in a three-dimensional space and a wire frame connecting the grid points. 3 above
Three-dimensional shape data in which a three-dimensional object is arranged in a three-dimensional space, and is a three-dimensional character, and describes the shape of a three-dimensional object composed of one or more three-dimensional parts having an arbitrary shape One or two points that are located in the space of the three-dimensional component and represent the three-dimensional component
The three-dimensional object is converted to the three-dimensional object on the basis of three-dimensional motion data indicating a change in the time axis of the correspondence between the three representative points and the grid points selected from the plurality of grid points.
Three-dimensional position calculating means for arranging the three-dimensional character on the basis of the three-dimensional motion data, and a texture mapping means for pasting predetermined texture data on the surface of the three-dimensional object; A perspective transformation means for projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface and performing coordinate transformation to create image data; Frame memory means for storing as, and image display means for displaying the frame data, the transmitting side,
A data transmission server for transmitting one or more of the three-dimensional grid space shape data, the three-dimensional shape data, the texture data, and the three-dimensional motion data via the data communication means; The three-dimensional character animation display device holds the remaining data not transmitted from the data transmission server.

【0015】また、本発明(請求項9)にかかる3次元
キャラクタアニメーション表示装置は、3次元キャラク
タの動きを生成して、画像表示する3次元キャラクタア
ニメーション表示装置であって、3次元空間の任意の座
標点に相当する複数のグリッド点とこれを結ぶワイヤフ
レームよりなる3次元グリッド空間の形状を記述した3
次元グリッド空間形状データに基づいて、該3次元グリ
ッド空間を3次元空間へ配置し、当該3次元グリッド空
間内に、3次元キャラクタである3次元オブジェクトを
構成する部品のインデックスと、当該3次元グリッド空
間の複数のグリッド点のうち初期値として選択されたグ
リッド点により上記部品の位置とを記述した3次元オブ
ジェクト構成部品データに基づいて、該初期値として選
択されたグリッド点間に該部品を配置して、当該初期値
として選択されたグリッド点を当該部品の代表点と定義
し、該代表点と上記複数のグリッド点から選択されたグ
リッド点との対応関係の時間軸変化を示した3次元動き
データに基づいて、上記3次元キャラクタの動きを生成
する3次元位置計算手段と、上記3次元オブジェクトの
面に所定のテクスチャデータを貼り付けるテクスチャマ
ッピング手段と、上記3次元オブジェクトを、該3次元
オブジェクトの3次元空間内での座標位置から2次元デ
ィスプレイ面へ投影し、座標変換してイメージデータを
作成する透視変換手段と、上記イメージデータをフレー
ムデータとして記憶するフレームメモリ手段と、上記フ
レームデータを表示する画像表示手段とを備えたもので
ある。
Further, a three-dimensional character animation display device according to the present invention (claim 9) is a three-dimensional character animation display device for generating a motion of a three-dimensional character and displaying the generated image, wherein Which describes the shape of a three-dimensional grid space consisting of a plurality of grid points corresponding to the coordinate points and a wire frame connecting the grid points.
Based on the three-dimensional grid space shape data, the three-dimensional grid space is arranged in a three-dimensional space, and in the three-dimensional grid space, an index of a part constituting a three-dimensional object that is a three-dimensional character, and the three-dimensional grid Based on the three-dimensional object component data describing the position of the component by the grid point selected as the initial value among the plurality of grid points in the space, the component is arranged between the grid points selected as the initial value. Then, a grid point selected as the initial value is defined as a representative point of the component, and a three-dimensional graph showing a time axis change of a correspondence relationship between the representative point and a grid point selected from the plurality of grid points. A three-dimensional position calculating means for generating the motion of the three-dimensional character based on the motion data; Texture mapping means for pasting image data, and perspective transformation means for projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface and performing coordinate transformation to create image data. , Frame memory means for storing the image data as frame data, and image display means for displaying the frame data.

【0016】また、本発明(請求項10)にかかる3次
元キャラクタアニメーション表示装置は、請求項9に記
載の3次元キャラクタアニメーション表示装置におい
て、上記3次元位置計算手段は、上記3次元動きデータ
に基づいて、上記代表点と対応する上記選択されたグリ
ッド点とを記述した対応テーブルを生成し、上記対応テ
ーブルの上記代表点と上記グリッド点との対応関係を、
上記3次元動きデータに基づいて、変更して、時間軸方
向に記憶する記憶手段をさらに備えたものである。
In the three-dimensional character animation display device according to the present invention (claim 10), in the three-dimensional character animation display device according to claim 9, the three-dimensional position calculation means includes: Based on the above, a correspondence table describing the representative points and the selected grid points corresponding thereto is generated, and the correspondence between the representative points and the grid points in the correspondence table is
The information processing apparatus further includes a storage unit that changes the data based on the three-dimensional motion data and stores the data in the time axis direction.

【0017】また、本発明(請求項11)にかかる3次
元キャラクタアニメーション表示装置は、請求項9に記
載の3次元キャラクタアニメーション表示装置におい
て、上記画像表示手段は、上記フレームデータが表示さ
れるフレーム表示周期の時間内に、上記部品を、該部品
の代表点に変更する部品の代表点を一致させて、形態の
異なる部品に変更するものである。
In the three-dimensional character animation display device according to the present invention (claim 11), in the three-dimensional character animation display device according to claim 9, the image display means includes a frame on which the frame data is displayed. In the display period, the part is changed to a part having a different form by matching the representative point of the part to be changed to the representative point of the part.

【0018】また、本発明(請求項12)にかかる3次
元動きデータ伝送システムは、3次元キャラクタの動き
を生成して、画像表示する3次元キャラクタアニメーシ
ョン表示装置に、データ通信手段を用いて送信側からデ
ータを伝送する3次元動きデータ伝送システムにおい
て、上記3次元アニメーション表示装置は、3次元空間
の任意の座標点に相当する複数のグリッド点とこれを結
ぶワイヤフレームよりなる3次元グリッド空間の形状を
記述した3次元グリッド空間形状データに基づいて、該
3次元グリッド空間を3次元空間へ配置し、当該3次元
グリッド空間内に、3次元キャラクタである3次元オブ
ジェクトを構成する部品のインデックスと、当該3次元
グリッド空間の複数のグリッド点のうち初期値として選
択されたグリッド点により上記部品の位置とを記述した
3次元オブジェクト構成部品データに基づいて、該初期
値として選択されたグリッド点間に該部品を配置して、
当該初期値として選択されたグリッド点を当該部品の代
表点と定義し、該代表点と上記複数のグリッド点から選
択されたグリッド点との対応関係の時間軸変化を示した
3次元動きデータに基づいて、上記3次元キャラクタの
動きを生成する3次元位置計算手段と、上記3次元オブ
ジェクトの面に所定のテクスチャデータを貼り付けるテ
クスチャマッピング手段と、上記3次元オブジェクト
を、該3次元オブジェクトの3次元空間内での座標位置
から2次元ディスプレイ面へ投影し、座標変換してイメ
ージデータを作成する透視変換手段と、上記イメージデ
ータをフレームデータとして記憶するフレームメモリ手
段と、上記フレームデータを表示する画像表示手段とを
備え、上記送信側は、上記データ通信手段を介して、上
記3次元グリッド空間形状データ、上記3次元形状デー
タ、上記テクスチャデータ、及び、上記3次元オブジェ
クト構成部品データのいずれか1つ以上を送信するデー
タ送信サーバを設け、上記3次元キャラクタアニメーシ
ョン表示装置は、上記データ送信サーバから送信しない
残りのデータを保持するものである。
The three-dimensional motion data transmission system according to the present invention (claim 12) generates a three-dimensional character motion and transmits it to a three-dimensional character animation display device for displaying an image using data communication means. In the three-dimensional motion data transmission system for transmitting data from the side, the three-dimensional animation display device may include a plurality of grid points corresponding to arbitrary coordinate points in the three-dimensional space and a wire frame connecting the grid points. Based on the three-dimensional grid space shape data describing the shape, the three-dimensional grid space is arranged in the three-dimensional space. A grid point selected as an initial value among a plurality of grid points in the three-dimensional grid space More based on the three-dimensional object component data and the position described in the component, by placing the part between the selected grid points as initial values,
The grid point selected as the initial value is defined as a representative point of the part, and the three-dimensional motion data indicating the time axis change of the correspondence between the representative point and the grid point selected from the plurality of grid points is defined. A three-dimensional position calculating means for generating the movement of the three-dimensional character based on the three-dimensional object; a texture mapping means for attaching predetermined texture data to the surface of the three-dimensional object; A perspective transformation means for projecting from a coordinate position in a dimensional space to a two-dimensional display surface and performing coordinate transformation to create image data; a frame memory means for storing the image data as frame data; and displaying the frame data. Image transmitting means, and the transmitting side communicates with the three-dimensional grid via the data communication means. A data transmission server for transmitting any one or more of shape data, the three-dimensional shape data, the texture data, and the three-dimensional object component data; and the three-dimensional character animation display device includes the data transmission server. The remaining data that is not transmitted from is retained.

【0019】[0019]

【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照しながら説明する。 実施の形態1.図1は実施の形態1による3次元キャラ
クタアニメーション表示装置において、3次元キャラク
タの動きを表現するために用いる、3次元グリッド空間
((a)),3次元オブジェクト((b) ),及び,該3次
元オブジェクトを該3次元グリッド空間に配置したもの
((c) )を示す図である。
Embodiments of the present invention will be described below with reference to the drawings. Embodiment 1 FIG. FIG. 1 shows a three-dimensional grid space ((a)), a three-dimensional object ((b)) used for expressing the movement of a three-dimensional character in the three-dimensional character animation display device according to the first embodiment, and It is a figure showing what arranged a three-dimensional object in the three-dimensional grid space ((c)).

【0020】図1において、1は3次元オブジェクトで
あり、3次元キャラクタを示し、2つの関節点A−a,
A−bを有する部品A,及び,2つの関節点B−a,B
−bを有する部品Bの複数の3次元部品から構成され
る。2は3次元グリッド空間であり、3次元空間の任意
の座標点に相当し、3次元オブジェクト1の動きのポイ
ントを定義する複数のグリッド点W1〜W27と、これ
を結ぶワイヤフレームよりなり、3次元オブジェクト1
の可動範囲を示す。
In FIG. 1, reference numeral 1 denotes a three-dimensional object, which represents a three-dimensional character, and has two joint points Aa,
Part A having Ab, and two joint points Ba and B
-B is composed of a plurality of three-dimensional parts. Reference numeral 2 denotes a three-dimensional grid space, which corresponds to an arbitrary coordinate point in the three-dimensional space, and includes a plurality of grid points W1 to W27 that define points of movement of the three-dimensional object 1, and a wire frame connecting the grid points. Dimensional object 1
Shows the movable range of.

【0021】図2は実施の形態1による3次元キャラク
タアニメーション表示装置において、3次元キャラクタ
の動きを表現する、3次元オブジェクトの関節点とグリ
ッド点との対応関係の変化を示す図である。図2におい
て、図1と同一符号は同一又は相当部分である。また、
3は中心軸であり、3次元オブジェクト1の部品Aの2
つの関節点A−aとA−bとを通る直線からなる。(a)
は、図1(c) で示した3次元オブジェクト1を3次元グ
リッド空間に配置したもののうち、部品Aを含むグリッ
ド点W1〜W18と、これを結ぶワイヤフレームにより
構成される3次元グリッド空間を示す。(b) は、(a)の
3次元グリッド空間における部品Aの、該3次元グリッ
ド空間のグリッド点W2,W6,W15,及びW11を
含む2次元平面上での位置を示したものである。また、
(c) は、(a) における部品Aを移動して、その中心軸3
がグリッド点W6,及び,W18を通るように変化させ
たものを示し、(d) は、(c) の3次元グリッド空間にお
ける部品Aの、該3次元グリッド空間のグリッド点W
2,W6,W15,及びW11を含む2次元平面上での
位置を示したものである。
FIG. 2 is a diagram showing a change in the correspondence between the joint points of the three-dimensional object and the grid points expressing the movement of the three-dimensional character in the three-dimensional character animation display device according to the first embodiment. 2, the same reference numerals as those in FIG. 1 denote the same or corresponding parts. Also,
Reference numeral 3 denotes a central axis, which is 2 of the part A of the three-dimensional object 1.
It consists of a straight line passing through two joint points Aa and Ab. (a)
The three-dimensional grid space composed of the grid points W1 to W18 including the part A and the wire frame connecting the three points among the three-dimensional objects 1 arranged in the three-dimensional grid space shown in FIG. Show. (b) shows the position of the part A in the three-dimensional grid space of (a) on the two-dimensional plane including the grid points W2, W6, W15, and W11 in the three-dimensional grid space. Also,
(c) moves the part A in (a) and moves its center axis 3
Shows the state of passing through the grid points W6 and W18, and (d) shows the grid point W of the part A in the three-dimensional grid space of (c) in the three-dimensional grid space.
2 shows positions on a two-dimensional plane including W2, W6, W15, and W11.

【0022】図3は実施の形態1による3次元キャラク
タアニメーション表示装置の構成を示すブロック図であ
る。図3において、10は3次元位置計算手段であり、
3次元オブジェクト1に3次元グリッド空間2をかぶ
せ、3次元動きデータに基づいて、3次元オブジェクト
1の部品の関節点と3次元グリッド空間2のグリッド点
とを対応させる。12はテクスチャマッピング手段であ
り、3次元オブジェクト1の面に所定のテクスチャデー
タを貼り付ける。13は透視変換手段であり、3次元オ
ブジェクト1を、3次元空間での座標位置から2次元デ
ィスプレイ面へ投影し、座標変換してイメージデータと
する。14はフレームメモリ手段であり、透視変換手段
13により生成された上記イメージデータをフレームデ
ータとして記憶する。15はフレームメモリ手段14に
記憶された上記フレームデータを表示する画像表示手段
である。
FIG. 3 is a block diagram showing the configuration of the three-dimensional character animation display device according to the first embodiment. In FIG. 3, reference numeral 10 denotes a three-dimensional position calculating means,
The three-dimensional object 1 is covered with the three-dimensional grid space 2, and based on the three-dimensional motion data, the joint points of the parts of the three-dimensional object 1 correspond to the grid points in the three-dimensional grid space 2. Reference numeral 12 denotes a texture mapping unit that pastes predetermined texture data on the surface of the three-dimensional object 1. Reference numeral 13 denotes a perspective transformation unit, which projects the three-dimensional object 1 from a coordinate position in a three-dimensional space onto a two-dimensional display surface and performs coordinate transformation to obtain image data. Reference numeral 14 denotes a frame memory unit which stores the image data generated by the perspective transformation unit 13 as frame data. Reference numeral 15 denotes image display means for displaying the frame data stored in the frame memory means 14.

【0023】次に動作について図2を参照しながら説明
する。まず、3次元位置計算手段10において、3次元
グリッド空間2の形状を記述した3次元グリッド空間形
状データに基づいて、3次元グリッド空間2を3次元空
間へ配置し、3次元オブジェクト1の形状を記述した3
次元形状データ、及び3次元オブジェクト1の部品の関
節点とグリッド点との対応関係の時間軸変化を示した3
次元動きデータに基づいて、3次元オブジェクト1の部
品Aを3次元グリッド空間2に配置する。このとき、3
次元動きデータの初期値として、部品Aのそれぞれの関
節点A−a,及び,A−bとグリッド点W9,及び,W
18との対応関係が記述されており、これに従って、部
品Aは、図2(a) のように、中心軸3がグリッド点W
9,及び,W18と交わり、かつ、中心軸3の関節点A
−a側にグリッド点W9,関節点A−b側にグリッド点
W18が位置するように配置する。
Next, the operation will be described with reference to FIG. First, in the three-dimensional position calculating means 10, the three-dimensional grid space 2 is arranged in the three-dimensional space based on the three-dimensional grid space shape data describing the shape of the three-dimensional grid space 2, and the shape of the three-dimensional object 1 is changed. 3 described
3D showing the three-dimensional shape data and the time axis change of the correspondence between the joint points of the parts of the three-dimensional object 1 and the grid points.
The part A of the three-dimensional object 1 is arranged in the three-dimensional grid space 2 based on the three-dimensional motion data. At this time, 3
As the initial values of the dimensional motion data, the joint points Aa and Ab of the component A and the grid points W9 and W
18, the part A has a center axis 3 corresponding to the grid point W as shown in FIG.
9 and the joint point A of the central axis 3 which intersects with W18
The grid point W9 is located on the -a side, and the grid point W18 is located on the joint point Ab side.

【0024】次に、通常の3次元コンピュータグラフィ
ックスの手法に則って、テクスチャマッピング手段12
で所定のテクスチャデータを貼り付けた3次元オブジェ
クト1を、透視変換手段13において3次元空間での座
標位置から2次元ディスプレイ面へ投影(図5)して座
標変換し、イメージデータを生成する。そして、該イメ
ージデータをフレームデータとしてフレームメモリ手段
14に記憶し、画像表示手段15により上記フレームデ
ータを表示する。
Next, the texture mapping means 12 is used in accordance with the usual three-dimensional computer graphics technique.
The perspective transformation unit 13 projects the three-dimensional object 1 on which predetermined texture data is pasted from a coordinate position in a three-dimensional space onto a two-dimensional display surface (FIG. 5), and performs coordinate transformation to generate image data. Then, the image data is stored as frame data in the frame memory means 14, and the frame data is displayed by the image display means 15.

【0025】ここまでが初期フレームを生成して表示す
る過程である。同様にして、3次元キャラクタの第1の
動きを示すフレームであるフレームNo.1について
も、3次元位置計算手段10において、初期フレーム生
成時に設定した3次元空間内での3次元グリッド空間2
の位置を変更することなく、上記3次元動きデータに基
づいて、3次元グリッド空間2において3次元オブジェ
クト1を配置変更する。このとき、3次元動きデータの
第1の動きとして、部品Aのそれぞれの関節点A−a,
及び,A−bとグリッド点W6,及び,W18との対応
関係が記述されており、これに従って、部品Aは、図2
(c) のように、中心軸3がグリッド点W6,及び,W1
8と交わり、かつ、中心軸3の関節点A−a側にグリッ
ド点W6,関節点A−b側にグリッド点W18が位置す
るように配置変更する。
The above is the process of generating and displaying the initial frame. Similarly, the frame No., which is the frame indicating the first movement of the three-dimensional character, is displayed. Also, in the three-dimensional position calculation means 10, the three-dimensional grid space 2 in the three-dimensional space set when the initial frame was generated.
Without changing the position of the three-dimensional object 1 in the three-dimensional grid space 2 based on the three-dimensional motion data. At this time, as the first motion of the three-dimensional motion data, each joint point A-a,
2 and the correspondence between Ab and the grid points W6 and W18 are described.
As shown in (c), the central axis 3 is set at the grid points W6 and W1.
8, the arrangement is changed so that the grid point W6 is located on the joint point Aa side of the center axis 3 and the grid point W18 is located on the joint point Ab side.

【0026】このフレームNo.0とフレームNo.1
とによって、部品Aが右斜めに傾くという1つの動きが
生成される。その後の部品Aの動きも、同様にして、上
記3次元動きデータに基づいて、3次元グリッド空間2
において3次元オブジェクト1を配置変更していくこと
によって生成する。この後の3次元コンピュータグラフ
ィックスの手法についても、上述した通常の3次元コン
ピュータグラフィックスの手法に則って、同様の動作を
繰り返してフレームデータを表示する。また、部品A以
外の3次元オブジェクト1を構成する部品についても、
部品Aと同様にして、各部品の動きにより3次元オブジ
ェクト1全体の動きが生成され、3次元キャラクタの動
きとして表示される。
This frame No. 0 and frame No. 1
As a result, one movement of the part A inclining rightward is generated. Similarly, the subsequent movement of the part A is also based on the three-dimensional motion data, based on the three-dimensional grid space 2.
Are generated by changing the arrangement of the three-dimensional object 1. In the subsequent three-dimensional computer graphics method, frame data is displayed by repeating the same operation in accordance with the above-described ordinary three-dimensional computer graphics method. Also, for the parts constituting the three-dimensional object 1 other than the part A,
As in the case of the component A, the motion of the entire three-dimensional object 1 is generated by the motion of each component, and is displayed as the motion of the three-dimensional character.

【0027】ここで、上述した3次元位置計算手段10
の説明において、3次元オブジェクト1に3次元グリッ
ド空間2をかぶせるものとし、上記動作の説明において
は、3次元位置計算手段10では、先ず3次元グリッド
空間2を3次元空間へ配置し、次いで3次元オブジェク
ト1を3次元グリッド空間2に配置するものとし、これ
らの順序が逆のようであるが、後者の上記動作の説明で
は、3次元グリッド空間2を3次元空間に固定するため
に3次元オブジェクト1より先に配置するとしたもので
あり、これらの配置に先駆けて、先ず、動きを生成しよ
うとする3次元キャラクタとなる3次元オブジェクト1
を決定し、その3次元オブジェクト1をどのように動か
すかを想定して3次元グリッド空間2を決定するため、
実質的には、前者と同じ順序である。
Here, the above-described three-dimensional position calculating means 10
In the description, it is assumed that the three-dimensional object 2 is covered with the three-dimensional grid space 2. In the above description of the operation, the three-dimensional position calculating means 10 first arranges the three-dimensional grid space 2 in the three-dimensional space, It is assumed that the three-dimensional object 1 is arranged in the three-dimensional grid space 2, and the order is reversed. However, in the latter description of the above operation, the three-dimensional grid space 2 is fixed in the three-dimensional space. Prior to these arrangements, the three-dimensional object 1 which is a three-dimensional character whose motion is to be generated is first arranged before the object 1.
To determine the three-dimensional grid space 2 assuming how to move the three-dimensional object 1,
The order is substantially the same as the former.

【0028】また、部品A及び部品Bは直方体であり、
上記関節点A−a,A−b,B−a,及び,B−bは、
それぞれ部品Aの上面,部品Aの底面,部品Bの上面,
及び部品Bの底面の重点に設定したが、必ずしも上記の
ような重点に設定する必要はない。ただし、3次元オブ
ジェクトの部品の表面上に位置し、該部品の内部を通る
直線からなる軸をとることができるような位置に2点を
設定することが好ましい。
The parts A and B are rectangular parallelepipeds,
The joint points Aa, Ab, Ba, and Bb are:
The top of component A, the bottom of component A, the top of component B,
And the bottom point of the component B is set, but it is not always necessary to set the above point. However, it is preferable to set the two points at positions that are located on the surface of the part of the three-dimensional object and can take an axis formed by a straight line passing through the inside of the part.

【0029】ここで、上記動作の説明においては、3次
元動きデータに基づいて、3次元グリッド空間2におい
て3次元オブジェクト1の配置を変更するごとに、生成
した3次元オブジェクト1の動きを3次元コンピュータ
グラフィックスの手法によりフレームデータとして、画
像表示手段15により表示するものとしたが、3次元位
置計算手段は、上記3次元動きデータに基づいて、3次
元オブジェクト1を配置したときの上記関節点と対応す
る上記グリッド点とを対応テーブルに記述し、また、上
記3次元動きデータに基づいて、3次元オブジェクト1
を配置変更したときの上記関節点と上記グリッド点との
対応関係を図4に示すように上記対応テーブルの時間軸
方向に記述して保持する記憶手段を備えるようにすれ
ば、該対応テーブルに従って、フレームデータを作成す
ることにより所定のフレームレート、例えば1秒間に3
0フレームの速度で3次元オブジェクト1の動きを表示
することができる。
Here, in the above description of the operation, every time the arrangement of the three-dimensional object 1 is changed in the three-dimensional grid space 2 based on the three-dimensional movement data, the generated three-dimensional object 1 Although the image data is displayed by the image display means 15 as frame data by the method of computer graphics, the three-dimensional position calculating means calculates the joint points when the three-dimensional object 1 is arranged based on the three-dimensional motion data. And the corresponding grid points are described in a correspondence table, and based on the three-dimensional motion data, the three-dimensional object 1
If the storage means for describing and holding the correspondence between the joint points and the grid points when the arrangement is changed in the time axis direction of the correspondence table as shown in FIG. By generating frame data, a predetermined frame rate, for example, 3
The movement of the three-dimensional object 1 can be displayed at a speed of 0 frame.

【0030】また、3次元計算手段10において、上記
3次元動きデータに基づいて、3次元グリッド空間2に
おいて3次元オブジェクト1を配置変更していくことに
よって3次元オブジェクト1の動きを生成してから2次
元ディスプレイ面へ投影する代わりに、3次元グリッド
空間2と3次元オブジェクト1とを2次元ディスプレイ
面に投影した後、2次元平面上で上記3次元動きデータ
に基づいて、投影後の3次元グリッド空間2において投
影後の3次元オブジェクト1を配置変更して、3次元オ
ブジェクト1の動きの計算を行なうようにしてもよく、
この場合には、3次元で演算する場合に比べて、演算量
を削減することが可能である。
The three-dimensional calculation means 10 generates the motion of the three-dimensional object 1 by rearranging the three-dimensional object 1 in the three-dimensional grid space 2 based on the three-dimensional motion data. Instead of projecting onto the two-dimensional display surface, the three-dimensional grid space 2 and the three-dimensional object 1 are projected onto the two-dimensional display surface, and then, based on the three-dimensional motion data on the two-dimensional plane, the projected three-dimensional object is projected. The arrangement of the projected three-dimensional object 1 in the grid space 2 may be changed to calculate the movement of the three-dimensional object 1,
In this case, the amount of calculation can be reduced as compared with the case of performing calculation in three dimensions.

【0031】なお、3次元オブジェクトの部品の形状
は、上記で用いた直方体以外に、3次元キャラクタに対
応した様々なもの、例えば円柱,立方体,球などを設定
することができ、3次元オブジェクトを複数の部品から
構成されるものとして、各部品を様々な形状に設定する
ことも可能である。
The shape of the parts of the three-dimensional object can be various shapes corresponding to the three-dimensional character, for example, a cylinder, a cube, a sphere, etc., in addition to the rectangular parallelepiped used above. Each component can be set to various shapes as a configuration including a plurality of components.

【0032】したがって、3次元グリッド空間の形状、
即ち、グリッド点の配置も、上記3次元オブジェクトの
形状と、想定した該3次元オブジェクトの動きとによっ
て、適当なものを設定して、上記3次元オブジェクトに
対して充分な大きさの3次元グリッド空間を設けること
ができる。上記グリッド点の配置は、該グリッド点間を
狭くすれば3次元オブジェクトの厳密な動きを表現でき
るが、データ量を抑えて簡易にデフォルメされたキャラ
クタの動きを生成するには、適当に上記グリッド点間を
広く採る必要がある。
Therefore, the shape of the three-dimensional grid space,
That is, the arrangement of the grid points is appropriately set according to the shape of the three-dimensional object and the assumed movement of the three-dimensional object, and a three-dimensional grid having a sufficient size for the three-dimensional object is set. A space can be provided. The arrangement of the grid points can express a precise movement of the three-dimensional object if the space between the grid points is narrowed. However, in order to suppress the amount of data and generate a simple deformed character movement, the grid points are appropriately arranged. It is necessary to take wide points.

【0033】図6は実施の形態1による3次元キャラク
タアニメーション表示装置において、3次元グリッド空
間の形状を変更したものを示す図である。
FIG. 6 is a diagram showing a three-dimensional character animation display device according to the first embodiment in which the shape of the three-dimensional grid space is changed.

【0034】図6において、図2と同一符号は同一又は
相当部分である。また、(a) は図2(a) と同一のものを
示している。(b) は(a) の直方体の3次元グリッド空間
を円筒形の3次元グリッド空間に変更したものである。
(c) は(b) の部品Aの関節点A−a及びA−bを、それ
ぞれグリッド点W2及びW11と一致するように配置変
更したものである。
In FIG. 6, the same reference numerals as those in FIG. 2 denote the same or corresponding parts. (A) shows the same one as in FIG. 2 (a). (b) is obtained by changing the rectangular parallelepiped three-dimensional grid space of (a) to a cylindrical three-dimensional grid space.
(c) shows the arrangement of the joint points Aa and Ab of the part A of (b) changed so as to coincide with the grid points W2 and W11, respectively.

【0035】次に、上記形状変更した3次元グリッド空
間を用いた場合の3次元キャラクタアニメーション表示
装置の動作について、再び図3により説明する。既に図
3の説明において上述したようにして、3次元オブジェ
クトの部品Aの動きとして、例えば、フレームNo.1
00までのフレームデータが生成されており、フレーム
No.100は、(a) に示した部品Aの関節点とグリッ
ド点との対応関係に相当するものであったとする。そこ
で、上記3次元グリッド空間形状データに基づいて、3
次元空間における3次元オブジェクトの部品Aの位置は
そのままに、(a) に示した直方体の3次元グリッド空間
の形状を(b) の円筒形に変更する。すなわち、(a) と
(b) は同じNo.100のフレームデータに相当する。
このとき、3次元グリッド空間の形状を変更するという
情報は、上記3次元グリッド空間形状データに含まれて
いるとともに、3次元動きデータにも含まれてこれら2
つのデータは連携している。したがって、3次元グリッ
ド空間の形状が変更されると、3次元動きデータにも変
更後の3次元グリッド空間のグリッド点が用いられ、該
3次元動きデータには時間軸上の同じところで、関節点
A−a及びA−bは、それぞれグリッド点W9及びW1
8に対応するとともに、それぞれグリッド点W1及びW
10にも対応することが記述されている。そして、上記
3次元動きデータの時間軸上の次に、関節点A−a及び
A−bと、それぞれグリッド点W2及びW11との対応
関係が記述され、これに基づいて、(c) のように部品A
を配置変更し、既述のように、3次元コンピュータグラ
フィックスの手法に則って、No.101のフレームデ
ータを生成する。同様にして、上記3次元動きデータに
基づいて、関節点A−a及びA−bを、それぞれグリッ
ド点W3及びW12,W4及びW13,W5及びW1
4,W6及びW15,W7及びW16,W8及びW1
7,並びに,W1及びW10に配置変更し、それぞれの
No.102,103,104,105,106,10
7,及び,108のフレームデータを生成して、部品A
が平行移動して円を描く動きを表示することができる。
Next, the operation of the three-dimensional character animation display device when the three-dimensional grid space whose shape has been changed is used will be described again with reference to FIG. As described above in the description of FIG. 3, the motion of the part A of the three-dimensional object includes, for example, the frame No. 1
Frame data up to 00 are generated. It is assumed that 100 corresponds to the correspondence between the joint points of the component A and the grid points shown in FIG. Therefore, based on the three-dimensional grid space shape data, 3
The shape of the rectangular parallelepiped three-dimensional grid space shown in (a) is changed to the cylindrical shape shown in (b) while the position of the component A of the three-dimensional object in the three-dimensional space is kept as it is. That is, (a) and
(b) is the same No. This corresponds to 100 frame data.
At this time, the information to change the shape of the three-dimensional grid space is included in the three-dimensional grid space shape data and also included in the three-dimensional motion data.
The two data are linked. Therefore, when the shape of the three-dimensional grid space is changed, the grid points of the changed three-dimensional grid space are also used for the three-dimensional motion data, and the joint points at the same location on the time axis are used for the three-dimensional motion data. Aa and Ab are grid points W9 and W1, respectively.
8 and grid points W1 and W, respectively.
10 is also described. Next, on the time axis of the three-dimensional motion data, the correspondence between the joint points Aa and Ab and the grid points W2 and W11, respectively, is described, and based on this, as shown in FIG. Part A
Is changed, and as described above, No. 2 is used in accordance with the method of three-dimensional computer graphics. 101 is generated. Similarly, based on the three-dimensional motion data, the joint points Aa and Ab are respectively set to grid points W3 and W12, W4 and W13, W5 and W1.
4, W6 and W15, W7 and W16, W8 and W1
7 and W1 and W10. 102, 103, 104, 105, 106, 10
7 and 108 are generated and the component A
Can move in parallel to draw a circle.

【0036】ここで、上記円筒形の3次元グリッド空間
においては、関節点とグリッド点とを一致させて部品A
を配置しているが、特に一致させる必要はなく、直方体
の3次元グリッド空間の場合のように、2つの関節点を
通る直線である中心軸がグリッド点と交わり、かつ、部
品Aの空間の外側にグリッド点が位置すれば、関節点と
対応するグリッド点は離れていてもよい。
Here, in the cylindrical three-dimensional grid space, the joint points and the grid points are made to coincide with each other so that the component A
However, it is not necessary to make them coincide with each other, and as in the case of the rectangular parallelepiped three-dimensional grid space, the central axis, which is a straight line passing through the two joint points, intersects the grid point, and If the grid points are located outside, the grid points corresponding to the joint points may be separated.

【0037】また、上記のような平行移動の場合には、
2つの関節点をグリッド点と対応させる必要はなく、部
品Aに1つの代表点を設定しただけで、部品Aが平行移
動する動きを生成することが可能である。たとえば、3
次元オブジェクトの形状を記述した3次元形状データに
含まれる部品Aの空間の重心に代表点を設定するという
情報と、3次元動きデータに記述された、当該代表点と
時間軸方向でのグリッド点W1,W2,W3,W4,W
5,W6,W7,W8,及び,W1とを一致させるとい
う情報とに従えば、部品Aを上記と同じように平行移動
する動きを生成することが可能である。
In the case of the above-described parallel movement,
It is not necessary to make the two joint points correspond to the grid points, and it is possible to generate a movement in which the component A translates simply by setting one representative point for the component A. For example, 3
Information that a representative point is set at the center of gravity of the space of the part A included in the three-dimensional shape data describing the shape of the three-dimensional object, and the representative point and the grid point in the time axis direction described in the three-dimensional motion data W1, W2, W3, W4, W
According to the information of matching 5, W6, W7, W8, and W1, it is possible to generate a motion for translating the component A in the same manner as described above.

【0038】図7は実施の形態1による3次元キャラク
タアニメーション表示装置において、3次元オブジェク
トの関節点とグリッド点との距離を調整したものを示す
図である。図7において、図1と同一符号は同一又は相
当部分である。また、(a) は、図1の(c) の部品A及び
部品Bをそれぞれの中心軸3がグリッド点W6,W1
8、及び、グリッド点W18,W20を通るように変化
させたものを示し、(b) は、(a) の3次元グリッド空間
における部品A及び部品Bの、該3次元グリッド空間の
グリッド点W2,W6,W24,及びW20を含む2次
元平面上での位置を示したものである。(c) は部品A及
び部品Bを、それぞれ中心軸3の軸方向に伸長して、関
節点A−a,A−b,B−a,及びB−bをそれぞれグ
リッド点W6,W18,W18,及びW20と一致させ
たものである。(d) は(c) の3次元グリッド空間におけ
る部品A及び部品Bの、該3次元グリッド空間のグリッ
ド点W2,W6,W24,及びW20を含む2次元平面
上での位置を示したものである。
FIG. 7 is a diagram showing the three-dimensional character animation display device according to the first embodiment in which the distance between the joint point of the three-dimensional object and the grid point has been adjusted. 7, the same reference numerals as those in FIG. 1 denote the same or corresponding parts. Also, (a) shows that the center axes 3 of the parts A and B of FIG.
8 and the one that has been changed so as to pass through the grid points W18 and W20. (B) is the grid point W2 of the part A and the part B in the three-dimensional grid space of (a), , W6, W24, and W20 on a two-dimensional plane. (c) extends the component A and the component B in the axial direction of the central axis 3, respectively, and connects the joint points Aa, Ab, Ba, and Bb to grid points W6, W18, and W18, respectively. , And W20. (d) shows the positions of the parts A and B in the three-dimensional grid space of (c) on the two-dimensional plane including the grid points W2, W6, W24, and W20 in the three-dimensional grid space. is there.

【0039】ここで、上記関節点は、部品を伸長させて
グリッド点と一致させることによって、該関節点とグリ
ッド点との距離を0にしたが、例えば(c) から逆に図1
の(c) に配置変更する場合には、3次元オブジェクトの
部品A及び部品Bをそれぞれ中心軸3の軸方向に縮小し
て、関節点A−a,A−b,B−a,及びB−bをそれ
ぞれグリッド点W9,W18,W18,及びW27と一
致させる必要があり、3次元オブジェクトの配置をどの
ように変更するかによって、該3次元オブジェクトを伸
長、或いは、縮小する。また、このような中心軸方向へ
の伸長や縮小ではなく、3次元オブジェクトの形のまま
拡大、或いは、縮小して、上記関節点と上記グリッド点
との距離を変更するようにしてもよい。さらに、上記関
節点と、該関節点に対応するグリッド点との距離は0で
なくてもよく、3次元オブジェクトを構成する部品と部
品との間が離れ過ぎず、或いは、部品同士が重ならない
ように適当な距離にすればよい。
Here, the distance between the joint point and the grid point is set to 0 by extending the part and making it coincide with the grid point, but for example from FIG.
(C), the parts A and B of the three-dimensional object are reduced in the axial direction of the central axis 3, respectively, and the joint points Aa, Ab, Ba, and B are reduced. -B must be matched with grid points W9, W18, W18, and W27, respectively, and the three-dimensional object is expanded or contracted depending on how the arrangement of the three-dimensional object is changed. Instead of the extension or reduction in the direction of the central axis, the distance between the joint point and the grid point may be changed by enlarging or reducing the shape of the three-dimensional object. Furthermore, the distance between the joint point and the grid point corresponding to the joint point does not have to be 0, and the parts constituting the three-dimensional object are not too far apart or the parts do not overlap. The distance may be set appropriately.

【0040】このように、本実施の形態1による3次元
キャラクタアニメーション表示装置では、3次元位置計
算手段は、3次元グリッド空間形状データに基づいて、
3次元グリッド空間を3次元空間へ配置し、3次元形状
データ、及び,3次元動きデータに基づいて、3次元オ
ブジェクトを構成する部品を該部品の中心軸がグリッド
点と交わるように上記3次元グリッド空間に配置し、上
記3次元動きデータに基づいて、順次、当該部品の配置
を変更して、該3次元オブジェクトの動きを生成して、
通常の3次元コンピュータグラフィックスの手法に則っ
て、画像表示手段によりフレームデータを表示するもの
としたから、関節点を結んだスケルトン構造体の変形を
示す関節角の変化の度合い,関節点の移動距離などとい
うような複雑なデータを用いることなく、簡易に3次元
キャラクタのアニメーションを作成することができる。
また、3次元位置計算手段は、3次元動きデータに基づ
いて、3次元オブジェクトを配置したときの代表点と対
応するグリッド点とを対応テーブルに記述し、また、上
記3次元動きデータに基づいて、3次元オブジェクトを
配置変更したときの上記代表点と上記グリッド点との対
応関係を対応テーブルの時間軸方向に記述して保持する
記憶手段を備えたので、同じフレームデータとなる3次
元動きデータの部分については、3次元オブジェクトの
配置変更を行なって3次元動きを生成しなくても、フレ
ームデータを使用して3次元オブジェクトの動きを表示
することができる。また、上記部品の関節点を結ぶ軸方
向に、該部品を伸縮して、関節点と、該関節点に対応す
るグリッド点との距離を調節したから、3次元部品同士
の距離が離れすぎた場合に生じる違和感を取り除いて表
示することが可能である。また、3次元グリッド空間の
形状を変更するものとしたから、3次元グリッド空間の
形状の特徴に応じた多様な3次元オブジェクトの動きを
実現することができる。さらに、3次元グリッド空間、
及び、3次元オブジェクトを2次元ディスプレイ面に投
影した後、2次元平面上で3次元動きデータに基づい
て、投影後の3次元グリッド空間において投影後の3次
元オブジェクトの部品を配置変更して、3次元オブジェ
クトの動きの計算を行なうようにしたから、3次元で演
算する場合に比べて、演算量を削減することが可能であ
る。
As described above, in the three-dimensional character animation display device according to the first embodiment, the three-dimensional position calculating means uses the three-dimensional grid space shape data to
The three-dimensional grid space is arranged in the three-dimensional space, and the parts constituting the three-dimensional object are moved based on the three-dimensional shape data and the three-dimensional movement data so that the center axis of the part intersects the grid point. It is arranged in a grid space, and based on the three-dimensional motion data, the arrangement of the parts is sequentially changed to generate the motion of the three-dimensional object.
Since the frame data is displayed by the image display means in accordance with the ordinary three-dimensional computer graphics method, the degree of change of the joint angle indicating the deformation of the skeleton structure connecting the joint points, the movement of the joint points An animation of a three-dimensional character can be easily created without using complicated data such as distance.
In addition, the three-dimensional position calculating means describes a representative point when the three-dimensional object is arranged and a corresponding grid point in a correspondence table based on the three-dimensional motion data, and further, based on the three-dimensional motion data. Since there is provided storage means for describing and holding the correspondence between the representative points and the grid points when the arrangement of the three-dimensional object is changed in the time axis direction of the correspondence table, the three-dimensional motion data which becomes the same frame data Regarding the part, the movement of the three-dimensional object can be displayed using the frame data without changing the arrangement of the three-dimensional object to generate the three-dimensional movement. Further, since the distance between the joint point and the grid point corresponding to the joint point was adjusted by expanding and contracting the part in the axial direction connecting the joint points of the part, the distance between the three-dimensional parts was too large. It is possible to remove the sense of incongruity that may occur in the display. Further, since the shape of the three-dimensional grid space is changed, it is possible to realize various movements of the three-dimensional object according to the characteristics of the shape of the three-dimensional grid space. Furthermore, three-dimensional grid space,
And, after projecting the three-dimensional object on the two-dimensional display surface, based on the three-dimensional motion data on the two-dimensional plane, rearranging the parts of the three-dimensional object after projection in the three-dimensional grid space after projection, Since the calculation of the motion of the three-dimensional object is performed, the amount of calculation can be reduced as compared with the case where the calculation is performed in three dimensions.

【0041】実施の形態2.図8は実施の形態2による
3次元キャラクタアニメーション表示装置において、3
次元グリッド空間内において3次元オブジェクトの形状
を変更したものを示す図である。図8において、図1と
同一符号は同一又は相当部分である。また、(a) は、3
次元オブジェクトを構成するための部品のインデックス
と3次元グリッド空間の選択されたグリッド点により該
部品の位置とを記述した3次元オブジェクト構成部品デ
ータに基づいて、3次元グリッド空間の選択されたグリ
ッド点W9とW18との間,及び,W18とW27との
間に、それぞれ部品A及び部品Bを配置することによっ
て3次元オブジェクトとしたものを示し、(b) は、(a)
の3次元グリッド空間に配置した3次元の部品A及び部
品Bを、それぞれ形状の異なる3次元の部品C及び部品
Dに変更したものを示している。
Embodiment 2 FIG. 8 shows a three-dimensional character animation display device according to the second embodiment.
It is a figure showing what changed the shape of the three-dimensional object in the three-dimensional grid space. 8, the same reference numerals as those in FIG. 1 denote the same or corresponding parts. (A) is 3
The selected grid point in the three-dimensional grid space based on the three-dimensional object component data describing the index of the part for forming the three-dimensional object and the position of the part by the selected grid point in the three-dimensional grid space Parts A and B are arranged between W9 and W18 and between W18 and W27, respectively, to show three-dimensional objects, and (b) shows (a)
The three-dimensional parts A and B arranged in the three-dimensional grid space are changed to three-dimensional parts C and D having different shapes, respectively.

【0042】図9は、実施の形態2による3次元キャラ
クタアニメーション表示装置の構成を示すブロック図で
ある。図9において、図3と同一符号は同一又は相当部
分である。また、11は記憶手段であり、3次元位置計
算手段で生成された対応テーブルを時間軸方向に保持す
る。
FIG. 9 is a block diagram showing the configuration of the three-dimensional character animation display device according to the second embodiment. 9, the same reference numerals as those in FIG. 3 denote the same or corresponding parts. Reference numeral 11 denotes a storage unit that stores a correspondence table generated by the three-dimensional position calculation unit in the time axis direction.

【0043】次に動作について図8を参照して説明す
る。3次元位置計算手段10において、3次元グリッド
空間形状データに基づいて3次元グリッド空間を配置
し、図8(a) のように、3次元オブジェクト構成部品デ
ータに基づいて、選択されたグリッド点W9とW18と
の間,及び,W18とW27との間に、それぞれ部品A
及び部品Bを配置することによって3次元オブジェクト
とする。そして、W9及びW18をそれぞれ部品Aの関
節点A9及びA18と定義し、W18及びW27をそれ
ぞれ部品Bの関節点B18及びB27と定義する。3次
元オブジェクトとなる部品の関節点とグリッド点との対
応関係の時間軸変化を示した3次元動きデータに基づい
て、部品A及び部品Bの動きを生成する。また、図3で
説明したと同様にして、3次元コンピュータグラフィッ
クスの手法により、テクスチャマッピング手段12で3
次元オブジェクト1の面に所定のテクスチャデータを貼
り付け、透視変換手段13で3次元オブジェクト1の3
次元空間での座標位置から2次元ディスプレイ面へ投影
して、座標変換し、フレームメモリ手段14で透視変換
手段13により2次元ディスプレイ面に投影されたイメ
ージデータをフレームデータとして記憶し、画像表示手
段15で上記フレームデータを表示する。これまでの過
程を繰返していくことによって、3次元キャラクタの動
きを生成して表示する。次に、上記画像表示手段でフレ
ームデータが表示されるフレーム表示周期の時間内に、
図8(a) から(b) のように、上記3次元オブジェクト構
成部品データに基づいて、上記3次元の部品A及び部品
Bを、それぞれ部品C及び部品Dに変更する。このと
き、部品C及び部品Dの関節点は、それぞれ部品Aの関
節点A9及びA18、並びに、部品Bの関節点B18及
びB27と一致する。従って、部品C及び部品Dは、部
品A及び部品Bの動きを生成するときに用いた、3次元
オブジェクトとなる部品の関節点とグリッド点との対応
関係の時間軸変化を示した3次元動きデータに基づい
て、動きを生成することができる。
Next, the operation will be described with reference to FIG. In the three-dimensional position calculating means 10, the three-dimensional grid space is arranged based on the three-dimensional grid space shape data, and the selected grid point W9 is determined based on the three-dimensional object component data as shown in FIG. A between parts W18 and W18 and between W18 and W27
And a part B are arranged to form a three-dimensional object. Then, W9 and W18 are defined as joint points A9 and A18 of the part A, respectively, and W18 and W27 are defined as joint points B18 and B27 of the part B, respectively. The motion of the component A and the component B is generated based on the three-dimensional motion data indicating the time axis change of the correspondence between the joint point of the component to be the three-dimensional object and the grid point. Further, in the same manner as described with reference to FIG.
A predetermined texture data is pasted on the surface of the three-dimensional object 1 and the three-dimensional object 1
The image data projected onto the two-dimensional display surface by the perspective transformation means 13 is stored as frame data by the frame memory means 14 by projecting from the coordinate position in the two-dimensional space onto the two-dimensional display surface, and the image display means At 15 the frame data is displayed. By repeating the above steps, the motion of the three-dimensional character is generated and displayed. Next, within the time of the frame display cycle in which the frame data is displayed by the image display means,
As shown in FIGS. 8A and 8B, the three-dimensional parts A and B are changed to parts C and D, respectively, based on the three-dimensional object component data. At this time, the joint points of the parts C and D coincide with the joint points A9 and A18 of the part A and the joint points B18 and B27 of the part B, respectively. Therefore, the parts C and D are three-dimensional movements indicating the time axis change of the correspondence between the joint points and the grid points of the parts that are three-dimensional objects used when generating the movements of the parts A and B. Motion can be generated based on the data.

【0044】なお、3次元位置計算手段は、上記3次元
動きデータに基づいて、3次元オブジェクトとなる部品
を配置したときの上記関節点と対応する上記グリッド点
とを対応テーブルに記述し、また、上記3次元動きデー
タに基づいて、上記部品を配置変更したときの上記関節
点と上記グリッド点との対応関係を上記対応テーブルの
時間軸方向に記述して保持する記憶手段を備えるように
してもよい。
The three-dimensional position calculating means describes the joint points and the grid points corresponding to the joint points when a part to be a three-dimensional object is arranged in a correspondence table based on the three-dimensional motion data. A storage unit for describing and holding a correspondence relationship between the joint point and the grid point when the component is rearranged based on the three-dimensional motion data in a time axis direction of the correspondence table. Is also good.

【0045】ここで、上記3次元オブジェクト構成部品
データ,及び,上記3次元グリッド空間形状データの一
方、或いは、双方は、CD−ROMやDVD等の外部記
憶装置に記憶されたものを用いるようにしてもよいし、
あるいは、通信手段により、例えば、ネットワーク,電
話回線,無線電話回線,及び,赤外線通信などでデータ
伝送されたものを用いるようにすれば、より少ないパラ
メータで効果的に3次元オブジェクトの3次元動きを生
成して表示することができる。
Here, one or both of the three-dimensional object component part data and the three-dimensional grid space shape data are those stored in an external storage device such as a CD-ROM or a DVD. May be
Alternatively, if data transmitted by a communication means such as a network, a telephone line, a wireless telephone line, and infrared communication is used, the three-dimensional movement of the three-dimensional object can be effectively performed with fewer parameters. Can be generated and displayed.

【0046】このように、本実施の形態2による3次元
キャラクタアニメーション表示装置では、3次元グリッ
ド空間形状データに基づいて3次元グリッド空間を配置
し、初期値として、複数のグリッド点を選択し、3次元
オブジェクト構成部品データに基づいて、該グリッド点
の間に各部品を配置することによって3次元オブジェク
トとし、該グリッド点を各部品の関節点と定義し、3次
元コンピュータグラフィックスの手法により、画像表示
手段でフレームデータを表示するものとしたから、関節
点を結んだスケルトン構造体の変形を示す関節角の変化
の度合い,関節点の移動距離などというような複雑なデ
ータを用いることなく、簡易に3次元キャラクタのアニ
メーションを作成することができ、また、上記3次元動
きデータに基づいて、3次元オブジェクトを配置変更し
たときの上記代表点と上記グリッド点との対応関係を対
応テーブルの時間軸方向に記述して保持する記憶手段を
備えたから、同じフレームデータとなる3次元動きデー
タの部分については、3次元オブジェクトの配置変更を
行なって3次元動きを生成しなくても、フレームデータ
を使用して3次元オブジェクトの動きを表示することが
できる。また、上記画像表示手段でフレームデータが表
示されるフレーム表示周期の時間内に、上記部品を、該
部品の関節点に変更する部品の関節点を一致させて、形
状の異なる部品に変更し、変更前の部品の3次元動きデ
ータを利用するものとしたから、3次元キャラクタであ
る3次元オブジェクトを設定して、該3次元オブジェク
トに合わせた3次元グリッド空間を設定しなくても、一
定の3次元グリッド空間における3次元の部品の動きだ
けの少ないパラメータで、効率よく3次元動きデータを
生成することができ、効果的に3次元オブジェクトの動
きを生成して表示することができる。また、多様な3次
元オブジェクトを生成することができ、1つの部品の3
次元動きデータを利用して、より少ないデータ量で容易
に異なる形態を有する3次元キャラクタの動きを生成す
ることができる。さらに、上記3次元オブジェクト構成
部品データ、又は、上記3次元グリッド空間形状データ
は、通信手段により伝送されたものを用いるようにした
から、より少ないパラメータで効果的に3次元オブジェ
クトの3次元動きを生成して表示することができる。
As described above, in the three-dimensional character animation display device according to the second embodiment, a three-dimensional grid space is arranged based on three-dimensional grid space shape data, and a plurality of grid points are selected as initial values. Based on the three-dimensional object component data, each part is arranged between the grid points to form a three-dimensional object, and the grid points are defined as joint points of each part. Since the frame data is displayed by the image display means, without using complicated data such as the degree of change of the joint angle indicating the deformation of the skeleton structure connecting the joint points, the moving distance of the joint points, etc. An animation of a three-dimensional character can be easily created, and based on the three-dimensional motion data described above. Since there is provided a storage unit for describing and holding the correspondence between the representative points and the grid points when the arrangement of the three-dimensional object is changed in the time axis direction of the correspondence table, the three-dimensional motion data of the same frame data is obtained. Regarding the portion, the movement of the three-dimensional object can be displayed using the frame data without changing the arrangement of the three-dimensional object to generate the three-dimensional movement. Further, within the time of the frame display cycle in which frame data is displayed by the image display means, the part is changed to a part having a different shape by matching the joint point of the part to be changed to the joint point of the part, Since the three-dimensional motion data of the part before the change is used, it is not necessary to set a three-dimensional object that is a three-dimensional character and set a three-dimensional grid space that matches the three-dimensional object. It is possible to efficiently generate three-dimensional motion data with only a few parameters of the three-dimensional component motion in the three-dimensional grid space, and to effectively generate and display the motion of the three-dimensional object. In addition, various three-dimensional objects can be generated, and 3
By using the dimensional motion data, it is possible to easily generate a motion of a three-dimensional character having a different form with a smaller data amount. Further, since the three-dimensional object component part data or the three-dimensional grid space shape data used is transmitted by the communication means, the three-dimensional movement of the three-dimensional object can be effectively performed with fewer parameters. Can be generated and displayed.

【0047】実施の形態3.図10は本実施の形態3に
よる3次元キャラクタアニメーション表示装置における
3次元オブジェクトの変形の過程の一例を2次元平面上
に示す図である。図10において、図2と同一符号は同
一又は相当部分である。また、(a) は、図2(b) に相当
し、3次元オブジェクトを構成する部品Aの部分中心軸
19を含む3次元グリッド空間におけるグリッド点W
2,W6,W15,及びW11からなる2次元平面上で
の部品Aを示したものである。また、(b) は、部分中心
軸19を含んでいる3次元グリッド空間のみをアフィン
変換係数などの変形パラメータである3次元グリッド位
置変更データに従って、部分中心軸19を変形すること
なく、グリッド点W2,及び,W6がそれぞれW9から
水平方向に遠ざかるように、変形したものである。(c)
は、上記3次元グリッド空間を変形したアフィン変換係
数を用いて、3次元オブジェクトを変形したものであ
る。ここでは、変形前の3次元オブジェクトの部品A,
及び,変形後の3次元オブジェクトの部品Aaにおい
て、部分中心軸19は変化せず、変形前の部品Aの関節
点A−a,及び,A−bと、変形後の部品Aaの関節点
Aa−a,及び,Aa−bは一致するため、変形前の部
品Aの関節点とグリッド点との対応関係と、変形後の部
品Aaの関節点とグリッド点との対応関係にも変化はな
い。したがって、変形後の3次元オブジェクトを、変形
前の3次元グリッド空間内における3次元オブジェクト
と入れ替えると、変形後の3次元オブジェクトについて
も実施の形態1で示したように、関節点とグリッド点と
の対応関係を変更していくことによって、変形した3次
元オブジェクトの動きを生成して表示することができ
る。
Embodiment 3 FIG. 10 is a diagram showing, on a two-dimensional plane, an example of a process of deforming a three-dimensional object in the three-dimensional character animation display device according to the third embodiment. 10, the same reference numerals as those in FIG. 2 denote the same or corresponding parts. 2 (a) corresponds to FIG. 2 (b) and shows a grid point W in a three-dimensional grid space including a partial central axis 19 of a part A constituting a three-dimensional object.
FIG. 3 shows a part A on a two-dimensional plane including W2, W6, W15, and W11. (B) shows that only the three-dimensional grid space including the partial center axis 19 is transformed without changing the partial center axis 19 according to the three-dimensional grid position change data which is a deformation parameter such as an affine transformation coefficient. W2 and W6 have been deformed so that they respectively move away from W9 in the horizontal direction. (c)
Is obtained by deforming a three-dimensional object using an affine transformation coefficient obtained by deforming the three-dimensional grid space. Here, the parts A, 3D of the three-dimensional object before deformation
In the part Aa of the three-dimensional object after the deformation, the partial center axis 19 does not change, and the joint points Aa and Ab of the part A before the deformation and the joint point Aa of the part Aa after the deformation Since -a and Aa-b coincide, there is no change in the correspondence between the joint points of the component A before deformation and the grid points and the correspondence between the joint points of the component Aa after deformation and the grid points. . Therefore, when the three-dimensional object after the transformation is replaced with a three-dimensional object in the three-dimensional grid space before the transformation, the three-dimensional object after the transformation also has the joint points and the grid points as described in the first embodiment. By changing the correspondence of the three-dimensional objects, the motion of the deformed three-dimensional object can be generated and displayed.

【0048】ここで、上記3次元グリッド位置変更デー
タ、即ち、アフィン変換係数などの変形パラメータを適
用する3次元グリッド空間について、図11により説明
すと、上述のように、上記アフィン変換係数を適用する
3次元空間は、部分中心軸19を含んでいるものだけで
ある。なお、ここにいう部分中心軸19は、3次元オブ
ジェクトの部品Aの関節点A−a,及び,A−bを通る
直線からなる中心軸3と交わり、該部品Aの空間の外
側、かつ、関節点A−a,及び,A−bからそれぞれ最
短にある2つのグリッド点に挟まれた中心軸3の一部分
である。従って、上記アフィン変換係数を適用する3次
元グリッド空間は、(a) に示した部分中心軸19を中心
軸W9−W18とすると、グリッド点W1,W3,W
5,W7,W16,W10,W12,及びW14で囲ま
れた空間、(b) の中心軸W6−W18の場合は、グリッ
ド点W4,W5,W7,W8,W17,W13,W1
4,及びW16で囲まれた3次元グリッド空間、(c) の
中心軸W7−W18の場合には、グリッド点W6,W
7,W8,W9,W18,W15,W16,及びW17
で囲まれた3次元グリッド空間となる。
Here, the three-dimensional grid position change data, that is, the three-dimensional grid space to which a deformation parameter such as an affine transformation coefficient is applied will be described with reference to FIG. The only three-dimensional space that includes the partial central axis 19. The partial central axis 19 intersects with the central axis 3 formed by a straight line passing through the joint points Aa and Ab of the part A of the three-dimensional object, and is outside the space of the part A and It is a part of the central axis 3 sandwiched between the two shortest grid points from the joint points A-a and Ab. Therefore, the three-dimensional grid space to which the above affine transformation coefficients are applied is represented by grid points W1, W3, W, where the partial central axis 19 shown in FIG.
5, a space surrounded by W7, W16, W10, W12, and W14. In the case of the central axis W6 to W18 in (b), grid points W4, W5, W7, W8, W17, W13, W1
In the case of the central axis W7-W18 of (c), the grid points W6 and W6
7, W8, W9, W18, W15, W16, and W17
Is a three-dimensional grid space surrounded by.

【0049】図12は本実施の形態3による3次元キャ
ラクタアニメーション表示装置における3次元オブジェ
クトの変形の過程の別の一例を2次元平面上に示す図で
ある。図12において、図2及び図10と同一符号は同
一又は相当部分である。また、(a) は、図10(a) に相
当し、(b) は、アフィン変換係数に従って、部分中心軸
19を変形することなく、グリッド点W2とグリッド点
W11との距離を一定に、グリッド点W2を軸から遠ざ
かるように移動し、グリッド点W15からの距離を伸ば
して、グリッド点W6を軸から遠ざかるように移動し
て、部分中心軸19を含んでいる3次元グリッド空間の
みを変形したものである。(c) は、上記3次元グリッド
空間を変形したアフィン変換係数を用いて、3次元オブ
ジェクトを変形したものである。なお、ここでの部分中
心軸19は、図10に示したものと異なり伸張されたも
のとなっているが、変形はしていないので、変形前後の
関節点とグリッド点との対応関係は、変形前の関節点A
−a,及び,A−b,並びに,グリッド点W9,及び,
W18と、これらに対応する変形後の関節点Ab−a,
及び,Ab−b,並びに,グリッド点W9b,及び,W
18とは、いずれも同じ順序に直線上に配置されて対応
関係を保っている。したがって、変形後の3次元オブジ
ェクトを、縮小等して関節点Ab−a,及び,Ab−b
を変形前の関節点A−a,及び,A−bに一致させて、
変形前の3次元グリッド空間内における3次元オブジェ
クトと入れ替えると、変形後の3次元オブジェクトにつ
いても実施の形態1で示したように、関節点とグリッド
点との対応関係を変更していくことによって、変形した
3次元オブジェクトの動きを生成して表示することがで
きる。
FIG. 12 is a diagram showing, on a two-dimensional plane, another example of the process of deforming the three-dimensional object in the three-dimensional character animation display device according to the third embodiment. 12, the same reference numerals as those in FIGS. 2 and 10 denote the same or corresponding parts. 10 (a) corresponds to FIG. 10 (a), and FIG. 10 (b) keeps the distance between the grid point W2 and the grid point W11 constant according to the affine transformation coefficient without deforming the partial central axis 19. The grid point W2 is moved away from the axis, the distance from the grid point W15 is extended, and the grid point W6 is moved away from the axis, and only the three-dimensional grid space including the partial central axis 19 is deformed. It was done. (c) is obtained by deforming the three-dimensional object using the affine transformation coefficient obtained by deforming the three-dimensional grid space. Note that the partial central axis 19 here is elongated, unlike the one shown in FIG. 10, but is not deformed, so the correspondence between the joint points before and after the deformation and the grid points is Joint point A before deformation
-A and Ab and grid point W9 and
W18 and the corresponding deformed joint points Ab-a,
And Ab-b and grid points W9b and W
18 are arranged on the straight line in the same order and maintain the correspondence. Therefore, the deformed three-dimensional object is reduced or the like to reduce joint points Ab-a and Ab-b.
To the joint points A-a and Ab before deformation.
When the three-dimensional object in the three-dimensional grid space before the transformation is replaced, the correspondence between the joint points and the grid points is changed for the three-dimensional object after the transformation as described in the first embodiment. The motion of the deformed three-dimensional object can be generated and displayed.

【0050】図13は本実施の形態3による3次元キャ
ラクタアニメーション表示装置における3次元オブジェ
クトの変形の過程のまた別の一例を2次元平面上に示す
図である。図13において、図2と同一符号は同一又は
相当部分である。また、(a) は、図2(d) からグリッド
点W2,W9,W18,及び,W11で示される2次元
グリッド平面を除いたものに相当し、3次元オブジェク
トの部品Aの部分中心軸19を含む3次元グリッド空間
におけるグリッド点W6,W15,W18,及びW9で
示される2次元平面上での部品Aを示したものである。
(b) は、部分中心軸19を含んでいる3次元グリッド空
間のみを、アフィン変換係数に基づいて、部分中心軸1
9が伸張するようにグリッド点W6を移動することによ
って、変形したものである。(c) は、上記3次元グリッ
ド空間を変形したアフィン変換係数を用いて、3次元オ
ブジェクトを変形したものである。なお、ここでの部分
中心軸19も図12に示したものと同様、伸張されてい
るが変形はしていないので、変形前後の関節点とグリッ
ド点との対応関係も、変形前の関節点A−a,及び,A
−b,並びに,グリッド点W6,及び,W18と、これ
らに対応する変形後の関節点Ac−a,及び,Ac−
b,並びに,グリッド点W6c,及び,W18とは、い
ずれも同じ順序に直線上に配置されて対応関係を保って
いる。したがって、変形後の3次元オブジェクトを、縮
小等して関節点Ab−a,及び,Ab−bを変形前の関
節点A−a,及び,A−bに一致させて、変形前の3次
元グリッド空間内における3次元オブジェクトと入れ替
えると、変形後の3次元オブジェクトについても実施の
形態1で示したように、関節点とグリッド点との対応関
係を変更していくことによって、変形した3次元オブジ
ェクトの動きを生成して表示することができる。
FIG. 13 is a diagram showing another example of the process of deforming the three-dimensional object on the two-dimensional plane in the three-dimensional character animation display device according to the third embodiment. 13, the same reference numerals as those in FIG. 2 denote the same or corresponding parts. (A) corresponds to the one obtained by removing the two-dimensional grid planes indicated by the grid points W2, W9, W18 and W11 from FIG. 2 (d), and corresponds to the partial central axis 19 of the part A of the three-dimensional object. 3 shows a component A on a two-dimensional plane indicated by grid points W6, W15, W18, and W9 in a three-dimensional grid space including.
(b) shows only the three-dimensional grid space including the partial central axis 19 based on the affine transformation coefficients.
It is deformed by moving the grid point W6 so that 9 is expanded. (c) is obtained by deforming the three-dimensional object using the affine transformation coefficient obtained by deforming the three-dimensional grid space. Note that the partial central axis 19 here is extended but not deformed similarly to the one shown in FIG. 12, so the correspondence between the joint points before and after the deformation and the grid points is also the same as the joint point before the deformation. A-a and A
-B and the grid points W6 and W18 and the corresponding joint points Ac-a and Ac- after deformation.
b and the grid points W6c and W18 are arranged on a straight line in the same order and maintain a correspondence. Accordingly, the joint points Ab-a and Ab-b are made to match the joint points Aa and Ab before deformation by reducing the deformed three-dimensional object, and the three-dimensional object before deformation is reduced. When the three-dimensional object in the grid space is replaced, the deformed three-dimensional object is also changed by changing the correspondence between the joint points and the grid points as described in the first embodiment. Object movements can be generated and displayed.

【0051】また、図13における3次元オブジェクト
の変形は、図11(b) に示した3次元オブジェクトを変
形したものに相当するが、上記3次元グリッド空間に適
用した変形パラメータに従って、該3次元オブジェクト
を別個に変形するので、図11(b) のように、該3次元
オブジェクトが、変形パラメータを適用するグリッド空
間(グリッド点W4,W5,W7,W8,W17,W1
3,W14,及び,W16からなる)の外にはみ出して
いてもよく、図11(c) も同様である。
The deformation of the three-dimensional object in FIG. 13 corresponds to the deformation of the three-dimensional object shown in FIG. 11B, and the three-dimensional object is deformed according to the deformation parameters applied to the three-dimensional grid space. Since the objects are separately deformed, as shown in FIG. 11B, the three-dimensional object is transformed into a grid space (grid points W4, W5, W7, W8, W17, W1) to which the deformation parameters are applied.
3, W14 and W16), and the same applies to FIG. 11 (c).

【0052】さらに、図10,図12,及び,図13
は、3次元グリッド空間を変形パラメータに基づいて変
形し、該変形パラメータに従って3次元オブジェクトを
変形する過程を2次元平面上で説明したが、このような
変形の場合にも、実施の態様1における配置変更と同
様、上記のように3次元において3次元オブジェクトを
変形してから2次元ディスプレイ面へ投影する代わり
に、3次元グリッド空間と3次元オブジェクトとを2次
元ディスプレイ面に投影した後、2次元平面上でグリッ
ド空間を変形パラメータに基づいて変形し、該変形パラ
メータに従ってオブジェクトを変形を行なうようにして
もよく、この場合には、3次元でアフィン変換等の変換
を行なう場合に比べて、演算量を削減することが可能で
ある。
Further, FIG. 10, FIG. 12, and FIG.
Described the process of deforming a three-dimensional grid space based on a deformation parameter and deforming a three-dimensional object according to the deformation parameter on a two-dimensional plane. Similar to the arrangement change, instead of transforming the three-dimensional object in three dimensions and projecting it on the two-dimensional display surface as described above, projecting the three-dimensional grid space and the three-dimensional object on the two-dimensional display surface, The grid space may be deformed on the three-dimensional plane based on the deformation parameters, and the object may be deformed according to the deformation parameters. In this case, compared to a case where a transformation such as an affine transformation is performed in three dimensions, The amount of calculation can be reduced.

【0053】また、上記3次元グリッド空間の変形情報
は、CD−ROMやDVD等の外部記憶装置に記憶され
たものを用いるようにしてもよいし、あるいは、通信手
段により、例えば、ネットワーク,電話回線,無線電話
回線,及び,赤外線通信などでデータ伝送されたものを
用いるようにすれば、より少ないパラメータで効果的に
3次元オブジェクトの3次元動きを生成して表示するこ
とができる。
Further, as the deformation information of the three-dimensional grid space, information stored in an external storage device such as a CD-ROM or a DVD may be used. If a data transmitted by a line, a wireless telephone line, or infrared communication is used, a three-dimensional motion of the three-dimensional object can be effectively generated and displayed with fewer parameters.

【0054】このように、本実施の形態3による3次元
キャラクタアニメーション表示装置では、3次元オブジ
ェクトを構成する部品の2つの関節点を通る直線からな
る中心軸と交わり、該部品の空間の外側、かつ、関節点
から最短にある2つのグリッド点に挟まれた上記中心軸
の一部分である部分中心軸を含んでいる3次元グリッド
空間のみを、3次元グリッド位置変更データに従って、
該部分中心軸を変形することなく、変形し、当該3次元
グリッド位置変更データを用いて、3次元オブジェクト
を変形するものとしたから、3次元グリッド空間の変形
に対応した、さらに多様な3次元オブジェクトの動きを
生成して表示することが可能であり、変形前後の3次元
オブジェクトの部品の関節点とグリッド点との対応関係
に変化がなく、変形後の3次元オブジェクトを、変形前
の3次元グリッド空間内における3次元オブジェクトと
入れ替えて、変形した3次元オブジェクトの動きを生成
して表示することができる。また、3次元グリッド空間
と3次元オブジェクトとを2次元ディスプレイ面に投影
した後、2次元平面上でグリッド空間を変形パラメータ
に基づいて変形し、該変形パラメータに従ってオブジェ
クトを変形することとしたから、変形パラメータを用い
る複雑な計算を3次元から2次元で行なうことで、演算
量を低減することができる。さらに、上記3次元グリッ
ド空間を変形させる変形パラメータなどの変形情報は、
通信手段により伝送されたものを用いるようにしたか
ら、より少ないパラメータで効果的に3次元オブジェク
トの3次元動きを生成して表示することができる。な
お、上記変形パラメータは、アフィン変換係数を用いた
が、これに限るものではない。
As described above, in the three-dimensional character animation display apparatus according to the third embodiment, the three-dimensional object intersects with the central axis formed by the straight line passing through the two joint points of the part and forms the outside of the space of the part. In addition, only the three-dimensional grid space including the partial central axis that is a part of the central axis sandwiched between the two grid points that are the shortest from the joint point, according to the three-dimensional grid position change data,
The partial center axis is deformed without being deformed, and the three-dimensional object is deformed by using the three-dimensional grid position change data. The motion of the object can be generated and displayed, and the correspondence between the joint points of the parts of the three-dimensional object before and after the deformation and the grid points does not change. The motion of the deformed three-dimensional object can be generated and displayed in place of the three-dimensional object in the three-dimensional grid space. Further, after projecting the three-dimensional grid space and the three-dimensional object on the two-dimensional display surface, the grid space is deformed on the two-dimensional plane based on the deformation parameters, and the object is deformed according to the deformation parameters. Performing complicated calculations using the deformation parameters in three to two dimensions can reduce the amount of calculation. Further, deformation information such as a deformation parameter for deforming the three-dimensional grid space is:
Since the one transmitted by the communication means is used, the three-dimensional movement of the three-dimensional object can be effectively generated and displayed with fewer parameters. Although the affine transformation coefficient is used as the transformation parameter, the transformation parameter is not limited to this.

【0055】実施の形態4.図14は本実施の形態4に
よる3次元キャラクタアニメーション表示装置をカラオ
ケシステムに応用した一例を示すブロック図である。図
14において、20はデコード手段であり、演奏データ
(MIDIデータなど),歌詞データなどの入力データ
の信号を受信して、該演奏データの信号,及び,該歌詞
データの信号をそれぞれ音源手段,及び,文字画像生成
手段21に出力する。21は文字画像生成手段であり、
デコード手段20から出力された歌詞データの信号を受
信して文字画像データの信号に変換して出力する。22
は画像合成手段であり、文字画像生成手段21から出力
された文字画像データの信号,3次元グラフィックス生
成手段30から出力された3次元グラフィックス画像デ
ータの信号,及び,背景画像データの信号を合成して、
出力画像データの信号にして出力する。33は画像表示
手段であり、画像合成手段22から出力された出力画像
データの信号を受信して表示する。また、24は音源手
段であり、デコード手段20が出力した演奏データの信
号を受信して音楽信号に変換して出力する。25はミキ
サであり、音源手段24から出力された音楽信号及びマ
イクから出力されたマイク入力信号を受信して調整,加
工などしたものをオーディオ出力信号にして出力する。
26はスピーカであり、ミキサ25から出力されたオー
ディオ出力信号を受信して音声にして出力する。また、
27はマイクであり、ユーザが発声した音などを音声入
力する。28は音声分析手段であり、マイク27から出
力されたマイク入力信号を分析して、音程の高低,音量
の大小,テンポ・ピッチ,抑揚,音の持続時間などのパ
ラメータを求める。29は3次元動き生成手段であり、
音声分析手段28で求められたパラメータを用いて、プ
ログラムに従って3次元動きデータを生成し、3次元動
き情報として3次元グラフィックス生成手段に出力す
る。30は3次元グラフィックス生成手段であり、3次
元動き生成手段29から得た3次元動き情報と、カラオ
ケソフトに入っている3次元キャラクタの情報である3
次元モデルデータとから、3次元グラフィックス画像デ
ータを生成する。
Embodiment 4 FIG. 14 is a block diagram showing an example in which the three-dimensional character animation display device according to the fourth embodiment is applied to a karaoke system. In FIG. 14, a decoding unit 20 receives input data signals such as performance data (eg, MIDI data) and lyrics data, and converts the performance data signal and the lyrics data signal into sound source means, And, it outputs to the character image generating means 21. 21 is a character image generating means,
The lyric data signal output from the decoding means 20 is received, converted into a character image data signal, and output. 22
Denotes an image synthesizing unit which converts the signal of the character image data output from the character image generating unit 21, the signal of the three-dimensional graphics image data output from the three-dimensional graphics generating unit 30, and the signal of the background image data. Synthesize
Output as the signal of the output image data and output. Reference numeral 33 denotes an image display unit that receives and displays a signal of output image data output from the image combining unit 22. Reference numeral 24 denotes sound source means, which receives a signal of performance data output from the decoding means 20, converts the signal into a music signal, and outputs the music signal. A mixer 25 receives a music signal output from the sound source 24 and a microphone input signal output from the microphone, and adjusts and processes the signal to output an audio output signal.
Reference numeral 26 denotes a speaker, which receives an audio output signal output from the mixer 25, converts the signal into audio, and outputs the audio. Also,
Reference numeral 27 denotes a microphone for voice input of a sound uttered by the user. Reference numeral 28 denotes a voice analysis unit which analyzes a microphone input signal output from the microphone 27 and obtains parameters such as pitch, loudness, tempo / pitch, intonation, and sound duration. 29 is a three-dimensional motion generation means,
Using the parameters obtained by the voice analysis means 28, three-dimensional motion data is generated according to a program and output to the three-dimensional graphics generation means as three-dimensional motion information. Reference numeral 30 denotes three-dimensional graphics generating means, which is three-dimensional motion information obtained from the three-dimensional motion generating means 29 and three-dimensional character information included in the karaoke software.
From the three-dimensional model data, three-dimensional graphics image data is generated.

【0056】次に動作について説明する。まず、カラオ
ケソフトの演奏データ,及び,歌詞データの入力データ
の信号を、デコード手段20から、それぞれ音源手段2
4,及び,文字画像生成手段21へ出力する。ミキサ2
5では、上記演奏データの信号を音源手段24で変換し
て音楽信号にしたものと、マイク27に入力されたユー
ザの発声した声やユーザが発した手拍子などの音をマイ
ク入力信号としたものとを、ミキシングして、演奏に音
声を乗せたオーディオ出力信号としてスピーカ26へ出
力し、スピーカ26から音声にして出力される。また、
上記マイク入力信号は、音声分析手段28にも送られ、
ここで該マイク入力信号を分析して求められた音程の高
低,音量の大小,テンポ・ピッチ,抑揚,音の持続時間
などのパラメータを用いて、3次元動き生成手段29に
おいて、3次元動きデータが生成される。該3次元動き
データは、3次元動き情報として3次元グラフィックス
生成手段30に送られ、カラオケソフトから得た3次元
モデルデータとともに、3次元キャラクタの動きである
3次元グラフィックス画像データが生成される。一方、
上記歌詞データの信号は、文字画像生成手段21で文字
画像データに変換され、該文字画像データは、上記3次
元グラフィックス画像データ、及び、カラオケソフトの
背景画像データとともに、画像合成手段22において出
力画像データにまとめられて、画像表示手段23で表示
される。
Next, the operation will be described. First, the signal of the karaoke software performance data and the input data of the lyrics data are transmitted from the decoding means 20 to the sound source means 2 respectively.
4, and output to the character image generating means 21. Mixer 2
In 5, a sound signal obtained by converting a signal of the performance data by the sound source means 24 into a music signal and a sound input by the microphone 27 such as a voice uttered by the user or a clapping sound generated by the user are used as the microphone input signal. Are mixed and output to the speaker 26 as an audio output signal obtained by adding a sound to the performance, and the sound is output from the speaker 26. Also,
The microphone input signal is also sent to the voice analysis means 28,
Here, three-dimensional motion data is generated by the three-dimensional motion generating means 29 using parameters such as pitch, loudness, tempo / pitch, intonation, and sound duration obtained by analyzing the microphone input signal. Is generated. The three-dimensional motion data is sent to the three-dimensional graphics generating means 30 as three-dimensional motion information, and three-dimensional graphics image data representing the motion of the three-dimensional character is generated together with the three-dimensional model data obtained from the karaoke software. You. on the other hand,
The signal of the lyrics data is converted into character image data by a character image generating means 21, and the character image data is output by an image synthesizing means 22 together with the three-dimensional graphics image data and the background image data of the karaoke software. The images are combined into image data and displayed on the image display means 23.

【0057】ここで、上記3次元モデルデータは、カラ
オケソフトから得られるものとしたが、そのデータの内
容としては、3次元キャラクタの形状のみの情報であっ
たり、3次元キャラクタの形状のみでなく該3次元キャ
ラクタの動きを加えた情報であったりする。前者の場
合、3次元キャラクタが静止している状態のものである
ので、該3次元キャラクタの動きは、すべて3次元動き
生成手段29からの3次元動き情報に基づいて生成され
る。また、後者の場合には、すでに3次元キャラクタが
動いており、この動きが上記3次元動き情報によって変
更されて、新たな3次元キャラクタの動きが生成され
る。
Here, the three-dimensional model data is obtained from the karaoke software. However, the content of the data is not only information on the shape of the three-dimensional character, but also information on the shape of the three-dimensional character. It may be information to which the movement of the three-dimensional character is added. In the former case, since the three-dimensional character is in a stationary state, all the motions of the three-dimensional character are generated based on the three-dimensional motion information from the three-dimensional motion generating means 29. In the latter case, the three-dimensional character has already moved, and this movement is changed by the three-dimensional movement information to generate a new three-dimensional character movement.

【0058】また、3次元動き生成手段29での上記3
次元動き情報の生成について具体的に説明すると、あら
かじめプログラムが設定されており、上記パラメータの
うち音量の大小のパラメータ(音量パラメータ)をXと
して、ある音量より大きくなると動きが生成される閾値
をmと設定する。また、3次元キャラクタである3次元
オブジェクトの関節点A及び関節点Bと、対応させるグ
リッド点を時間軸方向に示して動きを表現したプログラ
ムを用意する。例えば、該プログラムは、関節点A及び
関節点Bに対して、それぞれW1→W3→W1→W5→
W3→…,及び,W2→W4→W2→W6→W4→…と
設定されたものとすると、最初、3次元オブジェクトが
静止しているとき、関節点A及び関節点Bはグリッド点
W1及びW2に位置し、歌が始まって音声が入力され、
X>mとなったときに、上記プログラムが実行されて3
次元動きが生成され、X≦mとなったときには、該プロ
グラムは中止されて3次元オブジェクトは静止する。こ
のようにして、上記音量パラメータだけでなく、音程の
高低,テンポ・ピッチ,抑揚,音の持続時間などのパラ
メータについても同様に閾値を設定し、3次元オブジェ
クトを構成する複数の部品の関節点や代表点についての
プログラムを設定すれば、様々な3次元動きを生成する
ことができる。また、カラオケソフトから得られる3次
元モデルデータに、すでに3次元キャラクタの動きが含
まれている場合、例えば、関節点Aに対して、グリッド
点W1→W2→W1→W2→…で表現される動きが含ま
れていれば、3次元動き生成手段29では、X>mのと
きにグリッド点をW1→W3,及び,W2→W4に変更
するプログラムを設定し、X>mとなったとき、グリッ
ド点をW1→W3,及び,W2→W4に変更する3次元
動き情報が3次元グラフィックス生成手段30に送ら
れ、上記3次元キャラクタの動きは、グリッド点W3→
W4→W3→W4→…で表現される動きに変更され、X
≦mとなったときには、該3次元キャラクタの動きは、
元の3次元モデルデータに含まれる動きに戻る。
The three-dimensional motion generating means 29
The generation of the dimensional motion information will be described in detail. A program is set in advance, and a parameter of the volume of the volume (volume parameter) among the above parameters is set to X, and a threshold at which a motion is generated when the volume exceeds a certain volume is m. Set as In addition, a program is prepared in which the joint points A and B of the three-dimensional object, which is a three-dimensional character, and the corresponding grid points are indicated in the time axis direction to express the movement. For example, the program calculates W1 → W3 → W1 → W5 →
.., And W2 → W4 → W2 → W6 → W4 →... First, when the three-dimensional object is stationary, the joint points A and B become grid points W1 and W2. , The song starts and voice is input,
When X> m, the above program is executed and 3
When a three-dimensional object is generated and X ≦ m, the program is stopped and the three-dimensional object is stopped. In this manner, not only the volume parameter but also parameters such as pitch, tempo / pitch, intonation, and duration of sound are set in the same manner, and joint points of a plurality of parts constituting the three-dimensional object are set. If a program is set for a representative point and various points, various three-dimensional movements can be generated. When the three-dimensional model data obtained from the karaoke software already includes the movement of the three-dimensional character, for example, the joint point A is represented by grid points W1 → W2 → W1 → W2 →. If motion is included, the three-dimensional motion generating means 29 sets a program that changes the grid points from W1 to W3 and W2 to W4 when X> m, and when X> m, The three-dimensional motion information for changing the grid points from W1 to W3 and from W2 to W4 is sent to the three-dimensional graphics generating means 30, and the motion of the three-dimensional character is changed from the grid point W3 to W3.
W4 → W3 → W4 → ...
When ≦ m, the movement of the three-dimensional character is
Return to the movement included in the original three-dimensional model data.

【0059】また、図15により、3次元グラフィック
ス生成手段30での3次元グラフィックス画像データの
生成について具体的に説明すると、図において、図3又
は図9と同一符号は同一又は相当部分であり、先ず、3
次元位置計算手段10において、3次元グリッド空間形
状データに基づいて、3次元グリッド空間を3次元空間
へ配置する。次に、3次元動き生成手段29から出力さ
れた3次元動き情報に基づいて、上記3次元モデルデー
タに含まれる3次元キャラクタの形状の情報から、該3
次元キャラクタの関節点又は代表点を、上記3次元動き
情報における関節点又は代表点と一致させて、該3次元
動き情報に従って、該3次元キャラクタを3次元グリッ
ド空間に配置し、その配置を変更してフレームを生成す
る。上記3次元動き情報は記憶手段11で記憶する。ま
た、図3で説明したと同様にして、3次元コンピュータ
グラフィックスの手法により、テクスチャマッピング手
段12で3次元キャラクタの面に所定のテクスチャデー
タを貼り付け、透視変換手段13で3次元キャラクタの
3次元空間での座標位置から2次元ディスプレイ面へ投
影して、座標変換し、フレームメモリ手段14で透視変
換手段13により2次元ディスプレイ面に投影されたイ
メージデータをフレームデータとして記憶し、画像表示
手段15で上記フレームデータを表示して3次元グラフ
ィックス画像データを作成する。
The generation of three-dimensional graphics image data by the three-dimensional graphics generation means 30 will be specifically described with reference to FIG. 15. In the figure, the same reference numerals as those in FIG. 3 or FIG. 9 denote the same or corresponding parts. Yes, first 3
In the three-dimensional position calculating means 10, the three-dimensional grid space is arranged in the three-dimensional space based on the three-dimensional grid space shape data. Next, based on the three-dimensional motion information output from the three-dimensional motion generating means 29, the information of the shape of the three-dimensional character contained in the three-dimensional model data is used.
The joint point or the representative point of the three-dimensional character is made coincident with the joint point or the representative point in the three-dimensional motion information, and the three-dimensional character is arranged in the three-dimensional grid space according to the three-dimensional motion information, and the arrangement is changed. To generate a frame. The three-dimensional motion information is stored in the storage unit 11. In the same manner as described with reference to FIG. 3, predetermined texture data is pasted on the surface of the three-dimensional character by the texture mapping means 12 by the three-dimensional computer graphics technique, and the three-dimensional character The image data projected onto the two-dimensional display surface by the perspective transformation means 13 is stored as frame data by the frame memory means 14 by projecting from the coordinate position in the two-dimensional space onto the two-dimensional display surface, and the image display means In step 15, the frame data is displayed to create three-dimensional graphics image data.

【0060】ここで、上記3次元モデルデータ、又は、
上記3次元グリッド空間形状データは、CD−ROMや
DVD等の外部記憶装置に記憶されたものを用いるよう
にしてもよいし、あるいは、通信手段により、例えば、
ネットワーク,電話回線,無線電話回線,及び,赤外線
通信などでデータ伝送されたものを用いるようにすれ
ば、より少ないパラメータで効果的に3次元オブジェク
トの3次元動きを生成して表示することができる。ま
た、上記3次元動きデータについても、基本となる3次
元動きデータが、あらかじめ設定されている場合には、
該3次元動きデータは、上記外部記憶装置に記憶されて
いたり、あるいは、上記通信手段により伝送されるもの
であってもよい。
Here, the three-dimensional model data or
As the three-dimensional grid space shape data, data stored in an external storage device such as a CD-ROM or a DVD may be used.
If data transmitted by a network, a telephone line, a wireless telephone line, or infrared communication is used, a three-dimensional motion of a three-dimensional object can be effectively generated and displayed with fewer parameters. . Also, as for the three-dimensional motion data, if the basic three-dimensional motion data is set in advance,
The three-dimensional motion data may be stored in the external storage device or transmitted by the communication means.

【0061】図16は本実施の形態4による3次元キャ
ラクタアニメーション表示装置をカラオケシステムに応
用した他の例を示すブロック図であり、図14に示した
マイク入力信号からの音声を分析して求めたパラメータ
だけでなく、演奏データの信号を分析して求めたパラメ
ータからも3次元動きを生成するものを示している。図
16において、図14と同一符号は同一又は相当部分で
ある。また、40は3次元基本動き生成手段であり、デ
コード手段20から出力された演奏データの信号を分析
して、音程の高低,音量の大小,テンポ・ピッチ,抑
揚,音の持続時間などのパラメータを求め、該パラメー
タから3次元基本動きが生成され、3次元基本動き情報
として出力される。41は3次元オブジェクト生成手段
であり、3次元基本動き生成手段40で生成された基本
動き情報と、カラオケソフトから得た3次元モデルデー
タとから、3次元グラフィックス画像データを作成す
る。42は3次元オブジェクト変形手段であり、3次元
オブジェクト生成手段41から出力された3次元グラフ
ィックス画像データと、3次元変形情報生成手段43で
生成された3次元変形情報とから新たな3次元グラフィ
ックス画像データを作成する。43は3次元変形情報生
成手段であり、音声分析手段28で求められたパラメー
タを用いて、3次元変形情報を生成して3次元オブジェ
クト変形手段に出力する。この場合の動作について説明
すると、図14と同様にして、デコード手段20から出
力された演奏データを処理してスピーカ26から音声に
して出力する。また、上記演奏データは、3次元基本動
き生成手段40において分析され、求められた音程の高
低,音量の大小,テンポ・ピッチ,抑揚,音の持続時間
などのパラメータから3次元基本動きが生成され、3次
元オブジェクト生成手段41において、該3次元基本動
きと、カラオケソフトから得られた3次元モデルデータ
とから3次元グラフィックス画像データが作成される。
また、図14と同様、マイク入力信号も分析して求めた
パラメータを用いるが、図14とは異なり、3次元変形
情報が、3次元変形情報生成手段43において生成され
る。そして、上記3次元グラフィックス画像データにお
ける3次元オブジェクトは、上記3次元変形情報に従っ
て変形されて、新たな3次元グラフィックス画像データ
が作成される。該3次元グラフィックス画像データは、
図14と同様に作成された文字画像データ,及び,背景
画像データとともに、画像合成手段22において出力画
像データとして合成されて、画像表示手段23で表示さ
れる。
FIG. 16 is a block diagram showing another example in which the three-dimensional character animation display device according to the fourth embodiment is applied to a karaoke system, and is obtained by analyzing the voice from the microphone input signal shown in FIG. In this case, a three-dimensional motion is generated not only from the parameters described above but also from parameters obtained by analyzing the performance data signal. 16, the same reference numerals as those in FIG. 14 denote the same or corresponding parts. Numeral 40 denotes a three-dimensional basic motion generating means for analyzing a signal of the performance data outputted from the decoding means 20 to obtain parameters such as pitch, loudness, tempo / pitch, intonation, sound duration, and the like. Is obtained, a three-dimensional basic motion is generated from the parameters, and is output as three-dimensional basic motion information. Reference numeral 41 denotes a three-dimensional object generating unit which generates three-dimensional graphics image data from the basic motion information generated by the three-dimensional basic motion generating unit 40 and three-dimensional model data obtained from karaoke software. Reference numeral 42 denotes a three-dimensional object deforming means, which generates a new three-dimensional graphic from the three-dimensional graphics image data output from the three-dimensional object generating means 41 and the three-dimensional deformation information generated by the three-dimensional deformation information generating means 43. Create image data. Reference numeral 43 denotes a three-dimensional deformation information generation unit that generates three-dimensional deformation information using the parameters obtained by the voice analysis unit 28 and outputs the generated three-dimensional deformation information to the three-dimensional object deformation unit. The operation in this case will be described. In the same manner as in FIG. 14, the performance data output from the decoding means 20 is processed and output from the speaker 26 as sound. The performance data is analyzed by the three-dimensional basic motion generation means 40, and a three-dimensional basic motion is generated from the parameters such as the pitch of the pitch, the volume of the volume, the tempo / pitch, the intonation, and the duration of the sound. In the three-dimensional object generating means 41, three-dimensional graphics image data is created from the three-dimensional basic motion and three-dimensional model data obtained from karaoke software.
Also, similarly to FIG. 14, parameters obtained by analyzing the microphone input signal are used. However, unlike FIG. 14, three-dimensional deformation information is generated by the three-dimensional deformation information generating means 43. Then, the three-dimensional object in the three-dimensional graphics image data is deformed according to the three-dimensional deformation information to create new three-dimensional graphics image data. The three-dimensional graphics image data is
The image combining unit 22 combines the character image data and the background image data created in the same manner as in FIG. 14 as output image data, and displays the image data on the image display unit 23.

【0062】ここで、上記3次元変形情報について、図
17により具体例を挙げて説明すると、図において、
(a) は3次元オブジェクト生成手段41で作成された3
次元グラフィックス画像データにおける3次元オブジェ
クトの動きのうち、1つのフレームデータに対応するも
のである。(b) は(a) のフレームデータの次に表示され
るフレームデータである。(c) は3次元変形情報であ
り、ユーザが発声した声などの音声を分析して求めた音
程の高低,音量の大小,テンポ・ピッチ,抑揚,音の持
続時間などのパラメータのうち1つの値が閾値を越える
と、3次元オブジェクトの頭の部分を大きく変形すると
いうプログラムを実行するというものである。これらの
動作としては、(a) から(b) 、或いは、(b) から(a) へ
の動きは、カラオケソフトから得た3次元キャラクタの
形状の情報である3次元モデルデータに、MIDIデー
タなどの演奏データの信号から生成された3次元基本動
き情報を与えることにより、3次元オブジェクト生成手
段41において生成したものであり、上記演奏データの
みに基づいて生成された動きである。従って、カラオケ
演奏が始まると、先ず、上記演奏データのみから生成さ
れた(a) から(b) 、或いは、(b) から(a) への動き、即
ち、両腕を頭に近づけたり遠ざけたりする動きが画像表
示手段23に表示される。次に、ユーザが歌い始め、そ
のユーザが発声した声などのマイク入力信号を分析して
求めたパラメータが閾値を越えると、3次元変形情報生
成手段43において、3次元オブジェクトの頭の部分を
大きく変形するというプログラムが実行されて、この3
次元変形情報が3次元オブジェクト変形手段42に出力
される。そして、3次元オブジェクト変形手段42で
は、上記演奏データのみから生成された、両腕を頭に近
づけたり遠ざけたりしている3次元オブジェクトを、上
記3次元変形情報に従って、該3次元オブジェクトの頭
の部分を大きく変形させ、頭が大きくなった3次元オブ
ジェクトが両腕を頭に近づけたり遠ざけたりするもの
が、画像表手段23に表示される。
Here, the three-dimensional deformation information will be described with reference to a specific example with reference to FIG.
(a) is the 3D object created by the 3D object generating means 41.
The motion of the three-dimensional object in the three-dimensional graphics image data corresponds to one frame data. (b) is the frame data displayed next to the frame data of (a). (c) is three-dimensional deformation information, and one of parameters such as pitch, loudness, tempo / pitch, intonation, and sound duration obtained by analyzing a voice such as a voice uttered by the user. When the value exceeds the threshold value, a program for greatly deforming the head of the three-dimensional object is executed. As these operations, the movement from (a) to (b) or from (b) to (a) is performed by adding MIDI data to 3D model data which is information of the shape of a 3D character obtained from karaoke software. The motion is generated by the three-dimensional object generating means 41 by giving the three-dimensional basic motion information generated from the signal of the performance data, such as the performance data. Therefore, when the karaoke performance starts, first, the movement from (a) to (b) or from (b) to (a) generated only from the performance data, that is, the arms are moved closer to or away from the head. The moving motion is displayed on the image display means 23. Next, when the user starts singing and a parameter obtained by analyzing a microphone input signal such as a voice uttered by the user exceeds a threshold, the three-dimensional deformation information generating means 43 enlarges the head of the three-dimensional object. The program to transform is executed and this 3
The dimensional deformation information is output to the three-dimensional object deforming means 42. Then, the three-dimensional object deforming means 42 converts the three-dimensional object, which is generated only from the performance data and has both arms close to or away from the head, into the head of the three-dimensional object according to the three-dimensional deformation information. The three-dimensional object whose part is greatly deformed and whose head is enlarged moves both arms toward and away from the head is displayed on the image table means 23.

【0063】このように、本実施の形態4による3次元
キャラクタアニメーション表示装置では、演奏データか
ら得られるパラメータを3次元基本動き情報に変換する
3次元基本動き生成手段、又は、ユーザの音声から得ら
れるパラメータを3次元動き情報,或いは,3次元変形
情報にそれぞれ変換するパラメータ変換手段である、3
次元動き生成手段,或いは,3次元変形情報生成手段を
備え、上記3次元基本動き情報,又は,上記3次元変形
情報から、それぞれ3次元グラフィックス生成手段,又
は,3次元オブジェクト変形手段において、3次元グリ
ッド空間と3次元オブジェクトとを用いて、3次元キャ
ラクタの動きである3次元グラフィックス画像データが
生成され、文字画像データ、及び、背景画像データとと
もに、画像合成手段において出力画像データにまとめら
れて、画像表示手段で表示される構成としたから、関節
点を結んだスケルトン構造体の変形を示す関節角の変化
の度合い,関節点の移動距離などというような複雑なデ
ータを用いることなく、簡易に3次元キャラクタのアニ
メーションを作成することができるだけでなく、演奏デ
ータ及びユーザの音声の2種類の音データに反応して、
3次元オブジェクトを動作させることが可能であり、効
果的に3次元オブジェクトの動きを生成したり、3次元
オブジェクトを変形することが可能である。また、上記
3次元モデルデータ、又は、3次元グリッド空間形状デ
ータは、通信手段により伝送されたものを用いるように
したから、より少ないパラメータで効果的に3次元オブ
ジェクトの3次元動きを生成して表示することができ
る。
As described above, in the three-dimensional character animation display device according to the fourth embodiment, the three-dimensional basic motion generating means for converting the parameters obtained from the performance data into three-dimensional basic motion information, or the three-dimensional basic motion generating means for converting the parameters from the user's voice. Parameter conversion means for converting the parameter to be converted into three-dimensional motion information or three-dimensional deformation information.
A three-dimensional motion generating unit or a three-dimensional deformation information generating unit, wherein the three-dimensional basic motion information or the three-dimensional deformation information is used as a three-dimensional graphics generating unit or a three-dimensional object deforming unit. Using the three-dimensional object and the three-dimensional grid space, three-dimensional graphics image data, which is the movement of a three-dimensional character, is generated, and is combined with character image data and background image data into output image data by an image synthesizing unit. Therefore, since it is configured to be displayed by the image display means, without using complicated data such as the degree of change of the joint angle indicating the deformation of the skeleton structure connecting the joint points, the moving distance of the joint points, etc. Not only can you create animations of 3D characters easily, but you can In response to two types of sound data of voice,
The three-dimensional object can be operated, and the movement of the three-dimensional object can be effectively generated or the three-dimensional object can be deformed. In addition, since the three-dimensional model data or the three-dimensional grid space shape data used are those transmitted by the communication means, the three-dimensional motion of the three-dimensional object can be effectively generated with fewer parameters. Can be displayed.

【0064】なお、上記演奏データ、上記歌詞データ、
上記背景画像データ、及び、3次元モデルデータは、い
ずれもカラオケソフトから得るようにしたが、該カラオ
ケソフトは、CD−ROMやDVDなどであってもよい
し、ネットワークや電話回線経由で伝送されてくるもの
であってもよい。
The performance data, the lyrics data,
Both the background image data and the three-dimensional model data are obtained from karaoke software, but the karaoke software may be a CD-ROM or a DVD, or transmitted via a network or a telephone line. May come.

【0065】また、実施の形態4においては、3次元キ
ャラクタアニメーション表示装置をカラオケシステムに
応用したが、ゲームなどへの応用も可能である。例え
ば、上記3次元キャラクタアニメーション表示装置をゲ
ーム機に適用し、該ゲーム機のコントロールバッドにマ
イクを付けて音を拾い易くし、ユーザの歓声やため息な
どが入力されると、ゲームのキャラクタの動きや形状を
変化させるようにして、より表現力豊かなゲームを実現
することが可能となる。
In the fourth embodiment, the three-dimensional character animation display device is applied to a karaoke system. However, application to a game or the like is also possible. For example, when the above-described three-dimensional character animation display device is applied to a game machine, a microphone is attached to a control pad of the game machine to make it easy to pick up sound, and when a cheer or sigh of the user is input, the movement of the game character is performed. By changing the shape and shape, a more expressive game can be realized.

【0066】[0066]

【発明の効果】以上のように、本発明(請求項1)にか
かる3次元キャラクタアニメーション表示装置は、3次
元キャラクタの動きを生成して、画像表示する3次元キ
ャラクタアニメーション表示装置であって、3次元空間
の任意の座標点に相当する複数のグリッド点とこれを結
ぶワイヤフレームよりなる3次元グリッド空間の形状を
記述した3次元グリッド空間形状データに基づいて、上
記3次元グリッド空間を3次元空間に配置し、3次元キ
ャラクタである、1つ又は複数の任意の形状を有する3
次元部品から構成される3次元オブジェクトの形状を記
述した3次元形状データ、及び、上記3次元部品の空間
内に位置する当該3次元部品を代表する点である1つ又
は2つの代表点と、上記複数のグリッド点から選択され
たグリッド点との対応関係の時間軸変化を示した3次元
動きデータに基づいて、上記3次元オブジェクトを、上
記3次元グリッド空間内に配置し、上記3次元動きデー
タに基づいて、上記3次元キャラクタの動きを生成する
3次元位置計算手段と、上記3次元オブジェクトの面に
所定のテクスチャデータを貼り付けるテクスチャマッピ
ング手段と、上記3次元オブジェクトを、該3次元オブ
ジェクトの3次元空間内での座標位置から2次元ディス
プレイ面へ投影し、座標変換してイメージデータを作成
する透視変換手段と、上記イメージデータをフレームデ
ータとして記憶するフレームメモリ手段と、上記フレー
ムデータを表示する画像表示手段とを備えたから、関節
点を結んだスケルトン構造体の変形を示す関節角の変化
の度合い,関節点の移動距離などというような複雑なデ
ータを用いることなく、簡易に3次元キャラクタのアニ
メーションを作成することができる効果がある。
As described above, the three-dimensional character animation display device according to the present invention (claim 1) is a three-dimensional character animation display device that generates a motion of a three-dimensional character and displays an image. Based on three-dimensional grid space shape data describing the shape of a three-dimensional grid space consisting of a plurality of grid points corresponding to arbitrary coordinate points in the three-dimensional space and a wire frame connecting the grid points, the three-dimensional grid space is three-dimensionally converted. 3 having one or more arbitrary shapes that are arranged in space and are three-dimensional characters
Three-dimensional shape data describing the shape of a three-dimensional object composed of three-dimensional components, one or two representative points that are located in the space of the three-dimensional component and that represent the three-dimensional component, The three-dimensional object is arranged in the three-dimensional grid space based on three-dimensional motion data indicating a time-axis change of a correspondence relationship with a grid point selected from the plurality of grid points, and A three-dimensional position calculating means for generating the movement of the three-dimensional character based on the data; a texture mapping means for pasting predetermined texture data on a surface of the three-dimensional object; Perspective transformation means for projecting from a coordinate position in a three-dimensional space onto a two-dimensional display surface and transforming the coordinates to create image data And a frame memory means for storing the image data as frame data and an image display means for displaying the frame data. There is an effect that an animation of a three-dimensional character can be easily created without using complicated data such as a moving distance of the character.

【0067】また、本発明(請求項2)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、上記3次元動きデータに基
づいて、上記代表点と対応する上記選択されたグリッド
点とを記述した対応テーブルを生成し、上記対応テーブ
ルの上記代表点と上記グリッド点との対応関係を、上記
3次元動きデータに基づいて、変更して、時間軸方向に
記憶する記憶手段をさらに備えたから、関節点を結んだ
スケルトン構造体の変形を示す関節角の変化の度合い,
関節点の移動距離などというような複雑なデータを用い
ることなく、簡易に3次元キャラクタのアニメーション
を作成することができる効果がある。
The three-dimensional character animation display device according to the present invention (claim 2) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculation means generates a correspondence table describing the representative points and the selected grid points corresponding to the representative points based on the three-dimensional motion data, and generates the correspondence points between the representative points and the grid points in the correspondence table. Is provided based on the three-dimensional motion data to change the correspondence relationship between the joint points, and the degree of change in the joint angle indicating the deformation of the skeleton structure connecting the joint points. ,
There is an effect that animation of a three-dimensional character can be easily created without using complicated data such as a moving distance of a joint point.

【0068】また、本発明(請求項3)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、上記3次元部品を、上記2
つの代表点を通る直線である中心軸の軸方向に伸縮する
ことによって、上記2つの代表点とそれぞれ対応関係に
ある2つのグリッド点との距離を調節するものとしたか
ら、3次元部品同士の距離が離れすぎた場合に生じる違
和感を取り除いて表示することができる効果がある。
The three-dimensional character animation display device according to the present invention (claim 3) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means converts the three-dimensional part into the two-dimensional part.
By expanding and contracting in the axial direction of the central axis which is a straight line passing through the two representative points, the distance between the two representative points and the two grid points corresponding to each other is adjusted. There is an effect that the display can be performed while removing a sense of incongruity that occurs when the distance is too large.

【0069】また、本発明(請求項4)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、複数の異なる形状の3次元
グリッド空間を記述した上記3次元グリッド空間形状デ
ータに基づいて、上記3次元グリッド空間を異なる形状
に変更するものとしたから、3次元グリッド空間の形状
の特徴に応じた多様な3次元オブジェクトの動きを実現
することができる効果がある。
The three-dimensional character animation display device according to the present invention (claim 4) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means changes the three-dimensional grid space to a different shape based on the three-dimensional grid space shape data describing a plurality of differently shaped three-dimensional grid spaces. There is an effect that various three-dimensional object movements can be realized according to the features of the shape of the space.

【0070】また、本発明(請求項5)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、3次元グリッド位置変更デ
ータを3次元動きデータとして用い、該3次元グリッド
位置変更データ、上記3次元部品の2つの代表点を通る
直線からなる中心軸の一部分であって、該中心軸と交わ
り、該3次元部品の空間の外側、かつ、該2つの関節点
からそれぞれ最短に位置する2つのグリッド点に挟まれ
た部分中心軸を含む3次元グリッド空間のみを、当該部
分中心軸を変形することなく、変形した後、当該3次元
グリッド位置変更データを用いて、3次元オブジェクト
を変形するものとしたから、3次元グリッド空間の変形
に対応した、さらに多様な3次元オブジェクトの動きを
生成して表示することが可能で、変形前後の3次元オブ
ジェクトの部品の代表点とグリッドとの対応関係に変化
がなく、変形前後の3次元オブジェクトを変形前の3次
元グリッド空間内における3次元オブジェクトと入れ替
えて、変形した3次元オブジェクトの動きを生成して表
示することができる効果がある。
Further, the three-dimensional character animation display device according to the present invention (claim 5) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means uses the three-dimensional grid position change data as three-dimensional movement data, and the three-dimensional grid position change data is a part of a central axis formed by a straight line passing through two representative points of the three-dimensional component. Only the three-dimensional grid space that intersects with the central axis and includes the partial central axis outside the space of the three-dimensional component and between the two grid points located at the shortest from the two joint points, respectively, After the partial central axis is deformed without being deformed, the three-dimensional object is deformed using the three-dimensional grid position change data. The motion of the three-dimensional object can be generated and displayed, and the correspondence between the representative points of the parts of the three-dimensional object before and after the deformation and the grid does not change. 3-dimensional object by replacing the three-dimensional object in the pre-deformation of the three-dimensional grid space, there is an effect that can be displayed by generating a movement of the three-dimensional object deformed.

【0071】また、本発明(請求項6)にかかる3次元
キャラクタアニメーション表示装置は、請求項1又は請
求項5に記載の3次元キャラクタアニメーション表示装
置において、上記3次元位置計算手段は、上記3次元グ
リッド空間、及び、3次元オブジェクトを上記2次元デ
ィスプレイ面に投影した後、該2次元ディスプレイ面上
で、上記3次元動きデータに基づいて、2次元ディスプ
レイ面上での投影後の上記3次元キャラクタの動きを生
成するものとしたから、3次元で演算する場合に比べ
て、演算量を低減することができる効果がある。
The three-dimensional character animation display device according to the present invention (claim 6) is the three-dimensional character animation display device according to claim 1 or 5, wherein the three-dimensional position calculation means includes the three-dimensional position calculation means. After projecting a three-dimensional object onto the two-dimensional display surface, based on the three-dimensional motion data, the three-dimensional object after being projected on the two-dimensional display surface on the two-dimensional display surface. Since the movement of the character is generated, there is an effect that the amount of calculation can be reduced as compared with the case where the calculation is performed in three dimensions.

【0072】また、本発明(請求項7)にかかる3次元
キャラクタアニメーション表示装置は、請求項1に記載
の3次元キャラクタアニメーション表示装置において、
上記3次元位置計算手段は、演奏データから抽出した演
奏パラメータ、又は、音声を分析して得た音声パラメー
タを変換することによって、上記3次元動きデータを生
成するものとしたから、関節点を結んだスケルトン構造
体の変形を示す関節角の変化の度合い,関節点の移動距
離などというような複雑なデータを用いることなく、簡
易に3次元キャラクタのアニメーションを作成すること
ができるだけでなく、演奏データ及びユーザの音声の2
種類の音データに反応して、3次元オブジェクトを動作
させることが可能で、効果的に3次元オブジェクトの動
きを生成したり、3次元オブジェクトを変形することが
できる効果がある。
Further, the three-dimensional character animation display device according to the present invention (claim 7) is the three-dimensional character animation display device according to claim 1,
The three-dimensional position calculating means converts the performance parameters extracted from the performance data or the voice parameters obtained by analyzing the voice to generate the three-dimensional motion data. It is not only possible to create an animation of a three-dimensional character easily without using complicated data such as the degree of change of the joint angle indicating the deformation of the skeleton structure, the moving distance of the joint point, etc. And user's voice 2
The three-dimensional object can be moved in response to the type of sound data, and there is an effect that the movement of the three-dimensional object can be effectively generated and the three-dimensional object can be deformed.

【0073】また、本発明(請求項8)にかかる3次元
動きデータ伝送システムは、3次元キャラクタの動きを
生成して、画像表示する3次元キャラクタアニメーショ
ン表示装置に、データ通信手段を用いて送信側からデー
タを伝送する3次元動きデータ伝送システムにおいて、
上記3次元アニメーション表示装置は、3次元空間の任
意の座標点に相当する複数のグリッド点とこれを結ぶワ
イヤフレームよりなる3次元グリッド空間の形状を記述
した3次元グリッド空間形状データに基づいて、上記3
次元グリッド空間を3次元空間に配置し、3次元キャラ
クタである、1つ又は複数の任意の形状を有する3次元
部品から構成される3次元オブジェクトの形状を記述し
た3次元形状データ、及び、上記3次元部品の空間内に
位置する当該3次元部品を代表する点である1つ又は2
つの代表点と、上記複数のグリッド点から選択されたグ
リッド点との対応関係の時間軸変化を示した3次元動き
データに基づいて、上記3次元オブジェクトを、上記3
次元グリッド空間内に配置し、上記3次元動きデータに
基づいて、上記3次元キャラクタの動きを生成する3次
元位置計算手段と、上記3次元オブジェクトの面に所定
のテクスチャデータを貼り付けるテクスチャマッピング
手段と、上記3次元オブジェクトを、該3次元オブジェ
クトの3次元空間内での座標位置から2次元ディスプレ
イ面へ投影し、座標変換してイメージデータを作成する
透視変換手段と、上記イメージデータをフレームデータ
として記憶するフレームメモリ手段と、上記フレームデ
ータを表示する画像表示手段とを備え、上記送信側は、
上記データ通信手段を介して、上記3次元グリッド空間
形状データ、上記3次元形状データ、上記テクスチャデ
ータ、及び、上記3次元動きデータのいずれか1つ以上
を送信するデータ送信サーバを設け、上記3次元キャラ
クタアニメーション表示装置は、上記データ送信サーバ
から送信しない残りのデータを保持するものとしたか
ら、より少ないパラメータで効果的に3次元オブジェク
トの3次元動きを生成して表示することができる効果が
ある。
Further, the three-dimensional motion data transmission system according to the present invention (claim 8) generates a three-dimensional character motion and transmits it to a three-dimensional character animation display device for displaying an image using data communication means. In a three-dimensional motion data transmission system that transmits data from the side,
The three-dimensional animation display device is based on three-dimensional grid space shape data that describes the shape of a three-dimensional grid space consisting of a plurality of grid points corresponding to arbitrary coordinate points in a three-dimensional space and a wire frame connecting the grid points. 3 above
Three-dimensional shape data in which a three-dimensional object is arranged in a three-dimensional space, and is a three-dimensional character, and describes the shape of a three-dimensional object composed of one or more three-dimensional parts having an arbitrary shape One or two points that are located in the space of the three-dimensional component and represent the three-dimensional component
The three-dimensional object is converted to the three-dimensional object on the basis of three-dimensional motion data indicating a change in the time axis of the correspondence between the three representative points and the grid points selected from the plurality of grid points.
Three-dimensional position calculating means for arranging the three-dimensional character on the basis of the three-dimensional motion data, and a texture mapping means for pasting predetermined texture data on the surface of the three-dimensional object; A perspective transformation means for projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface and performing coordinate transformation to create image data; Frame memory means for storing as, and image display means for displaying the frame data, the transmitting side,
A data transmission server for transmitting one or more of the three-dimensional grid space shape data, the three-dimensional shape data, the texture data, and the three-dimensional motion data via the data communication means; Since the three-dimensional character animation display device retains the remaining data that is not transmitted from the data transmission server, the three-dimensional object can be effectively generated and displayed with fewer parameters. is there.

【0074】また、本発明(請求項9)にかかる3次元
キャラクタアニメーション表示装置は、3次元キャラク
タの動きを生成して、画像表示する3次元キャラクタア
ニメーション表示装置であって、3次元空間の任意の座
標点に相当する複数のグリッド点とこれを結ぶワイヤフ
レームよりなる3次元グリッド空間の形状を記述した3
次元グリッド空間形状データに基づいて、該3次元グリ
ッド空間を3次元空間へ配置し、当該3次元グリッド空
間内に、3次元キャラクタである3次元オブジェクトを
構成する部品のインデックスと、当該3次元グリッド空
間の複数のグリッド点のうち初期値として選択されたグ
リッド点により上記部品の位置とを記述した3次元オブ
ジェクト構成部品データに基づいて、該初期値として選
択されたグリッド点間に該部品を配置して、当該初期値
として選択されたグリッド点を当該部品の代表点と定義
し、該代表点と上記複数のグリッド点から選択されたグ
リッド点との対応関係の時間軸変化を示した3次元動き
データに基づいて、上記3次元キャラクタの動きを生成
する3次元位置計算手段と、上記3次元オブジェクトの
面に所定のテクスチャデータを貼り付けるテクスチャマ
ッピング手段と、上記3次元オブジェクトを、該3次元
オブジェクトの3次元空間内での座標位置から2次元デ
ィスプレイ面へ投影し、座標変換してイメージデータを
作成する透視変換手段と、上記イメージデータをフレー
ムデータとして記憶するフレームメモリ手段と、上記フ
レームデータを表示する画像表示手段とを備えたから、
関節点を結んだスケルトン構造体の変形を示す関節角の
変化の度合い,関節点の移動距離などというような複雑
なデータを用いることなく、簡易に3次元キャラクタの
アニメーションを作成することができるだけでなく、3
次元キャラクタである3次元オブジェクトを設定して、
該3次元オブジェクトに合わせた3次元グリッド空間を
設定しなくても、一定の3次元グリッド空間における3
次元の部品の動きだけの少ないパラメータで、効率よく
3次元動きデータを生成することができ、効果的に3次
元オブジェクトの動きを生成して表示することができる
効果がある。
Further, the three-dimensional character animation display device according to the present invention (claim 9) is a three-dimensional character animation display device for generating a motion of a three-dimensional character and displaying the generated image, Which describes the shape of a three-dimensional grid space consisting of a plurality of grid points corresponding to the coordinate points and a wire frame connecting the grid points.
Based on the three-dimensional grid space shape data, the three-dimensional grid space is arranged in a three-dimensional space, and in the three-dimensional grid space, an index of a part constituting a three-dimensional object that is a three-dimensional character, and the three-dimensional grid Based on the three-dimensional object component data describing the position of the component by the grid point selected as the initial value among the plurality of grid points in the space, the component is arranged between the grid points selected as the initial value. Then, a grid point selected as the initial value is defined as a representative point of the component, and a three-dimensional graph showing a time axis change of a correspondence relationship between the representative point and a grid point selected from the plurality of grid points. A three-dimensional position calculating means for generating the motion of the three-dimensional character based on the motion data; Texture mapping means for pasting image data, and perspective transformation means for projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface and performing coordinate transformation to create image data. A frame memory means for storing the image data as frame data, and an image display means for displaying the frame data,
It is possible to easily create an animation of a three-dimensional character without using complicated data such as the degree of change of the joint angle indicating the deformation of the skeleton structure connecting the joint points, the moving distance of the joint points, etc. No, 3
Set a 3D object that is a 3D character,
Even if a three-dimensional grid space is not set in accordance with the three-dimensional object, three-dimensional
The three-dimensional motion data can be efficiently generated with only a few parameters of the motion of the three-dimensional component, and the motion of the three-dimensional object can be effectively generated and displayed.

【0075】また、本発明(請求項10)にかかる3次
元キャラクタアニメーション表示装置は、請求項9に記
載の3次元キャラクタアニメーション表示装置におい
て、上記3次元位置計算手段は、上記3次元動きデータ
に基づいて、上記代表点と対応する上記選択されたグリ
ッド点とを記述した対応テーブルを生成し、上記対応テ
ーブルの上記代表点と上記グリッド点との対応関係を、
上記3次元動きデータに基づいて、変更して、時間軸方
向に記憶する記憶手段をさらに備えたから、関節点を結
んだスケルトン構造体の変形を示す関節角の変化の度合
い,関節点の移動距離などというような複雑なデータを
用いることなく、簡易に3次元キャラクタのアニメーシ
ョンを作成することができるだけでなく、3次元キャラ
クタである3次元オブジェクトを設定して、該3次元オ
ブジェクトに合わせた3次元グリッド空間を設定しなく
ても、一定の3次元グリッド空間における3次元の部品
の動きだけの少ないパラメータで、効率よく3次元動き
データを生成することができ、効果的に3次元オブジェ
クトの動きを生成して表示することができる効果があ
る。
The three-dimensional character animation display device according to the present invention (claim 10) is the three-dimensional character animation display device according to claim 9, wherein the three-dimensional position calculating means includes: Based on the above, a correspondence table describing the representative points and the selected grid points corresponding thereto is generated, and the correspondence between the representative points and the grid points in the correspondence table is
The apparatus further comprises a storage means for changing the three-dimensional motion data based on the three-dimensional motion data and storing the data in the time axis direction. It is not only possible to easily create an animation of a three-dimensional character without using complicated data such as a three-dimensional character. Even if the grid space is not set, three-dimensional motion data can be efficiently generated with only a few parameters of the motion of the three-dimensional component in the fixed three-dimensional grid space, and the motion of the three-dimensional object can be effectively generated. There is an effect that it can be generated and displayed.

【0076】また、本発明(請求項11)にかかる3次
元キャラクタアニメーション表示装置は、請求項9に記
載の3次元キャラクタアニメーション表示装置におい
て、上記画像表示手段は、上記フレームデータが表示さ
れるフレーム表示周期の時間内に、上記部品を、該部品
の代表点に変更する部品の代表点を一致させて、形態の
異なる部品に変更するものとしたから、多様な3次元オ
ブジェクトを生成することができ、1つの3次元部品の
3次元動きデータを利用して、より少ないデータ量で容
易に異なる形状を有する3次元キャラクタの動きを生成
することができる効果がある。
In the three-dimensional character animation display device according to the present invention (claim 11), in the three-dimensional character animation display device according to claim 9, the image display means includes a frame on which the frame data is displayed. Within the time of the display cycle, the above-mentioned parts are changed to parts having different forms by matching the representative points of the parts to be changed to the representative points of the parts, so that various three-dimensional objects can be generated. Thus, there is an effect that the motion of a three-dimensional character having a different shape can be easily generated with a smaller data amount by using the three-dimensional motion data of one three-dimensional component.

【0077】また、本発明(請求項12)にかかる3次
元動きデータ伝送システムは、3次元キャラクタの動き
を生成して、画像表示する3次元キャラクタアニメーシ
ョン表示装置に、データ通信手段を用いて送信側からデ
ータを伝送する3次元動きデータ伝送システムにおい
て、上記3次元アニメーション表示装置は、3次元空間
の任意の座標点に相当する複数のグリッド点とこれを結
ぶワイヤフレームよりなる3次元グリッド空間の形状を
記述した3次元グリッド空間形状データに基づいて、該
3次元グリッド空間を3次元空間へ配置し、当該3次元
グリッド空間内に、3次元キャラクタである3次元オブ
ジェクトを構成する部品のインデックスと、当該3次元
グリッド空間の複数のグリッド点のうち初期値として選
択されたグリッド点により上記部品の位置とを記述した
3次元オブジェクト構成部品データに基づいて、該初期
値として選択されたグリッド点間に該部品を配置して、
当該初期値として選択されたグリッド点を当該部品の代
表点と定義し、該代表点と上記複数のグリッド点から選
択されたグリッド点との対応関係の時間軸変化を示した
3次元動きデータに基づいて、上記3次元キャラクタの
動きを生成する3次元位置計算手段と、上記3次元オブ
ジェクトの面に所定のテクスチャデータを貼り付けるテ
クスチャマッピング手段と、上記3次元オブジェクト
を、該3次元オブジェクトの3次元空間内での座標位置
から2次元ディスプレイ面へ投影し、座標変換してイメ
ージデータを作成する透視変換手段と、上記イメージデ
ータをフレームデータとして記憶するフレームメモリ手
段と、上記フレームデータを表示する画像表示手段とを
備え、上記送信側は、上記データ通信手段を介して、上
記3次元グリッド空間形状データ、上記3次元形状デー
タ、上記テクスチャデータ、及び、上記3次元オブジェ
クト構成部品データのいずれか1つ以上を送信するデー
タ送信サーバを設け、上記3次元キャラクタアニメーシ
ョン表示装置は、上記データ送信サーバから送信しない
残りのデータを保持するものとしたから、より少ないパ
ラメータで効果的に3次元オブジェクトの3次元動きを
生成して表示することができる効果がある。
Further, a three-dimensional motion data transmission system according to the present invention (claim 12) generates a three-dimensional character motion and transmits it to a three-dimensional character animation display device for displaying an image using data communication means. In the three-dimensional motion data transmission system for transmitting data from the side, the three-dimensional animation display device includes a plurality of grid points corresponding to arbitrary coordinate points in the three-dimensional space and a wire frame connecting the grid points. Based on the three-dimensional grid space shape data describing the shape, the three-dimensional grid space is arranged in the three-dimensional space, and in the three-dimensional grid space, an index of a part constituting a three-dimensional object that is a three-dimensional character and A grid point selected as an initial value among a plurality of grid points in the three-dimensional grid space More based on the three-dimensional object component data and the position described in the component, by placing the part between the selected grid points as initial values,
The grid point selected as the initial value is defined as a representative point of the part, and the three-dimensional motion data indicating the time axis change of the correspondence between the representative point and the grid point selected from the plurality of grid points is defined. A three-dimensional position calculating means for generating the movement of the three-dimensional character based on the three-dimensional object; a texture mapping means for attaching predetermined texture data to the surface of the three-dimensional object; A perspective transformation means for projecting from a coordinate position in a dimensional space to a two-dimensional display surface and performing coordinate transformation to create image data; a frame memory means for storing the image data as frame data; and displaying the frame data. Image transmitting means, and the transmitting side communicates with the three-dimensional grid via the data communication means. A data transmission server for transmitting any one or more of shape data, the three-dimensional shape data, the texture data, and the three-dimensional object component data; and the three-dimensional character animation display device includes the data transmission server. Since the remaining data not transmitted from is stored, there is an effect that the three-dimensional motion of the three-dimensional object can be effectively generated and displayed with fewer parameters.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置において用いる3次元グリッド
空間,及び,3次元オブジェクトを示す図である。
FIG. 1 is a diagram showing a three-dimensional grid space and a three-dimensional object used in a three-dimensional character animation display device according to a first embodiment of the present invention.

【図2】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置における3次元オブジェクトの
関節点とグリッド点との対応関係の変化を示す図であ
る。
FIG. 2 is a diagram showing a change in a correspondence relationship between joint points and grid points of a three-dimensional object in the three-dimensional character animation display device according to the first embodiment of the present invention.

【図3】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置の構成を示すブロック図であ
る。
FIG. 3 is a block diagram showing a configuration of a three-dimensional character animation display device according to the first embodiment of the present invention.

【図4】本発明の実施の形態1において用いる3次元オ
ブジェクトの関節点とグリッド点との対応関係を時間軸
方向に示した対応テーブルの例を示す図である。
FIG. 4 is a diagram illustrating an example of a correspondence table indicating a correspondence relationship between joint points and grid points of a three-dimensional object used in the first embodiment of the present invention in a time axis direction.

【図5】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置の透視変換手段における、3次
元オブジェクトの3次元座標から2次元ディスプレイ面
へ透視変換を示す図である。
FIG. 5 is a diagram showing a perspective transformation from the three-dimensional coordinates of the three-dimensional object to the two-dimensional display surface in the perspective transformation means of the three-dimensional character animation display device according to the first embodiment of the present invention.

【図6】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置において、3次元グリッド空間
の形状を変更したものを示す図である。
FIG. 6 is a diagram showing a three-dimensional character animation display device according to the first embodiment of the present invention in which the shape of a three-dimensional grid space is changed.

【図7】本発明の実施の形態1による3次元キャラクタ
アニメーション表示装置において、3次元オブジェクト
の部品の関節点とグリッド点との距離を調整したものを
示す図である。
FIG. 7 is a diagram showing the three-dimensional character animation display device according to the first embodiment of the present invention in which the distance between the joint points of the parts of the three-dimensional object and the grid points is adjusted.

【図8】本発明の実施の形態2による3次元キャラクタ
アニメーション表示装置において、3次元オブジェクト
の形状を変更したものを示す図である。
FIG. 8 is a diagram illustrating a three-dimensional character animation display device according to a second embodiment of the present invention in which the shape of a three-dimensional object is changed.

【図9】本発明の実施の形態2による3次元キャラクタ
アニメーション表示装置の構成を示すブロック図であ
る。
FIG. 9 is a block diagram showing a configuration of a three-dimensional character animation display device according to a second embodiment of the present invention.

【図10】本発明の実施の形態3による3次元キャラク
タアニメーション表示装置における3次元オブジェクト
の変形の過程の一例を2次元平面上に示す図である。
FIG. 10 is a diagram illustrating, on a two-dimensional plane, an example of a process of deforming a three-dimensional object in the three-dimensional character animation display device according to the third embodiment of the present invention.

【図11】本発明の実施の形態3において変形パラメー
タを適用する3次元グリッド空間を示した図である。
FIG. 11 is a diagram showing a three-dimensional grid space to which a deformation parameter is applied in the third embodiment of the present invention.

【図12】本発明の実施の形態3による3次元キャラク
タアニメーション表示装置における3次元オブジェクト
の変形の過程の別の一例を2次元平面上に示す図であ
る。
FIG. 12 is a diagram illustrating another example of the process of deforming the three-dimensional object on the two-dimensional plane in the three-dimensional character animation display device according to the third embodiment of the present invention.

【図13】本発明の実施の形態3による3次元キャラク
タアニメーション表示装置における3次元オブジェクト
の変形の過程の別の一例を2次元平面上に示す図であ
る。
FIG. 13 is a diagram showing another example of the process of deforming the three-dimensional object on the two-dimensional plane in the three-dimensional character animation display device according to the third embodiment of the present invention.

【図14】本発明の実施の形態4による3次元キャラク
タアニメーション表示装置をカラオケシステムに応用し
た一例を示すブロック図である。
FIG. 14 is a block diagram showing an example in which the three-dimensional character animation display device according to the fourth embodiment of the present invention is applied to a karaoke system.

【図15】本発明の実施の形態4における3次元グラフ
ィックス生成手段での3次元グラフィックス画像データ
の生成を説明する図である。
FIG. 15 is a diagram illustrating generation of three-dimensional graphics image data by a three-dimensional graphics generation unit according to Embodiment 4 of the present invention.

【図16】本発明の実施の形態4による3次元キャラク
タアニメーション表示装置をカラオケシステムに応用し
た他の例を示すブロック図である。
FIG. 16 is a block diagram showing another example in which the three-dimensional character animation display device according to the fourth embodiment of the present invention is applied to a karaoke system.

【図17】本発明の実施の形態4における3次元変形情
報生成手段での3次元変形情報の生成を説明する図であ
る。
FIG. 17 is a diagram illustrating generation of three-dimensional deformation information by a three-dimensional deformation information generation unit according to Embodiment 4 of the present invention.

【図18】従来の3次元コンピュータグラフィックスの
技術においてキャラクタの動きを表現するために用いる
スケルトン構造体の例を示す図である。
FIG. 18 is a diagram showing an example of a skeleton structure used to represent the movement of a character in a conventional three-dimensional computer graphics technique.

【図19】図18に示したスケルトン構造体の変形によ
ってキャラクタの動きを表現する場合の例を説明する図
である。
FIG. 19 is a diagram illustrating an example of a case where the movement of a character is expressed by deformation of the skeleton structure illustrated in FIG. 18;

【符号の説明】[Explanation of symbols]

1 3次元オブジェクト 2 3次元グリッド空間 3 中心軸 10 3次元一計算手段 11 記憶手段 12 テクスチャマッピング手段 13 透視変換手段 14 フレームメモリ手段 15 画像表示手段 16 プログラム制御手段 19 部分中心軸 20 デコード手段 21 文字画像生成手段 22 画像合成手段 23 画像表示手段 24 音源手段 25 ミキサ 26 スピーカ 27 マイク 28 音声分析手段 29 3次元動き生成手段 30 3次元グラフィックス生成手段 40 3次元基本動き生成手段 41 3次元オブジェクト生成手段 42 3次元オブジェクト変形手段 43 3次元変形情報生成手段 DESCRIPTION OF SYMBOLS 1 3D object 2 3D grid space 3 Central axis 10 3D one calculation means 11 Storage means 12 Texture mapping means 13 Perspective transformation means 14 Frame memory means 15 Image display means 16 Program control means 19 Partial central axis 20 Decoding means 21 Character Image generation means 22 Image synthesis means 23 Image display means 24 Sound source means 25 Mixer 26 Speaker 27 Microphone 28 Voice analysis means 29 Three-dimensional motion generation means 30 Three-dimensional graphics generation means 40 Three-dimensional basic motion generation means 41 Three-dimensional object generation means 42 three-dimensional object deformation means 43 three-dimensional deformation information generation means

Claims (12)

【特許請求の範囲】[Claims] 【請求項1】 3次元キャラクタの動きを生成して、画
像表示する3次元キャラクタアニメーション表示装置で
あって、 3次元空間の任意の座標点に相当する複数のグリッド点
とこれを結ぶワイヤフレームよりなる3次元グリッド空
間の形状を記述した3次元グリッド空間形状データに基
づいて、上記3次元グリッド空間を3次元空間に配置
し、3次元キャラクタである、1つ又は複数の任意の形
状を有する3次元部品から構成される3次元オブジェク
トの形状を記述した3次元形状データ、及び、上記3次
元部品の空間内に位置する当該3次元部品を代表する点
である1つ又は2つの代表点と、上記複数のグリッド点
から選択されたグリッド点との対応関係の時間軸変化を
示した3次元動きデータに基づいて、上記3次元オブジ
ェクトを、上記3次元グリッド空間内に配置し、上記3
次元動きデータに基づいて、上記3次元キャラクタの動
きを生成する3次元位置計算手段と、 上記3次元オブジェクトの面に所定のテクスチャデータ
を貼り付けるテクスチャマッピング手段と、 上記3次元オブジェクトを、該3次元オブジェクトの3
次元空間内での座標位置から2次元ディスプレイ面へ投
影し、座標変換してイメージデータを作成する透視変換
手段と、 上記イメージデータをフレームデータとして記憶するフ
レームメモリ手段と、 上記フレームデータを表示する画像表示手段とを備えた
ことを特徴とする3次元キャラクタアニメーション表示
装置。
1. A three-dimensional character animation display device for generating a motion of a three-dimensional character and displaying an image, comprising a plurality of grid points corresponding to arbitrary coordinate points in a three-dimensional space and a wire frame connecting the grid points. Based on the three-dimensional grid space shape data describing the shape of the three-dimensional grid space, the three-dimensional grid space is arranged in the three-dimensional space, and is a three-dimensional character having one or a plurality of arbitrary shapes. Three-dimensional shape data describing the shape of a three-dimensional object composed of three-dimensional components, one or two representative points that are located in the space of the three-dimensional component and that represent the three-dimensional component, On the basis of three-dimensional motion data indicating a time axis change of a correspondence relationship with a grid point selected from the plurality of grid points, the three-dimensional object is Place the serial three-dimensional grid space, the 3
Three-dimensional position calculating means for generating the movement of the three-dimensional character based on the three-dimensional movement data; texture mapping means for pasting predetermined texture data on the surface of the three-dimensional object; Dimensional object 3
A perspective transformation means for projecting from a coordinate position in a dimensional space to a two-dimensional display surface and performing coordinate transformation to create image data; a frame memory means for storing the image data as frame data; and displaying the frame data. A three-dimensional character animation display device comprising an image display means.
【請求項2】 請求項1に記載の3次元キャラクタアニ
メーション表示装置において、 上記3次元位置計算手段は、上記3次元動きデータに基
づいて、上記代表点と対応する上記選択されたグリッド
点とを記述した対応テーブルを生成し、 上記対応テーブルの上記代表点と上記グリッド点との対
応関係を、上記3次元動きデータに基づいて、変更し
て、時間軸方向に記憶する記憶手段をさらに備えたこと
を特徴とする3次元キャラクタアニメーション表示装
置。
2. The three-dimensional character animation display device according to claim 1, wherein said three-dimensional position calculating means determines said representative point and a corresponding said selected grid point based on said three-dimensional movement data. There is further provided storage means for generating the described correspondence table, changing the correspondence between the representative points and the grid points in the correspondence table based on the three-dimensional motion data, and storing the changed correspondence in the time axis direction. A three-dimensional character animation display device, characterized in that:
【請求項3】 請求項1に記載の3次元キャラクタアニ
メーション表示装置において、 上記3次元位置計算手段は、上記3次元部品を、上記2
つの代表点を通る直線である中心軸の軸方向に伸縮する
ことによって、上記2つの代表点とそれぞれ対応関係に
ある2つのグリッド点との距離を調節するものであるこ
とを特徴とする3次元キャラクタアニメーション表示装
置。
3. The three-dimensional character animation display device according to claim 1, wherein said three-dimensional position calculating means replaces said three-dimensional part with said two-dimensional part.
The three-dimensional object is characterized in that the distance between the two representative points and two grid points respectively corresponding to the two representative points is adjusted by expanding and contracting in the axial direction of a central axis which is a straight line passing through the two representative points. Character animation display device.
【請求項4】 請求項1に記載の3次元キャラクタアニ
メーション表示装置において、 上記3次元位置計算手段は、複数の異なる形状の3次元
グリッド空間を記述した上記3次元グリッド空間形状デ
ータに基づいて、上記3次元グリッド空間を異なる形状
に変更することを特徴とする3次元キャラクタアニメー
ション表示装置。
4. The three-dimensional character animation display device according to claim 1, wherein the three-dimensional position calculation means is configured to calculate a plurality of three-dimensional grid spaces having different shapes based on the three-dimensional grid space shape data. A three-dimensional character animation display device, wherein the three-dimensional grid space is changed to a different shape.
【請求項5】 請求項1に記載の3次元キャラクタアニ
メーション表示装置において、 上記3次元位置計算手段は、3次元グリッド位置変更デ
ータを3次元動きデータとして用い、該3次元グリッド
位置変更データ、上記3次元部品の2つの代表点を通る
直線からなる中心軸の一部分であって、該中心軸と交わ
り、該3次元部品の空間の外側、かつ、該2つの関節点
からそれぞれ最短に位置する2つのグリッド点に挟まれ
た部分中心軸を含む3次元グリッド空間のみを、当該部
分中心軸を変形することなく、変形した後、当該3次元
グリッド位置変更データを用いて、3次元オブジェクト
を変形することを特徴とする3次元キャラクタアニメー
ション表示装置。
5. The three-dimensional character animation display device according to claim 1, wherein the three-dimensional position calculation means uses the three-dimensional grid position change data as three-dimensional movement data, and the three-dimensional grid position change data, A part of a central axis consisting of a straight line passing through two representative points of the three-dimensional part, intersecting with the central axis, outside the space of the three-dimensional part, and located at the shortest distance from each of the two joint points; After deforming only the three-dimensional grid space including the partial central axis sandwiched between two grid points without deforming the partial central axis, the three-dimensional object is deformed using the three-dimensional grid position change data. A three-dimensional character animation display device, characterized in that:
【請求項6】 請求項1又は請求項5に記載の3次元キ
ャラクタアニメーション表示装置において、 上記3次元位置計算手段は、上記3次元グリッド空間、
及び、3次元オブジェクトを上記2次元ディスプレイ面
に投影した後、該2次元ディスプレイ面上で、上記3次
元動きデータに基づいて、2次元ディスプレイ面上での
投影後の上記3次元キャラクタの動きを生成することを
特徴とする3次元キャラクタアニメーション表示装置。
6. The three-dimensional character animation display device according to claim 1, wherein the three-dimensional position calculating means comprises: a three-dimensional grid space;
And projecting the three-dimensional object on the two-dimensional display surface, and then, on the two-dimensional display surface, based on the three-dimensional motion data, moving the three-dimensional character after projection on the two-dimensional display surface. A three-dimensional character animation display device characterized by generating.
【請求項7】 請求項1に記載の3次元キャラクタアニ
メーション表示装置において、 上記3次元位置計算手段は、演奏データから抽出した演
奏パラメータ、又は、音声を分析して得た音声パラメー
タを変換することによって、上記3次元動きデータを生
成することを特徴とする3次元キャラクタアニメーショ
ン表示装置。
7. The three-dimensional character animation display device according to claim 1, wherein said three-dimensional position calculating means converts a performance parameter extracted from performance data or a voice parameter obtained by analyzing voice. A three-dimensional character animation display device, wherein the three-dimensional motion data is generated by the following.
【請求項8】 3次元キャラクタの動きを生成して、画
像表示する3次元キャラクタアニメーション表示装置
に、データ通信手段を用いて送信側からデータを伝送す
る3次元動きデータ伝送システムにおいて、 上記3次元アニメーション表示装置は、3次元空間の任
意の座標点に相当する複数のグリッド点とこれを結ぶワ
イヤフレームよりなる3次元グリッド空間の形状を記述
した3次元グリッド空間形状データに基づいて、上記3
次元グリッド空間を3次元空間に配置し、3次元キャラ
クタである、1つ又は複数の任意の形状を有する3次元
部品から構成される3次元オブジェクトの形状を記述し
た3次元形状データ、及び、上記3次元部品の空間内に
位置する当該3次元部品を代表する点である1つ又は2
つの代表点と、上記複数のグリッド点から選択されたグ
リッド点との対応関係の時間軸変化を示した3次元動き
データに基づいて、上記3次元オブジェクトを、上記3
次元グリッド空間内に配置し、上記3次元動きデータに
基づいて、上記3次元キャラクタの動きを生成する3次
元位置計算手段と、上記3次元オブジェクトの面に所定
のテクスチャデータを貼り付けるテクスチャマッピング
手段と、上記3次元オブジェクトを、該3次元オブジェ
クトの3次元空間内での座標位置から2次元ディスプレ
イ面へ投影し、座標変換してイメージデータを作成する
透視変換手段と、上記イメージデータをフレームデータ
として記憶するフレームメモリ手段と、上記フレームデ
ータを表示する画像表示手段とを備え、 上記送信側は、上記データ通信手段を介して、上記3次
元グリッド空間形状データ、上記3次元形状データ、上
記テクスチャデータ、及び、上記3次元動きデータのい
ずれか1つ以上を送信するデータ送信サーバを設け、 上記3次元キャラクタアニメーション表示装置は、上記
データ送信サーバから送信しない残りのデータを保持す
ることを特徴とする3次元動きデータ伝送システム。
8. A three-dimensional motion data transmission system for transmitting data from a transmission side using a data communication means to a three-dimensional character animation display device for generating a motion of a three-dimensional character and displaying an image. The animation display apparatus performs the above-described 3D grid space shape data describing a shape of a 3D grid space including a plurality of grid points corresponding to arbitrary coordinate points in the 3D space and a wire frame connecting the grid points.
Three-dimensional shape data in which a three-dimensional object is arranged in a three-dimensional space, and is a three-dimensional character, and describes the shape of a three-dimensional object composed of one or more three-dimensional parts having an arbitrary shape One or two points that are located in the space of the three-dimensional component and represent the three-dimensional component
The three-dimensional object is converted to the three-dimensional object on the basis of three-dimensional motion data indicating a change in the time axis of the correspondence between the three representative points and the grid points selected from the plurality of grid points.
Three-dimensional position calculating means for arranging the three-dimensional character on the basis of the three-dimensional motion data, and a texture mapping means for pasting predetermined texture data on the surface of the three-dimensional object; A perspective transformation means for projecting the three-dimensional object from a coordinate position of the three-dimensional object in a three-dimensional space onto a two-dimensional display surface and performing coordinate transformation to create image data; Frame memory means for storing the frame data, and image display means for displaying the frame data. The transmitting side transmits the three-dimensional grid space shape data, the three-dimensional shape data, and the texture via the data communication means. Data and data for transmitting one or more of the three-dimensional motion data A transmission server, wherein the three-dimensional character animation display device holds remaining data not transmitted from the data transmission server.
【請求項9】 3次元キャラクタの動きを生成して、画
像表示する3次元キャラクタアニメーション表示装置で
あって、 3次元空間の任意の座標点に相当する複数のグリッド点
とこれを結ぶワイヤフレームよりなる3次元グリッド空
間の形状を記述した3次元グリッド空間形状データに基
づいて、該3次元グリッド空間を3次元空間へ配置し、
当該3次元グリッド空間内に、3次元キャラクタである
3次元オブジェクトを構成する部品のインデックスと、
当該3次元グリッド空間の複数のグリッド点のうち初期
値として選択されたグリッド点により上記部品の位置と
を記述した3次元オブジェクト構成部品データに基づい
て、該初期値として選択されたグリッド点間に該部品を
配置して、当該初期値として選択されたグリッド点を当
該部品の代表点と定義し、該代表点と上記複数のグリッ
ド点から選択されたグリッド点との対応関係の時間軸変
化を示した3次元動きデータに基づいて、上記3次元キ
ャラクタの動きを生成する3次元位置計算手段と、 上記3次元オブジェクトの面に所定のテクスチャデータ
を貼り付けるテクスチャマッピング手段と、 上記3次元オブジェクトを、該3次元オブジェクトの3
次元空間内での座標位置から2次元ディスプレイ面へ投
影し、座標変換してイメージデータを作成する透視変換
手段と、 上記イメージデータをフレームデータとして記憶するフ
レームメモリ手段と、 上記フレームデータを表示する画像表示手段とを備えた
ことを特徴とする3次元キャラクタアニメーション表示
装置。
9. A three-dimensional character animation display device for generating a motion of a three-dimensional character and displaying the generated image, comprising a plurality of grid points corresponding to arbitrary coordinate points in a three-dimensional space and a wire frame connecting the grid points. Based on the three-dimensional grid space shape data describing the shape of the three-dimensional grid space, the three-dimensional grid space is arranged in the three-dimensional space,
In the three-dimensional grid space, an index of a part constituting a three-dimensional object that is a three-dimensional character;
Based on the three-dimensional object component data describing the position of the part by the grid point selected as the initial value among the plurality of grid points in the three-dimensional grid space, the grid point is selected between the grid points selected as the initial value. By arranging the part, the grid point selected as the initial value is defined as a representative point of the part, and the time axis change of the correspondence between the representative point and the grid point selected from the plurality of grid points is determined. A three-dimensional position calculating means for generating the movement of the three-dimensional character based on the three-dimensional movement data shown; a texture mapping means for pasting predetermined texture data on a surface of the three-dimensional object; , 3 of the three-dimensional object
A perspective transformation means for projecting from a coordinate position in a dimensional space to a two-dimensional display surface and performing coordinate transformation to create image data; a frame memory means for storing the image data as frame data; and displaying the frame data. A three-dimensional character animation display device comprising an image display means.
【請求項10】 請求項9に記載の3次元キャラクタア
ニメーション表示装置において、 上記3次元位置計算手段は、上記3次元動きデータに基
づいて、上記代表点と対応する上記選択されたグリッド
点とを記述した対応テーブルを生成し、 上記対応テーブルの上記代表点と上記グリッド点との対
応関係を、上記3次元動きデータに基づいて、変更し
て、時間軸方向に記憶する記憶手段をさらに備えたこと
を特徴とする3次元キャラクタアニメーション表示装
置。
10. The three-dimensional character animation display device according to claim 9, wherein the three-dimensional position calculating means determines the representative point and the selected grid point based on the three-dimensional motion data. There is further provided storage means for generating the described correspondence table, changing the correspondence between the representative points and the grid points in the correspondence table based on the three-dimensional motion data, and storing the changed correspondence in the time axis direction. A three-dimensional character animation display device, characterized in that:
【請求項11】 請求項9に記載の3次元キャラクタア
ニメーション表示装置において、 上記画像表示手段は、上記フレームデータが表示される
フレーム表示周期の時間内に、上記部品を、該部品の代
表点に変更する部品の代表点を一致させて、形態の異な
る部品に変更することを特徴とする3次元キャラクタア
ニメーション表示装置。
11. The three-dimensional character animation display device according to claim 9, wherein the image display means sets the part to a representative point of the part within a frame display cycle in which the frame data is displayed. A three-dimensional character animation display device wherein a representative point of a part to be changed is matched to change to a part having a different form.
【請求項12】 3次元キャラクタの動きを生成して、
画像表示する3次元キャラクタアニメーション表示装置
に、データ通信手段を用いて送信側からデータを伝送す
る3次元動きデータ伝送システムにおいて、 上記3次元アニメーション表示装置は、3次元空間の任
意の座標点に相当する複数のグリッド点とこれを結ぶワ
イヤフレームよりなる3次元グリッド空間の形状を記述
した3次元グリッド空間形状データに基づいて、該3次
元グリッド空間を3次元空間へ配置し、当該3次元グリ
ッド空間内に、3次元キャラクタである3次元オブジェ
クトを構成する部品のインデックスと、当該3次元グリ
ッド空間の複数のグリッド点のうち初期値として選択さ
れたグリッド点により上記部品の位置とを記述した3次
元オブジェクト構成部品データに基づいて、該初期値と
して選択されたグリッド点間に該部品を配置して、当該
初期値として選択されたグリッド点を当該部品の代表点
と定義し、該代表点と上記複数のグリッド点から選択さ
れたグリッド点との対応関係の時間軸変化を示した3次
元動きデータに基づいて、上記3次元キャラクタの動き
を生成する3次元位置計算手段と、上記3次元オブジェ
クトの面に所定のテクスチャデータを貼り付けるテクス
チャマッピング手段と、上記3次元オブジェクトを、該
3次元オブジェクトの3次元空間内での座標位置から2
次元ディスプレイ面へ投影し、座標変換してイメージデ
ータを作成する透視変換手段と、上記イメージデータを
フレームデータとして記憶するフレームメモリ手段と、
上記フレームデータを表示する画像表示手段とを備え、 上記送信側は、上記データ通信手段を介して、上記3次
元グリッド空間形状データ、上記3次元形状データ、上
記テクスチャデータ、及び、上記3次元オブジェクト構
成部品データのいずれか1つ以上を送信するデータ送信
サーバを設け、 上記3次元キャラクタアニメーション表示装置は、上記
データ送信サーバから送信しない残りのデータを保持す
ることを特徴とする3次元動きデータ伝送システム。
12. Generating a three-dimensional character movement,
In a three-dimensional motion data transmission system for transmitting data from a transmission side using a data communication means to a three-dimensional character animation display device for displaying an image, the three-dimensional animation display device corresponds to an arbitrary coordinate point in a three-dimensional space. The three-dimensional grid space is arranged in a three-dimensional space based on three-dimensional grid space shape data describing the shape of a three-dimensional grid space consisting of a plurality of grid points to be connected and a wire frame connecting the grid points. In the three-dimensional character, an index of a part constituting a three-dimensional object, which is a three-dimensional character, and a position of the part described by a grid point selected as an initial value among a plurality of grid points in the three-dimensional grid space are described. Based on the object component data, between the grid points selected as the initial values The grid point selected as the initial value is defined as a representative point of the component, and the time axis change of the correspondence between the representative point and the grid point selected from the plurality of grid points is arranged. A three-dimensional position calculating means for generating a motion of the three-dimensional character based on the three-dimensional motion data indicating the three-dimensional object; a texture mapping means for pasting predetermined texture data on a surface of the three-dimensional object; From the coordinate position of the three-dimensional object in the three-dimensional space
Projecting onto a two-dimensional display surface, perspective transformation means for creating coordinate-converted image data, frame memory means for storing the image data as frame data,
Image transmitting means for displaying the frame data, wherein the transmitting side receives the three-dimensional grid spatial shape data, the three-dimensional shape data, the texture data, and the three-dimensional object via the data communication means. A data transmission server for transmitting any one or more of the component data, wherein the three-dimensional character animation display device retains remaining data not transmitted from the data transmission server; system.
JP13382997A 1997-05-23 1997-05-23 Three-dimensional character animation display device, and three-dimensional motion data transmission system Pending JPH10326353A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP13382997A JPH10326353A (en) 1997-05-23 1997-05-23 Three-dimensional character animation display device, and three-dimensional motion data transmission system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP13382997A JPH10326353A (en) 1997-05-23 1997-05-23 Three-dimensional character animation display device, and three-dimensional motion data transmission system

Publications (1)

Publication Number Publication Date
JPH10326353A true JPH10326353A (en) 1998-12-08

Family

ID=15114024

Family Applications (1)

Application Number Title Priority Date Filing Date
JP13382997A Pending JPH10326353A (en) 1997-05-23 1997-05-23 Three-dimensional character animation display device, and three-dimensional motion data transmission system

Country Status (1)

Country Link
JP (1) JPH10326353A (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11194764A (en) * 1997-12-27 1999-07-21 Yamaha Corp Device and method for generating musical sound and image, and storage medium
KR20000037456A (en) * 2000-04-25 2000-07-05 박기현 A system and method for character animation through computer network
CN104599305A (en) * 2014-12-22 2015-05-06 浙江大学 Two-dimension and three-dimension combined animation generation method
CN107230244A (en) * 2017-06-08 2017-10-03 深圳第七大道科技有限公司 The generation method and rendering system of a kind of animation file
CN111617482A (en) * 2020-06-04 2020-09-04 珠海金山网络游戏科技有限公司 Model map editing method and device
CN117710468A (en) * 2024-02-06 2024-03-15 天度(厦门)科技股份有限公司 Gesture redirection method, device, equipment and medium based on joint grid deformation

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11194764A (en) * 1997-12-27 1999-07-21 Yamaha Corp Device and method for generating musical sound and image, and storage medium
KR20000037456A (en) * 2000-04-25 2000-07-05 박기현 A system and method for character animation through computer network
CN104599305A (en) * 2014-12-22 2015-05-06 浙江大学 Two-dimension and three-dimension combined animation generation method
CN104599305B (en) * 2014-12-22 2017-07-14 浙江大学 A kind of two three-dimensional animation producing methods combined
CN107230244A (en) * 2017-06-08 2017-10-03 深圳第七大道科技有限公司 The generation method and rendering system of a kind of animation file
CN111617482A (en) * 2020-06-04 2020-09-04 珠海金山网络游戏科技有限公司 Model map editing method and device
CN111617482B (en) * 2020-06-04 2024-02-06 珠海金山数字网络科技有限公司 Model mapping editing method and device
CN117710468A (en) * 2024-02-06 2024-03-15 天度(厦门)科技股份有限公司 Gesture redirection method, device, equipment and medium based on joint grid deformation

Similar Documents

Publication Publication Date Title
JP2002298155A (en) Emotion-oriented three-dimensional computer graphics expression model forming system
JP6181917B2 (en) Drawing system, drawing server, control method thereof, program, and recording medium
US20020024519A1 (en) System and method for producing three-dimensional moving picture authoring tool supporting synthesis of motion, facial expression, lip synchronizing and lip synchronized voice of three-dimensional character
KR20050033550A (en) Image processing method and system
JP6684556B2 (en) Data converter, robot, program, and information processing method
JP3337938B2 (en) Motion transmitting / receiving device having three-dimensional skeleton structure and motion transmitting / receiving method
WO2007077696A1 (en) Voice processor, voice processing method, program, and information recording medium
JP4047575B2 (en) Display object generation method in information processing apparatus, program for controlling execution thereof, and recording medium storing the program
JPH10326353A (en) Three-dimensional character animation display device, and three-dimensional motion data transmission system
JP2005071182A (en) Three-dimensional animation creation support apparatus
JP3212255B2 (en) Image synthesizing apparatus and image synthesizing method
JP2001275199A (en) Three-dimensional sound reproduction system
Leonard et al. A virtual reality platform for musical creation: GENESIS-RT
CN111862273A (en) Animation processing method and device, electronic equipment and storage medium
JPH03216767A (en) Picture forming device
Lee et al. Responsive multimedia system for virtual storytelling
JP2003132366A (en) Three dimensional model deforming program, three dimensional model deforming method and video game device
JPH10307930A (en) Animation production system
JP5030668B2 (en) Karaoke system with background video production function
JPS63184875A (en) Sound-picture converter
JP2008071360A (en) Display object generation method in information processor, program for executing the same, and recording medium for storing program
Leite et al. Common spaces: Multi-modal-media ecosystem for live performances
JP3636681B2 (en) Image processing method, image processing apparatus, semiconductor device, computer program, and recording medium
JP2002140697A (en) Communication image generation device, communication device, method for generating communication image, method for processing communication information, and program
JPH11144086A (en) Image generating device and information storage medium