JP2943201B2 - Image creation apparatus and method - Google Patents

Image creation apparatus and method

Info

Publication number
JP2943201B2
JP2943201B2 JP2010861A JP1086190A JP2943201B2 JP 2943201 B2 JP2943201 B2 JP 2943201B2 JP 2010861 A JP2010861 A JP 2010861A JP 1086190 A JP1086190 A JP 1086190A JP 2943201 B2 JP2943201 B2 JP 2943201B2
Authority
JP
Japan
Prior art keywords
image
parameters
parameter
input
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2010861A
Other languages
Japanese (ja)
Other versions
JPH03216767A (en
Inventor
章男 大場
慎一 福島
浩司 金田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2010861A priority Critical patent/JP2943201B2/en
Priority to US07/609,612 priority patent/US5214758A/en
Priority to EP90121824A priority patent/EP0428164B1/en
Priority to DE69030298T priority patent/DE69030298T2/en
Priority to KR1019900018393A priority patent/KR0154976B1/en
Publication of JPH03216767A publication Critical patent/JPH03216767A/en
Application granted granted Critical
Publication of JP2943201B2 publication Critical patent/JP2943201B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/66Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6607Methods for processing data by generating or executing the game program for rendering three dimensional images for animating game characters, e.g. skeleton kinematics

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Auxiliary Devices For Music (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Processing Or Creating Images (AREA)

Description

【発明の詳細な説明】 以下の順序で本発明を説明する。DETAILED DESCRIPTION OF THE INVENTION The present invention will be described in the following order.

A産業上の利用分野 B発明の概要 C従来の技術 D発明が解決しようとする問題点 E問題点を解決するための手段(第1図) F作用(第1図) G実施例 (G1)第1の実施例(第1図〜第3図) (G2)他の実施例 H発明の効果 A産業上の利用分野 本発明は画像作成装置に関し、例えばコンピユータグ
ラフイツクによるアニメーシヨン作成装置に適用し得
る。
A Field of Industrial Use B Outline of the Invention C Prior Art D Problems to be Solved by the Invention E Means for Solving the Problems (FIG. 1) F Function (FIG. 1) G Embodiment (G1) First Embodiment (FIGS. 1 to 3) (G2) Other Embodiments H Effects of the Invention A Industrial Field of the Invention The present invention relates to an image creation apparatus, for example, applied to an animation creation apparatus based on computer graphics. I can do it.

B発明の概要 第1の発明は、画像作成装置において、外部入力のパ
ラメータ及び主メモリに格納されたパラメータに基づい
て合成パラメータを生成し、当該合成パラメータに基づ
いて入力画像を変形処理することにより、リアルタイム
で動画を作成することができる。
B. Summary of the Invention The first invention is an image creating apparatus that generates a synthesis parameter based on an external input parameter and a parameter stored in a main memory, and deforms an input image based on the synthesis parameter. , You can create videos in real time.

さらに第2の発明は、画像作成装置において、MIDI信
号に応じてパラメータを生成して入力画像を変形処理す
ると共に合成音を出力することにより、MIDI信号を出力
する演奏手段等を当該画像作成装置に接続して動画をリ
アルタイムで生成することができる。
According to a second aspect of the present invention, in the image forming apparatus, a playing means for outputting a MIDI signal by generating a parameter in accordance with the MIDI signal to transform the input image and output a synthesized sound is provided. Can be connected to to generate videos in real time.

C従来の技術 従来、コンピユータグラフイツクによるアニメーシヨ
ン作成装置においては、キヤラクタの各部の基本的な形
状を表す形状データを用いて動画を作成するようになさ
れたものが提案されている(特開昭62−26584号公
報)。
C. Prior Art Conventionally, an animation creating apparatus based on computer graphics has been proposed in which a moving image is created using shape data representing a basic shape of each part of a character (Japanese Patent Application Laid-Open No. Sho. 62-26584).

このアニメーシヨン装置においては、予め入力した各
部の形状データを所定のパラメータに基づいて変形処理
した後、変形処理した画像を合成することにより、1つ
の画像を形成するようになされている。
In this animation apparatus, one image is formed by deforming shape data of each part input in advance based on predetermined parameters, and then combining the deformed images.

このため合成した画像が所望の変化を呈するように当
該パラメータを設定することにより、簡易に動画を作成
し得る。
Therefore, by setting the parameters so that the synthesized image exhibits a desired change, a moving image can be easily created.

D発明が解決しようとする問題点 ところでこの種のアニメーシヨン装置においては、所
望の変化を呈するような動画をリアルタイムで作成する
ことが困難な問題がある。
D Problem to be Solved by the Invention Incidentally, in this type of animation device, there is a problem that it is difficult to create a moving image showing a desired change in real time.

すなわち、所望する動きの動画を作成するためには、
一旦パラメータを設定して動きを確認した後、修正作業
を繰り返す必要がある。
That is, in order to create a moving image of a desired motion,
After setting the parameters and confirming the movement, it is necessary to repeat the correction work.

このため例えばキーボードの演奏に追従して変化する
動画を表示する場合、予定された演奏においては、予め
時間をかけてパラメータを設定することにより、あたか
もリアルタイムで変化するような動画を表示することが
できるのに対し、予定にない即興的な部分においては演
奏に追従した動画を表示し得ず、結局適用し得ない問題
があつた。
For this reason, for example, when displaying a moving image that changes following the performance of a keyboard, in a scheduled performance, it is possible to display a moving image that changes as if it changes in real time by setting parameters over time in advance. On the other hand, there was a problem that the improvised part which was not planned could not display the moving image following the performance and could not be applied after all.

本発明は以上の点を考慮してなされたもので、所望の
変化を呈する動画をリアルタイムで作成することができ
る画像作成装置を提案しようとするものである。
The present invention has been made in view of the above points, and has as its object to propose an image creating apparatus capable of creating a moving image exhibiting a desired change in real time.

E問題点を解決するための手段 かかる問題点を解決するため本発明においては、入力
画像を格納する入力画像メモリ2と、入力画像の部分的
変形を指定する複数の独立パラメータQ、R、Sを、順
次時系列で格納する主メモリA、B、Cと、複数の独立
パラメータRQ、RR、RSをリアルタイムで入力するパラメ
ータ入力手段20、26と、主メモリA、B、Cに格納され
たパラメータQ、R、S及びパラメータ入力手段20、26
を介して入力されるパラメータRQ、RR、RSを所定の比で
加算して合成パラメータを生成する加算手段12A、12B、
12C、14A、14B、14C、28A、28B、28Cと、入力画像メモ
リ2に格納された入力画像を合成パラメータに応じて変
形させ、変形画像を生成する画像処理手段10と、変形画
像を表示画像として出力する出力手段6、16とを設ける
ようにした。
Means for Solving E Problem In order to solve such a problem, in the present invention, an input image memory 2 for storing an input image and a plurality of independent parameters Q, R, and S for designating a partial deformation of the input image are provided. Are stored in the main memories A, B, and C, a plurality of independent parameters RQ, RR, and RS are input in real time. Parameter Q, R, S and parameter input means 20, 26
Adding means 12A, 12B, which add the parameters RQ, RR, and RS inputted through a predetermined ratio to generate a combined parameter.
12C, 14A, 14B, 14C, 28A, 28B, 28C, an image processing means 10 for deforming the input image stored in the input image memory 2 in accordance with the synthesis parameters to generate a deformed image, And output means 6 and 16 for outputting the result.

F作用 主メモリA、B、Cに格納されたパラメータQ、R、
Sと、パラメータ入力手段20、26を介して入力されるパ
ラメータRQ、RR、RSとから合成パラメータを生成し、当
該合成パラメータに基づいて入力画像を変形することに
より、パラメータ入力手段20、26を介して入力されるパ
ラメータRQ、RR、RSに応じてリアルタイムで変化する動
画像を生成し得る。
F action Parameters Q, R, stored in main memories A, B, C,
S and the parameters RQ, RR, and RS input via the parameter input means 20 and 26 to generate a composite parameter, and deform the input image based on the composite parameter to convert the parameter input means 20 and 26 It is possible to generate a moving image that changes in real time according to parameters RQ, RR, and RS that are input via the device.

G実施例 以下図面について、本発明の一実施例を詳述する。G Example Hereinafter, an example of the present invention will be described in detail with reference to the drawings.

(G1)第1の実施例 第1図において、1は全体としてアニメーシヨン装置
を示し、リアルタイムで動画を作成する。
(G1) First Embodiment In FIG. 1, reference numeral 1 denotes an animation device as a whole, which creates a moving image in real time.

このためアニメーシヨン装置1においては、撮像手段
を介して得られたキヤラクタの基本的な形状データを入
力画像メモリ2に格納する。
For this reason, in the animation apparatus 1, the basic shape data of the character obtained via the imaging means is stored in the input image memory 2.

すなわち第2図及び第3図に示すように、入力画像メ
モリ2は、キヤラクタの足の動きに関する3つの基本的
な形状(第2図(A)、(B)及び(C))と、キヤラ
クタの腕の動きに関する3つの基本的な形状(第3図
(A)、(B)及び(C))を格納する。
That is, as shown in FIGS. 2 and 3, the input image memory 2 includes three basic shapes (FIGS. 2A, 2B, and 2C) relating to the movement of the character's foot and the character image. 3 (A), (B) and (C) of FIG. 3 are stored.

これに対応してパラメータメモリ4は、足の動きに関
するパラメータQ、腕の動きに関するパラメータR及び
キヤラクタの表示位置に関するパラメータSを、それぞ
れメモリA、B及びCに格納する。
Correspondingly, the parameter memory 4 stores a parameter Q relating to the movement of the foot, a parameter R relating to the movement of the arm, and a parameter S relating to the display position of the character in memories A, B and C, respectively.

このパラメータQ、R及びSは、順次時間軸(時、
分、秒、フレーム番号を基準にして表す)に割り当てら
れてそれぞれメモリA、B及びCに格納され、これによ
り当該パラメータQ、R及びSに応じて入力画像メモリ
2に格納された形状を変形させ合成し、所望の動きのキ
ヤラクタを表示し得るようになされている。
These parameters Q, R and S are sequentially set on a time axis (hour,
(Expressed in terms of minutes, seconds, and frame numbers) and stored in the memories A, B, and C, respectively, thereby deforming the shape stored in the input image memory 2 according to the parameters Q, R, and S. Then, the characters can be displayed in a desired motion.

このためパラメータQを格納するメモリAにおいて
は、始めにオペレータが所望の時刻T3、T8及びTcを指定
し、モニタ6に表示されるキヤラクタの足の形状が、当
該時刻T3、T8及びTcで入力画像メモリ2に格納された足
の形状(第2図(A)、(B)及び(C))になるよう
に指定することにより、当該時刻T3、T8及びTcに値A3、
A8及びAcのパラメータQが格納される。
Therefore, in the memory A for storing the parameter Q, the operator first specifies desired times T3, T8, and Tc, and the shape of the character's foot displayed on the monitor 6 is input at the times T3, T8, and Tc. By designating the shape of the foot (FIGS. 2A, 2B, and 2C) stored in the image memory 2, the values A3,
The parameters Q of A8 and Ac are stored.

さらに時刻T3、T8及びTcのパラメータQの値A3、A8及
びAcから、補間演算の手法を用いて値a1、a2、a4〜a7、
a9〜ab、ad、ae、……のパラメータQが生成され、時刻
T3、T8及びTcの前後の時刻に割り当てられる。
Further, from the values A3, A8 and Ac of the parameters Q at times T3, T8 and Tc, values a1, a2, a4 to a7,
a9-ab, ad, ae,... parameters Q are generated, and time
It is assigned to a time before and after T3, T8 and Tc.

同様にパラメータRを格納するメモリBにおいては、
オペレータが所望の時刻T1、T8及びTeを指定し、モニタ
6に表示されるキヤラクタの腕の形状が、当該時刻T1、
T8及びTeで入力画像メモリ2に格納された腕の形状(第
3図(A)、(B)及び(C))になるように指定する
ことにより、当該時刻T1、T8及びTeに値B1、B8及びBeの
パラメータRが格納される。
Similarly, in the memory B storing the parameter R,
The operator designates desired times T1, T8, and Te, and the shape of the character's arm displayed on the monitor 6 changes to the time T1, T8.
By designating the shape of the arm (FIGS. 3A, 3B and 3C) stored in the input image memory 2 with T8 and Te, the value B1 is set at the times T1, T8 and Te. , B8, and Be are stored.

さらに時刻T1、T8及びTeのパラメータRの値B1、B8及
びBeから、補間演算の手法を用いて値b2〜b7、b9〜bd、
……のパラメータRが生成され、時刻T1、T8及びTeの前
後の時刻に割り当てられる。
Further, from the values B1, B8 and Be of the parameters R at the times T1, T8 and Te, the values b2 to b7, b9 to bd,
Are generated and assigned to times T1, T8 and times before and after Te.

これに対してパラメータSを格納するメモリCにおい
ては、オペレータが所望の時刻T4、T7及びTcを指定し、
時刻T4、T7及びTcでモニタ6に表示されるキヤラクタの
表示位置を指定することにより、当該時刻T4、T7及びTc
に値C4、C7及びCcのパラメータSが格納される。
On the other hand, in the memory C for storing the parameter S, the operator specifies desired times T4, T7 and Tc,
By specifying the display position of the character displayed on the monitor 6 at times T4, T7 and Tc, the time T4, T7 and Tc
Is stored with the parameter S of the values C4, C7 and Cc.

さらに時刻T4、T7及びTcのパラメータSの値C4、C7及
びCcから、補間演算の手法を用いて値c1〜c3、c5、c6、
c8〜cb、cd、ce、……のパラメータSが生成され、時刻
T4、T7及びTcの前後の時刻に割り当てられる。
Further, from the values C4, C7 and Cc of the parameters S at the times T4, T7 and Tc, values c1 to c3, c5, c6,
The parameters S of c8 to cb, cd, ce,.
It is assigned to the time before and after T4, T7 and Tc.

画像変換処理装置10は、それぞれ重み付け回路12A、1
2B及び12Cと加算回路14A、14B及び14Cを介して、パラメ
ータQ、R及びSを入力し、このときパラメータQ、R
及びSを時間軸に割り当てられた順序で入力する。
The image conversion processing device 10 includes weighting circuits 12A and 1A, respectively.
The parameters Q, R and S are input via 2B and 12C and the adders 14A, 14B and 14C, and the parameters Q, R
And S in the order assigned to the time axis.

さらに画像変換処理装置10は、入力画像メモリ2に格
納された形状データを入力し、当該形状データで表され
るキヤラクタの各部の形状をパラメータQ、R及びSの
値に応じて変形処理する。
Further, the image conversion processing device 10 inputs the shape data stored in the input image memory 2 and performs a deformation process on the shape of each part of the character represented by the shape data according to the values of the parameters Q, R and S.

すなわち画像変換処理装置10は、キヤラクタの足にお
いては、キヤラクタが歩くように変形処理し、時刻T1、
T2で徐々に変形して時刻T3で入力画像メモリ2に格納さ
れた形状(第2図(A))に一致するように画像を変形
させる。
That is, the image conversion processing device 10 performs deformation processing on the feet of the character so that the character walks, and at time T1,
At time T3, the image is gradually deformed, and at time T3, the image is deformed to match the shape (FIG. 2A) stored in the input image memory 2.

さらに、時刻T3〜T7にかけて徐々に変形させ、時刻T8
で入力画像メモリ2に格納された形状(第2図(B))
に一致するように画像を変形させる。
Further, it is gradually deformed from time T3 to time T7, and time T8
And the shape stored in the input image memory 2 (FIG. 2 (B))
The image is deformed to match.

これに対してキヤラクタの腕においては、腕が振られ
るように変形処理し、時刻T1で入力画像メモリ2に格納
された形状(第3図(A))と一致した後、時刻T2〜T8
にかけて徐々に変化し、時刻T8で入力画像メモリ2に格
納された形状(第3図(B))と一致するように変形さ
せる。
On the other hand, in the character's arm, a deformation process is performed so that the arm is swung, and after the shape matches the shape (FIG. 3A) stored in the input image memory 2 at time T1, the time T2 to T8
, And is deformed to match the shape (FIG. 3 (B)) stored in the input image memory 2 at time T8.

さらに画像変換処理装置10は、各時刻T1、T2……で変
形処理された足及び腕の形状を合成してキヤラクタの全
体形状を形成した後、形成したキヤラクタの全体形状を
パラメータSで決まる位置に配置する。
Further, the image conversion processing device 10 forms the entire shape of the character by synthesizing the shape of the foot and the arm deformed at each time T1, T2,..., And then determines the entire shape of the formed character by the parameter S. To place.

出力画像メモリ16は、画像変換処理装置10で生成され
た画像を一旦格納した後、ビデオ信号に変換してモニタ
6に出力する。
The output image memory 16 temporarily stores the image generated by the image conversion processing device 10, converts the image into a video signal, and outputs the video signal to the monitor 6.

これによりモニタ6を介して、オペレータが予め設定
した変化を呈する動画を表示することができる。
As a result, it is possible to display, via the monitor 6, a moving image exhibiting a change preset by the operator.

キーボード20は、MIDI(musical instrument degital
interface)規格の信号(以下MIDI信号と呼ぶ)SMを音
源22に出力し、これにより当該キーボード20の押鍵操作
に応動してスピーカ24から合成音を出力するようになさ
れている。
The keyboard 20 is a MIDI (musical instrument degital)
interface) standard signal (hereinafter referred to as MIDI signal) and outputs the S M to the sound generator 22, thereby being adapted to in response to key depression operation of the keyboard 20 and outputs the synthesized sound from the speaker 24.

フイルタ26は、演算処理回路で構成され、MIDI信号SM
に基づいて、スピーカ24から出力される合成音の音階、
強弱、長さを検出し、当該検出結果に基づいて、3つの
パラメータRQ、RR及びRSを生成する。
The filter 26 is composed of an arithmetic processing circuit, and receives the MIDI signal S M
Based on the scale of the synthesized sound output from the speaker 24,
The strength and length are detected, and three parameters RQ, RR and RS are generated based on the detection result.

このときフイルタ26は、メモリA、B及びCに格納さ
れたパラメータQ、R及びSの時間軸と一致する周期で
パラメータRQ、RR及びRSを生成し、重み付け回路28A、2
8B及び28Cに出力する。
At this time, the filter 26 generates the parameters RQ, RR, and RS at a period that matches the time axis of the parameters Q, R, and S stored in the memories A, B, and C, and the weighting circuits 28A, 2
Output to 8B and 28C.

さらにこのときフイルタ26は、それぞれパラメータ
Q、R及びSに対応する範囲で値が変化するように、パ
ラメータRQ、RR及びRSを生成する。
Further, at this time, the filter 26 generates the parameters RQ, RR, and RS such that the values change in the ranges corresponding to the parameters Q, R, and S, respectively.

これにより重み付け回路28A、28B及び28Cにおいて
は、キーボード20の演奏が開始されると、それぞれ値A1
X、A2X、……、B1X、B2X、……及びC1X、C2X、……のパ
ラメータRQ、RR及びRSを、パラメータQ、R及びSに対
応して入力し得るようになされている。
As a result, in the weighting circuits 28A, 28B and 28C, when the performance of the keyboard 20 is started, the value A1
, B1X, B2X,... And C1X, C2X,... Parameters RQ, RR, and RS can be input corresponding to the parameters Q, R, and S.

これに対して係数制御部30は、キーボード20の演奏者
の操作に応動してキーボード20から出力される制御信号
SCONを受け、当該制御信号SCONに応じて重み付け回路12
A、12B、12C及び28A、28B、28Cにそれぞれ値K1、K3、K5
及びK2、K4及、K6の重み付け係数を出力する。
On the other hand, the coefficient control unit 30 controls the control signal output from the keyboard 20 in response to the player's operation of the keyboard 20.
Receiving S CON and weighting circuit 12 according to the control signal S CON
A, 12B, 12C and 28A, 28B, 28C have values K1, K3, K5 respectively
And K2, K4, and K6 weighting coefficients are output.

重み付け回路12A、12B、12C及び28A、28B、28Cは、当
該重み付け係数に応じてパラメータQ、R、S及びRQ、
RR及びRSを重み付け処理する。
The weighting circuits 12A, 12B, 12C and 28A, 28B, 28C are adapted to generate parameters Q, R, S and RQ according to the weighting factors.
RR and RS are weighted.

加算回路14A、14B、14Cは、それぞれ重み付け回路12A
及び28A、12B及び28B、12C及び28Cの重み付け処理結果
を加算して画像変換処理装置10に出力する。
The adder circuits 14A, 14B, and 14C each include a weighting circuit 12A.
And the results of the weighting processes of 28A, 12B and 28B, 12C and 28C are added and output to the image conversion processing device 10.

これにより画像変換処理装置10においては、キーボー
ド20を演奏する場合、パラメータQ、R及びSに代え
て、当該パラメータQ、R及びSとパラメータRQ、RR及
びRSを合成してなる合成パラメータが入力され、当該合
成パラメータに基づいて入力画像メモリ2に格納された
キヤラクタの形状を変形処理する。
Thus, in the image conversion processing apparatus 10, when playing the keyboard 20, a synthesized parameter obtained by synthesizing the parameters Q, R and S and the parameters RQ, RR and RS instead of the parameters Q, R and S is input. Then, the shape of the character stored in the input image memory 2 is deformed based on the synthesis parameters.

従つて画像変換処理装置10においては、係数制御部30
から出力される重み付け係数に応じて、キーボード20の
演奏に追従して値が変化する合成パラメータを得ること
ができ、当該合成パラメータに基づいて、キヤラクタの
形状を変形処理して動画を形成することにより、キーボ
ード20の演奏に追従して変化する動画を得ることができ
る。
Therefore, in the image conversion processing device 10, the coefficient control unit 30
It is possible to obtain a composite parameter whose value changes in accordance with the performance of the keyboard 20 according to the weighting coefficient output from the keyboard 20, and to form a moving image by deforming the shape of the character based on the composite parameter. Thus, a moving image that changes following the performance of the keyboard 20 can be obtained.

さらにこのとき重み付け係数を切り換えることによ
り、予めメモリA、B、Cに設定した動きを主体にして
キーボード20の演奏に追従する動画を形成したり、これ
とは逆にキーボード20の演奏に追従する動きを主体にし
て予めメモリA、B、Cに設定した動きを呈する動画を
形成し得、当該動画の表現形式を拡大することができ
る。
Further, at this time, by switching the weighting coefficients, a moving image that follows the performance of the keyboard 20 is formed mainly by the movements set in the memories A, B, and C in advance, and the moving image follows the performance of the keyboard 20 on the contrary. It is possible to form a moving image exhibiting the movement set in the memories A, B, and C in advance mainly by the movement, and expand the expression form of the moving image.

さらにこのとき当該アニメーシヨン装置1において
は、MIDI信号SMに基づいてパラメータRQ、RR及びRSを生
成することから、キーボード20に代えてMIDI信号SMを出
力し得るようになされたリズムマシーン等、さらには演
算処理装置を接続して合成音を出力すると共に動画を形
成することができる。
Further in the animation device 1 at this time, parameters RQ based on the MIDI signal S M, from generating a RR and RS, rhythm machine or the like has been made so as to output the MIDI signal S M in place of the keyboard 20 In addition, an arithmetic processing unit can be connected to output synthesized sounds and form moving images.

従つて、その分当該アニメーシヨン装置1の使い勝手
を向上することができる。
Therefore, the usability of the animation device 1 can be improved accordingly.

さらにこの実施例においては、バツフアメモリ32A、3
2B、32Cにそれぞれ加算回路14A、14B、14Cから出力され
る合成パラメータを格納し、メモリA、B、Cに格納さ
れたパラメータQ、R、Sを必要に応じて当該バツフア
メモリ32A、32B、32Cに格納した合成パラメータに置き
換える得るようになされている。
Further, in this embodiment, the buffer memories 32A, 32A
The composite parameters output from the adders 14A, 14B and 14C are stored in 2B and 32C, respectively, and the parameters Q, R and S stored in the memories A, B and C are stored in the buffer memories 32A, 32B and 32C as necessary. Can be replaced with the synthesis parameter stored in the.

これにより、モニタ6を介して動画の動きを確認し、
オペレータが必要と思われるとき、その動画生成に用い
た合成パラメータを格納することができる。
Thereby, the motion of the moving image is confirmed via the monitor 6,
When the operator deems necessary, the synthesis parameters used for generating the moving image can be stored.

従つてメモリA、B、Cの内容を更新することによ
り、即興的に作成された動画を再現することができる。
Therefore, by updating the contents of the memories A, B, and C, it is possible to reproduce an improvised moving image.

また、必要に応じて動画の修正作業に適用して、当該
修正作業を簡略化することができる。
Further, the correction work can be simplified by applying the correction work to a moving image as needed.

かくしてこの実施例において、入力画像メモリ2は、
入力画像を格納する入力画像メモリを構成するのに対
し、メモリA、B、Cは、入力画像の変形を指定するパ
ラメータQ、R、Sを、順次時系列で格納する主メモリ
を構成する。
Thus, in this embodiment, the input image memory 2
While an input image memory for storing an input image is configured, the memories A, B, and C configure a main memory for sequentially storing parameters Q, R, and S for designating deformation of the input image in time series.

さらにキーボード20は、MIDI信号SMを出力するMIDI信
号発生手段を構成し、フイルタ26は、MIDI信号SMに応じ
て、入力画像の変形を指定するパラメータRQ、RR、RSを
生成するパラメータ生成手段を構成し、これによりキー
ボード20及びフイルタ26でパラメータRQ、RR、RSをリア
ルタイムで入力するパラメータ入力手段を構成する。
Moreover keyboard 20 constitute the MIDI signal generating means for outputting a MIDI signal S M, the filter 26, in response to the MIDI signal S M, the parameters RQ, RR for specifying the deformation of the input image, the parameter generation for generating RS This constitutes a means for inputting parameters RQ, RR and RS in real time with the keyboard 20 and the filter 26.

これに対して重み付け回路12A、12B、12C、28A、28
B、28C及び加算回路14A、14B、14Cは、主メモリA、
B、Cに格納されたパラメータQ、R、S及びパラメー
タ入力手段を介して入力されるパラメータRQ、RR、RSを
所定の比で加算し、合成パラメータを出力する加算手段
を構成し、画像変換処理回路10は入力画像メモリ2に格
納された入力画像を合成パラメータに応じて変形させ、
変形画像を生成する画像処理手段を構成する。
On the other hand, weighting circuits 12A, 12B, 12C, 28A, 28
B, 28C and the adder circuits 14A, 14B, 14C
Addition means for adding the parameters Q, R, S stored in B and C and the parameters RQ, RR, and RS input through the parameter input means at a predetermined ratio and outputting a composite parameter, and performing image conversion. The processing circuit 10 deforms the input image stored in the input image memory 2 according to the synthesis parameters,
An image processing means for generating a deformed image is configured.

さらに出力画像メモリ16は、変形画像を格納する出力
画像メモリを、モニタ6は出力画像メモリ16に格納され
た変形画像を表示する表示手段6を形成し、パラメータ
メモリ4はバツフアメモリ32A、32B、32Cに格納された
合成パラメータを、主メモリA、B、Cに転送し、主メ
モリA、B、Cに該合成パラメータをパラメータQ、
R、Sとして格納する合成パラメータ転送手段を構成す
る。
Further, the output image memory 16 forms an output image memory for storing the deformed image, the monitor 6 forms display means 6 for displaying the deformed image stored in the output image memory 16, and the parameter memory 4 stores the buffer memories 32A, 32B, 32C. Are transferred to the main memories A, B, and C, and the synthesized parameters are stored in the main memories A, B, and C as parameters Q,
A composition parameter transfer means for storing as R and S is constituted.

以上の構成において、始めに撮像手段を介して得られ
たキヤラクタの基本的な形状データが入力画像メモリ2
に格納される。
In the above configuration, the basic shape data of the character first obtained through the imaging means is stored in the input image memory 2.
Is stored in

さらにオペレータが時刻を指定してキヤラクタの各部
の形状を指定することにより、キヤラクタの足、腕の形
状、キヤラクタの表示位置を表すパラメータQ、R及び
Sが、時間軸に割り当てられてそれぞれメモリA、B及
びCに格納される。
Further, when the operator designates the time and designates the shape of each part of the character, parameters Q, R and S representing the shape of the character's feet and arms and the display position of the character are assigned to the time axis and are respectively stored in the memory A. , B and C.

この予備的処理の後、演奏者がキーボード20を演奏す
ると、当該キーボード20から出力されるMIDI信号SMに基
づいて、パラメータQ、R及びSに対応するパラメータ
RQ、RR及びRSが順次フイルタ26で生成され、演奏者の操
作に応動して重み付け回路28A、28B、28Cで重み付け処
理される。
After this preliminary treatment, the player is playing the keyboard 20, based on the MIDI signal S M output from the keyboard 20, corresponding to the parameter Q, R and S parameters
RQ, RR and RS are sequentially generated by the filter 26, and are weighted by weighting circuits 28A, 28B and 28C in response to the player's operation.

同時にメモリA、B及びCに格納されたパラメータ
Q、R及びSが、重み付け回路12A、12B、12Cで重み付
け処理され、それぞれ重み付け回路12A及び28A、12B及
び28B、12C及び28Cの重み付け処理結果が加算回路14A、
14B、14Cで加算される。
At the same time, the parameters Q, R and S stored in the memories A, B and C are weighted by the weighting circuits 12A, 12B and 12C, and the weighting results of the weighting circuits 12A and 28A, 12B and 28B, 12C and 28C are obtained, respectively. Adder circuit 14A,
It is added at 14B and 14C.

これにより加算回路14A、14B、14Cを介して、キーボ
ード20の演奏に追従して値が変化する合成パラメータを
得ることができ、当該合成パラメータに基づいて入力画
像メモリ2に格納されたキヤラクタの各部の基本的な形
状が画像変換処理装置10で変形処理される。
As a result, it is possible to obtain, via the adding circuits 14A, 14B, and 14C, synthetic parameters whose values change following the performance of the keyboard 20, and, based on the synthetic parameters, each part of the character stored in the input image memory 2. Is transformed by the image conversion processing device 10.

変形処理されたキヤラクタの各部の形状は、当該画像
変換処理装置10で合成されてキヤラクタの全体形状が生
成された後、パラメータSで決まる表示位置に配置さ
れ、これによりキーボード20の操作に追従して変化する
動画をリアルタイムで得ることができる。
After the shape of each part of the deformed character is synthesized by the image conversion processing device 10 to generate the entire shape of the character, the shape is arranged at a display position determined by the parameter S, thereby following the operation of the keyboard 20. Moving images can be obtained in real time.

画像変換処理装置10で生成された画像は、出力画像メ
モリ16を介してモニタ6に表示され、このときスピーカ
24を介して音源22で生成された合成音が出力され、かく
してキーボード20の演奏にリアルタイムで追従変化する
動画を表示することができる。
The image generated by the image conversion processing device 10 is displayed on the monitor 6 via the output image memory 16, and at this time, the speaker
The synthesized sound generated by the sound source 22 is output via 24, and thus a moving image that changes in real time following the performance of the keyboard 20 can be displayed.

このとき合成パラメータにおいては、バツフアメモリ
32A、32B、32Cにそれぞれ一旦格納された後、必要に応
じてメモリA、B、Cに格納されたパラメータQ、R、
Sと置き換えられるようになされ、これにより動画を再
現したり、動画修正作業を簡略化することができる。
At this time, in the synthesis parameters, the buffer memory
After temporarily stored in 32A, 32B, and 32C, respectively, the parameters Q, R, and
S can be replaced with S, thereby making it possible to reproduce a moving image and simplify the moving image correction work.

以上の構成によれば、メモリA、B、Cに設定された
パラメータQ、R、Sと、キーボード20の操作に応動し
て生成されたパラメータRQ、RR、RSに基づいて合成パラ
メータを生成し、当該合成パラメータに基づいて入力画
像を変形処理することにより、キーボード20の演奏に追
従してリアルタイムで変化する動画を作成することがで
きる。
According to the above configuration, a combined parameter is generated based on the parameters Q, R, and S set in the memories A, B, and C, and the parameters RQ, RR, and RS generated in response to the operation of the keyboard 20. By deforming the input image based on the synthesis parameters, a moving image that changes in real time following the performance of the keyboard 20 can be created.

さらにこのときキーボード20から出力されるMIDI信号
に基づいてパラメータRQ、RR、RSを生成すことにより、
必要に応じてキーボード以外の演奏手段を用いて、さら
には演奏処理装置等の入力手段を用いてパラメータRQ、
RR、RSを入力し得、当該アニメーシヨン装置の使い勝手
を向上することができる。
Further, by generating the parameters RQ, RR, and RS based on the MIDI signal output from the keyboard 20 at this time,
If necessary, using a performance means other than a keyboard, and further using an input means such as a performance processing device, the parameter RQ,
RR and RS can be input, and the usability of the animation device can be improved.

(G2)他の実施例 なお上述の実施例においては、MIDI信号に基づいてパ
ラメータを生成する場合について述べたが、本発明はこ
れに限らず、MIDI信号以外の種々の信号を広く適用する
ことができる。
(G2) Other Embodiments In the above embodiments, the case where parameters are generated based on MIDI signals has been described. However, the present invention is not limited to this, and various signals other than MIDI signals can be widely applied. Can be.

この場合ればデイジタイザ、マウス等の入力信号に基
づいてパラメータを生成すれば、当該デジタイザ、マウ
ス等の操作に応動して変化する動画を形成することがで
きる。
In this case, if a parameter is generated based on an input signal from a digitizer, a mouse, or the like, a moving image that changes in response to the operation of the digitizer, the mouse, or the like can be formed.

さらにテープレコーダ等に録音された自然音等を用い
てパラメータを生成すれば、当該自然音に追従して変化
する動画を形成することができる。
Further, if parameters are generated using natural sounds recorded on a tape recorder or the like, a moving image that changes following the natural sounds can be formed.

さらに上述の実施例においては、キヤラクタの足、
腕、表示位置をパラメータで指定して動画を形成する場
合について述べたが、本発明はこれに限らず、キヤラク
タの向き等を指定して動画を形成する場合、さらにはキ
ヤラクタ以外の例えば人の人相を変化させる場合等広く
適用することができる。
Further, in the above embodiment, the feet of the character
Although the case where a moving image is formed by designating the arm and the display position using parameters has been described, the present invention is not limited to this. When a moving image is formed by specifying the direction of a character, for example, a person other than the character It can be widely applied when changing the human phase.

H発明の効果 上述のように本発明によれば、予め設定されているパ
ラメータと、パラメータ入力手段を介して入力されるパ
ラメータとから合成パラメータを生成し、当該合成パラ
メータに基づいて入力画像を変形することにより、パラ
メータ入力手段を介して入力されるパラメータに応じて
リアルタイムで変化する動画像を生成し得る画像作成装
置を得ることができる。
H Advantageous Effects of the Invention As described above, according to the present invention, a composite parameter is generated from parameters set in advance and parameters input via parameter input means, and an input image is transformed based on the composite parameters. By doing so, it is possible to obtain an image creating apparatus that can generate a moving image that changes in real time in accordance with a parameter input via the parameter input unit.

【図面の簡単な説明】[Brief description of the drawings]

第1図は本発明の一実施例によるアニメーシヨン装置を
示すブロツク図、第2図及び第3図は入力画像を示す略
線図である。 1……アニメーシヨン装置、2……入力画像メモリ、4
……パラメータメモリ、6……モニタ、10……画像変換
処理装置、12A、12B、12C、28A、28B、28C……重み付け
回路、14A、14B、14C……加算回路、16……出力画像メ
モリ、20……キーボード、22……音源、24……スピー
カ、26……フイルタ、32A、32B、32C……バツフアメモ
リ、A、B、C……メモリ。
FIG. 1 is a block diagram showing an animation apparatus according to an embodiment of the present invention, and FIGS. 2 and 3 are schematic diagrams showing input images. 1 ... Animation device, 2 ... Input image memory, 4
... Parameter memory, 6 ... Monitor, 10 ... Image conversion processing device, 12A, 12B, 12C, 28A, 28B, 28C ... Weighting circuit, 14A, 14B, 14C ... Addition circuit, 16 ... Output image memory , 20 ... keyboard, 22 ... sound source, 24 ... speaker, 26 ... filter, 32A, 32B, 32C ... buffer memory, A, B, C ... memory.

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 昭64−57298(JP,A) 特開 昭64−44982(JP,A) (58)調査した分野(Int.Cl.6,DB名) G06T 13/00 G09G 5/00 - 5/40 G10H 1/00 ────────────────────────────────────────────────── ─── Continuation of the front page (56) References JP-A-64-57298 (JP, A) JP-A-64-44982 (JP, A) (58) Fields investigated (Int. Cl. 6 , DB name) G06T 13/00 G09G 5/00-5/40 G10H 1/00

Claims (4)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】入力画像を格納する入力画像メモリと、 上記入力画像の部分的変形を指定する複数の独立パラメ
ータを、順次時系列で格納する主メモリと、 複数の独立パラメータをリアルタイムで入力するパラメ
ータ入力手段と、 上記主メモリに格納された上記パラメータ及び上記パラ
メータ入力手段を介して入力される上記パラメータを所
定の比で加算して合成パラメータを生成する加算手段
と、 上記入力画像メモリに格納された上記入力画像を上記合
成パラメータに応じて変形させ、変形画像を生成する画
像処理手段と、 上記変形画像を表示画像として出力する出力手段と を具えることを特徴とする画像作成装置。
1. An input image memory for storing an input image, a main memory for sequentially storing a plurality of independent parameters for designating a partial deformation of the input image in a time series, and a plurality of independent parameters are input in real time. Parameter input means; addition means for adding the parameters stored in the main memory and the parameters input via the parameter input means at a predetermined ratio to generate a combined parameter; and storing the combined parameters in the input image memory. An image creating apparatus, comprising: an image processing means for deforming the input image thus formed in accordance with the synthesis parameter to generate a deformed image; and an output means for outputting the deformed image as a display image.
【請求項2】上記合成パラメータを格納するバツフアメ
モリ を具え、上記バツフアメモリに格納された上記合成パラ
メータを上記主メモリに転送し、当該合成パラメータを
上記パラメータとして上記主メモリに格納する ことを特徴とする特許請求の範囲第1項に記載の画像作
成装置。
2. A method according to claim 1, further comprising a buffer memory for storing the composite parameter, transferring the composite parameter stored in the buffer memory to the main memory, and storing the composite parameter as the parameter in the main memory. The image creation device according to claim 1.
【請求項3】入力画像を入力画像メモリに格納すると共
に、 上記入力画像の部分的変形を指定する複数の独立パラメ
ータを、順次時系列で主メモリに格納しておき、 複数の独立パラメータをパラメータ入力手段を介してリ
アルタイムで入力し、 上記主メモリに格納された上記パラメータ及び上記パラ
メータ入力手段を介して入力される上記パラメータを所
定の比で加算して合成パラメータを生成し、 上記入力画像メモリに格納された上記入力画像を上記合
成パラメータに応じて変形させて変形画像を生成し、 上記変形画像を表示画像として出力する ことを特徴とする画像作成方法。
3. An input image is stored in an input image memory, and a plurality of independent parameters designating a partial deformation of the input image are sequentially stored in a main memory in a time series. Inputting in real time via an input means, adding the parameters stored in the main memory and the parameters input via the parameter input means at a predetermined ratio to generate a composite parameter, An image creation method, comprising: deforming the input image stored in the storage device according to the synthesis parameter to generate a deformation image; and outputting the deformation image as a display image.
【請求項4】上記合成パラメータをバツフアメモリに格
納しておき、 上記バツフアメモリに格納された上記合成パラメータを
上記主メモリに転送し、当該合成パラメータを上記パラ
メータとして上記主メモリに格納する ことを特徴とする特許請求の範囲第3項に記載の画像作
成方法。
4. The method according to claim 1, wherein the combining parameters are stored in a buffer memory, the combining parameters stored in the buffer memory are transferred to the main memory, and the combining parameters are stored as the parameters in the main memory. The image creation method according to claim 3, wherein
JP2010861A 1989-11-14 1990-01-21 Image creation apparatus and method Expired - Lifetime JP2943201B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2010861A JP2943201B2 (en) 1990-01-21 1990-01-21 Image creation apparatus and method
US07/609,612 US5214758A (en) 1989-11-14 1990-11-06 Animation producing apparatus
EP90121824A EP0428164B1 (en) 1989-11-14 1990-11-14 Animation producing apparatus
DE69030298T DE69030298T2 (en) 1989-11-14 1990-11-14 Device for generating moving images
KR1019900018393A KR0154976B1 (en) 1989-11-14 1990-11-14 Animation producing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010861A JP2943201B2 (en) 1990-01-21 1990-01-21 Image creation apparatus and method

Publications (2)

Publication Number Publication Date
JPH03216767A JPH03216767A (en) 1991-09-24
JP2943201B2 true JP2943201B2 (en) 1999-08-30

Family

ID=11762139

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010861A Expired - Lifetime JP2943201B2 (en) 1989-11-14 1990-01-21 Image creation apparatus and method

Country Status (1)

Country Link
JP (1) JP2943201B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10269376A (en) 1997-03-25 1998-10-09 Sharp Corp Information processor
JP3632411B2 (en) * 1997-09-24 2005-03-23 ヤマハ株式会社 Music signal generation method, music signal generation device, and medium recording program
JP3384314B2 (en) 1997-12-02 2003-03-10 ヤマハ株式会社 Tone response image generation system, method, apparatus, and recording medium therefor
JP3728942B2 (en) 1998-03-24 2005-12-21 ヤマハ株式会社 Music and image generation device
JP3770293B2 (en) * 1998-06-08 2006-04-26 ヤマハ株式会社 Visual display method of performance state and recording medium recorded with visual display program of performance state
JP3849540B2 (en) 2002-02-19 2006-11-22 ヤマハ株式会社 Image control device
JP3760940B2 (en) * 2003-10-27 2006-03-29 ヤマハ株式会社 Automatic performance device
JP2007334187A (en) * 2006-06-19 2007-12-27 Konami Digital Entertainment:Kk Program for program creation and program creation method

Also Published As

Publication number Publication date
JPH03216767A (en) 1991-09-24

Similar Documents

Publication Publication Date Title
KR0154976B1 (en) Animation producing apparatus
US6898759B1 (en) System of generating motion picture responsive to music
JP3601350B2 (en) Performance image information creation device and playback device
JP3179474B2 (en) Computer graphic display method and information processing apparatus
JP3168244B2 (en) Image generating apparatus and method
EP0926655A1 (en) Device and method of generating tone and picture on the basis of performance information
TW558715B (en) Music and image generating device
JP2943201B2 (en) Image creation apparatus and method
US20170053642A1 (en) Information Processing Method and Information Processing Device
JP2000311251A (en) Device and method for generating animation and storage medium
US20020067363A1 (en) Animation generating method and device, and medium for providing program
JP4917446B2 (en) Image generation apparatus, image generation program, data interpolation apparatus, and data interpolation program
JP5408205B2 (en) Control point setting method, control point setting device, and program
JPH1040067A (en) Sound control system interlocking with operation of pointing device
JPH11175061A (en) Control unit and karaoke device
JP2006196017A (en) Animation creation apparatus and method, storage medium
JPH09160575A (en) Karaoke display device
JPH10307930A (en) Animation production system
JP4278288B2 (en) Dance image emphasis synthesizer
JP2559390B2 (en) Sound / image converter
JP4337288B2 (en) Performance operation display device and program
JP3106491B2 (en) Image creation apparatus and image creation method
JPH10326353A (en) Three-dimensional character animation display device, and three-dimensional motion data transmission system
JP3197133B2 (en) Karaoke equipment
JP4329857B2 (en) Movie playback device

Legal Events

Date Code Title Description
EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100625

Year of fee payment: 11