JP2001148806A - 映像合成演算処理装置、その方法及びシステム - Google Patents

Abstract

(57)【要約】 （修正有） 【課題】 非同期で到着する複数の映像信号から合成
画像を、時間遅れ少なく、入力信号とは無関係に非同期
で取り出すこと。 【解決手段】 複数の映像信号のラインデータをライン
バッファ２Ａ〜２Ｃを介して、各フレームメモリに書き
込み、読み出し時点で、各読み出し用バッファ４Ａ〜４
Ｃを介して各フレームメモリのラインデータ読み取る。
演算部５は、制御メモリ８から読み出した画素に対応し
た合成制御命令データにより、読み出した複数の映像ラ
インデータの画像データを、画素毎に合成映像の演算を
行う。複数の素材映像及び制御データを受信し、受信側
で合成映像を作成でき、又素材映像の一部を利用者の映
像に切換えて、利用者の要求する合成映像を作成するこ
とができる。実に、複数の映像信号のアドレス部を増減
加工することにより、視聴者に追従する合成画像及びス
テレオ画像をリアルタイムで作成できる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、受信した複数の映
像データから１つの画像を実時間で合成する映像合成処
理装置、特にその汎用回路、その方法及びシステムに関
する。

【０００２】

【従来の技術】従来の映像合成方法は、ディスプレーに
表示する速度と同じスピードタイミングで映像信号を入
力する「ビデオ信号方式」と、画像メモリ（フレームメ
モリ）に書き込まれたデータをディスプレーの描画速度
に従って読み出す「ビットマップディスプレー方式」に
分類できる。

【０００３】

【発明の解決しようとする課題】前者の場合、入力映像
で同期及び描画速度を同一にしなければならず、前者で
は手数が要していた。後者の方法では、複数のビデオ信
号方式の映像データ（同期、非同期共に）を合成した
り、ビデオ信号方式の映像データとビットマップ型の映
像データの合成を行う場合、従来は、画像データをデジ
タル化して、１枚のビットマップ型の映像データを画像
メモリに作成し、それをディスプレーに表示する方式が
主であった。

【０００４】後者の方法では、１画面分をメモリに取り
込んでから、画面を合成するため、画面合成が得られる
までに時間を要していた。垂直帰線ブランキング時間内
に処理が終了しない限り、直後の合成映像に入力映像の
更新内容を反映することができない。たとえ、垂直帰線
ブランキング時間内に合成画面の処理が終了したとして
も、最低で１フレーム分の時間遅れ、ＮＴＣＳの映像信
号では１／６０秒の時間遅れが生じることになる。

【０００５】例えば、複数相手の映像、自分の映像及び
掲示板の合成映像を基に会議を行うテレビ会議において
は、特に相手所在地が遠隔地の場合、テレビ画面映像の
合成画面に時間ずれが生じ、会議が円滑に進行しないと
いう問題があった。又、垂直帰線時間内で１フレーム分
の合成画像を確実に演算するためには高速演算処理をす
る大型コンピュータが必要であった。

【０００６】

【課題を解決するための手段】上記問題を解決するため
に、本発明は、映像合成する映像信号のそれぞれに対応
した複数の書き込み用ラインバッファ、フレームメモ
リ、読み取り用ラインバッファと、画素毎に演算方法を
指定する合成制御命令データを記憶する制御メモリと、
出力側バッファと、各画素毎に独立して映像合成の演算
を行う演算部と、コントローラとによって、映像信号デ
ータを１水平走査線分毎にフレームメモリに書き込み、
フレームメモリの読み出しにより画素単位で映像合成の
演算を行い、出力側バッファを描画速度で読み出すこと
により、いかなる映像信号に対しても実時間で合成映像
信号を得ることのできる汎用性のある映像合成演算処理
装置、その方法を提供する。

【０００７】又、最終的な合成映像を作り出すことを想
定された複数の素材映像の受信信号の内、任意の素材映
像信号を利用者が有する素材映像信号に切り換えて利用
者が要求に対応した合成映像信号を作成する映像合成演
算処理システムを提供する。

【０００８】更に、該映像合成演算処理装置の入力側に
アドレス加工処理部を設けて、視聴者の位置をセンサで
検知し、センサ出力に追従して映像信号のアドレス部及
び対応する合成命令制御データを加工して合成映像に臨
場感を持せた映像合成演算処理システム、及び両眼合成
映像用にアドレス加工処理部、該映像合成演算処理装置
を２組設けて、ステレオ合成映像を得る映像合成演算処
理システムを提供する。なお、後者のアドレス加工処理
部は１個に省略できる。

【０００９】本発明により、合成画像を１枚のビットマ
ップ型の映像データを作成するのではなく、表示する瞬
間に表示する１行分（ライン分）だけをその場で合成し
て表示するという、汎用性の高い表示方式を実現する。
映像合成演算処理装置の演算部は定型処理であり、並列
処理により高速化が可能であり、小型化も可能となる。
更に、本発明のシステムにより、いかなる映像信号に対
しても視聴者の位置に追従する合成映像、ステレオ構成
映像を、リアルタイムで得ることができる。

【００１０】

【発明の実施の態様】図１は本発明の映像合成演算処理
装置の一実施例を示している。図中１は本発明の装置全
体を表し、１Ａ，１Ｂ，１Ｃは映像信号入力端子、２
Ａ，２Ｂ，２Ｃは書き込み用ラインバッファ、３Ａ，３
Ｂ，３Ｃはフレームメモリ、４Ａ，４Ｂ，４Ｃは読み取
り用ラインバッファを表わしている。これらは合成映像
を作成するに必要な映像信号に対応して複数組設けられ
ている。図１の例では映像合成する映像信号はＡ，Ｂ，
Ｃの３個の場合を示している。

【００１１】１Ｋは合成制御命令データの入力端子、５
は複数の映像データを合成制御命令データの指定する方
法により合成演算を行う演算部、６は演算結果用のライ
ンバッファ、７は合成映像出力用のラインバッファ、８
は制御メモリ、９は制御メモリ用ラインバッファ、１０
は各バッファ、メモリの書き込み、読み取りタイミング
信号（Ｃ２〜Ｃ６）を発生するコントローラを表わして
いる。

【００１２】書き込み用ラインバッファ２Ａ，２Ｂ，２
Ｃ、読み取り用ラインバッファ４Ａ，４Ｂ，４Ｃ、演算
結果用のラインバッファ６、合成映像出力用のラインバ
ッファ７、制御メモリ用ラインバッファ９はそれぞれＦ
ＩＦＯ構成となっている。

【００１３】本発明を説明する前に、本発明を使用する
システム例について説明する。図２は複数の映像信号を
受信し、本発明の装置を使用して映像合成した後、合成
映像信号を実時間で出力し、表示装置に合成映像を表示
するシステム例を模式的に示してものである。 図２
中、２０Ａ，２０Ｂ，２０Ｃは、カメラを表し、２１
Ａ，２１Ｂ，２１Ｃはアナログ・デジタル変換部、２５
はデジタル・アナログ変換器、２６は同期信号付加回
路、２７は表示装置、２７ａは合成映像を表示する表示
画面を表している。

【００１４】２２Ａ，２２Ｂはキー信号発生装置、２３
Ａ，２３Ｂはアナログ・デジタル変換部、２４は映像信
号Ａ，Ｂ，Ｃの映像を合成する演算方法を指定する合成
制御命令データＫを出力する合成制御命令データ作成装
置を表している。なお、本明細書において同じ参照符号
で表すものは同じものを表している。

【００１５】コンポジット映像信号がアナログ信号の場
合、図２のアナログ・デジタル変換部２１Ａ，２１Ｂ，
２１Ｃによりコンポジット信号はデジタル信号に変換さ
れる。図３はこの動作を説明する図で、（ａ）はアナロ
グ・デジタル変換部２１Ａ，２１Ｂ，２１Ｃの構成例
を、（ｂ）は本発明の装置に入力される出力信号を示し
ている。

【００１６】図３（ａ）中、３１は水平同期信号Ｈ、垂
直同期信号Ｖを取り出す同期信号分離回路、３２はアナ
ログ信号のサンプル時点における画素データ（Ｄ１〜Ｄ
８）を出力するアナログ・デジタル変換器、３３は書き
込み信号Ｗとコマンド／データ切換信号ＣＳとを出力す
るパルス信号発生器、３４は１水平走査線（以下ライ
ン）における映像信号の描画開始時点の映像信号アドレ
ス部（ＸＸ，ＹＹ，ＬＬ）を作成するためのアドレス発
生器を表している。

【００１７】出力信号のコマンド／データＤはコマンド
である映像信号アドレス部（ＸＸ，ＹＹ，ＬＬ）と映像
データ（ＤＡＴＡ）とを含むパケット単位で構成され
る。ＸＸ（８ビット）は映像データが出現する画素番号
サンプル番号（画素番号）を、ＹＹ（８ビット）はライ
ン番号、ＬＬ（８ビット）はサンプル数（画素数）を表
している。書き込み信号ＷはコマンドのＸＸ，ＹＹ，Ｌ
Ｌ、映像データ（ＤＡＴＡ）のサンプルデータ（画素デ
ータ、８ビット）に対応して、読み取り又は書き込みす
るタイミング信号である。ＣＳはＨレベルがコマンド信
号期間であることを示すコマンド／データ切換信号であ
る。

【００１８】なお、図３（ｂ）のコンポジット信号の場
合は、描画開始の横方向の位置は左端に固定され（ＸＸ
＝「０」）、さらに画素数ＬＬも一定であるため、アド
レス発生器３４はライン番号ＹＹを発生するカウンタ回
路とＸＸ，ＬＬの値を保持したメモリ回路との組み合わ
せで実現できる。

【００１９】本発明のデジタル映像データ（ＤＡＴＡ）
の１ライン分をフレームメモリ３に書き込むまでの動作
を図４，図５（ａ）〜（ｃ），図６を参照して説明す
る。図４は、書き込み用ラインバッファ２，フレームメ
モリ３の動作を説明する概略図で、図３の信号を取り入
れた場合における一例である。４１，４３はメモリ、４
２，４４は書き込みアドレス制御手段、４５は読み取り
アドレス制御手段を表している。

【００２０】書き込み用ラインバッファ２に書き込まれ
たデータ（Ｄ１〜Ｄ８）はコマンド／データ切換信号Ｃ
ＳのＨレベル期間、書き込み信号Ｗに同期してコマンド
は書き込みアドレス制御手段４２に書き込まれる。コマ
ンド／データ切換信号ＣＳのＬレベル期間、映像信号の
画素データ（ＤＡＴＡ）は書き込み信号Ｗに同期して書
き込み用ラインバッファ２に順次書き込まれる。

【００２１】書き込みアドレス制御手段４２内のカウン
タに記憶された「ＬＬ」は１画素データが書き込まれる
毎に減算される。書き込み用ラインバッファ２の書き込
み終了をカウンタ値「０」で検出すると、以後に続くブ
ランキング期間に相当する所定期間内でラインデータ全
てをフレームメモリ３に転送する。上記所定期間の時点
において、書き込みアドレス制御手段４４は、転送され
てきたパケットデータのアドレス部ＸＸ，ＹＹ，ＬＬに
基づき、書き込み用ラインバッファ２からＬＬ画素分の
映像データをフレームメモリのラインアドレス＃ＹＹの
ＸＸ番目以降に転送する。

【００２２】図５は、コンポジット映像信号Ａがノン・
インタレース走査、合成映像信号Ｆがインタレース走査
である場合のバッファ，フレームの書き込み、読み取り
動作を示したタイムチャートである。図中（ａ）は、入
力映像信号ＡのラインＹ，Ｙ＋１のラインデータＡ_Ｙ，
Ａ_Ｙ＋１が入力された状態を示している。書き込み用ラ
インバッファ２Ａに書き込まれたラインデータＡ_Ｙは水
平帰線ブランキング期間内の時刻t2においてフレームメ
モリ３Ａのラインアドレス＃Ｙの記憶領域に書き込まれ
る（（ｂ），（ｃ）参照）。なお、図５中で、ハッチン
グしたものは記録された映像データが一括して転送され
ることを、（ｃ）では次の映像データが転送されて記録
内容が更新するまで、（ｅ），（ｆ），（ｇ）では１ラ
イン期間映像データが記憶保持されていることを表して
いる。

【００２３】図６は、映像合成する映像データＡ，Ｂ，
Ｃが非同期で入力する状態でのフレームメモリにおける
映像データの記録更新状態を模式的に説明する図であ
る。映像信号Ａはノンインタレース、Ｂ，Ｃはインタレ
ース走査の映像信号である場合である。なお、図５，６
中のラインデータにダッシュ（′）を付加したものはｔ
時刻（又は図５中の経過時刻）で記憶データが前フレー
ムの映像データであることを表している。例えば、Ａ_Ｙ
は最新データ、Ａ_Ｙ＋２ ′は前フレームのデータを表
している。

【００２４】映像データＡ，Ｂ，Ｃは非同期で順次書き
込み用ラインバッファ２Ａ，２Ｂ，２Ｃに書き込まれる
（図６（ａ））。各書き込み用ラインバッファ２Ａ，２
Ｂ，２Ｃに書き込まれた映像信号Ａ，Ｂ，Ｃのラインデ
ータは次の水平帰線期間にフレームメモリ３Ａ，３Ｂ，
３Ｃのラインアドレスのメモリ領域に書き込まれ、ライ
ンデータを更新する。（図６（ｂ），（ｃ）参照）

【００２５】次に、フレームメモリ３Ａ，３Ｂ，３Ｃに
記憶された映像データを基に映像合成する方法を説明す
る。キー信号発生装置２２Ｂ，２２Ｃは前景映像信号を
使用するか、背景映像信号を使用するかのキー信号を発
生し、アナログ・デジタル変換部２３Ｂ，２３Ｃで該キ
ー信号が前景映像信号を選択する画素に対応する合成制
御データを「１」に、そうでない画素に対応する合成制
御データを「０」となるように該キー信号を画素単位で
デジタル化し、アドレス部を付加して、合成制御データ
作成装置２４に信号を転送する。

【００２６】キー信号はクロマキー信号処理、ルミナン
スキー信号処理，距離情報を利用したＺキー信号処理
や、背景画像との差分を用いた信号処理を行う公知のキ
ー信号発生装置により作成できる。ただし、図２の例で
は、合成制御命令データは前景映像信号Ｂ，Ｃのキー信
号だけで決定されるため、背景映像信号Ａのキー信号は
不要であり、省略している。（詳しくは後述する。）

【００２７】合成制御命令データ作成装置２４はコンピ
ュータで構成され、前景映像信号のキー信号と距離関係
情報から合成制御命令データＫを生成し、合成画面の画
素の演算方法を指定する命令として映像合成処理装置１
中の制御メモリ８の合成画面の画素に対応した所定領域
に書き込む。合成制御命令データＫは映像合成の演算を
行うに際し、コンピュータの機械語に相当する機能を有
するデータである。

【００２８】制御メモリ８は、フレームメモリ３Ａ，３
Ｂ，３Ｃの画素記憶領域に対応して、メモリの領域が決
めらている。制御メモリ８の行，列アドレスは、映像信
号のラインアドレス，サンプルデータ番号（画素データ
番号）に対応させている。つまり、制御メモリに記憶さ
れる合成制御命令データはフレームメモリ３Ａ，３Ｂ，
３Ｃの画素に対応させて記録され、読み出される。

【００２９】フレームメモリ３Ａ，３Ｂ，３Ｃの画素に
対応させて合成制御命令データが読み出されることによ
り、映像合成の演算処理手順が制御メモリ８に記憶され
ていることになる。制御メモリ８の記憶セルを８ビット
とすると、制御メモリ８は２５６種類の合成制御命令デ
ータ（演算命令）Ｋを画素単位で記憶することができ
る。合成制御命令データ作成装置２４は、そのモニタ画
面により制御メモリ８に記憶された合成制御命令データ
を確認、修正できる。

【００３０】コントローラ１０の読み出しタイミングＣ
２のタイミング（図５（ｄ）参照）に同期してフレーム
メモリ３Ａ，３Ｂ，３Ｃの同一ラインアドレスのライン
データは各々のフレームメモリから読み取り用ラインバ
ッファ４Ａ，４Ｂ，４Ｃにそれぞれ転送される（図５、
時刻ｔ３参照）。

【００３１】図５の（ｅ）映像データＡは各映像信号の
映像データを代表して示している。フレームメモリ３Ａ
のラインアドレス・・・，＃Ｙ−２，＃Ｙ，＃Ｙ＋２，
・・・のラインデータ・・・，Ａ_Ｙ−２，Ａ_Ｙ，Ａ
_Ｙ＋２′，Ａ_Ｙ＋４′，・・・は１ラインデータ毎に読
み取られ、タイミングＣ２に同期して順次読み取り用ラ
インバッファ４Ａに書き込まれる。ラインＹ＋４のライ
ンデータはこの時点では未更新なので、前走査のライン
データＡ_Ｙ＋４′を読み取る。図６の例で、時刻ｔでフ
レームメモリ３Ａ，３Ｂ，３Ｃのラインアドレス＃３の
ラインデータを読み取り用ラインバッファ３Ａ，３Ｂ，
３Ｃにそれぞれ読み取るタイミングの場合では、ライン
データＡ３′，Ｂ３，Ｃ３が各読み取り用バッファにそ
れぞれ転送される。

【００３２】一方、合成制御命令データＫも、読み取り
信号Ｃ２に対応して、各フレームメモリの読み取るライ
ンアドレスに対応した行アドレスの１ライン分が制御メ
モリ８から読み出され、制御メモリ用ラインバッファ９
に書き込まれる。読み取り用ラインバッファ４Ａ，４
Ｂ，４Ｃ、制御メモリ用ラインバッファ９はそれぞれ、
コンピュータのデータキャッシュメモリ、命令キャッシ
ュメモリの機能をする。

【００３３】フレームメモリ３Ａ，３Ｂ，３Ｃの画素に
対応する映像データ及び合成制御命令データは読み取り
用ラインバッファ４Ａ，４Ｂ，４Ｃ、制御メモリ用ライ
ンバッファ９からコントローラのタイミングパルスに同
期して読み出され演算部５に取り込まれる。演算部５に
おいて、合成制御命令データが指定する演算方法により
画素毎に合成映像が演算され、画素毎に、コントローラ
１０のタイミングに同期して順次演算結果用のラインバ
ッファ６に転送される。

【００３４】このようにして、１ライン分の合成映像が
画素単位で演算され、演算結果用のラインバッファ６に
書き込まれると、演算結果用のラインバッファ７から１
ライン分の合成映像データが、合成映像信号出力用のラ
インバッファ７に転送される。表示装置２７の描画速度
と同一速度で、コントローラ１０は合成映像信号を画素
単位で合成映像信号出力用のラインバッファ７から外部
のＤ／Ａ変換器２５に出力する。合成映像信号は、外部
のＤ／Ａ変換器２５でアナログ量に変換され、同期信号
付加回路２６で水平同期信号、垂直同期信号等の信号が
付加され表示映像信号として表示装置２７に入力され、
表示画面２７ａに描画される。

【００３５】演算処理は時刻ｔ４から時刻ｔ５の間に終
了すれば良く、この演算は１ライン分について画素毎に
独立に処理できるので、演算装置を複数個用いることに
より、演算の実質的高速化が容易に可能となる。

【００３６】図７は、上記画素単位の演算処理を高速に
するために３個の演算単位でパイプライン並列演算処理
をした一実施例である。５１，５５は１画素分のデータ
を格納するレジスタ、５２，５４は１画素分のデータを
記憶するデータメモリである。５６は制御メモリを画素
単位の合成制御命令データＫを記憶するレジスタ、５７
は合成制御命令データＫを記憶するメモリを表してい
る。

【００３７】レジスタ５１で直列３画素データを並列に
変換し各演算単位５３に入力し、レジスタ５５は演算結
果の並列画素データを入力された順に直列に変換し演算
結果用のラインバッファ６に出力する。この例では３倍
の高速演算処理ができる。ｎ個の演算単位を使用すると
ｎ倍の高速演算処理ができる。

【００３８】図２の本発明を使用するシステム例では、
入力映像信号をインタレース（映像信号Ａ）、ノン・イ
ンタレース走査信号（映像信号Ｂ，Ｃ）で、合成映像出
力信号をノン・インタレース走査信号で説明したが（図
５，図６）、これらは、フレームメモリ４３の書き込み
アドレス制御手段４４、読み取りアドレス制御手段４５
のアドレス制御により、フレームメモリ４３にアドレス
書き込み、フレームメモリ４３からアドレス読み取るこ
と対応できることは明らかである。

【００３９】すなわち、１ライン毎のパケットの値が、
インタレース走査信号では［１，１，・・・・］，
［１，３，・・・・］，［１，５，・・・・］なので、
フレームメモリのラインアドレス＃１，＃３，＃５，・
・・の記憶領域に、ノン・インタレース走査信号では
［１，１，・・・・］，［１，２，・・・・］，［１，
３，・・・・］なので、フレームメモリのラインアドレ
ス＃１，＃２，＃３，・・・の記憶領域にそれぞれ書き
込まれる。また、合成映像出力信号をノン・インタレー
ス走査信号とするならば、読み取りアドレス制御手段４
５により、フレームメモリのラインアドレス＃１，＃
２，＃３，・・・に記憶されたラインデータを読み取れ
ばよい。

【００４０】図２では、入力映像信号をカメラ撮影信号
によるアナログ・コンポジット映像信号として説明した
が、テレビ撮影信号，衛星放送の映像信号でも、またデ
ジタル・コンポジット映像信号であっても、さらにコン
ピュータグラフィック（ＣＧ）信号入力でも本発明の映
像合成は可能である。これらの信号はアナログ・デジタ
ル変換部２１Ａ，２１Ｂ，２１Ｃでパケットデータ作成
を調整することにより対応できる。

【００４１】図８は、本発明による合成映像の作成例を
示している。この例は、映像信号Ａに背景映像が、映像
信号Ｂに自動車の映像が、映像信号Ｃに人物の映像が与
えられ、合成映像の合成制御命令データが映像信号Ａ，
Ｂ，Ｃだけをそれぞれ選択する命令データＫＡ，ＫＢ，
ＫＣである場合の例である。映像信号Ａ，Ｂは合成映像
信号Ｆと同じ画素数の映像信号であり、映像信号Ｃはそ
れらより小さい画素数の映像信号とする例である。映像
信号Ｃは合成画面の画素位置に対応したフレームバッフ
ァの所定記憶領域に書き込まれる。書き込みを行わない
部分（映像信号Ｃの図の黒い部分）は最終的に使用され
ることのないので、どのような値でも構わない。

【００４２】合成制御命令データ作成装置２４は、これ
らの入力映像信号Ａ，Ｂ，Ｃの画像のいずれを使用する
か否かの合成制御データＡｓ，Ｂｓ，Ｃｓを基に、映像
信号Ａ，Ｂ，Ｃだけを選択する合成制御命令データＫ
Ａ，ＫＢ，ＫＣを作成し、制御メモリ８中の合成画面の
画素に対応する所定領域に書き込む。

【００４３】例えば、図２の各映像信号Ａ，Ｂ，Ｃの例
で説明する。この例では、合成画像上で各映像信号を選
択する基準は、視聴者に近い標準距離の映像信号を優
先、つまり標準距離の逆順位で選択するとする。合成映
像上での標準距離は、背景映像信号Ａ＞前景映像信号Ｂ
＞前景映像信号Ｃであるので、合成制御命令データＫの
合成画面の画素 (x,y)に対する命令 Ｋ (x,y) は、合成
制御データＡｓ，Ｂｓ，Ｃｓに対して以下の値（命令コ
ード，８ビット）が割り当てられる。 Ｃｓ(x,y) ＝「１」 のとき 映像信号Ｃを選択する命令ＫＣ Ｃｓ(x,y) ＝「０」 かつＢｓ(x,y) ＝「１」のとき 映像信号Ｂを選択する命令ＫＢ Ｃｓ(x,y) ＝「０」 かつＢｓ(x,y) ＝「０」のとき 映像信号Ａを選択する命令ＫＡ このとき、映像信号Ａの選択は不要なので、映像信号Ａ
のキー信号は省略できる。

【００４４】合成制御命令データＫＡ，ＫＢ，ＫＣは合
成制御命令データ作成装置２４のモニタ画面に図８のよ
うに映像信号と関連させて表示することができる。背景
映像信号Ａの地点に、映像信号Ｂの自動車の指定した１
台と、映像信号Ｃの人物の中の指定した１人がいるよう
な合成映像Ｆが得られ、表示装置２７に描画される。

【００４５】複数の画像データは合成映像を作り出す時
点で、失う訳ではない。例えば、合成映像には使われな
いある物体の後方に隠れる部分の映像も、フレームメモ
リに保存されている。この性質を積極的に利用して映像
情報を送受信することにより、伝送するに必要な情報量
を大幅に低下させることも可能である。例えば、ある風
景に自動車があり、その手前に人物が動いている映像が
あるとする。これを、映像の背景、自動車の映像、人物
の映像としてそれぞれ独立した映像として送信し、受信
側で、本発明の装置を用いて、それらを組み合わせて映
像を再生することができる。

【００４６】動きの速い自動車は、例えば秒６０コマ
で、背景は秒５コマで送ることもできる。本発明の映像
合成画面の表示方式では、自動車の移動によって一旦は
自動車の後ろになった背景画面が、自動車の通過により
再表示される時点で、再送信する必要はない。それは合
成映像で一旦は表示されなくなった背景画像は失ったの
ではなく、合成表示されなかっただけで、画像メモリ
（フレームメモリ）に残っているからである。

【００４７】同様に、本発明では時々刻々書き換えられ
るそれぞれの画像メモリとは無関係に、その瞬間の複数
の映像データを用いて、合成映像データを作成し、表示
するもできる。例えば、上記の背景秒５コマ、人物秒１
５コマ、自動車秒６０コマの合成映像が、ディスプレー
の性能に応じた読み出し速度、例えば秒７０コマで表示
することも問題なくできる。

【００４８】図９はこれら複数の素材の映像を撮影し、
それらの映像信号を加工して合成映像を作成してから放
送する代わりに、素材の映像信号と合成制御命令データ
又は合成制御データを作成し、これらのデータを放送
し、受信側では、これらのデータを基に本発明の映像合
成処理装置１を使用して合成映像を得て、受信側の表示
装置の描画速度で実時間で出力する機能システム例を模
式的に示している。図９（ａ）のシステムは放送局側で
作成された素材映像信号、合成制御命令データを送信
し、受信側で合成映像を作成するシステムで、図９
（ｂ）は放送局側で作成された素材映像信号、合成制御
データを受信し、受信側で合成制御命令データを作成
し、合成映像を作成するシステムである。

【００４９】図中、６０は合成制御命令データ作成装
置、６１は送信パケット作成部、６２は送信装置、６３
は受信装置を表している。６０Ｓは合成制御データ作成
装置、６０Ｒは合成制御命令データ作成装置を表してい
る。なお、図９（ａ），（ｂ）の例では、キー信号発生
装置、アナログ・デジタル変換部に相当する装置は、合
成制御命令データ作成装置６０，合制御データ作成装置
６０Ｓ内に組みこまれている。

【００５０】素材映像信号Ａ，Ｂ，Ｃは、図９（ａ）の
例ではそれぞれカメラ２０Ａ，２０Ｂ，２０Ｃにより撮
影された背景，車，人物の映像信号である。合成制御命
令データ作成装置６０は撮影された各映像画面をもとに
画素毎に合成制御命令データＫを作成する。映像信号
Ａ，Ｂ，Ｃ、合成制御命令データＫはそれぞれに最適な
データ圧縮・加工を施した後、送信パケット作成部６１
によりパケット信号に構成されて、送信される。

【００５１】図９（ｂ）の合成制御データ作成装置６０
Ｓは、映像信号Ａ，Ｂ，Ｃから例えば各種キー処理によ
り、合成制御データを作成する装置である。図２，図９
の例において、厳密にはキー信号がそのまま合成制御デ
ータに対応せず、距離関係情報（ＬＡ，ＬＢ，ＬＣ又は
ＬＡ：ＬＢ：ＬＣ）から合成映像上での標準配置位置
（視聴者が位置補正せずに見る位置）が決定されたもの
となっている。これは、２値化してカメラマン（撮影
者）が意図した構図になるように画面位置（ｘ，ｙ）を
標準位置に設定するからである。

【００５２】距離関係情報を合成制御データ作成装置６
０Ｓに入力する方法としては、例えば、カメラマン（撮
影者）が直接その値を入力する方法、カメラ毎に距離計
測装置を設置して、その計測結果を自動的に入力する方
法がある。例えば、カメラマンは観察者（視聴者）から
山までＬＡ＝１０ｋｍ、車までＬＢ＝３０ｍ、人物まで
ＬＣ＝１０ｍとなる構図となるように映像信号Ａ，Ｂ，
Ｃの標準位置を設定する。

【００５３】図９（ｂ）中、合成制御命令データ作成装
置６０Ｒは受信した合成制御命令Ａｓ，Ｂｓ，Ｃｓを合
成制御命令データＫを作成し、映像合成制御装置１の制
御メモリに合成制御命令データＫを送信する装置であ
る。受信側で合成画面の映像信号の表示位置を修正する
場合には、合成制御データとともに距離関係情報が送信
側から伝送される。

【００５４】図９の例では、例えば、背景信号が動きが
少ない代りとして高精度の画像が送信でき、人物，車は
動きがある代りに画像範囲が狭いという特徴を生かし
て、小領域だけの画像を送信するとことができる。例え
ば、画像の送信は全て（ＸＸ，ＹＹ，ＬＬ，画素デー
タ）という１ライン１パケットのデータ形式で行えばこ
れは可能である。

【００５５】図１０は、図９（ａ）の方式における送信
パケットデータ（Ａ，Ｂ，Ｃ，Ｋ）、映像合成の演算結
果（Ｆ）のタイムチャート例及びタイムチャートに対応
した１フレーム映像画面例（Ａ＊，Ｂ＊，Ｃ＊）、合成
制御命令データ例（Ｋ＊）、演算映像合成画面（Ｆ＊）
例を模式的に示したものである。この例では、各送信パ
ケットデータはフレーム画像単位で、添え字は送信され
る順番を表している。合成制御命令データＫ１＊，Ｋ２
＊，Ｋ３＊は制御メモリに記憶された画素ごとの演算命
令データＫＡ，ＫＢ，ＫＣをフレーム画像対応で表示し
ている。伝送パケットは映像データの伝送情報量に対応
して、非同期で伝送されている。映像信号Ｂ，Ｃの黒い
部分は伝送されない画素を表している。

【００５６】図１１（ａ）は、例えば、３つの素材映像
により最終的な合成映像を作り出すことを想定された素
材映像群に対し、第２番目の素材映像の代わりに利用者
の映像を使うことにより、特定の俳優の代理を利用者が
演じる映じる映像を得る映像合成演算処理システム例を
模式的に示している。

【００５７】図１１（ａ）中、６５、６６は、利用者の
素材映像信号の切換設定（図ではＢからＤ）に応じて映
像信号、合成制御データをそれぞれ切り換える切換手段
を表している。２０Ｄは利用者が合成映像の素材を撮影
するカメラを表している。６７は複数の素材映像信号
（Ａ，Ｂ，Ｃ）及びこれに関する合成制御データ（Ａ
ｓ，Ｂｓ，Ｃｓ）を記録し、合成映像の素材として利用
するときに再生する記録再生装置を、６８は受信装置６
３の出力と記録再生装置６７の出力とを切り換える切換
回路を、６９は素材表示位置検出回路を表している。ま
た、受信装置６３に受信される素材映像信号及び制御デ
ータを切換回路６８を介して、記録再生装置６７に記録
するようにしてもよい。２１Ｄ，２３Ｄはアナログ・デ
ジタル変換部を、２２Ｄはキー信号発生装置を表し、図
２のものと同じ動作を行う。

【００５８】素材映像信号Ｄの標準位置データはアナロ
グ・デジタル変換部２１Ｄ，２３Ｄにより作成される。
素材映像信号Ｄを素材映像信号Ｂの役者映像の代役映像
信号とすると、役者が動き回れば、それに追従して代役
の役者を動かす必要がある。素材映像信号Ｂと素材映像
信号Ｄとが同じ位置になるようにアナログ・デジタル変
換部２１Ｄ，２３Ｄの出力信号Ｄ，Ｄｓのアドレス部は
調整されて出力される。

【００５９】素材表示位置検出回路６９はこの調節を正
確に行うために特に設けられたものである。素材表示位
置検出回路６９は、合成制御データＢｓあるいは素材映
像信号Ｂを取り入れて、役者の合成画面上の位置を計算
して、それをアナログ・デジタル変換部２１Ｄ，２３Ｄ
に出力する。アナログ・デジタル変換部２１Ｄ，２３Ｄ
は、これにより調整されたアドレス部の出力信号Ｄ．Ｄ
ｓをそれぞれ映像合成演算処理装置１，合成制御命令作
成装置６０Ｒに出力する。

【００６０】図１１（ｂ）は該映像合成演算処理システ
ムの素材映像データ、合成制御命令データを例示的に示
している。図中Ａ，Ｂ，Ｃは素材映像データで、黒い部
分は素材映像データの内放送されない画素を、Ａｓ，Ｂ
ｓ，Ｃｓはそれぞれの素材映像の有効範囲を示す合成制
御データで、それぞれ画面表示で表している。同様に、
Ｄは利用者を撮影した映像データを、Ｄｓは素材として
有効範囲を示す合成制御データを表している。Ｆは受信
した素材映像データＡ，Ｂ，Ｃを映像合成した合成映像
データ、ＦＤは受信素材映像データＡ，Ｃと利用者が撮
影した素材映像データＤを映像合成した合成映像データ
を画面表示で表したものである。

【００６１】利用者がカメラ２０Ｄで撮影した映像信号
と、キー信号発生装置２２Ｄによって得られたキー信号
は、素材表示位置検出回路６９によって検出された素材
映像Ｂの表示位置に表示されるように映像データとＤと
合成制御データＤｓに加工される。

【００６２】利用者が撮影した映像を利用して合成映像
を作成する場合、切換手段６５，６６により、素材映像
信号Ａ，Ｂ，Ｃの内Ｂを素材映像信号Ｄに切換え、合成
制御命令データ作成装置６０Ｒに入力している素材映像
信号の合成制御データＡｓ，Ｂｓ，Ｃｓの内合成制御デ
ータＢｓを素材映像信号の合成制御データＤｓに、切り
換える。合成制御命令データ作成装置６０Ｒは合成制御
データＡｓ，Ｂｓ，Ｄｓから合成制御命令データＫを作
成し、映像合成処理装置１は素材映像信号Ａ，Ｂ，Ｄと
合成制御命令Ｋデータとから利用者の要求に応じた合成
映像ＦＤが得られる。切換回路６８により記録再生装置
６７のデータを利用することができる。

【００６３】例えば、第１番目，第２番目，第３番目の
素材映像信号Ａ，Ｂ，Ｃをそれぞれ背景，俳優，道具の
映像とすると、切換手段６５，６６の切り換えにより第
２番目の素材映像信号Ｂの代わりに利用者の映像信号Ｄ
を利用すると、対応した俳優の代わりに利用者が演じて
いる合成映像が得られる。

【００６４】図１２は、図９（ｂ）と同じデータを受信
し、受信側では、視聴者の移動位置に追従させて実時間
で合成映像画面を動かし、合成映像画面に立体感を持た
せた装置に本発明装置を使用した映像合成処理システム
例を模式的に示したものである。図９（ｂ）中※印に相
当する受信側箇所で図１２の機能システムを接続する。
７０は、受信した画像信号パケット先頭の映像信号アド
レス部（ＸＸ，ＹＹ，ＬＬ）及び同時に対応する合成制
御命令データを加工するアドレス加工処理部、７１は表
示装置、７２は表示装置７１と視聴者との位置関係を検
知する位置センサー、７３は、その値をアドレス加工処
理部７０にフィードバックするフィードバック信号であ
る。

【００６５】表示装置７１と視聴者との位置関係を位置
センサー７２により検知し、その値をアドレス加工処理
部７０にフィードバックする。受信したパケットデータ
から取り出された距離データと上記相対位置関係とをも
とにアドレス加工処理部７０は各映像信号アドレス部の
ＸＸ，ＹＹ，ＬＬの加工量を個別に増減制御する。加工
された映像信号アドレス部のコマンドを及び映像データ
を本発明の装置１に入力し合成映像を表示装置７１に描
画する。

【００６６】アドレス加工処理部７０では、合成映像画
面におけるカメラ２０Ａ，２０Ｂ，２０Ｃによって撮影
された映像信号の奥行きの位置関係を基に、各映像信号
アドレス部（ＸＸ，ＹＹ，ＬＬ）のＸＸの増減値をフィ
ードバック信号７３を基に計算し、その結果合成画面か
らはみ出る部分は削除して画素数ＬＬを調整する。これ
と同時に、合成制御命令データ作成装置６０Ｒで作成さ
れた合成制御命令データの各映像信号を選択する制御命
令データの配置も前述の鑑賞位置から算出したＸＸの増
減値に基づき修正を加える。

【００６７】第１３図を参照して、アドレス加工処理部
７０による映像信号Ａ，Ｂ，Ｃ合成制御データＡｓ，Ｂ
ｓ，Ｃｓのアドレス増減制御について簡単に説明する。
（ａ）は素材映像Ａが不動とする場合、（ｂ）は素材映
像Ｃが不動とする場合の位置変動計算例を示している。
Δｘは、視聴者が位置Ｐ１から位置Ｐ２への位置変動量
を表している。位置センサー７２でこの位置変動量Δｘ
を計測し、距離関係情報ＬＡ，ＬＢ，ＬＣで比例配分
し、映像データＡ，Ｂ，Ｃの位置変動量ΔｘＡ，Δｘ
Ｂ、ΔｘＣが計算される。この位置変動に応じた画素数
だけ映像信号Ａ，Ｂ，Ｃのアドレス部ＸＸ、合成制御デ
ータＡｓ，Ｂｓ，Ｃｓのアドレス増減調整され、アドレ
ス加工処理部７０から映像信号Ａ’，Ｂ’，Ｃ’、合成
制御データＡｓ’，Ｂｓ’，Ｃｓ’が出力される。

【００６８】これにより、視聴者の視点の動きに応じた
合成映像をリアルタイムに表示でき、立体感のある映像
を視聴者は鑑賞することができる。図１３の右側に、鑑
賞位置１での映像と鑑賞位置２での映像を模式的に例示
している。同じ瞬間の映像であっても鑑賞位置２では、
画面内人物は画面内背景の山より右にいるが、鑑賞位置
１では山と人物は重なって、表示されている。

【００６９】図１４は、図９（ｂ）中※印に相当する受
信側箇所で接続され、複数の映像信号を受信し、受信側
では本発明の映像合成演算処理装置を２個使用し、映像
信号のアドレス部を加工して両眼視差のある２個の合成
映像を出力するステレオ映像合成演算処理システムを模
式的に示している。図１４（ａ）中、１Ｒ，１Ｌは右
眼，左眼用の映像合成演算処理装置、７０Ｒ，７０Ｌは
右眼，左眼用のアドレス加工処理部、７４Ｒ，７４Ｌは
アドレス加工処理部７０Ｒ，７０Ｌの映像信号アドレス
部（ＸＸ，ＹＹ，ＬＬ）を増減加工する調整入力を表し
ている。

【００７０】アドレス加工処理部７０Ｒ，７０Ｌは、右
眼，左眼用の映像合成演算処理装置の合成映像出力信号
ＦＲ，ＦＬが両眼視差により充分遠近感を与える量にな
るように受信したパケットデータから取り出された距離
データをもとに調整入力７４Ｒ，７４Ｌによりそれぞれ
のアドレス部を加減調整する。 合成映像信号ＦＲ，Ｒ
Ｌは図示していないステレオディスプレイ装置に供給さ
れる。受信側のステレオディスプレイ装置により、両眼
視差を利用して得られる立体感のあるステレオ映像を、
実時間で視聴者は見ることができる。

【００７１】図１４（ｂ）の映像合成演算システムは、
図１４（ａ）の両眼の映像データ内どちらか一方の受信
映像データのアドレス加工を省略したシステムである。
図１４（ｂ）では左眼用映像データはアドレス加工をせ
ず、アドレス加工処理部７０により、右眼用，左眼用合
成映像信号の両眼視差量だけアドレス部を調整入力７４
により増減調整する。

【００７２】

【発明の効果】本発明の映像合成演算処理は、映像合成
する映像信号毎にフレームメモリを用意し、書き込み用
ラインバッファにより１ライン分の映像データをフレー
ムメモリに書き込み、フレームメモリから１ライン分デ
ータを読み出して画像合成の演算処理をするので、従来
のように１フレーム後に画像合成するのに比べて合成映
像作成に時間遅れが少なく、実時間で映像合成画面を得
ることができる。書き込み用ラインバッファ、読み出し
用ラインバッファを設けて、フレームメモリのアクセス
競合が防止できる。さらに、コンピュータの機械語に相
当する映像信号の合成制御命令データを演算部に各画素
毎に取り込むことで演算速度が速くなる。

【００７３】本発明では、合成画像を１枚のビットマッ
プ型の映像データを作成するのではなく、表示する瞬間
に表示する１行分（ライン分）だけをその場で合成して
表示するという、汎用性の高い表示方式を実現する。合
成演算部は定型処理であり、並列処理により高速化が可
能であり、ＬＳＩチップで作成でき小型化も可能であ
る。

【００７４】本発明の装置では、これらすべての処理が
同時並行に進行するので、並列処理ができ、装置内の個
々の処理に高速性が要求されずに、合成映像が得られる
までの時間が短くできるという効果を奏する。しかも、
映像入力、映像出力及び制御入力は非同期でよいという
特長がある。さらに、描画速度（１秒間の画面更新回
数）が異なっていても動作できる効果もある。

【００７５】複数の映像入力、制御メモリのアクセス、
映像出力は非同期で良く、それぞれの映像更新周期も等
しくする必要はない。さらに更新間隔が不定の映像入力
や、画面の一部だけの映像信号であっても構わない。こ
のように、各映像入力信号は他の映像入力信号とは独立
に与えることができ、本回路を用いたシステム全体の複
雑さが低減できる。

【００７６】本発明の映像合成処理システムでは、利用
者の作成した素材映像信号を利用して利用者の要求する
合成画像を得ることができる。特に演劇の分野において
特定の配役の練習に利用したり、鑑賞するだけでなく、
代役をすることにより演劇を楽しむといった新しい楽し
み方が実現する。

【００７７】更に、本発明の映像合成演算処理装置の入
力側に受信映像信号のアドレス部を増減加工する映像合
成処理システムでは、視聴者の移動に追従する合成画
像、入力側でアドレス加工をした２個の合成映像信号の
内少なくとも１個にアドレス加工をすることによりステ
レオ合成画像を、いかなる映像データに対しても、リア
ルタイムで得ることができる。

【図面の簡単な説明】

【図 １】本発明の実施例を示す図である。

【図 ２】本発明を使用するシステム例を示す図であ
る。

【図 ３】本発明の入力データを示す図である。

【図 ４】本発明の入力側ラインバッファ，フレームメ
モリの概略を示す図である。

【図 ５】映像データのタイムチャートを示す図であ
る。

【図 ６】各映像データの入力、記録更新タイミングを
説明する図である。

【図 ７】並列パイプライン演算処理を説明する図であ
る。

【図 ８】本発明による映像合成例を説明する図であ
る。

【図 ９】本発明に使用するデータを受信して合成映像
を作成する場合の映像合成演算処理システム例を説明す
る図である。

【図１０】図９のデータを説明する図である。

【図１１】他の発明である利用者の映像を使用して合成
映像を作成する映像合成演算処理システム例を説明する
図である。

【図１２】他の発明である鑑賞者の位置に追従して合成
映像を作成する映像合成演算処理システム例を説明する
図である。

【図１３】アドレス加工処理のアドレス増減制御を説明
するための図である。

【図１４】他の発明であるステレオ合成画像を作成する
映像合成演算処理システム例を説明する図である。

【符号の説明】

１ 映像合成処理装置 ２，２Ａ〜２Ｃ 書き込み用ラインバッファ ３，３Ａ〜３Ｃ フレームメモリ ４，４Ａ〜４Ｃ 読み取り用ラインバッファ ５ 演算部 ６ 演算結果用のラインバッファ ７ 合成映像出力用のラインバッファ ８ 制御メモリ ９ 制御メモリ用ラインバッファ １０ コントローラ ２４，６０ 合成制御命令データ作成装置 ６０Ｓ 合成制御データ作成装置 ６０Ｒ 合成制御命令データ作成装置 ２０Ｄ 利用者を撮影する撮影装置 ２１Ｄ，２３Ｄ アナログ・デジタル変換部 ２２Ｄ キー信号発生装置 ６３ 受信装置 ６５，６６ 切換手段 ６７ 記録再生装置 ６８ 切換回路 ７０，７０Ｒ，７０Ｌ アドレス加工処理部 ７２ 位置センサ ７４，７４Ｒ，７４Ｌ 調整入力

Claims (9)

【特許請求の範囲】
1. 【請求項１】 非同期で入力された複数の映像信号に対
   応して設けられ、該映像信号の１水平走査線の映像デー
   タを読み込む複数の第１のラインバッファと、 第１のラインバッファが映像データを１水平走査線分読
   み込み完了したとき該１水平走査線の映像データが転送
   される第１のラインバッファに対応して設けられた複数
   のフレームメモリと、 画素毎に演算方法を指定する合成制御命令データを記憶
   する制御メモリと、 各フレームメモリの対応画素のデータ、該対応画素に対
   応する合成制御命令データを取り込み、映像合成の演算
   を行う演算部と合成映像データを１水平走査線分記憶
   し、合成映像データを描画速度で出力する出力ラインバ
   ッファとフレームメモリ、制御メモリの読み出し、演算
   部、出力ラインバッファのタイミングをとるコントロー
   ラとを具備することを特徴とする映像合成演算処理装
   置。
2. 【請求項２】 画素単位の演算処理をパイプライン並列
   処理で行うことを特徴とする請求項１の映像合成演算処
   理装置。
3. 【請求項３】 非同期で受信した複数の映像データの１
   水平走査線データをそれぞれの第１のラインバッファに
   読み込み、 読み込み完了直後にそれぞれの対応するフレームメモリ
   に第１のラインバッファに読み込まれた該データを読み
   込み、 各フレームメモリと制御メモリから対応する画素データ
   と合成制御命令データの１水平走査線分のデータをそれ
   ぞれの第２のラインバッファに読み込み、 各画素単位で映像合成の演算を行い、合成映像データを
   １水平走査線分を第３のラインバッファに転送し、 表示装置の描画速度で出力することを特徴とする映像合
   成演算処理方法。
4. 【請求項４】 請求項１の映像合成演算処理装置と、 背景、道具、俳優という画面を構成する各素材を撮影す
   る撮影装置と、 該撮影装置で撮影した各素材映像とを用いて最終的な合
   成映像を作り出すための演算処理手順を作り出す合成制
   御命令データ作成装置とを具備した映像合成演算処理シ
   ステムであって、 各素材映像信号と合成制御命令データ作成装置の合成制
   御命令データ出力とを該映像合成演算処理装置に入力す
   ることを特徴とする映像合成演算処理システム。
5. 【請求項５】 請求項１の映像合成演算処理装置と、 利用者を撮影する撮影装置と、 背景、道具、俳優という画面を構成する各素材撮影を記
   録した記録再生装置と、 記録再生装置から得られた素
   材映像と利用者の撮影映像とを用いて最終的な合成映像
   を作り出すための演算処理手順を作り出す合成映像制御
   命令データ作成装置とを具備した映像合成演算処理シス
   テムであって、 各素材映像信号と合成制御命令データ作成装置の合成制
   御命令データ出力とを該映像合成演算処理装置に入力す
   ることを特徴とする映像合成演算処理システム。
6. 【請求項６】 請求項１の映像合成演算処理装置と、 利用者を撮影する撮影装置と、 利用者を撮影した素材映像信号の各画素を有効とするか
   否かの合成制御データを作成する回路装置と、 背景、道具、俳優という画面を構成する各素材の映像信
   号及びこれらの素材映像信号の各画素を有効とするか否
   かを表す合成制御データの放送を受信する受信装置と、 受信装置から得られた素材映像、利用者の撮影映像及び
   上記２個の合成制御データを用いて最終的な合成映像を
   作り出すための演算処理手順を作り出す合成映像制御命
   令データ作成装置とを具備し、各素材映像信号と合成制
   御命令データ作成装置の合成制御命令データ出力とを該
   映像合成演算処理装置に入力することを特徴とする映像
   合成演算処理システム。
7. 【請求項７】 請求項１の映像合成演算処理装置と、 映像合成演算処理装置の入力側に設けられ、複数の入力
   映像信号及び該映像信号の各画素を有効とするか否かを
   表す合成制御データのアドレス部を加工するアドレス加
   工処理部と、 アドレス加工された合成制御データを入力し、最終的な
   合成映像を作り出すための演算処理手順を作り出す合成
   制御命令データ作成装置と、 視聴者の位置を検知する位置センサと、 位置センサの検知信号をアドレス加工処理部にフィード
   バックして入力映像のアドレス部を制御するフィードバ
   ック信号線とを具備し、各素材映像信号と合成制御命令
   データ作成装置の合成制御命令データ出力とを該映像合
   成演算処理装置に入力することを特徴とする映像合成演
   算処理システム。。
8. 【請求項８】 同一の複数の映像信号をそれぞれ入力と
   する２個の請求項１の映像合成演算処理装置と、 該２個の映像合成演算処理装置の入力側にそれぞれ設け
   られ、複数の入力映像信号及び合成制御データのアドレ
   ス部を加工する２個のアドレス加工処理部と、 アドレス加工された合成制御データを入力し、最終的な
   合成映像を作り出すための演算処理手順を作り出す合成
   制御命令データ作成装置と、を具備し、上記２個のアド
   レス部の差は２個のアドレス加工処理部により２個の合
   成映像信号が視聴者の両眼視差となるように設定され、
   各素材映像信号と合成制御命令データ作成装置の合成制
   御命令データ出力とを該映像合成演算処理装置に入力さ
   れることを特徴とする映像合成演算処理システム。
9. 【請求項９】 同一の複数の映像信号をそれぞれ入力と
   する２個の請求項１の映像合成演算処理装置と、 一つの映像合成演算処理装置の入力側に設けられ、複数
   の入力映像信号の映像データ及び合成制御データのアド
   レス部を加工する個のアドレス加工処理部と、 アドレス加工された合成制御データを入力し、最終的な
   合成映像を作り出すための演算処理手順を作り出す合成
   制御命令データ作成装置と、 を具備し、アドレス加工処理部により２個の合成映像信
   号が視聴者の両眼視差となるように設定され、各素材映
   像信号と合成制御命令データ作成装置の合成制御命令デ
   ータ出力とを該映像合成演算処理装置に入力されること
   を特徴とする映像合成演算処理システム。