JP2001126085A - 画像生成システム、画像表示システム、画像生成プログラムを記録したコンピュータ読み取り可能な記録媒体および画像生成方法 - Google Patents

Abstract

(57)【要約】 【課題】 記憶容量の小さい汎用計算機であっても、曲
面部分と動きを持つ仮想物体をリアルに表示でき、オペ
レータの意志により変更可能な画像を生成し、表示す
る。 【解決手段】 仮想三次元空間内に配置される仮想視点
を定義する視点定義手段と、上記仮想三次元空間内に表
示される仮想物体を定義するとともに、上記仮想三次元
空間内に配置され、動画が投影される仮想パネルを上記
仮想視点及び上記仮想物体に基づいて定義する仮想パネ
ル定義手段と、上記仮想視点に基づいて複数の動画から
上記仮想パネルに投影される動画を選択する動画選択手
段と、上記仮想パネルを上記仮想三次元空間内に配置
し、当該仮想パネルに上記選択された動画を投影して、
上記仮想視点からの画像を生成する仮想三次元空間画像
生成手段とを有する画像生成装置と、上記画像生成装置
に上記複数の動画を出力する動画出力装置とを備えたも
のである。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、コンピュータ・
グラフィクスに基づく仮想三次元空間の画像を生成する
画像生成システム、当該画像生成システムで生成された
画像を表示する画像表示システム、上記画像を生成する
画像生成プログラムを記録したコンピュータ読み取り可
能な記録媒体および上記画像を生成する画像生成方法に
関するものである。

【０００２】

【従来の技術】コンピュータ・グラフィクス、特に、オ
ペレータの意志によって自由かつ滑らかに視点移動をす
ることのできるリアルタイム・コンピュータ・グラフィ
クス（以下、リアルタイムＣＧ）において、曲面部分と
動きを持つ人間などの物体を、リアルに表現する方法が
求められている。リアルタイムＣＧにおける仮想物体
は、ポリゴンと呼ばれる平面多角形を三次元的に組み合
わせ、それらのポリゴンに色を付けたり写真を貼ったり
することによって表示される。また、ポリゴンの幾何形
状や位置を変化させることによって、その仮想物体に動
きを与えることができる。

【０００３】一般に、機械など人工の物体の場合は、数
十から数千までのポリゴンによってリアルな表示を行う
ことができる。しかし、人間や動植物など、多くの曲面
部分を持つ物体の場合は、曲面をポリゴンによって近似
しなければならないので、リアルな表示を行うためには
数十万を超えるポリゴンが必要となる。ところが、ポリ
ゴンの数が多くなるほど計算機の計算負荷が大きくなる
ので、現在までに普及している汎用計算機を使ってリア
ルタイムＣＧを動作させるためには、数千程度までポリ
ゴン数を減少させなければならない。このため、汎用計
算機上では人間や動植物などをリアルに表示することが
できないとう問題があった。これまでに、この問題の解
決することを目標とするいくつか技術が開示されてい
る。

【０００４】例えば、特開平１０−２２２６９２号公報
では、リアルタイムＣＧによって作られた仮想的な三次
元空間（以下、仮想三次元空間）内に、動きのある人物
などを表示する方法が記載されている。これによると、
人物の表示において、人物をポリゴンによって構成する
のではなく、実写ビデオやコンピュータ・グラフィクス
から作ったアニメーションデータを利用する。実施の方
法は次の通りである。はじめに、物体を上下／前後／右
左の６方向から見た場合のアニメーションデータを用意
する。次に、仮想三次元空間内の物体のあるべき位置
に、６つの長方形のポリゴンからなる直方体を配置す
る。次に、上記６つのポリゴンのうち、仮想三次元空間
内の仮想視点から物体へ伸ばした線分の方向と最も近い
法線ベクトルを持つポリゴンを選択する。続いて、選択
したポリゴンだけを可視状態にして、予め用意したアニ
メーションデータを投影する。このとき、選択した面
（ポリゴン）が前面である場合は、前方向から見た場合
のアニメーションデータを選択して投影する。この方法
によれば、物体のリアルなアニメーションデータをいず
れかのポリゴンに投影して物体のリアルタイムＣＧを生
成することにより、ポリゴン数を増加させずに物体をリ
アルに表示することができる。また、動きを持つ物体を
表示することもできる。

【０００５】また、例えば、特開平１０−２２２６９６
号公報では、リアルタイムＣＧにおいて、複雑な人体の
内部構造などを表示する方法が記載されている。これに
よると、人体の内部構造などの表示において、人体の内
部構造をポリゴンによって構成するのではなく、写真や
コンピュータ・グラフィクスから作った画像を使用す
る。実施の方法は次の通りである。はじめに、物体を中
心として、上下／前後／右左など複数の方向から見た場
合の画像データの集まりを予め用意しておく。次に、仮
想三次元空間内の物体のあるべき位置に、仮想三次元空
間内の仮想視点に対して常に正面を向くように、１枚の
長方形のポリゴンを配置する。次に、仮想視点から物体
を見た方向と最も近い方向から見た場合の画像データ
を、予め用意しておいた画像データの中から選択する。
続いて、選択した画像データを前述のポリゴンに投影す
る。この方法を利用すれば、物体のリアルな画像データ
をポリゴンに投影して物体のリアルタイムＣＧを生成す
ることにより、ポリゴン数を増加させずに物体をリアル
に表示することができる。

【０００６】

【発明が解決しようとする課題】しかしながら従来は、
予め用意したアニメーションデータや画像データを記憶
手段に記憶させておく必要があるため、上記アニメーシ
ョンデータ又は画像データの情報量が膨大である場合に
は、現在までに普及している記憶容量の少ない汎用計算
機上でリアルタイムＣＧによる画像を生成することがで
きないという問題があった。例えば、オペレータの意志
による視点移動に対応してより滑らかに、より自由に、
よりリアルに、仮想物体を表示させるためには、その程
度に応じて上記アニメーションデータ又は画像データの
情報量を増加させる必要があるが、記憶容量の少ない現
在の汎用計算機では膨大な情報量を記憶することができ
ないため画像を生成することができなかった。

【０００７】また、予め用意し記憶させておいたアニメ
ーションデータ又は画像データからポリゴンに投影する
ものを選択するため、その記憶内容の範囲でしか画像を
生成することができないという問題があった。

【０００８】また、仮想三次元空間内の所定位置に配置
された物体に対する仮想視点をオペレータの意志により
変更した場合の画像を生成して表示するものであり、仮
想物体自体の位置や向きをオペレータの意志により変更
した場合の画像を生成することができないという問題が
あった。

【０００９】本発明は上記のような問題点を解決するた
めになされたもので、記憶容量の小さい汎用計算機であ
っても、曲面部分と動きを持つ人間や動植物などの物体
をリアルに表示できる画像を生成すること、及び、その
画像を表示することを目的としている。

【００１０】また、アニメーションデータや画像データ
を予め作成し、汎用計算機上に記憶しておかなくても、
曲面部分と動きを持つ人物などの物体をリアルに表示で
きる画像を生成すること、及び、その画像を表示するこ
とを目的としている。

【００１１】また、仮想物体自体の位置や向きをオペレ
ータの意志により変更した場合の画像を生成すること、
及び、その画像を表示することを目的としている。

【００１２】

【課題を解決するための手段】この発明に係る画像生成
システムは、コンピュータ・グラフィックスに基づく仮
想三次元空間の画像を生成するものであって、上記仮想
三次元空間内に配置される仮想視点を定義する視点定義
手段と、上記仮想三次元空間内に表示される仮想物体を
定義するとともに、上記仮想三次元空間内に配置され、
動画が投影される仮想パネルを上記仮想視点及び上記仮
想物体に基づいて定義する仮想パネル定義手段と、上記
視点定義手段に定義された仮想視点に基づいて複数の動
画から上記仮想パネルに投影される動画を選択する動画
選択手段と、上記仮想パネル定義手段に定義された仮想
パネルを上記仮想三次元空間内に配置し、当該仮想パネ
ルに上記動画選択手段に選択された動画を投影して、上
記視点定義手段に定義された仮想視点からの画像を生成
する仮想三次元空間画像生成手段とを有する画像生成装
置と、上記画像生成装置に上記複数の動画を出力する動
画出力装置とを備えたものである。

【００１３】また、次の発明に係る画像生成システム
は、上記動画選択手段は、上記視点定義手段に定義され
た仮想視点及び上記仮想パネル定義手段に定義された仮
想物体に基づいて複数の動画から上記仮想パネルに投影
される動画を選択するように構成されたものである。

【００１４】さらにまた、次の発明に係る画像生成シス
テムは、コンピュータ・グラフィックスに基づく仮想三
次元空間の画像を生成するものであって、上記仮想三次
元空間内に配置される仮想視点を定義する視点定義手段
と、上記仮想三次元空間内に表示される仮想物体を定義
するとともに、上記仮想三次元空間内に配置され、動画
が投影される仮想パネルを上記仮想視点及び上記仮想物
体に基づいて定義する仮想パネル定義手段と、上記仮想
パネル定義手段に定義された仮想パネルを上記仮想三次
元空間内に配置し、当該仮想パネルに動画を投影して、
上記視点定義手段に定義された仮想視点からのコンピュ
ータ・グラフィックスに基づく仮想三次元空間の画像を
生成する仮想三次元空間画像生成手段とを有する画像生
成装置と、上記視点定義手段に定義された仮想視点に基
づいて上記仮想パネルに投影される動画を出力する動画
出力装置とを備えたものである。

【００１５】また、次の発明に係る画像生成システム
は、上記動画出力装置は、上記視点定義手段に定義され
た仮想視点及び上記仮想パネル定義手段に定義された仮
想物体に基づいて上記仮想パネルに投影される動画を出
力するように構成されたものである。

【００１６】また、次の発明に係る画像生成システム
は、上記視点定義手段は、上記仮想視点の定義を変更可
能に構成されたものである。

【００１７】また、次の発明に係る画像生成システム
は、上記仮想パネル定義手段は、上記仮想物体の定義を
変更可能に構成されたものである。

【００１８】また、次の発明に係る画像生成システム
は、上記動画出力装置は、被写体の周囲に配置され、一
色で塗りつぶされた囲いと、上記被写体の周囲に配置さ
れ、当該被写体を撮影した動画を出力するビデオカメラ
とを有した動画撮影装置としたものである。

【００１９】また、次の発明に係る画像生成システム
は、上記動画出力装置から出力される動画の種類を予め
入力され、当該動画の種類に応じて、上記視点定義手段
に定義される仮想視点又は上記仮想パネル定義手段に定
義される仮想物体の定義範囲を制御する定義範囲制御手
段を備えたものである。

【００２０】さらにまた、次の発明に係る画像生成シス
テムは、コンピュータ・グラフィックスに基づく仮想三
次元空間の画像を生成するものであって、上記仮想三次
元空間内に配置される仮想視点を定義する視点定義手段
と、上記仮想三次元空間内に表示される仮想物体を定義
する物体定義手段と、上記視点定義手段に定義された仮
想視点からのコンピュータ・グラフィックスに基づく仮
想三次元空間の画像を生成する仮想三次元空間画像生成
手段と、上記視点定義手段に定義された仮想視点に基づ
いて動画を出力する動画出力装置と、上記仮想三次元空
間画像生成手段で生成された画像と上記動画出力装置か
ら出力された動画とを合成した画像を生成する画像合成
手段を備えたものである。

【００２１】また、次の発明に係る画像生成システム
は、上記動画出力装置は、上記視点定義手段に定義され
た仮想視点及び上記物体定義手段に定義された仮想物体
に基づいて動画を生成するように構成されたものであ
る。

【００２２】また、次の発明に係る画像生成システム
は、上記視点定義手段は、上記仮想視点の定義を変更可
能に構成されたものである。

【００２３】また、次の発明に係る画像生成システム
は、上記物体定義手段は、上記仮想物体の定義を変更可
能に構成されたものである。

【００２４】さらにまた、次の発明に係る画像表示シス
テムは、右目用の仮想三次元空間画像及び左目用の仮想
三次元空間画像を生成する上記画像生成システムと、当
該画像生成システムで生成された上記右目用の仮想三次
元空間画像を右目にて、上記画像生成システムで生成さ
れた左目用の仮想三次元空間画像を左目にて同時に視認
可能に表示する表示装置とを備えたものである。

【００２５】さらにまた、次の発明に係る画像生成プロ
グラムを記録したコンピュータ読取可能な記憶媒体は、
コンピュータ・グラフィックスに基づく仮想三次元空間
の画像を生成する画像生成プログラムを記録したコンピ
ュータ読取可能な記憶媒体であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義手順と、
上記仮想三次元空間内に表示される仮想物体を定義する
とともに、上記仮想三次元空間内に配置され、動画が投
影される仮想パネルを上記仮想視点及び上記仮想物体に
基づいて定義する仮想パネル定義手順と、上記視点定義
手順で定義された仮想視点に基づいて、複数の動画を出
力する動画出力装置から出力された上記複数の動画から
上記仮想パネルに投影される動画を選択する動画選択手
順と、上記仮想パネル定義手順で定義された仮想パネル
を上記仮想三次元空間内に配置し、当該仮想パネルに上
記動画選択手順で選択された動画を投影して、上記視点
定義手順で定義された仮想視点からの画像を生成する仮
想三次元空間画像生成手順とを実行させるためのプログ
ラムを記録したコンピュータ読取可能な記録媒体であ
る。

【００２６】さらにまた、次の発明に係る画像生成プロ
グラムを記録したコンピュータ読取可能な記憶媒体は、
コンピュータ・グラフィックスに基づく仮想三次元空間
の画像を生成する画像生成プログラムを記録したコンピ
ュータ読取可能な記憶媒体であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義手順と、
上記仮想三次元空間内に表示される仮想物体を定義する
とともに、上記仮想三次元空間内に配置され、動画が投
影される仮想パネルを上記仮想視点及び上記仮想物体に
基づいて定義する仮想パネル定義手順と、上記仮想パネ
ル定義手順で定義された仮想パネルを上記仮想三次元空
間内に配置し、当該仮想パネルに上記視点定義手順で定
義された仮想視点に基づいて動画出力装置から出力され
た動画を投影して、上記視点定義手順で定義された仮想
視点からのコンピュータ・グラフィックスに基づく仮想
三次元空間の画像を生成する仮想三次元空間画像生成手
順とを実行させるためのプログラムを記録したコンピュ
ータ読取可能な記録媒体である。

【００２７】さらにまた、次の発明に係る画像生成プロ
グラムを記録したコンピュータ読取可能な記憶媒体は、
コンピュータ・グラフィックスに基づく仮想三次元空間
の画像を生成する画像生成プログラムを記録したコンピ
ュータ読取可能な記憶媒体であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義手順と、
上記仮想三次元空間内に表示される仮想物体を定義する
物体定義手順と、上記視点定義手順で定義された仮想視
点からのコンピュータ・グラフィックスに基づく仮想三
次元空間の画像を生成する仮想三次元空間画像生成手順
と、上記仮想三次元空間画像生成手順で生成された画像
と上記視点定義手順で定義された仮想視点に基づいて動
画出力装置から出力された動画とを合成した画像を生成
する画像合成手順とを実行させるためのプログラムを記
録したコンピュータ読取可能な記録媒体である。

【００２８】さらにまた、次の発明に係る画像生成方法
は、コンピュータ・グラフィックスに基づく仮想三次元
空間の画像を生成する方法であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義工程と、
上記仮想三次元空間内に表示される仮想物体を定義する
とともに、上記仮想三次元空間内に配置され、動画が投
影される仮想パネルを上記仮想視点及び上記仮想物体に
基づいて定義する仮想パネル定義工程と、上記視点定義
工程で定義された仮想視点に基づいて、複数の動画を出
力する動画出力装置から出力された上記複数の動画から
上記仮想パネルに投影される動画を選択する動画選択工
程と、上記仮想パネル定義工程で定義された仮想パネル
を上記仮想三次元空間内に配置し、当該仮想パネルに上
記動画選択工程で選択された動画を投影して、上記視点
定義工程で定義された仮想視点からの画像を生成する仮
想三次元空間画像生成工程とを含んだものである。

【００２９】さらにまた、次の発明に係る画像生成方法
は、コンピュータ・グラフィックスに基づく仮想三次元
空間の画像を生成する方法であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義工程と、
上記仮想三次元空間内に表示される仮想物体を定義する
とともに、上記仮想三次元空間内に配置され、動画が投
影される仮想パネルを上記仮想視点及び上記仮想物体に
基づいて定義する仮想パネル定義工程と、上記仮想パネ
ル定義工程で定義された仮想パネルを上記仮想三次元空
間内に配置し、当該仮想パネルに上記視点定義工程で定
義された仮想視点に基づいて動画出力装置から出力され
た動画を投影して、上記視点定義工程で定義された仮想
視点からのコンピュータ・グラフィックスに基づく仮想
三次元空間の画像を生成する仮想三次元空間画像生成工
程とを含んだものである。

【００３０】さらにまた、次の発明に係る画像生成方法
は、コンピュータ・グラフィックスに基づく仮想三次元
空間の画像を生成する方法であって、上記仮想三次元空
間内に配置される仮想視点を定義する視点定義工程と、
上記仮想三次元空間内に表示される仮想物体を定義する
物体定義工程と、上記視点定義工程で定義された仮想視
点からのコンピュータ・グラフィックスに基づく仮想三
次元空間の画像を生成する仮想三次元空間画像生成工程
と、上記仮想三次元空間画像生成工程で生成された画像
と上記視点定義工程で定義された仮想視点に基づいて動
画出力装置から出力された動画とを合成した画像を生成
する画像合成工程とを含んだものである。

【００３１】

【発明の実施の形態】以下、図を用いてこの発明に係る
画像生成システムの実施の形態を詳細に説明する。

【００３２】実施の形態１．図１は、この発明の実施の
形態１による画像生成システムの構成を示す構成図であ
る。この画像生成システムは、各種プログラムと、これ
らプログラムの動作する汎用計算機と、周辺機器と、動
画撮影装置から構成されている。

【００３３】１は、仮想三次元空間の画像を生成する画
像生成装置であり、ここでは、各種プログラムを動作さ
せる汎用計算機である。２は、オペレータが操作した操
作信号を上記汎用計算機１に入力する入力装置のマウス
である。３は、上記汎用計算機１で生成された仮想三次
元空間の画像を表示する表示装置のディスプレイであ
る。

【００３４】４は、仮想三次元空間内に配置される仮想
視点を定義する視点定義プログラムであり、視点定義手
段に相当する。ここでは上記仮想三次元空間における仮
想視点の位置を定義する。また、ここでは上記仮想視点
の定義を変更可能に構成され、上記マウス２から入力さ
れたオペレータによる操作信号に基づいて上記仮想視点
の定義を変更する。

【００３５】５は、上記仮想三次元空間内に表示される
仮想物体を定義するとともに、上記仮想三次元空間内に
配置され、動画が投影される仮想パネルを上記仮想視点
及び上記仮想物体に基づいて定義する仮想パネル定義プ
ログラムであり、仮想パネル定義手段に相当する。ここ
では、上記仮想三次元空間における仮想物体の位置及び
向きを定義するとともに、上記視点定義プログラム４に
定義された仮想視点に基づいて上記仮想パネルの向きを
定義し、上記仮想物体の位置に基づいて上記仮想パネル
の位置を定義する。また、ここでは上記仮想物体の定義
を変更可能に構成され、上記マウス２から入力されたオ
ペレータによる操作信号に基づいて上記仮想物体の定義
を変更する。

【００３６】６は、上記視点定義プログラム４に定義さ
れた仮想視点に基づいて複数の動画から上記仮想パネル
に投影される動画を選択する動画選択プログラムであ
り、動画選択手段に相当する。ここでは、上記視点定義
プログラム４に定義された仮想視点及び上記仮想パネル
定義プログラム５に定義された仮想物体に基づいて複数
の動画から上記仮想パネルに投影される動画を選択す
る。

【００３７】７は、リアルタイムＣＧを使って仮想三次
元空間を汎用計算機１中に作成し、上記仮想パネル定義
プログラム５に定義された仮想パネルを上記仮想三次元
空間内に配置し、当該仮想パネルに上記動画選択プログ
ラム６に選択された動画を投影して、上記視点定義プロ
グラム４に定義された仮想視点からの画像を生成するＣ
Ｇプログラムであり、仮想三次元空間画像生成手段に相
当する。

【００３８】８は上記仮想パネルに投影される複数の動
画を撮影し、上記汎用計算機１に出力する動画撮影装置
であり、動画出力装置に相当する。

【００３９】ＣＧプログラム７は、OpenGL等のグラフィ
ックスライブラリを使って製作された、計算機上に仮想
三次元空間を作成し、仮想視点からの画像を生成するプ
ログラムで、一般的なものである。このＣＧプログラム
７は、仮想三次元空間の画像をディスプレイ３に表示す
ることができる。また、オペレータがマウス２を操作す
ることによって、視点定義プログラムの定義内容を変更
し、仮想三次元空間内の仮想視点の配置を変更すること
ができる。

【００４０】はじめに、図２を使って、一般的な仮想三
次元空間の画像を生成する様子について説明する。図２
は、仮想三次元空間画像の生成を説明する説明図であ
り、前述の図と同一部分に同一符号を付し説明を省略す
る。

【００４１】まず、ＣＧプログラム７を起動すると、図
２に示したような、仮想三次元空間１００が作成され
る。平行四辺形に見える平面状の物体は、現実空間の床
に相当する面の例である。大小２つの球状の仮想物体Ａ
１０１、仮想物体Ｂ１０２は、仮想三次元空間中に配置
された建物などの仮想物体の例である。

【００４２】次に、視点定義プログラム４によって仮想
視点が定義されると、上記仮想三次元空間内にその仮想
視点が配置され、当該仮想視点からの仮想三次元空間画
像１０３が生成される。このとき、オペレータがマウス
２を操作して、所定の操作信号を入力すると、視点定義
プログラム４によって上記仮想視点の定義が変更され、
上記操作信号に対応した異なる仮想視点からの画像が得
られる。

【００４３】ＣＧプログラム７は、仮想視点からの画像
を１秒間に１０回程度更新するので、仮想視点を自由に
滑らかに移動することによって、あたかも仮想三次元空
間内を歩き回ったときのような画像を生成することがで
きる。

【００４４】以下、本発明の実施の形態１の動作につい
て図３を使って説明する。図３は、実施の形態１による
画像生成システムの詳細な構成を示す詳細構成図であ
る。前述の図と同一部分に同一符号を付し説明を省略す
る。なお、図３は、仮想パネル定義プログラム５、動画
選択プログラム６、動画撮影装置８を、図２の装置に加
えた構成になっている。また、ここでは例として、仮想
三次元空間中に仮想物体として人物を表示するものと
し、これを人物オブジェクトと呼ぶものとする。

【００４５】まず、視点定義プログラム４は、仮想三次
元空間内に配置される仮想視点の位置を定義する。そし
て、仮想パネル定義プログラム５は、上記仮想三次元空
間内に配置される人物オブジェクトの上記仮想三次元空
間における位置及び向きを定義すると共に、上記視点定
義プログラム４に定義された仮想視点の位置情報を受け
取って、仮想パネルが常に上記仮想視点に対して正面を
向くように、仮想パネルの向きを定義し、上記人物オブ
ジェクトの位置と同一となるように、仮想パネルの位置
を定義する。

【００４６】すると、ＣＧプログラム７は、上記仮想パ
ネル定義プログラム５に定義された上記仮想パネルの位
置及び向きに基づいて、仮想三次元空間中に１枚の長方
形のポリゴンからなる仮想パネル１０４を配置する。
尚、仮想三次元空間において、ＸＹＺの３軸による直角
座標と、Ｚ軸の正方向を基準にしてＹ軸を中心とした反
時計回りの方角φを定義する。床に相当する面をＸＺ平
面、上に相当する向きをＹ軸の正方向とする。ここで便
宜上、仮想パネル１０４は、下辺の中点（以下、基準点
と呼ぶ）を人物オブジェクトの位置のＸＺ平面上の座標
と一致させ、またＸＺ平面に垂直に配置されるものとす
る。また、仮想パネル１０４の縦横サイズは一定である
とする。

【００４７】一方、動画撮影装置８は、被写体である人
物の周りに被写体正面の位置を０゜とし、反時計回りに
１０゜おきに配置された３６台のビデオカメラと、人物
の周りを青色で塗りつぶした壁（一般にブルーバックと
呼ばれている）とで構成され、青色で塗りつぶした壁に
開けた小穴を通して、複数のビデオカメラによって同時
に複数方向から被写体を撮影する。なおここでは、映像
制作において一般的に行われているように、動画中の青
色の部分を除去する画像処理を行うことにより、動画中
の被写体以外の部分を透明にした動画が出力されるもの
とする。

【００４８】すると、動画選択プログラム６は、上記動
画撮影装置８の３６台のビデオカメラによって撮影され
ている動画の中から１つを選択し、上記ＣＧプログラム
７は、その動画を仮想三次元空間中に配置した仮想パネ
ル１０４に投影する。選択される動画は、視点定義プロ
グラム４と仮想パネル定義プログラム５の定義内容を、
次の式(1)に当てはめることによって決定される。

【００４９】 φm=int((mod(360-(φp-φv),360)+5)/10)*10 ・・・ (1)

【００５０】ただし、φｐは仮想三次元空間中の人物オ
ブジェクトの向いている方角（人物オブジェクトの向
き）、φｖは人物オブジェクトの基準点（人物オブジェ
クトの位置）からの仮想視点の方角、φｍは選択される
動画を撮影しているビデオカメラの位置である。また、
int(a)は、数値aの整数部分を返す関数、mod(b,c)は、
数値ｂを数値cで割ったときの余りを返す関数であると
する。例えば、図３のように、人物オブジェクトの向い
ている方角φｐが４３゜、人物オブジェクトの基準点か
らの仮想視点の方角φｖが１１゜であったとすると、φ
ｍは３３０゜と計算されるので、動画が動画選択プログ
ラム６は、人物が３３０゜方向から撮影されている動画
を選択する。

【００５１】そして、上記ＣＧプログラム７は、上記仮
想パネル定義プログラム５の定義に基づいて配置した仮
想パネル１０４に、上記動画選択プログラム６によって
選択された動画を投影して、上記視点定義プログラム４
に定義された仮想視点からの画像を生成し、当該仮想三
次元空間の画像をディスプレイ３に表示する。このよう
に、仮想視点の位置及び人物オブジェクトの位置と向き
に応じて撮影中の動画が選択され、仮想パネル１０４に
投影されて仮想三次元空間の画像が生成されるので、汎
用計算機１に膨大な記憶容量がない場合でもリアルな人
物オブジェクトを表示することができる。

【００５２】また、ここでオペレータが仮想視点の位置
を変更するためにマウス２を操作すると、その操作信号
は上記視点定義プログラム４に入力され、当該視点定義
プログラム４は上記操作信号に応じて仮想視点の定義を
変更する。例えば、図３の状態から仮想視点を人物オブ
ジェクトの右の方へ、定量的に言えば、人物オブジェク
トの基準点から仮想視点の方角φｖを１１゜から５６゜
に変更したとする。

【００５３】すると、上記動画選択プログラム６は、上
記変更された仮想視点の位置情報を視点定義プログラム
４から受け取って、φｍを（１）式から再計算する。φ
ｍの値は、１０゜と計算されるので、上記動画選択プロ
グラム６は、上記動画撮影装置８で撮影されている１０
゜の動画を選択する。また、上記仮想パネル定義プログ
ラム５は、上記視点定義プログラム４によって変更され
た仮想視点の定義に基づいて、仮想パネルが上記仮想視
点に対して正面を向くように、仮想パネルの定義を変更
する。

【００５４】そして、上記ＣＧプログラム７は、上記仮
想パネル定義プログラム５の定義に基づいて配置した仮
想パネル１０４に、上記動画選択プログラム６によって
選択された動画を投影して、上記視点定義プログラム４
に定義された仮想視点からの画像を生成し、当該仮想三
次元空間の画像をディスプレイ３に表示する。

【００５５】このように、仮想視点の位置に変化があっ
た場合でも、次々に適当な動画が選択されて仮想パネル
１０４に投影されて仮想三次元空間の画像が生成される
ので、あたかもポリゴンで構成された仮想物体であるか
のように、視点移動に追従して見え方の変わる人物オブ
ジェクトを表示することができる。

【００５６】また、ここでオペレータが人物オブジェク
トの位置や向きを変更するためにマウス２を操作する
と、その操作信号は上記仮想パネル定義プログラム５に
入力され、当該仮想パネル定義プログラム５は上記操作
信号に応じて人物オブジェクトの定義及び仮想パネルの
定義を変更する。例えば、図３の状態から人物オブジェ
クトの方角を右回りに、定量的に言えば、人物オブジェ
クトの向いている方角φｐを４３゜から３５０゜に変更
したとする。この場合、人物オブジェクトの位置は変更
されないので、仮想パネルの定義は変更しない。人物オ
ブジェクトの位置が変更された場合には、仮想パネルの
位置の定義を上記人物オブジェクトの位置に合わせて変
更するとともに、上記仮想視点に対して正面を向くよう
に、仮想パネルの向きの定義を変更する。

【００５７】人物オブジェクトの定義が変更されると、
上記動画選択プログラム６は、上記変更された人物オブ
ジェクトの定義、ここでは、人物オブジェクトの向いて
いる方角（人物オブジェクトの向き）の情報を仮想パネ
ル定義プログラム５から受け取り、φｍを（１）式から
再計算する。φｍの値は２０゜と計算されるので、上記
動画選択プログラム６は、上記動画撮影装置８で撮影さ
れている２０゜の動画を選択する。

【００５８】そして、上記ＣＧプログラム７は、上記仮
想パネル定義プログラム５の定義に基づいて配置した仮
想パネル１０４に、上記動画選択プログラム６によって
選択された動画を投影して、上記視点定義プログラム４
に定義された仮想視点からの画像を生成し、当該仮想三
次元空間の画像をディスプレイ３に表示する。

【００５９】このように、人物オブジェクトの方角や位
置に変化があった場合でも、次々に適当な動画が選択さ
れて仮想パネル１０４に投影されて仮想三次元空間の画
像が生成されるので、あたかもポリゴンで構成されたオ
ブジェクトであるかのように、位置や方角の変化に追従
して見え方の変わる人物オブジェクトを表示することが
できる。

【００６０】以上のように実施の形態１によれば、仮想
物体として仮想三次元空間に表示される人物を複数方向
から撮影している複数の動画から仮想視点及び人物オブ
ジェクトの定義に応じた動画を選択し、上記仮想視点及
び人物オブジェクトの定義に基づいて定義して仮想三次
元空間に配置した仮想パネルに上記選択した撮影中の動
画を投影して、上記仮想視点からの画像を生成すること
により、動画を汎用計算機内に記憶せずに仮想三次元空
間画像を生成できるので、記憶容量の小さい汎用計算機
であっても、曲面部分と動きを持つ人間や動植物などの
物体をリアルに表示できる画像を生成することができ
る。また、例えば、動画撮影装置の処理速度と汎用計算
機の処理速度とが異なるために、上記動画撮影装置で撮
影された動画を上記汎用計算機内で一時記憶する場合に
おいても、３６台分の動画のうち選択された１台分の動
画のみを一時記憶すれば良く、記憶容量の小さい汎用計
算機であっても曲面部分と動きを持つ人間や動植物など
の物体をリアルに表示できる画像を生成することができ
る。

【００６１】また、オペレータによる操作信号に基づい
て仮想視点の定義を変更するとともに、人物オブジェク
トの定義及び上記変更した仮想視点の定義に基づいて動
画を選択し直し、上記人物オブジェクトの定義及び上記
変更した仮想視点の定義に基づいて定義を変更した仮想
パネルに上記選択した動画を投影して、上記仮想視点か
らの画像を生成することにより、仮想視点の位置に変化
があった場合でも、次々に適当な動画が選択されて仮想
三次元空間画像が生成されるので、あたかもポリゴンで
構成された仮想物体であるかのように、オペレータの意
志に応じた視点移動に追従して見え方の変わる人物オブ
ジェクトを表示できる画像を生成することができる。

【００６２】また、オペレータによる操作信号に基づい
て人物オブジェクトの位置の定義を変更するとともに、
仮想視点の定義及び上記変更した人物オブジェクトの位
置の定義に基づいて動画を選択し直し、上記仮想視点の
定義及び上記変更した人物オブジェクトの位置の定義に
基づいて定義を変更した仮想パネルに上記選択した動画
を投影して、上記仮想視点からの画像を生成することに
より、人物オブジェクトの位置に変化があった場合で
も、次々に適当な動画が選択されて仮想三次元空間画像
が生成されるので、あたかもポリゴンで構成された仮想
物体であるかのように、オペレータの意志に応じた人物
オブジェクトの移動に追従して見え方の変わる人物オブ
ジェクトを表示できる画像を生成することができる。

【００６３】また、オペレータによる操作信号に基づい
て人物オブジェクトの向きの定義を変更するとともに、
仮想視点の定義及び上記変更した人物オブジェクトの定
義に基づいて動画を選択し直し、仮想パネルに上記選択
した動画を投影して、上記仮想視点からの画像を生成す
ることにより、人物オブジェクトの向きに変化があった
場合でも、次々に適当な動画が選択されて仮想三次元空
間画像が生成されるので、あたかもポリゴンで構成され
た仮想物体であるかのように、オペレータの意志に応じ
た人物オブジェクトの向きの変化に追従して見え方の変
わる人物オブジェクトを表示できる画像を生成すること
ができる。

【００６４】また、動画撮像装置は、被写体である人物
の周りに配置された３６台のビデオカメラと、人物の周
りを青色で塗りつぶした壁（囲い）とで構成され、青色
で塗りつぶした壁に開けた小穴を通して、複数のビデオ
カメラによって同時に複数方向から被写体を撮影し、そ
の動画中の青色の部分を除去する画像処理を行うことに
より、被写体以外の部分を透明にした動画が出力される
ため、被写体である人物のみを仮想物体として表示でき
る画像を生成することができる。

【００６５】実施の形態２．以上の実施の形態１は、動
画出力装置として複数の動画を撮影する動画撮影装置を
用いた場合であるが、次に、動画出力装置として複数の
動画を生成する物である場合の実施の形態２を説明す
る。

【００６６】図４は、この発明の実施の形態２による画
像生成システムの構成を示す構成図である。図４は、図
１と同一又は相当部分に同一符号を付して示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機１と、マウス２、ディス
プレイ３の周辺機器と、数万を超えるポリゴンからなる
仮想オブジェクトの画像を高速に生成できる高性能計算
機９から構成される。上記高性能計算機９は動画出力装
置に相当する。視点定義プログラム４、仮想パネル定義
プログラム５、動画選択プログラム６、ＣＧプログラム
７は、実施の形態１と同様に、汎用計算機１上で実行さ
れるプログラムである。

【００６７】従来の技術で述べたように、仮想三次元空
間においてポリゴンを使った人物オブジェクトをリアル
に表示するには、数十万程度のポリゴンが必要である。
上記高性能計算機９は、このように多くのポリゴンによ
って構成される仮想オブジェクトの画像を、高速に生成
することのできる計算機である。例えば、米国シリコン
グラフィックス社の上位グラフィック・ワークステーシ
ョンがこれに相当する。

【００６８】以下、動作について説明する。まず、上記
高性能計算機９上に、リアルタイムＣＧによる仮想三次
元空間を作成し、数十万程度のポリゴンで構成された仮
想物体、例えば人物のポリゴンモデルを配置する。ま
た、この人物のポリゴンモデルに、歩く／踊るなどの動
作を与える。次に、高性能計算機９上の仮想三次元空間
内に複数の仮想視点を配置する。例えば、人物のポリゴ
ンモデルを中心として、人物のポリゴンモデルの正面か
ら反時計回りに１０゜おきに、３６個の仮想視点を円状
に配置する。ここで上記高性能計算機９は、３６個の高
性能計算機９における仮想視点から、３６種類の画像を
同時に生成する。この画像は、人物のポリゴンモデルに
は動作が定義されているので、動画となっている。これ
らの動画を、０゜〜３５０゜の動画と呼ぶものとする。

【００６９】一方、汎用計算機１における動作は、前述
の実施の形態１と同様である。動画撮影装置８によって
撮影される０゜〜３５０゜の動画の代わりに、高性能計
算機９によって生成される０゜〜３５０゜の動画から、
動画選択プログラム６が１つの動画を選択する。ＣＧプ
ログラム７は、選択された動画を仮想パネル１０４に投
影して、仮想視点からの画像を生成し、当該仮想三次元
空間の画像をディスプレイ３に表示する。

【００７０】ここで、オペレータが仮想視点又は人物オ
ブジェクトの定義を変更するためにマウス２を操作する
と、その操作信号は視点定義プログラム４又は仮想パネ
ル定義プログラム５に入力され、仮想三次元空間中の仮
想視点の定義又は人物オブジェクトの定義が変更され
る。すると、前述の実施の形態１と同様に、変更された
定義に基づいて、動画選択プログラム６は、直ちに異な
る動画を選択し、ＣＧプログラム７は選択された動画を
仮想パネル１０４に投影して画像を生成し、当該仮想三
次元空間の画像をディスプレイ３に表示する。

【００７１】このように、マウス２の操作による仮想視
点の位置や人物オブジェクトの向きや位置に変化があっ
た場合でも、次々に適当な動画が選択されて仮想パネル
１０４に投影されるので、あたかもポリゴンで構成され
たオブジェクトであるかのように、仮想視点の位置や人
物オブジェクトの向きや位置の変化に追従して見え方の
変わる人物オブジェクトを表示することができる。

【００７２】以上のように実施の形態２によれば、高性
能計算機で同時に生成されている動作を持つ人物のポリ
ゴンモデルに対する複数の仮想視点からの複数の動画か
ら、仮想視点及び人物オブジェクトの定義に応じた動画
を選択し、上記仮想視点及び人物オブジェクトの定義に
基づいて定義して仮想三次元空間に配置した仮想パネル
に上記選択した撮影中の動画を投影して、上記仮想視点
からの画像を生成することにより、動画を汎用計算機内
に記憶せずに仮想三次元空間画像を生成できるので、記
憶容量の小さい汎用計算機であっても、曲面部分と動き
を持つ人間や動植物などの物体をリアルに表示できる画
像を生成することができる。また、例えば、高性能計算
機の処理速度と汎用計算機の処理速度とが異なるため
に、上記高性能計算機で生成された動画を上記汎用計算
機内で一時記憶する場合においても、３６の動画のうち
選択された１つの動画のみを一時記憶すれば良く、記憶
容量の小さい汎用計算機であっても曲面部分と動きを持
つ人間や動植物などの物体をリアルに表示できる画像を
生成することができる。

【００７３】また、オペレータによる操作信号に基づい
て、前述の実施の形態と同様に、仮想視点の定義、人物
オブジェクトの定義、及び又は、仮想パネルの定義を変
更するとともに、変更した定義に基づいて動画を選択し
直し、仮想パネルに投影して、上記仮想視点からの画像
を生成することにより、仮想視点の位置、人物オブジェ
クトの位置、及び又は、人物オブジェクトの向きに変化
があった場合でも、次々に適当な動画が選択されて仮想
三次元空間画像が生成されるので、あたかもポリゴンで
構成された仮想物体であるかのように、オペレータの意
志に応じて見え方の変わる人物オブジェクトを表示でき
る画像を生成することができる。

【００７４】実施の形態３．以上の実施の形態２は、動
画出力装置として複数の動画を同時に生成する高性能計
算機を用いた場合であるが、次に、動画出力装置とし
て、仮想視点及び人物オブジェクトの定義に基づいて動
画を生成する高性能計算機を用いる場合の実施の形態３
を説明する。

【００７５】図５は、この発明の実施の形態３による画
像生成システムの構成を示す構成図である。図５は、図
１と同一又は相当部分い同一符号を付して示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機と、マウス２、ディスプ
レイ３の周辺機器と、数万を超えるポリゴンからなる仮
想オブジェクトの画像を高速に生成できる高性能計算機
９から構成される。上記高性能計算機９は、動画出力装
置に相当する。視点定義プログラム４、仮想パネル定義
プログラム５、ＣＧプログラム７は、実施の形態２と同
様に、汎用計算機１上で実行されるプログラムである。

【００７６】以下、動作について説明する。まず、実施
の形態２と同様に、この高性能計算機９上に、リアルタ
イムＣＧによる仮想三次元空間を作成し、数十万程度の
ポリゴンで構成された人物のポリゴンモデルを配置す
る。また、この人物のポリゴンモデルに、歩く／踊るな
どの動作を与える。次に、高性能計算機９は、汎用計算
機１の視点定義プログラム４に定義された仮想視点の位
置情報と、仮想パネル定義プログラム５に定義された人
物オブジェクトの位置と向きの情報を受け取る。続い
て、これらの情報から高性能計算機９は、仮想三次元空
間中の人物オブジェクトの向いている方角（人物オブジ
ェクトの向き）φｐ、人物オブジェクトの基準点（人物
オブジェクトの位置）からの仮想視点の方角φｖを得て
次の式(2)に代入し、φｍを算出する。

【００７７】 φm=mod(360-(φp-φv),360) ・・・ (2)

【００７８】次に高性能計算機９は、高性能計算機９上
の仮想三次元空間内に、人物のポリゴンモデルを中心と
した円周上で、正面から反時計回りにφｍの角度に高性
能計算機９上の仮想三次元空間内における仮想視点を配
置し、この仮想視点からの人物のポリゴンモデルの動画
を生成する。生成した動画を、汎用計算機１のＣＧプロ
グラム７が受け取り、前述の実施の形態と同様に仮想パ
ネル１０４に投影して、仮想視点からの画像を生成し、
当該仮想三次元空間の画像をディスプレイ３に表示す
る。

【００７９】ここで、オペレータが仮想視点又は人物オ
ブジェクトの定義を変更するためにマウス２を操作する
と、その操作信号は視点定義プログラム４又は仮想パネ
ル定義プログラム５に入力され、仮想三次元空間中の仮
想視点の定義又は人物オブジェクトの定義が変更され
る。すると、変更された定義に基づいて、上記高性能計
算機９は、直ちに高性能計算機９上の仮想三次元空間中
における仮想視点又は人物オブジェクトを再配置し、異
なる人物のポリゴンモデルの動画を生成する。そして、
この動画を汎用計算機１のＣＧプログラム７が受け取っ
て、仮想パネル１０４に投影して、仮想視点からの画像
を生成し、当該仮想三次元空間の画像をディスプレイ３
に表示する。

【００８０】このように、マウス２の操作による汎用計
算機１上の仮想三次元空間中の仮想視点の位置や人物オ
ブジェクトの方角や位置に変化があった場合でも、次々
に適当な動画が生成されて仮想パネル１０４に投影され
るので、あたかもポリゴンで構成されたオブジェクトで
あるかのように、仮想視点の位置や人物オブジェクトの
位置や方角の変化に追従して見え方の変わる人物オブジ
ェクトを表示することができる。

【００８１】以上のように実施の形態３によれば、汎用
計算機上の仮想視点及び人物オブジェクトの定義に基づ
いて高性能計算機で生成されている動作を持つ人物のポ
リゴンモデルの動画を、上記仮想視点及び人物オブジェ
クトの定義に基づいて定義して汎用計算機上の仮想三次
元空間に配置した仮想パネルに投影して、上記仮想視点
からの画像を生成することにより、動画を汎用計算機内
に記憶せずに仮想三次元空間画像を生成できるので、記
憶容量の小さい汎用計算機であっても、曲面部分と動き
を持つ人間や動植物などの物体をリアルに表示できる画
像を生成することができる。また、例えば、高性能計算
機の処理速度と汎用計算機の処理速度とが異なるため
に、上記高性能計算機で生成された動画を上記汎用計算
機内で一時記憶する場合においても、１つの動画のみを
一時記憶すれば良く、記憶容量の小さい汎用計算機であ
っても曲面部分と動きを持つ人間や動植物などの物体を
リアルに表示できる画像を生成することができる。

【００８２】また、オペレータによる操作信号に基づい
て、前述の実施の形態と同様に、仮想視点の定義、人物
オブジェクトの定義、及び又は、仮想パネルの定義を変
更するとともに、変更した定義に基づいて、高性能計算
機で生成されている動画を仮想パネルに投影して、上記
仮想視点からの画像を生成することにより、仮想視点の
位置、人物オブジェクトの位置、及び又は、人物オブジ
ェクトの向きに変化があった場合でも、次々に適当な動
画が投影されて仮想三次元空間画像が生成されるので、
あたかもポリゴンで構成された仮想物体であるかのよう
に、オペレータの意志に応じて見え方の変わる人物オブ
ジェクトを表示できる画像を生成することができる。

【００８３】実施の形態４．以上の実施の形態３は、動
画出力装置として、仮想視点及び人物オブジェクトの定
義に基づいて動画を生成する高性能計算機を用いた場合
であるが、次に、動画出力装置として、仮想視点及び人
物オブジェクトの定義に基づいて人物を撮影する可動式
動画撮影装置を用いる場合の実施の形態４を説明する。

【００８４】図６は、この発明の実施の形態４による画
像生成システムの構成を示す構成図である。図６は、図
１と同一又は相当部分に同一符号を付して示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機１と、マウス２、ディス
プレイ３の周辺機器と、動画出力装置に相当し、例えば
産業用ロボットのアームの先端にビデオカメラを取り付
け、ビデオカメラの位置を電気信号によって変更するこ
とのできる可動式動画撮影装置１０から構成される。視
点定義プログラム４、仮想パネル定義プログラム５、Ｃ
Ｇプログラム７は、実施の形態２と同様に、汎用計算機
１上で実行されるプログラムである。

【００８５】以下、動作について説明する。まず、可動
式動画撮影装置１０は、汎用計算機１の視点定義プログ
ラム４に定義された仮想三次元空間中の仮想視点の位置
情報と、仮想パネル定義プログラム５に定義された人物
オブジェクトの位置と向きの情報を受け取る。次に、こ
れらの情報から上記可動式動画撮影装置１０は、人物オ
ブジェクトの向いている方角（人物オブジェクトの向
き）φｐ、人物オブジェクトの基準点（人物オブジェク
トの位置）からの仮想視点の方角φｖを得て、実施の形
態３に示した(2)式からφｍを算出する。続いて、上記
可動式動画撮影装置１０は、被写体からφｍに相当する
方向にビデオカメラを移動して上記被写体を撮影する。
このビデオカメラで撮影されている動画を、上記汎用計
算機１のＣＧプログラム７が受け取り、前述の実施の形
態と同様に、仮想三次元空間中の仮想パネルに投影し
て、仮想視点からの画像を生成し、当該仮想三次元空間
の画像をディスプレイ３に表示する。

【００８６】ここで、オペレータが仮想視点又は人物オ
ブジェクトの定義を変更するためにマウス２を操作する
と、その操作信号は視点定義プログラム４又は仮想パネ
ル定義プログラム５に入力され、仮想三次元空間中の仮
想視点の定義又は人物オブジェクトの定義が変更され
る。すると、その変更された定義に基づいて、上記可動
式動画撮影装置１０は、直ちにビデオカメラの配置を変
更し、異なる方向から被写体を撮影する。そして、この
動画を汎用計算機１のＣＧプログラム７が受け取って、
仮想パネル１０４に投影して、仮想視点からの画像を生
成し、当該仮想三次元空間の画像をディスプレイ３に表
示する。

【００８７】このように、マウス２の操作による汎用計
算機１上の仮想三次元空間中の仮想視点の位置や人物オ
ブジェクトの方角や位置に変化があった場合でも、次々
に適当な動画が撮影されて仮想パネル１０４に投影され
るので、あたかもポリゴンで構成されたオブジェクトで
あるかのように、仮想視点の位置や人物オブジェクトの
位置や方角の変化に追従して見え方の変わる人物オブジ
ェクトを表示することができる。

【００８８】以上のように実施の形態４によれば、汎用
計算機上の仮想視点及び人物オブジェクトの定義に基づ
いて可動式動画撮影装置で撮影されている人物の動画
を、上記仮想視点及び人物オブジェクトの定義に基づい
て定義して汎用計算機上の仮想三次元空間に配置した仮
想パネルに投影して、上記仮想視点からの画像を生成す
ることにより、動画を汎用計算機内に記憶せずに仮想三
次元空間画像を生成できるので、記憶容量の小さい汎用
計算機であっても、曲面部分と動きを持つ人間や動植物
などの物体をリアルに表示できる画像を生成することが
できる。また、例えば、可動式動画撮影装置の処理速度
と汎用計算機の処理速度とが異なるために、上記可動式
動画撮影装置で生成された動画を上記汎用計算機内で一
時記憶する場合においても、１つの動画のみを一時記憶
すれば良く、記憶容量の小さい汎用計算機であっても曲
面部分と動きを持つ人間や動植物などの物体をリアルに
表示できる画像を生成することができる。

【００８９】また、オペレータによる操作信号に基づい
て、前述の実施の形態と同様に、仮想視点の定義、人物
オブジェクトの定義、及び又は、仮想パネルの定義を変
更するとともに、変更した定義に基づいて可動式動画撮
影装置で撮影されている動画を仮想パネルに投影して、
上記仮想視点からの画像を生成することにより、仮想視
点の位置、人物オブジェクトの位置、及び又は、人物オ
ブジェクトの向きに変化があった場合でも、次々に適当
な動画が投影されて仮想三次元空間画像が生成されるの
で、あたかもポリゴンで構成された仮想物体であるかの
ように、オペレータの意志に応じて見え方の変わる人物
オブジェクトを表示できる画像を生成することができ
る。

【００９０】なお、本実施の形態においても、可動式動
画撮影装置は、実施の形態１の動画撮影装置と同様に、
被写体である人物の周りを青色で塗りつぶした壁（囲
い）を備え、その壁に開けた小穴を通して被写体を撮影
し、その動画中の青色の部分を除去する画像処理を行
い、動画中の被写体以外の部分を透明にした動画を出力
するように構成しても良い。これにより、被写体である
人物のみを仮想物体として表示できる画像を生成するこ
とができる。

【００９１】実施の形態５．以上の実施の形態は、現在
撮影されている動画、又は、現在生成されている動画を
仮想パネルに投影して仮想三次元空間画像を生成する場
合であるが、次に、予め用意した動画を仮想パネルに投
影して仮想三次元空間画像を生成する場合の実施の形態
５を説明する。

【００９２】図７は、この発明の実施の形態５による画
像生成システムの構成を示す構成図である。図７は、図
１と同一又は相当部分に同一符号を付して示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機１と、これに接続された
マウス２、ディスプレイ３の周辺機器と、動画出力装置
に相当し、動画を汎用計算機１に配信する動画サーバ１
１から構成される。視点定義プログラム４、仮想パネル
定義プログラム５、動画選択プログラム６、ＣＧプログ
ラム７は、実施の形態２と同様に、汎用計算機１上で実
行されるプログラムである。

【００９３】以下、動作について説明する。動画サーバ
１１には、予め、人物などの被写体をいろいろな角度か
らビデオカメラで撮影した動画が蓄積されている。例え
ば、被写体を正面から１０゜づつ、０゜〜３５０゜の３
６カ所から撮影した動画である。まず、動画サーバ１１
は、これらの動画を汎用計算機１に配信する。

【００９４】一方、汎用計算機１における各部分の動作
は、前述の実施の形態１と同様である。動画撮影装置８
によって撮影された０゜〜３５０゜の動画の代わりに、
動画サーバ１１によって配信される０゜〜３５０゜の動
画から、動画選択プログラム６が１つの動画を選択す
る。ＣＧプログラム７は、選択された動画を仮想パネル
１０４に投影して、仮想視点からの画像を生成し、当該
仮想三次元空間の画像をディスプレイ３に表示する。

【００９５】ここで、オペレータが仮想視点又は人物オ
ブジェクトの定義を変更するためにマウス２を操作する
と、その操作信号は視点定義プログラム４又は仮想パネ
ル定義プログラム５に入力され、仮想三次元空間中の仮
想視点の定義又は人物オブジェクトの定義が変更され
る。すると、前述の実施の形態1と同様に、その変更さ
れた定義に基づいて、動画選択プログラム６は、直ちに
異なる動画を選択し、ＣＧプログラム７は選択された動
画を仮想パネル１０４に投影して画像を生成し、当該仮
想三次元空間の画像をディスプレイ３に表示する。

【００９６】このように、マウス２の操作による仮想視
点の位置や人物オブジェクトの向きや位置に変化があっ
た場合でも、次々に適当な動画が選択されて仮想パネル
１０４に投影されるので、あたかもポリゴンで構成され
たオブジェクトであるかのように、仮想視点の位置や人
物オブジェクトの向きや位置の変化に追従して見え方の
変わる人物オブジェクトを表示することができる。

【００９７】以上のように実施の形態５によれば、動画
サーバから配信される複数の仮想視点からの複数の動画
から、仮想視点及び人物オブジェクトの定義に応じた動
画を選択し、上記仮想視点及び人物オブジェクトの定義
に基づいて定義して仮想三次元空間に配置した仮想パネ
ルに上記配信された動画を投影して、上記仮想視点から
の画像を生成することにより、動画を汎用計算機内に記
憶せずに仮想三次元空間画像を生成できるので、記憶容
量の小さい汎用計算機であっても、曲面部分と動きを持
つ人間や動植物などの物体をリアルに表示できる画像を
生成することができる。また、例えば、動画サーバの処
理速度と汎用計算機の処理速度とが異なるために、上記
動画サーバから配信された動画を上記汎用計算機内で一
時記憶する場合においても、汎用計算機においては、上
記複数の動画のうち選択された１つの動画のみを一時記
憶すれば良く、記憶容量の小さい汎用計算機であっても
曲面部分と動きを持つ人間や動植物などの物体をリアル
に表示できる画像を生成することができる。

【００９８】また、オペレータによる操作信号に基づい
て、前述の実施の形態と同様に、仮想視点の定義、人物
オブジェクトの定義、及び又は、仮想パネルの定義を変
更するとともに、変更した定義に基づいて配信サーバか
ら配信される動画を選択し直し、仮想パネルに投影し
て、上記仮想視点からの画像を生成することにより、仮
想視点の位置、人物オブジェクトの位置、及び又は、人
物オブジェクトの向きに変化があった場合でも、次々に
適当な動画が選択されて仮想三次元空間画像が生成され
るので、あたかもポリゴンで構成された仮想物体である
かのように、オペレータの意志に応じて見え方の変わる
人物オブジェクトを表示できる画像を生成することがで
きる。

【００９９】実施の形態６．以上の実施の形態５は、動
画出力装置として、複数の動画を配信する動画サーバを
用いた場合であるが、次に、動画出力装置として、仮想
視点及び人物オブジェクトの定義に基づいて動画を配信
する動画サーバを用いる場合の実施の形態６を説明す
る。

【０１００】図８は、この発明の実施の形態６による画
像生成システムの構成を示す構成図である。図８は、図
１と同一又は相当部分に同一符号を付して示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機１と、これに接続された
マウス２、ディスプレイ３の周辺機器と、動画出力装置
に相当し、動画を汎用計算機１に配信する動画サーバ１
１から構成される。視点定義プログラム４、仮想パネル
定義プログラム５、ＣＧプログラム７は、実施の形態３
と同様に、汎用計算機１上で実行されるプログラムであ
る。

【０１０１】以下、動作について説明する。前述の実施
の形態５と同様に、動画サーバ１１には、予め、人物な
どの被写体をいろいろな角度からビデオカメラで撮影し
た動画が蓄積されている。例えば、被写体を正面から１
０゜づつ、０゜〜３５０゜の３６カ所から撮影した動画
である。まず、動画サーバ１１は、汎用計算機１の視点
定義プログラム４に定義された仮想三次元空間中の仮想
視点の位置情報と、仮想パネル定義プログラム５に定義
された人物オブジェクトの位置と向きの情報を受け取
る。続いて、これらの情報から上記動画サーバ１１は、
人物オブジェクトの向いている方角（人物オブジェクト
の向き）φｐ、人物オブジェクトの基準点（人物オブジ
ェクトの位置）からの仮想視点の方角φｖを得て、実施
の形態１の(1)式からφｍを算出し、当該φｍに相当す
る動画を汎用計算機１に配信する。一方、上記汎用計算
機１のＣＧプログラム７は、上記配信された動画を、仮
想三次元空間中の仮想パネル１０４に動画を投影して、
仮想視点からの画像を生成し、当該仮想三次元空間の画
像をディスプレイ３に表示する。

【０１０２】ここで、オペレータが仮想視点又は人物オ
ブジェクトの定義を変更するためにマウス２を操作する
と、その操作信号は視点定義プログラム４又は仮想パネ
ル定義プログラム５に入力され、仮想三次元空間中の仮
想視点の定義又は人物オブジェクトの定義が変更され
る。すると、その変更された定義に基づいて、上記動画
サーバ１１は、直ちに異なる動画を汎用計算機に配信す
る。そして、この動画を汎用計算機１のＣＧプログラム
７が受け取って、仮想パネル１０４に投影して、仮想視
点からの画像を生成し、当該仮想三次元空間の画像をデ
ィスプレイ３に表示する。

【０１０３】このように、マウス２の操作による汎用計
算機１上の仮想三次元空間中の仮想視点の位置や人物オ
ブジェクトの方角や位置に変化があった場合でも、次々
に適当な動画が配信されて仮想パネル１０４に投影され
るので、あたかもポリゴンで構成されたオブジェクトで
あるかのように、仮想視点の位置や人物オブジェクトの
位置や方角の変化に追従して見え方の変わる人物オブジ
ェクトを表示することができる。

【０１０４】以上のように実施の形態６によれば、汎用
計算機上の仮想視点及び人物オブジェクトの定義に基づ
いて動画サーバから配信される動画を、上記仮想視点及
び人物オブジェクトの定義に基づいて定義して汎用計算
機上の仮想三次元空間に配置した仮想パネルに投影し
て、上記仮想視点からの画像を生成することにより、動
画を汎用計算機内に記憶せずに仮想三次元空間画像を生
成できるので、記憶容量の小さい汎用計算機であって
も、曲面部分と動きを持つ人間や動植物などの物体をリ
アルに表示できる画像を生成することができる。また、
例えば、動画サーバの処理速度と汎用計算機の処理速度
とが異なるために、上記動画サーバから配信された動画
を上記汎用計算機内で一時記憶する場合においても、汎
用計算機においては、配信された１つの動画のみを一時
記憶すれば良く、記憶容量の小さい汎用計算機であって
も曲面部分と動きを持つ人間や動植物などの物体をリア
ルに表示できる画像を生成することができる。

【０１０５】また、オペレータによる操作信号に基づい
て、前述の実施の形態と同様に、汎用計算機で仮想視点
の定義、人物オブジェクトの定義、及び又は、仮想パネ
ルの定義を変更するとともに、当該変更した定義に基づ
いて配信サーバから配信された動画を仮想パネルに投影
して、上記仮想視点からの画像を生成することにより、
仮想視点の位置、人物オブジェクトの位置、及び又は、
人物オブジェクトの向きに変化があった場合でも、次々
に適当な動画が選択されて仮想三次元空間画像が生成さ
れるので、あたかもポリゴンで構成された仮想物体であ
るかのように、オペレータの意志に応じて見え方の変わ
る人物オブジェクトを表示できる画像を生成することが
できる。

【０１０６】実施の形態７．以上の実施の形態は、オペ
レータによるマウスの操作信号に基づいて仮想視点の定
義を変更して、仮想視点の移動に追従した仮想三次元空
間画像を生成する場合であるが、次に、仮想パネルに投
影する動画に制約がある場合に、不適当な仮想三次元空
間画像が生成されないように、仮想三次元空間内の上記
仮想視点の移動範囲を制限する場合の実施の形態７を説
明する。

【０１０７】図９は、この発明の実施の形態７による画
像生成システムの構成を示す構成図である。図９は、図
１と同一又は相当部分に同一符号を付し手示してある。
この画像生成システムは、各種プログラムと、これらプ
ログラムの動作する汎用計算機１と、これに接続された
マウス２、ディスプレイ３の周辺機器と、動画撮影装置
８から構成される。視点定義プログラム４、仮想パネル
定義プログラム５、動画選択プログラム６、ＣＧプログ
ラム７は、実施の形態１と同様に、汎用計算機１上で実
行されるプログラムである。

【０１０８】また、１２は、上記視点定義プログラム４
に定義された仮想視点の定義が変更されるときに、上記
仮想視点及び上記人物オブジェクトの定義に基づいて求
められた動画の種類と予め入力された動画撮影装置８か
ら出力される動画の種類とに応じて、上記視点定義プロ
グラム４の定義範囲を制御する定義範囲制御プログラム
であり、予め入力された動画出力装置から出力される動
画の種類に応じて、視点定義手段又は仮想パネル定義手
段の定義範囲を制御する定義範囲制御手段に相当する。

【０１０９】また、本実施の形態７において、上記定義
範囲制御プログラム１２以外は前述の実施の形態１と同
様に図３のように構成されている。ただし便宜上、仮想
三次元空間中の仮想視点の高さは一定で、被写体の背丈
に相当する高さに設定するものとする。また、図３の動
画撮影装置８において、ビデオカメラは２７０゜〜３５
０゜、０゜から９０゜の１９台のみが配置されているも
のとする。すなわち、被写体の前方だけが撮影されるよ
うになっているとする。また、このビデオカメラの配置
についての情報は、動画撮影装置８から出力される動画
の種類として、予め、定義範囲制御プログラムに入力さ
れているものとする。

【０１１０】以下、動作について説明する。図３の状態
において、オペレータがマウス２を操作し、人物オブジ
ェクトの基準点（人物オブジェクトの位置）からの仮想
視点の方角φｖを、例えば１１゜から３００゜に変更し
ようとしたとする。すると、その操作信号は視点定義プ
ログラム４に入力され、上記操作信号に応じた仮想視点
の定義が求められる。当該仮想視点の定義が求められる
と、定義範囲制御プログラム１２は、前述の実施の形態
１の式(1)に基づいてφｍを求める。ここではφｖは３
００゜、φｐは４３゜であるので、φｍは２６０゜と計
算される。

【０１１１】続いて、上記定義範囲制御プログラム１２
は、上記求めたφｍ＝２６０゜と、予め入力されている
動画撮影装置８から出力される動画の種類、すなわち被
写体を撮影しているビデオカメラの位置とを比較する。
ところが、２６０゜の方向に配置されたビデオカメラは
無いので、上記定義範囲制御プログラム１２は、上記視
点定義プログラム４で求められた仮想視点の定義に対す
る無効信号を上記視点定義プログラム４に出力する。す
ると、当該視点定義プログラム４は、上記マウス２の操
作信号を無効にし、当該操作信号による仮想視点の定義
の変更を行わない。

【０１１２】また、一方、求めたφｍの方向に配置され
たビデオカメラがある場合は、上記定義範囲制御プログ
ラム１２は、上記視点定義プログラム４で求められた仮
想視点の定義に対する有効信号を上記視点定義プログラ
ム４に出力する。すると、当該視点定義プログラム４
は、上記マウス２の操作信号を有効にし、当該操作信号
による仮想視点の定義の変更を行う。

【０１１３】このように、計算されたφｍの方向にビデ
オカメラが存在しない場合は、マウス２の操作を無効に
することにより、不適当な仮想三次元空間画像が生成さ
れないようにすることができる。

【０１１４】例えば、図３に例示した動画撮影装置８で
は、ビデオカメラを被写体を中心として床面に水平な円
の円周上に配置しているので、被写体の真上および真下
からの動画を得ることはできない。従って、仮想三次元
空間内の仮想視点を、人物オブジェクトの真上または真
下に移動したも、見え方として正しい仮想三次元空間画
像を生成することは不可能である。一方、仮想三次元空
間内の床面に相当するＸＺ平面からの仮想視点の高さ
が、被写体を撮影しているビデオカメラの床面からの高
さに対して５０％〜１５０％に相当する範囲であれば、
適当な画像を生成できることが実験により確かめられて
いる。

【０１１５】このように、画像出力装置である画像撮影
装置は、出力可能な動画と出力不可能な動画があるの
で、仮想三次元空間内の仮想視点を移動する際に仮想視
点の移動範囲を制限することによって、不適当な仮想三
次元空間画像が生成されないようにすることができる。

【０１１６】以上のように実施の形態７によれば、上記
視点定義プログラムに定義された仮想視点の定義が変更
されるときに、上記仮想視点及び上記人物オブジェクト
の定義に基づいて求められた動画の種類と定義範囲制御
プログラムに予め入力された動画撮影装置から出力され
る動画の種類とを比較し、上記求められた動画の種類が
上記動画撮影装置から出力される動画の種類にない場合
に上記仮想視点の定義の変更を無効にし、上記求められ
た動画の種類が上記動画撮影装置から出力される動画の
種類にある場合に上記仮想視点の定義の変更を有効にし
て、上記視点定義プログラムの定義範囲を制御すること
により、仮想パネルに投影する動画に制約がある場合
に、仮想三次元空間内の仮想視点の移動範囲を制限する
ことができるため、不適当な仮想三次元空間画像が生成
されないようにすることができる。

【０１１７】実施の形態８．

【０１１８】以上の実施の形態７は、仮想パネルに投影
する動画に制約がある場合に、不適当な仮想三次元空間
画像が生成されないように、仮想三次元空間内の仮想視
点の移動範囲を制限する場合であるが、次に、仮想三次
元空間内の人物オブジェクトの定義を制限する場合の実
施の形態８を説明する。

【０１１９】図１０は、この発明の実施の形態８による
画像生成システムの構成を示す構成図である。図１０
は、図１と同一又は相当部分に同一符号を付して示して
ある。この画像生成システムは、各種プログラムと、こ
れらプログラムの動作する汎用計算機１と、これに接続
されたマウス２、ディスプレイ３の周辺機器と、動画撮
影装置８から構成される。視点定義プログラム４、仮想
パネル定義プログラム５、動画選択プログラム６、ＣＧ
プログラム７は、実施の形態７と同様に、汎用計算機１
上で実行されるプログラムである。

【０１２０】ただし、定義範囲制御プログラム１２は、
上記仮想パネルプログラム５に定義された人物オブジェ
クトの定義が変更されるときに、上記仮想視点及び上記
人物オブジェクトの定義に基づいて求められた動画の種
類と予め入力された動画撮影装置８から出力される動画
の種類とに応じて、上記仮想パネルプログラム５の定義
範囲を制御するものであり、予め入力された動画出力装
置から出力される動画の種類に応じて、視点定義手段又
は仮想パネル定義手段の定義範囲を制御する定義範囲制
御手段に相当する。

【０１２１】また、本実施の形態８においても前述の実
施の形態７と同様に、上記定義範囲制御プログラム１２
以外は前述の実施の形態１と同様に図３のように構成さ
れている。ただし便宜上、仮想三次元空間中の仮想視点
の高さは一定で、被写体の背丈に相当する高さに設定す
るものとする。また、図３の動画撮影装置８において、
ビデオカメラは２７０゜〜３５０゜、０゜から９０゜の
１９台のみが配置されているものとする。すなわち、被
写体の前方だけが撮影されるようになっているとする。
また、このビデオカメラの配置についての情報は、動画
撮影装置８から出力される動画の種類として、予め、定
義範囲制御プログラムに入力されているものとする。

【０１２２】以下、動作について説明する。図３の状態
において、オペレータがマウス２を操作し、仮想三次元
空間中の人物オブジェクトの向いている方角（人物オブ
ジェクトの向き）φｐを変更しようとしたとする。する
と、その操作信号は仮想パネル定義プログラム５に入力
され、上記操作信号に応じた人物オブジェクトの定義が
求められる。当該人物オブジェクトの定義が求められる
と、定義範囲制御プログラム１２は、前述の実施の形態
１の式(1)に基づいてφｍを求める。

【０１２３】続いて、上記定義範囲制御プログラム１２
は、上記求めたφｍと、予め入力されている動画撮影装
置８から出力される動画の種類、すなわち被写体を撮影
しているビデオカメラの位置とを比較する。その結果、
上記求めたφｍの方向に配置されたビデオカメラは無い
場合は、上記定義範囲制御プログラム１２は、上記仮想
パネル定義プログラム５で求められた人物オブジェクト
の定義に対する無効信号を上記仮想パネル定義プログラ
ム５に出力する。すると、当該仮想パネル定義プログラ
ム５は、上記マウス２の操作信号を無効にし、当該操作
信号による人物オブジェクトの定義の変更を行わない。

【０１２４】また、一方、求めたφｍの方向に配置され
たビデオカメラがある場合は、上記定義範囲制御プログ
ラム１２は、上記仮想パネル定義プログラム５で求めら
れた人物オブジェクトの定義に対する有効信号を上記仮
想パネル定義プログラム５に出力する。すると、当該仮
想パネル定義プログラム５は、上記マウス２の操作信号
を有効にし、当該操作信号による人物オブジェクトの定
義の変更を行う。

【０１２５】このように、計算されたφｍの方向にビデ
オカメラが存在しない場合は、マウス２の操作を無効に
することにより、不適当な仮想三次元空間画像が生成さ
れないようにすることができる。

【０１２６】以上のように実施の形態８によれば、上記
仮想パネル定義プログラムに定義された人物オブジェク
トの定義が変更されるときに、上記仮想視点及び上記人
物オブジェクトの定義に基づいて求められた動画の種類
と定義範囲制御プログラムに予め入力された動画撮影装
置から出力される動画の種類とを比較し、上記求められ
た動画の種類が上記動画撮影装置から出力される動画の
種類にない場合に上記人物オブジェクトの定義の変更を
無効にし、上記求められた動画の種類が上記動画撮影装
置から出力される動画の種類にある場合に上記人物オブ
ジェクトの定義の変更を有効にして、上記視点定義プロ
グラムの定義範囲を制御することにより、仮想パネルに
投影する動画に制約がある場合に、仮想三次元空間内の
人物オブジェクトの移動範囲を制限することができるた
め、不適当な仮想三次元空間画像が生成されないように
することができる。

【０１２７】実施の形態９．以上の実施の形態では、仮
想三次元空間内に配置された仮想パネルに動画を投影す
る場合について説明したが、次に、動画出力装置とし
て、仮想視点及び仮想物体の情報に基づいて動画を生成
する高性能計算機を用い、仮想三次元空間の画像と動画
出力装置から出力された動画とを合成する場合の実施の
形態９を説明する。

【０１２８】図１２は、この発明の実施の形態９による
画像生成システムの構成を示す構成図である。図１２
は、図１と同一又は相当部分に同一符号を付して示して
ある。この画像生成システムは、各種プログラムと、こ
れらプログラムの動作する汎用計算機１と、マウス２、
ディスプレイ３の周辺機器と、汎用計算機に比べて多く
のポリゴンから構成される仮想物体の動画を高速に生成
できる高性能計算機９から構成される。上記高性能計算
機９は動画出力装置に相当する。視点定義プログラム４
は視点定義手段、ＣＧプログラム７は仮想三次元空間画
像生成手段、物体定義プログラム１３は仮想三次元空間
内に表示される仮想物体を定義する物体定義手段、画像
合成プログラム１４はＣＧプログラム７で生成された画
像と高性能計算機９から出力された動画とを合成した画
像を生成する画像合成手段、にそれぞれ相当し、汎用計
算機１上で実行されるプログラムである。

【０１２９】従来の技術で述べたように、仮想三次元空
間においてポリゴンを使って人物などをリアルに表示す
るには、数十万程度のポリゴンが必要である。上記高性
能計算機９は、このように多くのポリゴンによって構成
される仮想物体の画像を、高速に生成することのできる
計算機である。例えば、米国シリコングラフィックス社
の上位グラフィック・ワークステーションが挙げられ
る。

【０１３０】以下、動作について説明する。ここでは、
数十万程度のポリゴンで構成され、かつ動作を与えられ
た人物のポリゴンモデルを含む仮想三次元空間画像を、
高性能計算機を利用して汎用計算機上で生成する方法に
ついて述べるものとする。以下、前述の人物のポリゴン
モデルを人物オブジェクトと呼び、その他のポリゴンモ
デルをＣＧオブジェクトと呼ぶ。

【０１３１】汎用計算機１上には仮想三次元空間１０１
が定義されており、仮想三次元空間１０１中には、視点
定義プログラム４の定義内容である位置と向きに基づい
て、仮想視点２０１が配置されている。また、物体定義
プログラム１３には、人物オブジェクトの位置と向きが
定義されている。また、仮想三次元空間１０１中には、
ＣＧオブジェクト３０１および３０２が配置されている
ものとする。

【０１３２】一方、高性能計算機９上には仮想三次元空
間１０２が定義されている。高性能計算機９は、物体定
義プログラム１３から人物オブジェクトの位置と向きの
情報を受け取り、それに基づいて仮想三次元空間１０２
中に人物オブジェクト３０３を配置する。このとき、人
物オブジェクト３０３を定義するポリゴンのデータは、
高性能計算機９に蓄えられているものとしている。

【０１３３】続いて、高性能計算機９は、視点定義プロ
グラム４から仮想視点の位置と向きの情報を受け取り、
それに基づいて仮想三次元空間１０２中に仮想視点２０
２を配置し、この仮想視点から人物オブジェクトの動画
４０２を生成する。

【０１３４】高性能計算機９によって生成された動画４
０２は、画像合成プログラム１４に送られ、ＣＧプログ
ラム７が生成した仮想三次元空間画像４０１と合成され
て、ディスプレイ３に合成画像４０３として表示され
る。ここで、動画４０２と画像４０１を合成する方法に
はいくつかの種類がある。例えば、動画４０２におい
て、人物オブジェクト３０３に相当する部分のピクセル
以外のすべてのピクセルを青色にしておき、画像合成プ
ログラム６において画像４０１に対して動画４０２中の
青色以外のピクセルを画像４０１に上書きするようにす
ることにより、合成画像４０３が得られる。これはクロ
マキーと呼ばれている方法である。

【０１３５】その他の方法として、デプス値と呼ばれ
る、動画の各ピクセルに与えられた仮想視点からの距離
を使う方法がある。例えば、動画４０２において、人物
オブジェクト３０３に相当する部分のピクセルのデプス
値を０．０から０．４に設定し、それ以外のピクセルの
デプス値を１．０に設定するものとする。また画像４０
１においては、すべてのピクセルのデプス値を、０．５
から０．９の範囲で設定するものとする。次に、画像合
成プログラム６において画像４０１と動画４０２を重
ね、ピクセル毎にデプス値の大きい方のピクセルだけを
取り出して画像に再構成すれば、合成画像４０３を得る
ことができる。

【０１３６】またここで、オペレータがマウス２を操作
すると、その操作信号は視点定義プログラム４または物
体定義プログラム５に入力され、仮想視点または人物オ
ブジェクトの定義が変更されるものとする。すると、変
更された定義に基づいて、上記高性能計算機９は、直ち
に高性能計算機９上の仮想三次元空間中における仮想視
点または人物オブジェクトを再配置し、異なる人物のポ
リゴンモデルの動画４０１を生成する。そして、この動
画４０１を汎用計算機１の動画合成プログラム１４が受
け取って、ＣＧプログラム７が生成した仮想三次元空間
画像４０１との合成を行い、合成画像４０２をディスプ
レイ３に表示する。

【０１３７】このように、マウス２の操作による汎用計
算機１上の仮想三次元空間中の仮想視点の位置や人物オ
ブジェクトの方角や位置に変化があった場合でも、次々
に適当な動画が生成されて画像合成プログラム１４に送
られるので、あたかも汎用計算機１の仮想三次元空間１
０１中に配置された仮想物体であるかのように、仮想視
点２０１の位置や方向、または人物オブジェクトの位置
や方角の変化に追従して見え方の変わる人物オブジェク
トを含む仮想三次元空間画像を表示することができる。

【０１３８】以上のように実施の形態９によれば、汎用
計算機上の仮想視点及び人物オブジェクトの定義に基づ
いて高性能計算機で生成された動作を持つ人物のポリゴ
ンモデルの動画を、汎用計算機上で生成した仮想三次元
空間画像と合成することにより、動画を汎用計算機内に
記憶せずに仮想三次元空間画像を生成できるので、記憶
容量の小さい汎用計算機であっても、曲面部分と動きを
持つ人間や動植物などの物体をリアルに表示する画像を
生成することができる。また、例えば、高性能計算機の
処理速度と汎用計算機の処理速度とが異なるために、上
記高性能計算機で生成された動画を上記汎用計算機内で
一時記憶する場合においても、１つの動画のみを一時記
憶すれば良く、記憶容量の小さい汎用計算機であっても
曲面部分と動きを持つ人間や動植物などの物体をリアル
に表示できる画像を生成することができる。

【０１３９】また、オペレータによる操作信号に基づい
て仮想視点の定義または人物オブジェクトの定義を変更
できるようにするとともに、変更された定義に基づい
て、高性能計算機で生成された動画と汎用計算機で生成
された仮想三次元空間画像とを合成することにより、仮
想視点の位置や向きまたは人物オブジェクトの位置や向
きに変化があった場合でも、次々に適当な動画が生成さ
れて仮想三次元空間画像との合成画像が生成されるの
で、あたかも汎用計算機上の仮想三次元空間中に配置さ
れている仮想物体であるかのように、オペレータの意志
に応じて見え方の変わる人物オブジェクトを表示できる
画像を生成することができる。

【０１４０】実施の形態１０．以上の実施の形態９で
は、動画出力装置として高性能計算機を用いる方法につ
いて述べたが、次に、汎用計算機の内部に実装する三次
元グラフィクス・ボードを動画出力装置として用いる実
施の形態１０を説明する。

【０１４１】図１３は、この発明の実施の形態１０によ
る画像生成システムの構成を示す構成図である。この画
像生成システムは、各種プログラムと、これらプログラ
ムの動作する汎用計算機１と、マウス２、ディスプレイ
３の周辺機器と、汎用計算機１の内部に実装され、数万
を超えるポリゴンからなる仮想物体の動画を高速に生成
できる三次元グラフィクス・ボード１５から構成され
る。上記三次元グラフィクス・ボード１５は動画出力装
置に相当する。視点定義プログラム４は視点定義手段、
ＣＧプログラム７は仮想三次元空間画像生成手段、物体
定義プログラム１３は物体定義手段、画像合成プログラ
ム１４は画像合成手段、にそれぞれ相当し、汎用計算機
１上で実行されるプログラムである。

【０１４２】従来の技術で述べたように、仮想三次元空
間においてポリゴンを使って人物オブジェクトをリアル
に表示するには数十万程度のポリゴンが必要であり、計
算能力の高い計算機が必要である。また、物体をボクセ
ルと呼ばれる微少の立方体の塊として表現するボリュー
ム・モデリングという手法がある。ボリューム・モデリ
ングに基づくコンピュータ・グラフィクスの描画には、
さらに計算能力の高い計算機が必要となる。このような
ボリューム・モデリングに基づくコンピュータ・グラフ
ィクスを高速に描画する三次元グラフィクス・ボードの
例として、三菱電機製のVolumeProという製品がある。

【０１４３】実施の形態１０では、数百万以上のボクセ
ルで構成され、かつ動作を与えられた人物のボクセルモ
デルを含む仮想三次元空間画像を、三次元グラフィクス
・ボードを用いて汎用計算機上で生成する方法について
述べる。以下、前述の人物のボクセルモデルを人物オブ
ジェクトと呼び、その他のポリゴンモデルをＣＧオブジ
ェクトと呼ぶものとする。

【０１４４】汎用計算機１上には仮想三次元空間１０１
が定義されており、仮想三次元空間１０１中には、視点
定義プログラム４の定義内容である位置と向きに基づい
て、仮想視点２０１が配置されている。また、物体定義
プログラム１３には、人物オブジェクトの位置と向きが
定義されている。また、仮想三次元空間１０１中には、
ＣＧオブジェクト３０１および３０２が配置されている
ものとする。

【０１４５】一方、三次元グラフィクス・ボード１５上
には仮想三次元空間１０２が定義されている。三次元グ
ラフィクス・ボード１５は、物体定義プログラム１３か
ら人物オブジェクトの位置と向きの情報を受け取り、そ
れに基づいて仮想三次元空間１０２中に人物オブジェク
ト３０３を配置する。このとき、人物オブジェクト３０
３を定義するボクセルのデータは、三次元グラフィクス
・ボード上に蓄えられているもの、または汎用計算機１
の主メモリ上に蓄えられているものである。

【０１４６】続いて、三次元グラフィクス・ボード１５
は、視点定義プログラム４から仮想視点の位置と向きの
情報を受け取り、それに基づいて仮想三次元空間１０２
中に仮想視点２０２を配置し、この仮想視点から人物オ
ブジェクトの動画４０２を生成する。

【０１４７】三次元グラフィクス・ボード１５によって
生成された動画４０２は、画像合成プログラム１４に送
られ、ＣＧプログラム７が生成した仮想三次元空間画像
４０１と合成されて、ディスプレイ３に合成画像４０３
として表示される。動画４０２と画像４０１を合成する
方法は、実施の形態９と同様である。

【０１４８】また、オペレータが仮想視点又は人物オブ
ジェクトの定義を変更するためにマウス２を操作した場
合の動作も、実施の形態９と同様である。

【０１４９】以上のように実施の形態１０によれば、汎
用計算機上の仮想視点及び人物オブジェクトの定義に基
づいて三次元グラフィクス・ボードで生成された動作を
持つ人物のポリゴンモデルの動画を、ＣＧプログラム上
で生成した仮想三次元空間画像と合成することにより、
動画を汎用計算機内に記憶せずに仮想三次元空間画像を
生成できるので、記憶容量の小さい汎用計算機であって
も、曲面部分と動きを持つ人間や動植物などの物体をリ
アルに表示する画像を生成することができる。また、例
えば、三次元グラフィクス・ボードの処理速度とＣＧプ
ログラムの処理速度とが異なるために、上記三次元グラ
フィクス・ボードで生成された動画を上記汎用計算機内
で一時記憶する場合においても、１つの動画のみを一時
記憶すれば良く、記憶容量の小さい汎用計算機であって
も曲面部分と動きを持つ人間や動植物などの物体をリア
ルに表示できる画像を生成することができる。

【０１５０】また、オペレータによる操作信号に基づい
て仮想視点の定義または人物オブジェクトの定義を変更
できるようにするとともに、変更された定義に基づい
て、三次元グラフィクス・ボードで生成された動画とＣ
Ｇプログラムで生成された仮想三次元空間画像とを合成
することにより、仮想視点の位置や向きまたは人物オブ
ジェクトの位置や向きに変化があった場合でも、次々に
適当な動画が生成されて仮想三次元空間画像との合成画
像が生成されるので、あたかもＣＧプログラム上の仮想
三次元空間中に配置されている仮想物体であるかのよう
に、オペレータの意志に応じて見え方の変わる人物オブ
ジェクトを表示できる画像を生成することができる。

【０１５１】実施の形態１１．以下、前述の実施の形態
の変形について述べる。

【０１５２】前述の実施の形態において、仮想パネル
は、１枚の長方形のポリゴンであるとしたが、他の形状
であっても、また２枚以上のポリゴンの組み合わたもの
でもよい。例えば、楕円形にして、立体感を出すように
してもよい。

【０１５３】実施の形態１２．前述の実施の形態におい
て、図３の動画撮影装置８は、壁に空けた小穴を通して
被写体を撮影するようにしていたが、他の方法で撮影し
てもよい。例えば、図１１に示すように、被写体の上方
から撮影するようにしてもよい。

【０１５４】実施の形態１３．前述の実施の形態におい
て、仮想パネルを、仮想三次元空間中に１枚だけ配置す
る例について述べたが、複数枚を配置し、複数の人物オ
ブジェクトなどを表示してもよい。

【０１５５】実施の形態１４．前述の実施の形態におい
て、仮想パネルに投影する動画が、人物の動画である例
について述べたが、人物以外の動物や動きのある機械な
ど、他のものであってもよい。また、動画ではなく、花
瓶や部屋などの静止画であってもよい。

【０１５６】実施の形態１５．前述の実施の形態におい
て、動画出力装置である動画撮影装置、高性能計算機、
可動式動画撮影装置、動画サーバに対して、画像生成装
置である汎用計算機１台を接続する構成で説明を行った
が、接続する汎用計算機は２台以上であってもよい。ま
た反対に、１台の汎用計算機に対して、複数の動画撮影
装置、高性能計算機、可動式動画撮影装置、動画サーバ
を接続する構成であってもよい。

【０１５７】実施の形態１６．前述の実施の形態におい
て、１枚以上の仮想パネルを画像生成装置である汎用計
算機上の仮想三次元空間中に配置し、それに投影する動
画を、１台以上の動画出力装置である動画撮影装置、高
性能計算機、可動式動画撮影装置、動画サーバから受け
取る構成であってもよい。

【０１５８】実施の形態１７．前述の実施の形態におい
て、仮想パネルに投影する動画が、ビデオカメラで撮影
した実写映像である場合と、リアルタイムＣＧのポリゴ
ンモデルから高性能計算機で生成した動画である場合に
ついて述べたが、他の動画像、例えばセルアニメーショ
ンであってもよい。

【０１５９】実施の形態１８．前述の実施の形態におい
て、動画出力装置である動画撮影装置および可動式動画
撮影装置において、被写体を中心として床面に水平な円
の円周上にビデオカメラを配置する例について述べた
が、他の配置の仕方でもよい。例えば、床面に垂直な円
の円周上にも配置したり、被写体との距離を変えて配置
してもよい。またビデオカメラの配置の間隔は１０゜で
あるとしたが、他の間隔であってもよい。また被写体を
中心とする半球または球の内側に、適当な間隔で配置し
てもよい。高性能計算機においても同様に、高性能計算
機上の仮想三次元空間内の仮想視点の配置は、前述の実
施の形態以外の配置でもよい。動画サーバにおいても同
様に前述の実施の形態以外の配置でもよい。

【０１６０】実施の形態１９．前述の実施の形態におい
て、オペレータによる操作信号に基づいて、仮想視点の
定義又は人物オブジェクトの定義を変更する場合につい
て説明したが、これに限定されるものではない。例え
ば、視点定義手段である視点定義プログラムは、仮想視
点の定義を所定時間毎にＸ軸方向に所定距離移動した位
置に変更するものであっても良い。また例えば、仮想パ
ネル定義手段である仮想パネル定義プログラムは、人物
オブジェクトの位置の定義を所定時間毎にＺ軸方向に所
定距離移動した位置に変更し、人物オブジェクトの向き
の定義を所定時間ごとに所定角度ずつ反時計回りの方角
に回転した向きに変更するものであっても良い。

【０１６１】実施の形態２０．前述の実施の形態におい
て、動画選択手段である動画選択プログラムは、仮想視
点の定義及び人物オブジェクトの定義に基づいて画像を
選択する場合について説明したが、これに限定されるも
のではない。例えば、人物オブジェクトの位置と向きが
固定である場合は、仮想視点の定義のみに基づいて動画
を選択するようにしても良い。例えば、人物オブジェク
トの基準点が原点(0,0,0)に固定されてX-Z平面に対して
垂直に立ち、人物オブジェクトの向きがZ軸方向に固定
されている場合について説明する。前述の式(1)におい
て、常にφpは０°であり、φvは原点から見た仮想視点
の方角となるので、仮想視点の座標を(X,Z)とした場
合、動画選択プログラムは式(3)に基づいて動画を選択
する。ただし、atanはアークタンジェントを示す。

【０１６２】 φm=int((mod(360+atan(X/Z),360)+5)/10)*10 ・・ (3)

【０１６３】実施の形態２１．前述の実施の形態におい
て、図５に示した高性能計算機、図６に示した可動式動
画撮影装置、図８に示した動画サーバなどの動画出力装
置は、仮想視点の定義及び人物オブジェクトの定義に基
づいて画像を出力する場合について説明したが、これに
限定されるものではない。例えば、人物オブジェクトの
位置と向きが固定である場合は、仮想視点の定義のみに
基づいて動画を出力する。

【０１６４】実施の形態２２．前述の実施の形態におい
て、動画出力装置である動画撮影装置または可動式動画
撮影装置は、右目用と左目用の２種類の動画を分けて撮
影した２種類の動画を出力するように構成し、画像生成
装置である汎用計算機は、上記右目用と左目用の２種類
の動画を用いて、右目用と左目用の２種類の仮想三次元
空間画像を生成するように構成し、表示装置であるディ
スプレイは、上記右目用の仮想三次元空間画像を右目に
て、上記画像生成システムで生成された左目用の仮想三
次元空間画像を左目にて同時に視認可能に表示するよう
に構成しても良い。これにより、仮想パネルに投影した
動画に立体感を与えることができる。

【０１６５】例えば、上記動画出力装置である動画撮影
装置または可動式動画撮影装置は、２台のビデオカメラ
を左右に８ｃｍ程（人間の眼球間距離に相当）離して配
置し、同時に同じ被写体を撮影することにより、それぞ
れ右目用の動画、左目用の動画を撮影して出力する。

【０１６６】また、画像生成装置である汎用計算機を２
台用意し、それぞれ右目用の仮想三次元空間画像を生成
する汎用計算機と、左目用の仮想三次元空間画像を生成
する汎用計算機に処理を割り当てる。ここで、１つのマ
ウスを上記２台の汎用計算機につなげて、仮想視点や人
物オブジェクトを全く同じに操作できるようにする。上
記２台の汎用計算機は、それぞれ前述の実施の形態と同
様に動作し、上記右目用の汎用計算機は上記右目用の動
画を仮想パネルに投影して画像を生成し、上記左目用の
汎用計算機は上記左目用の動画を仮想パネルに投影して
画像を生成する。

【０１６７】なお、動画出力装置である高性能計算機お
よび動画サーバにおいても、同様に変形しても良く、同
様の効果が得られる。

【０１６８】実施の形態２３．前述の実施の形態におい
て、仮想三次元空間画像生成手段であるＣＧプログラム
を実行する計算機を汎用計算機としているが、グラフィ
ック・ワークステーションなどの高性能計算機などであ
ってもよい。また動画を汎用計算機に入力する方法は、
専用ケーブルを使う方法、イーサネット（登録商標）な
どのローカルエリアネットワークを使う方法、ＩＳＤＮ
やインターネットの広域ネットワークを使う方法など、
動画を汎用計算機に入力できる方法であればどのような
方法であってもよい。

【０１６９】実施の形態２４．前述の実施の形態におい
て、動画選択プログラム、高性能計算機、可動式動画撮
影装置、動画サーバで、動画を選択するための計算式が
例示されているが、複数の動画からいずれかを選択可能
であれば、他の計算式であってもよい。

【０１７０】実施の形態２５．前述の実施の形態におい
て、仮想三次元空間内における仮想パネルを、床相当面
であるＸＺ平面に垂直で、かつ視点に対して正面を向く
ように配置しているが、他の配置方法でもよい。例え
ば、床相当面に関係なく、常に視点から仮想パネルに伸
ばした線分と仮想パネルが垂直になるように配置しても
よい。

【０１７１】実施の形態２６．前述の実施の形態におい
て、定義範囲制御手段である定義範囲制御プログラム
は、仮想視点及び人物オブジェクトの定義に基づいて求
められた動画の種類が予め入力された動画撮影装置から
出力される動画の種類に存在しない場合にマウスの操作
を無効にすることによって不適当な画像の生成を回避し
ていたが、他の方法で回避してもよい。例えば、上記仮
想視点及び人物オブジェクトの定義に基づいて求められ
た動画に最も近い動画に対応する仮想視点又は人物オブ
ジェクトの定義を、視点定義プログラム又は仮想パネル
定義プログラムに出力するようにしてもよい。

【０１７２】実施の形態２７．前述の実施の形態におい
て、定義範囲制御手段である定義範囲制御プログラム
は、仮想視点及び上記人物オブジェクトの定義に基づい
て求められた動画の種類と予め入力された動画の種類と
に応じて、定義範囲を制御していたが、動画出力装置又
は動画選択手段が仮想視点の定義のみに基づいて動画を
出力する又は動画を選択する場合、上記定義範囲制御プ
ログラムは、仮想視点の定義に基づいて求められた動画
の種類と予め入力された動画の種類とに応じて、定義範
囲を制御するように構成する。

【０１７３】実施の形態２８．前述の実施の形態におい
て、定義範囲制御手段である定義範囲制御プログラム
は、動画出力装置である動画撮影装置から出力される動
画の種類が予め入力されていたが、例えば、動画出力装
置が実施の形態２又は実施の形態３で説明したような高
性能計算機である場合は、上記定義範囲制御プログラム
は、上記高性能計算機で生成される動画の種類を予め入
力して構成する。また例えば、動画出力装置が実施の形
態４で説明したような可動式動画撮影装置である場合
は、上記定義範囲制御プログラムは、上記可動式動画撮
影装置で撮影される動画の種類を予め入力して構成す
る。さらにまた、例えば、動画出力装置が実施の形態２
又は実施の形態３で説明したような動画サーバである場
合は、上記定義範囲制御プログラムは、上記動画サーバ
で配信される動画の種類を予め入力して構成する。

【０１７４】実施の形態２９．前述の実施の形態におい
て、定義範囲制御手段である定義範囲制御プログラム
は、独立した構成要素として説明したが、上記定義範囲
制御プログラムを視点定義手段である視点定義プログラ
ムに含めても良い。この場合視点定義プログラムは仮想
パネル定義プログラムから人物オブジェクトの定義の情
報を受け取るように構成する。また、上記定義範囲制御
プログラムを仮想パネル定義手段である仮想パネル定義
プログラムに含めても良い。また、上記定義範囲制御プ
ログラムを動画選択手段である動画選択プログラムに含
めても良い。さらにまた、上記定義範囲制御プログラム
を図５に示した高性能計算機、図６に示した可動式動画
撮影装置、図８に示した動画サーバなどの動画出力装置
に含めても良い。

【０１７５】実施の形態３０．実施の形態９において、
高性能計算機９上の仮想三次元空間１０２中に人物オブ
ジェクト３０３と仮想視点２０２を配置する際に、それ
ぞれ物体定義プログラム１３と視点定義プログラム４に
定義されている位置と方向に基づいて配置を行っていた
が、人物オブジェクト３０３または仮想視点２０２を固
定とし、人物オブジェクト３０３と仮想視点２０２の位
置と方向の相対的な関係が保存されるように配置しても
よい。位置の例で示せば、人物オブジェクトの基準点の
座標値を原点(0,0,0)として、視点定義プログラム４に
定義されている仮想視点の座標値が(-20,10,150)で、物
体定義プログラム１３に定義されている人物オブジェク
トの座標値が(30,20,60)であるとき、(-20-30,10-20,15
0-60)=(-50,-10,90)の座標に仮想視点２０２を配置すれ
ばよい。また、実施の形態１０において、三次元グラフ
ィクス・ボード１０上の仮想三次元空間１０２中に、人
物オブジェクト３０３と仮想視点２０２を配置する際
も、同様の変形が可能である。

【０１７６】実施の形態３１．実施の形態９および１０
において、仮想三次元空間画像生成手段はＣＧプログラ
ムであるとしたが、計算機に実装する形態の三次元グラ
フィクス・ボードなどのハードウェアであってもよい。
例えば図１３において、汎用計算機１に三次元グラフィ
クス・ボードを２枚挿入し、一方を仮想三次元空間画像
生成手段、一方を動画生成装置として実施してもよい。

【０１７７】実施の形態３２．実施の形態９および１０
において、視点定義手段、物体定義手段、画像合成手
段、仮想三次元空間画像生成手段を、それぞれ視点定義
プログラム、物体定義プログラム、画像合成プログラ
ム、ＣＧプログラムといったソフトウェアで実施してい
るがが、これらのうちのすべてまたは一部を、同じ動作
を行うハードウェアによって実施してもよい。

【０１７８】実施の形態３３．実施の形態９の図１２お
よび実施の形態１０の図１３において、人物オブジェク
トと仮想視点の向きを示す情報として、Ｚ軸のプラス方
向を基準にしてＸ−Ｚ平面上で反時計回りの方向φ（一
般的な用語してヨー角）が与えられるものとしている
が、これに加えてピッチ角やロール角などを与えるよう
に実施してもよい。同様に、位置を示す情報としてＸ−
Ｙ−Ｚの三次元直交座標値を使用しているが、他の座標
系、例えば球座標を用いてもよい。

【０１７９】

【発明の効果】以上のように、この発明の画像生成シス
テムによれば、仮想三次元空間内に配置される仮想視点
を定義する視点定義手段と、上記仮想三次元空間内に表
示される仮想物体を定義するとともに、上記仮想三次元
空間内に配置され、動画が投影される仮想パネルを上記
仮想視点及び上記仮想物体に基づいて定義する仮想パネ
ル定義手段と、上記視点定義手段に定義された仮想視点
に基づいて複数の動画から上記仮想パネルに投影される
動画を選択する動画選択手段と、上記仮想パネル定義手
段に定義された仮想パネルを上記仮想三次元空間内に配
置し、当該仮想パネルに上記動画選択手段に選択された
動画を投影して、上記視点定義手段に定義された仮想視
点からの画像を生成する仮想三次元空間画像生成手段と
を有する画像生成装置と、上記画像生成装置に上記複数
の動画を出力する動画出力装置とを備えたことにより、
上記画像生成装置内に動画を記憶せずに仮想三次元空間
画像を生成できるので、記憶容量の小さい汎用計算機で
あっても、曲面部分と動きを持つ人間や動植物などの物
体をリアルに表示できる画像を生成することができる。
また、例えば、上記動画出力装置の処理速度と画像生成
装置の処理速度とが異なるために、上記動画出力装置か
ら出力された動画を上記画像生成装置内で一時記憶する
場合においても、複数の動画のうち選択された１つの動
画のみを一時記憶すれば良く、記憶容量の小さい汎用計
算機であっても曲面部分と動きを持つ人間や動植物など
の物体をリアルに表示できる画像を生成することができ
るという効果がある。

【０１８０】また、次の発明の画像生成システムによれ
ば、上記動画選択手段は、上記視点定義手段に定義され
た仮想視点及び上記仮想パネル定義手段に定義された仮
想物体に基づいて複数の動画から上記仮想パネルに投影
される動画を選択するように構成されたことにより、仮
想視点及び仮想物体の定義に応じた動画が選択されて仮
想三次元空間画像が生成されるので、上記仮想視点及び
仮想物体の定義に応じて見え方の変わる仮想物体を表示
できる画像を生成することができるという効果がある。

【０１８１】さらにまた、次の発明の画像生成システム
によれば、仮想三次元空間内に配置される仮想視点を定
義する視点定義手段と、上記仮想三次元空間内に表示さ
れる仮想物体を定義するとともに、上記仮想三次元空間
内に配置され、動画が投影される仮想パネルを上記仮想
視点及び上記仮想物体に基づいて定義する仮想パネル定
義手段と、上記仮想パネル定義手段に定義された仮想パ
ネルを上記仮想三次元空間内に配置し、当該仮想パネル
に動画を投影して、上記視点定義手段に定義された仮想
視点からのコンピュータ・グラフィックスに基づく仮想
三次元空間の画像を生成する仮想三次元空間画像生成手
段とを有する画像生成装置と、上記視点定義手段に定義
された仮想視点に基づいて上記仮想パネルに投影される
動画を出力する動画出力装置とを備えたことにより、上
記画像生成装置内に動画を記憶せずに仮想三次元空間画
像を生成できるので、記憶容量の小さい汎用計算機であ
っても、曲面部分と動きを持つ人間や動植物などの物体
をリアルに表示できる画像を生成することができる。ま
た、例えば、上記動画出力装置の処理速度と画像生成装
置の処理速度とが異なるために、上記動画出力装置から
出力された動画を上記画像生成装置内で一時記憶する場
合においても、１つの動画のみを一時記憶すれば良く、
記憶容量の小さい汎用計算機であっても曲面部分と動き
を持つ人間や動植物などの物体をリアルに表示できる画
像を生成することができるという効果がある。

【０１８２】また、次の発明の画像生成システムによれ
ば、上記動画出力装置は、上記視点定義手段に定義され
た仮想視点及び上記仮想パネル定義手段に定義された仮
想物体に基づいて上記仮想パネルに投影される動画を出
力するように構成されたことにより、仮想視点及び仮想
物体の定義に応じた動画により仮想三次元空間画像が生
成されるので、上記仮想視点及び仮想物体の定義に応じ
て見え方の変わる仮想物体を表示できる画像を生成する
ことができるという効果がある。

【０１８３】また、次の発明の画像生成システムによれ
ば、上記視点定義手段は、上記仮想視点の定義を変更可
能に構成されたことにより、仮想視点に変化があった場
合でも、次々に適当な動画により仮想三次元空間画像が
生成されるので、あたかもポリゴンで構成された仮想物
体であるかのように、オペレータの意志に応じた視点移
動に追従して見え方の変わる仮想物体を表示できる画像
を生成することができるという効果がある。

【０１８４】また、次の発明の画像生成システムによれ
ば、上記仮想パネル定義手段は、上記仮想物体の定義を
変更可能に構成されたことにより、仮想物体に変化があ
った場合でも、次々に適当な動画により仮想三次元空間
画像が生成されるので、あたかもポリゴンで構成された
仮想物体であるかのように、オペレータの意志に応じて
見え方の変わる仮想物体を表示できる画像を生成するこ
とができるという効果がある。

【０１８５】また、次の発明の画像生成システムによれ
ば、上記動画出力装置は、被写体の周囲に配置され、一
色で塗りつぶされた囲いと、上記被写体の周囲に配置さ
れ、当該被写体を撮影した動画を出力するビデオカメラ
とを有した動画撮影装置であることにより、上記動画出
力装置からは、被写体以外の部分を透明にした動画が出
力されるため、被写体のみを仮想物体として表示できる
画像を生成することができるという効果がある。

【０１８６】また、次の発明の画像生成システムによれ
ば、上記動画出力装置から出力される動画の種類を予め
入力され、当該動画の種類に応じて、上記視点定義手段
に定義される仮想視点又は上記仮想パネル定義手段に定
義される仮想物体の定義範囲を制御する定義範囲制御手
段を備えたことにより、仮想三次元空間内の仮想視点又
は仮想物体の定義範囲を制限することができるため、仮
想パネルに投影される動画に制約がある場合に、不適当
な仮想三次元空間画像が生成されないようにすることが
できるという効果がある。

【０１８７】さらにまた、次の発明の画像生成システム
によれば、仮想三次元空間内に配置される仮想視点を定
義する視点定義手段と、上記仮想三次元空間内に表示さ
れる仮想物体を定義する物体定義手段と、上記視点定義
手段に定義された仮想視点からのコンピュータ・グラフ
ィックスに基づく仮想三次元空間の画像を生成する仮想
三次元空間画像生成手段と、上記視点定義手段に定義さ
れた仮想視点に基づいて動画を出力する動画出力装置
と、上記仮想三次元空間画像生成手段で生成された画像
と上記動画出力装置から出力された動画とを合成した画
像を生成する画像合成手段を備えたことにより、動画を
記憶せずに仮想三次元空間画像を生成できるので、記憶
容量の小さい汎用計算機であっても、曲面部分と動きを
持つ人間や動植物などの物体をリアルに表示できる画像
を生成することができる。また、例えば、上記動画出力
装置の処理速度と仮想三次元空間画像生成手段の処理速
度とが異なるために、上記動画出力装置から出力された
動画を一時記憶する場合においても、１つの動画のみを
一時記憶すれば良く、記憶容量の小さい汎用計算機であ
っても曲面部分と動きを持つ人間や動植物などの物体を
リアルに表示できる画像を生成することができるという
効果がある。

【０１８８】また、次の発明の画像生成システムによれ
ば、上記動画出力装置は、上記視点定義手段に定義され
た仮想視点及び上記物体定義手段に定義された仮想物体
に基づいて動画を生成するように構成されたことによ
り、仮想視点及び仮想物体の定義に応じた動画により仮
想三次元空間画像が生成されるので、上記仮想視点及び
仮想物体の定義に応じて見え方の変わる仮想物体を表示
できる画像を生成することができるという効果がある。

【０１８９】また、次の発明の画像生成システムによれ
ば、上記視点定義手段は、上記仮想視点の定義を変更可
能に構成されたことにより、仮想視点に変化があった場
合でも、次々に適当な動画により仮想三次元空間画像が
生成されるので、あたかもポリゴンで構成された仮想物
体であるかのように、オペレータの意志に応じた視点移
動に追従して見え方の変わる仮想物体を表示できる画像
を生成することができるという効果がある。

【０１９０】また、次の発明の画像生成システムによれ
ば、上記物体定義手段は、上記仮想物体の定義を変更可
能に構成されたことにより、仮想物体に変化があった場
合でも、次々に適当な動画により仮想三次元空間画像が
生成されるので、あたかもポリゴンで構成された仮想物
体であるかのように、オペレータの意志に応じて見え方
の変わる仮想物体を表示できる画像を生成することがで
きるという効果がある。

【０１９１】さらにまた、次の発明の画像表示システム
によれば、右目用の仮想三次元空間画像及び左目用の仮
想三次元空間画像を生成する画像生成システムと、当該
画像生成システムで生成された上記右目用の仮想三次元
空間画像を右目にて、上記画像生成システムで生成され
た左目用の仮想三次元空間画像を左目にて同時に視認可
能に表示する表示装置とを備えたことにより、仮想パネ
ルに投影された動画に立体感を与えることができるた
め、立体感のある仮想物体を表示できるという効果があ
る。

【０１９２】さらにまた、次の発明の画像生成プログラ
ムを記録したコンピュータ読取可能な記憶媒体によれ
ば、上記仮想三次元空間内に配置される仮想視点を定義
する視点定義手順と、上記仮想三次元空間内に表示され
る仮想物体を定義するとともに、上記仮想三次元空間内
に配置され、動画が投影される仮想パネルを上記仮想視
点及び上記仮想物体に基づいて定義する仮想パネル定義
手順と、上記視点定義手順で定義された仮想視点に基づ
いて、複数の動画を出力する動画出力装置から出力され
た上記複数の動画から上記仮想パネルに投影される動画
を選択する動画選択手順と、上記仮想パネル定義手順で
定義された仮想パネルを上記仮想三次元空間内に配置
し、当該仮想パネルに上記動画選択手順で選択された動
画を投影して、上記視点定義手順で定義された仮想視点
からの画像を生成する仮想三次元空間画像生成手順とを
実行させるためのプログラムを記録したことにより、動
画を記憶せずに仮想三次元空間画像を生成できるので、
記憶容量の小さい汎用計算機であっても、曲面部分と動
きを持つ人間や動植物などの物体をリアルに表示できる
画像を生成することができる。また、例えば、上記動画
出力装置との処理速度とが異なるために、上記動画出力
装置から出力された動画を一時記憶する場合において
も、複数の動画のうち選択された１つの動画のみを一時
記憶すれば良く、記憶容量の小さい汎用計算機であって
も曲面部分と動きを持つ人間や動植物などの物体をリア
ルに表示できる画像を生成することができるという効果
がある。

【０１９３】さらにまた、次の発明の画像生成プログラ
ムを記録したコンピュータ読取可能な記憶媒体によれ
ば、上記仮想三次元空間内に配置される仮想視点を定義
する視点定義手順と、上記仮想三次元空間内に表示され
る仮想物体を定義するとともに、上記仮想三次元空間内
に配置され、動画が投影される仮想パネルを上記仮想視
点及び上記仮想物体に基づいて定義する仮想パネル定義
手順と、上記仮想パネル定義手順で定義された仮想パネ
ルを上記仮想三次元空間内に配置し、当該仮想パネルに
上記視点定義手順で定義された仮想視点に基づいて動画
出力装置から出力された動画を投影して、上記視点定義
手順で定義された仮想視点からのコンピュータ・グラフ
ィックスに基づく仮想三次元空間の画像を生成する仮想
三次元空間画像生成手順とを実行させるためのプログラ
ムを記録したことにより、動画を記憶せずに仮想三次元
空間画像を生成できるので、記憶容量の小さい汎用計算
機であっても、曲面部分と動きを持つ人間や動植物など
の物体をリアルに表示できる画像を生成することができ
る。また、例えば、上記動画出力装置との処理速度とが
異なるために、上記動画出力装置から出力された動画を
一時記憶する場合においても、１つの動画のみを一時記
憶すれば良く、記憶容量の小さい汎用計算機であっても
曲面部分と動きを持つ人間や動植物などの物体をリアル
に表示できる画像を生成することができるという効果が
ある。

【０１９４】さらにまた、次の発明の画像生成プログラ
ムを記録したコンピュータ読取可能な記憶媒体によれ
ば、仮想三次元空間内に配置される仮想視点を定義する
視点定義手順と、上記仮想三次元空間内に表示される仮
想物体を定義する物体定義手順と、上記視点定義手順で
定義された仮想視点からのコンピュータ・グラフィック
スに基づく仮想三次元空間の画像を生成する仮想三次元
空間画像生成手順と、上記仮想三次元空間画像生成手順
で生成された画像と上記視点定義手順で定義された仮想
視点に基づいて動画出力装置から出力された動画とを合
成した画像を生成する画像合成手順とを実行させるため
のプログラムを記録したことにより、動画を記憶せずに
仮想三次元空間画像を生成できるので、記憶容量の小さ
い汎用計算機であっても、曲面部分と動きを持つ人間や
動植物などの物体をリアルに表示できる画像を生成する
ことができる。また、例えば、上記動画出力装置との処
理速度が異なるために、上記動画出力装置から出力され
た動画を一時記憶する場合においても、１つの動画のみ
を一時記憶すれば良く、記憶容量の小さい汎用計算機で
あっても曲面部分と動きを持つ人間や動植物などの物体
をリアルに表示できる画像を生成することができるとい
う効果がある。

【０１９５】さらにまた、次の発明の画像生成方法によ
れば、上記仮想三次元空間内に配置される仮想視点を定
義する視点定義工程と、上記仮想三次元空間内に表示さ
れる仮想物体を定義するとともに、上記仮想三次元空間
内に配置され、動画が投影される仮想パネルを上記仮想
視点及び上記仮想物体に基づいて定義する仮想パネル定
義工程と、上記視点定義工程で定義された仮想視点に基
づいて、複数の動画を出力する動画出力装置から出力さ
れた上記複数の動画から上記仮想パネルに投影される動
画を選択する動画選択工程と、上記仮想パネル定義工程
で定義された仮想パネルを上記仮想三次元空間内に配置
し、当該仮想パネルに上記動画選択工程で選択された動
画を投影して、上記視点定義工程で定義された仮想視点
からの画像を生成する仮想三次元空間画像生成工程とを
含んだことにより、動画を記憶せずに仮想三次元空間画
像を生成できるので、記憶容量の小さい汎用計算機であ
っても、曲面部分と動きを持つ人間や動植物などの物体
をリアルに表示できる画像を生成することができる。ま
た、例えば、上記動画出力装置との処理速度とが異なる
ために、上記動画出力装置から出力された動画を一時記
憶する場合においても、複数の動画のうち選択された１
つの動画のみを一時記憶すれば良く、記憶容量の小さい
汎用計算機であっても曲面部分と動きを持つ人間や動植
物などの物体をリアルに表示できる画像を生成すること
ができるという効果がある。

【０１９６】さらにまた、次の発明の画像生成方法によ
れば、上記仮想三次元空間内に配置される仮想視点を定
義する視点定義工程と、上記仮想三次元空間内に表示さ
れる仮想物体を定義するとともに、上記仮想三次元空間
内に配置され、動画が投影される仮想パネルを上記仮想
視点及び上記仮想物体に基づいて定義する仮想パネル定
義工程と、上記仮想パネル定義工程で定義された仮想パ
ネルを上記仮想三次元空間内に配置し、当該仮想パネル
に上記視点定義工程で定義された仮想視点に基づいて動
画出力装置から出力された動画を投影して、上記視点定
義工程で定義された仮想視点からのコンピュータ・グラ
フィックスに基づく仮想三次元空間の画像を生成する仮
想三次元空間画像生成工程とを含んだことにより、動画
を記憶せずに仮想三次元空間画像を生成できるので、記
憶容量の小さい汎用計算機であっても、曲面部分と動き
を持つ人間や動植物などの物体をリアルに表示できる画
像を生成することができる。また、例えば、上記動画出
力装置との処理速度とが異なるために、上記動画出力装
置から出力された動画を一時記憶する場合においても、
１つの動画のみを一時記憶すれば良く、記憶容量の小さ
い汎用計算機であっても曲面部分と動きを持つ人間や動
植物などの物体をリアルに表示できる画像を生成するこ
とができるという効果がある。

【０１９７】さらにまた、次の発明の画像生成方法によ
れば、仮想三次元空間内に配置される仮想視点を定義す
る視点定義工程と、上記仮想三次元空間内に表示される
仮想物体を定義する物体定義工程と、上記視点定義工程
で定義された仮想視点からのコンピュータ・グラフィッ
クスに基づく仮想三次元空間の画像を生成する仮想三次
元空間画像生成工程と、上記仮想三次元空間画像生成工
程で生成された画像と上記視点定義工程で定義された仮
想視点に基づいて動画出力装置から出力された動画とを
合成した画像を生成する画像合成工程とを含んだことに
より、動画を記憶せずに仮想三次元空間画像を生成でき
るので、記憶容量の小さい汎用計算機であっても、曲面
部分と動きを持つ人間や動植物などの物体をリアルに表
示できる画像を生成することができる。また、例えば、
上記動画出力装置との処理速度が異なるために、上記動
画出力装置から出力された動画を一時記憶する場合にお
いても、１つの動画のみを一時記憶すれば良く、記憶容
量の小さい汎用計算機であっても曲面部分と動きを持つ
人間や動植物などの物体をリアルに表示できる画像を生
成することができるという効果がある。

【図面の簡単な説明】

【図１】 実施の形態1の画像生成システムの構成を示
す構成図である。

【図２】 通常の仮想三次元空間画像の生成を説明する
説明図である。

【図３】 実施の形態1の画像生成システムの詳細な構
成を示す詳細構成図である。

【図４】 実施の形態２の画像生成システムの構成を示
す構成図である。

【図５】 実施の形態３の画像生成システムの構成を示
す構成図である。

【図６】 実施の形態４の画像生成システムの構成を示
す構成図である。

【図７】 実施の形態５の画像生成システムの構成を示
す構成図である。

【図８】 実施の形態６の画像生成システムの構成を示
す構成図である。

【図９】 実施の形態７の画像生成システムの構成を示
す構成図である。

【図１０】 実施の形態８の画像生成システムの構成を
示す構成図である。

【図１１】 動画撮影装置の例を示す構成図である。

【図１２】 実施の形態９の画像生成システムの構成を
示す構成図である。

【図１３】 実施の形態１０の画像生成システムの構成
を示す構成図である。

【符号の説明】

１ 汎用計算機 ２ マウス ３ ディスプレイ ４ 視点定義プ
ログラム ５ 仮想パネル定義プログラム ６ 動画選択プ
ログラム ７ ＣＧプログラム ８ 動画撮影装
置 ９ 高性能計算機 １０ 可動式動
画撮影装置 １１ 動画サーバ １２ 定義範囲
制御プログラム １３ 物体定義プログラム １４ 画像合成
プログラム １５ 三次元グラフィックス・ボード。

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B050 BA08 BA10 EA19 EA24 EA27 EA28 FA02 FA06 5C023 AA10 AA11 AA38 BA11 CA03 DA04 DA08 EA03

Claims (19)

【特許請求の範囲】
1. 【請求項１】 コンピュータ・グラフィックスに基づく
   仮想三次元空間の画像を生成する画像生成システムにお
   いて、上記仮想三次元空間内に配置される仮想視点を定
   義する視点定義手段と、上記仮想三次元空間内に表示さ
   れる仮想物体を定義するとともに、上記仮想三次元空間
   内に配置され、動画が投影される仮想パネルを上記仮想
   視点及び上記仮想物体に基づいて定義する仮想パネル定
   義手段と、上記視点定義手段に定義された仮想視点に基
   づいて複数の動画から上記仮想パネルに投影される動画
   を選択する動画選択手段と、上記仮想パネル定義手段に
   定義された仮想パネルを上記仮想三次元空間内に配置
   し、当該仮想パネルに上記動画選択手段に選択された動
   画を投影して、上記視点定義手段に定義された仮想視点
   からの画像を生成する仮想三次元空間画像生成手段とを
   有する画像生成装置と、上記画像生成装置に上記複数の
   動画を出力する動画出力装置とを備えたことを特徴とす
   る画像生成システム。
2. 【請求項２】 上記動画選択手段は、上記視点定義手段
   に定義された仮想視点及び上記仮想パネル定義手段に定
   義された仮想物体に基づいて複数の動画から上記仮想パ
   ネルに投影される動画を選択するように構成されたこと
   を特徴とする請求項１に記載の画像生成システム。
3. 【請求項３】 コンピュータ・グラフィックスに基づく
   仮想三次元空間の画像を生成する画像生成システムにお
   いて、上記仮想三次元空間内に配置される仮想視点を定
   義する視点定義手段と、上記仮想三次元空間内に表示さ
   れる仮想物体を定義するとともに、上記仮想三次元空間
   内に配置され、動画が投影される仮想パネルを上記仮想
   視点及び上記仮想物体に基づいて定義する仮想パネル定
   義手段と、上記仮想パネル定義手段に定義された仮想パ
   ネルを上記仮想三次元空間内に配置し、当該仮想パネル
   に動画を投影して、上記視点定義手段に定義された仮想
   視点からのコンピュータ・グラフィックスに基づく仮想
   三次元空間の画像を生成する仮想三次元空間画像生成手
   段とを有する画像生成装置と、上記視点定義手段に定義
   された仮想視点に基づいて上記仮想パネルに投影される
   動画を出力する動画出力装置とを備えたことを特徴とす
   る画像生成システム。
4. 【請求項４】 上記動画出力装置は、上記視点定義手段
   に定義された仮想視点及び上記仮想パネル定義手段に定
   義された仮想物体に基づいて上記仮想パネルに投影され
   る動画を出力するように構成されたことを特徴とする請
   求項３に記載の画像生成システム。
5. 【請求項５】 上記視点定義手段は、上記仮想視点の定
   義を変更可能に構成されたことを特徴とする請求項１な
   いし請求項４のいずれかに記載の画像生成システム。
6. 【請求項６】 上記仮想パネル定義手段は、上記仮想物
   体の定義を変更可能に構成されたことを特徴とする請求
   項１ないし請求項５のいずれかに記載の画像生成システ
   ム。
7. 【請求項７】 上記動画出力装置は、被写体の周囲に配
   置され、一色で塗りつぶされた囲いと、上記被写体の周
   囲に配置され、当該被写体を撮影した動画を出力するビ
   デオカメラとを有した動画撮影装置であることを特徴と
   する請求項１ないし請求項６のいずれかに記載の動画生
   成システム。
8. 【請求項８】 上記動画出力装置から出力される動画の
   種類を予め入力され、当該動画の種類に応じて、上記視
   点定義手段に定義される仮想視点又は上記仮想パネル定
   義手段に定義される仮想物体の定義範囲を制御する定義
   範囲制御手段を備えたことを特徴とする請求項１ないし
   請求項７のいずれかに記載の画像生成システム。
9. 【請求項９】 コンピュータ・グラフィックスに基づく
   仮想三次元空間の画像を生成する画像生成システムにお
   いて、上記仮想三次元空間内に配置される仮想視点を定
   義する視点定義手段と、上記仮想三次元空間内に表示さ
   れる仮想物体を定義する物体定義手段と、上記視点定義
   手段に定義された仮想視点からのコンピュータ・グラフ
   ィックスに基づく仮想三次元空間の画像を生成する仮想
   三次元空間画像生成手段と、上記視点定義手段に定義さ
   れた仮想視点に基づいて動画を出力する動画出力装置
   と、上記仮想三次元空間画像生成手段で生成された画像
   と上記動画出力装置から出力された動画とを合成した画
   像を生成する画像合成手段を備えたことを特徴とする画
   像生成システム。
10. 【請求項１０】 上記動画出力装置は、上記視点定義手
    段に定義された仮想視点及び上記物体定義手段に定義さ
    れた仮想物体に基づいて動画を生成するように構成され
    たことを特徴とする請求項９に記載の画像生成システ
    ム。
11. 【請求項１１】 上記視点定義手段は、上記仮想視点の
    定義を変更可能に構成されたことを特徴とする請求項９
    又は請求項１０のいずれかに記載の画像生成システム。
12. 【請求項１２】 上記物体定義手段は、上記仮想物体の
    定義を変更可能に構成されたことを特徴とする請求項８
    ないし請求項１０のいずれかに記載の画像生成システ
    ム。
13. 【請求項１３】 右目用の仮想三次元空間画像及び左目
    用の仮想三次元空間画像を生成する上記請求項１ないし
    請求項８のいずれかに記載の画像生成システムと、当該
    画像生成システムで生成された上記右目用の仮想三次元
    空間画像を右目にて、上記画像生成システムで生成され
    た左目用の仮想三次元空間画像を左目にて同時に視認可
    能に表示する表示装置とを備えたことを特徴とする画像
    表示システム。
14. 【請求項１４】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成プログラム
    を記録したコンピュータ読取可能な記憶媒体において、
    上記仮想三次元空間内に配置される仮想視点を定義する
    視点定義手順と、上記仮想三次元空間内に表示される仮
    想物体を定義するとともに、上記仮想三次元空間内に配
    置され、動画が投影される仮想パネルを上記仮想視点及
    び上記仮想物体に基づいて定義する仮想パネル定義手順
    と、上記視点定義手順で定義された仮想視点に基づい
    て、複数の動画を出力する動画出力装置から出力された
    上記複数の動画から上記仮想パネルに投影される動画を
    選択する動画選択手順と、上記仮想パネル定義手順で定
    義された仮想パネルを上記仮想三次元空間内に配置し、
    当該仮想パネルに上記動画選択手順で選択された動画を
    投影して、上記視点定義手順で定義された仮想視点から
    の画像を生成する仮想三次元空間画像生成手順とを実行
    させるためのプログラムを記録したコンピュータ読取可
    能な記録媒体。
15. 【請求項１５】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成プログラム
    を記録したコンピュータ読取可能な記憶媒体において、
    上記仮想三次元空間内に配置される仮想視点を定義する
    視点定義手順と、上記仮想三次元空間内に表示される仮
    想物体を定義するとともに、上記仮想三次元空間内に配
    置され、動画が投影される仮想パネルを上記仮想視点及
    び上記仮想物体に基づいて定義する仮想パネル定義手順
    と、上記仮想パネル定義手順で定義された仮想パネルを
    上記仮想三次元空間内に配置し、当該仮想パネルに上記
    視点定義手順で定義された仮想視点に基づいて動画出力
    装置から出力された動画を投影して、上記視点定義手順
    で定義された仮想視点からのコンピュータ・グラフィッ
    クスに基づく仮想三次元空間の画像を生成する仮想三次
    元空間画像生成手順とを実行させるためのプログラムを
    記録したコンピュータ読取可能な記録媒体。
16. 【請求項１６】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成プログラム
    を記録したコンピュータ読取可能な記憶媒体において、
    上記仮想三次元空間内に配置される仮想視点を定義する
    視点定義手順と、上記仮想三次元空間内に表示される仮
    想物体を定義する物体定義手順と、上記視点定義手順で
    定義された仮想視点からのコンピュータ・グラフィック
    スに基づく仮想三次元空間の画像を生成する仮想三次元
    空間画像生成手順と、上記仮想三次元空間画像生成手順
    で生成された画像と上記視点定義手順で定義された仮想
    視点に基づいて動画出力装置から出力された動画とを合
    成した画像を生成する画像合成手順とを実行させるため
    のプログラムを記録したコンピュータ読取可能な記録媒
    体。
17. 【請求項１７】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成方法におい
    て、上記仮想三次元空間内に配置される仮想視点を定義
    する視点定義工程と、上記仮想三次元空間内に表示され
    る仮想物体を定義するとともに、上記仮想三次元空間内
    に配置され、動画が投影される仮想パネルを上記仮想視
    点及び上記仮想物体に基づいて定義する仮想パネル定義
    工程と、上記視点定義工程で定義された仮想視点に基づ
    いて、複数の動画を出力する動画出力装置から出力され
    た上記複数の動画から上記仮想パネルに投影される動画
    を選択する動画選択工程と、上記仮想パネル定義工程で
    定義された仮想パネルを上記仮想三次元空間内に配置
    し、当該仮想パネルに上記動画選択工程で選択された動
    画を投影して、上記視点定義工程で定義された仮想視点
    からの画像を生成する仮想三次元空間画像生成工程とを
    含んだことを特徴とする画像生成方法。
18. 【請求項１８】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成方法におい
    て、上記仮想三次元空間内に配置される仮想視点を定義
    する視点定義工程と、上記仮想三次元空間内に表示され
    る仮想物体を定義するとともに、上記仮想三次元空間内
    に配置され、動画が投影される仮想パネルを上記仮想視
    点及び上記仮想物体に基づいて定義する仮想パネル定義
    工程と、上記仮想パネル定義工程で定義された仮想パネ
    ルを上記仮想三次元空間内に配置し、当該仮想パネルに
    上記視点定義工程で定義された仮想視点に基づいて動画
    出力装置から出力された動画を投影して、上記視点定義
    工程で定義された仮想視点からのコンピュータ・グラフ
    ィックスに基づく仮想三次元空間の画像を生成する仮想
    三次元空間画像生成工程とを含んだことを特徴とする画
    像生成方法。
19. 【請求項１９】 コンピュータ・グラフィックスに基づ
    く仮想三次元空間の画像を生成する画像生成方法におい
    て、上記仮想三次元空間内に配置される仮想視点を定義
    する視点定義工程と、上記仮想三次元空間内に表示され
    る仮想物体を定義する物体定義工程と、上記視点定義工
    程で定義された仮想視点からのコンピュータ・グラフィ
    ックスに基づく仮想三次元空間の画像を生成する仮想三
    次元空間画像生成工程と、上記仮想三次元空間画像生成
    工程で生成された画像と上記視点定義工程で定義された
    仮想視点に基づいて動画出力装置から出力された動画と
    を合成した画像を生成する画像合成工程とを含んだこと
    を特徴とする画像生成方法。