JPH04281572A - 画像処理システムにおける実写画像とコンピュータ グラフィックスの合成方法 - Google Patents
画像処理システムにおける実写画像とコンピュータ グラフィックスの合成方法Info
- Publication number
- JPH04281572A JPH04281572A JP3070474A JP7047491A JPH04281572A JP H04281572 A JPH04281572 A JP H04281572A JP 3070474 A JP3070474 A JP 3070474A JP 7047491 A JP7047491 A JP 7047491A JP H04281572 A JPH04281572 A JP H04281572A
- Authority
- JP
- Japan
- Prior art keywords
- computer graphics
- image
- processing system
- image processing
- synthesizing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 63
- 230000002194 synthesizing effect Effects 0.000 title claims abstract description 26
- 239000013598 vector Substances 0.000 claims abstract description 32
- 238000000034 method Methods 0.000 claims description 39
- 230000015572 biosynthetic process Effects 0.000 claims description 21
- 238000003786 synthesis reaction Methods 0.000 claims description 21
- 239000000203 mixture Substances 0.000 claims description 7
- 239000002131 composite material Substances 0.000 description 9
- 238000010586 diagram Methods 0.000 description 5
- 230000036544 posture Effects 0.000 description 4
- 238000004088 simulation Methods 0.000 description 3
- 238000013519 translation Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- NCGICGYLBXGBGN-UHFFFAOYSA-N 3-morpholin-4-yl-1-oxa-3-azonia-2-azanidacyclopent-3-en-5-imine;hydrochloride Chemical compound Cl.[N-]1OC(=N)C=[N+]1N1CCOCC1 NCGICGYLBXGBGN-UHFFFAOYSA-N 0.000 description 1
- 101000582320 Homo sapiens Neurogenic differentiation factor 6 Proteins 0.000 description 1
- 102100030589 Neurogenic differentiation factor 6 Human genes 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000011960 computer-aided design Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000001308 synthesis method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- General Physics & Mathematics (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【０００１】
【産業上の利用分野】本発明は、コンピュータを用いた
コンピュータグラフィックス（以下、ＣＧと記載、Ｃｏ
ｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ、コンピュータ処理
により得られた画像）と実写画面との合成方法に係わり
、特に、実写画像とＣＧとの合成を効率良く行なうのに
好適な画像処理システムにおける実写画面とＣＧの合成
方法に関するものである。
コンピュータグラフィックス（以下、ＣＧと記載、Ｃｏ
ｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ、コンピュータ処理
により得られた画像）と実写画面との合成方法に係わり
、特に、実写画像とＣＧとの合成を効率良く行なうのに
好適な画像処理システムにおける実写画面とＣＧの合成
方法に関するものである。
【０００２】
【従来の技術】従来、実写画像とＣＧを合成することは
、例えば、「グラフィックスとＣＡＤ研究会資料 ３
９−１、１９８９ 景観シミュレーション」に記載さ
れているように、景観シミュレーションという名で行わ
れている。この景観シミュレーションは、実際に存在す
る風景に人工物を建造する場合などをシミュレーション
するものであり、ミニチュア模型などで行なう場合には
不可能な視点からものを見たり、形状を容易に変えられ
るなど、その利用価値が高く、ＣＡＤ（Ｃｏｍｐｕｔｅ
ｒ Ａｉｄｅｄ Ｄｅｓｉｇｎ、コンピュータ支援
設計）の分野からのアプローチも行われている。しかし
、このような操作（視点の変更、形状の変更）は、専門
家が、経験に基づく勘に頼って行なっていたり、あるい
は、風景の撮影地点の情報を必要とする。そのために、
一般の操作者が、容易に操作できるものではなかった。 また、「第６回ヒューマン・インタフェース・シンポジ
ウム論文集、１９９０、電子大道具による映像作成」に
記載のように、画像を撮ると同時に、カメラのパン、チ
ルト、ズームなどのパラメタも記録しておき、ＣＧの設
定にそれらのパラメタを利用して、画像との合成を行な
う方法もある。しかし、撮影と同時に、カメラの種々の
パラメタの取り込みを行なうことは、一般の操作者には
容易に行なえるものではない。
、例えば、「グラフィックスとＣＡＤ研究会資料 ３
９−１、１９８９ 景観シミュレーション」に記載さ
れているように、景観シミュレーションという名で行わ
れている。この景観シミュレーションは、実際に存在す
る風景に人工物を建造する場合などをシミュレーション
するものであり、ミニチュア模型などで行なう場合には
不可能な視点からものを見たり、形状を容易に変えられ
るなど、その利用価値が高く、ＣＡＤ（Ｃｏｍｐｕｔｅ
ｒ Ａｉｄｅｄ Ｄｅｓｉｇｎ、コンピュータ支援
設計）の分野からのアプローチも行われている。しかし
、このような操作（視点の変更、形状の変更）は、専門
家が、経験に基づく勘に頼って行なっていたり、あるい
は、風景の撮影地点の情報を必要とする。そのために、
一般の操作者が、容易に操作できるものではなかった。 また、「第６回ヒューマン・インタフェース・シンポジ
ウム論文集、１９９０、電子大道具による映像作成」に
記載のように、画像を撮ると同時に、カメラのパン、チ
ルト、ズームなどのパラメタも記録しておき、ＣＧの設
定にそれらのパラメタを利用して、画像との合成を行な
う方法もある。しかし、撮影と同時に、カメラの種々の
パラメタの取り込みを行なうことは、一般の操作者には
容易に行なえるものではない。
【０００３】例えば、実写画像の直方体と、ＣＧの直方
体との合成の操作としては、平行移動により、実写画像
の直方体の一頂点と、ＣＧの直方体の一頂点を一致させ
、次に、実写画像の直方体の一辺と、ＣＧの軸（ＣＧの
直方体の一辺）とを、一軸ずつ一致させるように回転移
動を行ない、そして、拡大縮小を行なうのが最も容易な
方法である。しかし、この平行移動、回転移動、拡大縮
小からなる一連の操作を一度行なうだけで、実写画像に
ＣＧを正しく合成できるわけではなく、むしろ、これら
の三つの操作を適宜に繰り返しながら行なう。この操作
の中でも、特に回転移動は、各軸回りの回転がお互いに
影響を及ぼし合うために、各軸の位置を少しずつ変化さ
せ、徐々にＣＧを実写画像に当て嵌める操作となる。
体との合成の操作としては、平行移動により、実写画像
の直方体の一頂点と、ＣＧの直方体の一頂点を一致させ
、次に、実写画像の直方体の一辺と、ＣＧの軸（ＣＧの
直方体の一辺）とを、一軸ずつ一致させるように回転移
動を行ない、そして、拡大縮小を行なうのが最も容易な
方法である。しかし、この平行移動、回転移動、拡大縮
小からなる一連の操作を一度行なうだけで、実写画像に
ＣＧを正しく合成できるわけではなく、むしろ、これら
の三つの操作を適宜に繰り返しながら行なう。この操作
の中でも、特に回転移動は、各軸回りの回転がお互いに
影響を及ぼし合うために、各軸の位置を少しずつ変化さ
せ、徐々にＣＧを実写画像に当て嵌める操作となる。
【０００４】平行移動や拡大縮小に関する位置決めに関
しては、回転移動の位置決めに比べて、比較的容易にで
きる。これは、ＣＧへの平行移動や拡大縮小の操作が、
人間が直感的に思った通りにでき、かつ、それぞれの軸
に影響を及ぼさないためである。回転移動の操作に関し
て、ｘ軸、ｙ軸、ｚ軸のいずれか一軸回りのみの回転移
動の場合は、ただ単純に、その軸に関する回転角のみを
微少変化させつつ、ＣＧを当て嵌めれば良い。しかし、
二軸以上の回転の場合には、まず、最初の回転移動時の
回転軸となる一軸を選択し、適宜に回転角を変化させて
仮の位置を決め、そして、別の軸回りに回転させる。し
かし、この別の回転軸での回転操作により、最初の位置
決めに影響が及ぼされる。そのために、最初の軸回りの
回転に関する位置を、再度決めなおさなければならない
。さらに、どの軸回りの回転を最初に行なうかで、位置
を決める手順が全く変わってしまう。このように、回転
移動の操作に関してだけいえば、最初の軸回りの回転移
動のみが操作者の意図通りに操作できるだけであり、以
降の回転移動は、操作者は、勘にたより、試行錯誤で行
なわなければならない。
しては、回転移動の位置決めに比べて、比較的容易にで
きる。これは、ＣＧへの平行移動や拡大縮小の操作が、
人間が直感的に思った通りにでき、かつ、それぞれの軸
に影響を及ぼさないためである。回転移動の操作に関し
て、ｘ軸、ｙ軸、ｚ軸のいずれか一軸回りのみの回転移
動の場合は、ただ単純に、その軸に関する回転角のみを
微少変化させつつ、ＣＧを当て嵌めれば良い。しかし、
二軸以上の回転の場合には、まず、最初の回転移動時の
回転軸となる一軸を選択し、適宜に回転角を変化させて
仮の位置を決め、そして、別の軸回りに回転させる。し
かし、この別の回転軸での回転操作により、最初の位置
決めに影響が及ぼされる。そのために、最初の軸回りの
回転に関する位置を、再度決めなおさなければならない
。さらに、どの軸回りの回転を最初に行なうかで、位置
を決める手順が全く変わってしまう。このように、回転
移動の操作に関してだけいえば、最初の軸回りの回転移
動のみが操作者の意図通りに操作できるだけであり、以
降の回転移動は、操作者は、勘にたより、試行錯誤で行
なわなければならない。
【０００５】
【発明が解決しようとする課題】解決しようとする問題
点は、従来の技術では、回転移動の操作に不慣れな一般
の操作者は、実写画像とＣＧとの合成操作における回転
移動の操作を効率良く行なうことができない点である。 そして、本発明の目的は、これら従来技術の課題を解決
し、実写画像にＣＧを合成する際に必要となるＣＧの三
次元の回転移動のパラメタの算出を、操作者による簡単
な入力操作に基づき、画像処理システムが行ない、従来
は一般の操作者にとって手間のかかった実写画像とＣＧ
との合成における回転移動の操作性の向上を可能とする
画像処理システムにおける実写画像とＣＧの合成方法を
提供することである。
点は、従来の技術では、回転移動の操作に不慣れな一般
の操作者は、実写画像とＣＧとの合成操作における回転
移動の操作を効率良く行なうことができない点である。 そして、本発明の目的は、これら従来技術の課題を解決
し、実写画像にＣＧを合成する際に必要となるＣＧの三
次元の回転移動のパラメタの算出を、操作者による簡単
な入力操作に基づき、画像処理システムが行ない、従来
は一般の操作者にとって手間のかかった実写画像とＣＧ
との合成における回転移動の操作性の向上を可能とする
画像処理システムにおける実写画像とＣＧの合成方法を
提供することである。
【０００６】
【課題を解決するための手段】上記目的を達成するため
、本発明の画像処理システムにおける実写画像とＣＧの
合成方法は、（１）コンピュータ処理で作成したコンピ
ュータグラフィックスを、ラスタ式ディスプレイの表示
画面上で、操作者が、ポインティングデバイスを用いて
対話式に、実写画像の任意の位置に任意の角度で合成す
る画像処理システムにおける実写画像とコンピュータグ
ラフィックスの合成方法において、コンピュータグラフ
ィックスの二平面の合成先である実写画像中の二平面の
各法線ベクトルを用いて、合成先の二平面に対応するコ
ンピュータグラフィックスの二平面の各回転移動パラメ
タを求め、この各回転移動パラメタに基づき、実写画像
にコンピュータグラフィックスを合成することを特徴と
する。
、本発明の画像処理システムにおける実写画像とＣＧの
合成方法は、（１）コンピュータ処理で作成したコンピ
ュータグラフィックスを、ラスタ式ディスプレイの表示
画面上で、操作者が、ポインティングデバイスを用いて
対話式に、実写画像の任意の位置に任意の角度で合成す
る画像処理システムにおける実写画像とコンピュータグ
ラフィックスの合成方法において、コンピュータグラフ
ィックスの二平面の合成先である実写画像中の二平面の
各法線ベクトルを用いて、合成先の二平面に対応するコ
ンピュータグラフィックスの二平面の各回転移動パラメ
タを求め、この各回転移動パラメタに基づき、実写画像
にコンピュータグラフィックスを合成することを特徴と
する。
【０００７】また、（２）上記（１）に記載の画像処理
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、操作者がポインティングデバイ
スを用いて指定した合成先の二平面のそれぞれの消失線
を求め、これらの消失線を用いて合成先の各平面のそれ
ぞれの法線ベクトルを求めることを特徴とする。
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、操作者がポインティングデバイ
スを用いて指定した合成先の二平面のそれぞれの消失線
を求め、これらの消失線を用いて合成先の各平面のそれ
ぞれの法線ベクトルを求めることを特徴とする。
【０００８】また、（３）上記（２）に記載の画像処理
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、操作者がポインティングデバイ
スを用いて指定した合成先の各平面の二つの消失点をそ
れぞれ求め、これらの二つの消失点を通るそれぞれの消
失線を求めることを特徴とする。
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、操作者がポインティングデバイ
スを用いて指定した合成先の各平面の二つの消失点をそ
れぞれ求め、これらの二つの消失点を通るそれぞれの消
失線を求めることを特徴とする。
【０００９】また、（４）上記（３）に記載の画像処理
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、それぞれの消失点を、それぞれ
隣接する合成先の二平面から求めることを特徴とする。
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、それぞれの消失点を、それぞれ
隣接する合成先の二平面から求めることを特徴とする。
【００１０】また、（５）上記（１）から（４）のいず
れかに記載の画像処理システムにおける実写画像とコン
ピュータグラフィックスの合成方法において、コンピュ
ータグラフィックスは、直交座標系の三軸とそれぞれ平
行な一頂点で交わる三辺を有する直方体であり、この直
方体のコンピュータグラフィックスの二平面の各法線ベ
クトルを、合成先の二平面の各法線ベクトルに一致させ
るそれぞれの回転移動パラメタ候補を算出して、表示画
面上に表示し、操作者が選択して指定したそれぞれの回
転移動パラメタ候補のいずれかを用いて、直方体のコン
ピュータグラフィックスから実写画像に合成するコンピ
ュータグラフィックスを生成することを特徴とする。
れかに記載の画像処理システムにおける実写画像とコン
ピュータグラフィックスの合成方法において、コンピュ
ータグラフィックスは、直交座標系の三軸とそれぞれ平
行な一頂点で交わる三辺を有する直方体であり、この直
方体のコンピュータグラフィックスの二平面の各法線ベ
クトルを、合成先の二平面の各法線ベクトルに一致させ
るそれぞれの回転移動パラメタ候補を算出して、表示画
面上に表示し、操作者が選択して指定したそれぞれの回
転移動パラメタ候補のいずれかを用いて、直方体のコン
ピュータグラフィックスから実写画像に合成するコンピ
ュータグラフィックスを生成することを特徴とする。
【００１１】また、（６）上記（５）に記載の画像処理
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、直方体のコンピュータグラフィ
ックスは、任意の三次元コンピュータグラフィックスを
囲む仮想的な直方体であることを特徴とする。
システムにおける実写画像とコンピュータグラフィック
スの合成方法において、直方体のコンピュータグラフィ
ックスは、任意の三次元コンピュータグラフィックスを
囲む仮想的な直方体であることを特徴とする。
【００１２】そして、（７）上記（１）から（６）のい
ずれかに記載の画像処理システムにおける実写画像とコ
ンピュータグラフィックスの合成方法において、合成し
たコンピュータグラフィックスと実写画像との合成状態
を表示し、この表示した合成状態に基づき、操作者が入
力した平行移動と回転移動、および、拡大縮小のそれぞ
れのパラメタを用いて、コンピュータグラフィックスと
実写画像との合成状態を調整することを特徴とする。
ずれかに記載の画像処理システムにおける実写画像とコ
ンピュータグラフィックスの合成方法において、合成し
たコンピュータグラフィックスと実写画像との合成状態
を表示し、この表示した合成状態に基づき、操作者が入
力した平行移動と回転移動、および、拡大縮小のそれぞ
れのパラメタを用いて、コンピュータグラフィックスと
実写画像との合成状態を調整することを特徴とする。
【００１３】
【作用】本発明において、直方体のＣＧを実写画像に合
成する場合に、操作者は、ポインティングデバイスを用
いて、例えば、実写画像中の合成先であり、それぞれ隣
接する二平面を六つの点で指定する。この時、それぞれ
の平面で、三つの消失点を形成する様に指定する。画像
処理システムは、この三つ消失点を算出し、かつ、この
三つの消失点の内で、相異なる二つの消失点の組を通る
二つの直線を求め、さらに、この二直線から、合成先の
二平面の各法線ベクトルを求める。この法線ベクトルは
、三次元透視座標系におけるｘ、ｙ、ｚ軸のそれぞれに
対する合成先の平面の傾き（姿勢）を示すものである。 次に、画像処理システムは、このようにして求めた合成
先の二平面の各法線ベクトルに、直方体のＣＧの平面で
、実写画像中の合成先の平面に対応する平面の法線ベク
トルが一致するように、ＣＧの回転移動量（回転移動パ
ラメタ）を算出する。ここで、法線ベクトルが一致すれ
ば、合成先の平面とＣＧの対応する平面の空間的配置が
一致し、ＣＧの姿勢が求まる。この回転移動量は、例え
ば、八つの候補が算出され、操作者は、これらの回転移
動量を任意に選択して指定する。そして、画像処理シス
テムは、指定された回転移動量を用いて、実際にＣＧを
生成して、実写画像に合成する。もし、合成画像が未だ
適切でなければ、操作者は、適切な合成画像になるまで
、順次に回転移動量を選択して指定する。このように、
効率の良い回転移動が可能となり、操作者は、三次元の
ＣＧと実写画像の合成操作を容易に行なうことができる
。
成する場合に、操作者は、ポインティングデバイスを用
いて、例えば、実写画像中の合成先であり、それぞれ隣
接する二平面を六つの点で指定する。この時、それぞれ
の平面で、三つの消失点を形成する様に指定する。画像
処理システムは、この三つ消失点を算出し、かつ、この
三つの消失点の内で、相異なる二つの消失点の組を通る
二つの直線を求め、さらに、この二直線から、合成先の
二平面の各法線ベクトルを求める。この法線ベクトルは
、三次元透視座標系におけるｘ、ｙ、ｚ軸のそれぞれに
対する合成先の平面の傾き（姿勢）を示すものである。 次に、画像処理システムは、このようにして求めた合成
先の二平面の各法線ベクトルに、直方体のＣＧの平面で
、実写画像中の合成先の平面に対応する平面の法線ベク
トルが一致するように、ＣＧの回転移動量（回転移動パ
ラメタ）を算出する。ここで、法線ベクトルが一致すれ
ば、合成先の平面とＣＧの対応する平面の空間的配置が
一致し、ＣＧの姿勢が求まる。この回転移動量は、例え
ば、八つの候補が算出され、操作者は、これらの回転移
動量を任意に選択して指定する。そして、画像処理シス
テムは、指定された回転移動量を用いて、実際にＣＧを
生成して、実写画像に合成する。もし、合成画像が未だ
適切でなければ、操作者は、適切な合成画像になるまで
、順次に回転移動量を選択して指定する。このように、
効率の良い回転移動が可能となり、操作者は、三次元の
ＣＧと実写画像の合成操作を容易に行なうことができる
。
【００１４】
【実施例】以下、本発明の実施例を、図面により詳細に
説明する。
説明する。
【００１５】図１は、本発明を施した画像処理システム
の本発明に係わる構成の一実施例を示すブロック図であ
る。
の本発明に係わる構成の一実施例を示すブロック図であ
る。
【００１６】本実施例の画像処理システムは、合成処理
の対象となる実写画像などを表示するビットマップディ
スプレイ（図中ＣＲＴと記載）１０４、ビットマップデ
ィスプレイ１０４上に表示した画像に対するポインティ
ングデバイスとしてのマウス１０３、本発明に係わる処
理プログラムやデータなどを格納する磁気ディスク１１
０、磁気ディスク１１０に格納しているプログラムやデ
ータを処理可能な状態に登録する主記憶装置１０２、主
記憶装置１０２のプログラムやデータを用いて、本発明
に係わる処理を行なう中央処理装置１０１により構成さ
れている。そして、ビットマップディスプレイ１０４は
、本発明に係わるＣＧの表示に関する平行移動、回転移
動、拡大縮小のパラメタを表示する合成パラメタ表示枠
１０５と、実写画像を表示する画像表示枠１０６を有す
る。また、磁気ディスク１１０は、本発明に係わる合成
処理プログラムを含む種々の処理手順を記述したプログ
ラムを格納するプログラム格納領域１１１と、本発明で
使用する実写画像などのデータを格納するデータファイ
ル格納領域１１２を有する。
の対象となる実写画像などを表示するビットマップディ
スプレイ（図中ＣＲＴと記載）１０４、ビットマップデ
ィスプレイ１０４上に表示した画像に対するポインティ
ングデバイスとしてのマウス１０３、本発明に係わる処
理プログラムやデータなどを格納する磁気ディスク１１
０、磁気ディスク１１０に格納しているプログラムやデ
ータを処理可能な状態に登録する主記憶装置１０２、主
記憶装置１０２のプログラムやデータを用いて、本発明
に係わる処理を行なう中央処理装置１０１により構成さ
れている。そして、ビットマップディスプレイ１０４は
、本発明に係わるＣＧの表示に関する平行移動、回転移
動、拡大縮小のパラメタを表示する合成パラメタ表示枠
１０５と、実写画像を表示する画像表示枠１０６を有す
る。また、磁気ディスク１１０は、本発明に係わる合成
処理プログラムを含む種々の処理手順を記述したプログ
ラムを格納するプログラム格納領域１１１と、本発明で
使用する実写画像などのデータを格納するデータファイ
ル格納領域１１２を有する。
【００１７】このような構成により、本実施例の画像処
理システムは、操作者が、ビットマップディスプレイ１
０４の画像表示枠１０６に表示した実写画像上で、意図
する合成先の隣接する二平面を代表する六つの点をマウ
ス１０３を用いて入力すると、中央処理装置１０１は、
磁気ディスク１１０から主記憶装置１０２にロードした
合成処理プログラムに基づき、合成先の二平面を形成す
る六つの点に対応するＣＧの三次元の回転移動のパラメ
タを算出して、ビットマップディスプレイ１０４の合成
パラメタ表示枠１０５に表示する。そして、操作者が、
この合成パラメタ表示枠１０５のパラメタを選択すると
、選択したパラメタに基づきＣＧ画像を生成し、かつ、
画像表示枠１０６内の実写画像上で、操作者が六つの点
の代表点で入力した合成先の二平面に、このＣＧ画像を
合成する。さらに、操作者が、合成パラメタ表示枠１０
５のパラメタ、例えば、平行移動や拡大縮小のパラメタ
を調整すると、この調整されたパラメタに基づき、画像
表示枠１０６内の実写画像とＣＧ画像との再合成を行な
う。
理システムは、操作者が、ビットマップディスプレイ１
０４の画像表示枠１０６に表示した実写画像上で、意図
する合成先の隣接する二平面を代表する六つの点をマウ
ス１０３を用いて入力すると、中央処理装置１０１は、
磁気ディスク１１０から主記憶装置１０２にロードした
合成処理プログラムに基づき、合成先の二平面を形成す
る六つの点に対応するＣＧの三次元の回転移動のパラメ
タを算出して、ビットマップディスプレイ１０４の合成
パラメタ表示枠１０５に表示する。そして、操作者が、
この合成パラメタ表示枠１０５のパラメタを選択すると
、選択したパラメタに基づきＣＧ画像を生成し、かつ、
画像表示枠１０６内の実写画像上で、操作者が六つの点
の代表点で入力した合成先の二平面に、このＣＧ画像を
合成する。さらに、操作者が、合成パラメタ表示枠１０
５のパラメタ、例えば、平行移動や拡大縮小のパラメタ
を調整すると、この調整されたパラメタに基づき、画像
表示枠１０６内の実写画像とＣＧ画像との再合成を行な
う。
【００１８】このようにして、本実施例の画像処理シス
テムは、従来、一般の操作者にとって、手間のかかった
ＣＧに対する三次元の回転移動のパラメタの算出を、操
作者による簡単な入力操作に基づき画像処理システムが
行ない、かつ、そのパラメタを用いて、姿勢を調整した
ＣＧを生成し、合成して表示する。このことにより、操
作者は、簡単な平行移動や回転移動、および、拡大縮小
などの操作だけで、実写画像とＣＧとの合成を容易に行
なうことができる。以下、その処理動作を、フローチャ
ートを用いて詳しく説明する。
テムは、従来、一般の操作者にとって、手間のかかった
ＣＧに対する三次元の回転移動のパラメタの算出を、操
作者による簡単な入力操作に基づき画像処理システムが
行ない、かつ、そのパラメタを用いて、姿勢を調整した
ＣＧを生成し、合成して表示する。このことにより、操
作者は、簡単な平行移動や回転移動、および、拡大縮小
などの操作だけで、実写画像とＣＧとの合成を容易に行
なうことができる。以下、その処理動作を、フローチャ
ートを用いて詳しく説明する。
【００１９】図２は、図１における画像処理システムの
本発明に係わる処理動作の一実施例を示すフローチャー
トである。
本発明に係わる処理動作の一実施例を示すフローチャー
トである。
【００２０】実写画像とＣＧとを効率良く合成する方法
を示すものであり、まず、操作者が、実写画像とＣＧの
合成方法を起動し（ステップ２０１）、かつ、実写とな
る画像を選択すると、画像処理システムは、操作者が選
択した画像を、図１の表示装置１０４上の画像表示枠１
０６に表示する（ステップ２０２）。
を示すものであり、まず、操作者が、実写画像とＣＧの
合成方法を起動し（ステップ２０１）、かつ、実写とな
る画像を選択すると、画像処理システムは、操作者が選
択した画像を、図１の表示装置１０４上の画像表示枠１
０６に表示する（ステップ２０２）。
【００２１】次に、操作者が、図１のマウス１０３など
の入力装置を用いて、画像表示枠１０６内に表示した実
写画像の合成先の隣接する二平面の六つの代表点を指定
すると（ステップ２０３）、操作者が指定した六つの代
表点の座標から、その代表点を通る二平面の各法線ベク
トルの値を求める（ステップ２０４）。尚、法線ベクト
ルの値の詳しい計算方法に関しては後述する。このよう
にして求めた二平面の各法線ベクトルにＣＧの各法線ベ
クトルを合わせることにより、ＣＧの姿勢を得ることが
できる。すなわち、求めた二平面の各法線ベクトルから
、ＣＧに三次元の回転移動を施すためのパラメタ（ｘ軸
、ｙ軸、ｚ軸回りの回転角）を算出して、図１の合成パ
ラメタ表示枠１０５に表示する（ステップ２０５）。 この回転角（パラメタ）は八組算出されて表示される。 この回転角の計算方法に関しても後述する。
の入力装置を用いて、画像表示枠１０６内に表示した実
写画像の合成先の隣接する二平面の六つの代表点を指定
すると（ステップ２０３）、操作者が指定した六つの代
表点の座標から、その代表点を通る二平面の各法線ベク
トルの値を求める（ステップ２０４）。尚、法線ベクト
ルの値の詳しい計算方法に関しては後述する。このよう
にして求めた二平面の各法線ベクトルにＣＧの各法線ベ
クトルを合わせることにより、ＣＧの姿勢を得ることが
できる。すなわち、求めた二平面の各法線ベクトルから
、ＣＧに三次元の回転移動を施すためのパラメタ（ｘ軸
、ｙ軸、ｚ軸回りの回転角）を算出して、図１の合成パ
ラメタ表示枠１０５に表示する（ステップ２０５）。 この回転角（パラメタ）は八組算出されて表示される。 この回転角の計算方法に関しても後述する。
【００２２】操作者が、八組のパラメタから、順次一組
のパラメタを選択して指定すると（ステップ２０６）、
画像処理システムは、指定したパラメタの組を用いて、
ＣＧに回転移動を行ない、合成用のＣＧ画像を作成する
（ステップ２０７）。そして、画像処理システムは、作
成したＣＧと実写画像を合成して図１のビットマップデ
ィスプレイ１０４に表示する（ステップ２０８）。この
表示に基づき、操作者は、指定したパラメタで、ＣＧと
実写画像が、同じ姿勢で合成されているか否かを確認で
きる。操作者からＯＫの確認が入力され（ステップ２０
９）、さらに、操作者から、ＣＧと実写画像の合成のず
れを微調整するために入力されたＣＧの表示に関する平
行移動、回転移動、拡大縮小などのパラメタに基づき、
ＣＧと実写画像の合成のずれを微調整する（ステップ２
１０、２１１）。
のパラメタを選択して指定すると（ステップ２０６）、
画像処理システムは、指定したパラメタの組を用いて、
ＣＧに回転移動を行ない、合成用のＣＧ画像を作成する
（ステップ２０７）。そして、画像処理システムは、作
成したＣＧと実写画像を合成して図１のビットマップデ
ィスプレイ１０４に表示する（ステップ２０８）。この
表示に基づき、操作者は、指定したパラメタで、ＣＧと
実写画像が、同じ姿勢で合成されているか否かを確認で
きる。操作者からＯＫの確認が入力され（ステップ２０
９）、さらに、操作者から、ＣＧと実写画像の合成のず
れを微調整するために入力されたＣＧの表示に関する平
行移動、回転移動、拡大縮小などのパラメタに基づき、
ＣＧと実写画像の合成のずれを微調整する（ステップ２
１０、２１１）。
【００２３】このように、本実施例によれば、操作者は
、図１の画像表示枠１０６に表示した背景の実写画像を
基準にして、合成先の隣接する二平面を代表する六つの
点を、図１のマウス１０３を用いて入力するだけで、合
成処理に必要な八つのパラメタの組を得ることができ、
かつ、一つのパラメタの組を選択して指定することによ
り、ＣＧと実写画像の合成を容易に行なうことができる
。。
、図１の画像表示枠１０６に表示した背景の実写画像を
基準にして、合成先の隣接する二平面を代表する六つの
点を、図１のマウス１０３を用いて入力するだけで、合
成処理に必要な八つのパラメタの組を得ることができ、
かつ、一つのパラメタの組を選択して指定することによ
り、ＣＧと実写画像の合成を容易に行なうことができる
。。
【００２４】図３Ａおよび図３Ｂは、図１における画像
処理システムの本発明に係る処理動作の一実施例を示す
説明図である。
処理システムの本発明に係る処理動作の一実施例を示す
説明図である。
【００２５】図３Ａは、合成される直方体３００の三次
元的な配置を示し、三次元空間上に与えられた直方体３
００の頂点Ｐ０３１０〜Ｐ７３１７の座標を、各々Ｐ０
＝（Ｘ０、Ｙ０、Ｚ０）、Ｐ１＝（Ｘ１、Ｙ１、Ｚ１）
、Ｐ２＝（Ｘ２、Ｙ２、Ｚ２）、Ｐ３＝（Ｘ３、Ｙ３、
Ｚ３）、Ｐ４＝（Ｘ４、Ｙ４、Ｚ４）、Ｐ５＝（Ｘ５、
Ｙ５、Ｚ５）、Ｐ６＝（Ｘ６、Ｙ６、Ｚ６）、Ｐ７＝（
Ｘ７、Ｙ７、Ｚ７）とする。
元的な配置を示し、三次元空間上に与えられた直方体３
００の頂点Ｐ０３１０〜Ｐ７３１７の座標を、各々Ｐ０
＝（Ｘ０、Ｙ０、Ｚ０）、Ｐ１＝（Ｘ１、Ｙ１、Ｚ１）
、Ｐ２＝（Ｘ２、Ｙ２、Ｚ２）、Ｐ３＝（Ｘ３、Ｙ３、
Ｚ３）、Ｐ４＝（Ｘ４、Ｙ４、Ｚ４）、Ｐ５＝（Ｘ５、
Ｙ５、Ｚ５）、Ｐ６＝（Ｘ６、Ｙ６、Ｚ６）、Ｐ７＝（
Ｘ７、Ｙ７、Ｚ７）とする。
【００２６】図３Ｂは、図２のステップ２０３において
、操作者が指定する合成先の隣接する二平面の六つの代
表点の座標と、それらの平面の各法線ベクトルの関係を
示したものである。すなわち、カメラの焦点距離をｆ、
および、直方体３００の頂点Ｐ０３１０〜Ｐ７３１７を
、ｚ＝ｆの二次元投影面上に透視投影したときの座標を
ｑ０３３０〜ｑ７３３７として、ｑ０＝（ｘ０、ｙ０、
ｆ）、ｑ１＝（ｘ１、ｙ１、ｆ）、ｑ２＝（ｘ２、ｙ２
、ｆ、）、ｑ３＝（ｘ３、ｙ３、ｆ）、ｑ４＝（ｘ４、
ｙ４、ｆ）、ｑ５＝（ｘ５、ｙ５、ｆ）、ｑ６＝（ｘ６
、ｙ６、ｆ）、ｑ７＝（ｘ７、ｙ７、ｆ）とする。尚、
ｑ６＝（ｘ６、ｙ６、ｆ）は、図示していない。また、
座標ｑ０３３０〜ｑ３３３３を通る平面をＦ１３２０と
し、座標ｑ０３３０、ｑ１３３１、ｑ５３３５、ｑ４３
３４を通る平面をＦ２３２１とする。さらに、ｑ０３３
０とｑ１３３１、ｑ１３３１とｑ２３３２、ｑ２３３２
とｑ３３３３、ｑ３３３３とｑ０３３０、ｑ４３３４と
ｑ５３３５、ｑ１３３１とｑ５３３５、そして、ｑ０３
３０とｑ４３３４とを、各々結んだ直線をＬ０３４０〜
Ｌ６３４６とする。また、直線Ｌ０３４０とＬ２３４２
との交点をｑｂ１３５１、Ｌ１３４１とＬ３３４３との
交点をｑｂ２３５２、および、Ｌ５３４５とＬ６３４６
との交点をｑｂ３３５３として、各々の座標をｑｂ１＝
（ｘｂ１、ｙｂ１、ｆ）、ｑｂ２＝（ｘｂ２、ｙｂ２、
ｆ）、ｑｂ３＝（ｘｂ３、ｙｂ３、ｆ）とする。ここで
、例えば、交点ｑｂ１３５１を、直線Ｌ０３４０とＬ４
３４４でも求め、交点ｑｂ１３５１の座標精度を上げて
も良い。次に、交点ｑｂ１３５１とｑｂ２３５２とを結
んだ直線、すなわち、消失線をＬｂ１３６０、また、交
点ｑｂ１３５１とｑｂ３３５３とを結んだ消失線をＬｂ
２３６１とする。さらに、平面Ｆ１３２０の単位法線ベ
クトルをＮ１３７０、また、平面Ｆ２３２１の単位法線
ベクトルをＮ２３７１とする。
、操作者が指定する合成先の隣接する二平面の六つの代
表点の座標と、それらの平面の各法線ベクトルの関係を
示したものである。すなわち、カメラの焦点距離をｆ、
および、直方体３００の頂点Ｐ０３１０〜Ｐ７３１７を
、ｚ＝ｆの二次元投影面上に透視投影したときの座標を
ｑ０３３０〜ｑ７３３７として、ｑ０＝（ｘ０、ｙ０、
ｆ）、ｑ１＝（ｘ１、ｙ１、ｆ）、ｑ２＝（ｘ２、ｙ２
、ｆ、）、ｑ３＝（ｘ３、ｙ３、ｆ）、ｑ４＝（ｘ４、
ｙ４、ｆ）、ｑ５＝（ｘ５、ｙ５、ｆ）、ｑ６＝（ｘ６
、ｙ６、ｆ）、ｑ７＝（ｘ７、ｙ７、ｆ）とする。尚、
ｑ６＝（ｘ６、ｙ６、ｆ）は、図示していない。また、
座標ｑ０３３０〜ｑ３３３３を通る平面をＦ１３２０と
し、座標ｑ０３３０、ｑ１３３１、ｑ５３３５、ｑ４３
３４を通る平面をＦ２３２１とする。さらに、ｑ０３３
０とｑ１３３１、ｑ１３３１とｑ２３３２、ｑ２３３２
とｑ３３３３、ｑ３３３３とｑ０３３０、ｑ４３３４と
ｑ５３３５、ｑ１３３１とｑ５３３５、そして、ｑ０３
３０とｑ４３３４とを、各々結んだ直線をＬ０３４０〜
Ｌ６３４６とする。また、直線Ｌ０３４０とＬ２３４２
との交点をｑｂ１３５１、Ｌ１３４１とＬ３３４３との
交点をｑｂ２３５２、および、Ｌ５３４５とＬ６３４６
との交点をｑｂ３３５３として、各々の座標をｑｂ１＝
（ｘｂ１、ｙｂ１、ｆ）、ｑｂ２＝（ｘｂ２、ｙｂ２、
ｆ）、ｑｂ３＝（ｘｂ３、ｙｂ３、ｆ）とする。ここで
、例えば、交点ｑｂ１３５１を、直線Ｌ０３４０とＬ４
３４４でも求め、交点ｑｂ１３５１の座標精度を上げて
も良い。次に、交点ｑｂ１３５１とｑｂ２３５２とを結
んだ直線、すなわち、消失線をＬｂ１３６０、また、交
点ｑｂ１３５１とｑｂ３３５３とを結んだ消失線をＬｂ
２３６１とする。さらに、平面Ｆ１３２０の単位法線ベ
クトルをＮ１３７０、また、平面Ｆ２３２１の単位法線
ベクトルをＮ２３７１とする。
【００２７】ここで、消失線Ｌｂ１３６０をａ１ｘ＋ｂ
１ｙ＋ｃ１＝０、消失線Ｌｂ２３６１をａ２ｘ＋ｂ２ｙ
＋ｃ２＝０で表すと、単位法線ベクトルＮ１３７０およ
びＮ２３７１は、各々次の式で表せる。
１ｙ＋ｃ１＝０、消失線Ｌｂ２３６１をａ２ｘ＋ｂ２ｙ
＋ｃ２＝０で表すと、単位法線ベクトルＮ１３７０およ
びＮ２３７１は、各々次の式で表せる。
【数１】
【数２】
ただし、
【数３】
【数４】
【数５】
【数６】
以上の式から、操作者による直方体３００の平面Ｆ１３
２０とＦ２３２１を表す六頂点の座標（ｑ０３３０〜ｑ
５３３３５）の指定により、その平面Ｆ１３２０の単位
法線ベクトルＮ１３７０と、平面Ｆ２３２１の単位法線
ベクトルＮ２３７１は、次のようにして算出される。
２０とＦ２３２１を表す六頂点の座標（ｑ０３３０〜ｑ
５３３３５）の指定により、その平面Ｆ１３２０の単位
法線ベクトルＮ１３７０と、平面Ｆ２３２１の単位法線
ベクトルＮ２３７１は、次のようにして算出される。
【数７】
【数８】
ただし、
【数９】
【数１０】
【数１１】
【数１２】
【数１３】
【数１４】
【００２８】ここで、パラメタα、β、γを用いて、ｘ
軸、ｙ軸、ｚ軸回りの回転移動を表す（３×３）行列を
、各々Ｒｘ（α）、Ｒｙ（β）、Ｒｚ（γ）とし、また
、ｘ軸、ｙ軸、ｚ軸回りの順の回転移動を表す行列を、
Ｒ（α、β、γ）＝Ｒｘ（α）Ｒｙ（β）Ｒｚ（γ）＝
［ｒｉｊ］（ｉ、ｊ＝１、２、３）とする。この時、直
交座標系の三軸と三辺を一致させている直方体Ｈ３００
に対して回転移動を施していることから、直方体Ｈ３０
０の一面の法線ベクトルを表しているとみなせる下記数
式で示す単位ベクトルＥ１とＥ２の回転移動に着目して
考える。
軸、ｙ軸、ｚ軸回りの回転移動を表す（３×３）行列を
、各々Ｒｘ（α）、Ｒｙ（β）、Ｒｚ（γ）とし、また
、ｘ軸、ｙ軸、ｚ軸回りの順の回転移動を表す行列を、
Ｒ（α、β、γ）＝Ｒｘ（α）Ｒｙ（β）Ｒｚ（γ）＝
［ｒｉｊ］（ｉ、ｊ＝１、２、３）とする。この時、直
交座標系の三軸と三辺を一致させている直方体Ｈ３００
に対して回転移動を施していることから、直方体Ｈ３０
０の一面の法線ベクトルを表しているとみなせる下記数
式で示す単位ベクトルＥ１とＥ２の回転移動に着目して
考える。
【数１５】
【数１６】
単位ベクトルＥ１に三次元の回転移動Ｒ（α、β、γ）
を施したもの、すなわち、直方体Ｈ３００の一平面を回
転移動したものは、Ｒ（α、β、γ）Ｅ１と表せ、これ
と平面Ｆ１３２０の単位法線ベクトルＮ１３７０が等し
いと考えると、次の式が成り立つ。
を施したもの、すなわち、直方体Ｈ３００の一平面を回
転移動したものは、Ｒ（α、β、γ）Ｅ１と表せ、これ
と平面Ｆ１３２０の単位法線ベクトルＮ１３７０が等し
いと考えると、次の式が成り立つ。
【数１７】
単位ベクトルＥ２に対しても同様に、以下の式が成り立
つ。
つ。
【数１８】
これらの式から、三次元の回転移動のパラメタα、β、
γは、次のようにして求められる。
γは、次のようにして求められる。
【数１９】
実際には、関数ｓｉｎ‐１が二値関数のため、βの値の
候補として、次の二つの値が考えられる。
候補として、次の二つの値が考えられる。
【数２０】
しかし、二つの値のどちらが適切な値かを選択するため
の適当な比較対象がないので、回転移動の二通りの候補
を表示して、どちらが適切かを操作者に選択させる。ま
た、α、γの場合も同様に、値の候補が二通りあり、そ
の結果として、八組の回転移動のパラメタの候補を表示
する。
の適当な比較対象がないので、回転移動の二通りの候補
を表示して、どちらが適切かを操作者に選択させる。ま
た、α、γの場合も同様に、値の候補が二通りあり、そ
の結果として、八組の回転移動のパラメタの候補を表示
する。
【００２９】尚、本実施例では、説明をわかりやすくす
るために、実写画像中の直方体に、ＣＧ画像中の直方体
を合成する例について述べたが、これらの直方体は、仮
想的なもの、例えば、複雑な形状を囲む直方体であって
も良く、複雑な形状の場合にも、その仮想的な直方体の
パラメタから、その形状に応じて、必要なパラメタを計
算することができる。
るために、実写画像中の直方体に、ＣＧ画像中の直方体
を合成する例について述べたが、これらの直方体は、仮
想的なもの、例えば、複雑な形状を囲む直方体であって
も良く、複雑な形状の場合にも、その仮想的な直方体の
パラメタから、その形状に応じて、必要なパラメタを計
算することができる。
【００３０】以上、図１〜図３Ｂを用いて説明したよう
に、本実施例の画像処理システムにおける実写画像とＣ
Ｇの合成方法によれば、従来は一般の操作者にとって、
手間のかかったＣＧに対する三次元の回転移動のパラメ
タの算出を、操作者による簡単な入力操作に基づき、画
像処理システムが行ない、さらに、操作者によるパラメ
タの選択指定に基づき、ＣＧの三次元の回転移動を行な
い、実写画像とＣＧとの姿勢を合致させる。このことに
より、操作に不慣れな一般の操作者にも、容易に実写画
像とＣＧの合成操作を行なうことができる。
に、本実施例の画像処理システムにおける実写画像とＣ
Ｇの合成方法によれば、従来は一般の操作者にとって、
手間のかかったＣＧに対する三次元の回転移動のパラメ
タの算出を、操作者による簡単な入力操作に基づき、画
像処理システムが行ない、さらに、操作者によるパラメ
タの選択指定に基づき、ＣＧの三次元の回転移動を行な
い、実写画像とＣＧとの姿勢を合致させる。このことに
より、操作に不慣れな一般の操作者にも、容易に実写画
像とＣＧの合成操作を行なうことができる。
【００３１】
【発明の効果】本発明によれば、操作が困難な三次元の
回転移動を画像処理システムが支援するので、従来は操
作者の勘にたよって行なっていた三次元の回転移動を、
簡単なポインティングデバイスによる入力だけで行なう
ことができ、実写画像とＣＧとの合成を効率良く行なう
ことが可能である。
回転移動を画像処理システムが支援するので、従来は操
作者の勘にたよって行なっていた三次元の回転移動を、
簡単なポインティングデバイスによる入力だけで行なう
ことができ、実写画像とＣＧとの合成を効率良く行なう
ことが可能である。
【００３２】
【図１】本発明を施した画像処理システムの本発明に係
わる構成の一実施例を示すブロック図である。
わる構成の一実施例を示すブロック図である。
【図２】図１における画像処理システムの本発明に係わ
る処理動作の一実施例を示すフローチャートである。
る処理動作の一実施例を示すフローチャートである。
【図３Ａ】図１における画像処理システムの本発明に係
る処理動作の一実施例を示す説明図の一部である。
る処理動作の一実施例を示す説明図の一部である。
【図３Ｂ】図１における画像処理システムの本発明に係
る処理動作の一実施例を示す説明図の一部である。
る処理動作の一実施例を示す説明図の一部である。
１０１ 中央処理装置
１０２ 主記憶装置
１０３ マウス
１０４ ビットマップディスプレイ
１０５ 合成パラメタ表示枠
１０６ 画像表示枠
１１０ 磁気ディスク
１１１ プログラム格納領域
１１２ データファイル格納領域
３００ 直方体
３１０〜３１７ 頂点Ｐ０〜Ｐ７
３２０〜３２１ 平面Ｆ１〜Ｆ２
３３０〜３３７ 座標ｑ０〜ｑ７
３４０〜３４６ 直線Ｌ０〜Ｌ６
Claims (7)
- 【請求項１】 コンピュータ処理で作成した三次元の
コンピュータグラフィックスを、ラスタ式ディスプレイ
の表示画面上で、操作者が、ポインティングデバイスを
用いて対話式に、実写画像の任意の位置に任意の角度で
合成する画像処理システムにおける実写画像とコンピュ
ータグラフィックスの合成方法において、上記コンピュ
ータグラフィックスの二平面の合成先である上記実写画
像中の二平面の各法線ベクトルを用いて、上記合成先の
二平面に対応する上記コンピュータグラフィックスの二
平面の各回転移動パラメタを求め、該各回転移動パラメ
タに基づき、上記実写画像に上記コンピュータグラフィ
ックスを合成することを特徴とする画像処理システムに
おける実写画像とコンピュータグラフィックスの合成方
法。 - 【請求項２】 請求項１に記載の画像処理システムに
おける実写画像とコンピュータグラフィックスの合成方
法において、操作者が上記ポインティングデバイスを用
いて指定した上記合成先の二平面のそれぞれの消失線を
求め、該それぞれの消失線を用いて上記合成先の各平面
のそれぞれの法線ベクトルを求めることを特徴とする画
像処理システムにおける実写画像とコンピュータグラフ
ィックスの合成方法。 - 【請求項３】 請求項２に記載の画像処理システムに
おける実写画像とコンピュータグラフィックスの合成方
法において、操作者が上記ポインティングデバイスを用
いて指定した上記合成先の各平面の二つの消失点をそれ
ぞれ求め、該二つの消失点を通るそれぞれの上記消失線
を求めることを特徴とする画像処理システムにおける実
写画像とコンピュータグラフィックスの合成方法。 - 【請求項４】 請求項３に記載の画像処理システムに
おける実写画像とコンピュータグラフィックスの合成方
法において、上記それぞれの消失点を、それぞれ隣接す
る上記合成先の二平面から求めることを特徴とする画像
処理システムにおける実写画像とコンピュータグラフィ
ックスの合成方法。 - 【請求項５】 請求項１から請求項４のいずれかに記
載の画像処理システムにおける実写画像とコンピュータ
グラフィックスの合成方法において、上記コンピュータ
グラフィックスは、直交座標系の三軸とそれぞれ平行な
一頂点で交わる三辺を有する直方体であり、該直方体の
コンピュータグラフィックスの二平面の各法線ベクトル
を、上記合成先の二平面の各法線ベクトルに一致させる
それぞれの上記回転移動パラメタ候補を算出して、上記
表示画面上に表示し、操作者が選択して指定した該それ
ぞれの回転移動パラメタ候補のいずれかを用いて、上記
直方体のコンピュータグラフィックスから上記実写画像
に合成するコンピュータグラフィックスを生成すること
を特徴とする画像処理システムにおける実写画像とコン
ピュータグラフィックスの合成方法。 - 【請求項６】 請求項５に記載の画像処理システムに
おける実写画像とコンピュータグラフィックスの合成方
法において、上記直方体のコンピュータグラフィックス
は、任意の三次元コンピュータグラフィックスを囲む仮
想的な直方体であることを特徴とする画像処理システム
における実写画像とコンピュータグラフィックスの合成
方法。 - 【請求項７】 請求項１から請求項６のいずれかに記
載の画像処理システムにおける実写画像とコンピュータ
グラフィックスの合成方法において、合成した上記コン
ピュータグラフィックスと上記実写画像との合成状態を
表示し、該表示した合成状態に基づき、上記操作者が入
力した平行移動と回転移動、および、拡大縮小のそれぞ
れのパラメタを用いて、該コンピュータグラフィックス
と実写画像との合成状態を調整することを特徴とする画
像処理システムにおける実写画像とコンピュータグラフ
ィックスの合成方法。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3070474A JP2720920B2 (ja) | 1991-03-11 | 1991-03-11 | 画像処理システムにおける実写画像とコンピュータグラフィックスの合成方法 |
| EP92102623A EP0503313A2 (en) | 1991-03-11 | 1992-02-17 | Method of synthesizing a three-dimensional image in a computer graphics system |
| US07/837,890 US5325470A (en) | 1991-03-11 | 1992-02-20 | Method of synthesizing real image and computer graphic in image processing system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3070474A JP2720920B2 (ja) | 1991-03-11 | 1991-03-11 | 画像処理システムにおける実写画像とコンピュータグラフィックスの合成方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH04281572A true JPH04281572A (ja) | 1992-10-07 |
| JP2720920B2 JP2720920B2 (ja) | 1998-03-04 |
Family
ID=13432564
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP3070474A Expired - Lifetime JP2720920B2 (ja) | 1991-03-11 | 1991-03-11 | 画像処理システムにおける実写画像とコンピュータグラフィックスの合成方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US5325470A (ja) |
| EP (1) | EP0503313A2 (ja) |
| JP (1) | JP2720920B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1997018668A1 (fr) * | 1995-11-14 | 1997-05-22 | Sony Corporation | Dispositif et procede de traitement d'images |
| JPH10116353A (ja) * | 1996-10-11 | 1998-05-06 | Kajima Corp | 施工用移動体の遠隔操作支援画像システム |
| US6999069B1 (en) | 1994-03-17 | 2006-02-14 | Fujitsu Limited | Method and apparatus for synthesizing images |
| JP2016053961A (ja) * | 2015-09-28 | 2016-04-14 | 国土交通省国土技術政策総合研究所長 | 情報処理装置、情報処理方法及びプログラム |
Families Citing this family (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5602564A (en) * | 1991-11-14 | 1997-02-11 | Hitachi, Ltd. | Graphic data processing system |
| JP2773517B2 (ja) * | 1992-02-27 | 1998-07-09 | 三菱電機株式会社 | プログラム表示装置 |
| GB2270243B (en) | 1992-08-26 | 1996-02-28 | Namco Ltd | Image synthesizing system |
| KR950006776B1 (ko) * | 1993-01-14 | 1995-06-22 | 삼성전자주식회사 | 디지탈 영상 데이타의 보간방법 및 회로 |
| CA2121005C (en) * | 1993-04-15 | 2005-01-11 | Masaaki Oka | Methods and apparatus for synthesizing a three-dimensional image signal and producing a two-dimensional visual display therefrom |
| US6407817B1 (en) * | 1993-12-20 | 2002-06-18 | Minolta Co., Ltd. | Measuring system with improved method of reading image data of an object |
| US5511153A (en) * | 1994-01-18 | 1996-04-23 | Massachusetts Institute Of Technology | Method and apparatus for three-dimensional, textured models from plural video images |
| JPH07311857A (ja) * | 1994-05-16 | 1995-11-28 | Fujitsu Ltd | 画像合成表示装置およびシミュレーションシステム |
| US6047130A (en) * | 1995-04-24 | 2000-04-04 | Environmental Protection Systems, Inc. | Apparatus and method for portrait photography |
| JP3804328B2 (ja) * | 1999-03-02 | 2006-08-02 | 株式会社セガ | 画像処理装置及び画像処理方法 |
| US6968094B1 (en) * | 2000-03-27 | 2005-11-22 | Eastman Kodak Company | Method of estimating and correcting camera rotation with vanishing point location |
| WO2002061368A2 (en) * | 2001-02-01 | 2002-08-08 | Marel Hf. | Method and apparatus for determining a three dimensional image of a moving object by means of light |
| JP3450833B2 (ja) * | 2001-02-23 | 2003-09-29 | キヤノン株式会社 | 画像処理装置及びその方法並びにプログラムコード、記憶媒体 |
| US20040145910A1 (en) * | 2003-01-29 | 2004-07-29 | Guide Corporation (A Delaware Corporation) | Lighting assembly |
| US20070216711A1 (en) * | 2006-03-14 | 2007-09-20 | Microsoft Corporation Microsoft Patent Group | Abstracting transform representations in a graphics API |
| US20090021533A1 (en) * | 2007-07-17 | 2009-01-22 | Michael Guerzhoy | Method For Extracting An Inexact Rectangular Region Into An Axis-Aligned Rectangle Image |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4835532A (en) * | 1982-07-30 | 1989-05-30 | Honeywell Inc. | Nonaliasing real-time spatial transform image processing system |
| JPS61267182A (ja) * | 1985-05-22 | 1986-11-26 | Hitachi Ltd | 映像合成方式 |
| JPS62102369A (ja) * | 1985-10-29 | 1987-05-12 | インタ−ナショナル ビジネス マシ−ンズ コ−ポレ−ション | グラフイツク物体の３次元透視投影を生成する方法 |
| JP2667835B2 (ja) * | 1987-10-09 | 1997-10-27 | 株式会社日立製作所 | コンピユータグラフイツクス表示装置 |
| US5046852A (en) * | 1988-09-16 | 1991-09-10 | The Boeing Company | Method and apparatus for bending an elongate workpiece |
| US4933864A (en) * | 1988-10-04 | 1990-06-12 | Transitions Research Corporation | Mobile robot navigation employing ceiling light fixtures |
-
1991
- 1991-03-11 JP JP3070474A patent/JP2720920B2/ja not_active Expired - Lifetime
-
1992
- 1992-02-17 EP EP92102623A patent/EP0503313A2/en not_active Ceased
- 1992-02-20 US US07/837,890 patent/US5325470A/en not_active Expired - Fee Related
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6999069B1 (en) | 1994-03-17 | 2006-02-14 | Fujitsu Limited | Method and apparatus for synthesizing images |
| WO1997018668A1 (fr) * | 1995-11-14 | 1997-05-22 | Sony Corporation | Dispositif et procede de traitement d'images |
| US6021229A (en) * | 1995-11-14 | 2000-02-01 | Sony Corporation | Imaging processing method for mapping video source information onto a displayed object |
| JPH10116353A (ja) * | 1996-10-11 | 1998-05-06 | Kajima Corp | 施工用移動体の遠隔操作支援画像システム |
| JP2016053961A (ja) * | 2015-09-28 | 2016-04-14 | 国土交通省国土技術政策総合研究所長 | 情報処理装置、情報処理方法及びプログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0503313A3 (ja) | 1994-03-16 |
| EP0503313A2 (en) | 1992-09-16 |
| US5325470A (en) | 1994-06-28 |
| JP2720920B2 (ja) | 1998-03-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH04281572A (ja) | 画像処理システムにおける実写画像とコンピュータ グラフィックスの合成方法 | |
| JP3840663B2 (ja) | 画像処理装置及び方法 | |
| US4600919A (en) | Three dimensional animation | |
| EP0283159B1 (en) | Electronic image processing | |
| JP3571859B2 (ja) | 画像表示制御装置および画像表示システム | |
| CN107248193A (zh) | 二维平面与虚拟现实场景进行切换的方法、系统及装置 | |
| KR100389796B1 (ko) | 애니메이션 데이타 작성 방법 및 장치 | |
| JPH05290146A (ja) | 三次元空間中の物体を回転させるグラフィック表示方法及び装置 | |
| EP2595040A1 (en) | Information processing device, method of processing information, and program | |
| CN106296598A (zh) | 三维姿态处理方法、系统及拍摄终端 | |
| JP3104638B2 (ja) | ３次元画像作成装置 | |
| JP6682984B2 (ja) | 自由視点映像表示装置 | |
| Rastogi et al. | Telerobotic control with stereoscopic augmented reality | |
| JP6719596B2 (ja) | 画像生成装置、及び画像表示制御装置 | |
| JP2832463B2 (ja) | ３次元モデルの再構成方法および表示方法 | |
| CN109074670B (zh) | 信息处理装置、图像生成方法以及记录介质 | |
| JP4099830B2 (ja) | 特殊効果装置、画像処理方法及び対象画像生成方法 | |
| JP3309841B2 (ja) | 合成動画像生成装置および合成動画像生成方法 | |
| JP4568050B2 (ja) | カメラパラメータ算出較正装置およびカメラパラメータ算出較正プログラム | |
| JP3361652B2 (ja) | 立体図形配置入力方法及びグラフィックシステム | |
| JPH10149455A (ja) | 画像生成表示装置および生成表示画像編集装置 | |
| JPH08263696A (ja) | ３次元オブジェクトモデル作成方法 | |
| US6633291B1 (en) | Method and apparatus for displaying an image | |
| JP3516377B2 (ja) | 多関節構造体の運動像生成方法及びそれを記録した記録媒体及びそれを使った運動像生成装置 | |
| JP3441804B2 (ja) | 画像処理装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| EXPY | Cancellation because of completion of term |