JPH10503627A - 改良型クロマキー・システム - Google Patents

Abstract

(57)【要約】 クロマキー・システム（１０、１４、５０、６０）と接続して使われるクロマキー・パネル（２０）を発表する（図を参照）。そのパネル（２０）はカラー・パターン（４０）を備え、そこでは、複数の最初の位置に色指標スペクトルの中から選ばれた最初の色を備え、複数の二番目の位置には色指標スペクトルの中から二番目の色を備える。

Description

【発明の詳細な説明】 発明の名称 改良型クロマキー・システム 発明の属する技術分野 本発明はスタジオにおけるクロマキー技術を含む画像処理の方法と装置に関す るものである。 発明の背景 背景のクロマキー・パネルは、前景の像と仮想の背景とを組み合わせるのを容 易にするために通常テレビやビデオの製作の技術に使用される。前景となる像は クロマキー・パネルを背景としてその画像が捉えられ、背景のクロマキー・パネ ルの色は分かっているので上記の画像で検出され仮想の背景と置き換えられる。 その製作に関する一つの問題は、カメラの置き換えやパン、ティルト、ズーム・ イン、ズーム・アウトによる前景の像の変化が背景に自動的に加えられないとい う点である。 この問題の解決のために設計されたシステムにアルティマッテ（Ultimatte） 社の‘仮想スタジオ’がある。‘仮想スタジオ’にはカメラの装着台から直接カ メラのパンやティルトの角度を測定する特別なメモリ・ヘッド用の台を必要とす る。この方法の欠点は背景の遠近感の完全な変換を得るために、レンズのズーム の状態が読み込まれて即時にカメラの位置決めがなされなければならないという ことである。また、この方法は全ての個々のカメラの装着台を、メモリ・ヘッド 用の台に取り替えなければならず、多数のカメラが使われる場合には、システム の費用がかさみ操作が複雑になる。また、この方法はつなぎ目無しの前景と背景 の合成には精度が不十分である。 スムージングや、指向性微分を見つけ出す事に立脚した昔ながらの輪郭線抽出 法は、以下の出版物に書かれており、参考までにここに示す： 「輪郭抽出のためのコンピュータによるアプローチ」 カニー・Ｊ著。ＩＥＥＥ Ｔｒａｎｓ．ｏｎ ＰＡＭＩ、ＰＡＭＩ−８第六巻。 １９８６年、６７９−６９７頁。 Ｈｏｕｇｈ変換に基づいた昔ながらの輪郭線抽出法は以下の出版物の中に見い だせる。参考までにここに示す： 「Ｈｏｕｇｈ変換について」 Ｊ．イリングワース／Ｊ．キトラー著。ＣＶＧＩＰ、４４、１９８８年、８７ −１１６頁。 図ＢＡ−１はクロマキー・システムの研究段階の単純化されたブロック・ダイ アグラムである。 発明の要旨 本発明はクロマキー法の改良された方法と装置とを与えようとするものである 。 本発明の実施形態とともに供給されるものに、クロマキー・システムと接続し て使われる色指標スペクトルを持ったクロマキー・パネルがあり、そのパネルは 、複数の最初の位置に色指標スペクトルの中から選ばれた最初の色を備え、複数 の二番目の位置には色指標スペクトルの中から二番目の色を備える。 さらに、本発明の実施形態とともに、上記の最初の色と二番目の色とは同じ色 相と、異なる輝度とを備える。 本発明の実施形態とともに、加えて与えられるクロマキー・システムは以下の 三つのものを備える。既知のパターンと題材とを持ち、少なくとも一つの非均一 のクロマキー・パネルを包含した前景の像を捉える動作を行うフレーム・グラバ ーと、取り込んだパネルの少なくともある一部と既知のパターンとの比較によっ て、遠近感の変換を計算する動作を行う遠近変換計算ユニットと、背景の画像を 受け取り、その上に遠近変換を与え、最低１パネルの内、取り込んだ部分を変換 後の背景と入れ換えて混成画像を生成するような背景生成ユニット。 さらにその上、本発明の実施形態とともに、このシステムは三次元の背景画像 ソースを包含しており、これは背景生成ユニットに背景の景色の三次元的表現を 与えるよう動作する。 加えて、本発明の実施形態とともに、このシステムはまた、背景の画像シーク エンス・ソースを包含しており、背景生成ユニットに背景の景色の時間列を与え るよう動作し、そこで遠近変換計算ユニットが時間列の速度に即してリアルタイ ムで動作する。 また、本発明の実施形態とともに、背景の画像シークエンス・ソースはビデオ ・クリップのソースを包含し、そこでは遠近変換計算ユニットがビデオとリアル タイムで動作する。 さらに、本発明の実施形態とともに、このシステムは図形的に動画の背景画像 ソースを包含し、これは背景生成ユニットに図形動画背景の景色を与える動作を する。 なお、さらに、本発明の実施形態とともに、このシステムは、写真の背景画像 ソースを包含し、背景生成ユニットに写真の背景の景色を与える動作をする。 加えて、本発明の実施形態とともに、このシステムはユーザー・インターフェ ースを包含している。これは背景生成ユニットと通信し、背景画像の中の個々の 仮想物体位置に対して、その仮想物体位置が物体の前なのか後ろなのかを決定す る。また、そこで、背景生成ユニットは物体を仮想物体位置の後ろに挿入し、あ るいは、前面の仮想物体位置を物体の後ろに置く。 さらに、本発明の実施形態とともに、個々の仮想物体位置は単一の画素を背景 の画像の内部に包含している。 なお、さらに、本発明の実施形態とともに、このシステムは、カメラの照準用 の距離計を包含しており、少なくとも一つのクロマキー・パネルと被写体とを捉 え、カメラの視野内で複数の場所の範囲を測定するよう動作する。そして、背景 生成ユニットはかぶせた背景画像の場所と被写体の場所とを重ねる動作をするが 、この時、より小さい範囲を持つ上記のかぶせた場所が複合画像に含まれるよう にする。 さらに、本発明の実施形態とともに、このシステムは、少なくとも一つのクロ マキー・パネルと被写体とを捉える複数のカメラを包含している。 なおさらに、本発明の実施形態とともに、少なくとも一つのクロマキー・パネ ルは複数のクロマキー・パネルを包含している。 加えて、本発明の実施形態とともに、背景生成装置は、クロマキー・パネルの 画素を変換済みの背景と入れ換える動作をするが、これはカメラの瞬間的な視野 がクロマキー・パネルの視野よりも広い場合にも行われる。 さらに、本発明の実施形態とともに、色主要スペクトルを持ったクロマキー・ システムと組み合わせられるクロマキー法が用意される。このクロマキー法は色 主要スペクトル中の最初の色を複数の最初の位置に備え、色主要スペクトル中の 二番目の色を複数の二番目の位置に備えるクロマキー・パネルを包含し、パネル と被写体を含んだ前景画像を捉える。 加えて本発明の実施形態とともに、クロマキー法が用意され、これは前景の画 像を捉え、少なくとも一つの非均一のクロマキー・パネルを持ち、既知のパター ンと被写体とを持ち、少なくとも一つのパネルの画像と既知のパターンとを比較 して遠近変換の計算を行い、背景の画像を受け取り、そこに遠近変換を加えて、 少なくとも一つのパネルを変換済みの背景と入れ替え、それによって合成画像を 生成する。 図面の簡単な説明 本発明は、下記の図面と関連した以下の詳細な記述によって理解され評価され るであろう。 図ＢＡ−１は、従来技術によるクロマキー・システムの簡単なブロックダイア グラムである。 図１は、本発明の実施形態とともに、構成され動作するクロマキー・システム の簡単なブロックダイアグラムである。 図２は、図１における遠近変換計算ユニットと遠近変換ユニットとクロマキー ・ユニットの動作の一実施方法の簡単なフローチャートである。 図３は、多くのカメラを持ったスタジオ内における、図１の装置を適用した簡 単なブロックダイアグラムである。 図４は、図１の装置を変更したもので、空間分析用の、カメラに取り付けられ た照準の距離計が前景の物体の距離情報を得るのに使われる。 図５は、本発明の実施形態に従って構成され動作するクロマキー・パネルのた めのパターンの一部の図である。 図６は、図５のパネル部に対し、カメラを置き換えた場合の効果を図示してあ る。 図７は、図５のパネル部に対してのズーム効果を図示してある。 図８は、図５のパネル部に対してのロール効果を図示してある。 図９は、図５のパネル部に対してのカメラのティルトと置き換えを組み合わせ た効果を図示してある。 図１０は、図５のパネル部に対してのカメラのパンと置き換えを組み合わせた 効果を図示してある。 実施形態の詳細な説明 図ＢＡ−１は、従来技術によるクロマキー・システムを図示したものであり、 コロマキー化装置２５０と背景画像格納システム２６０とを備える。従来技術の 上記システム２６０は‘仮想’背景の風景を生み出すための背景データの格納場 所を包含している。 参考として図１を挙げるが、これは本発明の実施形態とともに構成され動作す るところの改良型のクロマキー・システムを図示したものである。 図１の装置は伝統的なカメラ台１４の上に載せられた伝統的なカメラ１０を包 含している。カメラ１０は人物のような主題もしくは前景の背景幕としてのクロ マキー・パネル２０の映像を捉える。クロマキー・パネルは通常、以下のような 特色を持つ色付きパターン４０を備える： ａ．上記パターンには、２つあるいはそれ以上の色合いが含まれ、その両方ある いは全ては該装置のクロマキー・スペクトルの色のいずれかである。 ｂ．上記パターンには、既知の実在するパターンにまで歪まされた画像パターン もありうる。 ｃ．上記パターンには、実在するパターンの、カメラ１０のズームや直線的なあ るいは角のついた置き換え等の画像処理の最中に起こる遠近歪みは許容される。 これらは突き止められ仮想背景に加えられる。 上記の特色を持つサンプルのパターンが、図５に関してより詳細に以下に記述 される。図１の装置はクロマキー化装置５０と背景生成機６０とを包含する。ク ロマキー化装置５０はクロマキー・パネルに対応するところのカメラが出力する 画像の中の領域を認識し、これらの領域を背景生成機６０によって供給される仮 想の背景と入れ換えるような動作をする。 本発明の特別な点は、背景生成機６０によって与えられる背景が、現在のカメ ラの向いている方向に関して遠近法的であり、望ましくもボケや影や光の非均一 性のような前景の画像の他の特色と結合されている。 背景生成機６０には、カメラ１０から前景の画像を取り込み、遠近変換計算ユ ニット８０にそれを与える、伝統的なフレーム・グラバー７０を包含している。 遠近変換計算ユニット８０は、既知のクロマキー・パネルのパターンと比較する ことにより、捉えた前景画像の中のクロマキー・パネルのパターンの遠近変換の 結果を分析するように動作する。望ましくも、ボケや影や光の非均一性のように パネル・パターンに影響するような他の画像処理の特色も分析される。 遠近変換計算ユニット８０は変換パラメータを遠近変換ユニット９０に与え、 遠近変換ユニット９０は希望する仮想背景画像に対して遠近変換を施す。仮想背 景はフレーム・グラバー１２６と連関するハード・ディスク１００やビデオ・レ コーダ１１０（ディスク、カセット、テープ）等の好むソースから、あるいは動 画コンピュータ１３２から与えられる。 このシステムの出力は画像１４２であり、これは聴衆に放送されたり表示され たりし、前景画像の遠近感や、ボケや影や光のような他の現実効果を備える仮想 背景を包含している。画像１４２における遠近効果や、ボケや光の効果は、元の 前景画像における同様の効果を持つ時間の変化に、時間的に正確に呼応するかた ちで変化すると言える。 ここで、参考として図２は遠近変換計算ユニットの動作の一実施方法を示す簡 単なフローチャートであり、このユニットは図１における遠近変換ユニットおよ びクロマキー・ユニットである。 図２の方法は、望ましくは以下のステップを包含する： ステップ１２０：フレーム・グラバーはカメラの出力である一度に１フィール ドあるいは一度に１フレーム分を捉え、ディジタイズにかける。 カメラの角度の動きに応じて、１フィールドづつ処理するのが望ましい。 ステップ１２２：もし現在処理中のフィールドがセッションの最初のフレーム に属するものであるなら、ステップ１４０に進み、さもない時は、つまり、もし 現在処理中のフィールドがセッションの次のフィールドである時は、ステップ１ ２４に進む。 ステップ１２４：一つ前のフィールドの対応する位置を囲むウィンドウの中で 、一つ前のフィールドにおいて分析されたパターンの部位を検索する。その代わ りとして、一つ前のフィールドの位置からの距離が、連続する最後のフィールド の中で見つけたパターン位置に従ってカメラの角速度を予測することで決定され るような新しい場所を囲むウインドウの内部で検索は行われる。 パターンのへりを見つけるのに、以下のいずれかの様な伝統的な輪郭検出法が 使われるであろう： カニー・Ｊ．著。「輪郭検出のためのコンピュータによるアプローチ」ＩＥＥ Ｅ Ｔｒａｎｓ．ｏｎ ＰＡＭＩ，ＰＡＭ−８ 第６巻。１９８６年、６７９− ６９７頁。もしくは、 Ｊ．イリングワース／Ｊ．キトラー著。ＣＶＧＩＰ、４４、１９８８年、８７ −１１６頁。 ステップ１３０：決定すべき事項：現在のフィールドは‘新しい’フレームに 属するのか、つまり、現在のフィールドはカメラが切り替えられた新しいカット に直接続くものなのか、あるいは、現在のフレームは連続的なフレームなのか、 つまり、同じカメラ位置からの前のフレームへ加えられるフレームなのか。ステ ップ１３０の後の処理はフィールド毎に行われる。 もし、そのフレームが新しいフレームであるとしたら、： ステップ１４０：随意に、クロマキー・スペクトルの中にある色を持つ画素の 領域を探すことにより、カメラの出力画像の中から、パネルを見つけ出す。任意 の開始点からよりむしろ、この開始点から、パターンの輪郭検出は行われるであ ろう。 ステップ１５０：捉えたパネル部位に対して、上記に参照したカニーとイリン グワースの書物にあるような伝統的な方法を用いて、なるべく１画素あるいは下 部画素単位の精度で輪郭検出を行う。パターンの線は検出された輪郭を使って描 かれる。通常、二つの輪郭線が水平／垂直のいずれかの方向に沿って見つかり、 かつ、三つの輪郭線が上記の反対の方向に沿って見つかり、かつ、全部で５本の 線が明瞭になるまでは、水平／垂直のそれぞれの方向に沿って輪郭検出が行われ る。一つの方向に対して２本の線を、また他の方向に対して３本の線を見つける ことによって、これらの線を結ぶ６個の頂点ができる。これらの線は結果的に、 ステップ１６０への参考として以下に記述する既知のパネル・パターンに一致す る。 ステップ１５４：検出された輪郭線の中において、パターンとそのパターンを 不明瞭にする非パターンの被写体、例えば影とかレンズの歪みとか光の非均一性 などとを区別する。例として、パターンの被写体は図５のパターン中におけるよ うに直線の要素によって区別され得るものである、というのは、非パターンの被 写体は普通湾曲した輪郭線を持つものであるから。また、カメラの動きに垂直な 方向においてパターンの輪郭線はシャープであるのに対し、光の非均一性による もののように、非パターンの輪郭線は多くなめらかである。非パターンの輪郭線 の位置は仮想背景画像の次の修正の目的で蓄積される。非パターンの輪郭線は次 の分析では無視される。 また、影の輪郭線の内部か、光の非均一な輪郭の内部か、ぼかしのようなレン ズのアビレーション（abberation）の隔離された領域の輪郭線の内部の、色強度 マップの指標も蓄積される。 ステップ１５８：希望する場合、フィールドの画像処理を行っている間に、カ メラをスキャンすることによってパターンに取り込まれたボケを定量化する。画 像の中の複数の場所におけるボケのレベルは、同じボケのレベルが仮想的に仮想 背景に加えられる様に蓄積される。多く、ボケのレベルは、検出された線上の画 素の格子に関するボケのレベルを示す‘マップ’として蓄積される。他の画像の 点におけるボケのレベルはこのマップから修正加筆される。 ステップ１６０：画像パネル部における少なくとも４つの場所（通常、頂点） に対して、元のパネル・パターンの中にマッチする同じ数の場所（頂点）を探す 。例えば、線の要素間の同じものの無い比率に基づいて場所のマッチがとられる 、この詳細は図５を参考にして下記にある。局部化は、１方向に普通２つの線要 素が必要であるので、垂直方向には３本の検出された線が必要である。 元のパネル・パターンの場所（Ｘi、Ｙi）に対応する数の、画像パネルの少な くとも４つの場所（ｘi、ｙi）が通常対応させられる。 ステップ１６４：それまでの方向やカメラの元の方向に関して線形置き換え、 角の付いた置き換え、撮影カメラのズーム変化を計算するのに、組になった場所 を使う。 その計算は遠近変換に対して以下の式１〜７に基づく： ここで、Ｘ0、Ｙ0、Ｚ0＝撮影カメラの線形置き換え； 角の付いた置き換えのパラメータはそれぞれα（パン）、β（ティルト）、ｇ ａｍｍａ（ロール）である； ｆ＝撮影カメラのズーム； Ｒx（α）＝Ｘ軸に関する回転； Ｒy（β）＝Ｙ軸に関する回転； Ｒz（ ）＝Ｚ軸に関する回転； ステップ１７０：図１における、フレーム・グラバー７０かハード・ディスク １００か動画コンピュータ１３２かから背景画像を受け取り、線形置き換えや角 度の付いた置き換え、撮影カメラの焦点距離の変更を再生するために、背景画像 を変換する。中心を座標（Ｘi、Ｙi）に持つ背景画素ｉを全て、式（１〜７）を 用いて（ｘi，ｙi）の位置へ変換される。典型的な例として、処理は逆に行われ る：中心を（ｘi，ｙi）、これは移動元の位置で（Ｘi、Ｙi）を持つ、移動先画 素ｉは式６と７の逆を用いて計算される。移動元の近傍の画素を一番近くにある 画素を用いて双線近似あるいは三線近似によって重み付けすることによって、移 動先画素値は計算される。 ステップ１７４：希望する場合は、蓄積されたボケた、影と光の非均一性のデ ータに変換済みの画像を仮想的に加える様に変換済みの画像は修正されて、それ によって、前景において起こっている効果と同じ種類のものを背景の中でエミュ レーションする。 ステップ１８０：混成画像は、前景画像クロマキー・パネルの画素を、変換さ れ修正された背景画像の対応する画素に置き換えることによって生成される。 図３は、図１の装置の一応用例の簡単なブロック・ダイアグラムである。これ は多数のカメラを備えるスタジオにおけるものであり、ｎ台のカメラ１０の列と 製作者が一つのカメラから別のカメラへと切り替える事ができる様な切り替え機 １５０とを含んでいる。唯一の背景生成機６０がカメラ１０の列には必要である と理解されたい。 図４は、図１の装置に手を加えて、遠近変換された三次元背景を生成するもの である。コンピュータのハード・ディスクが並んだような記憶媒体２６０は仮想 三次元背景を記憶するべく用意されている。空間解像度を持った距離計２７０は 通常、パルス式レーザーの送信／受信機のモジュールであり、撮影カメラの照準 であり、‘飛行時間’のパルスを用いて各可視画素あるいは画素群の範囲を測定 するカメラの視野をスキャンする。距離計２７０は、カメラ１０やカメラ台１４ と組み合わされて、捉えた画像の可視な画素や画素群への範囲を検出するべく動 作する。レーザーの制御と検出のための信号処理機２７４は、距離計２７４と組 み合わされてレーザーのパルスのタイミングを制御したり、受け取ったエコーか らの瞬間的な範囲を抽出する。 クロマキー化装置５０はクロマキー化装置２８０に置き換えられているが、こ れは吸蔵分析機能によって増大している。クロマキー・パネルの画素は変換後の 望ましく修正された仮想背景によって置き換えられている。背景の各画素に対し て距離計によって測定された範囲は、対応する背景画素のＺ値と比較される。も しこのＺ値が範囲よりも小さいときは、クロマキーは背景の画素を表示する。 図５を参考までに掲げる、これは本発明の実施形態に呼応して構成され動作す るようなクロマキー・パネルのパターンのある部位を図示したものである。 図５のパターン部はクロマキー・スペクトルの中の二つの二者択一の影を持つ 四辺形の一様でないチェッカー盤から通常成っている。四辺形のへりは二つの方 向に沿って並んでおり、水平や垂直方向のように直立ではあっても、必ずしもそ うでなければならない訳では無い。図５のパターン部は各方向ｄに対して次のよ うな属性を持つことが望ましい： 全ての頂点６１０に対して、ｄ方向に沿って片側の線要素６２０の長さと、ｄ 方向に沿って他の側の線要素６３０の長さとの間の比率は同じものはない。言葉 を変えて言えば、ｄ方向にあるいは両方向に沿った隣接する線要素が線間におい て同じ比率を持つ様な頂点はないという事である。この特質は、検出された時に 、上記比率を計算し、それを様々な頂点に関する既知の比率と比較することによ り頂点に対し配置されることを許す。 例えば、図示された実施形態において、要素６２０と６３０との間の比率は２ であり、図５の６１０以外のいかなる頂点も同じ２という比率を持たない。 パターンは、また次のような二つの特質を持つことが望ましい： ａ．少なくとも１方向に２つのパターン頂点と他方向に３つのパターン頂点がカ メラの最小の視野（最大の拡大率）内に含まれる。 ｂ．カメラの最大視野（最小の拡大率）において、撮影カメラの解像度は隣り合 う輪郭線が伝統的輪郭検出法で分離できるのに十分である。 適切なパネルは約３ｍ×３ｍの大きさで不均等なチェッカー盤のパターンを持 ち、一つの方向あるいは各方向に沿った隣接する線要素間の比率の並びは、以下 の数字の順列である：１．０１，１．０３，１．０５，１．０７，１．０９，１ ．１１，１．１３，１．１５，１．１７，１．１９，．．．．．。カメラの最小 の視野（最大の拡大率）の中に少なくとも６つのパターン頂点が含まれるような 計算を行って、最大の線要素は決定され得る。上記の数字の順列は小さい比率が 大きな比率に隣接するのが望ましい。例えば、最初の６個の数字は：１．０１， １．１９，１．０３，１．１７，１．０５，１．１５，等々。 もし望めば、カメラの視野はクロマキー・パネルの大きさを越える事もできる 。 参考までに図６−１０を掲げる、これは、図５のパネル部でのカメラの置き換 えやズームやロールやティルトと置き換えの組み合わせの効果を図示するもので ある。この仕様と請求項においては、ロールとティルトとパンはそれぞれＺ軸、 Ｘ軸、Ｙ軸に関する角度の付いた置き換えであり、パネル面はＸ−Ｙ平面である 。 図９において、カメラは初めティルトされ、その後、パネル面に平行に置き換 えがされ、同じパネル部を捉える。図１０においては、カメラは初めパンされ、 その後、パネル部に平行に置き換えがなされて同じパネル部を捉える。 短縮形‘ＦＧ’と‘ＢＧ’は、それぞれ‘前景’と‘背景’の意で使われる。 ‘前景’の語は、主題（おしゃべり番組の主役のように）と、背景幕であるクロ マキー・パネルに相当する。‘背景’の語は、戸外の景色の画像の様に、クロマ キー・パネルを置き換える画像に相当する。 本発明のソフトウェアの構成要素は、もし希望すれば、ＲＯＭ（読みだし専用 メモリ）で与えられる。ソフトウェアの構成要素は一般的に、もし希望すれば、 伝統的な技術を用いてハードウェアで与えられる。はっきりとさせるために別々 の実施形態の分脈の中に分かれて記述されている、この発明の様々な特徴は、一 つの実施形態の中で一緒に与える事もできる。逆に言えば、この発明の様々な特 徴は、簡潔にするために一つの実施形態の分脈の中で記述されているが、別々に 与えることもできるし、他の適当な下位の組み合わせにおいて与える事もできる 。 技術に長けた人にとって、本発明は上において特に示し記述したものに限定さ れないということを理解されたい。むしろ、本発明の範囲は以下の請求範囲によ って決まる：

───────────────────────────────────────────────────── フロントページの続き (81)指定国 ＥＰ(ＡＴ，ＢＥ，ＣＨ，ＤＥ， ＤＫ，ＥＳ，ＦＲ，ＧＢ，ＧＲ，ＩＥ，ＩＴ，ＬＵ，Ｍ Ｃ，ＮＬ，ＰＴ，ＳＥ)，ＯＡ(ＢＦ，ＢＪ，ＣＦ，ＣＧ ，ＣＩ，ＣＭ，ＧＡ，ＧＮ，ＭＬ，ＭＲ，ＮＥ，ＳＮ， ＴＤ，ＴＧ)，ＡＰ(ＫＥ，ＭＷ，ＳＤ，ＳＺ，ＵＧ)， ＡＭ，ＡＴ，ＡＵ，ＢＢ，ＢＧ，ＢＲ，ＢＹ，ＣＡ，Ｃ Ｈ，ＣＮ，ＣＺ，ＤＥ，ＤＫ，ＥＥ，ＥＳ，ＦＩ，ＧＢ ，ＧＥ，ＨＵ，ＩＳ，ＪＰ，ＫＥ，ＫＧ，ＫＰ，ＫＲ， ＫＺ，ＬＫ，ＬＲ，ＬＴ，ＬＵ，ＬＶ，ＭＤ，ＭＧ，Ｍ Ｎ，ＭＷ，ＭＸ，ＮＯ，ＮＺ，ＰＬ，ＰＴ，ＲＯ，ＲＵ ，ＳＤ，ＳＥ，ＳＧ，ＳＩ，ＳＫ，ＴＪ，ＴＭ，ＴＴ， ＵＡ，ＵＧ，ＵＳ，ＵＺ，ＶＮ

Claims (1)

1. 【特許請求の範囲】 １．色指標スペクトルに含まれる一番目の色を持つ複数の一番目の場所と、 色指標スペクトルに含まれる二番目の色を持つ複数の二番目の場所と、 を含み、色指標スペクトルを持つクロマキー・システムと共に使用されるクロマ キー・パネル。 ２．請求項１において、一番目の色と二番目の色とが同じ色相と異なる強度であ るようなパネル。 ３．少なくとも一つの非均一なクロマキー・パネルを含み、既知のパターンと主 題とを持つ前景画像の画像を捉えるように動作するフレーム・グラバーと、 少なくとも一つのパネルの画像と既知の画像とを比較することによって、遠近 変換を計算する様に動作する遠近変換計算ユニットと、 背景画像を受け取り、そこへ遠近変換を加え、少なくとも一つのパネルを変換 済みの背景と入れ替え、それによって混成画像を生成するように動作する背景生 成ユニットと、 を含むクロマキー・システム。 ４．請求項３において、背景生成ユニットに対して、背景の風景の三次元的表現 を与えるように動作する、三次元背景の画像ソースを含むシステム。 ５．請求項３と請求項４において、背景生成ユニットに対して、背景の風景の暫 時の列を与えるように動作するような背景画像列のソースを備え、そこで、遠近 変換計算ユニットがリアル・タイムに暫時の列の速度に合わせて動作するような システム。 ６．請求項５において、背景画像列のソースがビデオの切り抜きを含み、また、 遠近変換計算ユニットがビデオとリアル・タイムに動作するようなシステム。 ７．請求項３〜６のいずれかにおいて、背景生成ユニットに動画図形の背景風景 を与えるように動作するような動画図形の背景風景ソースを含むシステム。 ８．請求項３〜６のいずれかにおいて、背景生成ユニットに写真の背景風景を与 えるように動作するような写真の背景風景ソースを含むシステム。 ９．先の請求項３〜６のいずれかにおいて、背景生成ユニットとやりとりをする ユーザー・インターフェースを含み、背景画像の中の個々の仮想物体位置に対し て仮想物体位置が主題の前にあるか主題の後ろにあるかを決定し、そこで背景生 成ユニットは後ろの仮想物体位置に主題を重ね、主題に前の仮想物体位置を重ね るように動作するようなシステム。 １０．請求項９において、各個々の仮想物体位置が背景画像の内部に一つの画素 を含むようなシステム。 １１．先の請求項３〜１０のいずれかにおいて、カメラに照準として取り付けら れて少なくとも一つのクロマキー・パネルと主題の画像を捉え、カメラの視野内 で複数の位置の範囲を測定するように動作するような距離形を含み、背景生成ユ ニットが重なった背景画像位置と、より小さい範囲を持った重なる位置が混成画 像に含まれるような主題位置とを溶け合わすようなシステム。 １２．先の請求項３〜１１のいずれかにおいて、少なくとも一つのクロマキー・ パネルと主題との画像を捉える複数のカメラを含むようなシステム。 １３．先の請求項３〜１２のいずれかにおいて、上記の少なくとも一つのクロマ キー・パネルは複数のクロマキー・パネルを含むようなシステム。 １４．先の請求項３〜１３のいずれかにおいて、背景生成機がクロマキー・パネ ル画素を変換済みの背景に置き換える、また、全体のクロマキー・パネルはカメ ラの瞬間的な視野に含まれるようなシステム。 １５．色指標スペクトルの中の一番目の色を持つ一番目の複数の場所と、色指標 スペクトルの中の二番目の色を持つ二番目の複数の場所とを含むクロマキー・パ ネルを与え、 上記のパネルと主題とを含む前景画像を捉え、 色指標スペクトルを持つクロマキー・システムと一緒に用いられるクロマキー 法。 １６．既知のパターンと主題とを持つ非均一のクロマキー・パネルを少なくとも 一つ含むような前景画像の画像を捉え、 少なくとも一つのパネルの画像と、既知のパターンとを比較することにより遠 近変換の計算をし、 背景画像を受け取り、そこに遠近変換を加え、少なくとも一つのパネルを変換 済みの背景と入れ替え、それによって混成画像を生成する ようなクロマキー法。