JP2004535129A - 目標エリアが画像ストリーム内に含まれる持続時間を算出する方法およびシステム - Google Patents

Abstract

目標エリアが画像ストリーム内に含まれる持続時間を算出するシステムおよび方法は、サイト内の少なくとも１つの目標エリアの三次元モデルを利用する。目標エリアが画像ストリーム内に含まれる時は、期間中に、たとえば、フレーム・バイ・フレーム・ベースでカウンタが増分される。目標エリアが画像ストリーム内に含まれる算出された持続時間を調節するために閉塞パラメータが計算される。閉塞パラメータは、目標エリア障害物の変動の考慮を容易にし、持続時間を示すカウンタが目標エリアの障害物の変動を反映するようにカウンタを調節するのに使用される。目標エリアの算出された持続時間を調節するために目標エリアに関連する前景パラメータが計算される。前景パラメータは、さまざまなカメラ・ズームにより生じる目標エリア内に含まれる画像の可視性の変動の考慮を容易にする。

Description

【技術分野】
【０００１】
（発明の技術分野）
本発明は、一般的に映像伝送システムに関し、特に画像が画像ストリーム内に含まれる持続時間を測定するシステムおよび方法に関する。
【背景技術】
【０００２】
（発明の背景）
チーム、リーグおよび開催地のオーナは、典型的にスポーツ・テレビ放送の一部分中にそれらのバナーや標示が周期的に現れる時に広告主に高い料金を請求する。長い間、スポーツイベントは、コマーシャル中だけでなくテレビ放送イベント中にも追加広告収入を提供してきている。たとえば、放送会社は、スポーツ・イベント・テレビ放送の一部中に見られるコマーシャルを有する広告主にオン・エア時間当たり料金を請求する。広告主は、しばしば視聴者がスポーツ・アレナおよびパークに共通の広告ロゴおよびバナーを見ることがあるテレビ放送内のオン・エア時間に関連する料金を請求される。たとえば、野球場の壁は、一般的に非常に多くの隣接パネルにより構成され、そのひとつ以上は、典型的に広告主ロゴを展示するために広告主に賃貸しされる。アイスホッケも氷自体の下だけでなく典型的にホッケ・リンクのダッシュ・ボード上に展示される広告バナーを含んでいる。さらに、フットボール場は、しばしばスタジアム壁上のロゴの他にフットボール場の上に描かれたスポンサ・ロゴを含んでいる。スポーツ・フランチャイズおよびスポーツ放送会社は、回転バナー広告も使用する。これらのバナー広告は、放送の持続時間中、固定されるのではなく、ゲーム中に異なる壁パネル広告を展示できる回転可能なシャーシ上に維持される。放送会社は、映像の放送中に展示される画像の一部の測定に興味を持つことがある。
【０００３】
映像内に画像を挿入する１つの誘因は、テレビ放送会社に対する広告収入の増加または追加を実現することである。広告等の静止画像および動画像をリアル・タイムで映像内に挿入するための多くのシステムおよび方法が提案されてきている。これらの従来技術システムおよび方法には、さまざまな欠点および問題点があり、それらの多くは、ディシコ等の米国特許第5,892,554号に詳細に示されている。新しく開発された技術は、たとえば、スポーツ・イベント放送における広告に革命をもたらすことを約束する。コンピュータ促進放送システムは、画像、たとえば、広告主のバナーのグラフィック画像を映像ストリーム・テレビ放送内に挿入することができる。一般的に、テレビ放送が実施されるサイトは、それから作られた三次元モデルを有する。このモデルは、グラフィックまたはビデオ画像を挿入する目標エリアを含んでいる。目標エリアは、サイトの実エリア、たとえば、ホッケ・リンクのダッシュ・ボードまたは仮想表面、たとえば、合成ビルボードとすることができる。一般的に、映像伝送の各フレームが解析され、画像は、放送される目標エリアを含む任意のフレーム内の目標エリア内に書き込まれる。サイトの三次元モデルは、さまざまなカメラ方位および焦点中に得られる現実性を考慮する。
【０００４】
放送会社は、物理的に存在し、または映像ストリーム中に挿入される広告のオンエア持続時間を決定しなければならない。残念ながら、テレビ放送中にこれらの画像に対する露出時間を測定する技術には多くの欠点がある。たとえば、物理的シグネージ（signage）の放送持続時間は、手動算出され、典型的には放送が行われた後でしか算出されない。広告のテレビ放送伝送時間、すなわち、オンエア時間の手動算出は、一般的に手起動ストップ・ウォッチ等の増加測定技術を使用してオペレータにより実施される。この方法は、オペレータの注意深さの減退およびオペレータの遅延時間を含む多くのエラーおよび不正確さを免れない。さらに、オペレータは、放送がなされた幾分後でオリジナル放送のテープを観察することによりこれらの測定を実施する。また、これらの技術は、テープにとられた放送の同じまたは別のバージョンを観察して多数の広告に対する測定を行うための多くのオペレータを必要とする。その結果、これらの従来の方法は、多数のリソースを必要とし、さらに測定の不正確さおよび遅延に苦しみ、その使用が制限される。
【０００５】
さらに、広告に対する料金は、通常、これらの従来技術を使用して算出され、典型的に従来および既存のバナー広告から引き出すことができる収入に限定される。
【０００６】
「テレビ放送」および「放送」という用語は、本明細書において本発明の理解を容易にするために使用される。しかしながら、テレビ放送および放送メディアは、例にすぎない。本発明は、テレビ伝送への応用に限定されるものではない。本発明は、グラフィック・メディア（たとえば、画像ストリーム）を伝送することができるテレビジョン、ケーブル、インターネット、衛星、デジタル劇場等の任意数の通信技術において使用することができる。
【０００７】
映像内に挿入された画像を提供する技術が開発されているが、そこからの広告収入を正確に評価する技術は、まだ取り組まれていない。公正な料金請求システムを実現するために、典型的には放送が行われた後で、これらのバナーの放送持続時間が手動算出される。広告のテレビ放送伝送時間、すなわち、オンエア時間の手動算出は、一般的に放送が行われたしばらく後でオリジナル放送のテープを観察する人によって行われる。しばしば、特定の広告のオンタイム伝送の計算は、単純な手起動ストップ・ウォッチのような不完全で誤差を生じやすい技術で行われる。これまで、画像挿入技術に従って行われた広告に対する料金は、従来のバナー広告主に対して利用される従来技術に限定されている。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明の目的は、従来技術の方法および装置の１つ以上の問題点を克服し、合成または実画像またはその一部が画像ストリーム内に含まれる持続時間を算出する方法およびシステムを提供することである。
【課題を解決するための手段】
【０００９】
（発明の概要）
本発明の実施例において、１つ以上の目標エリアが画像ストリーム内に含まれる持続時間の算出システムおよび方法は、そこから画像ストリームが取り込まれるサイト内の物理的エリアに割り当てられた少なくとも１つの目標エリアを含むサイトの三次元モデルを利用する。目標エリアが画像ストリーム内に含まれる時は、たとえば、フレーム・バイ・フレームまたはフィールド・バイ・フィールド・ベースで目標エリアに関連して維持されるカウンタが期間中に増分される。そのため、目標エリアに関連して維持されるカウンタは、目標エリア内の画像が画像ストリーム内に含まれる持続時間の表示を与える。したがって、カウンタは、目標エリアに対応する物理的エリア（そこから取り込まれた画像は、物理的画像と呼ばれる）内に含まれるサイトの一部が画像ストリーム内に含まれる持続時間測定値を与える。
【００１０】
本発明のもう１つの実施例では、１つ以上のカメラ等の画像捕捉システムにより取り込まれる画像ストリームは、画像捕捉が行われたサイト内に存在しない合成画像を含むように処理することができる。取り込まれた画像ストリームは、画像挿入技術により操作され、サイトの物理的エリアに関連する目標エリア内に挿入された合成画像を含むように処理することができる。したがって、カウンタは、合成画像が処理された画像ストリームの目標エリア内に含まれる持続時間の表示を与える。
【００１１】
本発明のもう１つの実施例では、視野内の目標エリアのパーセンテージを使用して目標エリアに関連するカウンタが増加されるかどうかを決定することができる。
【００１２】
本発明のもう１つの実施例では、目標エリアが画像ストリーム内に含まれる算出された持続時間を調節するために目標エリアに関連する閉塞パラメータが算出される。閉塞パラメータは、目標エリアの一部に対応する画像（物理的または合成）への障害物の変動の考慮を容易にし、そのカウントが画像の障害物の変動を示すようにカウンタを調節するのに使用される。
【００１３】
本発明のもう１つの実施例では、目標エリアが画像ストリーム内に含まれる算出された持続時間を調節するために目標エリアに関連する前景パラメータが計算される。前景パラメータは、さまざまなカメラ・ズームにより生じる目標エリア内の画像の可視性の変動の考慮を容易にする。
【００１４】
さらにもう１つの実施例では、任意の閉塞体のエリアを考慮および除外して、目標エリアにより覆われる可視ビデオ画像のパーセンテージの閾値によりカウンタをトリガすることができる。
【００１５】
さらにもう１つの実施例では、１つ以上の目標エリアが画像ストリーム内に含まれる持続時間のリアル・タイムの算出により合成画像が画像ストリーム内に含まれる所望の持続時間が満たされることを保証する機構が提供される。画像取込みまたは伝送中に収集され、かつ目標エリアが画像ストリーム内に含まれる持続時間を示すメトリクスその他の統計データの解析は、特定の目標エリアに割り当てられた画像データが予め定められた所望の持続時間だけ画像ストリーム内に含まれることがありそうにないことを示すことがある。画像データの画像ストリーム内への所望の持続時間の包含を達成するために画像データをもう１つの目標エリアに再割当てすることができる。
【実施例】
【００１６】
（図面の詳細な説明）
本発明のこれらおよびその他の目的および利点は、添付図面を参照して本発明の好ましい実施例の下記の記載から明らかとなる。本発明の目的および利点をより完全に理解するために、添付図面に関して以下の記述が参照される。本発明の好ましい実施例およびその利点は、さまざまな図面の同じまたは対応する部分に対して同じ番号が使用されている、図１から図１８を参照すれば最もよく理解される。
【００１７】
画像ストリームの操作に対するリアル・タイム画像挿入システムの１つの応用は、スタジアム、アレナ、トラック、コースその他のスポーツまたは娯楽開催地からのスポーツまたは娯楽イベント等のライブ放送におけるものである。このようなシステムは、この応用に関連して以下に説明される。本発明のシステムは、画像ストリーム内の合成画像の露出持続時間のリアル・タイム測定に使用することができる。たとえば、そこから画像ストリームが取り込まれ、操作され放送される娯楽開催地に物理的に存在しない広告等の挿入された画像の持続時間を本発明の教示に従って正確にリアル・タイムで測定することができる。次に、これらの挿入された画像に対する広告収入および／または料金を所望により挿入された画像が画像ストリーム内に含まれる算出された持続時間に応じて計算することができる。
【００１８】
本発明の画像持続時間測定システムは、画像ストリーム操作システムと共に使用される場合に著しい利点を有するが、他の応用で使用することもできる。本発明のシステムは、画像ストリームが取り込まれるサイト内に存在する物理的物体から画像例えば、画像ストリームが取り込まれる娯楽開催地内の物理的広告から取り込まれる画像が取り込まれる持続時間のリアルタイム測定にも使用することができる。
【００１９】
画像測定の詳細および図１に示す画像測定システム１００により実施される画像ストリーム操作技術は、本発明の範囲外であり、記述される技術は、例にすぎない。画像挿入システムは、そこから画像ストリームが取り込まれるサイトの三次元モデルを操作し画像、たとえば、広告のグラフィック描写を与えるビットマップを画像ストリームのフレーム内に挿入するように動作することを理解しなければならない。したがって、画像ストリームは、合成画像が挿入された画像ストリームの画像だけでなく画像捕捉システム、たとえば、カメラ・システム１０４Ａ−１０４Ｎから得られる画像を含むことができ、典型的な技術は、図１から図１０について一般的に後述する操作を含んでいる。
【００２０】
取り込まれた画像ストリームは、ここでは、画像捕捉システムによりサイト内に存在する物理的物体から取り込まれた１つ以上のフレーム（またはフィールド）として定義される。画像ストリームは、ここでは、取り込まれた画像ストリームおよび／または画像挿入技術による操作を含む画像ストリーム内の画像の操作等の取り込まれた画像ストリームに対して実施することができる処理の結果として定義される。画像ストリームは、画像ストリームが取り込まれる物理的サイトからだけ取り込まれた画像を含むことができ、あるいは画像ストリームは、サイトから取り込まれた画像および／またはそこから画像ストリームが取り込まれるサイト内に物理的に存在しない合成画像（画像ストリーム内に挿入された）を含むことができる。
【００２１】
物理的画像は、ここでは、画像捕捉システムにより物理的物体から取り込まれる画像ストリーム内の画像として定義される。合成画像は、ここでは、そこから画像ストリームが取り込まれるサイト内に物理的に存在する物体から取り込まれない画像ストリーム内に挿入された画像として定義される。
【００２２】
目標エリアは、ここでは、物理的サイト内の興味あるエリアおよび／または物理的サイトのモデル内の対応するエリアとして定義される。画像捕捉システムの視野が興味あるエリア（またはその一部）を含む場合、取り込まれた画像ストリームおよび画像ストリームは、目標エリアまたはその一部を含むといわれる。たとえば、ホッケ・アレナにおけるダッシュ・ボードは、目標エリアとして指定することができる。目標エリアとして指定されたダッシュ・ボードは、やはり目標エリアと呼ばれるホッケ・アレナの三次元モデル内に対応するエリアを有する。本発明は、画像捕捉システムにより得られる画像ストリーム内に１つ以上の目標エリアが含まれることがある持続時間の算出をもくろむものである。目標エリアは、特定の開催地における単一イベントまたは別々の開催地における多数のイベント中に得られる画像ストリーム内に存在することができる。
【００２３】
目標画像は、ここでは、画像ストリーム内の目標エリア内の画像として定義され物理的画像または合成画像またはそれらの複合画像とすることができる。
【００２４】
基準画像は、閉塞処理に使用される実際のサイト内の目標エリア表面の外観であり画像レンダリング・システムによりレンダリングされる目標エリアに関連づけられた画像とすることができる。基準画像は、物理的物体（そこから画像ストリームが取り込まれるサイト内の物理的物体等）のレンダリングされた画像とすることができ、あるいは基準画像は、画像ストリーム内の画像の目標エリア内に挿入される合成画像のレンダリングされた画像とすることができる。基準画像は、一般的に、目標エリア内に挿入して、その持続時間測定を促進し、あるいはそこに割り当てられた目標エリアを有する物理的画像の持続時間測定を促進する目標画像を形成するのに利用される。合成目標画像は、一部、レンダリングされた基準画像により展開される。
【００２５】
ここに記載するように、本発明は、目標エリアが画像ストリーム内に含まれる持続時間を算出する技術および機構を提供する。したがって、この技術および機構は、画像（物理的または合成）が目標エリア内に含まれる持続時間を算出し、画像が画像ストリーム内に含まれる持続時間の算出に応用することができる。
【００２６】
次に図１について、１つ以上の目標エリアが画像ストリーム内に含まれる持続時間を算出するリアル・タイム画像測定システム１００がその主要な機能的構成要素により略示されている。これらの構成要素は、ハードウェアおよびソフトウェアの組合せとして実現され、特記なき限り個別のハードウェアやソフトウェア構成要素を表したり任意特定のインプリメンテーションに限定されるものではない。
【００２７】
画像測定システム１００は、画像製作システム１０２から画像ストリームを受信する。画像製作システム１０２は、カメラ・システム１０４Ａまたは複数の他のカメラ・システム１０４Ｂ-１０４Ｎの中の１つから画像信号を選択する。次に、この選択された画像ストリームは、既存のシグネージ、広告等の合成画像または画像ストリームが処理される後で挿入される合成画像を有することがある画像ストリーム内のエリア等の物理的開催地内の物理的画像の持続時間を測定するために画像測定システム１００に供給される。画像測定システムは、たとえば、移動製作施設における映像製作システム内に設置することができる。それは中央製作施設に遠隔設置したり、地方テレビ局またはケーブル・オペレータ等のさらに下流に設置することもできる。あるいは、画像持続時間測定は、たとえば、製作システムに提供される前に各カメラ・システムからの画像ストリーム内の画像を測定することにより、画像ストリームの選択の前に行うことができる。
【００２８】
もう１つの実施例では、図１１に関して詳細に検討するように製作システム１０２は、画像測定システム内にさらに機能性を取り入れることができる。一般的に、他のカメラシステム１０４Ｂ−１０４Ｎにより多数の入力が提供される製作システム１０２の出力を比較することができ製作トラック等の製作制御ユニットにより選択されるカメラ入力に対する持続時間カウンタを更新することができる。たとえば、多数のカメラは、単一開催地から画像ストリームを取り込むのに一般的に使用される。多数のカメラからの画像ストリームは、次に、製作システムに供給される。製作システムは、画像ストリーム／テレメトリ・セパレータ１１８に入力を与えるように操作できる。一般的に、画像ストリーム／テレメトリ・セパレータ１１８に供給される任意所定の場合の入力は、他のカメラ・システム１０４Ｂ−１０４Ｎの単一カメラから取り出された画像ストリームを含んでいる。したがって、製作システム１０２は、処理される映像／テレメトリ・セパレータに供給される画像ストリームを切り替えて、終局的にシステムからの選択された画像ストリームを映像テレビ放送または処理された画像ストリームの形で出力するように操作できる。したがって、画像が出力画像ストリーム内に含まれる持続時間を累積するのにカウンタ（後述する）が使用されるため、切替機構は、１つ以上の他のカメラシステム１０４Ｂ−１０４Ｎにより取り込まれた任意の画像ストリーム内に画像が含まれる時にカウンタを増分するのではなく、製作システム１０２により出力される画像ストリーム内に画像が含まれる時だけカウンタが増分されるように利用されなければならない。
【００２９】
カメラシステム１０４Ａは、サイトの基準の既知または予め定められた三次元フレームに関して少なくともどこをカメラが指しているかを示すテレメトリ・データにより符号化された画像ストリームを発生する。カメラ・システムは、カメラ・ヘッド１１０に接続された従来のビデオ・カメラ１０８を含んでいる。カメラ・ヘッド１１０は、方位角および高度またはカメラ１０８の光軸の方向を規定する他の座標を示す情報を発生するセンサを含んでいる。このテレメトリ情報は、テレメトリ・プロセッサおよびエンコーダ１１２に与えられる。カメラ１０８または他の付属センサは、たとえば、カメラのレンズの焦点距離および開口を示す追加テレメトリ情報もテレメトリ・プロセッサおよびエンコーダに供給する。焦点距離は、レンズのズームの度合いと共に変動する。開口は、変化する光状態と共に変動する。随意、追加センサ情報、たとえば、全地球測位衛星情報１１４もその経度、緯度および高度に関するカメラの位置を示す情報をテレメトリ・プロセッサおよびエンコーダに供給することができる。カメラの位置は、容易に決定することができ予め定められた場所に固定されたままとするのではなく移動することができる。カメラにより供給される画像ストリーム・タイミング信号を使用して、テレメトリ・プロセッサおよびエンコーダは、カメラにより発生される画像ストリームと同期させることができるデータ信号を発生する。このデータ信号は、カメラにより発生される画像ストリームの各フレームに対するテレメトリ情報を符号化する。テレメトリ・プロセッサの一部とすることができる画像ストリーム／テレメトリ・コンバイナ１１６は、次に、データ信号を画像ストリームと結合する。テレメトリ情報が画像ストリーム内で同期的に符号化されるため、カメラシステム下流の任意の点で画像ストリームに合成画像を挿入できるようにするのに十分な情報が供給される。
【００３０】
画像ストリーム内に含まれる１つ以上のフレームに関して画像ストリームの操作が説明されるが、フレームは、サブ要素、たとえば、フィールドを含むことがあることを理解しなければならない。たとえば、典型的な映像テレビ放送のフレームは、偶数および奇数フィールドにより構成される。したがって、３０Ｈｚフレームレートを有する映像ストリーム、すなわち、テレビ放送を含む画像ストリームは、実際上、２つの６０Ｈｚフィールドにより形成される。フレーム・ベース操作に関して、ここに記述される画像ストリーム、すなわち、画像テレビ放送の操作および解析は、例にすぎず検討を簡単にするために、そのように記述される。フィールド・ベース操作を使用して同じ一般的手順および技術を実現できることが理解される。
【００３１】
画像測定システム１００が符号化された画像ストリームを受信すると、画像ストリーム／テレメトリ・セパレータ１１８は、画像ストリーム内の特定の画像に対するテレメトリ・データを抽出する。画像ストリームは、さらに、画像ストリーム・デコーダ／バッファ１１９により復号されて画像ストリームの各フレームから画像を抽出して格納する。カメラにより発生された画像ストリーム内に含まれる画像の例が図２に画像４００として例示されている。この特定の例は、アイスホッケ・ゲームのものである。それは、ダッシュ・ボード４０２、第１のホッケ・プレーヤ４０４および第２のホッケ・プレーヤ４０６を含んでいる。画像測定システム１００および画像測定プロセスの操作を以下に画像４００について記述する。しかしながら、画像測定プロセスは、少なくとも画像がフレーム間で変化する範囲まで画像ストリームの各連続フレーム内の画像に対して繰り返される。
【００３２】
コントローラ１２０は、画像測定システム１００の機能的構成要素内で生じるプロセスを調整するソフトウェアおよびハードウェア・エンティティまたはエンティティの集まりを表す。テレメトリ・データおよびサイトで生じるイベントを記述する他の情報、たとえば、野球のインニング数、スコアまたはスポーツ・ゲームのフロー上の他の情報を使用して、コントローラ１２０は、データ・ベース１２２内の予め定められた画像測定ルールにアクセスし、少なくとも部分的にテレメトリ・データ内に埋め込まれたカメラ識別子に基づいて、開催地内に含まれかつ画像ストリーム（またはその一部）全体にわたって持続時間測定が行われる画像ストリーム内に含めることができるエリア（ここでは目標エリアと呼ばれる）を決定する。目標エリアは、たとえば、広告ディスプレイが処理された画像ストリーム内に合成的に挿入されるスポーツ・アレナ内のエリアである。あるいは、目標エリアは、たとえば、物理的シグネージがサイトに存在し画像ストリームにより取り込まれることがあるスポーツ・アレナ内のエリアである。したがって、画像ストリーム内に含まれるサイトの目標エリアは、その内に含まれる物理的画像／および／または合成画像を有することができる。予め定められたルールを有することにより予め選択された目標エリアに持続時間測定を行うことができ、その結果、目標エリアが画像ストリーム内に含まれる持続時間の量的尺度が生じる。目標エリアが画像ストリーム内に含まれる持続時間の量的尺度を算出することにより、物理的画像または合成画像が目標エリア内に含まれる持続時間も作られる。さらに、目標エリアは、予め定められた時間または期間にあるいは画像が取り込まれるイベントの状態に基づいて変化することがあり、すなわち、サイト内の目標エリアの場所は、画像ストリーム取込または処理中に変化することがある。
【００３３】
広告ディレクタは、たとえば、コントローラ１２０にコマンドおよびデータを入力するソフトウェアおよびハードウェアを含むディレクタのコンソール１２３を使用してイベント中に測定プロセスを監視および制御することもできる。たとえば、ディレクタは、そのような情報がデータ・ベースから入手できない場合に、サイトにおけるイベントの状態に関する情報をシステムに供給することができる。また、ディレクタは、データ・ベース１２２内の画像測定ルールをオーバライドして持続時間測定のための目標エリアを手動選択するか、あるいはルールをダイナミックに修正することができる。また、広告ディレクタは、目標エリアを維持するデータ・ベースを設定および維持することができる。広告ディレクタのコンソールは、目標エリアの持続時間測定中にディレクタが画像ストリームを監視できるようにモニタを含んでいる。また、広告ディレクタのコンソールは、後述するように、ディレクタが基準画像に対するＣＡＤモデルを格納するデータ・ベースを修正し、かつ、後述するように、目標エリア測定プロセスのステップを監視および調節できるようにする。
【００３４】
画像ストリームまたは処理された画像ストリーム内に含まれる各目標エリアに対して、サイトにおける予め定められた目標エリアに基準画像を割り当てることができる。基準画像は、目標エリアの予め定められた基準モデルに基づいてレンダリングされる。２つ以上の目標エリアを定義することができ任意所定の画像ストリーム内に現れることがある。モデルは、好ましくは、目標エリアの表面（実または仮想）を数学的に定義してモデルを任意の角度からレンダリングできるようにするコンピュータ支援設計（ＣＡＤ）モデルである。取り込まれた画像ストリームから抽出されたテレメトリ・データにより、画像ストリームを発生するカメラの場所および方位と実質的に同じ観点からモデルをレンダリングすることができる。実際には画像ストリームと一線上に揃えられるサイトの目標エリアの合成画像であるこのレンダリングは、次に、画像ストリーム内の目標エリアの持続時間測定を案内するのに使用される。フレーム間でカメラ位置が変化する場合には、このレンダリングは、このような各フレームに対して行われる。しかしながら、フレーム間で変化しない場合には、前のフレームに対するレンダリングを使用することができる。したがって、物理的画像対象に対応する基準画像は、そこから物理的画像を取り込むことができるさまざまな方位および焦点においてレンダリングすることができる。
【００３５】
しばらく図２および３を参照して、図３の画像５０２は、図２に示す画像が取り出されたサイトの予め定められたモデルのレンダリングの例である。標準とすることができる市販のＣＡＤソフトウェアをコンピュータで実行するコンピュータ支援設計（ＣＡＤ）は、予め定められたモデルからレンダリングを発生する。レンダリングは、図２のビデオ画像と同じ位置およびカメラ・アングルからは作られないことに注目される。この例の目標エリア５０４は、ダッシュ・ボード４０２の表面の予め定められたエリアである。このモデルは、目標エリアとして定義される仮想表面も有する。たとえば、このモデルは、ホッケ・アレナの天井から吊下げられた仮想バナーの位置を定義していることがある。実であれ仮想であれ、目標エリア表面は、平坦である必要がない。この図では、目標エリアは、基準画像によりレンダリングされている。基準画像は、たとえば、レンダリングされたモデル内に挿入されるビット・マップ画像として格納することができる。この特定の例では、それはブランク白壁であり、すなわち、それと共に指示される目標エリアを有するダッシュ・ボードの一部が白、すなわち、ブランクであり、したがって同じ基準画像により表される。しかしながら、基準画像はたとえば会社ロゴ等のダッシュ・ボード４０２上に物理的に配置される広告の画像とすることができる。基準画像は、そこに割り当てられた目標エリアを有する物理的エリアを画像ストリーム内で取り込むことができる異なる方位に対応するように、さまざまなアングルからレンダリングすることができる。基準画像は、後で画像内にも挿入される合成要素の画像とすることができる。たとえば、広告は、特定の目標エリア内に挿入することができ、したがって最終処理画像の目標エリア内に現れる。各目標エリアに対する基準画像を有するサイトの基準モデルは、図１に示すＣＡＤファイル１２４内に格納される。
【００３６】
次に、図１，図２および図５について、ＣＡＤモデル・レンダラ１２８が図２に示す取り込まれた画像４００を有するカメラからのテレメトリ・データに基づいてＣＡＤファイル１２４内に格納されたＣＡＤモデルのベース・ライン画像７００をレンダリングする。図４のベース・ライン画像７００は、目標エリア５０４内に挿入された目標エリア基準画像５０６を含んでいる。前記したように、テレメトリ・データは、画像４００を取るカメラの識別、アングル、焦点距離および開口設定を含んでいる。テレメトリ・データは、カメラの位置が固定されていない場合にカメラの位置を示すこともできる。
【００３７】
本発明の画像持続時間測定プロセスは、目標エリア・マスクの発生を含むこともできる。図５は、図２の典型的な画像４００に対するマスク画像９００を示す。目標エリア・マスク５０２がモデル・レンダラ１２８により発生される基準画像を使用してマスク・ビルダ５０２により発生される。マスク画像９００を発生するために、マスク画像９００内の目標エリア・マスク５０２は、その中の全ピクセルを予め定められた値に設定し、目標エリア・マスク５０２の外側の全ピクセルは、もう１つの予め定められた値に設定される。マスク画像９００内では、全ての目標エリア・マスク５０２ピクセルが白であり、目標エリアマスク５０２を取り巻く全てのピクセルが黒である。
【００３８】
目標エリア・マスク５０２は、閉塞処理ステップに関して、いくつかの目的に使用される。次に、図１について、目標エリア・マスク５０２は、モデル・レンダラ１２８により発生されるベース・ライン画像７００内の各目標エリア基準画像５６を分離、すなわち、マスクするために背景／目標エリア基準画像セパレータ１３８により使用される。図４に示す例では、マスクは、ベース・ライン画像７００内の目標エリア基準画像５６を残りの画像から分離するのに使用され、図６に示すマスクされた基準画像７００ａを生じる。目標エリア・マスク５０２は、オリジナル画像内に目標エリアを配置し、背景と呼ばれる画像の残りの非目標エリアから分離するのに使用される。この機能は、背景／目標エリア基準画像セパレータ１３６により実施される。
【００３９】
図７および図８は、図２に示すオリジナル画像４００内の目標エリアから背景を分離して生じる２つの画像を示す。図７は、マスクされた背景画像４００ａであり、ブランクである目標エリア５０４５内の部分を除くオリジナル画像の全てを含んでいる。図８は、マスクされた目標エリア画像４００ｂであり、目標エリア５０４内に含まれるオリジナル画像４００の一部１２００を含んでいる。マスクは、モデル・レンダラ１３０によりレンダリングされる画像内の目標画像を分離するために背景／目標画像セパレータ１４０によっても使用される。
【００４０】
図２の画像４００の例において、ホッケ・プレーヤ４０４の一部は、本発明に従って持続時間測定を行う目標エリア５０４がそこに割り当てられているダッシュ・ボード４０２の一部を覆っている。目標エリア５０４が画像４００を含む画像ストリーム内に含まれる持続時間を測定して目標エリア５０４内に含まれる画像の「可視性」を反映する持続時間の量的尺度を提供するために、閉塞と呼ばれる目標エリア５０４内のホッケ・プレーヤ４０４の一部をオリジナル画像４００の目標エリア５０４の残りとは区別し、対応するエリアを目標エリア５０４内の残りの非閉塞画像から除去しなければならない。この分離を行うために、閉塞セパレータ１４４は、マスクされた目標エリア画像４００ｂをマスクされた基準画像７００ａと比較する。任意の違いは、閉塞、すなわち、カメラと目標エリア５０４が割り当てられている表面（すなわち、合成表面）間の物体の画像と推定される。マスクされた基準画像とカメラ内の電子的ノイズにより導入されるマスクされた目標画像間の小さな違いは、画像処理の分野で一般的に実施されるいくつかの技術、たとえば、小領域除去により調整することができる。テレメトリ測定システム内のエラーによる目標エリアの不正確な位置決めは、一般的に実施される目標追跡技術、たとえば、カルマン・フィルタリングを使用してテレメトリ・データをフィルタリングすることにより調整することができる。図示する例では、図８に示すマスクされた目標エリア画像４００ｂは、図６に示すマスクされた基準画像７００ａと比較される。図９に示す結果的に生じる閉塞画像４００ｃは、閉塞しか含んでおらず、図示する例では、それは目標エリア５０４内の画像４００内に取り込まれたホッケ・プレーヤ４０４の一部である。閉塞画像４００ｃの残りは、ブランクである。閉塞セパレータ１４４は、閉塞マスクも生成する。閉塞マスクは、閉塞を構成するオリジナル画像４００内の一部も識別する。この例では、閉塞マスクは、図９の閉塞画像４００ｃから発生される。マスクされた背景画像４００ａ、マスクされた目標画像８００ａおよび閉塞画像４００ｃは、画像コンバイナ１４６により結合されて画像４００の代わりに画像ストリーム中に挿入することができる複合、すなわち、最終画像４００ｅを形成することができる。目標画像６０４は、合成画像を含むことができ、したがって、発生された複合画像は、合成画像の一部が最終画像内に含まれ、合成画像があたかもオリジナル画像４００の一部に見えるような閉塞を有する合成画像を含む操作された画像を提供する。マスクされた背景画像、マスクされた目標画像および閉塞画像は、画像コンバイナ１４６により結合されて複合、すなわち、最終画像を形成する。最終画像は、画像ストリーム中に挿入するために画像操作技術により使用されることがある。したがって、最終画像またはその構成要素は、その中に含まれた目標エリアの持続時間算出のために画像測定システム１００により使用されることがある。基準画像が合成画像を含んだ場合、次に、最終画像は、画像ストリーム中に挿入することができる。しかしながら、最終画像またはその一部は、目標エリアに関連する持続時間測定値の算出にしか使用されないことがあり、画像ストリーム中に挿入されないことがある。後者のシナリオは、目標エリアが割り当てられている物理的シグネージに対する持続時間測定値の算出に使用することができ、その場合、最終画像構成により目標エリアに関連する物理的画像に対応する画像データの持続時間算出が促進になり、画像ストリームは、画像挿入技術を適用されない。したがって、持続時間測定値の算出により物理的画像が画像ストリーム内に含まれる持続時間の表示が提供される。
【００４１】
もっとも単純な形では、目標エリア５０４が画像ストリーム内に含まれる持続時間測定値を決定するシステムは、目標エリア５０４を含む画像ストリーム内の最終画像４００ｅの数をカウントすることを含んでいる。次に、たとえば、画像ストリーム伝送および／または捕捉における毎秒フレームに基づいて、目標エリア５０４およびそこに含まれた画像を有する画像ストリームの一部の累積持続時間を算出することができる。このようにして、１つ以上の目標エリアが画像捕捉システムおよび／または画像操作システムにより作り出される画像ストリーム内に含まれる持続時間、したがって、その中に画像データが包含される持続時間の測定システムは、１つ以上の目標エリア５０４に包含され、目標エリアと関連して目標エリア５０４内に包含される画像データの対応する最終画像４００ｅまたはその構成要素の解析を含んでいる。
【００４２】
図１１は、本発明の教示に従った画像捕捉および目標エリア持続時間測定システムを例示する。１つ以上の画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎは、スポーツまたは娯楽開催地等のサイトから画像ストリームを取り込むことができる。各画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎは、それぞれのテレメトリ装置を含んでいる。したがって、画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎにより捕捉された画像データは、捕捉された画像ストリーム内で符号化されたテレメトリ情報を有する。テレメトリ情報は、画像捕捉装置位置決めデータ、画像捕捉装置方位データ、画像捕捉装置のズームに関連する焦点情報等を含むことができる。画像およびテレメトリ情報は、各画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎから１つ以上の持続時間測定システム１００Ａ−１００Ｎおよび製作システム１０２に出力することができる。製作システム１０２は、捕捉された画像データの処理を実施し画像データが出力される１つの画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎを選択する切替機能を提供することができる。典型的に、画像ストリーム出力は、任意所定の時点において単一画像源からの画像ストリーム、すなわち、処理された画像ストリームを含んでいる。広告主にとって興味をそそる持続時間測定を実現するために、本発明は、目標エリアが出力画像ストリーム内に含まれる持続時間の正確な測定を提供する。
【００４３】
非常に多くの画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎを使用して製作システム１０２にイベントのさまざまな画像ビューを供給することができるため、異なるビューは、特定の目標エリアを含むことができ、他は、目標エリアを含まない。したがって、各画像捕捉およびテレメトリ・システムは、好ましくは、対応するカメラを識別するタグを捕捉された画像およびテレメトリ・データに埋め込む。カメラおよび／または画像およびテレメトリ・データを識別する他の技術が知られている。したがって、製作システム１０２は、目標エリアが出力画像ストリーム内に含まれる持続時間を測定するカウンタを増分することができる。このような測定の調整は、出力画像ストリームだけでなく画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎから得られる画像測定データを供給される測定調整装置またはシステム１２１Ａにより実施することができる。したがって、目標エリアに割り当てられたカウンタは、目標エリアが製作システム１０２により出力される画像ストリーム内に含まれる時しか測定調整装置またはシステム１２１Ａにより増分することができない。図１１に示す実施例は、さまざまな方法を使用して実現することができる。たとえば、画像捕捉およびテレメトリ・システム１０４Ａ−１０４Ｎおよび画像測定システム１０４Ａ−１０４Ｎは、同じまたは別々のハードウェアまたはソフトウェア・プラットホームを使用して実現することができる。これらのシステムは、単一開催地の同じイベント、または異なる開催地における異なるイベントからの画像データを仮想的に同時に取り込むように使用することができ、また同じまたは別々の開催地に配置したり製作トラック等の製作制御ユニット内に一緒に配置したりすることができる。
【００４４】
図１２は、リアル・タイム持続時間算出モジュール１４７の処理を示すフロー図である。この方法は、本発明の方法に従って画像内に含まれる１つ以上の目標エリアに対して実施することができ、したがって、持続時間算出は、目標エリア５０４に挿入された合成画像だけでなく目標エリア５０４内の物理的画像により行うことができる。ステップ１５００において、モジュール１４７は、閉塞セパレータ１４４および背景／目標エリア基準セパレータ１３８からの入力を受信する。複数の目標エリアを有するモデルでは、各目標エリアは、それを識別するために一意的インデクスが割り当てられる。ステップ１５０２において、モジュールは、最終画像４００ｅまたはその１つ以上の構成要素を目標エリア_ｉに対して解析し、目標エリア_ｉがフレーム内に現れなければ、ステップ１５０４においてインデクスｉが増分され、ステップ１５０６においてモデル内に含まれる目標エリアの総数に対応するＦＩＮＡＬインデクス値と比較される。ＦＩＮＡＬインデクス値に達していなければ、モジュール処理は、ステップ１５００に戻る。ステップ１５０６においてＦＩＮＡＬインデクス値に達しておれば、モジュール１４７処理は、現在のフレームに対して終了し、任意の後続フレームに対してステップ１５００から開始される。
【００４５】
ステップ１５０２において最終画像４００ｅ内への目標エリア_ｉの包含が確認されると、ステップ１５０８において目標エリア_ｉに関連するオンエア・カウンタ_ｉが増分される。カウンタ_ｉは、算出モジュール１４７または画像測定システム１００の任意の他の構成要素内で維持することができ、好ましくは、関連する目標エリア_ｉが画像ストリーム内に含まれる累積持続時間を表すデジタル記憶値である。測定された累積持続時間は、たとえば、秒で計った持続時間、フレーム数、フィールド数等の任意数の単位とすることができる。さらに、持続時間単位は、聴衆に画像ストリームを出力するために使用される特定の画像標準に応じて決めることができる。たとえば、ＮＴＳＣ（National Television Standards Copmmittee）標準、ＰＡＬ（phase altering line）標準、その他の非常に多くの映像標準は、それぞれ、所定時間当たり画像ストリーム内に含まれる画像フレームまたはフィールド数を規定する送信周波数を規定している。任意の規定された標準に従って聴衆に送信される画像ストリーム内に含まれる目標エリアの持続時間測定は、それに従って行うことができる。さらに、後述するように、測定された持続時間は、目標エリア５０４内の画像の可視性に影響を及ぼす閉塞および前景パラメータを含む非常に多くの要因により重み付けすることができる。次に、ステップ１５１０においてインデクスｉが増分されステップ１５１２においてインデクスｉとＦＩＮＡＬインデクスが比較される。ＦＩＮＡＬインデクス値に達していなければ、モジュール１４７プロセスは、ステップ１５００に戻る。しかしながら、ＦＩＮＡＬインデクス値に達しておれば、モジュール処理は、現在のフレームに対して完了しステップ１５００において任意の後続フレームに対して継続される。
【００４６】
したがって、モデル内に含まれかつ最終画像４００ｅ内に目標画像が挿入されている任意の目標エリアがその特定の最終画像４００ｅに対して増分された関連するカウンタ_ｉを有する。同様に、モデル内に含まれ、かつ目標エリア内に画像が挿入されておらず、サイト内に物理的に配置されたシグネージ等の興味あるエリアに目標エリアが割り当てられている任意の目標エリアは、画像ストリームの特定の最終画像４００ｅ内の物理的標示を示す特定の最終画像４００ｅに対して増分された関連するカウンタ_ｉを有する。最終画像４００ｅ内に目標画像が挿入されているフレームのカウントは、画像の処理と同時にリアルタイムで行うことができることに注目される。しかしながら、明らかに目標エリアが画像ストリーム内に含まれるフレーム数の算出は、画像ストリームのテレビ放送、伝送その他の処理に関して遅延することがある。図１２において一般的に記述するプロセスに従って各目標エリア_ｉに対するフレーム・カウントが行われると、目標エリア_ｉ内に含まれる任意の目標画像（物理的および合成）の持続時間は、フレーム・カウンタ_ｉと画像ストリームの毎秒フレームの積として算出することができる。したがって、目標画像が画像ストリーム内に含まれる持続時間を考慮する持続時間ベースで画像ストリーム内に挿入された目標画像の形で広告主に料金を請求することができる。同様に、物理的シグネージを含むサイトの特定のエリアに割り当てられた目標エリアが画像ストリーム内に含まれる持続時間を算出することにより画像ストリーム内に取り込まれるサイト内に配置された物理的シグネージの形で広告主に料金を請求することができる。
【００４７】
目標画像が画像ストリーム内に含まれる持続時間を算出する技術は、所定の目標画像の「読取可能性」、すなわち、可視性に影響を及ぼす要因を考慮することにより向上させることができる。より望ましい持続時間測定値は、目標画像の閉塞に対してオンエア・カウンタを考慮し調節して算出することができる。図１２に関して前記した技術に従って、特定数の画像フレームに対する目標エリアが同じ持続時間カウントに評価され、したがって、目標エリアが全く塞がれなかったか、またはその任意のさまざまな部分が塞がれたかにかかわらず、ここに示す技術に従って同じ料金がかけらる。本発明のこのようなインプリメンテーションは、潜在的広告主に対して反対を引き起こすことがある。
【００４８】
図1０に示すものよりも幾分後で生じることがあるシナリオにおける第１のホッケ・プレーヤ４０４および第２のホッケ・プレーヤ４０６を含む最終画像４００ｅを図１３に示す。図１０に示す閉塞は、もはや存在せず、すなわち、プレーヤ４０４は、目標エリア５０４を超えて移動しており目標画像６０４は、完全に見られ、したがって、目標画像６０４は、全体が最終画像４００ｅ内に含まれる。それに比べて、図１０に示すシナリオに対しては、目標画像６０４の一部しか最終画像４００ｅ内に含まれない。
【００４９】
モジュール１４７は、目標エリア５０４に対する障害物の変動を説明する閉塞パラメータ（Δ）およびその内に含まれる目標画像６０４を計算することができ、目標画像６０４のテレビ放送その他の形の視聴に対して広告主に課される料金は、目標画像６０４の全体可視性の観点からより適切に徴収することができる。閉塞パラメータを計算するための典型的な構成は、モジュール１４７により、閉塞画像４００ｃに関する情報を閉塞セパレータ１４４に問い合わせることを含んでいる。モジュール１４７は、目標エリア５０４内に含まれるホッケ・プレーヤ４０４の画像４００ｅの一部分だけのピクセル・カウントである閉塞のピクセル・カウントを閉塞セパレータ１４４から取得することができる。同様に、目標画像８０２のピクセル・カウントを背景／目標画像セパレータ１４０から得ることができる。たとえば、目標画像８０２ピクセル・カウントに対する閉塞画像４００ｅピクセル・カウントの比を発生することにより閉塞のピクセル・カウントおよび目標画像８０２のピクセル・カウントから単純な閉塞パラメータを計算することができる。目標エリア_ｉに関連する持続時間カウンタ_ｉをそれに従って調節することができる。
【００５０】
図１４は、１つ以上の目標画像が画像ストリーム内に含まれ、かつ算出された持続時間内の１つ以上の目標画像の閉塞変動を反映する持続時間を測定するように操作できるリアル・タイム算出モジュール１４７の処理を示すフロー図である。ステップ１７００において、モジュール１４７は、画像コンバイナ１４６から最終画像４００を受信する。複数の目標エリアを有するモデルでは、各目標エリアにそれを識別するための一意的インデクスｉを割り当てることができる。ステップ１７０２において、モデルは、目標エリア_ｉの包含についてフレームを解析し、フレーム内に目標エリア_ｉが現れなければ、ステップ１７０４においてインデクスｉが増分され、ステップ１７０６において、モデル内に存在する目標エリア数に対応するＦＩＮＡＬインデクス値と比較される。ＦＩＮＡＬインデクス値に達していなければ、モジュール処理は、ステップ１７００に戻る。ステップ１７０６においてＦＩＮＡＬインデクス値に達しておれば、モジュール１４７処理は、現在のフレームに対して終了し、ステップ１７００において任意の後続フレームに対して繰り返される。
【００５１】
ステップ１７０２において目標エリア_ｉが確認されると、ステップ１７０８においてモジュール１４７は、目標エリア_ｉの任意の閉塞のピクセル・カウントを得る。次に、ステップ１７１０においてモジュール１４７は、目標エリア_ｉのピクセルカウントを得る。閉塞パラメータΔ、たとえば、目標画像_ｉピクセル・カウントに対する閉塞画像ピクセルカウントの比は、次にステップ１７１２においてモジュール１４７により計算される。あるいは、閉塞パラメータは、目標画像_ｉピクセル・カウントに対する閉塞画像ピクセルカウントの比として計算することができる。閉塞パラメータの他の変動も可能である。次に、ステップ１７１４において閉塞パラメータの関数としてカウンタ_ｉが増分される。たとえば、完全非閉塞目標エリア（または目標画像）によりカウンタ_ｉは、１だけ増分され、カウンタ_ｉへの増分の変動は、カウンタ_ｉが１の増分からΔを減じて行われる。Δの典型的な計算に従って、完全に塞がれた目標エリア（または目標画像）によりｉのゼロ増分が生じ、それは閉塞のピクセル・カウントが目標エリア_ｉ（または目標画像_ｉ）のピクセル・カウントに等しいためである。カウンタ値処理が実施されていてもカウンタ_ｉ値に変化が生じないことが望ましい。さらに、カウンタ_ｉは、目標エリアの閉塞量に反比例して増加する。
【００５２】
次に、ステップ１７１６においてインデクス_ｉが増分され、ステップ１７１８においてインデクス_ｉとＦＩＮＡＬインデクスの比較がなされる。ＦＩＮＡＬインデクス値に達していなければ、モジュール１４７プロセスは、ステップ１７００に戻る。しかしながら、ＦＩＮＡＬインデクス値に達しておれば、モジュール処理は、現在のフレームに対して完了し、ステップ１７００において任意の後続フレームに対して継続される。
【００５３】
したがって、モデル内に含まれ最終画像４００ｅ内に目標画像を有する任意の目標エリアは、その特定の最終画像４００ｅに対して増分された関連するカウンタ_ｉを有し、画像ストリームにわたって累積された目標エリアに関連する任意の最終カウントは、その内に含まれる目標画像の実際の可視性の量をより正確に反映する。次に、フレーム・カウンタ_ｉおよび画像ストリームの毎秒フレームの積として目標エリア内に含まれる任意の目標画像の持続時間を決定することができる。したがって、持続時間ベースで画像ストリームの目標エリア内に含まれる目標画像の形で作られた広告の料金がより正確に徴収される。
【００５４】
前記した本発明は、目標エリア内に含まれる目標画像の可視性に影響を及ぼすカメラ・ズームを考慮することによりさらに向上させることができる。図１８Ａおよび１８Ｂは、それぞれ、異なるカメラズームで得られる最終画像４００ｅを示す。各最終画像内で、その中に目標画像６０４を有する目標エリア５０４が最終画像４００ｅ内に含まれている。図１８に示す画像４００ｅは、前記した教示に従って解析して最終画像４００ｅを含む画像ストリーム内に含まれる目標エリアの持続時間算出を決定することができる。特定のシナリオ内での同等性（すなわち、目標エリア閉塞の同等性等）を仮定すると、カメラ・ズームにより遥かに見えにくいが、それでも画像４００ｅ内に現れる目標画像６０４は、前記した教示に従って最終画像４００ｅの背景に現れる目標画像６０４（図１５Ｂ）と同等に増分された持続時間カウンタが関連している。目標画像のオンエア持続時間カウントのこのようなインプリメンテーションは、潜在的な広告主の反対を引き起こすことがあるが、本発明は、目標画像の可視性に影響を及ぼすカメラ・ズームの変動に従って目標エリアに関連し、したがって、目標画像に関連するカウンタを修正するさらなる改善を提供する。
【００５５】
モジュール１４７は、目標エリア５０４内の目標画像６０４の可視性の差を生じるカメラ・ズームの変動を考慮する背景パラメータγを計算することができ、したがって、目標画像６０４の広告主に適用される料金は、目標画像６０４の全体可視性を考えてより適切に徴収することができる。前景パラメータを計算する典型的な構成は、モジュール１４７により、目標画像８０２のピクセル・カウントあるいは最終画像４００ｅに含まれる目標エリア５０５のピクセル・カウントについて背景／目標画像セパレータ１４０を問い合わせることを含んでいる。次に、たとえば、最終画像４００ｅピクセル・カウントに対する目標画像８０２（または目標エリア５０４）ピクセル・カウントの比を発生することにより、目標画像８０２（または目標エリア５０４）のピクセル・カウントおよび最終画像４００ｅのピクセル・カウントから単純な前景パラメータを計算することができる。一般的に、最終画像４００ｅのピクセル・カウントは、既知であり固定定数である。目標画像８０２に関連する持続時間算出は、目標画像８０２ピクセル・カウントおよび最終画像４００ｅピクセル・カウントの比の関数として調節して目標画像８０２の全体可視性を正確に反映させることができる。
【００５６】
図１６は、リアル・タイム持続時間算出モジュール１４７の処理を示すフロー図である。ステップ１９００において、モジュール１４７は、画像コンバイナ１４６から最終画像４００ｅを受信する。前記したように、複数の目標エリアを有するモデルでは、各目標エリアにそれを識別するための一意的インデクス_ｉを割り当てることができる。ステップ１９０２において、モデルは、目標エリア_ｉの包含についてフレームを解析し目標エリア_ｉがフレーム内に現れなければ、ステップ１９０４においてインデクス_ｉは、増分され、ステップ１９０６においてモデル内に存在する目標エリア数に対応するＦＩＮＡＬインデクス値と比較される。ＦＩＮＡＬインデクス値に達していなければ、モジュール処理は、ステップ１９００に戻る。ステップ１９０６においてＦＩＮＡＬインデクス値に達しておれば、モジュール１４７処理は、現在のフレームに対して終了し、任意の後続フレームに対してステップ１９００から繰り返される。
【００５７】
ステップ１９０２において画像４００ｅ内への目標エリア_ｉの包含が確認されると、ステップ１９１０においてモジュールは、目標エリア_ｉ（または目標画像_ｉ）のピクセル・カウントを得る。次に、ステップ１９１２において前景パラメータγ、たとえば、最終画像４００ｅピクセル・カウントに対する目標画像_ｉピクセル・カウントの比がモジュール１４７により算出される。次に、ステップ１９１４において、たとえば、カウンタ_ｉをγの算出値だけ単純に増分することによりカウンタ_ｉは、前景パラメータの関数により増分される。目標画像_ｉが最終画像４００ｅの全体を占有すると、前景パラメータγの典型的な計算に従ってカウンタ_ｉが１だけ増分する。カメラ・ズームの変動により背景において次第に遠くにみえる目標画像は、カウンタ_ｉへの増分が比例的に低減される。次に、ステップ１９１６においてインデクス_ｉが増分されステップ１９１８においてインデクス_ｉとＦＩＮＡＬインデクス間の比較が行われる。ＦＩＮＡＬインデクス値に達していなければ、モジュール１４７処理は、ステップ１９００に戻される。しかしながら、ＦＩＮＡＬインデクス値に達しておれば、モジュール処理は、現在のフレームに対して完了され、ステップ１９００において任意の後続フレームに対して継続される。
【００５８】
したがって、モデル内に含まれ、かつ最終画像４００ｅ内に含まれた目標画像を有する任意の目標エリアは、その特定の最終画像４００ｅに対して増分された関連するカウンタを有し、画像ストリームにわたって累積された目標エリアに関連する任意の最終カウントは、目標画像の可視性の変動を正確に反映し、任意数の最終画像４００ｅを製作するのに異なるカメラ・ズームが使用される。次に、画像ストリームの１つ以上のフレーム内に含まれる目標エリア内に含まれる任意の目標画像の持続時間をフレーム・カウンタと画像ストリームの毎秒フレームの積として決定することができる。したがって、画像ストリーム内に含まれる目標エリア内の目標画像の形で作られた広告の料金をより正確に徴収することができる。
【００５９】
好ましくは、図１に示す画像測定システムは、ディレクタのコンソール１２３と画像算出モジュール１４７間の通信チャネルを有することができる。これらの閾値は、ディレクタのコンソール１２３のオペレータにより設定、すなわち、規定することができる。目標エリアまたは目標画像がテレビ放送のフレーム内にまだ含まれているのに、特定の目標エリアまたは目標画像の閉塞量が大きすぎてテレビ放送の視聴者が閉塞された目標エリア内に含まれる特定の目標画像を認識できない場合があることが考慮されている。たとえば、目標画像は、画像ストリーム内に含まれる時に目標エリアの小部分しか占有しない会社の印しか含まないことがある。目標エリアの一部が閉塞されると、目標画像の形で挿入された印が画像ストリームの視聴者には見えない、すなわち、認識できないのに目標エリア自体は、その相当な部分が閉塞されていないことがある。前記した新しい技術に従って、このような状況において目標エリアに関連するカウンタは、それでも増分され、それは目標エリアの一部が関連するフレーム内に含まれるためである。カウンタの関数として計算された任意の料金は、印が見えない、すなわち、認識できないテレビ放送フレームに対して少なくともその一部を含むことになる。閾値は、このような状況の改善を促進するように実現することができる。閉塞閾値は、目標エリアの指定されたパーセンテージが閉塞される時にカウンタへの増分が許されない、すなわち、閉塞パラメータが閉塞閾値よりも大きければ、閉塞閾値は、カウンタへの増分を許さないように規定することができる。サイトモデル内に２つ以上の目標エリアが含まれる場合には、閉塞閾値は、各目標エリアに対して規定することができ互いに独立に実施することができる。したがって、広告ディレクタは、所定の目標エリア内に含まれる特定の目標画像に向かって特別に料金を適応させることができる。
【００６０】
また、閉塞閾値は、画面上に現れ、フレーム内であり、閉塞されない目標エリアまたは目標画像のパーセンテージの関数として実現することができる。たとえば、スポーツ・イベント中にカメラ・パンニングがしばしば生じて目標エリアがフレーム内に部分的にしか含まれないフレームが生じる。これらの状況では前記したものとは異なる閉塞パラメータを実現することができる。したがって、目標エリアに関連するカウンタへの増分を許さない異なる閉塞パラメータをフレーム内に完全には含まれない目標エリアに対して実現することができる。
【００６１】
本発明のさらにもう１つの実施例は、目標エリア５０４内のサブ目標エリア５０４Ａおよび５０４Ｂを利用する。サブ目標エリアに個別のカウンタを割り当てることにより個別のサブ目標エリアの料金を計算することができる。個別の独立した閉塞パラメータおよび前景パラメータを各サブ目標エリア５０４Ａおよび５０４Ｂに対して計算して、ここに記述された持続時間算出技術における追加改善を促進することができる。サブ目標エリア５０４Ａおよび５０４Ｂは、たとえば、目標画像がテキストだけでなく企業ロゴ等のグラフィックスを含む場合に有用である。グラフィックスは、多かれ少なかれテキストよりも認識できるため、両方を含む目標画像は、より大きい目標エリア内に画定される多数のサブ目標エリアを有することができる。サブ目標エリア５０４Ａおよび５０４Ｂの持続時間算出により目標エリア５０４内の目標画像の持続時間の独立算出が可能となるように、１つ以上の目標画像を目標エリア５０４内に含めることができる。したがって、独立したカウンタをそれぞれサブ目標エリアに関連づけることができる。その結果、サブ目標エリアに対して個別に料金を定めることができる。同様に、サブ目標エリア５０４Ａおよび５０４Ｂの各々に対して個別の閉塞パラメータおよび／または前景パラメータを計算することができる。サブ目標エリア５０４Ａおよび５０４Ｂの各々に対して異なる閉塞閾値を設定することもできる。
【００６２】
閉塞パラメータおよび前景パラメータを計算しおよび／またはそこへ閾値を割り当てる前記した特定技術は、例にすぎないことを理解しなければならない。閉塞による可視性の差を考慮する変動および画像ストリームを取り込むカメラのズームの変動も可能である。たとえば、閉塞されるか否かにかかわらず画像フレーム内にある目標エリアのパーセンテージを算出することができる。次に、画像フレーム内の目標エリアのパーセンテージを算出する前に、目標エリアへの全ての閉塞の総面積を完全な画像フレームの面積から減じることができる。
【００６３】
さらに、目標エリアの前景補償を変動させることができる。目標エリアを含むフレーム／フィールドのカウントは、全フレームエリア内の目標エリアの算出パーセンテージの閾値および画面エリアのパーセンテージに依存することができる。図１８について、画像フレームの総面積２２００、すなわち、フレーム信号をＡ_ｓで示し、画像フレーム２２０１の可視部の総面積をＡ_ｖで示し、カメラからのテレメトリに従ってレンダリングされた目標エリア２２０２の総面積をＡ_Ｔで示し、画面上で見える目標エリアの面積２２０３をＡ_Ｔｓで示し、目標エリアの全閉塞体の総面積２２０４をＡ_Ｔｏで示す。θ_Ｔは、カウント増分を許す標示のフレーム・エリアに対する閾値として定義される。好ましくは、θ_Ｔは、ユーザが設定可能である。θ_Ｔｏは、全閉塞体の面積が考慮される対応する閾値である。θ_Ｓは、画面面積のパーセンテージとして閉塞体を考慮しない可視目標エリアに対するユーザ設定可能な閾値である。θ_Ｓｏは、画像フレーム面積のパーセンテージとして閉塞を考慮する可視目標エリアに対する閾値を示す。次に、目標エリアに割り当てられたカウンタが増分されるかどうかを決定する下記の可能なテストを実施することができる。
【００６４】
【数１】

【００６５】
【数２】

【００６６】
【数３】

【００６７】
【数４】

【００６８】
式（１）−（４）により各目標エリアに割り当てられたカウンタへの増分を支配する閾値を設定することができる。目標エリアのカウンタへの増分の許可／不許可も、所望により、これらの式の論理的または重み付け結合から決定することができる。
【００６９】
本発明は、目標エリア内に画定された１つ以上のサブ目標エリア、たとえば、目標エリアに対応する標示（物理的または合成）内の広告主のロゴを含むことを考慮している。再度図１８について、目標エリア２２０２内のサブ目標エリアの総面積２２０５をＡ_Ｌとして示し、可視画像フレーム内のサブ目標エリアの面積２２０６をＡ_Ｌｓとして示し、全閉塞体により閉塞されるサブ目標エリアの面積２２０７をＡ_Ｌｏとして示す。次に、下記の閾値を定義することができる。φ_Ｌは、総サブ目標エリアのパーセンテージとしてのサブ目標エリアの画像フレーム・エリアの閾値、φ_{Ｌ o}は、総サブ目標エリアのパーセンテージとしての全閉塞体の総面積よりも小さい画像フレームエリアの閾値、φ_Ｓは、総可視画像フレームエリアのパーセンテージとしてのサブ目標エリアの閾値、φ_Ｓｏは、サブ目標エリアの任意の閉塞されたエリアよりも小さい総画像フレームエリアに関する閾値である。
【００７０】
次に、目標エリアに割り当てられたカウンタへの増分を許可／不許可する下記のテストを定義することができる。
【００７１】
【数５】

【００７２】
【数６】

【００７３】
【数７】

【００７４】
【数８】

【００７５】
目標エリアのカウンタへの増分の許可／不許可も式 （５）−（８）の論理的または重み付け結合から決定することができる。洗練化の追加レベルとして、式（１）−（４）を式（５）−（８）と結合してカウンタ増分の許可／不許可に対するハイブリッドメトリックを提供することができる。
【００７６】
好ましくは、オンエア持続時間算出モジュール１４７を含む画像測定システム１００は、図１７および図１９および／または式（１）−（８）の１つ以上に関して記述された閉塞および前景変動の両方に対する調節を有する。しかしながら、本発明の教示は、図１２および付随する記述に従って最も単純な形で実現することができる。前記したように、フレームではなくフィールド・ベース機構で計算を実施することができる。したがって、目標エリアが画像ストリーム内に含まれる持続時間を測定する前記したカウンタは、テレビ放送される映像ストリームの１つ以上のフィールドの解析により実施することができる。
【００７７】
本発明の他の修正も可能である。たとえば、１つ以上の目標エリアが画像ストリーム内に含まれる持続時間をリアル・タイムで算出できる前記した技術は、合成画像が画像ストリーム内に含まれる所望の持続時間が達成されることを保証する機構も提供する。たとえば、広告主は、スポーツ・イベントのテレビ放送等の画像ストリーム内に広告を包含させる契約をすることができる。本発明により契約は、広告または他の合成画像が画像ストリーム内に含まれる最大露出時間、最小露出時間または厳密な露出時間等の持続時間を指定することができる。契約は、広告または他の画像が画像ストリーム内に含まれる秒または画像ストリームのフレーム等のいくつかの単位を指定することができる。したがって、画像ストリーム内の広告の包含に対して徴収される広告料金は、画像ストリームをテレビ放送する前の持続時間ベースまたは他の伝送機構で行うことができる。これは、画像ストリームのテレビ放送または他の伝送後に、広告が画像ストリーム内に含まれる持続時間の算出を必要とする従来技術を凌ぐ注目すべき改善である。画像ストリーム内に含まれる画像に対する持続時間ベース料金は、従来技術に従って画像ストリームのテレビ放送後まで徴収されないことがある。したがって、特定の画像が画像ストリーム内に含まれる持続時間は、従来技術に従ってテレビ放送の送信前に規定されないことがある。
【００７８】
本発明の実施例に従って、合成画像は、それを挿入させた画像ストリームが送信される前に規定された所望の露出時間を有することができる。本発明の教示に従って、その中に挿入する目標エリアに合成画像を割り当て画像ストリーム送信中に目標エリアがダイナミックに再割当されるのを許すことにより、画像が画像ストリーム内に含まれる予め定められた所望の持続時間を容易に満たすことができる。たとえば、スポーツ・イベント・テレビ放送中に、目標エリア内に挿入するために割り当てらた合成画像は、画像ストリームの送信前に規定された予め定められた所望の露出持続時間を有することができる。目標エリアが合成画像をそこに割り当てた持続時間の露出時間のリアル・タイム算出は、画像ストリーム送信中のある点において、広告主の所望の持続時間だけ目標エリアが画像ストリーム内に含まれないことがあることを示すことがある。画像データに関連するオリジナルの予め定められた持続時間だけ画像ストリーム内に含まれるより大きい尤度を提供するように決定されるもう１つの目標エリアに合成画像を再割当てすることができる。たとえば、広告主は、野球場の右翼壁等のスポーツ開催地の目標エリア内に予め定められた持続時間だけ合成画像を挿入させる契約を行うことができる。野球ゲームの送信中に、画像ストリームの捕捉中に収集され画像データをそこに割り当てた目標エリアに対して算出された持続時間測定値、メトリクスその他の統計データの解析により、開催地から画像ストリームを送信する前に広告主により表示され承諾された所望持続時間よりも短い持続時間だけ目標エリアが含まれそうであることを表示することができる。したがって、目標エリアに割り当てられた画像データは、もう１つの目標エリアに再割当てすることができる。たとえば、画像ストリームの送信中に目標エリアがそこに画像データを割り当てた実際の持続時間は、予め定められた所望持続時間よりも短くなりそうであることが決定され、目標エリアに割り当てられた画像データは、もう１つの目標エリア、たとえば、元々そこに割り当てられた画像データを有する目標エリアに対してより大きな露出持続時間を示す持続時間算出結果を有する中堅壁等の開催地のもっと見えるエリア内の目標エリアに再割当てすることができる。したがって、画像データがもう１つの目標エリアに再割当てされると、画像データが画像ストリーム内に含まれる持続時間は、予め定められた所望の持続時間を達成するように増加することができる。同様に、画像データは、多数の目標エリアに再割当てすることができ、その再割当ては、そこから再割当てされる目標エリアで画像データの割当てを維持することを妨害せず、すなわち、画像データは、第１の目標エリアに割り当てることができ、かつ元々第１の目標エリアに割り当てられた画像データが第２の目標エリアまたは第１および第２の目標エリアを含む画像フレームの画像内に現れる第２の目標エリアに再割当てすることができる。画像データの再割当ては、そこに割り当てられた画像データが予め定められた持続時間だけ画像ストリーム内に含まれるように、任意数の目標エリアに対して行うことができる。したがって、ここに記述されたカウンタ機構のバリエーションは、１つ以上の目標エリア内に含まれ、かつ他の目標エリアに再割当てできる画像データの持続時間測定を促進させるように行うことができる。たとえば、目標エリアに割り当てられるカウンタは、同様に、ここの教示に従って画像ストリームの画像内に挿入することができる特定の画像データに割り当てかつ計算することができる。したがって、目標エリア内に挿入される画像データに関連する特定のカウンタは、目標エリアが画像ストリームの画像内に含まれ、かつ特定の画像データを含んでいる時しか増分できない。画像データを再割当てしたらカウンタを異なる目標エリアに再割当てすることができる。さらに、カウンタへの増分は、画像ストリームの画像内への複数の目標エリアのいずれか１つの包含の決定時に行って画像データの再割当ておよびその持続時間算出を促進することができる。
【００７９】
前記記述は、本発明の典型的な実施例に関して行われた。しかしながら、実施例は、本発明の範囲を逸脱することなく修正または変更することができ、発明の範囲は、添付の特許請求の範囲によってのみ規定され限定される。
【図面の簡単な説明】
【００８０】
【図１】画像ストリームを操作するリアル・タイム挿入システムを表す略図である。
【図２】目標画像を挿入する前にビデオ・カメラにより発生されるビデオ画像の例を示す図である。
【図３】図２のビデオ画像が取り出されその中に基準画像を含む目標エリアが画定されるサイトのモデルのレンダリングを示す図である。
【図４】基準画像によるサイトのモデルのレンダリングを含み、図２のビデオ画像を発生するカメラの同じ位置およびアングルからレンダリングされた画像を示す図である。
【図５】図４の画像から発生されたマスクを処理する目標エリアを示す図である。
【図６】図５のマスクを図４の画像に適用して発生されたマスクされた基準画像を示す図である。
【図７】図５の目標エリア・マスクを図２のオリジナル・ビデオ画像に適用して発生されたマスクされた背景画像を示す図である。
【図８】図５の目標エリア・マスクを図２のオリジナル・ビデオ画像に適用して発生されたマスクされた目標エリア画像を示す図である。
【図９】図８のマスクされた目標エリア画像を図６のマスクされた基準画像と比較して発生された閉塞画像を示す図である。
【図１０】図７の閉塞画像をマスクされた背景画像およびマスクされた目標画像と結合して発生される目標画像を含む最終複合画像を示す図である。
【図１１】製作システムが多数の入力信号の１つ以上を出力として選択する前に、ビデオ・ストリームの測定処理がマルチ・カメラ・システム内で実施される画像測定システムの略図である。
【図１２】画像が映像テレビ放送内に挿入される持続時間を算出するモジュールの処理のフロー図である。
【図１３】時間経過後の図８に示すシナリオを示す最終画像である。
【図１４】挿入された画像の閉塞の変動を反映するように画像が映像内に含まれる持続時間の算出を調節するように操作できるモジュールの処理を示すフロー図である。
【図１５Ａ】異なるカメラ位置、パンおよびチルト・アングル並びにズーム設定において得られる最終複合画像をそれぞれ示す図である。
【図１５Ｂ】異なるカメラ位置、パンおよびチルト・アングル並びにズーム設定において得られる最終複合画像をそれぞれ示す図である。
【図１６】カメラ・ズームの違いから生じる挿入された画像の可視性の変動を反映するように画像が映像内に挿入される持続時間の算出を調節するように操作できるモジュールの処理を示すフロー図である。
【図１７】本発明の実施例に従って多数のサブ目標エリアを有する目標エリアを示す図である。
【図１８】目標エリア・カウンタへの増分を許可／不許可する閾値を指定するように設計されたさまざまな画像エリアを有する画像フレームを示す図である。

Claims (30)

1. 画像捕捉システムにより得られる画像ストリーム内に目標エリアが含まれる持続時間の算出方法であって、
   目標エリアの包含について画像ストリームの少なくとも１つのフィールドを解析するステップと、
   目標エリアが少なくとも１つのフィールド内に含まれることを確認したらカウンタを自動的に増分するステップと、
   を含む方法。
2. 請求項１に記載の方法であって、さらに、目標エリアの閉塞パラメータを計算するステップを含む方法。
3. 請求項１に記載の方法であって、カウンタに応答して料金が計算される方法。
4. 請求項２に記載の方法であって、目標エリアの閉塞のピクセル・カウントおよび目標エリアのピクセル・カウントに応答して閉塞パラメータが計算される方法。
5. 請求項４に記載の方法であって、閉塞パラメータは、目標エリアの閉塞のピクセル・カウントに対する閉塞のピクセル・カウントの比である方法。
6. 請求項２に記載の方法であって、増分は、１から減じられた閉塞パラメータの数値的結果である方法。
7. 請求項１に記載の方法であって、さらに、目標エリアの前景パラメータを計算するステップを含む方法。
8. 請求項７に記載の方法であって、前景パラメータは、目標エリアのピクセル・カウントおよび少なくとも１つのフィールドのピクセル・カウントに応答して計算される方法。
9. 請求項８に記載の方法であって、前景パラメータは、少なくとも１つのフィールドのピクセル・カウントに対する目標エリアのピクセル・カウントの比である方法。
10. 請求項７に記載の方法であって、増分は、前景パラメータの計算された値と等価である方法。
11. 請求項２に記載の方法であって、さらに、閉塞閾値を規定するステップを含み、閉塞閾値は、閉塞パラメータを超える場合にはカウンタへの増分が許可されない方法。
12. 請求項１に記載の方法であって、目標エリアは、画像ストリームが取り込まれたサイトに存在するシグネージおよびサイトに存在しない合成画像からなるグループから選択された画像データを含む方法。
13. 請求項１に記載の方法であって、さらに、
    目標エリア内に挿入される画像データを割り当てるステップと、
    画像ストリーム内に含まれる第２の目標エリアに画像データを再割当てするステップと、
    を含む方法。
14. 請求項１３に記載の方法であって、第２の目標エリアに画像データを再割当てするステップは、さらに、画像ストリームが取り込まれる時に画像データを第２の目標エリアに再割当てするステップを含む方法。
15. 請求項１３に記載の方法であって、さらに、
    画像ストリームが取り込まれる前に画像データが画像ストリーム内に含まれる持続時間を指定するステップと、
    画像データを再割当てする前に画像ストリームが取り込まれる時に目標エリアおよび第２の目標エリアからなるグループの少なくとも１つが画像ストリーム内に含まれる持続時間を示す統計データを収集するステップと、
    を含む方法。
16. 請求項１５に記載の方法であって、第２の目標エリアに画像データを再割当てするステップは、さらに、第２の目標エリアが画像ストリーム内に含まれる持続時間が目標エリアよりも長いことを示す統計データに応答して画像データを第２の目標エリアに再割当てするステップを含む方法。
17. 請求項１３に記載の方法であって、さらに、第１の目標エリアに関連するカウンタへの各増分を第２の目標エリアに関連する第２のカウンタへの増分と合計して画像データが画像ストリーム内に含まれる持続時間を計算するステップを含み、合計増分は、画像データが目標エリアおよび第２の目標エリアの１つ以上にそれぞれに割り当てられる時に行われる目標エリアへの各増分に制限される方法。
18. 目標エリアが画像ストリーム内に含まれる持続時間を算出するシステムであって、
    画像ストリームが取り込まれるサイトからの目標エリアのモデルと、
    画像ストリームの少なくとも１つのフィールド内への目標エリアの包含を識別する持続時間算出モジュールであって、少なくとも１つのフィールド内への目標エリアの包含が確認されると増分されるカウンタを含むモジュールとを含み、
    サイトが画像ストリーム内に含まれる時に目標エリアは、少なくとも１つのフィールド内に含まれるシステム。
19. 請求項１８に記載のシステムであって、さらに、
    画像ストリームの複数のフィールドの中の少なくとも１つに目標画像を挿入する画像挿入システムであって、持続時間算出モジュールと通信する画像挿入システムと、
    画像測定システムに画像を提供する画像捕捉システムであって、画像供給システムが画像挿入システムと通信する画像捕捉システムとを含むシステム。
20. 請求項１８に記載のシステムであって、持続時間算出モジュールは、画像挿入システム内に含まれるシステム。
21. 請求項１８に記載のシステムであって、画像測定システムは、さらに、
    画像供給システム内に含まれるカメラの既知の位置からサイト内の目標エリアの予め定められた三次元基準モデルに基づいて合成画像を発生するモデル・レンダラであって、合成画像は、その目標エリア内に挿入された目標画像を有するモデル・レンダラと、
    カメラにより発生された映像信号のフレーム内に含まれるビデオ画像から目標エリアをマスクしてマスクされた背景画像を生成し、基準画像を画像の残りから分離することにより画像セパレータによりマスクされた基準画像が生成される画像セパレータと、
    マスクされた目標エリア画像をマスクされた基準画像と比較するように操作できる閉塞セパレータであって、その間の差は、目標画像の閉塞を表す閉塞セパレータとを含むシステム。
22. 請求項２１に記載のシステムであって、モジュールは、画像セパレータから得られた情報から閉塞パラメータを計算するシステム。
23. 請求項２２に記載のシステムであって、閉塞パラメータは、目標画像のピクセル・カウントに対する閉塞のピクセル・カウントの比として計算されるシステム。
24. 請求項２２に記載のシステムであって、増分は、閉塞パラメータの関数であるシステム。
25. 請求項２１に記載のシステムであって、モジュールは、画像挿入システムから得られた情報から前景パラメータを計算するシステム。
26. 請求項２４に記載のシステムであって、さらに、マスクされた背景画像および閉塞から最終画像を作り出す画像コンバイナを含み、モジュールは、画像セパレータからの目標エリアのピクセル・カウントおよび画像コンバイナからの最終画像のピクセル・カウントを得、前景パラメータは、目標エリアのピクセル・カウントおよび最終画像のピクセル・カウントから計算されるシステム。
27. 請求項２４に記載のシステムであって、増分は、前景パラメータの関数であるシステム。
28. 請求項２１に記載のシステムであって、閉塞パラメータが閉塞閾値を超えるとき、カウンタへの増分は、許可されないシステム。
29. 請求項２１に記載のシステムであって、目標エリアは、画像ストリームが取り込まれたサイト内に存在するシグネージおよびサイトには存在しない合成画像からなるグループから選択された画像データを含むシステム。
30. 請求項２１に記載のシステムであって、さらに、
    画像ストリームが取り込まれる第２のサイトからの目標エリアのモデルと、
    第２のサイトからの目標エリアが画像ストリームの少なくとも１つのフィールド内に含まれることを識別する持続時間算出モジュールであって、目標エリアが少なくとも１つのフィールド内に含まれることを確認したら増分されるカウンタを含み、第２のサイトが画像ストリーム内に含まれる時は第２のサイトからの目標エリアは、少なくとも１つのフィールド内に含まれる持続時間算出モジュールとを含むシステム。

Images