JP2005531971A - ビデオ信号処理システム - Google Patents

Abstract

本発明は、ビデオ信号を処理するシステムであって、前記システムはビデオ信号を受信するように構成されたレシーバ（１００）を有し、前記ビデオ信号の少なくとも１つのビデオフレームは複数の放送データソースの各々に対応する少なくとも１つのエリアを有する。前記システムは、前記ビデオフレームを処理して前記ビデオフレームの少なくとも１つから前記エリアの少なくとも一部を抽出するように構成されたプロセッサ（１５０）を有する。モザイクビデオ信号のフレーム（２００）は、１以上の小さなピクチャ（２１０）を有し、各ピクチャにはテレビプログラムのミニチュアバージョンが再生される。フレームからエリア（２１０）またはサブエリア（２４０）を抽出するために、エッジ検出とライン検出が行われる。抽出されたエリアまたはサブエリアが受信された、または関連したテレビチャンネルを識別することができる。ユーザはディスプレイ画面上で抽出されたエリアまたはサブエリアの表示を特定することができる。

Description

本発明は、ビデオ信号であって、その少なくとも１つのビデオフレームが複数の放送データソースの各々に対応する少なくとも１つのエリアを有するビデオ信号を受信するように構成されたレシーバを有するビデオ信号処理システムに関する。

米国特許第5,633,683号は、複数のサブピクチャであって各サブピクチャは複数のビデオ信号の１つを表すサブピクチャを含むモザイクビデオ信号と、ディスプレイ画面上の各サブピクチャの位置を関連するビデオ信号のプログラム番号とリンクする位置データとを受信し表示するテレビレシーバを開示している。そのレシーバは、ユーザにより表示され指示されたサブピクチャの位置により表されるビデオ信号のプログラム番号を復号するデコーダを有する。よって、そのユーザは、そのモザイク画面上の対応するサブピクチャを単に「指示してクリックする」だけで所望のプログラムを見たり記録したりするために選択することができる。そのレシーバは、そのモザイク信号から選択されたサブピクチャを導出する手段と、そのビデオ信号が選択された後の所定期間にわたって選択されたサブピクチャおよび関連するビデオ信号を同時に表示する手段とをさらに有する。それにより、そのレシーバは、選択されたプログラムを復号し表示する第１のデコーダと、そのモザイクビデオ信号を処理するさらに別のデコーダを有する。選択されたプログラムの特徴を表すサブピクチャが切り取られ、ピクチャ・イン・ピクチャとして表示される。

サブピクチャは、テレビレシーバが位置データを取得したときにだけ導出可能である。このような構成には位置データを生成する特別なトランスミッタが必要であり、上記技術の使用を制限している。例えば、テレビサービスプロバイダの設備が位置データを生成できるように構成されなければ、レシーバはサブピクチャを導出することができない。
米国特許第5,633,683号

本発明の目的は、ディスプレイ画面上の各サブピクチャの位置を関連するビデオ信号のプログラム番号とリンクする位置データの取得にかかわらず、ビデオ信号と好適に動作可能な、上で規定した種類のシステムを提供することである。

本発明の目的は、当該システムが、ビデオフレームを処理して前記ビデオフレームの少なくとも１つから前記エリアの少なくとも一部を抽出するように構成されたプロセッサを有することにより、実現される。

レシーバにより受信されるフレームは、各放送ソースに対応する１以上のエリアを有する。例えば、フレームは小さなピクチャを有し、各ピクチャには各テレビチャンネルで放送されたテレビプログラムのミニチュアバージョンが再生される。通常、ピクチャは方形である。レシーバは、各フレームのビデオデータを画像として処理し、そのフレームから完全なピクチャを抽出するように構成されたプロセッサを有する。他の実施例において、１つのテレビチャンネル上で放送されたビデオ情報は、フレームのエリアの全部または一部を占有し、そのビデオ情報の一部、サブエリア、またはサブピクチャのみがプロセッサにより抽出される。そのサブエリアは、例えば天気図や図形形状であり、方形、円形、その他の形の閉じた形状を有する。

第１に、プロセッサによりフレームからエリアまたはサブエリアを読み出すために、エッジの検出を行う。エリア間のエッジまたはサブエリアと他のビデオデータ間のエッジを決定する。一実施形態において、例えば、時間的フィルターを用いて、エリアまたはサブエリアがフレーム上で同じ位置にある、複数の連続したフレームにおいてエッジの検出を行う。プロセッサが１以上のフレームを分析してそのフレーム上のエリアのエッジを決定するとき、エッジ検出の信頼性はより高いものとなる。それゆえ、フレーム内のエリア間のエッジやエリア内のサブエリア間のエッジは、フレーム内に存在し例えばオブジェクトやキャラクタの動きにより時間と共に変化する他のエッジよりも強いものとなる。他のビデオデータからエリアやサブエリアの境界をなしているラインをさらに検出することにより、エッジ検出をさらに向上することができる。例えば、ハフ（Hough）変換を上記の検出に使用することができる。モザイクフレームの場合、ピクチャ間のラインが等距離である特性を抽出プロセスで用いて、見せ掛けのエッジの検出を減少または防止する。対応するエリアまたはサブエリアの水平および垂直線を決定すると、そのエリアまたはサブエリアのビデオデータをさらに処理および／またはディスプレイデバイス等の表示手段に転送して、抽出した情報を表示する。フレーム中のエリアの位置を示すデータが必要でないことが、本発明によるシステムの特長である。これにより、先行技術にはあった不必要な制限をなくし、ビデオ情報を処理するどんな補助的なデータが利用可能であるかに係りなく、ビデオ情報を抽出可能となる。

あるいは、レシーバは、ビデオフレームの少なくとも１つから抽出すべき、表示手段により表示されたフレームのエリアまたはサブエリアをユーザが示すことができるマーカを有する。抽出するエリアまたはサブエリアはユーザにより容易に特定されるので、プロセッサはエッジおよびラインを検出することによりエリアまたはサブエリアを決定する必要がない。換言すると、ユーザが画面に表示されているフレームの一部をマークでき、そのエリアまたはサブエリアが１以上のフレームから抽出される。先行技術において知られているより多くのビデオ情報を処理する方法を本発明が提供することは、もう１つの特長である。

一実施形態において、レシーバは、抽出されたエリアまたはサブエリアが受信された、またはそれと関連する放送データソース、またはテレビチャンネルを識別する手段をさらに有する。エリアまたはサブエリアが抽出されると、これらのデータが次にどうなるかをまったく知ることなしに、ビデオデータとして表示される。エリアまたはサブエリアがモザイクビデオ信号から抽出された場合、そのエリアまたはサブエリアがどのチャンネルに対応するかは分からないかもしれない。各チャンネルを識別する方法は多数ある。例えば、テレビチャンネルのロゴが抽出されたエリア内、またはサブエリアが抽出されたエリア内に表示されている。ユーザが手動でチャンネルを特定してもよい。

他の実施形態において、ユーザは、表示手段により画面上に抽出されたエリアまたはサブエリアの表示を特定できる。例えば、抽出された情報の位置をユーザの好みに合わせたり、抽出されたエリアまたはサブエリアを表示する画面エリアを変更してもよい。

添付した図面を参照して、本発明の上記その他の態様をさらにはっきりと説明する。

図１は、本発明によるレシーバを示す機能ブロック図である。本システムは、ディスプレイデバイス（図示せず）、VCR（ビデオカセットレコーダ）、スピーカ、その他のデバイスが接続されたまたは有したレシーバ１００を有する。このレシーバは、AV（オーディオビデオ）信号を取り扱うように設計された、セットトップボックスその他の異なるデバイスと一体となっていてもよい。レシーバ１００は衛星、地上波、ケーブル、その他のリンクを介して送信された複数のビデオ信号を受信する。リモートコントロールユニット（図示せず）から送信された赤外線信号により、レシーバに命令を入力することもできる。よって、本レシーバは、制御信号を取り扱うレシーバ（図示せず）を有する。リモートコントロールユニットは、ここに説明するように、このレシーバを制御するための命令に関連した特殊なボタンを有していてもよい。近年、デジタルビデオ信号を送受信するためのシステムとして、MPEGベースのシステムが周知となっている。本発明によるレシーバは、デジタルおよび／またはアナログビデオ信号を受信するように構成されていてもよい。

本レシーバは、少なくとも１つのチューナ１１０、デマルチプレクサ１２０、任意的オーディオデコーダ１３０、少なくとも１つのビデオデコーダ１４０、およびビデオプロセッサ１５０を有する。受信されたビデオ信号はチューナ１１０に入力される。

ビデオ信号には、フレームの比較的小さいエリアを占有する小型ピクチャを伴うフレームよりなるモザイクビデオ信号が組み込まれている。各ピクチャは、テレビチャンネル、インターネット放送センタ、その他の放送データソースの各々と関連したビデオ信号を表している。あるいは、ビデオ信号は、単一の放送データソースから受信した情報を有していてもよい。例えば、チューナは１つのテレビチャンネルだけのビデオ信号を受信してもよい。

チューナ１１０は、受信した信号を復調する復調回路と、エラーが発生した場合にそれを検出し訂正するエラー訂正回路を含んでいてもよい。チューナからの出力は、信号を復号するデマルチプレクサ１２０に供給される。このデマルチプレクサは、出力オーディオ信号をオーディオデコーダ１３０に、出力ビデオ信号をビデオデコーダ１４０にそれぞれ供給する。デコーダ１３０と１４０は、オーディオ信号およびビデオ信号をそれぞれ復号する。このオーディオ信号、ビデオ信号はMPEG圧縮された信号であってもよい。将来、ビデオシステムがさらに発達した場合、本発明の実施の仕方は当業者により変更されてもよい。

本レシーバは、２つ以上のチューナと２つ以上のデコーダとを有していてもよい。例えば、２つのチューナと２つのビデオデコーダとを有していてもよい。各デコーダはビデオ信号を格納するメモリ（図示せず）を有していてもよい。チューナの１つを用いてユーザが選択したチャンネルの信号を受信し、他のチューナを用いてビデオモザイク信号を受信する。そのような方法で、ビデオデコーダの１つをビデオモザイク信号を復号するために用いる。異なるテレビチャンネルに対応する信号がモザイクビデオ信号とともに受信される。代替的に、レシーバが１つのチューナだけを有し、２つのチューナが利用可能であるときと同じ機能を果たすことは、本発明の有利な点である。例えば、チューナは、ユーザにより選択されたチャンネルの信号を受信し、かつモザイクの信号を受信するように構成されていてもよい。この単一のチューナが、例えばｘ個（例えば３）のピクチャのモザイクチャンネルと、５０−ｘ個のピクチャのメインプログラム（例えばユーザに選択されたプログラム）に同調してもよい。チューナは、ｘ個のピクチャ期間があれば、モザイクチャンネルから少なくとも１つのピクチャを抽出する時間を十分確保できる。メインチャンネルの失われたピクチャはピクチャ反復により生成したり、ハイエンドシステムにおいてはナチュラルモーションインターポレーションで生成することができる。メインプログラムからは少しのピクチャしか失われていないので、見る者にはほとんど分からない。

デコーダ１４０は複合されたビデオ信号をビデオプロセッサ１５０に供給する。そのプロセッサは受け取った信号を本発明により処理し、ビデオ情報を抽出する。

モザイクビデオ信号が利用可能であるとき、その信号のフレームは単純なピクチャまたはビデオ情報であり、追加的データなしに分析することができる。図２は、モザイクビデオ信号のフレーム２００の例を示す図である。エリア２１０を識別するため、通常は方形または準方形である対応するエリアの、フレームにおける座標XYを決定しなければならない。これは、Jae S. Lim著「２次元信号と画像処理（Two-dimensional signal and image processing）」（Prentice-Hall PTR、New Jersey、１９９０年）の４７６〜４８３ページから一般的に知ることができるエッジ検出方法によりまず実行することができる。異なるテレビチャンネルに対応するエリア２１０間のエッジを検出しなければならない。エッジは、画像の物理的態様、例えばピクセルグレー値、色、テクスチャが変化する境界または輪郭である。物理的態様が急激に変化するところで、上記の参照文献に記載されたアルゴリズムにより、エッジ点の候補からエッジラインが決定される。例えば、ｘ方向とｙ方向におけるベクトルの傾きを算出することにより、物理パラメータの閾値が決定できる。傾きの大きさがその閾値と比較され、エッジ点の候補が決定される。エッジ片が現れた後、例えば、エッジを細くするアルゴリズムを適用し、エッジカーブを決定する。エッジを細くするアルゴリズムの単純なものにおいては、少なくとも１つの方向において傾きの成分（モジュール）が局所的に最大であるかどうかをチェックすることにより、エッジ点が選択される。検出を正しく行うため、エッジ検出は同一のエリアの連続したフレームに対して実行する。

ライン２２０の検出は、エッジを検出した後、プロセッサ１５０により行われる。画像中の点のアライメントを発見する多数の方法および機能構成が知られている。例えば、直線の各点からの垂直偏差の２乗の合計を最小化する、いわゆる「最小機能」法を用いて、データ点に直線を当てはめることができる。John C.Russ著「画像処理ハンドブック（The image processing handbook）」（CRC Press、Boca Raton、Florida、１９９５年）の４９５〜５００ページから知ることができるように、スペリア・ハフ（Hough）法を有利に用いてもよい。この方法を用いて、フレーム中の直線でない輪郭を有するエリアを検出することもできることに注意すべきである。検出したエッジに当てはまるラインを決定した後、システムは必要なビデオエリアを知ることができる。エリアが方形の場合、フレームにおいてエリアの座標XYが決定され、エリアに対応するビデオデータが完全なフレームのビデオデータから識別され分離できる。

それぞれの放送データソースまたはテレビチャンネルに対応するエリア２１０が抽出されたとき、そのエリアがどのテレビチャンネルに対応するかは依然として分からないままである、すなわち受信したフレームまたは単なる画像からではシステムには分からない。この目的のため、プロセッサ１５０は、抽出されたビデオエリアのソースを識別するようにさらに構成される。１つの可能性として、プロセッサが、テレビチャンネルのロゴ２３０がもしあれば、そのロゴ２３０を見つけるためにプロセッサがエリア２１０全体を分析してもよい。その後、先行技術として知られた認識方法を適用して、サイン、ロゴイメージ、テキスト等を認識し、チャンネルの識別情報と比較する。そのチャンネルの識別情報は、システムが前もって決定したものか、または製造者が前もって決定し、レシーバに格納したものである。

あるいは、ロゴの位置を決定するフェーズにおいて、ユーザは画面のロゴの入ったビデオエリアを「手動で」ハイライトしてもよい。例えば、多数のフレームにわたって連続したフレーム中にロゴビデオデータを検出することにより、ロゴビデオデータに時間的分析を適用してもよい。ロゴデータは上で説明した検出方法を用いて識別でき、抽出され、プロセッサに結合されたメモリに格納される。上記の方法で取得したロゴ識別データ、ロゴテンプレートを用いて、テレビチャンネルを識別する。チャンネルを識別するため、例えば周知の最小自乗法を用いて、ビデオ信号中のロゴをメモリに格納されたロゴテンプレートと相関をとる。

コマーシャルが流れている間、フレーム中にロゴが表示されないことがある。しかし、特定のテレビチャンネルで放送された情報をともなうエリアの位置は、フレームごとには変化しない。この問題は、それぞれのエリアと関連したテレビチャンネル識別子のテーブルを、プロセッサと結合したメモリ手段（図示せず）に格納することにより解決することができる。図２のモザイクフレームについて、表１に示す。このテーブルは、システムにより一旦導出され、格納される。

あるいは、テレビチャンネルを知ろうとする画像に対応するオーディオ情報を分析してもよい。テレビチャンネルの一部は、自社のプロモーションポーズを繰り返し放送し、特定の音楽とビデオ情報を伴っている。以上の方法を用いてテレビチャンネルを識別することができ、その実施は当業者には困難ではないであろう。

さらに別の実施例において、放送ソースを識別するデータを遠隔のトランスミッタから受信してもよい。例えば、チャンネル名（ID）またはその省略形のシーケンスをレシーバ１００により受信れば、この目的には十分である。このデータは、識別子を次のエリアと関連づけるために、右、またはその他の方向を特定する１つの特殊なキャラクタ（SC）を有していてもよい。このように、追加的情報はほとんど必要ない。図２のモザイクフレームの上記の識別データの例を、次の表２に示す。上記識別方法の実施については、米国特許第5,633,683号に記載されている。

本発明のさらに別の態様によると、プロセッサ１５０は、それぞれの放送データソースまたはテレビチャンネルに対応する、エリア２４０の一部またはサブエリアのみを抽出するように構成されている。エリア中のサブエリアを識別するための位置データがトランスミッタ、または放送データソースにより生成されレシーバに送られたとき、そのサブエリアが抽出されプロセッサにより用いられる。例えば、テレビチャンネルの放送事業者は、上記データをデジタルビデオ信号に含ませる。モザイクビデオ信号のプロバイダは、それぞれのテレビチャンネルがあればそのテレビチャンネルに対応するエリアのモザイク信号にそのデータを組み込んでもよい。トランスミッタとレシーバを有する上記システムは、米国特許第5,633,683号から知ることができるシステムを適当に変更することにより、実現することができる。

あるいは、ユーザが抽出するサブエリアを特定してもよい。例えば、表示デバイス上に示された、フレーム２００上に示されたカーソル、マーカ、その他のポインターをこの目的に用いることができる。ユーザは、フレーム上にサブエリア２４０をマーキングするために、リモートコントロールユニットの方向キーを用いて、そのマーカ、カーソル、特殊キーを表示することができる。サブエリアがユーザによる操作によって選択されたとき、モザイクビデオ信号の次のフレームからそのサブエリアを抽出することができる。

ユーザが手動で方形エリア２１０全体を選択したとき、選択されたエリアは、上で説明した方法、例えばハフ（Hough）変換を用いて自動的に検出された方形エリアと対応づけられる。

サブエリアを抽出する他の方法として、ビデオオブジェクトの操作を可能とするMPEG-4標準に関する方法がある。本発明の範囲内で他の方法を導くことも可能である。必要なら、抽出されたサブエリアに対応するテレビチャンネルが、上で開示したように識別される。

図４は、テレビチャンネルのビデオ信号のフレーム４００を示す図である。上で説明した実施例とは逆に、このフレーム中のすべての情報は同一のチャンネル「A」に対応する。サブエリア４１０を、モザイクフレームを参照して開示した方法の１つで抽出することができる。

上で説明した方法を用いて、人物、動物、キャラクター、自動車等のオブジェクトを識別することができる。ユーザは１以上の識別されたオブジェクトを選択して、後続のフレームにおいてさらに識別することができる。もちろん、そのオブジェクトが３次元の図形形状である場合、そのオブジェクトの表示は時間的に変化してもよい。それゆえ、異なるフレームにおいて同じオブジェクトが存在するかどうかを分析することができる。例えば、MPEG-4標準において、ビデオオブジェクトの制御が知られており、そのビデオオブジェクトが次のフレームにおいて示されるオブジェクトとマッチされる。フレームから抽出された選択されたオブジェクトの画像を、さらに表示または処理することができる。識別されたオブジェクトに対応する一組の抽出されたオブジェクトの画像を、さらに表示等するために格納してもよい。

一般に、本発明により２種類の抽出方法がある。第１の場合、エリアまたはサブエリアは、フレームにおけるそのエリアまたはサブエリアの位置と大きさにより抽出され、そのエリアまたはサブエリアのコンテントにはよらない。他の場合、プロセッサはそのエリアにあるオブジェクトを抽出し、このオブジェクトが存在するエリアのいかなる部分から抽出することもできる。

モザイクフレームは放送されたテレビ信号から受信しなければならなくはないことに注意すべきである。レシーバは、インターネットからデジタルビデオコンテントとオーディオコンテントを受信する通信手段を有していてもよく、その通信手段はデジタルビデオコンテントとオーディオコンテントをインターネットに送信してもよい。

抽出されたビデオ情報をさらに用いて、多数の方法でそのビデオ情報を表示することもできる。本ビデオプロセッサは、ピクチャ・イン・ピクチャプロセッサ（P-in-P）（図示せず）または米国特許第5,633,683号から分かるように機能するビデオスイッチを有していてもよい。抽出されたビデオ情報は、ビデオスイッチにさらに供給される。ビデオプロセッサ１５０を好適にプログラムして、ここに開示したすべての機能を実行させることができる。レシーバ１００のオーディオ出力およびビデオ出力は、オーディオコンテントおよび／またはビデオコンテントを再生するために、AVデバイスにさらに供給されてもよい。

図３は、抽出された情報を表すフレーム３００の例を示す図である。フレーム３００には、ユーザまたはその他の方法により選択されたプログラムが示された主画面３１０が示されている。副画面３２０は主画面３１０より小さいが、これは例えば、ユーザが主画面のテレビプログラムほど副画面に示されたテレビプログラムを好まないからである。副画面に示されたビデオコンテントは、異なるテレビチャンネルで放送される情報をユーザに提供するものであり、上で説明したように、例えばモザイクビデオ信号から抽出できる。副画面の情報をリフレッシュする頻度は、ユーザに十分知らしめておくのに十分な頻度であるべきで、例えばそれぞれのテレビチャンネルにつき１秒あたり１フレーム、または０．５秒あたり１フレームという頻度である。この頻度は多くの要因、例えばレシーバ１００で利用可能なチューナ１１０の数、プロセッサ１５０の処理能力、レシーバに供給される情報の種類に大きく依存する。「ライブ」のリアルタイムビデオコンテントを主画面および副画面に表示することも可能である。

抽出されたサブエリアは、抽出されたエリアとして同じ副画面に表示してもよい。抽出されたエリアおよびサブエリアは両方とも、ユーザまたはシステムにより予め定められたディスプレイ画面上のエリアに合うように、スケールされ、またはマップされてもよい。例として、CNNのニュースの「ムービングテキスト」を有する「ティッカーテープ」がモザイク２４０から抽出され、副画面３３０に表示されてもよい。

フレーム３００内の副画面３２０の構成をユーザが変更できるようにしてもよい。副画面の位置を変更したり、スクリーンをフレームエリア内で動かすことができる。例えば、ユーザは、画面３３０がフレーム３００の上部にあることを好むかもしれない。この目的のために、リモートコントロールユニットにテレビセットをエディターモードに切り替えるための特別なボタンを設けてもよい。エディターモードにおいては、新しい副画面を生成したり、副画面および／または主画面を削除、移動、サイズ変更等するコマンドのディスプレイメニューを使用できるようにしてもよい。ユーザは、それぞれの画面３１０、３２０、３３０に表示される情報のソース、更新頻度、その他のパラメータを表示することもできる。ユーザは、副画面エリアを通して、選択されたエリアまたはサブエリアが連続的にスクロールされる構成を選択することもできる。副エリアの境界、縁を太くしたりハイライトしたりすることができる。フレーム３００の構成を編集した結果は、ビデオコンテントの抽出と適切な表示を制御するために、ビデオプロセッサにさらに転送される。

抽出した情報を表示する他の例を図４に示した。サブエリア４１０は、テレビチャンネル「A」のフレーム４００から抽出するために、選択されている。サブエリア４１０はフレーム４５０に示されているが、黒い境界を有する構成の副エリア４６０に合うようスケールされている。スクリーン４６０の画像は、スケールされてまたは半透明で示され、画面のその他の部分に表示されている他のテレビプログラム「B」からは黒い境界で区別されている。よって、ユーザは２つのチャンネルAとBのコンテントを見ることができる。

一実施形態において、データ読出しシステムは、本発明によるレシーバを有する。エリアまたはサブエリアの一部は、そのコンテントの説明とともにメモリに格納される。例えば、「ティッカーテープ」２４０は、「CNNニュースヘッドライン」、「ニュースバナー」等の記述子を用いてシステム内で識別される。一般に、上記のサブエリアが永続的に存在するテレビプログラムについて、それが可能である。フレーム内の上記のサブエリアの位置は、その記述子とともに格納可能である。ユーザはサブエリアに擬似名を付けてもよい。ユーザの要求に応じて、ディスプレイ上の所望のサブエリアを読み出す検索インターフェイスが起動される。よって、画面上で上記サブエリアを見たい時はいつも、ユーザは容易に読み出すことができる。

本発明の範囲から逸脱することなく、類似の機能を提供する他の実施形態で上記の実施形態を代替することができる。様々なプログラムプロダクトにより、本発明のシステムの機能と方法を実施することができ、いくつかの方法でそのプログラムプロダクトをハードウェアと結合したり、異なるデバイスに位置付けたりすることができる。説明した実施形態のバリエーションと変更が、本発明のコンセプトの範囲内で可能である。

本発明を実施するために好適なシステムのレシーバを示す機能的ブロック図である。 本発明の一実施形態による、モザイクスクリーンが表示されたビジュアルプレゼンテーションを示す図である。 本発明の一実施形態による、補助画面エリアにモザイク画面から抽出されたサブエリアが表示されたビジュアルプレゼンテーションを示す図である。モザイク画面から抽出された他のエリアも他の補助画面エリアに表示されている。 他の放送データソースに対応するフレームと同時に表示される１つの放送データソースに対応するサブエリアの抽出を示す図である。

Claims (14)

1. ビデオ信号を処理するシステムであって、前記システムはビデオ信号を受信するように構成されたレシーバを有し、前記ビデオ信号の少なくとも１つのビデオフレームは複数の放送データソースの各々に対応する少なくとも１つのエリアを有するところのシステムにおいて、
   前記システムは、画像分析アルゴリズムを用いることにより、前記ビデオフレームを処理して前記ビデオフレームの少なくとも１つから前記エリアの少なくとも一部を抽出するように構成されたプロセッサを有することを特徴とするシステム。
2. 請求項１に記載のシステムであって、前記エリアまたは前記エリアの一部は方形であることを特徴とするシステム。
3. 請求項１または２に記載のシステムであって、前記プロセッサは、前記エリアまたは前記エリアの一部のエッジを検出するように構成されたことを特徴とするシステム。
4. 請求項３に記載のシステムであって、前記プロセッサは、各フレームから前記エリアまたは前記エリアの一部の境界を定めるラインを検出するようにさらに構成されたことを特徴とするシステム。
5. 請求項３または４に記載のシステムであって、前記プロセッサは、同一のデータソースに対応する前記エリアまたは前記エリアの一部の複数の一連のフレームにおいてエッジを検出するようにさらに構成されたことを特徴とするシステム。
6. 請求項１に記載のシステムであって、前記ビデオフレームの少なくとも１つから抽出される前記エリアまたは前記エリアの一部をユーザ操作可能に示すマーカをさらに有することを特徴とするシステム。
7. 請求項１、４、または６のいずれか一項に記載のシステムであって、前記抽出されたエリアまたは前記エリアの一部の前記複数の放送データソースとの相関を識別する識別手段をさらに有することを特徴とするシステム。
8. 請求項１に記載のシステムであって、各画面エリアにマップされた少なくとも１つの抽出されたエリアまたは前記エリアの一部を示すように構成された表示手段をさらに有することを特徴とするシステム。
9. 請求項１に記載のシステムであって、前記システムは、前記複数の放送データソースの各々に対応する少なくとも１つのエリアを有する前記ビデオフレームの受信と、前記放送データソースの選択されたものからビデオフレームの受信とを切り替えるよう動作可能であり、
   前記表示手段は、主画面エリアに前記選択された放送データソースの前記受信したビデオフレームを、および複数の副画面エリアの少なくとも１つに少なくとも１つの選択されたエリアまたは前記エリアの一部を示すように構成されたことを特徴とするシステム。
10. 請求項１に記載のシステムであって、前記放送データソースの選択されたものからビデオ信号のビデオフレームを受信するように構成されたさらに別のレシーバを有し、
    前記表示手段は、主画面エリアに前記さらに別のレシーバにより受信された前記選択された放送データソースの前記ビデオフレームを、複数の副画面エリアの少なくとも１つに少なくとも１つの抽出されたエリアまたは前記エリアの一部を表示するように構成されたことを特徴とするシステム。
11. 請求項９または１０に記載のシステムであって、前記表示手段は、前記複数の副画面エリアの各々において少なくとも１つの抽出されたエリアまたは前記エリアの一部の表示をユーザ操作可能に特定するように構成されたことを特徴とするシステム。
12. 請求項１１に記載のシステムであって、前記表示手段は、少なくとも１つの副画面エリアの大きさおよび／または位置をユーザが特定可能とするように構成されたことを特徴とするシステム。
13. ビデオ信号を受信するよう構成されたレシーバであって、前記ビデオ信号の少なくとも１つのビデオフレームは複数の放送データソースの各々に対応した少なくとも１つのエリアを有するレシーバにおいて、前記ビデオフレームを処理して前記ビデオフレームの少なくとも１つから前記エリアの少なくとも一部を抽出するように構成されたプロセッサを前記レシーバが有することを特徴とするレシーバ。
14. コンピュータプログラムプロダクトであって、プログラマブルデバイスが前記コンピュータプログラムプロダクトを実施したとき、請求項１に記載のシステムとして機能できるようにすることを特徴とするコンピュータプログラムプロダクト。

Images