JP4185790B2 - テレビジョン放送受信機 - Google Patents
テレビジョン放送受信機 Download PDFInfo
- Publication number
- JP4185790B2 JP4185790B2 JP2003066804A JP2003066804A JP4185790B2 JP 4185790 B2 JP4185790 B2 JP 4185790B2 JP 2003066804 A JP2003066804 A JP 2003066804A JP 2003066804 A JP2003066804 A JP 2003066804A JP 4185790 B2 JP4185790 B2 JP 4185790B2
- Authority
- JP
- Japan
- Prior art keywords
- additional information
- information
- television broadcast
- main information
- broadcast receiver
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
【０００１】
【発明の属する技術分野】
本発明は、視聴中の番組の画面に、文字、画像等のデータを重畳して表示する機能を供えたデジタルテレビジョン放送受信機に関する。
【０００２】
【従来の技術】
デジタルテレビジョン放送システムでは、番組である主情報に画像、音声データ等の付加情報を重畳して送信するデータ放送が行われている。データ放送は、放送番組を提供する放送事業者が、番組である主情報と同時に付加情報を送信するものであり、付加情報として送信するデータは、その番組に関する情報、その放送局で放送されている他の番組に関する情報、宣伝、更に、地震、津波等の緊急情報等である。視聴者は、要求信号を入力することによって、データ放送の視聴を選択することができる。
【０００３】
図１９を参照して、特開２００１−２５１５６５号公報に記載された従来のデジタルテレビジョン放送受信機の例を説明する。このデジタルテレビジョン放送受信機は、受信部３０１、情報分離部３０２、付加情報再生部３１４、重畳判断部３１６、重畳処理部３１８、内部メモリ３２０及びユーザ入力部３２１を有する。内部メモリ３２０は、時刻と主情報のシーン番号の関連表３２０Ａ、シーン番号とそのときに重畳する付加情報の関連表３２０Ｂ及び付加情報を蓄積する付加情報記憶部３２０Ｃを有する。
【０００４】
受信部３０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部３０２に送信する。情報分離部３０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離し、それぞれ重畳処理部３１８と付加情報再生部３１４に送信する。付加情報再生部３１４は、付加情報ストリームから付加情報画像データと重畳パラメータを抽出し、内部メモリ３２０に送信する。重畳判断部３１６は、内部メモリ３２０とユーザ入力部３２１からの情報より、主情報に重畳する付加情報画像データを生成し、重畳処理部３１８に送信する。重畳処理部３１８は、情報分離部３０２からの主情報ストリームと重畳判断部３１６からの付加情報画像データを重畳し、それを放送番組データとして出力する。
【０００５】
図２０を参照して、従来のデジタルテレビジョン放送受信機において、付加情報を主情報に重畳して画面に表示する方法の概念を説明する。図２０Ａに示すように、主情報の画像として、テーブルに２人の人物が座って話をしている場面を仮定する。図２０Ｂに示すように、内部メモリ３２０にて設定されたシーンが表示されると、主情報の画像内の指定された位置２００１に付加情報を重畳して表示する。
【０００６】
また、主情報の画面内にボタンのような小さな画像２００２を表示し、ユーザ入力部３２１から付加情報の表示の要求が入力されると、付加情報を本来の大きな画像として表示することも可能である。
【０００７】
【特許文献１】
特開２００１−２５１５６５号公報
【特許文献２】
特開平１１−１６４２３５号公報
【０００８】
【発明が解決しようとする課題】
従来の技術では、主情報に付加情報を重畳して表示する重畳位置及び重畳時間を予め決めておく必要がある。従って、主情報の視聴の妨げにならぬように、主情報の場面を考慮しながら付加情報の重畳位置及び時間を考慮する必要があった。しかしながら、実際には、主情報の視聴を妨げる位置及び時間に付加情報が表示されることがあった。
【０００９】
付加情報の代わりに、付加情報の存在を示すボタンのような小さな画像を表示させる場合であっても、そのような小さな画像は、主情報中の定位置に表示されるため、主情報の視聴を妨げる可能性がある。
【００１０】
本発明の目的は、主情報の視聴を妨げないように、主情報に付加情報を重畳して表示することができるデジタルテレビジョン放送の受信機を提供することにある。
【００１１】
本発明の目的は、付加情報提供者が主情報の視聴を妨げないように重畳位置及び重畳時間を予め設定する必要がないデジタルテレビジョン放送の受信機を提供することにある。
【００１２】
【課題を解決するための手段】
一般に、テレビジョン放送の映像は次の特徴を有する。
（１）画面中心部分に比較的重要な情報が表示され、画面の端部分には、比較的重要でない情報が表示される傾向がある。
（２）主情報の画像のうち空間的に色階調の変化量の少ない部分は、単色構成で構成されており、その情報の重要度は低いことが多い。
（３）主情報の画像のうち時間的に色階調の変化量の少ない部分は、背景等のように情報の重要度は低い場合が多い。
（４）主情報の画像の重要度が高い部分と重要度が低い部分は、番組内容によって異なる。
【００１３】
本発明によると、このようなテレビジョン放送の映像の特徴に基づいて主情報中の重要度の低いと思われる部分を検出し、その部分に付加情報を重畳して表示する。
【００１４】
本発明によると、テレビジョン放送受信機は、テレビジョン放送局からの放送信号を主情報と付加情報に分離する情報分離手段と、主情報の画像中に付加情報の画像を重畳して表示するための重畳領域候補を検出する重畳領域検出手段と、該重畳領域検出手段によって検出された重畳領域候補より付加情報の画像を重畳して表示する位置を決定する重畳判断手段と、上記主情報に上記付加情報を重畳しそれを放送番組データとして出力する重畳処理手段と、を有する。
【００１５】
本発明によると、テレビジョン放送受信機において、更に、上記情報分離手段によって分離された主情報を蓄積する主情報蓄積手段と、上記情報分離手段によって分離された付加情報を蓄積する付加情報蓄積手段と、を有する。
【００１６】
更に、次の機能を付加することにより、付加情報の重畳に関して、より柔軟な対応が可能となる。
（１）主情報及び付加情報の番組内容に基づいて、付加情報の重畳領域の検出に使用するパラメータを変更させる。
（２）主情報及び付加情報が蓄積されたデータである場合、各番組の全時間データを使用して付加情報の重畳領域の検出が可能となる。
【００１７】
また、視聴者が主情報に付加情報を重畳する条件を入力するための手段を設けることによって、視聴者に不快感を与えないで付加情報を表示することができる。さらに、付加情報の重畳位置を自動的に検出するため、付加情報送信者は主情報の放送構成を考える必要がなく、付加情報を提供することが可能となる。
【００１８】
【発明の実施の形態】
図１を参照して、本発明によるデジタルテレビジョン放送受信機において、付加情報を主情報に重畳して画面に表示する方法の概念を説明する。図１Ａに示すように、主情報の画像として、テーブルに２人の人物が座って話をしている場面を仮定する。図１Ｂに示すように、主情報の画像より、付加情報を表示する領域候補を検出する。付加情報を表示する領域候補として、時間的に又は空間的に色の変化が少ない領域、又は主情報量が少ない領域が選択される。例えば、背景等の時間的に色の変化が少ない領域Ｂ１、テーブル等の空間的に色の変化が少ない領域Ｂ２及び画面の周辺部分Ｂ３が選択される。
【００１９】
図１Ｃに示すように、例えば、「ＡＢ市のお知らせ」の付加情報Ａ１を重畳して表示する領域として、時間的に色の変化が少ない領域Ｂ１を選択し、例えば、「ＣＤ商店」の付加情報Ａ２を重畳して表示する領域として、空間的に色の変化が少ない領域Ｂ２を選択する。尚、図示していないが、画面の周辺部分Ｂ３に、他の付加情報を重畳して表示してよい。付加情報Ａ１、Ａ２は、文字、映像等を含む。図１Ｄは、主情報に付加情報Ａ１及びＡ２が重畳して表示された画面を示す。
【００２０】
こうして、本例では、時間的に又は空間的に色の変化が少ない領域又は主情報量が少ない領域に付加情報を重畳して表示するから、視聴者の視聴を妨げることなく、主情報に付加情報を重畳して表示することができる。
【００２１】
図２を参照して本発明によるデジタルテレビジョン放送受信機の第１の例を説明する。本例のデジタルテレビジョン放送受信機は、受信部１０１、情報分離部１０２、主情報再生部１１０、空間色変化量解析部１１１、時間色変化量解析部１１２、主情報加工部１１３、付加情報再生部１１４、重畳領域検出部１１５、重畳判断部１１６、付加情報加工部１１７、重畳処理部１１８、内部メモリ１２０及びユーザ入力部１２１を有する。内部メモリ１２０は、領域検出パラメータ部１２０Ａと付加情報重畳パラメータ部１２０Ｂを有する。内部メモリ１２０に記録されたデータは、ユーザ入力部１２１を介して入力されたユーザの命令によって変更されることができる。
【００２２】
受信部１０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部１０２に送信する。情報分離部１０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離する。なお、本例の付加情報は、文字情報及び映像情報を含むが、従来例の付加情報と異なり、付加情報の重畳位置及び重畳時間を含む必要はない。
【００２３】
主情報再生部１１０は、主情報ストリームを、１枚１枚の画像データである主情報色階調データＭｃに変換し、それを空間色変化量解析部１１１、時間色変化量解析部１１２、主情報加工部１１３及び重畳領域検出部１１５に送信する。
【００２４】
空間色変化量解析部１１１は、主情報色階調データＭｃに基づいて、所定の時刻における基準画素の色と隣接画素の色を比較し、両者の差から空間色変化量Ｓｃを計算する。時間色変化量解析部１１２は、主情報色階調データＭｃに基づいて、基準画素における所定の時刻の色と過去の色を比較し、両者の差から時間色変化量Ｔｃを計算する。
【００２５】
付加情報再生部１１４は、付加情報ストリームを画像データである付加情報色階調データＡｃに変換し、それを重畳領域検出部１１５及び付加情報加工部１１７に送信する。同時に、付加情報の受信時間及び画像の大きさなどのデータを重畳領域検出部１１５及び重畳判断部１１６に送信する。
【００２６】
重畳領域検出部１１５は、次のパラメータに基づいて、付加情報毎に重畳領域候補を検出する。
（１）領域検出パラメータ部１２０Ａの設定値
（２）付加情報重畳パラメータ部１２０Ｂの設定値
（３）主情報再生部１１０からの主情報色階調データＭｃ
（４）空間色変化量解析部１１１からの空間色変化量Ｓｃ
（５）時間色変化量解析部１１２からの時間色変化量Ｔｃ
（６）付加情報再生部１１４からの付加情報色階調データＡｃ
（７）付加情報再生部１１４からの付加情報の受信時間及び画像の大きさ
【００２７】
重畳領域検出部１１５は、検出した重畳領域候補データを重畳判断部２１６に送信する。重畳判断部１１６は、付加情報再生部１１４から付加情報受信時間及び画像の大きさ、重畳領域検出部１１５から各付加情報の重畳領域候補データ、付加情報重畳パラメータ部１２０Ｂから重畳領域優先順位等を受信し、主情報中に付加情報を重畳する位置、即ち、重畳領域を決定する。重畳判断部１１６は、決定した重畳領域を、主情報加工部１１３と付加情報加工部１１７に送信する。
【００２８】
主情報加工部１１３は、重畳判断部１１６からの条件に基づいて、主情報再生部１１０からの主情報色階調データＭｃを、重畳に適切な形態に加工する。付加情報加工部１１７は、重畳判断部１１６からの条件に基づいて、付加情報再生部１１４からの付加情報色階調データＡｃを、重畳に適切な形態に加工する。最後に、重畳処理部１１８は、加工された主情報色階調データＭｃ及び付加情報色階調データＡｃを重畳し、放送番組データとして出力する。
【００２９】
図３を参照して、空間色変化量解析部１１１における空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）の計算例を説明する。ここで空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）を、時刻Ｔにおける座標（Ｘ，Ｙ，Ｔ）の画素とその隣接画素との色階調差を数値化した値であると定義する。座標（Ｘ，Ｙ，Ｔ）を基準座標、その画素を基準画素と称する。
【００３０】
図３の例では、基準画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ）とし、Ｘ座標方向及びＹ座標方向に隣り合う４つの画素の主情報色階調データをＭｃ（Ｘ＋１，Ｙ，Ｔ）、Ｍｃ（Ｘ−１，Ｙ，Ｔ）、Ｍｃ（Ｘ，Ｙ＋１，Ｔ）及びＭｃ（Ｘ，Ｙ−１，Ｔ）とする。空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は、４つの画素の主情報色階調データＭｃ（Ｘ＋１，Ｙ，Ｔ）、Ｍｃ（Ｘ−１，Ｙ，Ｔ）、Ｍｃ（Ｘ，Ｙ＋１，Ｔ）及びＭｃ（Ｘ，Ｙ−１，Ｔ）と基準画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ）の差の絶対値の総和であり、次の式によって表される。
【００３１】
【数１】
Ｍｃ（Ｘ，Ｙ，Ｔ）＝｜Ｍｃ（Ｘ＋１，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ−１，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ，Ｙ＋１，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ，Ｙ−１，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜
【００３２】
この値が大きければ大きいほど、基準座標（Ｘ，Ｙ，Ｔ）の周辺は色階調の空間的変化が大きいと言える。例えば、基準座標（Ｘ，Ｙ，Ｔ）の画素の色階調を１、Ｘ座標方向に隣接する座標（Ｘ−１，Ｙ，Ｔ）及び（Ｘ＋１，Ｙ，Ｔ）の画素の色階調を３及び１、Ｙ座標方向に隣接する座標（Ｘ，Ｙ−１，Ｔ）及び（Ｘ，Ｙ＋１，Ｔ）の画素の色階調を２及び１とすると、空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は次のようになる。
【００３３】
【数２】
Ｓｃ（Ｘ，Ｙ，Ｔ）＝２＋０＋１＋０＝３
【００３４】
なおこの例では、空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は、単色画像での基準画素と隣接４画素の間の色階調差の絶対値によって示される。しかしながら、画素周辺の色階調変化の度合を数値化できれば、このような計算方法に依らなくてもよい。例えば、次のような方法によって修正してもよい。
（１）（図３の例では単色画像であるが）カラー画像のように複数色の画像とする。
（２）（図３の例では隣接４画素と比較するが）基準画素と比較する隣接画素数を増減する。基準画素と隣接画素ではなく近傍の画素を比較する。
（３）（図３の例では重み付けは無いが）画素や階調により重み付けを行う。
（４）（図３の例では色階調の差の絶対値であるが）基準画素と隣接画素の色変化量の計算方法を変更する。
【００３５】
次に、図４を参照して、時間色変化量解析部１１２における時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）の計算例を説明する。ここで時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）を、所定の座標（Ｘ，Ｙ）において、時刻Ｔにおける画素とそれより過去の時刻における画素との色階調差を数値化した値であると定義する。座標（Ｘ，Ｙ，Ｔ）を基準座標、その画素を基準画素と称する。
【００３６】
図４の例では、基準画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ）とし、過去の時刻Ｔ−１及びＴ−２における当該画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ−１）、Ｍｃ（Ｘ，Ｙ、Ｔ−２）とする。時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）は、過去２枚の画像における当該画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ−１）、Ｍｃ（Ｘ，Ｙ、Ｔ−２）と基準画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ）の差の絶対値の総和であり次に式によって表される。
【００３７】
【数３】
Ｔｃ（Ｘ，Ｙ，Ｔ）＝｜Ｍｃ（Ｘ，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ−１）｜＋｜Ｍｃ（Ｘ，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ−２）｜
【００３８】
この値が大きければ大きいほど、基準座標（Ｘ，Ｙ，Ｔ）の画素は色階調の時間的変化が大きいと言える。例えば、時刻Ｔにおける基準座標（Ｘ，Ｙ，Ｔ）の画素の色階調を２、時刻Ｔ−１における座標（Ｘ，Ｙ，Ｔ−１）の画素の色階調を１、時刻Ｔ−２における座標（Ｘ，Ｙ，Ｔ−２）の画素の色階調を１とすると、時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）は次のようになる。
【００３９】
【数４】
Ｔｃ（Ｘ，Ｙ，Ｔ）＝１＋１＝２
【００４０】
なおこの例では、時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）を単色画像での基準画素と過去の２画素の間の色階調差の絶対値によって示される。しかしながら、画素の時間経過による色階調変化の度合を数値化できれば、この方法に依らなくてもよい。例えば、次のような方法によって修正してもよい。
（１）（図４の例では単色画像であるが）カラー画像のように複数の色画像とする。
（２）（図４の例では基準画素と過去２画素を比較するが）基準画素と比較する過去の画素数を増減する。
（３）（図４の例では過去の画素のみを使用したが）蓄積データ等で、未来の画素を色階調変化の検出に使用する。
（４）（図４の例では重み付けは無いが）画素や階調により重み付けを行う。
（５）（図４の例では色階調の差の絶対値を使用したが）基準画素と過去の画素との色変化量の計算方法を変更する。
【００４１】
図５を参照して、領域検出パラメータ部１２０Ａに記録されるデータの例を説明する。領域検出パラメータ部には次の５つのパラメータが記録される。
（１）重畳可能領域：主情報の画像上の付加情報を重畳することが可能な領域。図５の第１の例では、重畳可能領域は、主情報の画像の４辺の縁から２００画素以内であり、第２の例では、重畳可能領域は、主情報の画像の４辺の縁から３００画素以内である。重畳可能領域は図７に示すように、主情報の画像のうち縁に沿った額縁状の部分である。
（２）空間色変化量平均値Ａｖｅ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量の平均値の基準値又は条件
（３）空間色変化量分散値Ｄｉｓｔ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量の分散値の基準値又は条件
（４）時間色変化量平均値Ａｖｅ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量の平均値の基準値又は条件
（５）時間色変化量分散値Ｄｉｓｔ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量の平均値の基準値又は条件
【００４２】
これらの条件に従って、重畳領域検出部１１５は重畳領域候補を検出する。これらのパラメータの値は、ユーザ入力部１２１を介して入力されたユーザの命令によって変更することが可能である。またここでは、例としてこの５つのパラメータを示しているが、重畳領域の特徴を示すパラメータであれば、これ以外のパラメータを使用することも可能である。例えば、（１）色変化量の平均値に、中心座標（Ｘ，Ｙ）からの距離の重み付けをしたもの、（２）ＤＰ（Dynamic Programming）マッチング手法等で使用される、重畳可能領域の認識用モデル、等のパラメータが考えられる。
【００４３】
図６を参照して付加情報重畳パラメータ部１２０Ｂに記録されるデータの例を説明する。付加情報重畳パラメータ部には、次のパラメータが記録される。
（１）重畳可能平均色階調差：領域Ｄの主情報平均色階調Ａｖｅ（Ｍｃ）と付加情報平均色階調Ａｖｅ（Ａｃ）の間の差の基準値又は条件
（２）付加情報変色階調：主情報に付加情報を重畳するために変化させてもよい付加情報画像の色階調量の基準値又は条件
（３）付加情報変形量：主情報に付加情報を重畳するために変化させてもよい付加情報画像の変形量の基準値又は条件
（４）主情報変色階調：主情報に付加情報を重畳するために変化させてもよい主情報画像の色階調量の基準値又は条件
（５）重畳領域優先順位：重畳領域の決定に使用される優先順位
【００４４】
重畳判断部１１６は、これらのパラメータを重畳基準として重畳位置、即ち、重畳領域を決定すると共に、重畳領域検出部１１５は、これらのパラメータを重畳領域候補の検出に利用する。これらのパラメータも領域検出パラメータと同様に、ユーザ入力部１２１を介して入力されたユーザの命令によって変更することが可能である。またここでは、例としてこの５つのパラメータを示しているが、例えば、（１）付加情報が瞬間表示され、視聴者が付加情報の表示に気づかないことを防ぐための最低重畳表示時間、等の付加情報の重畳方法を示すパラメータを使用することも可能である。
【００４５】
図７を参照して重畳領域検出部１１５において主情報の画像ＭＩＧに付加情報の画像ＡＩＧを重畳するための重畳領域候補の検出方法の概略について説明する。重畳領域検出部１１５は、主情報生成部１１０からの主情報と付加情報再生部１１４からの付加情報を入力する。付加情報の画像ＡＩＧは矩形であってよい。先ず、重畳可能領域に中心座標を仮設定し、この中心座標上に複数の領域Ｄを作成する。領域Ｄは、付加情報再生部１１４からの付加情報の画像の大きさと付加情報重畳パラメータ部１２０Ｂからの付加情報変形量に基づいて、付加情報の画像を変形することによって得られる。次に、これらの領域Ｄが、領域検出パラメータ部１２０Ａからの重畳可能領域内において、所定の条件を満足するかどうかを計算する。条件を満足する領域Ｄが、主情報に付加情報を重畳するための重畳領域候補となる。
【００４６】
また、本例では領域Ｄは矩形であるが、パラメータを追加することで、「星型やリング型などの複雑な形状の領域」、「付加情報に透明色を含んだ場合の領域」のような領域を扱うことも可能である。
【００４７】
図８を参照して重畳領域検出部１１５の動作を説明する。ステップ４０１にて、重畳領域の検出処理を開始する。重畳領域の検出は、付加情報毎に行う。ステップ４０２にて、領域検出パラメータ部１２０Ａによって指定されている重畳可能領域内に中心座標（Ｘ，Ｙ）を仮決定する。また、付加情報再生部１１４からの付加情報色階調データＡｃより、付加情報の全画素の平均色階調である付加情報平均色階調Ａｖｅ（Ａｃ）を計算する。この計算は、付加情報画像を効果的に配置するために、付加情報画像全体の色の特徴を知るために行う。ここでは、付加情報の全画素の色階調の平均値により付加情報画像データの色の特徴を把握しようとしているが、付加情報画像データの色の特徴が把握できれば方法はこの限りではない。
【００４８】
ステップ４０３にて、仮決定した座標（Ｘ，Ｙ）に関する処理を開始する。ステップ４０４にて、座標（Ｘ，Ｙ）を中心に付加情報重畳用の領域Ｄを仮決定する。付加情報重畳用の領域Ｄの大きさは、上述のように、付加情報再生部１１４からの付加情報画像の大きさ及び付加情報重畳パラメータ部１２０Ｂからの付加情報変形量によって決定される。本例では、座標（Ｘ，Ｙ）を領域Ｄの中心座標と定義しているが、主情報画像において領域Ｄの位置が一意に定義できればこれに限らない。ステップ４０５にて、領域Ｄに関する処理を開始する。
【００４９】
ステップ４０６にて、座標（Ｘ，Ｙ）を中心とした領域Ｄが、領域検出パラメータ部１２０Ａに設定された重畳可能領域を越えるかどうかの判断を行う。領域Ｄが重畳可能領域を越える場合には、ステップ４１５に進み、領域Ｄが重畳可能領域を越えない場合は、ステップ４０７に進む。
【００５０】
ステップ４０７にて、領域Ｄ内の全座標に関する処理を開始する。ステップ４０８にて、先ず、領域Ｄ内の全座標に関して、空間色変化量Ｓｃ、時間色変化量Ｔｃ及び主情報色階調データＭｃを、それぞれ空間色変化量解析部１１１、時間色変化量解析部１１２、及び主情報再生部１１０から呼び出す。次に、領域Ｄに関する以下のパラメータを計算する。
【００５１】
（１）空間色変化量平均Ａｖｅ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量Ｓｃの平均値
（２）空間色変化量分散Ｄｉｓｔ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量Ｓｃの分散値
（３）時間色変化量平均Ａｖｅ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量Ｔｃの平均値
（４）時間色変化量分散Ｄｉｓｔ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量Ｔｃの分散値
（５）主情報平均色階調Ａｖｅ（Ｍｃ）：領域Ｄ内の全座標に関する主情報色階調Ｍｃの平均値
【００５２】
本例では、この５つのパラメータを計算しているが、領域Ｄ内の全座標に関する計算と、重畳領域を検出するためのパラメータが定義されれば、重畳領域検出のために他の値を計算することも可能である。
【００５３】
ステップ４０９にて、ステップ４０８にて計算した４つのパラメータＡｖｅ（Ｓｃ）、Ｄｉｓｔ（Ｓｃ）、Ａｖｅ（Ｔｃ）及びＤｉｓｔ（Ｔｃ）が、領域検出パラメータ部１２０Ａで定義されている条件（図５）を満足するか否かを判断する。満足する場合はステップ４１０に進み、満足しない場合はステップ４１５に進む。
【００５４】
ステップ４１０にて、平均色階調の処理を開始する。ステップ４１１にて、ステップ４０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ４０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）と、を比較する。主情報画像と付加情報画像の平均色階調を比較するのは、画像全体の色の特徴を知り、効果的に付加情報の配置を行うためである。ここでは、全画素の色階調の平均値により画像データの色の特徴を把握しようとしているが、色の特徴が把握できれば方法はこの限りではない。
【００５５】
両者の差の値が、付加情報重畳パラメータ部１２０Ｂで定義されている重畳可能平均色階調差の条件（図６）を満足するか否かを判断する。満足する場合には、ステップ４１４に進み、満足しない場合にはステップ４１２に進む。
【００５６】
ステップ４１２にて、変色に関して未計算のものがあるか否かを判定する。変色に関して未計算のものがある場合には、ステップ４１３に進み、変色に関して未計算のものがない場合には、ステップ４１５に進む。
【００５７】
ステップ４１３にて、先ず、主情報及び付加情報を、付加情報重畳パラメータ部１２０Ｂで定義されている主情報変色階調及び付加情報変色階調の条件（図６）の範囲にて変色する。ここでは変色処理の方法として、単色画像の主情報画像、付加情報画像の全画素について同じように色階調を増減させると考えているが、他にも次の方法が考えられる。
【００５８】
（１）カラー映像の複数色画像において、色ごとに変化させる重み付けを変える方法
（２）領域の中央部は色変化を少なく、端の方は大きく変化させる、などの領域内で重みを変える方法
（３）主情報に関しては主情報色階調データＭｃ及び付加情報に関しては付加情報色階調データＡｃの値に基づいて、個々の画素の色階調に応じて変化させる方法
【００５９】
次に、ステップ４０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ４０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）を、付加情報重畳パラメータ部１２０Ｂで定義されている重畳可能平均色階調差の条件（図６）を満足するように、再計算し、ステップ４１０に戻り、平均色階調処理を再度行う。
【００６０】
ステップ４１４にて、中心座標（Ｘ，Ｙ）及び領域Ｄ、領域Ｄにおける付加情報の変形量、主情報及び付加情報の変色量、主情報と付加情報の階調差等を登録し、それを重畳判断部１１６に送信する。
【００６１】
ステップ４１５にて、領域Ｄの形状に関して未計算のものが存在するか否かを判定する。即ち、付加情報重畳パラメータ部１２０Ｂの付加情報変形量に基づいて、領域Ｄを、これ以上変形させることができないか否かを判断する。未計算のものが存在する場合、即ち、領域Ｄを変形できる場合は、ステップ４１６にて、領域Ｄの形状を変更し、ステップ４０５に戻り、変更後の新しい領域Ｄに関する処理を行う。
【００６２】
未計算のものが存在しない場合、即ち、領域Ｄをこれ以上変形できない場合は、ステップ４１７にて、重畳可能領域の全座標に関して処理を行ったかを判断する。処理が終了している場合にはステップ４１９に進み、検出終了となり、処理が終了していない場合にはステップ４１８に進み、未計算の座標を中心座標（Ｘ，Ｙ）とし、ステップ４０３に戻り、この中心座標（Ｘ，Ｙ）に関する処理を行う。図１０は重畳領域検出部１１５によって得られた重畳領域候補データの例を示す。
【００６３】
図９を参照して重畳判断部１１６における重畳領域の決定の処理を説明する。ステップ５０１にて、処理を開始し、ステップ５０２にて、重畳領域決定に使用する順位を求めるためのソート処理を開始する。先ず、ステップ５０３にて、重畳領域検出部１１５からの重畳領域候補が存在するか否かを判定する。重畳領域候補が存在しない場合にはステップ５１１に進み、重畳領域候補が存在する場合にはステップ５０４に進む。
【００６４】
次に、ステップ５０４にて、全付加情報に関する重畳領域候補を、付加情報重畳パラメータ部１２０Ｂの重畳領域優先順位（図６）に従ってソートする。それによってソート後の順位が決まる。
【００６５】
ステップ５０５にて、各付加情報の重畳領域候補より重畳位置、即ち、重畳領域を決定する処理を開始する。ステップ５０６にて、付加情報毎に重畳領域を決定する処理を開始する。ステップ５０７にて、処理の対象である付加情報の重畳領域候補のうちソート後の順位が最上位のものを最有力候補とし、この最有力候補が他の付加情報の重畳領域候補と領域の競合があるか否かを判定する。競合する場合にはステップ５０８に進み、競合しない場合にはステップ５１２に進む。
【００６６】
ステップ５０８にて、最有力候補の重畳領域候補が競合相手の他の付加情報の重畳領域候補より、ソート後の順位が低いか否かを判定する。最有力候補が競合他候補よりソート後の順位が低い場合にはステップ５０９に進み、競合他候補よりソート後の順位が低くない場合にはステップ５１２に進む。
【００６７】
ステップ５０９にて、処理の対象である付加情報に現最有力候補以外に他の重畳領域候補が存在するか否かを判定する。他の重畳領域候補が存在する場合にはステップ５１０に進み、他の重畳領域候補が存在しない場合にはステップ５１１に進む。ステップ５１０にて、処理の対象である付加情報の他の重畳領域候補を最有力候補として、ステップ５０６に戻る。
【００６８】
ステップ５１１にて、重畳領域を検出することができないとして、付加情報を出力しない。ステップ５１２にて、最有力候補を付加情報の重畳領域として決定し、出力する。ステップ５１３にて、全ての付加情報に関して重畳領域を決定した否かを判定する。全ての付加情報に関して重畳領域を決定した場合には、ステップ５１５にて処理を終了し、全ての付加情報に関して重畳領域を決定していない場合には、ステップ５１４にて未決定の付加情報に関して重畳領域の決定の処理を行う。
【００６９】
図１０及び図１１を参照して説明する。図１０は、重畳領域検出部１１５によって検出された各付加情報に関する重畳領域候補の例を示す。付加情報１、２、３の画像の大きさはいずれも横１００×縦５０である。変形情報は、横１００×縦５０の画像に対する重畳領域候補の変形量を示す。付加情報１に対して２つの重畳領域候補１０１、１０２が検出され、付加情報２に対して１つの重畳領域候補１０３が検出され、付加情報３に対して２つの重畳領域候補１０４、１０５が検出されている。各重畳領域候補には、付加情報再生部１１４からの付加情報のデータが付されている。
【００７０】
図９に示した重畳判断部１１６における重畳領域の決定処理を図１０及び図１１の例を参照して説明する。先ず、領域競合の判定で使用する順位を生成するために、重畳領域候補１０１〜１０５をソート（ステップ５０４）する。図１１は、重畳領域候補１０１〜１０５を付加情報重畳パラメータ部１２０Ｂの重畳領域優先順位（図６）に従ってソートをした結果である。重畳領域候補１０１〜１０５を、第１の条件である主情報変色階調の少ない順に並べる。３つ重畳領域候補１０１、１０３及び１０４は、主情報変色階調が同一である。従って、３つ重畳領域候補１０１、１０３及び１０４を、第２条件である付加情報変色階調の少ない順に並べる。このように順位が同一の重畳領域候補がなくなるまで、条件に従いソートを続けることによって、全ての重畳領域候補の順位が決定される。尚、全ての重畳領域候補の順位が決定できれば、ここで説明した条件以外の条件を使用してもよい。
【００７１】
第１の付加情報１の重畳領域を決定する処理を説明する。第１の付加情報１に関して２つの重畳領域候補１０１、１０２が検出されている。ソート後の順位が高い第１の重畳領域候補１０１を最有力候補とする。この最有力候補が、他の付加情報２、３の重畳領域候補と領域の競合があるか否かを判定する。領域の競合は、各重畳領域候補の中心座標と画像の大きさを比較することによって、判定することができる。最有力候補の第１の重畳領域候補１０１は、第２の重畳領域候補１０２及び第２の付加情報２の重畳領域候補１０３と、領域の競合をする。ここでは、他の付加情報の重畳領域候補との領域の競合の有無を考慮する。従って、第２の付加情報２の重畳領域候補１０３のみを対象とする。最有力候補の第１の重畳領域候補１０１は、第２の付加情報２の重畳領域候補１０３より順位が低い。従って、第１の付加情報１の重畳領域は検出なしとする。
【００７２】
第２の付加情報２の重畳領域を決定する処理を説明する。第２の付加情報２に関しては１つの重畳領域候補１０３のみが検出されている。重畳領域候補１０３を最有力候補とする。この最有力候補が、他の付加情報１、３の重畳領域候補と領域の競合があるか否かを判定する。重畳領域候補１０３は、第１の付加情報１の重畳領域候補１０１及び１０２と、領域の競合をする。しかしながら、最有力候補の重畳領域候補１０３は、競合相手の第１の付加情報１の重畳領域候補１０１及び１０２より、ソート後の順位が高い。従って、第２の付加情報２に関して、重畳領域候補１０３を重畳領域として決定する。
【００７３】
第３の付加情報３の重畳領域を決定する処理を説明する。第３の付加情報３に関して２つの重畳領域候補１０４、１０５が検出されている。ソート後の順位が高い第１の重畳領域候補１０４を最有力候補とする。この最有力候補が、他の付加情報１、２の重畳領域候補と領域の競合があるか否かを判定する。第１の重畳領域候補１０４は、第２の重畳領域候補１０５と、領域の競合をするが、他の付加情報の重畳領域候補と、領域の競合をしない。従って、第３の付加情報３に関して、重畳領域候補１０４を重畳領域として決定する。
【００７４】
図１２を参照して本発明によるデジタルテレビジョン受像機の第２の例を説明する。本例のデジタルテレビジョン受像機は、受信部２０１、情報分離部２０２、主情報入力部２０３、主情報属性抽出部２０４、主情報蓄積部２０５、付加情報入力部２０６、付加情報属性抽出部２０７、付加情報蓄積部２０８、主情報再生部２１０、空間色変化量解析部２１１、時間色変化量解析部２１２、主情報加工部２１３、付加情報再生部２１４、重畳領域検出部２１５、重畳判断部２１６、付加情報加工部２１７、重畳処理部２１８、重畳記録管理部２１９、内部メモリ２２０及びユーザ入力部２２１を有する。内部メモリ２２０は、領域検出パラメータ部２２０Ａ、付加情報重畳パラメータ部２２０Ｂ及び付加情報管理パラメータ部２２０Ｃを有する。内部メモリ２２０に記録されたデータは、ユーザ入力部２２１を介して入力されたユーザの命令によって変更されることができる。
【００７５】
受信部２０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部２０２に送信する。情報分離部２０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離する。なお、本例の付加情報は、第１の例と同様に、文字情報及び映像情報を含むが、従来例の付加情報と異なり、付加情報の重畳位置及び重畳時間を含む必要はない。また、本例の付加情報は、静止画情報ばかりでなく動画情報を含む。
【００７６】
主情報入力部２０３は、主情報ストリームを主情報属性抽出部２０４に送信する。また、主情報を蓄積する必要があれば、主情報蓄積部２０５に送信する。主情報蓄積部２０５は、蓄積した主情報データを必要に応じて、主情報入力部２０３に出力する。
【００７７】
付加情報入力部２０６は、付加情報ストリームを付加情報属性抽出部２０７に送信する。また、付加情報を蓄積する必要があれば、付加情報蓄積部２０８に送信する。付加情報蓄積部２０８は、蓄積した付加情報データを必要に応じて、付加情報入力部２０６に出力する。
【００７８】
主情報属性抽出部２０４は主情報ストリームの属性を抽出し、それを内部メモリ２２０に送信し、主情報ストリームを主情報再生部２１０に送信する。付加情報属性抽出部２０７は付加情報ストリームの属性を抽出し、それを内部メモリ２２０に送信し、付加情報ストリームを付加情報再生部２１４に送信する。主情報及び付加情報の属性は、領域検出パラメータ部２２０Ａ、付加情報重畳パラメータ部２２０Ｂ等に送信され、利用される。また付加情報は、付加情報管理パラメータ部２２０Ｃに送信され、付加情報の表示、管理に使用される。
【００７９】
主情報再生部２１０は、主情報ストリームを１枚１枚の画像データである主情報色階調データＭｃに変換し、それを空間色変化量解析部２１１、時間色変化量解析部２１２、主情報加工部２１３及び重畳領域検出部２１５に送信する。
【００８０】
空間色変化量解析部２１１は、主情報色階調データＭｃに基づいて、所定の時刻における基準画素の色と隣接画素の色を比較し、両者の差から空間色変化量Ｓｃを計算する。時間色変化量解析部２１２は、主情報色階調データＭｃに基づいて、基準画素における所定の時刻の色と過去の色を比較し、両者の差から時間色変化量Ｔｃを計算する。
【００８１】
付加情報再生部２１４は、付加情報を画像データである付加情報色階調データＡｃに変換し、それを重畳領域検出部２１５及び付加情報加工部２１７に送信する。また、付加情報再生部２１４は、付加情報の画像大きさ等のデータを付加情報管理パラメータ部２２０Ｃに送信する。
【００８２】
重畳領域検出部２１５は、次のパラメータに基づいて、付加情報毎に重畳領域候補を検出する。
（１）領域検出パラメータ部２２０Ａの設定値
（２）付加情報重畳パラメータ部２２０Ｂの設定値
（３）付加情報管理パラメータ部２２０Ｃの付加情報のパラメータ
（４）主情報再生部２１０からの主情報色階調データＭｃ
（５）空間色変化量解析部２１１からの空間色変化量Ｓｃ
（６）時間色変化量解析部２１２からの時間色変化量Ｔｃ
（７）付加情報再生部２１４からの付加情報色階調データＡｃ
【００８３】
重畳領域検出部２１５は、検出した重畳領域候補データを重畳判断部２１６に送信する。重畳判断部２１６は、重畳領域検出部２１５から各付加情報の重畳領域候補データ、付加情報重畳パラメータ部２２０Ｂから重畳領域優先順位、付加情報管理パラメータ部２２０Ｃから付加情報受信時間等を受信し、主情報中に付加情報を重畳する位置、即ち、重畳領域を決定する。重畳判断部２１６は、決定した重畳領域を、主情報加工部２１３と付加情報加工部２１７に送信する。
【００８４】
主情報加工部２１３は、重畳判断部２１６からの条件に基づいて、主情報再生部２１０からの主情報色階調データMｃを、重畳に適切な形態に加工する。付加情報加工部２１７は、重畳判断部２１６からの条件に基づいて、付加情報再生部２１４からの付加情報色階調データＡｃを、重畳に適切な形態に加工する。重畳処理部２１８は、加工された主情報色階調データMｃ及び付加情報色階調データＡｃを重畳し、放送番組データとして出力する。
重畳記録管理部２１９は、出力結果を、付加情報ごとに記録し、付加情報管理パラメータ部２２０Ｃに送信する。
【００８５】
本例は、第１の例と比較すると、主情報として主情報蓄積部２０５に蓄積された主情報データを使用し、付加情報として付加情報蓄積部２０８に蓄積された付加情報データを使用することができる点が異なる。従って、本例では次のことが可能となる。
【００８６】
（１）付加情報として所定の表示期間を保証する必要がある画像を使用することができる。表示期間を保証する必要がある例としては、動画像があるが、動画像以外に静画像であっても、所定の表示期間が設けられているものが、が挙げられる。そのような付加情報は、表示最優先の扱いとする。
【００８７】
重畳領域検出部２１５は、蓄積した全時間の主情報を利用することにより、重畳のための領域が付加情報の重畳条件を満たしている状態を継続する時間を検出することができる。それによって、表示期間を保証する必要がある付加情報のための重畳領域候補を検出することができる。
【００８８】
（２）主情報再生部２１０は、任意時間における主情報データを主情報色階調データMｃに変換することができる。
空間色変化量解析部２１１及び時間色変化量解析部２１２における、空間色変化量Ｓｃ、時間色変化量Ｔｃの計算方法は、第１の例の場合と同一であり、その計算例は図３、図４と同一である。しかしながら、本例では、第１の例と異なり、空間色変化量解析部２１１及び時間色変化量解析部２１２では、以下のことが可能となる。
（ａ）主情報中の任意の時間における空間色変化量Ｓｃ及び時間色変化量Ｔｃを計算する。
（ｂ）時間色変化量Ｔｃの計算に、任意の時間から未来の時間の主情報色階調データＭｃを使用することができる。
また計算方法に関しては、第１の例と同様に色階調の変化量が数値化できれば、その方法はこの例に限らない。
【００８９】
（３）付加情報蓄積部２０８に付加情報を蓄積することによって、任意の時間に主情報に付加情報を重畳することができる。即ち、主情報を付加情報に重畳する時間を任意に選択することができる。また、重畳記録管理部２１９は、付加情報管理パラメータ部２２０Ｃに記録された付加情報を自動的に削除するように構成することによって、ユーザが付加情報を削除する煩わしさが解消される。
【００９０】
図１３に領域検出パラメータ部２２０Ａに記録されるデータの例を示す。本例の領域検出パラメータは、重畳可能領域、空間色変化量平均値Ａｖｅ（Ｓｃ）、空間色変化量分散値Ｄｉｓｔ（Ｓｃ）、時間色変化量平均値Ａｖｅ（Ｔｃ）及び時間色変化量分散値Ｄｉｓｔ（Ｔｃ）の基準値又は条件を含み、第１の例の領域検出パラメータ（図５）と同一であるが、本例では、主情報の属性と付加情報の属性に応じて、領域検出パラメータの設定１〜４を変化させている。
【００９１】
図１４を参照して付加情報重畳パラメータ部２２０Ｂに記録されるデータの例を説明する。本例の付加情報重畳パラメータは、重畳可能平均色階調差、付加情報変色階調、付加情報変形量及び主情報変色階調の基準値又は条件と重畳領域優先順位を含み、第１の例の付加情報重畳パラメータ（図６）と同一であるが、本例では、主情報の属性、付加情報の属性及び重畳領域優先順位に応じて、重畳可能平均色階調差、付加情報変色階調、付加情報変形量及び主情報変色階調の条件設定１〜４、Ａ、Ｂを変化させている。
【００９２】
尚、図１３の領域検出パラメータ及び図１４の付加情報重畳パラメータは、第１の例の場合と同様に、追加や変更が可能である。また、ここでは、主情報の属性と付加情報の属性に応じて領域検出パラメータを設定しているが、主情報、付加情報それぞれの属性のみに応じてパラメータを設定してもよく、主情報の番組名、主情報及び付加情報の発信先、付加情報の受信日時、のような主情報及び付加情報の状態等によりパラメータの設定を変化させてもよい。
【００９３】
図１５を参照して付加情報管理パラメータ部２２０Ｃに記録されるデータの例を説明する。付加情報管理パラメータは、以下の例を含む。
（１）付加情報の属性：付加情報の内容を示す。
（２）付加情報の発行元：付加情報の提供者を示す。
（３）動画再生時間：付加情報に含まれる動画の再生時間を示す。静止画だけの場合もある。
（４）付加情報受信日時：受信機が付加情報を受信した日時を示す。
（５）最新出力時間：主情報に付加情報が重畳された最新の時間を示す。
（６）送信時間制限：主情報に付加情報を重畳することが可能な時間を示す。
（７）送信経過時間：主情報に付加情報を重畳した現在までの総時間を示す。
【００９４】
図１５の付加情報管理パラメータは、追加や変更が可能である。付加情報管理パラメータは、付加情報の管理に利用される。例えば、付加情報送信時間制限が設定されている場合に、送信経過時間が付加情報送信時間制限を超えたなら付加情報の重畳を行わない等の処理ができる。また、付加情報が付加情報蓄積部２０８に蓄積されたデータの場合は、付加情報蓄積部２０８からその付加情報を削除する等の処理を行うことも可能である。これにより、付加情報を主情報に重畳する際、より柔軟な処理が可能となる。
【００９５】
図１６を参照して、主情報が主情報蓄積部２０５に蓄積されたデータである場合の重畳領域検出部２１５の動作を説明する。ステップ６０１にて、重畳領域の検出処理を開始する。重畳領域の検出は、付加情報毎に行う。ステップ６０２にて、領域検出パラメータ部２２０Ａによって指定されている重畳可能領域内に中心座標（Ｘ，Ｙ）を仮決定する。本例では、更に、付加情報を重畳する開始時間Ｔを仮設定する。また付加情報再生部２１４からの付加情報色階調データＡｃより、付加情報の全画素の平均色階調である付加情報平均色階調Ａｖｅ（Ａｃ）を計算する。本例は、図８の第１の例と比較して、開始時間Ｔを仮決定することが異なる。
【００９６】
ステップ６０３にて、仮決定した中心座標（Ｘ，Ｙ）と開始時間Ｔに関する処理を開始する。ステップ６０４にて、座標（Ｘ，Ｙ）を中心に付加情報重畳用の領域Ｄを仮決定する。本例では、更に、付加情報を重畳する期間Ｔｗを仮決定する。重畳用の領域Ｄの大きさは、付加情報再生部２１４からの付加情報画像の大きさ及び付加情報重畳パラメータ部２２０Ｂからの付加情報変形量によって決定される。また、期間Ｔｗは、付加情報管理パラメータ部２２０Ｃの動画再生時間から決定される。ステップ６０５にて、領域Ｄ及び期間Ｔｗに関する処理を開始する。
【００９７】
ステップ６０６にて、開始時間Ｔからの期間Ｔｗを確保した場合、座標（Ｘ，Ｙ）を中心とした領域Ｄが、重畳可能領域を越えるかどうかの判断を行う。領域Ｄが重畳可能領域を越える場合は、ステップ６０７に進み、領域Ｄが重畳可能領域を越えない場合は、ステップ６１５に進む。
【００９８】
ステップ６０７にて、期間Ｔｗにおける領域Ｄ内の全座標に関する処理を開始する。ステップ６０８にて、先ず、期間Ｔｗにおける領域Ｄ内の全座標に関して、空間色変化量Ｓｃ、時間色変化量Ｔｃ、及び主情報色階調データＭｃを、それぞれ空間色変化量解析部２１１、時間色変化量解析部２１２、及び主情報再生部２１０から呼び出す。次に、期間Ｔｗにおける領域Ｄに関する以下のパラメータを計算する。
【００９９】
（１）空間色変化量平均Ave（Ｓｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する空間色変化量Ｓｃの平均値
（２）空間色変化量分散Dist（Ｓｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する空間色変化量Ｓｃの分散値
（３）時間色変化量平均Ave（Ｔｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する時間色変化量Ｔｃの平均値
（４）時間色変化量分散Dist（Ｔｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する時間色変化量Ｔｃの分散値
（５）主情報平均色階調Ave（Ｍｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する主情報色階調Ｍｃの平均値
本例では、この５つのパラメータを計算しているが、期間Ｔｗにおける領域Ｄ内の全座標に関する計算と、重畳領域を検出するためのパラメータが定義されれば、重畳領域検出のために他の値を計算することも可能である。
【０１００】
ステップ６０９にて、ステップ６０８にて計算した４つのパラメータAve（Ｓｃ）、Dist（Ｓｃ）、Ave（Ｔｃ）及びDist（Ｔｃ）が、領域検出パラメータ部２２０Ａで定義されている条件（図１３）を満足するか否かを判断する。満足する場合はステップ６１０に進み、満足しない場合はステップ６１５に進む。
【０１０１】
ステップ６１０にて、平均色階調の処理を開始する。ステップ６１１にて、ステップ６０８にて計算した期間Ｔｗにおける領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ６０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）と、を比較する。主情報と付加情報の平均色階調を比較しているのは、第１の例と同様に、画像全体の色の特徴を知り、効果的な付加情報の配置を行うためであり、色の特徴が把握できれば方法はこの限りではない。
【０１０２】
両者の差の値が、付加情報重畳パラメータ部２２０Ｂで定義されている重畳可能平均色階調差の条件（図１４）を満足するか否かを判断する。満足する場合には、ステップ６１４に進み、満足しない場合にはステップ６１２に進む。ステップ６１２にて、変色に関して未計算のものがあるか否かを判定する。変色に関して未計算のものがある場合には、ステップ６１３に進み、変色に関して未計算のものがない場合には、ステップ６１５に進む。
【０１０３】
ステップ６１３にて、先ず、主情報及び付加情報を、付加情報重畳パラメータ部２２０Ｂで定義されている付加情報変色階調及び主情報変色階調の条件（図１４）の範囲にて変色する。次に、ステップ６０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ６０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）を、付加情報重畳パラメータ部２２０Ｂで定義されている重畳可能平均色階調差の条件（図１４）を満足するように、再計算し、ステップ６１０に戻り、平均色階調処理を再度行う。
【０１０４】
ステップ６１４にて、開始時間Ｔと期間Ｔｗ、期間Ｔｗにおける領域Ｄを重畳可能領域として、中心座標、領域Ｄにおける付加情報の変形量、主情報及び付加情報の変色量、主情報と付加情報の階調差等を登録し、それを重畳判断部２１６に送信する。
【０１０５】
ステップ６１５にて、領域Ｄの形状に関して未計算のものが存在するか否かを判定する。即ち、付加情報重畳パラメータ部２２０Ｂの付加情報変形量に基づいて、領域Ｄを、これ以上変形させることができないか否かを判断する。未計算のものが存在する場合、即ち、領域Ｄを変形できる場合は、ステップ６１６にて、領域Ｄの形状を変更し、ステップ６０５に戻り、変更後の新しい領域Ｄに関する処理を行う。
【０１０６】
未計算のものが存在しない場合、即ち、領域Ｄをこれ以上変形できない場合は、ステップ６１７にて、重畳可能領域の全座標に関して処理を行ったかを判断する。処理が終了している場合にはステップ６１９に進み、処理が終了していない場合にはステップ６１８に進み、未計算の座標を中心座標（Ｘ，Ｙ）とし、ステップ６０３に戻り、この中心座標（Ｘ，Ｙ）に関する処理を行う。
【０１０７】
ステップ６１９にて、検出が必要な時間に関して処理が終了しているかを判断する。処理が終了していれば、ステップ６２１に進み、検出処理を終了する。処理が終了していなければ、ステップ６２０に進み、開始時間Ｔを次の時間に変更し、ステップ６０３に戻り、座標、時間処理から再計算を行う。
【０１０８】
図１７を参照して主情報が主情報蓄積部２０５に蓄積されたデータである場合の重畳判断部１１６における重畳領域の決定の処理を説明する。ステップ７０１にて、処理を開始し、ステップ７０２にて、重畳領域決定に使用する順位を求めるためのソート処理を開始する。先ず、ステップ７０３にて、重畳領域検出部１１５からの現在時間Ｔにおける重畳領域候補が存在するか否かを判定する。重畳領域候補が存在しない場合にはステップ７１２に進み、重畳領域候補が存在する場合にはステップ７０４に進む。
【０１０９】
ステップ７０４にて、表示期間が保証された付加情報を除去し、それを表示最優先の扱いとする。上述のように、表示期間を保証する例としては、（ａ）付加情報が動画像であって、再生途中であるもの、（ｂ）付加情報は静止画像であるが、所定の重畳領域において所定の表示期間が保証され、その期間が経過していないもの、が挙げられる。
【０１１０】
次に、ステップ７０５にて、全付加情報に関する重畳領域候補を、付加情報重畳パラメータ部２２０Ｂの重畳領域優先順位（図１４）及び付加情報管理パラメータ部２２０Ｃのパラメータ値に基づいて、ソートする。それによってソート後の順位が決まる。本例では、主情報の属性により重畳領域優先順位が異なるため、主情報の状態に応じて条件を変化させる。
ステップ７０６にて、各付加情報の重畳領域候補より重畳位置、即ち、重畳領域を決定する処理を開始する。以下の処理は、図９の第１の例と同様である。
【０１１１】
図１８を参照してＢＳデジタルテレビジョン放送の番組情報の概念を説明する。ＢＳデジタルテレビジョン放送の番組は、ＥＩＴ（Event Information Table）、ＰＭＴ（Program Map Table）及び番組データを含む。ＥＩＴは、主情報である番組に関する次の記述（属性）を含む。
（１）コンポーネント内容：映像、音声の区別
（２）コンポーネント種別：映像、音声の種別の記載
（２）大分類：番組の大分類を示す。例えば、ニュース、スポーツ、情報、ドラマ、映画等である。
（３）中分類：番組の大分類からさらに細かい分類を示す。例えば、「スポーツ」の場合、野球、サッカー、ゴルフ等である。
（４）イベント：番組に１対１対応したID
ＰＭＴは、付加情報である緊急情報に関する次の記述（属性）を含む。
（１）サービス種別：緊急放送を流すチャンネルID
（２）開始終了フラグ：緊急情報の放送有無を示す。
（３）信号種別：第１種（地震）、第２種（津波）の種別を示す。（無線局運用規則１３８条規定）
（４）地域符号：緊急情報対象の地域を示す。（無線局運用規則１３８条規定）
【０１１２】
図１８のＢＳデジタルテレビジョン放送では、付加情報として地震、津波等の緊急情報を想定しているが、本発明によると、緊急情報ばかりでなく、ＣＭなどの様々な種類の情報が適用可能である。
【０１１３】
以上、本発明の例を説明したが本発明は上述の例に限定されるものではなく、特許請求の範囲に記載された発明の範囲にて様々な変形が可能であることは当業者に理解されよう。
【０１１４】
【発明の効果】
本発明によると、主情報中の比較的情報量の少ない部分に付加情報を重畳するから、主情報の視聴を妨げない効果がある。
本発明によると、主情報の画像において付加情報を重畳する領域を自動的に検出するから、付加情報提供者は、主情報の内容に応じて重畳位置及び時間を予め考える必要がない効果がある。
【０１１５】
本発明によると、付加情報を重畳する際に、主情報と付加情報の少なくとも１つの画素情報を使用して、付加情報の重畳を行うため、視覚的な効果の高い重畳が可能となる効果がある。
【０１１６】
本発明によると、主情報の画像中に付加情報を重畳する場合の条件を、視聴者が入力手段より入力することができるため、視聴者の意図に応じた付加情報の重畳が可能となる効果がある。
本発明によると、主情報に付加情報を重畳する際に、主情報や付加情報を加工するから、より効率良い付加情報の重畳が可能となる効果がある。
【０１１７】
本発明によると、蓄積した主情報の任意時間、任意座標の画素情報を使用することにより、付加情報を重畳する領域をいつでも検出することが可能となる効果がある。また、画素の差異を利用する場合も、任意時間における隣接画素の差異だけではなく、任意時間からの未来の座標との差異を利用することも可能となる効果がある。
【０１１８】
本発明によると、蓄積した主情報の全時間の情報を使用することにより、付加情報の重畳に使用する領域の状態がどのくらいの期間継続するかという情報も得ることができる。それにより領域に関して重畳期間を保障することが可能となる効果がある。
【０１１９】
本発明によると、重畳期間が保障された付加情報を重畳する領域が検出できることにより、付加情報に関して動画像を重畳することが可能となる効果がある。
本発明によると、主情報、付加情報の属性を抽出し、それを付加情報の重畳に使用することにより、より柔軟な重畳が可能となる効果がある。
【０１２０】
本発明によると、付加情報を重畳した結果を記録することにより、これまでに表示された時間や位置などに応じて、付加情報の重畳を変化させることが可能になる効果がある。
本発明によると、付加情報を蓄積することにより、１回蓄積しておけば、いつでも主情報上に重畳することが可能になる効果がある。
【０１２１】
本発明によると、付加情報を重畳した記録を使用して、蓄積された付加情報を自動的に管理することにより、使用者が蓄積された付加情報を削除する煩わしさを解消することが可能になる効果がある。
【図面の簡単な説明】
【図１】本発明によるデジタルテレビジョン放送受信機において、主情報に付加情報を重畳して表示する方法の概念を説明するための説明図である。
【図２】本発明によるデジタルテレビジョン放送受信機の第１の例の構成を示す図である。
【図３】本発明によるデジタルテレビジョン放送受信機の第１の例の空間色変化量解析部における空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）の計算例を説明するための説明図である。
【図４】本発明によるデジタルテレビジョン放送受信機の第１の例の時間色変化量解析部における時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）の計算例を説明するための説明図である。
【図５】本発明によるデジタルテレビジョン放送受信機の第１の例の領域検出パラメータ部に記録されたパラメータを説明するための説明図である。
【図６】本発明によるデジタルテレビジョン放送受信機の第１の例の付加情報重畳パラメータ部に記録されたパラメータを説明するための説明図である。
【図７】本発明によるデジタルテレビジョン放送受信機の第１の例における付加情報重畳用の領域Ｄの概念を説明するための説明図である。
【図８】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳領域検出部における処理を説明するための流れ図である。
【図９】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳判断部における処理を説明するための流れ図である。
【図１０】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳判断部における処理に使用する重畳領域候補の例を示す図である。
【図１１】図１０の重畳領域候補の例を図６の重畳領域優先順位でソートした結果を示す図である。
【図１２】本発明によるデジタルテレビジョン放送受信機の第２の例の構成を示す図である。
【図１３】本発明によるデジタルテレビジョン放送受信機の第２の例の領域抽出パラメータ部に記録されたパラメータを説明するための説明図である。
【図１４】本発明によるデジタルテレビジョン放送受信機の第２の例の付加情報重畳パラメータ部に記録されたパラメータを説明するための説明図である。
【図１５】本発明によるデジタルテレビジョン放送受信機の第２の例の蓄積管理パラメータ部に記録されたパラメータを説明するための説明図である。
【図１６】本発明によるデジタルテレビジョン放送受信機の第２の例において、主情報が蓄積データである場合の重畳領域部の処理を説明するための流れ図である。
【図１７】本発明によるデジタルテレビジョン放送受信機の第２の例において、主情報が蓄積データである場合の重畳判断部の処理を説明するための流れ図である。
【図１８】ＢＳデジタルテレビジョン放送の番組情報の概念を説明するための説明図である。
【図１９】従来のデジタルテレビジョン放送受信機の構成例を示す図である。
【図２０】従来のデジタルテレビジョン放送受信機において、主情報に付加情報を重畳して表示する方法の概念を説明するための説明図である。
【符号の説明】
１０１…受信部、１０２…情報分離部、１１０…主情報再生部、１１１…空間色変化量解析部、１１２…時間色変化量解析部、１１３…主情報加工部、１１４…付加情報再生部、１１５…重畳領域検出部、１１６…重畳判断部、１１７…付加情報加工部、１１８…重畳処理部、１２０…内部メモリ、１２１…ユーザ入力部、２０１…受信部、２０２…情報分離部、２０３…主情報入力部、２０４…主情報属性抽出部、２０５…主情報蓄積部、２０６…付加情報入力部、２０７…付加情報属性抽出部、２０８…付加情報蓄積部、２１０…主情報再生部、２１１…空間色変化量解析部、２１２…時間色変化量解析部、２１３…主情報加工部、２１４…付加情報再生部、２１５…重畳領域検出部、２１６…重畳判断部、２１７…付加情報加工部、２１８…重畳処理部、２１９…重畳記録管理部、２２０…内部メモリ、２２１…ユーザ入力部
【発明の属する技術分野】
本発明は、視聴中の番組の画面に、文字、画像等のデータを重畳して表示する機能を供えたデジタルテレビジョン放送受信機に関する。
【０００２】
【従来の技術】
デジタルテレビジョン放送システムでは、番組である主情報に画像、音声データ等の付加情報を重畳して送信するデータ放送が行われている。データ放送は、放送番組を提供する放送事業者が、番組である主情報と同時に付加情報を送信するものであり、付加情報として送信するデータは、その番組に関する情報、その放送局で放送されている他の番組に関する情報、宣伝、更に、地震、津波等の緊急情報等である。視聴者は、要求信号を入力することによって、データ放送の視聴を選択することができる。
【０００３】
図１９を参照して、特開２００１−２５１５６５号公報に記載された従来のデジタルテレビジョン放送受信機の例を説明する。このデジタルテレビジョン放送受信機は、受信部３０１、情報分離部３０２、付加情報再生部３１４、重畳判断部３１６、重畳処理部３１８、内部メモリ３２０及びユーザ入力部３２１を有する。内部メモリ３２０は、時刻と主情報のシーン番号の関連表３２０Ａ、シーン番号とそのときに重畳する付加情報の関連表３２０Ｂ及び付加情報を蓄積する付加情報記憶部３２０Ｃを有する。
【０００４】
受信部３０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部３０２に送信する。情報分離部３０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離し、それぞれ重畳処理部３１８と付加情報再生部３１４に送信する。付加情報再生部３１４は、付加情報ストリームから付加情報画像データと重畳パラメータを抽出し、内部メモリ３２０に送信する。重畳判断部３１６は、内部メモリ３２０とユーザ入力部３２１からの情報より、主情報に重畳する付加情報画像データを生成し、重畳処理部３１８に送信する。重畳処理部３１８は、情報分離部３０２からの主情報ストリームと重畳判断部３１６からの付加情報画像データを重畳し、それを放送番組データとして出力する。
【０００５】
図２０を参照して、従来のデジタルテレビジョン放送受信機において、付加情報を主情報に重畳して画面に表示する方法の概念を説明する。図２０Ａに示すように、主情報の画像として、テーブルに２人の人物が座って話をしている場面を仮定する。図２０Ｂに示すように、内部メモリ３２０にて設定されたシーンが表示されると、主情報の画像内の指定された位置２００１に付加情報を重畳して表示する。
【０００６】
また、主情報の画面内にボタンのような小さな画像２００２を表示し、ユーザ入力部３２１から付加情報の表示の要求が入力されると、付加情報を本来の大きな画像として表示することも可能である。
【０００７】
【特許文献１】
特開２００１−２５１５６５号公報
【特許文献２】
特開平１１−１６４２３５号公報
【０００８】
【発明が解決しようとする課題】
従来の技術では、主情報に付加情報を重畳して表示する重畳位置及び重畳時間を予め決めておく必要がある。従って、主情報の視聴の妨げにならぬように、主情報の場面を考慮しながら付加情報の重畳位置及び時間を考慮する必要があった。しかしながら、実際には、主情報の視聴を妨げる位置及び時間に付加情報が表示されることがあった。
【０００９】
付加情報の代わりに、付加情報の存在を示すボタンのような小さな画像を表示させる場合であっても、そのような小さな画像は、主情報中の定位置に表示されるため、主情報の視聴を妨げる可能性がある。
【００１０】
本発明の目的は、主情報の視聴を妨げないように、主情報に付加情報を重畳して表示することができるデジタルテレビジョン放送の受信機を提供することにある。
【００１１】
本発明の目的は、付加情報提供者が主情報の視聴を妨げないように重畳位置及び重畳時間を予め設定する必要がないデジタルテレビジョン放送の受信機を提供することにある。
【００１２】
【課題を解決するための手段】
一般に、テレビジョン放送の映像は次の特徴を有する。
（１）画面中心部分に比較的重要な情報が表示され、画面の端部分には、比較的重要でない情報が表示される傾向がある。
（２）主情報の画像のうち空間的に色階調の変化量の少ない部分は、単色構成で構成されており、その情報の重要度は低いことが多い。
（３）主情報の画像のうち時間的に色階調の変化量の少ない部分は、背景等のように情報の重要度は低い場合が多い。
（４）主情報の画像の重要度が高い部分と重要度が低い部分は、番組内容によって異なる。
【００１３】
本発明によると、このようなテレビジョン放送の映像の特徴に基づいて主情報中の重要度の低いと思われる部分を検出し、その部分に付加情報を重畳して表示する。
【００１４】
本発明によると、テレビジョン放送受信機は、テレビジョン放送局からの放送信号を主情報と付加情報に分離する情報分離手段と、主情報の画像中に付加情報の画像を重畳して表示するための重畳領域候補を検出する重畳領域検出手段と、該重畳領域検出手段によって検出された重畳領域候補より付加情報の画像を重畳して表示する位置を決定する重畳判断手段と、上記主情報に上記付加情報を重畳しそれを放送番組データとして出力する重畳処理手段と、を有する。
【００１５】
本発明によると、テレビジョン放送受信機において、更に、上記情報分離手段によって分離された主情報を蓄積する主情報蓄積手段と、上記情報分離手段によって分離された付加情報を蓄積する付加情報蓄積手段と、を有する。
【００１６】
更に、次の機能を付加することにより、付加情報の重畳に関して、より柔軟な対応が可能となる。
（１）主情報及び付加情報の番組内容に基づいて、付加情報の重畳領域の検出に使用するパラメータを変更させる。
（２）主情報及び付加情報が蓄積されたデータである場合、各番組の全時間データを使用して付加情報の重畳領域の検出が可能となる。
【００１７】
また、視聴者が主情報に付加情報を重畳する条件を入力するための手段を設けることによって、視聴者に不快感を与えないで付加情報を表示することができる。さらに、付加情報の重畳位置を自動的に検出するため、付加情報送信者は主情報の放送構成を考える必要がなく、付加情報を提供することが可能となる。
【００１８】
【発明の実施の形態】
図１を参照して、本発明によるデジタルテレビジョン放送受信機において、付加情報を主情報に重畳して画面に表示する方法の概念を説明する。図１Ａに示すように、主情報の画像として、テーブルに２人の人物が座って話をしている場面を仮定する。図１Ｂに示すように、主情報の画像より、付加情報を表示する領域候補を検出する。付加情報を表示する領域候補として、時間的に又は空間的に色の変化が少ない領域、又は主情報量が少ない領域が選択される。例えば、背景等の時間的に色の変化が少ない領域Ｂ１、テーブル等の空間的に色の変化が少ない領域Ｂ２及び画面の周辺部分Ｂ３が選択される。
【００１９】
図１Ｃに示すように、例えば、「ＡＢ市のお知らせ」の付加情報Ａ１を重畳して表示する領域として、時間的に色の変化が少ない領域Ｂ１を選択し、例えば、「ＣＤ商店」の付加情報Ａ２を重畳して表示する領域として、空間的に色の変化が少ない領域Ｂ２を選択する。尚、図示していないが、画面の周辺部分Ｂ３に、他の付加情報を重畳して表示してよい。付加情報Ａ１、Ａ２は、文字、映像等を含む。図１Ｄは、主情報に付加情報Ａ１及びＡ２が重畳して表示された画面を示す。
【００２０】
こうして、本例では、時間的に又は空間的に色の変化が少ない領域又は主情報量が少ない領域に付加情報を重畳して表示するから、視聴者の視聴を妨げることなく、主情報に付加情報を重畳して表示することができる。
【００２１】
図２を参照して本発明によるデジタルテレビジョン放送受信機の第１の例を説明する。本例のデジタルテレビジョン放送受信機は、受信部１０１、情報分離部１０２、主情報再生部１１０、空間色変化量解析部１１１、時間色変化量解析部１１２、主情報加工部１１３、付加情報再生部１１４、重畳領域検出部１１５、重畳判断部１１６、付加情報加工部１１７、重畳処理部１１８、内部メモリ１２０及びユーザ入力部１２１を有する。内部メモリ１２０は、領域検出パラメータ部１２０Ａと付加情報重畳パラメータ部１２０Ｂを有する。内部メモリ１２０に記録されたデータは、ユーザ入力部１２１を介して入力されたユーザの命令によって変更されることができる。
【００２２】
受信部１０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部１０２に送信する。情報分離部１０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離する。なお、本例の付加情報は、文字情報及び映像情報を含むが、従来例の付加情報と異なり、付加情報の重畳位置及び重畳時間を含む必要はない。
【００２３】
主情報再生部１１０は、主情報ストリームを、１枚１枚の画像データである主情報色階調データＭｃに変換し、それを空間色変化量解析部１１１、時間色変化量解析部１１２、主情報加工部１１３及び重畳領域検出部１１５に送信する。
【００２４】
空間色変化量解析部１１１は、主情報色階調データＭｃに基づいて、所定の時刻における基準画素の色と隣接画素の色を比較し、両者の差から空間色変化量Ｓｃを計算する。時間色変化量解析部１１２は、主情報色階調データＭｃに基づいて、基準画素における所定の時刻の色と過去の色を比較し、両者の差から時間色変化量Ｔｃを計算する。
【００２５】
付加情報再生部１１４は、付加情報ストリームを画像データである付加情報色階調データＡｃに変換し、それを重畳領域検出部１１５及び付加情報加工部１１７に送信する。同時に、付加情報の受信時間及び画像の大きさなどのデータを重畳領域検出部１１５及び重畳判断部１１６に送信する。
【００２６】
重畳領域検出部１１５は、次のパラメータに基づいて、付加情報毎に重畳領域候補を検出する。
（１）領域検出パラメータ部１２０Ａの設定値
（２）付加情報重畳パラメータ部１２０Ｂの設定値
（３）主情報再生部１１０からの主情報色階調データＭｃ
（４）空間色変化量解析部１１１からの空間色変化量Ｓｃ
（５）時間色変化量解析部１１２からの時間色変化量Ｔｃ
（６）付加情報再生部１１４からの付加情報色階調データＡｃ
（７）付加情報再生部１１４からの付加情報の受信時間及び画像の大きさ
【００２７】
重畳領域検出部１１５は、検出した重畳領域候補データを重畳判断部２１６に送信する。重畳判断部１１６は、付加情報再生部１１４から付加情報受信時間及び画像の大きさ、重畳領域検出部１１５から各付加情報の重畳領域候補データ、付加情報重畳パラメータ部１２０Ｂから重畳領域優先順位等を受信し、主情報中に付加情報を重畳する位置、即ち、重畳領域を決定する。重畳判断部１１６は、決定した重畳領域を、主情報加工部１１３と付加情報加工部１１７に送信する。
【００２８】
主情報加工部１１３は、重畳判断部１１６からの条件に基づいて、主情報再生部１１０からの主情報色階調データＭｃを、重畳に適切な形態に加工する。付加情報加工部１１７は、重畳判断部１１６からの条件に基づいて、付加情報再生部１１４からの付加情報色階調データＡｃを、重畳に適切な形態に加工する。最後に、重畳処理部１１８は、加工された主情報色階調データＭｃ及び付加情報色階調データＡｃを重畳し、放送番組データとして出力する。
【００２９】
図３を参照して、空間色変化量解析部１１１における空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）の計算例を説明する。ここで空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）を、時刻Ｔにおける座標（Ｘ，Ｙ，Ｔ）の画素とその隣接画素との色階調差を数値化した値であると定義する。座標（Ｘ，Ｙ，Ｔ）を基準座標、その画素を基準画素と称する。
【００３０】
図３の例では、基準画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ）とし、Ｘ座標方向及びＹ座標方向に隣り合う４つの画素の主情報色階調データをＭｃ（Ｘ＋１，Ｙ，Ｔ）、Ｍｃ（Ｘ−１，Ｙ，Ｔ）、Ｍｃ（Ｘ，Ｙ＋１，Ｔ）及びＭｃ（Ｘ，Ｙ−１，Ｔ）とする。空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は、４つの画素の主情報色階調データＭｃ（Ｘ＋１，Ｙ，Ｔ）、Ｍｃ（Ｘ−１，Ｙ，Ｔ）、Ｍｃ（Ｘ，Ｙ＋１，Ｔ）及びＭｃ（Ｘ，Ｙ−１，Ｔ）と基準画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ）の差の絶対値の総和であり、次の式によって表される。
【００３１】
【数１】
Ｍｃ（Ｘ，Ｙ，Ｔ）＝｜Ｍｃ（Ｘ＋１，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ−１，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ，Ｙ＋１，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜＋｜Ｍｃ（Ｘ，Ｙ−１，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ）｜
【００３２】
この値が大きければ大きいほど、基準座標（Ｘ，Ｙ，Ｔ）の周辺は色階調の空間的変化が大きいと言える。例えば、基準座標（Ｘ，Ｙ，Ｔ）の画素の色階調を１、Ｘ座標方向に隣接する座標（Ｘ−１，Ｙ，Ｔ）及び（Ｘ＋１，Ｙ，Ｔ）の画素の色階調を３及び１、Ｙ座標方向に隣接する座標（Ｘ，Ｙ−１，Ｔ）及び（Ｘ，Ｙ＋１，Ｔ）の画素の色階調を２及び１とすると、空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は次のようになる。
【００３３】
【数２】
Ｓｃ（Ｘ，Ｙ，Ｔ）＝２＋０＋１＋０＝３
【００３４】
なおこの例では、空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）は、単色画像での基準画素と隣接４画素の間の色階調差の絶対値によって示される。しかしながら、画素周辺の色階調変化の度合を数値化できれば、このような計算方法に依らなくてもよい。例えば、次のような方法によって修正してもよい。
（１）（図３の例では単色画像であるが）カラー画像のように複数色の画像とする。
（２）（図３の例では隣接４画素と比較するが）基準画素と比較する隣接画素数を増減する。基準画素と隣接画素ではなく近傍の画素を比較する。
（３）（図３の例では重み付けは無いが）画素や階調により重み付けを行う。
（４）（図３の例では色階調の差の絶対値であるが）基準画素と隣接画素の色変化量の計算方法を変更する。
【００３５】
次に、図４を参照して、時間色変化量解析部１１２における時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）の計算例を説明する。ここで時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）を、所定の座標（Ｘ，Ｙ）において、時刻Ｔにおける画素とそれより過去の時刻における画素との色階調差を数値化した値であると定義する。座標（Ｘ，Ｙ，Ｔ）を基準座標、その画素を基準画素と称する。
【００３６】
図４の例では、基準画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ）とし、過去の時刻Ｔ−１及びＴ−２における当該画素の主情報色階調データをＭｃ（Ｘ，Ｙ，Ｔ−１）、Ｍｃ（Ｘ，Ｙ、Ｔ−２）とする。時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）は、過去２枚の画像における当該画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ−１）、Ｍｃ（Ｘ，Ｙ、Ｔ−２）と基準画素の主情報色階調データＭｃ（Ｘ，Ｙ，Ｔ）の差の絶対値の総和であり次に式によって表される。
【００３７】
【数３】
Ｔｃ（Ｘ，Ｙ，Ｔ）＝｜Ｍｃ（Ｘ，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ−１）｜＋｜Ｍｃ（Ｘ，Ｙ，Ｔ）−Ｍｃ（Ｘ，Ｙ，Ｔ−２）｜
【００３８】
この値が大きければ大きいほど、基準座標（Ｘ，Ｙ，Ｔ）の画素は色階調の時間的変化が大きいと言える。例えば、時刻Ｔにおける基準座標（Ｘ，Ｙ，Ｔ）の画素の色階調を２、時刻Ｔ−１における座標（Ｘ，Ｙ，Ｔ−１）の画素の色階調を１、時刻Ｔ−２における座標（Ｘ，Ｙ，Ｔ−２）の画素の色階調を１とすると、時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）は次のようになる。
【００３９】
【数４】
Ｔｃ（Ｘ，Ｙ，Ｔ）＝１＋１＝２
【００４０】
なおこの例では、時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）を単色画像での基準画素と過去の２画素の間の色階調差の絶対値によって示される。しかしながら、画素の時間経過による色階調変化の度合を数値化できれば、この方法に依らなくてもよい。例えば、次のような方法によって修正してもよい。
（１）（図４の例では単色画像であるが）カラー画像のように複数の色画像とする。
（２）（図４の例では基準画素と過去２画素を比較するが）基準画素と比較する過去の画素数を増減する。
（３）（図４の例では過去の画素のみを使用したが）蓄積データ等で、未来の画素を色階調変化の検出に使用する。
（４）（図４の例では重み付けは無いが）画素や階調により重み付けを行う。
（５）（図４の例では色階調の差の絶対値を使用したが）基準画素と過去の画素との色変化量の計算方法を変更する。
【００４１】
図５を参照して、領域検出パラメータ部１２０Ａに記録されるデータの例を説明する。領域検出パラメータ部には次の５つのパラメータが記録される。
（１）重畳可能領域：主情報の画像上の付加情報を重畳することが可能な領域。図５の第１の例では、重畳可能領域は、主情報の画像の４辺の縁から２００画素以内であり、第２の例では、重畳可能領域は、主情報の画像の４辺の縁から３００画素以内である。重畳可能領域は図７に示すように、主情報の画像のうち縁に沿った額縁状の部分である。
（２）空間色変化量平均値Ａｖｅ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量の平均値の基準値又は条件
（３）空間色変化量分散値Ｄｉｓｔ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量の分散値の基準値又は条件
（４）時間色変化量平均値Ａｖｅ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量の平均値の基準値又は条件
（５）時間色変化量分散値Ｄｉｓｔ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量の平均値の基準値又は条件
【００４２】
これらの条件に従って、重畳領域検出部１１５は重畳領域候補を検出する。これらのパラメータの値は、ユーザ入力部１２１を介して入力されたユーザの命令によって変更することが可能である。またここでは、例としてこの５つのパラメータを示しているが、重畳領域の特徴を示すパラメータであれば、これ以外のパラメータを使用することも可能である。例えば、（１）色変化量の平均値に、中心座標（Ｘ，Ｙ）からの距離の重み付けをしたもの、（２）ＤＰ（Dynamic Programming）マッチング手法等で使用される、重畳可能領域の認識用モデル、等のパラメータが考えられる。
【００４３】
図６を参照して付加情報重畳パラメータ部１２０Ｂに記録されるデータの例を説明する。付加情報重畳パラメータ部には、次のパラメータが記録される。
（１）重畳可能平均色階調差：領域Ｄの主情報平均色階調Ａｖｅ（Ｍｃ）と付加情報平均色階調Ａｖｅ（Ａｃ）の間の差の基準値又は条件
（２）付加情報変色階調：主情報に付加情報を重畳するために変化させてもよい付加情報画像の色階調量の基準値又は条件
（３）付加情報変形量：主情報に付加情報を重畳するために変化させてもよい付加情報画像の変形量の基準値又は条件
（４）主情報変色階調：主情報に付加情報を重畳するために変化させてもよい主情報画像の色階調量の基準値又は条件
（５）重畳領域優先順位：重畳領域の決定に使用される優先順位
【００４４】
重畳判断部１１６は、これらのパラメータを重畳基準として重畳位置、即ち、重畳領域を決定すると共に、重畳領域検出部１１５は、これらのパラメータを重畳領域候補の検出に利用する。これらのパラメータも領域検出パラメータと同様に、ユーザ入力部１２１を介して入力されたユーザの命令によって変更することが可能である。またここでは、例としてこの５つのパラメータを示しているが、例えば、（１）付加情報が瞬間表示され、視聴者が付加情報の表示に気づかないことを防ぐための最低重畳表示時間、等の付加情報の重畳方法を示すパラメータを使用することも可能である。
【００４５】
図７を参照して重畳領域検出部１１５において主情報の画像ＭＩＧに付加情報の画像ＡＩＧを重畳するための重畳領域候補の検出方法の概略について説明する。重畳領域検出部１１５は、主情報生成部１１０からの主情報と付加情報再生部１１４からの付加情報を入力する。付加情報の画像ＡＩＧは矩形であってよい。先ず、重畳可能領域に中心座標を仮設定し、この中心座標上に複数の領域Ｄを作成する。領域Ｄは、付加情報再生部１１４からの付加情報の画像の大きさと付加情報重畳パラメータ部１２０Ｂからの付加情報変形量に基づいて、付加情報の画像を変形することによって得られる。次に、これらの領域Ｄが、領域検出パラメータ部１２０Ａからの重畳可能領域内において、所定の条件を満足するかどうかを計算する。条件を満足する領域Ｄが、主情報に付加情報を重畳するための重畳領域候補となる。
【００４６】
また、本例では領域Ｄは矩形であるが、パラメータを追加することで、「星型やリング型などの複雑な形状の領域」、「付加情報に透明色を含んだ場合の領域」のような領域を扱うことも可能である。
【００４７】
図８を参照して重畳領域検出部１１５の動作を説明する。ステップ４０１にて、重畳領域の検出処理を開始する。重畳領域の検出は、付加情報毎に行う。ステップ４０２にて、領域検出パラメータ部１２０Ａによって指定されている重畳可能領域内に中心座標（Ｘ，Ｙ）を仮決定する。また、付加情報再生部１１４からの付加情報色階調データＡｃより、付加情報の全画素の平均色階調である付加情報平均色階調Ａｖｅ（Ａｃ）を計算する。この計算は、付加情報画像を効果的に配置するために、付加情報画像全体の色の特徴を知るために行う。ここでは、付加情報の全画素の色階調の平均値により付加情報画像データの色の特徴を把握しようとしているが、付加情報画像データの色の特徴が把握できれば方法はこの限りではない。
【００４８】
ステップ４０３にて、仮決定した座標（Ｘ，Ｙ）に関する処理を開始する。ステップ４０４にて、座標（Ｘ，Ｙ）を中心に付加情報重畳用の領域Ｄを仮決定する。付加情報重畳用の領域Ｄの大きさは、上述のように、付加情報再生部１１４からの付加情報画像の大きさ及び付加情報重畳パラメータ部１２０Ｂからの付加情報変形量によって決定される。本例では、座標（Ｘ，Ｙ）を領域Ｄの中心座標と定義しているが、主情報画像において領域Ｄの位置が一意に定義できればこれに限らない。ステップ４０５にて、領域Ｄに関する処理を開始する。
【００４９】
ステップ４０６にて、座標（Ｘ，Ｙ）を中心とした領域Ｄが、領域検出パラメータ部１２０Ａに設定された重畳可能領域を越えるかどうかの判断を行う。領域Ｄが重畳可能領域を越える場合には、ステップ４１５に進み、領域Ｄが重畳可能領域を越えない場合は、ステップ４０７に進む。
【００５０】
ステップ４０７にて、領域Ｄ内の全座標に関する処理を開始する。ステップ４０８にて、先ず、領域Ｄ内の全座標に関して、空間色変化量Ｓｃ、時間色変化量Ｔｃ及び主情報色階調データＭｃを、それぞれ空間色変化量解析部１１１、時間色変化量解析部１１２、及び主情報再生部１１０から呼び出す。次に、領域Ｄに関する以下のパラメータを計算する。
【００５１】
（１）空間色変化量平均Ａｖｅ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量Ｓｃの平均値
（２）空間色変化量分散Ｄｉｓｔ（Ｓｃ）：領域Ｄ内の全座標に関する空間色変化量Ｓｃの分散値
（３）時間色変化量平均Ａｖｅ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量Ｔｃの平均値
（４）時間色変化量分散Ｄｉｓｔ（Ｔｃ）：領域Ｄ内の全座標に関する時間色変化量Ｔｃの分散値
（５）主情報平均色階調Ａｖｅ（Ｍｃ）：領域Ｄ内の全座標に関する主情報色階調Ｍｃの平均値
【００５２】
本例では、この５つのパラメータを計算しているが、領域Ｄ内の全座標に関する計算と、重畳領域を検出するためのパラメータが定義されれば、重畳領域検出のために他の値を計算することも可能である。
【００５３】
ステップ４０９にて、ステップ４０８にて計算した４つのパラメータＡｖｅ（Ｓｃ）、Ｄｉｓｔ（Ｓｃ）、Ａｖｅ（Ｔｃ）及びＤｉｓｔ（Ｔｃ）が、領域検出パラメータ部１２０Ａで定義されている条件（図５）を満足するか否かを判断する。満足する場合はステップ４１０に進み、満足しない場合はステップ４１５に進む。
【００５４】
ステップ４１０にて、平均色階調の処理を開始する。ステップ４１１にて、ステップ４０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ４０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）と、を比較する。主情報画像と付加情報画像の平均色階調を比較するのは、画像全体の色の特徴を知り、効果的に付加情報の配置を行うためである。ここでは、全画素の色階調の平均値により画像データの色の特徴を把握しようとしているが、色の特徴が把握できれば方法はこの限りではない。
【００５５】
両者の差の値が、付加情報重畳パラメータ部１２０Ｂで定義されている重畳可能平均色階調差の条件（図６）を満足するか否かを判断する。満足する場合には、ステップ４１４に進み、満足しない場合にはステップ４１２に進む。
【００５６】
ステップ４１２にて、変色に関して未計算のものがあるか否かを判定する。変色に関して未計算のものがある場合には、ステップ４１３に進み、変色に関して未計算のものがない場合には、ステップ４１５に進む。
【００５７】
ステップ４１３にて、先ず、主情報及び付加情報を、付加情報重畳パラメータ部１２０Ｂで定義されている主情報変色階調及び付加情報変色階調の条件（図６）の範囲にて変色する。ここでは変色処理の方法として、単色画像の主情報画像、付加情報画像の全画素について同じように色階調を増減させると考えているが、他にも次の方法が考えられる。
【００５８】
（１）カラー映像の複数色画像において、色ごとに変化させる重み付けを変える方法
（２）領域の中央部は色変化を少なく、端の方は大きく変化させる、などの領域内で重みを変える方法
（３）主情報に関しては主情報色階調データＭｃ及び付加情報に関しては付加情報色階調データＡｃの値に基づいて、個々の画素の色階調に応じて変化させる方法
【００５９】
次に、ステップ４０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ４０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）を、付加情報重畳パラメータ部１２０Ｂで定義されている重畳可能平均色階調差の条件（図６）を満足するように、再計算し、ステップ４１０に戻り、平均色階調処理を再度行う。
【００６０】
ステップ４１４にて、中心座標（Ｘ，Ｙ）及び領域Ｄ、領域Ｄにおける付加情報の変形量、主情報及び付加情報の変色量、主情報と付加情報の階調差等を登録し、それを重畳判断部１１６に送信する。
【００６１】
ステップ４１５にて、領域Ｄの形状に関して未計算のものが存在するか否かを判定する。即ち、付加情報重畳パラメータ部１２０Ｂの付加情報変形量に基づいて、領域Ｄを、これ以上変形させることができないか否かを判断する。未計算のものが存在する場合、即ち、領域Ｄを変形できる場合は、ステップ４１６にて、領域Ｄの形状を変更し、ステップ４０５に戻り、変更後の新しい領域Ｄに関する処理を行う。
【００６２】
未計算のものが存在しない場合、即ち、領域Ｄをこれ以上変形できない場合は、ステップ４１７にて、重畳可能領域の全座標に関して処理を行ったかを判断する。処理が終了している場合にはステップ４１９に進み、検出終了となり、処理が終了していない場合にはステップ４１８に進み、未計算の座標を中心座標（Ｘ，Ｙ）とし、ステップ４０３に戻り、この中心座標（Ｘ，Ｙ）に関する処理を行う。図１０は重畳領域検出部１１５によって得られた重畳領域候補データの例を示す。
【００６３】
図９を参照して重畳判断部１１６における重畳領域の決定の処理を説明する。ステップ５０１にて、処理を開始し、ステップ５０２にて、重畳領域決定に使用する順位を求めるためのソート処理を開始する。先ず、ステップ５０３にて、重畳領域検出部１１５からの重畳領域候補が存在するか否かを判定する。重畳領域候補が存在しない場合にはステップ５１１に進み、重畳領域候補が存在する場合にはステップ５０４に進む。
【００６４】
次に、ステップ５０４にて、全付加情報に関する重畳領域候補を、付加情報重畳パラメータ部１２０Ｂの重畳領域優先順位（図６）に従ってソートする。それによってソート後の順位が決まる。
【００６５】
ステップ５０５にて、各付加情報の重畳領域候補より重畳位置、即ち、重畳領域を決定する処理を開始する。ステップ５０６にて、付加情報毎に重畳領域を決定する処理を開始する。ステップ５０７にて、処理の対象である付加情報の重畳領域候補のうちソート後の順位が最上位のものを最有力候補とし、この最有力候補が他の付加情報の重畳領域候補と領域の競合があるか否かを判定する。競合する場合にはステップ５０８に進み、競合しない場合にはステップ５１２に進む。
【００６６】
ステップ５０８にて、最有力候補の重畳領域候補が競合相手の他の付加情報の重畳領域候補より、ソート後の順位が低いか否かを判定する。最有力候補が競合他候補よりソート後の順位が低い場合にはステップ５０９に進み、競合他候補よりソート後の順位が低くない場合にはステップ５１２に進む。
【００６７】
ステップ５０９にて、処理の対象である付加情報に現最有力候補以外に他の重畳領域候補が存在するか否かを判定する。他の重畳領域候補が存在する場合にはステップ５１０に進み、他の重畳領域候補が存在しない場合にはステップ５１１に進む。ステップ５１０にて、処理の対象である付加情報の他の重畳領域候補を最有力候補として、ステップ５０６に戻る。
【００６８】
ステップ５１１にて、重畳領域を検出することができないとして、付加情報を出力しない。ステップ５１２にて、最有力候補を付加情報の重畳領域として決定し、出力する。ステップ５１３にて、全ての付加情報に関して重畳領域を決定した否かを判定する。全ての付加情報に関して重畳領域を決定した場合には、ステップ５１５にて処理を終了し、全ての付加情報に関して重畳領域を決定していない場合には、ステップ５１４にて未決定の付加情報に関して重畳領域の決定の処理を行う。
【００６９】
図１０及び図１１を参照して説明する。図１０は、重畳領域検出部１１５によって検出された各付加情報に関する重畳領域候補の例を示す。付加情報１、２、３の画像の大きさはいずれも横１００×縦５０である。変形情報は、横１００×縦５０の画像に対する重畳領域候補の変形量を示す。付加情報１に対して２つの重畳領域候補１０１、１０２が検出され、付加情報２に対して１つの重畳領域候補１０３が検出され、付加情報３に対して２つの重畳領域候補１０４、１０５が検出されている。各重畳領域候補には、付加情報再生部１１４からの付加情報のデータが付されている。
【００７０】
図９に示した重畳判断部１１６における重畳領域の決定処理を図１０及び図１１の例を参照して説明する。先ず、領域競合の判定で使用する順位を生成するために、重畳領域候補１０１〜１０５をソート（ステップ５０４）する。図１１は、重畳領域候補１０１〜１０５を付加情報重畳パラメータ部１２０Ｂの重畳領域優先順位（図６）に従ってソートをした結果である。重畳領域候補１０１〜１０５を、第１の条件である主情報変色階調の少ない順に並べる。３つ重畳領域候補１０１、１０３及び１０４は、主情報変色階調が同一である。従って、３つ重畳領域候補１０１、１０３及び１０４を、第２条件である付加情報変色階調の少ない順に並べる。このように順位が同一の重畳領域候補がなくなるまで、条件に従いソートを続けることによって、全ての重畳領域候補の順位が決定される。尚、全ての重畳領域候補の順位が決定できれば、ここで説明した条件以外の条件を使用してもよい。
【００７１】
第１の付加情報１の重畳領域を決定する処理を説明する。第１の付加情報１に関して２つの重畳領域候補１０１、１０２が検出されている。ソート後の順位が高い第１の重畳領域候補１０１を最有力候補とする。この最有力候補が、他の付加情報２、３の重畳領域候補と領域の競合があるか否かを判定する。領域の競合は、各重畳領域候補の中心座標と画像の大きさを比較することによって、判定することができる。最有力候補の第１の重畳領域候補１０１は、第２の重畳領域候補１０２及び第２の付加情報２の重畳領域候補１０３と、領域の競合をする。ここでは、他の付加情報の重畳領域候補との領域の競合の有無を考慮する。従って、第２の付加情報２の重畳領域候補１０３のみを対象とする。最有力候補の第１の重畳領域候補１０１は、第２の付加情報２の重畳領域候補１０３より順位が低い。従って、第１の付加情報１の重畳領域は検出なしとする。
【００７２】
第２の付加情報２の重畳領域を決定する処理を説明する。第２の付加情報２に関しては１つの重畳領域候補１０３のみが検出されている。重畳領域候補１０３を最有力候補とする。この最有力候補が、他の付加情報１、３の重畳領域候補と領域の競合があるか否かを判定する。重畳領域候補１０３は、第１の付加情報１の重畳領域候補１０１及び１０２と、領域の競合をする。しかしながら、最有力候補の重畳領域候補１０３は、競合相手の第１の付加情報１の重畳領域候補１０１及び１０２より、ソート後の順位が高い。従って、第２の付加情報２に関して、重畳領域候補１０３を重畳領域として決定する。
【００７３】
第３の付加情報３の重畳領域を決定する処理を説明する。第３の付加情報３に関して２つの重畳領域候補１０４、１０５が検出されている。ソート後の順位が高い第１の重畳領域候補１０４を最有力候補とする。この最有力候補が、他の付加情報１、２の重畳領域候補と領域の競合があるか否かを判定する。第１の重畳領域候補１０４は、第２の重畳領域候補１０５と、領域の競合をするが、他の付加情報の重畳領域候補と、領域の競合をしない。従って、第３の付加情報３に関して、重畳領域候補１０４を重畳領域として決定する。
【００７４】
図１２を参照して本発明によるデジタルテレビジョン受像機の第２の例を説明する。本例のデジタルテレビジョン受像機は、受信部２０１、情報分離部２０２、主情報入力部２０３、主情報属性抽出部２０４、主情報蓄積部２０５、付加情報入力部２０６、付加情報属性抽出部２０７、付加情報蓄積部２０８、主情報再生部２１０、空間色変化量解析部２１１、時間色変化量解析部２１２、主情報加工部２１３、付加情報再生部２１４、重畳領域検出部２１５、重畳判断部２１６、付加情報加工部２１７、重畳処理部２１８、重畳記録管理部２１９、内部メモリ２２０及びユーザ入力部２２１を有する。内部メモリ２２０は、領域検出パラメータ部２２０Ａ、付加情報重畳パラメータ部２２０Ｂ及び付加情報管理パラメータ部２２０Ｃを有する。内部メモリ２２０に記録されたデータは、ユーザ入力部２２１を介して入力されたユーザの命令によって変更されることができる。
【００７５】
受信部２０１は、放送局からの放送信号を放送ストリームにデコードし、それを情報分離部２０２に送信する。情報分離部２０２は、放送ストリームを主情報ストリームと付加情報ストリームに分離する。なお、本例の付加情報は、第１の例と同様に、文字情報及び映像情報を含むが、従来例の付加情報と異なり、付加情報の重畳位置及び重畳時間を含む必要はない。また、本例の付加情報は、静止画情報ばかりでなく動画情報を含む。
【００７６】
主情報入力部２０３は、主情報ストリームを主情報属性抽出部２０４に送信する。また、主情報を蓄積する必要があれば、主情報蓄積部２０５に送信する。主情報蓄積部２０５は、蓄積した主情報データを必要に応じて、主情報入力部２０３に出力する。
【００７７】
付加情報入力部２０６は、付加情報ストリームを付加情報属性抽出部２０７に送信する。また、付加情報を蓄積する必要があれば、付加情報蓄積部２０８に送信する。付加情報蓄積部２０８は、蓄積した付加情報データを必要に応じて、付加情報入力部２０６に出力する。
【００７８】
主情報属性抽出部２０４は主情報ストリームの属性を抽出し、それを内部メモリ２２０に送信し、主情報ストリームを主情報再生部２１０に送信する。付加情報属性抽出部２０７は付加情報ストリームの属性を抽出し、それを内部メモリ２２０に送信し、付加情報ストリームを付加情報再生部２１４に送信する。主情報及び付加情報の属性は、領域検出パラメータ部２２０Ａ、付加情報重畳パラメータ部２２０Ｂ等に送信され、利用される。また付加情報は、付加情報管理パラメータ部２２０Ｃに送信され、付加情報の表示、管理に使用される。
【００７９】
主情報再生部２１０は、主情報ストリームを１枚１枚の画像データである主情報色階調データＭｃに変換し、それを空間色変化量解析部２１１、時間色変化量解析部２１２、主情報加工部２１３及び重畳領域検出部２１５に送信する。
【００８０】
空間色変化量解析部２１１は、主情報色階調データＭｃに基づいて、所定の時刻における基準画素の色と隣接画素の色を比較し、両者の差から空間色変化量Ｓｃを計算する。時間色変化量解析部２１２は、主情報色階調データＭｃに基づいて、基準画素における所定の時刻の色と過去の色を比較し、両者の差から時間色変化量Ｔｃを計算する。
【００８１】
付加情報再生部２１４は、付加情報を画像データである付加情報色階調データＡｃに変換し、それを重畳領域検出部２１５及び付加情報加工部２１７に送信する。また、付加情報再生部２１４は、付加情報の画像大きさ等のデータを付加情報管理パラメータ部２２０Ｃに送信する。
【００８２】
重畳領域検出部２１５は、次のパラメータに基づいて、付加情報毎に重畳領域候補を検出する。
（１）領域検出パラメータ部２２０Ａの設定値
（２）付加情報重畳パラメータ部２２０Ｂの設定値
（３）付加情報管理パラメータ部２２０Ｃの付加情報のパラメータ
（４）主情報再生部２１０からの主情報色階調データＭｃ
（５）空間色変化量解析部２１１からの空間色変化量Ｓｃ
（６）時間色変化量解析部２１２からの時間色変化量Ｔｃ
（７）付加情報再生部２１４からの付加情報色階調データＡｃ
【００８３】
重畳領域検出部２１５は、検出した重畳領域候補データを重畳判断部２１６に送信する。重畳判断部２１６は、重畳領域検出部２１５から各付加情報の重畳領域候補データ、付加情報重畳パラメータ部２２０Ｂから重畳領域優先順位、付加情報管理パラメータ部２２０Ｃから付加情報受信時間等を受信し、主情報中に付加情報を重畳する位置、即ち、重畳領域を決定する。重畳判断部２１６は、決定した重畳領域を、主情報加工部２１３と付加情報加工部２１７に送信する。
【００８４】
主情報加工部２１３は、重畳判断部２１６からの条件に基づいて、主情報再生部２１０からの主情報色階調データMｃを、重畳に適切な形態に加工する。付加情報加工部２１７は、重畳判断部２１６からの条件に基づいて、付加情報再生部２１４からの付加情報色階調データＡｃを、重畳に適切な形態に加工する。重畳処理部２１８は、加工された主情報色階調データMｃ及び付加情報色階調データＡｃを重畳し、放送番組データとして出力する。
重畳記録管理部２１９は、出力結果を、付加情報ごとに記録し、付加情報管理パラメータ部２２０Ｃに送信する。
【００８５】
本例は、第１の例と比較すると、主情報として主情報蓄積部２０５に蓄積された主情報データを使用し、付加情報として付加情報蓄積部２０８に蓄積された付加情報データを使用することができる点が異なる。従って、本例では次のことが可能となる。
【００８６】
（１）付加情報として所定の表示期間を保証する必要がある画像を使用することができる。表示期間を保証する必要がある例としては、動画像があるが、動画像以外に静画像であっても、所定の表示期間が設けられているものが、が挙げられる。そのような付加情報は、表示最優先の扱いとする。
【００８７】
重畳領域検出部２１５は、蓄積した全時間の主情報を利用することにより、重畳のための領域が付加情報の重畳条件を満たしている状態を継続する時間を検出することができる。それによって、表示期間を保証する必要がある付加情報のための重畳領域候補を検出することができる。
【００８８】
（２）主情報再生部２１０は、任意時間における主情報データを主情報色階調データMｃに変換することができる。
空間色変化量解析部２１１及び時間色変化量解析部２１２における、空間色変化量Ｓｃ、時間色変化量Ｔｃの計算方法は、第１の例の場合と同一であり、その計算例は図３、図４と同一である。しかしながら、本例では、第１の例と異なり、空間色変化量解析部２１１及び時間色変化量解析部２１２では、以下のことが可能となる。
（ａ）主情報中の任意の時間における空間色変化量Ｓｃ及び時間色変化量Ｔｃを計算する。
（ｂ）時間色変化量Ｔｃの計算に、任意の時間から未来の時間の主情報色階調データＭｃを使用することができる。
また計算方法に関しては、第１の例と同様に色階調の変化量が数値化できれば、その方法はこの例に限らない。
【００８９】
（３）付加情報蓄積部２０８に付加情報を蓄積することによって、任意の時間に主情報に付加情報を重畳することができる。即ち、主情報を付加情報に重畳する時間を任意に選択することができる。また、重畳記録管理部２１９は、付加情報管理パラメータ部２２０Ｃに記録された付加情報を自動的に削除するように構成することによって、ユーザが付加情報を削除する煩わしさが解消される。
【００９０】
図１３に領域検出パラメータ部２２０Ａに記録されるデータの例を示す。本例の領域検出パラメータは、重畳可能領域、空間色変化量平均値Ａｖｅ（Ｓｃ）、空間色変化量分散値Ｄｉｓｔ（Ｓｃ）、時間色変化量平均値Ａｖｅ（Ｔｃ）及び時間色変化量分散値Ｄｉｓｔ（Ｔｃ）の基準値又は条件を含み、第１の例の領域検出パラメータ（図５）と同一であるが、本例では、主情報の属性と付加情報の属性に応じて、領域検出パラメータの設定１〜４を変化させている。
【００９１】
図１４を参照して付加情報重畳パラメータ部２２０Ｂに記録されるデータの例を説明する。本例の付加情報重畳パラメータは、重畳可能平均色階調差、付加情報変色階調、付加情報変形量及び主情報変色階調の基準値又は条件と重畳領域優先順位を含み、第１の例の付加情報重畳パラメータ（図６）と同一であるが、本例では、主情報の属性、付加情報の属性及び重畳領域優先順位に応じて、重畳可能平均色階調差、付加情報変色階調、付加情報変形量及び主情報変色階調の条件設定１〜４、Ａ、Ｂを変化させている。
【００９２】
尚、図１３の領域検出パラメータ及び図１４の付加情報重畳パラメータは、第１の例の場合と同様に、追加や変更が可能である。また、ここでは、主情報の属性と付加情報の属性に応じて領域検出パラメータを設定しているが、主情報、付加情報それぞれの属性のみに応じてパラメータを設定してもよく、主情報の番組名、主情報及び付加情報の発信先、付加情報の受信日時、のような主情報及び付加情報の状態等によりパラメータの設定を変化させてもよい。
【００９３】
図１５を参照して付加情報管理パラメータ部２２０Ｃに記録されるデータの例を説明する。付加情報管理パラメータは、以下の例を含む。
（１）付加情報の属性：付加情報の内容を示す。
（２）付加情報の発行元：付加情報の提供者を示す。
（３）動画再生時間：付加情報に含まれる動画の再生時間を示す。静止画だけの場合もある。
（４）付加情報受信日時：受信機が付加情報を受信した日時を示す。
（５）最新出力時間：主情報に付加情報が重畳された最新の時間を示す。
（６）送信時間制限：主情報に付加情報を重畳することが可能な時間を示す。
（７）送信経過時間：主情報に付加情報を重畳した現在までの総時間を示す。
【００９４】
図１５の付加情報管理パラメータは、追加や変更が可能である。付加情報管理パラメータは、付加情報の管理に利用される。例えば、付加情報送信時間制限が設定されている場合に、送信経過時間が付加情報送信時間制限を超えたなら付加情報の重畳を行わない等の処理ができる。また、付加情報が付加情報蓄積部２０８に蓄積されたデータの場合は、付加情報蓄積部２０８からその付加情報を削除する等の処理を行うことも可能である。これにより、付加情報を主情報に重畳する際、より柔軟な処理が可能となる。
【００９５】
図１６を参照して、主情報が主情報蓄積部２０５に蓄積されたデータである場合の重畳領域検出部２１５の動作を説明する。ステップ６０１にて、重畳領域の検出処理を開始する。重畳領域の検出は、付加情報毎に行う。ステップ６０２にて、領域検出パラメータ部２２０Ａによって指定されている重畳可能領域内に中心座標（Ｘ，Ｙ）を仮決定する。本例では、更に、付加情報を重畳する開始時間Ｔを仮設定する。また付加情報再生部２１４からの付加情報色階調データＡｃより、付加情報の全画素の平均色階調である付加情報平均色階調Ａｖｅ（Ａｃ）を計算する。本例は、図８の第１の例と比較して、開始時間Ｔを仮決定することが異なる。
【００９６】
ステップ６０３にて、仮決定した中心座標（Ｘ，Ｙ）と開始時間Ｔに関する処理を開始する。ステップ６０４にて、座標（Ｘ，Ｙ）を中心に付加情報重畳用の領域Ｄを仮決定する。本例では、更に、付加情報を重畳する期間Ｔｗを仮決定する。重畳用の領域Ｄの大きさは、付加情報再生部２１４からの付加情報画像の大きさ及び付加情報重畳パラメータ部２２０Ｂからの付加情報変形量によって決定される。また、期間Ｔｗは、付加情報管理パラメータ部２２０Ｃの動画再生時間から決定される。ステップ６０５にて、領域Ｄ及び期間Ｔｗに関する処理を開始する。
【００９７】
ステップ６０６にて、開始時間Ｔからの期間Ｔｗを確保した場合、座標（Ｘ，Ｙ）を中心とした領域Ｄが、重畳可能領域を越えるかどうかの判断を行う。領域Ｄが重畳可能領域を越える場合は、ステップ６０７に進み、領域Ｄが重畳可能領域を越えない場合は、ステップ６１５に進む。
【００９８】
ステップ６０７にて、期間Ｔｗにおける領域Ｄ内の全座標に関する処理を開始する。ステップ６０８にて、先ず、期間Ｔｗにおける領域Ｄ内の全座標に関して、空間色変化量Ｓｃ、時間色変化量Ｔｃ、及び主情報色階調データＭｃを、それぞれ空間色変化量解析部２１１、時間色変化量解析部２１２、及び主情報再生部２１０から呼び出す。次に、期間Ｔｗにおける領域Ｄに関する以下のパラメータを計算する。
【００９９】
（１）空間色変化量平均Ave（Ｓｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する空間色変化量Ｓｃの平均値
（２）空間色変化量分散Dist（Ｓｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する空間色変化量Ｓｃの分散値
（３）時間色変化量平均Ave（Ｔｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する時間色変化量Ｔｃの平均値
（４）時間色変化量分散Dist（Ｔｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する時間色変化量Ｔｃの分散値
（５）主情報平均色階調Ave（Ｍｃ）：期間Ｔｗにおける領域Ｄ内の全座標に関する主情報色階調Ｍｃの平均値
本例では、この５つのパラメータを計算しているが、期間Ｔｗにおける領域Ｄ内の全座標に関する計算と、重畳領域を検出するためのパラメータが定義されれば、重畳領域検出のために他の値を計算することも可能である。
【０１００】
ステップ６０９にて、ステップ６０８にて計算した４つのパラメータAve（Ｓｃ）、Dist（Ｓｃ）、Ave（Ｔｃ）及びDist（Ｔｃ）が、領域検出パラメータ部２２０Ａで定義されている条件（図１３）を満足するか否かを判断する。満足する場合はステップ６１０に進み、満足しない場合はステップ６１５に進む。
【０１０１】
ステップ６１０にて、平均色階調の処理を開始する。ステップ６１１にて、ステップ６０８にて計算した期間Ｔｗにおける領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ６０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）と、を比較する。主情報と付加情報の平均色階調を比較しているのは、第１の例と同様に、画像全体の色の特徴を知り、効果的な付加情報の配置を行うためであり、色の特徴が把握できれば方法はこの限りではない。
【０１０２】
両者の差の値が、付加情報重畳パラメータ部２２０Ｂで定義されている重畳可能平均色階調差の条件（図１４）を満足するか否かを判断する。満足する場合には、ステップ６１４に進み、満足しない場合にはステップ６１２に進む。ステップ６１２にて、変色に関して未計算のものがあるか否かを判定する。変色に関して未計算のものがある場合には、ステップ６１３に進み、変色に関して未計算のものがない場合には、ステップ６１５に進む。
【０１０３】
ステップ６１３にて、先ず、主情報及び付加情報を、付加情報重畳パラメータ部２２０Ｂで定義されている付加情報変色階調及び主情報変色階調の条件（図１４）の範囲にて変色する。次に、ステップ６０８にて計算した領域Ｄ内の主情報平均色階調Ａｖｅ（Ｍｃ）と、ステップ６０２にて計算した付加情報平均色階調Ａｖｅ（Ａｃ）を、付加情報重畳パラメータ部２２０Ｂで定義されている重畳可能平均色階調差の条件（図１４）を満足するように、再計算し、ステップ６１０に戻り、平均色階調処理を再度行う。
【０１０４】
ステップ６１４にて、開始時間Ｔと期間Ｔｗ、期間Ｔｗにおける領域Ｄを重畳可能領域として、中心座標、領域Ｄにおける付加情報の変形量、主情報及び付加情報の変色量、主情報と付加情報の階調差等を登録し、それを重畳判断部２１６に送信する。
【０１０５】
ステップ６１５にて、領域Ｄの形状に関して未計算のものが存在するか否かを判定する。即ち、付加情報重畳パラメータ部２２０Ｂの付加情報変形量に基づいて、領域Ｄを、これ以上変形させることができないか否かを判断する。未計算のものが存在する場合、即ち、領域Ｄを変形できる場合は、ステップ６１６にて、領域Ｄの形状を変更し、ステップ６０５に戻り、変更後の新しい領域Ｄに関する処理を行う。
【０１０６】
未計算のものが存在しない場合、即ち、領域Ｄをこれ以上変形できない場合は、ステップ６１７にて、重畳可能領域の全座標に関して処理を行ったかを判断する。処理が終了している場合にはステップ６１９に進み、処理が終了していない場合にはステップ６１８に進み、未計算の座標を中心座標（Ｘ，Ｙ）とし、ステップ６０３に戻り、この中心座標（Ｘ，Ｙ）に関する処理を行う。
【０１０７】
ステップ６１９にて、検出が必要な時間に関して処理が終了しているかを判断する。処理が終了していれば、ステップ６２１に進み、検出処理を終了する。処理が終了していなければ、ステップ６２０に進み、開始時間Ｔを次の時間に変更し、ステップ６０３に戻り、座標、時間処理から再計算を行う。
【０１０８】
図１７を参照して主情報が主情報蓄積部２０５に蓄積されたデータである場合の重畳判断部１１６における重畳領域の決定の処理を説明する。ステップ７０１にて、処理を開始し、ステップ７０２にて、重畳領域決定に使用する順位を求めるためのソート処理を開始する。先ず、ステップ７０３にて、重畳領域検出部１１５からの現在時間Ｔにおける重畳領域候補が存在するか否かを判定する。重畳領域候補が存在しない場合にはステップ７１２に進み、重畳領域候補が存在する場合にはステップ７０４に進む。
【０１０９】
ステップ７０４にて、表示期間が保証された付加情報を除去し、それを表示最優先の扱いとする。上述のように、表示期間を保証する例としては、（ａ）付加情報が動画像であって、再生途中であるもの、（ｂ）付加情報は静止画像であるが、所定の重畳領域において所定の表示期間が保証され、その期間が経過していないもの、が挙げられる。
【０１１０】
次に、ステップ７０５にて、全付加情報に関する重畳領域候補を、付加情報重畳パラメータ部２２０Ｂの重畳領域優先順位（図１４）及び付加情報管理パラメータ部２２０Ｃのパラメータ値に基づいて、ソートする。それによってソート後の順位が決まる。本例では、主情報の属性により重畳領域優先順位が異なるため、主情報の状態に応じて条件を変化させる。
ステップ７０６にて、各付加情報の重畳領域候補より重畳位置、即ち、重畳領域を決定する処理を開始する。以下の処理は、図９の第１の例と同様である。
【０１１１】
図１８を参照してＢＳデジタルテレビジョン放送の番組情報の概念を説明する。ＢＳデジタルテレビジョン放送の番組は、ＥＩＴ（Event Information Table）、ＰＭＴ（Program Map Table）及び番組データを含む。ＥＩＴは、主情報である番組に関する次の記述（属性）を含む。
（１）コンポーネント内容：映像、音声の区別
（２）コンポーネント種別：映像、音声の種別の記載
（２）大分類：番組の大分類を示す。例えば、ニュース、スポーツ、情報、ドラマ、映画等である。
（３）中分類：番組の大分類からさらに細かい分類を示す。例えば、「スポーツ」の場合、野球、サッカー、ゴルフ等である。
（４）イベント：番組に１対１対応したID
ＰＭＴは、付加情報である緊急情報に関する次の記述（属性）を含む。
（１）サービス種別：緊急放送を流すチャンネルID
（２）開始終了フラグ：緊急情報の放送有無を示す。
（３）信号種別：第１種（地震）、第２種（津波）の種別を示す。（無線局運用規則１３８条規定）
（４）地域符号：緊急情報対象の地域を示す。（無線局運用規則１３８条規定）
【０１１２】
図１８のＢＳデジタルテレビジョン放送では、付加情報として地震、津波等の緊急情報を想定しているが、本発明によると、緊急情報ばかりでなく、ＣＭなどの様々な種類の情報が適用可能である。
【０１１３】
以上、本発明の例を説明したが本発明は上述の例に限定されるものではなく、特許請求の範囲に記載された発明の範囲にて様々な変形が可能であることは当業者に理解されよう。
【０１１４】
【発明の効果】
本発明によると、主情報中の比較的情報量の少ない部分に付加情報を重畳するから、主情報の視聴を妨げない効果がある。
本発明によると、主情報の画像において付加情報を重畳する領域を自動的に検出するから、付加情報提供者は、主情報の内容に応じて重畳位置及び時間を予め考える必要がない効果がある。
【０１１５】
本発明によると、付加情報を重畳する際に、主情報と付加情報の少なくとも１つの画素情報を使用して、付加情報の重畳を行うため、視覚的な効果の高い重畳が可能となる効果がある。
【０１１６】
本発明によると、主情報の画像中に付加情報を重畳する場合の条件を、視聴者が入力手段より入力することができるため、視聴者の意図に応じた付加情報の重畳が可能となる効果がある。
本発明によると、主情報に付加情報を重畳する際に、主情報や付加情報を加工するから、より効率良い付加情報の重畳が可能となる効果がある。
【０１１７】
本発明によると、蓄積した主情報の任意時間、任意座標の画素情報を使用することにより、付加情報を重畳する領域をいつでも検出することが可能となる効果がある。また、画素の差異を利用する場合も、任意時間における隣接画素の差異だけではなく、任意時間からの未来の座標との差異を利用することも可能となる効果がある。
【０１１８】
本発明によると、蓄積した主情報の全時間の情報を使用することにより、付加情報の重畳に使用する領域の状態がどのくらいの期間継続するかという情報も得ることができる。それにより領域に関して重畳期間を保障することが可能となる効果がある。
【０１１９】
本発明によると、重畳期間が保障された付加情報を重畳する領域が検出できることにより、付加情報に関して動画像を重畳することが可能となる効果がある。
本発明によると、主情報、付加情報の属性を抽出し、それを付加情報の重畳に使用することにより、より柔軟な重畳が可能となる効果がある。
【０１２０】
本発明によると、付加情報を重畳した結果を記録することにより、これまでに表示された時間や位置などに応じて、付加情報の重畳を変化させることが可能になる効果がある。
本発明によると、付加情報を蓄積することにより、１回蓄積しておけば、いつでも主情報上に重畳することが可能になる効果がある。
【０１２１】
本発明によると、付加情報を重畳した記録を使用して、蓄積された付加情報を自動的に管理することにより、使用者が蓄積された付加情報を削除する煩わしさを解消することが可能になる効果がある。
【図面の簡単な説明】
【図１】本発明によるデジタルテレビジョン放送受信機において、主情報に付加情報を重畳して表示する方法の概念を説明するための説明図である。
【図２】本発明によるデジタルテレビジョン放送受信機の第１の例の構成を示す図である。
【図３】本発明によるデジタルテレビジョン放送受信機の第１の例の空間色変化量解析部における空間色変化量Ｓｃ（Ｘ，Ｙ，Ｔ）の計算例を説明するための説明図である。
【図４】本発明によるデジタルテレビジョン放送受信機の第１の例の時間色変化量解析部における時間色変化量Ｔｃ（Ｘ，Ｙ，Ｔ）の計算例を説明するための説明図である。
【図５】本発明によるデジタルテレビジョン放送受信機の第１の例の領域検出パラメータ部に記録されたパラメータを説明するための説明図である。
【図６】本発明によるデジタルテレビジョン放送受信機の第１の例の付加情報重畳パラメータ部に記録されたパラメータを説明するための説明図である。
【図７】本発明によるデジタルテレビジョン放送受信機の第１の例における付加情報重畳用の領域Ｄの概念を説明するための説明図である。
【図８】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳領域検出部における処理を説明するための流れ図である。
【図９】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳判断部における処理を説明するための流れ図である。
【図１０】本発明によるデジタルテレビジョン放送受信機の第１の例の重畳判断部における処理に使用する重畳領域候補の例を示す図である。
【図１１】図１０の重畳領域候補の例を図６の重畳領域優先順位でソートした結果を示す図である。
【図１２】本発明によるデジタルテレビジョン放送受信機の第２の例の構成を示す図である。
【図１３】本発明によるデジタルテレビジョン放送受信機の第２の例の領域抽出パラメータ部に記録されたパラメータを説明するための説明図である。
【図１４】本発明によるデジタルテレビジョン放送受信機の第２の例の付加情報重畳パラメータ部に記録されたパラメータを説明するための説明図である。
【図１５】本発明によるデジタルテレビジョン放送受信機の第２の例の蓄積管理パラメータ部に記録されたパラメータを説明するための説明図である。
【図１６】本発明によるデジタルテレビジョン放送受信機の第２の例において、主情報が蓄積データである場合の重畳領域部の処理を説明するための流れ図である。
【図１７】本発明によるデジタルテレビジョン放送受信機の第２の例において、主情報が蓄積データである場合の重畳判断部の処理を説明するための流れ図である。
【図１８】ＢＳデジタルテレビジョン放送の番組情報の概念を説明するための説明図である。
【図１９】従来のデジタルテレビジョン放送受信機の構成例を示す図である。
【図２０】従来のデジタルテレビジョン放送受信機において、主情報に付加情報を重畳して表示する方法の概念を説明するための説明図である。
【符号の説明】
１０１…受信部、１０２…情報分離部、１１０…主情報再生部、１１１…空間色変化量解析部、１１２…時間色変化量解析部、１１３…主情報加工部、１１４…付加情報再生部、１１５…重畳領域検出部、１１６…重畳判断部、１１７…付加情報加工部、１１８…重畳処理部、１２０…内部メモリ、１２１…ユーザ入力部、２０１…受信部、２０２…情報分離部、２０３…主情報入力部、２０４…主情報属性抽出部、２０５…主情報蓄積部、２０６…付加情報入力部、２０７…付加情報属性抽出部、２０８…付加情報蓄積部、２１０…主情報再生部、２１１…空間色変化量解析部、２１２…時間色変化量解析部、２１３…主情報加工部、２１４…付加情報再生部、２１５…重畳領域検出部、２１６…重畳判断部、２１７…付加情報加工部、２１８…重畳処理部、２１９…重畳記録管理部、２２０…内部メモリ、２２１…ユーザ入力部
Claims (16)
- テレビジョン放送局からの放送信号を主情報と付加情報に分離する情報分離手段と、上記主情報の画素情報から、画素の色の空間的変化を表す空間的色変化量を計算する空間色変化量解析手段と、上記主情報の画素情報から、画素の色の時間的変化を表す時間的色変化量を計算する時間色変化量解析手段と、主情報の画像中に付加情報の画像を重畳して表示するための重畳領域候補を検出する重畳領域検出手段と、該重畳領域検出手段によって検出された重畳領域候補より付加情報の画像を重畳して表示する位置を決定する重畳判断手段と、上記主情報に上記付加情報を重畳しそれを放送番組データとして出力する重畳処理手段と、を有し、
上記重畳領域検出手段は上記空間色変化量解析手段から得られた空間的色変化量が小さい領域及び上記時間色変化量解析手段から得られた時間的色変化量が小さい領域を選択し、更に、該選択した領域より、更に、上記主情報の平均色階調と付加情報の平均色階調の差が所定の値より大きい領域を上記重畳領域候補として選択することを特徴とするテレビジョン放送受信機。 - 請求項１のテレビジョン放送受信機において、更に、上記情報分離手段によって分離された主情報を蓄積する主情報蓄積手段を有し、上記重畳領域検出手段は、上記主情報蓄積手段に蓄積された上記主情報の画素情報を利用して上記重畳可能領域を検出することを特徴とするテレビジョン放送受信機。
- 請求項１のテレビジョン放送受信機において、更に、上記情報分離手段によって分離された付加情報を蓄積する付加情報蓄積手段を有し、上記重畳領域検出手段は、上記付加情報蓄積手段に蓄積された上記付加情報の画素情報を利用して上記重畳可能領域を検出することを特徴とするテレビジョン放送受信機。
- 請求項１のテレビジョン放送受信機において、上記空間色変化量解析手段は、上記主情報の画素情報から、所定の時刻における隣接する画素間の色の差より空間的色変化量を計算することを特徴とするテレビジョン放送受信機。
- 請求項１のテレビジョン放送受信機において、上記時間色変化量解析手段は、上記主情報の画素情報から、所定の画素における所定の時刻の色と過去の色の差から時間的色変化量を計算することを特徴とするテレビジョン放送受信機。
- 請求項２のテレビジョン放送受信機において、上記時間色変化量解析手段は、上記主情報蓄積手段に蓄積された主情報の画素情報から、所定の画素における所定の時刻の色と未来の色の差から時間的色変化量を計算することを特徴とするテレビジョン放送受信機。
- 請求項１のテレビジョン放送受信機において、上記主情報の画像に上記付加情報の画像を重畳して表示する条件を視聴者が入力するためのユーザ入力手段を有することを特徴とするテレビジョン放送受信機。
- 請求項１又は２のテレビジョン放送受信機において、条件にしたがって上記主情報を加工する主情報加工手段を有し、上記重畳処理手段は、上記主情報加工手段によって加工された主情報に付加情報を重畳して出力することを特徴とするテレビジョン放送受信機。
- 請求項１又は３のテレビジョン放送受信機において、条件にしたがって上記付加情報を加工する付加情報加工手段を有し、上記重畳処理手段は、上記主情報に上記付加情報加工手段によって加工された付加情報を重畳して出力することを特徴とするテレビジョン放送受信機。
- 請求項１のテレビジョン放送受信機において、上記重畳領域判断手段は、付加情報に対する重畳領域候補が複数あるとき、所定の優先順位に従って、上記重畳領域を決定することを特徴とするテレビジョン放送受信機。
- 請求項１又は２のテレビジョン放送受信機において、上記重畳領域検出手段は、所定の表示期間において主情報に重畳して表示することが保証された付加情報に対しては優先的に重畳領域候補を選択することを特徴するテレビジョン放送受信機。
- 請求項１１のテレビジョン放送受信機において、上記所定の表示期間において主情報に重畳して表示することが保証された付加情報は動画情報であることを特徴するテレビジョン放送受信機。
- 請求項１、２又は３のテレビジョン放送受信機において、上記主情報より主情報の属性を抽出する主情報属性抽出手段と、上記付加情報より付加情報の属性を抽出する付加情報抽出手段の少なくとも１つを有し、上記重畳領域検出手段は、上記主情報属性抽出手段によって抽出された主情報の属性及び上記付加情報属性抽出手段によって抽出された付加情報の属性の少なくとも１つを使用して重畳領域候補を選択することを特徴とするテレビジョン放送受信機。
- 請求項１又は３のテレビジョン放送受信機において、付加情報の重畳に関する記録を管理する重畳記録管理手段を有し、上記重畳領域検出手段は、上記重畳記録管理手段によって管理された付加情報の重畳に関する記録を利用して、重畳領域候補を選択することを特徴とするテレビジョン放送受信機。
- 請求項１４のテレビジョン放送受信機において、上記重畳記録管理手段は、管理している付加情報の重畳に関する記録を削除することを特徴とするテレビジョン放送受信機。
- 請求項３のテレビジョン放送受信機において、付加情報の重畳に関する記録を管理する重畳記録管理手段を有し、該重畳記録管理手段は、蓄積されている付加情報と管理している付加情報の重畳に関する記録を削除することを特徴とするテレビジョン放送受信機。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003066804A JP4185790B2 (ja) | 2003-03-12 | 2003-03-12 | テレビジョン放送受信機 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003066804A JP4185790B2 (ja) | 2003-03-12 | 2003-03-12 | テレビジョン放送受信機 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004282137A JP2004282137A (ja) | 2004-10-07 |
| JP4185790B2 true JP4185790B2 (ja) | 2008-11-26 |
Family
ID=33284598
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003066804A Expired - Fee Related JP4185790B2 (ja) | 2003-03-12 | 2003-03-12 | テレビジョン放送受信機 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4185790B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109983532A (zh) * | 2016-11-29 | 2019-07-05 | 夏普株式会社 | 显示控制装置、头戴式显示器、显示控制装置的控制方法以及控制程序 |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4782731B2 (ja) * | 2004-11-02 | 2011-09-28 | パナソニック株式会社 | 表示装置およびその方法 |
| CN102752639B (zh) * | 2005-07-18 | 2015-08-05 | 汤姆森许可贸易公司 | 使用元数据来处理多个视频流的方法和设备 |
| JP2009065432A (ja) * | 2007-09-06 | 2009-03-26 | Mitsubishi Electric Corp | 画像再生装置 |
| US20110200092A1 (en) * | 2007-11-12 | 2011-08-18 | Yoshio Todoroki | Digitial broadcast receiver |
| JP5266035B2 (ja) * | 2008-12-17 | 2013-08-21 | 株式会社アステム | 手話映像表示装置、手話映像表示方法、及びプログラム |
| JP5525201B2 (ja) * | 2009-07-28 | 2014-06-18 | パナソニック株式会社 | 画像合成装置、画像符号化装置、コンピュータプログラム、記録媒体 |
| JP5591237B2 (ja) * | 2010-03-25 | 2014-09-17 | パナソニック株式会社 | 割り込み表示システム、コンテンツ情報提供サーバ装置およびクライアント装置 |
| JP5753569B2 (ja) * | 2013-11-21 | 2015-07-22 | オリンパス株式会社 | 画像再生装置及び画像再生装置の再生方法 |
| WO2017056230A1 (ja) * | 2015-09-30 | 2017-04-06 | 楽天株式会社 | 情報処理装置、情報処理方法および情報処理装置用プログラム |
| JP7076936B2 (ja) * | 2016-01-19 | 2022-05-30 | ヤフー株式会社 | 生成装置、生成方法及び生成プログラム |
-
2003
- 2003-03-12 JP JP2003066804A patent/JP4185790B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109983532A (zh) * | 2016-11-29 | 2019-07-05 | 夏普株式会社 | 显示控制装置、头戴式显示器、显示控制装置的控制方法以及控制程序 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004282137A (ja) | 2004-10-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8620037B2 (en) | Human image retrieval system | |
| JP4727117B2 (ja) | 知的特徴選択およびパンズーム制御 | |
| JP5465620B2 (ja) | 映像コンテンツに重畳する付加情報の領域を決定する映像出力装置、プログラム及び方法 | |
| US6704931B1 (en) | Method and apparatus for displaying television program recommendations | |
| JP4185790B2 (ja) | テレビジョン放送受信機 | |
| CN103380452B (zh) | 显示控制装置以及显示控制方法 | |
| JP2005509962A (ja) | 放送イベントにおけるロゴの視聴者への公表についての識別と評価 | |
| US20070291134A1 (en) | Image editing method and apparatus | |
| WO2005107258A1 (ja) | 番組選択システム | |
| JP2006087098A (ja) | 受信器で視聴覚的記録を見る方法及びそのような記録を見るための受信器 | |
| EP1482731A2 (en) | Broadcast program contents menu creation apparatus and method | |
| JP2008217428A (ja) | 画像検索プログラム、方法及び装置 | |
| US20110206352A1 (en) | Image editing apparatus and method for controlling the same, and storage medium storing program | |
| KR20140103812A (ko) | 직접 반응 광고 검출 및 분류 시스템 및 방법 | |
| JP2003209756A (ja) | デジタルテレビのチャンネル選択方法 | |
| US8022988B2 (en) | Display apparatus and computer program | |
| KR101502984B1 (ko) | 콘텐츠 내 객체 정보 및 객체 기반의 응용 콘텐츠를 제공하는 방법 및 장치 | |
| KR20180025754A (ko) | 디스플레이장치 및 그 제어방법 | |
| JP2007325310A (ja) | 番組情報表示装置、番組情報表示方法 | |
| US7398003B2 (en) | Index data generation apparatus, index data generation method, index data generation program and recording medium on which the program is recorded | |
| CN114339371A (zh) | 视频显示方法、装置、设备及存储介质 | |
| JP4009959B2 (ja) | テレビ受信機 | |
| JP2012222585A (ja) | コンテンツの推薦装置 | |
| US20210074044A1 (en) | Method, server, and recording medium for creating composite image | |
| JP5854232B2 (ja) | 映像間対応関係表示システム及び映像間対応関係表示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050810 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080521 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080527 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080725 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080902 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080908 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110912 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120912 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130912 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |