JP2011077598A - 画像信号処理装置、画像信号処理方法、プログラム、および画像信号処理システム - Google Patents

Abstract

【課題】平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることが可能な画像信号処理装置、画像信号処理方法、プログラム、および画像信号処理システムを提供する。
【解決手段】平面画像と立体画像とが混在された画像を示す画像信号と、画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、表示信号から画像信号と領域情報とを分離させる受信部と、領域情報に基づいて、領域情報に対応する画像信号における第１領域および第２領域それぞれの描画位置を制御する第１表示制御情報と、第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成する表示制御部と、画像信号と第１表示制御情報とに基づいて、第１領域と第２領域とが第１表示制御情報に応じて配置された画像を示す表示画像信号を生成する処理部とを備える画像信号処理装置が提供される。
【選択図】図９

Description

本発明は、画像処理装置、画像信号処理方法、プログラム、および画像信号処理システムに関する。

近年、立体画像を示す画像信号（右目用画像信号、左目用画像信号）を処理して立体画像を表示画面に表示させることが可能な表示装置の開発が行われている。表示装置に表示された画像を立体画像としてユーザに認識させる方式としては、例えば、パララックスバリア方式（視差バリア方式）や、レンティキュラ方式など、ユーザの視線の視差を利用してユーザに立体画像を視認させる方式が挙げられる。上記のような方式を用いることによって、偏光メガネや液晶シャッターメガネなどの外部装置を用いることなく、ユーザに立体画像を視認させることが可能となる。

このような中、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図る技術が開発されている。立体画像を表示させる位置を規定する情報に基づいて、表示画面の当該情報に対応する部分を、選択的にユーザに立体画像を視認させるための状態とさせる技術としては、例えば、特許文献１が挙げられる。

特開平９−１０２９６９号公報

平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図る従来の技術（以下、単に「従来の技術」とよぶ場合がある。）は、バリア位置情報（立体画像を表示させる位置を規定する情報に相当する。）が示す位置に対応する表示画面の部分を、選択的にユーザに立体画像を視認させるための状態とさせる。ここで、従来の技術を用いる表示装置（以下、「従来の表示装置」とよぶ場合がある。）は、外部装置から送信されたバリア位置情報、または、映像の変化に応じて生成したバリア位置情報に基づいて、表示画面における部分的な立体視の実現を図る。よって、従来の表示装置は、平面画像を表示させる部分を立体画像を視認させるための状態とはさせないので、平面画像をモアレのない状態でユーザに視認させることができ、画質の向上を図ることができる可能性はある。

ここで、従来の表示装置が処理に用いるバリア位置情報は、表示画面に表示させる画像を示す画像信号とは別に外部装置から送信される情報、または、画像信号に基づいて従来の表示装置が生成した情報である。よって、従来の技術を用いて表示画面の部分を選択的にユーザに立体画像を視認させるための状態とさせるためには、バリア位置情報と、画像信号とを同期させる必要がある。

しかしながら、従来の技術では、上記同期をとるための仕組みが何ら設けられていない。よって、例えばバリア位置情報と画像信号とのいずれか一方の処理に遅延が生じた場合には、従来の表示装置は、平面画像を表示する部分をユーザに立体画像を視認させるための状態とする恐れがある。また、上記のように平面画像を表示する部分をユーザに立体画像を視認させるための状態とした場合には、例えば解像度の低下など画質の低下に繋がる事態が生じることとなる。

また、従来の技術では、例えば、記憶媒体に記憶されたコンテンツデータが示す画像を表示画面に表示させる場合には、当該コンテンツデータに基づく画像信号とバリア位置情報との同期をとることができない。よって、上記の場合には、バリア位置情報と画像信号とのいずれか一方の処理に遅延が生じた場合と同様に、解像度の低下など画質の低下に繋がる事態が生じてしまう。

したがって、従来の技術を用いたとしても、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化は、望むべくもない。

本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることが可能な、新規かつ改良された画像信号処理装置、画像信号処理方法、プログラム、および画像信号処理システムを提供することにある。

上記目的を達成するために、本発明の第１の観点によれば、平面画像と立体画像とが混在された画像を示す画像信号と、上記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、上記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した上記表示信号から上記画像信号と上記領域情報とを分離させる受信部と、上記受信部が分離させた領域情報に基づいて、上記領域情報に対応する画像信号における上記第１領域および上記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における上記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成する表示制御部と、上記受信部が分離させた画像信号と、上記表示制御部が生成した上記第１表示制御情報とに基づいて、上記第１領域と上記第２領域とが上記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成する処理部とを備える画像信号処理装置が提供される。

かかる構成により、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

また、上記領域情報には、処理する順序が規定された情報と、先に処理された領域と重畳する場合における表示処理が規定された情報とが含まれ、上記表示制御部は、上記領域情報に基づいて領域ごとに表示処理が規定された第１表示制御情報を生成し、上記処理部は、領域ごとに上記第１表示制御情報に基づく表示処理が行われた画像を示す表示画像信号を生成してもよい。

また、上記表示画像信号に応じた画像を表示画面を表示し、上記第２表示制御情報に基づいて上記表示画面における上記第２領域の描画位置に対応する領域の画像を選択的に立体表示させる表示部をさらに備えてもよい。

上記目的を達成するために、本発明の第２の観点によれば、平面画像と立体画像とが混在された画像を示す画像信号と、上記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、上記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した上記表示信号から上記画像信号と上記領域情報とを分離させるステップと、上記分離させるステップにおいて分離させた領域情報に基づいて、上記領域情報に対応する画像信号における上記第１領域および上記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における上記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成するステップと、上記分離させるステップにおいて分離させた画像信号と、上記生成するステップにおいて生成した上記第１表示制御情報とに基づいて、上記第１領域と上記第２領域とが上記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成するステップとを有する画像信号処理方法が提供される。

かかる方法を用いることにより、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

上記目的を達成するために、本発明の第３の観点によれば、平面画像と立体画像とが混在された画像を示す画像信号と、上記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、上記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した上記表示信号から上記画像信号と上記領域情報とを分離させるステップ、上記分離させるステップにおいて分離させた領域情報に基づいて、上記領域情報に対応する画像信号における上記第１領域および上記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における上記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成するステップ、上記分離させるステップにおいて分離させた画像信号と、上記生成するステップにおいて生成した上記第１表示制御情報とに基づいて、上記第１領域と上記第２領域とが上記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成するステップをコンピュータに実行させるためのプログラムが提供される。

かかるプログラムを用いることにより、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

上記目的を達成するために、本発明の第４の観点によれば、平面画像と立体画像とが混在された画像を示す画像信号と、上記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、上記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を送信する送信装置と、上記送信装置から送信された上記表示信号を受信し、受信した上記表示信号から上記画像信号と上記領域情報とを分離させる受信部と、上記受信部が分離させた領域情報に基づいて、上記領域情報に対応する画像信号における上記第１領域および上記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における上記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成する表示制御部と、上記受信部が分離させた画像信号と、上記表示制御部が生成した上記第１表示制御情報とに基づいて、上記第１領域と上記第２領域とが上記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成する処理部とを備える画像信号処理装置とを有する画像信号処理システムが提供される。

かかる構成により、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることが可能な画像信号処理システムが提供される。

本発明によれば、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

本発明の実施形態に係る画像信号処理装置が表示画面に表示させる画像の一例を示す説明図である。 本発明の実施形態に係るユーザに対して立体画像を選択的に視認させるための構成の一例を示す説明図である。 本発明の実施形態に係るユーザに対して立体画像を選択的に視認させるための構成の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が表示画面に表示させる画像の他の例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が表示画面に表示させる画像の他の例を示す説明図である。 本発明の実施形態に係る領域情報の一例を示す説明図である。 本発明の実施形態に係る領域情報の他の例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が生成する表示画像信号が示す画像の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が生成する表示画像信号が示す画像の一例を示す説明図である。 本発明の実施形態に係る画像信号処理システムの概要を説明するための説明図である。 本発明の実施形態に係る画像信号処理装置の構成の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が備える受信部の構成の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が生成する第１表示制御情報の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が備える処理部の構成の一例を示す説明図である。 本発明の実施形態に係る画像信号処理装置が備える処理部の構成の他の例を示す説明図である。 本発明の実施形態に係る送信装置のハードウェア構成の一例を示す説明図である。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、以下では、下記に示す順序で説明を行う。
１．本発明の実施形態に係るアプローチ
２．本発明の実施形態に係る画像信号処理システム
３．本発明の実施形態に係るプログラム

（本発明の実施形態に係るアプローチ）
本発明の実施形態に係る画像信号処理システム（以下、「画像信号処理システム１０００」とよぶ場合がある。）を構成する各装置の構成について説明する前に、本発明の実施形態に係る高画質化アプローチについて説明する。

［高画質化アプローチの概要］
上述したように、従来の技術を用いる場合には、表示画面に表示させる画像を示す画像信号と、立体画像を表示させる位置を規定する情報（従来の技術におけるバリア位置情報）との同期をとることが困難であることから、解像度の低下など画質の低下に繋がる事態が生じる恐れがある。

そこで、画像信号処理システム１０００では、平面画像と立体画像とが混在された画像を示す画像信号と、画像信号における所定の単位ごとの領域情報とが含まれる表示信号を、本発明の実施形態に係る画像信号処理装置（以下、「画像信号処理装置１００」とよぶ場合がある。）が処理する。

ここで、本発明の実施形態に係る表示信号としては、例えば、ビットストリーム信号などのデジタル信号が挙げられる。上記の場合、本発明の実施形態に係る表示信号は、ビットストリーム内に、画像信号と領域情報とが含まれる信号となる。また、本発明の実施形態に係る画像信号が示す画像は、動画像（平面画像／立体画像）であってもよいし、静止画像（平面画像／立体画像）であってもよい。なお、表示信号には、例えば画像信号が示す画像に対応する音声に係る音声信号が含まれていてもよく、画像信号処理装置１００は、当該音声信号を処理することもできる。以下では、画像信号処理装置１００における上記音声信号の処理に係る処理については、説明を省略する。

また、画像信号処理装置１００は、例えば、画像信号処理システム１０００を構成する本発明の実施形態に係る送信装置（以下、「送信装置２００」とよぶ場合がある。）から送信された表示信号を処理するが、上記に限られない。例えば、画像信号処理装置１００は、記憶部（後述する）に記憶された、送信装置２００から送信された表示信号に対応するコンテンツデータを処理することもできる。

また、本発明の実施形態に係る領域情報とは、画像信号が示す画像を表示画面に表示させた場合における、平面画像を表示させる第１領域と、立体画像を表示させる第２領域とを規定する情報である。本発明の実施形態に係る領域情報の具体例については、後述する。

また、本発明の実施形態に係る画像信号における所定の単位とは、例えば、画像信号における時間的に完結した単位である。本発明の実施形態に係る画像信号における所定の単位としては、例えば、フレームごと、インターレース方式における１画像単位、プログレッシブ方式における１画像単位などが挙げられるが、上記に限られない。例えば、本発明の実施形態に係る画像信号における所定の単位は、複数のフレームごとであってもよい。

本発明の実施形態に係る領域情報は、表示信号において、上記画像信号における所定の単位ごとに含まれていてもよいし、または、画像信号が示す画像の内容に変化が生じた場合に選択的に含まれていてもよい。ここで、表示信号の生成は、例えば、送信装置２００において行われる。

高画質化アプローチの概要についてより具体的に説明すると、画像信号処理装置１００は、処理対象の表示信号から画像信号と領域情報とを分離させ、領域情報に基づいて第１表示制御情報と第２表示制御情報とを生成する。そして、画像信号処理装置１００は、第１表示制御情報に基づいて、第１領域と第２領域とが第１表示制御情報に応じて配置された画像を示す表示画像信号を生成し、第２表示制御情報に基づいて、表示画面における第２領域の描画位置に対応する領域の画像を選択的に立体表示させる。

ここで、本発明の実施形態に係る第１表示制御情報とは、領域情報に対応する画像信号（画像信号における所定の単位に対応する画像信号）における第１領域および第２領域それぞれの描画位置を制御する情報（データ）である。第１表示制御情報としては、例えば、第１領域、第２領域それぞれについての、表示画面の水平方向の領域開始座標、水平方向の領域終了座標、垂直方向の領域開始座標、および垂直方向の領域終了座標を規定する情報が挙げられる。第１表示制御情報の一例については、後述する。

画像信号処理装置１００は、上記のような第１表示制御情報によって、第１領域の位置と、第２領域の位置とをそれぞれ特定することができる。

また、本発明の実施形態に係る第２表示制御情報とは、表示画面における第２領域の描画位置に対応する領域の画像を選択的に立体表示させるため情報である。第２表示制御情報としては、例えば、表示デバイスにおいて電圧を印加する部分を指定する情報などが挙げられるが、上記に限られない。ここで、上記表示デバイスにおいて電圧を印加する部分を指定する情報としては、例えば、電圧を印加する電極のアドレスを直接的／間接的に指定する情報が挙げられる。

図１は、本発明の実施形態に係る画像信号処理装置１００が表示画面に表示させる画像の一例を示す説明図であり、画像信号処理装置１００が生成した表示画像信号に応じて表示画面に表示される画像の一例を示している。ここで、図１に示す“ＲｅｇｉｏｎＡ”、“ＲｅｇｉｏｎＢ”は、第１領域に対応する領域（すなわち平面画像が表示される領域）を示しており、図１に示す“ＲｅｇｉｏｎＣ”は、第２領域に対応する領域（すなわち立体画像が表示される領域）を示している。また、図１に示す“Ｌ”は、左目用画像信号に対応する画像を示しており、図１に示す“Ｒ”は、右目用画像信号に対応する画像を示している。

図２Ａ、図２Ｂは、本発明の実施形態に係るユーザに対して立体画像を選択的に視認させるための構成の一例を示す説明図である。ここで、図２Ａは、画像信号処理装置１００が生成した第２表示制御情報に基づく電圧がかけられる前の、液晶デバイス（表示デバイスの一例）が備える液晶の状態を示している。また、図２Ｂは、画像信号処理装置１００が生成した第２表示制御情報に基づく電圧がかけられた後の、液晶デバイスが備える液晶の状態を示しており、当該電圧に応じてかまぼこ型レンズが形成された状態を示している。

図２Ａ、図２Ｂに示すように、本発明の実施形態に係るユーザに対して立体画像を選択的に視認させるための構成としては、例えば、液晶表示デバイスに選択的に電圧をかけることにより液晶の状態を変化させ、選択的にかまぼこ型レンズを形成する構成が挙げられる。なお、本発明の実施形態に係るユーザに対して立体画像を選択的に視認させるための構成は、上記に限られない。例えば、本発明の実施形態では、画像信号処理装置１００が生成した第２表示制御情報に基づいて視差障壁（パララックスバリア）を選択的に制御する構成であってもよい。以下では、画像信号処理装置１００が生成する第２表示制御情報に基づいて、選択的にかまぼこ型レンズが形成される構成を例に挙げて説明する。

画像信号処理装置１００は、領域情報に基づいて生成した第１表示制御情報に基づいて、図１に示すように平面画像と立体画像とが混在した画像を示す表示画像信号を生成し、表示画像信号を表示画面を構成する表示デバイスに送信する（または、伝達する）。また、画像信号処理装置１００は、領域情報に基づいて、表示画面における第２領域に対応する領域（例えば図１に示すＲｅｇｉｏｎＣ）の液晶の状態を選択的に図２Ｂの状態とさせる第２表示制御情報を生成し、第２表示制御情報を上記表示デバイスに送信する（または、伝達する）。

ここで、画像信号処理装置１００は、画像信号と領域情報とが含まれる表示信号から当該画像信号と領域情報とを分離させて処理を行う。そのため、例えば、画像信号に設定されたタイムスタンプの情報などを利用することによって、画像信号処理装置１００は、画像信号と領域情報とを対応付ける特段の仕組みを設けなくても画像信号と領域情報との同期を図ることが可能である。また、画像信号処理装置１００は、記憶媒体に記憶された表示信号に対応するコンテンツデータが示す画像を表示画面に表示させる場合においても、上記と同様に、画像信号と領域情報との同期を図ることができる。

よって、画像信号処理装置１００を有する画像信号処理システム１０００では、画像信号と、第１領域、第２領域をそれぞれ規定する領域情報との同期を図ることができるので、従来の技術を用いる場合のように解像度の低下など画質の低下に繋がる事態が生じる恐れはない。また、画像信号処理装置１００を有する画像信号処理システム１０００では、かまぼこ型レンズが形成された部分に立体画像を表示させるので、平面画像の解像度が低下する事態も生じない。したがって、画像信号処理装置１００は、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

なお、画像信号処理装置１００が生成する表示画像信号が示す平面画像と立体画像とが混在した画像は、図１に示す例に限られない。図３、図４は、本発明の実施形態に係る画像信号処理装置が表示画面に表示させる画像の他の例を示す説明図である。図３に示すように、画像信号処理装置１００は、複数の領域（図３に示すＲｅｇｉｏｎ〜ＲｅｇｉｏｎＦ）が重なり合う画像を示す表示画像信号を生成することができる。また、図４に示すように、画像信号処理装置１００は、ＥＰＧ（Electronic Program Guide）などの番組表示時におけるサムネイル画面を示す表示画像信号を生成することもできる。ここで、図４に示す“Ｔ２”は、２Ｄサムネイルを示し、図４に示す“Ｔ３”は、３Ｄサムネイルを示している。

［高画質化アプローチに係る処理の例］
次に、画像信号処理装置１００における、本発明の実施形態に係る高画質化アプローチに係る処理の一例について説明する。ここで、以下に示す本発明の実施形態に係る高画質化アプローチに係る処理の一例は、本発明の実施形態に係る画像信号処理方法の一例と捉えることができる。

上記のように、画像信号処理装置１００は、表示情報から画像信号と領域情報とを分離させ、表示情報から分離させた画像信号と領域情報とに基づいて処理を行う。

図５は、本発明の実施形態に係る領域情報の一例を示す説明図である。本発明の実施形態に係る領域情報には、例えば、領域を識別する情報（図５のＡ）と、領域の種別を示すフラグ（図５のＢ）と、他の領域と重畳する場合の処理を規定する情報（図５のＣ）と、領域の位置を規定する情報（図５のＤ）とが含まれる。

ここで、図５のＡに示す領域を識別する情報は、画像信号処理装置１００が配置する領域を一意に識別する領域のＩＤを示す。また、画像信号処理装置１００は、例えばＩＤとしての番号が小さい順に処理を行うので、図５のＡに示す領域を識別する情報は、画像信号処理装置１００が処理する順序を規定する情報と捉えることができる。

また、図５のＢに示すフラグは、図５のＡに示す領域を識別する情報により識別される領域が、第１領域（平面画像を表示する領域）であるか、または、第２領域（立体画像を表示する領域）であるかを示している。ここで、フラグとしては、例えば、“０”のとき第１領域を示し、“１”のとき第２領域を示すが、上記に限られない。以下では、図５のＢに示すフラグが“０”のとき第１領域を示し、“１”のとき第２領域を示す場合を例に挙げて説明する。

また、図５のＣに示す他の領域と重畳する場合の処理を規定する情報は、例えば図３に示すように領域が重なる場合における処理を規定する。例えば図５に示す“Ｂｌｅｎｄｉｎｇ＿Ｏｂｊｅｃｔ”は、表示画面への表示時に画素単位で重なる他の領域を指定する。また、図５に示す“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”は、上記他の領域と重なる場合における処理を規定する。

図５に示す“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”により規定される処理としては、例えば、“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”の値が“０”のとき、他の領域を上書きすることが挙げられる。また、“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”により規定される処理としては、例えば、“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”の値が“７”（最大値の一例）のとき、図５のＡに示す領域を識別する情報により識別される領域を透明な状態で重ねることが挙げられる。画像信号処理装置１００は、例えば、図５に示す“Ｂｌｅｎｄｉｎｇ＿Ｒａｔｉｏ”の値を用いることによって、図５のＡに示す領域を識別する情報により識別される領域と、他の領域とのブレンド比を一意に決定することができる。

なお、本発明の実施形態に係る他の領域と重畳する場合の処理を規定する情報により規定される処理が、図５のＡに示す領域を識別する情報により識別される領域と、他の領域とをブレンドする処理に限られないことは、言うまでもない。また、本発明の実施形態に係る他の領域と重畳する場合の処理を規定する情報は、先に処理された領域と重畳する場合における表示処理が規定された情報と捉えることができる。

また、図５のＤに示す領域の位置を規定する情報は、図５のＡに示す領域を識別する情報により識別される領域における、表示画面の水平方向の領域開始座標（図５の“Ｖｅｒｔｉｃａｌ＿Ｓｔａｒｔ＿Ｐｏｓｉｔｉｏｎ”）、水平方向の領域終了座標（図５の“Ｖｅｒｔｉｃａｌ＿Ｅｎｄ＿Ｐｏｓｉｔｉｏｎ”）、垂直方向の領域開始座標（図５の“Ｈｏｒｉｚｏｎｔａｌ＿Ｓｔａｒｔ＿Ｐｏｓｉｔｉｏｎ”）、および垂直方向の領域終了座標（図５の“Ｈｏｒｉｚｏｎｔａｌ＿Ｅｎｄ＿Ｐｏｓｉｔｉｏｎ”）を規定する。

画像信号処理装置１００は、例えば図５に示す領域情報に含まれる領域ごとの各種情報に基づいて、領域情報に含まれる領域ごとに、第１表示制御情報と、第２表示制御情報とを生成する。なお、画像信号処理装置１００は、領域情報に含まれる、領域ごとの各種情報そのものを、当該領域ごとの第１表示制御情報、第２表示制御情報とすることもできる。

画像信号処理装置１００は、例えば図５に示す領域情報に基づいて生成された第１表示制御情報と、当該領域情報に対応する画像信号とに基づいて、第１領域と第２領域とが配置された画像を示す表示画像信号を生成する。

なお、本発明の実施形態に係る領域情報は、図５に示す例に限られない。例えば、本発明の実施形態に係る領域情報は、画像信号処理装置１００における各領域（第１領域または第２領域）に対する表示制御の有効化、無効化を領域ごとに制御する情報をさらに含むこともできる。

図６は、本発明の実施形態に係る領域情報の他の例を示す説明図である。図６を参照すると、他の例に係る領域情報には、例えば、図５のＡ〜Ｄを参照して示した各情報に加え、領域に対する表示制御の有効化、無効化を領域ごとに制御する情報（図６のＥ）と、他の情報をさらに含むための予備のデータ領域（図６のＦ）とをさらに有する。ここで、図６のＥに示す“Ｒｅｇｉｏｎ＿ａｃｔｉｖｅ”は、例えば、値が“０”のとき領域に対する表示制御を無効化することを示し、値が“１”のとき領域に対する表示制御を有効化することを示すが、上記に限られない。

画像信号処理装置１００は、図５に示す領域情報を用いる場合と同様に、例えば図６に示す領域情報に含まれる領域ごとの各種情報（図６のＡ〜Ｄ）に基づいて、領域情報に含まれる領域ごとに、第１表示制御情報と、第２表示制御情報とを生成する。また、画像信号処理装置１００は、例えば図６のＥに示す情報に基づいて、各領域に対する表示制御を制御する。以下では、図６のＥに示す情報を、「第３表示制御情報」とよぶ場合がある。

また、画像信号処理装置１００は、例えば、受信した領域情報に含まれる各種情報に変化が生じるまで、処理系統を前置ホールドする。つまり、例えば、画像信号における所定の単位ごとに領域情報が含まれない場合であっても、画像信号処理装置１００は、前回受信した領域情報に基づく処理を行うことができる。

よって、上記の場合には、画像信号処理システム１０００は、送信装置２００が、例えば、画像信号における所定の単位ごとではなく、送信する画像信号が示す画像に変化が生じるごとに図６に示す領域情報を送信する場合であっても、高画質化を図ることができる。また、上記の場合、画像信号処理システム１０００では、画像信号における所定の単位ごとに領域情報を伝送する必要がないので、より効率的な領域情報の伝送を実現することができる。

画像信号処理装置１００は、例えば図５や図６に示す領域情報に基づいて生成された第１表示制御情報と、当該領域情報に対応する画像信号とに基づいて、第１領域と第２領域とが配置された画像を示す表示画像信号を生成する。なお、本発明の実施形態に係る領域情報が、図５、図６に示す例に限られないことは、言うまでもない。

図７Ａ、図７Ｂは、本発明の実施形態に係る画像信号処理装置１００が生成する表示画像信号が示す画像の一例を示す説明図である。ここで、図７Ａは、画像信号処理装置１００における表示画像信号が示す画像の生成過程を説明する説明図であり、図７Ｂは、画像信号処理装置１００が生成した図７Ａに対応する表示画像信号が示す画像の一例を示している。

図７Ａに示すように、画像信号処理装置１００は、Ｒｅｇｉｏｎ＿（Ｎ）（Ｎは、０以上の整数）それぞれについて、Ｎの値が小さい領域順に、領域が配置された画像を示す表示画像信号を生成する。その結果、画像信号処理装置１００が生成した表示画像信号が示す画像は、図７Ｂのように、平面画像と立体画像とが混在した画像となる。

画像信号処理装置１００は、例えば上記のように、表示情報から分離させた画像信号と領域情報とに基づく表示画像信号と、当該領域情報に基づく第２表示制御情報とを生成し、表示画像信号と第２表示制御情報とを表示デバイスに送信する。よって、表示画像信号と第２表示制御情報とを受信した表示デバイスは、平面画像と立体画像とが混在された画像を表示画面に表示することができ、また、立体画像を表示する領域の画像を選択的に立体表示することができる。

ここで、本発明の実施形態に係る表示デバイスは、例えば、画像信号処理装置１００が備えることができるが、上記に限られない。例えば、画像信号処理装置１００は、ＨＤＭＩ（High-Definition Multimedia Interface）などの接続インタフェースを介して、外部装置としての表示デバイスに表示画像信号と第２表示制御情報とを送信することもできる。

画像信号処理装置１００は、例えば上記のような処理を行うことによって、本発明の実施形態に係る高画質化アプローチを実現することができる。したがって、画像信号処理装置１００は、例えば上記のような処理を行うことによって、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

（本発明の実施形態に係る画像信号処理システム）
次に、上述した本発明の実施形態に係る高画質化アプローチを実現することが可能な、画像信号処理システム１０００の構成例について説明する。図８は、本発明の実施形態に係る画像信号処理システム１０００の概要を説明するための説明図である。

図８を参照すると、画像信号処理システム１０００は、送信装置２００と、画像信号処理装置１００、…とを有する。ここで、図８では、１つの画像信号処理装置１００を示しているが、画像信号処理システム１０００が有する画像信号処理装置の数は、１つに限られない。なお、画像信号処理システム１０００が有する画像信号処理装置の構成は、基本的に図８に示す画像信号処理装置１００と同様の構成をとることができるため、説明を省略する。

ここで、図８では、画像信号処理装置１００として、送信装置２００がテレビ塔などから送信させた表示信号がのせられた放送波３００を（直接的／間接的に）受信し、受信した表示信号に含まれる画像信号に基づく画像（動画像／静止画像）を表示可能なテレビ受像機を示しているが、上記に限られない。

また、放送波３００に係る表示信号の直接的な受信とは、例えば、画像信号処理装置１００が、放送波３００を受信することをいう。また、画像信号処理装置１００における放送波３００に係る表示信号の間接的な受信とは、例えば、放送波３００を受信した外部アンテナから伝達される表示信号を画像信号処理装置１００が受信することをいう。

また、送信装置２００と、画像信号処理装置１００とは、ネットワーク４００を介して（あるいは、直接的に）接続され、画像信号処理装置１００は、ネットワーク４００を介して送信装置２００から送信された表示信号を受信することもできる。

ネットワーク４００としては、例えば、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）などの有線ネットワーク、基地局を介した無線ＷＡＮ（ＷＷＡＮ；Wireless Wide Area Network）や無線ＭＡＮ（ＷＭＡＮ；Wireless Metropolitan Area Network）などの無線ネットワーク、あるいは、ＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）などの通信プロトコルを用いたインターネットなどが挙げられるが、上記に限られない。

なお、図８では、送信装置２００が、放送波３００を介した表示信号の送信と、ネットワーク４００を介した表示信号の送信との双方を行う例を示しているが、上記に限られない。本発明の実施形態に係る送信装置２００は、放送波３００を介した表示信号の送信、および／または、ネットワーク４００を介した表示信号の送信を行うことができる。

［画像信号処理装置１００］
図９は、本発明の実施形態に係る画像信号処理装置１００の構成の一例を示す説明図である。

画像信号処理装置１００は、記憶部１０２と、受信部１０４と、表示制御部１０６と、処理部１０８と、表示部１１０とを備える。

また、画像信号処理装置１００は、例えば、制御部（図示せず）や、ＲＯＭ（Read Only Memory；図示せず）、ＲＡＭ（Random Access Memory；図示せず）、画像信号処理装置１００のユーザが操作可能な操作部（図示せず）などを備えていてもよい。画像信号処理装置１００は、例えば、データの伝送路としてのバス（bus）により上記各構成要素間を接続する。

ここで、制御部（図示せず）は、例えば、ＭＰＵ（Micro Processing Unit）や、制御機能などを実現するための各種処理回路などで構成され画像信号処理装置１００全体を制御する。また、制御部（図示せず）は、例えば、表示制御部１０６および処理部１０８の役目を果たすこともできる。

ＲＯＭ（図示せず）は、制御部（図示せず）が使用するプログラムや演算パラメータなどの制御用データを記憶する。ＲＡＭ（図示せず）は、制御部（図示せず）により実行されるプログラムなどを一次記憶する。

操作部（図示せず）としては、例えば、ボタン、方向キー、ジョグダイヤルなどの回転型セレクター、あるいは、これらの組み合わせなどが挙げられるが、上記に限られない。また、画像信号処理装置１００は、画像信号処理装置１００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）と接続され、当該操作入力デバイスから送信されるユーザ操作に応じた処理を行うこともできる。

記憶部１０２は、画像信号処理装置１００が備える記憶手段である。ここで、記憶部１０２としては、例えば、ハードディスク（Hard Disk）などの磁気記録媒体や、ＥＥＰＲＯＭ（Electrically Erasable and Programmable Read Only Memory）、フラッシュメモリ（flash memory）、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＦｅＲＡＭ（Ferroelectric Random Access Memory）、ＰＲＡＭ(Phase change Random Access Memory)などの不揮発性メモリ（nonvolatile memory）が挙げられるが、上記に限られない。

記憶部１０２は、例えば、受信した表示信号に対応するコンテンツデータや、受信した表示信号に依存しないコンテンツデータ、各種アプリケーションなど様々なデータを記憶する。ここで、図９では、受信した表示信号に対応するコンテンツデータＡ１４０およびコンテンツデータＢ１４２が記憶部１０２に記憶されている例を示しているが、上記に限られない。

受信部１０４は、表示信号を受信し、表示信号から画像信号と領域情報とを分離させる。そして、受信部１０４は、分離させた画像信号と領域情報とを、対応する構成要素に伝達する。より具体的には、受信部１０４は、領域情報を表示制御部１０６へ伝達し、画像信号を処理部１０８へ伝達する。また、図９では示していないが、受信部１０４は、例えば、画像信号に係るタイムスタンプや、音声信号に係るタイムスタンプ、領域情報に係るタイプスタンプなど、各種タイムスタンプの情報を表示制御部１０６へ伝達することができる。

〔受信部１０４の構成例〕
図１０は、本発明の実施形態に係る画像信号処理装置１００が備える受信部１０４の構成の一例を示す説明図である。ここで、図１０は、画像信号処理装置１００が、放送波３００を介した表示信号を受信する機能と、ネットワーク４００を介した表示信号を受信する機能と、記憶部１０２に記憶されたコンテンツデータを処理する機能とを有する構成の一例を示している。

受信部１０４は、チューナ１２０と、デモジュレータ１２２と、インタフェース１２４と、プロトコル処理部１２６と、スイッチング部１２８と、デマルチプレクサ１３０と、デコーダ１３２とを備える。

チューナ１２０およびデモジュレータ１２２は、放送波３００を介した表示信号を受信する役目を果たす。また、インタフェース１２４およびプロトコル処理部１２６は、ネットワーク４００を介した表示信号を受信する役目を果たす。

スイッチング部１２８は、デモジュレータ１２２から伝達される表示信号、プロトコル処理部１２６から伝達される表示信号、または、記憶部１０２に記憶されたコンテンツデータに応じた信号が入力され、いずれかを選択的にデマルチプレクサ１３０に伝達する。以下では、スイッチング部１２８が表示信号をデマルチプレクサ１３０に伝達する場合を例に挙げて説明する。

ここで、スイッチング部１２８は、例えば、操作部（図示せず）から伝達されるユーザ操作に応じた操作信号に基づいて出力する表示信号等を切り替えるが、上記に限られない。

デマルチプレクサ１３０は、スイッチング部１２８から伝達される表示信号から画像信号と領域情報とを分離させ、分離させた画像信号と領域情報とをデコーダ１３２へ伝達する。ここで、デマルチプレクサ１３０は、表示信号やコンテンツデータに領域情報が含まれない場合には、領域情報をデコーダ１３２へ伝達しない。

デコーダ１３２は、デマルチプレクサ１３０から伝達される画像信号と領域情報とを復号化して、復号化された画像信号と、領域情報とをそれぞれ対応する構成要素へ伝達する。

ここで、図１０では、デコーダ１３２が、領域情報デコーダ１３２ａ、映像デコーダ１３２ｂ、静止画デコーダ１３２ｃ、サブタイトルデコーダ１３２ｄ、およびテキストデコーダ１３２ｅを有する構成を示している。

領域情報デコーダ１３２ａは、領域情報を復号化し、復号化された領域情報を表示制御部１０６へ伝達する。映像デコーダ１３２ｂは、画像信号に含まれる映像（動画像）を復号化し、復号化された映像データを処理部１０８へ伝達する。静止画デコーダ１３２ｃは、画像信号に含まれる静止画像を復号化し、復号化された静止画データを処理部１０８へ伝達する。サブタイトルデコーダ１３２ｄは、画像信号に含まれるサブタイトル部分を復号化し、復号化されたサブタイトルデータを処理部１０８へ伝達する。テキストデコーダ１３２ｅは、画像信号に含まれるテキスト部分を復号化し、復号化されたテキストデータを処理部１０８へ伝達する。ここで、図１０に示す映像データ、静止画データ、サブタイトルデータ、およびテキストデータが、図９に示す画像信号に対応する。

図１０に示すように、映像の符号化ストリームの外部に領域情報が多重化ストリームとして挿入される場合には、画像信号処理装置１００は、映像データに係る表示タイムスタンプと同様の表示制御タイムスタンプが付された領域情報に基づいて、映像の表示タイミングに同期した表示制御を行うことができる。

なお、図１０に示すデコーダ１３２の構成は、デコーダ１３２が有する機能の一部を示したものであり、デコーダ１３２の構成は、上記に限られない。例えば、映像ストリームに領域情報が挿入されている場合には、デコーダ１３２は、映像デコーダ１３２ｂが、領域情報を表示制御部１０６へ伝達し、映像データを処理部１０８へ伝達する構成であってもよい。ここで、映像ストリームに領域情報が挿入されている場合としては、例えば、領域情報が、ピクチャーヘッダあるいは当該ピクチャーヘッダと同等の制御レイヤにて映像の符号化ストリーム内部に映像の補助情報として挿入されることが挙げられる。上記の場合には、映像の表示タイミングに同期した表示制御が可能となる。

受信部１０４は、例えば図１０に示す構成によって、表示信号から画像信号と領域情報とを分離させ、画像信号と領域情報とを対応する構成要素に伝達することができる。なお、本発明の実施形態に係る画像信号処理装置１００が備える受信部の構成が、図１０に示す構成に限られないことは、言うまでもない。

再度図９を参照して、画像信号処理装置１００の構成の一例について説明する。表示制御部１０６は、受信部１０４から伝達される領域情報に基づいて、第１表示制御情報と、第２表示制御情報とを生成する。

図１１は、本発明の実施形態に係る画像信号処理装置１００が生成する第１表示制御情報の一例を示す説明図である。表示制御部１０６は、例えば図５に示す領域情報に基づいて、図１１に示すような第１表示制御情報を生成する。ここで、図１１は、領域を識別する情報（図１１に示すＧ）と、各領域が平面画像を示すか立体画像を示すかを表すフラグ（図１１に示すＨ）、および各領域が配置される位置の情報（図１１のＩ）を含む第１表示制御情報の一例を示している。

なお、本発明の実施形態に係る第１表示制御情報が、図１１に示す例に限られないことは、言うまでもない。例えば、受信部１０４から伝達された領域情報に“他の領域と重畳する場合の処理を規定する情報”（例えば図４のＣ）が含まれる場合には、表示制御部１０６は、当該他の領域と重畳する場合の処理を規定する情報に対応する、領域ごとの処理命令（表示処理を規定する処理命令）が含まれる第１表示制御情報を生成することもできる。

また、表示制御部１０６は、領域情報に含まれる領域ごとの各種情報そのものを第２表示制御情報とすることができるが、上記に限られない。

また、表示制御部１０６は、生成した第１表示制御情報と、制御信号とを処理部１０８へ伝達する。ここで、本発明の実施形態に係る制御信号とは、処理部１０８から出力される表示画像信号の出力タイミングを制御する信号である。

表示制御部１０６は、例えば、第２表示制御情報の表示部１１０への伝達と同期して処理部１０８に表示画像信号を出力させることが可能なタイミングで制御信号を処理部１０８へ伝達する。ここで、表示制御部１０６は、例えば、受信部１０４から伝達されるタイムスタンプの情報と、ＸＯ（X'tal Oscillator；水晶発振器）などが発生させた基準クロックとを比較し、これらが一致する場合に制御信号を処理部１０８へ伝達するが、上記に限られない。よって、画像信号処理装置１００では、表示部１１０への表示画像信号と第２表示制御情報との同期した伝達を実現することができる。なお、画像信号処理装置１００における表示部１１０への表示画像信号と第２表示制御情報との同期した伝達方法が、上記に限られないことは、言うまでもない。

また、表示制御部１０６は、領域情報が受信部１０４から伝達されない場合（すなわち、第２表示制御情報を生成しない場合）には、例えば、画像信号に設定されたタイムスタンプの情報に基づくタイミングで制御信号を処理部１０８へ伝達する。ここで、表示制御部１０６は、例えば、受信部１０４から伝達される上記タイムスタンプの情報を用いて処理を行うが、上記に限られない。例えば、表示制御部１０６は、処理部１０８から伝達される上記タイムスタンプの情報を用いて処理を行うこともできる。

表示制御部１０６は、例えば上記のように選択的に制御信号を処理部１０８へ伝達することによって、処理部１０８から出力される表示画像信号の出力タイミングを制御することができる。

また、表示制御部１０６は、図６に示すように、領域に対する表示制御の有効化、無効化を領域ごとに制御する情報（図６のＥに示す情報）を含む領域情報が受信部１０４から伝達される場合には、第３表示制御情報を処理部１０８へ伝達する。また、表示制御部１０６は、図６に示す領域情報が受信部１０４から伝達された後に、領域情報が受信部１０４から伝達されない場合には、前回伝達された領域情報に基づく処理を行う。より具体的には、表示制御部１０６は、上記の場合、例えば、制御信号の伝達と同期して前回伝達された領域情報に基づく第１表示制御情報を処理部１０８へ伝達し、また、前回伝達された領域情報に基づく第２表示制御情報を表示部１１０へ伝達する。

表示制御部１０６は、例えば、タイムスタンプの情報と基準クロックとに基づいて制御信号を生成するＣＰＵ（Central Processing Unit）や、上記機能を有するレンダリングコントローラなどで構成されるが、上記に限られない。例えば、画像信号処理装置１００では、制御部（図示せず）が表示制御部１０６の役目を果たすこともできる。

処理部１０８は、受信部１０４から伝達される画像信号と、表示制御部１０６から伝達される第１表示制御情報とに基づいて表示画像信号を生成する。また、処理部１０８は、表示制御部１０６から伝達される制御信号に基づいて、生成した表示画像信号を表示部１１０へ伝達する。

〔処理部１０８の構成例〕
〔１〕第１の例
図１２は、本発明の実施形態に係る画像信号処理装置１００が備える処理部１０８の構成の一例を示す説明図である。ここで、図１２は、受信部１０４から伝達される画像信号の一例として、図１０に示すデコーダ１３２から出力される映像データ、静止画データ、サブタイトルデータ、およびテキストデータを示している。なお、受信部１０４から伝達される画像信号が、映像データ、静止画データ、サブタイトルデータ、およびテキストデータに限られないことは、言うまでもない。以下では、受信部１０４から伝達される画像信号が、映像データ、静止画データ、サブタイトルデータ、およびテキストデータである場合を例に挙げて説明する。

処理部１０８は、画像処理部１３４と、バッファ１３６と、表示画像バッファ１３８とを備える。

画像処理部１３４は、受信部１０４から伝達される画像信号と、第１表示制御情報とが入力され、第１表示制御情報に基づいて、画像信号に対して各種画像処理を選択的に行う。より具体的には、画像処理部１３４は、例えば図１１に示す第１表示制御情報が伝達された場合には、図１１のＧに示す情報に基づいて各領域を識別し、図１１のＨに示す情報に基づいて立体画像を表示させるための処理を選択的に行う。また、画像処理部１３４は、図１１のＩに示す情報に基づいて各領域の位置を認識し、例えば、当該情報が示す位置に領域が配置されるように、スケーリング処理などを行う。

ここで、画像処理部１３４における画像処理としては、例えば、スケーリング処理や、インターレース／プログレッシブ変換処理、立体画像を表示させるための処理、静止画フォーマットに変換する処理などが挙げられるが、上記に限られない。例えば、図１１では示していないが、表示制御部１０６が処理する領域情報に“他の領域と重畳する場合の処理を規定する情報”（例えば図４のＣ）が含まれる場合、第１表示制御情報には、当該他の領域と重畳する場合の処理を規定する情報に対応する処理命令が含まれる。上記の場合、画像処理部１３４は、第１表示制御情報に含まれる上記処理命令に応じた処理を行うことができる。

また、図１２では、画像処理部１３４が、映像データを処理する第１画像処理部１３４ａ、静止画データを処理する第２画像処理部１３４ｂ、サブタイトルデータを処理する第３画像処理部１３４ｃ、およびテキストデータを処理する第４画像処理部１３４ｄを有する構成を示している。なお、図１２に示す画像処理部１３４の構成は、画像処理部１３４が有する機能の一部を示したものであり、画像処理部１３４の構成は、上記に限られない。

バッファ１３６は、画像処理部１３４から出力される、各種処理が行われた映像データ、静止画データ、サブタイトルデータ、およびテキストデータをそれぞれ記憶する。ここで、図１２では、バッファ１３６が、第１画像処理部１３４ａ〜第４画像処理部１３４ｄにそれぞれ対応する第１バッファ１３６ａ〜第４バッファ１３６ｄを有する構成を示しているが、バッファ１３６の構成は、上記に限られない。

また、バッファ１３６は、表示制御部１０６から伝達される制御信号に応じて、記憶する各種データを選択的に表示画像バッファ１３８へ伝達する。

表示画像バッファ１３８は、バッファ１３６から伝達される映像データ、静止画データ、サブタイトルデータ、およびテキストデータに基づいて、表示画面に表示させる表示画像データ（各領域の画像が配置された画像に対応する画像データ）を記憶する。

また、表示画像バッファ１３８は、表示制御部１０６から伝達される制御信号に応じて、記憶する表示画像データを選択的に表示部１１０へ伝達する。ここで、表示画像バッファ１３８から出力される表示画像データは、表示画像信号に対応する。

処理部１０８は、例えば図１２に示す構成によって、受信部１０４から伝達される画像信号と、表示制御部１０６から伝達される第１表示制御情報とに基づいて、第１領域と第２領域とが第１表示制御情報に応じて配置された画像を示す表示画像信号を生成することができる。

〔２〕第２の例
図１３は、本発明の実施形態に係る画像信号処理装置１００が備える処理部１０８の構成の他の例を示す説明図である。ここで、図１３は、画像信号処理装置１００が、図６に示す領域情報に基づく処理を行う場合における処理部１０８の構成の一例を示している。

処理部１０８は、画像処理部１３４と、バッファ１３６と、合成部１４０とを備える。ここで、図１３に示す画像処理部１３４とバッファ１３６とは、図１２に示す第１の例に係る画像処理部１３４およびバッファ１３６と同様の機能、構成を有する。なお、第２の例に係る処理部１０８は、バッファ１３６の後段に画像処理部１３４を設けることもできる。

合成部１４０は、バッファ１３６に保持された各種データと、表示制御部１０６から伝達される第１表示制御情報、第３表示制御情報とに基づいて、当該各種データを合成し、表示画像信号を出力する。ここで、合成部１４０は、例えば、第３表示制御情報の値が“０”を示す領域に対する表示制御を無効化し、値が“１”を示す領域に対する表示制御を有効化する。また、合成部１４０は、表示制御部１０６から伝達される第１表示制御情報が示す位置に各領域を配置する。また、例えば、表示制御部１０６から伝達される第１表示制御情報に他の領域と重畳する場合の処理を規定する情報に対応する処理命令が含まれる場合には、合成部１４０は、第１表示制御情報に含まれる上記処理命令に応じた処理を行う。

処理部１０８は、例えば図１３に示す構成によって、受信部１０４から伝達される画像信号と、表示制御部１０６から伝達される第１表示制御情報とに基づいて、第１領域と第２領域とが第１表示制御情報に応じて配置された画像を示す表示画像信号を生成することができる。

なお、本発明の実施形態に係る画像信号処理装置１００が備える処理部の構成が、図１２、図１３に示す構成に限られないことは、言うまでもない。また、画像信号処理装置１００では、例えば、制御部（図示せず）が処理部１０８の役目を果たすこともできる。

再度図９を参照して、画像信号処理装置１００の構成の一例について説明する。表示部１１０は、表示制御部１０６から伝達される第２表示制御情報と、処理部１０８から伝達される表示画像信号とに基づいて、平面画像、立体画像、または、平面画像と立体画像とが混在された画像を表示画面に表示する。より具体的には、表示部１１０は、表示画像信号に応じた画像を表示画面を表示し、第２表示制御情報に基づいて表示画面における第２領域の描画位置に対応する領域の画像を選択的に立体表示させる。

ここで、表示部１１０としては、例えば、第２表示制御情報に基づいて選択的に電圧を印加させてかまぼこ型レンズを形成する（例えば図２Ａ、図２Ｂ）ことが可能な液晶ディスプレイ（Liquid Crystal Display；ＬＣＤ）が挙げられるが、上記に限られない。例えば、表示部１１０が、視差障壁を備え、パララックスバリア方式にて立体画像を表示させる場合には、表示部１１０は、第２表示制御情報に基づいて選択的に視差障壁を制御する。また、上記の場合、表示部１１０は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ（organic ElectroLuminescence display。または、ＯＬＥＤディスプレイ（Organic Light Emitting Diode display）ともよばれる。）、ＦＥＤ（Field Emission Display。電界放出ディスプレイ）、ＰＤＰ（Plasma Display Panel。プラズマディスプレイ）など様々な表示デバイスを備えることができる。

画像信号処理装置１００は、例えば図９に示す構成によって、上述した本発明の実施形態に係る高画質化アプローチに係る処理を実現することができる。したがって、画像信号処理装置１００は、例えば上記のような処理を行うことによって、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

なお、本発明の実施形態に係る画像信号処理装置の構成は、図９に示す構成に限られない。例えば、本発明の実施形態に係る画像信号処理装置は、図９に示す表示部１１０を備えず、表示画像信号と第２表示制御情報とを外部装置としての表示装置に送信する送信部を備える構成をとることもできる。また、本発明の実施形態に係る画像信号処理装置は、図９に示す構成に加え、さらに上記送信部を備えることもできる。ここで、上記送信部としては、例えば、ＨＤＭＩなどの接続インタフェースが挙げられるが、上記に限られない。

上記の構成であっても、本発明の実施形態に係る画像信号処理装置は、外部装置としての表示装置の表示画面に、表示画像信号と第２表示制御情報とに基づく平面画像と立体画像とが混在した画像を表示させることができる。よって、上記の構成であっても、本発明の実施形態に係る画像信号処理装置は、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

［送信装置２００］
送信装置２００は、画像信号と、当該画像信号の所定の単位ごとの領域情報とを含む表示信号を生成し、生成した表示信号を放送波３００、および／または、ネットワーク４００を介して、情報処理システム１０００を構成する画像信号処理装置へ送信する。

〔送信装置２００のハードウェア構成例〕
図１４は、本発明の実施形態に係る送信装置２００のハードウェア構成の一例を示す説明図である。送信装置２００は、例えば、ＭＰＵ２５０と、ＲＯＭ２５２と、ＲＡＭ２５４と、記録媒体２５６と、入出力インタフェース２５８と、操作入力デバイス２６０と、表示デバイス２６２と、第１通信インタフェース２６４と、第２通信インタフェース２６６とを備える。また、管理サーバ１００は、例えば、データの伝送路としてのバス２６８で各構成要素間を接続する。

ＭＰＵ２５０は、ＭＰＵや、制御機能を実現するための複数の回路が集積された集積回路などで構成され、送信装置２００全体を制御する制御部（図示せず）として機能する。

また、ＭＰＵ２５０は、表示信号を生成する処理を主導的に行う役目を果たす。ここで、ＭＰＵ２５０は、例えば、操作入力デバイス２６０から伝達される送信装置２００のユーザのユーザ操作や、送信する画像信号の解析結果等に基づいて、画像信号の所定の単位ごとの領域情報を生成する。そして、ＭＰＵ２５０は、例えば、生成した領域情報をビットストリーム内に挿入することによって、表示信号を生成する。なお、本発明の実施形態に係る表示信号の生成処理が、上記に限られないことは、言うまでもない。

ＲＯＭ２５２は、ＭＰＵ２５０が使用するプログラムや演算パラメータなどの制御用データを記憶し、また、ＲＡＭ２５４は、例えば、ＭＰＵ２５０により実行されるプログラムなどを一次記憶する。

記録媒体２５６は、送信装置２００における記憶手段であり、送信装置２００における記憶部（図示せず）として機能する。記録媒体２５６には、例えば、送信する画像信号に対応するコンテンツデータや、各種アプリケーションなど様々なデータが記憶される。ここで、記録媒体２５６としては、例えば、ハードディスクなどの磁気記録媒体や、フラッシュメモリなどの不揮発性メモリが挙げられるが、上記に限られない。また、送信装置２００は、記録媒体２５６を着脱可能に備えることもできる。

入出力インタフェース２５８は、例えば、操作入力デバイス２６０や、表示デバイス２６２を接続する。ここで、入出力インタフェース２５８としては、例えば、ＵＳＢ（Universal Serial Bus）端子や、ＤＶＩ（Digital Visual Interface）端子、ＨＤＭＩ端子、各種処理回路などが挙げられるが、上記に限られない。なお、入出力インタフェース２５８は、送信装置２００の外部装置としての操作入力デバイス（例えば、キーボードやマウスなど）や、表示デバイス（例えば、外部ディスプレイなど）と接続することもできることは、言うまでもない。

操作入力デバイス２６０は、送信装置２００における操作部（図示せず）として機能する。また、操作入力デバイス２６０は、例えば、送信装置２００上に備えられ、送信装置２００の内部で入出力インタフェース２５８と接続される。操作入力デバイス２６０としては、例えば、ボタン、方向キー、ジョグダイヤルなどの回転型セレクター、あるいは、これらの組み合わせなどが挙げられるが、上記に限られない。

表示デバイス２６２は、例えばユーザが所望の操作を行うための操作画面などの各種画面を表示画面に表示する表示部（図示せず）として機能する。表示デバイス２６２は、例えば、送信装置２００上に備えられ、送信装置２００の内部で入出力インタフェース２５８と接続される。表示デバイス２６２としては、例えば、液晶ディスプレイや有機ＥＬディスプレイなどが挙げられるが、上記に限られない。

第１通信インタフェース２６４は、送信装置２００が備える第１の通信手段であり、ネットワーク４００を介して（あるいは、直接的に）外部装置と無線／有線で通信を行うための第１通信部（図示せず）として機能する。ここで、第１通信インタフェース２６４としては、例えば、ＬＡＮ端子および送受信回路などが挙げられるが、上記に限られない。例えば、第１通信インタフェース２６４は、ネットワーク４００に対応する構成をとることができる。

第２通信インタフェース２６６は、送信装置２００が備える第２の通信手段であり、放送波３００を介して外部装置に表示信号を送信させるための第２通信部（図示せず）として機能する。ここで、第２通信インタフェース２６６としては、例えば、モジュレータおよびＲＦ（Radio Frequency）トランスミッタが挙げられるが、上記に限られない。

送信装置２００は、例えば図１４に示す構成によって、表示信号を生成し、生成した表示信号を放送波３００、および／または、ネットワーク４００を介して、情報処理システム１０００を構成する画像信号処理装置へ送信することができる。なお、本発明の実施形態に係る送信装置２００のハードウェア構成が、図１４に示す構成に限られないことは、言うまでもない。

以上のように、本発明の実施形態に係る画像信号処理システム１０００は、表示信号を送信する送信装置２００と、表示信号を処理する画像信号処理装置１００とを有する。画像信号処理装置１００は、表示情報から分離させた画像信号と領域情報とに基づく表示画像信号と、当該領域情報に基づく第２表示制御情報とを生成し、表示画像信号と第２表示制御情報とを表示デバイスに送信する。ここで、画像信号処理装置１００は、画像信号と領域情報とが含まれる表示信号から当該画像信号と領域情報とを分離させて処理を行う。そのため、例えば、画像信号に設定されたタイムスタンプの情報などを利用することによって、画像信号処理装置１００は、画像信号と領域情報とを対応付ける特段の仕組みを設けなくても画像信号と領域情報との同期を図ることが可能である。また、画像信号処理装置１００は、記憶媒体に記憶された表示信号に対応するコンテンツデータが示す画像を表示画面に表示させる場合においても、上記と同様に、画像信号と領域情報との同期を図ることができる。よって、画像信号処理装置１００を有する画像信号処理システム１０００では、画像信号と、第１領域、第２領域をそれぞれ規定する領域情報との同期を図ることができるので、従来の技術を用いる場合のように解像度の低下など画質の低下に繋がる事態が生じる恐れはない。また、画像信号処理装置１００を有する画像信号処理システム１０００では、かまぼこ型レンズが形成された部分に立体画像を表示させるので、平面画像の解像度が低下する事態も生じない。

したがって、画像信号処理装置１００は、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。また、画像信号処理装置１００と送信装置２００とを有することによって、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることが可能な画像信号処理システム１０００が実現される。

以上、本発明の実施形態に係る画像信号処理システム１０００を構成する構成要素として画像信号処理装置１００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、ＰＣ（Personal Computer）などのコンピュータ、携帯電話やＰＨＳ（Personal Handyphone System）などの携帯型通信装置、映像／音楽再生装置（または映像／音楽記録再生装置）、携帯型ゲーム機、セットトップボックス、テレビ受像機など、様々な機器に適用することができる。

また、本発明の実施形態に係る画像信号処理システム１０００を構成する構成要素として送信装置２００を挙げて説明したが、本発明の実施形態は、かかる形態に限られない。本発明の実施形態は、例えば、サーバ（Server）やＰＣなどのコンピュータなど、様々な機器に適用することができる。

（本発明の実施形態に係るプログラム）
コンピュータを、本発明の実施形態に係る画像信号処理装置として機能させるためのプログラムによって、平面画像と立体画像とが混在した画像を表示画面に表示させる場合における高画質化を図ることができる。

以上、添付図面を参照しながら本発明の好適な実施形態について説明したが、本発明は係る例に限定されないことは言うまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。

例えば、上記では、コンピュータを、本発明の実施形態に係る画像信号処理装置として機能させるためのプログラム（コンピュータプログラム）が提供されることを示したが、本発明の実施形態は、さらに、上記プログラムを記憶させた記憶媒体も併せて提供することができる。

上述した構成は、本発明の実施形態の一例を示すものであり、当然に、本発明の技術的範囲に属するものである。

１００ 画像信号処理装置
１０２ 記憶部
１０４ 受信部
１０６ 表示制御部
１０８ 処理部
１１０ 表示部
２００ 送信装置
３００ 放送波
４００ ネットワーク
１０００ 画像信号処理システム

Claims (6)

1. 平面画像と立体画像とが混在された画像を示す画像信号と、前記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、前記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した前記表示信号から前記画像信号と前記領域情報とを分離させる受信部と；
   前記受信部が分離させた領域情報に基づいて、前記領域情報に対応する画像信号における前記第１領域および前記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における前記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成する表示制御部と；
   前記受信部が分離させた画像信号と、前記表示制御部が生成した前記第１表示制御情報とに基づいて、前記第１領域と前記第２領域とが前記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成する処理部と；
   を備える、画像信号処理装置。
2. 前記領域情報には、処理する順序が規定された情報と、先に処理された領域と重畳する場合における表示処理が規定された情報とが含まれ、
   前記表示制御部は、前記領域情報に基づいて領域ごとに表示処理が規定された第１表示制御情報を生成し、
   前記処理部は、領域ごとに前記第１表示制御情報に基づく表示処理が行われた画像を示す表示画像信号を生成する、請求項１に記載の画像信号処理装置。
3. 前記表示画像信号に応じた画像を表示画面を表示し、前記第２表示制御情報に基づいて前記表示画面における前記第２領域の描画位置に対応する領域の画像を選択的に立体表示させる表示部をさらに備える、請求項１、または請求項２のいずれか１項に記載の画像信号処理装置。
4. 平面画像と立体画像とが混在された画像を示す画像信号と、前記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、前記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した前記表示信号から前記画像信号と前記領域情報とを分離させるステップと；
   前記分離させるステップにおいて分離させた領域情報に基づいて、前記領域情報に対応する画像信号における前記第１領域および前記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における前記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成するステップと；
   前記分離させるステップにおいて分離させた画像信号と、前記生成するステップにおいて生成した前記第１表示制御情報とに基づいて、前記第１領域と前記第２領域とが前記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成するステップと；
   を有する、画像信号処理方法。
5. 平面画像と立体画像とが混在された画像を示す画像信号と、前記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、前記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を受信し、受信した前記表示信号から前記画像信号と前記領域情報とを分離させるステップ；
   前記分離させるステップにおいて分離させた領域情報に基づいて、前記領域情報に対応する画像信号における前記第１領域および前記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における前記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成するステップ；
   前記分離させるステップにおいて分離させた画像信号と、前記生成するステップにおいて生成した前記第１表示制御情報とに基づいて、前記第１領域と前記第２領域とが前記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成するステップ；
   をコンピュータに実行させるためのプログラム。
6. 平面画像と立体画像とが混在された画像を示す画像信号と、前記画像信号が示す画像を表示画面に表示させた場合における平面画像を表示させる第１領域と立体画像を表示させる第２領域とを規定する、前記画像信号における所定の単位ごとの領域情報とが含まれる表示信号を送信する送信装置と；
   前記送信装置から送信された前記表示信号を受信し、受信した前記表示信号から前記画像信号と前記領域情報とを分離させる受信部と、
   前記受信部が分離させた領域情報に基づいて、前記領域情報に対応する画像信号における前記第１領域および前記第２領域それぞれの描画位置を制御する第１表示制御情報と、表示画面における前記第２領域の描画位置に対応する領域の画像を選択的に立体表示させるための第２表示制御情報とを生成する表示制御部と、
   前記受信部が分離させた画像信号と、前記表示制御部が生成した前記第１表示制御情報とに基づいて、前記第１領域と前記第２領域とが前記第１表示制御情報に応じて配置された画像を示す表示画像信号を生成する処理部と、
   を備える画像信号処理装置と；
   を有する、画像信号処理システム。
   
   

Images