JP2014203017A - 画像処理装置、画像処理方法、表示装置、および電子機器 - Google Patents

Abstract

【課題】ＯＳＤ画像が動的に変化した場合でも高い画質を実現することができる画像処理装置を得る。
【解決手段】第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、第１のサブ画像および周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、フレーム画像と第３のサブ画像とを合成する合成部とを備える。
【選択図】図４Ａ

Description

本開示は、ＯＳＤ画像を生成する機能を有する画像処理装置、画像処理方法、表示装置、および電子機器に関する。

テレビ放送のアナログ放送からデジタル放送への変更に伴い、例えばデータ放送用の情報や字幕情報など、従来の音声情報や映像情報以外の様々な情報が放送波により供給されている。データ放送用の情報や、字幕情報は、表示装置において、例えば、テレビ番組などの映像情報に重畳され、いわゆるＯＳＤ（On Screen Display）画像として表示される。

ところで、複数の画像を合成する方法として、様々な方法が提案されている。例えば、特許文献１には、ある画像から部分画像を抽出し、その部分画像を他の画像に張り付ける際に、張り付けられる画像の境界画素の情報を消去する方法が開示されている。

特開２００２−１９７４５３号公報

ところで、ＯＳＤ画像は、移動し、拡大し、または縮小するなど、動的に変化する場合がある。この場合でも、観察者が違和感を覚えることなく、その変化を観察できるのが望ましく、そのような高い画質を実現することが好ましい。

本開示はかかる問題点に鑑みてなされたもので、その目的は、ＯＳＤ画像が動的に変化した場合でも高い画質を実現することができる、画像処理装置、画像処理方法、表示装置、および電子機器を提供することにある。

本開示の画像処理装置は、サブ画像生成部と、合成部とを備えている。サブ画像生成部は、第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、第１のサブ画像および周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するものである。合成部は、フレーム画像と第３のサブ画像とを合成するものである。

本開示の画像処理方法は、第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、第１のサブ画像および周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成し、フレーム画像と第３のサブ画像とを合成するものである。

本開示の表示装置は、画像処理部と、画像処理部により処理された画像を表示する表示部とを備えている。画像処理部は、サブ画像生成部と、合成部とを有している。サブ画像生成部は、第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、第１のサブ画像および周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するものである。合成部は、フレーム画像と第３のサブ画像とを合成するものである。

本開示の電子機器は、上記画像処理装置を備えたものであり、例えば、テレビジョン装置、ヘッドマウントディスプレイ、パーソナルコンピュータ、ゲーム機などが該当する。

本開示の画像処理装置、画像処理方法、表示装置、および電子機器では、フレーム画像と第３のサブ画像が重畳されて合成される。その際、第３のサブ画像は、第１のサブ画像と、透明領域である第１の領域を少なくとも含む周辺画像とを有する第２のサブ画像の全体またはその一部に対してフィルタ処理が行われることにより生成される。

本開示の画像処理装置、画像処理方法、表示装置、および電子機器によれば、第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、第１のサブ画像および周辺画像を含む第２のサブ画像に対してフィルタ処理を行うようにしたので、高い画質を実現できる。

本開示の実施の形態に係る表示システムの一構成例を表すブロック図である。 図１に示した表示システムの表示動作の一状態を表す模式図である。 図１に示した表示システムの表示動作の他の状態を表す模式図である。 図１に示した表示システムの立体視表示の一例を表す模式図である。 図１に示した表示システムの立体視表示の他の例を表す模式図である。 図１に示した表示システムの立体視表示の他の例を表す模式図である。 図１に示したグラフィクスエンジンの動作を説明するための説明図である。 図１に示したグラフィクスエンジンの動作を説明するための他の説明図である。 図１に示したグラフィクスエンジンの動作を説明するための他の説明図である。 図１に示したグラフィクスエンジンの動作を説明するための他の説明図である。 図１に示したＯＳＤ部１７におけるレイヤの例を表す説明図である。 図１に示したＯＳＤ部１７における他のレイヤの例を表す説明図である。 図１に示したＯＳＤ部１７における他のレイヤの例を表す説明図である。 図１に示したスケーラ１３から供給された画像を表す説明図である。 図１に示した合成部が合成した画像を表す説明図である。 図１に示した表示システム１の一動作例を表す説明図である。 第１の実施の形態の変形例に係る表示システムの一動作例を表す説明図である。 第１の実施の形態の他の変形例に係る表示システムの一構成例を表すブロック図である。 第１の実施の形態の変形例に係るグラフィクスエンジンの一動作例を表す説明図である。 第１の実施の形態の変形例に係るグラフィクスエンジンの一動作例を表す説明図である。 第２の実施の形態に係る表示システムの一動作例を表す説明図である。 第２の実施の形態に係るグラフィクスエンジンの一動作例を表す説明図である。 第２の実施の形態に係るグラフィクスエンジンの他の動作例を表す説明図である。 実施の形態に係る表示装置が適用されたテレビジョン装置の外観構成を表す斜視図である。 変形例に係る表示システムの一動作例を表す説明図である。 他の変形例に係る表示システムの一動作例を表す説明図である。

以下、本開示の実施の形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．適用例

＜１．第１の実施の形態＞
［構成例］
（全体構成例）
図１は、第１の実施の形態に係る表示システムの一構成例を表すものである。表示システム１は、立体視表示を行う表示システムである。なお、本開示の実施の形態に係る画像処理装置、画像処理方法、表示装置は、本実施の形態により具現化されるので、併せて説明する。

表示システム１は、表示装置５と、シャッタ眼鏡２４とを備えている。表示装置５は、画像処理部１０と、表示制御部２１と、表示部２２と、シャッタ制御部２３とを備えている。

画像処理部１０は、供給された映像信号Ｓdispに対して所定の画像処理を行い、映像信号Ｓdisp2を生成し、出力するものである。具体的には、画像処理部１０は、後述するように、映像信号Ｓdispから字幕データを抽出し、その字幕データに含まれる字幕画像ＤＳなどに基づいて左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成し、これらの画像をＯＳＤ（On Screen Display）画像として左眼画像ＰＬおよび右眼画像ＰＲに重畳するようになっている。

表示制御部２１は、映像信号Ｓdisp2に基づいて、表示部２２およびシャッタ制御部２３を制御するものである。表示部２２は、表示制御部２１による制御に基づいて、画像を表示するものである。具体的には、表示部２２は、後述するように、左眼画像ＰＬおよび右眼画像ＰＲを時分割的に交互に表示するようになっている。

シャッタ制御部２３は、表示制御部２１による制御に基づいてシャッタ制御信号ＣＴＬを生成し、そのシャッタ制御信号ＣＴＬを、シャッタ眼鏡２４に対して無線通信により送信するものである。なお、この例では、シャッタ制御部２３は、シャッタ制御信号ＣＴＬを無線通信により供給するものとしたが、これに限定されるものではなく、例えば、有線通信により供給してもよい。

シャッタ眼鏡２４は、眼鏡型のシャッタ装置であり、観察者が用いることにより、立体視を可能とするものである。このシャッタ眼鏡２４は、左眼シャッタ８Ｌおよび右眼シャッタ８Ｒを有している。左眼シャッタ８Ｌおよび右眼シャッタ８Ｒは、この例では液晶シャッタにより構成されている。これらの左眼シャッタ８Ｌおよび右眼シャッタ８Ｒの透過状態（開状態）および遮光状態（閉状態）は、シャッタ制御部２３から供給されるシャッタ制御信号ＣＴＬにより制御されるようになっている。

図２Ａ，２Ｂは、表示部２２およびシャッタ眼鏡２４の動作を模式的に表すものであり、図２Ａは左眼画像ＰＬを表示したときの動作を示し、図２Ｂは右眼画像ＰＲを表示したときの動作を示す。表示部２２が左眼画像ＰＬを表示しているとき、シャッタ眼鏡２４では、図２Ａに示したように、左眼シャッタ８Ｌが開状態となるとともに、右眼シャッタ８Ｒが閉状態となる。このとき、観察者９は左眼９Ｌで左眼画像ＰＬを見る。一方、表示部２２が右眼画像ＰＲを表示しているとき、シャッタ眼鏡２４では、図２Ｂに示したように、左眼シャッタ８Ｌが閉状態となるとともに、右眼シャッタ８Ｒが開状態となる。このとき、観察者９は右眼９Ｒで右眼画像ＰＲを見る。これらの動作を交互に繰り返すと、左眼画像ＰＬと右眼画像ＰＲとの間には視差があるため、観察者９は、これらの一連の画像からなる映像を奥行きのある立体的な映像として認識することができるようになっている。

（画像処理部１０）
次に、画像処理部１０の構成について、詳細に説明する。画像処理部１０には、映像信号Ｓdispが供給される。この映像信号Ｓdispは、デジタル放送の映像信号であり、画像データＤＡＴＡＰ、音声データＤＡＴＡＡ、字幕データＤＡＴＡＳなどを含むストリームデータである。画像データＤＡＴＡＰ、音声データＤＡＴＡＡ、字幕データＤＡＴＡＳなどは、それぞれ符号化されてパケット化され、いわゆるＰＥＳ（Packetized Elementary Stream）として、画像処理部１０に供給されるようになっている。

画像データＤＡＴＡＰは、左眼画像ＰＬ、右眼画像ＰＲ、ＰＴＳ（Presentation Time Stamp）データＤＰ１などから構成されるものであり、例えばＭＰＥＧ−２の符号化方式によりエンコードされたものである。ＰＴＳデータＤＰ１は、一連の画像における、左眼画像ＰＬおよび右眼画像ＰＲのそれぞれのタイムスタンプを表すものである。

字幕データＤＡＴＡＳは、字幕画像ＤＳ、視差（Disparity）データＤＤ、ＰＴＳデータＤＰ２などから構成されている。字幕画像ＤＳは、例えば、画素ごとに、赤色（Ｒ）、緑色（Ｇ）、青色（Ｂ）の３色の輝度情報ＩＲ，ＩＧ，ＩＢと、透明度αの情報を有している。ここで、透明度αは、例えば８ビットの情報（０〜２５５）であり、値が低いほど透明であることを示すものである。視差データＤＤは、後述するように、字幕画像ＤＳを立体的に表示する際の立体度を表すパラメータである。ＰＴＳデータＤＰ２は、字幕画像ＤＳのタイムスタンプを表すものである。

図３Ａ〜３Ｃは、視差データＤＤと立体度の関係を模式的に表すものであり、図３Ａは視差データＤＤが負（ＤＤ＜０）である場合を示し、図３Ｂは視差データＤＤが“０”（ＤＤ＝０）である場合を示し、図３Ｃは視差データＤＤが正（ＤＤ＞０）である場合を示す。左眼字幕画像ＤＳＬは、観察者９の左眼９Ｌが観察する字幕画像であり、右眼字幕画像ＤＳＲは、観察者９の左眼９Ｌが観察する字幕画像である。左眼字幕画像ＤＳＬと右眼字幕画像ＤＳＲは、以下に示すように、視差データＤＤに応じて、水平方向において互いにずれた位置に表示される。

視差データＤＤが負の場合（ＤＤ＜０）には、図３Ａに示したように、観察者９から見て、左眼字幕画像ＤＳＬが右眼字幕画像ＤＳＲよりも右側に表示される。ここで、左眼字幕画像ＤＳＬと右眼字幕画像ＤＳＲの表示位置のずれ量は、視差データＤＤの絶対値の２倍（２×｜ＤＤ｜）である。この場合には、観察者９は、字幕画像（立体字幕画像１００）が表示部２２の表示面よりも手前に表示されるように感じる。

また、視差データＤＤが“０”の場合（ＤＤ＝０）には、図３Ｂに示したように、左眼字幕画像ＤＳＬと右眼字幕画像ＤＳＲは同じ位置に表示される。この場合には、観察者９は、字幕画像が表示部２２の表示面上に表示されるように感じる。

また、視差データＤＤが正の場合（ＤＤ＞０）には、図３Ｃに示したように、観察者９から見て、左眼字幕画像ＤＳＬが右眼字幕画像ＤＳＲよりも左側に表示される。ここで、左眼字幕画像ＤＳＬと右眼字幕画像ＤＳＲの表示位置のずれ量は、視差データＤＤの２倍（２×ＤＤ）である。この場合には、観察者９は、字幕画像（立体字幕画像１００）が表示部２２の表示面よりも奥に表示されるように感じる。

このように、表示システム１では、視差データＤＤに応じた立体度で、字幕画像の立体視表示を行うことができるようになっている。

画像処理部１０は、ＤＥＭＵＸ１１と、ビデオデコーダ１２と、スケーラ１３と、ＣＰＵ（Central Processing Unit）１４と、メモリ１５と、グラフィクスエンジン１６と、ＯＳＤ処理部１７と、合成部１８とを有している。

ＤＥＭＵＸ１１は、供給された映像信号Ｓdispから、画像データＤＡＴＡＰ、音声データＤＡＴＡＡ、字幕データＤＡＴＡＳを分離して抽出するものである。そして、ＤＥＭＵＸ１１は、画像データＤＡＴＡＰをビデオデコーダ１２に供給し、音声データＤＡＴＡＡを図示しない音声処理部に供給し、字幕データＤＡＴＡＳをＣＰＵ１４に供給するようになっている。

ビデオデコーダ１２は、ＤＥＭＵＸ１１から供給された画像データＤＡＴＡＰをデコードし、画像データＤＡＴＡＰに含まれる左眼画像ＰＬ、右眼画像ＰＲ、およびＰＴＳデータＤＰ１を、信号Ｓ１２としてスケーラ１３に供給するものである。

スケーラ１３は、左眼画像ＰＬおよび右眼画像ＰＲを、表示部２２の解像度に合うように、スケーリングして出力するものである。すなわち、映像信号Ｓdispに含まれる左眼画像ＰＬおよび右眼画像ＰＲの解像度は、必ずしも表示部２２の解像度と一致しないため、スケーラ１３は、左眼画像ＰＬおよび右眼画像ＰＲを、これらの画像の解像度が表示部２２の解像度と一致するように、スケーリングするようになっている。

ＣＰＵ１４は、ＤＥＭＵＸ１１から供給された字幕データＤＡＴＡＳに含まれる字幕画像ＤＳ、視差データＤＤ、およびＰＴＳデータＤＰ２を、一組の字幕情報ＩＳとしてメモリ１５に記憶させるように制御するものである。また、ＣＰＵ１４は、ビデオデコーダ１２から出力された信号Ｓ１２に含まれるＰＴＳデータＤＰ１を監視し、このＰＴＳデータＤＰ１が、メモリ１５に記憶された字幕情報ＩＳのうちのいずれかのＰＴＳデータＤＰ２と一致する場合に、グラフィクスエンジン１６に対して、その字幕情報ＩＳに基づいて左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの生成を指示する機能をも有している。これにより、後述するように、合成部１８において、同じタイムスタンプを有する左眼画像ＰＬと左眼字幕画像ＤＳＬとが合成され、同様に同じタイムスタンプを有する右眼画像ＰＲと右眼字幕画像ＤＳＲとが合成されるようになっている。

メモリ１５は、ＣＰＵ１４から字幕画像ＤＳ、視差データＤＤ、ＰＴＳデータＤＰ２が供給される度に、これらを一組の字幕情報ＩＳとして記憶するものである。メモリ１５は、複数の字幕情報ＩＳ（ｉ）（ｉ；自然数）を記憶できるように構成されている。ここで、字幕情報ＩＳ（ｉ）は、字幕画像ＤＳ（ｉ）、視差データＤＤ（ｉ）、およびＰＴＳデータＤＰ２（ｉ）から構成されるものである。また、メモリ１５は、ＣＰＵ１４やグラフィクスエンジン１６などの作業領域としても機能するものである。

グラフィクスエンジン１６は、ＣＰＵ１４からの指示に基づいて、メモリ１５から字幕情報ＩＳを読み出し、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。具体的には、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる字幕画像ＤＳに基づいて、字幕画像ＤＳを画像領域の一部に含む字幕画像ＤＳ２を生成する。そして、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる視差データＤＤに基づいて、その字幕画像ＤＳ２に対してフィルタ処理を行うことにより、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。以下に、その詳細を説明する。

図４Ａは、字幕画像ＤＳ２を表すものであり、図４Ｂは、図４Ａにおける画像部分Ｗ１を表すものである。まず、グラフィクスエンジン１６は、字幕画像ＤＳに基づいて字幕画像ＤＳ２を生成する。この字幕画像ＤＳ２は、字幕画像ＤＳを画像領域の一部に含むものであり、その字幕画像ＤＳの上下左右を、この例ではそれぞれ２画素分（周辺画像ＰＥＲ）の広げた画像である。この周辺画像ＰＥＲでは、全ての画素において、輝度情報ＩＲ，ＩＧ，ＩＢはこの例では全て“０”（ゼロ）に設定され、透明度αは“０”（ゼロ）に設定される。すなわち、この周辺画像ＰＥＲは、透明な画像である。なお、これに限定されるものではなく、例えば、輝度情報ＩＲ，ＩＧ，ＩＢを、“０”以外の低い値に設定するとともに、透明度αを“０”以外の低い値（高い透明度を示す値）に設定してもよい。

次に、グラフィクスエンジン１６は、以下に示すように、この字幕画像ＤＳ２に対してフィルタ処理を行うことにより、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。

図５Ａは、字幕画像ＤＳ２に対するフィルタ処理を模式的に表すものであり、図５Ｂは、フィルタ処理により生成された左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを模式的に表すものである。グラフィクスエンジン１６は、この例では３×３のＦＩＲ（Finite impulse response）フィルタにより、字幕画像ＤＳ２に対してフィルタ処理を行う。このＦＩＲフィルタは、低域通過フィルタとして機能するものである。グラフィクスエンジン１６は、字幕画像ＤＳ２における輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αの各マップに対して、それぞれフィルタ処理を行う。具体的には、グラフィクスエンジン１６は、字幕画像ＤＳ２に３×３の演算対象領域ＲＯを設定し、その演算対象領域ＲＯにおける９つの輝度情報ＩＲを、ＦＩＲフィルタの９つのフィルタ係数が示す混合比で混合する（図５Ａ）。そして、その演算結果を、その３×３の演算対象領域ＲＯの中央の座標に対応する左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの座標における輝度情報ＩＲとする（図５Ｂの斜線部）。そして、グラフィクスエンジン１６は、この演算対象領域ＲＯを１画素ずつずらしながら、字幕画像ＤＳ２の全ての領域に対して、この演算を繰り返す。グラフィクスエンジン１６は、このようなフィルタ処理を、輝度情報ＩＲ，ＩＧ，ＩＢ、および透明度αの各マップに対して行う。このフィルタ処理の結果、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲは、図５Ｂに示したように、字幕画像ＤＳよりも、上下左右に、この例ではそれぞれ１画素分広い画像となる。

グラフィクスエンジン１６は、このフィルタ処理により、字幕情報ＩＳに含まれる視差データＤＤに基づいて、左右方向に互いにずれた左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。その際、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる視差データＤＤに基づいてフィルタ係数を切り換えることにより、演算対象領域ＲＯにおける各輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αの混合比を変化させる。これにより、グラフィクスエンジン１６は、字幕画像ＤＳ２を、１画素単位ではなく、例えば、以下に示すように０．５画素分ずらして、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成することができるようになっている。

図６は、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの表示部２２における表示位置を表すものである。この左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの表示位置は、図３Ａ〜３Ｃに示したように、視差データＤＤにより調整される。この例では、動的に視差データＤＤが変化し、表示位置が変化する。その際、表示位置を、画素ごとにではなく、より細かくずらしたい場合がある。図６の例では、表示位置を０．５画素分ずらしている。グラフィクスエンジン１６は、このような場合において、例えば、３×３のフィルタ係数を水平方向に非対称に設定することにより、左眼字幕画像ＤＳＬを左方向に０．５画素分ずらし、右眼字幕画像ＤＳＲを右方向に０．５画素分ずらすような、いわゆる位相調整を行うことができるようになっている。

また、このフィルタ処理を行うことにより、グラフィクスエンジン１６は、上述した位相調整を行うとともに、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲにおける輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αの変化をよりなめらかにすることができる。これにより、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの輪郭がぼやけるため、後述するように、字幕画像ＤＳの視差データＤＤが変化し、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが表示画面内において移動する場合でも、観察者は、立体度がよりスムースに変化するように感じることができる。

このようにして、グラフィクスエンジン１６は、字幕画像ＤＳおよび視差データＤＤに基づいて、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。具体的には、グラフィクスエンジン１６は、視差データＤＤが正（ＤＤ＞０）である場合（図３Ｃ）には、その視差データＤＤの値の分だけ、左眼字幕画像ＤＳＬを左方向にずらすとともに、右眼字幕画像ＤＳＲを右方向にずらすようにフィルタ処理を行う。また、グラフィクスエンジン１６は、視差データＤＤが負（ＤＤ＜０）である場合（図３Ａ）には、視差データＤＤの絶対値（｜ＤＤ｜）の分だけ、左眼字幕画像ＤＳＬを右方向にずらすとともに、左眼字幕画像ＤＳＲを左方向にずらすようにフィルタ処理を行うようになっている。

ＯＳＤ部１７は、グラフィクスエンジン１６が生成した左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの表示画面における表示位置を設定するものである。ＯＳＤ部１７は、複数のレイヤ（この例では３つのレイヤＬ０〜Ｌ２）を有しており、各レイヤに、重畳して表示する画像をそれぞれ配置するようになっている。

図７Ａ〜７ＣはＯＳＤ部１７において設定されるレイヤＬ０〜Ｌ２を表すものである。この例では、レイヤＬ０は、表示システム１のユーザインターフェースを表示するためのレイヤであり、レイヤＬ１は、データ放送を表示するためのレイヤであり、レイヤＬ２は、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを表示するためのレイヤである。この例では、レイヤＬ０が手前に配置され、レイヤＬ１，Ｌ２の順に奥に配置されるようになっている。ＯＳＤ部１７は、このように、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲをレイヤＬ２に配置する。そして、ＯＳＤ部１７は、レイヤＬ０〜Ｌ２の画像を、合成部１８に供給するようになっている。

合成部１８は、スケーラ１３から供給された左眼画像ＰＬおよび右眼画像ＰＲと、ＯＳＤ部１７から供給された各レイヤＬ０〜Ｌ２の画像とを重畳して合成するものである。

図８Ａは、スケーラ１３から供給された画像の例を表すものであり、図８Ｂは、この画像にＯＳＤ部１７から供給された各レイヤＬ０〜Ｌ２の画像を重畳した画像の例を表すものである。このように、合成部１８は、スケーラ１３から供給された画像（左眼画像ＰＬまたは右眼画像ＰＲ）の手前に、レイヤＬ０〜Ｌ３の画像を重畳する。その際、合成部１８では、互いに同じタイムスタンプの画像が重畳される。すなわち、上述したように、ＣＰＵ１４が、ビデオデコーダ１２から出力された信号Ｓ１２に含まれるＰＴＳデータＤＰ１に基づいて、グラフィクスエンジン１６に対して左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの生成を指示することにより、左眼画像ＰＬおよび右眼画像ＰＲのＰＴＳデータＤＰ１と、これらに重畳される左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの元画像である字幕画像ＤＳのＰＴＳデータＤＰ２とは、同じタイムスタンプになる。そして、合成部１８は、その合成した画像を、映像信号Ｓdisp2として出力するようになっている。

このようにして、画像処理部１０では、映像信号Ｓdispに含まれる字幕情報ＩＳ（字幕画像ＤＳ、視差データＤＤ、ＰＴＳデータＤＰ２）に基づいて、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成し、左眼画像ＰＬに対して左眼字幕画像ＤＳＬを重畳するとともに、右眼画像ＰＲに対して右眼字幕画像ＤＳＲを重畳するようになっている。

ここで、グラフィクスエンジン１６は、本開示における「サブ画像生成部」の一具体例に対応する。字幕画像ＤＳは、本開示における「第１のサブ画像」の一具体例に対応し、字幕画像ＤＳ２は、本開示における「第２のサブ画像」の一具体例に対応し、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲは、本開示における「第３のサブ画像」の一具体例に対応する。

［動作および作用］
続いて、本実施の形態の表示システム１の動作および作用について説明する。

（全体動作概要）
まず、図１などを参照して、表示システム１の全体動作概要を説明する。画像処理部１０において、ＤＥＭＵＸ１１は、映像信号Ｓdispから、画像データＤＡＴＡＰ、音声データＤＡＴＡＡ、字幕データＤＡＴＡＳを分離して抽出する。ビデオデコーダ１２は、画像データＤＡＴＡＰをデコードし、画像データＤＡＴＡＰに含まれる左眼画像ＰＬ、右眼画像ＰＲ、およびＰＴＳデータＤＰ１を、信号Ｓ１２として出力する。スケーラ１３は、左眼画像ＰＬおよび右眼画像ＰＲを、表示部２２の解像度に合うようにスケーリングして出力する。ＣＰＵ１４は、字幕データＤＡＴＡＳに含まれる字幕画像ＤＳ、視差データＤＤ、およびＰＴＳデータＤＰ２を、一組の字幕情報ＩＳとしてメモリ１５に記憶させるように制御する。また、ＣＰＵ１４は、信号Ｓ１２に含まれるＰＴＳデータＤＰ１を監視し、このＰＴＳデータＤＰ１が、メモリ１５に記憶された字幕情報ＩＳのいずれかのＰＴＳデータＤＰ２と一致する場合に、グラフィクスエンジン１６に対して、その字幕情報ＩＳに基づいて左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの生成を指示する。メモリ１５は、ＣＰＵ１４から字幕画像ＤＳ、視差データＤＤ、ＰＴＳデータＤＰ２が供給される度に、これらを一組の字幕情報ＩＳとして記憶する。グラフィクスエンジン１６は、ＣＰＵ１４からの指示に基づいて、メモリ１５から字幕情報ＩＳを読み出し、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。具体的には、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる字幕画像ＤＳに基づいて、字幕画像ＤＳを画像領域の一部に含む字幕画像ＤＳ２を生成する。そして、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる視差データＤＤに基づいて、その字幕画像ＤＳ２に対してフィルタ処理を行うことにより左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。ＯＳＤ部１７は、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの表示位置を設定する。合成部１８は、スケーラ１３から供給された左眼画像ＰＬおよび右眼画像ＰＲと、ＯＳＤ部１７から供給された各レイヤの画像とを重畳する。具体的には、合成部１８は、左眼画像ＰＬに左眼字幕画像ＤＳＬを重畳するとともに、右眼画像ＰＲに右眼字幕画像ＤＳＲを重畳する。そして、合成部１８は、その合成した画像を、映像信号Ｓdisp2として出力する。

表示制御部２１は、映像信号Ｓdisp2に基づいて、表示部２２およびシャッタ制御部２３を制御する。表示部２２は、表示制御部２１による制御に基づいて、左眼字幕画像ＤＳＬが重畳された左眼画像ＰＬと、右眼字幕画像ＤＳＲが重畳された右眼画像ＰＲとを交互に表示する。シャッタ制御部２３は、表示制御部２１による制御に基づいてシャッタ制御信号ＣＴＬを生成し、そのシャッタ制御信号ＣＴＬを、シャッタ眼鏡２４に対して無線通信により送信する。シャッタ眼鏡２４の左眼シャッタ８Ｌおよび右眼シャッタ８Ｒは、表示部２２における表示に同期して、透過状態または遮光状態に変化する。

（字幕表示の立体度の変化について）
以下に、立体字幕画像１００が奥から手前に動的に変化して表示される場合の表示システム１の動作を説明する。

図９は、表示システム１の動作例を模式的に表すものであり、（Ａ）は左眼字幕画像ＤＳＬの表示位置を示し、（Ｂ）は右眼字幕画像ＤＳＲの表示位置を示し、（Ｃ）は立体字幕画像１００を示す。この例では、視差データＤＤは時間の経過とともに徐々に小さくなる。これに伴い、左眼字幕画像ＤＳＬは右方向に移動し（図９（Ａ））、右眼字幕画像ＤＳＲは左方向に移動する（図９（Ｂ））。これにより、観察者９は、図９（Ｃ）に示したように、立体字幕画像１００が、手前に飛び出してくるように感じることとなる。

この一連の動作の際、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲは、図９（Ａ），（Ｂ）に示したように、表示画面内を移動する。その際、グラフィクスエンジン１６は、字幕情報ＩＳに含まれる字幕画像ＤＳに周辺画像ＰＥＲを付して字幕画像ＤＳ２を生成し（図４Ａ，４Ｂ）、その字幕画像ＤＳ２に対してフィルタ処理を行うことにより左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する（図５Ａ，５Ｂ）。これにより、観察者は、立体度がよりスムースに変化するように感じることができる。

すなわち、例えば、字幕画像ＤＳをそのまま互いに反対方向に１画素単位でずらして左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成した場合には、視差データＤＤの変化に応じて左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが表示画面内を移動する際に、観察者９は、不連続な移動を感じるおそれがある。つまり、この例では、第１に、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを、例えば１画素分よりも少ない量（例えば０．５画素分）だけずらすことはできない。そして、第２に、周辺領域ＰＥＲを設けた上でフィルタ処理を行っていないので、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲと、背景の画像との境界が明確になってしまう。これは、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲと、その背景（左眼画像ＰＬおよび右眼画像ＰＲ）の輝度差が大きい場合には、特に顕著になると考えられる。これにより、観察者９は、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの移動を不連続に感じるおそれがある。このように、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが不連続に移動するように感じる場合には、立体度の変化も不連続に感じ、観察者は違和感を覚えるおそれがある。

一方、表示システム１では、字幕画像ＤＳに、輝度情報ＩＲ，ＩＧ，ＩＢ、および透明度αが“０”（ゼロ）である周辺画像ＰＥＲを付して字幕画像ＤＳ２を生成し、その字幕画像ＤＳ２に対して、視差データＤＤに基づいてフィルタ係数（混合比）を切り換えてフィルタ処理を行うことにより左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成している。これにより、第１に、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを、１画素単位だけでなく、例えば１画素分よりも少ない量（例えば０．５画素分）だけ移動させることができる。そして、第２に、周辺領域ＰＥＲを設けた上でフィルタ処理を行うことにより左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの輪郭がぼやける。これにより、観察者９は、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが表示画面内を移動する際、よりなめらかに移動するように感じることとなる。よって、立体度の変化もよりなめらかに感じるため、観察者は立体度がよりスムースに変化するように感じることができる。

［効果］
以上のように本実施の形態では、字幕画像に周辺画像を付加し、その画像に対してフィルタ処理を行うようにしたので、観察者は立体度がよりスムースに変化するように感じることができ、高い画質を実現することができる。

［変形例１−１］
上記実施の形態では、グラフィクスエンジン１６は、３×３のＦＩＲフィルタを用いたが、これに限定されるものではなく、これに代えて、例えば２×２以下、４×４以上、縦方向と横方向のタップ数が異なる構成などのＦＩＲフィルタを用いてもよい。但し、フィルタのタップ数をより増やすと、演算の負荷が大きくなり、また、字幕画像がよりぼやけるおそれがあるため、例えば、３×３、５×５、７×７等の構成が好ましい。

［変形例１−２］
上記実施の形態では、グラフィクスエンジン１６は、常に、字幕画像ＤＳに、輝度情報ＩＲ，ＩＧ，ＩＢ、および透明度αが“０”（ゼロ）である周辺画像ＰＥＲを付して字幕画像ＤＳ２を生成したが、これに限定されるものではなく、例えば、それ以外の動作を行う動作モードを有していてもよい。以下に、本変形例に係る表示システム１Ｂについて説明する。

図１１は、表示システム１Ｂの一構成例を表すものである。表示システム１Ｂは、画像処理部１０Ｂを有する表示部５Ｂを備えている。画像処理部１０Ｂは、グラフィクスエンジン１６Ｂを有している。グラフィクスエンジン１６Ｂは、２つの動作モードＭ１，Ｍ２を有するものであり、動作モード選択信号ＭＳＥＬにより、その動作モードが選択されるようになっている。グラフィクスエンジン１６Ｂは、動作モードＭ１では、上記実施の形態に係るグラフィクスエンジン１６と同様の動作を行う。一方、動作モードＭ２では、以下のような動作を行う。

図１２は、グラフィクスエンジン１６Ｂの、動作モードＭ２における動作を表すものである。動作モードＭ２では、グラフィクスエンジン１６Ｂは、字幕画像ＤＳに、周辺画像ＰＥＲＢを付して字幕画像ＤＳ２Ｂを生成する。この周辺画像ＰＥＲＢは、字幕画像ＤＳにおける一番外側の輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αと同じ情報を有するものである。そして、グラフィクスエンジン１６Ｂは、このようにして生成した字幕画像ＤＳ２Ｂに対してフィルタ処理を行うことにより左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成するようになっている。これにより、動作モードＭ２では、メモリ１５内の不要な情報が字幕画像の一部に現れるおそれを低減することができる。

［変形例１−３］
上記実施の形態では、字幕画像ＤＳ２全体に対してフィルタ処理を行うようにしたが、これに限定されるものではなく、これに代えて、例えば、字幕画像ＤＳ２の一部についてのみフィルタ処理を行うようにしてもよい。具体的には、グラフィクスエンジン１６の演算能力が低い場合には、例えば、字幕画像ＤＳ２内の周辺画像ＰＥＲ付近のみに対してフィルタ処理を行うようにしてもよい。この場合でも、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの輪郭がぼやけるため、観察者は立体度がよりスムースに変化するように感じることができる。また、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲの表示画面内での移動方向に応じて、フィルタ処理の対象領域を変更するように構成してもよい。具体的には、例えば、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが横方向に移動する場合には、図１３に示したように、周辺画像ＰＥＲの左辺付近および右辺付近のみに対してフィルタ処理を行うようにしてもよい。

［変形例１−４］
上記実施の形態では、映像信号Ｓdispに含まれる字幕画像ＤＳは、輝度情報ＩＲ，ＩＧ，ＩＢに加えて透明度αの情報を有するものとしたが、これに限定されるものではなく、これに代えて、例えば、映像信号Ｓdispに含まれる字幕画像ＤＳは、輝度情報ＩＲ，ＩＧ，ＩＢのみを有し、ＣＰＵ１４が、字幕画像ＤＳの画素ごとに立体度αを付与するようにしてもよい。

［変形例１−５］
上記実施の形態では、字幕画像ＤＳ〜ＤＳ２の形状を四角形としたが、これに限定されるものではなく、どのような形状であってもよい。具体的には、四角形の角が丸まった形状や、円や楕円でもよい。また、字幕表示を行う文字そのものの形状であってもよい。

［変形例１−６］
上記実施の形態では、映像信号Ｓdispにより字幕画像ＤＳ自体が供給されるようにしたが、これに限定されるものではなく、これに代えて、例えば、字幕表示を行う文字の文字コードが映像信号Ｓdispにより供給され、その文字コードによりＣＰＵ１４が字幕画像ＤＳを生成するようにしてもよい。

［変形例１−７］
上記実施の形態では、ハードウェアであるグラフィクスエンジン１６が、字幕画像ＤＳなどに基づいて左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成したが、これに限定されるものではなく、これに代えて、例えば、同様の機能をソフトウェアにより実現してもよい。

［変形例１−８］
上記実施の形態では、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲが移動する場合を想定したが、これに限定されるものではなく、拡大や縮小など、その画像領域が動的に変化するような様々なケースに適用することができる。

［変形例１−９］
上記実施の形態では、画像処理部１０は、輝度信号ＩＲ，ＩＧ，ＩＢからなるＲＧＢ信号に対して処理を行うものとしたが、これに限定されるものではなく、他のフォーマットの信号に対して処理を行うようにしてもよい。具体的には、例えば、輝度信号Ｙおよび色差信号Ｃｂ，ＣｒからなるＹＣｂＣｒ信号を用いることができる。この場合、周辺画像ＰＥＲにおいて、輝度信号Ｙは全て“０”に設定され、色差信号Ｃｂ，Ｃｒは、例えば８ビット表現においてそれぞれ１２８に設定される。なお、これに限定されるものではなく、輝度信号Ｙを“０”以外の低い値に設定してもよい。

［変形例１−１０］
上記実施の形態では、グラフィクスエンジン１６は、メモリ領域に周辺画像ＰＥＲを用意するようにしたが、これに限定されるものではなく、これに代えて、例えば、フィルタ処理のいわゆる端処理を用いてもよい。具体的には、通常の端処理では、字幕画像ＤＳの端における輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αをコピーして周辺画像ＰＥＲを生成するが、その代わりに、透明な画素情報（輝度情報ＩＲ，ＩＧ，ＩＢ、および透明度αが“０”（ゼロ））をコピーして周辺画像ＰＥＲを生成してもよい。

＜２．第２の実施の形態＞
次に、第２の実施の形態に係る表示システム２について説明する。本実施の形態は、字幕画像が他の字幕画像と隣接する場合において、グラフィクスエンジンにおける処理方法を変更するものである。なお、上記第１の実施の形態に係る表示システム１と実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。

図１に示したように、表示システム２は、画像処理部２０を有する表示装置６を備えている。画像処理部２０は、グラフィクスエンジン２６を有している。グラフィクスエンジン２６は、左眼字幕画像ＤＳＬまたは右眼字幕画像ＤＳＲが、表示画面上の他の字幕画像と隣接するときに、上記実施の形態に係るグラフィクスエンジン１６と異なる処理を行うものである。

図１４は、字幕Ｓ１の立体度が変化し、字幕Ｓ２の立体度が変化しない場合を表すものである。この例では、左眼字幕画像ＤＳＬが、他の左眼字幕画像ＤＳＬ２に近づいていき、タイミングｔ２において左眼字幕画像ＤＳＬと左眼字幕画像ＤＳＬとが隣接している。

グラフィクスエンジン２６は、このように、左眼字幕画像ＤＳＬまたは右眼字幕画像ＤＳＲが他の字幕画像（この例では字幕Ｓ２）と隣接すると見込まれる場合には、後述するように、周辺画像ＰＥＲ２に、この他の字幕画像の一部を用いるようになっている。

図１５，１６は、図１４におけるタイミングｔ１，ｔ２に対応する周辺画像ＰＥＲ２を表すものである。グラフィクスエンジン２６は、周辺画像ＰＥＲ２の領域のうち、字幕Ｓ２の画像領域と重なる部分における、輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αを、重なる領域における字幕２の画像の輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αと同じ値に設定する。また、グラフィクスエンジン２６は、周辺画像ＰＥＲ２の領域のうちのそれ以外領域については、上記第１の実施の形態の場合と同様に、輝度情報ＩＲ，ＩＧ，ＩＢおよび透明度αを“０”（ゼロ）に設定する。そして、グラフィクスエンジン２６は、字幕画像ＤＳとこの周辺画像ＰＥＲ２からなる字幕画像ＤＳ２に対して、上記第１の実施の形態の場合と同様にフィルタ処理を行うことにより、左眼字幕画像ＤＳＬおよび右眼字幕画像ＤＳＲを生成する。

このように、グラフィクスエンジン２６は、左眼字幕画像ＤＳＬまたは右眼字幕画像ＤＳＲが他の字幕画像（字幕Ｓ２）と隣接すると見込まれる場合に、この他の字幕画像の一部を用いて周辺画像ＰＥＲ２の一部を生成している。これにより、観察者は立体度がよりスムースに変化するように感じることができるとともに、隣接する字幕の間が不自然に表示されるおそれを低減することができる。

以上のように本実施の形態では、左眼字幕画像または右眼字幕画像が他の字幕画像と隣接すると見込まれる場合には、この他の字幕画像の一部を用いて周辺画像の一部を生成したので、観察者は立体度がよりスムースに変化するように感じることができるとともに、隣接する字幕の間が不自然に表示されるおそれを低減することができ、画質を高めることができる。

＜３．適用例＞
次に、上記実施の形態および変形例で説明した画像処理装置の適用例について説明する。

図１７は、上記実施の形態等の画像処理装置が適用されるテレビジョン装置の外観を表すものである。このテレビジョン装置は、例えば、フロントパネル５１１およびフィルターガラス５１２を含む映像表示画面部５１０を有している。このテレビジョン装置は、上記実施の形態等の画像処理装置が適用されている。

上記実施の形態等の画像処理装置は、このようなテレビジョン装置の他、ヘッドマウントディスプレイ、パーソナルコンピュータ、ゲーム機などのあらゆる分野の電子機器に適用することが可能である。言い換えると、上記実施の形態等の画像処理装置は、画像処理を行うあらゆる分野の電子機器に適用することが可能である。

以上、いくつかの実施の形態および変形例、ならびに電子機器への適用例を挙げて本技術を説明したが、本技術はこれらの実施の形態等には限定されず、種々の変形が可能である。

例えば、上記の各実施の形態では、立体表示装置に本技術を適用したが、これに限定されるものではなく、２次元の表示装置に本技術を適用してもよい。具体的には、例えば、図１８に示すように、表示画面において、字幕が例えば左から右に移動していく場合や、図１９に示すように、字幕が徐々に拡大される場合など、字幕が動的に変化する場合に適用することができる。これにより、観察者は、字幕がよりスムースに変化するように感じることができる。

また、例えば、上記の各実施の形態では、シャッタ眼鏡を用いた立体表示装置に本技術を適用したが、これに限定されるものではなく、これに代えて、例えば、視差バリア（パララックスバリア）方式の表示装置に適用してもよい。

なお、本技術は以下のような構成とすることができる。

（１）第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
フレーム画像と前記第３のサブ画像とを合成する合成部と
を備えた画像処理装置。

（２）前記第２のサブ画像を構成する各画素データは、輝度情報と透明度情報とを有し、
前記サブ画像生成部は、前記輝度情報と、前記透明度情報のそれぞれに対して前記フィルタ処理を行う
前記（１）に記載の画像処理装置。

（３）前記周辺画像全体が前記第１の領域である
前記（１）または（２）に記載の画像処理装置。

（４）前記周辺画像は、他のサブ画像と重なる第２の領域を含み、
前記サブ画像生成部は、前記第２の領域において、前記周辺画像における各画素の輝度レベルを、前記他のサブ画像における対応する画素の輝度レベルに置き換えるとともに、前記周辺画像における各画素の透明度レベルを、前記他のサブ画像における対応する画素の透明度レベルに置き換える
前記（１）または（２）に記載の画像処理装置。

（５）前記第３のサブ画像は、左眼サブ画像または右眼サブ画像であり、
前記フレーム画像は、左眼フレーム画像または右眼フレーム画像であり、
前記合成部は、前記左眼フレーム画像に対して前記左眼サブ画像を合成するとともに、前記右眼フレーム画像に対して前記右眼サブ画像を合成する
前記（１）から（４）のいずれかに記載の画像処理装置。

（６）前記左眼サブ画像と、前記右眼サブ画像とは、時間とともに互いに異なる方向に移動する
前記（５）に記載の画像処理装置。

（７）第１の動作モードを含む複数の動作モードを有し、
前記サブ画像生成部は、前記第１の動作モードにおいて、前記第１のサブ画像の周囲に前記周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む前記第２のサブ画像の全体またはその一部に対してフィルタ処理を行い前記第３のサブ画像を生成する
前記（１）から（６）のいずれかに記載の画像処理装置。

（８）前記第１のサブ画像は、フレーム内において時間とともに動的に移動し、拡大し、または縮小して表示されるべきものである
前記（１）から（７）のいずれかに記載の画像処理装置。

（９）前記第１の領域は、輝度レベルが最低レベルであり、透明度レベルが最高レベルである
前記（１）から（８）のいずれかに記載の画像処理装置。

（１０）第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成し、
フレーム画像と前記第３のサブ画像とを合成する
画像処理方法。

（１１）画像処理部と、
前記画像処理部により処理された画像を表示する表示部と
を備え、
前記画像処理部は、
第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
フレーム画像と前記第３のサブ画像とを合成する合成部と
を有する
表示装置。

（１２）画像処理部と、
前記画像処理部に対して動作制御を行う制御部と
を備え、
前記画像処理部は、
第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
フレーム画像と前記第３のサブ画像とを合成する合成部と
を有する
電子機器。

１，１Ｂ，２…表示システム、５，５Ｂ，６…表示装置、８Ｌ…左眼シャッタ、８Ｒ…右眼シャッタ、１０，１０Ｂ，２０…画像処理部、１１…ＤＥＭＵＸ，１２…ビデオデコーダ、１３…スケーラ、１４…ＣＰＵ、１５…メモリ、１６，１６Ｂ…グラフィクスエンジン、１７…ＯＳＤ部、１８…合成部、２１…表示制御部、２２…表示部、２３…シャッタ制御部、２４…シャッタ眼鏡、１００…立体字幕画像、ＣＴＬ…制御信号、ＤＡＴＡＡ…音声データ、ＤＡＴＡＰ…画像データ、ＤＡＴＡＳ…字幕データ、ＤＤ…視差データ、ＤＰ１，ＤＰ２…ＰＴＳデータ、ＤＳ，ＤＳ２，ＤＳ２Ｂ…字幕画像、ＤＳＬ…左眼字幕画像、ＤＳＲ…右眼字幕画像、ＭＳＥＬ…動作モード選択信号、ＰＥＲ，ＰＥＲＢ，ＰＥＲ２…周辺画像、ＩＳ…字幕情報、Ｓdisp，Ｓdisp2…映像信号。

Claims (12)

1. 第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
   フレーム画像と前記第３のサブ画像とを合成する合成部と
   を備えた画像処理装置。
2. 前記第２のサブ画像を構成する各画素データは、輝度情報と透明度情報とを有し、
   前記サブ画像生成部は、前記輝度情報と、前記透明度情報のそれぞれに対して前記フィルタ処理を行う
   請求項１に記載の画像処理装置。
3. 前記周辺画像全体が前記第１の領域である
   請求項１に記載の画像処理装置。
4. 前記周辺画像は、他のサブ画像と重なる第２の領域を含み、
   前記サブ画像生成部は、前記第２の領域において、前記周辺画像における各画素の輝度レベルを、前記他のサブ画像における対応する画素の輝度レベルに置き換えるとともに、前記周辺画像における各画素の透明度レベルを、前記他のサブ画像における対応する画素の透明度レベルに置き換える
   請求項１に記載の画像処理装置。
5. 前記第３のサブ画像は、左眼サブ画像または右眼サブ画像であり、
   前記フレーム画像は、左眼フレーム画像または右眼フレーム画像であり、
   前記合成部は、前記左眼フレーム画像に対して前記左眼サブ画像を合成するとともに、前記右眼フレーム画像に対して前記右眼サブ画像を合成する
   請求項１に記載の画像処理装置。
6. 前記左眼サブ画像と、前記右眼サブ画像とは、時間とともに互いに異なる方向に移動する
   請求項５に記載の画像処理装置。
7. 第１の動作モードを含む複数の動作モードを有し、
   前記サブ画像生成部は、前記第１の動作モードにおいて、前記第１のサブ画像の周囲に前記周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む前記第２のサブ画像の全体またはその一部に対してフィルタ処理を行い前記第３のサブ画像を生成する
   請求項１に記載の画像処理装置。
8. 前記第１のサブ画像は、フレーム内において時間とともに動的に移動し、拡大し、または縮小して表示されるべきものである
   請求項１に記載の画像処理装置。
9. 前記第１の領域は、輝度レベルが最低レベルであり、透明度レベルが最高レベルである
   請求項１に記載の画像処理装置。
10. 第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成し、
    フレーム画像と前記第３のサブ画像とを合成する
    画像処理方法。
11. 画像処理部と、
    前記画像処理部により処理された画像を表示する表示部と
    を備え、
    前記画像処理部は、
    第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
    フレーム画像と前記第３のサブ画像とを合成する合成部と
    を有する
    表示装置。
12. 画像処理部と、
    前記画像処理部に対して動作制御を行う制御部と
    を備え、
    前記画像処理部は、
    第１のサブ画像の周囲に、透明領域である第１の領域を少なくとも含む周辺画像を設け、前記第１のサブ画像および前記周辺画像を含む第２のサブ画像の全体またはその一部に対してフィルタ処理を行い第３のサブ画像を生成するサブ画像生成部と、
    フレーム画像と前記第３のサブ画像とを合成する合成部と
    を有する
    電子機器。
    
    
    

Images