JP2016500947A - ３次元画像における画像オーバーレイの奥行きの調整 - Google Patents

Abstract

３Ｄ画像信号を処理するためのシステムが提供される。３Ｄ画像信号は、２Ｄ画像信号（図４ａ）と、３Ｄディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号（図４ｂ）とを備える。システムは、２Ｄ画像信号内のユーザ定義２Ｄ領域（１８２）をユーザが確立することを可能にするためのユーザインタフェースサブシステム（１８０）と、２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域（１４２）を定義するための領域定義器（１４０）と、ｉ）２Ｄ画像信号を３Ｄレンダリングする際の表示領域内の所望の量の奥行き低減を表現する奥行き低減パラメータを取得し、ｉｉ）奥行き低減パラメータから調整値を導き出すための奥行きプロセッサ（１６０）とを備える。したがって、表示領域内の奥行き低減は、すなわち、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって、確立されることができる。システムは、３Ｄ画像信号内のハードコード化されたオーバーレイに対して奥行き低減を適用するために有利的に用いられてもよい。

Description

本発明は、２次元［２Ｄ］画像信号と３次元［３Ｄ］ディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するためのシステムおよび方法に関する。本発明は、さらに、本システムを備える３Ｄディスプレイ装置に関する。

テレビ受像機、デジタルフォトフレーム、タブレット、およびスマートフォンなどのディスプレイ装置は、このような装置上でコンテンツを閲覧する際にユーザに奥行き知覚を提供する３Ｄディスプレイを備えるようになってきている。そのために、このような３Ｄディスプレイ装置は、立体視、すなわち立体的奥行き知覚に基づく奥行き知覚をユーザに提供するために、装置自身により、若しくはユーザによって着用された眼鏡と組み合わせて、ユーザの各々の眼に個別の画像を提供することができる。

３Ｄディスプレイ装置は、典型的には、奥行きの程度を有するように画面上のコンテンツを確立するために、奥行き情報を含むコンテンツを用いる。奥行き情報は、コンテンツ内に暗に備えられてもよい。例えば、いわゆる立体的コンテンツの場合、奥行き情報は、立体的コンテンツの左画像信号と右画像信号との間の差分によって提供される。左右の画像信号は、組み合わさって、それにより立体的３Ｄ画像信号を構成する。奥行き情報は、また、コンテンツ内に明示的に備えられてもよい。例えば、いわゆる画像＋奥行き形式で符号化されたコンテンツにおいて、奥行き情報は、２Ｄ画像信号内部のオブジェクトのカメラまたは視聴者に対する距離を示す奥行き値を備える２Ｄ奥行き信号によって提供される。奥行き値の代わりに、視差値が用いられてもよい。すなわち、２Ｄ奥行き信号は、２Ｄ視差信号であってもよいし、または、一般に、２Ｄ奥行き関連信号であってもよい。２Ｄ画像信号および２Ｄ奥行き関連信号は、立体的３Ｄ画像信号の代替物（ａｌｔｅｒｎａｔｉｖｅ）をともに構成する。

本質的には、３Ｄ画像信号は、したがって少なくとも１つの２Ｄ画像信号および１つの２Ｄ補助信号から構成され、後者は、例えば、２Ｄ奥行き関連信号であるか、または２Ｄ画像信号とともに立体的３Ｄ画像信号を構成するさらなる２Ｄ画像信号である。

３Ｄディスプレイ自体に関して、いわゆる自動立体視ディスプレイは、視聴者が偏向眼鏡またはシャッタ系眼鏡をかけることを必要とせずに、前記立体的奥行き知覚を提供する。そのために、レンチキュラーレンズアレイ（または一般にレンズ手段またはバリア手段）などの光学部品が用いられ、それによって、ディスプレイは、３Ｄディスプレイ上の各々の所定のポイントから、少なくともシーンの左視点（ｌｅｆｔ ｖｉｅｗ）および右視点（ｒｉｇｈｔ ｖｉｅｗ）を備えるビューイングコーンを発することができる。これによって、視聴者は、ビューイングコーンの範囲内にしたがって位置決めされる際に、それぞれの眼で異なる画像を見ることができる。時として自動多視点ディスプレイとも呼ばれる、一部の自動立体視ディスプレイは、左視点および右視点だけではなく、同じシーンの複数の視点を提供する。これは、シーンの立体的知覚を依然として得ながら、視聴者がビューイングコーン内の複数位置を想定すること、すなわちディスプレイの前で左右に動くことを可能にする。

このような自動立体視ディスプレイの例は、Ｃ．ｖａｎ Ｂｅｒｋｅｌ ｅｔ ａｌ、
“Ｍｕｌｔｉｖｉｅｗ ３Ｄ − ＬＣＤ”、 ＳＰＩＥ Ｐｒｏｃｅｅｄｉｎｇｓ Ｖｏｌ．２６５３、 １９９６、 ｐａｇｅｓ ３２―３９、および、ＧＢ−Ａ−２１９６１６６に記載されている。これらの例において、自動立体視ディスプレイは、行列配置の画素（表示素子）を有するとともに光源からの光を変調する空間光変調器として機能する、マトリックスＬＣ（液晶）表示パネルを備える。この表示パネルは、他の表示用途、例えば表示情報を２次元形式で表示するコンピュータディスプレイ画面に使用される種類のものとすることができる。例えばモールド成形または機械加工されたポリマ材料シート状のレンチキュラーシートは、表示パネルの出力側上から覆い被さり、レンチキュラー素子は、列方向に延伸する（半）円柱レンズ素子を備え、各レンチキュラー素子は、２以上の隣接表示素子列のそれぞれの群に関連するとともに表示素子列と平行に延びる面に延伸する。各レンチキュラーが２列の表示素子と関連する構成において、表示パネルは、垂直方向にインタリーブされた２つの２Ｄサブ画像からなる合成画像を表示するよう駆動され、交互の表示素子列は、２つの画像を表示し、各列の表示素子は、それぞれの２Ｄ（サブ）画像の垂直スライスを提供する。レンチキュラーシートは、これらの２つのスライスおよび他のレンチキュラーに関連する表示素子列からの対応するスライスを、シート前方の視聴者の左眼および右眼にそれぞれ向け、その結果、サブ画像は適切な視差を有し、視聴者は単一の立体画像を知覚する。各レンチキュラーが行方向の３以上の隣接表示素子の群に関連するとともに、各群の対応する列の表示素子がそれぞれの２Ｄ（サブ）画像からの垂直スライスを提供するように適切に配置された他の多視点構成において、視聴者の頭を動かすにつれて、一連の連続的に異なる立体視が知覚され、例えば周囲を見回す印象を生じる。

上記の種類の自動立体視ディスプレイは、例えば、家庭用娯楽機器またはポータブル娯楽機器、医療用画像およびコンピュータ支援設計（ＣＡＤ）における、各種用途に用いられ得る。

独国特許出願公開第２１９６１６６号明細書 米国特許出願公開第２０１１／０３１６９９１号明細書 欧州特許出願公開第４５１１７６号明細書 米国特許出願公開第２０１２／０１６２１９９号明細書

Ｃ．ｖａｎ Ｂｅｒｋｅｌ ｅｔ ａｌ 、"Ｍｕｌｔｉｖｉｅｗ ３Ｄ − ＬＣＤ"、ＳＰＩＥ Ｐｒｏｃｅｅｄｉｎｇｓ Ｖｏｌ．２６５３、 １９９６、 ｐａｇｅｓ ３２―３９

発明者等は、３Ｄディスプレイ上の３Ｄ画像信号のコンテンツを閲覧する場合、表示面からあまり離れてない表示奥行きにおいて（すなわち、比較的ニュートラルな表示奥行きにおいて）、コンテンツ内のあらゆる高細部の特徴も最良に表示されることを認識した。この理由は、ユーザによって知覚された立体的なサブ画像間に、光学的クロストークなどのクロストークが生じ得る、ということである。このようなクロストークは、典型的には、いわゆるゴーストに結びつく。一般的にゴーストは、視聴者の気を散らす。コンテンツ内の高細部の特徴におけるゴーストは、視聴者の気を特に散らす。比較的ニュートラルな表示奥行きで高細部の特徴を表示することによって、このようなゴーストは低減される。

このような高細部の特徴の例は、字幕、放送局のロゴ、若しくはグラフィカルユーザインタフェース（ＧＵＩ）要素、または、一般に、読み取り可能な形式でユーザに対して表示する必要がある小さいテキストを含む何らかのものである。一般に、このような高細部の特徴は、典型的には別のタイプのコンテンツ上にオーバーレイされる、字幕、ロゴなどによるオーバーレイとして、今後呼ばれる。

このようなオーバーレイが２Ｄ画像信号から分離されて（例えば、３Ｄ画像信号内部の若しくは３Ｄ画像信号の隣の分離したレイヤまたはストリームとして）配信される場合、オーバーレイは、オーバーレイに対応する奥行き値を割り当てることによって、表示面からあまり離れていない奥行きで表示されることができる。しかしながら、例えば、字幕は、コンテンツの前面に、すなわち、字幕の下にあって字幕を取り囲むコンテンツよりも視聴者の近くに、字幕を配置する奥行きを割り当てられる、という制約を考慮に入れなければならない。発明者等は、オーバーレイが既にコンテンツに合成されている場合に、すなわち、３Ｄ画像信号内でハードコード化される場合に、このような奥行きの割り当てがより一層困難である、ということを認識した。画像解析の分野からそれ自身知られているように、例えばオーバーレイ検出を用いて（オーバーレイセグメント化としても知られている）オーバーレイを検出することは可能であるが、このようなオーバーレイ検出は、しばしば不十分である。そのため、検出されたオーバーレイは、３Ｄ画像信号内で実際のオーバーレイに完全には一致しないかもしれない。特に（サブ）画素の正確なオーバーレイの検出は、困難である。

原則として、３Ｄ画像信号を生成する際に、オーバーレイに対して比較的ニュートラルな表示奥行きを以前から割り当てることは可能である。そのために、本質的に、または設計により、オーバーレイに対して前記ニュートラルな表示奥行きを割り当てることを企図する、２Ｄから３Ｄへの変換が用いられてもよい。但し、発明者等は、字幕のような小さいテキストに対する奥行き推定は、それらが分離した薄型構造を備えるので、困難である、ということを認識した。結果的に、奥行き推測器がこのようなオーバーレイの分離した部分に対して同じ奥行きを割り当てることは、困難である。これは、このようなオーバーレイに対して割り当てられた奥行きの揺らぎを（空間的に且つ時間的に）もたらす可能性がある。これらは、視聴者にとって、非常に気を散らすことになる可能性がある。

上記の問題を解決するシステムおよび方法を提供することは有利になるだろう。

本発明の第１の態様は、２次元［２Ｄ］画像信号と３次元［３Ｄ］ディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するためのシステムであって、
２Ｄ画像信号および２Ｄ補助信号を取得するための信号入力と、
２Ｄ画像信号内のユーザ定義２Ｄ領域をユーザが確立することを可能にするためのユーザインタフェースサブシステムと、
ユーザ定義２Ｄ領域に基づいて、２Ｄ補助信号を用いて２Ｄ画像信号を３Ｄレンダリングする際に３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域を定義するための領域定義器と、
ｉ）３Ｄディスプレイ上で２Ｄ画像信号を３Ｄレンダリングする際にニュートラルな表示奥行きに向かって表示領域内の所望の量の奥行き低減を表現する奥行き低減パラメータを取得し、ｉｉ）調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すための奥行きプロセッサと
を備えるシステムを提供する。

本発明のさらなる態様は、前述のシステムを備える３Ｄディスプレイ装置を提供する。

本発明のさらなる態様は、２次元［２Ｄ］画像信号と３次元［３Ｄ］ディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するための方法であって、
２Ｄ画像信号および２Ｄ補助信号を取得するステップと、
ユーザが２Ｄ画像信号内のユーザ定義２Ｄ領域を確立することを可能にするステップと、
ユーザ定義２Ｄ領域に基づいて、２Ｄ補助信号を用いて２Ｄ画像信号を３Ｄレンダリングする際に３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域を定義するステップと、
３Ｄディスプレイ上で２Ｄ画像信号を３Ｄレンダリングする際にニュートラルな表示奥行きに向かって表示領域内の所望の量の奥行き低減を表現する奥行き低減パラメータを取得するステップと、
調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すステップと
を備える方法を提供する。

本発明のさらに態様は、プロセッサシステムに前述の方法を実行させるための命令を備えるコンピュータプログラムプロダクトを提供する。

上記の方策は、２Ｄ画像信号内のユーザ定義２Ｄ領域をユーザが定義することを可能にするためのユーザインタフェースサブシステムを提供する。例えば、ユーザは、矩形のユーザ定義２Ｄ領域の上面、底側、左側、および右側を定義するために、または複数の所定の２Ｄ領域の中のユーザ定義２Ｄ領域を選択するために、グラフィカルユーザインタフェース（ＧＵＩ）などを用いてユーザ定義２Ｄ領域を定義してもよい。ユーザ定義２Ｄ領域に基づいて、２Ｄ領域は、２Ｄ補助信号内に定義される。２Ｄ領域は、２Ｄ補助信号を用いて２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する。奥行き低減パラメータは、表示領域内の所望の量の奥行き低減を表現する奥行き低減パラメータを伴う表示領域のために取得される。ここで、用語「奥行き低減（ｄｅｐｔｈ ｒｅｄｕｃｔｉｏｎ）」は、３Ｄディスプレイ上で２Ｄ画像信号を３Ｄレンダリングする際のニュートラルな表示奥行きに向かう低減を表す。奥行き低減が確立されることを可能にするために、調整値は、奥行き低減パラメータから導き出される。したがって、表示領域内の奥行き低減は、すなわち、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって、確立されることができる。

上記の方策は、２Ｄ領域が定義されて、調整値が提供される、という効果があり、それはともに、調整値に基づく２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域内の奥行き低減を確立することを可能にする。これは、３Ｄ画像信号がハードコード化されたオーバーレイを備える場合、ユーザは、ハードコード化されたオーバーレイを含むユーザ定義２Ｄ領域を定義することを可能にされ、それによって、表示領域内のハードコード化されたオーバーレイの奥行きがニュートラルな表示奥行きに向けて低減されることを可能にする調整値を、補助信号内の対応する２Ｄ領域のためにシステムに供給させる、という有利な効果がある。したがって、奥行き推測器がハードコード化されたオーバーレイに対して誤った奥行きを割り当てた場合に、誤った奥行きは低減されることができ、それによって、このような誤った奥行きに典型的に関連する奥行き揺らぎをも低減する。有利なことには、前述の理由のために、しばしば不完全な（自動）オーバーレイ検出に依存する必要はない。むしろ、ユーザは、自身で、すなわち手動で、ユーザ定義２Ｄ領域を定義することが可能になる。

米国特許出願公開第２０１１／０３１６９９１号明細書が、入力された左眼画像および右眼画像の各々上で視差調整を実行する視差調整部と、視差調整部による視差調整の結果として得られた左眼画像および右眼画像を表示するディスプレイ部とを含む立体表示装置を記載する、ということに留意されたい。視差調整部は、左眼画像および右眼画像の各々の中に重ね合わせられたＯＳＤ画像を伴うＯＳＤ画像領域とは別の領域上にのみ視差調整を実行する。したがって、米国特許出願公開第２０１１／０３１６９９１号明細書は、視差制御からＯＳＤ画像を除外する。但し、米国特許出願公開第２０１１／０３１６９９１号明細書は、３Ｄディスプレイ上の表示領域内の奥行き低減を確立するために、ユーザ定義２Ｄ領域をユーザが確立できるようにする、ということは開示しない。むしろ、米国特許出願公開第２０１１／０３１６９９１号明細書は、視差制御が除外される一定の領域、すなわちＯＳＤ画像の領域と、相補的な領域、すなわち視差制御が適用される残りの画像部分とを選択する。実際、米国特許出願公開第２０１１／０３１６９９１号明細書において、ＯＳＤ画像は、システムにおいて明確に利用可能である。したがって、米国特許出願公開第２０１１／０３１６９９１号明細書は、３Ｄ画像信号においてハードコード化されたオーバーレイを扱うための解決手段を供しない。

欧州特許出願公開第２４５１１７６号明細書は、３Ｄカメラを用いて話者に対応する複数の２Ｄ画像を取得するステップと、話者の事前に確立された特徴点を用いて、複数の２Ｄ画像の収斂のポイントを調整するステップと、取得された複数の２Ｄ画像を用いて、話者と３Ｄカメラとの間に配置されたオブジェクトを検出するステップと、奥行きの新たな感知に対して、検出されたオブジェクトの奥行きのオリジナルの感知をスケーリングするステップと、奥行きの新たな感知をもつオブジェクトを含む３Ｄ話者画像を生成して、リスナーの３Ｄ映像通信装置に対して３Ｄ話者画像を伝送するステップとを含むと述べられている、３Ｄ映像通信の映像通信方法を記載する。但し、欧州特許出願公開第２４５１１７６号明細書は、３Ｄディスプレイ上の表示領域内の奥行き低減を確立するために、ユーザがユーザ定義２Ｄ領域を確立できるようにする、ということは開示しない。むしろ、欧州特許出願公開第２４５１１７６号明細書において、オブジェクトは、オブジェクト検出部１３５を用いて自動的に検出される（［００７７］）。実際、欧州特許出願公開第２４５１１７６号明細書は、オブジェクトを検出するためにオブジェクトの奥行きを使用し、すなわち、オブジェクトは、３Ｄで事実上配置され（［００７７−００８２］）、その結果として、３Ｄカメラによって正確に取得された距離に依存する。奥行き推測器は、誤った奥行きを割り当てるかもしれない３Ｄ画像信号においてハードコード化されたオーバーレイを扱うための解決手段を提供しない、ということは認識されるだろう。

米国特許出願公開第２０１２／０１６２１９９号明細書は、３Ｄ拡張現実感を表示するための装置および方法を記載する。拡張現実感が３Ｄ画像として実施される場合に、いくつかの３Ｄ拡張情報が情報配信効率の点から劣化され得る、ということが述べられる。３Ｄ画像の左画像フレームの第１のオブジェクト領域と３Ｄ画像の選択されたオブジェクトに基づく３Ｄ画像の右画像フレームの第２のオブジェクト領域とを検出するオブジェクト領域検出部と、選択されたオブジェクトの３Ｄ効果を変更する左画像フレームおよび右画像フレームを調整するフレーム調整部とを備えることによって、３Ｄ拡張現実感画像の選択されたオブジェクトから３Ｄ効果が選択的に取り除かれ得る、ということがさらに述べられる。但し、米国特許出願公開第２０１２／０１６２１９９号明細書において、オブジェクトは、それ自身既知であり、すなわち、オブジェクト情報によって定義され［００３６および００４８を参照］、それにより、どのオブジェクトがユーザによって選択されているのかを装置が知ることができる、または、オブジェクトが自動的に選択されることも可能にする［００５９を参照］。したがって、３Ｄディスプレイ上の表示領域内の奥行き低減を確立するためにユーザがユーザ定義２Ｄ領域を確立することを可能にする代わりに、米国特許出願公開第２０１２／０１６２１９９号明細書は、ユーザがオブジェクト情報を介してオブジェクトを直接選択することを可能にする。米国特許出願公開第２０１２／０１６２１９９号明細書は、したがって、オブジェクト情報によって定義されたオブジェクトの３次元効果をいかにして除去するのかの問題に対処するものの、３Ｄ画像信号内のハードコード化されたオーバーレイを扱う際の解決手段を供しない、すなわち、このようなオブジェクト情報は利用可能ではない。

以下、本発明のオプションの態様を記載する。

オプションとして、領域定義器は、３Ｄ画像信号内のオーバーレイを検出するためのオーバーレイ検出器を備え、ユーザインタフェースサブシステムは、検出されたオーバーレイに基づいてユーザがユーザ定義２Ｄ領域を確立することを可能にするように構成される。オーバーレイ検出器は３Ｄ画像信号内のハードコード化されたオーバーレイを完全に検出することを失敗するかもしれない、ということは認識されているが、しかしながら、検出されたオーバーレイは、ユーザ定義２Ｄ領域を定義する際にユーザためのベースとして用いられ得る。例えば、検出されたオーバーレイは、ハードコード化されたオーバーレイの位置に向けてユーザを誘導することができ、それによって、ユーザが迅速且つ便利にユーザ定義２Ｄ領域を定義することを可能にする。別の例は、時々は、検出されたオーバーレイが十分によく検出され得るということであり、それによって、検出されたオーバーレイに直接基づいてユーザがユーザ定義２Ｄ領域を定義することを可能にする。

オプションとして、ユーザインタフェースサブシステムは、
ユーザ定義２Ｄ領域を初期化し、および／または
ユーザ定義２Ｄ領域を確立する際に、「グリッドにスナップ」機能性（ｓｎａｐ−ｔｏ−ｇｒｉｄ ｆｕｎｃｔｉｏｎａｌｉｔｙ）を、ユーザに提供するためのグリッドを確立するように、検出されたオーバーレイを用いるために構成される。

オプションとして、ユーザインタフェースサブシステムは、表示領域内の所望の量の奥行き低減をユーザが指定することを可能にし、それによって、奥行き低減パラメータを確立するように構成される。

オプションとして、信号入力は、既定の２Ｄ領域を示すメタデータを取得するように構成され、領域定義器は、既定の２Ｄ領域に基づいて２Ｄ領域を定義するように構成される。

オプションとして、奥行きプロセッサは、信号値に対してオフセット値を適用することによって２Ｄ領域内部の２Ｄ補助信号の信号値を調整することを可能にするために、奥行き低減パラメータから前記オフセット値を導き出すにように構成される。

オプションとして、２Ｄ補助信号は、２Ｄ奥行き関連信号であり、奥行きプロセッサは、信号値に対してゲイン値を適用することによって２Ｄ領域内部の２Ｄ奥行き関連信号の信号値を調整することを可能にするために、奥行き低減パラメータからゲイン値を導き出すように構成される。

オプションとして、奥行きプロセッサは、表示領域内の奥行き低減を確立するために、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整するように構成される。

オプションとして、奥行きプロセッサは、信号値をニュートラルな奥行き値にアルファブレンドすることに基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整するように構成される。

オプションとして、奥行きプロセッサは、２Ｄ領域内部の調整された信号値と２Ｄ領域外部の調整されていない信号値との間の段階的遷移を確立するように構成される。

オプションとして、段階的遷移は、実質的に１次線形遷移または２次非線形遷移である。

オプションとして、システムは、
２Ｄ補助信号内の２Ｄ領域に対応する２Ｄ画像信号内の２Ｄ画像領域を確立し、
２Ｄ画像領域内部の２Ｄ画像信号の画像値に対して画像改善手法を適用するための画像処理プロセッサをさらに備える。

オプションとして、画像改善手法は、コントラスト改善と、シャープネス調整と、時間的フィルタリングとからなるグループのうちの少なくとも１つである。

本発明のこれらの態様および他の態様は、以下に記載される実施形態から明らかであり、当該実施形態に関連して説明されることになる。

３Ｄ画像信号を処理するためのシステムを示す。 ３Ｄ画像信号を処理するための方法を示す。 方法を実行するためのコンピュータプログラムプロダクトを示す。 字幕を備える２Ｄ画像信号を示す。 ２Ｄ画像信号に対応する２Ｄ奥行き信号を示す。 ユーザ定義２Ｄ領域をユーザが確立することを可能にするためのＧＵＩを示す。 ＧＵＩを反映する２Ｄ奥行き信号を示す。 ＧＵＩを用いてユーザ定義２Ｄ領域を確立するユーザを示す。 ２Ｄ領域としてユーザ定義２Ｄ領域を確立する領域定義器と、表示領域内の奥行き低減を確立する奥行きプロセッサとを示す。 奥行き低減を伴わない２Ｄ奥行き信号のクローズアップ図を示す。 奥行き低減を伴う２Ｄ奥行き信号のクローズアップ図を示す。 表示領域および遷移領域を示す。 画面上の垂直位置の関数として変化するゲイン値を示す。

異なる図面において同一の符号を有する項目は、同一の構造的特徴および同一の機能を有するか、または同一の信号である、ということに留意するべきである。このような項目の機能および／または構造が説明されている場合、詳細な説明において、説明を繰り返す必要はない。

図１は、３次元［３Ｄ］画像信号を処理するためのシステム１００を示し、３Ｄ画像信号は、２次元［２Ｄ］画像信号と、３Ｄディスプレイ２００上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える。２Ｄ補助信号は、例えば、２Ｄ視差信号、２Ｄ奥行き信号、または別の２Ｄ画像信号であってもよい。２Ｄ画像信号に２Ｄ補助信号を組み合わせると、２Ｄ画像信号の３Ｄレンダリングは、３Ｄディスプレイ上で可能となる。３Ｄレンダリングは、例えば、２Ｄ画像信号および２Ｄ奥行き関連信号から別の２Ｄ画像信号を生成するために視点レンダリングを実行することを含んでいてもよい。３Ｄレンダリングは、また、立体視を可能にするための２つの２Ｄ画像信号を処理することを含んでいてもよい。

システム１００は、２Ｄ画像信号１２２および２Ｄ補助信号１２２を取得するための信号入力１２０を備える。システム１００は、２Ｄ補助信号内の２Ｄ領域１４２を定義するための領域定義器１４０をさらに備え、２Ｄ領域は、２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する。２Ｄ領域には、したがって、形状および位置がある。２Ｄ領域は、２Ｄ領域の輪郭を記載する領域パラメータによって構成されてもよい。領域パラメータは、位置パラメータであってもよい。２Ｄ領域は、２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する。言いかえれば、３Ｄディスプレイの表示面上の表示領域において、ユーザによって知覚されるような奥行きは、２Ｄ領域内部の２Ｄ補助信号の信号値によって確立される。表示領域は、表示面上の幅および高さに延伸するという点で、表示面上の領域である。用語「表示面（ｄｉｓｐｌａｙ ｐｌａｎｅ）」は、３Ｄディスプレイの主発光面に一致するとともに、実質的に同一の奥行きを有する、すなわち主発光面の奥行きに対応する面を表す。

システム１００は、奥行き低減パラメータ１６２を取得するための奥行きプロセッサ１６０をさらに備え、奥行き低減パラメータは、２Ｄ画像信号を３Ｄレンダリングする際の表示領域内の所望の量の奥行き低減を表現する。奥行き低減パラメータは、内部で、例えば、システムの別の部分によって確立されることによって、またはプリセットされることによって、取得されてもよい。奥行き低減パラメータは、また、外部で、例えば、さらに先で議論されるようにユーザから、取得されてもよい。奥行き低減パラメータは、２Ｄ画像信号を３Ｄレンダリングする際の表示領域内の所望の量の奥行き低減を表現する。ここで、形容詞「所望の（ｄｅｓｉｒｅｄ）」は、前記奥行き低減を達成するために確立された奥行き低減パラメータを指す。用語「奥行き低減（ｄｅｐｔｈ ｒｅｄｕｃｔｉｏｎ）」は、ニュートラルな表示奥行きにより近い表示領域内部の奥行き、すなわち、３Ｄディスプレイから突き出た部分若しくは３Ｄディスプレイへの凹んだ部分が一層少ない確立されたコンテンツをもたらすことを指す。

奥行きプロセッサ１６０は、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すように構成される。したがって、調整パラメータは、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整する際に、表示領域内の奥行き低減を確立するために準備される。結果的に、奥行き低減は、前記信号値の調節の後に達成される。

調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を実際に調整するように、奥行きプロセッサ１６０が構成されてもよい、ということに留意されたい。これは、実際には、図１に示され、ここで、奥行きプロセッサ１６０は、入力１２０から２Ｄ補助信号１２４を取得して調整された２Ｄ補助信号１２４Ａを確立する。調整された２Ｄ補助信号１２４Ａは３Ｄディスプレイ２００に提供されることが示されている。図１には示されないが、システム１００は、３Ｄディスプレイ２００に対して２Ｄ画像信号１２２をさらに供給してもよい。代替え的に、３Ｄディスプレイ２００は、他の場所、例えば異なるシステムまたは装置から、２Ｄ画像信号１２２を受信してもよい。

図１には示されないが、表示プロセッサ１６０は、また、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を実際に調整することをやめてもよい。この場合、奥行きプロセッサ１６０は、別の奥行きプロセッサが使用するための調整値を提供してもよい。別の表示プロセッサは、３Ｄディスプレイ２００などの別の装置内に備えられてもよい。例えば、別の表示プロセッサは、３Ｄディスプレイ２００の視点レンダラであってもよい。視点レンダラは、３Ｄイメージ処理の分野で、それ自身知られている。さらに、領域定義器および／または奥行きプロセッサ１６０は、別の奥行きプロセッサに２Ｄ領域を提供してもよい。例えば、システム１００は、セットトップ装置によって構成されてもよく、セットトップ装置の奥行きプロセッサ１６０は、２Ｄ領域内部の２Ｄ補助信号の信号値をその後調整する３Ｄディスプレイ２００に対して調整値を提供してもよい。調節は、調整値に基づいて視点レンダラのレンダリングパラメータを変更することによって、またはレンダリングパラメータとして調整値を直接用いることによって、３Ｄディスプレイ２００内で達成されてもよい。この場合、システム１００が２Ｄ画像信号１２２を受信する必要がなくなる、ということに留意されたい。さらに、システム１００は、同様に２Ｄ補助信号１２４を受信する必要がなくなり、したがって入力１２０を備える必要がなくなる。一般に、奥行きプロセッサ１６０が、複数の装置に及ぶ、例えばセットトップ装置および３Ｄディスプレイ２００に及ぶ、奥行き処理サブシステム１６０を構成してもよい、ということに留意されたい。

図２は、３次元［３Ｄ］画像信号を処理するための方法３００を示しており、３Ｄ画像信号は、２次元［２Ｄ］画像信号と、３Ｄディスプレイ２００上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える。方法３００は、第１のステップにおいて、２Ｄ画像信号および２Ｄ補助信号を取得するステップ３１０を備える。方法３００は、第２のステップにおいて、２Ｄ補助信号内の２Ｄ領域を定義するステップ３２０をさらに備え、２Ｄ領域は、２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する。方法３００は、第３のステップにおいて、奥行き低減パラメータを取得するステップ３３０をさらに備え、奥行き低減パラメータは、２Ｄ画像信号を３Ｄレンダリングする際の表示領域内の所望の量の奥行き低減を表現する。方法３００は、第４のステップにおいて、調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すステップ３４０をさらに備える。方法３００は、システム１００の動作に対応してもよい。但し、方法３００は、また、システム１００から分離して実行されてもよい。

図３は、プロセッサシステムに図２の方法を実行させるためのコンピュータプログラムプロダクト２６０を備えるコンピュータ読み取り可能媒体３５０を示す。そのために、コンピュータプログラムプロダクト３６０は、実行の際に、プロセッサシステムに本方法を実行させる、プロセッサシステムに対する命令を備える。コンピュータプログラムプロダクト３６０は一連の機械読み取り可能な物理マークとして、および／または、個別の電気的（例えば磁気的）または光学的な性質若しくは値を有する一連の要素として、コンピュータ読み取り可能媒体３５０上に備えられてもよい。

システム１００は、ユーザ定義２Ｄ領域１８２をユーザが確立することを可能にするためのユーザインタフェースサブシステム１８０をさらに備えてもよい。そのために、ユーザインタフェースサブシステム１８０は、グラフィカルユーザインタフェース（ＧＵＩ）を用いてユーザがユーザ定義２Ｄ領域１８２を確立することを可能にするために３Ｄディスプレイ２００上にＧＵＩを確立するように構成されてもよい。例えば、ＧＵＩは、下方の奥行きが低減される画面上の垂直位置をユーザが定義できるようにしてもよい。実際上、垂直位置より下の領域は、ユーザ定義２Ｄ領域１８２を構成する。ＧＵＩは、また、矩形のユーザ定義２Ｄ領域１８２の上側、底側、左側、および右側を、例えばそれぞれの側のそれぞれの位置に対応する位置スライダを用いて、ユーザが定義できるようにしてもよい。図５ａは、このようなＧＵＩの例を示す。ユーザ定義２Ｄ領域１８２を確立するための様々な代替手段が有利的に用いられてもよい、ということに留意されたい。例えば、ユーザは、複数の所定の２Ｄ領域の中でユーザ定義２Ｄ領域１８２を選択してもよい。また、ＧＵＩを用いる代わりに、例えば、ボタン押し操作、音声制御、などの他の手段が用いられてもよい。

領域定義器１４０は、ユーザ定義２Ｄ領域１８２に基づいて２Ｄ領域１４２を定義するように構成されてもよい。例えば、領域定義器１４０は、ユーザ定義２Ｄ領域１８２に等しくなる２Ｄ領域１４２を定義してもよい。そのために、ユーザは、２Ｄ領域上での全制御が可能であり、ユーザは、ユーザ定義２Ｄ領域１８２を確立することによって２Ｄ領域を定義することができる。代替え的に、領域定義器１４０は、例えば、ユーザ定義２Ｄ領域１８２により２Ｄ領域を初期化することによって、または２Ｄ領域１４２を定義する他の適切な方式でユーザ定義２Ｄ領域１８２を用いることによって、ユーザ定義２Ｄ領域１８２に基づいて２Ｄ領域１４２を定義してもよい。本質的には、２Ｄ領域１４２は、それにより３Ｄ画像信号内部のユーザが構成可能な奥行き低減領域を構成する。

代替え的にまたは付加的に、領域定義器１４０は、３Ｄ画像信号１２２、１２４内のオーバーレイを検出するためのオーバーレイ検出器を備えてもよく、ユーザインタフェースサブシステム１８０は、検出されたオーバーレイに基づいてユーザ定義２Ｄ領域１８２をユーザが確立することを可能にするように構成されてもよい。例えば、ユーザは、検出されたオーバーレイを、すなわち、輪郭または位置表示器の形態で、示されてもよく、それにより、検出されたオーバーレイ上にユーザ定義２Ｄ領域１８２をユーザ自身が確立することをユーザが基礎とすることができるようにする。ユーザインタフェースサブシステム１８０は、また、ユーザ定義２Ｄ領域１８２を初期化するために、検出されたオーバーレイを用いてもよい。結果的に、検出されたオーバーレイは、初期の２Ｄ領域を提供してもよいし、ユーザは、ユーザ定義２Ｄ領域１８２を確立するために初期の２Ｄ領域を調整してもよい。代替え的にまたは付加的に、ユーザインタフェースサブシステム１８０は、ユーザ定義２Ｄ領域１８２を確立する際に、「グリッドにスナップ」機能性を、ユーザに提供するためのグリッドを確立してもよい。そのために、ユーザは、ユーザ定義２Ｄ領域１８２を確立することに向けて誘導され得る。

代替え的にまたは付加的に、ユーザインタフェースサブシステム１８０は、ユーザが表示領域内の所望の量の奥行き低減を指定することを可能にし、それによって、奥行き低減パラメータ１６２を確立するように構成される。例えば、ユーザは、奥行き低減スライダを調整してもよい。奥行き低減パラメータ１６２をユーザが確立する代わりに、奥行き低減パラメータ１６２は、また、プリセットされてもよいし、またはシステム１００によって決定されてもよい、ということに留意されたい。例えば、奥行き低減パラメータ１６２は、３Ｄ画像信号内の奥行きの総量に依存してもよい。

信号入力１２０は、既定の２Ｄ領域を示すメタデータを取得するように構成されてもよく、領域定義器１４０は、既定の２Ｄ領域に基づいて２Ｄ領域を定義するように構成されてもよい。既定の２Ｄ領域は、信号伝達チェーン内の先行の若しくは前のシステムまたは装置によって提供されてもよい。システム１００は、領域定義器１４０および／または調整値によって定義されるような２Ｄ領域を、例えばさらなるメタデータの形式で、信号伝達チェーン内の後の若しくは次のシステムまたは装置に対して提供するように、順々に構成されてもよい、ということに留意されたい。

奥行きプロセッサ１６０は、信号値に対してオフセット値を適用することによって２Ｄ領域内部の２Ｄ補助信号１２４の信号値を調整することを可能にするために、奥行き低減パラメータ１６２から前記オフセット値を導き出すように構成されてもよい。２Ｄ補助信号１２４が２Ｄ奥行き関連信号である場合、オフセットは、奥行き関連オフセットであってもよい。そのため、オフセット値は、２Ｄ領域内部の２Ｄ奥行き関連信号の奥行き関連信号から加算および／または減算されてもよい。２Ｄ補助信号１２４が別の２Ｄ画像信号である場合、オフセットは、また、視差オフセットである。視差オフセットは、２Ｄ領域内の２Ｄ補助信号１２４の画像値を水平に移動させるために用いられてもよい。２Ｄ補助信号１２４が２Ｄ奥行き関連信号である場合、奥行きプロセッサ１６０は、また、奥行き関連値に対してゲイン値を適用することによって２Ｄ領域内部の２Ｄ奥行き関連信号の奥行き関連信号値を調整することを可能にするために、奥行き低減パラメータ１６２からゲイン値を導き出すように構成されてもよい。そのため、ゲイン値は、２Ｄ領域内部の２Ｄ奥行き関連信号の奥行き関連信号に乗算されてもよい。奥行きプロセッサ１６０は、奥行き低減パラメータ１６２からゲイン値とオフセット値との両方を導き出すように構成されてもよい。オフセットがまず適用されて、その後ゲインが適用されてもよく、またはその逆も成り立つ。

奥行きプロセッサ１６０が調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整するように構成される場合、奥行きプロセッサ１６０は、ニュートラルな奥行き値に信号値をアルファブレンドすることに基づいて前記調整を実行してもよい。アルファブレンディングにおけるアルファ値は、奥行き低減パラメータ１６２から導き出されてもよい。アルファブレンディングがイメージ処理の分野からそれ自身知られている、ということに留意されたい。さらに、奥行きプロセッサ１６０は、２Ｄ領域内部の調整された信号値と２Ｄ領域外部の調整されていない信号値との間の段階的遷移を確立するように構成されてもよい。そのために、遷移領域は、段階的遷移が達成される２Ｄ領域を取り囲んで確立される。有利なことには、オブジェクトが前記領域の外側だけでなく２Ｄ領域の中にも双方に延伸すれば、そうでなければ生じる分離（ｂｒｅａｋｕｐ）の知覚は、回避若しくは低減される。段階的遷移は、実質的に１次線形遷移または２次非線形遷移であってもよい。

図１には示されないが、システム１００は、ｉ）２Ｄ補助信号１２４内の２Ｄ領域に対応する２Ｄ画像信号１２２内の２Ｄ画像領域を確立し、ｉｉ）２Ｄ画像領域内部の２Ｄ画像信号の画像値に対して画像改善手法を適用するための画像処理プロセッサ１８０をさらに備えてもよい。画像改善手法は、コントラスト改善、シャープネス調整、および時間的フィルタリングのうちの１つ以上であってもよい。有利なことには、オーバーレイ、特にテキストベースのオーバーレイの判読率は、さらに改善される。

用語「画像信号（ｉｍａｇｅ ｓｉｇｎａｌ）」は少なくとも１つの画像を表現する信号を指す、ということに留意されたい。画像信号は、また、複数の画像、例えばビデオシーケンスなどの画像シーケンスを表現してもよい。実際に、各画像信号は、このようにしてビデオ信号を構成してもよい。

システム１００および方法３００の動作は、以降の図４ａに関して、さらに説明され得る。図４ａは、テキストの字幕「何人かの観光客は、自分の印を残す」を備える２Ｄ画像信号１２２を示す。字幕は、ハードコード化されたオーバーレイを構成する、すなわち２Ｄ画像信号１２２の一部である。図４ｂは、２Ｄ画像信号に対応する２Ｄ奥行き信号１２４を示す。ここで、輝度は、視聴者までの距離に反比例する、すなわち、高輝度は視聴者に近いことに対応し、低輝度は視聴者から離れていることに対応する。この例において、より低い輝度、すなわち、より暗いことは、表示面の背後の奥行きに対応し、より高い輝度、すなわち、より明るいことは、表示面の前面の奥行きに対応する。

図５ａは、ユーザ定義２Ｄ領域をユーザが確立することを可能にするために画面上にＧＵＩを確立するユーザインタフェースサブシステム１８０の例を示す。ＧＵＩは、ユーザが表示領域内の所望の量の奥行き低減を指定することを可能にする「ボーダーファクタ（Ｂｏｒｄｅｒ ｆａｃｔｏｒ）」と称されるスライダを備える。ＧＵＩは、複数のユーザ定義２Ｄ領域、すなわち２Ｄ画像信号１２２の側面ごとに１つずつをユーザが確立することを可能にする４つのスライダをさらに備える。４つのユーザ定義２Ｄ領域がすべてゼロでないサイズでユーザによって確立される場合、前記領域は、ともに窓枠の形状を有しており、それにより、単一のユーザ定義２Ｄ領域を実際に構成する。ユーザ定義２Ｄ領域（複数可）をユーザが確立することを可能にするために多くの代替手段が想定される、ということに留意されたい。適切なスライダの動作によって、ユーザは、このようにしてユーザ定義２Ｄ領域を確立することができる。図５ｂは、ＧＵＩを反映する２Ｄ奥行き信号を示す、すなわち、ＧＵＩは奥行きにおいても確立される、ということを示す。

図６ａは、ユーザが画面の最下部においてユーザ定義２Ｄ領域を確立することによってスライダの調節を完了することを示す、すなわち、特にこの例において、２Ｄ画像信号１２２の最下部から８９のすべての画像線を備えることを示す。図６ｂは、２Ｄ領域としてユーザ定義２Ｄ領域を確立する領域定義器１４０と、表示領域内の奥行き低減を確立する奥行きプロセッサ１６０とを示す。２Ｄ領域内部の２Ｄ奥行き信号の奥行き値が調整される、それによって、視聴者までの長い距離を有する、すなわち低減された奥行きを有する字幕をもたらす奥行きによる字幕を提供する、ということが見てとれる。図７ａは、奥行き低減を伴わない２Ｄ奥行き信号１２２のクローズアップ図を示す。図７ｂは、奥行き低減を伴う２Ｄ奥行き信号、すなわち調整された２Ｄ奥行き信号１２４のクローズアップ図を示す。２Ｄ領域４００の範囲がここで示される。さらに、遷移領域４１０が見てとれる。ここで、前記遷移領域４１０をもたらす、２Ｄ領域４００内部の調整された信号値と２Ｄ領域外部の調整されていない信号値の間の段階的遷移を確立する奥行きプロセッサ１６０の結果が示される。図７ｃは、破線の矩形を用いる表示領域および遷移領域を示す。

図６ｂ、図７ｂ、および図７ｃの調整された２Ｄ奥行き信号１２４ａは、垂直位置の関数として変化する２Ｄ奥行き信号１２２に対してゲイン値を適用することによって取得されてもよい。図８は、このような、変化するゲイン値の例を示す。ここで、その水平軸５１０に沿ってディスプレイ上の垂直位置すなわちｙ−位置と、その垂直軸５２０に沿ってゲイン値とを表現しているグラフが示されている。グラフは、ｙ−位置の関数としてのゲイン値の段階的変化、すなわち、２Ｄ領域４００内部の第１のゲイン値５２４（例えば０．３）から２Ｄ領域の外側の第２のゲイン値５２４（１．０）に変化するゲイン値関数５００を示し、ゲイン値は遷移領域４１０内で０．３から１．０にゆっくり遷移する。ゲイン値は、２Ｄ奥行き信号１２２からオフセットを最初に減算することによって適用されてもよい。オフセットは、ニュートラルな奥行き値、例えばニュートラルな表示奥行きに対応する値に対応してもよい。ゲイン値を適用した後に、オフセットは、２Ｄ奥行き信号１２２に再び加算されてもよい。２Ｄ奥行き信号１２２の奥行き値すべてに、ゲイン値を乗算してもよい。代替え的に、２Ｄ領域４００および遷移領域４１０内の奥行き値のみに、ゲイン値を乗算してもよい。ゲイン値に対する別の用語がゲインファクタである、ということに留意されたい。

本発明によれば、２Ｄ画像信号と３Ｄディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するためのシステムであって、
２Ｄ画像信号および２Ｄ補助信号を取得するための信号入力と、
２Ｄ画像信号を３Ｄレンダリングする際の３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域を定義するための領域定義器と、
ｉ）２Ｄ画像信号を３Ｄレンダリングする際の表示領域内の所望の量の奥行き低減を表現する奥行き低減パラメータを取得し、ｉｉ）調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すための奥行きプロセッサと
を備えるシステムが提供され得る、ということが認識される。

上記の実施形態が本発明を限定せずに例示しており、当業者は多くの他の実施形態を設計することができる、ということに留意するべきである。

特許請求の範囲において、括弧の間に配置されたあらゆる参照符号も、また、特許請求の範囲を限定するように解釈されるべきでない。動詞「備える（ｃｏｍｐｒｉｓｅ）」の使用およびその動詞の活用は、特許請求の範囲内に明示されたもの以外の構成要素またはステップの存在を除外しない。構成要素の直前の不定冠詞「ａ」または「ａｎ」は、このような構成要素の複数の存在を除外しない。本発明は、いくつかの別個の構成要素を備えるハードウェアによって、および適切にプログラミングされたコンピュータによって実現されてもよい。いくつかの手段を列挙する装置の請求項において、これらの手段のいくつかは、１個のハードウェアおよび同じアイテムのハードウェアによって具体化されてもよい。ある手段が異なる従属請求項内に相互に列挙されるという単なる事実は、これらの手段の組み合わせを有利に用いることができないことを示すものではない。

Claims (15)

1. ２次元［２Ｄ］画像信号と３次元［３Ｄ］ディスプレイ（２００）上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するためのシステム（１００）であって、
   ２Ｄ画像信号（１２２）および２Ｄ補助信号（１２２）を取得するための信号入力（１２０）と、
   ２Ｄ画像信号内のユーザ定義２Ｄ領域（１８２）をユーザが確立することを可能にするためのユーザインタフェースサブシステム（１８０）と、
   ユーザ定義２Ｄ領域に基づいて、２Ｄ補助信号を用いて２Ｄ画像信号を３Ｄレンダリングする際に３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域（１４２）を定義するための領域定義器（１４０）と、
   ｉ）３Ｄディスプレイ上で２Ｄ画像信号を３Ｄレンダリングする際にニュートラルな表示奥行きに向かって表示領域内の所望の量の奥行き低減を表現する、奥行き低減パラメータ（１６２）を取得し、
   ｉｉ）調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すための奥行きプロセッサ（１６０）と
   を備えるシステム。
2. 領域定義器（１４０）は、３Ｄ画像信号（１２２、１２４）内のオーバーレイを検出するためのオーバーレイ検出器を備え、
   ユーザインタフェースサブシステム（１８０）は、検出されたオーバーレイに基づいてユーザ定義２Ｄ領域（１８２）をユーザが確立することを可能にするように構成される、請求項１に記載のシステム（１００）。
3. ユーザインタフェースサブシステム（１８０）は、
   ユーザ定義２Ｄ領域を初期化し、および／または
   ユーザ定義２Ｄ領域を確立する際に、「グリッドにスナップ」機能性を、ユーザに提供するためのグリッドを確立するように、検出されたオーバーレイを用いるために構成される、請求項２に記載のシステム（１００）。
4. ユーザインタフェースサブシステム（１８０）は、ユーザが表示領域内の所望の量の奥行き低減を指定することを可能にし、それによって、奥行き低減パラメータ（１６２）を確立するように構成される、請求項１から３のいずれか一項に記載のシステム（１００）。
5. 信号入力（１２０）は、既定の２Ｄ領域を示すメタデータを取得するように構成され、領域定義器（１４０）は、既定の２Ｄ領域に基づいて２Ｄ領域を定義するように構成される、請求項１から４のいずれか一項に記載のシステム（１００）。
6. 奥行きプロセッサ（１６０）は、信号値に対してオフセット値を適用することによって２Ｄ領域内部の２Ｄ補助信号（１２４）の信号値を調整することを可能にするために、奥行き低減パラメータ（１６２）から前記オフセット値を導き出すように構成される、請求項１から５のいずれか一項に記載のシステム（１００）。
7. ２Ｄ補助信号（１２４）は、２Ｄ奥行き関連信号であり、奥行きプロセッサ（１６０）は、信号値に対してゲイン値を適用することによって２Ｄ領域内部の２Ｄ奥行き関連信号の信号値を調整することを可能にするために、奥行き低減パラメータ（１６２）からゲイン値を導き出すように構成される、請求項１から６のいずれか一項に記載のシステム（１００）。
8. 奥行きプロセッサ（１６０）は、表示領域内の奥行き低減を確立するために調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整するように構成される、請求項１から７のいずれか１項に記載のシステム（１００）。
9. 奥行きプロセッサ（１６０）は、信号値をニュートラルな奥行き値にアルファブレンドすることに基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整するように構成される、請求項８に記載のシステム（１００）。
10. 奥行きプロセッサ（１６０）は、２Ｄ領域内部の調整された信号値と２Ｄ領域外部の調整されていない信号値との間の段階的遷移を確立するように構成される、請求項８または９に記載のシステム（１００）。
11. 段階的遷移は、実質的に１次線形遷移または２次非線形遷移である、請求項１０に記載のシステム（１００）。
12. ｉ）２Ｄ補助信号（１２４）内に２Ｄ領域に対応する２Ｄ画像信号（１２２）内の２Ｄ画像領域を確立し、ｉｉ）２Ｄ画像領域内部の２Ｄ画像信号の画像値に対して画像改善手法を適用するための画像処理プロセッサ（１８０）をさらに備える、請求項１から１１のいずれか一項に記載のシステム（１００）。
13. 請求項１から１２のいずれか一項に記載のシステムを備えた３Ｄディスプレイ装置。
14. ２次元［２Ｄ］画像信号と３次元［３Ｄ］ディスプレイ上で２Ｄ画像信号の３Ｄレンダリングを可能にする２Ｄ補助信号とを備える３Ｄ画像信号を処理するための方法（３００）であって、
    ２Ｄ画像信号および２Ｄ補助信号を取得するステップ（３１０）と、
    ２Ｄ画像信号内のユーザ定義２Ｄ領域をユーザが確立することを可能にするステップと、
    ユーザ定義２Ｄ領域に基づいて、２Ｄ補助信号を用いて２Ｄ画像信号を３Ｄレンダリングする際に３Ｄディスプレイの表示面上の表示領域に対応する、２Ｄ補助信号内の２Ｄ領域を定義するステップ（３２０）と、
    ３Ｄディスプレイ上で２Ｄ画像信号を３Ｄレンダリングする際にニュートラルな表示奥行きに向かって表示領域内の所望の量の奥行き低減を表現する、奥行き低減パラメータを取得するステップ（３３０）と、
    調整値に基づいて２Ｄ領域内部の２Ｄ補助信号の信号値を調整することによって表示領域における奥行き低減を確立することを可能にするために奥行き低減パラメータから調整値を導き出すステップ（３４０）と
    を備える方法。
15. 請求項１４に記載の方法（３００）をプロセッサシステムに実行させるための命令を備えるコンピュータプログラムプロダクト（３６０）。

Images