JP6258923B2 - ３ｄ映像を処理するための品質メトリク - Google Patents

Description

本発明は、三次元［３Ｄ］映像信号を処理するための３Ｄ映像装置に関する。３Ｄ映像信号は、３Ｄディスプレイ上に表示される少なくとも第１の画像を含む。３Ｄディスプレイは、視聴者（観察者）向けに３Ｄ効果を作り出すために複数のビューを必要とする。３Ｄ映像装置は、３Ｄ映像信号を受信するための受信機を含む。

本発明は更に、３Ｄ映像信号を処理する方法に関する。

本発明は、それぞれの３Ｄディスプレイ用の３Ｄ映像信号に基づきビューを生成し且つ／又は適合させる分野に関する。コンテンツが特定のオートステレオスコピック（裸眼立体）装置上での再生を対象としていない場合、画像内の視差／奥行きがターゲット表示装置の視差範囲上にマップされる必要があり得る。

文献「A Perceptual Model for disparity, by p. Didyk et al, ACM Transactions on Graphics, Proc. of SIGGRAPH, year 2011, volume 30, number 4」は視差に関する知覚モデルを示し、３Ｄ画像素材を特定の視聴条件に適合させるためにかかる知覚モデルが使用され得ることを示す。この論文は、視差コントラストが、より知覚的に顕著であり、再ターゲティングするための視差メトリクを提供すると記載している。視差メトリクは、知覚される遠近感の量を求めるために、視差に基づき画像を解析することに基づく。３Ｄ信号を様々な視聴条件に適合させるプロセスは再ターゲティングと呼ばれ、再ターゲティングのグローバルオペレータが論じられており、再ターゲティングの効果はメトリクに基づいて決定される（例えばセクション６の最初の２段落、及びセクション６．２）。

知られている差メトリクはどちらかと言えば複雑であり、解析に利用可能な視差データを必要とする。

本発明の目的は、それぞれの３Ｄディスプレイの知覚される３Ｄ画像品質を最適化しながら、より単純な品質メトリクに基づき、３Ｄ映像信号をそれぞれの３Ｄディスプレイにターゲティングするためのパラメータを与えるシステムを提供することである。

このために、本発明の第１の態様によれば、導入部に記載の装置がプロセッサを含み、そのプロセッサは、複数のビューを３Ｄディスプレイにターゲティングするためのパラメータによって適合される３Ｄ画像データに基づいて少なくとも１つの処理済みビューを決定し、処理済みビュー及び更なるビューの画像値の組合せに基づく、知覚される３Ｄ画像品質を示す品質メトリクを計算し、パラメータの複数の値について前述の決定及び計算を行うことに基づいてパラメータの好ましい値を決定する。

この方法は、３Ｄ映像信号を受信するステップと、複数のビューを３Ｄディスプレイにターゲティングするためのパラメータによって適合される３Ｄ画像データに基づいて少なくとも１つの処理済みビューを決定するステップと、処理済みビュー及び更なるビューの画像値の組合せに基づく、知覚される３Ｄ画像品質を示す品質メトリクを計算するステップと、パラメータの複数の値について前述の決定及び計算を行うことに基づいてパラメータの好ましい値を決定するステップとを含む。

これらの手段には、装置が３Ｄ映像信号を受信し、視聴者向けにそれぞれの３Ｄディスプレイによって表示される３Ｄ画像の品質を高めるために、それぞれのディスプレイのビューを適合させるためのパラメータを決定する効果がある。特定のディスプレイのビューを適合させるプロセスは、３Ｄディスプレイのためにビューをターゲティングする、と言われる。例えば、その特定のディスプレイは、高品質３Ｄ画像用の限られた奥行き範囲を有し得る。例えば、かかるディスプレイのためのビューを生成し又は適合させるために使用される奥行き値に適用するために、利得パラメータが決定されても良い。更なる例では、それぞれのディスプレイが、通常、高い鮮明度を有する表示画面付近の好ましい奥行き範囲を有し得る一方、視聴者の方に飛び出る３Ｄ物体はより不鮮明になる傾向がある。視差の量を制御するために、ビューにオフセットパラメータが適用されても良く、その後、３Ｄ物体が高鮮明度の好ましい奥行き範囲の方にシフトされ得る。事実上、本装置は前述のパラメータを調節して、それぞれの３Ｄディスプレイの３Ｄ効果及び知覚される画像品質を最適化するための自動システムを備える。具体的には、品質メトリクは、知覚される３Ｄ画像品質を決定する画像値の組合せに基づいて計算され、３Ｄ画像品質に対する複数の異なるパラメータ値の効果を測定するために使用される。

本発明は以下の認識にも基づく。従来では、それぞれの３Ｄディスプレイのビューの調節は、３Ｄ画像品質についての自身の判断に基づき視聴者によって手動で行われ得る。例えば利得やオフセットにより、奥行きをそれぞれの３Ｄディスプレイの好ましい奥行き範囲内にマップするために奥行きマップ又は視差マップを処理することに基づく自動調節は、画像の特定の部分のぼやけ及び／又は比較的小さな奥行き効果をもたらし得る。本発明者らは、比較的大きい視差を有するが知覚される画像品質に対する比較的低い寄与度を有する、遠く離れた雲等の比較的大きな物体によってかかるマッピングがバイアスされる傾向にあることに気付いた。提案される品質メトリクは、視差によってワープされる画像データを含む処理済みビューの画像値の組合せの画像値と、更なるビュー、例えば３Ｄ映像信号と共に提供される画像の画像値とを比較することに基づく。両方のビュー内で視差は異なるので、組合せの画像値は、画像コンテンツ及びビュー内の視差の両方を表す。事実上、高コントラスト又は高次構造を有する物体は品質メトリクに大いに寄与するのに対し、知覚可能な僅かな特徴しか有しない物体は、大きい視差にもかかわらず殆ど寄与しない。

描画される画像の画面上の（オンスクリーン）視差に影響を及ぼすパラメータを最適化するのに画像メトリクが使用される場合、異なるビューからの画像情報を関連させることが重要である。更に、これらのビューを最も上手く関連させるために、比較される画像情報が好ましくは画像内の対応するｘ、ｙ位置に由来する。より好ましくは、これは画像の寸法が一致するように入力及び描画される画像を再スケーリングすることを含み、画像の寸法が一致する場合、同じｘ、ｙ位置がマッチされ得る。

有利には、メトリクを計算するために更なるビュー及び処理済みビューの画像値の組合せを使用することにより、知覚される画像品質に対応する測度（指標）が見つかっている。更に、提案されるメトリクは、メトリクを求めるために、視差データ又は奥行きマップがそれ自体で提供され若しくは計算されることを必要としない。その代わりに、メトリクは、パラメータによって修正される処理済み画像の画像値、及び更なるビューの画像値に基づく。

任意選択的に、更なるビューは、パラメータによって適合される３Ｄ画像データに基づき更に処理されるビューである。更なるビューは異なる視角を表し、同じパラメータ値、例えばオフセット値によって処理される。その効果は、少なくとも２つの処理済みビューが比較され、処理済みビュー間の差による知覚される品質を品質メトリクが表すことである。

任意選択的に、更なるビューは、３Ｄ画像データ内で入手可能な２Ｄビューである。その効果は、処理済みビューが、高い品質を有し、ビューのワーピングによるアーティファクトを有しない元の２Ｄビューと比較されることである。

任意選択的に、更なるビューは、パラメータによって適合される３Ｄ画像データに基づき更に処理されるビューであり、処理済みビュー及び更に処理されるビューは、画像値の組合せを構成するためにインタリーブされる。処理済みビューは、複数のビューをインタリーブすることによりオートステレオスコピック３Ｄディスプレイの画素配列上に表示される、インタリーブ済み３Ｄ画像に対応し得る。インタリーブ済み３Ｄ画像は、表示画面に転送される複合画素行列を集めることによって構築され、異なるビューが視聴者の左眼及び右眼のそれぞれによって知覚されるよう、表示画面はかかる異なる方向の異なる隣接ビューを構成するようにオプティクスを備える。例えば、オプティクスは、欧州特許出願公開第０７９１８４７Ａ１号の中で開示されているように、オートステレオスコピックディスプレイ（ＡＳＤ:autostereoscopic display）を構成するためレンチキュラアレイとすることができる。

同出願人による欧州特許出願公開第０７９１８４７Ａ１号は、異なるビューに関連する画像情報がレンチキュラＡＳＤのためにどのようにインタリーブされ得るのかを示す。欧州特許出願公開第０７９１８４７Ａ１号の図面から見て取れるように、レンチキュラ（又は他の導光手段）の下の表示パネルのそれぞれの部分画素にビュー番号が割り当てられており、即ちそれらの部分画素は、その特定のビューに関連する情報を扱う。表示パネル上に横たわるレンチキュラ（又は他の導光手段）はその後、それぞれの部分画素によって発せられる光を観ている人の眼に導き、それにより第１のビューに関連する画素を観ている人の左眼に、第２のビューに関連する画素を右眼に与える。その結果、第１のビュー及び第２のビューの画像内に適切な情報が与えられることを条件に、観ている人は立体画像を知覚する。

欧州特許出願公開第０７９１８４７Ａ１号の中で開示されているように、表示パネルのそれぞれのＲ、Ｇ、及びＢの値を見るとき、様々なビューの画素が好ましくは部分画素のレベルでインタリーブされる。有利には、処理済み画像がここでは、最終的な３Ｄ表示のために生成されなければならないインタリーブ済み画像と同様である。例えばインタリーブ済み画像の鮮明度を求めることにより、品質メトリクがインタリーブ済み画像に基づき計算される。

任意選択的に、プロセッサは、パラメータによって適合される３Ｄ画像データに基づき少なくとも第１のビュー及び第２のビューを求め、その少なくとも第１のビュー及び第２のビューをインタリーブして処理済みビューを求めるように構成される。インタリーブ済みのビューは、更なるビュー、例えば３Ｄ映像信号内で提供される２Ｄ画像と比較される。

任意選択的に、プロセッサは、最も左のビュー及び／又は最も右のビューに基づき処理済みビューを求めるように構成され、複数のビューが最も左のビューから最も右のビューにわたる一連のビューを形成している。有利には、最も左のビュー及び／又は最も右のビューが、更なるビューに比べて高い視差を含む。

任意選択的に、プロセッサは、画像値の組合せに対するピーク信号対雑音比の計算に基づき、又は画像値の組合せに対する鮮明度の計算に基づき品質メトリクを計算するように構成される。ピーク信号対雑音比（ＰＳＮＲ:Peak Signal-to-Noise Ratio）とは、信号の最大可能出力と、その信号の表現の忠実度に影響を及ぼす破損雑音の出力との比である。ここで、ＰＳＮＲが、知覚される３Ｄ画像品質の測度を与える。

任意選択的に、３Ｄ装置において、３Ｄ映像をターゲティングするためのパラメータは、オフセット、利得、又はスケーリングの種類のうちの少なくとも１つを含む。かかるパラメータの好ましい値が、ビューのワーピングを適合させるための処理条件として、３Ｄディスプレイのビューをターゲティングするために適用される。オフセットは、ビューに適用されるとき、ディスプレイ面に対して物体を後ろに又は前に効果的に動かす。有利には、オフセットの好ましい値は、重要な物体を３Ｄディスプレイ面に近い位置に移動させる。利得は、ビューに適用されるとき、３Ｄディスプレイ面から離して又は３Ｄディスプレイ面の方に物体を効果的に動かす。有利には、利得の好ましい値は、３Ｄディスプレイ面を基準にして重要な物体を移動させる。スケーリングの種類は、ビュー内の値がビューをワーピングするときに実際の値にどのように修正されるのか、例えば双一次スケーリング、双三次スケーリング、又はビューコーンをどのように適合させるのかを示す。

任意選択的に、プロセッサは、ボーダー領域を無視することにより、画像値の組合せの中央領域に基づき品質メトリクを計算するように構成される。ボーダー領域は、パラメータによる適合により乱れている又は不完全なことがあり、関連する高い視差値又は飛び出る物体を通常含まない。有利には、メトリクは中央領域にのみ基づく場合、より信頼できる。

任意選択的に、プロセッサは、対応する奥行き値に依存して画像値の組合せに重み付けを施すことにより品質メトリクを計算するように構成される。局所的な奥行きごとに画像値間の差が更に重み付けされ、例えば知覚される品質に対してより大きな影響力を有する飛び出る物体は、品質メトリクに対してより大きな寄与度を有するように強調され得る。

任意選択的に、プロセッサは、処理済みビュー内の関心領域を決定し、関心領域内の画像値の組合せに重み付けを施すことにより品質メトリクを計算するように構成される。関心領域内では、品質メトリクを計算するために画像値間の差が重み付けされる。プロセッサは、関心領域を決定するための顔検出器を有しても良い。

任意選択的に、プロセッサは、３Ｄ映像信号内のショットに依存して或る期間にわたる品質メトリクを計算するように構成される。事実上、パラメータの好ましい値は、同じ３Ｄ構成、例えば特定のカメラ及びズーム構成を有する３Ｄ映像信号の期間に当てはまる。通常、この構成は映像番組のショットの間ほぼ一定である。ショットの境界は出力元側において知られていても良く、又は出力元側で容易に検出されても良く、パラメータの好ましい値はショットに対応する期間について有利に決定される。

任意選択的に、プロセッサは、顔の奥行き位置の大幅な変化等、所定の閾値を上回る関心領域の変化に依存してパラメータの好ましい値を更新するように更に構成され得る。

本発明による装置及び方法の更なる好ましい実施形態は、その開示が参照により本明細書に援用される添付の特許請求の範囲の中で示されている。

本発明のこれらの態様及び他の態様が、以下の説明の中で例として記載される実施形態を参照し、添付図面を参照することで明らかになり更に説明される。

３Ｄ映像データを処理し、その３Ｄ映像データを表示するためのシステムを示す。 ３Ｄ映像信号を処理する方法を示す。 視差値の分布を示す。 ３Ｄ信号を示す。 様々なオフセット値のインタリーブビューを示す。 オフセットパラメータの様々な値について計算された品質メトリクを示す。 鮮明度メトリクに基づいてオフセットを決定するためのシステムを示す。 奥行きマップヒストグラムの例を示す。 ビューコーンを適合させるためのスケーリングを示す。

上記図面は単に概略的なものであり、縮尺通りに描かれていない。図中、既に記載されている要素に対応する要素は同じ参照番号を有し得る。

所謂３Ｄ映像フォーマットに従い、３Ｄ映像信号がフォーマットされ、伝送され得る多くの異なる方法がある。一部のフォーマットは、更にステレオ情報を運ぶために２Ｄチャネルを使用することに基づく。３Ｄ映像信号では、画像が画素の二次元配列内の画像値によって表される。例えば、フレーム内で左右のビューがインタレースされても良く、又は並べて若しくは上下（互いの上及び下に）に配置されても良い。更に、奥行きマップが伝送されても良く、場合によりオクルージョンや透明性データ等の更なる３Ｄデータも伝送されても良い。本文では、視差マップも一種の奥行きマップと見なされる。奥行きマップも、画像に対応する二次元配列内に奥行き値を有するが、奥行きマップは３Ｄ信号内に含まれる「テクスチャ」入力画像のものと異なる解像度を有し得る。３Ｄ映像データは、それ自体は知られている圧縮方法、例えばＭＰＥＧに従って圧縮されても良い。インターネットやブルーレイディスク（ＢＤ:Blu-ray（登録商標） Disc）等、如何なる３Ｄ映像システムも、提案される機能強化の恩恵を受けることができる。

３Ｄディスプレイは、比較的小さなユニット（例えば携帯電話）、シャッタグラスを必要とする大きいステレオディスプレイ（ＳＴＤ:Stereo Display）、任意の立体視ディスプレイ（ＳＴＤ:stereoscopic display）、可変ベースラインを考慮に入れる高度なＳＴＤ、ヘッドトラッキング（視点追従）に基づきＬビュー及びＲビューを視聴者の眼にターゲティングするアクティブＳＴＤ、又はオートステレオスコピックマルチビューディスプレイ（ＡＳＤ）等とすることができる。前述の様々な種類のディスプレイ向けに、例えばＡＳＤや高度なＳＴＤ向けに、３Ｄ信号内の奥行き／視差データに基づき、可変ベースラインについてビューがワープされる必要がある。オートステレオスコピック装置上での再生を対象としないコンテンツが使用される場合、画像内の視差／奥行きがターゲット表示装置の視差範囲上にマップされる必要があり、これはターゲティングと呼ばれる。しかしながら、ターゲティングにより画像が特定の部分についてぼやける場合があり、且つ／又は比較的小さい奥行き効果しかない。

図１は、３Ｄ映像データを処理し、その３Ｄ映像データを表示するためのシステムを示す。３Ｄ映像信号４１が３Ｄ映像装置５０に与えられ、３Ｄ映像装置５０は、３Ｄ表示信号５６を転送するために３Ｄ表示装置６０に結合される。３Ｄ映像信号は、例えば１／２ＨＤフレーム準拠、マルチビュー符号化（ＭＶＣ）又はフレーム準拠フル解像度（例えばDolbyによって提唱されるＦＣＦＲ）を使用する標準ステレオ伝送等の３Ｄ ＴＶ放送信号とすることができる。フレームに準拠したベースレイヤに基づき、Dolbyはフル解像度の３Ｄ画像を再現するための強化レイヤを開発した。

図１は、３Ｄ映像信号の担体として記録担体５４を更に示す。記録担体はディスク状であり、トラックと中央の穴を有する。物理的に検出可能なマークのパターンによって構成されるトラックは、１つ又は複数の情報レイヤ上にほぼ平行なトラックを構成する螺旋状又は同心円状の曲線パターンに従って配列される。記録担体は光学的に読み取ることができても良く、光学ディスク、例えばＤＶＤやＢＤ（ブルーレイディスク）と呼ばれる。情報は、トラックに沿った光学的に検出可能なマーク、例えばピットやランドにより、情報レイヤ上に具体化される。このトラック構造は、情報ブロックと通常呼ばれる情報単位の位置を示すための位置情報、例えばヘッダやアドレスも含む。記録担体５４は、例えばＭＰＥＧ２やＭＰＥＧ４符号化システムに従い、ＤＶＤやＢＤフォーマット等の既定の記録フォーマットに符号化される映像等、デジタル符号化された３Ｄ画像データを表す情報を運ぶ。

３Ｄ映像装置５０は、３Ｄ映像信号４１を受信するための受信機を有し、その受信機は１つ又は複数の信号インターフェイスユニットと、入力映像信号をパーズするための入力ユニット５１とを有する。例えば、受信機は、ＤＶＤやブルーレイディスク等の光学的記録担体５４から３Ｄ映像情報を取得するために入力ユニットに結合される光学ディスクユニット５８を含み得る。或いは（又は加えて）、受信機は、ネットワーク４５、例えばインターネットやブロードキャストネットワークに結合するためのネットワークインターフェイスユニット５９を含んでも良く、かかる装置はセットトップボックスや、携帯電話やタブレットコンピュータ等のモバイルコンピューティング装置である。３Ｄ映像信号は、離れたウェブサイト又はメディアサーバから取得され得る。３Ｄ映像装置は、画像入力信号を、ビューターゲティング情報、例えば以下に記載するようにターゲティングするためのパラメータの好ましい値を有する画像出力信号に変換する変換器とすることができる。かかる変換器は、特定の種類の３Ｄディスプレイ向けの入力３Ｄ映像信号、例えば標準的な３Ｄコンテンツを、特定の種類又は供給元のオートステレオスコピックディスプレイに適した映像信号に変換するために使用され得る。３Ｄディスプレイは、視聴者向けに３Ｄ効果を作り出すために複数のビューを必要とする。実際には、この３Ｄ映像装置は、３Ｄ対応の増幅器若しくは受信機、３Ｄ光学ディスクプレーヤ、衛星放送受信機やセットトップボックス、又は任意の種類のメディアプレーヤとすることができる。或いはこの３Ｄ映像装置は、バリア又はレンチキュラベースのＡＳＤ等のマルチビューＡＳＤ内に統合されても良い。

３Ｄ映像装置は、３Ｄ情報を処理し、出力インターフェイスユニット５５を介して３Ｄ表示装置に転送される３Ｄ表示信号５６、例えばＨＤＭＩ（登録商標）規格による表示信号（その３Ｄの部分が公開ダウンロード用にhttp://hdmi.org/manufacturer/specification.aspxで入手可能な「High Definition Multimedia Interface; Specification Version 1.4a of March 4, 2010」参照）を生成するために入力ユニット５１に結合されるプロセッサ５２を有する。

３Ｄ表示装置６０は、３Ｄ画像データを表示するためのものである。この装置は、３Ｄ映像装置５０から転送される、３Ｄ映像データ及びビューターゲティング情報を含む３Ｄ表示信号５６を受信するための入力インターフェイスユニット６１を有する。この装置は、３Ｄ映像情報に基づき３Ｄ映像データの複数のビューをもたらすためのビュープロセッサ６２を有する。ビューは、知られている位置における２Ｄビュー及び奥行きマップを用いて３Ｄ画像データから生成され得る。知られている位置におけるビュー及び奥行きマップを使用することに基づき、異なる３Ｄ表示眼球位置用のビューを生成するプロセスは、ビューのワーピングと呼ばれる。ビューは、以下で論じられるようにビューターゲティングパラメータに基づき更に適合される。或いは、３Ｄ映像装置内のプロセッサ５２が、前述のビューの処理を行うように構成されても良い。指定の３Ｄディスプレイ用に生成される複数のビューは、前述の３Ｄディスプレイに向けて３Ｄ画像信号と共に転送され得る。

３Ｄ映像装置とディスプレイとが単一の装置へと組み合わせられても良い。プロセッサ５２及び映像プロセッサ６２の機能、並びに出力ユニット５５及び入力ユニット６１の残りの機能が、単一の処理装置によって実行され得る。プロセッサの機能について以下で説明する。

動作中、プロセッサは、複数のビューを３Ｄディスプレイにターゲティングするためのパラメータによって適合される複数のビューの少なくとも１つに基づき、処理済みビューを決定する。パラメータは、例えば３Ｄディスプレイにビューをターゲティングするためにビューに適用されるオフセット及び／又は利得とすることができる。次いでプロセッサは、視差によってワープされる画像データを含む処理済みビューの画像値と、更なるビュー、例えば３Ｄ映像信号と共に提供される画像の画像値との組合せを決定する。

その後、知覚される３Ｄ画像品質を示す品質メトリクが計算される。品質メトリクは、画像値の組合せに基づく。処理済みビューを決定し、品質メトリクを計算するプロセスはパラメータの複数の値について繰り返され、それぞれのメトリクに基づいてパラメータの好ましい値が決定される。

品質メトリクが非インタリーブ画像に基づいて計算されている場合、画像内の対応する（ｘ，ｙ）位置からの画像情報を関連させることが好ましい。描画される画像が同じ空間解像度にない場合、同じ空間（ｘ，ｙ）位置が使用され得るという点で品質メトリクの計算を単純化するために、好ましくは片方又は両方の画像がスケーリングされる。或いは、例えば非インタリーブ画像を比較できるようにする１つ又は複数の中間値を計算することにより、スケーリングされていない元の画像を処理するが、適切な画像情報を関連させるように品質メトリクの計算が適合されても良い。

パラメータはスケーリングの種類とすることもでき、スケーリングの種類は、奥行きマップ内の値がビューをワーピングするときに使用される実際の値にどのように変換されるのか、例えば双一次スケーリング、双三次スケーリング、又は所定の種類の非線形スケーリングを示す。様々なスケーリングの種類について品質メトリクが計算され、優先度が決定される。更なる種類のスケーリングはビューコーンの形状をスケーリングすることを指し、これは図８を参照して以下で説明される。

画像値の組合せ内の更なるビューは、パラメータによって適合される３Ｄ画像データに基づき更に処理されるビューとすることができる。更なるビューは異なる視角を表し、同じパラメータ値、例えばオフセット値によって処理される。品質メトリクがここでは、処理済みビュー間の差による知覚される品質を表す。更なるビューは、３Ｄ画像データ内で入手可能な２Ｄビューとすることができる。ここで、処理済みビューが、高い品質を有し、ビューのワーピングによるアーティファクトを有しない元の２Ｄビューと比較される。

或いは、更なるビューは、パラメータによって適合される３Ｄ画像データに基づき更に処理されるビューとすることができ、処理済みビュー及び更に処理されるビューは、画像値の組合せを構成するためにインタリーブされる。ここで、単一のインタリーブ済み画像が、組合せの画像値を含む。例えば、処理済みビューは、複数のビューをインタリーブすることによりオートステレオスコピック３Ｄディスプレイの画素配列上に表示される、インタリーブ済み３Ｄ画像に対応し得る。品質メトリクは、例えばインタリーブ済み画像の鮮明度を求めることにより、インタリーブ済み画像それ自体に基づいて計算される。

プロセッサは、パラメータによって適合される３Ｄ画像データに基づき少なくとも第１のビュー及び第２のビューを求め、その少なくとも第１のビュー及び第２のビューをインタリーブして処理済みビューを求めるように構成され得る。例えばＰＳＮＲの計算に基づき品質メトリクを計算するために、インタリーブ済みのビューが、更なるビュー、例えば３Ｄ映像信号内で提供される２Ｄ画像と比較される。

プロセッサは、最も左のビューから最も右のビューにわたる一連のビューからの、最も左のビュー及び／又は最も右のビューに基づき処理済みビューを求めるように構成され得る。そのような極端なビューは最も高い視差を有し、従って品質メトリクが大いに影響を受ける。

図２は、３Ｄ映像信号を処理する方法を示す。３Ｄ映像信号は、３Ｄディスプレイ上に表示される３Ｄ画像データを含み、３Ｄディスプレイは、視聴者向けに３Ｄ効果を作り出すために複数のビューを必要とする。最初に、段階２１ＲＣＶで、この方法は３Ｄ映像信号を受信することから始まる。次に段階ＳＥＴＰＡＲ２２で、３Ｄディスプレイに複数のビューをターゲティングするためのパラメータ値、例えばオフセットパラメータ値が設定される。後段でのプロセスの反復のために、パラメータの様々な値が続いて設定される。次に段階ＰＶＩＥＷ２３で、上記のようにパラメータの実際の値によって適合される複数のビューの少なくとも１つに基づき処理済みビューが決定される。次に段階ＭＥＴＲ２４で、知覚される３Ｄ画像品質を示す品質メトリクが計算される。品質メトリクは、処理済みビュー及び更なるビューの画像値の組合せに基づく。次に段階ＬＯＯＰ２５で、パラメータの更なる値が評価されなければならないかどうかが判定される。評価されなければならない場合、このプロセスは段階ＳＥＴＰＡＲ２２に続く。パラメータの十分な値が評価されている場合、段階ＰＲＥＦ２６で、前述のパラメータの複数の値に関する決定及び計算のループによって取得される対応する複数の品質メトリクに基づき、パラメータの好ましい値が決定される。例えば、品質メトリクについて最善の値を有するパラメータ値が選択されても良く、又は最適条件、例えば最大値を推定するために、見出された品質メトリクの値に対して補間が行われても良い。

事実上、繰り返される計算は、画像を描画するためにマッピングが使用され、その後、改善されたマッピングを確立するために、描画される画像（又はその一部）に基づき誤差の測度／メトリクが確立される解決策を提供する。求められる誤差の測度は、ビューをインタリーブすることによって生じる処理済みビューに基づき得る。代替的に、処理済みビューは、上記のようにインタリーブ前の１つ又は複数のビューに基づいても良い。

３Ｄ映像の処理は、コンテンツを例えば記録中に「オフライン」で、又は短い映像遅延を用いて変換するために使われ得る。例えば、ショットの期間についてパラメータが決定され得る。ショットの開始時及び終了時の視差が全く異なる場合がある。そのような違いにかかわらず、ショット内のマッピングは連続的でなければならない。複数の期間にわたって処理することは、ショットカットの検出、オフライン処理、及び／又はバッファリングを必要とし得る。ショットの境界の自動検出それ自体は知られている。また、境界は映像編集過程中に既に印付けされ、又は決定されていても良い。例えば、顔のクローズアップショットについて決定されるオフセット値の後に、離れた風景の次のショットのための次のオフセット値が続いても良い。

図３は、視差値の分布を示す。この図面は、３Ｄ画像の視差値のグラフを示す。視差は、低い視差値Disp_lowから高い視差値Disp_highまで様々であり、図中に示すように統計的分布を有し得る。画像コンテンツ内の視差についてのこの分布例は、−１０画素の視差において中央値又は重心を有する。オートステレオスコピックディスプレイに対応するために、このような視差範囲が奥行きマップにマップされなければならない。従来、Disp_lowからDisp_highの間の視差が、奥行き０．．２５５に線形にマップされ得る。低値及び高値は、分布の５％又は９５％のポイントとすることもできる。ショット検出器を使用し、ショットごとに視差が求められ得る。しかしながら、線形マッピングは非対称分布の問題を引き起こす場合がある。代替的なマッピングは、分布の重心（即ちこの例では−１０画素）を、ＡＳＤの画面上レベル（通常１２８）に対応する奥行き値に、及び視差範囲をこの画面上の奥行きレベルのあたりに線形にマップすることであり得る。しかしながら、ＡＳＤに目を向けたとき、かかるマッピングは多くの場合、視知覚に合わない。しばしば、（画面から飛び出る）視聴者に近い一部の物体、又は視聴者から離れた物体に関して気になるぼやけが認められることがある。このぼやけはコンテンツに依存する。このぼやけを回避するための魅力的でない対応策は、全体的な奥行き範囲を減らすこと（低利得）だが、かかる対応策はＡＳＤ上で知覚される奥行きを減らしてしまう。手動による制御も魅力的ではない。

一実施形態では、以下の処理が実施される。まず、例えばステレオを２Ｄ及び奥行きに変換することにより奥行きマップが与えられる。次いで、第１の妥当な視差−奥行きマッピングを用いて、分布の中心をＡＳＤの画面レベルに対応する奥行き値にマッピングすること等の初期マッピングが行われる。その後、幾つかのビューがこの奥行き及び２Ｄ信号から生成され、処理済みビューを作成するためにインタリーブされる。インタリーブされたビューは、ＡＳＤ表示パネルに結合されても良い。概念は、２Ｄ信号として処理済みビューを使用し、それを元の２Ｄ信号と比較することである。このプロセスは、一連の奥行き（又は視差）のオフセット値について繰り返される。比較自体はスペクトル解析、ＦＦＴ等の既知の方法によって行われ得るが、ＳＡＤやＰＳＮＲ計算等のより簡単な方法とすることもできる。ボーダーデータ、例えば水平及び垂直のボーダーについて３０画素幅のボーダーを無効にすることにより、処理領域が画像の中心領域に制限され得る。

図４は、３Ｄ信号を示す。３Ｄ映像信号は、２Ｄ画像及び対応する奥行きマップを含む。図４ａは２Ｄ画像を示し、図４ｂは対応する奥行きマップを示す。この２Ｄ画像及び奥行きマップに基づき、３Ｄディスプレイ上に描画するためのビューが生成される。その後、ビューがインタリーブされて、インタリーブ済みのビューが作成される。インタリーブ済みのビューは、オートステレオスコピックディスプレイのＬＣＤパネルに転送され得る。図５及び図６によって示されるように、それぞれのオフセットのＰＳＮＲに基づき品質メトリクを計算するために、様々なオフセット値についてのインタリーブ済みのビューがここでは処理済みビューとして使用される。

図５は、１９２０ｘ１０８０の画面解像度を有する表示パネルのために生成されたものであり、各画素は３つのＲＧＢ部分画素（サブピクセル）から成る。描画される画像は、様々な奥行きオフセットパラメータ、即ちディスプレイ上のゼロ視差に対応する０〜２５５の範囲内の奥行きレベルを用いて描画された画像を表す。

入力画像の縦横比と出力先装置の縦横（アスペクト）比との違いの結果として、画像がその水平軸に沿って伸びている。それぞれの画像間の違いをより良く観察するために、インタリーブされた画像の一部分が拡大されている。ＰＳＮＲ品質メトリクを計算するために、元の入力画像（図４ａ）が１９２０ｘ１０８０にスケーリングされた。その後、図５ａ〜図５ｄについてＰＳＮＲ品質メトリクが計算された。インタリーブ済み画像は、傾斜したレンチキュラが施されたＡＳＤ向けに描画された。このインタリーブプロセスの結果、それぞれのインタリーブ済み画像の全１９２０ｘ１０８０画像画素の部分画素が、３つの異なるビューに関連するビュー情報を含む。

図５ａ〜図５ｄは、４つの異なる奥行きオフセット値、１１０、１２０、１３０、及び１４０それぞれのオフセットに対応する。視覚的に、異なるオフセットは、インタリーブプロセス及び描画されるビュー内の画像情報の様々な変位（視差）の結果として、画像内の様々な奥行きにある物体がより鮮明に又はより不鮮明に画像化されることをもたらす。その結果、図５ａ内に見られるマグ上の「くっきりした」ジグザグパターンが図５ｂ〜図５ｄ内ではぼやけている。

図５ａは、オフセット＝１１０のインタリーブされたピクチャを示す。品質メトリクが、２Ｄピクチャを用いてＰＳＮＲに基づき計算され、２５．７６ｄＢである。

図５ｂは、オフセット＝１２０のインタリーブされたピクチャを示す。品質メトリクが、２Ｄピクチャを用いてＰＳＮＲに基づき計算され、２６．００ｄＢである。

図５ｃは、オフセット＝１３０のインタリーブされたピクチャを示す。品質メトリクが、２Ｄピクチャを用いてＰＳＮＲに基づき計算され、２５．９１ｄＢである。

図５ｄは、オフセット＝１４０のインタリーブされたピクチャを示す。品質メトリクが、２Ｄピクチャを用いてＰＳＮＲに基づき計算され、２５．８２ｄＢである。

図５によって示される例では、最適なオフセットパラメータは１２０である。

図６は、オフセットパラメータの様々な値について計算された品質メトリクを示す。この図面は、オフセットパラメータ値に応じたＰＳＮＲに基づく品質メトリクの値を示す。この図面の曲線から、１２０のオフセット値が品質メトリクの最大値をもたらすことが見て取れる。人間の視聴者による検証により、実際に１２０がこの画像の最適なオフセット値であることが確認された。

この方法は、視差だけを又は２Ｄ信号からの情報だけを考慮するのではなく、複合解析を確立することを指摘しておく。複合解析により、詳細が殆ど無いが大きな視差値を有する例えば空や雲はＰＳＮＲの差に殆ど寄与しない。ある程度ぼやけた表示位置にあるかかる物体はやはり視聴体験を殆ど妨げないので、これは知覚される３Ｄ画像品質に対応する。より少ないビュー又は１つの極端なビューだけを用いるインタリーブ方式を使用することにより、処理済みビューは、仮想的なインタリーブ済みのビューとすることができ、即ち実際のＡＳＤのインタリーブ済みビューと異なっても良い。

図１に示されている装置では、プロセッサが以下のように構成されても良い。プロセッサは、処理済みビュー内の関心領域を決定し、その関心領域を３Ｄディスプレイの好ましい奥行き範囲内で表示するために、関心領域内の画像値の違い（差）に重み付けを施すことにより、品質メトリクを計算するためのユニットを有しても良い。パラメータは、関心領域を３Ｄディスプレイの好ましい奥行き範囲内で表示できるようにするように決定される。事実上、関心領域は視聴者の注意を引くと見なされる３Ｄ映像素材内の要素又は物体によって構成される。例えば関心領域データは、視聴者の注意を恐らく引く多くの詳細を有する画像領域を示し得る。関心領域は既知でも検出可能でも良く、又は３Ｄ映像信号内の指標が利用できても良い。

関心領域内で画像値の差が重み付けされ、例えば知覚される品質により大きい影響を有することが意図される物体は、品質メトリクにより多く寄与するように強調され得る。例えば、プロセッサは顔検出器５３を有することができる。検出される顔は、関心領域を決定するために使用され得る。任意選択的に奥行きマップと組み合わせて顔検出器を利用し、顔を含む領域に関して、対応する画像値の差に重み付けが施されても良い（例えば、ＰＳＮＲ計算の平方差に対する通常の重みの５倍）。更に、重み付けが奥行き値又は奥行きから得られる値と乗算されても良い（例えば（画面からはるかに出た）大きい奥行きにある顔では例えば１０ｘの更なる重み付け、小さい奥行きにある顔（画面の後方にある顔）では例えば４ｘの重み付け）。

更にプロセッサは、対応する奥行き値に依存して画像値の違いに重み付けを施すことにより、品質メトリクを計算するよう構成されても良い。選択的に、メトリクの計算において、奥行きに応じた重み、例えば大きい奥行きでの２ｘの重み付け及び小さい奥行きでの１ｘの重み付けを画像差に施しても良い。前景のぼやけは背景のぼやけよりも気になるので、この重み付けは知覚される品質に関係する。

任意選択的に、奥行きと画面レベルでの奥行き値との絶対差に応じて重みが加えられても良い。例えば、大きい奥行き差での２ｘの重み付け及び小さい奥行き差での１ｘの重み付けである。最適な（最も低いＰＳＮＲの）オフセットレベルを決定する感度が高められるので、この重み付けは知覚される品質に関係する。

一実施形態では、プロセッサが、画像値の組合せの行に沿って処理することに基づいて品質メトリクを計算するよう構成される。視差は、視聴者の眼の向きに対応する水平方向で常に生じることを指摘しておく。従って品質メトリクは、画像の水平方向に効果的に計算され得る。そのような一次元の計算はより単純である。更に、プロセッサは、画像値の組合せの解像度を、例えばその組合せの画像値行列を間引きすることによって低減するよう構成されても良い。更に、プロセッサは、画像値の組合せにサブサンプリングパターン又はランダムサブサンプリングを適用するよう構成されても良い。画像コンテンツ内での正規構造欠損を避けるために、サブサンプリングパターンは隣接するライン上の異なる画素を取るように設計されても良い。有利には、ランダムサブサンプリングは、計算される品質メトリクに構造化パターンが依然として寄与することを実現する。

３Ｄディスプレイのオフセットを自動で求めるシステムが、鮮明度メトリクを使用することに基づいても良い。そのため鮮明度は、３Ｄディスプレイ、特にオートステレオスコピックディスプレイ（ＡＳＤ）の画質に影響する重要なパラメータである。上記のように、鮮明度メトリクは画像値の組合せに適用され得る。文献「Local scale control for edge detection and blur estimation, by J. H. Elder and S. W. Zucker」IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 20, no. 7, pp. 699-716, July 1998では、画像内のエッジのぼかし半径を計算する方法について記載している。

或いは本システムは、付随する奥行きマップを有する画像に適用されても良い。前者は、例えばステレオペア（右画像＋左画像）から推定されても、３Ｄ映像データと共に伝送されても良い。本システムの概念は、鮮明度メトリクを使って奥行きマップのヒストグラムに重み付けすることである。画像の鮮明な（焦点が合った）領域に対応する奥行き値は、不鮮明な領域よりも高い重みを有することになる。そのため、結果として生じるヒストグラムの平均値は、焦点が合った奥行き面の方にバイアスする。鮮明度メトリクとして、ぼかし半径の逆数が使用されても良い。

図７は、鮮明度メトリクに基づいてオフセットを決定するためのシステムを示す。画像及び奥行きデータを有する３Ｄ信号が入力部から与えられる。分割ユニット１で、例えばエッジ検出を用いてバイナリ分割マップＳが計算される。ここではＳが、ぼかし半径が計算され得る画像内の画素を示す。ぼかし半径計算機２では、分割された入力画像についてぼかし半径ＢＲ（Ｓ）が計算される。インバータ３（１／Ｘで示す）では、鮮明度メトリクＷ（Ｓ）を求めるために、ぼかし半径の逆数が使用される。ヒストグラム計算機４では、分割奥行きマップの重み付けされたヒストグラムが計算される。このプロセスでは、奥行き値である奥行き（Ｓ）が、鮮明度メトリクＷ（Ｓ）で乗算（重み付け）される。平均値計算機５では、ヒストグラムの平均値が計算され、この平均値はここでは入力画像の焦点面（＝最適なオフセット）の方にバイアスされている。かかるシステムでは、プロセッサが、入力画像内の位置の鮮明度メトリクを計算し、それらの位置における奥行きを求め、対応する鮮明度メトリクを用いて奥行きに重み付けし、重み付けされた奥行きの平均値を求めるように構成される。平均値は、対応するオフセットを奥行きに適用することにより、３Ｄディスプレイの好ましい鮮明度の値にシフトされ得る。

図８は、奥行きマップヒストグラムの例を示す。これらのヒストグラムは、ピクチャの一例の奥行き値を示す。奥行きマップの値は０〜２５５の間である。この画像は奥行き＝１０４あたりに焦点面を有し、この奥行きは鮮明な領域を画面上に出す（ゼロ視差）ＡＳＤにとって最適なオフセットになる。上のグラフ８１は、奥行きマップの元のヒストグラムを示す。このヒストグラムの平均値は、奥行き＝８６であり、この奥行き値は最適な奥行き値＝１０４から大幅にずれている。下のグラフ８２は、鮮明度メトリクを用いて重み付けされたヒストグラムを示す。このヒストグラムの平均値は、奥行き＝９６であり、この奥行き値は最適な奥行き値＝１０４により近い。

図９は、ビューコーンを適合させるためのスケーリングを示す。ビューコーンとは、マルチビュー３Ｄディスプレイ用の一連のワープされたビューを指す。スケーリングの種類は、連続した各ビューが直前のビューと同じ視差を有する通常のコーンに対してビューコーンが適合される方法を示す。コーンの形状を変えることは、隣接するビューの相対的視差を前述の同じ視差よりも少ない量変えることを意味する。

図９の左上は、通常のコーン形状を示す。通常のコーン形状９１は、従来のマルチビューレンダラで一般に使用されている。この形状は、コーンの大部分について等しい量のステレオ、及びコーンの次の反復に向けた鋭い遷移を有する。この遷移領域内に置かれる利用者は、大量のクロストーク及び逆ステレオを認識する。この図面では、鋸歯状の曲線が、コーン内のその位置に直線的に相関した視差を有する通常のコーン形状９１を示す。ビューイングコーン内のビューの位置は、コーンの中心でゼロに、完全に左では−１に、完全に右では＋１であるように定められる。

コーンの形状を変えることは、ディスプレイ上のコンテンツの描画（即ちビュー合成、インタリービング）しか変えず、ディスプレイの物理的調節を必要としないことを理解すべきである。ビューイングコーンを適合させることによってアーティファクトを低減することができ、ステレオ視聴能力を有しない若しくは限られたステレオ視聴能力を有する、又は限られた３Ｄ映像若しくは２Ｄ映像を観ることを好む人間に対応するために、３Ｄ効果が低減された区域が作られ得る。奥行き又はワーピングを適合させるためのパラメータは、コーンの形状を変えるために出力元（ソース）側において３Ｄ映像素材に使用されるスケーリングの種類であり得る。例えば、ビューコーンを適合させるための１組の可能なスケーリングコーンの形状が予め定められても良く、各形状に指標が与えられ得る一方で、実際の指標値はその１組の形状について計算される品質メトリクに基づいて選択される。

この図面の更なる３つのグラフの中で、第２の曲線は適合されたコーン形状の３つの例を示す。それぞれの例の中の第２の曲線上のビューは、隣接するビューに対して低減された視差を有する。このビューイングコーンの形状は、最大描画位置を低減することにより、アーティファクトの視認性を減じるように適合される。中心部では、この代替的コーン形状は通常のコーンと同じ傾斜を有し得る。中心から更に離れると、画像のワーピングを制限するようにコーンの形状が（通常のコーンに比べ）変えられている。

図９の右上は、周期的なコーンの形状を示す。周期的なコーンの形状９２は、より大きいがより弱い逆ステレオ領域を作ることにより、鋭い遷移を回避するように適合される。

図９の左下は、制限されたコーンを示す。制限されたコーンの形状９３は、最大描画位置を通常のコーンの約４０％に制限するコーン形状の一例である。利用者がコーンを進むとき、利用者はステレオ、低減されたステレオ、逆ステレオ、再び低減されたステレオのサイクルを経験する。

図９の右下は、２Ｄ−３Ｄコーンを示す。この２Ｄ−３Ｄコーンの形状９４も最大描画位置を制限するが、コーンの外側の部分を再利用してモノラル（２Ｄ）ビューエクスペリエンスを与える。利用者がこのコーンを進むとき、利用者はステレオ、逆ステレオ、モノラル、再び逆ステレオのサイクルを経験する。このコーンの形状は、人々の集団であって、その集団の一部のメンバしかモノラルよりもステレオを選ばない、人々の集団が３Ｄ映画を観ることを可能にする。

要約すれば、本発明は、マッピングから生じる画像内のぼやけを減らそうとするターゲティング方法を提供することを目標とする。マルチビュー（レンチキュラ／バリア）ディスプレイ上に表示するための画像を作成する標準的な過程は、異なるビューが３Ｄ表示に適した方法でレンチキュラの下に配置されるように、複数のビューを生成し、それらのビューを典型的には画素又は部分画素レベルでインタリーブすることである。処理済みビュー、例えばインタリーブされた画像を通常の２Ｄ画像として使用し、それをオフセット等のマッピングパラメータの或る値域について、更なるビュー、例えば元の２Ｄ信号と比較し、品質メトリクを計算することが提案される。比較は、スペクトル解析やＳＡＤ及びＰＳＮＲ測定等、任意の方法に基づくことができる。解析は視差だけを考慮するのではなく、画像コンテンツも考慮に入れる。つまり、画像の或る領域が画像コンテンツの性質のために立体効果に寄与しない場合、その特定の領域は品質メトリクに実質的に寄与しない。

本発明は、静止画像であろうと動画であろうと、任意の種類の３Ｄ画像データに使用され得ることを指摘しておく。３Ｄ画像データは、電子的なデジタル符号化データとして入手可能であると見なされる。本発明はかかる画像データに関連し、画像データをデジタル領域内で操作する。

本発明は、ハードウェア及び／若しくはソフトウェア、又はプログラム可能コンポーネントによって実装され得る。例えばコンピュータプログラム製品は、図２に関して説明された方法を実施することができる。

上記の説明では、明瞭にするために、本発明の実施形態が様々な機能ユニット及びプロセッサに関して説明されたことが理解される。しかしながら、様々な機能ユニット又はプロセッサ間での任意の適切な機能分散が、本発明から逸脱することなしに使用され得ることが明らかである。例えば、別々のユニット、プロセッサ、又はコントローラによって実行されるように示されている機能が、同じプロセッサ又はコントローラによって実行されても良い。従って、特定の機能ユニットへの言及は、厳密な論理的又は物理的構造若しくは構成を示すのではなく、記載された機能を提供するための適切な手段への言及に過ぎないと見なされるべきである。本発明は、ハードウェア、ソフトウェア、ファームウェア、又はそれらの任意の組合せを含む任意の適切な形式で実装され得る。

本明細書では「含む」という語は、挙げられているもの以外の要素又はステップの存在を排除せず、或る要素の前にくる語「a」又は「an」はその要素の複数形の存在を排除せず、如何なる参照記号も特許請求の範囲を限定せず、本発明はハードウェア及びソフトウェアの両方によって実施されても良く、幾つかの「手段」又は「ユニット」がハードウェア若しくはソフトウェアの同一アイテムによって表されても良く、プロセッサが場合によりハードウェア要素と共同して１つ又は複数のユニットの機能を果たし得ることを指摘しておく。更に、本発明は上記の実施形態に限定されず、上記の又は互いに異なる従属請求項の中で列挙される全ての新規の特徴若しくは特徴の組合せに存する。

Claims (14)

1. 三次元［３Ｄ］映像信号を処理するための３Ｄ映像装置であって、前記３Ｄ映像信号は３Ｄディスプレイ上に表示される３Ｄ画像データを含み、前記３Ｄディスプレイは、視聴者向けに３Ｄ効果を作り出すために複数のビューを必要とする、３Ｄ映像装置であり、
   前記３Ｄ映像信号を受信するための受信機と、
   前記複数のビューを前記３Ｄディスプレイにターゲティングするためのパラメータによって適合される前記３Ｄ画像データに基づいて少なくとも１つの処理済みビューを決定し、
   前記処理済みビュー及び更なるビューの画像値の組合せに基づく、知覚される３Ｄ画像品質を示す品質メトリクを計算し、
   前記パラメータの複数の値について前記決定及び計算を行うことに基づいて前記パラメータの好ましい値を決定する
   ためのプロセッサと
   を含み、
   前記更なるビューは、前記パラメータによって適合される前記３Ｄ画像データに基づき更に処理されるビューであるか、前記３Ｄ画像データ内で入手可能な２Ｄビューであるか、又は、前記パラメータ及び前記処理済みビューによって適合される前記３Ｄ画像データに基づき更に処理されるビューである、３Ｄ映像装置。
2. 前記プロセッサが、前記パラメータによって適合される前記３Ｄ画像データに基づき少なくとも第１のビュー及び第２のビューを求め、前記少なくとも第１のビュー及び第２のビューをインタリーブして前記処理済みビューを求める、又は前記プロセッサが最も左のビュー及び／又は最も右のビューに基づき前記処理済みビューを求め、前記複数のビューは前記最も左のビューから前記最も右のビューにわたる一連のビューを形成する、請求項１に記載の３Ｄ映像装置。
3. 前記プロセッサが、前記画像値の組合せに対するピーク信号対雑音比の計算に基づき、又は前記画像値の組合せに対する鮮明度の計算に基づき前記品質メトリクを計算する、請求項１に記載の３Ｄ映像装置。
4. 前記複数のビューをターゲティングするための前記パラメータが、
   オフセット、
   利得、
   スケーリングの種類
   のうちの少なくとも１つを含む、請求項１に記載の３Ｄ映像装置。
5. 前記プロセッサが、ボーダー領域を無視することにより、前記画像値の組合せの中央領域に基づき前記品質メトリクを計算し、又は対応する奥行き値に依存して前記画像値の組合せに重み付けを施すことにより前記品質メトリクを計算する、請求項１に記載の３Ｄ映像装置。
6. 前記プロセッサが、前記処理済みビュー内の関心領域を決定し、前記関心領域を前記３Ｄディスプレイの好ましい奥行き範囲内で表示するために、前記関心領域内の前記画像値の組合せに重み付けを施すことにより前記品質メトリクを計算する、請求項１に記載の３Ｄ映像装置。
7. 前記プロセッサが、前記関心領域を決定するための顔検出器を含む、請求項６に記載の３Ｄ映像装置。
8. 前記プロセッサが、前記３Ｄ映像信号内のショットに依存して或る期間にわたる前記品質メトリクを計算する、請求項１に記載の３Ｄ映像装置。
9. 前記プロセッサが、
   前記画像値の組合せの行に沿って処理すること、
   前記画像値の組合せの解像度を低減すること、
   前記画像値の組合せにサブサンプリングパターン又はランダムサブサンプリングを適用すること
   の少なくとも１つにより、前記画像値の組合せの部分集合に基づいて前記品質メトリクを計算する、請求項１に記載の３Ｄ映像装置。
10. 前記受信機が、前記３Ｄ映像信号を受信するために記録担体を読み取るための読取りユニットを含む、請求項１に記載の３Ｄ映像装置。
11. 前記装置が、
    前記３Ｄ映像信号に基づき前記３Ｄ画像データの前記複数のビューを生成し、前記パラメータの前記好ましい値に依存して前記複数のビューを前記３Ｄディスプレイにターゲティングするためのビュープロセッサと、
    前記ターゲティングされた複数のビューを表示するための前記３Ｄディスプレイと
    を含む、請求項１に記載の３Ｄ映像装置。
12. 三次元［３Ｄ］映像信号を処理する方法であって、前記３Ｄ映像信号は３Ｄディスプレイ上に表示される少なくとも第１の画像を含み、前記３Ｄディスプレイは、視聴者向けに３Ｄ効果を作り出すために複数のビューを必要とする、方法であり、
    前記３Ｄ映像信号を受信するステップと、
    前記複数のビューを前記３Ｄディスプレイにターゲティングするためのパラメータによって適合される３Ｄ画像データに基づいて少なくとも１つの処理済みビューを決定するステップと、
    前記処理済みビュー及び更なるビューの画像値の組合せに基づく、知覚される３Ｄ画像品質を示す品質メトリクを計算するステップと、
    パラメータの複数の値について前記決定及び計算を行うことに基づいて前記パラメータの好ましい値を決定するステップと
    を含み、
    前記更なるビューは、前記パラメータによって適合される前記３Ｄ画像データに基づき更に処理されるビューであるか、前記３Ｄ画像データ内で入手可能な２Ｄビューであるか、又は、前記パラメータ及び前記処理済みビューによって適合される前記３Ｄ画像データに基づき更に処理されるビューである、方法。
13. 前記更なるビューは、前記パラメータによって適合される前記３Ｄ画像データに基づき更に処理されるビュー、若しくは前記３Ｄ画像データ内で入手可能な２Ｄビューであり、又は、前記パラメータによって適合される前記３Ｄ画像データに基づき更に処理されるビューであって、前記処理済みビュー及び前記更に処理されるビューは、前記画像値の組合せを構成するためにインタリーブされる、請求項１２に記載の方法。
14. 三次元［３Ｄ］映像信号を処理するためのコンピュータプログラムであって、前記プログラムは請求項１２に記載の方法のそれぞれのステップをプロセッサに実行させる、コンピュータプログラム。