JP4485951B2 - ３次元ビデオ信号後処理方法 - Google Patents

Description

本発明は、視差マップに関連した複数の視野を有するデジタルビデオ信号後処理方法に関する。
そのような方法は、例えば、ＭＰＥＧ規格内の３次元ビデオアプリケーション用のビデオ通信システムに用いることができる。

３次元シーンと称される３次元ビデオ信号の大抵の表示は、深さマップ及び視差マップに依存する。一般に、互いに相違する視点に対応する所定の３次元シーンのイメージのセットから開始し、その各々は、可能な場合には深さマップやテクスチャのような互いに相違する関連の特徴とともに到来する。視点の深さマップは、グレースケールイメージであり、その画素はそれぞれ、シーンを撮影するカメラに対する距離を有する。単に視野とも称されるシーンの新たな視点を生成することを所望するとき、他の視点、その深さマップ、固有のカメラパラメータ、及びカメラがこの視点から他の視点に行くことによって経る変化のパラメータ（変位、回転、レンズの変更）が与えられた場合には、その一部の領域を演算することができる。このプロセスは「再構成」と称され、形成される新たな視点は、再構成視野（又は再構成イメージ）と称される。シーンのポイントＰが両方の視点から見える場合、変換ベクトルは、新たな視点の画素座標を元の視点の画素座標から与える。これらベクトルは視差ベクトルと称される。文献”three dimensional computer vision − O. Faugeras MIT Press 1993”に開示されているような投影幾何学の結果は、視差マップの視差ベクトルと深さマップの深さ値との間の簡単な関係を確立する。

ビデオ信号の送信中、当業者に周知であるマルチビュー又はステレオ符号化形態は、一般に、所定の範囲の視点をカバーするのに必要なテクスチャ及び深さマップを圧縮によって符号化する。テクスチャを、損失符号化の場合には周知のアーティファクトを生じうる標準的な方法を用いて符号化できるのに対して、深さ（又は視差）符号化の場合は幾分扱いにくく、元の態様と視覚的に同様な態様を有する符号化された深さマップに対して、必ずしも同一の再構成特性を有することを意味しない。新たな視野発生プロセスにおいて、ポイント又は領域が（誤った視差ベクトルのために）誤った場所に変換されうる。これによってテクスチャが不連続になり、かかる不連続は、符号化されたマップの「視覚的な」態様が予測したものに比べて更に顕著になる。さらに、密集した深さマップは非常に大きなファイルとなり、深さマップのサイズを理想的な範囲（すなわち、テクスチャのビットレートの２０％未満）に保持することを所望する場合には、損失圧縮をほとんど回避することができない。したがって、アーティファクト及び不適切な深さ／視差値を処理する必要があり、ビデオ信号の復号化後の後処理及び向上したアルゴリズムを設計する必要がある。

ＭＰＥＧ−４規格内では、深さマップを、（”Amendment 1: Visual extensions, ISO/IEC JTC 1/SC 29/WG 11 N 3056, December 1999”に記載されているような）複数補助素子ツール(Multiple Auxiliary Component tool (MAC))を用いて符号化することができ、この場合、当業者に周知な従来のルミナンスイメージ符号化と同様にブロックに基づいて符号化されたＤＣＴとなる。存在するアーティファクトの特別な処理は提案されていないが、既に説明したように、テクスチャに良好であるが必ずしも深さマップに良好でない従来のＭＰＥＧツールが提案されている。したがって、例えば、テクスチャ再構成イメージでは、これによって分離テクスチャ画素沿いにファジィエッジが生じることがあり、さらに、二つの影響が、同一方向に動く視点間で時間的な整合性がない。

したがって、本発明の目的は、深さマップ（又は視差マップ）符号化アーティファクトを修正する、視差マップに関連した複数の視野を有するデジタルビデオ信号後処理方法を提供することである。
このために、請求項１に規定した方法が提供される。

分離された投影画素を除去することによって、投影された元の視差マップの関連のない値が除去されることを詳細に見ることができる。
本発明による方法の一例は、請求項２で規定したステップを具える。
本発明による方法の他の例は、請求項３で規定したステップを具える。
本発明による方法の他の例は、請求項４で規定したステップを具える。
本発明による方法の他の例は、請求項５で規定したステップを具える。
本発明による方法の他の例は、請求項６で規定したステップを具える。
ホール境界を包囲する投影画素を考慮することによって、本発明は、圧縮が原因の誤ったホール境界値からの誤った値での前記ホールのパディングを回避する利点を有する。
本発明による方法の他の例は、請求項７で規定したステップを具える。

これは、空間中で整合しない規定されていない値に対する補間を回避するという利点を有する。

本発明の他の目的、特徴及び利点を、以下の詳細な説明を読むとともに添付図面を参照しながら明らかにする。
対応する参照番号を、説明を通じて対応する素子に対して用いる。
以下の説明において、当業者に周知の機能又は構成を詳細に説明しない。その理由は、これらが不要な詳細において発明を不明瞭にするからである。

本発明は、デジタルビデオ信号の後処理方法に関する。
そのような方法は、ＭＰＥＧ４の３次元ビデオアプリケーション用のビデオ通信システム内で用いられる。

３次元ビデオ信号は、形状、テクスチャ、動きベクトル、視差マップ、深さマップ、色等の互いに相違する関連の特徴を有する複数の視点を具える。

ビデオ信号が送信されると、ビデオ信号が符号化される。符号化プロセス中、その互いに相違する特徴は符号化され、特に、視差マップ及び深さマップは、圧縮アルゴリズムが適用される。この圧縮によって、アーティファクトを有する劣化した視差マップ及び深さマップとなることがある。

ビデオ信号送信後、ビデオ信号が符号化され、全てのビデオ信号の視野は、復号化された視差の後処理を含むアルゴリズム中に再構成される。シーンの新たな視点を発生することを所望するとき、他の視点、深さマップ、固有のカメラパラメータ、及びカメラがこの視点から新たな視点に行くことによってベル変化のパラメータ（移動、回転、レンズ変更）が与えられた場合には、その一部の領域を計算することができる。

後処理方法は、他の視野からの新しい視野及び劣化した深さマップの再構成中、後に説明するように、深さマップが所定の変換（例えば、投影）を経て、疑わしい値(problematic value)の検出が元の復号化マップを用いるときに比べて容易になる、という事実に基づく。

先ず、深さと視差との間の一致（投影幾何学）が存在する場合、視差マップ上で作業を行う。例えば当業者に周知であるとともに文献”O. Faugeras, Three-dimensional computer vision, MIT Press, 1993”に記載されたエピ極線制約に従った元のステレオ対の修正によって、常に、全てが同一方向に従う視差ベクトルを有することができるので、水平方向の視差ベクトルを用いた方法（ビデオカメラの「平行ステレオ設定」(parallel stereo setting)の通常のケース）を説明する。当然、これに制約されるものではない。この場合において、視差ベクトルは単一の値として規定される。したがって、視差ベクトルを「視差値」とも称する。

以下、Ｉ_０を、元のテクスチャ画像とし、Ｉ_Ｎを、新たに再構成した視野とする。ｄを、視差マップとし、ｄ（ｘ、ｙ）を、画素（ｘ，ｙ）における視差値とする。新たな視野が元の視野の左側又は右側に存在するとともに（多少元の市やから離間した）所定の基線を有することは、係数αによって表現される。視野の各画素（ｘ，ｙ）に対して、以下の関係を有する。
Ｉ_０（ｘ，ｙ）＝Ｉ_Ｎ（ｘ＋α．ｄ（ｘ，ｙ），ｙ）

再構成プロセスを、複数の方法で行うことができ、（文献”Disparity field and depth map coding for multi-view 3D image generation, by D. Tzovaras, N. Grammalidis, G. Strinzis, Signal processing: Image Communication 11 (1998) page 205-230”に記載されたような）これらの方法のうちの通常の方法を、後に説明するような以下の主要ステップに分割することができる。
１．投影された視差マップの生成。
２．投影された視差マップのホール充填。
３．ホールが充填されている投影された視差マップに基づく最終的なＩ_Ｎ視野の生成。

再構成プロセスに基づいて、視点の後処理を以下のように行い、それを図１に示す。
第１ステップ１）において、投影された視差マップは、視点の下の視差マップから生成される。視野のＮ画素は、将来の視野の１画素に投影される。Ｎは任意の値をとることができる。
−画素が投影されない場合には、０。この場合、再構成された視野の対応する画素は、元の視野から妨害された新たな視野の部分（オクルージョン領域）に存在する。
−１画素のみがこの画素又はそれ以外に投影される場合には、１。元の視野の一部の画素が、再構成された視野の同一画素に対してこれらの画素を投影する視差値を有する。

したがって、視差視差値のリストは、将来の視野のこの画素に対応する。再構成された視野の各画素に対応するリストのセットは、投影された視差マップとなる。

主要な概念は、投影プロセスが連続的であるために投影された視差マップが多かれ少なかれ元の視差マップと同一の規則性を有する必要があることである。それは、元の視差マップがある程度不規則性を有する場合には投影された視差マップが同一の不規則性を有することも意味する。

各画素に投影されたポイントの数を考察する場合、ある種の規則性も存在する必要がある。特に、ホールの中間において、分離された投影画素が存在してはいけない。しかしながら、視差マップを復号化するのに用いられるＤＴＣ量子化プロセスのために、一部の画素値が変更され、一旦投影されると、これらの画素は、もはや元の包囲する画素に近接しない。そのような画素は、分離された投影画素(isolated projected pixel)と称される。図２からわかるように、同一値ｄｏ１及びｄｏ２を有する二つの画素領域を有する元の視差マップＤｏが存在する。投影された視差マップＤｐは、対応する二つの画素領域ｄｐ１，ｄｐ２を有するが、「ホール」の領域Ｈｐ１，Ｈｐ２を有する。

所定の圧縮アーティファクトのために、一部の画素は、誤ってこれらホール領域に投影されることがある。これらの画素は、分離画素(isolated pixel)と称される。

後処理方法は、第１フィルタ処理Ｆ１を用いることによってこれらの分離された投影画素を除去する。第１の制限されない実施の形態において、フィルタ処理は、以下のように行われる。投影された視差マップの各画素Ｐｐに対して、ホールとして規定された包囲画素Ｐｐｓの数を計数する（「包囲画素」(surrounding pixel)の表記は、アプリケーションに依存する。それを、画素を中心に正方形、円形、矩形等の隣接部とすることができる。）。この数が、所定のしきい値Ｔ１を超える、例えば、隣接部に含まれる画素数の半分を超える場合には、考察される分離された画素は「ホール」としてセットされ、この画素に導く元の視差マップの任意の画素は、「誤った視差値」としてマークされる。

この第１の実施の形態を図３に示す。元の視差マップＤｏの第１の誤った画素Ｐｏ２は、投影された視差マップＤｐの領域Ｄｐ２に対応する分離された投影画素Ｐｐ２を有する。元の視差マップＤｏの第２画素Ｐｏ１１及び第３画素Ｐｏ１２は、投影された視差マップＤｐの領域Ｄｐ１に同一の対応する分離された投影画素Ｐｐ１を有する。破線の窓は、ここではホールとして規定された、Ｐｐ２の包囲画素Ｐｐｓを規定し、これによって、Ｐｐ２は、分離された画素となる。同一のことはＰｐ１に当てはまる。その結果、Ｐｐ１及びＰｐ２並びにＰｏ１１及びＰｏ１２に対応する元の視差マップＤｏの画素はそれぞれ、「誤った値」としてセットされる。

そのようなフィルタ処理は、視差マップの量子化の予測される効果に対して好適である。その理由は、かかる量子化が圧縮の１ステップであるとともに視差マップのアーティファクトの原因の一つとなるからである。視差量子化エラーは、主に視差マップの先鋭エッジに生じ、この場合、（主にオブジェクト境界で）直線によって分離された互いに大幅に相違する二つのグレーレベルの均質領域(homogeneous area)が存在する。これらのほぼ同一の領域は、投影された視差マップに大きなホールを発生する領域であり、分離された「誤った視差値」を正確に示すのに適している。

第２の制限されない実施の形態において、フィルタ処理は以下のように行われる。投影された画素値の数に関連する限り、投影されたマップの他の分離された画素をチェックすることによって、誤った値を検出することもできる。分離された投影画素は、包囲画素の特徴に関連しない特徴を有する画素である。

例えば、３の値を含む画素が、２の値を含む画素によって包囲されている場合、それは、少なくとも一つの誤り値を含みそうである。このセットの値とそれに隣接するものとを比較することによって、リスト中の誤った値を検出することができる。

投影された視差マップの画素の値の数は、０とｎとの間である（ｎは、元の視差マップに依存する。）。分離された画素の検出に要求される精度は、処理を所望するのはどの種類の分離された画素であるかを決定し、分離された画素は、ホールによって包囲され、２以上の値を有し、１の値のみを含む画素によって包囲され、等々。処理するケースが増加すると、視差マップの精度が増加するだけでなく、アルゴリズムを更にコンピュータに集約する。精度と効率との間のトレードオフは、所望されるアプリケーションの種類に依存する。

このフィルタ処理プロセスを向上させる方法は、係数αに対して互いに相違する値をチェックすることによるものであり、相することによって、更に多くの誤った値を検出することができる。係数αを変更する互いに相違する二つの方法がある。
・符号を変更することよって、投影方向を変更する。この方法を、視野内のオブジェクトの両側で強めることができる。例えば、視野が山を含み、「右投影」を行う場合、山の右側に対するホールをフィルタ処理し、「左」投影に対して、山の右側に対するホールをフィルタ処理する。
・大きさを変更することによって、視差の劣化を加速し、更に小さい大きさのために十分見えないものの一部を検出することができ、この場合、大きなホールを利用する。

αの互いに相違する値に対するフィルタ処理を実行することによって、検出効率が向上するが、複雑さが増大する。テストすべき値の数の選択もアプリケーションに依存する。

第２ステップ２）において、投影された視差マップのホールの充填がある。
再構成プロセス中、投影された視差マップ生成に続く第２ステップは、補間によるこの視差間マップのホールの充填からなる。一般に、最終的に再構成された視野において、ホールが（「実生活」で最も一般的なケースである）前景オブジェクトでははく背景に属するものに対応することを考察することによって、補間タイプが選択される。一例を以下で説明する。投影された視差範囲において、パッデイングプロセスを通じて、ホールの全ラインに亘ってホール境界視差値を繰り返す。パッデイングプロセスは、ホールに最も近くてホールの全ラインにパッドする境界視差値を取り出すことからなる。

いずれの場合にも、補間は、大幅にホール境界視差値に依存する。圧縮された（すなわち、劣化した）視差マップを用いるときの問題は、このパッデイングプロセスに対して用いられるホール境界値が圧縮アルゴリズムによって僅かに変更され、したがって、誤りが生じる場合があることであり、さらに、あるラインから他のラインに変化するに際し、パッデイングプロセスが、これらの誤った値に基づいて実行され、これは、ホールの全ラインに亘って伝播される。視覚的には、それは、再構成された視野において「ウォーンエッジ」(worn edge)と称するものを形成することができる。

本発明の方法によれば、ホール境界地に対して新たな特有の後処理フィルタＦ２が適用され、これによって、上記問題を回避する。それは、ホールの境界に適用され、ホールそれ自体には適用されない。

先ず、あるホールが、顕著な誤った補間値を導くのに十分大きくない場合（例えば、１画素幅のホール）、フィルタ処理は、所定の（アプリケーションに依存する）しきい値Ｔ２、例えば、３画素より大きいホールの境界のみに対して行われる。

その後、これら選択された全てのホールＨに対して、図４に示すように、（当然ホールを除く）投影された包囲画素値を考慮しながら、中間値フィルタ処理が境界画素値で実行される。

図４の例において、投影された視差マップＤｐは二つの領域を具え、一方は画素Ｐを有し、他方はホールＨを有する。

ホールＨ１は、投影された視差マップＤｐで選択される。（ホールでない）画素値の窓Ｗは、考察されるホールＨ１の境界画素値Ｖｋ１の周辺で取り出される。一旦、窓Ｗ内の全ての画素値が格納されると、中間値が取り出され、境界画素値Ｖｋ１を置換する。

画素値Ｖｋ１が中間値フィルタ処理を通じて変更された後、規則的なパディングプロセスは、新たな画素値Ｖｋ１によってホールＨ１それ自体で実行される。

この中間値フィルタ処理によって境界画素値に変化が生じる場合、元の視差マップの境界画素値は、それに応じて誤った値としてマークされ、新たな値Ｖｋ１が割り当てられる場合にホールＨ１の境界画素に投影された元の視差マップの画素は、新たな値Ｖｋ１が割り当てられる。これらの変更を、（既に説明したように符号又は大きさが変化するときに）αに対して互いに相違する値を用いるときに行うこともできる。

例えば、投影された視差マップＤｐの選択されたホールの境界画素は、値１０を有する画素番号１１である。元の視差マップＤ０の対応する画素は、値１０を有する画素番号１である。境界画素番号１１の中間値フィルタ処理後、新たな値は５となる。したがって、元の視差マップＤｏの対応する画素番号１は、「誤った」値を取り出す。さらに、新たな値５が割り当てられる場合に境界画素番号１１に投影される元の視差マップＤｏの画素は、新たな値５が割り当てられる。実際には、元の視差マップＤｏの画素番号６は、値５が割り当てられる。

第３ステップ３）において、最終的な調整が好適に実行される。それは、ライン上の中間値フィルタ処理Ｆ３による投影視差マップの調整からなる（これによって、投影された視差は、更に規則的になるとともに、以前のフィルタ処理によって検出することができなかった不規則性を円滑にする。その理由は、例えば、それらは、視差の大きな不連続の付近に配置されていないからである。）。以前の通り、あり得る変化は、元の視差マップに変換されえる。

第４ステップ４）において、最終的な視野Ｉ_Ｎを、ホールが充填された投影視差マップに基づいて生成する。

既に説明した互いに相違する処理ステップは、投影された視差領域で実行された。したがって、第１の制限されていない実施の形態において、最終的に再構成された視野Ｒ＿ＶＩＥＷを、文献”Display field and depth map coding for multi-view 3D image generation, by D. Tzovaras, N. Grammalidis, G. Strinzis, Signal Processing: Image Communication 11 (1998) pages 205-230”に記載されたような当業者には周知のこのフィルタ処理された投影視差マップから生成することができる。

第２の制限されていない実施の形態において、再構成された視野は、後に説明するように元の視差マップの変形から生成される。

ステップ１及び２の種々のフィルタ処理プロセス中、画素が投影視差マップにおいて変形され又は「誤った視差値」としてラベルを付されると常に、元の視差マップは、マークされ及び変形されるとともに、上記のように記載される。したがって、これら変形され又はラベル付けされた画素は、元の視差マップに変換される。

規定されていない値ＷＶ又は「誤った視差値」のリストが取得される。
このリストは、最終的に向上した視差マップを取得するために「ホール充填」手順中に置換する必要がある。それを行う更に信頼性のある手順は、次の通りである。

規定されていない値を有する復号化された元の視差マップ、すなわち、変形された元の視差マップは、ライン上で走査される。規定されていない値を満たすために、規定されていない値の境界画素値の一つがコピーされる。一般に、選択すべきあり得る二つの境界画素値候補が存在し、一方は、規定されていない値を有する画素の左に存在し、他方は、規定されていない値を有する画素の右に存在する。一つの選択は、共一次補間又は最近傍補間を用いることであるが、ホールのサイズが可変であるために、補間が空間中で一致しないことがある。したがって、好適には、復号化された元の視差マップの元の画素に対して最も近い値を有する境界画素が選択される。圧縮によって元の非圧縮値が実際には１ビットしか変化していないとしても、最終的な値は、一般的には同一オブジェクトの包囲画素に更に近くなり、取得される後処理された視差マップは、圧縮されていない元のものに近くなる（この種の補間によって実験結果は更に良好になった。）。

図５に示すように、元の復号化視差マップＤｃｏ及び規定されていない値を有する変形された元の復号化視差マップＤｃｃｏを見ることができる。後者の視差マップＤｃｃｏにおいて、修正する必要がある一つの規定されていない値ＷＶ１を見ることができる。それは、元の復号化視差マップＤｃｏの画素Ｐｃｏ１に対応する。規定されていない値ＷＶ１に対して二つの境界画素候補Ｐｓ１及びＰｓ２が存在する。Ｐｓ１は、元の復号化視差マップＤｃｏの対応する元の画素Ｐｃｏ１から最も近い値を有する画素である。上記画素Ｐｓ１は、規定されていない値ＷＶ１を置換する。

一旦補間が行われると、元の非圧縮視差マップに近い修正視差マップが生成される。そのようなマップを生成する利点は、以下の二つである。
・修正視差マップを、視野再構成プロセスに対しても使用することができる。アーティファクトがこの修正視野マップから除去されるので、修正視差マップを、（推測によれば調整ステップ３を除いて更にフィルタ処理する必要なく）最終的な再構成に使用することができる。修正視差マップは、投影された視差マップを用いる場合に比べて良好な再構成視野を与える。
・生成された修正マップは、一般的に著しくシャープであり、異常な値を有しなく、これによって、当業者に周知の合成やＺキーイングのような深さ／視差値に基づく他のアプリケーションに対して更に適切になる。

本発明は、上記実施の形態に限定されるものではなく、添付した請求の範囲に規定したような本発明の範囲を逸脱することなく変更及び変形を行うことができる。これに関連して、以下で結びの言及を行う。

本発明は、上記ビデオアプリケーションに限定されない。本発明を、圧縮視差マップを考慮する信号を処理するシステムを用いる任意のアプリケーション内で用いることができる。特に、本発明は、視差マップ符号化に適用する場合には、他のＭＰＥＧ規格ファミリー（ＭＰＥＧ−１，ＭＰＥＧ−２）のビデオ圧縮アルゴリズム及びＩＴＵ Ｈ２６Ｘファミリー（Ｈ２６１，Ｈ２６３及びその拡張。Ｈ２６１が今日では最新である。参照番号Ｑ１５−Ｋ−５９）に適用される。

本発明による方法は、上記の実現に限定されるものではない。
ハードウェア又はソフトウェアの単一アイテムが複数の機能を事項できる場合には、ハードウェア、ソフトウェア又はその両方のアイテムによって本発明による方法の機能を実現する複数の方法がある。それは、ハードウェア、ソフトウェア又はその両方のアイテムのアッセンブリが機能を実行することを除外するものではなく、したがって、本発明によるビデオ信号後処理方法を変更することなく単一機能を形成する。

上記ハードウェア又はソフトウェアのアイテムを、有線電子回路又は適切にプログラムされた集積回路によるような複数の方法で実現することができる。集積回路を、コンピュータ又はデコーダに含めることができる。後者の場合、デコーダは、既に説明したように、ビデオ信号後処理方法のステップ１，２，３及び４を実行する手段を具え、その手段を、既に説明したようなハードウェア又はソフトウェアとする。

集積回路は、命令のセットを具える。したがって、例えば、コンピュータプログラミングメモリ又はデコーダメモリに含まれる命令のセットによって、コンピュータ又はデコーダは、後処理方法の互いに相違するステップを実行することができる。

命令のセットを、ディスクのようなデータ担体を読み出すことによってプログラミングメモリにロードすることができる。サービスプロバイダは、インターネットのような通信ネットワークを通じて利用できる命令のセットを作成することができる。

動詞「具える」及びその接続詞の使用は、任意の請求項に規定したもの以外のステップ又は素子の存在を除外するものではない。素子又はステップは、複数の素子又はステップの存在を除外するものではない。

本発明によるビデオ信号後処理方法の線形図である。 図１のビデオ信号後処理方法の第１ステップによって生成された、投影視差マップのホールを示す。 図１のビデオ信号後処理方法の第１ステップ中の投影視差マップのホールのフィルタ処理を示す。 図１のビデオ信号後処理方法の第２ステップ中の投影視差マップのホールのフィルタ処理を示す。 図１のビデオ信号後処理方法の第３ステップ中の規定されていない画素値のフィルタ処理を示す。

Claims (12)

1. 視差マップに関連した複数の視野を有するデジタルビデオ信号後処理方法において、元の視差マップから、投影される視差マップを生成する第１ステップと、前記投影された視差マップ内のホールをフィルタ処理する第２ステップとを具え、前記第１ステップが、前記投影された視差マップ上の孤立投影画素を第１フィルタ処理によって除去するサブステップを具えることを特徴とするデジタルビデオ信号後処理方法。
2. 前記第１フィルタ処理が、ホールによって包囲される孤立投影画素の選択によって実行されることを特徴とする請求項１記載のデジタルビデオ信号後処理方法。
3. 前記第１フィルタ処理が、包囲される画素の特徴に関連しない特徴を有する孤立投影画素の選択によって実行されることを特徴とする請求項１記載のデジタルビデオ信号後処理方法。
4. 前記第１フィルタ処理を、投影された視差マップの両方の投影方向に適用することを特徴とする請求項２又は３記載のデジタルビデオ信号後処理方法。
5. 前記第１フィルタ処理が、前記視差マップの投影の大きさを変更することを特徴とする請求項２又は３記載のデジタルビデオ信号後処理方法。
6. 選択した前記孤立投影画素をホールとして設定し、これら選択した投影画素となる前記元の視差マップの対応する画素を誤りとしてマークして、変更した元の視差マップとすることを特徴とする請求項１から５のうちのいずれか１項に記載のデジタルビデオ信号後処理方法。
7. 前記第２ステップが、
   − しきい値より大きいホールを選択するステップと、
   − 選択したホールの選択した境界画素値を、前記ホールの境界画素値の包囲する投影画素を考慮しながら中間値フィルタ処理するステップと、
   − 前記ホールを、前記中間値フィルタ処理の結果を用いてパディングするステップとを具えることを特徴とする請求項１から６のうちのいずれか１項に記載のデジタルビデオ信号後処理方法。
8. 選択した境界画素が前記フィルタ処理から新たな値を選択すると、選択した前記境界画素となる前記元の視差マップの対応する画素を誤りとしてマークし、前記新たな値を有する境界画素に対応する元の視差マップの画素に前記新たな値を割り当てて、変更した元の視差マップとすることを特徴とする請求項７記載のデジタルビデオ信号後処理方法。
9. 前記変更した元の視差マップの誤った画素を、前記元の視差マップの元の画素に最も近い値を有する境界画素値の一つによってフィルタ処理する第３ステップを更に具えることを特徴とする請求項６又は８記載のデジタルビデオ信号後処理方法。
10. 視野を、前記変更した元の視差マップから再構成することを特徴とする請求項９記載のデジタルビデオ信号後処理方法。
11. デコーダ用のコンピュータプログラムであって、前記デコーダにロードされると前記デコーダが請求項１〜１０の方法を実行する命令のセットを具えることを特徴とするコンピュータプログラム。
12. コンピュータ用のコンピュータプログラムであって、前記コンピュータにロードされると前記コンピュータが請求項１〜１０の方法を実行する命令のセットを具えることを特徴とするコンピュータプログラム。

Images