JP2017135724A5 - - Google Patents

Description

５．４ 画像の同じ位置に配置された部分の閾値処理による奥行き／視差マップのタイル（ピクセル）ベースの２つのセグメンテーション
上記説明から明白になったので、ウェッジレットベースの分割は、一方ではサイド情報レートおよび他方では分割の可能性の達成可能な多様性の間の一種のトレードオフを表す。それと比較して、輪郭に分割することは、サイド情報レートに関してより複雑なようである。

セグメンタ６０２は、参照ブロックの第１および第２のパーティションへの２つのセグメンテーションを得る参照ブロック２１６の範囲内で画像２１５を閾値処理することにより、奥行き／視差マップ２１３の既定のブロック２１０と同じ位置に配置される、画像２１５の参照ブロック２１６をセグメント化するように構成される。

図２２の要素に関する可能な実施詳細を表すことができるセクション３．２．２に関して上述したように、セグメンタ６０２は、個々に、それぞれの値がそれぞれの既定の値より大きいか小さいかに関しては、画像２１５の参照ブロック２１６の第１および第２のパーティション２０２ａおよび２０２ｂの各々は、画像２１５の参照ブロック２１６を完全にカバーし互いに補完的であるタイルのセットであることができるように、閾値処理において、参照ブロック２１６の二次元再分割のタイル６０８での参照ブロック２１６の中で画像２１５の値を個々にチェックすることができるように構成することができる。すなわち、閾値処理は、タイル６０８が画像２１５のうちの個々のサンプル６１０に対応するという場合に、サンプル解像度で実行されうる。閾値処理における個々のチェックの対象である値が、再構成された画像２１５の再構成された値であるという点で、デコーダ６００が、画像２１５の再構成を担当してもよいと述べられなければならない。特に、図１〜３について述べたように、デコーダ６００は、それとともに関連する奥行き／視差マップ２１３の前に画像２１５を再構成するように構成されうる。

すでに上述したように、セグメンタ６０２は、セグメント化する際に、参照ブロック２１６の第１および第２のパーティションへの２つのセグメンテーションを得るために、モルフォロジカルホールフィリング（ｍｏｒｐｈｏｌｏｇｉｃａｌ ｈｏｌｅ ｆｉｌｌｉｎｇ）および／またはローパスフィルタリングを閾値処理の結果上に適用するように構成されうる。これは、空間転送器６０４により空間的に転送された参照ブロック２１６から得られた２つのセグメンテーションのパーティションの非常に多くの分離された部分の発生を回避する、しかしながら、この種の突然の奥行き変化が、目にみえて発生する可能性は、かなり低い。当然、エンコーダは、同じことを実行する。

更に、デコーダ６００およびセグメンタ６０２は、閾値処理において、画像２１５の参照ブロック２１６の再構成されたサンプル値の中心的傾向の大きさを決定し、画像２１５の参照ブロック２１６の各再構成されたサンプル値を決定された大きさに依存するそれぞれの閾値と比較することにより閾値処理を実行するよう構成することができる。上述の通り、閾値は、参照ブロック２１６の中のサンプル６１０の中でグローバルに定義されうる。中心傾向として、算術平均または中央値のような、いくつかの平均値が、使用されうる。

セクション４．２において上述した通り、デコーダ６００は、既定の閾値を上回っている画像２１５の参照ブロック２１６の中でサンプルの値の演繹的な決定された分散だけの場合には単にブロック６０２〜６０６により表される符号化モードの有効性を裏づけるように構成されえた。そうでない場合には、閾値処理により発見された２つのセグメンテーションは、奥行き／視差マップのブロック２１０の外観のための良好な予測器をおそらく形成せず、そして、したがって、この符号化モードは、このブロックを考慮に入れることができない。モードの可能性を抑圧することにより、エントロピー確率評価が考慮されなければならないそれぞれの符号化オプション識別子のシンボル値の数の不利なおよび不必要な増加、は、回避される。

その代わりに、サンプルアレイ３０２が、画像と関連した奥行き／視差マップである場合、デコーダ７００は、参照ブロックの２つのセグメンテーションから第１および既定のパーティションを得るために参照ブロック内で画像を閾値処理することにより既定のブロック２１０と同じ位置に配置される画像の参照ブロックをセグメント化するように、および、第１および第２のパーティションを得るために、奥行き／視差マップの既定のブロック上に画像の参照ブロックの２つのセグメンテーションを空間的に転送するように構成されうる。

Claims (10)

1. データストリーム（３０４）からサンプルアレイ（３０２）を再構成するためのデコーダであって、
   前記サンプルアレイ（３０２）の既定のブロック（２１０）の第１および第２のパーティションへの２パーティション化を、
   既定のブロック（２１０）に並置されている、画像の参照ブロックの再構成されたサンプル値の中心的傾向の大きさを決定し、
   前記参照ブロックの再構成された各サンプル値と前記参照ブロックの前記再構成されたサンプル値について包括的に規定された閾値とを比較して、および、前記中心的傾向の大きさに依存して、前記閾値を下回る前記参照ブロックの再構成されたサンプル値の第１のブロックパーティションと、前記閾値を上回る前記参照ブロックの前記再構成されたサンプル値の第２の参照ブロックパーティションへの前記参照ブロックの２分セグメントを得て、
   前記画像の前記参照ブロックの前記２分セグメントを奥行き／視差マップの既定のブロックに空間的に転送して前記第１のパーティションと第２のパーティションとを得るようにすることによって
   導出し、
   前記既定のブロックに隣接している前記サンプルアレイ（３０２）の隣接したサンプルの各々を、前記第１および第２のパーティションのそれぞれに関連付けて、それぞれの隣接しているサンプルが関連付けられているパーティションに隣接するようにして、
   前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第１のパーティション内に位置している前記サンプルアレイのサンプルに割り当てること、および／または、前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第２のパーティション内に位置している前記サンプルアレイのサンプルに割り当てることにより、前記既定のブロック（２１０）を予測するように構成されていること、
   を特徴とするデコーダ。
2. 前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の前記平均値にリファイン情報内の第１のリファイン値を適用すること、および／または前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の前記平均値に前記リファイン情報内の第２のリファイン値を適用することにより、前記データストリーム内のリファイン情報を使用して前記既定のブロックの予測をリファインするように構成されていること、
   を特徴とする、請求項１に記載のデコーダ。
3. 前記第１および／または第２のリファイン値を適用する際に、前記第１および／または第２のリファイン値と、前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の前記平均値、および／または前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の前記平均値とを、それぞれ線形に結合するように構成されていること、
   を特徴とする、請求項２に記載のデコーダ。
4. 前記第１および／または第２のリファイン値を適用する際に、前記データストリームから前記第１および／または第２のリファイン値を取り出し、前記サンプルアレイと関連付けられた既定の空間的にサンプリングされた構成要素が前記データストリーム内で転送される参照量子化ステップサイズにより決まる量子化ステップサイズを使用して、取り出された前記第１および／または第２のリファイン値をスケーリングするように構成されていること、
   を特徴とする、請求項２または３に記載のデコーダ。
5. 前記サンプルアレイは奥行きマップであり、かつ前記デコーダは、前記ビットストリームから、前記奥行きマップが関連付けられているテクスチャサンプルアレイを再構成するために前記参照量子化ステップサイズを使用するように構成されていること、
   を特徴とする、請求項４に記載のデコーダ。
6. 前記既定のブロックを前記デコーダの予測ループにおいて参照として使用するようにさらに構成されている、
   ことを特徴とする請求項１〜５のいずれかに記載のデコーダ。
7. サンプルアレイをデータストリームに符号化するためのエンコーダであって、
   前記サンプルアレイの既定のブロックの第１および第２のパーティションへの２パーティション化を、
   前記既定のブロック（２１０）に並置されている、画像の参照ブロックの再構成されたサンプル値の中心的傾向の大きさを決定し、
   前記参照ブロックの再構成された各サンプル値と前記参照ブロックの前記再構成されたサンプル値について包括的に規定された閾値とを比較して、および、前記中心的傾向の大きさに依存して、前記閾値を下回る前記参照ブロックの再構成されたサンプル値の第１のブロックパーティションと、前記閾値を上回る前記参照ブロックの前記再構成されたサンプル値の第２の参照ブロックパーティションへの前記参照ブロックの２分セグメントを得て、
   前記画像の前記参照ブロックの前記２分セグメントを奥行き／視差マップの前記既定のブロックに空間的に転送して前記第１のパーティションと第２のパーティションとを得るようにすることによって
   導出し、
   前記既定のブロックに隣接する前記サンプルアレイの隣接したサンプルの各々を前記第１および第２のパーティションのそれぞれに関連付けて、隣接しているサンプルのそれぞれが、関連付けられている前記パーティションに隣接するようにして、
   前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第１のパーティション内に位置している前記サンプルアレイのサンプルに割り当てること、および、前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第２のパーティション内に位置している前記サンプルアレイのサンプルに割り当てることにより、前記既定のブロックを予測するように構成されている、
   ことを特徴とするエンコーダ。
8. データストリーム（３０４）からサンプルアレイ（３０２）を再構成するための方法であって、
   前記サンプルアレイ（３０２）の既定のブロック（２１０）の第１および第２のパーティションへの２パーティション化を、
   前記既定のブロック（２１０）に並置されている、画像の参照ブロックの再構成されたサンプル値の中心的傾向の大きさを決定し、
   前記参照ブロックの再構成された各サンプル値と前記参照ブロックの前記再構成されたサンプル値について包括的に規定された閾値とを比較して、および、前記中心的傾向の大きさに依存して、前記閾値を下回る前記参照ブロックの再構成されたサンプル値の第１のブロックパーティションと、前記閾値を上回る前記参照ブロックの前記再構成されたサンプル値の第２の参照ブロックパーティションへの前記参照ブロックの２分セグメントを得て、
   前記画像の前記参照ブロックの前記２分セグメントを奥行き／視差マップの既定のブロックに空間的に転送して前記第１のパーティションと第２のパーティションとを得るようにすることによって
   導出するステップと、
   前記既定のブロックに隣接している前記サンプルアレイ（３０２）の隣接したサンプルの各々を前記第１および第２のパーティションのそれぞれに関連付けて、隣接しているそれぞれのサンプルが、関連付けられている前記パーティションに隣接するようにするステップと、
   前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第１のパーティション内に位置している前記サンプルアレイのサンプルに割り当てること、および／または、前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第２のパーティション内に位置している前記サンプルアレイのサンプルに割り当てることにより前記既定のブロック（２１０）を予測するステップと、を含む、
   ことを特徴とする方法。
9. サンプルアレイをデータストリームに符号化する方法であって、
   前記サンプルアレイの既定のブロックの第１および第２のパーティションへの２パーティション化を、
   前記既定のブロック（２１０）に並置されている、画像の参照ブロックの再構成されたサンプル値の中心的傾向の大きさを決定し、
   前記参照ブロックの再構成された各サンプル値と前記参照ブロックの前記再構成されたサンプル値について包括的に規定された閾値とを比較して、および、前記中心的傾向の大きさに依存して、前記閾値を下回る前記参照ブロックの再構成されたサンプル値の第１のブロックパーティションと、前記閾値を上回る前記参照ブロックの前記再構成されたサンプル値の第２の参照ブロックパーティションへの前記参照ブロックの２分セグメントを得て、
   前記画像の前記参照ブロックの前記２分セグメントを奥行き／視差マップの既定のブロックに空間的に転送して前記第１のパーティションと第２のパーティションとを得るようにすることによって
   導出するステップと、
   前記既定のブロックに隣接している前記サンプルアレイの隣接したサンプルの各々を前記第１および第２のパーティションのそれぞれに関連付けて、隣接しているそれぞれのサンプルが、関連付けられている前記パーティションに隣接するようにするステップと、
   前記第１のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第１のパーティション内に位置している前記サンプルアレイのサンプルに割り当てること、および、前記第２のパーティションに関連付けられた前記隣接しているサンプルの値の平均値を前記第２のパーティション内に位置している前記サンプルアレイのサンプルに割り当てることにより、既定のブロックを予測するステップと、を含む、
   ことを特徴とする方法。
10. コンピュータ上で実行されるときに、請求項８または９に記載の方法を実行するためのプログラムコードを有すること、
    を特徴とするコンピュータ・プログラム。