JP2022522140A - サブペル動きベクトルしきい値を使用するデブロッキング - Google Patents

サブペル動きベクトルしきい値を使用するデブロッキング Download PDF

Info

Publication number
JP2022522140A
JP2022522140A JP2021549588A JP2021549588A JP2022522140A JP 2022522140 A JP2022522140 A JP 2022522140A JP 2021549588 A JP2021549588 A JP 2021549588A JP 2021549588 A JP2021549588 A JP 2021549588A JP 2022522140 A JP2022522140 A JP 2022522140A
Authority
JP
Japan
Prior art keywords
motion vector
value
vector component
predetermined threshold
vertical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2021549588A
Other languages
English (en)
Other versions
JP7386883B2 (ja
Inventor
ケネト アンデション，
ルオヤン ユー，
ジャック エンホーン，
Original Assignee
テレフオンアクチーボラゲット エルエム エリクソン（パブル）
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by テレフオンアクチーボラゲット エルエム エリクソン（パブル） filed Critical テレフオンアクチーボラゲット エルエム エリクソン（パブル）
Publication of JP2022522140A publication Critical patent/JP2022522140A/ja
Application granted granted Critical
Publication of JP7386883B2 publication Critical patent/JP7386883B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

コーディングユニットの少なくとも１つの境界をデブロックするための方法であって、境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用する、方法。本方法は、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、１つのサンプルよりも小さい所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することとを含む。【選択図】図７

Description

本開示は、高効率ビデオコーディング（ＨＥＶＣ）および多用途ビデオコーディング（ＶＶＣ）に関する。
ビデオシーケンスは、各画像が１つまたは複数の成分からなる一連の画像からなる。各成分は、サンプル値の２次元矩形アレイとして説明され得る。ビデオシーケンス中の画像は、３つの成分、すなわち、サンプル値がルーマ値である１つのルーマ成分Ｙと、サンプル値がクロマ値である２つのクロマ成分ＣｂおよびＣｒとからなることが一般的である。他の例は、Ｙ’ Ｃｂ Ｃｒ、ＹｕｖおよびＩＣＴＣＰを含む。ＩＣＴＣＰにおいて、Ｉは、「強度ルーマ」成分である。本明細書の残りでは、任意のルーマ成分Ｙ’、ＹまたはＩを、Ｙまたは単にルーマと呼ぶ。クロマ成分の次元は、各次元においてルーマ成分よりも１／２だけ小さいことが一般的である。たとえば、ＨＤ画像のルーマ成分のサイズは１９２０×１０８０となり、クロマ成分は、各々、９６０×５４０の次元を有する。成分は色成分と呼ばれることがある。
ブロックは、サンプルの１つの２次元アレイである。ビデオコーディングでは、各成分がブロックにスプリットされ、コーディングされたビデオビットストリームは一連のブロックである。ビデオコーディングでは、画像は、画像の特定のエリアをカバーするユニットにスプリットされることが一般的である。各ユニットは、その特定のエリアをなす、すべての成分からのすべてのブロックからなり、各ブロックは、１つのユニットに完全に属する。Ｈ．２６４におけるマクロブロック、およびＨＥＶＣにおけるコーディングユニット（ＣＵ）が、ユニットの例である。
ＨＥＶＣでは、各ピクチャは、コーディングツリーユニット（ＣＴＵ）に区分される。ＣＴＵは、ルーマサンプルのＮ×Ｎブロックと２つのＭ×Ｍの対応するクロマブロックとからなる。ＨＥＶＣにおけるＣＴＵは、Ｈ．２６４および以前の規格におけるマクロブロックのようなものであるが、マクロブロックとは対照的に、ＣＴＵサイズが設定可能である。しかしながら、ほとんどの場合、ＨＥＶＣにおけるＣＴＵサイズは６４×６４ルーマサンプルにセットされる。各ＣＴＵは、再帰的に４分木スプリットされ得る。４分木のルートは、その場合、ＣＴＵに関連付けられる。４分木は、リーフに達するまでスプリットされ、リーフは、コーディングユニット（ＣＵ）と呼ばれる。ＨＥＶＣにおけるＣＵは、常に、等しい高さおよび幅をもつルーマブロックからなる。各ＣＴＵがどのようにスプリットされるかが、ビットストリーム中で伝達される。ＣＵは、さらに、２つの他のツリー、すなわち、ノードとして予測ユニット（ＰＵ）を得た予測ツリー、およびノードとして変換ユニット（ＴＵ）を得た変換ツリーのルートノードである。ＨＥＶＣにおけるいくつかの復号プロセスがＣＵレベルで行われ、いくつかがＰＵレベルで行われ、いくつかがＴＵレベルで行われる。ＰＵ間の境界およびＴＵ間の境界が、ＴＵ間およびＰＵ間の不連続性を低減するために、デブロッキングフィルタによってフィルタ処理される。ＨＥＶＣでは、ＰＵについて２つの種類の予測タイプ、すなわち、予測のために、現在ピクチャの、前に復号されたサンプルからの予測のみを使用するイントラ予測と、少なくとも１つの前に復号されたピクチャからの予測を使用するインター予測とが存在する。
ＨＥＶＣでは、デブロッキングは、最初に垂直境界に対して適用され、次いで、水平境界に対して適用される。境界は、ＴＵ境界またはＰＵ境界のいずれかである。並列フレンドリデブロッキングを可能にするために、デブロッキングは、８×８サンプルグリッドに対して実施される。
各境界について、デブロッキングフィルタ強度パラメータ（ｂｓ）がセットされる。ｂｓの値が０よりも大きい場合、デブロッキングが適用され得る。境界強度が大きくなるほど、適用されるフィルタ処理が強くなる。最初に以下が検査され、ブロック間のＰＵ境界におけるブロックのいずれかがイントラ予測されたブロックであるかどうか、その場合（ｂｓは＝２にセットされる）、あるいは両方のブロックがインター予測を使用するが、両方のブロックが、異なる参照フレームを使用するかまたは著しく異なる動きベクトル（少なくとも１つの動きベクトル成分、垂直または水平動きベクトル成分における、１つのルーマサンプルまたはそれよりも大きい差分）を有するかどうか、その場合（ｂｓは＝１にセットされる）。ブロック間のＴＵ境界が、ブロックのうちの少なくとも１つ中に非０変換係数（１に等しいコードブロックフラグ（ＣＢＦ））を有するかどうかも検査され、その場合（ｂｓは＝１にセットされる）。この最初の検査は、デブロッキングが適用されるべきであることを指示するために０よりも大きい境界強度（ｂｓ）をセットする。境界強度が大きくなるほど、適用されるフィルタ処理が強くなる。デブロッキングするときに自然構造を除去することを低減／回避するために、境界のそれぞれの側に自然構造がないという検査が、次いで、ルーマについて適用される。ＨＥＶＣでは、以下の不等式、すなわち、ａｂｓ（ｐ０－２＊ｐ１＋ｐ２）＋ａｂｓ（ｑ０－２＊ｑ１＋ｑ２）＜ｂｅｔａを使用して境界のそれぞれの側で勾配計算が使用され、ここで、ｂｅｔａは、ブロックについての量子化パラメータに基づくパラメータであり、ｐ０、ｐ１～ｐ２は、ブロック境界の一方の側のサンプルであり、ｑ０、ｑ１～ｑ２は、ブロック境界の反対側のサンプルである。条件が、境界に沿った２つの位置において検査され、両方の条件が満たされる場合、ルーマサンプルは、境界のその４サンプル部分についてデブロックされる。クロマ境界は、近隣ブロックのうちのいずれか１つがイントラコーディングされる場合、常にフィルタ処理され得る。
ＶＶＣについての仕様の現在のドラフト（ＶＶＣドラフト２ ＪＶＥＴ－Ｍ１００１）では、コーディングツリーユニット（ＣＴＵ）は、ＨＥＶＣにおけるＣＴＵと同様であるが、Ｈ．２６６におけるＣＴＵは、１２８×１２８ルーマサンプルのサイズを有するという違いがある。ＶＶＣでは、ＣＴＵは、よりフレキシブルにスプリットされ得、その結果、得られたＣＵは矩形ルーマブロックからなり得る。ＶＶＣでは、ＨＥＶＣの場合のような予測ツリーまたは変換ツリーがない。しかしながら、ＶＶＣにおけるＣＵは、以下のような場合、複数のＴＵに分割され得る。
（１）ＣＵが、最大変換サイズよりも大きいサイズを有する。たとえば、最大変換サイズが６４×６４であり、ＣＵが１２８×１２８のサイズを有する場合、ＣＵは、図１に示されているように、４つの６４×６４暗黙的スプリット変換ブロックに分割される。
（２）ＣＵが、図２に示されているように、非０係数を伴って、垂直方向または水平方向のいずれかに、ＣＵサイズのサイズ１／２または１／４の１つのサブブロック変換を可能にし得、方向（水平または垂直）と、位置（サイズ１／２の場合、第１または第２のサブブロック、サイズ１／４の場合、第１または最後のサブブロック）と、サイズ（１／２または１／４）とがビットストリームから導出される、ＳＢＴ（サブブロック変換）を使用する。
（３）ＣＵが、図３に示されているように、垂直方向または水平方向のいずれかに、各々がＣＵサイズのサイズ１／４の４つのサブブロックを可能にし得、あるいは、より小さいブロックについて、垂直方向または水平方向のいずれかに、各々がＣＵサイズのサイズ１／２の２つのサブブロックを可能にし得る、ＩＳＰ（イントラサブパーティション）を使用する。
ＶＶＣでは、ＣＵは、以下のような場合、複数の予測サブブロックに分割され得る。
（１）ＣＵが、サブブロックインター予測ツールＡＦＦＩＮＥを使用する。このツールは、サブブロックサイズ４×４に関する動きパラメータ（動きベクトル、および参照フレームの指示）を有することができる。
（２）ＣＵが、サブブロックインター予測ツールＡＴＭＶＰを使用する。このツールは、図４に示されているように、サブブロックサイズ８×８に関する動きパラメータ（動きベクトル、および参照フレームの指示）を有することができる。
（３）ＣＵが、組み合わせられたイントラインター予測モードを使用し、これは、図５に示されているように、イントラ予測とインター予測の重み付けされた組合せについての予測の方向において、各々がＣＵの１／４サイズについて、４つのサブブロックの特定の重みを使用する。
ＶＶＣの現在のドラフトでは、再整形と呼ばれる新しいツールが導入された。この再整形ツールは、より良いコーディング効率のために、コーディングループ内で、ピクチャまたはタイルに基づいて、サンプル値の範囲をどのようにマッピングし、次いで、サンプルを再構築するときに、サンプル値の範囲をどのように再マッピングすべきかをシグナリングすることができる。
ＶＶＣでは、デブロッキングは、最初に垂直境界（ＣＵ／暗黙的ＴＵ／予測サブブロック境界）上で、次いで水平境界（ＣＵ／暗黙的ＴＵ／予測サブブロック境界）上で８×８グリッドと整合されたＣＵ境界を有するＣＵについて、８×８グリッドに対して適用される。デブロッキングは、ＨＥＶＣデブロッキング、およびより長いデブロッキングフィルタに基づき、これは、ブロック境界に直交するサイズが、ルーマについて少なくとも１つの側で３２に等しいかまたはそれよりも大きい場合、その側で、多くとも７つのサンプルを修正し、多くとも８つのサンプルを読み取り、ブロック境界に直交するサイズが、ルーマについて１つの側について３２よりも小さい場合、それは、その側で、多くとも３つのサンプルを修正し、多くとも４つのサンプルを読み取り、ブロック境界に直交するサイズが、クロマについてクロマサンプルにおける境界の両方の側で８に等しいかまたはそれよりも大きい場合、境界のそれぞれの側で、多くとも３つのクロマサンプルを修正し、多くとも４つのクロマサンプルを読み取り、他の場合、それは、境界のそれぞれの側で、多くとも１つのサンプルを修正し、多くとも２つのサンプルを読み取る。
読み取るべきおよび修正すべきサンプルの数が、以下に応じて制限されるので、ＣＵ、暗黙的ＴＵ境界と予測サブブロック境界の両方が並列にデブロックされ得る。
（１）ＣＵまたは暗黙的ＴＵ境界について修正すべきサンプルの最大数が、ＣＵが予測サブブロックを使用する場合、５つ（多くとも６つのサンプルを読み取ること）に限定される。
（２）ＣＵまたは暗黙的ＴＵ境界に隣接する予測サブブロック境界について修正すべきサンプルの最大数が、そのような境界の両方の側で２つ（各側で多くとも３つのサンプルを読み取ること）である。
（３）他の場合、修正すべきサンプルの最大数が、境界の各側で３つである。
修正すべきサンプルの最大数を、ルーマについて、境界の上にある側で３つのサンプル（多くとも４つのサンプルを読み取ること）に制限し、クロマについて、ＣＴＵ境界と整合された水平境界についての境界の両方の側で１つのクロマサンプル（多くとも２つのサンプルを読み取ること）に制限することにより、ルーマについて４およびクロマについて２の、ＣＴＵラインバッファのみが必要とされる。
少なくとも１つの側が、垂直境界について、３２に等しいかまたはより大きいＣＵ幅を有し、水平境界について、３２に等しいかまたはより大きいＣＵ高さを有する場合、ルーマのための長いフィルタ判断が適用される。Ｐ側は、Ｐ側が３２であるかまたはより長い場合、１にセットされ、他の場合、０にセットされる、変数ｂＳｉｄｅＰｉｓＬａｒｇｅＢｌｋを有する。Ｑ側は、Ｑ側が３２であるかまたはより長い場合、１にセットされ、他の場合、０にセットされる、変数ｂＳｉｄｅＱｉｓＬａｒｇｅＢｌｋを有する。
図６では、４つのライン（ライン０～ライン３）の場合の、ならびに各ラインおよびブロックについてサンプル０～７の場合の、ブロックＰ６０２とブロックＱ６０４との間の境界６０６が示されている。
図６に示されている、垂直境界のデブロッキングのための長いフィルタ判断が、以下でさらに詳細に説明される。以下で説明される長いフィルタ判断は、同様に水平境界のために適用され得る。
最初に、長いフィルタ判断は、境界の側がライン０およびライン３上で十分に平滑であるかどうかを検査する。
Figure 2022522140000002
ｄＬがβ（ＱＰ依存パラメータ）よりも小さい場合、ライン＝０とライン＝３の両方のための追加の長いフィルタ判断検査が、以下のように実施される。
Figure 2022522140000003
ここで、ｔＣは、ＱＰ依存パラメータである。
追加の長いフィルタ判断検査ｄＳａｍ０およびｄＳａｍ３も真である場合、長いデブロッキングフィルタが、ライン０～３について以下のように適用され、ここで、以下で示されているように、どのラインかの指示がない。
Figure 2022522140000004
ここで、ｉ＝０．．ｍａｘＦｉｌｔｅｒＬｅｎｇｔｈＰ－１、およびｊ＝０．．ｍａｘＦｉｌｔｅｒＬｅｎｇｔｈＱ－１であり、ここで、ｒｅｆＭｉｄｄｌｅ、ｒｅｆＰ、およびｒｅｆＱは、３つの事前フィルタ処理されたサンプルであり、ｒｅｆＭｉｄｄｌｅがブロックＰとブロックＱとの間の中間に中心を置かれ、ｒｅｆＰがブロックＰ中にあり、ｒｅｆＱがブロックＱ中にあり、ｇおよびｆは、Ｑ側およびＰ側のための補間フィルタ係数をもつベクトルであり、ｔＣＰＤおよびｔＣＱＤは、Ｐ側およびＱ側のための位置依存クリッピング値をもつベクトルであり、これらは、以下で示されているように、ｍａｘＦｉｌｔｅｒＬｅｎｇｔｈＰとｍａｘＦｉｌｔｅｒＬｅｎｇｔｈＱとに基づいて導出される。
Figure 2022522140000005
変数ｆｉおよびｔＣＰＤｉは、以下のように規定される。
Figure 2022522140000006
変数ｇｉおよびｔＣＱＤｊは、以下のように規定される。
Figure 2022522140000007
ＶＶＣでは、境界強度（ｂＳ）が、ルーマ成分とクロマ成分とについて個別にセットされ、ルーマとクロマの両方は、イントラモードがいずれかの側で使用される場合、または組み合わせられたイントラインター予測（ＣＩＩＰ：Ｃｏｍｂｉｎｅｄ Ｉｎｔｒａ Ｉｎｔｅｒ Ｐｒｅｄｉｃｔｉｏｎ）がいずれかの側で使用される場合、変換ブロック境界について２に等しいｂＳを与えられる。境界が変換ブロック境界であり、変換ブロックが色成分に関する非０変換係数を有する場合、その成分は１に等しいＢｓを与えられる。他の事例では、境界強度は、デブロッキング無し（ｎｏ ｄｅｂｌｏｃｋｉｎｇ）に対応する両方のクロマ成分について０にセットされる。境界が予測ブロック／サブブロック境界であり、ＣＩＩＰがいずれかの側で使用される場合、ｂＳは、ルーマについて１に等しくセットされる。境界が予測ブロック／サブブロック境界であり、境界のそれぞれの側で使用される参照ピクチャの数の差分があるか、または異なる参照ピクチャが使用される場合、あるいは（１つまたは複数の）同じ参照ピクチャが使用されるとき、動きベクトルにおける著しい差分（少なくとも１つの動きベクトル成分、垂直または水平動きベクトル成分における、１つのルーマサンプルのまたはより大きい差分）がある場合、ｂＳは、ルーマについて１に等しくセットされる。他の場合、ｂＳは、ルーマのデブロッキング無しに対応するルーマについて０に等しくセットされる。
ＶＶＣに関する１つの問題は、デブロッキング判断が、フルペルよりも著しく低い動き精度（動き精度は、現在のＶＶＣテストモデル（ＶＴＭ）においてルーマについて１／１６である）を使用するとき、大きすぎる動きの差分に基づくことである。
一実施形態では、動きベクトルしきい値は、ブロック境界のそれぞれの側の動きベクトルを比較するためにサブペル精度を伴って使用される。
一実施形態では、隣接ブロックにおける動きベクトル成分を比較するためのしきい値が、デブロッキングを適用すべきかどうかを判断するために使用される。いくつかの実施形態では、しきい値は、フルピクセル差分よりも小さい。
一態様では、コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための方法であって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用する、方法が提供される。いくつかの実施形態では、本方法は、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することとを含む。本方法は、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、１つのサンプルよりも小さい所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することをも含む。本方法は、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することをさらに含む。
いくつかの実施形態では、第１の動きベクトル成分は、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、第２の動きベクトル成分は、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む。
いくつかの実施形態では、所定のしきい値はＮ／１６であり、ここで、Ｎは、１６よりも小さい自然数である。
いくつかの実施形態では、所定のしきい値はＮに等しく、ここで、ＮはＭよりも小さく、１／Ｍはピクセルの部分における動きベクトル精度である。
いくつかの実施形態では、本方法は、所定のしきい値をビットストリーム中に含めることをさらに含む。いくつかの実施形態では、所定のしきい値はスライスヘッダ中に含まれる。他の実施形態では、本方法は、所定のしきい値をビットストリームから導出すること（たとえば、復号すること）をさらに含む。いくつかの実施形態では、所定のしきい値はビットストリームのスライスヘッダから導出される。
いくつかの実施形態では、ビデオピクチャが第１の時間レイヤであるとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２の時間レイヤであるとき、第２の値が所定のしきい値のために適用され、第１の時間レイヤは第２の時間レイヤよりも高く、第１の値は第２の値よりも低い。
いくつかの実施形態では、ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２のＱＰを使用するとき、第２の値が所定のしきい値のために適用され、第１のＱＰは第２のＱＰよりも高く、第１の値は第２の値よりも低い。
いくつかの実施形態では、第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、垂直または水平境界がＣＵ境界を含むとき、第１の値が所定のしきい値のために適用され、第１の側が第１のサブブロックを含み、第２のブロックが第２のサブブロックを含み、垂直または水平境界がサブブロック境界を含むとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、単方向予測がビデオピクチャのために使用されるとき、第１の値が所定のしきい値のために適用され、双方向予測がビデオピクチャのために使用されるとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、第１の側および第２の側が単方向予測を使用するとき、第１の値が所定のしきい値のために適用され、第１の側および第２の側が双方向予測を使用するとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、所定のしきい値は、特定のコーディングツールがビデオピクチャをコーディングするために使用されるとき、低減される。いくつかの実施形態では、再整形が特定のコーディングツールである。
いくつかの実施形態では、処理回路が、所定のしきい値をビットストリームから導出するようにさらに設定される。いくつかの実施形態では、所定のしきい値はスライスヘッダ中に含まれる。
別の態様では、コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための装置（たとえば、エンコーダまたはデコーダ）であって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用する、装置が提供される。いくつかの実施形態では、本装置は、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することとを行うように設定された処理回路を備える。
別の態様では、処理回路に、本明細書で開示される方法のいずれかを実施させるための命令を備えるコンピュータプログラムが提供される。別の態様では、コンピュータプログラムを含んでいるキャリアが提供され、キャリアは、電子信号、光信号、無線信号、およびコンピュータ可読記憶媒体のうちの１つである。
本明細書で開示される実施形態は、ブロッキングアーティファクトを効率的に低減する著しい利点を提供する。
本明細書に組み込まれ、明細書の一部をなす添付の図面は、様々な実施形態を示す。
一実施形態による、コーディングユニットを示す図である。 いくつかの実施形態による、サブブロック変換（ＳＢＴ）を使用するコーディングユニットを示す図である。 いくつかの実施形態による、イントラサブパーティション（ＩＳＰ）を使用するコーディングユニットを示す。 一実施形態による、コーディングユニットを示す図である。 いくつかの実施形態による、コーディングユニット示す図である。 一実施形態による、垂直境界を示す図である。 一実施形態による、プロセスを示すフローチャートである。 一実施形態による、エンコーダまたはデコーダの機能ユニットを示す図である。 いくつかの実施形態による、装置のブロック図である。
本明細書で開示される実施形態は、垂直および／または水平ブロック／サブブロック境界をデブロックするために、ビデオまたは画像エンコーダまたはデコーダにおいて使用され得る。
実施形態１．
この実施形態では、両方のブロックが同じ参照ピクチャを使用する、第１のブロックと第２のブロックとの間の境界についてデブロックキングを適用すべきかどうかの判断が、第１のブロックにおける水平動きベクトル成分と第２のブロックにおける水平動きベクトル成分との間の絶対差分、または第１のブロックにおける垂直動きベクトル成分と第２のブロックにおける垂直動きベクトル成分との間の絶対差分に基づく。いくつかの実施形態では、デブロッキングは、第１のブロックにおける水平動きベクトル成分と第２のブロックにおける水平動きベクトル成分との間の絶対差分、または第１のブロックにおける垂直動きベクトル成分と第２のブロックにおける垂直動きベクトル成分との間の絶対差分が、１よりも小さいしきい値に等しいかまたはそれよりも大きいときに、適用される。本開示のコンテキストでは、１の値は、１フルピクセル差分（１つのサンプル）を指示する。
実施形態２．
実施形態１において上記で説明されたように、ここで、しきい値は、０．２５に等しい。本開示のコンテキストでは、０．２５の値は、１／４ピクセル差分を指示する。別の例は、Ｎ／Ｍに等しいしきい値を使用することであり、ここで、ＮはＭよりも小さく、１／Ｍは動きベクトル精度に対応する。Ｍの一例は１６である。一般に、動きベクトルは、整数の使用を可能にするために固定点において使用され、動きベクトル精度が１／１６であるとき、１のピクセル差分が１６によって指示される。
実施形態３．
前の実施形態、たとえば、実施形態１および２のいずれか１つにおいて上記で説明されたように、ここで、境界強度は、判断が境界についてデブロッキングを適用することであるとき、ルーマの境界について１に等しくセットされる。０よりも大きい境界強度をもつ境界は、デブロッキングがその境界について適用されることを意味する。より高い境界強度は、より強いデブロッキングが適用されることを意味する。たとえば、１つの側がイントラコーディングされたブロックである、境界は、２の境界強度を有する。
実施形態４．
前の実施形態、たとえば、実施形態１から３のいずれか１つにおいて上記で説明されたように、ここで、しきい値はビデオビットストリームから復号される（または場合によっては導出される）。
いくつかの実施形態では、しきい値は、ピクチャレベルで、すなわち、スライスヘッダ中でシグナリングされる。いくつかの実施形態では、エンコーダは、異なるピクチャについて異なる動きベクトル差分しきい値をシグナリングし得る。
たとえば、一般により低いＱＰをもつピクチャと比較して、一般により高いＱＰをもつピクチャについて、より低いしきい値が適用され得る。
別の例は、ランダムアクセス設定の場合のものであり、より低い時間レイヤにおけるピクチャと比較して、より高い時間レイヤにおけるピクチャ、すなわち、より低い時間レイヤから予測されたピクチャについて、より低いしきい値が適用され得る。その理由は、より低い時間レイヤは、一般により多くの変換係数を使用し、したがってより良好な品質を有するが、より高い時間レイヤは、一般により少ない変換係数を使用し、したがって、一般により不良な品質を有することである。
また別の例は、低遅延の場合のものであり、より低いＱＰを使用するピクチャと比較して、定期的により高いＱＰ（量子化パラメータ）をもつピクチャについて、より低いしきい値が適用され得る。
実施形態５．
前の実施形態、たとえば、実施形態１から４のいずれか１つにおいて上記で説明されたように、ここで、しきい値は、境界がＣＵ／ブロック境界であるのかサブブロック境界であるのかに応じて異なる。そのような事例では、ＣＵ境界については、より低いしきい値が適用され得、サブブロック境界については、より高いしきい値が適用され得る。これは、エンコーダが補償するために変換係数を送り得るので、ブロッキングアーティファクトがサブブロック境界についてあまりひどくないことがあるからである。
実施形態６．
前の実施形態、たとえば、実施形態１から５のいずれか１つにおいて上記で説明されたように、ここで、しきい値は、再整形がピクチャのために使用される場合、低減される。
実施形態７．
前の実施形態、たとえば、実施形態１から６のいずれか１つにおいて上記で説明されたように、ここで、単方向性予測のみ、たとえば、１つのフレームのみからの予測が使用されるときについてのしきい値は、２つ以上のフレームに基づく予測、たとえば双方向性予測が行われるときのしきい値と比較してより小さい。
いくつかの実施形態では、両方のブロックが単方向性予測を使用するときについてのしきい値は、両方のブロックが双方向性予測を使用するときのしきい値と比較してより小さい。
実施形態８．
上記で提供された実施形態、たとえば、実施形態１～７の任意の組合せ。
図７は、一実施形態による、プロセス７００を示すフローチャートである。プロセス７００は、コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための方法であって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用する、方法である。７００の方法は、第１の側における第１の動きベクトル成分を取得すること（ｓ７１０）と、第２の側における第２の動きベクトル成分を取得すること（ｓ７２０）と、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定すること（ｓ７３０）と、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用すること（ｓ７４０）とを含む。いくつかの実施形態では、所定のしきい値はビットストリームから導出される（ｓ７３５）。
いくつかの実施形態では、第１の動きベクトル成分は、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含む。いくつかの実施形態では、第２の動きベクトル成分は、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む。
いくつかの実施形態では、所定のしきい値は、１フルピクセル差分に等しい。
いくつかの実施形態では、所定のしきい値はＮに等しく、ここで、ＮはＭよりも小さく、１／Ｍはピクセルの部分における動きベクトル精度である。
いくつかの実施形態では、所定のしきい値はビットストリーム中に含まれる。いくつかの実施形態では、所定のしきい値はスライスヘッダ中に含まれる。
いくつかの実施形態では、ビデオピクチャが第１の時間レイヤであるとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２の時間レイヤであるとき、第２の値が所定のしきい値のために適用され、第１の時間レイヤは第２の時間レイヤよりも高く、第１の値は第２の値よりも低い。
いくつかの実施形態では、ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２のＱＰを使用するとき、第２の値が所定のしきい値のために適用され、第１のＱＰは第２のＱＰよりも高く、第１の値は第２の値よりも低い。
いくつかの実施形態では、第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、垂直または水平境界がＣＵ境界を含むとき、第１の値が所定のしきい値のために適用され、第１の側が第１のサブブロックを含み、第２のブロックが第２のサブブロックを含み、垂直または水平境界がサブブロック境界を含むとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、単方向予測がビデオピクチャのために使用されるとき、第１の値が所定のしきい値のために適用され、双方向予測がビデオピクチャのために使用されるとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、第１の側および第２の側が単方向予測を使用するとき、第１の値が所定のしきい値のために適用され、第１の側および第２の側が双方向予測を使用するとき、第２の値が所定のしきい値のために適用され、第１の値は第２の値よりも低い。
いくつかの実施形態では、所定のしきい値は、特定のコーディングツールがビデオピクチャをコーディングするために使用されるとき、低減される。いくつかの実施形態では、再整形が特定のコーディングツールである。
図８は、いくつかの実施形態による、エンコーダまたはデコーダ８０２の機能ユニットを示す図である。図８に示されているように、エンコーダまたはデコーダ８０２は、第１の側における第１の動きベクトル成分を取得するための第１の取得ユニット８０４と、第２の側における第２の動きベクトル成分を取得するための第２の取得ユニット８０６と、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定するための決定ユニット８０８と、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用するための適用ユニット８１０とを含む。いくつかの実施形態では、所定のしきい値はビットストリームから導出される。
いくつかの実施形態では、第１の動きベクトル成分は、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含む。いくつかの実施形態では、第２の動きベクトル成分は、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む。
いくつかの実施形態では、所定のしきい値は、１フルピクセル差分に等しい。いくつかの実施形態では、所定のしきい値はＮに等しく、ここで、ＮはＭよりも小さく、１／Ｍはピクセルの部分における動きベクトル精度である。
図９は、いくつかの実施形態による、装置（たとえば、エンコーダまたはデコーダ８０２）のブロック図である。図９に示されているように、装置は、１つまたは複数のプロセッサ（Ｐ）９５５（たとえば、汎用マイクロプロセッサ、および／または、特定用途向け集積回路（ＡＳＩＣ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）など、１つまたは複数の他のプロセッサ）を含み得る処理回路（ＰＣ）９０２と、ネットワークインターフェース９４８であって、装置が、ネットワークインターフェース９４８が接続されるネットワーク１１１０（たとえば、インターネットプロトコル（ＩＰ）ネットワーク）に接続された他のノードにデータを送信し、他のノードからデータを受信することを可能にするための送信機（Ｔｘ）９４５および受信機（Ｒｘ）９４７を備える、ネットワークインターフェース９４８と、１つまたは複数の不揮発性記憶デバイスおよび／または１つまたは複数の揮発性記憶デバイスを含み得るローカル記憶ユニット（別名「データ記憶システム」）９０８とを備え得る。ＰＣ９０２がプログラマブルプロセッサを含む実施形態では、コンピュータプログラム製品（ＣＰＰ）９４１が提供され得る。ＣＰＰ９４１はコンピュータ可読媒体（ＣＲＭ）９４２を含み、ＣＲＭ９４２は、コンピュータ可読命令（ＣＲＩ）９４４を備えるコンピュータプログラム（ＣＰ）９４３を記憶する。ＣＲＭ９４２は、磁気媒体（たとえば、ハードディスク）、光媒体、メモリデバイス（たとえば、ランダムアクセスメモリ、フラッシュメモリ）など、非一時的コンピュータ可読媒体であり得る。いくつかの実施形態では、コンピュータプログラム９４３のＣＲＩ９４４は、ＰＣ９０２によって実行されたとき、ＣＲＩが、装置に、本明細書で説明されるステップ（たとえば、フローチャートを参照しながら本明細書で説明されるステップ）を実施させるように設定される。他の実施形態では、装置は、コードの必要なしに本明細書で説明されるステップを実施するように設定され得る。すなわち、たとえば、ＰＣ９０２は、単に１つまたは複数のＡＳＩＣからなり得る。したがって、本明細書で説明される実施形態の特徴は、ハードウェアおよび／またはソフトウェアで実装され得る。
様々な実施形態の概要
Ａ１．コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための方法であって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用し、方法は、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することとを含む、方法。
Ａ２．第１の動きベクトル成分が、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、第２の動きベクトル成分が、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む、実施形態Ａ１に記載の方法。
Ａ３．所定のしきい値が、１フルピクセル差分に等しい、実施形態Ａ１またはＡ２に記載の方法。
Ａ４．所定のしきい値がＮに等しく、ここで、ＮがＭよりも小さく、１／Ｍがピクセルの部分における動きベクトル精度である、実施形態Ａ１またはＡ２に記載の方法。
Ａ５．所定のしきい値がビットストリーム中に含まれる、実施形態Ａ１からＡ４のいずれか１つに記載の方法。
Ａ６．所定のしきい値がスライスヘッダ中に含まれる、実施形態Ａ５に記載の方法。
Ａ７．ビデオピクチャが第１の時間レイヤであるとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２の時間レイヤであるとき、第２の値が所定のしきい値のために適用され、第１の時間レイヤが第２の時間レイヤよりも高く、第１の値が第２の値よりも低い、実施形態Ａ１からＡ６のいずれか１つに記載の方法。
Ａ８．ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２のＱＰを使用するとき、第２の値が所定のしきい値のために適用され、第１のＱＰが第２のＱＰよりも高く、第１の値が第２の値よりも低い、実施形態Ａ１からＡ６のいずれか１つに記載の方法。
Ａ９．第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、垂直または水平境界がＣＵ境界を含むとき、第１の値が所定のしきい値のために適用され、第１の側が第１のサブブロックを含み、第２のブロックが第２のサブブロックを含み、垂直または水平境界がサブブロック境界を含むとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ａ１からＡ６のいずれか１つに記載の方法。
Ａ１０．単方向予測がビデオピクチャのために使用されるとき、第１の値が所定のしきい値のために適用され、双方向予測がビデオピクチャのために使用されるとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ａ１からＡ６のいずれか１つに記載の方法。
Ａ１１．第１の側および第２の側が単方向予測を使用するとき、第１の値が所定のしきい値のために適用され、第１の側および第２の側が双方向予測を使用するとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ａ１からＡ６のいずれか１つに記載の方法。
Ａ１２．所定のしきい値は、特定のコーディングツールがビデオピクチャをコーディングするために使用されるとき、低減される、実施形態Ａ１からＡ１１のいずれか１つに記載の方法。
Ａ１３．再整形が特定のコーディングツールである、実施形態Ａ１１に記載の方法。
Ａ１４．処理回路によって実行されたとき、処理回路に、実施形態Ａ１～Ａ１３のいずれか１つに記載の方法を行わせる命令を備える、コンピュータプログラム。
Ａ１５．実施形態Ａ１４に記載のコンピュータプログラムを含んでいるキャリアであって、キャリアが、電子信号、光信号、無線信号、およびコンピュータ可読記憶媒体のうちの１つである、キャリア。
Ｂ１．コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするためのエンコーダであって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用し、エンコーダは、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することとを行うように設定された処理回路を備える、エンコーダ。
Ｂ２．第１の動きベクトル成分が、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、第２の動きベクトル成分が、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む、実施形態Ｂ１に記載のエンコーダ。
Ｂ３．所定のしきい値が、１フルピクセル差分に等しい、実施形態Ｂ１またはＢ２に記載のエンコーダ。
Ｂ４．所定のしきい値がＮに等しく、ここで、ＮがＭよりも小さく、１／Ｍがピクセルの部分における動きベクトル精度である、実施形態Ｂ１またはＢ２に記載のエンコーダ。
Ｂ５．処理回路が、所定のしきい値をビットストリーム中に含めるようにさらに設定された、実施形態Ｂ１からＢ４のいずれか１つに記載のエンコーダ。
Ｂ６．所定のしきい値がスライスヘッダ中に含まれる、実施形態Ｂ５に記載のエンコーダ。
Ｂ７．ビデオピクチャが第１の時間レイヤであるとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２の時間レイヤであるとき、第２の値が所定のしきい値のために適用され、第１の時間レイヤが第２の時間レイヤよりも高く、第１の値が第２の値よりも低い、実施形態Ｂ１からＢ６のいずれか１つに記載のエンコーダ。
Ｂ８．ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２のＱＰを使用するとき、第２の値が所定のしきい値のために適用され、第１のＱＰが第２のＱＰよりも高く、第１の値が第２の値よりも低い、実施形態Ｂ１からＢ６のいずれか１つに記載のエンコーダ。
Ｂ９．第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、垂直または水平境界がＣＵ境界を含むとき、第１の値が所定のしきい値のために適用され、第１の側が第１のサブブロックを含み、第２のブロックが第２のサブブロックを含み、垂直または水平境界がサブブロック境界を含むとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｂ１からＢ６のいずれか１つに記載のエンコーダ。
Ｂ１０．単方向予測がビデオピクチャのために使用されるとき、第１の値が所定のしきい値のために適用され、双方向予測がビデオピクチャのために使用されるとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｂ１からＢ６のいずれか１つに記載のエンコーダ。
Ｂ１１．第１の側および第２の側が単方向予測を使用するとき、第１の値が所定のしきい値のために適用され、第１の側および第２の側が双方向予測を使用するとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｂ１からＢ６のいずれか１つに記載のエンコーダ。
Ｂ１２．所定のしきい値は、特定のコーディングツールがビデオピクチャをコーディングするために使用されるとき、低減される、実施形態Ｂ１からＢ１１のいずれか１つに記載のエンコーダ。
Ｂ１３．再整形が特定のコーディングツールである、Ｂ１１に記載のエンコーダ。
Ｃ１．コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするためのデコーダであって、垂直または水平境界がコーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャがコーディングユニットを含み、第１の側と第２の側とが同じ参照ピクチャを使用し、デコーダは、第１の側における第１の動きベクトル成分を取得することと、第２の側における第２の動きベクトル成分を取得することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、第１の動きベクトル成分と第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、第１の側と第２の側との間の垂直または水平境界にデブロッキングを適用することとを行うように設定された処理回路を備える、デコーダ。
Ｃ２．第１の動きベクトル成分が、第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、第２の動きベクトル成分が、第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む、実施形態Ｄ１に記載のデコーダ。
Ｃ３．所定のしきい値が、１フルピクセル差分に等しい、実施形態Ｃ１またはＣ２に記載のデコーダ。
Ｃ４．所定のしきい値がＮに等しく、ここで、ＮがＭよりも小さく、１／Ｍがピクセルの部分における動きベクトル精度である、実施形態Ｃ１またはＣ２に記載のデコーダ。
Ｃ５．処理回路が、所定のしきい値をビットストリームから導出するようにさらに設定された、実施形態Ｃ１からＣ４のいずれか１つに記載のデコーダ。
Ｃ６．所定のしきい値がスライスヘッダ中に含まれる、実施形態Ｃ５に記載のデコーダ。
Ｃ７．ビデオピクチャが第１の時間レイヤであるとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２の時間レイヤであるとき、第２の値が所定のしきい値のために適用され、第１の時間レイヤが第２の時間レイヤよりも高く、第１の値が第２の値よりも低い、実施形態Ｃ１からＣ６のいずれか１つに記載のデコーダ。
Ｃ８．ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が所定のしきい値のために適用され、ビデオピクチャが第２のＱＰを使用するとき、第２の値が所定のしきい値のために適用され、第１のＱＰが第２のＱＰよりも高く、第１の値が第２の値よりも低い、実施形態Ｃ１からＣ６のいずれか１つに記載のデコーダ。
Ｃ９．第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、垂直または水平境界がＣＵ境界を含むとき、第１の値が所定のしきい値のために適用され、第１の側が第１のサブブロックを含み、第２のブロックが第２のサブブロックを含み、垂直または水平境界がサブブロック境界を含むとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｃ１からＣ６のいずれか１つに記載のデコーダ。
Ｃ１０．単方向予測がビデオピクチャのために使用されるとき、第１の値が所定のしきい値のために適用され、双方向予測がビデオピクチャのために使用されるとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｃ１からＣ６のいずれか１つに記載のデコーダ。
Ｃ１１．第１の側および第２の側が単方向予測を使用するとき、第１の値が所定のしきい値のために適用され、第１の側および第２の側が双方向予測を使用するとき、第２の値が所定のしきい値のために適用され、第１の値が第２の値よりも低い、実施形態Ｃ１からＣ６のいずれか１つに記載のデコーダ。
Ｃ１２．所定のしきい値は、特定のコーディングツールがビデオピクチャをコーディングするために使用されるとき、低減される、実施形態Ｃ１からＣ１１のいずれか１つに記載のデコーダ。
Ｃ１３．再整形が特定のコーディングツールである、Ｃ１１に記載のデコーダ。
様々な実施形態が（もしあれば、添付の書類を含む）本明細書で説明されたが、それらの実施形態は、限定ではなく、例として提示されたにすぎないことを理解されたい。したがって、本開示の広さおよび範囲は、上記で説明された例示的な実施形態のいずれによっても限定されるべきでない。その上、本明細書で別段に指示されていない限り、またはコンテキストによって明確に否定されていない限り、上記で説明されたエレメントのそれらのすべての考えられる変形形態における任意の組合せが、本開示によって包含される。
さらに、上記で説明され、図面に示されたプロセスは、ステップのシーケンスとして示されたが、これは、説明のためにのみ行われた。したがって、いくつかのステップが追加され得、いくつかのステップが省略され得、ステップの順序が並べ替えられ得、いくつかのステップが並行して実施され得ることが企図される。

Claims (20)

  1. コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための方法（７００）であって、前記垂直または水平境界が前記コーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャが前記コーディングユニットを含み、前記第１の側と前記第２の側とが同じ参照ピクチャを使用し、前記方法は、
    前記第１の側における第１の動きベクトル成分を取得すること（ｓ７１０）と、
    前記第２の側における第２の動きベクトル成分を取得すること（ｓ７２０）と、
    前記第１の動きベクトル成分と前記第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定すること（ｓ７３０）と、
    前記第１の動きベクトル成分と前記第２の動きベクトル成分との間の前記絶対差分が、前記所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、前記第１の側と前記第２の側との間の前記垂直または水平境界にデブロッキングを適用すること（ｓ７４０）と
    を含み、
    前記所定のしきい値が１つのサンプルよりも小さい、方法（７００）。
  2. 前記第１の動きベクトル成分が、前記第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、
    前記第２の動きベクトル成分が、前記第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む、
    請求項１に記載の方法。
  3. 前記所定のしきい値がＮ／１６であり、ここで、Ｎが、１６よりも小さい自然数である、請求項１または２に記載の方法。
  4. 前記所定のしきい値がＮに等しく、ここで、ＮがＭよりも小さく、１／Ｍがピクセルの部分における動きベクトル精度である、請求項１または２に記載の方法。
  5. 前記所定のしきい値をビットストリーム中に含めること、または
    前記所定のしきい値をビットストリームから導出すること
    をさらに含む、請求項１から４のいずれか一項に記載の方法。
  6. 前記所定のしきい値がスライスヘッダ中に含まれる、または
    前記所定のしきい値がスライスヘッダから導出される、
    請求項５に記載の方法。
  7. 前記ビデオピクチャが第１の時間レイヤであるとき、第１の値が前記所定のしきい値のために適用され、
    前記ビデオピクチャが第２の時間レイヤであるとき、第２の値が前記所定のしきい値のために適用され、
    前記第１の時間レイヤが前記第２の時間レイヤよりも高く、前記第１の値が前記第２の値よりも低い、請求項１から６のいずれか一項に記載の方法。
  8. 前記ビデオピクチャが第１の量子化パラメータ（ＱＰ）を使用するとき、第１の値が前記所定のしきい値のために適用され、
    前記ビデオピクチャが第２のＱＰを使用するとき、第２の値が前記所定のしきい値のために適用され、
    前記第１のＱＰが前記第２のＱＰよりも高く、前記第１の値が前記第２の値よりも低い、請求項１から６のいずれか一項に記載の方法。
  9. 前記第１の側が第１のコーディングユニット（ＣＵ）を含み、第２のブロックが第２のＣＵを含み、前記垂直または水平境界がＣＵ境界を含むとき、第１の値が前記所定のしきい値のために適用され、
    前記第１の側が第１のサブブロックを含み、前記第２のブロックが第２のサブブロックを含み、前記垂直または水平境界がサブブロック境界を含むとき、第２の値が前記所定のしきい値のために適用され、
    前記第１の値が前記第２の値よりも低い、請求項１から６のいずれか一項に記載の方法。
  10. 単方向予測が前記ビデオピクチャのために使用されるとき、第１の値が前記所定のしきい値のために適用され、
    双方向予測が前記ビデオピクチャのために使用されるとき、第２の値が前記所定のしきい値のために適用され、
    前記第１の値が前記第２の値よりも低い、請求項１から６のいずれか一項に記載の方法。
  11. 前記第１の側および前記第２の側が単方向予測を使用するとき、第１の値が前記所定のしきい値のために適用され、
    前記第１の側および前記第２の側が双方向予測を使用するとき、第２の値が前記所定のしきい値のために適用され、
    前記第１の値が前記第２の値よりも低い、請求項１から６のいずれか一項に記載の方法。
  12. 前記所定のしきい値は、特定のコーディングツールが前記ビデオピクチャをコーディングするために使用されるとき、低減される、請求項１から１１のいずれか一項に記載の方法。
  13. 処理回路（９０２）によって実行されたとき、前記処理回路（９０２）に、請求項１から１２のいずれか一項に記載の方法を行わせる命令（９４４）を備える、コンピュータプログラム（９４３）。
  14. 請求項１３に記載のコンピュータプログラムを含んでいるキャリアであって、前記キャリアが、電子信号、光信号、無線信号、およびコンピュータ可読記憶媒体（９４２）のうちの１つである、キャリア。
  15. コーディングユニットの少なくとも１つの垂直または水平境界をデブロックするための装置（８０２）であって、前記垂直または水平境界が前記コーディングユニットの第１の側と第２の側とを形成し、ビデオピクチャが前記コーディングユニットを含み、前記第１の側と前記第２の側とが同じ参照ピクチャを使用し、前記装置は、
    前記第１の側における第１の動きベクトル成分を取得することと、
    前記第２の側における第２の動きベクトル成分を取得することと、
    前記第１の動きベクトル成分と前記第２の動きベクトル成分との間の絶対差分が、所定のしきい値に等しいかまたはそれよりも大きいかどうかを決定することと、
    前記第１の動きベクトル成分と前記第２の動きベクトル成分との間の前記絶対差分が、前記所定のしきい値に等しいかまたはそれよりも大きいと決定したことの結果として、前記第１の側と前記第２の側との間の前記垂直または水平境界にデブロッキングを適用することと
    を行うように設定された処理回路（９０２）を備え、
    前記所定のしきい値が１つのサンプルよりも小さい、装置（８０２）。
  16. 前記第１の動きベクトル成分が、前記第１の側における第１の水平動きベクトル成分または第１の垂直動きベクトル成分を含み、
    前記第２の動きベクトル成分が、前記第２の側における第２の水平動きベクトル成分または第２の垂直動きベクトル成分を含む、
    請求項１５に記載の装置。
  17. 前記所定のしきい値がＮ／１６であり、ここで、Ｎが、１６よりも小さい自然数である、請求項１５または１６に記載の方法。
  18. 前記所定のしきい値がＮに等しく、ここで、ＮがＭよりも小さく、１／Ｍがピクセルの部分における動きベクトル精度である、請求項１５または１６に記載の装置。
  19. 前記処理回路が、前記所定のしきい値をビットストリーム中に含めるようにさらに設定された、または
    前記処理回路が、前記所定のしきい値をビットストリームから導出するようにさらに設定された、
    請求項１５から１８のいずれか一項に記載の装置。
  20. 前記装置がエンコーダまたはデコーダである、請求項１５から１９のいずれか一項に記載の装置。
JP2021549588A 2019-02-27 2020-02-19 サブペル動きベクトルしきい値を使用するデブロッキング Active JP7386883B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962811354P 2019-02-27 2019-02-27
US62/811,354 2019-02-27
PCT/SE2020/050193 WO2020176026A1 (en) 2019-02-27 2020-02-19 Deblocking using sub-pel motion vector threshold

Publications (2)

Publication Number Publication Date
JP2022522140A true JP2022522140A (ja) 2022-04-14
JP7386883B2 JP7386883B2 (ja) 2023-11-27

Family

ID=72240183

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021549588A Active JP7386883B2 (ja) 2019-02-27 2020-02-19 サブペル動きベクトルしきい値を使用するデブロッキング

Country Status (7)

Country Link
US (1) US11902516B2 (ja)
EP (1) EP3932080A4 (ja)
JP (1) JP7386883B2 (ja)
CN (1) CN113475082A (ja)
AU (1) AU2020229625A1 (ja)
BR (1) BR112021014861A2 (ja)
WO (1) WO2020176026A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140369428A1 (en) * 2011-11-04 2014-12-18 Lg Electronics Inc. Method and apparatus for encoding/decoding image information
US20180359484A1 (en) * 2016-01-29 2018-12-13 Huawei Technologies Co.,Ltd. Filtering method for removing blocking artifact and apparatus

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5012647B2 (ja) * 2008-04-30 2012-08-29 ソニー株式会社 画像処理装置およびその方法、並びにプログラム
CA2785036A1 (en) * 2010-02-05 2011-08-11 Telefonaktiebolaget L M Ericsson (Publ) De-blocking filtering control
BR112013013509B1 (pt) 2010-12-07 2021-12-28 Sony Corporation Dispositivo de processamento de imagem, e, método de processamento de imagem
JP5884313B2 (ja) 2011-01-18 2016-03-15 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
KR102094939B1 (ko) 2011-11-25 2020-03-31 선 페이턴트 트러스트 화상 처리 방법 및 화상 처리 장치
US9270993B2 (en) 2012-09-10 2016-02-23 Apple Inc. Video deblocking filter strength derivation
EP3729812A1 (en) * 2017-12-19 2020-10-28 VID SCALE, Inc. Face discontinuity filtering for 360-degree video coding
WO2019136657A1 (en) * 2018-01-11 2019-07-18 Qualcomm Incorporated Video coding using local illumination compensation
CN118042151A (zh) * 2018-01-25 2024-05-14 三星电子株式会社 使用基于子块的运动补偿进行视频信号处理的方法和装置
US11425390B2 (en) * 2018-01-26 2022-08-23 Electronics And Telecommunications Research Institute Method and apparatus for image encoding and image decoding using temporal motion information
CN116634149A (zh) * 2018-03-29 2023-08-22 索尼公司 图像处理装置和图像处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140369428A1 (en) * 2011-11-04 2014-12-18 Lg Electronics Inc. Method and apparatus for encoding/decoding image information
JP2014535238A (ja) * 2011-11-04 2014-12-25 エルジー エレクトロニクス インコーポレイティド 映像情報符号化／復号方法及び装置
US20180359484A1 (en) * 2016-01-29 2018-12-13 Huawei Technologies Co.,Ltd. Filtering method for removing blocking artifact and apparatus
JP2019503629A (ja) * 2016-01-29 2019-02-07 ホアウェイ・テクノロジーズ・カンパニー・リミテッド ブロッキングアーティファクトを除去するためのフィルタリング方法および装置

Also Published As

Publication number Publication date
US11902516B2 (en) 2024-02-13
JP7386883B2 (ja) 2023-11-27
AU2020229625A1 (en) 2021-10-07
EP3932080A1 (en) 2022-01-05
BR112021014861A2 (pt) 2021-10-05
CN113475082A (zh) 2021-10-01
WO2020176026A1 (en) 2020-09-03
US20220141457A1 (en) 2022-05-05
EP3932080A4 (en) 2022-06-08

Similar Documents

Publication Publication Date Title
US11102515B2 (en) In loop chroma deblocking filter
CN110169064B (zh) 具有减低复杂性的视频译码中的双边滤波器
TWI829721B (zh) 跨分量幀內預測模式導出
CN110024405B (zh) 图像处理方法及其装置
AU2014202921B2 (en) Method, apparatus and system for de-blocking a block of video samples
JP2018532318A (ja) ビデオ符号化における進化型デブロッキングフィルターの方法およびその装置
JP7096890B2 (ja) ビデオピクチャ境界のデブロッキング
JP2022540133A (ja) 適応ループフィルタリングのためのサンプル決定
US11831926B2 (en) Deblocking of transform sub-block boundaries
CN114390288A (zh) 在视频编解码中使用神经网络滤波
US11653030B2 (en) Asymmetric deblocking in a video encoder and/or video decoder
JP7450604B2 (ja) ビデオコーディング及び処理のためのデブロッキングフィルタ
US20220329875A1 (en) Deblocking between block boundaries and sub-block boundaries in a video encoder and/or video decoder
JP2022522140A (ja) サブペル動きベクトルしきい値を使用するデブロッキング
WO2020171760A1 (en) Deblocking on 4x4 grid using long filters
CN110249630B (zh) 去块效应滤波装置、方法和存储介质
JP7387878B2 (ja) ビデオまたは画像コーディングにおけるデブロッキングフィルタ選択
JP2021523641A (ja) 暗黙的変換ユニット境界のデブロッキング
EP4128761A1 (en) Video processing
CN118077197A (en) Combining deblocking filtering and another filtering for video encoding and/or decoding

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211108

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230421

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230516

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230809

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231114

R150 Certificate of patent or registration of utility model

Ref document number: 7386883

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150