JP2022508177A - イントラブロックコピーモードとインター予測ツールとの間の相互作用 - Google Patents
イントラブロックコピーモードとインター予測ツールとの間の相互作用 Download PDFInfo
- Publication number
- JP2022508177A JP2022508177A JP2021528964A JP2021528964A JP2022508177A JP 2022508177 A JP2022508177 A JP 2022508177A JP 2021528964 A JP2021528964 A JP 2021528964A JP 2021528964 A JP2021528964 A JP 2021528964A JP 2022508177 A JP2022508177 A JP 2022508177A
- Authority
- JP
- Japan
- Prior art keywords
- mode
- block
- video block
- current video
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
- H04N19/54—Motion estimation other than block-based using feature points or meshes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
ビデオ符号化規格は、長年にわたり著しく改良されてきており、そして、今や、部分的には、高い符号化効率を提供し、かつ、より高い分解をサポートしている。HEVCおよびH.265といった、最近の標準は、ハイブリッドビデオ符号化構造に基づいており、そこでは、時間的予測プラス(plus)変換符号化が利用されている。
各インター予測PU(予測ユニット(prediction unit))は、1つ又は2つの参照ピクチャ(reference picture)リストのための動きパラメータを有する。いくつかの実施形態において、動きパラメータ(motion parameter)は、動きベクトルおよび参照ピクチャインデックスを含んでいる。他の実施形態において、2つの参照ピクチャリストのうちの1つの使用は、また、inter_pred_idcを使用して信号化されてもよい。さらに他の実施形態において、動きベクトルは、予測子(predictor)に対するデルタとして明示的に符号化されてよい。
マージモードを使用してPUが予測される場合には、マージ候補リスト内のエントリーを指し示すインデックスがビットストリームから構文解析(parsed)され、そして、動き情報を取り出す(retrieve)するために使用される。このリストの構成は、以下のステップのシーケンスに従って要約され得る。
ステップ1.1:空間的候補の導出
ステップ1.2:空間的候補について冗長性(redundancy)チェック
ステップ1.3:時間的候補の導出
ステップ2:追加候補の挿入
ステップ2.1::双予測候補の作成
ステップ2.2:ゼロ(zero)動き候補の挿入
空間的マージ候補の導出において、図2に示された位置に配置された候補の中から最大4つのマージ候補が選択される。導出の順序はA1、B1、B0、A0、B2である。位置B2は、位置A1、B1、B0、A0のうち任意のPUが利用できないか(例えば、それが別のスライスまたはタイルに属しているため)、または、イントラコード化されている場合にだけ考慮される。位置A1で候補が追加された後で、残りの候補の追加は、符号化効率が改善されるように、同一の動き情報を有する候補がリストから除外されることを保証する冗長性(redundancy)チェックの対象となる。
このステップにおいては、1つの候補だけがリストに追加される。特に、この時間的マージ候補の導出においては、スケーリングされた(scaled)動きベクトルが、所与の参照ピクチャリストの中で現在ピクチャとのPOC差異が最小であるピクチャに属する同一場所の(co-located)PUに基づいて導出される。同一場所のPUの導出に使用される参照ピクチャリストは、スライスヘッダ内で明示的に信号化される。
空間的-時間的マージ候補の他に、マージ候補の2つの追加タイプが存在する。結合双予測(combined bi-predictive)マージ候補およびゼロマージ候補である。結合双予測マージ候補は、空間的-時間的マージ候補を利用することによって生成される。結合双予測マージ候補は、B-スライスだけに使用される。結合双予測候補は、初期候補の第1参照ピクチャリスト動きパラメータを、別の第2参照ピクチャリスト動きパラメータと組み合わせることによって生成される。これらの2つのタプル(tuple)が異なる動き仮説(hypotheses)を提供する場合に、それらは新たな双予測候補を形成する。
(1)変数numRefを、Pスライスについてリスト0に関連付けられた参照ピクチャの数、または、Bスライスについて2つのリスト内の参照ピクチャの最小数、のいずれかに設定する。
(2)非反復ゼロ動き候補の追加
0...numRef-1である変数iについて、リスト0(Pスライスの場合)または両方のリスト(B-スライスの場合)に対して、(0,0)に設定されたMVを伴うデフォルトの動き候補、および、iに設定された参照ピクチャインデックスを追加する。
(3)(0,0)に設定されたMVを伴う繰り返しゼロ(repeated zero)の動き候補、0に設定されたリスト0の参照ピクチャインデックス(Pスライスの場合)、および、0に設定された両方のリストの参照ピクチャインデックス(Bスライスの場合)を追加する。
AMVPは、動きパラメータの明示的な伝送のために使用される、隣接PUを伴う動きベクトルの空間的-時間的相関を利用する。これは、最初に、左側、上の時間的に隣接するPU位置の利用可能性をチェックし、冗長な候補を除去し、そして、候補リストを一定長にするためにゼロベクトルを加えることによって、動きベクトル候補リストを構築する。次いで、エンコーダは、候補リストから最良の予測子(predictor)を選択し、そして、選択された候補を示している対応するインデックスを送信することができる。同様に、マージインデックス・信号化では、最良の動きベクトル候補のインデックスは、切り捨て単項(truncated unary)を使用して符号化される。この事例において符号化されるべき最大値は2である(図8参照)。以下のセクションでは、動きベクトル予測候補の導出プロセスに関する詳細が提供される。
図8は、動きベクトル予測候補について導出プロセスをまとめたものであり、そして、入力としてrefidxを用いて各参照ピクチャリストに対して実装され得る。
空間的動きベクトル候補の導出においては、5つの可能性ある候補の中で最大2つの候補が考慮され、それらの候補は、図2で先に示されたような位置に配置されたPUから導出されており、それらの位置は、動きマージのものと同じである。現在PUの左側に対する導出の順序は、A0、A1、および、スケーリングされたA0、スケーリングされたA1として定義される。現在PUの上側に対する導出の順序は、B0、B1、B2、スケーリングされたB0、スケーリングされたB1、スケーリングされたB2として定義される。従って、各側について、動きベクトル候補として使用され得る4つの事例が存在する。2つの事例は空間的スケーリングを使用する必要がなく、2つのケースでは空間的スケーリングが使用される。4つの異なる事例は、以下のようにまとめられる。
-空間的スケーリングなし
(1)同一参照ピクチャリスト、および、同一参照ピクチャインデックス(同一POC)
(2)異なる参照ピクチャリストであるが、同じ参照ピクチャ(同じPOC)
-空間的スケーリング
(3)同一の参照ピクチャリストであるが、異なる参照ピクチャ(異なるPOC)
(4)異なる参照ピクチャリスト、および、異なる参照ピクチャ(異なるPOC)
参照ピクチャインデックスの導出とは別に、時間的マージ候補の導出のための全てのプロセスは、(図6の例に示されるように)空間的動きベクトル候補の導出のためのものと同じである。いくつかの実施形態においては、参照ピクチャインデックスが、デコーダに対して信号化される。
いくつかの実施態様においては、ジョイント探究モデル(Joint Exploration Model、JEM)として知られる参照ソフトウェアを使用して、将来のビデオ符号化技術が探究される。JEMでは、いくつかの符号化ツールにおいて、サブブロックベースの予測が採用されている。アフィン予測、代替的な時間的動きベクトル予測(ATMVP)、空間的-時間的動きベクトル予測(STMVP)、双方向光学フロー(BIO)、フレームレートアップ変換(FRUC)、ローカル適応動きベクトル分解(LAMVR)、オーバーラップブロック・動き補償(OBMC)、ローカル照明補償(LIC)、および、デコーダ側動きベクトル・リファインメント(DMVR)、といったものである。
四分木プラス二分木(QTBT)を有するJEMにおいて、各CUは、各予測方向について最大で1組の動きパラメータを有することができる。いくつかの実施形態においては、エンコーダにおいて2つのサブCUレベルの動きベクトル予測方法が考慮されている。大きなCUをサブCUへと分割し、そして、大きなCUに係る全てのサブCUについて動き情報を導出することによるものである。代替的な時間的動きベクトル予測(ATMVP)法により、各CUは、同一場所の参照ピクチャにおける現在CUよりも小さい複数のブロックから動き情報の複数のセットをフェッチすることができる。空間的-時間的動きベクトル予測(STMVP)法においては、時間的動きベクトル予測子および空間的隣接動きベクトルを使用することにより、サブCUの動きベクトルが再帰的に導出される。いくつかの実施形態において、そして、サブCU動き予測についてより正確な動きフィールドを保存するために、参照フレームに対する動き圧縮がディセーブルされ得る。
ATMVP法では、現在CUより小さいブロックから動き情報の複数のセット(動きベクトルおよび参照インデックスを含む)をフェッチすることによって、時間的動きベクトル予測(TMVP)法が修正される。
STMVP法においては、ラスタ(raster)スキャン順序に従って、サブCUの動きベクトルが再帰的に導出される。図11は、4つのサブブロックおよび隣接ブロックを有する1つのCUの例を示している。4つの4×4のサブCUであるA(1101)、B(1102)、C(1103)、およびD(1104)を含む8×8のCU1100を想定する。現在フレームで隣接する4×4ブロックは、a(1111)、b(1112)、c(1113)、d(1114)としてラベル付けされている。
いくつかの実施形態において、サブCUモードは、追加的なマージ候補としてイネーブルされ、そして、モードの信号化に必要とされる追加の構文要素は存在しない。ATMVPモードおよびSTMVPモードを表すために、各CUのマージ候補リストに対して2つの追加マージ候補が追加される。他の実施形態においては、シーケンスパラメータセットがATMVPおよびSTMVPがイネーブルされていることを示す場合に、最大で7つのマージ候補が使用され得る。追加的なマージ候補の符号化ロジック、HMにおけるマージ候補の場合と同じである。これは、PスライスまたはBスライスにおける各CUについて、2つの追加的なマージ候補に対してさらに2つのRDチェックが必要とされ得ることを意味している。いくつかの実施形態、例えばJEM、において、マージインデックスの全てのビンは、コンテキストベースの適応バイナリ演算符号化(Context-based Adaptive Binary Arithmetic Coding、CABAC)によってコンテキストコード化される。他の実施形態、例えばHEVC、において、第1ビンだけがコンテキストコード化され、そして、残りのビンはコンテキストバイパス(by-pass)コード化される。
インター予測改良のためにいくつかの新たな符号化ツールが存在している。信号化MVDのための適応動きベクトル差異分解(AMVR)、アフィン予測モード、三角予測モード(TPM)、ATMVP、一般化双予測(GBI)、双方向光学フロー(BIO)、といったものである。
VVCにおいては、ピクチャを正方形ブロックまたは長方形ブロックへと分割するために、QuadTree/BinaryTree/MulitpleTree(QT/BT/TT)構造が採用されている。QT/BT/TTの他に、IフレームのVVC(VVC for I-frames)においては分離(separate)ツリー(a.k.a Dual coding tree)も、また、採用されている。別々のツリーでは、ルマ(luma)成分とクロマ(chroma)成分について、コーディングブロック構造が別々に信号化される。
いくつかの実施形態では、スライスヘッダにおいてuse_integer_mv_flagが0に等しい場合、(動きベクトルとPUの予測動きベクトルとの間の)動きベクトル差異(MVD)は、1/4(quartet)ルマサンプルの単位で信号化される。JEMではローカル適応動きベクトル分解(LAMVR)導入されている。JEMにおいて、MVDは、1/4ルマサンプル、整数ルマサンプル、または、4ルマサンプルの単位でコード化され得る。MVD分解は、符号化ユニット(CU)レベルで制御され、そして、MVD分解フラグは、少なくとも1つの非ゼロ(non-zero)MVD成分を有する各CUについて条件付きで信号化される。
HEVCでは、動き補償予測(MCP)に対して並進(translation)動きモデルだけが適用されている。しかしながら、カメラおよびオブジェクトは、多くの種類の動きを有し得る。例えば、ズームイン/アウト、回転、斜視移動(perspective motions)、及び/又は、他の不規則な動き、である。VVCでは、4パラメータアフィンモデルおよび6パラメータアフィンモデルを用いて、簡素化されたアフィン変換動き補償予測が適用されている。図13Aおよび図13Bに示されるように、ブロックのアフィン動きフィールドは、それぞれ、2つの制御点(control point)動きベクトル(変数a、b、eおよびfを使用する4パラメータアフィンモデルにおいて)、または、3つの制御点動きベクトル(変数a、b、c、d、eおよびfを使用する6パラメータアフィンモデルにおいて)によって、それぞれに、記述される。
並進動きモデルと同様に、アフィン予測によるサイド(side)情報をシグナリングするための2つのモードが、また、存在する。それらは、AFFINE_INTERおよびAFFINE_MERGEモードである。
幅と高さの両方が8より大きいCUについて、AF_INTERモードが適用され得る。CUレベルにおけるアフィンフラグは、AF_INTERモードが使用されるか否か示すために、ビットストリーム内で信号化されている。
1)継承(inherited)アフィン動き予測子(predictor)
チェック順序は、HEVC AMVPリスト構築における空間的MVPのものと同様である。第1に、左継承アフィン動き予測子は、アフィンコード化されて、現在ブロックと同じ参照ピクチャを有する{A1,A0}における第1ブロックから導出される。第2に、上記の継承アフィン動き予測子は、アフィンコード化されて、現在ブロックと同じ参照ピクチャを有する{B1,B0,B2}における第1ブロックから導出される。5つのブロックA1、A0、B1、B0、B2が図16に示されている。
一旦隣接ブロックがアフィンモードでコード化されることが分かると、隣接ブロックをカバーしている符号化ユニットのCPMVが、現在ブロックのCPMVの予測子を導出するために使用される。例えば、A1が非アフィンモードでコード化され、かつ、A0が4パラメータアフィンモードでコード化される場合に、左継承アフィンMV予測子はA0から導出される。この事例においては、A0をカバーしているCUのCPMVは、図18Bにおいて左上CPMVについてMV0 N、および、右上のCPMVについてMV1 Nによって示されるように、現在ブロックの推定CPMVを導出するために利用される。現在ブロックの左上(座標(x0,y0)を有する)、右上(座標(x1,y1)を有する)、および右下(座標(x2,y2)を有する)の位置についてMV0 C、MV1 C、MV2 C、によって示されている。
2)構築されたアフィン動き予測子
構築されたアフィン動き予測子は、図17に示されるように、同じ参照ピクチャを有する、隣接するコード化ブロック間(inter coded blocks)から導出される制御点動きベクトル(CPMV)から構成されている。現在アフィン動きモデルが4パラメータアフィンである場合に、CPMVの数は2であり、さもなければ、現在アフィン動きモデルが6パラメータアフィンである場合に、CPMVの数は3である。左上のCPMV mv0 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{A,B,C}における第1ブロックでのMVによって導出される。右上のCPMV mv1 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{D,E}における第1ブロックでのMVによって導出される。左下のCPMV mv2 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{F,G}の第1ブロックでのMVによって導出される。
構築されたアフィン動き予測子を候補リストの中へ挿入するときに、剪定処理(pruning process)は適用されない。
3)通常の(normal)AMVP動き予測子
アフィン動き予測子の数が最大に到達するまで、以下が適用される。
mvi ̄は、構築されたアフィン動き予測子において既に導出されていることに留意する。
mv1=mv1 ̄+mvd1+mvd0
mv2=mv2 ̄+mvd2+mvd0
AF_MERGEモードでCUが適用される場合、有効な隣接再構築ブロックからアフィンモードでコード化された第1ブロックを取得する。そして、候補ブロックの選択順序は、図18Aに示されるように、左(left)、上(above)、右上(above right)、左下(left bottom)から左上(above left)まで、である(A、B、C、D、Eの順で示されている)。例えば、近隣左下ブロックが、図18BにおいてA0によって示されるように、アフィンモードでコード化されている場合、ブロックAを含む近隣CU/PUの左上隅、右上隅、および左下隅に係る制御点(CP)動きベクトルmv0 N、mv1 N、mv2 Nが、フェッチされる。そして、現在CU/PUにおける左上隅/右上/左下の動きベクトルmv0 C、mv1 C、mv2 C(6パラメータアフィンモデルについてだけ使用されている)が、mv0 N、mv1 N、mv2 Nに基づいて計算される。左上隅に配置されたサブブロック(例えば4×4ブロック)はmv0を保管し、右上隅に配置されたサブブロックは、現在ブロックがアフィンコード化されている場合に、mv1を保管する、ことが留意されるべきである。現在ブロックが6パラメータのアフィンモデルを用いてコード化されている場合、左下隅に配置されたサブブロックはmv2を保管し、さもなければ(4パラメータのアフィンモデルで)LBはmv2'を保管する。他のサブブロックは、MCに対して使用されるMVを保管する。
CP4}は、左上および右上の制御点によって表される4パラメータ動きモデルへ変換される。
HEVCスクリーンコンテンツコード化拡張(SCC)においては、現在ピクチャ参照(CPR)としても呼ばれる、イントラブロックコピー(IBC、またはイントラピクチャブロック補償)が採用された。このツールは、同一ピクチャの中でテキストの繰り返しパターンおよびグラフィックスが豊富なコンテンツが頻繁に発生するという点で、スクリーンコンテンツビデオのコーディングについて非常に効率的である。予測子として同等または類似のパターンを伴う以前に再構成されたブロックを有することは、予測誤差を効果的に低減し、そして、従って、コード化効率を改善することができる。イントラブロック補償の一つの例が図20に示されている。
PCT/CN2018/089920においては、CPR(a.k.a IBC)といくつかの新たなコード化ツールを調和させるためにいくつかの方法が提案されている。
VVCにおいてサポートされている3つの異なるマージリスト構築プロセスが存在している。
配置されたピクチャ内のMまたはMSといった、対応する位置を突き止める場合には、事前に定義された領域の内側であるようにクリップされる。CTUサイズは、S×Sであり、本実施例においては、S=128である。配置されたCTUの左上の位置が(xCTU,yCTU)であると仮定すると、(xN,yN)における対応する位置MまたはMSは、有効領域xCTU≦xN<xCTU+S+4;yCTU≦yN<yCTU+Sへとリップされる。図21は、有効領域の一つの例を示している。
一つの実施例において提案された一般化された双予測改善(Generalized Bi-prediction improvement、GBi)が提供される。
インター-イントラ予測(inter-intra prediction)モードでは、マルチ仮説(multi-hypothesis)予測が、1つのイントラ予測および1つのマージインデックス予測を結合する。そうしたブロックは、特別なインターコード化(inter-coded)ブロックとして扱われる。マージCUにおいては、フラグが真の場合に、イントラ候補リストからイントラモードを選択するために、マージモードについて1つのフラグが信号化される。ルマ成分(luma component)について、イントラ候補リストは、DC、プラナー(planar)、水平(horizontal)、および垂直(vertical)モードを含む4つのイントラ予測モードから導出され、そして、イントラ候補リストのサイズは、ブロックの形状に応じて3または4であり得る。CU幅がCU高さの2倍より大きい場合には、水平モードがイントラモードのリストから除かれ、そして、CU高さがCU幅の2倍より大きい場合には、垂直モードがイントラモードのリストから除外される。イントラモードインデックスによって選択された1つのイントラ予測モード、および、マージインデックスによって選択された1つのマージインデックス予測が、加重平均を使用して結合される。クロマ成分(chroma component)については、DMが、余分なシグナリングなしで
常に適用される。
1.inter_intra_flag(1つの新たなコンテキスト)は、全ての条件が満足された場合に信号化される。
2.インター-イントラ予測が、三角予測において適用され得る。
i.LeftIPM=AboveIPM=DCと設定する。
v.IPM=(IPM>DC_IDX)?((aboveIPM≦DIA_IDX)?HOR_IDX:VER_IDX):aboveIPM;
(ワイドアングルモードはどうですか?)
vi.leftIPM==aboveIPMである場合
1.LeftIPMがDCまたはプラナーでない場合
a.MPM[0]=leftIPM、MPM[1]=Planar、MPM[2]=DC
2.それ以外の場合
a.MPM[0]=DC、MPM[1]=Planar、MPM[2]=Ver
vii.それ以外の場合
1.MPM[0]=leftIPM、MPM[1]=aboveIPM
2.leftIPMおよびaboveIPMがプラナーでない場合、MPM[2]=Planar
3.そうでなければ、MPM[2]=(leftIPM+aboveIPM)<2?Ver:DC
viii.W>2×Hである場合
1.MPM[x]==Horである場合、MPMリストではなく{DC,Planar,Ver,Hor}においてModeXをFindする、MPM[x]=ModeXを設定する。
1.MPM[x]==Verである場合、MPMリストではなく{DC,Planar,Ver,Hor}においてModeXをFindする、MPM[x]=ModeXを設定する。
6.隣接サンプルのフィルタリング:イントラ予測として:
a.DC/VER/HORについてフィルタリングしない。
a.P(x,y)=Clip((W0(x,y)*P_Intra(x,y)+W1(x,y)*P_Inter(x,y))>>3)
8.重み付け値(改善または簡略化され得る)
a.mode==DC/Planarの場合、||W<4||H<4:W0=W1=4;
b.mode==HORの場合:
i.x<W/4の場合、W0=6、W1=2;
ii.W/4≦x<W/2の場合、W0=5、W1=3;
iii.W/2≦x<3*W/4の場合、W0=3、W1=5;
iv.x≧3×W/4の場合、W0=2、W1=6;
c.mode==VERの場合:
i.y<H/4の場合、W0=6、W1=2;
ii.H/4≦y<H/2の場合、W0=5、W1=3;
iii.H/2≦y<3×H/4の場合、W0=3、W1=5;
iv.y≧3×H/4の場合、W0=2、W1=6
いくつかの実施形態において、究極(ultimate)動きベクトル表現(UMVE)が提示される。UMVEは、提案される動きベクトル表現方法を用いて、スキップモードまたはマージモードのいずれかについて使用される。
既存の実装(例えば、現在のVVC設計)において、CPRは、これらの問題を有している。
ここで開示される技術の実施形態は、既存の実装の欠点を克服し、それによって、より高い符号化効率を有するビデオコーディングを提供している。開示される技術に基づいて、ビデオおよび画像コード化を参照する現在ピクチャに対する動きベクトル導出およびシグナリングの使用は、現存および将来の両方のビデオコーディング標準を向上させ得るものであり、種々の実装のために説明される以下の実施例において解明される。以下に提供される、開示される技術の例は、一般的な概念を説明するものであり、そして、限定的なものとして解釈されることを意図するものではない。例においては、明示的に反対に示されない限り、これらの実施例において説明された種々の特徴が組み合わされ得る。「ブロックまたは候補がCPRを使用する(“a block or a candidate uses CPR”)」ということは、以下のことを意味し得ることが留意されるべきである。
図28は、ビデオ処理装置2800のブロック図である。装置2800は、ここにおいて説明された1つ以上の方法を実装するために使用され得る。装置2800は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)受信器、等において具現化され得る。装置2800は、1つ以上のプロセッサ2802、1つ以上のメモリ2804、および、ビデオ処理ハードウェア2806を含み得る。プロセッサ2802は、本文書において説明された1つ以上の方法(方法2400、2500、2600、および2700を含むが、これらに限定されない)を実装するように構成され得る。メモリ(複数のメモリ)2804は、ここにおいて説明された方法および技術を実装するために使用されるデータおよびコードを保管するために使用され得る。ビデオ処理ハードウェア2806は、ハードウェア回路において、本文書において説明されたいくつかの技術を実装するために使用され得る。
前記決定に基づいて、前記現在ブロックとビットストリーム表現との間で変換を実行するステップと、を含み、前記特定のコーディングモードは、前記現在ブロックの予測を導出するために、動きベクトルおよび非現在ピクチャを使用する、方法。
装置。
Claims (68)
- ビデオ処理のための方法であって、
ビデオの現在ビデオブロックに対してイントラブロックコピー(IBC)モードが適用されることを決定するステップであり、前記IBCモードにおいて、前記現在ビデオブロックによって使用される少なくとも1つの参照ピクチャは、前記現在ビデオブロックが配置されている現在ピクチャである、ステップと、
前記現在ビデオブロックに対する特定のコーディングモードをディセーブルすることに関する決定を行うステップと、
前記決定に基づいて、前記現在ビデオブロックとビットストリーム表現との間で変換を実行するステップと、を含み、
前記特定のコーディングモードは、ビデオブロックの予測を導出するために、動きベクトルおよび非現在ピクチャを使用する、
方法。 - 前記変換は、前記現在ビデオブロックを前記ビットストリーム表現へと符号化するステップ、を含む、
請求項1に記載の方法。 - 前記変換は、前記現在ビデオブロックのピクセル値を生成するために、前記現在ビデオブロックの前記ビットストリーム表現を復号化するステップ、を含む、
請求項1に記載の方法。 - 前記特定のコーディングモードは、アフィン動き補償モードを含み、
前記アフィン動き補償モードは、少なくとも1つの制御点動きベクトルを使用する、
請求項1乃至3いずれか一項に記載の方法。 - 参照ピクチャインデックスが信号化され、かつ、
前記IBCモードを使用している現在ビデオブロックに応答して、アフィンフラグの前記信号化がスキップされる、
請求項4に記載の方法。 - 前記方法は、さらに、前記アフィンフラグが信号化される前に、
参照ピクチャインデックスを信号化するステップと、
前記現在ビデオブロックについて双予測モードが使用されているか否かを判定するステップと、を含み、
前記現在ビデオブロックについて双予測モードが使用されており、かつ、1つの参照ピクチャだけ現在参照ピクチャである場合に、前記アフィンフラグが信号化され、
前記現在ビデオブロックについて双予測モードが使用されており、かつ、両方の参照ピクチャが現在参照ピクチャである場合、前記アフィンフラグは信号化されない、
請求項5に記載の方法。 - 前記現在ビデオブロックの動きベクトルについて整数精度が使用されている、
請求項6に記載の方法。 - 前記特定のコーディングモードは、GBiモードを含み、
前記GBiモードにおいては、異なる重み付け値が異なる参照ピクチャと関係している、
請求項1乃至7いずれか一項に記載の方法。 - 前記現在ビデオブロックにおいて使用されている前記IBCモードに応答して、GBi重み付けインデックスが信号化されない、
請求項8に記載の方法。 - 前記GBi重み付けインデックスがゼロであると推定される、
請求項9に記載の方法。 - 前記特定のコーディングモードは、動きベクトル差異(MMVD)モードとのマージを含み、
前記MMVDモードにおいては、ビデオブロックの動きベクトルが、マージ動き候補リストに基づいて導出され、かつ、少なくとも1つの動きベクトル差異によってさらに精密化される、
請求項1乃至10いずれか一項に記載の方法。 - 前記現在ビデオブロックにおいて使用されている前記IBCモードに応答して、MMVDフラグが信号化されない、
請求項11に記載の方法。 - 前記MMVDフラグは、ゼロであると推定される、
請求項12に記載の方法。 - 前記特定のコーディングモードは、結合されたインター-イントラ予測(CIIP)モードを含み、
前記CIIPモードにおいては、少なくともイントラ予測信号およびインター予測信号に基づいて、前記現在ビデオブロックの予測信号が生成される、
請求項1乃至13いずれか一項に記載の方法。 - 前記現在ビデオブロックにおいて使用されている前記IBCモードに応答して、前記現在ビデオブロックに対するCIIPフラグが信号化されない、
請求項14に記載の方法。 - 前記CIIPフラグは、ゼロであると推定される、
請求項15に記載の方法。 - ビデオ処理のための方法であって、
現在ビデオブロックが特定のコーディングモードを使用して符号化されることを決定するステップと、
前記決定に基づいて前記現在ブロックについてイントラブロックコピー(IBC)モードをディセーブルすることに関する決定を行うステップであり、前記IBCモードにおいて、前記現在ビデオブロックによって使用される少なくとも1つの参照ピクチャは、前記現在ブロックが配置されている現在ピクチャである、ステップと、
前記決定に基づいて、前記現在ブロックとビットストリーム表現との間で変換を実行するステップと、を含み、
前記特定のコーディングモードは、前記現在ブロックの予測を導出するために、動きベクトルおよび非現在ピクチャを使用する、
方法。 - 前記変換は、前記現在ビデオブロックを前記ビットストリーム表現へと符号化するステップ、を含む、
請求項17に記載の方法。 - 前記変換は、前記現在ビデオブロックのピクセル値を生成するために、前記現在ビデオブロックの前記ビットストリーム表現を復号化するステップ、を含む、
請求項17に記載の方法。 - 前記特定のコーディングモードは、アフィン動き補償モードを含み、
前記アフィン動き補償モードは、少なくとも1つの制御点動きベクトルを使用する、
請求項17乃至19いずれか一項に記載の方法。 - ブロックレベルにおけるアフィンフラグは、前記ビットストリームにおいて信号化され、前記現在ビデオブロックに対してアフィン動き補償モードがイネーブルされているか否かを示しており、かつ、
前記現在ビデオブロックに対して前記アフィン動き補償モードがイネーブルされていることを、前記アフィンフラグが示す場合には、前記IBCモードが適用されるか否かは信号化されない、
請求項20に記載の方法。 - 前記特定のコーディングモードは、GBiモードを含み、
前記GBiモードにおいては、異なる重み付け値が異なる参照ピクチャと関係している、
請求項17乃至19いずれか一項に記載の方法。 - 適用されている前記GBIモードに応答して、IBC指示は信号化されない、
請求項22に記載の方法。 - 前記IBC指示は、ゼロであると推定される、
請求項23に記載の方法。 - 前記特定のコーディングモードは、動きベクトル差異(MMVD)モードとのマージを含み、
前記MMVDモードにおいては、前記現在ブロックの動きベクトルが、マージ動き候補リストに基づいて導出され、かつ、少なくとも1つの動きベクトル差異によってさらに精密化される、
請求項17乃至24いずれか一項に記載の方法。 - 前記現在ビデオブロックにおいて適用されている前記MMVDモードに応答して、IBC指示が信号化されない、
請求項25に記載の方法。 - 前記IBC指示は、ゼロであると推定される、
請求項26に記載の方法。 - 前記特定のコーディングモードは、結合されたインター-イントラ予測(CIIP)モードを含み、
前記CIIPモードにおいては、少なくともイントラ予測信号およびインター予測信号に基づいて、前記現在ビデオブロックの予測信号が生成される、
請求項17乃至27いずれか一項に記載の方法。 - 適用されている前記インター-イントラ予測モードに応答して、前記現在ビデオブロックに対するIBCフラグが信号化されない、
請求項28に記載の方法。 - 前記IBCフラグは、ゼロであると推定される、
請求項29に記載の方法。 - ビデオ処理のための方法であって、
現在ビデオブロックのアフィンモードを決定するステップであり、前記現在ビデオブロックが隣接ブロックからアフィンモードを継承するか否かは、参照リストに依存する、ステップと、
ビデオの現在ビデオブロックと、前記決定に基づいて一貫したビデオのビットストリーム表現との間の変換を実行するステップと、
を含む、方法。 - 前記隣接ブロックは、双予測を適用し、
参照リストXにおける参照ピクチャは、現在ピクチャであり、かつ、
参照リスト(1-X)における参照ピクチャは、前記現在ピクチャではなく、
ここで、Xが、0または1である、
請求項31に記載の方法。 - 前記参照リストXを参照する前記隣接ブロックの動き情報は、サブブロックマージ候補リストにおけるアフィンマージ候補を導出するために使用されない、
請求項32に記載の方法。 - 前記参照リスト(1-X)を参照する前記隣接ブロックの動き情報は、前記サブブロックマージ候補リストにおける前記アフィンマージ候補を導出するために使用される、
請求項33に記載の方法。 - 前記参照リストXを参照する前記隣接ブロックの動き情報は、アフィンAMVPリストにおいてアフィンAMVP候補を導出するためには使用されない、
請求項32に記載の方法。 - 前記参照リストXを参照する前記隣接ブロックの前記動き情報は、前記参照リストXについて、前記アフィンAMVPリストにおいて前記アフィンAMVP候補を導出するためには使用されない、
請求項35に記載の方法。 - 前記参照リスト(1-X)を参照する前記隣接ブロックの動き情報は、アフィンAMVPリストにおいてアフィンAMVP候補を導出するために使用される、
請求項32に記載の方法。 - 前記参照リスト(1-X)を参照する前記隣接ブロックの動き情報は、前記参照リスト(1-X)に対する前記アフィンAMVPリストにおける前記アフィンAMVP候補を導出するために使用される、
請求項37に記載の方法。 - ビデオ処理のための方法であって、
ビデオの現在ビデオブロックと、前記現在ビデオブロックのビットストリーム表現との間の変換を実行するステップ、を含み、
前記変換の最中には、イントラブロックコピー(IBC)モード、および、動きベクトル差異とのマージ(MMVD)モードが使用され、
前記IBCモードでは、前記現在ビデオブロックによって使用される少なくとも1つの参照ピクチャは、前記現在ビデオブロックがその中に配置されている現在ピクチャであり、かつ、
前記MMVDモードでは、ビデオブロックの動きベクトルが、マージモーション候補リストに基づいて導出されて、さらに、少なくとも1つの動きベクトル差異によって精密化される、
方法。 - 前記MMVDモードは、前記現在ピクチャを参照する少なくとも1つの参照ピクチャを有するベースMV候補を使用する、
請求項39に記載の方法。 - 前記MMVDは、前記現在ピクチャを参照する少なくとも1つのMVに基づいており、かつ、前記現在ピクチャを参照しないMVは、存在する場合には、省略される、
請求項40に記載の方法。 - 前記MMVDによって信号化される距離は整数である、
請求項41に記載の方法。 - 前記MMVDは、単一予測される、
請求項41に記載の方法。 - 前記MMVDモードが、前記現在ピクチャを参照しない少なくとも1つの参照ピクチャを有するベースMV候補を使用する場合、前記MMVDは、前記現在ピクチャを参照しない少なくとも1つのMVに基づいており、かつ、前記現在ピクチャを参照するMVは、存在する場合には、省略される、
請求項39に記載の方法。 - ビデオ処理のための方法であって、
ビデオの現在ビデオブロックと前記ビデオのビットストリーム表現との間の変換を実行するステップ、を含み、
前記変換の最中には、イントラブロックコピー(IBC)モードおよびインター-イントラ予測モードが使用され、
前記IBCモードでは、前記現在ビデオブロックによって使用される少なくとも1つの参照ピクチャが、前記現在ビデオブロックがその中に配置されている現在ピクチャであり、かつ、前記インター-イントラ予測モードでは、前記現在ビデオブロックの予測信号は、少なくともイントラ予測信号およびインター予測信号に基づいて生成される、
方法。 - 前記インター-イントラ予測されるマージ候補は、前記現在ピクチャを参照する少なくとも1つの参照ピクチャを有する、
請求項45に記載の方法。 - 前記インター-イントラ予測は、前記現在ピクチャを参照する少なくとも1つのMVに基づいており、かつ、前記現在ピクチャを参照しないMVは、存在する場合には、省略される、
請求項46に記載の方法。 - 前記インター-イントラ予測モードのイントラ予測部分は、境界フィルタリングを除外する、
請求項45に記載の方法。 - 前記インター-イントラ予測モードのイントラ予測部分は、位置依存予測組み合わせ(PDPC)を除外する、
請求項45に記載の方法。 - 前記インター-イントラ予測モードのイントラ予測部分は、最確モード選択(MPM)、DC予測モード、水平予測モード、または、垂直予測モードのうち少なくとも1つを含む、
請求項45に記載の方法。 - 前記インター-イントラ予測モードのインター予測部分は、単一予測される、
請求項45に記載の方法。 - インター-イントラ予測されるマージ候補が、前記現在ピクチャを参照しない少なくとも1つの参照ピクチャを有する場合、前記現在ピクチャを参照しない少なくとも1つのMVに基づくインター-イントラ予測が実行され、かつ、前記現在ピクチャを参照するMVは、存在する場合には、省略される、
請求項45乃至51いずれか一項に記載の方法。 - ビデオ処理のための方法であって、
現在ビデオブロックと前記現在ビデオブロックのビットストリーム表現との間の変換の最中に、IBCモードとは異なる少なくとも1つのコーディング方法のデコードされた情報を決定するステップであり、前記IBCモードでは、前記現在ビデオブロックによって使用される少なくとも1つの参照ピクチャが、前記現在ビデオブロックがその中に配置されている現在ピクチャである、ステップと、
前記デコードされた情報に基づいて、前記現在ビデオブロックのビットストリーム表現における前記現在ビデオブロックについてIBCフラグのシグナリングをスキップするか否かを決定するステップであり、前記IBCフラグは、IBモードに関連する、ステップと、
前記決定に基づいて、前記変換を実行するステップと、
を含む、方法。 - 前記変換は、前記現在ビデオブロックを前記ビットストリーム表現へと符号化することを含む、
請求項53に記載の方法。 - 前記変換は、前記現在ビデオブロックのピクセル値を生成するために、前記現在ビデオブロックの前記ビットストリーム表現をデコードすることを含む、
請求項53に記載の方法。 - 前記決定するステップにおいて、前記IBCフラグのシグナリングをスキップしないことを決定された場合、前記ビットストリーム表現における前記現在ビデオブロックについて前記IBCフラグをシグナリングし、
さもなければ、前記ビットストリーム表現における前記現在ビデオブロックについて前記IBCフラグへのシグナリングすることを控える、
請求項53乃至55いずれか一項に記載の方法。 - 前記コーディング方法のデコードされた情報が、アフィンフラグ、インター-イントラ予測フラグ、一般化双予測(GBi)インデックス、動きベクトル差異(MMVD)情報とのマージ、代替的な時間的動きベクトル予測(ATMVP)情報のうちの少なくとも1つを含む場合に、前記IBCフラグのシグナリングをスキップすることが決定される、
請求項53乃至56いずれか一項に記載の方法。 - ビデオ処理のための方法であって、
現在ビデオブロックと前記現在ビデオブロックのビットストリーム表現との間の変換の最中に、前記現在ビデオブロックは、第1コーディング構造ツリーを使用してコード化されるルマ成分、および、前記第1コーディング構造ツリーとは異なる第2コーディング構造ツリーを使用してコード化されるクロマ成分を含み、前記現在ビデオブロックの前記ルマ成分の1つ以上の対応するブロックに係る第2動きベクトル情報からクロマブロックに対する第1動きベクトル情報を導出する、ステップと、
前記第1動きベクトル情報および前記第2動きベクトル情報に基づいて、前記変換を実行するステップと、
を含む、方法。 - 前記変換は、前記現在ビデオブロックを前記ビットストリーム表現へと符号化することを含む、
請求項58に記載の方法。 - 前記変換は、前記現在ビデオブロックのピクセル値を生成するために、前記現在ビデオブロックの前記ビットストリーム表現を復号化することを含む、
請求項58に記載の方法。 - 前記第1動きベクトル情報は、前記第2動きベクトル情報を導出するためのMV予測またはマージ候補として使用される、
請求項58に記載の方法。 - 前記ルマ成分の1つ以上の対応するブロックは、前記現在ビデオブロックの左上の位置、右上の位置、左下の位置、右下の位置、及び/又は、中心位置にある、
請求項58乃至61いずれか一項に記載の方法。 - 前記方法は、さらに、
前記クロマ成分のカラーフォーマットが、4:4:4のカラーフォーマットと異なるか否かを判定するステップと、
前記クロマ成分のカラーフォーマットが4:4:4のカラーフォーマットと異なっていると判定すると、前記ルマ成分の1つ以上の対応するブロックを決定するように、前記現在ビデオブロックをスケーリングするステップと、
を含む、請求項62に記載の方法。 - 前記現在ビデオブロックが、イントラブロックコピー(IBC)モードを使用してコード化される、
請求項58乃至60いずれか一項に記載の方法。 - 前記現在ビデオブロックの高さおよび幅における制限の第1セットは、前記現在ビデオブロックとは異なるイントラコード化ビデオブロックの高さおよび幅における制限の第2セットとは異なる、
請求項64に記載の方法。 - 前記現在ビデオブロックが、イントラブロックコピーモードを使用してコード化された場合に、前記現在ビデオブロックの前記幅は2より大きく、前記高さは2より大きく、かつ、
前記現在ビデオブロックが前記IBCモードを使用してコード化された場合に、前記現在ビデオブロックの幅は2以上であり、前記高さは2以上である、
請求項65に記載の方法。 - ビデオシステムにおける装置であって、
プロセッサと、
命令が保管された非一時的メモリと、を備え、
前記プロセッサによって実行されると、前記命令は、請求項1乃至66いずれか一項に記載の方法を前記プロセッサに実行させる、
装置。 - 非一時的なコンピュータで読取り可能な媒体に保管されたコンピュータプログラム製品であって、請求項1乃至66いずれか一項に記載の方法を実行するためのプログラムコードを含む、
コンピュータプログラム製品。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023002737A JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2018/118167 | 2018-11-29 | ||
CN2018118167 | 2018-11-29 | ||
PCT/CN2019/122183 WO2020108649A1 (en) | 2018-11-29 | 2019-11-29 | Interaction between intra block copy mode and inter prediction tools |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023002737A Division JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022508177A true JP2022508177A (ja) | 2022-01-19 |
JP7212161B2 JP7212161B2 (ja) | 2023-01-24 |
Family
ID=70851922
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021528964A Active JP7212161B2 (ja) | 2018-11-29 | 2019-11-29 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
JP2023002737A Pending JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023002737A Pending JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Country Status (6)
Country | Link |
---|---|
US (4) | US11095917B2 (ja) |
EP (2) | EP4307681A3 (ja) |
JP (2) | JP7212161B2 (ja) |
KR (1) | KR20210094530A (ja) |
CN (5) | CN113196772A (ja) |
WO (4) | WO2020108650A1 (ja) |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11317099B2 (en) * | 2018-10-05 | 2022-04-26 | Tencent America LLC | Method and apparatus for signaling an offset in video coding for intra block copy and/or inter prediction |
BR112021007509A2 (pt) * | 2018-10-27 | 2021-07-27 | Huawei Technologies Co., Ltd. | lista de mesclagem separada para candidatos de mesclagem de sub-bloco e harmonização de técnicas intra-inter para codificação de vídeo |
CN113196772A (zh) | 2018-11-29 | 2021-07-30 | 北京字节跳动网络技术有限公司 | 块内拷贝模式和基于子块的运动矢量预测模式之间的交互 |
EP3900353A2 (en) * | 2018-12-17 | 2021-10-27 | InterDigital VC Holdings, Inc. | Combining motion vector difference coding tools with other motion modes |
CN113228645A (zh) * | 2018-12-28 | 2021-08-06 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储有比特流的记录介质 |
US11758132B2 (en) * | 2018-12-28 | 2023-09-12 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Encoder and decoder, encoding method and decoding method with complexity handling for flexibly sized picture partitions |
CN111385575A (zh) * | 2018-12-29 | 2020-07-07 | 华为技术有限公司 | 帧间预测方法、装置以及相应的编码器和解码器 |
CN112042191B (zh) * | 2019-01-01 | 2024-03-19 | Lg电子株式会社 | 以基于历史的运动矢量为基础预测处理视频信号的方法和设备 |
US11330283B2 (en) * | 2019-02-01 | 2022-05-10 | Tencent America LLC | Method and apparatus for video coding |
CN113784132B (zh) * | 2019-02-20 | 2023-04-25 | 北京达佳互联信息技术有限公司 | 用于帧间预测的运动向量舍入、截取和存储的方法和装置 |
CN116939199A (zh) * | 2019-03-11 | 2023-10-24 | 日本放送协会 | 图像编码装置、图像解码装置和程序 |
JP2022529735A (ja) * | 2019-04-25 | 2022-06-23 | オーピー ソリューションズ, エルエルシー | 大域的運動ベクトルの効率的なコーディング |
CN117692630A (zh) | 2019-05-11 | 2024-03-12 | 北京字节跳动网络技术有限公司 | 视频处理中编解码工具的选择性使用 |
EP3954119A4 (en) | 2019-05-21 | 2022-06-22 | Beijing Bytedance Network Technology Co., Ltd. | SYNTAX SIGNALING IN A SUBBLOCK MERGE MODE |
EP3985968A4 (en) * | 2019-06-17 | 2023-05-24 | Electronics and Telecommunications Research Institute | INTRA BLOCK COPY BASED ENCODING/DECODING METHOD, DEVICE AND BITSTREAM STORAGE DEVICE |
BR112021026310A2 (pt) * | 2019-06-25 | 2022-03-03 | Interdigital Vc Holdings France Sas | Previsão de vetor de movimento na codificação e decodificação de vídeo |
KR20220038060A (ko) | 2019-07-27 | 2022-03-25 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 참조 픽처 유형들에 따른 툴들의 사용의 제한들 |
JP7323709B2 (ja) | 2019-09-09 | 2023-08-08 | 北京字節跳動網絡技術有限公司 | イントラブロックコピーの符号化および復号化 |
WO2021068954A1 (en) | 2019-10-12 | 2021-04-15 | Beijing Bytedance Network Technology Co., Ltd. | High level syntax for video coding tools |
CN114631317B (zh) | 2019-10-18 | 2024-03-15 | 北京字节跳动网络技术有限公司 | 子图片的参数集信令中的语法约束 |
WO2021160176A1 (en) | 2020-02-14 | 2021-08-19 | Beijing Bytedance Network Technology Co., Ltd. | Use of general constraint flags in video bitstreams |
EP4082188A4 (en) * | 2020-03-19 | 2024-01-31 | FG Innovation Company Limited | APPARATUS AND METHOD FOR ENCODING VIDEO DATA |
CN115380529A (zh) * | 2020-04-07 | 2022-11-22 | 鸿颖创新有限公司 | 用于编码视频数据的设备和方法 |
WO2021244420A1 (en) * | 2020-05-31 | 2021-12-09 | Beijing Bytedance Network Technology Co., Ltd. | Palette mode with local dual tree modetype definition |
JP2023006877A (ja) * | 2021-06-30 | 2023-01-18 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
WO2023038447A1 (ko) * | 2021-09-08 | 2023-03-16 | 현대자동차주식회사 | 비디오 부호화/복호화 방법 및 장치 |
US20230079960A1 (en) * | 2021-09-15 | 2023-03-16 | Tencent America LLC | On propagating intra prediction mode information of ibc block by using block vector |
WO2023046127A1 (en) * | 2021-09-25 | 2023-03-30 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
WO2023062614A1 (ko) * | 2021-10-12 | 2023-04-20 | 엘지전자 주식회사 | 영상 디코딩 방법 및 그 장치 |
WO2023132614A1 (ko) * | 2022-01-04 | 2023-07-13 | 현대자동차주식회사 | 머지 모드를 개선하는 비디오 부호화/복호화 방법 및 장치 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015192353A1 (en) * | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
JP2018526881A (ja) * | 2015-07-27 | 2018-09-13 | クアルコム,インコーポレイテッド | ビデオコーディングにおける双予測を制約する方法およびシステム |
Family Cites Families (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9948915B2 (en) * | 2013-07-24 | 2018-04-17 | Qualcomm Incorporated | Sub-PU motion prediction for texture and depth coding |
AU2013228045A1 (en) * | 2013-09-13 | 2015-04-02 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding and decoding video data |
US9762927B2 (en) * | 2013-09-26 | 2017-09-12 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
GB2519070A (en) * | 2013-10-01 | 2015-04-15 | Sony Corp | Data encoding and decoding |
WO2015054813A1 (en) | 2013-10-14 | 2015-04-23 | Microsoft Technology Licensing, Llc | Encoder-side options for intra block copy prediction mode for video and image coding |
EP3058739B1 (en) | 2013-10-14 | 2019-08-07 | Microsoft Technology Licensing, LLC | Features of intra block copy prediction mode for video and image coding and decoding |
KR20160075705A (ko) | 2013-10-25 | 2016-06-29 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 이미지 코딩에서의 해시 기반 블록 매칭 |
CN105684409B (zh) | 2013-10-25 | 2019-08-13 | 微软技术许可有限责任公司 | 在视频和图像编码和解码中使用散列值来表示各块 |
WO2015074047A1 (en) * | 2013-11-18 | 2015-05-21 | Arris Enterprises, Inc. | Intra block copy for intra slices in high efficiency video coding (hevc) |
US9883197B2 (en) | 2014-01-09 | 2018-01-30 | Qualcomm Incorporated | Intra prediction of chroma blocks using the same vector |
US9860559B2 (en) * | 2014-03-17 | 2018-01-02 | Mediatek Singapore Pte. Ltd. | Method of video coding using symmetric intra block copy |
US20170195677A1 (en) * | 2014-05-22 | 2017-07-06 | Mediatek Inc. | Method of Intra Block Copy with Flipping for Image and Video Coding |
EP3158754B1 (en) | 2014-06-19 | 2021-10-20 | VID SCALE, Inc. | Methods and systems for intra block copy search enhancement |
CN105392008B (zh) * | 2014-08-22 | 2018-09-25 | 中兴通讯股份有限公司 | 一种预测编、解码方法和相应的编、解码器和电子设备 |
WO2016034058A1 (en) * | 2014-09-01 | 2016-03-10 | Mediatek Inc. | Method of intra picture block copy for screen content and video coding |
JP2017532885A (ja) * | 2014-09-26 | 2017-11-02 | ヴィド スケール インコーポレイテッド | 時間ブロックベクトル予測を用いたイントラブロックコピー符号化 |
US9918105B2 (en) * | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
KR20160059513A (ko) * | 2014-11-18 | 2016-05-27 | 광운대학교 산학협력단 | 스크린 콘텐츠 코딩을 위한 고속 화면 내 부호화 모드 결정 방법 |
US10230980B2 (en) * | 2015-01-26 | 2019-03-12 | Qualcomm Incorporated | Overlapped motion compensation for video coding |
US11477477B2 (en) * | 2015-01-26 | 2022-10-18 | Qualcomm Incorporated | Sub-prediction unit based advanced temporal motion vector prediction |
US9591325B2 (en) | 2015-01-27 | 2017-03-07 | Microsoft Technology Licensing, Llc | Special case handling for merged chroma blocks in intra block copy prediction mode |
WO2016123388A1 (en) | 2015-01-29 | 2016-08-04 | Vid Scale, Inc. | Palette coding modes and palette flipping |
KR102131142B1 (ko) * | 2015-01-29 | 2020-07-07 | 브이아이디 스케일, 인크. | 인트라-블록 카피 검색 |
US10638140B2 (en) * | 2015-05-29 | 2020-04-28 | Qualcomm Incorporated | Slice level intra block copy and other video coding improvements |
WO2016196843A1 (en) * | 2015-06-03 | 2016-12-08 | Apple Inc. | Techniques for resource conservation during performance of intra block copy prediction searches |
US10306240B2 (en) * | 2015-06-08 | 2019-05-28 | Vid Scale, Inc. | Intra block copy mode for screen content coding |
US10271064B2 (en) * | 2015-06-11 | 2019-04-23 | Qualcomm Incorporated | Sub-prediction unit motion vector prediction using spatial and/or temporal motion information |
US10178403B2 (en) | 2015-06-23 | 2019-01-08 | Qualcomm Incorporated | Reference picture list construction in intra block copy mode |
US11146794B2 (en) * | 2015-07-27 | 2021-10-12 | Mediatek Inc. | Method of system for video coding using intra block copy mode |
US20170099490A1 (en) * | 2015-10-02 | 2017-04-06 | Qualcomm Incorporated | Constrained intra-prediction for block copy mode |
GB2561507B (en) * | 2016-01-07 | 2021-12-22 | Mediatek Inc | Method and apparatus for affine merge mode prediction for video coding system |
CN117376554A (zh) * | 2016-02-25 | 2024-01-09 | 株式会社Kt | 用于处理视频信号的方法和设备 |
WO2017147765A1 (en) * | 2016-03-01 | 2017-09-08 | Mediatek Inc. | Methods for affine motion compensation |
US10638152B2 (en) * | 2016-03-15 | 2020-04-28 | Mediatek Inc. | Method and apparatus of video coding with affine motion compensation |
US10560712B2 (en) * | 2016-05-16 | 2020-02-11 | Qualcomm Incorporated | Affine motion prediction for video coding |
US10477238B2 (en) * | 2016-09-07 | 2019-11-12 | Qualcomm Incorporated | Sub-PU based bi-directional motion compensation in video coding |
US20180109810A1 (en) * | 2016-10-17 | 2018-04-19 | Mediatek Inc. | Method and Apparatus for Reference Picture Generation and Management in 3D Video Compression |
US10681370B2 (en) * | 2016-12-29 | 2020-06-09 | Qualcomm Incorporated | Motion vector generation for affine motion model for video coding |
US10701390B2 (en) * | 2017-03-14 | 2020-06-30 | Qualcomm Incorporated | Affine motion information derivation |
US10582209B2 (en) * | 2017-03-30 | 2020-03-03 | Mediatek Inc. | Sub-prediction unit temporal motion vector prediction (sub-PU TMVP) for video coding |
US20180310017A1 (en) * | 2017-04-21 | 2018-10-25 | Mediatek Inc. | Sub-prediction unit temporal motion vector prediction (sub-pu tmvp) for video coding |
US10805630B2 (en) * | 2017-04-28 | 2020-10-13 | Qualcomm Incorporated | Gradient based matching for motion search and derivation |
CN110651474B (zh) * | 2017-05-18 | 2022-02-18 | 联发科技股份有限公司 | 用于视频编解码的运动向量限制方法和装置 |
US10757420B2 (en) | 2017-06-23 | 2020-08-25 | Qualcomm Incorporated | Combination of inter-prediction and intra-prediction in video coding |
US10687071B2 (en) * | 2018-02-05 | 2020-06-16 | Tencent America LLC | Method and apparatus for video coding |
WO2019234598A1 (en) | 2018-06-05 | 2019-12-12 | Beijing Bytedance Network Technology Co., Ltd. | Interaction between ibc and stmvp |
GB2588531B (en) | 2018-06-29 | 2023-02-01 | Beijing Bytedance Network Tech Co Ltd | Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks |
US10958934B2 (en) * | 2018-07-27 | 2021-03-23 | Tencent America LLC | History-based affine merge and motion vector prediction |
CN113196772A (zh) | 2018-11-29 | 2021-07-30 | 北京字节跳动网络技术有限公司 | 块内拷贝模式和基于子块的运动矢量预测模式之间的交互 |
-
2019
- 2019-11-29 CN CN201980077207.XA patent/CN113196772A/zh active Pending
- 2019-11-29 CN CN201980077186.1A patent/CN113170181B/zh active Active
- 2019-11-29 WO PCT/CN2019/122194 patent/WO2020108650A1/en active Application Filing
- 2019-11-29 WO PCT/CN2019/122195 patent/WO2020108651A1/en active Application Filing
- 2019-11-29 EP EP23213886.7A patent/EP4307681A3/en active Pending
- 2019-11-29 CN CN201980077180.4A patent/CN113170099B/zh active Active
- 2019-11-29 EP EP19888914.9A patent/EP3871410A4/en active Pending
- 2019-11-29 CN CN201980077195.0A patent/CN113170167A/zh active Pending
- 2019-11-29 WO PCT/CN2019/122198 patent/WO2020108652A1/en active Application Filing
- 2019-11-29 KR KR1020217014518A patent/KR20210094530A/ko active IP Right Grant
- 2019-11-29 WO PCT/CN2019/122183 patent/WO2020108649A1/en unknown
- 2019-11-29 JP JP2021528964A patent/JP7212161B2/ja active Active
- 2019-11-29 CN CN202311458574.9A patent/CN117915083A/zh active Pending
-
2021
- 2021-02-04 US US17/167,303 patent/US11095917B2/en active Active
- 2021-02-04 US US17/167,266 patent/US11115676B2/en active Active
- 2021-08-16 US US17/403,707 patent/US11825113B2/en active Active
-
2023
- 2023-01-11 JP JP2023002737A patent/JP2023052340A/ja active Pending
- 2023-10-13 US US18/486,641 patent/US20240056599A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015192353A1 (en) * | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
JP2018526881A (ja) * | 2015-07-27 | 2018-09-13 | クアルコム,インコーポレイテッド | ビデオコーディングにおける双予測を制約する方法およびシステム |
Non-Patent Citations (2)
Title |
---|
GARY SULLIVAN, ET AL.: ""Meeting report of the 21st meeting of the Joint Collaborative Team on Video Coding (JCT-VC), Warsaw", JCTVC-U1000, vol. version 1, JPN6022052406, 14 October 2015 (2015-10-14), pages 1 - 56, ISSN: 0004943470 * |
WEI-JUNG CHIEN, ET AL.: ""Methodology and reporting template for tool testing"", JVET-L1005, vol. version 1, JPN6022052405, 27 October 2018 (2018-10-27), pages 1 - 5, ISSN: 0004943469 * |
Also Published As
Publication number | Publication date |
---|---|
CN113170181B (zh) | 2023-12-08 |
CN113170181A (zh) | 2021-07-23 |
US11115676B2 (en) | 2021-09-07 |
WO2020108649A1 (en) | 2020-06-04 |
US20210160533A1 (en) | 2021-05-27 |
CN113170099A (zh) | 2021-07-23 |
KR20210094530A (ko) | 2021-07-29 |
JP7212161B2 (ja) | 2023-01-24 |
US11825113B2 (en) | 2023-11-21 |
WO2020108651A1 (en) | 2020-06-04 |
CN113196772A (zh) | 2021-07-30 |
JP2023052340A (ja) | 2023-04-11 |
EP4307681A2 (en) | 2024-01-17 |
WO2020108650A1 (en) | 2020-06-04 |
WO2020108652A1 (en) | 2020-06-04 |
CN113170099B (zh) | 2024-03-29 |
EP4307681A3 (en) | 2024-04-03 |
US11095917B2 (en) | 2021-08-17 |
CN113170167A (zh) | 2021-07-23 |
EP3871410A1 (en) | 2021-09-01 |
US20210160525A1 (en) | 2021-05-27 |
US20210377561A1 (en) | 2021-12-02 |
CN117915083A (zh) | 2024-04-19 |
US20240056599A1 (en) | 2024-02-15 |
EP3871410A4 (en) | 2021-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7212161B2 (ja) | イントラブロックコピーモードとインター予測ツールとの間の相互作用 | |
CN111064961B (zh) | 视频处理方法和装置 | |
WO2020103935A1 (en) | Blending method for inter prediction with geometry partition | |
WO2020094050A1 (en) | Using inter prediction with geometric partitioning for video processing | |
JP2022503715A (ja) | 適応動きベクトル解像度による動きベクトルの変更 | |
CN110662032A (zh) | 虚拟Merge候选 | |
CN113383554A (zh) | LUT和共享Merge列表之间的交互 | |
CN113906738B (zh) | 仿射模式的自适应运动矢量差分辨率 | |
KR20240005223A (ko) | 화면 내 블록 복사를 위한 히스토리 기반 움직임 후보 리스트 구성 | |
JP2023126565A (ja) | ビデオコーディングにおける変換ブロック・サイズ制約 | |
CN113557720A (zh) | 视频编解码中的多假设预测当中的自适应权重 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210521 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230112 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7212161 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |