JP7212161B2 - イントラブロックコピーモードとインター予測ツールとの間の相互作用 - Google Patents
イントラブロックコピーモードとインター予測ツールとの間の相互作用 Download PDFInfo
- Publication number
- JP7212161B2 JP7212161B2 JP2021528964A JP2021528964A JP7212161B2 JP 7212161 B2 JP7212161 B2 JP 7212161B2 JP 2021528964 A JP2021528964 A JP 2021528964A JP 2021528964 A JP2021528964 A JP 2021528964A JP 7212161 B2 JP7212161 B2 JP 7212161B2
- Authority
- JP
- Japan
- Prior art keywords
- block
- mode
- current video
- video block
- prediction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title description 6
- 230000033001 locomotion Effects 0.000 claims description 359
- 238000000034 method Methods 0.000 claims description 291
- 239000013598 vector Substances 0.000 claims description 219
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims description 216
- 238000012545 processing Methods 0.000 claims description 63
- 230000002123 temporal effect Effects 0.000 claims description 56
- 241000023320 Luma <angiosperm> Species 0.000 claims description 35
- 238000006243 chemical reaction Methods 0.000 claims description 35
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 33
- 238000009795 derivation Methods 0.000 claims description 24
- 230000001131 transforming effect Effects 0.000 claims description 16
- 230000015654 memory Effects 0.000 claims description 12
- 230000004044 response Effects 0.000 claims description 10
- 230000009977 dual effect Effects 0.000 claims description 2
- 230000011664 signaling Effects 0.000 description 32
- 241000723655 Cowpea mosaic virus Species 0.000 description 24
- 238000005516 engineering process Methods 0.000 description 19
- 101100508818 Mus musculus Inpp5k gene Proteins 0.000 description 17
- 101100366438 Rattus norvegicus Sphkap gene Proteins 0.000 description 17
- 238000000354 decomposition reaction Methods 0.000 description 17
- 239000000523 sample Substances 0.000 description 17
- 238000004590 computer program Methods 0.000 description 16
- 238000010276 construction Methods 0.000 description 15
- 230000009466 transformation Effects 0.000 description 13
- 230000006835 compression Effects 0.000 description 7
- 238000007906 compression Methods 0.000 description 7
- 238000013461 design Methods 0.000 description 7
- 230000003044 adaptive effect Effects 0.000 description 5
- 238000004422 calculation algorithm Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 238000005192 partition Methods 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013138 pruning Methods 0.000 description 3
- 230000002457 bidirectional effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 239000000872 buffer Substances 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000003672 processing method Methods 0.000 description 2
- 239000013074 reference sample Substances 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 101150079299 MVD1 gene Proteins 0.000 description 1
- PCBOWMZAEDDKNH-HOTGVXAUSA-N [4-(trifluoromethoxy)phenyl]methyl (3as,6as)-2-(3-fluoro-4-sulfamoylbenzoyl)-1,3,3a,4,6,6a-hexahydropyrrolo[3,4-c]pyrrole-5-carboxylate Chemical compound C1=C(F)C(S(=O)(=O)N)=CC=C1C(=O)N1C[C@H]2CN(C(=O)OCC=3C=CC(OC(F)(F)F)=CC=3)C[C@@H]2C1 PCBOWMZAEDDKNH-HOTGVXAUSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012812 general test Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000005549 size reduction Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/537—Motion estimation other than block-based
- H04N19/54—Motion estimation other than block-based using feature points or meshes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
ビデオコーディング規格は、長年にわたり著しく改良されてきており、そして、今や、部分的には、高いコード化効率を提供し、かつ、より高い分解をサポートしている。HEVCおよびH.265といった、最近の標準は、ハイブリッドビデオコーディング構造に基づいており、そこでは、時間的予測プラス(plus)変換符号化が利用されている。
各インター予測PU(予測ユニット(prediction unit))は、1つ又は2つの参照ピクチャ(reference picture)リストのための動きパラメータを有する。いくつかの実施形態において、動きパラメータ(motion parameter)は、動きベクトルおよび参照ピクチャインデックスを含んでいる。他の実施形態において、2つの参照ピクチャリストのうちの1つの使用は、また、inter_pred_idcを使用して信号化されてもよい。さらに他の実施形態において、動きベクトルは、予測子(predictor)に対するデルタとして明示的にコード化されてよい。
マージモードを使用してPUが予測される場合には、マージ候補リスト内のエントリーを指し示すインデックスがビットストリームから構文解析(parsed)され、そして、動き情報を取り出す(retrieve)するために使用される。このリストの構成は、以下のステップのシーケンスに従って要約され得る。
ステップ1.1:空間的候補の導出
ステップ1.2:空間的候補について冗長性(redundancy)チェック
ステップ1.3:時間的候補の導出
ステップ2:追加候補の挿入
ステップ2.1::双予測候補の作成
ステップ2.2:ゼロ(zero)動き候補の挿入
空間的マージ候補の導出において、図2に示された位置に配置された候補の中から最大4つのマージ候補が選択される。導出の順序はA1、B1、B0、A0、B2である。位置B2は、位置A1、B1、B0、A0のうち任意のPUが利用できないか(例えば、それが別のスライスまたはタイルに属しているため)、または、イントラコード化されている場合にだけ考慮される。位置A1で候補が追加された後で、残りの候補の追加は、コード化効率が改善されるように、同一の動き情報を有する候補がリストから除外されることを保証する冗長性(redundancy)チェックの対象となる。
このステップにおいては、1つの候補だけがリストに追加される。特に、この時間的マージ候補の導出においては、スケーリングされた(scaled)動きベクトルが、所与の参照ピクチャリストの中で現在ピクチャとのPOC差異が最小であるピクチャに属する同一場所の(co-located)PUに基づいて導出される。同一場所のPUの導出に使用される参照ピクチャリストは、スライスヘッダ内で明示的に信号化される。
空間的-時間的マージ候補の他に、マージ候補の2つの追加タイプが存在する。結合双予測(combined bi-predictive)マージ候補およびゼロマージ候補である。結合双予測マージ候補は、空間的-時間的マージ候補を利用することによって生成される。結合双予測マージ候補は、B-スライスだけに使用される。結合双予測候補は、初期候補の第1参照ピクチャリスト動きパラメータを、別の第2参照ピクチャリスト動きパラメータと組み合わせることによって生成される。これらの2つのタプル(tuple)が異なる動き仮説(hypotheses)を提供する場合に、それらは新たな双予測候補を形成する。
(1)変数numRefを、Pスライスについてリスト0に関連付けられた参照ピクチャの数、または、Bスライスについて2つのリスト内の参照ピクチャの最小数、のいずれかに設定する。
(2)非反復ゼロ動き候補の追加
0...numRef-1である変数iについて、リスト0(Pスライスの場合)または両方のリスト(B-スライスの場合)に対して、(0,0)に設定されたMVを伴うデフォルトの動き候補、および、iに設定された参照ピクチャインデックスを追加する。
(3)(0,0)に設定されたMVを伴う繰り返しゼロ(repeated zero)の動き候補、0に設定されたリスト0の参照ピクチャインデックス(Pスライスの場合)、および、0に設定された両方のリストの参照ピクチャインデックス(Bスライスの場合)を追加する。
AMVPは、動きパラメータの明示的な伝送のために使用される、隣接PUを伴う動きベクトルの空間的-時間的相関を利用する。これは、最初に、左側、上の時間的に隣接するPU位置の利用可能性をチェックし、冗長な候補を除去し、そして、候補リストを一定長にするためにゼロベクトルを加えることによって、動きベクトル候補リストを構築する。次いで、エンコーダは、候補リストから最良の予測子(predictor)を選択し、そして、選択された候補を示している対応するインデックスを送信することができる。同様に、マージインデックス・信号化では、最良の動きベクトル候補のインデックスは、切り捨て単項(truncated unary)を使用して符号化される。この事例において符号化されるべき最大値は2である(図8参照)。以下のセクションでは、動きベクトル予測候補の導出プロセスに関する詳細が提供される。
図8は、動きベクトル予測候補について導出プロセスをまとめたものであり、そして、入力としてrefidxを用いて各参照ピクチャリストに対して実装され得る。
空間的動きベクトル候補の導出においては、5つの可能性ある候補の中で最大2つの候補が考慮され、それらの候補は、図2で先に示されたような位置に配置されたPUから導出されており、それらの位置は、動きマージのものと同じである。現在PUの左側に対する導出の順序は、A0、A1、および、スケーリングされたA0、スケーリングされたA1として定義される。現在PUの上側に対する導出の順序は、B0、B1、B2、スケーリングされたB0、スケーリングされたB1、スケーリングされたB2として定義される。従って、各側について、動きベクトル候補として使用され得る4つの事例が存在する。2つの事例は空間的スケーリングを使用する必要がなく、2つのケースでは空間的スケーリングが使用される。4つの異なる事例は、以下のようにまとめられる。
-空間的スケーリングなし
(1)同一参照ピクチャリスト、および、同一参照ピクチャインデックス(同一POC)
(2)異なる参照ピクチャリストであるが、同じ参照ピクチャ(同じPOC)
-空間的スケーリング
(3)同一の参照ピクチャリストであるが、異なる参照ピクチャ(異なるPOC)
(4)異なる参照ピクチャリスト、および、異なる参照ピクチャ(異なるPOC)
参照ピクチャインデックスの導出とは別に、時間的マージ候補の導出のための全てのプロセスは、(図6の例に示されるように)空間的動きベクトル候補の導出のためのものと同じである。いくつかの実施形態においては、参照ピクチャインデックスが、デコーダに対して信号化される。
いくつかの実施態様においては、ジョイント探究モデル(Joint Exploration Model、JEM)として知られる参照ソフトウェアを使用して、将来のビデオコーディング技術が探究される。JEMでは、いくつかのコーディングツールにおいて、サブブロックベースの予測が採用されている。アフィン予測、代替的な時間的動きベクトル予測(ATMVP)、空間的-時間的動きベクトル予測(STMVP)、双方向光学フロー(BIO)、フレームレートアップ変換(FRUC)、ローカル適応動きベクトル分解(LAMVR)、オーバーラップブロック・動き補償(OBMC)、ローカル照明補償(LIC)、および、デコーダ側動きベクトル・リファインメント(DMVR)、といったものである。
四分木プラス二分木(QTBT)を有するJEMにおいて、各CUは、各予測方向について最大で1組の動きパラメータを有することができる。いくつかの実施形態においては、エンコーダにおいて2つのサブCUレベルの動きベクトル予測方法が考慮されている。大きなCUをサブCUへと分割し、そして、大きなCUに係る全てのサブCUについて動き情報を導出することによるものである。代替的な時間的動きベクトル予測(ATMVP)法により、各CUは、同一場所の参照ピクチャにおける現在CUよりも小さい複数のブロックから動き情報の複数のセットをフェッチすることができる。空間的-時間的動きベクトル予測(STMVP)法においては、時間的動きベクトル予測子および空間的隣接動きベクトルを使用することにより、サブCUの動きベクトルが再帰的に導出される。いくつかの実施形態において、そして、サブCU動き予測についてより正確な動きフィールドを保存するために、参照フレームに対する動き圧縮がディセーブルされ得る。
ATMVP法では、現在CUより小さいブロックから動き情報の複数のセット(動きベクトルおよび参照インデックスを含む)をフェッチすることによって、時間的動きベクトル予測(TMVP)法が修正される。
STMVP法においては、ラスタ(raster)スキャン順序に従って、サブCUの動きベクトルが再帰的に導出される。図11は、4つのサブブロックおよび隣接ブロックを有する1つのCUの例を示している。4つの4×4のサブCUであるA(1101)、B(1102)、C(1103)、およびD(1104)を含む8×8のCU1100を想定する。現在フレームで隣接する4×4ブロックは、a(1111)、b(1112)、c(1113)、d(1114)としてラベル付けされている。
いくつかの実施形態において、サブCUモードは、追加的なマージ候補としてイネーブルされ、そして、モードの信号化に必要とされる追加の構文要素は存在しない。ATMVPモードおよびSTMVPモードを表すために、各CUのマージ候補リストに対して2つの追加マージ候補が追加される。他の実施形態においては、シーケンスパラメータセットがATMVPおよびSTMVPがイネーブルされていることを示す場合に、最大で7つのマージ候補が使用され得る。追加的なマージ候補の符号化ロジック、HMにおけるマージ候補の場合と同じである。これは、PスライスまたはBスライスにおける各CUについて、2つの追加的なマージ候補に対してさらに2つのRDチェックが必要とされ得ることを意味している。いくつかの実施形態、例えばJEM、において、マージインデックスの全てのビンは、コンテキストベースの適応バイナリ演算符号化(Context-based Adaptive Binary Arithmetic Coding、CABAC)によってコンテキストコード化される。他の実施形態、例えばHEVC、において、第1ビンだけがコンテキストコード化され、そして、残りのビンはコンテキストバイパス(by-pass)コード化される。
インター予測改良のためにいくつかの新たなコーディングツールが存在している。信号化MVDのための適応動きベクトル差異分解(AMVR)、アフィン予測モード、三角予測モード(TPM)、ATMVP、一般化双予測(GBI)、双方向光学フロー(BIO)、といったものである。
VVCにおいては、ピクチャを正方形ブロックまたは長方形ブロックへと分割するために、QuadTree/BinaryTree/MulitpleTree(QT/BT/TT)構造が採用されている。QT/BT/TTの他に、IフレームのVVC(VVC for I-frames)においては分離(separate)ツリー(a.k.a Dual coding tree)も、また、採用されている。別々のツリーでは、ルマ(luma)成分とクロマ(chroma)成分について、コーディングブロック構造が別々に信号化される。
いくつかの実施形態では、スライスヘッダにおいてuse_integer_mv_flagが0に等しい場合、(動きベクトルとPUの予測動きベクトルとの間の)動きベクトル差異(MVD)は、1/4(quartet)ルマサンプルの単位で信号化される。JEMではローカル適応動きベクトル分解(LAMVR)導入されている。JEMにおいて、MVDは、1/4ルマサンプル、整数ルマサンプル、または、4ルマサンプルの単位でコード化され得る。MVD分解は、コーディングユニット(CU)レベルで制御され、そして、MVD分解フラグは、少なくとも1つの非ゼロ(non-zero)MVD成分を有する各CUについて条件付きで信号化される。
HEVCでは、動き補償予測(MCP)に対して並進(translation)動きモデルだけが適用されている。しかしながら、カメラおよびオブジェクトは、多くの種類の動きを有し得る。例えば、ズームイン/アウト、回転、斜視移動(perspective motions)、及び/又は、他の不規則な動き、である。VVCでは、4パラメータアフィンモデルおよび6パラメータアフィンモデルを用いて、簡素化されたアフィン変換動き補償予測が適用されている。図13Aおよび図13Bに示されるように、ブロックのアフィン動きフィールドは、それぞれ、2つの制御点(control point)動きベクトル(変数a、b、eおよびfを使用する4パラメータアフィンモデルにおいて)、または、3つの制御点動きベクトル(変数a、b、c、d、eおよびfを使用する6パラメータアフィンモデルにおいて)によって、それぞれに、記述される。
並進動きモデルと同様に、アフィン予測によるサイド(side)情報をシグナリングするための2つのモードが、また、存在する。それらは、AFFINE_INTERおよびAFFINE_MERGEモードである。
幅と高さの両方が8より大きいCUについて、AF_INTERモードが適用され得る。CUレベルにおけるアフィンフラグは、AF_INTERモードが使用されるか否か示すために、ビットストリーム内で信号化されている。
1)継承(inherited)アフィン動き予測子(predictor)
チェック順序は、HEVC AMVPリスト構築における空間的MVPのものと同様である。第1に、左継承アフィン動き予測子は、アフィンコード化されて、現在ブロックと同じ参照ピクチャを有する{A1,A0}における第1ブロックから導出される。第2に、上記の継承アフィン動き予測子は、アフィンコード化されて、現在ブロックと同じ参照ピクチャを有する{B1,B0,B2}における第1ブロックから導出される。5つのブロックA1、A0、B1、B0、B2が図16に示されている。
一旦隣接ブロックがアフィンモードでコード化されることが分かると、隣接ブロックをカバーしているコーディングユニットのCPMVが、現在ブロックのCPMVの予測子を導出するために使用される。例えば、A1が非アフィンモードでコード化され、かつ、A0が4パラメータアフィンモードでコード化される場合に、左継承アフィンMV予測子はA0から導出される。この事例においては、A0をカバーしているCUのCPMVは、図18Bにおいて左上CPMVについてMV0 N、および、右上のCPMVについてMV1 Nによって示されるように、現在ブロックの推定CPMVを導出するために利用される。現在ブロックの左上(座標(x0,y0)を有する)、右上(座標(x1,y1)を有する)、および右下(座標(x2,y2)を有する)の位置についてMV0 C、MV1 C、MV2 C、によって示されている。
2)構築されたアフィン動き予測子
構築されたアフィン動き予測子は、図17に示されるように、同じ参照ピクチャを有する、隣接するコード化ブロック間(inter coded blocks)から導出される制御点動きベクトル(CPMV)から構成されている。現在アフィン動きモデルが4パラメータアフィンである場合に、CPMVの数は2であり、さもなければ、現在アフィン動きモデルが6パラメータアフィンである場合に、CPMVの数は3である。左上のCPMV mv0 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{A,B,C}における第1ブロックでのMVによって導出される。右上のCPMV mv1 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{D,E}における第1ブロックでのMVによって導出される。左下のCPMV mv2 ̄は、インターコード化されて、現在ブロックと同じ参照ピクチャを有するグループ{F,G}の第1ブロックでのMVによって導出される。
構築されたアフィン動き予測子を候補リストの中へ挿入するときに、剪定処理(pruning process)は適用されない。
3)通常の(normal)AMVP動き予測子
アフィン動き予測子の数が最大に到達するまで、以下が適用される。
mvi ̄は、構築されたアフィン動き予測子において既に導出されていることに留意する。
mv1=mv1 ̄+mvd1+mvd0
mv2=mv2 ̄+mvd2+mvd0
AF_MERGEモードでCUが適用される場合、有効な隣接再構築ブロックからアフィンモードでコード化された第1ブロックを取得する。そして、候補ブロックの選択順序は、図18Aに示されるように、左(left)、上(above)、右上(above right)、左下(left bottom)から左上(above left)まで、である(A、B、C、D、Eの順で示されている)。例えば、近隣左下ブロックが、図18BにおいてA0によって示されるように、アフィンモードでコード化されている場合、ブロックAを含む近隣CU/PUの左上隅、右上隅、および左下隅に係る制御点(CP)動きベクトルmv0 N、mv1 N、mv2 Nが、フェッチされる。そして、現在CU/PUにおける左上隅/右上/左下の動きベクトルmv0 C、mv1 C、mv2 C(6パラメータアフィンモデルについてだけ使用されている)が、mv0 N、mv1 N、mv2 Nに基づいて計算される。左上隅に配置されたサブブロック(例えば4×4ブロック)はmv0を保管し、右上隅に配置されたサブブロックは、現在ブロックがアフィンコード化されている場合に、mv1を保管する、ことが留意されるべきである。現在ブロックが6パラメータのアフィンモデルを用いてコード化されている場合、左下隅に配置されたサブブロックはmv2を保管し、さもなければ(4パラメータのアフィンモデルで)LBはmv2'を保管する。他のサブブロックは、MCに対して使用されるMVを保管する。
HEVCスクリーンコンテンツコード化拡張(SCC)においては、現在ピクチャ参照(CPR)としても呼ばれる、イントラブロックコピー(IBC、またはイントラピクチャブロック補償)が採用された。このツールは、同一ピクチャの中でテキストの繰り返しパターンおよびグラフィックスが豊富なコンテンツが頻繁に発生するという点で、スクリーンコンテンツビデオのコーディングについて非常に効率的である。予測子として同等または類似のパターンを伴う以前に再構成されたブロックを有することは、予測誤差を効果的に低減し、そして、従って、コード化効率を改善することができる。イントラブロック補償の一つの例が図20に示されている。
PCT/CN2018/089920においては、CPR(a.k.a IBC)といくつかの新たなコード化ツールを調和させるためにいくつかの方法が提案されている。
VVCにおいてサポートされている3つの異なるマージリスト構築プロセスが存在している。
配置されたピクチャ内のMまたはMSといった、対応する位置を突き止める場合には、事前に定義された領域の内側であるようにクリップされる。CTUサイズは、S×Sであり、本実施例においては、S=128である。配置されたCTUの左上の位置が(xCTU,yCTU)であると仮定すると、(xN,yN)における対応する位置MまたはMSは、有効領域xCTU≦xN<xCTU+S+4;yCTU≦yN<yCTU+Sへとリップされる。図21は、有効領域の一つの例を示している。
一つの実施例において提案された一般化された双予測改善(Generalized Bi-prediction improvement、GBi)が提供される。
インター-イントラ予測(inter-intra prediction)モードでは、マルチ仮説(multi-hypothesis)予測が、1つのイントラ予測および1つのマージインデックス予測を結合する。そうしたブロックは、特別なインターコード化(inter-coded)ブロックとして扱われる。マージCUにおいては、フラグが真の場合に、イントラ候補リストからイントラモードを選択するために、マージモードについて1つのフラグが信号化される。ルマ成分(luma component)について、イントラ候補リストは、DC、プラナー(planar)、水平(horizontal)、および垂直(vertical)モードを含む4つのイントラ予測モードから導出され、そして、イントラ候補リストのサイズは、ブロックの形状に応じて3または4であり得る。CU幅がCU高さの2倍より大きい場合には、水平モードがイントラモードのリストから除かれ、そして、CU高さがCU幅の2倍より大きい場合には、垂直モードがイントラモードのリストから除外される。イントラモードインデックスによって選択された1つのイントラ予測モード、および、マージインデックスによって選択された1つのマージインデックス予測が、加重平均を使用して結合される。クロマ成分(chroma component)については、DMが、余分なシグナリングなしで
常に適用される。
1.inter_intra_flag(1つの新たなコンテキスト)は、全ての条件が満足された場合に信号化される。
2.インター-イントラ予測が、三角予測において適用され得る。
i.LeftIPM=AboveIPM=DCと設定する。
v.IPM=(IPM>DC_IDX)?((aboveIPM≦DIA_IDX)?HOR_IDX:VER_IDX):aboveIPM;
(ワイドアングルモードはどうですか?)
vi.leftIPM==aboveIPMである場合
1.LeftIPMがDCまたはプラナーでない場合
a.MPM[0]=leftIPM、MPM[1]=Planar、MPM[2]=DC
2.それ以外の場合
a.MPM[0]=DC、MPM[1]=Planar、MPM[2]=Ver
vii.それ以外の場合
1.MPM[0]=leftIPM、MPM[1]=aboveIPM
2.leftIPMおよびaboveIPMがプラナーでない場合、MPM[2]=Planar
3.そうでなければ、MPM[2]=(leftIPM+aboveIPM)<2?Ver:DC
viii.W>2×Hである場合
1.MPM[x]==Horである場合、MPMリストではなく{DC,Planar,Ver,Hor}においてModeXをFindする、MPM[x]=ModeXを設定する。
1.MPM[x]==Verである場合、MPMリストではなく{DC,Planar,Ver,Hor}においてModeXをFindする、MPM[x]=ModeXを設定する。
6.隣接サンプルのフィルタリング:イントラ予測として:
a.DC/VER/HORについてフィルタリングしない。
a.P(x,y)=Clip((W0(x,y)*P_Intra(x,y)+W1(x,y)*P_Inter(x,y))>>3)
8.重み付け値(改善または簡略化され得る)
a.mode==DC/Planarの場合、||W<4||H<4:W0=W1=4;
b.mode==HORの場合:
i.x<W/4の場合、W0=6、W1=2;
ii.W/4≦x<W/2の場合、W0=5、W1=3;
iii.W/2≦x<3*W/4の場合、W0=3、W1=5;
iv.x≧3×W/4の場合、W0=2、W1=6;
c.mode==VERの場合:
i.y<H/4の場合、W0=6、W1=2;
ii.H/4≦y<H/2の場合、W0=5、W1=3;
iii.H/2≦y<3×H/4の場合、W0=3、W1=5;
iv.y≧3×H/4の場合、W0=2、W1=6
いくつかの実施形態において、究極(ultimate)動きベクトル表現(UMVE)が提示される。UMVEは、提案される動きベクトル表現方法を用いて、スキップモードまたはマージモードのいずれかについて使用される。
既存の実装(例えば、現在のVVC設計)において、CPRは、これらの問題を有している。
ここで開示される技術の実施形態は、既存の実装の欠点を克服し、それによって、より高いコード化効率を有するビデオコーディングを提供している。開示される技術に基づいて、ビデオおよび画像コード化を参照する現在ピクチャに対する動きベクトル導出およびシグナリングの使用は、現存および将来の両方のビデオコーディング標準を向上させ得るものであり、種々の実装のために説明される以下の実施例において解明される。以下に提供される、開示される技術の例は、一般的な概念を説明するものであり、そして、限定的なものとして解釈されることを意図するものではない。例においては、明示的に反対に示されない限り、これらの実施例において説明された種々の特徴が組み合わされ得る。「ブロックまたは候補がCPRを使用する(“a block or a candidate uses CPR”)」ということは、以下のことを意味し得ることが留意されるべきである。
図28は、ビデオ処理装置2800のブロック図である。装置2800は、ここにおいて説明された1つ以上の方法を実装するために使用され得る。装置2800は、スマートフォン、タブレット、コンピュータ、モノのインターネット(IoT)受信器、等において具現化され得る。装置2800は、1つ以上のプロセッサ2802、1つ以上のメモリ2804、および、ビデオ処理ハードウェア2806を含み得る。プロセッサ2802は、本文書において説明された1つ以上の方法(方法2400、2500、2600、および2700を含むが、これらに限定されない)を実装するように構成され得る。メモリ(複数のメモリ)2804は、ここにおいて説明された方法および技術を実装するために使用されるデータおよびコードを保管するために使用され得る。ビデオ処理ハードウェア2806は、ハードウェア回路において、本文書において説明されたいくつかの技術を実装するために使用され得る。
前記決定に基づいて、前記現在ブロックとビットストリーム表現との間で変換を実行するステップと、を含み、前記特定のコーディングモードは、前記現在ブロックの予測を導出するために、動きベクトルおよび非現在ピクチャを使用する、方法。
装置。
Claims (15)
- ビデオデータを処理する方法であって、
ビデオの現在ビデオブロックに対してイントラブロックコピー(IBC)モードが適用されることを決定するステップであり、前記IBCモードにおいては、前記現在ビデオブロックを含むビデオ領域からの参照サンプルが使用される、ステップと、
前記現在ビデオブロックについて結合されたインター-イントラ予測モードをディセーブルすることに関する決定を行うステップであり、前記結合されたインター-イントラ予測モードにおいては、中間イントラ予測信号および中間インター予測信号の加重和に少なくとも基づいて最終予測が生成される、ステップと、
前記決定に基づいて、前記現在ビデオブロックと前記ビデオのビットストリームとの間の変換を実行するステップと、
を含む、方法。 - 前記現在ビデオブロックに対する結合されたインター-イントラ予測フラグが、前記現在ビデオブロックで使用されている前記IBCモードに応答して前記ビットストリームに含まれておらず、
前記結合されたインター-イントラ予測フラグがビットストリームに含まれない場合、前記結合されたインター-イントラ予測フラグはゼロであると推定される、
請求項1記載の方法。 - 前記方法は、さらに、
前記現在ビデオブロックについて特定のコーディングモードをディセーブルすることに関する決定を行うステップ、
を含む、請求項1記載の方法。 - 前記特定のコーディングモードのフラグが、前記現在ビデオブロックで使用されている前記IBCモードに応答して前記ビットストリームに含まれておらず、
前記フラグが前記ビットストリームに含まれない場合、前記フラグはゼロであると推定される、
請求項3記載の方法。 - 前記特定のコーディングモードは、CUレベルの重み付けモードを用いる双予測を含み、前記CUレベルの重み付けモードを用いる双予測において、異なる重み付け値は、予測の導出プロセスにおける異なる参照画像に関連する、
請求項3に記載の方法。 - CUレベルの重み付けモードを用いる前記双予測の重み付けインデックスが、前記現在ビデオブロックで使用されている前記IBCモードに応答して前記ビットストリームに含まれておらず、
前記重み付けインデックスが前記ビットストリームに含まれない場合、重み付けインデックスはゼロであると推定される、
請求項5に記載の方法。 - 前記特定のコーディングモードは、動きベクトル差異(MMVD)モードとのマージを含み、
前記MMVDモードにおいて、ビデオブロックの動きベクトルは、マージ動き候補リストに基づいて導出され、かつ、少なくとも1つの動きベクトルオフセットによってさらに精密化される、
請求項3に記載の方法。 - 前記特定のコーディングモードは、アフィンモードを含み、
前記アフィンモードは、少なくとも1つの制御点動きベクトルを使用する、
請求項3に記載の方法。 - 前記特定のコーディングモードは、サブブロックベースの時間的動きベクトル予測モードを含み、
前記サブブロックベースの時間的動きベクトル予測モードにおいて、少なくとも1つの時間的な動きオフセットによって決定される配置領域に基づいて、動き情報が導出される、
請求項3に記載の方法。 - 前記実行するステップの前に、前記方法は、さらに、
前記現在ビデオブロックについてブロックベクトルを導出するステップと、
前記ブロックベクトルを精密化するために、前記ビットストリームに含まれる少なくとも1つのブロックベクトル差異を使用するステップと、を含み、
前記IBCモードは、ルマ成分およびクロマ成分が別々のコーディング構造ツリーでコード化される、デュアルコード化ツリーを有するビデオブロックに適用され、
現在のビデオブロックの幅は2以上であり、かつ、高さは2以上である、
請求項1に記載の方法。 - 前記変換は、前記ビットストリームから前記現在ビデオブロックを復号化することを含む、
請求項1に記載の方法。 - 前記変換は、前記現在ビデオブロックを前記ビットストリームへと符号化することを含む、
請求項1に記載の方法。 - プロセッサ、および、命令が保管された非一時メモリを備えるビデオデータを処理するための装置であって、
前記プロセッサによって、前記命令が実行されると、前記プロセッサに、
ビデオの現在ビデオブロックに対してイントラブロックコピー(IBC)モードが適用されることを決定し、前記IBCモードにおいては、前記現在ビデオブロックを含むビデオ領域からの参照サンプルが使用され、
前記現在ビデオブロックについて結合されたインター-イントラ予測モードをディセーブルすることに関する決定を行い、前記結合されたインター-イントラ予測モードにおいては、中間イントラ予測信号および中間インター予測信号の加重和に少なくとも基づいて最終予測が生成され、
前記決定に基づいて、前記現在ビデオブロックと前記ビデオのビットストリームとの間の変換を実行する、
ようにさせる、装置。 - 命令を保管する非一時的なコンピュータで読取り可能な記憶媒体であって、
前記命令が実行されると、プロセッサに、
ビデオの現在ビデオブロックに対してイントラブロックコピー(IBC)モードが適用されることを決定し、前記IBCモードにおいては、前記現在ビデオブロックを含むビデオ領域からの参照サンプルが使用され、
前記現在ビデオブロックについて結合されたインター-イントラ予測モードをディセーブルすることに関する決定を行い、前記結合されたインター-イントラ予測モードにおいては、中間イントラ予測信号および中間インター予測信号の加重和に少なくとも基づいて最終予測が生成され、
前記決定に基づいて、前記現在ビデオブロックと前記ビデオのビットストリームとの間の変換を実行する、
ようにさせる、非一時的なコンピュータで読取り可能な記憶媒体。 - ビデオのビットストリームを保管する方法であって、
ビデオの現在ビデオブロックに対してイントラブロックコピー(IBC)モードが適用されることを決定するステップであり、前記IBCモードにおいては、前記現在ビデオブロックを含むビデオ領域からの参照サンプルが使用される、ステップと、
前記現在ビデオブロックについて結合されたインター-イントラ予測(CIIP)モードをディセーブルすることに関する決定を行うステップであり、前記結合されたインター-イントラ予測モードにおいては、中間イントラ予測信号および中間インター予測信号の加重和に少なくとも基づいて最終予測が生成される、ステップと、
前記決定に基づいて、前記ビットストリームを生成するステップと、
前記生成されたビットストリームを非一時的なコンピュータで読取り可能な記憶媒体に保管するステップと、
を含む、方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023002737A JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2018/118167 | 2018-11-29 | ||
CN2018118167 | 2018-11-29 | ||
PCT/CN2019/122183 WO2020108649A1 (en) | 2018-11-29 | 2019-11-29 | Interaction between intra block copy mode and inter prediction tools |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023002737A Division JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022508177A JP2022508177A (ja) | 2022-01-19 |
JP7212161B2 true JP7212161B2 (ja) | 2023-01-24 |
Family
ID=70851922
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021528964A Active JP7212161B2 (ja) | 2018-11-29 | 2019-11-29 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
JP2023002737A Pending JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023002737A Pending JP2023052340A (ja) | 2018-11-29 | 2023-01-11 | イントラブロックコピーモードとインター予測ツールとの間の相互作用 |
Country Status (6)
Country | Link |
---|---|
US (4) | US11095917B2 (ja) |
EP (2) | EP4307681A3 (ja) |
JP (2) | JP7212161B2 (ja) |
KR (1) | KR102695787B1 (ja) |
CN (5) | CN113170167A (ja) |
WO (4) | WO2020108651A1 (ja) |
Families Citing this family (37)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11317099B2 (en) | 2018-10-05 | 2022-04-26 | Tencent America LLC | Method and apparatus for signaling an offset in video coding for intra block copy and/or inter prediction |
SG11202104046TA (en) * | 2018-10-27 | 2021-05-28 | Huawei Tech Co Ltd | Separate merge list and intra-inter techniques harmonization for video coding |
CN113170167A (zh) | 2018-11-29 | 2021-07-23 | 北京字节跳动网络技术有限公司 | 块内拷贝模式中的标志指示方法 |
MX2021007225A (es) * | 2018-12-17 | 2021-09-21 | Interdigital Vc Holdings Inc | Combinacion de herramientas de codificacion de diferencia de vector de movimiento con otros modos de movimiento. |
US11758132B2 (en) * | 2018-12-28 | 2023-09-12 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Encoder and decoder, encoding method and decoding method with complexity handling for flexibly sized picture partitions |
CN113228645A (zh) * | 2018-12-28 | 2021-08-06 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储有比特流的记录介质 |
CN111385575A (zh) * | 2018-12-29 | 2020-07-07 | 华为技术有限公司 | 帧间预测方法、装置以及相应的编码器和解码器 |
CN112042191B (zh) * | 2019-01-01 | 2024-03-19 | Lg电子株式会社 | 以基于历史的运动矢量为基础预测处理视频信号的方法和设备 |
CN116866605A (zh) * | 2019-01-03 | 2023-10-10 | 北京大学 | 视频处理方法和装置 |
US11330283B2 (en) * | 2019-02-01 | 2022-05-10 | Tencent America LLC | Method and apparatus for video coding |
WO2020156538A1 (en) | 2019-02-03 | 2020-08-06 | Beijing Bytedance Network Technology Co., Ltd. | Interaction between mv precisions and mv difference coding |
WO2020164580A1 (en) | 2019-02-14 | 2020-08-20 | Beijing Bytedance Network Technology Co., Ltd. | Size selective application of decoder side refining tools |
CN113491114A (zh) * | 2019-02-20 | 2021-10-08 | 北京达佳互联信息技术有限公司 | 用于帧间预测的运动向量舍入、截取和存储的方法和装置 |
JP7100194B2 (ja) * | 2019-03-11 | 2022-07-12 | 日本放送協会 | 画像符号化装置、画像復号装置、及びプログラム |
SG11202111762WA (en) * | 2019-04-25 | 2021-11-29 | Op Solutions Llc | Efficient coding of global motion vectors |
CN113853792A (zh) | 2019-05-11 | 2021-12-28 | 北京字节跳动网络技术有限公司 | 带有参考图片重采样的编解码工具 |
JP7323641B2 (ja) | 2019-05-21 | 2023-08-08 | 北京字節跳動網絡技術有限公司 | アフィンモードのための適応動きベクトル差分分解 |
WO2020244659A1 (en) | 2019-06-06 | 2020-12-10 | Beijing Bytedance Network Technology Co., Ltd. | Interactions between sub-block based intra block copy and different coding tools |
CN113966612A (zh) | 2019-06-16 | 2022-01-21 | 北京字节跳动网络技术有限公司 | 屏幕内容编解码根据与运动信息之间的相互作用 |
EP3985968A4 (en) * | 2019-06-17 | 2023-05-24 | Electronics and Telecommunications Research Institute | INTRA BLOCK COPY BASED ENCODING/DECODING METHOD, DEVICE AND BITSTREAM STORAGE DEVICE |
WO2020259426A1 (en) | 2019-06-22 | 2020-12-30 | Beijing Bytedance Network Technology Co., Ltd. | Motion candidate list construction for intra block copy mode |
EP3991417A1 (en) * | 2019-06-25 | 2022-05-04 | InterDigital VC Holdings France, SAS | Motion vector prediction in video encoding and decoding |
EP3984227A4 (en) | 2019-07-27 | 2022-08-17 | Beijing Bytedance Network Technology Co., Ltd. | TOOL USE RESTRICTIONS BASED ON TYPES OF REFERENCE IMAGES |
KR20220042125A (ko) | 2019-08-10 | 2022-04-04 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 서브픽처 디코딩에서의 버퍼 관리 |
EP4011076A4 (en) | 2019-09-09 | 2022-11-02 | Beijing Bytedance Network Technology Co., Ltd. | INTRA-BLOCK COPY ENCODING AND DECODING |
EP4029245A4 (en) | 2019-10-12 | 2022-11-23 | Beijing Bytedance Network Technology Co., Ltd. | HIGH LEVEL SYNTAX FOR VIDEO CODING TOOLS |
JP7482220B2 (ja) | 2019-10-18 | 2024-05-13 | 北京字節跳動網絡技術有限公司 | サブピクチャのパラメータセットシグナリングにおける構文制約 |
EP4088462A4 (en) * | 2020-02-14 | 2023-05-24 | Beijing Bytedance Network Technology Co., Ltd. | SUBPICTURE INFORMATION SIGNALING IN VIDEO BITSTREAM |
KR20220153064A (ko) * | 2020-03-19 | 2022-11-17 | 에프쥐 이노베이션 컴퍼니 리미티드 | 비디오 데이터를 코딩하기 위한 디바이스 및 방법 |
WO2021204063A1 (en) * | 2020-04-07 | 2021-10-14 | FG Innovation Company Limited | Device and method for coding video data |
WO2021244419A1 (en) * | 2020-05-31 | 2021-12-09 | Beijing Bytedance Network Technology Co., Ltd. | Constraint signaling using general constraint information syntax element |
JP2023006877A (ja) * | 2021-06-30 | 2023-01-18 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
JP2024531644A (ja) * | 2021-09-08 | 2024-08-29 | ヒョンダイ モーター カンパニー | ビデオ符号化/復号化方法及び装置 |
US20230079960A1 (en) * | 2021-09-15 | 2023-03-16 | Tencent America LLC | On propagating intra prediction mode information of ibc block by using block vector |
WO2023046127A1 (en) * | 2021-09-25 | 2023-03-30 | Beijing Bytedance Network Technology Co., Ltd. | Method, apparatus, and medium for video processing |
CN118303025A (zh) * | 2021-10-12 | 2024-07-05 | Lg 电子株式会社 | 图像解码方法及其设备 |
WO2023132614A1 (ko) * | 2022-01-04 | 2023-07-13 | 현대자동차주식회사 | 머지 모드를 개선하는 비디오 부호화/복호화 방법 및 장치 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015192353A1 (en) | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
JP2018526881A (ja) | 2015-07-27 | 2018-09-13 | クアルコム,インコーポレイテッド | ビデオコーディングにおける双予測を制約する方法およびシステム |
Family Cites Families (52)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9948915B2 (en) * | 2013-07-24 | 2018-04-17 | Qualcomm Incorporated | Sub-PU motion prediction for texture and depth coding |
AU2013228045A1 (en) * | 2013-09-13 | 2015-04-02 | Canon Kabushiki Kaisha | Method, apparatus and system for encoding and decoding video data |
US9762927B2 (en) * | 2013-09-26 | 2017-09-12 | Qualcomm Incorporated | Sub-prediction unit (PU) based temporal motion vector prediction in HEVC and sub-PU design in 3D-HEVC |
GB2519070A (en) * | 2013-10-01 | 2015-04-15 | Sony Corp | Data encoding and decoding |
KR102257269B1 (ko) | 2013-10-14 | 2021-05-26 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | 비디오 및 이미지 코딩 및 디코딩을 위한 인트라 블록 카피 예측 모드의 피쳐 |
CN105659602B (zh) | 2013-10-14 | 2019-10-08 | 微软技术许可有限责任公司 | 用于视频和图像编码的帧内块复制预测模式的编码器侧选项 |
EP3061253A4 (en) | 2013-10-25 | 2016-08-31 | Microsoft Technology Licensing Llc | PAIRING OF BLOCKS BY HASHING VIDEO AND IMAGE CODING |
WO2015058397A1 (en) | 2013-10-25 | 2015-04-30 | Microsoft Technology Licensing, Llc | Representing blocks with hash values in video and image coding and decoding |
US9554141B2 (en) * | 2013-11-18 | 2017-01-24 | Arris Enterprises, Inc. | Intra block copy for intra slices in high efficiency video coding (HEVC) |
US9883197B2 (en) | 2014-01-09 | 2018-01-30 | Qualcomm Incorporated | Intra prediction of chroma blocks using the same vector |
US9860559B2 (en) * | 2014-03-17 | 2018-01-02 | Mediatek Singapore Pte. Ltd. | Method of video coding using symmetric intra block copy |
US20170195677A1 (en) * | 2014-05-22 | 2017-07-06 | Mediatek Inc. | Method of Intra Block Copy with Flipping for Image and Video Coding |
CN106464921B (zh) | 2014-06-19 | 2019-10-15 | Vid拓展公司 | 用于块内复制搜索增强的方法和系统 |
CN105392008B (zh) * | 2014-08-22 | 2018-09-25 | 中兴通讯股份有限公司 | 一种预测编、解码方法和相应的编、解码器和电子设备 |
WO2016034058A1 (en) * | 2014-09-01 | 2016-03-10 | Mediatek Inc. | Method of intra picture block copy for screen content and video coding |
KR20170066457A (ko) * | 2014-09-26 | 2017-06-14 | 브이아이디 스케일, 인크. | 시간적 블록 벡터 예측을 갖는 인트라 블록 카피 코딩 |
US9918105B2 (en) * | 2014-10-07 | 2018-03-13 | Qualcomm Incorporated | Intra BC and inter unification |
US10212445B2 (en) * | 2014-10-09 | 2019-02-19 | Qualcomm Incorporated | Intra block copy prediction restrictions for parallel processing |
KR20160059513A (ko) * | 2014-11-18 | 2016-05-27 | 광운대학교 산학협력단 | 스크린 콘텐츠 코딩을 위한 고속 화면 내 부호화 모드 결정 방법 |
US11477477B2 (en) * | 2015-01-26 | 2022-10-18 | Qualcomm Incorporated | Sub-prediction unit based advanced temporal motion vector prediction |
US10230980B2 (en) * | 2015-01-26 | 2019-03-12 | Qualcomm Incorporated | Overlapped motion compensation for video coding |
US9591325B2 (en) | 2015-01-27 | 2017-03-07 | Microsoft Technology Licensing, Llc | Special case handling for merged chroma blocks in intra block copy prediction mode |
CN107431817B (zh) | 2015-01-29 | 2020-03-24 | Vid拓展公司 | 用于调色板译码的方法及装置 |
US10516882B2 (en) * | 2015-01-29 | 2019-12-24 | Vid Scale, Inc. | Intra-block copy searching |
US10638140B2 (en) * | 2015-05-29 | 2020-04-28 | Qualcomm Incorporated | Slice level intra block copy and other video coding improvements |
US20160360234A1 (en) * | 2015-06-03 | 2016-12-08 | Apple Inc. | Techniques For Resource Conservation During Performance Of Intra Block Copy Prediction Searches |
TWI816224B (zh) * | 2015-06-08 | 2023-09-21 | 美商Vid衡器股份有限公司 | 視訊解碼或編碼方法及裝置 |
US10271064B2 (en) * | 2015-06-11 | 2019-04-23 | Qualcomm Incorporated | Sub-prediction unit motion vector prediction using spatial and/or temporal motion information |
US10178403B2 (en) | 2015-06-23 | 2019-01-08 | Qualcomm Incorporated | Reference picture list construction in intra block copy mode |
US11146794B2 (en) * | 2015-07-27 | 2021-10-12 | Mediatek Inc. | Method of system for video coding using intra block copy mode |
US20170099490A1 (en) * | 2015-10-02 | 2017-04-06 | Qualcomm Incorporated | Constrained intra-prediction for block copy mode |
US20190158870A1 (en) * | 2016-01-07 | 2019-05-23 | Mediatek Inc. | Method and apparatus for affine merge mode prediction for video coding system |
CN117354536A (zh) * | 2016-02-25 | 2024-01-05 | 株式会社Kt | 用于处理视频信号的方法和设备 |
WO2017147765A1 (en) * | 2016-03-01 | 2017-09-08 | Mediatek Inc. | Methods for affine motion compensation |
SG11201806865YA (en) * | 2016-03-15 | 2018-09-27 | Mediatek Inc | Method and apparatus of video coding with affine motion compensation |
US10560712B2 (en) * | 2016-05-16 | 2020-02-11 | Qualcomm Incorporated | Affine motion prediction for video coding |
CA3025490A1 (en) * | 2016-05-28 | 2017-12-07 | Mediatek Inc. | Method and apparatus of current picture referencing for video coding using affine motion compensation |
US10477238B2 (en) * | 2016-09-07 | 2019-11-12 | Qualcomm Incorporated | Sub-PU based bi-directional motion compensation in video coding |
US20180109814A1 (en) * | 2016-10-14 | 2018-04-19 | Mediatek Inc. | Method And Apparatus Of Coding Unit Information Inheritance |
US20180109810A1 (en) * | 2016-10-17 | 2018-04-19 | Mediatek Inc. | Method and Apparatus for Reference Picture Generation and Management in 3D Video Compression |
US10681370B2 (en) * | 2016-12-29 | 2020-06-09 | Qualcomm Incorporated | Motion vector generation for affine motion model for video coding |
US10701390B2 (en) * | 2017-03-14 | 2020-06-30 | Qualcomm Incorporated | Affine motion information derivation |
US10582209B2 (en) * | 2017-03-30 | 2020-03-03 | Mediatek Inc. | Sub-prediction unit temporal motion vector prediction (sub-PU TMVP) for video coding |
US20180310017A1 (en) * | 2017-04-21 | 2018-10-25 | Mediatek Inc. | Sub-prediction unit temporal motion vector prediction (sub-pu tmvp) for video coding |
US10805630B2 (en) * | 2017-04-28 | 2020-10-13 | Qualcomm Incorporated | Gradient based matching for motion search and derivation |
WO2018210315A1 (en) * | 2017-05-18 | 2018-11-22 | Mediatek Inc. | Method and apparatus of motion vector constraint for video coding |
US20180376148A1 (en) * | 2017-06-23 | 2018-12-27 | Qualcomm Incorporated | Combination of inter-prediction and intra-prediction in video coding |
US10687071B2 (en) | 2018-02-05 | 2020-06-16 | Tencent America LLC | Method and apparatus for video coding |
GB2588004B (en) | 2018-06-05 | 2023-03-01 | Beijing Bytedance Network Tech Co Ltd | Interaction between IBC and affine |
TWI723444B (zh) | 2018-06-29 | 2021-04-01 | 大陸商北京字節跳動網絡技術有限公司 | 使用一個或多個查找表來按順序存儲先前編碼的運動信息並使用它們來編碼後面的塊的概念 |
US10958934B2 (en) * | 2018-07-27 | 2021-03-23 | Tencent America LLC | History-based affine merge and motion vector prediction |
CN113170167A (zh) | 2018-11-29 | 2021-07-23 | 北京字节跳动网络技术有限公司 | 块内拷贝模式中的标志指示方法 |
-
2019
- 2019-11-29 CN CN201980077195.0A patent/CN113170167A/zh active Pending
- 2019-11-29 WO PCT/CN2019/122195 patent/WO2020108651A1/en active Application Filing
- 2019-11-29 WO PCT/CN2019/122194 patent/WO2020108650A1/en active Application Filing
- 2019-11-29 KR KR1020217014518A patent/KR102695787B1/ko active IP Right Grant
- 2019-11-29 CN CN201980077180.4A patent/CN113170099B/zh active Active
- 2019-11-29 CN CN202311458574.9A patent/CN117915083A/zh active Pending
- 2019-11-29 CN CN201980077207.XA patent/CN113196772B/zh active Active
- 2019-11-29 EP EP23213886.7A patent/EP4307681A3/en active Pending
- 2019-11-29 EP EP19888914.9A patent/EP3871410A4/en active Pending
- 2019-11-29 CN CN201980077186.1A patent/CN113170181B/zh active Active
- 2019-11-29 WO PCT/CN2019/122198 patent/WO2020108652A1/en active Application Filing
- 2019-11-29 WO PCT/CN2019/122183 patent/WO2020108649A1/en unknown
- 2019-11-29 JP JP2021528964A patent/JP7212161B2/ja active Active
-
2021
- 2021-02-04 US US17/167,303 patent/US11095917B2/en active Active
- 2021-02-04 US US17/167,266 patent/US11115676B2/en active Active
- 2021-08-16 US US17/403,707 patent/US11825113B2/en active Active
-
2023
- 2023-01-11 JP JP2023002737A patent/JP2023052340A/ja active Pending
- 2023-10-13 US US18/486,641 patent/US20240056599A1/en active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015192353A1 (en) | 2014-06-19 | 2015-12-23 | Microsoft Technology Licensing, Llc | Unified intra block copy and inter prediction modes |
JP2018526881A (ja) | 2015-07-27 | 2018-09-13 | クアルコム,インコーポレイテッド | ビデオコーディングにおける双予測を制約する方法およびシステム |
Non-Patent Citations (2)
Title |
---|
Gary Sullivan, et al.,"Meeting report of the 21st meeting of the Joint Collaborative Team on Video Coding (JCT-VC), Warsaw, PL, 19-26 June 2015",JCTVC-U1000,version 1,[online], Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11,2015年10月14日,Pages 1 and 56,[令和4年11月25日検索], インターネット, <URL: http://phenix.it-sudparis.eu/jct/doc_end_user/current_document.php?id=10210> and <URL: http://phenix.it-sudparis.eu/jct/doc_end_user/documents/21_Warsaw/wg11/JCTVC-U1000-v1.zip>. |
Wei-Jung Chien, et al.,"Methodology and reporting template for tool testing",JVET-L1005,version 1,[online], Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11,2018年10月27日,Pages 1-5,[令和4年6月6日検索], インターネット, <URL: http://phenix.it-sudparis.eu/jvet/doc_end_user/current_document.php?id=4837> and <URL: http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/12_Macao/wg11/JVET-L1005-v1.zip>. |
Also Published As
Publication number | Publication date |
---|---|
US20240056599A1 (en) | 2024-02-15 |
EP3871410A4 (en) | 2021-12-22 |
WO2020108649A1 (en) | 2020-06-04 |
EP4307681A2 (en) | 2024-01-17 |
US20210160533A1 (en) | 2021-05-27 |
EP4307681A3 (en) | 2024-04-03 |
WO2020108652A1 (en) | 2020-06-04 |
CN113170181A (zh) | 2021-07-23 |
US11095917B2 (en) | 2021-08-17 |
CN117915083A (zh) | 2024-04-19 |
WO2020108650A1 (en) | 2020-06-04 |
US11825113B2 (en) | 2023-11-21 |
CN113196772A (zh) | 2021-07-30 |
US20210377561A1 (en) | 2021-12-02 |
JP2022508177A (ja) | 2022-01-19 |
CN113170167A (zh) | 2021-07-23 |
EP3871410A1 (en) | 2021-09-01 |
CN113170181B (zh) | 2023-12-08 |
CN113170099A (zh) | 2021-07-23 |
US20210160525A1 (en) | 2021-05-27 |
CN113196772B (zh) | 2024-08-02 |
WO2020108651A1 (en) | 2020-06-04 |
JP2023052340A (ja) | 2023-04-11 |
CN113170099B (zh) | 2024-03-29 |
KR102695787B1 (ko) | 2024-08-14 |
US11115676B2 (en) | 2021-09-07 |
KR20210094530A (ko) | 2021-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7212161B2 (ja) | イントラブロックコピーモードとインター予測ツールとの間の相互作用 | |
JP7307154B2 (ja) | 適応動きベクトル解像度による動きベクトルの変更 | |
US20210092379A1 (en) | Construction method for inter prediction with geometry partition | |
US11671586B2 (en) | Modified history based motion prediction | |
KR102711349B1 (ko) | 화면 내 블록 복사를 위한 히스토리 기반 움직임 후보 리스트 구성 | |
WO2020058886A1 (en) | Fast algorithms for adaptive motion vector resolution in affine mode | |
CN110858908A (zh) | 使用空间邻居的重叠块运动补偿 | |
WO2020164543A1 (en) | Motion prediction based on shared merge list | |
WO2020070730A2 (en) | Size restriction based on affine motion information | |
CN113273208A (zh) | 仿射预测模式的改进 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210521 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210521 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220913 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230112 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7212161 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |