JP2022544667A - 映像処理における代替の補間フィルタの選択的使用 - Google Patents
映像処理における代替の補間フィルタの選択的使用 Download PDFInfo
- Publication number
- JP2022544667A JP2022544667A JP2022509198A JP2022509198A JP2022544667A JP 2022544667 A JP2022544667 A JP 2022544667A JP 2022509198 A JP2022509198 A JP 2022509198A JP 2022509198 A JP2022509198 A JP 2022509198A JP 2022544667 A JP2022544667 A JP 2022544667A
- Authority
- JP
- Japan
- Prior art keywords
- interpolation filter
- pixel
- video
- precision
- alternative
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims description 87
- 238000000034 method Methods 0.000 claims abstract description 281
- 238000003672 processing method Methods 0.000 claims abstract description 15
- 230000009466 transformation Effects 0.000 claims abstract description 15
- 238000012952 Resampling Methods 0.000 claims abstract description 9
- 230000033001 locomotion Effects 0.000 claims description 224
- 239000013598 vector Substances 0.000 claims description 148
- 230000008569 process Effects 0.000 claims description 31
- 230000002123 temporal effect Effects 0.000 claims description 27
- 238000009795 derivation Methods 0.000 claims description 24
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 12
- 230000015654 memory Effects 0.000 claims description 11
- 230000011664 signaling Effects 0.000 claims description 8
- 230000001131 transforming effect Effects 0.000 claims description 8
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 3
- 241000023320 Luma <angiosperm> Species 0.000 description 26
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 26
- 238000005516 engineering process Methods 0.000 description 17
- 230000002457 bidirectional effect Effects 0.000 description 12
- 238000005192 partition Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000000638 solvent extraction Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 241001270131 Agaricus moelleri Species 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000003780 insertion Methods 0.000 description 3
- 230000037431 insertion Effects 0.000 description 3
- 238000013138 pruning Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 230000006837 decompression Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000013515 script Methods 0.000 description 2
- 101150114515 CTBS gene Proteins 0.000 description 1
- 101100328895 Caenorhabditis elegans rol-8 gene Proteins 0.000 description 1
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000007670 refining Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
Abstract
Description
パリ条約に基づく適用可能な特許法および/または規則に基づいて、本願は、2019年8月20日出願の国際特許出願第PCT/CN2019/101541号の優先権および利益を適時に主張することを目的とする。法に基づくすべての目的のために、上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
映像符号化規格は、主に周知のITU-TおよびISO/IEC規格の開発によって発展してきた。ITU-TはH.261とH.263を作り、ISO/IECはMPEG-1とMPEG-4 Visualを作り、両団体はH.262/MPEG-2 VideoとH.264/MPEG-4 AVC(Advanced Video Coding)とH.265/HEVC規格を共同で作った。H.262以来、映像符号化規格は、時間予測と変換符号化が利用されるハイブリッド映像符号化構造に基づく。HEVCを超えた将来の映像符号化技術を探索するため、2015年には、VCEGとMPEGが共同でJVET(Joint Video Exploration Team)を設立した。それ以来、多くの新しい方法がJVETによって採用され、JEM(Joint Exploration Mode)と呼ばれる参照ソフトウェアに組み込まれてきた。2018年4月には、VCEG(Q6/16)とISO/IEC JTC1 SC29/WG11(MPEG)の間にJoint Video Expert Team(JVET)が発足し、HEVCと比較して50%のビットレート削減を目標にVVC規格の策定に取り組んでいる。
HEVCにおいて、CTUは、様々な局所的特徴に適応するように、符号化ツリーと呼ばれる4分木構造を用いてCUに分割される。インターピクチャ(時間的)予測またはイントラピクチャ(空間的)予測を使用する、ピクチャ領域を符号化するかどうかの決定は、CUレベルで行われる。各CUは、PU分割タイプに応じて1つ、2つまたは4つのPUに更に分割することができる。1つのPUの内部では、同じ予測処理が適用され、PU単位で関連情報がデコーダに送信される。PU分割タイプに基づく予測処理を適用して残差ブロックを得た後、CUのためのコーディングツリー符号化ツリーに類似した別の4分木構造に基づいて、CUを変換ユニット(TU)に分割することができる。HEVC構造の重要な特徴の1つは、CU、PU、TUを含む複数のパーティション概念を有することである。
-CTUのサイズ:1つの4分木のルートノードのサイズ、HEVCと同じ概念
-MinQTSize:最小許容の4分木の葉ノードサイズ
-MaxBTSize:最大許容の2分木のルートノードサイズ
-MaxBTDepth:最大許容の2分木の深さ
-MinBTSize:最小許容の2分木の葉ノードのサイズ
各インター予測されたPUは、1つまたは2つの参照ピクチャリストのための動きパラメータを有する。動きパラメータは、動きベクトルおよび参照ピクチャインデックスを含む。2つの参照ピクチャリストのうちの1つの参照ピクチャリストの使用は、inter_pred_idcを使用して信号通知されてもよい。動きベクトルは、予測子に対するデルタ(delta)として明確にコーディングされてもよい。
2.2.1.1.マージモードの候補の導出
マージモードを使用してPUを予測する場合、ビットストリームからマージ候補リストにおけるエントリを指すインデックスを構文解析し、これを使用して動き情報を検索する。このリストの構成は、HEVC規格で規定されており、以下のステップのシーケンスに基づいてまとめることができる。
●ステップ1:初期候補導出
o ステップ1.1:空間的候補導出
o ステップ1.2:空間的候補の冗長性チェック
o ステップ1.3:時間的候補導出
● ステップ2:追加の候補挿入
o ステップ2.1:双方向予測候補の作成
o ステップ2.2:動きゼロ候補の挿入
空間的マージ候補の導出において、図3に示す位置にある候補の中から、最大4つのマージ候補を選択する。導出の順序はA1、B1、B0、A0、B2である。位置A1、B1、B0、A0のいずれかのPUが利用可能でない場合(例えば、別のスライスまたはタイルに属しているため)、またはイントラ符号化された場合にのみ、位置B2が考慮される。位置A1の候補を加えた後、残りの候補を加えると、冗長性チェックを受け、それにより、同じ動き情報を有する候補を確実にリストから排除でき、符号化効率を向上させることができる。計算の複雑性を低減するために、前述の冗長性チェックにおいて、考えられる候補対のすべてを考慮することはしない。代わりに、図4において矢印でリンクされた対のみを考慮し、冗長性チェックに使用される対応する候補が同じ動き情報を有していない場合にのみ、その候補をリストに加える。重複した動き情報の別のソースは、2N×2Nとは異なる分割に関連付けられた「第2のPU」である。一例として、図5は、それぞれN×2Nおよび2N×Nの場合の第2のPUを示す。現在のPUをN×2Nに分割する場合、リスト構築に位置A1の候補は考慮されない。実際、この候補を加えることにより、同じ動き情報を有する2つの予測ユニットが導かれることとなり、1つの符号化ユニットに1つのPUのみを有するためには冗長である。同様に、現在のPUを2N×Nに分割する場合、位置B1は考慮されない。
このステップにおいて、1つの候補のみがリストに追加される。具体的には、この時間的マージ候補の導出において、所与の参照ピクチャリストにおける現在のピクチャとの間に最小のPOC差を有するピクチャに属する同一位置PUに基づいて、スケーリングされた動きベクトルを導出する。スライスヘッダにおいて、同一位置のPUの導出に用いられる参照ピクチャリストが明確に信号通知される。図6に点線で示すように、時間的マージ候補のスケーリングされた動きベクトルが得られる。これは、POC距離tbおよびtdを利用して、同一位置のPUの動きベクトルからスケーリングしたものである。tbは、現在のピクチャの参照ピクチャと現在のピクチャのPOC差として規定され、tdは、同一位置のPUの参照ピクチャと同一位置のピクチャのPOC差として規定する。時間的マージ候補の参照ピクチャインデックスをゼロに等しく設定する。このスケーリング処理の実際的な実現については、HEVC仕様に記載されている。Bスライスの場合、2つの動きベクトル、即ち、1つは参照ピクチャリスト0のためのもの、もう1つは参照ピクチャリスト1のためのものを取得し、これらを組み合わせることによって、双方向予測マージ候補を形成する。
空間的-時間的マージ候補の他に、2つの追加のタイプのマージ候補、すなわち、結合双方向予測マージ候補およびゼロマージ候補がある。空間的-時間的マージ候補を利用して、結合双方向予測マージ候補を生成する。結合双方向予測マージ候補は、Bスライスのみに使用される。最初の候補の第1の参照ピクチャリスト動きパラメータと別の候補の第2の参照ピクチャリスト動きパラメータとを組み合わせることで、結合双方向予測候補を生成する。これら2つのタプルが異なる動き仮説を提供する場合、これらのタプルは、新しい双方向予測候補を形成する。一例として、図8は、オリジナルリスト(左側)における、mvL0およびrefIdxL0、またはmvL1およびrefIdxL1を有する2つの候補を用いて、最終リスト(右側)に加えられる結合双方向予測マージ候補を生成する場合を示す。これらの追加のマージ候補を生成するために考慮される組み合わせについては、様々な規則が存在する。
符号化処理を高速化するために、動き推定を並列に行うことができ、それによって、所与の領域内のすべての予測ユニットの動きベクトルを同時に導出する。1つの予測ユニットは、その関連する動き推定が完了するまで、隣接するPUから動きパラメータを導出することができないので、空間的近傍からのマージ候補の導出は、並列処理に干渉する可能性がある。符号化効率と処理待ち時間との間のトレードオフを緩和するために、HEVCは、動き推定領域(MER:Motion Estimation Region)を規定し、そのサイズは、「log2_parallel_merge_level_minus2」構文要素を使用してピクチャパラメータセットにおいて信号通知される。1つのMERを規定するとき、同じ領域にあるマージ候補は利用不可能であるとしてマークされ、それゆえにリスト構築においては考慮されない。
AMVPは、動きベクトルと近傍のPUとの間の空間的-時間的相関を利用し、これを動きパラメータの明確な伝送に用いる。各参照ピクチャリストに対し、まず、左側、上側の時間的に近傍のPU位置の可用性をチェックし、冗長な候補を取り除き、ゼロベクトルを加えることで、候補リストの長さを一定にすることで、動きベクトル候補リストを構築する。次いで、エンコーダは、候補リストから最良の予測子を選択し、選択された候補を示す対応するインデックスを送信することができる。マージインデックスの信号通知と同様に、最良の動きベクトル候補のインデックスは、短縮された単項を使用して符号化される。この場合に符号化対象の最大値は2である(図9参照)。以下の章では、動きベクトル予測候補の導出処理の詳細を説明する。
図9は、動きベクトル予測候補の導出処理をまとめている。
空間的動きベクトル候補の導出において、図3に示したような位置にあるPUから導出された5つの可能性のある候補のうち、動きマージと同じ位置にあるものを最大2つの候補を考慮する。A0、A1、スケーリングされたA0、スケーリングされたA1として規定される。現在のPUの上側のための導出の順序は、B0、B1、B2、スケーリングされたB0、スケーリングされたB1、スケーリングされたB2として規定される。辺ごとに、動きベクトル候補として使用できる4つのケースがあり、すなわち空間的スケーリングに関連付けられていない2つのケースと、空間的スケーリングを使用する2つのケースとがある。4つの異なる場合をまとめると、以下のようになる。
● 空間スケーリングなし
-(1)同じ参照ピクチャリスト、および同じ参照ピクチャインデックス(同じPOC)
-(2)異なる参照ピクチャリストであるが、同じ参照ピクチャ(同じPOC)
● 空間スケーリング
-(3)同じ参照ピクチャリストであるが、異なる参照ピクチャ(異なるPOC)
-(4)異なる参照ピクチャリスト、および異なる参照ピクチャ(異なるPOC)
参照ピクチャインデックスを導出する以外は、時間的マージ候補を導出するための処理は、すべて、空間的動きベクトル候補を導出するための処理と同じである(図7参照)。参照ピクチャインデックスはデコーダに信号通知される。
VVCにおいて、通常のインターモードの場合、MVDは1/4輝度サンプル、整数輝度サンプル又は4つの輝度サンプルの単位で符号化できる。MVD分解能は符号化ユニット(CU)レベルで制御され、MVD解像度フラグは、少なくとも1つのノンゼロMVDモジュールを有する各CUに対して条件付きで信号通知される。
輝度補間フィルタリングの場合、表1に示すように、1/16画素の精度のサンプルに対して8タップの分離可能な補間フィルタを用いる。
JVET-N0309において、代替の1/2画素補間フィルタが提案されている。
非アフィン非マージインター符号化CUのための追加のAMVRモードが提案され、このモードは、1/2画素精度で動きベクトル差を信号通知することを可能にする。現在のVVC草案の既存のAMVRスキームは、以下のようにして簡単に拡張される。構文要素amvr_flagの直後に、amvr_flag==1の場合、新しいコンテキストモデル化されたバイナリ構文要素hpel_amvr_flagがあり、これは、hpel_amvr_flag==1の場合、新しい1/2画素AMVRモードの使用を示す。そうでない場合、すなわちhpel_amvr_flag==0である場合、現在のVVC草案におけるように、フル画素と4画素AMVRモードとの間の選択は、構文要素amvr_precision_flagによって示される。
1/2画素動きベクトル精度を使用する非アフィン非マージインター符号化CU(すなわち、1/2画素AMVRモード)の場合、新しい構文要素if_idxの値に基づいて、HEVC/VVC1/2画素輝度補間フィルタと1つ以上の代替1/2画素補間とを切り替える。構文要素if_idxは、1/2画素AMVRモードの場合にのみ信号通知される。空間的マージ候補を用いたスキップ/マージモードの場合、構文要素if_idxの値は近傍のブロックから継承される。
このテストケースにおいて、通常のHEVC/VVC1/2画素補間フィルタの代替えとして、1つの6タップ補間フィルタが存在する。次の表は、構文要素if_idxの値と選択された1/2画素輝度補間フィルタとの間のマッピングを示す。
このテストケースでは、通常のHEVC/VVC1/2画素補間フィルタの代替として、2つの8タップ補間フィルタがある。次の表は、構文要素if_idxの値と選択された1/2画素輝度補間フィルタとの間のマッピングを示す。
従来の双方向予測において、L0およびL1からの予測子を平均し、均等重み0.5を使用して最終予測子を生成する。予測子生成式は、式(3)に示される。
PTraditionalBiPred=(PL0+PL1+RoundingOffset)>>shiftNum, (1)
式(3)において、従来の双予測のための最終予測子をPTraditionalBiPredisすると、PL0およびPL1は、それぞれL0およびL1からの予測子であり、丸めオフセットおよびシフト数は、最終予測子を正規化するために使用される。
PGBi=((1-w1)*PL0+w1*PL1+RoundingOffsetGBi)>>shiftNumGBi, (2)
式(4)において、PGBiはGBiの最終予測子である。(1-w1)およびw1は、それぞれL0およびL1の予測子に適用される選択されたGBI重みである。RoundingOffsetGBiおよびseftNumGBiは、GBiにおける最終予測子を正規化するために使用する。
マージモードに加え、暗黙的に導出された動き情報を現在のCUの予測サンプル生成に直接使用する場合、VVCに動きベクトル差を有するマージモード(MMVD)を導入する。スキップフラグおよびマージフラグを送信した直後に、MMVDフラグを信号通知して、MMVDモードをCUに使用するかどうかを指定する。
代替の1/2画素補間フィルタは、MMVDモードで導出されたMVが1/2画素精度でなくても、動きベクトル差(MMVD)モードでマージして継承されてもよく、これは妥当ではない。
以下の実施形態の詳細は、一般的な概念を説明するための例であると考えられるべきである。これらの実施形態は狭い意味で解釈されるべきではない。さらに、これらの実施形態は、任意の方法で組み合わせることができる。
1.Nが2に等しくない異なるNに対して、代替の1/N個の画素補間フィルタを使用してもよい。
a.一例において、Nは、4、16等に等しくてもよい。
b.一例において、1/N画素の補間フィルタのインデックスは、AMVRモードで信号通知されてもよい。
i.さらに、代替的に、1/N画素のMV/MVD精度がブロックによって選択された場合にのみ、1/N画素の補間フィルタのインデックスを信号通知してもよい。
c.一例において、代替の1/N画素補間フィルタは、マージモードおよび/またはMMVDモードで継承されなくてもよい。
i.さらに、代替的に、デフォルトの1/N画素補間フィルタのみをマージモードおよび/またはMMVDモードで使用してもよい。
d.一例において、代替の1/N画素補間フィルタは、マージモードで継承されてもよい。
e.一例において、代替の1/N画素補間フィルタは、MMVDモードで継承されてもよい。
i.一例において、代替の1/N画素補間フィルタは、最終的に導出されたMVが1/N画素の精度である、すなわち、MV成分がより微細なMV精度でない場合、MMVDモードで継承されてもよい。
ii.一例において、代替の1/N画素補間フィルタは、最終的に導出されたMVのK(K≧1)個のMV成分が1/N画素精度である場合、MMVDモードで継承されてもよい。
f.一例において、代替の1/N画素補間フィルタは、MMVDモードおよび/またはマージモードで継承されてもよいが、代替の1/N画素補間フィルタは、動き補償にのみ使用される。代替の1/N画素補間フィルタのインデックスは、ブロックのために記憶されなくてもよく、後続の符号化ブロックによって使用されなくてもよい。
2.補間フィルタの指示(例えば、デフォルトの1/2画素補間フィルタ、代替の1/2画素補間フィルタ)は、動きベクトル、参照インデックス等の他の動き情報とともに記憶されてもよい。
a.一例において、1つの符号化/復号化対象のブロックが、異なる区域(例えば、異なるCTU行、異なるVPDU)に位置する第2のブロックにアクセスする場合、第2のブロックに関連付けられた内挿フィルタを、現在のブロックの符号化/復号化で使用することは許可されない。
3.代替の1/2画素補間フィルタは、マージモードおよび/またはMMVDモードで継承されなくてもよい。
a.一例において、代替の1/2画素補間フィルタは、MMVDモードで継承されなくてもよい。
i.さらに、代替的に、VVCにおけるデフォルトの1/2画素補間フィルタは、常にMMVDモードに使用してもよい。
ii.代替的に、代替の1/2画素補間フィルタは、MMVDモードで継承されてもよい。すなわち、MMVDモードの場合、ベースマージ候補に関連付けられた代替1/2画素補間フィルタを継承することができる。
b.一例において、代替の1/2画素補間フィルタは、特定の条件下においてMMVDモードで継承されてもよい。
i.一例において、代替の1/2画素補間フィルタは、最終的に導出されたMVが1/2画素精度である、すなわち、1/4画素精度、1/16画素精度のようなより微細なMV精度のMV成分がない場合に継承されてもよい。
ii.一例において、代替の1/2画素補間フィルタは、最終的に導出されたMVのK(K≧1)個のMV成分が1/2画素精度である場合、MMVDモードで継承されてもよい。
iii.一例において、MMVDにおいて選択された距離(例えば、表3に定義される距離)がX画素精度であるか、またはX画素より粗い精度である(例えば、Xが1/2であり、1画素、2画素、4画素等がX画素より粗い)場合、代替の1/2画素補間フィルタを継承してもよい。
iv.一例において、MMVDにおいて選択された距離(例えば、表3に定義される距離)がX画素精度であるか、またはX画素より細かい精度である(例えば、Xが1/4、1/16画素であり、X画素よりも細かい)場合、代替の1/2画素補間フィルタを継承しなくてもよい。
v.MMVDにおいて代替の1/2画素補間フィルタを使用しない場合、代替の1/2画素補間フィルタの情報は、ブロックのために記憶されず、後続の符号化ブロックによって使用されなくてもよい。
c.一例において、代替の1/2画素補間フィルタは、MMVDモードおよび/またはマージモードで継承されてもよいが、代替の1/2画素補間フィルタは、動き補償にのみ使用される。代替の1/2画素補間フィルタの代わりに、デフォルトの1/2画素補間フィルタのインデックスをブロックに対して記憶してもよく、後続の符号化ブロックによって使用してもよい。
d.上記方法は、1/N画素の精度のために複数の補間フィルタを適用することができる他の場合にも適用可能である。
4.MV/MVD精度情報は、AMVPモードおよび/またはアフィンインターモードで符号化されたCU/PU/ブロックのために記憶されてもよく、マージモードおよび/またはアフィンマージモードで符号化されたCU/PU/ブロックによって継承されてもよい。
a.一例において、空間的に隣接する(隣接または非隣接)ブロックから導出された候補に対して、関連付けられた隣接ブロックのMV/MVD精度を継承してもよい。
b.一例において、ペアワイズマージ候補に対して、2つの関連する空間マージ候補が同じMV/MVD精度を有する場合、このようなMV/MVD精度をペアワイズマージ候補に割り当ててもよく、あるいは、固定MV/MVD精度(例えば、1/4画素または1/16画素)を割り当ててもよい。
c.一例において、固定MV/MVD精度(例えば、1/4画素または1/16画素)を時間マージ候補に割り当ててもよい。
d.一例において、MV/MVD精度は、履歴に基づく動きベクトル予測(HMVP)テーブルに記憶されてもよく、HMVPマージ候補によって継承されてもよい。
e.一例において、ベースマージ候補のMV/MVD精度は、MMVDモードで符号化されたCU/PU/ブロックによって継承されてもよい。
f.一例において、継承されたMV/MVD精度は、後続のブロックのMV/MVD精度を予測するために使用され得る。
g.一例において、マージ符号化ブロックのMVは、継承されたMV/MVD精度に丸められてもよい。
5.MMVDにおいてどの距離テーブルを使用するかは、ベースマージ候補のMV/MVD精度に依存してもよい。
a.一例において、ベースマージ候補のMV/MVDが1/N画素精度である場合、MMVDに使用される距離は、1/N画素精度であるか、または1/N画素よりも粗い精度であるべきである。
i.例えば、N=2である場合、MMVDにおける距離は、1/2画素、1画素、2画素等の精度のみであってもよい。
b.1つの例において、分数距離を含む距離テーブル(表3に定義される)(例えば、slice_fpel_mmvd_enabled_flagが0である場合に定義される距離テーブル)は、ベースマージ候補のMV/MVD精度に従って修正されてもよい。
i.例えば、ベースマージ候補のMV/MVD精度が1/N画素であり、距離テーブルの最も細かいMVD精度が1/M画素(例えば、M=4)である場合、距離テーブルにおけるすべての距離にM/Nを乗算してもよい。
6.代替の1/2画素補間フィルタを選択するCU/PU/ブロック(例えば、マージモードで符号化される)の場合、DMVRで導出されたMVDがX画素(例えば、X=1/2)より細かい場合、代替の1/2画素補間フィルタの情報は、CU/PU/ブロックのために記憶されなくてもよく、以下のブロックでは使用されなくてもよい。
a.一例において、DMVRにおいて導出されたサブブロックのMVD精度に基づいて、サブブロックレベルでDMVRを行う場合、異なるサブブロックごとに代替の1/2画素補間フィルタの情報を記憶するか否かを独立して判定してもよい。
b.一例において、導出されたMVDが、サブブロック/ブロックの少なくともN(例えば、N=1)個の場合、X画素よりも細かい精度を有する場合、代替的な1/2画素補間フィルタの情報を記憶せず、後続のブロックに用いられなくてもよい。
7.補間フィルタ情報は、履歴に基づく動きベクトル予測(HMVP)テーブルに記憶されてもよく、HMVPマージ候補によって継承されてもよい。
a.一例において、HMVPルックアップテーブルに新しい候補を挿入するとき、補間フィルタ情報を考慮することができる。例えば、同じ動き情報であるが、補間フィルタ情報が異なる2つの候補を、2つの異なる候補と見なすことができる。
b.一例において、HMVPルックアップテーブルに新しい候補を挿入するとき、同じ動き情報を有するが、補間フィルタ情報が異なる2つの候補を同じ候補と見なすことができる。
8.マージ候補リストにマージ候補を挿入する場合、プルーニング処理において補間フィルタ情報を考慮してもよい。
a.一例において、補間フィルタが異なる2つのマージ候補を、2つの異なるマージ候補と見なすことができる。
b.一例において、HMVPマージ候補をマージリストに挿入するとき、プルーニング処理において補間フィルタ情報を考慮してもよい。
c.一例において、HMVPマージ候補をマージリストに挿入するとき、プルーニング処理において補間フィルタ情報を考慮しなくてもよい。
9.なお、ペアワイズマージ候補および/または結合マージ候補および/またはゼロ動きベクトル候補および/または他のデフォルト候補を生成する場合、常にデフォルト補間フィルタを使用する代わりに、補間フィルタ情報を考慮してもよい。
a.一例において、両方の候補(ペアワイズマージ候補又は/および結合マージ候補の生成に関与する)が同じ代替補間フィルタを使用する場合、このような補間フィルタは、ペアワイズマージ候補又は/および結合マージ候補において継承されてもよい。
b.一例において、2つの候補(ペアワイズマージ候補又は/および結合マージ候補の生成に関与する)のうちの1つがデフォルト補間フィルタを用いない場合、その補間フィルタをペアワイズマージ候補又は/および結合マージ候補に継承してもよい。
c.一例において、2つの候補(結合マージ候補の生成に関与する)のうちの1つがデフォルトの補間フィルタを用いない場合、その補間フィルタを結合マージ候補に継承してもよい。しかしながら、このような補間フィルタは、対応する予測方向にのみ使用してもよい。
d.一例において、2つの候補(結合マージ候補の生成に関与する)が異なる補間フィルタを用いる場合、それらの補間フィルタを両方とも結合マージ候補において継承してもよい。この場合、異なる予測方向に対して異なる補間フィルタを使用してもよい。
e.一例において、K(K≧0)個以下のペアワイズマージ候補又は/および結合されたマージ候補は、代替補間フィルタを使用してもよい。
f.一例において、デフォルト補間フィルタは、ペアワイズマージ候補又は/および結合マージ候補に対して常に使用される。
10.現在のブロックをIBCモードで符号化する場合、1/2画素の動きベクトル/動きベクトル差精度を使用できないようにすることが提案されている。
a.さらに、代替的に、1/2画素MV/MVD精度の使用の指示を信号通知する必要がない。
b.一例において、現在のブロックがIBCモードで符号化される場合、代替の1/2画素補間フィルタは、常に無効にされる。
c.さらに、代替的に、1/2画素補間フィルタの指示を信号通知する必要がない。
d.一例において、「現在のブロックをIBCモードで符号化する」の条件は、「現在のブロックを1つのモードで符号化する」に置き換えてもよい。このようなモードは、三角形モード、マージモード等として定義してもよい。
11.amvr_precision_idxおよび/またはhpel_if_idxを符号化する場合、第1のビンのみをコンテキスト符号化してもよい。
a.さらに、代替的に、他のビンをバイパス符号化してもよい。
b.一例において、amvr_precision_idxの第1のビンを、バイパス符号化してもよい。
c.一例において、hpel_if_idxの第1のビンは、バイパス符号化してもよい。
d.一例において、1つのコンテキストのみが、amvr_precision_idxの第1のビンを符号化するために使用してもよい。
e.一例において、1つのコンテキストのみが、hpel_if_idxの第1のビンを符号化するために使用してもよい。
f.一例において、amvr_precision_idxのすべてのビンは、同じコンテキストを共有してもよい。
g.一例において、hpel_if_idxのすべてのビンは、同じコンテキストを共有してもよい。
12.代替補間フィルタを使用する場合、一部の符号化ツールは許可されない場合がある。
a.一例において、代替補間フィルタを使用する場合、双方向オプティカルフロー(BDOF)は許可されない場合もある。
b.一例において、代替補間フィルタを使用する場合、DMVR又は/およびDMVDは許可されない場合もある。
c.一例において、代替補間フィルタを使用する場合、インター・イントラ結合予測(CIIP)は許可されない場合もある。
i.一例において、マージ候補が代替補間フィルタを継承する場合、CIIPフラグをスキップし、偽であると推論してもよい。
ii.代替的に、CIIPフラグが真である場合、デフォルトの補間フィルタを常に使用してもよい。
d.一例において、代替補間フィルタを使用する場合、SMVD(対称動きベクトル差)は許可されない場合もある。
i.一例において、SMVDを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ii.代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、SMVDに関する構文要素は信号通知されなくてもよく、SMVDモードは使用されない。
e.一例において、代替補間フィルタを使用する場合、SBT(サブブロック変換)は許可されない場合もある。
i.一例において、SBTを用いる場合、デフォルトの補間フィルタが常に使用され、代替補間フィルタに関する構文要素は信号通知されない。
ii.代替的に、代替補間フィルタに関する構文要素が、代替補間フィルタを使用することを示す場合、SBTに関する構文要素は信号通知されなくてもよく、SBTは使用されない。
f.一例において、代替補間フィルタを使用する場合、三角予測は許可されない場合もある。
i.一例において、補間フィルタ情報は、三角予測において継承されず、デフォルトの補間フィルタのみが使用してもよい。
g.代替的に、代替補間フィルタを使用する場合、三角予測は許可される場合もある。
i.一例において、補間フィルタ情報は、三角予測において継承されてもよい。
h.代替的に、上述した符号化ツールの場合、それが有効にされていれば、代替の1/2画素補間フィルタを無効化することができる。
13.フィルタは、N画素精度MVに適用されてもよい。
a.一例において、Nは、1、2又は4等に等しくてもよい。
b.一例において、このフィルタは、ローパスフィルタであってもよい。
c.一例において、このフィルタは、1-dフィルタであってもよい。
i.例えば、このフィルタは、1次元水平フィルタであってもよい。
ii.例えば、このフィルタは、1-d垂直フィルタであってもよい。
d.一例において、このようなフィルタが使用されているかどうかを示すように、フラグを信号通知してもよい。
i.さらに、代替的に、このようなフラグは、ブロックに対してN-pel MVD精度(AMVRモードで信号伝達される)を使用する場合にのみ信号伝達されてもよい。
14.GBIモードにおける通常のインターモードおよびアフィンモードのために、異なる重み係数セットを使用してもよい。
a.一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、SPS/タイルグループヘッダ/スライスヘッダ/VPS/PPS等において信号通知されてもよい。
b.一例において、通常のインターモードおよびアフィンモードに使用される重み係数セットは、エンコーダおよびデコーダにおいて予め規定されてもよい。
15.代替補間フィルタをどのように定義/選択するかは、符号化モード情報に依存してもよい。
a.一例において、アフィンモードおよび非アフィンモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
b.一例において、IBCモードおよび非IBCモードの場合、代替補間フィルタの許容されるセットは異なってもよい。
16.一例において、代替の1/2画素補間フィルタがマージ符号化ブロックにおいて適用されるかまたはスキップ符号化ブロックにおいて適用されるかは、代替の1/2画素補間フィルタが隣接ブロックにおいて適用されるかどうかとは無関係である。
a.一例において、hpel_if_idxはどのブロックに対しても記憶されない。
b.一例において、代替の1/2画素補間フィルタを継承するかまたは廃棄するかは、符号化情報に依存し、かつ/または他の符号化ツールの有効/無効に依存してもよい。
17.一例において、代替の1/2画素補間フィルタが適用される(例えば、マージ符号化ブロックまたはスキップ符号化ブロックにおいて)かどうかは、現在のブロックの符号化情報に依存してもよい。
a.一例において、マージインデックスがKである場合、代替の1/2画素補間フィルタは、マージまたはスキップ符号化ブロックにおいて適用され、Kは、2、3、4、5などの整数である。
b.一例において、マージインデックスIdxがIdx%SはKと等しいことを満たす場合、代替の1/2画素補間フィルタは、マージまたはスキップ符号化ブロックに適用される。ここで、SおよびKは整数である。例えば、Sは2であり、Kは1である。
c.一例において、特定のマージ候補は、代替の1/2画素補間フィルタを適用してもよい。例えば、ペアワイズマージ候補は、代替の1/2画素補間フィルタを適用してもよい。
18.一例において、代替の1/2画素補間フィルタは、アフィンインター予測に使用される1/2画素補間フィルタと位置合わせされてもよい。
a.例えば、統合補間フィルタ係数は、[3、-11、40、40、-11、3]であってもよい。
b.例えば、統合補間フィルタ係数は、[3,9,20,20,9,3]であってもよい。
19.一例において、代替の1/2画素補間フィルタは、クロマインター予測に使用される1/2画素補間フィルタと同一であってもよい。
a.例えば、統合補間フィルタ係数は、[-4、36、36、-4]であってもよい。
20.一例において、代替の補間フィルタは、1/2画素位置のみだけでなく適用さてもよい。
a.例えば、代替の補間フィルタが明確にまたは暗黙に適用されるべきであると示された場合(例えば、hpel_if_idxが1である場合)、かつ、MVがX画素における位置を指し、ここで、Xは1/2に等しくない(例えば、1/4または3/4)場合、X画素位置のための代替の補間フィルタを適用すべきである。代替の補間フィルタは、X画素位置に対して、元の補間フィルタとは異なる少なくとも1つの係数を有するべきである。
b.一例において、上記の黒丸は、デコーダ側動きベクトル微調整(DMVR)又はMMVD若しくはSMVD又は他のデコーダ側動き導出処理の後に適用される。
c.1つの例において、参照ピクチャリサンプリング(RPR)が使用される場合、参照ピクチャが現在のピクチャと異なる解像度を有する場合、上記の黒丸が適用される。
21.代替の補間フィルタは、双予測の場合において、1つの予測方向にのみに適用されてもよい。
22.1つのブロックによって、X画素(例えば、X=1/2)の精度を有するMV成分のための代替の補間フィルタを選択する場合、X画素以外の精度を有するMV成分(例えば、1/4,1/16)が存在すると仮定すると、このようなMV成分に対して、デフォルト補間フィルタの代わりに他の代替の補間フィルタを使用してもよい。
a.一例において、ガウス補間フィルタがX画素精度のMV成分のために選択される場合、ガウス補間フィルタは、X画素以外の精度のMV成分のために使用されてもよい。
b.一例において、フラットトップ補間フィルタが、X画素精度を有するMV成分のために選択される場合、フラットトップ補間フィルタは、X画素以外の精度を有するMV成分のために使用されてもよい。
c.一例において、このような制約は、X画素精度以外の特定のMV精度にのみ適用されてもよい。
i.例えば、このような制約は、X画素よりも精密なMV成分にのみ適用されてもよい。
ii.例えば、このような制約は、X画素よりも精度が粗いMV成分にのみ適用されてもよい。
23.代替の補間フィルタを適用するかどうか、および/またはどのように適用するかは、RPRが使用されるかどうかに依存してもよい。
a.一例において、RPRが使用される場合、代替の補間フィルタを使用すべきではない。
b.一例において、現在のブロックの参照ピクチャが現在のピクチャと異なる解像度である場合、代替の補間フィルタ(例えば、1/2画素補間フィルタ)を使用すべきではない。
JVET-O2001-vEの上の黒丸3の例を示す。新しく追加された部品は、太い下線を付けたテキストで強調表示される。
この処理は、general_merge_flag[xCb][yCb]が1である場合にのみ呼び出され、ここで、(xCb,yCb)は、現在のピクチャの左上の輝度サンプルに対して現在の輝度符号化ブロックの左上のサンプルを規定する。
-現在のピクチャの左上の輝度サンプルに対する現在の輝度符号化ブロックの左上のサンプルの輝度位置(xCb,yCb)、
-輝度サンプルにおける現在の符号化ブロックの幅を規定する変数cbWidth、
-輝度サンプルにおける現在の符号化ブロックの高さを規定する変数cbHeight。
-1/16分数サンプル精度mvL0[0][0]およびmvL1[0][0]における輝度動きベクトル。
-参照インデックスrefIdxL0およびrefIdxL1、
-予測リスト利用フラグpredFlagL0[0][0]およびpredFlagL1[0][0]、
-1/2サンプル補間フィルタインデックスhpelIfIdx、
-双方向予測重みインデックスbcwIdx.
-マージ候補リストmergeCandList。
1.8.5.2.3項で規定された近傍の符号化ユニットからの空間的マージ候補の導出処理は、輝度符号化ブロックの位置(xCb,yCb)、輝度符号化ブロックの幅cbWidth、および輝度符号化ブロックの高さcbHeightを入力として呼び出され、出力は、可用性フラグavailableFlagA0,availableFlagA1,availableFlagB0,availableFlagB1およびavailableFlagB2、参照インデックスrefIdxLXA0,refIdxLXA1,refIdxLXB0,refIdxLXB1およびrefIdxLXB2,予測リスト利用フラグpredFlagLXA0,predFlagLXA1,predFlagLXB0,predFlagLXB1およびpredFlagLXB2と、動きベクトルmvLXA0,mvLXA1,mvLXB0,mvLXB1およびmvLXB2,但しXが0または1、およびthe half sample interpolation filter indices hpelIfIdxA0,hpelIfIdxA1,hpelIfIdxB0,hpelIfIdxB1,hpelIfIdxB2,、および双方向予測重みインデックスbcwIdxA0,bcwIdxA1,bcwIdxB0,bcwIdxB1,bcwIdxB2であることを示している。
2.参照インデックスrefIdxLXCol(Xが0または1)および時間的マージ候補Colの双方向予測重みインデックスbcwIdxColが0に設定され、hpelIfIdxColが0に設定される。
3.8.5.2.11項で規定された時間的輝度動きベクトル予測の導出処理は、輝度位置(xCb,yCb)、輝度符号化ブロック幅cbWidth、輝度符号化ブロック高さcbHeight、および変数refIdxL0Colを入力として呼び出され、その出力が可用性フラグavailabilityFlagL0Col、および時間的動きベクトルmvL0Colとなる。変数availableFlagCol、predFlagL0Col、およびpredFlagL1Colは、以下のように導出される。
availableFlagCol=availableFlagL0Col (8-303)
predFlagL0Col=availableFlagL0Col (8-304)
predFlagL1Col=0 (8-305)
4.slice_typeがBである場合、8.5.2.11項で規定された時間的輝度動きベクトル予測の導出処理は、輝度位置(xCb,yCb)、輝度符号化ブロック幅cbWidth、輝度符号化ブロック高さcbHeight、および変数refIdxL1Colを入力として呼び出され、その出力が可用性フラグavailabilityFlagL1Col、および時間的動きベクトルmvL1Colとなる。変数availableFlagColおよびpredFlagL1Colは、以下のように導出される。
availableFlagCol=availableFlagL0Col||availableFlagL1Col (8-306)
predFlagL1Col=availableFlagL1Col (8-307)
5.マージ候補リストmergeCandListは、以下のように構成される。
i=0
if(availableFlagA1)
mergeCandList[i++]=A1
if(availableFlagB1)
mergeCandList[i++]=B1
if(availableFlagB0)
mergeCandList[i++]=B0 (8-308)
if(availableFlagA0)
mergeCandList[i++]=A0
if(availableFlagB2)
mergeCandList[i++]=B2
if(availableFlagCol)
mergeCandList[i++]=Col
6.変数numCurrMergeCand、およびnumOrigMergeCandは、mergeCandListにおけるマージ候補の数に等しく設定される。
7.numCurrMergeCandが(MaxNumMergeCand-1)よりも小さく、かつNumHmvpCandが0よりも大きい場合、以下が適用される。
- 8.5.2.6項で規定されるような履歴に基づくマージ候補の導出処理は、mergeCandListおよびnumCurrMergeCandを入力として呼び出され、morgeCandListおよびnumCurrMergeCandを出力として修正される。
- OrigMergeCandは、numCurrMergeCandに等しく設定される。
8.numCurrMergeCandがMaxNumMergeCandより小さく、かつ1より大きい場合、以下が適用される。
- 8.5.2.4項で規定されている対の平均マージ候補の導出処理は、mergeCandList、参照インデックスrefIdxL0N、refIdxL1N、予測リスト利用フラグpredFlagL0N、preDFlagL1N、動きベクトルmvL0N、mlvL1N、およびmergeCandListにおけるすべての候補Nの1/2サンプル補間フィルタインデックスhpelIfIdxN、およびnumCurrMergeCandを入力として呼び出され、出力は、mergeCandList、numCurrMergeCand、参照インデックスrefIdxL0avgCandおよびrefIdxL1avgCand、予測リスト利用フラグpredFlagL0avgCandおよびpredFlagL1avgCand、および、mergeCandListに追加される候補avgCandの動きベクトルmvL0avgCandおよびmvL1avgCandに割り当てられる。mergeCandListに追加される候補avgCandの双方向予測重みインデックスbcwIdxは、0に等しく設定される。
- OrigMergeCandは、numCurrMergeCandに等しく設定される。
9.8.5.2. 5項で規定されているゼロ動きベクトルマージ候補の導出処理は、mergeCandList、参照インデックスrefIdxL0NおよびrefIdxL1N、予測リスト利用フラグpredFlagL0NおよびpredFlagL1N、mergeCandListの各候補Nの動きベクトルmvL0NおよびmvL1N、numCurrMergeCandを入力として呼び出され、出力は、mergeCandList、numCurrMergeCand、参照インデックスrefIdxL0zeroCandmおよびrefIdxL1zeroCandm、予測リスト利用フラグpredFlagL0zeroCandmおよびpredFlagL1zeroCandm、およびmergeCandListに追加されるすべての新しい候補zeroCandmの動きベクトルmvL0zeroCandmおよびmvL1zeroCandmに割り当てられる。mergeCandListに追加されるすべての新しい候補zeroCandmの1/2サンプル補間フィルタインデックスhpelIfIdxは、0に設定される。mergeCandListに追加されるすべての新しい候補zeroCandmの双方向予測重みインデックスbcwIdxは、0に等しく設定される。追加される候補の数numZeroMergeCandは、(numCurrMergeCand-numOrigMergeCand)に等しく設定される。numZeroMergeCandが0より大きい場合、mは0からnumZeroMergeCand-1(両端を含む)までの範囲になる。
10.マージ候補リストmergeCandList(N=mergeCandList[merge_idx[xCb][yCb])における位置merge_idx[xCb][yCb]の候補をNとし、Xを0または1に置き換えることにより、以下の割り当てを行う。
refIdxLX=refIdxLXN (8-309)
predFlagLX[0][0]=predFlagLXN (8-310)
mvLX[0][0][0]=mvLXN[0] (8-311)
mvLX[0][0][1]=mvLXN[1] (8-312)
hpelIfIdx=hpelIfIdxN (8-313)
bcwIdx=bcwIdxN (8-314)
11.mmvd_merge_flag[xCb][yCb]が1と等しい場合、以下が適用される。
- 8.5.2.7で規定されるようなマージ動きベクトル差の導出処理が、輝度位置(xCb,yCb)、参照インデックスrefIdxL0、refIdxL1、および予測リスト利用フラグpredFlagL0[0][0]およびpredFlagL1[0][0]を入力として、また、動きベクトル差mMvdL0、mMvdL1を出力として呼び出される。
- 動きベクトル差mMvdLXは、Xが0および1である場合、マージ動きベクトルmvLXに以下のように加算される。
mvLX[0][0][0]+=mMvdLX[0] (8-315)
mvLX[0][0][1]+=mMvdLX[1] (8-316)
mvLX[0][0][0]=Clip3(-217,217-1,mvLX[0][0][0]) (8-317)
mvLX[0][0][1]=Clip3(-217,217-1,mvLX[0][0][1]) (8-318)
図11Aは、映像処理装置1100のブロック図である。装置1100は、本明細書に記載の方法の1つ以上を実装するために使用してもよい。装置1100は、スマートフォン、タブレット、コンピュータ、IoT(モノのインターネット)受信機等により実施されてもよい。装1100は、1つ以上の処理装1102と、1つ以上のメモリ1104と、映像処理ハードウェ1106と、を含んでもよい。処理装置(単数または複数1102は、本明細書に記載される1つ以上の方法を実装するように構成されてもよい。メモリ(単数または複数)1104は、本明細書で説明される方法および技術を実装するために使用されるデータおよびコードを記憶するために使用してもよい。映像処理ハードウェア1106を使用して、ハードウェア回路において、本明細書に記載されるいくつかの技術を実装してもよく、一部又は全部が処理装置1102の一部(例えば、グラフィック処理装置コアGPU又は他の信号処理回路)であってもよい。
別の映像ブロックの動き情報が現在の映像ブロックの1つの動きセットと同じであることを検出すると、この単一の動き情報のセットを、別の映像ブロックの動き情報を挿入せずにHMVPテーブルに挿入することを含む、方法。
別の映像ブロックの動き情報が現在の映像ブロックの1つの動きセットと同じであることを検出すると、HMVPテーブルに、現在の映像ブロックの1つの動き情報セットと別の映像ブロックの動き情報を挿入することを含む、方法。
この判定することに基づいた前記現在の映像ブロックおよび符号化表現に基づいて、変換を行うこと(1424)と、を含み、
前記変換は、1/2画素補間フィルタがデフォルトの1/2画素補間フィルタとは異なる代替の1/2画素補間フィルタであるという第1の条件を定義する第1の規則と、前記代替の1/2画素補間フィルタを継承するかどうかについての第2の条件を定義する第2の規則とに従って選択される前記1/2画素補間フィルタを使用して算出された前記現在の映像ブロックのための予測ブロックを使用して行われる、映像処理方法(例えば、図14Bに示す方法1420)。
本願は、2019年8月20日出願の国際特許出願第PCT/CN2019/101541号の優先権と利益を主張する、2020年8月20日出願の国際特許出願第PCT/CN2020/110147号の国内段階である。上記出願の開示全体は、本明細書の開示の一部として参照により援用される。
Claims (70)
- 映像の現在のピクチャの現在の映像ブロックと前記映像の符号化表現との変換のために、代替の補間フィルタの適用可能性を判定することと、ここで前記代替の補間フィルタの前記適用可能性は、前記変換において前記代替の補間フィルタを適用するかどうかを示し、
この判定することに基づいて前記変換を行うことと、を含む映像処理方法であって、
前記代替の補間フィルタの前記適用可能性は、前記現在のピクチャの参照ピクチャをリサンプリングして前記変換を行う参照ピクチャリサンプリングが使用されるかどうかに基づいて判定される、映像処理方法。 - 前記参照ピクチャのリサンプリングを使用することによって、前記代替の補間フィルタを適用しない、請求項1に記載の方法。
- 前記参照ピクチャは、前記現在のピクチャの解像度と異なる解像度を有する、請求項2に記載の方法。
- 前記判定することが、前記代替の補間フィルタを適用しないと判定した場合、デフォルト補間フィルタが適用される、請求項1に記載の方法。
- 前記デフォルト補間フィルタは、フィルタ係数[-1,4,-11,40,40,-11,4,-1]を有する8タップフィルタに対応する、請求項4に記載の方法。
- 前記代替の補間フィルタは、フィルタ係数[3,9,20,20,9,3]を有する6タップフィルタに対応する、請求項1~5のいずれかに記載の方法。
- 前記代替の補間フィルタは、前記現在の映像ブロックの予測に使用される1/2画素補間フィルタである、請求項1~6のいずれかに記載の方法。
- 前記代替の補間フィルタを使用する場合、前記現在の映像ブロックは、1/2画素の位置を指す少なくとも1つの動きベクトルで符号化される、請求項1~7のいずれかに記載の方法。
- 前記現在の映像ブロックは、前記代替の補間フィルタが使用される場合、水平1/2画素位置または垂直1/2画素位置、または水平および垂直1/2画素位置を指す少なくとも1つの動きベクトルで符号化される、請求項1~8のいずれかに記載の方法。
- 映像の現在の映像ブロックを、動き候補と開始点との距離に関する情報を提供する動きベクトル表現を含む動きベクトル差を有するマージモードマージモード(MMVD)として表現するために使用される符号化モードを判定することと、
この判定することに基づいて、前記現在の映像ブロックおよび符号化表現に基づいて、変換を行うことと、を含む映像処理方法であって、
前記変換は、1/2画素補間フィルタがデフォルトの1/2画素補間フィルタとは異なる代替の1/2画素補間フィルタであるという第1の条件を定義する第1の規則と、前記代替の1/2画素補間フィルタを継承するかどうかについての第2の条件を定義する第2の規則とに従って選択される前記1/2画素補間フィルタを使用して算出された前記現在の映像ブロックのための予測ブロックを使用して行われる、映像処理方法。 - 前記第2の規則は、前記距離がX画素精度またはX画素精度より粗い精度のいずれかを有する場合、前記代替の1/2画素補間フィルタを継承することを規定する、請求項10に記載の方法。
- Xは1/2であり、前記より粗い精度は1、2、または4である、請求項11に記載の方法。
- 前記第2の規則は、前記距離がX画素精度またはX画素精度より細かい精度のいずれかを有する場合、前記代替の1/2画素補間フィルタを継承しないことを規定する、請求項10に記載の方法。
- Xは1/4であり、前記より細かい精度は1/16である、請求項13に記載の方法。
- 映像の現在の映像領域で使用される符号化モードを判定することと、前記符号化モードに基づいて、前記現在の映像領域に対する動きベクトル又は動きベクトル差分値を表すために使用される精度についての判定を行うことと、前記現在の映像ブロックと前記映像の符号化表現との変換を行うことと、を含む、映像処理方法。
- 前記判定を行うことは、前記精度を継承するかどうかを判定することを含む、請求項15に記載の方法。
- 前記精度が継承されない場合、この方法は、前記精度を記憶することをさらに含む、請求項15に記載の方法。
- 前記精度が継承されるとの前記判定によって、前記変換は、前記精度を直接に信号通知することなく、前記現在の映像領域を前記符号化表現に符号化することを含む、請求項15に記載の方法。
- 前記精度が継承されないとの前記判定によって、前記変換は、前記精度を信号通知することにより、前記現在の映像領域を前記符号化表現に符号化することを含む、請求項15に記載の方法。
- 前記映像領域は、映像ブロック、符号化ユニット、または予測ユニットに対応する、請求項15に記載の方法。
- 前記映像領域は、符号化ユニットに対応する、請求項15に記載の方法。
- 前記映像領域は、予測ユニットに対応する、請求項15に記載の方法。
- 前記符号化モードは、空間的および時間的に隣接するブロックから動き候補を導出する高度動きベクトル予測(AMVP)モード、アフィンインターモード、マージモード、および/またはアフィンマージモードに対応する、請求項15に記載の方法。
- 近傍のブロックから導出された候補に対して、前記近傍のブロックに使用される動きベクトルまたは動きベクトル差分値を表すための精度が継承される、請求項15に記載の方法。
- 同じ精度を有する2つの空間マージ候補に関連付けられたペアワイズマージ候補に対して、前記ペアワイズマージ候補に同じ精度を割り当て、そうでない場合、固定動き精度情報を前記ペアワイズマージ候補に割り当てる、請求項15に記載の方法。
- 時間マージ候補に対して、固定精度を割り当てる、請求項15に記載の方法。
- 前記現在の映像領域を符号化すること、または前記復号化された表現を生成することの前に、少なくとも1つの履歴に基づく動きベクトル予測(HMVP)テーブルを維持することをさらに含み、前記HMVPテーブルは、1つ以上の前回処理されたブロックの動き情報に対応する1つ以上のエントリを含み、前記精度は前記HMVPテーブルに記憶され、HMVPマージ候補によって継承される、請求項15に記載の方法。
- 動きベクトル差で動き情報を更新する、動きベクトル差を有するマージモード(MMVD)で符号化された現在の映像領域に対して、ベースマージ候補の精度を継承する、請求項15に記載の方法。
- 継承したと判定されている前記精度を使用して、後続の映像領域の精度を予測する、請求項15または16に記載の方法。
- マージモードで符号化された映像ブロックの動きベクトルを前記現在の映像領域の前記精度に丸める、請求項15に記載の方法。
- 映像の現在の映像ブロックの符号化モードを、動きベクトル差を有するマージモード(MMVD)として判定することと、
前記現在の映像ブロックに関連付けられたベースマージ候補の動き精度情報に基づいて、前記現在の映像ブロックに対して、距離インデックスと、予め定義されたオフセットとの関係を規定する距離テーブルを判定することと、
前記距離テーブルを使用して、前記現在の映像ブロックと前記映像の符号化表現との変換を行うことと、を含む映像処理方法。 - 前記ベースマージ候補が1/N画素精度を有し、Nが正の整数である場合、1/N画素精度または1/N画素単位より粗い精度を有する距離を使用する、請求項31に記載の方法。
- Nは2であり、前記距離は1/2画素、1画素、または2画素である、請求項31に記載の方法。
- 前記ベースマージ候補の前記動き精度情報に基づいて、分数距離を含む距離テーブルを修正する、請求項31に記載の方法。
- 前記MMVDモードに対して前記分数距離が許容されるかどうかを示すように、フラグが信号通知される、請求項34に記載の方法。
- NおよびMが正の整数であり、前記ベースマージ候補が1/N画素精度を有し、前記距離テーブルの最も細かい動きベクトル差精度が1/M画素精度を有する場合、前記距離テーブルにおける距離にM/Nを乗算する、請求項34に記載の方法。
- 第1の映像領域のためのデコーダ側動きベクトル微調整(DMVR)計算に使用される動きベクトル差が、Xは整数分の1であるX画素解像度より細かい解像度を有し、代替の1/2画素補間フィルタを使用して判定された第1の判定を行うことと、
前記第1の判定によって、前記第1の映像領域に関連付けられた前記代替の1/2画素補間フィルタの情報を記憶せず、または後に処理される第2の映像領域には利用可能としない第2の判定を行うことと、前記第1の判定および前記第2の判定に基づいて、前記第1の映像領域および前記第2の映像領域からなる映像と、前記映像の符号化表現との変換を行うことと、を含む映像処理方法。 - 前記映像領域は、映像ブロック、符号化ユニット、または予測ユニットに対応する、請求項37に記載の方法。
- 前記第2の判定は、DMVRがサブブロックレベルで行われる場合、前記映像のサブブロックごとに行われる、請求項37に記載の方法。
- 前記動きベクトル差は、前記映像の少なくともN個のサブブロックまたはブロックのために、X画素解像度より細かい前記解像度を有する、請求項37に記載の方法。
- 規則に従って、代替の1/2画素補間フィルタが映像の現在の映像ブロックに利用可能であるかどうかを判定することと、この判定することに基づいて、前記現在の映像ブロックと前記映像の符号化表現との変換を行うことと、を含む映像処理方法であって、
前記規則は、前記現在の映像ブロックが前記符号化表現においてマージブロック又はスキップ符号化ブロックとして符号化される場合、前記判定することは、前記代替の1/2画素補間フィルタが前記現在の映像ブロックの前に符号化又は復号化された前のブロックを処理するために使用されるかどうかとは無関係であることを規定する、映像処理方法。 - 前記代替の1/2画素補間フィルタを前記変換に使用するかどうかを識別するパラメータが、前記映像のどのブロックに対しても記憶されない、請求項41に記載の方法。
- 前記代替の1/2画素補間フィルタを継承するか廃棄するかは、前記現在の映像ブロックにおいて有効または無効にされた符号化情報および/または符号化ツールに依存する、請求項41の方法。
- 規則に従って、代替の1/2画素補間フィルタが映像の現在の映像ブロックに利用可能であるかどうかを判定することと、この判定することに基づいて、前記現在の映像ブロックと前記映像の符号化表現との変換を行うことと、を含む映像処理方法であって、
前記規則は、前記現在の映像ブロックの符号化情報に基づいて、デフォルトの1/2画素補間フィルタとは異なる前記代替の1/2画素補間フィルタの適用可能性を規定する、映像処理方法。 - 前記現在の映像ブロックは、前記符号化表現において、マージブロックまたはスキップ符号化ブロックとして符号化される、請求項44に記載の方法。
- 前記符号化表現は、Kが正の整数であり、Kと等しいマージインデックスを含む場合、前記代替の1/2画素補間フィルタは、マージまたはスキップモードで符号化された前記現在の映像ブロックに適用される、請求項44に記載の方法。
- 前記符号化表現は、SおよびKが正の整数であり、Idx%SがKと等しいことを満たすマージインデックスIdxを含む場合、前記代替の1/2画素補間フィルタは、マージモードまたはスキップモードで符号化された前記現在の映像ブロックに適用される、請求項44に記載の方法。
- 前記代替の1/2画素補間フィルタは、特定のマージ候補に適用される、請求項44に記載の方法。
- 前記特定のマージ候補は、ペアワイズマージ候補に対応する、請求項48に記載の方法。
- 映像の現在の映像ブロックに対して、規則に従って代替の1/2画素補間フィルタの係数を判定することと、この判定することに基づいて、前記現在の映像ブロックと前記映像の符号化表現との変換を行うことと、を含む映像処理方法であって、
前記規則は、前記代替の1/2画素補間フィルタと特定の符号化モードで使用される1/2画素補間フィルタとの関係を規定する、映像処理方法。 - 前記規則は、前記代替の1/2画素補間フィルタを、アフィンインター予測に使用される前記1/2画素補間フィルタに位置合わせすることを規定する請求項50に記載の方法。
- 前記代替の補間フィルタは、[3、-11、40、40、-11、3]である係数セットを有する、請求項51に記載の方法。
- 前記代替の補間フィルタは、[3、9、20、20、9、3]である係数セットを有する、請求項51に記載の方法。
- 前記規則は、前記代替の1/2画素補間フィルタを、クロマインター予測に使用される前記1/2画素補間フィルタと同一であることを規定する請求項50に記載の方法。
- 前記代替の補間フィルタは、[-4,36,36,-4]である係数セットを有する、請求項54に記載の方法。
- 映像の現在の映像ブロックと前記映像の符号化表現との変換のために、規則に従って代替の1/2画素補間フィルタを適用することと、
前記現在の映像ブロックと前記映像の符号化表現との変換を行うこととを含む映像処理方法であって、
前記規則は、前記代替の補間フィルタをX画素における位置に適用することを規定し、Xは1/2以外である、映像処理方法。 - 前記代替の補間フィルタの使用が、明確にまたは暗黙に示される、請求項56に記載の方法。
- 前記代替の補間フィルタは、X画素での前記位置に割り当てられているデフォルト補間フィルタの係数とは異なる少なくとも1つの係数を有する、請求項57に記載の方法。
- 前記代替の1/2画素補間フィルタを前記適用することは、デコーダ側動きベクトル微調整(DMVR)、または動きベクトル差を有するマージモード(MMVD)、または対称動きベクトル差異(SMVD)、または他のデコーダ側動き導出処理の後に行われる、請求項56に記載の方法。
- 参照ピクチャリサンプリング(RPR)が使用され、参照ピクチャが前記現在の映像ブロックを含む現在のピクチャの解像度と異なる解像度を有する場合、前記代替の1/2画素補間フィルタを前記適用することが行われる、請求項56に記載の方法。
- 前記現在の映像ブロックが双予測を使用する場合、前記代替の1/2画素補間フィルタは、1つの予測方向にのみ適用される、請求項56~60のいずれかに記載の方法。
- X画素精度を有する第1の動きベクトル成分に対して、映像の第1の映像ブロックによって代替の補間フィルタを選択する第1の判定を行うことと、前記第1の判定によって、別の代替の補間フィルタを、Xが整数分の1であるX画素精度とは異なる精度の第2の動きベクトル成分に使用する第2の判定を行うことと、前記第1の映像ブロックと第2の映像ブロックとを含む映像と、前記映像の符号化表現との変換を行うことと、を含む映像処理方法。
- 前記代替の補間フィルタおよび前記他の代替の補間フィルタは、ガウス補間フィルタに対応する、請求項62に記載の方法。
- 前記代替の補間フィルタおよび前記他の代替の補間フィルタは、フラットトップ補間フィルタに対応する、請求項62に記載の方法。
- 前記第2の動きベクトル成分は、前記X画素精度より細かい前記精度を有する、請求項62に記載の方法。
- 前記第2の動きベクトル成分は、前記X画素精度より粗い精度を有する、請求項62に記載の方法。
- 前記変換を行うことは、前記現在の映像ブロックから前記符号化表現を生成することを含む、請求項1~66のいずれかに記載の方法。
- 前記変換を行うことは、前記符号化表現から前記現在の映像ブロックを生成することを含む、請求項1~66のいずれかに記載の方法。
- 処理装置と、命令を含む非一時的メモリとを備えた映像システムの装置であって、前記処理装置による実行時に、前記命令は、前記処理装置に請求項1~68のいずれか1項に記載の方法を実装させる装置。
- 非一時的なコンピュータ可読媒体に記憶されたコンピュータプログラム製品であって、請求項1~68のいずれか1項に記載の方法を実行するためのプログラムコードを含む、コンピュータプログラム製品。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023166357A JP2023171861A (ja) | 2019-08-20 | 2023-09-27 | 映像処理における代替の補間フィルタの選択的使用 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CNPCT/CN2019/101541 | 2019-08-20 | ||
CN2019101541 | 2019-08-20 | ||
PCT/CN2020/110147 WO2021032143A1 (en) | 2019-08-20 | 2020-08-20 | Selective use of alternative interpolation filters in video processing |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023166357A Division JP2023171861A (ja) | 2019-08-20 | 2023-09-27 | 映像処理における代替の補間フィルタの選択的使用 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022544667A true JP2022544667A (ja) | 2022-10-20 |
JP7359942B2 JP7359942B2 (ja) | 2023-10-11 |
Family
ID=74659749
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022509198A Active JP7359942B2 (ja) | 2019-08-20 | 2020-08-20 | 映像処理における代替の補間フィルタの選択的使用 |
JP2023166357A Pending JP2023171861A (ja) | 2019-08-20 | 2023-09-27 | 映像処理における代替の補間フィルタの選択的使用 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023166357A Pending JP2023171861A (ja) | 2019-08-20 | 2023-09-27 | 映像処理における代替の補間フィルタの選択的使用 |
Country Status (7)
Country | Link |
---|---|
US (2) | US11503288B2 (ja) |
EP (1) | EP3997881A4 (ja) |
JP (2) | JP7359942B2 (ja) |
KR (1) | KR102635319B1 (ja) |
CN (2) | CN114270856A (ja) |
BR (1) | BR112022002480A2 (ja) |
WO (1) | WO2021032143A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7307191B2 (ja) | 2019-04-01 | 2023-07-11 | 北京字節跳動網絡技術有限公司 | 履歴に基づく動きベクトル予測のための補間フィルタの使用 |
CN114270856A (zh) * | 2019-08-20 | 2022-04-01 | 北京字节跳动网络技术有限公司 | 视频处理中的备选插值滤波器的选择性使用 |
US20220295057A1 (en) * | 2019-09-04 | 2022-09-15 | Interdigital Vc Holdings France, Sas | Switchable interpolation filters |
CN112788345B (zh) * | 2019-11-11 | 2023-10-24 | 腾讯美国有限责任公司 | 视频数据解码方法、装置、计算机设备和存储介质 |
US20230179763A1 (en) * | 2021-12-06 | 2023-06-08 | Tencent America LLC | Interpolation Filters for Adaptive Motion Vector Difference Resolution |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160080771A1 (en) * | 2014-09-17 | 2016-03-17 | Mediatek Inc. | Motion compensation apparatus having at least one processing circuit shared by normal mode and resized reference frame mode and related motion compensation method |
Family Cites Families (74)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3724203B2 (ja) | 1998-03-10 | 2005-12-07 | ソニー株式会社 | 符号化装置および方法、並びに記録媒体 |
US8879857B2 (en) | 2005-09-27 | 2014-11-04 | Qualcomm Incorporated | Redundant data encoding methods and device |
WO2008148272A1 (en) | 2007-06-04 | 2008-12-11 | France Telecom Research & Development Beijing Company Limited | Method and apparatus for sub-pixel motion-compensated video coding |
EP2136565A1 (en) | 2008-06-19 | 2009-12-23 | Thomson Licensing | Method for determining a filter for interpolating one or more pixels of a frame, method for encoding or reconstructing a frame and method for transmitting a frame |
US8811484B2 (en) | 2008-07-07 | 2014-08-19 | Qualcomm Incorporated | Video encoding by filter selection |
US8548041B2 (en) | 2008-09-25 | 2013-10-01 | Mediatek Inc. | Adaptive filter |
US9078007B2 (en) | 2008-10-03 | 2015-07-07 | Qualcomm Incorporated | Digital video coding with interpolation filters and offsets |
US8422771B2 (en) | 2008-10-24 | 2013-04-16 | Sharp Laboratories Of America, Inc. | Methods and systems for demosaicing |
GB2469679B (en) | 2009-04-23 | 2012-05-02 | Imagination Tech Ltd | Object tracking using momentum and acceleration vectors in a motion estimation system |
WO2011003326A1 (en) | 2009-07-06 | 2011-01-13 | Mediatek Singapore Pte. Ltd. | Single pass adaptive interpolation filter |
JP2011050001A (ja) | 2009-08-28 | 2011-03-10 | Sony Corp | 画像処理装置および方法 |
US8417049B2 (en) | 2009-10-14 | 2013-04-09 | Hewlett-Packard Development Company, L.P. | Fast image resolution enhancement with de-pixeling |
US8879632B2 (en) | 2010-02-18 | 2014-11-04 | Qualcomm Incorporated | Fixed point implementation for geometric motion partitioning |
PT3301648T (pt) | 2010-04-13 | 2020-04-20 | Ge Video Compression Llc | Herança em matriz de amostras em subdivisão multitree |
CN102316317B (zh) | 2010-07-10 | 2013-04-24 | 华为技术有限公司 | 一种生成图像预测值的方法和装置 |
EP2675163A1 (en) | 2010-07-21 | 2013-12-18 | Dolby Laboratories Licensing Corporation | Reference processing using advanced motion models for video coding |
US8797414B2 (en) | 2010-12-23 | 2014-08-05 | Samsung Electronics Co., Ltd. | Digital image stabilization device |
US9049454B2 (en) | 2011-01-19 | 2015-06-02 | Google Technology Holdings Llc. | High efficiency low complexity interpolation filters |
ES2862898T3 (es) | 2011-06-30 | 2021-10-08 | Mitsubishi Electric Corp | Aparato de codificación de imágenes, aparato de decodificación de imágenes, método de codificación de imágenes y método de decodificación de imágenes |
JP5762243B2 (ja) | 2011-10-18 | 2015-08-12 | 日本電信電話株式会社 | 映像符号化方法,装置,映像復号方法,装置およびそれらのプログラム |
KR20130050149A (ko) | 2011-11-07 | 2013-05-15 | 오수미 | 인터 모드에서의 예측 블록 생성 방법 |
US10623759B2 (en) | 2012-06-13 | 2020-04-14 | Sony Corporation | Decoupling enhancements in sample adaptive offset (SAO) for high efficiency video encoder (HEVC) |
FR3000350A1 (fr) * | 2012-12-21 | 2014-06-27 | France Telecom | Procede et dispositif de transmission d'une sequence d'images, procede et dispositif de reception, programme d'ordinateur et support d'enregistrement correspondants. |
US9781416B2 (en) * | 2013-02-26 | 2017-10-03 | Qualcomm Incorporated | Neighboring block disparity vector derivation in 3D video coding |
WO2014172387A1 (en) * | 2013-04-15 | 2014-10-23 | Huawei Technologies Co., Ltd. | Method and apparatus of depth prediction mode selection |
US20150063451A1 (en) | 2013-09-05 | 2015-03-05 | Microsoft Corporation | Universal Screen Content Codec |
EP3080985B1 (en) | 2013-12-13 | 2023-08-02 | VID SCALE, Inc. | Video processing method and device for the alignment of luma and chroma using interpolation |
US9819947B2 (en) * | 2014-01-02 | 2017-11-14 | Vid Scale, Inc. | Methods, apparatus and systems for scalable video coding with mixed interlace and progressive content |
US9774881B2 (en) | 2014-01-08 | 2017-09-26 | Microsoft Technology Licensing, Llc | Representing motion vectors in an encoded bitstream |
US9942560B2 (en) | 2014-01-08 | 2018-04-10 | Microsoft Technology Licensing, Llc | Encoding screen capture data |
US10531116B2 (en) | 2014-01-09 | 2020-01-07 | Qualcomm Incorporated | Adaptive motion vector resolution signaling for video coding |
CN105874789B (zh) | 2014-01-29 | 2019-10-29 | 联发科技股份有限公司 | 利用自适应运动向量精度的方法 |
CN110225360A (zh) | 2014-04-01 | 2019-09-10 | 联发科技股份有限公司 | 视频编码中自适应内插滤波的方法 |
US9924191B2 (en) | 2014-06-26 | 2018-03-20 | Qualcomm Incorporated | Filters for advanced residual prediction in video coding |
KR20170084055A (ko) | 2014-11-06 | 2017-07-19 | 삼성전자주식회사 | 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치 |
WO2016078599A1 (en) * | 2014-11-20 | 2016-05-26 | Mediatek Inc. | Method of motion vector and block vector resolution control |
US10462480B2 (en) | 2014-12-31 | 2019-10-29 | Microsoft Technology Licensing, Llc | Computationally efficient motion estimation |
EP3304907B1 (en) | 2015-06-08 | 2022-03-23 | VID SCALE, Inc. | Intra block copy mode for screen content coding |
KR20180008445A (ko) | 2015-06-10 | 2018-01-24 | 삼성전자주식회사 | 적응적 가중치 예측을 위한 신택스 시그널링을 이용하여 영상을 부호화 또는 복호화하는 방법 및 장치 |
US11463689B2 (en) | 2015-06-18 | 2022-10-04 | Qualcomm Incorporated | Intra prediction and intra mode coding |
CN106331722B (zh) | 2015-07-03 | 2019-04-26 | 华为技术有限公司 | 图像预测方法和相关设备 |
CN108353176B (zh) | 2015-09-24 | 2022-05-03 | Lg 电子株式会社 | 在图像编译系统中的基于amvr的图像编译方法和装置 |
US10602141B2 (en) | 2015-10-16 | 2020-03-24 | Lg Electronics Inc. | Filtering method and apparatus for improving prediction in image coding system |
CN108353184B (zh) | 2015-11-05 | 2022-02-01 | 联发科技股份有限公司 | 一种视频编解码的方法及装置 |
US10602176B2 (en) | 2016-04-15 | 2020-03-24 | Google Llc | Coding interpolation filter type |
WO2018012933A1 (ko) | 2016-07-14 | 2018-01-18 | 삼성전자 주식회사 | 비디오 복호화 방법 및 그 장치 및 비디오 부호화 방법 및 그 장치 |
US10116957B2 (en) | 2016-09-15 | 2018-10-30 | Google Inc. | Dual filter type for motion compensated prediction in video coding |
US10382781B2 (en) | 2016-09-28 | 2019-08-13 | Qualcomm Incorporated | Interpolation filters for intra prediction in video coding |
US10462462B2 (en) | 2016-09-29 | 2019-10-29 | Qualcomm Incorporated | Motion vector difference coding technique for video coding |
US10341659B2 (en) | 2016-10-05 | 2019-07-02 | Qualcomm Incorporated | Systems and methods of switching interpolation filters |
KR102543752B1 (ko) | 2016-12-22 | 2023-06-14 | 주식회사 케이티 | 비디오 신호 처리 방법 및 장치 |
US20180199057A1 (en) | 2017-01-12 | 2018-07-12 | Mediatek Inc. | Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding |
US10701393B2 (en) | 2017-05-10 | 2020-06-30 | Mediatek Inc. | Method and apparatus of reordering motion vector prediction candidate set for video coding |
US20180332298A1 (en) | 2017-05-10 | 2018-11-15 | Futurewei Technologies, Inc. | Bidirectional Prediction In Video Compression |
US10904565B2 (en) | 2017-06-23 | 2021-01-26 | Qualcomm Incorporated | Memory-bandwidth-efficient design for bi-directional optical flow (BIO) |
KR20200001554A (ko) | 2018-06-27 | 2020-01-06 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
KR102542433B1 (ko) | 2018-08-10 | 2023-06-13 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 비디오 처리 방법, 비디오 처리 장치, 인코더, 디코더, 매체 및 컴퓨터 프로그램 |
US11336914B2 (en) | 2018-08-16 | 2022-05-17 | Qualcomm Incorporated | History-based candidate list with classification |
US11212550B2 (en) | 2018-09-21 | 2021-12-28 | Qualcomm Incorporated | History-based motion vector prediction for affine mode |
CN117082259A (zh) | 2018-10-10 | 2023-11-17 | 华为技术有限公司 | 帧间预测方法及装置 |
KR20210072098A (ko) | 2018-10-24 | 2021-06-16 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 현재 블록에 대한 모션 정보를 결정하는 방법, 히스토리 기반 모션 벡터 예측기 목록을 구성하고 업데이트하는 방법, 및 비 일시적 컴퓨터 판독 가능형 저장 매체, 및 비디오 인코딩/디코딩 방법 및 장치 |
WO2020125738A1 (en) | 2018-12-21 | 2020-06-25 | Huawei Technologies Co., Ltd. | An encoder, a decoder and corresponding methods using history based motion vector prediction |
US11178414B2 (en) * | 2019-02-27 | 2021-11-16 | Mediatek Inc. | Classification for multiple merge tools |
EP4358036A2 (en) | 2019-03-11 | 2024-04-24 | Huawei Technologies Co., Ltd. | Interpolation filter clipping for sub-picture motion vectors |
JP7307191B2 (ja) | 2019-04-01 | 2023-07-11 | 北京字節跳動網絡技術有限公司 | 履歴に基づく動きベクトル予測のための補間フィルタの使用 |
JP2022530240A (ja) | 2019-05-02 | 2022-06-28 | 北京字節跳動網絡技術有限公司 | 複数の参照フィルタを使用するイントラビデオコーディング |
SG11202112279WA (en) * | 2019-05-11 | 2021-12-30 | Beijing Bytedance Network Technology Co Ltd | Selective use of coding tools in video processing |
EP3954124A4 (en) * | 2019-05-12 | 2022-08-03 | Beijing Bytedance Network Technology Co., Ltd. | SIGNALING FOR RE-SAMPLING REFERENCE IMAGE |
US11184607B2 (en) * | 2019-06-13 | 2021-11-23 | Qualcomm Incorporated | Same picture order count (POC) numbering for scalability support |
US11190781B2 (en) * | 2019-06-24 | 2021-11-30 | Alibaba Group Holding Limited | Adaptive resolution change in video processing |
US11563933B2 (en) * | 2019-07-09 | 2023-01-24 | Qualcomm Incorporated | Reference picture resampling with switchable filters |
US11425414B2 (en) | 2019-08-05 | 2022-08-23 | Tencent America LLC | Method and apparatus for video coding |
CN114270856A (zh) * | 2019-08-20 | 2022-04-01 | 北京字节跳动网络技术有限公司 | 视频处理中的备选插值滤波器的选择性使用 |
US11375222B2 (en) | 2019-09-22 | 2022-06-28 | Tencent America LLC | Method and device for video encoding and decoding with interpolation filter flag being consistent with MMVD distances |
-
2020
- 2020-08-20 CN CN202080059204.6A patent/CN114270856A/zh active Pending
- 2020-08-20 CN CN202311516129.3A patent/CN117395411A/zh active Pending
- 2020-08-20 KR KR1020227004742A patent/KR102635319B1/ko active IP Right Grant
- 2020-08-20 EP EP20854091.4A patent/EP3997881A4/en active Pending
- 2020-08-20 WO PCT/CN2020/110147 patent/WO2021032143A1/en unknown
- 2020-08-20 JP JP2022509198A patent/JP7359942B2/ja active Active
- 2020-08-20 BR BR112022002480A patent/BR112022002480A2/pt unknown
-
2022
- 2022-01-04 US US17/568,471 patent/US11503288B2/en active Active
- 2022-10-31 US US17/977,582 patent/US20230076783A1/en active Pending
-
2023
- 2023-09-27 JP JP2023166357A patent/JP2023171861A/ja active Pending
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160080771A1 (en) * | 2014-09-17 | 2016-03-17 | Mediatek Inc. | Motion compensation apparatus having at least one processing circuit shared by normal mode and resized reference frame mode and related motion compensation method |
Non-Patent Citations (3)
Title |
---|
CHOI, BYEONGDOO ET AL.: "AHG8: Signaling and Filtering for Reference Picture Resampling", JVET-O0332 (VERSION 1), JPN6023006784, 26 June 2019 (2019-06-26), pages 1 - 8, ISSN: 0004996776 * |
HENKEL, ANASTASIA ET AL.: "Non-CE4: Switched Half-Pel Interpoloation Filter", JVET-N0309 (VERSION 3), JPN6023006785, 25 March 2019 (2019-03-25), pages 1 - 8, ISSN: 0004996775 * |
SAMUELSSON, J. ET AL.: "AHG8: Adaptive Resolution Change (ARC) with Downsampling", JVET-O0240 (VERSION 2), JPN6023006783, 5 July 2019 (2019-07-05), pages 1 - 10, ISSN: 0004996777 * |
Also Published As
Publication number | Publication date |
---|---|
EP3997881A1 (en) | 2022-05-18 |
WO2021032143A1 (en) | 2021-02-25 |
JP2023171861A (ja) | 2023-12-05 |
CN114270856A (zh) | 2022-04-01 |
KR102635319B1 (ko) | 2024-02-07 |
JP7359942B2 (ja) | 2023-10-11 |
US11503288B2 (en) | 2022-11-15 |
BR112022002480A2 (pt) | 2022-04-26 |
EP3997881A4 (en) | 2022-09-14 |
CN117395411A (zh) | 2024-01-12 |
KR20220043133A (ko) | 2022-04-05 |
US20230076783A1 (en) | 2023-03-09 |
US20220132111A1 (en) | 2022-04-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7307191B2 (ja) | 履歴に基づく動きベクトル予測のための補間フィルタの使用 | |
KR102628361B1 (ko) | 인터-예측을 위한 대역폭 제어 방법 | |
JP7359942B2 (ja) | 映像処理における代替の補間フィルタの選択的使用 | |
CN113615193A (zh) | Merge列表构建和其他工具之间的交互 | |
CN114175636A (zh) | 自适应参数集中的自适应环路滤波的指示 | |
CN113994682A (zh) | 具有默认参数的基于历史的运动矢量预测 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220214 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220615 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230519 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230928 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7359942 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |