JP7171770B2 - 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング - Google Patents
動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング Download PDFInfo
- Publication number
- JP7171770B2 JP7171770B2 JP2020572766A JP2020572766A JP7171770B2 JP 7171770 B2 JP7171770 B2 JP 7171770B2 JP 2020572766 A JP2020572766 A JP 2020572766A JP 2020572766 A JP2020572766 A JP 2020572766A JP 7171770 B2 JP7171770 B2 JP 7171770B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- window
- sample
- block
- integer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000013598 vector Substances 0.000 title claims description 425
- 238000000034 method Methods 0.000 claims description 86
- 238000001914 filtration Methods 0.000 claims description 78
- 238000012545 processing Methods 0.000 claims description 65
- 230000002457 bidirectional effect Effects 0.000 claims description 52
- 101100537098 Mus musculus Alyref gene Proteins 0.000 claims description 2
- 101150095908 apex1 gene Proteins 0.000 claims description 2
- 230000000875 corresponding effect Effects 0.000 description 34
- 230000006870 function Effects 0.000 description 30
- 238000010586 diagram Methods 0.000 description 23
- 238000009795 derivation Methods 0.000 description 18
- 230000011664 signaling Effects 0.000 description 18
- 238000013139 quantization Methods 0.000 description 16
- 239000000872 buffer Substances 0.000 description 15
- 230000002123 temporal effect Effects 0.000 description 12
- 238000013459 approach Methods 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 9
- 238000013461 design Methods 0.000 description 8
- 230000008901 benefit Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 241000023320 Luma <angiosperm> Species 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 101100112111 Caenorhabditis elegans cand-1 gene Proteins 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000010076 replication Effects 0.000 description 2
- 238000011524 similarity measure Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 229930091051 Arenine Natural products 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000003139 buffering effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/563—Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/521—Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/55—Motion estimation with spatial constraints, e.g. at image or region borders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/57—Motion estimation characterised by a search window with variable size or shape
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
テンプレート=関数((ブロックA,ブロックB))
直近サンプル複製。
補間フィルタリングの軸線に沿ったミラーリング。
探索空間、または
初期動きベクトル位置に配置された予測ブロックのサイズを有するブロック、または
初期動きベクトル位置、
に対するその垂直方向サイズおよび/または水平方向サイズで定義される。
少なくとも1つの初期動きベクトルを取得し、
候補動きベクトルの探索空間に基づいて、初期動きベクトルの精密化を決定して、精密化動きベクトルを取得し、前記探索空間は、初期動きベクトルによって与えられた位置(810)に配置される、
ことによって、予測ブロック(165)に対する動きベクトルを決定し、
予測ブロックと決定した動きベクトルに基づいた位置で予測ブロックによって与えられた予測子との差分(105)をエンコードして、エンコードされた差分と初期動きベクトルとを含むビットストリーム(171)を生成し、
補間フィルタを用いた補間フィルタリングを使用して、動きベクトルに従って予測子を決定し、前記補間フィルタリングは、
事前定義されたウィンドウ内の整数サンプル位置でサンプル値にアクセスし、
ウィンドウの外部に配置された整数サンプル位置で、前記ウィンドウ内の少なくとも1つのサンプルに基づく置換値によって少なくとも1つのサンプル値を置換し、
アクセスされた整数位置サンプル値および置換値を使用して、補間フィルタリングを実行する、
ように構成された処理回路(600)を備える、
エンコード装置。
精密化動きベクトルによって指定された位置で、ビットストリームから、初期動きベクトルと、予測ブロックと予測ブロックによって与えられた予測子とのエンコードされた差分とを解析し、
少なくとも1つの初期動きベクトルを取得し、
候補動きベクトルの探索空間に基づいて、初期動きベクトルの精密化を決定して、精密化動きベクトルを取得し、前記探索空間は、初期動きベクトルによって与えられた位置(810)に配置される、
ことによって、予測ブロックに対する動きベクトルを決定し、
処理回路(600)によって決定された、精密化動きベクトルによって指定された位置で、解析された差分と、予測ブロックによって与えられた予測子との合計として予測ブロックを再構築して、動きベクトルを決定する、
ように構成された処理回路を備え、
前記処理回路は、補間フィルタを用いた補間を使用して、精密化動きベクトルに従って、予測子を決定するようにさらに構成され、前記補間は、
事前定義されたウィンドウ内の整数サンプル位置でサンプル値にアクセスし、
ウィンドウの外部に配置された整数サンプル位置で、前記ウィンドウ内の少なくとも1つのサンプルに基づく置換値によって、少なくとも1つのサンプル値を置換し、
アクセスされた整数サンプル位置の値および置換値を使用して、補間を実行する、
デコード装置。
初期動きベクトル位置に配置された予測ブロックのサイズを有するブロック、
初期動きベクトル位置、および
予測子を決定するために使用される、補間フィルタの垂直方向長さおよび水平方向長さ
のうちの少なくとも1つに対する、その垂直方向サイズおよび/または水平方向サイズによって定義される、実施形態1から5のいずれか1つに記載の装置。
前記テンプレート整合または前記双方向整合が、
別の事前定義されたウィンドウ(1120)内の整数サンプル位置にあるサンプル値にアクセスし、別の事前定義されたウィンドウ(1120)が、テンプレート整合または双方向整合のためにアクセス可能な、前記探索空間と、別の整数サンプル位置とを含み、
別のウィンドウの外部に配置された整数サンプル位置で、前記別のウィンドウ内の少なくとも1つのサンプルに基づいた置換値によって少なくとも1つのサンプル値(1030)を置換し、
アクセスされた整数サンプル位置の値および置換値を使用して、テンプレート整合または双方向整合を実行する、実施形態1から8のいずれか1つに記載の装置。
補間フィルタリングが、前記アクセスされた整数サンプル位置の値と、少なくとも1つの置換値とを使用して、前記少なくとも1つの分数サンプル位置の値を取得する、実施形態9に記載の装置。
探索空間、
初期動きベクトル位置に配置された予測ブロックのサイズを有するブロック、および
初期動きベクトル位置
のうちの少なくとも1つに対する、その垂直方向サイズおよび/または水平方向サイズで定義される、実施形態9から12のいずれか1つに記載の装置。
予測ブロックのテンプレートを取得し、
前記探索空間における前記テンプレートを用いたテンプレート整合によって、初期動きベクトルの精密化を決定する
ようにさらに構成される、実施形態1から14のいずれか1つに記載の装置。
少なくとも1つの初期動きベクトルを取得するステップ(1310,1410)と、
候補動きベクトルの探索空間に基づいて、初期動きベクトルの精密化を決定して、精密化動きベクトルを取得するステップ(1320,1330,1340,1720;2115,2120,2130,2140,2150,2160)であって、前記探索空間は、初期動きベクトルによって与えられた位置に配置される、ステップ(1320,1330,1340,1720;2115,2120,2130,2140,2150,2160)と
を含む、予測ブロックに対する動きベクトルを決定するステップと、
決定された動きベクトルに基づく位置で、予測ブロックと予測ブロックによって与えられた予測子との差分をエンコードし、エンコードされた差分と初期動きベクトルとを含むビットストリームを生成するステップと、
補間フィルタを用いた補間フィルタリングを使用して、動きベクトルに従って予測子を決定するステップ(1780)であって、前記補間フィルタリングは、
事前定義されたウィンドウ内の整数サンプル位置でサンプル値にアクセスし、
ウィンドウの外部に配置された整数サンプル位置で、前記ウィンドウ内の少なくとも1つのサンプルに基づく置換値によって少なくとも1つのサンプル値を置換し、
アクセスされた整数位置サンプル値および置換値を使用して、補間フィルタリングを実行する、ステップ(1780)と
を含む、エンコード方法。
精密化動きベクトルによって指定された位置で、ビットストリームから、初期動きベクトルと、予測ブロックと予測ブロックによって与えられた予測子とのエンコードされた差分とを解析するステップと、
少なくとも1つの初期動きベクトルを取得するステップ(1310,1410)と、
候補動きベクトルの探索空間に基づいて、初期動きベクトルの精密化を決定して、精密化動きベクトルを取得するステップ(1320,1330,1340,1720;2115,2120,2130,2140,2150,2160)であって、前記探索空間は、初期動きベクトルによって与えられた位置に配置される、ステップ(1320,1330,1340,1720;2115,2120,2130,2140,2150,2160)と
を含む、予測ブロックに対する動きベクトルを決定するステップと、
動きベクトルを決定するステップによって決定された、精密化動きベクトルによって指定された位置で、解析された差分と、予測ブロックによって与えられた予測子との合計として予測ブロックを再構築するステップと、
補間フィルタを用いた補間を使用して、精密化動きベクトルに従って、予測子を決定するステップ(1780)であって、前記補間は、
事前定義されたウィンドウ内の整数サンプル位置でサンプル値にアクセスし、
ウィンドウの外部に配置された整数サンプル位置で、前記ウィンドウ内の少なくとも1つのサンプルに基づく置換値によって、少なくとも1つのサンプル値を置換し、
アクセスされた整数位置サンプルおよび置換値を使用して、補間を実行する、ステップ(1780)と
を含む、デコード方法。
初期動きベクトル位置に配置された予測ブロックのサイズを有するブロック、
初期動きベクトル位置、および
予測子を決定するために使用される、補間フィルタの垂直方向長さおよび水平方向長さ
のうちの少なくとも1つに対する、その垂直方向サイズおよび/または水平方向サイズによって定義される、実施形態17から21のいずれか1つに記載の方法。
前記テンプレート整合または前記双方向整合が、
別の事前定義されたウィンドウ内の整数サンプル位置にあるサンプル値にアクセスし、別の事前定義されたウィンドウが、テンプレート整合または双方向整合のためにアクセス可能な、前記探索空間と、別の整数サンプル位置とを含み、
別のウィンドウの外部に配置された整数サンプル位置で、前記別のウィンドウ内の少なくとも1つのサンプルに基づいた置換値によって少なくとも1つのサンプル値を置換し(1440)、
アクセスされた整数サンプル位置の値および置換値を使用して、テンプレート整合または双方向整合を実行する(1450)、実施形態17から24のいずれか1つに記載の方法。
補間フィルタリングが、前記アクセスされた整数サンプル位置の値と、少なくとも1つの置換値とを使用して、前記少なくとも1つの分数サンプル位置の値を取得する、実施形態25に記載の方法。
探索空間、
初期動きベクトル位置に配置された予測ブロックのサイズを有するブロック、および
初期動きベクトル位置
のうちの少なくとも1つに対する、その垂直方向サイズおよび/または水平方向サイズで定義される、実施形態25から28のいずれか1つに記載の方法。
予測ブロックのテンプレートを取得するステップ(1330;2130)と、
前記探索空間における前記テンプレートを用いたテンプレート整合によって、初期動きベクトルの精密化を決定するステップ(1340;2140)と
をさらに含む、実施形態17から31のいずれか1つに記載の方法。
101 ピクチャブロック
102 入力
104 残差計算
105 残差ブロック
106 変換ユニット
107 変換係数
108 量子化ユニット
109 量子化係数
110 逆量子化ユニット
111 逆量子化係数
112 逆変換ユニット
113 逆変換されたブロック
114 再構築
115 再構築されたブロック
116 バッファ
117 参照サンプル
120 ループフィルタリングユニット
121 フィルタリングされたブロック
130 デコード済みピクチャバッファ
131 デコードされたピクチャ
142 インター推定ユニット
144 インター予測ユニット
152 イントラ推定ユニット
154 イントラ予測ユニット
160 モード選択ユニット
165 予測ブロック
170 エントロピーエンコードユニット(エントロピー符号化ユニット)
171 エンコードされたピクチャデータ(エンコードされたビットストリーム)
172 出力
200 デコーダ
202 入力
204 エントロピーデコードユニット
209 量子化された残差変換係数
210 逆量子化ユニット
211 逆量子化変換係数
212 逆変換ユニット
213 逆変換されたブロック
214 再構築
215 再構築されたブロック
216 バッファ
217 参照サンプル
220 ループフィルタリングユニット
221 フィルタリングされたブロック
230 デコード済みピクチャバッファ
231 デコードされたピクチャ
232 出力
244 インター予測ユニット
254 イントラ予測ユニット
260 モード選択
265 予測ブロック
600 処理回路
610 テンプレート決定ユニット
620 動きベクトル精密化ユニット
640 内部メモリ
650 外部メモリ
810 中心点
1010 精密化されていない動きベクトルによって指し示される位置
1020 分数位置
1030 別のサンプル位置
1120 別の事前定義されたウィンドウ
Claims (24)
- ビデオ画像のブロックをコーディングするための予測子を決定するための装置であって、
前記ブロックの初期動きベクトルを取得し、
前記初期動きベクトルに基づいて、前記ブロックの精密化動きベクトルを取得し、
前記精密化動きベクトルに従って前記ブロックの予測子を決定する
ように構成された処理回路(600)を備え、
前記処理回路は、補間フィルタを用いた補間を使用して、前記精密化動きベクトルに従って前記予測子を決定し、ウィンドウの内側に配置された整数サンプル位置の少なくとも1つのサンプル値と、前記補間フィルタによるフィルタリングのための、前記ウィンドウの外部に配置された整数サンプル位置のパディングされたサンプル値とを使用するように構成され、
前記パディングされたサンプル値は、前記ウィンドウの内側に配置されたサンプルの少なくとも1つのサンプル値に基づき、
前記ウィンドウは、前記初期動きベクトルの位置に配置された前記ブロックの行の数および/または列の数を拡張したものとして定義される、
装置。 - 前記処理回路(600)が、候補動きベクトルの探索空間に基づいて前記初期動きベクトルの精密化を決定し、前記初期動きベクトルと前記精密化とに基づいて、前記精密化動きベクトルを決定するように構成される、請求項1に記載の装置。
- 前記探索空間が、前記初期動きベクトルによって定義される位置に配置される、請求項2に記載の装置。
- 前記処理回路(600)が、前記ブロックと前記予測子との差分を取得するように構成される、請求項1から3のいずれか一項に記載の装置。
- 前記処理回路(600)が、前記予測子と、前記ブロックと前記予測子との前記差分とに基づいて、前記ブロックを再構築するようにさらに構成される、請求項4に記載の装置。
- 前記パディングされたサンプル値が、対応する評価済みの整数サンプル位置の値を、前記補間フィルタの軸線に対してミラーリングすることによって決定される、請求項1から5のいずれか一項に記載の装置。
- 前記補間フィルタが一次元フィルタまたは分離可能な二次元フィルタである、請求項1から6のいずれか一項に記載の装置。
- 前記ウィンドウが、前記初期動きベクトルによって指定される位置で、前記予測子を取得するためにアクセス可能なすべての整数サンプル位置によって形成される、請求項1から7のいずれか一項に記載の装置。
- 前記ウィンドウが、
前記予測子を決定するために使用される、前記補間フィルタの垂直方向長さおよび水平方向長さ
に対する垂直方向サイズおよび/または水平方向サイズによって定義される、請求項1から8のいずれか一項に記載の装置。 - 前記ウィンドウの外部に配置された前記整数サンプル位置の前記パディングされたサンプル値が、前記ウィンドウの外部に配置された前記整数サンプル位置に最も近い、前記ウィンドウの内部に配置された少なくとも1つの使用済み整数サンプル位置のサンプル値と等しくなるように決定される、請求項1から5または7から9のいずれか一項に記載の装置。
- 前記処理回路(600)が、テンプレートを用いたテンプレート整合または双方向整合によって、前記初期動きベクトルの精密化を決定するように構成され、
前記テンプレート整合または前記双方向整合が、
第2のウィンドウ(1120)内の整数サンプル位置にあるサンプル値にアクセスし、前記第2のウィンドウ(1120)が、前記テンプレート整合または前記双方向整合のためにアクセス可能な、探索空間と、別の整数サンプル位置とを含み、
前記第2のウィンドウの外部に配置された整数サンプル位置で、前記第2のウィンドウ内の少なくとも1つのサンプルに基づいた、パディングされたサンプル値によって少なくとも1つのサンプル値(1030)をパディングし、
アクセスされた整数サンプル位置の値と、前記パディングされたサンプル値とを使用して、前記テンプレート整合または前記双方向整合を実行する、請求項1から10のいずれか一項に記載の装置。 - 前記探索空間が、事前定義されたタップサイズのフィルタを用いた補間フィルタリングによって取得された値を伴う、少なくとも1つの分数サンプル位置(1,2,6)を含み、
前記補間フィルタリングが、前記アクセスされた整数サンプル位置の値と、少なくとも1つの前記パディングされたサンプル値とを使用して、前記少なくとも1つの分数サンプル位置の値を取得する、請求項11に記載の装置。 - 前記テンプレート整合または前記双方向整合で使用される前記パディングされたサンプル値が、対応する前記アクセスされた整数サンプル位置の値を、前記フィルタの軸線に対してミラーリングすることによって決定される、請求項12に記載の装置。
- 前記テンプレート整合または前記双方向整合で使用される前記パディングされたサンプル値が、前記アクセスされた整数サンプル位置に最も近い前記値と等しくなるように決定される、請求項11または12に記載の装置。
- 前記第2のウィンドウ(1120)が、前記探索空間に対する垂直方向サイズおよび/または水平方向サイズで定義される、請求項11から14のいずれか一項に記載の装置。
- 前記第2のウィンドウ(1120)が、前記ウィンドウと同じである、請求項11から15のいずれか一項に記載の装置。
- 精密化が双方向整合によって決定され、前記処理回路が、異なる参照ピクチャ(Ref0,Ref1)内の位置を指し示し、初期動きベクトルのペア(Pair_0,Pair_1,…,Pair_N)を形成する、少なくとも2つの初期動きベクトルを取得するように構成される、請求項1から16のいずれか一項に記載の装置。
- 精密化がテンプレート整合によって決定され、前記処理回路が、
前記ブロックのテンプレートを取得し、
探索空間における前記テンプレートを用いたテンプレート整合によって、前記初期動きベクトルの前記精密化を決定する
ようにさらに構成される、請求項1から17のいずれか一項に記載の装置。 - 前記装置はエンコード装置である、請求項1から18のいずれか一項に記載の装置。
- 前記装置はデコード装置である、請求項1から18のいずれか一項に記載の装置。
- ビデオ画像のブロックをエンコードするための予測子を決定するためのエンコード方法であって、
前記ブロックの初期動きベクトルを取得するステップ(1310,1410)と、
前記初期動きベクトルに基づいて、前記ブロックの精密化動きベクトルを取得するステップ(1320,1330,1340,1720;2115,2120,2130,2140,2150,2160)と、
前記精密化動きベクトルに従って前記ブロックの予測子を決定するステップ(1780)であって、決定する前記ステップ(1780)は、補間フィルタを用いた補間を使用して、前記精密化動きベクトルに従って前記予測子を決定し、ウィンドウの内部に配置された整数サンプル位置の少なくとも1つのサンプル値と、前記補間フィルタによるフィルタリングのための、前記ウィンドウの外部に配置された整数サンプル位置のパディングされたサンプル値とを使用し、前記パディングされたサンプル値は、前記ウィンドウの内部に配置されたサンプルの少なくとも1つのサンプル値に基づき、前記ウィンドウは、前記初期動きベクトルの位置に配置された前記ブロックの行の数および/または列の数を拡張したものとして定義される、ステップ(1780)と
を含む方法。 - ビデオ画像のブロックをデコードするための予測子を決定するためのデコード方法であって、
前記ブロックの初期動きベクトルを取得するステップと、
前記初期動きベクトルに基づいて、前記ブロックの精密化動きベクトルを取得するステップと、
補間フィルタを用いた補間を使用して、前記精密化動きベクトルに従って前記ブロックの予測子を決定するステップ(1780)であって、決定する前記ステップ(1780)は、ウィンドウの内部に配置された整数サンプル位置の少なくとも1つのサンプル値と、前記補間フィルタによるフィルタリングのための、前記ウィンドウの外部に配置された整数サンプル位置のパディングされたサンプル値とを使用し、前記パディングされたサンプル値は、前記ウィンドウの内部に配置されたサンプルの少なくとも1つのサンプル値に基づき、前記ウィンドウは、前記初期動きベクトルの位置に配置された前記ブロックの行の数および/または列の数を拡張したものとして定義される、ステップ(1780)と
を含む方法。 - プロセッサで実行されると、前記プロセッサに請求項21に記載の方法を実行させる命令を記憶したコンピュータ可読記憶媒体。
- プロセッサで実行されると、前記プロセッサに請求項22に記載の方法を実行させる命令を記憶したコンピュータ可読記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022176532A JP2023014095A (ja) | 2018-06-28 | 2022-11-02 | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862691582P | 2018-06-28 | 2018-06-28 | |
US201862691594P | 2018-06-28 | 2018-06-28 | |
US62/691,594 | 2018-06-28 | ||
US62/691,582 | 2018-06-28 | ||
PCT/CN2019/093465 WO2020001574A1 (en) | 2018-06-28 | 2019-06-28 | Memory access window and padding for motion vector refinement and motion compensation |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022176532A Division JP2023014095A (ja) | 2018-06-28 | 2022-11-02 | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021529471A JP2021529471A (ja) | 2021-10-28 |
JP7171770B2 true JP7171770B2 (ja) | 2022-11-15 |
Family
ID=68985791
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020572766A Active JP7171770B2 (ja) | 2018-06-28 | 2019-06-28 | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
JP2022176532A Pending JP2023014095A (ja) | 2018-06-28 | 2022-11-02 | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022176532A Pending JP2023014095A (ja) | 2018-06-28 | 2022-11-02 | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
Country Status (10)
Country | Link |
---|---|
US (3) | US11363292B2 (ja) |
EP (2) | EP3799693A4 (ja) |
JP (2) | JP7171770B2 (ja) |
KR (2) | KR20230165870A (ja) |
CN (2) | CN112292862A (ja) |
AU (1) | AU2019296308B9 (ja) |
BR (1) | BR112020026830A2 (ja) |
CA (1) | CA3104570C (ja) |
SG (1) | SG11202012700UA (ja) |
WO (2) | WO2020001578A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111201795B (zh) * | 2017-10-09 | 2022-07-26 | 华为技术有限公司 | 存储访问窗口和用于运动矢量修正的填充 |
JP7171770B2 (ja) * | 2018-06-28 | 2022-11-15 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
WO2020103944A1 (en) | 2018-11-22 | 2020-05-28 | Beijing Bytedance Network Technology Co., Ltd. | Sub-block based motion candidate selection and signaling |
KR20200078378A (ko) * | 2018-12-21 | 2020-07-01 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
WO2020185747A1 (en) * | 2019-03-11 | 2020-09-17 | Vid Scale, Inc. | Methods and systems for post-reconstruction filtering |
US11936916B2 (en) * | 2019-06-25 | 2024-03-19 | Lg Electronics Inc. | Image decoding method using lossless coding in image coding system and apparatus therefor |
BR112022002687A2 (pt) * | 2019-08-13 | 2022-09-27 | Beijing Bytedance Network Tech Co Ltd | Método de processamento de vídeo, aparelho em um sistema de vídeo, e, produto de programa de computador |
WO2021052504A1 (en) | 2019-09-22 | 2021-03-25 | Beijing Bytedance Network Technology Co., Ltd. | Scaling method for sub-block based inter prediction |
CN113709458B (zh) * | 2020-05-22 | 2023-08-29 | 腾讯科技(深圳)有限公司 | 视频编解码中的位移矢量预测方法、装置及设备 |
US20240171756A1 (en) * | 2021-03-30 | 2024-05-23 | Interdigital Ce Patent Holdings, Sas | Template matching prediction for video encoding and decoding |
WO2023101990A1 (en) * | 2021-11-30 | 2023-06-08 | Beijing Dajia Internet Information Technology Co., Ltd. | Motion compensation considering out-of-boundary conditions in video coding |
CN114154645B (zh) * | 2021-12-03 | 2022-05-17 | 中国科学院空间应用工程与技术中心 | 跨中心图像联合学习方法、系统、存储介质及电子设备 |
WO2024014896A1 (ko) * | 2022-07-13 | 2024-01-18 | 엘지전자 주식회사 | 움직임 정보 리파인먼트에 기반한 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체 |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1998042134A1 (en) * | 1997-03-17 | 1998-09-24 | Mitsubishi Denki Kabushiki Kaisha | Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system |
US7342962B2 (en) * | 2003-09-17 | 2008-03-11 | Texas Instruments Incorporated | Transcoders and methods |
US8553776B2 (en) | 2004-07-21 | 2013-10-08 | QUALCOMM Inorporated | Method and apparatus for motion vector assignment |
JP4802885B2 (ja) * | 2006-06-19 | 2011-10-26 | ソニー株式会社 | 動きベクトル検出装置および方法、プログラム並びに記録媒体 |
US8160150B2 (en) * | 2007-04-10 | 2012-04-17 | Texas Instruments Incorporated | Method and system for rate distortion optimization |
EP1988502A1 (en) | 2007-05-04 | 2008-11-05 | Deutsche Thomson OHG | Method and device for retrieving a test block from a blockwise stored reference image |
US20110176611A1 (en) * | 2010-01-15 | 2011-07-21 | Yu-Wen Huang | Methods for decoder-side motion vector derivation |
JP5875989B2 (ja) * | 2010-01-19 | 2016-03-02 | トムソン ライセンシングThomson Licensing | ビデオ・エンコードおよびデコードのための低複雑性テンプレート照合予測のための方法および装置 |
CN102611887B (zh) * | 2011-01-21 | 2015-08-05 | 华为技术有限公司 | 非整像素位置运动矢量的坐标值取整方法和装置 |
US9749657B2 (en) * | 2011-01-21 | 2017-08-29 | Sharp Kabushiki Kaisha | Buffer compression for motion vector competition |
US9641866B2 (en) * | 2011-08-18 | 2017-05-02 | Qualcomm Incorporated | Applying partition-based filters |
US9325991B2 (en) * | 2012-04-11 | 2016-04-26 | Qualcomm Incorporated | Motion vector rounding |
EP2683165B1 (en) * | 2012-07-04 | 2015-10-14 | Thomson Licensing | Method for coding and decoding a block of pixels from a motion model |
US10284842B2 (en) * | 2013-03-05 | 2019-05-07 | Qualcomm Incorporated | Inter-layer reference picture construction for spatial scalability with different aspect ratios |
US9609347B2 (en) * | 2013-04-04 | 2017-03-28 | Qualcomm Incorporated | Advanced merge mode for three-dimensional (3D) video coding |
US9942560B2 (en) * | 2014-01-08 | 2018-04-10 | Microsoft Technology Licensing, Llc | Encoding screen capture data |
US10205950B2 (en) * | 2014-02-21 | 2019-02-12 | Panasonic Corporation | Image decoding method, image encoding method, image decoding apparatus, and image encoding apparatus |
GB2524476B (en) * | 2014-03-14 | 2016-04-27 | Canon Kk | Method, device and computer program for optimizing transmission of motion vector related information when transmitting a video stream |
US10412387B2 (en) * | 2014-08-22 | 2019-09-10 | Qualcomm Incorporated | Unified intra-block copy and inter-prediction |
US10200711B2 (en) * | 2015-03-27 | 2019-02-05 | Qualcomm Incorporated | Motion vector derivation in video coding |
JP2017017629A (ja) * | 2015-07-03 | 2017-01-19 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法、及びプログラム |
US10511835B2 (en) * | 2015-09-02 | 2019-12-17 | Mediatek Inc. | Method and apparatus of decoder side motion derivation for video coding |
US10812822B2 (en) * | 2015-10-02 | 2020-10-20 | Qualcomm Incorporated | Intra block copy merge mode and padding of unavailable IBC reference region |
US20170272775A1 (en) * | 2015-11-19 | 2017-09-21 | Hua Zhong University Of Science Technology | Optimization of interframe prediction algorithms based on heterogeneous computing |
US10136155B2 (en) * | 2016-07-27 | 2018-11-20 | Cisco Technology, Inc. | Motion compensation using a patchwork motion field |
US10701366B2 (en) * | 2017-02-21 | 2020-06-30 | Qualcomm Incorporated | Deriving motion vector information at a video decoder |
US10805630B2 (en) * | 2017-04-28 | 2020-10-13 | Qualcomm Incorporated | Gradient based matching for motion search and derivation |
US10477237B2 (en) * | 2017-06-28 | 2019-11-12 | Futurewei Technologies, Inc. | Decoder side motion vector refinement in video coding |
CN111201795B (zh) | 2017-10-09 | 2022-07-26 | 华为技术有限公司 | 存储访问窗口和用于运动矢量修正的填充 |
CN111201792B (zh) | 2017-10-09 | 2022-06-14 | 华为技术有限公司 | 指向分数像素点位置的运动矢量的修正运动矢量 |
JP7171770B2 (ja) * | 2018-06-28 | 2022-11-15 | ホアウェイ・テクノロジーズ・カンパニー・リミテッド | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング |
-
2019
- 2019-06-28 JP JP2020572766A patent/JP7171770B2/ja active Active
- 2019-06-28 AU AU2019296308A patent/AU2019296308B9/en active Active
- 2019-06-28 WO PCT/CN2019/093499 patent/WO2020001578A1/en unknown
- 2019-06-28 EP EP19825737.0A patent/EP3799693A4/en active Pending
- 2019-06-28 BR BR112020026830-5A patent/BR112020026830A2/pt unknown
- 2019-06-28 WO PCT/CN2019/093465 patent/WO2020001574A1/en active Application Filing
- 2019-06-28 KR KR1020237040298A patent/KR20230165870A/ko not_active Application Discontinuation
- 2019-06-28 CN CN201980038772.5A patent/CN112292862A/zh active Pending
- 2019-06-28 KR KR1020217001104A patent/KR102606778B1/ko active IP Right Grant
- 2019-06-28 EP EP19826142.2A patent/EP3794827A4/en active Pending
- 2019-06-28 CA CA3104570A patent/CA3104570C/en active Active
- 2019-06-28 SG SG11202012700UA patent/SG11202012700UA/en unknown
- 2019-06-28 CN CN201980020898.XA patent/CN111886870B/zh active Active
-
2020
- 2020-08-20 US US16/999,031 patent/US11363292B2/en active Active
- 2020-12-28 US US17/135,624 patent/US11451824B2/en active Active
-
2022
- 2022-06-03 US US17/832,353 patent/US20220394291A1/en active Pending
- 2022-11-02 JP JP2022176532A patent/JP2023014095A/ja active Pending
Non-Patent Citations (3)
Title |
---|
CHEN, Huanbang et al.,Description of SDR, HDR and 360° video coding technology proposal by Huawei, GoPro, HiSilicon, and Samsung,buJoint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 10th Meeting: San Diego, US, 10-20 Apr. 2018, [JVET-J0025_v2],JVET-J0025 (version 4),ITU-T,2018年04月14日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/10_San%20Diego/wg11/JVET-J0025-v4.zip>: JVET-J0025_v3.docx: pp. 66-69 |
CHEN, Jianle et al.,Algorithm Description of Joint Exploration Test Model 7 (JEM 7),Joint Video Exploration Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 7th Meeting: Torino, IT, 13-21 July 2017, [JVET-G1001-v1],JVET-G1001 (version 1),ITU-T,2017年08月19日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/7_Torino/wg11/JVET-G1001-v1.zip>: JVET-G1001-v1.docx: pp. 23-27 |
ESENLIK, Semih et al.,CE9: Report on the results of tests CE9.2.15 and CE9.2.16,Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 12th Meeting: Macao, CN, 3-12 Oct. 2018, [JVET-L0163],JVET-L0163 (version 1),ITU-T,2018年09月24日,<URL:http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/12_Macao/wg11/JVET-L0163-v1.zip>: JVET-L0163.DOCX: pp. 1-6 |
Also Published As
Publication number | Publication date |
---|---|
EP3794827A4 (en) | 2021-03-31 |
BR112020026830A2 (pt) | 2021-04-06 |
US20220394291A1 (en) | 2022-12-08 |
JP2021529471A (ja) | 2021-10-28 |
CA3104570C (en) | 2023-05-23 |
KR20230165870A (ko) | 2023-12-05 |
AU2019296308B2 (en) | 2023-04-06 |
WO2020001578A1 (en) | 2020-01-02 |
CN111886870A (zh) | 2020-11-03 |
US11363292B2 (en) | 2022-06-14 |
SG11202012700UA (en) | 2021-01-28 |
KR102606778B1 (ko) | 2023-11-29 |
EP3799693A1 (en) | 2021-04-07 |
WO2020001574A1 (en) | 2020-01-02 |
EP3794827A1 (en) | 2021-03-24 |
AU2019296308B9 (en) | 2023-08-03 |
KR20210019097A (ko) | 2021-02-19 |
JP2023014095A (ja) | 2023-01-26 |
US11451824B2 (en) | 2022-09-20 |
US20200404323A1 (en) | 2020-12-24 |
US20210195232A1 (en) | 2021-06-24 |
AU2019296308A1 (en) | 2021-01-21 |
CN111886870B (zh) | 2023-02-03 |
EP3799693A4 (en) | 2021-04-07 |
CN112292862A (zh) | 2021-01-29 |
CA3104570A1 (en) | 2020-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7171770B2 (ja) | 動きベクトル精密化および動き補償のためのメモリアクセスウィンドウおよびパディング | |
JP7279140B2 (ja) | 動きベクトルの改善のための制限されたメモリアクセスウィンドウ | |
US11153595B2 (en) | Memory access window and padding for motion vector refinement | |
US11159820B2 (en) | Motion vector refinement of a motion vector pointing to a fractional sample position | |
CN111567047B (zh) | 进行子预测块运动矢量推导的存储器访问窗口 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210204 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210204 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220228 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220526 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221003 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221102 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7171770 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |