JP7351485B2 - 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム - Google Patents

画像符号化方法及び装置、画像復号方法及び装置並びにプログラム Download PDF

Info

Publication number
JP7351485B2
JP7351485B2 JP2020144911A JP2020144911A JP7351485B2 JP 7351485 B2 JP7351485 B2 JP 7351485B2 JP 2020144911 A JP2020144911 A JP 2020144911A JP 2020144911 A JP2020144911 A JP 2020144911A JP 7351485 B2 JP7351485 B2 JP 7351485B2
Authority
JP
Japan
Prior art keywords
motion vector
unit
decoded
encoded
control points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020144911A
Other languages
English (en)
Other versions
JP2020205610A (ja
Inventor
チェン、ホアンバン
リン、シシン
ヤン、ハイタオ
Original Assignee
ホアウェイ・テクノロジーズ・カンパニー・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ホアウェイ・テクノロジーズ・カンパニー・リミテッド filed Critical ホアウェイ・テクノロジーズ・カンパニー・リミテッド
Publication of JP2020205610A publication Critical patent/JP2020205610A/ja
Application granted granted Critical
Publication of JP7351485B2 publication Critical patent/JP7351485B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/521Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明の実施形態は、画像処理技術に関し、特に、画像符号化方法及び装置並びに画像復号方法及び装置に関する。
ビデオ会議、ビデオ監視、及びウェブテレビ等のビデオマルチメディアアプリケーションが、生活及び仕事において広く適用されている。従って、ビデオ画像品質、ビデオ画像伝送、ビデオ画像記憶にますます高い要件が課され、画像符号化技術が、それに応じて出現している。画像符号化技術において、ビデオ画像データの冗長な情報を削減し、ビデオ画像伝送及び記憶を容易にし、ビデオ画像品質を保証するために、ビデオ画像データが、符号化され得る。
既存の画像符号化方法において、フレーム間予測(Intra-frame Prediction)に基づく符号化スキームが、用いられてよい。符号化予定ユニットの動きベクトルが、符号化予定ユニットの隣接する符号化されたユニットの動きベクトルに基づいて決定され、符号化予定ユニットの予測サンプル値が、符号化予定ユニットの動きベクトルに基づいて決定される。更に、符号化予定ユニットのビットストリームを取得するべく、符号化予定ユニットの元のサンプル値と予測サンプル値との間の残差が、符号化される。
また、隣接する符号化されたユニットと符号化予定ユニットとの間の動き相関が、符号化予定ユニットの動きベクトルに影響を与える。従って、既存の画像符号化方法において決定される符号化予定ユニットの動きベクトルは、十分正確ではなく、その結果、画像符号化の精度が、比較的低い。
本発明の実施形態は、画像符号化及び復号の精度を向上させるべく、画像符号化方法及び装置並びに画像復号方法及び装置を提供する。
本発明の実施形態が、
第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定する段階であって、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであり、Nは、正の整数である、段階と、
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階であって、nは、Nより大きくない任意の正の整数を有する、段階と、
第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階と、
第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階と、
各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、各サンプルユニットの予測残差を決定する段階と、
符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を符号化する段階であって、最適な動きベクトルグループのインデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる、段階と
を含む
画像符号化方法
を提供する。
任意で、第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階は、
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する段階と
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する段階と
を含んでよく、
Mは、符号化予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、符号化予定ユニットの左上の頂点及び右上の頂点を含み、
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの左下の頂点のサンプル座標(x,y)、及び符号化予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000001
次式(2)を用いて、n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、符号化予定ユニットの左上の頂点のサンプル座標(x,y)、及び符号化予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000002
を含む。
任意で、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階と、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階と
を含んでよい。
任意で、予め設定されたソートルールは、N個の符号化されたユニットの降順を含む。
任意で、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階は、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、段階と、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階と、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階と、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階と
を含んでよい。
任意で、Q個の動きベクトルグループを生成する段階は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定する段階と、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成する段階と
を含んでよい。
代替的に、Q個の動きベクトルグループを生成する段階は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定する段階と、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する符号化されたユニットの数であり、Jは、正の整数である、段階と、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加する段階と
を含んでよい。
任意で、候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートする段階と、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加する段階と
を含んでよい。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
差の絶対値を予め設定された成分閾値と比較する段階であって、予め設定された成分閾値は、予測方向における符号化予定ユニットの範囲である、段階と、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含む。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定する段階であって、別の制御点に対応する符号化されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、符号化予定ユニットにおけるM個の制御点以外の任意の制御点である、段階と、
別の制御点に対応する符号化されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含んでよい。
任意で、符号化予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態が、
第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定する段階であって、N個の復号されたユニットの動き予測モードが、復号予定ユニットのそれと同じであり、Nは、正の整数である、段階と、
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階であって、nは、Nより大きくない任意の正の整数を有する、段階と、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、復号予定ユニットに対応するビットストリームを復号する段階と、
最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階と、
第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階と、
各サンプルユニットの予測サンプル値と各サンプルユニットの予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する段階と
を含む
画像復号方法
を更に提供する。
任意で、第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階は、
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する段階と、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する段階と
を含んでよく、
Mは、復号予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、復号予定ユニットの左上の頂点及び右上の頂点を含み、
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの左下の頂点のサンプル座標(x,y)、及び復号予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000003
次式(2)を用いて、n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、復号予定ユニットの左上の頂点のサンプル座標(x,y)、及び復号予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000004
を含む。
任意で、最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する段階と
を含んでよい。
任意で、予め設定されたソートルールは、N個の復号されたユニットの降順を含む。
任意で、最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階は、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、段階と、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階と、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する段階と
を含んでよい。
任意で、Q個の動きベクトルグループを生成する段階は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定する段階と、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成する段階と
を含む。
代替的に、Q個の動きベクトルグループを生成する段階は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定する段階と、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する復号されたユニットの数であり、Jは、正の整数である、段階と、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加する段階と
を含む。
任意で、候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートする段階と、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加する段階と
を含む。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
差の絶対値を予め設定された成分閾値と比較する段階であって、予め設定された成分閾値は、予測方向における復号予定ユニットの範囲である、段階と、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含む。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定する段階であって、別の制御点に対応する復号されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、復号予定ユニットにおけるM個の制御点以外の任意の制御点である、段階と、
別の制御点に対応する復号されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含む。
任意で、復号予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態が、
第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定するように構成される決定モジュールであって、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであり、Nは、正の整数である、決定モジュールと、
第1の予め設定されたアルゴリズムを用いて、決定モジュールによって決定されたn番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成される計算モジュールであって、nは、Nより大きくない任意の正の整数を有する、計算モジュールと、
符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を符号化するように構成される符号化モジュールであって、最適な動きベクトルグループのインデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる、符号化モジュールと
を含み、
決定モジュールは、
第2の予め設定されたルールに従って、計算モジュールによって取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する
ように更に構成され、
計算モジュールは、
第2の予め設定されたアルゴリズムを用いて、決定モジュールによって決定された最適な動きベクトルグループに基づいて、符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定し、
各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、各サンプルユニットの予測残差を決定する
ように更に構成される、
画像符号化装置
を更に提供する。
任意で、計算モジュールは、具体的には、
第1の予め設定されたアルゴリズムを用いて、決定モジュールによって決定されたn番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する
ように構成され、
Mは、符号化予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、符号化予定ユニットの左上の頂点及び右上の頂点を含み、
計算モジュールは、具体的には、
次式(1)を用いて、決定モジュールによって決定されたn番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの左下の頂点のサンプル座標(x,y)、及び符号化予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000005
計算モジュールは、
次式(2)を用いて、決定モジュールによって決定されたn番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、符号化予定ユニットの左上の頂点のサンプル座標(x,y)、及び符号化予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000006
任意で、決定モジュールは、具体的には、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する
ように構成される。
任意で、予め設定されたソートルールは、N個の符号化されたユニットの降順を含む。
任意で、決定モジュールは、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加することと、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定することと、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定することと、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定することと、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する符号化されたユニットの数であり、Jは、正の整数である、決定することと、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュールは、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートすることと、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュールは、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
差の絶対値を予め設定された成分閾値と比較することであって、予め設定された成分閾値は、予測方向における符号化予定ユニットの範囲である、比較することと、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定することであって、別の制御点に対応する符号化されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、符号化予定ユニットにおけるM個の制御点以外の任意の制御点である、決定することと、
別の制御点に対応する符号化されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、符号化予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態が、
第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定するように構成される決定モジュールであって、N個の復号されたユニットの動き予測モードが、復号予定ユニットのそれと同じであり、Nは、正の整数である、決定モジュールと、
第1の予め設定されたアルゴリズムを用いて、決定モジュールによって決定されたn番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成される計算モジュールであって、nは、Nより大きくない任意の正の整数を有する、計算モジュールと、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、復号予定ユニットに対応するビットストリームを復号するように構成される復号モジュールと
を含み、
決定モジュールは、復号モジュールによって決定された最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定するように更に構成され、
計算モジュールは、第2の予め設定されたアルゴリズムを用いて、決定モジュールによって決定された最適な動きベクトルグループに基づいて、復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する、
各サンプルユニットの予測サンプル値と各サンプルユニットの予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する
ように更に構成される、
画像復号装置
を更に提供する。
任意で、計算モジュールは、具体的には、
第1の予め設定されたアルゴリズムを用いて、決定モジュールによって決定されたn番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する
ように構成され、
Mは、復号予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、復号予定ユニットの左上の頂点及び右上の頂点を含み、
計算モジュールは、具体的には、
次式(1)を用いて、決定モジュールによって決定されたn番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの左下の頂点のサンプル座標(x,y)、及び復号予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000007
具体的には、計算モジュールは、
次式(2)を用いて、決定モジュールによって決定されたn番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、復号予定ユニットの左上の頂点のサンプル座標(x,y)、及び復号予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000008
任意で、決定モジュールは、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートし、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定し、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する
ように更に構成される。
任意で、予め設定されたソートルールは、N個の復号されたユニットの降順を含む。
任意で、決定モジュールは、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加することと、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
最適な動きベクトルグループのインデックス識別子に基づいて前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定することと、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定することと、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する復号されたユニットの数であり、Jは、正の整数である、決定することと、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュールは、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートすることと、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュールは、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
差の絶対値を予め設定された成分閾値と比較することであって、予め設定された成分閾値は、予測方向における復号予定ユニットの範囲である、比較することと、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、決定モジュールは、
隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定することであって、別の制御点に対応する復号されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、復号予定ユニットにおけるM個の制御点以外の任意の制御点である、決定することと、
別の制御点に対応する復号されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、復号予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態が、
プロセッサと、メモリと、通信インタフェースと、バスとを含み、プロセッサは、バスを用いてメモリ及び通信インタフェースに接続されている、画像符号化装置であって、
メモリは、命令を格納するように構成され、
プロセッサは、命令を実行するように構成され、プロセッサが、メモリに格納された命令を実行する場合に、プロセッサは、先述の画像符号化方法のいずれか1つを実行する、
画像符号化装置
を更に提供する。
本発明の実施形態が、
プロセッサと、メモリと、通信インタフェースと、バスとを含み、プロセッサは、バスを用いてメモリ及び通信インタフェースに接続されている、画像復号装置であって、
メモリは、命令を格納するように構成され、
プロセッサは、命令を実行するように構成され、プロセッサが、メモリに格納された命令を実行する場合に、プロセッサは、先述の画像復号方法のいずれか1つを実行する、
画像復号装置
を更に提供する。
本発明の実施形態における画像符号化方法及び装置並びに画像復号方法及び装置によれば、
N個の符号化されたユニットは、第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットから決定されてよく、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであり、Nは、正の整数であり、
n番目の動きベクトルグループは、第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、生成され、nは、Nより大きくない任意の正の整数を有し、
1つの動きベクトルグループが、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、最適な動きベクトルグループとして決定され、
符号化予定ユニットにおける各サンプルユニットの予測サンプル値は、第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、決定され、
各サンプルユニットの予測残差は、各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、決定され、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子は、符号化予定ユニットに対応するビットストリームを取得するべく、符号化され、最適な動きベクトルグループのインデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる。N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであるため、N個の符号化されたユニットと符号化予定ユニットとの間の動き相関が、比較的高い。加えて、最適な動きベクトルグループは、N個の符号化されたユニットの動きベクトルに基づいて決定されるN個の動きベクトルグループから決定される。従って、最適な動きベクトルグループに基づいて決定される、符号化予定ユニットにおける各サンプルユニットの、予測サンプル値は、より正確であり、符号化精度が、より高い。
本発明の実施形態、又は、従来技術における技術的解決手段をより明確に説明するべく、実施形態又は従来技術を説明するために必要とされる添付図面を以下に簡潔に説明する。以下の説明における添付図面は、本発明のいくつかの実施形態を示し、当業者であれば、これらの添付図面から、創造的努力なく、他の図面を更に導出し得ることは明らかである。
本発明の実施形態1に係る、画像符号化方法のフローチャートである。
本発明の実施形態1に係る、画像符号化方法における符号化予定ユニット及び隣接する符号化されたユニットの概略構造図である。
本発明の実施形態2に係る、画像符号化方法のフローチャートである。
本発明の実施形態3に係る、画像復号方法のフローチャートである。
本発明の実施形態4に係る、画像符号化装置の概略構造図である。
本発明の実施形態5に係る、画像復号装置の概略構造図である。
本発明の実施形態6に係る、画像符号化装置の概略構造図である。
本発明の実施形態7に係る、画像復号装置の概略構造図である。
本発明の実施形態の目的、技術的解決手段、及び利点をより明確にすべく、以下、本発明の実施形態における添付図面を参照して本発明の実施形態における技術的解決手段を明確かつ完全に説明する。説明されている実施形態は、本発明の実施形態の一部であって全てではないことは明らかである。創造的努力なく本発明の実施形態に基づいて当業者によって得られる全ての他の実施形態は、本発明の保護範囲内に含まれるものとする。
本発明において提供されている画像符号化方法及び装置並びに画像復号方法並びに装置が、衛星及び地上波テレビ放送システム、ビデオ会議、セキュリティ監視、医療デモンストレーション、教室記録及び放送、及び法廷審問システム等のシナリオに適用されてよい。フレーム間予測モードを用いて、ビデオ画像の処理予定ユニットに対して動き予測が実行され、ビデオ画像は、動き予測の結果に基づいて符号化され又は復号される。本画像符号化方法及び装置によれば、ビデオ画像における符号化予定ユニットにおける各サンプルユニットの予測サンプル値が、動き予測によって取得されてよく、各サンプルユニットの予測サンプル値と各サンプルユニットの元のサンプル値との間の差が、符号化予定ユニットに対応するビットストリームを取得するために符号化され、これにより、符号化予定ユニットに対応する画像の記憶又は伝送が、符号化予定ユニットに対応するビットストリームの記憶又は伝送によって実装される。対応して、本画像復号方法及び装置によれば、ビデオ画像における復号予定ユニットにおける各サンプルユニットの予測サンプル値が、動き予測によって取得されてよく、復号予定ユニットに対応するビットストリームが、復号予定ユニットの各サンプルユニットの予測サンプル値と各サンプルユニットの元のサンプル値との間の差を取得するために復号され、更に、各サンプルユニットの再構成サンプル値が、差及び予測サンプル値に基づいて取得され、これにより、復号予定ユニットに対応する画像が、各サンプルユニットの再構成サンプル値に基づいて取得されてよい。例えば復号予定ユニットに対応するビットストリームは、画像符号化装置によって伝送され、画像復号装置によって受信されてもよく、又は、記憶デバイスから画像復号装置によって取得されてもよく、ここで、記憶デバイスにおけるビットストリームは、画像復号装置によって記憶デバイスに格納されてもよい。
本発明の実施形態1が、画像符号化方法を提供する。画像符号化方法は、画像符号化装置によって実行されてよい。例えば、画像符号化装置は、ソフトウェア及び/又はハードウェアの形態で、画像処理機能を有する電子デバイスに統合されてよい。例えば、電子デバイスは、インテリジェント端末、パーソナルコンピュータ、大衆消費電子製品、又はビデオサーバであってよい。図1は、本発明の実施形態1に係る、画像符号化方法のフローチャートである。図1に示すとおり、本方法は、以下の段階を含んでよい。
S101:第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定する段階であって、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じである。
具体的には、符号化予定ユニットは、高効率映像符号化(High Efficiency Video Coding、略称:HEVC)規格及び後続の符号化規格における符号化ユニット(Coding Unit、略称:CU)であってよい。HEVC規格において、最大符号化ユニットは、符号化ツリーユニット(Coding Tree Unit、略称:CTU)であってよく、各CTUは、より小さいCUを取得するためにレベルごとに分割されてよい。CUのサイズは、64×64、32×32、16×16、及び8×8の4つのレベル等の、4つのレベルを含んでよい。64×64レベルでのCUが、64×64サンプルを含み、32×32レベルでのCUが、32×32サンプルを含み、16×16レベルでのCUが、16×16サンプルを含み、8×8レベルでのCUが、8×8サンプルを含む。符号化予定ユニットは、64×64、32×32、16×16、及び8×8の4つのレベルのいずれか1つに対応する符号化ユニットであってよい。
ビデオ画像の画像のフレーム内の異なる符号化ユニットが、互いに独立している。異なる符号化ユニットは、同じであってもよく、又は異なっていてもよい。具体的には、画像の各フレームにおいて、画像符号化装置は、符号化ユニットごとに符号化を実行してよく、異なる符号化ユニットを符号化するために用いられる動き予測モードが、同じであってもよく、又は異なっていてもよい。画像符号化装置は、符号化ユニットの動き予測モードを用いて符号化ユニットにおける各サンプルユニットに対して動き予測を実行してよく、各サンプルユニットの予測サンプル値を決定し、符号化を更に実施する。動き予測モードは、符号化ユニットにおける制御点の動きベクトルを決定し、符号化ユニットにおける各サンプルユニットの予測サンプル値を更に決定するために用いられてよい。例えば、サンプルユニットは、サンプル又はサンプルブロックを含んでよく、ここで、サンプルブロックは、複数のサンプルを含んでよい。
符号化予定ユニットの隣接する符号化されたユニットは、符号化予定ユニットの境界に隣接する位置における符号化されたユニットであってよい。
S101において、第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定する段階は、隣接する符号化されたユニットの中で、動き予測モードが、符号化予定ユニットのそれと同じであるN個の符号化されたユニットを決定するべく、予め設定されたトラバーサル順序で符号化予定ユニットの隣接する符号化されたユニットをトラバースする段階を含んでよい。隣接する符号化されたユニットをトラバースする段階は、隣接する符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであるかどうかを判断する段階であってよい。符号化されたユニットの動き予測モードは、確定であり、従って、隣接する符号化されたユニットの動き予測モードは、隣接する符号化されたユニットに対して符号化が実行される場合に用いられる動き予測モードであってよい。符号化予定ユニットの動き予測モードは、予測のために用いられ得る動き予測モードである。
S101において、第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定する段階の後、本方法は、動き予測モードに対応する指示情報を決定する段階を更に含んでよい。
動き予測モードが、アフィン動き予測モードを含む場合、アフィン動き予測モードに対応する指示情報、例えば、構文要素アフィン‐マージ‐フラグ(affine‐merge‐flag)が、決定されてよく、アフィン‐マージ‐フラグは、1に設定される。
動き予測モードが、アフィン動き予測モードを含むが、隣接する符号化されたユニットのいずれも、符号化予定ユニットのそれと同じ動き予測モードを有しない場合、アフィン‐マージ‐フラグは、0に設定されてよい。
例えば、符号化予定ユニットの動き予測モードが、アフィン動き予測モードであってよい場合、画像符号化装置は、予め設定されたトラバーサル順序で符号化予定ユニットの隣接する符号化されたユニットをトラバースし、隣接する符号化されたユニットの中で、動き予測モードが、アフィン動き予測モードであるN個の符号化されたユニットを決定してよい。アフィン動き予測モードは、アフィン変換動き予測モードとも称されてよい。予め設定されたトラバーサル順序は、符号化予定ユニットの全ての隣接する符号化されたユニットのトラバーサル順序であってよい。例えば、N個の符号化されたユニットの各々は、4×4ユニットであってよい。
図2は、本発明の実施形態1に係る、画像符号化方法における符号化予定ユニット及び隣接する符号化されたユニットの概略構造図である。図2に示すとおり、例えば、符号化予定ユニットの隣接する符号化されたユニットは、符号化されたユニットA、符号化されたユニットB、符号化されたユニットC、符号化されたユニットD、及び符号化されたユニットEを含んでよい。符号化予定ユニットの動き予測モードが、アフィン動き予測モードである場合、符号化予定ユニットにおいて、複数の制御点、例えば、2つの制御点があってよい。例えば2つの制御点は、符号化予定ユニットの左上の頂点、及び符号化予定ユニットの右上の頂点であってよい。符号化予定ユニットの左上の頂点は、サンプルユニット0として表されてよく、符号化予定ユニットの右上の頂点は、サンプルユニット1として表されてよい。
画像符号化装置は、第1の予測方向において符号化されたユニットA及び符号化されたユニットBを連続的にトラバースし、第1の予測方向において動き予測モードがアフィン動き予測モードである第1の符号化されたユニット、例えば、符号化されたユニットBを見つけ、第2の予測方向において符号化されたユニットC、符号化されたユニットD、及び符号化されたユニットEを連続的にトラバースし、動き予測モードがアフィン動き予測モードである第1の符号化されたユニット、例えば、符号化されたユニットDを見つけてよい。
代替的に、画像符号化装置は、符号化されたユニットA、符号化されたユニットB、符号化されたユニットC、符号化されたユニットD、及び符号化されたユニットEを連続的にトラバースし、動き予測モードがアフィン動き予測モードである第1の符号化されたユニット、例えば、符号化されたユニットBを見つけてよい。
S102:第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階、nは、Nより大きくない任意の正の整数を有する。
任意で、S102において、第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階は、
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する段階であって、Mは、符号化予定ユニットの動き予測モードに基づいて決定される正の整数である、段階と、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する段階と
を含んでよい。
具体的には、M個の制御点は、符号化予定ユニットの頂点位置におけるサンプルユニットを含んでよい。符号化予定ユニットの動き予測モードが、アフィン動き予測モードである場合、Mは、1より大きくてよく、M個の制御点は、符号化予定ユニットのM個の頂点を含んでよい。
例えば、符号化予定ユニットの動き予測モードが、アフィン動き予測モードである場合、Mは、2であってよく、M個の制御点は、符号化予定ユニットの左上の頂点及び符号化予定ユニットの右上の頂点を含んでよい。符号化予定ユニットの左上の頂点は、図2におけるサンプルユニット0であってよく、符号化予定ユニットの右上の頂点は、図2におけるサンプルユニット1であってよい。例えば、S101において決定されたN個の符号化されたユニットにおけるn番目の符号化されたユニットは、図2における符号化されたユニットBであってよい。以下に、符号化されたユニットBを例として説明を提供する。図2における符号化されたユニットBにおける少なくとも2つのサンプルユニットが、3つのサンプルユニット:符号化されたユニットBの左上の頂点、符号化されたユニットBの右上の頂点、及び符号化されたユニットBの左下の頂点であってよい。符号化されたユニットBの左上の頂点は、サンプルユニット2であってよく、符号化されたユニットBの右上の頂点は、サンプルユニット3として表されてよく、符号化されたユニットBの左下の頂点は、サンプルユニット4として表されてよい。
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの左下の頂点のサンプル座標(x,y)、及び符号化予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000009
次式(2)を用いて、n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、符号化予定ユニットの左上の頂点のサンプル座標(x,y)、及び符号化予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000010
を含んでよい。
S103:第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階である。
任意で、S103において、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階と、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階と
を含んでよい。
具体的には、予め設定されたソートルールは、N個の符号化されたユニットの降順を含んでよい。
例えば、N個の符号化されたユニットの各々のサイズは、各符号化されたユニットの水平幅と垂直高さとの積であってよい。例えば、N個の符号化されたユニットの各々のサイズは、次式(3)に基づいて決定され得、
Figure 0007351485000011
ここで、Sは、各符号化されたユニットのサイズであり、Wは、各符号化されたユニットの水平幅であり、Hは、各符号化されたユニットの垂直高さであり、iは、各符号化されたユニットの識別子である。
例えば、Nが2である場合、N個の符号化されたユニットは、図2において示される符号化されたユニットB及び符号化されたユニットDであってよい。
符号化されたユニットBのサイズは、Sであってよい。Sは、WとHとの積である。Wは、符号化されたユニットBの水平幅である。Hは、符号化されたユニットBの垂直高さである。符号化されたユニットDのサイズは、Sであってよい。Sは、WとHとの積である。Wは、符号化されたユニットDの水平幅である。Hは、符号化されたユニットDの垂直高さである。例えば、符号化されたユニットBが、符号化されたユニットDより大きい場合、トラバーサル順序は、B>Dとして表されてよい。
例えば、符号化されたユニットBに基づいて生成された、候補動きベクトルキューにおける、動きベクトルグループに対応するインデックス識別子が、1であってよい。例えば、符号化されたユニットDに基づいて生成された、候補動きベクトルキューにおける、動きベクトルグループに対応するインデックス識別子が、2であってよい。
例えば、Nが10である、換言すると、候補動きベクトルキューが、10個の動きベクトルグループを含む場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループは、10個の動きベクトルグループにおける最初の5個の動きベクトルグループであってよい。
任意で、候補動きベクトルキューの前の予め設定された数の動きベクトルグループから最適動きベクトルグループを選択する段階は、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階と、
符号化予定ユニットとのマッチング誤差が最小である1つの動きベクトルグループを最適動きベクトルグループとして決定する段階と
であってよい。
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階は、
動きベクトルグループに基づいて、動きベクトルグループに対応する、符号化予定ユニットにおける、サンプルユニットの予測サンプル値を決定する段階と、
動きベクトルグループに対応するサンプルユニットの予測サンプル値とサンプルユニットの元のサンプル値との間の、差の二乗和(Sum of Squared Difference、略称:SSD)又は差の絶対値の和(Sum of Absolute Differences、略称:SAD)に基づいて、動きベクトルグループに対応するレート歪みコスト(Rate Distortion Cost、略称:RD Cost)を決定する段階と、
動きベクトルグループに対応するレート歪みコストに基づいて、動きベクトルグループと符号化予定ユニットとの間のマッチング誤差を決定する段階と
であってよい。
具体的には、先述の段階において、動きベクトルグループに基づいて、動きベクトルグループに対応する、符号化予定ユニットにおける、サンプルユニットの予測サンプル値を決定する段階は、
動きベクトルグループに基づいてサンプルユニットの動きベクトル予測値を決定する段階、及び
サンプルユニットの動きベクトル予測値に基づいて動きベクトルグループに対応するレート歪みコストを更に決定する段階
を含んでよい。
例えば、SADを例として、画像符号化装置は、次式(4)を用いて、符号化予定ユニットに対応するビットレートと、動きベクトルグループに対応するサンプルユニットの予測サンプル値とサンプルユニットの元のサンプル値との間のSADとに基づいて、動きベクトルグループに対応するレート歪みコストを決定してよく、
Figure 0007351485000012
ここで、Jは、動きベクトルグループに対応するレート歪みコストであり、SADは、動きベクトルグループに対応するサンプルユニットの予測サンプル値とサンプルユニットの元のサンプル値との間のSADであり、Rは、符号化予定ユニットに対応するビットレートであり、λは、ラグランジュ乗数であり、予め設定された定数である。
S104:第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階である。
任意で、S104において、第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階は、
第2の予め設定されたアルゴリズムを用いて、M個の制御点の、最適な動きベクトルグループにおける動きベクトル予測値、及び各サンプルユニットのサンプル座標に基づいて、符号化予定ユニットにおける各サンプルユニットの動きベクトル予測値を決定する段階と、
各サンプルユニットの動きベクトル予測値に基づいて、予め設定された参照フレームにおいて、各サンプルユニットの予測サンプル値を決定する段階と
を含んでよい。
例えば、図2に示すとおり、符号化予定ユニットの動き予測モードが、アフィン動き予測モードである場合、符号化予定ユニットにおいて2つの制御点:符号化予定ユニットの左上の頂点及び符号化予定ユニットの右上の頂点があってよい。
例えば、画像符号化装置は、次式(5)を用いて、2つの制御点の、最適な動きベクトルグループにおける動きベクトル予測値、及び各サンプルユニットのサンプル座標に基づいて、符号化予定ユニットにおける各サンプルユニットの動きベクトル予測値を決定してよく、
Figure 0007351485000013
ここで、(v,v)は、各サンプルユニットの動きベクトル予測値であり、vは、各サンプルユニットの動きベクトル予測値の水平成分であり、vは、各サンプルユニットの動きベクトル予測値の垂直成分であり、(x,y)は、各サンプルユニットのサンプル座標であり、ここで、xは、各サンプルユニットの水平サンプル座標であり、yは、各サンプルユニットの垂直サンプル座標であり、wは、符号化予定ユニットの水平幅である。
S105:各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、各サンプルユニットの予測残差を決定する段階である。
S106:符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を符号化する段階であって、最適な動きベクトルグループのインデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる。
具体的には、S106において、符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子に対して変換(Transformation)及び量子化(Quantization)が連続的に実行された後、符号化が実行されてよい。
変換は、カルーネンレーベ変換(Karhunen-Loeve Transform、略称:KLT)、離散フーリエ変換、離散コサイン変換(Discrete Cosine Transform、略称DCT)、及び同様のもののいずれか1つであってよい。符号化は、エントロピー(Entropy)符号化であってよい。
任意で、S106において、各サンプルユニットの予測残差と、最適な動きベクトルグループのインデックス識別子と、予め設定された参照フレームのインデックス識別子とは、符号化予定ユニットに対応するビットストリームを取得するために符号化されてよい。
任意で、S106において、各サンプルユニットの予測残差と、最適な動きベクトルグループのインデックス識別子と、予め設定された参照フレームのインデックス識別子と、符号化予定ユニットの動き予測モードに対応する指示情報とは、符号化予定ユニットに対応するビットストリームを取得するために符号化されてよい。
N個の符号化されたユニットは、符号化予定ユニットの隣接する符号化されたユニットにおける、同じ動き予測モードを有する符号化されたユニットであるため、N個の符号化されたユニットと符号化予定ユニットとの間の動き相関が、比較的高い。N個の動きベクトルグループは、N個の符号化されたユニットの動きベクトルに基づいて決定されるため、N個の動きベクトルグループにおける最適な動きベクトルグループに基づいて決定される、符号化予定ユニットにおける各サンプルユニットの、動きベクトル予測値は、より正確であり、これにより、符号化精度は、より高い。
加えて、最適な動きベクトルグループは、候補動きベクトルキューの前の予め設定された数の動きベクトルグループから決定されてよく、候補動きベクトルキューは、ソートされたN個の動きベクトルグループに基づいて生成される。従って、候補動きベクトルキューにおける最適な動きベクトルグループのインデックス識別子は、比較的小さく、これにより、最適な動きベクトルグループのインデックス識別子を符号化するために用いられるビットの数は、比較的小さく、符号化効率が、向上する。
本発明の実施形態1において提供されている画像符号化方法によれば、
N個の符号化されたユニットは、第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットから決定されてよく、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであり、
n番目の動きベクトルグループは、第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、生成され、nは、Nより大きくない任意の正の整数を有し、
1つの動きベクトルグループが、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、最適な動きベクトルグループとして決定され、
符号化予定ユニットにおける各サンプルユニットの予測サンプル値は、第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、決定され、
各サンプルユニットの予測残差は、各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、決定され、
各サンプルユニットの予測残差及び最適動きベクトルグループのインデックス識別子は、符号化予定ユニットに対応するビットストリームを取得するべく、符号化される。N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであるため、N個の符号化されたユニットと符号化予定ユニットとの間の動き相関は、比較的高い。加えて、最適な動きベクトルグループは、N個の符号化されたユニットの動きベクトルに基づいて決定されるN個の動きベクトルグループから決定される。従って、最適な動きベクトルグループに基づいて決定される、符号化予定ユニットにおける各サンプルユニットの、予測サンプル値は、より正確であり、これにより、画像符号化の精度が、より高い。
本発明の実施形態2が、画像符号化方法を更に提供する。図3は、本発明の実施形態2に係る、画像符号化方法のフローチャートである。図3に示すとおり、本方法によれば、先述の実施形態におけるS103において、第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階は、以下の段階を含んでよい。
S301:予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階である。
例えば、予め設定されたソートルールは、N個の符号化されたユニットの昇順又は降順であってよい。
S302:Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である。
Nが予め設定された値より小さい場合、Q個の動きベクトルグループは、候補動きベクトルキューにおける動きベクトルグループの数を保証するために更に生成される必要があり、これにより、選択された最適な動きベクトルグループの精度を保証する。
任意で、S302において、Q個の動きベクトルグループを生成する段階は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定する段階と、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成する段階と
を含んでよい。
例えば、図2に示すとおり、隣接する符号化されたユニットが、符号化されたユニットA、符号化されたユニットB、符号化されたユニットC、符号化されたユニットD、及び符号化されたユニットEを含み、符号化予定ユニットにおいて2つの制御点がある場合、符号化予定ユニットの左上の頂点に対応する、隣接する符号化されたユニットにおける、符号化されたユニットは、符号化されたユニットCを含んでよく、符号化予定ユニットの右上の頂点に対応する、隣接する符号化されたユニットにおける、符号化されたユニットは、符号化されたユニットD及び符号化されたユニットEを含んでよい。
例えば、符号化予定ユニットの左上の頂点に対応する符号化されたユニットが、符号化されたユニットCを含んでよい場合、左上の頂点の動きベクトル予測値は、
Figure 0007351485000014
であってよい。
Figure 0007351485000015
は、符号化されたユニットCの動きベクトルに基づいて決定された、左上の頂点の、動きベクトル予測値であってよい。
例えば、符号化予定ユニットの右上の頂点に対応する符号化されたユニットが、符号化されたユニットD及び符号化されたユニットEを含んでよい場合、右上の頂点の動きベクトル予測値は、
Figure 0007351485000016
であってよく、右上の頂点の別の動きベクトル予測値は、
Figure 0007351485000017
であってよい。
Figure 0007351485000018
は、符号化されたユニットDの動きベクトルに基づいて決定された、右上の頂点の、動きベクトル予測値であってよい。
Figure 0007351485000019
は、符号化されたユニットEの動きベクトルに基づいて決定された、右上の頂点の、動きベクトル予測値であってよい。
Q個の動きベクトルグループは、2つの動きベクトルグループ:
Figure 0007351485000020
及び
Figure 0007351485000021
を含んでよい。例えば、Qは、2であってよい。
代替的に、S302において、Q個の動きベクトルグループを生成する段階は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定する段階と、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する符号化されたユニットの数であり、Jは、正の整数である、段階と、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加する段階と
を含んでよい。
具体的には、Q個の動きベクトルグループは、複数回生成されてよい。例えば、K個の第1の動きベクトルグループが、生成され、次に、L個の第2の動きベクトルグループが、生成される。
S303:候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階である。
S304:候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階である。
S304において候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階の実現プロセスは、実施形態1におけるそれと同様である。詳細はここでは再度説明しない。
S305:前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する段階である。
S305において各動きベクトルグループと符号化予定ユニットとの間のマッチング誤差を決定する段階の具体的な実現プロセスは、実施形態1におけるそれと同様である。詳細はここでは再度説明しない。
S306:マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階である。
任意で、S303において、候補動きベクトルキューを生成するべくN個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートする段階と、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加する段階と
を含んでよい。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
差の絶対値を予め設定された成分閾値と比較する段階であって、予め設定された成分閾値は、予測方向における符号化予定ユニットの範囲である、段階と、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含んでよい。
具体的には、予め設定された成分閾値は、水平予測方向における符号化予定ユニットの水平幅に基づいて決定されてよく、又は、予め設定された成分閾値は、垂直予測方向における符号化予定ユニットの垂直高さに基づいて決定されてよい。
例えば、符号化予定ユニットのM個の制御点が、図2に示すとおり、符号化予定ユニットの左上の頂及び右上の頂点を含む場合、Q個の動きベクトルグループは、2つの動きベクトルグループ:
Figure 0007351485000022
及び
Figure 0007351485000023
を含んでよく、ここで、
Figure 0007351485000024
は、符号化予定ユニットの左上の頂点の動きベクトル予測値であり、
Figure 0007351485000025
及び
Figure 0007351485000026
の両方は、符号化予定ユニットの右上の頂点の動きベクトル予測値である。
例えば、本実施形態において、M個の制御点における隣接する制御点の動きベクトル予測値の、1つの予測方向における、成分間の差は、次式(6)に基づいて、予め設定された成分閾値と比較されてよく、
Figure 0007351485000027
ここで、
Figure 0007351485000028
は、左上の頂点の動きベクトル予測値の、水平予測方向における、成分であり、
Figure 0007351485000029
は、左上の頂点の動きベクトル予測値の、垂直予測方向における、成分であり、
Figure 0007351485000030
は、右上の頂点の動きベクトル予測値の、水平予測方向における、成分であり、
Figure 0007351485000031
は、右上の頂点の動きベクトル予測値の、垂直予測方向における、成分であり、iは、Cであってよく、jは、D及びEのいずれか一方であってよく、wは、符号化予定ユニットの水平幅であり、hは、符号化予定ユニットの垂直高さである。
iがCである場合、jは、D及びEのいずれか一方であり、
Figure 0007351485000032

Figure 0007351485000033
との間の差の絶対値は、
Figure 0007351485000034
より小さいか又はそれに等しく、
Figure 0007351485000035

Figure 0007351485000036
との間の差の絶対値は、
Figure 0007351485000037
より小さいか又はそれに等しく、動きベクトルグループ
Figure 0007351485000038
及び
Figure 0007351485000039
は、ソートされる。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定する段階であって、別の制御点に対応する符号化されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、符号化予定ユニットにおけるM個の制御点以外の任意の制御点である、段階と、
別の制御点に対応する符号化されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含んでよい。
例えば、符号化予定ユニットにおけるM個の制御点が、符号化予定ユニットの左上の頂点及び右上の頂点を含んでよい場合、別の制御点は、符号化予定ユニットの左下の頂点、例えば、図2における符号化予定ユニットのサンプルユニット5であってよい。
別の制御点に対応する符号化されたユニットは、符号化されたユニットA及び符号化されたユニットBを含んでよい。従って、符号化されたユニットAの動きベクトルは、別の制御点の動きベクトル予測値
Figure 0007351485000040
として決定されてよく、符号化されたユニットBの動きベクトルは、別の制御点の動きベクトル予測値
Figure 0007351485000041
として決定されてよい。
例えば、本実施形態において、q番目の動きベクトルグループに対応する固有値は、次式(7)を用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、決定されてよく、
Figure 0007351485000042
ここで、D(V)は、q番目の動きベクトルグループに対応する固有値であり、absは、絶対値関数であり、
Figure 0007351485000043
は、左下の頂点等の別の制御点の動きベクトル予測値の、水平予測方向における成分であり、
Figure 0007351485000044
は、左下の頂点等の別の制御点の動きベクトル予測値の、垂直予測方向における成分であり、kは、A及びBのいずれか一方であってよい。
任意で、符号化予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含んでよい。
符号化予定ユニットの動き予測モードが、並進動き予測モードを含む場合、制御点の数、即ち、Mは、1であってよい。符号化予定ユニットの動き予測モードが、アフィン動き予測モードを含む場合、制御点の数、即ち、Mは、1より大きくてよい。
本発明の実施形態2が、候補動きベクトルキューを決定する複数の実現プロセスを提供する。従って、符号化予定ユニットにおける各サンプルユニットの、候補動きベクトルキューから選択された最適な動きベクトルグループに基づいて決定される、予測サンプル値が、より正確であることがより良く保証され得、これにより、符号化精度が、より高く、最適な動きベクトルグループのインデックス識別子を符号化するために用いられるビットの数が、比較的小さく、符号化効率が、向上する。
本発明の実施形態3が、画像復号方法を提供する。画像復号方法は、先述の画像符号化方法に対応する復号方法である。画像復号方法は、画像復号装置によって実行されてよい。例えば、画像復号装置は、ソフトウェア及び/又はハードウェアの形態で、画像処理機能を有する電子デバイスに統合されてよい。例えば、電子デバイスは、インテリジェント端末、パーソナルコンピュータ、大衆消費電子製品、又はビデオサーバであってよい。図4は、本発明の実施形態3に係る、画像復号方法のフローチャートである。図4に示すとおり、本方法は、以下の段階を含んでよい。
S401:第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定する段階、N個の復号されたユニットの動き予測モードが、復号予定ユニットのそれと同じである。
S401の具体的な実現プロセスは、先述の実施形態におけるS101のそれと同様である。詳細はここでは再度説明しない。
S401において、第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定する段階の前、本方法は、
復号予定ユニットの動き予測モードを決定する段階
を更に含んでよい。
具体的には、復号予定ユニットの動き予測モードを決定する段階は、
復号予定ユニットの動き予測モードを取得するべく、復号予定ユニットに対応する構文要素を解析する段階
を含んでよい。解析する段階の後取得された構文要素affine‐merge‐flagが1である場合、復号予定ユニットの動き予測モードは、アフィン動き予測モードである。解析する段階の後取得された構文要素affine‐merge‐flagが0である場合、復号予定ユニットの動き予測モードは、並進動き予測モードである。
S402:第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階、nは、Nより大きくない任意の正の整数を有する。
S402の具体的な実現プロセスは、先述の実施形態におけるS102のそれと同様である。詳細はここでは再度説明しない。
S403:各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、復号予定ユニットに対応するビットストリームを復号する段階である。
具体的には、S403において、復号予定ユニットに対応するビットストリームは、復号されてよく、逆量子化(de-quantization)及び逆変換(inverse transformation)が、復号した後に取得された情報に対して連続的に実行され、更に、各サンプルユニットの予測残差及び最適動きベクトルグループのインデックス識別子は、取得される。逆変換は、先述の実施形態におけるS106における変換に対応する逆変換であってよい。逆量子化は、先述の実施形態におけるS106における量子化に対応する逆量子化であってよい。復号することは、S106における符号化することに対応する復号すること、例えば、エントロピー符号化に対応する復号することであってよい。
S404:最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階である。
最適な動きベクトルグループのインデックス識別子は、N個の動きベクトルグループにおける最適な動きベクトルグループのインデックス番号であってよい。
S405:第2の予め設定されたアルゴリズムを用いて、最適な動きベクトルグループに基づいて、復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階である。
S405において、復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階のプロセスは、先述の実施形態におけるS104のそれと同様であってよい。詳細はここでは再度説明しない。
S406:各サンプルユニットの予測サンプル値と各サンプルユニットの予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する段階である。
任意で、S402において、第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階は、
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する段階と、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する段階と
を含んでよく、
Mは、復号予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、復号予定ユニットの左上の頂点、及び右上の頂点を含む。
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの左下の頂点のサンプル座標(x,y)、及び復号予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000045
次式(2)を用いて、n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、復号予定ユニットの左上の頂点のサンプル座標(x,y)、及び復号予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000046
を含んでよい。
任意で、S404において、最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する段階と
を含んでよい。
任意で、予め設定されたソートルールは、N個の復号されたユニットの降順を含む。
代替的に、S404において、最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する段階は、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートする段階と、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、段階と、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階と、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する段階と
を含んでよい。
任意で、Q個の動きベクトルグループを生成する段階は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定する段階と、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成する段階と
を含んでよい。
任意で、Q個の動きベクトルグループを生成する段階は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定する段階と、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する復号されたユニットの数であり、Jは、正の整数である、段階と、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加する段階と
を含んでよい。
任意で、候補動きベクトルキューを生成するべくN個の動きベクトルグループの後にQ個の動きベクトルグループを追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートする段階と、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加する段階と
を含んでよい。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
差の絶対値を予め設定された成分閾値と比較する段階であって、予め設定された成分閾値は、予測方向における復号予定ユニットの範囲である、段階と、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含む。
任意で、q番目の動きベクトルグループに対応する固有値を決定する段階は、
隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定する段階であって、別の制御点に対応する復号されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、復号予定ユニットにおけるM個の制御点以外の任意の制御点である、段階と、
別の制御点に対応する復号されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定する段階と
を含んでよい。
任意で、復号予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。復号予定ユニットの動き予測モードが、並進動き予測モードを含む場合、制御点の数は、1である。復号予定ユニットの動き予測モードが、アフィン動き予測モードを含む場合、制御点の数は、1より大きい。
本発明の実施形態3において提供されている画像復号方法は、実施形態1及び実施形態2における画像符号化方法に対応する復号方法である。画像復号方法の有益な効果は、先述の実施形態のそれと同様である。詳細はここでは再度説明しない。
本発明の実施形態4が、画像符号化装置を提供する。図5は、本発明の実施形態4に係る、画像符号化装置の概略構造図である。図5に示すとおり、画像符号化装置500は、決定モジュール501と、計算モジュール502と、符号化モジュール503とを含む。
決定モジュール501は、第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定するように構成され、N個の符号化されたユニットの動き予測モードが、符号化予定ユニットのそれと同じであり、Nは、正の整数である。
計算モジュール502は、第1の予め設定されたアルゴリズムを用いて、決定モジュール501によって決定されたn番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成され、nは、Nより大きくない任意の正の整数を有する。
決定モジュール501は、第2の予め設定されたルールに従って、計算モジュール502によって取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定するように更に構成される。
計算モジュール502は、
第2の予め設定されたアルゴリズムを用いて、決定モジュールによって決定された最適な動きベクトルグループに基づいて、符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定する、
各サンプルユニットの元のサンプル値と各サンプルユニットの予測サンプル値との間の差に基づいて、各サンプルユニットの予測残差を決定する
ように更に構成される。
符号化モジュール503は、
符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を符号化する
ように構成され、
最適な動きベクトルグループのインデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる。
任意で、計算モジュール502は、具体的には、
第1の予め設定されたアルゴリズムを用いて、決定モジュール501によって決定されたn番目の符号化されたユニットの動きベクトルと、n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、符号化予定ユニットのM個の制御点の動きベクトル予測値を決定する、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する
ように構成され、
Mは、符号化予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、符号化予定ユニットの左上の頂点及び右上の頂点を含み、
計算モジュール502は、具体的には、
次式(1)を用いて、決定モジュール501によって決定されたn番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの左下の頂点のサンプル座標(x,y)、及び符号化予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000047
計算モジュール502は、
次式(2)を用いて、決定モジュール501によって決定されたn番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の符号化されたユニットの左上の頂点のサンプル座標(x,y)、n番目の符号化されたユニットの右上の頂点のサンプル座標(x,y)、符号化予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、符号化予定ユニットの左上の頂点のサンプル座標(x,y)、及び符号化予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、符号化予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000048
任意で、決定モジュール501は、具体的には、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートする、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定する、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定する
ように構成される。
任意で、予め設定されたソートルールは、N個の符号化されたユニットの降順を含む。
任意で、決定モジュール501は、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加することと、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
前の予め設定された数の動きベクトルグループの各々と符号化予定ユニットとの間のマッチング誤差を決定することと、
マッチング誤差が最小である1つの動きベクトルグループを最適な動きベクトルグループとして決定することと
を行うように更に構成される。
任意で、決定モジュール501は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定することと、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成することと
を行うように更に構成される。
任意で、決定モジュール501は、
隣接する符号化されたユニットから、符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、m番目の制御点に対応する符号化されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する符号化されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定することと、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する符号化されたユニットの数であり、Jは、正の整数である、決定することと、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュール501は、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートすることと
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュール501は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
差の絶対値を予め設定された成分閾値と比較することであって、予め設定された成分閾値は、予測方向における符号化予定ユニットの範囲である、比較することと、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、決定モジュール501は、
隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定することであって、別の制御点に対応する符号化されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、符号化予定ユニットにおけるM個の制御点以外の任意の制御点である、決定することと、
別の制御点に対応する符号化されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、符号化予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態4において提供されている画像符号化装置は、実施形態1又は実施形態2のいずれか一方における画像符号化方法を実行するように構成されてよい。具体的な実現プロセス及び有益な効果は、先述の実施形態のそれらと同様である。詳細はここでは再度説明しない。
本発明の実施形態5が、画像復号装置を更に提供する。図6は、本発明の実施形態5に係る、画像復号装置の概略構造図である。図6に示すとおり、画像復号装置600は、決定モジュール601と、計算モジュール602と、復号モジュール603とを含んでよい。
決定モジュール601は、第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定するように構成され、N個の復号されたユニットの動き予測モードが、復号予定ユニットのそれと同じであり、Nは、正の整数である。
計算モジュール602は、第1の予め設定されたアルゴリズムを用いて、決定モジュール601によって決定されたn番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成され、nは、Nより大きくない任意の正の整数を有する。
復号モジュール603は、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、復号予定ユニットに対応するビットストリームを復号する
ように構成される。
決定モジュール601は、
復号モジュール603によって決定された最適な動きベクトルグループのインデックス識別子に基づいて、N個の動きベクトルグループにおける最適な動きベクトルグループを決定する
ように更に構成される。
計算モジュール602は、
第2の予め設定されたアルゴリズムを用いて、決定モジュール601によって決定された最適な動きベクトルグループに基づいて、復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する、
各サンプルユニットの予測サンプル値と各サンプルユニットの予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する
ように更に構成される。
任意で、計算モジュール602は、具体的には、
第1の予め設定されたアルゴリズムを用いて、決定モジュール601によって決定されたn番目の復号されたユニットの動きベクトルと、n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、復号予定ユニットのM個の制御点の動きベクトル予測値を決定する、
M個の制御点の動きベクトル予測値に基づいてn番目の動きベクトルグループを生成する
ように構成され、
Mは、復号予定ユニットの動き予測モードに基づいて決定される正の整数である。
任意で、M個の制御点は、復号予定ユニットの左上の頂点及び右上の頂点を含み、
計算モジュール602は、具体的には、
次式(1)を用いて、決定モジュール601によって決定されたn番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの左下の頂点のサンプル座標(x,y)、及び復号予定ユニットの左上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000049
具体的には、計算モジュール602は、
次式(2)を用いて、決定モジュール601によって決定されたn番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、n番目の復号されたユニットの左上の頂点のサンプル座標(x,y)、n番目の復号されたユニットの右上の頂点のサンプル座標(x,y)、復号予定ユニットの左上の頂点の動きベクトル予測値(vx0,vy0)、復号予定ユニットの左上の頂点のサンプル座標(x,y)、及び復号予定ユニットの上の頂点のサンプル座標(x,y)に基づいて、復号予定ユニットの右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000050
任意で、決定モジュール601は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従ってN個の動きベクトルグループをソートし、
Nが予め設定された値より大きいか又はそれに等しい場合、候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定し、
最適な動きベクトルグループのインデックス識別子に基づいて、前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定する
ように更に構成される。
任意で、予め設定されたソートルールは、N個の復号されたユニットの降順を含む。
任意で、決定モジュール601は、
予め設定されたソートルールに従ってN個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、N個の動きベクトルグループの後にQ個の動きベクトルグループを追加することと、
候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
最適な動きベクトルグループのインデックス識別子に基づいて前の予め設定された数の動きベクトルグループにおける最適な動きベクトルグループを決定することと
を行うように更に構成される。
任意で、決定モジュール601は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の動きベクトル予測値として決定することと、
M個の制御点の動きベクトル予測値に基づいてQ個の動きベクトルグループを生成することと
を行うように更に構成される。
任意で、決定モジュール601は、
隣接する復号されたユニットから、復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、m番目の制御点に対応する復号されたユニットとm番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
m番目の制御点に対応する復号されたユニットの動きベクトルを、m番目の制御点の第1の動きベクトル予測値として決定することと、
M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、隣接する復号されたユニットの数であり、Jは、正の整数である、決定することと、
M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
Q個の動きベクトルグループを生成するべく、L個の第2の動きベクトルグループの後にK個の第1の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュール601は、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
Q個の動きベクトルグループに対応する固有値に基づいて昇順にQ個の動きベクトルグループをソートすることと、
候補動きベクトルキューを生成するべく、ソートされたN個の動きベクトルグループの後にソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される。
任意で、決定モジュール601は、
M個の制御点における隣接する制御点の、q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
差の絶対値を予め設定された成分閾値と比較することであって、予め設定された成分閾値は、予測方向における復号予定ユニットの範囲である、比較することと、
差の絶対値が、予め設定された成分閾値より小さいか又はそれに等しい場合、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、決定モジュール601は、
隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定することであって、別の制御点に対応する復号されたユニットと別の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、別の制御点は、復号予定ユニットにおけるM個の制御点以外の任意の制御点である、決定することと、
別の制御点に対応する復号されたユニットの動きベクトルを、別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、別の制御点の動きベクトル予測値と、q番目の動きベクトルグループにおける、M個の制御点の、動きベクトル予測値とに基づいて、q番目の動きベクトルグループに対応する固有値を決定することと
を行うように更に構成される。
任意で、復号予定ユニットの動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む。
本発明の実施形態5において提供されている画像復号装置は、実施形態3において提供されている画像復号方法を実行してよい。具体的な実現プロセス及び有益な効果は、先述の実施形態のそれらと同様である。詳細はここでは再度説明しない。
本発明の実施形態6が、画像符号化装置を提供する。図7は、本発明の実施形態6に係る、画像符号化装置の概略構造図である。図7に示すとおり、画像符号化装置700は、プロセッサ701と、メモリ702と、通信インタフェース703と、バス704とを含む。プロセッサ701は、バス704を用いてメモリ702及び通信インタフェース703に接続されている。
メモリ702は、命令を格納するように構成される。
プロセッサ701は、命令を実行するように構成される。プロセッサ701が、メモリ702に格納された命令を実行する場合に、プロセッサ701は、実施形態1又は実施形態2のいずれか一方における画像符号化方法を実行する。
本発明の実施形態6において提供されている画像符号化装置は、実施形態1又は実施形態2において提供されている画像符号化方法を実行してよい。具体的な実現プロセス及び有益な効果は、先述の実施形態のそれらと同様である。詳細はここでは再度説明しない。
本発明の実施形態7が、画像復号装置を提供する。図8は、本発明の実施形態7に係る、画像復号装置の概略構造図である。図8に示すとおり画像復号装置800は、プロセッサ801と、メモリ802と、通信インタフェース803と、バス804とを含んでよい。プロセッサ801は、バス804を用いてメモリ802及び通信インタフェース803に接続されている。
メモリ802は、命令を格納するように構成される。
プロセッサ801は、命令を実行するように構成される。プロセッサ801が、メモリ802に格納された命令を実行する場合に、プロセッサ801は、実施形態3における画像復号方法を実行する。
本発明の実施形態7において提供されている画像復号装置は、実施形態3において提供されている画像復号方法を実行してよい。具体的な実現プロセス及び有益な効果は、先述の実施形態のそれらと同様である。詳細はここでは再度説明しない。
当業者であれば、方法の実施形態の段階の全て又はいくつかが、関連するハードウェアに命令するプログラムにより実装され得ることを理解し得る。プログラムは、コンピュータ可読記憶媒体に格納されてよい。プログラムが起動するとき、方法の実施形態の段階が実行される。先述の記憶媒体は、ROM、RAM、磁気ディスク、又は光ディスク等、プログラムコードを格納できる任意の媒体を含む。
最後に、先述の実施形態は、本発明の技術的解決手段を説明することを意図したものに過ぎず、本発明を限定することを意図したものではないことに留意されたい。本発明は、先述の実施形態を参照して詳細に説明されたが、当業者であれば更に、本発明の実施形態の技術的解決手段の範囲から逸脱することなく、先述の実施形態において説明された技術的解決手段に対して変更を施し得る、又は、これらのいくつか若しくは全ての技術的特徴に対して等価な置き換えを成し得ることを理解すべきである。
(項目1)
第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定する段階であって、前記N個の符号化されたユニットの動き予測モードが、前記符号化予定ユニットのそれと同じであり、Nは、正の整数である、段階と、
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階であって、nは、Nより大きくない任意の正の整数を有する、段階と、
第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして決定する段階と、
第2の予め設定されたアルゴリズムを用いて、前記最適な動きベクトルグループに基づいて、前記符号化予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階と、
各サンプルユニットの元のサンプル値と各サンプルユニットの前記予測サンプル値との間の差に基づいて、各サンプルユニットの予測残差を決定する段階と、
前記符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの前記予測残差及び前記最適な動きベクトルグループのインデックス識別子を符号化する段階であって、前記最適な動きベクトルグループの前記インデックス識別子は、復号装置に、各サンプルユニットの前記予測サンプル値を決定するように命令するために用いられる、段階と
を備える
画像符号化方法。
(項目2)
第1の予め設定されたアルゴリズムを用いて、n番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを前記生成する段階は、
前記第1の予め設定されたアルゴリズムを用いて、前記n番目の符号化されたユニットの前記動きベクトルと、前記n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記符号化予定ユニットの前記M個の制御点の動きベクトル予測値を決定する段階であって、Mは、前記符号化予定ユニットの前記動き予測モードに基づいて決定される正の整数である、段階と、
前記M個の制御点の前記動きベクトル予測値に基づいて前記n番目の動きベクトルグループを生成する段階と
を備える、項目1に記載の方法。
(項目3)
前記M個の制御点は、前記符号化予定ユニットの左上の頂点及び右上の頂点を有し、
前記第1の予め設定されたアルゴリズムを用いて、前記n番目の符号化されたユニットの前記動きベクトルと、前記n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記符号化予定ユニットの前記M個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、前記n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、前記n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、前記n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、前記n番目の符号化されたユニットの前記左上の頂点のサンプル座標(x,y)、前記n番目の符号化されたユニットの前記右上の頂点のサンプル座標(x,y)、前記n番目の符号化されたユニットの前記左下の頂点のサンプル座標(x,y)、及び前記符号化予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記符号化予定ユニットの前記左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000051
次式(2)を用いて、前記n番目の符号化されたユニットの前記左上の頂点の前記動きベクトル(vx2,vy2)、前記n番目の符号化されたユニットの前記右上の頂点の前記動きベクトル(vx3,vy3)、前記n番目の符号化されたユニットの前記左上の頂点の前記サンプル座標(x,y)、前記n番目の符号化されたユニットの前記右上の頂点の前記サンプル座標(x,y)、前記符号化予定ユニットの前記左上の頂点の前記動きベクトル予測値(vx0,vy0)、前記符号化予定ユニットの前記左上の頂点の前記サンプル座標(x,y)、及び前記符号化予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記符号化予定ユニットの前記右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000052
を備える
、項目2に記載の方法。
(項目4)
第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして前記決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従って前記N個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前の前記予め設定された数の動きベクトルグループの各々と前記符号化予定ユニットとの間のマッチング誤差を決定する段階と、
マッチング誤差が最小である1つの動きベクトルグループを前記最適な動きベクトルグループとして決定する段階と
を備える、項目2又は3に記載の方法。
(項目5)
前記予め設定されたソートルールは、前記N個の符号化されたユニットの降順を含む、項目4に記載の方法。
(項目6)
第2の予め設定されたルールに従って、取得されたN個の動きベクトルグループから、1つの動きベクトルグループを最適な動きベクトルグループとして前記決定する段階は、
予め設定されたソートルールに従って前記N個の動きベクトルグループをソートする段階と、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、前記予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、段階と、
候補動きベクトルキューを生成するべく、前記N個の動きベクトルグループの後に前記Q個の動きベクトルグループを追加する段階と、
前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前の前記予め設定された数の動きベクトルグループの各々と前記符号化予定ユニットとの間のマッチング誤差を決定する段階と、
マッチング誤差が最小である1つの動きベクトルグループを前記最適な動きベクトルグループとして決定する段階と
を備える、項目2又は3に記載の方法。
(項目7)
Q個の動きベクトルグループを前記生成する段階は、
前記隣接する符号化されたユニットから、前記符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、前記m番目の制御点に対応する前記符号化されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
前記m番目の制御点に対応する前記符号化されたユニットの動きベクトルを、前記m番目の制御点の動きベクトル予測値として決定する段階と、
前記M個の制御点の前記動きベクトル予測値に基づいて前記Q個の動きベクトルグループを生成する段階と
を備える、項目6に記載の方法。
(項目8)
Q個の動きベクトルグループを前記生成する段階は、
前記隣接する符号化されたユニットから、前記符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定する段階であって、前記m番目の制御点に対応する前記符号化されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
前記m番目の制御点に対応する前記符号化されたユニットの動きベクトルを、前記m番目の制御点の第1の動きベクトル予測値として決定する段階と、
前記M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
前記隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、前記m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、前記隣接する符号化されたユニットの数であり、Jは、正の整数である、段階と、
前記M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
前記Q個の動きベクトルグループを生成するべく、前記L個の第2の動きベクトルグループの後に前記K個の第1の動きベクトルグループを追加する段階と
を備える、項目6に記載の方法。
(項目9)
候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記Q個の動きベクトルグループを前記追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
前記Q個の動きベクトルグループに対応する固有値に基づいて昇順に前記Q個の動きベクトルグループをソートする段階と、
前記候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記ソートされたQ個の動きベクトルグループを追加する段階と
を備える、項目6から8の何れか一項に記載の方法。
(項目10)
q番目の動きベクトルグループに対応する固有値を前記決定する段階は、
前記M個の制御点における隣接する制御点の、前記q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
前記差の絶対値を予め設定された成分閾値と比較する段階であって、前記予め設定された成分閾値は、前記予測方向における前記符号化予定ユニットの範囲である、段階と、
前記差の前記絶対値が、前記予め設定された成分閾値より小さいか又はそれに等しい場合、前記q番目の動きベクトルグループに対応する前記固有値を決定する段階と
を備える、項目9に記載の方法。
(項目11)
q番目の動きベクトルグループに対応する固有値を前記決定する段階は、
前記隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定する段階であって、前記別の制御点に対応する前記符号化されたユニットと前記別の制御点との間の距離は、前記予め設定された距離より小さいか又はそれに等しく、前記別の制御点は、前記符号化予定ユニットにおける前記M個の制御点以外の任意の制御点である、段階と、
前記別の制御点に対応する前記符号化されたユニットの動きベクトルを、前記別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、前記別の制御点の前記動きベクトル予測値と、前記q番目の動きベクトルグループにおける、前記M個の制御点の、動きベクトル予測値とに基づいて、前記q番目の動きベクトルグループに対応する前記固有値を決定する段階と
を備える、項目9又は10に記載の方法。
(項目12)
前記符号化予定ユニットの前記動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む、項目1から11の何れか一項に記載の方法。
(項目13)
第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定する段階であって、前記N個の復号されたユニットの動き予測モードが、前記復号予定ユニットのそれと同じであり、Nは、正の整数である、段階と、
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成する段階であって、nは、Nより大きくない任意の正の整数を有する、段階と、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、前記復号予定ユニットに対応するビットストリームを復号する段階と、
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、N個の動きベクトルグループにおける前記最適な動きベクトルグループを決定する段階と、
第2の予め設定されたアルゴリズムを用いて、前記最適な動きベクトルグループに基づいて、前記復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する段階と、
各サンプルユニットの前記予測サンプル値と各サンプルユニットの前記予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する段階と
を備える
画像復号方法。
(項目14)
第1の予め設定されたアルゴリズムを用いて、n番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを前記生成する段階は、
前記第1の予め設定されたアルゴリズムを用いて、前記n番目の復号されたユニットの前記動きベクトルと、前記n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記復号予定ユニットの前記M個の制御点の動きベクトル予測値を決定する段階であって、Mは、前記復号予定ユニットの前記動き予測モードに基づいて決定される正の整数である、段階と、
前記M個の制御点の前記動きベクトル予測値に基づいて前記n番目の動きベクトルグループを生成する段階と
を備える、項目13に記載の方法。
(項目15)
前記M個の制御点は、前記復号予定ユニットの左上の頂点及び右上の頂点を有し、
前記第1の予め設定されたアルゴリズムを用いて、前記n番目の復号されたユニットの前記動きベクトルと、前記n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記復号予定ユニットの前記M個の制御点の動きベクトル予測値を決定する段階は、
次式(1)を用いて、前記n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、前記n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、前記n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、前記n番目の復号されたユニットの前記左上の頂点のサンプル座標(x,y)、前記n番目の復号されたユニットの前記右上の頂点のサンプル座標(x,y)、前記n番目の復号されたユニットの前記左下の頂点のサンプル座標(x,y)、及び前記復号予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記復号予定ユニットの前記左上の頂点の動きベクトル予測値(vx0,vy0)を決定する段階と、
Figure 0007351485000053
次式(2)を用いて、前記n番目の復号されたユニットの前記左上の頂点の前記動きベクトル(vx2,vy2)、前記n番目の復号されたユニットの前記右上の頂点の前記動きベクトル(vx3,vy3)、前記n番目の復号されたユニットの前記左上の頂点の前記サンプル座標(x,y)、前記n番目の復号されたユニットの前記右上の頂点の前記サンプル座標(x,y)、前記復号予定ユニットの前記左上の頂点の前記動きベクトル予測値(vx0,vy0)、前記復号予定ユニットの前記左上の頂点の前記サンプル座標(x,y)、及び前記復号予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記復号予定ユニットの前記右上の頂点の動きベクトル予測値(vx1,vy1)を決定する段階と、
Figure 0007351485000054
を備える、項目14に記載の方法。
(項目16)
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、N個の動きベクトルグループにおける前記最適な動きベクトルグループを前記決定する段階は、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従って前記N個の動きベクトルグループをソートする段階と、
Nが予め設定された値より大きいか又はそれに等しい場合、前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、前の前記予め設定された数の動きベクトルグループにおける前記最適な動きベクトルグループを決定する段階と
を備える、項目14又は15に記載の方法。
(項目17)
前記予め設定されたソートルールは、前記N個の復号されたユニットの降順を含む、項目16に記載の方法。
(項目18)
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、N個の動きベクトルグループにおける前記最適な動きベクトルグループを前記決定する段階は、
予め設定されたソートルールに従って前記N個の動きベクトルグループをソートする段階と、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成する段階であって、NとQとの和は、前記予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、段階と、
候補動きベクトルキューを生成するべく、前記N個の動きベクトルグループの後に前記Q個の動きベクトルグループを追加する段階と、
前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する段階と、
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、前の前記予め設定された数の動きベクトルグループにおける前記最適な動きベクトルグループを決定する段階と
を備える、項目14又は15に記載の方法。
(項目19)
Q個の動きベクトルグループを前記生成する段階は、
前記隣接する復号されたユニットから、前記復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、前記m番目の制御点に対応する前記復号されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
前記m番目の制御点に対応する前記復号されたユニットの動きベクトルを、前記m番目の制御点の動きベクトル予測値として決定する段階と、
前記M個の制御点の前記動きベクトル予測値に基づいて前記Q個の動きベクトルグループを生成する段階と
を備える、項目18に記載の方法。
(項目20)
Q個の動きベクトルグループを前記生成する段階は、
前記隣接する復号されたユニットから、前記復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定する段階であって、前記m番目の制御点に対応する前記復号されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、段階と、
前記m番目の制御点に対応する前記復号されたユニットの動きベクトルを、前記m番目の制御点の第1の動きベクトル予測値として決定する段階と、
前記M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成する段階と、
前記隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、前記m番目の制御点の第2の動きベクトル予測値として決定する段階であって、jは、1,...,又はJのいずれか1つであり、Jは、前記隣接する復号されたユニットの数であり、Jは、正の整数である、段階と、
前記M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成する段階と、
前記Q個の動きベクトルグループを生成するべく、前記L個の第2の動きベクトルグループの後に前記K個の第1の動きベクトルグループを追加する段階と
を備える、項目18に記載の方法。
(項目21)
候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記Q個の動きベクトルグループを前記追加する段階は、
q番目の動きベクトルグループに対応する固有値を決定する段階であって、qは、Qより大きくない任意の正の整数を有する、段階と、
前記Q個の動きベクトルグループに対応する固有値に基づいて昇順に前記Q個の動きベクトルグループをソートする段階と、
前記候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記ソートされたQ個の動きベクトルグループを追加する段階と
を備える、項目18から20の何れか一項に記載の方法。
(項目22)
q番目の動きベクトルグループに対応する固有値を前記決定する段階は、
前記M個の制御点における隣接する制御点の、前記q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定する段階と、
前記差の絶対値を予め設定された成分閾値と比較する段階であって、前記予め設定された成分閾値は、前記予測方向における前記復号予定ユニットの範囲である、段階と、
前記差の前記絶対値が、前記予め設定された成分閾値より小さいか又はそれに等しい場合、前記q番目の動きベクトルグループに対応する前記固有値を決定する段階と
を備える、項目21に記載の方法。
(項目23)
q番目の動きベクトルグループに対応する固有値を前記決定する段階は、
前記隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定する段階であって、前記別の制御点に対応する前記復号されたユニットと前記別の制御点との間の距離は、前記予め設定された距離より小さいか又はそれに等しく、前記別の制御点は、前記復号予定ユニットにおける前記M個の制御点以外の任意の制御点である、段階と、
前記別の制御点に対応する前記復号されたユニットの動きベクトルを、前記別の制御点の動きベクトル予測値として決定する段階と、
第3の予め設定されたアルゴリズムを用いて、前記別の制御点の前記動きベクトル予測値と、前記q番目の動きベクトルグループにおける、前記M個の制御点の、動きベクトル予測値とに基づいて、前記q番目の動きベクトルグループに対応する前記固有値を決定する段階と
を備える、項目21又は22に記載の方法。
(項目24)
前記復号予定ユニットの前記動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む、項目13から23の何れか一項に記載の方法。
(項目25)
第1の予め設定されたルールに従って、符号化予定ユニットの隣接する符号化されたユニットからN個の符号化されたユニットを決定するように構成される決定モジュールであって、前記N個の符号化されたユニットの動き予測モードが、前記符号化予定ユニットのそれと同じであり、Nは、正の整数である、決定モジュールと、
第1の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定されたn番目の符号化されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成される計算モジュールであって、nは、Nより大きくない任意の正の整数を有する、計算モジュールと、
前記符号化予定ユニットに対応するビットストリームを取得するべく、各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を符号化するように構成される符号化モジュールであって、前記最適な動きベクトルグループの前記インデックス識別子は、復号装置に、各サンプルユニットの予測サンプル値を決定するように命令するために用いられる、符号化モジュールと
を備え、
前記決定モジュールは、第2の予め設定されたルールに従って、前記計算モジュールによって取得されたN個の動きベクトルグループから、1つの動きベクトルグループを前記最適な動きベクトルグループとして決定するように更に構成され、
前記計算モジュールは、
第2の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定された前記最適な動きベクトルグループに基づいて、前記符号化予定ユニットにおける各サンプルユニットの前記予測サンプル値を決定する、
各サンプルユニットの元のサンプル値と各サンプルユニットの前記予測サンプル値との間の差に基づいて、各サンプルユニットの前記予測残差を決定する
ように更に構成される、
画像符号化装置。
(項目26)
前記計算モジュールは、具体的には、
前記第1の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定された前記n番目の符号化されたユニットの前記動きベクトルと、前記n番目の符号化されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記復号予定ユニットの前記M個の制御点の動きベクトル予測値を決定する、
前記M個の制御点の前記動きベクトル予測値に基づいて前記n番目の動きベクトルグループを生成する
ように構成され、
Mは、前記符号化予定ユニットの前記動き予測モードに基づいて決定される正の整数である、
項目25に記載の画像符号化装置。
(項目27)
前記M個の制御点は、前記符号化予定ユニットの左上の頂点及び右上の頂点を有し、
前記計算モジュールは、具体的には、
次式(1)を用いて、前記決定モジュールによって決定された前記n番目の符号化されたユニットの左上の頂点の動きベクトル(vx2,vy2)、前記n番目の符号化されたユニットの右上の頂点の動きベクトル(vx3,vy3)、前記n番目の符号化されたユニットの左下の頂点の動きベクトル(vx4,vy4)、前記n番目の符号化されたユニットの前記左上の頂点のサンプル座標(x,y)、前記n番目の符号化されたユニットの前記右上の頂点のサンプル座標(x,y)、前記n番目の符号化されたユニットの前記左下の頂点のサンプル座標(x,y)、及び前記符号化予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記符号化予定ユニットの前記左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000055
前記計算モジュールは、
次式(2)を用いて、前記決定モジュールによって決定された前記n番目の符号化されたユニットの前記左上の頂点の前記動きベクトル(vx2,vy2)、前記n番目の符号化されたユニットの前記右上の頂点の前記動きベクトル(vx3,vy3)、前記n番目の符号化されたユニットの前記左上の頂点の前記サンプル座標(x,y)、前記n番目の符号化されたユニットの前記右上の頂点の前記サンプル座標(x,y)、前記符号化予定ユニットの前記左上の頂点の前記動きベクトル予測値(vx0,vy0)、前記符号化予定ユニットの前記左上の頂点の前記サンプル座標(x,y)、及び前記符号化予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記符号化予定ユニットの前記右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000056
、項目26に記載の画像符号化装置。
(項目28)
前記決定モジュールは、具体的には、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従って前記N個の動きベクトルグループをソートする、
Nが予め設定された値より大きいか又はそれに等しい場合、前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定する、
前の前記予め設定された数の動きベクトルグループの各々と前記符号化予定ユニットとの間のマッチング誤差を決定する、
マッチング誤差が最小である1つの動きベクトルグループを前記最適な動きベクトルグループとして決定する
ように構成される、項目26又は27に記載の画像符号化装置。
(項目29)
前記予め設定されたソートルールは、前記N個の符号化されたユニットの降順を含む、項目28に記載の装置。
(項目30)
前記決定モジュールは、
予め設定されたソートルールに従って前記N個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、前記予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、前記N個の動きベクトルグループの後に前記Q個の動きベクトルグループを追加することと、
前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
前の前記予め設定された数の動きベクトルグループの各々と前記符号化予定ユニットとの間のマッチング誤差を決定することと、
マッチング誤差が最小である1つの動きベクトルグループを前記最適な動きベクトルグループとして決定することと
を行うように更に構成される、項目26又は27に記載の装置。
(項目31)
前記決定モジュールは、
前記隣接する符号化されたユニットから、前記符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、前記m番目の制御点に対応する前記符号化されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
前記m番目の制御点に対応する前記符号化されたユニットの動きベクトルを、前記m番目の制御点の動きベクトル予測値として決定することと、
前記M個の制御点の前記動きベクトル予測値に基づいて前記Q個の動きベクトルグループを生成することと
を行うように更に構成される、項目30に記載の画像符号化装置。
(項目32)
前記決定モジュールは、
前記隣接する符号化されたユニットから、前記符号化予定ユニットにおけるm番目の制御点に対応する符号化されたユニットを決定することであって、前記m番目の制御点に対応する前記符号化されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
前記m番目の制御点に対応する前記符号化されたユニットの動きベクトルを、前記m番目の制御点の第1の動きベクトル予測値として決定することと、
前記M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
前記隣接する符号化されたユニットにおけるj番目の符号化されたユニットの動きベクトルを、前記m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、前記隣接する符号化されたユニットの数であり、Jは、正の整数である、決定することと、
前記M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
前記Q個の動きベクトルグループを生成するべく、前記L個の第2の動きベクトルグループの後に前記K個の第1の動きベクトルグループを追加することと
を行うように更に構成される、項目30に記載の画像符号化装置。
(項目33)
前記決定モジュールは、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
前記Q個の動きベクトルグループに対応する固有値に基づいて昇順に前記Q個の動きベクトルグループをソートすることと、
前記候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記ソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される、項目30から32の何れか一項に記載の画像符号化装置。
(項目34)
前記決定モジュールは、
前記M個の制御点における隣接する制御点の、前記q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
前記差の絶対値を予め設定された成分閾値と比較することであって、前記予め設定された成分閾値は、前記予測方向における前記符号化予定ユニットの範囲である、比較することと、
前記差の前記絶対値が、前記予め設定された成分閾値より小さいか又はそれに等しい場合、前記q番目の動きベクトルグループに対応する前記固有値を決定することと
を行うように更に構成される、項目33に記載の画像符号化装置。
(項目35)
前記決定モジュールは、
前記隣接する符号化されたユニットから、別の制御点に対応する符号化されたユニットを決定することであって、前記別の制御点に対応する前記符号化されたユニットと前記別の制御点との間の距離は、前記予め設定された距離より小さいか又はそれに等しく、前記別の制御点は、前記符号化予定ユニットにおける前記M個の制御点以外の任意の制御点である、決定することと、
前記別の制御点に対応する前記符号化されたユニットの動きベクトルを、前記別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、前記別の制御点の前記動きベクトル予測値と、前記q番目の動きベクトルグループにおける、前記M個の制御点の、動きベクトル予測値とに基づいて、前記q番目の動きベクトルグループに対応する前記固有値を決定することと
を行うように更に構成される、項目33又は34に記載の画像符号化装置。
(項目36)
前記符号化予定ユニットの前記動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む、項目25から35の何れか一項に記載の画像符号化装置。
(項目37)
第1の予め設定されたルールに従って、復号予定ユニットの隣接する復号されたユニットからN個の復号されたユニットを決定するように構成される決定モジュールであって、前記N個の復号されたユニットの動き予測モードが、前記復号予定ユニットのそれと同じであり、Nは、正の整数である、決定モジュールと、
第1の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定されたn番目の復号されたユニットの動きベクトルに基づいて、n番目の動きベクトルグループを生成するように構成される計算モジュールであって、nは、Nより大きくない任意の正の整数を有する、計算モジュールと、
各サンプルユニットの予測残差及び最適な動きベクトルグループのインデックス識別子を取得するべく、前記復号予定ユニットに対応するビットストリームを復号するように構成される復号モジュールと
を備え、
前記決定モジュールは、前記復号モジュールによって決定された前記最適な動きベクトルグループの前記インデックス識別子に基づいて、N個の動きベクトルグループにおける前記最適な動きベクトルグループを決定するように更に構成され、
前記計算モジュールは、第2の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定された前記最適な動きベクトルグループに基づいて、前記復号予定ユニットにおける各サンプルユニットの予測サンプル値を決定する、
各サンプルユニットの前記予測サンプル値と各サンプルユニットの前記予測残差との和に基づいて、各サンプルユニットの再構成サンプル値を決定する
ように更に構成される、
画像復号装置。
(項目38)
前記計算モジュールは、具体的には、
前記第1の予め設定されたアルゴリズムを用いて、前記決定モジュールによって決定された前記n番目の復号されたユニットの前記動きベクトルと、前記n番目の復号されたユニットのサンプル座標と、M個の制御点のサンプル座標とに基づいて、前記復号予定ユニットの前記M個の制御点の動きベクトル予測値を決定する、
前記M個の制御点の前記動きベクトル予測値に基づいて前記n番目の動きベクトルグループを生成する
ように構成され、
Mは、前記復号予定ユニットの前記動き予測モードに基づいて決定される正の整数である、
項目37に記載の画像復号装置。
(項目39)
前記M個の制御点は、前記復号予定ユニットの左上の頂点及び右上の頂点を有し、
前記計算モジュールは、具体的には、
次式(1)を用いて、前記決定モジュールによって決定された前記n番目の復号されたユニットの左上の頂点の動きベクトル(vx2,vy2)、前記n番目の復号されたユニットの右上の頂点の動きベクトル(vx3,vy3)、前記n番目の復号されたユニットの左下の頂点の動きベクトル(vx4,vy4)、前記n番目の復号されたユニットの前記左上の頂点のサンプル座標(x,y)、前記n番目の復号されたユニットの前記右上の頂点のサンプル座標(x,y)、前記n番目の復号されたユニットの前記左下の頂点のサンプル座標(x,y)、及び前記復号予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記復号予定ユニットの前記左上の頂点の動きベクトル予測値(vx0,vy0)を決定する
ように構成され、
Figure 0007351485000057
具体的には、前記計算モジュールは、
次式(2)を用いて、前記決定モジュールによって決定された前記n番目の復号されたユニットの前記左上の頂点の前記動きベクトル(vx2,vy2)、前記n番目の復号されたユニットの前記右上の頂点の前記動きベクトル(vx3,vy3)、前記n番目の復号されたユニットの前記左上の頂点の前記サンプル座標(x,y)、前記n番目の復号されたユニットの前記右上の頂点の前記サンプル座標(x,y)、前記復号予定ユニットの前記左上の頂点の動きベクトル予測値(vx0,vy0)、前記復号予定ユニットの前記左上の頂点のサンプル座標(x,y)、及び前記復号予定ユニットの前記左上の頂点のサンプル座標(x,y)に基づいて、前記復号予定ユニットの前記右上の頂点の動きベクトル予測値(vx1,vy1)を決定する
ように更に構成される、
Figure 0007351485000058
、項目38に記載の画像復号装置。
(項目40)
前記決定モジュールは、
候補動きベクトルキューを生成するべく、予め設定されたソートルールに従って前記N個の動きベクトルグループをソートし、
Nが予め設定された値より大きいか又はそれに等しい場合、前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定し、
前記最適な動きベクトルグループの前記インデックス識別子に基づいて、前の前記予め設定された数の動きベクトルグループにおける前記最適な動きベクトルグループを決定する
ように更に構成される、項目38又は39に記載の画像復号装置。
(項目41)
前記予め設定されたソートルールは、前記N個の復号されたユニットの降順を含む、項目40に記載の画像復号装置。
(項目42)
前記決定モジュールは、
予め設定されたソートルールに従って前記N個の動きベクトルグループをソートすることと、
Nが予め設定された値より小さい場合、Q個の動きベクトルグループを生成することであって、NとQとの和は、前記予め設定された値より大きいか又はそれに等しく、Qは、正の整数である、生成することと、
候補動きベクトルキューを生成するべく、前記N個の動きベクトルグループの後に前記Q個の動きベクトルグループを追加することと、
前記候補動きベクトルキューの前の予め設定された数の動きベクトルグループを決定することと、
前記最適な動きベクトルグループの前記インデックス識別子に基づいて前の前記予め設定された数の動きベクトルグループにおける前記最適な動きベクトルグループを決定することと
を行うように更に構成される、項目40又は41に記載の画像復号装置。
(項目43)
前記決定モジュールは、
前記隣接する復号されたユニットから、前記復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、前記m番目の制御点に対応する前記復号されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
前記m番目の制御点に対応する前記復号されたユニットの動きベクトルを、前記m番目の制御点の動きベクトル予測値として決定することと、
前記M個の制御点の前記動きベクトル予測値に基づいて前記Q個の動きベクトルグループを生成することと
を行うように更に構成される、項目42に記載の画像復号装置。
(項目44)
前記決定モジュールは、
前記隣接する復号されたユニットから、前記復号予定ユニットにおけるm番目の制御点に対応する復号されたユニットを決定することであって、前記m番目の制御点に対応する前記復号されたユニットと前記m番目の制御点との間の距離は、予め設定された距離より小さいか又はそれに等しく、mは、Mより大きくない任意の正の整数を有する、決定することと、
前記m番目の制御点に対応する前記復号されたユニットの動きベクトルを、前記m番目の制御点の第1の動きベクトル予測値として決定することと、
前記M個の制御点の第1の動きベクトル予測値に基づいてK個の第1の動きベクトルグループを生成することと、
前記隣接する復号されたユニットにおけるj番目の復号されたユニットの動きベクトルを、前記m番目の制御点の第2の動きベクトル予測値として決定することであって、jは、1,...,又はJのいずれか1つであり、Jは、前記隣接する復号されたユニットの数であり、Jは、正の整数である、決定することと、
前記M個の制御点の第2の動きベクトル予測値に基づいてL個の第2の動きベクトルグループを生成することと、
前記Q個の動きベクトルグループを生成するべく、前記L個の第2の動きベクトルグループの後に前記K個の第1の動きベクトルグループを追加することと
を行うように更に構成される、項目42に記載の画像復号装置。
(項目45)
前記決定モジュールは、
q番目の動きベクトルグループに対応する固有値を決定することであって、qは、Qより大きくない任意の正の整数を有する、決定することと、
前記Q個の動きベクトルグループに対応する固有値に基づいて昇順に前記Q個の動きベクトルグループをソートすることと、
前記候補動きベクトルキューを生成するべく、前記ソートされたN個の動きベクトルグループの後に前記ソートされたQ個の動きベクトルグループを追加することと
を行うように更に構成される、項目42から44の何れか一項に記載の画像復号装置。
(項目46)
前記決定モジュールは、
前記M個の制御点における隣接する制御点の、前記q番目の動きベクトルグループにおける、動きベクトル予測値の、1つの予測方向における、成分間の差を決定することと、
前記差の絶対値を予め設定された成分閾値と比較することであって、前記予め設定された成分閾値は、前記予測方向における前記復号予定ユニットの範囲である、比較することと、
前記差の前記絶対値が、前記予め設定された成分閾値より小さいか又はそれに等しい場合、前記q番目の動きベクトルグループに対応する前記固有値を決定することと
を行うように更に構成される、項目45に記載の画像復号装置。
(項目47)
前記決定モジュールは、
前記隣接する復号されたユニットから、別の制御点に対応する復号されたユニットを決定することであって、前記別の制御点に対応する前記復号されたユニットと前記別の制御点との間の距離は、前記予め設定された距離より小さいか又はそれに等しく、前記別の制御点は、前記復号予定ユニットにおける前記M個の制御点以外の任意の制御点である、決定することと、
前記別の制御点に対応する前記復号されたユニットの動きベクトルを、前記別の制御点の動きベクトル予測値として決定することと、
第3の予め設定されたアルゴリズムを用いて、前記別の制御点の前記動きベクトル予測値と、前記q番目の動きベクトルグループにおける、前記M個の制御点の、動きベクトル予測値とに基づいて、前記q番目の動きベクトルグループに対応する前記固有値を決定することと
を行うように更に構成される、項目45又は46に記載の画像復号装置。
(項目48)
前記復号予定ユニットの前記動き予測モードは、並進動き予測モード又はアフィン動き予測モードを含む、項目37から47の何れか一項に記載の画像復号装置。
(項目49)
プロセッサと、メモリと、通信インタフェースと、バスとを備え、前記プロセッサは、前記バスを用いて前記メモリ及び前記通信インタフェースに接続されている、画像符号化装置であって、
前記メモリは、命令を格納するように構成され、
前記プロセッサは、前記命令を実行するように構成され、前記プロセッサが、前記メモリに格納された前記命令を実行する場合に、前記プロセッサは、項目1から12の何れか一項に記載の画像符号化方法を実行する、
画像符号化装置。
(項目50)
プロセッサと、メモリと、通信インタフェースと、バスとを備え、前記プロセッサは、前記バスを用いて前記メモリ及び前記通信インタフェースに接続されている、画像復号装置であって、
前記メモリは、命令を格納するように構成され、
前記プロセッサは、前記命令を実行するように構成され、前記プロセッサが、前記メモリに格納された前記命令を実行する場合に、前記プロセッサは、項目13から24の何れか一項に記載の画像復号方法を実行する、
画像復号装置。

Claims (14)

  1. 復号予定ユニットの左側にある2つの隣接する復号されたユニットから、第1のシーケンスに従い第1に見つけられた第1の復号されたユニットを決定する段階であって、前記第1の復号されたユニットの動き予測モードは前記復号予定ユニットの動き予測モードと同一である、段階と、
    前記復号予定ユニットの上方にある3つの隣接する復号されたユニットから、第2のシーケンスに従い第1に見つけられた第2の復号されたユニットを決定する段階であって、前記第2の復号されたユニットの動き予測モードは前記復号予定ユニットの動き予測モードと同一であり、前記第1の復号されたユニットの前記動き予測モード、前記第2の復号されたユニットの前記動き予測モード及び前記復号予定ユニットの前記動き予測モードはアフィン動き予測モードであり、前記第1のシーケンスは前記第2のシーケンスとは独立である、段階と、
    前記第1の復号されたユニットの複数の制御点の動きベクトルと、前記第1の復号されたユニットの前記複数の制御点のサンプル座標と、前記復号予定ユニットのM個の制御点のサンプル座標とに基づき、前記復号予定ユニットの前記M個の制御点の第1の動きベクトル予測値を計算する段階と、
    前記M個の制御点の前記第1の動きベクトル予測値に基づき、第1の動きベクトルグループを生成する段階と、
    前記第2の復号されたユニットの複数の制御点の動きベクトルと、前記第2の復号されたユニットの前記複数の制御点のサンプル座標と、前記復号予定ユニットの前記M個の制御点の前記サンプル座標とに基づき、前記復号予定ユニットの前記M個の制御点の第2の動きベクトル予測値を計算する段階と、
    前記M個の制御点の前記第2の動きベクトル予測値に基づき、第2の動きベクトルグループを生成する段階と、
    ビットストリームから、最適な動きベクトルグループのインデックス識別子を取得し、前記インデックス識別子に基づき複数の動きベクトルグループから、ターゲットの動きベクトルグループを決定する段階であって、前記複数の動きベクトルグループは前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを有する、段階と、
    前記ターゲットの動きベクトルグループに基づき、前記復号予定ユニットを予測する段階であって、前記復号予定ユニットの各サンプルユニットはそれぞれの動きベクトルを有する、段階と、を備え
    複数の動きベクトルグループから、ターゲットの動きベクトルグループを決定する前記段階は、前記複数の動きベクトルグループの数が予め設定された数より小さい場合、Q個の動きベクトルグループを生成する段階であって、Qは第1の値である、段階と、
    前記Q個の動きベクトルグループ、前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを含む前記複数の動きベクトルグループから、前記ターゲットの動きベクトルグループを決定する段階と、を含む、画像復号方法。
  2. Q+2は、予め設定された値より大きいか又はそれに等しい、請求項に記載の画像復号方法。
  3. Q個の動きベクトルグループを生成する前記段階は、
    前記復号予定ユニットの前記M個の制御点にそれぞれ対応する復号されたユニットの動きベクトルに基づき、前記Q個の動きベクトルグループを生成する段階を含む、請求項またはに記載の画像復号方法。
  4. 符号化予定ユニットの左側にある2つの隣接する符号化されたユニットから、第1のシーケンスに従い第1に見つけられた第1の符号化されたユニットを決定する段階であって、前記第1の符号化されたユニットの動き予測モードは前記符号化予定ユニットの動き予測モードと同一である、段階と、
    前記符号化予定ユニットの上方にある3つの隣接する符号化されたユニットから、第2のシーケンスに従い第1に見つけられた第2の符号化されたユニットを決定する段階であって、前記第2の符号化されたユニットの動き予測モードは前記符号化予定ユニットの動き予測モードと同一であり、前記第1の符号化されたユニットの前記動き予測モード、前記第2の符号化されたユニットの前記動き予測モード及び前記符号化予定ユニットの前記動き予測モードはアフィン動き予測モードであり、前記第1のシーケンスは前記第2のシーケンスとは独立である、段階と、
    前記第1の符号化されたユニットの複数の制御点の動きベクトルと、前記第1の符号化されたユニットの前記複数の制御点のサンプル座標と、前記符号化予定ユニットのM個の制御点のサンプル座標とに基づき、前記符号化予定ユニットの前記M個の制御点の第1の動きベクトル予測値を計算し、前記M個の制御点の前記第1の動きベクトル予測値に基づき、第1の動きベクトルグループを生成する段階と、
    前記第2の符号化されたユニットの複数の制御点の動きベクトルと、前記第2の符号化されたユニットの前記複数の制御点のサンプル座標と、前記符号化予定ユニットの前記M個の制御点の前記サンプル座標とに基づき、前記符号化予定ユニットの前記M個の制御点の第2の動きベクトル予測値を計算し、前記M個の制御点の前記第2の動きベクトル予測値に基づき、第2の動きベクトルグループを生成する段階と、
    複数の動きベクトルグループから、ターゲットの動きベクトルグループを決定する段階であって、前記複数の動きベクトルグループは前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを有する、段階と、
    前記複数の動きベクトルグループ及び前記ターゲットの動きベクトルグループに基づき、前記ターゲットの動きベクトルグループのインデックス識別子決定する段階と、
    前記インデックス識別子をビットストリーム内に符号化する段階と、を備え
    複数の動きベクトルグループから、ターゲットの動きベクトルグループを決定する前記段階は、
    前記複数の動きベクトルグループの数が予め設定された数より小さい場合、Q個の動きベクトルグループを生成する段階であって、Qは第1の値である、段階と、
    前記Q個の動きベクトルグループ、前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを含む前記複数の動きベクトルグループから、前記ターゲットの動きベクトルグループを決定する段階と、を含む、画像符号化方法。
  5. Q+2は、予め設定された値より大きいか又はそれに等しい、請求項に記載の画像符号化方法。
  6. Q個の動きベクトルグループを生成する前記段階は、
    前記符号化予定ユニットの前記M個の制御点にそれぞれ対応する符号化されたユニットの動きベクトルに基づき、前記Q個の動きベクトルグループを生成する段階を含む、請求項またはに記載の画像符号化方法。
  7. 復号予定ユニットの左側にある隣接する2つの復号されたユニットから、第1のシーケンスに従い第1に見つけられた第1の復号されたユニットを決定するよう構成され、前記第1の復号されたユニットの動き予測モードは前記復号予定ユニットの動き予測モードと同一であり、及び更に、前記復号予定ユニットの上方にある3つの隣接する復号されたユニットから、第2のシーケンスに従い第1に見つけられた第2の復号されたユニットを決定するよう構成され、前記第2の復号されたユニットの動き予測モードは前記復号予定ユニットの動き予測モードと同一であり、前記第1の復号されたユニットの前記動き予測モード、前記第2の復号されたユニットの前記動き予測モード及び前記復号予定ユニットの前記動き予測モードはアフィン動き予測モードであり、前記第1のシーケンスは前記第2のシーケンスとは独立である、決定モジュールと、
    前記第1の復号されたユニットの複数の制御点の動きベクトルと、前記第1の復号されたユニットの前記複数の制御点のサンプル座標と、前記復号予定ユニットのM個の制御点のサンプル座標とに基づき、前記M個の制御点の第1の動きベクトル予測値を計算し、前記M個の制御点の前記第1の動きベクトル予測値に基づき、第1の動きベクトルグループを生成するよう構成され、及び更に、前記第2の復号されたユニットの複数の制御点の動きベクトルと、前記第2の復号されたユニットの前記複数の制御点のサンプル座標と、前記復号予定ユニットの前記M個の制御点の前記サンプル座標とに基づき、前記M個の制御点の第2の動きベクトル予測値を計算し、前記M個の制御点の前記第2の動きベクトル予測値に基づき、第2の動きベクトルグループを生成する、よう構成された計算モジュールと、を備える、画像復号装置であって、
    前記決定モジュールは、更に、ビットストリームから最適な動きベクトルグループのインデックス識別子を取得し、前記インデックス識別子に基づき複数の動きベクトルグループからターゲットの動きベクトルグループを決定するよう構成されており、前記複数の動きベクトルグループは前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを有し、
    前記計算モジュールは、更に、前記ターゲットの動きベクトルグループに基づき、前記復号予定ユニットを予測するよう構成されており、前記復号予定ユニットの各サンプルユニットはそれぞれの動きベクトルを有
    前記決定モジュールは、具体的に、
    前記複数の動きベクトルグループの数が予め設定された数より小さい場合、Q個の動きベクトルグループを生成するよう構成されており、Qは第1の値であり、Q+2は予め設定された値より大きいか又はそれに等しい、並びに
    前記Q個の動きベクトルグループ、前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを含む前記複数の動きベクトルグループから、前記ターゲットの動きベクトルグループを決定するよう構成されている、画像復号装置。
  8. 更に、前記決定モジュールは、具体的に、
    前記復号予定ユニットの前記M個の制御点にそれぞれ対応する復号されたユニットの動きベクトルに基づき、前記Q個の動きベクトルグループを生成するよう構成されている、請求項に記載の画像復号装置。
  9. 符号化予定ユニットの左側にある隣接する2つの符号化されたユニットから、第1のシーケンスに従い第1に見つけられた第1の符号化されたユニットを決定するよう構成され、前記第1の符号化されたユニットの動き予測モードは前記符号化予定ユニットの動き予測モードと同一であり、及び更に、前記符号化予定ユニットの上方にある3つの隣接する符号化されたユニットから、第2のシーケンスに従い第1に見つけられた第2の符号化されたユニットを決定するよう構成され、前記第2の符号化されたユニットの動き予測モードは前記符号化予定ユニットの動き予測モードと同一であり、前記第1の符号化されたユニットの前記動き予測モード、前記第2の符号化されたユニットの前記動き予測モード及び前記符号化予定ユニットの前記動き予測モードはアフィン動き予測モードであり、前記第1のシーケンスは前記第2のシーケンスとは独立である、決定モジュールと、
    前記第1の符号化されたユニットの複数の制御点の動きベクトルと、前記第1の符号化されたユニットの前記複数の制御点のサンプル座標と、前記符号化予定ユニットのM個の制御点のサンプル座標とに基づき、前記M個の制御点の第1の動きベクトル予測値を計算し、前記M個の制御点の前記第1の動きベクトル予測値に基づき、第1の動きベクトルグループを生成するよう構成され、更に、前記第2の符号化されたユニットの複数の制御点の動きベクトルと、前記第2の符号化されたユニットの前記複数の制御点のサンプル座標と、前記符号化予定ユニットの前記M個の制御点の前記サンプル座標とに基づき、前記M個の制御点の第2の動きベクトル予測値を計算し、前記M個の制御点の前記第2の動きベクトル予測値に基づき、第2の動きベクトルグループを生成する、よう構成された計算モジュールと、を備える、画像符号化装置であって、
    前記決定モジュールは、更に、複数の動きベクトルグループから、ターゲットの動きベクトルグループを決定するよう構成されており、前記複数の動きベクトルグループは前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを有し、前記画像符号化装置はさらに
    前記複数の動きベクトルグループ及び前記ターゲットの動きベクトルグループに基づき、前記ターゲットの動きベクトルグループのインデックス識別子決定し、前記インデックス識別子をビットストリーム内に符号化するよう構成された符号化モジュールを備え
    前記決定モジュールは、具体的に、
    前記複数の動きベクトルグループの数が予め設定された数より小さい場合、Q個の動きベクトルグループを生成するよう構成されており、Qは第1の値であり、Q+2は予め設定された値より大きいか又はそれに等しい、並びに
    前記Q個の動きベクトルグループ、前記第1の動きベクトルグループ及び前記第2の動きベクトルグループを含む前記複数の動きベクトルグループから、前記ターゲットの動きベクトルグループを決定するよう構成されている、画像符号化装置。
  10. 記決定モジュールは、具体的に、
    前記符号化予定ユニットの前記M個の制御点にそれぞれ対応する符号化されたユニットの動きベクトルに基づき、前記Q個の動きベクトルグループを生成するよう構成されている、請求項に記載の画像符号化装置。
  11. プロセッサと、メモリと、通信インタフェースと、バスとを備える画像処理装置であって、前記プロセッサは、前記メモリ及び前記通信インタフェースに前記バスを用いて接続されており、
    前記メモリは、命令を格納するよう構成されており、
    前記プロセッサは、前記命令を実行するよう構成されており、前記プロセッサが前記メモリ内に格納された前記命令を実行すると、前記プロセッサは、請求項1からのいずれか一項に記載の画像復号方法を実行できるようになる、画像処理装置。
  12. プロセッサと、メモリと、通信インタフェースと、バスとを備える画像処理装置であって、前記プロセッサは、前記メモリ及び前記通信インタフェースに前記バスを用いて接続されており、
    前記メモリは、命令を格納するよう構成されており、
    前記プロセッサは、前記命令を実行するよう構成されており、前記プロセッサが前記メモリ内に格納された前記命令を実行すると、前記プロセッサは、請求項からのいずれか一項に記載の画像符号化方法を実行できるようになる、画像処理装置。
  13. コンピュータに、請求項1からのいずれか一項に記載の画像復号方法を実行させるための、プログラム。
  14. コンピュータに、請求項からのいずれか一項に記載の画像符号化方法を実行させるための、プログラム。
JP2020144911A 2016-02-06 2020-08-28 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム Active JP7351485B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201610081070.3 2016-02-06
CN201610081070.3A CN107046645B9 (zh) 2016-02-06 2016-02-06 图像编解码方法及装置
JP2018541193A JP7069022B2 (ja) 2016-02-06 2016-09-08 画像符号化方法及び装置、並びに画像復号方法及び装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018541193A Division JP7069022B2 (ja) 2016-02-06 2016-09-08 画像符号化方法及び装置、並びに画像復号方法及び装置

Publications (2)

Publication Number Publication Date
JP2020205610A JP2020205610A (ja) 2020-12-24
JP7351485B2 true JP7351485B2 (ja) 2023-09-27

Family

ID=59499362

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2018541193A Active JP7069022B2 (ja) 2016-02-06 2016-09-08 画像符号化方法及び装置、並びに画像復号方法及び装置
JP2020144911A Active JP7351485B2 (ja) 2016-02-06 2020-08-28 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム
JP2020144912A Active JP7351463B2 (ja) 2016-02-06 2020-08-28 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018541193A Active JP7069022B2 (ja) 2016-02-06 2016-09-08 画像符号化方法及び装置、並びに画像復号方法及び装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2020144912A Active JP7351463B2 (ja) 2016-02-06 2020-08-28 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム

Country Status (10)

Country Link
US (5) US10798405B2 (ja)
EP (2) EP4099699A1 (ja)
JP (3) JP7069022B2 (ja)
KR (4) KR102447241B1 (ja)
CN (4) CN111526361B (ja)
AU (3) AU2016390979B2 (ja)
CA (1) CA3013655C (ja)
HK (1) HK1256107A1 (ja)
RU (4) RU2722389C2 (ja)
WO (1) WO2017133243A1 (ja)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111526361B (zh) * 2016-02-06 2022-05-13 华为技术有限公司 图像编解码方法及装置
WO2019002215A1 (en) 2017-06-26 2019-01-03 Interdigital Vc Holdings, Inc. MULTIPLE PREDICTION CANDIDATES FOR MOTION COMPENSATION
US10856003B2 (en) * 2017-10-03 2020-12-01 Qualcomm Incorporated Coding affine prediction motion information for video coding
US10582212B2 (en) * 2017-10-07 2020-03-03 Google Llc Warped reference motion vectors for video compression
CN109922336B (zh) * 2017-12-12 2023-07-18 华为技术有限公司 视频数据的帧间预测方法和装置
CN110035287B (zh) * 2018-01-12 2023-05-09 富士通株式会社 对统一转换单元模式进行分组标识的方法、装置和电子设备
CN108449599B (zh) * 2018-03-23 2021-05-18 安徽大学 一种基于面透射变换的视频编码与解码方法
CN116684638A (zh) 2018-04-01 2023-09-01 Lg电子株式会社 图像编码/解码方法、视频数据发送方法和存储介质
CN117061738A (zh) * 2018-04-02 2023-11-14 深圳市大疆创新科技有限公司 用于图像处理的方法和图像处理装置
CN110971899B (zh) * 2018-10-01 2021-06-01 华为技术有限公司 一种确定运动信息的方法、帧间预测方法及装置
US11528484B2 (en) 2018-12-06 2022-12-13 Lg Electronics Inc. Method and apparatus for processing video signal on basis of inter prediction
CN112970257A (zh) 2019-01-02 2021-06-15 Oppo广东移动通信有限公司 解码预测方法、装置及计算机存储介质
EP3930327A4 (en) * 2019-03-08 2022-06-01 Guangdong Oppo Mobile Telecommunications Corp., Ltd. PREDICTION PROCESS, ENCODER, DECODER, AND COMPUTER STORAGE MEDIA
CN113824960B (zh) * 2019-11-13 2024-02-23 腾讯科技(深圳)有限公司 视频编码方法、装置、计算机可读介质及电子设备
CN111698502A (zh) * 2020-06-19 2020-09-22 中南大学 基于vvc编码的仿射运动估计加速方法、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012165279A (ja) 2011-02-08 2012-08-30 Jvc Kenwood Corp 画像復号装置、画像復号方法および画像復号プログラム
CN105163116A (zh) 2015-08-29 2015-12-16 华为技术有限公司 图像预测的方法及设备
JP2020205611A (ja) 2016-02-06 2020-12-24 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100215451B1 (ko) * 1996-05-29 1999-08-16 윤종용 임의형태 물체를 포함한 동화상의 부호화 및 복호화시스템
WO1998042134A1 (en) * 1997-03-17 1998-09-24 Mitsubishi Denki Kabushiki Kaisha Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system
KR100772873B1 (ko) * 2006-01-12 2007-11-02 삼성전자주식회사 스무딩 예측을 이용한 다계층 기반의 비디오 인코딩 방법,디코딩 방법, 비디오 인코더 및 비디오 디코더
US8619853B2 (en) * 2007-06-15 2013-12-31 Qualcomm Incorporated Separable directional transforms
WO2009123248A1 (en) * 2008-04-01 2009-10-08 Canon Kabushiki Kaisha Moving image encoding apparatus and moving image encoding method
JP5401071B2 (ja) * 2008-10-09 2014-01-29 株式会社Nttドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、動画像復号プログラム、動画像処理システムおよび動画像処理方法
KR101590511B1 (ko) * 2009-01-23 2016-02-02 에스케이텔레콤 주식회사 움직임 벡터 부호화/복호화 장치 및 방법과 그를 이용한 영상 부호화/복호화 장치 및 방법
JP4760923B2 (ja) * 2009-02-03 2011-08-31 ソニー株式会社 画像処理装置、画像処理方法および撮像装置
KR101452859B1 (ko) 2009-08-13 2014-10-23 삼성전자주식회사 움직임 벡터를 부호화 및 복호화하는 방법 및 장치
EP2493195A1 (en) * 2009-10-20 2012-08-29 Sharp Kabushiki Kaisha Video encoding device, video decoding device, and data structure
KR101459714B1 (ko) * 2009-10-28 2014-11-13 에스케이텔레콤 주식회사 공간 분할을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
CN102783151A (zh) * 2010-01-08 2012-11-14 诺基亚公司 用于视频编码的装置、方法和计算机程序
CN101771878B (zh) * 2010-01-14 2011-05-25 广西大学 面向全景视频编码的自适应选择全局运动估计方法
JP5306485B2 (ja) * 2010-02-09 2013-10-02 日本電信電話株式会社 動きベクトル予測符号化方法、動きベクトル予測復号方法、動画像符号化装置、動画像復号装置およびそれらのプログラム
CN103039075B (zh) * 2010-05-21 2015-11-25 Jvc建伍株式会社 图像编码装置、图像编码方法、以及图像解码装置、图像解码方法
GB2487200A (en) * 2011-01-12 2012-07-18 Canon Kk Video encoding and decoding with improved error resilience
EP3481066B1 (en) * 2011-06-28 2021-05-19 LG Electronics Inc. Method for deriving a motion vector predictor
KR101943049B1 (ko) 2011-06-30 2019-01-29 에스케이텔레콤 주식회사 영상 부호화/복호화 방법 및 장치
JP5950541B2 (ja) * 2011-11-07 2016-07-13 キヤノン株式会社 動きベクトル符号化装置、動きベクトル符号化方法及びプログラム、動きベクトル復号装置、動きベクトル復号方法及びプログラム
EP2683165B1 (en) * 2012-07-04 2015-10-14 Thomson Licensing Method for coding and decoding a block of pixels from a motion model
US10003792B2 (en) * 2013-05-27 2018-06-19 Microsoft Technology Licensing, Llc Video encoder for images
US9774879B2 (en) * 2013-08-16 2017-09-26 Sony Corporation Intra-block copying enhancements for HEVC in-range-extension (RExt)
CN104717555B (zh) 2013-12-11 2018-01-02 华为技术有限公司 视频码流的获取方法及装置
US11393019B2 (en) 2014-05-14 2022-07-19 National Institute Of Advanced Industrial Science And Technology Device and method for exchanging trade information
WO2016008157A1 (en) * 2014-07-18 2016-01-21 Mediatek Singapore Pte. Ltd. Methods for motion compensation using high order motion model
CN112087630B (zh) * 2014-09-30 2022-04-08 华为技术有限公司 图像预测方法、装置、解码器及存储介质
ES2857674T3 (es) 2014-11-24 2021-09-29 Idemia France Creación de archivos implícita en secuencias de comandos APDU
CN107809642B (zh) * 2015-02-16 2020-06-16 华为技术有限公司 用于视频图像编码和解码的方法、编码设备和解码设备
WO2017118411A1 (en) * 2016-01-07 2017-07-13 Mediatek Inc. Method and apparatus for affine inter prediction for video coding system
WO2017130696A1 (ja) * 2016-01-29 2017-08-03 シャープ株式会社 予測画像生成装置、動画像復号装置、および動画像符号化装置
CN109729352B (zh) * 2017-10-27 2020-07-21 华为技术有限公司 确定仿射编码块的运动矢量的方法和装置
CN109922336B (zh) * 2017-12-12 2023-07-18 华为技术有限公司 视频数据的帧间预测方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012165279A (ja) 2011-02-08 2012-08-30 Jvc Kenwood Corp 画像復号装置、画像復号方法および画像復号プログラム
CN105163116A (zh) 2015-08-29 2015-12-16 华为技术有限公司 图像预测的方法及设备
JP2020205611A (ja) 2016-02-06 2020-12-24 ホアウェイ・テクノロジーズ・カンパニー・リミテッド 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
大久保 榮、H.265/HEVC教科書、第1版、2013年10月21日、p.136-137

Also Published As

Publication number Publication date
KR20210095745A (ko) 2021-08-02
CN111556323A (zh) 2020-08-18
KR20200121925A (ko) 2020-10-26
US20220353525A1 (en) 2022-11-03
RU2748360C1 (ru) 2021-05-24
EP3402205A1 (en) 2018-11-14
CN111526361A (zh) 2020-08-11
KR20180107783A (ko) 2018-10-02
RU2708347C1 (ru) 2019-12-05
CN107046645A (zh) 2017-08-15
EP4099699A1 (en) 2022-12-07
AU2016390979A1 (en) 2018-09-06
CN107046645B9 (zh) 2020-08-14
US20220329845A1 (en) 2022-10-13
JP2020205610A (ja) 2020-12-24
AU2016390979B2 (en) 2020-04-23
EP3402205A4 (en) 2018-11-14
AU2020207860B2 (en) 2022-02-03
KR102284099B1 (ko) 2021-07-29
US11394994B2 (en) 2022-07-19
JP2020205611A (ja) 2020-12-24
KR102247383B1 (ko) 2021-04-30
AU2020207857B2 (en) 2022-02-03
AU2020207860A1 (en) 2020-08-13
RU2737315C1 (ru) 2020-11-27
CN107046645B (zh) 2020-04-21
CN111556323B (zh) 2022-05-13
JP2019506089A (ja) 2019-02-28
US11412248B2 (en) 2022-08-09
HK1256107A1 (zh) 2019-09-13
CA3013655A1 (en) 2017-08-10
US10798405B2 (en) 2020-10-06
CA3013655C (en) 2023-10-03
RU2722389C2 (ru) 2020-05-29
AU2020207857A1 (en) 2020-08-13
KR20200122416A (ko) 2020-10-27
WO2017133243A1 (zh) 2017-08-10
US20200413087A1 (en) 2020-12-31
KR102447241B1 (ko) 2022-09-23
KR102283725B1 (ko) 2021-07-29
EP3402205B1 (en) 2022-06-15
CN111526360A (zh) 2020-08-11
JP7351463B2 (ja) 2023-09-27
RU2019137993A (ru) 2019-12-20
JP7069022B2 (ja) 2022-05-17
US20180376161A1 (en) 2018-12-27
US20200413088A1 (en) 2020-12-31
RU2019137993A3 (ja) 2020-03-26
CN111526361B (zh) 2022-05-13

Similar Documents

Publication Publication Date Title
JP7351485B2 (ja) 画像符号化方法及び装置、画像復号方法及び装置並びにプログラム
KR20230109772A (ko) 비디오 코딩 시스템에서 인터 예측 방법 및 장치
JP6935553B2 (ja) 縮小された予測動きベクトルの候補に基づいて、動きベクトルを符号化/復号化する方法及び装置
KR102513585B1 (ko) 비디오 처리 시스템에서 인터 예측 방법 및 장치
CN112565789B (zh) 视频解码及编码方法、装置、计算机可读介质及电子设备
CN110740330A (zh) 一种子块运动候选的冗余校验的方法及设备

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200907

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200907

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220201

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220705

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221102

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20221102

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20221121

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20221122

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20230113

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20230117

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20230131

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20230228

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20230328

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230906

R150 Certificate of patent or registration of utility model

Ref document number: 7351485

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150