JP2020520194A - ビデオ画像の処理方法及び装置 - Google Patents
ビデオ画像の処理方法及び装置 Download PDFInfo
- Publication number
- JP2020520194A JP2020520194A JP2019563038A JP2019563038A JP2020520194A JP 2020520194 A JP2020520194 A JP 2020520194A JP 2019563038 A JP2019563038 A JP 2019563038A JP 2019563038 A JP2019563038 A JP 2019563038A JP 2020520194 A JP2020520194 A JP 2020520194A
- Authority
- JP
- Japan
- Prior art keywords
- pixel
- half pixel
- estimation
- rate distortion
- positions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/53—Multi-resolution motion estimation; Hierarchical motion estimation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/567—Motion estimation based on rate distortion criteria
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/533—Motion estimation using multistep search, e.g. 2D-log search or one-at-a-time search [OTS]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Processing (AREA)
Abstract
Description
符号化待ちビデオ画像からターゲット画像フレームを取得することと、
ターゲット画像フレームに対して整数画素動き推定を行って、整数画素推定による最適位置を取得することと、
前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得することと、
前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割し、各パーティション内にはそれぞれクォーター補間による2つのクォーター画素位置が含まれることと、
前記4つのパーティションにおける各ハーフ画素位置から最小レート歪みコストに対応する位置を取得して、前記最小レート歪みコストに対応する位置が属するパーティションが第1のパーティションであることを確定することと、
ハーフ画素推定による最適位置に従って、前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得することと、
前記クォーター画素推定による最適位置を動き推定結果として、動き補償を行うことと、
を含む。
符号化待ちビデオ画像からターゲット画像フレームを取得するための画像取得モジュールと、
ターゲット画像フレームに対して整数画素動き推定を行って、整数画素推定による最適位置を取得するための整数画素推定モジュールと、
前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得するための第1のサブ画素推定モジュールと、
前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割するための画像パーティションモジュールであって、各パーティション内にはそれぞれクォーター補間による2つのクォーター画素位置が含まれる画像パーティションモジュールと、
前記4つのパーティションにおける各ハーフ画素位置から最小レート歪みコストに対応する位置を取得し、前記最小レート歪みコストに対応する位置が属するパーティションが第1のパーティションであることを確定するための第1のパーティション取得モジュールと、
ハーフ画素推定による最適位置に従って、前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得するための第2のサブ画素推定モジュールと、
前記クォーター画素推定による最適位置を動き推定結果として、動き補償を行うための動き補償モジュールと、
を含む。
前記プロセッサー、前記通信インタフェース及び前記メモリは前記通信バスを介して相互の通信を完成し、前記通信インタフェースは通信モジュールのインタフェースであり、
前記メモリは、プログラムコードを記憶し、前記プログラムコードを前記プロセッサーに伝送し、
前記プロセッサーは、メモリ内のプログラムコードの指令を呼び出して、第1の態様に記載の方法を実行する。
本開示の実施例では、本開示の実施例におけるクォーター画素推定は、ハーフ画素推定による最適位置に従って第1のパーティション内で完成され、第1のパーティションは最小レート歪みコストに対応する位置が属するパーティションであるので、クォーター画素推定では、全てのエリア内でクォーター補間を行う必要がなく、全てのエリア内の各クォーター画素位置の最小レート歪みコストを計算する必要もなく、第1のパーティション内のクォーター画素位置に対して最小レート歪みコストを計算すればよいため、ビデオ圧縮性能を保証しながら、符号化速度を効果的に改善し、計算の複雑さを低下することができ、これにより、マシンの性能に対するビデオ圧縮リアルタイム符号化の要求が低減される。
整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得し、4つのハーフ画素位置は整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置であるステップA1と、
整数画素推定による最適位置と4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するステップA2と、
第1の最小レート歪みコストに対応する位置が整数画素推定による最適位置である場合に、ハーフ画素推定による最適位置が整数画素推定による最適位置であることを確定するステップA3と、
を含む。
整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得し、4つのハーフ画素位置が整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置であるステップA1と、
整数画素推定による最適位置と4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するステップA2と、
第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得し、第1のハーフ画素位置に隣接する2つのハーフ画素位置が第1のハーフ画素位置と同じ軸方向に位置し、第1のハーフ画素位置が4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置であるステップA4と、
第1のハーフ画素位置と当該第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得するステップA5と、
第2の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、ハーフ画素推定による最適位置が第1のハーフ画素位置であることを確定するステップA6、又は、
第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、ハーフ画素推定による最適位置が第3のハーフ画素位置であることを確定し、第3のハーフ画素位置が第1のハーフ画素位置に隣接する2つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置であるステップA7と、
を含む。
第1の最小レート歪みコストに対応する位置が整数画素推定による最適位置である場合に、整数画素推定による最適位置の周囲エリアを4つのパーティションに分割し、各パーティションが整数画素推定による最適位置、4つのハーフ画素位置のうち2つのハーフ画素位置によって分割されたエリアから得られるステップB1を含む。
第2の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、第1のハーフ画素位置に隣接する第2のハーフ画素位置を取得し、第2のハーフ画素位置が第1のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうちハーフ補間されていない画素位置であるステップC1と、
第1のハーフ画素位置の周囲エリアを4つのパーティションに分割し、各パーティションは第1のハーフ画素位置と整数画素推定による最適位置、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置、第2のハーフ画素位置によって分割されたエリアから得られるステップC2と、
を含む。
第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、第3のハーフ画素位置に隣接する2つの第4のハーフ画素位置を取得し、2つの第4のハーフ画素が第3のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうち補間されていない画素位置であるステップD1と、
第3のハーフ画素位置の周囲エリアを4つのパーティションに分割し、各パーティションは前記第3のハーフ画素位置と前記4つのハーフ画素位置のうち前記第3のハーフ画素位置に隣接する2つの画素位置と前記2つの第4のハーフ画素位置とによって分割されたエリアから得られるステップD2と、
を含む。
ハーフ画素推定による最適位置の真上、真下、左側、右側の4つのハーフ画素位置を、ハーフ画素推定による最適位置に隣接する4つのハーフ画素位置として確定することと、
ハーフ画素推定による最適位置に隣接する4つのハーフ画素位置に対応するレート歪みコストをそれぞれ計算することと、
真上のハーフ画素位置に対応するレート歪みコストと真下のハーフ画素位置に対応するレート歪みコストとの間の数値関係、左側のハーフ画素位置に対応するレート歪みコストと右側的ハーフ画素位置に対応するレート歪みコストとの間の数値関係に従って、第1のパーティションを確定することと、
を含む。
ハーフ画素推定による最適位置に従って第1のパーティション内で3つの周囲位置のクォーター補間を行って、ハーフ画素推定による最適位置に隣接する3つのクォーター画素位置を取得し、3つのクォーター画素位置が第1のパーティション内にあるステップE1と、
ハーフ画素推定による最適位置と3つのクォーター画素位置から第3の最小レート歪みコストに対応する位置を取得するステップE2と、
第3の最小レート歪みコストに対応する位置がクォーター画素推定による最適位置であることを確定するステップE3と、
を含む。
cost=satd+lamda*bit、
bitは(mv-mvp)に対応するbitsを表す。
最小cost位置が1位置である場合、5、6点をさらに補充する必要があり、
最小cost位置が2位置である場合、7、8点をさらに補充する必要があり、
最小cost位置が3位置である場合、5、7点をさらに補充する必要があり、
最小cost位置が4位置である場合、6、8点をさらに補充する必要がある。
最小cost位置が1位置である場合、n1点をさらに補充する必要があり、
最小cost位置が2位置である場合、n2点をさらに補充する必要があり、
最小cost位置が3位置である場合、n3点をさらに補充する必要があり、
最小cost位置が4位置である場合、n4点をさらに補充する必要があり、
その中、ステップ4に従って点を補充する場合、最小cost位置が1又は2又は3又は4位置であり、これらの4つの位置は全てハーフ画素点位置である。
最小cost位置が6位置である場合、p2、p3点をさらに補充する必要があり、対応する座標は(2,-4)、(4,-2)であり、
最小cost位置が7位置である場合、p4、p5点をさらに補充する必要があり、対応する座標は(-4,2)、(-2,4)であり、
最小cost位置が8位置である場合、p6、p7点をさらに補充する必要があり、対応する座標は(2,4)、(4,2)であり、
ここで、上記の座標は、整数画素動き推定による最適位置に対するものであり、ハーフ動き推定の原点でもあり、この原点から、上又は左はマイナスであり、下又は右はプラスである。
第1パーティション、即ち、z1である場合、q6、q1、q4位置で行われ、
第2パーティション、即ち、z2である場合、q7、q3、q2位置で行われ、
第3パーティション、即ち、z3である場合、q8、q2、q4位置で行われ、
その後、比較を行って、最小costに対応するmv及びcostは最適なmv及び最適なコストであり、QMEは終了する。
画像取得モジュール401は、符号化待ちビデオ画像からターゲット画像フレームを取得し、
整数画素推定モジュール402は、ターゲット画像フレームに対して整数画素動き推定を行って、整数画素推定による最適位置を取得し、
第1のサブ画素推定モジュール403は、前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得し、
画像パーティションモジュール404は、前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割し、
第1のパーティション取得モジュール405は、前記ハーフ画素推定による最適位置に隣接する4つのハーフ画素位置にそれぞれ対応するレート歪みコストに従って、前記4つのパーティションからクォーター画素推定に使用される第1のパーティションを確定し、
第2のサブ画素推定モジュール406は、ハーフ画素推定による最適位置に従って前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得し、
動き補償モジュール407は、前記クォーター画素推定による最適位置を動き推定結果として、動き補償を行う。
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得するための第1のハーフ画素取得モジュール4031であって、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置である第1のハーフ画素取得モジュール4031と、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するための第1のコスト計算モジュール4032と、
前記第1の最小レート歪みコストに対応する位置が前記整数画素推定による最適位置である場合、前記ハーフ画素推定による最適位置が前記整数画素推定による最適位置であることを確定するための第1の最適位置確定モジュール4033と、
を含む。
整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得するための第1のハーフ画素取得モジュール4031であって、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置である第1のハーフ画素取得モジュール4031と、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するための第1のコスト計算モジュール4032と、
前記第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得するための第2のハーフ画素取得モジュール4034であって、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置が前記第1のハーフ画素位置と同じ軸方向にあり、前記第1のハーフ画素位置が前記4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置である第2のハーフ画素取得モジュール4034と、
前記第1のハーフ画素位置と前記第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得するための第2のコスト計算モジュール4035と、
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記ハーフ画素推定による最適位置が前記第1のハーフ画素位置であることを確定するか、又は、前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合、前記ハーフ画素推定による最適位置が前記第3のハーフ画素位置であることを確定するための第2の最適位置確定モジュール4036であって、前記第3のハーフ画素位置が前記第1のハーフ画素位置に隣接する2つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置である第2の最適位置確定モジュール4036と、
を含む。
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する第2のハーフ画素位置を取得するための第3のハーフ画素取得モジュール4051であって、前記第2のハーフ画素位置が前記第1のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうちハーフ補間されていない画素位置である第3のハーフ画素取得モジュール4051と、
前記第1のハーフ画素位置の周囲エリアを4つのパーティションに分割するための第1のエリア分割モジュール4052であって、各パーティション内には、前記整数画素推定による最適位置、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置、前記第2のハーフ画素位置という4つの位置のうち1つが含まれる第1のエリア分割モジュール4052と、
を含む。
前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、前記第3のハーフ画素位置に隣接する2つの第4のハーフ画素位置を取得するための第4のハーフ画素取得モジュール4053であって、前記2つの第4のハーフ画素が前記第3のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうち補間されていない画素位置である第4のハーフ画素取得モジュール4053と、
前記第3のハーフ画素位置の周囲エリアを4つのパーティションに分割するための第2のエリア分割モジュール4054であって、各パーティション内には、前記4つのハーフ画素位置のうち前記第3のハーフ画素位置に隣接する2つの画素位置、前記2つの第4のハーフ画素位置という4つの位置のうち1つが含まれる第2のエリア分割モジュール4054と、
を含む。
前記ハーフ画素推定による最適位置に従って前記第1のパーティション内で3つの周囲位置のクォーター補間を行って、前記ハーフ画素推定による最適位置に隣接する3つのクォーター画素位置を取得するためのクォーター補間モジュール4061であって、前記3つのクォーター画素位置が前記第1のパーティション内にあるクォーター補間モジュール4061と、
前記ハーフ画素推定による最適位置と前記3つのクォーター画素位置から第3の最小レート歪みコストに対応する位置を取得するための第3のコスト計算モジュール4062と、
前記第3の最小レート歪みコストに対応する位置がクォーター画素推定による最適位置であることを確定するための第3の最適位置確定モジュール4063と、
を含む。
401 画像取得モジュール
402 整数画素推定モジュール
403 第1のサブ画素推定モジュール
404 画像パーティションモジュール
405 第1のパーティション取得モジュール
406 第2のサブ画素推定モジュール
407 動き補償モジュール
1100 サーバー
1122 中央処理装置
1126 電源
1130 記憶媒体
1132 メモリ
1141 オペレーティングシステム
1142 アプリケーションプログラム
1144 データ
1150 有線又は無線ネットワークインタフェース
1158 入出力インタフェース
4031 第1のハーフ画素取得モジュール
4032 第1のコスト計算モジュール
4033 第1の最適位置確定モジュール
4034 第2のハーフ画素取得モジュール
4035 第2のコスト計算モジュール
4036 第2の最適位置確定モジュール
4051 第3のハーフ画素取得モジュール
4052 第1のエリア分割モジュール
4053 第4のハーフ画素取得モジュール
4054 第2のエリア分割モジュール
4061 クォーター補間モジュール
4062 第3のコスト計算モジュール
4063 第3の最適位置確定モジュール
Claims (19)
- ビデオ処理装置に適用されるビデオ画像の処理方法であって、
符号化待ちビデオ画像からターゲット画像フレームを取得することと、
前記ターゲット画像フレームに対して整数画素動き推定を行って、整数画素推定による最適位置を取得することと、
前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得することと、
前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割することと、
前記ハーフ画素推定による最適位置に隣接する4つのハーフ画素位置にそれぞれ対応するレート歪みコストに従って、前記4つのパーティションからクォーター画素推定に使用される第1のパーティションを確定することと、
ハーフ画素推定による最適位置に従って前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得することと、
前記クォーター画素推定による最適位置を動き推定結果として、動き補償を行うことと、
を含むことを特徴とする方法。 - 前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得することは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得し、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置であることと、
前記整数画素推定による最適位置及び前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得することと、
前記第1の最小レート歪みコストに対応する位置が前記整数画素推定による最適位置である場合に、前記ハーフ画素推定による最適位置が前記整数画素推定による最適位置であることを確定することと、
を含むことを特徴とする請求項1に記載の方法。 - 前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割することは、
前記第1の最小レート歪みコストに対応する位置が前記整数画素推定による最適位置である場合、前記整数画素推定による最適位置の周囲エリアを4つのパーティションに分割し、各パーティションが、前記整数画素推定による最適位置と前記4つのハーフ画素位置のうち2つのハーフ画素位置によって分割されたエリアから得られること、
を含むことを特徴とする請求項2に記載の方法。 - 前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得することは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得し、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置であることと、
前記整数画素推定による最適位置及び前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得することと、
前記第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得し、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置が前記第1のハーフ画素位置と同じ軸方向にあり、前記第1のハーフ画素位置が前記4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置であることと、
前記第1のハーフ画素位置と、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得することと、
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記ハーフ画素推定による最適位置が前記第1のハーフ画素位置であることを確定することと、
を含むことを特徴とする請求項1に記載の方法。 - 前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得することは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得し、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置であることと、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得することと、
前記第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得し、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置が前記第1のハーフ画素位置と同じ軸方向にあり、前記第1のハーフ画素位置が前記4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置であることと、
前記第1のハーフ画素位置と、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得することと、
前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合、前記ハーフ画素推定による最適位置が前記第3のハーフ画素位置であると確定し、前記第3のハーフ画素位置が前記第1のハーフ画素位置に隣接する2つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置であることと、
を含むことを特徴とする請求項1に記載の方法。 - 前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割することは、
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する第2のハーフ画素位置を取得し、前記第2のハーフ画素位置が前記第1のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうちハーフ補間されていない画素位置であることと、
前記第1のハーフ画素位置の周囲エリアを4つのパーティションに分割し、各パーティションが前記第1のハーフ画素位置と、前記整数画素推定による最適位置と、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置と、前記第2のハーフ画素位置とによって分割されたエリアから得られることと、
を含むことを特徴とする請求項4に記載の方法。 - 前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割することは、
前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、前記第3のハーフ画素位置に隣接する2つの第4のハーフ画素位置を取得し、前記2つの第4のハーフ画素が前記第3のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうち補間されていない画素位置であることと、
前記第3のハーフ画素位置の周囲エリアを4つのパーティション分割し、各パーティションが、前記第3のハーフ画素位置と、前記4つのハーフ画素位置のうち前記第3のハーフ画素位置に隣接する2つの画素位置と、前記2つの第4のハーフ画素位置とによって分割されたエリアから得られることと、
を含むことを特徴とする請求項5に記載の方法。 - 前記ハーフ画素推定による最適位置に従って前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得することは、
前記ハーフ画素推定による最適位置に従って前記第1のパーティション内で3つの周囲位置のクォーター補間を行って、前記ハーフ画素推定による最適位置に隣接する3つのクォーター画素位置を取得し、前記3つのクォーター画素位置が前記第1のパーティション内にあることと、
前記ハーフ画素推定による最適位置と前記3つのクォーター画素位置から第3の最小レート歪みコストに対応する位置を取得することと、
前記第3の最小レート歪みコストに対応する位置がクォーター画素推定による最適位置であることを確定することと、
を含むことを特徴とする請求項1から7のいずれか1項に記載の方法。 - ビデオ画像の処理装置であって、
符号化待ちビデオ画像からターゲット画像フレームを取得するための画像取得モジュールと、
ターゲット画像フレームに対して整数画素動き推定を行って、整数画素推定による最適位置を取得するための整数画素推定モジュールと、
前記整数画素推定による最適位置に対してハーフ画素推定を行って、ハーフ画素推定による最適位置を取得するための第1のサブ画素推定モジュールと、
前記ハーフ画素推定による最適位置の周囲エリアを4つのパーティションに分割するための画像パーティションモジュールであって、各パーティションにはそれぞれクォーター補間による2つのクォーター画素位置が含まれる画像パーティションモジュールと、
前記4つのパーティションにおける各ハーフ画素位置から最小レート歪みコストに対応する位置を取得し、前記最小レート歪みコストに対応する位置が属するパーティションが第1のパーティションであることを確定するための第1のパーティション取得モジュールと、
ハーフ画素推定による最適位置に従って前記第1のパーティション内でクォーター画素推定を行って、クォーター画素推定による最適位置を取得するための第2のサブ画素推定モジュールと、
前記クォーター画素推定による最適位置を動き推定結果として、動き補償を行うための動き補償モジュールと、
を含むことを特徴とする装置。 - 前記第1のサブ画素推定モジュールは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得するための第1のハーフ画素取得モジュールであって、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置である第1のハーフ画素取得モジュールと、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するための第1のコスト計算モジュールと、
前記第1の最小レート歪みコストに対応する位置が前記整数画素推定による最適位置である場合に、前記ハーフ画素推定による最適位置が前記整数画素推定による最適位置であることを確定するための第1の最適位置確定モジュールと、
を含むことを特徴とする請求項9に記載の装置。 - 前記第1のパーティション取得モジュールは、さらに、前記第1の最小レート歪みコストに対応する位置が前記整数画素推定による最適位置である場合に、前記整数画素推定による最適位置の周囲エリアを4つのパーティションに分割し、各パーティションは前記整数画素推定による最適位置、前記4つのハーフ画素位置のうち2つのハーフ画素位置によって分割されたエリアから得られる、
ことを特徴とする請求項10に記載の装置。 - 前記第1のサブ画素推定モジュールは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得するための第1のハーフ画素取得モジュールであって、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置である第1のハーフ画素取得モジュールと、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するための第1のコスト計算モジュールと、
前記第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得するための第2のハーフ画素取得モジュールであって、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置が前記第1のハーフ画素位置と同じ軸方向にあり、前記第1のハーフ画素位置が前記4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置である第2のハーフ画素取得モジュールと、
前記第1のハーフ画素位置と前記第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得するための第2のコスト計算モジュールと、
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記ハーフ画素推定による最適位置が前記第1のハーフ画素位置であることを確定するための第2の最適位置確定モジュールと、
を含むことを特徴とする請求項9に記載の装置。 - 前記第1のサブ画素推定モジュールは、
前記整数画素推定による最適位置に隣接する4つのハーフ画素位置を取得するための第1のハーフ画素取得モジュールであって、前記4つのハーフ画素位置が前記整数画素推定による最適位置の真上、真下、左側、右側にある4つの画素位置である第1のハーフ画素取得モジュールと、
前記整数画素推定による最適位置と前記4つのハーフ画素位置から第1の最小レート歪みコストに対応する位置を取得するための第1のコスト計算モジュールと、
前記第1の最小レート歪みコストに対応する位置が第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置を取得するための第2のハーフ画素取得モジュールであって、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置が前記第1のハーフ画素位置と同じ軸方向にあり、前記第1のハーフ画素位置が前記4つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置である第2のハーフ画素取得モジュールと、
前記第1のハーフ画素位置と前記第1のハーフ画素位置に隣接する2つのハーフ画素位置から、第2の最小レート歪みコストに対応する位置を取得するための第2のコスト計算モジュールと、
前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、前記ハーフ画素推定による最適位置が前記第3のハーフ画素位置であることを確定するための第2の最適位置確定モジュールであって、前記第3のハーフ画素位置が前記第1のハーフ画素位置に隣接する2つのハーフ画素位置のうちレート歪みコストが最小となるハーフ画素位置である第2の最適位置確定モジュールと、
を含むことを特徴とする請求項9に記載の装置。 - 前記第1のパーティション取得モジュールは、
前記第2の最小レート歪みコストに対応する位置が前記第1のハーフ画素位置である場合に、前記第1のハーフ画素位置に隣接する第2のハーフ画素位置を取得するための第3のハーフ画素取得モジュールであって、前記第2のハーフ画素位置が前記第1のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうちハーフ補間されていない画素位置である第3のハーフ画素取得モジュールと、
前記第1のハーフ画素位置の周囲エリアを4つのパーティションに分割するための第1のエリア分割モジュールであって、各パーティションが前記第1のハーフ画素位置と、前記整数画素推定による最適位置と、前記第1のハーフ画素位置に隣接する2つのハーフ画素位置と、前記第2のハーフ画素位置とによって分割されたエリアから得られる第1のエリア分割モジュールと、
を含むことを特徴とする請求項12に記載の装置。 - 前記第1のパーティション取得モジュールは、
前記第2の最小レート歪みコストに対応する位置が第3のハーフ画素位置である場合に、前記第3のハーフ画素位置に隣接する2つの第4のハーフ画素位置を取得するための第4のハーフ画素取得モジュールであって、前記2つの第4のハーフ画素が前記第3のハーフ画素位置の真上、真下、左側、右側にある4つの画素位置のうち補間されていない画素位置である第4のハーフ画素取得モジュールと、
前記第3のハーフ画素位置の周囲エリアを4つのパーティションに分割するための第2のエリア分割モジュールであって、各パーティションが、前記第3のハーフ画素位置と、前記4つのハーフ画素位置のうち前記第3のハーフ画素位置に隣接する2つの画素位置と、前記2つの第4のハーフ画素位置とによって分割されたエリアから得られる第2のエリア分割モジュールと、
を含むことを特徴とする請求項12に記載の装置。 - 前記第2のサブ画素推定モジュールは、
前記ハーフ画素推定による最適位置に従って前記第1のパーティション内で3つの周囲位置のクォーター補間を行って、前記ハーフ画素推定による最適位置に隣接する3つのクォーター画素位置を取得するためのクォーター補間モジュールであって、前記3つのクォーター画素位置が前記第1のパーティション内にあるクォーター補間モジュールと、
前記ハーフ画素推定による最適位置と前記3つのクォーター画素位置から第3の最小レート歪みコストに対応する位置を取得するための第3のコスト計算モジュールと、
前記第3の最小レート歪みコストに対応する位置がクォーター画素推定による最適位置であることを確定するための第3の最適位置確定モジュールと、
を含むことを特徴とする請求項9から15のいずれか1項に記載の装置。 - プロセッサー、通信インタフェース、メモリ及び通信バスを含むビデオ処理装置であって、
前記プロセッサー、前記通信インタフェース、及び前記メモリは前記通信バスを介して相互の通信を完成し、前記通信インタフェースは通信モジュールのインタフェースであり、
前記メモリは、プログラムコードを記憶し、前記プログラムコードを前記プロセッサーに伝送し、
前記プロセッサーは、メモリ内のプログラムコードの指令を呼び出して請求項1から8のいずれか1項に記載の方法を実行する、
ことを特徴とするビデオ処理装置。 - 請求項1から8のいずれか1項に記載の方法を実行するためのプログラムコードを記憶するための記憶媒体。
- コンピュータで実行されるときに請求項1から8のいずれか1項に記載の方法を前記コンピュータに実行させる指令を含むコンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711050289.8 | 2017-10-31 | ||
CN201711050289.8A CN109729363B (zh) | 2017-10-31 | 2017-10-31 | 一种视频图像的处理方法和装置 |
PCT/CN2018/104073 WO2019085636A1 (zh) | 2017-10-31 | 2018-09-05 | 一种视频图像的处理方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020520194A true JP2020520194A (ja) | 2020-07-02 |
JP6921461B2 JP6921461B2 (ja) | 2021-08-18 |
Family
ID=66294470
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019563038A Active JP6921461B2 (ja) | 2017-10-31 | 2018-09-05 | ビデオ画像の処理方法及び装置 |
Country Status (7)
Country | Link |
---|---|
US (2) | US10944985B2 (ja) |
EP (1) | EP3706420A4 (ja) |
JP (1) | JP6921461B2 (ja) |
KR (1) | KR102276264B1 (ja) |
CN (1) | CN109729363B (ja) |
MA (1) | MA50861A (ja) |
WO (1) | WO2019085636A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109729363B (zh) * | 2017-10-31 | 2022-08-19 | 腾讯科技(深圳)有限公司 | 一种视频图像的处理方法和装置 |
CN112866719B (zh) * | 2019-11-27 | 2022-09-23 | 北京博雅慧视智能技术研究院有限公司 | 一种针对avs2的快速分像素预测方法 |
WO2022246809A1 (zh) * | 2021-05-28 | 2022-12-01 | Oppo广东移动通信有限公司 | 编解码方法、码流、编码器、解码器以及存储介质 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6757330B1 (en) * | 2000-06-01 | 2004-06-29 | Hewlett-Packard Development Company, L.P. | Efficient implementation of half-pixel motion prediction |
JP2006254349A (ja) | 2005-03-14 | 2006-09-21 | Toshiba Corp | 動きベクトル検出方法、動きベクトル検出装置およびコンピュータ上で動きベクトル検出処理を実行するコンピュータプログラム |
US20070217515A1 (en) | 2006-03-15 | 2007-09-20 | Yu-Jen Wang | Method for determining a search pattern for motion estimation |
CN101247523B (zh) * | 2008-03-18 | 2010-09-08 | 上海华平信息技术股份有限公司 | 用于h.264编码器的半像素运动估计方法 |
JP4742325B2 (ja) * | 2009-06-22 | 2011-08-10 | カシオ計算機株式会社 | 動きベクトル検出装置、および、プログラム |
CN102164283A (zh) * | 2011-05-30 | 2011-08-24 | 江苏大学 | 一种基于avs的亚像素运动估计方法 |
CN104378642A (zh) * | 2014-10-29 | 2015-02-25 | 南昌大学 | 一种基于cuda的h.264分数像素快速插值方法 |
US10462480B2 (en) * | 2014-12-31 | 2019-10-29 | Microsoft Technology Licensing, Llc | Computationally efficient motion estimation |
WO2017082443A1 (ko) * | 2015-11-13 | 2017-05-18 | 엘지전자 주식회사 | 영상 코딩 시스템에서 임계값을 이용한 적응적 영상 예측 방법 및 장치 |
CN109729363B (zh) * | 2017-10-31 | 2022-08-19 | 腾讯科技(深圳)有限公司 | 一种视频图像的处理方法和装置 |
-
2017
- 2017-10-31 CN CN201711050289.8A patent/CN109729363B/zh active Active
-
2018
- 2018-09-05 EP EP18873854.6A patent/EP3706420A4/en active Pending
- 2018-09-05 JP JP2019563038A patent/JP6921461B2/ja active Active
- 2018-09-05 WO PCT/CN2018/104073 patent/WO2019085636A1/zh unknown
- 2018-09-05 MA MA050861A patent/MA50861A/fr unknown
- 2018-09-05 KR KR1020197035773A patent/KR102276264B1/ko active IP Right Grant
-
2019
- 2019-10-18 US US16/657,226 patent/US10944985B2/en active Active
-
2021
- 2021-02-04 US US17/168,086 patent/US11589073B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3706420A1 (en) | 2020-09-09 |
KR20200002038A (ko) | 2020-01-07 |
JP6921461B2 (ja) | 2021-08-18 |
CN109729363A (zh) | 2019-05-07 |
US20210235113A1 (en) | 2021-07-29 |
CN109729363B (zh) | 2022-08-19 |
US11589073B2 (en) | 2023-02-21 |
EP3706420A4 (en) | 2021-07-21 |
US20200053384A1 (en) | 2020-02-13 |
WO2019085636A1 (zh) | 2019-05-09 |
MA50861A (fr) | 2020-09-09 |
KR102276264B1 (ko) | 2021-07-12 |
US10944985B2 (en) | 2021-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7237874B2 (ja) | イメージ予測方法および装置 | |
US11770556B2 (en) | Method and apparatus for processing intra prediction mode | |
KR102060184B1 (ko) | 픽쳐 예측 방법 및 관련 장치 | |
JP7463460B2 (ja) | ビデオ復号方法およびビデオデコーダ | |
US11589073B2 (en) | Method and device for processing video image | |
JP2010514300A (ja) | ビデオ画像のブロックを復号化する方法 | |
JP7346601B2 (ja) | Mpmリストを構成する方法、クロマブロックのイントラ予測モードを取得する方法、および装置 | |
CN116668679A (zh) | 编解码设备、非暂态计算机可读存储介质和数据发送设备 | |
KR102273670B1 (ko) | 움직임 보상 정보를 수정하는 데이터 처리 시스템과 데이터 처리 방법 | |
JP2024514294A (ja) | マルチメディアデータ処理方法、装置、機器、コンピュータ可読記憶媒体及びコンピュータプログラム | |
CN108156460B (zh) | 视频解码系统、视频解码方法和相应地计算机存储介质 | |
CN110602493B (zh) | 一种仿射运动补偿的交织预测的方法及设备 | |
US10805611B2 (en) | Method and apparatus of constrained sequence header | |
JP2022540982A (ja) | 情報処理方法及び装置、設備、記憶媒体 | |
US12003764B2 (en) | Prediction method for current block and electronic device | |
US20220217399A1 (en) | Prediction method for current block and electronic device | |
JP2010041235A (ja) | 画像符号化装置及び復号装置 | |
WO2021003671A1 (en) | Resolution-adaptive video coding | |
WO2021046692A1 (en) | Resolution-adaptive video coding with conditional interpolation filters | |
KR20230162988A (ko) | 멀티미디어 데이터 프로세싱 방법 및 장치, 컴퓨터 디바이스, 및 컴퓨터-판독가능 저장 매체 | |
KR20230140450A (ko) | 디코딩 프로세스의 에너지 소비를 나타내는 정보를 시그널링하기 위한 메타데이터 | |
WO2024030692A1 (en) | Systems and methods of video decoding with improved buffer storage and bandwidth efficiency | |
CN115190302A (zh) | 在视频解码装置中进行图像处理的方法、装置及系统 | |
JP2012090031A (ja) | 復号装置及び復号方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191113 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201109 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210224 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210628 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210721 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6921461 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |