JP5893729B2 - 一体化されたマージモードおよび適応動きベクトル予測モード候補選択 - Google Patents

一体化されたマージモードおよび適応動きベクトル予測モード候補選択 Download PDF

Info

Publication number
JP5893729B2
JP5893729B2 JP2014516990A JP2014516990A JP5893729B2 JP 5893729 B2 JP5893729 B2 JP 5893729B2 JP 2014516990 A JP2014516990 A JP 2014516990A JP 2014516990 A JP2014516990 A JP 2014516990A JP 5893729 B2 JP5893729 B2 JP 5893729B2
Authority
JP
Japan
Prior art keywords
candidate block
candidate
block
motion vector
mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014516990A
Other languages
English (en)
Other versions
JP2014517656A (ja
Inventor
ジェン、ユンフェイ
ワン、シャンリン
カークゼウィックズ、マルタ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2014517656A publication Critical patent/JP2014517656A/ja
Application granted granted Critical
Publication of JP5893729B2 publication Critical patent/JP5893729B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/109Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

関連出願
本出願は、それらのすべての全体が参照により本明細書に組み込まれる、2011年7月11日に出願された米国仮出願第61/506,558号、2011年6月20日に出願された米国仮出願第61/499,114号、および2011年7月18日に出願された米国仮出願第61/509,007号の利益を主張する。
本開示は、ビデオコーディングに関し、より詳細には、動きベクトル予測プロセスにおいて動きベクトル予測候補ブロックを選択するための技法に関する。
デジタルビデオ機能は、デジタルテレビジョン、デジタルダイレクトブロードキャストシステム、ワイヤレスブロードキャストシステム、携帯情報端末(PDA)、ラップトップまたはデスクトップコンピュータ、デジタルカメラ、デジタル記録デバイス、デジタルメディアプレーヤ、ビデオゲームデバイス、ビデオゲームコンソール、セルラー電話または衛星無線電話、ビデオ遠隔会議デバイスなどを含む、広範囲にわたるデバイスに組み込まれ得る。デジタルビデオデバイスは、デジタルビデオ情報をより効率的に送信、受信および記憶するための、MPEG−2、MPEG−4、ITU−T H.263、ITU−T H.264/MPEG−4,Part10,Advanced Video Coding(AVC)によって定義された規格、現在開発中の高効率ビデオコーディング(HEVC:High Efficiency Video Coding)規格、およびそのような規格の拡張に記載されているビデオ圧縮技法など、ビデオ圧縮技法を実装する。
ビデオ圧縮技法は、ビデオシーケンスに固有の冗長性を低減または除去するために空間的予測および/または時間的予測を含む。ブロックベースのビデオコーディングでは、ビデオフレームまたはスライスはマクロブロックに区分され得る。各ブロックはさらに区分され得る。イントラコード化(I)フレームまたはスライス中のブロックは、同じフレームまたはスライス中の隣接ブロック中の参照サンプルに関する空間的予測を使用して符号化される。インターコード化(PまたはB)フレームまたはスライス中のブロックは、同じフレームまたはスライス中の隣接ブロック中の参照サンプルに関する空間的予測、あるいは他の参照フレーム中の参照サンプルに関する時間的予測を使用し得る。空間的予測または時間的予測は、コーディングされるべきブロックの予測ブロックを生じる。残差データは、コーディングされるべき元のブロックと予測ブロックとの間のピクセル差分を表す。
インターコード化ブロックは、予測ブロックを形成する参照サンプルのブロックをポイントする動きベクトルと、コード化ブロックと予測ブロックとの間の差分を示す残差データとに従って符号化される。イントラコード化ブロックは、イントラコーディングモードと残差データとに従って符号化される。さらなる圧縮のために、残差データは、ピクセル領域から変換領域に変換されて、残差変換係数が得られ得、その残差変換係数は、次いで量子化され得る。最初は2次元アレイに構成される、量子化された変換係数は、特定の順序でスキャンされて、エントロピーコーディングのための変換係数の1次元ベクトルが生成され得る。
概して、本開示では、ビデオデータをコーディングするための技法について説明する。本開示では、動きベクトル予測プロセスにおいて動きベクトル予測候補ブロックを選択するための技法について説明する。
本開示の一例では、ビデオコーディングプロセスにおいて動きベクトルを符号化する方法は、動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、判断されたモードと候補ブロックのセットとを使用して、ビデオデータの現在のブロックについて動きベクトル予測プロセスを実行することであって、候補ブロックのセットが複数のモードの各々について同じである、実行することとを備える。
本開示の別の例では、ビデオコーディングプロセスにおいて動きベクトルを復号する方法は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、候補ブロックのセットからの候補ブロックを判断することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックに関連する情報が、現在のブロックのための動きベクトルを復号するために使用される、判断することとを備える。
本開示の別の例では、ビデオコーディングプロセスにおいて動きベクトルを符号化する方法は、動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、判断されたモードと候補ブロックのセットとを使用して、ビデオデータの現在のブロックについて動きベクトル予測プロセスを実行することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用される、実行することとを備える。
本開示の別の例では、ビデオコーディングプロセスにおいて動きベクトルを復号する方法は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを示すシンタックス要素を受信することと、候補ブロックのセットからの候補ブロックを示すインデックスを受信することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用され、候補ブロックに関連する情報が、現在のブロックのための動きベクトルを復号するために使用される、受信することとを備える。
1つまたは複数の例の詳細を添付の図面および以下の説明に記載する。他の特徴、目的、および利点は、その説明および図面、ならびに特許請求の範囲から明らかになろう。
適応動きベクトル予測(AMVP:adaptive motion vector prediction)モードによる動きベクトル予測のための候補ブロックを示す概念図。 マージモードによる動きベクトル予測のための候補ブロックを示す概念図。 例示的なビデオ符号化および復号システムを示すブロック図。 例示的なビデオエンコーダを示すブロック図。 マージモードのためのシグナリング情報の概念図。 AMVPモードのためのシグナリング情報の概念図。 本開示の一例による、AMVPおよびマージモードのための候補ブロックを示す概念図。 本開示の別の例による、AMVPおよびマージモードのための候補ブロックを示す概念図。 本開示の別の例による、AMVPおよびマージモードのための候補ブロックを示す概念図。 本開示の別の例による、AMVPおよびマージモードのための候補ブロックと検査パターンとを示す概念図。 例示的なビデオデコーダを示すブロック図。 ビデオを符号化する例示的な方法を示すフローチャート。 マージモードにおいてビデオを符号化する例示的な方法を示すフローチャート。 AMVPモードにおいてビデオを符号化する例示的な方法を示すフローチャート。 ビデオを復号する例示的な方法を示すフローチャート。 マージモードにおいてビデオを復号する例示的な方法を示すフローチャート。 AMVPモードにおいてビデオを復号する例示的な方法を示すフローチャート。 ビデオを符号化する別の例示的な方法を示すフローチャート。 ビデオを復号する別の例示的な方法を示すフローチャート。 マージモードにおいてビデオを復号する別の例示的な方法を示すフローチャート。 AMVPモードにおいてビデオを復号する別の例示的な方法を示すフローチャート。
概して、本開示では、ビデオデータをコーディングするための技法について説明する。本開示では、動きベクトル予測プロセスにおいて動きベクトル予測候補ブロックを選択するための技法について説明する。一例では、本開示は、複数の動きベクトル予測モードの各々が、候補ブロックの同じセットを使用して、現在のブロックのための動きベクトルを予測することを提案する。別の例では、本開示は、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定されることを提案する。追加の候補ブロックは、セット中のブロックのうちの別の1つが利用不可能である場合に使用される。
デジタルビデオデバイスは、デジタルビデオ情報をより効率的に符号化および復号するためのビデオ圧縮技法を実装する。ビデオ圧縮は、ビデオシーケンスに固有の冗長性を低減または除去するために空間的(フレーム内)予測および/または時間的(フレーム間)予測技法を適用し得る。
Joint Cooperative Team for Video Coding(JCT−VC)によって現在開発中の高効率ビデオコーディング(HEVC)規格に従うビデオコーディングでは、ビデオフレームがコーディングユニットに区分され得る。コーディングユニット(CU)は、概して、ビデオ圧縮のために様々なコーディングツールが適用される基本ユニットとして働く画像領域を指す。CUは、通常、Yとして示されるルミナンス成分と、UおよびVとして示される2つのクロマ成分とを有する。ビデオサンプリングフォーマットに応じて、サンプルの数で表されるUおよびV成分のサイズは、Y成分のサイズと同じであるかまたはそれとは異なり得る。CUは、一般に正方形であり、たとえば、ITU−T H.264などの他のビデオコーディング規格の下でのいわゆるマクロブロックと同様であると見なされ得る。
より良好なコーディング効率を達成するために、コーディングユニットは、ビデオコンテンツに応じて可変サイズを有し得る。さらに、コーディングユニットは、予測または変換のためにより小さいブロックに分割され得る。具体的には、各コーディングユニットは、予測ユニット(PU)と変換ユニット(TU)とにさらに区分され得る。予測ユニットは、H.264などの他のビデオコーディング規格の下でのいわゆるパーティションと同様であると見なされ得る。変換ユニット(TU)は、変換係数を生成するために変換が適用される残差データのブロックを指す。
本出願では、例示のために、開発中のHEVC規格の現在提案されている態様のいくつかに従うコーディングについて説明する。ただし、本開示で説明する技法は、H.264または他の規格に従って定義されるビデオコーディングプロセスあるいはプロプライエタリビデオコーディングプロセスなど、他のビデオコーディングプロセスのために有用であり得る。
HEVCの規格化の取り組みは、HEVCテストモデル(HM)と呼ばれるビデオコーディングデバイスのモデルに基づく。HMは、たとえば、ITU−T H.264/AVCによるデバイスに勝るビデオコーディングデバイスのいくつかの能力を仮定する。たとえば、H.264は9つのイントラ予測符号化モードを提供するが、HMは34個ものイントラ予測符号化モードを提供する。
HMによれば、CUは、1つまたは複数の予測ユニット(PU)および/または1つまたは複数の変換ユニット(TU)を含み得る。ビットストリーム内のシンタックスデータは、ピクセルの数に関して最大CUである最大コーディングユニット(LCU)を定義し得る。概して、CUは、CUがサイズの差異を有しないことを除いて、H.264のマクロブロックと同様の目的を有する。したがって、CUは、サブCUに分割され得る。概して、本開示におけるCUへの言及は、ピクチャの最大コーディングユニットまたはLCUのサブCUを指すことがある。LCUはサブCUに分割され得、各サブCUはさらにサブCUに分割され得る。ビットストリームのシンタックスデータは、CU深さと呼ばれる、LCUが分割され得る最大回数を定義し得る。それに応じて、ビットストリームは最小コーディングユニット(SCU)をも定義し得る。本開示ではまた、CU、PU、またはTUのいずれかを指すために「ブロック」または「部分」という用語を使用する。概して、「部分」は、ビデオフレームの任意のサブセットを指し得る。
LCUは4分木データ構造に関連付けられ得る。概して、4分木データ構造はCUごとに1つのノードを含み、ルートノードはLCUに対応する。CUが4つのサブCUに分割された場合、CUに対応するノードは4つのリーフノードを含み、リーフノードの各々はサブCUのうちの1つに対応する。4分木データ構造の各ノードは、対応するCUのシンタックスデータを与え得る。たとえば、4分木のノードは、そのノードに対応するCUがサブCUに分割されるかどうかを示す分割フラグを含み得る。CUのシンタックス要素は、再帰的に定義され得、CUがサブCUに分割されるかどうかに依存し得る。CUがさらに分割されない場合、そのCUはリーフCUと呼ばれる。
その上、リーフCUのTUもそれぞれの4分木データ構造に関連付けられ得る。すなわち、リーフCUは、リーフCUがどのようにTUに区分されるかを示す4分木を含み得る。本開示では、LCUがどのように区分されるかを示す4分木をCU4分木と呼び、リーフCUがどのようにTUに区分されるかを示す4分木をTU4分木と呼ぶ。TU4分木のルートノードは概してリーフCUに対応し、CU4分木のルートノードは概してLCUに対応する。分割されないTU4分木のTUはリーフTUと呼ばれる。
リーフCUは、1つまたは複数の予測ユニット(PU)を含み得る。概して、PUは、対応するCUの全部または一部分を表し、そのPUの参照サンプルを取り出すためのデータを含み得る。たとえば、PUがインターモード符号化されるとき、PUは、PUのための動きベクトルを定義するデータを含み得る。動きベクトルを定義するデータは、たとえば、動きベクトルの水平成分、動きベクトルの垂直成分、動きベクトルの解像度(たとえば、1/4ピクセル精度もしくは1/8ピクセル精度)、動きベクトルがポイントする参照フレーム、および/または動きベクトルの参照リスト(たとえば、リスト0もしくはリスト1)を記述し得る。(1つまたは複数の)PUを定義するリーフCUのデータはまた、たとえば、CUを1つまたは複数のPUに区分することを記述し得る。区分モードは、CUが予測コーディングされないか、イントラ予測モード符号化されるか、またはインター予測モード符号化されるかに応じて異なり得る。イントラコーディングの場合、PUは、以下で説明するリーフ変換ユニットと同じように扱われ得る。
ブロック(たとえば、ビデオデータの予測ユニット(PU))をコーディングするために、ブロックの予測子が最初に導出される。予測子は、イントラ(I)予測(すなわち、空間的予測)またはインター(PまたはB)予測(すなわち、時間的予測)のいずれかを通して導出され得る。したがって、いくつかの予測ユニットは、同じフレーム中の隣接参照ブロックに関する空間的予測を使用してイントラコーディング(I)され得、他の予測ユニットは、他のフレーム中の参照ブロックに関してインターコーディング(PまたはB)され得る。
予測子が識別されると、元のビデオデータブロックとそれの予測子との間の差分が計算される。この差分は、予測残差とも呼ばれ、コーディングされるべきブロックのピクセルと、参照ブロックの対応するピクセル、すなわち、予測子との間のピクセル値差分を指す。より良好な圧縮を達成するために、予測残差(すなわち、ピクセル差分値のアレイ)は、概して、たとえば、離散コサイン変換(DCT)、整数変換、カルーネンレーベ(Karhunen-Loeve)(K−L)変換、または他の変換を使用して変換され得る。
インター予測を使用してPUをコーディングすることは、現在のブロックと参照フレーム中のブロックとの間の動きベクトルを計算することを伴う。動きベクトルは、動き推定(または動き探索)と呼ばれるプロセスを通して計算される。動きベクトルは、たとえば、参照フレームの参照サンプルに対する、現在のフレーム中の予測ユニットの変位を示し得る。参照サンプルは、絶対値差分和(SAD:sum of absolute difference)、2乗差分和(SSD:sum of squared difference)、または他の差分メトリックによって判断され得るピクセル差分に関して、コーディングされているPUを含むCUの部分にぴったり一致することがわかるブロックであり得る。参照サンプルは、参照フレームまたは参照スライス内のどこにでも発生し得る。いくつかの例では、参照サンプルは分数ピクセル位置において発生し得る。現在の部分に最も良く一致する参照フレームの部分を見つけると、エンコーダは、現在の部分のための現在の動きベクトルを、現在の部分から参照フレーム中の一致する部分までの(すなわち、現在の部分の中心から一致する部分の中心までの)ロケーションの差分として判断する。
いくつかの例では、エンコーダは、符号化ビデオビットストリーム中で、各部分について動きベクトルをシグナリングし得る。シグナリングされた動きベクトルは、ビデオデータを復号するために、デコーダによって動き補償を実行するために使用される。しかしながら、元の動きベクトルを直接シグナリングすると、一般に、情報を搬送するために多数のビットが必要なので、コーディングがあまり効率的でなくなることがある。
いくつかの事例では、元の動きベクトルを直接シグナリングするのではなく、エンコーダは、各パーティションについて、すなわち、各PUについて動きベクトルを予測し得る。この動きベクトル予測を実行する際に、エンコーダは、現在の部分と同じフレーム中の空間的に隣接するブロックから判断される候補動きベクトルのセット、あるいは参照フレーム中のコロケートブロックから判断される候補動きベクトルを選択し得る。エンコーダは、動きベクトル予測を実行し、必要な場合、シグナリングする際のビットレートを低減するために、元の動きベクトルをシグナリングするのではなく予測差分をシグナリングし得る。空間的に隣接するブロックからの候補動きベクトルは空間MVP候補と呼ばれることがあるが、別の参照フレーム中のコロケートブロックからの候補動きベクトルは時間MVP候補と呼ばれることがある。
動きベクトル予測の2つの異なるモードまたはタイプがHEVC規格の現在のワーキングドラフトにおいて提案されている。一方のモードは「マージ」モードと呼ばれる。他方のモードは適応動きベクトル予測(AMVP)と呼ばれる。マージモードでは、エンコーダは、フレームの現在の部分のための選択された候補動きベクトルから、動きベクトルと、(所与の参照ピクチャリストにおいて動きベクトルがポイントする参照フレームを識別する)参照インデックスと、(すなわち、参照フレームが時間的に現在のフレームに先行するかまたは後続するかに関して、参照ピクチャリスト(リスト0またはリスト1)を識別する)動き予測方向とをコピーするように、予測シンタックスのビットストリームシグナリングを通してデコーダに命令する。これは、選択された候補動きベクトル(すなわち、特定の空間MVP候補または時間MVP候補)を識別する候補動きベクトルリストへのインデックスをビットストリーム中でシグナリングすることによって達成される。したがって、マージモードでは、予測シンタックスは、モード(この場合は「マージ」モード)を識別するフラグと、選択された候補動きベクトルを識別するインデックスとを含み得る。いくつかの事例では、候補動きベクトルは、現在の部分に関する因果的部分中にあることになる。すなわち、候補動きベクトルは、デコーダによってすでに復号されていることになる。したがって、デコーダは、因果的部分のための動きベクトルと参照インデックスと動き予測方向とをすでに受信および/または判断している。したがって、デコーダは、単に、メモリから、因果的部分に関連する動きベクトルと参照インデックスと動き予測方向とを取り出し、これらの値を現在の部分についての動き情報としてコピーし得る。マージモードでブロックを再構成するために、デコーダは、現在の部分についての導出された動き情報を使用して予測ブロックを取得し、予測ブロックに残差データを加算してコード化ブロックを再構成する。
AMVPでは、エンコーダは、候補部分から動きベクトルのみをコピーし、コピーされたベクトルを現在の部分の動きベクトルのための予測子として使用するようにビットストリームシグナリングを通してデコーダに命令し、動きベクトル差分(MVD:motion vector difference)をシグナリングする。現在の部分の動きベクトルに関連する参照フレームおよび予測方向は別にシグナリングされる。MVDは、現在の部分のための現在の動きベクトルと、候補部分から導出された動きベクトル予測子との間の差分である。この場合、エンコーダは、動き推定を使用して、コーディングされるべきブロックのための実際の動きベクトルを判断し、次いで、実際の動きベクトルと動きベクトル予測子との間の差分をMVD値として判断する。このようにして、デコーダは、マージモードの場合のように、現在の動きベクトルとして候補動きベクトルの厳密なコピーを使用しないが、そうではなく、動き推定から判断された現在の動きベクトルに値が「近接」し得る候補動きベクトルを使用し、現在の動きベクトルを再生するためにMVDを加算し得る。AMVPモードでブロックを再構成するために、デコーダは、対応する残差データを加算してコード化ブロックを再構成する。
たいていの状況では、MVDは、シグナリングするために現在の動きベクトル全体よりも少ないビットを必要とする。したがって、AMVPは、動きベクトル全体を送ることに勝るコーディング効率を維持しながら、現在の動きベクトルをより正確にシグナリングすることを可能にする。対照的に、マージモードはMVDの指定に対応しておらず、したがって、マージモードは、シグナリング効率の増加(すなわち、ビットの低減)のために動きベクトルシグナリングの精度を犠牲にする。AMVPの予測シンタックスは、モードのフラグ(この場合はAMVPフラグ)と、候補部分のインデックスと、現在の動きベクトルと候補部分からの予測動きベクトルとの間のMVDと、参照インデックスと、動き予測方向とを含み得る。
現在の部分について動きベクトルを判断するために動き推定が実行されると、エンコーダは、参照フレーム中の一致する部分を現在の部分と比較する。この比較は、一般に、上述のように、現在の部分から参照フレーム中の(「参照サンプル」と通常呼ばれる)部分を減算することを伴い、いわゆる残差データを生じる。残差データは、現在の部分と参照サンプルとの間のピクセル差分値を示す。エンコーダは、次いで、この残差データを空間領域から、周波数領域などの変換領域に変換する。通常、エンコーダは、この変換を達成するために、残差データに離散コサイン変換(DCT)を適用する。得られた変換係数は異なる周波数を表し、エネルギーの大部分が、通常、数個の低周波係数に集中するので、エンコーダは、残差データの圧縮を可能にするためにこの変換を実行する。
一般に、得られた変換係数は、特に変換係数が最初に量子化される(丸められる)場合、ランレングス符号化を可能にする方法で一緒にグループ化される。エンコーダは、量子化変換係数についてこのランレングス符号化を実行し、次いで、ランレングスコーディングされた量子化変換係数をさらに圧縮するために統計的ロスレス(またはいわゆる「エントロピー」)符号化を実行する。
ロスレスエントロピーコーディングを実行した後に、エンコーダは、符号化ビデオデータを含むビットストリームを生成する。このビットストリームはまた、いくつかの事例では、たとえば、動きベクトル予測が実行されたかどうかと、動きベクトルモードと、動きベクトル予測子(MVP:motion vector predictor)インデックス(すなわち、選択された動きベクトルをもつ候補部分のインデックス)とを指定するいくつかの予測シンタックス要素を含む。MVPインデックスは、それのシンタックス要素変数名「mvp_idx」と呼ばれることもある。
高効率ビデオコーディング(HEVC)と呼ばれる、ITU−T/ISO/IEC Joint Collaborative Team on Video Coding(JCT−VC)によって採用のために提案されている現在の設計では、エンコーダは、上記で説明した1)AMVPおよび2)マージモードを含む、現在の部分のための動きベクトルをそれによって予測するためのいくつかの動きベクトル予測モードを実行する。これらの2つのモードは同様であるが、AMVPは、MVD、動き予測方向および参照インデックスを定義することが可能であることに関してより多くのフレキシビリティを提供し、マージモードは、単にこの動きベクトル情報(すなわち、動きベクトル、動き予測方向、および参照インデックス)をコピーし、MVDの精度の増加に対応しない。
図1Aに、AMVPモードにおいて使用するための、HEVC規格において現在提案されている候補ブロック(またはPUの部分/ブロック)のセット100を示し、図1Bに、マージモードにおいて使用するための、HEVC規格において現在提案されている候補ブロックのセット110を示す。AMVPモードは、左下(BL)ブロック101、左(L)ブロック102、右上(RA)ブロック103、上(A)ブロック104、左上(LA)ブロック105、および時間ブロック(T)106という6つの候補ブロックを使用する。候補ブロックのセットに加えて、AMVPモードは、候補ブロックを検査するための順序をも指定することに留意されたい。図1Aの例では、検査パターンは、BL−L−RA−A−LA−Tのように進む。図1Bに示すように、マージモードは、左下(BL)ブロック111、左(L)ブロック112、右上(RA)ブロック113、上(A)ブロック114、および時間(T)ブロック115という5つの候補ブロックを使用する。これらの候補ブロックに関連する動きベクトルが、マージモードおよびAMVPモードで動きベクトル予測子を判断するために使用される。マージモードは、AMVPと同様の検査パターンを使用し得るか、または異なる検査パターンを使用し得る。
上記で説明したように、AMVPモードは6つの候補ブロックを使用し、マージモードは5つの候補ブロックを使用する。また、右上(RA)、左下(BL)、および時間(T)ブロック以外の、AMVPモードのための候補ブロックとマージモードのための候補ブロックとは、異なるロケーションにある。したがって、符号化プロセスと復号プロセスの両方の間に多数の候補ブロックが記憶および検討されなければならない。また、左下ブロックはすべての状況において利用可能であるとは限らないので、AMVPのための検査パターンは最適でないことがある。そのような状況は、左下ブロックがまだコーディングされていない(たとえば、それがスライスまたはCU境界上にある)とき、または左下ブロックのためのデータが破損している場合を含む。
本開示では、AMVPモードとマージモードの両方ための一体化された候補ブロックセットを提案する。概して、どの動きベクトル予測モード(たとえば、マージモードまたはAMVPモード)が使用されるかにかかわらず、同じ候補ブロックセットが使用される。したがって、動きベクトルと他のインター予測関係の情報(たとえば、参照フレーム、予測方向など)とを記憶するために、より少ないメモリが必要とされる。本開示の他の例では、追加の候補ブロックを含む候補ブロックのセットを使用するための技法を提案する。また、より最適な検査パターンのための技法をも開示する。
図2は、本開示の例による動きベクトル予測のための技法を利用するように構成され得る例示的なビデオ符号化および復号システム10を示すブロック図である。図2に示すように、システム10は、通信チャネル16を介して符号化ビデオを宛先デバイス14に送信するソースデバイス12を含む。符号化ビデオデータはまた、記憶媒体34またはファイルサーバ36に記憶され得、必要に応じて宛先デバイス14によってアクセスされ得る。記憶媒体またはファイルサーバに記憶されたとき、ビデオエンコーダ20は、コード化ビデオデータを記憶媒体に記憶するための、ネットワークインターフェース、コンパクトディスク(CD)、ブルーレイ(登録商標)またはデジタルビデオディスク(DVD)バーナーまたはスタンピングファシリティデバイス、あるいは他のデバイスなど、別のデバイスにコード化ビデオデータを与え得る。同様に、ネットワークインターフェース、CDまたはDVDリーダーなど、ビデオデコーダ30とは別個のデバイスが、記憶媒体からコード化ビデオデータを取り出し、取り出されたデータをビデオデコーダ30に与え得る。
ソースデバイス12および宛先デバイス14は、デスクトップコンピュータ、ノートブック(すなわち、ラップトップ)コンピュータ、タブレットコンピュータ、セットトップボックス、いわゆるスマートフォンなどの電話ハンドセット、テレビジョン、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲームコンソールなどを含む、多種多様なデバイスのいずれかを備え得る。多くの場合、そのようなデバイスはワイヤレス通信が可能であり得る。したがって、通信チャネル16は、符号化ビデオデータの送信に好適なワイヤレスチャネル、ワイヤードチャネル、またはワイヤレスチャネルとワイヤードチャネルとの組合せを備え得る。同様に、ファイルサーバ36は、インターネット接続を含む任意の標準データ接続を介して宛先デバイス14によってアクセスされ得る。これは、ファイルサーバに記憶された符号化ビデオデータにアクセスするのに好適である、ワイヤレスチャネル(たとえば、Wi−Fi接続)、ワイヤード接続(たとえば、DSL、ケーブルモデムなど)、またはその両方の組合せを含み得る。
本開示の例による、動きベクトル予測のための技法は、オーバージエアテレビジョン放送、ケーブルテレビジョン送信、衛星テレビジョン送信、たとえばインターネットを介したストリーミングビデオ送信、データ記憶媒体に記憶するためのデジタルビデオの符号化、データ記憶媒体に記憶されたデジタルビデオの復号、または他の適用例など、様々なマルチメディア適用例のいずれかをサポートするビデオコーディングに適用され得る。いくつかの例では、システム10は、ビデオストリーミング、ビデオ再生、ビデオブロードキャスト、および/またはビデオテレフォニーなどの適用例をサポートするために、一方向または双方向のビデオ送信をサポートするように構成され得る。
図2の例では、ソースデバイス12は、ビデオソース18と、ビデオエンコーダ20と、変調器/復調器22と、送信機24とを含む。ソースデバイス12において、ビデオソース18は、ビデオカメラなどのビデオキャプチャデバイス、以前にキャプチャされたビデオを含んでいるビデオアーカイブ、ビデオコンテンツプロバイダからビデオを受信するためのビデオフィードインターフェース、および/またはソースビデオとしてコンピュータグラフィックスデータを生成するためのコンピュータグラフィックスシステムなどのソース、あるいはそのようなソースの組合せを含み得る。一例として、ビデオソース18がビデオカメラである場合、ソースデバイス12および宛先デバイス14は、いわゆるカメラフォンまたはビデオフォンを形成し得る。ただし、本開示で説明する技法は、概してビデオコーディングに適用可能であり得、ワイヤレスおよび/またはワイヤード適用例、あるいは符号化ビデオデータがローカルディスクに記憶された適用例に適用され得る。
キャプチャされたビデオ、以前にキャプチャされたビデオ、またはコンピュータ生成されたビデオは、ビデオエンコーダ20によって符号化され得る。符号化されたビデオ情報は、ワイヤレス通信プロトコルなどの通信規格に従ってモデム22によって変調され、送信機24を介して宛先デバイス14に送信され得る。モデム22は、信号変調のために設計された様々なミキサ、フィルタ、増幅器または他の構成要素を含み得る。送信機24は、増幅器、フィルタ、および1つまたは複数のアンテナを含む、データを送信するために設計された回路を含み得る。
ビデオエンコーダ20によって符号化された、キャプチャされたビデオ、以前にキャプチャされたビデオ、またはコンピュータ生成されたビデオはまた、後で消費するために記憶媒体34またはファイルサーバ36に記憶され得る。記憶媒体34は、ブルーレイディスク、DVD、CD−ROM、フラッシュメモリ、または符号化ビデオを記憶するための他の好適なデジタル記憶媒体を含み得る。記憶媒体34に記憶された符号化ビデオは、次いで、復号および再生のために宛先デバイス14によってアクセスされ得る。
ファイルサーバ36は、符号化ビデオを記憶することと、その符号化ビデオを宛先デバイス14に送信することとが可能な任意のタイプのサーバであり得る。例示的なファイルサーバは、(たとえば、ウェブサイトのための)ウェブサーバ、FTPサーバ、ネットワーク接続ストレージ(NAS)デバイス、ローカルディスクドライブ、または符号化ビデオデータを記憶することと、符号化ビデオデータを宛先デバイスに送信することとが可能な他のタイプのデバイスを含む。ファイルサーバ36からの符号化ビデオデータの送信は、ストリーミング送信、ダウンロード送信、またはその両方の組合せであり得る。ファイルサーバ36は、インターネット接続を含む任意の標準データ接続を介して宛先デバイス14によってアクセスされ得る。これは、ファイルサーバに記憶された符号化ビデオデータにアクセスするのに好適である、ワイヤレスチャネル(たとえば、Wi−Fi接続)、ワイヤード接続(たとえば、DSL、ケーブルモデム、イーサネット(登録商標)、USBなど)、またはその両方の組合せを含み得る。
図2の例では、宛先デバイス14は、受信機26と、モデム28と、ビデオデコーダ30と、ディスプレイデバイス32とを含む。宛先デバイス14の受信機26はチャネル16を介して情報を受信し、モデム28はその情報を復調して、ビデオデコーダ30のための復調されたビットストリームを生成する。チャネル16を介して通信される情報は、ビデオデータを復号する際にビデオデコーダ30が使用する、ビデオエンコーダ20によって生成された様々なシンタックス情報を含み得る。そのようなシンタックスはまた、記憶媒体34またはファイルサーバ36に記憶された符号化ビデオデータとともに含まれ得る。ビデオエンコーダ20およびビデオデコーダ30の各々は、ビデオデータを符号化または復号することが可能であるそれぞれのエンコーダデコーダ(コーデック)の一部を形成し得る。
ディスプレイデバイス32は、宛先デバイス14と一体化されるかまたはその外部にあり得る。いくつかの例では、宛先デバイス14は、一体型ディスプレイデバイスを含み、また、外部ディスプレイデバイスとインターフェースするように構成され得る。他の例では、宛先デバイス14はディスプレイデバイスであり得る。概して、ディスプレイデバイス32は、復号されたビデオデータをユーザに対して表示し、液晶ディスプレイ(LCD)、プラズマディスプレイ、有機発光ダイオード(OLED)ディスプレイ、または別のタイプのディスプレイデバイスなど、様々なディスプレイデバイスのいずれかを備え得る。
図2の例では、通信チャネル16は、無線周波数(RF)スペクトルあるいは1つまたは複数の物理伝送線路など、任意のワイヤレスまたはワイヤード通信媒体、あるいはワイヤレス媒体とワイヤード媒体との任意の組合せを備え得る。通信チャネル16は、ローカルエリアネットワーク、ワイドエリアネットワーク、またはインターネットなどのグローバルネットワークなど、パケットベースネットワークの一部を形成し得る。通信チャネル16は、概して、ワイヤード媒体またはワイヤレス媒体の任意の好適な組合せを含む、ビデオデータをソースデバイス12から宛先デバイス14に送信するのに好適な任意の通信媒体、または様々な通信媒体の集合体を表す。通信チャネル16は、ソースデバイス12から宛先デバイス14への通信を可能にするのに有用であり得るルータ、スイッチ、基地局、または任意の他の機器を含み得る。
ビデオエンコーダ20およびビデオデコーダ30は、現在開発中の高効率ビデオコーディング(HEVC)規格などのビデオ圧縮規格に従って動作し得、HEVCテストモデル(HM)に準拠し得る。代替的に、ビデオエンコーダ20およびビデオデコーダ30は、代替的にMPEG−4,Part10,Advanced Video Coding(AVC)と呼ばれるITU−T H.264規格など、他のプロプライエタリ規格または業界規格、あるいはそのような規格の拡張に従って動作し得る。ただし、本開示の技法は、いかなる特定のコーディング規格にも限定されない。他の例には、MPEG−2およびITU−T H.263がある。
図2には示されていないが、いくつかの態様では、ビデオエンコーダ20およびビデオデコーダ30は、それぞれオーディオエンコーダおよびオーディオデコーダと統合され得、また、共通のデータストリームまたは別個のデータストリーム中のオーディオとビデオの両方の符号化を処理するための適切なMUX−DEMUXユニット、または他のハードウェアおよびソフトウェアを含み得る。適用可能な場合、いくつかの例では、MUX−DEMUXユニットはITU H.223マルチプレクサプロトコル、またはユーザデータグラムプロトコル(UDP)などの他のプロトコルに準拠し得る。
ビデオエンコーダ20およびビデオデコーダ30はそれぞれ、1つまたは複数のマイクロプロセッサ、デジタル信号プロセッサ(DSP)、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、ディスクリート論理、ソフトウェア、ハードウェア、ファームウェアなど、様々な好適なエンコーダ回路のいずれか、またはそれらの任意の組合せとして実装され得る。本技法がソフトウェアで部分的に実装されるとき、デバイスは、好適な非一時的コンピュータ可読媒体にソフトウェアの命令を記憶し、1つまたは複数のプロセッサを使用してその命令をハードウェアで実行して、本開示の技法を実行し得る。ビデオエンコーダ20およびビデオデコーダ30の各々は1つまたは複数のエンコーダまたはデコーダ中に含まれ得、そのいずれも、それぞれのデバイスにおいて複合エンコーダ/デコーダ(コーデック)の一部として統合され得る。
ビデオエンコーダ20は、ビデオ符号化プロセスにおける動きベクトル予測のための本開示の技法のいずれかまたはすべてを実装し得る。同様に、ビデオデコーダ30は、ビデオコーディングプロセスにおける動きベクトル予測のためのこれらの技法のいずれかまたはすべてを実装し得る。本開示で説明するビデオコーダは、ビデオエンコーダまたはビデオデコーダを指すことがある。同様に、ビデオコーディングユニットは、ビデオエンコーダまたはビデオデコーダを指すことがある。同様に、ビデオコーディングはビデオ符号化またはビデオ復号を指すことがある。
本開示の一例では、ソースデバイス12のビデオエンコーダ20は、動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、判断されたモードと候補ブロックのセットとを使用して、ビデオデータの現在のブロックについて動きベクトル予測プロセスを実行することであって、候補ブロックのセットが複数のモードの各々について同じである、実行することとを行うように構成され得る。
本開示の別の例では、ソースデバイス12のビデオエンコーダ20は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、判断されたモードと候補ブロックのセットとを使用して、現在のブロックについて動きベクトル予測プロセスを実行することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用される、実行することとを行うように構成され得る。
本開示の別の例では、宛先デバイス14のビデオデコーダ30は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを示すシンタックス要素を受信することと、候補ブロックのセットからの候補ブロックを示すインデックスを受信することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックに関連する情報が、現在のブロックのための動きベクトルを復号するために使用される、受信することとを行うように構成され得る。
本開示の別の例では、宛先デバイス14のビデオデコーダ30は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを示すシンタックス要素を受信することと、候補ブロックのセットからの候補ブロックを示すインデックスを受信することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用され、候補ブロックに関連する情報が、現在のブロックのための動きベクトルを復号するために使用される、受信することとを行うように構成され得る。
図3は、本開示で説明する動きベクトル予測のための技法を使用し得るビデオエンコーダ20の一例を示すブロック図である。ビデオエンコーダ20について、例示のためにHEVCコーディングのコンテキストにおいて説明するが、変換係数のスキャンを必要とし得る他のコーディング規格または方法に関して本開示を限定するものではない。ビデオエンコーダ20は、ビデオフレーム内のCUのイントラコーディングおよびインターコーディングを実行し得る。イントラコーディングは、所与のビデオフレーム内のビデオデータの空間的冗長性を低減または除去するために空間的予測に依拠する。インターコーディングは、ビデオシーケンスの現在のフレームと前にコーディングされたフレームとの間の時間的冗長性を低減または除去するために時間的予測に依拠する。イントラモード(Iモード)は、いくつかの空間ベースのビデオ圧縮モードのいずれかを指すことがある。単方向予測(Pモード)または双方向予測(Bモード)などのインターモードは、いくつかの時間ベースのビデオ圧縮モードのいずれかを指すことがある。
図3に示すように、ビデオエンコーダ20は、符号化されるべきビデオフレーム内の現在のビデオブロックを受信する。図3の例では、ビデオエンコーダ20は、動き補償ユニット44と、動き推定ユニット42と、イントラ予測ユニット46と、参照フレームバッファ64と、加算器50と、変換モジュール52と、量子化ユニット54と、エントロピー符号化ユニット56とを含む。図3に示す変換モジュール52は、残差データのブロックに実際の変換または変換の組合せを適用する構造または装置であり、CUの変換ユニット(TU)と呼ばれることもある変換係数のブロックと混同されるべきでない。ビデオブロック再構成のために、ビデオエンコーダ20はまた、逆量子化ユニット58と、逆変換モジュール60と、加算器62とを含む。再構成されたビデオからブロッキネスアーティファクトを除去するためにブロック境界をフィルタ処理するデブロッキングフィルタ(図3に図示せず)も含まれ得る。所望される場合、デブロッキングフィルタは、一般に、加算器62の出力をフィルタ処理することになる。
符号化プロセス中に、ビデオエンコーダ20は、コーディングされるべきビデオフレームまたはスライスを受信する。フレームまたはスライスは、複数のビデオブロック、たとえば、最大コーディングユニット(LCU)に分割され得る。動き推定ユニット42および動き補償ユニット44は、時間圧縮を行うために、1つまたは複数の参照フレーム中の1つまたは複数のブロックに対する受信したビデオブロックのインター予測コーディングを実行する。イントラ予測ユニット46は、空間圧縮を行うために、コーディングされるべきブロックと同じフレームまたはスライス中の1つまたは複数の隣接ブロックに対する受信したビデオブロックのイントラ予測コーディングを実行し得る。
モード選択ユニット40は、たとえば、各モードについての誤差(すなわち、ひずみ)結果に基づいて、コーディングモードのうちの1つ、すなわち、イントラまたはインターを選択し得、得られたイントラまたはインター予測ブロック(たとえば、予測ユニット(PU))を、残差ブロックデータを生成するために加算器50に与え、参照フレーム中で使用する符号化ブロックを再構成するために加算器62に与える。加算器62は、以下でより詳細に説明するように、予測ブロックを、そのブロックについての、逆変換モジュール60からの逆量子化され逆変換されたデータと合成して、符号化ブロックを再構成する。いくつかのビデオフレームはIフレームに指定され得、Iフレーム中のすべてのブロックはイントラ予測モードで符号化される。場合によっては、たとえば、動き推定ユニット42によって実行された動き探索によって得られたブロックの予測が不十分であったとき、イントラ予測ユニット46は、PフレームまたはBフレーム中のブロックのイントラ予測符号化を実行し得る。
動き推定ユニット42と動き補償ユニット44とは、高度に統合され得るが、概念的な目的のために別々に示してある。動き推定(または動き探索)は、ビデオブロックの動きを推定する動きベクトルを生成するプロセスである。動きベクトルは、たとえば、参照フレームの参照サンプルに対する、現在のフレーム中の予測ユニットの変位を示し得る。動き推定ユニット42は、予測ユニットを参照フレームバッファ64に記憶された参照フレームの参照サンプルと比較することによってインターコード化フレームの予測ユニットのための動きベクトルを計算する。参照サンプルは、絶対値差分和(SAD)、2乗差分和(SSD)、または他の差分メトリックによって判断され得るピクセル差分に関して、コーディングされているPUを含むCUの部分にぴったり一致することがわかるブロックであり得る。参照サンプルは、参照フレームまたは参照スライス内のどこにでも発生し得る。いくつかの例では、参照サンプルは分数ピクセルロケーションにおいて発生し得る。
動きベクトルによって識別される参照フレームの部分は参照サンプルと呼ばれることがある。動き補償ユニット44は、たとえば、PUのための動きベクトルによって識別される参照サンプルを取り出すことによって、現在のCUの予測ユニットについての予測値を計算し得る。いくつかのビデオ符号化技法では、動き推定ユニット42は、計算された動きベクトルと、参照フレームと、予測方向(すなわち、参照フレームが現在のフレームに時間的に先行するのか後続するのかに関する方向)とをエントロピー符号化ユニット56および動き補償ユニット44に送る。他のビデオ符号化技法は、動きベクトルを符号化するために動きベクトル予測プロセスを利用する。動きベクトル予測プロセスは、マージモードとAMVPモードとを含む複数のモードの中から選定され得る。
マージモードでは、エンコーダは、候補ブロックのセットを検討し、現在のブロックと同じ(または最もぴったり一致する)動きベクトルと参照フレームと予測方向とを有するブロックを選択する。これは、各候補ブロックを順に検査することと、候補ブロックの動きベクトル、参照フレーム、および予測方向が現在のブロックにコピーされると、最良のレートひずみ性能を生じる候補ブロックを選定することとによって達成される。次いで、符号化ビデオビットストリーム中でこの動きベクトル情報(すなわち、動きベクトル、参照フレーム、および予測方向)をシグナリングするのではなく、エンコーダは、選択された候補ブロックのためのインデックス番号をシグナリングする。デコーダは、シグナリングされたインデックス番号によって示される候補ブロックから動きベクトル情報をコピーし、コピーされた動きベクトル情報を現在のブロックのために使用し得る。図4Aに、マージモードシグナリングの一例を示す。マージフラグ201は、マージモードが使用されていることを示す。候補ブロックインデックス202は、マージモードのために定義された候補ブロックのセットからの候補ブロックのうちのどれが、現在のブロックについての動きベクトル情報を取り出すために使用されるべきかを示す。
場合によっては、マージモード候補セットのための候補の指定された数を満たすために、何らかの「人工」動きベクトル情報が、候補セットを埋めるために生成され得ることに留意されたい。「人工」動きベクトル情報は、異なる候補ブロックからの動きベクトル情報の部分的な組合せによって生成され得る。たとえば、候補ブロック1からのリスト0動きベクトルが、参照フレームインデックスおよび予測方向とともに、候補2からのリスト1動きベクトルと組み合わせられて、候補セットにおいて新しい動きベクトル情報を形成し得る。いくつかの他の例では、ゼロ動きベクトルも、候補セットを埋めるために追加の動きベクトル情報として追加され得る。しかしながら、候補セットがどのように形成されるかにかかわらず、マージモードでは、現在のブロックについての動きベクトル情報を与えるためにどの候補が選択されるかを示すために、候補セットへのインデックスのみがデコーダにシグナリングされる必要がある。デコーダ側において、同じ候補セットが形成され、動きベクトル情報は、候補セットへのシグナリングされたインデックスによって識別され得る。
AMVPモードでは、エンコーダは、候補ブロックのセットを検討し、最良のレートひずみを生じるか、または何らかの所定のしきい値(たとえば、レートひずみしきい値)を満たす動きベクトル差分(すなわち、それぞれの候補ブロックの動きベクトルと現在のブロックの実際の動きベクトルとの間の差分)を生成するブロックを選択する。AMVPモードは、満足な候補が見つかり、選定されるまで、検査パターンにおいて候補ブロックを検討し得る。代替的に、いくつかの例では、すべての候補ブロックが検査され得、最良の結果を生じる候補ブロックが、コーディングされるべきブロックのためのMVPとして選択される。エンコーダは、次いで、動きベクトル差分とともに、動きベクトル差分を生成するために使用された候補ブロックのためのインデックスをシグナリングし得る。デコーダは、次いで、シグナリングされたインデックスによって示される候補ブロックから取り出された動きベクトルに、受信した動きベクトル差分を加算することによって、現在のブロックのための動きベクトルを再生成し得る。図4Bに、AMVPモードシグナリングの一例を示す。AMVPモードフラグ205は、AMVPモードが使用されていることを示す。候補ブロックインデックス206は、AMVPモードのために定義された候補ブロックのセットからの候補ブロックのうちのどれが、動きベクトルを取り出すために使用されるべきかを示す。AMVPモードはまた、動きベクトル差分207と、参照フレーム208と、予測方向209とをシグナリングする。いくつかの例では、参照フレームおよび予測方向を明示的にシグナリングするのではなく、参照フレームおよび予測方向は、候補ブロックに関連する動きベクトル情報から代わりに取り出される。
上記で説明した例では、符号化ビットストリーム中で動きベクトル情報をシグナリングすることは、エンコーダからデコーダへのそのような要素のリアルタイム送信を必要とするのではなく、そのような情報がビットストリーム中に符号化され、任意の方法でデコーダにとってアクセス可能にされることを意味する。これは、(たとえば、ビデオ会議における)リアルタイム送信、ならびに(たとえば、ストリーミング、ダウンロード、ディスクアクセス、カードアクセス、DVD、ブルーレイなどにおける)デコーダによる将来の使用のために符号化ビットストリームをコンピュータ可読媒体に記憶することを含み得る。
本開示の例によれば、マージモードおよびAMVPモードは、(すなわち、ブロックの数とロケーションの両方に関して)候補ブロックの同じセットを利用する。したがって、エンコーダとデコーダの両方は、候補ブロックのための動きベクトル情報を記憶するために必要なメモリの量を低減し得る。それは、現在のブロックのコーディングプロセス中にそれらの動きベクトルを取り出す際のメモリ帯域幅要件をも低減し得る。
本開示の第1の例では、マージモードおよびAMVPモードは、両方とも、図5Aに示す候補ブロックの同じセット120を使用する。この例では、マージモードは、5つではなく6つの候補ブロックを現在使用するであろう。しかしながら、両方のモードが同じロケーションにある候補ブロックを使用するので、マージモードとAMVPモードの両方のための候補ブロックの総数は低減される。この例では、候補ブロックは、図5Aに示すように、左下(BL)121、左(L)122、左上(LA)125、上(A)124、右上(RA)123、および時間(T)126位置にある。この例では、左候補ブロック122は、現在のブロック127の左エッジに隣接する。左ブロック122の下エッジは、現在のブロック127の下エッジにアラインされる。上候補ブロック124は、現在のブロック127の上エッジに隣接する。上ブロック124の右エッジは、現在のブロック127の右エッジにアラインされる。
本開示の第2の例では、AMVPモードおよびマージモードは、図5Bに示す候補ブロックのセット130を使用する。この例では、AMVPモードのための候補ブロックの数は5まで低減される。マージモードとAMVPモードの両方が、同じロケーションにある候補ブロックを現在使用するので、候補ブロックのさらなる低減が達成される。この例では、候補ブロックは、左下(BL)131、左(L)132、上(A)134、右上(RA)133、および時間(T)135ロケーションにある。上ブロック134および左ブロック132のロケーションは、図5Aの例における上ブロック124および左ブロック122のロケーションとは異なることに留意されたい。この例では、左候補ブロック132は、現在のブロック137の左エッジに隣接する。左ブロック132の上エッジは、現在のブロック137の上エッジにアラインされる。上候補ブロック134は、現在のブロック137の上エッジに隣接する。上ブロック134の左エッジは、現在のブロック137の左エッジにアラインされる。一例では、AMVPモードのための検査パターンは、BL−L−RA−A−Tのように進む。
本開示の第3の例では、マージモードおよびAMVPモードは、図6に示す候補ブロックのセット140を使用する。この例では、候補ブロックの数は、各モードのための総数を5まで低減することによって、ならびに両方のモードのための候補ブロックロケーションを一体化することによって低減される。この例では、候補ブロックは、左下(BL)141、左(L)142、上(A)143、右上(RA)144、および時間(T)145にある。この例では、左候補ブロック142は、現在のブロック147の左エッジに隣接する。左ブロック142の下エッジは、現在のブロック147の下エッジにアラインされる。上候補ブロック143は、現在のブロック147の上エッジに隣接する。上ブロック143の右エッジは、現在のブロック147の右エッジにアラインされる。
別の例では、本開示では、AMVPモードのための改善された検査パターンについて説明する。図7に示すように、たとえば、検査パターンは、L−BL−A−RA−LA−Tのように進む。図1Aに示したようにBL候補ブロックにおいて開始するのではなく、図7の例はL候補ブロックにおいて開始する。ビデオコンテンツは一般に水平方向に移動するので、左側ブロックは、概して、現在のブロックにより多く相関する。BL候補ブロックは、すべての状況において利用可能であるとは限らない(すなわち、まだコーディングされていないことがある)ので、L候補ブロックが最初に検査される。さらに、A候補ブロックの動きベクトルは、現在のブロックの動きベクトルに対してRA候補ブロックのそれよりも高い統計的相関を有することが示されているので、A候補ブロックはRA候補ブロックの前に検査される。
マージモードは、図7に示す同じ検査パターンを使用し得るか、または異なる検査パターンを使用し得る。一例として、マージモードのための検査パターンは、L−A−RA−BL−(LA)−Tのように進み得る。この例では、LAブロックの包含は、最初の4つの候補ブロックのうちの1つが利用不可能であるかどうかに応じて随意または適応可能である。
図7の例は、図5Aの候補ブロックのセットに関して示されている。ただし、この検査パターンは任意の候補セットに適用可能であり得る。概して、左候補ブロックが左下候補ブロックの前に検査されるべきである。次に、上候補ブロックが右上候補ブロックの前に検査されるべきである。残りの候補ブロックは、次いで、任意の順序で検査され得る。いくつかの例では、時間候補ブロックは最後に検査され得る。
本開示の別の例では、マージモードとAMVPの両方のためのフレキシブルな追加の候補を開示する。図5Aの例に示したように、5つの空間候補ブロック(すなわち、L、BL、A、RA、およびLA)および1つの時間候補ブロック(すなわち、T)があり、候補ブロックの合計は6つになる。HEVC規格の前の提案では、マージモードのための候補ブロックの最大数は5つである。したがって、図5Aに示した候補ブロックのうちの1つは、マージモードでは削除され得る。一例では、LA候補ブロックは追加の候補ブロックとして定義され得る(すなわち、それは、当初はマージモードのための候補ブロックのセットの一部として検討されない)。
しかしながら、上述のように、すべての候補ブロックがすべての状況において利用可能であるとは限らない。たとえば、BL候補ブロックは、現在のブロックがコーディングされるときに、まだコーディングされていないことがある。さらに、いくつかの候補ブロックのためのデータが、破損することがあるかまたは(たとえば、リアルタイム復号において)そもそも受信されていないことがある。したがって、本開示は、セット中の候補ブロックが利用不可能であるとわかる状況において追加の候補ブロックを利用することを提案する。このようにして、候補の総数は、利用不可能な候補のために検査を無駄にすることなしに最大限界に保たれる。
一例では、LおよびBL候補は、適用可能なとき、エンコーダまたはデコーダによって最初に検査される。これらの候補ブロックのうちの1つが有効でない(たとえば、破損している)かまたは利用可能でない場合、追加の候補ブロック(たとえば、LA)が代わりに使用され得る。L候補ブロックとBL候補ブロックの両方が有効である場合、AおよびRA候補ブロックが検査される。これらの候補ブロックのうちの1つが有効でないかまたは利用可能でない場合、LA候補ブロックが代わりに使用され得る。A候補ブロックとRA候補ブロックの両方が有効である場合、LA候補ブロックは使用されないことになる。この例では、LA候補ブロックが追加の候補ブロックとして使用される。ただし、現在のブロックに対していずれかの因果的位置にある(すなわち、現在のブロックに対して、候補ブロックがすでにコーディングされた位置にある)いずれかの追加の候補ブロックが使用され得る。
別の例では、図5Aに示したすべての候補ブロックが使用される。候補ブロックの最大数がN個(ここで、Nは6よりも少ない)であるマージモードでは、検査パターンにおける最初のN個の利用可能な候補ブロックがマージモードのための候補ブロックとして使用される。図5Aの例では、L−A−RA−BL−LA−Tの検査パターンをもつ6つの候補ブロックがある。検査パターンにおける最初のN個の利用可能な候補ブロックがマージモードのための候補ブロックの最終セットを形成する。この例では、検査パターンは固定である。別の例では、検査パターンは、ブロックサイズ、パーティションサイズ、および/またはパーティションインデックスに基づいて選択され得る。別の例では、検査パターンは、符号化および復号中に適応的に更新され得る。更新は、前に符号化/復号されたブロックのマージインデックス、動きベクトル予測モード、パーティションサイズ、パーティションインデックス、および/または動きベクトル情報(たとえば、参照インデックス、動きベクトル差分、動きベクトル予測子)に依存し得る。
別の例によれば、追加の候補ブロックを利用する技法は、AMVPモードにも適用され得る。HEVC規格の現在のワーキングドラフトにおけるAMVPモードは、図5Aに示したすべての6つの候補ブロックを検査することをすでに可能にしている。しかしながら、上述のように、これらの候補ブロックのいくつかが利用不可能または無効であることがある。そのような場合、追加のマージ候補が定義され得る。そのようなマージ候補は、現在のPUに対して因果的であるいずれかの位置にあり得る。
図3に戻ると、イントラ予測ユニット46は、動き推定ユニット42と動き補償ユニット44とによって実行されるインター予測の代替として、受信ブロックに対してイントラ予測を実行し得る。イントラ予測ユニット46は、隣接する、前にコーディングされたブロック、たとえば、ブロックについての左から右へ、上から下への符号化順序を仮定すると、現在のブロックの上、右上、左上、または左のブロックに対して受信ブロックを予測し得る。イントラ予測ユニット46は多種多様なイントラ予測モードで構成され得る。たとえば、イントラ予測ユニット46は、符号化されているCUのサイズに基づいて、一定数の方向性予測モード、たとえば、34個の方向性予測モードで構成され得る。
イントラ予測ユニット46は、たとえば、様々なイントラ予測モードの予測誤差値を計算し、最も低い誤差値を生じるモードを選択することによって、イントラ予測モードを選択し得る。方向性予測モードは、空間的に隣接するピクセルの値を合成し、その合成された値をPU中の1つまたは複数のピクセル位置に適用するための機能を含み得る。PU中のすべてのピクセル位置の値が計算されると、イントラ予測ユニット46は、PUの計算値または予測値と符号化されるべき受信した元のブロックとの間のピクセル差分に基づいて予測モードの誤差値を計算し得る。イントラ予測ユニット46は、許容できる誤差値を生じるイントラ予測モードが発見されるまでイントラ予測モードをテストし続け得る。イントラ予測ユニット46は、次いで、PUを加算器50に送り得る。
ビデオエンコーダ20は、コーディングされている元のビデオブロックから、動き補償ユニット44またはイントラ予測ユニット46によって計算された予測データを減算することによって残差ブロックを形成する。加算器50は、この減算演算を実行する1つまたは複数の構成要素を表す。残差ブロックはピクセル差分値の2次元行列に対応し得、残差ブロック中の値の数は、残差ブロックに対応するPU中のピクセルの数と同じである。残差ブロック中の値は、PU中のコロケートピクセルの値と、コーディングされるべき元のブロック中のコロケートピクセルの値との間の差分、すなわち、誤差に対応し得る。そのような演算はルーマ成分とクロマ成分の両方に適用され、したがって、差分は、コーディングされるブロックのタイプに応じてクロマ差分またはルーマ差分であり得る。
変換モジュール52は、残差ブロックから1つまたは複数の変換ユニット(TU)を形成し得る。変換モジュール52は、複数の変換の中から変換を選択する。変換は、ブロックサイズ、コーディングモードなど、1つまたは複数のコーディング特性に基づいて選択され得る。変換モジュール52は、次いで、選択された変換をTUに適用して、変換係数の2次元アレイを備えるビデオブロックを生成する。
変換モジュール52は、得られた変換係数を量子化ユニット54に送り得る。量子化ユニット54は、次いで、その変換係数を量子化し得る。エントロピー符号化ユニット56が、次いで、スキャンモードに従って、行列中の量子化された変換係数のスキャンを実行し得る。本開示では、エントロピー符号化ユニット56がスキャンを実行するものとして説明する。ただし、他の例では、量子化ユニット54などの他の処理ユニットがスキャンを実行し得ることを理解されたい。
変換係数が1次元アレイにスキャンされると、エントロピー符号化ユニット56は、コンテキスト適応型可変長コーディング(CAVLC:context adaptive variable length coding)、コンテキスト適応型バイナリ算術コーディング(CABAC:context adaptive binary arithmetic coding)、シンタックスベースコンテキスト適応型バイナリ算術コーディング(SBAC:syntax-based context-adaptive binary arithmetic coding)、または別のエントロピーコーディング方法などのエントロピーコーディングを係数に適用し得る。エントロピーコーディングはまた、マージモードおよびAMVPモードにおいて使用されるシンタックス要素など、シンタックス要素に適用され得る。
CAVLCを実行するために、エントロピー符号化ユニット56は、送信されるべきシンボルの可変長コードを選択し得る。VLCのコードワードは、相対的により短いコードがより可能性が高いシンボルに対応し、より長いコードがより可能性が低いシンボルに対応するように構築され得る。このようにして、VLCの使用は、たとえば、送信されるべき各シンボルのために等長コードワードを使用するよりも、ビット節約を達成し得る。
CABACを実行するために、エントロピー符号化ユニット56は、送信されるべきシンボルを符号化するために、あるコンテキストに適用すべきコンテキストモデルを選択し得る。変換係数の場合、コンテキストは、たとえば、隣接値が非0であるか否かに関係し得る。エントロピー符号化ユニット56はまた、選択された変換を表す信号など、シンタックス要素をエントロピー符号化し得る。本開示の技法によれば、エントロピー符号化ユニット56は、コンテキストモデル選択のために使用されるファクタの中でも、たとえば、イントラ予測モードのためのイントラ予測方向、シンタックス要素に対応する係数のスキャン位置、ブロックタイプ、および/または変換タイプに基づいて、これらのシンタックス要素を符号化するために使用されるコンテキストモデルを選択し得る。
エントロピー符号化ユニット56によるエントロピーコーディングの後に、得られた符号化ビデオは、ビデオデコーダ30などの別のデバイスに送信されるか、あるいは後で送信するかまたは取り出すためにアーカイブされ得る。
場合によっては、エントロピー符号化ユニット56またはビデオエンコーダ20の別のユニットは、エントロピーコーディングに加えて他のコーディング機能を実行するように構成され得る。たとえば、エントロピー符号化ユニット56はCUおよびPUのコード化ブロックパターン(CBP)値を判断するように構成され得る。また、場合によっては、エントロピー符号化ユニット56は係数のランレングスコーディングを実行し得る。
逆量子化ユニット58および逆変換モジュール60は、それぞれ逆量子化および逆変換を適用して、たとえば、参照ブロックを再構築する際に後で使用するために、ピクセル領域において残差ブロックを再構成する。動き補償ユニット44は、残差ブロックを参照フレームバッファ64のフレームのうちの1つから形成された予測ブロックに加算することによって参照ブロックを計算し得る。動き補償ユニット44はまた、再構成された参照ブロックに1つまたは複数の補間フィルタを適用して、動き推定において使用するサブ整数ピクセル値を計算し得る。加算器62は、再構成された残差ブロックを、動き補償ユニット44によって生成された動き補償予測ブロックに加算して、参照フレームバッファ64に記憶するための再構成されたビデオブロックを生成する。再構成されたビデオブロックは、後続のビデオフレーム中のブロックをインターコーディングするために動き推定ユニット42および動き補償ユニット44によって参照ブロックとして使用され得る。
図8は、符号化ビデオシーケンスを復号するビデオデコーダ30の一例を示すブロック図である。図8の例では、ビデオデコーダ30は、エントロピー復号ユニット70と、動き補償ユニット72と、イントラ予測ユニット74と、逆量子化ユニット76と、逆変換モジュール78と、参照フレームバッファ82と、加算器80とを含む。ビデオデコーダ30は、いくつかの例では、ビデオエンコーダ20(図3参照)に関して説明した符号化パスとは概して逆の復号パスを実行し得る。
エントロピー復号ユニット70は、変換係数の1次元アレイを取り出すために、符号化ビットストリームに対してエントロピー復号プロセスを実行する。使用されるエントロピー復号プロセスは、ビデオエンコーダ20によって使用されたエントロピーコーディング(たとえば、CABAC、CAVLCなど)に依存する。エンコーダによって使用されたエントロピーコーディングプロセスは、符号化ビットストリーム中でシグナリングされるか、または所定のプロセスであり得る。
いくつかの例では、エントロピー復号ユニット70(または逆量子化ユニット76)は、ビデオエンコーダ20のエントロピー符号化ユニット56(または量子化ユニット54)によって使用されたスキャンモードをミラーリングするスキャンを使用して受信値をスキャンし得る。係数のスキャンは逆量子化ユニット76において実行され得るが、スキャンについては、例示のために、エントロピー復号ユニット70によって実行されるものとして説明する。さらに、説明しやすいように別個の機能ユニットとして示されているが、ビデオデコーダ30のエントロピー復号ユニット70、逆量子化ユニット76、および他のユニットの構造および機能は互いに高度に統合され得る。
逆量子化ユニット76は、ビットストリーム中で与えられ、エントロピー復号ユニット70によって復号された、量子化変換係数を逆量子化(inverse quantize)、すなわち、逆量子化(de-quantize)する。逆量子化プロセスは、たとえば、HEVCのために提案されたプロセスまたはH.264復号規格によって定義されたプロセスと同様の、従来のプロセスを含み得る。逆量子化プロセスは、量子化の程度を判断し、同様に、適用されるべき逆量子化の程度を判断するための、CUについてビデオエンコーダ20によって計算された量子化パラメータQPの使用を含み得る。逆量子化ユニット76は、係数が1次元アレイから2次元アレイに変換される前または変換された後に変換係数を逆量子化し得る。
逆変換モジュール78は、逆量子化された変換係数に逆変換を適用する。いくつかの例では、逆変換モジュール78は、ビデオエンコーダ20からのシグナリングに基づいて、あるいはブロックサイズ、コーディングモードなどの1つまたは複数のコーディング特性から変換を推論することによって、逆変換を判断し得る。いくつかの例では、逆変換モジュール78は、現在のブロックを含むLCUのための4分木のルートノードにおけるシグナリングされた変換に基づいて、現在のブロックに適用すべき変換を判断し得る。代替的に、変換は、LCU4分木中のリーフノードCUのためのTU4分木のルートにおいてシグナリングされ得る。いくつかの例では、逆変換モジュール78は、逆変換モジュール78が、復号されている現在のブロックの変換係数に2つ以上の逆変換を適用する、カスケード逆変換を適用し得る。
イントラ予測ユニット74は、シグナリングされたイントラ予測モードと、現在のフレームの前に復号されたブロックからのデータとに基づいて、現在のフレームの現在のブロックについての予測データを生成し得る。
本開示の例によれば、ビデオデコーダ30は、符号化ビットストリームから、動きベクトル予測モードを識別する予測シンタックスと、関連する動きベクトル情報とを受信し得る(たとえば、図4Aおよび図4Bおよび関係する説明を参照)。特に、ビデオデコーダ30は、候補ブロックのセットからの候補ブロックを示すインデックスを受信し得、候補ブロックのセットは複数のモードの各々について同じであり、候補ブロックに関連する情報は、現在のブロックのための動きベクトルを復号するために使用される。候補ブロックのセットは、図5A、図5B、または図6に示したセット、または現在のブロックに対して因果的である候補ブロックの他のセットであり得る。
シンタックス要素がマージモードを示す場合、ビデオデコーダは、受信したインデックスを有する候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すことと、取り出された動きベクトルと参照フレームと予測方向とを使用して、現在のブロックについてインター予測プロセスを実行することとを行うようにさらに構成される。
シンタックス要素が適応動きベクトル予測(AMVP)モードを示す場合、ビデオデコーダは、参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信することと、受信したインデックスを有する候補ブロックに関連する候補動きベクトルを取り出すことと、候補動きベクトルと動きベクトル差分とを使用して、現在のブロックのための動きベクトルを計算することと、計算された動きベクトルと、受信した参照フレームインデックスと、受信した予測方向とを使用してインター予測プロセスを実行することとを行うようにさらに構成される。
予測モードにかかわらず、予測方向、参照フレームインデックス、および動きベクトルが現在のブロックについて判断されると、動き補償ユニットは現在のブロックのための動き補償ブロックを生成する。これらの動き補償ブロックは、本質的に、残差データを生成するために使用される予測ブロックを再生成する。
動き補償ユニット72は、動き補償ブロックを生成し、場合によっては、補間フィルタに基づいて補間を実行し得る。サブピクセル精度をもつ動き推定に使用されるべき補間フィルタの識別子は、シンタックス要素中に含まれ得る。動き補償ユニット72は、ビデオブロックの符号化中にビデオエンコーダ20によって使用された補間フィルタを使用して、参照ブロックのサブ整数ピクセルの補間値を計算し得る。動き補償ユニット72は、受信されたシンタックス情報に従って、ビデオエンコーダ20によって使用された補間フィルタを判断し、その補間フィルタを使用して予測ブロックを生成し得る。
さらに、動き補償ユニット72およびイントラ予測ユニット74は、HEVCの例では、(たとえば、4分木によって与えられる)シンタックス情報の一部を使用して、符号化ビデオシーケンスの(1つまたは複数の)フレームを符号化するために使用されたLCUのサイズを判断し得る。動き補償ユニット72およびイントラ予測ユニット74はまた、シンタックス情報を使用して、符号化ビデオシーケンスのフレームの各CUがどのように分割されるか(および、同様に、サブCUがどのように分割されるか)を記述する分割情報を判断し得る。シンタックス情報はまた、各CUがどのように符号化されるかを示すモード(たとえば、イントラまたはインター予測、およびイントラ予測の場合はイントラ予測符号化モード)と、各インター符号化PUについての1つまたは複数の参照フレーム(および/またはそれらの参照フレームの識別子を含んでいる参照リスト)と、符号化ビデオシーケンスを復号するための他の情報とを含み得る。
加算器80は、残差ブロックを、動き補償ユニット72またはイントラ予測ユニット74によって生成された対応する予測ブロックと合成して、復号ブロックを形成する。復号ブロックは、実際には、量子化または他のコーディング態様による損失を受けた、最初にコーディングされたブロックを再構成する。所望される場合、ブロッキネスアーティファクトを除去するために、復号ブロックをフィルタ処理するためにデブロッキングフィルタも適用され得る。復号ビデオブロックは、次いで、参照フレームバッファ82に記憶され、参照フレームバッファ82は、その後の動き補償のための参照ブロックを与え、また、(図2のディスプレイデバイス32などの)ディスプレイデバイス上での提示のために復号ビデオを生成する。
上述のように、本開示の技法はエンコーダとデコーダの両方に適用可能である。概して、上記の説明によれば、エンコーダは、動きベクトル予測プロセス(たとえば、マージモードおよびAMVPモード)を実行するために候補ブロックの同じセットを利用する。デコーダは、次いで、エンコーダによって使用された候補ブロックの同じセットを使用して、受信されたシンタックス要素に基づいて動きベクトルを復号し得る。すべての動きベクトル予測モードのための候補ブロックを一体化することによって、動きベクトル情報(たとえば、動きベクトル、予測方向、参照フレームインデックスなど)を記憶するために必要なメモリの量が低減される。それらの候補ブロックから動きベクトル情報を取り出す際のメモリ帯域幅要件も低減され得る。
図9は、図3のビデオエンコーダ20などのビデオエンコーダによって実行され得る、ビデオを符号化する例示的な方法を示すフローチャートである。ビデオエンコーダ20は、ビデオデータの現在のブロックについて参照フレームに対する動きベクトルを判断する(900)ように構成され得る。ビデオエンコーダ20はまた、動きベクトル予測プロセスのための複数のモード(たとえば、マージモードまたはAMVP)のうちの1つを判断し(901)、判断されたモードと候補ブロックのセットとを使用して、ビデオデータの現在のブロックについて動きベクトル予測プロセスを実行する。候補ブロックのセットは複数のモードの各々について同じである。
複数のモードは、マージモードと適応動きベクトル予測モードとを含み得る。図10に、動きベクトル予測プロセスがマージモードにあるときの、ビデオを符号化する例示的な方法を示す。この場合、ビデオエンコーダは、候補ブロックの動きベクトル、参照フレーム、および予測方向が現在のブロックにコピーされると、満足なレートひずみ性能を生じる候補ブロックのセットからの候補動きベクトルを判断すること(1001)と、候補動きベクトルを識別するインデックスをシグナリングすること(1002)とを行うようにさらに構成される。
一例では、候補ブロックのセットは、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含み得る。左候補ブロックは現在のブロックの左エッジに隣接し、左候補ブロックの上エッジは現在のブロックの上エッジにアラインされる。上候補ブロックは現在のブロックの上エッジに隣接し、上候補ブロックの左エッジは現在のブロックの左エッジにアラインされる。
他の例では、左候補ブロックは現在のブロックの左エッジに隣接し、左候補ブロックの下エッジは現在のブロックの下エッジにアラインされる。上候補ブロックは現在のブロックの上エッジに隣接し、上候補ブロックの右エッジは現在のブロックの右エッジにアラインされる。
別の例では、候補ブロックのセットは、左上候補ブロック、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含む。
図11に、動きベクトル予測プロセスがAMVPモードにあるときの、ビデオを符号化する例示的な方法を示す。この場合、ビデオエンコーダは、候補ブロックのセット中の各候補ブロックからの候補動きベクトルを判断すること(1101)と、検査パターンに従って現在のブロックのための動きベクトルと候補ブロックの各々からの候補動きベクトルとの間の動きベクトル差分を計算すること(1102)とを行うように構成される。ビデオエンコーダはまた、計算された動きベクトル差分に基づいて候補動きベクトルのうちの1つを選択すること(1103)と、候補動きベクトルのうちの選択された1つを有する候補ブロックを識別するインデックスをシグナリングすること、候補動きベクトルのうちの選択された1つに関して計算された動きベクトル差分をシグナリングすること、参照フレームをシグナリングすること、および予測方向をシグナリングすること(1104)とを行うように構成される。
一例では、候補ブロックのセットは、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含む。この例では、検査パターンは、左下候補ブロック、左候補ブロック、右上候補ブロック、上候補ブロック、時間候補ブロックの順序で進む。
別の例では、候補ブロックのセットは、左上候補ブロック、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含む。検査パターンは、左候補ブロック、左下候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、時間候補ブロックの順序で進む。
図12は、図3のビデオデコーダ30などのビデオデコーダによって実行され得る、ビデオを復号する例示的な方法を示すフローチャートである。ビデオデコーダ30は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを示すシンタックス要素を受信すること(1201)と、候補ブロックのセットからの候補ブロックを示すインデックスを受信することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックに関連する情報が、現在のブロックのための動きベクトルを復号するために使用される、受信すること(1202)とを行うように構成され得る。複数のモードは、マージモードと適応動きベクトル予測モードとを含み得る。
図13は、動きベクトル予測プロセスがマージモードである場合の、ビデオを復号する例示的な方法を示すフローチャートである。この場合、ビデオデコーダは、受信したインデックスを有する候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すこと(1301)と、取り出された動きベクトルと参照フレームと予測方向とを使用して、現在のブロックに対してインター予測プロセスを実行すること(1302)とを行うようにさらに構成される。
一例では、候補ブロックのセットは、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含む。左候補ブロックは現在のブロックの左エッジに隣接し、左候補ブロックの上エッジは現在のブロックの上エッジにアラインされる。上候補ブロックは現在のブロックの上エッジに隣接し、上候補ブロックの左エッジは現在のブロックの左エッジにアラインされる。
別の例では、左候補ブロックは現在のブロックの左エッジに隣接し、左候補ブロックの下エッジは現在のブロックの下エッジにアラインされる。上候補ブロックは現在のブロックの上エッジに隣接し、上候補ブロックの右エッジは現在のブロックの右エッジにアラインされる。
別の例では、候補ブロックのセットは、左上候補ブロック、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含む。
図14は、動きベクトル予測プロセスがAMVPモードである場合の、ビデオを復号する例示的な方法を示すフローチャートである。この場合、ビデオデコーダは、参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信すること(1401)と、受信したインデックスを有する候補ブロックに関連する候補動きベクトルを取り出すこと(1402)とを行うように構成される。ビデオデコーダは、候補動きベクトルと動きベクトル差分とを使用して、現在のブロックのための動きベクトルを計算すること(1403)と、計算された動きベクトルと、受信した参照フレームインデックスと、受信した予測方向とを使用してインター予測プロセスを実行すること(1404)とを行うようにさらに構成される。
一例では、候補ブロックのセットは、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含み、候補ブロックのセットのための検査パターンは、左下候補ブロック、左候補ブロック、右上候補ブロック、上候補ブロック、時間候補ブロックの順序で進む。
別の例では、候補ブロックのセットは、左上候補ブロック、上候補ブロック、右上候補ブロック、左候補ブロック、左下候補ブロック、および時間候補ブロックを含み、候補ブロックのセットのための検査パターンは、左候補ブロック、左下候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、時間候補ブロックの順序で進む。
図15は、図3のビデオエンコーダ20などのビデオエンコーダによって実行され得る、ビデオを符号化する別の例示的な方法を示すフローチャートである。ビデオエンコーダ20は、ビデオデータの現在のブロックについて参照フレームに対する動きベクトルを判断すること(1501)と、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断すること(1502)と、判断されたモードと候補ブロックのセットとを使用して、現在のブロックについて動きベクトル予測プロセスを実行することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定される、実行すること(1503)とを行うように構成され得る。追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用される。ビデオエンコーダ20は、マージインデックス、判断されたモード、パーティションサイズ、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて検査パターンを更新するようにさらに構成され得る(1504)。
複数のモードは、マージモードと適応動きベクトル予測モードとを含み得る。マージモードは、動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有し得る。その場合、動きベクトル予測プロセスは、検査パターンに従って実行され、検査パターンは、候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義する。候補ブロックのセットは、検査パターンに沿って候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される。検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づき得る。より詳細には、たとえば、各異なるブロックサイズ、パーティションサイズまたはパーティションインデックスのための検査パターンは、同じブロックサイズ、パーティションサイズまたはパーティションインデックスなどを有するいくつかの前のコード化ブロックにおける候補選択の統計値に基づいて更新または変更され得る。
別の例では、候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含む。この例では、追加の候補ブロックは左上候補ブロックである。ただし、追加の候補ブロックは、現在のブロックとの因果関係があるいずれかの候補ブロックであり得る。
図16は、図3のビデオデコーダ30などのビデオデコーダによって実行され得る、ビデオを復号する別の例示的な方法を示すフローチャートである。ビデオデコーダ30は、ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを示すシンタックス要素を受信すること(1601)と、候補ブロックのセットからの候補ブロックを示すインデックスを受信することであって、候補ブロックのセットが複数のモードの各々について同じであり、候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定される、受信すること(1602)とを行うように構成され得る。追加の候補ブロックは、候補ブロックのセットの候補ブロックのうちの別の候補ブロックが利用不可能である場合に使用される。候補ブロックに関連する情報は、現在のブロックのための動きベクトルを復号するために使用される。
複数のモードは、マージモードと適応動きベクトル予測モードとを含み得る。図17に、受信したシンタックス要素が、マージモードが使用されることを示す場合の復号の方法を示す。この場合、ビデオデコーダは、受信したインデックスを有する候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すこと(1701)と、取り出された動きベクトルと参照フレームと予測方向とを使用して、現在のブロックに対してインター予測プロセスを実行すること(1702)とを行うようにさらに構成される。
マージモードは、動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有するものとして定義され得る。この場合、動きベクトル予測プロセスは、検査パターンに従って実行され、検査パターンは、候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し得る。候補ブロックのセットは、検査パターンに沿って候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される。検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく。
別の例では、マージモードとAMVPモードの両方について、候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み得る。追加の候補ブロックは左上候補ブロックである。ただし、追加の候補ブロックは、現在のブロックとの因果関係があるいずれかの候補ブロックであり得る。
図18に、受信したシンタックス要素が、AMVPモードが使用されることを示す場合の復号の方法を示す。この場合、ビデオデコーダは、参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信すること(1801)と、受信したインデックスを有する候補ブロックに関連する候補動きベクトルを取り出すこと(1802)とを行うようにさらに構成される。ビデオデコーダは、候補動きベクトルと動きベクトル差分とを使用して、現在のブロックのための動きベクトルを計算すること(1803)と、計算された動きベクトルと、受信した参照フレームインデックスと、受信した予測方向とを使用してインター予測プロセスを実行すること(1804)とを行うようにさらに構成される。
1つまたは複数の例では、説明した機能は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの任意の組合せで実装され得る。ソフトウェアで実装される場合、機能は、1つまたは複数の命令またはコードとしてコンピュータ可読媒体上に記憶されるか、あるいはコンピュータ可読媒体を介して送信され、ハードウェアベースの処理ユニットによって実行され得る。コンピュータ可読媒体は、たとえば、通信プロトコルに従って、ある場所から別の場所へのコンピュータプログラムの転送を可能にする任意の媒体を含むデータ記憶媒体または通信媒体などの有形媒体に対応するコンピュータ可読記憶媒体を含み得る。このようにして、コンピュータ可読媒体は、概して、(1)非一時的である有形コンピュータ可読記憶媒体、あるいは(2)信号または搬送波などの通信媒体に対応し得る。データ記憶媒体は、本開示で説明した技法の実装のための命令、コードおよび/またはデータ構造を取り出すために1つまたは複数のコンピュータあるいは1つまたは複数のプロセッサによってアクセスされ得る任意の利用可能な媒体であり得る。コンピュータプログラム製品はコンピュータ可読媒体を含み得る。
限定ではなく例として、そのようなコンピュータ可読記憶媒体は、RAM、ROM、EEPROM、CD−ROMまたは他の光ディスクストレージ、磁気ディスクストレージ、または他の磁気ストレージデバイス、フラッシュメモリ、あるいは命令またはデータ構造の形態の所望のプログラムコードを記憶するために使用され得、コンピュータによってアクセスされ得る、任意の他の媒体を備えることができる。また、いかなる接続もコンピュータ可読媒体と適切に呼ばれる。たとえば、命令が、同軸ケーブル、光ファイバーケーブル、ツイストペア、デジタル加入者回線(DSL)、または赤外線、無線、およびマイクロ波などのワイヤレス技術を使用して、ウェブサイト、サーバ、または他のリモートソースから送信される場合、同軸ケーブル、光ファイバーケーブル、ツイストペア、DSL、または赤外線、無線、およびマイクロ波などのワイヤレス技術は、媒体の定義に含まれる。ただし、コンピュータ可読記憶媒体およびデータ記憶媒体は、接続、搬送波、信号、または他の一時媒体を含まないが、代わりに非一時的有形記憶媒体を対象とすることを理解されたい。本明細書で使用するディスク(disk)およびディスク(disc)は、コンパクトディスク(disc)(CD)、レーザーディスク(登録商標)(disc)、光ディスク(disc)、デジタル多用途ディスク(disc)(DVD)、フロッピー(登録商標)ディスク(disk)およびブルーレイディスク(disc)を含み、ディスク(disk)は、通常、データを磁気的に再生し、ディスク(disc)は、データをレーザーで光学的に再生する。上記の組合せもコンピュータ可読媒体の範囲内に含めるべきである。
命令は、1つまたは複数のデジタル信号プロセッサ(DSP)などの1つまたは複数のプロセッサ、汎用マイクロプロセッサ、特定用途向け集積回路(ASIC)、フィールドプログラマブル論理アレイ(FPGA)、あるいは他の等価な集積回路またはディスクリート論理回路によって実行され得る。したがって、本明細書で使用する「プロセッサ」という用語は、前述の構造、または本明細書で説明した技法の実装に好適な他の構造のいずれかを指すことがある。さらに、いくつかの態様では、本明細書で説明した機能は、符号化および復号のために構成された専用のハードウェアおよび/またはソフトウェアモジュール内に与えられ得、あるいは複合コーデックに組み込まれ得る。また、本技法は、1つまたは複数の回路または論理要素中に十分に実装され得る。
本開示の技法は、ワイヤレスハンドセット、集積回路(IC)またはICのセット(たとえば、チップセット)を含む、多種多様なデバイスまたは装置において実装され得る。本開示では、開示する技法を実行するように構成されたデバイスの機能的態様を強調するために様々な構成要素、モジュール、またはユニットについて説明したが、それらの構成要素、モジュール、またはユニットを、必ずしも異なるハードウェアユニットによって実現する必要があるとは限らない。むしろ、上記で説明したように、様々なユニットが、好適なソフトウェアおよび/またはファームウェアとともに、上記で説明した1つまたは複数のプロセッサを含めて、コーデックハードウェアユニットにおいて組み合わせられるか、または相互動作ハードウェアユニットの集合によって与えられ得る。
様々な例について説明した。これらおよび他の例は以下の特許請求の範囲内に入る。
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[C1]
ビデオコーディングプロセスにおいて動きベクトルを符号化する方法であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
前記判断されたモードと候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
を備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用される、
方法。
[C2]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C1]に記載の方法。
[C3]
前記ビデオデータの現在のブロックについて参照フレームに対する動きベクトルを判断することをさらに備え、参照フレームのロケーションは、予測方向に基づく、
[C2]に記載の方法。
[C4]
前記判断されたモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有するマージモードであり、
前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
[C3]に記載の方法。
[C5]
前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
[C4]に記載の方法。
[C6]
マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査パターンを更新することをさらに備える、
[C4]に記載の方法。
[C7]
前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
[C1]に記載の方法。
[C8]
前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
[C1]に記載の方法。
[C9]
ビデオコーディングプロセスにおいて動きベクトルを符号化するように構成された装置であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
前記判断されたモードと候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
を行うように構成されるビデオエンコーダを備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用される、
装置。
[C10]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C9]に記載の装置。
[C11]
前記ビデオエンコーダは、
ビデオデータの前記現在のブロックについて参照フレームに対する動きベクトルを判断することを行うようにさらに構成され、参照フレームのロケーションは、予測方向に基づく、
[C10]に記載の装置。
[C12]
前記判断されたモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有するマージモードであり、
前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
[C11]に記載の装置。
[C13]
前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
[C12]に記載の装置。
[C14]
前記ビデオエンコーダは、
マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査パターンを更新することを行うようにさらに構成される、
[C12]に記載の装置。
[C15]
前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
[C9]に記載の装置。
[C16]
前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
[C9]に記載の装置。
[C17]
ビデオコーディングプロセスにおいて動きベクトルを符号化するように構成された装置であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断するための手段と、
前記判断されたモードと候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行するための手段と
を備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用される、
装置。
[C18]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C17]に記載の装置。
[C19]
実行されたとき、ビデオデータを符号化するためのデバイスのプロセッサに、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
前記判断されたモードと候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
を行わせる命令を記憶したコンピュータ可読記憶媒体を備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用される、
コンピュータプログラム製品。
[C20]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C19]に記載のコンピュータプログラム製品。
[C21]
ビデオコーディングプロセスにおいて動きベクトルを復号する方法であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
候補ブロックのセットから候補ブロックを判断することと
を備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、
方法。
[C22]
前記動きベクトル予測プロセスのための前記モードは、受信したシンタックス要素から判断され、前記候補ブロックは、受信したシンタックス要素から判断される、
[C21]に記載の方法。
[C23]
前記動きベクトル予測プロセスのための前記モードは、マージモードである、
[C21]に記載の方法。
[C24]
前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードである、
[C21]に記載の方法。
[C25]
前記動きベクトル予測プロセスのための前記モードは、マージモードであり、前記方法は、
前記受信したインデックスを有する前記候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すことと、
前記取り出された動きベクトルと参照フレームと予測方向とを使用して、前記現在のブロックに対してインター予測プロセスを実行することと
をさらに備える、[C21]に記載の方法。
[C26]
前記動きベクトル予測プロセスのための前記モードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有するマージモードであり、
前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
[C21]に記載の方法。
[C27]
前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
[C26]に記載の方法。
[C28]
マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査順序パターンを更新することをさらに備える、
[C26]に記載の方法。
[C29]
前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
[C21]に記載の方法。
[C30]
前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
[C21]に記載の方法。
[C31]
前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードであり、前記方法は、
参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信することと、
前記受信したインデックスを有する前記候補ブロックに関連する候補動きベクトルを取り出すことと、
前記候補動きベクトルと前記動きベクトル差分とを使用して、前記現在のブロックのための動きベクトルを計算することと、
前記計算された動きベクトルと、前記受信した参照フレームインデックスと、前記受信した予測方向とを使用してインター予測プロセスを実行することと
をさらに備える、[C21]に記載の方法。
[C32]
ビデオコーディングプロセスにおいて動きベクトルを復号するように構成される装置であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
候補ブロックのセットから候補ブロックを判断することと
を行うように構成されたビデオデコーダを備え、
前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、
装置。
[C33]
前記動きベクトル予測プロセスのための前記モードは、受信したシンタックス要素から判断され、前記候補ブロックが、受信したシンタックス要素から判断される、
[C32]に記載の装置。
[C34]
前記動きベクトル予測プロセスのための前記モードは、マージモードである、
[C32]に記載の装置。
[C35]
前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードである、
[C32]に記載の装置。
[C36]
前記動きベクトル予測プロセスのための前記モードがマージモードであり、前記ビデオコーダは、
前記受信したインデックスを有する前記候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すことと、
前記取り出された動きベクトルと参照フレームと予測方向とを使用して、前記現在のブロックに対してインター予測プロセスを実行することと
を行うようにさらに構成される、[C32]に記載の装置。
[C37]
前記動きベクトル予測プロセスのための前記モードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有するマージモードであり、
前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
[C32]に記載の装置。
[C38]
前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
[C37]に記載の装置。
[C39]
前記ビデオデコーダは、
マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査順序パターンを更新すること
を行うようにさらに構成される、[C37]に記載の装置。
[C40]
前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
[C32]に記載の装置。
[C41]
前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
[C32]に記載の装置。
[C42]
前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードであり、前記ビデオデコーダは、
参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信することと、
前記受信したインデックスを有する前記候補ブロックに関連する候補動きベクトルを取り出すことと、
前記候補動きベクトルと前記動きベクトル差分とを使用して、前記現在のブロックのための動きベクトルを計算することと、
前記計算された動きベクトルと、前記受信した参照フレームインデックスと、前記受信した予測方向とを使用してインター予測プロセスを実行することと
を行うようにさらに構成される、[C32]に記載の装置。
[C43]
ビデオコーディングプロセスにおいて動きベクトルを復号するように構成される装置であって、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断するための手段と、
候補ブロックのセットから候補ブロックを判断するための手段と
を備え、前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、
装置。
[C44]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C43]に記載の装置。
[C45]
実行されたとき、ビデオデータを復号するためのデバイスのプロセッサに、
ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、
候補ブロックのセットから候補ブロックを判断することと
を行わせる命令を記憶したコンピュータ可読記憶媒体を備え、
前記候補ブロックのセットは、前記複数のモードの各々について同じであり、前記候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記候補ブロックのセットの前記候補ブロックのうちの別の候補ブロックが利用不可能である場合、前記動きベクトル予測プロセスにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、
コンピュータプログラム製品。
[C46]
前記複数のモードは、マージモードと適応動きベクトル予測モードとを含む、
[C45]に記載のコンピュータプログラム製品。

Claims (54)

  1. ビデオコーディングプロセスにおいて動きベクトルを符号化する方法であって、前記方法はビデオエンコーダが実行し、前記方法は、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    前記判断されたモードと、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
    を備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックが追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用される、
    方法。
  2. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項1に記載の方法。
  3. 前記ビデオデータの現在のブロックについて参照フレームに対する動きベクトルを判断することをさらに備え、参照フレームのロケーションは、予測方向に基づく、請求項2に記載の方法。
  4. 前記判断されたモードは、前記マージモードであり、前記マージモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有し、
    前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
    前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
    請求項3に記載の方法。
  5. 前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
    請求項4に記載の方法。
  6. マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査パターンを更新することをさらに備える、
    請求項4に記載の方法。
  7. 前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
    請求項1に記載の方法。
  8. 前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
    請求項1に記載の方法。
  9. ビデオコーディングプロセスにおいて動きベクトルを符号化するように構成された装置であって、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    前記判断されたモードと、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
    を行うように構成されるビデオエンコーダを備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用される、
    装置。
  10. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項9に記載の装置。
  11. 前記ビデオエンコーダは、
    ビデオデータの前記現在のブロックについて参照フレームに対する動きベクトルを判断することを行うようにさらに構成され、参照フレームのロケーションは、予測方向に基づく、
    請求項10に記載の装置。
  12. 前記判断されたモードは、前記マージモードであり、前記マージモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有し、
    前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
    前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
    請求項11に記載の装置。
  13. 前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
    請求項12に記載の装置。
  14. 前記ビデオエンコーダは、
    マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査パターンを更新することを行うようにさらに構成される、
    請求項12に記載の装置。
  15. 前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
    請求項9に記載の装置。
  16. 前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
    請求項9に記載の装置。
  17. ビデオコーディングプロセスにおいて動きベクトルを符号化するように構成された装置であって、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断するための手段と、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    前記判断されたモードと、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行するための手段と
    を備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用される、
    装置。
  18. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項17に記載の装置。
  19. 実行されたとき、ビデオデータを符号化するためのデバイスのプロセッサに、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    前記判断されたモードと、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットとを使用して、前記現在のブロックについて前記動きベクトル予測プロセスを実行することと
    を行わせる命令を備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用される、コンピュータプログラム。
  20. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項19に記載のコンピュータプログラム。
  21. ビデオコーディングプロセスにおいて動きベクトルを復号する方法であって、前記方法はビデオデコーダが実行し、前記方法は、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットから候補ブロックを判断することと
    を備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、方法。
  22. 前記動きベクトル予測プロセスのための前記モードは、受信したシンタックス要素から判断され、前記候補ブロックは、受信したシンタックス要素から判断される、請求項21に記載の方法。
  23. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードである、請求項21に記載の方法。
  24. 前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードである、
    請求項21に記載の方法。
  25. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードであり、前記方法は、
    候補動きベクトルを示す候補ブロックインデックスを受信することと、
    前記受信した候補ブロックインデックスを有する前記候補ブロックに関連する動きベクトルと参照フレームと予測方向とを取り出すことと、
    前記取り出された動きベクトルと参照フレームと予測方向とを使用して、前記現在のブロックに対してインター予測プロセスを実行することと
    をさらに備える、請求項21に記載の方法。
  26. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードであり、前記マージモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有し、
    前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
    前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
    請求項21に記載の方法。
  27. 前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
    請求項26に記載の方法。
  28. マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査順序パターンを更新することをさらに備える、
    請求項26に記載の方法。
  29. 前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
    請求項21に記載の方法。
  30. 前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
    請求項21に記載の方法。
  31. 前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードであり、前記方法は、
    参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信することと、
    候補動きベクトルを示す候補ブロックインデックスを受信することと、
    前記受信した候補ブロックインデックスに関連する前記候補動きベクトルを取り出すことと、
    前記候補動きベクトルと前記動きベクトル差分とを使用して、前記現在のブロックのための動きベクトルを計算することと、
    前記計算された動きベクトルと、前記受信した参照フレームインデックスと、前記受信した予測方向とを使用してインター予測プロセスを実行することと
    をさらに備える、請求項21に記載の方法。
  32. ビデオコーディングプロセスにおいて動きベクトルを復号するように構成される装置であって、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットから候補ブロックを判断することと
    を行うように構成されたビデオデコーダを備え、
    前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、装置。
  33. 前記動きベクトル予測プロセスのための前記モードは、受信したシンタックス要素から判断され、前記候補ブロックが、受信したシンタックス要素から判断される、請求項32に記載の装置。
  34. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードである、請求項32に記載の装置。
  35. 前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードである、
    請求項32に記載の装置。
  36. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードであり、前記ビデオコーダは、
    候補動きベクトルを示す候補ブロックインデックスを受信することと、
    前記受信した候補ブロックインデックスに関連する前記動きベクトルと参照フレームと予測方向とを取り出すことと、
    前記取り出された動きベクトルと参照フレームと予測方向とを使用して、前記現在のブロックに対してインター予測プロセスを実行することと
    を行うようにさらに構成される、請求項32に記載の装置。
  37. 前記動きベクトル予測プロセスのための前記モードは、前記マージモードであり、前記マージモードは、前記動きベクトル予測プロセスを実行する際に使用するための最大N個の候補ブロックを有し、
    前記動きベクトル予測プロセスは、検査パターンに従って実行され、前記検査パターンは、前記候補ブロックのセット中の候補ブロックの各々を検査するための順序を定義し、
    前記候補ブロックのセットは、前記検査パターンに沿って前記候補ブロックのセット中の最初のN個の利用可能な候補ブロックとして定義される、
    請求項32に記載の装置。
  38. 前記検査パターンは、ブロックサイズ、パーティションサイズ、およびパーティションインデックスのうちの1つまたは複数に基づく、
    請求項37に記載の装置。
  39. 前記ビデオデコーダは、
    マージインデックス、前記判断されたモード、パーティションサイズ、パーティションインデックス、参照フレームインデックス、動きベクトル差分、および動きベクトル予測のうちの1つまたは複数に基づいて、後でコーディングされるブロックのための前記検査順序パターンを更新すること
    を行うようにさらに構成される、請求項37に記載の装置。
  40. 前記候補ブロックのセットは、左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを含み、前記追加の候補ブロックは、前記左上候補ブロックである、
    請求項32に記載の装置。
  41. 前記追加の候補ブロックは、前記現在のブロックとの因果関係がある候補ブロックである、
    請求項32に記載の装置。
  42. 前記動きベクトル予測プロセスのための前記モードは、適応動きベクトル予測モードであり、前記ビデオデコーダは、
    参照フレームインデックスと、動きベクトル差分と、予測方向を示すシンタックス要素とを受信することと、
    候補動きベクトルを示す候補ブロックインデックスを受信することと、
    前記受信した候補ブロックインデックスに関連する前記候補動きベクトルを取り出すことと、
    前記候補動きベクトルと前記動きベクトル差分とを使用して、前記現在のブロックのための動きベクトルを計算することと、
    前記計算された動きベクトルと、前記受信した参照フレームインデックスと、前記受信した予測方向とを使用してインター予測プロセスを実行することと
    を行うようにさらに構成される、請求項32に記載の装置。
  43. ビデオコーディングプロセスにおいて動きベクトルを復号するように構成される装置であって、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断するための手段と、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットから候補ブロックを判断するための手段と
    を備え、前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、装置。
  44. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項43に記載の装置。
  45. 実行されたとき、ビデオデータを復号するためのデバイスのプロセッサに、
    ビデオデータの現在のブロックについて動きベクトル予測プロセスのための複数のモードのうちの1つを判断することと、前記判断されたモードは、マージモードまたは適応動きベクトル予測モードのうちの1つである、
    左下候補ブロック、左候補ブロック、上候補ブロック、右上候補ブロック、左上候補ブロック、および時間候補ブロックを備える候補ブロックのセットから候補ブロックを判断することと
    を行わせる命令を備え、
    前記判断されたモードがマージモードである場合、前記候補ブロックのセット中の1つの候補ブロックは、追加の候補ブロックとして指定され、前記追加の候補ブロックは、前記左下候補ブロック、前記左候補ブロック、前記上候補ブロック、または前記右上候補ブロックのうちのいずれか1つが利用不可能または無効である場合、前記マージモードにおいて使用され、前記候補ブロックに関連する情報は、前記現在のブロックのための動きベクトルを復号するために使用される、コンピュータプログラム。
  46. 前記複数のモードは、前記マージモードと適応動きベクトル予測モードとを含む、請求項45に記載のコンピュータプログラム。
  47. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項1に記載の方法。
  48. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項9に記載の装置。
  49. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項17に記載の装置。
  50. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項19に記載のコンピュータプログラム。
  51. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項21に記載の方法。
  52. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項32に記載の装置。
  53. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項43に記載の装置。
  54. 前記候補ブロックのセットは、前記複数のモードの各々について同じである、請求項45に記載のコンピュータプログラム。
JP2014516990A 2011-06-20 2012-06-05 一体化されたマージモードおよび適応動きベクトル予測モード候補選択 Active JP5893729B2 (ja)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201161499114P 2011-06-20 2011-06-20
US61/499,114 2011-06-20
US201161506558P 2011-07-11 2011-07-11
US61/506,558 2011-07-11
US201161509007P 2011-07-18 2011-07-18
US61/509,007 2011-07-18
US13/487,996 2012-06-04
US13/487,996 US9282338B2 (en) 2011-06-20 2012-06-04 Unified merge mode and adaptive motion vector prediction mode candidates selection
PCT/US2012/040928 WO2012177388A1 (en) 2011-06-20 2012-06-05 Unified merge mode and adaptive motion vector prediction mode candidates selection

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015224111A Division JP2016076944A (ja) 2011-06-20 2015-11-16 一体化されたマージモードおよび適応動きベクトル予測モード候補選択

Publications (2)

Publication Number Publication Date
JP2014517656A JP2014517656A (ja) 2014-07-17
JP5893729B2 true JP5893729B2 (ja) 2016-03-23

Family

ID=47353635

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2014516989A Pending JP2014520484A (ja) 2011-06-20 2012-06-05 統合されたマージモードおよび適応動きベクトル予測モード候補選択
JP2014516990A Active JP5893729B2 (ja) 2011-06-20 2012-06-05 一体化されたマージモードおよび適応動きベクトル予測モード候補選択
JP2015224111A Pending JP2016076944A (ja) 2011-06-20 2015-11-16 一体化されたマージモードおよび適応動きベクトル予測モード候補選択
JP2015228830A Active JP6254136B2 (ja) 2011-06-20 2015-11-24 統合されたマージモードおよび適応動きベクトル予測モード候補選択

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2014516989A Pending JP2014520484A (ja) 2011-06-20 2012-06-05 統合されたマージモードおよび適応動きベクトル予測モード候補選択

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2015224111A Pending JP2016076944A (ja) 2011-06-20 2015-11-16 一体化されたマージモードおよび適応動きベクトル予測モード候補選択
JP2015228830A Active JP6254136B2 (ja) 2011-06-20 2015-11-24 統合されたマージモードおよび適応動きベクトル予測モード候補選択

Country Status (18)

Country Link
US (2) US9131239B2 (ja)
EP (2) EP2721817B1 (ja)
JP (4) JP2014520484A (ja)
KR (3) KR102010097B1 (ja)
CN (2) CN103609123B (ja)
AU (2) AU2012273398B2 (ja)
BR (2) BR112013032110B1 (ja)
CA (2) CA2838839C (ja)
DK (1) DK2721817T3 (ja)
ES (1) ES2908241T3 (ja)
HU (1) HUE058080T2 (ja)
IL (2) IL229718A (ja)
MX (2) MX339025B (ja)
MY (2) MY181631A (ja)
SG (1) SG195213A1 (ja)
SI (1) SI2721817T1 (ja)
UA (1) UA111971C2 (ja)
WO (2) WO2012177388A1 (ja)

Families Citing this family (114)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2546325C2 (ru) * 2009-05-29 2015-04-10 Мицубиси Электрик Корпорейшн Устройство кодирования изображений, устройство декодирования изображений, способ кодирования изображений и способ декодирования изображений
US9060176B2 (en) * 2009-10-01 2015-06-16 Ntt Docomo, Inc. Motion vector prediction in video coding
KR101791078B1 (ko) * 2010-04-16 2017-10-30 에스케이텔레콤 주식회사 영상 부호화/복호화 장치 및 방법
WO2011146451A1 (en) * 2010-05-20 2011-11-24 Thomson Licensing Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding
KR101762819B1 (ko) * 2010-09-02 2017-07-28 엘지전자 주식회사 영상 부호화 및 복호화 방법과 이를 이용한 장치
EP2698999B1 (en) 2011-04-12 2017-01-04 Sun Patent Trust Motion-video encoding method, motion-video encoding apparatus, motion-video decoding method, motion-video decoding apparatus, and motion-video encoding/decoding apparatus
KR102015674B1 (ko) 2011-05-24 2019-08-28 벨로스 미디어 인터내셔널 리미티드 화상 부호화 방법, 화상 부호화 장치, 화상 복호 방법, 화상 복호 장치, 및, 화상 부호화 복호 장치
EP4213483A1 (en) 2011-05-27 2023-07-19 Sun Patent Trust Image coding method, image coding apparatus, image decoding method, image decoding apparatus, and image coding and decoding apparatus
US9485518B2 (en) 2011-05-27 2016-11-01 Sun Patent Trust Decoding method and apparatus with candidate motion vectors
SG194746A1 (en) 2011-05-31 2013-12-30 Kaba Gmbh Image encoding method, image encoding device, image decoding method, image decoding device, and image encoding/decoding device
EP2717579B1 (en) 2011-05-31 2020-01-22 Sun Patent Trust Video decoding method and video decoding device
JP2013005077A (ja) * 2011-06-14 2013-01-07 Sony Corp 画像処理装置および方法
KR20120140592A (ko) 2011-06-21 2012-12-31 한국전자통신연구원 움직임 보상의 계산 복잡도 감소 및 부호화 효율을 증가시키는 방법 및 장치
WO2012177052A2 (ko) 2011-06-21 2012-12-27 한국전자통신연구원 인터 예측 방법 및 그 장치
ES2754657T3 (es) 2011-06-27 2020-04-20 Samsung Electronics Co Ltd Codificación y decodificación de información de movimiento
EP3481066B1 (en) 2011-06-28 2021-05-19 LG Electronics Inc. Method for deriving a motion vector predictor
MX2013013029A (es) 2011-06-30 2013-12-02 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, dispositivo de decodificacion de imagenes, dispositivo de codificacion de imagenes y dispositivo de codificacion/decodifi cacion de imagenes.
CN107105227B (zh) * 2011-06-30 2019-10-25 Jvc建伍株式会社 图像编码装置、图像编码方法、图像解码装置及图像解码方法
MX341415B (es) 2011-08-03 2016-08-19 Panasonic Ip Corp America Metodo de codificacion de video, aparato de codificacion de video, metodo de decodificacion de video, aparato de decodificacion de video y aparato de codificacion/decodificacion de video.
JP5958165B2 (ja) * 2011-08-12 2016-07-27 株式会社Jvcケンウッド 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法及び受信プログラム
GB2493755B (en) * 2011-08-17 2016-10-19 Canon Kk Method and device for encoding a sequence of images and method and device for decoding a sequence of images
CN106851311B (zh) 2011-08-29 2019-08-13 苗太平洋控股有限公司 视频译码装置
EP2716047A4 (en) 2011-10-19 2015-03-18 Mediatek Inc METHOD AND DEVICE FOR DERIVING MOTION VECTOR PREVIEW CANDIDATE SETS
JP6308495B2 (ja) * 2011-10-19 2018-04-11 サン パテント トラスト 画像復号方法、および、画像復号装置
KR20130050405A (ko) 2011-11-07 2013-05-16 오수미 인터 모드에서의 시간 후보자 결정방법
WO2013068647A1 (en) * 2011-11-08 2013-05-16 Nokia Corporation Reference picture handling
KR101830352B1 (ko) 2011-11-09 2018-02-21 에스케이 텔레콤주식회사 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치
WO2013107028A1 (en) * 2012-01-19 2013-07-25 Mediatek Singapore Pte. Ltd. Methods and apparatuses of amvp simplification
US9729873B2 (en) 2012-01-24 2017-08-08 Qualcomm Incorporated Video coding using parallel motion estimation
US9426463B2 (en) 2012-02-08 2016-08-23 Qualcomm Incorporated Restriction of prediction units in B slices to uni-directional inter prediction
US9451277B2 (en) 2012-02-08 2016-09-20 Qualcomm Incorporated Restriction of prediction units in B slices to uni-directional inter prediction
US20130235926A1 (en) * 2012-03-07 2013-09-12 Broadcom Corporation Memory efficient video parameter processing
US9338451B2 (en) 2012-04-12 2016-05-10 Qualcomm Incorporated Common spatial candidate blocks for parallel motion estimation
US20130272412A1 (en) * 2012-04-12 2013-10-17 Qualcomm Incorporated Common motion information candidate list construction process
CN107454426A (zh) * 2012-07-27 2017-12-08 寰发股份有限公司 三维视频编码或解码方法
US9344742B2 (en) * 2012-08-10 2016-05-17 Google Inc. Transform-domain intra prediction
KR102186605B1 (ko) * 2012-09-28 2020-12-03 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
WO2014047881A1 (en) * 2012-09-28 2014-04-03 Intel Corporation Inter-layer intra mode prediction
CN102883163B (zh) * 2012-10-08 2014-05-28 华为技术有限公司 用于运动矢量预测的运动矢量列表建立的方法、装置
JP5983430B2 (ja) * 2013-01-25 2016-08-31 富士通株式会社 動画像符号化装置、動画像符号化方法及び動画像復号装置ならびに動画像復号方法
JP5776712B2 (ja) * 2013-03-06 2015-09-09 株式会社Jvcケンウッド 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5776711B2 (ja) * 2013-03-06 2015-09-09 株式会社Jvcケンウッド 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5776714B2 (ja) * 2013-03-06 2015-09-09 株式会社Jvcケンウッド 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
JP5776713B2 (ja) * 2013-03-06 2015-09-09 株式会社Jvcケンウッド 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム
US9565454B2 (en) 2013-06-24 2017-02-07 Microsoft Technology Licensing, Llc Picture referencing control for video decoding using a graphics processor
TW201501511A (zh) * 2013-06-25 2015-01-01 Hon Hai Prec Ind Co Ltd 框內預測方法及系統
FR3011429A1 (fr) * 2013-09-27 2015-04-03 Orange Codage et decodage video par heritage d'un champ de vecteurs de mouvement
EP3055998A1 (en) * 2013-10-11 2016-08-17 Telefonaktiebolaget LM Ericsson (publ) Method and arrangement for video transcoding using mode or motion or in-loop filter information
CN105706281B (zh) 2013-11-06 2019-07-26 瓦特燃料电池公司 化学反应器系统
TWI538487B (zh) * 2013-12-05 2016-06-11 財團法人工業技術研究院 螢幕視訊之預測編碼的方法與系統
CN105874789B (zh) * 2014-01-29 2019-10-29 联发科技股份有限公司 利用自适应运动向量精度的方法
US10631005B2 (en) * 2014-04-21 2020-04-21 Qualcomm Incorporated System and method for coding in block prediction mode for display stream compression (DSC)
WO2015169200A1 (en) 2014-05-06 2015-11-12 Mediatek Singapore Pte. Ltd. Method of block vector prediction for intra block copy mode coding
CN104363451B (zh) * 2014-10-27 2019-01-25 华为技术有限公司 图像预测方法及相关装置
JP5854110B2 (ja) * 2014-10-30 2016-02-09 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
CN112188207B (zh) 2014-10-31 2023-10-20 三星电子株式会社 使用高精度跳过编码的视频编码设备和视频解码设备及其方法
KR102362242B1 (ko) 2014-10-31 2022-02-11 삼성전자주식회사 움직임 벡터 부복호화 방법 및 장치
US10085027B2 (en) 2015-03-06 2018-09-25 Qualcomm Incorporated Adaptive mode checking order for video encoding
JP5999230B2 (ja) * 2015-07-08 2016-09-28 株式会社Jvcケンウッド 受信装置
CN108965871B (zh) 2015-09-29 2023-11-10 华为技术有限公司 图像预测的方法及装置
US10812822B2 (en) * 2015-10-02 2020-10-20 Qualcomm Incorporated Intra block copy merge mode and padding of unavailable IBC reference region
US10368073B2 (en) * 2015-12-07 2019-07-30 Qualcomm Incorporated Multi-region search range for block prediction mode for display stream compression (DSC)
JP6036977B2 (ja) * 2015-12-08 2016-11-30 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP6036974B2 (ja) * 2015-12-08 2016-11-30 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP6036976B2 (ja) * 2015-12-08 2016-11-30 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
JP6036975B2 (ja) * 2015-12-08 2016-11-30 株式会社Jvcケンウッド 画像符号化装置、画像符号化方法、画像符号化プログラム、送信装置、送信方法、及び送信プログラム
WO2017118411A1 (en) * 2016-01-07 2017-07-13 Mediatek Inc. Method and apparatus for affine inter prediction for video coding system
CN105635736B (zh) * 2016-03-14 2018-11-13 杭州电子科技大学 一种简单快速的合并方法
US10560712B2 (en) 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
CN109644267B (zh) * 2016-08-03 2023-07-04 株式会社Kt 视频信号处理方法和装置
US11638027B2 (en) 2016-08-08 2023-04-25 Hfi Innovation, Inc. Pattern-based motion vector derivation for video coding
CN106375764B (zh) * 2016-08-31 2018-04-10 中国科学技术大学 一种结合方向预测和块复制预测的视频帧内编码方法
CN106254884B (zh) * 2016-09-30 2019-06-28 福州瑞芯微电子股份有限公司 基于h265编码的帧间预测方法和编码器ip
US10448010B2 (en) * 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
JP6288209B2 (ja) * 2016-10-24 2018-03-07 株式会社Jvcケンウッド 画像符号化装置
CN110574377B (zh) 2017-05-10 2021-12-28 联发科技股份有限公司 用于视频编解码的重新排序运动向量预测候选集的方法及装置
WO2018226066A1 (ko) * 2017-06-09 2018-12-13 엘지전자 주식회사 영상 코딩 시스템에서 어파인 예측에 따른 영상 디코딩 방법 및 장치
US10911769B2 (en) * 2017-06-23 2021-02-02 Qualcomm Incorporated Motion-based priority for the construction of candidate lists in video coding
US10523961B2 (en) 2017-08-03 2019-12-31 Samsung Electronics Co., Ltd. Motion estimation method and apparatus for plurality of frames
CN109510991B (zh) * 2017-09-15 2021-02-19 浙江大学 一种运动矢量导出方法及装置
US11877001B2 (en) 2017-10-10 2024-01-16 Qualcomm Incorporated Affine prediction in video coding
US10523948B2 (en) * 2018-02-05 2019-12-31 Tencent America LLC Method and apparatus for video coding
CN118233630A (zh) * 2018-05-10 2024-06-21 三星电子株式会社 视频解码方法、视频编码设备以及存储比特流的方法
CN108810549B (zh) * 2018-06-06 2021-04-27 天津大学 一种面向低功耗的流媒体播放方法
EP4322533A3 (en) 2018-06-29 2024-03-06 Beijing Bytedance Network Technology Co., Ltd. Checking order of motion candidates in lut
CN110662052B (zh) 2018-06-29 2022-07-08 北京字节跳动网络技术有限公司 更新查找表(lut)的条件
TWI731360B (zh) 2018-06-29 2021-06-21 大陸商北京字節跳動網絡技術有限公司 查找表的使用條件
TWI728390B (zh) * 2018-06-29 2021-05-21 大陸商北京字節跳動網絡技術有限公司 查找表尺寸
GB2587984B (en) 2018-06-29 2022-12-14 Kt Corp Method and apparatus for processing a video signal
EP3791585A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Partial/full pruning when adding a hmvp candidate to merge/amvp
CN110662043B (zh) 2018-06-29 2021-12-21 北京字节跳动网络技术有限公司 一种用于处理视频数据的方法、装置和计算机可读介质
EP3791586A1 (en) 2018-06-29 2021-03-17 Beijing Bytedance Network Technology Co. Ltd. Concept of using one or multiple look up tables to store motion information of previously coded in order and use them to code following blocks
SG11202012293RA (en) 2018-06-29 2021-01-28 Beijing Bytedance Network Technology Co Ltd Update of look up table: fifo, constrained fifo
WO2020008349A1 (en) 2018-07-02 2020-01-09 Beijing Bytedance Network Technology Co., Ltd. Merge index coding
US11218721B2 (en) 2018-07-18 2022-01-04 Mediatek Inc. Method and apparatus of motion compensation bandwidth reduction for video coding system utilizing multi-hypothesis
US11051010B2 (en) * 2018-07-18 2021-06-29 Mediatek Inc. Merge candidates with multiple hypothesis
KR20200010113A (ko) * 2018-07-18 2020-01-30 한국전자통신연구원 지역 조명 보상을 통한 효과적인 비디오 부호화/복호화 방법 및 장치
CN116708815A (zh) * 2018-08-09 2023-09-05 Lg电子株式会社 编码设备、解码设备和数据发送设备
US11089297B2 (en) 2018-08-31 2021-08-10 Hulu, LLC Historical motion vector prediction with reset list
CN112040247B (zh) * 2018-09-10 2021-09-21 华为技术有限公司 视频解码方法、视频解码器以及计算机可读存储介质
WO2020053800A1 (en) 2018-09-12 2020-03-19 Beijing Bytedance Network Technology Co., Ltd. How many hmvp candidates to be checked
US11997311B2 (en) 2018-09-17 2024-05-28 Hfi Innovation Inc. Methods and apparatuses of combining multiple predictors for block prediction in video coding systems
US11558622B2 (en) * 2018-10-09 2023-01-17 Samsung Electronics Co., Ltd. Video decoding method and apparatus, and video encoding method and apparatus involving sub-block merge index context and bypass model
EP3788779A4 (en) * 2018-10-23 2022-03-02 Tencent America LLC VIDEO CODING METHOD AND APPARATUS
US10917636B2 (en) * 2018-12-03 2021-02-09 Tencent America LLC Method and apparatus for video coding
JP7073501B2 (ja) * 2018-12-12 2022-05-23 エルジー エレクトロニクス インコーポレイティド 履歴ベース動きベクトル予測に基づいてビデオ信号を処理するための方法及び装置
TWI720753B (zh) * 2018-12-21 2021-03-01 聯發科技股份有限公司 簡化的三角形合併模式候選列表導出的方法以及裝置
US11032574B2 (en) 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding
JP7275286B2 (ja) 2019-01-10 2023-05-17 北京字節跳動網絡技術有限公司 Lut更新の起動
WO2020143824A1 (en) 2019-01-13 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and shared merge list
US11025951B2 (en) * 2019-01-13 2021-06-01 Tencent America LLC Method and apparatus for video coding
WO2020147772A1 (en) 2019-01-16 2020-07-23 Beijing Bytedance Network Technology Co., Ltd. Motion candidates derivation
WO2020192611A1 (en) 2019-03-22 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Interaction between merge list construction and other tools
EP3955569A4 (en) 2019-04-25 2022-07-27 Huawei Technologies Co., Ltd. METHOD AND APPARATUS FOR IMAGE PREDICTION AND COMPUTER READABLE INFORMATION MEDIA

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2079434A1 (en) 1991-09-30 1993-03-31 Derek Andrew Motion vector estimation, motion picture encoding and storage
US5594504A (en) * 1994-07-06 1997-01-14 Lucent Technologies Inc. Predictive video coding using a motion vector updating routine
JP3800640B2 (ja) 1995-07-04 2006-07-26 ソニー株式会社 画像情報の動き検出方法及びその装置、画像情報の符号化方法及びその装置、画像情報伝送システム、画像情報記録システム並びに記録媒体
US6519287B1 (en) 1998-07-13 2003-02-11 Motorola, Inc. Method and apparatus for encoding and decoding video signals by using storage and retrieval of motion vectors
US6289052B1 (en) 1999-06-07 2001-09-11 Lucent Technologies Inc. Methods and apparatus for motion estimation using causal templates
US6968008B1 (en) * 1999-07-27 2005-11-22 Sharp Laboratories Of America, Inc. Methods for motion estimation with adaptive motion accuracy
EP1294194B8 (en) 2001-09-10 2010-08-04 Texas Instruments Incorporated Apparatus and method for motion vector estimation
JP2004023458A (ja) * 2002-06-17 2004-01-22 Toshiba Corp 動画像符号化/復号化方法及び装置
KR100865034B1 (ko) * 2002-07-18 2008-10-23 엘지전자 주식회사 모션 벡터 예측 방법
KR100506864B1 (ko) * 2002-10-04 2005-08-05 엘지전자 주식회사 모션벡터 결정방법
US7075257B2 (en) * 2002-10-18 2006-07-11 Black & Decker Inc. Method and device for braking a motor
NO318167B1 (no) * 2002-11-27 2005-02-14 Tandberg Telecom As Vektorprediksjon
AU2003248913A1 (en) 2003-01-10 2004-08-10 Thomson Licensing S.A. Defining interpolation filters for error concealment in a coded image
ES2343410T3 (es) 2003-06-25 2010-07-30 Thomson Licensing Codificacion intertramas con decision rapida de modo.
WO2005002233A1 (en) * 2003-06-27 2005-01-06 Koninklijke Philips Electronics N.V. Method of encoding for handheld apparatuses
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
US7400681B2 (en) 2003-11-28 2008-07-15 Scientific-Atlanta, Inc. Low-complexity motion vector prediction for video codec with two lists of reference pictures
JP4213646B2 (ja) * 2003-12-26 2009-01-21 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法、及び画像復号プログラム。
FR2868579A1 (fr) * 2004-03-30 2005-10-07 St Microelectronics Sa Procede et dispositif de generation de vecteurs candidats pour les systemes d'interpolation d'images par estimation et compensation de mouvement
JP2006020095A (ja) 2004-07-01 2006-01-19 Sharp Corp 動きベクトル検出回路、画像符号化回路、動きベクトル検出方法および画像符号化方法
CN101156451A (zh) 2005-04-12 2008-04-02 皇家飞利浦电子股份有限公司 使用基于区域的多次通过运动估计和时间运动矢量候选更新的视频处理
US8913660B2 (en) * 2005-04-14 2014-12-16 Fastvdo, Llc Device and method for fast block-matching motion estimation in video encoders
CN101401440A (zh) * 2006-01-09 2009-04-01 诺基亚公司 可伸缩视频编码中的差错恢复模式判决
AU2007244443A1 (en) * 2006-04-28 2007-11-08 Ntt Docomo, Inc. Image predictive coding device, image predictive coding method, image predictive coding program, image predictive decoding device, image predictive decoding method and image predictive decoding program
KR100856223B1 (ko) * 2006-10-19 2008-09-03 삼성전자주식회사 H.264 인코더의 적응적 인코딩 모드 결정 장치 및결정 방법
FR2907989B1 (fr) * 2006-10-27 2009-01-16 Actimagine Sarl Procede et dispositif d'optimisation de la compression d'un flux video
WO2008120577A1 (ja) 2007-03-29 2008-10-09 Kabushiki Kaisha Toshiba 画像符号化及び復号化の方法及び装置
US20090003449A1 (en) * 2007-06-28 2009-01-01 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
BRPI0906413A2 (pt) * 2008-01-10 2015-07-14 Thomson Licensing Métodos e equipamento para compensação de iluminação de vídeo intra predito
BRPI0915821A2 (pt) * 2008-07-10 2015-11-10 Mitsubishi Electric Corp dispositivos codificador e decodificador de imagem, e, métodos de codificação e de decodificação de imagem.
US8724697B2 (en) 2008-09-26 2014-05-13 Qualcomm Incorporated Locating motion vectors for video data units
TWI382770B (zh) * 2008-12-11 2013-01-11 Univ Nat Taiwan 視訊影像傳輸中遇到封包遺失時的有效選取方法
BRPI1011885A2 (pt) 2009-06-19 2016-04-12 France Telecom métodos para a codificação e decodificação de um sinal de imagens, dispositivos de codificação e decodificação, sinal e programas de computador correspondentes.
US8665964B2 (en) 2009-06-30 2014-03-04 Qualcomm Incorporated Video coding based on first order prediction and pre-defined second order prediction mode
KR101452859B1 (ko) 2009-08-13 2014-10-23 삼성전자주식회사 움직임 벡터를 부호화 및 복호화하는 방법 및 장치
CN102668566B (zh) * 2009-10-22 2016-05-04 汤姆森特许公司 将dc帧内预测模式用于视频编码和解码的方法和装置
US9036692B2 (en) 2010-01-18 2015-05-19 Mediatek Inc. Motion prediction method
WO2011099792A2 (ko) * 2010-02-10 2011-08-18 엘지전자 주식회사 비디오 신호의 처리 방법 및 장치
US8588303B2 (en) * 2010-03-31 2013-11-19 Futurewei Technologies, Inc. Multiple predictor sets for intra-frame coding
KR101752418B1 (ko) * 2010-04-09 2017-06-29 엘지전자 주식회사 비디오 신호 처리 방법 및 장치
US9124898B2 (en) * 2010-07-12 2015-09-01 Mediatek Inc. Method and apparatus of temporal motion vector prediction
KR101762819B1 (ko) * 2010-09-02 2017-07-28 엘지전자 주식회사 영상 부호화 및 복호화 방법과 이를 이용한 장치
JP5855570B2 (ja) 2010-09-30 2016-02-09 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 画像復号方法、画像符号化方法、画像復号装置、画像符号化装置、プログラムおよび集積回路
KR102034004B1 (ko) * 2010-10-08 2019-10-18 지이 비디오 컴프레션, 엘엘씨 블록 분할 및 블록 병합을 지원하는 픽처 코딩
US8824558B2 (en) 2010-11-23 2014-09-02 Mediatek Inc. Method and apparatus of spatial motion vector prediction
US9137544B2 (en) * 2010-11-29 2015-09-15 Mediatek Inc. Method and apparatus for derivation of mv/mvp candidate for inter/skip/merge modes
US8711940B2 (en) 2010-11-29 2014-04-29 Mediatek Inc. Method and apparatus of motion vector prediction with extended motion vector predictor
US9066104B2 (en) * 2011-01-14 2015-06-23 Google Inc. Spatial block merge mode
US8755437B2 (en) * 2011-03-17 2014-06-17 Mediatek Inc. Method and apparatus for derivation of spatial motion vector candidate and motion vector prediction candidate
EP3139611A1 (en) 2011-03-14 2017-03-08 HFI Innovation Inc. Method and apparatus for deriving temporal motion vector prediction
WO2012173315A1 (ko) 2011-06-17 2012-12-20 엘지전자 주식회사 인트라 예측 모드 부호화/복호화 방법 및 장치

Also Published As

Publication number Publication date
BR112013032110B1 (pt) 2022-05-17
CA2839249A1 (en) 2012-12-27
US9131239B2 (en) 2015-09-08
IL229716A0 (en) 2014-01-30
CA2838839A1 (en) 2012-12-27
AU2012273399A1 (en) 2014-01-09
AU2012273398B2 (en) 2015-11-19
UA111971C2 (uk) 2016-07-11
WO2012177388A1 (en) 2012-12-27
KR20170016994A (ko) 2017-02-14
JP2016096550A (ja) 2016-05-26
KR20140024954A (ko) 2014-03-03
BR112013032601B1 (pt) 2022-06-07
CN103609121B (zh) 2017-09-01
EP2721817B1 (en) 2022-02-09
AU2012273398A1 (en) 2014-01-09
JP2014517656A (ja) 2014-07-17
CN103609121A (zh) 2014-02-26
SI2721817T1 (sl) 2022-04-29
KR20140017020A (ko) 2014-02-10
SG195213A1 (en) 2013-12-30
BR112013032110A2 (pt) 2016-12-13
IL229718A (en) 2017-05-29
RU2014101483A (ru) 2015-07-27
MX2013014929A (es) 2014-02-11
MY181631A (en) 2020-12-30
RU2014101348A (ru) 2015-07-27
JP2014520484A (ja) 2014-08-21
IL229716A (en) 2016-12-29
CN103609123B (zh) 2017-02-15
JP2016076944A (ja) 2016-05-12
HUE058080T2 (hu) 2022-07-28
KR102010097B1 (ko) 2019-08-12
CA2838839C (en) 2017-03-21
BR112013032601A2 (pt) 2017-08-01
WO2012177387A1 (en) 2012-12-27
MX2013014932A (es) 2014-02-11
IL229718A0 (en) 2014-01-30
JP6254136B2 (ja) 2017-12-27
ES2908241T3 (es) 2022-04-28
CA2839249C (en) 2017-01-03
MY168369A (en) 2018-10-31
DK2721817T3 (da) 2022-03-14
MX339025B (es) 2016-05-05
CN103609123A (zh) 2014-02-26
AU2012273399B2 (en) 2016-03-24
US20120320968A1 (en) 2012-12-20
EP2721818A1 (en) 2014-04-23
US9282338B2 (en) 2016-03-08
EP2721817A1 (en) 2014-04-23
US20120320969A1 (en) 2012-12-20

Similar Documents

Publication Publication Date Title
JP6254136B2 (ja) 統合されたマージモードおよび適応動きベクトル予測モード候補選択
JP6325068B2 (ja) サンプル適応オフセットのためのオフセットタイプおよび係数シグナリング方法
JP5778299B2 (ja) 動きベクトル予測
JP5797840B2 (ja) ビデオコーディングのための並列化フレンドリーなマージ候補
JP5960309B2 (ja) マッピングされた変換と走査モードとを使用するビデオコード化
JP5922244B2 (ja) ビデオコーディングにおいて適応ループフィルタとマージされたサンプル適応オフセット
JP5886440B2 (ja) イントラ予測ビデオコーディングにおける非正方形変換
JP2014531873A (ja) ビデオコーディングのための動きベクトル予測子候補クリッピング削除
RU2574280C2 (ru) Выбор единых кандидатов режима слияния и адаптивного режима предсказания вектора движения

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140218

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150106

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150406

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150714

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151116

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20151124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160126

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160224

R150 Certificate of patent or registration of utility model

Ref document number: 5893729

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250