JP5823623B2 - ビデオコーディングのための動きベクトル予測子候補クリッピング削除 - Google Patents

ビデオコーディングのための動きベクトル予測子候補クリッピング削除 Download PDF

Info

Publication number
JP5823623B2
JP5823623B2 JP2014534577A JP2014534577A JP5823623B2 JP 5823623 B2 JP5823623 B2 JP 5823623B2 JP 2014534577 A JP2014534577 A JP 2014534577A JP 2014534577 A JP2014534577 A JP 2014534577A JP 5823623 B2 JP5823623 B2 JP 5823623B2
Authority
JP
Japan
Prior art keywords
motion vector
vector predictor
block
video block
clipped
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014534577A
Other languages
English (en)
Other versions
JP2014531873A (ja
Inventor
コバン、ムハンメド・ゼイド
カークゼウィックズ、マルタ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of JP2014531873A publication Critical patent/JP2014531873A/ja
Application granted granted Critical
Publication of JP5823623B2 publication Critical patent/JP5823623B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/55Motion estimation with spatial constraints, e.g. at image or region borders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/563Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本出願は、その全体がともに参照により本明細書に組み込まれる、2011年10月4日に出願された米国仮出願第61/543,181号、および2011年10月28日に出願された米国仮出願第61/553,053号の優先権を主張する。
本開示は、ビデオコーディングに関し、より詳細には、ビデオインターコーディング技法に関する。
デジタルビデオ機能は、デジタルテレビジョン、デジタルダイレクトブロードキャストシステム、ワイヤレスブロードキャストシステム、携帯情報端末(PDA)、ラップトップまたはデスクトップコンピュータ、デジタルカメラ、デジタル記録デバイス、デジタルメディアプレーヤ、ビデオゲームデバイス、ビデオゲームコンソール、セルラー電話または衛星無線電話、ビデオ遠隔会議デバイスなどを含む、広範囲にわたるデバイスに組み込まれ得る。デジタルビデオデバイスは、デジタルビデオ情報をより効率的に送信、受信および記憶するための、MPEG−2、MPEG−4、ITU−T H.263、ITU−T H.264/MPEG−4,Part10,アドバンストビデオコーディング(AVC:Advanced Video Coding)によって定義された規格、現在開発中の高効率ビデオコーディング(HEVC:High Efficiency Video Coding)規格、およびそのような規格の拡張に記載されているビデオ圧縮技法など、ビデオ圧縮技法を実装する。
ビデオ圧縮技法は、ビデオシーケンスに固有の冗長性を低減または除去するために空間的(イントラピクチャ)予測および/または時間的(インターピクチャ)予測を含み得る。ブロックベースのビデオコーディングの場合、ビデオスライス(video slice)が、ツリーブロック、コーディングユニット(CU)および/またはコーディングノード(coding node)と呼ばれることもあるビデオブロックに区分され得る。ピクチャのイントラコード化(inter-coded)(I)スライス中のビデオブロックは、同じピクチャ中の隣接ブロック中の参照サンプルに対する空間的予測を使用して符号化される。ピクチャのインターコード化(PまたはB)スライス中のビデオブロックは、同じピクチャ中の隣接ブロック中の参照サンプル(reference sample)に対する空間的予測、または他の参照ピクチャ(reference picture)中の参照サンプルに対する時間的予測を使用し得る。ピクチャはフレームと呼ばれることがあり、参照ピクチャは参照フレームと呼ばれることがある。
空間的予測または時間的予測は、コーディングされるべきブロックのための予測ブロックを使用する。残差データは、コーディングされるべき元のブロックと予測ブロックとの間のピクセル差分を表す。インターコード化ブロックは、予測ブロックを形成する参照サンプルのブロックを指す動きベクトル、およびコード化ブロックと予測ブロックとの間の差分を示す残差データに従って符号化される。イントラコード化(intra-coded)ブロックは、イントラコーディングモードと残差データとに従って符号化される。さらなる圧縮のために、残差データは、ピクセル領域から変換領域に変換されて、残差変換係数が得られ得、その残差変換係数は、ついで量子化され得る。量子化された変換係数は、最初は2次元アレイに構成され、エントロピーコーディングに関する変換係数の1次元ベクトルを生成するために、特定の順序で走査される
概して、本開示では、動きベクトル予測子候補(motion vector predictor candidate)のクリッピングされない(unclipped)バージョンに基づいてビデオブロックをコーディングするための技法について説明する。本技法は、動きベクトル予測子候補をクリッピング(clipping)することなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定することを含む。動きベクトル予測子候補のうちの1つが、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを指す場合、本開示の技法は、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれることを可能にする。クリッピングされない動きベクトル予測子候補が動きベクトル予測プロセスにおいて使用されるべきであると決定された場合、クリッピングされない動きベクトルは、動き補償プロセス中に参照ピクチャの周りのパディング領域(padding region)内に予測ブロックを再配置するためにクリッピングされ得る。
現在のHEVCテストモデル(HM)では、マージモードおよび適応動きベクトル予測(AMVP:adaptive motion vector prediction)モードの2つの動きベクトル予測モードがサポートされる。いずれのモードでも、ビデオコーディングデバイスが、カレントビデオブロック(current video block)のための動きベクトル予測子をそこから決定するための動きベクトル予測子候補リストを決定する。従来、動きベクトル予測子候補のいずれかが、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを指す場合、ビデオコーディングデバイスは、予測ブロック全体が参照ピクチャの周りのパディング領域内に再配置されることを保証するように、動きベクトル予測子候補をクリッピングすることになる。
本開示の技法によれば、動きベクトル予測子候補クリッピングプロセスは候補リスト生成プロセスから削除される。詳細には、候補リストの動きベクトル予測子候補が参照ピクチャ境界の外側に位置する予測ブロックを指すとき、ビデオコーディングデバイスは、動きベクトル予測子候補の値をクリッピングしないか、あるいは切り捨てない。次いで、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいて、カレントビデオブロックがコーディングされる。動き補償において使用するために決定された場合、候補リストからの動きベクトルがクリッピングされ得る。動きベクトル予測子候補クリッピングプロセスをなくすことにより、ビデオエンコーダとビデオデコーダの両方において複雑さが低減される。
本開示の一例では、ビデオデータをコーディングするための方法が提案される。本方法は、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、ことと、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングすることとを備える。
本開示の別の例では、ビデオデータをコーディングするように構成された装置が提案される。本装置は、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定するための、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、手段と、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングするための手段とを備える。
本開示の別の例では、ビデオデータをコーディングするように構成された装置が提案される。本装置は、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、ことと、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングすることとを行うように構成されたビデオコーダを備える。
本開示の別の例では、ビデオデータをコーディングすることをプロセッサに行わせるための命令を記憶するコンピュータ可読記憶媒体が提案される。本プロセッサは、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、ことと、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングすることとを行うように構成される。
1つまたは複数の例の詳細を添付の図面および以下の説明に記載する。他の特徴、目的、および利点は、その説明および図面、ならびに特許請求の範囲から明らかになろう。
本開示で説明する技法を利用し得る例示的なビデオ符号化および復号システムを示すブロック図。 本開示で説明する技法を実装し得る例示的なビデオエンコーダを示すブロック図。 本開示で説明する技法を実装し得る例示的なビデオデコーダを示すブロック図。 動きベクトル予測子候補がそこから適応動きベクトル予測モードについて決定される空間隣接ビデオブロックおよび時間隣接ビデオブロックを示す概念図。 動きベクトル予測子候補がそこからマージモードについて決定される空間隣接ビデオブロックおよび時間隣接ビデオブロックを示す概念図。 参照ピクチャと、カレントビデオブロックの動きベクトル予測子候補による参照ピクチャ境界の外側に位置する予測ブロックとを示す概念図。 本開示の技法を使用してビデオを符号化するための方法の例示的なフローチャート。 本開示の技法を使用してビデオを復号するための方法の例示的なフローチャート。
図1は、本開示で説明するインター予測技法を利用し得る例示的なビデオ符号化および復号システム10を示すブロック図である。図1に示すように、システム10は、宛先デバイス14によって後で復号されるべき符号化ビデオデータを生成するソースデバイス12を含む。ソースデバイス12および宛先デバイス14は、デスクトップコンピュータ、ノートブック(すなわち、ラップトップ)コンピュータ、タブレットコンピュータ、セットトップボックス、いわゆる「スマート」フォン、いわゆる「スマート」パッドなどの電話ハンドセット、テレビジョン、カメラ、ディスプレイデバイス、デジタルメディアプレーヤ、ビデオゲームコンソールなどを含む、広範囲にわたるデバイスのいずれかを備え得る。場合によっては、ソースデバイス12および宛先デバイス14は、ワイヤレス通信のために装備され得る。
宛先デバイス14は、リンク16を介して復号されるべき符号化ビデオデータを受信し得る。リンク16は、ソースデバイス12から宛先デバイス14に符号化ビデオデータを移動することが可能な任意のタイプの媒体またはデバイスを備え得る。一例では、リンク16は、ソースデバイス12が、符号化ビデオデータをリアルタイムで宛先デバイス14に直接送信することを可能にするための通信媒体を備え得る。符号化ビデオデータは、ワイヤレス通信プロトコルなどの通信規格に従って変調され、宛先デバイス14に送信され得る。通信媒体は、無線周波数(RF)スペクトルあるいは1つまたは複数の物理伝送線路など、任意のワイヤレスまたはワイヤード通信媒体を備え得る。通信媒体は、ローカルエリアネットワーク、ワイドエリアネットワーク、またはインターネットなどのグローバルネットワークなど、パケットベースネットワークの一部を形成し得る。通信媒体は、ソースデバイス12から宛先デバイス14への通信を可能にするために有用であり得るルータ、スイッチ、基地局、または任意の他の機器を含み得る。
別の例では、符号化ビデオはまた、記憶媒体34またはファイルサーバ36に記憶され得、必要に応じて宛先デバイス14によってアクセスされ得る。記憶媒体は、ブルーレイ(登録商標)ディスク、DVD、CD−ROM、フラッシュメモリ、または符号化ビデオデータを記憶するための任意の他の好適なデジタル記憶媒体など、様々なローカルにアクセスされたデータ記憶媒体のいずれかを含み得る。記憶媒体34またはファイルサーバ36は、ソースデバイス12によって生成される符号化ビデオを保持し得、宛先デバイス14が必要に応じてストリーミングまたはダウンロードを介してアクセスし得る、任意の他の中間ストレージデバイスであり得る。ファイルサーバは、符号化ビデオデータを記憶し、その符号化ビデオデータを宛先デバイス14に送信することが可能な任意のタイプのサーバであり得る。例示的なファイルサーバは、(たとえば、ウェブサイトのための)ウェブサーバ、FTPサーバ、ネットワーク接続ストレージ(NAS)デバイス、またはローカルディスクドライブを含む。宛先デバイス14は、インターネット接続を含む、任意の標準のデータ接続を介して符号化ビデオデータにアクセスし得る。これは、ファイルサーバに記憶された符号化ビデオデータにアクセスするのに好適であるワイヤレスチャネル(たとえば、Wi−Fi接続)、ワイヤード接続(たとえば、DSL、ケーブルモデムなど)、またはその両方の組合せを含み得る。ファイルサーバからの符号化ビデオデータの送信は、ストリーミング送信、ダウンロード送信、またはその両方の組合せであり得る。
本開示の技法は、必ずしもワイヤレス適用例または設定に限定されるとは限らない。本技法は、オーバージエアテレビジョン放送、ケーブルテレビジョン送信、衛星テレビジョン送信、たとえばインターネットを介したストリーミングビデオ送信、データ記憶媒体に記憶するためのデジタルビデオの符号化、データ記憶媒体に記憶されたデジタルビデオの復号、または他の適用例など、様々なマルチメディア適用例のいずれかをサポートするビデオコーディングに適用され得る。いくつかの例では、システム10は、ビデオストリーミング、ビデオ再生、ビデオブロードキャスティング、および/またはビデオテレフォニーなどの適用例をサポートするために、一方向または双方向のビデオ送信をサポートするように構成され得る。
図1の例では、ソースデバイス12は、ビデオソース18と、ビデオエンコーダ20と、出力インターフェース22とを含む。場合によっては、出力インターフェース22は、変調器/復調器(モデム)および/または送信機を含み得る。ソースデバイス12において、ビデオソース18は、たとえばビデオカメラなどのビデオキャプチャデバイス、以前にキャプチャされたビデオを含んでいるビデオアーカイブ、ビデオコンテンツプロバイダからビデオを受信するためのビデオフィードインターフェース、および/またはソースビデオとしてコンピュータグラフィックスデータを生成するためのコンピュータグラフィックスシステムなどのソース、あるいはそのようなソースの組合せを含み得る。一例として、ビデオソース18がビデオカメラである場合、ソースデバイス12および宛先デバイス14は、いわゆるカメラフォンまたはビデオフォンを形成し得る。ただし、本開示で説明する技法は、概してビデオコーディングに適用可能であり得、ワイヤレスおよび/またはワイヤード適用例に適用され得る。
キャプチャされたビデオ、以前にキャプチャされたビデオ、またはコンピュータ生成されたビデオは、ビデオエンコーダ20によって符号化され得る。符号化されたビデオ情報は、ワイヤレス通信プロトコルなどの通信規格に従ってモデム22によって変調され、送信機24を介して宛先デバイス14に送信され得る。モデム22は、信号変調のために設計された様々なミキサ、フィルタ、増幅器または他の構成要素を含み得る。送信機24は、増幅器、フィルタ、および1つまたは複数のアンテナを含む、データを送信するために設計された回路を含み得る。
図1の例では、宛先デバイス14は、受信機26と、モデム28と、ビデオデコーダ30と、ディスプレイデバイス32とを含む。宛先デバイス14の受信機26はチャネル16を介して情報を受信し、モデム28はその情報を復調して、ビデオデコーダ30のための復調されたビットストリームを生成する。チャネル16を介して通信される情報は、ビデオデータを復号する際にビデオデコーダ30が使用する、ビデオエンコーダ20によって生成された様々なシンタックス情報を含み得る。そのようなシンタックスはまた、記憶媒体34またはファイルサーバ36に記憶された符号化ビデオデータとともに含まれ得る。ビデオエンコーダ20およびビデオデコーダ30の各々は、ビデオデータを符号化または復号することが可能であるそれぞれのエンコーダデコーダ(コーデック)の一部を形成し得る。
ディスプレイデバイス32は、宛先デバイス14と一体化されるかまたはその外部にあり得る。いくつかの例では、宛先デバイス14は、一体型ディスプレイデバイスを含み、また、外部ディスプレイデバイスとインターフェースするように構成され得る。他の例では、宛先デバイス14はディスプレイデバイスであり得る。概して、ディスプレイデバイス32は、復号されたビデオデータをユーザに対して表示し、液晶ディスプレイ(LCD)、プラズマディスプレイ、有機発光ダイオード(OLED)ディスプレイ、または別のタイプのディスプレイデバイスなど、様々なディスプレイデバイスのいずれかを備え得る。
ビデオエンコーダ20およびビデオデコーダ30は、現在開発中の高効率ビデオコーディング(HEVC)規格など、ビデオ圧縮規格に従って動作し得、HEVCテストモデル(HM)に準拠し得る。代替的に、ビデオエンコーダ20およびビデオデコーダ30は、代替的にMPEG−4、Part 10、アドバンストビデオコーディング(AVC)と呼ばれるITU−T H.264規格など、他のプロプライエタリ規格または業界規格、あるいはそのような規格の拡張に従って動作し得る。ただし、本開示の技法は、いかなる特定のコーディング規格にも限定されない。ビデオ圧縮規格の他の例には、MPEG−2およびITU−T H.263がある。
図1には示されていないが、いくつかの態様では、ビデオエンコーダ20およびビデオデコーダ30は、それぞれオーディオエンコーダおよびデコーダと統合され得、適切なMUX−DEMUXユニット、または他のハードウェアおよびソフトウェアを含んで、共通のデータストリームまたは別個のデータストリーム中のオーディオとビデオの両方の符号化を処理し得る。適用可能な場合、いくつかの例では、MUX−DEMUXユニットは、ITU H.223マルチプレクサプロトコル、またはユーザデータグラムプロトコル(UDP)などの他のプロトコルに準拠し得る。
ビデオエンコーダ20およびビデオデコーダ30はそれぞれ、1つまたは複数のマイクロプロセッサ、デジタル信号プロセッサ(DSP)、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、ディスクリート論理、ソフトウェア、ハードウェア、ファームウェアなど、様々な好適なエンコーダ回路のいずれか、あるいはそれらの任意の組合せとして実装され得る。本技法が部分的にソフトウェアで実装されるとき、デバイスは、好適な非一時的コンピュータ可読媒体にソフトウェアの命令を記憶し、1つまたは複数のプロセッサを使用してその命令をハードウェアで実行して、本開示の技法を実行し得る。ビデオエンコーダ20およびビデオデコーダ30の各々は1つまたは複数のエンコーダまたはデコーダ中に含まれ得、そのいずれも、それぞれのデバイスにおいて複合エンコーダ/デコーダ(コーデック)の一部として統合され得る。
ビデオエンコーダ20は、動きベクトルをコーディングするために本開示の技法のいずれかまたはすべてを実装し得る。一例として、ビデオエンコーダ20は、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定することであって、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、決定することと、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングすることとを行うように構成され得る。
同様に、ビデオデコーダ30は、動きベクトルをコーディングするために本開示の技法のいずれかまたはすべてを実装し得る。一例として、ビデオデコーダ30は、動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定することであって、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、動きベクトル予測子候補のクリッピングされないバージョンが候補リスト中に含まれる、決定することと、候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントビデオブロックをコーディングすることとを行うように構成され得る。
本開示で説明するビデオコーダは、ビデオエンコーダまたはビデオデコーダを指し得る。同様に、ビデオエンコーダおよびビデオデコーダは、それぞれビデオ符号化ユニットおよびビデオ復号ユニットと呼ばれることがある。同様に、ビデオコーディングはビデオ符号化またはビデオ復号を指し得る。
ビデオコーディング共同研究部会(JCT−VC:Joint Collaborative Team on Video Coding)は、現在、HEVC規格の開発に取り組んでいる。HEVCの規格化の取り組みは、HEVCテストモデル(HM)と呼ばれるビデオコーディングデバイスの発展的モデルに基づく。HMは、たとえば、ITU−T H.264/AVCに従う既存のデバイスに対してビデオコーディングデバイスのいくつかの追加の能力を仮定する。たとえば、H.264は9つのイントラ予測符号化モードを提供するが、HMは35個(33個の方向、1つのDC、1つの平面)ものイントラ予測符号化モードを提供し得る。
概して、HMの作業モデルは、ビデオフレームまたはピクチャが、ルーマサンプルとクロマサンプルの両方を含む一連のツリーブロックまたは最大コーディングユニット(LCU)に分割され得ることを記述する。ツリーブロックは、H.264規格のマクロブロックと同様の目的を有する。スライスは、コーディング順序でいくつかの連続するツリーブロックを含む。ビデオフレームまたはピクチャは、1つまたは複数のスライスに区分され得る。各ツリーブロックは、4分木に従ってコーディングユニット(CU)に分割され得る。たとえば、4分木のルートノードとしてのツリーブロックは、4つの子ノードに分割され得、各子ノードは、次に、親ノードとなり、別の4つの子ノードに分割され得る。4分木のリーフノードとしての、最終的な、分割されていない子ノードは、コーディングノード、すなわち、コード化ビデオブロックを備える。コード化ビットストリームに関連するシンタックスデータは、ツリーブロックが分割され得る最大回数を定義し得、コーディングノードの最小サイズをも定義し得る。
CUは、コーディングノードと、コーディングノードに関連する予測ユニット(PU:prediction unit)および変換ユニット(TU:transform unit)とを含む。CUのサイズは、コーディングノードのサイズに対応し、形状が方形である。CUのサイズは、8×8ピクセルから最大64×64以上のピクセルをもつツリーブロックのサイズまでに及び得る。各CUは、1つまたは複数のPUと、1つまたは複数のTUとを含み得る。CUに関連するシンタックスデータは、たとえば、CUを1つまたは複数のPUに区分することを記述し得る。区分モードは、CUが、スキップモード符号化またはダイレクトモード符号化されるか、イントラ予測モード符号化されるか、あるいはインター予測モード符号化されるかの間で異なり得る。PUは、形状が非方形になるように区分され得る。CUに関連するシンタックスデータは、たとえば、4分木に従って、CUを1つまたは複数のTUに区分することも記述し得る。TUは、形状が方形または非方形であり得る。
概して、PUは、予測プロセスに関係するデータを含む。たとえば、PUがイントラモード符号化されるとき、PUは、PUのイントラ予測モードを記述するデータを含み得る。別の例として、PUがインターモード符号化されるとき、PUは、PUのための動きベクトルを定義するデータを含み得る。PUのための動きベクトルを定義するデータは、たとえば、動きベクトルの水平成分、動きベクトルの垂直成分、動きベクトルの解像度(たとえば、1/4ピクセル精度または1/8ピクセル精度)、動きベクトルが指す参照ピクチャ、および/または動きベクトルの参照ピクチャリスト(たとえば、リスト0、リスト1、またはリストC)を記述し得る。
概して、TUは、変換プロセスと量子化プロセスとのために使用される。1つまたは複数のPUを有するCUはまた、1つまたは複数の変換ユニット(TU)を含み得る。予測の後に、ビデオエンコーダ20は、PUに対応する残差値を計算し得る。残差値は、ビデオデータのカレントブロック(current block)とビデオデータの予測ブロックとの間のピクセル差分値を備える。残差値は、エントロピーコーディングのためのシリアル化変換係数(serialized transform coefficient)を生成するために、TUを使用して変換係数に変換され、量子化され、走査され得る。本開示では、一般に、CUのコーディングノードを指すために「ビデオブロック」という用語を使用する。いくつかの特定の場合において、本開示では、コーディングノードならびにPUおよびTUを含む、ツリーブロック、すなわち、LCUまたはCUを指す「ビデオブロック」という用語も使用し得る。
ビデオシーケンスは、一般に、一連のビデオフレームまたはピクチャを含む。ピクチャグループ(GOP)は、概して、ビデオピクチャのうちの一連の1つまたは複数を備える。GOPは、GOP中に含まれるいくつかのピクチャを記述するシンタックスデータを、GOPのヘッダ中、ピクチャのうちの1つまたは複数のヘッダ中、または他の場所に含み得る。ピクチャの各スライスは、それぞれのスライスの符号化モードを記述するスライスシンタックスデータを含み得る。ビデオエンコーダ20は、一般に、ビデオデータを符号化するために個々のビデオスライス内のビデオブロックに対して動作する。ビデオブロックはCU内のコーディングノードに対応し得る。ビデオブロックは、固定サイズまたは可変サイズを有し得、指定のコーディング規格に応じてサイズが異なり得る。
一例として、HMは、様々なPUサイズでの予測をサポートする。特定のCUのサイズが2N×2Nであると仮定すると、HMは、2N×2NまたはN×NのPUサイズでイントラ予測をサポートし、2N×2N、2N×N、N×2N、またはN×Nの対称的なPUサイズでのインター予測をサポートする。HMはまた、2N×nU、2N×nD、nL×2N、およびnR×2NのPUサイズでのインター予測のための非対称区分をサポートする。非対称区分では、CUの一方向は区分されないが、他の方向は25%と75%とに区分される。25%の区分に対応するCUの部分は、「n」とその後ろに付く「Up」、「Down」、「Left」、または「Right」という表示によって示される。したがって、たとえば、「2N×nU」は、上部の2N×0.5N PUと下部の2N×1.5N PUとで水平方向に区分された2N×2N CUを指す。
本開示では、「N×N(NxN)」および「N×N(N by N)」は、垂直寸法および水平寸法に関するビデオブロックのピクセル寸法、たとえば、16×16(16x16)ピクセルまたは16×16(16 by 16)ピクセルを指すために互換的に使用され得る。概して、16×16ブロックは、垂直方向に16ピクセルを有し(y=16)、水平方向に16ピクセルを有する(x=16)。同様に、N×Nブロックは、概して、垂直方向にNピクセルを有し、水平方向にNピクセルを有し、ただし、Nは非負整数値を表す。ブロック中のピクセルは行と列に構成され得る。その上、ブロックは、必ずしも、水平方向において垂直方向と同じ数のピクセルを有する必要があるとは限らない。たとえば、ブロックはN×Mピクセルを備え得、ただし、Mは必ずしもNに等しいとは限らない。
CUのPUを使用したイントラ予測コーディングまたはインター予測コーディングの後に、ビデオエンコーダ20は残差データを計算し得る。PUは、(ピクセル領域とも呼ばれる)空間領域においてピクセルデータを備え得る。TUは、変換、たとえば、残差ビデオデータへの離散コサイン変換(DCT)、整数変換、ウェーブレット変換、または概念的に同様の変換の適用後に、変換領域において係数を備え得る。残差データは、符号化されていないピクチャと予測ビデオブロックとの間のピクセル差分に対応し得る。ビデオエンコーダ20は、CUのための残差データを含むTUを形成し、次いで、TUを変換して、CUの変換係数を生成し得る。
変換係数を生成するための任意の変換の後に、ビデオエンコーダ20は、変換係数の量子化を実行し得る。量子化は、概して、さらなる圧縮を行う、係数を表すために使用されるデータの量をできるだけ低減するために変換係数を量子化するプロセスを指す。量子化プロセスは、係数の一部または全部に関連するビット深度を低減し得る。たとえば、量子化中にnビット値がmビット値に切り捨てられ得、ただし、nはmよりも大きい。
いくつかの例では、ビデオエンコーダ20は、エントロピー符号化され得るシリアル化ベクトルを生成するために、量子化変換係数を走査するためにあらかじめ定義された走査順序を利用し得る。他の例では、ビデオエンコーダ20は適応走査を実行し得る。量子化変換係数を走査して1次元ベクトルを形成した後に、ビデオエンコーダ20は、たとえば、コンテキスト適応型可変長コーディング(CAVLC:context adaptive variable length coding)、コンテキスト適応型バイナリ算術コーディング(CABAC:context adaptive binary arithmetic coding)、シンタックスベースコンテキスト適応型バイナリ算術コーディング(SBAC:syntax-based context-adaptive binary arithmetic coding)、確率区間区分エントロピーコーディング(PIPE:Probability Interval Partitioning Entropy Code)または別のエントロピー符号化方法に従って1次元ベクトルをエントロピー符号化し得る。ビデオエンコーダ20はまた、ビデオデータを復号する際にビデオデコーダ30が使用するための、符号化ビデオデータに関連するシンタックス要素をエントロピー符号化し得る。
CABACを実行するために、ビデオエンコーダ20は、送信されるべきシンボルにコンテキストモデル内のコンテキストを割り当て得る。コンテキストは、たとえば、シンボルの隣接値が非0であるか否かに関係し得る。CAVLCを実行するために、ビデオエンコーダ20は、送信されるべきシンボルのための可変長コードを選択し得る。VLCにおけるコードワードは、比較的短いコードが優勢シンボルに対応し、より長いコードが劣勢シンボルに対応するように構成され得る。このようにして、VLCの使用は、たとえば、送信されるべき各シンボルのために等長コードワードを使用するよりも、ビット節約を達成し得る。確率決定は、シンボルに割り当てられるコンテキストに基づき得る。
図2は、本開示で説明するインター予測技法を実装し得る例示的なビデオエンコーダ20を示すブロック図である。ビデオエンコーダ20は、ビデオスライス内のビデオブロックのイントラコーディングおよびインターコーディングを実行し得る。イントラコーディングは、所与のビデオフレームまたはピクチャ内のビデオの空間的冗長性を低減または除去するために空間的予測に依拠する。インターコーディングは、ビデオシーケンスの隣接フレームまたはピクチャ内のビデオの時間的冗長性を低減または除去するために時間的予測に依拠する。イントラモード(Iモード)は、いくつかの空間ベースの圧縮モードのいずれかを指し得る。単方向予測(Pモード)または双方向予測(Bモード)などのインターモードは、いくつかの時間ベースの圧縮モードのいずれかを指し得る。
図2の例では、ビデオエンコーダ20は、モード選択ユニット40と、予測モジュール41と、参照ピクチャメモリ64と、加算器50と、変換モジュール52と、量子化ユニット54と、エントロピー符号化ユニット56とを含む。予測モジュール41は、動き推
定ユニット42と、動き補償ユニット44と、イントラ予測モジュール46とを含む。ビデオブロック再構成のために、ビデオエンコーダ20はまた、逆量子化ユニット58と、逆変換モジュール60と、加算器62とを含む。再構成されたビデオからブロッキネスアーティファクトを除去するためにブロック境界をフィルタ処理するデブロッキングフィルタ(図2に図示せず)も含まれ得る。所望される場合、デブロッキングフィルタは、一般に、加算器62の出力をフィルタ処理するであろう。
図2に示すように、ビデオエンコーダ20は、符号化されるべきビデオスライス内のカレントビデオブロックを受信する。スライスは複数のビデオブロックに分割され得る。モード選択ユニット40は、誤差結果に基づいてカレントビデオブロックのためのコーディングモード、イントラまたはインターのうちの1つを選択し得、予測モジュール41は、残差ブロックデータを生成するために、得られたイントラコード化ブロックまたはインターコード化ブロックを加算器50に与え、参照ピクチャとして使用するための符号化ブロックを再構成するために、得られたイントラコード化ブロックまたはインターコード化ブロックを加算器62に与え得る。
予測モジュール41内のイントラ予測モジュール46は、空間圧縮を行うために、コーディングされるべきカレントブロックと同じフレームまたはスライス中の1つまたは複数の隣接ブロックに対するカレントビデオブロックのイントラ予測コーディングを実行し得る。予測モジュール41内の動き推定ユニット42および動き補償ユニット44は、時間圧縮を行うために、1つまたは複数の参照ピクチャ中の1つまたは複数の予測ブロックに対するカレントビデオブロックのインター予測コーディングを実行する。
動き推定ユニット42は、ビデオシーケンスの所定のパターンに従ってビデオスライスのためのインター予測モードを決定するように構成され得る。所定のパターンは、シーケンス中のビデオスライスをPスライス、BスライスまたはGPBスライスに指定し得る。動き推定ユニット42と動き補償ユニット44とは、高度に統合され得るが、概念的な目的のために別々に示してある。動き推定ユニット42によって実行される動き推定は、ビデオブロックの動きを推定する動きベクトルを生成するプロセスである。動きベクトルは、たとえば、参照ピクチャ内の予測ブロックに対する現在ビデオフレームまたはピクチャ内のビデオブロックのPUの変位を示し得る。
予測ブロックは、ピクセル差分に関してコーディングされるビデオブロックのPUにぴったり一致することが見出されるブロックであり、それは、絶対値差分和(SAD:sum of absolute difference)、2乗差分和(SSD:sum of square difference)、または他の差分メトリックによって決定され得る。いくつかの例では、ビデオエンコーダ20は、参照ピクチャメモリ64に記憶された参照ピクチャのサブ整数ピクセル位置の値を計算し得る。たとえば、ビデオエンコーダ20は、参照ピクチャの1/4ピクセル位置、1/8ピクセル位置、または他の分数ピクセル位置の値を計算し得る。したがって、動き推定ユニット42は、フルピクセル位置と分数ピクセル位置とに対する動き探索を実行し、分数ピクセル精度で動きベクトルを出力し得る。
動き推定ユニット42は、PUの位置を参照ピクチャの予測ブロックの位置と比較することによって、インターコード化スライスにおけるビデオブロックのPUのための動きベクトルを計算する。参照ピクチャは、第1の参照ピクチャリスト(リスト0)または第2の参照ピクチャリスト(リスト1)から決定され得、それらの参照ピクチャリストの各々は、参照ピクチャメモリ64に記憶された1つまたは複数の参照ピクチャを識別する。動き推定ユニット42は、計算された動きベクトルをエントロピー符号化ユニット56と動き補償ユニット44とに送る。
動き補償は、動き補償ユニット44によって実行されるが、動き推定によって決定される動きベクトルに基づいて予測ブロックをフェッチまたは生成することに関与し得る。カレントビデオブロックのPUのための動きベクトルを受信すると、動き補償ユニット44は、動きベクトルが参照ピクチャリストのうちの1つにおいて指す予測ブロックの位置を特定し得る。ビデオエンコーダ20は、コーディングされているカレントビデオブロックのピクセル値から予測ブロックのピクセル値を減算し、ピクセル差分値を形成することによって残差ビデオブロックを形成する。ピクセル差分値は、ブロックの残差データを形成し、ルーマ差分成分とクロマ差分成分の両方を含み得る。加算器50は、この減算演算を実行する1つまたは複数の構成要素を表す。動き補償ユニット44はまた、ビデオスライスのビデオブロックを復号する際にビデオデコーダ30が使用するための、ビデオブロックとビデオスライスとに関連するシンタックス要素を生成し得る。
動き補償ユニット44がカレントビデオブロックのための予測ブロックを生成した後、ビデオエンコーダ20は、カレントビデオブロックから予測ブロックを減算することによって残差ビデオブロックを形成する。残差ブロック中の残差ビデオデータは、1つまたは複数のTU中に含まれ、変換モジュール52に適用され得る。変換モジュール52は、離散コサイン変換(DCT)または概念的に同様の変換などの変換を使用して、残差ビデオデータを残差変換係数に変換する。変換モジュール52は、残差ビデオデータをピクセル領域から周波数領域などの変換領域に変換し得る。
変換モジュール52は、得られた変換係数を量子化ユニット54に送り得る。量子化ユニット54は、ビットレートをさらに低減するために変換係数を量子化する。量子化プロセスは、係数の一部または全部に関連するビット深度を低減し得る。量子化の程度は、量子化パラメータを調整することによって変更され得る。いくつかの例では、量子化ユニット54は、次いで、量子化変換係数を含む行列の走査を実行し得る。代替的に、エントロピー符号化ユニット56が走査を実行し得る。
量子化の後に、エントロピー符号化ユニット56は量子化変換係数をエントロピー符号化する。たとえば、エントロピー符号化ユニット56は、コンテキスト適応型可変長コーディング(CAVLC)、コンテキスト適応型バイナリ算術コーディング(CABAC)、または別のエントロピー符号化技法を実行し得る。エントロピー符号化ユニット56によるエントロピー符号化の後に、符号化ビットストリームは、ビデオデコーダ30に送信されるか、あるいはビデオデコーダ30が後で送信するかまたは取り出すためにアーカイブされ得る。エントロピー符号化ユニット56はまた、コーディングされているカレントビデオスライス(current video slice)のための動きベクトルと他のシンタックス要素とをエントロピー符号化し得る。
逆量子化ユニット58および逆変換モジュール60は、それぞれ逆量子化および逆変換を適用して、参照ピクチャの参照ブロックとして後で使用するためにピクセル領域において残差ブロックを再構成する。動き補償ユニット44は、残差ブロックを参照ピクチャリストのうちの1つ内の参照ピクチャのうちの1つの予測ブロックに加算することによって参照ブロックを計算し得る。動き補償ユニット44はまた、再構成された残差ブロックに1つまたは複数の補間フィルタを適用して、動き推定において使用するサブ整数ピクセル値を計算し得る。加算器62は、再構成された残差ブロックを動き補償ユニット44によって生成された動き補償予測ブロックに加算して、参照ピクチャメモリ64に記憶するための参照ブロックを生成する。参照ブロックは、後続のビデオフレームまたはピクチャ中のブロックをインター予測するために、動き推定ユニット42と動き補償ユニット44とによって参照ブロックとして使用され得る。図2のビデオエンコーダ20に関する発明の詳細について、以下でより詳細に説明する。
図3は、本開示で説明するインター予測技法を実装し得る例示的なビデオデコーダ30を示すブロック図である。図3の例では、ビデオデコーダ30は、エントロピー復号ユニット80と、予測モジュール81と、逆量子化ユニット86と、逆変換モジュール88と、加算器90と、参照ピクチャメモリ92とを含む。予測モジュール81は、動き補償ユニット82と、イントラ予測モジュール84とを含む。ビデオデコーダ30は、いくつかの例では、図2のビデオエンコーダ20に関して説明した符号化パスとは概して逆の復号パスを実行し得る。
復号プロセス中に、ビデオデコーダ30は、ビデオエンコーダ20から、符号化ビデオスライスのビデオブロックと、関連するシンタックス要素とを表す符号化ビデオビットストリームを受信する。ビデオデコーダ30のエントロピー復号ユニット80は、量子化係数、動きベクトル、および他のシンタックス要素を生成するためにビットストリームをエントロピー復号する。エントロピー復号ユニット80は、予測モジュール81に動きベクトルと他のシンタックス要素とを転送する。ビデオデコーダ30は、ビデオスライスレベルおよび/またはビデオブロックレベルでシンタックス要素を受信し得る。
ビデオスライスがイントラコード化(I)スライスとしてコーディングされるとき、予測モジュール81のイントラ予測モジュール84は、シグナリングされたイントラ予測モードと、カレントフレーム(current frame)またはピクチャの、前に復号されたブロックからのデータとに基づいて、カレントビデオスライスのビデオブロックのための予測データを生成し得る。ビデオフレームがインターコード化(すなわち、B、PまたはGPB)スライスとしてコーディングされるとき、予測モジュール81の動き補償ユニット82は、エントロピー復号ユニット80から受信された動きベクトルおよび他のシンタックス要素に基づいて、カレントビデオスライスのビデオブロックのための予測ブロックを生成する。予測ブロックは、参照ピクチャリストのうちの1つ内の参照ピクチャのうちの1つから生成され得る。ビデオデコーダ30は、参照ピクチャメモリ92に記憶された参照ピクチャに基づいて、デフォルトの構成技法を使用して、参照フレームリスト、すなわち、リスト0およびリスト1を構成し得る。
動き補償ユニット82は、動きベクトルと他のシンタックス要素とをパースすることによってカレントビデオスライスのビデオブロックのための予測情報を決定し、その予測情報を使用して、復号されているカレントビデオブロックのための予測ブロックを生成する。たとえば、動き補償ユニット82は、ビデオスライスのビデオブロックをコーディングするために使用される予測モード(たとえば、イントラまたはインター予測)と、インター予測スライスタイプ(たとえば、Bスライス、Pスライス、またはGPBスライス)と、スライスの参照ピクチャリストのうちの1つまたは複数のための構成情報と、スライスの各インター符号化ビデオブロックのための動きベクトルと、スライスの各インターコード化ビデオブロックのためのインター予測ステータスと、カレントビデオスライス中のビデオブロックを復号するための他の情報とを決定するために、受信されたシンタックス要素のいくつかを使用する。
動き補償ユニット82はまた、補間フィルタに基づいて補間を実行し得る。動き補償ユニット82は、ビデオブロックの符号化中にビデオエンコーダ20によって使用された補間フィルタを使用して、参照ブロックのサブ整数ピクセルの補間値を計算し得る。動き補償ユニット82は、受信されたシンタックス要素からビデオエンコーダ20によって使用された補間フィルタを決定し、その補間フィルタを使用して予測ブロックを生成し得る。
逆量子化ユニット86は、ビットストリーム中で与えられ、エントロピー復号ユニット80によって復号された、量子化変換係数を逆量子化(inverse quantize)、すなわち、逆量子化(de-quantize)する。逆量子化プロセスは、量子化の程度を決定し、同様に、適用されるべき逆量子化の程度を決定するための、ビデオスライス中の各ビデオブロックについてビデオエンコーダ20によって計算される量子化パラメータの使用を含み得る。逆変換モジュール88は、逆変換、たとえば、逆DCT、逆整数変換、または概念的に同様の逆変換プロセスを変換係数に適用して、ピクセル領域において残差ブロックを生成する。
動き補償ユニット82が、動きベクトルと他のシンタックス要素とに基づいてカレントビデオブロックのための予測ブロックを生成した後、ビデオデコーダ30は、逆変換モジュール88からの残差ブロックを動き補償ユニット82によって生成された対応する予測ブロックと加算することによって、復号されたビデオブロックを形成する。加算器90は、この加算演算を実行する1つまたは複数の構成要素を表す。所望される場合、ブロッキネスアーティファクトを除去するために、復号されたブロックをフィルタ処理するためにデブロッキングフィルタも適用され得る。所与のフレームまたはピクチャ中の復号されたビデオブロックは、次いで、その後の動き補償のために使用される参照ピクチャを記憶する参照ピクチャメモリ92に記憶される。参照ピクチャメモリ92はまた、図1のディスプレイデバイス32などのディスプレイデバイス上での後の表示のための、復号されたビデオを記憶する。図3のビデオデコーダ30に関する発明の詳細について、以下でより詳細に説明する。
図2および図3を参照しながら上記で説明したように、インター予測を使用してPUをコーディングすることは、カレントブロックと参照フレーム中のブロックとの間の動きベクトルを計算することを伴う。動きベクトルは、(たとえば、図2の動き推定ユニット42による)動き推定(または動き探索)と呼ばれるプロセスを通して計算される。動きベクトルは、たとえば、参照フレームの参照サンプルに対する、カレントフレーム中の予測ユニットの変位を示し得る。参照ブロックは、ピクセル差分に関して、コーディングされているブロックにぴったり一致することが見出されるブロックであり得、それは、絶対値差分和(SAD)、2乗差分和(SSD:sum of squared difference)、または他の差分メトリックによって決定され得る。参照ブロックは、参照フレームまたは参照スライス内のどこにでも発生し得、必ずしも、参照フレームまたはスライスのブロック(たとえば、コーディングユニット)境界において発生するとは限らない。いくつかの例では、参照ブロックは分数ピクセル位置において発生し得る。他の例では、参照ブロックは、カレントブロックに対して定義された参照ピクチャ境界の外側に発生し得る。カレントブロックに最も良く一致する参照フレームのブロックを見つけると、エンコーダ(たとえば、図2の動き推定ユニット42)は、カレントブロックのためのカレント動きベクトル(current motion vector)を、カレントブロックから参照フレーム中の一致するブロックまでの(たとえば、カレントブロックの中心から一致するブロックの中心までの、またはカレントブロックの左上隅から一致するブロックの左上隅までの)ロケーションの差分として決定し得る。
いくつかの例では、エンコーダ(たとえば、図2の予測モジュール41)は、符号化ビデオビットストリーム中で、各ブロックについて動きベクトルをシグナリングし得る。シグナリングされた動きベクトルは、ビデオデータを復号するために、デコーダによって動き補償を実行するために使用される。ただし、動きベクトル全体をシグナリングすると、動きベクトルは一般に多数のビットによって表されるので、コーディングがあまり効率的でなくなることがある。
いくつかの事例では、動きベクトル全体をシグナリングするのではなく、エンコーダ(たとえば、図2の予測モジュール41)は、各パーティションについて、すなわち、各PUについて動きベクトルを予測し得る。この動きベクトル予測プロセスを実行する際に、エンコーダは、カレントブロックと同じフレーム中の空間的に隣接するブロックについて決定される候補動きベクトルのセット、または別の参照フレーム中のコロケートブロックについて決定される候補動きベクトルを決定し得る。エンコーダは、シグナリングにおける複雑さおよびビットレートを低減するために、動きベクトル全体をシグナリングするのではなく動きベクトル予測を実行し得る。空間的に隣接するブロックからの候補動きベクトルは空間MVP候補と呼ばれることがあるが、別の参照フレーム中のコロケートブロックからの候補動きベクトルは時間MVP候補と呼ばれることがある。
HEVC規格について、動きベクトル予測の2つの異なるモードが提案されている。一方のモードは「マージ」モードと呼ばれる。他方のモードは適応動きベクトル予測(AMVP)と呼ばれる。マージモードでは、エンコーダは、フレームのカレントブロックのための決定された候補動きベクトルから、動きベクトルと、(所与の参照ピクチャリストにおいて動きベクトルが指す参照フレームを識別する)参照インデックスと、(すなわち、参照フレームが時間的にカレントフレームに先行するかまたは後続するかに関して、参照ピクチャリスト(リスト0またはリスト1)を識別する)動き予測方向とをコピーするように、予測シンタックスのビットストリームシグナリングを通してデコーダに命令する。これは、決定された候補動きベクトルを有する候補ブロック(すなわち、特定の空間MVP候補または時間MVP候補)を識別するインデックスをビットストリーム中でシグナリングすることによって達成される。
したがって、マージモードでは、予測シンタックスは、モード(この場合は「マージ」モード)を識別するフラグと、決定された候補ブロックのロケーションを識別するインデックスとを含み得る。いくつかの事例では、候補ブロックは、カレントブロックに関する因果的ブロックになる。すなわち、候補ブロックは、すでにコーディングされていることになる。したがって、エンコーダまたはデコーダは、候補ブロックのための動きベクトルと参照インデックスと動き予測方向とをすでに受信および/または決定している。したがって、復号の場合、デコーダは、単に、メモリから、候補ブロックに関連する動きベクトルと参照インデックスと動き予測方向とを取り出し、カレントブロックについてこれらの値をコピーし得る。マージモードでブロックを復号するために、デコーダは、予測子ブロ
ックを取得し、予測子ブロックに残差データを加算してコード化ブロックを再構成する。
AMVPモードでは、エンコーダは、候補ブロックから動きベクトルのみをコピーするようにビットストリームシグナリングを通してデコーダに命令し、参照フレームと予測方向とを別々にシグナリングする。AMVPでは、コピーされるべき動きベクトルは、動きベクトル差分(MVD:motion vector difference)を送ることによってシグナリングされ得る。MVDは、カレントブロックのためのカレント動きベクトルと、候補ブロックのための候補動きベクトルとの間の差分である。この場合、エンコーダは、動き推定を使用して、コーディングされるべきブロックのための実際の動きベクトルを決定し、次いで、実際の動きベクトルと動きベクトル予測子との間の差分をMVD値として決定する。このようにして、デコーダは、マージモードの場合のように、カレント動きベクトルのために候補動きベクトルの厳密なコピーを使用する必要はないが、そうではなく、動き推定から決定された、現在の、実際の動きベクトルに値が「近接」し得る候補動きベクトルを使用し、カレント動きベクトルを再生するためにMVDを加算し得る。この場合も、デコーダは、対応する残差データを加算してコード化ブロックを再構成する。
たいていの状況では、MVDは、シグナリングするためにカレント動きベクトル全体よりも少ないビットを必要とする。したがって、AMVPは、動きベクトル全体を送ることに勝るコーディング効率を改善しながら、カレント動きベクトルをより正確にシグナリングすることを可能にする。対照的に、マージモードはMVDの指定に対応しておらず、したがって、マージモードは、シグナリング効率の増加(すなわち、ビットの低減)のために動きベクトルシグナリングの精度を犠牲にする。AVMPの予測シンタックスは、モード(この場合はAMVP)のフラグと、候補ブロックのインデックスと、カレント動きベクトルと候補ブロックからの予測動きベクトルとの間のMVDと、参照インデックスと、動き予測方向とを含み得る。
図4Aは、動きベクトル予測子候補がそこから適応動きベクトル予測モードについて決定される空間隣接ビデオブロックおよび時間隣接ビデオブロックを示す概念図である。図4Bは、動きベクトル予測子候補がそこからマージモードについて決定される空間隣接ビデオブロックおよび時間隣接ビデオブロックを示す概念図である。いずれのモードでも、ビデオエンコーダ20(たとえば、図2の予測モジュール41)およびビデオデコーダ30(たとえば、図3の予測モジュール81)の各々は、カレントPU(current PU)94または95のための動きベクトルをそこから決定するための同じ動きベクトル予測子候補リストを決定する。AMVPモードにおける動きベクトル予測子候補は、カレントPU94の空間隣接ブロックのための動きベクトルを含み得る。たとえば、隣接ブロックA、B、C、DおよびEが図4Aに示されている。マージモードモードにおける動きベクトル予測候補は、カレントPU95の空間隣接ブロックのための動きベクトルを含み得る。たとえば、隣接ブロックA’、B’、C’およびD’が図4Bに示されている。動きベクトル予測子候補はまた、カレントPU94のコロケートブロック96またはカレントPU95のコロケートブロック97の時間隣接ブロックのための動きベクトルを含み得る。たとえば、隣接ブロックT1、T2、T’1およびT’2が図4Aおよび図4Bに示されている。動きベクトル予測子候補ブロックの他の構成が各モードのために使用され得る。場合によっては、動きベクトル予測子候補は、隣接ブロックのうちの2つ以上の動きベクトルの組合せ、たとえば、2つ以上の動きベクトルの平均値、中央値、または重み付き平均値を含み得る。
AMVPモードの場合、動きベクトル予測子候補リストは、空間隣接ブロックまたは時間隣接ブロックのための動きベクトルを含むと決定され得る。次いで、ビデオエンコーダ20は、候補リストからカレントPU94の最も正確な動きベクトル予測子候補を決定する。一例では、ビデオエンコーダ20は、カレントPU94のための動きベクトル予測子として隣接ブロックのうちの1つの動きベクトルから生成された動きベクトル予測子候補を決定し得る。別の例では、ビデオエンコーダ20は、カレントPU94のための動きベクトル予測子として隣接ブロックのうちの2つ以上の動きベクトルから生成された動きベクトル予測子候補を決定し得る。この場合、動きベクトル予測子は、2つ以上の動きベクトルの平均値、中央値、または重み付き平均値として計算され得る。ビデオエンコーダ20は、次いで、動きベクトル予測子と、カレントPU94のための動きベクトルとの間の動きベクトル差分を決定する。ビデオエンコーダ20は、次いで、動きベクトル差分と、カレントPU94のための動きベクトル予測子インデックスとをビデオデコーダ30にシグナリングする。
ビデオデコーダ30は、ビデオブロックのための動きベクトル差分と動きベクトル予測子インデックスとを含む符号化ビデオブロックを表すビットストリームを受信する。ビデオブロックを復号するために、ビデオデコーダ30は、ビデオエンコーダ20と同じ方法で動きベクトル予測子候補リストを生成する。ビデオデコーダ30は、カレントPU94のためのシグナリングされた動きベクトル予測子インデックスを候補リストに適用することによって、カレントPU94のための動きベクトル予測子を決定する。ビデオデコーダ30は、次いで、カレントPU94のための動きベクトルを再構成するために、シグナリングされた動きベクトル差分を決定された動きベクトル予測子と組み合わせる。ビデオデコーダ30は、符号化ビデオブロックを再構成するために、カレントPU94のための動きベクトルを使用して、参照ピクチャ中の予測ブロックの位置を特定する。
マージモードの場合、動きベクトル予測子候補リストは、空間隣接ブロックまたは時間隣接ブロックの各々について、動きベクトルと、参照ピクチャインデックスと、予測方向とを含むすべての動き情報を含むように生成され得る。次いで、ビデオエンコーダ20は、候補リスト中の隣接ブロックからカレントPU95のための最も正確な動き情報を決定する。カレントPU95のための動きベクトル差分と参照ピクチャインデックスと予測方向とをビデオデコーダ30にシグナリングする代わりに、ビデオエンコーダ20は、隣接ブロックのための決定された動き情報をカレントPU95のための最終動き情報として直接使用する。このようにして、ビデオエンコーダ20は、ビデオデコーダ30にカレントPU95についてすべての動き情報がそこから導出されるべきである隣接ブロックを示すためのインデックスのみをシグナリングする。
ビデオデコーダ30は、ビデオブロックのためのインデックス値を含む符号化ビデオブロックを表すビットストリームを受信する。ビデオブロックを復号するために、ビデオデコーダ30は、ビデオエンコーダ20と同じ方法で動きベクトル予測子候補リストを決定する。ビデオデコーダ30は、隣接ブロックの動き情報を決定するために、シグナリングされたインデックスを候補リストに適用することによって、カレントPU95のための動きベクトルと参照ピクチャインデックスと予測方向とを含むすべての動き情報を決定する。ビデオデコーダ30は、符号化ビデオブロックを再構成するために、カレントPU95のための動きベクトルを使用して、予測ブロックの位置を特定する。
図5は、参照ピクチャ100と、カレントPUまたはビデオブロック94の動きベクトル予測子候補による参照ピクチャ境界102の外側に位置する予測ブロック106および108とを示す概念図である。現在、マージモードまたはAMVPモードでは、カレントPU94に対して参照ピクチャ境界102の外側に位置する予測ブロック、たとえば、106または108を識別する動きベクトル予測子候補が、パディング領域104内に予測ブロックを再配置するためにクリッピングされる。参照ピクチャ境界102は最小CUサイズの倍数として決定される。たとえば、最小CUサイズが8×8であり、コーディングされるべき領域が33×33である場合、ピクチャは、33×33のクロッピング領域をもつ40×40の領域としてコーディングされる。クロッピング領域は、一般にデコーダについて定義されない。デコーダは、最小CUサイズのある倍数である領域を復号し得る。動き補償について生じるパディングは、事実上無限に40×40の領域の境界においてピクセルを繰り返すことによって、40×40の領域の境界から開始する。本開示の技法は、動きベクトル予測子候補のクリッピングをなくす。
一例として、カレントPU94の隣接ブロック、たとえば、図4AからのブロックEが、関連する参照ピクチャ100の右下端に位置する予測ブロック(図5に図示せず)を指す動きベクトルを有し得る。動きベクトル予測子候補は、カレントPU94に適用されるとき、隣接ブロックの場合と同じ次元および方向を有するが、開始点がカレントPU94の左上隅に平行移動される。図4Aに示したように、カレントPU94は、隣接ブロックEよりもさらに右側に位置する。したがって、カレントPU94に対する動きベクトル予測子候補は、参照ピクチャ境界102の外側に位置する予測ブロック108を指し得る。言い換えれば、カレントPU94に対する動きベクトル予測子候補の「開始」は、動きベクトル予測子候補の「終了」が参照ピクチャ境界102の外側の領域を指し得るようにシフトする。
従来、カレントビデオブロック94について決定される動きベクトルは、予測ブロック全体が参照ピクチャ境界102内に含まれるように値にクリッピングされる。クリッピングプロセスは、予測ブロックのピクセル値に基づいてカレントビデオブロックのための残差データを決定するために、動き補償より前に動きベクトル値を効果的にクリッピングするために使用される。予測ブロックのピクセル値を決定するために、予測ブロックは、好ましくは、参照ピクチャ100内にまたは少なくともパディング領域104内に位置する。
概して、参照ピクチャ境界102の外側のエリアは、好ましくは値のいくつかのセットによって表される。参照ピクチャ境界102の外側のエリアは真空でない(すなわち、ゼロ値でない)。代わりに、参照ピクチャ境界の外側のエリアは、多くの状況では、隣接参照ピクチャのためのピクセル値に対応する。隣接参照ピクチャは、それがまだ符号化/復号されていないので利用可能でないことがあるか、または参照ピクチャのための値はメモリに記憶されないことがある。したがって、ビデオデコーダ30は、参照ピクチャ100のエッジからピクセル値を複製することによってパディング領域104を生成し得る。ピクチャのエッジにおける値は、反復的パディングのために使用される。パディング領域サイズは、理論上、無限である。実際には、ビデオコーダは、最大予測ユニットサイズだけパディングするように構成されるであろう。追加のパディングが補間フィルタのために使用され得る。図5に示すように、パディング領域104は、最大サイズブロック、たとえば、ツリーブロックまたはLCUの幅に等しい幅を有し得る。しかしながら、ビデオデコーダ30は、任意のサイズであるべき複製されたピクセル値を使用して、パディング領域を生成し得る。
現在のHMでは、マージモードおよびAMVPモードの場合、クリッピングプロセスはまた、動きベクトル予測の使用より前に、カレントPU94および/または95の動きベクトル予測子候補を効果的にクリッピングするために使用される。決定された動きベクトル予測子候補は、カレントPU94に対して位置する予測ブロック全体、たとえば、106または108が参照ピクチャ境界102内に含まれることを保証するためにクリッピングされる。予測ブロックが参照ピクチャ境界102内にあることを保証するためのクリッピングプロセスは、空間動きベクトル予測子候補と時間動きベクトル予測子候補の両方について行われる。
クリッピング動作は、以下のアルゴリズムとして実装される。
Figure 0005823623
このアルゴリズムにおける変数は、次のように定義される。
m_pcSlice−>getSPS()−>getWidth():ピクセル単位のピ
クチャの幅
m_pcSlice−>getSPS()−>getHeight():ピクセル単位の
ピクチャの高さ
g_uiMaxCUWidth:ピクセル単位の最大CUの幅
g_uiMaxCUHeight:ピクセル単位の最大CUの高さ
m_uiCUPelX:ピクセル単位のLCU内のCUの水平アドレス
m_uiCUPelY:ピクセル単位のLCU内のCUの垂直アドレス
rcMv.getHor():1/4ピクセル単位の水平動きベクトル
rcMv.getVer():1/4ピクセル単位の垂直動きベクトル
動きベクトル予測子候補は、少なくともパディング領域104内にあるべき識別された予測ブロック106および108をシフトするためにクリッピングされ得る。図5に示すように、動きベクトル予測子候補は、参照ピクチャ100の周りの少なくとも完全にパディング領域104内にあるべきであるが、必ずしも参照ピクチャ境界102内にあるとは限らない、予測ブロック106および108を再配置するためにクリッピングされ得る。動きベクトル予測子候補が、参照ピクチャ境界102内に、または参照ピクチャ境界102の外側に予測ブロックを配置するが、依然として完全にパディング領域104内に予測ブロックを配置するとき、動きベクトル予測子候補はクリッピングされないままである。
HEVCの1つの提案では、動きベクトル予測子候補が参照ピクチャ境界102の外側に位置する予測ブロック(たとえば、予測ブロック106および108)を指すとき、ビデオデコーダ30および/またはビデオエンコーダ20は、パディング領域104内に予測ブロック106および108を再配置するために動きベクトル予測子候補をクリッピングする。たとえば、ビデオデコーダ30は、予測ブロック108の全体がパディング領域104内にあることを保証するために、予測ブロック108の左上隅がロケーション109に移動するように動きベクトル予測子候補をクリッピングし得る。同様に、ビデオデコーダ30は、予測ブロック106の全体がパディング領域104内にあることを保証するために、予測ブロック106の左上隅がロケーション107に移動するように動きベクトル予測子候補をクリッピングし得る。
クリッピングされた動きベクトル予測子候補がカレントビデオブロックを符号化するために決定されたとき、クリッピングされない動きベクトル予測子候補の場合と異なる動きベクトル情報がビデオデコーダ30にシグナリングされる必要があり得る。たとえば、AMVPモードの場合、カレントPU94に対する動きベクトル予測子候補が座標(−5,3)をもつ予測ブロック106を指すが、パディング領域104が−2のx座標のみにわたる場合、動きベクトル予測子候補は、座標(−2,3)、たとえば、ロケーション107を指すようにパディング領域104のサイズに基づいてクリッピングされる。次いで、ビデオエンコーダ20が、座標(−5,3)を指す動きベクトルをも有する、カレントPU94のための動きベクトル予測子として、クリッピングされた動きベクトル予測子候補を決定した場合、ビデオエンコーダ20は、カレントPU94の動きベクトルと、クリッピングされた動きベクトル予測子との間の−3の動きベクトル差分をシグナリングしなければならない。動きベクトル予測子候補がクリッピングされないままである場合、ビデオエンコーダ20は、デルタゼロとして動きベクトル差分をシグナリングすることができる。
本開示の技法によれば、動きベクトル予測子候補クリッピングプロセスは動きベクトル予測子候補リスト生成プロセスから削除される。詳細には、カレントPU94に対する動きベクトル予測子候補が、参照ピクチャ境界102の外側の予測ブロック、たとえば、106または108を指すとき、ビデオエンコーダ20および/またはビデオデコーダ30は、動きベクトル予測子候補をクリッピングしないか、あるいは切り捨てない。代わりに、動きベクトル予測子候補のクリッピングされないバージョンは、動きベクトル予測子候補リスト中に含まれる。本技法は、カレントPU94の動きベクトル予測子候補を決定しながら、上記に記載したクリッピングアルゴリズムを呼び出さないことによって、候補リスト決定プロセスからクリッピングプロセスを削除し得る。
動きベクトル予測子候補がカレントPU94に対して参照ピクチャ境界102の外側に位置する参照ピクチャを指す場合でも、ビデオエンコーダ20および/またはビデオデコーダ30は、AMVPモードまたはマージモードにおいてカレントPU94または95の動きベクトル予測子候補をクリッピングしない。したがって、AMVPモード候補リスト(たとえば、図4AのカレントPU94のために示される候補)およびマージモード候補リスト(たとえば、図4BのカレントPU95のために示される候補)は、マージモード候補リスト決定プロセスとAMVPモード候補リスト決定プロセスとによって決定された動きベクトル予測子候補のクリッピングされないバージョンから形成され得る。たとえば、動きベクトル予測子候補リストを決定したとき、ビデオエンコーダ20および/またはビデオデコーダ30は、カレントPU94に対する動きベクトル予測子候補によって識別された予測ブロック、たとえば、予測ブロック106または108のロケーションにかかわらず、動きベクトル予測子候補のクリッピングされないバージョンを含む。
本開示の技法によれば、動きベクトル予測子候補のいずれも動きベクトル予測候補生成プロセス中にクリッピングされない。このようにして、ビデオエンコーダ20およびビデオデコーダ30は、特定の動きベクトル予測子候補がクリッピングされる必要があるかどうかを決定するために、候補リスト中に含まれる動きベクトル予測子候補の各々の検査を実行する必要がない。HEVCの1つの提案では、ビデオエンコーダ20およびビデオデコーダ30は、符号化されるべき各ビデオブロックについて、動きベクトル予測子候補のすべて、たとえば、5〜10個の候補を検査する必要があり得る。したがって、クリッピングされる必要があり得る5〜10個もの候補動きベクトルが存在し得る。動きベクトル予測候補生成プロセスからクリッピングプロセスを削除することによって、本開示の技法は、したがって、ビデオエンコーダ20とビデオデコーダ30の両方において複雑さを低減する。
さらに、本技法によれば、カレントPU94または95は、決定されたクリッピングされない動きベクトル予測子候補に基づいてコーディングされ得る。たとえば、AMVPモードの場合、ビデオエンコーダ20は、候補リストからカレントPU94の最も正確なクリッピングされない動きベクトル予測子候補を決定する。ビデオエンコーダ20は、次いで、動きベクトル差分と、カレントPU94のための動きベクトル予測子インデックスとをビデオデコーダ30にシグナリングする。ビデオデコーダ30は、ビデオブロックのための動きベクトル差分と動きベクトル予測子インデックスとを含む符号化ビデオブロックを表すビットストリームを受信する。ビデオデコーダ30は、カレントPU94のためのシグナリングされた動きベクトル予測子インデックスを候補リストに適用することによって、カレントPU94のクリッピングされない動きベクトル予測子候補を決定する。ビデオデコーダ30は、次いで、カレントPU94のための動きベクトルを再構成するために、シグナリングされた動きベクトル差分を決定されたクリッピングされない動きベクトル予測子候補と組み合わせる。ビデオデコーダ30は、符号化ビデオブロックを再構成するために、カレントPU94のための動きベクトルを使用して、参照ピクチャ中の予測ブロックの位置を特定する。
別の例として、マージモードの場合、ビデオエンコーダ20は、候補リスト中の隣接ブロックから、カレントPU95のための、クリッピングされない動きベクトル予測子候補を含む最も正確な動き情報を決定する。ビデオエンコーダ20は、ビデオデコーダ30にカレントPU95についてすべての動き情報がそこから導出されるべきである隣接ブロックを示すためのインデックスをシグナリングする。ビデオデコーダ30は、ビデオブロックのためのインデックス値を含む符号化ビデオブロックを表すビットストリームを受信する。ビデオデコーダ30は、シグナリングされたインデックスを候補リストに適用することによって、カレントPU95のための、クリッピングされない動きベクトル予測子候補を含むすべての動き情報を決定する。ビデオデコーダ30は、次いで、カレントPU95のための動きベクトルを決定されたクリッピングされない動きベクトル予測子候補と等価であると決定する。ビデオデコーダ30は、符号化ビデオブロックを再構成するために、カレントPU95のための動きベクトルを使用して、予測ブロックの位置を特定する。
場合によっては、決定されたクリッピングされない動きベクトル予測子候補に基づいてカレントPU94または95について決定された動きベクトルは、参照ピクチャ境界の外側にあり得る。その場合、このクリッピングされない動きベクトルは動き補償中にクリッピングされ得る。したがって、本開示の技法は、動きベクトル予測候補決定プロセス中の動きベクトル候補の不要なクリッピングを防ぎ、代わりに、それらが動き補償のために実際に使用される場合、参照ピクチャ境界の外側の動きベクトルのみをクリッピングする。
たとえば、マージモードまたはAMVPモードの動きベクトル予測子候補が、クリッピングすることなしに使用されるとき、カレントPU94または95のための動きベクトルは、参照ピクチャ境界102の外側にある予測ブロックを指し得る動きベクトル予測子候補から決定される。しかしながら、この問題は、パディングプロセスおよび/またはクリッピングプロセスによって動き補償中に処理される。より詳細には、決定された動きベクトルが参照ピクチャ境界102の外側に位置する予測ブロックを指すとき、ビデオエンコーダ20またはビデオデコーダ30は、予測ブロックを含むようにパディング領域104を拡張し得るか、またはパディング領域104内に予測ブロックを再配置するために、決定された動きベクトルをクリッピングし得る。いずれの場合も、符号化ビデオブロックを再構成するために使用される識別された予測ブロックは、パディング領域値、すなわち、参照ピクチャ100のエッジから複製されたピクセル値を含む。
マージモードおよびAMVPモードのクリッピングされない動きベクトル予測子候補の使用は、ビデオエンコーダ20およびビデオデコーダ30において複雑さを低減するが、動き補償プロセスを変更しない。本開示の技法によれば、クリッピングプロセスは、動きベクトル予測子候補がクリッピングされないままであるように、動きベクトル予測子候補リスト決定プロセスから削除される。しかしながら、動き補償中にピクセル値を予測するために使用される予測ブロックが参照ピクチャ境界102の外側にある場合、決定されたクリッピングされない動きベクトル予測子候補から決定されたカレントPU94または95のための動きベクトルは、依然として動き補償中にクリッピングされ得る。このようにして、ビデオエンコーダ20またはビデオデコーダ30は、依然として、候補リスト中に含まれるすべての動きベクトル予測子候補をクリッピングする必要なしに、参照ピクチャ境界102内にまたはパディング領域104内にあるように予測ブロックを再配置する。
たとえば、AMVPモードの場合、ビデオデコーダ30は、カレントPU94のためのシグナリングされた動きベクトル予測子インデックスを候補リストに適用することによって、カレントPU94のクリッピングされない動きベクトル予測子候補を決定する。決定されたクリッピングされない動きベクトル予測子候補は、カレントPU94に対して参照ピクチャ境界102の外側に位置する予測ブロックを示し得る。場合によっては、シグナリングされた動きベクトル差分は、カレントPU94のための動きベクトルを決定するために、決定されたクリッピングされない動きベクトル予測子候補と組み合わされたとき、参照ピクチャ境界102内に予測ブロックをもたらす。他の場合には、カレントPU94のための決定された動きベクトルは、依然として、追加のパディングまたはクリッピングを必要とする、参照ピクチャ境界102の外側に位置する予測ブロックを示す。
別の例として、マージモードの場合、ビデオデコーダ30は、シグナリングされたインデックスを候補リストに適用することによって、カレントPU96のための、クリッピングされない動きベクトル予測子候補を含むすべての動き情報を決定する。決定されたクリッピングされない動きベクトル予測子候補は、カレントPU96に対して参照ピクチャ境界102の外側に位置する予測ブロックを示し得る。マージモードでは、ビデオデコーダ30は、カレントPU96のための動きベクトルを決定されたクリッピングされない動きベクトル予測子候補と等価であると決定する。したがって、カレントPU96のための決定された動きベクトルは、依然として、追加のパディングまたはクリッピングを必要とする、参照ピクチャ境界102の外側に位置する予測ブロックを示す。
図6は、本開示の技法を使用してビデオを符号化するための方法の例示的なフローチャートである。ビデオエンコーダ20は、最初に、たとえば、上記で説明した動き推定プロセスを使用して、ビデオブロックの現在予測ユニットのための動きベクトルを計算する(120)。次に、ビデオエンコーダ20は、動きベクトルをクリッピングすることなしに動きベクトル予測子候補リストを決定する(122)。上記で説明したように、異なる動きベクトル予測子候補リストは、使用されている動きベクトル予測プロセスのタイプ(たとえば、AMVPまたはマージモード)に応じて生成され得る。たとえば、PU94について図4Aに示した隣接ブロックからの動きベクトルは、AMVPモードではPU94のための動きベクトル予測子候補リスト中に含まれ得るが、PU95について図4Bに示した隣接ブロックからの動きベクトルは、マージモードではPU95のための動きベクトル予測子候補リスト中に含まれ得る。
計算された動きベクトルに基づいて、ビデオエンコーダ20は、次いで、動きベクトル候補リストから、クリッピングされない動きベクトルを決定する(124)。決定された候補動きベクトルは、それが、カレントコード化PU(current coded PU)に対してピクチャ境界の内側または外側にある参照ブロックを指すかどうかにかかわらず、クリッピングされないままである。次に、ビデオエンコーダ20は、決定されたクリッピングされない動きベクトル候補を識別するためのインデックスを符号化する(126)。マージモードでは、動きベクトル以外の動き情報(たとえば、参照フレームインデックス、予測方向)も決定された候補動きベクトルからコピーされるので、決定されたクリッピングされない動きベクトル候補のインデックスのみが符号化される。AMVPモードでは、動きベクトル差分(すなわち、計算された動きベクトルと、決定されたクリッピングされない動きベクトルとの間の差分)と、参照フレームインデックスと、予測方向とを含む追加の動き情報も符号化され得る。ビデオエンコーダ20は、動き補償プロセス中に動き補償のために実際に使用される任意の決定された動きベクトルをクリッピングし得る。
図7は、本開示の技法を使用してビデオを復号するための方法の例示的なフローチャートである。最初に、ビデオデコーダ30は、動き情報を示すシンタックス要素を受信する(140)。復号されている特定のビデオブロックがマージモードの下で動作している場合、動き情報を示すシンタックス要素は、動きベクトル候補リストから特定の動きベクトル候補を識別するインデックスを含み得る。この場合も、使用されている特定の動きベクトル候補リストは、使用されている動きベクトル予測モード(たとえば、AMVPまたはマージモード)に依存し得る。復号されている特定のビデオブロックがAMVPモードの下で動作している場合、動き情報を示すシンタックス要素は、動きベクトル候補リストと、動きベクトル差分と、参照フレームインデックスと、予測方向とから特定の動きベクトル候補を識別するインデックスを含み得る。
次に、ビデオデコーダ30は、動きベクトルをクリッピングすることなしに動きベクトル予測子候補リストを決定する(142)。この場合も、ビデオデコーダ20の場合と同様に、使用される特定の候補リストは、使用されている動きベクトル予測プロセスに依存し得る。動きベクトル候補リスト中の動きベクトルは、それらが、復号されているカレントビデオブロックに対して参照ピクチャ境界の内側または外側にある参照ブロックを指すかどうかにかかわらず、クリッピングされない。受信されたシンタックス要素に基づいて、ビデオデコーダ30は、動きベクトル候補リストから、クリッピングされない動きベクトルを決定する(144)。決定される特定の動きベクトルが、復号されているカレントビデオブロックに対して参照ピクチャ境界の外側にある参照ピクチャを偶然指す場合、ビデオデコーダ30は、動き補償プロセス中に使用するための決定された動きベクトルをクリッピングする(146)。この場合、理論的には、パディングは無限であり、十分にパディングする場合、クリッピングが必要でないことがあるので、動きベクトルのクリッピングは非規範的プロセスである。ここで説明したクリッピングプロセスは、動き補償プロセスのみに影響を及ぼすべきである。すなわち、クリッピングされた動きベクトルは、動き補償のためにのみ使用され、将来の動きベクトル導出などのために使用されるべきではない。このようにして、実際に使用される、参照ピクチャ境界の外側の参照ピクチャを指す動きベクトルのみが、代わりにクリッピングされるか、または参照ピクチャ境界の外側にあるすべての動きベクトル予測候補をクリッピングしている。
ビデオデコーダ30は、次いで、動き補償プロセスを使用して、(決定された動きベクトルが参照ピクチャ境界の外側にある場合)クリッピングされた動きベクトルまたは(決定された動きベクトルが参照ピクチャ境界の外側にない場合)クリッピングされない動きベクトルを使用してカレントビデオブロックを復号する(148)。マージモードでは、動き補償のために使用される動きベクトル、参照フレーム、および予測方向は、受信された動き情報シンタックス要素から決定された動きベクトル候補から直接コピーされる。AMVPでは、参照フレームおよび予測方向は、受信された動き情報シンタックス要素中で明示的に示される。動き補償のために使用される動きベクトルは、受信された動きベクト
ル差分を決定された動きベクトルに加算することによって計算される。
1つまたは複数の例では、説明した機能は、ハードウェア、ソフトウェア、ファームウェア、またはそれらの任意の組合せで実装され得る。ソフトウェアで実装される場合、機能は、1つまたは複数の命令またはコードとしてコンピュータ可読媒体上に記憶されるか、あるいはコンピュータ可読媒体を介して送信され、ハードウェアベースの処理ユニットによって実行され得る。コンピュータ可読媒体は、たとえば、通信プロトコルに従って、ある場所から別の場所へのコンピュータプログラムの転送を可能にする任意の媒体を含むデータ記憶媒体または通信媒体などの有形媒体に対応するコンピュータ可読記憶媒体を含み得る。このようにして、コンピュータ可読媒体は、概して、(1)非一時的である有形コンピュータ可読記憶媒体、あるいは(2)信号または搬送波などの通信媒体に対応し得る。データ記憶媒体は、本開示で説明した技法の実装のための命令、コードおよび/またはデータ構造を取り出すために1つまたは複数のコンピュータあるいは1つまたは複数のプロセッサによってアクセスされ得る任意の利用可能な媒体であり得る。コンピュータプログラム製品はコンピュータ可読媒体を含み得る。
限定ではなく例として、そのようなコンピュータ可読記憶媒体は、RAM、ROM、EEPROM、CD−ROMまたは他の光ディスクストレージ、磁気ディスクストレージ、または他の磁気ストレージデバイス、フラッシュメモリ、あるいは命令またはデータ構造の形態の所望のプログラムコードを記憶するために使用され得、コンピュータによってアクセスされ得る、任意の他の媒体を備えることができる。また、いかなる接続もコンピュータ可読媒体と適切に呼ばれる。たとえば、命令が、同軸ケーブル、光ファイバーケーブル、ツイストペア、デジタル加入者回線(DSL)、または赤外線、無線、およびマイクロ波などのワイヤレス技術を使用して、ウェブサイト、サーバ、または他のリモートソースから送信される場合、同軸ケーブル、光ファイバーケーブル、ツイストペア、DSL、または赤外線、無線、およびマイクロ波などのワイヤレス技術は、媒体の定義に含まれる。ただし、コンピュータ可読記憶媒体およびデータ記憶媒体は、接続、搬送波、信号、または他の一時媒体を含まないが、代わりに非一時的有形記憶媒体を対象とすることを理解されたい。本明細書で使用するディスク(disk)およびディスク(disc)は、コンパクトディスク(disc)(CD)、レーザディスク(登録商標)(disc)、光ディスク(disc)、デジタル多用途ディスク(disc)(DVD)、フロッピー(登録商標)ディスク(disk)およびブルーレイディスク(disc)を含み、ディスク(disk)は、通常、データを磁気的に再生し、ディスク(disc)は、データをレーザで光学的に再生する。上記の組合せもコンピュータ可読媒体の範囲内に含めるべきである。
命令は、1つまたは複数のデジタル信号プロセッサ(DSP)などの1つまたは複数のプロセッサ、汎用マイクロプロセッサ、特定用途向け集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGA)、あるいは他の等価な集積回路またはディスクリート論理回路によって実行され得る。したがって、本明細書で使用する「プロセッサ」という用語は、前述の構造、または本明細書で説明した技法の実装に好適な他の構造のいずれかを指し得る。さらに、いくつかの態様では、本明細書で説明した機能は、符号化および復号のために構成された専用のハードウェアおよび/またはソフトウェアモジュール内に与えられ得、あるいは複合コーデックに組み込まれ得る。また、本技法は、1つまたは複数の回路または論理要素中に十分に実装され得る。
本開示の技法は、ワイヤレスハンドセット、集積回路(IC)またはICのセット(たとえば、チップセット)を含む、多種多様なデバイスまたは装置において実装され得る。本開示では、開示する技法を実行するように構成されたデバイスの機能的態様を強調するために様々な構成要素、モジュール、またはユニットについて説明したが、それらの構成要素、モジュール、またはユニットを、必ずしも異なるハードウェアユニットによって実現する必要があるとは限らない。むしろ、上記で説明したように、様々なユニットが、好適なソフトウェアおよび/またはファームウェアとともに、上記で説明した1つまたは複数のプロセッサを含めて、コーデックハードウェアユニットにおいて組み合わせられるか、または相互動作ハードウェアユニットの集合によって与えられ得る。
様々な例について説明した。これらおよび他の例は以下の特許請求の範囲内に入る。
以下に本願発明の当初の特許請求の範囲に記載された発明を付記する。
[C1]
動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから前記動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記動きベクトル予測子候補のクリッピングされないバージョンが前記候補リスト中に含まれる、ことと、
前記候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックをコーディングすることと
を備える、ビデオデータをコーディングするための方法。
[C2]
前記カレントビデオブロックをコーディングすることが、前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化することを備える、C1に記載の方法。
[C3]
前記カレントビデオブロックをコーディングすることが、前記ビデオブロックを復号することを備え、前記方法が、
前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックのための動きベクトルを決定することと、
前記決定された動きベクトルが、前記カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記参照ピクチャの周りのパディング領域内に前記予測ブロックを再配置するために前記決定された動きベクトルをクリッピングすることと、
前記再配置された予測ブロックに対して前記カレントビデオブロックを復号する、ここにおいて、前記再配置された予測ブロックがパディング領域値を含む、ことと
をさらに備える、C1に記載の方法。
[C4]
前記再配置された予測ブロックの前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、C3に記載の方法。
[C5]
前記ビデオブロックをコーディングすることが、動きベクトル予測の適応動きベクトル予測(AMVP)モードに従って前記ビデオブロックを復号することを備え、前記方法が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するための動きベクトル予測子インデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを決定するために、前記決定されたクリッピングされない動きベクトル予測子と前記カレントビデオブロックのための前記動きベクトルとの間の動きベクトル差分を復号することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
をさらに備える、C1に記載の方法。
[C6]
前記ビデオブロックをコーディングすることが、動きベクトル予測のマージモードに従って前記ビデオブロックを復号することを備え、前記方法が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を含む動き情報を識別するためのインデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを前記決定されたクリッピングされない動きベクトル予測子候補と等価であると決定することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
をさらに備える、C1に記載の方法。
[C7]
隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、C1に記載の方法。
[C8]
前記カレントビデオブロックをコーディングすることが、前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを符号化することと、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化することとを備える、C1に記載の方法。
[C9]
前記カレントビデオブロックをコーディングすることが、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを復号することと、前記候補リストの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを復号することとを備える、C1に記載の方法。
[C10]
動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから前記動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記動きベクトル予測子候補のクリッピングされないバージョンが前記候補リスト中に含まれる、ための手段と、
前記候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックをコーディングするための手段と
を備える、ビデオデータをコーディングするように構成された装置。
[C11]
前記カレントビデオブロックをコーディングするための前記手段が、前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化するための手段を備える、C10に記載の装置。
[C12]
前記カレントビデオブロックをコーディングするための前記手段が、前記ビデオブロックを復号するための手段を備え、前記装置が、
前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックのための動きベクトルを決定するための手段と、
前記決定された動きベクトルが、前記カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記参照ピクチャの周りのパディング領域内に前記予測ブロックを再配置するために前記決定された動きベクトルをクリッピングするための手段と、
前記再配置された予測ブロックに対して前記カレントビデオブロックを復号するための手段であって、前記再配置された予測ブロックがパディング領域値を含む、復号するための手段と
をさらに備える、C10に記載の装置。
[C13]
前記再配置された予測ブロックの前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、C12に記載の装置。
[C14]
前記ビデオブロックをコーディングするための前記手段が、動きベクトル予測の適応動きベクトル予測(AMVP)モードに従って前記ビデオブロックを復号するための手段を備え、前記装置が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するための動きベクトル予測子インデックスを復号するための手段と、
前記カレントビデオブロックのための動きベクトルを決定するために、前記決定されたクリッピングされない動きベクトル予測子と前記カレントビデオブロックのための前記動きベクトルとの間の動きベクトル差分を復号するための手段と、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号するための手段と
をさらに備える、C10に記載の装置。
[C15]
前記ビデオブロックをコーディングするための前記手段が、動きベクトル予測のマージモードに従って前記ビデオブロックを復号するための手段を備え、前記装置が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を含む動き情報を識別するためのインデックスを復号するための手段と、
前記カレントビデオブロックのための動きベクトルを前記決定されたクリッピングされない動きベクトル予測子候補と等価であると決定するための手段と、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号するための手段と
をさらに備える、C10に記載の装置。
[C16]
隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、C10に記載の装置。
[C17]
前記カレントビデオブロックをコーディングするための前記手段が、前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを符号化するための手段と、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化するための手段とを備える、C10に記載の装置。
[C18]
前記カレントビデオブロックをコーディングするための手段が、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを復号するための手段と、前記候補リストの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを復号するための手段とを備える、C10に記載の装置。
[C19]
動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから前記動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記動きベクトル予測子候補のクリッピングされないバージョンが前記候補リスト中に含まれる、ことと、
前記候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックをコーディングすることと
を行うように構成されたビデオコーダ
を備える、ビデオデータをコーディングするように構成された装置。
[C20]
前記ビデオコーダがビデオエンコーダであり、前記ビデオエンコーダが、前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化するように構成された、C19に記載の装置。
[C21]
前記ビデオコーダがビデオデコーダであり、前記ビデオデコーダが、
前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックのための動きベクトルを決定することと、
前記決定された動きベクトルが、前記カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記参照ピクチャの周りのパディング領域内に前記予測ブロックを再配置するために前記決定された動きベクトルをクリッピングすることと、
前記再配置された予測ブロックに対して前記カレントビデオブロックを復号する、ここにおいて、前記再配置された予測ブロックがパディング領域値を含む、ことと
を行うように構成された、C19に記載の装置。
[C22]
前記再配置された予測ブロックの前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、C21に記載の装置。
[C23]
前記ビデオコーダがビデオデコーダであり、前記ビデオデコーダが、動きベクトル予測の適応動きベクトル予測(AMVP)モードに従って前記ビデオブロックを復号するように構成され、前記ビデオデコーダが、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するための動きベクトル予測子インデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを決定するために、前記決定されたクリッピングされない動きベクトル予測子と前記カレントビデオブロックのための前記動きベクトルとの間の動きベクトル差分を復号することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
を行うようにさらに構成された、C19に記載の装置。
[C24]
前記ビデオコーダがビデオデコーダであり、前記ビデオデコーダが、動きベクトル予測のマージモードに従って前記ビデオブロックを復号するように構成され、前記ビデオデコーダが、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を含む動き情報を識別するためのインデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを前記決定されたクリッピングされない動きベクトル予測子候補と等価であると決定することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
を行うようにさらに構成された、C19に記載の装置。
[C25]
隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、C19に記載の装置。
[C26]
前記ビデオコーダがビデオエンコーダであり、前記ビデオエンコーダが、前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを符号化することと、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化することとを行うように構成された、C19に記載の装置。
[C27]
前記ビデオコーダがビデオデコーダであり、前記ビデオデコーダが、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを復号することと、前記候補リストの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを復号することとを行うように構成された、C19に記載の装置。
[C28]
動きベクトル予測子候補をクリッピングすることなしに、隣接ビデオブロックから前記動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定する、ここにおいて、動きベクトル予測子候補が、カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記動きベクトル予測子候補のクリッピングされないバージョンが前記候補リスト中に含まれる、ことと、
前記候補リストの決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックをコーディングすることと
を、ビデオデータをコーディングするように構成されたプロセッサに行わせるための命令を記憶するコンピュータ可読媒体。
[C29]
前記カレントビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化することをプロセッサに行わせるための命令を備える、C28に記載のコンピュータ可読媒体。
[C30]
前記カレントビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、前記ビデオブロックを復号することをプロセッサに行わせるための命令を備え、前記コンピュータ可読媒体が、
前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックのための動きベクトルを決定することと、
前記決定された動きベクトルが、前記カレントビデオブロックに対して参照ピクチャ境界の外側に位置する予測ブロックを識別した場合、前記参照ピクチャの周りのパディング領域内に前記予測ブロックを再配置するために前記決定された動きベクトルをクリッピングすることと、
前記再配置された予測ブロックに対して前記カレントビデオブロックを復号することであって、前記再配置された予測ブロックがパディング領域値を含む、復号することと
をプロセッサに行わせるための命令をさらに備える、C28に記載のコンピュータ可読媒体。
[C31]
前記再配置された予測ブロックの前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、C30に記載のコンピュータ可読媒体。
[C32]
前記ビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、動きベクトル予測の適応動きベクトル予測(AMVP)モードに従って前記ビデオブロックを復号することをプロセッサに行わせるための命令を備え、前記コンピュータ可読媒体が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するための動きベクトル予測子インデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを決定するために、前記決定されたクリッピングされない動きベクトル予測子と前記カレントビデオブロックのための前記動きベクトルとの間の動きベクトル差分を復号することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
をプロセッサに行わせるための命令をさらに備える、C28に記載のコンピュータ可読媒体。
[C33]
前記ビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、動きベクトル予測のマージモードに従って前記ビデオブロックを復号することをプロセッサに行わせるための命令を備え、前記コンピュータ可読媒体が、
前記候補リスト中の前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を含む動き情報を識別するためのインデックスを復号することと、
前記カレントビデオブロックのための動きベクトルを前記決定されたクリッピングされない動きベクトル予測子候補と等価であると決定することと、
前記決定された動きベクトルを使用して前記カレントビデオブロックを復号することと
をプロセッサに行わせるための命令をさらに備える、C28に記載のコンピュータ可読媒体。
[C34]
隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、C28に記載のコンピュータ可読媒体。
[C35]
前記カレントビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを符号化することと、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを符号化することとをプロセッサに行わせるための命令を備える、C28に記載のコンピュータ可読媒体。
[C36]
前記カレントビデオブロックをコーディングすることをプロセッサに行わせるための前記命令が、前記カレントビデオブロックの前記決定されたクリッピングされない動きベクトル予測子候補を識別するためのインデックスを復号することと、前記候補リストの前記決定されたクリッピングされない動きベクトル予測子候補に基づいて前記カレントビデオブロックを復号することとをプロセッサに行わせるための命令を備える、C28に記載のコンピュータ可読媒体。

Claims (16)

  1. ビデオデータを復号するための方法であって、前記方法は
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    ビットストリームから、前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを復号することと、
    前記ビットストリームから、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を復号することと、
    前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づいて前記カレントビデオブロックに関する前記動きベクトルを決定することと、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすることと
    前記再配置された予測ブロックに関する前記カレントビデオブロックを復号すること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を備える前記方法。
  2. ビデオデータを符号化するための方法であって、前記方法は、
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを符号化すること
    ビットストリーム中に、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を含むこと、ここにおいて、前記カレントビデオブロックに関する前記動きベクトルは、前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づく、と、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を備える前記方法。
  3. 前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、請求項1または2に記載の方法。
  4. 前記隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、請求項1に記載の方法。
  5. ビデオデータを復号するように構成された装置であって、前記装置は、
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定するための手段、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    ビットストリームから、前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを復号するための手段と、
    前記ビットストリームから、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を復号するための手段と、
    前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づいて前記カレントビデオブロックに関する前記動きベクトルを決定するための手段と、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングするための手段と、
    前記再配置された予測ブロックに関する前記カレントビデオブロックを復号するための手段、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を備える前記装置。
  6. ビデオデータを符号化するように構成された装置であって、前記装置は、
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定するための手段、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを符号化するための手段
    ビットストリーム中に、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を含むための手段、ここにおいて、前記カレントビデオブロックに関する前記動きベクトルは、前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づく、と、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングするための手段、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を備える前記装置。
  7. 前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、請求項5または6に記載の装置。
  8. 前記隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、請求項5または6に記載の装置。
  9. ビデオデータを復号するように構成された装置であって、前記装置は
    前記ビデオデータを記憶するように構成されたデータ記憶媒体と、
    ビデオコーダであって、
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    ビットストリームから、前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを復号することと、
    前記ビットストリームから、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を復号することと、
    前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づいて前記カレントビデオブロックに関する前記動きベクトルを決定することと、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすることと
    前記再配置された予測ブロックに関する前記カレントビデオブロックを復号すること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を行うように構成されたビデオコーダ、と、
    を備える前記装置。
  10. ビデオデータを符号化するように構成された装置であって、前記装置は、
    前記ビデオデータを記憶するように構成されたデータ記憶媒体と、
    1つまたは複数のプロセッサであって、
    前記ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを符号化することと
    ビットストリーム中に、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を含むこと、ここにおいて、前記カレントビデオブロックに関する前記動きベクトルは、前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づく、と、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を行うように構成された1つまたは複数のプロセッサ、と、
    を備える前記装置。
  11. 前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、請求項9または10に記載の装置。
  12. 前記隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、請求項9または10に記載の装置。
  13. コンピュータ可読媒体であって、
    ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    ビットストリームから、前記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを復号することと、
    前記ビットストリームから、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を復号することと、
    前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づいて前記カレントビデオブロックに関する前記動きベクトルを決定することと、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすることと
    前記再配置された予測ブロックに関する前記カレントビデオブロックを復号すること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を、前記ビデオデータを復号するように構成されたプロセッサに行わせるための命令を記憶するコンピュータ可読媒体。
  14. コンピュータ可読媒体であって、
    ビデオデータのカレントビデオブロックの隣接ビデオブロックから動きベクトルを指定する動きベクトル予測子候補を含む動きベクトル予測子候補リストを決定すること、ここにおいて、前記動きベクトル予測子候補はクリッピングされず、前記動きベクトル予測子候補リストは、前記カレントビデオブロックに関連して、参照ピクチャの境界の外側に位置する予測ブロックを識別する動きベクトル予測子候補の少なくとも一つを含む、と、
    記動きベクトル予測子候補リストにおける決定されたクリッピングされない動きベクトル予測子候補を識別する動きベクトル予測子インデックスを符号化すること
    ビットストリーム中に、前記決定されたクリッピングされない動きベクトル予測子候補と前記カレントビデオブロックに関する動きベクトルとの間の動きベクトル差分を含むこと、ここにおいて、前記カレントビデオブロックに関する前記動きベクトルは、前記動きベクトル予測子候補リストにおける前記決定されたクリッピングされない動きベクトル予測子候補と前記動きベクトル差分とに基づく、と、
    クリッピングされる動きベクトルによって識別される予測ブロックが前記参照ピクチャの周囲のパディング領域内に再配置されるように、前記カレントビデオブロックに関する前記動きベクトルをクリッピングすること、ここにおいて、前記再配置された予測ブロックはパディング領域値を含む、と、
    を、前記ビデオデータを符号化するように構成されたプロセッサに行わせるための命令を記憶するコンピュータ可読媒体。
  15. 前記パディング領域値が、前記参照ピクチャのエッジからの複製されたピクセル値を備える、請求項13または14に記載のコンピュータ可読媒体。
  16. 前記隣接ビデオブロックが、前記カレントビデオブロックの空間隣接ビデオブロックと、前記カレントビデオブロックのコロケートブロックの時間隣接ビデオブロックとのうちの1つまたは複数を備える、請求項13または14に記載のコンピュータ可読媒体。
JP2014534577A 2011-10-04 2012-09-11 ビデオコーディングのための動きベクトル予測子候補クリッピング削除 Active JP5823623B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201161543181P 2011-10-04 2011-10-04
US61/543,181 2011-10-04
US201161553053P 2011-10-28 2011-10-28
US61/553,053 2011-10-28
US13/532,392 US9083983B2 (en) 2011-10-04 2012-06-25 Motion vector predictor candidate clipping removal for video coding
US13/532,392 2012-06-25
PCT/US2012/054641 WO2013052244A1 (en) 2011-10-04 2012-09-11 Motion vector predictor candidate clipping removal for video coding

Publications (2)

Publication Number Publication Date
JP2014531873A JP2014531873A (ja) 2014-11-27
JP5823623B2 true JP5823623B2 (ja) 2015-11-25

Family

ID=47992573

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014534577A Active JP5823623B2 (ja) 2011-10-04 2012-09-11 ビデオコーディングのための動きベクトル予測子候補クリッピング削除

Country Status (9)

Country Link
US (1) US9083983B2 (ja)
EP (1) EP2764691A1 (ja)
JP (1) JP5823623B2 (ja)
KR (1) KR101622058B1 (ja)
CN (1) CN103843347B (ja)
BR (1) BR112014008097B1 (ja)
IN (1) IN2014CN02202A (ja)
TW (1) TWI528788B (ja)
WO (1) WO2013052244A1 (ja)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120088488A (ko) 2011-01-31 2012-08-08 한국전자통신연구원 시간적 움직임 벡터 저장 방법 및 그 장치
CN106851311B (zh) * 2011-08-29 2019-08-13 苗太平洋控股有限公司 视频译码装置
US9300975B2 (en) * 2011-09-11 2016-03-29 Texas Instruments Incorporated Concurrent access shared buffer in a video encoder
CN107835419B (zh) 2011-10-18 2021-05-14 株式会社Kt 视频信号解码方法
US9571833B2 (en) * 2011-11-04 2017-02-14 Nokia Technologies Oy Method for coding and an apparatus
KR20130050149A (ko) 2011-11-07 2013-05-15 오수미 인터 모드에서의 예측 블록 생성 방법
KR20130055773A (ko) * 2011-11-21 2013-05-29 한국전자통신연구원 부호화 방법 및 장치
CN107566835B (zh) 2011-12-23 2020-02-28 韩国电子通信研究院 图像解码方法、图像编码方法和记录介质
JP5994869B2 (ja) 2012-06-29 2016-09-21 日本電気株式会社 Mtcデバイス・トリガ配信の最適化
KR102186605B1 (ko) * 2012-09-28 2020-12-03 삼성전자주식회사 다시점 영상 부호화/복호화 장치 및 방법
CN102883163B (zh) * 2012-10-08 2014-05-28 华为技术有限公司 用于运动矢量预测的运动矢量列表建立的方法、装置
JP2016526853A (ja) 2013-07-12 2016-09-05 サムスン エレクトロニクス カンパニー リミテッド 深さ基盤ディスパリティベクトルを利用するインターレイヤビデオ復号化方法及びその装置、並びに深さ基盤ディスパリティベクトルを利用するインターレイヤビデオ符号化方法及びその装置
US20150271512A1 (en) * 2014-03-18 2015-09-24 Texas Instruments Incorporated Dynamic frame padding in a video hardware engine
US10104397B2 (en) * 2014-05-28 2018-10-16 Mediatek Inc. Video processing apparatus for storing partial reconstructed pixel data in storage device for use in intra prediction and related video processing method
KR102425577B1 (ko) * 2014-06-18 2022-07-26 삼성전자주식회사 휘도차를 보상하기 위한 인터 레이어 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
CN111432220B (zh) * 2014-06-19 2022-05-06 Vid拓展公司 采用块向量导出的帧内块复制编码的方法和系统
WO2016119104A1 (en) * 2015-01-26 2016-08-04 Mediatek Inc. Motion vector regularization
US10382791B2 (en) 2015-03-06 2019-08-13 Qualcomm Incorporated Data structure for video coding unit
US9819962B2 (en) * 2015-04-06 2017-11-14 Ati Technologies Ulc Efficient low-complexity video compression
US10271064B2 (en) * 2015-06-11 2019-04-23 Qualcomm Incorporated Sub-prediction unit motion vector prediction using spatial and/or temporal motion information
WO2017124305A1 (zh) * 2016-01-19 2017-07-27 北京大学深圳研究生院 基于多方式边界填充的全景视频编码、解码方法和装置
WO2017176092A1 (ko) * 2016-04-08 2017-10-12 한국전자통신연구원 움직임 예측 정보를 유도하는 방법 및 장치
CN116546205A (zh) * 2016-04-08 2023-08-04 韩国电子通信研究院 用于导出运动预测信息的方法和装置
KR20180000279A (ko) * 2016-06-21 2018-01-02 주식회사 픽스트리 부호화 장치 및 방법, 복호화 장치 및 방법
WO2017222301A1 (ko) * 2016-06-21 2017-12-28 주식회사 픽스트리 부호화 장치 및 방법, 복호화 장치 및 방법
US10448010B2 (en) * 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
US10165300B2 (en) * 2016-10-28 2018-12-25 Blackberry Limited 3D transform and inter prediction for video coding
RU2770185C2 (ru) * 2017-06-26 2022-04-14 ИНТЕРДИДЖИТАЛ ВиСи ХОЛДИНГЗ, ИНК. Множество кандидатов предсказателя для компенсации движения
CN111183642B (zh) * 2017-09-28 2023-09-15 三星电子株式会社 编码方法和装置以及解码方法和装置
EP3468194A1 (en) 2017-10-05 2019-04-10 Thomson Licensing Decoupled mode inference and prediction
US10785494B2 (en) * 2017-10-11 2020-09-22 Qualcomm Incorporated Low-complexity design for FRUC
KR20200095463A (ko) * 2017-11-01 2020-08-10 브이아이디 스케일, 인크. 병합 모드를 위한 서브-블록 모션 도출 및 디코더측 모션 벡터 정교화
WO2019135447A1 (ko) * 2018-01-02 2019-07-11 삼성전자 주식회사 움직임 예측에 의한 패딩 기법을 이용한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
CN112204981A (zh) 2018-03-29 2021-01-08 弗劳恩霍夫应用研究促进协会 用于选择用于填补的帧内预测模式的装置
US10728542B2 (en) * 2018-04-09 2020-07-28 Tencent America LLC Methods and apparatuses for sub-block motion vector prediction
BR112020022234A2 (pt) * 2018-05-07 2021-02-02 Interdigital Vc Holdings, Inc. dependência de dados em codificação/decodificação
JP2021529462A (ja) 2018-06-29 2021-10-28 ヴィド スケール インコーポレイテッド アフィン動きモデルを基にしたビデオコーディングのためのアダプティブ制御点の選択
AU2019292471A1 (en) * 2018-06-30 2021-01-28 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Merge mode-based inter-prediction method and apparatus
MX2023002949A (es) 2018-07-18 2023-11-07 Beijing Dajia Internet Information Tech Co Ltd Métodos y aparato de codificación de video que usa el campo técnico de predicción de vectores de movimiento basado en el historial.
CN110868602B (zh) * 2018-08-27 2024-04-12 华为技术有限公司 视频编码器、视频解码器及相应方法
GB2591647B (en) 2018-09-08 2023-02-01 Beijing Bytedance Network Tech Co Ltd Affine mode calculations for different video block sizes
WO2020060351A1 (ko) * 2018-09-21 2020-03-26 엘지전자 주식회사 움직임 벡터를 도출하는 방법 및 그 장치
GB2579763B (en) * 2018-09-21 2021-06-09 Canon Kk Video coding and decoding
US11375202B2 (en) * 2018-09-21 2022-06-28 Interdigital Vc Holdings, Inc. Translational and affine candidates in a unified list
US11070796B2 (en) * 2018-09-28 2021-07-20 Qualcomm Incorporated Ultimate motion vector expression based pruning for video coding
EP3861741A1 (en) 2018-10-02 2021-08-11 InterDigital VC Holdings, Inc. Method and apparatus for video encoding and decoding using list of predictor candidates
GB2595054B (en) 2018-10-18 2022-07-06 Canon Kk Video coding and decoding
GB2595053B (en) 2018-10-18 2022-07-06 Canon Kk Video coding and decoding
NZ775539A (en) * 2018-10-24 2023-06-30 Huawei Tech Co Ltd A method and an apparatus for determining motion information for a current block, a method and an apparatus for constructing and updating a history-based motion vector predictor list, and non-transitory computer-readable storage medium, and video encoding/decoding methods and apparatus
KR20210087450A (ko) 2018-11-06 2021-07-12 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 기하학적 파티션을 이용한 인터 예측을 위한 사이드 정보 시그널링
CN113016187B (zh) 2018-11-07 2023-06-06 寰发股份有限公司 利用当前画面参照编码方式的视频区块编码或解码方法和装置
SG11202104749RA (en) * 2018-11-08 2021-06-29 Guangdong Oppo Mobile Telecommunications Corp Ltd Image signal encoding/decoding method and apparatus therefor
US11736713B2 (en) * 2018-11-14 2023-08-22 Tencent America LLC Constraint on affine model motion vector
US10778977B2 (en) * 2018-12-05 2020-09-15 Qualcomm Incorporated Triangle motion information for video coding
WO2020140862A1 (en) 2018-12-30 2020-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditional application of inter prediction with geometric partitioning in video processing
CN111164976A (zh) * 2019-01-03 2020-05-15 北京大学 视频处理方法和装置
US11962756B2 (en) * 2019-01-05 2024-04-16 Lg Electronics Inc. Method and apparatus for processing video data
WO2020156533A1 (en) * 2019-02-01 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Interactions between in-loop reshaping and palette mode
JP7199550B2 (ja) 2019-02-01 2023-01-05 北京字節跳動網絡技術有限公司 パラメータセットを使用したインループ再成形情報のシグナリング
CN113424526A (zh) 2019-02-17 2021-09-21 北京字节跳动网络技术有限公司 帧内块复制模式的应用性的限制
WO2020172345A1 (en) * 2019-02-20 2020-08-27 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of motion vector rounding, clipping and storage for inter prediction based on mantissa-exponent representations
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
WO2020192613A1 (en) 2019-03-23 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Restrictions on in-loop reshaping parameter sets
US11140388B2 (en) * 2019-09-06 2021-10-05 Tencent America LLC Method and apparatus for non-linear loop filtering
CN117678223A (zh) * 2021-07-09 2024-03-08 抖音视界有限公司 视频处理的方法、装置和介质
CN116830581A (zh) * 2021-09-15 2023-09-29 腾讯美国有限责任公司 用于运动矢量差的经改进的信令方法和装置
US20230224472A1 (en) * 2022-01-12 2023-07-13 Tencent America LLC Motion vector restriction for out-of-frame boundary conditions
EP4354870A1 (en) * 2022-10-12 2024-04-17 Beijing Xiaomi Mobile Software Co., Ltd. Encoding/decoding video picture data

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7206346B2 (en) * 1997-06-25 2007-04-17 Nippon Telegraph And Telephone Corporation Motion vector predictive encoding method, motion vector decoding method, predictive encoding apparatus and decoding apparatus, and storage media storing motion vector predictive encoding and decoding programs
US8275047B2 (en) 2001-09-20 2012-09-25 Xilinx, Inc. Method and device for block-based conditional motion compensation
US7376186B2 (en) 2002-07-15 2008-05-20 Thomson Licensing Motion estimation with weighting prediction
US20050013498A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation Coding of motion vector information
JP2005065239A (ja) 2003-07-28 2005-03-10 Matsushita Electric Ind Co Ltd 動画像の復号化装置
KR100688383B1 (ko) * 2004-08-13 2007-03-02 경희대학교 산학협력단 파노라마 영상의 움직임 추정 및 보상
US7623682B2 (en) 2004-08-13 2009-11-24 Samsung Electronics Co., Ltd. Method and device for motion estimation and compensation for panorama image
EP2011342B1 (en) 2006-04-14 2017-06-28 Nxp B.V. Motion estimation at image borders
US8345763B2 (en) 2007-11-27 2013-01-01 Mediatek Inc. Motion compensation method and integrated circuit utilizing the same
CN102160383A (zh) * 2008-09-24 2011-08-17 索尼公司 图像处理装置和方法
WO2010041856A2 (en) * 2008-10-06 2010-04-15 Lg Electronics Inc. A method and an apparatus for processing a video signal
KR101671460B1 (ko) * 2009-09-10 2016-11-02 에스케이 텔레콤주식회사 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
TWI566586B (zh) * 2009-10-20 2017-01-11 湯姆生特許公司 一序列形象的現時區塊之寫碼方法和重建方法
ES2652337T3 (es) 2010-02-09 2018-02-01 Nippon Telegraph And Telephone Corporation Procedimiento de codificación predictiva para vector de movimiento, procedimiento de decodificación predictiva para vector de movimiento, dispositivo de codificación de imagen, dispositivo de decodificación de imagen, y programas para ello
WO2011149265A2 (en) * 2010-05-25 2011-12-01 Lg Electronics Inc. New planar prediction mode
EP2664139A2 (en) * 2011-01-14 2013-11-20 Telefonaktiebolaget LM Ericsson (PUBL) A method for deblocking filter control and a deblocking filtering control device
MX2013013029A (es) * 2011-06-30 2013-12-02 Panasonic Corp Metodo de decodificacion de imagenes, metodo de codificacion de imagenes, dispositivo de decodificacion de imagenes, dispositivo de codificacion de imagenes y dispositivo de codificacion/decodifi cacion de imagenes.
MX341415B (es) * 2011-08-03 2016-08-19 Panasonic Ip Corp America Metodo de codificacion de video, aparato de codificacion de video, metodo de decodificacion de video, aparato de decodificacion de video y aparato de codificacion/decodificacion de video.
US20130094586A1 (en) * 2011-10-17 2013-04-18 Lsi Corporation Direct Memory Access With On-The-Fly Generation of Frame Information For Unrestricted Motion Vectors
JP6422011B2 (ja) * 2012-05-11 2018-11-14 サン パテント トラスト 動画像符号化方法、動画像復号化方法、動画像符号化装置および動画像復号化装置

Also Published As

Publication number Publication date
KR101622058B1 (ko) 2016-05-31
IN2014CN02202A (ja) 2015-06-12
US9083983B2 (en) 2015-07-14
EP2764691A1 (en) 2014-08-13
BR112014008097A2 (pt) 2017-04-11
CN103843347A (zh) 2014-06-04
KR20140074377A (ko) 2014-06-17
BR112014008097B1 (pt) 2022-09-20
TW201316782A (zh) 2013-04-16
JP2014531873A (ja) 2014-11-27
TWI528788B (zh) 2016-04-01
WO2013052244A1 (en) 2013-04-11
CN103843347B (zh) 2017-04-19
US20130083853A1 (en) 2013-04-04

Similar Documents

Publication Publication Date Title
JP5823623B2 (ja) ビデオコーディングのための動きベクトル予測子候補クリッピング削除
JP6325068B2 (ja) サンプル適応オフセットのためのオフセットタイプおよび係数シグナリング方法
JP6254136B2 (ja) 統合されたマージモードおよび適応動きベクトル予測モード候補選択
JP6151277B2 (ja) ビデオコーディングにおけるデブロッキングフィルタパラメータのシグナリング
JP6081499B2 (ja) 変換係数コーディングのためのコンテキスト導出における走査ベーススライディングウィンドウ
JP5922244B2 (ja) ビデオコーディングにおいて適応ループフィルタとマージされたサンプル適応オフセット
JP5869114B2 (ja) ビデオコーディングにおける非正方ブロックのためのコンテキスト適応型エントロピーコーディング
JP5989794B2 (ja) 適応型重複ブロック動き補償
JP5833249B2 (ja) ビデオコーディングのための適応的な中心帯域オフセットフィルタ
JP6009575B2 (ja) 変換スキップモードにおける有意係数情報のコーディング
JP5932050B2 (ja) ビデオコーディングにおけるクロマ成分のための変換ユニットパーティショニング
JP5852133B2 (ja) ビデオコーディングにおいてビデオブロックについての走査順序情報を効率的にコーディングするために最確走査順序を使用すること
JP5955955B2 (ja) リーフレベルコード化単位のサブセットについての変換係数のシンタックス要素の信号伝達
JP5784830B2 (ja) ビデオコード化のための複数領域走査順序
JP2018530246A (ja) ビデオコーディングのために位置依存の予測組合せを使用する改善されたビデオイントラ予測
JP6301449B2 (ja) ビット深度に基づいたサンプル適応オフセットスケーリング
JP6042526B2 (ja) ビデオコーディングのための最後の位置コーディングのためのコンテキストの導出
JP2015173459A (ja) イントラ予測を使用したビデオ符号化
JP2015516768A (ja) 変換係数コーディング
JP2015516770A (ja) ビデオコーディングにおける量子化行列のための均一粒度
JP2014534734A (ja) イントラ予測ビデオコーディングにおける非正方形変換
JP5937205B2 (ja) ビデオコーディングのためのランモードベース係数コーディング
JP6067750B2 (ja) 並列動き推定範囲サイズの暗黙的導出
JP2015516764A (ja) ビデオコーディングにおけるデブロッキングフィルタのためのベータオフセット制御

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150417

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150428

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150728

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150908

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151007

R150 Certificate of patent or registration of utility model

Ref document number: 5823623

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250