JP2017143538A - 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム - Google Patents

動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム Download PDF

Info

Publication number
JP2017143538A
JP2017143538A JP2017049522A JP2017049522A JP2017143538A JP 2017143538 A JP2017143538 A JP 2017143538A JP 2017049522 A JP2017049522 A JP 2017049522A JP 2017049522 A JP2017049522 A JP 2017049522A JP 2017143538 A JP2017143538 A JP 2017143538A
Authority
JP
Japan
Prior art keywords
inter prediction
prediction information
candidates
prediction
encoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017049522A
Other languages
English (en)
Other versions
JP2017143538A5 (ja
JP6274338B2 (ja
Inventor
博哉 中村
Hiroya Nakamura
博哉 中村
英樹 竹原
Hideki Takehara
英樹 竹原
福島 茂
Shigeru Fukushima
茂 福島
上田 基晴
Motoharu Ueda
基晴 上田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Publication of JP2017143538A publication Critical patent/JP2017143538A/ja
Publication of JP2017143538A5 publication Critical patent/JP2017143538A5/ja
Application granted granted Critical
Publication of JP6274338B2 publication Critical patent/JP6274338B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】符号化情報の候補を算出することにより、符号化情報の符号量の削減を図って符号化効率を向上させる動画像符号化技術を提供する。
【解決手段】動画像符号化装置において、インター予測情報導出部104は、符号化対象の予測ブロックと同一ピクチャ内の符号化対象の予測ブロックに近接する符号化済みの予測ブロックのインター予測情報と、符号化対象の予測ブロックと異なる符号化済みのピクチャ内の予測ブロックのインター予測情報とから、インター予測情報の候補を導出する。さらに、導出されたインター予測情報の候補から、符号化対象の予測ブロックのインター予測に用いるインター予測情報の候補を決定する。第2符号化ビット列生成部110は、インター予測情報の候補を示すインデックスを、インター予測情報の候補数に基づいて符号化する。
【選択図】図1

Description

本発明は、動画像符号化技術に関し、特に動き補償予測を利用した動画像符号化技術に
関する。
動画像の圧縮符号化方式の代表的なものとして、MPEG−4 AVC/H.264の
規格がある。MPEG−4 AVC/H.264では、ピクチャを複数の矩形ブロックに
分割し、すでに符号化・復号したピクチャを参照ピクチャとし、参照ピクチャからの動き
を予測する動き補償が用いられている。この動き補償により動きを予測する手法をインタ
ー予測または動き補償予測と呼ぶ。MPEG−4 AVC/H.264でのインター予測
では、複数のピクチャを参照ピクチャとして用いることができ、これらの複数の参照ピク
チャから最も適した参照ピクチャをブロック毎に選択して動き補償を行う。そこで、それ
ぞれの参照ピクチャには参照インデックスが割り当てられ、この参照インデックスにより
、参照ピクチャを特定する。なお、Bピクチャでは、符号化・復号済みの参照ピクチャか
ら最大で2枚を選択してインター予測に用いることができる。それらの2枚の参照ピクチ
ャからの予測をそれぞれ主に前方向の予測として使われるL0予測(リスト0予測)、主
に後方向の予測として使われるL1予測(リスト1予測)として区別している。
さらに、L0予測とL1予測の2つのインター予測を同時に用いる双予測も定義されて
いる。双予測の場合は、双方向の予測を行い、L0予測、L1予測のそれぞれのインター
予測された信号に重み付け係数を掛け算し、オフセット値を加算して重畳し、最終的なイ
ンター予測画像信号を生成する。重み付け予測に用いる重み付け係数及びオフセット値は
ピクチャ単位で各リストの参照ピクチャ毎に代表的な値が設定され、符号化される。イン
ター予測に関する符号化情報には、ブロック毎に、L0予測とL1予測、双予測を区別す
る予測モード、ブロック毎の参照リスト毎に、参照ピクチャを特定する参照インデックス
、ブロックの移動方向・移動量を表す動きベクトルがあり、これらの符号化情報を符号化
・復号する。
さらに、MPEG−4 AVC/H.264では、符号化または復号済みのブロックの
インター予測情報から符号化または復号対象のブロックのインター予測情報を生成するダ
イレクトモードが定義されている。ダイレクトモードはインター予測情報の符号化が不要
となるので、符号化効率が向上する。
時間方向のインター予測情報の相関を利用する時間ダイレクトモードについて図29を
用いて説明する。L1の参照インデックスが0に登録されているピクチャを基準ピクチャ
colPicとする。基準ピクチャcolPic内で符号化または復号対象ブロックと同じ位置のブロ
ックを基準ブロックとする。
基準ブロックがL0予測を用いて符号化されていれば、基準ブロックのL0の動きベク
トルを基準動きベクトルmvColとし、基準ブロックがL0予測を用いて符号化されておら
ず、L1予測を用いて符号化されていれば、基準ブロックのL1の動きベクトルを基準動
きベクトルmvColとする。基準動きベクトルmvColが参照するピクチャを時間ダイレクトモ
ードのL0の参照ピクチャとし、基準ピクチャcolPicを時間ダイレクトモードのL1の参
照ピクチャとする。
基準動きベクトルmvColからスケーリング演算処理により時間ダイレクトモードのL0
の動きベクトルmvL0とL1の動きベクトルmvL1を導出する。
基準ピクチャcolPicのPOCから、時間ダイレクトモードのL0の参照ピクチャのPO
Cを減算してピクチャ間距離tdを導出する。なお、POCは符号化されるピクチャに関
連付けられる変数とし、ピクチャの出力順序で1ずつ増加する値が設定される。2つのピ
クチャのPOCの差が時間軸方向でのピクチャ間距離を示す。
td=基準ピクチャcolPicのPOC−時間ダイレクトモードのL0の参照ピクチャのP
OC
符号化または復号対象ピクチャのPOCから時間ダイレクトモードのL0の参照ピクチ
ャのPOCを減算してピクチャ間距離tbを導出する。
tb=符号化または復号対象ピクチャのPOC−時間ダイレクトモードのL0の参照ピ
クチャのPOC
基準動きベクトルmvColからスケーリング演算処理により時間ダイレクトモードのL0
の動きベクトルmvL0を導出する。
mvL0=tb / td * mvCol
時間ダイレクトモードのL0の動きベクトルmvL0から基準動きベクトルmvColを減算し
L1の動きベクトルmvL1を導出する。
mvL1=mvL0 - mvCol
特開2004−129191号公報
従来の方法では、動き補償でブロック毎に参照する動き情報の候補の数が従来は固定さ
れていたため、符号化効率が上がらないことがあった。
このような状況下、本発明者らは、動き補償予測を使用する動画像符号化方式において
、符号化情報をより一層圧縮し、全体の符号量を削減する必要性を認識するに至った。
本発明はこうした状況に鑑みてなされたものであり、その目的は、符号化情報の候補を
算出することにより、符号化情報の符号量の削減を図って符号化効率を向上させる動画像
符号化技術を提供することにある。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化装置であって、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出部と、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出部と、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録部と、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充部と、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測部と、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化部とを備え、前記符号化部は前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出部は、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする動画像符号化装置を提供する。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法であって、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする動画像符号化方法を提供する。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化プログラムであって、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとをコンピュータに実行させ、前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする動画像符号化プログラムを提供する。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理部と、パケット化された前記符号化データを送信する送信部とを備え、前記動画像符号化方法は、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする送信装置を提供する。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理ステップと、パケット化された前記符号化データを送信する送信ステップとを有し、前記動画像符号化方法は、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、
前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする送信方法を提供する。
各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理ステップと、パケット化された前記符号化データを送信する送信ステップとをコンピュータに実行させ、前記動画像符号化方法は、符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを備え、前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限することを特徴とする送信プログラムを提供する。
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒
体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効で
ある。
本発明によれば、伝送する符号化情報の発生符号量を削減させて、符号化効率を向上さ
せることができる。
実施の形態に係る動きベクトルの予測方法を実行する動画像符号化装置の構成を示すブロック図である。 実施の形態に係る動きベクトルの予測方法を実行する動画像復号装置の構成を示すブロック図である。 ツリーブロック、符号化ブロックを説明する図である。 予測ブロックの分割モードを説明する図である。 マージモードでの空間マージ候補の予測ブロックを説明する図である。 マージモードでの空間マージ候補の予測ブロックを説明する図である。 マージモードでの空間マージ候補の予測ブロックを説明する図である。 マージモードでの空間マージ候補の予測ブロックを説明する図である。 マージモードでの時間マージ候補の予測ブロックを説明する図である。 マージモードに関する予測ブロック単位でのビットストリームのシンタックスを説明する図である。 マージインデックスのシンタックス要素のエントロピー符号の一例を説明する図である。 図1の動画像符号化装置のインター予測情報導出部の詳細な構成を示すブロック図である。 図2の動画像復号装置のインター予測情報導出部の詳細な構成を示すブロック図である。 マージモードのマージ候補の導出処理及びマージ候補リストの構築処理手順を説明するフローチャートである。 マージモードの空間マージ候補導出処理手順を説明するフローチャートである。 マージモードの時間マージ候補の参照インデックスの導出処理手順を説明するフローチャートである。 マージモードの時間マージ候補導出処理手順を説明するフローチャートである。 マージモードの異なる時間のピクチャの導出処理手順を説明するフローチャートである。 マージモードの異なる時間のピクチャの予測ブロックの導出処理手順を説明するフローチャートである。 マージモードの時間マージ候補導出処理手順を説明するフローチャートである。 マージモードの時間マージ候補導出処理手順を説明するフローチャートである。 動きベクトルのスケーリング演算処理手順を説明するフローチャートである。 動きベクトルのスケーリング演算処理手順を説明するフローチャートである。 マージモードのマージ候補リストへのマージ候補の登録処理手順を説明するフローチャートである。 実施例1の方法による符号化側および復号側で共通の最終マージ候補数finalNumMergeCandの設定処理手順を説明するフローチャートである。 マージモードに関するスライスヘッダのビットストリームのシンタックスを説明する図である。 実施例2の方法による符号化側での最終マージ候補数finalNumMergeCandの設定処理手順を説明するフローチャートである。 実施例2の方法による復号側での最終マージ候補数finalNumMergeCandの設定処理手順を説明するフローチャートである。 従来のMPEG−4 AVC/H.264の時間ダイレクトモードを説明する図である。
本実施の形態では、動画像の符号化に関し、特にピクチャを任意のサイズ、形状の矩形
ブロックに分割し、ピクチャ間でブロック単位に動き補償を行う動画像符号化における符
号化効率を向上させる為に、符号化対象ブロックに隣接するブロックまたは符号化済みの
ピクチャのブロックの動きベクトルから複数の予測動きベクトルを導出し、符号化対象の
ブロックの動きベクトルと選択された予測動きベクトルとの差分ベクトルを算出して符号
化することによって符号量を削減する。あるいは、符号化対象ブロックに隣接するブロッ
クまたは符号化済みのピクチャのブロックの符号化情報を利用することにより、符号化対
象ブロックの符号化情報を導出することによって符号量を削減する。また、動画像の復号
の場合は、復号対象ブロックに隣接するブロックまたは復号済みのピクチャのブロックの
動きベクトルから複数の予測動きベクトルを算出し、符号化ストリームから復号された差
分ベクトルと選択された予測動きベクトルとから復号対象のブロックの動きベクトルを算
出して復号する。あるいは、復号対象ブロックに隣接するブロックまたは復号済みのピク
チャのブロックの符号化情報を利用することにより、復号対象ブロックの符号化情報を導
出する。
まず、本実施の形態において使用する技術、及び技術用語を定義する。
(ツリーブロック、符号化ブロックについて)
実施の形態では、ピクチャを1つまたは複数分割したスライスが符号化の基本単位とな
っており、スライス毎にスライスの種類を示す情報であるスライスタイプが設定される。
図3に示されるように、スライス内を任意の同一サイズの正方の矩形の単位にて均等分割
する。この単位をツリーブロックと定義し、スライス内での符号化または復号対象ブロッ
ク(符号化処理においては符号化対象ブロック、復号処理においては復号対象ブロックの
ことである。以下、断りのない限り、この意味で用いる。)を特定するためのアドレス管
理の基本単位とする。モノクロを除きツリーブロックは1つの輝度信号と2つの色差信号
で構成される。ツリーブロックのサイズはピクチャサイズやピクチャ内のテクスチャに応
じて、2のべき乗のサイズで自由に設定することができる。ツリーブロックはピクチャ内
のテクスチャに応じて、符号化処理を最適にすべく、必要に応じてツリーブロック内の輝
度信号、及び色差信号を階層的に4分割(縦横に2分割ずつ)して、ブロックサイズの小
さいブロックにすることができる。このブロックをそれぞれ符号化ブロックと定義し、符
号化及び復号を行う際の処理の基本単位とする。モノクロを除き符号化ブロックも1つの
輝度信号と2つの色差信号で構成される。符号化ブロックの最大サイズはツリーブロック
のサイズと同一である。符号化ブロックの最小のサイズとなる符号化ブロックを最小符号
化ブロックと呼び、2のべき乗のサイズで自由に設定することができる。
図3においては、符号化ブロックAは、ツリーブロックを分割せず、1つの符号化ブロ
ックとしたものである。符号化ブロックBは、ツリーブロックを4分割してできた符号化
ブロックである。符号化ブロックCは、ツリーブロックを4分割してできたブロックをさ
らに4分割してできた符号化ブロックである。符号化ブロックDは、ツリーブロックを4
分割してできたブロックをさらに階層的に2度4分割してできた符号化ブロックであり、
最小サイズの符号化ブロックである。
(予測モードについて)
符号化ブロック単位で、復号済みの周囲の画像信号から予測を行うイントラ予測(MODE
_INTRA)、及び復号済みのピクチャの画像信号から予測を行うインター予測(MODE_INTER
)を切り替える。このイントラ予測(MODE_INTRA)とインター予測(MODE_INTER)を識別
するモードを予測モード(PredMode)と定義する。予測モード(PredMode)はイントラ予
測(MODE_INTRA)、またはインター予測(MODE_INTER)を値として持ち、選択して符号化
できる。
(分割モード、予測ブロック、予測ユニットについて)
ピクチャ内をブロックに分割してイントラ予測(MODE_INTRA)及びインター予測(MODE
_INTER)を行う場合、イントラ予測及びインター予測の方法を切り替える単位をより小さ
くするために、必要に応じて符号化ブロックを分割して予測を行う。この符号化ブロック
の輝度信号と色差信号の分割方法を識別するモードを分割モード(PartMode)と定義する
。さらに、この分割されたブロックを予測ブロックと定義する。図4に示すように、符号
化ブロックの輝度信号の分割方法に応じて4種類の分割モード(PartMode)を定義する。
符号化ブロックの輝度信号を分割せず1つの予測ブロックとみなしたもの(図4(a))
の分割モード(PartMode)を2N×2N分割(PART_2Nx2N)、符号化ブロックの輝度信号
を水平方向に2分割し、2つの予測ブロックとしたもの(図4(b))の分割モード(Pa
rtMode)を2N×N分割(PART_2NxN)、符号化ブロックの輝度信号を垂直方向に分割し
、符号化ブロックを2つの予測ブロックとしたもの(図4(c))の分割モード(PartMo
de)をN×2N分割(PART_Nx2N)、符号化ブロックの輝度信号を水平と垂直の均等分割
により4つの予測ブロックとしたもの(図4(d))の分割モード(PartMode)をN×N
分割(PART_NxN)とそれぞれ定義する。なお、イントラ予測(MODE_INTRA)のN×N分割
(PART_NxN)を除き、各分割モード(PartMode)毎に輝度信号の縦横の分割比率と同様に
色差信号も分割する。
符号化ブロック内部において、各予測ブロックを特定する為に、0から開始する番号を
、符号化順序で、符号化ブロック内部に存在する予測ブロックに対して割り当てる。この
番号を分割インデックスPartIdxと定義する。図4の符号化ブロックの各予測ブロックの
中に記述された数字は、その予測ブロックの分割インデックスPartIdxを表す。図4(b
)に示す2N×N分割(PART_2NxN)では上の予測ブロックの分割インデックスPartIdxを
0とし、下の予測ブロックの分割インデックスPartIdxを1とする。図4(c)に示すN
×2N分割(PART_Nx2N)では左の予測ブロックの分割インデックスPartIdxを0とし、右
の予測ブロックの分割インデックスPartIdxを1とする。図4(d)に示すN×N分割(P
ART_NxN)では、左上の予測ブロックの分割インデックスPartIdxを0とし、右上の予測ブ
ロックの分割インデックスPartIdxを1とし、左下の予測ブロックの分割インデックスPar
tIdxを2とし、右下の予測ブロックの分割インデックスPartIdxを3とする。
予測モード(PredMode)がインター予測(MODE_INTER)では、最小の符号化ブロックで
ある符号化ブロックD以外では、分割モード(PartMode)は2N×2N分割(PART_2Nx2N
)、2N×N分割(PART_2NxN)、及びN×2N分割(PART_Nx2N)を定義し、最小の符号
化ブロックである符号化ブロックDのみ、分割モード(PartMode)は2N×2N分割(PA
RT_2Nx2N)、2N×N分割(PART_2NxN)、及びN×2N分割(PART_Nx2N)に加えてN×
N分割(PART_NxN)を定義する。なお、最小の符号化ブロック以外にN×N分割(PART_N
xN)を定義しない理由は最小の符号化ブロック以外では、符号化ブロックを4分割して小
さな符号化ブロックを表現できるからである。
(ツリーブロック、符号化ブロック、予測ブロック、変換ブロックの位置)
本実施の形態のツリーブロック、符号化ブロック、予測ブロック、変換ブロックを始め
とする各ブロックの位置は、輝度信号の画面の一番左上の輝度信号の画素の位置を原点(
0,0)とし、それぞれのブロックの領域に含まれる一番左上の輝度信号の画素の位置を
(x,y)の二次元座標で表す。座標軸の向きは水平方向に右の方向、垂直方向に下の方
向をそれぞれ正の向きとし、単位は輝度信号の1画素単位である。輝度信号と色差信号で
画像サイズ(画素数)が同じである色差フォーマットが4:4:4の場合ではもちろんの
こと、輝度信号と色差信号で画像サイズ(画素数)が異なる色差フォーマットが4:2:
0、4:2:2の場合でも色差信号の各ブロックの位置をそのブロックの領域に含まれる
輝度信号の画素の座標で表し、単位は輝度信号の1画素である。この様にすることで、色
差信号の各ブロックの位置が特定できるのはもちろんのこと、座標の値を比較するだけで
、輝度信号のブロックと色差信号のブロックの位置の関係も明確となる。
(インター予測モード、参照リストについて)
本発明の実施の形態においては、復号済みのピクチャの画像信号から予測を行うインタ
ー予測では、複数の復号済みのピクチャを参照ピクチャとして用いることができる。複数
の参照ピクチャから選択された参照ピクチャを特定するため、予測ブロック毎に参照イン
デックスを付ける。予測ブロック毎に任意の2枚の参照ピクチャを選択してインター予測
ことができ、インター予測モードとしてL0予測(Pred_L0)、L1予測(Pred_L1)、双
予測(Pred_BI)がある。参照ピクチャはリスト構造のL0(参照リスト0)とL1(参
照リスト1)で管理され、L0またはL1の参照インデックスを指定することにより参照
ピクチャを特定することができる。L0予測(Pred_L0)はL0で管理されている参照ピ
クチャを参照するインター予測であり、L1予測(Pred_L1)はL1で管理されている参
照ピクチャを参照するインター予測であり、双予測(Pred_BI)はL0予測とL1予測が
共に行われ、L0とL1のそれぞれで管理されている1つずつの参照ピクチャを参照する
インター予測である。スライスタイプがPスライスのインター予測ではL0予測のみが利
用でき、スライスタイプがBスライスのインター予測ではL0予測、L1予測、L0予測
とL1予測を平均または重み付け加算する双予測(Pred_BI)が利用できる。以降の処理
において出力に添え字LXが付いている定数、変数に関しては、L0、L1ごとに処理が
行われることを前提とする。
(マージモード、マージ候補)
マージモードとは、符号化または復号対象の予測ブロックの予測モード、参照インデッ
クス、動きベクトル等のインター予測情報を符号化または復号するのではなく、符号化ま
たは復号対象の予測ブロックと同一ピクチャ内でその符号化または復号対象の予測ブロッ
クに隣接する予測ブロック、あるいは符号化または復号対象の予測ブロックと時間的に異
なる符号化または復号済みのピクチャの符号化または復号対象の予測ブロックと同一位置
あるいはその付近(近傍の位置)に存在する予測ブロックのインター予測情報から符号化
または復号対象の予測ブロックのインター予測情報を導出することによりインター予測を
行うモードである。符号化または復号対象の予測ブロックと同一ピクチャ内でその符号化
または復号対象の予測ブロックに隣接する予測ブロック及びその予測ブロックのインター
予測情報を空間マージ候補、符号化または復号対象の予測ブロックと時間的に異なる符号
化または復号済みのピクチャの符号化または復号対象の予測ブロックと同一位置あるいは
その付近(近傍の位置)に存在する予測ブロック及びその予測ブロックのインター予測情
報から導出されるインター予測情報を時間マージ候補とする。それぞれのマージ候補はマ
ージ候補リストに登録され、マージインデックスによりインター予測で用いるマージ候補
を特定する。
(隣接する予測ブロックについて)
図5、図6、図7及び図8は符号化または復号対象の予測ブロックと同一ピクチャ内で
その符号化または復号対象の予測ブロックに隣接する予測ブロックを説明する図である。
図9は符号化または復号対象の予測ブロックと時間的に異なる符号化または復号済みのピ
クチャにおいて、符号化または復号対象の予測ブロックと同一位置あるいはその付近に存
在する既に符号化または復号済みの予測ブロックを説明する図である。図5、図6、図7
、図8及び図9を用いて符号化または復号対象の予測ブロックの空間方向に隣接する予測
ブロック、及び異なる時間の同一位置の予測ブロックについて説明する。
図5に示すように、符号化または復号対象の予測ブロックと同一ピクチャ内でその符号
化または復号対象の予測ブロックの左側の辺に隣接する予測ブロックA、上側の辺に隣接
する予測ブロックB、右上の頂点に隣接する予測ブロックC、左下の頂点に隣接する予測
ブロックD、および左上の頂点に隣接する予測ブロックEを空間方向に隣接する予測ブロ
ックと定義する。
なお、図6に示すように、符号化または復号対象の予測ブロックの左側の辺に隣接する
予測ブロックのサイズが符号化または復号対象の予測ブロックより小さく、複数存在する
場合には、本実施の形態においては左側の辺に隣接する予測ブロックの中で最も下の予測
ブロックA10だけを左側の辺に隣接する予測ブロックAとする。
同様に、符号化または復号対象の予測ブロックの上側の辺に隣接する予測ブロックのサ
イズが符号化または復号対象の予測ブロックより小さく、複数存在する場合には、本実施
の形態においては左側の辺に隣接する予測ブロックの中で最も右の予測ブロックB10だ
けを上側の辺に隣接する予測ブロックBとする。
なお、図7に示すように、符号化または復号対象の予測ブロックの左側に隣接する予測
ブロックFのサイズが符号化または復号対象の予測ブロックより大きい場合にも、前記条
件に従い、左側に隣接する予測ブロックFがその符号化または復号対象の予測ブロックの
左側の辺に隣接していれば予測ブロックAとし、符号化または復号対象の予測ブロックの
左下の頂点に隣接していれば予測ブロックDとし、符号化または復号対象の予測ブロック
の左上の頂点に隣接していれば予測ブロックEとする。図7の例では、予測ブロックA、
予測ブロックD及び予測ブロックEは同一の予測ブロックとなる。
なお、図8に示すように、符号化または復号対象の予測ブロックの上側に隣接する予測
ブロックGのサイズが符号化または復号対象の予測ブロックより大きい場合にも、前記条
件に従い、上側に隣接する予測ブロックGがその符号化または復号対象の予測ブロックの
上側の辺に隣接していれば予測ブロックBとし、符号化または復号対象の予測ブロックの
右上の頂点に隣接していれば予測ブロックCとし、符号化または復号対象の予測ブロック
の左上の頂点に隣接していれば予測ブロックEとする。図8の例では、予測ブロックB、
予測ブロックC及び予測ブロックEは同一の予測ブロックとなる。
図9に示すように、符号化または復号対象の予測ブロックと時間的に異なる符号化また
は復号済みのピクチャにおいて、符号化または復号対象の予測ブロックと同一位置あるい
はその付近に存在する既に符号化または復号済みの予測ブロックT0およびT1を異なる
時間の同一位置の予測ブロックと定義する。
(POCについて)
POCは符号化されるピクチャに関連付けられる変数とし、ピクチャの出力順序で1ず
つ増加する値が設定される。POCの値によって、同じピクチャであるかを判別したり、
出力順序でのピクチャ間の前後関係を判別したり、ピクチャ間の距離を導出したりするこ
とができる。例えば、2つのピクチャのPOCが同じ値を持つ場合、同一のピクチャであ
ると判断できる。2つのピクチャのPOCが違う値を持つ場合、POCの値が小さいピク
チャのほうが、先に出力されるピクチャであると判断でき、2つのピクチャのPOCの差
が時間軸方向でのピクチャ間距離を示す。
以下、図面と共に本発明の実施の形態を説明する。図1は本発明の実施の形態に係る動
画像符号化装置の構成を示すブロック図である。実施の形態の動画像符号化装置は、画像
メモリ101、ヘッダ情報設定部117、動きベクトル検出部102、差分動きベクトル
算出部103、インター予測情報導出部104、動き補償予測部105、イントラ予測部
106、予測方法決定部107、残差信号生成部108、直交変換・量子化部109、第
1符号化ビット列生成部118、第2符号化ビット列生成部110、第3符号化ビット列
生成部111、多重化部112、逆量子化・逆直交変換部113、復号画像信号重畳部1
14、符号化情報格納メモリ115、および復号画像メモリ116を備える。
ヘッダ情報設定部117は、シーケンス、ピクチャ、スライス単位の情報を設定する。
設定されたシーケンス、ピクチャ、スライス単位の情報はインター予測情報導出部104
、第1符号化ビット列生成部118に供給するとともに、図示していないがすべてのブロ
ックに供給する。
画像メモリ101は、撮影/表示時間順に供給された符号化対象のピクチャの画像信号
を一時格納する。画像メモリ101は、格納された符号化対象のピクチャの画像信号を、
所定の画素ブロック単位で、動きベクトル検出部102、予測方法決定部107、および
残差信号生成部108に供給する。その際、撮影/表示時間順に格納されたピクチャの画
像信号は、符号化順序に並べ替えられて、画素ブロック単位で、画像メモリ101から出
力される。
動きベクトル検出部102は、画像メモリ101から供給される画像信号と復号画像メ
モリ116から供給される参照ピクチャ間でブロックマッチング等により各予測ブロック
サイズ、各予測モードのそれぞれの動きベクトルを各予測ブロック単位で検出し、検出さ
れた動きベクトルを動き補償予測部105、差分動きベクトル算出部103、および予測
方法決定部107に供給する。
差分動きベクトル算出部103は、符号化情報格納メモリ115に記憶されている既に
符号化された画像信号の符号化情報を用いて、複数の予測動きベクトルの候補を算出して
予測動きベクトルリストに登録し、予測動きベクトルリストに登録された複数の予測動き
ベクトルの候補の中から最適な予測動きベクトルを選択し、動きベクトル検出部102が
検出した動きベクトルと予測動きベクトルから差分動きベクトルを算出し、算出された差
分動きベクトルを予測方法決定部107に供給する。さらに、予測動きベクトルリストに
登録された予測動きベクトルの候補から選択された予測動きベクトルを特定する予測動き
ベクトルインデックスを予測方法決定部107に供給する。
インター予測情報導出部104は、マージモードでのマージ候補を導出する。符号化情
報格納メモリ115に記憶されている既に符号化された予測ブロックの符号化情報を用い
て、複数のマージ候補を導出して後述するマージ候補リストに登録し、マージ候補リスト
に登録された複数のマージ候補の中から適したマージ候補を選択し、選択されたマージ候
補の各予測ブロックのL0予測、及びL1予測を利用するかどうかを示すフラグpredFlag
L0[xP][yP], predFlagL1[xP][yP]、参照インデックスrefIdxL0[xP][yP], refIdxL1[xP][y
P]、動きベクトルmvL0[xP][yP], mvL1[xP][yP]等のインター予測情報を動き補償予測部1
05に供給するとともに、選択されたマージ候補を特定するマージインデックスを予測方
法決定部107に供給する。ここで、xP、yPはピクチャ内での予測ブロックの左上の画素
の位置を示すインデックスである。インター予測情報導出部104の詳細な構成と動作は
後述する。
動き補償予測部105は、動きベクトル検出部102およびインター予測情報導出部1
04により検出された動きベクトルを用いて参照ピクチャからインター予測(動き補償予
測)により予測画像信号を生成し、予測画像信号を予測方法決定部107に供給する。な
お、L0予測、及びL1予測では、片方向の予測を行う。双予測(Pred_BI)の場合は、
双方向の予測を行い、L0予測、L1予測のそれぞれのインター予測された信号に適応的
に重み係数を掛け算し、オフセット値を加算して重畳し、最終的な予測画像信号を生成す
る。
イントラ予測部106は、各イントラ予測モードについてイントラ予測を行う。復号画
像メモリ116に格納されている復号済みの画像信号からイントラ予測により予測画像信
号を生成し、複数のイントラ予測モードの中から適したイントラ予測モードを選択し、選
択されたイントラ予測モード、及び選択されたイントラ予測モードに応じた予測画像信号
を予測方法決定部107に供給する。
予測方法決定部107は符号化情報及び残差信号の符号量、予測画像信号と画像信号と
の間の歪量等を評価することにより、複数の予測方法の中から、最適な符号化ブロック単
位でインター予測(PRED_INTER)かイントラ予測(PRED_INTRA)かを判別する予測モード
PredMode、分割モードPartModeを決定し、インター予測(PRED_INTER)では予測ブロック
単位でマージモードか否かを決定し、マージモードの場合はマージインデックス、マージ
モードでない場合はインター予測モード、予測動きベクトルインデックス、L0、L1の
参照インデックス、差分動きベクトル等を決定して、決定に応じた符号化情報を第2符号
化ビット列生成部110に供給する。
さらに、予測方法決定部107は、決定された予測方法を示す情報、及び決定された予
測方法に応じた動きベクトル等を含む符号化情報を符号化情報格納メモリ115に格納す
る。ここで格納する符号化情報は、各符号化ブロックの予測モードPredMode、分割モード
PartMode、各予測ブロックのL0予測、及びL1予測を利用するかどうかを示すフラグpr
edFlagL0[xP][yP], predFlagL1[xP][yP]、L0、L1の参照インデックスrefIdxL0[xP][y
P], refIdxL1[xP][yP]、L0、L1の動きベクトルmvL0[xP][yP], mvL1[xP][yP]等である
。ここで、xP、yPはピクチャ内での予測ブロックの左上の画素の位置を示すインデックス
である。なお、予測モードPredModeがインター予測(MODE_INTER)の場合、L0予測を利
用するかどうかを示すフラグpredFlagL0[xP][yP]、L1予測を利用するかどうかを示すフ
ラグpredFlagL1[xP][yP]は共に0である。一方、予測モードPredModeがインター予測(MO
DE_INTER)で、インター予測モードがL0予測(Pred_L0)の場合、L0予測を利用する
かどうかを示すフラグpredFlagL0[xP][yP]は1, L1予測を利用するかどうかを示すフラ
グpredFlagL1[xP][yP]は0である。インター予測モードがL1予測(Pred_L1)の場合、
L0予測を利用するかどうかを示すフラグpredFlagL0[xP][yP]は0, L1予測を利用する
かどうかを示すフラグpredFlagL1[xP][yP]は1である。インター予測モードが双予測(Pr
ed_BI)の場合、L0予測を利用するかどうかを示すフラグpredFlagL0[xP][yP]、L1予
測を利用するかどうかを示すフラグpredFlagL1[xP][yP]は共に1である。予測方法決定部
107は、決定された予測モードに応じた予測画像信号を残差信号生成部108と復号画
像信号重畳部114に供給する。
残差信号生成部108は、符号化する画像信号と予測画像信号との減算を行うことによ
り残差信号を生成し、直交変換・量子化部109に供給する。
直交変換・量子化部109は、残差信号に対して量子化パラメータに応じて直交変換及
び量子化を行い直交変換・量子化された残差信号を生成し、第3符号化ビット列生成部1
11と逆量子化・逆直交変換部113に供給する。さらに、直交変換・量子化部109は
、量子化パラメータを符号化情報格納メモリ115に格納する。
第1符号化ビット列生成部118は、ヘッダ情報設定部117で設定されたシーケンス
、ピクチャ、スライス単位の情報を符号化する。第1の符号化ビット列を生成し、多重化
部112に供給する。
第2符号化ビット列生成部110は、符号化ブロック及び予測ブロック毎に予測方法決
定部107によって決定された予測方法に応じた符号化情報を符号化する。具体的には、
符号化ブロック毎の予測モードPredMode、分割モードPartMode、インター予測(PRED_INT
ER)の場合、マージモードかどうかを判別するフラグ、マージモードの場合はマージイン
デックス、マージモードでない場合はインター予測モード、予測動きベクトルインデック
ス、差分動きベクトルに関する情報等の符号化情報を後述する規定のシンタックス規則に
従って符号化して第2の符号化ビット列を生成し、多重化部112に供給する。
第3符号化ビット列生成部111は、直交変換及び量子化された残差信号を規定のシン
タックス規則に従ってエントロピー符号化して第3の符号化ビット列を生成し、多重化部
112に供給する。多重化部112で、第1の符号化ビット列、第2の符号化ビット列お
よび第3の符号化ビット列を規定のシンタックス規則に従って多重化し、ビットストリー
ムを出力する。
逆量子化・逆直交変換部113は、直交変換・量子化部109から供給された直交変換
・量子化された残差信号を逆量子化及び逆直交変換して残差信号を算出し、復号画像信号
重畳部114に供給する。復号画像信号重畳部114は、予測方法決定部107による決
定に応じた予測画像信号と逆量子化・逆直交変換部113で逆量子化及び逆直交変換され
た残差信号を重畳して復号画像を生成し、復号画像メモリ116に格納する。なお、復号
画像に対して符号化によるブロック歪等の歪を減少させるフィルタリング処理を施して、
復号画像メモリ116に格納されることもある。
図2は図1の動画像符号化装置に対応した本発明の実施の形態に係る動画像復号装置
の構成を示すブロックである。実施の形態の動画像復号装置は、分離部201、第1符号
化ビット列復号部212、第2符号化ビット列復号部202、第3符号化ビット列復号部
203、動きベクトル算出部204、インター予測情報導出部205、動き補償予測部2
06、イントラ予測部207、逆量子化・逆直交変換部208、復号画像信号重畳部20
9、符号化情報格納メモリ210、および復号画像メモリ211を備える。
図2の動画像復号装置の復号処理は、図1の動画像符号化装置の内部に設けられている
復号処理に対応するものであるから、図2の動き補償予測部206、逆量子化・逆直交変
換部208、復号画像信号重畳部209、符号化情報格納メモリ210、および復号画像
メモリ211の各構成は、図1の動画像符号化装置の動き補償予測部105、逆量子化・
逆直交変換部113、復号画像信号重畳部114、符号化情報格納メモリ115、および
復号画像メモリ116の各構成とそれぞれ対応する機能を有する。
分離部201に供給されるビットストリームは規定のシンタックスの規則に従って分離
し、分離された符号化ビット列が第1符号化ビット列復号部212、第2符号化ビット列
復号部202、第3符号化ビット列復号部203に供給される。
第1符号化ビット列復号部212は、供給された符号化ビット列を復号して、シーケン
ス、ピクチャ、スライス単位の情報を得る。得られたシーケンス、ピクチャ、スライス単
位の情報は図示していないがすべてのブロックに供給する。
第2符号化ビット列復号部202は、供給された符号化ビット列を復号して、符号化ブ
ロック単位の情報、及び、予測ブロック単位の符号化情報を得る。具体的には、符号化ブ
ロック単位でインター予測(PRED_INTER)かイントラ予測(PRED_INTRA)かを判別する予
測モードPredMode、分割モードPartMode、インター予測(PRED_INTER)の場合、マージモ
ードかどうかを判別するフラグ、マージモードの場合はマージインデックス、マージモー
ドでない場合はインター予測モード、予測動きベクトルインデックス、差分動きベクトル
等に関する符号化情報を後述する規定のシンタックス規則に従って復号し、符号化情報を
動きベクトル算出部204、インター予測情報導出部205またはイントラ予測部207
に供給する。
第3符号化ビット列復号部203は、供給された符号化ビット列を復号して直交変換・
量子化された残差信号を算出し、直交変換・量子化された残差信号を逆量子化・逆直交変
換部208に供給する。
動きベクトル算出部204は、復号対象の予測ブロックの予測モードPredModeがインタ
ー予測(PRED_INTER)でマージモードでない時に、符号化情報格納メモリ210に記憶さ
れている既に復号された画像信号の符号化情報を用いて、複数の予測動きベクトルの候補
を導出して後述する予測動きベクトルリストに登録し、予測動きベクトルリストに登録さ
れた複数の予測動きベクトルの候補の中から、第2符号化ビット列復号部202で復号さ
れ供給される予測動きベクトルインデックスに応じた予測動きベクトルを選択し、第2符
号化ビット列復号部202で復号された差分ベクトルと選択された予測動きベクトルから
動きベクトルを算出し、他の符号化情報とともに動き補償予測部206に供給するととも
に、符号化情報格納メモリ210に格納する。ここで供給・格納する予測ブロックの符号
化情報は、予測モードPredMode、分割モードPartMode、L0予測、及びL1予測を利用す
るかどうかを示すフラグpredFlagL0[xP][yP], predFlagL1[xP][yP]、L0、L1の参照イ
ンデックスrefIdxL0[xP][yP], refIdxL1[xP][yP]、L0、L1の動きベクトルmvL0[xP][y
P], mvL1[xP][yP]等である。ここで、xP、yPはピクチャ内での予測ブロックの左上の画素
の位置を示すインデックスである。予測モードPredModeがインター予測(MODE_INTER)で
、インター予測モードがL0予測(Pred_L0)の場合、L0予測を利用するかどうかを示
すフラグpredFlagL0は1, L1予測を利用するかどうかを示すフラグpredFlagL1は0であ
る。インター予測モードがL1予測(Pred_L1)の場合、L0予測を利用するかどうかを
示すフラグpredFlagL0は0, L1予測を利用するかどうかを示すフラグpredFlagL1は1で
ある。インター予測モードが双予測(Pred_BI)の場合、L0予測を利用するかどうかを
示すフラグpredFlagL0、L1予測を利用するかどうかを示すフラグpredFlagL1は共に1で
ある。
インター予測情報導出部205は、復号対象の予測ブロックの予測モードPredModeがイ
ンター予測(PRED_INTER)でマージモードの時に、マージ候補を導出する。符号化情報格
納メモリ115に記憶されている既に復号された予測ブロックの符号化情報を用いて、複
数のマージの候補を導出して後述するマージ候補リストに登録し、マージ候補リストに登
録された複数のマージ候補の中から第2符号化ビット列復号部202で復号され供給され
るマージインデックスに対応したマージ候補を選択し、選択されたマージ候補のL0予測
、及びL1予測を利用するかどうかを示すフラグpredFlagL0[xP][yP], predFlagL1[xP][y
P]、L0、L1の参照インデックスrefIdxL0[xP][yP], refIdxL1[xP][yP]、L0、L1の
動きベクトルmvL0[xP][yP], mvL1[xP][yP]等のインター予測情報を動き補償予測部206
に供給するとともに、符号化情報格納メモリ210に格納する。ここで、xP、yPはピクチ
ャ内での予測ブロックの左上の画素の位置を示すインデックスである。インター予測情報
導出部205の詳細な構成と動作は後述する。
動き補償予測部206は、動きベクトル算出部204またはインター予測情報導出部2
05で算出されたインター予測情報を用いて復号画像メモリ211に格納されている参照
ピクチャからインター予測(動き補償予測)により予測画像信号を生成し、予測画像信号
を復号画像信号重畳部209に供給する。なお、双予測(Pred_BI)の場合は、L0予測
、L1予測の2つの動き補償予測画像信号に適応的に重み係数を掛け算して重畳し、最終
的な予測画像信号を生成する。
イントラ予測部207は、復号対象の予測ブロックの予測モードPredModeがイントラ予
測(PRED_INTRA)の時に、イントラ予測を行う。第1符号化ビット列復号部で復号された
符号化情報にはイントラ予測モードが含まれており、イントラ予測モードに応じて、復号
画像メモリ211に格納されている復号済みの画像信号からイントラ予測により予測画像
信号を生成し、予測画像信号を復号画像信号重畳部209に供給する。L0予測、及びL
1予測を利用するかどうかを示すフラグpredFlagL0[xP][yP], predFlagL1[xP][yP]を共に
0に設定し、符号化情報格納メモリ210に格納する。ここで、xP、yPはピクチャ内での
予測ブロックの左上の画素の位置を示すインデックスである。
逆量子化・逆直交変換部208は、第2符号化ビット列復号部202で復号された直交
変換・量子化された残差信号に対して逆直交変換及び逆量子化を行い、逆直交変換・逆量
子化された残差信号を得る。
復号画像信号重畳部209は、動き補償予測部206でインター予測された予測画像信
号、またはイントラ予測部207でイントラ予測された予測画像信号と、逆量子化・逆直
交変換部208により逆直交変換・逆量子化された残差信号とを重畳することにより、復
号画像信号を復号し、復号画像メモリ211に格納する。復号画像メモリ211に格納す
る際には、復号画像に対して符号化によるブロック歪等を減少させるフィルタリング処理
を施して、復号画像メモリ211に格納されることもある。
次に、本実施の形態に係る動きベクトルの予測方法を備える動画像符号化装置により符
号化され、復号装置により復号される動画像のビットストリームの符号化および復号の共
通規則であるシンタックスについて説明する。
図10は予測ブロック単位に記述されるシンタックス規則を示す。予測ブロックの予測
モードPredModeの値がインター予測(MODE_INTER)の場合、マージモードかどうかを示す
merge_flag[x0][y0]が設置される。ここで、x0、y0は輝度信号のピクチャ内での予測ブロ
ックの左上の画素の位置を示すインデックスであり、merge_flag[x0][y0]はピクチャ内の
(x0, y0)に位置する予測ブロックのマージモードかどうかを示すフラグである。
次に、merge_flag[x0][y0]が1の場合、マージモードであることを示し、参照するマー
ジ候補のリストであるマージリストのインデックスのシンタックス要素merge_idx[x0][y0
]が設置される。ここで、x0、y0はピクチャ内での予測ブロックの左上の画素の位置を示
すインデックスであり、merge_idx[x0][y0]はピクチャ内の(x0, y0)に位置する予測ブロ
ックのマージインデックスである。マージインデックスをエントロピー符号化または復号
する場合、マージ候補数が小さい程、小さい符号量で符号化または復号することができ、
少ない処理量で符号化または復号することができる。図11はマージインデックスのシン
タックス要素merge_idx[x0][y0]のエントロピー符号(コード)の一例である。マージ候
補数が3の場合、マージインデックスの最大値をマージ候補数−1、すなわち2とするこ
とで、マージインデックスが0, 1, 2となり、マージインデックスのシンタックス要素mer
ge_idx[x0][y0]の符号はそれぞれ'0'、'10'、'11'となる。マージ候補数が4の場合
、マージインデックスの最大値は最大マージ候補数−1、すなわち3とすることで、マー
ジインデックスが0, 1, 2, 3となり、マージインデックスのシンタックス要素merge_idx[
x0][y0]の符号はそれぞれ'0'、'10'、'110'、'111'となる。マージ候補数が5
の場合、マージインデックスの最大値は最大マージ候補数−1、すなわち4とすることで
、マージインデックスが0, 1, 2, 3, 4の時、マージインデックスのシンタックス要素mer
ge_idx[x0][y0]の符号はそれぞれ'0'、'10'、'110'、'1110'、'1111'とな
る。例えば、マージインデックスが2の場合、マージ候補数が3では、'11'となり、マ
ージ候補数が4および5では、'110'となる。すなわち、最大のマージ候補数を制限す
ることができる場合、マージインデックスの最大値をマージ候補数−1に制限することで
、短い符号長でマージインデックスを表現することができる。つまり、マージ候補数を制
限する場合、マージインデックスの最大値を最大マージ候補数−1に制限する方がマージ
インデックスを小さい符号量で表現可能である。本実施例においては、図11に示すよう
にマージ候補数に応じて、マージインデックスのそれぞれの値を示す符号を切り替えるこ
とで符号量を削減する。
一方、merge_flag[x0][y0]が0の場合、マージモードでないことを示し、スライスタイ
プがBスライスの場合、インター予測モードを識別するシンタックス要素inter_pred_fla
g[x0][y0]が設置され、このシンタックス要素でL0予測(Pred_L0)、L1予測(Pred_L
1)、双予測(Pred_BI)を識別する。L0、L1ごとに、参照ピクチャを特定するための
参照インデックスのシンタックス要素ref_idx_l0[x0][y0]、ref_idx_l1[x0][y0]、動きベ
クトル検出にて求められた予測ブロックの動きベクトルと予測動きベクトルとの差分であ
る差分動きベクトルのシンタックス要素mvd_l0[x0][y0][j]、mvd_l1[x0][y0][j]が設置さ
れる。ここで、x0、y0はピクチャ内での予測ブロックの左上の画素の位置を示すインデッ
クスであり、ref_idx_l0[x0][y0]、mvd_l0[x0][y0][j]はそれぞれピクチャ内の(x0, y0)
に位置する予測ブロックのL0の参照インデックス、及び差分動きベクトルであり、ref_
idx_l1[x0][y0]、mvd_l1[x0][y0][j]はそれぞれピクチャ内の(x0, y0)に位置する予測ブ
ロックのL1の参照インデックス、及び差分動きベクトルである。また、jは差分動きベ
クトルの成分を表し、jが0はx成分を、jが1はy成分を表す。次に、参照する予測動
きベクトルの候補のリストである予測動きベクトルリストのインデックスのシンタックス
要素mvp_idx_l0[x0][y0]、mvp_idx_l1[x0][y0]が設置される。ここで、x0、y0はピクチャ
内での予測ブロックの左上の画素の位置を示すインデックスであり、mvp_idx_l0[x0][y0]
、mvp_idx_l1[x0][y0]はピクチャ内の(x0, y0)に位置する予測ブロックのL0、L1の予
測動きベクトルインデックスである。本発明の本実施の形態においてはこれらの候補数の
値を2と設定する。
実施の形態に係るインター予測情報導出方法は、図1の動画像符号化装置のインター予
測情報導出部104及び図2の動画像復号装置のインター予測情報導出部205において
実施される。
実施の形態に係るインター予測情報導出方法は、符号化ブロックを構成する予測ブロッ
ク単位に、符号化及び復号の処理の何れでも実施される。予測ブロックの予測モードPred
Modeがインター予測(MODE_INTER)で、マージモードの場合に、符号化の場合、符号化済
みの予測ブロックの予測モード、参照インデックス、動きベクトルを利用して符号化対象
の予測ブロックの予測モード、参照インデックス、動きベクトルを導出する際、復号の場
合、復号済みの予測ブロックの予測モード、参照インデックス、動きベクトルを利用して
復号対象の予測ブロックの予測モード、参照インデックス、動きベクトルを導出する際に
実施される。
マージモードは図5、図6、図7及び図8を用いて説明した左に隣接する予測ブロック
A、上に隣接する予測ブロックB、右上に隣接する予測ブロックC、左下に隣接する予測
ブロックD、左上に隣接する予測ブロックEに加えて、図9を用いて説明した異なる時間
の同一位置あるいはその付近に存在する予測ブロックCol(T0、T1のいずれか)の
予測ブロックを候補とする。動画像符号化装置のインター予測情報導出部104、及び動
画像復号装置のインター予測情報導出部205はそれらの候補を符号化側と復号側で共通
の規定の順序でマージ候補リストに登録し、動画像符号化装置のインター予測情報導出部
104がマージ候補リストの要素を特定するマージインデックスを決定して第2符号化ビ
ット列生成部110を経由して符号化し、動画像復号装置のインター予測情報導出部20
5は第2符号化ビット列復号部202で復号されたマージインデックスが供給されて、そ
のマージインデックスに応じた予測ブロックをマージ候補リストから選択し、その選択さ
れたマージ候補の予測モード、参照インデックス、動きベクトル等のインター予測情報を
用いて、動き補償予測を行う。
スライス単位でマージ候補リストmergeCandListに登録される最終的なマージ候補数fin
alNumMergeCandを設定する。本実施の形態においては、スライスタイプがPスライスの場
合、最終マージ候補数finalNumMergeCandを後者よりも小さい数に設定し、スライスタイ
プがBスライスの場合、最終マージ候補数finalNumMergeCandを前者よりも大きい数に設
定する。スライスタイプがPスライスの場合は、最終マージ候補数finalNumMergeCandを
3に設定し、スライスタイプがBスライスの場合は、最終マージ候補数finalNumMergeCan
dを5に設定する。
実施の形態に係るインター予測情報導出方法を図面を用いて説明する。図12は、図1
の動画像符号化装置のインター予測情報導出部104の詳細な構成を示す図である。また
、図13は、図2の動画像復号装置のインター予測情報導出部205の詳細な構成を示す
図である。
図12及び図13の太枠線で囲まれる部分はそれぞれ、インター予測情報導出部104
及びインター予測情報導出部205を示している。
更に、それらの内部の太点線で囲まれる部分は後述するインター予測情報導出方法の動
作部を示しており、実施の形態の動画像符号化装置と対応する動画像復号装置にも同様に
設置され、符号化と復号で矛盾しない同一の導出結果を得られるようにしている。
インター予測情報導出部104は、空間マージ候補生成部130、時間マージ候補の参
照インデックス導出部131、時間マージ候補生成部132、マージ候補登録部133、
マージ候補同一判定部134、マージ候補数制限部135、マージ候補補充部136、お
よび符号化情報選択部137を含む。
インター予測情報導出部205は、空間マージ候補生成部230、時間マージ候補の参
照インデックス導出部231、時間マージ候補生成部232、マージ候補登録部233、
マージ候補同一判定部234、マージ候補数制限部235、マージ候補補充部236、お
よび符号化情報選択部237を含む。
図14は本発明の実施の形態による動画像符号化装置のインター予測情報導出部104
及び動画像復号装置のインター予測情報導出部205とで共通する機能を有するマージ候
補の導出処理及びマージ候補リストの構築処理の手順を説明するフローチャートである。
以下、諸過程を順を追って説明する。なお、以下の説明においては特に断りのない限りス
ライスタイプslice_typeがBスライスの場合について説明するが、Pスライスの場合にも
適用できる。ただし、スライスタイプslice_typeがPスライスの場合、インター予測モー
ドとしてL0予測(Pred_L0)だけがあり、L1予測(Pred_L1)、双予測(Pred_BI)が
ないので、L1に纏わる処理を省略することができる。
動画像符号化装置のインター予測情報導出部104の空間マージ候補生成部130及び
動画像復号装置のインター予測情報導出部205の空間マージ候補生成部230では、符
号化または復号対象ブロックに隣接するそれぞれの予測ブロックA,B,C,D,Eから
の空間マージ候補A,B,C,D,Eを導出する。ここで、A,B,C,D,EまたはC
olのいずれかを示すNを定義する。予測ブロックNのインター予測情報がマージ候補N
として利用できるかどうかを示すフラグavailableFlagN、L0の参照インデックスrefIdx
L0N及びL1の参照インデックスrefIdxL1N、L0予測が行われるかどうかを示すL0予測
フラグpredFlagL0NおよびL1予測が行われるかどうかを示すL1予測フラグpredFlagL1N
、L0の動きベクトルmvL0N、L1の動きベクトルmvL1Nを出力する(ステップS101)

ステップS101の詳細な処理手順については図15のフローチャートを用いて後ほど詳
細に説明する。
続いて、動画像符号化装置のインター予測情報導出部104の時間マージ候補の参照イ
ンデックス導出部131及び動画像復号装置のインター予測情報導出部205の時間マー
ジ候補の参照インデックス導出部231では、符号化または復号対象ブロックに隣接する
予測ブロックから時間マージ候補の参照インデックスを導出する(ステップS102)。
スライスタイプslice_typeがPスライスで時間マージ候補のインター予測情報を用いてイ
ンター予測を行う場合は、L0予測(Pred_L0)を行うために、L0の参照インデックス
だけを導出し、スライスタイプslice_typeがBスライスで時間マージ候補のインター予測
情報を用いてインター予測を行う場合は、双予測(Pred_BI)を行うために、L0とL1
のそれぞれの参照インデックスを導出する。ステップS102の詳細な処理手順について
は図16のフローチャートを用いて後ほど詳細に説明する。
続いて、動画像符号化装置のインター予測情報導出部104の時間マージ候補生成部1
32及び動画像復号装置のインター予測情報導出部205の時間マージ候補生成部232
では、異なる時間のピクチャからの時間マージ候補を導出し、利用できるかどうかを示す
フラグavailableFlagCol、L0予測が行われるかどうかを示すL0予測フラグpredFlagL0
ColおよびL1予測が行われるかどうかを示すL1予測フラグpredFlagL1Col、及びL0の
動きベクトルmvL0N、L1の動きベクトルmvL1Nを出力する(ステップS103)。ステッ
プS103の詳細な処理手順については図17のフローチャートを用いて後ほど詳細に説
明する。
続いて、動画像符号化装置のインター予測情報導出部104のマージ候補登録部133
及び動画像復号装置のインター予測情報導出部205のマージ候補登録部233では、マ
ージ候補リストmergeCandListを作成し、予測ベクトルの候補A,B,C,D,E,Co
lを追加する(ステップS104)。ステップS104の詳細な処理手順については図2
4のフローチャートを用いて後ほど詳細に説明する。
続いて、動画像符号化装置のインター予測情報導出部104のマージ候補同一判定部1
34及び動画像復号装置のインター予測情報導出部205のマージ候補同一判定部234
では、マージ候補リストmergeCandList内で、マージ候補が同じ参照インデックスの動き
ベクトルが同じ値を持っている場合に、最も小さい順番のマージ候補を除いてそのマージ
候補を取り除く(ステップS105)。
続いて、動画像符号化装置のインター予測情報導出部104のマージ候補数制限部13
5及び動画像復号装置のインター予測情報導出部205のマージ候補数制限部235では
、マージ候補リストmergeCandList内に登録されているマージ候補の数をカウントし、マ
ージ候補リストmergeCandList内に登録されているマージ候補数numMergeCandが、最終マ
ージ候補数finalNumMergeCandより大きい場合(ステップS106のYES)、マージ候
補リストmergeCandList内のインデックスiが(finalNumMergeCand-1)よりも大きいすべて
のマージ候補を削除することでマージ候補を最終マージ候補数finalNumMergeCandに制限
し、マージ候補リストmergeCandList内に登録されているマージ候補数numMergeCandの値
を最終マージ候補数finalNumMergeCandに更新する(ステップS107)。
続いて、動画像符号化装置のインター予測情報導出部104のマージ候補補充部136
及び動画像復号装置のインター予測情報導出部205のマージ候補補充部236では、マ
ージ候補リストmergeCandList内に登録されているマージ候補数numMergeCandが、最終マ
ージ候補数finalNumMergeCandより小さい場合(ステップS108のYES)、マージ候
補リストmergeCandList内に登録されているマージ候補数numMergeCandが最終マージ候補
数finalNumMergeCandを上限としてマージ候補を補充し、マージ候補リストmergeCandList
内に登録されているマージ候補数numMergeCandの値を最終マージ候補数finalNumMergeCan
dに更新する(ステップS109)。最終マージ候補数finalNumMergeCandを上限として、
Pスライスでは、異なる参照インデックスで動きベクトルが(0,0)(水平および垂直
成分がともに0)で予測モードがL0予測(Pred_L0)のマージ候補を追加する。Bスラ
イスでは、すでに登録されているマージ候補同士のL0予測とL1予測の組み合わせを変
更した予測モードが双予測(Pred_BI)のマージ候補や、異なる参照インデックスで動き
ベクトルが(0,0)で予測モードが双予測(Pred_BI)のマージ候補を追加する。
本実施の形態においては、スライス単位で最終マージ候補数finalNumMergeCandを固定
した数に設定している。最終マージ候補数finalNumMergeCandを固定する理由は最終マー
ジ候補数finalNumMergeCandがマージ候補リストの構築状態に応じて変動すると、エント
ロピー復号とマージ候補リストの構築に依存関係が生じ、復号側では予測ブロック毎にマ
ージ候補リストを構築し最終マージ候補数finalNumMergeCandを導出してからでないと、
マージインデックスをエントロピー復号することができず、マージインデックスの復号に
遅延が生じるとともにエントロピー復号が複雑になるためである。さらに、エントロピー
復号が異なる時間のピクチャの予測ブロックから導出されたマージ候補Colを含むマージ
候補リストの構築状態に依存すると、別のピクチャの符号化ビット列の復号時にエラーが
発生した際に現在のピクチャの符号化ビット列もそのエラーの影響を受けて正常な最終マ
ージ候補数finalNumMergeCandを導出することができず正常にエントロピー復号を続ける
ことができない問題がある。本実施の形態の様にスライス単位で最終マージ候補数finalN
umMergeCandを固定した数に設定すると、予測ブロック単位での最終マージ候補数finalNu
mMergeCandの導出が不要となり、マージ候補リストの構築と独立して、マージインデック
スをエントロピー復号することができるとともに、別のピクチャの符号化ビット列の復号
時にエラーが発生してもその影響を受けずに現在のピクチャの符号化ビット列のエントロ
ピー復号を続けることができる。
次に、図14のステップS101の処理手順である符号化または復号対象ブロックに隣
接する予測ブロックNからのマージ候補Nの導出方法について詳細に説明する。図15は
図14のステップS101の空間マージ候補導出処理手順を説明するフローチャートであ
る。Nには隣接する予測ブロックの領域を表すA(左側)、B(上側)、C(右上)、D
(左下)またはE(左上)が入る。なお、本実施の形態においては、空間マージ候補数の
上限値maxNumSpatialMergeCandを4とし、隣接する5つの予測ブロックから最大4つの空
間マージ候補を導出する。なお、スライス単位でマージ候補リストmergeCandListに登録
される空間マージ候補数の上限値maxNumSpatialMergeCandを設定することもできる。空間
マージ候補数の上限値maxNumSpatialMergeCandに大きな値を設定するとマージ候補の選択
の幅が広がるため符号化効率が向上するが、マージ候補の同一判定の対象となるマージ候
補数が増加するためマージ候補の同一判定の処理量が増大する。そこで、処理量を削減す
るために、スライス単位で空間マージ候補数の上限値maxNumSpatialMergeCandを設定し、
空間マージ候補導出の処理量やマージ候補同一判定の処理量を制御してもよい。例えば、
スライスタイプがPスライスの場合、本実施の形態では最終マージ候補数finalNumMergeC
andを3としているので、4つの空間マージ候補を導出しても図14のステップS107
の処理で削除される可能性が高くなるため、空間マージ候補数の上限値maxNumSpatialMer
geCandを3または2としても符号化効率の低下を小さく抑えて動画像符号化装置のインタ
ー予測情報導出部104のマージ候補同一判定部134及び動画像復号装置のインター予
測情報導出部205のマージ候補同一判定部234でのマージ候補同一判定処理の処理量
を削減することができる。
図15で、変数NをAとして符号化または復号対象の予測ブロックの左側に隣接する予
測ブロックAの符号化情報を調べてマージ候補Aを導出し、変数NをBとして上側に隣接
する予測ブロックBの符号化情報を調べてマージ候補Bを導出し、変数NをCとして右上
側に隣接する予測ブロックCの符号化情報を調べてマージ候補Cを導出し、変数NをDと
して左下側に隣接する予測ブロックDの符号化情報を調べてマージ候補Dを導出し、変数
NをEとして左上側に隣接する予測ブロックEの符号化情報を調べてマージ候補Eを導出
する(ステップS1101〜ステップS1112)。
まず、これまでに導出できた(availableFlagが1となった)空間マージ候補の合計が
空間マージ候補数の上限値maxNumSpatialMergeCandの場合(ステップS1102のYES
)、すなわち4つの空間マージ候補が導出された場合、マージ候補NのフラグavailableF
lagNを0に設定し(ステップS1105)、マージ候補Nの動きベクトルmvL0N, mvL1Nの
値を共に(0,0)に設定し(ステップS1106)、マージ候補NのフラグpredFlagL0
N、predFlagL1Nの値を共に0に設定し(ステップS1107)、本空間マージ候補導出処
理を終了する。
本実施の形態においては、隣接する予測ブロックから4つのマージ候補を導出するので、
既に4つの空間マージ候補が導出された場合はそれ以上の空間マージ候補の導出処理を行
う必要がない。
一方、これまでに導出できた(availableFlagが1となった)空間マージ候補の合計が
空間マージ候補数の上限値maxNumSpatialMergeCandでない場合(ステップS1102のN
O)、符号化または復号対象の予測ブロックに隣接する予測ブロックNを特定し、それぞ
れの予測ブロックNが利用できる場合は符号化情報格納メモリ115または210から予
測ブロックNの符号化情報を取得する(ステップS1103)。
隣接する予測ブロックNが利用できないか、予測ブロックNの予測モードPredModeがイ
ントラ予測(MODE_INTRA)である場合(ステップS1104のNO)、マージ候補Nのフ
ラグavailableFlagNの値を0に設定し(ステップS1105)、マージ候補Nの動きベク
トルmvL0N, mvL1Nの値を共に(0,0)に設定し(ステップS1106)、マージ候補N
のフラグpredFlagL0N、predFlagL1Nの値を共に0に設定する(ステップS1107)。
一方、隣接する予測ブロックNが利用でき、予測ブロックNの予測モードPredModeがイ
ントラ予測(MODE_INTRA)でない場合(ステップS1104のYES)、予測ブロックN
のインター予測情報をマージ候補Nのインター予測情報とする。マージ候補Nのフラグav
ailableFlagNの値を1に設定し(ステップS1108)、マージ候補Nの動きベクトルmv
L0N, mvL1Nをそれぞれ予測ブロックNの動きベクトルmvL0N[xN][yN], mvL1N[xN][yN]と同
じ値に設定し(ステップS1109)、マージ候補Nの参照インデックスrefIdxL0N, ref
IdxL1Nをそれぞれ予測ブロックNの参照インデックスrefIdxL0[xN][yN], refIdxL1[xN][y
N]と同じ値に設定し(ステップS1110)、マージ候補NのフラグpredFlagL0N, predF
lagL1Nをそれぞれ予測ブロックNのフラグpredFlagL0[xN][yN], predFlagL1[xN][yN]に設
定する(ステップS1111)。ここで、xN、yNはピクチャ内での予測ブロックNの左上
の画素の位置を示すインデックスである。
以上のステップS1102〜ステップS1111の処理をN=A,B,C,D,Eにつ
いてそれぞれ繰り返す(ステップS1101〜ステップS1112)。
次に、図14のS102の時間マージ候補の参照インデックスを導出する方法について
詳細に説明する。時間マージ候補のL0とL1のそれぞれの参照インデックスを導出する
本実施の形態においては、空間マージ候補の参照インデックス、即ち符号化または復号
対象ブロックに隣接する予測ブロックで利用された参照インデックスを利用して時間マー
ジ候補の参照インデックスを導出する。これは、時間マージ候補が選択される場合におい
て、符号化または復号対象の予測ブロックの参照インデックスは空間マージ候補となる符
号化または復号対象ブロックに隣接する予測ブロックの参照インデックスと高い相関を持
つからである。特に、本実施の形態においては、符号化または復号対象の予測ブロックの
左の辺に隣接する予測ブロックA、及び上の辺に隣接する予測ブロックBの参照インデッ
クスだけを利用する。なぜなら、空間マージ候補でもある隣接する予測ブロックA,B,
C,D,Eの中でも符号化または復号対象の予測ブロックの辺に接している予測ブロック
A,Bは、符号化または復号対象の予測ブロックの頂点のみに接している予測ブロックC
,D,Eよりも相関が高いからである。相対的に相関の低い予測ブロックC,D,Eを利
用せずに、利用する予測ブロックを予測ブロックA,Bに限定することで、時間マージ候
補の参照インデックスの導出による符号化効率の改善効果を得るとともに、時間マージ候
補の参照インデックス導出処理に関する演算量及びメモリアクセス量を削減する。
本実施の形態では、予測ブロックA、予測ブロックBが共にLX予測(L0またはL1
で、時間マージ候補の参照インデックスの導出対象のリストをLXとし、LXを用いた予
測をLX予測とする。以下、断りのない限り、この意味で用いる。)を行う場合は予測ブ
ロックA、予測ブロックBのLXの参照インデックスの値の小さい方を時間マージ候補の
LXの参照インデックスの値として採用する。ただし、予測ブロックA、予測ブロックB
のいずれか一方しかLX予測を行わない場合はLX予測を行う方の予測ブロックのLXの
参照インデックスの値を時間マージ候補のLXの参照インデックスの値として採用し、予
測ブロックA、予測ブロックBが共にLX予測を行わない場合は時間マージ候補のLXの
参照インデックスの値をデフォルト値の0とする。
予測ブロックA、予測ブロックBが共にLX予測を行わない場合に時間マージ候補のL
Xの参照インデックスのデフォルト値を0とする理由は、インター予測において参照イン
デックスの値が0に対応する参照ピクチャが最も選択される確率が高いからである。ただ
し、これに限定されず、参照インデックスのデフォルト値を0以外の値(1、2など)と
しても良いし、シーケンス単位、ピクチャ単位、またはスライス単位で符号化ストリーム
内に参照インデックスのデフォルト値を示すシンタックス要素を設置し伝送できるように
して、符号化側で選択できるようにしても良い。
図16は本実施の形態の図14のステップS102の時間マージ候補の参照インデック
スの導出処理手順を説明するフローチャートである。まず、符号化情報格納メモリ115
または210から左に隣接する予測ブロックAの符号化情報、及び予測ブロックBの符号
化情報を取得する(ステップS2101、ステップS2102)。
続くステップS2104からステップS2110までの処理をL0,L1それぞれにおい
て行う(ステップS2103〜S2111)。なお、時間マージ候補のL0の参照インデ
ックスを導出する際にはLXはL0に設定され、L1の参照インデックスを導出する際に
はLXはL1に設定される。ただし、スライスタイプslice_typeがPスライスの場合、イ
ンター予測モードとしてL0予測(Pred_L0)だけがあり、L1予測(Pred_L1)、双予測
(Pred_BI)がないので、L1に纏わる処理を省略することができる。
予測ブロックAのLX予測を行うかどうかを示すフラグpredFlagLX[xA][yA]と予測ブロ
ックBのLX予測を行うかどうかを示すフラグpredFlagLX[xB][yB]が共に0でない場合(
ステップS2104のYES)、時間マージ候補のLXの参照インデックスrefIdxLXCol
を予測ブロックAのLXの参照インデックスrefIdxLX[xA][yA]と予測ブロックBのLXの
参照インデックスrefIdxLX[xB][yB]の値の小さい方と同じ値に設定する(ステップS21
05)。ここで、xA、yAはピクチャ内での予測ブロックAの左上の画素の位置を示すイン
デックスである。ここで、xB、yBはピクチャ内での予測ブロックBの左上の画素の位置を
示すインデックスである。
なお、本実施の形態においては、予測ブロックN(N=A,B)において、予測ブロッ
クNが符号化または復号対象のスライス外で利用できない場合や予測ブロックNが符号化
または復号順序で符号化または復号対象の予測ブロックよりも後のために符号化または復
号されておらず利用できない場合や予測ブロックNの予測モードPredModeがインター予測
(MODE_INTER)の場合、L0予測を利用するかどうかを示すフラグpredFlagL0[xN][yN]、
予測ブロックNのL1予測を利用するかどうかを示すフラグpredFlagL1[xN][yN]は共に0
である。ここで、xN、yNはピクチャ内での予測ブロックNの左上の画素の位置を示すイン
デックスである。
予測ブロックNの予測モードPredModeがインター予測(MODE_INTER)で、インター予測モ
ードがL0予測(Pred_L0)の場合、予測ブロックNのL0予測を利用するかどうかを示
すフラグpredFlagL0[xN][yN]は1, L1予測を利用するかどうかを示すフラグpredFlagL1
[xN][yN]は0である。予測ブロックNのインター予測モードがL1予測(Pred_L1)の場
合、予測ブロックNのL0予測を利用するかどうかを示すフラグpredFlagL0[xN][yN]は0
, L1予測を利用するかどうかを示すフラグpredFlagL1[xN][yN]は1である。予測ブロッ
クNのインター予測モードが双予測(Pred_BI)の場合、予測ブロックNのL0予測を利
用するかどうかを示すフラグpredFlagL0[xN][yN]、L1予測を利用するかどうかを示すフ
ラグpredFlagL1[xN][yN]は共に1である。
予測ブロックAのLX予測を行うかどうかを示すフラグpredFlagLX[xA][yA]が0でなく
、予測ブロックBのLX予測を行うかどうかを示すフラグpredFlagLX[xB][yB]が0である
場合(ステップS2104のNOで、ステップS2106のYES)、時間マージ候補の
LXの参照インデックスrefIdxLXColを予測ブロックAのLXの参照インデックスrefIdxL
X[xA][yA]と同じ値に設定する(ステップS2107)。ここで、xA、yAはピクチャ内で
の予測ブロックAの左上の画素の位置を示すインデックスであり、xB、yBはピクチャ内で
の予測ブロックBの左上の画素の位置を示すインデックスである。
予測ブロックAのLX予測を行うかどうかを示すフラグpredFlagLX[xA][yA]が0であり
、予測ブロックBのLX予測を行うかどうかを示すフラグpredFlagLX[xB][yB]が0でない
場合(ステップS2104のNOで、ステップS2106のNOで、ステップS2108
のYES)、時間マージ候補のLXの参照インデックスrefIdxLXColを予測ブロックBの
LXの参照インデックスpredFlagLX[xB][yB]と同じ値に設定する(ステップS2109)
予測ブロックAのLX予測を行うかどうかを示すフラグpredFlagLX[xA][yA]と予測ブロ
ックBのLX予測を行うかどうかを示すフラグpredFlagLX[xB][yB]が共に0である場合(
ステップS2104のNOで、ステップS2106のNOで、ステップS2108のNO
)、時間マージ候補のLXの参照インデックスrefIdxLXColをデフォルト値の0に設定す
る(ステップS2110)。
L0,L1それぞれにおいて行うステップS2104からステップS2110までの処
理を行い(ステップS2103〜S2111)、本参照インデックス導出処理を終了する
次に、図14のS103の異なる時間のマージ候補の導出方法について詳細に説明する
。図17は図14のステップS103の時間マージ候補導出処理手順を説明するフローチ
ャートである。
まず、図26のビットストリームの符号化および復号の共通規則であるシンタックス規
則の一例に示すように、スライス単位でスライスヘッダに記述されるスライスタイプslic
e_typeと時間方向の予測動きベクトルの候補、またはマージ候補を導出する際に用いる異
なる時間のピクチャcolPicが処理対象の予測ブロックが含まれるピクチャのL0の参照リ
スト或いはL1の参照リストのどちらに登録されている参照ピクチャを使用するかを示す
フラグcollocated_from_l0_flagにより、異なる時間のピクチャcolPicを導出する(ステ
ップS3101)。
図18は図17のステップS3101の異なる時間のピクチャcolPicの導出処理手順を
説明するフローチャートである。スライスタイプslice_typeがBスライスで、フラグcoll
ocated_from_l0_flagが0の場合(ステップS3201のYES、ステップS3202の
YES)、RefPicList1[0]、すなわち参照リストL1の参照インデックスが0のピクチャ
が異なる時間のピクチャcolPicとなる(ステップS3203)。そうでない場合、すなわ
ちスライスタイプslice_typeがBスライスで前述のフラグcollocated_from_l0_flagが1
の場合(ステップS3201のYES、ステップS3202のNO)、またはスライスタ
イプslice_typeがPスライスの場合(ステップS3201のNO、S3204のYES)
、RefPicList0[0]、すなわち参照リストL0の参照インデックスが0のピクチャが異なる
時間のピクチャcolPicとなる(ステップS3205)。
次に、図17のフローチャートに戻り、異なる時間の予測ブロックcolPUを導出し、符
号化情報を取得する(ステップS3102)。
図19は図17のステップS3102の異なる時間のピクチャcolPicの予測ブロックco
lPUの導出処理手順を説明するフローチャートである。
まず、異なる時間のピクチャcolPic内で処理対象の予測ブロックと同一位置の右下(外
側)に位置する予測ブロックを異なる時間の予測ブロックcolPUとする(ステップS33
01)。この予測ブロックは図9の予測ブロックT0に相当する。
次に、異なる時間の予測ブロックcolPUの符号化情報を取得する(ステップS3302
)。異なる時間の予測ブロックcolPUのPredModeが利用できないか、異なる時間の予測ブ
ロックcolPUの予測モードPredModeがイントラ予測(MODE_INTRA)である場合(ステップ
S3303のYES、ステップS3304のYES)、異なる時間のピクチャcolPic内で
処理対象の予測ブロックと同一位置の中央左上に位置する予測ブロックを異なる時間の予
測ブロックcolPUとする(ステップS3305)。この予測ブロックは図9の予測ブロッ
クT1に相当する。
次に、図17のフローチャートに戻り、符号化または復号対象の予測ブロックと同位置
の他ピクチャの予測ブロックから導出されるL0の予測動きベクトルmvL0Colと時間マー
ジ候補Colが有効か否かを示すフラグavailableFlagL0Colを導出するとともに(ステッ
プS3103)、L1の予測動きベクトルmvL1Colと時間マージ候補Colが有効か否か
を示すフラグavailableFlagL1Colを導出する(ステップS3104)。さらに、フラグav
ailableFlagL0Col またはフラグavailableFlagL1Colが1の場合に、時間マージ候補Col
が有効か否かを示すフラグavailableFlagColを1に設定する。
図20は図17のステップS3103、ステップS3104の時間マージ候補のインタ
ー予測情報の導出処理手順を説明するフローチャートである。L0またはL1で、時間マ
ージ候補の導出対象のリストをLXとし、LXを用いた予測をLX予測とする。以下、断
りのない限り、この意味で用いる。時間マージ候補のL0の導出処理であるステップS3
103として呼び出される際には、LXがL0となり、時間マージ候補のL1の導出処理
であるステップS3104として呼び出される際には、LXがL1となる。
異なる時間の予測ブロックcolPUの予測モードPredModeがイントラ予測(MODE_INTRA)
か、利用できない場合(ステップS3401のNO、ステップS3402のNO)、フラ
グavailableFlagLXColとフラグpredFlagLXColを共に0とし(ステップS3403)、動
きベクトルmvLXColを(0,0)として(ステップS3404)、本時間マージ候補のイ
ンター予測情報の導出処理を終了する。
予測ブロックcolPUが利用できて予測モードPredModeがイントラ予測(MODE_INTRA)で
ない場合(ステップS3401のYES、ステップS3402のYES)、以下の手順で
mvColとrefIdxColとavailableFlagColを導出する。
予測ブロックcolPUのL0予測が利用されているかどうかを示すフラグPredFlagL0[xPCo
l][yPCol]が0の場合(ステップS3405のYES)、予測ブロックcolPUの予測モード
はPred_L1であるので、動きベクトルmvColが予測ブロックcolPUのL1の動きベクトルで
あるMvL1[xPCol][yPCol]と同じ値に設定され(ステップS3406)、参照インデックス
refIdxColがL1の参照インデックスRefIdxL1[xPCol][yPCol]と同じ値に設定され(ステ
ップS3407)、リストListColがL1に設定される(ステップS3408)。ここで
、xPCol、yPColは異なる時間のピクチャcolPic内での予測ブロックcolPUの左上の画素の
位置を示すインデックスである。
一方、予測ブロックcolPUのL0予測フラグPredFlagL0[xPCol][yPCol]が0でない場合
(図20のステップS3405のNO)、予測ブロックcolPUのL1予測フラグPredFlagL
1[xPCol][yPCol]が0かどうかを判定する。予測ブロックcolPUのL1予測フラグPredFlag
L1[xPCol][yPCol]が0の場合(ステップS3409のYES)、動きベクトルmvColが予
測ブロックcolPUのL0の動きベクトルであるMvL0[xPCol][yPCol]と同じ値に設定され(
ステップS3410)、参照インデックスrefIdxColがL0の参照インデックスRefIdxL0[
xPCol][yPCol]と同じ値に設定され(ステップS3411)、リストListColがL0に設定
される(ステップS3412)。
予測ブロックcolPUのL0予測フラグPredFlagL0[xPCol][yPCol]と予測ブロックcolPUの
L1予測フラグPredFlagL1[xPCol][yPCol]が共に0でない場合(ステップS3405のN
O、ステップS3409のNO)、予測ブロックcolPUのインター予測モードは双予測(P
red_BI)であるので、L0、L1の2つの動きベクトルから、一方を選択する(ステップ
S3413)。
図21は予測ブロックcolPUのインター予測モードが双予測(Pred_BI)のときの時間マ
ージ候補のインター予測情報の導出処理手順を示すフローチャートである。
まず、すべての参照リストに登録されているすべてのピクチャのPOCが現在の符号化
または復号対象ピクチャのPOCより小さいかどうかを判定し(ステップS3501)、
予測ブロックcolPUのすべての参照リストであるL0及びL1に登録されているすべての
ピクチャのPOCが現在の符号化または復号対象ピクチャのPOCより小さい場合で(ス
テップS3501のYES)、LXがL0、即ち符号化または復号対象ピクチャのL0の
動きベクトルの予測ベクトル候補を導出している場合(ステップS3502のYES)、
予測ブロックcolPUのL0の方のインター予測情報を選択し、LXがL1、即ち符号化ま
たは復号対象ピクチャのL1の動きベクトルの予測ベクトル候補を導出している場合(ス
テップS3502のNO)、予測ブロックcolPUのL1の方のインター予測情報を選択す
る。一方、予測ブロックcolPUのすべての参照リストL0及びL1に登録されているピク
チャのPOCの少なくとも1つが現在の符号化または復号対象ピクチャのPOCより大き
い場合で(ステップS3501のNO)、フラグcollocated_from_l0_flagが0の場合(
ステップS3503のYES)、予測ブロックcolPUのL0の方のインター予測情報を選
択し、フラグcollocated_from_l0_flagが1の場合(ステップS3503のNO)、予測
ブロックcolPUのL1の方のインター予測情報を選択する。
予測ブロックcolPUのL0の方のインター予測情報を選択する場合(ステップのYES
、ステップS3503のYES)、動きベクトルmvColがMvL0[xPCol][yPCol]と同じ値に
設定され(ステップS3504)、参照インデックスrefIdxColがRefIdxL0[xPCol][yPCol
]と同じ値に設定され(ステップS3505)、リストListColがL0に設定される(ステ
ップS3506)。
予測ブロックcolPUのL1の方のインター予測情報を選択する場合(ステップS250
2のNO、ステップS3503のNO)、動きベクトルmvColがMvL1[xPCol][yPCol]と同
じ値に設定され(ステップS3507)、参照インデックスrefIdxColがRefIdxL1[xPCol]
[yPCol]と同じ値に設定され(ステップS3508)、リストListColがL1に設定される
(ステップS3509)。
図20に戻り、予測ブロックcolPUからインター予測情報が取得できたらフラグavailab
leFlagLXColとフラグpredFlagLXColを共に1とする(ステップS3414)。
続いて、動きベクトルmvColをスケーリングして時間マージ候補のLXの動きベクトルm
vLXColとする(ステップS3415)。この動きベクトルのスケーリング演算処理手順を
図22及び図23を用いて説明する。
図22は図20のステップS3415の動きベクトルのスケーリング演算処理手順を示
すフローチャートである。
異なる時間のピクチャcolPicのPOCから、予測ブロックcolPUのリストListColで参照
する参照インデックスrefIdxColに対応する参照ピクチャのPOCを減算してピクチャ間
距離tdを導出する(ステップS3601)。なお、異なる時間のピクチャcolPicよりも
予測ブロックcolPUのリストListColで参照する参照ピクチャのPOCの方が表示順序で前
の場合、ピクチャ間距離tdは正の値となり、異なる時間のピクチャcolPicよりも予測ブ
ロックcolPUのリストListColで参照する参照ピクチャのPOCの方が表示順序で後の場合
、ピクチャ間距離tdは負の値となる。
td=異なる時間のピクチャcolPicのPOC−予測ブロックcolPUのリストListColで
参照する参照ピクチャのPOC
現在の符号化または復号対象ピクチャのPOCから図14のステップS102で導出さ
れた時間マージ候補のLXの参照インデックスに対応する参照ピクチャのPOCを減算し
てピクチャ間距離tbを導出する(ステップS3602)。なお、現在の符号化または復
号対象ピクチャよりも現在の符号化または復号対象ピクチャのリストLXで参照する参照
ピクチャの方が表示順序で前の場合、ピクチャ間距離tbは正の値となり、現在の符号化
または復号対象ピクチャのリストLXで参照する参照ピクチャの方が表示順序で後の場合
、ピクチャ間距離tbは負の値となる。
tb=現在の符号化または復号対象ピクチャのPOC−時間マージ候補のLXの参照
インデックスに対応する参照ピクチャのPOC
続いて、ピクチャ間距離tdとtbを比較し(ステップS3603)、ピクチャ間距離
tdとtbが等しい場合(ステップS3603のYES)、時間マージ候補のLXの動き
ベクトルmvLXColを動きベクトルmvColと同じ値に設定して(ステップS3604)、本ス
ケーリング演算処理を終了する。
mvLXCol=mvCol
一方、ピクチャ間距離tdとtbが等しくない場合(ステップS3603のNO)、次
式によりmvColにスケーリング係数tb/tdを乗じることでスケーリング演算処理を行
い(ステップS3605)、スケーリングされた時間マージ候補のLXの動きベクトルmv
LXColを得る。
mvLXCol=tb / td * mvCol
また、ステップS3605のスケーリング演算を整数精度の演算で行う場合の例を図2
3に示す。図23のステップS3606〜ステップS3608の処理が、図22のステッ
プS3605の処理に相当する。
まず、図22のフローチャートと同様に、ピクチャ間距離tdとピクチャ間距離tbを
導出する(ステップS3601、ステップS3602)。
続いて、ピクチャ間距離tdとtbを比較し(ステップS3603)、ピクチャ間距離
tdとtbが等しい場合(ステップS3603のYES)、図22のフローチャートと同
様に、時間マージ候補のLXの動きベクトルmvLXColを動きベクトルmvColと同じ値に設定
して(ステップS3604)、本スケーリング演算処理を終了する。
mvLXCol=mvCol
一方、ピクチャ間距離tdとtbが等しくない場合(ステップS3603のNO)、次
式により変数txを導出する(ステップS3606)。
tx = ( 16384 + Abs( td / 2 ) ) / td
続いて、次式によりスケーリング係数DistScaleFactorを導出する(ステップS360
7)。
DistScaleFactor = ( tb * tx + 32 ) >> 6
続いて、次式により、スケーリングされた時間マージ候補のLXの動きベクトルmvLXCo
lを得る(ステップS3608)。
mvLXCol = ClipMv( Sign( DistScaleFactor * mvCol ) * ( (Abs( DistScaleFactor *
mvCol ) + 127 ) >> 8 ) )
次に、図14のステップS104のマージ候補をマージ候補リストに登録する方法につ
いて詳細に説明する。図24はマージ候補リストへのマージ候補の登録処理手順を示すフ
ローチャートである。本方式では、優先順位をつけて、優先順位の高いものからマージ候
補リストmergeCandListに予測動きベクトルの候補を登録することで、マージインデック
スmerge_idx[x0][y0]の符号量を削減する。優先順位の高い要素をマージ候補リストの前
方に配置することで、符号量を削減する。例えば、マージ候補リストmergeCandListの要
素が5個の場合、マージ候補リストのインデックス0を「0」、インデックス1を「10
」、インデックス2を「110」、インデックス3を「1110」、インデックス4を「
11110」とすることで、インデックス0を表す符号量が1ビットとなり、インデック
ス0に発生頻度が高いと考えられる要素を登録することで、符号量を削減する。
マージ候補リストmergeCandListはリスト構造を成し、マージ候補リスト内部の所在を
示すマージインデックスと、インデックスに対応するマージ候補を要素として格納する記
憶領域が設けられている。マージインデックスの数字は0から開始され、マージ候補リス
トmergeCandListの記憶領域に、マージ候補が格納される。以降の処理では、マージ候補
リストmergeCandListに登録されたマージインデックスiのマージ候補となる予測ブロッ
クは、mergeCandList[i]で表すこととし、マージ候補リストmergeCandListとは配列表記
をすることで区別することとする。
まず、availableFlagAが1の場合(ステップS4101のYES)、マージ候補リスト
mergeCandListの先頭にマージ候補Aを登録する(ステップS4102)。
続いて、availableFlagBが1の場合(ステップS4103のYES)、マージ候補リス
トmergeCandListの最後にマージ候補Bを登録する(ステップS4104)。
続いて、availableFlagCが1の場合(ステップS4105のYES)、マージ候補リス
トmergeCandListの最後にマージ候補Cを登録する(ステップS4106)。
続いて、availableFlagDが1の場合(ステップS4107のYES)、マージ候補リス
トmergeCandListの最後にマージ候補Dを登録する(ステップS4108)。
続いて、availableFlagEが1の場合(ステップS4109のYES)、マージ候補リス
トmergeCandListの最後にマージ候補Eを登録する(ステップS4110)。
続いて、availableFlagColが1の場合(ステップS4111のYES)、マージ候補リ
ストmergeCandListの最後にマージ候補Colを登録する(ステップS4112)。
なお、マージモードにおいて、左に隣接する予測ブロックA及び上に隣接する予測ブロ
ックBは符号化または復号対象の予測ブロックと一体となる動きになることが多いので、
予測ブロックA、Bのインター予測情報が取得できる場合には、マージ候補A、Bを他の
マージ候補C,D,E,Colよりも優先的にマージ候補リストの前方に登録する。
図12において、動画像符号化装置のインター予測情報導出部104の符号化情報選択
部137では、マージ候補リストに登録されているマージ候補の中から、マージ候補を選
択し、マージインデックスおよびマージインデックスに対応するマージ候補のインター予
測情報を動き補償予測部105に供給する。
マージ候補の選択においては、予測方法決定部107と同様の方法を用いることができ
る。それぞれのマージ候補ごとに符号化情報及び残差信号の符号量と予測画像信号と画像
信号との間の符号化歪を導出し、最も少ない発生符号量と符号化歪となるマージ候補が決
定される。それぞれのマージ候補毎にマージモードの符号化情報であるマージインデック
スのシンタックス要素merge_idxのエントロピー符号化を行い、符号化情報の符号量を算
出する。さらに、それぞれのマージ候補毎に動き補償予測部105と同様の方法で各マー
ジ候補のインター予測情報に応じて動き補償した予測画像信号と、画像メモリ101から
供給される符号化対象の画像信号との予測残差信号を符号化した予測残差信号の符号量を
算出する。符号化情報、即ちマージインデックスの符号量と予測残差信号の符号量とが加
算された総発生符号量を算出し評価値とする。
また、こうした予測残差信号を符号化後に、歪量評価の為に復号し、符号化により生じ
る元の画像信号との誤差を表す比率として符号化歪が算出される。これら総発生符号量と
符号化歪とをマージ候補毎に比較することで、少ない発生符号量と符号化歪となる符号化
情報が決定される。決定された符号化情報に対応するマージインデックスが、予測ブロッ
ク単位の第2のシンタックスパターンで表されるフラグmerge_idxとして符号化される。
尚、ここで算出される発生符号量は、符号化過程をシミュレートしたものであることが望
ましいが、簡便に近似したり、概算することも可能である。
一方、図13において、動画像符号化装置のインター予測情報導出部205の符号化情
報選択部237では、マージ候補リストに登録されているマージ候補の中から、供給され
たマージインデックスに対応するマージ候補を選択し、マージ候補のインター予測情報を
動き補償予測部206に供給するとともに、符号化情報格納メモリ210に格納する。
以上に述べた本実施の形態においては、スライス単位でマージ候補リストmergeCandLis
tに登録される最終的なマージ候補数finalNumMergeCandを設定する。以下、本実施の形態
をいくつかの実施例に分けて説明する。まず、本実施の形態の実施例1について説明する
。本実施の形態の実施例1においては、スライスタイプ毎に符号化側と復号側で共通の最
終マージ候補数finalNumMergeCandを規定する。MPEG−4 AVC/H.264等と
同様に、本実施の形態に準拠する装置、ソフトウェアまたはビットストリームは、主に目
的や用途別に定義された処理機能の集合を表すプロファイルと画像サイズやフレームレー
トにも関係する処理の負荷や使用メモリ量等の処理能力を表すレベルを定義することがで
き、プロファイルとレベルによって、装置やソフトウェアの性能、またはビットストリー
ムをデコードするのに必要な性能を示す。プロファイルまたはレベルのいずれか一方、ま
たはプロファイルとレベルの組み合わせに応じてスライスタイプ毎に最終マージ候補数fi
nalNumMergeCandの値を規定してもよいし、プロファイルやレベルに係わらずスライスタ
イプ毎に最終マージ候補数finalNumMergeCandの値を規定してもよい。例えば、Iスライ
スとPスライスのみを利用して符号化または復号するシンプルな機能で構成されるプロフ
ァイルにおいては、Pスライスの最終マージ候補数finalNumMergeCandを3に規定する。
Iスライス、Pスライスに加えてBスライスも利用して符号化または復号する複雑で符号
化効率のよい機能で構成されるプロファイルにおいては、Pスライス、及びBスライスの
最終マージ候補数finalNumMergeCandを共に同数の5に規定してもよいが、Pスライスの
最終マージ候補数finalNumMergeCandをBスライスの最終マージ候補数finalNumMergeCand
よりも小さい数である3に規定することで、Pスライスのマージインデックスの符号量を
小さく抑えるとともに、マージインデックスの符号化または復号に係わる処理量を削減す
ることができる。
スライスタイプがL0予測のみを利用できるPスライスの場合、L0予測、L1予測、
双予測を利用できるBスライスに比べて、インター予測が選択されにくいのでマージ候補
リストに登録されるマージ候補が得られにくく、またマージ候補同士のインター予測情報
が同一になりやすいので、マージ候補リストに登録されるマージ候補数は小さくなりやす
い。したがって、PスライスではBスライスよりも最終的なマージ候補数を小さく設定し
てもBスライスほど符号化効率が低下せず、マージインデックスの符号量を小さく抑える
とともに、マージインデックスの符号化または復号に係わる処理量を削減することができ
る。
符号化効率の高いBスライスではなく、Pスライスにより符号化または復号することの理
由の一つとして、Pスライスの方が処理量が少ないことがあげられる。特に、Iスライス
とPスライスのみを利用して符号化または復号するシンプルな機能で構成されるプロファ
イルは、少ない処理量で符号化または復号するために設定されるので、Pスライスの最終
マージ候補数finalNumMergeCandを小さい数に設定してマージインデックスの符号化また
は復号に係わる処理量を削減することの効果は大きい。
図25は本実施の形態の実施例1の方法による符号化側および復号側で共通の最終マー
ジ候補数finalNumMergeCandの設定処理手順を説明するフローチャートである。最終マー
ジ候補数finalNumMergeCandは符号化装置ではヘッダ情報設定部117で設定され、復号
装置では第1符号化ビット列復号部212で設定される。スライスタイプslice_typeがP
スライスの場合(図25のステップS201のYES)、最終マージ候補数finalNumMerg
eCandをPスライスの規定数(本実施の形態では3)に設定する(図25のステップS2
03)。スライスタイプslice_typeがBスライスの場合(図25のステップS201のN
O、ステップS202のYES)、最終マージ候補数finalNumMergeCandをBスライスの
規定数(本実施の形態では5)に設定する(図25のステップS204)。スライスタイ
プslice_typeがIスライスの場合(図25のステップS201のNO、ステップS202
のNO)、最終マージ候補数finalNumMergeCandを0に設定する(図25のステップS2
05)。
なお、最終マージ候補数finalNumMergeCandと同様に、プロファイルまたはレベルのい
ずれか一方、またはプロファイルとレベルの組み合わせに応じてスライスタイプ毎に空間
マージ候補数の上限値maxNumSpatialMergeCandの値を規定してもよいし、プロファイルや
レベルに係わらずスライスタイプ毎に空間マージ候補数の上限値maxNumSpatialMergeCand
の値を規定してもよい。符号化効率と処理量を考慮して、符号化効率を重視するケース(
プロファイル、レベル、またはスライスタイプ)では空間マージ候補数の上限値maxNumSp
atialMergeCandを大きな値に規定し、処理量を重視するケースでは空間マージ候補数の上
限値maxNumSpatialMergeCandを小さな値に規定する。
次に本実施の形態の実施例2について説明する。本実施の形態の実施例2では、図26
のビットストリームの符号化および復号の共通規則であるシンタックス規則の一例に示す
ように、スライス単位でスライスヘッダに最終的なマージ候補数finalNumMergeCandを示
すシンタックス要素num_merge_candを設定する。ただし、スライスタイプ毎に最終マージ
候補数の上限値を規定する。プロファイルとレベルの組み合わせに応じてスライスタイプ
毎に最終マージ候補数の上限値を規定してもよいし、プロファイルやレベルに係わらずス
ライスタイプ毎に最終マージ候補数の上限値を規定してもよい。例えば、IスライスとP
スライスのみを利用して符号化または復号するシンプルな機能で構成されるプロファイル
においては、Pスライスの最終マージ候補数の上限値を3と規定する。Iスライス、Pス
ライスに加えてBスライスも利用して符号化または復号する複雑で符号化効率のよい機能
で構成されるプロファイルにおいては、Pスライス、及びBスライスの最終マージ候補数
の上限値を共に同数の5に規定してもよいし、Pスライスの最終マージ候補数の上限値を
Bスライスの最終マージ候補数の上限値よりも小さい数に規定することもできる。
図27は本実施の形態の実施例2の方法による符号化側での最終マージ候補数finalNum
MergeCandの設定処理手順を説明するフローチャートであり、図28は本実施の形態の実
施例2の方法による復号側での最終マージ候補数finalNumMergeCandの設定処理手順を説
明するフローチャートである。最終マージ候補数finalNumMergeCandは符号化装置ではヘ
ッダ情報設定部117で設定され、復号装置では第1符号化ビット列復号部212で設定
される。符号化側ではスライスタイプslice_typeがPスライスの場合(図27のステップ
S201のYES)、最終マージ候補数finalNumMergeCandを規定されたPスライスの上
限値と同じ値または上限値を超えない値(本実施の形態では3)に設定する(図27のス
テップS206)。スライスタイプslice_typeがBスライスの場合(図27のステップS
201のNO、ステップS202のYES)、最終マージ候補数finalNumMergeCandを規
定されたBスライスの上限値と同じ値または上限値を超えない値(本実施の形態では5)
に設定する(図27のステップS207)。スライスタイプslice_typeがIスライスの場
合(図27のステップS201のNO、ステップS202のNO)、最終マージ候補数fi
nalNumMergeCandを0に設定する(図27のステップS205)。さらに、スライス単位
で設定された最終マージ候補数finalNumMergeCandを示すシンタックス要素numMergeCand
をエントロピー符号化する(図27のステップS208)。復号側ではビットストリーム
を復号してシンタックス要素numMergeCandから最終マージ候補数finalNumMergeCandを導
出する(図28のS209)。
なお、シンタックス要素max_num_spatial_merge_candの値に応じて最終マージ候補数fi
nalNumMergeCandとともに空間マージ候補数の上限値maxNumSpatialMergeCandを規定する
こともできる。この場合、最終マージ候補数finalNumMergeCandと空間マージ候補数の上
限値maxNumSpatialMergeCandは同じ値を規定してもよいし、別の値を規定してもよい。プ
ロファイル、レベル、またはスライスタイプに応じて、符号化効率と処理量を考慮して、
符号化効率を重視するケースでは空間マージ候補数の上限値maxNumSpatialMergeCandを大
きな値に規定し、処理量を重視するケースでは空間マージ候補数の上限値maxNumSpatialM
ergeCandを小さな値に規定する。
または、図26に示すように、スライス単位でスライスヘッダに空間マージ候補数の上
限値maxNumSpatialMergeCandを示すシンタックス要素max_num_spatial_merge_candを設定
することもできる。符号化側でシンタックス要素max_num_spatial_merge_candを符号化し
、復号側ではビットストリームを復号して得られたシンタックス要素max_num_spatial_me
rge_candの値に応じた空間マージ候補数の上限値maxNumSpatialMergeCandに基づいて復号
処理を行う。この場合、符号化側で符号化側の処理能力の範囲内で空間マージ候補数の上
限値maxNumSpatialMergeCandを設定することで、空間マージ候補導出の処理量やマージ候
補同一判定の処理量を制御する事ができる。
以上述べた実施の形態の動画像符号化装置が出力する動画像の符号化ストリームは、実
施の形態で用いられた符号化方法に応じて復号することができるように特定のデータフォ
ーマットを有しており、動画像符号化装置に対応する動画像復号装置がこの特定のデータ
フォーマットの符号化ストリームを復号することができる。
動画像符号化装置と動画像復号装置の間で符号化ストリームをやりとりするために、有
線または無線のネットワークが用いられる場合、符号化ストリームを通信路の伝送形態に
適したデータ形式に変換して伝送してもよい。その場合、動画像符号化装置が出力する符
号化ストリームを通信路の伝送形態に適したデータ形式の符号化データに変換してネット
ワークに送信する動画像送信装置と、ネットワークから符号化データを受信して符号化ス
トリームに復元して動画像復号装置に供給する動画像受信装置とが設けられる。
動画像送信装置は、動画像符号化装置が出力する符号化ストリームをバッファするメモ
リと、符号化ストリームをパケット化するパケット処理部と、パケット化された符号化デ
ータをネットワークを介して送信する送信部とを含む。動画像受信装置は、パケット化さ
れた符号化データをネットワークを介して受信する受信部と、受信された符号化データを
バッファするメモリと、符号化データをパケット処理して符号化ストリームを生成し、動
画像復号装置に提供するパケット処理部とを含む。
以上の符号化及び復号に関する処理は、ハードウェアを用いた伝送、蓄積、受信装置と
して実現することができるのは勿論のこと、ROM(リード・オンリ・メモリ)やフラッ
シュメモリ等に記憶されているファームウェアや、コンピュータ等のソフトウェアによっ
ても実現することができる。そのファームウェアプログラム、ソフトウェアプログラムを
コンピュータ等で読み取り可能な記録媒体に記録して提供することも、有線あるいは無線
のネットワークを通してサーバから提供することも、地上波あるいは衛星ディジタル放送
のデータ放送として提供することも可能である。
以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構
成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例
も本発明の範囲にあることは当業者に理解されるところである。
101 画像メモリ、 117 ヘッダ情報設定部、 102 動きベクトル検出部、
103 差分動きベクトル算出部、 104 インター予測情報導出部、 105 動
き補償予測部、 106 イントラ予測部、 107 予測方法決定部、 108 残差
信号生成部、 109 直交変換・量子化部、 118 第1符号化ビット列生成部、1
10 第2符号化ビット列生成部、 111 第3符号化ビット列生成部、 112 多
重化部、 113 逆量子化・逆直交変換部、 114 復号画像信号重畳部、 115
符号化情報格納メモリ、 116 復号画像メモリ、 130 空間マージ候補生成部
、 131 時間マージ候補の参照インデックス導出部、 132 時間マージ候補生成
部、 133 マージ候補登録部、 134 マージ候補同一判定部、 135 マージ
候補数制限部、 136 マージ候補補充部、 137 符号化情報選択部、 201
分離部、 212 第1符号化ビット列復号部、 202 第2符号化ビット列復号部、
203 第3符号化ビット列復号部、 204 動きベクトル算出部、 205 イン
ター予測情報導出部、 206 動き補償予測部、 207 イントラ予測部、 208
逆量子化・逆直交変換部、 209 復号画像信号重畳部、 210 符号化情報格納
メモリ、 211 復号画像メモリ、 230 空間マージ候補生成部、 231 時間
マージ候補の参照インデックス導出部、 232 時間マージ候補生成部、 233 マ
ージ候補登録部、 234 マージ候補同一判定部、 235 マージ候補数制限部、
236 マージ候補補充部、 237 符号化情報選択部。

Claims (6)

  1. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化装置であって、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出部と、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出部と、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録部と、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充部と、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測部と、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化部とを備え、
    前記符号化部は前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出部は、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする動画像符号化装置。
  2. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法であって、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、
    前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする動画像符号化方法。
  3. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化プログラムであって、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとをコンピュータに実行させ、
    前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする動画像符号化プログラム。
  4. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理部と、
    パケット化された前記符号化データを送信する送信部とを備え、
    前記動画像符号化方法は、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、
    前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする送信装置。
  5. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理ステップと、
    パケット化された前記符号化データを送信する送信ステップとを有し、
    前記動画像符号化方法は、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを有し、
    前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする送信方法。
  6. 各ピクチャを分割したブロック単位でインター予測を用いて動画像を符号化する動画像符号化方法により符号化された符号化ビット列をパケット化して符号化データを得るパケット処理ステップと、
    パケット化された前記符号化データを送信する送信ステップとをコンピュータに実行させ、
    前記動画像符号化方法は、
    符号化対象の予測ブロックに隣接する所定数のブロックから第1インター予測情報の候補を導出する第1インター予測情報導出ステップと、
    前記符号化対象の予測ブロックと異なる符号化済みのピクチャにおける前記符号化対象の予測ブロックと同一位置あるいはその付近に存在するブロックから第2インター予測情報の候補を導出する第2インター予測情報導出ステップと、
    前記第1インター予測情報の候補と前記第2インター予測情報の候補をインター予測情報候補リストに登録するインター予測情報候補リスト登録ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補の数が、前記インター予測情報の候補の数に満たない場合、前記インター予測情報の候補の数を上限として、インター予測情報を補充する補充ステップと、
    前記インター予測情報候補リストに登録されたインター予測情報の候補から1つのインター予測情報の候補を選択して、その選択したインター予測情報の候補により前記符号化対象の予測ブロックのインター予測を行う予測ステップと、
    インター予測情報の候補の数およびインター予測情報の候補のインデックスを示す情報を符号化する符号化ステップとを備え、
    前記符号化ステップは前記インター予測情報の候補の数に基づいて前記インター予測情報の候補のインデックスを符号化するとともに、
    前記第1インター予測情報導出ステップは、前記第1インター予測情報の候補の数を前記所定数より小さい数に制限する
    ことを特徴とする送信プログラム。
JP2017049522A 2011-10-31 2017-03-15 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム Active JP6274338B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011239397 2011-10-31
JP2011239397 2011-10-31

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017018309A Division JP6119944B1 (ja) 2011-10-31 2017-02-03 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017186020A Division JP6418300B2 (ja) 2011-10-31 2017-09-27 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム

Publications (3)

Publication Number Publication Date
JP2017143538A true JP2017143538A (ja) 2017-08-17
JP2017143538A5 JP2017143538A5 (ja) 2017-11-09
JP6274338B2 JP6274338B2 (ja) 2018-02-07

Family

ID=48712862

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2012239267A Active JP5942782B2 (ja) 2011-10-31 2012-10-30 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP2016098924A Active JP6090512B2 (ja) 2011-10-31 2016-05-17 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2017018309A Active JP6119944B1 (ja) 2011-10-31 2017-02-03 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP2017049522A Active JP6274338B2 (ja) 2011-10-31 2017-03-15 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2017186020A Active JP6418300B2 (ja) 2011-10-31 2017-09-27 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム

Family Applications Before (3)

Application Number Title Priority Date Filing Date
JP2012239267A Active JP5942782B2 (ja) 2011-10-31 2012-10-30 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP2016098924A Active JP6090512B2 (ja) 2011-10-31 2016-05-17 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2017018309A Active JP6119944B1 (ja) 2011-10-31 2017-02-03 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017186020A Active JP6418300B2 (ja) 2011-10-31 2017-09-27 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム

Country Status (1)

Country Link
JP (5) JP5942782B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110868601A (zh) * 2018-08-28 2020-03-06 华为技术有限公司 帧间预测方法、装置以及视频编码器和视频解码器

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102601014B1 (ko) 2018-12-28 2023-11-09 고도 가이샤 아이피 브릿지 1 화상 부호화 장치, 화상 부호화 방법, 화상 부호화 프로그램, 화상 복호 장치, 화상 복호 방법 및 화상 복호 프로그램
WO2020141962A1 (ko) * 2019-01-04 2020-07-09 세종대학교산학협력단 영상 부호화/복호화 방법 및 장치
EP3923582A4 (en) * 2019-03-08 2022-06-08 Jvckenwood Corporation IMAGE CODING DEVICE, IMAGE CODING METHOD, IMAGE CODING PROGRAM, IMAGE DECODING DEVICE, IMAGE DECODING METHOD, AND IMAGE DECODING PROGRAM
WO2024004039A1 (ja) 2022-06-28 2024-01-04 日本碍子株式会社 ウエハ載置台
JPWO2024047858A1 (ja) 2022-09-02 2024-03-07
KR20240032690A (ko) 2022-09-02 2024-03-12 엔지케이 인슐레이터 엘티디 웨이퍼 배치대

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012160803A1 (ja) * 2011-05-24 2012-11-29 パナソニック株式会社 画像符号化方法、画像符号化装置、画像復号方法、画像復号装置、および、画像符号化復号装置
WO2012164908A1 (ja) * 2011-05-31 2012-12-06 パナソニック株式会社 動画像符号化方法、動画像符号化装置、動画像復号化方法、動画像復号化装置、および動画像符号化復号化装置
WO2012173415A2 (ko) * 2011-06-14 2012-12-20 삼성전자 주식회사 움직임 정보의 부호화 방법 및 장치, 그 복호화 방법 및 장치
WO2013002557A2 (ko) * 2011-06-27 2013-01-03 삼성전자 주식회사 움직임 정보의 부호화 방법 및 장치, 그 복호화 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012160803A1 (ja) * 2011-05-24 2012-11-29 パナソニック株式会社 画像符号化方法、画像符号化装置、画像復号方法、画像復号装置、および、画像符号化復号装置
WO2012164908A1 (ja) * 2011-05-31 2012-12-06 パナソニック株式会社 動画像符号化方法、動画像符号化装置、動画像復号化方法、動画像復号化装置、および動画像符号化復号化装置
WO2012173415A2 (ko) * 2011-06-14 2012-12-20 삼성전자 주식회사 움직임 정보의 부호화 방법 및 장치, 그 복호화 방법 및 장치
WO2013002557A2 (ko) * 2011-06-27 2013-01-03 삼성전자 주식회사 움직임 정보의 부호화 방법 및 장치, 그 복호화 방법 및 장치

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
HIROYA NAKAMURA ET AL.: "Non-CE13: The maximum number of merging candidates in P-slice", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-G221, JPN6013000569, November 2011 (2011-11-01), pages 1 - 4, ISSN: 0003696882 *
JIANLE CHEN AND TAMMY LEE: "MVP index parsing with fixed number of candidates", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F402r1, JPN6013000568, July 2011 (2011-07-01), pages 1 - 9, ISSN: 0003696880 *
MINHUA ZHOU ET AL.: "A study on HM3.0 parsing throughput issue", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F068, JPN6013000566, July 2011 (2011-07-01), pages 1 - 17, ISSN: 0003696879 *
TOSHIYASU SUGIO AND TAKAHIRO NISHI: "Parsing Robustness for Merge/AMVP", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG16 WP3 AND ISO/IEC JTC1/SC29/WG11, vol. JCTVC-F470_r4, JPN6016002925, July 2011 (2011-07-01), pages 1 - 33, ISSN: 0003696881 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110868601A (zh) * 2018-08-28 2020-03-06 华为技术有限公司 帧间预测方法、装置以及视频编码器和视频解码器
CN110868601B (zh) * 2018-08-28 2024-03-15 华为技术有限公司 帧间预测方法、装置以及视频编码器和视频解码器
US12015780B2 (en) 2018-08-28 2024-06-18 Huawei Technologies Co., Ltd. Inter prediction method and apparatus, video encoder, and video decoder

Also Published As

Publication number Publication date
JP2016149811A (ja) 2016-08-18
JP6090512B2 (ja) 2017-03-08
JP6418300B2 (ja) 2018-11-07
JP2017103807A (ja) 2017-06-08
JP6119944B1 (ja) 2017-04-26
JP2013118625A (ja) 2013-06-13
JP5942782B2 (ja) 2016-06-29
JP6274338B2 (ja) 2018-02-07
JP2018038044A (ja) 2018-03-08

Similar Documents

Publication Publication Date Title
JP6418300B2 (ja) 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
TWI552577B (zh) Motion picture decoding device, dynamic image decoding method, and dynamic image decoding program product
JP2014220846A (ja) 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP6229806B2 (ja) 動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP6376260B2 (ja) 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2017028720A (ja) 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2013090032A (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
WO2013065301A1 (ja) 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム、並びに動画像復号装置、動画像復号方法、動画像復号プログラム、受信装置、受信方法及び受信プログラム
JP2013102260A (ja) 動画像復号装置、動画像復号方法及び動画像復号プログラム
JP2013098733A (ja) 動画像復号装置、動画像復号方法及び動画像復号プログラム
JP2013090033A (ja) 動画像復号装置、動画像復号方法及び動画像復号プログラム
JP2013102259A (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム
JP2013118624A (ja) 動画像符号化装置、動画像符号化方法、動画像符号化プログラム、送信装置、送信方法及び送信プログラム
JP2013098732A (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170927

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171225

R150 Certificate of patent or registration of utility model

Ref document number: 6274338

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150