JP6107970B2

JP6107970B2 - Ｊｃｔｖｃ−ｌ０２２７：プロファイル−階層−レベル構文構造の更新を有するｖｐｓ＿ｅｘｔｅｎｓｉｏｎ

Info

Publication number: JP6107970B2
Application number: JP2015551696A
Authority: JP
Inventors: ムンシハケ; アリタバタバイ
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2013-01-04
Filing date: 2013-12-18
Publication date: 2017-04-05
Anticipated expiration: 2033-12-18
Also published as: JP2016508332A; KR101710290B1; KR102000373B1; EP2926560A4; CN104904211B; EP2926560A1; JP2017153087A; CN108337520A; CN104904211A; KR20170021908A; KR20150092250A; JP6399125B2; WO2014107312A1

Description

〔関連出願への相互参照〕
本出願は、「プロファイル−階層−レベル構文構造の更新を有するＪＣＴＶＣ−Ｌ０ＸＸＸ：ＶＰＳ_ＥＸＴＥＮＳＩＯＮ」という名称で２０１３年１月４日出願の米国特許仮出願出願番号第６１／７４８，８７８号及び「プロファイル−階層−レベル構文構造の更新を有するＪＣＴＶＣ−Ｌ０２２７：ＶＰＳ_ＥＸＴＥＮＳＩＯＮ」という名称で２０１３年９月２４日出願の米国特許出願出願番号第１４／０３５，７４０号に対する優先権を主張するものである。上記引用した出願の各々は、これによりその全体が全ての目的に対して引用により本明細書に組み込まれる。

本発明は、ビデオ符号化の分野に関する。本発明は、より具体的には、高効率ビデオ符号化に関する。

「ビデオパラメータセット（ＶＰＳ）」は、時間的サブレイヤ間の依存性を含む符号化されたビデオシーケンスの全体的な特徴を説明するためのメタデータとして追加されてきている。この主な目的は、例えば、将来の拡張された拡張可能又は多視点ビデオビットストリームのベースレイヤが、従来の復号器によって復号可能であることが必要であるが、それに関して、最新復号器だけに関連するビットストリーム構造に関する追加情報は無視されると考えられる時に、システムレイヤでの信号伝達に関する規格の互換拡張性を可能にすることである。

米国特許出願第１４／０３５，６８０号明細書米国特許出願第１４／０３５，７１１号明細書

「高効率ビデオ符号化（ＨＥＶＣ）」構文構造のｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造は、各レイヤ又は動作点における使用に関してｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造に使用するためのより多くの柔軟性を提供するように更新される。新しいフラグ「ＬｅｖｅｌＰｒｅｓｅｎｔＦｌａｇ」が、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造に追加され、プロファイル／階層パラメータとは別々のレベルパラメータの変動をサポートする。ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造に対する更新は、拡張可能ビデオ符号化、多視点符号化、及び３Ｄビデオ符号化分野におけるＨＥＶＣ選択に対してｐｒｏｆｉｌｅ_ｔｉｅｒ及びレベルパラメータを選択する際の柔軟性を提供する。

一態様において、デバイスの持続性メモリにプログラムされる方法を提供する。本方法は、コンテンツを取得する段階と、コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させる段階とを含む。このフラグは、外部の一時的パラメータである。フラグは、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内側の追加構文である。ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報は、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、このフラグが１に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、このフラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル参照レイヤ番号によって指示される動作点のプロファイル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、動作点に関するレベル情報は、レベル参照レイヤ番号によって指示される動作点のレベル情報に等しいと推測される。デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、手持ち式コンピュータ、携帯情報端末、セルラー／モバイル電話、スマート家電、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ電話、スマートフォン、携帯音楽再生機、タブレットコンピュータ、モバイルデバイス、ビデオ再生機、ビデオディスク書込機／再生機、高精細ディスク書込機／再生機、超高精細ディスク書込機／再生機、テレビジョン、ホームエンタテインメントシステム、又はスマート腕時計を含む。

別の態様において、デバイスの持続性メモリにプログラムされる方法は、コンテンツを取得する段階と、コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させる段階とを含み、ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在せず、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測され、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在せず、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報は、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される。

別の態様において、装置は、コンテンツを取得し、コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させるためのアプリケーションを格納するための持続性メモリと、メモリに結合され、アプリケーションを処理するように構成される処理構成要素とを含む。フラグは、外部の一時的パラメータである。フラグは、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内側の追加構文である。ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報は、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、このフラグが１に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、このフラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル参照レイヤ番号によって指示される動作点のプロファイル情報に等しいと推測される。ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在しない。ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、動作点に関するレベル情報は、レベル参照レイヤ番号によって指示される動作点のレベル情報に等しいと推測される。

一部の実施形態により修正ＶＰＳ構文を利用する方法の流れ図である。一部の実施形態により修正ＶＰＳ方法を実施するように構成された例示的コンピュータデバイスのブロック図である。一部の実施形態によるＨＥＶＣ符号器の全体図である。一部の実施形態によるＨＥＶＣ復号器の全体図である。

本明細書で説明するのは、各レイヤ又は動作点に関してｖｐｓ_ｅｘｔｅｎｓｉｏｎｓ（）構文構造に使用される一方でＨＥＶＣ拡張に関する追加の柔軟性をサポートするためのｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造に関する更新である。

以下は、「高効率ビデオ符号化（ＨＥＶＣ）」に関する現在の「国際規格原案（ＤＩＳ）」仕様に提示されているｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造である。

（表）

ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ関連構文構造の存在は、現在、ＤＩＳにおけるｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ関連構文構造における「一時的」パラメータとして使用されるｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇの外部パラメータフラグによって条件付け（制限）されている。以下の表は、この構文構造をｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造に使用して様々なＨＥＶＣ拡張要件をサポートする時に、どのパラメータを条件付けすることができるかを示している。

（表）
現在のｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌに選択可能な構文パラメータ（ＤＩＳ）

「ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｏｎｌｙ」に関する一般的構文を含む「ｇｅｎｅｒａｌ_ｐｒｏｆｉｌｅ_ｔｉｅｒ」と呼ばれるパラメータ群の１つは、ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造における使用に対して確度の高い選択とすることができないことは明らかである。言い換えると、全ての可能な選択は、既存のｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造を用いて可能ではない場合がある。これは、ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇと同様の外部の一時的パラメータとしての又はｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内側の追加構文としての別の条件フラグである「ｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇ」の不在による。

現在のＨＥＶＣ仕様では、プロファイル及び階層関連パラメータは、ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇを１又は０に設定することに基づいてレイヤ又は動作点毎に変えることができる。一般的な事例では、レベルパラメータは、常に適応化され、ｓｕｂ_ｌａｙｅｒ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇが存在する場合には、サブレイヤ関連レベルパラメータは、変更することができる。

しかし、プロファイル／階層／レベル説明により、レベルパラメータは、一部のプロファイル／階層事例に共通とすることができ、かつ他の事例に関して変更することができる。一般的な事例に関して、レベルパラメータは、プロファイル／階層パラメータの変更とは別に変更することができる可能性が存在する。言い換えると、レベルパラメータは、ｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇの新しいフラグを１又は０に設定することによって変化させることができる。

以下の表は、「ｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇ」が「ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇ」と同様の一時的パラメータとして又はｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内側の追加構文として存在する場合に、修正ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造におけるｐｒｏｆｉｌｅ_ｔｉｅｒパラメータとレベルパラメータの全ての可能な組合せが、この組合せのｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）における適用中に可能である方法を示している。

（表）
更新ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌにおける選択可能な構文パラメータ

１）ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇは、一般的及びサブレイヤ事例の両方に関して上述した構文構造におけるプロファイル及び階層構文の制限（存在）を可能にする。

２）ｃｕｒｒｅｎｔ_ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造における一般的及びサブレイヤ事例の両方に関してＬｅｖｅｌＩＤＣ構文パラメータに影響を与える（制限する）ようなフラグは存在しない。従って、ＬｅｖｅｌＩＤＣの存在に対する制限は、ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）におけるレイヤ又は動作点（ＯＰ）のいずれに関しても与えることができない。

３）ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造は、以下のように、すなわち、「ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇ」と同様の一時的パラメータとしての「ｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇ」の使用、又は新しい１ビット構文としてのｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇの挿入によって更新することができる。

ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇと同様にｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇを一時的パラメータとして更新ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造を以下に示している。

（表）

以前に定義されたｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）は、以下に示すように、ｐｒｏｆｉｌｅＰｒｅｓｅｎｔＦｌａｇが全てのレイヤ（ｉ＝１からｖｐｓ_ｍａｘ_ｌａｙｅｒｓ_ｍｉｎｕｓ１）に関して常に１に設定されたｖｐｓ_ｐｒｏｆｉｌｅ_ｔｉｅｒ構文構造を使用する。一般的な事例では、ｐｒｏｆｉｌｅ_ｔｉｅｒ又はレベル構文パラメータに関する制限は存在しない。

（表）

以下の節では、修正ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造が、レイヤ特定又は動作点（ＯＰ）特定の更新を有するｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）に使用されている一方で、ｐｒｏｆｉｌｅ_ｔｉｅｒ及び／又はレベルのこのような構文パラメータを制限する２つの方法が実施される。

（表）
ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）におけるｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌのレイヤ特定更新

上述の構文構造では、新しい４つの構文パラメータが導入される。
ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］：このフラグが１に等しい時に、このパラメータは、レイヤｉに関するプロファイル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在することを指定する。このフラグが０に等しい時に、このパラメータは、レイヤｉに関するプロファイル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在しないことを指定する。
ｖｐｓ_ｐｒｏｆｉｌｅ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ［ｉ］：ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］が０に等しい時に、レイヤｉに関するプロファイル情報は、ｖｐｓ_ｐｒｏｆｉｌｅ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ［ｉ］によって指示されるレイヤのプロファイル情報に等しいと推測されるが、レイヤ番号は、以前に送られたレイヤのこのような情報を格納するための参照プロファイル−階層_Ｌｅｖｅｌルックアップテーブルに対するインデックスとして使用される。
ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］：このフラグが１に等しい時に、このパラメータは、レイヤｉに関するレベル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在することを指定する。このフラグが０に等しい時に、このパラメータは、レイヤｉに関するレベル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在しないことを指定する。
ｖｐｓ_ｌｅｖｅｌ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ［ｉ］：ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］が０に等しい時に、レイヤｉに関するレベル情報は、ｖｐｓ_ｌｅｖｅｌ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ［ｉ］によって指示されるレイヤのレベル情報に等しいと推測されるが、レイヤ番号は、以前に送られたレイヤのこのような情報を格納するための参照プロファイル−階層_Ｌｅｖｅｌルックアップテーブルに対するインデックスとして使用される。

ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇの値とｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇの値との組み合わされた効果が以下の表に示されており、このような構文パラメータフラグは、上記に示されている変更ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造に存在する。

（表）

一例として、「ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ」及び「ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ」の両方が０である場合には（上述の図表）、利用可能な構文パラメータは、「（参照−プロファイル／階層、ＬｅｖｅｌＩｄｃ）」であり、これは、このようなパラメータが以前に送られた時の格納されたルックアップテーブル又は「参照」ルックアップテーブルから、このような全てのパラメータが利用可能であることを意味する。このような参照パラメータは、既に、ｖｐｓ_ｐｒｏｆｉｌｅ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ及びｖｐｓ_ｌｅｖｅｌ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍの２つの構文パラメータに説明されている。このような「ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ」及び「ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ」の使用は、認識されない条件を防止するのに有効である。

（表）
ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）におけるｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌのＯＰ特定更新

上述の構文構造では、以前の節における「レベル特定更新」と同様の新しい４つの構文パラメータが導入されている。
ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］：このフラグが１に等しい時に、このパラメータは、動作点ｉ（又はＯＰｉ）に関するプロファイル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在することを指定する。このフラグが０に等しい時に、このパラメータは、ＯＰｉに関するプロファイル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在しないことを指定する。
ｖｐｓ_ｐｒｏｆｉｌｅ_ｒｅｆ_ｏｐ_ｎｕｍ［ｉ］：ｖｐｓ_ｐｒｏｆｉｌｅ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］が０に等しい時に、ＯＰｉに関するプロファイル情報は、ｖｐｓ_ｐｒｏｆｉｌｅ_ｒｅｆｊａｙｅｒ_ｎｕｍ［ｉ］によって指示されるＯＰのプロファイル情報に等しいと推測され、ＯＰ番号は、以前に送られたＯＰのこのような情報を格納するための参照プロファイル−階層−Ｌｅｖｅルックアップテーブルに対するインデックスとして使用される。
ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］：このフラグが１に等しい時に、このパラメータは、ＯＰｉに関するレベル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在することを指定する。このフラグが０に等しい時に、このパラメータは、ＯＰｉに関するレベル情報がｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ（）構文構造に存在しないことを指定する。
ｖｐｓ_ｌｅｖｅｌ_ｒｅｆ_ｏｐ_ｎｕｍ［ｉ］：ｖｐｓ_ｌｅｖｅｌ_ｐｒｅｓｅｎｔ_ｆｌａｇ［ｉ］が０に等しい時に、ＯＰｉに関するレベル情報は、ｖｐｓ_ｌｅｖｅｌ_ｒｅｆ_ｌａｙｅｒ_ｎｕｍ［ｉ］によって指示されるＯＰのレベル情報に等しいと推測されるが、ＯＰ番号は、以前に送られたＯＰのこのような情報を格納するための参照プロファイル−階層_Ｌｅｖｅｌルックアップテーブルに対するインデックスとして使用される。

「ｌｅｖｅｌＰｒｅｓｅｎｔＦｌａｇ」のこの新しいフラグが「ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ」構文構造に対して使用される場合に、このフラグは、以下のようにＶＰＳ及びＳＰＳにおいて初期化される。

（表）

（表）

本明細書で説明するように、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造に関する更新は、拡張可能ビデオ符号化、多視点符号化、及び３Ｄビデオ符号化分野におけるＨＥＶＣ拡張のためにｐｒｏｆｉｌｅ_ｔｉｅｒ及びレベルパラメータを選択する際の追加の柔軟性をサポートするように行われる。この更新の後に、修正された構文構造は、ｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造に使用され、ここで、ｐｒｏｆｉｌｅ_ｔｉｅｒ及びレベルパラメータは、各レイヤ又は各動作点に関する２つの可能な方法で制限される。

図１は、一部の実施形態により修正ＶＰＳ構文を利用する方法の流れ図である。段階１００において、コンテンツ（例えば、ビデオ）を取得する。コンテンツは、コピーするか、ダウンロードするか、センサ又は他のいずれかの方法を使用して捕捉するようないずれかの方法で取得することができる。段階１０２において、レベルを指示するフラグを利用してＶＰＳデータが発生される。更に、ＶＰＳデータは、レベル及び／又は動作点を指示するための追加フラグ及びデータを使用して発生される。ＶＰＳデータは、拡張可能ビデオ符号化、多視点符号化、及び３Ｄビデオ符号化分野における様々なＨＥＶＣ拡張情報を含む。一部の実施形態において、ＶＰＳデータは、プロファイル／階層／レベル情報における柔軟性を提供する。一部の実施形態において、追加の又はより少ない段階が実行される。一部の実施形態において、段階の順番が修正される。

図２は、一部の実施形態により修正ＶＰＳ方法を実施するように構成された例示的コンピュータデバイスのブロック図である。コンピュータデバイス２００を使用して、画像及び映像のような情報を取得、格納、計算、処理、通信、及び／又は表示することができる。一般的に、コンピュータデバイス２００を実施するのに好ましいハードウエア構成は、ネットワークインタフェース２０２、メモリ２０４、プロセッサ２０６、Ｉ／Ｏデバイス２０８、バス２１０、及びストレージデバイス２１２を含む。プロセッサの選択は、十分な速度を有する好ましいプロセッサが選択される限り、重要ではない。メモリ２０４は、当業技術で公知のいずれかの従来のコンピュータメモリとすることができる。ストレージデバイス２１２は、ハードディスクドライブ、ＣＤＲＯＭ、ＣＤＲＷ、ＤＶＤ、ＤＶＤＲＷ、Ｂｌｕ−ｒａｙ（Ｒ）、フラッシュメモリカード、又は他のいずれかのストレージデバイスを含むことができる。コンピュータデバイス２００は、１つ又はそれよりも多くのネットワークインタフェース２０２を含むことができる。ネットワークインタフェースの例は、イーサネット又は他の種類のＬＡＮに接続したネットワークカードを含む。Ｉ／Ｏデバイス２０８は、以下のもの、すなわち、キーボード、マウス、モニタ、スクリーン、プリンタ、モデム、タッチスクリーン、ボタンインタフェース、及び他のデバイスのうちの１つ又はそれよりも多くを含むことができる。修正ＶＰＳ方法を実施するのに使用される変更ＶＰＳアプリケーション２３０は、恐らくはストレージデバイス２１２及びメモリ２０４に格納され、かつアプリケーションが典型的に処理されるように処理される。コンピュータデバイス２００には、図２に示されている構成要素よりも多いか又は少ない構成要素を含めることができる。一部の実施形態において、変更ＶＰＳハードウエア２２０が含まれる。図２でのコンピュータデバイス２００は、修正ＶＰＳ方法のためのアプリケーション２３０及びハードウエア２２０を含むが、修正ＶＰＳ方法は、ハードウエア、ファームウエア、ソフトウエア、又はそれらのいずれかの組合せでコンピュータデバイス上に実施することができる。例えば、一部の実施形態において、変更ＶＰＳアプリケーション２３０は、メモリにプログラムされ、プロセッサを使用して実行される。別の例では、一部の実施形態において、変更ＶＰＳハードウエア２２０は、修正ＶＰＳ方法を実施するように専用に設計されたゲートを含むプログラムされたハードウエア論理回路である。

一部の実施形態において、変更ＶＰＳアプリケーション２３０は、いくつかのアプリケーション及び／又はモジュールを含む。一部の実施形態において、モジュールは、同じく１つ又はそれよりも多くのサブモジュールを含む。一部の実施形態において、より少ないか又は追加のモジュールを含むことができる。

適切なコンピュータデバイスの例は、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、手持ち式コンピュータ、携帯情報端末、セルラー／モバイル電話、スマート家電、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ電話、スマートフォン、携帯音楽再生機、タブレットコンピュータ、モバイルデバイス、ビデオ再生機、ビデオディスク書込機／再生機（例えば、ＤＶＤ書込機／再生機、高精細ディスク書込機／再生機、超高精細ディスク書込機／再生機）、テレビジョン、ホームエンタテインメントシステム、スマートジュエリー（例えば、スマート腕時計）、又は他のいずれかの適切なコンピュータデバイスを含む。

図３は、一部の実施形態によるＨＥＶＣ符号器の全体図である。符号器３００は、一般符号器制御構成要素、変換スケーリング及び量子化構成要素、スケーリング及び逆変換構成要素、イントラピクチャ推定構成要素、フィルタ制御解析構成要素、イントラピクチャ予測構成要素、デブロック及びＳＡＯフィルタ構成要素、動き補償構成要素、動き推定構成要素、及びヘッダフォーマット設定及びＣＡＢＡＣ構成要素を含む。入力ビデオ信号は、符号器３００で受け取られ、「符号化ツリーユニット（ＣＴＵ）」に分割される。ＨＥＶＣ符号器構成要素は、修正ＶＰＳを使用してビデオデータを処理し、符号化されたビットストリームを発生させる。

図４は、一部の実施形態によるＨＥＶＣ復号器の全体図である。復号器４００は、エントロピー復号構成要素、逆量子化構成要素、逆変換構成要素、現在フレーム構成要素、イントラ予測構成要素、過去フレーム構成要素、動き補償構成要素、デブロックフィルタ、ＳＡＯ構成要素、及び適応ループフィルタを含む。入力ビットストリーム（例えば、符号化されたビデオ）は、復号器４００で受け取られ、ディスプレイのための復号ビットストリームが発生される。一部の実施形態において、復号されている間に修正ＶＰＳが使用される。

修正ＶＰＳ方法を利用するために、デバイスは、拡張可能ビデオ符号化、多視点符号化、３Ｄビデオ符号化、及び混在ビデオシーケンスに関してＶＰＳ及びその拡張情報におけるパラメータにアクセス可能である。修正ＶＰＳ方法は、ビデオ処理が実行される時に又はそれ以外の時間に自動的に使用される。修正ＶＰＳ方法は、ユーザ介入なしに自動的に実行することができる。

作動において、ＶＰＳ及びｖｐｓ_ｅｘｔｅｎｓｉｏｎ（）構文構造は、拡張可能ビデオ符号化、多視点符号化、及び３Ｄビデオ符号化分野におけるＨＥＶＣ拡張のための一部のクリーンアップと共に更新される。ＶＰＳは、修正された構文構造を使用して発生される。

「拡張パラメータの容易なアクセスのためのビデオパラメータセット（ＶＰＳ）構文再順序付け」という名称で２０１３年９月２４日出願の米国特許出願第１４／０３５，６８０号明細書及び「ＪＣＴＶＣ−Ｌ０２２６：ＶＰＳ及びＶＰＳ_ＥＸＴＥＮＳＩＯＮ更新」という名称で２０１３年９月２４日出願の米国特許出願第１４／０３５，７１１号明細書は、これによりその全体が全ての目的に対して引用により組み込まれる。

ＪＣＴＶＣ−Ｌ０２２７：プロファイル−階層−レベル構文構造の更新を有するＶＰＳ_ＥＸＴＥＮＳＩＯＮの一部の実施形態
１．ａ．コンテンツを取得する段階と、ｂ．コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させる段階とを含むデバイスの持続性メモリにプログラムされる方法。
２．フラグは、外部の一時的パラメータである条項１の方法。
３．フラグは、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内の追加構文である条項１の方法。
４．ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない条項１の方法。
５．ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測される条項４の方法。
６．ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在しない条項１の方法。
７．ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報は、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される条項１の方法。
８．ビデオパラメータセットを発生させる段階は、プロファイル存在フラグを使用する段階を含み、更に、このフラグが１に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、このフラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない条項１の方法。
９．ビデオパラメータセットを発生させる段階は、プロファイル参照レイヤ番号を使用する段階を含み、更に、プロファイル存在フラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル参照レイヤ番号によって指示される動作点のプロファイル情報に等しいと推測される条項８の方法。
１０．ビデオパラメータセットを発生させる段階は、レベル存在フラグを使用する段階を含み、更に、レベル存在フラグが１に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在しない条項１の方法。
１１．ビデオパラメータセットを発生させる段階は、レベル参照レイヤ番号を使用する段階を含み、更に、レベル参照レイヤ番号が０に等しい時に、動作点に関するレベル情報は、レベル参照レイヤ番号によって指示される動作点のレベル情報に等しいと推測される条項１の方法。
１２．デバイスは、パーソナルコンピュータ、ラップトップコンピュータ、コンピュータワークステーション、サーバ、メインフレームコンピュータ、手持ち式コンピュータ、携帯情報端末、セルラー／モバイル電話、スマート家電、ゲームコンソール、デジタルカメラ、デジタルカムコーダ、カメラ電話、スマートフォン、携帯音楽再生機、タブレットコンピュータ、モバイルデバイス、ビデオ再生機、ビデオディスク書込機／再生機、高精細ディスク書込機／再生機、超高精細ディスク書込機／再生機、テレビジョン、ホームエンタテインメントシステム、又はスマート腕時計を含む条項１の方法。
１３．ａ．コンテンツを取得する段階と、ｂ．コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させる段階であって、ビデオパラメータセットを発生させる段階が、プロファイル存在フラグを使用する段階を含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報が、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報が、プロファイル階層レベル構文構造に存在せず、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報が、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測され、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報が、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報が、プロファイル階層レベル構文構造に存在せず、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報が、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される上記発生させる段階とを含むデバイスの持続性メモリにプログラムされる方法。
１４．ａ．ｉ）コンテンツを取得し、かつｉｉ．コンテンツ内のレベルを指示するレベルフラグを利用してコンテンツのビデオパラメータセットを発生させるためのアプリケーションを格納するための持続性メモリと、ｂ．メモリに結合され、アプリケーションを処理するように構成された処理構成要素とを含む装置。
１５．フラグは、外部の一時的パラメータである条項１４の装置。
１６．フラグは、ｐｒｏｆｉｌｅ_ｔｉｅｒ_ｌｅｖｅｌ構文構造内の追加構文である条項１４の装置。
１７．ビデオパラメータセットを発生させることは、プロファイル存在フラグを使用することを含み、更に、プロファイル存在フラグが１に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない条項１４の装置。
１８．ビデオパラメータセットを発生させることは、プロファイル参照レイヤ番号を使用することを含み、更に、プロファイル存在フラグが０に等しい時に、レイヤに関するプロファイル情報は、プロファイル参照レイヤ番号によって指示されるレイヤのプロファイル情報に等しいと推測される条項１７の装置。
１９．ビデオパラメータセットを発生させることは、レベル存在フラグを使用することを含み、更に、レベル存在フラグが１に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、レイヤに関するレベル情報は、プロファイル階層レベル構文構造に存在しない条項１４の装置。
２０．ビデオパラメータセットを発生させることは、レベル参照レイヤ番号を使用することを含み、更に、レベル参照レイヤ番号が０に等しい時に、レイヤに関するレベル情報は、レベル参照レイヤ番号によって指示されるレイヤのレベル情報に等しいと推測される条項１４の装置。
２１．ビデオパラメータセットを発生させることは、プロファイル存在フラグを使用することを含み、更に、このフラグが１に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在し、このフラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル階層レベル構文構造に存在しない条項１４の装置。
２２．ビデオパラメータセットを発生させることは、プロファイル参照レイヤ番号を使用することを含み、更に、プロファイル存在フラグが０に等しい時に、動作点に関するプロファイル情報は、プロファイル参照レイヤ番号によって指示される動作点のプロファイル情報に等しいと推測される条項２１の装置。
２３．ビデオパラメータセットを発生させることは、レベル存在フラグを使用することを含み、更に、レベル存在フラグが１に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在し、レベル存在フラグが０に等しい時に、動作点に関するレベル情報は、プロファイル階層レベル構文構造に存在しない条項１４の装置。
２４．ビデオパラメータセットを発生させることは、レベル参照レイヤ番号を使用することを含み、更に、レベル参照レイヤ番号が０に等しい時に、動作点に関するレベル情報は、レベル参照レイヤ番号によって指示される動作点のレベル情報に等しいと推測される条項１４の装置。

本発明の構成及び作動の原理の理解を容易にするための詳細を組み込んだ特定の実施形態によって本発明を説明した。本明細書における特定の実施形態及びその詳細へのこのような言及は、添付の特許請求の範囲の範囲を限定するように意図していない。特許請求の範囲で定められる本発明の精神及び範囲を逸脱することなく例示的に選択された実施形態に他の様々な修正を行うことができることは当業者に容易に明らかであろう。

１００コンテンツを取得する段階
１０２レベルを指示するフラグを利用してＶＰＳデータが発生される段階
ＶＰＳビデオパラメータセット

Claims

あるレイヤのプロファイル存在フラグが０に等しい場合に、参照動作点番号により示される動作点のプロファイル情報に等しいプロファイル情報を当該レイヤについて用いて、符号化ビットストリームを復号して画像データを生成する復号部、
を備える復号装置。
前記プロファイル存在フラグが０に等しい場合にプロファイル階層レベルシンタックスに前記レイヤのプロファイル情報が存在しないものとして、前記プロファイル階層レベルシンタックスに従って前記符号化ビットストリームをパースするパース部、をさらに備える、請求項１に記載の復号装置。
前記パース部は、前記プロファイル存在フラグが１に等しい場合に前記プロファイル階層レベルシンタックスに前記レイヤのプロファイル情報が存在するものとして、前記プロファイル階層レベルシンタックスに従って前記符号化ビットストリームをパースする、請求項２に記載の復号装置。
前記復号部は、符号化ツリーユニットを単位として、前記符号化ビットストリームを復号する、請求項３に記載の復号装置。
前記復号部により生成される前記画像データにデブロックフィルタを適用するデブロックフィルタ部、をさらに備える、請求項４に記載の復号装置。
前記デブロックフィルタ部により前記デブロックフィルタが適用された前記画像データにサンプル適応オフセット（ＳＡＯ）処理を適用する適応オフセット部、をさらに備える、請求項５に記載の復号装置。
あるレイヤのプロファイル存在フラグが０に等しい場合に、参照動作点番号により示される動作点のプロファイル情報に等しいプロファイル情報を当該レイヤについて用いて、符号化ビットストリームを復号して画像データを生成すること、
を含む復号方法。
前記プロファイル存在フラグが０に等しい場合にプロファイル階層レベルシンタックスに前記レイヤのプロファイル情報が存在しないものとして、前記プロファイル階層レベルシンタックスに従って前記符号化ビットストリームをパースすること、をさらに含む、請求項７に記載の復号方法。
前記プロファイル存在フラグが１に等しい場合に前記プロファイル階層レベルシンタックスに前記レイヤのプロファイル情報が存在するものとして、前記プロファイル階層レベルシンタックスに従って前記符号化ビットストリームをパースすること、をさらに含む、請求項８に記載の復号方法。
前記符号化ビットストリームは、符号化ツリーユニットを単位として復号される、請求項９に記載の復号方法。
前記画像データにデブロックフィルタを適用すること、をさらに含む、請求項１０に記載の復号方法。
前記デブロックフィルタが適用された前記画像データにサンプル適応オフセット（ＳＡＯ）処理を適用すること、をさらに含む、請求項１１に記載の復号方法。
復号装置のプロセッサを、
あるレイヤのプロファイル存在フラグが０に等しい場合に、参照動作点番号により示される動作点のプロファイル情報に等しいプロファイル情報を当該レイヤについて用いて、符号化ビットストリームを復号して画像データを生成する復号部、
として機能させるためのプログラム。
請求項１３に記載のプログラムを記録したコンピュータ読取可能な媒体。