JP7402888B2

JP7402888B2 - デジタルビデオにおけるパラメータセットシグナリング

Info

Publication number: JP7402888B2
Application number: JP2021553369A
Authority: JP
Inventors: ミンリー，; ピンウー，
Original assignee: ZTE Corp
Current assignee: ZTE Corp
Priority date: 2019-03-08
Filing date: 2019-03-08
Publication date: 2023-12-21
Anticipated expiration: 2039-03-08
Also published as: KR20210134771A; CN113519162B; CN113519162A; EP3935856A4; US20210409779A1; WO2020181434A1; EP3935856A1; JP2022523441A

Description

本特許文書は、概して、ビデオおよび画像エンコーディングおよびデコーディングを対象とする。

ビデオエンコーディングは、圧縮ツールを使用して、２次元ビデオフレームを、ネットワークを経由して記憶またはトランスポートするためにより効率的である、圧縮されたビットストリーム表現にエンコーディングする。信号をエンコーディングする際により柔軟性を提供し、より良好なビデオコーディング性能を提供する、次世代のビデオコーデックを設計する試みが、現在進行中である。

本書は、少なくとも、パラメータセットのアクティブ化および管理における増加された複雑性を伴わずに、種々のツールのパラメータが柔軟に更新され得るように、パラメータセット内のパラメータをコーディングする方法に関する問題を解決するためのビデオまたは写真エンコーディングおよびデコーディング方法、エンコーディングおよびデコーディングデバイスを開示する。

一例示的側面では、ビットストリーム処理の方法が、開示される。本方法は、第１のパラメータセット識別子をコーディングされたビデオ領域に対応するビットを含有するデータユニットから取得するステップと、ツールフラグを第１のパラメータセット識別子に対応する第１のパラメータセットから取得するステップと、ツールフラグから、ツールフラグに対応するツールのツールパラメータが、コーディングされたビデオ領域をデコーディングするために存在する、または有効にされていることを決定するステップであって、ツールは、ビデオコーディング技法に対応する、ステップと、決定するステップに基づいて、第２のパラメータセット識別子を取得するステップと、ツールパラメータを第２のパラメータセット識別子に対応する第２のパラメータセットから取得するステップと、ツールパラメータを使用して、ビデオ領域をデコーディングするステップとを含む。

別の例示的側面では、ビデオ領域をエンコーディングする方法が、開示される。本方法は、ビデオ領域をエンコーディングする際に使用されるツールのツールパラメータを決定するステップであって、ツールは、ビデオコーディング技法を表す、ステップと、第１のパラメータセット識別子によって識別される、第１のパラメータセットを生成するステップと、第１のパラメータセット内に、ツールに対応するツールフラグを含むステップであって、ツールフラグは、ツールパラメータが、ビデオ領域をエンコーディングするために存在する、または有効にされていることを示す、値に設定される、ステップと、第２のパラメータセット識別子を使用して、第１のパラメータセット内にツールパラメータを含むステップと、ビデオ領域のヘッダ内の第１のパラメータセット識別子をコーディングするステップと、ツールパラメータを使用して、ビデオ領域をコーディングするステップとを含む。

さらに別の例示的側面では、上記に説明される方法を実装するように構成される、プロセッサを備える、ビデオデコーダ装置が、開示される。

さらに別の側面では、上記に説明される方法を実装するように構成される、プロセッサを備える、ビデオエンコーダ装置が、開示される。

別の側面では、コンピュータ可読媒体が、開示される。コンピュータ可読媒体は、その上に記憶されたコードを有し、コードは、プロセッサによって実行されると、プロセッサに、上記に説明される方法を実装させる。

これらおよび他の側面がさらに、本書に説明される。
（項目１）
ビットストリーム処理の方法であって、
第１のパラメータセット識別子をコーディングされたビデオ領域に対応するビットを含有するデータユニットから取得するステップと、
ツールフラグを上記第１のパラメータセット識別子に対応する第１のパラメータセットから取得するステップと、
上記ツールフラグから、上記ツールフラグに対応するツールのツールパラメータが、上記コーディングされたビデオ領域をデコーディングするために存在するかまたは有効にされていることを決定するステップであって、上記ツールは、ビデオコーディング技法に対応する、ステップと、
上記決定するステップに基づいて、第２のパラメータセット識別子を取得するステップと、
上記ツールパラメータを上記第２のパラメータセット識別子に対応する第２のパラメータセットから取得するステップと、
上記ツールパラメータを使用して、上記ビデオ領域をデコーディングするステップと
を含む、方法。
（項目２）
上記ビデオ領域は、ビデオ写真に対応する、項目１に記載の方法。
（項目３）
上記ビデオ領域は、ビデオ写真より小さい、項目１に記載の方法。
（項目４）
上記ビデオコーディング技法は、上記コーディングされたビデオ領域内の複数のコーディングブロックに共通であるコーディングパラメータに基づく、項目１に記載の方法。
（項目５）
別のツールフラグを上記第１のパラメータセットから取得するステップと、
上記ツールフラグから、上記別のツールフラグに対応する別のツールの別のツールパラメータが、上記コーディングされたビデオ領域をデコーディングするために存在するかまたは有効にされていることを決定するステップと、
上記決定するステップに基づいて、第３のパラメータセット識別子を取得するステップと、
上記別のツールパラメータを上記第３のパラメータセット識別子に対応する第３のパラメータセットから取得するステップと
をさらに含み、
上記ビデオ領域をデコーディングするステップは、上記別のツールパラメータを使用して、上記ビデオ領域をデコーディングするステップを含む、項目１に記載の方法。
（項目６）
上記第２のパラメータセット、上記第３のパラメータセット、および上記第１のパラメータセットを含有するネットワーク抽象化層（ＮＡＬ）ユニットは、同一ＮＡＬユニットタイプを有する、項目１－４のいずれかに記載の方法。
（項目７）
ＮＡＬユニットは、同一ＮＡＬユニットタイプとして、上記第３のパラメータセットを含有する、項目５または６に記載の方法。
（項目８）
上記ネットワーク抽象化層ユニットタイプは、ＮＡＬユニットヘッダ内の固定長コードワードによって示される、項目７に記載の方法。
（項目９）
上記第２のパラメータセット識別子を取得するステップは、上記第２のパラメータセット識別子を上記第１のパラメータセットから取得するステップを含む、項目１－８のいずれかに記載の方法。
（項目１０）
上記第３のパラメータセット識別子は、上記第１のパラメータセットから取得される、項目６に記載の方法。
（項目１１）
ビデオ領域をエンコーディングする方法であって、
ビデオ領域をエンコーディングする際に使用されるツールのツールパラメータを決定するステップであって、上記ツールは、ビデオコーディング技法を表す、ステップと、
第１のパラメータセット識別子によって識別される第１のパラメータセットを生成するステップと、
上記第１のパラメータセット内に、上記ツールに対応するツールフラグを含むステップであって、上記ツールフラグは、上記ツールパラメータが、上記ビデオ領域をエンコーディングするために存在するかまたは有効にされていることを示す値に設定される、ステップと、
第２のパラメータセット識別子を使用して、上記第１のパラメータセット内にツールパラメータを含むステップと、
上記ビデオ領域のヘッダ内の第１のパラメータセット識別子をコーディングするステップと、
上記ツールパラメータを使用して、上記ビデオ領域をコーディングするステップと
を含む、方法。
（項目１２）
上記含むステップは、
上記ツールパラメータが既存のツールパラメータセット内の既存のツールパラメータと同じ場合、上記第２のパラメータセット識別子を上記既存のパラメータセットのパラメータセット識別子に等しくなるように設定するステップと、
上記ツールパラメータが任意の既存のパラメータセット内の任意の既存のツールパラメータと同じではない場合、上記第１のパラメータセット識別子と異なる値を有する上記第２のパラメータセット識別子を生成し、使用するステップと
を含む、項目１１に記載の方法。
（項目１３）
上記ビデオ領域は、ビデオ写真に対応する、項目１１に記載の方法。
（項目１４）
上記ビデオ領域は、ビデオ写真より小さい、項目１１に記載の方法。
（項目１５）
上記ビデオコーディング技法は、上記コーディングされたビデオ領域内の複数のコーディングブロックに共通であるコーディングパラメータに基づく、項目１１に記載の方法。
（項目１６）
上記第１のパラメータセット内に、別のツールに対応する別のツールフラグを含むステップであって、上記別のツールフラグは、別のツールに対応する別のツールパラメータが、上記ビデオ領域をエンコーディングするために存在するかまたは有効にされていることを示す値に設定される、ステップと、
第３のパラメータセット識別子を使用して、上記第１のパラメータセット内に別のツールパラメータを含むステップと
をさらに含み、
上記ビデオ領域をコーディングするステップは、上記別のツールパラメータを使用して実施される、項目１１－１５のいずれかに記載の方法。
（項目１７）
上記第２のパラメータセット識別子は、上記第１のパラメータセット内でコーディングされる、項目１１に記載の方法。
（項目１８）
項目１－１０のうちの任意の１つ以上のものに記載の方法を実装するように構成されるプロセッサを備える、ビデオデコーダ装置。
（項目１９）
項目１１－１７のうちの任意の１つ以上のものに記載の方法を実装するように構成されるプロセッサを備える、ビデオエンコーダ装置。
（項目２０）
コンピュータ可読媒体であって、上記コンピュータ可読媒体は、その上に記憶されるコードを有し、上記コードは、プロセッサによって実行されると、上記プロセッサに、項目１－１７のうちの任意の１つ以上のものに記載の方法を実装させる、コンピュータ可読媒体。

本明細書に説明される付随の図面は、本説明のさらなる理解を提供するために提供され、本書の一部を構成する。

図１Ａは、ビットストリーム処理方法の実施例のフローチャートである。

図１Ｂは、ビデオ領域をエンコーディングする例示的方法のためのフローチャートである。

図２は、本開示における方法を実装する、例示的ビデオまたは写真エンコーダを図示する、略図である。

図３は、写真をタイルグループにパーティション化する実施例を図示する、略図である。

図４は、写真をタイルグループにパーティション化する実施例を図示する、略図である。

図５は、パラメータセット内の複数のツールのパラメータを表すための構文構造の実施例を図示する、略図である。

図６Ａ－６Ｂは、写真または写真領域のヘッダ内のツールパラメータのためのパラメータセットを参照するための構文構造の実施例を図示する。

図７は、本開示における方法を実装する、例示的ビデオまたは写真デコーダを図示する、略図である。

図８は、本開示における方法を実装する、抽出器の実施例を図示する、略図である。

図９は、少なくとも、本開示に説明される例示的エンコーダを含む、第１の例示的デバイスを図示する、略図である。

図１０は、少なくとも、本開示に説明される例示的デコーダを含む、第２の例示的デバイスを図示する、略図である。

図１１は、第１の例示的デバイスと、第２の例示的デバイスとを含む、電子システムを図示する、略図である。

図１２は、本書に説明される技法を実装するために使用される、ハードウェアプラットフォームの実施例を示す。

節の見出しは、可読性を改良するためのみに本書で使用され、各節内の開示される実施形態および技法の範囲をその節のみに限定しない。ある特徴は、Ｈ．２６４／ＡＶＣ（高度ビデオコーディング）、Ｈ．２６５／ＨＥＶＣ（高効率ビデオコーディング）およびＨ．２６６多用途ビデオコーディング（ＶＶＣ）規格の実施例を使用して説明される。しかしながら、開示される技法の可用性は、Ｈ．２６４／ＡＶＣまたはＨ．２６５／ＨＥＶＣまたはＨ．２６６／ＶＶＣシステムのみに限定されない。

本特許文書では、ビデオは、１つ以上の写真のシーケンスから成る。時折ビデオ基本ストリームとも称される、ビットストリームが、ビデオまたは写真を処理する、エンコーダによって生成される。ビットストリームはまた、システム層プロセスをビデオまたは写真エンコーダによって生成されたビデオ基本ストリーム上で実施することの出力である、トランスポートストリームまたはメディアファイルであることができる。ビットストリームをデコーディングすることは、ビデオまたは写真をもたらす。システム層プロセスは、ビデオ基本ストリームをカプセル化するためのものである。例えば、ビデオ基本ストリームは、トランスポートストリームまたはメディアファイルの中にペイロードとしてパッキングされる。システム層プロセスはまた、トランスポートストリームまたはメディアファイルを伝送のためにストリームの中に、またはペイロードとしての記憶のためにファイルの中にカプセル化する動作を含む。システム層プロセスにおいて生成されたデータユニットは、システム層データユニットと称される。システム層プロセスにおいてペイロードをカプセル化する間、システム層データユニット内に付加される情報は、システム層情報、例えば、システム層データユニットのヘッダと呼ばれる。ビットストリームを抽出することは、ビットストリームのビットの一部を含有する、サブビットストリーム、および抽出プロセスによる構文要素上への１つ以上の必要な修正を取得する。サブビットストリームをデコーディングすることは、ビデオまたは写真をもたらし、これは、ビットストリームをデコーディングすることによって取得される、ビデオまたは写真と比較して、より低い解像度および／またはより低いフレームレートであり得る。サブビットストリームから取得されるビデオまたは写真はまた、ビットストリームから取得されるビデオまたは写真の領域でもあり得る。

パラメータセットは、部分的に１つ以上の写真をデコーディングする際に共通パラメータを搬送する、ビデオビットストリーム内のデータユニットである。パラメータセットは、そのパラメータセット識別子を規定する、構文要素を有する。概して、デコーダは、スライスヘッダ（例えば、Ｈ．２６４／ＡＶＣ規格、Ｈ．２６５／ＨＥＶＣ規格）またはタイルグループヘッダ（現在のＨ．２６６／ＶＶＣＷＤ（作業原案））内の１つ以上のパラメータセット識別子を取得する。すなわち、そのようなパラメータセットは、直接または間接的に、スライスまたはタイルグループによって参照される。デコーディングプロセスでは、デコーダは、スライスまたはタイルグループと称されるものに等しいその識別子を用いて、パラメータセットをアクティブ化する。

ビデオコーデックでは、１つ以上のコーディングツールは、写真適応または写真領域適応の特徴、例えば、適応ループフィルタ（ＡＬＦ）、スケーリングリスト、サンプル適応オフセット（ＳＡＯ）等を有する。パラメータセットは、そのようなパラメータが写真内の領域間または複数の写真間で効率的に共有され得るように、そのようなツールのパラメータを効率的に搬送するために使用される。Ｈ．２６６／ＶＶＣＷＤの現在の設計では、適応パラメータセット（ＡＰＳ）が、最初に、ＡＬＦパラメータをカプセル化するために採用される。写真間で（または写真内の領域間でさえ）頻繁に変化する特徴を伴う、より多くの情報が、ＡＰＳ内でコーディングされることが予期される。ここで、パラメータセットのアクティブ化および管理における増加された複雑性を伴わずに、種々のツールのパラメータが柔軟に更新され得るように、ＡＰＳ内でパラメータをコーディングする方法に関する問題が生じる。

問題１：

従来的方法に従って、全てのパラメータが、単一ＡＰＳ内でコーディングされる場合、複製されたコーディングされた情報の問題が、生じる。具体的には、ツールＡおよびツールＢのパラメータが、ＡＰＳ内でコーディングされると仮定する。例えば、後続タイルグループ（または同等に、スライス）が、前者のコーディングされたタイルグループと同一ツールＡパラメータを使用するが、異なるツールＢパラメータを使用する、シナリオを検討する。この場合、エンコーダは、新しいツールＢパラメータを含有するが、繰り返されるツールＡ情報も含有する、新しいＡＰＳを生成する必要があり、そのようなツールＡ情報は、ビットの無駄につながる。

問題２：

問題１を解決するために、ＪＣＴＶＣ－Ｇ３３２は、複数のＡＰＳ識別子を単一スライスヘッダ内でシグナリングする方法を提供する。デコーディングプロセスでは、デコーダは、ツール情報につながるフラグが１に等しい場合、複数のＡＰＳをアクティブ化し、前のアクティブ化されたＡＰＳ内で取得された情報を現在のアクティブ化されたＡＰＳ内で取得される情報で上書きする。ＪＣＴＶＣ－Ｇ３３２における問題は、複数のＡＰＳ識別子をスライスヘッダ内に有し、付加的上書き動作を有するものである。エンコーダ実装の観点から、エンコーダは、常時、デコーダが、上記の設計に従って、複数のＡＰＳのアクティブ化の際、同じツールパラメータを得ることができることを確実にするようにＡＰＳ内のコーディングツールパラメータを適切に扱うものとされ、これは、算出負担および余剰判断動作をエンコーダにもたらす。

問題３：

別の種類の先行技術は、スライスまたはタイルグループをデコーディングする際に使用されるツール毎に、ＡＰＳを別個にシグナリングするものである。問題１における実施例を検討する。ツールＢが、スライスをコーディングする際に使用される場合、ツールＢ情報を含有するＡＰＳに対応するＡＰＳ識別子が、本ＡＰＳが依然としてツールＡ情報を含有するかどうかにかかわらず、エンコーダによって、スライスヘッダ内にシグナリングされる。ＡＰＳでは、ツールＢパラメータが、ツールＡパラメータに続いて提示されると仮定する。ここで、問題は、デコーディングプロセスでは、デコーダが、最初に、ツールＢパラメータを解析する前に、アクティブ化されたＡＰＳ内でツールＡパラメータを解析する必要があることである。すなわち、ツールＡパラメータは、本スライスをデコーディングする際に必要とされ得ず、ツールＡパラメータを解析する動作は、デコーダの算出リソースを無駄にしている。加えて、別の問題は、アクティブ化されたパラメータセット内の部分的情報のみがデコーディングプロセスにおいて有効であるということが、「アクティブ化されたパラメータ内のパラメータが有効である」という一般的概念および動作を覆すことになることである。

問題４：

問題１を解決するために、ＪＣＴＶＣ－Ｈ００６９は、ＡＰＳ参照方法を提供する。第１のＡＰＳは、第１のＡＰＳ内の第２のＡＰＳの識別子に等しいｒｅｆ＿ａｐｓ＿ｉｄをシグナリングすることによって、第２のＡＰＳを参照し得る。スライスヘッダでは、１つのみのＡＰＳ識別子が、シグナリングされる。第１のＡＰＳをデコーディングする際、第２のＡＰＳは、アクティブ化され、ツールパラメータを得る。問題は、ＡＰＳ参照スキームによってリンクされたＡＰＳのチェーンが、エンコーダおよびデコーダ実装における複雑性を上昇させることである。コーデックが、ＡＰＳバッファの記憶および更新を誘導するための参照関係を維持する必要があり、複数のＡＰＳのアクティブ化を用いて参照チェーンをトレーシングすることによってのみ、ツールパラメータ（また、ツールの有効フラグを含み得る）を突き止めることができる。加えて、別の問題は、アクティブ化されたパラメータセット内の部分的情報のみがデコーディングプロセスにおいて有効であることが、「アクティブ化されたパラメータ内のパラメータが有効である」という一般的概念および動作を覆すことになることである。

問題５：

問題１を解決するために、ＪＣＴＶＣ－Ｈ０５０５は、単一ＡＰＳ内の１つのみのツールのパラメータのみを提示する、ＡＰＳ設計を提供する。ＪＣＴＶＣ－Ｈ０５０５は、グループパラメータセット（ＧＰＳ）を提供し、ＡＰＳ識別子および他のパラメータセット識別子（例えば、ＰＰＳ識別子）を集合的にシグナリングする。スライスヘッダでは、ＧＰＳ識別子は、本スライスをデコーディングするためにアクティブ化されるべきパラメータセットを示すようにシグナリングされる。ＪＣＴＶＣ－Ｈ０５０５設計の問題は、新しいパラメータセット（すなわち、ＧＰＳ）をハンドリングする増加された複雑性である。別の問題は、概して、ＡＰＳ内のパラメータが、他のパラメータセット（例えば、ＰＰＳ）内のものより頻繁に変化するため、ＧＰＳが、ＡＰＳ識別子を頻繁に更新する必要があり、これが、写真毎に変化しないＧＰＳ内の他の情報（例えば、ＰＰＳ識別子）の繰り返しコーディングにつながるという事実にある。第３の問題は、ＡＰＳ内の１つ以上のツールが、写真の領域に適応可能であり得るとき、異なるＡＰＳが、単一写真内の異なる領域に適用され、これがまた、確実に、ＧＰＳ内のＰＰＳ識別子の繰り返しコーディングにつながることである。ＧＰＳ内の部分的情報の上記の２つの繰り返しコーディングもまた、ＧＰＳバッファおよび参照の複雑な管理をもたらす。

パラメータの効率的コーディングのために、パラメータセットは、部分的に１つ以上の写真をデコーディングする際、共通パラメータを搬送するビデオビットストリーム内にデータユニットとして導入される。パラメータセットは、そのパラメータセット識別子を規定する、構文要素を有する。概して、デコーダは、スライスヘッダ（例えば、Ｈ．２６４／ＡＶＣ規格、Ｈ．２６５／ＨＥＶＣ規格）またはタイルグループヘッダ（現在のＨ．２６６／ＶＶＣＷＤ（作業原案））内の１つ以上のパラメータセット識別子を取得する。すなわち、そのようなパラメータセットは、直接または間接的に、スライスまたはタイルグループによって参照される。デコーディングプロセスでは、デコーダは、スライスまたはタイルグループと称されるものに等しいその識別子を用いて、パラメータセットをアクティブ化する。

ビデオコーデックでは、１つ以上のコーディングツールまたはコーディング技法は、写真適応または写真領域適応の特徴、例えば、適応ループフィルタ（ＡＬＦ）、スケーリングリスト、サンプル適応オフセット（ＳＡＯ）等を有する。パラメータセットは、そのようなパラメータが写真内の領域間または複数の写真間で効率的に共有され得るように、そのようなツールのパラメータを効率的に搬送するために使用される。Ｈ．２６６／ＶＶＣＷＤの現在の設計では、適応パラメータセット（ＡＰＳ）が、最初に、ＡＬＦパラメータをカプセル化するために採用される。写真間で（または写真内の領域間でさえ）頻繁に変化する特徴を伴う、より多くの情報が、ＡＰＳ内でコーディングされることが予期される。ここで、パラメータセットのアクティブ化および管理における増加された複雑性を伴わずに、種々のツールのパラメータが柔軟に更新され得るように、パラメータセット内でパラメータをコーディングする方法に関する問題が生じる。本問題は、ビデオコーデックおよびビットストリーム内へのパラメータセットの設計および実装に一般的である。

本明細書に説明される実施形態のある側面によると、写真または写真領域をエンコーディングする際に使用されるツールのツールパラメータを決定するステップと、識別子パラメータを、ツールパラメータを含有するパラメータセットに対応する、パラメータセット識別子に等しくなるように設定するステップと、第１のパラメータセットを生成するステップと、第１のパラメータセット識別子を第１のパラメータセットに割り当てるステップと、第１のパラメータセット内のツールに対応するツールフラグを、ツールパラメータが、提示されている、またはツールが、写真または写真領域をエンコーディングする際に有効にされることを示す、値に等しくなるようにコーディングするステップと、第１のパラメータセット内の識別子パラメータをコーディングするステップであって、第１のパラメータがツールパラメータを含有するパラメータセットと同一タイプである、ステップと、写真または写真領域内のヘッダ内の第１のパラメータセット識別子をコーディングするステップと、ツールパラメータを使用して、写真または写真領域をコーディングするステップとを含む、ビデオまたは写真を処理するためのエンコーディング方法が、提供される。

本明細書に開示される実施形態のある側面によると、ビットストリームを解析し、第１のパラメータセット識別子をコーディングされた写真またはコーディングされた写真領域に対応するビットを含有するデータユニットから取得するステップと、第１のパラメータセット識別子に等しいその識別子を用いて、第１のパラメータセットをアクティブ化するステップと、ツールフラグを第１のパラメータセットから取得するステップと、ツールフラグが、ツールフラグに対応するツールのツールパラメータが、提示されている、またはツールフラグに対応するツールが、コーディングされた写真またはコーディングされた写真領域をデコーディングする際に有効にされることを示す場合、第２のパラメータセット識別子を第１のパラメータセットから取得するステップと、第２のパラメータセット識別子に等しいその識別子を用いて、第１のパラメータセットと同一タイプの第２のパラメータセットをアクティブ化するステップであって、第２のパラメータセット内のインジケーションパラメータは、第２のパラメータセット内に含有されるツールパラメータがツールフラグに対応するツールのツールパラメータのみであることを示す、ステップと、ツールパラメータを第２のパラメータセットから取得するステップと、ツールパラメータを使用して、コーディングされた写真またはコーディングされた写真領域をデコーディングするステップとを含む、ビットストリームを処理し、ビデオまたは写真を再構築するためのデコーディング方法が、提供される。

本明細書に説明される上記の方法および他の技法を用いて、種々のツールのパラメータが、パラメータセットのアクティブ化および管理における増加された複雑性を伴わずに、パラメータセット内で効率的にコーディングされ、柔軟に更新されることができる。

実施形態１

図２は、ビデオまたは写真をコーディングする際に本開示における方法を利用する、エンコーダを図示する、略図である。エンコーダの入力は、ビデオであって、出力は、ビットストリームである。ビデオが、写真のシーケンスから成るため、エンコーダは、事前に設定された順序、すなわち、エンコーディング順序において、写真を１つずつ処理する。エンコーダ順序は、エンコーダのための構成ファイル内に規定された予測構造に従って決定される。ビデオ内の写真のエンコーディング順序（デコーダ側における写真のデコーディング順序に対応する）は、写真の表示順序と同じであってもよい、または異なってもよいことに留意されたい。

パーティションユニット２０１は、エンコーダの構成に従って、入力ビデオ内の写真をパーティション化する。概して、写真は、１つ以上の最大コーディングブロックにパーティション化されることができる。最大コーディングブロックは、エンコーディングプロセスにおいて最大の許容または構成されるブロックであって、通常、写真内の正方形領域である。写真は、１つ以上のタイルにパーティション化されることができ、タイルは、整数の最大コーディングブロックまたは非整数の最大コーディングブロックを含有してもよい。１つのオプションは、タイルが１つ以上のスライスを含有し得ることである。すなわち、タイルはさらに、１つ以上のスライスにパーティション化されることができ、かつ各スライスは、整数の最大コーディングブロックまたは非整数の最大コーディングブロックを含有してもよい。別のオプションは、スライスが１つ以上のタイルを含有する、またはタイルグループが１つ以上のタイルを含有するものである。すなわち、写真内のある順序（例えば、タイルのラスタ走査順序）における１つ以上のタイルが、タイルグループを形成する。加えて、タイルグループはまた、左上タイルおよび右下タイルの場所を用いて表される、写真内の矩形領域を網羅することができる。以下の説明では、「タイルグループ」が、実施例として使用される。パーティションユニット２０１は、固定パターンを使用して、写真をパーティション化するように構成されることができる。例えば、パーティションユニット２０１は、写真をタイルグループにパーティション化し、各タイルグループは、最大コーディングブロックの行を含有する、単一タイルを有する。別の実施例は、パーティションユニット２０１が、写真を複数のタイルにパーティション化し、写真内のラスタ走査順序におけるタイルをタイルグループに形成するものである。代替として、パーティションユニット２０１はまた、動的パターンを採用し、写真をタイルグループ、タイル、およびブロックにパーティション化することができる。例えば、最大伝送ユニット（ＭＴＵ）サイズの制限に適合させるために、パーティションユニット２０１は、動的タイルグループパーティション化方法を採用し、タイルグループ毎のコーディングビットの数がＭＴＵ制限を超えないことを確実にする。

図３は、写真をタイルグループにパーティション化する実施例を図示する、略図である。パーティションユニット２０１は、１６×８の最大コーディングブロック（鎖線に描写される）を伴う写真３０を８つのタイル３００、３１０、３２０、３３０、３４０、３５０、３６０、および３７０にパーティション化する。パーティションユニット２０１は、写真３０を３つのタイルグループにパーティション化する。タイルグループ３０００は、タイル３００を含有し、タイルグループ３１００は、タイル３１０、３２０、３３０、３４０、および３５０を含有し、タイルグループ３２００は、タイル３６０および３７０を含有する。図３におけるタイルグループは、写真３０内にタイルラスタ走査順序で形成される。

図４は、写真をタイルグループにパーティション化する実施例を図示する、略図である。パーティションユニット２０１は、１６×８の最大コーディングブロック（鎖線に描写される）を伴う写真４０を８つのタイル４００、４１０、４２０、４３０、４４０、４５０、４６０、および４７０にパーティション化する。パーティションユニット２０１は、写真４０を２つのタイルグループにパーティション化する。タイルグループ４０００は、タイル４００、４１０、４４０、および４５０を含有し、タイルグループ４１００は、タイル４２０、４３０、４６０、および４７０を含有する。タイルグループ４０００は、左上タイル４００および右下タイル４５０として表され、タイルグループ４１００は、左上タイル４２０および右下タイル４７０として表される。

１つ以上のタイルグループまたはタイルは、写真領域と称され得る。概して、写真を１つ以上のタイルにパーティション化することは、エンコーダ構成ファイルに従って行われる。パーティションユニット２０１は、パーティション化パラメータを設定し、タイルへの写真のパーティション化様式を示す。例えば、パーティション化様式は、写真を（ほぼ）等サイズのタイルにパーティション化することであり得る。別の実施例は、パーティション化様式は、行および／または列内のタイル境界の場所を示し、フレキシブルなパーティション化を促進することであり得る。

パーティションユニット２０１の出力パラメータは、写真のパーティション化様式を示す。

予測ユニット２０２は、コーディングブロックの予測サンプルを決定する。予測ユニット２０２は、ブロックパーティションユニット２０３と、ＭＥ（運動推定）ユニット２０４と、ＭＣ（運動補償）ユニット２０５と、イントラ予測ユニット２０６とを含む。予測ユニット２０２の入力は、パーティションユニット２０１によって出力された最大コーディングブロックと、最大コーディングブロックと関連付けられる属性パラメータ、例えば、タイルグループ内およびタイル内の写真内の最大コーディングブロックの場所とである。予測ユニット２０２は、最大コーディングブロックを１つ以上のコーディングブロックにパーティション化し、これはまた、より小さいコーディングブロックにさらにパーティション化されることができる。クワッドツリー、バイナリ分割、およびターナリ分割を含む、１つ以上のパーティション化方法が、適用されることができる。予測ユニット２０２は、パーティション化において取得されるコーディングブロックのための予測サンプルを決定する。随意に、予測ユニット２０２はさらに、コーディングブロックを１つ以上の予測ブロックにパーティション化し、予測サンプルを決定することができる。予測ユニット２０２は、ＤＰＢ（デコーディングされた写真バッファ）ユニット２１４内の１つ以上の写真をコーディングブロックのインター予測サンプルを決定する際の参照として採用する。予測ユニット２０２はまた、加算器２１２によって出力された写真の再構成された部分をコーディングブロックの予測サンプルを導出する際の参照として採用することができる。予測ユニット２０２は、コーディングブロックの予測サンプルと、例えば、一般的レート歪み最適化（ＲＤＯ）法を使用することによる、予測ユニット２０２の出力パラメータでもある、予測サンプルを導出するための関連付けられるパラメータとを決定する。

予測ユニット２０２の内側では、ブロックパーティションユニット２０３が、コーディングブロックのパーティション化を決定する。ブロックパーティションユニット２０３は、最大コーディングブロックを１つ以上のコーディングブロックにパーティション化し、これはまた、より小さいコーディングブロックにさらにパーティション化されることができる。クワッドツリー、バイナリ分割、およびターナリ分割を含む、１つ以上のパーティション化方法が、適用されることができる。随意に、ブロックパーティションユニット２０３はさらに、コーディングブロックを１つ以上の予測ブロックにパーティション化し、予測サンプルを決定することができる。ブロックパーティションユニット２０３は、コーディングブロックのパーティション化の決定の際にＲＤＯ法を採用することができる。ブロックパーティションユニット２０３の出力パラメータは、コーディングブロックのパーティション化を示す、１つ以上のパラメータを含む。

ＭＥユニット２０４およびＭＣユニット２０５は、ＤＰＢ２１４からの１つ以上のデコーディングされた写真を参照写真として利用して、コーディングブロックのインター予測サンプルを決定する。ＭＥユニット２０４は、１つ以上の参照写真を含有する、１つ以上の参照リストを構築し、コーディングブロックのための参照写真内の１つ以上のマッチングブロックを決定する。ＭＣユニット２０５は、マッチングブロック内のサンプルを使用して、予測サンプルを導出し、コーディングブロック内のオリジナルサンプルと予測サンプルとの間の差異（すなわち、残差）を計算する。ＭＥユニット２０４の出力パラメータは、参照リストインデックス、参照インデックス（ｒｅｆＩｄｘ）、運動ベクトル（ＭＶ）等を含む、マッチングブロックの場所を示し、参照リストインデックスは、その中にマッチングブロックが位置する、参照写真を含有する、参照リストを示し、参照インデックスは、マッチングブロックを含有する、参照リスト内の参照写真を示し、ＭＶは、コーディングブロックの場所と写真内のピクセルの場所を表すための同じ座標内のマッチングブロックとの間の相対的オフセットを示す。ＭＣユニット２０５の出力パラメータは、コーディングブロックのインター予測サンプル、およびインター予測サンプルを構築するためのパラメータ、例えば、マッチングブロック内のサンプルのための加重パラメータ、マッチングブロック内のサンプルをフィルタリングするためのフィルタタイプおよびパラメータである。概して、ＲＤＯ法は、レート歪み（ＲＤ）の意味における最適マッチングブロックおよび２つのユニットの対応する出力パラメータを得るために、ＭＥユニット２０４およびＭＣユニット２０５にはともに適用されることができる。

特に、かつ随意に、ＭＥユニット２０４およびＭＣユニット２０５は、コーディングブロックを参照として含有する、現在の写真を使用して、コーディングブロックのイントラ予測サンプルを取得することができる。本開示では、イントラ予測とは、コーディングブロックを含有する写真内のデータのみがコーディングブロックの予測サンプルを導出するための参照として採用されることを意味する。この場合、ＭＥユニット２０４およびＭＣユニット２０５は、現在の写真内の再構成された部分を使用し、再構成された部分は、加算器２１２の出力からのものである。実施例は、エンコーダが、写真バッファを配分し、加算器２１２の出力データを（一時的に）記憶するものである。エンコーダのための別の方法は、特殊写真バッファをＤＰＢ２１４内に留保し、加算器２１２からのデータを保つことである。

イントラ予測ユニット２０６は、コーディングブロックを参照として含有する現在の写真の再構成された部分を使用して、コーディングブロックのイントラ予測サンプルを取得する。イントラ予測ユニット２０６は、コーディングブロックの再構成された近傍のサンプルをコーディングブロックのイントラ予測サンプルを導出するためのフィルタの入力としてとり、フィルタは、（例えば、角イントラ予測を使用するときに予測サンプルを計算するための）補間フィルタ、（例えば、ＤＣ値を計算するための）低域通過フィルタ、またはすでにコーディングされた（色）コンポーネントを使用して、コンポーネントの予測値（色）を導出するためのクロスコンポーネントフィルタであることができる。特に、イントラ予測ユニット２０６は、検索動作を実施し、現在の写真内の再構成された部分の範囲内のコーディングブロックのマッチングブロックを得て、マッチングブロック内のサンプルをコーディングブロックのイントラ予測サンプルとして設定することができる。イントラ予測ユニット２０６は、ＲＤＯ法を呼び出し、イントラ予測モード（すなわち、コーディングブロックのためのイントラ予測サンプルを計算するための方法）および対応する予測サンプルを決定する。イントラ予測サンプルに加え、イントラ予測ユニット２０６の出力はまた、使用中のイントラ予測モードを示す、１つ以上のパラメータを含む。

加算器２０７は、オリジナルサンプルとコーディングブロックの予測サンプルとの間に差異を計算するように構成される。加算器２０７の出力は、コーディングブロックの残差である。残差は、Ｎ×Ｍ２次元行列として表され得、ＮおよびＭは、２つの正の整数であって、ＮおよびＭは、等しいまたは異なる値であることができる。

変換ユニット２０８は、残差をその入力としてとる。変換ユニット２０８は、１つ以上の変換方法を残差に適用してもよい。信号処理の観点から、変換方法は、変換行列によって表され得る。随意に、変換ユニット２０８は、残差のための変換ブロックとなるように、コーディングブロックのものと同一形状およびサイズを伴う矩形ブロック（本開示では、正方形ブロックは、矩形ブロックの特殊例である）を使用することを決定してもよい。随意に、変換ユニット２０８は、残差をいくつかの矩形ブロック（また、矩形ブロックの幅または高さが１つのサンプルである、特殊例を含んでもよい）にパーティション化し、変換動作をいくつかの矩形上で、順次、例えば、デフォルト順序（例えば、ラスタ走査順序）、所定の順序（例えば、予測モードまたは変換方法に対応する順序）、いくつかの候補順序のための選択された順序に従って実施することを決定してもよい。変換ユニット２０８は、複数の変換を残差上で実施することを決定してもよい。例えば、変換ユニット２０８は、最初に、コア変換を残差上で実施し、次いで、二次変換をコア変換を終了後に取得された係数上で実施する。変換ユニット２０８は、ＲＤＯ法を利用して、変換パラメータを決定し、これは、残差ブロックに適用される変換プロセス、例えば、残差ブロックの変換ブロック、変換行列、複数の変換等へのパーティション化において使用される実行様式を示す。変換パラメータは、変換ユニット２０８の出力パラメータ内に含まれる。変換ユニット２０８の出力パラメータは、変換パラメータと、２次元行列によって表され得る、残差を変換後に取得されたデータ（例えば、変換係数）とを含む。

量子化ユニット２０９は、残差のその変換後、変換ユニット２０８によって出力されたデータを量子化する。量子化ユニット２０９内で使用される量子化器は、スカラー量子化器およびベクトル量子化器の一方または両方であることができる。大部分のビデオエンコーダでは、量子化ユニット２０９は、スカラー量子化器を採用する。スカラー量子化器の量子化ステップは、ビデオエンコーダ内の量子化パラメータ（ＱＰ）によって表される。概して、ＱＰと量子化ステップとの間の同じマッピングは、エンコーダおよび対応するデコーダ内で事前に設定または事前に定義される。

ＱＰの値、例えば、写真レベルＱＰおよび／またはブロックレベルＱＰは、エンコーダに適用される構成ファイルに従って設定される、またはエンコーダ内のコーダ制御ユニットによって決定されることができる。例えば、コーダ制御ユニットは、レート制御（ＲＣ）法を使用して、写真および／またはブロックの量子化ステップを決定し、次いで、ＱＰと量子化ステップとの間のマッピングに従って、量子化ステップをＱＰに変換する。

量子化ユニット２０９のための制御パラメータは、ＱＰである。量子化ユニット２０９の出力は、２次元行列の形態で表される、１つ以上の量子化された変換係数（すなわち、「レベル」として知られる）である。

逆量子化２１０は、スケーリング動作を量子化２０９の出力上で実施し、再構成された係数を得る。逆変換ユニット２１１は、変換ユニット２０８からの変換パラメータに従って、逆変換を逆量子化２１０からの再構成された係数上で実施する。逆変換ユニット２１１の出力は、再構成された残差である。特に、エンコーダが、ブロックをコーディングする際の量子化をスキップすることを決定する（例えば、エンコーダが、ＲＤＯ法を実装し、量子化をコーディングブロックに適用するかどうかを決定する）とき、エンコーダは、量子化ユニット２０９および逆量子化２１０をバイパスすることによって、変換ユニット２０８の出力データを逆変換ユニット２１１に誘導する。

加算器２１２は、再構成された残差および予測ユニット２０２からのコーディングブロックの予測サンプルを入力としてとり、コーディングブロックの再構成されたサンプルを計算し、再構成されたサンプルをバッファ（例えば、写真バッファ）の中に入れる。例えば、エンコーダは、写真バッファを配分し、加算器２１２の出力データを（一時的に）記憶する。エンコーダのための別の方法は、特殊写真バッファをＤＰＢ２１４内に留保し、加算器２１２からのデータを保つことである。

フィルタリングユニット２１３は、フィルタリング動作をデコーディングされた写真バッファ内の再構成された写真サンプル上で実施し、デコーディングされた写真を出力する。フィルタリングユニット２１３は、１つのフィルタまたはいくつかのカスケードフィルタから成ってもよい。例えば、Ｈ．２６５／ＨＥＶＣ規格によると、フィルタリングユニットは、２つのカスケードフィルタ、すなわち、非ブロック化フィルタおよびサンプル適応オフセット（ＳＡＯ）フィルタから成る。フィルタリングユニット２１３は、適応ループフィルタ（ＡＬＦ）を含んでもよい。フィルタリングユニット２１３はまた、ニューラルネットワークフィルタを含んでもよい。フィルタリングユニット２１３は、写真内の全てのコーディングブロックの再構成されたサンプルがデコーディングされた写真バッファ内に記憶されると、写真の再構成されたサンプルのフィルタリングを開始してもよく、これは、「写真層フィルタリング」と称され得る。随意に、フィルタリングユニット２１３のための写真層フィルタリングの代替実装（「ブロック層フィルタリングと称される」）は、再構成されたサンプルが写真内の全ての連続コーディングブロックをエンコーディングする際の参照として使用されない場合、写真内のコーディングブロックの再構成されたサンプルのフィルタリングを開始するものである。ブロック層フィルタリングは、フィルタリングユニット２１３が、写真の全ての再構成されたサンプルが利用可能になるまで、フィルタリング動作を一時停止し、したがって、スレッド間の時間遅延をエンコーダ内に保存することを要求しない。フィルタリングユニット２１３は、ＲＤＯ法を呼び出すことによって、フィルタリングパラメータを決定する。フィルタリングユニット２１３の出力は、写真のデコーディングされたサンプルであって、フィルタリングパラメータは、フィルタのインジケーション情報、フィルタ係数、フィルタ制御パラメータ等を含む。

エンコーダは、フィルタリングユニット２１３からデコーディングされた写真をＤＰＢ２１４内に記憶する。エンコーダは、例えば、ＤＰＢ２１４内の写真記憶の時間長、ＤＰＢ２１４からの写真の出力等、ＤＰＢ２１４内の写真上での動作を制御するために使用される、ＤＰＢ２１４に適用される、１つ以上の命令を決定してもよい。本開示では、そのような命令は、ＤＰＢ２１４の出力パラメータとして捉えられる。

エントロピコーディングユニット２１５は、バイナリ化およびエントロピコーディングを写真の１つ以上のコーディングパラメータ上で実施し、これは、コーディングパラメータの値をバイナリシンボル「０」および「１」から成るコードワードに変換し、仕様または規格に従って、コードワードをビットストリームの中に書き込む。コーディングパラメータは、テクスチャデータおよび非テクスチャとして分類されてもよい。テクスチャデータは、コーディングブロックの変換係数であって、非テクスチャデータは、エンコーダ内のユニットの出力パラメータ、パラメータセット、ヘッダ、補助情報等を含む、テクスチャデータを除く、コーディングパラメータ内の他のデータである。エントロピコーディングユニット２１５の出力は、仕様または規格に一致する、ビットストリームである。

エントロピコーディングユニット２１５は、前述のユニットからの出力パラメータと、ビットストリームに提示されるために必要とされる、コードパラメータとを受信する。本開示では、また、ビデオコーディング技術の分野では、「ツール」は、エンコーディングまたはデコーディングする際のプロセスまたはユニットを指す。ツールは、前述のユニット等の相対的大ユニットであってもよい。ツールはまた、コーディングモード（例えば、マージ、平面等）、フィルタ（例えば、非ブロック化、ＳＡＯ、ＡＬＦ、ＮＮフィルタ等）等によって表されるプロセス等の比較的に詳細なプロセスであってもよい。ツールの「ツールパラメータ」は、エンコーダまたはデコーダがツールによって規定されたエンコーディングまたはデコーディング動作を行うための１つ以上のパラメータを指す。例えば、マージモードのツールパラメータは、コーディングブロックのマージインデックスを含む。ＡＬＦのツールパラメータは、フィルタ係数を含む。

エンコーディングプロセスでは、ツールは、１つ以上の写真、１つ以上の写真領域（例えば、タイル、タイルグループ）、および１つ以上のコーディングブロックに適応可能であってもよい。ツールパラメータの観点から、ツールが、１つ以上の写真に適応可能である場合、ツールのツールパラメータは、少なくとも、写真内の全てのブロックのために更新しない。概して、ツールが、少なくとも、１つ以上の写真領域に適応可能であるとき、エントロピコーディングユニット２１５は、共通情報が、少なくとも、写真領域内のコーディングブロック間で共有され、ツールパラメータのコーディングビットを節約するように、ヘッダ内またはパラメータセット内の本ツールのツールパラメータをコーディングするであろう。

ツールＡおよびツールＢが、少なくとも、１つ以上の写真領域に適応可能である、２つのツールであると仮定する。ツールＡおよびツールＢの実施例は、フィルタリングユニット２１３内で使用される種々のフィルタであって、また、スケーリングリスト、参照写真セット（ＲＰＳ）、参照写真リスト（ＲＰＬ）等の１つ以上の写真領域に適応可能なそのパラメータを用いたプロセスでもあることができる。ツールＡおよびツールＢのパラメータツールは、写真または写真領域をエンコーディングする際に決定される。例えば、フィルタリングユニット２１３は、フィルタのパラメータを決定し、そのようなパラメータをエントロピコーディングユニット２１５にパスする。

エントロピコーディングユニット２１５は、ツールＡおよびツールＢのパラメータツールをパラメータセット内にコーディングする。そのようなパラメータセットは、シーケンスパラメータセット（ＳＰＳ）、写真パラメータセット（ＰＰＳ）、適応パラメータセット（ＡＰＳ）、または少なくとも写真または写真領域のための共通パラメータを搬送する、他のパラメータセットであることができる。図５は、パラメータセット内の複数のツールのパラメータを表すための構文構造の実施例を図示する、略図である。図５における太字の構文は、ビットストリーム内に存在する１つ以上のビットのストリングによって表される構文要素であって、ｕ（ｎ）は、ｎ個のビットを使用して、値を符号なし整数として表すことを規定し、ｎは、自然数であって、固定値または他の構文要素の値に応じた様式において変動する値であることができる。図５におけるｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ（）およびｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）は、それぞれ、ツールＡおよびツールＢのためのツールパラメータを表す、２つのデータ構造である。

図５における構文要素の意味論は、以下のように提示される。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、他の構文要素による参照のためのパラメータセットを識別する。
ｉｎｆｏ＿ｔｙｐｅは、パラメータセット内の情報のタイプを規定する。
１に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ツールＡが使用されることを規定する。０に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ツールＡが使用されないことを規定する。
１に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ツールＢが使用されることを規定する。０に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ツールＢが使用されないことを規定する。

代替として、ｔｏｏｌ＿Ａ＿ｆｌａｇおよびｔｏｏｌ＿Ｂ＿ｆｌａｇのための意味論は、以下の通りであり得る。
１に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ（）の存在を規定する。０に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ（）の不在を規定する。
１に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）の存在を規定する。０に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）の不在を規定する。

図６Ａ－６Ｂは、写真または写真領域のヘッダ内のツールパラメータのためのパラメータセットを参照するための構文構造の実施例を図示する。例えば、図６Ａ－６Ｂにおける構文構造は、タイルグループのヘッダ内で使用されることができる。ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの意味論は、以下の通りである。
ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、使用中のパラメータセットのためのｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの値を規定する。ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄに等しいそのパラメータセット識別子を伴うパラメータセットは、０に等しいｉｎｆｏ＿ｔｙｐｅを有するであろう。

図６Ａでは、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、常時、写真または写真領域のヘッダに提示される。図６Ｂでは、写真または写真領域のヘッダ内のｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの存在は、ツールＡおよびツールＢのうちの少なくとも１つが有効にされるかどうかで条件付けられる。概して、エントロピコーディングユニット２１５は、ｔｏｏｌ＿Ａ＿ｅｎａｂｌｅ＿ｆｌａｇおよびｔｏｏｌ＿Ｂ＿ｅｎａｂｌｅを複数の写真またはコーディングされたビデオシーケンスのためのパラメータセット内、例えば、ＳＰＳ内にコーディングする。

図５および図６Ａ－６Ｂにおける構文構造を使用して、エントロピコーディングユニット２１５は、ツールＡおよびツールＢのためのツールパラメータをコーディングする。特に、エンコーダが、ツールパラメータのいずれも更新しない場合、エントロピコーディングユニット２１５は、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを既存のパラメータセットの識別子に等しくなるように設定する。

ステップ１０１：エントロピコーディングユニット２１５が、識別子パラメータを、ツールパラメータを含有するパラメータセットに対応する、パラメータセット識別子に等しくなるように設定する。

エントロピコーディングユニット２１５が、ツールパラメータが既存のパラメータセット内のツールパラメータと同じであるかどうかをチェックする。該当する場合、エントロピコーディングユニット２１５は、識別子パラメータを、ツールパラメータを含有する既存のパラメータセットに対応する、パラメータセット識別子に等しくなるように設定する。エンコーダにおける例示的実装は、最初に、すでに既存のツールパラメータが写真または写真領域をコーディングするために好適であるかどうかをチェックするものである。例えば、エントロピコーディングユニット２１５が、ツールＡパラメータが、１に等しいそのパラメータセット識別子を伴う、既存のパラメータセット内のものと同じであることを見出す。

そうでなければ、エントロピコーディングユニット２１５は、第２のパラメータセットを生成し、第２のパラメータセット識別子を第２のパラメータセットに割り当て、第２のパラメータセット内のインジケーションパラメータを、第２のパラメータセット内に含有されるツールパラメータがツールパラメータのみであることを示す、値に設定し、ツールパラメータを第２のパラメータセット内にコーディングする。例えば、エントロピコーディングユニット２１５が、図５における構文構造に従って、以下のようにツールＢパラメータのためのパラメータセットを生成する。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｉｎｆｏ＿ｔｙｐｅ＝２
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）＝ｔｏｏｌＢｐａｒａｍｅｔｅｒｓ
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

ステップ１０２：エントロピコーディングユニット２１５が、第１のパラメータセットを生成し、第１のパラメータセット識別子を第１のパラメータセットに割り当て、第１のパラメータセット内のツールに対応するツールフラグを、ツールパラメータが、提示されている、またはツールが、写真または写真領域をエンコーディングする際に有効にされることを示す、値に等しくなるようコーディングし、識別子パラメータを第１のパラメータセット内でコーディングし、第１のパラメータは、ツールパラメータを含有するパラメータセットと同一タイプである。２つのパラメータセットは、ＲＢＳＰ（未加工バイトシーケンスペイロード）データ構造のタイプが、同一値のＮＡＬユニットタイプ（すなわち、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ）を規定する構文要素とともにＮＡＬ（ネットワーク抽象化層）ユニット内に含有される場合、同一タイプであることに留意されたい。解析ユニット７０１が、ツールパラメータを第２のパラメータセットから取得する。

エントロピコーディングユニット２１５が、図５における構文構造に従って、以下のように、ツールＡおよびツールＢのツールパラメータのための第１のパラメータセットを生成する。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝３
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

ステップ１０３：エントロピコーディングユニット２１５が、第１のパラメータセット識別子を写真または写真領域のヘッダ内にコーディングする。

エントロピコーディングユニット２１５が、図６Ａ－６Ｂにおけるｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを３に等しくなるように設定し、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを写真または写真領域（例えば、タイルグループ、またはタイル）のヘッダ内にコーディングする。

エンコーダは、写真または写真領域をエンコーディングするプロセスにおいて、ステップ１０１、１０２、および１０３を呼び出すことができることに留意されたい。エンコーダは、次いで、ツールパラメータを使用して、写真または写真領域をコーディングする。エントロピコーディングユニット２１５はまた、上記に述べられたデータのコーディングビットをビットストリームの中に書き込む。

特に、ツールＡおよびツールＢの両方のパラメータが、既存のパラメータセットにすでに提示されている場合、上記に述べられたステップ１０１、１０２、および１０３においてツールＡパラメータをハンドリングするための方法は、ツールパラメータをパラメータセット内にコーディングするために使用される。

特に、ツールＡおよびツールＢのパラメータが、既存のパラメータセットに提示されない場合、上記に述べられたステップ１０１、１０２、および１０３においてツールＢパラメータをハンドリングするための方法は、ツールパラメータをパラメータセット内にコーディングするために使用される。

実施形態２

図７は、実施形態１において前述のエンコーダによって生成されたビットストリームをデコーディングする際に本開示における方法を利用する、デコーダを図示する、略図である。デコーダの入力は、ビットストリームであって、デコーダの出力は、ビットストリームをデコーディングすることによって取得される、デコーディングされたビデオまたは写真である。

デコーダ内の解析ユニット７０１は、入力ビットストリームを解析する。解析ユニット７０１は、規格内に規定されたエントロピデコーディング方法およびバイナリ化方法を使用して、１つ以上のバイナリシンボル（すなわち、「０」および「１」）から成るビットストリーム内の各コードワードを対応するパラメータの数値に変換する。解析ユニット７０１はまた、１つ以上の利用可能なパラメータに従って、パラメータ値を導出する。例えば、ビットストリーム内に、デコーディングブロックが写真内の第１のものであることを示すフラグが存在するであろうとき、解析ユニット７０１は、写真領域の第１のデコーディングブロックのアドレスを示すアドレスパラメータを０となるように設定する。

解析ユニット７０１の入力ビットストリームでは、ツールパラメータを表すための構文構造は、図５および図６Ａ－６Ｂに図示される。

図５は、パラメータセット内の複数のツールのパラメータを表すための構文構造の実施例を図示する、略図である。図５における構文要素の意味論は、以下のように提示される。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、他の構文要素による参照のためのパラメータセットを識別する。
ｉｎｆｏ＿ｔｙｐｅは、パラメータセット内の情報のタイプを規定する。
１に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ツールＡが使用されることを規定する。０に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ツールＡが使用されないことを規定する。
１に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ツールＢが使用されることを規定する。０に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ツールＢが使用されないことを規定する。

図６Ａ－６Ｂは、写真または写真領域のヘッダ内のツールパラメータのためのパラメータセットを参照するための構文構造の実施例を図示する。例えば、図６Ａ－６Ｂにおける構文構造は、タイルグループのヘッダ内にあることができる。ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの意味論は、以下の通りである。
ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、使用中のパラメータセットのためのｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの値を規定する。ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄに等しいそのパラメータセット識別子を伴うパラメータセットは、０に等しいｉｎｆｏ＿ｔｙｐｅを有するであろう。

図６Ａでは、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、常時、写真または写真領域のヘッダに提示される。図６Ｂでは、写真または写真領域のヘッダ内のｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの存在は、ツールＡおよびツールＢのうちの少なくとも１つが有効にされるかどうかで条件付けられる。

デコーディングプロセスでは、解析ユニット７０１は、ビットストリームを解析し、第１のパラメータセット識別子をコーディングされた写真またはコーディングされた写真領域に対応するビットを含有するデータユニットから取得する。図６Ａ－６Ｂにおける構文構造を使用したエンコーダの前述の実施例に対応して、解析ユニット７０１は、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ（３に等しい）をコーディングされた写真またはコーディングされた写真領域（例えば、タイルグループ、またはタイル）のヘッダから取得する。

解析ユニット７０１は、第１のパラメータセット識別子に等しいその識別子を用いて、第１のパラメータセットをアクティブ化する。図５における構文構造を使用したエンコーダの前述の実施例に対応するように、３に等しいそのパラメータ識別子を伴う第１のパラメータセットでは、解析ユニット７０１は、以下のように、構文要素の値を取得する。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝３
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

ツールフラグが、ツールフラグに対応するツールのツールパラメータが、提示される、またはツールフラグに対応するツールが、コーディングされた写真またはコーディングされた写真領域をデコーディングする際に有効にされることを示す場合、解析ユニット７０１は、第２のパラメータセット識別子を第１のパラメータセットから取得する。次いで、解析ユニット７０１は、第２のパラメータセット識別子に等しいその識別子を用いて、第１のパラメータセットと同一タイプである、第２のパラメータセットをアクティブ化し、第２のパラメータセット内のインジケーションパラメータは、第２のパラメータセット内に含有されるツールパラメータがツールフラグに対応するツールのツールパラメータのみであることを示す。２つのパラメータセットは、ＲＢＳＰ（未加工バイトシーケンスペイロード）データ構造のタイプが、同一値のＮＡＬユニットタイプ（すなわち、ｎａｌ＿ｕｎｉｔ＿ｔｙｐｅ）を規定する構文要素とともにＮＡＬ（ネットワーク抽象化層）ユニット内に含有される場合、同一タイプであることに留意されたい。解析ユニット７０１が、ツールパラメータを第２のパラメータセットから取得する。

上記の実施例では、ツールＡに関して、解析ユニット７０１は、最初に、ｔｏｏｌ＿Ａ＿ｆｌａｇの値をチェックする。ｔｏｏｌ＿Ａ＿ｆｌａｇが、１に等しいため、解析ユニット７０１は、ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの値（すなわち、１に等しい）を３に等しいｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを伴うパラメータセットから取得する。解析ユニット７０１は、１に等しいそのパラメータセット識別子を用いて、パラメータセットをアクティブ化し、ツールＡパラメータを取得する。

ツールＢに関して、解析ユニット７０１は、次いで、３に等しいｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを伴うパラメータセットから取得されるｔｏｏｌ＿Ｂ＿ｆｌａｇの値をチェックする。ｔｏｏｌ＿Ｂ＿ｆｌａｇは、１に等しいため、解析ユニット７０１は、ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの値（すなわち、２に等しい）を３に等しいｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを伴うパラメータセットから取得する。解析ユニット７０１は、１に等しいそのパラメータセット識別子を用いて、パラメータセットをアクティブ化し、ツールＢパラメータを取得する。

加えて、３に等しいｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを伴うパラメータセット内のｔｏｏｌ＿Ａ＿ｆｌａｇ（またはｔｏｏｌ＿Ｂ＿ｆｌａｇ）が、３に等しいｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄを伴うパラメータセットを参照して、ツールＡ（またはツールＢ）がコーディングされた写真またはコーディングされた写真領域をデコーディングする際に使用されるかどうかを示す場合、解析ユニット７０１はまた、本フラグをツールＡ（またはツールＢ）パラメータ内に含む。

解析ユニット７０１は、ツールＡパラメータおよびツールＢパラメータをデコーダ内の他のユニットにパスし、これらのツールパラメータを使用して、コーディングされた写真またはコーディングされた写真領域をデコーディングする。

解析ユニット７０１は、デコーディングブロックの予測サンプルを導出するための１つ以上の予測パラメータを予測ユニット７０２にパスする。本開示では、予測パラメータは、前述のエンコーダ内のパーティション化ユニット２０１および予測ユニット２０２の出力パラメータを含む。

解析ユニット７０１は、デコーディングブロックの残差を再構成するための１つ以上の残差パラメータをスケーリングユニット７０５および変換ユニット７０６にパスする。本開示では、残差パラメータは、変換ユニット２０８および量子化ユニット２０９の出力パラメータおよび前述のエンコーダ内の量子化ユニット２０９によって出力された１つ以上の量子化された係数（すなわち、「レベル」）を含む。

解析ユニット７０１は、写真内の再構成されたサンプルをフィルタリングする（例えば、ループ内にフィルタリング）ためのフィルタリングパラメータをフィルタリングユニット７０８にパスする。

予測ユニット７０２は、予測パラメータに従って、デコーディングブロックの予測サンプルを導出する。予測ユニット７０２は、ＭＣユニット７０３およびイントラ予測ユニット７０４から成る。予測ユニット７０２の入力はまた、加算器７０７から出力された現在のデコーディング写真（フィルタリングユニット７０８によって処理されていない）の再構成された部分と、ＤＰＢ７０９内の１つ以上のデコーディングされた写真とを含んでもよい。

予測パラメータが、インター予測モードがデコーディングブロックの予測サンプルを導出するために使用されることを示すとき、予測ユニット７０２は、前述のエンコーダ内のＭＥユニット２０４のためのものと同一アプローチを採用し、１つ以上の参照写真リストを構築する。参照リストは、ＤＰＢ７０９からの１つ以上の参照写真を含有する。ＭＣユニット７０３は、参照リストのインジケーション、参照インデックス、および予測パラメータ内のＭＶに従って、デコーディングブロックのための１つ以上のマッチングブロックを決定し、前述のエンコーダ内のＭＣユニット２０５内のもの同一方法と使用して、デコーディングブロックのインター予測サンプルを得る。予測ユニット７０２は、インター予測サンプルをデコーディングブロックの予測サンプルとして出力する。

特に、随意に、ＭＣユニット７０３は、デコーディングブロックを含有する現在のデコーディング写真を参照として使用して、デコーディングブロックのイントラ予測サンプルを取得してもよい。本開示では、イントラ予測とは、コーディングブロックを含有する写真内のデータのみがコーディングブロックの予測サンプルを導出するための参照として採用されることを意味する。この場合、ＭＣユニット７０３は、現在の写真内の再構成された部分を使用し、再構成された部分は、加算器７０７の出力からのものであって、フィルタリングユニット７０８によって処理されない。例えば、デコーダは、写真バッファを配分し、加算器７０７の出力データを（一時的に）記憶する。デコーダのための別の方法は、特殊写真バッファをＤＰＢ７０９内に留保し、加算器７０７からのデータを保つことである。

予測パラメータが、イントラ予測モードがデコーディングブロックの予測サンプルを導出するために使用されることを示すとき、予測ユニット７０２は、前述のエンコーダ内のイントラ予測ユニット２０６内のものと同一アプローチを採用し、イントラ予測ユニット７０４のための参照サンプルをデコーディングブロックの再構成された近傍のサンプルから決定する。イントラ予測ユニット７０４は、イントラ予測モード（すなわち、ＤＣモード、平面モード、または角予測モード）を得て、イントラ予測モードの規定されたプロセスに従って、参照サンプルを使用して、デコーディングブロックのイントラ予測サンプルを導出する。イントラ予測モードの同じ導出プロセスは、前述のエンコーダ（すなわち、イントラ予測ユニット２０６）およびデコーダ（すなわち、イントラ予測ユニット７０４）内に実装されることに留意されたい。特に、予測パラメータが、デコーディングブロックのための現在のデコーディング写真（デコーディングブロックを含有する）内にマッチングブロック（その場所を含む）を示す場合、イントラ予測ユニット７０４は、マッチングブロック内のサンプルを使用して、デコーディングブロックのイントラ予測サンプルを導出する。例えば、イントラ予測ユニット７０４は、イントラ予測サンプルをマッチングブロック内のサンプルに等しくなるように設定する。予測ユニット７０２は、デコーディングブロックの予測サンプルをイントラ予測ユニット７０４によって出力されたイントラ予測サンプルに等しくなるように設定する。

デコーダは、逆量子化のプロセスのために、輝度ＱＰおよび彩度ＱＰを含む、ＱＰと、量子化された係数とをスケーリングユニット７０５にパスし、再構成された係数を出力とし得る。デコーダは、スケーリングユニット７０５からの再構成された係数と、残差パラメータ内の変換パラメータ（すなわち、前述のエンコーダ内の変換ユニット２０８の出力内の変換パラメータ）とを変換ユニット７０６にフィードする。特に、残差パラメータが、ブロックをデコーディングする際にスケーリングをスキップすることを示す場合、デコーダは、スケーリングユニット７０５をバイパスすることによって、残差パラメータ内の係数を変換ユニット７０６に誘導する。

変換ユニット７０６は、規格内に規定される変換プロセスに従って、変換動作を入力係数上で実施する。変換ユニット７０６内で使用される変換行列は、前述のエンコーダ内の逆変換ユニット２１１内で使用されるものと同一である。変換ユニット７０６の出力は、デコーディングブロックの再構成された残差である。

概して、デコーディングプロセスのみが、規格内に規定されるため、ビデオコーディング規格の観点から、デコーディングプロセスにおけるプロセスおよび関連行列は、「変換プロセス」および「変換行列」として規格テキスト内に規定される。したがって、本開示では、デコーダに関する説明は、規格と一致するように、規格テキスト内に規定された変換プロセスを実装するユニットを「変換ユニット」と命名する。しかしながら、本ユニットは、エンコーディングの逆プロセスとしてデコーディングプロセスをとることの考慮点に基づいて、常時、「逆変換ユニット」と命名され得る。

加算器７０７は、変換ユニット７０６の出力における再構成された残差および予測ユニット７０２の出力内の予測サンプルを入力データとしてとり、デコーディングブロックの再構成されたサンプルを計算する。加算器７０７は、再構成されたサンプルを写真バッファの中に記憶する。例えば、デコーダは、写真バッファを配分し、加算器７０７の出力データを（一時的に）記憶する。デコーダのための別の方法は、特殊写真バッファをＤＰＢ７０９内に留保し、加算器７０７からのデータを保つことである。

デコーダは、解析ユニット７０１からのフィルタリングパラメータをフィルタリングユニット７０８にパスする。フィルタリング７０８のためのフィルタリングパラメータは、前述のエンコーダ内のフィルタリングユニット２１３の出力内のフィルタリングパラメータと同じである。フィルタリングパラメータは、使用されるべき１つ以上のフィルタのインジケーション情報、フィルタ係数、およびフィルタリング制御パラメータを含む。フィルタリングユニット７０８は、フィルタリングパラメータを使用して、フィルタリングプロセスをデコーディングされた写真バッファ内に記憶される写真の再構成されたサンプル上で実施し、デコーディングされた写真を出力する。フィルタリングユニット７０８は、１つのフィルタまたはいくつかのカスケードフィルタから成ってもよい。例えば、Ｈ．２６５／ＨＥＶＣ規格によると、フィルタリングユニットは、２つのカスケードフィルタ、すなわち、非ブロック化フィルタおよびサンプル適応オフセット（ＳＡＯ）フィルタから成る。フィルタリングユニット７０８は、適応ループフィルタ（ＡＬＦ）を含んでもよい。フィルタリングユニット７０８はまた、ニューラルネットワークフィルタを含んでもよい。フィルタリングユニット７０８は、写真内の全てのコーディングブロックの再構成されたサンプルがデコーディングされた写真バッファ内に記憶されると、写真の再構成されたサンプルのフィルタリングを開始してもよく、これは、「写真層フィルタリング」と称され得る。随意に、フィルタリングユニット７０８のための写真層フィルタリングの代替実装（「ブロック層フィルタリング」と称される）は、再構成されたサンプルが写真内の全ての連続コーディングブロックをデコーディングする際の参照として使用されない場合、写真内のコーディングブロックの再構成されたサンプルのフィルタリングを開始するものである。ブロック層フィルタリングは、フィルタリングユニット７０８が、写真の全ての再構成されたサンプルが利用可能になるまで、フィルタリング動作を一時停止し、したがって、スレッド間の時間遅延をデコーダ内に保存することを要求しない。

デコーダは、フィルタリングユニット７０８によって出力されたデコーディングされた写真をＤＰＢ７０９内に記憶する。加えて、デコーダは、例えば、ＤＰＢ７０９内の写真記憶の時間長、ＤＰＢ７０９からの写真の出力等、解析ユニット７０１によって出力された１つ以上の命令に従って、１つ以上の制御動作をＤＰＢ７０９内の写真上で実施してもよい。

実施形態３

図８は、本開示における方法を実装する、ビットストリームプロセッサの実施例を図示する、略図である。

随意に、ビットストリームプロセッサは、抽出器として構成されることができ、これは、サブビットストリームを入力ビットストリームから抽出する。抽出器の入力のうちの１つは、図２における前述のエンコーダによって生成されたビットストリームである。抽出器の別の入力は、アプリケーションデータであって、これは、抽出のための１つ以上の標的写真領域を示す。抽出器の出力は、サブビットストリームであって、これは、図７における前述のデコーダによってデコーディング可能であり得る。本サブビットストリームは、さらに抽出可能である場合、また、抽出器の入力ビットストリームであることができる。

随意に、ビットストリームプロセッサは、スプライサとして構成されることができ、これは、２つ以上のビットストリームを繋ぎ合わせ、繋ぎ合わせられたビットストリームを形成する。スプライサの入力のうちの１つは、図２における前述のエンコーダによって生成された２つ以上のビットストリームである。スプライサの別の入力は、繋ぎ合わせられたビットストリームのデコーディングされた写真に対応する、写真内の入力ストリームのデコーディングされた写真に対応する、写真を提示する方法を示す、アプリケーションデータである。スプライサの出力は、繋ぎ合わせられたビットストリームであって、これは、図７における前述のデコーダによってデコーディング可能であり得る。本繋ぎ合わせられたビットストリームはまた、スプライサの入力ビットストリームであることができる。

さらに、抽出器からのサブビットストリームは、スプライサの入力ビットストリームであることができ、繋ぎ合わせられたビットストリームは、抽出器の入力ビットストリームであることができる。

図５および図６Ａ－６Ｂにおける構文構造は、抽出器およびスプライサに関わるビットストリーム内で使用される。図５における構文要素の意味論は、以下の通りである。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、他の構文要素による参照のためのパラメータセットを識別する。
ｉｎｆｏ＿ｔｙｐｅは、パラメータセット内の情報のタイプを規定する。
１に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ（）の存在を規定する。０に等しいｔｏｏｌ＿Ａ＿ｆｌａｇは、ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ（）の不在を規定する。
１に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）の存在を規定する。０に等しいｔｏｏｌ＿Ｂ＿ｆｌａｇは、ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ（）の不在を規定する。

図６Ａ－６Ｂにおけるｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの意味論は、以下の通りである。
ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、使用中のパラメータセットのためのｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄの値を規定する。ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄに等しいそのパラメータセット識別子を伴うパラメータセットは、０に等しいｉｎｆｏ＿ｔｙｐｅを有するであろう。

抽出器の例示的実施形態

抽出器の基本機能は、サブビットストリームをオリジナルビットストリームから形成するものである。例えば、ユーザが、高解像度ビデオをそのスマートフォン上のある領域に表示するために、本領域を選択し、スマートフォンが、アプリケーションデータを遠隔デバイス（例えば、遠隔サーバ）または内部処理ユニット（例えば、本スマートフォン上にインストールされるソフトウェアプロシージャ）に送信し、選択された領域（すなわち、標的写真領域）に対応するメディアデータを要求する。遠隔デバイスまたは内部処理ユニット上の抽出器（または同等処理ユニット）は、標的写真領域に対応するサブビットストリームをオリジナル高解像度ビデオに対応するビットストリームから抽出する。別の実施例は、ＨＭＤ（頭部搭載型デバイス）が、視認者の現在のビューポートを検出し、本ビューポートをレンダリングするためのメディアデータを要求するものである。前の実施例と同様に、ＨＭＤはまた、検出されたビューポートの最終レンダリング領域（すなわち、標的写真領域）を網羅するビデオ写真内の領域を示す、アプリケーションデータを生成し、アプリケーションデータを遠隔デバイスまたはその内部処理ユニットに送信する。遠隔デバイスまたは内部処理ユニット上の抽出器（または同等処理ユニット）は、標的写真領域に対応するサブビットストリームをより広いレンダリングビューポートを網羅するビデオに対応するビットストリームから抽出する。

本実施形態では、例示的入力ビットストリームは、図４に図示されるように２つのタイルグループにパーティション化された写真をエンコーディングすることによって前述のエンコーダによって生成される、ビットストリームである。２つのタイルグループは、独立して、デコーディング可能にされる。すなわち、タイルグループをデコーディングすることは、他のタイルグループの任意の情報を参照しない。

抽出器の入力ビットストリームでは、ツールＡのみが、タイルグループ４０００をデコーディングする際に使用され、ツールＢのみが、タイルグループ４１００をデコーディングする際に使用される。パラメータセット内のツールＡパラメータおよびツールＢパラメータが、それぞれ、パラメータセットに提示されるかどうかを示す、意味論ｔｏｏｌ＿Ａ＿ｆｌａｇおよびｔｏｏｌ＿Ｂ＿ｆｌａｇにおけるように、エンコーダは、以下のように、ツールパラメータを取り込むために、タイルグループによって参照されるための単一パラメータセットを生成する。

ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝０
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

タイルグループ４０００および４１００の両方のヘッダでは、ｒｅｇｉｏｎ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄは、０に等しくなるように設定される。ツールがタイルグループをデコーディングする際に使用されるかどうかを示す、フラグが、タイルグループヘッダ、他のパラメータセット、または補完情報において利用可能である。

解析ユニット８０１は、解析ユニット７０１内のものと類似する処理を起動し、それぞれ、タイルグループ４０００および４１００によって参照されるパラメータセットを決定する。タイルグループ毎に、解析ユニット８０１はまた、タイルグループヘッダ内で利用可能である、ツールがタイルグループをデコーディングする際に使用されるかどうかを示す、フラグ、他のパラメータセット、または補完情報を解析する。さらに、解析ユニット８０１はまた、入力ビットストリームを解析し、タイルグループパラメータを入力ビットストリーム内の１つ以上のデータユニット（例えば、パラメータセットデータユニット）から取得する。タイルグループパラメータは、対応して１つ以上のタイル識別子を伴う、タイルグループおよびタイルへの写真のパーティション化様式を示す。解析ユニット８０１は、ツールパラメータ情報、タイルグループパラメータ、および抽出のための標的タイルを決定するための他の必要なデータ（例えば、写真幅および高さ）をデータフロー８０内に入れ、データフロー８０を制御ユニット８０２に送信する。解析ユニット８０１はまた、入力ビットストリームを解析し、必要なとき、サブビットストリームを生成するプロセスにおいて、データフロー８１を介して、他のデータを形成ユニット８０３に転送する。解析ユニット８０１はまた、入力ビットストリームをデータフロー８１内に含む。

本開示におけるデータフローは、ソフトウェア実装内の機能の入力パラメータおよび戻りパラメータ、バス上のデータ伝送、およびハードウェア実装内の記憶ユニット間のデータ共有（また、レジスタ間のデータ共有も含む）を指すことに留意されたい。

制御ユニット８０２は、標的写真領域を、写真内の標的写真領域の場所およびサイズを含む、そのアプリケーションデータの入力から取得する。制御ユニット８０２は、タイルグループパラメータおよび写真の幅および高さをデータフロー８０から取得する。制御ユニット８０２は、標的写真領域内に位置する１つ以上の標的タイルグループまたはタイルを決定する。本実施例では、標的写真領域は、タイルグループ４０００であると仮定する。制御ユニット８０２は、標的タイルグループのアドレス（例えば、写真４０内のタイルグループ４０００の第１のタイルのアドレス）および他の情報（例えば、標的写真領域のサイズｔａｒｇｅｔＰｉｃＷｉｄｔｈおよびｔａｒｇｅｔＰｉｃＨｅｉｇｈｔ）をデータフロー８２内に入れる。

形成ユニット８０３は、データフロー８１および８２を受信し、データユニットをデータフロー８１内で転送される入力ビットストリームから抽出し、必要なとき、標的写真領域のための新しいパラメータに従って、新しいパラメータセットを生成し、次いで、抽出されたデータユニットおよびパラメータセットを構成することによって、サブビットストリームを形成する。形成ユニット８０３は、抽出ユニット８０４と、生成ユニット８０５とを含む。抽出ユニット８０４が、タイルグループ４０００に等しいそのアドレスを用いて、タイルグループを検出すると、抽出ユニット８０４は、本タイルグループのデータユニットを入力ビットストリームから抽出する。抽出ユニット８０４はまた、タイルグループ４０００によって参照される１つ以上のパラメータセットを抽出する。

生成ユニット８０５は、タイルグループ４０００の抽出されたデータユニットおよび１つ以上のパラメータセットデータユニットを繋ぎ合わせることによって、出力サブビットストリームを生成する。必要に応じて、生成ユニット８０５はまた、タイルグループアドレス、パラメータセット識別子等を含む、再書込動作をタイルグループヘッダ上で実施する。本実施例では、ツールＡのみが、タイルグループ４０００をデコーディングする際に使用されるため、生成ユニット８０５は、以下のように、パラメータセットを０に等しいそのパラメータセット識別子で書き換え、タイルグループ４０００をデコーディングする際に使用されない、ツールＢパラメータ（すなわち、０に等しいセットｔｏｏｌ＿Ｂ＿ｆｌａｇ）を除去する。

ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝０
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝０
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

加えて、生成ユニット８０５はまた、ツールＢパラメータを含有するパラメータセットを抽出ユニット８０４によって転送されるビットストリームから除去する。生成ユニット８０５は、２に等しいｉｎｆｏ＿ｔｙｐｅを伴う１つ以上のパラメータセットのデータユニットを除去する。そのような除去動作はまた、生成ユニット８０５の代わりに、抽出ユニット８０４内にも実装されることができることに留意されたい。

形成ユニット８０３は、ビデオコーディング規格の規定されたビットストリーム構造に従って、データユニットを配列し、サブビットストリームを形成する。形成ユニット８０３の出力は、サブビットストリームであって、これは、図７における前述のデコーダによってデコーディング可能である。

スプライサの例示的実施形態

スプライサの基本機能は、ビットストリームを２つ以上の入力ビットストリームから形成することである。一実施例は、ステレオビデオアプリケーション、例えば、フレーム互換性タイプ（例えば、左右タイプを検討する）の形態における３６０度全方向ビデオにおけるものである。ＦＯＶ（ビューポートの視野）ベースのストリーミングでは、視認者の現在のビューポートを網羅する写真領域に対応する、ビットストリームが、レンダリングのために宛先デバイスに送信される。そのようなビットストリームは、左ビューのためのフレーム互換性フォーマットにおける写真の左半分内の左写真領域と、右ビューのためのフレーム互換性フォーマットにおける写真の右半分内の右写真領域とを用いて形成されるであろう。スプライサは、フレーム互換性フォーマット（例えば、左右タイプ）において左写真領域および右写真領域を組み合わせ、新しい繋ぎ合わせられたビットストリームを形成するであろう。

図４における写真４０は、繋ぎ合わせられたビットストリームの写真であると仮定する。タイルグループ４０００は、左写真領域に対応し、タイルグループ４１００は、右写真領域に対応する。タイルグループ４０００をデコーディングする際、ツールＡのみが、使用される。左ビューのためのタイルグループ４０００のためのパラメータセットは、以下の通りである。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝０
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝０
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

タイルグループ４１００をデコーディングする際、ツールＡのみが、使用される。右ビューのためのタイルグループ４１００のためのパラメータセットは、以下の通りである。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝０
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

解析ユニット８０１は、解析ユニット７０１内のものと類似する処理を起動し、それぞれ、タイルグループ４０００および４１００によって参照されるパラメータセットを決定する。本実施例では、入力ビットストリームは、フレーム互換性３６０度全方向ステレオビデオビットストリームから抽出された２つのビットストリームであることができる。タイルグループ毎に、解析ユニット８０１はまた、タイルグループヘッダ内で利用可能である、ツールがタイルグループをデコーディングする際に使用されるかどうかを示す、フラグ、他のパラメータセット、または補完情報を解析する。解析ユニット８０１は、ツールパラメータ情報、タイルグループパラメータ、および繋ぎ合わせられたビットストリームのためのパラメータを決定するための他の必要なデータ（例えば、写真幅および高さ）をデータフロー８０内に入れ、データフロー８０を制御ユニット８０２に送信する。解析ユニット８０１はまた、入力ビットストリームを解析し、必要なとき、繋ぎ合わせるプロセスにおいて、データフロー８１を介して、他のデータを形成ユニット８０３に転送する。解析ユニット８０１はまた、入力ビットストリームをデータフロー８１内に含む。

制御ユニット８０２は、標的写真を、標的写真内の左写真および右写真の場所およびサイズを含む、そのアプリケーションデータの入力から取得する。制御ユニット８０２は、左写真および右写真の幅および高さをデータフロー８０から取得する。本実施例では、制御ユニット８０２は、左写真の場所を図４におけるタイルグループ４０００として、右写真の場所をタイルグループ４１００として決定する。制御ユニット８０２は、標的タイルグループの場所（例えば、写真４０内のタイルグループ４０００および４１００の第１のタイルのアドレス）および他の情報（例えば、標的写真のサイズｔａｒｇｅｔＰｉｃＷｉｄｔｈおよびｔａｒｇｅｔＰｉｃＨｅｉｇｈｔ）をデータフロー８２内に入れる。

形成ユニット８０３は、データフロー８１および８２を受信し、データユニットをデータフロー８１内で転送される入力ビットストリームから読み出し、必要なとき、標的写真のための新しいパラメータに従って、新しいパラメータセットを生成し、次いで、データユニットおよびパラメータセットを構成することによって、繋ぎ合わせられたビットストリームを形成する。形成ユニット８０３は、抽出ユニット８０４と、生成ユニット８０５とを含む。抽出ユニット８０４が、タイルグループ４０００に等しいそのアドレスを用いて、タイルグループを検出すると、抽出ユニット８０４は、本タイルグループのデータユニットを入力ビットストリームから抽出する。抽出ユニット８０４はまた、タイルグループ４０００によって参照される１つ以上のパラメータセットを抽出する。特に、本実施例では、左写真の入力ビットストリームは、タイルグループ４０００のみを含有するため、抽出ユニット８０４は、さらなる抽出動作を本入力ビットストリーム上で実施する必要がない。抽出ユニット８０４は、同一動作をタイルグループ４１００上で行う。

生成ユニット８０５は、タイルグループ４０００、タイルグループ４１００の抽出されたデータユニット、および１つ以上のパラメータセットデータユニットを繋ぎ合わせることによって、出力ビットストリームを生成する。必要に応じて、生成ユニット８０５はまた、タイルグループアドレス、パラメータセット識別子等を含む、再書込動作をタイルグループヘッダ上で実施する。本実施例では、生成ユニット８０５は、タイルグループ４０００および４１００のヘッダ内のタイルグループアドレスを書き換える。生成ユニット８０５は、標的写真のサイズおよび図４に図示されるようなタイルグループパーティションを示すタイルグループパラメータおよび他の必要なパラメータ（例えば、Ｐｒｏｆｉｌｅ／Ｔｉｅｒ／Ｌｅｖｅｌ）を用いて、新しいＳＰＳおよびＰＰＳを生成する。生成ユニット８０５は、タイルグループ４０００および４１００のデータユニットを同一アクセスユニット内に入れる。生成ユニット８０５は、以下のように、ツールパラメータのための新しいパラメータセットを生成する。生成ユニット８０５は、タイルグループヘッダ内のパラメータセット識別子を新しく生成されたパラメータセットの対応する値に設定する。
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｒｂｓｐ（）｛
ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝０
ｉｎｆｏ＿ｔｙｐｅ＝０
ｔｏｏｌ＿Ａ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ａ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝１
ｔｏｏｌ＿Ｂ＿ｆｌａｇ＝１
ｔｏｏｌ＿Ｂ＿ｐａｒａｍｅｔｅｒ＿ｓｅｔ＿ｉｄ＝２
ｏｎｅｏｒｍｏｒｅｅｘｔｅｎｓｉｏｎａｎｄｂｙｔｅａｌｉｇｎｂｉｔｓ
｝

形成ユニット８０３は、ビデオコーディング規格の規定されたビットストリーム構造に従って、データユニットを配列し、ビットストリームを形成する。形成ユニット８０３の出力は、繋ぎ合わせられたビットストリームであって、これは、図７における前述のデコーダによってデコーディング可能である。さらに、繋ぎ合わせられたビットストリームはまた、前述の抽出器の入力であって、タイルグループ４０００または４１００のみを含有する、サブビットストリームを得ることができる。繋ぎ合わせられたビットストリームはまた、本スプライサの入力ビットストリームのうちの１つであって、新しい繋ぎ合わせられたビットストリームを生成することができる。

本実施例では、左写真領域および右写真は両方とも、フレーム互換性ステレオ３６０度全方向ビデオビットストリームの単一オリジナルビットストリームからのものであって、複製されたパラメータセット識別子は、本オリジナルビットストリーム内には存在しないことに留意されたい。左写真領域および右写真領域が、２つの別個のビットストリームからのものである場合、繋ぎ合わせられたビットストリームを形成するためのパラメータセットは、複製されたパラメータセット識別子を有し得る。本場合に対処するために、スプライサは、パラメータセット識別子をパラメータセットに配列し、パラメータセットおよびタイルグループヘッダ内の対応する構文要素を書き換えるであろう。

実施形態４

図９は、図２に図示されるように、少なくとも例示的ビデオエンコーダまたは写真エンコーダを含有する、第１の例示的デバイスを図示する、略図である。

入手ユニット９０１は、ビデオおよび写真を捕捉する。入手ユニット９０１は、自然場面のビデオまたは写真を撮影するために、１つ以上のカメラを装備してもよい。随意に、入手ユニット９０１は、深度ビデオまたは深度写真を得るためのカメラとともに実装されてもよい。随意に、入手ユニット９０１は、赤外線カメラのコンポーネントを含んでもよい。随意に、入手ユニット９０１は、遠隔感知カメラとともに構成されてもよい。入手ユニット９０１はまた、放射線を使用してオブジェクトを走査することによってビデオまたは写真を生成する、装置またはデバイスであってもよい。

随意に、入手ユニット９０１は、例えば、自動ホワイトバランス、自動焦点化、自動露光、バックライト補償、鮮明化、雑音除去、スティッチング、アップサンプリング／ダウンサンプリング、フレームレート変換、仮想ビュー合成等、前処理をビデオまたは写真上で実施してもよい。

入手ユニット９０１はまた、ビデオまたは写真を別のデバイスまたは処理ユニットから受信してもよい。例えば、入手ユニット９０１は、トランスコーダ内のコンポーネントユニットであることができる。トランスコーダは、１つ以上のデコーディングされた（または部分的にデコーディングされた）写真を入手ユニット９０１にフィードする。別の実施例は、入手ユニット９０１は、そのデバイスへのデータリンクを介して、ビデオまたは写真を別のデバイスから得ることである。

入手ユニット９０１は、ビデオおよび写真に加え、他のメディア情報、例えば、オーディオ信号を捕捉するために使用されてもよいことに留意されたい。入手ユニット９０１はまた、人工情報、例えば、キャラクタ、テキスト、コンピュータ生成ビデオまたは写真等を受信してもよい。

エンコーダ９０２は、図２に図示される例示的エンコーダまたは図９におけるソースデバイスの実装である。エンコーダ９０２の入力は、入手ユニット９０１によって出力されたビデオまたは写真である。エンコーダ９０２は、ビデオまたは写真をエンコーディングし、生成されたビデオまたは写真ビットストリームを出力する。

記憶装置／送信ユニット９０３は、ビデオまたは写真ビットストリームをエンコーダ９０２から受信し、システム層処理をビットストリーム上で実施する。例えば、記憶装置／送信ユニット９０３は、トランスポート規格およびメディアファイルフォーマット、例えば、例えば、ＭＰＥＧ－２ＴＳ、ＩＳＯＢＭＦＦ、ＤＡＳＨ、ＭＭＴ等に従って、ビットストリームをカプセル化する。記憶装置／送信ユニット９０３は、第１の例示的デバイスのメモリまたはディスク内へのカプセル化後に取得されるトランスポートストリームまたはメディアファイルを記憶する、または有線または無線ネットワークを介して、トランスポートストリームまたはメディアファイルを送信する。

エンコーダ９０２からのビデオまたは写真ビットストリームに加え、記憶装置／送信ユニット９０３の入力はまた、オーディオ、テキスト、画像、グラフィック等を含んでもよいことに留意されたい。記憶装置／送信ユニット９０３は、そのような異なるタイプのメディアビットストリームをカプセル化することによって、トランスポートまたはメディアファイルを生成する。

本実施形態に説明される第１の例示的デバイスは、ビデオ通信のアプリケーション、例えば、携帯電話、コンピュータ、メディアサーバ、ポータブルモバイル端末、デジタルカメラ、ブロードキャストデバイス、ＣＤＮ（コンテンツ配信ネットワーク）デバイス、監視カメラ、ビデオ会議デバイス等内でビデオ（または写真）ビットストリームを生成または処理することが可能なデバイスであることができる。

実施形態５

図１０は、図７に図示されるように、少なくとも例示的ビデオデコーダまたは写真デコーダを含有する第２の例示的デバイスを図示する、略図である。

受信ユニット１００１は、ビットストリームを有線または無線ネットワークから取得することによって、電子デバイス内のメモリまたはディスクを読み取ることによって、またはデータリンクを介して、他のデバイスからのデータをフェッチすることによって、ビデオまたは写真ビットストリームを受信する。

受信ユニット１００１の入力はまた、ビデオまたは写真ビットストリームを含有する、トランスポートストリームまたはメディアファイルを含んでもよい。受信ユニット１００１は、トランスポートまたはメディアファイルフォーマットの仕様に従って、ビデオまたは写真ビットストリームをトランスポートストリームまたはメディアファイルから抽出する。

受信ユニット１００１は、ビデオまたは写真ビットストリームを出力し、デコーダ１００２にパスする。ビデオまたは写真ビットストリームに加え、受信ユニット１００１の出力はまた、オーディオビットストリーム、キャラクタ、テキスト、画像、グラフィック等を含んでもよいことに留意されたい。受信ユニット１００１は、出力を第２の例示的デバイス内の対応する処理ユニットにパスする。例えば、受信ユニット１００１は、出力オーディオビットストリームを本デバイス内のオーディオデコーダにパスする。

デコーダ１００２は、図７に図示される例示的デコーダの実装である。エンコーダ１００２の入力は、受信ユニット１００１によって出力されたビデオまたは写真ビットストリームである。デコーダ１００２は、ビデオまたは写真ビットストリームをデコーディングし、デコーディングされたビデオまたは写真を出力する。

レンダリングユニット１００３は、デコーディングされたビデオまたは写真をデコーダ１００２から受信する。レンダリングユニット１００３は、デコーディングされたビデオまたは写真を視認者に提示する。レンダリングユニット１００３は、第２の例示的デバイスのコンポーネント、例えば、画面であってもよい。レンダリングユニット１００３はまた、第２の例示的デバイス、例えば、プロジェクタ、モニタ、ＴＶセット等へのデータリンクを伴う、第２の例示的デバイスと別個のデバイスであってもよい。随意に、レンダリングユニット１００３は、例えば、自動ホワイトバランス、自動焦点化、自動露光、バックライト補償、鮮明化、雑音除去、スティッチング、アップサンプリング／ダウンサンプリング、フレームレート変換、仮想ビュー合成等、それを視認者に提示する前に、後処理をデコーディングされたビデオまたは写真上で実施する。

デコーディングされたビデオまたは写真に加え、レンダリングユニット１００３の入力は、第２の例示的デバイスの１つ以上のユニットからの他のメディアデータ、例えば、オーディオ、キャラクタ、テキスト、画像、グラフィック等であることができることに留意されたい。レンダリングユニット１００３の入力はまた、人工データ、例えば、遠隔教育アプリケーションにおいて注意を誘引するためにスライド上にローカル教師によって描かれる、ラインおよびマークを含んでもよい。レンダリングユニット１００３は、異なるタイプのメディアをともに構成し、次いで、構成物を視認者に提示する。

本実施形態に説明される第２の例示的デバイスは、ビデオ通信のアプリケーション、例えば、携帯電話、コンピュータ、セットトップボックス、ＴＶセット、ＨＭＤ、モニタ、メディアサーバ、ポータブルモバイル端末、デジタルカメラ、ブロードキャストデバイス、ＣＤＮ（コンテンツ配信ネットワーク）デバイス、監視ビデオ会議デバイス等内でビデオ（または写真）ビットストリームをデコーディングまたは処理することが可能なデバイスであることができる。

実施形態６

図１１は、図９における第１の例示的デバイスと、図１０における第２の例示的デバイスとを含有する、電子システムを図示する、略図である。

サービスデバイス１１０１は、図９における第１の例示的デバイスである。

記憶媒体／トランスポートネットワーク１１０２は、デバイスまたは電子システムの内部メモリリソース、データリンクを介してアクセス可能な外部メモリリソース、有線および／または無線ネットワークから成るデータ伝送ネットワークを含んでもよい。記憶媒体／トランスポートネットワーク１１０２は、サービスデバイス１１０１内の記憶／送信ユニット９０３のための記憶リソースまたはデータ伝送ネットワークを提供する。

宛先デバイス１１０３は、図１０における第２の例示的デバイスである。宛先デバイス１１０３内の受信ユニット１００１は、ビデオまたは写真ビットストリーム、ビデオまたは写真ビットストリームを含有するトランスポートストリーム、またはビデオまたは写真ビットストリームを含有するメディアファイルを記憶媒体／トランスポートネットワーク１１０２から受信する。

図１Ａは、ビデオビットストリームをデコーディングするためにビデオデコーダによって実装される、例示的方法１００を示す、フローチャートである。方法１００は、第１のパラメータセット識別子をコーディングされたビデオ領域に対応するビットを含有するデータユニットから取得するステップ（１０２）と、ツールフラグを第１のパラメータセット識別子に対応する第１のパラメータセットから取得するステップ（１０４）と、ツールフラグから、ツールフラグに対応するツールのツールパラメータが、コーディングされたビデオ領域をデコーディングするために存在する、または有効にされていることを決定するステップ（１０６）であって、ツールは、ビデオコーディング技法に対応する、ステップと、決定するステップに基づいて、第２のパラメータセット識別子を取得するステップ（１０８）とを含む。例えば、第２のパラメータセットは、第１のパラメータセットから取得されてもよい。方法１００は、ツールパラメータを第２のパラメータセット識別子に対応する第２のパラメータセットから取得するステップ（１１０）を含む。いくつかの実施形態では、インジケーションパラメータ、例えば、第２のパラメータセット内に含有されるインジケーションパラメータは、第２のパラメータセット内に含有されるツールパラメータがツールフラグに対応するツールのツールパラメータのみあることを示す。例えば、図５、６Ａ、６Ｂに関して説明されるｉｎｆｏ＿ｔｙｐｅフィールドは、インジケーションパラメータとして使用されてもよい。その中で複数のツールが同一単一適応パラメータセットを使用してシグナリングされる、適応パラメータセットと比較して、インジケーションパラメータは、パラメータセットに提示される単一ツールのパラメータを具体的に示すために使用され得る。方法１００は、ツールパラメータを使用して、ビデオ領域をデコーディングするステップ（１１２）を含む。

いくつかの実施形態では、方法１００は、図５、６Ａ－６Ｂおよび本明細書で議論される実施例に示されるように、ビットストリーム構文を解析するために実装されてもよい。本書に議論されるように、いくつかの実施形態では、ｉｎｆｏ＿ｔｙｐｅフィールドは、ビデオ領域のデコーディングにおいて使用するためにシグナリングされた具体的ツールパラメータを解析するために使用されてもよい。例えば、ビットストリーム解析（およびエンコーディング）は、例示的実施形態によってハイライトされるように簡略化され、ツールパラメータの効率的かつ個別化されたシグナリングを可能にし得る。

いくつかの実施形態では、方法１００は、ビデオデコーディングのために、複数のパラメータを取得および使用するために使用されてもよい。例えば、方法１００はさらに、別のツールフラグを第１のパラメータセットから取得するステップと、ツールフラグから、別のツールフラグに対応する別のツールの別のツールパラメータが、コーディングされたビデオ領域をデコーディングするために存在する、または有効にされていることを決定するステップと、決定するステップに基づいて、第３のパラメータセット識別子を取得するステップと、別のツールパラメータを第３のパラメータセット識別子に対応する第３のパラメータセットから取得するステップとを含んでもよい。ここでは、ビデオ領域をデコーディングするステップは、別のツールパラメータを使用して、ビデオ領域をデコーディングするステップを含む。

いくつかの実施形態では、ビットストリームは、第２のパラメータセット、第３のパラメータセット、および第１のパラメータセットを含有する、ネットワーク抽象化層（ＮＡＬ）ユニットが、同一ＮＡＬユニットタイプを有するように構造化されてもよい。例えば、ＮＡＬユニットは、同一ＮＡＬユニットタイプとして、第３のパラメータセットを含有する。いくつかの実施形態では、ネットワーク抽象化層ユニットタイプは、ＮＡＬユニットヘッダ内の固定長コードワードによって示される。

いくつかの実施形態では、第２のパラメータセット識別子を取得するステップは、第２のパラメータセット識別子を第１のパラメータセットから取得するステップを含む。

図１Ｂは、ビデオコーディングの例示的方法１５０のためのフローチャートである。方法１５０は、ビデオ領域をエンコーディングする際に使用されるツールのツールパラメータを決定するステップ（１５２）であって、ツールは、ビデオコーディング技法を表す、ステップと、第１のパラメータセット識別子によって識別される、第１のパラメータセットを生成するステップ（１５４）と、第１のパラメータセット内に、ツールに対応するツールフラグを含むステップ（１５６）であって、ツールフラグは、ツールパラメータが、ビデオ領域をエンコーディングするために存在する、または有効にされていることを示す、値に設定される、ステップと、第２のパラメータセット識別子を使用して、第１のパラメータセット内にツールパラメータを含むステップ（１５８）と、第１のパラメータセット識別子をビデオ領域のヘッダ内にコーディングするステップ（１６０）と、ツールパラメータを使用して、ビデオ領域をコーディングするステップ（１６２）とを含む。

種々の実施形態では、方法１５０は、部分的に、図５、６Ａおよび６Ｂに描写され、本書に説明される例示的実施形態１－５に議論される、データユニットを構築するために使用されてもよい。開示されるビットストリームの構文は、本明細書に説明される種々のフィールドを使用して、ビデオ領域のためのツールパラメータの独立シグナリングを可能にする。

方法１００、１５０に関して、ビデオ領域は、ビデオ写真全体に対応し得る。ある場合には、ビデオ領域は、より小さいビデオ領域であってもよい。例えば、複数のビデオ領域はともに、ビデオ写真全体を構成してもよい。

方法１００、１５０に関して、いくつかの実施形態では、ビデオコーディング技法は、コーディングされたビデオ領域内の複数のコーディングブロックに共通のコーディングパラメータに基づいてもよい。ビデオコーディング技法またはツールの種々の実施例が、本書に提供される。

いくつかの実施形態では、方法１５０は、ツールパラメータが既存のツールパラメータセット内の既存のツールパラメータと同じ場合、第２のパラメータセット識別子を既存のパラメータセットのパラメータセット識別子に等しくなるように設定するステップと、ツールパラメータが任意の既存のパラメータセット内の任意の既存のツールパラメータと同じではない場合、第１のパラメータセット識別子と異なる値を有する、第２のパラメータセット識別子を生成するステップとを含んでもよい。

いくつかの実施形態では、方法１５０は、ビットストリーム内の複数のパラメータを使用およびシグナリングするために実施されてもよい。例えば、本方法は、第１のパラメータセット内に、別のツールに対応する別のツールフラグを含むステップであって、別のツールフラグは、別のツールパラメータが、ビデオ領域をエンコーディングするために存在する、または有効にされている別のツールに対応することを示す、値に設定される、ステップと、第１のパラメータセット内に、第３のパラメータセット識別子を使用することの別のツールパラメータを含むステップとを含む。ビデオ領域をコーディングするステップは、別のツールパラメータを使用して実施される。

図１２は、本書に説明されるエンコーダ側またはデコーダ側技法を実装するために使用され得る、例示的装置１２００を示す。装置１２００は、エンコーダ側またはデコーダ側技法または両方を実施するように構成され得る、プロセッサ１２０２を含む。装置１２００はまた、プロセッサ実行可能命令を記憶するための、かつビデオビットストリームおよび／またはディスプレイデータを記憶するためのメモリ（図示せず）を含んでもよい。装置１２００は、変換回路、算術コーディング／デコーディング回路、ルックアップテーブルベースのデータコーディング技法等、ビデオ処理回路網（図示せず）を含んでもよい。ビデオ処理回路網は、部分的に、プロセッサ内に、および／または部分的に、グラフィックプロセッサ、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）等の他の専用回路網内に含まれてもよい。

本実施形態に説明される電子システムは、ビデオ通信、例えば、携帯電話、コンピュータ、ＩＰＴＶ（インターネットプロトコルテレビ）システム、ＯＴＴ（オーバーザトップ）システム、インターネット上のマルチメディアシステム、デジタルＴＶブロードキャストシステム、ビデオ監視システム、ポータブルモバイル端末、デジタルカメラ、ビデオ会議システム等のアプリケーション内でビデオ（または写真）ビットストリームを生成、記憶またはトランスポート、およびデコーディングすることが可能なデバイスまたはシステムであることができる。

ある実施形態では、実施形態における具体的実施例が、上記に述べられた実施形態および例示的実装方法に説明される実施例を参照し得るが、実施形態では詳述されないであろう。

明らかに、当業者は、本開示の各モジュールまたは各行為が、汎用コンピューティング装置によって実装されてもよく、モジュールまたは行為が、単一コンピューティング装置上に集中される、または複数のコンピューティング装置によって形成されるネットワーク上に分散されてもよく、随意に、モジュールまたは行為がコンピューティング装置を用いた実行のための記憶装置内に記憶され得る、図示または説明される行為が、いくつかの状況では、図示または本明細書に説明されるものと異なるシーケンスで実行され得る、またはそれぞれ、各集積回路モジュールを形成し得る、または複数のモジュールまたはその中の行為が、実装のために単一集積回路モジュールを形成し得るように、コンピューティング装置のためのプログラムコード実行可能によって実装されてもよい。結果として、本開示は、任意の具体的ハードウェアおよびソフトウェア組み合わせに限定されない。

上記は、本開示の好ましい実施形態にすぎず、本開示を限定することを意図するものではない。当業者にとって、本開示は、種々の修正および変形例を有し得る。本開示の原理内で行われる任意の修正、均等物置換、改良、および同等物は、本開示の添付の請求項によって定義された保護の範囲内であるものとする。

産業上の可用性

上記の説明から、ツールパラメータが、任意の新しいタイプのパラメータセットおよび対応する付加的アクティブ化プロセスを導入せずに、パラメータ間の依存性を伴わずに、別個のパラメータセット内でコーディングされ、タイルグループをエンコーディングまたはデコーディングするためのツールが、ツールパラメータを含有するパラメータセットと同一タイプの別の別個のパラメータセット内で構成されることが分かり得る。ツールのツールパラメータを更新するとき、複製された情報は、パラメータセット内でコーディングされず、アクティブ化されたパラメータセットのチェーンのトレーシングも、コーデックのために要求されない。したがって、種々のツールのパラメータは、パラメータセットのアクティブ化および管理における増加された複雑性を伴わずに、パラメータセット内で効率的にコーディングされ、柔軟に更新されることができる。既存の方法における全ての短所は、前述の方法およびデバイスを使用することによって解決される。

本書に説明される、開示されるおよび他の実施形態、モジュール、および機能動作が、デジタル電子回路で、または本書に開示される構造およびそれらの構造均等物を含む、コンピュータソフトウェア、ファームウェア、またはハードウェアで、またはそれらのうちの１つ以上のものの組み合わせで、実装されることができる。開示されるおよび他の実施形態は、１つ以上のコンピュータプログラム製品、すなわち、データ処理装置による実行のために、またはその動作を制御するために、コンピュータ可読媒体上でエンコードされるコンピュータプログラム命令の１つ以上のモジュールとして、実装されることができる。コンピュータ可読媒体は、機械可読記憶デバイス、機械可読記憶基板、メモリデバイス、機械可読伝搬信号を生じさせる組成物、または１つ以上のそれらの組み合わせであり得る。用語「データ処理装置」は、一例として、プログラマブルプロセッサ、コンピュータ、または複数のプロセッサまたはコンピュータを含む、データを処理するための全ての装置、デバイス、および機械を包含する。本装置は、ハードウェアに加えて、当該コンピュータプログラムのための実行環境を生成するコード、例えば、プロセッサファームウェア、プロトコルスタック、データベース管理システム、オペレーティングシステム、またはそれらのうちの１つ以上のそれらの組み合わせを構成するコードを含むことができる。伝搬信号は、人工的に発生される信号、例えば、好適な受信機装置に伝送するために情報をエンコードするように発生される、機械で発生される電気、光学、または電磁信号である。

コンピュータプログラム（プログラム、ソフトウェア、ソフトウェアアプリケーション、スクリプト、またはコードとしても公知である）が、コンパイラ型またはインタープリタ型言語を含む、任意の形態のプログラミング言語で書かれることができ、独立型プログラムとして、またはコンピューティング環境内の使用のために好適なモジュール、コンポーネント、サブルーチン、または他のユニットとしてを含む、任意の形態で展開されることができる。コンピュータプログラムは、必ずしもファイルシステム内のファイルに対応するわけではない。プログラムは、他のプログラムまたはデータを保持するファイル（例えば、マークアップ言語文書内に記憶された１つ以上のスクリプト）の一部内に、当該プログラム専用の単一のファイル内に、または複数の協調ファイル（例えば、１つ以上のモジュール、サブプログラム、またはコードの一部を記憶するファイル）内に記憶されることができる。コンピュータプログラムは、１つのコンピュータ上で、または１つの地点に位置し、または複数の地点を横断して分散され、通信ネットワークによって相互接続される複数のコンピュータ上で、実行されるように展開されることができる。

本書に説明されるプロセスおよび論理フローは、入力データに作用し、出力を発生させることによって機能を実施するように、１つ以上のコンピュータプログラムを実行する、１つ以上のプログラマブルプロセッサによって、実施されることができる。プロセスおよび論理フローはまた、特殊用途論理回路、例えば、ＦＰＧＡ（フィールドプログラマブルゲートアレイ）またはＡＳＩＣ（特定用途向け集積回路）によって、実施されることもでき、装置もまた、それとして実装されることができる。

コンピュータプログラムの実行のために好適なプロセッサは、一例として、汎用および特殊用途マイクロプロセッサの両方、および任意の種類のデジタルコンピュータのいずれか１つ以上のプロセッサを含む。概して、プロセッサは、読取専用メモリまたはランダムアクセスメモリまたは両方から、命令およびデータを受信するであろう。コンピュータの不可欠な要素は、命令を実施するためのプロセッサ、および命令およびデータを記憶するための１つ以上のメモリデバイスである。概して、コンピュータはまた、データを記憶するための１つ以上の大容量記憶デバイス、例えば、磁気、磁気光学ディスク、または光ディスクを含む、またはそこからデータを受信する、またはそこにデータを転送する、または両方を行うように、動作可能に結合されるであろう。しかしながら、コンピュータは、そのようなデバイスを有する必要はない。コンピュータプログラム命令およびデータを記憶するために好適なコンピュータ可読媒体は、一例として、半導体メモリデバイス、例えば、ＥＰＲＯＭ、ＥＥＰＲＯＭ、およびフラッシュメモリデバイス、磁気ディスク、例えば、内部ハードディスクまたはリムーバブルディスク、磁気光学ディスク、およびＣＤ－ＲＯＭおよびＤＶＤ－ＲＯＭディスクを含む、あらゆる形態の不揮発性メモリ、媒体、およびメモリデバイスを含む。プロセッサおよびメモリは、特殊用途論理回路によって補完される、またはそれに組み込まれることができる。

本特許文書は、多くの詳細を含有するが、これらは、任意の発明または請求され得るものの範囲への限定としてではなく、むしろ、特定の発明の特定の実施形態に特有であり得る特徴の説明として解釈されるべきである。別個の実施形態との関連で本特許文書に説明されるある特徴もまた、単一の実施形態において組み合わせて実装されることができる。逆に、単一の実施形態との関連で説明される種々の特徴もまた、複数の実施形態において別個に、または任意の好適な副次的組み合わせにおいて実装されることができる。さらに、特徴がある組み合わせにおいて作用するものとして上記に説明され、さらに、そのようなものとして最初に請求され得るが、請求される組み合わせからの１つ以上の特徴は、ある場合には、組み合わせから削除されることができ、請求される組み合わせは、副次的組み合わせまたは副次的組み合わせの変形例を対象とし得る。

同様に、動作は、特定の順序で図面に描写され得るが、これは、望ましい結果を達成するために、そのような動作が示される特定の順序で、または連続的順序で実施されること、または全ての図示される動作が実施されることを要求するものとして理解されるべきではない。さらに、本特許文書に説明される実施形態における種々のシステムコンポーネントの分離は、全ての実施形態においてそのような分離を要求するものとして理解されるべきではい。

いくつかの実装および実施例のみが、説明され、他の実装、向上、および変形例も、本特許文書に説明および図示されるものに基づいて成されることができる。

Claims

ビットストリーム処理の方法であって、前記方法は、
コーディングされたビデオ領域に対応するビットを含有するデータユニットから第１のパラメータセット識別子を取得することと、
前記第１のパラメータセット識別子に対応する第１のパラメータセットからツールフラグを取得することと、
前記第１のパラメータセット識別子に等しい識別子を有する前記第１のパラメータセットをアクティブ化することであって、前記第１のパラメータセットおよび前記データユニットは、重複を有していない、ことと、
前記ツールフラグから、前記ツールフラグに対応するツールのツールパラメータが、前記コーディングされたビデオ領域をデコーディングするために存在するかまたは有効にされていることを決定することであって、前記ツールは、ビデオコーディング技法に対応する、ことと、
前記決定することに基づいて、第２のパラメータセット識別子を取得することと、
前記第２のパラメータセット識別子に等しい識別子を有する第２のパラメータセットをアクティブ化することであって、前記第２のパラメータセットおよび前記データユニットは、重複を有していない、ことと、
前記第２のパラメータセット識別子に対応する前記第２のパラメータセットから前記ツールパラメータを取得することと、
前記ツールパラメータを使用して、前記ビデオ領域をデコーディングすることと
を含む、方法。
前記ビデオコーディング技法は、前記コーディングされたビデオ領域内の複数のコーディングブロックに共通であるコーディングパラメータに基づく、請求項１に記載の方法。
前記方法は、
前記第１のパラメータセットから別のツールフラグを取得することと、
前記ツールフラグから、前記別のツールフラグに対応する別のツールの別のツールパラメータが、前記コーディングされたビデオ領域をデコーディングするために存在するかまたは有効にされていることを決定することと、
前記決定することに基づいて、第３のパラメータセット識別子を取得することと、
前記第３のパラメータセット識別子に対応する第３のパラメータセットから前記別のツールパラメータを取得することと
をさらに含み、
前記ビデオ領域をデコーディングすることは、前記別のツールパラメータを使用して、前記ビデオ領域をデコーディングすることを含む、請求項１に記載の方法。
前記第２のパラメータセットと前記第３のパラメータセットと前記第１のパラメータセットとを含有するネットワーク抽象化層（ＮＡＬ）ユニットは、同一のＮＡＬユニットタイプを有する、請求項３に記載の方法。
前記第３のパラメータセットを含有するＮＡＬユニットは、前記第１のパラメータセットを含有するＮＡＬユニットと同一のＮＡＬユニットタイプである、請求項３に記載の方法。
前記ネットワーク抽象化層ユニットタイプは、ＮＡＬユニットヘッダ内の固定長コードワードによって示される、請求項４～５のうちのいずれか一項に記載の方法。
前記第２のパラメータセット識別子を取得することは、前記第１のパラメータセットから前記第２のパラメータセット識別子を取得することを含む、請求項１に記載の方法。
前記第３のパラメータセット識別子は、前記第１のパラメータセットから取得される、請求項３～６のうちのいずれか一項に記載の方法。
ビデオ領域をエンコーディングする方法であって、前記方法は、
ビデオ領域をエンコーディングする際に使用されるツールのツールパラメータを決定することであって、前記ツールは、ビデオコーディング技法を表す、ことと、
第１のパラメータセット識別子によって識別される第１のパラメータセットを生成することと、
前記第１のパラメータセット内に、前記ツールに対応するツールフラグを含むことであって、前記ツールフラグは、前記ツールパラメータが、前記ビデオ領域をエンコーディングするために存在するかまたは有効にされていることを示す値に設定される、ことと、
第２のパラメータセット識別子を使用して、前記第１のパラメータセット内に前記ツールパラメータを含むことであって、前記第２のパラメータセット識別子は、前記第１のパラメータセットから取得される、ことと、
前記ビデオ領域のヘッダ内の前記第１のパラメータセット識別子をコーディングすることと、
前記ツールパラメータを使用して、前記ビデオ領域をコーディングすることと
を含む、方法。
前記含むステップは、
前記ツールパラメータが既存のツールパラメータセット内の既存のツールパラメータと同じ場合、前記既存のパラメータセットのパラメータセット識別子に等しくなるように前記第２のパラメータセット識別子を設定することと、
前記ツールパラメータが任意の既存のパラメータセット内の任意の既存のツールパラメータと同じではない場合、前記第１のパラメータセット識別子と異なる値を有する前記第２のパラメータセット識別子を生成し、使用することと
を含む、請求項９に記載の方法。
前記ビデオ領域は、ビデオ写真より小さいか、または、前記ビデオ写真に対応する、請求項９に記載の方法。
前記ビデオコーディング技法は、前記コーディングされたビデオ領域内の複数のコーディングブロックに共通であるコーディングパラメータに基づく、請求項１１に記載の方法。
前記方法は、
前記第１のパラメータセット内に、別のツールに対応する別のツールフラグを含むことであって、前記別のツールフラグは、別のツールに対応する別のツールパラメータが、前記ビデオ領域をエンコーディングするために存在するかまたは有効にされていることを示す値に設定される、ことと、
第３のパラメータセット識別子を使用して、前記第１のパラメータセット内に別のツールパラメータを含むことと
をさらに含み、
前記ビデオ領域をコーディングすることは、前記別のツールパラメータを使用して行なわれる、請求項９～１２のうちのいずれか一項に記載の方法。
請求項１～１３のうちのいずれか一項に記載の方法を実装するように構成されているプロセッサを備える装置。
コードが記憶されているコンピュータ読み取り可能な媒体であって、前記コードは、プロセッサによって実行されると、請求項１～１３のうちのいずれか一項に記載の方法を実装することを前記プロセッサに行わせる、コンピュータ読み取り可能な媒体。