JP2023506879A - ビデオデータストリーム、ビデオエンコーダ、hrdタイミング修正のための装置と方法、及びスケーラブルでマージ可能なビットストリームのためのさらなる追加 - Google Patents

ビデオデータストリーム、ビデオエンコーダ、hrdタイミング修正のための装置と方法、及びスケーラブルでマージ可能なビットストリームのためのさらなる追加 Download PDF

Info

Publication number
JP2023506879A
JP2023506879A JP2022536875A JP2022536875A JP2023506879A JP 2023506879 A JP2023506879 A JP 2023506879A JP 2022536875 A JP2022536875 A JP 2022536875A JP 2022536875 A JP2022536875 A JP 2022536875A JP 2023506879 A JP2023506879 A JP 2023506879A
Authority
JP
Japan
Prior art keywords
data stream
video data
video
information
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022536875A
Other languages
English (en)
Other versions
JPWO2021123159A5 (ja
Inventor
デ ラ フエンテ ヤゴ サンチェス
カルステン ズーリング
コーネリアス ヘルゲ
トーマス ツェル
ロベルト スクピン
トーマス ウィーガンド
Original Assignee
フラウンホッファー-ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by フラウンホッファー-ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ filed Critical フラウンホッファー-ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ
Publication of JP2023506879A publication Critical patent/JP2023506879A/ja
Publication of JPWO2021123159A5 publication Critical patent/JPWO2021123159A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/15Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Systems (AREA)

Abstract

その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示す表示を含む。【選択図】図1

Description

本発明は、ビデオ符号化及びビデオ復号に関し、特に、ビデオエンコーダ、ビデオデコーダ、符号化及び復号方法、並びに高度ビデオ符号化概念を実現するためのビデオデータストリームに関する。
H.265/HEVC (HEVC=High Efficiency Video Coding(高効率ビデオ符号化))により、エンコーダ及び/又はデコーダでの並列処理を向上させるか、さらに有効にするためのツールとして、ビデオコーデックがすでに提供されている。例えば、HEVCは、互いから独立して符号化されるタイルアレイへのピクチャの細分化をサポートする。HEVCによってサポートされる別の概念は、WPPに関係しており、これによれば、ピクチャのCTUロウ又はCTUラインは、並列で左から右に処理され得、例えば、一部の最小限CTUオフセットが連続したCTUラインの処理中に守られている場合、ストライプで処理され得る(CTU=coding tree unit(符号化ツリーユニット))。ただし、ビデオエンコーダ及び/又はビデオデコーダの並列処理能力をさらに効率的にサポートするビデオコーデックがいつでも使えるようになっていると都合がよい。
通常、ビデオ符号化では、ピクチャサンプルの符号化プロセスは、サンプルが予測符号化又は変換符号化などの結合処理のためにいくつかの矩形領域に分割される、より小さいパーティションを必要とする。したがって、ピクチャは、ビデオシーケンスの符号化中に一定である特定のサイズのブロックにパーティション化される。H.264/AVC規格では、16×16サンプルの固定サイズのブロック、いわゆるマクロブロックが使用されている(AVC=Advanced Video Coding(高度ビデオ符号化))。
最新のHEVC規格([1]を参照)では、最大限サイズ64×64サンプルの符号化ツリーブロック(CTB)又は符号化ツリーユニット(CTU)がある。HEVCのさらなる説明では、ブロックのそのような種類について、より一般的な用語のCTUが使用されている。
CTUは、左上のCTUから開始し、ピクチャ内のCTUをライン方向に、右下のCTUまで処理するというラスタスキャン順序で処理される。
符号化されたCTUデータは、スライスと呼ばれるコンテナの一種に編成される。元来、以前のビデオ符号化規格では、スライスは、ピクチャの1つ以上の連続したCTUを含むセグメントを意味する。スライスは、符号化されたデータのセグメント化に用いられる。別の視点から、完全なピクチャもまた1つの大きいセグメントとして定義され得るため、歴史的に、スライスという用語が引き続き適用されている。符号化されたピクチャのサンプルに加えて、スライスもまた、いわゆるスライスヘッダ内に置かれているスライス自体の符号化プロセスに関連する追加情報を含む。
最先端の技術によれば、VCL(ビデオ符号化層)は、フラグメンテーション及び空間パーティション化のための技術も含む。そのようなパーティション化は、例えば、並列化での負荷分散処理、ネットワーク伝送でのCTUサイズのマッチング、エラーの軽減など、様々な理由でビデオ符号化に適用され得る。
ビデオ符号化規格で指定されているビットストリームは、HRD適合性関連情報を有する。この適合性は、バッファモデルを含む仮想参照デコーダ(HRD)からなり、このバッファモデルは、NALユニットが、デコーダの前に符号化ピクチャバッファ(CPB)に入り、そこから、CPBサイズを超えること(バッファオーバーラン)がないこと、又はNALユニットが除去される必要があるときよりも遅く到着すること(バッファアンダーラン)がないことを確保する特定の時間に除去されると想定するものである。さらに、このモデルは、復号ピクチャバッファ(DPB)からなり、このDPBから、復号されたピクチャは予測に不要になると出力され、そのサイズは、多くの実装では同様に制約される。HRDのタイミング情報は、いわゆるSEIメッセージ、特に、バッファリング周期(BP)(複数のアクセスユニット又はAU)の特定のタイミング情報を定義するバッファリング周期SEIメッセージ、単一の関連したAUのタイミング情報を伝達するピクチャタイミング(PT)SEIメッセージ、及び関連したAUサブセット、すなわち復号ユニット又はDUのタイミング情報を伝達する復号ユニット情報(DUI)SEIメッセージによってビットストリームに伝達される。
ビデオコーディングの規格で指定されているビットストリームには、HRD(Hypothetical Reference Decoder)適合性関連情報がある。この適合性は、NALユニットがコード化ピクチャバッファ(CPB)に入り、特定の時間にそこから削除されて、CPBサイズを超えないことを確実にする(バッファオーバーラン)か、NALユニットが削除される必要があるときよりも遅く到着しない(バッファアンダーラン)ことを想定する仮想のバッファモデルからなる。
ビットストリームがスケーラブルなビットストリームである場合、プルーニングを実行して、やはり適合ビットストリームでもあるサブビットストリームを取得できる。例えば、解像度のスケーラビリティを備えた3つの層(例えば、480pベースの層、720pの1番目の拡張層、1080pの2番目の拡張層)、以降Bと呼ぶ、を含む出力層セット(OLS)がある場合、2つのサブビットストリームを取得でき、1つは2層(480p及び720p)Bで、もう1つは1層(480p)Bのサブビットストリームである。同様に、OLSは、時間的なスケーラビリティに使用でき、その場合B、B、及びBの解像度は同じだが、フレームレートが異なる。
明らかに、このようなビットストリームB、B、及びBは、必要なCPBのサイズ、ビットレート、及びタイミング情報が異なる可能性があるため、HRD適合性が異なる。
様々なCPBサイズとビットレートが、定義された出力層セットの特性としてVPSに示される(説明されている例では3)。様々なタイミング情報が、いわゆるネスティングSEIメッセージによって提供される。ネストされたSEIメッセージには、ビットストリームプルーニング(ビットストリーム抽出)によって取得できるサブビットストリームに適用される、ネストされたバッファリング周期SEIとピクチャタイミングSEIを含めることができる。次に、この操作(抽出又はプルーニングが実行される)のとき、例えば、入力ビットストリームBのバッファリング周期SEIメッセージ及びピクチャタイミングSEIメッセージは、ビットストリームから削除され、また2番目の拡張層に属するNALユニットも削除される。さらに、ネストされたSEIメッセージで伝送されるビットストリームBに対応するバッファリング周期SEIメッセージとピクチャタイミングSEIメッセージは、ネストされたSEIメッセージビットストリームからビットストリームに配置され、そのため削除されたものに置き換えられる。
本発明の目的は、改善されたビデオ符号化及びビデオ復号概念を提供することである。
本発明の目的は、独立項の発明の主題によって解決される。
好ましい実施形態は、従属項に提供される。
一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報(Supplemental Enhancement Information:SEI)メッセージがビデオデータストリーム内に存在するかどうかを示す表示を含む。
さらに、一実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示す表示を含むように、ビデオデータストリームを生成するものである。
さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。表示は、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示す表示を含むように、ビデオデータストリームを生成することを含む。
さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、サブビットストリームを取得するために入力ビットストリームを処理することを含む。表示は、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示している。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
さらに、一実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージの少なくとも1つを含むサブセットは、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリーム内の表示が、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示すよう、ビデオエンコーダがビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオデータストリームが、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含むよう、ビデオエンコーダは、ビデオデータストリームを生成する。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットは、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、装置は、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてを、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットは、タイミング情報を含む非スケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリーム内の表示が、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるものであるよう、ビデオデータストリームを発生させることを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、サブビットストリームを取得するために入力ビットストリームを処理することを含む。ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、サブビットストリームを取得するために入力ビットストリームを処理することを含む。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含むように、前記ビデオデータストリームを生成することを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの少なくとも1つがタイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージによって代用されることを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、サブビットストリームを取得するために入力ビットストリームを処理することを含む。ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、方法は1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの少なくとも1つが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージによって代用されることを含む。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しい。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含む。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報が、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオエンコーダは、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含むよう、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオエンコーダは、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含むよう、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しい。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットに関する。アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは複数のアクセスユニットを含み、装置は入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報が、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、方法は、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しくなるよう、ビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、方法は、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含むよう、ビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、方法は、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含むよう、ビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。方法は、サブビットストリームを取得するために入力ビットストリームのアクセスユニットを処理することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しい。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。方法は、サブビットストリームを取得するために入力ビットストリームのアクセスユニットを処理することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。方法は、サブビットストリームを取得するために入力ビットストリームのアクセスユニットを処理することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。方法は、サブビットストリームを取得するために入力ビットストリームのアクセスユニットを処理することを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報が、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデータストリームは、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含む、又は、ビデオデータストリームは、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームがビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むよう、ビデオデータストリームを生成する、又は、ビデオエンコーダは、ビデオデータストリームがビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含むように、ビデオデータストリームを生成するようにする。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、サブ層についてサブ層固有のフレームレート情報を含むようにビデオデータストリームを生成する、及び/又はビデオエンコーダは、ビデオデータストリームが、サブ層についてサブ層固有のフレーム表示時間情報を含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、ビデオデータストリームがその中に符号化されるビデオを有するビデオデコーダ。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。ビデオデータストリームは、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含み、ビデオデコーダは、拡散係数を使用してビデオをデコードするものであるか、ビデオデータストリームは、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含み、ビデオデコーダがクロックサブティック値を使用してビデオを復号する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。ビデオデータストリームは、サブ層のサブ層固有のフレームレート情報を含み、及び/又はビデオデータストリームはサブ層に対するサブ層固有のフレーム表示期間情報を含む。デコーダは、サブ層のサブ層固有フレームレート情報を使用して、及び/又はサブ層固有のフレーム表示期間情報を使用して、拡散係数を決定するものである。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むようにビデオデータストリームを生成することを含む。さらに、方法は、ビデオデータストリームが、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むようビデオデータストリームを生成することを含むか、又は、方法は、ビデオデータストリームが、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含むようビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法であり、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数のアクセスユニットを含む。方法は、ビデオデータストリームを復号してビデオを復号することを含む。ビデオデータストリームは、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含み、方法は、拡散係数を使用してビデオを復号することを含むか、ビデオデータストリームは、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含み、方法がクロックサブティック値を使用してビデオを復号することを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法であり、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、ビデオデータストリームを復号してビデオを復号することを含む。ビデオデータストリームは、サブ層のサブ層固有のフレームレート情報を含み、及び/又はビデオデータストリームはサブ層に対するサブ層固有のフレーム表示期間情報を含む。方法は、サブ層のサブ層固有フレームレート情報を使用して、及び/又は前記サブ層固有のフレーム表示期間情報を使用して、拡散係数を決定することを含む。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダが提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、現在のコード化されたピクチャバッファサイズ情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのコード化されたピクチャバッファサイズを推定する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダが提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、現在コード化されているビデオシーケンスのビットレート情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのビットレートを推定するものである。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、ビデオデータストリーム内で符号化されているサブピクチャのコード化されたピクチャバッファサイズを受信し、ビデオをデコードするためにサブピクチャのコード化されたピクチャバッファサイズを使用し、及び/又はビデオをデコードし、ビデオデコーダは、ビデオデータストリーム内で符号化されているサブピクチャのビットレートを受信し、サブピクチャのビットレートを使用してビデオをデコードする。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを例えば含む。又は、ビデオデータストリームは構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含む。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むよう、及び/又はビデオデータストリームがサブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるかどうかを示す表示を含む。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むように、及び/又は、ビデオデータストリームは、サブピクチャのビットレートがビデオデータストリーム内に符号化されているかどうか、又はサブピクチャのビットレートを推定する必要があるかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを例えば含むよう、ビデオデータストリームを生成する。又は、ビデオエンコーダは、ビデオデータストリームが、構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むようビデオデータストリームを生成し、及び/又はビデオエンコーダは、ビデオデータストリームがサブピクチャのビットレートが現在コード化されているビデオシーケンスビットレート情報を使用して推定されるかどうかを示す表示を生成することを含むよう、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むようにビデオデータストリームを生成する、及び/又は、ビデオエンコーダは、ビデオデータストリームが、サブピクチャのビットレートがビデオデータストリーム内に符号化されているかどうか、又はサブピクチャのビットレートを推定する必要があるかどうかを示す表示を含むようにビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが共通の復号ユニット除去タイミング情報及び複数の抽出可能なサブバイストリームを含む場合、複数のサブビットストリームのそれぞれは、出力層セットに固有で、ビデオパラメータセット又はシーケンスパラメータセット又はビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有の仮説参照デコーダパラメータの構文分析は、共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、ビデオデータストリームを復号してビデオを復号することを含む。ビデオをデコードするために、方法は、現在のコード化されたピクチャバッファサイズ情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのコード化されたピクチャバッファサイズを推定することを含む方法。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、ビデオデータストリームを復号してビデオを復号することを含む。ビデオをデコードするために、方法は、現在コード化されているビデオシーケンスビットレート情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのビットレートを推定することを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。方法は、ビデオデータストリームを復号してビデオを復号することを含む。ビデオをデコードするために、方法は、ビデオデータストリーム内で符号化されているサブピクチャのコード化されたピクチャバッファサイズを受信し、ビデオをデコードするためにサブピクチャのコード化されたピクチャバッファサイズを使用することを含み、及び/又は方法は、ビデオデータストリーム内で符号化されているサブピクチャのビットレートを受信し、サブピクチャのビットレートを使用してビデオをデコードすることを含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが構文要素cpb_siges_veret_minus1 [i][j]及び構文要素cpb_zesic_classを含むようにビデオデータストリームを生成することを含むか、又は、方法は、ビデオデータストリームが構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含むようにビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームがサブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むようビデオデータストリームを生成することを含み、及び/又は方法は、ビデオデータストリームがサブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるかどうかを示す表示を含むようビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むようにビデオデータストリームを生成することを含み、及び/又は、方法は、ビデオデータストリームが、サブピクチャのビットレートがビデオデータストリーム内に符号化されているかどうか、又はサブピクチャのビットレートを推定する必要があるかどうかを示す表示を含むようにビデオデータストリームを生成することを含む。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含むよう、ビデオデータストリームを生成し、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。さらに、ビデオデータストリームは、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存し、ビデオデコーダは、前記アクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を使用してビデオデータストリームを復号する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するための方法が提供される。方法は、ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、さらに、方法は、ビデオデータストリームが、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存するように、ビデオデータストリームを生成することを含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数のアクセスユニットを含む。方法は、ビデオデータストリームを復号してビデオを復号することを含む。さらに、ビデオデータストリームは、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存し、方法は、前記アクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を使用してビデオデータストリームを復号することを含む。
さらに、コンピュータ又はシグナルプロセッサ上で実行されるときに上記の方法のうちの1つを実装するためのコンピュータプログラムが提供される。
実施形態による、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダを示す。 実施形態による、入力ビデオデータストリームを受信するための装置を示す。 実施形態による、その中に格納されるビデオを有するビデオデータストリームを受信するためのビデオデコーダを示す。 アクセスユニットごとに3つのデコードユニットがある場合の除去時間の変化を示す。 2つの層と、両方の層のアクセスユニットとデコードユニットの除去時間を示す。 ビデオエンコーダを示す。 ビデオデコーダを示す。 一方では再構築された信号、例えば、再構築されたピクチャと、他方では、データストリーム内でシグナリングされた予測残差信号及び予測信号の組み合わせとの間の関係を示す。
以下の図面の説明は、本発明の実施形態が組み込まれ得る符号化フレームワークの一例を形成するために、ビデオのピクチャを符号化するためのブロックベースの予測コーデックのエンコーダ及びデコーダの説明の提示から開始する。それぞれのエンコーダ及びデコーダは、図6から図8に関して説明される。以下に、本発明の概念の実施形態の説明は、それらのような概念がどのように図6及び図7のそれぞれのエンコーダ及びデコーダに組み込まれ得るかに関する説明と共に提示されるが、図1から図3及びそれ以降に説明される実施形態もまた、図6及び図7のエンコーダ及びデコーダの基礎となる符号化フレームワークに従って動作しないエンコーダ及びデコーダを形成するために使用され得る。
図6は、ビデオエンコーダ、例示的に変換ベースの残差符号化を使用して、ピクチャ12をデータストリーム14中に予測符号化するための装置を示す。装置、又はエンコーダは、参照記号10を使用して示される。図7は、対応するビデオデコーダ20、例えば、装置20を示し、この装置もまた、変換ベースの残差復号を使用して、ピクチャ12’をデータストリーム14から予測復号するように構成され、アポストロフィは、デコーダ20によって再構築されたピクチャ12’が予測残差信号の量子化によって導入された符号化損失の観点から装置10によって最初に符号化されたピクチャ12から逸脱することを示すために使用されている。図6及び図7は、変換ベースの予測残差符号化を例示的に使用するが、本出願の実施形態は、この種の予測残差符号化に限定されない。これは、以降に概説されるように、図6及び図7に関して説明される他の詳細にも当てはまる。
エンコーダ10は、予測残差信号を空間からスペクトルへの変換にかけ、この予測残差信号をデータストリーム14中に符号化することで、その中でこの予測残差信号が取得されるように構成される。同様に、デコーダ20は、予測残差信号をデータストリーム14から復号し、この予測残差信号をスペクトルから空間への変換にかけることで、この予測残差信号が取得されるように構成される。
内部では、エンコーダ10は、予測残差信号形成器22を含み得、この予測残差信号形成器は、元の信号、例えばピクチャ12から予測信号26の偏差を測定するために予測残差24を生成する。予測残差信号形成器22は、例えば、減算器であってもよく、この減算器は、元の信号、例えばピクチャ12から予測信号を減算する。つぎに、エンコーダ10は、変換器28をさらに含み、この変換器が予測残差信号24を空間からスペクトルへの変換にかけることで、スペクトル領域予測残差信号24’を取得する。つぎに、このスペクトル領域予測残差信号は、量子化器32による量子化にかけられたうえ、エンコーダ10によって含まれる。したがって、量子化された予測残差信号24”は、ビットストリーム14中に符号化される。この目的を達成するために、エンコーダ10は、エントロピーコーダ34を任意選択で含み得、このエントロピーコーダは、変換され量子化された予測残差信号をデータストリーム14中にエントロピー符号化する。予測信号26は、データストリーム14中に符号化され、そこから復号可能である予測残差信号24”に基づいて、エンコーダ10の予測ステージ36によって生成する。この目的を達成するためには、予測ステージ36は、内部に、図6に示されるように、予測残差信号24”を逆量子化し、量子化損失を除き信号24’に対応するスペクトル領域予測残差信号24’’’を得る逆量子化器38と、その後に、後者の予測残差信号24’’’を逆変換、例えばスペクトルから空間への変換にかけ、量子化損失を除き元の予測残差信号24に対応する予測残差信号24’’’’を得る逆変換器40とを含み得る。つぎに、予測ステージ36の合成器42は、加算などによって、予測信号26及び予測残差信号24’’’’を再合成し、再構築された信号46、例えば元の信号12の再構築を得る。再構築された信号46は、信号12’に対応し得る。つぎに、予測ステージ36の予測モジュール44は、例えば、空間予測(イントラピクチャ予測など)及び/又はテンポラル予測(インターピクチャ予測など)を使用することによって信号46に基づいて、予測信号26を生成する。
同様に、デコーダ20は、図7に示されるように、予測ステージ36に対応し、予測ステージに対応する方法で相互接続される、コンポーネントから内部に構成され得る。特に、デコーダ20のエントロピーデコーダ50は、量子化されたスペクトル領域予測残差信号24’’をデータストリームからエントロピー復号し得、そこで逆量子化器52、逆変換器54、合成器56及び予測モジュール58は、相互接続され、予測ステージ36のモジュールに関して上記の方法で協働することで、予測残差信号24’’に基づいて再構築された信号を回復することで、図7に示されるように、合成器56の出力は、再構築された信号、すなわちピクチャ12’をもたらす。
具体的に上述されていないが、エンコーダ10が、例えば、符号化コストなどのいくつかのレート及び歪み関連基準を最適化する方法など、いくつかの最適化スキームに従って、例えば、予測モード、動きパラメータなどを含むいくつかの符号化パラメータを設定し得ることが容易に明らかになる。例えば、エンコーダ10及びデコーダ20並びに対応するモジュール44、58は、それぞれ異なる予測モード、例えばイントラ符号化モード及びインター符号化モードをサポートし得る。エンコーダ及びデコーダがそれらの予測モードタイプ間で切り替える粒度は、それぞれピクチャ12及び12’の符号化セグメント又は符号化ブロックへの細分化に対応し得る。これらの符号化セグメントのユニットでは、例えば、ピクチャは、イントラ符号化されたブロック、及びインター符号化されたブロックに細分化され得る。イントラ符号化されたブロックは、以下により詳細に概説されるように、それぞれのブロックの空間の、既に符号化された/復号された近傍に基づいて予測される。いくつかのイントラ符号化モードは、それぞれのイントラ符号化されたセグメントに対して、存在し得、選択され得、指向性又は角度イントラ符号化モードを含み得、これらのモードに従って、それぞれのセグメントは、それぞれの指向性イントラ符号化モードに特異的な特定の方向に沿った近傍のサンプル値を、それぞれのイントラ符号化されたセグメント中に外挿することによって埋められる。これらのイントラ符号化モードは、例えば、DC符号化モードであって、このモードに従ってそれぞれのイントラ符号化されたブロックの予測がDC値を、それぞれのイントラ符号化されたセグメント内のすべてのサンプルに割り当てるDC符号化モード、及び/又は平面イントラ符号化モードであって、このモードに従ってそれぞれのブロックの予測が、近傍サンプルに基づいた二次元線形関数によって定義される平面の傾き及びオフセットにするにつれて、それぞれのイントラ符号化されたブロックのサンプル位置にわたる二次元線形関数によって記述されるサンプル値の空間分布であるように近似され、その空間分布であると決定される、平面イントラ符号化モードなどの1つ以上のさらなるモードも含み得る。それらと比較して、インター符号化されたブロックは、例えばテンポラルに、予測され得る。インター符号化されたブロックの場合、動きベクトルは、データストリーム内にシグナリングされ得、動きベクトルは、ピクチャ12が属するビデオの以前に符号化されたピクチャの部分の空間変位を示し、そこでは、以前に符号化された/復号されたピクチャは、それぞれのインター符号化されたブロックの予測信号を取得するためにサンプリングされる。これは、量子化されたスペクトル領域予測残差信号24’’を表すエントロピー符号化された変換係数レベルなど、データストリーム14が含む残差信号の符号化に加えて、データストリーム14が、その中に符号化された、符号化モードを様々なブロックに割り当てるための符号化モードパラメータと、インター符号化されたセグメントの動きパラメータなど、ブロックの一部の予測パラメータと、ピクチャ12及び12’のそれぞれのセグメントへの細分化を制御してシグナリングするためのパラメータなどの任意選択のさらなるパラメータとを含み得ることを意味する。デコーダ20は、これらのパラメータを使用して、エンコーダが行ったものと同じ方法でピクチャを細分化し、同じ予測モードをセグメントに割り当て、同じ予測を実行した結果、同じ予測信号になる。
図8は、一方では再構築された信号、例えば、再構築されたピクチャ12’と、他方では、データストリーム14内でシグナリングされた予測残差信号24’’’’、及び予測信号26の組み合わせとの間の関係を示す。既に上記に示されるように、この組み合わせは、加算であり得る。予測信号26は、図8では、ハッチングを使用して例示的に示されるイントラ符号化されたブロック、及びハッチングされていない例示的に示されるインター符号化されたブロックへのピクチャ領域の細分化として示される。この細分化は、正方形ブロック又は非正方形ブロックのロウ及びカラムへのピクチャ領域の通常の細分化、又はツリールートブロックから様々なサイズの複数のリーフブロックへのピクチャ12のマルチツリー細分化(例えば、クワッドツリー細分化など)のような任意の細分化であり得、それらの組み合わせは、図8に示され、図中、ピクチャ領域は、ツリールートブロックのロウ及びカラムに最初に細分化されてから、再帰的マルチツリー細分化に従って1つ以上のリーフブロックにさらに細分化される。
この場合も、データストリーム14は、イントラ符号化されたブロック80のためにその中に符号化されたイントラ符号化モードを有し得ることで、いくつかのサポートされたイントラ符号化モードのうちの1つは、それぞれのイントラ符号化されたブロック80に割り当てられる。インター符号化されたブロック82の場合、データストリーム14は、その中に符号化された1つ以上の動きパラメータを有し得る。概して、インター符号化されたブロック82は、テンポラルに符号化されるように制限されない。代わりに、インター符号化されたブロック82は、現在のピクチャ12自体を超えて以前に符号化された部分から、例えば、ピクチャ12が属するビデオの以前に符号化されたピクチャ、又はエンコーダ及びデコーダがそれぞれスケーラブルなエンコーダ及びデコーダである場合には別のビューのピクチャもしくは階層的に下位の層から、予測される任意のブロックであり得る。
図8では、予測残差信号24’’’’もまた、ピクチャ領域のブロック84への細分化として示される。これらのブロックは、同じものを符号化ブロック80及び82から区別するために変換ブロックと称されてもよい。実際には、図8は、エンコーダ10及びデコーダ20がピクチャ12及びピクチャ12’のそれぞれのブロックへの2つの異なる細分化、すなわち1つがそれぞれの符号化ブロック80及び82への細分化、及びもう1つが変換ブロック84への細分化を使用し得ることを示す。両方の細分化は、同じもの、例えばそれぞれ符号化ブロック80及び82でもよく、同時に変換ブロック84を形成し得るが、図8は、例えば、変換ブロック84への細分化が符号化ブロック80、82への細分化の拡張を形成する場合を示すため、ブロック80及び82の2つのブロック間の任意の境界が2つのブロック84間の境界に重なる、又は別の言い方をすれば、各ブロック80、82のいずれかが変換ブロック84のうちの1つと合致する、もしくは変換ブロック84のクラスタと合致する。ただし、これらの細分化もまた、変換ブロック84がブロック80とブロック82との間のブロック境界を交互に交差し得るように互いから独立して決定され得る、又は選択され得る。したがって、変換ブロック84への細分化が関係する限り、ブロック80、82への細分化に関してあげられたものと同様のステートメントは、真であり、例えば、ブロック84は、ピクチャ領域のブロックへの通常の細分化の結果(ロウ及びカラムへの配置の有無にかかわらず)、ピクチャ領域の再帰的マルチツリー細分化の結果、又はそれらの組み合わせもしくは任意の他の種類のブロック結果であり得る余談であるが、ブロック80、82及び84が四角形、矩形又は任意の他の形状のものであることに限定されないことに留意する。
さらに、図8は、予測信号26及び予測残差信号24’’’’の組み合わせが再構築された信号12’を直接もたらすことを示す。ただし、代替の実施形態による、1つより多い予測信号26が予測残差信号24’’’’と組み合わせられ得ることで、ピクチャ12’になり得ることに留意されたい。
図8では、変換ブロック84は、以下の有意性を有するものとする。変換器28及び逆変換器54は、それらの変換をそれらの変換ブロック84の単位で実行する。例えば、多くのコーデックは、すべての変換ブロック84のある種のDST又はDCTを使用する。いくつかのコーデックは、変換をスキップすることを可能にするため、いくつかの変換ブロック84には、予測残差信号は、空間領域で直接符号化される。ただし、下記の実施形態によれば、エンコーダ10及びデコーダ20は、いくつかの変換をサポートするような方法で構成される。例えば、エンコーダ10及びデコーダ20によってサポートされる変換は、
o DCT-II(又はDCT-III)(DCTは離散コサイン変換を表す)
o DST-IV(DSTは離散サイン変換を表す)
o DCT-IV
o DST-VII
o 恒等変換(IT)
を含み得る
当然、変換器28は、それらの変換の順方向変換バージョンのすべてをサポートするが、デコーダ20又は逆変換器54は、それらの対応する逆方向又は逆バージョン、
o 逆DCT-II(又は逆DCT-III)、
o 逆DST-IV
o 逆DCT-IV
o 逆DST-VII
o 恒等変換(IT)
をサポートする。
その後の説明では、変換がエンコーダ10及びデコーダ20によってサポートされ得る、さらなる詳細が提供される。いずれの場合も、1つのスペクトルから空間への、又は空間からスペクトルへの変換など、1つの変換のみを、サポートされた変換セットが含み得ることに留意されたい。
既に上記で概説されるように、図6から図8は、以下にさらに説明される本発明の概念が本出願によるエンコーダ及びデコーダの具体的な例を形成するために実装され得る、一例として提示されている。これまでのところ、図6及び図7のそれぞれのエンコーダ及びデコーダは、本明細書では下記のエンコーダ及びデコーダの可能な実装を表し得る。ただし、図6及び図7は、例に過ぎない。ただし、本出願の実施形態によるエンコーダは、以下により詳細に概説される概念を使用して、例えば、同じものがビデオエンコーダではないがそれでもピクチャエンコーダであるという点、同じものがインター予測をサポートしないという点、又はブロック80への細分化が図8に例示されている方法とは異なる方法で実行されるという点などで、図6のエンコーダとは異なる、ピクチャ12のブロックベースの符号化を実行し得る。同様に、本出願の実施形態によるデコーダは、データストリーム14からのピクチャ12’のブロックベースの復号を、以下でさらに概説される符号化概念を使用して実行し得るが、例えば、同じものがビデオデコーダではないがそれでもピクチャデコーダであるという点、同じものがイントラ予測をサポートしないという点、又は図8に関して説明される方法とは異なる方法で同じものがピクチャ12’をブロックに細分化するという点、及び/又は同じものが例えば変換領域ではなく空間領域でデータストリーム14から予測残差を導出するという点で図7のデコーダ20とは異なり得る。
図1は、一実施形態による、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダ100を示す。ビデオエンコーダ100は、ビデオデータストリームを生成するように構成される。
図2は、一実施形態による、入力ビデオデータストリームを受信するための装置200を示す。入力ビデオデータストリームは、その中に符号化されたビデオを有する。装置200は、出力ビデオデータストリームを入力ビデオデータストリームから生成するように構成される。
図3は、一実施形態による、その中に格納されるビデオを有するビデオデータストリームを受信するためのビデオデコーダ300を示す。ビデオデコーダ300は、ビデオをビデオデータストリームから復号するように構成される。
さらに、実施形態によるシステムが提示される。このシステムは、図2の装置、及び図3のビデオデコーダを含む。図3のビデオデコーダ(300)は、図2の装置(200)の出力ビデオデータストリームを受信するように構成される。図3のビデオデコーダ300は、図2の装置200の出力ビデオデータストリームからビデオを復号するように構成される。
一実施形態では、システムは、例えば、図1のビデオエンコーダ100をさらに含み得る。図2の装置200は、例えば、図1のビデオエンコーダ100からのビデオデータストリームを入力ビデオデータストリームとして受信するように構成され得る。
装置200の中間デバイス210(任意選択の)は、例えば、ビデオエンコーダ100からのビデオデータストリームを入力ビデオデータストリームとして受信し、出力ビデオデータストリームを入力ビデオデータストリームから生成するように構成され得る。例えば、中間デバイスは、例えば、入力ビデオデータストリームの情報(ヘッダ/メタデータ情報)を変更するように構成され得る、及び/又は例えば、入力ビデオデータストリームからピクチャを削除するように構成され得る、及び/又は入力ビデオデータストリームを、その中に符号化された第二ビデオを有する追加の第二ビットストリームと混合する/スプライシングするように構成され得る。
ビデオデコーダ221(任意選択の)は、例えば、ビデオを出力ビデオデータストリームから復号するように構成され得る。
仮想参照デコーダ222(任意選択の)は、例えば、出力ビデオデータストリームに応じてビデオのタイミング情報を決定するように構成され得る、又は例えば、ビデオもしくはビデオの一部分が格納されるバッファのバッファ情報を決定するように構成され得る。
このシステムは、図1のビデオエンコーダ101及び図2のビデオデコーダ151を含む。
ビデオエンコーダ101は、符号化されたビデオ信号を生成するように構成される。ビデオデコーダ151は、符号化されたビデオ信号を復号してビデオのピクチャを再構築するように構成される。
以下に、特定の実施形態を説明する。
HEVCでは、抽出プロセス仕様の注記で、ネストされたSEIメッセージの処理について次のように説明されている。
「スマート」ビットストリーム抽出器は、適切な非スケーラブルなネストバッファリングピクチャSEIメッセージ、非スケーラブルなネストピクチャタイミングSEIメッセージ、及び非スケーラブルなネスト復号ユニット情報SEIメッセージを、サブビットストリームに適用可能なメッセージが元のビットストリームにスケーラブルにネストされたSEIメッセージとして存在していたとすると、抽出されたサブビットストリームに、含めることができる。
VVCでは、想定される設計は、動作が規範的に指定されているように適切に設定され、例えば、本発明の実施形態が追加されたJVET-P2001-vCで定義された抽出プロセスに関して、以下のとおりである。
サブビットストリーム抽出プロセス
このプロセスへの入力は、ビットストリームinBitstream、ターゲットOLSインデックスtargetOlsIdx、及びターゲットの最高のTemporalId値tIdTargetである。
このプロセスの出力は、サブビットストリームoutBitstreamである。
ビットストリームについて、この句で指定されたプロセスの出力である任意の出力であるサブビットストリームが、VPSで指定されたOLSのリストのインデックスに等しいtargetOlsIdxであり、tIdTargetが包括的に0から6の範囲の任意の値に等しいこと、及び、次の条件を満たすものは、準拠するビットストリームであるものとするということが、入力ビットストリームのビットストリームの要件である。
・出力サブビットストリームには、少なくとも1つのVCL NALユニットが含まれ、nuh_layer_id値はLayerIdInOls[targetOlsIdx]のそれぞれと等しくなる。
・出力サブビットストリームには、TemporalIdがtIdTargetに等しいVCNLALユニットが少なくとも1つ含まれている。
注-準拠するビットストリームには、0に等しいTemporalIdを持つ1つ以上のコード化されたスライスNALユニットを含むが、0に等しいnuh_layer_idを有するコード化スライスNALユニットを含める必要はない。
出力サブビットストリームOutBitstreamは、次のように導出される。
・ビットストリームoutBitstreamは、ビットストリームinBitstreamと同一に設定される。
・TemporalIdがtIdTargetより大きいすべてのNALユニットをoutBitstreamから削除する。
・nal_unit_typeがVPS_NUT、DPS_NUT、及びEOB_NUTのいずれとも等しくなく、nuh_layer_idがリストLayerIdInOls [targetOlsIdx]に含まれていないすべてのNALユニットをoutBitstreamから削除する。
・nesting_ols_flagが1であり、包括的に0からnesting_num_olss_minus1までの範囲のiの値がないスケーラブルなネストのSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。例えば、NestingOlsIdx [i]はtargetOlsIdxと同じである。
・targetOlsIdxが0より大きい場合、payloadTypeが0(バッファリング周期)、1(画像タイミング)、又は130(デコードユニット情報)に等しい非スケーラブルなネストされたSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。
特定の実施形態によれば: ・outBitstreamに、nesting_ols_flagが1に等しいスケーラブルなネストSEIメッセージを含み、outBitstreamに適用可能なSEI NALユニットが含まれている場合(NestingOlsIdx [i]はtargetOlsIdxに等しい)、以下を行う:
・スケーラブルなネストSEIメッセージから、payloadTypeが0(バッファリング周期)、1(画像タイミング)、又は130(デコード情報)に等しい適切な非スケーラブルなネストされたSEIメッセージを抽出し、それらのメッセージをoutBitstreamに入れる。
・スケーラブルなネストSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。
以下では、ビットストリーム内のOLSのスケーラブルなネストSEIメッセージの存在について説明する。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示す表示を含む。
実施形態では、表示がパラメータ設定フラグである。ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを例えば含む。
実施形態によれば、請求項2に記載のビデオデータストリームは、ビデオデータストリームのシーケンスパラメータセットは、例えば、パラメータセットフラグを含むことができる。
実施形態では、パラメータ設定フラグはsps_ols_nest_timing_present_flagである。
実施形態によれば、ビデオデータストリームは、例えば、パラメータセットフラグを含み得る、さらなる補足拡張情報メッセージを含み得る。パラメータセットフラグが、1つ以上の出力層セットのそれぞれの1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示す。
実施形態では、タイミング情報は、例えばピクチャタイミング情報とバッファリング周期情報と復号ユニット情報のうちの少なくとも1つを含み得る。
実施形態では、タイミング情報は、仮想参照デコーダのタイミング情報である。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示す表示を含むように、ビデオデータストリームを生成するものである。
実施形態では、表示がパラメータ設定フラグである。ビデオエンコーダが、ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを例えば含み得るように、ビデオデータストリームを生成するよう例えば構成され得る。
実施形態では、ビデオエンコーダは、例えば、ビデオデータストリームの一連のパラメータセットが例えば復号パラメータセットを含み得るようにビデオデータストリームを生成するように構成され得る。
実施形態では、ビデオエンコーダは、パラメータセットフラグがsps_ols_nest_timing_present_flagであるようにビデオデータストリームを生成するよう、例えば構成され得る。
実施形態では、ビデオエンコーダは、ビデオデータストリームが、パラメータセットフラグを例えば含み得るさらなる補足拡張情報メッセージを例えば含み得るように、ビデオデータストリームを生成するよう例えば構成するものである。ビデオエンコーダが、パラメータセットフラグが、1つ以上の出力層セットのそれぞれの1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示すように、ビデオデータストリームを生成するよう例えば構成することができる。
実施形態によれば、タイミング情報は、例えばピクチャタイミング情報とバッファリング周期情報と復号ユニット情報のうちの少なくとも1つを含み得る。
実施形態では、タイミング情報は、仮想参照デコーダのタイミング情報である。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。表示は、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示す。
実施形態では、表示がパラメータ設定フラグである。装置は、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを含むビデオデータストリームを処理するよう例えば構成できる。
実施形態では、一連のパラメータセットのビデオデータストリームは、例えば、パラメータセットフラグを含み得る。
実施形態によれば、パラメータ設定フラグはsps_ols_nest_timing_present_flagである。
実施形態では、ビデオデータストリームは、例えば、パラメータセットフラグを含み得る、さらなる補足拡張情報メッセージを含み得る。パラメータセットフラグが、1つ以上の出力層セットのそれぞれの1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示す。装置は、例えば、さらなる補足拡張情報メッセージを処理するように構成され得る。
実施形態によれば、タイミング情報は、例えばピクチャタイミング情報とバッファリング周期情報と復号ユニット情報のうちの少なくとも1つを含み得る。
実施形態によれば、1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在する1つ以上の出力層セットのそれぞれのピクチャタイミング情報を例えば含むことができるタイミング情報を含む場合、装置は、非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのピクチャタイミング情報を代用するよう例えば構成し得る。1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在する1つ以上の出力層セットのそれぞれのバッファリング周期情報を含むタイミング情報を含む場合、装置は、非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージのバッファリング周期情報を代用するよう例えば構成できる。1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在する1つ以上の出力層セットのそれぞれの復号ユニット情報を含むタイミング情報を含む場合、装置は、非スケーラブルなネストされた復号ユニット補足拡張情報メッセージの復号ユニット情報を代用するよう例えば構成できる。
実施形態では、タイミング情報は、仮想参照デコーダのタイミング情報である。
実施形態によれば、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、またビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するよう例えば構成し得る。装置は、ビデオデータストリームを入力ビットストリームとして受信するよう例えば構成し得る。さらに、装置は、サブビットストリームを取得するために入力ビットストリームを処理するよう例えば構成し得る。さらに、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
VVCドラフト仕様には、VPS内のOLSの定義が含まれ、これは、ネストされた形式(スケーラブルなネストSEIメッセージ)のビットストリームにあるそれぞれのHRD SEIメッセージ(BP、PT、DUI)に基づくOLSサブビットストリームのHRDベースの適合性テストでも使用できる。SEIメッセージのネスト)。OLSを定義する場合、適合性テストを有効にするには、これらのOLSのそれぞれのHRD SEIメッセージがビットストリームにあることを保証することが重要である。
したがって、これは本発明の一部であり、表示がビットストリームにあること(例えば、SPSのsps_ols_scal_nest_timing_present_flagなどのパラメータセットフラグ又はそのようなフラグを含む新しいSEIメッセージ)は、すべてのOLSへのスケーラブルなネストSEIメッセージを示すことは本発明の一部である。はビットストリーム内に存在する必要がある。
以下では、HRD SEIがサブビットストリームにどのように適用されるかについて説明する。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す。
実施形態では、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、これは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用されることを示す。
実施形態では、表示がフラグである。1つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成し得るかどうかを示すフラグを例えば含み得る。
実施形態では、フラグはuse_orig_pic_timing_flagである。
実施形態では、ビデオデータストリームは、例えば、ビデオパラメータセットを含み得る。表示はフラグである。ビデオパラメータセットが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成され得るかどうかを示すフラグを例えば含み得る。
実施形態では、フラグはuse_orig_pic_timing_flagである。
実施形態では、フラグはgeneral_same_pic_timing_in_all_ols_flagである。
実施形態では、表示は、1つ以上のアクセスユニットの各アクセスユニット内の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのそれぞれが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用され、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在しないか、1つ以上のアクセスユニットの各アクセスユニットにある非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用される場合と適用されない場合があることと、スケーラブルにネストされたピクチャタイミング補足拡張情報メッセージが存在する場合があるということを示す。
実施形態では、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう構成し得ることを示す場合、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つは、ビットストリームのアクセスユニットの中の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前に生じる。
実施形態では、表示が制約フラグである。1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが1つ以上のサブビットストリームの少なくとも1つに適用されるかどうかを示す制約フラグを含む。
実施形態では、表示が第1の表示である。ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の第3の表示は、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージからさらに取得されるかどうかを示す。
実施形態によれば、ビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージからさらに取得されるかどうかを示す。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージの少なくとも1つを含むサブセットは、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
実施形態によれば、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージである。又は、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージである。又は、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージである。
実施形態では、ビデオデータストリームが、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージを例えば含み得る場合、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、ビットストリームのアクセスユニット内にタイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に発生する。
実施形態によれば、タイミング情報は、仮想参照デコーダのタイミング情報である。
実施形態では、サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリーム内の表示が、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示すよう、ビデオデータストリームを生成する。
実施形態によれば、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、これは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用されることを示す。
実施形態では、表示がフラグである。ビデオエンコーダは、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成し得るかどうかを示すフラグを例えば含み得るよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態では、フラグはuse_orig_pic_timing_flagである。
実施形態では、ビデオデータストリームは、例えば、ビデオパラメータセットを含み得る。表示は例えばフラグであり得る。ビデオパラメータセットが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成し得ることを示すフラグを含むよう、ビデオエンコーダがビデオデータストリームを生成するよう例えば構成し得る。
実施形態では、フラグはuse_orig_pic_timing_flagである。
実施形態では、フラグはgeneral_same_pic_timing_in_all_ols_flagである。
実施形態によれば、表示は、1つ以上のアクセスユニットの各アクセスユニット内の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのそれぞれが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用され、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在しないか、1つ以上のアクセスユニットの各アクセスユニットにある非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用される場合と適用されない場合があることと、スケーラブルにネストされたピクチャタイミング補足拡張情報メッセージが存在する場合があるということを示す。
実施形態では、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう構成し得ることを示す場合、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つは、ビットストリームのアクセスユニットの中の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前に生じる。
実施形態によれば、表示が制約フラグである。1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが1つ以上のサブビットストリームの少なくとも1つに適用されるかどうかを示す制約フラグを含むよう、ビデオエンコーダが前記ビデオデータストリームを生成するよう例えば構成し得る。
実施形態では、表示が第1の表示である。ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の第3の表示は、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
実施形態によれば、ビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオデータストリームが、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含むよう、ビデオエンコーダは、ビデオデータストリームを生成する。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットは、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用される(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
実施形態によれば、ビデオエンコーダは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであるように、ビデオデータストリームを生成するよう例えば構成し得る。又は、ビデオエンコーダは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであるように、ビデオデータストリームを生成するよう例えば構成し得る。又は、ビデオエンコーダは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージであるように、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態では、ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを例えば含み得る場合、ビデオエンコーダは、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、ビットストリームのアクセスユニット内にタイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に生成するように、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態によれば、タイミング情報は、仮想参照デコーダのタイミング情報である。
実施形態では、サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す。
実施形態によれば、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、装置は、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用されるよう例えば構成し得ることを示す。
実施形態によれば、表示が例えば制約フラグであり得る。1つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成し得ることを示すフラグを例えば含み得る。
実施形態では、フラグはuse_orig_pic_timing_flagである。
実施形態では、ビデオデータストリームは、例えば、ビデオパラメータセットを含み得る。表示は例えばフラグであり得る。ビデオパラメータセットが、サブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成され得るかどうかを示すフラグを例えば含み得る。
実施形態では、フラグはsame_pic_timing_within_ols_flagである。
実施形態によれば、フラグはgeneral_same_pic_timing_in_all_ols_flagである。
実施形態では、表示は、1つ以上のアクセスユニットの各アクセスユニット内の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのそれぞれが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用され、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在しないか、1つ以上のアクセスユニットの各アクセスユニットにある非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用される場合と適用されない場合があることと、スケーラブルにネストされたピクチャタイミング補足拡張情報メッセージが存在する場合があるということを示す。
実施形態によれば、表示が、1つ以上のアクセスユニットの各アクセスユニット内の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、ビデオデータストリームに設定されたいずれかの出力層のアクセスユニットに適用される場合と適用されない場合があることと、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在する可能性があることとを示す場合、装置は、入力ビットストリーム又はサブビットストリームから、非スケーラブルなネストされた補足拡張情報メッセージを含むピクチャタイミングコンテンツを伴うすべての補足拡張情報ネットワーク抽象化層ユニットを削除するように構成される。
実施形態では、表示がサブビットストリームのタイミング情報が1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるよう例えば構成し得ることを示す場合、装置は、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つを処理するよう例えば構成でき、それは装置がビットストリームのアクセスユニットの中の1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前、装置がアクセスユニット内の1つ以上の非スケーラブルネストされたピクチャタイミング補足拡張情報メッセージを処理するよう例えば構成し得る前に生じる。
実施形態では、表示が制約フラグである。装置は、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、1つ以上のサブビットストリームの少なくとも1つに適用されるかどうかを示す制約フラグを含む1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージを処理するよう例えば構成し得るものである。
実施形態では、表示が第1の表示である。ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の第3の表示は、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
実施形態によれば、ビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージからさらに取得されるかどうかを示し、及び/又はビデオデータストリーム内の表示はさらに、サブビットストリームのタイミング情報がさらに、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージからさらに取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示す。及び/又は、ビデオデータストリーム内の第2の表示は、サブビットストリームのタイミング情報が、ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。装置は、サブビットストリームを取得するために入力ビットストリームを処理するものである。ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含む。ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、装置は、スケーラブルなネストされた補足拡張情報メッセージに応じて、1つ以上の非スケーラブルなネストされたタイミング情報拡張情報メッセージのすべてを、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージによる(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。又は、1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットは、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージによる(例えば、タイミング情報は、ピクチャタイミング情報又はバッファリング周期情報又は復号ユニット情報である)。
実施形態によれば、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージである。又は、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージである。又は、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージである。
実施形態では、ビデオデータストリームが、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを例えば含むことができる。タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージが、ビットストリームのアクセスユニット内のタイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に発生する。装置は、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に、タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを処理するよう例えば構成し得る。
実施形態によれば、タイミング情報は、仮想参照デコーダのタイミング情報である。
実施形態では、サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する。
実施形態によれば、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、またビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するよう例えば構成し得る。装置は、ビデオデータストリームを入力ビットストリームとして受信するよう例えば構成し得る。さらに、装置は、サブビットストリームを取得するために入力ビットストリームを処理するよう例えば構成し得る。さらに、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
VVCドラフト仕様には、HRDタイミング動作を制御するSEIメッセージ、つまり、ビットストリームが復号されるときのバッファリング周期SEIメッセージとピクチャタイミングSEIメッセージが含まれている。
現在、VVCドラフト仕様には、いくつかのターゲットのTemporal IDに適用されるすべてのPicture Timing SEIメッセージがすでに含まれている。つまり、時間のスケーラビリティは、追加のタイミング情報のスケーラブルなネストを必ずしも必要としない。したがって、サブビットストリームを抽出する場合(例えば、OLSを介した階層化シナリオで、又はサブピクチャの抽出によって空間的に)、場合によっては、そのような方法でPicture Timing SEIメッセージを変更/交換する必要がない場合がある。
以下では、出力レイヤセット抽象化が説明される。
一実施形態では、ビットストリーム内のPicture Timing SEIメッセージが、ビットストリーム(いくつかのOLS Bによって定義された/対応する)の任意のサブビットストリーム(何らかのOutput Layer Set(OLS)Aに定義された/対応する)に適用されるということを示すシグナリングが追加され、Buffering周期のSEIメッセージのみが、スケーラブルにネストされた対に置き換えられる。構文例:
Figure 2023506879000002
現在のところ、スケーラブルなネストSEIメッセージは、アクセスユニット内のHRD SEIメッセージの後に続く。したがって、上記の実施形態の一部として、use_orig_pic_timing_flagが1に等しい場合、OLS固有のHRD SEIメッセージを含むスケーラブルなネストSEIメッセージは、ビットストリーム順序でアクセスユニット内のそれぞれのPT SEIメッセージ(抽出中に保持するメッセージ)の前に発生する必要がある。
又は、代替の実施形態では、表示は、制約フラグとしてVPSにある:
Figure 2023506879000003
又は、代替の実施形態では、表示は、制約フラグとして Picture Timing SEIにある。
この抽出プロセスが変更された。
以下では、サブビットストリームの抽出プロセス中のDPSリライトが説明される。
このプロセスへの入力は、ビットストリームinBitstream、ターゲットOLSインデックスtargetOlsIdx、及びターゲットの最高のTemporalId値tIdTargetである。
このプロセスの出力は、サブビットストリームoutBitstreamである。
プロセスの出力である任意の出力である任意の出力サブビットストリームがビットストリーム、VPSで指定されたOLSのリストのインデックスに等しいtargetOlsIdxと、入力としての包括的な0から6の範囲の任意の値に等しいtIdTargetについてこの句で指定し、次の条件を満たすものは、準拠するビットストリームである必要がある。
・出力サブビットストリームには、少なくとも1つのVCL NALユニットが含まれ、nuh_layer_idはLayerIdInOls[targetOlsIdx]のそれぞれと等しくなる。
・出力サブビットストリームには、TemporalIdがtIdTargetに等しいVCL NALユニットが少なくとも1つ含まれている。
注-準拠するビットストリームは、0に等しいTemporalIdを備える1つ以上のコード化されたスライスNALユニットを含むが、0に等しいnuh_layer_idを有するコード化スライスNALユニットを含める必要はない。
出力サブビットストリームOutBitstreamは、次のように導出される。
・ビットストリームoutBitstreamは、ビットストリームinBitstreamと同一に設定される。
・TemporalIdがtIdTargetより大きいすべてのNALユニットをoutBitstreamから削除する。
・nal_unit_typeがVPS_NUT、DPS_NUT、及びEOB_NUTのいずれとも等しくなく、nuh_layer_idがリストLayerIdInOls [targetOlsIdx]に含まれていないすべてのNALユニットをoutBitstreamから削除する。
・nesting_ols_flagが1であり、包括的に0からnesting_num_olss_minus1までの範囲のiの値がないスケーラブルなネストのSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。例えば、NestingOlsIdx [i]はtargetOlsIdxと同じである。
・targetOlsIdxが0より大きい場合、payloadTypeが0(バッファリング周期)、1(ピクチャタイミング)、又は130(復号ユニット情報)に等しい非スケーラブルなネストされたSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。
・targetOlsIdxが0より大きく、use_orig_pic_timing_flag/same_pic_timing_within_ols_flagが0に等しい場合、payloadTypeが1(ピクチャタイミング)に等しい非スケーラブルなネストされたSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。
・outBitstreamが、スケーラブルなネストSEIメッセージを含み、outBitstreamに適用可能なSEI NALユニットが含まれている場合(NestingOlsIdx [i]はtargetOlsIdxに等しい)、以下を行う:
・スケーラブルなネストSEIメッセージから、payloadTypeが0(バッファリング周期)、1(ピクチャタイミング)、又は130(復号ユニット情報)に等しい適切な非スケーラブルなネストされたSEIメッセージを抽出し、それらのメッセージをoutBitstreamに入れる。
・さもなければ(use_orig_pic_timing_flag/same_pic_timing_within_ols_flagが1に等しいとき)、outBitstream(NestingOlsIdx[i]がtargetOlsIdxに等しい)に対して適用可能であるものが存在するときスケーラブルなネストSEIメッセージから、payloadTypeが0(バッファリング周期)、又は130(復号ユニット情報)に等しい適切な非スケーラブルなネストされたSEIメッセージを抽出し、それらのメッセージをoutBitstreamに入れる。
・スケーラブルなネストSEIメッセージを含むすべてのSEI NALユニットをoutBitstreamから削除する。
表示、例えばフラグは、例えばgeneral_same_pic_timing_in_all_ols_flag、又は例えばsame_pic_timing_within_ols_flagなどを使用し得る。
general_same_pic_timing_in_all_ols_flag(又はsame_pic_timing_within_ols_flag)が最初の値、例えば1に等しい場合、各AUの非スケーラブルネストPT SEIメッセージがビットストリーム内のすべてのOLSのAUに適用され、スケーラブルなネストされたPT SEIメッセージがないことを指定する。general_same_pic_timing_in_all_ols_flagが2番目の値、例えば0に等しい場合、各AUの非スケーラブルなネストされたPT SEIメッセージが、ビットストリーム内の任意のOLSのAUに適用される場合と適用されない場合があり、スケーラブルにネストされたPTSEIメッセージが存在する場合がある。
例えば、general_same_pic_timing_in_all_ols_flagが2番目の値、例えば0に等しい場合、(装置は)入力ビットストリーム又は出力ビットストリーム(例えば、outBitstream / sub-bitstream)から、payloadTypeが1(PT)に等しい、非スケーラブルなネストされたSEIメッセージを構成するすべてのSEI NALユニットを削除する。
実施形態では、バッファリング周期SEIメッセージもまた、場合によっては、スケーラブルなネストされた変形による置換を必要としない場合があり、その結果、パラメータセット又はバッファリング周期SEIメッセージ自体で追加の指示を伝送することができ、指示されたタイミングは、抽出されたサブビットストリームにも適用され、抽出プロセスは、それぞれの指示に応じて元のBP及びPT SEIメッセージを保持するようにさらに変更される。
以下では、サブピクチャの抽出が説明される。
サブピクチャサブビットストリーム抽出の場合を考慮する別の実施形態では、それぞれの信号がビットストリームに追加され(例えば、サブピクチャネストSEIメッセージ、Picture Timing SEIメッセージ、パラメータセットの構文で)、ビットストリーム内のPicture Timing SEIメッセージは、ビットストリームに含まれるすべてのサブピクチャの組み合わせによって構成されるビットストリームのサブピクチャ又はサブピクチャセットによって定義される任意のサブビットストリームに適用され、バッファリング周期のSEIメッセージのみがサブピクチャがネストされた対応物に置き換えられる。
代替的に、バッファリング周期SEIメッセージもまた、場合によっては、サブピクチャなネストされた変形による置換を必要としない場合があり、その結果、パラメータセット又はバッファリング周期SEIメッセージ自体で追加の指示を伝送することができ、指示されたタイミングは、抽出されたサブビットストリームにも適用され、抽出プロセスは、それぞれの指示に応じて元のBP及びPT SEIメッセージを保持するようにさらに変更される。
以下では、スケーラブルなネストされたHRD SEIメッセージの存在に基づく非スケーラブルなネストされたHRD SEIメッセージの削除について説明する。
本発明の別の実施形態では、非スケーラブルなネストされたHRD SEIメッセージ(例えば、BP、PT、DUI SEIメッセージ)の範囲、すなわち、それらの一部(例えば、PT SEIメッセージのみ)又はそれらのすべてが抽出可能なサブビットストリーム(例えば、OLS)は、スケーラブルなネストされたHRD SEIメッセージの形式でそれぞれの代替SEIメッセージが存在することによって示され、このようなメッセージがない場合は、それぞれの非スケーラブルなHRD SEIメッセージがOLSに適用されることを示す。この範囲表示の結果は、サブビットストリーム抽出プロセスでの非スケーラブルなネストされたSEIメッセージの削除は、削除されたメッセージの代わりとして機能できるスケーラブルなネストされたSEIメッセージの存在に依存し、そのようなスケーラブルなネストされたSEIメッセージがない場合に、非スケーラブルなネストされたSEIメッセージは、抽出されたサブビットストリームに残る。
さらなる実施形態では、それぞれのスケーラブルにネストされたHRD SEIメッセージは、抽出中のビットストリームの順次の処理を容易にするために、アクセスユニットにおいてビットストリーム順序で非スケーラブルなネストされたHRD SEIメッセージの前に配置される。
以下では、簡略化されたスケーラブルなネストについて説明する。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しい。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含む。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報が、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を例えば伝送するようにし得る。
実施形態によれば、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を例えば伝送するようにし得る。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを例えば伝送するようにし得る。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットに関する。アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオエンコーダは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しくなるように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオエンコーダは、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含むよう、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるよう、ビデオエンコーダは、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオエンコーダは、ビデオデータストリームが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含むよう、ビデオデータストリームを生成する。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を例えば伝送するようにし得る。
実施形態によれば、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を例えば伝送することができる。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを例えば伝送するようにし得る。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しい。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットに関する。アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報がアクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてで等しいかどうかを示す表示を含む。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは複数のアクセスユニットを含み、装置は入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報は、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための装置が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。入力ビットストリームは、複数のアクセスユニットを含む。装置は、入力ビットストリームのアクセスユニットを処理して、サブビットストリームを取得する。複数のアクセスユニットの各アクセスユニットについて、アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含む場合、ビデオデータストリームは、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報が、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を例えば伝送するようにし得る。
実施形態によれば、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を例えば伝送するようにし得る。及び/又は、複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を例えば伝送することができる。
実施形態で、識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを例えば伝送するようにし得る。
実施形態によれば、装置が出力層セットのバッファ周期スケーラブルなネストされた補足拡張情報メッセージを見つけた場合、装置は、前記出力層セットのさらなるバッファ周期スケーラブルなネストされた補足拡張情報メッセージを検索することなく、前記出力層セットの前記バッファ周期スケーラブルなネストされた補足拡張情報のコンテンツを使用するよう例えば構成し得る。及び/又は、装置が出力層セットのピクチャタイミングスケーラブルなネストされた補足拡張情報メッセージを見つけた場合、装置は、前記出力層セットのさらなるピクチャタイミングスケーラブルなネストされた補足拡張情報メッセージを検索することなく、前記出力層セットの前記ピクチャタイミングスケーラブルなネストされた補足拡張情報のコンテンツを使用するよう例えば構成し得る。
実施形態によれば、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、ビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するよう例えば構成し得る。装置は、ビデオデータストリームを入力ビットストリームとして受信するよう例えば構成し得る。さらに、装置は、サブビットストリームを取得するために入力ビットストリームを処理するよう例えば構成し得る。さらに、装置は、例えば、サブビットストリームを復号してビデオを復号するように構成され得る。
スケーラブルなネストSEIメッセージを使用して、ビットストリーム内のすべてのOLSのBP及びPT SEIメッセージを置き換えることができる場合、現在の最先端技術により、エンコーダはBP及びPTを複数のスケーラブルなネスティングSEIメッセージに分散できる。このようなビットストリームを処理するエクストラクタは、適切なスケーラブルなネストされたBP及びP SEIメッセージが見つかるまで、アクセスユニット内のすべてのスケーラブルなネストされたSEIメッセージ(OLSと繰り返しの量を考慮すると多くなる可能性がある)をスキャンする必要がある。
エンコーダが最初のスケーラブルにネストされたBP又はPTSEIメッセージをビットストリームのアクセスユニットに入れ、前記アクセスユニットの画像をエンコードする過程で、前記BP又はPT SEIメッセージパラメータの更新が必要であることに気付いた場合、別のBP又はPTSEIメッセージをビットストリームの前記アクセスユニットに書き込むと、エクストラクタは、前記アクセスユニットを抽象化するときビットストリーム内のアクセスユニットに配置された最新又は最も新規のBP又はPT SEIメッセージを使用するのを確実にする必要によって、順次重荷になる。
本発明は、上記の無意味なオプションを取り除く制約を課すことによって、抽出器の操作を単純化することである。
実施形態では、例えば、ネストの値が同じであるアクセスユニット内のすべてのスケーラブルなSEIメッセージ(すなわち、OLSを識別する識別子/インデックス)が同じコンテンツ(例えば、同じバッファリング期間情報及び/又は同じピクチャ/タイミング情報)を運ぶことは、ビットストリーム適合性の要件であり得る。これにより、OLSのBP及びPT SEIメッセージを1つのスケーラブルなネスティングSEIメッセージで見つけることができ、エクストラクタは、ターゲットのOLSでスケーラブルなネスティングSEIメッセージを見つけたら、必要なすべての情報を確実に取得できる。
実施形態では、例えば、識別子、例えばインデックス、OLSを識別、の値が同じであるアクセスユニット内のすべてのスケーラブルなネストされたSEIメッセージが同じコンテンツ(例えば、同じバッファリング期間情報及び/又は同じピクチャ/タイミング情報)を伝送することは、ビットストリーム適合性の要件であり得る。例えば、特定のアクセスユニットの場合、層とサブ層のセットに適用されるいずれかのPT SEIメッセージ(例えば、特定のOLSの場合)は、ペイロードが同じである必要がある(例えば、2つの別個のスケーラブルなネストSEIメッセージに含まれる2つのPT SEIメッセージの場合)。同じことがBPSEIメッセージとDUI SEIメッセージにも当てはまる。これにより、OLSのBP及びPT SEIメッセージを1つのスケーラブルなネスティングSEIメッセージで見つけることができ、エクストラクタは、ターゲットのOLSでスケーラブルなネスティングSEIメッセージを見つけたら、必要なすべての情報を確実に取得できる。
実施形態では、例えば、識別子、例えばインデックス、OLSの識別、の値が同じであるアクセスユニット内のすべてのスケーラブルなネストされたSEIメッセージが同じコンテンツ(例えば、同じバッファリング期間情報及び/又は同じピクチャ/タイミング情報)を伝送することは、ビットストリーム適合性の要件であり得る。例えば、同じOLSに適用される2つのスケーラブルにネストされたPT SEIメッセージを伝送するビットストリーム内の特定のアクセスユニットの場合、これら2つのスケーラブルにネストされたPT SEIメッセージのペイロードは等しく、エクストラクタは確かに、ターゲットのOLSでスケーラブルなネストSEIメッセージが見つかると、必要なすべての情報が得られる。
実施形態では、例えば、識別子、例えばインデックス、OLSを識別、の値が同じであるアクセスユニット内のすべてのスケーラブルなネストされたSEIメッセージが同じコンテンツ(例えば、同じバッファリング期間情報及び/又は同じピクチャ/タイミング情報)を伝送することは、ビットストリーム適合性の要件であり得る。例えば、OLSのBP及びPT SEIメッセージを1つのスケーラブルなネスティングSEIメッセージで見つけることができ、エクストラクタは、ターゲットのOLSでスケーラブルなネスティングSEIメッセージを見つけたら、必要なすべての情報を確実に取得できる。
実施形態によれば、例えば、OLSに適用可能なBP及びPT SEIメッセージが、他のいずれかのスケーラブルなネスティングSEIメッセージNALユニットなしで、OLSに適用できず、2つのスケーラブルなネスティングSEIメッセージ内に入ることが、ビットストリーム適合の要件であり得る。
以下では、低遅延とDUタイミングの時間的スケーラビリティについて説明する。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデータストリームは、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含む、又は、ビデオデータストリームは、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含む。
実施形態によれば、サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する。
実施形態で、復号ユニット除去時間は、アクセスユニットの除去時間及び前記拡散係数に依存する。
実施形態によれば、ビデオデータストリームは、時間的距離を含み、時間的距離は、導出されたクロックサブティック値で乗算され、前記導出されたクロックサブティック値は、前記拡散係数を使用して導出可能である。
実施形態にて、前記複数の拡散係数のそれぞれは、複数のサブ層のサブ層に割り当てられる。ビデオデータストリームは、例えば複数のアクセスユニットを例えば含み得る。
クロックサブティック値はクロックティックに依存し、さらに前記拡散に依存する。
クロックサブティック値が、次のように定義される:
ClockSubTick=
= ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
ClockSubTickはクロックサブティック値であり、Clock Tickはクロックティックであり、tick_divisor_minus2は追加のティック除数であり、tick_divisor_factor_minus1[HTidU+00A0]はビデオデータストリーム。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームがビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むよう、ビデオデータストリームを生成する、又は、ビデオエンコーダは、ビデオデータストリームがビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含むように、ビデオデータストリームを生成するようにする。
実施形態によれば、サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する。
実施形態では、ビデオエンコーダは、復号ユニットと除去時間がアクセスユニットの除去時間及び前記拡散係数に依存するように前記ビデオデータストリームを発生させるよう例えば構成できる。
実施形態によれば、ビデオデータストリームは、時間的距離を例えば含み得、時間的距離は、導出されたクロックサブティック値で乗算され、前記導出されたクロックサブティック値は、前記拡散係数を使用して導出可能である。
実施形態にて、複数の拡散係数のそれぞれは、複数のサブ層のサブ層に割り当てられる。ビデオエンコーダは、例えば、ビデオデータストリームが例えば複数の拡散係数を含み得るようにビデオデータストリームを生成するように構成され得る。
クロックサブティック値はクロックティックに依存し、さらに前記拡散に依存する。
クロックサブティック値が、次のように定義される:
ClockSubTick=
= ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
ClockSubTickはクロックサブティック値であり、Clock Tickはクロックティックであり、tick_divisor_minus2は追加のティック除数であり、tick_divisor_factor_minus1[HTidU+00A0]はビデオデータストリームである。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有るように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、サブ層についてサブ層固有のフレームレート情報を含むようにビデオデータストリームを生成する、及び/又はビデオエンコーダは、ビデオデータストリームが、サブ層についてサブ層固有のフレーム表示時間情報を含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、ビデオデータストリームがその中に符号化されるビデオを有するビデオデコーダ。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオデータストリームは、ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含み、ビデオデコーダは、拡散係数を使用してビデオをデコードするものであるか、ビデオデータストリームは、ビデオデータストリームのサブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含み、ビデオデコーダがクロックサブティック値を使用してビデオを復号する。
実施形態によれば、サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する。
実施形態で、復号ユニット除去時間は、アクセスユニットの除去時間及び拡散係数に依存する、請求項142又は143に記載のビデオデコーダ。
実施形態では、ビデオデータストリームは、例えば、時間的距離を含み得る。ビデオデコーダは、時間的距離に、導出されたクロックサブティック値を乗算するよう例えば構成し得る。ビデオデコーダは、拡散係数を使用して、導出されたクロックサブティック値を導出するよう例えば構成し得る。
実施形態では、拡散係数は、複数の拡散係数のうちの1つである。複数の拡散係数のそれぞれは、複数のサブ層のサブ層に例えば割り当てられ得る。ビデオデータストリームは、例えば複数のアクセスユニットを例えば含み得る。ビデオデコーダは、複数の拡散係数を使用して前記ビデオを復号するよう例えば構成し得る。
実施形態では、クロックサブティック値はクロックティックに依存し、さらに拡散係数に依存する。
実施形態ではクロックサブティック値が、次のように定義される:
ClockSubTick=
= ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
ClockSubTickはクロックサブティック値であり、Clock Tickはクロックティックであり、tick_divisor_minus2は追加のティック除数であり、tick_divisor_factor_minus1[HTidU+00A0]はビデオデータストリーム。
さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオデータストリームは、サブ層のサブ層固有のフレームレート情報を含み、及び/又はビデオデータストリームはサブ層に対するサブ層固有のフレーム表示期間情報を含む。デコーダは、サブ層のサブ層固有フレームレート情報を使用して、及び/又はサブ層固有のフレーム表示期間情報を使用して、拡散係数を決定するものである。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、またビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のような装置を含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化する。ビデオデコーダは、ビデオデータストリームを受信して、ビデオデータストリームをビデオに復号するものである。
時間のサブ層を削除すると、下位の時間のサブ層の残りのアクセスユニットの削除時間が変更される。特に、フレームの並べ替えがある場合はそうである。ただし、低遅延構成では、特にDUタイミングが提供される場合、除去時間は非常に構造化された方法で変更される、つまり、結果としてデコード時間が時間の経過とともにスケーリング又は拡がるように変更される。図4は、アクセスユニットごとに3つのDUがある場合の問題を示している。
ビットストリーム全体がデコードされるときのAUの最終的なデコード時間は、そのサブストリームのみの場合とは異なるため、超低遅延の特性が失われることに留意されたい。通常、これは様々なデコード機能の結果である、つまり、60 fpsをデコードできるデコーダは1/60秒でフレームを処理できるが、30fpsをデコードできるデコーダは1/30秒でしかフレームを処理できない。
DUの削除時間は、AUの削除時間のデルタとして示されていることに留意されたい。deltaTimeは、画像タイミングSEIメッセージ又はDecoding Unit Information SEIメッセージでクロックサブティックの数で通知される。このdeltaTimeは、AUの削除時間と比較したDUの削除時間を示している。CPBからのDU除去時間(AU除去時間と比較したdeltaTimesとして)を示すために複数の時間サブ層にループを設定する代わりに、拡散係数を導出できる。一実施形態では、拡散係数は、サブ層固有のフレームレート情報(例えば、サブ層T0 30fps、サブ層L1 60fps)又はサブ層固有のフレーム表示期間(以下のセクション6で説明されるFrameTimeInterval、例えば、サブ層L01/30s及びサブ層L11/ 60s)、例えば2つのそのようなサブ層のそのような情報の比率に応じてから導出される。
あるいは、そのような拡散係数を示すことができる。この実施形態は、拡散係数を示すDU除去時間の情報を追加して、対応するDU時間をAU除去時間へのデルタとして計算するものである。
又は、次のいずれかに示されているようにする:
Figure 2023506879000004
又は、代替の実施形態として、以下を行う:
Figure 2023506879000005
HRD仕様の関連変数ClockSubTickの派生は、次のように変更される。
変数ClockSubTickは次のように導出され、クロックサブティックと呼ばれる。
lockSubTick=ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 ) (C-2)
次に、deltaTimeは、ビットストリームに存在する最上位のサブ層に応じて大きい又は小さいClockSubTickを使用している。
あるいは、構文要素tick_divisor_minus2をサブ層ごとに複製して、最高時間サブ層(HTid)がそれぞれのサブ層と等しく設定されている場合に正しいティック除数を示すこともできる。その場合、拡散係数はないが、複数のClockSubTicksが通知され、それぞれがビットストリームに存在する最上位のサブ層の異なる値に対して送信されるため、サブ層が元のビットストリームから削除されると、使用されるClockSubTickは異なるものになる。
以下では、共通のDUタイミングを使用した場合のOLS抽出との関連性について説明する。
ビットストリームにOLS及び共通のDUタイミング(共通のDUタイミングを含む非スケーラブルなネストされたPT SEIメッセージ)に固有の抽出可能なサブバイストリームが含まれる場合、ビットレートのオーバーヘッドと処理の複雑さの観点から、代わりとしてスケーラブルなネストされたPT SEIメッセージを提供する代わりに、上記の表示(use_orig_pic_timing_flagとsame_pic_timing_within_ols_flag)に対する比較という様式で、これらのPT SEIメッセージを再利用することが望ましい。
図5は、2つの層が上に示され、両方の層のAUとDUの除去時間が、完全なビットストリーム(例えば、0番目のOLS)と層ID L0(例えば、1番目のOLS)で抽出された単一層について下に示されている図である。
この場合、一般的なタイミングは、tick_divisor_factor_minus1[]又は調整されたティック除数の絶対表示によって上記と同じ方法でスケーリングする必要がある(図のDU時間の広がりを参照)。したがって、一実施形態では、VPS内の各OLS固有のHRDパラメータ構文構造は、共通のDU除去タイミングをスケーリングするために、前記相対係数又はティック除数の絶対値のいずれかを伝送する。
ただし、この使用のシナリオでは、AUにはL0とL1の両方の画像が含まれているため、AUあたりのDUの数は抽出によって変化する。これは、抽出後に残っているDUの正しい数を導出するために、態様6で後述する態様も必要であることを意味する。
以下では、共通のDUタイミングを使用した場合のサブピクチャ抽出との関連性について説明する。
ビットストリームにサブピクチャ(動き補償予測のためのサブピクチャ境界処理が有効)及び共通のDUタイミング(共通のタイミングを含む非スケーラブルなネストされたPT SEIメッセージ)に固有の抽出可能なサブバイストリームが含まれる場合、ビットレートのオーバーヘッドと処理の複雑さの観点から、代わりとしてスケーラブルなネストされたPT SEIメッセージを提供する代わりに、上記の表示(use_orig_pic_timing_flagとsame_pic_timing_within_ols_flag)に対する比較という様式で、これらのSEIメッセージを再利用することが同様に望ましい。
この場合、共通のタイミングは、抽出後に残っているDUの正しい数を導き出すべくtick_divisor_factor_minus1[]又は調整されたティック除数の絶対表示によって上記と同じ方法でスケーリングする必要がある(図のDU時間の広がりを参照)。したがって、一実施形態では、VPS/SPS内のサブピクチャ固有のHRDパラメータ構文構造は、共通のDU除去タイミングをスケーリングするために、前記相対係数又はティック除数の絶対値のいずれかを伝送する。
あるいは、SEIメッセージ(例えば、サブピクチャレベル情報SEIメッセージ)は、抽出されたサブビットストリーム内のHRDパラメータを適切に導出することができるように、スケーリング情報又は絶対値を伝送する。
以下では、サブピクチャのCPB/ビットレートサイズの導出について説明する。
実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダが提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、現在のコード化されたピクチャバッファサイズ情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのコード化されたピクチャバッファサイズを推定する。
実施形態によれば、ビデオデータストリームは、参照レベルのシグナリングされたコード化されたピクチャバッファサイズを含み得る。
実施形態では、現在のレベルが参照レベルと等しい場合、前記ビデオデコーダは、前記参照レベルの前記コード化されたピクチャバッファサイズを使用して前記コード化されたピクチャバッファサイズを決定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、ビデオデータストリームの構文要素cpb_size_value_minus1[i][j]に応じてコード化されたピクチャバッファサイズを推定するよう例えば構成し得る。
実施形態では、ビデオデコーダは、ビデオデータストリームの構文要素cpb_size_scaleに応じてコード化されたピクチャバッファサイズを推定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、例えば、ビデオ符号化層の符号化ピクチャバッファサイズであるサブピクチャの符号化ピクチャバッファサイズを推定するように構成され得、例えば、サブピクチャは、ネットワーク抽象化レイヤーでコード化されたピクチャバッファサイズでさらにコード化されたピクチャバッファサイズを推定できる。
実施形態では、ビデオデコーダは、参照レベルの断片の値に応じて、ビデオコーディング層コード化ピクチャバッファサイズ及び/又はネットワーク抽象化層コード化ピクチャバッファサイズを推定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、以下によるビデオコーディング層コード化ピクチャバッファサイズを推定するよう例えば構成し得る:
SubPicCbpSizeVcl[s]=
= Floor(( cpb_size_value_minus1[i][j]+ 1 )
* 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)
前記装置は、以下による前記ネットワーク抽象化層コード化ピクチャバッファサイズを推定するよう例えば構成し得る:
SubPicCbpSizeNal[s]=
= Floor(( cpb_size_value_minus1[i][j]+ 1 )
* 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)、
RefLevelFractionは、前記参照レベルの断片の値である。
実施形態では、ビデオデコーダは、以下によるビデオコーディング層コード化ピクチャバッファサイズを推定するよう例えば構成し得る:
SubpicCpbSizeVcl[i][j][k]=
Floor(CpbVclFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
SubpicCpbSizeNal[i][j][k]=Floor(CpbNalFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
iとjとkはインデックスであり、OlsRefLevelFraction[i][j][k]は実数である。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダが提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、現在コード化されているビデオシーケンスのビットレート情報を示すビデオデータストリーム内の情報に応じて、サブピクチャのビットレートを推定するものである。
実施形態によれば、ビデオデータストリームは、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるべきであるかを示す表示を例えば含み得る。ビデオデータストリームの表示が、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されることを示している場合、ビデオデコーダは、現在コード化されているビデオシーケンスのビットレート情報を使用してビットレートを推定する。ビデオデータストリームの表示が、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用せずに推定されることを示している場合、ビデオデコーダは、現在コード化されているビデオシーケンスのビットレート情報を使用せずに事前定義された値又は最悪の場合の値を使用してビットレートを推定する。
実施形態において、現在コード化されているビデオシーケンスのビットレート情報は、参照レベルのシグナリングされたビットレートである。ビデオデータストリームは、参照レベルのシグナリングされたビットレートを例えば含み得る。現在のレベルが参照レベルと等しい場合、ビデオデコーダは、参照レベルの前記シグナリングされたビットレートを使用してサブピクチャのビットレートを決定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、ビデオデータストリームの構文要素bit_rate_value_minus1[i][j]に応じてサブピクチャのビットレートを推定するよう例えば構成し得る。
実施形態では、ビデオデコーダは、ビデオデータストリームの構文要素bit_rate_scaleに応じてビットレートを推定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、例えば、ビデオ符号化層の符号化ピクチャバッファサイズであるサブピクチャの符号化ピクチャバッファサイズを推定するように構成され得、例えば、サブピクチャは、ネットワーク抽象化レイヤーでコード化されたピクチャバッファサイズでさらにコード化されたピクチャバッファサイズを推定できる。
実施形態では、ビデオデコーダは、参照レベルの断片の値に応じて、ビデオコーディング層コード化ピクチャバッファサイズ及び/又はネットワーク抽象化層コード化ピクチャバッファサイズを推定するよう例えば構成し得る。
実施形態によれば、ビデオデコーダは、以下によりサブピクチャのビデオコーディング層ビットレートを推定するよう例えば構成し得る:
SubPicBitRateVcl[s]=
= Floor(( bit_rate_value_minus1[i][j]+1 ) * 2(6 + bit_rate_scale) *RefLevelFraction[i][j]÷256)
装置は、以下によりサブピクチャのネットワーク抽象化層ビットレートを推定するよう例えば構成し得る:
SubPicBitRateNal[s]=
= Floor(( bit_rate_value_minus1[i][j]+1 ) * 2(6 + bit_rate_scale) *RefLevelFraction[i][j]÷256)
RefLevelFractionは、参照レベルの断片の値である。
実施形態では、ビデオデコーダは、以下によりサブピクチャのビデオコーディング層ビットレートを推定するよう例えば構成し得る:
SubpicBitRateVcl[i][j][k]=Floor(CpbVclFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
SubpicBitRateNal[i][j][k]=Floor(CpbNalFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
iとjとkはインデックスであり、OlsRefLevelFraction[i][j][k]は実数である。
実施形態では、iは、例えば、特定の示された参照レベルのインデックスを示し得、jは、例えば、ビデオデータストリームのアクセスユニットのピクチャの特定のサブピクチャのインデックスを示し得、kは、例えば、ビデオデータストリームに含まれる、及び/又はビデオデコーダが動作する最大時間サブ層のインデックスを示し得る。
実施形態によれば、OlsRefLevelFraction[i][j][k]は、変数sli_non_subpic_layers_fraction[i][k]に例えば依存し得、これはHtidがkに等しい場合、sps_num_subpics_minus1が0に等しいtargetCvssの層に関連付けられたビットストリームレベル制限のi番目の部分を示している。
実施形態において、
vps_max_layers_minus1が0に等しい場合、又はビットストリーム内にsps_num_subpics_minus1が0に等しい層がない場合、
例えばsli_non_subpic_layers_fraction[i][k]は0であり、
kがsli_max_sublayers_minus1未満で、sli_non_subpic_layers_fraction [i][k]が存在しない場合、
例えばsli_non_subpic_layers_fraction[i][k]= sli_non_subpic_layers_fraction[i][k+1]。
実施形態によれば、例えば、
OlsRefLevelFraction[i][j][k]=
=sli_non_subpic_layers_fraction[i][k]+ ( n - sli_non_subpic_layers_fraction[i][k]) ÷ n
* (sli_ref_level_fraction_minus1[i][j][k]+ 1).
式中、nは正の整数を示す。
実施形態によれば、例えば、n=256;又はn=128;又はn=512;又はn=1024;又はn=2048;又はn=4096である。
実施形態によれば、i、j、及びkは、sli_ref_level_fraction_minus1に応じて定義され、サブ層インデックスと見なされるHtidがkに等しい場合にsps_num_subpics_minus1が0より大きいtargetCvssのレイヤーのサブピクチャインデックスがjに等しいサブピクチャの場合に、sli_ref_level_fraction_minus1[i][j][k]プラス1は、sli_ref_level_idc[i][k]に関連付けられたレベル制限のi番目の部分を指定する。
さらに、実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデコーダは、ビデオデータストリームを復号して前記ビデオを復号するものである。ビデオをデコードするために、ビデオデコーダは、ビデオデータストリーム内で符号化されているサブピクチャのコード化されたピクチャバッファサイズを受信し、ビデオをデコードするためにサブピクチャのコード化されたピクチャバッファサイズを使用し、及び/又はビデオをデコードし、ビデオデコーダは、ビデオデータストリーム内で符号化されているサブピクチャのビットレートを受信し、サブピクチャのビットレートを使用してビデオをデコードする。
実施形態によれば、ビデオデータストリームは、サブピクチャのコード化されているピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化されているピクチャバッファサイズが推定されるべきかどうかを示す表示を例えば含み得る。ビデオデータストリームの表示は、サブピクチャのコード化ピクチャバッファサイズが推定されるべきだということを示している場合、ビデオデコーダは、サブピクチャのコード化ピクチャバッファサイズを推定する。ビデオデータストリームの表示が、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内に符号化されていると示している場合、ビデオデコーダは、ビデオデータストリーム内に符号化されるサブピクチャのコード化ピクチャバッファサイズを使用する。
実施形態において、ビデオデータストリームは、サブピクチャのビットレートがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのビットレートが推定されるべきかどうかを示す表示を例えば含み得る。ビデオデータストリームの表示が、サブピクチャのビットレートが推定されるべきだということを示している場合、ビデオデコーダは、サブピクチャのビットレートを推定する。ビデオデータストリームの表示が、サブピクチャのビットレートがビデオデータストリーム内に符号化されていると示している場合、ビデオデコーダは、ビデオデータストリーム内に符号化される、サブピクチャのコード化ピクチャバッファサイズを使用する。
実施形態によれば、複数の抽出可能なサブビットストリームのそれぞれは、出力層セットに固有であり、サブピクチャは、複数の抽出可能なサブビットストリームのうちの少なくとも1つの抽出可能なサブビットストリームに割り当てられる。ビデオデータストリームが共通の復号ユニット除去タイミング情報及び複数の抽出可能なサブバイストリームを例えば含み得る場合、ビデオパラメータセット又はシーケンスパラメータセット又はビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有仮説参照デコーダパラメータの構文分析は、共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを例えば含み得る。ビデオデコーダは、拡散係数又はティック除数の前記絶対値を処理するよう例えば構成し得る。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを例えば含むことができる。又は、ビデオデータストリームは構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを例えば含むことができる。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むよう、及び/又はビデオデータストリームがサブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるかどうかを示す表示を生成することを含む。
実施形態によれば、現在のコード化ピクチャバッファサイズ情報は、参照レベルの信号化されたコード化ピクチャバッファサイズであり、ビデオデータストリームは、例えば、参照レベルの信号化されたコード化ピクチャバッファサイズを含み得、及び/又は現在コード化されているビデオシーケンスのビットレート情報は、参照レベルの信号ビットレートであり、ビデオデータストリームは、例えば、参照レベルの信号ビットレートを含み得る。
さらに、実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むように、及び/又は、ビデオデータストリームは、サブピクチャのビットレートがビデオデータストリーム内に符号化されているかどうか、又はサブピクチャのビットレートを推定する必要があるかどうかを示す表示を含む。
実施形態によれば、複数の抽出可能なサブビットストリームのそれぞれは、出力層セットに固有であり、サブピクチャは、複数の抽出可能なサブビットストリームのうちの少なくとも1つの抽出可能なサブビットストリームに割り当てられる。ビデオデータストリームが共通の復号ユニット除去タイミング情報及び複数の抽出可能なサブバイストリームを例えば含み得る場合、ビデオパラメータセット又はシーケンスパラメータセット又はビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有仮説参照デコーダパラメータの構文分析は、共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを例えば含み得る。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオデータストリームは構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを例えば含むことができる。又は、ビデオエンコーダは、ビデオデータストリームが、構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームは、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むようビデオデータストリームを生成し、及び/又はビデオエンコーダは、ビデオデータストリームがサブピクチャのビットレートが現在コード化されているビデオシーケンスビットレート情報を使用して推定されるかどうかを示す表示を生成することを含むよう、ビデオデータストリームを生成する。
実施形態によれば、ビデオエンコーダは、現在のコード化ピクチャバッファサイズ情報が、参照レベルの信号化されたコード化ピクチャバッファサイズであり、ビデオデータストリームが、例えば、参照レベルの信号化されたコード化ピクチャバッファサイズを例えば含み得るようビデオデータストリームを生成するよう例えば構成し得、及び/又は、ビデオエンコーダは、現在コード化されているビデオシーケンスのビットレート情報が参照レベルの信号ビットレートであり、ビデオデータストリームが、例えば、参照レベルの信号ビットレートを含み得るようビデオデータストリームを生成するよう例えば構成し得る。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズがビデオデータストリーム内にエンコードされているかどうか、又はサブピクチャのコード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むようにビデオデータストリームを生成する、及び/又は、ビデオエンコーダは、ビデオデータストリームが、サブピクチャのビットレートがビデオデータストリーム内に符号化されているかどうか、又はサブピクチャのビットレートを推定する必要があるかどうかを示す表示を含むようにビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが共通の復号ユニット除去タイミング情報及び複数の抽出可能なサブバイストリームを含む場合、複数のサブビットストリームのそれぞれは、出力層セットに固有で、ビデオパラメータセット又はシーケンスパラメータセット又はビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有の仮説参照デコーダパラメータの構文分析は、共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを含むように、ビデオデータストリームを生成する。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、またビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のようなビデオデコーダを含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するよう例えば構成し得る。ビデオデコーダは、ビデオデータストリームを受信して、ビデオデータストリームをビデオに復号するよう復号するものである。
現在のVVCドラフト仕様には、サブピクチャのレベル情報とサブピクチャセットのレベルの推定に役立つ追加情報を示すSEIメッセージが含まれている。これを実現する方法は、サブピクチャが特定の信号参照レベルに寄与する部分を信号で送ることである。各サブピクチャのレベルの割合に基づいて、変数CPBsizeとビットレート、及びその後のサブピクチャのビットストリームのレベルが概算される。また、累積レベルの割合は、サブピクチャのセットで構成されるビットストリームのCBPサイズとビットレートを導き出し、またそれらのレベルを概算するためにも使用される。ただし、これらすべての派生では、参照レベルのMaxCPBSize及び/又はMaxBitrateが使用され、ほとんどのビットストリームが特定のレベルのMaxCPBSize及び/又はMaxBitrateまでのCPB及びビットレートバジェットを完全に占有しない可能性があるため、問題である。これらの値を使用して、サブピクチャビットストリーム又はサブピクチャセットビットストリームのマージされたビットストリームのレベルを概算すると、(累積された)CPBサイズとビットレートが過剰にプロビジョニングされる可能性が高くなる。
VVCドラフト仕様には、変数SubPicCpbSizeVcl [i][j]とSubPicCpbSizeNal[i][j]の派生が含まれ、次のようになる:
SubPicCpbSizeVcl[i][j]=Floor(CpbVclFactor*MaxCPB*RefLevelFraction[i][j]÷256)
SubPicCpbSizeNal[i][j]=Floor(CpbNalFactor*MaxCPB*RefLevelFraction[i][j]÷256)
すべてのサブピクチャを含む元のビットストリームは、ビットストリームのレベルから参照によって導出されたそれぞれの最大値の情報だけでなく、ビットストリームの正確なCPBサイズとビットレート(cpb_size_value_minus1とcpb_size_scale)に関するより正確な情報をすでに持っている可能性があるためである。したがって、本発明の目的は、サブピクチャあたりのCBPサイズ及びビットレートのそれぞれの値について、はるかに正確な値を導き出し、サブピクチャセットレベルでの近似に使用することができるようにすることである。さらなる実施形態では、サブピクチャCPBは次のように導出される;
SubPicCbpSizeVcl[s]=
Floor(( cpb_size_value_minus1[i][j]+ 1 ) * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)
SubPicCbpSizeNal[s]
= Floor(( cpb_size_value_minus1[i][j]+ 1 ) * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)
構文要素cpb_size_value_minus1[i][j]は、Vcl及びNal HRDパラメータに対して個別に送信され、上記の導出でそれぞれ使用されることに留意されたい。したがって、SubPicCbpSizeVcl[s]とSubPicCbpSizeVcl[s]の値は、潜在的に異なる値に由来する。
CPBサイズは特定のレベルに対して通知されるため、上記の導出は、そのレベルが参照レベルとして含まれている場合にのみ実行できる。
ビットレートの場合、それぞれの導出は、以下のように最大ビットレートを参照として使用することから変更され(Be [Vcl / Nal]Factor * May BE)、
SubPicBitRateVcl[s]= Floor( BrVclFactor * MaxBR *RefLevelFraction[i][j]÷256)
SubPicBitRateNal[s]= Floor( BrNalFactor * MaxBR *RefLevelFraction[i][j]÷256)
シグナリングされたビットストリームの実際のビットレートを使用するものに至り ((bit_rate_value_minus1[i][j]+1) * 2(6 + bit_rate_scale) 、以下に挙げる
SubPicBitRateVcl[s]
= Floor(( bit_rate_value_minus1[i][j]+1 ) * 2(6 + bit_rate_scale) *RefLevelFraction[i][j]÷256)
SubPicBitRateNal[s]
= Floor(( bit_rate_value_minus1[i][j]+1 ) * 2(6 + bit_rate_scale) *RefLevelFraction[i][j]÷256)
CPBサイズについて上記と同じことがここで当てはまることと、構文要素bit_rate_value_minus1[i][j]の値はNal又はVcl HRDのどちらが考慮されるかに依存し、そのため、SubBitRateVcl[s]とSubPicBitrateVcl[s]の値は潜在的に異なる値に派生することに留意されたい。
実施形態では、変数SubpicCpbSizeVcl[i][j][k]and SubpicCpbSizeNal[i][j][k]は次のように導出される:
SubpicCpbSizeVcl[i][j][k]=Floor(CpbVclFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
SubpicCpbSizeNal[i][j][k]=Floor(CpbNalFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
sli_ref_level_idc[i][k]からMaxCPBが導出される実施形態では、変数SubpicCpbSizeVcl[i][j][k]とSubpicCpbSizeNal[i][j][k]は次のように導出される:
SubpicBitRateVcl[i][j][k]=Floor(CpbVclFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
SubpicBitRateNal[i][j][k]=Floor(CpbNalFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
例えば、変数OlsRefLevelFraction[i][j][k]は数、例えば、実数である。
例えば、変数OlsRefLevelFraction[i][j][k]は、例えば、以下に応じて導出され得る sli_non_subpic_layers_fraction[i][k]+ ( n - sli_non_subpic_layers_fraction[i][k]) ÷ n * (sli_ref_level_fraction_minus1[i][j][k]+ 1)
式中、nは正の整数を示し、例えば、n=256;又は、例えば、n=128;又は、例えば、n=512;又は、例えば、n=1024;又は、例えば、n=2048;又は、例えば、n=4096である。
そのため、例えば
OlsRefLevelFraction[i][j][k]= =sli_non_subpic_layers_fraction[i][k]+ ( 256 - sli_non_subpic_layers_fraction[i][k]) ÷ 256 * (sli_ref_level_fraction_minus1[i][j][k]+ 1)。
sli_non_subpic_layers_fraction[i][k]は、例えばHtidがkに等しい場合に、sps_num_subpics_minus1が0に等しいtargetCvssの層に関連付けられたビットストリームレベル制限のi番目の部分を示し得る。vps_max_layers_minus1が0に等しい場合、又はビットストリーム内のどのレイヤーもsps_num_subpics_minus1が0に等しくない場合、sli_non_subpic_layers_fraction[i][k]0に等しくなる。kがsli_max_sublayers_minus1未満でsli_non_subpic_layers_fraction[i][k]が存在しないとき、sli_non_subpic_layers_fraction[i][k+1]に等しいと推測され、sli_ref_level_fraction_minus1[i][j][k]plus 1はレベル制限のi番目の部分を指定し、sli_ref_level_idc[i][k]に関わり、サブピクチャに対して、Htidがkに等しい場合、sps_num_subpics_minus1が0より大きいtargetCvssのレイヤーのサブピクチャインデックスがjに等しい。kがsli_max_sublayers_minus1より小さく、sli_ref_level_fraction_minus1[i][j][k]が存在しないとき、sli_ref_level_fraction_minus1[i][j][k+1]に等しいと推測される。
あるいは、別の実施形態では、各サブピクチャのCPBサイズ及び/又はビットレートは、導出される代わりに直接信号で伝えることができる。又は、さらに、値を導出できるかどうか、又は値が明示的に通知されるかどうかを示すゲーティングフラグが存在し得る。
以下では、Picture Timing SEIのDUタイミングシグナリングについて説明する。
実施形態によれば、その中に符号化されたビデオを有するビデオデータストリームが提供される。ビデオデータストリームは、複数のアクセスユニットを含む。さらに、ビデオデータストリームは、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存する。
実施形態によれば、ビデオデータストリームは、例えば、ピクチャタイミング補足拡張情報を含み得る。ピクチャタイミング補足拡張情報は、前記アクセスユニットの2つ以上の復号ユニットのデルタ時間情報を例えば含むことができる。
実施形態において、デルタ時間情報は、前記アクセスユニットの2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示す。
実施形態によれば、前記アクセスユニットの2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの除去時間に等しい除去時間を有する。
実施形態では、前記アクセスユニットは、例えば、3つ以上の復号ユニットを含み得る。除去時間の差は、前記アクセスユニットの3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい。
実施形態では、ピクチャタイミング補足拡張情報は、ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである。
実施形態で、フレーム時間間隔は、ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされる。
実施形態で、フレーム時間間隔は、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能である。
実施形態で、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットは、1つのビデオ符号化層ネットワーク抽象化層ユニットを例えば含むことができる。
実施形態では、ピクチャタイミング補足拡張情報は、ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在する。
実施形態で、フレーム時間間隔は次のように導出できる:
(elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる。
実施形態で、ビデオデータストリームは、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を例えば含むことができる。
実施形態で、ビデオデータストリームは、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を含まない。
実施形態で、アクセスユニット内の復号ユニットの数は、フレーム時間間隔と共通の遅延増分に依存する。
実施形態で、ビデオデータストリームは、前記アクセスユニットの2つ以上の復号ユニットの復号ユニットの復号するユニット情報補足拡張情報メッセージを含む。前記復号ユニットの復号ユニット情報補足拡張情報メッセージは、前記復号ユニットのデルタ時間情報を例えば含むことができる。
実施形態では、ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを例えば含み得、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す。
さらに、実施形態によれば、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するためのビデオエンコーダが提供される。ビデオエンコーダは、ビデオデータストリームが複数のアクセスユニットを含むように、ビデオデータストリームを生成する。さらに、ビデオエンコーダは、ビデオデータストリームが、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存するように、ビデオデータストリームを生成する。
実施形態によれば、ビデオエンコーダは、例えば、ビデオデータストリームが例えばピクチャタイミング補足拡張情報を含み得るようにビデオデータストリームを生成するように構成され得る。ビデオエンコーダは、ピクチャタイミング補足拡張情報が、前記アクセスユニットの2つ以上の復号ユニットのデルタ時間情報を例えば含み得るよう、ビデオデータストリームを生成するように例えば構成し得る。
実施形態では、ビデオエンコーダは、デルタ時間情報が、前記アクセスユニットの2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示すように、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態によれば、前記アクセスユニットの2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの除去時間に等しい除去時間を有する。
実施形態で、ビデオエンコーダは、前記アクセスユニットが3つ以上の復号ユニットを例えば含み得るように、ビデオデータストリームを生成するよう例えば構成し得る。除去時間の差は、前記アクセスユニットの3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい。
実施形態では、ピクチャタイミング補足拡張情報は、ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである。
実施形態で、ビデオエンコーダは、フレーム時間間隔が、ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされるよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態によれば、ビデオエンコーダは、フレーム時間間隔が、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能であるよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態で、ビデオエンコーダは、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットが、1つのビデオ符号化層ネットワーク抽象化層ユニットを例えば含み得るよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態によれば、ビデオエンコーダは、ピクチャタイミング補足拡張情報が、ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在するよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態で、フレーム時間間隔は次のように導出できる:
(elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる。
実施形態で、ビデオエンコーダは、ビデオデータストリームが、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を例えば含み得るよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態で、ビデオエンコーダは、ビデオデータストリームが、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を含まないよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態によると、ビデオエンコーダは、アクセスユニット内の復号ユニットの数は、フレーム時間間隔と共通の遅延増分に依存するよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態で、ビデオエンコーダは、ビデオデータストリームが、前記アクセスユニットの2つ以上の復号ユニットの復号ユニットのユニット情報補足拡張情報メッセージを復号することを例えば含み得るよう、ビデオデータストリームを生成するよう例えば構成し得る。ビデオエンコーダは、前記復号ユニットの復号ユニット情報補足拡張情報メッセージが、前記復号ユニットの前記デルタ時間情報を例えば含み得るよう、ビデオデータストリームを生成するよう例えば構成し得る。
実施形態では、ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを例えば含み得、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す。
さらに、一実施形態によれば、ビデオデータストリームを入力ビットストリームとして受信するための方法が提供され、ビデオデータストリームがその中に符号化されるビデオを有する。ビデオデータストリームは、複数のアクセスユニットを含む。ビデオデコーダは、ビデオデータストリームを復号してビデオを復号するものである。さらに、ビデオデータストリームは、複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットのデルタ時間情報に依存し、ビデオデコーダは、前記アクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を使用してビデオデータストリームを復号する。
実施形態によれば、ビデオデータストリームは、例えば、ピクチャタイミング補足拡張情報を含み得る。ピクチャタイミング補足拡張情報は、前記アクセスユニットの2つ以上の復号ユニットのデルタ時間情報を例えば含むことができる。
実施形態で、デルタ時間情報が、前記アクセスユニットの2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示し、ビデオデコーダは、前記2つの復号ユニット間の除去時間の差を使用してビデオデータストリームを復号するよう例えば構成し得る。
実施形態によれば、前記アクセスユニットの2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの除去時間に等しい除去時間を有し、ビデオデコーダは、前記アクセスユニットの前記除去時間を使用して前記ビデオデータストリームを復号するよう例えば構成し得る。
実施形態では、前記アクセスユニットは、例えば、3つ以上の復号ユニットを含み得る。除去時間の差は、前記アクセスユニットの3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい。
実施形態では、ピクチャタイミング補足拡張情報は、ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである。
実施形態で、フレーム時間間隔は、ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされ、ビデオデコーダは、前記フレーム時間間隔を使用して前記ビデオデータストリームを復号するよう例えば構成し得る。
実施形態によれば、フレーム時間間隔は、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能であり、ビデオデコーダは、フレーム時間間隔を使用して前記ビデオデータストリームを復号するよう例えば構成し得る。
実施形態で、前記アクセスユニットの2つ以上の復号ユニットの各復号ユニットは、1つのビデオ符号化層ネットワーク抽象化層ユニットを例えば含むことができる。
実施形態では、ピクチャタイミング補足拡張情報は、ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在する。
実施形態では、ビデオデコーダは、例えば、以下に従ってフレーム時間間隔を導出するように構成され得る:(elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる。
実施形態によれば、ビデオデータストリームが、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を例えば含み得、ビデオデコーダは、表示を処理することによってビデオデータストリームをデコードするように例えば構成され得る。
実施形態で、ビデオデータストリームは、復号ユニットの数においてビデオデータストリームに対して可変であるかどうかを示す表示を含まない。
実施形態によれば、アクセスユニット内の復号ユニットの数は、フレーム時間間隔と共通の遅延増分に依存する。
実施形態で、ビデオデータストリームは、前記アクセスユニットの2つ以上の復号ユニットの復号ユニットの復号するユニット情報補足拡張情報メッセージを含むことができる。前記復号ユニットの復号ユニット情報補足拡張情報メッセージは、前記復号ユニットのデルタ時間情報を例えば含み得、ビデオデコーダは、前記復号ユニットの前記デルタ時間情報を使用してビデオデータストリームを復号するよう例えば構成し得る。
実施形態では、ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを例えば含み得、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す。
さらに、実施形態によれば、ビデオをビデオデータストリーム中に符号化するための、またビデオを復号するためのシステムが提供される。システムは、上記のようなビデオエンコーダ、及び上記のようなビデオデコーダを含む。ビデオエンコーダは、ビデオデータストリームがその中に符号化されたビデオを有するように、ビデオをビデオデータストリーム中に符号化するよう例えば構成し得る。ビデオデコーダは、ビデオデータストリームを受信して、ビデオデータストリームをビデオに復号するよう復号するよう例えば構成し得る。
前述のように、DUタイミングはAUタイミングのデルタとして与えられる。より具体的には、DUの除去時間は、特定のDUを含むAUの除去時間に関連する、PictureTimingSEIメッセージ又はDecoding Unit Information SEIメッセージのいずれかでデルタ時間を与えることによって示される。
情報が画像タイミングSEIメッセージに含まれている場合、シグナリングされる情報は2つのDU間の除去時間の差である。AUの最後のDUの除去時間は、AU除去時間の除去時間と同じであり、他のいずれかのDUは、次のDUへの除去時間の差として通知される。それをシグナリングするための2つのオプションがある(異なる色で強調表示される):
Figure 2023506879000006
それをシグナリングする最初の方法は、DUがすべてに共通する同じ除去時間の差がある場合である。2番目のケースは、AU内のDU間の除去時間の差が同じではない場合である。
DUタイミングが存在する場合のPicture Timing SEIメッセージの現在の構文は、サブビットストリームがビットストリームから抽出されるときにDUの数が変化する可能性があるため、本発明で説明する態様2の適用を妨げる。
原則として、CU間の共通の除去時間の差が同じである場合、DUの数が変更されても、ピクチャタイミングSEIメッセージが依然適用されるようにすることが可能である可能性がある。一実施形態では、PT SEIメッセージにモードがあり、PT SEIメッセージは、異なる数のDUが存在するサブビットストリームに適用される。DUの数は、他の構文要素から導出される。PT SEIメッセージは次のように変更される:
Figure 2023506879000007
du_not_constraint_flagが0に等しい場合、du_common_cpb_removal_delay_flagの値は1であると推測される。num_decoding_units_minus1の値は、FrameTimeIntervalを(du_common_cpb_removal_delay_increment_minus1 + 1)*ClockSubTicksで割った値から1を引いた値に等しいと推測される。
FrameTimeIntervalは、パラメータセット、SPSのHRDパラメータでシグナリングするか、最高の時間レベルでの2つの連続するアクセスユニットの削除時間の差として導出できる。
この場合、各DUに1つのVCL NALユニットが含まれるという追加の制約がある。
FrameTimeIntervalを明示的にシグナリングするのに、次のようにすることができる。
Figure 2023506879000008
min_pic_duration_within_cvs_present_flagは、一定のフレームレートがない場合にFrameTimeIntervalが存在することを示すSPS又はVPSのフラグである。これにより、フレームレートが一定の場合とフレームレートが一定でない場合の両方でFrameTimeIntervalを示すことができる。
2番目のケースでは、フレームレートが一定の場合にのみ、du_not_constraint_flagを1に設定できる。その場合、FrameTimeIntervalの値は、(elemental_duration_in_tc_minus1 [maxTiD]+1)にClockTicksを掛けたものとして導出される。
又は、次のように、それぞれの表示を共通のDUタイミングモードシグナリングとマージすることにより、追加のシグナリングフラグを省略できる。
Figure 2023506879000009
上記のAU内のDUの数の導出は、FrameTimeIntervalと共通の遅延増分(clock-sub-ticksの数で与えられた秒)に基づいていることに留意されたい。態様4では、clock-sub-ticksがビットストリームに存在する時間サブ層によって変化することにも留意されたい。DUの数は、最上位の時間層のclock-sub-ticksを使用して導出されるか、又は、態様4で説明した拡散係数もFrameTimeIntervalで考慮されるため、同じ結果が得られる。
いくつかの態様が装置の観点で説明されているが、これらの態様が対応する方法の説明も表すことが明らかであり、ブロック又はデバイスは方法ステップ、又は方法ステップの特徴に対応する。同様に、方法ステップの観点で説明された態様もまた、対応するブロックもしくは項目、又は対応する装置の特徴の説明を表す。いくつかの、又はすべての方法ステップは、例えば、マイクロプロセッサ、プログラマブルコンピュータ又は電子回路などのハードウェア装置によって(又はそれを使用して)実行され得る。いくつかの実施形態では、最も重要な方法ステップのうちの1つ以上はそのような装置によって実行され得る。
ある特定の実装要件に応じて、本発明の実施形態は、ハードウェア又はソフトウェア又は少なくとも部分的にハードウェア又は少なくとも部分的にソフトウェアに実装され得る。この実装は、電子的に可読な制御信号を有する、フロッピーディスク、DVD、Blu-Ray、CD、ROM、PROM、EPROM、EEPROM又はFLASHメモリなどのデジタル記憶媒体を使用して実行され得、これらの制御信号は、その上に格納され得、プログラム可能なコンピュータシステムと協働する(又は協働することができる)ことで、それぞれの方法が実行される。したがって、デジタル記憶媒体は、コンピュータ可読であり得る。
本発明による、いくつかの実施形態は、電子的に可読な制御信号を有するデータキャリアを含み、これらの制御信号がプログラム可能なコンピュータシステムと協働することができることで、本明細書に記載の方法のうちの1つが実行される。
概して、本発明の実施形態は、プログラムコードを有するコンピュータプログラム製品として実装され得、このプログラムコードは、コンピュータプログラム製品がコンピュータ上で実行するときに方法のうちの1つを実行するように動作可能である。プログラムコードは、例えば、機械可読キャリアに格納され得る。
他の実施形態は、本明細書に記載の方法のうちの1つを実行し、機械可読キャリアに格納される、コンピュータプログラムを含む。
換言すれば、本発明の方法の一実施形態は、したがって、コンピュータプログラムがコンピュータ上で実行するときに、本明細書に記載の方法のうちの1つを実行するためのプログラムコードを有するコンピュータプログラムである。
本発明の方法のさらなる実施形態は、したがって、データキャリア(又はデジタル記憶媒体、又はコンピュータ可読媒体)であり、このデータキャリアは、その上に記録される、本明細書に記載の方法のうちの1つを実行するためのコンピュータプログラムを含む。データキャリア、デジタル記憶媒体、又は記録された媒体は、通常、有形及び/又は非一時的である。
本発明の方法のさらなる実施形態は、したがって、本明細書に記載の方法のうちの1つを実行するためのコンピュータプログラムを表す、データストリーム又は信号シーケンスである。データストリーム又は信号シーケンスは、例えば、インターネットを介してなど、データ通信接続を介して転送されるように構成され得る。
さらなる実施形態は、例えば、本明細書に記載の方法のうちの1つを実行するように構成される、又は適合されるコンピュータ、又はプログラマブルロジックデバイスなどの処理手段を含む。
さらなる実施形態は、コンピュータを含み、その上には、本明細書に記載の方法のうちの1つを実行するためのコンピュータプログラムがインストールされている。
本発明による、さらなる実施形態は、本明細書に記載の方法のうちの1つを実行するためのコンピュータプログラムを受信器に転送する(例えば、電子的に、又は光学的に)ように構成される、装置又はシステムを含む。受信器は、例えば、コンピュータ、モバイルデバイス、メモリデバイスなどであってよい。装置又はシステムは、例えば、コンピュータプログラムを受信器に転送するためのファイルサーバを含み得る。
いくつかの実施形態では、プログラマブルロジックデバイス(例えば、フィールドプログラマブルゲートアレイ)は、本明細書に記載の方法の機能の一部又はすべてを実行するために使用され得る。いくつかの実施形態では、フィールドプログラマブルゲートアレイは、本明細書に記載の方法のうちの1つを実行するためにマイクロプロセッサと協働し得る。概して、方法は、いずれかのハードウェア装置によって好ましくは実行される。
本明細書に記載の装置は、ハードウェア装置を使用して、又はコンピュータを使用して、又はハードウェア装置及びコンピュータの組み合わせを使用して実装され得る。
本明細書に記載の方法は、ハードウェア装置を使用して、又はコンピュータを使用して、又はハードウェア装置及びコンピュータの組み合わせを使用して実行され得る。
上記の実施形態は、本発明の原理の例示に過ぎない。本明細書に記載の構成及び詳細の修正形態及び変形形態が当業者には明らかであろうことが理解される。したがって、本明細書の実施形態の記述及び説明として提示された具体的な詳細によってではなく、差し迫る特許請求の範囲によってのみ限定されることが意図される。
参考文献
[1] ISO/IEC, ITU-T. High efficiency video coding. ITU-T Recommendation H.265 | ISO/IEC 23008 10 (HEVC), edition 1, 2013;edition 2, 2014.

Claims (251)

  1. 中に符号化されたビデオを有するビデオデータストリームであって、
    1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージがビデオデータストリーム内に存在するかどうかを示す表示、を含む、前記ビデオデータストリーム。
  2. 前記表示がパラメータ設定フラグであり、
    前記ビデオデータストリームが、前記1つ以上の出力層セットのそれぞれのタイミング情報を含む前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを含む、請求項1に記載のビデオデータストリーム。
  3. 前記ビデオデータストリームのシーケンスパラメータセットは、前記パラメータセットフラグを含む、請求項2に記載のビデオデータストリーム。
  4. 前記パラメータ設定フラグはsps_ols_nest_timing_present_flagである、請求項3に記載のビデオデータストリーム。
  5. 前記ビデオデータストリームは、パラメータセットフラグを含むさらなる補足拡張情報メッセージを含み、
    前記パラメータセットフラグが、前記1つ以上の出力層セットのそれぞれの前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示す、請求項1に記載のビデオデータストリーム。
  6. 前記タイミング情報は、ピクチャタイミング情報とバッファリング周期情報及び復号ユニット情報のうちの少なくとも1つを含む、請求項1から5のいずれかに記載のビデオデータストリーム。
  7. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項1から6の一項に記載のビデオデータストリーム。
  8. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダが、前記ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示す表示を含むように、前記ビデオデータストリームを生成するものである、前記ビデオエンコーダ。
  9. 前記表示がパラメータ設定フラグであり、
    前記ビデオエンコーダが、前記ビデオデータストリームが、前記1つ以上の出力層セットのそれぞれのタイミング情報を含む前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを含むように、前記ビデオデータストリームを生成するものである、請求項8に記載のビデオエンコーダ。
  10. 前記ビデオエンコーダは、前記ビデオデータストリームのシーケンスパラメータセットが前記パラメータセットフラグを含むように、前記ビデオデータストリームを生成するものである、請求項9に記載のビデオエンコーダ。
  11. 前記ビデオエンコーダは、前記パラメータセットフラグがsps_ols_nest_timing_present_flagであるように前記ビデオデータストリームを生成するものである、請求項10に記載のビデオエンコーダ。
  12. 前記ビデオエンコーダは、前記ビデオデータストリームが、パラメータセットフラグを含むさらなる補足拡張情報メッセージを含むように、前記ビデオデータストリームを生成するものであり、
    前記ビデオエンコーダが、前記パラメータセットフラグが、前記1つ以上の出力層セットのそれぞれの前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示すように、前記ビデオデータストリームを生成するものである、請求項8に記載のビデオエンコーダ。
  13. 前記タイミング情報は、ピクチャタイミング情報とバッファリング周期情報及び復号ユニット情報のうちの少なくとも1つを含む、請求項8から12のいずれかに記載のビデオエンコーダ。
  14. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項8から13の一項に記載のビデオエンコーダ。
  15. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    表示が、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが前記ビデオデータストリーム内に存在するかどうかを示す、前記装置。
  16. 前記表示がパラメータ設定フラグであり、
    前記1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示すパラメータセットフラグを含む前記ビデオデータストリームを処理するものである、請求項15に記載の装置。
  17. 前記ビデオデータストリームのシーケンスパラメータセットは、前記パラメータセットフラグを含む、請求項16に記載の装置。
  18. 前記パラメータ設定フラグはsps_ols_nest_timing_present_flagである、請求項17に記載の装置。
  19. 前記ビデオデータストリームは、パラメータセットフラグを含むさらなる補足拡張情報メッセージを含み、
    前記パラメータセットフラグが、前記1つ以上の出力層セットのそれぞれの前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示し、
    前記装置が、前記さらなる補足拡張情報メッセージを処理する、請求項15に記載の装置。
  20. タイミング情報は、ピクチャタイミング情報とバッファリング周期情報及び復号ユニット情報のうちの少なくとも1つを含む、請求項15から19の一項に記載の装置。
  21. 前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在する前記1つ以上の出力層セットのそれぞれのピクチャタイミング情報を含むタイミング情報を含む場合、前記装置は、非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのピクチャタイミング情報を代用するものであり、
    前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在する前記1つ以上の出力層セットのそれぞれのバッファリング周期情報を含むタイミング情報を含む場合、前記装置は、非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージのバッファリング周期情報を代用するものであり、
    前記1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在する前記1つ以上の出力層セットのそれぞれの復号ユニット情報を含むタイミング情報を含む場合、前記装置は、非スケーラブルなネストされた復号ユニット補足拡張情報メッセージの復号ユニット情報を代用するものである、請求項15から20のいずれか一項に記載の装置。
  22. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項15から21の一項に記載の装置。
  23. 前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、請求項15から22の一項に記載の装置。
  24. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項8から14に記載のビデオエンコーダ、及び
    請求項23に記載の装置、を含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信するものであり、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、前記システム。
  25. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記ビデオデータストリームが、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが、前記ビデオデータストリーム内に存在するかどうかを示す表示を含むように、前記ビデオデータストリームを生成することを含む、前記方法。
  26. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームを処理することを含み、
    前記表示が、1つ以上の出力層セットのそれぞれのタイミング情報を含む1つ以上のスケーラブルなネストされた補足拡張情報メッセージが前記ビデオデータストリーム内に存在するかどうかを示す、前記方法。
  27. コンピュータ又はシグナルプロセッサで実行されるときに請求項25又は26の方法を実装するためのコンピュータプログラム。
  28. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す、前記ビデオデータストリーム。
  29. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、これは、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用されることを示す、請求項28に記載のビデオデータストリーム。
  30. 前記表示がフラグであり、
    前記1つ以上の前記非スケーラブルなネストされた補足拡張情報メッセージの1つが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す前記フラグを含む、請求項28又は29に記載のビデオデータストリーム。
  31. 前記フラグはuse_orig_pic_timing_flagである、請求項30に記載のビデオデータストリーム。
  32. 前記ビデオデータストリームは、ビデオパラメータセットを含み、
    前記表示がフラグであり、
    前記ビデオパラメータセットが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す前記フラグを含む、請求項28又は29に記載のビデオデータストリーム。
  33. 前記フラグはsame_pic_timing_within_ols_flagである、請求項32に記載のビデオデータストリーム。
  34. 前記フラグはgeneral_same_pic_timing_in_all_ols_flagである、請求項32に記載のビデオデータストリーム。
  35. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つは、前記ビットストリームのアクセスの中の前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前に生じる、請求項28から34の一項に記載のビデオデータストリーム。
  36. 前記表示が制約フラグであり、
    前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが前記1つ以上のサブビットストリームの前記少なくとも1つに適用されるかどうかを示す前記制約フラグを含む、請求項28又は29に記載のビデオデータストリーム。
  37. 前記表示が第1の表示であり、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第3の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、請求項28から36の一項に記載のビデオデータストリーム。
  38. 前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかをさらに示し、及び/又は、
    前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかをさらに示す、請求項28から37の一項に記載のビデオデータストリーム。
  39. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、前記ビデオデータストリーム。
  40. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含み、
    前記ビデオデータストリームが、前記タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、前記スケーラブルなネストされた補足拡張情報メッセージに依存して、
    前記1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージはすべて、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージに代用されるか、又は前記1つ以上の前記非スケーラブルなネストされたタイミング情報拡張情報メッセージの少なくとも1つを含むサブセットが、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す、前記ビデオデータストリーム。
  41. 前記タイミング情報は、ピクチャタイミング情報、又はバッファリング周期情報、又は復号ユニット情報である、請求項40に記載のビデオデータストリーム。
  42. 前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであるか、又は前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであるか、又は
    前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージである、請求項40又は41に記載のビデオデータストリーム。
  43. 前記ビデオデータストリームが、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージを含む場合、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、ビットストリームのアクセスユニット内に前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に発生する、請求項40から42の一項に記載のビデオデータストリーム。
  44. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項28から43の一項に記載のビデオデータストリーム。
  45. 前記サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する、請求項28から44の一項に記載のビデオデータストリーム。
  46. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオデータストリーム内の表示が、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示すよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  47. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、これは、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用される、請求項46に記載のビデオエンコーダ。
  48. 前記表示がフラグであり、
    前記1つ以上の前記非スケーラブルなネストされた補足拡張情報メッセージの1つが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す前記フラグを含むよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、請求項46又は47に記載のビデオエンコーダ。
  49. 前記フラグはuse_orig_pic_timing_flagである、請求項48に記載のビデオエンコーダ。
  50. 前記ビデオデータストリームは、ビデオパラメータセットを含み、
    前記表示がフラグであり、
    前記ビデオパラメータセットが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す前記フラグを含むよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、請求項46又は47に記載のビデオエンコーダ。
  51. 前記フラグはsame_pic_timing_within_ols_flagである、請求項50に記載のビデオエンコーダ。
  52. 前記フラグはgeneral_same_pic_timing_in_all_ols_flagである、請求項50に記載のビデオエンコーダ。
  53. 前記表示は、1つ以上のアクセスユニットの各アクセスユニット内の前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのそれぞれが、前記ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用され、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在しないか、前記1つ以上のアクセスユニットの各アクセスユニットにある前記非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、前記ビデオデータストリームに設定された任意の出力層の前記アクセスユニットに適用される場合と適用されない場合があることと、スケーラブルにネストされたピクチャタイミング補足拡張情報メッセージが存在する場合があるということを示す、請求項46から52の一項に記載のビデオエンコーダ。
  54. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されることを示す場合、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つは、ビットストリームのアクセスユニットの中の前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前に生じる、請求項46から53の一項に記載のビデオエンコーダ。
  55. 前記表示が制約フラグであり、
    前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージは、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが前記1つ以上のサブビットストリームの前記少なくとも1つに適用されるかどうかを示す前記制約フラグを含むよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、請求項46又は47に記載のビデオエンコーダ。
  56. 前記表示が第1の表示であり、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第3の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、請求項46から55の一項に記載のビデオエンコーダ。
  57. 前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかをさらに示し、及び/又は、
    前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかをさらに示す、請求項46から55の一項に記載のビデオエンコーダ。
  58. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの前記1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、前記ビデオエンコーダ。
  59. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含み、
    前記ビデオデータストリームが、前記タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、前記スケーラブルなネストされた補足拡張情報メッセージに依存して、
    前記1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージはすべて、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージに代用されるか、又は前記1つ以上の前記非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットが、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用されることを示す、前記ビデオエンコーダ。
  60. 前記タイミング情報は、ピクチャタイミング情報、又はバッファリング周期情報、又は復号ユニット情報である、請求項59に記載のビデオエンコーダ。
  61. 前記ビデオエンコーダは、前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであるように、前記ビデオデータストリームを生成するものであるか、又は前記ビデオエンコーダは、前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであるように、前記ビデオデータストリームを生成するものであるか、又は前記ビデオエンコーダは、前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージであるように、前記ビデオデータストリームを生成するものである、請求項59又は60に記載のビデオエンコーダ。
  62. 前記ビデオデータストリームが、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージを含む場合、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、前記ビットストリームのアクセスユニット内に前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に生成するように前記ビデオエンコーダが前記ビデオデータストリームを生成するものである、請求項59から61の一項に記載のビデオエンコーダ。
  63. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項46から62の一項に記載のビデオエンコーダ。
  64. 前記サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する、請求項46から63の一項に記載のビデオエンコーダ。
  65. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す、前記装置。
  66. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、前記装置は、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージを、1つ以上のスケーラブルなネストされたピクチャタイミング補足拡張情報メッセージに代用させる、請求項65に記載の装置。
  67. 前記表示がフラグであり、
    前記1つ以上の前記非スケーラブルなネストされた補足拡張情報メッセージの1つが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されることを示す前記フラグを含む、請求項65又は66に記載の装置。
  68. 前記フラグはuse_orig_pic_timing_flagである、請求項67に記載の装置。
  69. 前記ビデオデータストリームは、ビデオパラメータセットを含み、
    前記表示がフラグであり、
    前記ビデオパラメータセットが、前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す前記フラグを含む、請求項65又は66に記載の装置。
  70. 前記フラグはsame_pic_timing_within_ols_flagである、請求項69に記載の装置。
  71. 前記フラグはgeneral_same_pic_timing_in_all_ols_flagである、請求項69に記載の装置。
  72. 前記表示は、1つ以上のアクセスユニットの各アクセスユニット内の前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージのそれぞれが、前記ビデオデータストリームに設定された任意の出力層のアクセスユニットに適用され、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが存在しないか、前記1つ以上のアクセスユニットの各アクセスユニットにある前記非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、前記ビデオデータストリームに設定された任意の出力層の前記アクセスユニットに適用される場合と適用されない場合があることと、スケーラブルにネストされたピクチャタイミング補足拡張情報メッセージが存在する場合があるということを示す、請求項65から71の一項に記載の装置。
  73. 前記表示が、前記1つ以上のアクセスユニットの各アクセスユニット内の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、前記ビデオデータストリームに設定されたいずれかの出力層の前記アクセスユニットに適用される場合と適用されない場合があることと、前記非スケーラブルネストされたピクチャタイミング補足拡張情報メッセージが存在する可能性があることとを示す場合、前記装置は、前記入力ビットストリーム又は前記サブビットストリームから、非スケーラブルなネストされた補足拡張情報メッセージを含むピクチャタイミングコンテンツを伴うすべての補足拡張情報ネットワーク抽象化層ユニットを削除するように構成される、請求項72に記載の装置。
  74. 前記表示が前記サブビットストリームの前記タイミング情報が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されないことを示す場合、前記装置は、1つ以上のスケーラブルなネストされた補足拡張情報メッセージの少なくとも1つを処理し、それは前記ビットストリームのアクセスの中の前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの前、前記装置が前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージを処理する前に生じる、請求項65から73の一項に記載の装置。
  75. 前記表示が制約フラグであり、
    前記装置は、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージが、前記1つ以上のサブビットストリームの前記少なくとも1つに適用されるかどうかを示す前記制約フラグを含む前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージを処理するものである、請求項65又は66に記載の装置。
  76. 前記表示が第1の表示であり、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第3の表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、請求項65から75の一項に記載の装置。
  77. 前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかをさらに示し、及び/又は、
    前記ビデオデータストリーム内の前記表示は、前記サブビットストリームの前記タイミング情報が、さらに、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかをさらに示す、請求項65から75の一項に記載の装置。
  78. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、前記装置。
  79. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含み、
    前記ビデオデータストリームが、前記タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、前記装置は、前記スケーラブルなネストされた補足拡張情報メッセージに依存して、
    前記1つ以上の非スケーラブルなネストされたタイミング情報補足拡張情報メッセージをすべて、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージにより、又は前記1つ以上の前記非スケーラブルなネストされたタイミング情報補足拡張情報メッセージの少なくとも1つを含むサブセットを、前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージにより代用するものである、前記装置。
  80. 前記タイミング情報は、ピクチャタイミング情報、又はバッファリング周期情報、又は復号ユニット情報である、請求項79に記載の装置。
  81. 前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージであるか、又は前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされたバッファリング周期補足拡張情報メッセージであるか、又は
    前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージは、1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージであり、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージは、スケーラブルなネストされた復号ユニット補足拡張情報メッセージである、請求項79又は80に記載の装置。
  82. 前記ビデオデータストリームが、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージを含む場合、
    前記タイミング情報を含む前記非スケーラブルなネストされた補足拡張情報メッセージが、前記ビットストリームのアクセスユニット内の前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に発生し、
    前記装置は、前記タイミング情報を含む前記1つ以上の非スケーラブルなネストされた補足拡張情報メッセージの前に、前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージを処理するものである、請求項79から81の一項に記載の装置。
  83. 前記タイミング情報は、仮想参照デコーダのタイミング情報である、請求項65から82の一項に記載の装置。
  84. 前記サブビットストリームは、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存し、及び/又は復号ユニットのサブセットに依存する、請求項65から83の一項に記載の装置。
  85. 前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、請求項65から84のうちの一項に記載の装置。
  86. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項46から64の一項に記載のビデオエンコーダ、及び
    請求項85に記載の装置を含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信するものであり、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、前記システム。
  87. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記ビデオデータストリーム内の表示が、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるものであるよう、前記ビデオデータストリームを発生させることを含む、前記方法。
  88. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームを処理することを含み、
    前記ビデオデータストリーム内の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージから取得されるかどうかを示す、前記方法。
  89. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、前記方法。
  90. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームを処理することを含み、
    前記ビデオデータストリーム内の第1の表示は、サブビットストリームのタイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされたバッファリング周期補足拡張情報メッセージから取得されるかどうかを示し、及び/又は、
    前記ビデオデータストリーム内の第2の表示は、前記サブビットストリームの前記タイミング情報が、前記ビデオデータストリームの1つ以上の非スケーラブルなネストされた復号ユニット補足拡張情報メッセージから取得されるかどうかを示す、前記方法。
  91. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記ビデオデータストリームが、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含むように、前記ビデオデータストリームを生成することを含み、
    前記ビデオデータストリームが、前記タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、これは、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの少なくとも1つが前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージによって代用されることを示す、前記方法。
  92. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームを処理することを含み、
    前記ビデオデータストリームは、タイミング情報を含む1つ以上の非スケーラブルなネストされた補足拡張情報メッセージを含み、
    前記ビデオデータストリームが、前記タイミング情報を含むスケーラブルなネストされた補足拡張情報メッセージを含む場合、前記1つ以上の非スケーラブルなネストされたピクチャタイミング補足拡張情報メッセージの少なくとも1つが前記タイミング情報を含む前記スケーラブルなネストされた補足拡張情報メッセージによって代用されることを含む、前記方法。
  93. コンピュータ又はシグナルプロセッサで実行されるときに請求項87から92の一項の方法を実装するためのコンピュータプログラム。
  94. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しい、前記ビデオデータストリーム。
  95. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記アクセスユニットの前記2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しいかどうかを示す表示を含む、前記ビデオデータストリーム。
  96. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる、前記ビデオデータストリーム。
  97. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む、前記ビデオデータストリーム。
  98. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を伝送する、請求項94から97の一項に記載のビデオデータストリーム。
  99. 前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を伝送する、請求項98に記載のビデオデータストリーム。
  100. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを伝送する、請求項98又は99に記載のビデオデータストリーム。
  101. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオエンコーダが、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しくなるように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  102. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームが、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記アクセスユニットの前記2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しいかどうかを示す表示を含むよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  103. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオエンコーダが、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  104. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオエンコーダが、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  105. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を伝送する、請求項101から104の一項に記載のビデオエンコーダ。
  106. 前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を伝送する、請求項105に記載のビデオエンコーダ。
  107. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを伝送する、請求項105又は106に記載のビデオエンコーダ。
  108. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記装置は、前記入力ビットストリームの前記アクセスユニットを処理して、サブビットストリームを取得するものであり、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しい、前記装置。
  109. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記装置は、前記入力ビットストリームの前記アクセスユニットを処理して、サブビットストリームを取得するものであり、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記アクセスユニットの前記2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しいかどうかを示す表示を含む、前記装置。
  110. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記装置は、前記入力ビットストリームの前記アクセスユニットを処理して、サブビットストリームを取得するものであり、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる、前記装置。
  111. ビデオデータストリームを入力ビットストリームとして受信するための装置であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記装置は、前記入力ビットストリームの前記アクセスユニットを処理して、サブビットストリームを取得するものであり、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む、前記装置。
  112. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内のすべてのスケーラブルなネストされた補足拡張情報メッセージは、同じバッファ周期情報及び/又は同じピクチャタイミング情報を伝送する、請求項108から111の一項に記載の装置。
  113. 前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のピクチャタイミング補足拡張情報メッセージは、同じピクチャタイミング情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意のバッファ周期補足拡張情報メッセージは、同じバッファ周期情報を伝送する、及び/又は
    前記複数のアクセスユニットの特定のアクセスユニットについて、前記出力層セットの層及びサブ層のセットに適用される任意の復号ユニット補足拡張情報メッセージは、同じ復号ユニット情報を伝送する、請求項112に記載の装置。
  114. 識別子が同じ値で、出力層セットを識別する、アクセスユニット内の特定のペイロードタイプの2つのスケーラブルなネストされた補足拡張情報メッセージの場合、同じコンテンツを伝送する、請求項112又は113に記載の装置。
  115. 前記装置が出力層セットのバッファ周期スケーラブルなネストされた補足拡張情報メッセージを見つけた場合、前記装置は、前記出力層セットのさらなるバッファ周期スケーラブルなネストされた補足拡張情報メッセージを検索することなく、前記出力層セットの前記バッファ周期スケーラブルなネストされた補足拡張情報のコンテンツを使用する、及び/又は前記装置が出力層セットのピクチャタイミングスケーラブルなネストされた補足拡張情報メッセージを見つけた場合、前記装置は、前記出力層セットのさらなるピクチャタイミングスケーラブルなネストされた補足拡張情報メッセージを検索することなく、前記出力層セットの前記ピクチャタイミングスケーラブルなネストされた補足拡張情報のコンテンツを使用する、請求項112から114の一項に記載の装置。
  116. 前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、請求項108から115の一項に記載の装置。
  117. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項101から107の一項に記載のビデオエンコーダ、及び
    請求項116に記載の装置、を含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記装置は、前記ビデオデータストリームを入力ビットストリームとして受信するものであり、
    前記装置は、サブビットストリームを取得するために前記入力ビットストリームを処理するものであり、
    前記装置は、前記ビデオを復号するために前記サブビットストリームを復号するものである、前記システム。
  118. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記方法が、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しくなるように、前記ビデオデータストリームを生成することを含む、前記方法。
  119. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記方法は、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記アクセスユニットの前記2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しいかどうかを示す表示を含むよう前記ビデオデータストリームを生成することを含む、方法。
  120. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記方法が、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるように、前記ビデオデータストリームを生成することを含む、前記方法。
  121. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記方法が、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含むように、前記ビデオデータストリームを生成することを含む、前記方法。
  122. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームの前記アクセスユニットを処理することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記アクセスユニットの2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しい、前記方法。
  123. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームの前記アクセスユニットを処理することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む2つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記アクセスユニットの前記2つ以上のスケーラブルなネストされた補足拡張情報メッセージのすべてにおいて等しいかどうかを示す表示を含む、前記方法。
  124. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームの前記アクセスユニットを処理することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報は、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れる、前記方法。
  125. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記入力ビットストリームは、複数のアクセスユニットを含み、
    前記方法は、サブビットストリームを取得するために前記入力ビットストリームの前記アクセスユニットを処理することを含み、
    前記複数のアクセスユニットの各アクセスユニットについて、
    前記アクセスユニットが、出力層セットのバッファ周期情報及び/又はピクチャタイミング情報を含む3つ以上のスケーラブルなネストされた補足拡張情報メッセージを含むのであれば、
    その場合、前記ビデオデータストリームは、前記出力層セットの前記バッファ周期情報及び/又は前記ピクチャタイミング情報が、前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの1つと、3つ以上のスケーラブルなネストされた補足拡張情報メッセージの前記1つにすぐに引き継ぐ前記3つ以上のスケーラブルなネストされた補足拡張情報メッセージの別の1つのみに現れるかどうかを示す表示を含む、前記方法。
  126. コンピュータ又はシグナルプロセッサで実行されるときに請求項118から125の一項の方法を実装するためのコンピュータプログラム。
  127. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記ビデオデータストリームは、前記ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むか、又は、
    前記ビデオデータストリームは、前記ビデオデータストリームの前記サブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含む、前記ビデオデータストリーム。
  128. 前記サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する、請求項127に記載のビデオデータストリーム。
  129. 復号ユニット除去時間は、アクセスユニットの除去時間及び前記拡散係数に依存する、請求項127又は128に記載のビデオデータストリーム。
  130. 前記ビデオデータストリームは、時間的距離を含み、前記時間的距離は、導出されたクロックサブティック値で乗算され、前記導出されたクロックサブティック値は、前記拡散係数を使用して導出可能である、請求項129に記載のビデオデータストリーム。
  131. 前記拡散係数は、複数の拡散係数のうちの1つであり、
    前記複数の拡散係数のそれぞれは、複数のサブ層のサブ層に割り当てられ、
    前記ビデオデータストリームは、複数のアクセスユニットを含む、請求項127から130の一項に記載のビデオデータストリーム。
  132. 前記クロックサブティック値はクロックティックに依存し、さらに前記拡散係数に依存する、請求項127から130の一項に記載のビデオデータストリーム。
  133. 前記クロックサブティック値が、次のように定義され、
    ClockSubTick=
    = ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
    ClockSubTickはクロックサブティック値であり、
    ClockTickは前記クロックティック値であり、
    tick_divisor_minus2は追加のティック除数であり、
    tick_divisor_factor_minus1[HTid]は、前記ビデオデータストリームの前記拡散係数を示す、請求項132に記載のビデオデータストリーム。
  134. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記ビデオエンコーダは、前記ビデオデータストリームが、前記ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むように、前記ビデオデータストリームを生成するか、又は、
    前記ビデオデータストリームは、前記ビデオデータストリームの前記サブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含むよう、前記ビデオエンコーダが前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  135. 前記サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する、請求項134に記載のビデオエンコーダ。
  136. 復号ユニット除去時間は、アクセスユニットの除去時間及び前記拡散係数に依存するように前記ビデオエンコーダが前記ビデオデータストリームを生成する、請求項134又は135に記載のビデオエンコーダ。
  137. 前記ビデオデータストリームは、時間的距離を含み、前記時間的距離は、導出されたクロックサブティック値で乗算され、前記導出されたクロックサブティック値は、前記拡散係数を使用して導出可能であるように、前記ビデオエンコーダが前記ビデオデータストリームを生成する、請求項136に記載のビデオエンコーダ。
  138. 前記拡散係数は、複数の拡散係数のうちの1つであり、
    前記複数の拡散係数のそれぞれは、複数のサブ層のサブ層に割り当てられ、
    前記ビデオエンコーダは、前記ビデオデータストリームが前記複数の拡散係数を含むように、前記ビデオデータストリームを生成する、請求項134から137の一項に記載のビデオエンコーダ。
  139. 前記クロックサブティック値はクロックティックに依存し、さらに前記拡散係数に依存する、請求項134から137の一項に記載のビデオエンコーダ。
  140. 前記クロックサブティック値が、次のように定義される
    ClockSubTick=
    = ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
    ClockSubTickはクロックサブティック値であり、
    ClockTickは前記クロックティック値であり、
    tick_divisor_minus2は追加のティック除数であり、
    tick_divisor_factor_minus1[HTid]は、前記ビデオデータストリームの前記拡散係数を示す、請求項139に記載のビデオエンコーダ。
  141. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが1つ以上のサブ層のそれぞれについてのサブ層固有フレームレート情報を含むように、前記ビデオデータストリームを生成する、及び/又は、
    前記ビデオエンコーダは、前記ビデオデータストリームが前記サブ層のサブ層固有のフレーム表示期間情報を含むように、前記ビデオデータストリームを生成するサブ層のサブ層固有フレームディスプレイレート情報を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  142. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオデータストリームが、前記ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含み、前記ビデオデコーダは前記拡散係数を使用して前記ビデオを復号するものであるか、又は、
    前記ビデオデータストリームは、前記ビデオデータストリームの前記サブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含み、前記ビデオデコーダが前記クロックサブティック値を使用して前記ビデオを復号する前記ビデオデータストリームを生成する、前記ビデオデコーダ。
  143. 前記サブビットストリームの各々は、出力層セットに依存し、及び/又はサブ層に依存し、及び/又はサブピクチャに依存する、請求項142に記載のビデオデコーダ。
  144. 復号ユニット除去時間は、アクセスユニットの除去時間及び前記拡散係数に依存する、請求項142又は143に記載のビデオデコーダ。
  145. 前記ビデオデータストリームは時間的距離を含み、
    前記ビデオデコーダは、前記時間的距離に、導出されたクロックサブティック値を乗算するものであり、
    前記ビデオデコーダは、前記拡散係数を使用して、前記導出されたクロックサブティック値を導出する、請求項144に記載のビデオデコーダ。
  146. 前記拡散係数は、複数の拡散係数のうちの1つであり、
    前記複数の拡散係数のそれぞれは、複数のサブ層のサブ層に割り当てられ、
    前記ビデオデータストリームは、前記複数の拡散係数を含み、
    前記ビデオデコーダは、前記複数の拡散係数を使用して前記ビデオを復号するものである、請求項142から145の一項に記載のビデオデコーダ。
  147. 前記クロックサブティック値はクロックティックに依存し、さらに前記拡散係数に依存する、請求項142から145の一項に記載のビデオデコーダ。
  148. 前記クロックサブティック値が、次のように定義される
    ClockSubTick=
    = ClockTick÷( tick_divisor_minus2+2 ) * ( tick_divisor_factor_minus1[HTid]+ 1 )
    ClockSubTickはクロックサブティック値であり、
    ClockTickは前記クロックティック値であり、
    tick_divisor_minus2は追加のティック除数であり、
    tick_divisor_factor_minus1[HTid]は、前記ビデオデータストリームの前記拡散係数を示す、請求項147に記載のビデオデコーダ。
  149. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオデータストリームは、サブ層のサブ層固有フレームレート情報を含み、及び/又は前記ビデオデータストリームは、前記サブ層のサブ層固有フレーム表示期間情報を含み、
    前記デコーダは、前記サブ層の前記サブ層固有フレームレート情報を使用して、及び/又は前記サブ層固有のフレーム表示期間情報を使用して、拡散係数を決定するものである、前記ビデオデコーダ。
  150. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項134から141の一項に記載のビデオエンコーダ、及び
    請求項142から149の一項に記載のビデオデコーダ、を含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記ビデオデコーダは、前記ビデオデータストリームを受信して、前記ビデオデータストリームを前記ビデオに復号するものである、前記システム。
  151. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記方法は、前記ビデオデータストリームが、前記ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含むように、前記ビデオデータストリームを生成することを含むか、又は、
    前記方法は、前記ビデオデータストリームが、前記ビデオデータストリームの前記サブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含むよう、前記ビデオデータストリームを生成することを含む、前記方法。
  152. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記ビデオデータストリームが、前記ビデオデータストリームのサブビットストリームの数に依存する拡散係数を含み、前記方法は前記拡散係数を使用して前記ビデオを復号することを含むか、又は、
    前記ビデオデータストリームは、前記ビデオデータストリームの前記サブビットストリームの中で最も高いサブビットストリームに依存するクロックサブティック値を含み、前記方法が前記クロックサブティック値を使用して前記ビデオを復号することを含む、前記方法。
  153. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記方法は、前記サブ層の前記サブ層固有フレームレート情報を使用して、及び/又は前記サブ層固有のフレーム表示期間情報を使用して、拡散係数を決定するものであり、
    前記方法は、前記サブ層の前記サブ層固有フレームレート情報を使用して、及び/又は前記サブ層固有のフレーム表示期間情報を使用して、拡散係数を決定することを含む、前記方法。
  154. コンピュータ又はシグナルプロセッサで実行されるときに請求項151から153の一項の方法を実装するためのコンピュータプログラム。
  155. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオをデコードするために、前記ビデオデコーダは、現在のコード化されたピクチャバッファサイズ情報を示す前記ビデオデータストリーム内の情報に応じて、サブピクチャのコード化されたピクチャバッファサイズを推定するものである、前記ビデオデコーダ。
  156. 前記ビデオデータストリームは、参照レベルのシグナリングされたコード化されたピクチャバッファサイズを含む、請求項155に記載のビデオデコーダ。
  157. 現在のレベルが参照レベルと等しい場合、前記ビデオデコーダは、前記参照レベルの前記コード化されたピクチャバッファサイズを使用して前記コード化されたピクチャバッファサイズを決定する、請求項155に記載のビデオデコーダ。
  158. 前記ビデオデコーダは、前記ビデオデータストリームの構文要素cpb_size_value_minus1[i][j]に応じて前記コード化されたピクチャバッファサイズを推定する、請求項155から157の一項に記載のビデオデコーダ。
  159. 前記ビデオデコーダは、前記ビデオデータストリームの構文要素cpb_size_scaleに応じて前記コード化されたピクチャバッファサイズを推定する、請求項155から158の一項に記載のビデオデコーダ。
  160. 前記ビデオデコーダは、ビデオコーディング層コード化ピクチャバッファサイズである前記サブピクチャの前記コード化されたピクチャバッファサイズを推定するものであり、
    ネットワーク抽象化層コード化ピクチャバッファサイズである前記サブピクチャのさらにコード化されたピクチャバッファサイズを推定する、請求項155から159の一項に記載のビデオデコーダ。
  161. 前記ビデオデコーダは、参照レベルの断片の値に応じて、前記ビデオコーディング層コード化ピクチャバッファサイズ及び/又は前記ネットワーク抽象化層コード化ピクチャバッファサイズを推定することである、請求項160に記載のビデオデコーダ。
  162. 前記ビデオデコーダは、以下による前記ビデオコーディング層コード化ピクチャバッファサイズを推定するものであり、
    SubPicCbpSizeVcl[s]=
    = Floor(( cpb_size_value_minus1[i][j]+ 1 )
    * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)
    前記装置は、以下による前記ネットワーク抽象化層コード化ピクチャバッファサイズを推定するものであり、
    SubPicCbpSizeNal[s]=
    = Floor(( cpb_size_value_minus1[i][j]+ 1 )
    * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)、
    RefLevelFractionは、前記参照レベルの断片の値である、請求項161に記載のビデオデコーダ。
  163. 前記ビデオデコーダは、以下による前記ビデオコーディング層コード化ピクチャバッファサイズを推定するものであり、
    SubpicCpbSizeVcl[i][j][k]=
    Floor(CpbVclFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
    SubpicCpbSizeNal[i][j][k]=Floor(CpbNalFactor*MaxCPB*OlsRefLevelFraction[i][j][k]÷256)
    iとjとkはインデックスであり、
    OlsRefLevelFraction[i][j][k]は実数である、請求項161に記載のビデオデコーダ。
  164. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオをデコードするために、前記ビデオデコーダは、現在コード化されているビデオシーケンスのビットレート情報を示す前記ビデオデータストリーム内の情報に応じて、サブピクチャのビットレートを推定するものである、前記ビデオデコーダ。
  165. 前記ビデオデータストリームは、前記サブピクチャの前記ビットレートが前記現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるべきかどうかを示す表示を含み、
    前記ビデオデータストリームの前記表示が、前記サブピクチャの前記ビットレートが前記現在コード化されているビデオシーケンスのビットレート情報を使用して推定されることを示している場合、前記ビデオデコーダは、前記現在コード化されているビデオシーケンスのビットレート情報を使用して前記ビットレートを推定し、
    前記ビデオデータストリームの前記表示が、前記サブピクチャの前記ビットレートが前記現在コード化されているビデオシーケンスのビットレート情報を使用せずに推定されることを示している場合、前記ビデオデコーダは、前記現在コード化されているビデオシーケンスのビットレート情報を使用せずに事前定義された値又は最悪の場合の値を使用して前記ビットレートを推定する、請求項164に記載のビデオデコーダ。
  166. 前記現在コード化されているビデオシーケンスのビットレート情報は、参照レベルのシグナリングされたビットレートであり、
    前記ビデオデータストリームは、前記参照レベルの前記シグナリングされたビットレートを含み、
    現在のレベルが前記参照レベルと等しい場合、前記ビデオデコーダは、前記参照レベルの前記シグナリングされたビットレートを使用して前記サブピクチャの前記ビットレートを決定する、請求項164又は165に記載のビデオデコーダ。
  167. 前記ビデオデコーダは、前記ビデオデータストリームの構文要素bit_rate_value_minus1[i][j]に応じて前記サブピクチャの前記ビットレートを推定する、請求項164から166の一項に記載のビデオデコーダ。
  168. 前記ビデオデコーダは、前記ビデオデータストリームの構文要素bit_rate_scaleに応じて前記サブピクチャの前記ビットレートを推定する、請求項164から167の一項に記載のビデオデコーダ。
  169. 前記ビデオデコーダは、前記サブピクチャのビデオコーディング層ビットレートである前記サブピクチャの前記ビットレートを推定するものであり、
    前記サブピクチャのネットワーク抽象化層である前記サブピクチャのさらにコード化されたピクチャバッファサイズを推定する、請求項164から168の一項に記載のビデオデコーダ。
  170. 前記ビデオデコーダは、参照レベルの断片の値に応じて、ビデオコーディング層コード化ピクチャバッファサイズ及び/又はネットワーク抽象化層コード化ピクチャバッファサイズを推定することである、請求項169に記載のビデオデコーダ。
  171. 前記ビデオデコーダは、以下による前記サブピクチャの前記ビデオコーディング層ビットレートを推定するものであり、
    SubPicBitRateVcl[s]=
    = Floor(( bit_rate_value_minus1[i][j]+1 )
    * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)
    前記ビデオデコーダは、以下による前記サブピクチャのネットワーク抽象化層ビットレートを推定するものであり、
    SubPicBitRateNal[s]=
    = Floor(( bit_rate_value_minus1[i][j]+1 )
    * 2( 4 + cpb_size_scale )*RefLevelFraction[i][j]÷256)、
    RefLevelFractionは、前記参照レベルの断片の値である、請求項170に記載のビデオデコーダ。
  172. 前記ビデオデコーダは、以下による前記サブピクチャの前記ビデオコーディング層ビットレートを推定するものであり、
    SubpicBitRateVcl[i][j][k]=Floor(CpbVclFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
    SubpicBitRateNal[i][j][k]=Floor(CpbNalFactor*ValBR*OlsRefLevelFraction[0][j][k]÷256)
    iとjとkはインデックスであり、
    OlsRefLevelFraction[0][j][k]は実数である、請求項170に記載のビデオデコーダ。
  173. iは、特定の示された参照レベルのインデックスを示し、
    jは、前記ビデオデータストリーム内のアクセスユニットの前記ピクチャの特定のサブピクチャのインデックスを示し、
    kは、前記ビデオデータストリームに含まれる、及び/又は前記ビデオデコーダが動作する最大時間サブ層のインデックスを示す、請求項163又は172に記載のビデオデコーダ。
  174. OlsRefLevelFraction[i][j][k]は、変数sli_non_subpic_layers_fraction[i][k]に依存し、これはHtidがkに等しい場合、sps_num_subpics_minus1が0に等しいtargetCvssの層に関連付けられたビットストリームレベル制限のi番目の部分を示している、請求項163又は172又は173に記載のビデオデコーダ。
  175. vps_max_layers_minus1が0に等しい場合、又は前記ビットストリーム内にsps_num_subpics_minus1が0に等しい層がない場合、sli_non_subpic_layers_fraction[i][k]は0であり、
    kがsli_max_sublayers_minus1未満で、sli_non_subpic_layers_fraction[i][k]iが存在しない場合、sli_non_subpic_layers_fraction[i][k]=sli_non_subpic_layers_fraction[i][k+1]である、請求項174に記載のビデオデコーダ。
  176. 式中、
    OlsRefLevelFraction[i][j][k]=
    =sli_non_subpic_layers_fraction[i][k]+ ( n - sli_non_subpic_layers_fraction[i][k]) ÷ n
    * (sli_ref_level_fraction_minus1[i][j][k]+ 1)
    式中、nは正の整数を示す、請求項163又は172から175に記載のビデオデコーダ。
  177. n=256;又はn=128;又はn=512;又はn=1024;又はn=2048;又はn=4096である、請求項176に記載のビデオデコーダ。
  178. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオをデコードするために、前記ビデオデコーダは、前記ビデオデータストリーム内でエンコードされているサブピクチャのコード化ピクチャバッファサイズを受信し、前記ビデオをデコードするために前記サブピクチャの前記コード化ピクチャバッファサイズを使用する、及び/又は
    前記ビデオをデコードするために、前記ビデオデコーダは、前記ビデオデータストリーム内でエンコードされているサブピクチャのビットレートを受信し、前記ビデオをデコードするために前記サブピクチャの前記ビットレートを使用する、前記ビデオデコーダ。
  179. 前記ビデオデータストリームは、前記サブピクチャの前記コード化ピクチャバッファサイズが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記コード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含み、
    前記ビデオデータストリームの前記表示は、前記サブピクチャの前記コード化ピクチャバッファサイズが推定されるべきだということを示している場合、前記ビデオデコーダは、前記サブピクチャの前記コード化ピクチャバッファサイズを推定し、
    前記ビデオデータストリームの前記表示が、前記サブピクチャの前記コード化ピクチャバッファサイズが前記ビデオデータストリーム内に符号化されていると示している場合、前記ビデオデコーダは、前記ビデオデータストリーム内に符号化される前記サブピクチャの前記コード化ピクチャバッファサイズを使用する、請求項178に記載のビデオデコーダ。
  180. 前記ビデオデータストリームは、前記サブピクチャのビットレートが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記ビットレートが推定されるべきかどうかを示す表示を含み、
    前記ビデオデータストリームの前記表示は、前記サブピクチャの前記ビットレートが推定されるべきだということを示している場合、前記ビデオデコーダは、前記サブピクチャの前記ビットレートを推定し、
    前記ビデオデータストリームの前記表示は、前記サブピクチャの前記ビットレートが前記ビデオデータストリーム内に符号化されていると示している場合、前記ビデオデコーダは、前記ビデオデータストリーム内に符号化される、前記サブピクチャの前記コード化ピクチャバッファサイズを使用する、請求項178又は179に記載のビデオデコーダ。
  181. 複数の抽出可能なサブビットストリームのそれぞれは、出力層セットに固有であり、前記サブピクチャは、前記複数の抽出可能なサブビットストリームのうちの少なくとも1つの抽出可能なサブビットストリームに割り当てられ、
    前記ビデオデータストリームが共通の復号ユニット除去タイミング情報及び前記複数の抽出可能なサブバイストリームを含む場合、ビデオパラメータセット又はシーケンスパラメータセット又は前記ビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有の仮説参照デコーダパラメータの構文の構造は、前記共通の復号ユニットの除去タイミングのスケーリングにおけるティック除数の拡散係数又は絶対値のいずれかを含み、
    前記ビデオデコーダは、前記ティック除数の前記拡散係数又は前記絶対値を処理する、請求項155から180の一項に記載のビデオデコーダ。
  182. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを含むか、
    前記ビデオデータストリームは構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含む、前記ビデオデータストリーム。
  183. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含む、及び/又は、
    前記ビデオデータストリームは、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるべきかどうかを示す表示を含む、前記ビデオデータストリーム。
  184. 現在のコード化されたピクチャバッファサイズ情報は、参照レベルのシグナリングされたコード化ピクチャバッファサイズであり、前記ビデオデータストリームは、前記参照レベルの前記シグナリングされたコード化ピクチャバッファサイズを含む、及び/又は
    前記現在コード化されているビデオシーケンスのビットレート情報は、参照レベルのシグナリングされたビットレートであり、前記ビデオデータストリームは、前記参照レベルの前記シグナリングされたビットレートを含む、請求項182又は183に記載のビデオデータストリーム。
  185. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、サブピクチャのコード化ピクチャバッファサイズが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記コード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含み、及び/又は、
    前記ビデオデータストリームは、前記サブピクチャのビットレートが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記ビットレートが推定されるべきかどうかを示す表示を含む、前記ビデオデータストリーム。
  186. 複数の抽出可能なサブビットストリームのそれぞれは、出力層セットに固有であり、前記サブピクチャは、前記複数の抽出可能なサブビットストリームのうちの少なくとも1つの抽出可能なサブビットストリームに割り当てられ、
    前記ビデオデータストリームが共通の復号ユニット除去タイミング情報及び前記複数の抽出可能なサブバイストリームを含む場合、ビデオパラメータセット又はシーケンスパラメータセット又は前記ビデオデータストリームの補足拡張情報メッセージは、前記共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを含む、請求項182から185のいずれかに記載のビデオデータストリーム。
  187. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオデータストリームは構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを含むか、
    前記ビデオエンコーダは、前記ビデオデータストリームが、構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  188. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むよう、前記ビデオデータストリームを生成する、及び/又は、
    前記ビデオエンコーダは、前記ビデオデータストリームが、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  189. 前記ビデオエンコーダは、前記現在のコード化ピクチャバッファサイズ情報が、参照レベルのシグナリングされたコード化ピクチャバッファサイズであり、前記ビデオデータストリームは、前記参照レベルの前記シグナリングされたコード化ピクチャバッファサイズを含むように、前記ビデオデータストリームを生成する、及び/又は
    前記ビデオエンコーダは、前記現在コード化されているビデオシーケンスのビットレート情報が、参照レベルのシグナリングされたビットレートであり、前記ビデオデータストリームは、前記参照レベルの前記シグナリングされたビットレートを含むように、前記ビデオデータストリームを生成する、請求項187又は188に記載のビデオエンコーダ。
  190. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記コード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成する、及び/又は、
    前記ビデオエンコーダは、前記ビデオデータストリームは、前記サブピクチャのビットレートが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記ビットレートが推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  191. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが共通の復号ユニット除去タイミング情報及び複数の抽出可能なサブバイストリームを含む場合、前記複数のサブビットストリームのそれぞれは、出力層セットに固有で、ビデオパラメータセット又はシーケンスパラメータセット又は前記ビデオデータストリームの補足拡張情報メッセージにおける各出力層セット固有の仮説参照デコーダパラメータの構文分析は、前記共通の復号ユニットの除去タイミングのスケーリングにおける拡散係数又はティック除数の絶対値のいずれかを含むように、ビデオデータストリームを生成する、ビデオエンコーダ。
  192. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項187から191の一項に記載のビデオエンコーダ、及び
    請求項155から181の一項に記載のビデオデコーダを含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記ビデオデコーダは、前記ビデオデータストリームを受信して、前記ビデオデータストリームを前記ビデオに復号するものである、前記システム。
  193. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記ビデオをデコードするために、前記方法は、現在のコード化されたピクチャバッファサイズ情報を示す前記ビデオデータストリーム内の情報に応じて、サブピクチャのコード化されたピクチャバッファサイズを推定することを含む、前記方法。
  194. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記ビデオをデコードするために、前記方法は、現在コード化されているビデオシーケンスのビットレート情報を示す前記ビデオデータストリーム内の情報に応じて、サブピクチャのビットレートを推定することを含む、前記方法。
  195. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記ビデオをデコードするために、前記方法は、前記ビデオデータストリーム内でエンコードされているサブピクチャのコード化ピクチャバッファサイズを受信すること、及び前記ビデオをデコードするために前記サブピクチャの前記コード化ピクチャバッファサイズを使用することを含む、及び/又は
    前記ビデオをデコードするために、前記方法は、前記ビデオデータストリーム内でエンコードされているサブピクチャのビットレートを受信すること、及び前記ビデオをデコードするために前記サブピクチャの前記ビットレートを使用することを含む、前記方法。
  196. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが、構文要素cpb_size_value_minus1[i][j]及び構文要素cpb_size_scaleを含むように前記ビデオデータストリームを生成することを含むか、
    前記方法は、前記ビデオデータストリームが、構文要素bit_rate_value_minus1[i][j]及び構文要素bit_rate_scaleを含むように前記ビデオデータストリームを生成することを含む、前記方法。
  197. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが、サブピクチャのコード化されたピクチャバッファサイズが現在のコード化されたピクチャバッファサイズ情報を使用して推定されるべきかどうかを示す表示を含むよう、前記ビデオデータストリームを生成することを含む、及び/又は、
    前記方法は、前記ビデオデータストリームが、サブピクチャのビットレートが現在コード化されているビデオシーケンスのビットレート情報を使用して推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成することを含む、前記方法。
  198. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが、サブピクチャのコード化ピクチャバッファサイズが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記コード化ピクチャバッファサイズが推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成することを含む、及び/又は、
    前記方法は、前記ビデオデータストリームは、前記サブピクチャのビットレートが前記ビデオデータストリーム内にエンコードされているかどうか、又は前記サブピクチャの前記ビットレートが推定されるべきかどうかを示す表示を含むように、前記ビデオデータストリームを生成することを含む、前記方法。
  199. コンピュータ又はシグナルプロセッサで実行されるときに請求項193から198の一項の方法を実装するためのコンピュータプログラム。
  200. その中に符号化されたビデオを有するビデオデータストリームであって、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記ビデオデータストリームは、前記複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットの前記デルタ時間情報に依存する、前記ビデオデータストリーム。
  201. 前記ビデオデータストリームは、ピクチャタイミング補足拡張情報を含み、
    前記ピクチャタイミング補足拡張情報は、前記アクセスユニットの前記2つ以上の復号ユニットの前記デルタ時間情報を含む、請求項200に記載のビデオデータストリーム。
  202. 前記デルタ時間情報は、前記アクセスユニットの前記2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示す、請求項200又は201に記載のビデオデータストリーム。
  203. 前記アクセスユニットの前記2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの前記除去時間に等しい除去時間を有する、請求項202に記載のビデオデータストリーム。
  204. 前記アクセスユニットは、3つ以上の復号ユニットを含み、
    前記除去時間の差は、前記アクセスユニットの前記3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい、請求項202又は203に記載のビデオデータストリーム。
  205. 前記ピクチャタイミング補足拡張情報は、前記ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである、請求項204に記載のビデオデータストリーム。
  206. フレーム時間間隔は、前記ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされる、請求項205に記載のビデオデータストリーム。
  207. フレーム時間間隔は、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能である、請求項205に記載のビデオデータストリーム。
  208. 前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットは、1つのビデオ符号化層ネットワーク抽象化層ユニットを含む、請求項205から207の一項に記載のビデオデータストリーム。
  209. 前記ピクチャタイミング補足拡張情報は、前記ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在する、請求項204に記載のビデオデータストリーム。
  210. フレーム時間間隔は次のように導出でき、
    (elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる、請求項200から209の一項に記載のビデオデータストリーム。
  211. 前記ビデオデータストリームは、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含む、請求項204から210のいずれかに記載のビデオデータストリーム。
  212. 前記ビデオデータストリームは、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含まない、請求項204から210のいずれかに記載のビデオデータストリーム。
  213. アクセスユニット内の復号ユニットの前記数は、フレーム時間間隔と共通の遅延増分に依存する、請求項212に記載のビデオデータストリーム。
  214. 前記ビデオデータストリームは、前記アクセスユニットの前記2つ以上の復号ユニットの前記復号ユニットのユニット情報補足拡張情報メッセージを復号することを含み、
    前記復号ユニットの前記復号ユニット情報補足拡張情報メッセージは、前記復号ユニットの前記デルタ時間情報を含む、請求項200に記載のビデオデータストリーム。
  215. ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを含み、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す、請求項200から214のいずれかに記載のビデオデータストリーム。
  216. ビデオデータストリームが中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するためのビデオエンコーダであって、
    前記ビデオエンコーダは、前記ビデオデータストリームが複数のアクセスユニットを含むように、前記ビデオデータストリームを生成し、
    前記ビデオエンコーダは、前記ビデオデータストリームが、前記複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットの前記デルタ時間情報に依存するように、前記ビデオデータストリームを生成する、前記ビデオエンコーダ。
  217. 前記ビデオエンコーダは、前記ビデオデータストリームが、ピクチャタイミング補足拡張情報を含むよう、前記ビデオデータストリームを生成し、
    前記ビデオエンコーダは、前記ピクチャタイミング補足拡張情報が、前記アクセスユニットの前記2つ以上の復号ユニットの前記デルタ時間情報を含むよう、前記ビデオデータストリームを生成する、請求項216に記載のビデオエンコーダ。
  218. 前記ビデオエンコーダは、前記デルタ時間情報が、前記アクセスユニットの前記2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示すように前記ビデオデータストリームを生成する、請求項216又は217に記載のビデオエンコーダ。
  219. 前記アクセスユニットの前記2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの前記除去時間に等しい除去時間を有する、請求項218に記載のビデオデータストリーム。
  220. 前記ビデオエンコーダは、前記アクセスユニットが3つ以上の復号ユニットを含むように、前記ビデオデータストリームを生成し、
    前記除去時間の差は、前記アクセスユニットの前記3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい、請求項218又は219に記載のビデオデータストリーム。
  221. 前記ピクチャタイミング補足拡張情報は、前記ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである、請求項220に記載のビデオデータストリーム。
  222. 前記ビデオエンコーダは、フレーム時間間隔が、前記ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされるよう、前記ビデオデータストリームを生成する、請求項221に記載のビデオエンコーダ。
  223. 前記ビデオエンコーダは、フレーム時間間隔が、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能であるよう、前記ビデオデータストリームを生成する、請求項221に記載のビデオエンコーダ。
  224. 前記ビデオエンコーダは、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットが、1つのビデオ符号化層ネットワーク抽象化層ユニットを含むよう、前記ビデオデータストリームを生成する、請求項221から223の一項に記載のビデオエンコーダ。
  225. 前記ビデオエンコーダは、前記ピクチャタイミング補足拡張情報が、前記ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在するよう、前記ビデオデータストリームを生成する、請求項220に記載のビデオエンコーダ。
  226. フレーム時間間隔は次のように導出でき、
    (elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる、請求項216から225の一項に記載のビデオエンコーダ。
  227. 前記ビデオエンコーダは、前記ビデオデータストリームが、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含むよう、前記ビデオデータストリームを生成する、請求項220から226のいずれかに記載のビデオエンコーダ。
  228. 前記ビデオエンコーダは、前記ビデオデータストリームが、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含まないよう、前記ビデオデータストリームを生成する、請求項220から226のいずれかに記載のビデオエンコーダ。
  229. 前記ビデオエンコーダは、アクセスユニット内の復号ユニットの前記数は、フレーム時間間隔と共通の遅延増分に依存するよう、前記ビデオデータストリームを生成する、請求項228に記載のビデオエンコーダ。
  230. 前記ビデオエンコーダは、前記ビデオデータストリームが、前記アクセスユニットの前記2つ以上の復号ユニットの前記復号ユニットのユニット情報補足拡張情報メッセージを復号することを含むよう、前記ビデオデータストリームを生成し、
    前記ビデオエンコーダは、前記復号ユニットの前記復号ユニット情報補足拡張情報メッセージが、前記復号ユニットの前記デルタ時間情報を含むよう、前記ビデオデータストリームを生成する、請求項216に記載のビデオエンコーダ。
  231. ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを含み、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す、請求項216から230の一項に記載のビデオエンコーダ。
  232. ビデオデータストリームを入力ビットストリームとして受信するためのビデオデコーダであって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記ビデオデコーダは、前記ビデオデータストリームを復号して前記ビデオを復号するものであり、
    前記ビデオデータストリームは、前記複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットの前記デルタ時間情報に依存し、前記ビデオデコーダは、前記アクセスユニットの2つ以上の復号ユニットのそれぞれの前記デルタ時間情報を使用して前記ビデオデータストリームを復号する、前記ビデオデコーダ。
  233. 前記ビデオデータストリームは、ピクチャタイミング補足拡張情報を含み、
    前記ピクチャタイミング補足拡張情報は、前記アクセスユニットの前記2つ以上の復号ユニットの前記デルタ時間情報を含む、請求項232に記載のビデオデコーダ。
  234. 前記デルタ時間情報が、前記アクセスユニットの前記2つ以上の復号ユニットの2つの復号ユニット間の除去時間の差を示し、前記ビデオデコーダは、前記2つの復号ユニット間の除去時間の差を使用して前記ビデオデータストリームを復号する、請求項232又は233に記載のビデオデコーダ。
  235. 前記アクセスユニットの前記2つ以上の復号ユニットのうちの最後の復号ユニットは、前記アクセスユニットの前記除去時間に等しい除去時間を有し、前記ビデオデコーダは、前記アクセスユニットの前記除去時間を使用して前記ビデオデータストリームを復号する、請求項234に記載のビデオデコーダ。
  236. 前記アクセスユニットは、3つ以上の復号ユニットを含み、
    前記除去時間の差は、前記アクセスユニットの前記3つ以上の復号ユニットの2つの連続する復号ユニットの各対について等しい、請求項234又は235に記載のビデオデコーダ。
  237. 前記ピクチャタイミング補足拡張情報は、前記ビデオデータストリームから導出されたサブビットストリームに適用され、復号ユニットの数は一定のままである、請求項236に記載のビデオデコーダ。
  238. フレーム時間間隔は、前記ビデオデータストリームのパラメータセット、シーケンスパラメータセットのHRDパラメータでシグナリングされ、前記ビデオデコーダは、前記フレーム時間間隔を使用して前記ビデオデータストリームを復号する、請求項237に記載のビデオデコーダ。
  239. フレーム時間間隔は、最高の時間レベルでの2つの連続するアクセスユニットの除去時間の差として導出可能であり、前記ビデオデコーダは、前記フレーム時間間隔を使用して前記ビデオデータストリームを復号する、請求項237に記載のビデオデコーダ。
  240. 前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットは、1つのビデオ符号化層ネットワーク抽象化層ユニットを含む、請求項237から239の一項に記載のビデオデコーダ。
  241. 前記ピクチャタイミング補足拡張情報は、前記ビデオデータストリームから導出されたサブビットストリームに適用され、異なる数の復号ユニットが存在する、請求項236に記載のビデオデコーダ。
  242. 前記ビデオデコーダは、以下に従って前記フレーム時間間隔を導出し、
    (elemental_duration_in_tc_minus1[maxTiD]+1 )にClockTicksを乗ずる、請求項232から241の一項に記載のビデオデコーダ。
  243. 前記ビデオデータストリームは、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含み、前記ビデオデコーダは、前記表示を処理することによって前記ビデオデータストリームをデコードする、請求項236から242のいずれかに記載のビデオデコーダ。
  244. 前記ビデオデータストリームは、復号ユニットの数において前記ビデオデータストリームに対して可変であるかどうかを示す表示を含まない、請求項226から242のいずれかに記載のビデオデコーダ。
  245. アクセスユニット内の復号ユニットの前記数は、フレーム時間間隔と共通の遅延増分に依存する、請求項244に記載のビデオデコーダ。
  246. 前記ビデオデータストリームは、前記アクセスユニットの前記2つ以上の復号ユニットの前記復号ユニットのユニット情報補足拡張情報メッセージを復号することを含み、
    前記復号ユニットの前記復号ユニット情報補足拡張情報メッセージは、前記復号ユニットの前記デルタ時間情報を含み、前記ビデオデコーダは、前記復号ユニットの前記デルタ時間情報を使用して前記ビデオデータストリームを復号する、請求項232に記載のビデオデータストリーム。
  247. ビデオデータストリームは、ビデオパラメータセット又は前記ビデオデータストリームのシーケンスパラメータセットの最小ピクチャ期間フラグを含み、前記最小画像期間フラグは、一定のフレームレートがないときにフレーム時間間隔情報が存在するかどうかを示す、請求項232から246の一項に記載のビデオデコーダ。
  248. ビデオをビデオデータストリームへと符号化するための、また前記ビデオを復号するためのシステムであって、
    請求項216から231の一項に記載のビデオエンコーダ、及び
    請求項232から247のいずれかに記載のビデオデコーダを含み、
    前記ビデオエンコーダは、前記ビデオデータストリームがその中に符号化された前記ビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化し、
    前記ビデオデコーダは、前記ビデオデータストリームを受信して、前記ビデオデータストリームを前記ビデオに復号するものである、前記システム。
  249. ビデオデータストリームがその中に符号化されたビデオを有するように、前記ビデオを前記ビデオデータストリーム中に符号化するための方法であって、
    前記方法は、前記ビデオデータストリームが複数のアクセスユニットを含むように前記ビデオデータストリームを生成することを含み、
    前記方法は、前記ビデオデータストリームが、前記複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットの前記デルタ時間情報に依存するように、前記ビデオデータストリームを生成することを含む、前記方法。
  250. ビデオデータストリームを入力ビットストリームとして受信するための方法であって、前記ビデオデータストリームはその中に符号化されるビデオを有し、
    前記ビデオデータストリームは、複数のアクセスユニットを含み、
    前記方法は、前記ビデオデータストリームを復号して前記ビデオを復号することを含み、
    前記ビデオデータストリームは、前記複数のアクセスユニットのアクセスユニットの2つ以上の復号ユニットのそれぞれのデルタ時間情報を含み、前記アクセスユニットの前記2つ以上の復号ユニットの各復号ユニットの復号ユニット除去時間は、前記アクセスユニットのアクセスユニット除去時間に依存し、前記復号ユニットの前記デルタ時間情報に依存し、前記方法は、前記アクセスユニットの2つ以上の復号ユニットのそれぞれの前記デルタ時間情報を使用して前記ビデオデータストリームを復号することを含む、前記方法。
  251. コンピュータ又はシグナルプロセッサで実行されるときに請求項249又は250の方法を実装するためのコンピュータプログラム。
JP2022536875A 2019-12-20 2020-12-18 ビデオデータストリーム、ビデオエンコーダ、hrdタイミング修正のための装置と方法、及びスケーラブルでマージ可能なビットストリームのためのさらなる追加 Pending JP2023506879A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19218926.4 2019-12-20
EP19218926 2019-12-20
PCT/EP2020/087013 WO2021123159A1 (en) 2019-12-20 2020-12-18 Video data stream, video encoder, apparatus and methods for hrd timing fixes, and further additions for scalable and mergeable bitstreams

Publications (2)

Publication Number Publication Date
JP2023506879A true JP2023506879A (ja) 2023-02-20
JPWO2021123159A5 JPWO2021123159A5 (ja) 2023-12-20

Family

ID=69005360

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022536875A Pending JP2023506879A (ja) 2019-12-20 2020-12-18 ビデオデータストリーム、ビデオエンコーダ、hrdタイミング修正のための装置と方法、及びスケーラブルでマージ可能なビットストリームのためのさらなる追加

Country Status (9)

Country Link
US (1) US20230037902A1 (ja)
EP (1) EP4078960A1 (ja)
JP (1) JP2023506879A (ja)
KR (1) KR20220113400A (ja)
CN (1) CN114788281A (ja)
AU (1) AU2020406151A1 (ja)
CA (1) CA3164491A1 (ja)
TW (1) TWI808365B (ja)
WO (1) WO2021123159A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4140140A4 (en) 2020-05-21 2023-07-05 ByteDance Inc. PROGRESSIVE DECODING REFRESH SIGNALING AND REFERENCE PICTURE LISTS
CN115715466A (zh) 2020-05-22 2023-02-24 抖音视界有限公司 子比特流提取处理中的填充符有效载荷
CR20230153A (es) 2020-05-22 2023-05-16 Ge Video Compression Llc Codificador de video, decodificador de video, métodos para codificar y decodificar y flujo de datos de video para realizar conceptos avanzados de codificación de video (divisional exp. n°2022-0589)
CN115668949A (zh) * 2020-05-26 2023-01-31 字节跳动有限公司 编解码视频中的帧间层参考图片的标识
JP2023529431A (ja) 2020-06-08 2023-07-10 バイトダンス インコーポレイテッド 映像ピクチャにおけるサブピクチャ数の制約
KR20230019850A (ko) 2020-06-09 2023-02-09 바이트댄스 아이엔씨 서브픽처 레벨 및 버퍼링 정보의 시그널링
CN115769571A (zh) 2020-06-17 2023-03-07 字节跳动有限公司 视频编解码中的解码的图片缓冲器管理和子图片
CN116530083A (zh) * 2020-09-25 2023-08-01 抖音视界有限公司 视频比特流中的嵌套的和非嵌套的sei消息
EP4369722A1 (en) * 2021-07-03 2024-05-15 LG Electronics Inc. Transmission apparatus for point cloud data and method performed by transmission apparatus, and reception apparatus for point cloud data and method performed by reception apparatus
WO2023090906A1 (ko) * 2021-11-17 2023-05-25 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
KR20240125607A (ko) * 2021-12-13 2024-08-19 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
KR20240093609A (ko) * 2021-12-13 2024-06-24 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
EP4451690A1 (en) * 2021-12-14 2024-10-23 LG Electronics Inc. Transmission device for point cloud data and method performed by transmission device, and reception device for point cloud data and method performed by reception device
CN118679748A (zh) * 2021-12-15 2024-09-20 Lg电子株式会社 点云数据的发送装置和由发送装置执行的方法及点云数据的接收装置和由接收装置执行的方法
WO2023132605A1 (ko) * 2022-01-04 2023-07-13 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
KR20240136930A (ko) * 2022-01-11 2024-09-19 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
WO2023200291A1 (ko) * 2022-04-14 2023-10-19 엘지전자 주식회사 포인트 클라우드 데이터의 전송 장치와 이 전송 장치에서 수행되는 방법 및, 포인트 클라우드 데이터의 수신 장치와 이 수신 장치에서 수행되는 방법
KR20240034425A (ko) 2022-09-07 2024-03-14 현대모비스 주식회사 차량의 관리를 위한 장치

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015009693A1 (en) * 2013-07-15 2015-01-22 Sony Corporation Layer based hrd buffer management for scalable hevc
US10284858B2 (en) * 2013-10-15 2019-05-07 Qualcomm Incorporated Support of multi-mode extraction for multi-layer video codecs
WO2015056182A2 (en) * 2013-10-15 2015-04-23 Nokia Technologies Oy Video encoding and decoding
WO2015194179A1 (en) * 2014-06-17 2015-12-23 Sharp Kabushiki Kaisha Bitstream partitions operation

Also Published As

Publication number Publication date
WO2021123159A1 (en) 2021-06-24
TWI808365B (zh) 2023-07-11
CN114788281A (zh) 2022-07-22
KR20220113400A (ko) 2022-08-12
TW202133623A (zh) 2021-09-01
EP4078960A1 (en) 2022-10-26
CA3164491A1 (en) 2021-06-24
AU2020406151A1 (en) 2022-08-11
US20230037902A1 (en) 2023-02-09

Similar Documents

Publication Publication Date Title
JP2023506879A (ja) ビデオデータストリーム、ビデオエンコーダ、hrdタイミング修正のための装置と方法、及びスケーラブルでマージ可能なビットストリームのためのさらなる追加
TWI524744B (zh) 在視訊寫碼中用於視訊時序之時序資訊關係之圖像次序計數的發信
JP7355791B2 (ja) サブピクチャトラックの参照および処理
JP2022050372A (ja) ピクチャユニット構造における非vclのnalユニットのハンドリング
CN117061758B (zh) 用于实现高级视频编码概念的视频编码器、视频解码器、编码和解码方法以及视频数据流
JP2017507539A (ja) マルチレイヤコーディングにおいて回復点補足エンハンスメント情報(sei)メッセージと領域リフレッシュ情報seiメッセージとをコーディングするための方法
JP7513809B2 (ja) エンコーダ、デコーダ、および、フレキシブルにサイズ化された画像パーティションのための複雑な処理を伴う符号化方法と復号化方法
CN115715466A (zh) 子比特流提取处理中的填充符有效载荷
TWI789661B (zh) 用於虛擬參考解碼器和輸出層集的視頻資料流、視頻編碼器、裝置及方法
KR20230004339A (ko) 사전선택의 목적의 시그널링
KR20230004340A (ko) 어느 비디오 데이터 유닛들이 타겟 픽처-인-픽처 영역을 나타내는지의 표시
CN116325759A (zh) 用于处理媒体文件的方法及其设备
JP2022549451A (ja) 復号装置、符号化装置、および方法
KR102717190B1 (ko) 비디오 인코더, 비디오 디코더, 인코딩 및 디코딩을 위한 방법 및 고급 비디오 코딩 개념을 실현하기 위한 비디오 데이터 스트림
CN116210223B (zh) 媒体文件处理方法及其装置
CN115804090A (zh) 子图片子比特流提取的视频参数集约束
CN116210223A (zh) 媒体文件处理方法及其装置
CN116210225A (zh) 生成媒体文件的方法及设备

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231211

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231211