JP6453347B2 - Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート - Google Patents
Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート Download PDFInfo
- Publication number
- JP6453347B2 JP6453347B2 JP2016544788A JP2016544788A JP6453347B2 JP 6453347 B2 JP6453347 B2 JP 6453347B2 JP 2016544788 A JP2016544788 A JP 2016544788A JP 2016544788 A JP2016544788 A JP 2016544788A JP 6453347 B2 JP6453347 B2 JP 6453347B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- layer
- bitstream
- picture
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims description 148
- 230000011664 signaling Effects 0.000 claims description 56
- 230000002123 temporal effect Effects 0.000 claims description 33
- 238000004891 communication Methods 0.000 claims description 17
- 230000006978 adaptation Effects 0.000 claims description 3
- 239000010410 layer Substances 0.000 description 542
- 239000011229 interlayer Substances 0.000 description 75
- 238000012545 processing Methods 0.000 description 43
- 239000000523 sample Substances 0.000 description 28
- 230000008569 process Effects 0.000 description 25
- 238000013139 quantization Methods 0.000 description 25
- 239000013598 vector Substances 0.000 description 19
- 238000005192 partition Methods 0.000 description 16
- 238000012952 Resampling Methods 0.000 description 15
- 230000003044 adaptive effect Effects 0.000 description 12
- 230000006835 compression Effects 0.000 description 12
- 238000007906 compression Methods 0.000 description 12
- 238000003860 storage Methods 0.000 description 12
- 230000005540 biological transmission Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 11
- 238000003491 array Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000000638 solvent extraction Methods 0.000 description 7
- 230000009286 beneficial effect Effects 0.000 description 6
- 238000013500 data storage Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 230000007774 longterm Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 241000023320 Luma <angiosperm> Species 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 4
- 238000011084 recovery Methods 0.000 description 4
- 239000002356 single layer Substances 0.000 description 4
- 101150114886 NECTIN1 gene Proteins 0.000 description 3
- 102100023064 Nectin-1 Human genes 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 239000002131 composite material Substances 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 241000985610 Forpus Species 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000945 filler Substances 0.000 description 1
- 238000012432 intermediate storage Methods 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000006249 magnetic particle Substances 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000005022 packaging material Substances 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000013074 reference sample Substances 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
- H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
- H04N19/39—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability involving multiple description coding [MDC], i.e. with separate layers being structured as independently decodable descriptions of input picture data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
[0029]ビデオ画像、TV画像、静止画像、またはビデオレコーダもしくはコンピュータによって生成された画像などの、デジタル画像は、水平ラインおよび垂直ラインで構成されたピクセルまたはサンプルからなり得る。単一の画像中のピクセルの数は一般に数万個である。各ピクセルは、一般に、ルミナンス情報とクロミナンス情報とを含む。圧縮がなければ、画像エンコーダから画像デコーダに搬送されるべき情報の量は、リアルタイム画像伝送を不可能にさせるほど非常に大きい。送信されるべき情報の量を低減するために、JPEG、MPEGおよびH.263規格など、いくつかの異なる圧縮方法が開発された。
[0035]図1Aは、本開示で説明する態様による技法を利用し得る例示的なビデオコーディングシステム10を示すブロック図である。本明細書で使用し説明する「ビデオコーダ」という用語は、総称的にビデオエンコーダとビデオデコーダの両方を指す。本開示では、「ビデオコーディング」または「コーディング」という用語は、ビデオ符号化とビデオ復号とを総称的に指すことがある。ビデオエンコーダおよびビデオデコーダに加えて、本出願に記載される態様は、トランスコーダ(たとえば、ビットストリームを復号し別のビットストリームを再符号化することができるデバイス)およびミドルボックス(たとえば、ビットストリームを修正、変換、および/または別のやり方で操作することができるデバイス)などの、他の関係するデバイスに拡張され得る。
[0049]上記で簡略に述べられたように、ビデオエンコーダ20はビデオデータを符号化する。ビデオデータは、1つまたは複数のピクチャを備え得る。ピクチャの各々は、ビデオの一部を形成する静止画像である。いくつかの事例では、ピクチャは、ビデオ「フレーム」と呼ばれることがある。ビデオエンコーダ20がビデオデータを符号化するとき、ビデオエンコーダ20は、ビットストリームを生成し得る。ビットストリームは、ビデオデータのコーディングされた表現を形成するビットのシーケンスを含み得る。ビットストリームは、コード化ピクチャと、関連するデータとを含み得る。コード化ピクチャは、ピクチャのコーディングされた表現である。
[0073]図2Aは、本開示で説明する態様による技法を実装し得るビデオエンコーダの一例を示すブロック図である。ビデオエンコーダ20は、HEVCの場合など、ビデオフレームの単一のレイヤを処理するように構成され得る。さらに、ビデオエンコーダ20は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。一例として、予測処理ユニット100は、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。別の実施形態では、ビデオエンコーダ20は、本開示で説明する技法のいずれかまたはすべてを実行するように構成された随意のレイヤ間予測ユニット128を含む。他の実施形態では、レイヤ間予測は、予測処理ユニット100(たとえば、インター予測ユニット121および/またはイントラ予測ユニット126)によって実行され得、その場合、レイヤ間予測ユニット128は省略され得る。しかしながら、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオエンコーダ20の様々な構成要素間で共有され得る。いくつかの例では、追加または代替として、プロセッサ(図示せず)が、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。
[00106]図2Bは、本開示で説明する態様による技法を実装し得るマルチレイヤビデオエンコーダ23の一例を示すブロック図である。ビデオエンコーダ23は、SHVCおよびマルチビューコーディングの場合など、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオエンコーダ23は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。
[00113]図3Aは、本開示で説明する態様による技法を実装し得るビデオデコーダの一例を示すブロック図である。ビデオデコーダ30は、HEVCの場合など、ビデオフレームの単一のレイヤを処理するように構成され得る。さらに、ビデオデコーダ30は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。一例として、動き補償ユニット162および/またはイントラ予測ユニット164は、本開示で説明する技法のうちのいずれかまたはすべてを実行するように構成され得る。一実施形態では、ビデオデコーダ30は、本開示で説明する技法のいずれかまたはすべてを実行するように構成されたレイヤ間予測ユニット166を随意に含み得る。他の実施形態では、レイヤ間予測は、予測処理ユニット152(たとえば、動き補償ユニット162および/またはイントラ予測ユニット164)によって実行され得、その場合、レイヤ間予測ユニット166は省略され得る。しかしながら、本開示の態様はそのように限定されない。いくつかの例では、本開示で説明する技法は、ビデオデコーダ30の様々な構成要素の間で共有され得る。いくつかの例では、追加または代替として、プロセッサ(図示せず)が、本開示で説明する技法のいずれかまたはすべてを実行するように構成され得る。
[00129]図3Bは、本開示で説明する態様による技法を実装し得るマルチレイヤビデオデコーダ33の一例を示すブロック図である。ビデオデコーダ33は、SHVCおよびマルチビューコーディングの場合など、マルチレイヤビデオフレームを処理するように構成され得る。さらに、ビデオデコーダ33は、本開示の技法のいずれかまたはすべてを実行するように構成され得る。
[00135]いくつかのビデオコーディング方式は、ビットストリームが、ビットストリームの中でそれらのランダムアクセスポイントに先行するいかなるピクチャも復号する必要なく、それらのランダムアクセスポイントのいずれかから始めて復号され得るような、様々なランダムアクセスポイントをビットストリーム全体にわたって提供し得る。そのようなビデオコーディング方式では、出力順序においてランダムアクセスポイントに追従するすべてのピクチャ(たとえば、ランダムアクセスポイントを提供するピクチャと同じアクセスユニットの中にあるピクチャを含む)は、ランダムアクセスポイントに先行するいかなるピクチャも使用することなく正しく復号され得る。たとえば、ビットストリームの一部分が送信の間または復号の間に失われても、デコーダは、次のランダムアクセスポイントから始めてビットストリームの復号を再開することができる。ランダムアクセスのサポートは、たとえば、動的なストリーミングサービス、シーク動作、チャネル切替えなどを容易にし得る。
[00138]いくつかの例示的な実装形態(たとえば、MV−HEVCおよびSHVC)では、特定のレイヤについて、どの1つまたは複数のレイヤが特定のレイヤのレイヤ間予測のために使用され得るかを指定する、direct_dependency_flagと呼ばれるシンタックス要素がある。一実施形態では、direct_dependency_flagは、ビデオデータのあるレイヤがビデオデータの別のレイヤに基づいて(またはそれに依存して)コーディングされるかどうかを指定する2次元アレイである。そのような2次元アレイは値direct_dependency_flag[i][j]の形態をとり得、ここで、iは、コーディングされるべきレイヤ(たとえば、現在レイヤ)に対応し、jは、参照されるべきレイヤ(たとえば、参照レイヤ)に対応する。この例では、参照レイヤが現在レイヤの直接参照レイヤでない場合、direct_dependency_flagは0であり得、参照レイヤが現在レイヤの直接参照レイヤである場合、direct_dependency_flagは1であり得る。一実施形態では、direct_dependency_flagが省略されるかまたは未定義である場合、値は0であると推定される。別の実施形態では、direct_dependency_flagが省略されるかまたは未定義である場合、値は1であると推定される。一実施形態では、レイヤAがレイヤBの直接参照レイヤである場合、そのことは、レイヤBがレイヤAの中に含まれる情報に少なくとも部分的に基づいてコーディングされ得ることを意味する。別の実施形態では、レイヤAがレイヤBの直接参照レイヤである場合、そのことは、レイヤBがレイヤAの中に含まれる情報に少なくとも部分的に基づいてコーディングされることを意味する。いくつかの実施形態では、より小さいレイヤIDを有するすべてのレイヤ(たとえば、下位レイヤ)は、特定のレイヤの直接参照レイヤである。他の実施形態では、下位レイヤのうちの一部だけが特定のレイヤの直接参照レイヤであり得る。たとえば、エンコーダは、計算量を低減するために、下位レイヤのうちの一部だけを特定のレイヤの直接依存性レイヤとして選定し得る。適用可能なコーディング方式(たとえば、HEVC)は、特定のレイヤがいくつの直接参照レイヤを有し得るかに関する限界を有することがある(たとえば、空間スケーラビリティの場合、1つ以下の参照レイヤ)。一実施形態では、direct_dependency_flagフラグは、ビデオパラメータセット(VPS)の中でシグナリングされ、コード化ビデオシーケンス(CVS:coded video sequence)全体に適用される。
[00139]現在レイヤをコーディングするために使用される情報は、参照レイヤのテクスチャ情報(たとえば、ピクセル値)、参照レイヤの動き情報(たとえば、動きベクトル、参照インデックス、予測方向など)を含み得る。しかしながら、現在レイヤをコーディングするために使用され得る参照レイヤの情報は、本明細書で説明するものに限定されず、参照レイヤの中に含まれるか、または参照レイヤの一部である、任意の情報であり得る。
[00142]いくつかの既存のコーディング方式では、参照レイヤまたはベースレイヤのコーデックは、任意の数のコーデックであり得る。たとえば、HEVCコーデックが参照レイヤ向けに使用されてよく、またはH.264/AVCが使用されてよく、もしくは一般的な非HEVCコーデックが使用されてよい。加えて、使用されるべきコーデックを示すパラメータセットの中にフラグがあってよい。たとえば、ビデオパラメータセット(VPS)の中のフラグは、参照レイヤをコーディングするためにHEVCコーデックが使用されるのか、それとも非HEVC(たとえば、AVC)コーデックが使用されるのかを示し得る。一例では、フラグavc_base_layer_flagは、参照レイヤコーデックが勧告ITU−T H.264|国際規格ISO/IEC14496−10に従うビデオコーディング規格に適合することを示す、1に等しい値を有し得、代替的に、参照レイヤコーデックがHEVC仕様に適合することを示す、0に等しい値を有し得る。したがって、エンハンスメントレイヤを符号化または復号するように構成されたコーディングデバイスは、参照レイヤに関してAVCコーデックが使用されるのか、HEVCコーデックが使用されるのか(それとも、何らかの他の非HEVCコーデックが使用されるのか)に関する情報を有し得る。
[00144]いくつかの設計は、H.264/AVC(または、他の非HEVC)ベースレイヤの、SHVCベースのエンハンスメントレイヤを用いたサポートを可能にし得る。したがって、2つ以上のデコーダが、これらの技法を使用してビデオを復号するために使用され得る。たとえば、1つのデコーダが、当技術分野で既知であるような非HEVCベースレイヤを復号し得る。1つまたは複数のSHVCベースのエンハンスメントレイヤを復号するために、HEVCデコーダなどの別のデコーダが使用され得る。いくつかの態様では、非HEVCベースレイヤが使用されるとき、HEVCデコーダがこれらのレイヤを復号することを可能にし得る、エンハンスメントレイヤ向けの設計を提供することが有益であり得る。HEVCデコーダの観点からすれば、これらのベースレイヤは、外部ソースまたは外部の手段によって復号され得る。したがって、HEVCデコーダは、ベースレイヤからのいかなる情報も受信しなくてよく、または、ベースレイヤからの各フレームのための画像情報などの、ベースレイヤからの情報の限定されたサブセットのみを受信してよい。
[00151]上述されたように、SHVCベースのエンハンスメントレイヤは、H.264/AVCコーデックなどの非HEVCコーデックを使用したベースレイヤとともに使用され得る。しかしながら、これらのSHVCベースのエンハンスメントレイヤは、SHVCベースのエンハンスメントレイヤと非HEVCベースレイヤの組合せに起因するいくつかの問題に遭遇することがある。いくつかの課題は、HEVCベースレイヤを使用するときに起こり得ず、復号ピクチャがAVCコーダなどの外部ソースによってSHVCコーダに提供されるときのような、非HEVCベースレイヤを使用するときにのみ起こり得る。
[00156]いくつかの態様では、非HEVCベースレイヤと1つまたは複数のSVHCベースのエンハンスメントレイヤとを使用するとき、DPBパラメータの何らかのシグナリングは非効率であり得る。たとえば、ベースレイヤが非HEVCベースレイヤであるとき、いくつかのパラメータは制約された値を有し得る。たとえば、ベースレイヤが非HEVCレイヤであるときはいつも、所与のパラメータは単一の特定の値を有し得る。したがって、これらの値はベースレイヤが非HEVCレイヤであると示すことに基づいて推定され得、または他の情報に基づいて推定され得るので、アレイ(または、他のデータ構造)の中の各要素に対してこれらの値をシグナリングすることは冗長であり得る。
[00169]図4は、本開示の一実施形態による、ビデオ情報をコーディングするための方法400を示すフローチャートである。図4に示すステップは、エンコーダ(たとえば、図2Aまたは図2Bに示すようなビデオエンコーダ)、デコーダ(たとえば、図3Aまたは図3Bに示すようなビデオデコーダ)、または任意の他の構成要素によって実行され得る。便宜上、方法400について、エンコーダ、デコーダ、または別の構成要素であり得る、コーダによって実行されるものとして説明する。方法は、復号の方法または符号化の方法であり得る。
[00174]いくつかの態様では、ベースレイヤが非HEVCベースレイヤであるとき、VPSビデオ有用性情報(VUI:video usability information)メタデータを含む、VPS拡張の中でのベースレイヤのための不必要なシグナリングを避けることが望ましくあり得る。たとえば、VPS VUIは、ベースレイヤが非HEVCコーデックを使用して符号化されているという知識に基づいて簡単に推定され得るいくつかの値を含み得、したがって、この冗長な情報をビデオの中でシグナリングし続けることが不必要であり得る。
[00187]図5は、本開示の一実施形態による、ビデオ情報をコーディングするための方法500を示すフローチャートである。図5に示すステップは、エンコーダ(たとえば、図2Aまたは図2Bに示すようなビデオエンコーダ)、デコーダ(たとえば、図3Aまたは図3Bに示すようなビデオデコーダ)、または任意の他の構成要素によって実行され得る。便宜上、方法500について、エンコーダ、デコーダ、または別の構成要素であり得る、コーダによって実行されるものとして説明する。方法は、復号の方法または符号化の方法であり得る。
[00193]いくつかの態様では、アクセスユニットに対して外部ソース(ベースレイヤデコーダなどの)によって提供される復号ベースレイヤピクチャはDPBに記憶されず、けれどもそれは「長期の参照用に使用される」としてマークされ、レイヤ間予測参照のために後で使用される。したがって、そのような復号ピクチャは、DPBの中にない限りレイヤ間予測参照などの参照のために使用され得ないので、このことが問題となり得る。
[00197]図6は、本開示の一実施形態による、ビデオ情報を復号するための方法600を示すフローチャートである。図6に示すステップは、デコーダ(たとえば、図3Aまたは図3Bに示すビデオデコーダ)、または任意の他の構成要素によって実行され得る。いくつかの態様では、方法は、参照レイヤがビットストリームの中に含まれるかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれる値などの、フラグまたは変数の値に基づいて決定する。そのようなフラグまたは他のインジケータは、外部ソースから受信され得、または方法によって決定され得る。いくつかの態様では、決定するための手段はプロセッサを含み得る。
[00203]いくつかの態様では、1つまたは複数のエンハンスメントレイヤ上で動作しているSHVCデコーダのようなデコーダが、非HVECベースレイヤのいくつかの特性を知っていることが有益であり得る。たとえば、所与のベースレイヤピクチャがIRAPピクチャであるか否かを外部ソースがシグナリングすることを、デコーダが要求することが望ましくあり得る。ベースレイヤピクチャがIRAPピクチャである場合、IDRピクチャ、CRAピクチャ、またはBLAピクチャを規定し得るIRAP NALユニットタイプを、外部ソースがさらにシグナリングすれば望ましくあり得る。
[00212]図7は、本開示の一実施形態による、ビデオ情報をコーディングするための方法700を示すフローチャートである。図7に示すステップは、エンコーダ(たとえば、図2Aまたは図2Bに示すようなビデオエンコーダ)、デコーダ(たとえば、図3Aまたは図3Bに示すようなビデオデコーダ)、または任意の他の構成要素によって実行され得る。便宜上、方法700について、エンコーダ、デコーダ、または別の構成要素であり得る、コーダによって実行されるものとして説明する。
[00217]概して、現在のアクセスユニットに対して、ベースレイヤ情報が外部ソースによって提供されないか、または外部ソースが情報の少なくとも差し止められた(proscribed)セットを提供しなければならないかのいずれかである。情報が提供されない場合、ベースレイヤピクチャがベースレイヤビットストリームにおけるアクセスユニットの中で提供されたかどうかにかかわらず、ベースレイヤピクチャは現在のアクセスユニットに対するレイヤ間予測のために使用されない。あるいは、外部ソースは、(1)ベースレイヤ復号ピクチャの復号されたサンプル値、(2)ルーマサンプルにおける幅および高さ、カラーフォーマット、個別カラープレーンフラグ、ルーマビット深度、ならびにクロマビット深度を含むベースレイヤ復号ピクチャの表現フォーマット、(3)ベースレイヤピクチャがIRAPピクチャであるか否かについての情報、および、はいの場合、IDRピクチャ、CRAピクチャ、またはBLAピクチャを規定し得るIRAP NALユニットタイプ、ならびに随意に、(4)ピクチャがフレームであるのかそれともフィールドであるのか、および、フィールドのとき、フィールドパリティ(トップフィールドまたはボトムフィールド)であるのか、を提供することを差し止められ得る。ピクチャがフレームであるのかそれともフィールドであるのかについての情報が提供されないとき、復号ピクチャはフレームピクチャであると推定され得る。
[00223]以下の例示的なコードセグメントは、VPS VUIシンタックスの一部として使用され得、ベースレイヤがHEVCレイヤであるかどうかに少なくとも部分的に基づいて、いくつかのフラグを設定すること、または設定しないことを定め得る。
[00230]概して、general_profile_spaceの値が提供されないとき、その値は0であると推定される。ただし、general_profile_spaceの値が1に等しい場合、0に等しいbase_layer_codec_typeの値は、ベースレイヤが勧告ITU−T H.264|ISO/IEC14496−10に適合することを規定し得る。両端値を含む1〜63としての範囲の中のbase_layer_codec_typeの他の値は、将来の使用のためにITU−T|ISO/IECによって予約済みであり得る。
[00233]概して、ビデオのベースレイヤがAVCベースレイヤであるとき(すなわち、AvcBaseLayerFlagが1に等しいとき)、以下のことが適用される。
[00238]本明細書で開示された情報および信号は、多種多様な技術および技法のいずれかを使用して表され得る。たとえば、上記の説明全体にわたって参照され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、およびチップは、電圧、電流、電磁波、磁場もしくは磁性粒子、光場もしくは光学粒子、またはそれらの任意の組合せによって表され得る。
以下に本願の出願当初の特許請求の範囲に記載された発明を付記する。
[C1] ビデオ情報をコーディングする方法であって、
参照レイヤがビットストリームの中に含まれるかどうかを決定することと、
復号ピクチャバッファのための1つまたは複数のパラメータの表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定することと、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記決定された表示に少なくとも部分的に基づいて、前記ビデオ情報をコーディングすることと
を備える方法。
[C2] 前記参照レイヤが、非HEVC(高効率ビデオコーディング)コーデックに従ってコーディングされる、C1に記載の方法。
[C3] 前記参照レイヤが、アドバンストビデオコーディング(AVC)コーデックに従ってコーディングされる、C1に記載の方法。
[C4] 前記参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することは、前記参照レイヤが前記ビットストリームの中に含まれるかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれる値に基づいて決定することを備える、C1に記載の方法。
[C5] 前記1つまたは複数のパラメータが、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備える、C1に記載の方法。
[C6] 前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定することは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記表示が0の値を有するべきと決定することを備える、C5に記載の方法。
[C7] 前記1つまたは複数のパラメータが、最大レイテンシをシグナリングするパラメータを備える、C1に記載の方法。
[C8] 前記1つまたは複数のパラメータが、出力ピクチャの最大リオーダーをシグナリングするパラメータを備える、C1に記載の方法。
[C9] 1つまたは複数のパラメータの前記表示を備える1つまたは複数のシンタックス要素を前記ビットストリームの中で生成することをさらに備え、ここにおいて、ビデオ情報をコーディングすることが、ビデオ情報を符号化することのうちの少なくとも1つを備える、C1に記載の方法。
[C10] 1つまたは複数のパラメータの前記表示を決定することが、1つまたは複数のシンタックス要素を前記ビットストリームから復号することを備え、ここにおいて、ビデオ情報をコーディングすることが、前記ビデオ情報を復号することを備える、C1に記載の方法。
[C11] ビデオ情報をコーディングするように構成された装置であって、
ビットストリームに関連付けられたビデオ情報を記憶するように構成されたメモリと、
前記メモリと通信しているプロセッサとを備え、前記プロセッサは、
参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することと、
復号ピクチャバッファのための1つまたは複数のパラメータの表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定することと、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記決定された表示に少なくとも部分的に基づいて、前記ビデオ情報をコーディングすることとを行うように構成される、
装置。
[C12] 前記参照レイヤが、非HEVC(高効率ビデオコーディング)コーデックに従ってコーディングされる、C11に記載の装置。
[C13] 前記参照レイヤが、アドバンストビデオコーディング(AVC)コーデックに従ってコーディングされる、C11に記載の装置。
[C14] 前記プロセッサは、前記参照レイヤが前記ビットストリームの中に含まれるかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれる値に基づいて決定することを介して、前記参照レイヤが前記ビットストリームの中に含まれるかどうかを決定するように構成される、C11に記載の装置。
[C15] 前記1つまたは複数のパラメータが、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備える、C11に記載の装置。
[C16] 前記プロセッサは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記表示が0の値を有するべきと決定することを介して、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定するように構成される、C15に記載の装置。
[C17] 前記1つまたは複数のパラメータが、最大レイテンシをシグナリングするパラメータを備える、C11に記載の装置。
[C18] 前記1つまたは複数のパラメータが、出力ピクチャの最大リオーダーをシグナリングするパラメータを備える、C11に記載の装置。
[C19] 前記プロセッサは、1つまたは複数のパラメータの前記表示を備える1つまたは複数のシンタックス要素を前記ビットストリームの中で生成するように構成されたビデオエンコーダを備え、ここにおいて、前記プロセッサが、前記ビデオ情報を符号化するように構成される、C11に記載の装置。
[C20] 前記プロセッサは、1つまたは複数のパラメータの前記表示を、1つまたは複数のシンタックス要素を前記ビットストリームから復号することによって決定するように構成されたビデオデコーダを備え、ここにおいて、ビデオ情報をコーディングすることが、前記ビデオ情報を復号することを備え、ここにおいて、前記プロセッサが、前記ビデオ情報を復号するように構成される、C11に記載の装置。
[C21] 実行されたとき、装置に、
参照レイヤがビットストリームの中に含まれるかどうかを決定することと、
復号ピクチャバッファのための1つまたは複数のパラメータの表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定することと、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記決定された表示に少なくとも部分的に基づいて、前記ビデオ情報をコーディングすることと
を備えるプロセスを実行させるコードを備える非一時的コンピュータ可読媒体。
[C22] 前記参照レイヤが、非HEVC(高効率ビデオコーディング)コーデックまたはアドバンストビデオコーディング(AVC)コーデックのうちの少なくとも1つにおいてコーディングされる、C21に記載の非一時的コンピュータ可読媒体。
[C23] 実行されたとき、前記装置に、前記参照レイヤが前記ビットストリームの中に含まれないかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれる値に基づいて決定することを介して、前記参照レイヤが前記ビットストリームの中に含まれるかどうかを決定させるコードをさらに備えるC21に記載の非一時的コンピュータ可読媒体。
[C24] 前記1つまたは複数のパラメータが、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータ、最大レイテンシをシグナリングするパラメータ、または出力ピクチャの最大リオーダーをシグナリングするパラメータを備える、C21に記載の非一時的コンピュータ可読媒体。
[C25] ビデオ情報をコーディングするように構成されたビデオコーディングデバイスであって、
参照レイヤがビットストリームの中に含まれるかどうかを決定するための手段と、
復号ピクチャバッファのための1つまたは複数のパラメータの表示を、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて決定するための手段と、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記決定された表示に少なくとも部分的に基づいて、前記ビデオ情報をコーディングするための手段と
を備えるビデオコーディングデバイス。
[C26] 前記参照レイヤが、非HEVC(高効率ビデオコーディング)コーデックおよびアドバンストビデオコーディング(AVC)コーデックのうちの少なくとも1つにおいてコーディングされる、C25に記載のビデオコーディングデバイス。
[C27] 前記参照レイヤが前記ビットストリームの中に含まれるかどうかを決定するための手段は、前記参照レイヤが前記ビットストリームの中に含まれないかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれる値に基づいて決定するための手段を備える、C25に記載のビデオコーディングデバイス。
[C28] 前記1つまたは複数のパラメータが、最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータ、最大レイテンシをシグナリングするパラメータ、または出力ピクチャの最大リオーダーをシグナリングするパラメータを備える、C25に記載のビデオコーディングデバイス。
Claims (9)
- ビデオ情報を復号する方法であって、
エンハンスメントレイヤを備えるビットストリームを受信することと、
フラグの値に基づいて、前記エンハンスメントレイヤのための参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することと、
前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、復号ピクチャバッファのための1つまたは複数のパラメータの値を推定することと、ここにおいて、前記1つまたは複数のパラメータは、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備え、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値を推定することは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値が0の値を有するべきと決定することを備える、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記推定された値を使用して、前記エンハンスメントレイヤを復号することと
を備える方法。 - 前記参照レイヤが、アドバンストビデオコーディング(AVC)コーデックに従ってコーディングされる、請求項1に記載の方法。
- 前記参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することは、前記参照レイヤが前記ビットストリームの中に含まれるかどうかを、ビデオパラメータセット、シーケンスパラメータセット、ピクチャパラメータセット、または適応パラメータセットのうちの1つの中に含まれるフラグの値に基づいて決定することを備える、請求項1に記載の方法。
- 前記1つまたは複数のパラメータが、最大レイテンシをシグナリングするパラメータを備える、請求項1に記載の方法。
- 前記1つまたは複数のパラメータが、出力ピクチャの最大リオーダーをシグナリングするパラメータを備える、請求項1に記載の方法。
- ビデオ情報を符号化する方法であって、
エンハンスメントレイヤを備えるビットストリームを受信することと、
フラグの値に基づいて、前記エンハンスメントレイヤのための参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することと、
前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、復号ピクチャバッファのための1つまたは複数のパラメータの値を推定することと、ここにおいて、前記1つまたは複数のパラメータは、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備え、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値を推定することは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値が0の値を有するべきと決定することを備える、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記推定された値を使用して、前記エンハンスメントレイヤを符号化することと
を備える方法。 - ビデオ情報を復号するように構成された装置であって、
前記ビデオ情報を記憶するように構成されたメモリと、
前記メモリと通信しているプロセッサとを備え、前記プロセッサは、
エンハンスメントレイヤを備えるビットストリームを受信することと、
フラグの値に基づいて、前記エンハンスメントレイヤのための参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することと、
前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、復号ピクチャバッファのための1つまたは複数のパラメータの値を推定することと、ここにおいて、前記1つまたは複数のパラメータは、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備え、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値を推定することは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値が0の値を有するべきと決定することを備える、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記推定された値を使用して、前記エンハンスメントレイヤを復号することと
を行うように構成される、
装置。 - ビデオ情報を符号化するように構成された装置であって、
前記ビデオ情報を記憶するように構成されたメモリと、
前記メモリと通信しているプロセッサとを備え、前記プロセッサは、
第1のコーデックを使用して符号化されるべきエンハンスメントレイヤを備えるビットストリームを受信することと、
フラグの値に基づいて、前記エンハンスメントレイヤのための参照レイヤが前記ビットストリームの中に含まれるかどうかを決定することと、
前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、復号ピクチャバッファのための1つまたは複数のパラメータの値を推定することと、ここにおいて、前記1つまたは複数のパラメータは、復号されるべき最上位の時間サブレイヤ用の前記復号ピクチャバッファの最大サイズをシグナリングするパラメータを備え、前記参照レイヤが前記ビットストリームの中に含まれるかどうかに基づいて、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値を推定することは、前記参照レイヤが前記ビットストリームの中に含まれない場合、前記最上位の時間サブレイヤ用の前記復号ピクチャバッファの前記最大サイズをシグナリングする前記パラメータの前記値が0の値を有するべきと決定することを備える、
前記復号ピクチャバッファのための前記1つまたは複数のパラメータの前記推定された値を使用して、前記ビデオ情報を符号化することと
を行うように構成される、
装置。 - 実行されたとき、装置に、請求項1〜請求項6に記載の方法を実行させるコードを備える非一時的コンピュータ可読媒体。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201461925149P | 2014-01-08 | 2014-01-08 | |
US61/925,149 | 2014-01-08 | ||
US14/590,897 US20150195549A1 (en) | 2014-01-08 | 2015-01-06 | Support of non-hevc base layer in hevc multi-layer extensions |
US14/590,897 | 2015-01-06 | ||
PCT/US2015/010472 WO2015105868A1 (en) | 2014-01-08 | 2015-01-07 | Support of non-hevc base layer in hevc multi-layer extensions |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017508338A JP2017508338A (ja) | 2017-03-23 |
JP2017508338A5 JP2017508338A5 (ja) | 2018-01-25 |
JP6453347B2 true JP6453347B2 (ja) | 2019-01-16 |
Family
ID=53496191
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016544807A Active JP6591425B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
JP2016544809A Active JP6517219B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
JP2016544788A Active JP6453347B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
JP2016544806A Active JP6591424B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016544807A Active JP6591425B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
JP2016544809A Active JP6517219B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016544806A Active JP6591424B2 (ja) | 2014-01-08 | 2015-01-07 | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート |
Country Status (8)
Country | Link |
---|---|
US (4) | US10547834B2 (ja) |
EP (4) | EP3092807B1 (ja) |
JP (4) | JP6591425B2 (ja) |
KR (4) | KR102321238B1 (ja) |
CN (4) | CN105900430B (ja) |
BR (2) | BR112016015988B1 (ja) |
CA (4) | CA2932508A1 (ja) |
WO (4) | WO2015105890A1 (ja) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9787966B2 (en) * | 2012-09-04 | 2017-10-10 | Industrial Technology Research Institute | Methods and devices for coding interlaced depth data for three-dimensional video content |
US10085017B2 (en) * | 2012-11-29 | 2018-09-25 | Advanced Micro Devices, Inc. | Bandwidth saving architecture for scalable video coding spatial mode |
US10212437B2 (en) * | 2013-07-18 | 2019-02-19 | Qualcomm Incorporated | Device and method for scalable coding of video information |
US10547834B2 (en) | 2014-01-08 | 2020-01-28 | Qualcomm Incorporated | Support of non-HEVC base layer in HEVC multi-layer extensions |
US9402083B2 (en) * | 2014-04-24 | 2016-07-26 | Vidyo, Inc. | Signaling conformance points using profile space |
US10455242B2 (en) | 2015-03-04 | 2019-10-22 | Qualcomm Incorporated | Signaling output indications in codec-hybrid multi-layer video coding |
WO2016204481A1 (ko) * | 2015-06-16 | 2016-12-22 | 엘지전자 주식회사 | 미디어 데이터 전송 장치, 미디어 데이터 수신 장치, 미디어 데이터 전송 방법, 및 미디어 데이터 수신 방법 |
JP2020515169A (ja) * | 2017-03-20 | 2020-05-21 | シャープ株式会社 | メディアアプリケーションフォーマットでスケーラブル動画像をシグナリングするためのシステム及び方法 |
US20190141320A1 (en) * | 2017-11-07 | 2019-05-09 | Qualcomm Incorporated | Enhanced reference picture management in video coding |
KR102553150B1 (ko) * | 2018-03-23 | 2023-07-10 | 삼성전자주식회사 | 외부 전자 장치와 이미지를 처리하는 전자 장치 및 그 동작 방법 |
GB201814693D0 (en) * | 2018-09-10 | 2018-10-24 | Crayonano As | Semiconductor devices |
MX2021011021A (es) * | 2019-03-11 | 2021-11-12 | Huawei Tech Co Ltd | Imágenes con tipos de unidad nal mezclados. |
US20220272342A1 (en) * | 2019-07-05 | 2022-08-25 | V-Nova International Limited | Quantization of residuals in video coding |
WO2021025485A1 (ko) * | 2019-08-06 | 2021-02-11 | 현대자동차주식회사 | 비디오 부호화 및 복호화를 위한 엔트로피 코딩 |
CN113395460B (zh) * | 2020-03-11 | 2022-07-19 | 浙江宇视科技有限公司 | 一种视频解码方法、装置、设备及可读存储介质 |
KR102377449B1 (ko) * | 2020-07-31 | 2022-03-22 | 이화여자대학교 산학협력단 | 다중 코덱 기반의 전방위 몰입형 비디오에 대한 디코딩 방법 및 디코딩 장치 |
US11962936B2 (en) | 2020-09-29 | 2024-04-16 | Lemon Inc. | Syntax for dependent random access point indication in video bitstreams |
CN117716688A (zh) * | 2021-03-30 | 2024-03-15 | 交互数字Ce专利控股有限公司 | 用于视频编码的外部增强预测 |
Family Cites Families (96)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5510840A (en) * | 1991-12-27 | 1996-04-23 | Sony Corporation | Methods and devices for encoding and decoding frame signals and recording medium therefor |
JP2000333163A (ja) * | 1999-05-24 | 2000-11-30 | Sony Corp | 復号装置及び方法、符号化装置及び方法、画像処理システム、画像処理方法 |
JP2003319391A (ja) | 2002-04-26 | 2003-11-07 | Sony Corp | 符号化装置および方法、復号装置および方法、記録媒体、並びにプログラム |
US8995536B2 (en) * | 2003-07-23 | 2015-03-31 | Broadcom Corporation | System and method for audio/video synchronization |
US7724827B2 (en) * | 2003-09-07 | 2010-05-25 | Microsoft Corporation | Multi-layer run level encoding and decoding |
US7133046B2 (en) * | 2003-10-31 | 2006-11-07 | Broadcom Corporation | System, method, and apparatus for display manager |
EP1692872A1 (en) | 2003-12-03 | 2006-08-23 | Koninklijke Philips Electronics N.V. | System and method for improved scalability support in mpeg-2 systems |
US8619860B2 (en) * | 2005-05-03 | 2013-12-31 | Qualcomm Incorporated | System and method for scalable encoding and decoding of multimedia data using multiple layers |
WO2006124854A2 (en) * | 2005-05-13 | 2006-11-23 | Qualcomm Incorporated | Improving error resilience using out of band directory information |
EP1742476A1 (en) | 2005-07-06 | 2007-01-10 | Thomson Licensing | Scalable video coding streaming system and transmission mechanism of the same system |
EP2375749B1 (en) | 2005-10-11 | 2016-11-23 | Nokia Technologies Oy | System and method for efficient scalable stream adaptation |
EP1952638B1 (en) * | 2005-10-12 | 2020-05-13 | InterDigital VC Holdings, Inc. | Region of interest h.264 scalable video coding |
US9131247B2 (en) * | 2005-10-19 | 2015-09-08 | Thomson Licensing | Multi-view video coding using scalable video coding |
US7777812B2 (en) * | 2005-11-18 | 2010-08-17 | Sharp Laboratories Of America, Inc. | Methods and systems for picture resampling |
EP1806930A1 (en) | 2006-01-10 | 2007-07-11 | Thomson Licensing | Method and apparatus for constructing reference picture lists for scalable video |
WO2007107170A1 (en) * | 2006-03-22 | 2007-09-27 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Coding scheme enabling precision-scalability |
US8165196B2 (en) * | 2006-09-28 | 2012-04-24 | Broadcom Corporation | System, method, and apparatus for display manager |
AU2007319261B2 (en) * | 2006-11-14 | 2010-12-16 | Qualcomm Incorporated | Systems and methods for channel switching |
US7890986B2 (en) * | 2007-06-19 | 2011-02-15 | Broadcom Corporation | System and method for reducing channel change time |
US8737474B2 (en) * | 2007-06-27 | 2014-05-27 | Thomson Licensing | Method and apparatus for encoding and/or decoding video data using enhancement layer residual prediction for bit depth scalability |
KR101365596B1 (ko) * | 2007-09-14 | 2014-03-12 | 삼성전자주식회사 | 영상 부호화장치 및 방법과 그 영상 복호화장치 및 방법 |
US8432968B2 (en) | 2007-10-15 | 2013-04-30 | Qualcomm Incorporated | Scalable video coding techniques for scalable bitdepths |
KR101365597B1 (ko) * | 2007-10-24 | 2014-02-20 | 삼성전자주식회사 | 영상 부호화장치 및 방법과 그 영상 복호화장치 및 방법 |
US20100232520A1 (en) * | 2007-11-05 | 2010-09-16 | Zhenyu Wu | Scalable video coding method for fast channel change and increased error relilience |
CN102106156B (zh) * | 2008-07-26 | 2013-06-19 | 汤姆逊许可证公司 | 使用可分级视频编码(svc)的用于快速信道改变的实时传输协议(rtp)打包方法 |
EP2392138A4 (en) * | 2009-01-28 | 2012-08-29 | Nokia Corp | METHOD AND APPARATUS FOR VIDEO ENCODING AND DECODING |
US8705624B2 (en) * | 2009-11-24 | 2014-04-22 | STMicroelectronics International N. V. | Parallel decoding for scalable video coding |
US20120075436A1 (en) | 2010-09-24 | 2012-03-29 | Qualcomm Incorporated | Coding stereo video data |
US20130089152A1 (en) * | 2011-10-05 | 2013-04-11 | Qualcomm Incorporated | Signaling picture identification for video coding |
US8768079B2 (en) | 2011-10-13 | 2014-07-01 | Sharp Laboratories Of America, Inc. | Tracking a reference picture on an electronic device |
US8787688B2 (en) * | 2011-10-13 | 2014-07-22 | Sharp Laboratories Of America, Inc. | Tracking a reference picture based on a designated picture on an electronic device |
US9451252B2 (en) | 2012-01-14 | 2016-09-20 | Qualcomm Incorporated | Coding parameter sets and NAL unit headers for video coding |
US20130194585A1 (en) | 2012-01-27 | 2013-08-01 | David R. Cowles | Proper installation determination based on arbitrary pattern identification |
US20130195172A1 (en) * | 2012-01-30 | 2013-08-01 | Qualcomm Incorporated | Method of coding video and storing video content |
US9565431B2 (en) | 2012-04-04 | 2017-02-07 | Qualcomm Incorporated | Low-delay video buffering in video coding |
US9402082B2 (en) | 2012-04-13 | 2016-07-26 | Sharp Kabushiki Kaisha | Electronic devices for sending a message and buffering a bitstream |
US9532055B2 (en) | 2012-04-16 | 2016-12-27 | Microsoft Technology Licensing, Llc | Constraints and unit types to simplify video random access |
US9979959B2 (en) * | 2012-04-20 | 2018-05-22 | Qualcomm Incorporated | Video coding with enhanced support for stream adaptation and splicing |
JP2013232775A (ja) | 2012-04-27 | 2013-11-14 | Sharp Corp | 動画像復号装置、および動画像符号化装置 |
US8432808B1 (en) * | 2012-06-15 | 2013-04-30 | Viasat Inc. | Opportunistically delayed delivery in a satellite network |
CN104412592B (zh) | 2012-06-26 | 2017-11-14 | 三菱电机株式会社 | 运动图像编码/解码装置以及方法 |
WO2014009603A1 (en) | 2012-07-02 | 2014-01-16 | Nokia Corporation | Method and apparatus for video coding |
CN104620578B (zh) | 2012-07-06 | 2018-01-02 | 三星电子株式会社 | 用于随机访问的多层视频编码的方法和设备以及用于随机访问的多层视频解码的方法和设备 |
WO2014007596A1 (ko) * | 2012-07-06 | 2014-01-09 | 삼성전자 주식회사 | 다계층 비디오 부호화 방법 및 장치, 다계층 비디오 복호화 방법 및 장치 |
WO2014028838A1 (en) * | 2012-08-16 | 2014-02-20 | Vid Scale, Inc. | Slice based skip mode signaling for multiple layer video coding |
US20150229967A1 (en) | 2012-08-21 | 2015-08-13 | Samsung Electronics Co., Ltd. | Inter-layer video coding method and device for predictive information based on tree structure coding unit, and inter-layer video decoding method and device for predictive informationbased on tree structure coding unit |
KR102215438B1 (ko) | 2012-09-13 | 2021-02-15 | 엘지전자 주식회사 | 영상 부호화/복호화 방법 및 장치 |
WO2014047351A2 (en) * | 2012-09-19 | 2014-03-27 | Qualcomm Incorporated | Selection of pictures for disparity vector derivation |
US9374583B2 (en) * | 2012-09-20 | 2016-06-21 | Qualcomm Incorporated | Video coding with improved random access point picture behaviors |
JP6787667B2 (ja) * | 2012-09-21 | 2020-11-18 | ノキア テクノロジーズ オサケユイチア | ビデオコーディングのための方法と装置 |
US9351005B2 (en) * | 2012-09-24 | 2016-05-24 | Qualcomm Incorporated | Bitstream conformance test in video coding |
CA2884500C (en) * | 2012-09-27 | 2017-09-05 | Dolby Laboratories Licensing Corporation | Inter-layer reference picture processing for coding-standard scalability |
US20140085415A1 (en) * | 2012-09-27 | 2014-03-27 | Nokia Corporation | Method and apparatus for video coding |
US9706199B2 (en) * | 2012-09-28 | 2017-07-11 | Nokia Technologies Oy | Apparatus, a method and a computer program for video coding and decoding |
CA2871828C (en) | 2012-09-28 | 2015-09-15 | Sony Corporation | Image processing device |
CN104904202A (zh) * | 2012-09-28 | 2015-09-09 | 三星电子株式会社 | 用于使用参考画面信息进行并行视频编码的方法和设备以及用于使用参考画面信息进行并行视频解码的方法和设备 |
US20140092995A1 (en) * | 2012-09-28 | 2014-04-03 | Sharp Laboratories Of America, Inc. | Electronic devices for signaling a random access point picture message |
KR20150035667A (ko) * | 2012-09-28 | 2015-04-07 | 삼성전자주식회사 | 랜덤 액세스를 위한 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치 |
US20140092976A1 (en) * | 2012-09-30 | 2014-04-03 | Sharp Laboratories Of America, Inc. | System for signaling idr and bla pictures |
WO2014072571A1 (en) * | 2012-10-01 | 2014-05-15 | Nokia Corporation | Method and apparatus for scalable video coding |
US20140098883A1 (en) * | 2012-10-09 | 2014-04-10 | Nokia Corporation | Method and apparatus for video coding |
WO2014056150A1 (en) * | 2012-10-09 | 2014-04-17 | Nokia Corporation | Method and apparatus for video coding |
US20150281724A1 (en) * | 2012-10-10 | 2015-10-01 | Zte Corporation | Method and apparatus for encapsulation of random access information for media transport and storage |
KR101981712B1 (ko) * | 2012-11-21 | 2019-05-24 | 엘지전자 주식회사 | 영상 디코딩 방법 및 이를 이용하는 장치 |
KR102394716B1 (ko) * | 2012-11-27 | 2022-05-06 | 돌비 레버러토리즈 라이쎈싱 코오포레이션 | 깊이 정보를 이용한 영상 부호화 및 복호화 방법, 그를 이용한 장치 및 영상 시스템 |
CA2894637A1 (en) * | 2012-12-18 | 2014-06-26 | Sony Corporation | Image processing device and image processing method |
WO2014103764A1 (ja) * | 2012-12-26 | 2014-07-03 | ソニー株式会社 | 画像処理装置および方法 |
JPWO2014103529A1 (ja) * | 2012-12-28 | 2017-01-12 | シャープ株式会社 | 画像復号装置、およびデータ構造 |
US9942545B2 (en) * | 2013-01-03 | 2018-04-10 | Texas Instruments Incorporated | Methods and apparatus for indicating picture buffer size for coded scalable video |
US9900609B2 (en) * | 2013-01-04 | 2018-02-20 | Nokia Technologies Oy | Apparatus, a method and a computer program for video coding and decoding |
US9402076B2 (en) * | 2013-01-07 | 2016-07-26 | Qualcomm Incorporated | Video buffering operations for random access in video coding |
JP6290924B2 (ja) * | 2013-01-07 | 2018-03-07 | ノキア テクノロジーズ オサケユイチア | ビデオ・コーディングおよびデコーディングのための方法と装置 |
US20140218473A1 (en) * | 2013-01-07 | 2014-08-07 | Nokia Corporation | Method and apparatus for video coding and decoding |
KR20140090572A (ko) | 2013-01-07 | 2014-07-17 | 삼성전자주식회사 | 영상을 멀티 코덱에 호환 가능하도록 부호화/복호화하는 방법 및 장치 |
US9521393B2 (en) * | 2013-01-07 | 2016-12-13 | Qualcomm Incorporated | Non-nested SEI messages in video coding |
US9351009B2 (en) * | 2013-04-05 | 2016-05-24 | Sharp Kabushiki Kaisha | Marking pictures for inter-layer prediction |
US9532067B2 (en) | 2013-04-05 | 2016-12-27 | Sharp Kabushiki Kaisha | Decoding of inter-layer reference picture set and reference picture list construction |
US9807421B2 (en) | 2013-04-05 | 2017-10-31 | Sharp Kabushiki Kaisha | NAL unit type restrictions |
JP6360154B2 (ja) * | 2013-04-05 | 2018-07-18 | ヴィド スケール インコーポレイテッド | 多重レイヤビデオコーディングに対するインターレイヤ基準画像エンハンスメント |
US9591321B2 (en) * | 2013-04-07 | 2017-03-07 | Dolby International Ab | Signaling change in output layer sets |
US20140301477A1 (en) * | 2013-04-07 | 2014-10-09 | Sharp Laboratories Of America, Inc. | Signaling dpb parameters in vps extension and dpb operation |
US10063868B2 (en) * | 2013-04-08 | 2018-08-28 | Arris Enterprises Llc | Signaling for addition or removal of layers in video coding |
US9516080B2 (en) | 2013-05-31 | 2016-12-06 | Western Digital Technologies, Inc. | Methods and apparatuses for streaming content |
US10104374B2 (en) * | 2013-06-18 | 2018-10-16 | Vid Scale, Inc. | Inter-layer parameter set for HEVC extensions |
KR20150026927A (ko) * | 2013-09-03 | 2015-03-11 | 주식회사 케이티 | 스케일러블 비디오 신호 인코딩/디코딩 방법 및 장치 |
WO2015047162A1 (en) * | 2013-09-26 | 2015-04-02 | Telefonaktiebolaget L M Ericsson (Publ) | Hybrid codec scalable video |
TWI629066B (zh) * | 2013-10-07 | 2018-07-11 | 帝國製藥美國股份有限公司 | 使用右美托咪啶經皮組成物用於治療注意力不足過動症、焦慮及失眠的方法及組成物 |
US9819941B2 (en) | 2013-10-10 | 2017-11-14 | Qualcomm Incorporated | Signaling for sub-decoded picture buffer (sub-DPB) based DPB operations in video coding |
KR101869882B1 (ko) | 2013-10-11 | 2018-06-25 | 브이아이디 스케일, 인크. | Hevc 확장을 위한 하이 레벨 구문 |
WO2015052942A1 (en) | 2013-10-11 | 2015-04-16 | Sharp Kabushiki Kaisha | Signaling information for coding |
KR102246545B1 (ko) | 2013-10-12 | 2021-04-30 | 삼성전자주식회사 | 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치 |
US10045036B2 (en) * | 2013-10-22 | 2018-08-07 | Kt Corporation | Method and device for encoding/decoding multi-layer video signal |
CN104754358B (zh) * | 2013-12-27 | 2019-02-19 | 中兴通讯股份有限公司 | 码流的生成和处理方法、装置及系统 |
US9832481B2 (en) | 2014-01-03 | 2017-11-28 | Qualcomm Incorporated | Support of base layer of a different codec in multi-layer video coding |
CN106105220B (zh) | 2014-01-07 | 2019-07-05 | 诺基亚技术有限公司 | 用于视频编码和解码的方法和装置 |
US10547834B2 (en) | 2014-01-08 | 2020-01-28 | Qualcomm Incorporated | Support of non-HEVC base layer in HEVC multi-layer extensions |
-
2015
- 2015-01-06 US US14/590,914 patent/US10547834B2/en active Active
- 2015-01-06 US US14/590,897 patent/US20150195549A1/en active Pending
- 2015-01-06 US US14/590,922 patent/US9794558B2/en active Active
- 2015-01-06 US US14/590,924 patent/US9826232B2/en active Active
- 2015-01-07 KR KR1020167021425A patent/KR102321238B1/ko active IP Right Grant
- 2015-01-07 EP EP15701070.3A patent/EP3092807B1/en active Active
- 2015-01-07 JP JP2016544807A patent/JP6591425B2/ja active Active
- 2015-01-07 KR KR1020167021429A patent/KR102119296B1/ko active IP Right Grant
- 2015-01-07 CN CN201580003845.9A patent/CN105900430B/zh active Active
- 2015-01-07 BR BR112016015988-8A patent/BR112016015988B1/pt active IP Right Grant
- 2015-01-07 WO PCT/US2015/010500 patent/WO2015105890A1/en active Application Filing
- 2015-01-07 CA CA2932508A patent/CA2932508A1/en not_active Abandoned
- 2015-01-07 CA CA2932648A patent/CA2932648A1/en not_active Abandoned
- 2015-01-07 KR KR1020167021428A patent/KR102333537B1/ko active IP Right Grant
- 2015-01-07 WO PCT/US2015/010472 patent/WO2015105868A1/en active Application Filing
- 2015-01-07 CN CN201580003836.XA patent/CN105900429B/zh active Active
- 2015-01-07 EP EP15701074.5A patent/EP3092810B1/en active Active
- 2015-01-07 JP JP2016544809A patent/JP6517219B2/ja active Active
- 2015-01-07 CN CN201580003825.1A patent/CN105900428B/zh active Active
- 2015-01-07 CA CA2932651A patent/CA2932651A1/en not_active Abandoned
- 2015-01-07 CA CA2932885A patent/CA2932885C/en active Active
- 2015-01-07 WO PCT/US2015/010476 patent/WO2015105872A1/en active Application Filing
- 2015-01-07 JP JP2016544788A patent/JP6453347B2/ja active Active
- 2015-01-07 EP EP15701071.1A patent/EP3092808B1/en active Active
- 2015-01-07 JP JP2016544806A patent/JP6591424B2/ja active Active
- 2015-01-07 EP EP15701073.7A patent/EP3092809B1/en active Active
- 2015-01-07 WO PCT/US2015/010495 patent/WO2015105885A1/en active Application Filing
- 2015-01-07 KR KR1020167021419A patent/KR102082031B1/ko active IP Right Grant
- 2015-01-07 CN CN201580003809.2A patent/CN105900427B/zh active Active
- 2015-01-07 BR BR112016015893-8A patent/BR112016015893B1/pt active IP Right Grant
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6453347B2 (ja) | Hevcマルチレイヤ拡張における非hevcベースレイヤのサポート | |
JP6486952B2 (ja) | ビデオ情報のスケーラブルコーディングのためのデバイスおよび方法 | |
JP6608395B2 (ja) | スケーラブルビデオコード化におけるビットストリーム適合制約 | |
JP6513684B2 (ja) | マルチレイヤビデオコーディングにおける異なるコーデックのベースレイヤのサポート | |
JP2017525224A (ja) | マルチレイヤコーデックにおける表現フォーマット更新 | |
JP2017517185A (ja) | マルチレイヤコーディングにおける適合ウィンドウ情報 | |
JP6633005B2 (ja) | マルチレイヤコーデックのためのフルピクチャ順序カウントリセット | |
JP2016539545A (ja) | ビデオ情報のスケーラブルコーディングのためのデバイスおよび方法 | |
JP6434044B2 (ja) | ビデオ情報のスケーラブルコード化のための機器及び方法 | |
JP2017507539A (ja) | マルチレイヤコーディングにおいて回復点補足エンハンスメント情報(sei)メッセージと領域リフレッシュ情報seiメッセージとをコーディングするための方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171211 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20171211 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20181107 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181113 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181212 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6453347 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |