JP2020526136A - 分割ビデオストリーミングの概念 - Google Patents
分割ビデオストリーミングの概念 Download PDFInfo
- Publication number
- JP2020526136A JP2020526136A JP2019572660A JP2019572660A JP2020526136A JP 2020526136 A JP2020526136 A JP 2020526136A JP 2019572660 A JP2019572660 A JP 2019572660A JP 2019572660 A JP2019572660 A JP 2019572660A JP 2020526136 A JP2020526136 A JP 2020526136A
- Authority
- JP
- Japan
- Prior art keywords
- picture
- sub
- bitstream
- bitstreams
- compiled
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000006978 adaptation Effects 0.000 claims description 167
- 238000000034 method Methods 0.000 claims description 66
- 230000011664 signaling Effects 0.000 claims description 33
- 230000008859 change Effects 0.000 claims description 22
- 238000012986 modification Methods 0.000 claims description 22
- 230000004048 modification Effects 0.000 claims description 22
- 230000001419 dependent effect Effects 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 11
- 230000014509 gene expression Effects 0.000 claims description 10
- 238000009795 derivation Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 19
- 238000001514 detection method Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000013459 approach Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 238000001303 quality assessment method Methods 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 229930091051 Arenine Natural products 0.000 description 1
- 101100166838 Caenorhabditis elegans ces-2 gene Proteins 0.000 description 1
- 101100468275 Caenorhabditis elegans rep-1 gene Proteins 0.000 description 1
- 101710084218 Master replication protein Proteins 0.000 description 1
- 101000708578 Milk vetch dwarf virus (isolate N) Para-Rep C3 Proteins 0.000 description 1
- 101710112078 Para-Rep C2 Proteins 0.000 description 1
- HCHKCACWOHOZIP-UHFFFAOYSA-N Zinc Chemical compound [Zn] HCHKCACWOHOZIP-UHFFFAOYSA-N 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000013441 quality evaluation Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234345—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2347—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption
- H04N21/23476—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving video stream encryption by partially encrypting, e.g. encrypting the ending portion of a movie
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/60—Digital content management, e.g. content distribution
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
Description
・dependencyIdとして参照される概念(図3、1つのエクストラクタトラックが、構成のコンテンツ片、すなわちコンテンツ片の特定のビットレートバリエーションを含む、アダプテーションセット内のリプレゼンテーションを明示的に参照する)。これは、クライアント側で再生されたときにエクストラクタトラックによって抽出されるサブサンプルの正確なバイトサイズが、エクストラクタトラックの作成中に分かることを意味する。または
・プレセレクションとして参照される概念(図4、1つのエクストラクタトラックがアダプテーションセットレベルでのみ構成のコンテンツを参照し、正確なリプレゼンテーションの決定はクライアントに委ねられる)。これは、クライアント側で再生されたときにエクストラクタトラックによって抽出されるサブサンプルの正確なバイトサイズが、エクストラクタトラックの作成中に分からず、クライアントダウンロードの後でしか分からないことを意味する。
・MPDがdependencyIdを使用し、任意の単一のサブピクチャ/タイルのみがCTR、すなわち「cenc」または「cens」暗号化される。
・上記のdependencyIdベースの手法を使用するタイルベースのストリーミングサービスは、サービスオペレータにとって魅力のない、比較的冗長で大きいMPDを維持することを必要とする。前述のプレセレクション手法を使用すると、タイルベースのストリーミングサービスにおけるMPDサイズおよび複雑さを大幅に削減することができる(比較については、図3および図4を参照されたい)。
・CTRベースの暗号化方式における平文は、ピクチャ内のタイルの順序またはビットレート(バイトサイズ)が変更を受けるタイルベースの手法を禁止するサンプル内のすべてのサブサンプル/タイルペイロードデータの連結から構成される。
−すべてのサブピクチャのCTRベースの暗号化、
−DASHプレセレクションを用いた暗号化メディア(CTRまたはCBC)。
・コード化構造および依存関係に対する相対的な「重要性」。例えば、より低い時間レベルのキーフレームは、例えばエラー伝播の観点から、デコード結果にとって非常に重要である。
・描写されたコンテンツの相対的な「重要性」。例えば、現在または予測されるビューポートまたはディレクタを描いたより高解像度のタイルは、360°ビデオアプリケーションではカットされる。
aligned(8) class SampleEncryptionBox
extends FullBox(‘senc’, version=0, flags)
{
unsigned int(32) sample_count;
{
unsigned int(Per_Sample_IV_Size*8) InitializationVector;
if (flags & 0x000002)
{
unsigned int(16) subsample_count;
{
unsigned int(16) BytesOfClearData;
unsigned int(32) BytesOfProtectedData;
} [ subsample_count ]
}
}[ sample_count ]
}
aligned(8) class SampleEncryptionBox_Invention2
extends FullBox(‘senc’, version, flags)
{
unsigned int(32) sample_count;
{
unsigned int(Per_Sample_IV_Size*8) InitializationVector;
if (flags & 0x000002)
{
if (version == 0){
unsigned int(16) subsample_count;
{
unsigned int(16) BytesOfClearData;
unsigned int(32) BytesOfProtectedData;
}[ subsample_count ]
} else if (version == 1){
unsigned int(32) EncryptedSubsampleIndex;
}
}
}[ sample_count ]
}
aligned(8) class SampleEncryptionBox_Invention3.1
extends FullBox(‘senc’, version, flags)
{
unsigned int(32) sample_count;
{
unsigned int(Per_Sample_IV_Size*8) InitializationVector;
if (flags & 0x000002)
{
unsigned int(16) subsample_count;
{
if (version == 0){
unsigned int(16) BytesOfClearData;
unsigned int(32) BytesOfProtectedData;
}else if (version == 1){
unsigned int(1) WholeDataClear;
unsigned int(15) BytesOfClearData;
}
} [ subsample_count ]
}
}[ sample_count ]
}
aligned(8) class SampleEncryptionBox_Invention4
extends FullBox(‘senc’, version, flags)
{
unsigned int(32) sample_count;
{
if (version == 0){
unsigned int(Per_Sample_IV_Size*8) InitializationVector;
if (flags & 0x000002){
unsigned int(16) subsample_count;
{
unsigned int(16) BytesOfClearData;
unsigned int(32) BytesOfProtectedData;
} [ subsample_count ]
}
} else if (version == 1){
if (flags & 0x000002){
unsigned int(16) subsample_count;
{
unsigned int(Per_Sample_IV_Size*8)
InitializationVectorPerSubsample;
unsigned int(16) BytesOfClearData;
unsigned int(32) BytesOfProtectedData;
} [ subsample_count ]
}
}
}[ sample_count ]
}
・Nバイトカウンタについて、数値関数を使用して計算される(例えば、オフセットはsubsample_index*((2(N*8)−1)/subsample_countに等しい)。
・事前に準備された擬似ランダムシーケンスのsubsample_index−thエントリから導出される。
[1]NIST,“ADVANCED ENCRYPTION STANDARD (AES)”, 2001, online: http://nvlpubs.nist.gov/nistpubs/FIPS/NIST.FIPS.197.pdf
[2]NIST, “Recommendation for Block 2001 Edition Cipher Modes of Operation”, NIST Special Publication 800-38A 2001 Edition, online: http://dx.doi.org/10.6028/NIST.SP.800-38A
[3]ISO/IEC 23001-7:2016, Information technology -- MPEG systems technologies -- Part 7: Common encryption in ISO base media file format files
[4]ISO/IEC 14496-12:2015, Information technology -- Coding of audio-visual objects -- Part 12: ISO base media file format
[5]ISO/IEC 14496-15:2017, Information technology -- Coding of audio-visual objects -- Part 15: Carriage of network abstraction layer (NAL) unit structured video in the ISO base media file format
[6]ISO/IEC 23008-2:2013, Information technology -- High efficiency coding and media delivery in heterogeneous environments -- Part 2: High efficiency video coding
[7]Byeongdoo Choi, Ye-Kui Wang, Miska M. Hannuksela, Youngkwon Lim (editors), “OMAF DIS text with updates based on Berlin OMAF AHG meeting agreements”, m40849, 2017-06-16
[8]ISO/IEC 23009-1:2014, Information technology -- Dynamic adaptive streaming over HTTP (DASH) -- Part 1: Media presentation description and segment formats
Claims (49)
- タイルベースのビデオストリーミングによってROI固有のビデオストリーム(40)をダウンロードするための装置であって、
関心領域(ROI)(22)に応じて、エクストラクタ(20)とともにビットストリーム(12)のセット(32)を識別してダウンロードするために、マニフェストファイル(24)を検査するステップであって、ビットストリーム(12)の前記セット(32)は、ビデオピクチャエリア(16)の異なる部分(14)を符号化されている、検査するステップ、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セット(32)の各々から、現在のピクチャフレーム(30)に関連するピクチャ部分(34)を抽出し、前記抽出されているピクチャ部分(34)からコンパイル済みビットストリーム(40)を形成することにより、前記エクストラクタ(20)を使用して、ビットストリームの前記セット(32)から前記コンパイル済みビットストリーム(40)をコンパイルするステップであって、結果、前記コンパイル済みビットストリーム(40)は、前記コンパイル済みビットストリーム(40)が形成されるビットストリームの前記セットの各々の前記ピクチャ部分(34)のサブピクチャ部分(44)を含む、コンパイルするステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分(44)のコード化ペイロードセクション(48)を解析するサブステップ(102)、および/もしくは
それぞれの前記サブピクチャ部分(44)内のヘッダ(46)からそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の順次変化を再初期化し、暗号化されるべき各サブピクチャ部分(44)の前記コード化ペイロードセクション(48)の境界を発見することによって、平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記コンパイル済みビットストリーム(40)の1つまたは複数の前記サブピクチャ部分(44)のサブセットの各サブピクチャ部分(44)の前記コード化ペイロードセクション(48)を解読するステップ、
を行うように構成されている、装置。 - ビットストリームのセットおよびエクストラクタファイルからビデオストリームを復元するための装置であって、ビットストリームの前記セットは、ビデオピクチャエリアの異なる部分を符号化されており、前記装置は、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタファイルを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分内のヘッダからそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の順次変化を再初期化し、暗号化されるべき各サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記コンパイル済みビットストリームの1つまたは複数の前記サブピクチャ部分のサブセットの各サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、を行うように構成されている、装置。 - ビデオピクチャエリアの異なる部分のサブピクチャ部分を含むビットストリームからビデオストリームを復元するための装置であって、
平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記ビットストリームの1つまたは複数の前記サブピクチャ部分のサブセットの各サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分内のヘッダからそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分の外側からシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の前記順次変化を再初期化し、暗号化されるべき各サブピクチャ部分の前記コード化ペイロードセクションの境界を発見するステップ、を行うように構成されている、装置。 - 1つまたは複数のサブピクチャ部分の前記サブセットに対して相互に異なる初期化状態を導出することにより、解読されるべき各サブピクチャ部分に対して前記再初期化を実行するように構成されている、請求項1〜3のいずれかに記載の装置。
- 前記現在のピクチャフレームの基本初期化状態に相互に異なる修正を適用することにより、1つまたは複数のサブピクチャ部分の前記サブセットに対する相互に異なる初期化状態の前記導出を実施するように構成されている、請求項4に記載の装置。
- 前記それぞれのサブピクチャ部分が関係する前記ビデオピクチャエリアの部分に応じて、または
前記それぞれのサブピクチャ部分のインデックスに応じて、
各サブピクチャの前記相互に異なる修正を導出するように構成されている、請求項5に記載の装置。 - 前記エクストラクタファイル内の初期か状態リストから、1つまたは複数のサブピクチャ部分の前記サブセットの各々に対する初期化状態を導出することにより、解読されるべき各サブピクチャ部分に対して前記再初期化を実行するように構成されている、請求項1〜3のいずれかに記載の装置。
- 前記エクストラクタファイル内の明示的な境界位置情報を無視した発見のために、前記コード化ペイロードセクションの前記解析、前記コード化ペイロードセクションの長さの前記導出、または前記ビットストリーム長もしくは前記ポインタ指示の前記使用を実施するように構成されている、請求項1〜7のいずれかに記載の装置。
- タイルベースのビデオストリーミングによってROI固有のビデオストリームをダウンロードするためのデータの集合であって、
各々がビデオピクチャエリアの部分の1つを符号化されているビットストリームであって、結果、前記ビデオピクチャエリアの各部分が、異なる品質において前記ビットストリームのサブセットに符号化される、ビットストリームと、
前記ビデオピクチャエリアのROIに関連付けられた少なくとも1つのエクストラクタと、
所定の前記ROIについて、前記ROIに焦点を合わせるビデオピクチャエリアの異なる部分を符号化されているビットストリームのセットを識別するマニフェストファイルと
を備え、
前記エクストラクタは、ビットストリームの前記サブセットの各々について、ビットストリームのそれぞれの前記サブセットの選択されたビットストリームから、現在のピクチャフレームに関係するピクチャ部分を識別し、識別されている前記ピクチャ部分からのコンパイル済みビットストリームのコンパイルをシグナリングすることによって、ビットストリームの前記セットからの前記コンパイル済みビットストリームのコンパイルを示し、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されているビットストリームの前記サブセットの各々の前記選択されたビットストリームの前記ピクチャ部分のサブピクチャ部分を含み、
ビットストリームの前記サブセットの1つまたは複数の暗号化されたセットからのビットストリームの各サブセットの各ビットストリームの前記ピクチャ部分のコード化ペイロードセクションは、各ピクチャ部分の順次変化を再初期化することによって平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の暗号化を使用することによって暗号化される、データの集合。 - 前記現在のピクチャフレーム内の各ピクチャ部分の前記再初期化は、相互に異なる初期化状態に基づいている、請求項9に記載のデータの集合。
- 前記相互に異なる初期化状態は、前記現在のピクチャフレームの基本初期化状態に相互に異なる修正を適用した結果である、請求項9または10に記載のデータの集合。
- 各ピクチャ部分に対する前記相互に異なる修正は、
前記それぞれのピクチャ部分が属する前記ビットストリームに符号化される前記ビデオピクチャエリアの前記部分に依存し、または
前記エクストラクタファイル内で前記それぞれのピクチャ部分が参照される前記それぞれのピクチャ部分のインデックスに依存する、請求項11に記載のデータの集合。 - 前記エクストラクタファイルは、前記現在のピクチャフレーム内の各ピクチャ部分の初期化状態をシグナリングする初期化状態リストを含む、請求項9〜12のいずれか1項に記載のデータの集合。
- ビデオストリームであって、
ビットストリームのセットおよびエクストラクタを備え、ビットストリームの前記セットは、ビデオピクチャエリアの異なる部分を符号化されており、
前記エクストラクタは、ビットストリームの前記セットの各々について、現在のピクチャフレームに関係するピクチャ部分を識別し、識別されている前記ピクチャ部分からの前記コンパイル済みビットストリームのコンパイルをシグナリングすることによって、ビットストリームの前記セットからの前記コンパイル済みビットストリームのコンパイルを示し、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されているビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含み、
ビットストリームの前記セットの1つまたは複数の暗号化されたセットからの各ビットストリームの前記ピクチャ部分のコード化ペイロードセクションは、各ピクチャ部分の順次変化を再初期化することによって平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の暗号化を使用することによって暗号化される、ビデオストリーム。 - 前記現在のピクチャフレーム内の各ピクチャ部分の前記再初期化は、相互に異なる初期化状態に基づいている、請求項14に記載のビデオストリーム。
- 前記相互に異なる初期化状態は、前記現在のピクチャフレームの基本初期化状態に相互に異なる修正を適用した結果である、請求項14または15に記載のビデオストリーム。
- 各ピクチャ部分に対する前記相互に異なる修正は、
前記それぞれのピクチャ部分が属する前記ビットストリームに符号化される前記ビデオピクチャエリアの前記部分に依存し、または
前記エクストラクタファイル内で前記それぞれのピクチャ部分が参照される前記それぞれのピクチャ部分のインデックスに依存する、請求項16に記載のビデオストリーム。 - 前記エクストラクタファイルは、前記現在のピクチャフレーム内の各ピクチャ部分の初期化状態をシグナリングする初期化状態リストを含む、請求項14〜17のいずれか1項に記載のビデオストリーム。
- タイルベースのビデオストリーミングによってROI固有のビデオストリームをダウンロードするための装置であって、
ROIに応じて、エクストラクタファイルとともにビットストリームのセットを識別し、ダウンロードするために、マニフェストファイルを検査するステップであって、ビットストリームの前記セットは、ビデオピクチャエリアの相互に異なる部分を符号化されている、検査するステップ、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、および
前記エクストラクタファイルまたは前記サブピクチャ部分におけるシグナリングに基づいて、前記コンパイル済みビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
1つの所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
所定の前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記コンパイル済みビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を行うように構成されている、装置。 - ビットストリームのセットおよびエクストラクタファイルからビデオストリームを復元するための装置であって、ビットストリームの前記セットはビデオピクチャエリアの異なる部分を符号化されており、前記装置は、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタファイルを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、および
前記エクストラクタファイルまたは前記サブピクチャ部分におけるシグナリングに基づいて、前記コンパイル済みビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
1つの所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、または
所定の前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップによって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記コンパイル済みビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を行うように構成されている、装置。 - ビデオピクチャエリアの異なる部分のサブピクチャ部分を含むビットストリームからビデオストリームを復元するための装置であって、
外部から入来するシグナリングまたは前記サブピクチャ部分内のシグナリングに基づいて前記ビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までコード化ペイロードセクションを解析するサブステップ、および/もしくは
所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
所定の前記サブピクチャ部分の外側からシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記ビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を行うように構成されている、装置。 - 前記解読は、平文マスクおよび/またはブロック解読鍵の順次変化の使用によるブロック解読を含む、請求項19〜21のいずれか1項に記載の装置。
- いくつかのピクチャフレームの所定の前記サブピクチャ部分の前記識別を、
前記いくつかのピクチャフレームが、所定の前記サブピクチャ部分が前記異なる部分のうちの異なる部分に対応し、かつ/または
前記いくつかのピクチャフレームが、正確に1つの前記サブピクチャ部分が所定の前記サブピクチャ部分と同一である第1のピクチャフレーム、および、所定の前記サブピクチャ部分と同一であるサブピクチャ部分が存在しない、前記第1のピクチャフレーム間に散在する第2のピクチャフレームを含む
ように実施するように構成されている、請求項19〜22のいずれか1項に記載の装置。 - タイルベースのビデオストリーミングによってROI固有のビデオストリームをダウンロードするためのデータの集合であって、
各々がビデオピクチャエリアの部分の1つを符号化されているビットストリームであって、結果、前記ビデオピクチャエリアの各部分が、異なる品質において前記ビットストリームのサブセットに符号化される、ビットストリームと、
前記ビデオピクチャエリアのROIに関連付けられた少なくとも1つのエクストラクタファイルと、
所定の前記ROIについて、前記ROIに焦点を合わせるビデオピクチャエリアの異なる部分を符号化されているビットストリームのセットを識別するマニフェストファイルと
を備え、
前記エクストラクタファイルは、ビットストリームの前記サブセットの各々について、ビットストリームのそれぞれの前記サブセットの選択されたビットストリームから、現在のピクチャフレームに関係するピクチャ部分を識別し、識別されている前記ピクチャ部分からのコンパイル済みビットストリームのコンパイルをシグナリングすることによって、ビットストリームの前記セットからの前記コンパイル済みビットストリームのコンパイルを示し、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されているビットストリームの前記サブセットの各々の前記選択されたビットストリームの前記ピクチャ部分のサブピクチャ部分を含み、
ビットストリームの前記サブセットからビットストリームの所定のサブセットを識別することによって、前記コンパイル済みビットストリームの前記サブピクチャ部分から、所定のサブピクチャ部分が識別され、結果、ビットストリームの所定の前記サブセットの選択されている前記ビットストリームの前記ピクチャ部分が、所定の前記サブピクチャ部分であり、シグナリングによって、前記エクストラクタファイルまたは前記サブピクチャ部分のうちの少なくとも1つに含まれ、
ビットストリームの所定の前記サブセットの前記ビットストリームの前記ピクチャ部分のコード化ペイロードセクションが暗号化される、データの集合。 - 前記暗号化が、平文マスクおよび/またはブロック暗号鍵の順次変化の使用によるブロック単位の暗号化を含む、請求項24に記載のデータの集合。
- ビデオストリームであって、
ビットストリームのセットおよびエクストラクタファイルを備え、
ビットストリームの前記セットは、ビデオピクチャエリアの異なる部分を符号化されており、
前記エクストラクタファイルは、ビットストリームの前記セットの各々について、現在のピクチャフレームに関係するピクチャ部分を識別し、識別されている前記ピクチャ部分からのコンパイル済みビットストリームのコンパイルをシグナリングすることによって、ビットストリームの前記セットからの前記コンパイル済みビットストリームのコンパイルを示し、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されているビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含み、
前記エクストラクタファイルまたは前記サブピクチャ部分のうちの少なくとも1つに含まれているシグナリングによって前記コンパイル済みビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分が識別され、
前記所定のサブピクチャ部分のコード化ペイロードセクションが暗号化される、ビデオストリーム。 - 前記暗号化が、平文マスクおよび/またはブロック暗号鍵の順次変化の使用によるブロック単位の暗号化を含む、請求項26に記載のビデオストリーム。
- マニフェストファイルであって、
各々が表現(12)のピクチャ部分固有のアダプテーションセット(200)の1つを定義する第1のパラメータセット(202)であって、各ピクチャ部分固有のアダプテーションセットの前記表現は、異なる品質において異なるピクチャ部分(14)の1つを符号化されており、各第1のパラメータセット(202)は、それぞれの前記第1のパラメータセット(202)によって定義される前記ピクチャ部分固有のアダプテーションセット(200)の各表現の品質レベル(204)を含む、第1のパラメータセット(202)と、
出力ピクチャエリア(216)の各領域(214)に前記ピクチャ部分固有のアダプテーションセットの1つを割り当てるプレセレクションアダプテーションセット(208)を定義する少なくとも1つの第2のパラメータセット(206)と
を備え、
前記少なくとも1つの第2のパラメータセット(206)は、それぞれの領域(214)に割り当てられている前記ピクチャ部分固有のアダプテーションセット(200)の前記表現(12)の前記品質レベル(204)をカバーする品質レベル範囲(220)を示す、前記出力ピクチャエリア(216)の各前記領域(214)に対する1つまたは複数のパラメータを含み、かつ/または
前記マニフェストファイル(24)は、前記第1のパラメータセット(202)によって示される品質レベル(204)が、異なる前記第1のパラメータセット(202)にわたって順序スケーリングされるように共通の順序尺度(222)上で定義されるか、もしくは、前記第1のパラメータセット(202)によって示される前記品質レベル(204)が、前記第1のパラメータセット(202)について個別の、別個の順序尺度(224)上で定義されるかの指示を含み、かつ/または
前記少なくとも1つの第2のパラメータセット(206)が、前記出力ピクチャエリア(216)の各領域(214)について、それぞれの前記領域の品質レベルヒントと、それぞれの前記領域(214)の前記品質レベルヒント、および、それぞれの前記領域(214)に割り当てられた前記ピクチャ部分固有のアダプテーションセット(200)の前記第1のパラメータセット(202)によって定義される前記品質レベル(204)が、全体にわたって順序スケーリングされるように共通の順序尺度上で定義されるか、または、前記品質レベルヒント、および、それぞれの前記領域に割り当てられた前記ピクチャ部分固有のアダプテーションセット(200)の前記第1のパラメータセット(202)によって定義される前記品質レベル(204)が別個の順序尺度(224)上で定義されるかの指示とを含み、かつ/または
前記少なくとも1つの第2のパラメータセット(206)が、前記出力ピクチャエリア(216)の前記領域(214)について、前記領域(214)間の品質ランキングを示す1つまたは複数のパラメータを含む、マニフェストファイル。 - 各ピクチャ部分固有のアダプテーションセット(200)について、前記第1のパラメータセット(202)は、それぞれの前記ピクチャ部分固有のアダプテーションセットの前記表現に符号化される前記ピクチャ部分(14)に関する視野情報を定義する、請求項28に記載のマニフェストファイル。
- 前記第2のパラメータセット(206)は、前記領域(214)の照合に関する視野情報を定義する、請求項28または29に記載のマニフェストファイル。
- 各々が、領域(214)の照合に関して視野情報を定義する、それぞれのプレセレクションアダプテーションセット(208)の3つ以上の第2のパラメータセット(206)が存在し、前記照合は前記少なくとも2つの第2のパラメータセットの間で一致する、請求項30に記載のマニフェストファイル。
- 前記3つ以上の第2のパラメータセット(206)は、前記領域(214)の中で最高品質の領域を定義し、前記照合内の位置が前記3つ以上の第2のパラメータセット(206)にわたって変化する、請求項31に記載のマニフェストファイル。
- 請求項28〜32のいずれか1項に記載のマニフェストファイルを検査し、前記品質レベル範囲および/または前記指示に基づいて、サーバからビデオを適応的にストリーミングする際のストリーミング戦略を変更するように構成されている、クライアントデバイス。
- 所望されるビューポートに関して前記プレセレクションアダプテーションセットをランク付けするために、前記品質レベル、前記品質レベル範囲、前記品質レベルヒント、および/または前記指示を使用するように構成されている、請求項33に記載のクライアントデバイス。
- 前記マニフェストファイル内の品質情報に基づいてプレセレクションアダプテーションセットの出力ピクチャエリア内で品質が向上したROIの位置を決定し、前記ストリーミング戦略を決定するために前記ROIの位置を所望のビューポートと比較するように構成されている、請求項33または34に記載のクライアントデバイス。
- マニフェストファイルであって、
複数の領域内のビデオピクチャエリアの下位区分において一致する表現のセットを定義する領域単位のコンパイル済みアダプテーションセットの第1のパラメータセットであって、前記表現は、領域固有の品質レベルを各領域に割り当てる異なる品質レベルタプルにおいてビデオピクチャエリアの前記領域を符号化されている、第1のパラメータセットを備え、
前記第1のパラメータセットは、すべての領域のアダプテーションセット品質レベル指示、および、各表現についての、表現固有の品質レベル指示を含み、
各表現について、それぞれの前記表現の前記品質レベルタプルは、それぞれの前記表現の前記アダプテーションセット品質レベル指示と前記表現固有の品質レベル指示との組み合わせから導出可能である、マニフェストファイル。 - 前記表現の前記品質レベルタプルは、前記領域の中での最高品質の領域の位置が前記表現にわたって変化するように変化する、請求項36に記載のマニフェストファイル。
- 請求項36または37に記載のマニフェストファイルを検査し、サーバからビデオを適応的にストリーミングするためのストリーミング戦略において前記表現の前記品質レベルタプルを使用するように構成されている、クライアントデバイス。
- 所望されるビューポートに関して前記表現をランク付けするために、前記表現の前記品質レベルタプルを使用するように構成されている、請求項38に記載のクライアントデバイス。
- 各々がビデオピクチャエリア(216)の異なる部分(214)に関連付けられたビットストリームのサブセットからのコンパイル済みビットストリームのコンパイルを示すエクストラクタ(20)のファイルフォーマット記述子であって、各部分(214)について、ビットストリームの関連付けられている前記サブセット(200)からの1つのビットストリーム(12)を選択する自由を残しており、
前記ファイルフォーマットは、
前記ビデオピクチャエリア(216)のそれぞれの前記部分(214)に割り当てられた表現の前記サブセットの前記表現(12)内でシグナリングされる品質レベルをカバーする品質レベル範囲(220)、または、表現セットの異なる前記サブセット(200)の前記表現(12)によってシグナリングされる前記品質レベル間の品質オフセットを示す、前記ビデオピクチャエリア(216)の各部分(214)の1つまたは複数のパラメータを含み、かつ/または
前記表現内で示される品質レベルが、異なるサブセットの異なる前記表現にわたって順序スケーリングされるように共通の順序尺度(222)上で定義されるか、もしくは、前記表現によって示される前記品質レベルが前記サブセットについて個別に、別個の順序尺度(224)上で定義されるかの指示を含み、かつ/または
前記出力ピクチャエリア(216)の各部分(214)について、それぞれの前記部分の品質レベルヒントと、前記それぞれの部分の前記品質レベルヒント、およびそれぞれの前記部分に関係する前記サブセットによって含まれる前記表現内で示される前記品質レベルが、全体にわたって順序スケーリングされるように共通の順序尺度上で定義されるか、または、前記品質レベルヒント、および、それぞれの前記部分に関係する前記サブセットによって含まれる前記表現内で示される前記品質レベル(204)が、別個の順序尺度(224)上で定義されるかの指示を示す1つまたは複数のパラメータを含み、かつ/または
前記出力ピクチャエリア(216)の前記部分(214)について、前記部分(214)間の品質ランキングを示す1つまたは複数のパラメータを含む、ファイルフォーマット記述子。 - タイルベースのビデオストリーミングによってROI固有のビデオストリーム(40)をダウンロードするための方法であって、
関心領域(ROI)(22)に応じて、エクストラクタ(20)とともにビットストリーム(12)のセット(32)を識別してダウンロードするために、マニフェストファイル(24)を検査するステップであって、ビットストリーム(12)の前記セット(32)は、ビデオピクチャエリア(16)の異なる部分(14)を符号化されている、検査するステップ、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セット(32)の各々から、現在のピクチャフレーム(30)に関連するピクチャ部分(34)を抽出し、前記抽出されているピクチャ部分(34)からコンパイル済みビットストリーム(40)を形成することにより、前記エクストラクタ(20)を使用して、ビットストリームの前記セット(32)から前記コンパイル済みビットストリーム(40)をコンパイルするステップであって、結果、前記コンパイル済みビットストリーム(40)は、前記コンパイル済みビットストリーム(40)が形成されるビットストリームの前記セットの各々の前記ピクチャ部分(34)のサブピクチャ部分(44)を含む、コンパイルするステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分(44)のコード化ペイロードセクション(48)を解析するサブステップ(102)、および/もしくは
それぞれの前記サブピクチャ部分(44)内のヘッダ(46)からそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の順次変化を再初期化し、暗号化されるべき各サブピクチャ部分(44)の前記コード化ペイロードセクション(48)の境界を発見することによって、平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記コンパイル済みビットストリーム(40)の1つまたは複数の前記サブピクチャ部分(44)のサブセットの各サブピクチャ部分(44)の前記コード化ペイロードセクション(48)を解読するステップ、
を含む、方法。 - ビットストリームのセットおよびエクストラクタファイルからビデオストリームを復元するための方法であって、ビットストリームの前記セットは、ビデオピクチャエリアの異なる部分を符号化されており、前記方法は、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタファイルを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分内のヘッダからそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の順次変化を再初期化し、暗号化されるべき各サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記コンパイル済みビットストリームの1つまたは複数の前記サブピクチャ部分のサブセットの各サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を含む、方法。 - ビデオピクチャエリアの異なる部分のサブピクチャ部分を含むビットストリームからビデオストリームを復元するための方法であって、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分内のヘッダからそれぞれの前記サブピクチャ部分の前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
それぞれの前記サブピクチャ部分の外側からシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき各サブピクチャ部分の順次変化を再初期化し、暗号化されるべき各サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、平文マスクおよび/またはブロック暗号鍵の前記順次変化を使用することによるブロック単位の解読を使用することによって、前記ビットストリームの1つまたは複数の前記サブピクチャ部分のサブセットの各サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を含む、方法。 - タイルベースのビデオストリーミングによってROI固有のビデオストリームをダウンロードするための方法であって、
ROIに応じて、エクストラクタファイルとともにビットストリームのセットを識別し、ダウンロードするために、マニフェストファイルを検査するステップであって、ビットストリームの前記セットは、ビデオピクチャエリアの相互に異なる部分を符号化されている、検査するステップ、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタファイルを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、および
前記エクストラクタファイルまたは前記サブピクチャ部分におけるシグナリングに基づいて、前記コンパイル済みビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
1つの所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、およびに/もしくは
所定の前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記コンパイル済みビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を含む、方法。 - ビットストリームのセットおよびエクストラクタファイルからビデオストリームを復元するための方法であって、ビットストリームの前記セットはビデオピクチャエリアの異なる部分を符号化されており、前記方法は、
それぞれの前記ビットストリームを解析することによって、ビットストリームの前記セットの各々から、現在のピクチャフレームに関連するピクチャ部分を抽出し、前記抽出されているピクチャ部分からコンパイル済みビットストリームを形成することにより、前記エクストラクタファイルを使用して、ビットストリームの前記セットから前記コンパイル済みビットストリームをコンパイルするステップであって、結果、前記コンパイル済みビットストリームは、前記コンパイル済みビットストリームが形成されるビットストリームの前記セットの各々の前記ピクチャ部分のサブピクチャ部分を含む、コンパイルするステップ、および
前記エクストラクタファイルまたは前記サブピクチャ部分におけるシグナリングに基づいて、前記コンパイル済みビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までそれぞれの前記サブピクチャ部分のコード化ペイロードセクションを解析するサブステップ、および/もしくは
1つの所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、もしくは
所定の前記サブピクチャ部分が属する前記ピクチャ部分が抽出される前記ビットストリーム内でシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記コンパイル済みビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を含む、方法。 - ビデオピクチャエリアの異なる部分のサブピクチャ部分を含むビットストリームからビデオストリームを復元するための方法であって、
外部から入来するシグナリングまたは前記サブピクチャ部分内のシグナリングに基づいて前記ビットストリームの前記サブピクチャ部分から所定のサブピクチャ部分を識別するステップ、
現在解読されている位置までコード化ペイロードセクションを解析するサブステップ、および/もしくは
所定の前記サブピクチャ部分内のヘッダから前記コード化ペイロードセクションの長さを導出するサブステップ、および/もしくは
所定の前記サブピクチャ部分の外側からシグナリングされるビットストリーム長またはポインタ指示を使用するサブステップ
によって、暗号化されるべき所定の前記サブピクチャ部分の前記コード化ペイロードセクションの境界を発見することによって、前記ビットストリームの前記サブピクチャ部分の所定の前記サブピクチャ部分の前記コード化ペイロードセクションを解読するステップ、
を含む、方法。 - 請求項28〜32のいずれか1項に記載のマニフェストファイルを検査するステップと、前記品質レベル範囲および/または前記指示に基づいて、サーバからビデオを適応的にストリーミングする際のストリーミング戦略を変更するステップとを含む、クライアントデバイスを動作させるための方法。
- 請求項36または37に記載のマニフェストファイルを検査するステップと、サーバからビデオを適応的にストリーミングする際のストリーミング戦略において、前記表現の前記品質レベルタプルを使用するステップとを含む、クライアントデバイスを動作させるための方法。
- コンピュータ上で実行されると、請求項41〜48のいずれか1項に記載の方法を実行する命令を格納するコンピュータ可読媒体を含む、非一時的コンピュータプログラム製品。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP17180149 | 2017-07-06 | ||
EP17180149.1 | 2017-07-06 | ||
PCT/EP2018/068445 WO2019008174A1 (en) | 2017-07-06 | 2018-07-06 | CONCEPTS FOR CONTINUOUSLY DISPLAYING VIDEOS CUT INTO PARTS |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020526136A true JP2020526136A (ja) | 2020-08-27 |
JP7142040B2 JP7142040B2 (ja) | 2022-09-26 |
Family
ID=59298327
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019572660A Active JP7142040B2 (ja) | 2017-07-06 | 2018-07-06 | 分割ビデオストリーミングの概念 |
Country Status (6)
Country | Link |
---|---|
US (4) | US11172011B2 (ja) |
EP (1) | EP3649789A1 (ja) |
JP (1) | JP7142040B2 (ja) |
KR (3) | KR102649892B1 (ja) |
CN (1) | CN111052748B (ja) |
WO (1) | WO2019008174A1 (ja) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB2554877B (en) * | 2016-10-10 | 2021-03-31 | Canon Kk | Methods, devices, and computer programs for improving rendering display during streaming of timed media data |
US10715310B2 (en) * | 2018-05-07 | 2020-07-14 | Qualcomm Incorporated | Method and apparatus for decrypting data blocks of a pattern-encrypted subsample |
US11743502B2 (en) * | 2018-07-05 | 2023-08-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Compact description of region-wise packing information |
US11511351B2 (en) * | 2018-08-10 | 2022-11-29 | Canon Kabushiki Kaisha | Additive manufacturing apparatus and method for manufacturing three-dimensionally shaped object |
WO2020071111A1 (ja) * | 2018-10-02 | 2020-04-09 | ソニー株式会社 | 情報処理装置および情報処理方法、並びにプログラム |
JP7296219B2 (ja) * | 2019-03-07 | 2023-06-22 | 日本放送協会 | 受信装置、送信装置、及びプログラム |
EP3761647A1 (en) | 2019-07-05 | 2021-01-06 | Tiledmedia B.V. | Methods and devices for rendering a video on a display |
WO2021027773A1 (en) | 2019-08-10 | 2021-02-18 | Beijing Bytedance Network Technology Co., Ltd. | Subpicture size definition in video processing |
US11729243B2 (en) * | 2019-09-20 | 2023-08-15 | Intel Corporation | Dash-based streaming of point cloud content based on recommended viewports |
BR112022006387A2 (pt) | 2019-10-02 | 2022-07-26 | Beijing Bytedance Network Tech Co Ltd | Método e aparelho de processamento de vídeo, e, meio legível por computador |
EP4032290A4 (en) | 2019-10-18 | 2022-11-30 | Beijing Bytedance Network Technology Co., Ltd. | SYNTAX CONSTRAINTS IN REPORTING SUBPICTURE PARAMETER SETS |
US11509938B2 (en) | 2019-11-05 | 2022-11-22 | Hfi Innovation Inc. | Method and apparatus of signaling subpicture information in video coding |
US11792432B2 (en) * | 2020-02-24 | 2023-10-17 | Tencent America LLC | Techniques for signaling and identifying access unit boundaries |
EP3920539A1 (en) * | 2020-06-04 | 2021-12-08 | MK Systems USA Inc. | Systems and methods for providing audio-video streams with alternative content |
KR20230023359A (ko) * | 2021-08-10 | 2023-02-17 | 한화테크윈 주식회사 | 감시카메라 시스템 |
CN115834926B (zh) * | 2022-11-21 | 2023-11-21 | 深圳市超时代软件有限公司 | 基于h.265熵编码二值化的视频加密方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005532700A (ja) * | 2001-10-04 | 2005-10-27 | ヒューレット・パッカード・カンパニー | 安全なスケーラブルデータストリーミング用の記憶デバイス |
CN104284208A (zh) * | 2014-10-23 | 2015-01-14 | 航天数字传媒有限公司 | 通过aes-cbc算法进行并行加密的方法及系统 |
WO2016022979A1 (en) * | 2014-08-07 | 2016-02-11 | Sonic IP. Inc. | Systems and methods for protecting elementary bitstreams incorporating independently encoded tiles |
CN106664443A (zh) * | 2014-06-27 | 2017-05-10 | 皇家Kpn公司 | 根据hevc拼贴视频流确定感兴趣区域 |
JP2017515336A (ja) * | 2014-03-25 | 2017-06-08 | キヤノン株式会社 | 分割タイムドメディアデータのストリーミングを改善するための方法、デバイス、およびコンピュータプログラム |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7349539B2 (en) * | 2001-05-04 | 2008-03-25 | Hewlett-Packard Development Company, L.P. | Encoding and encrypting devices for secure scalable data streaming |
JP2008516475A (ja) | 2004-10-05 | 2008-05-15 | ヴェクターマックス コーポレーション | マルチメディアデータを放送する方法及びシステム |
EP2661882B1 (en) * | 2011-01-05 | 2015-06-24 | Koninklijke Philips N.V. | Video coding and decoding devices and methods preserving ppg relevant information |
US9445136B2 (en) | 2011-09-21 | 2016-09-13 | Qualcomm Incorporated | Signaling characteristics of segments for network streaming of media data |
WO2013184248A1 (en) * | 2012-04-27 | 2013-12-12 | Huawei Technologies Co., Ltd. | Support for short cryptoperiods in template mode |
US9125073B2 (en) * | 2012-08-03 | 2015-09-01 | Intel Corporation | Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file |
JP6270873B2 (ja) | 2013-01-15 | 2018-01-31 | 華為技術有限公司Huawei Technologies Co.,Ltd. | メディアコンテンツの適応型ストリーミングのための品質情報の使用 |
US9386308B2 (en) * | 2013-07-16 | 2016-07-05 | Cisco Technology, Inc. | Quality optimization with buffer and horizon constraints in adaptive streaming |
CN106233745B (zh) * | 2013-07-29 | 2021-01-15 | 皇家Kpn公司 | 向客户端提供瓦片视频流 |
US10631070B2 (en) * | 2014-05-22 | 2020-04-21 | Idomoo Ltd | System and method to generate a video on-the-fly |
GB2527786B (en) * | 2014-07-01 | 2016-10-26 | Canon Kk | Method, device, and computer program for encapsulating HEVC layered media data |
US10084838B2 (en) * | 2014-10-29 | 2018-09-25 | DLVR, Inc. | Generating and using manifest files including content delivery network authentication data |
WO2016180486A1 (en) * | 2015-05-12 | 2016-11-17 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Composite scalable video streaming |
CN105187851A (zh) * | 2015-07-31 | 2015-12-23 | 北京邮电大学 | 一种面向海量编码多媒体数据的速度可调节加密方法以及采用该方法的视频处理平台 |
US10313745B2 (en) * | 2016-01-17 | 2019-06-04 | Bitmovin Gmbh | Adaptive streaming of an immersive video scene |
US10291910B2 (en) * | 2016-02-12 | 2019-05-14 | Gopro, Inc. | Systems and methods for spatially adaptive video encoding |
US10491964B2 (en) * | 2017-01-23 | 2019-11-26 | Cisco Technology, Inc. | Assisted acceleration for video streaming clients |
-
2018
- 2018-07-06 CN CN201880058234.8A patent/CN111052748B/zh active Active
- 2018-07-06 KR KR1020227007136A patent/KR102649892B1/ko active IP Right Grant
- 2018-07-06 WO PCT/EP2018/068445 patent/WO2019008174A1/en active Search and Examination
- 2018-07-06 EP EP18734850.3A patent/EP3649789A1/en active Pending
- 2018-07-06 JP JP2019572660A patent/JP7142040B2/ja active Active
- 2018-07-06 KR KR1020207000348A patent/KR102371574B1/ko active IP Right Grant
- 2018-07-06 KR KR1020247008930A patent/KR20240038175A/ko not_active Application Discontinuation
-
2019
- 2019-12-31 US US16/731,754 patent/US11172011B2/en active Active
-
2021
- 2021-09-27 US US17/486,347 patent/US11711413B2/en active Active
-
2023
- 2023-06-09 US US18/332,640 patent/US11943274B2/en active Active
-
2024
- 2024-02-09 US US18/438,035 patent/US20240187470A1/en active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005532700A (ja) * | 2001-10-04 | 2005-10-27 | ヒューレット・パッカード・カンパニー | 安全なスケーラブルデータストリーミング用の記憶デバイス |
JP2017515336A (ja) * | 2014-03-25 | 2017-06-08 | キヤノン株式会社 | 分割タイムドメディアデータのストリーミングを改善するための方法、デバイス、およびコンピュータプログラム |
CN106664443A (zh) * | 2014-06-27 | 2017-05-10 | 皇家Kpn公司 | 根据hevc拼贴视频流确定感兴趣区域 |
WO2016022979A1 (en) * | 2014-08-07 | 2016-02-11 | Sonic IP. Inc. | Systems and methods for protecting elementary bitstreams incorporating independently encoded tiles |
CN104284208A (zh) * | 2014-10-23 | 2015-01-14 | 航天数字传媒有限公司 | 通过aes-cbc算法进行并行加密的方法及系统 |
Non-Patent Citations (3)
Title |
---|
MOUSA FARAJALLAH ET AL.: "ROI encryption for the HEVC coded video contents", 2015 IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING (ICIP), JPN6021009424, 27 September 2015 (2015-09-27), US, pages 3096 - 3100, XP032826995, ISSN: 0004467492, DOI: 10.1109/ICIP.2015.7351373 * |
QUALCOMM INCORPORATED: "FS_VR: OMAF Progress[online]", 3GPP TSG SA WG4 #93 S4-170324, JPN7021000865, 19 April 2017 (2017-04-19), US, pages 1 - 12, ISSN: 0004467491 * |
ROBERT SKUPIN ET AL.: "HEVC tile based streaming to head mounted displays", 2017 14TH IEEE ANNUAL CONSUMER COMMUNICATIONS & NETWORKING CONFERENCE (CCNC), JPN6021009426, 8 January 2017 (2017-01-08), pages 613 - 615, XP033125686, ISSN: 0004467493, DOI: 10.1109/CCNC.2017.7983191 * |
Also Published As
Publication number | Publication date |
---|---|
CN111052748B (zh) | 2022-05-17 |
US20200137136A1 (en) | 2020-04-30 |
KR102649892B1 (ko) | 2024-03-21 |
KR20220034922A (ko) | 2022-03-18 |
US20220086213A1 (en) | 2022-03-17 |
US20230412663A1 (en) | 2023-12-21 |
KR20200031093A (ko) | 2020-03-23 |
CN111052748A (zh) | 2020-04-21 |
US11943274B2 (en) | 2024-03-26 |
US11172011B2 (en) | 2021-11-09 |
US20240187470A1 (en) | 2024-06-06 |
JP7142040B2 (ja) | 2022-09-26 |
KR20240038175A (ko) | 2024-03-22 |
EP3649789A1 (en) | 2020-05-13 |
KR102371574B1 (ko) | 2022-03-07 |
US11711413B2 (en) | 2023-07-25 |
WO2019008174A1 (en) | 2019-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7142040B2 (ja) | 分割ビデオストリーミングの概念 | |
JP5730786B2 (ja) | 1ファイルにおける複数のコンテンツ保護システム | |
US7057535B2 (en) | Methods for scaling encoded data without requiring knowledge of the encoding scheme | |
US8838954B2 (en) | Media processing devices for adaptive delivery of on-demand media, and methods thereof | |
JP2007518294A (ja) | 動画ファイルの暗号化方法及びそれを利用したデジタル著作権の管理方法 | |
CN103338385A (zh) | 视频处理系统及相应方法 | |
KR102306641B1 (ko) | 독립적으로 인코딩된 타일을 포함한 기본 비트스트림을 보호하는 시스템 및 방법 | |
JP2009505515A (ja) | 基本ストリーム・コンテンツの保護 | |
CN111031353B (zh) | 一种视频加密方法及装置 | |
JP2019024229A (ja) | ファイル生成方法およびファイル生成装置 | |
CN116962758A (zh) | 多媒体内容的加密方法、装置、电子设备和存储介质 | |
CN111064717B (zh) | 数据编码方法、数据解码方法以及相关终端、装置 | |
CN108449601B (zh) | 电影数据的传输方法及装置 | |
US11811840B2 (en) | UHD HLS streaming trusted client server environment | |
KR101215617B1 (ko) | 동영상 파일의 암호화 방법 및 그를 이용한 디지털 저작권 관리 방법 | |
KR101604201B1 (ko) | 분산 트랜스코딩 방법 및 이를 이용한 분산 트랜스코딩 시스템 | |
CN117528149A (zh) | 秘钥更新方法、码流加密方法、码流解密方法及相关装置 | |
WO2015072127A1 (ja) | ファイル生成方法およびファイル生成装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200221 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210302 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210323 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210921 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220215 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20220509 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220809 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220823 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220912 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7142040 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |