CN110139110A - 处理多层数据流的装置和方法、编码器和方法及存储介质 - Google Patents

处理多层数据流的装置和方法、编码器和方法及存储介质 Download PDF

Info

Publication number
CN110139110A
CN110139110A CN201910182087.1A CN201910182087A CN110139110A CN 110139110 A CN110139110 A CN 110139110A CN 201910182087 A CN201910182087 A CN 201910182087A CN 110139110 A CN110139110 A CN 110139110A
Authority
CN
China
Prior art keywords
layer
interdependency
syntactic structure
basal
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910182087.1A
Other languages
English (en)
Other versions
CN110139110B (zh
Inventor
卡斯滕·聚林
托马斯·席尔
德特勒夫·马佩
罗伯特·斯库平
亚戈·桑切斯德拉富恩特
格哈德·特克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GE Video Compression LLC
Original Assignee
GE Video Compression LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GE Video Compression LLC filed Critical GE Video Compression LLC
Publication of CN110139110A publication Critical patent/CN110139110A/zh
Application granted granted Critical
Publication of CN110139110B publication Critical patent/CN110139110B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/324—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the data link layer [OSI layer 2], e.g. HDLC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/164—Feedback from the receiver or from the transmission channel
    • H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/66—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请涉及处理多层数据流的装置和方法、编码器和方法及存储介质。描述了在多层数据流的层之间的层间依赖性的信号作用。通过表示在基础层ID能表示的几对不同值之间的相互依赖性的第一相互依赖性语法结构以及表示在扩展层ID能表示的几对不同值之间的相互依赖性的第二相互依赖性语法结构的方式描述层间依赖性，发现在一方面的层间依赖性的潜在多样性的太密集限制与另一方面的层间依赖性的太复杂信令之间的良好折衷，基础层ID和扩展层ID索引与多层数据流的部分相关联的层。根据该概念，可在一方面的可信令层间依赖性的增加的多样性与另一方面的用于信令层间依赖性的减小的边信息开销之间转移重点。

Description

处理多层数据流的装置和方法、编码器和方法及存储介质
本申请是申请号为201480050666.6的中国专利申请的分案申请。
技术领域
本申请涉及基于集群的依赖性信令，例如，在多层视频编码的领域中。
背景技术
视频编解码器规范(例如，HEVC基础规范【1】及其扩展，例如，多视图扩展【2】【3】)通常获得机构，用于在分层编码场景中信令视频数据的每个编码块所属的层。信令机构需要随时可用，比较在图1中的表格中提供的HEVC中的den NAL单元报头(nuh_layer_id)内的层标识符。
由于其在位方面的尺寸有限，所以相应HEVC语法元素允许64个值用于识别可扩展层、视图和/或深度。对于使用当前HEVC NAL单元报头语法的多视图视频，例如，这意味着64个视图或32个视图加上深度的组合限制为最大。虽然这对于很多共同的立体视图场景和其他应用充分，但是对于应用(例如，光场成像【4】、【5】或全息显示【6】)具有不止100个视图的大型摄像头阵列需要可扩展机构，用于信令层标识符的更大空间。
而且，通过其相对于彼此的编码依赖性或空间关系将某些层或视图分组，构成层标识符的空间，可具有优点。进一步，由于在编码的视频位流内从已经可用的信息中获得这种信息，需要无法容忍的计算资源，所以在构成的层标识符空间内提供编码依赖性的紧凑表示，也具有优点。
发明内容
因此，本申请的目标在于，提供用于与多层编码相结合基于集群的依赖性信令的信令的概念，这在(例如)更小的边信息开销和/或改进的向后兼容性方面更有效。由即将发生的独立权利要求的主题实现这个目标。
本申请的一个方面涉及在多层数据流的层之间的层间依赖性的信号作用。根据该方面，通过表示在基础层ID能表示的几对不同值之间的相互依赖性的第一相互依赖性语法结构以及表示在扩展层ID能表示的几对不同值之间的相互依赖性的第二相互依赖性语法结构的方式描述层间依赖性，发现在一方面的层间依赖性的潜在多样性的太密集限制与另一方面的层间依赖性的太复杂信令之间的良好折衷，所述基础层ID和扩展层ID索引与所述多层数据流的部分相关联的层。根据该概念，可在一方面的可信令层间依赖性的增加的多样性与另一方面的用于信令所述层间依赖性的减小的边信息开销之间转移重点：例如，分别调用具有共同的基础层ID的层的组，即，“集群”，所述相同的第二相互依赖性语法结构可用于单独在所有集群内并且在通过所述第一相互依赖性语法结构彼此相关的所有集群之间调节所述相互依赖性。可替换地，所述第二相互依赖性语法结构的两个实例化可用于描述一方面在所述集群内并且另一方面在不同集群的层之间的层的相互依赖性。无论是将重点放在增加的多样性还是减小的边信息开销上，所述相互依赖性信令理念的结果是保持低信令开销。
本申请的一个方面涉及与多层视频信号的每个数据包相关联的层ID的信令。具体而言，这方面实现信令该层关联的有效方法，然而，与编码解码器保持向后兼容性，根据该向后兼容性，基础层ID字段的某个值限制为不可扩展，例如，在基础层ID字段内的基础层ID值0。并非特别相对于该不可扩展的基础层ID值避开该限制，通过将基础层ID字段细分成第一子字段和第二子字段，通过可扩展的方式信令多层数据流的部分的层ID：每当基础层ID字段的第一子字段满足预定标准，提供扩展层ID字段，并且如果基础层ID字段的第一子字段不满足预定标准，那么省略扩展层ID字段。上述不可扩展基础层ID值“隐藏”在这组基础层ID值内，其中，基础层ID字段的第一子字段不满足预定标准，因此，这个不可扩展基础层ID值不单独处理，而是渲染前一个组的一部分。确切地说，如果基础层ID字段的第一子字段满足预定标准，那么从在多层数据流内信令的扩展层ID字段中获得扩展值，以便这同样位于扩展值的域的第一子集内，并且如果基础层ID字段的第一子字段不满足预定标准，那么该扩展值设置为与扩展值的域的第一子集不相交的值。然后，使用扩展值以及从基础层ID字段的第二子字段中获得的集群值，索引与相应部分相关联的层。总而言之，尽管保持向后兼容性，也未丧失信令效率。
本申请的一个方面涉及用于多层视频信号的层的至少一个特征的信令(例如，对于每层，通过层间预测与相应层直接相关的相关层的指示)或者上述第二相互依赖性语法结构的信令。根据该方面，在多层视频信号内信令最大语法元素，以指示多层视频信号的数据包的扩展层ID字段的最大使用值，例如，最大语法元素的范围是(例如)延伸穿过多层视频信号的几个部分的多层视频信号的预定部分。因此，根据该方面，对于接收多层视频信号的装置(例如，解码器或网络元件)，可行的是为多层视频信号的较大预定部分获得关于扩展层ID字段可信令的可能值的可能域的实际消耗部分的知识，并且不需要为基础层ID字段值和扩展层ID字段值的每个组合信令至少一个特征，更确切地说，足以为基于最大假定值确定的最大层数信令所述至少一个特征。因此，不需要为具有层ID的层传输/信令所述至少一个特征，所述层的扩展层ID不在多层视频信号的预定部分内发生。除此以外，根据进一步实施方式，最大假定值的知识可用于减少用于信令每个部分的层ID的边信息开销，即，用于减少在多层视频信号的数据包内信令扩展层ID字段所需要的位。
附图说明
上述方面可组合或者单独使用，并且上述方面的优选实现方式是从属权利要求的主题并且稍后参照附图讨论，其中：
图1示出了在HEVC内的NAL单元报头的语法；
图2示意性示出了包括多层视频编码器、网络元件以及多层视频解码器的环境，其中，多层视频编码器、网络元件以及多层视频解码器可由在以下附图中描述的概念的任何概念或任何组合改进；
图3示意性示出了网络装置以及通过逐个集群的方式在到达网络装置的多层数据流内信令层相互依赖性的概念；
图4示意性示出了根据图3的概念信令层间依赖性的方式；
图5示意性示出了在使用图3的信令理念的情况下获得层间依赖性的更具体的实例；
图6通过示出通过指示层ID扩展的语法元素扩展的一部分薄片段报头来示出薄片段报头的HEVC语法的可能扩展；
图7示出了示例性扩展为实现图3的信令理念的VPS语法的实例；
图8到图10示出了图7的实例的替换物；
图11示意性示出了用于设置本申请的进一步概念的装置，根据该概念，在数据流内信令扩展层ID字段的最大假定值；
图12示意性示出了图11的概念；
图13示出了在扩展为包括扩展层ID字段的HEVC的薄片段报头之中的部分的实例；
图14示出了扩展为包括语法元素的VPS语法的实例，以便表示图13的扩展层ID字段的长度；
图15示出了扩展为包括表示扩展层ID字段的最大值的语法元素的VPS语法的实例；
图16A到16C示出了扩展为包括扩展层ID字段的在SEI扩展、SPS语法或PPS语法的语法结构之中的部分的实例；
图17示出了关于在视频数据流内的层的VPS语法信令信息的实例，根据相对于图11和12解释的最大假定值，循环穿过其语法部分多次；
图18示出了根据特定实例例证在扩展层ID字段、基础层ID字段与层ID之间的关系的示意图，具体而言，使用layer_id_ext表示扩展层ID字段，使用nuh_layer_id表示基础层ID字段，并且使用layerID表示层ID，并且扩展层ID字段的能表示值的数量由max_layer_id_ext(加上1)表示，通过将扩展长度设置为等于2，将扩展层ID字段的长度选择为2，该数量在此处例证地设置为3；
图19示出了扩展为包括扩展层ID字段的在薄片段报头之中的部分的实例；
图20A示出了扩展为包括表示基础层ID字段的子字段的长度的语法元素的VPS语法的实例；
图20B示出了修改为有条件地明确信令扩展层ID字段的在薄片段报头之中的部分的实例；以及
图21示出了说明根据图18的概念使用实现的关系获得层ID的网络装置的功能的流程图。
具体实施方式
在描述本申请的某些实施方式之前，参照图2，描述示例性多层视频编解码器环境，其中，可有利地使用下面概述的实施方式和方面。虽然示例性多层视频编解码器环境的这个概述不理解为限制下面进一步概述的实施方式，但是相对于以下附图示例性提供的细节和功能被视为描述下面进一步概述的实施方式的大量可能扩展，以便产生更详细的实施方式。在任何情况下，在后文中提出的说明性多层视频编解码器环境使得更容易理解下面概述的实施方式的优点。
图2说明性示出了在其输入处接收视频材料202的多层视频编码器200。仅仅为了说明的目的，视频材料202说明为多视图视频信号，传输多个视图的每个视图的视频数据，例如，视频的每个图片的纹理和深度。一般而言，视频材料202能表示一个场景的多维取样。一个维度可能是时间t。即，视频材料202在时间上给该场景取样，从而为每个时刻产生一个图片。而且，可从不同的视角捕捉该场景，从而在每个时刻为每个视图产生一个视频或者为每个视图产生一个图片。进一步，除了场景的纹理的空间取样，即，场景的颜色的空间取样，视频材料202还为每个视图或者视图的每个子集提供场景的深度图，用于相应的视图。例如，图2在使用阴影线说明的深度图与没有阴影线绘制的纹理图或图像之间区分。然而，应注意的是，应注意的是，下面进一步概述的实施方式都不限于这种多视图材料。确切地说，提供在图2中的说明，仅仅为了减轻下面提出的描述。
多层视频编码器200配置为将视频材料202编码入多层数据流或者视频信号204。具体而言，多层视频编码器200使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流204。这表示以下内容。多层视频编码器200生成多层数据流，以便多层数据流包括多个数据包206，每个数据包与不同层中的一层相关联。例如，多层视频编码器200将视频材料202的信息量的某个基础等级编码入某个基础层的数据包206，例如，仅仅一个视图的纹理等。例如，从在每个数据包206内的层识别语法元素结构208中可获得数据包206与各种层中的任何层的关联，其中，例如，层识别语法元素结构208可包含在相应数据包206的报头210内。例如，为了说明的目的，数字1、2以及3显示为刻入数据包206内，从而分别使用层ID 1、2以及3说明层。在这些层之中，例如，具有层ID1的层可形成最低或者基础层，提供信息量的基础等级。其他层的数据包206可仅仅在一个或多个或各种信息类型的方面提高在基础层的数据包206上可用的信息量。例如，除了在基础或参考层的数据包206内已经编码的视图，某个层的数据包206还可具有在其内编码的进一步视图。可替换地，某个层的数据包206可具有关于视频材料202的场景的深度信息，例如，示图的深度信息，该信息的纹理已经编码入可能是任何更低层的基础或者(更具体而言)参考层的数据包。同样，表面反射率信息可编码入进一步层的数据包，即，相对于在该场景内的对象的表面反射率的场景的空间取样，与照明环境无关。并且甚至进一步地，阿尔法(alpha)混合信息可编码入进一步层的数据包，即，对应于单独图片样本的场景点的透明度的空间取样。某个层的数据包206还可在某个颜色分量上增加信息，或者可增大空间分辨率，即，提供空间分辨率细化。同样，某个层的数据包206可仅仅提供SNR分辨率细化，即，提高编码的视频材料的信噪比。为了就各种层而言，在多层数据流204内避免冗余，多层视频编码器200使用层间预测：即，某个层的数据包206相对于从一个或多个其他层(相对于前一层称为参考层)中获得的层间预测在其内编码预测残差。层间预测可应用于不同的实体中，例如，描述视频材料202的语法元素和参数。例如，描述由某个层的数据包206传输的预测残差可校正逐个像素地在空间域内从所述一个或多个参考层中获得的层间预测。可替换地，例如，多层视频编码器200可使用变换残差编码，并且例如，可在变换域(例如，DCT域)中逐个变换系数地发生层间预测校正。可替换地或者此外，多层视频编码器200可能是使用空间和/或时间预测的混合视频编解码器型，并且例如，此外或者可替换地，层间预测可属于运动向量的细化。甚至进一步地，多层视频编码器200可使用分层多树细分，以便将视频材料202的图片细分成：编码块，以所述编码块为单位，应用不同的预测模式，例如，空间和时间预测；变换块，以所述变换块为单位，在预测残差上执行上述变换；和/或其他块体，以所述其他块体为单位，设置某些编码参数，用于编码视频材料202，而非重新为进一步层信令细分信息，可从所述一个或多个基础层中的任一个中完全采用所述细分，或者可信令相对于该细分信息的细化。
通过在层之中的层间依赖性，多层视频信号204的层通过树212的分支彼此相关，所述树的节点由上述层形成。为了传输关于在层之中的层间依赖性的信息，即，使关于层间依赖性树212的信息在解码侧上可用，多层视频信号204可具有编码入该信号的关于该信号的信息。
在图2中，例如，说明多层视频编码器200在视频数据流204内点缀包括或者传输信息214的高级语法数据包216。信息214可包括层间依赖性语法结构，以便描述在树212内的层间依赖性。
然而，关于树212的信息可在编码器和解码器上可替换地默认已知或者可重构。因此，此外或者可替换地，层相关的信息214可包括与某个层ID扩展机构相关的信息。具体而言，虽然对于很多应用，中等数量的层足以形成多层视频信号204，但是一些其他应用可经受层识别语法元素结构208可信令的太少数量的层。换言之，构成层识别语法元素结构208，以便对需要这种大量层的那些应用，这也会容纳大量层，在考虑应用的整体多重性时，会不利地造成高边信息开销，并且解释层识别语法元素结构208，以便这同样仅仅容纳中等数量的层，这会拒绝其他应用由位于数据流204之下的多层视频编解码器充分支持。因此，可使用某个扩展机构，以便能够在层识别语法元素结构208仅仅容纳较低的中等数量的层的数据流204的模式与层识别语法元素结构甚至容纳大量层的模式之间切换，并且信息214可另外或者可替换地参与在这些模式之间切换。
虽然高级语法数据包216的效力范围可包含整个多层视频信号204，但是数据包216所属的预定部分也可能更小，例如，预定部分可与多层视频信号204在时间上分成的块体相关，每个块体是图片序列。例如，使用DASH或另一个合适的流协议，多层视频编码器200可能以刚刚提及预定部分为单位，改变编码入位流204的层数、具有树结构212的形式的层间依赖性和/或相对于层识别语法元素结构208在扩展或非扩展之间的切换。在任何情况下，定期传输高级语法数据包216使接收者能够在随机访问的基础上具有多个随机访问时间实例，以开始在其间解码多层视频信号214。
图2还示例性示出了用于接收多层数据流的装置。例如，可选的网络元件218接收并且处理多层视频数据流204，以便将该数据流转发给多层视频数据流204的接收者。因此，图2还示出了配置为解码多层视频数据流204的多层视频解码器220。这两个实体(即，网络元件218和多层视频解码器220)形成用于处理多层数据流204的装置的实例。
网络元件218不需要能够使用在其各自层之间的层间预测解码多层数据流204。尽管如此，都需要通知网络元件218和多层视频解码器220(即，接收者)与所述各种层以及由树21限定的在其间的层间依赖性相关联的数据包206。例如，网络元件218丢弃与层相关联的数据流204的数据包206，其中，例如，由于在链路内的比特率缺点，即，接收者不能再现额外信息量等，所以分别在网络元件218与多层视频解码器220之间的进一步链路内初步不需要所提供的额外信息量。同样，多层视频解码器220还可决定丢弃响应于外部参数(例如，当前可用的计算功率)、再现装置的显示性能(例如，空间分辨率)、最大数量的输入视图等的某些层的一些数据包206。即，装置218/220能够读取数据包206的层识别语法元素结构208，并且如果存在的话，那么能够从信息214中获得在层之间的层间依赖性，和/或能够相对于响应于信息214的层识别语法元素结构208，在扩展模式或非扩展模式之间切换，和/或能够从信息214中相对于层读取其他特征。
除此以外，多层视频解码器220能够通过收集和使用与该层以及通过帧间预测依赖性与该层相关的所有层相关联的数据包206的信息，从入站数据流204中重构视频材料202，直到某个等级(参照树结构212)。即，如上所述，多层视频解码器220可使用某个层的数据包206，作为相对于多层视频解码器220从该层的一个或多个参考层的数据包206中获得的层间预测的预测残差。在这方面，如上所述，多层视频解码器220还可能是使用变换残差解码、混合视频解码、分层多树细分和/或其他编码概念的解码器。
仅仅为了完整性，图2示出了可示例性提供多层视频编码器200和数据流204，以便数据包206通过这种方式包含在数据流204内，以便属于不同时间实例或图片的数据包206不彼此交错，以便在每个时刻形成连续访问单元222，每个访问单元收集属于该访问单元222的相应时刻的数据包206，以便在该访问单元222之前或之后，属于任何其他时刻的数据包206在数据流204内。然而，应注意的是，选择该限制，仅仅用于说明的目的，并且可替换地选择在数据流204内的数据包206的更松弛的设置。
在下文中，更详细地描述根据树结构212信令层间依赖性的可能性。如上所述，信息214可包括该信令。根据该可能性，所述层分成集群。在数据流内，单独信令在一方面是集群并且另一方面是在集群内的层之中的层间依赖性。在这范围内，下面提出的描述表示实现图2的信息214的可能性，以便信令层间依赖性212，但是如上所述，在后文中相对于图3描述的细节不应限于在图2中陈述的细节。确切地说，图2应被视为相对于图3的描述的可能实现储层。
图3示出了网络装置18，该装置可以是图2的网络元件218或多层视频解码器220，并且多层数据流10同样配置为处理(例如)图2的数据流204。
图3示出了多层数据流10，在由层ID lID识别的不同层上将视频材料编码入多层数据流。每层对应于信息量的不同等级。已经相对于2讨论了在这方面的可能性，但是为了更容易理解，人们可考虑每层给数据流10增加某个视图。然而，这并非表示限于图3的描述。可替换地，每层可对应于信息量的不同测度的组合，例如，多个视图和空间分辨率等。
因此，多层数据流10由多个数据包12构成，所述数据包可示例性对应于图2的数据包206。这种数据包12(或206)可能是子流，例如，所述子流允许波前并行处理编码入视频信号10的单独图片，所述子流可反过来由更小的单元构成，例如，NAL单元、薄片等。然而，同时主张图2和图3的数据包12或数据包206也可能是NAL单元、薄片或其他单元。
每个数据包12与不同层中的一个相关联，并且为了减少多层数据流10的位消耗，使用层间预测，以便每个数据包12仅仅将“残差”加入数据流10的更低层的某个子集的数据包中。如在14中所示，对于每层，由小圆点说明“更低层”。
根据在图3中示出的实施方式，如下面更详细地所描述的并且使用连续线路16在图中所说明的，可限制层间预测依赖性。具体而言，如在下面所描述的，由两个值的串联形成层ID。具体而言，接收多层数据流10的网络装置对每个数据包12读取使用在图2中的参考符号208表示的层ID语法结构，但是在此处由基础层ID字段20以及有条件地(例如，有条件地根据基础层ID字段或高级语法元素打开和关闭扩展机构)扩展层ID字段22构成。示例性地，在图中仅仅示出了具有这两个字段的数据包12。但是如上所述，基础层ID字段20的一个或多个值可信令相应数据包12的字段22的不存在。例如，整个扩展功能可以通过在数据流内的扩展标志在数据流内打开/关闭，并且需要或者不需要扩展层ID字段的可能条件可能在于，如上所述，基础层ID字段是0，是或者具有设置或未设置的某个位，或者采用在字段20或者具有大于或小于某个值的值的基础层ID字段的子部分内的某个值。下面陈述进一步实例。
基于层ID语法结构20和22，网络装置18获得识别与相应数据包12相关联的层的层ID，即，lID。下面描述不同的可能性。网络装置18也从多层数据流10中读取包含(例如)上述direct_dependency_flag的第一相互依赖性语法结构以及包含(例如)下面表示的direct_ext_dependency_flag和/或general_direct_ext_dependency_flag的第二相互依赖性语法结构。第一相互依赖性语法结构通过二进制的方式表示在基础层ID字段20能表示的几对不同值之间的相互依赖性，而第二相互依赖性语法结构通过二进制的方式表示在扩展层ID字段能表示的几对不同值之间的相互依赖性。基于这两个相互依赖性语法结构，然后，网络装置18形成显示在不同层之间的层间预测依赖性的层间依赖性矩阵，例如，在图中的14中描述的矩阵。下面使用伪码说明可进行导出的方式，所述伪码使用涉及第一和第二相互依赖性语法结构的接下来的循环，并且还相对于以下示图解释该方式。然而，应注意的是，所述信令的层间预测依赖性不需要实际上用于数据流内。确切地说，可能的层间预测依赖性的信令用于指导解码器或其他网络装置采用必要的步骤，相关的数据包按照合适的顺序可用，即，在参考数据包之前其他数据包根据层间预测依赖性参考的数据包。
从下面的描述中显而易见，可执行层间依赖性矩阵14的构造，以便第二相互依赖性语法结构应用于所有实例中，其中，层间依赖性矩阵14与在从在基础层ID字段20内的相同值中获得的并且从而与该值相关联的层ID的层之间的层间预测依赖性相关。根据下面也更详细地描述的另一个实施方式，第二相互依赖性语法结构从位流10中读取并且在位流内传输几次，例如，单独用于基础层ID字段20的每个可能值或者用于基础层ID字段20的可能值的子集，同时使用索引，例如，在下面提出的实例中使用included_nuh_layer_id，使第二相互依赖性语法结构的各种实例化与基础层ID字段20的可能值相关联。在甚至其他实施方式中，该结构概括为允许所有可能的层间预测依赖性，并且通过第二相互依赖性语法结构可描述，即，通过为基础层ID字段的每对不同值传输该结构，其中，第一相互依赖性语法结构表示相互依赖性存在。
换言之，并且如进一步在图4中所述，图3提出了用于信令层间依赖性的实例，根据该实例，单独的相互依赖性语法结构24和26用于通过分层的方式描述层间依赖性，在这两个相互依赖性语法结构24和26的范围之间的界面与由在数据流的每个数据包内的字段20和22提供的基础层ID和扩展层ID的范围之间的界面一致。由字段20和22提供的基础层ID和扩展层ID独特地限定包括字段20和22的相应数据包的层ID。这组扩展层ID和基础层ID的组合能表示的所有能表示的层ID在圆圈28内由圆点30表示。即，每个圆点30对应于不同的一对基础层ID和扩展层ID。例如，层ID可能是基础层ID和扩展层ID的串联。仅仅使用字段20提供的基础层ID，整组28层ID 30细分成层ID的不相交的组32，在下面称为集群32，其中，属于某个集群32的所有层ID具有相同的基础层ID。如上面相对于图2所述，由于在图4中使用在圆点30之间的虚线说明具有这些层间依赖性的层间预测，所以与层ID 30相关联的层通过树状方式彼此链接。为了容易理解，仅仅在图4中说明实际的层间依赖性的子集。
在任何情况下，通过第一相互依赖性语法结构24表示通过在这对第一集群32的层与第二集群32的层之间的层间依赖性在两个集群32之间的链接。换言之，第一相互依赖性语法结构24粗糙地或者按照集群的方式描述在层之间的相互依赖性。在图4中，使用在集群32之间的连续线路说明这些相互依赖性。第一和第二集群32的所有对(其中，第一集群的至少一层与在第二集群内的一个集群链接)互连，因此，在第一相互依赖性语法结构24中表示。然后，第二相互依赖性语法结构26阐明表示为由第一相互依赖性语法结构24互连的几对集群32中的哪些层实际上通过层间预测彼此相关。即，第二相互依赖性语法结构26阐明细粒度相互依赖性。然而，第二相互依赖性语法结构26也单独限定在每个集群32内的层之间的相互依赖性，即，在层之间的集群内依赖性。在图4中，例如，示出了6个集群32，从而产生第二相互依赖性语法结构26调节在不同集群32的层之间的细粒度相互依赖性的可能15对集群32加上第二相互依赖性语法结构26可在内部调节相互依赖性的6个集群。如上所述并且如下面进一步所述，因此，最大可具有第二相互依赖性语法结构的1到21个实例化34，即，每个集群单独具有1个并且互连的每对集群32具有一个。显然，不需要为信令为通过第一相互依赖性语法结构24不链接的几对集群32，信令第二相互依赖性语法结构26，从而保存有价值的边信息比特率。应注意的是，在使用第二相互依赖性语法结构26，以便描述不同的几对集群32的层的层间依赖性的情况下，对于所有集群32，每个集群32的层数应相等。如果使用基础层ID和扩展层ID的串联描述层ID，那么这是这种情况。然而，应提及的是，在理论上，集群32的层数可以在集群32之间变化。在这种情况下，例如，第二相互依赖性语法结构26的单独实例化34会在数据流内为互连的每对集群32信令，并且会为每个集群尺寸传输至少一个实例化34。
例如，图3示出了通过将基础层ID用作最高有效数位并且将扩展层ID用作不太有效数位来从基础层ID和扩展层ID中获得层ID的情况。图3还示出了一个实例化34用于描述在一个集群内的层的层间依赖性并且另一个实例化34用于描述在不同集群的层之间的依赖性的示例性情况。为了完整性，要注意的是，图3的矩阵14具有与层ID一样多的行和列。仅仅填充在对角线之下的下半部分，这是因为任何层可仅仅通过层间预测取决于任何先前的(即，分层次更低的)层。在图3的实例中，列数对应于层的层ID，通过使用层间预测，所述层ID取决于进一步层，即，基础层，这些基础层由(例如)二进制层表示，而二进制零表示不参与层间预测相应层的层，所述层的层ID对应于当前列。在该范围内，在图3的实施方式中，第二相互依赖性语法结构26几乎描述矩阵14的子矩阵。
如上所述，第一和第二相互依赖性语法结构24和26可由在高级数据包216内的信息214包括(比较图2)。图5示出了一个实例，其中，第一相互依赖性语法结构24显示在36中描述的层集群之间的相互依赖性。例如，具有基础层ID 2的集群取决于具有基础层ID 2和1的集群。
第二相互依赖性语法结构的第一实例化34也存在于数据流内，并且通过子矩阵38的形式调节在图5中描述的层之间的集群内依赖性。进一步，根据图5的实例，数据流还包括调节不同集群的层的逐层相互依赖性的第二相互依赖性语法结构26的实例化34。具体而言，第二实例化可通过对于被参考集群的每个增强层ID具有一行并且对于参考集群的每个增强层ID具有一列的子矩阵40描述在不同集群的层之间的依赖性。
在图5的实例中，子矩阵38放在矩阵36表示在集群之间的相互依赖性的每个位置，即，其中，定位1，并且所述集群具有相同的基础层ID，即，位于矩阵36的对角线上的集群，并且子矩阵40放在矩阵36通过“1”表示在不同的基础层ID的集群之间的相互依赖性的位置。在42中示出结果。
应注意的是，通过矩阵(例如，矩阵42)描述层间依赖性，仅仅是用于描述层间依赖性的一个实例。还可使用其他描述。矩阵36到40由第一和第二相互依赖性语法结构编码的方式可如下：第一相互依赖性语法结构24可信令在对角线之下并且包括对角线的矩阵36的每个系数的二进制值。表示矩阵38的第二相互依赖性语法结构26的实例化34可信令在对角线之下并且不包括对角线的矩阵38的每个系数的二进制值。表示矩阵40的第二相互依赖性语法结构26的实例化34可信令矩阵40的所有系数的二进制值。
在描述关于如何信令层间依赖性的可能性之后，在后文中示例性提出更详细的实现方式，作为HEVC标准的扩展。
具体而言，层标识符集群和集群依赖性信令可如下嵌入现有编解码器内。
两个语法元素nuh_layer_id和layer_id_ext可用于基于性能(例如，彼此的空间关系、编码依赖性或其他性能)将在视频位流内的编码层分组成所谓的集群。将层标识符构造成集群，可允许在单独集群内具有相等构造的编码依赖性的集群，即，在所有限定的集群内或者限定的集群的子集内的编码依赖性相同。如在图6中所述，可在集群内作为额外一组依赖性标志信令依赖性并且组合所述依赖性和现有依赖性信令(比较在HEVC扩展的VPS扩展内的direct_dependency_flag)，以确定特定层的参考层。
等于0的direct_ext_dependency_flag[i][j]规定具有扩展索引j的层并非在相同层集群内具有扩展索引i的层的直接参考层。等于1的direct_dependency_flag[i][j]规定具有扩展索引j的层可能是在相同集群内具有扩展索引i的层的直接参考层。在对于在0到(1<<layer_id_ext_len)-1的范围内的i和j，不存在direct_ext_dependency_flag[i][j]时，推断出等于0。
替换的语法可限制在具有max_layer_id_ext的direct_ext_depencency_flag语法元素之上的循环，以避免将编码依赖性信令给未使用的层标识符。
可如下允许在集群内并且在集群之间的编码依赖性的更灵活的信令：
a)逐个集群地信令在集群内的编码依赖性；
b)限定多个集群依赖性组并且识别应用限定的集群依赖性的集群(例如，通过nuh_layer_id)；
c)通过信令在集群之间的第一依赖性并且信令在两个相关集群内的层的第二依赖性的方式，分层信令依赖性；
d)组合b)和c)。因此，信令(signal)以下数据：
1、在集群之间的依赖性(例如，几对参考和相关集群)；
2、限定在参考(被参考)集群和相关(参考)集群内的层之间的依赖性的多个集群依赖性组；
3、对于每个集群依赖性组，其适应哪些集群依赖性的指示(如在1中信令的)。
要注意的是，在集群内的层之间具有依赖性时，对于c)和d)，集群可取决于自身。
在不均匀地使用用于构造的性能空间(例如，摄像头的空间位置)时，a)到d)允许构造层标识符的空间。一个实例是二维摄像头阵列，该空间密度不恒定或者该阵列并非矩形。下面提供语法实例，用于根据以上内容通过多种方式信令限定集群依赖性组。
a)图7提供了在逐个集群地限定在集群内的编码依赖性的视频参数组扩展语法方面的示例性实施方式。
等于0的direct_dependency_flag[i][j]规定具有索引j的层或集群并非具有索引i的层或集群的直接参考层或参考集群。等于1的direct_dependency_flag[i][j]规定具有索引j的层或集群可能是具有索引i的层或参考集群的直接参考层或参考集群。在对于在0到vps_max_layers_minus1的范围内的i和j，不存在direct_dependency_flag[i][j]时，推断出等于0。
等于0的general_direct_ext_dependency_flag[i][j]规定具有扩展索引j的层并非在相同层集群内具有扩展索引i的层的直接参考层。等于1的general_direct_dependency_flag[i][j]规定具有扩展索引j的层可能是在相同集群内具有扩展索引i的层的直接参考层。在对于在0到max_layer_id_ext的范围内的i和j，不存在general_direct_ext_dependency_flag[i][j]时，推断出等于0。
等于0的direct_ext_dependency_flag[i][j][k]规定具有扩展索引k的层并非在第i层集群内具有扩展索引j的层的直接参考层。等于1的direct_ext_dependency_flag[i][j][k]规定具有扩展索引k的层可能是在第i集群内具有扩展索引j的层的直接参考层。在对于在0到max_layer_id_ext的范围内的i、j以及k，不存在direct_ext_dependency_flag[i][j][k]时，推断出等于0。
b)图8提供了在视频参数组扩展中的语法方面的示例性实施方式，该扩展限定通过多个集群依赖性组(number_of_cluster_dependency_sets)的信令在集群内的编码依赖性、在每个集群依赖性组内的编码依赖性(direct_ext_dependency_flag)以及应用集群(由规定的语法元素included_nuh_layer_id通过其相应nuh_layer_id的积极标志示例性识别)。
c)图9提供了通过信令在集群之间的第一依赖性并且仅仅信令在两个相关集群内的层的第二依赖性的方式分层信令依赖性的示例性实施方式。
等于0的direct_dependency_flag[i][j]规定具有索引j的层或集群并非具有索引i的层或集群的直接参考层或参考集群。等于1的direct_dependency_flag[i][j]规定具有索引j的层或集群可能是具有索引i的层或参考集群的直接参考层或参考集群。在对于在0到vps_max_layers_minus1的范围内的i和j，不存在direct_dependency_flag[i][j]时，推断出等于0。
注意-如果layer_id_ext_len大于0，那么direct_dependency_flag[i][j]信令在集群之间的依赖性，否则，(layer_id_ext_len等于0)，direct_dependency_flag[i][j]信令层的依赖性。
等于0的direct_ext_dependency_flag[i][j][k][l]规定在第j集群内的第l层并非在第i集群内的第k层的直接参考层。等于1的direct_ext_dependency_flag[i][j][k][l]规定在第j集群内的第l层可能是在第i集群内的第k层的直接参考层。在不存在时，direct_ext_dependency_flag[i][j][k][l]推断出等于0。
d)图10提供了b)和c)的组合的示例性实施方式。
等于0的direct_dependency_flag[i][j]规定具有索引j的层或集群并非具有索引i的层或集群的直接参考层或参考集群。等于1的direct_dependency_flag[i][j]规定具有索引j的层或集群可能是具有索引i的层或参考集群的直接参考层或参考集群。在对于在0到vps_max_layers_minus1的范围内的i和j，不存在direct_dependency_flag[i][j]时，推断出等于0。
注意-如果layer_id_ext_len大于0，那么direct_dependency_flag[i][j]信令在集群之间的依赖性，否则，(layer_id_ext_len等于0)，direct_dependency_flag[i][j]信令层的依赖性。
在dependency_set_applies_flag[n][i][j]等于1时，等于0的direct_ext_dependency_flag[n][k][l]规定在第j集群内的第l层并非在第i集群内的第k层的直接参考层。在dependency_set_applies_flag[n][i][j]等于1时，等于1的direct_ext_dependency_flag[n][k][l]规定在第j集群内的第l层可能是在第i集群内的第k层的直接参考层。
等于0的dependency_set_applies_flag[n][i][j]规定在第i集群内的层与在第j集群内的层之间的依赖性不由direct_ext_dependency_flag[n][k][l]规定。等于1的dependency_set_applies_flag[n][i][j]规定在第i集群内的层与在第j集群内的层之间的依赖性由direct_ext_dependency_flag[n][k][l]规定。在不存在时，dependency_set_applies_flag[n][i][j]推断出等于0。在对于在0到(number_of_cluster_dependency_sets–1)的范围内(包括0和number_of_cluster_dependency_sets–1)的i和j以及所有n的特定组合，dependency_set_applies_flag[n][i][j]等于0时，在第j集群内的层并非在第i集群内的任何层的直接参考层。
因此，在实现到HEVC扩展内的图2到图5的及与集群的相互依赖性信令的以上实例中，图2的数据包206是薄片或薄片段，并且例如，数据包216是参数组，例如，视频、图片或序列参数组。根据图7的语法实例，对于每对集群i、j(i≤j)，使用语法元素direct_dependency_flag，信令第一相互依赖性语法结构24，其中，vps_max_layers_minus1是基础层ID的最大数量减去1。因此，例如，语法元素显示图5的粗糙矩阵36。称为unique_cluster_dependencies_flag的语法元素44在两个选择之间区分：第二相互依赖性语法结构26的一个实例化提交给并且应用于所有基础层ID，或者为每个基础层ID i，传输一个实例化。在第一种情况下，标志general_direct_ext_dependency_flag根据每个基础层ID的38共同建立子矩阵，并且在第二种情况下，标志direct_ext_dependency_flag根据每个基础层ID的38单独建立子矩阵。unique_cluster_dependencies_flag在两个选择之间切换。因此，在图7的情况下，如果unique_cluster_dependencies_flag等于0，那么所产生的子矩阵38对应于相等的参考和被参考集群ID的每个位置放在矩阵36内，其中，1由direct_dependency_flag表示。可默认使用预定的子矩阵，即，所有参与装置(例如，编码器、网络元件以及多层视频解码器)已知的子矩阵，填充剩余位置，其中，第一相互依赖性语法结构24表示在不同集群ID的集群之间的相互依赖性。在unique_cluster_dependencies_flag等于1的情况下，对于第一相互依赖性语法结构24在相等的被参考和参考集群ID的位置表示1的每个位置，在矩阵42内的相应位置信令并且定位正好这个集群ID的单独子矩阵。因此，max_layer_id_ext对应于在每个vps_max_layers_minus1集群内的层数。
在图8的情况下，第一相互依赖性语法结构24通过与在图7的实例中相同的方式传送：对于每个集群ID，每个集群ID的一个标志等于或小于相应集群ID。标志cluster_dependency_sets_present_flag 46在如上所述使用语法元素general_direct_ext_dependency_flag的图7的第一选择与不同模式之间切换，根据所述模式，使用称为集群依赖性组的数量的语法元素，明确信令使用语法元素direct_ext_dependency_flag在数据流内提交的第二相互依赖性语法结构26的实例化的数量。然后，通过使用语法元素included_nuh_layer_id 50明确列出每个实例化适用的集群ID，这些实例化与这些实例化适用的集群ID相关联。通过该措施，不为每个集群ID提交第二相互依赖性语法结构26的实例化34。确切地说，在cluster_dependency_sets_present_flag等于1的情况下，仅仅提交第二相互依赖性语法结构26的更少量的实例化，使每个实例化与和该实例化相关联的集群ID相关联。而且，就相互依赖的几对不同集群而言，默认规则可用于在这种位置填充矩阵42(在集群对角线之下)。
根据图9的实例，相对于第一相互依赖性语法结构，通过交错的方式示例性信令第二相互依赖性语法结构的信令，但是根据替换的实施方式，可省略该交错。在任何情况下，在图9的实施方式中，为每对(相等的或不相等的)集群ID提交子矩阵38或40，即，第二相互依赖性语法结构26的实例化34，其中，第一相互依赖性语法结构24表示集群间依赖性。从语法实例中可推论出，子矩阵40的传输消耗比子矩阵38更多的位direct_ext_dependency_flag。这分别从条件条款52和条件条款54中可推论。换言之，在传输用于集群内部相互依赖性调节的第二相互依赖性语法结构26的实例化时，其中，由计数i表示的参考集群ID等于由j表示的被参考集群ID，仅仅传输direct_ext_dependency_flag，用于参考和被参考层的增强层ID的组合，其中，被参考层的增强层ID(在此处是l)小于参考层的增强层ID(在此处是k)。即，在子矩阵38之中，仅仅为在子矩阵38的对角线之下的位置传输direct_ext_dependency_flag。在其他情况下，即，对于相互依赖的集群对i≠j的第二相互依赖性语法结构26的实例化，传输整个子矩阵，即，用于子矩阵40的每个位置的标志direct_ext_dependency_flag。
图10的实施方式组合图8和图9的实施方式的特殊特征：整个子矩阵，即，提交第二相互依赖性语法结构26的实例化，即，在数量上的number_of_cluster_dependency_sets，然后，这些实例化中的每个与矩阵36的网格站点相关联，其中，例如，通过1应用第二相互依赖性语法结构26的各实例化(在第一语法结构24表示集群依赖性的存在的实例化之中(比较56))。
甚至换言之，如相对于图9所述，第二相互依赖性语法结构26的多个实例化34可从多层数据流中读取，即，用于值0<k≤j≤n<N的几对(j,k)，N是所述基础层ID能表示的值的数量。n可设置为等于N，但是也如在本文中所述，可使用实际上使用的集群基数的明确信令，以便限制传输开销。穿过所述对(j,k)(在图9中的24中见在i和j之上的循环)，并且有条件地根据表示在该对之间存在或不存在相互依赖性的所述第一相互依赖性语法结构，为所述对(j,k)执行或者抑制读取第二相互依赖性结构(在图9中见“如果direct_dependency_flag[i,j]”，其中，i、j分别对应于j和k)，其中，为对j＝k的(j,k)读取的所述第二相互依赖性结构26的实例化34表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层IDj的层之中的其他层的层间预测，并且为一对不同值k<j的(j,k)读取的所述第二相互依赖性结构26的实例化34表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层IDk的层之中的层的层间预测。与图7相似，然而，第二相互依赖性结构26的一个实例化也可能从多层数据流中读取，第二相互依赖性结构26的所述一个实例化分别对于每个集群值(j,j)对，共同表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID j的层之中的其他层的层间预测，与图7中的情况一样(如果unique_cluster_dependencies_flag等于0)，或者共同对于对(j,k)(j不等于k)(其中，第一相互依赖性语法结构24表示在相应对之间的相互依赖性的存在)，表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID k的层之中的层的层间预测。扩展层ID 22能表示的值的数量表示为M，第二相互依赖性语法结构可包括用于扩展值为0<q<p≤m<M的每对(p,q)的一个二进制值，以便表示在具有基础层ID i的层之中的哪些层是依赖于在具有基础层ID i的层之中的其他层的层间预测，以及用于每对扩展值0<p,q≤m<M的一个二进制值，以便表示具有扩展值p并且具有基础层ID j的哪个层是依赖于具有扩展值q并且具有基础层ID k的层的层间预测。而且，如在说明书中的别处所述，m可设置为M，但是也如在本文中所述，可使用实际上使用的扩展基数的明确信令，以便限制传输开销。进一步，如在图8和图10中所示，可使用索引语法结构50，以便使第二相互依赖性结构的实例化与基础层ID值的单独对(j,k)相关联。在此处，图10显示了关联语法结构可包括用于每对(j,k)的标志，并且所述关联语法结构的解析可涉及跳过值0<k≤j≤n<N的对(j,k)，其中，所述第一相互依赖性语法结构表示在对(j,k)之间不存在相互依赖性(独立性)。
即，在以上部分中描述的内容能表示为“层标识符集群和集群依赖性信令”。在这方面，装置可能是视频解码器。因此，在操作时，视频解码器能够选择由(扩展的)layerID识别的位流的数据包，用于解码。然而，可替换地，该装置可以是能够基于外部因素(例如，网络利用率、关于解码器的知识等)丢弃由(扩展的)layerID识别的位流的数据包的网络元件。
自然地，上述概念也影响编解码器的现有编码器，以由该概念改进：编码器(例如，图2的编码器)配置为使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流10，所述多层数据流包括多个数据包12，每个数据包与所述不同层中的一层相关联，每层由基础层ID 20或基础层ID 20和扩展层ID 22索引，并且在所述多层数据流内插入表示在所述基础层ID 20能表示的几对不同值之间的相互依赖性的第一相互依赖性语法结构24以及表示在所述扩展层ID 22能表示的几对不同值之间的相互依赖性的第二相互依赖性语法结构26，设置所述第一相互依赖性语法结构和第二相互依赖性语法结构，以便基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，能构造显示在所述不同层之间的可能层间预测依赖性的层间依赖性描述14。
接下来描述的细节涉及通过有效的方式信令层相关的信息的可能性，其中，例如，这种层相关的信息可包括涉及如相对于图2到图10概述的层间依赖性的信息。作为起始点，使用上面通常提出的情况，根据该情况，每个数据包206(比较图2)包括的层识别语法元素结构208由基础层ID字段108和扩展层ID字段112构成，如在图11中所述。图11示出了用于处理多层数据流(例如，网络元件218)或多层视频解码器202的装置100，如在图2中所示。装置100显示为包括接收器102，所述接收器配置为接收由一系列数据包构成的多层视频信号，每个数据包包括层识别语法元素。
由接收器102接收的多层视频信号104(对应于在图2中的204)由一系列数据包106(对应于在图2中的206)构成，每个数据包包括层识别语法元素结构(对应于在图2中的208)，该结构包括至少基础层ID字段108并且无条件地或者有条件地取决于高级语法元素或基础层ID字段108、扩展层ID字段112的值。
例如，数据包106可以是多层视频信号104细分成的NAL单元、薄片、瓷砖、图片或其他数据包。对于包括多个数据包106的多层视频信号的预定部分，例如，部分113，装置100也包括的层识别扩展器110从多层视频信号中读取最大语法元素，表示多层视频信号的预定部分113包括的数据包108的扩展层ID字段112的最大假定值。例如，预定部分113可能是编码的视频序列、块体、图片组等。最大语法元素114可包含在部分113的特殊数据包内，例如，VPS NAL单元。对于在预定部分113内的每个数据包，扩展器110基于由108并且有条件地112构成的层ID语法结构，确定相应数据包的层ID。例如，这两个语法元素108和112的两个值的串联可造成层ID。
扩展器110可使用上面说明的最大语法元素，获得扩展层ID字段的位长度。可替换地，为此，可使用额外语法元素。甚至可替换地，可默认固定用于表示扩展层ID字段112的位数。
然后，扩展器110基于最大假定值，确定在部分113内的最大层数。例如，扩展器110也从数据流104中读取语法元素，对于部分103，表示在部分103内的数据包106的基础层ID字段108的最大假定值，并且组合这两个最大假定值，用于确定最大层数。
通过等于最大层数的多次反复解析多层视频信号的层表征语法部分，扩展器110确定最大层数的每层的至少一个特征。有利地，数据流104不需要信令每个可能值的至少一个特征，即，并非用于扩展层ID字段112的整个基数，而是仅仅用于在该基数之中的实际上使用的子部分。此外，可甚至使用最大语法元素114，以便如上所述，获得在数据流104内的扩展层ID字段112的表示位的数量。例如，“特征”可能是对其他层等的层内预测。
换言之，相对于图11，描述了可以在数据流204/104内传输关于在考虑在兴趣预定部分113内的所有数据包106/206时实际上采用的扩展层ID字段的能表示状态的数量的明确信号作用。例如，假设扩展层ID字段112是N位的字段，那么2N扩展层ID 120由扩展层ID字段112能表示。字段112的长度可通过在图12中使用虚线122表示的某个高级语法元素固定或者可信令并且设置在数据流内。然而，由于某种原因，并非所有可用扩展层ID字段可用于兴趣预定部分113内。在图12中，例如，说明了仅仅使用7个能表示的扩展层ID，即，通过阴影线。
根据图11，最大语法元素114表示扩展层ID字段112的实际使用/假定值的这个数量。由于该语法元素114，所以可行的是，仅仅相对于扩展层ID的实际假定数量，而非用于扩展层ID字段112的能表示值的整个数量，将层特定的信息插入数据流内。因此，如在图12中的122中所示，例如，解析多层视频信号的装置可解析多层视频信号的某个层表征语法部分124，解析的次数仅仅等于由语法元素114表示的最大层数，而非扩展层ID字段的实际可用/能表示值的整个数量。因此，通过数据流消耗的边信息量可保持更低。例如，在图6到图10的实例中，可行的是，将max_layer_id_ext设置为等于由语法元素114表示的扩展状态的最大假定数量，而非将该值设置为等于扩展层ID字段112的能表示值的整个数量。因此，“表征语法部分”124可由先前提出的标志direct_ext_dependency_flag体现。
如上所述，字段112的位长度的存在/信令可选。在任何情况下，与由语法元素122设置的扩展层ID字段112的可用/能表示值的数量的更粗糙的设置相比，语法元素114表示实际使用的/活动的扩展层ID的数量的粒度/保真度增大。优选地，语法元素114表示扩展层ID字段112的实际假定值的数量的保真度或粒度足够精细，以便表示实际假定值的精确数量。可替换地，由语法元素122提供的在1与字段112的可用/能表示值的最大数量的信号作用的保真度/粒度之间的某个地方的保真度/粒度也可行。换言之，最大语法元素114能表示扩展层ID字段108的最大假定值，以小于(n-1)2为单位，n是扩展层ID字段的位长度，或者可能甚至是1。
因此，根据图11和12，描述了装置(例如，网络元件或多层视频解码器)可包括接收器102和扩展器110，其中，接收器102配置为接收由一系列数据包106构成的多层视频信号104，每个数据包包括层识别语法元素结构，该结构由基础层ID字段并且可能仅仅有条件地扩展层ID字段112构成，其中，对于包括在这系列数据包106之中的多个数据包106的多层视频信号的预定部分113，层识别扩展器110配置为从多层视频信号104中读取最大语法元素114，最大语法元素114表示在预定部分113包括的数据包106之中的扩展层ID字段112的最大假定值。对于在预定部分113内的每个数据包106，扩展器110基于层识别语法元素结构，确定相应数据包106的层ID，例如，通过如上所述，串联字段108和112的基础层ID和扩展层ID。扩展器110还基于最大假定值，确定在预定部分113内的最大层数，并且通过等于最大层数的多次反复解析层表征语法部分104，确定最大层数的每层的至少一个特征。在组合图11和12的实施方式和上面相对于图2到图10概述的实施方式时，“最大层数”能表示每个集群的最大层数，在这种情况下，例如，“最大层数”的确定直接将最大假定值用作“最大层数”，并且“至少一个特征”可能是表示在第二相互依赖性语法结构内的层间依赖性的标志的数量。然而，特定的另一个实例也可能是在单独层ID的相应编码参数组的数据流内的信号作用。在这种情况下，“最大层数”可确定为等于所使用的或者能表示的基础层ID的数量乘以最大假定值，即，实际上使用的/假定的扩展层ID的数量。其他实例也可行。在任何情况下，通过语法元素114传输实际假定值，能够保存有价值的边信息比特率。
如上所述，图11和12的概念可与上面相对于图2到图10概述的概念组合，或者可单独使用，而不使用前面描述的概念。
与上面相对于图2到图10提出的描述相似，然而，以下描述显示了如何将图11和12的概念嵌入现有视频编解码器(例如，HEVC的扩展)内的可能性。
在HEVC中，可从在视频和元数据包内明确信令的层标识符中获得称为LayerID的层标识符变量，例如，在视频或元数据包的每个块体内信令的nuh_layer_id和额外信息，形成特定数据包的新变量LayerId，以用于其识别。
根据图11和12信令的额外信息可涉及额外语法元素，比较layer_id_ext，例如，在视频或元数据包的报头或有效载荷的某个部分内，考虑特定的视频或元数据包属于增强层，从而与仅仅基础层传统装置保持兼容。在视频或元数据包属于基础层，但是由增强层处理能力装置处理时，可假设默认值用于layer_id_ext。
图13提供信令额外信息的薄片段报头的实例，作为在包含在HEVC编码视频的增强层(比较nuh_layer_id>0)的视频数据包内的薄片报头中的语法元素layer_id_ext。
使用数学运算，以便将nuh_layer_id和layer_id_ext组合成LayerId，这允许更大的标识符空间并且对于nuh_layer_id和layer_id_ext的两个值的独特组合是独特的。例如，数学运算可将nuh_layer_id的位用作LayerId变量的MSB，并且将layer_id_ext用作LSB，反之亦然，例如，如下。
如下确定变量LayerId，其中，LengthOfExtension是在位方面的layer_id_ext语法元素的长度。
LayerId＝(nuh_layer_id<<LengthOfExtension)+layer_id_ext
图11和12的概念可包括明确信令用于在视频或元数据包的报头或有效载荷的某个部分内传输额外信息(比较上面的LengthOfExtension)的位的量，以便有效利用传输的数据量。图14提供在元数据包(例如，HEVC视频参数组扩展语法)中信令的LengthOfExtension值的示例性语法和语义。
layer_id_ext_len表示用于扩展LayerId范围的位数。
图11和12的概念包括明确信令用于编码的视频位流内的layer_id_ext语法元素的最大值，例如，max_layer_id_ext。在此基础上，可获得在视频或元数据包的报头或有效载荷的某个部分内传输额外信息(比较上面的LengthOfExtension)所需要的最低可能的位的量，以便有效利用传输的数据量。图15提供在元数据包(例如，HEVC视频参数组扩展语法)中信令的layer_id_ext语法元素值的最大值的示例性语法和语义。
max_layer_id_ext表示在编码的视频序列内的任何薄片报头内的layer_id_ext语法元素的最大值。
下面提供根据本发明的以上扩展的layer_id_ext语法元素的语义的两个示例性变体。
layer_id_ext与nuh_layer_id相结合使用，以识别层。使用layer_id_ext_len位，编码语法元素layer_id_ext。在不存在时，其值推断为0。
layer_id_ext与nuh_layer_id相结合使用，以识别层。使用编码的Ceil(Log2(max_layer_id_ext))位，编码语法元素layer_id_ext。在不存在时，其值推断为0。
在图16A–16C中可扩展提供HEVC视频编解码器标准的参数组或SEI消息的层标识符，而不解析依赖性。
在分层编码场景中，调整与层标识符或其最大数量相关的信令，以覆盖扩展的层标识符空间(比较LayerId的值范围)，而非规则的明确层标识符空间(比较nuh_layer_id的值范围)，如在图17中的视频参数组扩展的语法表格示例性提供的，其中，如下示例性提供变量VpsMaxNumLayers。
规定在扩展层范围内的最大层数的变量VpsMaxNumLayer设置为等于(vps_max_layers_minus1)*2layer_id_ext_len.+1，
或者
规定在扩展层范围内的最大层数的变量VpsMaxNumLayer设置为等于(vps_max_layers_minus1)*max_layer_id_ext.+1。
layer_id_in_nalu[i]规定与第i层的VCL NAL单元相关联的LayerId值的值。对于在从0到VpsMaxNumLayers–1(包括0和VpsMaxNumLayers–1)的范围内的i，在不存在时，layer_id_in_nalu[i]的值推断为等于i。
在i大于0时，layer_id_in_nalu[i]大于layer_id_in_nalu[i–1]。
对于在从0到vps_max_layers_minus1(包括0和vps_max_layers_minus1)的范围内的i，变量LayerIdInVps[layer_id_in_nalu[i]]设置为等于i。
dimension_id[i][j]规定第i层的第j个存在的可扩展性维度类型的标识符。用于表示dimension_id[i][j]的位数是dimension_id_len_minus1[j]+1位。对于在从0到NumScalabilityTypes-1(包括0和NumScalabilityTypes-1)的范围内的i，在不存在时，dimension_id[i][j]推断为等于((layer_id_in_nalu[i]&((1<<dimBitOffset[j+1])-1))>>dimBitOffset[j])。
如下获得规定第i层的第smIdx个可扩展性维度类型的标识符的变量ScalabilityId[i][smIdx]、规定第i层的视图标识符的变量ViewId[layer_id_in_nuh[i]]、以及规定第i层是否是视图可扩展性扩展层的变量ViewScalExtLayerFlag：
自然地，上述概念也影响编解码器的现有编码器，以由该概念改进：编码器(例如，图2的编码器)配置为将视频材料编码入由一系列数据包106构成的多层数据信号104，每个数据包包括由基础层ID字段108和扩展层ID字段112构成的层识别语法元素结构，并且对于包括多个数据包的多层视频信号的预定部分113，将最大语法元素114插入多层视频信号内，表示多层视频信号的预定部分113包括的数据包的扩展层ID字段112构的最大假定值，基于最大假定值，确定在多层视频信号的预定部分内的最大层数，并且通过等于最大层数的次数，反复写入多层视频信号的层表征语法部分124，来信令在多层数据信号104内的最大层数中的每层的至少一个特征。例如，编码器延迟流104的输出，直到完成部分113的编码。
以下附图论述信令包含在多层数据流内的数据包的层ID的概念以及在具有(由于任何原因)请求从在其中附加扩展层ID的可能性中排除基础层ID的某个值(例如，0)的必要性的情况下，实现使用扩展机构有效信令该层ID的可能性，而不危及向后兼容性。后面的必要性造成以下不对称：对于基础层ID的几乎所有可能值，附加扩展层ID是可行的。这造成以下不对称：对于基础层ID的几乎所有值，附加扩展层ID是可行的，从而造成基础层ID的这些几乎所有值的数量乘以扩展层ID能表示层ID值的能表示值的数量。然而，限制的基础层ID值不包括附加任何扩展层ID的可能性。因此，接受这个不对称，或者在使用扩展机构的情况下，不使用基础层ID的禁止值。下面陈述的解决方案通过更有效的方式解决了这个问题。
此时，相对于HEVC标准的可能扩展，直接概述该下一个概念的描述，其中，正好应用刚刚概述的限制。然而，下面概述的概念也可传递给其他编解码器，例如，所述编解码器在任何层指示扩展机构上施加相似的限制。
如上所述，HEVC的限制在于，不能扩展基础层。因此，为了符合HEVC规范，不能信令层id扩展值layer_id_ext，用于具有等于0的nuh_layer_id的层，因此，与等于0的nuh_layer_id相关联的集群可以仅仅包括基础层本身。在不同集群内的这种不相等数量的层可能不可取。
该问题可以由下述概念解决，该概念通过与上述方式不同的方式，获得集群以及在集群内的层id扩展值。由于等于0的nuh_layer_id不能具有多层，所以没有多层的限制扩展为不等于0的其他nuh_layer_id值。然后，属于这些限制的nuh_layer_id值的层与未限制的nuh_layer_id值的层组合，以形成具有相等层数的集群。
基本理念在于，nuh_layer_id分成两个值，例如，通过位屏蔽。一个值用于确定集群。这样做，不同的nuh_layer_id值可以属于相同的集群。另一个值用于确定layer_id_ext值的存在(因此，用于确定多层是否可以属于nuh_layer_id值)并且确定在LayerId推导中与layer_id_ext_value的额外偏移。
在下面提供并且在图18中说明基本理念的实施方式的实例。因此，图18提供在layer_id_ext、nuh_layer_id以及LayerId之间的关系的实例，用于max_layer_id_ext等于3的示例性情况(LengthOfExtension等于2)。
仅仅在实例中，6位nuh_layer_id置的5个最高有效位用于确定集群，因此，具有不同最低有效位的两个nuh_layer_id值属于一个集群。
如果最低有效位等于0，那么不为nuh_layer_id信令layer_id_ext值，并且仅仅一个层属于nuh_layer_id。按照定义，该层是在由5个最高有效位规定的集群内具有等于0的layer_id_ext的层。否则，如果最低有效位等于1，那么多层属于nuh_layer_id值。对于每层，明确信令layer_id_ext，并且每层属于由5个最高有效位规定的集群。
图19的语法表格可能用于该实施方式。示出了数据包206的报头，即，薄片段报头，或者更确切地说，其片段。
在nuh_layer_id的最低有效位等于0时，不存在Layer_id_ext。在不存在时，推断出等于0。如下确定变量LayerId，其中，LengthOfExtension是在位方面的layer_id_ext语法元素的长度。
LayerId＝((nuh_layer_id>>1)<<LengthOfExtension)+layer_id_ext
在另一个实施方式中，在位流内，例如，在VPS内，信令变量add_layer_id_ext_len。(请注意，上述实施方式是add_layer_id_ext_len等于1的该实施方式的特殊情况)。6位nuh_layer_id语法元素的6-add_layer_id_ext_len)最高有效位用于确定集群。最低有效位add_layer_id_ext_len规定是否推断layer_id_ext，而且，固定添加到layer_id_ext值中的偏移。图20A和20B的语法表格用于演示该实施方式：
在该实施方式中，在nuh_layer_id的add_layer_id_ext_len最低有效位等于1时，仅仅存在layer_id_ext。在不存在layer_id_ext时，推断出等于0。如下确定变量LayerId，其中，LengthOfExtension是在位方面的layer_id_ext语法元素的长度。
LayerId＝((nuh_layer_id>>add_layer_id_ext_len)<<LengthOfExtension)+layer_id_ext+layerIdExtOffset
因此，根据上面相对于图18到图20B概述的概念，装置(例如，多层视频解码器的网络元件(例如，在图2中描述的解码器))配置为处理多层数据流，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，该装置进行以下操作，对于所述多层数据流包括的每个数据包，每个数据包与不同层中的一层相关联，如上所述。
具体而言，如图21中所示，装置从多层数据流中(或者更确切地说，从当前数据包中)读取基础层ID字段308。基础层ID字段包括第一子字段308a和第二子字段308b。例如，第一子字段可由字段308的一个或多个最低有效位构成，而第二子字段308b由字段308的其他最高有效位构成。如在图20B的实例中所指示的，称为add_layer_id_ext_len 310的更高级语法元素可限定子字段308a的长度。
在步骤312中读取基础层ID字段308之后，装置在步骤314中检查子字段308a是否满足预定标准。例如，如果子字段是1或者是“全部1序列”，那么满足该标准。在满足预定标准的情况下，装置在步骤318中从数据流中(或者更确切地说，从当前数据包中)读取扩展层ID字段316，并且在步骤320中使用扩展层ID字段获得扩展值，以便扩展值位于扩展值的域的第一子集内。在步骤320中的推导可对应于在字段316内的位表示的单纯复制。数据流的要求可能在于，在扩展层ID字段316内的值不采用某个值，例如，0。为基础层ID字段308子字段308a不满足下面进一步概述的标准的情况，预留后一个值。
在步骤320之后，通过在集群值的域上从第二子字段308b的可能值的域中映射，装置从第二子字段308b中获得集群值。然后，在步骤324中，使用在步骤320和322中获得的集群和扩展值，索引与当前数据包相关联的层(即，包括字段308和316的层)。例如，集群和扩展值彼此仅仅串联，例如，使用最高有效位的集群值。例如，基于子字段308b的集群值322的推导还可由子字段308b的位的直接使用构成，作为集群值的二进制表示。
然而，如果在步骤314中，检查造成未满足预定标准，那么装置抑制从用于当前数据包的多层数据流中读取扩展层ID字段。确切地说，在步骤326中，该装置在与扩展值的域的第一子集不相交的值上设置扩展值，例如，通过将扩展值设置为0，并且通过在集群值的域上从第二子字段308b的可能值的域中映射，从第二子字段308b中获得集群值。使用相同的映射，可执行在步骤322和328中的推导。然后，从在步骤326和328中设置和推导的集群和扩展值中，确定当前数据包的层ID，其中，再次通过相同的方式执行层ID的确定，犹如在步骤320和322中获得集群和扩展值。
使图21的描述与图18的实施方式相关，因此，第一子字段308a可能是1位长，并且具体而言，可能是字段308的LSB。由于在图18的情况下，layer_id_ext(即，字段316)是2位长，所以如果赢得该LSB 308a，并且扩展层ID字段316跨过的扩展值的上述域是{0,1,2,3}，那么可满足预定标准。因此，扩展值的域的第一子集(即，在步骤320中的推导的上域)是{1,2,3}。具体而言，在图18的实例中，在步骤320中的推导通过应用于扩展层ID字段中的单式矩阵体现。可替换地，可使用某个其他计算，例如，将第一子字段308a的值加入单式矩阵应用的结果中。因此，在步骤326中，扩展值设置为与{1,2,3}不相交的值，即，0。在推导322和328中使用的映射可相同，但是可替换地不同。具体而言，映射是双射的。
在324中的索引的确定可使用集群值来设置更高有效数位，并且使用扩展值来设置更低有效数位，如在图18中所述。因此，如在图18中所述，在nuh_layer_id的LSB(即，基础层ID字段308)是1的情况下，仅仅存在layer_id_ext字段(即，扩展层ID字段316)。否则，layer_id_ext字段推断为0。因此，层ID到layer_id_ext和nuh_layer_id的组合的映射完全对称，并且没有未使用的位表示。通过传输layer_id_ext，layer_id_ext的推断值可用于数据流中，以便用于传输layer_id_ext的在数据流内跨过的位减少，以便解释layer_id_ext实际上仅仅采用3个不同值{1,2,3}这一事实。例如，二进制一元码可用于在二进制串上映射3个元素{1,2,3}，例如，然后，所述二进制串编码入数据流，并且使用熵编码/解码，从中解码。
因此，尤其地，相对于后一个概念描述了一种装置，该装置配置为处理多层数据流，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，所述多层数据流包括多个数据包，每个数据包与所述不同层中的一层相关联，所述装置配置为对于多层数据流的每个数据包，从所述多层数据流中读取基础层ID字段，所述基础层ID字段包括第一子字段和第二子字段；检查基础层ID字段的第一子字段是否满足预定标准，并且
-如果基础层ID字段的第一子字段满足预定标准，那么从所述多层数据流中读取扩展层ID字段，使用扩展层ID字段，获得扩展值，以便扩展值位于扩展值的域的第一子集内，并且通过在集群值的域上从第二子字段的可能值的域中映射，从第二子字段中获得集群值；并且
-如果基础层ID字段的第一子字段不满足预定标准，那么抑制从所述多层数据流中读取扩展层ID字段，将扩展值设置为与扩展值的域的第一子集不相交的值，并且通过在集群值的域上从第二子字段的可能值的域中映射，从第二子字段中获得集群值，
其中，装置使用集群和扩展值索引与相应数据包相关联的层。应注意的是，可从所述多层数据流中读取预定标准。如上所述，“第一子字段”可能是1位长，并且具体而言，LSB；“预定标准”可能是“如果一个”，“扩展值的域”可能是(例如){0,1,2,3}，“第一子字段”可能是{1,2,3}，“使用扩展层ID字段”可能是应用于扩展层ID字段中的单式矩阵，可替换地：将第一子字段的值加入单式矩阵应用的结果中，“将扩展值设置为不相交的值”可能是“到0”的设置；“在集群值的域上从第一子字段的可能值的域中映射”可能对于这两种情况相同，但是可替换地不同；映射可能是双射的，并且“使用集群和扩展值索引与相应数据包相关联的层”可涉及使用(例如)用于设置更高有效数位的集群值以及用于设置更低有效数位的扩展值。
后一种概念直接转化成编码器，该编码器配置为使用层间预测在对应于信息量的不同等级的不同层上将视频材料202编码入多层数据流204，所述多层数据流包括多个数据包206，每个数据包与所述不同层中的一层相关联，其中，与相应数据包相关联的层由集群和扩展值独特地相关联，编码器配置为对于多层数据流的每个数据包206，如果扩展值在扩展值的域的第一子集内，那么在所述多层数据流内插入基础层ID字段308，所述基础层ID字段包括第一子字段308a和第二子字段308b，使用集群值设置第二子字段，并且设置第一子字段，以便满足预定条件；并且在所述多层数据流内插入扩展层ID字段，使用扩展值设置扩展层ID；并且如果扩展值等于与扩展值的域的第一子集不相交的值，那么抑制将扩展层ID字段插入并且将基础层ID字段308插入312多层数据流内，基础层ID字段包括第一子字段308a和第二子字段308b，使用集群值设置第二子字段，并且设置第一子字段，以便不满足预定条件。即，编码器生成数据流，以便解码器通过上述方式获得正确的层ID，并且为此，使用逆映射，与相对于解码或接收侧的上述映射相比较。
概述以上描述，该描述提供了扩展机构，用于增强层数据的层标识符，将层标识符分成集群，并且有效地信令在集群内的编码依赖性。
上面陈述的细节在分层编码场景中可适用于增强层的数据，而基础层的数据保持不变。可在基础和增强层数据包的共同报头语法中，通过层标识符(比较nuh_layer_id)识别分层编码场景的基础层。
在以上实例中，在接收侧上的相应装置可能是视频解码器。因此，在操作时，视频解码器能够选择由(扩展的)layerID识别的位流的数据包，用于解码。然而，可替换地，该装置可以是能够基于外部因素(例如，网络利用率、关于解码器的知识等)丢弃由(扩展的)layerID识别的位流的数据包的网络元件。
在所有以上实施方式中，所述多层视频信号可具有使用层间预测在不同层上编码入所述多层视频信号的视频材料，以便从另一层中层间预测的任何层增加以下中的一个或多个：进一步视图；深度信息；表面反射率信息；颜色分量信息；空间分辨率细化；以及SNR分辨率细化。
虽然在设备的背景下描述了一些方面，但是显然，这些方面也表示相应方法的描述，其中，块体或装置对应于方法步骤或者方法步骤的特征。同样，在方法步骤的背景下描述的方面也表示相应设备的相应块体或物品或特征的描述。一些或所有方法步骤可由(或使用)硬件设备执行，例如，微处理器、可编程计算机或电子电路。在一些实施方式中，某一个或多个最重要的方法步骤可由这种设备执行。
上面提及的本发明的编码信号可以储存在数字储存介质上或者可以通过传输介质传输，例如，无线传输介质或有线传输介质，例如，互联网。
根据某些实现方式要求，本发明的实施方式可以在硬件内或者在软件内实现。可以使用数字存储器介质，执行实施方式，例如，软盘、DVD、蓝光光盘、CD、ROM、PROM、EPROM、EEPROM或FLASH存储器，电子可读控制信号储存在该数字存储器介质其上，这些信号与可编程计算机系统配合(或者能够与其配合)，以便执行相应方法。因此，数字存储器介质内可能是计算机可读的。
根据本发明的一些实施方式包括数据载体，具有电子可读控制信号，这些信号能够与可编程的计算机系统配合，以便执行在本文中描述的一种方法。
通常，可以实现本发明的实施方式，作为具有程序代码的计算机程序产品，计算机程序产品在计算机上运行时，程序代码有效地用于执行一种方法。例如，程序代码可储存在机器可读载体上。
其他实施方式包括用于执行在本文中描述的一种方法的计算机程序，所述计算机程序储存在机器可读载体上。
换言之，因此，本发明方法的一个实施方式是具有程序代码的计算机程序，计算机程序在计算机上运行时，用于执行在本文中描述的一种方法。
因此，本发明方法的进一步实施方式是数据载体(或数字存储器介质或计算机可读介质)，在该数据载体上记录用于执行在本文中描述的一种方法的计算机程序。数据载体、数字存储器介质或记录介质通常是有形和/或非过渡的。
因此，本发明方法的进一步实施方式是数据流或一系列信号，表示用于执行在本文中描述的一种方法的计算机程序。例如，数据流或这系列信号可配置为通过数据通信连接来传输，例如，通过互联网。
进一步实施方式包括处理装置，例如，计算机或可编程逻辑装置，配置为或者适合于执行在本文中描述的一种方法。
进一步实施方式包括计算机，在该计算机上安装用于执行在本文中描述的一种方法的计算机程序。
根据本发明的进一步实施方式包括设备或系统，配置为将用于执行在本文中描述的一种方法的计算机程序传输(例如，电子地或光学地)给接收器。例如，接收器可能是计算机、移动装置、存储器装置等。例如，该设备或系统可包括文件服务器，用于将计算机程序传输给接收器。
在一些实施方式中，可编程逻辑装置(例如，现场可编程门阵列)可用于执行在本文中描述的方法的一些或所有功能。在一些实施方式中，现场可编程门阵列可与微处理器配合，以便执行在本文中描述的一种方法。通常，这些方法优选地由任何硬件设备执行。
上述实施方式仅仅说明本发明的原理。要理解的是，对于本领域的技术人员，在本文中描述的设置和细节的修改和变化显而易见。因此，其目的在于，仅仅由即将发生的专利权利要求的范围限制限制，而不由通过在本文中的实施方式的描述和解释提出的具体细节限制。
本申请的进一步实施例：
1.一种被配置为处理多层数据流(10)的装置，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述装置配置为：
从所述多层数据流中读取
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，并且
基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，构造显示在所述不同层之间的可能层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
2.根据1所述的装置，其中，所述装置配置为：
通过有条件地根据表示在对(j,k)之间存在或不存在相互依赖性的所述第一相互依赖性语法结构，从用于对(j,k)的多层数据流中，读取或者抑制读取所述第二相互依赖性结构(26)，以
从所述多层数据流中读取所述第二相互依赖性结构(26)的多个实例化(34)，即用于所述基础层ID能表示的值0<k≤j≤n<N的不同几对(j,k)，N是所述基础层ID能表示的值的数量，
其中，为对j＝k的(j,k)读取的所述第二相互依赖性结构(26)的实例化(34)表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID j的层之中的其他层的层间预测，并且为对k<j的(j,k)读取的所述第二相互依赖性结构(26)的实例化(34)表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID k的层之中的层的层间预测。
3.根据1所述的装置，其中，所述装置配置为：
从所述多层数据流中读取所述第二相互依赖性结构(26)的一个实例化，N是所述基础层ID能表示的值的数量，所述第二相互依赖性结构(26)的所述一个实例化分别表示
通常对于所述基础层ID能表示的每个值0<i≤n<N，在具有基础层ID i的层之中的哪些层是依赖于在具有基础层ID i的层之中的其他层的层间预测，或者
通常对于0<k<j≤n<N的一组对(j,k)中的每个，在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID k的层之中的层的层间预测。
4.根据1所述的装置，其中，所述装置配置为：
从所述多层数据流中读取所述第二相互依赖性结构(26)的实例化，以及对于所述第二相互依赖性结构(26)的每个实例化，读取使所述第二相互依赖性结构(26)的各实例化与所述基础层ID能表示的值0<k≤j≤n<N的对(j,k)的各子集相关联的关联语法结构，N是所述基础层ID能表示的值的数量。
5.根据4所述的装置，其中，所述关联语法结构包括用于每对(j,k)的标志，并且所述装置配置为：
通过跳过值0<k≤j≤n<N的几对(j,k)，解析所述关联语法结构，其中，所述第一相互依赖性语法结构表示在对(j,k)之间不存在相互依赖性。
6.根据5所述的装置，其中，所述扩展层ID(22)能表示的值的数量是M，并且所述第二相互依赖性语法结构包括
用于扩展值为0<q<p≤m<M的每对(p,q)的一个二进制值，以便表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID j的层之中的其他层的层间预测，以及
用于扩展值为0<p，q≤m<M的每对(p,q)的一个二进制值，以便表示具有扩展值p并且具有基础层ID j的哪个层是依赖于具有扩展值q并且具有基础层ID k<j的层的层间预测。
7.根据6所述的装置，其中，所述装置配置为在数据流中从在所述基础层ID能表示的N值之中的最大假定值的明确信令中获得n，和/或在数据流中从在所述扩展层ID能表示的M值之中的最大假定值的明确信令中获得m。
8.根据1所述的装置，其中，所述装置配置为基于所述第一相互依赖性语法结构和数据包的基础层ID，丢弃以层组为单位的数据包，每个数据包具有共同的基础层ID。
9.根据8所述的装置，配置为基于所述第一相互依赖性语法结构和第二相互依赖性语法结构和数据包的基础层ID以及数据包的扩展层ID，丢弃进一步的单独层。
10.根据1所述的装置，其中，所述装置是
视频解码器，配置为使用所述层间预测和所述层间依赖性矩阵，解码所述多层数据流，或者
网络元件，配置为基于所述层间依赖性矩阵，丢弃所述多层数据流的数据包。
11.根据1所述的装置，其中，所述多层数据流具有使用层间预测在不同层上编码入所述多层数据流的视频材料，以便从另一层中层间预测的任何层增加以下中的一个或多个：
进一步视图；
深度信息；
阿尔法混合信息；
颜色分量信息；
空间分辨率细化；以及
SNR分辨率细化。
12.一种用于处理多层数据流(10)的方法，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，所述多层数据流包括多个数据包(12)，每个所述数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述方法包括：
从所述多层数据流中读取
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，并且
基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
13.一种编码器，配置为使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流(10)，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述编码器配置为：
在所述多层数据流内插入
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，
设置所述第一相互依赖性语法结构和第二相互依赖性语法结构，以便基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，能构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
14.一种用于使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流(10)的方法，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述方法包括：
在所述多层数据流内插入
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，
设置所述第一相互依赖性语法结构和第二相互依赖性语法结构，以便基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，能构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
15.一种计算机可读存储介质，存储有具有程序代码的计算机程序，配置为在计算机上运行时，执行根据12或14所述的方法。
参考文献
[1]B.Bross,W.-J.Han,J.-R.Ohm,G.J.Sullivan,T.Wiegand(Eds.),“HighEfficiency Video Coding(HEVC)text specification draft 10”,JCTVC-L1003,Geneva,CH,Jan.2013
[2]G.Tech,K.Wegner,Y.Chen,M.Hannuksela,J.Boyce(Eds.),“MV-HEVC DraftText 3(ISO/IEC 23008-2PDAM2)”,JCT3V-C1004,Geneva,CH,Jan.2013
[3]G.Tech,K.Wegner,Y.Chen,S.Yea(Eds.),“3D-HEVC Test ModelDescription,draft specification”,JCT3V-C1005,Geneva,CH,Jan.2013
[4]WILBURN,Bennett,et al.High performance imaging using large cameraarrays.ACM Transactions on Graphics,2005,24.Jg.,Nr.3,S.765-776.
[5]WILBURN,Bennett S.,et al.Light field video camera.In:ElectronicImaging 2002.International Society for Optics and Photonics,2001.S.29-36.
[6]HORIMAI,Hideyoshi,et al.Full-color 3D display system with360degree horizontal viewing angle.In:Proc.Int.Symposium of 3D andContents.2010.S.7-10.

Claims (10)

1.一种被配置为处理多层数据流(10)的装置，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述装置配置为：
从所述多层数据流中读取
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，并且
基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，构造显示在所述不同层之间的可能层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
2.根据权利要求1所述的装置，其中，所述装置配置为：
通过有条件地根据表示在对(j,k)之间存在或不存在相互依赖性的所述第一相互依赖性语法结构，从用于对(j,k)的多层数据流中，读取或者抑制读取所述第二相互依赖性结构(26)，以
从所述多层数据流中读取所述第二相互依赖性结构(26)的多个实例化(34)，即用于所述基础层ID能表示的值0<k≤j≤n<N的不同几对(j,k)，N是所述基础层ID能表示的值的数量，
其中，为对j＝k的(j,k)读取的所述第二相互依赖性结构(26)的实例化(34)表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID j的层之中的其他层的层间预测，并且为对k<j的(j,k)读取的所述第二相互依赖性结构(26)的实例化(34)表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID k的层之中的层的层间预测。
3.根据权利要求1所述的装置，其中，所述装置配置为：
从所述多层数据流中读取所述第二相互依赖性结构(26)的一个实例化，N是所述基础层ID能表示的值的数量，所述第二相互依赖性结构(26)的所述一个实例化分别表示
通常对于所述基础层ID能表示的每个值0<i≤n<N，在具有基础层ID i的层之中的哪些层是依赖于在具有基础层ID i的层之中的其他层的层间预测，或者
通常对于0<k<j≤n<N的一组对(j,k)中的每个，在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID k的层之中的层的层间预测。
4.根据权利要求1所述的装置，其中，所述装置配置为：
从所述多层数据流中读取所述第二相互依赖性结构(26)的实例化，以及对于所述第二相互依赖性结构(26)的每个实例化，读取使所述第二相互依赖性结构(26)的各实例化与所述基础层ID能表示的值0<k≤j≤n<N的对(j,k)的各子集相关联的关联语法结构，N是所述基础层ID能表示的值的数量。
5.根据权利要求4所述的装置，其中，所述关联语法结构包括用于每对(j,k)的标志，并且所述装置配置为：
通过跳过值0<k≤j≤n<N的几对(j,k)，解析所述关联语法结构，其中，所述第一相互依赖性语法结构表示在对(j,k)之间不存在相互依赖性。
6.根据权利要求5所述的装置，其中，所述扩展层ID(22)能表示的值的数量是M，并且所述第二相互依赖性语法结构包括
用于扩展值为0<q<p≤m<M的每对(p,q)的一个二进制值，以便表示在具有基础层ID j的层之中的哪些层是依赖于在具有基础层ID j的层之中的其他层的层间预测，以及
用于扩展值为0<p，q≤m<M的每对(p,q)的一个二进制值，以便表示具有扩展值p并且具有基础层ID j的哪个层是依赖于具有扩展值q并且具有基础层ID k<j的层的层间预测。
7.一种用于处理多层数据流(10)的方法，使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入所述多层数据流，所述多层数据流包括多个数据包(12)，每个所述数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述方法包括：
从所述多层数据流中读取
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，并且
基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
8.一种编码器，配置为使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流(10)，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述编码器配置为：
在所述多层数据流内插入
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，
设置所述第一相互依赖性语法结构和第二相互依赖性语法结构，以便基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，能构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
9.一种用于使用层间预测在对应于信息量的不同等级的不同层上将视频材料编码入多层数据流(10)的方法，所述多层数据流包括多个数据包(12)，每个数据包与所述不同层中的一层相关联，每层由基础层ID(20)、或基础层ID(20)和扩展层ID(22)索引，所述方法包括：
在所述多层数据流内插入
第一相互依赖性语法结构(24)，表示在所述基础层ID(20)能表示的几对不同值之间的相互依赖性，以及
第二相互依赖性语法结构(26)，表示在所述扩展层ID(22)能表示的几对不同值之间的相互依赖性，
设置所述第一相互依赖性语法结构和第二相互依赖性语法结构，以便基于所述第一相互依赖性语法结构和第二相互依赖性语法结构，能构造显示在所述不同层之间的层间预测依赖性的层间依赖性描述(14)，
其中，所述第一相互依赖性语法结构(24)限定在不同层组之间的相互依赖性，属于一个组的所有的层具有相同的基础层ID，并且所述第二相互依赖性语法结构(26)限定在表示为由第一相互依赖性语法结构互连几对组中的层之间的相互依赖性。
10.一种计算机可读存储介质，存储有具有程序代码的计算机程序，配置为在计算机上运行时，执行根据权利要求7或9所述的方法。
CN201910182087.1A 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质 Active CN110139110B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361846479P 2013-07-15 2013-07-15
US61/846,479 2013-07-15
CN201480050666.6A CN105637876B (zh) 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201480050666.6A Division CN105637876B (zh) 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质

Publications (2)

Publication Number Publication Date
CN110139110A true CN110139110A (zh) 2019-08-16
CN110139110B CN110139110B (zh) 2021-11-05

Family

ID=51177089

Family Applications (9)

Application Number Title Priority Date Filing Date
CN202010947572.6A Active CN112104877B (zh) 2013-07-15 2014-07-15 装置、方法、编码器和计算机程序
CN201910182087.1A Active CN110139110B (zh) 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质
CN201480050666.6A Active CN105637876B (zh) 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质
CN201480050655.8A Active CN105532002B (zh) 2013-07-15 2014-07-15 网络装置和差错处理
CN202010127563.2A Active CN111510725B (zh) 2013-07-15 2014-07-15 网络装置和差错处理
CN201480050665.1A Active CN105532003B (zh) 2013-07-15 2014-07-15 在多层编码中的层特征信令
CN201480050628.0A Active CN105637867B (zh) 2013-07-15 2014-07-15 在多层视频编码中的低延迟概念
CN201480050667.0A Active CN105637877B (zh) 2013-07-15 2014-07-15 一种解码器、解码方法、编码器、编码方法及计算机可读介质
CN201910310534.7A Active CN110225358B (zh) 2013-07-15 2014-07-15 装置、方法、编码器和计算机程序

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202010947572.6A Active CN112104877B (zh) 2013-07-15 2014-07-15 装置、方法、编码器和计算机程序

Family Applications After (7)

Application Number Title Priority Date Filing Date
CN201480050666.6A Active CN105637876B (zh) 2013-07-15 2014-07-15 处理多层数据流的装置和方法、编码器和方法及存储介质
CN201480050655.8A Active CN105532002B (zh) 2013-07-15 2014-07-15 网络装置和差错处理
CN202010127563.2A Active CN111510725B (zh) 2013-07-15 2014-07-15 网络装置和差错处理
CN201480050665.1A Active CN105532003B (zh) 2013-07-15 2014-07-15 在多层编码中的层特征信令
CN201480050628.0A Active CN105637867B (zh) 2013-07-15 2014-07-15 在多层视频编码中的低延迟概念
CN201480050667.0A Active CN105637877B (zh) 2013-07-15 2014-07-15 一种解码器、解码方法、编码器、编码方法及计算机可读介质
CN201910310534.7A Active CN110225358B (zh) 2013-07-15 2014-07-15 装置、方法、编码器和计算机程序

Country Status (6)

Country Link
US (23) US10523954B2 (zh)
EP (13) EP3905683B1 (zh)
JP (22) JP6453874B2 (zh)
KR (26) KR102162121B1 (zh)
CN (9) CN112104877B (zh)
WO (5) WO2015007753A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110139110B (zh) * 2013-07-15 2021-11-05 Ge视频压缩有限责任公司 处理多层数据流的装置和方法、编码器和方法及存储介质

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9621905B2 (en) * 2012-06-29 2017-04-11 Qualcomm Incorporated Tiles and wavefront parallel processing
US20160065980A1 (en) * 2013-04-05 2016-03-03 Samsung Electronics Co., Ltd. Video stream encoding method according to a layer identifier expansion and an apparatus thereof, and a video stream decoding method according to a layer identifier expansion and an apparatus thereof
EP2965524B1 (en) 2013-04-08 2021-11-24 ARRIS Enterprises LLC Individual buffer management in video coding
US10212437B2 (en) * 2013-07-18 2019-02-19 Qualcomm Incorporated Device and method for scalable coding of video information
WO2015047162A1 (en) * 2013-09-26 2015-04-02 Telefonaktiebolaget L M Ericsson (Publ) Hybrid codec scalable video
EP3084968A4 (en) * 2013-12-16 2017-11-29 McAfee, LLC Process efficient preprocessing for an encryption standard
US10560710B2 (en) * 2014-01-03 2020-02-11 Qualcomm Incorporated Method for coding recovery point supplemental enhancement information (SEI) messages and region refresh information SEI messages in multi-layer coding
EP3146724A1 (en) 2014-05-21 2017-03-29 ARRIS Enterprises LLC Signaling and selection for the enhancement of layers in scalable video
CA2949823C (en) 2014-05-21 2020-12-08 Arris Enterprises Llc Individual buffer management in transport of scalable video
JP6388531B2 (ja) * 2014-06-17 2018-09-12 株式会社ダイセル 油性化粧料
US10250884B2 (en) * 2014-06-20 2019-04-02 Qualcomm Incorporated Systems and methods for signaling information for layer sets in a parameter set
US9807419B2 (en) * 2014-06-25 2017-10-31 Qualcomm Incorporated Recovery point SEI message in multi-layer video codecs
US9819945B2 (en) * 2014-06-25 2017-11-14 Qualcomm Incorporated Multi-layer video coding
JP6555263B2 (ja) * 2014-06-30 2019-08-07 ソニー株式会社 情報処理装置および方法
JP6628721B2 (ja) * 2014-07-04 2020-01-15 日本ゼオン株式会社 シール部材
EP3343927A4 (en) * 2015-08-25 2019-03-13 Sony Corporation TRANSMISSION APPARATUS, TRANSMISSION METHOD, RECEIVING APPARATUS, AND RECEIVING METHOD
KR102618049B1 (ko) * 2016-02-02 2023-12-27 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 비디오 스트리밍의 관심 장면 섹션 및 영역 처리
US10230948B2 (en) 2016-02-03 2019-03-12 Mediatek Inc. Video transmitting system with on-the-fly encoding and on-the-fly delivering and associated video receiving system
EP3466082B1 (en) * 2016-05-26 2022-01-19 Fraunhofer Gesellschaft zur Förderung der angewandten Forschung E.V. Broadcast streaming of panoramic video for interactive clients
JP6812149B2 (ja) * 2016-06-30 2021-01-13 オリンパス株式会社 走査型顕微鏡、及び、走査型顕微鏡の制御方法
KR20200005539A (ko) * 2017-04-11 2020-01-15 브이아이디 스케일, 인크. 면 연속성을 사용하는 360 도 비디오 코딩
CN111434120A (zh) * 2017-10-02 2020-07-17 弗劳恩霍夫应用研究促进协会 高效的沉浸式流传输
US10810077B1 (en) * 2018-06-11 2020-10-20 Ambarella International Lp Rapid soft-error detection
JP2020022087A (ja) * 2018-08-01 2020-02-06 日本放送協会 映像／パケット変換装置、パケット／映像変換装置、及びプログラム
BR112021017426A2 (pt) * 2019-03-01 2022-01-18 Fraunhofer Ges Forschung Decodificador de referência hipotético
EP4129183A4 (en) 2020-03-31 2023-09-27 FUJIFILM Corporation INFORMATION PROCESSING APPARATUS, X-RAY IMAGING APPARATUS, INFORMATION PROCESSING METHOD AND INFORMATION PROCESSING PROGRAM
GB202007000D0 (en) * 2020-05-12 2020-06-24 V Nova Int Ltd Low latency communication system and method of operation
CN111338744B (zh) * 2020-05-22 2020-08-14 北京小米移动软件有限公司 图像显示方法及装置、电子设备、存储介质
CN113158623A (zh) * 2020-12-27 2021-07-23 中国电建集团华东勘测设计研究院有限公司 一种编码管理的方法及系统
GB2613015A (en) * 2021-11-22 2023-05-24 V Nova Int Ltd Decoding a multi-layer video stream using a joint packet stream
WO2023089340A1 (en) * 2021-11-22 2023-05-25 V-Nova International Ltd Processing a multi-layer video stream

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1483289A (zh) * 2000-12-22 2004-03-17 ض� 在分组信道上多媒体通信的方法
CN1602616A (zh) * 2002-08-09 2005-03-30 松下电器产业株式会社 报头压缩/解压缩装置和报头压缩/解压缩方法
US20050147053A1 (en) * 1998-09-03 2005-07-07 Kabushiki Kaisha Toshiba Communication node and packet transfer method
US20080007438A1 (en) * 2006-07-10 2008-01-10 Sharp Laboratories Of America, Inc. Methods and Systems for Signaling Multi-Layer Bitstream Data
US20090125636A1 (en) * 2007-11-13 2009-05-14 Qiong Li Payload allocation methods for scalable multimedia servers
CN101543018A (zh) * 2007-01-12 2009-09-23 庆熙大学校产学协力团 网络提取层单元的分组格式、使用该格式的视频编解码算法和装置以及使用该格式进行IPv6标签交换的QoS控制算法和装置
CN102484561A (zh) * 2010-06-24 2012-05-30 索尼公司 发送设备、接收设备和通信系统
US20130101035A1 (en) * 2011-10-24 2013-04-25 Qualcomm Incorporated Grouping of tiles for video coding
US20130176387A1 (en) * 2010-10-16 2013-07-11 Jongyeul Suh Digital receiver and method for processing 3d contents in digital receiver

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6498865B1 (en) * 1999-02-11 2002-12-24 Packetvideo Corp,. Method and device for control and compatible delivery of digitally compressed visual data in a heterogeneous communication network
JP2001203749A (ja) * 2000-01-20 2001-07-27 Mitsubishi Electric Corp 高効率データ送信装置及び高効率データ伝送システム
EP1443774A1 (en) * 2003-01-24 2004-08-04 Alcatel A method of encoding and decoding of data packets
JP4308555B2 (ja) 2003-03-10 2009-08-05 パナソニック株式会社 受信装置および情報閲覧方法
CN101317215A (zh) * 2005-10-05 2008-12-03 Lg电子株式会社 信号处理方法和装置
AU2006300881B2 (en) * 2005-10-11 2011-03-17 Nokia Technologies Oy System and method for efficient scalable stream adaptation
BRPI0706378A2 (pt) * 2006-01-09 2011-03-22 Lg Eletronics Inc método de predição intercamadas para sinal de vìdeo
US8422548B2 (en) * 2006-07-10 2013-04-16 Sharp Laboratories Of America, Inc. Methods and systems for transform selection and management
US20080036854A1 (en) * 2006-08-08 2008-02-14 Texas Instruments Incorporated Method and system of communicating and rendering stereoscopic and dual-view images
AU2007342468B2 (en) 2007-01-05 2011-11-24 Interdigital Vc Holdings, Inc. Hypothetical reference decoder for scalable video coding
EP2106666B1 (en) 2007-01-08 2019-06-12 Nokia Technologies Oy Improved inter-layer prediction for extended spatial scalability in video coding
WO2008156548A1 (en) 2007-06-12 2008-12-24 Thomson Licensing Methods and apparatus supporting multi-pass video syntax structure for slice data
US8369415B2 (en) 2008-03-06 2013-02-05 General Instrument Corporation Method and apparatus for decoding an enhanced video stream
CN101431675B (zh) * 2008-12-09 2010-12-08 青岛海信电子产业控股股份有限公司 一种像素运动估计方法和装置
GB0905184D0 (en) * 2009-03-26 2009-05-06 Univ Bristol Encryption scheme
WO2011084918A1 (en) * 2010-01-06 2011-07-14 Dolby Laboratories Licensing Corporation High performance rate control for multi-layered video coding applications
JP5841540B2 (ja) 2010-11-26 2016-01-13 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、プログラム、及び集積回路
CN103416003B (zh) 2011-01-14 2015-05-27 维德约股份有限公司 改进的nal单元头部
US9113172B2 (en) 2011-01-14 2015-08-18 Vidyo, Inc. Techniques for describing temporal coding structure
KR101912485B1 (ko) * 2011-08-25 2018-10-26 선 페이턴트 트러스트 타일 부호화 스킴을 이용한 영상 부호화, 추출 및 복호화 방법 및 장치
KR20130046534A (ko) * 2011-10-28 2013-05-08 삼성전자주식회사 영상 부호화 방법 및 장치 그리고 영상 복호화 방법 및 장치
US9124895B2 (en) * 2011-11-04 2015-09-01 Qualcomm Incorporated Video coding with network abstraction layer units that include multiple encoded picture partitions
KR101718488B1 (ko) 2012-01-20 2017-03-21 지이 비디오 컴프레션, 엘엘씨 병렬 처리, 전송 디멀티플렉서 및 비디오 비트스트림을 허용하는 코딩 개념
PT2842313T (pt) 2012-04-13 2016-12-22 Ge Video Compression Llc Fluxo de dados escaláveis e entidade de rede
EP2868103B1 (en) * 2012-06-29 2016-12-07 GE Video Compression, LLC Video data stream concept
RU2612577C2 (ru) * 2012-07-02 2017-03-09 Нокиа Текнолоджиз Ой Способ и устройство для кодирования видеоинформации
US9565452B2 (en) 2012-09-28 2017-02-07 Qualcomm Incorporated Error resilient decoding unit association
KR20220131366A (ko) 2012-10-01 2022-09-27 지이 비디오 컴프레션, 엘엘씨 베이스 레이어로부터 예측을 위한 서브블록 세부분할의 유도를 이용한 스케일러블 비디오 코딩
EP2930936A4 (en) * 2012-12-10 2016-11-02 Lg Electronics Inc IMAGE DECODING METHOD AND APPARATUS USING THE SAME
US9992493B2 (en) 2013-04-01 2018-06-05 Qualcomm Incorporated Inter-layer reference picture restriction for high level syntax-only scalable video coding
US9807421B2 (en) 2013-04-05 2017-10-31 Sharp Kabushiki Kaisha NAL unit type restrictions
US20140301477A1 (en) 2013-04-07 2014-10-09 Sharp Laboratories Of America, Inc. Signaling dpb parameters in vps extension and dpb operation
CN110225356B (zh) * 2013-04-08 2024-02-13 Ge视频压缩有限责任公司 多视图解码器
CN109889888B (zh) 2013-06-05 2022-04-01 太阳专利托管公司 再现方法、装置及生成方法、装置
US9578142B2 (en) 2013-07-01 2017-02-21 Cisco Technology, Inc. System and method for improving resilience in transmission of data fragments
KR102162121B1 (ko) 2013-07-15 2020-10-06 지이 비디오 컴프레션, 엘엘씨 확장 메커니즘을 사용하는 계층 식별 시그널링
KR101851479B1 (ko) 2014-01-03 2018-04-23 노키아 테크놀로지스 오와이 파라미터 세트 코딩

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050147053A1 (en) * 1998-09-03 2005-07-07 Kabushiki Kaisha Toshiba Communication node and packet transfer method
CN1483289A (zh) * 2000-12-22 2004-03-17 ض� 在分组信道上多媒体通信的方法
CN1602616A (zh) * 2002-08-09 2005-03-30 松下电器产业株式会社 报头压缩/解压缩装置和报头压缩/解压缩方法
US20080007438A1 (en) * 2006-07-10 2008-01-10 Sharp Laboratories Of America, Inc. Methods and Systems for Signaling Multi-Layer Bitstream Data
CN101543018A (zh) * 2007-01-12 2009-09-23 庆熙大学校产学协力团 网络提取层单元的分组格式、使用该格式的视频编解码算法和装置以及使用该格式进行IPv6标签交换的QoS控制算法和装置
US20090125636A1 (en) * 2007-11-13 2009-05-14 Qiong Li Payload allocation methods for scalable multimedia servers
CN102484561A (zh) * 2010-06-24 2012-05-30 索尼公司 发送设备、接收设备和通信系统
US20130176387A1 (en) * 2010-10-16 2013-07-11 Jongyeul Suh Digital receiver and method for processing 3d contents in digital receiver
US20130101035A1 (en) * 2011-10-24 2013-04-25 Qualcomm Incorporated Grouping of tiles for video coding

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
GERHARD TECH: "3D/MV-HEVC HLS:Flexible layer clustering for extending the supported number of layers", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
HENDRY: "AHG9: On dependent slice", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
KARSTEN SUEHRING: "MV-HEVC/SHVC HLS:Extending the supported number of layers", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
常淑娟: "图像压缩中的小波变换", 《科技创新论坛》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110139110B (zh) * 2013-07-15 2021-11-05 Ge视频压缩有限责任公司 处理多层数据流的装置和方法、编码器和方法及存储介质

Also Published As

Publication number Publication date
JP7405808B2 (ja) 2023-12-26
US20160156935A1 (en) 2016-06-02
EP3614676C0 (en) 2023-11-08
US20160156914A1 (en) 2016-06-02
KR102162121B1 (ko) 2020-10-06
KR20200116540A (ko) 2020-10-12
KR102652871B1 (ko) 2024-04-01
KR20240046281A (ko) 2024-04-08
JP2020167718A (ja) 2020-10-08
US11006136B2 (en) 2021-05-11
KR102416235B1 (ko) 2022-07-05
CN105637877A (zh) 2016-06-01
KR102162120B1 (ko) 2020-10-06
KR20160034336A (ko) 2016-03-29
EP4362466A3 (en) 2024-06-26
US10349065B2 (en) 2019-07-09
JP2016525312A (ja) 2016-08-22
KR20180121677A (ko) 2018-11-07
CN112104877A (zh) 2020-12-18
JP2022023888A (ja) 2022-02-08
EP4362466A2 (en) 2024-05-01
EP3022918A1 (en) 2016-05-25
KR20230022261A (ko) 2023-02-14
JP7509839B2 (ja) 2024-07-02
US20210044814A1 (en) 2021-02-11
KR102495846B1 (ko) 2023-02-06
KR20200007088A (ko) 2020-01-21
KR102162124B1 (ko) 2020-10-06
JP2024020424A (ja) 2024-02-14
JP2016527794A (ja) 2016-09-08
EP3022930A1 (en) 2016-05-25
CN105532002A (zh) 2016-04-27
JP2022008511A (ja) 2022-01-13
US20190253725A1 (en) 2019-08-15
EP4373092A1 (en) 2024-05-22
KR20160032191A (ko) 2016-03-23
EP3614671B1 (en) 2023-06-07
JP2016527795A (ja) 2016-09-08
US11792415B2 (en) 2023-10-17
WO2015007751A1 (en) 2015-01-22
JP7229969B2 (ja) 2023-02-28
US20190082187A1 (en) 2019-03-14
EP3022918B1 (en) 2019-07-10
CN105637867B (zh) 2019-08-30
EP3614671A1 (en) 2020-02-26
CN105532002B (zh) 2020-03-24
KR102223536B1 (ko) 2021-03-08
US10425651B2 (en) 2019-09-24
KR20220119766A (ko) 2022-08-30
EP3022931B1 (en) 2019-07-10
WO2015007753A1 (en) 2015-01-22
KR20160032168A (ko) 2016-03-23
US10869047B2 (en) 2020-12-15
KR102388631B1 (ko) 2022-04-20
EP3022931A1 (en) 2016-05-25
JP2018186529A (ja) 2018-11-22
KR20200116541A (ko) 2020-10-12
US11252422B2 (en) 2022-02-15
EP3926957A1 (en) 2021-12-22
KR20210027512A (ko) 2021-03-10
US20240007657A1 (en) 2024-01-04
KR102067231B1 (ko) 2020-01-17
US20240114157A1 (en) 2024-04-04
EP3926957B1 (en) 2023-10-18
US11546618B2 (en) 2023-01-03
US10523954B2 (en) 2019-12-31
JP6675979B2 (ja) 2020-04-08
WO2015007750A1 (en) 2015-01-22
JP2024012407A (ja) 2024-01-30
KR102249228B1 (ko) 2021-05-10
JP2024028978A (ja) 2024-03-05
KR101914659B1 (ko) 2018-11-05
US11012700B2 (en) 2021-05-18
CN105532003A (zh) 2016-04-27
KR20180137592A (ko) 2018-12-27
CN105637876A (zh) 2016-06-01
JP2021048591A (ja) 2021-03-25
WO2015007752A1 (en) 2015-01-22
EP4325858A2 (en) 2024-02-21
EP4294018A1 (en) 2023-12-20
US20160134895A1 (en) 2016-05-12
US20240129499A1 (en) 2024-04-18
US10142639B2 (en) 2018-11-27
JP7060650B2 (ja) 2022-04-26
KR102482747B1 (ko) 2022-12-30
KR20200116539A (ko) 2020-10-12
EP3022919B1 (en) 2021-05-05
KR101930817B1 (ko) 2018-12-19
US10349066B2 (en) 2019-07-09
JP2016531475A (ja) 2016-10-06
KR102657916B1 (ko) 2024-04-15
JP2019071633A (ja) 2019-05-09
KR20200007086A (ko) 2020-01-21
KR20180127524A (ko) 2018-11-28
KR20230003460A (ko) 2023-01-05
JP6951405B2 (ja) 2021-10-20
EP3614676A1 (en) 2020-02-26
JP6749365B2 (ja) 2020-09-02
EP4325858A3 (en) 2024-05-15
JP2020065268A (ja) 2020-04-23
EP3905683A1 (en) 2021-11-03
EP3926957C0 (en) 2023-10-18
CN105637877B (zh) 2019-04-05
JP2019075792A (ja) 2019-05-16
CN110139110B (zh) 2021-11-05
EP3022930B1 (en) 2021-03-24
CN105532003B (zh) 2020-10-02
JP6966414B2 (ja) 2021-11-17
US11616964B2 (en) 2023-03-28
US20220141474A1 (en) 2022-05-05
KR20210054027A (ko) 2021-05-12
US20210211687A1 (en) 2021-07-08
JP6637149B2 (ja) 2020-01-29
KR20210121317A (ko) 2021-10-07
EP3614676B1 (en) 2023-11-08
US20230156203A1 (en) 2023-05-18
KR101921646B1 (ko) 2018-11-23
CN105637867A (zh) 2016-06-01
US10616591B2 (en) 2020-04-07
CN111510725B (zh) 2022-12-16
US11025929B2 (en) 2021-06-01
KR20180136572A (ko) 2018-12-24
CN110225358B (zh) 2021-10-12
JP7389168B2 (ja) 2023-11-29
KR20220053045A (ko) 2022-04-28
KR20220098279A (ko) 2022-07-11
EP3905683C0 (en) 2023-12-13
US10595027B2 (en) 2020-03-17
JP2020167717A (ja) 2020-10-08
JP6445552B2 (ja) 2018-12-26
CN110225358A (zh) 2019-09-10
CN112104877B (zh) 2022-12-20
JP6792020B2 (ja) 2020-11-25
US20200195942A1 (en) 2020-06-18
US11647209B2 (en) 2023-05-09
KR102344387B1 (ko) 2021-12-28
US20210243460A1 (en) 2021-08-05
EP3022920A1 (en) 2016-05-25
US20210250593A1 (en) 2021-08-12
JP2016528799A (ja) 2016-09-15
EP3614671C0 (en) 2023-06-07
KR20240055089A (ko) 2024-04-26
JP2022184978A (ja) 2022-12-13
US20190327478A1 (en) 2019-10-24
US20160134896A1 (en) 2016-05-12
JP6514197B2 (ja) 2019-05-15
JP2019165455A (ja) 2019-09-26
KR102656946B1 (ko) 2024-04-16
US20160156936A1 (en) 2016-06-02
US20190387236A1 (en) 2019-12-19
JP2018186530A (ja) 2018-11-22
KR102310866B1 (ko) 2021-10-07
KR20160027978A (ko) 2016-03-10
CN105637876B (zh) 2019-04-02
JP2023089026A (ja) 2023-06-27
US20190238871A1 (en) 2019-08-01
JP2022106784A (ja) 2022-07-20
EP3022919A1 (en) 2016-05-25
US20200195941A1 (en) 2020-06-18
KR102435018B1 (ko) 2022-08-22
US20230254495A1 (en) 2023-08-10
KR102067048B1 (ko) 2020-01-17
US10609399B2 (en) 2020-03-31
US20200145678A1 (en) 2020-05-07
EP3905683B1 (en) 2023-12-13
KR20160032176A (ko) 2016-03-23
CN111510725A (zh) 2020-08-07
KR20180121675A (ko) 2018-11-07
WO2015007754A1 (en) 2015-01-22
JP6453874B2 (ja) 2019-01-16
KR20240052886A (ko) 2024-04-23

Similar Documents

Publication Publication Date Title
CN105637876B (zh) 处理多层数据流的装置和方法、编码器和方法及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40008134

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant