CN105706451B - Hevc扩展的高级句法 - Google Patents

Hevc扩展的高级句法 Download PDF

Info

Publication number
CN105706451B
CN105706451B CN201480055942.8A CN201480055942A CN105706451B CN 105706451 B CN105706451 B CN 105706451B CN 201480055942 A CN201480055942 A CN 201480055942A CN 105706451 B CN105706451 B CN 105706451B
Authority
CN
China
Prior art keywords
layer
video
representation formats
sps
video encoder
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480055942.8A
Other languages
English (en)
Other versions
CN105706451A (zh
Inventor
Y·何
叶琰
修晓宇
贺玉文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Priority to CN201910117334.XA priority Critical patent/CN109905703B/zh
Publication of CN105706451A publication Critical patent/CN105706451A/zh
Application granted granted Critical
Publication of CN105706451B publication Critical patent/CN105706451B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/33Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability in the spatial domain
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

视频编码设备可对网络提取层(NAL)单元进行标识。所述视频编码设备可确定所述NAL单元是否包括当前层的活动参数集。当所述NAL单元包括当前层的活动参数集时,所述视频编码设备可将与所述NAL单元关联的NAL单元报头层标识符设为下列中的至少一者:零、指代当前层的值、以及指代当前层的基准层的值。所述NAL单元可以是图片参数集(PPS)NAL单元。所述NAL单元可以是序列参数集(SPS)NAL单元。

Description

HEVC扩展的高级句法
相关申请的交叉引用
本申请要求于2013年10月11日提交的美国临时申请No.61/889,787以及于2013年10月11日提交的美国临时申请No.61/889,919的权益,其全部内容结合于此作为参考。
背景技术
为了实现高效数字视频通信、分布和消费,开发了多种数字视频压缩技术并为之设立了标准。由ISO/IEC和/或ITU-T开发的示例标准包括H.261、MPEG-1、MPEG-2、H.263、MPEG-4(第二部分)以及H.264/AVC(MPEG-4第十部分高级视频编码)。被称作高效视频编码(HEVC)的视频编码标准由ITU-T视频编码专家组(VCEG)和ISO/IEC MPEG共同开发。与H.264/AVC标准相比,HEVC(ITU-T H.265和ISO/IEC 23008-2)总体上能够实现更高的编码效率。
发明内容
视频编码设备可标识网络提取层(NAL)单元。所述视频编码设备可确定所述NAL单元是否包括当前层的活动参数集。基于确定所述NAL单元包括当前层的活动参数集,所述视频编码设备可将与所述NAL单元关联的NAL单元报头层标识符设为下列中的至少一者:零、指代当前层的值、以及指代当前层的基准层的值。所述NAL单元可以是图片参数集(PPS)NAL单元。所述NAL单元可以是序列参数集(SPS)NAL单元。所述指示当前层的值可包括与当前层关联的层标识符。所述指示当前层的基准层的值可包括与当前层的基准层关联的层标识符。所述视频编码设备可发送包括所述NAL单元的视频比特流至视频解码设备。
视频编码设备可接收包括SPS和视频参数集(VPS)的视频比特流。所述VPS可包括视频表示格式列表。所述视频编码设备例如可基于所述SPS中的更新视频表示格式标记来确定与所述SPS关联的层的视频表示格式。如果所述更新视频表示格式标记指示所述SPS中存在表现格式索引,则所述视频编码设备可基于所述表现格式索引根据所述VPS中的视频表现格式列表来确定所述视频表现格式。如果所述SPS中不存在更新表现格式索引,则所述视频编码设备可根据缺省视频表现格式来确定所述视频表现格式。所述视频编码设备例如可基于所述SPS中的更新视频表现格式标记来确定所述SPS中是否存在所述表现格式索引。举例来说,如果所述更新视频表现格式标记等于1,则所述视频编码设备可确定所述SPS中存在所述视频表现格式索引。如果所述更新视频表现格式标记等于0,则所述视频编码设备可确定所述SPS中不存在所述视频表现格式索引。所述缺省视频表现格式可包括在所述VPS中针对层指定的缺省视频表现格式。所述视频更新表现格式索引可在0与表现格式的VPS号的值减1(包括0和表现格式的VPS号码的值减1)之间的范围内。
视频编码设备可为与SPS关联的层分派表现格式。所述视频编码设备例如可基于为与SPS关联的层分派的表现格式来确定是否在SPS中包含表现格式索引。举例来说,如果被分派的表现格式为缺省表现格式,则所述表现格式索引可能不被包含在所述SPS中。举例来说,如果被分派的表现格式在所述VPS中被指定,则所述表现格式索引可被包含在所述SPS中。所述视频编码设备可将更新视频表现格式标记设为指示所述表现格式索引是否被包含在所述SPS中。所述视频编码设备可将所述更新视频表现格式标记设为等于1,以指示所述表现格式索引存在于所述SPS中。所述视频编码设备可将所述更新视频表现格式索引设为等于0,以指示所述表现格式索引不存在于所述SPS中。
视频编码设备可接收包括VPS和一个或多个层的视频比特流。所述视频编码设备例如可基于所述VPS中的缺省直接附属标记(direct dependency flag)来确定与所述一个或多个层关联的直接附属关系。如果所述缺省直接附属标记指示所述VPS中存在直接附属类型信息,则所述视频编码设备可根据所述VPS中的直接附属类型信息来确定所述直接附属关系。如果所述缺省直接附属标记指示所述VPS中不存在所述直接附属类型信息,则所述视频编码设备可基于缺省确定所述直接附属关系。所述缺省附属可应用于所述多个层中的所有层。
视频编码设备可确定是否在所述VPS中包括直接附属类型信息。如果所述视频编码设备决定使用缺省附属,则所述视频编码设备可以跳过在所述VPS中以信号通告直接附属类型信息。如果所述视频编码设备决定不使用缺省附属,则所述视频编码设备可在所述VPS包括直接附属类型信息。所述视频编码设备可在所述VPS中将缺省直接附属标记设为指示是否在所述VPS中以信号通告直接附属类型信息。
多路SHVC编码器可包括处理器,该处理器具有用于限制针对类(profile)的基准层数量的可执行指令。所述多路SHVC编码器可设置基准层限制(limit)。所述多路SHVC编码器可将视频信号编码到针对类的层中,由此编码视频信号中针对给定层的直接和间接基准层的总数量小于所述基准层限制。
多路SHVC编码器可具有处理器,该处理器具有用于限制针对类的基准层数量的可执行指令。所述多路SHVC编码器可设置基准层限制。所述多路SHVC编码器可将视频信号编码到针对类的层中,所述层包括直接和间接层。针对每一层,所述多路SHVC编码器可确定直接和间接基准层的总数量。所述多路SHVC编码器可确定针对所述层的直接和间接基准层的总数量是否小于所述基准层限制。举例来说,如果针对每一层的直接和间接基准层的总数量小于所述基准层限制,所述多路SHVC编码器可发送编码视频信号至解码器。
视频编码设备可例如通过应用一个或多个约束(constraint)限制层的数量来限定(restrict)和/或降低针对多路SHVC编解码器的编码复杂度。所述层可以是直接附属层、间接附属层、和/或基层。一个或多个约束例如可限制所述直接附属层的最大数量或限制直接和间接附属层的最大数量。所述视频编码设备可通过下列中的至少一者限制类中的直接附属层的最大数量:VPS扩展中的句法元素、SPS中的句法元素、类指示、和/或类、层(tier)和/或级(level)(例如可伸缩主类)。所述视频编码设备可通过下列中的至少一者限制类中的直接和间接附属层的最大数量:VPS扩展中的句法元素、SPS中的句法元素、类指示、和/或类、层和/或级(例如可伸缩主类)。约束可以是基层上的约束。所述基层上的约束可使用一致SHVC比特流。所述一致SHVC比特流可以是一个或多个接入单元,例如包括nuh_layer_id(nuh_层_id)等于0而TemporalId(时间Id)等于1的图片。包括nuh_layer_id等于0而时间ID等于1的图片的层可以是层标识符列表TargetDecLayerIdList中的每一nuh_layer_id值的层的直接或间接附属层。所述视频编码设备可通过派生变量用信号传递一个或多个约束。所述视频编码设备可通过句法元素用信号传递一个或多个约束。
附图说明
图1示出了示例多层可伸缩视频编码系统。
图2示出了立体视频编码的时间预测和层间预测的实例。
图3是示出了可被配置成执行HD到UHD可伸缩性的示例两层可伸缩视频编码器的简化框图。
图4是示出了可被配置成执行HD到UHD可伸缩性的示例两层可伸缩视频解码器的简化框图。
图5是示出了序列参数集(SPS)和图片参数集(PPS)激活的实例的图。
图6示出了示例多层预测结构。
图7示出了示例直接附属层。
图8示出了分层视频编码结构的示例时间层。
图9A是示例通信系统的系统图,在该示例通信系统中可实现一个或多个公开的实施方式。
图9B是可在图9A的通信系统中使用的示例无线发射/接收单元(WTRU)的系统图。
图9C是可在图9A的通信系统中使用的示例无线电接入网络和示例核心网络的系统图。
图9D是可在图9A的通信系统中使用的另一示例无线电接入网络和另一示例核心网络的系统图。
图9E是可在图9A的通信系统中使用的另一示例无线电接入网络和另一示例核心网络的系统图。
具体实施方式
现在参照各个附图对说明性实施方式进行详细描述。虽然该描述提供了可能实施的具体示例,应当注意的是所述细节是示例性的且不对本申请的范围进行限制。
与传统数字视频服务(例如通过卫星、电缆和地面传输信道发送TV信号)相比,越来越多的视频服务、例如IPTV、视频聊天、移动视频和流式视频可被应用在不同的环境之中。举例来说,视频应用可为网络中的视频流提供不同大小的小区和/或其他等等。异构性(heterogeneity)可存在于客户端以及网络中。例如,在客户侧,在具有变化的屏幕大小和显示能力的设备(包括智能电话、平板电脑、PC和TV、和/或其他等等)上消费视频内容的N屏方案可被提供和/或使用。在网络侧,视频可在互联网、WiFi网络、移动网络(3G和4G)和/或上述任意组合上进行传送。
可伸缩视频编码可在最高分辨率下对信号进行编码。可伸缩视频编码可根据某些应用所需的和/或客户设备支持的特定速率和分辨率从所述流的子集启动解码。所述分辨率可由多个视频参数(包括但不限于空间分辨率(例如图片大小)、时间分辨率(例如帧速率)、视频质量(例如诸如MOS的主观质量和/或诸如PSNR或SSIM或VQM的客观质量))和/或其他等等来定义。其他通常使用的视频参数可包括色度格式(例如YUV420或YUV422或YUV444)、比特深度(例如8比特或10比特视频)、复杂度、视图、色域和/或宽高比(例如16:9或4:3)。国际视频标准(例如MPEG-2视频、H.263、MPEG4可视和H.264)可具有支持伸缩性模式的工具和/或类别。
可伸缩视频编码可启动对部分比特流的传输和解码。对部分比特流的传输和解码会使得可伸缩视频编码(SVC)系统为视频服务提供更低的时间和/或空间分辨率或降低的保真度,同时保持相对高的重建质量(例如给定部分比特流的相对速率)。SVC可采用单路解码来实现,由此SVC解码器可在正被解码的层处设置一个动态补偿路径而不在一个或多个其他较低层处设置动态补偿路径。举例来说,一个比特流可包括两个层,这两个层包括作为基层的第一层(层1)和作为增强层的第二层(层2)。当上述的SVC解码器重建层2视频,解码图片缓冲器和动态补偿预测的设置会被限制在层2。在SVC的这种实施过程中,来自较低层的各个基准图片可能无法被完全重建,由此会降低所述解码器处的计算复杂性和/或内存消耗。
单路解码可通过被约束的层间纹理预测来实现,其中对于给定层中的当前块,来自较低层的空间纹理预测可在相应的较低层块在帧内模式下被编码的情况下得以获准。这可被称为受限帧内预测。当较低层块在帧内模式下被编码时,该较低层块可被重建而无需动态补偿操作和/或解码图片缓冲器。
SVC可从一个或多个较低层实施一个或多个额外的层间预测技术,例如动态向量预测、残差预测、模式预测等等。这可提高增强层的失真效率。采用单路解码的SVC实施过程会在解码器处展现出降低的计算复杂性和/或降低的内存消耗,并且会展现出增加的实现复杂性(例如由于依靠块级层间预测)。为了对通过施行单路解码约束而引起的性能损失进行补偿,可对编码器设计和计算复杂性进行改进以实现所期望的性能。SVC可能无法支持交错式内容的编码。
图1是描述了示例基于块的混合可伸缩视频编码(SVC)系统的简化框图。将由层1(基层)表示的空间和/或时间信号分辨率可通过对输入视频信号进行下采样而生成。在后续的编码阶段中,对量化器(例如Q1)的设置可通向基本信息的质量级。一个或多个后续的较高层可使用基层重建Y1进行编码和/或解码,基层重建Y1可表示较高层分辨率级的近似值。上采样单元可对发送到层2分辨率的基层重建信号执行上采样。下采样和/或上采样可遍及多个层(例如对于N个层而言,层1、2…N)执行。下采样和/或上采样比率可以不同,例如取决于两个层之间的可伸缩性的尺度。
在图1的示例可伸缩视频编码系统中,对于给定较高层n(例如2≤n≤N,N为层的总数量),通过从当前层n信号中减去上采样较低层信号(例如层n-1信号)可生成一个差分信号。该差分信号可被编码。如果由两个层n1和n2表示的各自的视频信号具有相同的空间分辨率,则可跳过下采样和/或上采样操作。给定层n(例如1≤n≤N)或多个层可被解码而无需使用来自较高层的解码信息。
依靠(rely on)对非基层的层的残差信号(例如两个层之间的差分信号)的编码(例如使用图1中的示例SVC系统)可能导致视觉伪影。这种视觉伪影例如可归因于对残差信号进行量化和/或标准化以限定其动态范围和/或在残差编码期间执行的量化。一个或多个较高层编码器可采用动态估计和/或动态补偿预测作为各自的编码模式。残差信号中的动态估计和/或补偿可能与常规动态补偿不同,并且可能倾向于视觉伪影。为了降低(例如最小化)视觉伪影的出现,可实施更为复杂的残差量化,例如与联合量化进程一起实施,该联合量化进程可包括残差信号的量化和/或标准化以限定其动态范围和在残差编码期间执行的量化。上述的量化进程会增加所述SVC系统的复杂性。
多视点视频编码(MVC)可提供视图可伸缩性。根据视图可伸缩性的一个实例,可对基层比特流解码以重建规范二维(2D)视频,并且可对一个或多个额外的增强层解码以重建同一视频信号的其他视图表示。当这样的视图被组合到一起并且由三维(3D)显示来显示时,具有适当深度感知的3D视频可得以产生。
图2描述了使用MVC来编码具有左视图(层1)和右视图(层2)的立体视频的示例预测结构。左视图视频可采用I-B-B-P预测结构进行编码,而右视图视频可采用P-B-B-B预测结构进行编码。如图2所示,在右视图中,与左视图中的第一个I图片并置的第一个图片可被编码为P图片,而右视图中后续的图片可采用来自右视图中的时间基准(temporalreference)的第一预测以及来自左视图中的层间基准的第二预测被编码为B图片。MVC可能无法支持单路解码特征。举例来说,如图2所示,对右视图(层2)视频进行解码可被左视图(层1)中全部图片的有效性所制约,其中每一层(视图)具有各自的补偿路径。MVC的实施可包括高级句法改变并且可能不包括块级改变。上述过程可缓解(ease)MVC的实施。例如,MVC可通过在片(slice)和/或图片级配置基准图片得以实施。MVC可支持两个以上视图的编码,例如通过对图2中的示例进行扩展以在多个视图上执行层间预测。
MPEG帧兼容(MFC)视频编码可为3D视频编码提供可伸缩扩展。例如,MFC可为帧兼容基层视频(例如被打包到同一帧内的两个视图)提供可伸缩扩展,并且可提供一个或多个增强层以恢复全分辨率视图。立体3D视频可具有两个视图,包括左视图和右视图。立体3D内容可通过将所述两个视图打包和/或复用到一个帧内以及通过对打包的视频进行压缩和传输来得以传递。在接收机侧,在解码之后,所述帧可被解包并显示为两个视图。上述对视图的复用可在时间域或空间域中执行。当在空间域执行时,为了保持相同的图片大小,所述两个视图会根据一个或多个排列方式在空间上被下采样(例如通过系数2)并且被打包。举例来说,并排排列方式可将下采样左视图放在图片的左一半并且将下采样右视图放在图片的右一半。其他排列方式可包括上下、逐行、棋盘等等。用于实现帧兼容3D视频的排列方式例如可通过一个或多个帧包装排列方式SEI消息来传达。虽然上述的排列方式可使得3D传递的带宽消耗的增加最小化,但空间下采样会造成视图混淆和/或会降低3D视频的视觉质量和用户体验。
视频应用(例如IPTV、视频聊天、移动视频和/或流式视频可被使用在不同的环境中。异构性可存在于客户侧。异构性可存在于网络中。N屏可包括在具有变化的屏幕大小和显示能力的设备(包括智能电话、平板电脑、PC和/或TV等等)上消费视频内容。N屏例如可在客户侧构建异构性。视频例如可在网络侧在互联网、WiFi网络、移动网络(3G和/或4G)和/或上述网络的任意组合上进行传送。可伸缩视频编码可改善用户体验和/或视频服务质量。可伸缩视频编码可包括在最高分辨率下对信号进行编码。可伸缩视频编码可包括例如根据某些应用所使用的和/或客户服务支持的网络带宽和/或视频分辨率从所述流的子集启动解码。分辨率可通过多个视频参数进行表征。视频参数可包括下列中的一者或多者:空间分辨率、时间分辨率、视频质量、色度格式、比特深度、复杂度、视图、色域和/或宽高比等等。空间分辨率可包括图片大小。时间分辨率可包括帧速率。视频质量可包括主观质量(例如MOS)和/或客观质量(例如PSNR或SSIM或VQM)。色度格式可包括YUV420、YUV422或YUV444等等。比特深度可包括8比特视频、10比特视频等等。宽高比可包括16:9或4:3等等。HEVC可伸缩扩展至少可支持空间可伸缩性(例如可伸缩比特流可包括多于一个空间分辨率的信号)、质量可伸缩性(例如可伸缩比特流可包括多于一个质量级的信号)、和/或标准可伸缩性(例如可伸缩比特流可包括使用H.264/AVC编码的基层以及一个或多个使用HEVC编码的增强层)。在空间可伸缩性方面,可伸缩比特流可包括一个或多个空间分辨率的信号。在质量可伸缩性方面,可伸缩比特流可包括一个或多个质量级的信号。在标准可伸缩性方面,可伸缩比特流可包括使用例如H.264/AVC编码的基层以及一个或多个例如使用HEVC编码的增强层。质量可伸缩性可被称为SNR可伸缩性。视图可伸缩性可支持3D视频应用。在视图可伸缩性方面,可伸缩比特流可包括2D和3D视频信号两者。
视频编码系统(例如根据高效视频编码(SHVC)的可伸缩扩展的视频编码系统)可包括一个或多个被配置成执行视频编码的设备。被配置成执行视频编码(例如对视频信号进行编码和/或解码)的设备可被称为视频编码设备。这样的视频编码设备可包括视频使能设备,例如电视机、数字媒体播放器、DVD播放器、蓝光播放器、网络媒体播放器设备、台式计算机、笔记本个人电脑、平板设备、移动电话、视频会议系统、基于硬件和/或软件的视频编码系统等等。这样的视频编码设备可包括无线通信网络元素(例如无线发射/接收单元(WTRU)、基站、网关或其他网络元素)。
图3是示出了示例编码器(例如SHVC编码器)的简化框图。所示出的示例编码器可用于生成两层HD到UHD可伸缩性比特流。如图3所示,基层(BL)视频输入330可以是HD视频信号,而增强层(EL)视频输入302可以是UHD视频信号。所述HD视频信号330和所述UHD视频信号302可相互对应,例如通过下列中的一者或多者:一个或多个下采样参数(例如空间可伸缩性);一个或多个色彩分级参数(例如色域可伸缩性);一个或多个色调映射参数(例如比特深度可伸缩性)328。
BL编码器318例如可包括高效视频编码(HEVC)视频编码器或H.264/AVC视频编码器。所述BL编码器318可被配置成使用一个或多个(例如存储在BL DPB320中的)BL重建图片来生成BL比特流332以用于预测。EL编码器304例如可包括HEVC编码器。所述EL编码器304可包括一个或多个高级句法修正,例如通过添加层间基准图片到DL DPB来支持层间预测。所述EL编码器304可被配置成使用一个或多个(例如存储在EL DPB 306中的)EL重建图片来生成EL比特流308以用于预测。
BL DPB 320中的一个或多个重建BL图片可在层间处理(ILP)单元322处使用一个或多个图片级层间处理技术进行处理,所述图片级层间处理技术包括上采样(例如针对空间可伸缩性)、色域转换(例如针对色域可伸缩性)、以及反转色调映射(例如针对比特深度可伸缩性)中的一者或多者。所述一个或多个重建BL图片可被用作针对EL编码的基准图片。层间处理可基于接收自EL编码器304的增强视频信息314和/或接收自BL编码器318的基本视频信息316来执行。上述过程可提高EL编码效率。
在326,EL比特流308、BL比特流332以及在层间处理中使用的参数(例如ILP信息324)可被一起复用为可伸缩比特流312。举例来说,可伸缩比特流312可包括SHVC比特流。
图4是示出了与图3中示出的示例编码器对应的示例解码器(例如SHVC解码器)的简化框图。所示出的示例解码器例如可用于解码两层HD到UHD比特流。
如图4所示,解复用模块412可接收可伸缩比特流402,并且可对可伸缩比特流402进行解复用以生成ILP信息414、EL比特流404和BL比特流418。所述可伸缩比特流402可包括SHVC比特流。所述EL比特流404可由EL解码器406解码。所述EL解码器406例如可包括HEVC视频解码器。所述EL解码器406可被配置成使用(例如存储在EL DPB 408中的)一个或多个EL重建图片生成UHD视频信号410以用于预测。所述BL比特流418可由BL解码器420解码。所述BL解码器420例如可包括HEVC视频解码器或H.264/AVC视频。所述BL解码器420可被配置成使用(例如存储在BL DPB 422中的)一个或多个BL重建图片生成HD视频信号424以用于预测。所述重建视频信号(例如UHD视频信号410和HD视频信号424)可用于驱动显示设备。
BL DPB 422中的一个或多个重建BL图片可在ILP单元916处使用一个或多个图片级层间处理技术进行处理。所述的图片级层间处理技术可包括下列中的一者或多者:上采样(例如针对空间可伸缩性)、色域转换(例如针对色域可伸缩性)、或反转色调映射(例如针对比特深度可伸缩性)。一个或多个处理后的重建BL图片可用作针对EL解码的基准图片。层间处理可基于在层间处理中使用的参数(例如ILP信息414)执行。预测信息可包括预测块大小、一个或多个(例如可指示运动的方向和运动量的)动态向量、和/或一个或多个(例如可指示从哪个基准图片获取预测信号的)基准索引。上述过程可提高EL解码效率。
基于基准索引的架构可使用与单层编解码器中的块级操作类似的块级操作。单层编解码器逻辑可在可伸缩编码系统中重复使用。基于基准索引的架构可简化可伸缩编解码器设计。基于基准索引的架构可提供支持不同类型可伸缩性的灵活性,例如通过适当的高级句法信令和/或通过使用层间处理模块来实现编码效率。一个或多个高级句法改变可支持SHVC的多层信令和/或层间处理。
SHVC的高级句法设计例如可包括参数集标识约束、高级句法元素和语义改进、和/或针对对应句法/语义改变的解码进程。
参数集可以是视频参数集(VPS)、序列参数集(SPS)、和/或图片参数集(PPS)。参数集可以是包括句法元素的高级句法结构。句法元素可应用于多比特流层。句法元素可应用于一个层内的多个编码图片。所述参数集可利用视频比特流的编码图片来发送。举例来说,视频编码设备可被配置成利用视频比特流的编码图片来发送参数集。所述参数集可通过其他手段进行发送,例如使用可靠信道的带外传输、硬编码等等。视频编码设备可以被配置成通过其他手段来发送参数集,例如使用可靠信道的带外传输、硬编码等等。片报头可包括相对较小或与某些片或图片类型相关的图片相关信息。所述片报头可被认为是高级句法的一部分。
表1示出了示例NAL单元报头句法结构。标识符nuh_layer_id(nuh_层_id)可指定层的标识符。nuh_layer_id的值可等于0。举例来说,对于VPS,nuh_layer_id的值可等于0。表2示出了部分SPS句法结构的实例。表3示出了部分PPS句法结构的实例。表4示出了部分片报头句法结构的实例。
表1.示例NAL单元报头句法
表2.示例序列参数集(SPS)句法
表3.示例图片参数集(PPS)句法
表4.示例片分段报头句法
图5示出了利用SPS、PPS、以及片分段报头的NAL单元的SPS和PPS激活的实例。所述NAL单元可包括NAL单元报头和/或NAL单元报头层标识符。所述NAL单元可包括有效载荷数据。示例NAL单元报头在表1中示出。举例来说,取决于NAL单元类型(nal_单元_类型),NAL单元有效载荷数据可包括诸如SPS、PPS、和/或片分段数据的数据。
根据图5中所示的实例,一个或多个SPS NAL单元502、504、506可具有唯一的SPS标识符sps_seq_parameter_set_id(sps_序列_参数_集_id)。一个或多个PPS NAL单元508、510、512可包括唯一的PPS标识符pps_pic_parameter_set_id(pps_图片_参数_集_id)。编码图片片报头可包括句法元素slice_pic_parameter_set_id(片_图片_参数_集_id)。句法元素slice_pic_parameter_set_id可指示片所归属的PPS NAL单元。举例来说,视频编码设备可将句法元素slice_pic_parameter_set_id设为指示片所归属的PPS NAL单元。视频解码设备可使用句法元素slice_pic_parameter_set_id来确定片所归属的PPS NAL单元。视频编码设备(例如图1中所示的视频编码设备、图3中所示的视频编码器和/或图4中所示的视频解码器)可激活视频信号和/或视频信号层。举例来说,在图5中,片归属于slice_pic_parameter_set_id等于2的PPS NAL单元510。所述视频编码设备可被配置成激活slice_pic_parameter_set_id等于2的PPS NAL单元510。slice_pic_parameter_set_id等于2的PPS NAL单元510可归属于具有其句法元素pps_seq_parameter_set_id的SPS NAL单元。根据图5中示出的实例,活动PPS NAL单元的pps_seq_parameter_set_id等于2。所述视频编码设备可被配置成激活sps_seq_parameter_set_id等于2的SPS NAL单元504。
视频编码设备在SPS和/或PPS单元由另一NAL单元归属时可激活所述SPS和/或PPS。举例来说,PPS可被包括编码片的NAL单元激活。所述编码片的片报头可包括slice_pic_parameter_set_id(片_图片_参数_集_id)句法元素。所述PPS可包括pps_seq_parameter_set_id句法元素。另一NAL单元中被所述slice_pic_parameter_set_id和/或pps_seq_parameter_set_id句法元素标识的所述SPS和/或PPS可被激活。
例如在活动SPS或PPS的nuh_layer_id值小于或等于其激活的层时,所述视频编码设备可激活SPS或PPS。激活SPS或PPS的nuh_layer_id的值可不等于激活的层的nuh_layer_id。激活SPS或PPS的nuh_layer_id的值可不等于激活的层的其中一个附属层的nuh_layer_id的值。视频编码设备(例如解码器)可在子比特流提取进程期间移除SPS或PPS NAL单元。所述SPS或PPS NAL单元例如可在子比特流提取进程期间被移除,这是由于标识SPS或PPS为特定层提供信息(例如基本信息)非常困难。如果在比特流提取中出现了错误,则视频编码设备移除比特流提取中的SPS或PPS(例如基本SPS或PPS),接着产生的比特流中的至少一个层可能由于缺失SPS和/或PPS而无法被正确解码。在比特流提取进程中,视频编码设备(例如解码器)可对该视频编码设备希望保存的层中的每一个NAL单元进行解析(parse)。所述视频编码设备例如可通过对该视频设备希望保存的层中的每一个NAL单元进行解析来保证SPS或PPS(例如必要的SPS或PPS)不被丢弃。
视频编码设备可对NAL单元进行标识并且可确定该NAL单元是否包括针对当前层的活动参数集。基于确定所述NAL单元包括有针对当前层的活动参数集,所述视频编码设备可将与所述NAL单元关联的NAL单元报头层标识符设为下列中的至少一者:零、指代当前层的值、以及指代当前层的基准层的值。基准层可包括附属层,并且基准层和附属层在此处可互换使用。所述NAL单元可以是PPS NAL单元、SPS NAL单元和/或其他等等。指代当前层的值可以是指代在NAL单元报头中以信号通告的与当前层关联的层标识符的值。指代当前层的基准层的值可以是指代在NAL单元报头中以信号通告的当前层的基准层的层标识符的值。所述视频编码设备可发送包括NAL单元的视频比特流到视频解码设备。
举例来说,视频编码设备(例如编码器)可被配置成将活动SPS或PPSNAL单元的nuh_layer_id的值设为等于0。所述视频编码设备可将活动SPS或PPS NAL单元的nuh_layer_id的值约束为0。
所述视频编码设备可将活动SPS或PPS NAL单元的nuh_layer_id的值设为等于当前层的值。所述视频编码设备可将活动SPS或PPS NAL单元的nuh_layer_id的值设为等于当前层的附属层的值。所述视频编码设备可将活动SPS或PPS NAL单元的nuh_layer_id的值约束为等于当前层的值。所述视频编码设备可将活动SPS或PPS NAL单元的nuh_layer_id的值约束为等于当前层的附属层的值。
视频编码设备例如可应用约束来使得对应的SPS或PPS NAL单元的标识能够被包含在给定层的解码过程内。视频编码设备例如可通过对对应的SPS或PPS NAL单元的nuh_layer_id的值进行标识来使得对应的SPS或PPSNAL单元的标识能够被包含在给定层的解码过程内。视频编码设备可对对应的SPS或PPS NAL单元的nuh_layer_id的值进行标识。视频编码设备例如可在子比特流提取过程中忽略(omit)深度分组检测。子比特流提取可保证SPS或PPS NAL单元不被丢弃。
视频编码设备可被配置成使用子比特流提取。在子比特流提取过程中,视频编码设备可将比特流、对象最高时间Id值tId对象、和/或对象层标识符列表层Id列表对象作为输入。在子比特流提取过程中,所示视频编码设备可输出子比特流。对于输入比特流的比特流一致性,一致的比特流可以是具有对象最高时间Id值tId对象和对象层标识符列表层Id列表对象的输出子比特流。所述对象最高时间Id值tId对象例如可等于0至6范围内(包括0和6)的任意值。所述对象层标识符列表层Id列表对象例如可等于与在活动视频参数集中指定的层集关联的层标识符列表。一致的比特流可包括一个或多个nuh_layer_id等于0且时间Id等于0的编码片分段NAL单元。
视频编码设备可被配置成导出输出子比特流。所述视频编码设备例如可通过移除附加增强信息(SEI)NAL单元来导出输出子比特流,所述SEI NAL单元的nuh_layer_id等于0并且可包括非嵌套(non-nested)缓冲周期SEI消息、非嵌套图片定时SEI消息、和/或非嵌套解码单元信息SEI消息。所述视频解码设备例如可通过移除附加增强信息(SEI)NAL单元来导出输出子比特流,所述SEI NAL单元可包括非嵌套缓冲周期SEI消息、非嵌套图片定时SEI消息、和/或非嵌套解码单元信息SEI消息。视频编码设备可移除VCL NAL单元,例如在层Id列表对象不包括比特流中的每个NAL单元中的nuh_layer_id的每一值的情况下。视频编码设备可移除VCL NAL单元,例如在tId对象小于比特流中的每一NAL单元中的最大时间Id的情况下。比特流提取器可包括提取的子比特流中的适当的非嵌套缓冲图片SEI消息、非嵌套图片定时SEI消息、和/或非嵌套解码单元信息SEI消息,例如在可应用于子比特流的SEI消息在原始比特流中作为嵌套SEI消息出现的情况下。比特流提取器可以是中间盒。比特流提取器能够通过由终端用户请求的层。视频编码设备(例如解码器)可被配置成移除时间Id大于tId对象或nuh_layer_id不在层Id列表对象包含的值之中的视频编码层(VCL)NAL单元。视频编码设备(例如解码器)可被配置成保留非-VCL NAL单元,例如SPS和PPS。视频编码设备(例如解码器)可保留非-VCL NAL单元,即使非_VCL NAL单元的nuh_layer_id被排除在层Id列表对象之外。保留非-VCLNAL单元可确保SPS和/或PPS在非-VCL NAL激活的层的子比特流提取之后可用。视频编码设备可在子比特流提取期间移除时间Id大于tId对象或nuh_layer_id不在层Id列表对象包含的值之中的VCL NAL单元。
表5示出了附属信令的实例。层附属(例如直接_附属_标记)和层附属类型(直接_附属_类型)可单独地作为VPS扩展的一部分以信号通告。
表5.VPS扩展中的附属信令
视频编码设备(例如编码器)可被配置成对句法元素的值进行设置。举例来说,所述视频编码设备可对句法元素的值进行设置以向解码器指示信息。
如果句法元素direct_dependency_flag[i][j](直接_附属_标记[i][j])等于0,则具有索引j的层可能无法作为具有索引i的层的直接基准层。如果direct_dependency_flag[i][j]等于1,则具有索引j的层可以作为具有索引i的层的直接基准层。当对于在0到vps_max_layers_minus1(vps_最大_层_减1)范围之间的i和j而言不存在direct_dependency_flag[i][j]时,direct_dependency_flag[i][j]可被推定为等于0。
句法元素direct_dep_type_len_minus2plus 2(直接_深度_类型_len减2加2)可指定direct_dependency_type[i][j](直接_附属_类型[i][j])句法元素的比特数量。在比特流中,direct_dep_type_len_minus2的值可以等于0。解码器可允许在0到30的范围(包括0和30)内的direct_dep_type_len_minus2的其他值出现在所述句法中。
视频编码设备可被配置成使用句法元素来指示信息。举例来说,句法元素direct_dependency_type[i][j]可指示nuh_layer_id等于layer_id_in_nuh[i](层_id_in_nuh[i])的层与nuh_layer_id等于layer_id_in_nuh[j](层_id_in_nuh[j])的层之间的附属类型。direct_dependency_type[i][j]等于0可指示nuh_layer_id等于layer_id_in_nuh[j]的层可用于层间样本预测。direct_dependency_type[i][j]等于0可指示nuh_layer_id等于layer_id_in_nuh[j]的层可被排除在nuh_layer_id等于layer_id_in_nuh[i]的层的层间动态预测之外。direct_dependency_type[i][j]等于1可指示nuh_layer_id等于layer_id_in_nuh[j]的层可用于层间动态预测。direct_dependency_type[i][j]等于1可指示nuh_layer_id等于layer_id_in_nuh[j]的层可被排除在nuh_layer_id等于layer_id_in_nuh[i]的层的层间样本预测之外。direct_dependency_type[i][j]等于2可指示nuh_layer_id等于layer_id_in_nuh[j]的层可用于nuh_layer_id等于layer_id_in_nuh[i]的层的层间样本预测和层间动态预测两者。虽然direct_dependency_type[i][j]的值可以在0到2(包括0和2)的范围之内,解码器仍然可允许在3到332-2(包括3和332-2)之内的direct_dependency_type[i][j]的值出现在所述句法中。
视频编码设备(例如图1中示出的视频编码设备、图3中示出的视频编码器和/或图3中示出的视频解码器)可使用句法元素来指示每一增强层的直接附属层是哪层以及每一直接附属层可支持的层间预测类型。举例来说,句法元素direct_dependency_flag[i][j]、direct_dep_type_len_minus2以及direct_dependency_type[i][j]由视频编码设备使用以指示每一增强层的直接附属层是哪层以及每一直接附属层可支持的层间预测类型。
举例来说,视频编码设备(例如编码器)可被配置成将句法元素direct_dependency_flag[i][j]、direct_dep_type_len_minus2以及direct_dependency_type[i][j]设为指示每一增强层的直接附属层是哪层以及每一直接附属层可支持的层间预测类型。举例来说,视频编码设备(例如解码器)可被配置成使用句法元素direct_dependency_flag[i][j]、direct_dep_type_len_minus2以及direct_dependency_type[i][j]来确定每一增强层的直接附属层是哪层以及每一直接附属层可支持的层间预测类型。
SHVC可支持层间预测类型。举例来说,SHVC可支持纹理样本预测和动态预测。视频编码设备可忽略句法元素direct_dep_type_len_minus2。视频编码设备可将direct_dependency_type[i][j]的描述符从u(v)改变为u(2)。
视频编码设备(例如图1中示出的视频编码设备、图3中示出的视频编码器和/或图3中示出的视频解码器)可指示层间附属性。所述视频编码设备可使用层附属标记direct_dependency_flag(直接_附属_标记)和标记类型direct_dependency_type(直接_附属_类型)来指示两层之间的附属性。举例来说,编码器可被配置成使用层附属标记direct_dependency_flag和附属类型direct_dependency_type来指示两层之间的附属性。举例来说,解码器可被配置成使用层附属标记direct_dependency_flag和附属类型direct_dependency_type来确定两层之间的附属性。使用层附属标记direct_dependency_flag和附属类型direct_dependency_type来指示两层之间的附属性可导致冗余信令。句法元素direct_dependency_flag和direct_dependency_type可被合并成一个具有描述符ue(v)的句法元素direct_dependency_type,如表6中所示。在表6中,删除线文本指示了可被忽略的句法元素。
表6.VPS扩展中的示例附属
句法元素direct_dependency_type可替换句法元素direct_dependency_flag。视频编码设备(例如图1中示出的视频编码设备、图3中示出的视频编码器和/或图3中示出的视频解码器)可使用句法元素来指示两层之间的附属性。句法元素direct_dependency_type[i][j]可指示nuh_layer_id等于layer_id_in_nuh[i]的层与nuh_layer_id等于layer_id_in_nuh[j]的层之间的附属类型。举例来说,编码器可被配置成将句法元素direct_dependency_type[i][j]设为指示nuh_layer_id等于layer_id_in_nuh[i]的层与nuh_layer_id等于layer_id_in_nuh[j]的层之间的附属类型。举例来说,解码器可被配置成使用句法元素direct_dependency_type[i][j]来确定nuh_layer_id等于layer_id_in_nuh[i]的层与nuh_layer_id等于layer_id_in_nuh[j]的层之间的附属类型。
举例来说,如果direct_dependency_type[i][j]等于0,则nuh_layer_id等于layer_id_in_nuh[j]的层可能无法作为nuh_layer_id等于layer_id_in_nuh[i]的层的直接基准层。如果direct_dependency_type[i][j]等于1,则nuh_layer_id等于layer_id_in_nuh[j]的层可以作为nuh_layer_id等于layer_id_in_nuh[i]的层的直接基准层。视频编码设备可被配置成将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间样本预测。如果direct_dependency_type[i][j]等于2,则nuh_layer_id等于layer_id_in_nuh[j]的层可以作为nuh_layer_id等于layer_id_in_nuh[i]的层的直接基准层。视频编码设备可被配置成将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间样本预测和层间动态预测两者。如果direct_dependency_type[i][j]等于3,则nuh_layer_id等于layer_id_in_nuh[j]的层可以作为nuh_layer_id等于layer_id_in_nuh[i]的层的直接基准层。视频编码设备可被配置成将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间动态预测。视频编码设备可被配置成在层间样本预测中忽略nuh_layer_id等于layer_id_in_nuh[j]的层。
变量NumDirectRefLayers[i](数量直接基准层[i])、RefLayerId[i][j](基准层Id[i][j])、SamplePredEnabledFlag[i][j](样本预测使能标记[i][j])、MotionPredEnabledFlag[i][j](动态预测使能标记[i][j])、以及DirectRefLayerIdx[i][j](直接基准层Idx[i][j])可导出如下:
视频编码设备(例如图1中示出的视频编码设备、图3中示出的视频编码器和/或图3中示出的视频解码器)可使用附属层提供层间动态预测。视频编码设备在提供层间样本预测时可忽略附属层。与层间动态预测相比,层间样本预测为编码性能增益带来的贡献要大得多(例如与层间动态预测的大约1%相比,层间样本预测为大约25-30%)。层间样本预测可用作层间预测的基本形式并且允许层间动态预测作为可能的附加。举例来说,在允许层间样本预测时,层间动态预测可被允许。支持层间样本预测的直接附属层的约束可应用于SHVC主类。
VPS扩展中的层附属信令可进行如表7中所示的修改。在表7中,删除线文本指示了被忽略的句法元素。句法结构可被整理如表8所示。
表7.VPS扩展中的示例动态预测标记
表8.VPS扩展中的示例动态预测标记
如表7和表8中所示,句法元素direct_dependency_type可由句法元素il_motion_prediction_flag(il_动态_预测_标记)替换。direct_dependency_flag和il_motion_prediction_flag的语义如此处所公开。
如果direct_dependency_flag[i][j]等于0,则具有索引j的层可能无法作为具有索引i的层的直接基准层。如果direct_dependency_flag[i][j]等于1,则具有索引j的层可以作为具有索引i的层的直接基准层。视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间样本预测。当对于在0到vps_max_layers_minus1范围之间的i和j而言不存在direct_dependency_flag[i][j]时,direct_dependency_flag[i][j]可被推定为等于0。
变量NumDirectRefLayers[i]、RefLayerId[i][j]、SamplePredEnabledFlag[i][j]、MotionPredEnabledFlag[i][j]、以及DirectRefLayerIdx[i][j]可被导出如下:
如果il_motion_prediction_flag[i][j]等于0,视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层排除在nuh_layer_id等于layer_id_in_nuh[i]的层的层间动态预测之外。如果il_motion_prediction_flag[i][j]等于1,视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层用于nuh_layer_id等于layer_id_in_nuh[i]的层的层间动态预测。当对于在0到vps_max_layers_minus1范围之间的i和j而言不存在direct_dependency_flag[i][j]时,视频编码设备可将il_motion_prediction_flag[i][j]推定为等于0。
在示例SHVC比特流中,视频编码设备可使得层间样本预测和/或层间动态预测能够用于一个或多个直接附属层或所有的直接附属层。所述视频编码设备可跳过以信号通告一个或多个(例如每个)独立附属层的direct_dependency_type。举例来说,编码器可使用选通(gating)标记(如表9中所示的default_all_ilp_enable_flag(缺省_所有_ilp_使能_标记))来指示以信号通告每一独立附属层的direct_dependency_type可被跳过。举例来说,解码器可使用选通标记(default_all_ilp_enable_flag)来确定以信号通告每一独立附属层的direct_dependency_type是否被跳过。
表9.VPS扩展中的示例选通标记
如果default_all_ilp_enable_flag等于1,视频编码设备可将nuh_layer_id等于iNuhLId的层的直接附属层(例如所有的直接附属层)用于nuh_layer_id等于iNuhLId的层的层间样本预测和层间动态预测。如果default_all_ilp_enable_flag等于0,视频编码设备可将nuh_layer_id等于iNuhLId的层的直接附属层(例如所有的直接附属层)用于nuh_layer_id等于iNuhLId的层的层间样本预测和层间动态预测或将nuh_layer_id等于iNuhLId的层的直接附属层(例如所有的直接附属层)排除在nuh_layer_id等于iNuhLId的层的层间样本预测和层间动态预测之外。
视频编码设备可确定是否在VPS中包括直接附属类型信息。如果视频编码设备决定使用缺省附属,则所述视频编码设备可跳过在VPS中以信号通告直接附属类型信息。如果所述视频编码设备决定不使用缺省附属,则所述视频编码设备可在VPS中包括直接附属类型信息。所述视频编码设备可在VPS中设置缺省直接附属标记。
视频编码设备可被配置成以信号通告附属类型存在标记,例如direct_dependency_type_presence_flag(直接_附属_类型_存在_标记)。视频编码设备可被配置成设置所述direct_dependency_type_presence_flag。视频编码设备可被配置成在VPS扩展中以信号通告direct_dependency_type[i][j]。视频编码设备可被配置成对direct_dependency_type_presence_flag进行设置以用信号传递direct_dependency_type[i][j]。当direct_dependency_type_presence_flag被设为等于1时,视频编码设备可显式地在VPS扩展中以信号通告direct_dependency_type[i][j]。句法元素direct_dependency_type[i][j]可能不存在于VPS扩展中。
视频编码设备可接收包括视频参数集(VPS)和一个或多个层的视频比特流。视频编码设备可确定与一个或多个层关联的直接附属关系,例如基于VPS中的缺省直接附属标记。如果所述缺省直接附属标记指示在VPS中存在直接附属类型信息,则所述视频编码设备可根据VPS中的直接附属类型信息确定直接附属关系。如果所述缺省直接附属标记指示在VPS中不存在直接附属类型信息,则所述视频编码设备可基于缺省确定直接附属关系。缺省附属可应用于多个层中的所有层。
视频编码设备可对样本预测使能标记和动态预测使能标记进行推定。视频编码设备可被配置成对样本预测使能标记和动态预测使能标记的值进行推定。举例来说,第i增强层的每一第j附属层的样本预测使能标记[i][j]和动态预测使能标记[i][j]可被默认推定为1。
句法元素direct_dependency_type[i][j]可指示nuh_layer_id等于layer_id_in_nuh[i]的层与nuh_layer_id等于layer_id_in_nuh[j]的层之间的附属类型。视频编码设备(例如编码器)可被配置成将句法元素direct_dependency_type[i][j]设为指示nuh_layer_id等于layer_id_in_nuh[i]的层与nuh_layer_id等于layer_id_in_nuh[j]的层之间的附属类型。如果direct_dependency_type[i][j]等于0,则视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间样本预测。如果direct_dependency_type[i][j]等于0,则视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层用于nuh_layer_id等于layer_id_in_nuh[i]的层的层间动态预测。如果direct_dependency_type[i][j]等于1,则视频编码设备可被配置成将nuh_layer_id等于layer_id_in_nuh[j]的层用于层间动态预测。如果direct_dependency_type[i][j]等于1,则视频编码设备可将nuh_layer_id等于layer_id_in_nuh[j]的层用于nuh_layer_id等于layer_id_in_nuh[i]的层的层间样本预测。如果direct_dependency_type[i][j]等于2,则视频编码设备可被配置成将nuh_layer_id等于layer_id_in_nuh[j]的层用于nuh_layer_id等于layer_id_in_nuh[i]的层的层间样本预测和层间动态预测两者。
所述视频编码设备可为与SPS关联的层分配表现格式。VPS可包括视频表现格式列表。举例来说,视频编码设备(例如编码器)可被配置成将视频表现格式(例如表10中示出的rep_format()(表现_格式()))用信号输入成VPS扩展中的查找列表。对应的索引(例如表11中示出的进入到rep_format()列表中的vps_rep_format_idx[i](vps_表现_格式_索引[i])可针对VPS中的层(例如每一层)进行指定。
举例来说,如果特定层的rep_format()不与VPS扩展中指定的预定义rep_format()匹配,视频编码设备(例如编码器)可被配置成对SPS中的更新标记(如表12中示出的update_rep_format_flag(更新_表现_格式_标记)进行设定。如果特定层的rep_format()不与VPS扩展中指定的预定义rep_format()匹配,视频编码设备(例如编码器)可被配置成以信号通告(例如显式信号)SPS中的rep_format()的句法元素(例如每一句法元素)。
表10.示例表现格式句法
表11.VPS中的示例rep_format()
表12.SPS中的示例表现格式更新句法元素
所述视频编码设备可确定是否在SPS中包括表现格式索引,例如基于与SPS关联的层的所分配的表现格式。举例来说,在所分配的表现格式是缺省表现格式的情况下,所述表现格式索引可能不被包括在SPS中。举例来说,在所分配的表现格式在VPS中被指定的情况下,所述表现格式索引可被包括在SPS中。
视频编码设备(例如图1中示出的视频编码设备、图3中示出的视频编码器和/或图3中示出的视频解码器)可为VPS中的句法结构指定信息。举例来说,句法元素(例如update_rep_format_idx_present_flag(更新_表现_格式_索引_存在_标记)和update_rep_format_idx(更新_表现_格式_索引))可将所述索引指定到VPS中的rep_format()句法结构列表中。如果表现格式与VPS中以信号通告的rep_format()列表匹配,则rep_format()列表的索引可以信号进行通告。句法元素可将索引指定到VPS中的rep_format()句法结构列表中。表13示出了SPS中的示例句法元素。
表13.SPS中的示例表现格式更新句法元素
所述视频编码设备可将更新视频表现格式标记设为指示所述表现格式索引是否包含在SPS中。举例来说,如果update_rep_format_idx_present_flag等于1,则句法元素update_rep_format_idx可以存在。如果update_rep_format_idx_present_flag等于0,则句法元素update_rep_format_idx可能不存在。
句法元素update_rep_format_idx可将索引指定到rep_format()句法结构的VPS中的rep_format()句法结构列表中。当不存在update_rep_format_idx时,update_rep_format_idx的值可被推定为等于0。update_rep_format_idx的值可以在0到vps_num_rep_formats_minus1(vps_数量_表现_格式_减1)的值范围(包括0和vps_num_rep_formats_minus1的值)内。
所述视频编码设备可确定与SPS关联的层的视频表现格式,例如基于SPS中的更新视频表现格式标记。如果所述更新视频表现格式标记指示了表现格式索引的存在,则所述视频表现格式可基于所述表现格式索引根据视频表现格式列表进行确定。如果不存在更新表现格式索引,则所述视频表现格式可根据缺省视频表现格式进行确定。所述视频编码设备可确定在SPS中是否存在表现格式索引,例如基于SPS中的更新视频表现格式标记。如果所述更新视频表现格式标记等于1,则所述视频编码设备可确定SPS中存在所述表现格式索引。如果所述更新视频表现格式标记等于0,则所述视频编码设备可确定SPS中不存在表现格式索引。所述缺省视频表现格式可以是VPS中针对层指定的缺省视频表现格式。所述视频更新表现格式索引可以在0到VPS数量表现格式减1的值的范围(包括0和VPS数量表现格式减1)内。
VPS扩展中的句法元素和片报头可根据其他句法元素的值推定。以信号通告句法元素的制约可节省有效载荷。
视频编码设备(例如编码器)可被配置成以信号通告视频参数集(VPS)扩展中的句法元素max_one_active_ref_layer_flag(最大_一个_活动_基准_层_标记)以说明针对当前增强层中的每一图片,来自一个附属层的单个图片是否可用于层间预测。举例来说,针对当前增强层中的不同图片,来自不同附属层的图片可用于层间预测。同一VPS扩展中的句法元素all_ref_layers_active_flag(所有_基准_层_活动_标记)可说明针对当前增强层中的每一图片,在当前接入单元中有效的该当前增强层的直接附属层的基准图片可在all_ref_layers_active_flag的值等于1时用于层间预测。
视频编码设备(例如编码器)可被配置成对all_ref_layers_active_flag的值进行设置。当all_ref_layers_active_flag被设为等于1时,视频编码设备(例如解码器)可被配置成从数量直接基准层[i]的最大值中推定max_one_active_ref_layer_flag的值,例如当i在1到层的最大数量的范围内时。
表14示出了VPS扩展中的示例句法制约。
表14.VPS扩展中的max_one_active_ref_layer_flag示例制约
变量最大数量直接附属基准层可表示增强层的直接附属基准层的最大数量。变量最大数量直接附属基准层可导出如下:
视频编码设备(例如编码器)可被配置成对max_one_active_ref_layer_flag的值进行设置。如果max_one_active_ref_layer_flag等于1,则视频编码设备(例如解码器)可被配置成针对CVS中的每一图片将最多一个图片用于层间预测。如果max_one_active_ref_layer_flag等于0,则视频编码设备(例如解码器)可被配置成针对CVS中的每一图片将多于一个图片用于层间预测。如果max_one_active_ref_layer_flag不存在,则max_one_active_ref_layer_flag可被导出如下:
max_one_active_ref_layer_flag=(MaxNumDirectDependentRefLayers>1)?0:1
视频编码设备(例如视频编码器)可以信号通告非IDR片的片报头中的句法元素slice_pic_order_cnt_lsb(片_图片_顺序_cnt_lsb)以指定当前图片的图片顺序计数的LSB。所述句法元素可用信号告知增强层而无需考虑图片类型。举例来说,视频编码设备(例如视频编码器)可被配置成针对增强层以信号告知所述句法元素而无需考虑图片类型。所述视频编码设备(例如编码器)在内随机接入点(IRAP)图片在层上未对齐时可使用所述句法元素来对齐相同或类似接入单元内的图片的POC值。当层上的IRAP图片被对齐时,由于IDR图片的POC值为零,以信号通告IDR图片的slice_pic_order_cnt_lsb是多余的。所述视频编码设备(例如视频编码器)可被配置成以信号通告VPS中的句法元素cross_layer_irap_aligned_flag(上_层_irap_对齐_标记)以指示IRAP图片是否在不同的层上对齐。
如果cross_layer_irap_aligned_flag等于1,CVS中的IRAP图片可以是层上对齐的,例如当接入单元中的层A的图片A是IRAP图片时。属于层A的直接附属层或属于具有层A作为其直接附属层的层的相同或类似接入单元中的图片B可以是IRAP图片。图片B的VCLNAL单元可以与图片A具有相同或类似的nal_unit_type值。如果cross_layer_irap_aligned_flag等于0,上述关系适用或不适用。
句法元素cross_layer_irap_aligned_flag可用于制约(condition)slice_pic_order_cnt_lsb,如表15中所示。
表15.片报头句法中的slice_pic_order_cnt_lsb示例制约
HEVC可被扩展为支持可伸缩编码。举例来说,HEVC可支持空间可伸缩性、质量可伸缩性以及标准可伸缩性。空间可伸缩性可以是当可伸缩比特流包含多于一个空间分辨率的信号时。质量可伸缩性可以是当可伸缩比特流包含在多于一个质量级上的信号时。质量可伸缩性还可被称为SNR可伸缩性。标准可伸缩性可以是当可伸缩比特流包含使用H.264/AVC编码的基层和使用HEVC编码的一个或多个增强层时。HEVC可以支持视图可伸缩性。视图可伸缩性可以是当可伸缩比特流包含2D和3D视频信号两者时。
HEVC的可伸缩扩展(SHVC)可使用基准索引基础框架。SHVC可使用句法、一个或多个语义和/或一个或多个解码进程。
视频编码设备可使用类来定义算法特征(例如压缩工具)、视频输入格式(例如比特深度和色度格式)和/或类似等等。视频编码设备可使用级和/或层来定义量化能力集合(例如最大比特率、最大帧大小、每秒的样本最大数量、和/或类似等等)。H.265中的视频编码设备和/或HEVC可使用三个类(例如主类、主10类、以及主静止图片类)和/或13个级,例如其中的一个或多个级具有两个层。视频编码设备可使用类、级和/或层来指定符合所述类、级和/或层的视频编码设备的最大复杂度。
所述类、层和级可具有多个约束(例如三个约束)。所述约束可包括下列中的一者或多者。视频编码设备(例如视频解码设备)对于特定图片解码可能无法多于一次地调用(invoke)对图片样本值的图片重新采样。视频编码设备对于特定图片解码可能无法多于一次地调用对图片动态字段的重新采样。当视频编码设备针对特定图片解码调用图片样本值和图片动态字段重新采样两者时,视频编码设备可将图片样本值和/或图片动态字段重新采样应用于同一基准层图片。当附属Id[i]等于1时,视频编码设备可将ScalabilityId[LayerIdxInVps[i]][smIdx](可伸缩性Id[层IdxInVps[i]][smIdx])设为0,其中smIdx值为从0到15(包括0和15),对于nuh_layer_id等于i的编码图片,附属Id[i]不等于2。当avc_base_layer_flag(avc_基_层_标记)等于1时,例如为了比特流一致性,视频编码设备可将MotionPredEnabledFlag[iNuhLId][0](动态预测使能标记[iNuhLId][0])设为等于0,其中iNuhLId的值等于比特流中存在的nuh_layer_id的值。
视频编码设备可使用可伸缩主类来指定在对图片进行解码时图片纹理重新采样和动态重新采样可能无法多于一次被调用。举例来说,针对空间可伸缩性的层间样本预测和层间动态预测中的每一者都可来自一个基准层。例如当层间样本预测和动态预测被启用时,视频编码设备可使用同一基准层。
视频编码设备可在图片级指定约束(例如当前约束)。NAL单元报头中的layer_id(层_id)的比特长度可以是6比特。NAL单元报头中的6比特长度layer_id可允许和/或启用最大64层。最多63个直接附属层可存在于比特流或编码视频序列(CVS)层,例如在视频编码设备针对比特流中的一个或多个编码图片使用了其中一个基准层进行样本和/或动态预测的情况下。直接附属层可以是包括至少一个可用作特定增强层图片的层间样本和/或动态预测的基准图片的图片的层。
举例来说,通过以信号通告一个或多个约束来限制SHVC类的多个层以及应用所述一个或多个约束,视频编码设备可限定和/或降低多路SHVC编解码器的复杂度。所述层可以是直接附属层、间接附属层、和/或基层。一个或多个约束例如可限制直接附属层的最大数量或限制直接和间接附属层的最大数量。所述视频编码设备可经由VPS扩展中的句法元素、SPS中的句法元素、类指示中的至少一者和/或根据类、层和/或级(例如可伸缩主类)来限制直接附属层的最大数量。所述视频编码设备可经由VPS扩展中的句法元素、SPS中的句法元素、类指示中的至少一者和/或根据类、层和/或级(例如可伸缩主类)来限制直接和间接附属层的最大数量。约束可以是基层上的约束。基层上的约束可使用一致的SHVC比特流。所述一致的SHVC比特流可以是一个或多个接入单元,例如包括nuh_layer_id等于0和时间ID等于0的图片。包括nuh_layer_id等于0和时间ID等于0的图片的层可以是层标识符列表TargetDecLayerIdList中的每一nuh_layer_id值的层的直接或间接附属层。所述视频编码设备可经由导出的变量以信号通告一个或多个约束。所述视频编码设备可经由句法元素以信号通告一个或多个约束。
图6示出了示例多层预测结构。在图6中,顶层(层-63 610)可在视频序列内具有最多63个直接附属层。视频编码设备可被配置成针对层-63 610的每一图片从63个附属层中的一个中选择基准图片以用于层间样本和动态预测,例如以满足SHVC主类约束。举例来说,视频编码设备可将来自层-632的POC-0图片用于层-63 630的POC-0图片的层间预测(例如箭头640所示)。视频编码设备可将来自层-61 652的POC-1图片用于层-63 650的图片POC-1614的层间预测,等等。举例来说,限定实现复杂度可能无法与当前约束一起执行,这是因为直接基准层的基准图片可能需要被解码,除非确定这样的层可能无法用于其自有层内的层间预测和时间预测两者。用于限定实现复杂度的层间动态预测和样本预测操作的数量可得以限制。直接或间接附属层的基准图片可被解码。视频编码设备可对直接或间接附属层的基准图片进行解码,例如通过层间预测和/或样本预测。视频编码设备可能无法对直接或间接附属层的一个或多个图片进行解码,例如在所述一个或多个图片并非时间和/或层间预测的基准图片的情况下。举例来说,视频编码设备可能需要解码层-0的具有POC 0 612、1614、…62 616的图片以解码层-0 672中的具有POC 63的图片,例如在层-63 670中具有POC63的图片直接取决于层-0 672中的具有POC 63的图片以用于层间预测的情况下。
多路SHVC编码器可具有处理器,该处理器具有用于限制类的基准层的数量的可执行指令。多路SHVC编码器可设定基准层限制。多路SHVC编码器可将视频信号编码到所述类的层中,由此所述层包括直接和间接基准层,并且针对编码视频信号中的层的直接和间接基准层的总数量小于基准层限制。
图7示出了示例间接附属层。间接附属层的数量可影响SHVC编解码器实现的复杂度。间接附属层可以是包含有至少一个可用作特定增强层的直接附属层的图片的层间样本和/或动态预测的基准图片的图片的层。如图7中所示,层-63 702可在视频序列内具有一个直接附属层(层-62 704)。视频编码设备可根据层-62 712的共同基准图片来预测层-63702中的一个或多个编码图片。层-63 702可具有至多62个间接附属层,如图7所示。在图7中,一一个或多个层或每一层可与作为基准层的其较低层紧靠,例如层-63 702直接紧靠层-62 704,而层-62 704直接紧靠层-61 706,诸如此类。为了正确解码层-63的图片,视频编码设备需要正确解码从层-0 710到层62 704的并置图片708、714、716、712。间接附属层的数量会对SHVC编码系统所需的总内存量造成影响。间接附属层的数量会对所述系统的差错还原能力造成影响。对直接和/或间接附属层数量的约束对于指明SHVC编解码器的最大实现复杂度是至关重要的。
多路SHVC编码器可具有处理器,该处理器具有用于限制类的基准层的数量的可执行指令。所述多路SHVC编码器可设定基准层限制。所述多路SHVC编码器可将视频信号编码到所述类的层中,所述层包括直接和间接基准层。针对每一层,所述多路SHVC编码器可确定直接和间接基准层的总数量。所述多路SHVC编码器可确定所述层的直接和间接基准层的总数量是否小于所述基准层限制。所述多路SHVC编码器可发送编码视频信号到解码器,例如在每一层的直接和间接基准层的总数量小于所述基准层限制的情况下。
所述SHVC主类约束可对样本的数量和/或动态重新采样进程进行限制,以限定在图片级可用的层间基准图片的数量。根据SNR可伸缩性,视频编码设备可能不会使用样本或动态重新采样进程。根据SNR可伸缩性,视频编码设备可遵照多路解码架构。根据SNR可伸缩性,视频编码设备可使用将被解码的附属层(例如直接或间接)以解码给定增强层。对附属层数量的约束可应用于SNR可伸缩性。
SHVC视频编码设备(例如视频解码设备)能够对比特流的64个层进行完全解码。对比特流的64个层进行解码可等同于在SHVC解码器中具有64个单独的层解码器。视频编码设备可增加类约束以限制SHVC解码器复杂度。
根据一个实例,可对附属层的数量提供主类约束。举例来说,为了限定多路SHVC编解码器的编码复杂度,可提供进一步的约束以限制SHVC主类及其如下所述的级的直接和间接附属层的数量。
nuh_layer_id等于iNuhLId的层的直接附属层的数量NumDirectRefLayers[iNuhLId](数量直接基准层[iNuhLId])可被预先确定。视频编码设备可将nuh_layer_id等于iNuhLId的层的间接附属层的数量NumIndirectRefLayers[iNuhLId](数量间接基准层[iNuhLId])导出如下:
视频编码设备可通过对NumDirectRefLayers[iNuhLId]和NumIndirectRefLayers[iNuhLId]求和来确定nuh_layer_id等于iNuhLId的层的直接和间接附属层的总数量NumRefLayers[iNuhLId](数量基准层[iNuhLId])。举例来说,NumRefLayers[iNuhLId]=NumDirectRefLayers[iNuhLId]+NumIndirectRefLayers[iNuhLId]。
视频编码设备可使用对直接附属层数量的约束。例如,视频编码设备可使用约束选项来限制主类中的直接附属层的最大数量。视频编码设备可在VPS扩展或SPS中以信号通告句法元素max_num_direct_dependent_ref_layers_minus1(最大_数量_直接_附属_基准_层_减1)以限定可用于SHVC主类中的一个或多个增强层或每一增强层的直接附属层的总数量的最大值。视频编码设备可将可用NumDirectRefLayers[i](数量直接基准层[i])(其中i可在1到层最大数量(例如63)之间)设为等于或小于max_num_direct_dependent_ref_layers_minus1的值。举例来说,视频编码设备为了解码特定层而解码的层的总数量至多为63个,这是因为每一附属层可依赖于一个或多个其自身的将被解码的附属层。
视频编码设备可使用对可伸缩主类的约束。举例来说,nuh_layer_id等于iNuhLId的特定增强层的直接附属层的数量NumDirectRefLayers[iNuhLId](数量直接基准层[iNuhLId])不会超过N,其中N可以是可伸缩主类所允许的直接附属层的最大数量。视频编码设备可针对SHVC主类将直接附属层的最大数量N设为等于1。
举例来说,视频编码设备可在VPS扩展或SPS中以信号通告句法元素例如max_num_dependent_ref_layers_minus1以约束可用于SHVC主类中的一个或多个增强层或每一增强层的直接和间接附属基准层的总数量的最大值。视频编码设备可将可用NumRefLayers[i](数量基准层[i])(其中i可在1到层最大数量(例如63)之间)设为小于或等于max_num_dependent_ref_layers_minus1plus 1(最大_数量_附属_基准_层_减1加1)的值。
视频编码设备可使用对附属层(可包括直接和间接附属层两者)数量的约束以减低或限制SHVC编解码器的复杂度。举例来说,多路SHVC编码器可包括处理器,该处理器具有用于限制类的基准层数量的可执行指令。所述多路SHVC编码器可对基准层限制进行设定。例如,所述基准层限制可被用作用于限制直接和间接附属层的最大数量的约束。所述多路SHVC编码器可将视频信号编码到所述类的层中,由此编码视频信号中的给定层的直接和间接基准层的总数量小于基准层限制。
举例来说,针对每一层,多路SHVC编码器可确定直接和间接基准层的总数量。所述多路SHVC编码器可确定所述层的直接和间接基准层的总数量是否小于基准层限制。所述编码视频信号可被发送至解码器,例如在每一层的直接和间接基准层的总数量小于所述基准层限制的情况下。
举例来说,视频编码设备可使用对可伸缩主类的约束。特定增强层的直接和间接附属层的总数量NumRefLayers[iNuhLId]可能不会超过N,其中N可以是可由可伸缩主类、层和/或级使用和/或允许的附属层的最大数量。
举例来说,SHVC主类可指定可由某个或特定层和/或级允许或使用的CTB(编码树区块)的最大数量。根据一个实例,视频编码设备可基于一个或多个附属层或每一附属层的视频解决方案从CTB的最大数量导出N。
视频编码设备可以一种或多种方式以信号来提供约束。例如,视频编码设备可以两种方式以信号在SHVC中提供此处所述的一个或多个约束。
举例来说,视频编码设备可以不用信号通告额外的句法元素,并且所述约束可被提供于导出的变量,例如NumDirectRefLayers[iNuhLId]和NumRefLayers[iNuhLId]。视频编码设备可对句法元素(例如direct_dependency_flag)的值进行设定以实现对直接和/或间接附属层的总数量的约束。视频编码设备可使用句法元素(例如direct_dependency_flag)来导出变量NumDirectRefLayers[iNuhLId]和NumRefLayers[iNuhLId]。
视频编码设备可以信号通告参数集中的句法元素(例如max_num_direct_dependent_layer_minus1(最大_数量_直接_附属_层_减1)和/或max_num_dependent_layers_minus1(最大_数量_附属_层_减1)以指示附属层的总数量。参数集可以是SPS或VPS。视频编码设备例如可基于编解码器支持的类、层和/或级来设定所述句法元素的值。视频编码设备可使用句法元素max_num_dependent_layer_minus1。
视频编码设备可使用句法元素来指示层中的附属层的最大数量(如表166所示)和/或每一独立增强层的附属层的最大数量(如表17所示),这是因为例如当句法元素可在VPS扩展中以信号通告时,每一层可支持不同的类和/或级。
表16.VPS中的示例句法元素
视频编码设备可使用max_num_dependent_layers_minus1来指定每一层的直接和间接附属层的最大数量。max_num_dependent_layers_minus1的值可以在0到62的范围内。如果其不存在,则max_num_dependent_layers_minus1的值可以等于0。
表17.VPS中的示例句法元素
视频编码设备可使用max_num_dependent_layers_minus1[i](最大_数量_附属_层_减1[i])来指定第i层的直接和间接附属层的最大数量。max_num_dependent_layers_minus1的值可以在0到62的范围内。如果其不存在,则max_num_dependent_layers_minus1的值可以等于0。
视频编码设备可使用max_num_dependent_layers_minus1来制约在VPS中以信号通告的一些句法元素。举例来说,如果存在可用于每一层的附属层(max_num_dependent_layers_minus1=0),句法元素(例如“all_ref_layers_active_flag(所有_基准_层_活动_标记)”和“max_one_active_ref_layer_flag(最大_一个_活动_基准_层_标记)”可能不存在,如表18所示。
表18.VPS中的句法元素示例制约
视频编码设备可使用在SPS中以信号通告的句法元素(如表19所示)来指示可与SPS关联的活动层的附属层的最大数量。视频编码设备可使用句法元素来制约在SPS扩展中以信号通告的成比例的(scaled)偏移句法元素。表20示出了可被提供和/或使用的示例SPS扩展句法改变。
表19.SPS中的示例句法元素
表20.示例SPS扩展句法改变
视频编码设备在基层使用主类约束。举例来说,视频编码设备可使用子比特流提取。视频编码设备可使用子比特流提取的输入。子比特流提取的输入可以是比特流、对象最高时间Id值tId对象、和/或对象层标识符列表层Id列表对象。子比特流提取的输出可以是子比特流。输入比特流的比特流一致性可向所述进程的子比特流输出提供tId对象等于0到6范围内(包括0和6)的一个值。等于与活动视频参数集中指定的层集合关联的层标识符列表的层Id列表对象可以是一致的比特流。一致的比特流可包括一个或多个nuh_layer_id等于0并且时间ID等于0的编码片分段NAL单元。
视频编码设备可将输出子比特流导出如下。当一个或多个以下的条件为真时,视频编码设备可移除可能nuh_layer_id等于0并且可包括非嵌套缓冲周期SEI消息、非嵌套图片定时SEI消息、或非嵌套解码单元信息SEI消息的SEI NAL单元。所述视频编码设备可在层Id列表对象不包括比特流中(例如约束中)的NAL单元中的nuh_layer_id的值时移除SELNAL单元。所述视频编码设备可在tId对象小于比特流中(例如约束中)的NAL单元中的最大时间Id时移除SEI NAL单元。如果可应用于子比特流的SEI消息需要作为嵌套SEI消息存在于原始比特流中,所述视频编码设备可在“智能”比特流提取器在提取的子比特流中包括适当的非嵌套缓冲图片SEI消息、非嵌套图片定时SEI消息、以及非嵌套解码单元信息SEI消息时移除SEL NAL单元。所述视频编码设备可移除时间Id大于tId对象或nuh_layer_id不在包含在层Id列表对象的值之中的NAL单元。
图8示出了单层分层视频编码结构的示例时间层。时间Id等于0的第一时间层可包括图片POC 810和POC 890;时间Id等于1的第二时间层可包括图片PC 850;时间Id等于2的第三时间层可包括图片POC 830和POC 870;并且时间Id等于3的最后一个时间层可包括图片POC 820、POC 840、POC 860、以及POC 880。在tId对象针对子比特流提取被设为等于2的实例中,来自子比特流提取进程的输出比特流可包括图片POC 810、POC 830、POC 850、POC870和POC 890。
一致的比特流可包括一个或多个nuh_layer_id等于0且时间Id等于0的编码片分段NAL单元。提取进程的输出子比特流可以是一致的比特流。视频编码设备可使用针对SHVC主类的约束来帮助保证nuh_layer_id等于0且时间Id等于0的基层NAL单元被包含在提取的子比特流中,例如在相同的一致性要求应用于HEVC的多视图和可伸缩扩展的情况下。
一个示例约束示出如下。视频编码设备可包括一个或多个接入单元,所述一个或多个接入单元在一致的SHVC比特流中包括nuh_layer_id等于0且时间Id等于0的图片。举例来说,包括nuh_layer_id等于0且时间Id等于0的图片的层可以是在层标识符列表TargetDecLayerIdList中的每一nuh_layer_id的值的层的直接或间接附属层。视频编码设备可使用所述约束来指明同时联播(simulcast)层在SHVC比特流中可用。
图9A是示例通信系统900的系统图,在该示例通信系统900中可实现一个或多个公开的实施方式。该通信系统900可以是将诸如语音、数据、视频、消息发送、广播等之类的内容提供给多个无线用户的多接入系统。该通信系统900可以通过系统资源(包括无线带宽)的共享使得多个无线用户能够访问这些内容。例如,该通信系统900可以使用一种或多种信道接入方法,例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)等等。
如图9A所示,通信系统900可以包括无线发射/接收单元(WTRU)902a、902b、902c、和/或902d(通常或总体上可被称作WTRU 902)、无线电接入网(RAN)903/904/905、核心网906/907/909、公共交换电话网(PSTN)908、因特网910和其他网络912,但可以理解可实施任意数量的WTRU、基站、网络和/或网络元件。WTRU 902a、902b、902c、902d中的每一个可以是被配置成在无线环境中运行和/或通信的任何类型的装置。作为示例,WTRU902a、902b、902c、902d可以被配置成发送和/或接收无线信号,并且可以包括用户设备(UE)、移动站、固定或移动订户单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、便携式电脑、上网本、个人计算机、无线传感器、消费电子产品等等。
通信系统900还可以包括基站914a和基站914b。基站914a、914b中的每一个可以是被配置成与WTRU 902a、902b、902c、902d中的至少一者无线对接,以便于接入一个或多个通信网络(例如,核心网络906/907/909、因特网910和/或网络912)的任何类型的装置。例如,基站914a、914b可以是基站收发信站(BTS)、节点B、e节点B、家用节点B、家用e节点B、站点控制器、接入点(AP)、无线路由器等。尽管基站914a、914b每个均被描述为单个元件,但是可以理解基站914a、914b可以包括任何数量的互连基站和/或网络元件。
基站914a可以是RAN 903/904/905的一部分,该RAN还可以包括其他基站和/或网络元件(未示出),诸如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等。基站914a和/或基站914b可以被配置成发送和/或接收特定地理区域内的无线信号,该特定地理区域可以被称作小区(未示出)。小区还可以被划分成小区扇区。例如与基站914a相关联的小区可以被划分成三个扇区。由此,在一种实施方式中,基站914a可以包括三个收发信机,例如针对所述小区的每个扇区都有一个收发信机。在另一实施方式中,基站914a可以使用多输入多输出(MIMO)技术,并且因此可以使用针对小区的每个扇区的多个收发信机。
基站914a、914b可以通过空中接口915/916/917与WTRU 902a、902b、902c、902d中的一者或多者通信,该空中接口915/916/917可以是任何合适的无线通信链路(例如,射频(RF)、微波、红外(IR)、紫外(UV)、可见光等)。空中接口915/916/917可以使用任何合适的无线电接入技术(RAT)来建立。
更特别地,如上所述,通信系统900可以是多接入系统,并且可以使用一种或多种信道接入方案,例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等。例如,在RAN 903/904/905中的基站914a和WTRU 902a、902b、902c可以实施诸如通用移动电信系统(UMTS)陆地无线电接入(UTRA)之类的无线电技术,其可以使用宽带CDMA(WCDMA)来建立空中接口915/916/917。WCDMA可以包括诸如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)的通信协议。HSPA可以包括高速下行链路分组接入(HSDPA)和/或高速上行链路分组接入(HSUPA)。
在另一实施方式中,基站914a和WTRU 902a、902b、902c可以实施诸如演进型UMTS陆地无线电接入(E-UTRA)之类的无线电技术,其可以使用长期演进(LTE)和/或高级LTE(LTE-A)来建立空中接口915/916/917。
在其他实施方式中,基站914a和WTRU 902a、902b、902c可以实施诸如IEEE 802.16(例如,全球微波互联接入(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、增强型数据速率GSM演进(EDGE)、GSM EDGE(GERAN)之类的无线电技术。
图9A中的基站914b可以是例如无线路由器、家用节点B、家用e节点B或者接入点,并且可以使用任何合适的RAT,以用于促进在诸如商业区、家庭、车辆、校园之类的局部区域的无线连接。基站914b和WTRU 902c、902d可以实施诸如IEEE 802.11之类的无线电技术以建立无线局域网(WLAN)。在另一个实施方式中,基站914b和WTRU 902c、902d可以实施诸如IEEE 802.15之类的无线电技术以建立无线个域网(WPAN)。在另一个实施方式中,基站914b和WTRU 902c、902d可以使用基于蜂窝的RAT(例如,WCDMA、CDMA2000、GSM、LTE、LTE-A等)以建立微微小区(picocell)和毫微微小区(femtocell)。如图9A所示,基站914b可以具有至因特网910的直接连接。由此,基站914b可不经由核心网络906/907/909来接入因特网910。
RAN 903/904/905可以与核心网906/907/909通信,该核心网906/907/909可以是被配置成将语音、数据、应用和/或通过网际协议的语音(VoIP)服务提供到WTRU 902a、902b、902c、902d中的一者或多者的任何类型的网络。例如,核心网906/907/909可以提供呼叫控制、账单服务、基于移动位置的服务、预付费呼叫、因特网连接、视频分配等,和/或执行高级安全性功能,例如用户认证。尽管图9A中未示出,可以理解RAN 903/904/905和/或核心网906/907/909可以直接或间接地与其他RAN进行通信,这些其他RAN使用与RAN 903/904/905相同的RAT或者不同的RAT。例如,除了连接到可以采用E-UTRA无线电技术的RAN 903/904/905,核心网906/907/909也可以与使用GSM无线电技术的其他RAN(未显示)通信。
核心网906/907/909也可以用作WTRU 902a、902b、902c、902d接入PSTN 908、因特网910和/或其他网络912的网关。PSTN 908可以包括提供普通老式电话服务(POTS)的电路交换电话网络。因特网910可以包括使用公共通信协议的互联计算机网络及装置的全球系统,所述公共通信协议例如是传输控制协议(TCP)/网际协议(IP)因特网协议套件中的传输控制协议(TCP)、用户数据报协议(UDP)和网际协议(IP)。所述网络912可以包括由其他服务提供方拥有和/或运营的无线或有线通信网络。例如,网络912可以包括连接到一个或多个RAN的另一核心网,这些RAN可以使用与RAN 903/904/905相同的RAT或者不同的RAT。
通信系统100中的WTRU 902a、902b、902c、902d中的一些或者全部可以包括多模式能力,例如WTRU 902a、902b、902c、902d可以包括用于通过不同的通信链路与不同的无线网络进行通信的多个收发信机。例如,图9A中显示的WTRU 902c可以被配置成与可使用基于蜂窝的无线电技术的基站914a进行通信,并且与可使用IEEE 802无线电技术的基站914b进行通信。
图9B是示例WTRU 902的系统图。如图9B所示,WTRU 902可以包括处理器918、收发信机920、发射/接收元件922、扬声器/麦克风924、键盘926、显示屏/触摸板928、不可移动存储器930、可移动存储器932、电源934、全球定位系统(GPS)芯片组936和其他外围设备938。应该理解的是,在保持与实施方式一致的情况下,WTRU 902可以包括上述元件的任何子组合。同样,实施方式设想基站914a和914b和/或基站914a和914b可以表示的节点(例如但不限于收发信机站(BTS)、节点B、站点控制器、接入点(AP)、家庭节点B、演进型家庭节点B(e节点B)、家庭演进型节点B(HeNB)、家庭演进型节点B网关、以及代理节点等等)可以包括图9B中描述的以及这里描述的元件的一些或全部。
处理器918可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心相关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、任何其它类型的集成电路(IC)、状态机等。处理器918可以执行信号编码、数据处理、功率控制、输入/输出处理和/或使得WTRU 902能够运行在无线环境中的其他任何功能。处理器918可以耦合到收发信机920,该收发信机920可以耦合到发射/接收元件922。尽管图9B中将处理器918和收发信机920描述为独立的组件,但是处理器918和收发信机920可以被一起集成到电子封装或者芯片中。
发射/接收元件922可以被配置成通过空中接口915/916/917将信号发送到基站(例如,基站914a),或者从基站(例如,基站914a)接收信号。例如,在一个实施方式中,发射/接收元件922可以是被配置成发送和/或接收RF信号的天线。在另一个实施方式中,发射/接收元件922可以是被配置成发送和/或接收例如IR、UV或者可见光信号的发射器/检测器。在另一个实施方式中,发射/接收元件922可以被配置成发送和接收RF信号和光信号两者。可以理解发射/接收元件922可以被配置成发送和/或接收无线信号的任意组合。
此外,尽管发射/接收元件922在图9B中被描述为单个元件,但是WTRU902可以包括任何数量的发射/接收元件922。更具体地,WTRU 902可以使用MIMO技术。由此,在一个实施方式中,WTRU 902可以包括两个或更多个发射/接收元件922(例如,多个天线)以用于通过空中接口915/916/917发射和/或接收无线信号。
收发信机920可以被配置成对将由发射/接收元件922发送的信号进行调制,并且被配置成对由发射/接收元件922接收的信号进行解调。如上所述,WTRU 902可以具有多模式能力。由此,收发信机920可以包括多个收发信机以用于使得WTRU 902能够经由多个RAT进行通信,例如UTRA和IEEE802.11。
WTRU 902的处理器918可以被耦合到扬声器/麦克风924、键盘926和/或显示屏/触摸板928(例如,液晶显示(LCD)显示单元或者有机发光二极管(OLED)显示单元),并且可以从上述装置接收用户输入数据。处理器118还可以向扬声器/麦克风924、键盘926和/或显示屏/触摸板928输出用户数据。此外,处理器918可以访问来自任何类型的合适的存储器中的信息,以及向任何类型的合适的存储器中存储数据,所述存储器例如可以是不可移动存储器930和/或可移动存储器932。不可移动存储器930可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘或者任何其他类型的存储器存储装置。可移动存储器932可以包括订户标识模块(SIM)卡、记忆棒、安全数字(SD)存储卡等。在其他实施方式中,处理器918可以访问来自物理上未位于WTRU 902上(例如位于服务器或者家用计算机(未示出)上)的存储器的数据,以及在该存储器中存储数据。
处理器918可以从电源934接收电能,并且可以被配置成将该电能分配给WTRU 902中的其他组件和/或对至WTRU 902中的其他组件的电能进行控制。电源934可以是任何适用于给WTRU 902供电的装置。例如,电源934可以包括一个或多个干电池(镍镉(NiCd)、镍锌(NiZn)、镍氢(NiMH)、锂离子(Li-ion)等)、太阳能电池、燃料电池等。
处理器918还可以耦合到GPS芯片组936,该GPS芯片组936可以被配置成提供关于WTRU 902的当前位置的位置信息(例如,经度和纬度)。作为来自GPS芯片组936的信息的补充或者替代,WTRU 902可以通过空中接口915/916/917从基站(例如,基站914a、914b)接收位置信息,和/或基于从两个或更多个相邻基站接收到的信号的定时(timing)来确定其位置。可以理解,在保持与实施方式一致性的同时,WTRU可以通过任何合适的位置确定方法来获取位置信息。
处理器918还可以耦合到其他外围设备938,该外围设备938可以包括提供附加特征、功能和/或无线或有线连接的一个或多个软件和/或硬件模块。例如,外围设备938可以包括加速度计、电子指南针(e-compass)、卫星收发信机、数字相机(用于照片或者视频)、通用串行总线(USB)端口、振动装置、电视收发信机、免持耳机、蓝牙模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏机模块、因特网浏览器等等。
图9C为根据一种实施方式的RAN 903及核心网906的系统图。如上所述,RAN 903可使用UTRA无线电技术通过空中接口915与WTRU 902a、902b、902c通信。RAN 903还可以与核心网906进行通信。如图9C所示,RAN 903可包括节点B 940a、940b、940c,节点B 940a、940b、940c每一者均可包括一个或多个用于通过空中接口915与WTRU 902a、902b、902c通信的收发信机。节点B 940a、940b、940c中的每一者均可与RAN 903中的特定小区(未示出)相关联。RAN 903还可以包括RNC 942a、942b。可以理解在保持与实施方式一致性的同时,RAN 903可以包括任意数量的节点B和RNC。
如图9C所示,节点B 940a、940b可以与RNC 942a通信。此外,节点B 940c可以与RNC942b通信。节点B 940a、940b、940c可以经由Iub接口与各自的RNC 942a、942b通信。RNC942a、942b可以经由Iur接口彼此通信。RNC 942a、942b的每一个可以被配置成控制其连接的各自的节点B940a、940b、940c。此外,RNC 942a、942b的每一个可以被配制成执行或支持其他功能,例如外环功率控制、负载控制、准许控制、分组调度、切换控制、宏分集、安全功能、数据加密等。
图9C中示出的核心网906可以包括媒体网关(MGW)944、移动交换中心(MSC)946、服务GPRS支持节点(SGSN)948和/或网关GPRS支持节点(GGSN)950。尽管前述每一个元件被描述为核心网906的一部分,但这些元件的任何一个可以由除核心网络运营方之外的实体所拥有和/或操作。
RAN 903中的RNC 942a可以经由IuCS接口连接到核心网906中的MSC 946。MSC 946可以连接到MGW 944。MSC 946和MGW 944可以给WTRU 902a、902b、902c提供对例如PSTN 908的电路交换网络的接入,以促进WTRU 902a、902b和/或902c与传统路线通信装置之间的通信。
RAN 903中的RNC 902a还可以经由IuPS接口连接到核心网906/907/909中的SGSN948。SGSN 948可以连接到GGSN 950。SGSN 948和GGSN 950可以给WTRU 902a、902b、902c提供对例如因特网910的分组交换网络的接入,以促进WTRU 902a、902b、902c与IP使能装置之间的通信。
如上所述,核心网906还可以连接到网络912,网络912可以包括其他服务提供方拥有和/或运营的其他有线或无线网络。
图9D为根据一种实施方式的RAN 904及核心网907的系统图。如上所述,RAN 904可使用E-UTRA无线电技术通过空中接口916与WTRU 902a、902b、902c通信。RAN 904还可以与核心网907进行通信。
RAN 904可包括e节点B 960a、960b、960c,但可以理解RAN 904可以包括任意数量的e节点B而保持与实施方式一致。e节点B 960a、960b、960c每一者均可包括用于通过空中接口916与WTRU 902a、902b、902c通信的一个或多个收发信机。在一个实施方式中,e节点B960a、960b、960c可以实施MIMO技术。从而,例如e节点B 960a可以使用多个天线来向WTRU902a发射无线信号并从WTRU 902a接收无线信号。
e节点B 960a、960b、960c中的每一个可以与特定小区(未示出)相关联,并可被配置成处理无线电资源管理决定、切换决定、在上行链路和/或下行链路中对用户进行调度等。如图9D所示,e节点B 960a、960b、960c可以通过X2接口互相通信。
图9D中示出的核心网907可以包括移动性管理网关(MME)962、服务网关964和分组数据网(PDN)网关966。虽然上述元件中的每一个都被描述为核心网907的一部分,这些元件中的任何一个可被不同于核心网运营商的实体所拥有和/或操作。
MME 962可经由S1接口连接到RAN 904中的e节点B 160a、160b、160c中的每一个,并可充当控制节点。例如,MME 962可负责认证WTRU 902a、902b、902c的用户、承载激活/去激活、在WTRU 902a、902b、902c的初始附着期间选择特定服务网关,等等。MME 942还可提供控制平面功能,以用于在RAN 904和使用其它无线电技术(比如GSM或WCDMA)的其它RAN(未示出)之间进行切换。
服务网关964可经由S1接口连接到RAN 904中的e节点B 960a、960b、960c中的每一个。服务网关964可以一般地向/从WTRU 902a、902b、902c路由并转发用户数据分组。服务网关964还可执行其它功能,比如在e节点B间切换期间锚定用户平面、当下行链路数据对WTRU902a、902b、902c是可用的时触发寻呼、管理并存储WTRU 902a、902b、902c的上下文,等等。
服务网关964还可连接到PDN 966,其可向WTRU 902a、902b、902c提供到分组交换网络(比如因特网910)的接入,以促进WTRU 902a、902b、902c和IP使能装置之间的通信。
核心网907可以促进与其它网络的通信。例如,核心网907可以向WTRU902a、902b、902c提供到电路交换网络(比如PSTN 908)的接入,以促进WTRU 902a、902b、902c和传统陆线通信装置之间的通信。例如,核心网907可以包括充当核心网907与PSTN 908之间的接口的IP网关(例如IP多媒体子系统(IMS)服务器)或者可以与该IP网关通信。此外,核心网907可以向WTRU 902a、902b、902c提供到网络912的接入,网络912可包括由其他服务提供商拥有和/或操作的其它有线或无线网络。
图9E是根据一种实施方式的RAN 905和核心网909的系统图。RAN 905可以是利用IEEE 802.16无线电技术通过空中接口917与WTRU 902a、902b、902c进行通信的接入服务网(ASN)。如将在下面详细描述的,WTRU 902a、902b、902c、RAN 905和核心网109中的不同功能实体之间的通信链路可被定义为参考点。
如图9E中所示,RAN 905可包括基站980a、980b、980c和ASN网关982,但可以理解在保持与实施方式一致性的同时RAN 905可以包括任意数量的基站和ASN网关。基站980a、980b、980c每一个可以与RAN 905中的特定小区(未示出)相关联并且均可包括用于通过空中接口917与WTRU 902a、902b、902c通信的一个或多个收发信机。在一种实施方式中,基站980a、980b、980c可以实施MIMO技术。从而,举例来讲,基站980a可以使用多个天线来向WTRU902a发射无线信号并从WTRU 902a接收无线信号。基站980a、980b、980c还可提供移动性管理功能,比如切换触发、隧道建立、无线电资源管理、流量分类、服务质量(QoS)策略执行等。ASN网关942可以充当流量聚集点并可负责寻呼、缓存订户简档、路由到核心网909等。
WTRU 902a、902b、902c与RAN 905之间的空中接口917可被定义为实施IEEE802.16规范的R1参考点。此外,WTRU 902a、902b、902c中的每一个可与核心网909建立逻辑接口(未示出)。WTRU 902a、902b、902c和核心网909之间的逻辑接口可被定义为R2参考点,其可用于认证、授权、IP主机配置管理和/或移动性管理。
基站980a、980b、980c中的每一个之间的通信链路可被定义为包括用于促进WTRU切换和基站之间的数据转移的协议的R8参考点。基站980a、980b、980c和ASN网关982之间的通信链路可被定义为R6参考点。R6参考点可包括用于促进基于与WTRU 902a、902b、902c中的每一个相关联的移动性事件的移动性管理的协议。
如图9E所示,RAN 905可连接到核心网909。RAN 905和核心网909之间的通信链路可被定义为例如包括用于促进数据转移和移动性管理能力的协议的R3参考点。核心网9099可包括移动性IP本地代理(MIP-HA)984、认证授权记账(AAA)服务器986、和网关988。虽然上述元件中的每一个都被描述为核心网909的一部分,但可以理解这些元件中的任何一个可被不同于核心网运营商的实体所拥有和/或操作。
所述MIP-HA对于IP地址关联是可靠的,并且可使得WTRU 902a、902b、902c在不同的ASN和/或不同的核心网络之间路由。所述MIP-HA 984可向WTRU 902a、902b、902c提供到分组交换网络(例如英特网910)的接入,以便于WTRU 902a、902b、902c与IP使能设备之间的通信。所述AAA服务器986可用于用户认证以及支持用户服务。网关988可促进与其他网络的交互。例如,网关988可向WTRU 902a、902b、902c提供到电路交换网络(例如PSTN 908)的接入,以便于WTRU 902a、902b、902c与传统陆线通信设备之间的通信。此外,网关988向WTRU902a、902b、902c提供到网络912的接入,该网络912可包括由其他服务提供商所拥有和/或操作的其他有线或无线网络。
虽然未在图9E中示出,应当理解的是,RAN 905可与其他ASN连接,并且核心网络909可与其他核心网络连接。RAN 905与其他ASN之间的通信链路可被定义为R4参考点,其可包括用于协调WTRU 902a、902b、902c在RAN 905与其他ASN之间的移动性的协议。核心网络909与其他核心网络之间的通信链路可被定义为R5参考点,其可包括用于促进家用核心网络与受访核心网络之间的交互的协议。
此处描述的方法和手段可适用于任意组合,并且可适用于其他无线技术及其他服务。
WTRU可意指物理设备的标识或用户标识(例如订阅相关标识,例如MSISDN、SIPURI等)。WTRU可意指基于应用的标识,例如针对每一应用使用的用户名。
此处所述的方法可在结合至计算机可读存储介质中的计算机程序、软件和/或固件中实现,以由计算机或处理器执行。计算机可读介质的示例包括电子信号(通过有线或无线连接传送)和计算机可读存储媒介。计算机可读存储媒介的例子包括但不限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、缓存存储器、半导体存储设备、例如内置磁盘和可移动磁盘的磁媒介、磁光媒介和光媒介(例如CD-ROM盘和数字多用途盘(DVD))。与软件相关联的处理器可被用于实施在WTRU、UE、终端、基站、RNC或任何主机中使用的射频收发信机。

Claims (16)

1.一种视频编码设备,该视频编码设备包括:
处理器,被配置成:
接收包括序列参数集SPS和具有视频表现格式列表的视频参数集VPS的视频比特流;
基于所述SPS中的更新视频表现格式标记确定与所述SPS关联的层的视频表现格式,其中:
在所述更新视频表现格式标记指示所述SPS中存在表现格式索引的条件下,所述视频表现格式基于所述SPS中的所述表现格式索引根据所述VPS中的视频表现格式列表来确定,以及
在所述SPS中不存在表现格式索引的条件下,所述视频表现格式根据缺省视频表现格式来确定。
2.根据权利要求1所述的视频编码设备,其中所述处理器被配置成:
基于所述SPS中的更新视频表现格式标记确定所述SPS中是否存在所述表现格式索引,其中在所述更新视频表现格式标记等于1的条件下,确定所述SPS中存在所述表现格式索引,并且在所述更新视频表现格式标记等于0的条件下,确定所述SPS中不存在所述表现格式索引。
3.根据权利要求1所述的视频编码设备,其中所述缺省视频表现格式是在所述VPS中针对层指定的缺省视频表现格式。
4.根据权利要求1所述的视频编码设备,其中所述表现格式索引在包含端点的0与表现格式的VPS号的值减1之间的范围内。
5.一种视频编码方法,该视频编码方法包括:
接收包括序列参数集SPS和具有视频表现格式列表的视频参数集VPS的视频比特流;
基于所述SPS中的更新视频表现格式标记确定与所述SPS关联的层的视频表现格式,其中:
在所述更新视频表现格式标记指示所述SPS中存在表现格式索引的条件下,基于所述SPS中的所述表现格式索引根据所述VPS中的视频表现格式列表确定所述视频表现格式,以及
在所述SPS中不存在表现格式索引的条件下,根据缺省视频表现格式确定所述视频表现格式。
6.根据权利要求5所述的方法,该方法包括:
基于所述SPS中的更新视频表现格式标记确定所述SPS中是否存在所述表现格式索引,其中在所述更新视频表现格式标记等于1的条件下,确定所述SPS中存在所述表现格式索引,并且在所述更新视频表现格式标记等于0的条件下,确定所述SPS中不存在所述表现格式索引。
7.根据权利要求5所述的方法,其中所述缺省视频表现格式是在所述VPS中针对层指定的缺省视频表现格式。
8.根据权利要求5所述的方法,其中所述表现格式索引在包含端点的0与表现格式的VPS号的值减1之间的范围内。
9.一种视频编码设备,该视频编码设备包括:
处理器,被配置成:
为与序列参数集SPS关联的层分派表现格式;
基于为与所述SPS关联的层分派的表现格式确定是否在所述SPS中包含表现格式索引,其中:
在被分派的表现格式为缺省表现格式的条件下,所述表现格式索引不被包含在所述SPS中,和
在被分派的表现格式在视频参数集VPS中被指定的条件下,
所述表现格式索引被包含在所述SPS中;以及
基于所述确定,设置更新视频表现格式标记以指示所述表现格式索引是否被包含在所述SPS中。
10.根据权利要求9所述的视频编码设备,其中所述处理器被配置成将所述更新视频表现格式标记设为等于1,以指示所述SPS中存在所述表现格式索引。
11.根据权利要求9所述的视频编码设备,其中所述处理器被配置成将所述更新视频表现格式标记设为等于0,以指示所述SPS中不存在所述表现格式索引。
12.根据权利要求9所述的视频编码设备,其中所述处理器被配置成在视频比特流中以信号通告所设置的更新视频表现格式标记。
13.一种视频编码方法,该视频编码方法包括:
为与序列参数集SPS关联的层分派表现格式;
基于为与所述SPS关联的层分派的表现格式确定是否在所述SPS中包含表现格式索引,其中:
在被分派的表现格式为缺省表现格式的条件下,所述表现格式索引不被包含在所述SPS中,和
在被分派的表现格式在视频参数集VPS中被指定的条件下,所述表现格式索引被包含在所述SPS中;以及
基于所述确定,设置更新视频表现格式标记以指示所述表现格式索引是否被包含在所述SPS中。
14.根据权利要求13所述的方法,其中将所述更新视频表现格式标记设为等于1,以指示所述SPS中存在所述表现格式索引。
15.根据权利要求13所述的方法,其中将所述更新视频表现格式标记设为等于0,以指示所述SPS中不存在所述表现格式索引。
16.根据权利要求13所述的方法,其中在视频比特流中以信号通告所设置的更新视频表现格式标记。
CN201480055942.8A 2013-10-11 2014-10-10 Hevc扩展的高级句法 Active CN105706451B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910117334.XA CN109905703B (zh) 2013-10-11 2014-10-10 Hevc扩展的高级句法

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361889787P 2013-10-11 2013-10-11
US201361889919P 2013-10-11 2013-10-11
US61/889,787 2013-10-11
US61/889,919 2013-10-11
PCT/US2014/060136 WO2015054634A2 (en) 2013-10-11 2014-10-10 High level syntax for hevc extensions

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910117334.XA Division CN109905703B (zh) 2013-10-11 2014-10-10 Hevc扩展的高级句法

Publications (2)

Publication Number Publication Date
CN105706451A CN105706451A (zh) 2016-06-22
CN105706451B true CN105706451B (zh) 2019-03-08

Family

ID=51868303

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910117334.XA Active CN109905703B (zh) 2013-10-11 2014-10-10 Hevc扩展的高级句法
CN201480055942.8A Active CN105706451B (zh) 2013-10-11 2014-10-10 Hevc扩展的高级句法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910117334.XA Active CN109905703B (zh) 2013-10-11 2014-10-10 Hevc扩展的高级句法

Country Status (9)

Country Link
US (3) US9648333B2 (zh)
EP (2) EP3056004A2 (zh)
JP (3) JP6212212B2 (zh)
KR (2) KR102143707B1 (zh)
CN (2) CN109905703B (zh)
IL (1) IL245013B (zh)
MY (1) MY178305A (zh)
TW (2) TWI646825B (zh)
WO (1) WO2015054634A2 (zh)

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210129266A (ko) * 2012-07-09 2021-10-27 브이아이디 스케일, 인크. 멀티 레이어 비디오 코딩용 코덱 아키텍처
US10284858B2 (en) * 2013-10-15 2019-05-07 Qualcomm Incorporated Support of multi-mode extraction for multi-layer video codecs
WO2015099400A1 (ko) 2013-12-24 2015-07-02 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
CN104754358B (zh) * 2013-12-27 2019-02-19 中兴通讯股份有限公司 码流的生成和处理方法、装置及系统
US9654794B2 (en) * 2014-01-03 2017-05-16 Qualcomm Incorporated Methods for coding an inter-layer reference picture set (RPS) and coding end of bitstream (EOB) network access layer (NAL) units in multi-layer coding
US9832481B2 (en) * 2014-01-03 2017-11-28 Qualcomm Incorporated Support of base layer of a different codec in multi-layer video coding
US20150195549A1 (en) * 2014-01-08 2015-07-09 Qualcomm Incorporated Support of non-hevc base layer in hevc multi-layer extensions
US10091553B1 (en) * 2014-01-10 2018-10-02 Sprint Communications Company L.P. Video content distribution system and method
KR20150110295A (ko) * 2014-03-24 2015-10-02 주식회사 케이티 멀티 레이어 비디오 신호 인코딩/디코딩 방법 및 장치
JP6150134B2 (ja) * 2014-03-24 2017-06-21 ソニー株式会社 画像符号化装置および方法、画像復号装置および方法、プログラム、並びに記録媒体
US9894370B2 (en) 2014-03-24 2018-02-13 Qualcomm Incorporated Generic use of HEVC SEI messages for multi-layer codecs
US10432951B2 (en) * 2014-06-24 2019-10-01 Qualcomm Incorporated Conformance and inoperability improvements in multi-layer video coding
WO2016098056A1 (en) 2014-12-18 2016-06-23 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
JP6909223B2 (ja) 2016-01-25 2021-07-28 コニンクリーケ・ケイピーエヌ・ナムローゼ・フェンノートシャップ 空間スケーラブル・ビデオ・コーディング
US10623755B2 (en) * 2016-05-23 2020-04-14 Qualcomm Incorporated End of sequence and end of bitstream NAL units in separate file tracks
CN106162180A (zh) 2016-06-30 2016-11-23 北京奇艺世纪科技有限公司 一种图像编解码方法及装置
CN106658225B (zh) * 2016-10-31 2019-11-26 日立楼宇技术(广州)有限公司 视频扩展码设置及视频播放方法和系统
US10904521B2 (en) 2017-03-03 2021-01-26 Qualcomm Incorporated Extracting MCTS sub-bitstreams for video coding
CN107124571B (zh) * 2017-04-14 2020-01-14 浙江宇视科技有限公司 录像存储方法及装置
CN111937401B (zh) 2018-04-13 2022-08-16 皇家Kpn公司 基于块级超分辨率的视频编码的方法和装置
KR102030630B1 (ko) * 2018-04-30 2019-11-08 서울과학기술대학교 산학협력단 하이브리드 망 기반의 스테레오스코픽 3차원 360도 가상 현실 서비스 제공 시스템
CN112771885B (zh) * 2018-09-18 2023-04-25 诺基亚技术有限公司 用于针对视频编码的非二进制简档约束信令的方法和装置
US11553210B2 (en) 2018-12-07 2023-01-10 Interdigital Vc Holdings, Inc. Managing coding tools combinations and restrictions
BR112021016689A2 (pt) 2019-03-08 2021-10-13 Beijing Bytedance Network Technology Co., Ltd. Método de processamento de vídeo, aparelho em um sistema de vídeo, e, produto de programa de computador armazenado em uma mídia legível por computador não transitória
JP2022525399A (ja) * 2019-03-11 2022-05-13 ヴィド スケール インコーポレイテッド サブピクチャ適応解像度変更のための方法および装置
US20200322656A1 (en) * 2019-04-02 2020-10-08 Nbcuniversal Media, Llc Systems and methods for fast channel changing
BR112021019679A2 (pt) 2019-04-18 2021-12-07 Beijing Bytedance Network Tech Co Ltd Método para processamento de mídia visual, aparelho codificador de vídeo, aparelho decodificador de vídeo, e, mídia legível por computador
KR102630411B1 (ko) * 2019-04-20 2024-01-29 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 조인트 코딩을 위한 구문 요소의 시그널링
CN113711610B (zh) 2019-04-23 2024-04-16 北京字节跳动网络技术有限公司 降低跨分量依赖性的方法
CN117221558A (zh) 2019-05-08 2023-12-12 北京字节跳动网络技术有限公司 跨分量编解码的适用性条件
CN113785574B (zh) 2019-05-30 2022-10-11 北京字节跳动网络技术有限公司 色度分量的自适应环路滤波
US11166033B2 (en) * 2019-06-06 2021-11-02 Qualcomm Incorporated Adaptation parameter set in access unit in video coding
KR20220024006A (ko) 2019-06-22 2022-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 스케일링을 위한 신택스 요소
CA3145175A1 (en) * 2019-06-24 2020-12-30 Interdigital Vc Holdings, Inc. Method and apparatus for signaling decoding data using high level syntax elements
CN117395396A (zh) 2019-07-07 2024-01-12 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
CA3150261A1 (en) * 2019-09-06 2021-03-11 Huawei Technologies Co., Ltd. HIGH LEVEL SIGNALING METHOD AND APPARATUS FOR WEIGHTED PREDICTION
US11418813B2 (en) 2019-09-20 2022-08-16 Tencent America LLC Signaling of inter layer prediction in video bitstream
US11109069B2 (en) * 2019-09-20 2021-08-31 Tencent America LLC Signaling of scalability parameters in video bitstream
EP4022772A4 (en) * 2019-09-24 2022-11-23 Huawei Technologies Co., Ltd. LAYER-BASED PARAMETER SET NAL UNIT CONSTRAINTS
AU2020319903A1 (en) * 2019-10-07 2022-05-19 Huawei Technologies Co., Ltd. Avoidance of redundant signaling in multi-layer video bitstreams
EP4062319A4 (en) 2019-12-26 2023-01-11 ByteDance Inc. REPORTING DECODED FRAME BUFFER PARAMETERS IN LAYERED VIDEO
MX2022007502A (es) 2019-12-26 2022-07-04 Bytedance Inc Tecnicas para implementar un orden de decodificacion dentro de una imagen codificada.
WO2021134015A1 (en) 2019-12-26 2021-07-01 Bytedance Inc. Profile, tier and layer indication in video coding
EP4066499A4 (en) 2019-12-27 2023-01-11 ByteDance Inc. SYNTAX FOR SIGNALING VIDEO IMAGES
US11825107B2 (en) * 2019-12-27 2023-11-21 Tencent America LLC Method for parameter set reference in coded video stream
BR112022013032A2 (pt) * 2019-12-31 2023-03-14 Huawei Tech Co Ltd Codificador, decodificador e métodos e aparelho correspondentes
CN115004669A (zh) 2020-01-09 2022-09-02 字节跳动有限公司 不同sei消息的解码顺序
WO2021170091A1 (en) 2020-02-29 2021-09-02 Beijing Bytedance Network Technology Co., Ltd. Constrains for high level syntax elements
US20230319302A1 (en) * 2020-03-31 2023-10-05 Lg Electronics Inc. Image encoding/decoding method and apparatus for determining sublayer on basis of whether or not to make reference between layers, and method for transmitting bitstream
WO2021233449A1 (en) * 2020-05-22 2021-11-25 Beijing Bytedance Network Technology Co., Ltd. Reserved bits in general constraint information of a video
WO2021237184A1 (en) 2020-05-22 2021-11-25 Bytedance Inc. Signaling of display information in video bitstreams
US11418814B2 (en) * 2020-05-22 2022-08-16 Tencent America LLC Constraint on syntax elements for still picture profiles
CA3179644A1 (en) 2020-05-22 2021-11-25 Ye-Kui Wang Scalable nested sei message handling in video sub-bitstream extraction process
KR20230013264A (ko) 2020-05-22 2023-01-26 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 서브픽처 서브-비트스트림 추출 개선들
WO2021252533A1 (en) 2020-06-09 2021-12-16 Bytedance Inc. Sub-bitstream extraction of multi-layer video bitstreams
KR20230019848A (ko) * 2020-06-09 2023-02-09 바이트댄스 아이엔씨 서브픽처 서브비트스트림 추출 프로세스 향상들
KR20230024341A (ko) * 2020-06-10 2023-02-20 엘지전자 주식회사 최대 시간 식별자에 기반하여 서브 비트스트림 추출과정을 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 컴퓨터 판독가능한 기록매체
CN112749548B (zh) * 2020-11-02 2024-04-26 万齐智 一种基于规则的中文结构化金融事件缺省补全抽取方法
US20230102088A1 (en) * 2021-09-29 2023-03-30 Tencent America LLC Techniques for constraint flag signaling for range extension
WO2024063559A1 (ko) * 2022-09-23 2024-03-28 엘지전자 주식회사 프로파일을 정의하는 하이 레벨 신택스에 기반한 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101536527A (zh) * 2006-07-11 2009-09-16 诺基亚公司 可缩放视频编码和解码
CN101548548A (zh) * 2006-10-20 2009-09-30 诺基亚公司 用于在视频编码中提供画面输出指示的系统和方法

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2386275B (en) * 2002-03-05 2004-03-17 Motorola Inc Scalable video transmissions
JP5055355B2 (ja) * 2006-03-30 2012-10-24 エルジー エレクトロニクス インコーポレイティド ビデオ信号のデコーディング/エンコーディング方法及び装置
US20080089411A1 (en) * 2006-10-16 2008-04-17 Nokia Corporation Multiple-hypothesis cross-layer prediction
WO2008056959A1 (en) * 2006-11-09 2008-05-15 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal
KR100896291B1 (ko) * 2006-11-17 2009-05-07 엘지전자 주식회사 비디오 신호의 디코딩/인코딩 방법 및 장치
US20100189182A1 (en) * 2009-01-28 2010-07-29 Nokia Corporation Method and apparatus for video coding and decoding
US8745677B2 (en) * 2009-06-12 2014-06-03 Cygnus Broadband, Inc. Systems and methods for prioritization of data for intelligent discard in a communication network
US9053562B1 (en) * 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
EP2596633B1 (en) * 2010-07-20 2016-11-23 Nokia Technologies Oy A media streaming apparatus
CN103299619A (zh) * 2010-09-14 2013-09-11 汤姆逊许可公司 遮挡数据的压缩方法和装置
US20120075436A1 (en) * 2010-09-24 2012-03-29 Qualcomm Incorporated Coding stereo video data
CN103430458B (zh) * 2011-03-10 2016-03-02 维德约股份有限公司 可伸缩视频编码的依存参数集
US20130170561A1 (en) * 2011-07-05 2013-07-04 Nokia Corporation Method and apparatus for video coding and decoding
US9451252B2 (en) * 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
KR101669524B1 (ko) * 2012-02-01 2016-11-09 노키아 테크놀로지스 오와이 비디오 코딩을 위한 방법 및 장치
PT2822276T (pt) * 2012-02-29 2018-12-18 Lg Electronics Inc Processo de predição inter-camadas e dispositivo que o utiliza
US9503720B2 (en) * 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
CN104205813B (zh) * 2012-04-06 2018-05-08 维德约股份有限公司 分层视频编码的等级信令
JP6057395B2 (ja) * 2012-04-16 2017-01-11 ノキア テクノロジーズ オーユー ビデオ符号化方法および装置
KR101682999B1 (ko) * 2012-04-16 2016-12-20 노키아 테크놀로지스 오와이 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
KR20130116782A (ko) * 2012-04-16 2013-10-24 한국전자통신연구원 계층적 비디오 부호화에서의 계층정보 표현방식
US20130287093A1 (en) * 2012-04-25 2013-10-31 Nokia Corporation Method and apparatus for video coding
US9674532B2 (en) * 2012-06-24 2017-06-06 Lg Electronics Inc. Image decoding method using information on a random access picture and apparatus using same
US20140003504A1 (en) * 2012-07-02 2014-01-02 Nokia Corporation Apparatus, a Method and a Computer Program for Video Coding and Decoding
WO2014006266A1 (en) * 2012-07-02 2014-01-09 Nokia Corporation Method and apparatus for video coding
WO2014009603A1 (en) * 2012-07-02 2014-01-16 Nokia Corporation Method and apparatus for video coding
CN110087091B (zh) * 2012-08-06 2021-11-12 Vid拓展公司 多层视频编码中用于空间层的采样栅格信息
WO2014038906A1 (ko) * 2012-09-09 2014-03-13 엘지전자 주식회사 영상 복호화 방법 및 이를 이용하는 장치
KR102160242B1 (ko) * 2012-09-09 2020-09-25 엘지전자 주식회사 영상 복호화 방법 및 이를 이용하는 장치
SG11201502194QA (en) * 2012-09-21 2015-04-29 Nokia Technologies Oy Method and apparatus for video coding
US20140085415A1 (en) * 2012-09-27 2014-03-27 Nokia Corporation Method and apparatus for video coding
KR101775250B1 (ko) * 2012-09-28 2017-09-05 노키아 테크놀로지스 오와이 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
KR20150063135A (ko) * 2012-09-28 2015-06-08 노키아 테크놀로지스 오와이 비디오 코딩 및 디코딩을 위한 장치, 방법 및 컴퓨터 프로그램
CN104685885B (zh) * 2012-09-30 2018-09-07 华为技术有限公司 一种在参数集中用信号发送可缩放性信息的方法
WO2014072571A1 (en) * 2012-10-01 2014-05-15 Nokia Corporation Method and apparatus for scalable video coding
WO2014058177A1 (ko) * 2012-10-08 2014-04-17 삼성전자 주식회사 멀티 레이어 비디오 부호화 방법 및 장치, 멀티 레이어 비디오 복호화 방법 및 장치
US20150245063A1 (en) * 2012-10-09 2015-08-27 Nokia Technologies Oy Method and apparatus for video coding
US20140098883A1 (en) * 2012-10-09 2014-04-10 Nokia Corporation Method and apparatus for video coding
US10805605B2 (en) * 2012-12-21 2020-10-13 Telefonaktiebolaget Lm Ericsson (Publ) Multi-layer video stream encoding and decoding
US9774927B2 (en) * 2012-12-21 2017-09-26 Telefonaktiebolaget L M Ericsson (Publ) Multi-layer video stream decoding
US10419778B2 (en) * 2013-01-04 2019-09-17 Sony Corporation JCTVC-L0227: VPS_extension with updates of profile-tier-level syntax structure
US9351009B2 (en) * 2013-04-05 2016-05-24 Sharp Kabushiki Kaisha Marking pictures for inter-layer prediction
US9532067B2 (en) * 2013-04-05 2016-12-27 Sharp Kabushiki Kaisha Decoding of inter-layer reference picture set and reference picture list construction
US9807421B2 (en) * 2013-04-05 2017-10-31 Sharp Kabushiki Kaisha NAL unit type restrictions
US20140301477A1 (en) * 2013-04-07 2014-10-09 Sharp Laboratories Of America, Inc. Signaling dpb parameters in vps extension and dpb operation
US9591321B2 (en) * 2013-04-07 2017-03-07 Dolby International Ab Signaling change in output layer sets
CN103237213B (zh) * 2013-04-08 2016-03-30 华为技术有限公司 视频编码方法和视频解码方法及相关装置
CN105210370B (zh) 2013-07-10 2019-04-12 夏普株式会社 运动图像解码装置
US20150373350A1 (en) * 2014-06-20 2015-12-24 Qualcomm Incorporated Temporal motion vector prediction (tmvp) indication in multi-layer codecs

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101536527A (zh) * 2006-07-11 2009-09-16 诺基亚公司 可缩放视频编码和解码
CN101548548A (zh) * 2006-10-20 2009-09-30 诺基亚公司 用于在视频编码中提供画面输出指示的系统和方法

Also Published As

Publication number Publication date
TW201531090A (zh) 2015-08-01
JP6515159B2 (ja) 2019-05-15
US20200107027A1 (en) 2020-04-02
IL245013B (en) 2020-04-30
US20170214923A1 (en) 2017-07-27
JP6212212B2 (ja) 2017-10-11
KR20160068936A (ko) 2016-06-15
US10547853B2 (en) 2020-01-28
CN105706451A (zh) 2016-06-22
EP3989585A1 (en) 2022-04-27
KR102143707B1 (ko) 2020-08-11
JP2018026833A (ja) 2018-02-15
US9648333B2 (en) 2017-05-09
MY178305A (en) 2020-10-07
KR20180069136A (ko) 2018-06-22
WO2015054634A2 (en) 2015-04-16
WO2015054634A3 (en) 2015-06-11
TW201921933A (zh) 2019-06-01
EP3056004A2 (en) 2016-08-17
KR101869882B1 (ko) 2018-06-25
CN109905703B (zh) 2023-11-17
IL245013A0 (en) 2016-05-31
CN109905703A (zh) 2019-06-18
TWI646825B (zh) 2019-01-01
TWI704801B (zh) 2020-09-11
US20150103886A1 (en) 2015-04-16
JP2017500764A (ja) 2017-01-05
JP2019146239A (ja) 2019-08-29

Similar Documents

Publication Publication Date Title
CN105706451B (zh) Hevc扩展的高级句法
JP6574223B2 (ja) 複数レイヤビデオ符号化のためのコーデックアーキテクチャ
CN105874804A (zh) 针对hevc扩展的子比特流提取过程
US10616597B2 (en) Reference picture set mapping for standard scalable video coding
CN110611814A (zh) 用于可扩展视频编码的运动信息信令

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant