CN107770550B - 用于发送消息和缓冲比特流的电子设备 - Google Patents

用于发送消息和缓冲比特流的电子设备 Download PDF

Info

Publication number
CN107770550B
CN107770550B CN201711111220.1A CN201711111220A CN107770550B CN 107770550 B CN107770550 B CN 107770550B CN 201711111220 A CN201711111220 A CN 201711111220A CN 107770550 B CN107770550 B CN 107770550B
Authority
CN
China
Prior art keywords
initial
picture
electronic device
cra
cpb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711111220.1A
Other languages
English (en)
Other versions
CN107770550A (zh
Inventor
萨琴·G·德希潘德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN107770550A publication Critical patent/CN107770550A/zh
Application granted granted Critical
Publication of CN107770550B publication Critical patent/CN107770550B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/50Queue scheduling
    • H04L47/56Queue scheduling implementing delay-aware scheduling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/756Media network packet handling adapting media to device capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • H04N19/433Hardware specially adapted for motion estimation or compensation characterised by techniques for memory access
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

描述了一种用于发送消息的电子设备。该电子设备包括处理器和存储在存储器中的指令,该存储器与处理器进行电子通信。电子设备确定第一图片是否是随机访问图片。如果该第一图片是随机访问图片,则电子设备还确定是否存在先行图片。如果存在先行图片,则电子设备还生成包括指示存在用于开始随机访问图片的初始编码图片缓冲器(CPB)移除延迟参数的标记和用于开始随机访问图片的初始CPB移除延迟参数在内的消息。该电子设备另外还发送该消息。

Description

用于发送消息和缓冲比特流的电子设备
本申请是于2014年10月11日递交的申请号为201380019557.3 的中国国家申请“用于发送消息和缓冲比特流的电子设备”的分案申请。
技术领域
本公开总体上涉及电子设备。更具体地,本公开涉及用于发送消息并缓冲比特流的电子设备。
背景技术
为了满足消费者需求并改善便携性和便利性,电子设备变得越来越小并且越来越强大。消费者已经变得依赖电子设备,并期望增加的功能性。电子设备的一些示例包括台式计算机、膝上型计算机、蜂窝电话、智能电话、媒体播放器、集成电路等。
一些电子设备用于处理并显示数字媒体。例如,便携式电子设备现在允许几乎在消费者所处的任何位置使用数字媒体。此外,一些电子设备可以提供对数字媒体内容的下载或流传输,以供消费者使用和欣赏。
越来越受欢迎的数字媒体呈现出若干问题。例如,有效地表示用于存储、传输和快速回放的高质量数字媒体呈现出若干挑战。如从本讨论中可以看出,以改善后的性能有效表示数字媒体的系统和方法是有利的。
发明内容
技术问题
希望提供用于表示数字媒体的更有效的技术。
解决方案
本发明的一方面提供了一种用于发送消息的电子设备,包括:
处理器;
存储器,与所述处理器进行电子通信;
指令,存储在所述存储器中,所述指令可执行以:
(a)确定第一图片是否是随机访问图片(random access picture);
(b)如果第一图片是随机访问图片,则确定是否存在先行图片(leadingpicture);
(c)如果存在先行图片,则生成包括指示是否存在用于开始随机访问图片的初始编码图片缓冲器(CPB)移除延迟参数加的标记和用于开始随机访问图片的初始CPB移除延迟参数在内的消息;以及
(d)发送所述消息。
本发明的另一方面提供了一种用于缓冲比特流的电子设备,包括:
处理器;
存储器,与所述处理器进行电子通信;
指令,存储在所述存储器中,所述指令可执行以:
(a)接收消息;
(b)确定第一访问单元是否是指示随机访问图片的访问单元,是否不存在先行图片,以及标记是否指示在该消息中存在用于开始随机访问图片的初始编码图片缓冲器(CPB) 移除延迟参数;
(c)移除第一访问单元;以及
(d)对第一访问单元进行解码。
本发明的另一方面提供了一种用于通过电子设备发送消息的方法,包括:
确定第一图片是否是随机访问图片;
如果第一图片是随机访问图片,则确定是否存在先行图片;
如果存在先行图片,则生成包括指示是否存在用于开始随机访问图片的初始编码图片缓冲器(CPB)移除延迟参数的标记和用于开始随机访问图片的初始CPB移除延迟参数在内的消息;以及
发送所述消息。
本发明的另一方面提供了一种用于通过电子设备缓冲比特流的方法,包括:
接收消息;
确定第一访问单元是否是指示随机访问图片的访问单元,是否不存在先行图片,以及标记是否指示存在用于开始随机访问图片的初始编码图片缓冲器(CPB)移除延迟参数;
移除第一访问单元;以及
对第一访问单元进行解码。
本发明的有利效果
当结合附图考虑本发明的以下详细描述时,将更容易理解本发明的上述和其它目的、特征和优点。
附图说明
图1是示出了用于发送消息并缓冲比特流的系统和方法可以在其中实现的一个或多个电子设备的示例的框图;
图2是示出了用于发送消息的方法的一种配置的流程图;
图3是示出了用于发送消息的方法的更具体配置的流程图;
图4是示出了用于缓冲比特流的方法的一种配置的流程图;
图5是示出了用于缓冲比特流的方法的更具体配置的流程图;
图6是示出了电子设备上的编码器的一个配置的框图;
图7是示出了电子设备上的解码器的一个配置的框图;
图8示出了可以在发送电子设备中使用的各个组件;
图9是示出了可以在接收电子设备中使用的各个组件的框图;
图10是示出了用于发送消息的系统和方法可以在其中实现的电子设备的一个配置的框图;以及
图11是示出了用于缓冲比特流的系统和方法可以在其中实现的电子设备的一个配置的框图。
具体实施方式
描述了一种用于发送消息的电子设备。该电子设备包括处理器和存储在存储器中的指令,该存储器与处理器进行电子通信。电子设备确定第一图片是否是纯净(clean)随机访问(CRA)图片。如果第一图片是CRA图片,则电子设备还确定是否存在先行图片。如果存在先行图片,则电子设备附加地生成包括CAR先行图片丢弃标记和初始CRA编码图片缓冲器(CPB)移除延迟参数在内的消息。电子设备还发送该消息。该消息可以是缓冲周期补充增强信息(SEI)消息。可以将初始CRA CPB移除延迟参数称作用于开始随机访问图片的初始 CPB移除延迟参数。可以将CRA先行图片丢弃标记称作指示该消息中是否存在用于开始随机访问图片的初始CPB移除延迟参数的标记。
初始CRA CPB移除延迟参数可以是 initial_cra_cpb_removal_delay[SchedSelIdx]。SchedSelIdx可以是索引变量。
如果存在先行图片,则电子设备还可以生成初始CRA CPB移除延迟偏移参数。初始CRA CPB移除延迟偏移参数可以是 initial_cra_cpb_removal_delay_offset[SchedSelIdx]。SchedSelIdx可以是索引变量。
确定第一图片是否是CRA图片可以包括:确定第一图片是否仅包括I条带。确定是否存在先行图片可以包括:确定图片是否按解码顺序在CRA图片之后以及按输出顺序在CRA图片之前。
还描述了一种用于对比特流进行缓冲的电子设备。该电子设备包括处理器和存储在存储器中的指令,该存储器与处理器进行电子通信。电子设备接收消息。电子设备还确定第一访问单元是否是纯净随机访问(CRA)访问单元,是否不存在先行图片,以及CRA先行图片丢弃标记是否指示丢弃。电子设备还移除第一访问单元。附加地,电子设备对第一访问单元进行解码。消息可以是缓冲周期补充增强信息 (SEI)消息。接收消息可以包括接收CRA丢弃标记、初始CRA编码图片缓冲器(CPB)移除延迟参数和初始CRA CPB移除延迟偏移参数。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则还可以将初始移除延迟变量设置为初始CRA编码图片缓冲器(CPB)移除延迟参数。移除第一访问单元可以基于该初始CRA CPB移除延迟参数。
初始CRA CPB移除延迟参数可以是 initial_cra_cpb_removal_delay[SchedSelIdx]。SchedSelIdx可以是索引变量。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备还可以基于该CRA CPB移除延迟参数确定移除时间。确定第一访问单元是否是CRA访问单元可以包括确定与第一访问单元相对应的所有网络访问层(NAL)单元类型是否都指示CRA图片的编码条带。如果第一访问单元是CRA 访问单元,如果不存在先行图片,并且如果CRA先行图片丢弃标记指示丢弃,则电子设备可以基于初始CRA编码图片缓冲器(CPB)移除延迟参数确定比特流到达时间。
还描述了一种用于通过电子设备发送消息的方法。该方法包括确定第一图片是否是纯净随机访问(CRA)图片。该方法还包括:如果第一图片是CRA图片,则确定是否存在先行图片。该方法还包括:如果存在先行图片,则生成包括CRA丢弃标记和初始CRA编码图片缓冲器(CPB)移除延迟参数在内的消息。附加地,该方法包括发送该消息。
还描述了一种用于通过电子设备缓冲比特流的方法。该方法包括接收消息。该方法还包括确定第一访问单元是否是纯净随机访问 (CRA)访问单元,是否不存在先行图片以及CRA先行图片丢弃标记是否指示丢弃。该方法还包括移除第一访问单元。附加地,该方法包括对第一访问单元进行解码。
本文所公开的系统和方法描述了用于发送消息并缓冲比特流的电子设备。例如,本文所公开的系统和方法描述了对以纯净随机访问 (CRA)图片开始的比特流进行缓冲。在一些配置中,本文所公开的系统和方法可以描述针对以CRA图片开始的比特流进行的假想参考解码器(HRD)缓冲。例如,本文所公开的系统和方法描述了当存在先行图片时针对以CRA图片开始的比特流对缓冲周期补充增强信息 (SEI)消息和HRD的修改。本文所公开的系统和方法(例如,HRD 修改)可以提供以下优点:减小当在随机访问点以CRA图片开始回放时的初始缓冲等待时间。随机访问点可以是数据流(例如,比特流) 中的任何点,其中对比特流进行解码不需要访问比特流中在该随机访问点之前的任何点,就能对当前图片和按输出顺序在所述当前图片之后的所有图片进行解码。此外,本文所公开的系统和方法可以提供如下优点:当丢弃在CRA图片之后的一个或多个先行图片时,HRD将不会发生下溢。
应注意,尽管关于HRD使用术语“假想”,然而HRD可以在物理上实现。例如,可以将“HRD”用于描述实际编码器的实现。在一些配置中,可以实现HRD以确定比特流是否符合高效率视频编码 (HEVC)规范。例如,可以将HRD用于确定I类型比特流和II类型比特流是否符合HEVC规范。I类型比特流可以仅包含视频编码层 (VCL)、网络访问层(NAL)单元和填充数据NAL单元。II类型比特流可以包含附加的其它NAL单元和语法要素。
视频编码的联合协作组(JCTVC)文档JCTVC-H0496提出了以 CRA图片开始的比特流。这种功能性已经合并到高效率视频编码 (HEVC)协会草案(JCTVC-H1003)中。
下表(1)给出了根据本文所公开的系统和方法的修改后的语法和语义的一个示例。用粗体表示了根据本文所公开的系统和方法进行的修改。
表1
Figure BDA0001464341180000071
Figure BDA0001464341180000081
下文示出了根据本文所公开的系统和方法的与缓冲周期SEI消息语义有关的示例。具体地,下文示出了关于修改后的语法要素的语义的附加详情。′cra_leadingpict_discard_flag′等于1指示存在′initial_cra_cpb_removal_delay[SchedSelIdx]′和′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′语法要素。′cra_leadingpict_discard_flag′等于0指示不存在′initial_cra_cpb_removal_delay[SchedSelIdx]′和′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′语法要素。当相关联或对应的图片不是CRA图片时,该标记可以不等于1。
当丢弃了包含与开始的CRA图片相关联的先行图片在内的访问单元时,initial_cra_cpb_removal_delay[SchedSelIdx]针对在以开始的 CRA图片进行HRD初始化之后的第一缓冲周期,指定在与访问单元相关联的编码数据的第一比特到CPB的到达时间和与同一访问单元相关联的编码数据从CPB移除的移除时间之间的针对第SchedSelIdx 个编码图片缓冲器(CPB)的延迟,其中该访问单元与缓冲周期SEI 消息相关联。语法要素的比特长度为initial_cpb_removal_delay_length_minus1+1。在一些配置中,该语法要素的单位是90千赫(kHz)时钟。
′initial_cra_cpb_removal_delay[SchedSelIdx]′可以不等于0。此外,它可以不超过90000*(CpbSize[SchedSelIdx]/** BitRate[SchedSelIdx]),90000*(CpbSize[SchedSelIdx]/** BitRate[SchedSelIdx])是以90kHz时钟为单位的CPB大小的时间等效。
可以将′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′连同 cpb_removal_delay一起用于第SchedSelIdx个CPB,以针对以CRA图片开始的比特流指定当丢弃包含与开始的CRA图片相关联的先行图片在内的访问单元时的编码访问单元到CPB的初始传送时间。在一些配置中,′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′的单位是 90kHz时钟。′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′语法要素可以是固定长度的编码,其比特长度为 initial_cpb_removal_delay_length_minus1+1。该语法要素可以不由解码器使用,并可以仅将其用于传送调度器(例如,JCTVC-H1003的Annex C中规定的假想码流调度器(HSS))。在整个编码视频序列上,对于每个SchedSelIdx值,′initial_cra_cpb_removal_delay[SchedSelIdx]′和′initial_cra_cpb_removal_delay_offset[SchedSelIdx]′的总和可以是恒定的。SchedSelIdx可以是索引变量。可以将payloadSize称作数据的字节。
seq_parameter_set_id规定了包含序列HRD属性的序列参数集。 seq_parameter_set_id的值可以等于在由首要编码图片所引用的图片参数集中的seq_parameter_set_id的值,该首要编码图片与缓冲周期SEI 消息相关联。seq_parameter_set_id的值的范围可以在0到31,包括0 和31。
initial_cpb_removal_delay[SchedSelIdx]针对HRD初始化之后的第一缓冲周期,规定了在与访问单元相关联的编码数据的第一比特到 CPB的到达时间和与同一访问单元相关联的编码数据从CPB移除的移除时间之间的针对第SchedSelIdx个CPB的延迟,其中该访问单元与缓冲周期SEI消息相关联。语法要素的比特长度为 initial_cpb_removal_delay_length_minus1+1。该语法要素的单位是90 千赫(kHz)时钟。
initial_cpb_removal_delay[SchedSelIdx]可以不等于0,可以不超过90000*(CpbSize[SchedSelIdx]/BitRate[SchedSelIdx]),90000* (CpbSize[SchedSelIdx]/BitRate[SchedSelIdx])是以90kHz时钟为单位的CPB大小的时间等效。
可以将initial_cpb_removal_delay_offset[SchedSelIdx]连同cpb_removal_delay用于第SchedSelIdx个CPB,以指定编码访问单元到CPB的初始传送时间。 initial_cpb_removal_delay_offset[SchedSelIdx]的单位是90kHz时钟。 initial_cpb_removal_delay_offset[SchedSelIdx]语法要素是固定长度的编码,其比特长度为initial_cpb_removal_delay_length_minus1+1。该语法要素可以不由解码器使用,并可以仅将其用于在HEVC规范的 Annex C中规定的传送调度器(HSS)。在整个编码视频序列上,对于每个SchedSelIdx值,initial_cpb_removal_delay[SchedSelIdx]和 initial_cpb_removal_delay_offset[SchedSelIdx]的总和可以是恒定的。
cpb_cnt_minus1+1规定了比特流中备选CPB规范的数目。 cpb_cnt_minus1的值的范围可以是0到31,包括0和31。当 low_delay_hrd_flag等于1时,cpb_cnt_minus1可以等于0。当不存在 cpb_cnt_minus1时,可以将其视为等于0。
nal_hrd_parameters_present_flag等于1说明存在NAL HRD参数 (与II类型比特流一致性有关)。nal_hrd_parameters_present_flag等于0说明不存在NAL HRD参数。应注意,当 nal_hrd_parameters_present_flag等于0时,在不提供NAL HRD参数 (包括NAL序列HRD参数信息和所有缓冲周期以及图片时序SEI消息)的前提下,无法通过未在HEVC规范中规定的一些手段来验证比特流的一致性。
当nal_hrd_parameters_present_flag等于1时,NAL HRD参数(例如,根据HEVC规范的子条款E.1.2和E.2.2)紧跟在该标记之后。可以如下所示得到变量NalHrdBpPresentFlag。如果以下任何内容为真,则可以通过未在HEVC规范中规定的一些手段来将 NalHrdBpPresentFlag的值设置为等于1: nal_hrd_parameters_present_flag存在于该比特流中并等于1,或由应用确定对于要在缓冲周期SEI消息内的比特流中存在的NAL HRD操作的缓冲周期的存在的需要。否则,可以将NalHrdBpPresentFlag的值设置为等于0。
vcl_hrd_parameters_present_flag等于1说明存在VCL HRD参数 (与所有比特流一致性有关)。vcl_hrd_parameters_present_flag等于0 说明不存在VCL HRD参数。应注意,当 vcl_hrd_parameters_present_flag等于0时,在不提供VCL HRD参数和所有缓冲周期以及图片时序SEI消息的前提下,无法通过未在 HEVC规范中规定的一些手段来验证比特流的一致性。当 vcl_hrd_parameters_present_flag等于1时,VCL HRD参数(例如,根据HEVC规范的子条款E.1.2和E.2.2)紧接在该标记之后。
可以如下所述得到变量VclHrdBpPresentFlag。如果以下任何内容为真,则可以通过未在HEVC规范中规定的一些手段将 VclHrdBpPresentFlag的值设置为等于1: vcl_hrd_parameters_present_flag存在于该比特流中并等于1,或由应用确定对于要在缓冲周期SEI消息内的比特流中存在的VCL HRD操作的缓冲周期的存在的需要。否则,可以将VclHrdBpPresentFlag的值设置为等于0。
下文示出了与根据本文所公开的系统和方法的CPB的操作相关的示例。可以将如下所示的规范单独应用于存在的每个CPB参数集合,并应用于根据HEVC规范的I类型和II类型一致性。
可以如下所示地确定比特流到达的时序(例如,一个或多个比特流到达时间)。可以在任何一个缓冲周期SEI消息处初始化HRD。在初始化之前,CPB可以为空。应注意,在初始化之后,可以不通过随后的缓冲周期SEI消息来再次初始化HRD。
可以将与初始化CPB的缓冲周期SEI消息相关联的访问单元称作访问单元0。可以将所有其它访问单元称作访问单元n,其中针对解码顺序中的下一访问单元,n递增1。
如果第一访问单元是CRA访问单元,不存在先行图片且 cra_leadingpict_discard_flag等于1,则可以将 use_initial_cpb_removal_delay[SchedSelIdx]设置为initial_cra_cpb_removal_delay[SchedSelIdx]的值。否则,可以将 use_initial_cpb_removal_delay[SchedSelIdx]的值设置为 initial_cpb_removal_delay[SchedSelIdx]的值。
可以将访问单元n的第一比特开始进入CPB的时间称作初始到达时间tai(n)。可以如下所示地得到访问单元的初始到达时间。如果访问单元是访问单元0,则tai(n)=0。否则(例如,访问单元是访问单元n,其中n>0),可以应用如下方法。如果cbr_flag[SchedSelIdx]等于1,则访问单元n的初始到达时间等于访问单元n-1的最终到达时间(可以如下得到最终达到时间)(例如,tai(n)=taf(n-1))。
否则,如果cbr_flag[SchedSelIdx]等于0,且访问单元n不是后续缓冲周期的第一访问单元,则可以通过tai(n)=Max(taf(n-1), tai,earliest(n))来得到访问单元n的初始到达时间。在一些配置中, tai,earliest(n)可以如下给出:tai,earliest(n)=tr,n(n)- (use_initial_cpb_removal_delay[SchedSelIdx]+ use_initial_cpb_removal_delay_offset[SchedSelIdx])/90000,其中tr,n(n)是访问单元n从CPB的标称移除时间(例如,如JCTVC-H1003 的子条款C.2.2中所规定的),如上所述地基于先前的缓冲周期SEI消息来指定use_initial_cpb_removal_delay[SchedSelIdx]和 use_initial_cpb_removal_delay_offset[SchedSelIdx]。
否则(例如,cbr_flag[SchedSelIdx]等于0且后续的访问单元n 是后续缓冲周期的第一访问单元),可以通过tai(n)=tr,n(n)- (use_initial_cpb_removal_delay[SchedSelIdx]/90000)得到访问单元n 的初始到达时间。在这种情况下,可以如上所述地基于与访问单元n 相关联的缓冲周期SEI消息来指定 use_initial_cpb_removal_delay[SchedSelIdx]。
可以通过taf(n)=tai(n)+b(n)/BitRate[SchedSelIdx]得到访问单元n的最终达到时间。在这种情况下,b(n)可以是访问单元n的比特大小,针对I类型一致性,对I类型比特流的比特进行计数,或针对II类型一致性,对II类型比特流的比特进行计数。
可以如下所示地限制SchedSelIdx、BitRate[SchedSelIdx]和 CpbSize[SchedSelIdx]的值。如果访问单元n和访问单元n-1是不同编码视频序列的一部分,且两个编码视频序列的活动序列参数集(active sequence parameter)的内容不同,则HSS可以从针对包含了访问单元 n的编码视频序列所提供的SchedSelIdx的值中选择SchedSelIdx的值 SchedSelIdx 1,导致针对两个编码视频序列中的第二个(包含访问单元n-1)的BitRate[SchedSelIdx1]或CpbSize[SchedSelIdxl]不同于针对SchedSelIdx的值SchedSelIdx0的BitRate[SchedSelIdx0]或 CpbSize[SchedSelIdx0]的值,其中将SchedSelIdx0用于包含访问单元 n-1的编码视频序列。否则,HSS可以继续用SchedSelIdx、 BitRate[SchedSelIdx]和CpbSize[SchedSelIdx]的先前值进行操作。
当HSS选择不同于先前访问单元的BitRate[SchedSelIdx]或 CpbSize[SchedSelIdx]的值时,可以应用如下方法。变量 BitRate[SchedSelIdx]可以在时间tai(n)生效。变量 CpbSize[SchedSelIdx]可以如下所示地生效。如果 CpbSize[SchedSelIdx]的新值超过旧的CPB大小,则它可以在时间 tai(n)生效。否则,CpbSize[SchedSelIdx]的新值可以在时间tr(n)生效。
在一些配置中,可以如下所示地实现编码图片移除的时序。可以假定:当初始化HRD时,在从CPB移除先前编码图片之后立即确定 (例如,计算)或针对访问单元0确定(例如,计算)编码图片的标称CPB移除时间和CPB移除时间。
如果第一访问单元是CRA访问单元、存在先行图片并且 cra_leadingpict_discard_flag等于1,则对于访问单元0,可以将访问单元从CPB的标称移除时间指定为tr,n(0)= initial_cra_cpb_removal_delay[SchedSelIdx]/90000。否则,对于访问单元0,可以将访问单元从CPB的标称移除时间指定为tr,n(0)= initial_cpb_removal_delay[SchedSelIdx]/90000。
对于不初始化HRD的缓冲周期的第一访问单元,可以将访问单元从CPB的标称移除时间指定为tr,n(n)=tr,n(nb)+tc* cpb_removal_delay(n)。在这种情况下,tr,n(nb)是先前缓冲周期的第一图片的标称移除时间,cpb_removal_delay(n)是在与访问单元n相关联的图片时序SEI消息中指定的。
当访问单元n是缓冲周期的第一访问单元时,可以在访问单元n 的移除时间tr,n(n),将nb设置为等于n。可以将不是缓冲周期的第一访问单元的访问单元n的标称移除时间tr,n(n)表示为tr,n(n)tr,n(nb)+ tc*cpb_removal_delay(n)。
可以如下所示地指定访问单元n的移除时间。如果 low_delay_hrd_flag等于0或tr,n(n)>=taf(n),则可以将访问单元n的移除时间指定为tr(n)=tr,n(n)。否则(例如,low_delay_hrd_flag等于1且tr,n(n)<taf(n)),可以将访问单元n的移除时间指定为tr(n)=tr,n(n)+tc*Ceil((taf(n)-tr,n(n))/tc)。应注意,后者情况表示访问单元n的大小b(n)可以是足够大的,以便防止在标称移除时间进行移除。
在一些配置中,要求比特流一致性,其中对于每个测试,应满足所有以下条件。对于与缓冲周期SEI消息相关联的每个访问单元n,其中n>0,将delta(增量)tg,90(n)指定为delta tg,90(n)=90000* (tr,n(n)-taf(n-1)),应如下所示地限制 use_initial_cpb_removal_delay[SchedSelIdx]的值。如果 cbr_flag[SchedSelIdx]等于0,则 use_initial_cpb_removal_delay[SchedSelIdx]<=Ceil(delta tg,90(n))。否则(cbr_flag[SchedSelIdx]等于1),Floor(delta tg,90(n))<= use_initial_cpb_removal_delay[SchedSelIdx]<=Ceil(delta tg,90(n))。应注意,在每个图片的移除时间时CPB中的确切比特数目可以取决于选择哪个缓冲周期SEI消息来初始化HRD。编码器可以考虑到这一点以便当在任何一个缓冲周期SEI消息处初始化HRD时,无论选择哪个缓冲周期SEI消息来初始化HRD,都确保符合所有指定的限制。
如上文所示,本文所公开的系统和方法提供了当存在先行图片时针对以CRA图片开始的比特流修改缓冲周期SEI消息的语法和语义。在一些配置中,可以将本文所公开的系统和方法应用于HEVC规范。
为了方便,下文给出若干定义,可以应用于本文所述的系统和方法。随机访问点可以是在数据流(例如,比特流)中的任意点,其中对比特流进行解码不需要访问比特流中在该随机访问点之前的任何点,就能对当前图片和按输出顺序在所述当前图片之后的所有图片进行解码。
可以将缓冲周期定义为按解码顺序在缓冲周期SEI消息的两个实例之间的访问单元集合。补充增强信息(SEI)可以包含对来自VCL NAL单元的编码图片的样本进行解码不是必要的信息。SEI消息可以有助于与解码、显示或其它目的相关的过程。然而,解码处理可以不需要SEI消息来构建亮度或色度样本。不需要一致的解码器来为了符合HEVC规范(例如,HEVC规范的Annex C包括一致的规范)的输出顺序而处理该信息。可能需要一些SEI消息信息来检查比特流一致性以及为了输出时序解码器一致性。
缓冲周期SEI消息可以是与缓冲周期相关联的SEI消息。它可以限定定义比特流到达时序和编码图片移除时序的语法和语义。
图片参数集(PPS)是包含语法要素的语法结构,语法要素应用于由存在于每个条带头部中的pic_parameter_set_id语法要素所确定的零个或多个完整编码图片。pic_parameter_set_id可以标识在条带头部中引用的图片参数集。pic_parameter_set_id的值的范围可以是0到255,包括0和255。
编码图片缓冲器(CPB)可以是先进先出缓冲器,包括按在假想参考解码器(HRD)中指定的解码顺序的访问单元。访问单元可以是网络访问层(NAL)单元的集合,NAL单元按解码顺序是连续的并包含正好一个编码图片。除了编码图片的编码条带NAL单元之外,访问单元还可以包括不包含编码图片的条带的其它NAL单元。对访问单元的解码总是得到解码后的图片。NAL单元可以是语法结构,包含对所跟随的数据的类型的指示以及含有原始字节序列载荷形式的数据 (必要时穿插防止竞争字节)。
现参考附图描述多种配置,其中相似的附图标记可以指示功能相似的要素。如这里在附图中总体描述和示意的系统和方法可以以多种不同配置布置和设计。因此,下文对附图所示的若干配置的更具体描述不是为了限制要求保护的范围,而仅仅是对系统和方法的表示。
图1是示出了用于发送消息和缓冲比特流的系统和方法可以在其中实现的一个或多个电子设备102的示例的框图。在该示例中,示出了电子设备A 102a和电子设备B 102b。然而,应注意,在一些配置中,可以将关于电子设备A 102a和电子设备B 102b所描述的一个或多个特征和功能合并到单个电子设备中。
电子设备A 102a包括编码器104。编码器104包括消息生成模块 108。包括在电子设备A 102a中的每个元件(例如,编码器104和消息生成模块108)可以以硬件、软件或其组合来实现。
电子设备A 102a可以获得一个或多个输入图片106。在一些配置中,输入图片106可以使用图像传感器在电子设备A 102a上捕获,可以从存储器中检索和/或可以从其它电子设备接收。
编码器104可以对输入图片106进行编码以产生编码后的数据。例如,编码器104可以对一系列输入图片106(例如,视频)进行编码。在一个配置中,编码器104可以是HEVC编码器。编码数据可以是数字数据(例如,比特流114的一部分)。编码器104可以基于输入信号生成开销信令(overhead signaling)。
消息生成模块108可以生成一个或多个消息。例如,消息生成模块108可以生成一个或多个SEI消息或其它消息。电子设备102(例如,编码器104)可以确定第一图片(例如,编码图片)是否是CRA 图片,并且如果第一图片是CRA图片,则确定是否存在先行图片。如果第一图片是CRA图片并存在先行图片,则消息生成模块108可以生成包括一个或多个CRA先行图片丢弃标记(例如, cra_leadingpict_discard_flag)的消息(例如,缓冲周期SEI消息或其它消息)、初始CRA CPB移除延迟参数(例如, initial_cra_cpb_removal_delay[SchedSelIdx])和初始CRA CPB移除延迟偏移参数(例如, initial_cra_cpb_removal_delay_offset[SchedSelIdx])。例如,消息生成模块108可以执行下文结合图2和图3所描述的一个或多个过程。在一些配置中,电子设备A 102a可以向电子设备B 102b发送消息,作为比特流114的一部分。在一些配置中,电子设备A 102a可以通过单独传输110向电子设备B102b发送消息。例如,单独传输可以不是比特流114的一部分。例如,可以使用一些带外机制来发送缓冲周期SEI 消息或其它消息。应注意,在一些配置中,其它消息可以包括上述缓冲周期SEI消息的一个或多个特征。此外,与上述SEI消息相似,在一个或多个方面,可以使用其他消息。
编码器104(例如,以及消息生成模块108)可以产生比特流114。比特流114可以包括基于输入图片106的编码图片数据。在一些配置中,比特流114还可以包括开销数据,例如缓冲周期SEI消息或其它消息、条带头部、PPS等。当对附加输入图片106进行编码时,比特流114可以包括一个或多个编码图片。例如,比特流114可以包括一个或多个具有对应开销数据的编码图片(例如,缓冲周期SEI消息或其它消息)。
可以将比特流114提供给解码器112。在一个示例中,可以使用有线或无线链路将比特流114发送到电子设备B 102b。在一些情况下,这可以通过网络(例如,互联网或局域网(LAN))来完成。如图1 所示,可以将解码器112与电子设备A 102a的编码器104相分离地实现在电子设备B 102b上。然而,应注意,在一些配置中,可以将编码器104和解码器112实现在同一电子设备上。在将编码器104和解码器112实现在同一电子设备上的实施方式下,例如,可以通过总线将比特流114提供给解码器112或将比特流存储在存储器中以供解码器112进行检索。
解码器112可以以硬件、软件或其组合来实现。在一个配置中,解码器112可以是HEVC解码器。解码器112可以接收(例如,获得) 比特流114。解码器112可以基于比特流114生成一个或多个解码后的图片118。解码后的图片118可以被显示、回放、存储在存储器中和/或发送到另一设备等。
解码器112可以包括CPB 120。CPB 120可以临时存储编码图片。例如,CPB 120可以存储编码图片,直到移除时间。根据本文所公开的系统和方法,可以由解码器112基于消息(例如,缓冲周期SEI消息或其它消息)确定到达时间(例如,比特流的到达时间)和移除时间(例如,编码图片的移除时间)中的一个或多个。
解码器112可以接收消息(例如,缓冲周期SEI消息或其它消息)。解码器还可以确定第一访问单元是否是CRA访问单元,是否不存在先行图片,以及CRA先行图片丢弃标记是否指示丢弃。如果第一访问单元是CRA访问单元,如果不存在先行图片并且如果CRA先行图片丢弃标记指示丢弃,则解码器可以将初始移除延迟变量设置为初始 CRA CPB移除延迟参数,并可以基于CRA CPB移除延迟参数从CPB 中移除第一访问单元(例如,编码图片)。例如,CPB 120可以执行下文结合图4和图5所描述的一个或多个过程。
上述HRD可以是图1所示的解码器112的一个示例。因此,在一些配置中,电子设备102可以根据上述HRD和CPB进行操作。
应注意,包括在电子设备102中的一个或多个要素或部件可以以硬件来实现。例如,可以将其一个或多个要素或部件实现为芯片、电路或硬件组件等。还应注意,本文所述的一个或多个功能或方法可以以硬件来实现和/或使用硬件来执行。例如,本文所述的一个或多个方法可以以和/或使用芯片集、专用集成电路(ASIC)、大型集成电路(LSI) 或集成电路等来实现。
图2是示出了用于发送消息的方法200的一个配置的流程图。电子设备102(例如,电子设备A 102a)可以确定202第一图片是否是CRA图片。例如,编码器104可以将输入图片106编码为CRA图片。在一些配置中,CRA图片可以是仅使用帧内预测来进行解码的编码图片。例如,CRA图片可以包括一个或多个(例如,仅包括)I条带,其中每个条带的nal_unit_type(例如,网络抽象层单元类型)等于4。按解码顺序和输出顺序都在CRA图片之后的所有编码图片可以不使用根据按解码顺序或输出顺序在该CRA图片之前的任何图片进行的帧间预测。此外,按解码顺序在该CRA图片之前的任何图片按输出顺序还可以在该CRA图片之前。因此,如果编码器104将输入图片 106编码为CRA图片(例如,如果编码图片仅包括I条带),则电子设备102可以确定202第一图片是CRA图片。否则,电子设备102 可以确定202第一图片不是CRA图片。
应注意,CRA图片可以出现在比特流114的随机访问点处。随机访问点可以是数据流(例如,比特流)中的任何点,其中对比特流的解码不需要访问比特流中在该随机访问点之前的任何点,就能对当前图片和按输出顺序在所述当前图片之后的所有图片进行解码。
如果第一图片是CRA图片,则电子设备102可以确定204是否存在先行图片。先行图片可以是按解码顺序在CRA图片之后且按输出顺序在CRA图片之前的图片。例如,如果编码器104指定图片按解码顺序在CRA图片之后且按输出顺序(例如,从解码器112输出的顺序)在CRA图片之前,则存在先行图片。
可以根据一个或多个方法来完成确定204是否存在先行图片。在一个方法中,如果第一图片是CRA图片,并且存在被指定为(例如,由编码器104指定)按解码顺序在该CRA图片之后而岸输出顺序在该CRA图片之前的另一图片,则电子设备102确定存在先行图片。在一些配置中,电子设备102可以读取与CRA图片和一个或多个其它图片相对应的数据,以便确定是否存在先行图片。例如,电子设备 102可以读取指定CRA图片和一个或多个其它图片的解码顺序和输出顺序的数据。例如,可以利用图片顺序计数(POC)来确定输出顺序。可以基于语法要素在比特流114中出现的顺序,确定解码顺序。在一些配置中,在解码图片要从解码图片的缓冲器中输出的情况下,可以将输出顺序定义为从解码图片的缓冲器输出解码图片的顺序。可以通过POC值来指定图片的输出顺序,而不管是否要输出图片。在一些配置中,可以将解码顺序定义为在解码处理中处理语法要素的顺序。如果满足将图片指定为按解码顺序在CRA图片之后并且按输出顺序在该CRA图片之前的条件,则电子设备102可以确定204存在先行图片。
如果存在先行图片,则电子设备102可以生成206消息(例如,缓冲周期SEI消息或其他消息),该消息包括CRA先行图片丢弃标记和初始CRA CPB移除延迟参数。例如,电子设备102可以生成206 包括cra_leadingpict_discard_flag和 initial_cra_cpb_removal_delay[SchedSelIdx]在内的消息。在一些配置中,该消息还可以包括CRA CPB移除延迟偏移参数。例如,电子设备102可以生成206如上表1所示的缓冲周期SEI消息。
电子设备102可以发送208该消息(例如,缓冲周期SEI消息或其它消息)。例如,电子设备102可以通过无线传输、有线传输、设备总线、网络等的一个或多个来发送该消息。例如,电子设备A 102a 可以向电子设备B 102b发送该消息。例如,该消息可以是比特流114的一部分。在一些配置中,电子设备A 102a可以在单独传输110(也就是说,不是比特流114的一部分)中向电子设备B 102b发送208 该消息。例如,可以使用某一带外机制来发送该消息。
图3是示出了用于发送消息的方法300的更具体配置的流程图。电子设备102(例如,电子设备A 102a)可以确定302第一图片是否是CRA图片。这可以如上结合图2所描述的来实现。
如果第一图片是CRA图片,则电子设备102可以确定304是否存在先行图片。这可以如上结合图2所描述的来实现。
如果存在先行图片,则电子设备102可以生成306缓冲周期SEI 消息,该消息包括CRA先行图片丢弃标记、初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数。例如,电子设备102可以生成306包括cra_leadingpict_discard_flag、 initial_cra_cpb_removal_delay[SchedSelIdx]和 initial_cra_cpb_removal_delay_offset[SchedSelIdx]在内的缓冲周期 SEI消息。例如,电子设备102可以生成306如上表1所示的缓冲周期SEI消息。
电子设备102可以发送308该缓冲周期SEI消息。例如,电子设备102可以通过无线传输、有线传输、设备总线、网络等的一个或多个来发送该缓冲周期SEI消息。例如,电子设备A 102a可以向电子设备B 102b发送该缓冲周期SEI消息。例如,该缓冲周期SEI消息可以是比特流114的一部分。
图4是示出了用于缓冲比特流的方法400的一种配置的流程图。电子设备102(例如,电子设备B 102b)可以接收402消息(例如,缓冲周期SEI消息或其它消息)。例如,电子设备102可以通过无线传输、有线传输、设备总线、网络等中的一个或多个来接收402该消息。例如,电子设备B 102b可以从电子设备A 102a接收该消息。例如,该消息可以是比特流114的一部分。在另一示例中,电子设备B 102b 可以在单独传输110(也就是说,不是比特流114的一部分)中从电子设备A 102a接收该消息。例如,可以使用某一带外机制来接收该缓冲周期SEI消息。在一些配置中,该消息可以包括CRA先行图片丢弃标记、初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数中的一个或多个。因此,接收402消息可以包括接收CRA先行图片丢弃标记、初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数中的一个或多个。
电子设备102可以确定404第一访问单元是否是CRA访问单元、是否不存在一个或多个先行图片以及CRA先行图片丢弃标记是否指示丢弃。访问单元是可以包含编码图片的一个或多个NAL单元的集合。比特流114可以包括一个或多个访问单元。在一些配置中,电子设备102可以基于与第一访问单元相对应的NAL单元类型参数(例如,nal_unit_type),确定404第一访问单元是否是CRA访问单元。例如,nal_unit_type 4可以指示CRA图片的编码条带。在这种情况下,如果与第一访问单元相对应的一个或多个(例如,所有)NAL单元类型(例如,nal_unit_type)指示CRA图片的编码条带(例如,等于4),则电子设备可以确定访问单元是CRA访问单元。否则,电子设备102 可以确定第一访问单元不是CRA访问单元。
电子设备102可以确定是否存在任何先行图片。例如,电子设备 102可以确定在比特流114的一部分中是否包括任何先行图片。如上所述,先行图片可以是按解码顺序在CRA图片之后且按输出顺序在该CRA图片之前的图片。例如,如果由编码器104将图片指定为按解码顺序在CRA图片之后且按输出顺序(例如,从解码器112输出的顺序)在该CRA图片之前,则存在先行图片。
确定是否存在先行图片可以根据一个或多个方法来实现。在一个方法中,如果图片(第一访问单元中的图片)是CRA图片并且存在指定为(例如,由编码器104指定)按解码顺序在该CRA图片之后而按输出顺序在该CRA图片之前的另一图片,则电子设备102确定存在先行图片。在一些配置中,电子设备102可以读取与CRA图片和一个或多个其它图片相对应的数据,以便确定是否存在先行图片。例如,电子设备102可以读取指定CRA图片和一个或多个其它图片的解码顺序和输出顺序的数据。在一个示例中,电子设备102可以接收比特流114中的指示符。在另一示例中,电子设备102可以通过确定图片的POC值并将其与对应CRA图片的POC值进行比较,来确定是否存在先行图片。如果满足将图片指定为按解码顺序在CRA图片之后并且按输出顺序在该CRA图片之前的条件,则电子设备102可以确定存在先行图片。然而,如果不满足一个或多个准则,则电子设备102可以确定不存在先行图片。
电子设备102可以确定CRA先行图片丢弃标记是否指示丢弃。例如,电子设备102可以读取该消息以便确定SEI消息中的CRA先行图片丢弃标记是否指示丢弃。例如,如果cra_leadingpict_discard_flag 的值为1,则电子设备102可以确定CRA先行图片丢弃标记指示丢弃。然而,如果cra_leadingpict_discard_flag的值为0,则电子设备102可以确定CRA先行图片丢弃标记不指示丢弃。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备102可以将初始移除延迟变量设置为406初始CRA CPB移除延迟参数。在这种情况下,例如,电子设备102可以将use_initial_cpb_removal_delay[SchedSelIdx] 设置为initial_cra_cpb_removal_delay[SchedSelIdx]的值。
在一些配置中,电子设备102(例如,解码器112)可以基于初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数中的一个或多个来确定比特流到达时间。例如,如果第一访问单元是CRA 访问单元,如果不存在先行图片且如果CRA图片丢弃标记指示丢弃,则可以如下所示地确定比特流到达时间。
如上所述,对于在初始化CPB 120的访问单元之后的访问单元(例如,n>0),如果cbr_flag[SchedSelIdx]是0且该访问单元(例如,n) 不是后续缓冲周期的第一访问单元,则电子设备102可以基于 tai,earliest(n)来确定比特流到达时间tai(n)。可以基于初始移除延迟变量 (例如,use_initial_cpb_removal_delay[SchedSelIdx])和初始移除延迟偏移变量(例如,use_initial_cpb_removal_delay_offset)来确定 tai,earliest(n)。如上所述,可以将初始移除延迟变量设置为406初始CRA CPB移除延迟参数(例如, initial_cra_cpb_removal_delay[SchedSelIdx])。因此,确定该比特流到达时间可以基于初始CRA CPB移除延迟参数。在一些配置中,还可以将初始移除延迟偏移变量(例如, use_initial_cpb_removal_delay_offset[SchedSelIdx])设置为初始CRA CPB移除延迟偏移参数(例如,initial_cra_cpb_removal_delay_offset[SchedSelIdx])。因此,附加地,确定比特流到达时间可以基于初始CRA CPB移除延迟偏移参数。
如上所述,对于初始化CPB 120的访问单元之后的访问单元(例如,n>0),如果cbr_flag[SchedSelIdx]是0且该访问单元(例如,n) 是后续缓冲周期的第一访问单元,则电子设备102基于初始移除延迟变量(例如,use_initial_cpb_removal_delay[SchedSelIdx])确定比特流到达时间tai(n)。如上所述,可以将初始移除延迟变量设置为406 初始CRA CPB移除延迟参数(例如, initial_cra_cpb_removal_delay[SchedSelIdx])。因此,确定比特流到达时间可以基于初始CRA CPB移除延迟参数。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备102可以基于初始 CRA CPB移除延迟参数来移除408第一访问单元。例如,电子设备 102可以基于初始CRA CPB移除延迟参数(例如, initial_cra_cpb_removal_delay[SchedSelIdx])来确定第一访问单元的移除时间。当到达移除时间时,例如电子设备102可以从CPB移除第一访问单元。
电子设备102可以对第一访问单元进行解码410。例如,电子设备102可以对第一访问单元中包括的编码图片进行解码410。在一些配置中,当移除时,电子设备102可以移除408第一访问单元并对其进行解码410。例如,在CPB移除时间,可以移除与每个访问单元相关联的数据,并即刻通过即刻解码处理来对其进行解码。应注意,术语“即刻”及其变形不必表示缺少任何时间段。例如,“即刻”处理可以占据一段时间。
如果第一访问单元不是CRA访问单元,如果第一访问单元是 CRA访问单元且存在先行图片或如果CRA先行图片丢弃标记不指示丢弃,则电子设备102可以将初始移除延迟变量设置为412初始CPB 移除延迟参数。在这种情况下,例如,电子设备102可以将 use_initial_cpb_removal_delay[SchedSelIdx]设置为 initial_cpb_removal_delay[SchedSelIdx]的值。
如果第一访问单元不是CRA访问单元,如果第一访问单元是 CRA访问单元且存在先行图片或如果CRA先行图片丢弃标记不指示丢弃,则电子设备102可以基于初始CPB移除延迟参数来移除414 第一访问单元。例如,电子设备102可以基于初始CPB移除延迟参数(例如,initial_cpb_removal_delay[SchedSelIdx])来确定第一访问单元的移除时间。当到达移除时间时,例如,电子设备102可以从CPB 移除第一访问单元。
电子设备102可以对第一访问单元进行解码416。例如,电子设备102可以对包括在第一访问单元中的编码图片进行解码416。例如,在CPB移除时间,可以移除与每个访问单元相关联的数据,并即刻通过即刻解码处理来对其进行解码。
图5是示出了用于缓冲比特流的方法500的更具体配置的流程图。电子设备102(例如,电子设备B 102b)可以接收502缓冲周期SEI 消息。例如,这可以如上结合图4所描述的来实现。
电子设备102可以确定504第一访问单元是否是CRA访问单元、是否不存在一个或多个先行图片以及CRA先行图片丢弃标记是否指示丢弃。这可以如上结合图4所描述的来实现。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备102可以将初始移除延迟变量设置为506初始CRA CPB移除延迟参数。在这种情况下,例如,电子设备102可以将use_initial_cpb_removal_delay[SchedSelIdx] 设置为initial_cra_cpb_removal_delay[SchedSelIdx]的值。
在一些配置中,电子设备102可以基于初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数中的一个或多个,来确定比特流到达时间。例如,这可以如上结合图4所描述的来实现。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备102可以基于初始 CRA CPB移除延迟参数来确定508移除时间(例如,tr,n)。这可以如上结合initial_cra_cpb_removal_delay[SchedSelIdx]/90000所描述的来实现。
如果第一访问单元是CRA访问单元,如果不存在先行图片且如果CRA先行图片丢弃标记指示丢弃,则电子设备102可以基于初始 CRA CPB移除延迟参数来移除510第一访问单元。例如,如上所述,电子设备102可以基于初始CRA CPB移除延迟参数(例如, initial_cra_cpb_removal_delay[SchedSelIdx])来确定508第一访问单元的移除时间(例如,tr,n)。当到达移除时间(例如,tr,n)时,例如电子设备102可以从CPB移除510第一访问单元。
电子设备102可以对第一访问单元进行解码512。例如,电子设备102可以对包括在第一访问单元中的编码图片进行解码512。例如,在CPB移除时间,可以移除与每个访问单元相关联的数据,并即刻通过即刻解码处理来对其进行解码。
如果第一访问单元不是CRA访问单元,如果第一访问单元是 CRA访问单元且存在先行图片或如果CRA先行图片丢弃标记不指示丢弃,则电子设备102可以将初始移除延迟变量设置为514初始CPB 移除延迟参数。在这种情况下,例如,电子设备102可以将 use_initial_cpb_removal_delay[SchedSelIdx]设置为 initial_cpb_removal_delay[SchedSelIdx]的值。
如果第一访问单元不是CRA访问单元,如果第一访问单元是 CRA访问单元且存在先行图片或如果CRA先行图片丢弃标记不指示丢弃,则电子设备102可以基于初始CPB移除延迟参数来确定516 移除时间(例如,tr,n)。这可以如上结合 initial_cpb_removal_delay[SchedSelIdx]/90000所描述的来实现。
如果第一访问单元不是CRA访问单元,如果第一访问单元是 CRA访问单元且存在先行图片或如果CRA先行图片丢弃标记不指示丢弃,则电子设备102可以基于初始CPB移除延迟参数来移除518 第一访问单元。例如,电子设备102可以基于初始CPB移除延迟参数(例如,initial_cpb_removal_delay[SchedSelIdx])来确定516第一访问单元的移除时间(例如,tr,n)。当到达移除时间(例如,tr,n)时,例如,电子设备102可以从CPB移除518第一访问单元。
电子设备102可以对第一访问单元进行解码520。例如,电子设备102可以对包括在第一访问单元中的编码图片进行解码520。例如,在CPB移除时间,可以移除与每个访问单元相关联的数据,并即刻通过即刻解码处理来对其进行解码。
图6是示出了电子设备602上的编码器604的一个配置的框图。应注意,示出为包括在电子设备602内的一个或多个要素可以以硬件、软件或二者组合来实现。例如,电子设备602包括编码器604,编码器604可以以硬件、软件或二者的组合来实现。例如,编码器604可以被实现为电路、集成电路、专用集成电路(ASIC)、与具有可执行指令的存储器进行电子通信的处理器、固件、现场可编程门阵列 (FPGA)等或其组合。在一些配置中,编码器604可以是HEVC编码器。
电子设备602可以包括源622。该源622可以提供图片或图像数据(例如,视频)作为编码器604的一个或多个输入图片606。源622 的示例可以包括图像传感器、存储器、通信接口、网络接口、无线接收器、端口等。
可以将一个或多个输入图片606提供给帧内预测模块和重构缓冲器624。还可以将输入图片606提供给运动估计和运动补偿模块646 以及减法模块628。
帧内预测模块和重构缓冲器624可以基于一个或多个输入图片 606和重构数据660,生成帧内模式信息640和帧内信号626。运动估计和运动补偿模块646可以基于一个或多个输入图片606和参考图片缓冲器676信号678,生成帧间模式信息648和帧间信号644。在一些配置中,参考图片缓冲器676可以包括来自参考图片缓冲器676中的一个或多个参考图片的数据。
编码器604可以根据模式在帧内信号626与帧间信号644之间进行选择。在帧内编码模式下,可以使用帧内信号626以便利用空间特性。在帧间编码模式下,可以使用帧间信号644以便利用时间特性。当在帧内编码模式下时,可以将帧内信号626提供给减法模块628,并将帧内模式信息640提供给熵编码模块642。当在帧间编码模式下时,可以将帧间信号644提供给减法模块628,并将帧间模式信息648 提供给熵编码模块642。
在减法模块628处,从输入图片606中减去帧内信号626或帧间信号644(取决于模式),以便产生预测残差630。将预测残差630提供给变换模块632。变换模块632可以压缩预测残差630以便产生变换后的信号634,将该信号634提供给量化模块636。量化模块636 对变换后的信号634进行量化,以产生经变换的和量化的系数(TQC) 638。
将TQC 638提供给熵编码模块642和逆量化模块650。逆量化模块650对TQC 638执行逆量化,以产生逆量化的信号652,将该信号 652提供给逆变换模块654。逆变换模块654对逆量化的信号652进行解压缩,以产生压缩后的信号656,将该信号656提供给重构模块658。
重构模块658可以基于解压缩后的信号656生成重构后的数据 660。例如,重构模块658可以重构(修改)图片。可以将重构后的数据660提供给去块滤波器662以及帧内预测模块和重构缓冲器624。去块滤波器662可以基于重构后的数据660生成滤波后的信号664。
可以将滤波后的信号664提供给采样自适应偏移(SAO)模块666。 SAO模块666可以产生提供给熵编码模块642的SAO信息668以及提供给自适应环路滤波器(ALF)672的SAO信号670。ALF 672产生提供给参考图片缓冲器676的ALF信号674。ALF信号674可以包括来自可以用作参考图片的一个或多个图片的数据。
熵编码模块642可以对TQC 638进行编码,以产生比特流A 614a (例如,编码后的图片数据)。例如,熵编码模块642可以使用上下文自适应可变长度编码(CAVLC)或上下文自适应二进制算术编码 (CABAC)来对TQC 638进行编码。具体地,熵编码模块642可以基于帧内模式信息640、帧间模式信息648和SAO信息668中的一个或多个,来对TQC 638进行编码。可以将比特流A 614a(例如,编码后的图片数据)提供给消息生成模块608。该消息生成模块608可以与结合图1所述的消息生成模块108相似地配置。附加地或备选地,消息生成模块608可以执行结合图2和图3所述的一个或多个过程。
例如,如果第一图片(例如,比特流A 614a中的第一图片)是 CRA图片且如果存在先行图片,则消息生成模块608可以生成包括 CRA先行图片丢弃标记、初始CRA CPB移除延迟参数和初始CRA CPB移除延迟偏移参数中的一个或多个在内的消息(例如,缓冲周期 SEI消息或其它消息)。在一些配置中,可以将该消息插入到比特流A 614a,以产生比特流B614b。因此,该消息可以在生成了全部比特流 A 614a之后(例如,在生成了大部分比特流B614b之后)生成。在其它配置中,该消息可以不插入到比特流A 614(在该情况下,比特流B614b可以与比特流A614a相同),而是提供在单独传输610中。
在一些配置中,电子设备602向其他电子设备发送比特流614。例如,可以将比特流614提供给通信接口、网络接口、无线发射机、端口等。例如,可以通过LAN、互联网、蜂窝电话基站等将比特流 614传输到另一电子设备。附加地或备选地,可以将比特流614存储在电子设备602的存储器或其它组件上。
图7是示出了电子设备702上的解码器712的一个配置的框图。可以将解码器712包括在电子设备702中。例如,解码器712可以是 HEVC解码器。解码器712和示出为包括在解码器712中的一个或多个要素可以以硬件、软件或二者的组合来实现。解码器712可以接收比特流714(例如,包括在比特流714中的一个或多个编码后的图片和开销数据),以便进行解码。在一些配置中,接收到的比特流714 可以包括接收到的开销数据,例如,消息(例如,缓冲周期SEI消息或其它消息)、条带头部、PPS等。在一些配置中,解码器712可以附加地接收单独传输710。单独传输710可以包括消息(例如,缓冲周期SEI消息或其它消息)。例如,可以在单独传输710中(而不是在比特流714中)接收缓冲周期SEI消息或其它消息。然而,应注意,单独传输710是可选的,在一些配置下可以不使用单独传输710。
解码器712包括CPB 720。CPB 720可以与以上结合图1所述的 CPB 120相似地配置。附加地或备选地,解码器712可以执行结合图4和图5所述的一个或多个过程。例如,解码器712可以接收消息(例如,缓冲周期SEI消息或其它消息)。附加地,如果第一访问单元是CRA访问单元,如果不存在先行图片并且如果CRA先行图片丢弃标记指示丢弃,则解码器712可以执行一个或多个以下操作:将初始移除延迟变量设置为初始CRA CPB移除延迟参数,和基于该初始CRA CPB移除延迟参数来移除第一访问单元。应注意,一个或多个访问单元可以包括在比特流中,并且可以包括编码图片数据和开销数据中的一个或多个。
编码图片缓冲器(CPB)720可以向熵解码模块701提供编码后的图片数据。可以通过熵解码模块701来对编码后的图片数据进行熵解码,从而产生运动信息信号703以及经量化、缩放和/或变换的系数 705。
在运动补偿模块780处,可以将运动信息信号703与来自帧存储器709的参考帧信号798的一部分合并,这样可以产生帧间预测信号 782。可以通过逆模块707对经量化、解缩放和/或变换的系数705进行逆量化、缩放和逆变换,从而产生解码后的残差信号784。可以将解码后的残差信号784与预测信号792相加,以产生合并信号786。预测信号792可以是从由运动补偿模块780所产生的帧间预测信号 782或由帧内预测模块788所产生的帧内预测信号790中选择的信号。在一些配置中,该信号选择可以基于比特流714(例如,由比特流714控制)。
可以根据来自合并信号786(例如,在当前帧中)的先前解码信息来预测帧内预测信号790。还可以通过去块滤波器794来对合并信号786进行滤波。可以将得到的滤波后的信号796写入帧存储器709。得到的滤波后的信号796可以包括解码后的图片。帧存储器709可以提供解码后的图片718。
图8示出了可以在发送电子设备802中使用的各个组件。本文所述的电子设备102、602、702中的一个或多个可以根据图8所示的发送电子设备802来实现。
发送电子设备802包括控制电子设备802的操作的处理器817。还可以将处理器817称作CPU。存储器811向处理器817提供指令813a (例如,可执行指令)和数据815a,存储器811可以包括只读存储器 (ROM)、随机访问存储器(RAM)或可以存储信息的任何类型的设备。存储器811的一部分还可以包括非易失性随机访问存储器 (NVRAM)。存储器811可以与处理器817进行电子通信。
指令813b和数据815b可以驻留在处理器817中。被加载到处理器817的指令813b和/或数据815b还可以包括来自存储器811的被加载以供处理器817来执行或处理的指令813a和/或数据815a。可以通过处理器817执行指令813b以便实现本文所述的系统和方法。例如,指令813b可以是可执行的,以执行上述方法200、300、400、500中的一个或多个。
发送电子设备802可以包括一个或多个通信接口819,用于与其它电子设备(例如,接收电子设备)进行通信。通信接口819可以基于有线通信技术、无线通信技术或二者。通信接口819的示例包括串行端口、并行端口、通用串行总线(USB)、以太网适配器、IEEE 1394总线接口、小型计算机系统接口(SCSI)总线接口、红外(IR)通信端口、蓝牙无线通信适配器、根据第三代合作伙伴计划(3GPP)规范的无线收发机等。
发送电子设备802可以包括一个或多个输出设备823以及一个或多个输入设备821。输出设备823的示例包括扬声器、打印机等。可以包括在电子设备802中的一种输出设备是显示设备825。与本文所公开的配置一同使用的显示设备825可以利用任何适合的图像投影技术,例如,阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、气态等离子体、电致发光术等。可以提供显示控制器827用于将存储在存储器811中的数据转换为显示在显示器825上的文本、图形和/ 或运动图像(合适的)。输入设备821的示例包括键盘、鼠标、麦克风、遥控设备、按钮、操控杆、轨迹球、触摸板、触摸屏、激光笔等。
通过总线系统829将发送电子设备802的各个组件耦接在一起,除了数据总线之外,总线系统829还可以包括电源总线、控制信号总线和状态信号总线。然而,为了清楚,图8将各种总线示出为总线系统829。图8所示的发送电子设备802是功能框图,而不是具体组件的列表。
图9是示出了可以在接收电子设备902中使用的各个组件的框图。本文所述的电子设备102、602、702中的一个或多个可以根据如图9 所示的接收电子设备902来实现。
接收电子设备902包括控制电子设备902的操作的处理器917。处理器917还可以称作CPU。存储器911向处理器917提供指令913a (例如,可执行指令)和数据915a,存储器911可以包括只读存储器 (ROM)、随机访问存储器(RAM)或可以存储信息的任何类型的设备。存储器911的一部分还可以包括非易失性随机访问存储器 (NVRAM)。存储器911可以与处理器917进行电子通信。
指令913b和数据915b还可以驻留在处理器917中。被加载到处理器917的指令913b和/或数据915b还可以包括来自存储器911的被加载以供处理器917来执行或处理的指令913a和/或数据915a。可以通过处理器917执行指令913b以实现本文所述的系统和方法。例如,指令913b可以是可执行的,以执行上述方法200、300、400、500中的一个或多个。
接收电子设备902可以包括一个或多个通信接口919,用于与其它电子设备(例如,发送电子设备)进行通信。通信接口919可以基于有线通信技术、无线通信技术或二者。通信接口919的示例包括串行端口、并行端口、通用串行总线(USB)、以太网适配器、IEEE 1394总线接口、小型计算机系统接口(SCSI)总线接口、红外(IR)通信端口、蓝牙无线通信适配器、根据第三代合作伙伴计划(3GPP)规范的无线收发机等。
发送电子设备902可以包括一个或多个输出设备923以及一个或多个输入设备921。输出设备923的示例包括扬声器、打印机等。可以包括在电子设备902中的一种输出设备是显示设备925。与本文所公开的配置一起使用的显示设备925可以使用任何适合的图像投影技术,例如,阴极射线管(CRT)、液晶显示器(LCD)、发光二极管 (LED)、气态等离子体、电致发光术等。可以提供显示控制器927 用于将存储在存储器911中的数据转换为显示在显示器925上的文本、图形和/或运动图像(合适的)。输入设备921的示例包括键盘、鼠标、麦克风、遥控设备、按钮、操控杆、轨迹球、触摸板、触摸屏、激光笔等。
通过总线系统929将发送电子设备902的各个组件耦接在一起,除了数据总线之外,总线系统929还可以包括电源总线、控制信号总线和状态信号总线。然而,为了清楚,图9将各种总线示出为总线系统929。图9所示的接收电子设备902是功能框图,而不是具体组件的列表。
图10是示出了用于发送消息的系统和方法可以在其中实现的电子设备1002的一个配置的框图。电子设备1002包括编码装置1031 和发送装置1033。编码装置1031和发送装置1033可以配置为执行以上结合图1、图2、图3、图6和图8中的一个或多个所述的一个或多个功能。例如,编码装置1031和发送装置1033可以生成比特流1014。以上图8示出了图10的实际装置结构的一个示例。可以实现其它多种结构,以实现图1、图2、图3、图6和图8的一个或多个功能。例如, DSP可以通过软件来实现。
图11是示出了用于缓冲比特流1114的系统和方法可以在其中实现的电子设备1102的一个配置的框图。电子设备1102包括接收装置 1135和解码装置1137。接收装置1135和解码装置1137可以配置为执行以上结合图1、图4、图5、图7和图9中的一个或多个所述的一个或多个功能。例如,接收装置1135和解码装置1137可以接收比特流 1114。以上图9示出了图11的实际装置结构的一个示例。可以实现其它多种结构,以实现图1、图4、图5、图7和图9的一个或多个功能。例如,DSP可以通过软件来实现。
术语“计算机可读介质”是指可以由计算机或处理器访问的任何可用介质。如文本所用,术语“计算机可读介质”可以表示非暂时性且有形的计算机和/或处理器可读介质。例如,而非限制性地,计算机可读或处理器可读介质可以包括:RAM、ROM、EEPROM、CD-COM 或其它光盘存储设备、磁盘存储设备或其它磁性存储器件;或可以用于以可以通过计算机或处理器访问的指令或数据结构的形式携带或存储所需程序代码的任何其它介质。如本文所用,磁盘和光盘包括:压缩盘(CD)、激光盘、光盘、数字可视盘(DVD)、软盘和蓝光(注册商标)盘,其中磁盘通常磁性再现数据,而光盘用激光光学再现数据。
应注意,本文所述方法中的一个或多个可以以硬件来实现和/或使用硬件来执行。例如,本文所述方法或方案中的一个或多个可以以和/ 或使用芯片、ASIC、大型集成电路(LSI)或集成电路等来实现。
本文所公开的每个方法包括用于实现所述方法的一个或多个步骤或行为。所述方法步骤和/或行为可以与其它步骤和/或行为互换,和/或合并为单个步骤,而不脱离权利要求的范围。换言之,除非需要特定顺序的步骤或行为来正确操作所述的方法,否则可以修改具体步骤和/或行为的顺序和/或使用,而不脱离权利要求的范围。
应理解,权利要求不限于以上所述的明确配置和组件。可以对本文所述的系统、方法和装置的布置、操作和详情进行多种修改、改变和变形,而不脱离权利要求的范围。

Claims (5)

1.一种用于缓冲比特流的方法,包括:
解码通过使用以下编码步骤生成的比特流:编码第一初始编码图片缓冲器CPB移除延迟参数、指示是否存在第二初始CPB移除延迟参数的标记、以及当所述标记指示存在时的第二初始CPB移除延迟参数,
其中
当满足条件集合时将初始移除延迟变量设置为第二初始CPB移除延迟参数,以及当不满足所述条件集合时将初始移除延迟变量设置为第一初始CPB移除延迟参数,
其中,所述条件集合包括以下各项:
1)第一访问单元仅包括I条带,
2)不存在先行图片,以及
3)所述标记等于1。
2.根据权利要求1所述的方法,
在检查比特流一致性和输出时序解码器一致性的情况下:
当满足条件集合时将初始移除延迟变量设置为第二初始CPB移除延迟参数,以及当不满足条件集合时将初始移除延迟变量设置为第一初始CPB移除延迟参数。
3.一种用于缓冲比特流的电子设备,包括:
解码电路,配置为解码通过使用以下编码电路生成的比特流,
编码电路,配置为编码第一初始编码图片缓冲器CPB移除延迟参数、指示是否存在第二初始CPB移除延迟参数的标记、以及当所述标记指示存在时的第二初始CPB移除延迟参数,
其中,
当满足条件集合时将初始移除延迟变量设置为第二初始CPB移除延迟参数,以及当不满足所述条件集合时将初始移除延迟变量设置为第一初始CPB移除延迟参数,
其中,所述条件集合包括以下各项:
1)第一访问单元仅包括I条带,
2)不存在先行图片,以及
3)所述标记等于1。
4.根据权利要求3所述的电子设备,
在检查比特流一致性和输出时序解码器一致性的情况下:
当满足条件集合时将初始移除延迟变量设置为第二初始CPB移除延迟参数,以及当不满足条件集合时将初始移除延迟变量设置为第一CPB移除延迟参数。
5.一种用于缓冲由多个块组成的比特流的电子设备,包括:
存储器;以及
处理器,其中,所述处理器被配置为执行步骤:
解码通过使用以下编码步骤生成的比特流:编码第一初始CPB移除延迟参数、指示是否存在第二初始CPB移除延迟参数的标记、以及当所述标记指示存在时的第二初始CPB移除延迟参数,
其中,
当满足条件集合时将初始移除延迟变量设置为第二初始CPB移除延迟参数,以及当不满足所述条件集合时将初始移除延迟变量设置为第一初始CPB移除延迟参数,
其中,所述条件集合包括以下各项:
1)第一访问单元仅包括I条带,
2)不存在先行图片,以及
3)所述标记等于1。
CN201711111220.1A 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备 Active CN107770550B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/447,095 2012-04-13
US13/447,095 US9402082B2 (en) 2012-04-13 2012-04-13 Electronic devices for sending a message and buffering a bitstream
CN201380019557.3A CN104221382B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201380019557.3A Division CN104221382B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备

Publications (2)

Publication Number Publication Date
CN107770550A CN107770550A (zh) 2018-03-06
CN107770550B true CN107770550B (zh) 2020-07-28

Family

ID=49325551

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201711111230.5A Active CN107770551B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备
CN201380019557.3A Active CN104221382B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备
CN201711111220.1A Active CN107770550B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201711111230.5A Active CN107770551B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备
CN201380019557.3A Active CN104221382B (zh) 2012-04-13 2013-04-12 用于发送消息和缓冲比特流的电子设备

Country Status (6)

Country Link
US (3) US9402082B2 (zh)
EP (1) EP2837188B1 (zh)
JP (1) JP6240157B2 (zh)
CN (3) CN107770551B (zh)
HK (3) HK1204739A1 (zh)
WO (1) WO2013153829A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9351016B2 (en) 2012-04-13 2016-05-24 Sharp Kabushiki Kaisha Devices for identifying a leading picture
CA2870989C (en) 2012-04-23 2018-11-20 Panasonic Intellectual Property Corporation Of America Encoding method, decoding method, encoding apparatus, decoding apparatus, and encoding and decoding apparatus
US20130279882A1 (en) 2012-04-23 2013-10-24 Apple Inc. Coding of Video and Audio with Initialization Fragments
JP5891975B2 (ja) * 2012-07-02 2016-03-23 富士通株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法および動画像復号方法
WO2015056158A1 (en) * 2013-10-14 2015-04-23 Nokia Technologies Oy Multi-layer hypothetical reference decoder
US9794558B2 (en) 2014-01-08 2017-10-17 Qualcomm Incorporated Support of non-HEVC base layer in HEVC multi-layer extensions
US10356415B2 (en) 2014-06-20 2019-07-16 Qualcomm Incorporated Systems and methods for constraining representation format parameters for a parameter set
WO2016127142A1 (en) * 2015-02-05 2016-08-11 Cisco Technology, Inc. Pvr assist information for hevc bitstreams
KR102477964B1 (ko) * 2015-10-12 2022-12-16 삼성전자주식회사 미디어 전송 시스템에서 비디오 비트스트림의 임의 접근 및 재생을 가능하게 하는 기법
JP6119891B2 (ja) * 2016-02-25 2017-04-26 富士通株式会社 動画像符号化方法
US11184624B2 (en) * 2016-05-19 2021-11-23 Qualcomm Incorporated Regional random access in pictures
JP6237829B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像符号化用コンピュータプログラム
JP6237830B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像復号方法
JP6237831B2 (ja) * 2016-06-23 2017-11-29 富士通株式会社 動画像復号用コンピュータプログラム
WO2020256048A1 (ja) * 2019-06-18 2020-12-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法、および復号方法
JP7438835B2 (ja) * 2020-04-21 2024-02-27 株式会社東芝 サーバ装置、通信システム、プログラムおよび情報処理方法
CN117834916A (zh) 2020-05-22 2024-04-05 字节跳动有限公司 访问单元中图片信息的信令

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1926863A (zh) * 2004-06-27 2007-03-07 苹果电脑有限公司 多通路视频编码
CN101578867A (zh) * 2007-01-05 2009-11-11 汤姆森许可贸易公司 针对可缩放视频编码的假定参考解码器
CN101690069A (zh) * 2007-05-30 2010-03-31 艾利森电话股份有限公司 实时通信系统中基于抖动的媒体层调适

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8615038B2 (en) * 2004-12-06 2013-12-24 Nokia Corporation Video coding, decoding and hypothetical reference decoder
JP5056560B2 (ja) * 2008-03-17 2012-10-24 富士通株式会社 符号化装置、復号化装置、符号化方法および復号化方法
US20100167689A1 (en) * 2008-07-07 2010-07-01 Hossein Alexander Sepehri-Nik Method and apparatus for determining whether a cellular phone chip is dormant
US20100130136A1 (en) * 2008-08-22 2010-05-27 Hossein Alexander Sepehri-Nik System and Method for Interpreting and Classifying Signals in Communications Systems
JP5131101B2 (ja) * 2008-09-09 2013-01-30 富士通株式会社 動画像編集装置および動画像編集プログラム
KR20110106465A (ko) * 2009-01-28 2011-09-28 노키아 코포레이션 비디오 코딩 및 디코딩을 위한 방법 및 장치
JP5332773B2 (ja) * 2009-03-18 2013-11-06 ソニー株式会社 画像処理装置および方法
US8341168B1 (en) * 2009-06-04 2012-12-25 Workday, Inc. System for displaying hierarchical data
US9532055B2 (en) * 2012-04-16 2016-12-27 Microsoft Technology Licensing, Llc Constraints and unit types to simplify video random access

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1926863A (zh) * 2004-06-27 2007-03-07 苹果电脑有限公司 多通路视频编码
CN101578867A (zh) * 2007-01-05 2009-11-11 汤姆森许可贸易公司 针对可缩放视频编码的假定参考解码器
CN101690069A (zh) * 2007-05-30 2010-03-31 艾利森电话股份有限公司 实时通信系统中基于抖动的媒体层调适

Also Published As

Publication number Publication date
CN107770551B (zh) 2020-05-01
WO2013153829A1 (en) 2013-10-17
EP2837188A1 (en) 2015-02-18
US20130273945A1 (en) 2013-10-17
JP2015516752A (ja) 2015-06-11
US10390049B2 (en) 2019-08-20
HK1248041A1 (zh) 2018-10-05
US9402082B2 (en) 2016-07-26
CN104221382B (zh) 2017-12-05
EP2837188A4 (en) 2016-01-13
EP2837188B1 (en) 2019-03-13
JP6240157B2 (ja) 2017-11-29
HK1248042A1 (zh) 2018-10-05
US20160301730A1 (en) 2016-10-13
US9699234B2 (en) 2017-07-04
US20170289576A1 (en) 2017-10-05
CN107770551A (zh) 2018-03-06
CN104221382A (zh) 2014-12-17
HK1204739A1 (zh) 2015-11-27
CN107770550A (zh) 2018-03-06

Similar Documents

Publication Publication Date Title
CN107770550B (zh) 用于发送消息和缓冲比特流的电子设备
US11553198B2 (en) Removal delay parameters for video coding
US11076160B2 (en) Devices and methods for identifying a leading picture
US10489426B2 (en) Category-prefixed data batching of coded media data in multiple categories
KR101749472B1 (ko) 서브픽처 버퍼 파라미터를 시그널링하기 위한 전자 장치
US10382809B2 (en) Method and decoder for decoding a video bitstream using information in an SEI message
US9426460B2 (en) Electronic devices for signaling multiple initial buffering parameters
US20150103895A1 (en) Electronic devices for signaling multiple initial buffering parameters
KR20140130433A (ko) 가상 레퍼런스 디코더의 초-저지연 모드를 사용하기 위한 방법 및 장치
WO2014049974A1 (en) Electronic devices for signaling multiple initial buffering parameters

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1248042

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant