CN104412598A - 发信号通知基于子图片的假想参考解码器参数的电子设备 - Google Patents

Abstract

描述了一种用于发送消息的电子设备。该电子设备包括处理器和存储在与处理器电子通信的存储器中的指令。该电子设备确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中。该电子设备还生成公共解码单元CPB去除延迟参数或用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数。该电子设备还发送具有该公共解码单元CPB去除延迟参数或该解码单元CPB去除延迟参数的图片定时SEI消息。

Description

发信号通知基于子图片的假想参考解码器参数的电子设备

技术领域

本公开一般地涉及电子设备。更具体地，本公开涉及用于发信号通知基于子图片的假想参考解码器参数的电子设备。

背景技术

电子设备已变得更小且更强大以便满足消费者需要并且以便改进便携性和方便。消费者已变得依赖于电子设备并且已开始预期增加的功能性。电子设备的一些示例包括台式计算机、膝上型计算机、蜂窝电话、智能电话、媒体播放器、集成电路等。

一些电子设备被用于处理和显示数字媒体。例如，便携式电子设备现在允许数字媒体在消费者可以在的几乎任何位置处被消费。此外，一些电子设备可以提供数字媒体内容的下载或流式传输以用于消费者的使用和娱乐。

发明内容

技术问题

数字媒体的日益流行已提出数个问题。例如，为存储、传送和迅速回放高效地表示高质量数字媒体提出了数个挑战。如可以从本讨论所观察到的，以改进的性能更高效地表示数字媒体的系统和方法可能是有利的。

技术方案

根据本发明，提供了用于缓冲位流的电子设备，包括：确定图片定时SEI(辅助增强信息)消息以去除数据；在图片定时SEM消息中确定用于从CPB(编译图片缓冲器)中去除访问单元的访问单元CPB去除延迟参数；以及确定用于访问单元中的每个解码单元的一个或多个解码单元CPB去除延迟；其中，解码单元CPB去除延迟的总和等于访问单元CPB去除延迟参数。

根据本发明，提供了用于发送消息的电子设备，包括：处理器；与处理器电子通信的存储器；存储在存储器中的指令，所述指令能够被执行以：当编译图片缓冲器(CPB)支持在子图片级别上的操作时，确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中；当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息中时，生成该公共解码单元CPB去除延迟参数，其中，公共解码单元CPB去除延迟参数适用于来自CPB的访问单元中的所有解码单元；当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，生成用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数；以及发送具有公共解码单元CPB去除延迟参数或解码单元CPB去除延迟参数的图片定时SEI消息。

根据本发明，提供了用于缓冲位流的电子设备，包括：处理器；与处理器电子通信的存储器；存储在存储器中的指令，所述指令能够被执行以：确定CPB针对访问单元发信号通知关于子图片级别的参数；当接收到的图片定时辅助增强信息(SEI)消息包括公共解码单元编译图片缓冲器(CPB)去除延迟标志时，确定适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数；当图片定时SEI消息不包括公共解码单元CPB去除延迟标志时，确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数；使用公共解码单元CPB去除延迟参数或单独的解码单元CPB去除延迟参数来从CPB去除解码单元；以及对访问单元中的解码单元进行解码。

根据本发明，提供了用于发送消息的方法，包括：当编译图片缓冲器(CPB)支持在子图片级别上的操作时，确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中；当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息中时，生成该公共解码单元CPB去除延迟参数，其中，公共解码单元CPB去除延迟参数适用于来自CPB的访问单元中的所有解码单元；当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，为访问单元中的每个解码单元生成单独的解码单元CPB去除延迟参数；以及发送具有公共解码单元CPB去除延迟参数或解码单元CPB去除延迟参数的图片定时SEI消息。

附图说明

图1是图示在其中可以实现用于发送消息并且缓冲位流的系统和方法的一个或多个电子设备的示例的框图；

图2是图示用于发送消息的方法的一个配置的流程图；

图3是图示用于确定用于访问单元中的解码单元的一个或多个去除延迟的方法的一个配置的流程图；

图4是图示用于缓冲位流的方法的一个配置的流程图；

图5是图示用于确定用于访问单元中的解码单元的一个或多个去除延迟的方法的一个配置的流程图；

图6是图示电子设备上的编码器604的一个配置的框图；

图7是图示电子设备上的解码器的一个配置的框图；

图8图示可以在传送电子设备中利用的各种组件；

图9是图示可以在接收电子设备中利用的各种组件的框图；

图10是图示在其中可以实现用于发送消息的系统和方法的电子设备的一个配置的框图；以及

图11是图示在其中可以实现用于缓冲位流的系统和方法的电子设备的一个配置的框图。

具体实施方式

描述了用于发送消息的电子设备。该电子设备包括处理器和存储在与处理器电子通信的存储器中的指令。当编译图片缓冲器(CPB)支持在子图片级别上的操作时，电子设备确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中。当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息(或某个其它SEI消息或某个其它参数集，例如图片参数集或序列参考集或视频参数集或自适应参数集)中时，电子设备还生成该公共解码单元CPB去除延迟参数，其中，公共解码单元CPB去除延迟参数适用于来自CPB的访问单元中的所有解码单元。当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，电子设备还生成用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数。电子设备还发送具有公共解码单元CPB去除延迟参数或解码单元CPB去除延迟参数的图片定时SEI消息。

公共解码单元CPB去除延迟参数可以指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前，在从CPB中去除紧接的上一个解码单元之后要等待的子图片时钟滴答的数量。

此外，当解码单元是访问单元中的第一解码单元时，公共解码单元CPB去除延迟参数可以指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的第一解码单元之前从CPB中去除与上一个访问单元中的最近缓冲周期SEI消息相关联的访问单元中的最后解码单元之后要等待的子图片时钟滴答的数量。

相比之下，当解码单元是访问单元中的非第一解码单元时，公共解码单元CPB去除延迟参数可以指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前从CPB中去除与图片定时SEI消息相关联的访问单元中的上一个解码单元之后要等待的子图片时钟滴答的数量。

解码单元CPB去除延迟参数可以指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的第i个解码单元之前，从CPB中去除最后解码单元之后要等待的子图片时钟滴答的数量。

电子设备可以根据模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数来计算解码单元CPB去除延迟参数，其中cpb_removal_delay_length_minus1+1是公共解码单元CPB去除延迟参数的长度。

当CPB支持在访问单元级别上的操作时，电子设备还可以生成包括CPB去除延迟参数的图片定时SEI消息，所述CPB去除延迟参数指定在从CPB中去除与图片定时SEI消息相关联的访问单元数据之前，从CPB中去除与上一个访问单元中的最近缓冲周期SEI消息相关联的访问单元之后要等待多少个时钟滴答。

电子设备还可以确定CPB是否支持在子图片级别或访问单元级别上的操作。这可以包括确定图片定时标志，所述图片定时标志基于图片定时标志的值来指示编译图片缓冲器(CPB)是否提供支持在子图片级别上的操作的参数。可以在图片定时SEI消息中包括图片定时标志。

确定是否包括公共解码单元CPB去除延迟参数可以包括，当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息中时，将公共解码单元CPB去除延迟标志设定为1。它还可以包括，当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，将公共解码单元CPB去除延迟标志设定为0。可以在图片定时SEI消息中包括公共解码单元CPB去除延迟标志。

当CPB支持在子图片级别上的操作时，电子设备还可以生成指示用于访问单元中的每个解码单元的NAL单元的偏移一的数量的单独的网络抽象层(NAL)单元相关参数。替换地，或除之外，电子设备可以生成指示为访问单元中的每个解码单元所共有的NAL单元的偏移一的数量的公共NAL参数。

还描述了用于缓冲位流的电子设备。该电子设备包括处理器和存储在与处理器电子通信的存储器中的指令。电子设备确定CPB针对访问单元发信号通知关于子图片级别的参数。当接收到的图片定时辅助增强信息(SEI)消息包括公共解码单元编译图片缓冲器(CPB)去除延迟标志时，电子设备还确定适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数。当图片定时SEI消息不包括公共解码单元编译图片缓冲器(CPB)去除延迟标志时，电子设备还确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数。电子设备还使用公共解码单元CPB去除延迟参数或单独的解码单元CPB去除延迟参数来从CPB中去除解码单元。电子设备还对访问单元中的解码单元进行解码。

在一个配置中，电子设备确定图片定时标志被设定在图片定时SEI消息中。电子设备还可以根据

$\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}=\frac{(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\Σ}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i\left]\right)*t_{c,\mathrm{cub}}}{t_c}$

来设定CPB去除延迟参数cpb_removal_delay，其中du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量，以及i是索引。

替换地，电子设备可以设定CPB去除延迟参数cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]以便满足等式

$-1\≤[\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}*t_c-(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\Σ}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i]*t_{c,\mathrm{sub}})]\≤1$

其中，du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量，以及i是索引。

替换地，电子设备可以根据cpb_removal_delay*t_c＝du_cpb_removal_delay[num_decoding_units_minus1]*t_{c_sub}来设定CPB去除延迟参数cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量。

在一个配置中，电子设备确定图片定时标志被设定在图片定时SEI消息中。电子设备还可以设定CPB去除延迟参数cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]以便满足等式：-1<＝(cpb_removal_delay*t_c-du_cpb_removal_delay[num_decoding_units_minus1]*t_c,sub)<＝1，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元的解码单元的数量。

ClockDiff变量可以被定义为ClockDiff＝(num_units_in_tick-(num_units_in_sub_tick*(num_decoding_units_minus1+1))/time_scale)，其中num_units_in_tick是以对应于时钟滴答计数器的一个增量的频率time_scale Hz操作的时钟的时间单位的数目，num_units_in_sub_tick是以对应于子图片时钟滴答计数器的一个增量的频率time_scale Hz操作的时钟的时间单位的数目，num_decoding_units_minus1+1是访问单元中的解码单元的数量，以及time_scale是在一秒内经过的时间单位的数目。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1、CPB正在子图片级别下操作并且ClockDiff大于零时，根据：t_r(m)＝t_r,n(m)+t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})+ClockDiff来确定用于解码单元m的去除时间t_r(m)，其中t_r,n(m)是解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数(ceiling function)以及t_af(m)是解码单元m的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1、CPB正在访问单元级别下操作并且ClockDiff大于零时，根据：t_r(n)＝t_r,n(n)+t_c*Ceil((t_af(n)-t_r,n(n))/t_c)-ClockDiff来确定用于访问单元n的去除时间t_r(n)，其中t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，Ceil()是上取整函数以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+max((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/tc)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时表志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+max((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时表志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于不为最后解码单元的解码单元m的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于作为访问单元的最后解码单元m的解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub}))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间，以及t_af(m)是访问单元n中的最后解码单元m的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于不为最后解码单元的解码单元m的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于作为访问单元的最后解码单元m的解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(m)-t_r,n(m))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间，以及t_af(m)是访问单元n中的最后解码单元m的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于解码单元m的去除时间被设定为t_r(m)＝t_af(m)，其中t_r,n(m)是解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间，以及t_af(m)是访问单元n中的解码单元m的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_af(n)，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

附加地在一些情况下，可以在位流的一部分中发送标志以发信号通知上述替代等式中的哪些被用于决定解码单元的去除时间和访问单元的去除时间。在一种情况下该标志可以被称作du_au_cpb_alignment_mode_flag。如果du_au_cpb_alignment_mode_flag是1，则使用使在基于子图片的模式下操作的CPB的操作与在访问单元模式下操作的CPB对准的以上等式。如果du_au_cpb_alignment_mode_flag是0，则使用不使在基于子图片的模式下操作的CPB的操作与在访问单元模式下操作的CPB对准的以上等式。

在一种情况下可以在视频可用性信息(VUI)中发信号通知标志du_au_cpb_alignment_mode_flag。在另一情况下可以在图片定时SEI消息中发送标志du_au_cpb_alignment_mode_flag。在又一种情况下可以在位流的某个其它规范部分中发送标志du_au_cpb_alignment_mode_flag。以下在表(0)中给出依照本文所公开的系统和方法的修改的语法和语义的一个示例。

[表0]

应该注意的是，可以使用与上面用于各种变量的那些不同的符号(名称)。例如访问单元n的t_r(n)可以被称作CpbRemovalTime(n)，解码单元n的t_r(m)可以被称作CpbRemovalTime(m)，t_{c_sub}可以被称作ClockSubTick(时钟子滴答)，t_c可以被称作ClockTick(时钟滴答)，访问单元m的t_af(n)可以被称作访问单元n的FinalArrivalTime(n)，解码单元m的t_af(m)可以被称作FinalArrivalTime(m)，t_r,n(n)可以被称作访问单元n的NominalRemovalTime(n)，t_r,n(m)可以被称作解码单元m的NominalRemovalTime(m)。

还描述了用于通过电子设备来发送消息的方法。该方法包括当编译图片缓冲器(CPB)支持在子图片级别上的操作时，确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中。该方法还包括当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息中时，生成该公共解码单元CPB去除延迟参数，其中，公共解码单元CPB去除延迟参数适用于来自CPB的访问单元中的所有解码单元。该方法还包括当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，为访问单元中的每个解码单元生成单独的解码单元CPB去除延迟参数。该方法还包括发送具有公共解码单元CPB去除延迟参数或解码单元CPB去除延迟参数的图片定时SEI消息。

还描述了用于通过电子设备来缓冲位流的方法。该方法包括确定CPB针对访问单元发信号通知关于子图片级别的参数。该方法还包括当接收到的图片定时辅助增强信息(SEI)消息包括公共解码单元编译图片缓冲器(CPB)去除延迟标志时，确定适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数。该方法还包括当图片定时SEI消息不包括公共解码单元编译图片缓冲器(CPB)去除延迟标志时，确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数。该方法还包括使用公共解码单元CPB去除延迟参数或单独的解码单元CPB去除延迟参数来从CPB中去除解码单元。该方法还包括对访问单元中的解码单元进行解码。

本文所公开的系统和方法描述了用于发送消息并且缓冲位流的电子设备。例如，本文所公开的系统和方法描述了针对从子图片参数开始的位流进行缓冲。在一些配置中，本文所公开的系统和方法可以描述发信号通知基于子图片的假想参考解码器(HRD)参数。例如，本文所公开的系统和方法描述了对图片定时辅助增强信息(SEI)消息的修改。本文所公开的系统和方法(例如，HRD修改)可以在每个子图片到达并且被以规则间隔从CPB中去除时产生参数的更紧凑的信令。

此外，当存在子图片级别CPB去除延迟参数时，编译图片缓冲器(CPB)可以在访问单元级别或子图片级别下操作。本系统和方法还可以强加位流约束，使得基于子图片级别的CPB操作和访问单元级别CPB操作产生解码单元去除的相同定时。具体地，访问单元中的最后解码单元当在子图片模式下操作时的去除的定时和访问单元当在访问单元模式下操作时的去除的定时将是相同的。

应该注意的是，尽管参考HRD使用术语“假想”，但是可以物理上实现HRD。例如，“HRD”可以用来描述实际解码器的实施方式。在一些配置中，可以实现HRD以便确定位流是否符合高效率视频编译(HEVC)规范。例如，HRD可以用来确定类型I位流和类型II位流是否符合HEVC规范。类型I位流可以包含仅视频编译层(VCL)网络访问层(NAL)单元和填充数据NAL单元。类型II位流可以包含附加的其它NAL单元和语法元素。

视频编译联合协作团队(JCTVC)文档JCTVC-I0333包括基于子图片的HRD并且支持图片定时SEI消息。这个功能性已并入高效率视频编译(HEVC)委员会草案(JCTVC-I1003)。

以下在表(1)中给出依照本文所公开的系统和方法的修改的语法和语义的一个示例。依照本文所公开的系统和方法的修改用粗体文本表示。

[表1]

以下给出依照本文所公开的系统和方法的有关缓冲周期SEI消息语义的示例。特别地，以下给出有关经修改的语法元素的语义的附加的细节。当NalHrdBpPresentFlag或VclHrdBpPresentFlag等于1时，缓冲周期SEI消息能够与位流中的任何访问单元相关联，并且缓冲周期SEI消息可以与每个瞬时解码刷新(IDR)访问单元相关联、与每个干净随机访问(CRA)访问单元相关联，并且其中每个访问单元与恢复点SEI消息相关联。对于一些应用，缓冲周期SEI消息的频繁存在可能是所希望的。缓冲周期被指定为具有解码顺序的缓冲周期SEI消息的两个实例之间的访问单元的集合。

seq_parameter_set_id指定包含序列HRD属性的序列参数集。seq_parameter_set_id的值可以等于由与缓冲周期SEI消息相关联的基本编译图片所引用的图片参数集中的seq_parameter_set_id的值。seq_parameter_set_id的值可以在0至31范围内(首末项包括在内)。

initial_cpb_removal_delay[SchedSelIdx]指定在CPB中和与缓冲周期SEI消息相关联的访问单元相关联的已编译数据的第一位的到达时间与从CPB中去除与相同访问单元相关联的已编译数据的时间之间的第SchedSelIdx个CPB的延迟，以得到HRD安装之后的第一缓冲周期。该语法元素具有由initial_cpb_removal_delay_length_minus1+1所给出的位长度。它以90kHz时钟为单位。initial_cpb_removal_delay[SchedSelIdx]可能不等于0并且可能不超过90000*(CpbSize[SchedSelIdx]/BitRate[SchedSelIdx])，时间相当于90kHz时钟单位的CPB尺寸。

initial_cpb_removal_delay_offset[SchedSelIdx]被与cpb_removal_delay相结合地用于第SchedSelIdx个CPB以指定编译访问单元到CPB的初始递送时间。initial_cpb_removal_delay_offset[SchedSelIdx]以90kHz时钟为单位。initial_cpb_removal_delay_offset[SchedSelIdx]语法元素是其位长度由initial_cpb_removal_delay_length_minus1+1所给出的固定长度代码。这个语法元素不由解码器使用，并且仅对于递送调度器(HSS)(例如，如JCTVC-I1003的附录C中所指定的)来说是需要的。

在整个编译视频序列之上，initial_cpb_removal_delay[SchedSelIdx]和initial_cpb_removal_delay_offset[SchedSelIdx]的总和对于SchedSelIdx的每个值可以为常数。

initial_du_cpb_removal_delay[SchedSelIdx]指定在CPB中和与缓冲周期SEI消息相关联的访问单元中的第一解码单元相关联的已编译数据的第一位的到达时间与从CPB中去除与相同解码单元相关联的已编译数据的时间之间的第SchedSelIdx个CPB的延迟，以得到HRD初始化之后的第一缓冲周期。该语法元素具有由initial_cpb_removal_delay_length_minus1+1所给出的位长度。它以90kHz时钟为单位。initial_du_cpb_removal_delay[SchedSelIdx]可能不等于0并且可能不超过90000*(CpbSize[SchedSelIdx]/BitRate[SchedSelIdx])，时间相当于90kHz时钟单位的CPB尺寸。

initial_du_cpb_removal_delay_offset[SchedSelIdx]被与cpb_removal_delay相结合地用于第SchedSelIdx个CPB以指定解码单元到CPB的初始递送时间。initial_cpb_removal_delay_offset[SchedSelIdx]以90kHz时钟为单位。initial_du_cpb_removal_delay_offset[SchedSelIdx]语法元素是其位长度由initial_cpb_removal_delay_length_minus1+1所给出的固定长度代码。这个语法元素不由解码器使用，并且仅对于递送调度器(HSS)(例如，如JCTVC-I1003的附录C中所指定的)来说是需要的。

在整个编译视频序列之上，initial_du_cpb_removal_delay[SchedSelIdx]和initial_du_cpb_removal_delay_offset[SchedSelIdx]的总和对于SchedSelIdx的每个值可以为常数。

以下给出依照本文所公开的系统和方法的有关图片定时SEI消息语义的示例。特别地，以下给出有关经修改的语法元素的语义的附加的细节。

图片定时SEI消息的语法取决于对于与图片定时SEI消息相关联的已编译图片来说为活动的序列参数集的内容。然而，除非瞬时解码刷新(IDR)访问单元的图片定时SEI消息前面是相同访问单元内的缓冲周期SEI消息，否则所关联的序列参数集的激活(并且，对于不为位流中的第一图片的IDR图片，已编译图片是IDR图片的确定)不发生直到已编译图片的第一编译码片网络抽象层(NAL)单元的解码为止。因为已编译图片的已编译码片NAL单元以NAL单元顺序紧跟图片定时SEI消息之后，所以可能存在对于解码器来说有必要存储包含图片定时SEI消息的原始字节序列有效负荷(RBSP)直到确定对于已编译图片来说将为活动的序列参数的参数为止、并且然后执行图片定时SEI消息的解析的情况。

图片定时SEI消息存在于位流中被指定如下。如果CpbDpbDelaysPresentFlag等于1，则一个图片定时SEI消息可以存在于已编译视频序列的每个访问单元中。否则(CpbDpbDelaysPresentFlag等于0)，没有图片定时SEI消息可以存在于已编译视频序列的每个访问单元中。

cpb_removal_delay指定在从缓冲器中去除与图片定时SEI消息相关联的访问单元数据之前从CPB中去除与最近缓冲周期SEI消息相关联的访问单元之后要等待多少个时钟滴答(见JCTVC-I1003的子条款E.2.1)。如JCTVC-I1003的附录C中所指定的，这个值还用来针对HSS计算访问单元数据到CPB中的最早可能的到达时间。该语法元素是其位长度由cpb_removal_delay_length_minus1+1所给出的固定长度代码。cpb_removal_delay是模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数。

确定语法元素cpb_removal_delay的长度(以位为单位)的cpb_removal_delay_length_minus1的值是编译在对于与图片定时SEI消息相关联的基本编译图片来说为活动的序列参数集中的cpb_removal_delay_length_minus1的值，但是cpb_removal_delay指定相对于包含缓冲周期SEI消息的上一个访问单元(其可以是不同编译视频序列的访问单元)的去除时间的时钟滴答的数目。

dpb_output_delay用来计算图片的解码图片缓冲器(DPB)输出时间。它指定在从DPB输出已解码图片之前从CPB中去除访问单元中的最后解码单元之后要等待多少个时钟滴答(见JCTVC-I1003的子条款C.2)。

相对于DPB，当图片仍然被标记为“用于短期参考”或“用于长期参考”时，在其输出时间不从DPB中去除图片。对于解码图片指定仅一个dpb_output_delay。语法元素dpb_output_delay的长度由dpb_output_delay_length_minus1+1以位为单位给出。当max_dec_pic_buffering[max_temporal_layers_minus1]等于0时，dpb_output_delay可以等于0。

从被从如JCTVC-I1003的子条款C.2中所指定的输出定时符合解码器输出的任何图片的dpb_output_delay得到的输出时间可以先于以解码顺序从任何后续编译视频序列中的所有图片的dpb_output_delay得到的输出时间。由这个语法元素的值所建立的图片输出顺序可以是如由如由子条款所指定的PicOrderCnt()的值建立的相同顺序。对于因为它们按照解码顺序先于具有等于0或推理为等于1的no_output_of_prior_pics_flag的IDR图片而不通过子条款的“冲击”过程输出的图片，从dpb_output_delay得到的输出时间可以随着PicOrderCnt()相对于相同编译视频序列内的所有图片的渐增值而增加。

num_decoding_units_minus1加1指定图片定时SEI消息与之相关联的访问单元中的解码单元的数目。num_decoding_units_minus1的值可以在0至PicWidthInCtbs*PicHeightInCtbs-1范围内(首末项包括在内)。

等于0的common_du_cpb_removal_delay_flag指定语法元素common_du_cpb_removal_delay存在。等于0的common_du_cpb_removal_delay_flag指定语法元素common_du_cpb_removal_delay不存在。

common_du_cpb_removal_delay指定信息如下：如果解码单元是与图片定时SEI消息相关联的访问单元中的第一解码单元，则common_du_cpb_removal_delay指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的第一解码单元之前从CPB中去除与上一个访问单元中的最近缓冲周期SEI消息相关联的访问单元中的最后解码单元之后要等待多少个子图片时钟滴答(见JCTVC-I1003的子条款E.2.1)。

否则，common_du_cpb_removal_delay指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前从CPB中去除与图片定时SEI消息相关联的访问单元中的上一个解码单元之后要等待多少个子图片时钟滴答(见JCTVC-I1003的子条款E.2.1)。如附录C中所指定的，这个值还用来针对HSS计算解码单元数据到CPB中的最早可能的到达时间。该语法元素是其位长度由cpb_removal_delay_length_minus1+1所给出的固定长度代码。common_du_cpb_removal_delay是模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数。

指定common_du_cpb_removal_delay的供替换的方式如下：

common_du_cpb_removal_delay指定在从PCB中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前从CPB中去除最后解码单元之后要等待多少个子图片时钟滴答(见JCTVC-I1003的子条款E.2.1)。如附录C中所指定的，这个值还用来针对HSS计算解码单元数据到CPB中的最早可能的到达时间。该语法元素是其位长度由cpb_removal_delay_length_minus1+1所给出的固定长度代码。common_du_cpb_removal_delay是模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数。

确定语法元素common_du_cpb_removal_delay的长度(以位为单位)的cpb_removal_delay_length_minus1的值是编译在对于与图片定时SEI消息相关联的已编译图片来说为活动的序列参数集中的cpb_removal_delay_length_minus1的值，但是common_du_cpb_removal_delay指定相对于包含缓冲周期SEI消息的上一个访问单元(其可以是不同编译视频序列的访问单元)中的第一解码单元的去除时间的子图片时钟滴答的数目。

num_nalus_in_du_minus1[i]加1指定图片定时SEI消息与之相关联的访问单元的第i个解码单元中的NAL单元的数目。num_nalus_in_du_minus1[i]的值可以在0至PicWidthInCtbs*PicHeightInCtbs-1范围内(首末项包括在内)。

访问单元的第一解码单元包括访问单元中按照解码顺序的前num_nalus_in_du_minus1[0]+1个连续的NAL单元。访问单元的第i个(其中i大于0)解码单元包括按照解码顺序紧接访问单元的先前解码单元中的最后NAL单元之后的num_nalus_in_du_minus1[i]+1个连续的NAL单元。可以在每个解码单元中存在至少一个VCL NAL单元。可以在相同解码单元中包括与VCL NAL单元相关联的所有非VCLNAL单元。

du_cpb_removal_delay[i]指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的第i个解码单元之前从CPB中去除与上一个访问单元中的最近缓冲周期SEI消息相关联的访问单元中的第一解码单元之后要等待多少个子图片时钟滴答(见JCTVC-I1003的子条款E.2.1)。这个值还用来针对HSS计算解码单元数据到CPB中的最早可能的到达时间(例如，如JCTVC-I1003的附录C中所指定的)。该语法元素是其位长度由cpb_removal_delay_length_minus1+1所给出的固定长度代码。du_cpb_removal_delay[i]是模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数。

确定语法元素du_cpb_removal_delay[i]的长度(以位为单位)的cpb_removal_delay_length_minus1的值是编译在对于与图片定时SEI消息相关联的已编译图片来说为活动的序列参数集中的cpb_removal_delay_length_minus1的值，但是du_cpb_removal_delay[i]指定相对于包含缓冲周期SEI消息的上一个访问单元(其可以是不同编译视频序列的访问单元)中的第一解码单元的去除时间的子图片时钟滴答的数目。

在一个配置中，可以实现解码单元去除的定时和解码单元的解码如下。

如果SubPicCpbFlag等于0，则变量CpbRemovalDelay(m)被设定为与作为解码单元m的访问单元相关联的图片定时SEI消息中的cpb_removal_delay的值，并且变量T_c被设定为t_c。否则如果SubPicCpbFlag等于1并且common_du_cpb_removal_delay_flag是0，则对于与包含解码单元m的访问单元相关联的图片定时SEI消息中的解码单元m(其中m范围从0到num_decoding_units_minus1)变量CpbRemovalDelay(m)被设定为du_cpb_removal_delay[i]的值，并且变量T_c被设定为t_{c_sub}。

在一些情况下，否则如果SubPicCpbFlag等于1并且common_du_cpb_removal_delay_flag是0，则对于与包含解码单元m的访问单元相关联的图片定时SEI消息中的解码单元m(其中m范围从0到num_decoding_units_minus1)变量CpbRemovalDelay(m)被设定为(m+1)*du_cpb_removal_delay[i]的值，并且变量T_c被设定为t_{c_sub}。

否则，如果SubPicCpbFlag等于1并且common_du_cpb_removal_delay_flag是1，则对于与包含解码单元m的访问单元相关联的图片定时SEI消息中的解码单元m变量CpbRemovalDelay(m)被设定为common_du_cpb_removal_delay的值，并且变量T_c被设定为t_{c_sub}。

当解码单元m是具有n等于0的解码单元(初始化HRD的访问单元的第一解码单元)时，来自CPB的解码单元的标称去除时间由t_r,n(0)＝InitCpbRemovalDelay[SchedSelIdx]/90000来指定。

当解码单元m是不初始化HRD的缓冲周期的第一访问单元的第一解码单元时，来自CPB的解码单元的标称去除时间由t_r,n(m)＝t_r,n(m_b)+T_c*CpbRemovalDelay(m)来指定，其中t_r,n(m_b)是先前缓冲周期的第一解码单元的标称去除时间。

当解码单元m是缓冲周期的第一解码单元时，m_b在解码单元m的去除时间t_r,n(m)被设定等于m。不为缓冲周期的第一解码单元的解码单元m的标称去除时间t_r,n(m)由t_r,n(m)＝t_r,n(m_b)+T_c*CpbRemovalDelay(m)给出，其中t_r,n(m_b)是当前缓冲周期的第一解码单元的标称去除时间。

解码单元m的去除时间被指定如下。如果low_delay_hrd_flag等于0或t_r,n(m)>＝t_af(m)，则解码单元m的去除时间由t_r(m)＝t_r,n(m)来指定。否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，解码单元m的去除时间由t_r(m)＝t_r,n(m)+T_c*Ceil((t_af(m)-t_r,n(m))/T_c)来指定。后者情况(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))指示解码单元m的尺寸b(m)足够大以致它防止在标称去除时间的去除。

在另一情况下解码单元m的去除时间被指定如下。如果low_delay_hrd_flag等于0或t_r,n(m)>＝t_af(m)，则解码单元m的去除时间由t_r(m)＝t_r,n(m)来指定。否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，不为访问单元中的最后解码单元的解码单元m的去除时间由t_r(m)＝t_af(m)来指定，以及作为访问单元中的最后解码单元的解码单元m的去除时间t_r(m)＝t_r,n(m)+T_c*Ceil((t_af(m)-t_r,n(m))/T_c)。后者情况(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))指示解码单元m的尺寸b(m)足够大以致它防止在标称去除时间的去除。

在另一情况下解码单元m的去除时间被指定如下。如果low_delay_hrd_flag等于0或t_r,n(m)>＝t_af(m)，则解码单元m的去除时间由t_r(m)＝t_r,n(m)来指定。否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，不为访问单元中的最后解码单元的解码单元m的去除时间由t_r(m)＝t_af(m)来指定，并且作为访问单元中的最后解码单元的解码单元m的去除时间t_r(m)＝t_r,n(m)+t_c*Ceil((t_af(m)-t_r,n(m))/t_c)。后者情况(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))指示解码单元m的尺寸b(m)足够大以致它防止在标称去除时间的去除。

在另一情况下解码单元m的去除时间被指定如下。如果low_delay_hrd_flag等于0或t_r,n(m)>＝t_af(m)，则解码单元m的去除时间由t_r(m)＝t_r,n(m)来指定。否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，解码单元m的去除时间由t_r(m)＝t_af(m)来指定。后者情况(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))指示解码单元m的尺寸b(m)足够大以致它防止在标称去除时间的去除。

当SubPicCpbFlag等于1时，访问单元n的标称CPB去除时间t_r,n(n)被设定为访问单元n中的最后解码单元的标称CPB去除时间，访问单元n的CPB去除时间t_r(n)被设定为访问单元n中的最后解码单元的CPB去除时间。

当SubPicCpbFlag等于0时，每个解码单元是访问单元，因此访问单元n的标称CPB去除时间和CPB去除时间是解码单元n的标称CPB去除时间和CPB去除时间。

在解码单元m的CPB去除时间，解码单元被即刻解码。

以下在表(2)中给出依照本文所公开的系统和方法的用于图片定时SEI消息的修改的语法和语义的另一示例。依照本文所公开的系统和方法的修改用粗体文本表示。

[表2]

表(2)中的所图示的示例包括语法元素common_num_nalus_in_du_minus1，其可以用来确定在去除解码单元时应该从CPB中去除多少数据。common_num_nalus_in_du_minus1plus 1指定图片定时SEI消息与之相关联的访问单元的每个解码单元中的NAL单元的数目。common_num_nalus_in_du_minus1的值可以在0至PicWidthInCtbs*PicHeightInCtbs-1范围内(首末项包括在内)。

访问单元的第一解码单元包括访问单元中按照解码顺序的前num_nalus_in_du_minus1[0]+1个连续的NAL单元。访问单元的第i个(其中i大于0)解码单元包括按照解码顺序紧接访问单元的先前解码单元中的最后NAL单元之后的common_num_nalus_in_du_minus1+1个连续的NAL单元。在每个解码单元中可以存在至少一个VCL NAL单元。与VCL NAL单元相关联的所有非VCL NAL单元可以被包括在相同的解码单元中。

以下在表(3)中给出依照本文所公开的系统和方法的用于图片定时SEI消息的修改的语法和语义的另一示例。依照本文所公开的系统和方法的修改用粗体文本表示。

[表3]

表(3)中的所图示的示例包括语法元素common_num_nalus_in_du_flag，其在等于1时，指定语法元素common_num_nalus_in_du_minus1存在。等于0的common_num_nalus_in_du_flag指定语法元素common_num_nalus_in_du_minus1不存在。

在又一个实施例中标志可能不发送标志common_du_cpb_removal_delay_flagcommon_num_nalus_in_du_minus1。替代地每次能够发送语法元素common_num_nalus_in_du_minus1和common_du_cpb_removal_delay。在这种情况下，用于这些语法元素的值0(或某个其它值)能够用来指示这些元素未被发信号通知。

除对图片定时SEI消息的语法元素和语义的修改之外，本系统和方法还可以实现位流约束，使得基于子图片的CPB操作和访问单元级别CPB操作产生解码单元去除的相同定时。

当sub_pic_cpb_params_present_flag等于1时那么子图片级别CPB去除延迟参数存在，CPB可以在访问单元级别或子图片级别下操作。等于0的sub_pic_cpb_params_present_flag指定子图片级别CPB去除延迟参数不存在并且CPB在访问单元级别下操作。当sub_pic_cpb_params_present_flag不存在时，其值被推理为等于0。

为了支持在访问单元级别或子图片级别两者下的操作，可以使用以下位流约束：如果sub_pic_cpb_params_present_flag是1，则它是在发信号通知cpb_removal_delay和所有i的du_cpb_removal_delay[i]的值时遵守以下约束的位流符合的要求：

$\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}=\frac{(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\&Sigma;}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i\left]\right)*t_{c,\mathrm{cub}}}{t_c}$

其中du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量，以及i是索引。在一些实施例中能够添加容差参数以满足上述约束。

为了支持在访问单元级别或子图片级别两者下的操作，可以使用如下的位流约束：假设变量T_du(k)被定义为：

$T_{\mathrm{du}}\left(k\right)=T_{\mathrm{du}}(k-1)+t_{c\_\mathrm{sub}}*\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decodi\; ng}\_\mathrm{units}\_\mathrm{m\; inus}{1}_k}{\mathrm{\&Sigma;}}}(\mathrm{du}\_\mathrm{cpb}\_\mathrm{remo\; val}\_\mathrm{delay}\_\min \mathrm{us}{1}_k[i]+1)$

其中du_cpb_removal_delay_minus1_k[i]和num_decoding_units_minus1_k是用于第k个访问单元的第i个解码单元的参数(其中对于初始了HRD的访问单元k＝0并且对于k<1T_du(k)＝0)，并且其中du_cpb_removal_delay_minus1_k[i]+1＝du_cpb_removal_delay_k[i]是用于第k个访问单元的第I个解码单元的解码单元CPB去除延迟参数，以及num_decoding_units_minus1_k是第k个访问单元中的解码单元的数目，t_c是时钟滴答，t_c,sub是子图片时钟滴答，并且i和k是索引。然后当图片定时标志(例如，sub_pic_cpb_params_present_flag)被设定为1时，以下约束将为真：(au_cpb_removal_delay_minus1+1)*t_c＝＝T_du(k)，其中(au_cpb_removal_delay_minus1+1)＝cpb_removal_delay(CPB去除延迟)。因此在这种情况下，CPB去除延迟(au_cpb_removal_delay_minus1+1)被设定为使得基于子图片的CPB操作和基于访问单元的CPB操作的操作产生访问单元去除的相同定时和访问单元去除的最后解码单元。

为了支持在访问单元级别或子图片级别两者下的操作，可以使用以下位流约束：如果sub_pic_cpb_params_present_flag是1，则它是在发信号通知cpb_removal_delay和所有i的du_cpb_removal_delay[i]的值时遵守以下约束的位流符合的要求：

$-1\&le;[\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}*t_c-(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\&Sigma;}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i]*t_{c,\mathrm{sub}})]\&le;1$

其中du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量并且i是索引。

为了支持在访问单元级别或子图片级别两者下的操作，可以使用以下位流约束：如果sub_pic_cpb_params_present_flag是1，则它是在发信号通知cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]的值时遵守以下约束的位流符合的要求：cpb_removal_delay*t_c＝du_cpb_removal_delay[num_decoding_units_minus1]*t_c,sub，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量。在一些实施例中能够添加容差参数以满足上述约束。

为了支持在访问单元级别或子图片级别两者下的操作，可以使用以下位流约束：如果sub_pic_cpb_params_present_flag是1，则它是在发信号通知cpb_removal_delay和所有i的du_cpb_removal_delay[i]的值时遵守以下约束的位流符合的要求：-1<＝(cpb_removal_delay*t_c-du_cpb_removal_delay[num_decoding_units_minus1]*t_c,sub)<＝1，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元的解码单元的数量。

附加地，本系统和方法可以修改解码单元去除的定时。当子图片级别CPB去除延迟参数存在时，可以改变针对“大图片”的解码单元的去除时间(当low_delay_hrd_flag是1并且t_r,n(m)<t_af(m)时)以补偿可能由于时钟滴答计数器和子图片时钟滴答计数器而出现的差。

当sub_pic_cpb_params_present_flag等于1时，那么子图片级别CPB去除延迟参数存在并且CPB可以在访问单元级别或子图片级别下操作。等于0的sub_pic_cpb_params_present_flag指定子图片级别CPB去除延迟参数不存在并且CPB在访问单元级别下操作。当sub_pic_cpb_params_present_flag不存在时，其值被推理为等于0。

具体地，解码单元去除的定时和解码单元的解码实施方式的一个示例如下。变量SubPicCpbPreferredFlag要么由外部装置来指定，要么当不由外部装置指定时，被设定为0。得到变量SubPicCpbFlag如下：SubPicCpbFlag＝SubPicCpbPreferredFlag&&sub_pic_cpb_params_present_flag。如果SubPicCpbFlag等于0，则CPB在访问单元级别下操作并且每个解码单元是访问单元。否则CPB在子图片级别下操作并且每个解码单元是访问单元的子集。

如果SubPicCpbFlag等于0，则变量CpbRemovalDelay(m)被设定为与作为解码单元m的访问单元相关联的图片定时SEI消息中的cpb_removal_delay的值，并且变量T_c被设定为t_c。否则对于与包含解码单元m的访问单元相关联的图片定时SEI消息中的解码单元m变量CpbRemovalDelay(m)被设定为du_cpb_removal_delay[i]的值，并且变量T_c被设定为t_{c_sub}。

当解码单元m是具有n等于0的解码单元(初始化HRD的访问单元的第一解码单元)时，来自CPB的解码单元的标称去除时间由t_r,n(0)＝InitCpbRemovalDelay[SchedSelIdx]/90000来指定。

当解码单元m是不初始化HRD的缓冲周期的第一访问单元的第一解码单元时，来自CPB的解码单元的标称去除时间由t_r,n(m)＝t_r,n(m_b)+T_c*CpbRemovalDelay(m)来指定，其中t_r,n(m_b)是先前缓冲周期的第一解码单元的标称去除时间。

当解码单元m是缓冲周期的第一解码单元时，m_b在解码单元m的去除时间t_r,n(m)被设定等于m。

不为缓冲周期的第一解码单元的解码单元m的标称去除时间t_r,n(m)由t_r,n(m)＝t_r,n(m_b)+T_c*CpbRemovalDelay(m)给出，其中t_r,n(m_b)是当前缓冲周期的第一解码单元的标称去除时间。

解码单元m的去除时间被指定如下。变量ClockDiff被定义为ClockDiff＝(num_units_in_tick-(num_units_in_sub_tick*(num_decoding_units_minus1+1))/time_scale)。在一些情况下，它可能是发信号通知参数num_units_in_tick、num_units_in_sub_tick、num_decoding_units_minus1使得满足以下等式的位流符合的要求。

(num_units_in_tick-(num_units_in_sub_tick*(num_decoding_units_minus1+1)))>＝0

在一些其它情况下，它可能是可以发信号通知参数num_units_in_tick、num_units_in_sub_tick、num_decoding_units_minus1使得满足以下等式的位流符合的要求。

(num_units_in_tick-(num_units_in_sub_tick*(num_decoding_units_minus1+1)))<＝0。

如果low_delay_hrd_flag等于0或t_r,n(m)>＝t_af(m)，则解码单元m的去除时间由t_r(m)＝t_r,n(m)来指定。

否则，(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，并且当sub_pic_cpb_params_present_flag等于1且CPB正在子图片级别下操作时，以及如果ClockDiff大于零，则解码单元m在它为访问单元n的最后解码单元时的去除时间由t_r(m)＝t_r,n(m)+T_c*Ceil((t_af(m)-t_r,n(m))/T_c)+ClockDiff来指定。

否则(low_delay_hrd_flag is equal to 1and t_r,n(m)<t_af(m))，并且当sub_pic_cpb_params_present_flag等于1且CPB正在访问单元级别下操作时以及如果ClockDiff小于零，则访问单元n的去除时间由t_r(m)＝t_r,n(m)+t_c*Ceil((t_af(m)-t_r,n(m))/t_c)-ClockDiff来指定。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))，则解码单元m的去除时间由t_r(m)＝t_r,n(m)+T_c*Ceil((t_af(m)-t_r,n(m))/T_c)来指定。后者情况(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))指示解码单元m的尺寸b(m)足够大以致它防止在标称去除时间的去除。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))并且当图片定时标志被设定为1以及CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(n)<t_af(n))并且当图片定时标志被设定为1以及CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))并且当图片定时标志被设定为1以及CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(n)<t_af(n))并且图片定时标志被设定为1以及CPB正在访问单元级别下操作，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))并且图片定时标志被设定为1以及CPB正在子图片级别下操作，用于不为访问单元的最后解码单元的解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。并且根据：t_r(m)＝t_r,n(m)+(t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub}))来设定用于访问单元的最后解码单元m的去除时间t_r(m)，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称到达时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间并且t_af(m)是访问单元n中的最后解码单元m的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))并且图片定时标志被设定为1以及CPB正在子图片级别下操作，用于不为访问单元的最后解码单元的解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。并且根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(m)-t_r,n(m))/t_c))来设定用于访问单元的最后解码单元m的去除时间t_r(m)，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称到达时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间并且t_af(m)是访问单元n中的最后解码单元m的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(m)<t_af(m))并且图片定时标志被设定为1以及CPB正在子图片级别下操作，用于解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_r,n(m)是解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间并且t_af(m)是访问单元n中的解码单元m的最终到达时间。

否则(low_delay_hrd_flag等于1并且t_r,n(n)<t_af(n))并且图片定时标志被设定为1以及CPB正在访问单元级别下操作，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_af(n)，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当SubPicCpbFlag等于1时，访问单元n的标称CPB去除时间t_r,n(n)被设定为访问单元n中的最后解码单元的标称CPB去除时间，访问单元n的CPB去除时间t_r(n)被设定为访问单元n中的最后解码单元的CPB去除时间。

当SubPicCpbFlag等于0时，每个解码单元是访问单元，因此访问单元n的标称CPB去除时间和CPB去除时间是解码单元n的标称CPB去除时间和CPB去除时间。在解码单元m的CPB去除时间，解码单元被即刻解码。

如由上文所图示的，本文所公开的系统和方法提供了修改承载基于子图片的参数的图片定时SEI消息位流的语法和语义。在一些配置中，本文所公开的系统和方法可以被应用于HEVC规范。

为了方便，以下给出数个定义，其可以被应用于本文所公开的系统和方法。随机访问点在位流的解码不需要访问在随机访问点之前的位流中的任何点以便以输出顺序对当前图片和继所述当前图片之后的所有图片进行解码情况下可以是数据(例如，位流)的流中的任何点。

缓冲周期可以被以解码顺序指定为缓冲周期SEI消息的两个实例之间的访问单元的集合。辅助增强信息(SEI)可以包含不必要对来自VCL NAL单元的编译图片的样本进行解码的信息。SEI消息可以帮助与解码、显示或其它目的相关的过程。可能不需要符合解码器来处理这个信息以得到输出顺序符合HEVC规范(例如，HEVC规范(JCTVC-I1003)的附录C包括针对符合的规范)。一些SEI消息信息可以用来检查位流符合并且以得到输出定时解码器符合。

缓冲周期SEI消息可以是与缓冲周期相关的SEI消息。图片定时SEI消息可以是与CPB去除定时相关的SEI消息。这些消息可以定义限定位流到达定时和编译图片去除定时的语法和语义。

编译图片缓冲器(CPB)可以是以假想参考解码器(HRD)中所指定的解码顺序包含访问单元的先进先出缓冲器。访问单元可以是按照解码顺序连续的并且包含恰好一个编译图片的一组网络访问层(NAL)单元。除已编译图片的已编译码片NAL单元之外，访问单元还可以包含不包含已编译图片的码片的其它NAL单元。访问单元的解码总是产生解码图片。NAL单元可以是包含要跟随的数据的类型的指示和以必要时与模拟防止字节交替的原始字节序列有效负荷的形式包含该数据的字节的语法结构。

如本文所使用的，术语“公共”一般地指代适用于超过一个的事物的语法元素或变量。例如，在图片定时SEI消息中的语法元素情景下，术语“公共”可以意味着语法元素(例如，common_du_cpb_removal_delay)适用于与图片定时SEI消息相关联的访问单元中的所有解码单元。附加地，术语“n”和“m”所描述的数据的单元一般地分别指代访问单元和解码单元。

现在参考图对各种配置进行描述，其中相同的附图标记可以指代功能上相似的元素。如本文图中所通常描述和图示的系统和方法能够用各式各样的不同配置加以布置和设计。因此，如图中所表示的数个配置的以下更详细描述不旨在限制要求保护的范围，而是仅仅表示系统和方法。

图1是图示在其中可以实现用于发送消息并且缓冲位流的系统和方法的一个或多个电子设备102的示例的框图。在这个示例中，图示了电子设备A 102a和电子设备B 102b。然而，应该注意的是，在一些配置中关于电子设备A 102a和电子设备B 102b所描述的特征和/或功能性中的一个或多个可以被组合到单个电子设备中。

电子设备A 102a包括编码器104。编码器104包括消息生成模块108。包括在电子设备A 102a内的元件中的每一个(例如，编码器104和消息生成模块108)可以用硬件、软件或两者的组合加以实现。

电子设备A 102a可以获得一个或多个输入图片106。在一些配置中，输入图片106可以使用图像传感器在电子设备A 102a上捕获到，可以被从存储器中检索和/或可以从另一电子设备中被接收。

编码器104可以对输入图片106进行编码以产生编码的数据。例如，编码器104可以对一系列输入图片106(例如，视频)进行编码。在一个配置中，编码器104可以是高效率视频编译(HEVC)编码器。经编码的数据可以是数字数据(例如，位流114的一部分)。编码器104可以基于输入信号来生成开销信令。

消息生成模块108可以生成一个或多个消息。例如，消息生成模块108可以生成一个或多个SEI消息或其它消息。对于支持在子图片级别上的操作的CPB，电子设备102可以发送子图片参数，(例如，CPB去除延迟参数)。具体地，电子设备102(例如，编码器104)可以确定是否将公共解码单元CPB去除延迟参数包括在图片定时SEI消息中。例如，当编码器104正将公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)包括在图片定时SEI消息中时，电子设备可以将标志(例如，common_du_cpb_removal_delay_flag)设定为一。当包括了公共解码单元CPB去除延迟参数时，电子设备可以生成适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数。换句话说，不是为访问单元中的每个解码单元包括解码单元CPB去除延迟参数，而是公共参数可以适用于图片定时SEI消息与其相关联的访问单元中的所有解码单元。

相比之下，当公共解码单元CPB去除延迟参数将不被包括在图片定时SEI消息中时，电子设备102可以为图片定时SEI消息与其相关联的访问单元中的每个解码单元生成单独的解码单元CPB去除延迟。消息生成模块108可以执行在下面关于图2和图3所描述的过程中的一个或多个。

在一些配置中，电子设备A 102a可以向电子设备B 102b发送消息作为位流114的一部分。在一些配置中，电子设备A 102a可以通过单独的传输110向电子设备B 102b发送消息。例如，单独的传输可能不是位流114的一部分。例如，可以使用某种带外机制来发送图片定时SEI消息或其它消息。应该注意的是，在一些配置中，其它消息可以包括上面所描述的图片定时SEI消息的特征中的一个或多个。此外，在一个或多个方面，可以与上面所描述的SEI消息类似地利用其它消息。

编码器104(和消息生成模块108，例如)可以产生位流114。位流114可以包括基于输入图片106的编码的图片数据。在一些配置中，位流114还可以包括开销数据，诸如图片定时SEI消息或其它消息、码片报头、图片参数集(PPS)等。因为附加的输入图片106被编码，所以位流114可以包括一个或多个编码的图片。例如，位流114可以包括具有对应开销数据(例如，图片定时SEI消息或其它消息)的一个或多个编码的图片。

可以向解码器112提供位流114。在一个示例中，可以使用有线链路或无线链路向电子设备B 102b传送位流114。在一些情况下，这可以通过诸如互联网或局域网(LAN)的网络来完成。如图1中所图示的，可以与电子设备A 102a上的编码器104分开地在电子设备B 102b上实现解码器112。然而，应该注意的是，在一些配置中编码器104和解码器112可以被实现在相同的电子设备上。在编码器104和解码器112被实现在相同的电子设备的实施方式中，例如，位流114可以通过总线提供给解码器112或者存储在存储器中以供由解码器112检索。

解码器112可以用硬件、软件或这两者的组合加以实现。在一个配置中，解码器112可以是HEVC解码器。解码器112可以接收(例如，获得)位流114。解码器112可以基于位流114来生成一个或多个解码图片118。解码图片118可以被显示、回放、存储在存储器中和/或传送到另一设备等。

解码器112可以包括CPB 120。CPB 120可以暂时存储编码的图片。CPB 120可以使用图片定时SEI消息中所找到的参数来确定何时去除数据。当CPB 120支持在子图片级别上的操作时，可以去除单独的解码单元，而不是一次去除整个访问单元。

解码器112可以接收消息(例如，图片定时SEI消息或其它消息)。解码器112还可以确定所接收到的消息是否包括公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。这可以包括识别在公共参数存在于图片定时SEI消息中时设定的标志(例如，common_du_cpb_removal_delay_flag)。如果公共参数存在，则解码器112可以确定适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数。如果公共参数不存在，则解码器112可以确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数。解码器112还可以使用公共解码单元CPB去除延迟参数或单独的解码单元CPB去除延迟参数来从CPB 120中去除解码单元。CPB 120可以执行在下面关于图4和图5所描述的过程中的一个或多个。

上面所描述的HRD可以是图1中所图示的解码器112的一个示例。因此，在一些配置中，电子设备102可以依照上面所描述的HRD和CPB120进行操作。

应该注意的是，包括在电子设备102中的元件或其部分中的一个或多个可以用硬件加以实现。例如，这些元件或其部分中的一个或多个可以作为芯片、电路或硬件组件等被实现。还应该注意的是，本文所描述的功能或方法中的一个或多个可以用硬件加以实现和/或使用硬件来执行。例如，本文所描述的方法中的一个或多个可以用芯片组、专用集成电路(ASIC)、大规模集成电路(LSI)或集成电路等加以实现和/或使用芯片组、专用集成电路(ASIC)、大规模集成电路(LSI)或集成电路等来实现。

图2是图示用于发送消息的方法200的一个配置的流程图。方法200可以由编码器104或其子部分中的一个(例如，消息生成模块108)来执行。编码器104可以确定202指示CPB 120是否支持在子图片级别上的操作的图片定时标志(例如，sub_pic_cpb_params_present_flag)。例如，当图片定时标记被设定为1时，CPB 120可以在访问单元级别或子图片级别上操作。应该注意的是，即便当图片定时标志被设定为1时，关于是否实际上在子图片级别下操作的决定留给解码器112它本身。

编码器104还可以确定用于访问单元中的解码单元的204一个或多个去除延迟。例如，编码器104可以确定适用于来自CPB 120的访问单元中的所有解码单元的单个公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。替换地，编码器104可以确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟(例如，du_cpb_removal_delay[i])。

编码器104还可以确定206一个或多个NAL参数，所述NAL参数指示访问点中的每个解码单元中的NAL单元的偏移一的数量。例如，编码器104可以确定适用于来自CPB 120的访问单元中的所有解码单元的单个公共NAL参数(例如，common_num_nalus_in_du_minus1)。替换地，编码器104可以确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟(例如，num_nalus_in_du_minus1[i])。

编码器104还可以发送208包括图片定时标志、去除延迟以及NAL参数的图片定时SEI消息。图片定时SEI消息还可以包括其它参数(例如，cpb_removal_delay、dpb_output_delay等)。例如，电子设备102可以经由无线传输、有线传输、设备总线、网络等中的一个或多个来传送消息。例如，电子设备A 102a可以向电子设备B 102b传送消息。例如，消息可以是位流114的一部分。在一些配置中，电子设备A 102a可以在单独的传输110(其不是位流114的一部分)中向电子设备B 102b发送208消息。例如，可以使用某种带外机制来发送消息。在一些情况下，可以在不同于图片定时SEI消息的SEI消息中发送204、206中所指示的信息。在又一种情况下，可以在参数集，例如，视频参数集和/或序列参数集和/或图片参数集和/或自适应参数集，和/或码片报头中发送204、206中所指示的信息。

图3是图示用于确定用于访问单元中的解码单元的一个或多个去除延迟的方法300的一个配置的流程图。换句话说，图3中所图示的方法300可以进一步图示图2中所图示的方法200的步骤204。方法300可以由编码器104执行。编码器104可以确定302是否包括公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。这可以包括确定是否设定了公共解码单元CPB去除延迟标志(例如，common_du_cpb_removal_delay_flag)。编码器104可以在以规则间隔从CPB中去除解码单元的情况下发送这个公共参数。例如，当每个解码单元对应于图片的一定数量的行或者具有一些其它规则结构时，情况可能是这样的。

例如，当公共解码单元CPB去除延迟参数将被包括在图片定时SEI消息中时公共解码单元CPB去除延迟标志可以被设定为1，以及当它未被包括时设定为0。如果是(例如，标志被设定为1)，则编码器104可以确定304适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。如果不是(例如，标志被设定为0)，则编码器104可以确定306用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数(例如，du_cpb_removal_delay[i])。

如果公共解码单元CPB去除延迟参数存在于图片定时SEI消息中，则它可以指定在从CPB 120中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前从CPB 120中去除紧接上一个解码单元之后要等待的子图片时钟滴答的数量。

例如，当解码单元是访问单元中的第一解码单元时，公共解码单元CPB 120去除延迟参数可以指定在从CPB 120中去除与图片定时SEI消息相关联的访问单元中的第一解码单元之前，从CPB 120中去除与上一个访问单元中的最近缓冲的周期SEI消息相关联的访问单元中的最后解码单元之后要等待的子图片时钟滴答的数量。

当解码单元是访问单元中的非第一解码单元时，公共解码单元CPB去除延迟参数可以指定在从CPB中去除与图片定时SEI消息相关联的访问单元中的当前解码单元之前从CPB 120中去除与图片定时SEI消息相关联的访问单元中的上一个解码单元之后要等待的子图片时钟滴答的数量。

相比之下，当未在图片定时SEI消息中发送公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)时，可以在针对访问单元中的每个解码单元的图片定时SEI消息中包括单独的解码单元CPB去除延迟参数(例如，du_cpb_removal_delay[i])。解码单元CPB去除延迟参数(例如，du_cpb_removal_delay[i])可以指定在从CPB 120中去除与图片定时SEI消息相关联的访问单元中的第i个解码单元之前从CPB 120中去除最后解码单元之后要等待的子图片时钟滴答的数量。可以根据模2^{(cpb_removal_delay_length_minus1+1)}计数器的余数来计算解码单元CPB去除延迟参数，其中cpb_removal_delay_length_minus1+1是公共解码单元CPB去除延迟参数的长度。

图4是图示用于缓冲位流的方法400的一个配置的流程图。方法400可以由电子设备102(例如，电子设备B 102b)中的解码器112来执行，所述电子设备102可以接收402消息(例如，图片定时SEI消息或其它消息)。例如，电子设备102可以经由无线传输、有线传输、设备总线、网络等中的一个或多个来接收402消息。例如，电子设备B 102b可以从电子设备A 102a接收402消息。例如，消息可以是位流114的一部分。在另一示例中，电子设备B 102b可以在单独的传输110(例如，其不是位流114的一部分)中从电子设备A 102a接收消息。例如，可以使用某种带外机制来接收图片定时SEI消息。在一些配置中，消息可以包括图片定时标志、用于访问单元中的解码单元的一个或多个去除延迟以及一个或多个NAL参数中的一个或多个。因此，接收402消息可以包括接收图片定时标志、用于访问单元中的解码单元的一个或多个去除延迟以及一个或多个NAL参数中的一个或多个。

解码器112可以确定404CPB 120是否在访问单元级别或子图片级别上操作。例如，如果解码器112想要实现低延迟则它可以决定在子图片基础上操作。替换地，决定可以基于解码器112是否有足够的资源以支持基于子图片的操作。如果CPB 120在子图片级别上操作，则解码器可以确定406用于访问单元中的解码单元的一个或多个去除延迟。例如，解码器112可以确定适用于访问单元中的所有解码单元的单个公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。替换地，解码器112可以确定用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟(例如，du_cpb_removal_delay[i])。换句话说，图片定时SEI消息可以包括适用于访问单元中的所有解码单元的公共参数或用于每个解码单元的单独的参数。

解码器112还可以基于用于解码单元的CPB去除延迟(即，使用适用于访问单元中的所有解码单元的公共参数或用于每个解码单元的单独的参数)来去除408解码单元。解码器112还可以对该解码单元进行解码410。

解码器112可以在确定针对从各种发信号通知的参数确定的去除时间时使用变量ClockDiff。具体地，可以根据ClockDiff＝(num_units_in_tick-(num_units_in_sub_tick*(num_decoding_units_minus1+1))/time_scale)来确定ClockDiff，其中num_units_in_tick是以对应于时钟滴答计数器的一个增量的频率time_scale Hz操作的时钟的时间单位的数目，num_units_in_sub_tick是以对应于子图片时钟滴答计数器的一个增量的频率time_scale Hz操作的时钟的时间单位的数目，num_decoding_units_minus1+1是访问单元中的解码单元的数量，以及time_scale是在一秒内经过的时间单位的数目。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1、CPB正在子图片级别下操作并且ClockDiff大于零时，根据：t_r(m)＝t_r,n(m)+t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})+ClockDiff来确定用于解码单元m的去除时间t_r(m)，其中t_r,n(m)是解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，以及t_af(m)是解码单元m的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1、CPB正在访问单元级别下操作并且ClockDiff大于零时，根据：t_r(n)＝t_r,n(n)+t_c*Ceil((t_af(n)-t_r,n(n))/t_c)-ClockDiff来确定，用于访问单元n的去除时间t_r(n)，其中t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，Ceil()是上取整函数以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+max((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+max((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub}),(t_c*Ceil((t_a(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+min((t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub})),(t_c*Ceil((t_af(n)-t_r,n(n))/t_c)))，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1时、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_r,n(n)+(t_c*Ceil((t_af(n)-t_r,n(n))/t_c))，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于不为访问单元的最后解码单元的解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。并且用于访问单元的最后解码单元m的去除时间t_r(m)根据：t_r(m)＝t_r,n(m)+(t_{c_sub}*Ceil((t_af(m)-t_r,n(m))/t_{c_sub}))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间以及t_af(m)是访问单元n中的最后解码单元的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于不为访问单元的最后解码单元的解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_af(m)是解码单元m的最终到达时间。并且用于访问单元的最后解码单元m的去除时间tr(m)根据：t_r(m)＝t_r,n(m)+(t_c*Ceil((t_af(m)-t_r,n(m))/t_c))，其中t_r,n(m)是最后解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间以及t_af(m)是访问单元n中的最后解码单元的最终到达时间。

当低延迟假想参考解码器(HRD)标志(例如，low_delay_hrd_flag)被设定为1、t_r,n(m)<t_af(m)、图片定时标志被设定为1并且CPB正在子图片级别下操作时，用于解码单元的去除时间被设定为t_r(m)＝t_af(m)，其中t_r,n(m)是解码单元m的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答，t_af(n)是访问单元n的最终到达时间以及t_af(m)是访问单元n中的解码单元的最终到达时间。

当低延迟假想参考解码器(HRD)标志被设定为1、t_r,n(n)<t_af(n)、图片定时标志被设定为1并且CPB正在访问单元级别下操作时，用于访问单元n的去除时间t_r(n)根据：t_r(n)＝t_af(n)，其中t_r,n(m)是最后解码单元n的标称去除时间，t_{c_sub}是子图片时钟滴答，Ceil()是上取整函数，t_af(m)是最后解码单元m的最终到达时间，t_r,n(n)是访问单元n的标称去除时间，t_c是时钟滴答以及t_af(n)是访问单元n的最终到达时间。

如果CPB在访问单元级别上操作，则解码器112可以确定412CPB去除延迟参数。这可以被包括在所接收到的图片定时SEI消息(例如，cpb_removal_delay)中。解码器112还可以基于CPB去除延迟参数来去除414访问单元并且对该访问单元进行解码416。换句话说，解码器112可以一次对整个访问单元而不是访问单元中的解码单元进行解码。

图5是图示用于确定用于访问单元中的解码单元的一个或多个去除延迟的方法500的一个配置的流程图。换句话说，图5中所图示的方法500可以进一步图示图4中所图示的方法400的步骤406。方法500可以由解码器112来执行。解码器112可以确定502接收到的图片定时SEI消息是否包括公共解码单元CPB去除延迟参数。这可以包括确定是否设定了公共解码单元CPB去除延迟标志(例如，common_du_cpb_removal_delay_flag)。如果是，则解码器112可以确定504适用于访问单元中的所有解码单元的公共解码单元CPB去除延迟参数(例如，common_du_cpb_removal_delay)。如果否，则解码器112可以确定506用于访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数(例如，du_cpb_removal_delay[i])。

除修改图片定时SEI消息语义之外，本系统和方法还可以强加位流约束，使得基于子图片的CPB操作和基于访问单元的CPB操作的操作产生解码单元去除的相同定时。具体地，当图片定时标志(例如，sub_pic_cpb_params_present_flag)被设定为1时，可以根据

$\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}=\frac{(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\&Sigma;}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i\left]\right)*t_{c,\mathrm{cub}}}{t_c}$

来设定CPB去除延迟，其中du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量，以及i是索引。

替换地，可以像接下来所描述的那样设定CPB去除延迟：假设变量T_du(k)被定义为：

$T_{\mathrm{du}}\left(k\right)=T_{\mathrm{du}}(k-1)+t_{c\_\mathrm{sub}}*\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decodi\; ng}\_\mathrm{units}\_\mathrm{m\; inus}{1}_k}{\mathrm{\&Sigma;}}}(\mathrm{du}\_\mathrm{cpb}\_\mathrm{remo\; val}\_\mathrm{delay}\_\min \mathrm{us}{1}_k[i]+1)$

其中du_cpb_removal_delay_minus1_k[i]和num_decoding_units_minus1_k是用于第k个访问单元的第i个解码单元的参数(其中，对于初始化了HRD的访问单元k＝0并且对于k<1T_du(k)＝0)，并且其中du_cpb_removal_delay_minus1_k[i]+1＝du_cpb_removal_delay_k[i]是用于第k个访问单元的第I个解码单元的解码单元CPB去除延迟参数，以及num_decoding_units_minus1_k是第k个访问单元中的解码单元的数目，t_c是时钟滴答，t_c,sub是子图片时钟滴答，以及i和k是索引。然后当图片定时标志(例如，sub_pic_cpb_params_present_flag)被设定为1时，以下条件将为真：(au_cpb_removal_delay_minus1+1)*t_c＝＝T_du(k)，其中(au_cpb_removal_delay_minus1+1)＝cpb_removal_delay(CPB去除延迟)。因此在这种情况下，CPB去除延迟(au_cpb_removal_delay_minus1+1)被设定为使得基于子图片的CPB操作和基于访问单元的CPB操作的操作产生访问单元去除的相同定时和访问单元去除的最后解码单元。

替换地，可以根据

$-1\&le;[\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}*t_c-(\underset{i=0}{\overset{\mathrm{num}\_\mathrm{decoding}\_\mathrm{units}\_\min \mathrm{us}1}{\mathrm{\&Sigma;}}}\mathrm{du}\_\mathrm{cpb}\_\mathrm{removal}\_\mathrm{delay}[i]*t_{c,\mathrm{sub}})]\&le;1$

来设定CPB去除延迟，其中du_cpb_removal_delay[i]是解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量，以及i是索引。

替换地，可以根据cpb_removal_delay*t_c＝du_cpb_removal_delay[num_decoding_units_minus1]*t_c,sub来设定cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量。

除修改图片定时SEI消息语义之外，本系统和方法还可以强加位流约束，使得基于子图片的CPB操作和基于访问单元的CPB操作的操作产生解码单元去除的相同定时。具体地，当图片定时标志(例如，sub_pic_cpb_params_present_flag)被设定为1时，可以设定用于cpb_removal_delay和du_cpb_removal_delay[num_decoding_units_minus1]的值以便满足：-1<＝(cpb_removal_delay*t_c-du_cpb_removal_delay[num_decoding_units_minus1]*t_c,sub)<＝1，其中du_cpb_removal_delay[num_decoding_units_minus1]是用于第num_decoding_units_minus1个解码单元的解码单元CPB去除延迟参数，t_c是时钟滴答，t_c,sub是子图片时钟滴答，num_decoding_units_minus1是偏移一的访问单元中的解码单元的数量。

图6是图示电子设备602上的编码器604的一个配置的框图。应该注意的是，图示为被包括在电子设备602内的元件中的一个或多个可以用硬件、软件或两者的组合加以实现。例如，电子设备602包括编码器604，其可以用硬件、软件或两者的组合加以实现。例如，编码器604可以被实现为电路、集成电路、专用集成电路(ASIC)、与具有可执行指令的存储器电子通信的处理器、固件、现场可编程门阵列(FPGA)等或其组合。在一些配置中，编码器604可以是HEVC编译器。

电子设备602可以包括源622。源622可以将图片或图像数据(例如，视频)作为一个或多个输入图片606提供给编码器604。源622的示例可以包括图像传感器、存储器、通信接口、网络接口、无线接收器、端口等。

可以向帧内预测模块和重建缓冲器624提供一个或多个输入图片606。还可以向运动估计和运动补偿模块646以及向减法模块628提供输入图片606。

帧内预测模块和重建缓冲器624可以基于一个或多个输入图片606和重建数据660来生成帧内模式信息640和帧内信号626。运动估计和运动补偿模块646可以基于一个或多个输入图片606和参考图片缓冲器676信号678来生成帧间模式信息648和帧间信号644。在一些配置中，参考图片缓冲器676可以包括来自参考图片缓冲器676中的一个或多个参考图片的数据。

编码器604可以依照模式在帧内信号626与帧间信号644之间进行选择。可以使用帧内信号626以便在帧内编译模式下利用图片内的空间特性。可以使用帧间信号644以便在帧间编译模式下利用图片之间的时间特性。当在帧内编译模式下时，可以向减法模块628提供帧内信号626并且可以向熵编译模块642提供帧内模式信息640。当在帧间编译模式下时，可以向减法模块628提供帧间信号644并且可以像熵编译模块642提供帧间模式信息648。

在减法模块628处输入图片606减去帧内信号626或帧间信号644(取决于模式)以便产生预测残差630。预测残差630被提供给变换模块632。变换模块632可以对预测残差630进行压缩以产生被提供给量化模块636的变换的信号634。量化模块636对经变换的信号634进行量化以产生变换的且量化的系数(TQC)638。

TQC 638被提供给熵编译模块642和逆量化模块650。逆量化模块650对TQC 638执行逆量化以产生被提供给逆变换模块654的逆量化的信号652。逆变换模块654对经逆量化的信号652进行解压缩以产生被提供给重建模块658的解压缩的信号656。

重建模块658可以基于经解压缩的信号656来产生重建的数据660。例如，重建模块658可以重建(修改的)图片。可以向去块滤波器662以及向帧内预测模块和重建缓冲器624提供经重建的数据660。去块滤波器662可以基于经重建的数据660来产生滤波的信号664。

可以向样本自适应偏移(SAO)模块666提供经滤波的信号664。SAO模块666可以产生被提供给熵编译模块642的SAO信息668和被提供给自适应环路滤波器(ALF)672的SAO信号670。ALF 672产生被提供给参考图片缓冲器676的ALF信号674。ALF信号674可以包括来自可以被用作参考图片的一个或多个图片的数据。

熵编译模块642可以对TQC 638进行编译以产生位流A 614a(例如，编码的图片数据)。例如，熵编译模块642可以使用上下文自适应可变长度编译(CAVLC)或上下文自适应二进制算术编译(CABAC)来对TQC 638进行编译。特别地，熵编译模块642可以基于帧内模式信息640、帧间模式信息648以及SAO信息668中的一个或多个来对TQC 638进行编译。可以向消息生成模块608提供位流A 614a(例如，编码的图片数据)。可以与关于图1所描述的消息生成模块108类似地配置消息生成模块608。附加地或替换地，消息生成模块608可以执行关于图2和图3所描述的过程中的一个或多个。

例如，消息生成模块608可以生成包括子图片参数的消息(例如，图片定时SEI消息或其它消息)。子图片参数可以包括用于解码单元的一个或多个去除延迟(例如，common_du_cpb_removal_delay或du_cpb_removal_delay[i])和一个或多个NAL参数(例如，common_num_nalus_in_du_minus1或num_nalus_in_du_minus1[i])。在一些配置中，可以将消息插入到位流A 614a中以产生位流B 614b。因此，例如，可以在生成了整个位流A 614a之后(例如，在生成了大多数位流B 614b之后)生成该消息。在其它配置中，可能不将消息插入到位流A 614a中(在此情况下位流B 614b可以与位流A 614a相同)，但是可以在单独的传输610中提供该消息。

在一些配置中，电子设备602向另一电子设备发送位流614。例如，可以向通信接口、网络接口、无线发送器、端口等提供位流614。例如，可以经由LAN、互联网、蜂窝电话基站等向另一电子设备传送位流614。位流614可以附加地或替换地被存储在电子设备602上的存储器或其它组件上。

图7是图示电子设备702上的解码器712的一个配置的框图。解码器712可以被包括在电子设备702中。例如，解码器712可以是HEVC解码器。解码器712和图示为被包括在解码器712中的元件中的一个或多个可以用硬件、软件或两者的组合加以实现。解码器712可以接收用于解码的位流714(例如，包括在位流714中的一个或多个编码的图片和开销数据)。在一些配置中，所接收到的位流714可以包括接收到的开销数据，诸如消息(例如，图片定时SEI消息或其它消息)、码片报头、PPS等。在一些配置中，解码器712可以附加地接收单独的传输710。单独的传输710可以包括消息(例如，图片定时SEI消息或其它消息)。例如，可以在单独的传输710中而不是在位流714中接收图片定时SEI消息或其它消息。然而，应该注意的是，在一些配置中单独的传输710可以是可选的并且可能不被利用。

解码器712包括CPB 720。可以与上面关于图1所描述的CPB 120类似地配置CPB 720。附加地或替换地，解码器712可以执行关于图4和图5所描述的过程中的一个或多个。例如，解码器712可以接收具有子图片参数的消息(例如，图片定时SEI消息或其它消息)，并且基于这些子图片参数对访问单元中的解码单元进行去除和解码。应该注意的是，一个或多个访问单元可以被包括在位流中并且可以包括编码的图片数据和开销数据中的一个或多个。

编译图片缓冲器(CPB)720可以向熵解码模块701提供编码的图片数据。经编码的图片数据可以由熵解码模块701熵解码，从而产生运动信息信号703以及量化的、缩放的和/或变换的系数705。

运动信息信号703可以在运动补偿模块780处与来自帧存储器709的参考帧信号798的一部分组合，所述运动补偿模块780可以产生帧间预测信号782。经量化的、缩小比例的和/或变换的系数705可以被逆模块707逆量化、扩缩和逆变换，从而产生解码的残差信号784。可以将经解码的残差信号784添加到预测信号792以产生组合信号786。预测信号792可以是选自由运动补偿模块780所产生的帧间预测信号782或由帧内预测模块788所产生的帧内预测信号790的信号。在一些配置中，这个信号选择可以基于位流714(例如，由位流714来控制)。

可以根据来自已组合信号786(例如，在当前帧中)的先前解码的信息来预测帧内预测信号790。已组合信号786还可以被去块滤波器794滤波。结果得到的滤波的信号796可以写入帧存储器709。结果得到的滤波的信号796可以包括解码图片。帧存储器709可以提供解码图片718。在一些情况下709可以是解码图片缓冲器。

图8图示可以在传送电子设备802中利用的各种组件。可以依照图8中所图示的传送电子设备802来实现本文所描述的电子设备102、602、702中的一个或多个。

传送电子设备802包括控制电子设备802的操作的处理器817。处理器817还可以被称为CPU。可以包括只读存储器(ROM)、随机存取存储器(RAM)两者或可以存储信息的任何类型的设备的存储器811向处理器817提供指令813a(例如，可执行指令)和数据815a。存储器811的一部分还可以包括非易失性随机存取存储器(NVRAM)。存储器811可以与处理器817电子通信。

指令813b和数据815b还可以驻留在处理器817中。加载到处理器817中的指令813b和/或数据815b还可以包括从存储器811被加载用于由处理器817执行或处理的指令813a和/或数据815a。指令813b可以由处理器817来执行以实现本文所公开的系统和方法。例如，指令813b可能可执行来执行上面所描述的方法200、300、400、500中的一个或多个。

传送电子设备802可以包括用于与其它电子设备(例如，接收电子设备)进行通信的一个或多个通信接口819。通信接口819可以基于有线通信技术、无线通信技术或这二者。通信接口819的示例包括串行端口、并行端口、通用串行总线(USB)、以太网适配器、IEEE 1394总线接口、小型计算机系统接口(SCSI)总线接口、线外线(IR)通信端口、蓝牙无线通信适配器、依照第三代合作伙伴计划(3GPP)规范的无线收发器等等。

传送电子设备802可以包括一个或多个输出设备823和一个或多个输入设备821。输出设备823的示例包括扬声器、打印机等。可以被包括在电子设备802中的一种类型的输出设备是显示设备825。与本文所公开的配置一起使用的显示设备825可以利用任何适合的图像投影技术，诸如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、气体等离子体、电致发光等。显示控制器827可以被提供用于将存储在存储器811中的数据转换成在显示器825上示出的文本、图形和/或运动图像(视需要)。输入设备821的示例包括键盘、鼠标、麦克风、遥控设备、按钮、操纵杆、轨迹球、触摸板、触摸屏、光笔等。

传送电子设备802的各种组件通过总线系统829耦合在一起，所述总线系统829可以包括除数据总线之外的电力总线、控制信号总线以及状态信号总线。然而，为了清楚起见，各种总线在图8中被图示为总线系统829。图8中所图示的传送电子设备802是功能框图而不是特定组件的列表。

图9是图示可以在接收电子设备902中利用的各种组件的框图。可以依照图9中所图示的接收电子设备902来实现本文所描述的电子设备102、602、702中的一个或多个。

接收电子设备902包括控制电子设备902的操作的处理器917。处理器917还可以被称为CPU。可以包括只读存储器(ROM)、随机存取存储器(RAM)两者或可以存储信息的任何类型的设备的存储器911向处理器917提供指令913a(例如，可执行指令)和数据915a。存储器911的一部分还可以包括非易失性随机存取存储器(NVRAM)。存储器911可以与处理器917电子通信。

指令913b和数据915b还可以驻留在处理器917中。加载到处理器917中的指令913b和/或数据915b还可以包括从存储器911被加载用于由处理器917执行或处理的指令913a和/或数据915a。指令913b可以由处理器917来执行以实现本文所公开的系统和方法。例如，指令913b可能可执行来执行上面所描述的方法200、300、400、500中的一个或多个。

接收电子设备902可以包括用于与其它电子设备(例如，传送电子设备)进行通信的一个或多个通信接口919。通信接口919可以基于有线通信技术、无线通信技术或这二者。通信接口919的示例包括串行端口、并行端口、通用串行总线(USB)、以太网适配器、IEEE 1394总线接口、小型计算机系统接口(SCSI)总线接口、线外线(IR)通信端口、蓝牙无线通信适配器、依照第三代合作伙伴计划(3GPP)规范的无线收发器等。

接收电子设备902可以包括一个或多个输出设备923和一个或多个输入设备921。输出设备923的示例包括扬声器、打印机等。可以被包括在电子设备902中的一种类型的输出设备是显示设备925。与本文所公开的配置一起使用的显示设备925可以利用任何适合的图像投影技术，诸如阴极射线管(CRT)、液晶显示器(LCD)、发光二极管(LED)、气体等离子体、电致发光等。显示控制器927可以被提供用于将存储在存储器911中的数据转换成在显示器925上示出的文本、图形和/或运动图像(视需要)。输入设备921的示例包括键盘、鼠标、麦克风、遥控设备、按钮、操纵杆、轨迹球、触摸板、触摸屏、光笔等。

接收电子设备902的各种组件通过总线系统929耦合在一起，所述总线系统829可以包括除数据总线之外的电力总线、控制信号总线以及状态信号总线。然而，为了清楚起见，各种总线在图9中被图示为总线系统929。图9中所图示的接收电子设备902是功能框图而不是特定组件的列表。

图10是图示在其中可以实现用于发送消息的系统和方法的电子设备1002的一个配置的框图。电子设备1002包括编码装置1031和传送装置1033。编码装置1031和传送装置1033可以被配置成执行上面关于图1、图2、图3、图6以及图8中的一个或多个所描述的功能中的一个或多个。例如，编码装置1031和传送装置1033可以生成位流1014。以上图8图示了图10的具体装置结构的一个示例。可以实现其它各种结构以实现图1、图2、图3、图6以及图8的功能中的一个或多个。例如，DSP可以由软件来实现。

图11是图示在其中可以实现用于缓冲位流1114的系统和方法的电子设备1102的一个配置的框图。电子设备1102可以包括接收装置1135和解码装置1137。接收装置1135和解码装置1137可以被配置成执行上面关于图1、图4、图5、图7以及图9中的一个或多个所描述的功能中的一个或多个。例如，接收装置1135和解码装置1137可以接收位流1114。以上图9图示了图11的具体装置结构的一个示例。可以实现其它各种结构以实现图1、图4、图5、图7以及图9的一个或多个功能。例如，DSP可以由软件来实现。

术语“计算机可读介质”指代能够被计算机或处理器访问的任何可用介质。如本文所用的术语“计算机可读介质”可以表示作为非暂时性且有形的计算机可读介质和/或处理器可读介质。通过示例而非限制，计算机可读介质或处理器可读介质可以包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储部、磁盘存储部或其它磁存储设备，或能够用来执行或者存储形式为指令或数据结构的期望程序代码并且能过被计算机或处理器访问的任何其它介质。如本文所用的，磁盘和盘包括磁盘通常磁性上再现数据的紧致盘(CD)、激光盘、光盘、数字通用盘(DVD)、软盘以及蓝光(注册商标)盘，而盘利用激光器光学地再现数据。

应该注意的是，本文所描述的方法中的一个或多个可以用硬件加以实现和/或使用硬件来执行。例如，本文所描述的方法中的一个或多个可以用芯片组、ASIC、大规模集成电路(LSI)或集成电路等加以实现和/或使用芯片组、ASIC、大规模集成电路(LSI)或集成电路等来实现。

本文所公开的方法中的每一个包括用于实现所描述的方法的一个或多个步骤或动作。在不脱离权利要求的范围的情况下，方法步骤和/或动作可以与彼此互换和/或组合成单个步骤。换句话说，除非对于正被描述的方法的正确操作需要步骤或动作的特定顺序，否则在不脱离权利要求的范围的情况下，可以修改特定步骤和/或动作的顺序和/或使用。

应当理解的是，权利要求不限于上面所图示的精确配置和组件。在不脱离权利要求的范围的情况下，可以对本文所描述的系统、方法以及装置的布置、操作和细节进行各种修改、改变以及变化。

Claims (13)

1.一种用于缓冲位流的电子设备，包括：

确定图片定时SEI(辅助增强信息)消息以去除数据；

在所述图片定时SEI消息中确定用于从CPB(编译图片缓冲器)中去除访问单元的访问单元CPB去除延迟参数；以及

确定用于所述访问单元中的每个解码单元的一个或多个解码单元CPB去除延迟；

其中，所述解码单元CPB去除延迟的总和等于所述访问单元CPB去除延迟参数。

2.根据权利要求1所述的电子设备，其中，基于至少访问单元延迟参数和时钟滴答参数来确定所述访问单元CPB去除延迟参数。

3.根据权利要求2所述的电子设备，其中，所述一个或多个解码单元CPB去除延迟乘以时钟子滴答参数。

4.根据权利要求2所述的电子设备，其中，所述访问单元CPB去除延迟参数等于通过将所述一个或多个解码单元CPB去除延迟乘以时钟子滴答参数并且对它们求和所获得的值。

5.根据权利要求3或4所述的电子设备，其中，所述时钟子滴答参数是涉及解码单元去除的时标的参数。

6.根据权利要求1所述的电子设备，其中，在所述图片定时SEI消息支持在子图片级别上的操作情况下，确定所述访问单元CPB去除延迟参数。

7.一种用于发送消息的电子设备，包括：

处理器；

与所述处理器电子通信的存储器；

存储在所述存储器中的指令，所述指令能够被执行以：

当编译图片缓冲器(CPB)支持在子图片级别上的操作时，确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中；

当所述公共解码单元CPB去除延迟参数将被包括在所述图片定时SEI消息中时，生成所述公共解码单元CPB去除延迟参数，其中，所述公共解码单元CPB去除延迟参数适用于来自所述CPB的访问单元中的所有解码单元；

当所述公共解码单元CPB去除延迟参数将不被包括在所述图片定时SEI消息中时，生成用于所述访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数；以及

发送具有所述公共解码单元CPB去除延迟参数或所述解码单元CPB去除延迟参数的所述图片定时SEI消息。

8.根据权利要求7所述的电子设备，其中，所述公共解码单元CPB去除延迟参数指定在从所述CPB去除与所述图片定时SEI消息相关联的所述访问单元中的当前解码单元之前，在从所述CPB去除紧接的上一个解码单元之后要等待的子图片时钟滴答的数量。

9.根据权利要求8所述的电子设备，其中，当解码单元是访问单元中的第一解码单元时，所述公共解码单元CPB去除延迟参数指定在从所述CPB去除与所述图片定时SEI消息相关联的所述访问单元中的所述第一解码单元之前，在从所述CPB去除在与上一个访问单元中的最近缓冲周期SEI消息相关联的访问单元中的最后解码单元之后要等待的子图片时钟滴答的数量。

10.根据权利要求8所述的电子设备，其中，当所述解码单元是访问单元中的非第一解码单元时，所述公共解码单元CPB去除延迟参数指定在从所述CPB去除与所述图片定时SEI消息相关联的所述访问单元中的当前解码单元之前，在从所述CPB去除在与所述图片定时SEI消息相关联的所述访问单元中的上一个解码单元之后要等待的子图片时钟滴答的数量。

11.根据权利要求7所述的电子设备，其中，能够被执行以确定是否包括公共解码单元CPB去除延迟参数的所述指令包括能够被执行以进行以下步骤的指令：

当所述公共解码单元CPB去除延迟参数将被包括在所述图片定时SEI消息中时，将公共解码单元CPB去除延迟标志设定为1；

当所述公共解码单元CPB去除延迟参数将不被包括在所述图片定时SEI消息中时，将所述公共解码单元CPB去除延迟标志设定为0；

将所述公共解码单元CPB去除延迟标志包括在所述图片定时SEI消息中。

12.一种用于缓冲位流的电子设备，包括：

处理器；

与所述处理器电子通信的存储器；

存储在所述存储器中的指令，所述指令能够被执行以：

确定CPB针对访问单元发信号通知关于子图片级别的参数；

当接收到的图片定时辅助增强信息(SEI)消息包括所述公共解码单元编译图片缓冲器(CPB)去除延迟标志时，确定适用于所述访问单元中的所有解码单元的公共解码单元CPB去除延迟参数；

当所述图片定时SEI消息不包括所述公共解码单元CPB去除延迟标志时，确定用于所述访问单元中的每个解码单元的单独的解码单元CPB去除延迟参数；

使用所述公共解码单元CPB去除延迟参数或所述单独的解码单元CPB去除延迟参数来从所述CPB去除解码单元；以及

对所述访问单元中的所述解码单元进行解码。

13.一种用于发送消息的方法，包括：

当编译图片缓冲器(CPB)支持在子图片级别上的操作时，确定是否将公共解码单元CPB去除延迟参数包括在图片定时辅助增强信息(SEI)消息中；

当所述公共解码单元CPB去除延迟参数将被包括在所述图片定时SEI消息中时，生成所述公共解码单元CPB去除延迟参数，其中，所述公共解码单元CPB去除延迟参数适用于来自所述CPB的访问单元中的所有解码单元；

当所述公共解码单元CPB去除延迟参数将不被包括在所述图片定时SEI消息中时，为所述访问单元中的每个解码单元生成单独的解码单元CPB去除延迟参数；以及

发送具有所述公共解码单元CPB去除延迟参数或所述解码单元CPB去除延迟参数的所述图片定时SEI消息。