ES2855129T3 - Indicador de nivel de secuencia para parámetros de búfer de imágenes codificadas a nivel de subimagen - Google Patents

Abstract

Un procedimiento para descodificar datos de vídeo, comprendiendo los datos de vídeo al menos una unidad de acceso, AU (100, 102), comprendiendo la al menos una AU al menos dos unidades de descodificación, DU (112-1, 112-4), comprendiendo el procedimiento: descodificar (400) un indicador de secuencia de nivel, especificando el indicador de nivel de secuencia igual a 1 que están presentes parámetros de retardo de eliminación de búfer de imágenes codificadas, CPB, a nivel de subimagen en mensajes de información de mejora complementaria, SEI, de temporización de imágenes y no está presente ningún mensaje SEI de temporización de subimágenes, especificando el indicador de nivel de secuencia igual a 0 que están presentes parámetros de retardo de eliminación de CPB a nivel de subimagen en mensajes SEI de temporización de subimágenes y los mensajes SEI de temporización de imágenes no incluyen los parámetros de retardo de eliminación de CPB a nivel de subimagen; si el indicador de nivel de secuencia es igual a 1, descodificar (402) un parámetro de retardo de eliminación de CPB a nivel de subimagen para una DU actual en una AU actual de un mensaje SEI de temporización de imágenes asociado con la DU actual; si el indicador de nivel de secuencia es igual a 0, descodificar (402) el parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual en la AU actual de un mensaje SEI de temporización de subimágenes asociado con la DU actual; determinar, en base, al menos en parte, al parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual, un tiempo de eliminación de CPB de la DU actual; y en el tiempo de eliminación de CPB determinado de la DU actual, descodificar los datos de vídeo asociados con la DU actual y eliminar la DU actual del CPB, en el que el parámetro de retardo de eliminación de CPB a nivel de subimagen especifica la duración en tics de reloj de subimagen entre la eliminación del CPB de la última DU en orden de descodificación en la AU actual y la eliminación de la DU actual, en el que, cuando la DU actual es la última DU en orden de descodificación en la AU actual, el valor del parámetro de retardo de eliminación de CPB a nivel de subimagen debe ser igual a 0.

Description

DESCRIPCIÓN

Indicador de nivel de secuencia para parámetros de búfer de imágenes codificadas a nivel de subimagen CAMPO TÉCNICO

[0001] La presente divulgación se refiere a la codificación de vídeo.

ANTECEDENTES

[0002] Las capacidades de vídeo digital se pueden incorporar a una amplia gama de dispositivos, incluyendo televisores digitales, sistemas de radiodifusión directa digital, sistemas de radiodifusión inalámbrica, asistentes digitales personales (PDA), ordenadores portátiles o de escritorio, ordenadores de tableta, lectores de libros electrónicos, cámaras digitales, dispositivos de grabación digital, reproductores de medios digitales, dispositivos de videojuegos, consolas de videojuegos, teléfonos móviles o de radio por satélite, los denominados "teléfonos inteligentes", dispositivos de videoconferencia, dispositivos de emisión en continuo (streaming) de vídeo y similares. Los dispositivos de vídeo digital implementan técnicas de compresión de vídeo, tales como las descritas en las normas definidas por MPEG-2, MPEG-4, ITU-T H.263, ITU-T H.264/MPEG-4, parte 10, Codificación Avanzada de Vídeo (AVC), la norma de Codificación de Vídeo de Alta Eficacia (HEVC) y las ampliaciones de dichas normas. Los dispositivos de vídeo pueden transmitir, recibir, codificar, descodificar y/o almacenar información de vídeo digital más eficazmente implementando dichas técnicas de compresión de vídeo.

[0003] Las técnicas de compresión de vídeo realizan predicción espacial (intraimagen) y/o predicción temporal (entre imágenes) para reducir o eliminar la redundancia intrínseca a las secuencias de vídeo. Para la codificación de vídeo basada en bloques, un fragmento de vídeo (es decir, una trama de vídeo o una parte de una trama de vídeo) se puede dividir en bloques de vídeo, que también se pueden denominar bloques arbolados, unidades de codificación (CU) y/o nodos de codificación. Los bloques de vídeo en un fragmento intracodificado (I) de una imagen se codifican usando predicción espacial con respecto a muestras de referencia en bloques vecinos en la misma imagen. Los bloques de vídeo en un fragmento intercodificado (P o B) de una imagen pueden usar predicción espacial con respecto a muestras de referencia de bloques vecinos en la misma imagen o predicción temporal con respecto a muestras de referencia en otras imágenes de referencia. Las imágenes se pueden denominar tramas y las imágenes de referencia se pueden denominar tramas de referencia.

[0004] La predicción espacial o temporal da como resultado un bloque predictivo para un bloque que se va a codificar. Los datos residuales representan diferencias de píxeles entre el bloque original que se va a codificar y el bloque predictivo. Un bloque intercodificado se codifica de acuerdo con un vector de movimiento que apunta a un bloque de muestras de referencia que forman el bloque predictivo, y los datos residuales que indican la diferencia entre el bloque codificado y el bloque predictivo. Un bloque intracodificado se codifica de acuerdo con un modo de intracodificación y los datos residuales. Para compresión adicional, los datos residuales se pueden transformar desde el dominio de píxel a un dominio de transformada, dando como resultado coeficientes de transformada residuales, que a continuación se pueden cuantificar. Los coeficientes de transformada cuantificados, dispuestos inicialmente en una matriz bidimensional, se pueden explorar para producir un vector unidimensional de coeficientes de transformada, y se puede aplicar la codificación por entropía para lograr incluso más compresión.

[0005] Las mejoras en la redacción propuestas para el borrador de la memoria descriptiva del texto de codificación de vídeo de alta eficacia (HEVC) 8" de Bross et al., es un documento de entrada presentado el 12 de septiembre de 2012 al Equipo de colaboración conjunta sobre la codificación de vídeo (JCT-VC) de ITU-T SG16 WP3 e ISO/IEC JTC1/SC29/WG11, 11.a Conferencia: Shanghái, 10-19 de octubre de 2012 (documento número JCTVC-K0030_v1).

[0006] En el documento US 2010/0246662 A1, un procedimiento de codificación de imágenes en movimiento incluye la salida de datos codificados que comprenden una secuencia de código de imagen correspondiente a los fragmentos de una imagen en movimiento y la primera información de temporización que indica los tiempos en los que se han de descodificar los fragmentos.

BREVE EXPLICACIÓN

[0007] En general, las técnicas descritas en la presente divulgación están relacionadas con la señalización y la derivación de tiempos de eliminación de búfer de imágenes codificadas en la codificación de vídeo.

[0008] La invención se define por las reivindicaciones.

[0009] En un ejemplo, las técnicas descritas en la presente divulgación están relacionadas con un procedimiento para descodificar datos de vídeo. El procedimiento puede incluir descodificar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una unidad de acceso (AU) y la eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El procedimiento puede incluir además determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y descodificar datos de vídeo de la primera DU en base, al menos en parte, al tiempo de eliminación.

[0010] En otro ejemplo, las técnicas descritas en la presente divulgación están relacionadas con un procedimiento para codificar datos de vídeo. El procedimiento puede incluir codificar una duración entre la eliminación de CPB de una primera DU en una AU y la eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El procedimiento puede incluir además determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración codificada.

[0011] Aún en otro ejemplo, se proporciona un dispositivo de codificación de vídeo que comprende un codificador de vídeo. El codificador de vídeo se configura para codificar una duración entre la eliminación de CPB de una primera DU en una AU y una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El codificador de vídeo se configura además para determinar un tiempo de eliminación de la DU en base a la duración codificada.

[0012] Las técnicas descritas en el presente documento también incluyen un ejemplo de un medio de almacenamiento legible por ordenador que tiene almacenadas en el mismo instrucciones que, cuando se ejecutan, hacen que un procesador de un dispositivo para codificar datos de vídeo codifique una duración entre la eliminación de CPB de una primera DU en una AU y una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. Las instrucciones, cuando se ejecutan, también se deben al procesador para determinar un tiempo de eliminación de la DU en base al menos a la duración codificada.

[0013] En otro ejemplo, las técnicas descritas en la presente divulgación están relacionadas con un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede incluir medios para codificar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una unidad de acceso (AU) y una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El dispositivo de codificación de vídeo puede incluir además medios para determinar un tiempo de eliminación de la DU en base al menos a la duración codificada.

[0014] Estas técnicas de ejemplo se pueden implementar conjuntamente o por separado. Las técnicas de la presente divulgación también se describen en términos de aparatos configurados para implementar las técnicas, así como en medios de almacenamiento legibles por ordenador que almacenan instrucciones que hacen que uno más procesadores realicen las técnicas.

[0015] Los detalles de uno o más ejemplos se exponen en los dibujos adjuntos y la descripción a continuación. Otros rasgos característicos, objetivos y ventajas resultarán evidentes a partir de la descripción y los dibujos, y a partir de las reivindicaciones.

BREVE DESCRIPCIÓN DE LOS DIBUJOS

[0016]

La FIG. 1 es un diagrama de bloques que ilustra un sistema de codificación y descodificación de vídeo de ejemplo que puede utilizar las técnicas descritas en la presente divulgación.

La FIG. 2 es un diagrama de bloques que ilustra un codificador de vídeo de ejemplo que puede implementar las técnicas descritas en la presente divulgación.

La FIG. 3 es un diagrama de bloques que ilustra un descodificador de vídeo de ejemplo que puede implementar las técnicas descritas en la presente divulgación.

La FIG. 4 es un diagrama conceptual que ilustra dos unidades de acceso (AU) en orden de descodificación consecutivo que pueden tener tiempos de descodificación determinados de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 5 es un diagrama de flujo que ilustra un procedimiento para determinar un tiempo de eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una AU en base al tiempo de eliminación de CPB para una segunda DU de la AU de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 6 es un diagrama de flujo que ilustra otro procedimiento para determinar un tiempo de eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación en una unidad de acceso en base al tiempo de eliminación de CPB para una segunda unidad de descodificación de la unidad de acceso de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 7 es un diagrama de flujo que ilustra un procedimiento para derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, al mensaje SEI de temporización de subimágenes de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 8 es un diagrama de flujo que ilustra otro procedimiento para derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, a la codificación de un mensaje SEI de temporización de subimágenes de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 9 es un diagrama de flujo que ilustra un procedimiento para descodificar el indicador de nivel de secuencia para el parámetro de búfer de imágenes codificadas a nivel de subimagen de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 10 es un diagrama de flujo que ilustra un procedimiento para codificar el indicador de nivel de secuencia para el parámetro de búfer de imágenes codificadas a nivel de subimagen de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 11 es un diagrama de flujo que ilustra un procedimiento para descodificar una DU que tiene una definición expandida de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 12 es un diagrama de flujo que ilustra un procedimiento para codificar una DU que tiene una definición expandida de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 13 es un diagrama de flujo que ilustra un procedimiento para descodificar un período de almacenamiento en búfer de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 14 es un diagrama de flujo que ilustra un procedimiento para codificar un período de almacenamiento en búfer de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 15 es un diagrama de flujo que ilustra un procedimiento para descodificar los tiempos de eliminación nominales y de llegada de búfer de imágenes codificadas de acuerdo con las técnicas descritas en la presente divulgación.

La FIG. 16 es un diagrama de flujo que ilustra un procedimiento para codificar los tiempos de eliminación nominales y de llegada de búfer de imágenes codificadas de acuerdo con las técnicas descritas en la presente divulgación.

DESCRIPCIÓN DETALLADA

[0017] La presente divulgación describe técnicas para la señalización y derivación eficaces y a prueba de errores (error resilient) de tiempos de eliminación de búfer de imágenes codificadas (CPB) de unidades de datos codificados en la codificación de vídeo. Los tiempos de eliminación de CPB también son conocidos como tiempos de descodificación. La divulgación proporciona técnicas para determinar un tiempo de eliminación de CPB para una unidad de descodificación (DU) de una unidad de acceso (AU) que es independiente de los tiempos de eliminación de cualquier otra AU. Por ejemplo, los tiempos de eliminación de CPB para una DU actual de una AU se señalarán en base a una duración entre un tiempo de eliminación de CPB de una DU siguiente en un orden de descodificación en la AU y la DU actual o bien una duración entre el tiempo de eliminación de CPB de la última DU en la AU y la DU actual. En otro ejemplo, la derivación del tiempo de eliminación de CPB se especifica de tal manera que utiliza información transportada en mensajes de información de mejora complementaria (SEI) de temporización de subimágenes. Se señala la duración entre la eliminación de CPB de la última DU en la AU en orden de descodificación y la DU asociada con un mensaje SEI de temporización de subimágenes.

[0018] Además, se proporcionan técnicas para incluir un indicador de nivel de secuencia que se puede señalar para indicar si los parámetros de CPB de subimagen presiden solo en uno de los mensajes SEI de temporización de imágenes o en los mensajes SEI de temporización de subimágenes, pero nunca en ambos, de acuerdo con las técnicas descritas en el presente documento. El indicador igual a 1 indica que los parámetros de retardo de eliminación de CPB a nivel de subimagen están presentes en los mensajes SEI de temporización de imágenes y no está presente ningún mensaje SEI de temporización de subimágenes. El indicador igual a 0 indica que los parámetros de retardo de eliminación de CPB a nivel de subimagen están presentes en los mensajes SEI de temporización de subimágenes y los mensajes SEI de temporización de imágenes no incluyen parámetros de retardo de eliminación de CPB a nivel de subimagen.

[0019] La presente divulgación también proporciona técnicas para expandir una definición de una unidad de descodificación. La presente divulgación proporciona además técnicas para restringir los mensajes SEI en el período de almacenamiento en búfer y los mensajes SEI en el punto de recuperación, de modo que no se puedan asociar con las AU con una variable, TemporalId, mayor que 0. La variable TemporalId se deriva de un elemento de sintaxis asociado con cada AU. La presente divulgación también proporciona técnicas para proporcionar un indicador para señalar si se derivan los tiempos de eliminación de CPB a un nivel de AU o un nivel de subimagen.

[0020] Las técnicas descritas en el presente documento se pueden aplicar a diversas normas de codificación de vídeo. Las normas de codificación de vídeo incluyen ITU-T H.261, Is O/IEC MPEG-1 Visual, ITU-T H.262 o ISO/IEC MPEG-2 Visual, ITU-T H.263, ISO/IEC MPEG-4 Visual e ITU-T H.264 (también conocida como ISO/IEC MPEG-4 AVC), incluyendo sus ampliaciones de Codificación de Vídeo Escalable (SVC) y de Codificación de Vídeo Multivista (M^v C).

[0021] Además, existe una nueva norma de codificación de vídeo, a saber la Codificación de Vídeo de Alta Eficacia (HEVC) que se está desarrollando por el Equipo de colaboración conjunta sobre la codificación de vídeo (JCT-VC) del Grupo de expertos en codificación de vídeo (VCEG) de ITU-T y el Grupo de expertos en imágenes en movimiento (MPEG) de ISO/IEC. Un borrador de trabajo (WD) reciente de HEVC es el borrador de trabajo 8, y a continuación en el presente documento denominado HEVC WD8. Bross et al., borrador de la memoria descriptiva del texto de codificación de vídeo de alta eficacia (HEVC) 8, julio de 2012, Estocolmo, disponible a partir del 2 de mayo de 2013 en http://phenix.intevry.fr/jct/doc_end_user/documents/10_Stockholm/wg11/JCTVC-J1003-v8.zip.

[0022] Las técnicas descritas en la presente divulgación se describen con respecto a la norma HEVC, aunque los aspectos de la presente divulgación no están así limitados y se pueden extender a otras normas de codificación de vídeo, así como a las técnicas de codificación de vídeo patentadas.

[0023] Un codificador de vídeo puede generar un flujo de bits que incluye datos de vídeo codificados. El flujo de bits puede comprender una serie de unidades de capa de abstracción de red (NAL). Las unidades de NAL del flujo de bits pueden incluir unidades de NAL de capa de codificación de vídeo (VCL) y unidades de NAL distintas de VCL. Las unidades de NAL de VCL pueden incluir fragmentos codificados de imágenes. Una unidad de NAL distinta de VCL puede incluir un conjunto de parámetros de vídeo (VPS), un conjunto de parámetros de secuencia (SPS), un conjunto de parámetros de imagen (PPS), información de mejora complementaria (SEI) u otros tipos de datos. Un VPS es una estructura sintáctica que puede contener elementos de sintaxis que se aplican a cero o más secuencias de vídeo codificadas completas. Un SPS es una estructura sintáctica que puede contener elementos de sintaxis que se aplican a cero o más secuencias de vídeo codificadas completas. Un único VPS se puede aplicar a múltiples SPS. Un PPS es una estructura sintáctica que puede contener elementos de sintaxis que se aplican a cero o más imágenes codificadas completas. Un único SPS se puede aplicar a múltiples PPS. Diversos aspectos del VPS, SPS y PPS se pueden formar, en general, como se define por la norma HEVC.

[0024] Las unidades de NAL pueden incluir un elemento de sintaxis que es indicativo del valor de la variable temporalId. El temporalId de una unidad de NAL especifica un identificador temporal de la unidad de NAL. Si el identificador temporal de una primera unidad de NAL es menor que el identificador temporal de una segunda unidad de NAL, los datos encapsulados por la primera unidad de NAL se pueden descodificar sin referencia a los datos encapsulados por la segunda unidad de NAL.

[0025] Cada norma de codificación de vídeo incluye en general una especificación de un modelo de almacenamiento en búfer de vídeo. En AVC y HEVC, el modelo de almacenamiento en búfer se denomina descodificador de referencia hipotético (HRD) que describe cómo los datos se han de almacenar en búfer para su descodificación y cómo los datos descodificados se almacenan en búfer para su salida. E1HRD incluye un modelo de almacenamiento en búfer, tanto del búfer de imágenes codificadas (CPB) como del búfer de imágenes descodificadas (DPB). El CPB es un búfer de primero en entrar primero en salir que contiene unidades de acceso en orden de descodificación especificado por el HRD. El DPB es un búfer que contiene imágenes descodificadas para referencia, reordenamiento de salida o retardo de salida especificado por e1HRD. Los parámetros del descodificador de referencia hipotético especifican matemáticamente los comportamientos del CPB y el DPB. El HRD puede imponer directamente restricciones en diferentes parámetros, incluyendo temporizaciones, tamaños de búfer y velocidades de transmisión de bits, y puede imponer indirectamente restricciones en características y estadísticas de flujos de bits. En algunos ejemplos, un conjunto completo de parámetros de HRD puede incluir cinco parámetros básicos: el retardo de eliminación de CPB inicial, el tamaño de CPB, la velocidad de transmisión de bits, el retardo de salida de DPB inicial y el tamaño de DPB.

[0026] En AVC y HEVC, la conformidad del flujo de bits y la conformidad del descodificador se especifican como parte de la especificación del HRD. Aunque el nombre del descodificador de referencia hipotético se refiere a un tipo de descodificador, el HRD típicamente se necesita en el lado del codificador para la conformidad del flujo de bits, mientras que no necesariamente se necesita en el lado del descodificador. Sin embargo, los aspectos de la presente divulgación no están así limitados, y el HRD también puede ser parte del lado del descodificador. AVC y HEVC pueden especificar dos tipos de conformidad de flujo de bits o HRD, a saber, tipo I y tipo II. Además, AVC y HEVC especifican dos tipos de conformidad de descodificador: la conformidad de descodificador de temporización de salida y la conformidad de descodificador de orden de salida.

[0027] En los modelos de HRD de AVC y HEVC, la descodificación o la eliminación de CPB está basada en unidades de acceso, y las normas suponen que la descodificación de imágenes es instantánea. En aplicaciones prácticas, si un descodificador en conformidad sigue estrictamente los tiempos de descodificación señalados (por ejemplo, en los mensajes de información de mejora complementaria (SEI)) para iniciar la descodificación de unidades de acceso, entonces el primer tiempo posible para emitir una imagen descodificada particular es igual al tiempo de descodificación de esa imagen particular, más el tiempo necesario para descodificar esa imagen particular. Es decir, el primer tiempo para emitir la imagen descodificada es el tiempo de descodificación más el tiempo para descodificar la imagen. Sin embargo, el tiempo necesario para descodificar una imagen en el mundo real no puede ser igual a cero.

[0028] En HEVC WD8, el descodificador de referencia hipotético (HRD) se especifica en el Anexo C. E1HRD se basa en los parámetros de HRD que se pueden proporcionar en el flujo de bits en la estructura sintáctica hrd_parameters() (en el conjunto de parámetros de vídeo (VPS) y/o el conjunto de parámetros de secuencia (SPS)), los mensajes SEI en el período de almacenamiento en búfer y el mensaje SEI de temporización de imágenes. La solicitud provisional de EE. UU. n.° 61/705.102, presentada el 24 de septiembre de 2012, propone una señalización y selección potenciadas de los parámetros de HRD.

[0029] Puede haber problemas asociados con los procedimientos existentes para la señalización y la derivación de los tiempos de eliminación de CPB, también conocidos como tiempos de descodificación. Lo siguiente describe algunos de estos problemas.

[0030] Los tiempos de eliminación de CPB de la unidad de descodificación pueden no ser a prueba de errores cuando los tiempos de eliminación de CPB para las unidades de descodificación dentro de una unidad de acceso dependen de la información de temporización de una unidad de acceso previa. Una unidad de acceso puede comprender una o más unidades de descodificación. Se puede determinar un tiempo de eliminación para cada DU en una AU. Se puede señalar un tiempo de eliminación de CPB para la AU y para una o más DU dentro de la AU. Un mensaje SEI para una AU puede incluir un tiempo de eliminación de CPB para la propia AU, que también corresponde al tiempo de eliminación de CPB para la última DU dentro de la AU.

[0031] El búfer de imágenes codificadas puede funcionar en dos niveles: un nivel de unidad de acceso y un nivel de subimagen. Cuando el CPB funciona a nivel de subimagen (es decir, cuando SubPicCpbFlag es igual a 1), la señalización y la derivación de los tiempos de eliminación de CPB de la unidad de descodificación (DU) que están basados en los mensajes SEI de temporización de imágenes pueden no ser a prueba de errores en circunstancias donde la información se pierde de una AU previa en orden de descodificación. Por ejemplo, la información de temporización que se señala para una AU actual incluye una duración entre un tiempo de eliminación de CPB para una primera DU en la AU actual y una última DU en una AU previa. Por tanto, si la información de temporización para la última DU en la AU previa se pierde, entonces el descodificador no puede determinar el tiempo de eliminación para la primera DU en la AU actual porque el tiempo de eliminación para la primera DU depende de la información de temporización perdida.

[0032] En otras palabras, la señalización de la duración entre los tiempos de eliminación de CPB de la primera unidad de descodificación en una AU actual y la última DU en la AU previa en orden de descodificación, así como el uso de dicha señalización en la derivación del tiempo de eliminación de CPB, hace que el sistema o el codificador sea vulnerable a la información de temporización perdida. Por ejemplo, si se pierde la información de eliminación de CPB (es decir, el mensaje SEI de temporización de imágenes) de la AU previa, entonces no se puede derivar correctamente el tiempo de eliminación de CPB de la primera DU en la AU actual. Además, a excepción de la última DU de la AU actual, para la que el tiempo de eliminación de CPB se deriva igual al de la AU actual, cada uno de los tiempos de eliminación de CPB de todas las demás DU en la AU actual se basa en el tiempo de eliminación de CPB de la DU previa en orden de descodificación. Por tanto, si sucede la pérdida anterior, el tiempo de eliminación de CPB de cada DU en la AU actual, a excepción de la última DU, no se puede derivar correctamente.

[0033] Por el contrario, en el presente documento se describen técnicas que pueden reducir la vulnerabilidad del sistema o codificador a la información de temporización perdida. Por ejemplo, se proporcionan técnicas para determinar un tiempo de eliminación de búfer de imágenes codificadas para una DU de una AU que es independiente de los tiempos de eliminación de cualquier otra unidad de acceso. Por ejemplo, un codificador de vídeo señalará, en el mensaje SEI de temporización de imágenes, los tiempos de eliminación de CPB para que se reciba una DU de una AU por un descodificador de vídeo, en base a bien una duración de tiempo entre una DU actual y un tiempo de eliminación de CPB de una DU siguiente en un orden de descodificación en la AU o bien un tiempo de eliminación de CPB de la última DU en la AU. Por tanto, la presente divulgación describe técnicas para señalización y derivación más eficaces y a prueba de errores de los tiempos de eliminación de CPB de las unidades de datos codificados en la codificación de vídeo, porque la información de temporización para cada DU en una AU no depende de la información de temporización de otra AU diferente.

[0034] Otro problema asociado con los procedimientos existentes de señalización y derivación de los tiempos de eliminación de CPB es que la información de temporización en los mensajes SEI de temporización de subimágenes no se puede utilizar aunque esté presente. Por ejemplo, pueden estar presentes mensajes SEI de temporización de subimágenes, que transportan información de retardo de eliminación de CPB de DU. Sin embargo, el funcionamiento de CPB a nivel de subimagen se especifica de manera que el descodificador de vídeo siempre utiliza mensajes SEI de temporización de imágenes y nunca utiliza mensajes SEI de temporización de subimágenes. Por tanto, los bits usados para representar los mensajes SEI de temporización de subimágenes se pueden desperdiciar. Además, el retardo de eliminación de CPB de DU señalado en un mensaje SEI de temporización de subimágenes es la diferencia entre el tiempo de eliminación de CPB de la DU asociada y el tiempo de eliminación de CPB de la primera DU de la AU precedente asociada con un mensaje SEI en el período de almacenamiento en búfer. Si bien esto puede ser, en cierto modo, a prueba de errores, también puede no ser eficaz, ya que la diferencia de tiempo puede ser un valor significativo.

[0035] Sin embargo, en la presente divulgación se proporcionan técnicas para especificar la derivación del tiempo de eliminación de CPB de una manera que puede utilizar la información transportada en los mensajes de información de mejora complementaria (SEI) de temporización de subimágenes. Por ejemplo, la derivación del tiempo de eliminación de CPB se especifica de una manera que puede utilizar información transportada en mensajes SEI de temporización de subimágenes, y el codificador de vídeo puede señalar la duración entre la eliminación de CPB de la última DU en la AU en orden de descodificación y la DU asociada con un mensaje SEI de temporización de subimágenes, lo que hace que la señalización del codificador y la derivación del descodificador sean tanto más eficaces como a prueba de errores.

[0036] Otro problema asociado con los procedimientos existentes para la señalización y la derivación de los tiempos de eliminación de CPB es que los parámetros de CPB a nivel de subimagen en los mensajes SEI de temporización de imágenes y los mensajes SEI de temporización de subimágenes pueden estar ambos presentes para la misma funcionalidad. Esa funcionalidad se puede proporcionar para admitir el funcionamiento de CPB basado en subimágenes. Duplicar estos parámetros para la misma funcionalidad puede ser ineficaz. Puede ser posible que solo un conjunto de parámetros de CPB a nivel de subimagen, en cualquiera de los tipos de mensajes SEI, sea suficiente. En el presente documento se describen técnicas que configuran un codificador de vídeo para proporcionar un indicador de nivel de secuencia que se puede señalar para indicar la presencia de parámetros de CPB de subimágenes en solo uno de los mensajes SEI de temporización de imágenes o en mensajes SEI de temporización de subimágenes, pero no en ambos. Usando este indicador de nivel de secuencia, un descodificador de vídeo determina si se encuentran parámetros de CPB de subimagen, tales como los parámetros de retardo de eliminación de CPB a nivel de subimagen, en un mensaje SEI de temporización de imágenes o en un mensaje SEI de temporización de subimágenes.

[0037] Aún otro problema asociado con los procedimientos existentes para la señalización y la derivación de los tiempos de eliminación de CPB es que la definición de unidades de descodificación no consideró unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63. Por tanto, cuando algunas de estas unidades de NAL distintas de VCL están presentes, se puede producir un comportamiento inesperado de CPB a nivel de subimagen. Por el contrario, la presente divulgación proporciona técnicas para expandir una definición de una unidad de descodificación para que incluya unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0038] Otro problema potencial asociado con los procedimientos existentes para la señalización y la derivación de los tiempos de eliminación de CPB es que el mensaje SEI en el período de almacenamiento en búfer y el mensaje SEI en el punto de recuperación se pueden asociar con las AU con cualquier valor de un valor de identificación temporal (TemporalId). Por tanto, el codificador puede inicializar HRD en una AU con TemporalId mayor que 0. En este caso, cuando se admite la escalabilidad temporal, el tiempo de eliminación de CPB de una AU con un valor de TemporalId más pequeño, en el mismo período de almacenamiento en búfer, puede depender de la información en la AU con un valor de TemporalId más grande. Sin embargo, para que la escalabilidad temporal funcione, el procedimiento de descodificación de cualquier AU puede no depender de otra AU con un TemporalId mayor. La presente divulgación proporciona además técnicas para restringir los mensajes SEI en el período de almacenamiento en búfer y los mensajes SEI en el punto de recuperación, de modo que no se puedan asociar con las AU con TemporalId mayor que 0.

[0039] El valor de identificación temporal (TemporalId) puede ser un valor jerárquico que indica qué imágenes se pueden usar para codificar la imagen actual. En general, una imagen con un valor de TemporalId particular puede ser, posiblemente, una imagen de referencia para imágenes con valores de TemporalId iguales o mayores, pero no al revés. Por ejemplo, una imagen con un valor de TemporalId de 1 puede ser, posiblemente, una imagen de referencia para imágenes con valores de TemporalId de 1, 2, 3,..., pero no para una imagen con un valor de TemporalId de 0.

[0040] El valor más bajo de TemporalId también puede indicar la velocidad de visualización más baja. Por ejemplo, si un descodificador de vídeo solo descodifica imágenes con valores de TemporalId de 0, la velocidad de visualización puede ser de 7,5 imágenes por segundo. Si el descodificador de vídeo solo descodifica imágenes con valores de TemporalId de 0 y 1, la velocidad de visualización puede ser de 15 imágenes por segundo, etc.

[0041] Otro problema potencial asociado con los procedimientos existentes para señalar y derivar los tiempos de eliminación de CPB está en el procedimiento de derivación de tiempo de eliminación de CPB; cuando sub_pic_cpb_params_present_flag es igual a 1, la derivación del tiempo de eliminación de CPB usa los tiempos de llegada finales y los tiempos de eliminación nominales para ambos casos con SubPicCpbFlag igual a 0 (cuando el CPB funciona a nivel de AU) y con SubPicCpbFlag igual a 1 (cuando el CPB funciona a nivel de subimagen). Sin embargo, los valores usados para los tiempos de llegada finales y los tiempos de eliminación nominales se pueden derivar solo para uno de los dos casos (por ejemplo, para el SubPicCPBFlag igual a 0 o bien para el SubPicCPBFlag igual a 1), y de ahí que no estén disponibles para el otro caso. Las técnicas descritas en el presente documento proporcionan un indicador para señalar si el descodificador ha de derivar los tiempos de eliminación de CPB a un nivel de AU o un nivel de subimagen. Por ejemplo, el descodificador deriva los tiempos de llegada de CPB y los tiempos de eliminación nominales tanto para el nivel de AU como para el nivel de subimagen, independientemente del valor de SubPicCpbFlag, mientras que el descodificador deriva los tiempos de eliminación de CPB solo para el nivel de AU cuando SubPicCpbFlag es igual a 0 y solo para el nivel de subimagen cuando SubPicCpbFlag es igual a 1, de acuerdo con las técnicas descritas en el presente documento. Como se describe en el presente documento, un tiempo de eliminación nominal de CPB puede ser un valor por defecto para el tiempo de eliminación de CPB. En algunos ejemplos con condiciones típicas, el tiempo de eliminación de CPB es igual al tiempo de eliminación nominal de CPB. Sin embargo, bajo determinadas condiciones, son diferentes y el tiempo de eliminación de CPB puede ser ligeramente diferente del valor por defecto.

[0042] Las siguientes técnicas, descritas en la presente divulgación, pueden abordar los problemas descritos anteriormente. Por ejemplo, las técnicas descritas en la presente divulgación pueden proporcionar una determinación más a prueba de errores del tiempo de eliminación de búfer de imágenes codificadas. Además, las técnicas pueden promover la eficacia de señalización que reduce el ancho de banda, la sobrecarga de señalización e incrementa la eficacia de codificación, además de ser más a prueba de errores. Además, las técnicas descritas en la presente divulgación pueden permitir una escalabilidad temporal apropiada.

[0043] Dichas técnicas pueden incluir, por ejemplo, determinar un tiempo de eliminación de búfer de imágenes codificadas para una unidad de descodificación (DU) de una unidad de acceso (AU) que es independiente de los tiempos de eliminación de cualquier otra unidad de acceso. Por ejemplo, los tiempos de eliminación de CPB para una DU de una AU se señalarán en base a una duración entre una DU actual y un tiempo de eliminación de CPB de una DU siguiente en un orden de descodificación en la AU o bien un tiempo de eliminación de CPB de la última DU en la AU. Las técnicas también pueden incluir la señalización de un indicador de nivel de secuencia para controlar la presencia de parámetros de CPB de subimágenes en solo uno de los mensajes SEI de temporización de imágenes o en mensajes SEI de temporización de subimágenes de acuerdo con las técnicas descritas en el presente documento. Las técnicas también pueden incluir expandir una definición de una unidad de descodificación. Las técnicas adicionales proporcionan mensajes SEI en el período de almacenamiento en búfer de restricción y mensajes SEI en el punto de recuperación, de modo que no se puedan asociar con las AU con una variable, TemporalId, mayor que 0. Las técnicas también pueden incluir proporcionar un indicador para señalar si se derivan los tiempos de eliminación de CPB a un nivel de AU o un nivel de subimagen.

[0044] Los detalles para la implementación de estas técnicas se describen en más detalle a continuación. Otras partes no mencionadas pueden ser las mismas que en HEVC WD8.

[0045] La FIG. 1 es un diagrama de bloques que ilustra un sistema de codificación y descodificación de vídeo 10 de ejemplo que puede utilizar las técnicas descritas en la presente divulgación. Como se muestra en la FIG. 1, el sistema 10 incluye un dispositivo de origen 12 que genera datos de vídeo codificados que se han de descodificar por un dispositivo de destino 14 en un tiempo posterior. El dispositivo de origen 12 y el dispositivo de destino 14 pueden comprender cualquiera de una amplia gama de dispositivos, incluyendo ordenadores de escritorio, ordenadores plegables (por ejemplo, portátiles), ordenadores de tableta, descodificadores, equipos telefónicos de mano tales como los denominados teléfonos "inteligentes", los denominados paneles "inteligentes", televisores, cámaras, dispositivos de visualización, reproductores de medios digitales, consolas de videojuegos, dispositivos de emisión en continuo de vídeo o similares. En algunos casos, el dispositivo de origen 12 y el dispositivo de destino 14 pueden estar equipados para la comunicación inalámbrica.

[0046] En el ejemplo de la FIG. 1, el dispositivo de origen 12 incluye una fuente de vídeo 18, un codificador de vídeo 20 y una interfaz de salida 22. En algunos casos, la interfaz de salida 22 puede incluir un modulador/desmodulador (módem) y/o un transmisor. En el dispositivo de origen 12, la fuente de vídeo 18 puede incluir una fuente tal como un dispositivo de captación de vídeo, por ejemplo, una videocámara, un archivo de vídeo que contenga un vídeo captado previamente, una interfaz de alimentación de vídeo para recibir un vídeo desde un proveedor de contenido de vídeo y/o un sistema de gráficos por ordenador para generar datos de gráficos por ordenador como el vídeo de origen, o una combinación de dichas fuentes. Como ejemplo, si la fuente de vídeo 18 es una videocámara, el dispositivo de origen 12 y el dispositivo de destino 14 pueden formar los denominados teléfonos con cámara o videoteléfonos. Sin embargo, las técnicas descritas en la presente divulgación pueden ser aplicables a la codificación de vídeo en general, y se pueden aplicar a aplicaciones inalámbricas y/o por cable.

[0047] El codificador de vídeo 20 puede codificar el vídeo captado, precaptado o generado por ordenador. Los datos de vídeo codificados se pueden transmitir directamente al dispositivo de destino 14 por medio de la interfaz de salida 22 del dispositivo de origen 12. Los datos de vídeo codificados también (o de forma alternativa) se pueden almacenar en el dispositivo de almacenamiento 32 para un acceso posterior por el dispositivo de destino 14 u otros dispositivos, para su descodificación y/o reproducción.

[0048] El dispositivo de destino 14 incluye una interfaz de entrada 28, un descodificador de vídeo 30 y un dispositivo de visualización 32. En algunos casos, la interfaz de entrada 28 puede incluir un receptor y/o un módem. La interfaz de entrada 28 del dispositivo de destino 14 recibe los datos de vídeo codificados sobre el enlace 16. Los datos de vídeo codificados comunicados sobre el enlace 16, o proporcionados en el dispositivo de almacenamiento 32, pueden incluir una variedad de elementos de sintaxis generados por el codificador de vídeo 20 para su uso por un descodificador de vídeo, tal como el descodificador de vídeo 30, en la descodificación de los datos de vídeo. Dichos elementos de sintaxis se pueden incluir con los datos de vídeo codificados transmitidos en un medio de comunicación, almacenarse en un medio de almacenamiento o almacenarse en un servidor de archivos.

[0049] El dispositivo de visualización 32 puede estar integrado en, o ser externo a, el dispositivo de destino 14. En algunos ejemplos, el dispositivo de destino 14 puede incluir un dispositivo de visualización integrado y también se puede configurar para interconectarse con un dispositivo de visualización externo. En otros ejemplos, el dispositivo de destino 14 puede ser un dispositivo de visualización. En general, el dispositivo de visualización 32 visualiza los datos de vídeo descodificados a un usuario, y puede comprender cualquiera de una variedad de dispositivos de visualización, tales como una pantalla de cristal líquido (LCD), una pantalla de plasma, una pantalla de matriz de puntos, una pantalla de diodos orgánicos emisores de luz (OLED), tinta electrónica u otro tipo de dispositivo de visualización.

[0050] El dispositivo de destino 14 puede recibir los datos de vídeo codificados que se van a descodificar por medio del enlace 16. El enlace 16 puede comprender cualquier tipo de medio o dispositivo que pueda mover los datos de vídeo codificados desde el dispositivo de origen 12 al dispositivo de destino 14. En un ejemplo, el enlace 16 puede comprender un medio de comunicación para posibilitar que el dispositivo de origen 12 transmita los datos de vídeo codificados directamente a un dispositivo de destino 14 en tiempo real. Los datos de vídeo codificados se pueden modular de acuerdo con una norma de comunicación, tal como un protocolo de comunicación inalámbrica, y transmitir al dispositivo de destino 14. El medio de comunicación puede comprender cualquier medio de comunicación inalámbrica o por cable, tal como un espectro de radiofrecuencia (RF) o una o más líneas físicas de transmisión. El medio de comunicación puede formar parte de una red basada en paquetes, tal como una red de área local, una red de área amplia o una red global, tal como Internet. El medio de comunicación puede incluir encaminadores, conmutadores, estaciones base o cualquier otro equipo que pueda ser útil para facilitar la comunicación desde el dispositivo de origen 12 al dispositivo de destino 14.

[0051] De forma alternativa, los datos codificados se pueden emitir desde la interfaz de salida 22 a un dispositivo de almacenamiento 32. De forma similar, se puede acceder a los datos codificados en el dispositivo de almacenamiento 32 por una interfaz de entrada. El dispositivo de almacenamiento 32 puede incluir cualquiera de una variedad de medios de almacenamiento de datos de acceso local o distribuidos, tales como una unidad de disco duro, discos Blu-ray, DVD, CD-ROM, memoria flash, memoria volátil o no volátil o cualquier otro medio de almacenamiento digital adecuado para almacenar datos de vídeo codificados. En otro ejemplo, el dispositivo de almacenamiento 32 se puede corresponder con un servidor de archivos u otro dispositivo de almacenamiento intermedio que puede contener el vídeo codificado generado por el dispositivo de origen 12. El dispositivo de destino 14 puede acceder a datos de vídeo almacenados en el dispositivo de almacenamiento 32 por medio de emisión en continuo o descarga. El servidor de archivos puede ser cualquier tipo de servidor que pueda almacenar datos de vídeo codificados y transmitir esos datos de vídeo codificados al dispositivo de destino 14. Los servidores de archivos de ejemplo incluyen un servidor web (por ejemplo, para un sitio web), un servidor FTP, dispositivos de almacenamiento conectado en red (NAS) o una unidad de disco local. El dispositivo de destino 14 puede acceder a los datos de vídeo codificados a través de cualquier conexión de datos estándar, incluyendo una conexión a Internet. Esto puede incluir un canal inalámbrico (por ejemplo, una conexión Wi-Fi), una conexión por cable (por ejemplo, DSL, módem de cable, etc.) o una combinación de ambos que sea adecuada para acceder a datos de vídeo codificados almacenados en un servidor de archivos. La transmisión de datos de vídeo codificados en el dispositivo de almacenamiento 32 puede ser una transmisión de emisión en continuo, una transmisión de descarga o una combinación de ambas.

[0052] Las técnicas de la presente divulgación no están limitadas necesariamente a aplicaciones o entornos inalámbricos. Las técnicas se pueden aplicar a la codificación de vídeo en apoyo de cualquiera de una variedad de aplicaciones multimedia, tales como radiodifusiones de televisión por aire, transmisiones de televisión por cable, transmisiones de televisión por satélite, transmisiones de emisión en continuo de vídeo, por ejemplo, por medio de Internet, codificación de vídeo digital para su almacenamiento en un medio de almacenamiento de datos, descodificación de vídeo digital almacenado en un medio de almacenamiento de datos u otras aplicaciones. En algunos ejemplos, el sistema 10 se puede configurar para admitir una transmisión de vídeo unidireccional o bidireccional para admitir aplicaciones tales como emisión en continuo de vídeo, reproducción de vídeo, radiodifusión de vídeo y/o videotelefonía.

[0053] El codificador de vídeo 20 y el descodificador de vídeo 30 pueden funcionar de acuerdo con una norma de compresión de vídeo, tal como la norma de Codificación de Vídeo de Alta Eficacia (HEVC), actualmente en fase de desarrollo por parte del Equipo de colaboración conjunta sobre la codificación de vídeo (JCT-VC) del Grupo de expertos de codificación de vídeo (VCEG) de ITU-T y el Grupo de expertos en imágenes en movimiento (MPEG) de ISO/IEC. El codificador de vídeo 20 y el descodificador de vídeo 30 pueden funcionar de acuerdo con HEVC WD8. De forma alternativa, el codificador de vídeo 20 y el descodificador de vídeo 30 pueden funcionar de acuerdo con otras normas patentadas o de la industria, tales como ITU-T H.261, ISO/IEC MPEG-1 Visual, ITU-T H.262 o ISO/IEC MPEG-2 Visual, ITU-T H.263, ISO/IEC MPEG-4 Visual e ITU-T H.264 (también conocida como ISO/IEC MPEG-4 AVC), incluyendo sus extensiones de codificación de vídeo escalable (SVC) y codificación de vídeo de múltiples visualizaciones (MVC) o extensiones de dichas normas. Sin embargo, las técnicas de la presente divulgación no se limitan a ninguna norma de codificación particular.

[0054] En algunos ejemplos, el codificador de vídeo 20 y el descodificador de vídeo 30 pueden estar integrados cada uno con un codificador y descodificador de audio, y pueden incluir unidades MUX-DEMUX apropiadas, u otro hardware y software, para manejar la codificación tanto de audio como de vídeo en un flujo de datos común o en flujos de datos separados. Si procede, en algunos ejemplos, las unidades MUX-DEMUX se pueden ajustar al protocolo de multiplexación ITU H.223 o a otros protocolos, tales como el protocolo de datagramas de usuario (UDP).

[0055] El codificador de vídeo 20 y el descodificador de vídeo 30 se pueden implementar cada uno como cualquiera de una variedad de circuitos de codificador adecuados, tales como uno o más microprocesadores, procesadores de señales digitales (DSP), circuitos integrados específicos de la aplicación (ASIC), matrices de puertas programables por campo (FPGA), lógica discreta, software, hardware, firmware o cualquier combinación de los mismos. Cuando las técnicas se implementan parcialmente en software, un dispositivo puede almacenar instrucciones para el software en un medio adecuado no transitorio legible por ordenador y ejecutar las instrucciones en hardware usando uno o más procesadores para realizar las técnicas de la presente divulgación. Cada uno del codificador de vídeo 20 y el descodificador de vídeo 30 se pueden incluir en uno o más codificadores o descodificadores, de los que cualquiera se puede integrar como parte de un codificador/descodificador (CÓDEC) combinado en un dispositivo respectivo.

[0056] El JCT-VC está trabajando en el desarrollo de la norma HEVC. Las tentativas de normalización de HEVC se basan en un modelo en evolución de un dispositivo de codificación de vídeo denominado modelo de prueba de HEVC (HM). El HM supone varias capacidades adicionales de los dispositivos de codificación de vídeo en relación con los dispositivos existentes de acuerdo con, por ejemplo, ITU-T H.264/AVC. Por ejemplo, mientras que H.264 proporciona nueve modos de codificación por intrapredicción, e1HM puede proporcionar hasta treinta y tres modos de codificación por intrapredicción.

[0057] En general, el modelo de trabajo del HM describe que una trama o imagen de vídeo se puede dividir en una secuencia de bloques arbolados o unidades de codificación más grandes (LCU), que incluyen tanto muestras de luma como de croma. Un bloque arbolado tiene un propósito similar al de un macrobloque de la norma H.264. Un fragmento incluye un número de bloques arbolados consecutivos en orden de codificación. Una trama o imagen de vídeo se puede dividir en uno o más fragmentos. Cada bloque arbolado se puede separar en unidades de codificación (CU) de acuerdo con un árbol cuaternario. Por ejemplo, un bloque arbolado, como un nodo raíz del árbol cuaternario, se puede separar en cuatro nodos hijo, y cada nodo hijo puede ser, a su vez, un nodo padre y separarse en otros cuatro nodos hijo. Un nodo hijo final, no separado, como un nodo hoja del árbol cuaternario, comprende un nodo de codificación, es decir, un bloque de vídeo codificado. Los datos de sintaxis asociados con un flujo de bits codificado pueden definir un número máximo de veces que se puede separar un bloque arbolado, y también pueden definir un tamaño mínimo de los nodos de codificación.

[0058] Una CU incluye un nodo de codificación y unidades de predicción (PU) y unidades de transformada (TU) asociadas con el nodo de codificación. Un tamaño de la CU corresponde, en general, a un tamaño del nodo de codificación, y es típicamente de forma cuadrada. El tamaño de la CU puede variar desde 8x8 píxeles hasta el tamaño del bloque arbolado, con un máximo de 64x64 píxeles o más. Cada CU puede contener una o más PU y una o más TU. Los datos de sintaxis asociados con una CU pueden describir, por ejemplo, la división de la CU en una o más PU. Los modos de división pueden diferir entre si la CU está codificada en modo directo o de salto, codificada en modo de intrapredicción o codificada en modo de interpredicción. Las PU se pueden dividir para que sean de forma no cuadrada. Los datos de sintaxis asociados con una CU también pueden describir, por ejemplo, la división de la CU en una o más TU de acuerdo con un árbol cuaternario. Una TU puede ser de forma cuadrada o no cuadrada.

[0059] La norma HEVC permite transformaciones de acuerdo con las TU, que pueden ser diferentes para CU diferentes. El tamaño de las TU se basa típicamente en el tamaño de las PU dentro de una CU dada definida para una LCU dividida, aunque puede que este no sea siempre el caso. Las TU son típicamente del mismo tamaño o más pequeñas que las PU. En algunos ejemplos, las muestras residuales correspondientes a una CU se pueden subdividir en unidades más pequeñas usando una estructura de árbol cuaternario conocida como "árbol cuaternario residual" (RQT). Los nodos hoja del RQT se pueden denominar unidades de transformada (TU). Los valores de diferencias de píxeles asociados con las TU se pueden transformar para producir coeficientes de transformada, que se pueden cuantificar.

[0060] En general, una PU incluye datos relacionados con el procedimiento de predicción. Por ejemplo, cuando la PU se codifica en intramodo, la PU puede incluir datos que describen un modo de intrapredicción para la PU. Como otro ejemplo, cuando la PU se codifica en intermodo, la PU puede incluir datos que definen un vector de movimiento para la PU. Los datos que definen el vector de movimiento para una PU pueden describir, por ejemplo, una componente horizontal del vector de movimiento, una componente vertical del vector de movimiento, una resolución para el vector de movimiento (por ejemplo, precisión de un cuarto de píxel o precisión de un octavo de píxel), una imagen de referencia a la que apunta el vector de movimiento y/o una lista de imágenes de referencia (por ejemplo, lista 0, lista 1 o lista C) para el vector de movimiento.

[0061] En general, una TU se usa para los procedimientos de transformada y cuantificación. Una CU dada que tiene una o más PU también puede incluir una o más unidades de transformada (TU). Después de la predicción, el codificador de vídeo 20 puede calcular valores residuales a partir del bloque de vídeo identificado por el nodo de codificación de acuerdo con la PU. A continuación, el nodo de codificación se actualiza para hacer referencia a los valores residuales, en lugar del bloque de vídeo original. Los valores residuales comprenden valores de diferencias de píxeles que se pueden transformar en coeficientes de transformada, cuantificar y explorar usando las transformadas y otra información de transformada especificada en las TU, para producir coeficientes de transformada en serie para la codificación por entropía. El nodo de codificación se puede actualizar, una vez más, para hacer referencia a estos coeficientes de transformada en serie. La presente divulgación usa típicamente el término "bloque de vídeo" para hacer referencia a un nodo de codificación de una CU. En algunos casos específicos, la presente divulgación también puede usar el término "bloque de vídeo" para hacer referencia a un bloque arbolado, es decir, LCU o una CU, que incluye un nodo de codificación y PU y TU.

[0062] Una secuencia de vídeo incluye típicamente una serie de tramas o imágenes de vídeo. Un grupo de imágenes (GOP) comprende, en general, una serie de una o más de las imágenes de vídeo. Un GOP puede incluir datos de sintaxis en una cabecera del GOP, una cabecera de una o más de las imágenes, o en otras ubicaciones, que describen un número de imágenes incluidas en el GOP. Cada fragmento de una imagen puede incluir datos de sintaxis de fragmento que describen un modo de codificación para el fragmento respectivo. El codificador de vídeo 20 funciona típicamente en bloques de vídeo dentro de fragmentos de vídeo individuales para codificar los datos de vídeo. Un bloque de vídeo puede corresponder a un nodo de codificación dentro de una CU. Los bloques de vídeo pueden tener tamaños fijos o variables y pueden diferir en tamaño de acuerdo con una norma de codificación especificada.

[0063] En un ejemplo, el HM admite la predicción en diversos tamaños de PU. Suponiendo que el tamaño de una Cu particular es 2Nx2N, el HM admite la intrapredicción en tamaños de PU de 2Nx2N o NxN, y la interpredicción en tamaños de PU simétricas de 2Nx2N, 2NxN, Nx2N o NxN. E1HM también admite la división asimétrica para la interpredicción en tamaños de PU de 2NxnU, 2NxnD, nLx2N y nRx2N. En la división asimétrica, una dirección de una CU no está dividida, mientras que la otra dirección está dividida en un 25 % y un 75 %. La parte de la CU correspondiente a la división de un 25 % se indica por una "n" seguida de una indicación de "arriba", "abajo", "izquierda" o "derecha". Por tanto, por ejemplo, "2NxnU" se refiere a una CU de 2Nx2N que está dividida horizontalmente, con una PU de 2Nx0,5N encima y una PU de 2Nx1,5N debajo.

[0064] En la presente divulgación, "NxN" y "N por N" se pueden usar de manera intercambiable para hacer referencia a las dimensiones de píxeles de un bloque de vídeo en términos de dimensiones verticales y horizontales, por ejemplo, 16x16 píxeles o 16 por 16 píxeles. En general, un bloque de 16x16 tendrá 16 píxeles en una dirección vertical (y = 16) y 16 píxeles en una dirección horizontal (x = 16). Asimismo, un bloque de NxN tiene, en general, N píxeles en una dirección vertical y N píxeles en una dirección horizontal, donde N representa un valor entero no negativo. Los píxeles de un bloque se pueden disponer en filas y columnas. Además, no es necesario que los bloques tengan necesariamente el mismo número de píxeles en la dirección horizontal que en la dirección vertical. Por ejemplo, los bloques pueden comprender NxM píxeles, donde M no es necesariamente igual a N.

[0065] Después de la codificación intrapredictiva o interpredictiva, usando las PU de una CU, el codificador de vídeo 20 puede calcular datos residuales a los que se aplican las transformadas especificadas por las TU de la CU. Los datos residuales pueden corresponder a diferencias de píxeles entre píxeles de la imagen no codificada y valores de predicción correspondientes a las CU. El codificador de vídeo 20 puede formar los datos residuales para la CU, y a continuación transformar los datos residuales para producir coeficientes de transformada.

[0066] Después de cualquier transformada para producir coeficientes de transformada, el codificador de vídeo 20 puede realizar la cuantificación de los coeficientes de transformada. La cuantificación se refiere, en general, a un procedimiento en el que coeficientes de transformada se cuantifican para reducir posiblemente la cantidad de datos usados para representar los coeficientes, proporcionando compresión adicional. El procedimiento de cuantificación puede reducir la profundidad de bits asociada con algunos, o con la totalidad, de los coeficientes. Por ejemplo, un valor de n bits se puede redondear hacia abajo hasta un valor de m bits durante la cuantificación, donde n es mayor que m.

[0067] En algunos ejemplos, el codificador de vídeo 20 puede utilizar un orden de exploración predefinido para explorar los coeficientes de transformada cuantificados, para producir un vector en serie que se puede codificar por entropía. En otros ejemplos, el codificador de vídeo 20 puede realizar una exploración adaptativa. Después de explorar los coeficientes de transformada cuantificados para formar un vector unidimensional, el codificador de vídeo 20 puede realizar la codificación por entropía del vector unidimensional, por ejemplo, de acuerdo con la codificación de longitud variable adaptativa al contexto (CAVLC), la codificación aritmética binaria adaptativa al contexto (CABAC), la codificación aritmética binaria adaptativa al contexto basada en la sintaxis (SBAC), la codificación por entropía por división de intervalos de probabilidad (PIPE) u otro método de codificación por entropía. El codificador de vídeo 20 también puede codificar por entropía los elementos de sintaxis asociados con los datos de vídeo codificados, para su uso por el descodificador de vídeo 30 en la descodificación de los datos de vídeo.

[0068] Para realizar la CABAC, el codificador de vídeo 20 puede asignar un contexto, dentro de un modelo de contexto, a un símbolo que se va a transmitir. El contexto se puede referir, por ejemplo, a si los valores vecinos del símbolo son distintos de cero o no. Para realizar la CAVLC, el codificador de vídeo 20 puede seleccionar un código de longitud variable para un símbolo que se va a transmitir. Las palabras de código en la VLC se pueden construir de modo que los códigos relativamente más cortos correspondan a símbolos más probables, mientras que los códigos más largos correspondan a símbolos menos probables. De este modo, el uso de la VLC puede lograr un ahorro en bits con respecto, por ejemplo, al uso de palabras de código de igual longitud para cada símbolo que se va a transmitir. La determinación de la probabilidad se puede basar en un contexto asignado al símbolo.

[0069] En algunos ejemplos, el codificador de vídeo 20 y el descodificador de vídeo 30 se pueden configurar para implementar una o más técnicas de ejemplo descritas en la presente divulgación. El codificador de vídeo 20 puede codificar datos de vídeo en forma de una unidad de acceso que se parte en una o más unidades de descodificación. Estas unidades de acceso se pueden almacenar temporalmente en un búfer de imágenes codificadas. El descodificador de vídeo 30 puede extraer las DU para descodificar en un orden de descodificación basado en la información de temporización incluida en los elementos de sintaxis para la AU o DU respectiva.

[0070] De acuerdo con las técnicas descritas en la presente divulgación, el término "unidad de descodificación" se puede definir como sigue. Una unidad de descodificación es una unidad de acceso o un subconjunto de una unidad de acceso. Si el elemento de sintaxis SubPicCpbFlag es igual a 0, una unidad de descodificación es una unidad de acceso. De otro modo, una DU incluye una o más unidades de NAL de VCL en una AU y las unidades de NAL distintas de VCL asociadas. Si una unidad de NAL distinta de VCL tiene nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, FD_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63, la unidad de NAL distinta de VCL se asocia con la unidad de NAL de VCL precedente más reciente en orden de descodificación; de otro modo, la unidad de NAL distinta de VCL se asocia con la primera unidad de NAL de VCL posterior en orden de descodificación. Para considerar correctamente las unidades de NAL distintas de VLC de acuerdo con las técnicas descritas en el presente documento, se puede definir la DU para que considere las unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0071] De acuerdo con las técnicas descritas en la presente divulgación, el término "punto de funcionamiento" se puede definir como sigue. Un punto de funcionamiento se identifica por un conjunto de valores nuh_reserved_zero_6bits (indicado como OpLayerIdSet) y un valor de TemporalId (indicado como OpTid) y el subconjunto de flujo de bits asociado derivado como la salida del procedimiento de extracción del subflujo de bits como se especifica en la subcláusula 10.1 de HEVC WD8. Los elementos de sintaxis OpTid y OpLayerIdSet pueden funcionar como entradas y ser descodificables independientemente.

[0072] Algunos ejemplos de flujos de bits generados de acuerdo con las técnicas descritas en el presente documento pueden tener un nivel de conformidad de flujo de bits. La subcláusula 10.1 de HEVC WD8 describe que puede ser un requisito de conformidad de flujo de bits que cualquier subflujo de bits que se incluye en la salida del procedimiento especificado en la subcláusula 10.1 con tIdTarget igual a cualquier valor en el intervalo de 0 a 6, ambos inclusive, y con targetDecLayerIdSet que contiene el valor 0 puede estar en conformidad con HEVC.

[0073] En algunos ejemplos, un flujo de bits en conformidad puede contener una o más unidades de NAL de fragmentos codificados con nuh_reserved_zero_6bits igual a 0 y TemporalId igual a 0.

[0074] Las entradas al procedimiento descrito en el presente documento pueden ser una variable tIdTarget y una lista targetDecLayerIdSet. Las salidas incluyen un subflujo de bits. El subflujo de bits se puede derivar eliminando del flujo de bits todas las unidades de NAL con TemporalId mayor que tIdTarget o nuh_reserved_zero_6bits que no estén entre los valores en targetDecLayerIdSet.

[0075] Cada unidad de NAL se puede asociar con información de cabecera. Para la semántica de la cabecera de la unidad de NAL, se puede especificar lo siguiente. Durante la descodificación, el descodificador 30 puede ignorar (por ejemplo, eliminar del flujo de bits y descartar) el contenido de todas las unidades de NAL que usan valores reservados de nal_unit_type. En las operaciones de HRD como se especifica en el Anexo C de HEVC WD8, dependiendo del punto de funcionamiento seleccionado bajo prueba, se pueden considerar las unidades de NAL con valores reservados de nal_unit_type en la derivación de los tiempos de llegada y eliminación de CPB, pero durante la descodificación se pueden ignorar (eliminar y descartar) de forma segura.

[0076] Durante la descodificación, los descodificadores pueden ignorar (por ejemplo, eliminar del flujo de bits y descartar) todas las unidades de NAL con valores de nuh_reserved_zero_6bits que no sean iguales a 0. En las operaciones de HRD como se especifica en el Anexo C de HEVC WD8, dependiendo del punto de funcionamiento seleccionado bajo prueba, se pueden considerar las unidades de NAL con valores reservados de nuh_reserved_zero_6bits en la derivación de temporización de llegada y eliminación de CPB, pero durante la descodificación se pueden ignorar (eliminar y descartar) de forma segura.

[0077] Los tiempos de llegada y los tiempos de eliminación de búfer de imágenes codificadas se pueden basar en dos niveles: un nivel de unidad de acceso y un nivel de subimagen. Un codificador de vídeo (por ejemplo, el codificador de vídeo 20 o el descodificador de vídeo 30) se puede configurar para derivar un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB tanto para el nivel de unidad de acceso como para el nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si una DU es una AU (por ejemplo, si la AU incluye solo una DU). El elemento de sintaxis puede ser SubPicCpbFlag, que se señalaría para cada AU. Como se analiza anteriormente, cuando SubPicCpbFlag es igual a 0, una DU constituye la AU completa. De otro modo, cuando SubPicCpbFlag es igual a un valor distinto de cero, una DU incluye una o más unidades de NAL de VCL en una AU y las unidades de NAL distintas de VCL asociadas. En algunos ejemplos, el codificador de vídeo se puede configurar para derivar también los tiempos de eliminación de CPB para el nivel de AU cuando el elemento de sintaxis indica que la DU es una AU. En algunos de estos ejemplos, el codificador de vídeo se puede configurar para derivar los tiempos de eliminación de CPB solo para el nivel de AU cuando el elemento de sintaxis indica que la DU es una AU.

[0078] En algunos ejemplos, el codificador de vídeo (por ejemplo, el codificador de vídeo 20 o el descodificador de vídeo 30) se puede configurar para derivar también los tiempos de eliminación de CPB para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU. En algunos de estos ejemplos, el codificador de vídeo se puede configurar para derivar los tiempos de eliminación de CPB solo para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU.

[0079] El codificador de vídeo se puede configurar para derivar el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB cuando un segundo elemento de sintaxis especifica que están presentes parámetros de retardo de eliminación de CPB a nivel de subimagen y que el CPB puede funcionar a nivel de AU o a nivel de subimagen. El segundo elemento de sintaxis puede ser un sub_pic_cpb_params_present_flag. Cuando el sub_pic_cpb_params_present_flag es igual a 1, están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB puede funcionar a nivel de unidad de acceso o a nivel de subimagen, y cuando el sub_pic_cpb_params_present_flag es igual a 0, no están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB funciona a nivel de unidad de acceso.

[0080] En algunos de los ejemplos donde sub_pic_cpb_params_present_flag es igual a 1, el codificador de vídeo se puede configurar para establecer la variable subPicParamsPresentFlag igual a 0, y derivar los tiempos de llegada inicial y final de AU. A continuación, el codificador de vídeo se puede configurar para establecer la variable subPicParamsPresentFlag igual a 1, y derivar los tiempos de llegada inicial y final de DU para las DU dentro de la AU.

[0081] Además, en algunos ejemplos, un codificador de vídeo (por ejemplo, el codificador de vídeo 20 o el descodificador de vídeo 30) se puede configurar para codificar (por ejemplo, codificar o descodificar) una duración de tiempo entre la eliminación de CPB de una primera unidad de descodificación en una unidad de acceso y una segunda DU en la unidad de acceso. En este ejemplo, la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la DU. El codificador de vídeo se puede configurar para determinar un tiempo de eliminación de la primera DU en base al menos a la duración codificada. En algunas técnicas, el codificador de vídeo puede determinar el tiempo de eliminación de la primera DU sin codificar el retardo y la desviación de eliminación de CPB inicial. En algunos ejemplos, la segunda DU es inmediatamente posterior a la primera DU en la unidad de acceso. En algunos ejemplos, la segunda DU es la última DU en la unidad de acceso en orden de descodificación.

[0082] El codificador de vídeo (por ejemplo, el codificador de vídeo 20 o el descodificador de vídeo 30) también se puede configurar para codificar los parámetros de CPB a nivel de subimagen. En estos ejemplos, el codificador de vídeo puede determinar el tiempo de eliminación de la primera DU en base al menos a uno de la duración codificada y los parámetros de CPB a nivel de subimagen. Por ejemplo, los parámetros de CPB a nivel de subimagen pueden ser un mensaje SEI de temporización de subimágenes que se asocia con la primera DU. En algunos ejemplos, el codificador de vídeo puede codificar la duración entre el tiempo de eliminación de la última DU en la AU en el orden de descodificación y la primera DU en el mensaje SEI de subimagen. En algunos ejemplos, el codificador de vídeo puede codificar un indicador de nivel de secuencia para indicar la presencia de los parámetros de CPB a nivel de subimagen en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes.

[0083] Por ejemplo, el codificador de vídeo 20 se puede configurar para codificar una duración de tiempo entre la eliminación de CPB de una primera DU en una AU y una segunda DU en la AU. El codificador de vídeo 20 puede codificar los parámetros de CPB a nivel de subimagen, tales como los parámetros de retardo de eliminación de CPB a nivel de subimagen, en uno de un mensaje SEI de temporización de imágenes o bien un mensaje SEI de temporización de subimágenes. El codificador de vídeo 20 puede codificar un indicador, sub_pic_cpb_params_in_pic_timing_sei_flag, para indicar si los parámetros de CPB a nivel de subimagen están presentes en el mensaje SEI de temporización de imágenes o un mensaje SEI de temporización de subimágenes.

[0084] Por ejemplo, el descodificador de vídeo 30 puede descodificar una duración de tiempo entre la eliminación de CPB de una primera DU en una AU y una segunda DU en la AU. El descodificador de vídeo 30 se puede configurar para determinar un tiempo de eliminación de la primera DU en base al menos a la duración descodificada. En algunas técnicas, el codificador de vídeo puede determinar el tiempo de eliminación de la primera DU sin descodificar el retardo y la desviación de eliminación de CPB inicial. El descodificador de vídeo 30 puede descodificar los parámetros de CPB a nivel de subimagen de un mensaje SEI de temporización de imágenes o un mensaje SEI de temporización de subimágenes recibido desde el codificador de vídeo 20. El descodificador de vídeo 30 puede determinar qué mensaje SEI se busca para los parámetros de CPB a nivel de subimagen en base a la presencia del indicador, sub_pic_cpb_params_in_pic_timing_sei_flag.

[0085] En algunas de las técnicas de ejemplo descritas en la presente divulgación, el valor de identificación temporal (TemporalId) de la segunda DU puede no ser mayor que el Temporalld de la primera DU. En algunos ejemplos, el Temporalld de la segunda DU puede no ser mayor que cero.

[0086] Por ejemplo, las técnicas descritas en la presente divulgación pueden proporcionar una determinación más a prueba de errores del tiempo de eliminación de búfer de imágenes codificadas. Además, las técnicas pueden promover la eficacia de señalización que reduce el ancho de banda, la sobrecarga de señalización e incrementa el tiempo de codificación, además de ser más a prueba de errores. Además, las técnicas descritas en la presente divulgación pueden permitir una mejor escalabilidad temporal.

[0087] La FIG. 2 es un diagrama de bloques que ilustra un codificador de vídeo 20 de ejemplo que puede implementar las técnicas descritas en la presente divulgación. El codificador de vídeo 20 puede realizar la intracodificación y la intercodificación de bloques de vídeo dentro de fragmentos de vídeo. La intracodificación se basa en la predicción espacial para reducir o eliminar la redundancia espacial de un vídeo dentro de una trama o imagen de vídeo dada. La intercodificación se basa en la predicción temporal para reducir o eliminar la redundancia temporal de un vídeo dentro de tramas o imágenes contiguas de una secuencia de vídeo. El intramodo (modo I) se puede referir a cualquiera de varios modos de compresión de base espacial. Los intermodos, tales como la predicción unidireccional (modo P) o la bipredicción (modo B), se pueden referir a cualquiera de varios modos de compresión de base temporal.

[0088] En el ejemplo de la FIG. 2, el codificador de vídeo 20 incluye una unidad de división 35, una unidad de procesamiento de predicción 41, un sumador 50, una unidad de procesamiento de transformada 52, una unidad de cuantificación 54 y una unidad de codificación por entropía 56. La unidad de procesamiento de predicción 41 incluye una unidad de estimación de movimiento 42, una unidad de compensación de movimiento 44 y una unidad de procesamiento de intrapredicción 46. Para la reconstrucción de bloques de vídeo, el codificador de vídeo 20 también incluye una unidad de cuantificación inversa 58, una unidad de procesamiento de transformada inversa 60, un sumador 62, una unidad de filtro 64 y un búfer de imágenes descodificadas (DPB) 66. El búfer de imágenes descodificadas 66 también se puede denominar memoria de imágenes referencia. En otros ejemplos, el codificador de vídeo 20 puede incluir más, menos o diferentes componentes funcionales.

[0089] Como se representa en la FIG. 2, el codificador de vídeo 20 recibe datos de vídeo, y la unidad de división 35 divide los datos en bloques de vídeo. Esta división de los datos de vídeo también puede incluir la división de los datos de vídeo en fragmentos, mosaicos u otras unidades más grandes, así como la división de bloques de vídeo, por ejemplo, de acuerdo con una estructura de árbol cuaternario de LCU y CU. El codificador de vídeo 20 ilustra, en general, los componentes que codifican los bloques de vídeo dentro de un fragmento de vídeo que se va a codificar. El fragmento se puede dividir en múltiples bloques de vídeo (y, posiblemente, en conjuntos de bloques de vídeo denominados mosaicos).

[0090] La unidad de procesamiento de predicción 41 puede seleccionar uno de una pluralidad de posibles modos de codificación, tal como uno de una pluralidad de modos de intracodificación, o uno de una pluralidad de modos de intercodificación, para el bloque de vídeo actual en base a resultados de error (por ejemplo, la tasa de codificación y el nivel de distorsión). La unidad de procesamiento de predicción 41 puede proporcionar el bloque intracodificado o intercodificado resultante al sumador 50 para generar datos de bloque residuales y al sumador 62 para reconstruir el bloque codificado para su uso como imagen de referencia.

[0091] La unidad de procesamiento de intrapredicción 46, que se encuentra dentro de la unidad de procesamiento de predicción 41, puede realizar la codificación intrapredictiva del bloque de vídeo actual en relación con uno o más bloques vecinos en la misma trama o fragmento que el bloque actual que se va a codificar, para proporcionar compresión espacial. La unidad de estimación de movimiento 42 y la unidad de compensación de movimiento 44 dentro de la unidad de procesamiento de predicción 41 realizan la codificación interpredictiva del bloque de vídeo actual en relación con uno o más bloques predictivos en una o más imágenes de referencia, para proporcionar compresión temporal.

[0092] La unidad de estimación de movimiento 42 se puede configurar para determinar el modo de interpredicción para un fragmento de vídeo de acuerdo con un patrón predeterminado para una secuencia de vídeo. El patrón predeterminado puede designar fragmentos de vídeo en la secuencia como fragmentos P, fragmentos B o fragmentos GPB. La unidad de estimación de movimiento 42 y la unidad de compensación de movimiento 44 pueden estar integradas, pero se ilustran por separado para propósitos conceptuales. La estimación del movimiento, realizada por la unidad de estimación de movimiento 42, es el procedimiento de generación de vectores de movimiento que estiman el movimiento para los bloques de vídeo. Un vector de movimiento, por ejemplo, puede indicar el desplazamiento de una PU de un bloque de vídeo dentro de una trama o imagen de vídeo actual en relación con un bloque predictivo dentro de una imagen de referencia.

[0093] Un bloque predictivo es un bloque que se encuentra que coincide estrechamente con la PU del bloque de vídeo que se va a codificar en términos de diferencia de píxeles, que se puede determinar por una suma de diferencia absoluta (SAD), una suma de diferencia al cuadrado (SSD) u otras métricas de diferencia. En algunos ejemplos, el codificador de vídeo 20 puede calcular valores para posiciones de píxel fraccionario de las imágenes de referencia almacenadas en el búfer de imágenes descodificadas 66. Por ejemplo, el codificador de vídeo 20 puede interpolar valores de posiciones de un cuarto de píxel, posiciones de un octavo de píxel u otras posiciones de píxel fraccionario de la imagen de referencia. Por lo tanto, la unidad de estimación de movimiento 42 puede realizar una búsqueda de movimiento en relación con las posiciones de píxel completo y a las posiciones de píxel fraccionario, y emitir un vector de movimiento con una precisión de píxel fraccionario.

[0094] La unidad de estimación de movimiento 42 calcula un vector de movimiento para una PU de un bloque de vídeo en un fragmento intercodificado, comparando la posición de la PU con la posición de un bloque predictivo de una imagen de referencia. La imagen de referencia se puede seleccionar de una primera lista de imágenes de referencia (lista 0) o una segunda lista de imágenes de referencia (lista 1), de las que cada una identifica una o más imágenes de referencia almacenadas en el búfer de imágenes descodificadas 66. La unidad de estimación de movimiento 42 envía el vector de movimiento calculado a la unidad de codificación por entropía 56 y a la unidad de compensación de movimiento 44.

[0095] La compensación de movimiento, realizada por la unidad de compensación de movimiento 44, puede implicar extraer o generar el bloque predictivo en base al vector de movimiento determinado por la estimación de movimiento, realizando posiblemente interpolaciones con una precisión de subpíxel. Tras recibir el vector de movimiento para la PU del bloque de vídeo actual, la unidad de compensación de movimiento 44 puede localizar el bloque predictivo al que apunta el vector de movimiento en una de las listas de imágenes de referencia. El codificador de vídeo 20 forma un bloque de vídeo residual restando los valores de píxel del bloque predictivo a los valores de píxel del bloque de vídeo actual que se está codificando, formando valores de diferencias de píxeles. Los valores de diferencias de píxeles forman datos residuales para el bloque, y pueden incluir componentes de diferencia tanto de luma como de croma. El sumador 50 representa el componente o los componentes que realizan esta operación de resta. La unidad de compensación de movimiento 44 también puede generar elementos de sintaxis asociados con los bloques de vídeo y el fragmento de vídeo para su uso por el descodificador de vídeo 30 en la descodificación de los bloques de vídeo del fragmento de vídeo.

[0096] La unidad de procesamiento de intrapredicción 46 puede intrapredecir un bloque actual, como una alternativa a la interpredicción realizada por la unidad de estimación de movimiento 42 y la unidad de compensación de movimiento 44, como se describe anteriormente. En particular, la unidad de procesamiento de intrapredicción 46 puede determinar un modo de intrapredicción para usar para codificar un bloque actual. En algunos ejemplos, la unidad de procesamiento de intrapredicción 46 puede codificar un bloque actual usando diversos modos de intrapredicción, por ejemplo, durante pases de codificación separados, y la unidad de procesamiento de intrapredicción 46 (o la unidad de selección de modo 40, en algunos ejemplos) puede seleccionar un modo de intrapredicción apropiado para usar a partir de los modos sometidos a prueba. Por ejemplo, la unidad de procesamiento de intrapredicción 46 puede calcular valores de velocidad-distorsión usando un análisis de velocidad-distorsión para los diversos modos de intrapredicción sometidos a prueba, y seleccionar el modo de intrapredicción que tenga las mejores características de velocidad-distorsión entre los modos sometidos a prueba. El análisis de velocidad-distorsión determina, en general, una cantidad de distorsión (o error) entre un bloque codificado y un bloque original, no codificado, que se codificó para producir el bloque codificado, así como una velocidad de transmisión de bits (es decir, un número de bits) usada para producir el bloque codificado. La unidad de procesamiento de intrapredicción 46 puede calcular proporciones a partir de las distorsiones y velocidades para los diversos bloques codificados, para determinar qué modo de intrapredicción presenta el mejor valor de velocidad-distorsión para el bloque.

[0097] En cualquier caso, después de seleccionar un modo de intrapredicción para un bloque, la unidad de procesamiento de intrapredicción 46 puede proporcionar información indicativa del modo de intrapredicción seleccionado para el bloque a la unidad de codificación por entropía 56. La unidad de codificación por entropía 56 puede codificar la información indicando el modo de intrapredicción seleccionado de acuerdo con las técnicas de la presente divulgación. El codificador de vídeo 20 puede incluir, en el flujo de bits transmitido, datos de configuración, que pueden incluir una pluralidad de tablas de índices de modo de intrapredicción y una pluralidad de tablas de índices de modo de intrapredicción modificadas (también denominadas tablas de correlación de palabras de código), definiciones de contextos de codificación para diversos bloques e indicaciones de un modo de intrapredicción más probable, una tabla de índices de modo de intrapredicción y una tabla de índices de modo de intrapredicción modificada para usar para cada uno de los contextos.

[0098] Después de que la unidad de procesamiento de predicción 41 genera el bloque predictivo para el bloque de vídeo actual, por medio de interpredicción o bien intrapredicción, el codificador de vídeo 20 forma un bloque de vídeo residual restando el bloque predictivo al bloque de vídeo actual. Los datos de vídeo residuales del bloque residual se pueden incluir en una o más TU y aplicar a la unidad de procesamiento de transformada 52. La unidad de procesamiento de transformada 52 transforma los datos de vídeo residuales en coeficientes de transformada residuales usando una transformada, tal como una transformada discreta del coseno (DCT) o una transformada conceptualmente similar. La unidad de procesamiento de transformada 52 puede convertir los datos de vídeo residuales de un dominio de píxel a un dominio de transformada, tal como un dominio de frecuencia.

[0099] La unidad de procesamiento de transformada 52 puede enviar los coeficientes de transformada resultantes a la unidad de cuantificación 54. La unidad de cuantificación 54 cuantifica los coeficientes de transformada para reducir adicionalmente la velocidad de transmisión de bits. El procedimiento de cuantificación puede reducir la profundidad de bits asociada con algunos, o con la totalidad, de los coeficientes. El grado de cuantificación se puede modificar ajustando un parámetro de cuantificación. En algunos ejemplos, la unidad de cuantificación 54 puede realizar, a continuación, una exploración de la matriz que incluye los coeficientes de transformada cuantificados. De forma alternativa, la unidad de codificación por entropía 56 puede realizar la exploración.

[0100] Después de la cuantificación, la unidad de codificación por entropía 56 puede codificar por entropía los coeficientes de transformada cuantificados. Por ejemplo, la unidad de codificación por entropía 56 puede realizar una codificación de longitud variable adaptativa al contexto (CAVLC), una codificación aritmética binaria adaptativa al contexto (CABAC), una codificación aritmética binaria adaptativa al contexto basada en la sintaxis (SBAC), una codificación por entropía por división de intervalos de probabilidad (PIPE) u otro método o técnica de codificación por entropía. Después de la codificación por entropía por la unidad de codificación por entropía 56, el flujo de bits codificado se puede transmitir al descodificador de vídeo 30, o archivar para su posterior transmisión o recuperación por el descodificador de vídeo 30. La unidad de codificación por entropía 56 también puede codificar por entropía los vectores de movimiento y los otros elementos de sintaxis para el fragmento de vídeo actual que se está codificando.

[0101] La unidad de cuantificación inversa 58 y la unidad de procesamiento de transformada inversa 60 aplican una cuantificación inversa y una transformación inversa, respectivamente, para reconstruir el bloque residual en el dominio de píxel para su uso posterior como bloque de referencia de una imagen de referencia. La unidad de compensación de movimiento 44 puede calcular un bloque de referencia añadiendo el bloque residual a un bloque predictivo de una de las imágenes de referencia dentro de una de las listas de imágenes de referencia. La unidad de compensación de movimiento 44 también puede aplicar uno o más filtros de interpolación al bloque residual reconstruido para calcular valores de píxeles fraccionarios, para su uso en la estimación de movimiento. El sumador 62 añade el bloque residual reconstruido al bloque de predicción compensado por movimiento, producido por la unidad de compensación de movimiento 44, para producir un bloque de referencia para su almacenamiento en el búfer de imágenes descodificadas 66. El bloque de referencia se puede usar por la unidad de estimación de movimiento 42 y la unidad de compensación de movimiento 44 como bloque de referencia para interpredecir un bloque en una trama o imagen de vídeo posterior.

[0102] El descodificador de vídeo 20 también incluye una unidad de filtro 64 que puede filtrar los límites de bloque para eliminar distorsiones de efecto pixelado del vídeo reconstruido. Es decir, la unidad de filtro 64 puede realizar una o más operaciones de eliminación de bloques para reducir las distorsiones de efecto pixelado en los bloques de codificación asociados con una CU. La unidad de filtro 64 puede ser un filtro de eliminación de bloques y filtra la salida del sumador 62. También se pueden usar filtros de bucle adicionales (en el bucle o tras el bucle), además de la unidad de filtro 64.

[0103] El búfer de imágenes descodificadas 66 puede almacenar los bloques de codificación reconstruidos después de que la unidad de filtro 64 realiza las una o más operaciones de eliminación de bloques en los bloques de codificación reconstruidos. La unidad de procesamiento de predicción 41 puede usar una imagen de referencia que contenga los bloques de codificación reconstruidos para realizar una interpredicción en las PU de otras imágenes. Además, la unidad de procesamiento de intrapredicción 46 puede usar bloques de codificación reconstruidos en el búfer de imágenes descodificadas 66 para realizar una intrapredicción en otras PU de la misma imagen que la CU.

[0104] El codificador de vídeo 20 puede generar elementos de sintaxis relacionados con los tiempos de eliminación de CPB de las DU dentro de una AU de acuerdo con las técnicas descritas en el presente documento. Una vez que se generan estos elementos de sintaxis, el codificador de vídeo 20 los codifica en uno o más flujos de bits y emite los flujos de bits.

[0105] De acuerdo con la presente divulgación, la unidad de procesamiento de predicción 41 representa una unidad de ejemplo para realizar las funciones de ejemplo descritas anteriormente. En otros ejemplos, una unidad distinta a la unidad de procesamiento de predicción 41 puede implementar los ejemplos descritos anteriormente. En algunos de otros diferentes, la unidad de procesamiento de predicción 41, en conjunto con una o más de otras unidades de codificador de vídeo 20, puede implementar los ejemplos descritos anteriormente. Aún en algunos de otros ejemplos, un procesador o unidad de codificador de vídeo 20 puede implementar los ejemplos descritos anteriormente, solo o en conjunto con otras unidades de codificador de vídeo 20.

[0106] La FIG. 3 es un diagrama de bloques que ilustra un descodificador de vídeo 30 de ejemplo que puede implementar las técnicas descritas en la presente divulgación. En el ejemplo de la FIG. 3, el descodificador de vídeo 30 incluye una unidad de descodificación por entropía 80, una unidad de procesamiento de predicción 81, una unidad de cuantificación inversa 86, una unidad de transformación inversa 88, un sumador 90 y un búfer de imágenes descodificadas (DPB) 92. La unidad de procesamiento de predicción 81 incluye una unidad de compensación de movimiento 82 y una unidad de procesamiento de intrapredicción 84. Un búfer de imágenes codificadas (CPB) 94 se muestra como una entrada en el descodificador de vídeo 30. Sin embargo, en algunos ejemplos, el CPB 94 puede ser parte del descodificador de vídeo 30. En algunos ejemplos, el descodificador de vídeo 30 puede realizar un pase de descodificación, en general, recíproco al pase de codificación descrita con respecto al codificador de vídeo 20 de la FIG. 2.

[0107] Durante el procedimiento de descodificación, el descodificador de vídeo 30 recibe un flujo de bits de vídeo codificado que representa bloques de vídeo de un fragmento de vídeo codificado y elementos de sintaxis asociados, desde el codificador de vídeo 20. Los bloques de vídeo del fragmento de vídeo codificado y los elementos de sintaxis asociados del codificador de vídeo 20 se pueden extraer del búfer de imágenes codificadas 94. El vídeo codificado de CPB 94 puede incluir, por ejemplo, unidades de acceso (AU) que comprenden unidades de descodificación (DU). Los elementos de sintaxis pueden incluir variables e indicadores indicativos de los tiempos de eliminación de CPB para las unidades de acceso y las unidades de descodificación.

[0108] La unidad de descodificación por entropía 80 del descodificador de vídeo 30 descodifica por entropía el flujo de bits para generar coeficientes cuantificados, vectores de movimiento y otros elementos de sintaxis. La unidad de descodificación por entropía 80 reenvía los vectores de movimiento y otros elementos de sintaxis a la unidad de procesamiento de predicción 81. El descodificador de vídeo 30 puede recibir los elementos de sintaxis a nivel de fragmento de vídeo y/o a nivel de bloque de vídeo.

[0109] Cuando el fragmento de vídeo se codifica como un fragmento intracodificado (I), la unidad de procesamiento de intrapredicción 84 de la unidad de procesamiento de predicción 81 puede generar datos de predicción para un bloque de vídeo del fragmento de vídeo actual en base a un modo de intrapredicción señalizado y datos de bloques previamente descodificados de la trama o imagen actual. Cuando la trama de vídeo se codifica como un fragmento intercodificado (es decir, B, P o GPB), la unidad de compensación de movimiento 82 de la unidad de procesamiento de predicción 81 produce bloques predictivos para un bloque de vídeo del fragmento de vídeo actual en base a los vectores de movimiento y a otros elementos de sintaxis recibidos desde la unidad de descodificación por entropía 80. Los bloques predictivos se pueden producir a partir de una de las imágenes de referencia dentro de una de las listas de imágenes de referencia. El descodificador de vídeo 30 puede construir las listas de tramas de referencia, lista 0 y lista 1, usando técnicas de construcción por defecto en base a las imágenes de referencia almacenadas en el búfer de imágenes descodificadas 92.

[0110] La unidad de compensación de movimiento 82 determina la información de predicción para un bloque de vídeo del fragmento de vídeo actual, analizando los vectores de movimiento y otros elementos de sintaxis, y usa la información de predicción para producir los bloques predictivos para el bloque de vídeo actual que se está descodificando. Por ejemplo, la unidad de compensación de movimiento 82 usa algunos de los elementos de sintaxis recibidos para determinar un modo de predicción (por ejemplo, intrapredicción o interpredicción) usado para codificar los bloques de vídeo del fragmento de vídeo, un tipo de fragmento de interpredicción (por ejemplo, un fragmento B, un fragmento P o un fragmento GPB), información de construcción para una o más de las listas de imágenes de referencia para el fragmento, vectores de movimiento para cada bloque de vídeo intercodificado del fragmento, un estado de interpredicción para cada bloque de vídeo intercodificado del fragmento y otra información para descodificar los bloques de vídeo en el fragmento de vídeo actual.

[0111] La unidad de compensación de movimiento 82 también puede realizar la interpolación en base a filtros de interpolación. La unidad de compensación de movimiento 82 puede usar filtros de interpolación como se usa por el codificador de vídeo 20 durante la codificación de los bloques de vídeo para calcular los valores interpolados para píxeles fraccionarios de los bloques de referencia. En este caso, la unidad de compensación de movimiento 82 puede determinar los filtros de interpolación usados por el codificador de vídeo 20 a partir de los elementos de sintaxis recibidos y usar los filtros de interpolación para producir bloques predictivos.

[0112] La unidad de cuantificación inversa 86 cuantifica inversamente, es decir, descuantifica, los coeficientes de transformada cuantificados proporcionados en el flujo de bits y descodificados por la unidad de descodificación por entropía 80. El procedimiento de cuantificación inversa puede incluir el uso de un parámetro de cuantificación calculado por el codificador de vídeo 20 para cada bloque de vídeo en el fragmento de vídeo para determinar un grado de cuantificación y, asimismo, un grado de cuantificación inversa que se debería aplicar. La unidad de procesamiento de transformada inversa 88 aplica una transformada inversa, por ejemplo, una DCT inversa, una transformada inversa de números enteros o un procedimiento de transformada inversa conceptualmente similar, a los coeficientes de transformada para producir bloques residuales en el dominio de píxel.

[0113] Después de que la unidad de compensación de movimiento 82 genera el bloque predictivo para el bloque de vídeo actual en base a los vectores de movimiento y a otros elementos de sintaxis, el descodificador de vídeo 30 forma un bloque de vídeo descodificado sumando los bloques residuales de la unidad de procesamiento de transformada inversa 88 a los correspondientes bloques predictivos generados por la unidad de compensación de movimiento 82. El sumador 90 representa el componente o los componentes que realizan esta operación de suma. Si se desea, también se puede aplicar un filtro de eliminación de bloques para filtrar los bloques descodificados para eliminar distorsiones de efecto pixelado. También se pueden usar otros filtros de bucle (en el bucle de codificación o bien después del bucle de codificación) para suavizar las transiciones entre píxeles o mejorar de otro modo la calidad del vídeo. Los bloques de vídeo descodificados en una trama o imagen dada se almacenan, a continuación, en el DPB 92, que almacena imágenes de referencia usadas para una posterior compensación de movimiento. El DPB 92 también almacena vídeo descodificado para su presentación posterior en un dispositivo de visualización, tal como el dispositivo de visualización 32 de la FIG. 1.

[0114] De acuerdo con la presente divulgación, la unidad de procesamiento de predicción 81 representa una unidad de ejemplo para realizar las funciones de ejemplo descritas anteriormente. En otros ejemplos, una unidad distinta a la unidad de procesamiento de predicción 81 puede implementar los ejemplos descritos anteriormente. En algunos de otros ejemplos, la unidad de procesamiento de predicción 841, en conjunto con una o más de otras unidades de descodificador de vídeo 30, puede implementar los ejemplos descritos anteriormente. Aún en algunos de otros ejemplos, un procesador o unidad de descodificador de vídeo 30 puede implementar los ejemplos descritos anteriormente, solo o en conjunto con otras unidades de descodificador de vídeo 30.

[0115] El descodificador de vídeo 30 puede almacenar los datos de vídeo recibidos en forma de flujo de bits, incluyendo las AU y las DU, en el búfer de imágenes codificadas (CPB) 94. El descodificador de vídeo 30 puede extraer las DU y las AU del CPB 94 en los tiempos de eliminación determinados a partir del descodificador de vídeo de elementos de sintaxis 30 recibidos en el flujo de bits. Los indicadores y las variables presentes en los mensajes SEI pueden informar al descodificador de vídeo 30 cuándo eliminar las DU del CPB 94. En el tiempo de eliminación determinado para una DU actual, el descodificador de vídeo 30 extrae la DU actual del CPB 94 y descodifica la DU. En algunos ejemplos, el descodificador de vídeo 30 también extrae una AU cuando la DU actual es la última DU de la AU.

[0116] Lo siguiente describe el funcionamiento del CPB 94. Esta descripción se puede aplicar independientemente a cada uno de los parámetros de CPB que está presente y a ambos de los puntos de conformidad de tipo I y tipo II mostrados en la figura C-1 en el HEVC WD8, donde el conjunto de parámetros de CPB se selecciona como se especifica en la subcláusula C.1 de HEVC WD8. El funcionamiento del CPB 94 puede incluir la temporización de la llegada del flujo de bits y la temporización de la eliminación de la unidad de descodificación y la descodificación de la unidad de descodificación. Cada uno se describe sucesivamente.

[0117] En primer lugar, se describirá la temporización de la llegada del flujo de bits. Para la temporización de la llegada del flujo de bits, antes de la inicialización de HRD, el CPB 94 está vacío. En algunos ejemplos, después de la inicialización, el HRD no se puede inicializar de nuevo por los mensajes SEI en el período de almacenamiento en búfer posteriores.

[0118] En los ejemplos descritos en la presente divulgación, cada unidad de acceso se denomina unidad de acceso "n", donde el número "n" identifica la unidad de acceso particular. La unidad de acceso que se asocia con el mensaje SEI en el período de almacenamiento en búfer que inicializa el CPB 94 se denomina unidad de acceso 0. El valor de n se incrementa en 1 para cada unidad de acceso posterior en orden de descodificación.

[0119] Cada unidad de descodificación se denomina unidad de descodificación "m", donde el número "m" identifica la unidad de descodificación particular. La primera unidad de descodificación en orden de descodificación en la unidad de acceso 0 se denomina unidad de descodificación 0. El valor de m se incrementa en 1 para cada unidad de descodificación posterior en orden de descodificación.

[0120] Cuando sub_pic_cpb_params_present_flag es igual a 1, en primer lugar se invoca el siguiente procedimiento, con la variable subPicParamsPresentFlag establecida igual a 0, para la derivación de los tiempos de llegada inicial y final de la unidad de acceso (AU) para la unidad de acceso n. A continuación, se invoca el siguiente procedimiento, con subPicParamsPresentFlag establecido igual a 1, para la derivación de los tiempos de llegada inicial y final de la unidad de descodificación para las unidades de descodificación en la unidad de acceso n.

[0121] Las variables InitCpbRemovalDelay[SchedSelIdx] e InitCpbRemovalDelayOffset[SchedSelIdx] se pueden establecer como sigue: Si una de las siguientes tres condiciones es verdadera, InitCpbRemovalDelay[SchedSelIdx] e InitCpbRemovalDelayOffset[SchedSelIdx] se establecen en los valores de initial_alt_cpb_removal_delay[SchedSelIdx] e initial_alt_cpb_removal_delay_offset[SchedSelIdx],correspondientes a NalHrdModeFlag, respectivamente, en el mensaje SEI en el período de almacenamiento en búfer. La primera condición puede ser cuando la unidad de acceso 0 es una unidad de acceso de acceso de enlace roto (BLA) para la que la imagen codificada tiene nal_unit_type igual a BLA_W_DLP o BLA_N_LP, y el valor de rap_cpb_params_present_flag del mensaje SEI en el período de almacenamiento en búfer es igual a 1. La segunda condición puede ser que DefaultInitCpbParamsFlag es igual a 0. La tercera condición puede ser que subPicParamsPresentFlag es igual a 1. Téngase en cuenta que, en algunos ejemplos, cuando sub_pic_cpb_params_present_flag es igual a 1, la secuencia de vídeo codificada puede no tener imágenes de acceso aleatorio limpio (CRA) o BLA, y por tanto, las dos primeras condiciones pueden ser ambas falsas.

[0122] De otro modo, si ninguna de las tres condiciones anteriores es verdadera, InitCpbRemovalDelay[SchedSelIdx] e InitCpbRemovalDelayOffset[SchedSelIdx] se establecen en los valores de initial_cpb_removal_delay[SchedSelIdx] e initial_cpb_removal_delay_offset[SchedSelIdx], correspondientes a NalHrdModeFlag, respectivamente, en el mensaje SEI en el período de almacenamiento en búfer asociado seleccionado como se especifica en la subcláusula C.1 de HEVC WD8.

[0123] En los ejemplos descritos en el presente documento, el tiempo en el que el primer bit de la unidad de descodificación m comienza a entrar en el CPB 94 se denomina tiempo de llegada inicial t^ai( m ). El tiempo de llegada inicial de la unidad de descodificación m se deriva como sigue. Si la unidad de descodificación es la unidad de descodificación 0 (es decir, m = 0), t^a¡( 0 ) = 0. Es decir, la primera unidad de descodificación llega en el tiempo 0. De otro modo, para descodificar unidades después de la primera unidad de descodificación (unidad de descodificación m con m > 0), se aplica lo siguiente.

[0124] Si cbr _flag[SchedSelIdx] es igual a 1, el tiempo de llegada inicial para la unidad de descodificación m es igual al tiempo de llegada final (t^ai,derivado a continuación) de la unidad de descodificación m - 1, la unidad de descodificación previa. La ecuación 1 proporciona una relación:

t ai(n i) = ta f (m - 1) ( 1 )

De otro modo (por ejemplo, cbr _flag[SchedSelldx] es igual a 0), el tiempo de llegada inicial para la unidad de descodificación m (por ejemplo, para m > 0) se deriva por la ecuación ("ecuación") 2:

^tai (m) ~ M Á X (taf ^(jH 1 ^{) , t ai primero)}

[0125] El tiempo de llegada de la unidad de descodificación tai,prmero se deriva como sigue. Si la unidad de descodificación m no es la primera unidad de descodificación de un período de almacenamiento en búfer posterior, tai,primero se deriva como se muestra en la ecuación 3:

_{L a i ,p r im e r o} (m ) (3 = tr,n(m) ) ImtCpbRemovalDelay [SchedSelldx] InitCpbRemovalDelayOffset[Schet

90000

Siendo t^r,n(m) el tiempo de eliminación nominal de la unidad de descodificación m del CPB 94.

[0126] El tiempo de llegada final para la unidad de descodificación m se deriva con la ecuación 4:

b(m) (4)

^{ta f (m ) = t a í(m )} BitRate [SchedSelldx]

donde b(m) es el tamaño, en bits, de la unidad de descodificación m. Si se aplica el punto de conformidad de tipo I, b(m) incluye contar los bits de las unidades de NAL de VCL y de las unidades de NAL de datos de relleno. Si se aplica el punto de conformidad de tipo II, b(m) incluye contar todos los bits del flujo de bits de tipo II para el punto de conformidad de tipo II. Los puntos de conformidad de tipo I y tipo II son como se muestran en la figura C-1 del Anexo C de HEVC WD8.

[0127] Los valores de SchedSelldx, BitRate{SchedSelIdx] y CpbSize[SchedSelIdx] están restringidos como sigue. Si el contenido de las estructuras sintácticas hrd_parameters() seleccionadas para la AU que contiene la unidad de descodificación m y la previa en orden de descodificación AU (en orden de descodificación) difiere, un programador de entrega (HSS) selecciona un valor SchedSelIdxl de SchedSelldx de entre los valores de SchedSelldx proporcionados en la estructura sintáctica hrd_parameters() seleccionada para la unidad de acceso que contiene la unidad de descodificación m que da como resultado una BitRate[SchedSelIdx1] oCpbSize[SchedSelIdx1] para la unidad de acceso que contiene la unidad de descodificación m. El valor de BitRate[SchedSelIdx1] o CpbSize[SchedSelIdx1] puede diferir del valor de BitRate[SchedSelIdx0] o CpbSize[SchedSelIdx0] para el valor SchedSelIdx0 de SchedSelIdx que estaba en uso para la unidad de acceso previa. De otro modo, si el contenido de las estructuras sintácticas hrd_parameters() seleccionadas para las dos AU es el mismo, el HSS continúa funcionando con los valores previos de SchedSelIdx, BitRate[SchedSelIdx] y CpbSize[ SchedSelIdx].

[0128] Cuando el HSS selecciona los valores de BitRate[SchedSelIdx] o CpbSize[SchedSelIdx] que difieren de los de la unidad de acceso previa, se aplica lo siguiente. La variable BitRate[SchedSelIdx] entra en vigor en el tiempo t^ai(m). La variable CpbSize[SchedSelIdx] entra en vigor en determinadas condiciones.

[0129] Si el nuevo valor de CpbSize[SchedSelIdx] es mayor que el antiguo tamaño de CPB, CpbSizd[SchedSelIdx] entra en vigor en el tiempo t ^a (m). De otro modo, si el nuevo valor de CpbSizd[SchedSelIdx] es menor que o igual al antiguo tamaño de CPB, el nuevo valor de CpbSizd[SchedSelIdx] entra en vigor en el tiempo de eliminación de CPB de la última unidad de descodificación de la unidad de acceso que contiene la unidad de descodificación m.

[0130] Cuando SubPicCpbFlag es igual a 1, el tiempo de llegada de CPB inicial de la unidad de acceso n, ta(ri), se establece en el tiempo de llegada de CPB inicial de la primera unidad de descodificación en la unidad de acceso n. El tiempo de llegada de CPB final de la unidad de acceso n, t ^af (n) se establece en el tiempo de llegada de CPB final de la última unidad de descodificación en la unidad de acceso n. Cuando SubPicCpbFlag es igual a 0, cada DU es una AU, de ahí que los tiempos de llegada de CPB inicial y final de la unidad de acceso n son los tiempos de llegada de CPB inicial y final de la unidad de descodificación n.

[0131] La presente divulgación pasa ahora a describir el funcionamiento del CPB 94 con respecto a la temporización de eliminación de la unidad de descodificación y la descodificación de las unidades de descodificación.

[0132] Las variables InitCpbRemovalDelay[SchedSelIdx] e

InitCpbRemovalDelayüffsel[SchedSelIdx] se usan para los tiempos de eliminación de DU. Estas dos variables se establecen como sigue. Si cualquiera de las dos condiciones es verdadera, InitCpbRemovalDelay[SchedSelIdx] e InitCpbRemovalDelayOffsel[SchedSelIdx] se establecen, en un mensaje SEI en el período de almacenamiento en búfer, en los valores de Initial_alt_cpb_removal_delay{SchedSelIdx] e Initial_alt_cpb_removal_delay_offset[SchedSelIdx] correspondientes a NalHrdModeFlag, respectivamente. La primera condición es que la unidad de acceso 0 es una unidad de acceso BLA para la que la imagen codificada tiene nal_unit_type igual a BLA_W_DLP o BLA_N_LP, y el valor de rap_cpb_params_present_flag del mensaje SEI en el período de almacenamiento en búfer es igual a 1. La segunda condición es que DefaultlnitCpbParamsFlag es igual a 0.

[0133] Si ninguna de esas dos condiciones es verdadera,

InitCpbRemo valDelay{ SchedSelIdx] e

InitCpbRemovalDelayOffsef[SchedSelIdx] se establecen en los valores de initial_cpb_remo val_delay{ SchedSelIdx] e

initial_cpb_removal_delay_offsel[SchedSelIdx] correspondientes a NalHrdModeFlag, respectivamente, en el mensaje SEI en el período de almacenamiento en búfer asociado seleccionado como se especifica en la subcláusula C.1 del Anexo C de HEVC WD8.

[0134] La variable CpbRemovalDelay(m), pertinente para el tiempo de retardo de eliminación de la unidad de descodificación m del CPB 94, se puede derivar como sigue cuando sub_pic_cpb_params_present_flag es igual a 1. Si sub_pic_cpb_params_in_pic_timing_sei_flag es igual a 0, CpbRemovalDelay(m) se establece en du_spt_cpb_removal_delay en el mensaje SEI de temporización de subimágenes asociado con la unidad de descodificación m. El mensaje SEI de temporización de subimágenes se puede seleccionar como se especifica en la subcláusula C.1 del Anexo C de HEVC WD8.

[0135] Si du_common_cpb_removal_delay_flag es igual a 0, la variable CpbRemovalDelay(m) se establece en el valor de du_cpb_removal_delay_minus1[i] 1 para la unidad de descodificación m en el mensaje SEI de temporización de imágenes, seleccionado como se especifica en la subcláusula C.1 del Anexo C de HEVC WD8, asociado con la unidad de acceso que contiene la unidad de descodificación m. El valor de i es 0 para las primeras num_nalus_in_du_minus1[0] 1 unidades de descodificación consecutivas en la unidad de acceso que contienen la unidad de descodificación m, 1 para las num_nalus_in_du_minus1[1] 1 unidades de descodificación posteriores en la misma unidad de acceso, 2 para las num_nalus_in_du_minus1[2] 1 unidades de descodificación posteriores en la misma unidad de acceso, etc.

[0136] De otro modo, si ni sub_pic_cpb_params_present_flag es igual a 1 ni du_common_cpb_removal_delay_flag es igual a 0, CpbRemovalDelay(m) se establece en el valor de du_common_cpb_removal_delay_minus1 1 en el mensaje SEI de temporización de imágenes, seleccionado como se especifica en la subcláusula C.1 del Anexo C de HEVC WD8, asociado con la unidad de acceso que contiene la unidad de descodificación m.

[0137] El tiempo de eliminación nominal de la unidad de acceso n del CPB 94 también se puede determinar como sigue. Si la unidad de acceso n es la unidad de acceso 0 (es decir, la unidad de acceso que inicializa el HRD), el tiempo de eliminación nominal de la unidad de acceso 0, del CPB 94, t ^r,n (0), se especifica por la ecuación 5:

[0138] De otro modo, para la unidad de acceso n donde n es distinto de cero o no ha inicializado e1HRD, se aplica lo siguiente. Cuando la unidad de acceso n es la primera unidad de acceso de un período de almacenamiento en búfer que no inicializa el HRD, el tiempo de eliminación nominal de la unidad de acceso n del CPB 94, t ^r,n (n), se especifica por la ecuación 6:

tr}1 (n) = trn(nb ) + tc ■ (au_cpd_removal_delay_minusl(n) 1) (6)

donde t ^r,n (n ^b ) es el tiempo de eliminación nominal de la primera unidad de acceso del período de almacenamiento en búfer previo, y au_cpd_removal_delay_minus1 (n) es el valor de au_cpd_removal_delay_plus1 en el mensaje SEI de temporización de imágenes, seleccionado como se especifica en HEVC WD8, Anexo C, subcláusula C.1, asociado con la unidad de acceso n. Cuando la unidad de acceso n es la primera unidad de acceso de un período de almacenamiento en búfer, n ^b se establece igual a n en el tiempo de eliminación nominal t ^r,n (n) de la unidad de acceso n. Cuando la unidad de acceso n no es la primera unidad de acceso de un período de almacenamiento en búfer, t^r,n(n) viene dado por la ecuación 6, donde tr ^,n (r ^ib ) es el tiempo de eliminación nominal de la primera unidad de acceso del período de almacenamiento en búfer actual.

[0139] Cuando sub_pic_cpb_params_present_flag es igual a 1, el tiempo de eliminación nominal para eliminar la unidad de descodificación m del CPB 94 se especifica como sigue, donde t ^r,n (n) es el tiempo de eliminación nominal de la unidad de acceso n: Si la unidad de descodificación m es la última unidad de descodificación en la unidad de acceso n, el tiempo de eliminación nominal de la unidad de descodificación m, t ^r,n (m), se establece en t ^{r ,r} (n). Es decir, la unidad de acceso y su última unidad de descodificación se eliminan del CPB 94 aproximadamente al mismo tiempo. De otro modo, (es decir, la unidad de descodificación m no es la última unidad de descodificación en la unidad de acceso n), el tiempo de eliminación nominal de la unidad de descodificación m, tr, ⁿ (m) se deriva como se muestra en la ecuación 7, donde t ^r,n (n) es el tiempo de eliminación nominal de la unidad de acceso n.

si(sub_pic cpbjparams in_pic timing set flag)

trn (m) = trn (?n 4- 1) — tc sub ■ CpdRemovalDelayQm)

' ' " O )

si no

tr n(m) — trn (n) — tc sub ■ CpdRemovalDelay(m)

[0140] El tiempo de eliminación de la unidad de acceso n del CPB 94 se especifica como sigue en la ecuación 8, donde t ^af (m) y t^r,n(m) son el tiempo de llegada final y el tiempo de eliminación nominal, respectivamente, de la última unidad de descodificación en la unidad de acceso n.

si (!low_delay_hrd_flag | | t^r,n(n) > t^af(n))

t ^r (n) = t ^r,n (n)

si no si (sub_pic_cpb_params_present_flag)

[0141] Cuando SubPicCpbFlag es igual a 1, el tiempo de eliminación de la unidad de descodificación m del CPB 94 se especifica como sigue. Si low_delay_hrd_flag es igual a 0 o t ^r,n (m) > t ^af (m), el tiempo de eliminación de la unidad de descodificación m se especifica por la ecuación 9:

tr (m) = tr n (m) (9)

De otro modo, si la unidad de descodificación m no es la última unidad de descodificación de la unidad de acceso n, el tiempo de eliminación de la unidad de descodificación m se especifica por la ecuación 10:

De otro modo, si la unidad de descodificación m es la última unidad de descodificación de la unidad de acceso n, el tiempo de eliminación de la unidad de descodificación m se especifica por la ecuación 11:

tr(?n) = trn(n) ( 11)

[0142] En algunos ejemplos, cuando low_delay_hrd_flag es igual a 1 y t ^r,n (m) < t ^af (m), el tamaño de la unidad de descodificación m, b(m), es tan grande que evita la eliminación en el tiempo de eliminación nominal.

[0143] En el tiempo de eliminación de CPB de la unidad de descodificación m, la unidad de descodificación se descodifica instantáneamente. La imagen n se considera descodificada después de que se descodifica la última unidad de descodificación de la imagen.

[0144] Las siguientes tablas ilustran la sintaxis y la semántica que se pueden usar para implementar las técnicas de ejemplo descritas en la presente divulgación. La tabla 1 proporciona sintaxis y semántica de ejemplo para un mensaje SEI en el período de almacenamiento en búfer. La tabla 2 proporciona sintaxis y semántica de ejemplo para un mensaje SEI de temporización de imágenes. La funcionalidad de CPB 94 se puede determinar por la sintaxis y la semántica de los mensajes SEI. Por ejemplo, el descodificador de vídeo 30 extrae las DU del CPB 94 en base, al menos en parte, a los mensajes SEI en el período de almacenamiento en búfer y de temporización de imágenes.

[0145] Un mensaje de información de mejora complementaria (SEI) en el período de almacenamiento en búfer proporciona información del retardo de eliminación de CPB inicial y la desviación de retardo de eliminación de CPB inicial. La sintaxis de mensajes SEI en el período de almacenamiento en búfer puede ser la misma que la sintaxis de mensajes SEI en el período de almacenamiento en búfer en la solicitud provisional de EE. UU. n.° 61/705.102, presentada el 24 de septiembre de 2012, y la semántica se cambia como sigue. La sintaxis de mensajes SEI en el período de almacenamiento en búfer se proporciona en la tabla 1, mostrada a continuación.

Tabla 1: Sintaxis de mensajes SEI en el período de almacenamiento en búfer

[0146] Un período de almacenamiento en búfer se especifica como el conjunto de unidades de acceso entre dos casos consecutivos del mensaje SEI en el período de almacenamiento en búfer en orden de descodificación.

[0147] Lo siguiente se aplica a la sintaxis y a la semántica de los mensajes SEI en el período de almacenamiento en búfer. El flujo de bits (o una parte del mismo) se refiere al subconjunto del flujo de bits (o una parte del mismo) asociado con cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI en el período de almacenamiento en búfer.

[0148] Para un mensaje SEI en el período de almacenamiento en búfer, los elementos de sintaxis initial_cpb_removal_delay_length_minus1 y sub_pic_cpb_params_present_flag, y las variables NalHrdBpPresentFlag, VclHrdBpPresentFlag, CpbSize[SchedSelIdx], BitRate[SchedSelIdx] y CpbCnt se encuentran en o se derivan de los elementos de sintaxis encontrados en la estructura sintáctica hrd_parameters() y la estructura sintáctica sub_layer_hrd_parameters() que son aplicables a cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI en el período de almacenamiento en búfer.

[0149] Un mensaje SEI en el período de almacenamiento en búfer puede tener dos puntos de funcionamiento con diferentes valores OpTid, tIdA y tIdB. Tener dos puntos de funcionamiento cualesquiera con diferentes valores de OpTid indica que los valores de cpb_cnt_minus1[tIdA] y cpb_cnt_minus1[tIdB] codificados en la(s) estructura(s) sintáctica(s) hrd_parameters(), aplicables a los respectivos puntos de funcionamiento, son idénticos. Además, el mensaje SEI en el período de almacenamiento en búfer puede tener dos puntos de funcionamiento en el mensaje SEI en el período de almacenamiento en búfer que tienen diferentes valores OpLayerIdSet, layerIdSetA y layerIdSetB. Tener dos puntos de funcionamiento cualesquiera con diferentes valores OpLayerIdSet indica que los valores de nal_hrd_parameters_present_flag y vcl_hrd_parameters_present_flag, para dos estructuras sintácticas hrd_parameters() aplicables a los dos puntos de funcionamiento m, respectivamente, son idénticos.

[0150] Si NalHrdBpPresentFlag o VclHrdBpPresentFlag son iguales a 1, un mensaje SEI en el período de almacenamiento en búfer aplicable a los puntos de funcionamiento especificados puede estar presente en cualquier AU con TemporalId igual a 0 en la secuencia de vídeo codificada, y un mensaje SEI en el período de almacenamiento en búfer aplicable a los puntos de funcionamiento especificados puede estar presente en cada AU de punto de acceso aleatorio (RAP) y en cada AU asociada con un mensaje SEI en el punto de recuperación. De otro modo (NalHrdBpPresentFlag y VclHrdBpPresentFlag son ambos iguales a 0), ninguna unidad de acceso en la secuencia de vídeo codificada puede tener un mensaje SEI en el período de almacenamiento en búfer aplicable a los puntos de funcionamiento especificados.

[0151] Para algunas aplicaciones, la presencia frecuente de un mensaje SEI en el período de almacenamiento en búfer puede ser deseable.

[0152] Cuando está presente una unidad de NAL de SEI que contiene un mensaje SEI en el período de almacenamiento en búfer y tiene nuh_reserved_zero_6bits igual a 0, la unidad de NAL de SEI puede preceder, en orden de descodificación, a la primera unidad de NAL de VCL en la AU.

[0153] La unidad de acceso asociada con un mensaje SEI en el período de almacenamiento en búfer puede tener Temporalld igual a 0.

[0154] La variable CpbCnt se deriva para que sea igual a cpb_cnt_minus1[tId] 1, donde cpb_cnt_minus1[tId] se codifica en la estructura sintáctica hrd_parameters() que es aplicable a cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI en el período de almacenamiento en búfer y que tienen OpTid igual a tId.

[0155] Los siguientes elementos de sintaxis y variables en los mensajes SEI en el período de almacenamiento en búfer se pueden definir como sigue: seq_parameter_set_ id se refiere al conjunto de parámetros de secuencia activo. El valor de seq_parameter_set_id puede ser igual al valor de seq_parameter_set_id en el conjunto de parámetros de imagen ("PPS") al que se hace referencia por la imagen codificada asociada con el mensaje SEI en el período de almacenamiento en búfer. El valor de seq_parameter_set_id puede estar en el intervalo de 0 a 31, inclusive.

[0156] El indicador rap_cpb_params_present_flag igual a 1 especifica la presencia de los elementos de sintaxis initial_alt_cpb_removal_delay[SchedSelIdx] e initial_alt_cpb_removal_delay_offset[SchedSelIdx]. Cuando no está presente, se puede deducir que el valor de rap_cpb_params_present_flag es igual a 0. Cuando la imagen asociada no es ni una imagen CRA ni una imagen BLA, el valor de rap_cpb_params_present_flag puede ser igual a 0.

[0157] Los elementos de secuencia init¡al_cpb_removal_delay[SchedSelIdx] e init¡al_alt_cpb_removal_delay[SchedSelIdx] especifican los retardos de eliminación de CPB iniciales por defecto y alternativos, respectivamente, para el SchedSelIdx-ésimo CPB. Los elementos de sintaxis tienen una longitud en bits dada por initial_cpb_removal_delay_length_minus1 1 y están en unidades de un reloj de 90 kHz, por ejemplo. Los valores de los elementos de sintaxis pueden no ser iguales a 0 y pueden ser menores que o iguales a

CpbSize [SchedSelldx] (12)

^{valores de los elementos de sintaxis <} 90000

BLtRate [SchedSelldx]

que es el equivalente en tiempo del tamaño de CPB en unidades de reloj de 90 kHz.

[0158] Los elementos de sintaxis initial_cpb_removal_delay_offset[SchedSelIdx] e initial_alt_cpb_removal_delay_offset[SchedSelIdx] especifican las desviaciones de eliminación de CPB iniciales por defecto y alternativas, respectivamente, para el SchedSelIdx-ésimo CPB. Los elementos de sintaxis tienen una longitud en bits dada por initial_cpb_removal_delay_length_minus1 1 y están en unidades de un reloj de 90 kHz. Estos elementos de sintaxis pueden no usarse por los descodificadores y pueden ser necesarios solo para el programador de entrega (HSS) especificado en el Anexo C de HEVC WD8.

[0159] Durante la secuencia de vídeo codificada completa, la suma de initial_cpb_removal_delay[SchedSelIdx] e initial_cpb_removal_delay_offset[SchedSelIdx] puede ser constante para cada valor de SchedSelIdx, y la suma de initial_alt_cpb_removal_delay[SchedSelIdx] e initial_alt_cpb_removal_delay_offset[SchedSelIdx] puede ser constante para cada valor de SchedSelldx.

[0160] El mensaje SEI de temporización de imágenes proporciona información del retardo de eliminación de CPB y el retardo de salida de DPB para la unidad de acceso asociada con el mensaje SEI. Un ejemplo de la sintaxis y la semántica de los mensajes SEI de temporización de imágenes es como sigue en la tabla 2.

Tabla 2: Sintaxis y semántica de mensajes SEI de temporización de imágenes

[0161] Lo siguiente se aplica a la sintaxis y a la semántica de los mensajes SEI de temporización de imágenes. Los elementos de sintaxis sub_pic_cpb_params_present_flag, sub_pic_cpb_params_in_pic_timing_sei_flag, cpb_removal_delay_length_minus1, dpb_output_delay_length_minus1 y du_cpb_removal_delay_length_minus1, y la variable CpbDpbDelaysPresentFlag se encuentran en o se derivan a partir de los elementos de sintaxis encontrados en la estructura sintáctica hrd_parameters() y la estructura sintáctica sub_layer_hrd_parameters() aplicable a cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de imágenes.

[0162] El flujo de bits (o una parte del mismo) se refiere al subconjunto del flujo de bits (o una parte del mismo) asociado con cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de imágenes. Sin embargo, téngase en cuenta que la sintaxis del mensaje SEI de temporización de imágenes puede depender del contenido de las estructuras sintácticas hrd_parameters() aplicables a los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de imágenes. Estas estructuras sintácticas hrd_parameters() pueden en el conjunto de parámetros de vídeo y/o en el conjunto de parámetros de secuencia que están activos para la imagen codificada asociada con el mensaje SEI de temporización de imágenes. Cuando el mensaje SEI de temporización de imágenes se asocia con una unidad de acceso CRA que es la primera unidad de acceso en el flujo de bits, una unidad de acceso IDR o una unidad de acceso BLA, a menos que esté precedida por un mensaje SEI en el período de almacenamiento en búfer dentro de la misma unidad de acceso, la activación del conjunto de parámetros de vídeo y el conjunto de parámetros de secuencia (y, para imágenes IDR o BLA que no son la primera imagen en el flujo de bits, la determinación de que la imagen codificada es una imagen IDR o una imagen BLA) no se produce hasta la descodificación de la primera unidad de NAL de fragmento codificado de la imagen codificada. Puesto que la unidad de NAL de fragmento codificado de la imagen codificada sigue al mensaje SEI de temporización de imágenes en el orden de la unidad de NAL, puede haber casos en los que sea necesario para un descodificador almacenar la carga útil de secuencia de octetos en bruto (RBSP) que contiene el mensaje SEI de temporización de imágenes hasta determinar el conjunto de parámetros de vídeo activos y/o el conjunto de parámetros de secuencia activos, y a continuación realizar el análisis del mensaje SEI de temporización de imágenes.

[0163] La presencia de un mensaje SEI de temporización de imágenes en el flujo de bits se especifica como sigue. Si CpbDpbDelaysPresentFlag es igual a 1, un mensaje SEI de temporización de imágenes aplicable a los puntos de funcionamiento especificados puede estar presente en cada unidad de acceso de la secuencia de vídeo codificada. De otro modo, por ejemplo si CpbDpbDelaysPresentFlag es igual a 0, ningún mensaje SEI de temporización de imágenes aplicable a los puntos de funcionamiento especificados puede estar presente en ninguna unidad de acceso de la secuencia de vídeo codificada.

[0164] Cuando está presente una unidad de NAL de SEI que contiene un mensaje SEI de temporización de imágenes y tiene nuh_reserved_zero_6bits igual a 0, la unidad de NAL de SEI puede preceder, en orden de descodificación, a la primera unidad de NAL de VCL en la unidad de acceso.

[0165] El elemento de sintaxis au_cpb_removal_delay_minus1 más 1 especifica cuántos tics de reloj esperar después de la eliminación de la unidad de acceso asociada con el mensaje SEI en el período de almacenamiento en búfer más reciente en una unidad de acceso precedente del CPB, tal como el CPB 94, antes de eliminar del CPB 94 la unidad de acceso asociada con el mensaje SEI de temporización de imágenes. Este valor también se puede usar para calcular el primer tiempo posible de llegada de datos de la unidad de acceso al CPB para el HSS. El elemento de sintaxis es un código de longitud fija con una longitud en bits que viene dada por cpb_removal_delay_length_minus1 1.

[0166] El valor de cpb_removal_delay_length_minus1 que determina la longitud (en bits) del elemento de sintaxis au_cpb_removal_delay_minus1 es el valor de cpb_removal_delay_length_minus1 codificado en el conjunto de parámetros de vídeo o el conjunto de parámetros de secuencia que está activo para la imagen codificada asociada con el mensaje SEI de temporización de imágenes, aunque au_cpb_removal_delay_minus1 más 1 especifica un número de tics de reloj relativos al tiempo de eliminación de la unidad de acceso precedente que contiene un mensaje SEI en el período de almacenamiento en búfer, que puede ser una unidad de acceso de una secuencia de vídeo codificada diferente.

[0167] El elemento sintáctico pic_dpb_output_delay se usa para computar el tiempo de salida de DPB de la imagen. pic_dpb_output_delay especifica cuántos tics de reloj esperar después de la eliminación de la última unidad de descodificación en una unidad de acceso del CPB antes de que la imagen descodificada se emita desde un DPB. Una imagen puede no eliminarse del DPB en su tiempo de salida cuando la imagen todavía está marcada como "usada como referencia a corto plazo" o "usada como referencia a largo plazo". En algunos ejemplos, solo se especifica un pic_dpb_output_delay para una imagen descodificada.

[0168] La longitud del elemento de sintaxis pic_dpb_output_delay viene dada en bits por dpb_output_delay_length_minus1 1. Cuando sps_max_dec_pic_buffering[minTid] es igual a 1, donde minTid es el mínimo de los valores OpTid de todos los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de imágenes, pic_dpb_output_delay será igual a 0. El tiempo de salida derivado de pic_dpb_output_delay de cualquier imagen que se emite desde un descodificador en conformidad con temporización de salida puede preceder al tiempo de salida derivado de pic_dpb_output_delay de todas las imágenes en cualquier secuencia de vídeo codificada posterior en orden de descodificación. El orden de salida de la imagen establecido por los valores de este elemento de sintaxis será el mismo orden establecido por los valores de PicOrderCntVal (es decir, valores POC que indican el orden de salida o de visualización de las imágenes).

[0169] Para las imágenes que no se emiten por el procedimiento de "abultamiento" porque preceden, en orden de descodificación, a una imagen de actualización de descodificación instantánea (IDR) o imagen de acceso de enlace roto (BLA) con no_output_of_prior_pics_flag igual a 1 o que se deduce como igual a 1, los tiempos de salida derivados de dpb_output_delay se pueden estar incrementando con el valor en incremento de PicOrderCntVal en relación con todas las imágenes dentro de la misma secuencia de vídeo codificada.

[0170] El elemento de sintaxis num_decoding_units_m¡nus1 más 1 especifica el número de unidades de descodificación en la unidad de acceso asociada con el mensaje SEI de temporización de imágenes. El valor de num_decoding_units_minus1 puede estar en el intervalo de 0 a PicSizeInCtbsY - 1, inclusive. El indicador du_common_cpb_removal_delay_flag que es igual a 1 especifica que está presente el elemento de sintaxis du_common_cpb_removal_delay_minus1. Cuando du_common_cpb_removal_delay_flag es igual a 0 especifica que el elemento de sintaxis du_common_cpb_removal_delay_minus1 no está presente.

[0171] El elemento de sintaxis du_common_cpb_removal_delay_minus1 más 1 especifica la duración, en unidades de tics de reloj de subimagen (véase la subcláusula E.2.1 de HEVC WD8), entre la eliminación de un CPB, tal como el CPB 94, de dos unidades de descodificación consecutivas cualesquiera en orden de descodificación en la unidad de acceso asociada con el mensaje SEI de temporización de imágenes. Este valor también se usa para calcular el primer tiempo de llegada posible de los datos de la unidad de descodificación al CPB para el HSS, como se especifica en HEVC WD8, Anexo C. El elemento de sintaxis es un código de longitud fija con una longitud en bits que viene dada por du_cpb_removal_delay_length_minus1 1.

[0172] El elemento de sintaxis num_nalus_in_du_minus1 [i] más 1 especifica el número de unidades de NAL en la iésima DU de la AU asociada con el mensaje SEI de temporización de imágenes. El valor de num_nalus_in_du_minus1[i] estará en el intervalo de 0 a PicSizeInCtbsY - 1, inclusive. Por ejemplo, el descodificador de vídeo 30 puede determinar cuántas unidades de NAL hay en una DU actual en base a la descodificación del elemento de sintaxis num_nalus_in_du_minus1[i] más 1 del mensaje SEI de temporización de imágenes.

[0173] La primera DU de la AU puede incluir las primeras num_nalus_in_du_minus1[0] 1 unidades de NAL consecutivas en orden de descodificación en la AU. La iésima (con i mayor que 0) DU de la AU consiste en las num_nalus_in_du_minus1[i] 1 unidades de NAL consecutivas inmediatamente después de la última unidad de NAL en la DU previa de la AU, en orden de descodificación. Puede haber al menos una unidad de NAL de VCL en cada DU. Todas las unidades de NAL distintas de VCL asociadas con una unidad de NAL de VCL se incluirán en la misma DU que la unidad de NAL de VCL. El descodificador de vídeo 30 determina las unidades de NAL en una DU en base a la descodificación de elementos de sintaxis tales como num_nalus_in_du_minus1[i].

[0174] El elemento de sintaxis du_cpb_removal_delay_minus1[i] más 1 especifica la duración, en unidades de tics de reloj de subimagen, entre la eliminación del CPB, tal como el CPB 94, de la (i 1)ésima DU y la iésima DU, en orden de descodificación, en la AU asociada con el mensaje SEI de temporización de imágenes. Este valor también se puede usar para calcular el primer tiempo de llegada posible de los datos de DU al CPB para el HSS, como se especifica en HEVC WD8, Anexo C. El elemento de sintaxis es un código de longitud fija con una longitud en bits que viene dada por du_cpb_removal_delay_length_minus1 1.

[0175] En algunos ejemplos, aunque la longitud del elemento de sintaxis es la misma que du_common_cpb_removal_delay_minus1, el valor se puede haber especificado en relación con el tiempo de eliminación de CPB de la AU del inicio del período de almacenamiento en búfer. Por ejemplo, el descodificador de vídeo 30 puede determinar el valor de un elemento de sintaxis en relación con un tiempo de eliminación de CPB descodificado. En algunos ejemplos, puede ser posible que esto sea inconsistente con la semántica de du_common_cpb_removal_delay_minus1. Por ejemplo, esto puede entrar en conflicto, potencialmente, con la ecuación 7 (ecuación C-10 en HEVC WD8, Anexo C), que define que si se indica sub_pic_cpb_params_in_pic_timing_sei_flag, entonces tr ^,n (m) = t ^r,n (m 1) - t ^c_sub • CpdRemovalDelay(m).

[0176] En algunos ejemplos, du_cpb_removal_delay_minus1[i] más 1 de forma alternativa especifica la duración, en unidades de tics de reloj de subimagen, entre la eliminación del CPB de la AU asociada con el mensaje SEI de temporización de imágenes y la iésima DU en la AU asociada con el mensaje SEI de temporización de imágenes. En este caso, se puede evitar la señalización del valor para la última DU en la AU. Por tanto, el descodificador de vídeo 30 no tiene que determinar un valor de la última DU en la AU a partir del mensaje SEI de temporización de imágenes porque el tiempo de eliminación para la última DU es el mismo que el tiempo de eliminación para la AU correspondiente.

[0177] De forma alternativa, en la semántica de au_cpb_removal_delay_minus1, du_common_cpb_removal_delay_minus1 y du_cpb_removal_delay_minus1[i] especifican el retardo/diferencia/duración entre "tiempos de eliminación de CPB nominales" en lugar de "tiempos de eliminación de CPB".

[0178] La tabla 3, a continuación, proporciona una sintaxis de mensaje SEI de temporización de subimágenes de ejemplo. El mensaje SEI de temporización de subimágenes proporciona información de retardo de eliminación de CPB para la unidad de descodificación asociada con el mensaje SEI. Una sintaxis y semántica de mensajes SEI de temporización de subimágenes de ejemplo son como sigue.

Tabla 3: Sintaxis de mensajes SEI de temporización de subimágenes

[0179] Lo siguiente se aplica a la sintaxis y a la semántica de mensajes SEI de temporización de subimágenes. Los elementos de sintaxis sub_pic_cpb_params_present_flag, sub_pic_cpb_params_in_pic_timing_sei_flag y cpb_removal_delay_length_minus1 y la variable CpbDpbDelaysPresentFlag se encuentran en o se derivan a partir de elementos de sintaxis encontrados en la estructura sintáctica hrd_parameters() y la estructura sintáctica sub_layer_hrd_parameters() aplicable a cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de subimágenes. El flujo de bits (o una parte del mismo) se refiere al subconjunto del flujo de bits (o una parte del mismo) asociado con cualquiera de los puntos de funcionamiento a los que se aplica el mensaje SEI de temporización de subimágenes.

[0180] La presencia del mensaje SEI de temporización de subimágenes en el flujo de bits se especifica como sigue. Si CpbDpbDelaysPresentFlag es igual a 1, sub_pic_cpb_params_present_flag es igual a 1 y sub_pic_cpb_params_in_pic_timing_sei_flag es igual a 0, un mensaje SEI de temporización de subimágenes aplicable a los puntos de funcionamiento especificados puede estar presente en cada unidad de descodificación en la secuencia de vídeo codificada. De otro modo, no estarán presentes mensajes SEI de temporización de subimágenes aplicables a los puntos de funcionamiento especificados en la secuencia de vídeo codificada. Por tanto, si el descodificador de vídeo 30 descodifica los indicadores y determina que los valores se establecen como anteriormente, el descodificador de vídeo 30 determina que no hay mensajes SEI de temporización de subimágenes aplicables a los puntos de funcionamiento especificados.

[0181] La unidad de descodificación asociada con un mensaje SEI de temporización de subimágenes consiste, en orden de descodificación, en la unidad de NAL de SEI que contiene el mensaje SEI de temporización de subimágenes, seguida de una o más unidades de NAL que no contienen un mensaje SEI de temporización de subimágenes, incluyendo todas las unidades de NAL posteriores en la AU hasta, pero sin incluir cualquier unidad de NAL de SEI posterior que contenga un mensaje SEI de temporización de subimágenes. Puede haber al menos una unidad de NAL de VCL en cada DU. Todas las unidades de NAL distintas de VCL asociadas con una unidad de NAL de VCL se pueden incluir en la misma DU que la unidad de NAL de VCL.

[0182] En algunos ejemplos, el elemento de sintaxis du_spt_cpb_removal_delay especifica la duración, en unidades de tics de reloj de subimagen (véase la subcláusula E.2.1 de HEVC WD8), entre la eliminación del CPB de la última unidad de descodificación en orden de descodificación en la unidad de acceso actual que contiene el mensaje SEI de temporización de subimágenes y la unidad de descodificación asociada con el mensaje SEI de temporización de subimágenes. Este valor también se puede usar para calcular el primer tiempo de llegada posible de los datos de la unidad de descodificación al CPB para el HSS, como se especifica en HEVC WD8, Anexo C. El elemento de sintaxis se representa por un código de longitud fija con una longitud en bits que viene dada por du_cpb_removal_delay_length_minus1 1. Cuando la DU asociada con el mensaje SEI de temporización de subimágenes es la última DU en la AU actual, el valor de du_spt_cpb_removal_delay será igual a 0.

[0183] De forma alternativa, en otros ejemplos, el elemento de sintaxis du_spt_cpb_removal_delay especifica la duración, en unidades de tics de reloj de subimagen (véase la subcláusula E.2.1 de HEVC WD8), entre la eliminación de CPB 94 de la DU siguiente en orden de descodificación en la AU actual que contiene el mensaje SEI de temporización de subimágenes y la DU asociada con el mensaje SEI de temporización de subimágenes. Este valor también se puede usar para calcular el primer tiempo de llegada posible de los datos de la unidad de descodificación a CPB 94 para el HSS, como se especifica en HEVC WD8, Anexo C. El elemento de sintaxis se representa por un código de longitud fija con una longitud en bits que viene dada por du_cpb_removal_delay_length_minus1 1. Cuando la unidad de descodificación asociada con el mensaje SEI de temporización de subimágenes es la última unidad de descodificación en la unidad de acceso actual, el valor de du_spt_cpb_removal_delay será igual a 0. De forma alternativa, ningún mensaje SEI de temporización de subimágenes se asocia con la última unidad de descodificación en cada unidad de acceso.

[0184] En algunos ejemplos, el elemento de sintaxis du_spt_cpb_removal_delay se codifica de forma alternativa como du_spt_cpb_removal_delay_minus1. El elemento de sintaxis du_spt_cpb_removal_delay_minus1 más 1 especifica cuántos tics de reloj de subimágenes esperar después de que el descodificador de vídeo 30 elimina la última DU en la AU asociada con el mensaje SEI en el período de almacenamiento en búfer más reciente de una AU precedente del CPB 94 antes de eliminar la DU asociada con el mensaje SEI de temporización de subimágenes de CPB 94. Este valor también se puede usar para calcular el primer tiempo de llegada posible de los datos de la unidad de descodificación al CPB para e1HSS, como se especifica en HEVC WD8, Anexo C. El elemento de sintaxis se representa por un código de longitud fija con una longitud en bits que viene dada por cpb_removal_delay_length_minus1 1.

[0185] La Tabla 4, que se proporciona a continuación, describe un ejemplo de la sintaxis y la semántica de los parámetros HRD. Para los elementos de sintaxis para los que la semántica no se incluye a continuación, su semántica es la misma que en la solicitud provisional de EE. U^u . n.° 61/705 102, presentada el 24 de septiembre de 2012. La sintaxis y la semántica de los parámetros HRD pueden ser como sigue.

Tabla 4: Sintaxis y semántica de parámetros HRD

[0186] El elemento de sintaxis sub_p¡c_cpb_params_¡n_p¡c_t¡m¡ng_se¡_flag igual a 1 especifica que están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen en los mensajes SEI de temporización de imágenes y no está presente ningún mensaje SEI de temporización de subimágenes. sub_pic_cpb_params_in_pic_timing_sei_flag igual a 0 especifica que están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen en los mensajes SEI de temporización de subimágenes y los mensajes SEI de temporización de imágenes no incluyen parámetros de retardo de eliminación de CPB a nivel de subimagen.

[0187] El elemento de sintaxis sub_p¡c_cpb_params_present_flag igual a 1 especifica que están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y que el CPB puede funcionar a nivel de unidad de acceso o nivel de subimagen. sub_pic_cpb_params_present_flag igual a 0 especifica que no están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y que el CPB funciona a nivel de unidad de acceso. Cuando no está presente sub_pic_cpb_params_present_flag, se puede deducir que su valor es igual a 0.

[0188] La FIG. 4 es un diagrama conceptual que ilustra dos unidades de acceso 100 y 102 en orden de descodificación consecutivo que pueden tener tiempos de descodificación de acuerdo con las técnicas descritas en la presente divulgación. Los tiempos de eliminación de búfer de imágenes codificadas de ejemplo se analizarán en términos de las AU 100 y 102, así como los elementos de sintaxis y las variables para mensajes SEI asociados con las AU 100 y 102. La FIG. 4 también ilustra una línea temporal 130.

[0189] Como se describe en el presente documento, la AU 100 es la unidad de acceso n y la AU 102 es la unidad de acceso n 1, donde n es anterior en el tiempo en orden de descodificación que n 1. La AU 100 incluye cuatro unidades de descodificación 110-1, 110-2, 110-3 y 110-4 (denominadas conjuntamente "unidades de descodificación 110"). Como se describe en el presente documento, la DU 110-1 se puede denominar DU-M, la DU 110-2, DU-M+1, la DU 110-3, DU-M+2 y la DU 110-4, DU-M+3, por ejemplo. La AU 102 incluye cuatro unidades de descodificación 112-1, 112-2, 112-3 y 112-4 (denominadas conjuntamente "unidades de descodificación 112").

[0190] De forma similar, como se describe en el presente documento, la DU 112-1 se puede denominar DU-M, la DU 112-2, DU-M+1, la DU 112-3, DU-M+2 y la DU 112-4, DU-M+3, por ejemplo. Sin embargo, cualquier unidad de acceso puede ser la "unidad de acceso n" y cualquier unidad de descodificación puede ser la "unidad de descodificación m". En otros ejemplos, las AU 100 y 102 pueden tener números diferentes de las DU 110 y 112, respectivamente. Cualquier DU 110 o 112 puede ser una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0191] En este ejemplo, las unidades de acceso 100 y 102 se almacenan en un búfer de imágenes codificadas, por ejemplo, el CPB 94 de la FIG. 3. El descodificador de vídeo 30 extrae las unidades de descodificación 110 y 112 y las unidades de acceso 100 y 102 del CPB 94 para su descodificación en tiempos determinados. Los tiempos para extraer una AU o DU del CPB 94 se denominan tiempos de eliminación de CPB. Como se muestra en la FIG. 4, los tiempos de eliminación de CPB para las DU 110 en la AU 100 son los tiempos de eliminación de CPB 140-1, 140-2, 140-3 y 140-4 (denominados conjuntamente "tiempos de eliminación de CPB 140"). Asimismo, los tiempos de eliminación de CPB para las DU 112 en la AU 102 son los tiempos de eliminación de CPB 142-1, 142-2, 142-3 y 142-4 (denominados conjuntamente "tiempos de eliminación de CPB 142"). El tiempo de eliminación de CPB de una AU puede ser el mismo que el tiempo de eliminación de CPB de la última DU de la AU. Por ejemplo, el tiempo de eliminación de CPB de la AU 100 es aproximadamente el mismo que el tiempo de eliminación de CPB de la DU 110-4, el tiempo de eliminación de CPB 140-4.

[0192] En un ejemplo, para cada DU 112 en la AU 102, se señala la duración entre los tiempos de eliminación de CPB de la siguiente DU 112 en orden de descodificación en la AU 102 y la DU 112 particular. Por ejemplo, la DU 112-2 es una DU actual, en orden de descodificación, que se va a extraer del CPB 94 y se va a descodificar por el descodificador de vídeo 30. Una duración de tiempo 132 entre el tiempo de eliminación de CPB 142-2 para la DU 112-2 y el tiempo de eliminación de CPB 142-3 para la DU 112-3, la DU siguiente en orden de descodificación, se señala, por ejemplo, en un mensaje SEI asociado con la unidad de acceso 102. El descodificador de vídeo 30 determina el tiempo de eliminación de CPB 142-2 para la DU 112-2 en base a la duración del tiempo señalado 132. Es decir, el descodificador de vídeo 30 puede derivar el tiempo de eliminación de CPB para cada DU 112 en la unidad de acceso 102 en base a los tiempos de eliminación para la DU 112 dentro de la AU 102 y no a los tiempos de eliminación para otras DU dentro de otras AU, tales como la AU 100 previa, en orden de descodificación. Por tanto, el descodificador de vídeo 30 puede haber mejorado la señalización y ser más a prueba de errores para los tiempos de eliminación de CPB de las DU y las AU.

[0193] El tiempo de eliminación de CPB para la DU 112-2 de la AU 102 se puede señalar de una manera alternativa. Por ejemplo, en un mensaje SEI asociado con la AU 102, se señala una duración de tiempo 134 entre el tiempo de eliminación de CPB 142-2 para la DU 112-2 y el tiempo de eliminación de CPB 142-4 para la última DU en la AU 102, la DU 112-4. El descodificador de vídeo 30 determina el tiempo de eliminación de CPB 142-2 para la DU 112-2 en base al tiempo de eliminación de CPB señalado 142-4 de la DU 112-4.

[0194] En cualquiera de los ejemplos anteriores, el descodificador de vídeo 30 determina los tiempos de eliminación de CPB para las DU de otras DU dentro de la misma AU. De esta manera, los tiempos de eliminación de CPB para cualquier DU no dependen de ninguna otra AU además de la AU de la DU particular. La pérdida de la información de temporización de eliminación de CPB en la AU previa no provocaría una derivación incorrecta de los tiempos de eliminación de CPB de una AU actual. Por ejemplo, la pérdida de los tiempos de eliminación de CPB 140 para la AU 100 no afectaría la determinación de los tiempos de eliminación de CPB 142 para la AU 102. Por lo tanto, el descodificador de vídeo 30 puede haber mejorado la señalización y ser más a prueba de errores para determinar los tiempos de eliminación de CPB de las DU y las AU.

[0195] El descodificador de vídeo 30 también puede determinar los tiempos de eliminación de CPB en base, al menos en parte, a los parámetros de CPB a nivel de subimagen transportados en mensajes SEI de temporización de subimágenes. En un ejemplo de este tipo, la señalización de los tiempos de eliminación de CPB y la derivación de los tiempos de eliminación de CPB son tanto eficaces como a prueba de errores. Se puede señalar un indicador a nivel de secuencia para controlar la presencia de parámetros de CPB a nivel de subimagen, en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes, pero nunca en ambos. El indicador de nivel de secuencia puede ser sub_pic_cpb_params_present_flag, descrito anteriormente. El indicador también puede controlar el uso de los parámetros de CPB a nivel de subimagen desde qué tipo de mensaje SEI para las operaciones de CPB a nivel de subimagen. Cuando sub_pic_cpb_params_present_flag es igual a 1, se señalan los tiempos de llegada de CPB y los tiempos de eliminación de CPB para tanto el nivel de AU como el nivel de subimagen, independientemente del valor de SubPicCpbFlag.

[0196] En algunos ejemplos, si una AU, tal como la AU 100, tiene un TemporalId mayor que 0, no se puede asociar ningún mensaje SEI en el período de almacenamiento en búfer o mensaje SEI en el punto de recuperación con la AU 100.

[0197] La FIG. 5 es un diagrama de flujo que ilustra un procedimiento para determinar un tiempo de eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación en una unidad de acceso en base al tiempo de eliminación de CPB para una segunda unidad de descodificación de la unidad de acceso de acuerdo con las técnicas descritas en la presente divulgación. Un descodificador de vídeo puede realizar el procedimiento de la FIG. 5. El descodificador de vídeo puede ser el descodificador de vídeo 30 de la FIG. 1 o la FIG. 3, por ejemplo.

[0198] El procedimiento de la FIG. 5 incluye la descodificación de una duración entre la eliminación de CPB de una primera DU en una AU y la eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU (200). La segunda DU puede ser inmediatamente posterior a la primera DU en la AU en orden de descodificación. De forma alternativa, la segunda DU puede ser una última DU en la AU en orden de descodificación. Por ejemplo, el descodificador de vídeo 30 puede recibir el flujo de bits desde el codificador de vídeo 20 y las AU de búfer y sus respectivas DU en el CPB 94 para su extracción en los tiempos de eliminación determinados. Por ejemplo, el descodificador de vídeo 30 puede descodificar una duración entre la eliminación de CPB de una primera DU en una AU del CPB 94 y la eliminación de CPB de una segunda DU del CPB 94, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU.

[0199] El procedimiento incluye además determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración codificada (202). Por ejemplo, el descodificador de vídeo 30 puede determinar un tiempo de eliminación de CPB para la primera DU en base a la duración descodificada entre la eliminación de CPB de la primera DU en una AU y la eliminación de CPB de la segunda DU. El descodificador de vídeo 30 puede extraer la DU del CPB 94 aproximadamente en el tiempo de eliminación de CPB determinado.

[0200] En algunos ejemplos, el procedimiento de la FIG. 5 incluye además descodificar los parámetros de CPB a nivel de subimagen, en el que determinar el tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y los parámetros de CPB a nivel de subimagen. La descodificación de los parámetros de CPB a nivel de subimagen puede incluir descodificar un mensaje de información de mejora complementaria (SEI) de temporización de subimágenes que se asocia con la primera DU.

[0201] En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la codificación del mensaje SEI de subimagen incluye descodificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes. En algunos ejemplos, un indicador de nivel de secuencia se descodifica para determinar la presencia de los parámetros de CPB a nivel de subimagen en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes. Por ejemplo, respondiendo a la descodificación del indicador de nivel de secuencia y la determinación de que los parámetros de CPB a nivel de subimagen están presentes en un mensaje SEI de temporización de imágenes, el descodificador de vídeo 30 puede descodificar el mensaje SEI de temporización de imágenes para analizar los parámetros de CPB a nivel de subimagen. Del mismo modo, en respuesta a la descodificación del indicador de nivel de secuencia y la determinación de que los parámetros de CPB a nivel de subimagen están presentes en un mensaje SEI de temporización de subimágenes, el descodificador de vídeo 30 puede descodificar el mensaje SEI de temporización de subimágenes para analizar los parámetros de CPB a nivel de subimagen.

[0202] En algunos ejemplos, la determinación del tiempo de eliminación de la primera DU incluye determinar el tiempo de eliminación de la primera DU sin descodificar un retardo y una desviación de eliminación de CPB inicial. Cuando la AU tiene un Temporalld menor que o igual a 0, el procedimiento puede incluir además descodificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU.

[0203] Las unidades de descodificación descritas en el presente documento pueden ser cualquier unidad de descodificación, así como una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_Nv Cl47 o en el intervalo de UNSPEC48 a UNSPEC63. Por tanto, el descodificador de vídeo 30 puede descodificar la DU de acuerdo con las técnicas descritas en la presente divulgación, incluyendo las unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, Eo B_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0204] En otro ejemplo, el procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU. Por ejemplo, el descodificador de vídeo 30 deriva el tiempo de llegada de CPB o bien el tiempo de eliminación nominal de CPB para la AU tanto a niveles de unidad de acceso como a niveles de subimagen, independientemente de si un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0205] En algunos ejemplos, el procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU. El procedimiento puede incluir derivar los tiempos de eliminación de CPB para el nivel de AU cuando el elemento de sintaxis indica que la primera DU es una AU. La derivación de los tiempos de eliminación de CPB para el nivel de AU puede incluir derivar los tiempos de eliminación de CPB solo para el nivel de AU cuando el elemento de sintaxis indica que la DU es una AU.

[0206] El elemento de sintaxis puede ser SubPicCpbFlag, en el que cuando SubPicCpbFlag es igual a 0, una DU es una AU; de otro modo, una DU incluye una o más unidades de capa de abstracción de red (NAL) de capa codificación de vídeo (VCL) en una AU y las unidades de NAL distintas de VCL asociadas. En algunos ejemplos, el elemento de sintaxis incluye un primer elemento de sintaxis, y en el que derivar el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB comprende derivar el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB cuando un segundo elemento de sintaxis especifica que los parámetros de retardo de eliminación de CPB a nivel de subimagen están presentes y el CPB puede funcionar a nivel de unidad de acceso o a nivel de subimagen.

[0207] El segundo elemento de sintaxis puede ser sub_pic_cpb_params_present_flag, en el que cuando sub_pic_cpb_params_present_flag es igual a 1, están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB puede funcionar a nivel de unidad de acceso o nivel de subimagen, y cuando sub_pic_cpb_params_present_flag es igual a 0, no están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB funciona a nivel de unidad de acceso. El segundo elemento de sintaxis especifica que están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y que el CPB puede funcionar a nivel de AU o a nivel de subimagen, y el procedimiento puede incluir además determinar que la variable subPicParamsPresentFlag es igual a 0, derivar un tiempo de llegada inicial de la AU y un tiempo de llegada final de la AU, determinar que la variable subPicParamsPresentFlag es igual a 1, y derivar un tiempo de llegada inicial de la DU y un tiempo de llegada final de la DU para descodificar unidades dentro de la unidad de acceso.

[0208] Los tiempos de eliminación de CPB para el nivel de subimagen también se pueden derivar cuando el elemento de sintaxis indica que la DU no es una AU. La derivación de los tiempos de eliminación de CPB para el nivel de subimagen puede incluir derivar los tiempos de eliminación de CPB solo para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU. Por ejemplo, el descodificador de vídeo 30 puede derivar los tiempos de eliminación de CPB para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU.

[0209] La FIG. 6 es un diagrama de flujo que ilustra otro procedimiento para determinar un tiempo de eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación en una unidad de acceso en base al tiempo de eliminación de CPB para una segunda unidad de descodificación de la unidad de acceso de acuerdo con las técnicas descritas en la presente divulgación. Un codificador de vídeo puede realizar el procedimiento de la FIG. 6. El codificador de vídeo puede ser el codificador de vídeo 20 de la FIG. 1 o la FIG.

2, por ejemplo.

[0210] El procedimiento incluye determinar, para una AU que incluye una primera unidad de descodificación DU, un tiempo de eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU (210). La segunda DU puede ser inmediatamente posterior a la primera DU en la AU en orden de descodificación. De forma alternativa, la segunda DU puede ser una última DU en la AU en orden de descodificación. En algunos ejemplos, el codificador de vídeo 20 programa un tiempo de eliminación de CPB para la AU. En algunos ejemplos, los tiempos de eliminación de CPB se programan por un dispositivo externo al codificador de vídeo 20 y la programación se proporciona al codificador de vídeo 20.

[0211] El tiempo de eliminación de CPB para la AU puede ser el mismo que el tiempo de eliminación de CPB para la última DU en la AU. Por tanto, el codificador de vídeo 20 puede determinar el tiempo de eliminación de CPB de la segunda DU en base al tiempo de eliminación de CPB programado de la AU. En algunos ejemplos, la determinación del tiempo de eliminación de CPB de la segunda DU en base al tiempo de eliminación de CPB programado de la AU incluye determinar cuántas DU están incluidas en la AU y determinar un tiempo programado para cada CPB. Por ejemplo, el codificador de vídeo 20 puede determinar, para una AU que incluye una primera unidad de descodificación DU, un tiempo de eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU, de acuerdo con las técnicas descritas en el presente documento.

[0212] El procedimiento incluye además determinar una duración entre el tiempo de eliminación de CPB de la primera DU y el tiempo de eliminación de CPB determinado de la segunda DU (212). Por ejemplo, el codificador de vídeo 20 puede determinar la duración entre el tiempo de eliminación de CPB para la primera DU en base a un tiempo de eliminación de CPB programado de la AU y el número de DU en la AU. En algunos ejemplos, el codificador de vídeo 20 determina la duración en base a los tiempos de eliminación de CPB programados para cada DU en la AU.

[0213] El procedimiento incluye además codificar la duración determinada (214). El codificador de vídeo 20 puede codificar la duración determinada como un elemento de sintaxis, por ejemplo, en un conjunto de parámetros de CPB a nivel de subimagen. Por ejemplo, el procedimiento puede incluir además codificar los parámetros de CPB a nivel de subimagen, en el que la codificación de la duración determinada incluye codificar la duración determinada como uno o más parámetros de CPB a nivel de subimagen. La codificación de los parámetros de CPB a nivel de subimagen puede incluir codificar un mensaje de información de mejora complementaria (SEI) de temporización de subimágenes que se asocia con la primera DU. En un ejemplo, la codificación de la duración determinada como uno o más parámetros de CPB a nivel de subimagen comprende además codificar la duración determinada en el mensaje SEI de temporización de subimágenes.

[0214] En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la codificación del mensaje SEI de subimagen incluye codificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes. En algunos ejemplos, se codifica un indicador de nivel de secuencia para indicar la presencia de los parámetros de CPB a nivel de subimagen en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes. En algunos ejemplos, la determinación del tiempo de eliminación de la primera DU incluye determinar el tiempo de eliminación de la primera DU sin codificar un retardo y una desviación de eliminación de CPB inicial.

[0215] Cuando la AU tiene un Temporalld menor que o igual a 0, el procedimiento puede incluir además codificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU.

[0216] Las DU descritas en el presente documento pueden ser cualquier tipo de DU, así como una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63. El codificador de vídeo 20 puede codificar cualquier DU de acuerdo con las técnicas descritas en la presente divulgación, incluyendo las DU que son unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0217] En otro ejemplo, el procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0218] En algunos ejemplos, el procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU. El procedimiento puede incluir derivar los tiempos de eliminación de CPB para el nivel de AU cuando el elemento de sintaxis indica que la primera DU es una AU. La derivación de los tiempos de eliminación de CPB para el nivel de AU puede incluir derivar los tiempos de eliminación de CPB solo para el nivel de AU cuando el elemento de sintaxis indica que la DU es una AU.

[0219] El elemento de sintaxis puede ser SubPicCpbFlag, en el que cuando SubPicCpbFlag es igual a 0, una DU es una AU; de otro modo, una DU incluye una o más unidades de capa de abstracción de red (NAL) de capa codificación de vídeo (VCL) en una AU y las unidades de NAL distintas de VCL asociadas. En algunos ejemplos, el elemento de sintaxis incluye un primer elemento de sintaxis, y en el que derivar el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB comprende derivar el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB cuando un segundo elemento de sintaxis especifica que los parámetros de retardo de eliminación de CPB a nivel de subimagen están presentes y el CPB puede funcionar a nivel de unidad de acceso o a nivel de subimagen.

[0220] El segundo elemento de sintaxis puede ser sub_pic_cpb_params_present_flag, en el que cuando sub_pic_cpb_params_present_flag es igual a 1, están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB puede funcionar a nivel de unidad de acceso o nivel de subimagen, y cuando sub_pic_cpb_params_present_flag es igual a 0, no están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y el CPB funciona a nivel de unidad de acceso. El segundo elemento de sintaxis especifica que están presentes los parámetros de retardo de eliminación de CPB a nivel de subimagen y que el CPB puede funcionar a nivel de AU o a nivel de subimagen, y el procedimiento puede incluir además establecer la variable subPicParamsPresentFlag igual a 0, derivar un tiempo de llegada inicial de la AU y un tiempo de llegada final de la AU, establecer la variable subPicParamsPresentFlag igual a 1, y derivar un tiempo de llegada inicial de la DU y un tiempo de llegada final de la DU para descodificar unidades dentro de la unidad de acceso.

[0221] Los tiempos de eliminación de CPB para el nivel de subimagen también se pueden derivar cuando el elemento de sintaxis indica que la DU no es una AU. La derivación de los tiempos de eliminación de CPB para el nivel de subimagen puede incluir derivar los tiempos de eliminación de CPB solo para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU. Por ejemplo, el codificador de vídeo 20 puede derivar los tiempos de eliminación de CPB para el nivel de subimagen cuando el elemento de sintaxis indica que la DU no es una AU.

[0222] La FIG. 7 es un diagrama de flujo que ilustra un procedimiento para derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, al mensaje SEI de temporización de subimágenes de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de descodificación de vídeo. El dispositivo de descodificación de vídeo puede ser el descodificador de vídeo 30 de las FIGS. 1 y 3, por ejemplo.

[0223] El procedimiento incluye descodificar un mensaje SEI de temporización de subimágenes asociado con una primera unidad de descodificación de una unidad de acceso (300). Por ejemplo, el descodificador de vídeo 30 puede descodificar un flujo de bits que incluye datos codificados y los elementos de sintaxis correspondientes y el mensaje SEI de temporización de subimágenes asociado con una primera DU de una AU, de acuerdo con las técnicas descritas en el presente documento. El descodificador de vídeo 30 puede almacenar en búfer las AU y sus respectivas DU en el CPB 94 para su extracción en determinados tiempos de eliminación. Por ejemplo, el descodificador de vídeo 30 puede descodificar el mensaje SEI de temporización de subimágenes asociado con una primera DU de una AU.

[0224] En algunos ejemplos, el procedimiento incluye descodificar un indicador de nivel de secuencia para determinar la presencia de parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes o bien un mensaje SEI de temporización de imágenes asociado con la primera DU. El procedimiento puede incluir además descodificar los parámetros de CPB a nivel de subimagen, en el que la determinación del tiempo de eliminación de CPB de la primera DU se basa además, al menos en parte, en los parámetros de CPB a nivel de subimagen. En respuesta a la recepción de un flujo de bits codificado, el descodificador de vídeo 30 puede descodificar un indicador de nivel de secuencia y determinar a partir del valor del indicador de nivel de secuencia si se encuentran parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes o el mensaje SEI de temporización de imágenes. En base al valor del indicador de nivel de secuencia, el descodificador de vídeo 30 puede descodificar el mensaje SEI de temporización de subimágenes o el mensaje SEI de temporización de imágenes para descodificar los parámetros de CPB a nivel de subimagen.

[0225] En los ejemplos donde el indicador de nivel de secuencia indica que los parámetros de CPB a nivel de subimagen han de estar presentes en el mensaje SEI de temporización de subimágenes, la descodificación de los parámetros de CPB a nivel de subimagen puede incluir descodificar el mensaje SEI de temporización de subimágenes asociado con la primera DU. En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la descodificación del mensaje SEI de subimagen puede comprender además descodificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes.

[0226] El procedimiento incluye además descodificar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una segunda DU de la AU en orden de descodificación y la eliminación de CPB de la primera DU en el mensaje SEI de subimagen, en el que la duración está en el mensaje SEI de temporización de subimágenes (302). Por ejemplo, a partir de un flujo de bits recibido, el descodificador de vídeo 30 puede descodificar la duración entre la eliminación de búfer de imágenes codificadas (CPB) de una segunda DU de la AU en orden de descodificación y la eliminación de CPB de la primera DU en el mensaje SEI de subimagen.

[0227] El procedimiento también incluye derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, al mensaje SEI de temporización de subimágenes (304). El descodificador de vídeo 30 puede extraer la primera DU para su descodificación desde el CPB 94 en el tiempo de eliminación de CPB determinado.

[0228] En algunos ejemplos, la segunda DU es una última DU en la AU en orden de descodificación. La segunda DU puede ser inmediatamente posterior a la primera DU en la AU en orden de descodificación. En algunos ejemplos, la determinación del tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU sin codificar un retardo y una desviación de eliminación de CPB inicial.

[0229] La DU puede ser cualquier tipo de unidad de descodificación, incluyendo una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0230] Las técnicas descritas en el presente documento pueden proporcionar una determinación más a prueba de errores del tiempo de eliminación del búfer de imágenes codificadas. Además, las técnicas pueden promover la eficacia de señalización que reduce el ancho de banda, la sobrecarga de señalización e incrementa el tiempo de codificación, además de ser más a prueba de errores. Además, las técnicas descritas en la presente divulgación pueden permitir una escalabilidad temporal apropiada.

[0231] Dichas técnicas pueden incluir, por ejemplo, determinar un tiempo de eliminación de búfer de imágenes codificadas para una DU de una AU que es independiente de los tiempos de eliminación de cualquier otra unidad de acceso. Por ejemplo, los tiempos de eliminación de CPB para una DU de una AU se señalarán en base a una duración entre un tiempo de eliminación de CPB de una DU siguiente en un orden de descodificación en la AU o bien una duración entre el tiempo de eliminación de CPB de la última DU en la AU. Las técnicas también pueden incluir la señalización de un indicador de nivel de secuencia para controlar la presencia de parámetros de CPB de subimágenes en solo uno de los mensajes SEI de temporización de imágenes o en mensajes SEI de temporización de subimágenes de acuerdo con las técnicas descritas en el presente documento. Las técnicas también pueden incluir expandir una definición de una unidad de descodificación. Las técnicas adicionales proporcionan mensajes SEI en el período de almacenamiento en búfer de restricción y mensajes SEI en el punto de recuperación, de modo que no se puedan asociar con las AU con una variable, TemporalId, mayor que 0. Las técnicas también pueden incluir proporcionar un indicador para señalar si se derivan los tiempos de eliminación de CPB a un nivel de AU o un nivel de subimagen.

[0232] La FIG. 8 es un diagrama de flujo que ilustra otro procedimiento para derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, a la codificación de un mensaje SEI de temporización de subimágenes de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede ser el codificador de vídeo 20 de las FIGS. 1 y 2, por ejemplo.

[0233] El procedimiento incluye determinar la duración entre el tiempo de eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una unidad de acceso (AU) y el tiempo de eliminación de CPB de una segunda DU en la AU (310). La duración se puede determinar, por ejemplo, al restar un tiempo de eliminación de CPB programado para la primera DU de un tiempo de eliminación de CPB programado para la segunda DU.

[0234] El procedimiento incluye además codificar la duración en un mensaje de información de mejora complementaria (SEI) de temporización de subimágenes asociado con la AU (312). Por ejemplo, el codificador de vídeo 20 puede codificar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una segunda DU de la AU en orden de descodificación y la eliminación de CPB de la primera DU en el mensaje SEI de subimagen en un flujo de bits. Por ejemplo, el codificador de vídeo 20 puede codificar un flujo de bits que incluye datos codificados y elementos de sintaxis correspondientes, un mensaje SEI de temporización de subimágenes asociado con una primera DU de una AU, de acuerdo con las técnicas descritas en el presente documento.

[0235] En algunos ejemplos, el procedimiento de la FIG. 8 incluye codificar un indicador de nivel de secuencia para indicar la presencia de parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes o bien un mensaje SEI de temporización de imágenes asociado con la primera DU. El procedimiento puede incluir además codificar los parámetros de CPB a nivel de subimagen, en el que la determinación del tiempo de eliminación de CPB de la primera DU se basa además, al menos en parte, en los parámetros de CPB a nivel de subimagen. Por ejemplo, el codificador de vídeo 20 puede codificar un indicador de nivel de secuencia para indicar la presencia de parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes o bien un mensaje SEI de temporización de imágenes asociado con la primera DU en un flujo de bits. El codificador de vídeo 20 puede codificar además los parámetros de CPB a nivel de subimagen en el flujo de bits.

[0236] En los ejemplos donde el indicador de nivel de secuencia indica que los parámetros de CPB a nivel de subimagen han de estar presentes en el mensaje SEI de temporización de subimágenes, la codificación de los parámetros de CPB a nivel de subimagen puede incluir codificar el mensaje SEI de temporización de subimágenes asociado con la primera DU. En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la codificación del mensaje SEI de subimagen puede comprender además codificar la duración entre el tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes.

[0237] En algunos ejemplos, la segunda DU es una última DU en la AU en orden de descodificación. La segunda DU puede ser inmediatamente posterior a la primera DU en la AU en orden de descodificación. En algunos ejemplos, la determinación del tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU sin codificar un retardo y una desviación de eliminación de CPB inicial.

[0238] La DU puede ser cualquier tipo de unidad de descodificación, incluyendo una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0239] La FIG. 9 es un diagrama de flujo que ilustra un procedimiento para descodificar el indicador de nivel de secuencia para el parámetro de búfer de imágenes codificadas a nivel de subimagen de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de descodificación de vídeo. El dispositivo de descodificación de vídeo puede ser el descodificador de vídeo 30 de las FIGS. 1 y 3, por ejemplo.

[0240] El procedimiento incluye descodificar un indicador de nivel de secuencia para determinar la presencia de uno o más parámetros de CPB a nivel de subimagen para una DU de una AU en un mensaje SEI de temporización de imágenes o bien un mensaje SEI de temporización de subimágenes asociado con la DU (400). Por ejemplo, el descodificador de vídeo 30 descodifica un indicador de nivel de secuencia para determinar la presencia de uno o más parámetros de CPB a nivel de subimagen. El descodificador de vídeo 30 también descodifica el indicador de nivel de secuencia para determinar la ubicación del uno o más parámetros de CPB a nivel de subimagen. El indicador de nivel de secuencia puede ser sub_pic_cpb_params_present_flag. En algunos ejemplos, el uno o más parámetros de CPB a nivel de subimagen están presentes solo en uno del mensaje SEI de temporización de imágenes o el mensaje SEI de temporización de subimágenes.

[0241] El procedimiento puede incluir además descodificar el uno o más parámetros de CPB a nivel de subimagen del mensaje SEI de temporización de imágenes o el mensaje SEI de temporización de subimágenes en base al indicador de nivel de secuencia (402). Por ejemplo, en respuesta al indicador de nivel de secuencia que indica que están presentes uno o más parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de imágenes, el descodificador de vídeo 30 descodifica el mensaje SEI de temporización de imágenes para determinar el uno o más parámetros de CPB a nivel de subimagen. Del mismo modo, en respuesta al indicador de nivel de secuencia que indica que están presentes uno o más parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes, el descodificador de vídeo 30 descodifica el mensaje SEI de temporización de subimágenes para determinar el uno o más parámetros de CPB a nivel de subimagen.

[0242] El procedimiento puede incluir además determinar un tiempo de eliminación de CPB de la DU en base, al menos en parte, al uno o más parámetros de CPB a nivel de subimagen. En algunos ejemplos, la determinación del tiempo de eliminación de CPB de la DU comprende determinar el tiempo de eliminación de CPB de la DU sin descodificar un retardo y una desviación de eliminación de CPB inicial.

[0243] En un ejemplo donde el indicador de nivel de secuencia indica que están presentes los parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes, la descodificación de los parámetros de CPB a nivel de subimagen puede incluir descodificar el mensaje SEI de temporización de subimágenes asociado con la DU. En otro ejemplo, el procedimiento puede incluir derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU. Es decir, el descodificador de vídeo 30 puede derivar al menos uno del tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de unidad de acceso como a nivel de subimagen.

[0244] En otro ejemplo, la DU es una primera DU, y el procedimiento incluye además derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, a los parámetros de CPB a nivel de subimagen y descodificar una duración entre el tiempo de eliminación de CPB de una segunda DU de la AU en orden de descodificación y el tiempo de eliminación de CPB de la primera DU. El procedimiento puede incluir además descodificar datos de vídeo de la primera DU en base, al menos en parte, a los tiempos de eliminación de CPB. En algunos ejemplos, la segunda DU es una última DU en la AU en orden de descodificación o bien inmediatamente posterior a la primera DU en la AU en orden de descodificación.

[0245] La DU puede ser cualquier DU, incluyendo una unidad de NAL distinta de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV NVCL47 o en el intervalo de UNSPEC48 a UNSPEC12.

[0246] En los ejemplos donde la AU tiene un Temporalld igual a 0, el procedimiento puede incluir además descodificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU. Por ejemplo, el descodificador de vídeo 30 puede descodificar al menos uno del mensaje SEI en el período de almacenamiento en búfer o el mensaje SEI en el punto de recuperación asociado con la AU que tiene un valor de TemporalId igual a 0.

[0247] La FIG. 10 es un diagrama de flujo que ilustra un procedimiento para codificar el indicador de nivel de secuencia para el parámetro de búfer de imágenes codificadas a nivel de subimagen de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede ser el codificador de vídeo 20 de las FIGS. 1 y 2, por ejemplo.

[0248] El procedimiento incluye codificar uno o más parámetros de búfer de imágenes codificadas (CPB) a nivel de subimagen para una unidad de descodificación (DU) de una unidad de acceso (AU) en un mensaje SEI de temporización de imágenes o bien un mensaje SEI de temporización de subimágenes (410). El codificador de vídeo 20 puede codificar el mensaje SEI de temporización de imágenes en el uno o más parámetros de CPB a nivel de subimagen. De forma alternativa, el codificador de vídeo 20 puede codificar el mensaje SEI de temporización de subimágenes en el uno o más parámetros de CPB a nivel de subimagen.

[0249] El procedimiento incluye además codificar un indicador de nivel de secuencia para indicar la presencia de uno o más parámetros de CPB a nivel de subimagen para una DU de una AU en el mensaje SEI de temporización de imágenes o bien el mensaje SEI de temporización de subimágenes asociado con la DU (412). Por ejemplo, el codificador de vídeo 20 codifica un indicador de nivel de secuencia para indicar la presencia y ubicación de uno o más parámetros de CPB a nivel de subimagen. El indicador de nivel de secuencia puede ser sub_pic_cpb_params_present_flag. En algunos ejemplos, el codificador de vídeo 20 codifica el uno o más parámetros de CPB a nivel de subimagen en solo uno del mensaje SEI de temporización de imágenes o el mensaje SEI de temporización de subimágenes.

[0250] El procedimiento puede incluir además determinar un tiempo de eliminación de CPB de la DU en base, al menos en parte, al uno o más parámetros de CPB a nivel de subimagen. En algunos ejemplos, la determinación del tiempo de eliminación de CPB de la DU comprende determinar el tiempo de eliminación de CPB de la DU sin codificar un retardo y una desviación de eliminación de CPB inicial.

[0251] En un ejemplo, la codificación del uno o más parámetros de CPB a nivel de subimagen comprende además codificar el uno o más parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes asociado con la DU. En un ejemplo de este tipo, el codificador de vídeo 20 codifica el indicador de nivel de secuencia para indicar que están presentes los parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de subimágenes. En otro ejemplo, la codificación del uno o más parámetros de CPB a nivel de subimagen comprende además codificar el uno o más parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de imágenes asociado con la DU. En ese ejemplo, el codificador de vídeo 20 codifica el indicador de nivel de secuencia para indicar que están presentes los parámetros de CPB a nivel de subimagen en el mensaje SEI de temporización de imágenes.

[0252] En otro ejemplo, la DU es una primera DU, y el procedimiento incluye además derivar un tiempo de eliminación de CPB de la primera DU en base, al menos en parte, a los parámetros de CPB a nivel de subimagen y codificar una duración entre el tiempo de eliminación de CPB de una segunda DU de la AU en orden de descodificación y el tiempo de eliminación de CPB de la primera DU. El procedimiento puede incluir además codificar datos de vídeo de la primera DU en base, al menos en parte, a los tiempos de eliminación de CPB. En algunos ejemplos, la segunda DU es una última DU en la AU en orden de descodificación o bien inmediatamente posterior a la primera DU en la AU en orden de descodificación.

[0253] La DU puede ser cualquier DU, incluyendo una unidad de NAL distinta de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC12.

[0254] En los ejemplos donde la AU tiene un Temporalld igual a 0, el procedimiento puede incluir además codificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU. Por ejemplo, el codificador de vídeo 20 puede codificar al menos uno del mensaje SEI en el período de almacenamiento en búfer o el mensaje SEI en el punto de recuperación asociado con la AU que tiene un valor de TemporalId igual a 0.

[0255] La FIG. 11 es un diagrama de flujo que ilustra un procedimiento para descodificar una DU que tiene una definición expandida de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de descodificación de vídeo. El dispositivo de descodificación de vídeo puede ser el descodificador de vídeo 30 de las FIGS. 1 y 3, por ejemplo.

[0256] El procedimiento incluye descodificar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una unidad de acceso (AU) y la eliminación de CPB de una segunda DU, en el que la primera DU comprende una capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, Eo B_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63 (500). Es decir, el descodificador de vídeo 30 puede descodificar las DU que son una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL) con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV _NVCL44 a RSV NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63, además de otros tipos de DU definidos en HEVC WD8.

[0257] En algunos ejemplos, la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. La segunda DU puede ser inmediatamente posterior a la primera DU en la AU en orden de descodificación. En otros ejemplos, la segunda DU es una última DU en la AU en orden de descodificación.

[0258] El procedimiento también incluye determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada (502). El procedimiento incluye además descodificar datos de vídeo de la primera DU en base, al menos en parte, al tiempo de eliminación (504). Por ejemplo, el descodificador de vídeo 30 determina un tiempo de eliminación de la primera DU en base, en parte, a la duración descodificada y a continuación descodifica los datos de vídeo de la primera DU en base al tiempo de eliminación.

[0259] En un ejemplo, el procedimiento puede incluir además descodificar uno o más parámetros de CPB a nivel de subimagen, en el que la determinación del tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y los parámetros de CPB a nivel de subimagen. La descodificación del uno o más parámetros de CPB a nivel de subimagen puede incluir además descodificar un mensaje de información de mejora complementaria (SEI) de temporización de subimágenes que se asocia con la primera DU.

[0260] En otro ejemplo donde la segunda DU es una última DU en la AU en orden de descodificación, la descodificación del mensaje SEI de subimagen incluye descodificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes. En algunos ejemplos, el descodificador de vídeo 30 descodifica un indicador de nivel de secuencia para determinar la presencia de los parámetros de CPB a nivel de subimagen, en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes.

[0261] En otro ejemplo, cuando la AU tiene un TemporalId igual a 0, el descodificador de vídeo 30 puede descodificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU. El procedimiento también puede incluir derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de la unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0262] La FIG. 12 es un diagrama de flujo que ilustra un procedimiento para codificar una DU que tiene una definición expandida de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede ser el codificador de vídeo 20 de las FIGS. 1 y 2, por ejemplo.

[0263] El procedimiento incluye determinar, para una AU que incluye una primera DU, un tiempo de eliminación de CPB de una segunda DU, en el que la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU, y en el que la primera DU comprende una unidad de capa de abstracción de red (NAL) distinta de una capa de codificación de vídeo (VCL), con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63 (510). Es decir, el codificador de vídeo 20 puede codificar las DU que son unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63, además de otros tipos de DU definidos en HEVC WD8. La segunda DU puede ser posterior, incluyendo inmediatamente posterior, a la primera DU en orden de descodificación y en la misma AU que la primera DU. En otros ejemplos, la segunda DU es una última DU en la AU en orden de descodificación.

[0264] El procedimiento también incluye determinar una duración entre el tiempo de eliminación de CPB de la primera DU y el tiempo de eliminación de CPB determinado de la segunda DU (512). La determinación de la duración entre el tiempo de eliminación de CPB de la primera DU y el tiempo de eliminación de CPB determinado de la segunda DU se puede basar en un tiempo de eliminación de CPB programado de la AU. El procedimiento incluye además codificar la duración determinada (514). Por ejemplo, el codificador de vídeo 20 determina una duración de tiempo entre la eliminación de CPB de la primera DU y una segunda DU y a continuación codifica la duración determinada como un elemento de sintaxis.

[0265] En un ejemplo, el procedimiento puede incluir además codificar uno o más parámetros de CPB a nivel de subimagen, en el que la determinación de la duración determinada de la primera DU comprende determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y los parámetros de CPB a nivel de subimagen. La codificación del uno o más parámetros de CPB a nivel de subimagen puede incluir además codificar un mensaje SEI de temporización de subimágenes que se asocia con la primera DU.

[0266] En otro ejemplo, donde la segunda DU es una última DU en la AU en orden de descodificación, la codificación del mensaje SEI de subimagen incluye codificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes. En algunos ejemplos, el codificador de vídeo 20 codifica un indicador de nivel de secuencia para indicar la presencia de los parámetros de CPB a nivel de subimagen en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes.

[0267] En otro ejemplo, cuando la AU tiene un TemporalId igual a 0, el codificador de vídeo 20 puede codificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU. El procedimiento también puede incluir derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de la unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0268] La FIG. 13 es un diagrama de flujo que ilustra un procedimiento para descodificar el período de almacenamiento en búfer y los mensajes SEI en el punto de recuperación de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de descodificación de vídeo. El dispositivo de descodificación de vídeo puede ser el descodificador de vídeo 30 de las FIGS. 1 y 3, por ejemplo.

[0269] El procedimiento incluye descodificar un mensaje SEI en el período de almacenamiento en búfer asociado con una AU (530). La AU tiene un temporalId igual a o menor que 0. Es decir, el mensaje SEI en el período de almacenamiento en búfer se restringe de modo que no se puede asociar con una AU que tiene un temporalId mayor que 0.

[0270] El procedimiento incluye además descodificar una duración entre la eliminación de CPB de una primera DU en la AU y la eliminación de CPB de una segunda DU del mensaje SEI en el período de almacenamiento en búfer (532). La segunda DU puede estar en la misma AU que la primera DU. La segunda DU puede ser posterior, incluyendo inmediatamente posterior, a la primera DU en orden de descodificación. En otros ejemplos, la segunda DU puede ser la última DU en orden de descodificación en la AU. Las DU pueden ser cualquier tipo de DU aceptada en HEVC WD8 y, además, puede ser una unidad de NAL de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0271] El procedimiento puede incluir además determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada (534). En algunos ejemplos, el descodificador de vídeo 30 puede descodificar uno o más parámetros de CPB a nivel de subimagen. La determinación del tiempo de eliminación de la primera DU puede incluir además determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y los parámetros de CPB a nivel de subimagen. La descodificación del uno o más parámetros de CPB a nivel de subimagen puede incluir además descodificar un mensaje SEI de temporización de subimágenes que se asocia con la primera DU.

[0272] El procedimiento puede incluir además descodificar datos de vídeo de la primera DU en base, al menos en parte, al tiempo de eliminación (536). En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la descodificación del mensaje SEI de subimagen incluye además descodificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes.

[0273] El procedimiento puede incluir además descodificar un indicador de nivel de secuencia para determinar la presencia de los parámetros de CPB a nivel de subimagen, en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes. El procedimiento también puede incluir derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de la unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0274] La FIG. 14 es un diagrama de flujo que ilustra un procedimiento para codificar mensajes SEI en el período de almacenamiento en búfer de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede ser el codificador de vídeo 20 de las FIGS. 1 y 2, por ejemplo.

[0275] El procedimiento incluye codificar un mensaje de información de mejora complementaria (SEI) en el período de almacenamiento en búfer asociado con una unidad de acceso (AU), en el que la duración se codifica dentro de al menos uno del mensaje SEI en el período de almacenamiento en búfer o el mensaje SEI en el punto de recuperación (540). Debido a que la AU tiene un temporalId igual a o menor que 0, el mensaje SEI en el período de almacenamiento en búfer se restringe de modo que no se puede asociar con una AU que tiene un temporalId mayor que 0.

[0276] El procedimiento también puede incluir codificar una duración entre el tiempo de eliminación de CPB de una primera DU en la AU y el tiempo de eliminación de CPB de una segunda DU del mensaje SEI en el período de almacenamiento en búfer, en el que la AU tiene un temporalId igual a 0 (542). El procedimiento puede incluir además determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada (544). Además, el procedimiento puede incluir codificar datos de vídeo de la primera DU (546).

[0277] El procedimiento puede incluir, además, determinar una duración entre la eliminación de búfer de imágenes codificadas (CPB) de una primera unidad de descodificación (DU) en una unidad de acceso (AU) y la eliminación de CPB de una segunda DU en la AU, en la que la AU tiene un TemporalId igual a 0. La segunda DU puede estar en la misma AU que la primera DU. La segunda DU puede ser posterior, incluyendo inmediatamente posterior, a la primera DU en orden de descodificación. En otros ejemplos, la segunda DU puede ser la última DU en orden de descodificación en la AU. Las DU pueden ser cualquier tipo de DU aceptada en HEVC WD8 y, además, puede ser una unidad de NAL de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0278] En un ejemplo, la determinación de la duración entre la eliminación de CPB de la primera DU puede incluir determinar un tiempo de eliminación de la primera y la segunda DU. El tiempo de eliminación de la primera DU se puede restar del tiempo de eliminación de la segunda DU para determinar la duración.

[0279] En algunos ejemplos, el codificador de vídeo 20 puede codificar uno o más parámetros de CPB a nivel de subimagen. La determinación del tiempo de eliminación de la primera DU puede incluir además determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración codificada y los parámetros de CPB a nivel de subimagen. La codificación del uno o más parámetros de CPB a nivel de subimagen puede incluir además codificar un mensaje SEI de temporización de subimágenes que se asocia con la primera DU.

[0280] El procedimiento puede incluir además codificar datos de vídeo de la primera DU. La codificación de los datos de vídeo de la primera DU se puede basar, al menos en parte, en el tiempo de eliminación. En los ejemplos donde la segunda DU es una última DU en la AU en orden de descodificación, la codificación del mensaje SEI de subimagen incluye además codificar la duración entre un tiempo de eliminación de la última DU y el tiempo de eliminación de la primera DU en el mensaje SEI de temporización de subimágenes.

[0281] El procedimiento puede incluir además codificar un indicador de nivel de secuencia para indicar la presencia de los parámetros de CPB a nivel de subimagen, en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes. El procedimiento también puede incluir derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para la AU tanto a nivel de la unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que define si la primera DU es la AU.

[0282] La FIG. 15 es un diagrama de flujo que ilustra un procedimiento para descodificar los tiempos de eliminación nominales y de llegada de búfer de imágenes codificadas de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de descodificación de vídeo. El dispositivo de codificación de vídeo puede ser el descodificador de vídeo 30 de las FIGS. 1 y 3, por ejemplo.

[0283] El procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para una AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que defina si una DU es la AU completa. La DU se puede asociar con la AU (560). El procedimiento puede incluir el descodificador de vídeo 30 que determina un valor del elemento de sintaxis. El elemento de sintaxis puede tener la forma de SubPicCpbFlag. En respuesta al elemento de sintaxis que tiene un valor verdadero (por ejemplo, SubPicCpbFlag es 1), el procedimiento puede incluir derivar un tiempo de eliminación de CPB solo para el nivel de AU. En respuesta al elemento de sintaxis que tiene un valor falso (por ejemplo, SubPicCpbFlag es 0), se deriva un tiempo de eliminación de CPB solo para el nivel de subimagen. En algunos ejemplos, al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB se derivan solo cuando un indicador de sintaxis que indica que están presentes los parámetros de CPB tiene un valor verdadero.

[0284] El procedimiento puede incluir además determinar un tiempo de eliminación de la AU en base, al menos en parte, a uno del tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB (562). El procedimiento incluye además descodificar datos de vídeo de la AU en base, al menos en parte, al tiempo de eliminación (564).

[0285] El procedimiento puede incluir además descodificar una duración entre la eliminación de CPB de una primera DU en la AU y la eliminación de CPB de una segunda DU, determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada, y descodificar datos de vídeo de la primera DU en base, al menos en parte, a al menos uno del tiempo de eliminación, el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB. En algunos ejemplos, la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El procedimiento puede incluir además descodificar uno o más parámetros de CPB a nivel de subimagen, en el que la determinación del tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración descodificada y los parámetros de CPB a nivel de subimagen.

[0286] En algunos ejemplos, el procedimiento también incluye descodificar un indicador de nivel de secuencia para determinar la presencia de parámetros de CPB a nivel de subimagen, en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes.

[0287] Las DU pueden ser cualquier tipo de DU descrito en HEVC WD8, incluyendo las unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV_NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0288] En otro ejemplo donde la AU tiene un Temporalld no mayor que 0, el procedimiento incluye además descodificar al menos uno de un mensaje de información de mejora complementaria (SEI) en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU.

[0289] La FIG. 16 es un diagrama de flujo que ilustra un procedimiento para codificar los tiempos de eliminación nominales y de llegada de búfer de imágenes codificadas de acuerdo con las técnicas descritas en la presente divulgación. El procedimiento se puede realizar por un dispositivo de codificación de vídeo. El dispositivo de codificación de vídeo puede ser el codificador de vídeo 20 de las FIGS. 1 y 2, por ejemplo.

[0290] El procedimiento incluye derivar al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB para una AU tanto a nivel de unidad de acceso como a nivel de subimagen, independientemente de un valor de un elemento de sintaxis que defina si una DU es la AU completa. La DU se puede asociar con la AU (570). El procedimiento puede incluir un codificador de vídeo 20 que determina un valor del elemento de sintaxis. El elemento de sintaxis puede tener la forma de SubPicCpbFlag. En respuesta a que el elemento de sintaxis tiene un valor verdadero (por ejemplo, SubPicCpbFlag es 1), el codificador de vídeo 20 puede derivar un tiempo de eliminación de CPB solo para el nivel de AU. En respuesta a que el elemento de sintaxis tiene un valor falso (por ejemplo, SubPicCpbFlag es 0), el codificador de vídeo 20 puede derivar un tiempo de eliminación de CPB solo para el nivel de subimagen. En algunos ejemplos, al menos uno de un tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB se derivan solo cuando un indicador de sintaxis que indica que están presentes los parámetros de CPB tiene un valor verdadero.

[0291] El procedimiento puede incluir además determinar un tiempo de eliminación de la AU en base, al menos en parte, a uno del tiempo de llegada de CPB y un tiempo de eliminación nominal de CPB (572). El procedimiento incluye además codificar el tiempo de eliminación determinado (574). En algunos ejemplos, la codificación del tiempo de eliminación puede incluir codificar una duración entre la eliminación de CPB de una primera DU en la AU y la eliminación de CPB de una segunda DU, determinar un tiempo de eliminación de la primera DU en base, al menos en parte, a la duración codificada, y codificar los datos de vídeo de la primera DU en base, al menos en parte, a al menos uno del tiempo de eliminación, el tiempo de llegada de CPB y el tiempo de eliminación nominal de CPB. En algunos ejemplos, la segunda DU es posterior a la primera DU en orden de descodificación y en la misma AU que la primera DU. El procedimiento puede incluir además codificar uno o más parámetros de CPB a nivel de subimagen, en el que la determinación del tiempo de eliminación de la primera DU comprende determinar el tiempo de eliminación de la primera DU en base, al menos en parte, a la duración codificada y los parámetros de CPB a nivel de subimagen. El procedimiento puede incluir además codificar una duración entre la eliminación de CPB de una primera DU en la AU y la eliminación de CPB de una segunda DU, en el que codificar el tiempo de eliminación comprende además codificar la duración.

[0292] En algunos ejemplos, el procedimiento también incluye codificar un indicador de nivel de secuencia para indicar la presencia de parámetros de CPB a nivel de subimagen en mensajes SEI de temporización de imágenes o bien en mensajes SEI de temporización de subimágenes.

[0293] Las DU pueden ser cualquier tipo de DU descrito en HEVC WD8, incluyendo las unidades de NAL distintas de VCL con nal_unit_type igual a UNSPEC0, EOS_NUT, EOB_NUT, en el intervalo de RSV NVCL44 a RSV_NVCL47 o en el intervalo de UNSPEC48 a UNSPEC63.

[0294] En otro ejemplo donde la AU tiene un Temporalld no mayor que 0, el procedimiento incluye además codificar al menos uno de un mensaje SEI en el período de almacenamiento en búfer o un mensaje SEI en el punto de recuperación asociado con la AU.

[0295] En uno o más ejemplos, las funciones descritas se pueden implementar en hardware, software, firmware o en cualquier combinación de los mismos. Si se implementan en software, las funciones se pueden almacenar en o transmitir sobre un medio legible por ordenador como una o más instrucciones o código, y ejecutar por una unidad de procesamiento basada en hardware. Los medios legibles por ordenador pueden incluir medios de almacenamiento legibles por ordenador que correspondan a un medio tangible, tales como medios de almacenamiento de datos, o medios de comunicación que incluyan cualquier medio que facilite la transferencia de un programa informático de un lugar a otro, por ejemplo, de acuerdo con un protocolo de comunicación. De esta manera, los medios legibles por ordenador pueden corresponder, en general, a (1) medios de almacenamiento tangibles legibles por ordenador que sean no transitorios o a (2) un medio de comunicación tal como una señal o una onda portadora. Los medios de almacenamiento de datos pueden ser cualquier medio disponible al que se pueda acceder por uno o más ordenadores o uno o más procesadores para recuperar instrucciones, código y/o estructuras de datos para la implementación de las técnicas descritas en la presente divulgación. Un producto de programa informático puede incluir un medio legible por ordenador.

[0296] A modo de ejemplo, y no de limitación, dichos medios de almacenamiento legibles por ordenador pueden comprender RAM, ROM, EEPROM, CD-ROM u otro almacenamiento en disco óptico, almacenamiento en disco magnético u otros dispositivos de almacenamiento magnético, memoria flash o cualquier otro medio que se pueda usar para almacenar el código de programa deseado en forma de instrucciones o estructuras de datos y al que se pueda acceder por un ordenador. Además, cualquier conexión recibe apropiadamente la denominación de medio legible por ordenador. Por ejemplo, si las instrucciones se transmiten desde un sitio web, un servidor u otra fuente remota usando un cable coaxial, un cable de fibra óptica, un par trenzado, una línea de abonado digital (DSL) o tecnologías inalámbricas tales como infrarrojos, radio y microondas, entonces el cable coaxial, el cable de fibra óptica, el par trenzado, la DSL o las tecnologías inalámbricas tales como infrarrojos, radio y microondas están incluidos en la definición de medio. Sin embargo, se debe entender que los medios de almacenamiento legibles por ordenador y los medios de almacenamiento de datos no incluyen conexiones, ondas portadoras, señales ni otros medios transitorios, sino que, en su lugar, están dirigidos a medios de almacenamiento tangibles no transitorios. Los discos, como se usa en el presente documento, incluyen disco compacto (CD), disco láser, disco óptico, disco versátil digital (DVD), disco flexible y disco Blu-ray, donde unos discos reproducen normalmente los datos magnéticamente, mientras que otros discos reproducen los datos ópticamente con láseres. Las combinaciones de los anteriores también se deben incluir dentro del alcance de los medios legibles por ordenador.

[0297] Las instrucciones se pueden ejecutar por uno o más procesadores, tales como uno o más procesadores de señales digitales (DSP), microprocesadores de propósito general, circuitos integrados específicos de la aplicación (ASIC), matrices lógicas programables por campo (FPGA) u otros circuitos lógicos integrados o discretos equivalentes. En consecuencia, el término "procesador", como se usa en el presente documento, se puede referir a cualquiera de las estructuras anteriores o a cualquier otra estructura adecuada para la implementación de las técnicas descritas en el presente documento. Además, en algunos aspectos, la funcionalidad descrita en el presente documento se puede proporcionar dentro de módulos de hardware y/o de software dedicados configurados para la codificación y la descodificación, o incorporarse en un códec combinado. Además, las técnicas se podrían implementar por completo en uno o más circuitos o elementos lógicos.

[0298] Las técnicas de la presente divulgación se pueden implementar en una amplia variedad de dispositivos o aparatos, incluyendo un teléfono inalámbrico, un circuito integrado (IC) o un conjunto de IC (por ejemplo, un conjunto de chips). En la presente divulgación se describen diversos componentes, módulos o unidades para destacar aspectos funcionales de dispositivos configurados para realizar las técnicas divulgadas, pero no se requiere necesariamente su realización por diferentes unidades de hardware. En su lugar, como se describe anteriormente, diversas unidades se pueden combinar en una unidad de hardware de códec o proporcionar por un grupo de unidades de hardware interoperativas, que incluya uno o más procesadores como se describe anteriormente, junto con software y/o firmware adecuados.

Claims (4)

REIVINDICACIONES

1. Un procedimiento para descodificar datos de vídeo, comprendiendo los datos de vídeo al menos una unidad de acceso, AU (100, 102), comprendiendo la al menos una AU al menos dos unidades de descodificación, DU (112-1, 112-4), comprendiendo el procedimiento:

descodificar (400) un indicador de secuencia de nivel, especificando el indicador de nivel de secuencia igual a 1 que están presentes parámetros de retardo de eliminación de búfer de imágenes codificadas, CPB, a nivel de subimagen en mensajes de información de mejora complementaria, SEI, de temporización de imágenes y no está presente ningún mensaje SEI de temporización de subimágenes, especificando el indicador de nivel de secuencia igual a 0 que están presentes parámetros de retardo de eliminación de CPB a nivel de subimagen en mensajes SEI de temporización de subimágenes y los mensajes SEI de temporización de imágenes no incluyen los parámetros de retardo de eliminación de CPB a nivel de subimagen;

si el indicador de nivel de secuencia es igual a 1, descodificar (402) un parámetro de retardo de eliminación de CPB a nivel de subimagen para una DU actual en una AU actual de un mensaje SEI de temporización de imágenes asociado con la DU actual;

si el indicador de nivel de secuencia es igual a 0, descodificar (402) el parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual en la AU actual de un mensaje SEI de temporización de subimágenes asociado con la DU actual;

determinar, en base, al menos en parte, al parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual, un tiempo de eliminación de CPB de la DU actual; y

en el tiempo de eliminación de CPB determinado de la DU actual, descodificar los datos de vídeo asociados con la DU actual y eliminar la DU actual del CPB,

en el que el parámetro de retardo de eliminación de CPB a nivel de subimagen especifica la duración en tics de reloj de subimagen entre la eliminación del CPB de la última DU en orden de descodificación en la AU actual y la eliminación de la DU actual,

en el que, cuando la DU actual es la última DU en orden de descodificación en la AU actual, el valor del parámetro de retardo de eliminación de CPB a nivel de subimagen debe ser igual a 0.

2. Un dispositivo (14) para descodificar datos de vídeo, comprendiendo los datos de vídeo al menos una unidad de acceso, AU (100, 102), comprendiendo la al menos una AU al menos dos unidades de descodificación, DU (112-1, 112-4), comprendiendo el dispositivo:

medios para descodificar (400) un indicador de secuencia de nivel, especificando el indicador de nivel de secuencia igual a 1 que están presentes parámetros de retardo de eliminación de búfer de imágenes codificadas, CPB, a nivel de subimagen en mensajes de información de mejora complementaria, SEI, de temporización de imágenes y no está presente ningún mensaje SEI de temporización de subimágenes, especificando el indicador de nivel de secuencia igual a 0 que están presentes parámetros de retardo de eliminación de CPB a nivel de subimagen en mensajes SEI de temporización de subimágenes y los mensajes SEI de temporización de imágenes no incluyen los parámetros de retardo de eliminación de CPB a nivel de subimagen;

medios para, si el indicador de nivel de secuencia es igual a 1, descodificar (402) un parámetro de retardo de eliminación de CPB a nivel de subimagen para una DU actual en una AU actual de un mensaje SEI de temporización de imágenes asociado con la DU actual;

medios para, si el indicador de nivel de secuencia es igual a 0, descodificar (402) el parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual en la AU actual de un mensaje SEI de temporización de subimágenes asociado con la DU actual;

medios para determinar, en base, al menos en parte, al parámetro de retardo de eliminación de CPB a nivel de subimagen para la DU actual, un tiempo de eliminación de CPB de la DU actual; y

medios para, en el tiempo de eliminación de CPB determinado de la DU actual, descodificar los datos de vídeo asociados con la DU actual y eliminar la DU actual del CPB,

en el que el parámetro de retardo de eliminación de CPB a nivel de subimagen especifica la duración en tics de reloj de subimagen entre la eliminación del CPB de la última DU en orden de descodificación en la AU actual y la eliminación de la DU actual,

en el que, cuando la DU actual es la última DU en orden de descodificación en la AU actual, el valor del parámetro de retardo de eliminación de CPB a nivel de subimagen debe ser igual a 0.

3. El dispositivo de la reivindicación 2, en el que el dispositivo para descodificar datos de vídeo es un ordenador de mesa, un ordenador plegable, un ordenador de tableta, un descodificador, un equipo telefónico de mano, un televisor, una cámara, un dispositivo de visualización, un reproductor de medios digitales, una consola de videojuegos o un dispositivo de emisión en continuo de vídeo.

4. Un medio de almacenamiento legible por ordenador que tiene instrucciones almacenadas en el mismo que, cuando se ejecutan, hacen que un procesador lleve a cabo un procedimiento de acuerdo con la reivindicación 1.