ES2974493T3 - Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo - Google Patents

Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo Download PDF

Info

Publication number
ES2974493T3
ES2974493T3 ES22194037T ES22194037T ES2974493T3 ES 2974493 T3 ES2974493 T3 ES 2974493T3 ES 22194037 T ES22194037 T ES 22194037T ES 22194037 T ES22194037 T ES 22194037T ES 2974493 T3 ES2974493 T3 ES 2974493T3
Authority
ES
Spain
Prior art keywords
samples
cclm
block
current
chroma block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES22194037T
Other languages
English (en)
Inventor
Jangwon Choi
Jin Heo
Seunghwan Kim
Sunmi Yoo
Ling Li
Jungah Choi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Application granted granted Critical
Publication of ES2974493T3 publication Critical patent/ES2974493T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Communication Control (AREA)

Abstract

Un método de decodificación de vídeo realizado por un aparato de decodificación según la presente divulgación incluye derivar uno de una pluralidad de modo de predicción de modelo lineal de componentes cruzados (CCLM) como un modo de predicción CCLM del bloque de croma actual, derivar un número de muestra de muestras de croma vecinas. del bloque de croma actual basándose en el modo de predicción CCLM del bloque de croma actual, un tamaño del bloque de croma actual y un valor específico; derivar las muestras de croma vecinas del número de muestra, calcular los parámetros CCLM basándose en las muestras de croma vecinas y las muestras de luma vecinas muestreadas descendentemente, derivar muestras de predicción para el bloque de croma actual basándose en los parámetros CCLM y las muestras de luma muestreadas descendentemente y generar muestras reconstruidas para el bloque de croma actual basado en las muestras de predicción, donde el valor específico se deriva como 2. (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo
Antecedentes de la divulgación
Campo de la divulgación
La presente divulgación se refiere a una técnica de codificación de vídeo y, más particularmente, a un método y dispositivo de descodificación de vídeo basándose en predicción de CCLM en un sistema de codificación de vídeo. Técnica relacionada
Recientemente, la demanda de imágenes de alta resolución y alta calidad, tales como imágenes en HD (alta definición) e imágenes en UHD (ultra alta definición) ha ido aumentando en diversos campos. Como los datos de imagen tienen alta resolución y alta calidad, la cantidad de información o bits que se transmitirán aumenta en relación con los datos de imagen heredados. Por lo tanto, cuando los datos de imagen se transmiten usando un medio tal como una línea de banda ancha cableada/inalámbrica convencional o los datos de imagen se almacenan usando un medio de almacenamiento existente, se aumentan el coste de transmisión y el coste de almacenamiento de los mismos. Por consiguiente, existe una necesidad de una técnica de compresión de imagen altamente eficiente para transmitir, almacenar y reproducir de forma efectiva información de imágenes de alta resolución y alta calidad.
El documento US 2018/0077426 A1 divulga un método para descodificar datos de vídeo, que incluye recibir un bloque codificado de muestras de luma para un primer bloque de datos de vídeo, descodificar el bloque codificado de muestras de luma para crear muestras de luma reconstruidas, y predecir muestras de croma para el primer bloque de datos de vídeo usando las muestras de luma reconstruidas para el primer bloque de datos de vídeo y dos o más modelos de predicción lineal. En el documento "CE3-related: Reduced number of reference samples for CCLM parameter calcularon", 12a Reunión de JVET; 3-12 de octubre de 2018; Macao, se propone restringir el número máximo de pares de muestras de referencia, que se usan en la determinación de parámetros de CCLM, para reducir la complejidad requerida del método de CCLm .
Sumario
La presente divulgación proporciona un método y dispositivo para mejorar la eficiencia de codificación de imágenes. La presente divulgación también proporciona un método y dispositivo para mejorar la eficiencia de intra predicción. La presente divulgación también proporciona un método y dispositivo para mejorar la eficiencia de intra predicción basándose en un Modelo Lineal de Componentes Cruzadas (CCLM).
La presente divulgación también proporciona un método de codificación y de descodificación eficiente de la predicción de CCLM que incluye una pluralidad de modos de predicción de CCLM y un dispositivo para realizar el método de codificación y de descodificación.
La presente divulgación también proporciona un método y dispositivo para seleccionar una muestra vecina para inferir un parámetro de modelo lineal para una pluralidad de modos de predicción de CCLM.
La invención se define mediante las reivindicaciones independientes.
De acuerdo con la presente divulgación, se puede mejorar la eficiencia de compresión de imágenes/vídeo global. De acuerdo con la presente divulgación, se puede mejorar la eficiencia de la intra predicción.
De acuerdo con la presente divulgación, la eficiencia de codificación de imágenes se puede mejorar realizando una intra predicción basándose en CCLM.
De acuerdo con la presente divulgación, se puede mejorar la eficiencia de la intra predicción, que se basa en CCLM, incluyendo una pluralidad de modos de LM, es decir, un Modelo Lineal multidireccional (MDLM).
De acuerdo con la presente divulgación, el número de muestras vecinas seleccionadas para inferir un parámetro de modelo lineal para un Modelo Lineal multidireccional (MDLM) realizado en un bloque de croma que tiene un tamaño grande se limita a un número específico y, en consecuencia, se puede reducir la complejidad de intra predicción. La invención se divulga en las figuras 24 (extremo de codificación) y 26 (extremo de descodificación) y en los pasajes correspondientes de la descripción. Esta prevé explícitamente que el "valor específico" se establezca a un valor igual a 2 (se mencionan otros valores en la descripción y estos se han de entender como ejemplos/elementos de divulgación adicionales, no entrando dentro del alcance de las reivindicaciones, salvo como equivalentes). Además, la descripción no es coherente en el uso de las expresiones "realización" e "invención". Cuando se usan mientras se hace referencia a una materia objeto que no cae dentro del alcance de las reivindicaciones independientes, se ha de entender que tales enunciados significan "ejemplo" y "divulgación". Por último, la descripción presenta sistemáticamente cualquier característica como opcional (por ejemplo, usando cláusulas "puede"). Las características enumeradas en las reivindicaciones independientes se han de entender como esenciales, mientras que cualquier otra característica es, de hecho, opcional.
Breve descripción de los dibujos
La figura 1 ilustra brevemente un ejemplo de un dispositivo de codificación de vídeo/imágenes al que se pueden aplicar realizaciones de la presente divulgación.
La figura 2 es un diagrama esquemático que ilustra una configuración de un aparato de codificación de vídeo/imágenes al que se puede(n) aplicar la(s) realización(es) del presente documento.
La figura 3 es un diagrama esquemático que ilustra una configuración de un aparato de descodificación de vídeo/imágenes al que se puede(n) aplicar la(s) realización(es) del presente documento.
La figura 4 ilustra modos intradireccionales de 65 direcciones de predicción.
La figura 5 es un diagrama para describir un proceso de inferencia de un modo de intra predicción de un bloque de croma actual de acuerdo con una realización.
La figura 6 ilustra 2N muestras de referencia para un cálculo de parámetro para una predicción de CCLM que se ha descrito anteriormente.
La figura 7 ilustra el modo de LM_A (Linear Model_Above, Modelo Lineal_Encima) y el modo de LM_L (Linear Model_Left, Modelo Lineal_Izquierda).
Las figuras 8a y 8b son diagramas para describir un procedimiento para realizar una predicción de CCLM para un bloque de croma actual de acuerdo con una realización.
Las figuras 9a y 9b son diagramas para describir un procedimiento para realizar una predicción de CCLM para un bloque de croma actual de acuerdo con una realización.
Las figuras 10a y 10b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente.
Las figuras 11a y 11b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente.
Las figuras 12a y 12b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente.
Las figuras 13a y 13b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 4 de la presente realización que se ha descrito anteriormente.
Las figuras 14a y 14b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente.
Las figuras 15a y 15b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente.
Las figuras 16a y 16b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente.
La figura 17 ilustra un ejemplo de selección de una muestra de referencia vecina de un bloque de croma.
Las figuras 18a a 18c ilustran muestras de referencia vecinas inferidas a través del submuestreo existente y muestras de referencia vecinas inferidas a través de un submuestreo de acuerdo con la presente realización. La figura 19 ilustra un ejemplo de ejecución de una predicción de CCLM usando un submuestreo usando la Ecuación 6 que se ha descrito anteriormente.
Las figuras 20a y 20b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente.
Las figuras 21a y 21b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente.
Las figuras 22a y 22b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente.
La figura 23 es un diagrama para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 4 de la presente realización que se ha descrito anteriormente.
La figura 24 ilustra esquemáticamente un método de codificación de vídeo por el aparato de codificación de acuerdo con la presente divulgación.
La figura 25 ilustra esquemáticamente el aparato de codificación que realiza el método de codificación de imágenes de acuerdo con la presente divulgación.
La figura 26 ilustra esquemáticamente un método de descodificación de vídeo por el aparato de descodificación de acuerdo con la presente divulgación.
La figura 27 ilustra esquemáticamente un aparato de descodificación para realizar un método de descodificación de vídeo de acuerdo con la presente divulgación.
La figura 28 ilustra un diagrama estructural de un sistema de envío por flujo continuo de contenidos al que se aplica la presente divulgación.
Descripción de realizaciones ilustrativas
La presente divulgación puede modificarse de diversas formas y en los dibujos se describirán e ilustrarán realizaciones específicas de la misma. Sin embargo, las realizaciones no pretenden limitar la divulgación. Los términos usados en la siguiente descripción se usan para describir solamente realizaciones específicas, pero no pretenden limitar la divulgación. Una expresión de un número singular incluye una expresión del número plural, siempre que se lea claramente de manera diferente. Los términos tales como "incluir" y "tener" pretenden indicar que existen características, números, etapas, operaciones, elementos, componentes o combinaciones de los mismos usados en la siguiente descripción y, por lo tanto, se debería entender que no se excluye la posibilidad de existencia o adición de una o más características, números, etapas, operaciones, elementos, componentes o combinaciones de los mismos diferentes.
Por otro lado, los elementos de los dibujos descritos en la divulgación se dibujan independientemente con el fin de facilitar la explicación de diferentes funciones específicas y no significan que los elementos se materialicen mediante hardware independiente o software independiente. Por ejemplo, dos o más elementos de los elementos pueden combinarse para formar un único elemento, o un elemento puede dividirse en varios elementos. Las realizaciones en las que los elementos se combinan y/o dividen pertenecen a la divulgación sin apartarse del concepto de la divulgación.
En lo sucesivo en el presente documento, se describirán con detalle realizaciones de la presente divulgación con referencia a los dibujos adjuntos. Además, se usan números de referencia semejantes para indicar elementos semejantes en todos los dibujos y se omitirán las mismas descripciones acerca de los elementos semejantes.
La figura 1 ilustra brevemente un ejemplo de un dispositivo de codificación de vídeo/imágenes al que se pueden aplicar realizaciones de la presente divulgación.
Haciendo referencia a la figura 1, un sistema de codificación de vídeo/imágenes puede incluir un primer dispositivo (dispositivo fuente) y un segundo dispositivo (dispositivo receptor). El dispositivo fuente puede entregar información o datos de vídeo/imagen codificados en forma de un archivo o de envío por flujo continuo al dispositivo receptor a través de una red o un medio de almacenamiento digital.
El dispositivo fuente puede incluir una fuente de vídeo, un aparato de codificación y un transmisor. El dispositivo de recepción puede incluir un receptor, un aparato de descodificación y un representador. El aparato de codificación puede denominarse aparato de codificación de vídeo/imágenes, y el aparato de descodificación puede denominarse aparato de descodificación de vídeo/imágenes. El transmisor puede estar incluido en el aparato de codificación. El receptor puede estar incluido en el aparato de descodificación. El representador puede incluir un visualizador, y el visualizador se puede configurar como un dispositivo separado o un componente externo.
La fuente de vídeo puede adquirir vídeo/imagen a través de un proceso de captura, síntesis o generación del vídeo/imagen. La fuente de vídeo puede incluir un dispositivo de captura de vídeo/imagen y/o un dispositivo de generación de vídeo/imagen. El dispositivo de captura de vídeo/imagen puede incluir, por ejemplo, una o más cámaras, archivos de vídeo/imagen que incluyen vídeo/imágenes capturadas previamente y similares. El dispositivo de generación de vídeo/imagen puede incluir, por ejemplo, ordenadores, tabletas y teléfonos inteligentes, y puede (electrónicamente) generar vídeo/imágenes. Por ejemplo, se puede generar una imagen/vídeo virtual a través de un ordenador o similar. En este caso, el proceso de captura de vídeo/imagen puede remplazase por un proceso de generación de datos relacionados.
El aparato de codificación puede codificar vídeo/imagen de entrada. El aparato de codificación puede realizar una serie de procedimientos tales como predicción, transformada y cuantificación para la eficiencia de compresión y codificación. Los datos codificados (información de vídeo/imagen codificada) pueden emitirse en forma de un flujo de bits.
El transmisor puede transmitir la imagen codificada/información de imagen o la salida de datos en forma de flujo de bits al receptor del dispositivo de recepción a través de un medio de almacenamiento digital o una red en forma de archivo o envío por flujo continuo. El medio de almacenamiento digital puede incluir diversos medios de almacenamiento, tales como USB, SD, CD, DVD, Blu-ray, HDD, SSD y similares. El transmisor puede incluir un elemento para generar un archivo de medios a través de un formato de archivo predeterminado y puede incluir un elemento para la transmisión a través de una red de radiodifusión/comunicación. El receptor puede recibir/extraer el flujo de bits y transmitir el flujo de bits recibido al aparato de descodificación.
El aparato de descodificación puede descodificar el vídeo/imagen realizando una serie de procedimientos tales como descuantificación, transformada inversa y predicción correspondientes a la operación del aparato de codificación.
El representador puede representar el vídeo/imagen descodificado. El vídeo/imagen representado se puede visualizar a través del visualizador.
Este documento se refiere a la codificación de vídeo/imágenes. Por ejemplo, los métodos/realizaciones divulgados en este documento se pueden aplicar a un método divulgado en la codificación de vídeo versátil (VVC), la norma EVC (codificación de vídeo esencial), la norma AOMedia Video 1 (AV1), la norma de segunda generación de codificación de audio vídeo (AVS2) o la norma de codificación de vídeo/imágenes de la próxima generación (por ejemplo, H.267 o H.268, etc.).
Este documento presenta diversas realizaciones de codificación de vídeo/imágenes, y las realizaciones se pueden realizar en combinación entre sí a menos que se mencione lo contrario.
En este documento, el vídeo puede referirse a una serie de imágenes a lo largo del tiempo. Una imagen generalmente se refiere a una unidad que representa una imagen en una zona de tiempo específica, y un corte/pieza es una unidad que constituye una parte de una imagen en codificación. El corte/pieza puede incluir una o más unidades de árbol de codificación (CTU). Una imagen puede consistir en uno o más cortes/piezas. Una imagen puede consistir en uno o más grupos de piezas. Un grupo de piezas puede incluir una o más piezas. Un ladrillo puede representar una región rectangular de filas de CTU dentro de una pieza en una imagen. Una pieza se puede dividir en múltiples bloques, cada uno de los cuales consiste en una o más filas de CTU dentro de la pieza. Una pieza que no se subdivide en múltiples ladrillos también puede denominarse un ladrillo. Una exploración de ladrillos es una ordenación secuencial específica de las CTU que subdividen una imagen en la que se ordenan las CTU consecutivamente en exploración por filas de la CTU en un ladrillo, los ladrillos dentro de una pieza se ordenan consecutivamente en una exploración por filas de los ladrillos de la pieza, y las piezas en una imagen se ordenan consecutivamente en una exploración por filas de las piezas de la imagen. Una pieza es una región rectangular de las CTU dentro de una columna de piezas particular y una fila de piezas particular en una imagen. La columna de piezas es una región rectangular de las CTU que tiene una altura igual a la altura de la imagen y una anchura especificada por elementos de sintaxis en el conjunto de parámetros de la imagen. La fila de piezas es una región rectangular de las CTU que tiene una altura especificada por elementos de sintaxis en el conjunto de parámetros de la imagen y una anchura igual a la anchura de la imagen. Una exploración de piezas es una ordenación secuencial específica de las CTU que subdividen una imagen en la que las CTU se ordenan consecutivamente en una exploración por filas de CTU en una pieza mientras que las piezas en una imagen se ordenan consecutivamente en una exploración por filas de las piezas de la imagen. Un corte incluye un número entero de ladrillos de una imagen que pueden estar contenidos exclusivamente en una sola unidad NAL. Un corte puede consistir o bien en un número de piezas completas o bien en solo una secuencia consecutiva de ladrillos completos de una pieza. En este documento, los grupos de piezas y los cortes se pueden usar de manera intercambiable. Por ejemplo, en este documento, un grupo de piezas/encabezado de grupo de piezas puede llamarse corte/encabezado de corte.
Un píxel o un pel puede significar una unidad más pequeña que constituye una instantánea (o imagen). Asimismo, se puede usar 'muestra' como un término que corresponde a un píxel. Una muestra puede representar generalmente un píxel o el valor de un píxel, y puede representar solo un píxel/valor de píxel de una componente de luma o representar solo un píxel/valor de píxel de una componente de croma.
Una unidad puede representar una unidad básica de procesamiento de imágenes. La unidad puede incluir al menos una de una región específica de la imagen e información relacionada con la región. Una unidad puede incluir un bloque de luma y dos bloques de croma (por ejemplo, cb, cr). La unidad se puede usar de manera intercambiable con términos como bloque o área en algunos casos. En un caso general, un bloque M x N puede incluir muestras (o matrices de muestras) o un conjunto (o matriz) de coeficientes de transformada de M columnas y N filas.
En este documento, se debería interpretar que el término "/" indica "y/o". Por ejemplo, la expresión "A/B" puede significar "A y/o B". Además, "A, B" puede significar "A y/o B". Además, "A/B/C" puede significar "al menos uno de A, B y/o C". Asimismo, "A/B/C" puede significar "al menos uno de A, B y/o C".
Además, en el documento, se debería interpretar que el término "o" indica "y/o". Por ejemplo, la expresión "A o B" puede comprender 1) solo A, 2) solo B y/o 3) tanto A como B. En otras palabras, se debería interpretar que el término "o" en este documento indica "adicionalmente o como alternativa".
La figura 2 es un diagrama esquemático que ilustra una configuración de un aparato de codificación de vídeo/imágenes al que se puede(n) aplicar la(s) realización(es) del presente documento. En lo sucesivo en el presente documento, el aparato de codificación de vídeo puede incluir un aparato de codificación de imágenes.
Haciendo referencia a la figura 2, el aparato de codificación 200 incluye un divisor de imágenes 210, un predictor 220, un procesador residual 230 y un codificador por entropía 240, un sumador 250, un filtro 260 y una memoria 270. El predictor 220 puede incluir un inter predictor 221 y un intra predictor 222. El procesador residual 230 puede incluir un transformador 232, un cuantificador 233, un descuantificador 234 y un transformador inverso 235. El procesador residual 230 puede incluir además un restador 231. El sumador 250 puede denominarse reconstructor o generador de bloques reconstruidos. El divisor de imágenes 210, el predictor 220, el procesador residual 230, el codificador por entropía 240, el sumador 250 y el filtro 260 se pueden configurar mediante al menos un componente de hardware (por ejemplo, un conjunto de chips codificador o procesador) de acuerdo con una realización. Además, la memoria 270 puede incluir una memoria intermedia de imágenes descodificadas (DPB) o se puede configurar mediante un medio de almacenamiento digital. El componente de hardware puede incluir además la memoria 270 como un componente interno/externo.
El divisor de imágenes 210 puede dividir una imagen (o una instantánea o un fotograma) de entrada introducida en el aparato de codificación 200 en uno o más procesadores. Por ejemplo, el procesador puede denominarse unidad de codificación (CU). En este caso, la unidad de codificación puede dividirse recursivamente de acuerdo con una estructura de árbol ternario de árbol binario de cuatro árboles (QTBTTT) a partir de una unidad de árbol de codificación (CTU) o una unidad de codificación más grande (LCU). Por ejemplo, una unidad de codificación puede dividirse en una pluralidad de unidades de codificación de una profundidad más profunda basándose en una estructura de árbol cuádruple, una estructura de árbol binario y/o una estructura de árbol ternario. En este caso, por ejemplo, se puede aplicar en primer lugar la estructura de árbol cuádruple, y se puede aplicar después la estructura de árbol binario y/o la estructura ternaria. Como alternativa, se puede aplicar en primer lugar la estructura de árbol binario. El procedimiento de codificación de acuerdo con este documento puede realizarse basándose en la unidad de codificación final que ya no se divide más. En este caso, la unidad de codificación más grande se puede usar como la unidad de codificación final basándose en la eficiencia de codificación de acuerdo con las características de la imagen o, si fuera necesario, la unidad de codificación puede dividirse recursivamente en unidades de codificación de profundidad más profunda y una unidad de codificación que tiene un tamaño óptimo se puede usar como unidad de codificación final. En el presente caso, el procedimiento de codificación puede incluir un procedimiento de predicción, transformada y reconstrucción, que se describirá más adelante. Como otro ejemplo, el procesador puede incluir además una unidad de predicción (PU) o una unidad de transformada (TU). En este caso, la unidad de predicción y la unidad de transformada pueden dividirse por la mitad o dividirse de la unidad de codificación final antes mencionada. La unidad de predicción puede ser una unidad de predicción de muestras, y la unidad de transformada puede ser una unidad para inferir un coeficiente de transformada y/o una unidad para inferir una señal residual a partir del coeficiente de transformada.
La unidad se puede usar de manera intercambiable con términos como bloque o área en algunos casos. En un caso general, un bloque de M x N puede representar un conjunto de muestras o coeficientes de transformada compuestos de M columnas y N filas. Una muestra puede representar generalmente un píxel o un valor de un píxel, puede representar solo un píxel/valor de píxel de una componente de luma o solo un píxel/valor de píxel de una componente de croma. Una muestra se puede usar como un término correspondiente a una instantánea (o imagen) para un píxel o un pel.
En el aparato de codificación 200, una señal de predicción (bloque predicho, matriz de muestras de predicción) emitida desde el inter predictor 221 o el intra predictor 222 se resta de una señal de imagen de entrada (bloque original, matriz de muestras original) para generar un bloque residual de señal residual, matriz de muestras residuales), y la señal residual generada se transmite al transformador 232. En este caso, como se muestra, una unidad para restar una señal de predicción (bloque predicho, matriz de muestras de predicción) de la señal de imagen de entrada (bloque original, matriz de muestras original) en el codificador 200 puede denominarse restador 231. El predictor puede realizar una predicción en un bloque a procesar (denominado, en lo sucesivo en el presente documento, bloque actual) y generar un bloque predicho que incluye muestras de predicción para el bloque actual. El predictor puede determinar si se aplica intra predicción o inter predicción en función de la CU o bloque actual. Como se describe más adelante en la descripción de cada modo de predicción, el predictor puede generar diversa información relacionada con la predicción, tal como información de modo de predicción, y transmitir la información generada al codificador por entropía 240. La información sobre la predicción puede codificarse en el codificador por entropía 240 y emitirse en forma de un flujo de bits.
El intra predictor 222 puede predecir el bloque actual haciendo referencia a las muestras en la imagen actual. Las muestras referidas pueden ubicarse en la vecindad del bloque actual o pueden ubicarse separadas de acuerdo con el modo de predicción. En la intra predicción, los modos de predicción pueden incluir una pluralidad de modos no direccionales y una pluralidad de modos direccionales. El modo no direccional puede incluir, por ejemplo, un modo CC y un modo planar. El modo direccional puede incluir, por ejemplo, 33 modos de predicción direccional o 65 modos de predicción direccional de acuerdo con el grado de detalle de la dirección de predicción. Sin embargo, esto es simplemente un ejemplo, se pueden usar más o menos modos de predicción direccionales dependiendo de un ajuste. El intra predictor 222 puede determinar el modo de predicción aplicado al bloque actual usando un modo de predicción aplicado a un bloque vecino.
El inter predictor 221 puede inferir un bloque predicho para el bloque actual basándose en un bloque de referencia (matriz de muestras de referencia) especificado por un vector de movimiento en una imagen de referencia. En el presente caso, con el fin de reducir la cantidad de información de movimiento transmitida en el modo de inter predicción, la información de movimiento puede predecirse en unidades de bloques, subbloques o muestras basándose en la correlación de la información de movimiento entre el bloque vecino y el bloque actual. La información de movimiento puede incluir un vector de movimiento y un índice de imagen de referencia. La información de movimiento puede incluir además información de dirección de inter predicción (predicción L0, predicción L1, Bi predicción, etc.). En el caso de inter predicción, el bloque vecino puede incluir un bloque vecino espacial presente en la imagen actual y un bloque vecino temporal presente en la imagen de referencia. La imagen de referencia que incluye el bloque de referencia y la imagen de referencia que incluye el bloque vecino temporal pueden ser iguales o diferentes. El bloque vecino temporal se puede denominar bloque de referencia ubicado conjuntamente, una CU ubicada conjuntamente (colCU), y similares, y la imagen de referencia que incluye el bloque vecino temporal se puede denominar imagen ubicada conjuntamente (colPic). Por ejemplo, el inter predictor 221 puede configurar una lista de candidatos de información de movimiento basándose en bloques vecinos y generar información que indique qué candidato se usa para inferir un vector de movimiento y/o un índice de imagen de referencia del bloque actual. La inter predicción puede realizarse basándose en diversos modos de predicción. Por ejemplo, en el caso de un modo de salto y un modo de fusión, el inter predictor 221 puede usar información de movimiento del bloque vecino como información de movimiento del bloque actual. En el modo de salto, a diferencia del modo de fusión, es posible que la señal residual no se transmita. En el caso del modo de predicción de vector de movimiento (MVP), el vector de movimiento del bloque vecino puede usarse como predictor de vector de movimiento y el vector de movimiento del bloque actual puede indicarse señalizando una diferencia de vector de movimiento.
El predictor 220 puede generar una señal de predicción basándose en diversos métodos de predicción que se describen a continuación. Por ejemplo, el predictor no solo puede aplicar la intra predicción o la inter predicción para predecir un bloque, sino que también puede aplicar simultáneamente tanto la intra predicción como la inter predicción. Esto puede denominarse inter e intra predicción combinada (CIIP). Además, el predictor puede basarse en un modo de predicción de copia intra bloque (IBC) o un modo de paleta para la predicción de un bloque. El modo de predicción de IBC o el modo de paleta se puede usar para la codificación de imágenes/vídeo de contenido de un juego o similar, por ejemplo, codificación de contenido de pantalla (SCC). El IBC realiza básicamente la predicción en la imagen actual, pero se puede realizar de manera similar a la inter predicción en la que se infiere un bloque de referencia en la imagen actual. Es decir, el IBC puede usar al menos una de las técnicas de inter predicción descritas en este documento. El modo de paleta se puede considerar un ejemplo de intra codificación o intra predicción. Cuando se aplica el modo de paleta, se puede señalizar un valor de muestra dentro de una imagen basándose en la información de la tabla de paleta y el índice de paleta.
La señal de predicción generada por el predictor (incluyendo el inter predictor 221 y/o el intra predictor 222) puede usarse para generar una señal reconstruida o para generar una señal residual. El transformador 232 puede generar coeficientes de transformada aplicando una técnica de transformada a la señal residual. Por ejemplo, la técnica de transformada puede incluir al menos una transformada de coseno discreta (DCT), una transformada de seno discreta (DST), una transformada de Karhunen-Loéve (KLT), una transformada basada en gráficos (GBT) o una transformada condicionalmente no lineal (CNT). En el presente caso, GBT significa la transformada obtenida de un gráfico cuando la información de relación entre píxeles está representada por el gráfico. La CNT se refiere a la transformada generada basándose en una señal de predicción generada usando todos los píxeles reconstruidos previamente. Además, el proceso de transformada se puede aplicar a bloques de píxeles cuadrados que tienen el mismo tamaño o se puede aplicar a bloques que tienen un tamaño variable en lugar de cuadrados.
El cuantificador 233 puede cuantificar los coeficientes de transformada y transmitirlos al codificador por entropía 240 y el codificador por entropía 240 puede codificar la señal cuantificada (información sobre los coeficientes de transformada cuantificados) y emitir un flujo de bits. La información sobre los coeficientes de transformada cuantificados puede denominarse información residual. El cuantificador 233 puede reorganizar coeficientes de transformada cuantificados de tipo bloque en una forma de vector unidimensional basándose en un orden de exploración de coeficientes y generar información sobre los coeficientes de transformada cuantificados basándose en los coeficientes de transformada cuantificados en forma de vector unidimensional. Puede generarse información sobre los coeficientes de transformada. El codificador por entropía 240 puede realizar diversos métodos de codificación tales como, por ejemplo, Golomb exponencial, codificación de longitud variable adaptativa al contexto (CAVLC), codificación aritmética binaria adaptativa al contexto (CABAC) y similares. El codificador por entropía 240 puede codificar información necesaria para la reconstrucción de vídeo/imagen distinta de los coeficientes de transformada cuantificados (por ejemplo, valores de elementos de sintaxis, etc.) juntos o por separado. La información codificada (por ejemplo, información de vídeo/imagen codificada) puede transmitirse o almacenarse en unidades de NAL (capa de abstracción de red) en forma de flujo de bits. La información de vídeo/imagen puede incluir además información sobre diversos conjuntos de parámetros tales como un conjunto de parámetros de adaptación (APS), un conjunto de parámetros de imagen (PPS), un conjunto de parámetros de secuencia (SPS) o un conjunto de parámetros de vídeo (VPS). Además, la información de vídeo/imagen puede incluir además información de restricción general. En este documento, los elementos de información y/o sintaxis transmitidos/señalizados desde el aparato de codificación al aparato de descodificación se pueden incluir en la información de vídeo/imagen. La información de vídeo/imagen puede codificarse a través del procedimiento de codificación descrito anteriormente e incluirse en el flujo de bits. El flujo de bits puede transmitirse a través de una red o puede almacenarse en un medio de almacenamiento digital. La red puede incluir una red de radiodifusión y/o una red de comunicación, y el medio de almacenamiento digital puede incluir diversos medios de almacenamiento tales como USB, SD, CD, DVD, Blu-ray, HDD y SSD y similares. Un transmisor (no mostrado) que transmite una señal emitida desde el codificador por entropía 240 y/o una unidad de almacenamiento (no mostrada) que almacena la señal se pueden incluir como elementos internos/externos del aparato de codificación 200 y, como alternativa, el transmisor se puede incluir en el codificador por entropía 240.
Los coeficientes de transformada cuantificados emitidos desde el cuantificador 233 pueden usarse para generar una señal de predicción. Por ejemplo, la señal residual (bloque residual o muestras residuales) puede reconstruirse aplicando descuantificación y transformada inversa a los coeficientes de transformada cuantificados a través del descuantificador 234 y el transformador inverso 235. El sumador 250 suma la señal residual reconstruida a la señal de predicción emitida desde el inter predictor 221 o el intra predictor 222 para generar una señal reconstruida (imagen reconstruida, bloque reconstruido, matriz de muestras reconstruida). Si no hay residuo para el bloque a procesar, tal como en el caso de que se aplique el modo de salto, el bloque predicho se puede usar como el bloque reconstruido. El sumador 250 puede denominarse reconstructor o generador de bloques reconstruidos. La señal reconstruida generada puede usarse para intra predicción de un bloque siguiente a procesar en la imagen actual y puede usarse para inter predicción de una imagen siguiente a través del filtrado como se describe a continuación.
Por otro lado, se puede aplicar una correlación de luma con ajuste a escala de croma (LMCS) durante la codificación y/o reconstrucción de imágenes.
El filtro 260 puede mejorar la calidad de imagen subjetiva/objetiva aplicando filtrado a la señal reconstruida. Por ejemplo, el filtro 260 puede generar una imagen reconstruida modificada aplicando diversos métodos de filtrado a la imagen reconstruida y almacenar la imagen reconstruida modificada en la memoria 270, específicamente, una DPB de la memoria 270. Los diversos métodos de filtrado pueden incluir, por ejemplo, filtrado de desbloqueo, un desplazamiento adaptativo de muestra, un filtro de bucle adaptativo, un filtro bilateral y similares. El filtro 260 puede generar diversa información relacionada con el filtrado y transmitir la información generada al codificador por entropía 240 como se describe más adelante en la descripción de cada método de filtrado. La información relacionada con el filtrado puede codificarse por el codificador por entropía 240 y emitirse en forma de un flujo de bits.
La imagen reconstruida modificada transmitida a la memoria 270 puede usarse como imagen de referencia en el inter predictor 221. Cuando se aplica la inter predicción a través del aparato de codificación, se puede evitar el desajuste de predicción entre el aparato de codificación 200 y el aparato de descodificación y puede mejorarse la eficiencia de codificación.
La DPB de la memoria 270 DPB puede almacenar la imagen reconstruida modificada para su uso como imagen de referencia en el inter predictor 221. La memoria 270 puede almacenar la información de movimiento del bloque a partir del cual se infiere (o se codifica) la información de movimiento de la imagen actual y/o la información de movimiento de los bloques de la imagen que ya se han reconstruidos. La información de movimiento almacenada puede transmitirse al inter predictor 221 y usarse como la información de movimiento del bloque vecino espacial o la información de movimiento del bloque vecino temporal. La memoria 270 puede almacenar muestras reconstruidas de bloques reconstruidos en la imagen actual y puede transferir las muestras reconstruidas al intra predictor 222.
La figura 3 es un diagrama esquemático que ilustra una configuración de un aparato de descodificación de vídeo/imágenes al que se puede(n) aplicar la(s) realización(es) del presente documento.
Haciendo referencia a la figura 3, el aparato de descodificación 300 puede incluir un descodificador por entropía 310, un procesador residual 320, un predictor 330, un sumador 340, un filtro 350 y una memoria 360. El predictor 330 puede incluir un inter predictor 331 y un intra predictor 332. El procesador residual 320 puede incluir un descuantificador 321 y un transformador inverso 321. El descodificador por entropía 310, el procesador residual 320, el predictor 330, el sumador 340 y el filtro 350 se pueden configurar mediante un componente de hardware (por ejemplo, un conjunto de chips de descodificador o un procesador) de acuerdo con una realización. Además, la memoria 360 puede incluir una memoria intermedia de imágenes descodificadas (DPB) o se puede configurar mediante un medio de almacenamiento digital. El componente de hardware puede incluir además la memoria 360 como un componente interno/externo.
Cuando se introduce un flujo de bits que incluye información de vídeo/imagen, el aparato de descodificación 300 puede reconstruir una imagen correspondiente a un proceso en el que se procesa la información de vídeo/imagen en el aparato de codificación de la figura 2. Por ejemplo, el aparato de descodificación 300 puede inferir unidades/bloques basándose en la información relacionada con la partición de bloques obtenida del flujo de bits. El aparato de descodificación 300 puede realizar la descodificación usando un procesador aplicado en el aparato de codificación. Por lo tanto, el procesador de descodificación puede ser una unidad de codificación, por ejemplo, y la unidad de codificación puede dividirse de acuerdo con una estructura de árbol cuádruple, estructura de árbol binario y/o estructura de árbol ternario desde la unidad de árbol de codificación o la unidad de codificación más grande. Una o más unidades de transformada se pueden inferir a partir de la unidad de codificación. La señal de imagen reconstruida descodificada y emitida a través del aparato de descodificación 300 puede reproducirse a través de un aparato de reproducción.
El aparato de descodificación 300 puede recibir una señal emitida del aparato de codificación de la figura 2 en forma de un flujo de bits, y la señal recibida se puede descodificar a través del descodificador por entropía 310. Por ejemplo, el descodificador por entropía 310 puede analizar el flujo de bits para inferir información (por ejemplo, información de vídeo/imagen) necesaria para la reconstrucción de imágenes (o reconstrucción de instantáneas). La información de vídeo/imagen puede incluir además información sobre diversos conjuntos de parámetros tales como un conjunto de parámetros de adaptación (APS), un conjunto de parámetros de imagen (PPS), un conjunto de parámetros de secuencia (SPS) o un conjunto de parámetros de vídeo (VPS). Además, la información de vídeo/imagen puede incluir además información de restricción general. El aparato de descodificación puede descodificar además la imagen basándose en la información del conjunto de parámetros y/o la información de restricción general. La información señalizada/recibida y/o los elementos de sintaxis descritos posteriormente en este documento se pueden descodificar pueden descodificar el procedimiento de descodificación y obtenerse del flujo de bits. Por ejemplo, el descodificador por entropía 310 descodifica la información en el flujo de bits basándose en un método de codificación tal como la codificación Golomb exponencial, CAVLC o CABAC, y emite elementos de sintaxis requeridos para la reconstrucción de imágenes y valores cuantificados de coeficientes de transformada para residuos. Más específicamente, el método de descodificación por entropía CABAC puede recibir un binario correspondiente a cada elemento de sintaxis en el flujo de bits, determinar un modelo de contexto usando una información de elemento de sintaxis objetivo de descodificación, información de descodificación de un bloque objetivo de descodificación o información de un símbolo/binario descodificado en una fase previa, y realizar una descodificación aritmética en el binario prediciendo una probabilidad de aparición de un binario de acuerdo con el modelo de contexto determinado, y generar un símbolo correspondiente al valor de cada elemento de sintaxis. En este caso, el método de descodificación por entropía de CABAC puede actualizar el modelo de contexto usando la información del símbolo/binario descodificado para un modelo de contexto de un siguiente símbolo/binario después de determinar el modelo de contexto. La información relacionada con la predicción de entre la información descodificada por el descodificador por entropía 310 se puede proporcionar al predictor (el inter predictor 332 y el intra predictor 331), y el valor residual en el que se realizó la descodificación por entropía en el descodificador por entropía 310, es decir, los coeficientes de transformada cuantificados y la información de los parámetros relacionados pueden introducirse en el procesador residual 320. El procesador residual 320 puede inferir la señal residual (el bloque residual, las muestras residuales, la matriz de muestras residuales). Además, información acerca del filtrado de entre información descodificada por el descodificador por entropía 310 se puede proporcionar al filtro 350. Por otro lado, un receptor (no mostrado) para recibir una señal emitida desde el aparato de codificación se puede configurar adicionalmente como un elemento interno/externo del aparato de descodificación 300, o el receptor puede ser un componente del descodificador por entropía 310. Por otro lado, el aparato de descodificación de acuerdo con este documento puede denominarse aparato de descodificación de vídeo/imágenes/instantáneas, y el aparato de descodificación puede clasificarse en un descodificador de información (descodificador de información de vídeo/imágenes/instantáneas) y un descodificador de muestras (descodificador de muestras de vídeo/imágenes/instantáneas). El descodificador de información puede incluir el descodificador por entropía 310, y el descodificador de muestras puede incluir al menos uno del descuantificador 321, el transformador inverso 322, el sumador 340, el filtro 350, la memoria 360, el inter predictor 332 y el intra predictor 331.
El descuantificador 321 puede descuantificar los coeficientes de transformada cuantificados y emitir los coeficientes de transformada. El descuantificador 321 puede reorganizar los coeficientes de transformada cuantificados en forma de bloque bidimensional. En este caso, la reorganización se puede realizar basándose en el orden de exploración de coeficientes realizado en el aparato de codificación. El descuantificador 321 puede realizar la descuantificación de los coeficientes de transformada cuantificados usando un parámetro de cuantificación (por ejemplo, información del tamaño de etapa de cuantificación) y obtener coeficientes de transformada.
El transformador inverso 322 transforma a la inversa los coeficientes de transformada para obtener una señal residual (bloque residual, matriz de muestras residuales).
El predictor puede realizar predicción en el bloque actual y puede generar un bloque predicho que incluye muestras de predicción para el bloque actual. El predictor puede determinar si se aplica intra predicción o inter predicción al bloque actual basándose en la información acerca de la predicción emitida desde el descodificador por entropía 310 y puede determinar un modo de intra/inter predicción específico.
El predictor 320 puede generar una señal de predicción basándose en diversos métodos de predicción que se describen a continuación. Por ejemplo, el predictor no solo puede aplicar la intra predicción o la inter predicción para predecir un bloque, sino que también puede aplicar simultáneamente la intra predicción y la inter predicción. Esto puede denominarse inter e intra predicción combinada (CIIP). Además, el predictor puede basarse en un modo de predicción de copia intra bloque (IBC) o un modo de paleta para la predicción de un bloque. El modo de predicción de IBC o el modo de paleta se puede usar para la codificación de imágenes/vídeo de contenido de un juego o similar, por ejemplo, codificación de contenido de pantalla (SCC). El IBC realiza básicamente la predicción en la imagen actual, pero se puede realizar de manera similar a la inter predicción en la que se infiere un bloque de referencia en la imagen actual. Es decir, el IBC puede usar al menos una de las técnicas de inter predicción descritas en este documento. El modo de paleta se puede considerar un ejemplo de intra codificación o intra predicción. Cuando se aplica el modo de paleta, se puede señalizar un valor de muestra dentro de una imagen basándose en la información de la tabla de paleta y el índice de paleta.
El intra predictor 331 puede predecir el bloque actual haciendo referencia a las muestras en la imagen actual. Las muestras referidas pueden ubicarse en la vecindad del bloque actual o pueden ubicarse separadas de acuerdo con el modo de predicción. En la intra predicción, los modos de predicción pueden incluir una pluralidad de modos no direccionales y una pluralidad de modos direccionales. El intra predictor 331 puede determinar el modo de predicción aplicado al bloque actual usando un modo de predicción aplicado a un bloque vecino.
El inter predictor 332 puede inferir un bloque predicho para el bloque actual basándose en un bloque de referencia (matriz de muestras de referencia) especificado por un vector de movimiento en una imagen de referencia. En este caso, con el fin de reducir la cantidad de información de movimiento transmitida en el modo de inter predicción, la información de movimiento puede predecirse en unidades de bloques, subbloques o muestras basándose en la correlación de la información de movimiento entre el bloque vecino y el bloque actual. La información de movimiento puede incluir un vector de movimiento y un índice de imagen de referencia. La información de movimiento puede incluir además información de dirección de inter predicción (predicción L0, predicción L1, Bi predicción, etc.). En el caso de inter predicción, el bloque vecino puede incluir un bloque vecino espacial presente en la imagen actual y un bloque vecino temporal presente en la imagen de referencia. Por ejemplo, el inter predictor 332 puede configurar una lista de candidatos de información de movimiento basándose en bloques vecinos e inferir un vector de movimiento del bloque actual y/o un índice de imagen de referencia basándose en la información de selección de candidatos recibida. La inter predicción se puede realizar basándose en diversos modos de predicción, y la información acerca de la predicción puede incluir información que indica un modo de inter predicción para el bloque actual.
El sumador 340 puede generar una señal reconstruida (imagen reconstruida, bloque reconstruido, matriz de muestras reconstruida) añadiendo la señal residual obtenida a la señal de predicción (bloque predicho, matriz de muestras predicha) emitida desde el predictor (que incluye el inter predictor 332 y/o el intra predictor 331). Si no hay residuo para el bloque a procesar, tal como cuando se aplica el modo de salto, el bloque predicho se puede usar como el bloque reconstruido.
El sumador 340 puede denominarse reconstructor o un generador de bloques reconstruidos. La señal reconstruida generada puede usarse para la intra predicción de un bloque siguiente a procesar en la imagen actual, puede emitirse a través del filtrado como se describe a continuación, o puede usarse para la inter predicción de una imagen siguiente.
Por otro lado, se puede aplicar una correlación de luma con ajuste a escala de croma (LMCS) en el proceso de descodificación de imágenes.
El filtro 350 puede mejorar la calidad de imagen subjetiva/objetiva aplicando filtrado a la señal reconstruida. Por ejemplo, el filtro 350 puede generar una imagen reconstruida modificada aplicando diversos métodos de filtrado a la imagen reconstruida y almacenar la imagen reconstruida modificada en la memoria 360, específicamente, una DPB de la memoria 360. Los diversos métodos de filtrado pueden incluir, por ejemplo, filtrado de desbloqueo, un desplazamiento adaptativo de muestra, un filtro de bucle adaptativo, un filtro bilateral y similares.
La imagen reconstruida (modificada) almacenada en la DPB de la memoria 360 puede usarse como una imagen de referencia en el inter predictor 332. La memoria 360 puede almacenar la información de movimiento del bloque a partir del cual se infiere (o se descodifica) la información de movimiento de la imagen actual y/o la información de movimiento de los bloques de la imagen que ya se han reconstruidos. La información de movimiento almacenada se puede transmitir al inter predictor 260 con el fin de utilizarse como la información de movimiento del bloque vecino espacial o la información de movimiento del bloque vecino temporal. La memoria 360 puede almacenar muestras reconstruidas de bloques reconstruidos en la imagen actual y transferir las muestras reconstruidas al intra predictor 331.
En la presente divulgación, las realizaciones descritas en el filtro 260, el inter predictor 221 y el intra predictor 222 del aparato de codificación 200 pueden ser iguales o aplicarse respectivamente para corresponder al filtro 350, al inter predictor 332 y al intra predictor 331 del aparato de descodificación 300. Lo mismo también puede ser de aplicación a la unidad 332 y al intra predictor 331.
Por otro lado, como se ha descrito anteriormente, al realizar una codificación de vídeo, se realiza una predicción para potenciar la eficiencia de compresión. En consecuencia, se puede generar un bloque de predicción que incluye muestras de predicción para un bloque actual, es decir, un bloque objetivo de codificación. En este caso, el bloque predicho incluye muestras de predicción en un dominio espacial (o dominio de píxeles). El bloque de predicción se infiere de forma idéntica en el aparato de codificación y en el aparato de descodificación. El aparato de codificación puede mejorar la eficiencia de codificación de imágenes señalizando información residual acerca de un residuo entre un bloque original y el bloque predicho, no un valor de muestra original del propio bloque original, al aparato de descodificación. El aparato de descodificación puede inferir un bloque residual que incluye muestras residuales basándose en la información residual, puede generar un bloque reconstruido que incluye muestras reconstruidas sumando el bloque residual y el bloque de predicción, y puede generar una imagen reconstruida que incluye el bloque reconstruido.
La información residual se puede generar a través de un procedimiento de transformada y de cuantificación. Por ejemplo, el aparato de codificación puede inferir el bloque residual entre el bloque original y el bloque predicho, puede inferir coeficientes de transformada realizando un procedimiento de transformada sobre las muestras residuales (matriz de muestras residuales) incluidas en el bloque residual, puede inferir coeficientes de transformada cuantificados realizando un procedimiento de cuantificación sobre los coeficientes de transformada, y puede señalizar información residual relacionada al aparato de descodificación (a través de un flujo de bits). En este caso, la información residual puede incluir información, tal como información de valor, información de ubicación, un esquema de transformada, un núcleo de transformada y un parámetro de cuantificación de los coeficientes de transformada cuantificados. El aparato de descodificación puede realizar un procedimiento de descuantificación/transformada inversa basándose en la información residual y puede inferir las muestras residuales (o bloque residual). El aparato de descodificación puede generar la imagen reconstruida basándose en el bloque de predicción y el bloque residual. El aparato de codificación también puede inferir el bloque residual realizando una descuantificación/transformada inversa sobre los coeficientes de transformada cuantificados para la referencia de inter predicción de una imagen subsiguiente y puede generar la imagen reconstruida basándose en el bloque residual.
La figura 4 ilustra modos intradireccionales de 65 direcciones de predicción.
Haciendo referencia a la figura 4, los modos de intra predicción que tienen direccionalidad horizontal y los modos de intra predicción que tienen direccionalidad vertical pueden clasificarse basándose en un modo de intra predicción n.° 34 que tiene una dirección de predicción diagonal superior izquierda. H y V en la figura 3 representan la direccionalidad horizontal y la direccionalidad vertical, respectivamente, y los números de -32 a 32 representan desplazamientos de 1/32 de unidad en las posiciones de la cuadrícula de muestras. Los modos de intra predicción n.° 2 a n.° 33 tienen la direccionalidad horizontal y los modos de intra predicción n.° 34 a n.° 66 tienen la direccionalidad vertical. El modo de intra predicción n.° 18 y el modo de intra predicción n.° 50 representan un modo de intra predicción horizontal y un modo de intra predicción vertical, respectivamente. El modo de intra predicción n.° 2 se pueden denominar modo de intra predicción diagonal izquierda inferior, el modo de intra predicción n.° 34 se puede denominar modo de intra predicción diagonal izquierda superior y el modo de intra predicción n.° 66 se puede denominar modo de intra predicción diagonal derecha superior.
La figura 5 es un diagrama para describir un proceso de inferencia de un modo de intra predicción de un bloque de croma actual de acuerdo con una realización.
En la presente divulgación, "bloque de croma", "imagen de croma" y similares pueden representar el mismo significado que bloque de crominancia, imagen de crominancia y similares y, en consecuencia, se pueden usar comúnmente croma y crominancia. De forma similar, "bloque de luma", "imagen de luma" y similares pueden representar el mismo significado de bloque de luminancia, imagen de luminancia y similares y, en consecuencia, se pueden usar comúnmente luma y luminancia.
En la presente divulgación, un "bloque de croma actual" puede significar un bloque de componentes de croma de un bloque actual, que es una unidad de codificación actual, y un "bloque de luma actual" puede significar un bloque de componentes de luma de un bloque actual, que es una unidad de codificación actual. En consecuencia, el bloque de luma actual y el bloque de croma actual se corresponden entre sí. Sin embargo, los formatos de bloque y los números de bloque del bloque de luma actual y el bloque de croma actual no siempre son los mismos, sino que pueden ser diferentes dependiendo del caso. En algunos casos, el bloque de croma actual puede corresponder a la región de luma actual y, en este caso, la región de luma actual puede incluir al menos un bloque de luma.
En la presente divulgación, "plantilla de muestra de referencia" puede significar un conjunto de muestras de referencia vecinas a un bloque de croma actual para predecir el bloque de croma actual. La plantilla de muestra de referencia se puede predefinir, o se puede señalizar información para la plantilla de muestra de referencia al aparato de descodificación 300 desde el aparato de codificación 200.
Haciendo referencia a la figura 5, un conjunto de muestras con una línea sombreada vecinas a un bloque 4 x 4 , que es un bloque de croma actual, representa una plantilla de muestra de referencia. En la figura 5 se muestra que la plantilla de muestra de referencia incluye una muestra de referencia de una línea, pero la región de muestra de referencia en una región de luma correspondiente a la plantilla de muestra de referencia incluye dos líneas.
En una realización, cuando se realiza una intra codificación de una imagen de croma en el modelo de PRUEBA de Exploración Conjunta (JEM) usado en el Equipo de Exploración de Vídeo Conjunto (JVET), se puede usar un Modelo Lineal de Componentes Cruzadas (CCLM). CCLM es un método para predecir un valor de píxel de una imagen de croma basándose en un valor de píxel de una imagen de luma reconstruida, que se basa en la propiedad de correlación alta entre una imagen de croma y una imagen de luma.
La predicción de CCLM de imágenes de croma Cb y Cr se puede basar en la ecuación a continuación.
[Ecuación 1]
Pred<c>(i, j) = a • Rec'<L>(i, j) p
En el presente documento, predc (i, j) significa una imagen de croma Cb o Cr que se va a predecir, RecL'(i, j) significa una imagen de luma que se va a reconstruir que se ajusta a un tamaño de bloque de croma e (i, j) significa una coordenada de un píxel. En el formato de color 4:2:0, debido a que un tamaño de imagen de luma es el doble que el de una imagen de croma, Rec^ de un tamaño de bloque de croma se debería generar a través de submuestreo y, en consecuencia, un píxel de una imagen de luma que se va a usar en una imagen de croma predc (i, j) también puede usar píxeles vecinos además de RecL (2i, 2j). La predc (i, j) se puede representar como una muestra de luma submuestreada. Además, a y p se pueden denominar modelo lineal o parámetro de CCLM. En particular, a se puede denominar factor de ajuste a escala y p se puede denominar desplazamiento. La información de modo de predicción que indica si una predicción de CCLM se aplica al bloque actual se puede generar en el aparato de codificación y transmitirse al aparato de descodificación, y el parámetro de CCLM se puede calcular en el aparato de codificación y en el aparato de descodificación basándose en una muestra (o plantilla) reconstruida vecina de la misma forma.
Por otro lado, por ejemplo, la predc (i, j) se puede inferir usando 6 píxeles vecinos como se representa en la ecuación a continuación.
[Ecuación 2]
Rec'L (i, j )
= (2 x Rec<L>(2i, 2j) 2 x Rec<L>(2i, 2j 1) Rec<L>(2i - 1 ,2j) Rec<L>(2i 1, 2j) Rec<L>(2i - 1, 2j 1)
Además, como se muestra en el área sombreada de la figura 3, a y p representan una correlación cruzada y una diferencia de valores promedio entre la plantilla vecina de bloque de croma Cb o Cr y la plantilla vecina de bloque de luma, y a y p se representan como la Ecuación 3 a continuación.
[Ecuación 3]
En el presente caso, tL significa una muestra de referencia vecina de un bloque de luma correspondiente a una imagen de croma actual, tc significa una muestra de referencia vecina de un bloque de croma actual al que se aplica actualmente una codificación, e (i, j) significa una posición de un píxel. Además, M (A) significa un promedio de A píxeles.
Por otro lado, las muestras para el cálculo de parámetro (es decir, por ejemplo, a y p) para la predicción de CCLM que se ha descrito anteriormente se pueden seleccionar como a continuación.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x N, se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas (luma y croma) del bloque de croma actual.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x M o de tamaño M x N (en el presente documento, N <= M), se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas del bloque de croma actual. Por otro lado, debido a que M es mayor que N (por ejemplo, M = 2N o 3N, etc.), de entre M muestras, se pueden seleccionar N pares de muestras a través de un submuestreo.
Como alternativa, en el caso de que una predicción de CCLM se realice basándose en una pluralidad de modos de CCLM, es decir, en el caso de que se aplique el Modelo Lineal multidireccional (MDLM), las muestras para el cálculo de parámetro se pueden seleccionar como a continuación.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x N al que se aplica la predicción de CCLM existente, es decir, el modo de Modelo Lineal_Izquierda Arriba (LM_LT, Linear Model_Left Top), se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas (luma y croma) del bloque de croma actual. En el presente caso, el modo de LM_LT también se puede denominar modo de Modelo Lineal_Izquierda Encima (LM_<l>A, Linear Model_Left Above).
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x M o de tamaño M x N (en el presente documento, N <= M) al que se aplica el modo de LM_LT, se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas del bloque de croma actual. Por otro lado, debido a que M es mayor que N (por ejemplo, M = 2N o 3N, etc.), de entre M muestras, se pueden seleccionar N pares de muestras a través de un submuestreo.
- En el caso de que un bloque de croma actual sea un bloque de croma de N x M al que se aplica MDLM, es decir, el modo de predicción de CCLM excepto el modo de LM_LT, se puede aplicar el modo de Modelo Lineal_Arriba (LM_T, Linear Model_Top) al bloque de croma actual, y se puede seleccionar un total de 2N pares de muestras de referencia vecinos superiores. En el presente caso, el modo de LM_T también se puede denominar modo de Modelo Lineal_Encima (LM_A, Linear Model_Above).
- En el caso de que un bloque de croma actual sea un bloque de croma de M x N al que se aplica MDLM, es decir, el modo de predicción de CCLM excepto el modo de LM_L<t>, se puede aplicar el modo de Modelo Lineal_Izquierda (LM_L, Linear Model_Left) al bloque de croma actual, y se puede seleccionar un total de 2N pares de muestras de referencia vecinos izquierdos.
Por otro lado, el MDLM puede representar la predicción de CCLM realizada basándose en el modo de predicción de CCLM seleccionado de entre una pluralidad de modos de predicción de CCLM. La pluralidad de modos de predicción de CCLM puede incluir el modo de LM_L, el modo de LM_T y el modo de LM_LT. El modo de LM_T puede representar el modo de predicción de CCLM que realiza CCLM usando solo una muestra de referencia de arriba del bloque actual, y el modo de LM_L puede representar el modo de predicción de CCLM que realiza CCLM usando solo una muestra de referencia izquierda del bloque actual. Además, el modo de LM_LT puede representar el modo de predicción de CCLM que realiza CCLM usando una muestra de referencia de arriba y una muestra de referencia izquierda del bloque actual como la predicción de CCLM existente. A continuación se describirá una descripción detallada para el MDLM.
La figura 6 ilustra 2N muestras de referencia para un cálculo de parámetro para una predicción de CCLM que se ha descrito anteriormente. Haciendo referencia a la figura 6, se muestran 2N pares de muestras de referencia, que se infieren para el cálculo de parámetro para la predicción de CCLM. Los 2N pares de muestras de referencia pueden incluir 2N muestras de referencia adyacentes al bloque de croma actual y 2n muestras de referencia adyacentes al bloque de luma actual.
Como se ha descrito anteriormente, se pueden inferir 2N pares de muestras, y en el caso de que los parámetros de CCLM a y p se calculen usando la Ecuación 3 usando el par de muestras descrito anteriormente, se puede requerir el número de operaciones como se representa en la Tabla 1 a continuación.
T l 11
Haciendo referencia a la Tabla 1 anterior, por ejemplo, en el caso de un bloque de croma de tamaño 4 x 4 , se pueden requerir 21 operaciones de multiplicación y 31 operaciones de suma para calcular un parámetro de CCLM, y en el caso de un bloque de croma de tamaño 32x32, se pueden requerir 133 operaciones de multiplicación y 255 operaciones de suma para calcular un parámetro de CCLM. Es decir, a medida que aumenta el tamaño del bloque de croma, una cantidad de operaciones requeridas para calcular un parámetro de CCLM aumenta rápidamente, lo que puede estar conectado directamente con un problema de retardo en la implementación de hardware. En particular, debido a que el parámetro de CCLM se debería inferir a través de cálculo incluso en el aparato de descodificación, la cantidad de operaciones puede estar conectada con un problema de retardo en la implementación de hardware del aparato de descodificación y con un aumento del coste de implementación.
Por otro lado, en VTM 3.0, el parámetro de CCLM se puede calcular usando una inclinación de variación de un par de dos muestras de luma y de croma para disminuir las operaciones de multiplicación y de suma al calcular a y p. Por ejemplo, el parámetro de CCLM se puede calcular mediante la siguiente ecuación.
[Ecuación 4]
( i = yA~ axA
En el presente documento, (<xa>, yA) puede representar valores de muestra, una muestra de luma yA cuyo valor de luma es el más pequeño de entre muestras de referencia vecinas de un bloque actual para calcular el parámetro de CCLM y una muestra de croma xa que es un par de la muestra de luma, y (xb, yB) puede representar valores de muestra, una muestra de luma yB cuyo valor de luma es el más grande de entre muestras de referencia vecinas de un bloque actual para calcular el parámetro de CCLM y una muestra de croma xb que es un par de la muestra de luma. Es decir, en otras palabras, yA puede representar una muestra de luma cuyo valor de luma es el más pequeño de entre muestras de referencia vecinas de un bloque actual, xa puede representar una muestra de croma que es un par de la muestra de luma yA, yB puede representar una muestra de luma cuyo valor de luma es el más grande de entre muestras de referencia vecinas de un bloque actual, y xb puede representar una muestra de croma que es un par de la muestra de luma yB.
[Tabla 2]
Valores de luma
La Tabla 2 anterior ilustra el parámetro de CCLM inferido mediante un método de cálculo simplificado.
Cuando el parámetro de CCLM se calcula usando la ecuación que se ha descrito anteriormente, existe la ventaja de que la cantidad de operaciones de multiplicación y de suma se puede reducir de forma significativa en comparación con el método existente, pero debido a que se debería determinar un valor mínimo y un valor máximo de entre muestras de luma vecinas de un bloque actual, se añade una operación de comparación. Es decir, con el fin de determinar un valor mínimo y un valor máximo de muestra en 2N muestras vecinas, se requieren 4N operaciones de comparación y la adición de las operaciones de comparación puede provocar un retardo en la implementación de hardware.
Además, al realizar una predicción de CCLM, se puede realizar un LM multidireccional (MDLM), que se adopta en VTM 3.0.
La figura 7 ilustra el modo de LM_A (Linear Model_Above, Modelo Lineal_Encima) y el modo de LM_L (Linear Model_Left, Modelo Lineal_Izquierda). El aparato de codificación y el aparato de descodificación pueden realizar una predicción de CCLM a la que el modo de LM_A y el modo de LM_L. El modo de LM_A puede representar el modo de predicción de CCLM para realizar CCLM usando solo una muestra de referencia de arriba de un bloque actual. En este caso, como se muestra en la figura 7, se puede realizar una predicción de CCLM basándose en muestras de referencia de arriba que se extienden dos veces las muestras de referencia de arriba en la predicción de CCLM existente hacia un lado derecho. El modo de LM_A también se puede denominar modo de Modelo Lineal_Arriba (LM_T, Linear Model_Top). Además, el modo de LM_L puede representar el modo de predicción de CCLM para realizar CCLM usando solo una muestra de referencia izquierda del bloque actual. En este caso, como se muestra en la figura 7, se puede realizar una predicción de CCLM basándose en muestras de referencia izquierda que se extienden dos veces las muestras de referencia izquierda en la predicción de CCLM existente hacia un lado de debajo. Por otro lado, el modo de realizar la predicción de CCLM basándose en la predicción de CCLM existente, es decir, las muestras de referencia de arriba y las muestras de referencia izquierda del bloque actual se pueden representar como modo de LM_LA o modo de LM_LT. Los parámetros a y p en el MDLM que incluyen una pluralidad de modos de predicción de CCLM se pueden calcular usando una inclinación de variación de un par de dos muestras de luma y de croma que se ha descrito anteriormente. En consecuencia, se requieren muchas operaciones de comparación al calcular parámetros para el MDLM, y la adición de operaciones de comparación puede provocar un retardo en la implementación de hardware. En particular, en el caso de que los parámetros de CCLM a y p se calculen a través de la Ecuación 4 que usa 2N pares de muestras que se ha descrito anteriormente, se requieren 4N operaciones de comparación. Es decir, en el caso de un bloque de croma de 4 x 4 , se requieren 16 operaciones de comparación para calcular un parámetro de CCLM, y en el caso de un bloque de croma de 32 x 32, se requieren 128 operaciones de comparación para calcular un parámetro de CCLM. Es decir, a medida que aumenta el tamaño del bloque de croma, una cantidad de operaciones requeridas para calcular un parámetro de CCLM aumenta rápidamente, lo que puede estar conectado directamente con un problema de retardo en la implementación de hardware. En particular, debido a que el parámetro de CCLM se debería inferir a través de cálculo incluso en el aparato de descodificación, la adición de operaciones de comparación puede estar conectada con un problema de retardo en la implementación de hardware del aparato de descodificación y con un aumento del coste de implementación.
En consecuencia, se requiere un método para reducir el retardo y, por lo tanto, la presente divulgación propone una realización para reducir la complejidad de funcionamiento para inferir parámetros de CCLM y, a través de esto, reducir el coste y la complejidad de hardware y el tiempo de un procedimiento de descodificación.
La presente realización puede reducir la complejidad de funcionamiento para inferir parámetros de CCLM y, a través de esto, puede reducir el coste y la complejidad de hardware y el tiempo de un procedimiento de descodificación.
Como un ejemplo, con el fin de solucionar el problema del aumento de la cantidad de operaciones de parámetro de CCLM a medida que aumenta el tamaño del bloque de croma que se ha descrito anteriormente, se puede proponer una realización para calcular un parámetro de CCLM seleccionando un píxel vecino de bloque de croma, después de configurar un límite superior de selección de muestras vecinas Nth como se describe a continuación. El Nth también se puede representar como un número de muestras vecinas máximo. Por ejemplo, Nth se puede establecer como 2, 4, 8 o 16.
El procedimiento de cálculo de parámetro de CCLM de acuerdo con la presente realización puede ser como a continuación.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x N y Nth >= N, se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas del bloque de croma actual.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x N y Nth < N, se pueden seleccionar un total 2 * Nth (2 * Nth horizontales y 2 * Nth verticales) pares de muestras de referencia vecinas del bloque de croma actual.
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x M o de tamaño M x N (en el presente documento, N <= M) y Nth >= N, se pueden seleccionar un total de 2N (N horizontales y N verticales) pares de muestras de referencia vecinas del bloque de croma actual. Debido a que M es mayor que N (por ejemplo, M = 2N o 3N, etc.), de entre M muestras, se pueden seleccionar N pares de muestras a través de un submuestreo. - En el caso de que un bloque de croma actual sea un bloque de croma de tamaño N x M o de tamaño M x N (en el presente documento, N <= M) y Nth < N, se pueden seleccionar un total de 2 * Nth (2 * Nth horizontales y 2 * Nth verticales) pares de muestras de referencia vecinas del bloque de croma actual. Debido a que M es mayor que N (por ejemplo, M = 2N o 3N, etc.), de entre M muestras, se pueden seleccionar Nth pares de muestras a través de un submuestreo.
Como se ha descrito anteriormente, de acuerdo con la presente realización, un número de muestras de referencia vecinas para el cálculo de parámetro de CCLM se puede limitar estableciendo Nth que es un número máximo de números de muestras vecinas seleccionadas y, a través de esto, se puede calcular un parámetro de CCLM a través de relativamente menos cálculos, incluso en un bloque de croma de un tamaño grande.
Además, en el caso de establecer Nth como un número relativamente pequeño (por ejemplo, 4 u 8), en la implementación de hardware del cálculo de parámetro de CCLM, se puede evitar una operación del caso más desfavorable (por ejemplo, un bloque de croma de tamaño 32 x 32) y, por lo tanto, un número de puertas de hardware requerido se puede reducir en comparación con el caso más desfavorable, y a través de esto, también hay un efecto de reducción del coste de implementación de hardware.
Por ejemplo, en el caso de que Nth sea 2, 4 y 8, una cantidad del cálculo de parámetro de CCLM para un tamaño de bloque de croma se puede representar como en la siguiente tabla.
T l 1
Por otro lado, Nth se puede inferir como un valor predeterminado en el aparato de codificación y en el aparato de descodificación sin necesidad de transmitir información adicional que representa Nth. Como alternativa, información adicional que representa Nth se puede transmitir en una unidad de una Unidad de Codificación (CU), un corte, una imagen o una secuencia, y Nth se puede inferir basándose en la información adicional que representa Nth. La información adicional que representa Nth se puede generar y codificar en el aparato de codificación y se puede transmitir o señalizar al aparato de descodificación. En lo sucesivo en el presente documento, la transmisión o señalización del valor Nth puede representar la transmisión o señalización de la información que representa Nth desde el aparato de codificación al aparato de descodificación.
Por ejemplo, en el caso de que la información adicional que representa Nth se transmita en una unidad de CU, cuando un modo de intra predicción de un bloque de croma actual es el modo de CCLM, como se describe a continuación, se puede proponer un método para analizar un elemento de sintaxis cclm_reduced_sample_flag y realizar un procedimiento de cálculo de parámetro de CCLM. El cclm_reduced_sample_flag puede representar un elemento de sintaxis de una bandera de muestra reducida de CCLM.
- En el caso de que cclm_reduced_sample_flag sea 0 (falso), se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas de CCLM existente.
- En el caso de que cclm_reduced_sample_flag sea 1 (verdadero), Nth se establece a 2, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas propuesto en la presente realización que se ha descrito anteriormente.
Como alternativa, en el caso de que la información adicional que representa Nth se transmita en una unidad de corte, imagen o secuencia, como se describe a continuación, el valor de Nth se puede descodificar basándose en la información adicional transmitida a través de una sintaxis de alto nivel (HLS). La información adicional que representa Nth se puede codificar en el aparato de codificación e incluirse en un flujo de bits y transmitirse entonces.
Por ejemplo, la información adicional señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
T l 41
cclm_reduced_sample_num puede representar un elemento de sintaxis de la información adicional que representa Nth.
Como alternativa, por ejemplo, la información adicional señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
T l 1
Como alternativa, por ejemplo, la información adicional señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
T l 1
El valor de Nth, que se infiere basándose en el valor de cclm_reduced_sample_num (es decir, un valor inferido descodificando cclm_reduced_sample_num) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
T l 1
Por ejemplo, haciendo referencia a la Tabla 7 anterior, Nth se puede inferir basándose en el cclm_reduced_sample_num. En el caso de que el valor de cclm_reduced_sample_num sea 0, Nth se puede inferir como 2, en el caso de que el valor de cclm_reduced_sample_num sea 1, Nth se puede inferir como 4, en el caso de que el valor de cclm_reduced_sample_num sea 2, Nth se puede inferir como 8, y en el caso de que el valor de cclm_reduced_sample_num sea 3, Nth se puede inferir como 16.
Por otro lado, en el caso de que la información adicional que representa Nth se transmita en una unidad de CU, corte, imagen o secuencia, el aparato de codificación puede determinar el valor de Nth como a continuación y transmitir la información adicional que representa Nth que representa el valor de Nth.
- En el caso de que la información adicional que representa Nth se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM, el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del método determinado al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de CCLM existente, se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando Nth se establece a 2 y se realice un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de CCLM propuesto en la presente realización, se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- Como alternativa, en el caso de que la información adicional que representa Nth se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 4, la Tabla 5 o la Tabla 6 que se han descrito anteriormente y transmitir la información adicional que representa Nth. El aparato de codificación puede configurar el valor de Nth considerando un tamaño de una imagen de entrada o de acuerdo con una tasa de bits objetivo de codificación.
1) Por ejemplo, en el caso de que una imagen de entrada sea de calidad HD o más, el aparato de codificación puede establecer como Nth = 8, y en el caso de que una imagen de entrada sea de calidad HD o menos, el aparato de codificación puede establecer como Nth = 4.
2) En el caso de que se requiera una codificación de imágenes de alta calidad, el aparato de codificación puede establecer como Nth = 8, y en el caso de que se requiera una codificación de imágenes de calidad normal, el aparato de codificación puede establecer como Nth = 2.
Por otro lado, como se representa en la Tabla 3 que se ha descrito anteriormente, cuando se usa el método propuesto en la presente realización, se identifica que una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM no se aumenta incluso si se aumenta el tamaño del bloque. Como un ejemplo, en el caso de que un tamaño de bloque de croma actual sea 32 x 32, una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM se puede reducir como un 86 % a través del método propuesto en la presente realización (por ejemplo, se establece: Nth = 4).
La tabla a continuación puede representar unos datos de resultado de experimento en el caso de que el Nth sea 2.
continuación
Además, la tabla a continuación puede representar unos datos de resultado de experimento en el caso de que el Nth sea 4.
T l 1
Además, la tabla a continuación puede representar unos datos de resultado de experimento en el caso de que el Nth sea 8.
T l 11
Además, la tabla a continuación puede representar unos datos de resultado de experimento en el caso de que el Nth sea 16.
continuación
Las tablas de la Tabla 8 a la Tabla 11 anteriores pueden representar la eficiencia de codificación y la complejidad de funcionamiento en el caso de que el Nth sea 2, 4, 8 y 16, respectivamente.
Haciendo referencia a las tablas de la Tabla 8 a la Tabla 11 anteriores, se identifica que la eficiencia de codificación no se cambia de forma significativa incluso en el caso de reducir una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM. Por ejemplo, haciendo referencia a la Tabla 9, en el caso de que el Nth se establezca a 4 (Nth = 4), la eficiencia de codificación para cada componente es Y 0,04 %, Cb 0,12 % y Cr 0,07 %, lo que identifica que la eficiencia de codificación no se cambia de forma significativa en comparación con el caso de no establecer el Nth, y la complejidad de codificación y de descodificación se reduce al 97 % y al 95 %, respectivamente.
Además, haciendo referencia a la Tabla 10 y la Tabla 11, en el caso de reducir una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM (es decir, Nth = 8 o 16), se identifica que la eficiencia de codificación se vuelve mejor y se reduce la complejidad de codificación y de descodificación.
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Las figuras 8a y 8b son diagramas para describir un procedimiento para realizar una predicción de CCLM para un bloque de croma actual de acuerdo con una realización.
Haciendo referencia a la figura 8a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S800). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 8b.
La figura 8b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 8b, el aparato de codificación/aparato de descodificación puede establecer Nth para el bloque de croma actual (la etapa S805). El Nth puede ser un valor predeterminado o inferirse basándose en la información adicional para Nth. El Nth se puede establecer a 2, 4, 8 o 16.
Posteriormente, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S810).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede determinar si N, una anchura del bloque actual, es mayor que el Nth (la etapa S815).
En el caso de que N sea mayor que el Nth, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S820).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S825).
Además, en el caso de que N no sea mayor que el Nth, el aparato de codificación/aparato de descodificación puede seleccionar 2N muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S830). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S825).
Por otro lado, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S835). En el presente caso, M puede representar un valor mayor que N (N < M).
Posteriormente, el aparato de codificación/aparato de descodificación determina si el N es mayor que el Nth (la etapa S840).
En el caso de que N sea mayor que el Nth, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S845).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S825).
Además, en el caso de que N no sea mayor que el Nth, el aparato de codificación/aparato de descodificación puede seleccionar 2N muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S850). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S825).
Haciendo referencia de nuevo a la figura 8a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S860). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Por otro lado, en la presente divulgación, al inferir el parámetro de CCLM, se puede proponer una realización que es diferente de la presente realización de reducción de la complejidad de funcionamiento para inferir el parámetro de CCLM.
Como un ejemplo, con el fin de solucionar el problema del aumento de la cantidad de operaciones de parámetro de CCLM a medida que aumenta el tamaño del bloque de croma que se ha descrito anteriormente, se puede proponer una realización para calcular el parámetro de CCLM configurando un límite superior de selección de muestras vecinas Nth a un tamaño de bloque del bloque de croma actual de forma adaptativa y seleccionando un píxel vecino del bloque de croma actual basándose en el Nth configurado. El Nth también se puede representar como un número de muestras vecinas máximo.
Por ejemplo, el Nth se puede configurar a un tamaño de bloque del bloque de croma actual de forma adaptativa como a continuación.
- En el caso de que N <= TH en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, N <= M), se configura: Nth = 2.
- En el caso de que N > TH en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, N <= M), se configura: Nth = 4.
En este caso, por ejemplo, dependiendo de un valor umbral TH, una muestra de referencia usada para calcular el parámetro de CCLM se puede seleccionar como a continuación.
Por ejemplo, en el caso de que el TH sea 4 (TH = 4), y en el caso de que el N del bloque de croma actual sea 2 o 4, se usan dos pares de muestras para un lado de bloque, y se puede calcular el parámetro de CCLM, y en el caso de que el N sea 8, 16 o 32, se usan cuatro pares de muestras para un lado de bloque, y se puede calcular el parámetro de CCLM.
Además, por ejemplo, en el caso de que el TH sea 8 (TH = 8), se usan dos pares de muestras para un lado de bloque, y se puede calcular el parámetro de CCLM, y en el caso de que el N sea 16 o 32, se usan cuatro pares de muestras para un lado de bloque, y se puede calcular el parámetro de CCLM.
Como se ha descrito anteriormente, de acuerdo con la presente realización, el Nth se configura a un tamaño de bloque del bloque de croma actual de forma adaptativa, se puede seleccionar un número de muestras que se optimiza para un tamaño de bloque.
Por ejemplo, una cantidad de operaciones para el cálculo de parámetro de CCLM de acuerdo con el método de selección de muestras de referencia de CCLM existente y la presente realización se puede representar como la siguiente tabla.
En el presente caso, la N puede representar el valor más pequeño de una anchura y una altura del bloque actual. Haciendo referencia a la Tabla 12 anterior, en el caso de que se use el método de selección de muestras de referencia de CCLM propuesto en la presente realización, no se aumenta una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM incluso en el caso de que se aumente un tamaño de bloque.
Por otro lado, el TH se puede inferir como un valor predeterminado en el aparato de codificación y en el aparato de descodificación sin necesidad de transmitir información adicional que representa el TH. Como alternativa, información adicional que representa el TH se puede transmitir en una unidad de Unidad de Codificación (CU), corte, imagen o secuencia, y el TH se puede inferir basándose en la información adicional que representa el TH. La información adicional que representa el TH puede representar un valor del TH.
Por ejemplo, en el caso de que la información adicional que representa TH se transmita en una unidad de CU, cuando un modo de intra predicción de un bloque de croma actual es el modo de CCLM, como se describe a continuación, se puede proponer un método para analizar un elemento de sintaxis cclm_reduced_sample_flag y realizar un procedimiento de cálculo de parámetro de CCLM. El cclm_reduced_sample_flag puede representar un elemento de sintaxis de una bandera de muestra reducida de CCLM.
- En el caso de que cclm_reduced_sample_flag sea 0 (falso), se configura el Nth = 4 para todos los bloques, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente.
- En el caso de que cclm_reduced_sample_flag sea 1 (verdadero), se configura el TH = 4, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas propuesto en la presente realización que se ha descrito anteriormente.
Como alternativa, en el caso de que la información adicional que representa TH se transmita en una unidad de corte, imagen o secuencia, como se describe a continuación, el valor de TH se puede descodificar basándose en la información adicional transmitida a través de una sintaxis de alto nivel (HLS).
Por ejemplo, la información adicional señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
T l 1
cclm_reduced_sample_threshold puede representar un elemento de sintaxis de la información adicional que representa TH.
Como alternativa, por ejemplo, la información adicional señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
Como alternativa, por ejemplo, la información adicional señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
El valor de TH, que se infiere basándose en el valor de cclm_reduced_sample_threshold (es decir, un valor inferido descodificando cclm_reduced_sample_threshold) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
Por ejemplo, haciendo referencia a la Tabla 16 anterior, el TH se puede inferir basándose en el cclm_reduced_sample_threshold. En el caso de que el valor de cclm_reduced_sample_threshold sea 0, el TH se puede inferir como 4, y en el caso de que el valor de cclm_reduced_sample_threshold sea 1, el TH se puede inferir como 8.
Por otro lado, en el caso de que el TH se infiera como un valor predeterminado en el aparato de codificación y en el aparato de descodificación sin transmitir información adicional separada, el aparato de codificación puede realizar el cálculo de parámetro de CCLM para la predicción de CCLM como la presente realización que se ha descrito anteriormente basándose en el valor de TH predeterminado.
Como alternativa, el aparato de codificación puede determinar si usar el valor umbral TH y puede transmitir información que representa si usar el TH y la información adicional que representa el valor de TH al aparato de descodificación como a continuación.
- En el caso de que la información que representa si usar el TH se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM (es decir, la predicción de CCLM se aplica al bloque de croma actual), el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del método determinado al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando el Nth se establece a 4 para todos los bloques y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente, se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando el TH se establece a 4 y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto, se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- Como alternativa, en el caso de que la información que representa si usar el TH se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 13, la Tabla 14 o la Tabla 15 que se han descrito anteriormente y transmitir la información que representa si usar el TH. El aparato de codificación puede configurar el uso del TH considerando un tamaño de una imagen de entrada o de acuerdo con una tasa de bits objetivo de codificación.
1) Por ejemplo, en el caso de que una imagen de entrada sea de calidad HD o más, el aparato de codificación puede establecer como TH = 8, y en el caso de que una imagen de entrada sea de calidad HD o menos, el aparato de codificación puede establecer como t H = 4.
2) En el caso de que se requiera una codificación de imágenes de alta calidad, el aparato de codificación puede establecer como TH = 8, y en el caso de que se requiera una codificación de imágenes de calidad normal, el aparato de codificación puede establecer como TH = 4.
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación. Las figuras 9a y 9b son diagramas para describir un procedimiento para realizar una predicción de CCLM para un bloque de croma actual de acuerdo con una realización.
Haciendo referencia a la figura 9a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S900). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 9b.
La figura 9b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 9b, el aparato de codificación/aparato de descodificación puede establecer TH para el bloque de croma actual (la etapa S905). El TH puede ser un valor predeterminado o inferirse basándose en la información adicional para TH. El TH se puede establecer a 4 u 8.
Posteriormente, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S910).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede determinar si N, una anchura del bloque actual, es mayor que el TH (la etapa S915).
En el caso de que N sea mayor que el TH, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S920). En el presente caso, el Nth puede ser 4. Es decir, en el caso de que N sea mayor que el TH, el Nth puede ser 4.
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S925).
Además, en el caso de que N no sea mayor que el TH, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S930). Es decir, en el caso de que N no sea mayor que el TH, el Nth puede ser 2. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S925). Por otro lado, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S935). En el presente caso, M puede representar un valor mayor que N (N < M).
Posteriormente, el aparato de codificación/aparato de descodificación determina si el N es mayor que el TH (la etapa S940).
En el caso de que N sea mayor que el TH, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S945). En el presente caso, el Nth puede ser 4. Es decir, en el caso de que N sea mayor que el TH, el Nth puede ser 4.
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S925).
Además, en el caso de que N no sea mayor que el TH, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S950). En el presente caso, el Nth puede ser 2. Es decir, en el caso de que N sea mayor que el TH, el Nth puede ser 2. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S925).
Haciendo referencia de nuevo a la figura 9a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S960). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Por otro lado, en la presente divulgación, al inferir el parámetro de CCLM, se puede proponer una realización que es diferente de la presente realización de reducción de la complejidad de funcionamiento para inferir el parámetro de CCLM.
En particular, con el fin de solucionar el problema del aumento de la cantidad de operaciones de parámetro de CCLM a medida que aumenta el tamaño del bloque de croma que se ha descrito anteriormente, la presente realización propone un método para configurar un límite superior de selección de píxeles Nth de forma adaptativa. Además, en el caso de que N = 2 (en el presente caso, N es un valor menor entre una anchura y una altura de un bloque de croma), con el fin de evitar que tuviera lugar la operación del caso más desfavorable (se realiza una predicción de CCLM de casos para todos los bloques de croma, después de que todos los bloques de croma en una CTU se hayan dividido a un tamaño 2 x 2 ) en la predicción de CCLM para un bloque de croma de tamaño 2 x 2 , la presente realización propone un método para configurar Nth de forma adaptativa, y a través de esto, una cantidad de operaciones para el cálculo de parámetro de CCLM en el caso más desfavorable se puede reducir en aproximadamente un 40 %.
Por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 1 en la presente realización (método propuesto 1)
- En el caso de que N <= 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N > 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 2 en la presente realización (método propuesto 2)
- En el caso de que N <= 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N = 8 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
- En el caso de que N > 8 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 8 (Nth = 8).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 3 en la presente realización (método propuesto 3)
- En el caso de que N <= 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N > 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 2 (Nth = 2).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 4 en la presente realización (método propuesto 4)
- En el caso de que N <= 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N > 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
Los métodos del método 1 al método 4 descritos anteriormente en la presente realización pueden reducir la complejidad del caso más desfavorable en aproximadamente un 40 %, y debido a que Nth se puede aplicar de forma adaptativa a cada tamaño de bloque de croma, se puede minimizar la pérdida de codificación. Además, por ejemplo, debido a que el método 2 puede aplicar Nth hasta 8 de forma variable, esto puede ser apropiado para una codificación de imágenes de alta calidad. Debido a que el método 3 y el método 4 pueden reducir Nth a 4 o 2, la complejidad de CCLM se puede reducir de forma significativa y puede ser apropiada para una baja o una calidad de imagen media.
Como se describe en los métodos del método 1 al método 4, de acuerdo con la presente realización, Nth se puede configurar de forma adaptativa a un tamaño de bloque y, a través de esto, se puede seleccionar un número de muestras de referencia para inferir un parámetro de CCLM optimizado.
El aparato de codificación/aparato de descodificación puede establecer el límite superior Nth para la selección de muestras vecinas y, entonces, calcular un parámetro de CCLM seleccionando una muestra vecina de bloque de croma como se ha descrito anteriormente.
Una cantidad de cálculo de parámetro de CCLM de acuerdo con un tamaño de bloque de croma en el caso al que se aplica la presente realización que se ha descrito anteriormente se puede representar como la siguiente tabla.
T l 11
Como se representa en la Tabla 17 anterior, en el caso de que se usen los métodos propuestos en la presente realización, se identifica que una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM no se aumenta incluso si se aumenta el tamaño del bloque.
Por otro lado, de acuerdo con la presente realización, sin necesidad de transmitir información adicional, se puede usar un valor prometido en el aparato de codificación y en el aparato de descodificación, o se puede transmitir si usar el método propuesto e información que representa el valor de Nth en una unidad de CU, corte, imagen y secuencia.
Por ejemplo, en el caso de que información que representa si usar el método propuesto se use en una unidad de CU, cuando un modo de intra predicción de un bloque de croma actual es el modo de CCLM (es decir, en el caso de que la predicción de CCLM se aplique al bloque de croma actual), se puede analizar cclm_reduced_sample_flag y la presente realización que se ha descrito anteriormente se puede realizar como a continuación.
- En el caso de que el cclm_reduced_sample_flag sea 0 (falso), se configura Nth = 4 para todos los bloques, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente.
- En el caso de que cclm_reduced_sample_flag sea 1 (verdadero), se realiza un cálculo de parámetro de CCLM a través del método 3 de la presente realización que se ha descrito anteriormente.
Como alternativa, en el caso de que la información que representa el método aplicado se transmita en una unidad de corte, imagen o secuencia, como se describe a continuación, se puede seleccionar el método de entre los métodos del método 1 al método 4 basándose en la información transmitida a través de una sintaxis de alto nivel (HLS), y basándose en el método seleccionado, se puede calcular el parámetro de CCLM.
Por ejemplo, la información que representa el método aplicado señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
cclm_reduced_sample_threshold puede representar un elemento de sintaxis de la información que representa el método aplicado.
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
T l 1
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
T l 2
El método seleccionado basándose en un valor de cclm_reduced_sample_threshold (es decir, un valor inferido descodificando cclm_reduced_sample_threshold) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
Haciendo referencia a la Tabla 21, en el caso de que el valor del cclm_reduced_sample_threshold sea 0, se puede seleccionar el método 1 como el método aplicado al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 1, se puede seleccionar el método 2 como el método aplicado al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 2, se puede seleccionar el método 3 como el método aplicado al bloque de croma actual, y en el caso de que el valor del cclm_reduced_sample_threshold sea 3, se puede seleccionar el método 4 como el método aplicado al bloque de croma actual.
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para inferir una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Por otro lado, en el caso de que la información que representa uno de los métodos se transmita en una unidad de CU, corte, imagen y secuencia, el aparato de codificación puede determinar uno de los métodos del método 1 al método 4 y transmitir la información al aparato de descodificación como a continuación.
- En el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM (es decir, la predicción de CCLM se aplica al bloque de croma actual), el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del método determinado al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando el Nth se establece a 4 para todos los bloques y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente, se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando se configura que se aplica el método 3 y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto, se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- Como alternativa, en el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 18, la Tabla 19 o la Tabla 20 que se han descrito anteriormente y transmitir la información que representa un método de entre los métodos. El aparato de codificación puede configurar el método aplicado de entre los métodos considerando un tamaño de una imagen de entrada o de acuerdo con una tasa de bits objetivo de codificación.
1) Por ejemplo, en el caso de que una imagen de entrada sea de calidad HD o más, el aparato de codificación puede aplicar el método 2 (Nth = 1, 2, 4 u 8), y en el caso de que una imagen de entrada sea de calidad HD o menos, el aparato de codificación puede aplicar el método 1 (Nth = 1,2 o 4).
2) En el caso de que se requiera una codificación de imágenes de alta calidad, el aparato de codificación puede aplicar el método 2 (Nth =1,2, 4 u 8), y en el caso de que se requiera una codificación de imágenes de calidad normal, el aparato de codificación puede aplicar el método 4 (Nth = 1 o 4).
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Las figuras 10a y 10b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 10a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1000). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 10b.
La figura 10b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 10b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1005).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1010) y determinar si N es menor que 2 (N < 2) (la etapa S1015).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1020). El aparato de codificación/aparato de descodificación determina si el N es menor que 2 (la etapa S1015). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que el N sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1025). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1030).
Por otro lado, en el caso de que el N no sea menor que 2, el aparato de codificación/aparato de descodificación puede determinar si el N es 4 o menos (N <= 4) (la etapa S1035).
En el caso de que N sea 4 o menos, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1040). En el presente caso, el Nth puede ser 2. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1030).
Como alternativa, en el caso de que N sea mayor que 4, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1045). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa Sl030).
Haciendo referencia de nuevo a la figura 10a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1050). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 11a y 11b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 11a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1100). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 11b.
La figura 11b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 11b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1105).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1110) y determinar si N es menor que 2 (N < 2) (la etapa S1115).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1120). El aparato de codificación/aparato de descodificación determina si el N es menor que 2 (la etapa S1115). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que el N sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1125). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1130).
Por otro lado, en el caso de que el N no sea menor que 2, el aparato de codificación/aparato de descodificación puede determinar si el N es 4 o menos (N <= 4) (la etapa S1135).
En el caso de que N sea 4 o menos, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1140). En el presente caso, el Nth puede ser 2. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1130).
Por otro lado, en el caso de que el N sea mayor que 4, el aparato de codificación/aparato de descodificación puede determinar si el N es 8 o menos (N <= 8) (la etapa S1145).
En el caso de que el N sea 8 o menos, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1150). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1130).
Como alternativa, en el caso de que el N sea mayor que 8, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1155). En el presente caso, el Nth puede ser 8 (Nth = 8). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1130).
Haciendo referencia de nuevo a la figura 11a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1160). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 12a y 12b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 12a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1200). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 12b.
La figura 12b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 12b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1205).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1210) y determinar si N es menor que 2 (N < 2) (la etapa S1215).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1220). El aparato de codificación/aparato de descodificación determina si el N es menor que 2 (la etapa S1215). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que el N sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1225). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1230).
Por otro lado, en el caso de que el N no sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1235). En el presente caso, el Nth puede ser 2. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1230).
Haciendo referencia de nuevo a la figura 12a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1240). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 13a y 13b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 4 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 13a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1300). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 13b.
La figura 13b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 13b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1305).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1310) y determinar si N es menor que 2 (N < 2) (la etapa S1315).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1320). El aparato de codificación/aparato de descodificación determina si el N es menor que 2 (la etapa S1315). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que el N sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1325). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1330).
Por otro lado, en el caso de que el N no sea menor que 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1335). En el presente caso, el Nth puede ser 4. Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1330).
Haciendo referencia de nuevo a la figura 13a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1340). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Por otro lado, en la presente divulgación, al inferir el parámetro de CCLM, se puede proponer una realización que es diferente de la presente realización de reducción de la complejidad de funcionamiento para inferir el parámetro de CCLM.
En particular, con el fin de solucionar el problema del aumento de la cantidad de operaciones de parámetro de CCLM a medida que aumenta el tamaño del bloque de croma que se ha descrito anteriormente, la presente realización propone un método para configurar un límite superior de selección de píxeles Nth de forma adaptativa.
Por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 1 en la presente realización (método propuesto 1)
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño 2 x 2 , Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N < M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N > 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 2 en la presente realización (método propuesto 2)
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño 2 x 2 , Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N < M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N > 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 3 en la presente realización (método propuesto 3)
- En el caso de que un bloque de croma actual sea un bloque de croma de tamaño 2 x 2 , Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N < M), Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 4 (Nth = 4).
- En el caso de que N > 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N (en el presente caso, por ejemplo, N <= M), Nth se puede establecer a 8 (Nth = 8).
Los métodos del método 1 al método 3 descritos anteriormente en la presente realización pueden reducir la complejidad del caso más desfavorable en el caso de que el bloque de crominancia actual sea 2 x 2 en aproximadamente un 40 %, y debido a que Nth se puede aplicar de forma adaptativa a cada tamaño de bloque de croma, se puede minimizar la pérdida de codificación. Además, por ejemplo, debido a que el método 1 y el método 3 pueden aplicar Nth a 4 en el caso de N > 2, esto puede ser apropiado para una codificación de imágenes de alta calidad. Debido a que el método 2 puede reducir Nth a 2 incluso en el caso de N = 4, la complejidad de CCLM se puede reducir de forma significativa y puede ser apropiada para una baja o una calidad de imagen media.
Como se describe en los métodos del método 1 al método 3, de acuerdo con la presente realización, Nth se puede configurar de forma adaptativa a un tamaño de bloque y, a través de esto, se puede seleccionar un número de muestras de referencia para inferir un parámetro de CCLM optimizado.
El aparato de codificación/aparato de descodificación puede establecer el límite superior Nth para la selección de muestras vecinas y, entonces, calcular un parámetro de CCLM seleccionando una muestra vecina de bloque de croma como se ha descrito anteriormente.
Una cantidad de cálculo de parámetro de CCLM de acuerdo con un tamaño de bloque de croma en el caso al que se aplica la presente realización que se ha descrito anteriormente se puede representar como la siguiente tabla.
Como se representa en la Tabla 22 anterior, en el caso de que se usen los métodos propuestos en la presente realización, se identifica que una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM no se aumenta incluso si se aumenta el tamaño del bloque.
Por otro lado, de acuerdo con la presente realización, sin necesidad de transmitir información adicional, se puede usar un valor prometido en el aparato de codificación y en el aparato de descodificación, o se puede transmitir si usar el método propuesto e información que representa el valor de Nth en una unidad de CU, corte, imagen y secuencia.
Por ejemplo, en el caso de que información que representa si usar el método propuesto se use en una unidad de CU, cuando un modo de intra predicción de un bloque de croma actual es el modo de CCLM (es decir, en el caso de que la predicción de CCLM se aplique al bloque de croma actual), se puede analizar cclm_reduced_sample_flag y la presente realización que se ha descrito anteriormente se puede realizar como a continuación.
- En el caso de que el cclm_reduced_sample_flag sea 0 (falso), se configura Nth = 2 para todos los bloques, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente.
- En el caso de que cclm_reduced_sample_flag sea 1 (verdadero), se realiza un cálculo de parámetro de CCLM a través del método 1 de la presente realización que se ha descrito anteriormente.
Como alternativa, en el caso de que la información que representa el método aplicado se transmita en una unidad de corte, imagen o secuencia, como se describe a continuación, se puede seleccionar el método de entre los métodos del método 1 al método 3 basándose en la información transmitida a través de una sintaxis de alto nivel (HLS), y basándose en el método seleccionado, se puede calcular el parámetro de CCLM.
Por ejemplo, la información que representa el método aplicado señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
T l 21
cclm_reduced_sample_threshold puede representar un elemento de sintaxis de la información que representa el método aplicado.
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
T l 21
El método seleccionado basándose en un valor de cclm_reduced_sample_threshold (es decir, un valor inferido descodificando cclm_reduced_sample_threshold) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
Haciendo referencia a la Tabla 26, en el caso de que el valor del cclm_reduced_sample_threshold sea 0, los métodos de la presente realización que se han descrito anteriormente pueden no aplicarse al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 1, se puede seleccionar el método 1 como el método aplicado al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 2, se puede seleccionar el método 2 como el método aplicado al bloque de croma actual, y en el caso de que el valor del cclm_reduced_sample_threshold sea 3, se puede seleccionar el método 3 como el método aplicado al bloque de croma actual.
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para inferir una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Por otro lado, en el caso de que la información que representa uno de los métodos se transmita en una unidad de CU, corte, imagen y secuencia, el aparato de codificación puede determinar uno de los métodos del método 1 al método 3 y transmitir la información al aparato de descodificación como a continuación.
- En el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM (es decir, la predicción de CCLM se aplica al bloque de croma actual), el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del método determinado al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando el Nth se establece a 2 para todos los bloques y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente, se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando se configura que se aplica el método 1 y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto, se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- Como alternativa, en el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 23, la Tabla 24 o la Tabla 25 que se han descrito anteriormente y transmitir la información que representa un método de entre los métodos. El aparato de codificación puede configurar el método aplicado de entre los métodos considerando un tamaño de una imagen de entrada o de acuerdo con una tasa de bits objetivo de codificación.
1) Por ejemplo, en el caso de que una imagen de entrada sea de calidad HD o más, el aparato de codificación puede aplicar el método 3 (Nth = 1, 2, 4 u 8), y en el caso de que una imagen de entrada sea de calidad HD o menos, el aparato de codificación puede aplicar el método 1 (Nth = 1,2 o 4).
2) En el caso de que se requiera una codificación de imágenes de alta calidad, el aparato de codificación puede aplicar el método 3 (Nth = 1 ,2 , 4 u 8), y en el caso de que se requiera una codificación de imágenes de calidad normal, el aparato de codificación puede aplicar el método 2 (Nth = 1, 2, 2 o 4) o el método 1 (Nth = 1, 2 o 4).
El método propuesto en la presente realización se puede usar para un modo de CCLM que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Las figuras 14a y 14b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 14a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1400). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 14b.
La figura 14b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 14b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1405).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1410) y determinar si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1415).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1420). El aparato de codificación/aparato de descodificación determina si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1415). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1425). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1430).
Por otro lado, en el caso de que un tamaño del bloque de croma actual no sea 2 x 2 , el aparato de codificación/aparato de descodificación determina si el N es 2 (N == 2) (la etapa S1435).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1440). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1430).
Como alternativa, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1445). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1430).
Haciendo referencia de nuevo a la figura 14a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1450). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 15a y 15b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 15a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1500). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 15b.
La figura 15b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 15b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1505).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1510) y determinar si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1515).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1520). El aparato de codificación/aparato de descodificación determina si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1515). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1525). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1530).
Por otro lado, en el caso de que un tamaño del bloque de croma actual no sea 2 x 2 , el aparato de codificación/aparato de descodificación determina si el N es 2 (N == 2) (la etapa S1535).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1540). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1530).
Por otro lado, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede determinar si el N es 4 (N == 4) (la etapa S1545).
En el caso de que el N sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1550). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1530).
Como alternativa, en el caso de que el N no sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1555). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa Sl530).
Haciendo referencia de nuevo a la figura 15a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1560). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 16a y 16b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente.
Haciendo referencia a la figura 16a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1600). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 16b.
La figura 16b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 16b, el aparato de codificación/aparato de descodificación puede determinar si el bloque de croma actual es un bloque de croma cuadrado (la etapa S1605).
En el caso de que el bloque de croma actual sea un bloque de croma cuadrado, el aparato de codificación/aparato de descodificación puede establecer una anchura o una altura del bloque actual a N (la etapa S1610) y determinar si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1615).
Como alternativa, en el caso de que el bloque de croma actual no sea un bloque de croma cuadrado, un tamaño del bloque de croma actual se puede inferir en un tamaño M x N o en un tamaño N x M (la etapa S1620). El aparato de codificación/aparato de descodificación determina si un tamaño del bloque de croma actual es 2 x 2 (la etapa S1615). En el presente caso, la M representa un valor mayor que la N (N < M).
En el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1625). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir unos parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1630).
Por otro lado, en el caso de que un tamaño del bloque de croma actual no sea 2 x 2 , el aparato de codificación/aparato de descodificación determina si el N es 2 (N == 2) (la etapa S1635).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1640). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1630).
Por otro lado, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede determinar si el N es 4 (N == 4) (la etapa S1645).
En el caso de que el N sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1650). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S1630).
Como alternativa, en el caso de que el N no sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 2Nth muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S1655). En el presente caso, el Nth puede ser 8 (Nth = 8). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa Sl630).
Haciendo referencia de nuevo a la figura 16a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S1660). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Por otro lado, en el caso de que se requiera un submuestreo al inferir una muestra de referencia vecina para un cálculo de parámetro de CCLM, la presente divulgación propone una realización de selección de una muestra de submuestreo de forma más eficiente.
La figura 17 ilustra un ejemplo de selección de una muestra de referencia vecina de un bloque de croma.
Haciendo referencia a (a) de la figura 17, en un bloque de croma de tamaño 2 x 2 (N = 2), se pueden calcular unos parámetros de CCLM a y p para el bloque de croma basándose en 4 muestras de referencia vecinas. Las muestras de referencia vecinas pueden incluir 4 muestras de referencia vecinas del bloque de luma y 4 muestras de referencia vecinas del bloque de croma. Además, como las presentes realizaciones que se han descrito anteriormente, en el caso de que Nth para el bloque de croma de tamaño 2 x 2 se establezca a 1 (Nth = 1), haciendo referencia a (b) de la figura 17, se pueden calcular unos parámetros de CCLM a y p para el bloque de croma basándose en 2 muestras de referencia vecinas. Sin embargo, como se muestra en la figura 17, en el caso de usar muestras de referencia vecinas que se submuestrean a la mitad, debido a que las muestras de referencia vecinas están amontonadas en un lado de arriba derecho del bloque de croma actual, tiene lugar el problema de que no se considera la diversidad de muestras de referencia vecinas en el cálculo de parámetro de CCLM, lo que puede ser una causa de deterioro de precisión de parámetro de CCLM.
Las figuras 18a a 18c ilustran muestras de referencia vecinas inferidas a través del submuestreo existente y muestras de referencia vecinas inferidas a través de un submuestreo de acuerdo con la presente realización.
Como se muestra en la figura 18a y la figura 18b, una muestra vecina que está lejos de un lado izquierdo de arriba del bloque de croma actual se selecciona preferentemente a través del submuestreo de acuerdo con la presente realización, se pueden seleccionar valores de muestra más diversos en el cálculo de parámetro de CCLM.
Además, como se muestra en la figura 18c, la presente realización propone un submuestreo que selecciona un lado lejos de un lado izquierdo de arriba preferentemente incluso para un bloque de croma no cuadrado como un tamaño n x 2 o un tamaño 2 x n. A través de esto, se pueden seleccionar valores de muestra más diversos en el cálculo de parámetro de CCLM y, a través de esto, se puede mejorar la precisión de cálculo de parámetro de CCLM.
Por otro lado, el submuestreo existente se puede realizar basándose en la siguiente ecuación.
[Ecuación 5]
ldx_w - ( x * anchura) / subsample_num
ldx_h - ( y * altura ) / subsample_num
En el presente caso, Idx_w puede representar una muestra de referencia vecina (o una posición de una muestra de referencia vecina) adyacente a un bloque de croma actual de arriba que se infiere a través de un submuestreo, e Idx_h puede representar una muestra de referencia vecina (o una posición de una muestra de referencia vecina) adyacente a un bloque de croma actual izquierdo que se infiere a través de un submuestreo. Además, la anchura puede representar una anchura del bloque de croma actual y la altura puede representar una altura del bloque de croma actual. Además, subsample_num puede representar el número de muestras de referencia vecinas (el número de muestras de referencia vecinas adyacentes a un lado) que se infiere a través de un submuestreo.
Por ejemplo, el submuestreo realizado basándose en la Ecuación 5 anterior se puede realizar como a continuación.
x de la Ecuación 5 anterior es una variable y se puede aumentar de 0 a un número de muestras de referencia de las muestras de referencia vecinas de arriba del bloque de croma actual después de un submuestreo. Como un ejemplo, en el caso de que se seleccionen 2 muestras de referencia vecinas de arriba en el bloque de croma actual cuya anchura es 16, la anchura de la Ecuación 5 es 16, y x puede variar de 0 a 1. Además, debido a que el Subsample_num es 2, se pueden seleccionar 0 y 8 como el valor de Idx_w. En consecuencia, en el caso de que la componente x y la componente y de una posición de muestra izquierda de arriba del bloque de croma actual sean 0, la muestra de referencia vecina de arriba cuya coordenada x es 0 y la muestra de referencia vecina de arriba cuya coordenada x es 8 se pueden seleccionar de entre las muestras de referencia vecinas de arriba a través del submuestreo.
y de la Ecuación 5 anterior es una variable y se puede aumentar de 0 a un número de muestras de referencia de las muestras de referencia vecinas izquierdas del bloque de croma actual después de un submuestreo. Como un ejemplo, en el caso de que se seleccionen 4 muestras de referencia vecinas izquierdas en el bloque de croma actual cuya altura es 32, la altura de la Ecuación 5 es 32, e y puede variar de 0 a 3. Además, debido a que el Subsample_num es 4, se pueden seleccionar 0, 8, 16 y 24 como el valor de Idx_h. En consecuencia, en el caso de que la componente x y la componente y de una posición de muestra izquierda de arriba del bloque de croma actual sean 0, la muestra de referencia vecina izquierda cuya coordenada y es 0, la muestra de referencia vecina izquierda cuya coordenada y es 8, la muestra de referencia vecina izquierda cuya coordenada y es 16 y la muestra de referencia vecina izquierda cuya coordenada y es 24 se pueden seleccionar de entre las muestras de referencia vecinas izquierdas a través del submuestreo.
Haciendo referencia a la Ecuación 5 anterior, solo las muestras cercanas a la parte izquierda de arriba del bloque de croma actual se pueden seleccionar a través del submuestreo.
Por lo tanto, de acuerdo con la presente realización, se puede realizar un submuestreo basándose en una ecuación diferente de la Ecuación 5 anterior. Por ejemplo, el submuestreo propuesto en la presente realización se puede realizar basándose en la siguiente ecuación.
[Ecuación 6]
ldx_w = anchura -1 - ( x * anchura ) / subsample_num_width
ldx_h = altura -1 - ( y * altura ) / subsample_num_height
En el presente documento, subsample_num_width puede representar un número de muestras de referencia vecinas de arriba inferido a través de un submuestreo, y subsample_num_height puede representar un número de muestras de referencia vecinas izquierdas inferido a través de un submuestreo.
Además, x es una variable y se puede aumentar de 0 a un número de muestras de referencia de las muestras de referencia vecinas de arriba del bloque de croma actual después de un submuestreo. Además, y es una variable y se puede aumentar de 0 a un número de muestras de referencia de las muestras de referencia vecinas izquierdas del bloque de croma actual después de un submuestreo.
Por ejemplo, haciendo referencia a la Ecuación 6 anterior, en el caso de que se seleccionen 2 muestras de referencia vecinas de arriba en el bloque de croma actual cuya anchura es 16, la anchura de la Ecuación 6 es 16, y x puede variar de 0 a 1. Además, debido a que el subsample_num_width es 2, se pueden seleccionar 15 y 7 como el valor de Idx_w. En consecuencia, en el caso de que la componente x y la componente y de una posición de muestra izquierda de arriba del bloque de croma actual sean 0, la muestra de referencia vecina de arriba cuya coordenada x es 15 y la muestra de referencia vecina de arriba cuya coordenada x es 7 se pueden seleccionar de entre las muestras de referencia vecinas de arriba a través del submuestreo. Es decir, de entre las muestras de referencia vecinas de arriba del bloque de croma actual, se puede seleccionar la muestra de referencia vecina de arriba que está lejos del lado izquierdo de arriba del bloque de croma actual.
Además, por ejemplo, haciendo referencia a la Ecuación 6 anterior, en el caso de que se seleccionen 4 muestras de referencia vecinas izquierdas en el bloque de croma actual cuya altura es 32, la altura de la Ecuación 6 es 32, e y puede variar de 0 a 3. Además, debido a que el subsample_num_height es 4, se pueden seleccionar 31, 23, 15 y 7 como el valor de Idx_h. En consecuencia, en el caso de que la componente x y la componente y de una posición de muestra izquierda de arriba del bloque de croma actual sean 0, la muestra de referencia vecina izquierda cuya coordenada y es 31, la muestra de referencia vecina izquierda cuya coordenada y es 23, la muestra de referencia vecina izquierda cuya coordenada y es 15 y la muestra de referencia vecina izquierda cuya coordenada y es 7 se pueden seleccionar de entre las muestras de referencia vecinas izquierdas a través del submuestreo.
Por otro lado, el subsample_num_width y el subsample_num_height de la Ecuación 6 anterior se pueden inferir basándose en un tamaño del bloque de croma actual. Por ejemplo, el subsample_num_width y el subsample_num_height se pueden inferir como se representa en la siguiente tabla.
T l 2 1
Haciendo referencia a la Tabla 27, se puede realizar un submuestreo para muestras de referencia vecinas adyacentes a un lado largo de acuerdo con un lado corto entre una anchura y una altura del bloque de croma actual. Es decir, el número de muestras de referencia vecinas seleccionadas de entre las muestras de referencia vecinas adyacentes a un lado largo se puede inferir como un valor menor entre una anchura y una altura del bloque de croma actual. Por ejemplo, se puede inferir como subsample_num_width = subsample_num_height = mín (anchura, altura).
Como alternativa, por ejemplo, en el caso de que se infiera el Nth, el subsample_num_width y el subsample_num_height se pueden inferir basándose en el Nth. Por ejemplo, el subsample_num_width y el subsample_num_height se pueden inferir como se representa en la siguiente tabla basándose en el Nth.
Tabla 281
En el presente documento, mín (A, B) puede representar un valor menor entre A y B.
Como alternativa, por ejemplo, basándose en una tabla de consulta (LUT) predeterminada, se puede realizar un submuestreo para inferir un número óptimo de muestras de referencia vecinas de acuerdo con una forma del bloque de croma actual. Por ejemplo, la LUT se puede inferir como se representa en la siguiente tabla.
T l 21
Haciendo referencia a la Tabla 29 anterior, el número seleccionado de muestras de referencia vecinas se puede aumentar en comparación con el submuestreo descrito anteriormente y, a través de esto, se puede calcular un parámetro de CCLM con una precisión más alta. En un submuestreo para inferir 6 muestras de referencia vecinas en el ejemplo descrito anteriormente, se pueden seleccionar las primeras 6 posiciones (idx_w o idx_h) de entre un submuestreo para inferir 8 muestras de referencia vecinas, y en un submuestreo para inferir 12 o 14 muestras de referencia vecinas, se pueden seleccionar las primeras 12 o 14 posiciones de entre un submuestreo para inferir 16 muestras de referencia vecinas. Además, en un submuestreo para inferir 24 o 28 muestras de referencia vecinas, se pueden seleccionar las primeras 24 o 28 posiciones de entre un submuestreo para inferir 32 muestras de referencia vecinas.
Como alternativa, con el fin de evitar un aumento de la complejidad de hardware, se puede realizar un submuestreo para inferir un número simplificado de muestras de referencia vecinas. Por ejemplo, la LUT se puede inferir como se representa en la siguiente tabla.
Haciendo referencia a la Tabla 30 anterior, un valor máximo de suma del subsample_num_width y del subsample_num_height se puede establecer a 8. A través de esto, la complejidad de hardware se puede reducir y, simultáneamente, un parámetro de CCLM se puede calcular de forma eficiente.
En un submuestreo para inferir 6 muestras de referencia vecinas en el ejemplo descrito anteriormente, se pueden seleccionar las primeras 6 posiciones (idx_w o idx_h) de entre un submuestreo para inferir 8 muestras de referencia vecinas.
De acuerdo con el método propuesto, sin necesidad de transmitir información adicional, se puede usar un valor prometido en un codificador o un descodificador, o se puede transmitir si usar el método propuesto o un valor en una unidad de CU, corte, imagen y secuencia.
En el caso de que se realice el submuestreo usando la LUT como se representa en la Tabla 29 y la Tabla 30 que se han descrito anteriormente, el aparato de codificación y el aparato de descodificación pueden usar los números de subsample_num_width y de subsample_num_height determinados en la Tabla (es decir, LUT), y en el caso de que se use el Nth, el subsample_num_width y el subsample_num_height se pueden determinar basándose en el valor de Nth. Además, en los otros casos, el valor inferido como la Tabla 28 se puede usar como un número de subsample_num_height y subsample_num_width por defecto.
Por otro lado, en el caso de que el método propuesto se transmita en una unidad de CU, es decir, se transmite la información que representa si aplicar un submuestreo usando la Ecuación 6 que se ha descrito anteriormente, un método para que el aparato de descodificación realice una predicción de CCL<m>analizando cclm_subsample_flag como a continuación, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM.
- En el caso de que cclm_subsample_flag sea 0 (falso), se realiza una selección de muestras de referencia vecinas y un cálculo de parámetro de CCLM a través del método de submuestreo existente (submuestreo basándose en la Ecuación 5 que se ha descrito anteriormente).
- En el caso de que cclm_subsample_flag sea 1 (verdadero), se realiza una selección de muestras de referencia vecinas y un cálculo de parámetro de CCLM a través del método de submuestreo propuesto (submuestreo basándose en la Ecuación 6 que se ha descrito anteriormente).
En el caso de que la información que representa si usar el método propuesto se transmita en una unidad de corte, imagen y secuencia, la información se puede transmitir a través de una sintaxis de alto nivel (HLS) como a continuación. El aparato de descodificación puede seleccionar un método de submuestreo que se realiza basándose en la información.
Por ejemplo, la información que representa si usar el método propuesto señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
cclm_reduced_sample_flag puede representar un elemento de sintaxis de la información que representa si usar el método propuesto.
Como alternativa, por ejemplo, la información que representa si usar el método propuesto señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
T l 2
Como alternativa, por ejemplo, la información que representa si usar el método propuesto señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
T l
El método seleccionado basándose en un valor de cclm_reduced_sample_flag (es decir, un valor inferido descodificando cclm_reduced_sample_flag) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
T l 4
Haciendo referencia a la Tabla 34, en el caso de que el valor de cclm_reduced_sample_flag sea 0, se puede realizar el submuestreo usando la Ecuación 5, y en el caso de que el valor de cclm_reduced_sample_flag sea 1, se puede realizar el submuestreo usando la Ecuación 6.
Por otro lado, en el caso de que se use un valor predeterminado en el aparato de codificación y en el aparato de descodificación sin transmitir la información adicional, el aparato de codificación puede realizar la realización que se ha descrito anteriormente de la misma forma que el aparato de descodificación y realizar un cálculo de parámetro de CCLM basándose en las muestras de referencia vecinas seleccionadas.
Como alternativa, en el caso de que la información que representa si aplicar el método de submuestreo propuesto se transmita en una unidad de CU, corte, imagen y secuencia, el aparato de codificación puede determinar si aplicar el método de submuestreo propuesto y, entonces, transmitir información del método determinado al aparato de descodificación.
- En el caso de que la información que representa si aplicar el método de submuestreo propuesto se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM, el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del valor que representa el caso correspondiente al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando se realiza un cálculo de parámetro de CCLM a través del submuestreo existente (submuestreo basándose en la Ecuación 5 que se ha descrito anteriormente), se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando se realiza un cálculo de parámetro de CCLM a través del submuestreo propuesto (submuestreo basándose en la Ecuación 5 que se ha descrito anteriormente), se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- En el caso de que la información que representa si aplicar el método de submuestreo propuesto se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 31, la Tabla 32 o la Tabla 33 que se han descrito anteriormente y transmitir la información.
La figura 19 ilustra un ejemplo de ejecución de una predicción de CCLM usando un submuestreo usando la Ecuación 6 que se ha descrito anteriormente.
Haciendo referencia a la figura 19, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S1900).
En particular, el aparato de codificación/aparato de descodificación puede determinar si se requiere submuestrear para muestras vecinas del bloque de croma actual (la etapa S1905).
Por ejemplo, con el fin de inferir parámetros de CCLM para el bloque de croma actual, en el caso de que se seleccionen muestras vecinas de arriba de un número menor que el de una anchura del bloque de croma actual, se requiere realizar el submuestreo para muestras vecinas de arriba del bloque de croma actual. Además, por ejemplo, con el fin de inferir parámetros de CCLM para el bloque de croma actual, en el caso de que se seleccionen muestras vecinas de arriba de un número menor que el de una altura del bloque de croma actual, se requiere realizar el submuestreo para muestras vecinas izquierdas del bloque de croma actual.
En el caso de que se requiera el submuestreo, el aparato de codificación/aparato de descodificación puede seleccionar un número específico de muestras vecinas realizando un submuestreo usando la Ecuación 6 para las muestras vecinas (la etapa S1910). Posteriormente, el aparato de codificación/aparato de descodificación puede calcular parámetros de CCLM para el bloque de croma actual basándose en las muestras vecinas seleccionadas (la etapa S1915).
En el caso de que no se requiera el submuestreo, el aparato de codificación/aparato de descodificación puede no realizar el submuestreo pero seleccionar las muestras vecinas del bloque de croma actual (la etapa S1920). Posteriormente, el aparato de codificación/aparato de descodificación puede calcular los parámetros de CCLM para el bloque de croma actual basándose en las muestras vecinas seleccionadas (la etapa S1915).
En el caso de que se infieran los parámetros de CCLM, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción del bloque de croma actual realizando una predicción de CCLM para el bloque de croma actual basándose en los parámetros de CCLM (la etapa S1925).
Por otro lado, en la presente divulgación, al inferir el parámetro de CCLM, se puede proponer una realización que es diferente de la presente realización de reducción de la complejidad de funcionamiento para inferir el parámetro de CCLM.
Con el fin de solucionar el problema del aumento de la cantidad de operaciones de parámetro de CCLM a medida que aumenta el tamaño del bloque de croma que se ha descrito anteriormente, la presente realización propone un método para configurar un límite superior de selección de píxeles Nth de forma adaptativa. El Nth también se puede denominar número de muestras vecinas máximo.
Además, en el caso de que N = 2 (en el presente caso, N es un valor menor entre una anchura y una altura de un bloque de croma), con el fin de evitar que tuviera lugar la operación del caso más desfavorable (se realiza una predicción de CCLM de casos para todos los bloques de croma, después de que todos los bloques de croma en una CTU se hayan dividido a un tamaño 2 x 2 ) en la predicción de CCLM para un bloque de croma de tamaño 2 x 2 , la presente realización propone un método para configurar Nth de forma adaptativa, y a través de esto, una cantidad de operaciones para el cálculo de parámetro de CCLM en el caso más desfavorable se puede reducir en aproximadamente un 50 %.
Por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 1 en la presente realización (método propuesto 1)
- En el caso de que N = 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N Nth se puede establecer a 2 (Nth = 2).
- En el caso de que N > 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N Nth se puede establecer a 4 (Nth = 4).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 2 en la presente realización (método propuesto 2)
- En el caso de que N = 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N, Nth se puede establecer a 1 (Nth = 1).
- En el caso de que N = 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N, Nth se puede establecer a 2 (Nth = 2).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 3 en la presente realización (método propuesto 3)
- En el caso de que N > 4 en el bloque de croma actual de tamaño N x M o de tamaño M x N, Nth se puede establecer a 4 (Nth = 4).
Como alternativa, por ejemplo, de acuerdo con la presente realización, el Nth se puede configurar a un tamaño de bloque de forma adaptativa como a continuación.
- Método 4 en la presente realización (método propuesto 4)
- En el caso de que N > 2 en el bloque de croma actual de tamaño N x M o de tamaño M x N, Nth se puede establecer a 2 (Nth = 2).
En la presente realización, el caso de que N = 2 puede representar el caso de que el número de muestras vecino para el cálculo de parámetro de CCLM sea 4 (es decir, 2N), y el caso de que Nth = 1 puede representar el caso de que solo 2 (es decir, 2Nth) muestras vecinas se usen para el cálculo de parámetro de CCLM. Además, el caso de que N = 4 puede representar el caso de que el número de muestras vecino para el cálculo de parámetro de CCLM sea 8 (es decir, 2N), y el caso de que Nth = 2 puede representar el caso de que solo 4 (es decir, 2Nth) muestras vecinas se usen para el cálculo de parámetro de CCLM.
Por lo tanto, de acuerdo con el método 1 anterior, en el caso de que se puedan usar 4 muestras vecinas para la predicción de CCLM (por ejemplo, el caso de que el modo de predicción de CCLM existente [es decir, el modo de LM_LA] se aplique al bloque de croma de tamaño 2 x N o de tamaño N x 2, el caso de que el modo de LM_A se aplique al bloque de croma de tamaño 2 x N y el caso de que el modo de LM_L se aplique al bloque de croma de tamaño N x 2), un parámetro de CCLM se calcula usando solo la mitad de las muestras vecinas y, en consecuencia, una cantidad de operaciones de comparación se puede reducir a la mitad en el caso más desfavorable. Además, incluso en el caso de que se puedan usar 8 muestras vecinas para la predicción de CCLM (por ejemplo, el caso de que el modo de predicción de CCLM existente [es decir, el modo de LM_LA] se aplique al bloque de croma de tamaño 4 x N o de tamaño N x 4, el caso de que el modo de LM_A se aplique al bloque de croma de tamaño 4 x N y el caso de que el modo de LM_L se aplique al bloque de croma de tamaño N x 4), un parámetro de CCLM se calcula usando solo la mitad de las muestras vecinas, una cantidad de operaciones de comparación se puede reducir de forma significativa. Además, incluso para el caso de usar más muestras vecinas, solo se usa un máximo de 8 muestras vecinas, y se puede realizar el cálculo de parámetro de CCLM.
Además, de acuerdo con el método 2 anterior, en el caso de que se puedan usar 4 muestras vecinas para la predicción de CCLM (por ejemplo, el caso de que el modo de predicción de CCLM existente [es decir, el modo de Lm_LA] se aplique al bloque de croma de tamaño 2 x N o de tamaño N x 2, el caso de que el modo de LM_A se aplique al bloque de croma de tamaño 2 x N y el caso de que el modo de LM_L se aplique al bloque de croma de tamaño N x 2), un parámetro de CCLM se calcula usando solo la mitad de las muestras vecinas y, en consecuencia, una cantidad de operaciones de comparación se puede reducir a la mitad en el caso más desfavorable. Además, incluso para el caso de usar más muestras vecinas, solo se usa un máximo de 4 muestras vecinas, y se puede realizar el cálculo de parámetro de CCLM.
Además, de acuerdo con el método 3 anterior, solo se usa un máximo de 8 muestras vecinas y se puede realizar el cálculo de parámetro de CCLM, y de acuerdo con el método 4 anterior, solo se usa un máximo de 4 muestras vecinas y se puede realizar el cálculo de parámetro de CCLM. Es decir, de acuerdo con el método 4, el parámetro de CCLM se puede calcular usando 4 bloques vecinos en todos los bloques de croma.
Los métodos del método 1 al método 4 descritos anteriormente en la presente realización pueden reducir la operación de comparación del caso más desfavorable en el caso de que N = 2 en aproximadamente un 50 %, y debido a que Nth se puede aplicar de forma adaptativa a cada tamaño de bloque de croma, se puede minimizar la pérdida de codificación.
Como se describe en los métodos del método 1 al método 4, de acuerdo con la presente realización, Nth se puede configurar de forma adaptativa a un tamaño de bloque y, a través de esto, se puede seleccionar un número de muestras de referencia para inferir un parámetro de CCLM optimizado.
El aparato de codificación/aparato de descodificación puede establecer el límite superior Nth para la selección de muestras vecinas y, entonces, calcular un parámetro de CCLM seleccionando una muestra vecina de bloque de croma como se ha descrito anteriormente.
Una cantidad de cálculo de parámetro de CCLM de acuerdo con un tamaño de bloque de croma en el caso al que se aplica la presente realización que se ha descrito anteriormente se puede representar como la siguiente tabla.
T l 1
Como se representa en la Tabla 35 anterior, en el caso de que se usen los métodos propuestos en la presente realización, se identifica que una cantidad de operaciones requeridas para el cálculo de parámetro de CCLM no se aumenta incluso si se aumenta el tamaño del bloque.
Por otro lado, de acuerdo con la presente realización, sin necesidad de transmitir información adicional, se puede usar un valor prometido en el aparato de codificación y en el aparato de descodificación, o se puede transmitir si usar el método propuesto e información que representa el valor de Nth en una unidad de CU, corte, imagen y secuencia.
Por ejemplo, en el caso de que información que representa si usar el método propuesto se use en una unidad de CU, cuando un modo de intra predicción de un bloque de croma actual es el modo de CCLM (es decir, en el caso de que la predicción de CCLM se aplique al bloque de croma actual), se puede analizar cclm_reduced_sample_flag y la presente realización que se ha descrito anteriormente se puede realizar como a continuación.
- En el caso de que el cclm_reduced_sample_flag sea 0 (falso), se configura Nth = 4 para todos los bloques, y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras vecinas de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente.
- En el caso de que cclm_reduced_sample_flag sea 1 (verdadero), se realiza un cálculo de parámetro de CCLM a través del método 2 de la presente realización que se ha descrito anteriormente.
Como alternativa, en el caso de que la información que representa el método aplicado se transmita en una unidad de corte, imagen o secuencia, como se describe a continuación, se puede seleccionar el método de entre los métodos del método 1 al método 4 basándose en la información transmitida a través de una sintaxis de alto nivel (HLS), y basándose en el método seleccionado, se puede calcular el parámetro de CCLM.
Por ejemplo, la información que representa el método aplicado señalizada a través de un encabezado de corte se puede representar como la siguiente tabla.
T l 1
cclm_reduced_sample_threshold puede representar un elemento de sintaxis de la información que representa el método aplicado.
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Imagen (PPS) se puede representar como la siguiente tabla.
T l
Como alternativa, por ejemplo, la información que representa el método aplicado señalizada a través de un Conjunto de Parámetros de Secuencia (SPS) se puede representar como la siguiente tabla.
El método seleccionado basándose en un valor de cclm_reduced_sample_threshold (es decir, un valor inferido descodificando cclm_reduced_sample_threshold) transmitido a través del encabezado de corte, el PPS o el SPS, se puede inferir como se representa en la siguiente tabla.
Haciendo referencia a la Tabla 39, en el caso de que el valor del cclm_reduced_sample_threshold sea 0, se puede seleccionar el método 1 como el método aplicado al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 1, se puede seleccionar el método 2 como el método aplicado al bloque de croma actual, en el caso de que el valor de cclm_reduced_sample_threshold sea 2, se puede seleccionar el método 3 como el método aplicado al bloque de croma actual, y en el caso de que el valor del cclm_reduced_sample_threshold sea 3, se puede seleccionar el método 4 como el método aplicado al bloque de croma actual.
El método propuesto en la presente realización se puede usar para el modo de CCLM (modo de LM_T, modo de LM_T o modo de LM_LT) que es un modo de intra predicción para la componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Por otro lado, los datos de resultado experimentales del método 1 y el método 2 propuestos en la realización que se ha descrito anteriormente pueden ser como a continuación.
La siguiente tabla puede representar los datos de resultado experimentales del método 1.
T l 41
Además, la siguiente tabla puede representar los datos de resultado experimentales del método 2.
T l 411
La Tabla 40 y la Tabla 41 pueden representar la eficiencia de codificación y la complejidad de funcionamiento a las que se aplican el método 1 y el método 2. En este experimento, un ancla es VTM3.0rc1, y este es un resultado experimental Todo intra.
Haciendo referencia a la Tabla 40, cuando se aplica el método 1, aunque se reduce una cantidad de operaciones de cálculo de parámetro de CCLM (Nth = 1,2 y 4), no hay pérdida de codificación, sino que, en su lugar, se puede obtener una ganancia de desempeño ligera (por ejemplo, una ganancia de desempeño de Y 0,02 %, Cb 0,12 %, Cr 0,17 %). Además, haciendo referencia a la Tabla 40, se identifica que la complejidad de codificación y de descodificación se reduce al 99 % y al 96 %, respectivamente.
Además, haciendo referencia a la Tabla 41, cuando se aplica el método 2, aunque se reduce una cantidad de operaciones de cálculo de parámetro de CCLM (Nth =1 y 2), la eficiencia de codificación no es diferente de la de la predicción de CCLM existente, y se identifica que la complejidad de codificación y de descodificación se reduce al 99 % y al 96 %, respectivamente.
Por otro lado, en el caso de que la información que representa uno de los métodos se transmita en una unidad de CU, corte, imagen y secuencia, el aparato de codificación puede determinar uno de los métodos del método 1 al método 4 y transmitir la información al aparato de descodificación como a continuación.
- En el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de CU, cuando un modo de intra predicción del bloque de croma actual es el modo de CCLM (es decir, en el caso de que la predicción de CCLM (modo de LM_T, modo de LM_T o modo de LM_LT) se aplique al bloque de croma actual), el aparato de codificación puede determinar un lado de eficiencia de codificación buena entre dos casos siguientes a través de RDO y transmitir información del método determinado al aparato de descodificación.
1) En el caso de que la eficiencia de codificación sea buena cuando el Nth se establece a 4 para todos los bloques y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto en la figura 8 que se ha descrito anteriormente, se transmite cclm_reduced_sample_flag de valor 0 (falso).
2) En el caso de que la eficiencia de codificación sea buena cuando se configura que se aplica el método 2 y se realiza un cálculo de parámetro de CCLM a través del método de selección de muestras de referencia de la presente realización que se ha propuesto, se transmite cclm_reduced_sample_flag de valor 1 (verdadero).
- Como alternativa, en el caso de que la información que representa si se aplica el método de la presente realización que se ha descrito anteriormente se transmita en una unidad de corte, imagen o secuencia, el aparato de codificación puede añadir una sintaxis de alto nivel (HLS) como se representa en la Tabla 36, la Tabla 37 o la Tabla 38 que se han descrito anteriormente y transmitir la información que representa un método de entre los métodos. El aparato de codificación puede configurar el método aplicado de entre los métodos considerando un tamaño de una imagen de entrada o de acuerdo con una tasa de bits objetivo de codificación.
1) Por ejemplo, en el caso de que una imagen de entrada sea de calidad HD o más, el aparato de codificación puede aplicar el método 1 (Nth =1, 2 o 4), y en el caso de que una imagen de entrada sea de calidad HD o menos, el aparato de codificación puede aplicar el método 2 (Nth = 1 o 2).
2) En el caso de que se requiera una codificación de imágenes de alta calidad, el aparato de codificación puede aplicar el método 3 (Nth = 4), y en el caso de que se requiera una codificación de imágenes de calidad normal, el aparato de codificación puede aplicar el método 4 (Nth = 2).
El método propuesto en la presente realización se puede usar para un modo de CCLM (modo de LM_T, modo de LM_T o modo de LM_LT) que es un modo de intra predicción para una componente de croma, y el bloque de croma predicho a través del modo de CCLM se puede usar para inferir una imagen residual a través de un diferencial a partir de una imagen original en el aparato de codificación o usarse para una imagen reconstruida a través de una adición con una señal residual en el aparato de descodificación.
Las figuras 20a y 20b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 1 de la presente realización que se ha descrito anteriormente. La predicción de CCLM puede representar la predicción de CCLM existente, es decir, una predicción de CCLM realizada basándose en el modo de LM_LT o una predicción de CCLM realizada basándose en el modo de LM_T.
Haciendo referencia a la figura 20a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S2000). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 20b.
La figura 20b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 20b, el aparato de codificación/aparato de descodificación puede establecer N basándose en una forma del bloque de croma actual y un modo de predicción de CCLM del bloque de croma actual (la etapa S2005). En el caso de que el modo de LM_LT se aplique al bloque de croma actual, un valor menor entre una anchura y una altura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya anchura es mayor que una altura, y el modo de LM_T se aplica al bloque de croma actual, una anchura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya altura es mayor que una anchura, y el modo de LM_L se aplica al bloque de croma actual, una altura del bloque de croma actual se puede establecer a N.
Posteriormente, el aparato de codificación/aparato de descodificación puede determinar si el N es 2 (N = 2) (la etapa S2010).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2015). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2020).
Por otro lado, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede determinar si el N es 4 (N = 4) (la etapa S2025).
En el caso de que el N sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 4 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2030). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2020).
Como alternativa, en el caso de que el N no sea 4, el aparato de codificación/aparato de descodificación puede seleccionar 8 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2035). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2020).
Haciendo referencia de nuevo a la figura 20a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S2040). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 21a y 21b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 2 de la presente realización que se ha descrito anteriormente. La predicción de CCLM puede representar la predicción de CCLM existente, es decir, una predicción de CCLM realizada basándose en el modo de LM_LT o una predicción de CCLM realizada basándose en el modo de LM_T.
Haciendo referencia a la figura 21a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S2100). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 21b.
La figura 21b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 21b, el aparato de codificación/aparato de descodificación puede establecer N basándose en una forma del bloque de croma actual y un modo de predicción de CCLM del bloque de croma actual (la etapa S2105). En el caso de que el modo de LM_LT se aplique al bloque de croma actual, un valor menor entre una anchura y una altura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya anchura es mayor que una altura, y el modo de LM_T se aplica al bloque de croma actual, una anchura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya altura es mayor que una anchura, y el modo de LM_L se aplica al bloque de croma actual, una altura del bloque de croma actual se puede establecer a N.
Posteriormente, el aparato de codificación/aparato de descodificación puede determinar si el N es 2 (N = 2) (la etapa S2110).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 2 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2115). En el presente caso, el Nth puede ser 1 (Nth = 1).
El aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2120).
Por otro lado, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 4 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2125). En el presente caso, el Nth puede ser 2 (Nth = 2). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2120).
Haciendo referencia de nuevo a la figura 21a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S2130). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
Las figuras 22a y 22b son diagramas para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 3 de la presente realización que se ha descrito anteriormente. La predicción de CCLM puede representar la predicción de CCLM existente, es decir, una predicción de CCLM realizada basándose en el modo de LM_LT o una predicción de CCLM realizada basándose en el modo de LM_T.
Haciendo referencia a la figura 22a, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S2200). Por ejemplo, el parámetro de CCLM se puede calcular como la presente realización que se muestra en la figura 22b.
La figura 22b puede ilustrar una realización específica del cálculo del parámetro de CCLM. Por ejemplo, haciendo referencia a la figura 22b, el aparato de codificación/aparato de descodificación puede establecer N basándose en una forma del bloque de croma actual y un modo de predicción de CCLM del bloque de croma actual (la etapa S2205). En el caso de que el modo de LM_LT se aplique al bloque de croma actual, un valor menor entre una anchura y una altura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya anchura es mayor que una altura, y el modo de LM_T se aplica al bloque de croma actual, una anchura del bloque de croma actual se puede establecer a N. Además, por ejemplo, en el caso de que el bloque de croma actual sea un bloque no cuadrado cuya altura es mayor que una anchura, y el modo de LM_L se aplica al bloque de croma actual, una altura del bloque de croma actual se puede establecer a N.
Posteriormente, el aparato de codificación/aparato de descodificación puede determinar si el N es 2 (N = 2) (la etapa S2210).
En el caso de que el N sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 4 muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2215). Es decir, el parámetro de CCLM se puede calcular usando muestras de referencia en la línea de referencia.
El aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2220).
Por otro lado, en el caso de que el N no sea 2, el aparato de codificación/aparato de descodificación puede seleccionar 8 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2225). En el presente caso, el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2220).
Haciendo referencia de nuevo a la figura 22a, en el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S2230). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
La figura 23 es un diagrama para describir un procedimiento para realizar una predicción de CCLM basándose en los parámetros de CCLM del bloque de croma actual inferido de acuerdo con el método 4 de la presente realización que se ha descrito anteriormente. La predicción de CCLM puede representar la predicción de CCLM existente, es decir, una predicción de CCLM realizada basándose en el modo de LM_LT o una predicción de CCLM realizada basándose en el modo de LM_T.
Haciendo referencia a la figura 23, el aparato de codificación/aparato de descodificación puede calcular un parámetro de CCLM para el bloque actual (la etapa S2300).
Por ejemplo, el aparato de codificación/aparato de descodificación puede seleccionar 4 (es decir, 2Nth) muestras vecinas en una línea de referencia adyacente al bloque actual como una muestra de referencia para el cálculo de parámetro de CCLM (la etapa S2305). En el presente caso, el Nth puede ser 2 (Nth = 2). O el Nth puede ser 4 (Nth = 4). Posteriormente, el aparato de codificación/aparato de descodificación puede inferir los parámetros a y p para la predicción de CCLM basándose en las muestras de referencia seleccionadas (la etapa S2310).
En el caso de que se calculen los parámetros para la predicción de CCLM para el bloque de croma actual, el aparato de codificación/aparato de descodificación puede realizar la predicción de CCLM basándose en los parámetros y generar una muestra de predicción para el bloque de croma actual (la etapa S2320). Por ejemplo, el aparato de codificación/aparato de descodificación puede generar una muestra de predicción para el bloque de croma actual basándose en los parámetros calculados y la Ecuación 1 que se ha descrito anteriormente en la que muestras reconstruidas del bloque de luma actual para el bloque de croma actual.
La figura 24 ilustra esquemáticamente un método de codificación de vídeo por el aparato de codificación de acuerdo con la presente divulgación. El método mostrado en la figura 24 puede ser realizado por el aparato de codificación mostrado en la figura 2. En un ejemplo específico, las etapas S2400 a S2460 de la figura 24 pueden ser realizadas por el predictor del aparato de codificación, y la etapa S2470 puede ser realizada por el codificador de entropía del aparato de codificación. Además, aunque no se muestra en los dibujos, el proceso de inferencia de la muestra residual para el bloque de croma actual basándose en la muestra original y la muestra de predicción para el bloque de croma actual puede ser realizado por el restador del aparato de codificación, el proceso de inferencia de muestras reconstruidas para el bloque de croma actual basándose en las muestras residuales y las muestras de predicción para el bloque de croma actual puede ser realizado por el sumador del aparato de codificación, el proceso de generación de información para el residuo para el bloque de croma actual basándose en la muestra residual puede ser realizado por el transformador del aparato de codificación, y el proceso de codificación de información para el residuo puede ser realizado por el codificador de entropía del aparato de codificación.
El aparato de codificación determina un modo de predicción de CCLM del bloque de croma actual de entre una pluralidad de modos de predicción de modelo lineal de componentes cruzadas (CCLM) (la etapa S2400). Por ejemplo, el aparato de codificación puede determinar un modo de intra predicción del bloque de croma actual basándose en el coste de distorsión de tasa (coste de RD; o RDO). En el presente caso, el coste de RD se puede inferir basándose en una Suma de Diferencia Absoluta (SAD). El aparato de codificación puede determinar uno de los modos de predicción de CCLM como el modo de intra predicción del bloque de croma actual basándose en el coste de RD. Es decir, el aparato de codificación puede determinar el modo de predicción de CCLM del bloque de croma actual de entre los modos de predicción de CCLM basándose en el coste de RD.
Además, el aparato de codificación puede codificar la información de modo de predicción que representa el modo de intra predicción del bloque de croma actual, y la información de modo de predicción se puede señalizar a través de un flujo de bits. El elemento de sintaxis que representa la información de modo de predicción para el bloque de croma actual puede ser intra_chroma_pred_mode. La información de vídeo puede incluir la información de modo de predicción.
Además, el aparato de codificación puede codificar la información de índice que indica el modo de predicción de CCLM del bloque de croma actual y señalizar la información de índice a través de un flujo de bits. La información de modo de predicción puede incluir la información de índice que indica el modo de predicción de CCLM del bloque de croma actual de entre los modos de predicción de modelo lineal de componentes cruzadas (CCLM). En el presente caso, los modos de predicción de CCLM pueden incluir un modo de LM de arriba izquierdo, un modo de LM de arriba y un modo de LM izquierdo. El modo de<l>M de arriba izquierdo puede representar el modo de LM_LT descrito anteriormente, el modo de LM izquierdo puede representar el modo de LM_L descrito anteriormente y el modo de LM de arriba puede representar el modo de LM_T descrito anteriormente. Además, el aparato de codificación puede codificar la bandera que representa si la predicción de CCLM se aplica al bloque de croma actual y señalizar la bandera a través de un flujo de bits. La información de modo de predicción puede incluir la bandera que representa si la predicción de CCLM se aplica al bloque de croma actual. Por ejemplo, en el caso de que la predicción de CCLM se aplique al bloque de croma actual, el modo de predicción de CCLM indicado por la información de índice se puede inferir como el modo de predicción de CCLM para el bloque de croma actual.
El aparato de codificación infiere un número de muestras de muestras de croma vecinas del bloque de croma actual basándose en el modo de predicción de CCLM del bloque de croma actual, un tamaño del bloque de croma actual y un valor específico (la etapa S2410).
En el presente caso, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, las muestras de croma vecinas pueden incluir solo las muestras de croma vecinas izquierdas del bloque de croma actual. Además, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, las muestras de croma vecinas pueden incluir solo las muestras de croma vecinas de arriba del bloque de croma actual. Además, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba izquierdo, las muestras de croma vecinas pueden incluir las muestras de croma vecinas izquierdas y las muestras de croma vecinas de arriba del bloque de croma actual.
Por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de codificación puede inferir el número de muestras basándose en una altura del bloque de croma actual y el valor específico.
Como un ejemplo, el aparato de codificación puede inferir el número de muestras de las muestras de croma vecinas comparando el doble de la altura y el doble del valor específico. Por ejemplo, en el caso de que el doble de la altura del bloque de croma actual sea mayor que el doble del valor específico, el número de muestras se puede inferir como el doble del valor específico. Además, por ejemplo, en el caso de que el doble de la altura del bloque de croma actual sea el doble del valor específico o menos, el número de muestras se puede inferir como el doble de la altura.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, el aparato de codificación puede inferir el número de muestras basándose en la anchura del bloque de croma actual y el valor específico.
Como un ejemplo, el aparato de codificación puede inferir el número de muestras de las muestras de croma vecinas comparando el doble de la anchura y el doble del valor específico. Por ejemplo, en el caso de que el doble de la anchura del bloque de croma actual sea mayor que el doble del valor específico, el número de muestras se puede inferir como el doble del valor específico. Además, por ejemplo, en el caso de que el doble de la anchura del bloque de croma actual sea el doble del valor específico o menos, el número de muestras se puede inferir como el doble de la anchura.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de codificación puede inferir el número de muestras de las muestras de croma vecinas de arriba y las muestras de croma vecinas izquierdas comparando la anchura y la altura con el valor específico.
Por ejemplo, en el caso de que la anchura y la altura del bloque de croma actual sean mayores que el valor específico, el número de muestras se puede inferir como el valor específico.
Además, por ejemplo, en el caso de que la anchura y la altura del bloque de croma actual sean el valor específico o menos, el número de muestras se puede inferir como un valor de la anchura y la altura. Como un ejemplo, el número de muestras se puede inferir como el valor menor de la anchura y la altura.
Por otro lado, el valor específico se puede inferir para inferir los parámetros de CCLM del bloque de croma actual. En el presente caso, el valor específico se puede denominar límite superior de número de muestras vecinas o número de muestras vecinas máximo. Como un ejemplo, el valor específico se puede inferir como 2. O el valor específico se puede inferir como 4, 8 o 16.
Además, por ejemplo, el valor específico se puede inferir como un valor predeterminado. Es decir, el valor específico se puede inferir como un valor que se promete entre el aparato de codificación y el aparato de descodificación. En otras palabras, el valor específico se puede inferir como un valor predeterminado para el bloque de croma actual al que se aplica el modo de CCLM.
Como alternativa, por ejemplo, el aparato de codificación puede codificar información que representa el valor específico y señalizar la información que representa el valor específico a través de un mapa de bits. La información de vídeo puede incluir la información que representa el valor específico. La información que representa el valor específico se puede señalizar en una unidad de unidad de codificación (CU). O la información que representa el valor específico se puede señalizar en una unidad de encabezado de corte, Conjunto de Parámetros de Imagen (PPS) o Conjunto de Parámetros de Secuencia (SPS). Es decir, la información que representa el valor específico se puede señalizar con un encabezado de corte, un Conjunto de Parámetros de Imagen (PPS) o un Conjunto de Parámetros de Secuencia (SPS).
Como alternativa, por ejemplo, el aparato de codificación puede codificar información de bandera que representa si el número de muestras de referencia vecinas se infiere basándose en el valor específico y señalizar la información de bandera a través de un mapa de bits. La información de vídeo puede incluir la información de bandera que representa si el número de muestras de referencia vecinas se infiere basándose en el valor específico. En el caso de que el valor de información de bandera sea 1, la información de bandera puede representar que el número de muestras de referencia vecinas se infiere basándose en el valor específico, y en el caso de que el valor de información de bandera sea 0, la información de bandera puede representar que el número de muestras de referencia vecinas no se infiere basándose en el valor específico. En el caso de que el valor de información de bandera sea 1, la información relacionada con la predicción puede incluir información que representa el valor específico, y el valor específico se puede inferir basándose en la información que representa el valor específico. La información de bandera y/o la información que representa el valor específico se puede señalizar en una unidad de unidad de codificación (CU). O la información de bandera y/o la información que representa el valor específico se pueden señalizar en una unidad de encabezado de corte, Conjunto de Parámetros de Imagen (PPS) o Conjunto de Parámetros de Secuencia (SPS). Es decir, la información de bandera y/o la información que representa el valor específico se pueden señalizar con un encabezado de corte, un PPS o un SPS.
Como alternativa, por ejemplo, el valor específico se puede inferir basándose en un tamaño del bloque de croma actual.
Como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 8, el valor específico se puede inferir como 4, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 8, el valor específico se puede inferir como 8.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 2.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 4, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 2.
Además, como un ejemplo, el valor específico se puede inferir basándose en si un valor menor entre la anchura y la altura del bloque actual es mayor que un valor umbral específico. Por ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque actual sea mayor que un valor umbral específico, el valor umbral específico se puede inferir como 4, en el caso de que un valor menor entre la anchura y la altura del bloque actual sea un valor umbral específico o menos, el valor umbral específico se puede inferir como 2. El valor umbral específico se puede inferir como un valor predeterminado. Es decir, el valor umbral específico se puede inferir como un valor que se promete entre el aparato de codificación y el aparato de descodificación. Como alternativa, por ejemplo, el aparato de codificación puede codificar la información de vídeo que incluye la información relacionada con la predicción, y la información relacionada con la predicción puede incluir la información que representa el valor umbral específico. En este caso, el valor umbral específico se puede inferir basándose en la información que representa el valor umbral específico. Por ejemplo, el valor umbral específico inferido puede ser 4 u 8.
El aparato de codificación puede inferir las muestras de croma vecinas del número de muestras (la etapa S2420). El aparato de codificación puede inferir las muestras de croma vecinas del número de muestras.
Por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba izquierdo, el aparato de codificación puede inferir muestras de croma vecinas izquierdas del número de muestras y muestras de croma vecinas de arriba del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea N x M, el aparato de codificación puede inferir las muestras de croma vecinas de arriba del número de muestras de entre N muestras de crominancia vecinas de arriba e inferir las muestras de crominancia vecinas izquierdas del número de muestras de entre N muestras de croma vecinas izquierdas. En el presente caso, N puede ser igual a o menor que M.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, el aparato de codificación puede inferir las muestras de croma vecinas de arriba del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea N x M, el aparato de codificación puede inferir las muestras de croma vecinas de arriba del número de muestras de entre 2N muestras de croma vecinas de arriba. En el presente caso, N puede ser igual a o menor que M.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de codificación puede inferir las muestras de croma vecinas izquierdas del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea M x N, el aparato de codificación puede inferir las muestras de croma vecinas izquierdas del número de muestras de entre 2N muestras de croma vecinas izquierdas. En el presente caso, N puede ser igual a o menor que M.
El aparato de codificación puede inferir muestras de luma vecinas submuestreadas y muestras de luma submuestreadas del bloque de luma actual (etapa, S2430). En el presente caso, las muestras de luma vecinas pueden corresponder a las muestras de croma vecinas. Por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del bloque de luma actual correspondientes a las muestras de croma vecinas de arriba y muestras de luma vecinas izquierdas submuestreadas del bloque de luma actual correspondientes a las muestras de croma vecinas izquierdas.
Es decir, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del número de muestras correspondientes a las muestras de croma vecinas de arriba y muestras de luma vecinas izquierdas submuestreadas del número de muestras correspondientes a las muestras de croma vecinas izquierdas.
Como alternativa, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del bloque de luma actual correspondientes a las muestras de croma vecinas de arriba. Es decir, por ejemplo, las muestras de luma vecinas pueden incluir muestras de luma vecinas de arriba de submuestreo del número de muestras correspondientes a las muestras de croma vecinas de arriba.
Como alternativa, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas izquierdas submuestreadas del bloque de luma actual correspondientes a las muestras de croma vecinas izquierdas. Es decir, por ejemplo, las muestras de luma vecinas pueden incluir muestras de luma vecinas izquierdas submuestreadas del número de muestras correspondientes a las muestras de croma vecinas izquierdas.
El aparato de codificación infiere parámetros de CCLM basándose en las muestras de croma vecinas y las muestras de luma vecinas submuestreadas (la etapa S2440). El aparato de codificación puede inferir los parámetros de CCLM basándose en las muestras de croma vecinas y las muestras de luma vecinas submuestreadas. Por ejemplo, los parámetros de CCLM se pueden inferir basándose en la Ecuación 3 que se ha descrito anteriormente. Como alternativa, por ejemplo, los parámetros de CCLM se pueden inferir basándose en la Ecuación 4 que se ha descrito anteriormente.
El aparato de codificación infiere muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas (la etapa S2450). El aparato de codificación puede inferir las muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas. El aparato de codificación puede aplicar el CCLM inferido mediante los parámetros de CCLM a las muestras de luma submuestreadas y generar muestras de predicción para el bloque de croma actual. Es decir, el aparato de codificación puede realizar una predicción de CCLM basándose en los parámetros de CCLM y generar muestras de predicción para el bloque de croma actual. Por ejemplo, las muestras de predicción se pueden inferir basándose en la Ecuación 1 que se ha descrito anteriormente.
El aparato de codificación codifica información de vídeo que incluye información de modo de predicción para el bloque de croma actual (la etapa S2460). El aparato de codificación puede codificar la información de vídeo que incluye información de modo de predicción para el bloque de croma actual y señalizar a través de un flujo de bits. La información de modo de predicción puede incluir una bandera que representa si la predicción de CCLM se aplica al bloque de croma actual. Además, la información de modo de predicción puede incluir información de índice que representa un modo de predicción de CCLM del bloque de croma actual.
Además, por ejemplo, la información de vídeo puede incluir información que representa el valor específico. Además, por ejemplo, la información de vídeo puede incluir la información que representa el valor específico. Además, por ejemplo, la información de vídeo puede incluir información de bandera que representa si el número de muestras de referencia vecinas se infiere basándose en el valor específico.
Por otro lado, aunque no se muestra en los dibujos, el aparato de codificación puede inferir muestras residuales para el bloque de croma actual basándose en las muestras originales y las muestras de predicción para el bloque de croma actual, generar información para un residuo para el bloque de croma actual basándose en las muestras residuales y codificar la información para el residuo. La información de vídeo puede incluir la información para el residuo. Además, el aparato de codificación puede generar muestras reconstruidas para el bloque de croma actual basándose en las muestras de predicción y las muestras residuales para el bloque de croma actual.
Por otro lado, el flujo de bits se puede transferir al aparato de descodificación a través de una red o un medio de almacenamiento (digital). En el presente caso, la red puede incluir una red de radiodifusión y/o una red de comunicación, y el medio de almacenamiento digital puede incluir diversos medios de almacenamiento tales como USB, SD, CD, DVD, Blu-ray, HDD y SSD y similares.
La figura 25 ilustra esquemáticamente el aparato de codificación que realiza el método de codificación de imágenes de acuerdo con la presente divulgación. El método mostrado en la figura 24 puede ser realizado por el aparato de codificación mostrado en la figura 25. En un ejemplo específico, el predictor del aparato de codificación puede realizar las etapas S2400 a S2450 de la figura 24, y el codificador de entropía del aparato de codificación puede realizar la etapa S2460 de la figura 24. Además, aunque no se muestra en los dibujos, el proceso de inferencia de la muestra residual para el bloque de croma actual basándose en la muestra original y la muestra de predicción para el bloque de croma actual puede ser realizado por el restador del aparato de codificación que se muestra en la figura 25, el proceso de inferencia de muestras reconstruidas para el bloque de croma actual basándose en las muestras residuales y las muestras de predicción para el bloque de croma actual puede ser realizado por el sumador del aparato de codificación que se muestra en la figura 25, el proceso de generación de información para el residuo para el bloque de croma actual basándose en la muestra residual puede ser realizado por el transformador del aparato de codificación que se muestra en la figura 25, y el proceso de codificación de información para el residuo puede ser realizado por el codificador de entropía del aparato de codificación que se muestra en la figura 17.
La figura 26 ilustra esquemáticamente un método de descodificación de vídeo por el aparato de descodificación de acuerdo con la presente divulgación. El método mostrado en la figura 26 puede ser realizado por el aparato de descodificación mostrado en la figura 3. En un ejemplo específico, la etapa S2600 de la figura 26 puede ser realizada por el descodificador de entropía del aparato de descodificación, y las etapas S2610 a S2650 pueden ser realizadas por el predictor del aparato de descodificación, y la etapa S1860 puede ser realizada por el sumador del aparato de descodificación. Además, aunque no se muestra en los dibujos, el proceso de adquisición de información para un residuo del bloque actual a través de un flujo de bits puede ser realizado por el descodificador de entropía del aparato de descodificación, y el proceso de inferencia de la muestra residual para el bloque actual basándose en la información residual puede ser realizado por el transformador inverso del aparato de descodificación.
El aparato de descodificación obtiene información que incluye la información de modo de predicción para el bloque de croma actual (la etapa S2600). El aparato de descodificación puede recibir información de vídeo que incluye la información de modo de predicción para el bloque de croma actual. La información de modo de predicción puede representar el modo de intra predicción del bloque de croma actual. Además, el elemento de sintaxis que representa la información de modo de predicción para el bloque de croma actual puede ser intra_chroma_pred_mode. La información de vídeo puede incluir la información de modo de predicción.
Además, la información de modo de predicción puede incluir la información de índice que indica el modo de predicción de CCLM del bloque de croma actual de entre los modos de predicción de modelo lineal de componentes cruzadas (CCLM). Los modos de predicción de CCLM pueden incluir un modo de LM de arriba izquierdo, un modo de LM de arriba y un modo de LM izquierdo. El modo de LM de arriba izquierdo puede representar el modo de LM_LT descrito anteriormente, el modo de LM izquierdo puede representar el modo de LM_L descrito anteriormente y el modo de LM de arriba puede representar el modo de LM_T descrito anteriormente. Además, la información de modo de predicción puede incluir la bandera que representa si la predicción de CCLM se aplica al bloque de croma actual. Por ejemplo, en el caso de que la predicción de CCLM se aplique al bloque de croma actual, el modo de predicción de CCLM indicado por la información de índice se puede inferir como el modo de predicción de CCLM para el bloque de croma actual.
El aparato de descodificación puede inferir uno de una pluralidad de modos de predicción de CCLM como el modo de predicción de CCLM para el bloque de croma actual basándose en la información de modo de predicción (la etapa S2610). El aparato de descodificación un modo de intra predicción del modo de intra predicción de croma actual basándose en la información de modo de predicción. Por ejemplo, la información de modo de predicción puede representar el modo de predicción de CCLM para el bloque de croma actual. Por ejemplo, el modo de predicción de CCLM para el bloque de croma actual se puede inferir basándose en la información de índice. De entre la pluralidad de modos de predicción de CCLM, el modo de predicción de CCLM indicado por la información de índice se puede inferir como el modo de predicción de CCLM para el bloque de croma actual.
El aparato de descodificación infiere un número de muestras de muestras de croma vecinas del bloque de croma actual basándose en el modo de predicción de CCLM del bloque de croma actual, un tamaño del bloque de croma actual y un valor específico (la etapa S2620).
En el presente caso, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, las muestras de croma vecinas pueden incluir solo las muestras de croma vecinas izquierdas del bloque de croma actual. Además, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, las muestras de croma vecinas pueden incluir solo las muestras de croma vecinas de arriba del bloque de croma actual. Además, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba izquierdo, las muestras de croma vecinas pueden incluir las muestras de croma vecinas izquierdas y las muestras de croma vecinas de arriba del bloque de croma actual.
Por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de descodificación puede inferir el número de muestras basándose en una altura del bloque de croma actual y el valor específico.
Como un ejemplo, el aparato de descodificación puede inferir el número de muestras de las muestras de croma vecinas comparando el doble de la altura y el doble del valor específico. Por ejemplo, en el caso de que el doble de la altura del bloque de croma actual sea mayor que el doble del valor específico, el número de muestras se puede inferir como el doble del valor específico. Además, por ejemplo, en el caso de que el doble de la altura del bloque de croma actual sea el doble del valor específico o menos, el número de muestras se puede inferir como el doble de la altura.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, el aparato de descodificación puede inferir el número de muestras basándose en la anchura del bloque de croma actual y el valor específico.
Como un ejemplo, el aparato de descodificación puede inferir el número de muestras de las muestras de croma vecinas comparando el doble de la anchura y el doble del valor específico. Por ejemplo, en el caso de que el doble de la anchura del bloque de croma actual sea mayor que el doble del valor específico, el número de muestras se puede inferir como el doble del valor específico. Además, por ejemplo, en el caso de que el doble de la anchura del bloque de croma actual sea el doble del valor específico o menos, el número de muestras se puede inferir como el doble de la anchura.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de descodificación puede inferir el número de muestras de las muestras de croma vecinas de arriba y las muestras de croma vecinas izquierdas comparando la anchura y la altura con el valor específico.
Por ejemplo, en el caso de que la anchura y la altura del bloque de croma actual sean mayores que el valor específico, el número de muestras se puede inferir como el valor específico.
Además, por ejemplo, en el caso de que la anchura y la altura del bloque de croma actual sean el valor específico o menos, el número de muestras se puede inferir como un valor de la anchura y la altura. Como un ejemplo, el número de muestras se puede inferir como el valor menor de la anchura y la altura.
Por otro lado, el valor específico se puede inferir para inferir los parámetros de CCLM del bloque de croma actual. En el presente caso, el valor específico se puede denominar límite superior de número de muestras vecinas o número de muestras vecinas máximo. Como un ejemplo, el valor específico se puede inferir como 2. O el valor específico se puede inferir como 4, 8 o 16.
Además, por ejemplo, el valor específico se puede inferir como un valor predeterminado. Es decir, el valor específico se puede inferir como un valor que se promete entre el aparato de codificación y el aparato de descodificación. En otras palabras, el valor específico se puede inferir como un valor predeterminado para el bloque de croma actual al que se aplica el modo de CCLM.
Como alternativa, por ejemplo, el aparato de descodificación puede obtener la información relacionada con la predicción a través de un flujo de bits. En otras palabras, la información de vídeo puede incluir la información que representa el valor específico, y el valor específico se puede inferir basándose en la información que representa el valor específico. La información que representa el valor específico se puede señalizar en una unidad de unidad de codificación (CU). O la información que representa el valor específico se puede señalizar en una unidad de encabezado de corte, Conjunto de Parámetros de Imagen (PPS) o Conjunto de Parámetros de Secuencia (SPS). Es decir, la información que representa el valor específico se puede señalizar con un encabezado de corte, un Conjunto de Parámetros de Imagen (PPS) o un Conjunto de Parámetros de Secuencia (SPS).
Como alternativa, por ejemplo, el aparato de descodificación puede obtener información de bandera que representa si el número de muestras de referencia vecinas se infiere basándose en el valor específico a través de un flujo de bits. En otras palabras, la información de vídeo puede incluir la información de bandera que representa si el número de muestras de referencia vecinas se infiere basándose en el valor específico, y en el caso de que el valor de información de bandera sea 1, la información de vídeo puede incluir la información que representa el valor específico, y el valor específico se puede inferir basándose en la información que representa el valor específico. Por otro lado, en el caso de que el valor de información de bandera sea 0, la información de bandera puede representar que el número de muestras de referencia vecinas no se infiere basándose en el valor específico. La información de bandera y/o la información que representa el valor específico se puede señalizar en una unidad de unidad de codificación (CU). O la información de bandera y/o la información que representa el valor específico se pueden señalizar en una unidad de encabezado de corte, Conjunto de Parámetros de Imagen (PPS) o Conjunto de Parámetros de Secuencia (SPS). Es decir, la información de bandera y/o la información que representa el valor específico se pueden señalizar con un encabezado de corte, un PPS o un SPS.
Como alternativa, por ejemplo, el valor específico se puede inferir basándose en un tamaño del bloque de croma actual.
Como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 8, el valor específico se puede inferir como 4, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 8, el valor específico se puede inferir como 8.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 2.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2 o menos, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un tamaño del bloque de croma actual sea 2 x 2 , el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 2, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 4, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 1, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 2, el valor específico se puede inferir como 1, y en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea 4, el valor específico se puede inferir como 2.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 4, el valor específico se puede inferir como 4.
Además, como un ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque de croma actual sea mayor que 2, el valor específico se puede inferir como 2.
Además, como un ejemplo, el valor específico se puede inferir basándose en si un valor menor entre la anchura y la altura del bloque actual es mayor que un valor umbral específico. Por ejemplo, en el caso de que un valor menor entre la anchura y la altura del bloque actual sea mayor que un valor umbral específico, el valor umbral específico se puede inferir como 4, en el caso de que un valor menor entre la anchura y la altura del bloque actual sea un valor umbral específico o menos, el valor umbral específico se puede inferir como 2. El valor umbral específico se puede inferir como un valor predeterminado. Es decir, el valor umbral específico se puede inferir como un valor que se promete entre el aparato de codificación y el aparato de descodificación. Como alternativa, por ejemplo, la información de vídeo puede incluir la información que representa el valor umbral específico. En este caso, el valor umbral específico se puede inferir basándose en la información que representa el valor umbral específico. Por ejemplo, el valor umbral específico inferido puede ser 4 u 8.
El aparato de descodificación puede inferir las muestras de croma vecinas del número de muestras (la etapa S2630).
El aparato de descodificación puede inferir las muestras de croma vecinas del número de muestras.
Por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba izquierdo, el aparato de descodificación puede inferir muestras de croma vecinas izquierdas del número de muestras y muestras de croma vecinas de arriba del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea N x M, el aparato de codificación puede inferir las muestras de croma vecinas de arriba del número de muestras de entre N muestras de crominancia vecinas de arriba e inferir las muestras de crominancia vecinas izquierdas del número de muestras de entre N muestras de croma vecinas izquierdas. En el presente caso, N puede ser igual a o menor que M.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM de arriba, el aparato de descodificación puede inferir las muestras de croma vecinas de arriba del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea Nx M, el aparato de descodificación puede inferir las muestras de croma vecinas de arriba del número de muestras de entre 2N muestras de croma vecinas de arriba. En el presente caso, N puede ser igual a o menor que M.
Además, por ejemplo, en el caso de que el modo de predicción de CCLM del bloque de croma actual sea el modo de LM izquierdo, el aparato de descodificación puede inferir las muestras de croma vecinas izquierdas del número de muestras. En particular, en el caso de que un tamaño del bloque de croma actual sea M x N, el aparato de descodificación puede inferir las muestras de croma vecinas izquierdas del número de muestras de entre 2N muestras de croma vecinas izquierdas. En el presente caso, N puede ser igual a o menor que M.
El aparato de descodificación puede inferir muestras de luma vecinas submuestreadas y muestras de luma submuestreadas del bloque de luma actual (etapa, S2640). En el presente caso, las muestras de luma vecinas pueden corresponder a las muestras de croma vecinas. Por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del bloque de luma actual correspondientes a las muestras de croma vecinas de arriba y muestras de luma vecinas izquierdas submuestreadas del bloque de luma actual correspondientes a las muestras de croma vecinas izquierdas.
Es decir, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del número de muestras correspondientes a las muestras de croma vecinas de arriba y muestras de luma vecinas izquierdas submuestreadas del número de muestras correspondientes a las muestras de croma vecinas izquierdas.
Como alternativa, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas de arriba de submuestreo del bloque de luma actual correspondientes a las muestras de croma vecinas de arriba. Es decir, por ejemplo, las muestras de luma vecinas pueden incluir muestras de luma vecinas de arriba de submuestreo del número de muestras correspondientes a las muestras de croma vecinas de arriba.
Como alternativa, por ejemplo, las muestras de luma vecinas submuestreadas pueden incluir muestras de luma vecinas izquierdas submuestreadas del bloque de luma actual correspondientes a las muestras de croma vecinas izquierdas. Es decir, por ejemplo, las muestras de luma vecinas pueden incluir muestras de luma vecinas izquierdas submuestreadas del número de muestras correspondientes a las muestras de croma vecinas izquierdas.
El aparato de descodificación infiere parámetros de CCLM basándose en las muestras de croma vecinas y las muestras de luma vecinas submuestreadas (la etapa S2650). El aparato de descodificación puede inferir los parámetros de CCLM basándose en las muestras de croma vecinas y las muestras de luma vecinas submuestreadas.
Por ejemplo, los parámetros de CCLM se pueden inferir basándose en la Ecuación 3 que se ha descrito anteriormente.
Como alternativa, por ejemplo, los parámetros de CCLM se pueden inferir basándose en la Ecuación 4 que se ha descrito anteriormente.
El aparato de descodificación infiere muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas (la etapa S2660). El aparato de descodificación puede inferir las muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas. El aparato de descodificación puede aplicar el CCLM inferido mediante los parámetros de CCLM a las muestras de luma submuestreadas y generar muestras de predicción para el bloque de croma actual. Es decir, el aparato de descodificación puede realizar una predicción de CCLM basándose en los parámetros de CCLM y generar muestras de predicción para el bloque de croma actual. Por ejemplo, las muestras de predicción se pueden inferir basándose en la Ecuación 1 que se ha descrito anteriormente.
El aparato de descodificación genera muestras reconstruidas para el bloque de croma actual basándose en las muestras de predicción (la etapa S2670). El aparato de descodificación puede generar las muestras reconstruidas basándose en las muestras de predicción. Por ejemplo, el aparato de descodificación puede recibir información para un residuo para el bloque de croma actual a partir del flujo de bits. La información para el residuo puede incluir un coeficiente de transformada para la muestra residual (de croma). El aparato de descodificación puede inferir la muestra residual (o la matriz de muestras residuales) para el bloque de croma actual basándose en la información residual. En este caso, el aparato de descodificación puede generar las muestras reconstruidas basándose en las muestras de predicción y las muestras residuales. El aparato de descodificación puede inferir un bloque reconstruido o una imagen reconstruida basándose en la muestra reconstruida. Posteriormente, el aparato de descodificación puede aplicar el procedimiento de filtrado en bucle tal como un filtrado de desbloqueo y/o un proceso de SAO a la imagen reconstruida para mejorar la calidad de imagen subjetiva/objetiva, como se ha descrito anteriormente.
La figura 27 ilustra esquemáticamente un aparato de descodificación para realizar un método de descodificación de vídeo de acuerdo con la presente divulgación. El método mostrado en la figura 26 puede ser realizado por el aparato de descodificación mostrado en la figura 27. En un ejemplo específico, el descodificador de entropía del aparato de descodificación de la figura 27 puede realizar la etapa S2600 de la figura 26, el predictor del aparato de descodificación de la figura 27 puede realizar las etapas S2610 a S2660 de la figura 26, y el sumador del aparato de descodificación de la figura 27 puede realizar la etapa S2670 de la figura 26. Además, aunque no se muestra en los dibujos, el proceso de adquisición de información para un residuo del bloque actual a través de un flujo de bits puede ser realizado por el descodificador de entropía del aparato de descodificación, y el proceso de inferencia de la muestra residual para el bloque actual basándose en la información residual puede ser realizado por el transformador inverso del aparato de descodificación de la figura 27.
De acuerdo con la presente divulgación que se ha descrito anteriormente, se realiza una intra predicción basándose en CCLM, y se puede mejorar la eficiencia de codificación de vídeo.
Además, de acuerdo con la presente divulgación, se puede mejorar la eficiencia de la intra predicción, que se basa en CCLM, incluyendo una pluralidad de modos de LM, es decir, un Modelo Lineal multidireccional (MDLM).
Además, de acuerdo con la presente divulgación, el número de muestras vecinas seleccionadas para inferir un parámetro de modelo lineal para un Modelo Lineal multidireccional (MDLM) realizado en un bloque de croma que tiene un tamaño grande se limita a un número específico y, en consecuencia, se puede reducir la complejidad de intra predicción.
En la realización descrita anteriormente, los métodos se describen basándose en el diagrama de flujo que tiene una serie de etapas o bloques. La presente divulgación no se limita al orden de las etapas o bloques anteriores. Algunas etapas o bloques pueden ocurrir simultáneamente o en un orden diferente de otras etapas o bloques como se ha descrito anteriormente. Además, los expertos en la materia entenderán que las etapas que se muestran en el diagrama de flujo anterior no son exclusivas, que se pueden incluir etapas adicionales o que una o más etapas en el diagrama de flujo pueden eliminarse dentro del alcance de las reivindicaciones adjuntas.
Las realizaciones descritas en esta memoria descriptiva se pueden realizar implementándose en un procesador, un microprocesador, un controlador o un chip. Por ejemplo, las unidades funcionales que se muestran en cada dibujo se pueden realizar implementándose en un ordenador, un procesador, un microprocesador, un controlador o un chip. En este caso, se puede almacenar información para la implementación (por ejemplo, información acerca de instrucciones) o el algoritmo en un medio de almacenamiento digital.
Además, el dispositivo de descodificación y el dispositivo de codificación a los que se aplica la presente divulgación se pueden incluir en un aparato de transmisión/recepción de radiodifusión multimedios, un terminal de comunicación móvil, un aparato de vídeo de cine en casa, un aparato de vídeo de cine digital, una cámara de vigilancia, un aparato de chat de vídeo, un aparato de comunicación en tiempo real tal como comunicación de vídeo, un aparato de envío por flujo continuo móvil, un medio de almacenamiento, una videocámara, un aparato de provisión de servicios de VoD, un aparato de vídeo de transmisión libre (OTT), un aparato de provisión de servicios de envío por flujo continuo por Internet, un aparato de vídeo tridimensional (3D), un aparato de vídeo de teleconferencia, un equipo de usuario de transporte (por ejemplo, equipo de usuario de vehículo, equipo de usuario de avión, equipo de usuario de barco, etc.) y un aparato de vídeo médico y se pueden usar para procesar señales de vídeo y señales de datos. Por ejemplo, el aparato de vídeo de transmisión libre (OTT) puede incluir una consola de juegos, un reproductor de Blu-ray, una TV con acceso a Internet, un sistema de cine en casa, un teléfono inteligente, un PC de tipo tableta, una Grabadora de Vídeo Digital (DVR) y similares.
Además, el método de procesamiento al que se aplica la presente divulgación se puede producir en forma de un programa que va a ser ejecutado por un ordenador y se puede almacenar en un medio de registro legible por ordenador. Los datos multimedios que tienen una estructura de datos de acuerdo con la presente divulgación también se pueden almacenar en medios de registro legibles por ordenador. Los medios de registro legibles por ordenador incluyen todos los tipos de dispositivos de almacenamiento en los que se almacenan datos legibles por un sistema informático. Los medios de registro legibles por ordenador pueden incluir un BD, un Bus Serie Universal (USB), ROM, PROM, EPROM, EEPROM, RAM, CD-ROM, una cinta magnética, un disquete y un dispositivo de almacenamiento de datos óptico, por ejemplo. Además, los medios de registro legibles por ordenador incluyen medios implementados en forma de ondas portadoras (por ejemplo, transmisión a través de Internet). Además, un flujo de bits generado por el método de codificación se puede almacenar en un medio de registro legible por ordenador o se puede transmitir a través de redes de comunicación cableadas/inalámbricas.
Además, las realizaciones de la presente divulgación se pueden implementar con un producto de programa informático de acuerdo con códigos de programa, y los códigos de programa se pueden realizar en un ordenador mediante las realizaciones de la presente divulgación. Los códigos de programa se pueden almacenar en un soporte que es legible por un ordenador.
La figura 28 ilustra un diagrama estructural de un sistema de envío por flujo continuo de contenidos al que se aplica la presente divulgación.
El sistema de envío por flujo continuo de contenido al que se aplica(n) la(s) realización(es) del presente documento puede incluir en gran medida un servidor de codificación, un servidor de envío por flujo continuo, un servidor web, un almacenamiento de medios, un dispositivo de usuario y un dispositivo de entrada multimedios.
El servidor de codificación comprime contenidos introducidos desde dispositivos de entrada multimedios, tales como un teléfono inteligente, una cámara o una videocámara en datos digitales para generar un flujo de bits y transmitir el flujo de bits al servidor de envío por flujo continuo. Como otro ejemplo, cuando los dispositivos de entrada multimedios tales como teléfonos inteligentes, cámaras, videocámaras, etc., generan directamente un flujo de bits, se puede omitir el servidor de codificación.
El flujo de bits se puede generar mediante un método de codificación o un método de generación de flujos de bits al que se aplican las realizaciones del presente documento, y el servidor de envío por flujo continuo puede almacenar de forma temporal el flujo de bits en el proceso de transmisión o recepción del flujo de bits.
El servidor de envío por flujo continuo transmite los datos multimedios al dispositivo de usuario basándose en la solicitud de un usuario a través del servidor web, y el servidor web sirve como un medio para informar al usuario acerca de un servicio. Cuando el usuario solicita un servicio deseado del servidor web, el servidor web lo entrega a un servidor de envío por flujo continuo, y el servidor de envío por flujo continuo transmite datos multimedios al usuario. En este caso, el sistema de envío por flujo continuo de contenido puede incluir un servidor de control separado. En este caso, el servidor de control sirve para controlar una orden/respuesta entre dispositivos en el sistema de envío por flujo continuo de contenido.
El servidor de envío por flujo continuo puede recibir contenido desde un servidor de codificación y/o almacenamiento de medios. Por ejemplo, cuando el contenido se recibe desde el servidor de codificación, el contenido se puede recibir en tiempo real. En este caso, con el fin de proporcionar un servicio de envío por flujo continuo fluido, el servidor de envío de flujo continuo puede almacenar el flujo de bits durante un tiempo predeterminado.
Los ejemplos del dispositivo de usuario pueden incluir un teléfono móvil, un teléfono inteligente, un ordenador portátil, un terminal de radiodifusión digital, un asistente digital personal (PDA), un reproductor multimedios portátil (PMP), navegación, una pizarra, unos PC de tableta, ultraportátiles, dispositivos ponibles (por ejemplo, relojes inteligentes, gafas inteligentes, visualizadores montados en la cabeza), TV digitales, ordenadores de escritorio, señalización digital y similares. Cada servidor en el sistema de envío por flujo continuo de contenido se puede hacer funcionar como un servidor distribuido, en cuyo caso se pueden distribuir los datos recibidos desde cada servidor.

Claims (4)

REIVINDICACIONES
1. Un método de descodificación de vídeo realizado por un aparato de descodificación, comprendiendo el método:
obtener (S2600) información de vídeo que comprende información de modo de predicción para un bloque de croma actual; inferir (S2610) un modo de predicción de modelo lineal de componentes cruzadas, CCLM, de arriba como un modo de intra predicción del bloque de croma actual basándose en la información de modo de predicción;
inferir (S2620) un número de muestras de muestras de croma vecinas de arriba del bloque de croma actual basándose en una anchura del bloque de croma actual y un valor específico;
inferir las muestras de croma vecinas de arriba del número de muestras;
inferir (S2630) muestras de luma vecinas de arriba submuestreadas correspondientes a las muestras de croma vecinas de arriba y muestras de luma submuestreadas de un bloque de luma actual;
inferir (S2650) parámetros de CCLM basándose en las muestras de croma vecinas de arriba y las muestras de luma vecinas de arriba submuestreadas;
inferir (S2660) muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas del bloque de luma actual; y
generar (S2670) muestras reconstruidas para el bloque de croma actual basándose en las muestras de predicción,
en donde el valor específico se infiere como 2,
en donde la anchura del bloque de croma actual es N,
caracterizado por que
basándose en que 2n es menor que o igual al doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 2N, y
basándose en que el 2N es mayor que el doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 4.
2. Un método de codificación de vídeo realizado por un aparato de codificación, comprendiendo el método:
determinar (S2400) un modo de predicción de modelo lineal de componentes cruzadas, CCLM, de arriba como un modo de intra predicción de un bloque de croma actual;
inferir (S2410) un número de muestras de muestras de croma vecinas de arriba del bloque de croma actual basándose en una anchura del bloque de croma actual y un valor específico;
inferir (S2420) las muestras de croma vecinas de arriba del número de muestras;
inferir (S2430) muestras de luma vecinas de arriba submuestreadas correspondientes a las muestras de croma vecinas de arriba y muestras de luma submuestreadas de un bloque de luma actual;
inferir (S2440) parámetros de CCLM basándose en las muestras de croma vecinas de arriba y las muestras de luma vecinas de arriba submuestreadas;
inferir (S2450) muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas del bloque de luma actual; y
codificar (S2460) información de vídeo que incluye información de modo de predicción para el bloque de croma actual,
en donde el valor específico se infiere como 2,
en donde la anchura del bloque de croma actual es N,
caracterizado por que
basándose en que 2n es menor que o igual al doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 2N, y
basándose en que el 2N es mayor que el doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 4.
3. Un medio de almacenamiento legible por ordenador no transitorio que almacena un flujo de bits generado por un método, comprendiendo el método:
determinar (S2400) un modo de predicción de modelo lineal de componentes cruzadas, CCLM, de arriba como un modo de intra predicción de un bloque de croma actual;
inferir (S2410) un número de muestras de muestras de croma vecinas de arriba del bloque de croma actual basándose en una anchura del bloque de croma actual y un valor específico;
inferir (S2420) las muestras de croma vecinas de arriba del número de muestras;
inferir (S2430) muestras de luma vecinas de arriba submuestreadas correspondientes a las muestras de croma vecinas de arriba y muestras de luma submuestreadas de un bloque de luma actual;
inferir (S2440) parámetros de CCLM basándose en las muestras de croma vecinas de arriba y las muestras de luma vecinas de arriba submuestreadas;
inferir (S2450) muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas del bloque de luma actual;
codificar (S2460) información de vídeo que incluye información de modo de predicción para el bloque de croma actual; y
generar el flujo de bits que incluye la información de vídeo,
en donde el valor específico se infiere como 2,
en donde la anchura del bloque de croma actual es N,
caracterizado por que
basándose en que 2<n>es menor que o igual al doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 2N, y
basándose en que el 2N es mayor que el doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 4.
4. Un método de transmisión de datos para una imagen, comprendiendo el método:
obtener un flujo de bits de información de vídeo que incluye información de modo de predicción para un bloque de croma actual; y transmitir los datos que incluyen el flujo de bits de la información de vídeo que incluye la información de modo de predicción, en donde la información de modo de predicción se genera infiriendo un modo de predicción de modelo lineal de componentes cruzadas, CCLM, de arriba como un modo de intra predicción del bloque de croma actual, infiriendo un número de muestras de muestras de croma vecinas de arriba del bloque de croma actual basándose en una anchura del bloque de croma actual y un valor específico, infiriendo las muestras de croma vecinas de arriba del número de muestras, infiriendo muestras de luma vecinas de arriba submuestreadas correspondientes a las muestras de croma vecinas de arriba y muestras de luma submuestreadas de un bloque de luma actual, infiriendo parámetros de CCLM basándose en las muestras de croma vecinas de arriba y las muestras de luma vecinas de arriba submuestreadas, infiriendo muestras de predicción para el bloque de croma actual basándose en los parámetros de CCLM y las muestras de luma submuestreadas del bloque de luma actual, codificando información de vídeo que incluye la información de modo de predicción para el bloque de croma actual, en donde el valor específico se infiere como 2, la anchura del bloque de croma actual es N, caracterizado por que
basándose en que 2<n>es menor que o igual al doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 2N, y
basándose en que el 2N es mayor que el doble del valor específico, el número de muestras de las muestras de croma vecinas de arriba se infiere como 4.
ES22194037T 2018-11-23 2019-11-11 Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo Active ES2974493T3 (es)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US201862770835P 2018-11-23 2018-11-23

Publications (1)

Publication Number Publication Date
ES2974493T3 true ES2974493T3 (es) 2024-06-27

Family

ID=70773851

Family Applications (2)

Application Number Title Priority Date Filing Date
ES19888153T Active ES2934966T3 (es) 2018-11-23 2019-11-11 Codificación y descodificación de vídeo en función de una predicción de CCLM
ES22194037T Active ES2974493T3 (es) 2018-11-23 2019-11-11 Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo

Family Applications Before (1)

Application Number Title Priority Date Filing Date
ES19888153T Active ES2934966T3 (es) 2018-11-23 2019-11-11 Codificación y descodificación de vídeo en función de una predicción de CCLM

Country Status (14)

Country Link
US (5) US11012699B2 (es)
EP (2) EP3709645B1 (es)
JP (3) JP7018139B2 (es)
KR (3) KR102637084B1 (es)
CN (3) CN116916016A (es)
AU (2) AU2019383886B2 (es)
BR (3) BR122021014718B1 (es)
CA (2) CA3085391C (es)
ES (2) ES2934966T3 (es)
HU (2) HUE066437T2 (es)
MX (2) MX2020005865A (es)
PL (2) PL4120680T3 (es)
TW (3) TWI732355B (es)
WO (1) WO2020105925A1 (es)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11178396B2 (en) * 2018-11-14 2021-11-16 Tencent America LLC Constrained intra prediction and unified most probable mode list generation
BR112021006547A2 (pt) * 2018-12-25 2021-07-06 Guangdong Oppo Mobile Telecommunications Corp Ltd método de previsão para decodificação, dispositivo de previsão para decodificação e mídia de armazenamento de computador que armazena um programa de previsão para decodificação
CN112970257A (zh) * 2019-01-02 2021-06-15 Oppo广东移动通信有限公司 解码预测方法、装置及计算机存储介质
CN117714698A (zh) * 2019-06-28 2024-03-15 字节跳动有限公司 屏幕内容编解码中的色度帧内模式推导
US20220092827A1 (en) * 2020-09-23 2022-03-24 Electronics And Telecommunications Research Institute Method, apparatus, system and computer-readable recording medium for feature information
WO2022191553A1 (ko) * 2021-03-08 2022-09-15 현대자동차주식회사 행렬 기반 크로스 컴포넌트 예측을 이용하는 비디오 코딩방법 및 장치
WO2024080828A1 (ko) * 2022-10-13 2024-04-18 한국전자통신연구원 영상 부호화/복호화를 위한 방법, 장치 및 기록 매체
CN115988206B (zh) * 2023-03-21 2024-03-26 深圳传音控股股份有限公司 图像处理方法、处理设备及存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101138392B1 (ko) 2004-12-30 2012-04-26 삼성전자주식회사 색차 성분의 상관관계를 이용한 컬러 영상의 부호화,복호화 방법 및 그 장치
KR101997462B1 (ko) 2010-04-09 2019-07-08 엘지전자 주식회사 비디오 데이터 처리 방법 및 장치
JP2013034163A (ja) * 2011-06-03 2013-02-14 Sony Corp 画像処理装置及び画像処理方法
US9693070B2 (en) * 2011-06-24 2017-06-27 Texas Instruments Incorporated Luma-based chroma intra-prediction for video coding
CA2840488A1 (en) 2011-06-28 2013-01-03 Samsung Electronics Co., Ltd. Prediction method and apparatus for chroma component of image using luma component of image
CN109218730B (zh) 2012-01-19 2023-07-28 华为技术有限公司 用于lm帧内预测的参考像素缩减
EP2869557B1 (en) * 2012-06-29 2023-08-09 Electronics And Telecommunications Research Institute Method and device for encoding/decoding images
WO2015005418A1 (ja) * 2013-07-10 2015-01-15 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像システム、動画像符号化方法、動画像復号方法、およびプログラム
US9998742B2 (en) * 2015-01-27 2018-06-12 Qualcomm Incorporated Adaptive cross component residual prediction
US10455249B2 (en) * 2015-03-20 2019-10-22 Qualcomm Incorporated Downsampling process for linear model prediction mode
US10652575B2 (en) * 2016-09-15 2020-05-12 Qualcomm Incorporated Linear model chroma intra prediction for video coding
US10873746B2 (en) 2016-12-21 2020-12-22 Sharp Kabushiki Kaisha Intra prediction image generation device using cross-component liner model, image decoding apparatus, and image coding apparatus using same
US11025903B2 (en) * 2017-01-13 2021-06-01 Qualcomm Incorporated Coding video data using derived chroma mode
US11290713B1 (en) * 2018-09-20 2022-03-29 Lg Electronics Inc. Method and device for image decoding on basis of CCLM prediction in image coding system
EP3861736A4 (en) * 2018-11-06 2022-03-30 Beijing Bytedance Network Technology Co., Ltd. POSITION DEPENDENT INTRAPREDICTION

Also Published As

Publication number Publication date
KR20220098266A (ko) 2022-07-11
US11706426B2 (en) 2023-07-18
US11956451B2 (en) 2024-04-09
HUE066437T2 (hu) 2024-08-28
PL4120680T3 (pl) 2024-06-24
CN111587574A (zh) 2020-08-25
EP3709645B1 (en) 2022-10-19
JP2022070864A (ja) 2022-05-13
AU2019383886A1 (en) 2020-06-18
MX2020005865A (es) 2020-09-09
EP3709645A1 (en) 2020-09-16
EP4120680B1 (en) 2024-01-31
US20200296391A1 (en) 2020-09-17
US11012699B2 (en) 2021-05-18
US11412236B2 (en) 2022-08-09
KR102524061B1 (ko) 2023-04-21
KR102415322B1 (ko) 2022-06-30
KR20230058177A (ko) 2023-05-02
BR122021014718B1 (pt) 2022-12-06
US20210176480A1 (en) 2021-06-10
MX2024002830A (es) 2024-03-19
US20220248036A1 (en) 2022-08-04
AU2021206901A1 (en) 2021-08-12
JP7421673B2 (ja) 2024-01-24
JP7018139B2 (ja) 2022-02-09
KR102637084B1 (ko) 2024-02-15
BR112020012022A2 (pt) 2021-06-22
AU2021206901B2 (en) 2022-08-04
BR112020012022B1 (pt) 2022-12-06
CN116916016A (zh) 2023-10-20
WO2020105925A1 (ko) 2020-05-28
JP7234425B2 (ja) 2023-03-07
US20240275992A1 (en) 2024-08-15
US20230308665A1 (en) 2023-09-28
KR20200074218A (ko) 2020-06-24
TWI784561B (zh) 2022-11-21
TW202027506A (zh) 2020-07-16
CN116939201A (zh) 2023-10-24
TW202143720A (zh) 2021-11-16
HUE060910T2 (hu) 2023-04-28
CN111587574B (zh) 2023-06-16
TWI842133B (zh) 2024-05-11
TW202308385A (zh) 2023-02-16
PL3709645T3 (pl) 2023-02-20
BR122021014717B1 (pt) 2022-12-06
EP4120680A1 (en) 2023-01-18
CA3213928A1 (en) 2020-05-28
JP2023054264A (ja) 2023-04-13
ES2934966T3 (es) 2023-02-28
CA3085391A1 (en) 2020-05-28
TWI732355B (zh) 2021-07-01
CA3085391C (en) 2023-10-24
JP2021510245A (ja) 2021-04-15
EP3709645A4 (en) 2021-07-14
AU2019383886B2 (en) 2021-04-29

Similar Documents

Publication Publication Date Title
ES2974493T3 (es) Método para descodificar una imagen en función de una predicción de CCLM en un sistema de codificación de imágenes, y dispositivo para el mismo
ES2946014T3 (es) Método y dispositivo para la descodificación de imágenes en función de una intra predicción de CCLM en un sistema de codificación de imágenes
KR20210092308A (ko) 영상 코딩 시스템에서 cclm 예측을 사용하는 영상 디코딩 방법 및 그 장치
ES2972878T3 (es) Método y dispositivo de descodificación de imágenes y método y dispositivo de codificación de imágenes en un sistema de codificación de imágenes
TW202433930A (zh) 用於硬體實施的高效cclm參數導出方法