MX2014010113A - Dispositivo y metodo de procesamiento de imagenes. - Google Patents

Dispositivo y metodo de procesamiento de imagenes.

Info

Publication number
MX2014010113A
MX2014010113A MX2014010113A MX2014010113A MX2014010113A MX 2014010113 A MX2014010113 A MX 2014010113A MX 2014010113 A MX2014010113 A MX 2014010113A MX 2014010113 A MX2014010113 A MX 2014010113A MX 2014010113 A MX2014010113 A MX 2014010113A
Authority
MX
Mexico
Prior art keywords
unit
coefficient
matrix
data
difference
Prior art date
Application number
MX2014010113A
Other languages
English (en)
Other versions
MX339576B (es
Inventor
Junichi Tanaka
Yoshitaka Morigami
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of MX2014010113A publication Critical patent/MX2014010113A/es
Publication of MX339576B publication Critical patent/MX339576B/es

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Image Processing (AREA)

Abstract

La presente descripción pertenece a un dispositivo y método de procesamiento de imágenes que permiten la reducción de un incremento en la cantidad de codificación para una lista de escalado. Este dispositivo de procesamiento de imágenes establece el coeficiente colocado en el encabezado de una matriz de cuantificación al agregar, al coeficiente colocado en el encabezado de la matriz de cuantificación, un coeficiente de diferencia de remplazo el cual es la diferencia entre el coeficiente colocado en el encabezado de la matriz de cuantificación, y el coeficiente de remplazo que se utiliza cuando se remplaza el coeficiente colocado en el encabezado de la matriz de cuantificación. La matriz de cuantificación la cual se ha establecido, se convierte ascendentemente, y una matriz de cuantificación convertida ascendentemente en la cual el coeficiente colocado en el encabezado de la matriz de cuantificación convertida ascendentemente se ha remplazado por un coeficiente de remplazo se utiliza para la cuantificación inversa de los datos cuantificados. La presente descripción puede aplicarse a dispositivos de procesamiento de imágenes.

Description

DISPOSITIVO Y MÉTODO DE PROCESAMIENTO DE IMÁGENES Campo Técnico La presente descripción se refiere a un dispositivo y método de procesamiento de imágenes.
Técnica Antecedente En H.264/AVC (Codificación de Video Avanzada), la cual es una de las especificaciones estándares de los esquemas de codificación de video, los perfiles de Alto Perfil o superior permiten la cuantificación de datos de imágenes con tamaños de etapa de cuantificación que difieren de un componente de coeficiente de transformada ortogonal a otro. El tamaño de etapa de cuantificación para cada componente del coeficiente de transformada ortogonal puede establecerse basándose en un valor de etapa de referencia y una matriz de cuantificación (también denominada como lista de escalado) definida por un equivalente de tamaño a la unidad de una transformada ortogonal.
Un valor especifico de una matriz de cuantificación se prepara para cada modo de predicción (modo de intra-predicción, modo de inter-predicción) y para cada tamaño de unidad de transformada (4x4, 4x8). Además, los usuarios tienen permiso de especificar una matriz de cuantificación única diferente de los valores específicos en un conjunto de parámetros de secuencia o conjunto de parámetros de imagen. En un caso en donde no se utilizan matrices de cuantificación, los tamaños de etapa de cuantificación utilizados para la cuantificación tienen un valor igual para todos los componentes.
En HEVC (Codificación de Video de Alta Eficiencia) , la cual se estandariza como esquema de codificación de video de siguiente generación y la cual es sucesora de H.264/AVC, se ha introducido el concepto de las unidades de codificación (CU) que corresponden a los macrobloques tradicionales (véase, por ejemplo, NPL 1) . El margen de los tamaños de unidades de codificación se especifica por un conjunto de valores que son las potencias de 2, denominadas como la unidad de codificación más grande (LCU) y la unidad de codificación más pequeña (SCU) , en un conjunto de parámetros de secuencia. Además, el tamaño de unidad de codificación especifica en el margen especificado por la LCU y la SCU se especifica utilizando split_flag.
En HEVC, una unidad de codificación puede dividirse en una o más unidades de transformada ortogonal, o una o más unidades de transformada (TU) . Un tamaño de unidad de transformada disponible es cualquiera de 4x4, 8x8, 16x16, y 32x32.
Mientras tanto, el componente de CD (también denominado como el componente de corriente directa) de una matriz de cuantificación (lista de escalado) se transmite como datos diferentes de los componentes de CA (también denominados como los componentes de corriente alterna) de los mismos para propósitos tales como la reducción en la cantidad de codificación durante la transmisión. Específicamente, el componente de CD de una lista de escalado se transmite como coeficiente de CD (también denominado como coeficiente de corriente directa) diferente de los coeficientes de CA (también denominados como coeficientes de corriente alterna) los cuales son los componentes de CA de la lista de escalado.
Para reducir la cantidad de codificación del coeficiente de CD durante la transmisión, se ha sugerido que una constante (por ejemplo, 8) se reste del valor del coeficiente de CD y el valor resultante ( scaling_list_dc_coef_minus8 ) se codifique utilizando la codificación Golomb exponencial con signo (véase, por ejemplo, NPL 1 ) .
Lista de Citas Literatura que no es Patente NPL 1: Benjamín Bross, Fraunhofer HHI, Woo-Jin Han, Universidad Gachón, Jens-Rainer Ohm, RWTH Aachen, Gary J. Sullivan, Microsoft, Thomas Wiegand, Fraunhofer HHI / TU Berlín, JCTVC-H1003, "Proyecto 6 de especificación de texto de Codificación de Video de Alta Eficiencia (HEVC)", Equipo Conjunto Colaborador sobre Codificación de Video (JCT-VC) de ITU-T SG16 WP3 e ISO/IEC JTC1/SC29/ G11 7ma Reunión: Génova, CH, 21-30 de noviembre, 2011.
Compendio de la Invención Problema Técnico Sin embargo, existe una preocupación de que el método descrito en lo anterior no proporcione suficiente eficiencia de compresión aunque facilite los procesos.
La presente descripción se ha hecho en vista de la situación descrita en lo anterior, y es un objeto de la presente descripción permitir la supresión de un incremento en la cantidad de codificación de una lista de escalado.
Solución al Problema Un aspecto de la presente descripción proporciona un dispositivo de procesamiento de imágenes que incluye una unidad de establecimiento configurada para establecer un coeficiente ubicado al principio de una matriz de cuanti icación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al principio de la matriz de cuantificación al coeficiente ubicado al principio de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al principio de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; una unidad de conversión ascendente configurada para convertir ascendentemente la matriz de cuantificación establecida por la unidad de establecimiento para establecer la matriz de cuantificación convertida ascendentemente; y una unidad de descuantificación configurada para descuantificar los datos cuantificados obtenidos al descodificar datos codificados, utilizando una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al principio de la matriz de cuantificación convertido ascendentemente establecido por la unidad de conversión ascendente se ha remplazado con el coeficiente de remplazo.
La unidad de establecimiento puede establecer el coeficiente de remplazo al agregar una diferencia entre el coeficiente de remplazo y un valor inicial establecido para la matriz de cuantificación en el valor inicial.
La unidad de establecimiento puede establecer coeficientes de la matriz de cuantificación utilizando el coeficiente de diferencia de remplazo y los coeficientes de diferencia que son diferencias entre los coeficientes de la matriz de cuantificación .
El coeficiente de diferencia de remplazo y los coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación pueden transmitirse de manera colectiva. La unidad de establecimiento puede establecer los coeficientes de la matriz de cuantificación utilizando el coeficiente de diferencia de remplazo transmitido de manera colectiva y los coeficientes de diferencia.
El coeficiente de diferencia de remplazo y los coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación se han codificado. La unidad de establecimiento puede descodificar el coeficiente de diferencia de remplazo codificado y los coeficientes de diferencia codificadas.
La unidad de conversión ascendente puede convertir ascendentemente la matriz de cuantificación cuyo tamaño se limita a no más del tamaño de transmisión, al realizar un proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación.
El tamaño de transmisión puede ser un tamaño de 8x8. La unidad de conversión ascendente puede convertir ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 en una matriz de cuantificación que tiene un tamaño de 16x16, al realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8.
La unidad de conversión ascendente puede convertir ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 en una matriz de cuantificación que tiene un tamaño de 32x32, al realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8.
Una unidad de codificación que es una unidad de procesamiento en la cual un proceso de descodificación se realiza y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada pueden tener una estructura estratificada. El dispositivo de procesamiento de imágenes además puede incluir una unidad de codificación configurada para realizar un proceso de descodificación en los datos codificados utilizando una unidad que tiene una estructura estratificada para generar los datos cuantificados . La unidad de conversión ascendente puede convertir ascendentemente la matriz de cuantificación del tamaño de transmisión a un tamaño de una unidad de transformada que es una unidad de procesamiento en la cual se realiza la descuantificación .
Un aspecto de la presente descripción proporciona un método de procesamiento de imágenes que incluye establecer un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación en el coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; convertir ascendentemente la matriz de cuantificación establecida para establecer la matriz de cuantificación convertida ascendentemente; y descuantificar los datos cuantificados obtenidos al descodificar los datos codificados, utilizando una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo de la matriz de cuantificación convertida ascendentemente establecida se ha remplazado con el coeficiente de remplazo.
Otro aspecto de la presente descripción proporciona un dispositivo de procesamiento de imágenes que incluye una unidad de establecimiento configurada para establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; una unidad de cuantificación configurada para cuantificar una imagen para generar datos cuantificados ; y una unidad de transmisión configurada para transmitir datos codificados obtenidos al codificar los datos cuantificados generados por la unidad de cuantificación, los datos de coeficiente de remplazo obtenidos al codificar el coeficiente de remplazo, y los datos de coeficiente de diferencia de remplazo obtenidos al codificar el coeficiente de diferencia de remplazo establecido por la unidad de establecimiento.
La unidad de establecimiento puede establecer una diferencia entre el coeficiente de remplazo y un valor inicial establecido para la matriz de cuantificación .
La unidad de establecimiento puede establecer los coeficientes de diferencia que son diferencias entre los coeficientes de la matriz de cuantificación . La unidad de transmisión puede transmitir datos de coeficiente de diferencia obtenidos al codificar los coeficientes de diferencia establecidos por la unidad de establecimiento.
La unidad de transmisión puede transmitir de manera colectiva los datos de coeficiente de remplazo y los datos de coeficiente de diferencia de remplazo.
La unidad de transmisión puede transmitir los dato de coeficiente de remplazo y los datos de coeficiente de diferencia de remplazo para los datos de coeficiente de remplazo y los datos de coeficiente de diferencia de remplazo .
La unidad de cuantificación puede cuantificar la imagen utilizando la matriz de cuantificación o la matriz de cuantificación convertida ascendentemente .
Una unidad de codificación que es una unidad de procesamiento en la cual un proceso de codificación se realiza y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada pueden tener una estructura estratificada. El dispositivo de procesamiento de imágenes además puede incluir una unidad de codificación configurada para codificar los datos cuantificados generados por la unidad de cuantificación .
Otro aspecto de la presente descripción proporciona un método de procesamiento de imágenes que incluye establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; cuantificar una imagen para generar datos cuantificados ; y transmitir datos codificados obtenidos al codificar los datos cuantificados generados, los datos de coeficiente de remplazo obtenidos al codificar el coeficiente de remplazo, y los datos de coeficiente de diferencia de remplazo obtenidos al codificar el coeficiente de diferencia de remplazo establecido .
Aún otro aspecto de la presente descripción proporciona un dispositivo de procesamiento de imágenes que incluye una unidad de descodificación configurada para codificar datos descodificados para generar datos cuantificados ; y una unidad de descuantificación configurada para descuantificar los datos cuantificados generados por la unidad de codificación, utilizando una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación, la cual en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación .
La unidad de descuantificación puede descuantificar los datos cuantificados al analizar la sintaxis cuya semántica se establece de modo que la matriz de cuantificación por defecto se menciona cuando los datos de referencia de matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación .
La unidad de descuantificación puede descuantificar los datos cuantificados al analizar la sintaxis cuya semántica se establece de modo que la matriz de cuantificación por defecto se menciona cuando una diferencia entre los datos de referencia de matriz de cuantificación y los datos de identificación de matriz de cuantificación es iqual a 0.
Aún otro aspecto de la presente descripción proporciona un método de procesamiento de imágenes que incluye descodificar datos codificados para generar datos cuantificados ; y descuantificar los datos cuantificados generados en la descodificación, utilizando una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación, cuando en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación .
Aún otro aspecto de la presente descripción proporciona un dispositivo de procesamiento de imágenes que incluye una unidad de codificación configurada para codificar una imagen para generar datos descodificados; y una unidad de establecimiento configurada para establecer, como sintaxis de los datos codificados generados por la unidad de codificación, sintaxis cuya semántica se establece de manera que una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza cuantificación se menciona cuando en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación .
Aún otro aspecto de la presente descripción proporciona un método de procesamiento de imágenes que incluye codificar una imagen para generar datos descodificados; y establecer, como sintaxis de los datos codificados generados, sintaxis cuya semántica se establece de manera que una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza cuantificación se menciona cuando en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación .
En un aspecto de la presente descripción, un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión se establece al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación en el coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; la matriz de cuantificación establecida se convierte ascendentemente para establecer la matriz de cuantificación convertida ascendentemente; y datos cuantificados obtenidos al descodificar datos codificados se cuantifican utilizando una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo de la matriz de cuantificación convertida ascendentemente establecida se ha remplazado con el coeficiente de remplazo.
En otro aspecto de la presente descripción, un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión se establece, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; una imagen se cuantifica para generar datos cuantificados; y los datos codificados obtenidos al codificar los datos cuantificados generados, los datos de coeficiente de remplazo obtenidos al codificar el coeficiente de remplazo, y los datos de coeficiente de diferencia de remplazo obtenidos al codificar el coeficiente de diferencia de remplazo establecido se transmiten.
En aún otro aspecto de la presente descripción, los datos codificados se descodifican para generar datos cuantificados ; y los datos cuantificados generados en la descodificación se cuantifican utilizando una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación, cuando en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación .
En aún otro aspecto de la presente descripción, se codifica una imagen para generar datos codificados; y la sintaxis cuya semántica se establece de manera que una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza cuantificación se menciona cuando en un modo de copia en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuanti icación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación se establecen como sintaxis de los datos codificados, generados.
Efectos Ventajosos de la Invención De acuerdo con la presente descripción, es posible procesar una imagen. En particular, es posible suprimir un incremento en la cantidad de codificación de una matriz de cuantificación .
BREVE DESCRIPCIÓN DE LOS DIBUJOS La Figura 1 es un diagrama que ilustra un ejemplo de una lista de escalado.
La Figura 2 es un diagrama que ilustra un ejemplo de conversión ascendente.
La Figura 3 es un diagrama que ilustra un ejemplo de cómo se utiliza una lista de escalado en un descodificador .
La Figura 4 es un diagrama que ilustra un ejemplo de la codificación de una lista de escalado.
La Figura 5 es un diagrama que ilustra un ejemplo de la codificación de una lista de escalado utilizando la presente tecnología.
La Figura 6 es un diagrama que ilustra un ejemplo de códigos de Golomb exponenciales.
La Figura 7 incluye diagramas que ilustran un ejemplo de la sintaxis para una lista de escalado.
La Figura 8 es un diagrama que ilustra un ejemplo de la sintaxis para una matriz por defecto.
La Figura 9 incluye diagramas que ilustran ejemplos de la semántica de una matriz por defecto.
La Figura 10 es un diagrama que ilustra un ejemplo de la sintaxis para una lista de escalado.
La Figura 11 es un diagrama que ilustra un ejemplo de la sintaxis para una lista de escalado utilizando la presente tecnología.
La Figura 12 incluye diagramas que ilustran un ejemplo de la sintaxis de una lista de escalado en la técnica relacionada .
La Figura 13 es un diagrama que ilustra un ejemplo de la sintaxis de una lista de escalado.
La Figura 14 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un dispositivo de codificación de imágenes.
La Figura 15 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de transíormada/cuantificación .
La Figura 16 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de procesamiento de matrices.
La Figura 17 es un diagrama que ilustra un ejemplo de muestreo descendente.
La Figura 18 es un diagrama que ilustra un ejemplo de la eliminación de una porción solapada.
La Figura 19 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de DPCM.
La Figura 20 es un diagrama de flujo que ilustra un ejemplo del flujo de un proceso de codificación de una matriz de cuantificación .
La Figura 21 es un diagrama de flujo que ilustra un ejemplo del flujo de un proceso de DPCM.
La Figura 22 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un dispositivo de descodificación de imágenes.
La Figura 23 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de descuantificación/transformada ortogonal inversa.
La Figura 24 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de generación de matrices.
La Figura 25 es un diagrama que ilustra un ejemplo de un proceso de interpolación del vecino más cercano.
La Figura 26 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una unidad de DPCM inversa.
La Figura 27 es un diagrama de flujo que ilustra un ejemplo del flujo de un proceso de generación de matrices.
La Figura 28 es un diagrama de flujo que ilustra un ejemplo del flujo de un proceso de descodificación de señales residuales .
La Figura 29 es un diagrama de flujo que ilustra un ejemplo del flujo de un proceso de DPCM inverso.
La Figura 30 es un diagrama que ilustra otro ejemplo de la sintaxis de una lista de escalado.
La Figura 31 es un diagrama de bloque que ilustra otra configuración ejemplar de la unidad de DPCM.
La Figura 32 es un diagrama de flujo que ilustra otro ejemplo del flujo del proceso de DPCM.
La Figura 33 es un diagrama de bloque que ilustra otra configuración ejemplar de la unidad de DPCM inversa.
La Figura 34 es un diagrama de flujo que ilustra otro ejemplo del flujo del proceso de DPCM inverso.
La Figura 35 es un diagrama que ilustra aún otro ejemplo de la sintaxis de una lista de escalado.
La Figura 36 es un diagrama de flujo que ilustra aún otro ejemplo del flujo del proceso de DPCM inverso.
La Figura 37 es un diagrama que ilustra aún otro ejemplo de la sintaxis de una lista de escalado.
La Figura 38 es un diagrama de bloque que ilustra aún otro ejemplo de la configuración de la unidad de DPCM.
La Figura 39 es un diagrama de flujo que ilustra aún otro ejemplo del proceso de DPCM.
La Figura 40 es un diagrama de bloque que ilustra aún otro ejemplo de la configuración de la unidad de DPCM inversa .
La Figura 41 es un diagrama de flujo que ilustra aún otro ejemplo del flujo del proceso de DPCM inverso.
La Figura 42 es un diagrama de flujo que continua de la Figura 41, que ilustra aún otro ejemplo del flujo del proceso de DPCM inverso.
La Figura 43 incluye diagramas que ilustran aún otro ejemplo de la sintaxis de una lista de escalado.
La Figura 44 incluye diagramas que ilustran aún otro ejemplo de la sintaxis de una lista de escalado.
La Figura 45 incluye diagramas que ilustran aún otro ejemplo de la sintaxis de una lista de escalado.
La Figura 46 es un diagrama que ilustra un ejemplo de un esquema de codificación de imágenes de varias vistas.
La Figura 47 es un diagrama que ilustra un ejemplo de una configuración principal de un dispositivo de codificación de imágenes de varias vistas al cual se aplica la presente tecnología.
La Figura 48 es un diagrama que ilustra un ejemplo de una configuración principal de un dispositivo de descodificación de imágenes de varias vistas al cual se aplica la presente tecnología.
La Figura 49 es un diagrama que ilustra un ejemplo de un esquema de codificación de imágenes estratificado.
La Figura 50 es un diagrama que ilustra un ejemplo de una configuración principal de un dispositivo de codificación de imágenes estratificado al cual se aplica la presente tecnología.
La Figura 51 es un diagrama que ilustra un ejemplo de una configuración principal de un dispositivo de descodificación de imágenes estratificado al cual se aplica la presente tecnología.
La Figura 52 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de una computadora.
La Figura 53 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un aparato de televisión .
La Figura 54 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un dispositivo de terminal móvil.
La Figura 55 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un aparato de grabación/reproducción .
La Figura 56 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de un aparato de captura de imágenes.
La Figura 57 es un diagrama de bloque que ilustra un ejemplo del uso de la codificación escalable.
La Figura 58 es un diagrama de bloque que ilustra otro ejemplo del uso de la codificación escalable.
La Figura 59 es un diagrama de bloque que ilustra aún otro ejemplo del uso de la codificación escalable.
Descripción de las Modalidades Se describirán en adelante modos para llevar a cabo la presente descripción (en adelante denominados como modalidades) . En este respecto, la descripción se hará en el siguiente orden. 1. Primera modalidad (aplicación ejemplar de la presente tecnología) 2. Segunda modalidad (dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes: primer método) 3. Tercera modalidad (dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes: segundo método) 4. Cuarta modalidad (dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes: tercer método) 5. Quinta modalidad (dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes: cuarto método) 6. Sexta modalidad (dispositivo de codificación de imágenes, dispositivo de descodificación de imágenes: otros métodos ) 7. Séptima modalidad (dispositivo de codificación de imágenes de varias vistas, dispositivo de descodificación de imágenes de varias vistas) 8. Octava modalidad (dispositivo de codificación de imágenes estratificado, dispositivo de descodificación de imágenes estratificado) 9. Novena modalidad (computadora) 10. Aplicaciones ejemplares 11. Aplicaciones ejemplares de codificación escalable <1. Primera modalidad> En esta modalidad, se proporcionará una descripción de una aplicación ejemplar de la presente tecnología, la cual se describirá en detalle en la segunda y siguientes modalidades de la misma. <1-1. Aplicación ejemplar de la presente tecnología> En primer lugar, un ejemplo típico en el cual se puede aplicar la presente tecnología se describirá. La presente tecnología es una tecnología relacionada con codificación y descodificación de una lista de escalado utilizada en procesos de cuantificación y descuantificación realizados cuando se codifican y "descodifican datos de imágenes .
La codificación y descodificación de datos de imágenes puede implicar cuantificación y descuantificación de datos de coeficiente. Tal cuantificación y descuantificación se realizan en unidades de un bloque que tiene un tamaño predeterminado, y una lista de escalado (o matriz de cuantificación) que tiene un tamaño que corresponde al tamaño de bloque se utiliza. Por ejemplo, en HEVC (Codificación de Video de Alta Eficiencia) , la cuantificación (o descuantificación) se realiza con tamaños tales como 4x4, 8x8, 16x16, y 32x32. En HEVC, las matrices de cuantificación que tienen tamaños de 4x4 y 8x8 pueden prepararse.
La Figura 1 ilustra un ejemplo de una lista de escalado de 8x8. Como se ilustra en la Figura 1, una lista de escalado incluye un coeficiente de CD y coeficientes de CA. El coeficiente de CD compuesto de un valor es el coeficiente (0, 0) de una matriz de cuantificación, y corresponde al coeficiente de CD de una transformada de coseno discreto (DCT) . Los coeficientes de CA son coeficientes de la matriz de cuantificación distinta al coeficiente (0, 0), y corresponden a coeficientes de la DCT distinta al coeficiente de CD. Observe que, como se ilustra en la Figura 1, los coeficientes de CA se representan por una matriz. Es decir, los coeficientes de CA también incluyen el coeficiente (0, 0) (en adelante también denominado como el coeficiente de CA (0, 0)), y el coeficiente (0, 0), el cual se ubica al comienzo de la matriz de cuantificación, se remplaza con el coeficiente de CD cuando se utiliza para la cuantificación/descuantificación. Por lo tanto, el coeficiente de CD también se denomina como un coeficiente de remplazo. En el ejemplo ilustrado en la Figura 1, los coeficientes de CA forman una matriz de 8x8.
En HEVC, además, se utiliza una versión convertida ascendentemente (conversión ascendente) de una matriz de cuantificación de 8x8 para cuantificación de 16x16 ó 32x32 (o descuantificación) .
La Figura 2 ilustra un ejemplo de la conversión ascendente de una lista de escalado de 8x8 en una lista de escalado de 16x16. Como se ilustra en la Figura 2, una lista de escalado se convierte ascendentemente utilizando, por ejemplo, un proceso de interpolación del vecino más cercano. Los detalles del proceso de interpolación del vecino más cercano se describirán en adelante con referencia a, por ejemplo, la Figura 25. Como se ilustra en la Figura 2, se realiza la conversión ascendente en los coeficientes de CA de la lista de escalado. Después el coeficiente (0, 0) entre los coeficientes de CA convertidos ascendentemente se remplaza con el coeficiente de CD.
Dos tipos de las lista de escalados de 8x8 se preparan, particularmente, a aquel utilizado de conversión ascendente en 16x16 ("8x8 para 16x16") y aquel que se utiliza para conversión ascendente en 32x32 ("8x8 para 32x32") .
La lista de escalado utilizada para cuantificación durante la codificación (utilizando un codificador) también se utiliza para descuantificación durante la descodificación (utilizando un descodificador) . Es decir, la lista de escalado se transmite desde el lado de codificación (el codificador) hasta el lado de descodificación (el descodificador ) . La Figura 3 ilustra un ejemplo de la transmisión de las lista de escalados.
Como en el ejemplo ilustrado en la Figura 3, los dos tipos de lista de escalados de 8x8, particularmente, a aquella utiliza para conversión ascendente en un tamaño de 16x16 y aquella utilizada para conversión ascendente en un tamaño de 32x32, como se describe en lo anterior, se transmiten. Aunque no se ilustra en los dibujos, una lista de escalado de 4x4 también se transmite.
Los coeficientes de CA de la lista de escalado de 8x8 utilizadas para conversión ascendente en un tamaño de 16x16, la cual se ha transmitido en la forma descrita en lo anterior, se convierten ascendentemente en el tamaño de 16x16 en el lado de descodificación (el descodificador ) utilizando el proceso de interpolación del vecino más cercano descrito en lo anterior, y se utilizan para la descuantificación de un bloque que tiene un tamaño de 16x16 después de que el coeficiente (0, 0) se remplaza con el coeficiente de CD.
Similarmente, los coeficientes de CA de la lista de escalado de 8x8 utilizadas para la conversión ascendente en un tamaño de 32x32, la cual se ha transmitido en la forma descrita en lo anterior, también se convierten ascendentemente en el tamaño de 32x32 en el lado de descodificación (el descodificador) utilizando el proceso de interpolación del vecino más cercano descrito en lo anterior, y se utilizan para la descuantificación de un bloque que tiene un tamaño de 32x32 después de que el coeficiente (0, 0) se remplaza con el coeficiente de CD. <l-2. Codificación de la lista de escalado La transmisión de la lista de escalados en la forma descrita en lo anterior incrementará la cantidad de codificación por consiguiente. De esta manera, para suprimir una reducción en la eficiencia de codificación, la lista de escalados se codifica utilizando un cierto método para reducir la cantidad de codificación de las listas de escalado. La Figura 4 ilustra un ejemplo de la codificación de una lista de escalado. Específicamente, una lista de escalado de 8x8 se transmite como sigue.
En el caso de conversión ascendente de una matriz de 8x8 en una matriz de 16x16: (1) una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CA (0, 0) ) de la matriz de 8x8 y un valor inicial predeterminado "8" se toma. (2) Diferencias entre los coeficientes (es decir, coeficientes de CA) (coeficientes adyacentes en una secuencia de coeficientes dispuestos de manera mono-dimensional en orden de exploración) de la matriz de 8x8 se toman. (3) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 16x16 y un valor inicial predeterminado "8" se toma. (4) Las diferencias obtenidas en (1) y (2) y la diferencia obtenida en (3) se transmiten por separado.
En el caso de conversión ascendente de una matriz de 8x8 en una matriz de 32x32: (1) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CA (0, 0)) de la matriz de 8x8 y un valor inicial predeterminado "8" se toma. (2) Diferencias entre los coeficientes (es decir, coeficientes de CA) (coeficientes adyacentes en una secuencia de coeficientes dispuestos de manera mono-dimensional en orden de exploración) de la matriz de 8x8 se toman. (3) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 32x32 y un valor inicial predeterminado "8" se toma. (4) Las diferencias obtenidas en (1) y (2) y la diferencia obtenida en (3) se transmiten por separado.
En el método descrito en lo anterior, sin embargo, se codifican las diferencias utilizando la codificación Golomb exponencial con signo y se transmiten en (4). Como se describe en lo anterior, la diferencia obtenida en (1) es la diferencia entre el coeficiente de CA (0, 0) y el valor inicial "8". De esta manera, existe una preocupación de que la cantidad de codificación puede incrementarse si el valor del coeficiente de CA (0, 0) no es un valor cercano al valor inicial "8".
Por ejemplo, en la Figura 4, el valor del coeficiente de CA (0, 0) es "12", y el valor "4" se codifica utilizando la codificación de Golomb exponencial con signo y se transmite como la diferencia obtenida en (1) . Es decir, 7 bits se requieren para la transmisión de la diferencia obtenida en (1) y eficiencia de codificación puede reducirse por consiguiente. Si el valor de la diferencia obtenida en (1) incrementa, la eficiencia de codificación además puede reducirse. Lo mismo es verdadero para el caso de una lista de escalado de 8x8 utilizada para conversión ascendente en un tamaño de 16x16 y una lista de escalado de 8x8 utilizada para conversión ascendente en un tamaño de 32x32.
Mientras tanto, la energía de los coeficientes de DCT generalmente se concentra en el coeficiente de CD y los coeficientes de orden bajo vecinos. Por lo tanto, en general, una matriz de cuantificación también tiene valores pequeños para el coeficiente de CD y coeficientes vecinos. Además, si los valores que son significativamente diferentes se utilizan para frecuencias individuales, un error de cuantificación puede ser notable de manera subjetiva. Para suprimir tal deterioro visual en la calidad de imagen, se utilizan valores consecutivos para el coeficiente de CD y coeficientes vecinos .
El coeficiente (0, 1), coeficiente (1. 0), y coeficiente (1. 1) obtenidos de la conversión ascendente corresponden al coeficiente de CA (0, 0) antes de la conversión ascendente. Además, el coeficiente (0, 0) obtenido después de la conversión ascendente corresponde al coeficiente de CD.
De esta manera, en las listas de escalado, el valor del coeficiente de CA (0, 0) y el valor del coeficiente de CD generalmente se acercan entre si. Por ejemplo, matrices por defecto de PEG2 , AVC, y HEVC toman los valores que tienen tal relación. También en el ejemplo ilustrado en la Figura 4, el valor del coeficiente de CD es el mismo que el valor de coeficiente de CA (0, 0), es decir, "12". De esta manera, el valor de la diferencia obtenida en (3), es decir, la diferencia entre el coeficiente de CD y el valor inicial "8", también es "4".
Es decir, tomando una diferencia entre cada uno del coeficiente de CD y el coeficiente de CA (0, 0) , cuyos valores se acercan entre sí, y el valor inicial puede incrementar el valor de diferencia, y también puede lograr una redundancia. Puede decirse que existirá un riesgo de reducir adicionalmente la eficiencia de codificación.
Para abordar esto, una lista de escalado se transmite utilizando el siguiente método en lugar de utilizar el método ilustrado en la Figura 4. La Figura 5 ilustra un ejemplo de este método.
En el caso de conversión ascendente de una matriz de 8x8 en una matriz de 16x16: (1) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CA (0, 0) ) de la matriz de 8x8 y el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 16x16 se toma. (2) Diferencias entre coeficientes (es decir, coeficientes de CA) (coeficientes adyacentes en una secuencia de coeficientes dispuestos de manera mono-dimensional en orden de exploración) de la matriz de 8x8 se toman. (3) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 16x16 y un valor inicial predeterminado "8" se toma. (4) Las diferencias obtenidas en (1) a (3) se transmiten de manera colectiva.
En el caso de conversión ascendente de una matriz de 8x8 en una matriz de 32x32: (1) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CA (0, 0) ) de la matriz de 8x8 y el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 32x32 se toma. (2) Diferencias entre los coeficientes (es decir, coeficientes de CA) (coeficientes adyacentes en una secuencia de coeficientes dispuestos de manera mono-dimensional en orden de exploración) de la matriz de 8x8 se toman. (3) Una diferencia entre el coeficiente (0, 0) (es decir, el coeficiente de CD) de la matriz de 32x32 y un valor inicial predeterminado "8" se toma. (4) Las diferencias obtenidas en (1) a (3) se transmiten de manera colectiva.
Similarmente al método ilustrado en la Figura 4, en (4), se codifican las diferencias utilizando codificación de Golomb exponencial y se transmiten como códigos de Golomb exponenciales .
En el destino al cual se transmiten las diferencias como códigos de Golomb exponenciales, cuando se reciben los códigos de Golomb exponenciales, los códigos de Golomb exponenciales recibidos se descodifican para obtener las diferencias individuales, y los procesos inversos a aquellos en (1) a (3) descritos en lo anterior se realizan en las diferentes opciones para determinar los coeficientes individuales (el coeficiente de CD y los coeficientes de CA) . <l-3. Características ejemplares de la presente tecnología> Características ejemplares de la presente tecnología relacionadas con el método de transmisión descrito en lo anterior ahora se describirán. <l-3-l. DPCM entre el coeficiente de CA (0, 0) y EL coeficiente de CD> Las listas de escalado se codifican utilizando modulación de pulso-código diferencial (DPCM) y se transmiten. En el ejemplo ilustrado en la Figura 4, los coeficientes de CA y el coeficiente de CD se codifican por DPCM individualmente, mientras que, de acuerdo con una de las características de la presente tecnología, como en el ejemplo ilustrado en la Figura 5, una diferencia (también denominada como coeficiente de diferencia de remplazo) entre el coeficiente de CA (0, 0) y el coeficiente de CD se determina y transmite.
Como se describe en lo anterior, el coeficiente de CA (0, 0) y el coeficiente de CD generalmente toma valores que se acercan entre sí. De esta manera, una diferencia entre el coeficiente de CA (0, 0) y el coeficiente de CD posiblemente puede ser menor que una diferencia entre el coeficiente de CA (0, 0) y el valor inicial "8". Es decir, la transmisión de un coeficiente de diferencia de remplazo que es una diferencia entre el coeficiente de CA (0, 0) y el coeficiente de CD utilizando la presente tecnología puede ser más probable para reducir la cantidad de codificación.
Por ejemplo, en el ejemplo ilustrado en la Figura 5, el valor de la diferencia obtenida en (1) es "0".
La Figura 6 es una tabla que ilustra un ejemplo de codificación de Golomb exponencial con signo. Como se indica en la tabla ilustrada en la Figura 6, el código de Golomb exponencial para el valor "4" tiene una longitud de código de 7 bits mientras que el código de Golomb exponencial para el valor "0" tiene una longitud de código de 1 bit. Es decir, el método ilustrado en la Figura 5 puede reducir la cantidad de codificación por 6 bits en comparación con el método ilustrado en la Figura 4.
En general, una cantidad de codificación de aproximadamente 100 bits a 200 bits se requiere para la transmisión de una matriz de cuantificación que tiene un tamaño de 8x8. Por lo tanto, 6 bits ocupan aproximadamente 6% de la cantidad total. Una reducción en la cantidad de codificación por 6% en Sintaxis de Alto Nivel puede decirse que es un efecto muy grande. <l-3-2. Transmisión colectiva del coeficiente de CD y los coeficientes de CA> La Figura 7 ilustra un ejemplo de la sintaxis de una lista de escalado. La sintaxis para el ejemplo ilustrado en la Figura 4 se ilustra en un ejemplo ilustrado en la parte A de la Figura 7. Específicamente, después de la diferencia entre el coeficiente de CA (0, 0) y el valor inicial "8" y las diferencias entre los coeficientes de CA ( scaling_list_delta_coef) se transmiten, la diferencia entre el coeficiente de CD y el valor inicial "8" (scaling_list_dc_coef_minus8 ) se transmite por separado.
En contraste, una de las características de la presente tecnología es que la diferencia entre el coeficiente de CD y el coeficiente de CA (0, 0) y las diferencias entre los coeficientes de CA se disponen en este orden y se transmiten de manera colectiva. Específicamente, como se ilustra en la Figura 5, después de que el coeficiente de CD y los coeficientes de CA dispuestos en un orden de exploración predeterminado se disponen de manera mono-dimensional y la diferencia entre el coeficiente de CD y el valor inicial "8" se determina, las diferencias entre los coeficientes adyacentes en la secuencia de coeficientes se determina. Además, las diferencias resultantes (diferencias entre los coeficientes) se disponen de manera mono-dimensional en el orden de obtenerse y se transmiten de manera colectiva.
La sintaxis en este caso se ilustra en un ejemplo en la parte B de la Figura 7. Específicamente, de manera inicial, la diferencia entre el coeficiente de CD y el valor inicial "8" ( scaling_list_dc_coef_minus8 ) se transmite, y después la diferencia entre el coeficiente de CD y el coeficiente de CA (0, 0) y las diferencias entre los coeficientes de CA ( scaling_list_delta_coef) se transmiten. Es decir, el coeficiente de CD y los coeficientes de CA se codifican colectivamente y se transmiten.
De esta manera, la transmisión colectiva de las diferencias dispuestas en el orden de que se obtienen permite que el lado de descodificación (el descodificador ) al cual se transmiten las diferencias descodifique las diferencias en el orden de que se transmiten y obtengan los coeficientes individuales. Es decir, una lista de escalado codificado por DPCM puede descodificarse fácilmente. Más específicamente, la carga de procesamiento puede reducirse. Además, la reorganización de las diferencias ya no es necesaria, resultando en una reducción en la capacidad de memoria intermedia. Además, las diferencias respectivas pueden descodificarse en el orden de que se suministran, resultando en una supresión de incremento en el tiempo de procesamiento. <l-3-3. Transmisión de matriz por defecto> La Figura 8 es un diagrama que ilustra un ejemplo de la sintaxis para la transmisión de una matriz por defecto. En la técnica relacionada, como se ilustra en la Figura 8, el coeficiente inicial (es decir, el coeficiente de CD) se transmite como "0" para transmitir información que indique el uso de una matriz por defecto. Es decir, el valor de la diferencia entre el coeficiente de CD y el valor inicial "8" ( scaling_list_dc_coef_minus8 ) es de "-8". Sin embargo, como se ilustra en la Figura 6, el código de Golomb exponencial para el valor "-8" tiene una longitud de código de 9 bits. Es decir, existe una preocupación de que la eficiencia de codificación pueda reducirse significativamente. En general, es deseable que el número de bits de la Sintaxis de Alto Nivel sea tan pequeño como sea posible. Además, como se ilustra en la Figura 8, debido a la complejidad incrementada de la sintaxis, la carga de procesamiento puede incrementarse .
Para abordar estas preocupaciones, el coeficiente inicial no se establece en "0" pero la semántica del scaling_list_pred_matrix_id_delta se modifica. Más específicamente, la semántica de scaling_list_pred_matrix_id_delta se modifica a partir de lo que se ilustra en la parte A de la Figura 9 a lo que se ilustra en la parte B de la Figura 9. Es decir, en la técnica relacionada, como se ilustra en la parte A de la Figura 9, el valor igual a "0" indica que la matriz inmediatamente precedente (MatrixID - 1) se menciona. En lugar de esta descripción, como se ilustra en la parte B de la Figura 9 el valor of scaling_list_pred_matrix_id_delta igual a "0" significa que se menciona una matriz por defecto.
Por consiguiente, la longitud de código de un código de Golomb exponencial para la transmisión de información que indique el uso de una matriz por defecto puede ser igual a 1 bit, y una reducción en la eficiencia de codificación puede suprimirse. Además, en la técnica relacionada, la sintaxis como se ilustra en las partes A y B de la Figura 10 son necesarias para una lista de escalado. Esta sintaxis puede simplificarse como en un ejemplo ilustrado en la Figura 11. Es decir, la carga de procesamiento implicada en la codificación y descodificación de una lista de escalado puede reducirse. <l-4. Características de la sintaxis con el uso de la presente tecnología> La sintaxis se describirá de manera más específica. En el ejemplo de la técnica relacionada ilustrada en las partes A y B de la Figura 10, la determinación de las necesidades por defecto necesita realizarse dos veces, particularmente, scaling_list_dc_coef_minus8 y scaling_list_delta_coef . Además, para scaling_list_delta_coef, la determinación se hace en la parte media del bucle "para", y el bucle sale cuando useDefaultScalingMatrixFlag = 1. Además, un indicador intermedio denominado "stopNow" se necesita, y debido a esta condición, una ramificación tal como nextCoef sustituyente en el valor de scalingList además existe. De esta manera, la sintaxis de la técnica relacionada implica procesamiento complicado .
En la presente tecnología, por consiguiente, como en el ejemplo ilustrado en la Figura 11, el coeficiente de CD calculado a partir de scaling_list_dc_coef_minus8 se sustituye en nextCoef para establecer el valor inicial de scaling_list_delta_coef en el coeficiente de CD.
Además, en la semántica, el valor de scaling_list_pred_matrix_id_delta, el cual se representa por "+1" en la técnica relacionada, permanece sin cambio, y el valor "0" se utiliza como válvula especial.
Es decir, en la técnica relacionada, cuando ScalingList [0] [2] va a descodificarse (matrixld =2) , si scaling_list_pred_matrix_id_delta = 0, entonces matrixld = 2 se obtiene a partir de refMatrixId = matrixld ( l+scaling_list_pred_matrix_id_delta) . De esta manera, refMatrixId = 1 se obtiene, y el valor de ScalingList [0] [1] se copia.
En contraste, en la presente tecnología, refMatrixId = matrixld - scaling_list_pred_matrix_id_delta se establece. Cuando va a descodificarse ScalingList [ 0 ] [2 ] (matrixld = 2), scaling_list_pred_matrix_id_delta = 1 puede establecerse si ScalingList [0] [1] se copiará (o si refMatrixId = 1 va a obtenerse) .
Por consiguiente, como se ilustra en la Figura 11, el número of filas de la sintaxis para una lista de escalado puede reducirse significativamente. Además, se incluirán dos variables como datos intermedios, particularmente, UseDefaultScalingMatrix y stopNow, pueden omitirse. Además, la ramificación hecha en el bucle "para" como se ilustra en la Figura 10 puede ya no requerirse. Por lo tanto, la carga de procesamiento implicada en la codificación y descodificación de una lista de escalado puede reducirse. <l-5. Unidades de procesamiento que implementan la presente tecnología> En un caso donde la presente tecnología se aplica a la transmisión de una lista de escalado, se codifica y descodifica una lista de escalado en la forma descrita en lo anterior. Específicamente, un dispositivo 10 de codificación de imágenes descrito en adelante con referencia a la Figura 14 codifica una lista de escalado y transmite la lista de escalado codificada, y un dispositivo 300 de descodificación de imágenes descrito en adelante con referencia a la Figura 22 recibe y descodifica la lista de escalado codificada.
Una lista de escalado se codifica por una unidad 150 de procesamiento de matrices (Figura 15) en una unidad 14 de transíormada/cuantificación (Figura 14) del dispositivo 10 de codificación de imágenes. Más específicamente, se codifica una lista de escalado por una unidad 192 de DPCM y una unidad 193 de exp-G (ambas se ilustran en la Figura 16) en una unidad 164 de codificación por entropía (Figura 16) en la unidad 150 de procesamiento de matrices. Es decir, la unidad 192 de DPCM determina las diferencias entre los coeficientes (el coeficiente de CD y los coeficientes de CA) de la lista de escalado, y la unidad 193 de exp-G codifica las diferencias individuales utilizando la codificación de Golomb exponencial .
Para descodificar una lista de escalado utilizando la presente tecnología como se describe en lo anterior, la unidad 192 de DPCM puede tener una configuración especial como se ilustra en, por ejemplo, la Figura 19, y puede realizar un proceso de DPCM como en un ejemplo ilustrado en la Figura 21. Además, la semántica como en un ejemplo ilustrado en la parte C de la Figura 44 o parte C de la Figura 45 puede utilizarse.
En otras palabras, solamente la unidad 192 de DPCM y la unidad 193 de exp-G pueden requerirse para lograr la codificación de una lista de escalado utilizando la presente tecnología, y otros componentes que tienen cualquier configuración pueden utilizarse según se desee. Una configuración necesaria, tal como una unidad de procesamiento para convertir ascendentemente una lista de escalado y una unidad de procesamiento para realizar la cuantificación utilizando una lista de escalado, pueden proporcionarse de acuerdo con las modalidades.
Además, una lista de escalado se descodifica por una unidad 410 de generación de matriz (Figura 23) en una unidad 313 de descuantificación/transformada ortogonal inversa (Figura 22) del dispositivo 300 de descodificación de imágenes. Más específicamente, una lista de escalado se descodifica por una unidad 551 de exp-G y una unidad 552 de DPCM inversa (Figura 24) en una unidad 533 de descodificación por entropía (Figura 24) en la unidad 410 de generación de matrices. Es decir, la unidad 551 de exp-G descodifica los códigos de Golomb para obtener diferencias, y la unidad 552 de DPCM inversa determina los coeficientes individuales (el coeficiente de CD y los coeficientes de CA) de la lista de escalado de las diferencias respectivas.
Para descodificar una lista de escalado codificada utilizando la presente tecnología como se describe en lo anterior, la unidad 552 de DPCM inversa puede tener una configuración ejemplar como se ilustra en, por ejemplo, la Figura 26, y puede realizar un proceso de DPCM inverso como en un ejemplo ilustrado en la Figura 29. Además, la semántica como en un ejemplo ilustrado en la parte C de la Figura 44 o la parte C de la Figura 45 puede utilizarse.
En otras palabras, solamente la unidad 551 de exp-G y la unidad 552 de DPCM inversa pueden requerirse para lograr la descodificación de una lista de escalado utilizando la presente tecnología, y otros componentes que tiene cualquier configuración pueden utilizarse según se desee. Una configuración necesaria, tal como una unidad de procesamiento para convertir ascendentemente una lista de escalado y una unidad de procesamiento para realizar la descuantificación utilizando una lista de escalado, pueden proporcionarse de acuerdo con las modalidades.
Modalidades individuales a las cuales la presente tecnología se aplica se describirán más adelante para una descripción más detalla de la presente tecnología. <2. Segunda modalidad> <2-l. Sintaxis: Primer método> (1) Sintaxis de la técnica relacionada En primer lugar, la Figura 12 ilustra un ejemplo de la sintaxis de una matriz de cuantificación (o lista de escalado) en la técnica relacionada. En el uso actual, una matriz de diferencia entre una lista de escalado y una matriz de predicción de la misma, en lugar de la lista de escalado, generalmente se transmite. De esta manera, en la siguiente descripción de sintaxis, etcétera, se asume que la descripción de una lista de escalado también puede aplicar a una matriz de diferencia.
La parte A de la Figura 12 ilustra la sintaxis para los datos de la lista de escalado (sintaxis de datos de la lista de escalado) , y parte B de la Figura 12 ilustra la sintaxis de una lista de escalado (sintaxis de lista de escalado) . (1-1) Sintaxis de datos de lita de escalado Como se ilustra en la parte A de la Figura 12, la sintaxis para los datos de lista de escalado especifica que un identificador ( scaling_list_present_flag) indica si se proporciona o no una lista de escalado, un identificador ( scaling_list_pred_mode_flag) que indica si un modo actual es un modo de copia, información ( scaling_list_pred_matrix_id_delta) que indica que lista de escalado mencionar en el modo de copia, etcétera se leen. (1-2) Sintaxis de lista de escalado Como se ilustra en la parte B de la Figura 12, la sintaxis de una lista de escalado especifica que el coeficiente de CD del cual se resta el contenido (por ejemplo, 8) ( scaling_list_dc_coef_minus8 ) , un valor de diferencia (scaling_list_delta_coef ) entre los coeficientes de CA, etcétera se leen y que el coeficiente de CD y los coeficientes de CA se restablezcan.
Sin embargo, existe una preocupación que las piezas de la sintaxis descrita en lo anterior no proporcionarán suficiente eficiencia de compresión del coeficiente de CD aunque facilita los procesos.
Por consiguiente, para obtener suficiente eficiencia de compresión de un coeficiente de CD (también denominado como coeficiente de corriente directa) , el cual es el coeficiente del componente de CD (componente de corriente directa) , se determina una diferencia entre el coeficiente de CD y otro coeficiente, y el valor de diferencia se transmite en lugar del coeficiente de CD. Es decir, el valor de diferencia es la información para calcular el coeficiente de CD, y, en otras palabras, es sustancialmente equivalente al coeficiente de CD. Sin embargo, el valor de diferencia es generalmente menor que el coeficiente de CD. Por lo tanto, la transmisión del valor de la diferencia en lugar del coeficiente de CD puede resultar en una reducción en la cantidad de codificación.
En la siguiente descripción, para conveniencia de la descripción, una lista de escalado (matriz de cuantificación) tiene un tamaño de 8x8. Un ejemplo especifico del método para transmitir una diferencia entre el coeficiente de CD y otro coeficiente, en lugar del coeficiente de CD descrito en lo anterior, se describirá en adelante . (2) Sintaxis para primer método Por ejemplo, 65 coeficientes pueden transmitirse utilizando DPCM (Modulación de Pulso-Código Diferencial), en donde el coeficiente de CD se considera como el elemento ubicado al comienzo de una matriz de 8x8 (coeficientes de CA) (primer método) .
Es decir, en primer lugar, se calcula una diferencia entre una constante predeterminada y el coeficiente de CD, y se utiliza como el coeficiente inicial de los datos de DPCM. Después, se calcula una diferencia entre el coeficiente de CD y el coeficiente de CA inicial, y se utiliza como el segundo coeficiente de los datos de DPCM. Después, se calcula una diferencia entre el coeficiente de CA inicial y el segundo coeficiente de CA, y se utiliza como el tercer coeficiente de los datos de DPCM. De manera subsiguiente, una diferencia del coeficiente de CA inmediatamente precedente se calcula, y se utiliza como el cuarto coeficiente de los datos de DPCM, y los siguientes coeficientes de los datos de DPCM se determinan de una forma similar a aquella descrita en lo anterior. Los coeficientes de los datos de DPCM generados en la forma descrita en lo anterior se transmiten de manera secuencial, comenzando desde el coeficiente inicial.
Por consiguiente, la relación de compresión puede mejorarse cuando los valores del coeficiente (0, 0) (coeficiente de CA) de una matriz de 8x8 y el coeficiente de CD se acercan entre si. Al implementar el primer método descrito en lo anterior, un dispositivo de codificación de imágenes puede procesar el coeficiente de CD en una forma similar a aquella de los coeficientes de CA (coeficientes de corriente alterna) , los cuales son los coeficientes de los componentes de CA (también denominados como componentes de corriente alterna) . Observe que, para implementar el primer método descrito en lo anterior, un dispositivo de descodificación de imágenes al cual se transmiten los coeficientes descritos en lo anterior necesita manejar especialmente sólo el coeficiente inicial. Específicamente, el dispositivo de descodificación de imágenes necesita extraer el coeficiente de CD de entre los coeficientes de CA.
La Figura 13 ilustra la sintaxis de una lista de escalado en el caso descrito en lo anterior. En el ejemplo ilustrado en la Figura 13, 65 valores de diferencia (scaling_list_delta_coef) entre coeficientes se leen, y, entre los coeficientes (nextcoef) determinados a partir de los valores de diferencia, el coeficiente (nextcoef) ubicado al principio se utiliza como el coeficiente de CD ( scaling_list_dc_coef) , mientras que se utilizan los otros coeficientes como los coeficientes de CA (ScalingList [i] ) .
Un dispositivo de codificación de imágenes que implementa la sintaxis para el primer método descrito en lo anterior se describirá en adelante. <2-2. Dispositivo de Codificación de Imágenes> La Figura 14 es un diagrama de bloque que ilustra una configuración ejemplar de un dispositivo 10 de codificación de imágenes de acuerdo con una modalidad de la presente descripción. El dispositivo 10 de codificación de imágenes ilustrado en la Figura 14 es un dispositivo de procesamiento de imágenes al cual se aplica la presente tecnología y que se configura para codificar datos de imágenes de entrada y producir los datos de imágenes codificados. Con referencia a la Figura 14, el dispositivo 10 de codificación de imágenes incluye una unidad 11 de conversión de A/D (Análogo a Digital) (A/D) , una memoria intermedia 12 de reorganización, una unidad 13 de sustracción, una unidad 14 de transformada ortogonal/cuantificación, una unidad 16 de codificación sin pérdidas, una memoria intermedia 17 de acumulación, una unidad 18 de control de proporción, una unidad 21 de descuantificación, una unidad 22 de transformada ortogonal inversa, una unidad 23 sumadora, un filtro 24 de desbloqueo, una memoria 25 de tramas, un selector 26, una unidad 30 de intra-predicción, una unidad 40 de búsqueda de movimiento, y una unidad 50 de selección de modo.
La unidad 11 de conversión de A/D convierte una señal de imagen ingresada en forma análoga en datos de imágenes en forma digital, y produce una secuencia de datos de imágenes digitales en la memoria intermedia 12 de reorganización .
La memoria intermedia 12 de reorganización reorganiza las imágenes incluidas en la secuencia de datos de imágenes ingresada desde la unidad 11 de conversión de A/D después de reorganizar las imágenes de acuerdo con una estructura de GOP (grupo de imágenes) para su uso en un proceso de codificación, la memoria intermedia 12 de reorganización produce los datos de imágenes en los cuales se han reorganizado las imágenes en la unidad 13 de sustracción, la unidad 30 de intra-predicción, y la unidad 40 de búsqueda de movimiento.
La unidad 13 de sustracción se suministra con los datos de imágenes ingresados desde la memoria intermedia 12 de reorganización y los datos de imágenes de predicción seleccionados por la unidad 50 de selección de modo, los cuales se describirán a continuación. La unidad 13 de sustracción calcula los datos de error de predicción que representan la diferencia entre los datos de imágenes ingresados desde la memoria intermedia 12 de reorganización y los datos de imágenes de predicción ingresados desde la unidad 50 de selección de modo, y produce los datos de error de predicción calculados en la unidad 14 de transformada ortogonal/cuantificación .
La unidad 14 de transformada ortogonal/cuantificación realiza una transformada ortogonal y la cuantificación en los datos de error de predicción ingresados desde la unidad 13 de sustracción, y produce los datos de coeficientes de transformada cuantificados (en lo sucesivo, denominados como datos cuantificados ) en la unidad 16 de codificación sin pérdidas y la unidad 21 de descuantificación . La proporción de bits de los datos cuantificados producidos de la unidad 14 de transformada ortogonal/cuantificación se controlan de acuerdo con una señal de control de proporción suministrada desde la unidad 18 de control de proporción. Una configuración detallada de la unidad 14 de transformada ortogonal/cuantificación se describirá adicionalmente a continuación.
La unidad 16 de codificación sin pérdidas se suministra con los datos cuantificados ingresados desde la unidad 14 de transformada ortogonal/cuantificación, la información para generar una lista de escalado (o matriz de cuantificación) en el lado de descodificación, y la información con respecto a la intra-predicción o a la inter-predicción que se selecciona por la unidad 50 de selección de modo. La información con respecto a la intra-predicción puede incluir, por ejemplo, información de modo de predicción que indica un modo de intra-predicción óptimo para cada bloque. Además, la información con respecto a la inter-predicción puede incluir, por ejemplo, información de modo de predicción para la predicción de bloque por bloque de vectores de movimiento, la información de vector de movimiento diferencial, la información de imagen de referencia, etc. Además, la información para generar una lista de escalado en el lado de descodificación puede incluir información de identificación que indica un tamaño máximo de una lista de escalado que se transmite (o una matriz de diferencia entre una lista de escalado (matriz de cuantificación) y una matriz de predicción de la misma) .
La unidad 16 de codificación sin pérdidas realiza un proceso de codificación sin pérdidas en los datos cuantificados para generar una corriente codificada. La codificación sin pérdidas realizada por la unidad 16 de codificación sin pérdidas puede ser, por ejemplo, codificación de longitud variable, codificación aritmética, o similares. Además, la unidad 16 de codificación sin pérdidas multiplexa la información para generar una lista de escalado en el encabezado (por ejemplo, un conjunto de parámetros de secuencia y un conjunto de parámetros de imagen) de la corriente codificada. La unidad 16 de codificación sin pérdidas además multiplexa la información con respecto a la intra-predicción o la inter-predicción descrita en lo anterior en el encabezado de la corriente codificada. Después de eso, la unidad 16 de codificación sin pérdidas produce la corriente codificada generada en la memoria intermedia 17 de acumulación .
La memoria intermedia 17 de acumulación, acumula temporalmente la corriente codificada ingresada desde la unidad 16 de codificación sin pérdidas, utilizando un medio de almacenamiento tal como una memoria de semiconductor. Después de eso, la memoria intermedia 17 de acumulación produce la corriente codificada acumulada en una proporción que corresponde al ancho de banda de una trayectoria de transmisión (o una línea de salida desde el dispositivo 10 de codificación de imágenes) .
La unidad 18 de control de proporción monitorea la memoria intermedia 17 de acumulación para comprobar la disponibilidad de capacidad. La unidad 18 de control de proporción genera una señal de control de proporción de acuerdo con la capacidad disponible de la memoria intermedia 17 de acumulación, y produce la señal de control de proporción generada en la unidad 14 de transformada ortogonal/cuantificación . Por ejemplo, cuando la capacidad disponible de la memoria intermedia 17 de acumulación es baja, la unidad 18 de control de proporción genera una señal de control de proporción para reducir la proporción de bits de los datos cuantificados . Alternativamente, por ejemplo, cuando la capacidad disponible de la memoria intermedia 17 de acumulación es lo suficientemente elevada, la unidad 18 de control de proporción genera una señal de control de proporción para aumentar la proporción de bits de los datos cuantificados .
La unidad 21 de descuantificación realiza un proceso de descuantificación en los datos cuantificados ingresados desde la unidad 14 de transformada ortogonal/cuantificación . Después de eso, la unidad 21 de descuantificación produce datos de coeficiente de transformada adquiridos a través del proceso de descuantificación en la unidad 22 de transformada ortogonal inversa .
La unidad 22 de transformada ortogonal inversa realiza un proceso de transformada ortogonal inversa en los datos de coeficiente de transformada ingresados desde la unidad 21 de descuantificación para restablecer los datos de error de predicción. Después de eso, la unidad 22 de transformada ortogonal inversa produce los datos de error de predicción restaurados en la unidad 23 sumadora.
La unidad 23 sumadora agrega en conjunto los datos de error de predicción restaurados a partir de la unidad 22 de transformada ortogonal inversa y los datos de imágenes de predicción ingresados desde la unidad 50 de selección de modo para generar datos de imágenes descodificados. Después de eso, la unidad 23 sumadora produce los datos de imágenes descodificados generados en el filtro 24 de desbloqueo y la memoria 25 de tramas.
El filtro 24 de desbloqueo realiza un proceso de filtración para reducir los artefactos de bloqueo causados por la codificación de una imagen. El filtro 24 de desbloqueo filtra los datos de imágenes descodificados ingresados desde la unidad 23 sumadora para eliminar (o al menos reducir) los artefactos de bloqueo, y produce los datos de imágenes descodificados filtrados en la memoria 25 de tramas.
La memoria 25 de tramas almacena los datos de imágenes descodificados ingresados desde la unidad 23 sumadora y los datos de imágenes descodificados filtrados ingresados desde el filtro 24 de desbloqueo, utilizando un medio de almacenamiento.
El selector 26 lee los datos de imágenes descodificados que se filtran, los cuales se utilizan para intra-predicción, desde la memoria 25 de tramas, y suministra los datos de imágenes descodificados leídos en la unidad 30 de intra-predicción como datos de imágenes de referencia. El selector 26 además lee los datos de imágenes descodificados filtrados, los cuales se utilizan para inter-predicción, desde la memoria 25 de tramas, y suministra los datos de imágenes descodificados leídos en la unidad 40 de búsqueda de movimiento como datos de imágenes de referencia.
La unidad 30 de intra-predicción realiza un proceso de intra-predicción en cada modo de intra-predicción en función de los datos de imágenes que codificarán, los cuales se ingresan desde la memoria intermedia 12 de reorganización, y los datos de imágenes descodificados suministrados mediante el selector 26. Por ejemplo, la unidad 30 de intra-predicción evalúa un resultado de predicción obtenido en cada modo de intra-predicción utilizando una función de costos predeterminados. Después, la unidad 30 de intra-predicción selecciona un modo de intra-predicción que minimiza el valor de función de costos, es decir, un modo de intra-predicción que proporciona la relación de compresión más alta, como modo de intra-predicción óptimo. Además, la unidad 30 de intra-predicción produce la información de modo de predicción que indica el modo de intra-predicción óptimo, los datos de imágenes de predicción, y la información con respecto a la intra-predicción, tal como el valor de función de costos, en la unidad 50 de selección de modo.
La unidad 40 de búsqueda de movimiento realiza un proceso de inter-predicción (o un proceso de inter-trama de predicción) en función de los datos de imágenes que se codificarán, los cuales se ingresan desde la memoria intermedia 12 de reorganización, y los datos de imágenes descodificados suministrados mediante el selector 26. Por ejemplo, la unidad 40 de búsqueda de movimiento evalúa un resultado de predicción obtenido en cada modo de predicción utilizando una función de costo predeterminada. Después, la unidad 40 de búsqueda de movimiento selecciona un modo de predicción que minimiza el valor de función de costos, es decir, un modo de predicción que proporciona la relación de compresión más alta, como modo de predicción óptimo. Además, la unidad 40 de búsqueda de movimiento genera datos de imágenes de predicción de acuerdo con el modo de predicción óptimo. La unidad 40 de búsqueda de movimiento produce la información con respecto a la inter-predicción que incluye la información de modo de predicción que indica el modo de predicción óptimo seleccionado, los datos de imágenes de predicción, y la información con respecto a la inter-predicción, tal como el valor de la función de costos, en la unidad 50 de selección de modo.
La unidad 50 de selección de modo compara el valor de la función de costo para intra-predicción, la cual se ingresa desde la unidad 30 de intra-predicción, con el valor de función de costo para la inter-predicción, que se ingresa desde la unidad 40 de búsqueda de movimiento. Después, la unidad 50 de selección de modo selecciona una técnica de predicción que tiene el más pequeño de los valores de función de costo para intra-predicción e inter-predicción. Si se selecciona intra-predicción, la unidad 50 de selección de modo produce la información con respecto a la intra-predicción en la unidad 16 de codificación sin pérdidas, y también produce los datos de imágenes de predicción en la unidad 13 de sustracción y la unidad 23 sumadora Alternativamente, si se selecciona inter-predicción, la unidad 50 de selección de modo produce la información con respecto a la inter-predicción descrita en lo anterior en la unidad 16 de codificación sin pérdidas, y también produce los datos de imágenes de predicción en la unidad 13 de sustracción y la unidad 23 sumadora. <2-3. Configuración ejemplar de la unidad de transformada ortogonal/cuantificación> La Figura 15 es un diagrama de bloque que ilustra un ejemplo de una configuración detallada de la unidad 14 de transformada ortogonal/cuantificación del dispositivo 10 de codificación de imágenes ilustrado en la Figura 14. Con referencia a la Figura 15, la unidad 14 de transformada ortogonal/cuantificación incluye una unidad 110 de selección, una unidad 120 de transformada ortogonal, una unidad 130 de cuantificación, una memoria intermedia 140 de listas de escalado, y una unidad 150 de procesamiento de matrices. (1) Unidad de selección La unidad 110 de selección selecciona una unidad de transformación (TU) que se utilizará para la transformada ortogonal de los datos de imágenes que se codificarán, de entre una pluralidad de unidades de transformada que tiene diferentes tamaños. Ejemplos de tamaños posibles de unidades de transformada seleccionadles por la unidad 110 de selección incluyen 4x4 y 8x8 para H.264/AVC (Codificación de Video Avanzada), e incluyen 4x4, 8x8, 16x16, 32x32 para HEVC (Modificación de Video de Alta Eficiencia) . La unidad 110 de selección puede seleccionar una unidad de transformada de acuerdo con, por ejemplo, el tamaño o calidad de una imagen que se codificará, el rendimiento del dispositivo 10 de codificación de imágenes, o similares. La selección de una unidad de transformada por la unidad 110 de selección puede sintonizarse a mano por un usuario que desarrolla el dispositivo 10 de codificación de imágenes. Después de eso, la unidad 110 de selección produce la información que especifica el tamaño de la unidad de transformada seleccionada en la unidad 120 de transformada ortogonal, la unidad 130 de cuantificación, la unidad 16 de codificación sin pérdidas, y la unidad 21 de descuantificación . (2) Unidad de transformada ortogonal La unidad 120 de transformada ortogonal realiza una transformada ortogonal en los datos de imágenes (es decir, datos de error de predicción) suministrados desde la unidad 13 de sustracción, en unidades a partir de la unidad de transformada seleccionada por la unidad 110 de selección. La transformada ortogonal realizada por la unidad 120 de transformada ortogonal puede ser, por ejemplo, una transformada de coseno discreta (DCT) , transformada de Karhunen-Loeve, o similares. Después de eso, la unidad 120 de transformada ortogonal produce los datos de coeficiente de transformada adquiridos a través del proceso de transformada ortogonal en la unidad 130 de cuantificación . (3) Unidad de cuantificación La unidad 130 de cuantificación cuantifica los datos de coeficiente de transformada generados por la unidad 120 de transformada ortogonal, al utilizar una lista de escalado que corresponde a la unidad de transformada seleccionada por la unidad 110 de selección. Además, la unidad 130 de cuantificación conmuta el tamaño de la etapa de cuantificación de acuerdo con la señal de control de proporción suministrada desde la unidad 18 de control de proporción para cambiar la proporción de bits de los datos cuantificados que se producirán.
Además, la unidad 130 de cuantificación provoca que conjuntos de listas de escalado, que corresponden respectivamente a una pluralidad de unidades de transformada seleccionables por la unidad 110 de selección, se almacenen en la memoria intermedia 140 de listas de escalado. Por ejemplo, como en HEVC, si existen cuatro tamaños posibles de unidades de transformada, particularmente, 4x4, 8x8, 16x16, y 32x32, cuatro conjuntos de listas de escalado que corresponden de manera respectiva con los cuatro tamaños pueden almacenarse en la memoria intermedia 140 de listas de escalado. Observe que si una lista de escalado especifica se utiliza para un tamaño dado, sólo un indicador que indica que se utiliza la lista de escalado especificada (una lista de escalado definida por el usuario no se utiliza) puede almacenarse en la memoria intermedia 140 de listas de escalado junto con el tamaño determinado.
Un conjunto de listas de escalado que puede utilizarse por la unidad 130 de cuantificación puede establecerse típicamente para cada secuencia de la corriente codificada. Además, la unidad 130 de cuantificación puede actualizar un conjunto de listas de escalado que se establece para cada secuencia de una base de imagen por imagen. La información para controlar el establecimiento y la actualización de un conjunto de listas de escalado puede insertarse en, por ejemplo, un conjunto de parámetros de secuencia y un conjunto de parámetros de imagen. (4) Memoria intermedia de lista de escalado La memoria intermedia 140 de listas de escalado almacena temporalmente un conjunto de listas de escalado, que corresponde respectivamente a una pluralidad de unidades de transformada que pueden seleccionarse por la unidad 110 de selección, utilizando un medio de almacenamiento tal como una memoria de semiconductor. El conjunto de listas de escalado almacenadas en la memoria intermedia 140 de listas de escalado se menciona cuando la unidad 150 de procesamiento de matrices realiza un proceso descrito a continuación. (5) Unidad de procesamiento de matrices La unidad 150 de procesamiento de matrices codifica una lista de escalado que se utilizará para codificación (cuantificación) . Después de eso, los datos codificados de la lista de escalado (en adelante denominada como datos de lista de escalado codificada) generados por la unidad 150 de procesamiento de matrices se produce en la unidad 16 de codificación sin pérdidas, y puede insertarse en el encabezado de la corriente codificada. <2-4. Configuración ejemplar detallada de la unidad de procesamiento de matrices> La Figura 16 es un diagrama de bloque que ilustra un ejemplo de una configuración más detallada de la unidad 150 de procesamiento de matrices. Con referencia a la Figura 16, la unidad 150 de procesamiento de matrices incluye una unidad 161 de predicción, una unidad 162 de generación de matrices de diferencia, una unidad 163 de transformación de tamaño de matriz de diferencia, una unidad 164 de codificación por entropía, una unidad 165 de descodificación, y una unidad 166 de salida. (1) Unidad de predicción La unidad 161 de predicción genera una matriz de predicción. Como se ilustra en la Figura 16, la unidad 161 de predicción incluye una unidad 171 de copiado y una unidad 172 de generación de matrices de predicción.
En un modo de copiado, la unidad 171 de copiado, copia una lista de escalado previamente transmitida, y utiliza la matriz de cuantificación copiada como matriz de predicción (o predice una lista de escalado de una unidad de transformada ortogonal que procesa) . Más específicamente, la unidad 171 de copiado adquiere el tamaño y el ID de lista (Listld) de una lista de escalado previamente transmitida desde una unidad 202 de almacenamiento en la unidad 165 de descodificación. El tamaño es la información que indica el tamaño de la lista de escalado (que varía, por ejemplo, 4x4 a 32x32) . El ID de lista es la información que indica el tipo de datos de error de predicción que cuantifica.
Por ejemplo, el ID de lista incluye la información de identificación que indica que los datos de error de predicción que se cuantifican son los datos de error de predicción (Intra Luma) del componente de luminancia que se genera utilizando una imagen de predicción sometida a intra-predicción, datos de error de predicción (Intra Cr) del componente de diferencia de color (Cr) que se genera utilizando una imagen de predicción sometida a intra-predicción, los datos de error de predicción (Intra Cb) del componente de diferencia de color (Cb) , que se genera utilizando una imagen de predicción sometida a intra-predicción, o datos de error de predicción (Inter-Luma) del componente de luminancia que se genera utilizando una imagen de predicción sometida a inter-predicción.
La unidad 171 de copiado selecciona, como una lista de escalado que se copia, una lista de escalado previamente transmitida del mismo tamaño que la lista de escalado (lista de escalado de una unidad de transformada ortogonal que se procesará) ingresada en la unidad 150 de procesamiento de matrices, y suministra el ID de lista de la lista de escalado que se copiará en la unidad 166 de salida para producir el ID de lista en los dispositivos fuera de la unidad 150 de procesamiento de matrices (la unidad 16 de codificación sin pérdidas y la unidad 21 de descuantificación) . Es decir, en este caso, solamente el ID de lista se transmite al lado de la descodificación (o se incluye en los datos codificados) como información que indica una matriz de predicción generada al copiar la lista de escalado previamente transmitida. De esta manera, el dispositivo 10 de codificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado.
Además, en un modo normal, la unidad 172 de generación de matrices de predicción adquiere una lista de escalado previamente transmitida desde la unidad 202 de almacenamiento en la unidad 165 de descodificación, y genera una matriz de predicción utilizando la lista de escalado (o predice una lista de escalado de una unidad de transformada ortogonal que se procesará) . La unidad 172 de generación de matrices de predicción suministra la matriz de predicción generada a la unidad 162 de generación de matrices de diferencia . (2) Unidad de generación de matrices de diferencia La unidad 162 de generación de matrices de diferencia genera una matriz de diferencia (matriz residual) que es una diferencia entre la matriz de predicción suministrada desde la unidad 161 de predicción (la unidad 172 de generación de matrices de predicción) y la lista de escalado ingresada en la unidad 150 de procesamiento de matrices. Como se ilustra en la Figura 16, la unidad 162 de generación de matrices de diferencia incluye una unidad 181 de transformación de tamaño de matriz de predicción, una unidad 182 de cálculo, y una unidad 183 de cuantificación .
La unidad 181 de transformación de tamaño de matriz de predicción transforma (en adelante también denominada como convierte) el tamaño de la matriz de predicción suministrado desde la unidad 172 de generación de matrices de predicción de modo que el tamaño de la matriz de predicción coincide con el tamaño de la lista de escalado ingresada a la unidad 150 de procesamiento de matrices.
Por ejemplo, si el tamaño de la matriz de predicción es mayor que el tamaño de la lista de escalado, la unidad 181 de transformación de tamaño de matriz de predicción convierte descendentemente (en adelante también denominado como convierte descendentemente) la matriz de predicción. Más específicamente, por ejemplo, cuando la matriz de predicción tiene un tamaño de 16x16 y la lista de escalado tiene un tamaño de 8x8, la unidad 181 de transformación de tamaño de matriz de predicción convierte descendentemente la matriz de predicción en una matriz de predicción de 8x8. Observe que cualquier método para conversión descendente puede utilizarse. Por ejemplo, la unidad 181 de transformación de tamaño de matriz de predicción puede reducir el número de elementos en la matriz de predicción (en adelante también denominada como muestreo descendente) al utilizar un filtro (a través de cálculos) . Alternativamente, la unidad 181 de transformación de tamaño de matriz de predicción también puede reducir el número de elementos en la matriz de predicción, por ejemplo, como se ilustra en la Figura 17, al reducir algunos de los elementos (por ejemplo, sólo los elementos de números pares (en la Figura 17, los elementos en negritas) entre los elementos bidimensionales ) sin utilizar un filtro (en adelante también denominado como submuestreos ) .
Además, por ejemplo, si el tamaño de la matriz de predicción es menor que el tamaño de la lista de escalado, la unidad 181 de transformación de tamaño de matriz de predicción convierte de manera ascendente (en adelante también denominado como convierte ascendentemente ) la matriz de predicción. Más específicamente, por ejemplo, cuando la matriz de predicción tiene un tamaño de 8x8 y la lista de escalado tiene un tamaño de 16x16, la unidad 181 de transformación de tamaño de matriz de predicción convierte ascendentemente la matriz de predicción en una matriz de predicción de 16x16. Observe que cualquier método para conversión ascendente puede utilizarse. Por ejemplo, la unidad 181 de transformación de tamaño de matriz de predicción puede incrementar el número de elementos en la matriz de predicción (en adelante también denominada como muestreo ascendente) al utilizar un filtro (a través de cálculos). Alternativamente, la unidad 181 de transformación de tamaño de matriz de predicción también puede incrementar el número de elementos en la matriz de predicción, por ejemplo, al copiar los elementos individuales en la matriz de predicción sin utilizar un filtro (en adelante también denominado como submuestreo inverso) .
La unidad 181 de transformación de tamaño de matriz de predicción suministra la matriz de predicción cuyo tamaño se ha hecho coincidir con el de la lista de escalado en la unidad 182 de cálculo.
La unidad 182 de cálculo resta la lista de escalado ingresada en la unidad 150 de procesamiento de matrices desde la matriz de predicción suministrada desde la unidad 181 de transformación de tamaño de matriz de predicción, y genera una matriz de diferencia (matriz residual) . La unidad 182 de cálculo suministra la matriz de diferencia calculada a la unidad 183 de cuantificación .
La unidad 183 de cuantificación cuantifica la matriz de diferencia suministrada desde la unidad 182 de cálculo. La unidad 183 de cuantificación suministra la matriz de diferencia cuantificada a la unidad 163 de transformación de tamaño de matriz de diferencia. La unidad 183 de cuantificación además suministra la información utilizada para cuantificación, tal como parámetros de cuantificación, a la unidad 166 de salida para producir la información a los dispositivos fuera de la unidad 150 de procesamiento de matrices (la unidad 16 de codificación sin pérdida y la unidad 21 de descuantificación) . Observe que la unidad 183 de cuantificación puede omitirse (es decir, la cuantificación de la matriz de diferencia no necesariamente puede realizarse) . (3) Unidad de transformación de tamaño de matriz de diferencia La unidad 163 de transformación de tamaño de matriz de diferencia convierte el tamaño de la matriz de diferencia (datos cuantificados) suministrada desde la unidad 162 de generación de matrices de diferencia (la unidad 183 de cuantificación) en un tamaño menor que o igual a un tamaño máximo permitido en la transmisión (en adelante también denominado como tamaño de transmisión), si es necesario. El tamaño máximo puede tener cualquier valor opcional, y, por ejemplo, es 8x8.
Los datos codificados producidos a partir del dispositivo 10 de codificación de imágenes se transmiten a un dispositivo de descodificación de imágenes que corresponde al dispositivo 10 de codificación de imágenes, por ejemplo, mediante una trayectoria de transmisión o un medio de almacenamiento, y se descodifican por el dispositivo de descodificación de imágenes. El limite superior del tamaño (tamaño máximo) de la matriz de diferencia (datos cuantificados) durante tal transmisión, o en los datos codificados producidos a partir del dispositivo 10 de codificación de imágenes, se establece en el dispositivo 10 de codificación de imágenes.
Si el tamaño de la matriz de diferencia es mayor que el tamaño máximo, la unidad 163 de transformación de tamaño de matriz de diferencia convierte descendentemente la matriz de diferencia de modo que el tamaño de la matriz de diferencia se vuelva menor que o igual al tamaño máximo.
Observe que, de manera similar la conversión descendente de la matriz de predicción descrita en lo anterior, la matriz de diferencia puede convertirse descendentemente utilizando cualquier método. Por ejemplo, muestreo descendente puede realizarse utilizando un filtro o similar, o submuestreo que implica reducir los elementos puede realizarse.
Además, la matriz de diferencia convertida descendentemente puede tener cualquier tamaño menor que el tamaño máximo. Sin embargo, en general, cuanto mayor sea la diferencia del tamaño entre antes y después de la conversión, mayor será el error. De esta manera es deseable que la matriz de diferencia se convierta descendentemente al tamaño máximo.
La unidad 163 de transformación de tamaño de matriz de diferencia suministra la matriz de diferencia convertida descendentemente al unidad 164 de codificación por entropía. Observe que si el tamaño de la matriz de diferencia es menor que el tamaño máximo, la conversión descendente descrita en lo anterior no es necesaria, y por lo tanto la unidad 163 de transformación de tamaño de matriz de diferencia suministra la matriz de diferencia ingresada a la misma a la unidad 163 de codificación de entropía como es (es decir, la conversión descendente de la matriz de diferencia se omite) . (4) Unidad de codificación por entropía La unidad 164 de codificación por entropía codifica la matriz de diferencia (datos cuantificados ) suministrada desde la unidad 163 de transformación de tamaño de matriz de diferencia utilizando un método predeterminado. Como se ilustra en la Figura 16, la unidad 164 de codificación por entropía incluye una unidad 191 de determinación de solapamiento (unidad de 135 grados) , una unidad 192 de DPCM (Modulación de Pulso-Código Diferencial) , y una unidad 193 de exp-G.
La unidad 191 de determinación de solapamiento determina la simetría de la matriz de diferencia suministrada desde la unidad 163 de transformación de tamaño de matriz de diferencia. Si el residuo (matriz de diferencia) representa una matriz simétrica de 135 grados, por ejemplo, como se ilustra en la Figura 18, la unidad 191 de determinación de solapamiento elimina los datos (elementos de matriz) de la parte simétrica es decir solapa los datos. Si el residuo no representa una matriz simétrica de 135 grados, la unidad 191 de determinación de solapamiento omite la eliminación de los datos (elementos de matriz) . La unidad 191 de determinación de solapamiento suministra los datos de la matriz de diferencia de la cual se ha eliminado la parte simétrica, si es necesario, a la unidad 192 de DPCM.
La unidad 192 de DPCM realiza codificación por DPCM de los datos de la matriz de diferencia de los cuales la parte simétrica se ha eliminado, si es necesario, la cual se suministra desde la unidad 191 de determinación de solapamiento, y genera los datos de DPCM. La unidad 192 de DPCM suministra los datos de DPCM generados a la unidad 193 de exp-G.
La unidad 193 de exp-G codifica los datos de DPCM suministrados desde la unidad 192 de DPCM utilizando códigos de Golomb exponenciales con signo o sin signo (en adelante también denominados como códigos de Golomb exponenciales) . La unidad 193 de exp-G suministra el resultado de codificación a la unidad 165 de codificación y la unidad 166 de salida. (5) Unidad de descodificación La unidad 165 de descodificación restablece una lista de escalado a partir de los datos suministrados desde la unidad 193 de exp-G. La unidad 165 de descodificación suministra la información con respecto a la lista de escalado restaurada en la unidad 161 de predicción como lista de escalado previamente transmitida.
Como se ilustra en la Figura 16, la unidad 165 de descodificación incluye una unidad 201 de restauración de lista de escalado y la unidad 202 de almacenamiento.
La unidad 201 de restauración de lista de escalado descodifica los códigos de Golomb exponenciales suministrados a partir del unidad 164 de codificación por entropía (la unidad 193 de exp-G) para restaurar una lista de escalado para que se ingrese en la unidad 150 de procesamiento de matrices. Por ejemplo, la unidad 201 de restauración de lista de escalado descodifica los códigos de Golomb exponenciales utilizando el método que corresponde al método de codificación para la unidad 164 de codificación por entropía, y obtiene una matriz de diferencia al realizar la transformación opuesta a la realización de tamaño realizada por la unidad 163 de transformación de tamaño de matriz de diferencia y realiza la descuantificación que corresponde a la cuantificación realizada por la unidad 183 de cuantificación . La unidad 201 de restauración de lista de escalado además resta la matriz de diferencia obtenida de la matriz de predicción para restaurar una lista de escalado.
La unidad 201 de restauración de lista de escalado suministra la lista de escalado restaurada a la unidad 202 de almacenamiento para almacenamiento en asociación con el tamaño y el ID de lista de la lista de escalado.
La unidad 202 de almacenamiento almacena la información con respecto a la lista de escalado suministrada desde la unidad 201 de restauración de lista de escalado. La información con respecto a la lista de escalado almacenada en la unidad 202 de almacenamiento se utiliza para generar matrices de predicción de otras unidades de transformada ortogonal que se procesan posteriormente. Es decir, la unidad 202 de almacenamiento suministra la información almacenada con respecto a la lista de escalado a la unidad 161 de predicción como información con respecto a una lista de escalado previamente transmitida.
Observe que, en lugar de almacenar la información con respecto la lista de escalado restaurada en la forma descrita en lo anterior, la unidad 202 de almacenamiento puede restaurar la lista de escalado ingresada en la unidad 150 de procesamiento de matrices junto con el tamaño y el ID de lista de la lista de escalado ingresada. En este caso, la unidad 201 de restauración de lista de escalado puede omitirse . (6) Unidad de salida La unidad 166 de salida produce los diversos tipos suministrados de información a los dispositivos fuera de la unidad 150 de procesamiento de matrices. Por ejemplo, en el modo de copia, la unidad 166 de salida suministra el ID de lista de la matriz de predicción suministrada desde la unidad 171 de copia a la unidad 16 de codificación sin pérdida y la unidad 21 de descuantificación . Además, por ejemplo, en el modo normal, la unidad 166 de salida suministra los códigos de Golomb exponenciales suministrados desde la unidad 193 de exp-G y los parámetros de cuantificación suministrados desde la unidad 183 de cuantificación hasta la unidad 16 de codificación sin pérdida y la unidad 21 de descuantificación .
La unidad 166 de salida además suministra la información de identificación que indica un tamaño máximo (tamaño de transmisión) permitido en la transmisión de una lista de escalado (o una matriz de diferencia entre una lista de escalado y una matriz de predicción de la misma) a la unidad 16 de codificación sin pérdida como información para generar una lista de escalado en el lado de descodificación. Como se describe en lo anterior, la unidad 16 de codificación sin pérdida crea una corriente descodificada que incluye la información para generar una lista de escalado, y suministra la corriente codificada al lado de descodificación. La información de identificación que indica el tamaño de transmisión puede especificarse por anticipado por nivel, perfil, y similar. En este caso, la información con respecto al tamaño de transmisión se comparte con anticipación entre el aparato en el lado de codificación y el aparato en el lado de descodificación. De esta manera, la transmisión de la información de identificación descrita en lo anterior puede omitirse . <2-5. Configuración ejemplar detallada de la unidad de DPCM> La Figura 19 es un diagrama de bloque que ilustra un ejemplo de una configuración más detallada de la unidad 192 de DPCM. Con referencia a la Figura 19, la unidad 192 de DPCM incluye una unidad 211 de codificación de coeficiente de CD y una unidad 212 de DPCM de coeficiente de CA.
La unidad 211 de codificación de coeficiente de CD adquiere el coeficiente de CD de entre los coeficientes suministrados desde la unidad 191 de determinación de solapamiento, resta el valor del coeficiente de CD de un valor inicial predeterminado (por ejemplo, 8) para determinar un valor de diferencia, y utiliza el valor de diferencia como el valor de diferencia inicial (i = 0) ( scaling_list_delta_coef) . La unidad 211 de codificación de coeficiente de CD suministra el valor de diferencia calculado ( scaling_list_delta_coef (i = 0) ) a la unidad 193 de exp-G como el coeficiente inicial de la lista de escalado que corresponde a la región de interés que se procesa.
La unidad 212 de DPCM de coeficiente de CA adquiere un coeficiente de CA entre los coeficientes suministrados desde la unidad 191 de determinación de solapamiento, y resta el valor del coeficiente de CA a partir del coeficiente inmediata y previamente procesado para determinar un valor de diferencia ( scaling_list_delta_coef (i> 0)). La unidad 212 de DPCM de coeficiente de CA suministra el valor de diferencia determinado ( scaling_list_delta_coef (i> 0)) a la unidad 193 de exp-G como coeficiente de la lista de escalado que corresponde a la región de interés que se procesa. Observe que cuando i = 1, el coeficiente inmediatamente precedente se representa por i = 0. De esta manera, el "coeficiente de CD" es el coeficiente inmediata y previamente procesado.
De esta manera, la unidad 192 de DPCM puede transmitir el coeficiente de CD como el elemento ubicado al comienzo de la lista de escalado (coeficientes de CA) . Por consiguiente, la eficiencia de codificación de la lista de escalado puede mejorarse. <2-6. Flujo de proceso de codificación de matrices de cuantificación> A continuación, un ejemplo del flujo de un proceso de codificación de matrices de cuantificación ejecutado por la unidad 150 de procesamiento de matrices ilustrada en la Figura 16 se describirá con referencia a un diagrama de flujo ilustrado en la Figura 20.
Cuando el proceso de codificación de matrices de cuantificación se inicia, en la etapa S101, la unidad 161 de predicción adquiere una lista de escalado (o matriz de cuantificación) para una región actual (también denominada como región de interés) que es una unidad de transformada ortogonal que se procesará.
En la etapa S102, la unidad 161 de predicción determina si el modo actual es o no el modo de copia. Si se determina que el modo actual no es el modo de copia, la unidad 161 de predicción hace avanzar el proceso a la etapa S103.
En la etapa S103, la unidad 172 de generación de matrices de predicción adquiere una lista de escalado previamente transmitida desde la unidad 202 de almacenamiento, y genera una matriz de predicción utilizando la lista de escalado.
En la etapa S104, la unidad 181 de transformación de tamaño de matriz de predicción determina si el tamaño de la matriz de predicción generada en la etapa S103 es diferente o no del de la lista de escalado para la región actual (región de interés) adquirida en la etapa S101. Si se determina que ambos tamaños son diferentes, la unidad 181 de transformación de tamaño de matriz de predicción hace avanzar el proceso a la etapa S105.
En la etapa S105, la unidad 181 de transformación de tamaño de matriz de predicción convierte el tamaño de la matriz de predicción generada en la etapa S103 en el tamaño de la lista de escalado para la región actual adquirida en la etapa S101.
Cuando se completa el procesamiento de la etapa S105, la unidad de transformación de tamaño de la matriz 181 de predicción hace avanzar el proceso a la etapa S106. Si se determina en la etapa S104 que el tamaño de la matriz de predicción es el mismo que el tamaño de la lista de escalado, la unidad de transformación de tamaño de la matriz 181 de predicción hace avanzar el proceso a la etapa S106, mientras se salta el procesamiento de la etapa S105 (o sin realizar el procesamiento de la etapa S105) .
En la etapa S106, la unidad 182 de cálculo resta la lista de escalado de la matriz de predicción para calcular una matriz de diferencia entre la matriz de predicción y la lista de escalado.
En la etapa S107, la unidad 183 de cuantificación cuantifica la matriz de diferencia generada en la etapa S106. Observe que este procesamiento puede omitirse.
En la etapa S108, la unidad 163 de transformación de tamaño de matriz de diferencia determina si el tamaño de la matriz de diferencia cuantificada es mayor o no que el tamaño de transmisión (el tamaño máximo permitido en la transmisión) . Si se determina que el tamaño de la matriz de diferencia cuantificada es mayor que el tamaño de transmisión, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S109, y convierte descendentemente la matriz de diferencia en el tamaño de transmisión o menos.
Cuando se completa el procesamiento de la etapa S109, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S110. Además, si se determina en la etapa S108 que el tamaño de la matriz de diferencia cuantificada es menor que o igual cual el tamaño de transmisión, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa SllO, mientras se salta el procesamiento de la etapa S109 (o sin realizar el procesamiento de la etapa S109) .
En la etapa SllO, la unidad 191 de determinación de solapamiento determina si la matriz de diferencia cuantificada tiene o no simetría de 135 grados. Si se determina que la matriz de diferencia cuantificada tiene simetría de 135 grados, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa Slll.
En la etapa Slll, la unidad 191 de determinación de solapamiento elimina la porción de solapamiento (datos de solapamiento) en la matriz de diferencia cuantificada. Después se eliminan los datos de solapamiento, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa S112.
Además, si se determina en la etapa S110 que la matriz de diferencia cuantificada no tiene simetría de 135 grados, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa S112, mientras se salta el procesamiento de la etapa Slll (o sin realizar el procesamiento de la etapa Slll) .
En la etapa S112, la unidad 192 de DPCM realiza codificación de DPCM de la matriz de diferencia de la cual se ha eliminado la porción de solapamiento, si es necesario.
Cuando el procesamiento de la etapa S105 se completa, la unidad 181 de transformación de tamaño de matriz de predicción hace avanzar el proceso a la etapa S106. Si se determina en la etapa S104 que el tamaño de la matriz de predicción es el mismo que el tamaño de la lista de escalado, la unidad 181 de transformación de tamaño de matriz de predicción hace avanzar el proceso a la etapa S106, mientras salta el procesamiento de la etapa S105 (o sin realizar el procesamiento de la etapa S105) .
En la etapa S106, la unidad 182 de cálculo resta la lista de escalado de la matriz de predicción para calcular una matriz de diferencia entre la matriz de predicción y la lista de escalado.
En la etapa S107, la unidad 183 de cuantificación cuantifica la matriz de diferencia generada en la etapa S106. Observe que este procesamiento puede omitirse.
En la etapa S108, la unidad 163 de transformación de tamaño de matriz de diferencia determina si el tamaño de la matriz de diferencia cuantificada es mayor o no que el tamaño de transmisión (el tamaño máximo permitido en la transmisión) . Si se determina que el tamaño de la matriz de diferencia cuantificada es mayor que el tamaño de transmisión, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S109, y convierte descendentemente la matriz de diferencia en el tamaño de transmisión o menos.
Cuando el procesamiento de la etapa S109 se completa, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S110. Además, si se determina en la etapa S108 que el tamaño de la matriz de diferencia cuantificada es menor que o igual al tamaño de transmisión, la unidad 163 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S110, mientras salta el procesamiento en la etapa S109 (o sin realizar el procesamiento de la etapa S109) .
En la etapa S110, la unidad 191 de determinación de solapamiento determina si la matriz de diferencia cuantificada tiene o no una simetría de 135 grados. Si se determina que la matriz de diferencia cuantificada tiene una simetría de 135 grados, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa Slll.
En la etapa Slll, la unidad 191 de determinación de solapamiento elimina la porción de solapamiento (datos de solapamiento) en la matriz de diferencia cuantificada. Después de que se eliminan los datos de solapamiento, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa S112.
Además, si se determina en la etapa S11Q que la matriz de diferencia cuantificada no tiene la simetría de 135 grados, la unidad 191 de determinación de solapamiento hace avanzar el proceso a la etapa S112 mientras salta el procesamiento de la etapa Slll (o sin realizar el procesamiento de la etapa Slll).
En la etapa S112, la unidad 192 de DPCM realiza la codificación de DPCM de la matriz de diferencia de la cual se ha eliminado la posición de solapamiento, si es necesario.
En la etapa S113, la unidad 193 de exp-G determina si los datos de DPCM generados en la etapa S112 tienen o no un signo positivo o negativo. Si se determina que se incluye un signo, la unidad 193 de exp-G hace avanzar el proceso a la etapa S114.
En la etapa S114, la unidad 193 de exp-G codifica los datos de DPCM utilizando codificación de Golomb exponencial con signo. La unidad 166 de salida produce los códigos de Golomb que exponenciales generados en la unidad 16 de codificación sin pérdidas y la unidad 21 de descuantificación . Cuando el procesamiento de la etapa S114 se completa, la unidad 193 de exp-G hace avanzar el proceso a la etapa S116.
Además, si se determina en la etapa S113 que no se incluye ningún signo, la unidad 193 de exp-G hace avanzar el proceso a la etapa S115.
En la etapa S115, la unidad 193 de exp-G codifica los datos de DPCM utilizando la codificación de Golomb exponencial sin signo. La unidad 166 de salida produce los códigos de Golomb exponenciales generados en la unidad 16 de codificación sin pérdidas y la unidad 21 de descuantificación . Cuando se completa el procesamiento de la etapa S115, la unidad 193 de exp-G hace avanzar el proceso a la etapa S116.
Además, si se determina en la etapa S102 que el modo actual es el modo de copia, la unidad 171 de copia, copia una lista de escalado previamente transmitida, y utiliza la lista de escalado copiada como matriz de predicción. La unidad 166 de salida produce la ID de lista que corresponde a la matriz de predicción en la unidad 16 de codificación sin pérdidas y la unidad 21 de descuantificación como información que indica la matriz de predicción. Después, la unidad 171 de copia hace avanzar el proceso a la etapa S116.
En la etapa S116, la unidad 201 de restauración de lista de escalado restaura una lista de escalado. En la etapa S117, la unidad 202 de almacenamiento almacena la lista de escalado restaurada en la etapa S116.
Cuando el procesamiento de la etapa S117 se completa, la unidad 150 de procesamiento de matrices finaliza el proceso de codificación de matrices de cuantificación . <2-7. Flujo de proceso de DPCM> A continuación, un ejemplo de un flujo del proceso de DPCM ejecutado en la etapa S112 en la Figura 20 se describirá con referencia a un diagrama de flujo ilustrado en la Figura 21.
Cuando el proceso de DPCM se inicia, en la etapa S131, la unidad 211 de codificación de coeficiente de CD determina una diferencia entre el coeficiente de CD y una constante. En la etapa S132, la unidad 212 de DPCM de coeficiente de CA determina una diferencia entre el coeficiente de CD y el coeficiente de CA inicial.
En la etapa S133, la unidad 212 de DPCM de coeficiente de CA determina si todos los coeficientes de CA se han procesado o no. Si se determina que existe un coeficiente de CA no procesado, la unidad 212 de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S134.
En la etapa S134, la unidad 212 de DPCM de coeficiente de CA cambia el objetivo de procesamiento al coeficiente de CA subsiguiente. En la etapa S135, la unidad 212 de DPCM de coeficiente de CA determina una diferencia entre el coeficiente de CA previamente procesado y el coeficiente de CA actual que se procesa. Cuando el procesamiento de la etapa S135 se completa, la unidad 212 de DPCM de coeficiente de CA regresa el proceso a la etapa S133.
De esta manera, siempre y cuando se determine en la etapa S133 que existe un coeficiente de CA no procesado, la unidad 212 de DPCM de coeficiente de CA ejecuta repetidamente el procesamiento de las etapas S133 a S135. Si se determina en la etapa S133 que no existe ningún coeficiente de CA no procesado, la unidad 212 de DPCM de coeficiente de CA finaliza el proceso de DPCM, y regresa el proceso a la Figura 20.
Como se describe en lo anterior, una diferencia entre el coeficiente de CD y el coeficiente de CA ubicado al inicio entre los coeficientes de CA se determina, y la diferencia en lugar del coeficiente de CD se transmite a un dispositivo de descodificación de imágenes. De esta manera el dispositivo 10 de codificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado .
A continuación, una configuración ejemplar de un dispositivo de descodificación de imágenes de acuerdo con una modalidad de la presente descripción se describirá. <2-8. Dispositivo de descodificación de imágenes> La Figura 22 es un diagrama de bloque que ilustra una configuración ejemplar de un dispositivo 300 de descodificación de imágenes de acuerdo con una modalidad de la presente descripción. El dispositivo 300 de descodificación de imágenes ilustrado en la Figura 22 es un dispositivo de procesamiento de imágenes al cual se aplica la presente tecnología y que se configura para descodificar datos codificados generados por el dispositivo 10 de codificación de imágenes. Con referencia a la Figura 22, el dispositivo 300 de descodificación de imágenes incluye una memoria intermedia 311 de acumulación, una unidad 312 de descodificación sin pérdidas, una unidad 313 de descuantificación/transformada ortogonal inversa, una unidad 315 sumadora, un filtro 316 de desbloqueo, una memoria intermedia 317 de reorganización, una unidad 318 de conversión de D/A (Digital a Análogo) una memoria 319 de tramas, selectores 320 y 321, una unidad 330 de intra-predicción, y una unidad 340 de compensación de movimiento.
La memoria intermedia 311 de acumulación acumula temporalmente una corriente codificada ingresada mediante una trayectoria de transmisión, utilizando un medio de almacenamiento .
La unidad 312 de descodificación sin pérdidas descodifica la corriente codificada ingresada desde la memoria intermedia 311 de acumulación de acuerdo con el esquema de codificación utilizado para codificación. La unidad 312 de descodificación sin pérdidas además descodifica la información multiplexada en la región de encabezado de la corriente codificada. La información multiplexada en la región de encabezado de la corriente codificada puede incluir, por ejemplo, la información para generar una lista de escalado descrita en lo anterior, y la información con respecto a intra-predicción y la información con respecto a inter-predicción, las cuales se contienen en el encabezado de bloque. La unidad 312 de descodificación sin pérdidas produce los datos cuantificados descodificados y la información para generar una lista de escalado en la unidad 313 de descuantificación/transformada ortogonal inversa. La unidad 312 de descodificación sin pérdidas además produce la información con respecto a la intra-predicción en la unidad 330 de intra-predicción. La unidad 312 de descodificación sin pérdidas además produce la información con respecto a la inter-predicción en la unidad 340 de compensación de movimiento.
La unidad 313 de descuantificación/transformada ortogonal inversa realiza descuantificación y una transformada ortogonal inversa en los datos cuantificados ingresados desde la unidad 312 de descodificación sin pérdidas para generar datos de error de predicción. Después de eso, la unidad 313 de descuantificación/transformada ortogonal inversa produce los datos de error de predicción generados en la unidad 315 sumadora.
La unidad 315 sumadora agrega en conjunto los datos de error de predicción ingresados desde la unidad 313 de descuantificación/transformada ortogonal inversa y los datos de imagen de predicción ingresados desde el selector 321 para generar datos de imágenes descodificados. Después de eso, la unidad 315 sumadora produce los datos de imágenes descodificados generados en el filtro 316 de desbloqueo y la memoria 319 de tramas.
El filtro 316 de desbloqueo filtra los datos de imágenes descodificados ingresados desde la unidad 315 sumadora para eliminar los artefactos de bloqueo, y produce los datos de imágenes descodificados filtrados en la memoria intermedia 317 de reorganización y la memoria 319 de tramas.
La memoria intermedia 317 de reorganización reorganiza las imágenes ingresadas desde el filtro 316 de desbloqueo para generar una secuencia de datos de imágenes de serie de tiempos. Después de eso, la memoria intermedia 317 de reorganización produce los datos de imágenes generados en la unidad 318 de conversión de D/A.
La unidad 318 de conversión de D/A convierte los datos de imágenes en forma digital que se ingresan desde la memoria intermedia 317 de reorganización hasta una señal de imagen en forma análoga. Después de eso, la unidad 318 de conversión de D/A produce la señal de imagen análoga en, por ejemplo, una pantalla (no ilustrada) conectada al dispositivo 300 de descodificación de imágenes para visualizar una imagen .
La memoria 319 de tramas almacena los datos de imágenes descodificados que se filtran, los cuales se ingresan desde la unidad 315 sumadora, y los datos de imágenes descodificados filtrados ingresados desde el filtro 316 de desbloqueo, utilizando un medio de almacenamiento.
El selector 320 conmuta el destino en el cual se producirán los datos de imágenes suministrados desde la memoria 319 de tramas entre la unidad 330 de intra-predicción y la unidad 340 de compensación de movimiento, para cada bloque en la imagen, de acuerdo con la información de modo adquirida por la unidad 312 de descodificación sin pérdidas. Por ejemplo, si se especifica un modo de intra-predicción, el selector 320 produce los datos de imágenes descodificados que se filtran, los cuales se suministran desde la memoria 319 de tramas, en la unidad 330 de intra-predicción como datos de imágenes de referencia. Además, si se especifica un modo de inter-predicción, el selector 320 produce los datos de imágenes descodificados filtrados suministrados desde la memoria 319 de tramas en la unidad 340 de compensación de movimiento como datos de imágenes de referencia.
El selector 321 conmuta la fuente de la cual se suministran los datos de imagen de predicción a la unidad 315 sumadora que se producirá entre la unidad 330 de intra-predicción y la unidad 340 de compensación de movimiento, para cada bloque en la imagen, de acuerdo con la información de modo adquirida por la unidad 312 de descodificación sin pérdidas. Por ejemplo, si se especifica el modo de intra-predicción, el selector 321 suministra los datos de imagen de predicción producidos desde la unidad 330 de intra-predicción en la unidad 315 sumadora. Si el modo de inter-predicción se especifica, el selector 321 suministra los datos de imágenes de predicción producidos de la unidad 340 de compensación de movimiento en la unidad 315 sumadora.
La unidad 330 de intra-predicción realiza la predicción intra-pantalla de un valor de pixel basándose en la información con respecto a la intra-predicción, la cual se ingresa desde la unidad 312 de descodificación sin pérdidas, y los datos de imágenes de referencia suministrados desde la memoria 319 de tramas, y genera datos de imágenes de predicción. Después de eso, la unidad 330 de intra-predicción produce los datos de imágenes de predicción generados en el selector 321.
La unidad 340 de compensación de movimiento realiza un proceso de compensación de movimiento basándose en la información con respecto a la inter-predicción, la cual se ingresa desde la unidad 312 de descodificación sin pérdidas, y los datos de imágenes de referencia suministrados desde la memoria 319 de tramas, y genera datos de imágenes de predicción. Después de eso, la unidad 340 de compensación de movimiento produce los datos de imágenes de predicción generados en el selector 321. <2-9. Configuración ejemplar de la unidad de descuantificación/transformada ortogonal inversa> La Figura 23 es un diagrama de bloque que ilustra un ejemplo de una configuración principal de la unidad 313 de descuantificación/transformada ortogonal inversa del dispositivo 300 de descodificación de imágenes ilustrado en la Figura 22. Con referencia a la Figura 23, la unidad 313 de descuantificación/transformada ortogonal inversa incluye una unidad 410 de generación de matrices, una unidad 430 de selección, una unidad 440 de descuantificación, y una unidad 450 de transformada ortogonal inversa. (1) Unidad de generación de matrices La unidad 410 de generación de matrices descodifica los datos de la lista de escalado codificados que se extraen de una corriente de bits y se suministran por la unidad 312 de descodificación sin pérdidas, y genera una lista de escalado. La unidad 410 de generación de matrices suministra la lista de escalado generada a la unidad 440 de descuantificación . (2) Unidad de selección La unidad 430 de selección selecciona una unidad de transformada (TU) que se utiliza para la transformada ortogonal inversa de los datos de imágenes que se descodifican de entre una pluralidad de unidades de transformada que tienen diferentes tamaños. Ejemplos de tamaños posibles de unidades de transformada que se pueden seleccionar por la unidad 430 de selección incluyen 4x4 y 8x8 para H.264/AVC, e incluyen 4x4, 8x8, 16x16 y 32x32 para HEVC . La unidad 430 de selección puede seleccionar una unidad de transformada de acuerdo con, por ejemplo, la LCU, SCU, y split_flag contenidas en el encabezado de la corriente codificada. Después de eso, la unidad 430 de selección produce la información que especifica el tamaño de la unidad de transformada seleccionada en la unidad 440 de descuantificación y la unidad 450 de transformada ortogonal inversa . (3) Unidad de descuantificación La unidad 440 de descuantificación descuantifica los datos de coeficiente de transformada cuantificados cuando se codifican las imágenes, al utilizar una lista de escalado de la unidad de transformada seleccionada por la unidad 430 de selección. Después de eso, la unidad 440 de descuantificación produce los datos de coeficiente de transformada descuantificados en la unidad 450 de transformada ortogonal inversa. (4) Unidad de transformada ortogonal inversa La unidad 450 de transformada ortogonal inversa realiza una transformada ortogonal inversa en los datos de coeficiente de transformada descuantificados por la unidad 440 de descuantificación en unidades de la unidad de transformada seleccionada de acuerdo con el esquema de transformada ortogonal utilizado para codificación para generar datos de error de predicción. Después de eso, la unidad 450 de transformada ortogonal inversa produce los datos de error de predicción generados en la unidad 315 sumadora . <2-10. Configuración ejemplar detallada de la unidad de generación de matrices> La Figura 24 es un diagrama de bloque que ilustra un ejemplo de una configuración detallada de la unidad 410 de generación de matrices ilustrada en la Figura 23. Con referencia a la Figura 24, la unidad 410 de generación de matrices incluye una unidad 531 de análisis de parámetros, una unidad 532 de predicción, una unidad 533 de descodificación por entropía, una unidad 534 de restauración de lista de escalado, una unidad 535 de salida y una unidad 536 de almacenamiento. (1) Unidad de análisis de parámetros La unidad 531 de análisis de parámetros analiza los diversos indicadores y parámetros con respecto a la lista de escalado, que se suministran desde la unidad 312 de descodificación sin pérdidas. Además, de acuerdo con los resultados de análisis, la unidad 531 de análisis de parámetros suministra los diversos tipos de información suministrada desde la unidad 312 de descodificación sin pérdidas, tal como datos codificados de la matriz de diferencia, a la unidad 532 de predicción o la unidad 533 de descodificación por entropía.
Por ejemplo, si pred_mode es igual a 0, la unidad 531 de análisis de parámetros determina que el modo actual es el modo de copia, y suministra pred_matrix_id_delta en una unidad 541 de copia. Además, por ejemplo, si pred_mode es igual a 1, la unidad 531 de análisis de parámetros determina que el modo actual es un modo de exploración completa (modo normal), y suministra pred_matrix_id_delta y pred_size_id_delta en una unidad 542 de generación de matrices de predicción.
Además, por ejemplo, si residual_flag es verdadero, la unidad 531 de análisis de parámetros suministra los datos codificados (códigos de Golomb exponenciales) de la lista de escalado suministrada desde la unidad 312 de descodificación sin pérdidas en una unidad 551 de exp-G de la unidad 533 de descodificación por entropía. La unidad 531 de análisis de parámetros además suministra residual_symmetry_flag a la unidad 551 de exp-G.
Además, la unidad 531 de análisis de parámetros suministra residual_down_sampling_flag a una unidad 562 de transformación de tamaño de matriz de diferencia de la unidad 534 de restauración de lista de escalado. (2) Unidad de predicción La unidad 532 de predicción genera una matriz de predicción de acuerdo con el control de la unidad 531 de análisis de parámetros. Como se ilustra en la Figura 24, la unidad 532 de predicción incluye la unidad 541 de copia y la unidad 542 de generación de matrices de predicción.
En el modo de copia, la unidad 541 de copia, copia una lista de escalado previamente transmitida, y utiliza la lista de escalado copiada como matriz de predicción. Más específicamente, la unidad 541 de copia lee una lista de escalado previamente transmitida que corresponde a pred_matrix_id_delta y que tiene el mismo tamaño que la lista de escalado para la región actual de la unidad 536 de almacenamiento, utiliza la lista de escalado leída como imagen de predicción, y suministra la imagen de predicción a la unidad 535 de salida.
En el modo normal, la unidad 542 de generación de matrices de predicción genera (o predice) una matriz de predicción utilizando una lista de escalado previamente transmitida. Más específicamente, la unidad 542 de generación de matrices de predicción lee una lista de escalado previamente transmitida que corresponde a pred_matrix_id_delta y pred_size_id_delta de la unidad 536 de almacenamiento, y genera una matriz de predicción utilizando la lista de escalado leída. En otras palabras, la unidad 542 de generación de matrices de predicción genera una matriz de predicción similar a la matriz de predicción generada por la unidad 172 de generación de matrices de predicción (Figura 16) del dispositivo de codificación de imágenes. La unidad 542 de generación de matrices de predicción suministra la matriz de predicción generada a una unidad 561 de transformación de tamaño de matriz de predicción de la unidad 534 de restauración de lista de escalado. (3) Unidad de descodificación por entropía La unidad 533 de descodificación por entropía restaura una matriz de diferencia a partir de los códigos de Golom exponenciales suministrados desde la unidad 531 de análisis de parámetros. Como se ilustra en la Figura 24, la unidad 533 de descodificación por entropía incluye la unidad 551 de exp-G, una unidad 552 de DPCM inversa, y una unidad 553 de determinación de solapamiento inversa.
La unidad 551 de exp-G descodifica los códigos de Golomb exponenciales con signo y sin signo (en adelante también denominada como descodificación de Golomb exponencial) para restaurar los datos de DPCM. La unidad 551 de exp-G suministra los datos de DPCM restaurados junto con residual_symmetry_flag a la unidad 552 de DPCM inversa.
La unidad 552 de DPCM inversa realiza descodificación de DPCM de los datos a partir de los cuales se ha eliminado la porción de solapamiento para generar datos residuales a partir los datos de DPCM. La unidad 552 de DPCM inversa suministra los datos residuales generados junto con residual_symmetry_flag a la unidad 553 de determinación de solapamiento inversa.
Si residual_symmetry_flag es verdadero, es decir, si los datos residuales son una porción restante de una matriz simétrica de 135 grados de la cual los datos (elementos de matriz) de la parte simétrica de solapamiento se han eliminado, la unidad 553 de determinación de solapamiento inversa restaura los datos de la parte simétrica. En otras palabras, una matriz de diferencia de una matriz simétrica de 135 grados se restaura. Observe que si residual_symmetry_flag no es verdadero, es decir, si los datos residuales representan una matriz que no es una matriz simétrica de 135 grados, la unidad 553 de determinación de solapamiento inversa utiliza los datos residuales como una matriz de diferencia sin restaurar los datos de una parte simétrica. La unidad 553 de determinación de solapamiento inversa suministra la matriz de diferencia restaurada en la forma descrita en lo anterior en la unidad 534 de restauración de lista de escalado (la unidad 562 de transformación de tamaño de matriz de diferencia) . (4) Unidad de restauración de lista de escalado La unidad 534 de restauración de lista de escalado restaura una lista de escalado. Como se ilustra en la Figura 24, la unidad 534 de restauración de lista de escalado incluye la unidad 561 de transformación de tamaño de matriz de predicción, la unidad 562 de transformación de tamaño de matriz de diferencia, una unidad 563 de descuantificación, y una unidad 564 de cálculo.
Si el tamaño de la matriz de predicción suministrada desde la unidad 532 de predicción (la unidad 542 de generación de matrices de predicción) es diferente del tamaño de la lista de escalado para la región actual que se restaurará, la unidad 561 de transformación de tamaño de matriz de predicción convierte el tamaño de la matriz de predicción .
Por ejemplo, si el tamaño de la matriz de predicción es mayor que el tamaño de la lista de escalado, la unidad 561 de transformación de tamaño de matriz de predicción convierte descendentemente la matriz de predicción. Además, por ejemplo, si el tamaño de la matriz de predicción es menor que el tamaño de la lista de escalado, la unidad 561 de transformación de tamaño de matriz de predicción convierte ascendentemente la matriz de predicción. El mismo método que aquel para la unidad 181 de transformación de tamaño de matriz de predicción (Figura 16) del dispositivo 10 de codificación de imágenes se selecciona como método de conversión.
La unidad 561 de transformación de tamaño de matriz de predicción suministra la matriz de predicción cuyo tamaño se ha hecho coincidir con el de la lista de escalado en la unidad 564 de cálculo.
Si residual_down_sampling_flag es verdadero, es decir, si el tamaño de la matriz de diferencia transmitida es menor que el tamaño de la región actual que va a cuantificarse, la unidad 562 de transformación de tamaño de matriz de diferencia convierte ascendentemente la matriz de diferencia para incrementar el tamaño de la matriz de diferencia en un tamaño que corresponde a la región actual que va a descuantificarse . Cualquier método para conversión ascendente puede utilizarse. Por ejemplo, un método que corresponde con el método de conversión descendente realizado por la unidad 163 de transformación de tamaño de matriz de diferencia (Figura 16) del dispositivo 10 de codificación de imágenes puede utilizarse.
Por ejemplo, si la unidad 163 de transformación de tamaño de matriz de diferencia ha muestreado descendentemente la matriz de diferencia, la unidad 562 de transformación de tamaño de matriz de diferencia puede muestrear ascendentemente la matriz de diferencia. Alternativamente, si la unidad 163 de transformación de tamaño de matriz de diferencia ha submuestreado la matriz de diferencia, la unidad 562 de transformación de tamaño de matriz de diferencia puede realizar el submuestreo inverso de la matriz de diferencia.
Por ejemplo, la unidad 562 de transformación de tamaño de matriz de diferencia puede realizar un proceso de interpolación del vecino más cercano (vecino más cercano) como se ilustra en la Figura 25 en lugar de interpolación lineal general. El proceso de interpolación del vecino más cercano puede reducir la capacidad de memoria.
Por consiguiente, incluso si una lista de escalado que tiene un tamaño grande no se transmite, los datos obtenidos después del muestreo ascendente no necesitan almacenarse para muestreo ascendente de una lista de escalado que tiene un tamaño pequeño. Además, una memoria intermedia o similar no es necesaria cuando los datos implicados en cálculo durante el muestreo ascendente se almacenan.
Observe que si residual_down_sampling_flag no es verdadero, es decir, si la matriz de diferencia se transmite con el mismo tamaño que aquel cuando se utilizó para el proceso de cuantificación, la unidad 562 de transformación de tamaño de matriz de diferencia omite la conversión ascendente de la matriz de diferencia (o puede convertir ascendentemente la matriz de diferencia por un factor de 1) .
La unidad 562 de transformación de tamaño de matriz de diferencia suministra la matriz de diferencia convertida ascendentemente en la forma descrita en lo anterior, según sea necesario, en la unidad 563 de descuantificacion .
La unidad 563 de descuantificación descuantifica la matriz de diferencia suministrada (datos cuantificados ) utilizando un método que corresponde a aquel para la cuantificación realizada por la unidad 183 de cuantificación (Figura 16) del dispositivo 10 de codificación de imágenes, y suministra la matriz de diferencia descuantificada a la unidad 564 de cálculo. Observe que si la unidad 183 de cuantificación se omite, es decir, si la matriz de diferencia suministrada de la unidad 562 de transformación de tamaño de matriz de diferencia no son datos cuantificados, la unidad 563 de descuantificación puede omitirse.
La unidad 564 de cálculo agrega en conjunto la matriz de predicción suministrada desde la unidad 561 de transformación de tamaño de matriz de predicción y la matriz de diferencia suministrada desde la unidad 563 de descuantificación, y restaura una lista de escalado para la región actual. La unidad 564 de cálculo suministra la lista de escalado restaurada a la unidad 535 de salida y la unidad 536 de almacenamiento. (5) Unidad de salida La unidad 535 de salida produce la información suministrada en un dispositivo fuera de la unidad 410 de generación de matrices. Por ejemplo, en el modo de copiado, la unidad 535 de salida suministra la matriz de predicción suministrada desde la unidad 541 de copiado a la unidad 440 de descuantificación como una lista de escalado para la región actual. Además, por ejemplo, en el modo normal, la unidad 535 de salida suministra la lista de escalado para la región actual suministrada desde la unidad 534 de restauración de lista de escalado (la unidad 564 de cálculo) a la unidad 440 de descuantificación . (6) Unidad de almacenamiento La unidad 536 de almacenamiento almacena la lista de escalado suministrada desde la unidad 534 de restauración de lista de escalado (la unidad 564 de cálculo) junto con el tamaño y el ID de lista de la lista de escalado. La información con respecto a la lista de escalado almacenada en la unidad 536 de almacenamiento se utiliza para generar matrices de predicción de otras unidades de transformada ortogonal que se procesan posteriormente. En otras palabras, la unidad 536 de almacenamiento suministra la información almacenada con respecto a la lista de escalado a la unidad 532 de predicción como información con respecto a una lista de escalado previamente transmitida. <2-ll. Configuración ejemplar detallada de la unidad de DPC inversa> La Figura 26 es un diagrama de bloque que ilustra un ejemplo de una configuración detallada de la unidad 552 de DPCM inversa ilustrada en la Figura 24. Con referencia a la Figura 26, la unidad 552 de DPCM inversa incluye una unidad 571 de establecimiento inicial, una unidad 572 de descodificación de DPCM, y una unidad 573 de extracción de coeficiente de CD.
La unidad 571 de establecimiento inicial adquiere sizeID y MatrixID, y establece diversas variables en valores iniciales. La unidad 571 de establecimiento inicial suministra la información adquirida y establecida a la unidad 572 de descodificación de DPCM.
La unidad 572 de descodificación de DPCM determina coeficientes individuales (el coeficiente de CD y los coeficientes de CA) para los valores de diferencia ( scaling_list_delta_coef) del coeficiente de CD y los coeficientes de CA utilizando los ajustes iniciales y similares suministrados desde la unidad 571 de establecimiento inicial. La unidad 572 de descodificación de DPCM suministra los coeficientes determinados a la unidad 573 de extracción de coeficiente de CD (ScalingList [i] ) .
La unidad 573 de extracción de coeficiente de CD extrae el coeficiente de CD de entre los coeficientes (ScalingList [i] ) suministrados desde la unidad 572 de descodificación de DPCM. El coeficiente de CD se ubica al comienzo de los coeficientes de CA. Es decir, el coeficiente inicial (ScalingList [0] ) entre los coeficientes suministrados desde la unidad 572 de descodificación de DPCM es el coeficiente de CD. La unidad 573 de extracción de coeficiente de CD extrae el coeficiente ubicado al comienzo como el coeficiente de CD, y produce el coeficiente extraído en la unidad 553 de determinación de solapamiento inversa (DC_coef ) . La unidad 573 de extracción de coeficiente de CD produce los otros coeficientes ( ScalingList [ i ] (i> 0)) en la unidad 553 de determinación de solapamiento inversa como los coeficientes de CA.
Por consiguiente, la unidad 552 de DPCM inversa puede realizar descodificación de DPCM correcta, y puede obtener el coeficiente de CD y los coeficientes de CA. Es decir, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <2-12. Flujo de proceso de descodificación de matrices de cuantificación> Un ejemplo del flujo de un proceso de descodificación de matrices de cuantificación ejecutado por la unidad 410 de generación de matrices que tiene la configuración descrita en lo anterior se describirá con referencia a un diagrama de flujo ilustrado en la Figura 27.
Cuando el proceso de descodificación de matrices de cuantificación se inicia, en la etapa S301, la unidad 531 de análisis de parámetros lee los valores cuantificados (QscaleO a Qscale3) de las regiones 0 a 3.
En la etapa S302, la unidad 531 de análisis de parámetros lee pred_mode . En la etapa S303, la unidad 531 de análisis de parámetros determina si pred_mode es igual a 0 o no. Si se determina que pred_mode es igual a 0, la unidad 531 de análisis de parámetros determina que el modo actual es el modo de copiado, y hace avanzar el proceso a la etapa S304.
En la etapa S304, la unidad 531 de análisis de parámetros lee pred_matrix_id_delta . En la etapa S305, la unidad 541 de copiado copia una lista de escalado que se ha transmitido, y utiliza la lista de escalado copiada como una matriz de predicción. En el modo de copiado, la matriz de predicción se produce como la lista de escalado para la región actual. Cuando el procesamiento de la etapa S305 se completa, la unidad 541 de copiado termina el proceso de descodificación de matrices de cuantificación .
Además, si se determina en la etapa S303 que pred_mode no es igual a 0, la unidad 531 de análisis de parámetros determina que el modo actual es el modo de exploración completa (modo normal) , y hace avanzar el proceso a la etapa S306.
En la etapa S306, la unidad 531 de análisis de parámetros lee pred_matrix_id_delta, pred_size_id_delta, y residual_flag . En la etapa S307, la unidad 542 de generación de matrices de predicción genera una matriz de predicción a partir de una lista de escalado que se ha transmitido.
En la etapa S308, la unidad 531 de análisis de parámetros determina si residual_flag es verdadero o no. Si se determina que residual_flag no es verdadero, ninguna matriz residual existe, y la matriz de predicción generada en la etapa S307 se produce como la lista de escalado para la región actual. En este caso, por lo tanto, la unidad 531 de análisis de parámetros termina el proceso de descodificación de matrices de cuantificación .
Además, si se determina en la etapa S308 que residual_flag es verdadero, la unidad 531 de análisis de parámetros hace avanzar el proceso a la etapa S309.
En la etapa S309, la unidad 531 de análisis de parámetros lee residual_down_sampling_flag y residual_symmetry_flag .
En la etapa S310, la unidad 551 de exp-G y la unidad 552 de DPCM inversa descodifica los códigos de Golomb exponenciales de la matriz residual, y genera datos residuales .
En la etapa S311, la unidad 553 de determinación de solapamiento inversa determina si residual_symmetry_flag es verdadero o no. Si se determina que residual_symmetry_flag es verdadero, la unidad 553 de determinación de solapamiento inversa hace avanzar el proceso a la etapa S312, y restaura la porción de solapamiento removida de los datos residuales (o realiza un proceso de simetría inversa) . Cuando una matriz de diferencia que es una matriz simétrica de 135 grados se genera en la forma descrita en lo anterior, la unidad 553 de determinación de solapamiento inversa hace avanzar el proceso a la etapa S313.
Además, si se determina en la etapa S311 que residual_symmetry_flag no es verdadero (o si los datos residuales son una matriz de diferencia que no son una matriz simétrica de 135 grados) , la unidad 553 de determinación de solapamiento inversa hace avanzar el proceso a la etapa S313 mientras salta el procesamiento de la etapa S312 (o sin realizar un proceso de simetría inversa) .
En la etapa S313, la unidad 562 de transformación de tamaño de matriz de diferencia determina si residual_down_sampling_flag es verdadero o no. Si se determina que residual_down_sampling_flag es verdadero, la unidad 562 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S314, y convierte ascendentemente la matriz de diferencia en un tamaño que corresponde a la región actual que va a cuantificarse . Después de que se convierte ascendentemente la matriz de diferencia, la unidad 562 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S315.
Además, si se determina en la etapa S313 que residual_down_sampling_flag no es verdadero, la unidad 562 de transformación de tamaño de matriz de diferencia hace avanzar el proceso a la etapa S315 mientras salta el procesamiento de la etapa S314 (o sin convertir ascendentemente la matriz de diferencia) .
En la etapa S315, la unidad 564 de cálculo agrega la matriz de diferencia a la matriz de predicción para generar una lista de escalado para la región actual. Cuando el procesamiento de la etapa S315 se completa, el proceso de descodificación de matrices de cuantificación termina. <2-13. Flujo de proceso de descodificación de señales residuales> A continuación, un ejemplo del flujo del proceso de descodificación de señales residuales ejecutado en la etapa S310 en la Figura 27 se describirá con referencia a un diagrama de flujo ilustrado en la Figura 28.
Cuando se inicia el proceso de descodificación de señales residuales, en la etapa S331, la unidad 551 de exp-G descodifica los códigos de Golomb exponenciales suministrados .
En la etapa S332, la unidad 552 de DPCM inversa realiza un proceso de DPCM inverso en los datos de DPCM obtenidos por la unidad 551 de exp-G a través de descodificación .
Cuando el proceso de DPCM inverso se completa, la unidad 552 de DPCM inversa termina el proceso de descodificación de señales residuales, y regresa el proceso a la Figura 27. <2-14. Flujo de proceso de DPCM inverso A continuación, un ejemplo del flujo del proceso de DPCM inverso ejecutado en la etapa S332 en la Figura 28 se describirá con referencia a un diagrama de flujo ilustrado en la Figura 29.
Cuando el proceso de DPCM inverso se inicia, en la etapa S351, la unidad 571 de establecimiento inicial adquiere sizeID y MatrixID.
En la etapa S352, la unidad 571 de establecimiento inicial establece coefNum como sigue. coefNum = min ( (1« ( + (sizeID«l) ) ) , 65) En la etapa S353, la unidad 571 de establecimiento inicial establece una variable i y una variable nextcoef como sigue . i = 0 nextcoef = 8 En la etapa S354, la unidad 572 de descodificación de DPCM determina si es o no una variable i < coefNum. Si la variable i es menor que coefNum, la unidad 571 de establecimiento inicial hace avanzar el proceso a la etapa S355.
En la etapa S355, la unidad 572 de descodificación de DPCM lee los datos de DPCM del coeficiente ( scaling_list_delta_coef) .
En la etapa S356, la unidad 572 de descodificación de DPCM determina nextcoef como sigue utilizando los datos de DPCM leídos, y además determina scalingList [i] . nextcoef = (nextcoef + scaling_list_delta_coef + 256) % 256 scalingList [ i ] = nextcoef En la etapa S357, la unidad 573 de extracción de coeficiente de CD determina si sizeID es mayor o no a 1 y si la variable i es o no igual a 0 (es decir, el coeficiente ubicado al comienzo) . Si se determina que sizeID es mayor que 1 y la variable i representa el coeficiente ubicado al comienzo, la unidad 573 de extracción de coeficiente de CD hace avanzar el proceso a la etapa S358, y utiliza el coeficiente como el coeficiente de CD (DC_coef = nextcoef) . Cuando el procesamiento de la etapa S358 se completa, la unidad 573 de extracción de coeficiente de CD hace avanzar el proceso a la etapa S360.
Además, si se determina en la etapa S357 que sizeID es menor que o igual a l o que la variable i no representa el coeficiente ubicado al comienzo, la unidad 573 de extracción de coeficiente de CD hace avanzar el proceso a la etapa S359, y cambia la variable i para cada coeficiente por uno debido a que el coeficiente de CD se ha extraído. (ScalingList [ (i-(sizelD) >1) ?1; 0] = nextcoef) Si el procesamiento de la etapa S359 se completa, la unidad 573 de extracción de coeficiente de CD hace avanzar el proceso a la etapa S360.
En la etapa S360, la unidad 572 de descodificación de DPCM incrementa la variable i para cambiar el objetivo de procesamiento al coeficiente subsiguiente, y después regresa el proceso a la etapa S35 .
En la etapa S354, el procesamiento de las etapas S354 a S360 se realiza repetidamente hasta que se determina que la variable i es mayor que o igual a coefNum. Si se determina en la etapa S354 que la variable i es mayor que o igual a coefNum, la unidad 572 de descodificación de DPCM termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Por consiguiente, la diferencia entre el coeficiente de CD y el coeficiente de CA ubicados al comienzo de la matriz de CA pueden ubicarse descodificados correctamente. Por lo tanto, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <3. Tercera modalidad> <3-l. Sintaxis: Segundo método> Otro método para transmitir una diferencia entre el coeficiente de CD y otro coeficiente, en lugar del coeficiente de CD, por ejemplo, puede ser transmitir una diferencia entre el coeficiente de CD y el componente de (0, 0) de una matriz de 8x8 como datos de DPCM diferentes de los datos de DPCM de la matriz de 8x8 (segundo método) . Por ejemplo, después de la transmisión de DPCM de una matriz de 8x8, la diferencia entre el coeficiente de CD y el componente (0, 0) de la matriz de 8x8 puede transmitirse.
Por consiguiente, de manera similar al primer método, la relación de compresión puede mejorarse más cuando el valor del coeficiente (0, 0) (coeficiente de CA) de una matriz de 8x8 y el valor del coeficiente de CD se acercan entre si.
La Figura 30 ilustra la sintaxis de una lista de escalado en el segundo método. En el ejemplo ilustrado en la Figura 30, 64 valores de diferencia ( scaling_list_delta_coef) entre los coeficientes se leen. Finalmente, la diferencia ( scaling_list_dc_coef_delta) entre el coeficiente de CD y el coeficiente (0, 0) (coeficiente de CA) se lee, y el coeficiente de CD se determina a partir de la diferencia.
En el segundo método, por consiguiente, la sintaxis para descodificar los coeficientes de CA puede ser similar a aquellas de la técnica relacionada ilustrada en la Figura 12. Es decir, la sintaxis para el segundo método puede obtenerse para modificar el ejemplo de la técnica relacionada por una pequeña cantidad, y puede ser más viable que aquella para el primer método.
Sin embargo, mientras el segundo método no permite que un dispositivo de descodificación de imágenes obtenga el coeficiente de CD hasta que el dispositivo de descodificación de imágenes ha recibido todos los coeficientes y ha descomprimido todos los datos de DPC , el primer método permite que un dispositivo de descodificación de imágenes restaure el coeficiente de CD al momento cuando el dispositivo de descodificación de imágenes recibe el coeficiente inicial.
Un dispositivo de codificación de imágenes que implementa la sintaxis para el segundo método descrito en lo anterior se describirá en adelante. <3-2. Configuración ejemplar detallada de la unidad de DPCM> En el segundo método, el dispositivo 10 de codificación de imágenes tiene una configuración básicamente similar para aquel en el primer método descrito en lo anterior. Específicamente, el dispositivo 10 de codificación de imágenes tiene una configuración como en el ejemplo ilustrado en la Figura 14. Además, la unidad 14 de transformada ortogonal/cuantificación tiene una configuración como en el ejemplo ilustrado en la Figura 15. Además, la unidad 150 de procesamiento de matrices tiene una configuración como en el ejemplo ilustrado en la Figura 16.
Una configuración ejemplar de la unidad 192 de DPCM en el segundo ejemplo se ilustra en la Figura 31. Como se ilustra en la Figura 31, en el segundo ejemplo, la unidad 192 de DPCM incluye una memoria intermedia 611 de coeficiente de CA, una unidad 612 de codificación de coeficiente de CA, una unidad 613 de DPCM de coeficiente de CA, y una unidad 614 de DPCM de coeficiente de CD.
La memoria intermedia 611 de coeficiente de CA almacena el coeficiente de CA inicial (es decir, el coeficiente (0, 0)) suministrado desde la unidad 191 de determinación de solapamiento . La memoria intermedia 611 de coeficiente de CA suministra el coeficiente de CA inicial almacenado (coeficiente de CA (0, 0) ) en la unidad 614 de DPCM de coeficiente de CD en un tiempo predeterminado después de que todos los coeficientes de CA se han sometido a un proceso de DPCM, o en respuesta a una solicitud.
La unidad 612 de codificación de coeficiente de CA adquiere el coeficiente de CA inicial (coeficiente de CA (0, 0)) suministrado desde la unidad 191 de determinación de solapamiento, y resta el valor del coeficiente de CA inicial de una constante (por ejemplo, 8). La unidad 612 de codificación de coeficiente de CA suministra un resultado de sustracción (diferencia) a la unidad 193 de exp-G como el coeficiente inicial ( scaling_list_delta_coef (i = 0) ) de los datos de DPCM de los coeficientes de CA.
La unidad 613 de DPCM de coeficiente de CA adquiere los coeficientes de CA suministrados desde la unidad 191 de determinación de solapamiento, determina, para cada uno del segundo y subsiguiente coeficientes de CA, la diferencia (DPCM) a partir del coeficiente de CA inmediatamente precedente, y suministra las diferencias determinadas a la unidad 193 de exp-G como datos de DPCM ( scaling_list_delta_coef (i = 1 a 63)).
La unidad 614 de DPCM de coeficiente de CD adquiere el coeficiente de CD suministrado desde la unidad 191 de determinación de solapamiento. La unidad 614 de DPCM de coeficiente de CD además adquiere el coeficiente de CA inicial (coeficiente de CA (0, 0) ) mantenido en la memoria intermedia 611 de coeficiente de CA. La unidad 614 de DPCM de coeficiente de CD resta el coeficiente de CA inicial (coeficiente de CA (0, 0)) del coeficiente de CD para determinar la diferencia entre los mismos, y suministra la diferencia determinada a la unidad 193 de exp-G como datos de DPCM del coeficiente de CD ( scaling_list_dc_coef_delta) .
Como se describe en lo anterior, en el segundo método, una diferencia entre el coeficiente de CD y otro coeficiente (el coeficiente de CA inicial) se determina. Después la diferencia se transmite, como datos de DPCM del coeficiente de CD (scaling_list_dc_coef_delta) diferente de los datos de DPCM de los coeficientes de CA, después de la transmisión de los datos de DPCM de los coeficientes de CA ( scaling_list_delta_coef) que es una diferencia entre los coeficientes de CA. Por consiguiente, de manera similar al primer método, el dispositivo 10 de codificación de imágenes puede mejorar la eficiencia de codificación de una lista de escalado . <3-3. Flujo de proceso de DPCM> También en el segundo método, el dispositivo 10 de codificación de imágenes ejecuta un proceso de codificación de una matriz de cuantificación en una forma similar a aquella del primer método descrito con referencia al diagrama de flujo ilustrado en la Figura 20.
Un ejemplo del flujo de un proceso de DPCM en el segundo método, el cual se ejecuta en la etapa S112 en la Figura 20, se describirá con referencia a un diagrama de flujo ilustrado en la Figura 32.
Cuando el proceso de DPCM se inicia, en la etapa S401, la memoria intermedia 611 de coeficiente de CA mantiene el coeficiente de CA inicial.
En la etapa S402, la unidad 612 de codificación de coeficiente de CA resta el coeficiente de CA inicial de una constante predeterminada (por ejemplo, 8) para determinar la diferencia entre los mismos (datos de DPCM iniciales) .
El procesamiento de las etapas S403 a S405 se ejecuta por la unidad 613 de DPCM de coeficiente de CA en una forma similar al procesamiento de las etapas S133 a S135 en la Figura 21. Es decir, el procesamiento de las etapas S403 a S405 se ejecuta repetidamente para generar datos de DPCM de todos los coeficientes de CA (las diferencias de los coeficientes de CA inmediatamente precedentes) .
Si se determina en la etapa S403 que todos los coeficientes de CA se han procesado (es decir, si no existe ningún coeficiente de CA no procesado) , la unidad 613 de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S406.
En la etapa S406, la unidad 614 de DPCM de coeficiente de CD resta el coeficiente de CA inicial mantenido en la etapa S401 a partir el coeficiente de CD para determinar una diferencia entre los mismos (datos de DPCM para el coeficiente de CD) .
Cuando el procesamiento de la etapa S406 se completa, la unidad 614 de DPCM de coeficiente de CD termina el proceso de DPCM, y regresa el proceso a la Figura 20.
Por consiguiente, una diferencia entre el coeficiente de CD y otro coeficiente también se determina y se transmite a un dispositivo de descodificación de imágenes como datos de DPCM. De esta manera, el dispositivo 10 de codificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <3-4. Configuración ejemplar detallada de la unidad de DPCM inversa> En el segundo método, el dispositivo 300 de descodificación de imágenes tiene una configuración básicamente similar a la del primer método. Específicamente, también en el segundo método, el dispositivo 300 de descodificación de imágenes tiene una configuración como en el ejemplo ilustrado en la Figura 22. Además, la unidad 313 de transformada ortogonal inversa/descuantificación tiene una configuración como en el ejemplo ilustrado en la Figura 23. Sin embargo, la unidad 410 de generación de matrices tiene una configuración como en el ejemplo ilustrado en la Figura 24.
La Figura 33 es un diagrama de bloque que ilustra un ejemplo de una configuración detallada de la unidad 552 de DPCM inversa ilustrada en la Figura 24 en el segundo método. Con referencia a la Figura 33, la unidad 552 de DPCM inversa incluye una unidad 621 de establecimiento inicial, una unidad 622 de descodificación de DPCM de coeficiente de CA, una memoria intermedia 623 de coeficientes de CA, y una unidad 624 de descodificación de DPCM de coeficiente de CD.
La unidad 621 de establecimiento inicial adquiere sizeID y MatrixID, y establece diversas variables en valores iniciales. La unidad 621 de establecimiento inicial suministra la información adquirida y establecida a la unidad 622 de descodificación de DPCM de coeficiente de CA.
La unidad 622 de descodificación de DPCM de coeficiente de CA adquiere los datos de DPCM de los coeficientes de CA (scaling_list_delta_coef ) suministrados desde la unidad 551 de exp-G. La unidad 622 de descodificación de DPCM de coeficiente de CA descodifica los datos de DPCM adquiridos de los coeficientes de CA utilizando los ajustes iniciales y similares suministrados desde la unidad 621 de establecimiento inicial para determinar los coeficientes de CA. La unidad 622 de descodificación de DPCM de coeficiente de CA suministra los coeficientes de CA determinados (ScalingList [i] ) a la unidad 553 de determinación de solapamiento inversa. La unidad 622 de descodificación de DPCM de coeficiente de CA además suministra el coeficiente de CA inicial ( ScalingList [ 0 ] , es decir, el coeficiente de CA (0, 0) ) entre los coeficientes de CA determinados a la memoria intermedia 623 de coeficientes de CA para retención.
La memoria intermedia 623 de coeficientes de CA almacena el coeficiente de CA inicial (ScalingList [0] , es decir, el coeficiente de CA (0, 0) ) suministrado desde la unidad 622 de descodificación de DPCM de coeficiente de CA.
La memoria intermedia 623 de coeficientes de CA suministra el coeficiente de CA inicial (ScalingList [0] , es decir, el coeficiente de CA (0, 0) ) a la unidad 624 de descodificación de DPCM de coeficiente de CD en un tiempo predeterminado o en respuesta a una solicitud.
La unidad 624 de descodificación de DPCM de coeficiente de CD adquiere los datos de DPCM del coeficiente de CD ( scaling_list_dc_coef_delta) suministrado desde la unidad 551 de exp-G. La unidad 624 de descodificación de DPCM de coeficiente de CD además adquiere el coeficiente de CA inicial (ScalingList [0] , es decir, el coeficiente de CA (0, 0)) almacenado en el memoria intermedia 623 de coeficientes de CA. La unidad 624 de descodificación de DPCM de coeficiente de CD descodifica los datos de DPCM del coeficiente de CD utilizando el coeficiente de CA inicial para determinar el coeficiente de CD. La unidad 624 de descodificación de DPCM de coeficiente de CD suministra el coeficiente de CD determinado (DC_coef) a la unidad 553 de determinación de solapamiento inversa.
Por consiguiente, la unidad 552 de DPCM inversa puede realizar descodificación de DPCM correcta, y puede obtener el coeficiente de CD y los coeficientes de CA. Es decir, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <3-5. Flujo de proceso de DPCM inverso> También en el segundo método, el dispositivo 300 de descodificación de imágenes ejecuta un proceso de descodificación de matrices de cuantificación en una forma similar a aquella en el primer método descrito en lo anterior con referencia al diagrama de flujo ilustrado en la Figura 27. De manera similar, el dispositivo 300 de descodificación de imágenes ejecuta un proceso de descodificación de señales residuales en una forma similar a aquella en el primer método descrito en lo anterior con referencia al diagrama de flujo ilustrado en la Figura 28.
Un ejemplo del flujo del proceso de DPCM inverso ejecutado por la unidad 552 de DPCM inversa se describirá con referencia a un diagrama de flujo ilustrado en la Figura 34.
Cuando el proceso de DPCM inverso se inicia, en la etapa S421, la unidad 621 de establecimiento inicial adquiere sizeID y MatrixID.
En la etapa S422, la unidad 621 de establecimiento inicial establece coefNum como sigue. coefNum = min ( ( 1« ( 4+ ( sizeID«l ) ) ) , 64) En la etapa S423, la unidad 621 de establecimiento inicial establece una variable i y una variable nextcoef como sigue, i = 0 nextcoef = 8 En la etapa S424, la unidad 572 de descodificación de DPCM determina si es o no la variable i < coefNum. Si la variable i es menor que coefNum, la unidad 621 de establecimiento inicial hace avanzar el proceso a la etapa S425.
En la etapa S425, la unidad 622 de descodificación de DPCM de coeficiente de CA lee los datos de DPCM de los coeficientes de CA ( scaling_list_delta_coef ) .
En la etapa S426, la unidad 622 de descodificación de DPCM de coeficiente de CA determina nextcoef como sigue utilizando los datos de DPCM leídos, y además determina scalingList [ i ] . nextcoef = (nextcoef + scaling_list_delta_coef + 256) % 256 scalingList [ i] = nextcoef Observe que el coeficiente de CA inicial calculado (ScalingList [0] , es decir, el coeficiente de CA (0, 0)) se mantiene en el memoria intermedia 623 de coeficientes de CA.
En la etapa S427, la unidad 622 de descodificación de DPCM de coeficiente de CA incrementa la variable i para cambiar el objetivo para procesarse en el coeficiente subsiguiente, y después regresa el proceso a la etapa S424.
En la etapa S424, el procesamiento de las etapas S424 a S427 se realiza repetidamente hasta que se determina que la variable i es mayor que o igual a coefNum. Si se determina en la etapa S424 que la variable i es mayor que o igual a coefNum, la unidad 622 de descodificación de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S428.
En la etapa S428, la unidad 624 de descodificación de DPCM de coeficiente de CD determina si sizeID es mayor o no a 1. Si se determina que sizeID es mayor que 1, la unidad 624 de descodificación de DPCM de coeficiente de CD hace avanzar el proceso a la etapa S429, y lee los datos de DPCM del coeficiente de CD ( scaling_list_dc_coef_delta ) .
En la etapa S430, la unidad 624 de descodificación de DPCM de coeficiente de CD adquiere el coeficiente de CA inicial ( ScalingList [ 0 ] , es decir, el coeficiente de CA (0, 0) ) mantenido en la memoria intermedia 623 de coeficientes de CA, y descodifica los datos de DPCM del coeficiente de CD (DC_coef) utilizando el coeficiente de CA inicial como sigue.
DC_coef = scaling_list_dc_coef_delta + ScalingList [0] Cuando el coeficiente de CD (DC_coef) se obtiene, la unidad 624 de descodificación de DPCM de coeficiente de CD termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Además, si se determina en la etapa S428 que sizeID es menor que o igual a 1, la unidad 624 de descodificación de DPCM de coeficiente de CD termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Por consiguiente, la diferencia entre el coeficiente de CD y el coeficiente de CA ubicados al comienzo of los coeficientes de CA puede descodificarse correctamente. Por lo tanto, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <4. Cuarta modalidad> <4-l. Sintaxis: Tercer método> En el segundo método descrito en lo anterior, el coeficiente de CD también puede limitarse a un valor menor que el coeficiente de CA inicial (coeficiente de CA (0, 0) ) (tercer método) .
Esto asegura que los datos de DPCM del coeficiente de CD, es decir, un valor de diferencia obtenido al restar el coeficiente de CA inicial del coeficiente de CD, puede ser un valor positivo. Estos datos de DPCM de esta manera pueden codificarse utilizando códigos de Golomb exponenciales sin signo. Por lo tanto, el tercer método puede evitar que el coeficiente de CD sea más grande que el coeficiente de CA inicial, pero puede reducir la cantidad de codificación en comparación con el primer método y el segundo método.
La Figura 35 ilustra la sintaxis de una lista de escalado en el tercer método. Como se ilustra en la Figura 35, en este caso, los datos de DPCM del coeficiente de CD ( scaling_list_dc_coef_delta) se limitan a un valor positivo.
La sintaxis para el tercer método descrito en lo anterior puede implementarse por un dispositivo 10 de codificación de imágenes similar al que se encuentra en el segundo método. En el tercer método, sin embargo, la unidad 193 de exp-G puede codificar los datos de DPCM del coeficiente de CD utilizando códigos de Golomb exponenciales sin signo. Observe que el dispositivo 10 de codificación de imágenes puede ejecutar procesos tales como un proceso de codificación de matriz de cuantificación y un proceso de DPCM en una forma similar a aquella del segundo método.
Por lo tanto, la sintaxis para el tercer método puede implementarse por el dispositivo 300 de descodificación de imágenes en una forma similar a aquella en el segundo método. Sin embargo, el dispositivo 300 de descodificación de imágenes puede ejecutar un proceso de descodificación de matrices de cuantificación en una forma similar a aquella del segundo método. <4-2. Flujo de proceso de DPCM inverso> Un ejemplo del flujo de un proceso de DPCM inverso ejecutado por la unidad 552 de DPCM inversa se describirá con referencia a un diagrama de flujo ilustrado en la Figura 36.
El procesamiento de las etapas S451 a S459 se realiza en una forma similar al procesamiento de las etapas S421 a S429 en la Figura 34.
En la etapa S460, la unidad 624 de descodificación de DPCM de coeficiente de CD adquiere el coeficiente de CA inicial ( ScalingList [ 0 ] , es decir, el coeficiente de CA (0, 0) ) mantenido en el memoria intermedia 623 de coeficientes de CA, y descodifica los datos de DPCM del coeficiente de CD (DC_coef) como sigue utilizando el coeficiente de CA inicial.
DC_coef = ScalingList [0] scaling_list_dc_coef_delta Cuando el coeficiente de CD (DC_coef) se obtiene, la unidad 624 de descodificación de DPCM de coeficiente de CD termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Además, si se determina en la etapa S458 que sizeID es menor que o igual a 1, la unidad 624 de descodificación de DPCM de coeficiente de CD termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Por consiguiente, la diferencia entre el coeficiente de CD y el coeficiente de CA ubicados al comienzo de los coeficientes de CA pueden descodificarse correctamente. Por lo tanto, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <5. Quinta modalidad> <5-l. Sintaxis: Cuarto método> Otro método para transmitir una diferencia entre el coeficiente de CD y otro coeficiente, en lugar del coeficiente de CD, puede ser, por ejemplo, recolectar solamente los coeficientes de CD de una pluralidad de lista de escalados y realizar DPCM al tomar diferencias entre los coeficientes de CD por separado de los coeficientes de CA de las listas de escalado individuales (cuarto método) . En este caso, los datos de DPCM de los coeficientes de CD es una colección de piezas de datos para la pluralidad de listas de escalado, y se transmite como datos diferentes de los datos de DPCM de los coeficientes de CA de las listas de escalado individuales .
Por consiguiente, la relación de compresión puede mejorarse más cuando por ejemplo, existen correlaciones entre los coeficientes de CD de las listas de escalado (MatrixID) .
La Figura 37 ilustra la sintaxis para el coeficiente de CD de una lista de escalado en el cuarto método. En éste caso, puesto que los coeficientes de CD se procesan en ciclos diferentes de aquellos para los coeficientes de CA de las listas de escalado individuales, como se ilustra en el ejemplo ilustrado en la Figura 37, procesos para los coeficientes de CA y los procesos para los coeficientes de CD necesitan ser independientes entre si.
Esto asegura que más métodos diversos para procesos de codificación y descodificación de listas de escalado puedan lograrse aunque la complejidad del proceso de DPCM y el proceso de DPCM inverso puedan incrementarse. Por ejemplo, un proceso para copiar solamente los coeficientes de CA y hacer que los valores de los coeficientes de CD sean diferentes en el modo de copiado pueden implementare fácilmente .
El número de listas de escalado en las cuales los coeficientes de CD se procesan de manera colectiva es arbitrario . <5-2. Configuración ejemplar detallada de la unidad de DPCM> En el cuarto método, el dispositivo 10 de codificación de imágenes tiene una configuración básicamente similar a aquella en el primer método descrito en lo anterior. Específicamente, el dispositivo 10 de codificación de imágenes tiene una configuración como en el ejemplo ilustrado en la Figura 14. Además, la unidad 14 de transformada ortogonal/cuantificación tiene una configuración como en el ejemplo ilustrado en la Figura 15. Además, la unidad 150 de procesamiento de matrices tiene una configuración como en el ejemplo ilustrado en la Figura 16.
Una configuración ejemplar de la unidad 192 de DPCM en el cuarto método se ilustra en la Figura 38. Como se ilustra en la Figura 38, en este caso, la unidad 192 de DPCM incluye una unidad 631 de DPCM de coeficiente de CA, una memoria intermedia 632 de coeficiente de CD, y una unidad 633 de DPCM de coeficiente de CD.
La unidad 631 de DPCM de coeficiente de CA realiza un proceso de DPCM de los coeficientes de CA individuales de cada lista de escalado que se suministra desde la unidad 191 de determinación de solapamiento . Específicamente, la unidad 631 de DPCM de coeficiente de CA resta, para cada lista de escalado, el coeficiente de CA inicial de una constante predeterminada (por ejemplo, 8), y resta el coeficiente de CA que se procesa (coeficiente de CA actual) del coeficiente de CA inmediatamente precedente. La unidad 631 de DPCM de coeficiente de CA suministra los datos de DPCM ( scaling_list_delta_coef) generados a partir de cada lista de escalado en la unidad 193 de exp-G.
La memoria intermedia 632 de coeficiente de CD almacena los coeficientes de CD de las listas de escalado individuales suministradas desde la unidad 191 de determinación de solapamiento . El memoria intermedia 632 de coeficiente de CD suministra los coeficientes de CD almacenados en la unidad 633 de DPCM de coeficiente de CD en un tiempo predeterminado o en respuesta a una solicitud.
La unidad 633 de DPCM de coeficiente de CD adquiere los coeficientes de CD acumulados en el memoria intermedia 632 de coeficiente de CD. La unidad 633 de DPCM de coeficiente de CD determina los datos de DPCM de los coeficientes de CD adquiridos. Específicamente, la unidad 633 de DPCM de coeficiente de CD resta el coeficiente inicial de CD de una constante predeterminada (por ejemplo, 8) , y resta el coeficiente de CD que se procesa (coeficiente de CD actual) del coeficiente de CD inmediatamente precedente. La unidad 633 de DPCM de coeficiente de CD suministra los datos de DPCM generados (scaling_list_delta_coef ) a la unidad 193 de exp-G.
Por consiguiente, el dispositivo 10 de codificación de imágenes puede mejorar la eficiencia de codificación de una lista de escalado. <5-3. Flujo de proceso de DPCM> También en el cuarto método, el dispositivo 10 de codificación de imágenes ejecuta un proceso de codificación de una matriz de cuantificación en una forma similar a aquella en el primer método descrito en lo anterior con referencia al diagrama de flujo ilustrado en la Figura 20.
Un ejemplo del flujo de un proceso de DPCM en el cuarto método, el cual se ejecuta en la etapa S112 en la Figura 20, se describirá con referencia a un diagrama de flujo ilustrado en la Figura 39.
El procesamiento de las etapas S481 a S485 se ejecuta por la unidad 631 de DPCM de coeficiente de CA en una forma similar al procesamiento de las etapas S401 a S405 (el procesamiento en el segundo método) en la Figura 32.
Si se determina en la etapa S483 que todos los coeficientes de CA se han procesado, la unidad 631 de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S486.
En la etapa S486, la unidad 631 de DPCM de coeficiente de CA determina si se han procesado o no todas las listas de escalado (o matrices de diferencia) en las los coeficientes de CD se codifican colectivamente por DPCM. Si se determina que existe una lista de escalado no procesada (o matriz de diferencia) , la unidad 631 de DPCM de coeficiente de CA regresa el proceso a la etapa S481.
Si se determina en la etapa S486 que todas las listas de escalado (o matrices de diferencia) se han procesado, la unidad 631 de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S487.
La unidad 633 de DPCM de coeficiente de CD ejecuta el procesamiento de la etapas S487 a S491 en los coeficientes de CD almacenados en el memoria intermedia 632 de coeficientes de CD en una forma similar al procesamiento de las etapas S481 a S485.
Si se determina en la etapa S489 que todos los coeficientes de CD almacenados en el memoria intermedia 632 de coeficiente de CD se han procesado, la unidad 633 de DPCM de coeficiente de CD termina el proceso de DPCM, y regresa el proceso a la Figura 20.
Al ejecutar un proceso de DPCM en la forma descrita en lo anterior, el dispositivo 10 de codificación de imágenes puede mejorar la eficiencia de codificación de una lista de escalado . <5-4. Configuración ejemplar detallada de la unidad de DPCM inversa> El dispositivo 300 de descodificación de imágenes en el cuarto método tiene una configuración básicamente similar a aquella en el primer método. Específicamente, también en el cuarto método, el dispositivo 300 de descodificación de imágenes tiene una configuración como en el ejemplo ilustrado en la Figura 22. Además, la unidad 313 de transformada ortogonal inversa/descuantificación tiene una configuración como en el ejemplo ilustrado en la Figura 23. Sin embargo, la unidad 410 de generación de matrices tiene una configuración como en el ejemplo ilustrado en la Figura La Figura 40 es un diagrama de bloque que ilustra un ejemplo de una configuración detallada de la unidad 552 de DPC inversa ilustrada en la Figura 24 en el cuarto método. Con referencia a la Figura 40, la unidad 552 de DPCM inversa incluye una unidad 641 de establecimiento inicial, una unidad 642 de descodificación de DPCM de coeficiente de CA, y una unidad 643 de descodificación de DPCM de coeficiente de CD.
La unidad 641 de establecimiento inicial adquiere sizeID y MatrixID, y establece diversas variables en valores iniciales. La unidad 641 de establecimiento inicial suministra la información adquirida y establecida a la unidad 642 de descodificación de DPCM de coeficiente de CA y la unidad 643 de descodificación de DPCM de coeficiente de CD.
La unidad 642 de descodificación de DPCM de coeficiente de CA adquiere los datos de DPCM de los coeficientes de CA ( scaling_list_delta_coef ( ac) ) suministrados desde la unidad 551 de exp-G. La unidad 642 de descodificación de DPCM de coeficiente de CA descodifica los datos de DPCM adquiridos de los coeficientes de CA utilizando los ajustes iniciales y similares suministrados desde la unidad 641 de establecimiento inicial, y determina los coeficientes de CA. La unidad 642 de descodificación de DPCM de coeficiente de CA suministra los coeficientes de CA determinados ( ScalingList [i ] ) a la unidad 553 de determinación de solapamiento inversa. La unidad 642 de descodificación de DPCM de coeficiente de CA ejecuta el proceso descrito en lo anterior en una pluralidad de listas de escalado.
La unidad 643 de descodificación de DPCM de coeficiente de CD adquiere los datos de DPCM del coeficiente de CD (scaling_list_delta_coef (de) ) suministrados desde la unidad 551 de exp-G. La unidad 643 de descodificación de DPCM de coeficiente de CD descodifica los datos de DPCM adquiridos del coeficiente de CD utilizando los ajustes iniciales y similares suministrados desde la unidad 641 de establecimiento inicial, y determina los coeficientes de CD de las listas de escalado individuales. La unidad 643 de descodificación de DPCM de coeficiente de CD suministra los coeficientes de CD determinados ( scaling_list_dc_coef) a la unidad 553 de determinación de solapamiento inversa.
Por consiguiente, la unidad 552 de DPCM inversa puede realizar descodificación de DPCM correcta, y puede obtener los coeficientes de CD y los coeficientes de CA. Es decir, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de listas de escalado. <5-5. Flujo de proceso de DPCM inverso> También en el cuarto método, el dispositivo 300 de descodificación de imágenes ejecuta un proceso de descodificación de matrices de cuantificación en una forma similar a aquella del primer método descrito en lo anterior con referencia al diagrama de flujo ilustrado en la Figura 27. De manera similar, el dispositivo 300 de descodificación de imágenes ejecuta un proceso de descodificación de señales residuales en una forma similar a aquella en el primer método descrito en lo anterior con referencia al diagrama de flujo ilustrado en la Figura 28.
Un ejemplo del flujo de un proceso de DPCM inverso ejecutado por la unidad 552 de DPCM inversa se describirá con referencia a un diagrama de flujo ilustrado en las Figuras 41 y 42.
Cuando el proceso de DPCM inverso se inicia, la unidad 641 de establecimiento inicial y la unidad 642 descodificación de DPCM de coeficiente de CA ejecutan el procesamiento de las etapas S511 a S517 en una forma similar a aquella en el procesamiento de las etapas S421 a S427 en la Figura 34.
Si se determina en la etapa S514 que la variable i es mayor que o igual a coefNum, la unidad 642 de descodificación de DPCM de coeficiente de CA hace avanzar el proceso a la etapa S518.
En la etapa S518, la unidad 642 de descodificación de DPCM de coeficiente de CA determina si se han procesado o no todas las listas de escalado (matrices de diferencia) en las cuales los coeficientes de CD se someten colectivamente a un proceso de DPC . Si se determina que existe una lista de escalado no procesada (matriz de diferencia) , la unidad 642 de descodificación de DPCM de coeficiente de CA regresa el proceso a la etapa S511, y realiza repetidamente el procesamiento subsiguiente.
Además, si se determina que no existe ninguna lista de escalado no procesada (matriz de diferencia) , la unidad 642 de descodificación de DPCM de coeficiente de CA hace avanzar el proceso a la Figura 42.
En la etapa S521 en la Figura 42, la unidad 641 de establecimiento inicial establece sizeID y una variable nextcoef como sigue. sizeID = 2 nextcoef = 8 Además, en la etapa S522, la unidad 641 de establecimiento inicial establece MatrixID como sigue.
MatrixID = 0 En la etapa S523, la unidad 643 de descodificación de DPCM de coeficiente de CD determina si es o no sizeID < 4. Si se determina que sizeID es menor que 4, la unidad 643 de descodificación de DPCM de coeficiente de CD hace avanzar el proceso a la etapa S524.
En la etapa S524, la unidad 643 de descodificación de DPCM de coeficiente de CD determina si se cumple o no con MatrixID < (sizeID == 3)?2:6. Si se determina que MatrixID < (sizeID == 3)?2:6 se cumple, la unidad 643 de descodificación de DPCM de coeficiente de CD hace avanzar el proceso a la etapa S525.
En la etapa S525, la unidad 643 de descodificación de DPCM de coeficiente de CD lee los datos de DPCM del coeficiente de CD ( scaling_list_delta_coef) .
En la etapa S526, la unidad 643 de descodificación de DPCM de coeficiente de CD determina nextcoef como sigue utilizando los datos de DPCM leídos, y además determina scaling_dc_coef . nextcoef = (nextcoef + scaling_list_delta_coef+256) % 256 scaling_dc_coef [ sizeID - 2] [MatrixID] = nextcoef En la etapa S527, la unidad 643 de descodificación de DPCM de coeficiente de CD incrementa MatrixID para cambiar el objetivo de procesamiento al coeficiente de CD subsiguiente (la lista de escalado subsiguiente o la matriz residual), y después regresa el proceso a la etapa S524.
Si se determina en la etapa S524 que MatrixID < (sizeID == 3)?2:6 no se cumple, la unidad 643 de descodificación de DPCM de coeficiente de CD hace avanzar el proceso a la etapa S528.
En la etapa S528, la unidad 643 de descodificación de DPCM de coeficiente de CD incrementa sizeID para cambiar el objetivo de procesamiento al coeficiente de CD subsiguiente (la lista de escalado subsiguiente o matriz residual), y después regresa el proceso a la etapa S523.
Si se determina en la etapa S523 que sizeID es mayor que o igual a 4, la unidad 643 de descodificación de DPCM de coeficiente de CD termina el proceso de DPCM inverso, y regresa el proceso a la Figura 28.
Por consiguiente, las diferencias entre los coeficientes de CD pueden descodificarse correctamente. Por lo tanto, el dispositivo 300 de descodificación de imágenes puede suprimir un incremento en la cantidad de codificación de las listas de escalado. <6. Sexta modalidad> <6-l. Otra sintaxis: Primer ejemplo> La Figura 43 ilustra otro ejemplo de la sintaxis para una lista de escalado. Este dibujo corresponde a la Figura 12. En el ejemplo ilustrado en la Figura 12, el valor inicial de nextcoef se establece en una constante predeterminada (por ejemplo, 8). Alternativamente, como se ilustra en la Figura 43, el valor inicial de nextcoef puede sobre-escribirse con los datos de DPCM del coeficiente de CD ( scaling_list_dc_coef_minus8 ) .
Por consiguiente, la cantidad de codificación de los coeficientes de CA iniciales (coeficientes de CA (0, 0)) en una lista de escalado de 16x16 y una lista de escalado de 32x32 puede reducirse. <6-2. Otra sintaxis: Segundo ejemplo> La Figura 44 ilustra otro ejemplo de la sintaxis para una lista de escalado. Este dibujo corresponde a la Figura 12.
En el ejemplo ilustrado en la Figura 12, cuando el valor de scaling_list_pred_matrix_id_delta, el cual es la información que especifica el destino de referencia en el modo de copiado, es "0", se menciona la lista de escalado que precede a la lista de escalado actual que se procesa por una lista de escalado, y cuando el valor de scaling_list_pred_matrix_id_delta es "1", se menciona la lista de escalado que precedes la lista de escalado actual que se procesa por dos listas de escalado.
En contraste, en el ejemplo ilustrado en la Figura 44, como se ilustra en la parte C de la Figura 44, cuando el valor de scaling_list_pred_matrix_id_delta, el cual es la información que especifica el destino de referencia en el modo de copiado, es "0", se menciona la lista de escalado por defecto, y cuando el valor de scaling_list_pred_matrix_id_delta es "1", se menciona inmediatamente la lista de escalado precedente.
De esta manera, modificar la semántica de scaling_list_pred_matrix_id_delta puede simplificar la sintaxis en una forma ilustrada en la parte B de la Figura 44 y puede reduce la carga del proceso de DPC y el proceso de DPC inverso. <6-3. Otra sintaxis: Tercer ejemplo> La Figura 45 ilustra otro ejemplo de la sintaxis para una lista de escalado. Este dibujo corresponde a la Figura 12.
En el ejemplo ilustrado en la Figura 45, tanto el ejemplo ilustrado en la Figura 43 como el ejemplo ilustrado en la Figura 44 descrito en lo anterior se utilizan.
En el ejemplo ilustrado en la Figura 45, por consiguiente, la cantidad de codificación de los coeficientes de CA iniciales (coeficientes de CA (0, 0) ) en una lista de escalado de 16x16 y una lista de escalado de 32x32 puede reducirse. Además, la sintaxis puede simplificarse y la carga del proceso de DPCM y el proceso de DPCM inverso puede reducirse .
En las modalidades anteriores, los valores de las constantes predeterminadas son arbitrarios. Además, los tamaños de las listas de escalado también son arbitrarios.
Además, aunque la descripción anterior se ha proporcionado a partir de un proceso de transformación para una lista de escalado, una matriz de predicción, o una matriz de diferencia entre las mismas, el tamaño proceso de transformación puede ser un proceso para generar realmente una matriz cuyo tamaño se ha transformado, o puede ser un proceso para establecer cómo leer cada elemento en una matriz a partir de una memoria (control de lectura de los datos de matriz) sin generar realmente datos de la matriz.
En el proceso de transformación de tamaño descrito en lo anterior, cada elemento en una matriz cuyo tamaño se ha transformado se constituye por cualquiera de los elementos en la matriz cuyo tamaño aún no se ha transformado. Es decir, una matriz cuyo tamaño se ha transformado puede generarse al leer elementos en una matriz cuyo tamaño aún no se ha transformado, el cual se almacena en una memoria, utilizando un cierto método tal como lectura de alguno de los elementos en la matriz o lectura de un elemento varias veces. En otras palabras, un método para leer cada elemento se define (o se realiza el control de lectura de los datos de matriz) para implementar de manera sustancial la transformación de tamaño descrita en lo anterior. Este método puede eliminar un proceso tal como escribir datos de matriz cuyo tamaño se ha transformado en la memoria. Además, la lectura de los datos de matriz cuyo tamaño se ha transformado básicamente depende en cómo realizar la interpolación del vecino más cercano y similares, y por lo tanto la transformación de tamaño puede implementarse por un proceso de carga comparativamente bajo tal como seleccionar la adecuada de una pluralidad de opciones preparadas con anticipación. Por consiguiente, el método descrito en lo anterior puede reducir la carga de transformación de tamaño.
Es decir, el proceso de transformación de tamaño descrito en lo anterior incluye un proceso para generar realmente datos de matriz cuyo tamaño se ha transformado y también incluye control de lectura de los datos de matriz.
Observe que aunque la descripción anterior se ha hecho en el contexto de una matriz de diferencia que se codifica y transmiten, esto solamente es ilustrativo y una lista de escalado puede codificarse y se transmiten. En otras palabras, los coeficientes de CA y el coeficiente de CD de una lista de escalado que se han descrito en lo anterior como coeficientes que se procesan pueden ser los coeficientes de CA y el coeficiente de CD de una matriz de diferencia entre una lista de escalado y una matriz de predicción.
Además, la cantidad de codificación para la información sobre los parámetros, indicadores, etcétera de una lista de escalado, tal como el tamaño y el ID de lista de la lista de escalado, pueden reducirse, por ejemplo, al tomar una diferencia entre la información y la información previamente transmitida y transmitir la diferencia.
Además, aunque la descripción anterior se ha hecho en el contexto de una matriz de cuantificación o una matriz de diferencia de un tamaño grande que se convierte descendentemente y se transmite, esto solamente es ilustrativo y una matriz de cuantificación o una matriz de diferencia puede transmitirse sin que se convierta descendentemente, aunque el tamaño de la matriz de cuantificación utilizado para cuantificación se mantenga sin cambio .
La presente tecnología puede aplicarse a cualquier tipo de codificación y descodificación de imágenes que implica cuantificación y descuantificación .
Además, la presente tecnología también puede aplicarse, por ejemplo, a un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes utilizados para recibir información de imagen (corriente de bit) comprendida utilizando una transformada ortogonal tal como una transformada de coseno discreto y compensación de movimiento, tal como MPEG o H.26x, mediante un medio de red tal como difusión satelital, televisión por cable, la Internet, o un teléfono móvil. La presente tecnología también puede aplicarse a un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes utilizados para procesamiento en medios de almacenamiento tales como un disco óptico, un disco magnético, y una memoria flash. Además, la presente tecnología también puede aplicarse a un dispositivo de cuantificación y un dispositivo de descuantificación incluidos en el dispositivo de codificación de imágenes y el dispositivo de descodificación de imágenes descritos en lo anterior, y similares. <7. Séptima modalidad> <Aplicación a codificación de imágenes de varias vistas y descodificación de imágenes de varias vistas> La serie de procesos descrita en lo anterior puede aplicarse a codificación de imágenes de varias vistas y descodificación de imágenes de varias vistas. La Figura 46 ilustra un ejemplo de un esquema de codificación de imágenes de varias vistas.
Como se ilustra en la Figura 46, las imágenes de varias vistas incluyen imágenes en una pluralidad de puntos de vista (o vistas). La pluralidad de vistas en imágenes de varias vistas incluye vistas base, cada una de las cuales se codifica y descodifica utilizando una imagen de la misma sin utilizar una imagen de otra vista, y vistas no base, cada una de las cuales se codifica y descodifica utilizando una imagen de otra vista. Cada una de las vistas no base pueden codificarse y descodificarse utilizando una imagen de una vista base o utilizando una imagen de cualquier otra vista no base .
Cuando las imágenes de varias vistas ilustradas en la Figura 46 van a codificarse y descodificarse, una imagen de cada vista se codifica y descodifica. El método descrito en lo anterior en las modalidades anteriores puede aplicarse a la codificación y descodificación de cada vista. Esto puede eliminar una reducción en la calidad de imagen de las vistas individuales .
Además, indicadores y parámetros utilizados en el método descrito en lo anterior en las modalidades anteriores puede compartirse en la codificación y descodificación de cada vista. Esto puede suprimir una reducción en la eficiencia de codificación.
Más específicamente, por ejemplo, la información con respecto a una lista de escalado (por ejemplo, parámetros, indicadores, etcétera) puede compartirse en la codificación y descodificación de cada vista.
No hace falta decir, que cualquier otra información necesaria puede compartirse en la codificación y descodificación de cada vista.
Por ejemplo, cuando una lista de escalado o información con respecto a la lista de escalado que se incluye en un conjunto de parámetros de secuencia (SPS) o un conjunto de parámetros de imagen (PPS) se transmitirá, si esos (SPS y PPS) se comparten entre las vista, la lista de escalado o la información con respecto a la lista de escalado también se comparte por consiguiente. Esto puede suprimir una reducción en la eficiencia de codificación.
Además, los elementos de matriz en una lista de escalado (o matriz de cuantificación) para una vista base puede cambiarse de acuerdo con los valores de disparidad entre las vistas. Además, un valor de desplazamiento para ajustar un elemento de matriz de vista no base con respecto a un elemento de matriz en una lista de escalado (matriz de cuantificación) para una vista base puede transmitirse.
Por consiguiente, un incremento en la cantidad de codificación puede suprimirse.
Por ejemplo, una lista de escalado para cada vista puede transmitirse por separado con anticipación. Cuando una lista de escalado puede cambiarse para cada vista, solamente la información que indica la diferencia de la correspondiente de las listas de escalado transmitidas con anticipación puede transmitirse. La información que indica la diferencia es arbitraria, y por ejemplo, puede ser información en unidades de 4x4 u 8x8 o una diferencia entre las matrices.
Observe que si una lista de escalado o información con respecto a la lista de escalado se comparte entre las vistas aunque un SPS o un PPS no se comparta, los SPS o los PPS para otras vistas pueden indicarse (es decir, las listas de escalado o información con respecto a las listas de escalado para otras vistas puede utilizarse).
Además, si tales imágenes de varias vistas se representan como imágenes que tiene, como componentes, imágenes de YUV e imágenes a profundidad (Profundidad) que corresponde a la cantidad de disparidad entre las vistas, una lista de escalado independiente o información con respecto a la lista de escalado para la imagen de cada componente (Y, U, V, y Profundidad) puede utilizarse.
Por ejemplo, puesto que una imagen a profundidad (Profundidad) es una imagen de un borde, las listas de escalado no son necesarias. De esta manera, aunque un SPS o un PPS especifique el uso de una lista de escalado, una lista de escalado puede no aplicarse (o una lista de escalado en la cual todos los elementos de matriz son los mismos (o planos) pueden aplicarse) a una imagen de profundidad (Profundidad). <Dispositivo de codificación de imágenes de varias vistas> La Figura 47 es un diagrama que ilustra un dispositivo de codificación de imágenes de varias vistas para realizar la operación de codificación de imágenes de varias vistas descrita en lo anterior. Como se ilustra en la Figura 47, un dispositivo 700 de codificación de imágenes de varias vistas incluye una unidad 701 de codificación, una unidad 702 de codificación, y una unidad 703 de multiplexión .
La unidad 701 de codificación codifica una imagen de una vista base, y genera una corriente de imágenes de vista base codificada. La unidad 702 de codificación codifica una imagen de una vista no base, y genera una corriente de imágenes de vista no base codificada. La unidad 703 de multiplexión multiplexa la corriente de imágenes de vista base codificada generada por la unidad 701 de codificación y la corriente de imágenes de vista no base codificada generada por la unidad 702 de codificación, y genera una corriente de imágenes de varias vistas codificada.
El dispositivo 10 de codificación de imágenes (Figura 14) puede utilizarse para cada una de la unidad 701 de codificación y la unidad 702 de codificación del dispositivo 700 de codificación de imágenes de varias vistas. Es decir, un incremento en la cantidad de codificación de una lista de escalado en la codificación de cada vista puede suprimirse, y una reducción en la calidad de imagen de cada vista puede suprimirse. Además, la unidad 701 de codificación y la unidad 702 de codificación pueden realizar procesos tales como cuantificación y descuantificación utilizando los mismos indicadores o parámetros (es decir, indicadores y parámetros puede compartirse) . Por consiguiente, una reducción en la eficiencia de codificación puede suprimirse. <Dispositivo de descodificación de imágenes de varias vistas> La Figura 48 es un diagrama que ilustra un dispositivo de descodificación de imágenes de varias vistas para realizar la operación de descodificación de imágenes de varias vistas descrita en lo anterior. Como se ilustra en la Figura 48, un dispositivo 710 de descodificación de imágenes de varias vistas incluye una unidad 711 de desmultiplexión, una unidad 712 de descodificación, y una unidad 713 de descodificación .
La unidad 711 de desmultiplexión desmultiplexa una corriente de imágenes de varias vistas codificada en la cual una corriente de imágenes de vista base codificada y una corriente de imágenes de vista no base codificada se han multiplexado, y extrae la corriente de imágenes de vista base codificada y la corriente de imágenes de vista no base codificada. La unidad 712 de descodificación descodifica la corriente de imágenes de vista base codificada extraída por el unidad 711 de desmultiplexión, y obtiene una imagen de una vista base. La unidad 713 de descodificación descodifica la corriente de imágenes de vista no base codificada extraída por el unidad 711 de desmultiplexión, y obtiene una imagen de una vista no base.
El dispositivo 300 de descodificación de imágenes (Figura 22) puede utilizarse para cada una de la unidad 712 de descodificación y la unidad 713 de descodificación del dispositivo 710 de descodificación de imágenes de varias vistas. Es decir, un incremento en la cantidad de codificación de una lista de escalado en la descodificación de cada vista puede suprimirse, y una reducción en la calidad de imagen de cada vista puede suprimirse. Además, la unidad 712 de descodificación y la unidad 713 de descodificación pueden realizar procesos tales como cuantificación y descuantificación utilizando los mismos indicadores y parámetros (es decir, indicadores y parámetros pueden compartirse). Por consiguiente, una reducción en la eficiencia de codificación puede suprimirse. <8. Octava modalidad> <Aplicación a codificación de imágenes estratificadas y descodificación de imágenes estratificadas> La serie de procesos descrita en lo anterior puede aplicarse a codificación de imágenes estratificadas y descodificación de imágenes estratificadas (codificación escalable y descodificación escalable) . La Figura 49 ilustra un ejemplo de un esquema de codificación de imágenes estratificadas .
La codificación de imágenes estratificadas (codificación escalable) es un proceso para dividir una imagen en una pluralidad de capas (estratificación) para proporcionar datos de imágenes con la función de escalabilidad para un parámetro predeterminado y para codificar las capas individuales. La descodificación de imágenes estratificadas (descodificación escalable) es un proceso de descodificación que corresponde a la codificación de imágenes estratificadas.
Como se ilustra en la Figura 49, una estratificación de imagen, una imagen se divide en una pluralidad de sub-imágenes (o capas) utilizando como referencia un parámetro predeterminado con una función de escalabilidad . Es decir, las imágenes descompuestas en capas (o imágenes estratificadas) incluyen varias imágenes estratificadas (o en capa) que tiene diferentes valores del parámetro predeterminado. La pluralidad de capas en las imágenes estratificadas incluye capas base, de las cuales cada una se codifica y descodifica utilizando una imagen de la misma sin utilizar una imagen de otra capa, y las capas no base (también denominadas como capas de mejora) , de las cuales cada una se codifica y descodifica utilizando una imagen de otra capa. Cada una de las capas no base puede codificarse y descodifica utilizando una imagen de una capa base o utilizando una imagen de cualquier otra capa no base.
En general, cada una de las capas no base se compone de datos de una imagen diferente (datos de diferencia) entre una imagen de la misma y una imagen de otra capa para reducir redundancia. Por ejemplo, en un caso donde una imagen se descompone en dos capas, particularmente, una capa base y una capa no base (también denominada como una capa de mejora) , una imagen con una menor calidad que la imagen original puede obtenerse utilizando solamente los datos del capa base, y la imagen original (es decir, una imagen con una alta calidad) puede obtenerse al combinar los datos de la capa base y los datos de la capa no base.
La estratificación de una imagen en la forma descrita en lo anterior puede facilitar obtener imágenes con una amplia variedad de calidades de acuerdo con situaciones. Esto asegura que pueda transmitirse información de compresión de imágenes desde un servidor de acuerdo con las capacidades de terminales y redes sin implementar transcodificación de manera que, por ejemplo, la información de compresión de imágenes en solamente capas base se transmita a terminales que tienen bajas capacidades de procesamiento, tales como teléfonos móviles, para reproducir imágenes de movimiento que tienen una baja resolución espacial-temporal o una baja calidad, y la información de compresión de imágenes sobre capa de mejoras además de las capas base se transmite a terminales que tienen altas capacidades de procesamiento, tales como equipos de televisión y computadoras personales, para reproducir imágenes en movimiento que tienen una alta resolución espacial-temporal o una alta calidad.
Cuando las imágenes estratificadas como en el ejemplo ilustrado en la Figura 49 van a codificarse y descodificarse, una imagen de cada capa se codifica y descodifica. El método descrito en lo anterior en cada una de las modalidades anteriores puede aplicarse a la codificación y descodificación de cada capa. Esto puede suprimir una reducción en la calidad de imagen de las capas individuales.
Además, indicadores y parámetros utilizados en el método descrito en lo anterior en cada una de las modalidades anteriores puede compartirse en la codificación y descodificación de cada capa. Esto puede suprimir una reducción en la eficiencia de codificación.
Más específicamente, por ejemplo, la información con respecto una lista de escalado (por ejemplo, parámetros, indicadores, etcétera) pueden compartirse en la codificación y descodificación de cada capa.
No hace falta decir, cualquier otra información necesaria puede compartirse en la codificación y descodificación de cada capa.
Ejemplos de las imágenes estratificadas incluyen imágenes estratificadas en resolución espacial (también denominadas como escalabilidad de resolución espacial) ( escalabilidad espacial). En imágenes estratificadas con escalabilidad de resolución espacial, las resoluciones de las imágenes difieren de capa en capa. Por ejemplo, una capa de una imagen que tiene la resolución especialmente más baja se designa como capa base, y una capa de una imagen que tiene una mayor resolución que la capa base se designa como capa no base (una capa de mejora).
Los datos de imágenes de capa no base (una capa de mejora) pueden ser datos independientes de las otras capas, y, de manera similar a las capas base, una imagen que tiene una resolución equivalente a la resolución de que la capa puede obtenerse sólo utilizando los datos de imágenes. Generalmente, sin embargo, los datos de imágenes de capa no base (una capa de mejora) son datos que corresponden en una imagen de diferencia entre la imagen de la capa y una imagen de otra capa (por ejemplo, una capa de una capa bajo la capa) . En este caso, una imagen que tiene una resolución equivalente a esa de una capa base se obtiene utilizando solamente los datos de imágenes del capa base mientras una imagen que tiene una resolución equivalente a aquella de una capa no base (una capa de mejora) se obtiene por la combinación de los datos de imágenes de esa capa y los datos de imágenes de otra capa (por ejemplo, una capa de una capa por debajo de esa capa) . Esto puede suprimir la redundancia de datos de imágenes entre capas.
En imágenes estratificadas que tienen la escalabilidad de resolución espacial descrita en lo anterior, las resoluciones de las imágenes difieren de capa en capa. De esta manera, las resoluciones de las unidades de procesamiento por las cuales se codifican y descodifican las capas individuales también difieren. Por consiguiente, si una lista de escalado (matriz de cuantificación) se comparte en la codificación y descodificación de capas individuales, la lista de escalado (matriz de cuantificacion) puede convertirse ascendentemente de acuerdo con las relaciones de resolución de las capas individuales .
Por ejemplo, se asume que una imagen de una capa base tiene una resolución de 2K (por ejemplo, 1920x1080), y una imagen de una capa no base (una capa de mejora) tiene una resolución de 4K (por ejemplo, 3840x2160) . En este caso, por ejemplo, el tamaño de 16x16 de la imagen de la capa base (imagen 2K) corresponde al tamaño 32x32 de la imagen de la capa no base (imagen 4K) . La lista de escalado (matriz de cuantificación) se convierte ascendentemente cuando sea adecuado de acuerdo con la relación de resolución.
Por ejemplo, una matriz de cuantificación de 4x4 utilizada para la cuantificación y descuantificación de una capa base se convierte ascendentemente en 8x8 en la cuantificación y descuantificación de una capa no base y se utiliza. Similarmente, una lista de escalado de 8x8 de una capa base se convierte ascendentemente en 16x16 en una capa no base. Similarmente, una matriz de cuantificación convertida ascendentemente en 16x16 en una capa base y utilizada se convierte ascendentemente en 32x32 en una capa no base.
Observe que el parámetro para el cual la escalabilidad se proporciona no se limita a resolución espacial, y ejemplos del parámetro puede incluir resolución temporal (escalabilidad temporal) . En imágenes estratificadas que tienen escalabilidad de resolución temporal, las proporciones de trama de imágenes difieren de capa en capa. Otros ejemplos incluyen escalabilidad de profundidad de bit en la cual la profundidad de bit de los datos de imágenes difiere de capa en capa, y la escalabilidad cromática en la cual el formato de los componentes difiere de capa en capa.
Aún otros ejemplos incluyen escalabilidad de SNR en la cual las relaciones de señal a ruido (SNR) de las imágenes difieren de capa en capa.
En vista de la mejora en la calidad de imagen, de manera deseable, cuanto menor sea la señal de ruido de una imagen, menor será el error de cuantificación . Para este fin, en la escalabilidad de SNR, de manera deseable, diferentes lista de escalado (lista de escalado no comunes) se utilizan para la cuantificación y descuantificación de las capas individuales de acuerdo con la relación de señal a ruido. Por esta razón, como se describe en lo anterior, si una lista de escalado se comparte entre capas, un valor de compensación para ajusfar los elementos de matriz para una capa de mejora con respecto a los elementos de matriz en una lista de escalado para una capa base pueden transmitirse. Más específicamente, la información que indica la diferencia entre una lista de escalado común y una lista de escalado realmente utilizada puede transmitirse en una base de capa por capa. Por ejemplo, la información que indica la diferencia puede transmitirse en un conjunto de parámetros de secuencia (SPS) o un conjunto de parámetros de imagen (PPS) para cada capa. La información que indica la diferencia es arbitraria. Por ejemplo, la información puede ser una matriz que tiene elementos que representan diferentes valores entre elementos correspondientes en ambas listas de escalados, o permiten una función que indica la diferencia. <Dispositivo de codificación de imágenes estratificadas> La Figura 50 es un diagrama que ilustra un dispositivo de codificación de imágenes estratificadas para realizar la operación de codificación de imágenes estratificadas descrita en lo anterior. Como se ilustra en la Figura 50, un dispositivo 720 de codificación de imágenes estratificadas incluye una unidad 721 de codificación, una unidad 722 de codificación, y una unidad 723 de multiplexión .
La unidad 721 de codificación codifica una imagen de una capa base, y genera una corriente de imágenes de capa base codificada. La unidad 722 de codificación codifica una imagen de una capa no base, y genera una corriente de imágenes de capa no base codificada. La unidad 723 de multiplexión multiplexa la corriente de imágenes de capa base codificada generada por la unidad 721 de codificación y la corriente de imágenes de capa no base codificada generada por la unidad 722 de codificación, y genera una corriente de imágenes estratificadas codificadas.
El dispositivo 10 de codificación de imágenes (Figura 14) puede utilizarse para cada una de la unidad 721 de codificación y la unidad 722 de codificación del dispositivo 720 de codificación de imágenes estratificadas. Es decir, un incremento en la cantidad de codificación de una lista de escalado en la codificación de cada capa puede suprimirse, y una reducción en la calidad de imagen de cada capa puede suprimirse. Además, la unidad 721 de codificación y la unidad 722 de codificación pueden realizar procesos tales como cuantificación y descuantificación utilizando los mismos indicadores o parámetros (es decir, indicadores y parámetros pueden compartirse) . Por consiguiente, una reducción en la eficiencia de codificación puede suprimirse. <Dispositivo de descodificación de imágenes estratificadas> La Figura 51 es un diagrama que ilustra un dispositivo de descodificación de imágenes estratificadas para realizar la operación de descodificación de imágenes estratificadas descrita en lo anterior. Como se ilustra en la Figura 51, un dispositivo 730 de descodificación de imágenes estratificadas incluye una unidad 731 de desmultiplexión, una unidad 732 de descodificación, y una unidad 733 de descodificación .
La unidad 731 de desmultiplexión desmultiplexa una corriente de imágenes estratificadas codificadas en la cual una corriente de imágenes de capa base descodificada y una corriente de imágenes de capa no base codificada se han multiplexado, y extrae la corriente de imágenes de capa base codificada y la corriente de imágenes de capa no base codificada. La unidad 732 de descodificación descodifica la corriente de imágenes de capa base codificada extraida por la unidad 731 de desmultiplexión, y obtiene una imagen de una capa base. La unidad 733 de descodificación descodifica la corriente de imágenes de capa no base codificada extraida por la unidad 731 de desmultiplexión, y obtiene una imagen de una capa no base.
El dispositivo 300 de descodificación de imágenes (Figura 22) puede utilizarse para cada una de la unidad 732 de descodificación y la unidad 733 de descodificación del dispositivo 730 de descodificación de imágenes estratificadas. Es decir, un incremento en la cantidad de codificación de una lista de escalado en la descodificación de cada capa puede suprimirse, y una reducción en la calidad de imagen de cada capa puede suprimirse. Además, la unidad 712 de codificación y la unidad 713 de codificación pueden realizar procesos tales como cuantificación y descuantificación utilizando los mismos indicadores o parámetros (es decir, indicadores y parámetros pueden compartirse) . De esta manera, una reducción en la eficiencia de codificación puede suprimirse. <9. Novena modalidad> <Computadora> La series de procesos descritos en lo anterior pueden ejecutarse por hardware o también pueden ejecutarse por software. En este caso, las series de procesos pueden implementarse, por ejemplo, como una computadora ilustrada en la Figura 52.
En la Figura 52, una CPU 801 (Unidad de Procesamiento Central) en una computadora 800 ejecuta varias operaciones de procesamiento de acuerdo con un programa almacenado en una ROM 802 ( Memoria de Sólo Lectura) o un programa cargado en una RAM 803 ( Memoria de Acceso Aleatorio) desde una unidad 813 de almacenamiento. La RAM 803 también almacena, según se desee, datos y similar necesarios para que la CPU 801 ejecute varias operaciones de procesamiento .
La CPU 801, la ROM 802, y la RAM 803 se conectan entre si mediante un bus 804. Una interfaz 810 de entrada/salida también se conecta al bus 804.
La interfaz 810 de entrada/salida se conecta a una unidad 811 de entrada, una unidad 812 de salida, la unidad 813 de almacenamiento, y una unidad 814 de comunicación. La unidad 811 de entrada incluye un teclado, un ratón, un panel táctil, una terminal de entrada, etcétera. La unidad 812 de salida incluye dispositivos de salida deseados, tales como un altavoz y una pantalla que incluye una CRT (Tubo de Rayos Catódicos), una LCD (Pantalla de Cristal Liquido), y una OLED (Pantalla Electroluminiscente Orgánica), una terminal de salida, etcétera. La unidad 813 de almacenamiento incluye un medio de almacenamiento deseado tal como un disco duro o una memoria flash, y una unidad de control que controla la entrada y salida del medio de almacenamiento. La unidad 814 de comunicación incluye dispositivos de comunicación alámbrica o inalámbrica deseados tales como un modem, una interfaz de LAN, un dispositivo de USB (Bus de Serie Universal), y una dispositivo Bluetooth (marca registrada). La unidad 814 de comunicación realiza procesamiento de comunicación con otros dispositivos de comunicación mediante redes que incluyen, por ejemplo, la Internet.
Una unidad 815 además se conecta a la interfaz 810 de entrada/salida, si es necesario. Un medio 821 removible tal como un disco magnético, un disco óptico, un disco magneto-óptico, o una memoria de semiconductor se coloca en la unidad 815, según se desee. La unidad 815 lee un programa de computadora, datos, y similares a partir del medio 821 removióle colocado en el mismo de acuerdo con el control de, por ejemplo, la CPU 801. Los datos leídos y el programa de computadora se suministran, por ejemplo, la RAM 803. El programa de computadora leído a partir del medio 821 removible además se instala en la unidad 813 de almacenamiento, si es necesario.
Cuando las series de procesos descritos en lo anterior se ejecutan por software, un programa que constituye el software se instala desde una red o un medio de grabación.
Ejemplos del medio de grabación incluye, como se ilustra en la Figura 52, el medio 821 removible, el cual se distribuye por separado a partir del cuerpo de dispositivo para suministrar el programa a un usuario, tal como un disco magnético (incluyendo un disco flexible), un disco óptico (incluyendo un CD-ROM (Disco Compacto - Memoria de Sólo Lectura) y un DVD (Disco Versátil Digital)), un disco magneto-óptico (incluyendo un MD (Mini Disco)), o una memoria de semiconductor en la cual se graba el programa. Otros ejemplos del medio de grabación incluye dispositivos distribuidos a un usuario en una forma que se incorpora con anticipación en el cuerpo del dispositivo, tal como la ROM 802 y el disco duro incluido en la unidad 813 de almacenamiento en el cual se graba el programa.
Observe que el programa el cual ejecuta la computadora 800 puede ser un programa en el cual se realizan operaciones de procesamiento en una forma de series de tiempo en el orden establecido en la presente, o puede ser un programa en el cual las operaciones de procesamiento se realizan en paralelo o en tiempos necesarios tal como cuando se solicita.
Además, las etapas que describen un programa almacenado en una medio de grabación, como se utiliza en la presente, incluye, desde luego, operaciones de procesamiento realizadas en una forma de series de tiempo en el orden establecido, y operaciones de procesamiento ejecutadas en paralelo o individualmente aunque no necesariamente realizada en una forma de series de tiempo.
Además, el término "sistema", como se utiliza en la presente, se refiere a un conjunto de elementos constituyentes (dispositivos, módulos (componentes), etc.) sin importar si todos los elementos constituyentes se acomodan en el mismo alojamiento o no. De esta manera, una pluralidad de dispositivos acomodados en alojamientos separados y conectados mediante una red, y un solo dispositivo que incluye que incluye una pluralidad de módulos acomodados en un sólo alojamiento se definen como un sistema.
Además, una configuración descrita en lo anterior como dispositivo simple (o unidades de procesamiento) puede dividirse en una pluralidad de dispositivos (o unidades de procesamiento) . Inversamente, configuraciones descritas en lo anterior como una pluralidad de dispositivos (o unidades de procesamiento) pueden combinarse en un solo dispositivo (o unidad de procesamiento) . Adicionalmente, desde luego, una configuración distinta a aquella descrita en lo anterior puede agregarse a la configuración de cada dispositivo (o cada unidad de procesamiento) . Además, parte de la configuración de un cierto dispositivo (o unidad de procesamiento) puede incluirse en la configuración de otro dispositivo (u otra unidad de procesamiento) si los dispositivos (o unidades de procesamiento) sustancialmente tuvieran la misma configuración y/u operación en términos de todo un sistema. En otras palabras, modalidades de la presente tecnología no se limitan a las modalidades anteriores, y una variedad de modificaciones pueden hacerse sin apartarse del alcance de la presente tecnología.
Aunque modalidades preferidas de la presente descripción se han descrito en detalle con referencia a los dibujos anexos, el alcance técnico de la presente descripción no se limita a los ejemplos descritos en la presente. Es aparente que una persona que tiene conocimiento ordinario en el campo técnico de la presente descripción podría lograr varios cambios o modificaciones sin apartarse del alcance del concepto técnico como se define en las reivindicaciones, y entenderá que tales cambios o modificaciones también caen dentro del alcance técnico de la presente descripción como algo natural.
Por ejemplo, la presente tecnología puede implementarse con una configuración de informática en la nube en la cual una pluralidad de dispositivos comparten y cooperan para procesar una sola función mediante una red.
Además, cada una de las etapas ilustradas en los diagramas de flujo descritos en lo anterior pueden ejecutarse por un solo dispositivo o por una pluralidad de dispositivos en una forma establecida.
Además, si una sola etapa incluye una pluralidad de procesos, la pluralidad de procesos incluido en una sola etapa pueden ejecutarse por un solo dispositivo o por una pluralidad de dispositivo en una forma compartida.
El dispositivo 10 de codificación de imágenes (Figura 14) y el dispositivo 300 de descodificación de imágenes (Figura 22) de acuerdo con las modalidades anteriores pueden aplicarse a varias piezas de equipo electrónico tal como un transmisor o un receptor utilizado para suministrar datos mediante difusión satelital, difusión cableada tal como TV por cable, o la Internet o utilizados para distribuir datos hasta o desde terminales mediante comunicación celular, un aparato de grabación que graba imágenes en medios tales como un disco óptico, un disco magnético, y una memoria flash, y un aparato de reproducción que reproduce imágenes de tales medios de almacenamiento . Cuatro aplicaciones ejemplares se describirán en adelante. <10. Aplicaciones Ejemplares> <Primera aplicación ejemplar: receptor de televisión> La Figura 53 ilustra un ejemplo de una configuración esquemática de un aparato de televisión al cual se aplican las modalidades anteriores. Un aparato 900 de televisión incluye una antena 901, un sintonizador 902, un desmultiplexor 903, un descodificador 904, una unidad 905 de procesamiento de señales de video, una unidad 906 de visualización, una unidad 907 de procesamiento de niveles de audio, un altavoz 908, una interfaz 909 externa, una unidad 910 de control, una interfaz 911 de usuario, y un bus 912.
El sintonizador 902 extrae una señal en un canal deseado de una señal de difusión recibida mediante la antena 901, y desmodula la señal extraída. Después, el sintonizador 902 produce una corriente de bits codificada obtenida por la desmodulación y el desmultiplexor 903. En otras palabras, el sintonizador 902 funciona como unidad de transmisión en el aparato 900 de televisión para recibir una corriente codificada incluyendo imágenes descodificadas.
El desmultiplexor 903 desmultiplexa la corriente de bit codificada en una corriente de video y una corriente de audio de un programa que se verá, y produce las corrientes desmultiiplexadas en el descodificador 904. El desmultiplexor 903 además extrae datos auxiliares tal como EPG (Guia de Programación Electrónica) de la corriente de bit codificada, y suministra los datos extraídos a la unidad 910 de control. Observe que el desmultiplexor 903 también puede desaleatorizar la corriente de bit codificada si la corriente de bit codificada se ha aleatorizado .
El descodificador 904 descodifica la corriente de video y la corriente de audio ingresadas desde el desmultiplexor 903. Después, el descodificador 904 produce datos de video generados a través del proceso de descodificación en la unidad 905 de procesamiento de señales de video. El descodificador 904 además produce datos de audio generados a través del proceso de descodificación en la unidad 907 de procesamiento de señales de audio.
La unidad 905 de procesamiento de señales de video reproduce los datos de video ingresados del descodificador 904, y provoca que el video se despliegue en la unidad 906 de visualización . La unidad 905 de procesamiento de señales de video también puede provocar que una pantalla de aplicación suministrada por una red se despliegue en la unidad 906 de visualización. La unidad 905 de procesamiento de señales de video además puede realizar procesamiento adicional, tal como remoción de ruido, en los datos de video de acuerdo con los ajustes. Además, la unidad 905 de procesamiento de señales de video también puede generar una imagen de GUI (Interfaz de Usuario Gráfica) como un menú, un botón, o un cursor, y superponer la imagen generada en una imagen de salida.
La unidad 906 de visualización se excita por una señal de excitación suministrada desde la unidad 905 de procesamiento de señales de video, y despliega el video o una imagen en una superficie de video de un dispositivo de visualización (tal como un pantalla de cristal liguido, una pantalla de plasma, o una OLED (Pantalla de Electroluminiscencia Orgánica) (pantalla de EL orgánica) ) .
La unidad 907 de procesamiento de señales de audio realiza los procesos de reproducción, tal como conversión de D/A y amplificación, y los datos de audio ingresados desde el descodificador 904, y provoca que el audio se reproduzca del altavoz 908. La unidad 907 de procesamiento de señales de audio además puede realizar procesamiento adicional, tal como remoción de ruido, en los datos de audio.
La interfaz 909 externa es una interfaz para conectar el aparato 900 de televisión a un dispositivo externo o una red. Por ejemplo, una corriente de video o una corriente de audio recibida mediante la interfaz 909 externa pueden descodificarse por el descodificador 904. En otras palabras, la interfaz 909 externa también funciona como unidad de transmisión en el aparato 900 de televisión para recibir una corriente codificada que incluye imágenes codificadas .
La unidad 910 de control incluye un procesador tal como una CPU, y memorias tales como una RAM y una ROM. Las memorias almacenan un programa que se ejecuta por la CPU, datos de programación, datos de EPG, datos adquiridos mediante una red, etcétera. El programa almacenado en las memorias se lee y se ejecuta por la CPU cuando, por ejemplo, el aparato 900 de televisión se inicia. La CPU ejecuta el programa para controlar la operación del aparato 900 de televisión de acuerdo con, por ejemplo, una señal de operación ingresada desde la interfaz 911 de usuario.
La interfaz 911 de usuario se conecta a la unidad 910 de control. La interfaz 911 de usuario incluye, por ejemplo, botones y conmutadores para permitir que el usuario opere el aparato 900 de televisión, una unidad de recepción para una señal de control remoto, etcétera. La interfaz 911 de usuario detecta una operación del usuario mediante los componentes antes descritos para generar una señal de operación, y produce la señal de operación generada en la unidad 910 de control.
El bus 912 sirve para conectar el sintonizador 902, el desmultiplexor 903, el descodificador 904, la unidad 905 de procesamiento de señales de video, la unidad 907 de procesamiento de señales de audio, la interfaz 909 externa, y la unidad 910 de control entre si.
En el aparato 900 de televisión que tiene la configuración descrita en lo anterior, el descodificador 904 tiene la función del dispositivo 300 de descodificación de imágenes (Figura 22) de acuerdo con las modalidades anteriores. Por consiguiente, el aparato 900 de televisión puede suprimir un incremento en la cantidad de codificación de una lista de escalado.
Oegunda aplicación ejemplar: Teléfono móvil> La Figura 54 ilustra un ejemplo de una configuración esquemática de un teléfono móvil al cual se aplican las modalidades anteriores. Un teléfono 920 móvil incluye una antena 921, una unidad 922 de comunicación, un códec 923 de audio, un altavoz 924, un micrófono 925, una unidad 926 de cámara, una unidad 927 de procesamiento de imágenes, una unidad 928 de multiplexión/desmultiplexión, una unidad 929 de grabación/reproducción, una unidad 930 de visualización, una unidad 931 de control, una unidad 932 de operación, y un bus 933.
La antena 921 se conecta a la unidad 922 de comunicación. El altavoz 924 y el micrófono 925 se conectan al códec 923 de audio. La unidad 932 de operación se conecta a la unidad 931 de control. El bus 933 sirve para conectar la unidad 922 de comunicación, el códec 923 de audio, la unidad 926 de cámara, la unidad 927 de procesamiento de imágenes, la unidad 928 de multiplexión/desmultiplexión, la unidad 929 de grabación/reproducción, la unidad 930 de visualización, y la unidad 931 de control entre si.
El teléfono 920 móvil realiza operaciones, tales como transmisión y recepción de una señal de audio, transmisión y recepción un correo electrónico o datos de imagen, captura de una imagen, y grabación de datos, en varios modos de operación que incluye un modo de llamada de voz, un modo de comunicación de datos, un modo de captura de imágenes, y un modo de videoteléfono.
En el modo de llamada de voz, una señal de audio análoga generada por el micrófono 925 se suministra al códec 923 de audio. El códec 923 de audio convierte la señal de audio análoga en datos de audio, y realiza conversión de A/D y compresión en los datos de audio convertidos. El códec 923 de audio entonces produce los datos de audio comprimidos en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula los datos de audio, y genera una señal de transmisión. La unidad 922 de comunicación entonces transmite la señal de transmisión generada a una estación base (no ilustrada) mediante la antena 921. Además, la unidad 922 de comunicación amplifica una señal de radio recibida mediante la antena 921, y realiza la conversión de frecuencia en la señal amplificada para adquirir una señal de recepción.
Después, la unidad 922 de comunicación desmodula y descodifica la señal de recepción para generar datos de audio, y produce los datos de audio generados en el códec 923 de audio. El códec 923 de audio expande los datos de audio, y realiza la conversión de D/A para generar una señal de audio análoga. El códec 923 de audio entonces suministra la señal de audio generada al altavoz 924 para provocar que se reproduzca el audio.
Además, en el modo de comunicación de datos, por ejemplo, la unidad 931 de control genera datos de texto que forman un correo electrónico de acuerdo con una operación del usuario mediante la unidad 932 de operación. Además, la unidad 931 de control provoca que el texto se despliegue en la unidad 930 de visualización . La unidad 931 de control además genera datos de correo electrónico de acuerdo con una instrucción de transmisión determinada dada por el usuario mediante la unidad 932 de operación, y produce los datos de correo electrónico generados en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula los datos de correo electrónico para generar una señal de transmisión. Después, la unidad 922 de comunicación transmite la señal de transmisión generada a la estación base (no ilustrada) mediante la antena 921. Además, la unidad 922 de comunicación amplifica una señal de radio recibida mediante la antena 921, y realiza conversión de frecuencia en la señal amplificada para adquirir una señal de recepción. Después, la unidad 922 de comunicación desmodula y descodifica la señal de recepción para restaurar los datos de correo electrónico, y produce los datos de correo electrónico restaurados en la unidad 931 de control. La unidad 931 de control provoca que el contenido del correo electrónico se despliegue en la unidad 930 de visualización, y también provoca que los datos de correo electrónico se almacenen en un medio de almacenamiento de la unidad 929 de grabación/reproducción.
La unidad 929 de grabación/reproducción incluye un medio de almacenamiento grabable/regrabable deseado. El medio de almacenamiento por ejemplo, puede ser un medio de almacenamiento integrado tal como una RAM o a memoria flash, o un medio de almacenamiento externo tal como un disco duro, un disco magnético, un disco magneto-óptico, un disco óptico, una memoria USB, o una tarjeta de memoria.
Además, en el modo de captura de imágenes, por ejemplo, la unidad 926 de cámara captura una imagen de un objeto para generar datos de imagen, y produce los datos de imagen generados en la unidad 927 de procesamiento de imágenes. La unidad 927 de procesamiento de imágenes codifica los datos de imágenes ingresados desde la unidad 926 de cámara, y provoca que una corriente codificada se almacene en el medio de almacenamiento de la unidad 929 de grabación/reproducción .
Además, en el modo de videoteléfono, por ejemplo, la unidad 928 de multiplexión/desmultiplexión multiplexa la corriente de video codificada por la unidad 927 de procesamiento de imágenes y la corriente de audio ingresada del codee 923 de audio, y produce una corriente multiplexada en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula la corriente para generar una señal de transmisión. Después, la unidad 922 de comunicación transmite la señal de transmisión generada a la estación base (no ilustrada) mediante la antena 921. La unidad 922 de comunicación además amplifica una señal de radio recibida mediante la antena 921, y realiza conversión de frecuencia en la señal amplificada para adquirir una señal de recepción. La señal de transmisión y la señal de recepción pueden incluir una corriente de bits codificada. La unidad 922 de comunicación desmodula y descodifica la señal de recepción para restaurar una corriente, y produce la corriente restaurada en la unidad 928 de multiplexión/desmultiplexión. Después, la unidad 928 de multiplexión/desmultiplexión desmultiplexa la corriente de entrada en una corriente de video y una corriente de audio, y produce la corriente de video y la corriente de audio en la unidad 927 de procesamiento de imágenes y el códec 923 de audio, respectivamente. La unidad 927 de procesamiento de imágenes descodifica la corriente de video para generar datos de video. Los datos de video se suministran a la unidad 930 de visualización, y una serie de imágenes se despliega por la unidad 930 de visualización. El códec 923 de audio expande la corriente de audio, y realiza la conversión de D/A para generar una señal de audio análoga. El códec 923 de audio entonces suministra la señal de audio generada al altavoz 924 para provocar que se reproduzca el audio.
En el teléfono 920 móvil que tiene la configuración descrita en lo anterior, la unidad 927 de procesamiento de imágenes tiene la función del dispositivo 10 de codificación de imágenes (Figura 14) y la función del dispositivo 300 de descodificación de imágenes (Figura 22) de acuerdo con las modalidades anteriores. Por consiguiente, el teléfono 920 móvil puede suprimir un incremento en la cantidad de codificación de una lista de escalado.
Además, aunque se ha proporcionado una descripción del teléfono 920 móvil, por ejemplo, un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes a los cuales se aplica la presente tecnología pueden utilizarse, de manera similar en el teléfono 920 móvil, en cualquier aparato que tenga una función de captura de imágenes y una función de comunicación similares a aquellas del teléfono 920 móvil, tal como un PDA (Asistente Digital Personal) , un teléfono inteligente, una UMPC (Computadora Personal Ultra Móvil) , una computadora tipo netbook, o una computadora personal tipo notebook. <Tercera aplicación ejemplar: Aparato de grabación/reproducción> La Figura 55 ilustra un ejemplo de una configuración esquemática de un aparato de grabación/reproducción al cual se aplican las modalidades anteriores. Un aparato 940 de grabación/reproducción codifica, por ejemplo, datos de audio y datos de video de un programa de difusión recibido, y graba los datos de audio codificados y los datos de video en un medio de grabación. Además, el aparato 940 de grabación/reproducción también puede codificar datos de audio y datos de video adquiridos por ejemplo, de otro aparato, y grabar los datos de audio codificados y los datos de video en un medio de grabación. Además, el aparato 940 de grabación/reproducción reproduce, por ejemplo, datos grabados en un medio de grabación utilizando un monitor y un altavoz de acuerdo con una instrucción dada por un usuario. En este caso, el aparato 940 grabación/reproducción descodifica datos de audio y datos de video.
El aparato 940 de grabación/reproducción incluye un sintonizador 941, una interface 942 externa, un codificador 943, una HDD 944 (Unidad de Disco Duro), una unidad 945 de disco, un selector 946, un descodificador 947, una OSD 948 (Pantalla en Pantalla), una unidad 949 de control y una interfaz 950 de usuario.
El sintonizador 941 extrae una señal en un canal deseado de una señal de difusión recibida mediante una antena (no ilustrada), y desmodula la señal extraída. El sintonizador 941 entonces produce una corriente de bits codificada obtenida por desmodulación en el selector 946. En otras palabras, el sintonizador 941 funciona como una unidad de transmisión en el aparato 940 de grabación/reproducción.
La interfaz 942 externa es una interfaz para conectar el aparato 940 de grabación/reproducción a un dispositivo externo o una red. La interfaz 942 externa por ejemplo, puede ser una interfaz IEEE 1394, una interfaz de red, una interfaz de USB, una interfaz de memoria flash, o similares. Por ejemplo, los datos de video y los datos de audio recibidos mediante la interfaz 942 externa se ingresan en el codificador 943. En otras palabras, la interfaz 942 externa funciona como unidad de transmisión en el aparato 949 de grabación/reproducción.
El codificador 943 codifica datos de video y los datos de audio ingresados desde la interfaz 942 externa si los datos de video y los datos de audio no se han codificado. El codificador 943 entonces produce una corriente de bits codificada en el selector 946.
La HDD 944 graba una corriente de bits codificada que incluye datos de contenido comprimido tal como video y audio, varios programas, y otros datos en un disco duro interno. Además, la HDD 944 lee los datos antes descritos del disco duro cuando reproduce video y audio.
La unidad 945 de disco graba y lee datos en y de un medio de grabación colocado en la misma. El medio de grabación colocado en la unidad 945 de disco por ejemplo, puede ser un disco DVD (tal como DVD-Video, DVD-RAM, DVD-R, DVD-RW, DVD+R, o DVD+RW) o un disco Blu-ray (marca registrada) .
El selector 946 selecciona una corriente de bits codificada ingresada desde el sintonizador 941 o el codificador 943 cuando graba video y audio, y produce la corriente de bits codificada seleccionada en la HDD 944 o la unidad 945 de disco. Cuando se reproduce video y audio, el selector 946 produce una corriente de bits codificada ingresada desde la HDD 944 o la unidad 945 de disco en el descodificador 947.
El descodificador 947 descodifica la corriente de bits codificada para generar datos de video y datos de audio. El descodificador 947 entonces produce los datos de video generados en la OSD 948. El descodificador 904 además produce los datos de audio generados en un altavoz externo.
La OSD 948 reproduce los datos de video ingresados desde el descodificador 947, y despliega video. Además, la OSD 948 también puede superponer una imagen de GUI tal como un menú, un botón, o un cursor en el video que se despliega.
La unidad 949 de control incluye un procesador tal como una CPU, y memorias tales como una RAM y una ROM. Las memorias almacenan un programa que se ejecuta por la CPU, datos de programación, etcétera. El programa almacenado en las memorias se lee y se ejecuta por la CPU cuando por ejemplo, se inicia el aparato 940 de grabación/reproducción. La CPU ejecuta el programa para controlar la operación del aparato 940 de grabación/reproducción de acuerdo con por ejemplo, una señal de operación ingresada desde la interfaz 950 de usuario.
La interfaz 950 de usuario se conecta a la unidad 949 de control. La interfaz 950 de usuario incluye, por ejemplo, botones y conmutadores para permitir que el usuario opere el aparato 940 de grabación/reproducción, una unidad de recepción para una señal de control remoto, etcétera. La interfaz 950 de usuario detecta una operación del usuario mediante los componentes antes descritos para generar una señal de operación, y produce la señal de operación generada en la unidad 949 de control.
En el aparato 940 de grabación/reproducción que tiene la configuración descrita en lo anterior, el codificador 943 tiene la función del dispositivo 10 de codificación de imágenes (Figura 14) de acuerdo con las modalidades anteriores. Además, el descodificador 947 tiene la función del dispositivo 300 de descodificación de imágenes (Figura 22) de acuerdo con las modalidades anteriores. Por consiguiente, el aparato 940 de grabación/reproducción puede suprimir un incremento en la cantidad de codificación de una lista de escalado. <Cuarta aplicación ejemplar: Aparato de captura de imágenes> La Figura 56 ilustra un ejemplo de una configuración esquemática de un aparato de captura de imágenes al cual se aplican las modalidades anteriores. Un aparato 960 de captura de imágenes captura una imagen de un objeto para generar datos de imagen, codifica los datos de imágenes, y graba los datos de imágenes codificados en un medio de grabación.
El aparato 960 de captura de imágenes incluye un bloque 961 óptico, una unidad 962 de formación de imágenes, una unidad 963 de procesamiento de señales, una unidad 964 de procesamiento de imágenes, una unidad 965 de visualización, una interfaz 966 externa, una memoria 967, una unidad 968 de medios, una OSD 969, una unidad 970 de control, una interfaz 971 de usuario, y un bus 972.
El bloque 961 óptico se conecta a la unidad 962 de formación de imágenes. La unidad 962 de formación de imágenes se conecta a la unidad 963 de procesamiento de señales. La unidad 965 de visualización se conecta a la unidad 964 de procesamiento de imágenes. La interfaz 971 de usuario se conecta a la unidad 970 de control. El bus 972 sirve para conectar la unidad 964 de procesamiento de imágenes, la interfaz 966 externa, la memoria 967, la unidad 968 de medios, la OSD 969 y la unidad 970 de control entre si.
El bloque 961 óptico incluye una lente focal, un mecanismo de apertura, etcétera. El bloque 961 óptico forma una imagen óptica del objeto en una superficie de formación de imágenes de la unidad 962 de formación de imágenes. La unidad 962 de formación de imágenes incluye un sensor de imagen tal como un sensor de imagen de CCD o CMOS y convierte la imagen óptica formada en la superficie de captura de imágenes en una señal de imagen que sirve como señal eléctrica al realizar la conversión fotoeléctrica. La unidad 962 de formación de imágenes entonces produce la señal de imagen en la unidad 963 de procesamiento de señales.
La unidad 963 de procesamiento de señales realiza varias operaciones de procesamiento de señales con cámara, tales como corrección de knee, corrección de gamma, y corrección de color, en la señal de imagen ingresada desde la unidad 962 de formación de imágenes. La unidad 963 de procesamiento de señales produce los datos de imagen sometidos a las operaciones de procesamiento de señales con cámara en la unidad 964 de procesamiento de imágenes.
La unidad 964 de procesamiento de imágenes codifica los datos de imágenes ingresados desde la unidad 963 de procesamiento de señales para generar datos codificados. La unidad 964 de procesamiento de imágenes entonces produce los datos codificados generados en la interfaz 966 externa o la unidad 968 de medios. Además, la unidad 964 de procesamiento de imágenes descodifica los datos codificados ingresados desde la interfaz 966 externa o la unidad 968 de medios para generar datos de imágenes. La unidad 964 de procesamiento de imágenes entonces produce los datos de imágenes generados en la unidad 965 de visualización . Además, la unidad 964 de procesamiento de imágenes también puede producir los datos de imágenes ingresados desde la unidad 963 de procesamiento de señales en la unidad 965 de visualización para provocar que una imagen se despliegue. Además, la unidad 964 de procesamiento de imágenes también puede superponer datos de visualización adquiridos a partir de la OSD 969 en la imagen que va a producirse en la unidad 965 de visualización.
La OSD 969 genera una imagen de GUI tal como un menú, un botón, o un cursor, y produce la imagen generada en la unidad 964 de procesamiento de imágenes.
La interfaz 966 externa se forma, por ejemplo, como terminal de entrada/salida de USB. La interfaz 966 externa conecta, por ejemplo, el aparato 960 de captura de imágenes a una impresora cuando imprime una imagen. Una unidad además se conecta a la interfaz 966 externa, si es necesario. Un medio removible tal como un disco magnético o un disco óptico se coloca en la unidad, y un programa leido del medio removible puede instalarse en el aparato 960 de captura de imágenes. Además, la interfaz 966 externa también puede formarse como interfaz de red para conectarse a una red tal como LAN o Internet. En otras palabras, la interfaz 966 externa funciona como unidad de transmisión en el aparato 960 de captura de imágenes .
El medio de grabación que se coloca en la unidad 968 de medios, por ejemplo, puede ser cualquier medio removible grabable/regrabable tal como un disco magnético, un disco magneto-óptico, un disco óptico, o una memoria de semiconductor. Alternativamente, un medio de grabación puede unirse de manera fija a la unidad 968 de medios y puede formar una unidad de disco duro integrada o una unidad de almacenamiento no portátil tal como una SSD (Unidad de Estado Sólido) .
La unidad 970 de control incluye un procesador tal como una CPU, y memorias tales como una RAM y una ROM. Las memorias almacenan un programa que se ejecuta por la CPU, datos de programación, etcétera. El programa almacenado en las memorias se lee y se ejecuta por la CPU cuando, por ejemplo, el aparato 960 de captura de imágenes se inicia. La CPU ejecuta el programa para controlar la operación del aparato 960 de captura de imágenes de acuerdo con, por ejemplo, una señal de operación ingresada desde la interfaz 971 de usuario.
La interfaz 971 de usuario se conecta a la unidad 970 de control. La interfaz 971 de usuario incluye, por ejemplo, botones, conmutadores, etcétera, para permitir que el usuario opere el aparato 960 de captura de imágenes. La interfaz 971 de usuario detecta una operación del usuario mediante los componentes antes descritos para generar una señal de operación, y produce la señal de operación generada en la unidad 970 de control.
En el aparato 960 de captura de imágenes que tiene la configuración descrita en lo anterior, la unidad 964 de procesamiento de imágenes tiene la función del dispositivo 10 de codificación de imágenes (Figura 14) y la función del dispositivo 300 de descodificación de imágenes (Figura 22) de acuerdo con las modalidades anteriores. De esta manera, el aparato 960 de captura de imágenes puede suprimir un incremento en la cantidad de codificación de una lista de escalado . <7. Aplicaciones Ejemplares de la Codificación Escalable> <Primer sistema> A continuación, se describirá un ejemplo especifico del uso de datos codificados escalables que se han codificado utilizando la codificación escalable (codificación estratificada (de imagen) ) . La codificación escalable, por ejemplo, puede utilizarse para la selección de datos que se transmite, como en un ejemplo ilustrado en la Figura 57.
En un sistema 1000 de transmisión de datos ilustrado en la Figura 57, un servidor 1002 de distribución lee los datos codificados escalables almacenados en una unidad 1001 de almacenamiento de datos codificados escalables, y distribuye los datos codificados escalables a los dispositivos de terminal, tal como una computadora 1004 personal, un dispositivo 1005 de AV, un dispositivo 1006 tipo Tablet, y un teléfono 1007 móvil, mediante una red 1003.
En este caso, el servidor 1002 de distribución selecciona los datos codificados que tienen la calidad deseada de acuerdo con el rendimiento del dispositivo de terminal, el ambiente de comunicación, y similares, y transmite los datos seleccionados codificados. Incluso si el servidor 1002 de distribución transmite datos que tienen una calidad superior a la necesaria, el dispositivo de terminal no siempre puede obtener una imagen de alta calidad, y puede provocarse retardo o sobreflujo. Además, tales datos pueden ocupar ancho de banda de comunicación más de lo necesario, o pueden incrementar la carga en el dispositivo de terminal más de lo necesario. Inversamente, incluso si el servidor 1002 de distribución transmite datos que tienen una calidad menor a la necesaria, el dispositivo de terminal no necesariamente puede obtener una imagen con una calidad suficiente. De esta manera, el servidor 1002 de distribución lee los datos codificados escalables almacenados en la unidad 1001 de almacenamiento de datos codificados escalables, si es necesario, como datos codificados que tienen calidad adecuada para el rendimiento del dispositivo de terminal, ambiente de comunicación, y similares, y transmite los datos codificados leídos .
Por ejemplo, se asume que la unidad 1001 de almacenamiento de datos codificados escalables almacena datos 1011 codificados escalables (BL+EL) que se han codificado de manera escalable. Los datos 1011 codificados escalables (BL+EL) son datos codificados que incluyen una capa base y una capa de mejora, y son datos que se descodifican para obtener una imagen de la capa base y una imagen de la capa de mej ora .
El servidor 1002 de distribución selecciona una capa adecuada de acuerdo con el rendimiento de un dispositivo de terminal que transmite datos, el ambiente de comunicación y similares, y lee los datos de la capa. Por ejemplo, el servidor 1002 de distribución lee los datos 1011 codificados escalables (BL+EL) de alta calidad de la unidad 1001 de almacenamiento de datos codificados escalables, y transmite los datos 1011 codificados escalables (BL+EL) leídos a la computadora 1004 personal o el dispositivo 1006 tipo Tablet, que tiene altas capacidades de procesamiento, como es. En contraste, por ejemplo, el servidor 1002 de distribución extrae los datos de la capa base de los datos 1011 codificados escalables (BL+EL) , y transmite los datos extraídos de la capa base al dispositivo 1005 de AV y el teléfono 1007 móvil, el cual tiene bajas capacidades de procesamiento, ya que los datos 1012 codificados escalables (BL) que tienen el mismo contenido que los datos 1011 codificados escalables (BL+EL) pero que tienen menor calidad que los datos de 1011 codificados escalables (BL+EL) .
El uso de los datos codificados escalables de esta manera facilita el ajuste de la cantidad de datos, con lo cual suprime la aparición de retardo o sobreflujo y suprime un incremento innecesario en la carga del dispositivo de terminal o un medio de comunicación. Además, los datos 1011 codificados escalables (BL+EL) tienen redundancia reducida entre capas, y por lo tanto tienen una menor cantidad de datos que los datos que tienen datos codificados individualmente de las capas respectivas. Por consiguiente, el área de almacenamiento de la unidad 1001 de almacenamiento de datos codificados escalables puede utilizarse de manera más eficiente.
Observe que puesto que varios dispositivos tales como la computadora 1004 personal, el dispositivo 1005 de AV, el dispositivo 1006 tipo Tablet, y el teléfono 1007 móvil pueden utilizarse como dispositivos de terminal, el rendimiento de hardware de los dispositivos de terminal difiere de dispositivo en dispositivo. Además, puesto que varias aplicaciones pueden ejecutarse por los dispositivos de terminal, las capacidades de software de las aplicaciones pueden variar. Además, la red 1003 que sirve como medio de comunicación puede implementarse como cualquier red de linea de comunicación que pueda ser alámbrica, inalámbrica o ambas, tal como la Internet y una LAN (Red de Área Local), y tiene varias capacidades de transmisión de datos. Tal rendimiento y capacidades pueden variar dependiendo de otra comunicación y similares .
Por consiguiente, antes del inicio de la transmisión de datos, el servidor 1002 de distribución puede comunicarse con un dispositivo de terminal al cual los datos se transmitirán, y puede obtener información con respecto a las capacidades del dispositivo de terminal, tal como el rendimiento de hardware del dispositivo de terminal de rendimiento de la aplicación al (software) ejecutada por el dispositivo de terminal, y también información con respecto al ambiente de comunicación, tal como el ancho de banda disponible de la red 1003. Además, el servidor 1002 de distribución puede seleccionar una capa adecuada en función de la información obtenida.
Observe que una capa puede extraerse por un dispositivo de terminal. Por ejemplo, la computadora 1004 personal puede descodificar los datos 1011 codificados escalables transmitidos (BL+EL) , y desplegar una imagen de una capa base o una imagen de una capa de mejora. Alternativamente, por ejemplo, la computadora 1004 personal puede extraer los datos 1012 codificados escalables (BL) de la capa base de los datos 1011 codificados escalables transmitidos (BL+EL) , almacenar los datos 1012 codificados escalables extraídos (BL+EL) , transferir los datos 1012 codificados escalables extraídos (BL) , a otro dispositivo, o descodificar los datos 1012 codificados escalables extraídos (BL) para desplegar una imagen de la capa base.
No hace falta decir que el número de unidades 1001 de almacenamiento de datos codificados escalables, el número de servidores 1002 de distribución, el número de redes 1003, y el número de dispositivos de terminal son arbitrarias. Además, aunque se ha proporcionado una descripción de un ejemplo en el cual el servidor 1002 de distribución transmite datos a un dispositivo de terminal, ejemplos de uso no se limitan a este ejemplo. El sistema 1000 de transmisión de datos puede utilizarse en cualquier sistema que seleccione una capa adecuada, cuando transmita datos codificados que se han codificado utilizando codificación escalable a un dispositivo de terminal, de acuerdo con las capacidades del dispositivo de terminal, ambiente de comunicación y similares .
Además, la presente tecnología también puede aplicarse al sistema 1000 de transmisión de datos como se ilustra en la Figura 57 descrito en lo anterior en una forma similar a una aplicación para la codificación jerárquica y la descodificación jerárquica descritas en lo anterior con referencia a las Figuras 49 a 51, con lo cual se logran las ventajas similares a las ventajas descritas en lo anterior con referencia a las Figuras 49 a 51. <Segundo sistema> La codificación escalable también puede utilizarse, por ejemplo, como en un ejemplo ilustrado en la Figura 58, para transmisión mediante una pluralidad de medios de comunicación .
En un sistema 1100 de transmisión de datos ilustrado en la Figura 58, una estación 1101 de difusión transmite datos 1121 codificados escalables (BL) de una capa base mediante difusión 1111 terrestre. La estación 1101 de difusión además transmite (por ejemplo, forma el paquete y transmite) los datos 1122 codificados escalables (EL) de una capa de mejora mediante una red 1102 deseada formada de una red de comunicación la cual puede ser alámbrica, inalámbrica o ambas.
Un dispositivo 1102 de terminal tiene una función para recibir la difusión 1111 terrestre de la estación 1101 de difusión, y recibe los datos 1121 codificados escalables (BL) de la capa base transmitida mediante la difusión 1111 terrestre. El dispositivo 1102 de terminal además tiene una función de comunicación para realizar comunicación mediante la red 1112, y recibe los datos 1122 codificados escalables (EL) de la capa de mejora transmitida mediante la red 1112.
El dispositivo 1102 de terminal descodifica los datos 1121 codificados escalables (BL) de la capa base adquirida mediante la difusión 1111 terrestre de acuerdo con por ejemplo, una instrucción de usuario o similar para obtener una imagen de la capa base, almacena los datos 1121 codificados escalables (BL) , o transfiere los datos 1121 codificados escalables (BL) a otro dispositivo.
Además, el dispositivo 1102 de terminal combina los datos 1121 codificados escalables (BL) de la capa base adquirida mediante la difusión 1111 terrestre con los datos 1122 codificados escalables (EL) de la capa de mejora adquirida mediante la red 1112 de acuerdo con, por ejemplo, una instrucción de usuario o similar para obtener datos codificados escalables (BL+EL) , y descodifica los datos codificados escalables (BL+EL) para obtener una imagen de la capa de mejora, almacena los datos codificados escalables (BL+EL) , o transfiere los datos codificados escalables (BL+EL) a otro dispositivo.
Como se describe en lo anterior, los datos codificados escalables pueden transmitirse, por ejemplo, mediante diferentes medios de comunicación de una capa a otra. De esta manera, la carga puede distribuirse, y puede evitarse que se produzca retardo o sobreflujo.
Además, un medio de comunicación que se utiliza para transmisión puede seleccionarse para cada capa de acuerdo con la situación. Por ejemplo, los datos 1121 codificados escalables (BL) de la capa base que tiene una cantidad relativamente grande de datos puede transmitirse por medio de comunicación que tiene un ancho de banda grande, y los datos 1122 codificados escalables (EL) de la capa de mejora que tiene una cantidad relativamente pequeña de datos puede transmitirse mediante un medio de comunicación que tiene un ancho de banda estrecho. Alternativamente, por ejemplo, el medio de comunicación mediante el cual los datos 1122 codificados escalables (EL) de la capa de mejora se transmitirá puede conmutarse entre la red 1112 y la difusión 1111 terrestre de acuerdo con el ancho de banda disponible de la red 1112. Como de rutina, lo anterior aplica similarmente a los datos de una capa arbitraria.
El control en la forma descrita en lo anterior además puede suprimir el incremento en la carga de transmisión de datos.
No hace falta decir que el número de capas es arbitrario, y el número de medios de comunicación que se utiliza para la transmisión también es arbitrario. Además, el número de dispositivos 1102 de terminal a los cuales se distribuirán los datos también es arbitrario. Además, aunque se ha proporcionado una descripción en el contexto de difusión de la estación 1101 de difusión a manera de ejemplo, ejemplos de uso no se limitan a este ejemplo. El sistema 1100 de transmisión de datos puede utilizarse en cualquier sistema que divida datos codificados utilizando codificación escalable en una pluralidad de segmentos en unidades de capas y transmite los segmentos de datos mediante una pluralidad de lineas .
Además, la presente tecnología también puede aplicarse al sistema 110 de transmisión de datos como se ilustra en la Figura 58 descrita en lo anterior en una forma similar a un aplicación para la codificación jerárquica y descodificación jerárquica descritas en lo anterior con referencia a las Figuras 49 a 51, con lo cual se logran ventajas similares a las ventajas descritas en lo anterior con referencia a las Figuras 49 a 51. <Tercer sistema> La codificación escalable también puede utilizarse, por ejemplo, como en un ejemplo ilustrado en la Figura 59, el almacenamiento de datos codificados.
En un sistema 1200 de captura de imágenes ilustrada en la Figura 59, un aparato 1201 de captura de imágenes realiza codificación escalable sobre los datos de imágenes obtenidos al capturar una imagen de un objeto 1211, y suministra los datos resultantes a un dispositivo 1202 de almacenamiento de datos codificados escalables como datos 1221 codificados escalables (BL+EL) .
El dispositivo 1202 de almacenamiento de datos codificados escalables almacena los datos 1221 escalables (BL+EL) suministrados desde el aparato 1201 de captura de imágenes en la calidad que corresponde a la situación. Por ejemplo, en tiempo normal, el dispositivo 1202 de almacenamiento de datos codificados escalables extrae los datos de una capa base de los datos 1221 codificados escalables (BL+EL) , y almacena los datos extraídos de la capa base como datos 1222 codificados escalables (BL) de la capa base que tiene una baja calidad y una pequeña cantidad de datos. En contraste, por ejemplo, en el tiempo de atención, el dispositivo 1202 de almacenamiento de datos codificados escalables almacena los datos 1221 codificados escalables (BL+EL) que tienen una alta calidad y una gran cantidad de datos, como son.
Por consiguiente, el dispositivo 1202 de almacenamiento de datos codificados escalables puede guardar una imagen de alta calidad sólo cuando sea necesario. Esto puede suprimir un incremento en la cantidad de datos mientras se suprime una reducción en la calidad de la imagen debido a una reducción en la calidad y puede mejorar la eficiencia de uso del área de almacenamiento.
Por ejemplo, se supone que el aparato 1201 captura de imágenes es una cámara de seguridad. Si un objeto que se monitorea (por ejemplo, un intruso) no aparece en una imagen capturada (tiempo normal) , puede ser probable que la imagen capturada no tenga contenido importante. De esta manera, una reducción en la cantidad de datos tiene prioridad, y los datos de imágenes (datos codificados escalables) de la imagen se almacenan en baja calidad. En contraste, si un objeto que se monitorea aparece como el objeto 1211 en una imagen capturada (tiempo de atención) , puede ser probable que la imagen capturada tenga contenido importante. De esta manera, la calidad de imagen tiene prioridad, y los datos de imágenes (datos codificados escalables) de la imagen se almacenan en alta calidad.
Observe que, el tiempo normal o el tiempo de atención pueden determinarse, por ejemplo, por el dispositivo 1202 de almacenamiento de datos codificados escalables al analizar una imagen. Alternativamente, el aparato 1201 captura de imágenes puede determinar el tiempo normal o el tiempo de atención, y puede transmitir el resultado de determinación al dispositivo 1202 de almacenamiento de datos codificados escalables.
Observe que la determinación de tiempo normal o el tiempo de atención puede basarse en un estándar arbitrario, y una imagen en la cual la determinación se basa puede tener cualquier contenido. No hace falta decir que condiciones distintas al contenido de una imagen pueden utilizarse como el estándar de determinación. El estado puede cambiarse de acuerdo con, por ejemplo, la magnitud, la forma de onda, o similares del audio grabado, o pueden cambiarse a intervalos de un periodo de tiempo predeterminado. Alternativamente, el estado puede cambiarse de acuerdo con una instrucción externa tal como una instrucción de usuario.
Además, aunque se ha proporcionado una descripción de un ejemplo para cambiar entre dos estados, es decir, el tiempo normal y el tiempo de atención, el número de estados es arbitrario, y el cambio de estado pueden hacerse entre más de dos estados tal como tiempo normal, tiempo de atención, tiempo de más atención, y tiempo de mucho más atención. Observe que el número limite superior de estados que se cambia depende del número de capas de datos codificados escalables .
Además, el aparato 1201 de captura de imágenes puede configurarse para determinar el número de capas de codificación escalables de acuerdo con el estado. Por ejemplo, en tiempo normal, el aparato 1201 de captura de imágenes puede generar datos 1222 codificados escalables (BL) de la capa base que tienen una baja calidad y una pequeña cantidad de datos, y suministrar los datos 1222 codificados escalables generados (BL) al dispositivo 1202 de almacenamiento de datos codificados escalables. Además, por ejemplo, en el tiempo de atención, el aparato 1201 de captura de imágenes puede generar datos 1221 codificados escalables (BL+EL) de la capa base que tienen una alta calidad y una gran cantidad de datos, y suministrar los datos 1221 codificados escalables generados (BL+EL) al dispositivo 1202 de almacenamiento de datos codificados escalables.
Aunque se ha descrito una cámara de seguridad como ejemplo, el sistema | 1200 de captura de imágenes puede utilizarse en cualquier aplicación, y puede utilizarse en aplicaciones distintas a una cámara de seguridad.
Además, la presente tecnología también puede aplicarse al sistema 1200 de captura de imágenes ilustrada en la Figura 59 descrito en lo anterior de una forma similar a una aplicación para la codificación jerárquica y descodificación jerárquica descritas en lo anterior con referencia a las Figuras 49 a 51, con lo cual se obtienen ventajas similares a las ventajas descritas en lo anterior con referencia a las Figuras 49 a 51.
Observe que la presente tecnología también puede aplicarse a la transmisión continua de HTTP, tal como MPEG DASH, en donde se selecciona una pieza adecuada de datos codificados y se utiliza en unidades de un segmento de entre una pluralidad de piezas de datos codificados preparados con anticipación y que tienen diferentes resoluciones. En otras palabras, la información con respecto a la codificación y descodificación también pueden compartirse entre una pluralidad de piezas de datos codificados.
No hace falta decir que un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes a los cuales también se aplica la presente tecnología a otros aparatos distintos a los aparatos descritos en lo anterior o los sistemas.
Observe que un ejemplo se ha descrito en la presente en el cual una matriz de cuantificación (o un coeficiente usado para formar una matriz de cuantificación) se transmite desde el lado de codificación hasta el lado de descodificación. Una técnica para transmitir una matriz de cuantificación puede ser transmitir o grabar la matriz de cuantificación como datos separados asociados con una corriente de bits codificada sin multiplexar el parámetro de cuantificación en la corriente de bits codificada. El término "asociar", como se utiliza en la presente, significa permitir que una imagen (la cual puede ser parte de una imagen, tal como un sector o bloque) incluida en una corriente de bits que se enlaza a la información que corresponde a la imagen cuando se descodifica la imagen. Es decir, la información puede transmitirse en una trayectoria de transmisión diferente de aquella para la imagen (o corriente de bits) . Además, la información puede grabarse en un medio de grabación diferente al de la imagen (o corriente de bits) (o grabado en un área de grabación diferente del mismo medio de grabación) . Además, la información y la imagen (o corriente de bits) pueden asociarse entre si en unidades arbitrarias tales como una pluralidad de tramas, una trama, o una porción en una trama.
Observe que la presente tecnología también puede proporcionar las siguientes configuraciones. (1) Un dispositivo de procesamiento de imágenes que incluye : una unidad de establecimiento configurada para establecer un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación al coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; una unidad de conversión ascendente configurada para convertir ascendentemente la matriz de cuantificación establecida por la unidad de establecimiento para establecer la matriz de cuantificación convertida ascendentemente; y una unidad de descuantificación configurada para descuantificar datos cuantificados obtenidos al descodificar datos codificados, utilizar una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo de la matriz de cuantificación convertida ascendentemente establecida por la unidad de conversión ascendente se ha remplazado con el coeficiente de remplazo. (2) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) y (3) a (9), en donde la unidad de establecimiento establece el coeficiente de remplazo al agregar una diferencia entre el coeficiente de remplazo y un valor inicial establecido para la matriz de cuantificación al valor inicial. (3) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1), y (4) a (9), en donde la unidad de configuración establece coeficientes de la matriz de cuantificación utilizando el coeficiente de diferencia de remplazo y coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación . (4) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (3) y (5) a (9), en donde el coeficiente de diferencia de remplazo y los coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación se transmiten colectivamente, y la unidad de establecimiento establece los coeficientes de la matriz de cuantificación utilizando el coeficiente de diferencia de remplazo colectivamente transmitido y los coeficientes de diferencia. (5) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (4) y (6) a (9), en donde el coeficiente de diferencia de remplazo y los coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación se han codificado, y la unidad de establecimiento descodifica el coeficiente de diferencia de remplazo codificado y los coeficientes de diferencia codificados. (6) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (5) y (7) a (9), en donde la unidad de conversión ascendente convierte ascendentemente la matriz de cuantificación cuyo tamaño se limita a no más del tamaño de transmisión, al realizar un proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación . (7) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (6), (8) y (9), en donde el tamaño de transmisión es 8x8, y la unidad de conversión ascendente convierte ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 a una matriz de cuantificación que tiene un tamaño de 16x16, al realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8. (8) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (7) y (9), en donde la unidad de conversión ascendente convierte ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 en una matriz de cuantificación que tiene un tamaño de 32x32, al realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8. (9) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (8) , en donde una unidad de codificación que es una unidad de procesamiento en la cual se realiza un proceso de descodificación y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada tiene una estructura estratificada, el dispositivo de procesamiento de imágenes además incluye una unidad de descodificación configurada para realizar un proceso de descodificación en los datos codificados utilizando una unidad que tiene una estructura estratificada para generar los datos cuantificados, y la unidad de conversión ascendente convierte ascendentemente la matriz de cuantificación del tamaño de transmisión en un tamaño de una unidad de transformada que es una unidad de procesamiento en la cual se realiza la descuantificación . (10) Un método de procesamiento de imágenes que incluye : establecer un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación al coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utilizan para reemplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; convertir ascendentemente la matriz de cuantificación establecida para establecer la matriz de cuantificación convertida ascendentemente; y descuantificar datos cuantificados obtenidos al descodificar de datos codificados, utilizar una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo de la matriz de cuantificación convertida ascendentemente establecida se ha remplazado con el coeficiente de remplazo. (11) Un dispositivo de procesamiento de imágenes que incluye : una unidad de establecimiento configurada para establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; una unidad de cuantificación configurada para cuantificar una imagen para generar datos cuantificados ; y una unidad de transmisión configurada para transmitir datos codificados obtenidos al codificar los datos cuantificados generados por la unidad de cuantificación, datos de coeficientes de remplazo obtenidos al codificar el coeficiente de remplazo, y datos de coeficientes de diferencia de remplazo obtenidos al codificar el coeficiente de diferencia de remplazo establecido por la unidad de establecimiento . (12) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) y (13) a (17), en donde la unidad de establecimiento establece una diferencia entre el coeficiente de remplazo y un valor inicial establecido para la matriz de cuantificación . (13) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11), (12) y (14) a (17), en donde la unidad de establecimiento establece coeficientes de diferencia que son diferencias entre los coeficientes de la matriz de cuantificación, y la unidad de transmisión transmite datos de coeficiente de diferencia obtenidos al codificar los coeficientes de diferencia establecidos por la unidad de establecimiento . (14) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (13) y (15) a (17), en donde la unidad de transmisión transmite colectivamente los datos de coeficiente de remplazo y los datos de coeficientes de diferencia de remplazo. (15) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (14), (16) y (17), en donde la unidad de transmisión transmite los datos de coeficiente de remplazo y los datos de coeficiente de diferencia de remplazo en el orden de los datos de coeficiente de remplazo y los datos de coeficiente de diferencia de remplazo. (16) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (15) y (17), en donde la unidad de cuantificación cuantifica la imagen utilizando la matriz de cuantificación o la matriz de cuantificación convertida ascendentemente . (17) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (16), en donde una unidad de codificación que es una unidad de procesamiento en la cual se realiza un proceso de codificación y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada tiene una estructura estratificada, y el dispositivo de procesamiento de imágenes además incluye una unidad de codificación configurada para codificar los datos cuantificados generados por la unidad de cuantificación . (18) Un método de procesamiento de imágenes que incluye : establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en el cual se realiza la descuantificación; cuantificar una imagen para generar datos cuantificados ; y transmitir datos codificados obtenidos al codificar los datos cuantificados generados, datos de coeficientes de remplazo obtenidos al codificar el coeficiente de remplazo, y el coeficiente de diferencia de remplazo establecido. (19) Un dispositivo de procesamiento de imágenes que incluye : una unidad de descodificación configurada para descodificar datos codificados para generar datos cuantificados ; y una unidad de descuantificación configurada para descuantificar los datos cuantificados generados por la unidad de descodificación, utilizar una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación, cuando se encuentra en un modo de copiado en el cual se copia la matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación que identifican la matriz de cuantificación . (20) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (19) y (21), en donde la unidad de descuantificación descuantifica los datos cuantificados ala analizar la sintaxis cuya semántica se establece de manera que la matriz de cuantificación por defecto se menciona cuando los datos de referencia de matriz de cuantificación coinciden con los datos de identificación de matriz de cuantificación . (21) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (19) y (20), en donde la unidad de descuantificación descuantifica los datos cuantificados al analizar la sintaxis cuya semántica se establece de manera que la matriz de cuantificación por defecto se menciona en la presente cuando una diferencia entre los datos de referencia de la matriz de cuantificación y los datos de identificación matriz de cuantificación se establecen en 0. (22) Un método de procesamiento de imágenes que incluyen : descodificar datos codificados para generar datos cuantificados; y descuantificar los datos cuantificados generados en la descodificación, utilizar una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación, cuando se encuentra en un modo de copiado en el cual se copia una matriz de cuantificación, los datos de referencia de la matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de la matriz de cuantificación que identifican la matriz de cuantificación . (23) Un dispositivo de procesamiento de imágenes que incluye: una unidad de codificación configurada para codificar una imagen para generar datos codificados; y una unidad de establecimiento configurada para establecer, como sintaxis de los datos codificados generados por la unidad de codificación, la sintaxis cuya semántica se establece de modo que una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la cuantificación se menciona cuando se encuentra en un modo de copiado en el cual se copia la matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de la matriz de cuantificación que identifican la matriz de cuantificación . (24) Un método de procesamiento de imágenes que incluye : codificar una imagen para generar datos codificados; y establecer como sintaxis de los datos codificados generados, la sintaxis cuya semántica se establece de modo que una matriz de cuantificación por defecto que tiene el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la cuantificación se menciona cuando en un modo de copiado en el cual se copia una matriz de cuantificación, los datos de referencia de matriz de cuantificación que identifican un destino de referencia de la matriz de cuantificación coinciden con los datos de identificación de la matriz de cuantificación que identifican la matriz de cuantificación .
Lista de Signos de Referencia 10 dispositivo de codificación de imágenes, 14 unidad de transformada ortogonal/cuantificación, 16 unidad de codificación sin pérdidas, 150 unidad de procesamiento de matrices, 192 unidad de DPCM, 211 unidad de codificación de coeficiente de CD, 212 unidad de DPCM de coeficiente de CA, 300 dispositivo de descodificación de imagen, 312 unidad de descodificación sin pérdidas, 313 unidad de transformada ortogonal inversa/descuantificación, 410 unidad de generación de matrices, 552 unidad de DPCM inversa, 571 unidad de establecimiento inicial, 572 unidad de descodificación de DPCM, 573 unidad de extracción de coeficiente de CD, 611 memoria intermedia de coeficiente de CA, 612 unidad de codificación de coeficiente de CA, 613 unidad de DPCM de coeficiente de CA, 614 unidad de DPCM de coeficiente de CA, 621 unidad de establecimiento inicial, 622 unidad de descodificación de DPCM de coeficiente de CA, 623 memoria intermedia de coeficientes de CA, 624 unidad de descodificación de DPC de coeficiente de CD, 631 unidad de DPCM de coeficiente de CA, 632 memoria intermedia de coeficientes de CD, 633 unidad de DPCM de coeficiente de CD, 641 unidad de establecimiento inicial, 642 unidad de descodificación de DPCM de coeficiente de CA, 643 unidad de descodificación de DPCM de coeficiente de CD.

Claims (18)

REIVINDICACIONES
1. Un dispositivo de procesamiento de imágenes caracterizado porque comprende: una unidad de establecimiento configurada para establecer un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de remplazo a un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación, y el coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza una descuantificación; una unidad de conversión ascendente configurada para convertir ascendentemente la matriz de cuantificación establecida por la unidad de establecimiento para establecer la matriz de cuantificación convertida ascendentemente; y una unidad de descuantificación configurada para descuantificar datos cuantificados obtenidos al descodificar datos codificados, utilizar una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo de la matriz de cuantificación convertida ascendentemente establecida por la unidad de conversión ascendente se ha remplazado por el coeficiente de remplazo.
2. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de establecimiento establece el coeficiente de remplazo al agregar una diferencia entre el coeficiente de remplazo y un valor inicial establecido para la matriz de cuantificación al valor inicial.
3. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 2, caracterizado porque la unidad de establecimiento establece coeficientes de la matriz de cuantificación utilizando el coeficiente de diferencia de remplazo y los coeficientes de diferencia que son las diferencias entre los coeficientes de la matriz de cuantificación.
4. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 3, caracterizado porque un valor de diferencia entre el coeficiente de remplazo y el valor inicial, el coeficiente de diferencia de remplazo, y los coeficientes de diferencia se transmiten colectivamente, y la unidad de establecimiento establece los coeficientes de la matriz de cuantificación utilizando el valor de diferencia transmitido colectivamente, el coeficiente de diferencia de remplazo y los coeficientes de diferencia .
5. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 3, caracterizado porque el valor de diferencia, el coeficiente de diferencia de remplazo y los coeficientes de diferencia se han codificado, y la unidad de establecimiento descodifica el valor de diferencia codificado, el coeficiente de diferencia de remplazo codificado y los coeficientes de diferencia codificados .
6. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de conversión ascendente convierte ascendentemente la matriz de cuantificación cuyo tamaño se limita a no más que el tamaño de transmisión, al realizar un proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación .
7. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 6, caracterizado porque el tamaño de transmisión es 8x8 , y la unidad de conversión ascendente convierte ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 en una matriz de cuantificación que tiene un tamaño de 16x16, akl realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8.
8. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 6, caracterizado porque la unidad de conversión ascendente convierte ascendentemente una matriz de cuantificación que tiene un tamaño de 8x8 en una matriz de cuantificación tiene un tamaño de 32x32, al realizar el proceso de interpolación del vecino más cercano en los elementos de matriz de la matriz de cuantificación que tiene el tamaño de 8x8.
9. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque una unidad de codificación que es una unidad de procesamiento en la cual se realiza un proceso de descodificación y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada tiene una estructura estratificada, el dispositivo de procesamiento de imágenes además comprende una unidad de descodificación configurada para realizar un proceso de descodificación en los datos codificados utilizando una unidad que tiene una estructura estratificada para generar los datos cuantificados, y la unidad de conversión ascendente convierte ascendentemente la matriz de cuantificación del tamaño de transmisión en un tamaño de una unidad de transformada que es una unidad de procesamiento en la cual se realiza descuantificación .
10. Un método de procesamiento de imágenes caracterizado porque comprende: establecer un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, al agregar un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y el coeficiente ubicado al comienzo de la matriz de cuantificación al coeficiente ubicado al comienzo de la matriz de cuantificación, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza descuantificación; convertir ascendentemente la matriz de cuantificación establecida para establecer la matriz de cuantificación convertida ascendentemente; y descuantificar los datos cuantificados obtenidos al descodificar datos codificados, utilizando una matriz de cuantificación convertida ascendentemente en la cual un coeficiente ubicado al comienzo se ha remplazado con el coeficiente de remplazo.
11. Un dispositivo de procesamiento de imágenes caracterizado porque comprende: una unidad de establecimiento configurada para establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un máximo tamaño permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente que se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en descuantificación que se realiza; una unidad de cuantificación configurada para cuantificar una imagen para generar datos cuantificados ; y una unidad de transmisión configurada para transmitir datos codificados obtenidos al codificar los datos cuantificados generados por la unidad de cuantificación, los datos de coeficientes de remplazo obtenidos al codificar el coeficiente de remplazo, y los datos de coeficientes de diferencia de remplazo obtenidos al codifica el coeficiente de diferencia de remplazo establecido por la unidad de establecimiento.
12. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de establecimiento establece un valor de diferencia entre el coeficiente de remplazo y un valor inicial establecido por la matriz de cuantificación, y la unidad de transmisión transmite el valor de diferencia establecido por la unidad de establecimiento, como los datos de coeficiente de remplazo.
13. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 12, caracterizado porque la unidad de establecimiento establece coeficientes de diferencia que son diferencias entre los coeficientes de la matriz de cuantificación, y la unidad de transmisión transmite datos de coeficientes de diferencia obtenidos al codificar los coeficientes de diferencia establecidos por la unidad de establecimiento .
14. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 13, caracterizado porque la unidad de transmisión transmite colectivamente los datos de coeficientes de remplazo, los datos de coeficientes de diferencia de remplazo, y los datos de coeficientes de diferencia.
15. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 14, caracterizado porque la unidad de transmisión transmite los datos de coeficiente de remplazo, los datos de coeficiente de diferencia de remplazo y los datos de coeficientes de diferencia en el orden de los datos de coeficiente de remplazo, los datos de coeficiente de diferencia de remplazo y los datos de coeficientes de diferencia.
16. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de cuantificación cuantifica la imagen utilizando la matriz de cuantificación o la matriz de cuantificación convertida ascendentemente .
17. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque una unidad de codificación que es una unidad de procesamiento en la cual se realiza un proceso de codificación y una unidad de transformada que es una unidad de procesamiento en la cual se realiza un proceso de transformada tienen una estructura estratificada, y el dispositivo de procesamiento de imágenes además comprende una unidad de codificación configurada para codificar los datos cuantificados generados por la unidad de cuantificación .
18. Un método de procesamiento de imágenes caracterizado porque comprende: establecer un coeficiente de diferencia de remplazo que es una diferencia entre un coeficiente de remplazo y un coeficiente ubicado al comienzo de una matriz de cuantificación cuyo tamaño se limita a no más de un tamaño de transmisión que es un tamaño máximo permitido en la transmisión, el coeficiente de remplazo se utiliza para remplazar un coeficiente ubicado al comienzo de una matriz de cuantificación convertida ascendentemente la cual se obtiene al convertir ascendentemente la matriz de cuantificación en el mismo tamaño que un tamaño de bloque que es una unidad de procesamiento en la cual se realiza la descuantificación; cuantificar una imagen para generar datos cuantificados ; y transmitir los datos codificados obtenidos al codificar los datos cuantificados generados, los datos de coeficientes de remplazo obtenidos al codificar el coeficiente de remplazo, y los datos de coeficientes de diferencia de remplazo obtenidos al codificar el coeficiente de diferencia de remplazo establecido.
MX2014010113A 2012-02-29 2013-02-20 Dispositivo y metodo de procesamiento de imagenes. MX339576B (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2012044009 2012-02-29
PCT/JP2013/054126 WO2013129203A1 (ja) 2012-02-29 2013-02-20 画像処理装置および方法

Publications (2)

Publication Number Publication Date
MX2014010113A true MX2014010113A (es) 2014-10-14
MX339576B MX339576B (es) 2016-05-31

Family

ID=49082403

Family Applications (4)

Application Number Title Priority Date Filing Date
MX2014010113A MX339576B (es) 2012-02-29 2013-02-20 Dispositivo y metodo de procesamiento de imagenes.
MX2016006414A MX352223B (es) 2012-02-29 2013-02-20 Dispositivo y método de procesamiento de imágenes.
MX2021015792A MX2021015792A (es) 2012-02-29 2014-08-22 Dispositivo y metodo de procesamiento de imagenes.
MX2021015794A MX2021015794A (es) 2012-02-29 2014-08-22 Dispositivo y metodo de procesamiento de imagenes.

Family Applications After (3)

Application Number Title Priority Date Filing Date
MX2016006414A MX352223B (es) 2012-02-29 2013-02-20 Dispositivo y método de procesamiento de imágenes.
MX2021015792A MX2021015792A (es) 2012-02-29 2014-08-22 Dispositivo y metodo de procesamiento de imagenes.
MX2021015794A MX2021015794A (es) 2012-02-29 2014-08-22 Dispositivo y metodo de procesamiento de imagenes.

Country Status (21)

Country Link
US (13) US9838682B2 (es)
EP (9) EP3432584B1 (es)
JP (14) JP5904266B2 (es)
KR (13) KR102154967B1 (es)
CN (12) CN107277516B (es)
AR (4) AR090124A1 (es)
AU (1) AU2013227608B2 (es)
BR (1) BR112014020801B1 (es)
CA (2) CA3041408C (es)
DK (4) DK3300370T3 (es)
ES (1) ES2725674T3 (es)
HK (1) HK1243572A1 (es)
HU (3) HUE056281T2 (es)
IN (1) IN2015DN00926A (es)
MX (4) MX339576B (es)
MY (6) MY190756A (es)
PL (2) PL3300370T3 (es)
RU (4) RU2582057C2 (es)
TW (4) TWI612797B (es)
WO (4) WO2013129203A1 (es)
ZA (1) ZA201405569B (es)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11272180B2 (en) 2016-07-04 2022-03-08 Sony Corporation Image processing apparatus and method

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112013019937B1 (pt) 2011-02-10 2022-05-03 Velos Media International Limited Dispositivo e método de processamento de imagem
BR122020017515B1 (pt) 2012-01-20 2022-11-22 Electronics And Telecommunications Research Institute Método de decodificação de vídeo
AU2013227608B2 (en) 2012-02-29 2016-07-21 Sony Corporation Image processing device and method
JP6287035B2 (ja) * 2013-10-11 2018-03-07 ソニー株式会社 復号装置および復号方法
GB2520002B (en) * 2013-11-04 2018-04-25 British Broadcasting Corp An improved compression algorithm for video compression codecs
WO2016044842A1 (en) * 2014-09-19 2016-03-24 Futurewei Technologies, Inc. Method and apparatus for non-uniform mapping for quantization matrix coefficients between different sizes of matrices
US10302463B2 (en) * 2015-11-19 2019-05-28 Corning Incorporated Distributed fiber sensors and systems employing multicore optical fibers
FR3047379A1 (fr) * 2016-01-29 2017-08-04 Orange Procede de codage et decodage de donnees, dispositif de codage et decodage de donnees et programmes d'ordinateur correspondants
GB2598255B (en) * 2016-02-17 2022-07-27 V Nova Int Ltd Physical adapter, signal processing equipment, methods and computer programs
EP3510775A4 (en) * 2016-09-13 2020-03-04 MediaTek Inc. METHOD FOR SEVERAL QUANTIFICATION MATRIX SETS FOR VIDEO CODING
US10567768B2 (en) * 2017-04-14 2020-02-18 Apple Inc. Techniques for calculation of quantization matrices in video coding
US11558615B2 (en) * 2018-04-16 2023-01-17 Interdigital Vc Holdings, Inc. Quantization parameter prediction for video encoding and decoding
CN109031440B (zh) * 2018-06-04 2020-02-21 南京航空航天大学 一种基于深度学习的伽马放射性成像方法
JP2020098984A (ja) * 2018-12-17 2020-06-25 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
JP2020098986A (ja) * 2018-12-17 2020-06-25 キヤノン株式会社 画像符号化装置及び画像復号装置及びそれらの制御方法及びプログラム
CN109714132B (zh) * 2019-01-23 2021-04-20 中国电子科技集团公司第二十八研究所 一种用于复杂电磁环境下的多链路抗干扰实时传输方法
EP4231641A1 (en) * 2019-03-10 2023-08-23 HFI Innovation Inc. Mehtod and apparatus of the quantization matrix computation and representation for video coding
CN113994689A (zh) * 2019-03-20 2022-01-28 威诺瓦国际有限公司 信号增强编码中的残差滤波
AU2020256658A1 (en) 2019-04-12 2021-10-28 Beijing Bytedance Network Technology Co., Ltd. Most probable mode list construction for matrix-based intra prediction
CN117499656A (zh) 2019-04-16 2024-02-02 北京字节跳动网络技术有限公司 帧内编解码模式下的矩阵推导
WO2020216302A1 (en) * 2019-04-23 2020-10-29 Beijing Bytedance Network Technology Co., Ltd. Intra Prediction and Residual Coding
CN117097912A (zh) 2019-05-01 2023-11-21 北京字节跳动网络技术有限公司 基于矩阵的帧内预测的上下文编码
KR20220002318A (ko) 2019-05-01 2022-01-06 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 필터링을 이용한 행렬 기반 인트라 예측
WO2020231228A1 (ko) * 2019-05-15 2020-11-19 현대자동차주식회사 영상 복호화 장치에서 이용하는 역양자화장치 및 방법
JP2022533190A (ja) 2019-05-22 2022-07-21 北京字節跳動網絡技術有限公司 アップサンプリングを使用した行列ベースのイントラ予測
CN114051735A (zh) 2019-05-31 2022-02-15 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的一步下采样过程
CN117768652A (zh) 2019-06-05 2024-03-26 北京字节跳动网络技术有限公司 视频处理方法、装置、介质、以及存储比特流的方法
WO2020251279A1 (ko) * 2019-06-11 2020-12-17 엘지전자 주식회사 스케일링 리스트 데이터의 시그널링 기반 비디오 또는 영상 코딩
KR20210149867A (ko) * 2019-06-11 2021-12-09 엘지전자 주식회사 스케일링 리스트 파라미터 기반 비디오 또는 영상 코딩
WO2020251275A1 (ko) * 2019-06-11 2020-12-17 엘지전자 주식회사 스케일링 리스트 기반 비디오 또는 영상 코딩
GB2624122A (en) * 2019-07-05 2024-05-08 V Nova Int Ltd Quantization of residuals in video coding
CN110334316A (zh) * 2019-07-08 2019-10-15 张军 一种多路数据分块浮点量化处理器原型
EP4000265A4 (en) 2019-08-20 2022-10-26 Beijing Bytedance Network Technology Co., Ltd. USING DEFAULT AND CUSTOM SCALING MATRICES
WO2021060846A1 (ko) * 2019-09-23 2021-04-01 엘지전자 주식회사 양자화 매트릭스를 이용한 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
US11206395B2 (en) * 2019-09-24 2021-12-21 Mediatek Inc. Signaling quantization matrix
KR20220082847A (ko) 2019-10-28 2022-06-17 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 색상 성분에 기초한 신택스 시그널링 및 파싱
US11954821B1 (en) 2022-10-27 2024-04-09 Xerox Corporation Altering pixels to scale images

Family Cites Families (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2753091B2 (ja) * 1990-01-09 1998-05-18 株式会社リコー 画像データ伸張回路
KR100287624B1 (ko) * 1992-09-28 2001-04-16 야스카와 히데아키 화상데이타의압축,해제방법및그장치
US6865291B1 (en) * 1996-06-24 2005-03-08 Andrew Michael Zador Method apparatus and system for compressing data that wavelet decomposes by color plane and then divides by magnitude range non-dc terms between a scalar quantizer and a vector quantizer
US8625665B2 (en) * 1996-09-20 2014-01-07 At&T Intellectual Property Ii, L.P. Video coder providing implicit coefficient prediction and scan adaptation for image coding and intra coding of video
US6125201A (en) * 1997-06-25 2000-09-26 Andrew Michael Zador Method, apparatus and system for compressing data
JP2900927B2 (ja) * 1997-10-30 1999-06-02 日本ビクター株式会社 符号化方法及び符号化装置
FI974244A (fi) * 1997-11-14 1999-05-15 Nokia Mobile Phones Ltd Kuvan kompressointimenetelmä
KR100281967B1 (ko) * 1998-08-31 2001-02-15 전주범 공간 상관성을 이용한 영상 부호화 장치 및 그 방법
US6993076B1 (en) * 1999-05-11 2006-01-31 Thomson Licensing S.A. Apparatus and method for deriving an enhanced decoded reduced-resolution video signal from a coded high-definition video signal
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
JP2004147095A (ja) * 2002-10-24 2004-05-20 Canon Inc 復号方法
US7206355B2 (en) * 2002-12-02 2007-04-17 Nortel Networks Limited Digitally convertible radio
KR100584552B1 (ko) * 2003-01-14 2006-05-30 삼성전자주식회사 동영상 부호화 및 복호화 방법과 그 장치
US8081678B2 (en) * 2003-02-21 2011-12-20 Panasonic Corporation Picture coding method and picture decoding method
US7233703B2 (en) * 2003-03-25 2007-06-19 Sharp Laboratories Of America, Inc. Computation-reduced IDCT method for video coding
US20050002337A1 (en) * 2003-07-01 2005-01-06 Nokia Corporation Reducing effects caused by transmission channel errors during a streaming session
US7426308B2 (en) * 2003-07-18 2008-09-16 Microsoft Corporation Intraframe and interframe interlace coding and decoding
WO2005076613A1 (en) * 2004-01-30 2005-08-18 Matsushita Electric Industrial Co., Ltd Picture coding and decoding method, apparatus, and program thereof
JP4679524B2 (ja) * 2004-01-30 2011-04-27 パナソニック株式会社 動画像復号化方法、動画像復号化装置、プログラムおよび記録媒体
US7460596B2 (en) * 2004-04-29 2008-12-02 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
CN100571389C (zh) * 2004-06-29 2009-12-16 奥林巴斯株式会社 用于图像编码/解码和扩展图像压缩解压缩的方法和设备
DE102004059993B4 (de) * 2004-10-15 2006-08-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Erzeugen einer codierten Videosequenz unter Verwendung einer Zwischen-Schicht-Bewegungsdaten-Prädiktion sowie Computerprogramm und computerlesbares Medium
EP1675402A1 (en) * 2004-12-22 2006-06-28 Thomson Licensing Optimisation of a quantisation matrix for image and video coding
JP2007140200A (ja) * 2005-11-18 2007-06-07 Yamaha Corp 語学学習装置およびプログラム
CN101361370B (zh) * 2005-11-30 2010-12-01 株式会社东芝 图像编码/图像解码方法以及图像编码/图像解码装置
KR100763205B1 (ko) * 2006-01-12 2007-10-04 삼성전자주식회사 모션 역변환을 사용하여 모션 예측을 수행하는 방법 및장치
US8711925B2 (en) * 2006-05-05 2014-04-29 Microsoft Corporation Flexible quantization
RU2419855C2 (ru) * 2006-06-26 2011-05-27 Квэлкомм Инкорпорейтед Снижение ошибок в ходе вычисления обратного дискретного косинусного преобразования
WO2008007760A1 (fr) 2006-07-13 2008-01-17 Nec Corporation Dispositif de codage et de décodage, procédé de codage et procédé de décodage
JP4274234B2 (ja) * 2006-12-04 2009-06-03 ソニー株式会社 圧縮データ量制御方法及び画像データ圧縮装置
CN100520732C (zh) * 2006-12-26 2009-07-29 中国电信股份有限公司 性能测试脚本生成方法
JPWO2008120577A1 (ja) * 2007-03-29 2010-07-15 株式会社東芝 画像符号化及び復号化の方法及び装置
RU2009135396A (ru) * 2007-04-16 2011-04-10 Кабусики Кайся Тосиба (Jp) Способ и устройство кодирования и декодирования видеосигнала
US8213498B2 (en) * 2007-05-31 2012-07-03 Qualcomm Incorporated Bitrate reduction techniques for image transcoding
AU2008229753A1 (en) 2007-10-11 2009-04-30 Aristocrat Technologies Australia Pty Limited A gaming system and a method of gaming
KR101365441B1 (ko) * 2007-10-11 2014-02-19 삼성전자주식회사 영상 부호화장치 및 방법과 그 영상 복호화장치 및 방법
DE102007053038A1 (de) * 2007-11-07 2009-05-14 Robert Bosch Gmbh Ansteuerschaltung
KR101375663B1 (ko) * 2007-12-06 2014-04-03 삼성전자주식회사 영상을 계층적으로 부호화/복호화하는 방법 및 장치
KR101426272B1 (ko) * 2008-03-10 2014-08-07 삼성전자주식회사 영상 부호화장치 및 영상 복호화장치
US8238675B2 (en) * 2008-03-24 2012-08-07 Microsoft Corporation Spectral information recovery for compressed image restoration with nonlinear partial differential equation regularization
WO2009157581A1 (ja) * 2008-06-27 2009-12-30 ソニー株式会社 画像処理装置及び画像処理方法
JP5472105B2 (ja) * 2008-06-27 2014-04-16 ソニー株式会社 画像処理装置及び画像処理方法
US8325796B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video coding using adaptive segmentation
CN101771868B (zh) * 2008-12-31 2016-03-02 华为技术有限公司 对图像的量化处理方法及装置
TW201028018A (en) 2009-01-07 2010-07-16 Ind Tech Res Inst Encoder, decoder, encoding method and decoding method
KR101480412B1 (ko) * 2009-01-22 2015-01-09 삼성전자주식회사 영상의 변환 방법 및 장치, 역변환 방법 및 장치
FR2944936A1 (fr) * 2009-04-23 2010-10-29 Thomson Licensing Procedes de codage et de decodage d'un bloc de donnees images, dispositifs de codage et de decodage implementant lesdits procedes
JP2010288166A (ja) * 2009-06-15 2010-12-24 Panasonic Corp 動画像符号化装置、放送波記録装置及び、プログラム
JP2011029956A (ja) * 2009-07-27 2011-02-10 Sony Corp 画像符号化装置および画像符号化方法
JP5233897B2 (ja) * 2009-07-31 2013-07-10 ソニー株式会社 画像処理装置および方法
KR101675116B1 (ko) * 2009-08-06 2016-11-10 삼성전자 주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
KR20110069740A (ko) * 2009-12-17 2011-06-23 에스케이 텔레콤주식회사 영상 부호화/복호화 방법 및 장치
US8588536B2 (en) * 2010-02-22 2013-11-19 Texas Instruments Incorporated Guaranteed-rate tiled image data compression
JP5213896B2 (ja) * 2010-03-03 2013-06-19 日本電信電話株式会社 画像処理方法及び画像処理装置及びプログラム
EP2375745A1 (en) * 2010-04-12 2011-10-12 Panasonic Corporation Efficient storing of picture representation using adaptive non-uniform quantizer
US20130068304A1 (en) * 2010-06-08 2013-03-21 Dic Corporation Sealing material, solar cell module, and light-emitting diode
JP2011259205A (ja) * 2010-06-09 2011-12-22 Sony Corp 画像復号化装置と画像符号化装置およびその方法とプログラム
US9350997B2 (en) * 2010-09-28 2016-05-24 Samsung Electronics Co., Ltd. Video encoding method and device and decoding method and device
US9167252B2 (en) * 2010-12-01 2015-10-20 Texas Instruments Incorporated Quantization matrix compression in video coding
CN101984669A (zh) * 2010-12-10 2011-03-09 河海大学 一种帧层次自适应维纳插值滤波器的迭代方法
BR112013019937B1 (pt) 2011-02-10 2022-05-03 Velos Media International Limited Dispositivo e método de processamento de imagem
KR20120098500A (ko) * 2011-02-25 2012-09-05 삼성전자주식회사 영상의 변환 및 역변환 방법, 및 이를 이용한 영상의 부호화 및 복호화 장치
CN102281075B (zh) * 2011-03-21 2013-03-06 中国人民解放军信息工程大学 孔径为4的六边形格网层次编码、运算与索引方法
CN103535037B (zh) * 2011-05-20 2017-06-09 索尼公司 图像处理装置和图像处理方法
US9143802B2 (en) * 2011-10-31 2015-09-22 Qualcomm Incorporated Fragmented parameter set for video coding
US10277915B2 (en) * 2011-11-07 2019-04-30 Qualcomm Incorporated Signaling quantization matrices for video coding
JP2013129616A (ja) 2011-12-21 2013-07-04 Shikoku Chem Corp 臭素化剤及びその利用
BR122020017515B1 (pt) * 2012-01-20 2022-11-22 Electronics And Telecommunications Research Institute Método de decodificação de vídeo
AU2013227608B2 (en) 2012-02-29 2016-07-21 Sony Corporation Image processing device and method
WO2013154028A1 (ja) * 2012-04-13 2013-10-17 ソニー株式会社 画像処理装置および方法
JP5559372B2 (ja) 2013-02-01 2014-07-23 キヤノン株式会社 画像形成装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11272180B2 (en) 2016-07-04 2022-03-08 Sony Corporation Image processing apparatus and method

Also Published As

Publication number Publication date
US20170214919A1 (en) 2017-07-27
US9967566B2 (en) 2018-05-08
US10264258B2 (en) 2019-04-16
JP5904266B2 (ja) 2016-04-13
KR20200013789A (ko) 2020-02-07
EP3432583A1 (en) 2019-01-23
US9955164B2 (en) 2018-04-24
CN110913224A (zh) 2020-03-24
EP3709652A1 (en) 2020-09-16
CN110913224B (zh) 2022-05-03
KR102153271B1 (ko) 2020-09-07
CN109803149B (zh) 2021-10-01
KR20200008018A (ko) 2020-01-22
MX2021015792A (es) 2022-06-14
BR112014020801B1 (pt) 2018-09-25
JP6075487B2 (ja) 2017-02-08
AU2013227608A1 (en) 2014-08-21
JP5904267B2 (ja) 2016-04-13
EP3432582A1 (en) 2019-01-23
CA2862282C (en) 2021-03-30
KR102154964B1 (ko) 2020-09-10
CN107592536B (zh) 2020-02-11
TWI568246B (zh) 2017-01-21
JP2018110430A (ja) 2018-07-12
EP3282708A1 (en) 2018-02-14
EP3432584B1 (en) 2020-05-13
CN104170391A (zh) 2014-11-26
CN109379589B (zh) 2021-06-15
CN109803149A (zh) 2019-05-24
US20170142413A1 (en) 2017-05-18
HUE056281T2 (hu) 2022-02-28
HUE043260T2 (hu) 2019-08-28
CN107277516A (zh) 2017-10-20
EP2822275B1 (en) 2018-09-12
MX2021015794A (es) 2022-06-14
JP6299890B2 (ja) 2018-03-28
PL3432584T3 (pl) 2020-09-07
US20150023412A1 (en) 2015-01-22
US20150010075A1 (en) 2015-01-08
EP3432583B1 (en) 2020-04-01
CA3041408C (en) 2021-06-08
JP6075486B2 (ja) 2017-02-08
RU2718415C2 (ru) 2020-04-02
JP2016131384A (ja) 2016-07-21
JP2017085640A (ja) 2017-05-18
KR20200008662A (ko) 2020-01-28
WO2013129203A1 (ja) 2013-09-06
RU2597509C2 (ru) 2016-09-10
US20180098071A1 (en) 2018-04-05
JP6075485B2 (ja) 2017-02-08
MX339576B (es) 2016-05-31
EP3300370A1 (en) 2018-03-28
US10225553B2 (en) 2019-03-05
JP2017085639A (ja) 2017-05-18
RU2016120989A (ru) 2017-11-28
RU2016120989A3 (es) 2019-10-23
EP2822275A1 (en) 2015-01-07
AR090124A1 (es) 2014-10-22
CN107743240B (zh) 2020-03-17
US9686541B2 (en) 2017-06-20
US10349053B2 (en) 2019-07-09
KR102153269B1 (ko) 2020-09-07
CN104137552A (zh) 2014-11-05
JP5904269B2 (ja) 2016-04-13
CN104126304A (zh) 2014-10-29
TWI612797B (zh) 2018-01-21
KR102074600B1 (ko) 2020-02-06
CN104137552B (zh) 2019-01-11
CA3041408A1 (en) 2013-09-06
MY172126A (en) 2019-11-14
TW201519638A (zh) 2015-05-16
TW201336315A (zh) 2013-09-01
KR102154966B1 (ko) 2020-09-10
US10404985B2 (en) 2019-09-03
EP3282708B1 (en) 2019-04-03
KR20200014435A (ko) 2020-02-10
CN113286155A (zh) 2021-08-20
WO2013129616A1 (ja) 2013-09-06
EP3300370B1 (en) 2019-04-03
US20180020219A1 (en) 2018-01-18
RU2020107177A (ru) 2021-08-17
JP2016105658A (ja) 2016-06-09
KR20200009125A (ko) 2020-01-29
KR20200008013A (ko) 2020-01-22
MY190758A (en) 2022-05-12
EP3694214A1 (en) 2020-08-12
KR102154968B1 (ko) 2020-09-10
HK1243572A1 (zh) 2018-07-13
US20190174129A1 (en) 2019-06-06
CN107277516B (zh) 2020-02-18
CN109379589A (zh) 2019-02-22
JP2020036372A (ja) 2020-03-05
BR112014020801A2 (es) 2017-06-20
JP2018110431A (ja) 2018-07-12
JPWO2013129616A1 (ja) 2015-07-30
KR102154965B1 (ko) 2020-09-10
KR102074602B1 (ko) 2020-02-06
CN113286155B (zh) 2022-12-13
KR102154967B1 (ko) 2020-09-10
MY195141A (en) 2023-01-11
WO2013129618A1 (ja) 2013-09-06
US20180103254A1 (en) 2018-04-12
JP2019071653A (ja) 2019-05-09
TWI612798B (zh) 2018-01-21
EP3694214B1 (en) 2021-08-25
MY195140A (en) 2023-01-11
KR20180017209A (ko) 2018-02-20
MY176387A (en) 2020-08-05
EP3930334A1 (en) 2021-12-29
JPWO2013129618A1 (ja) 2015-07-30
US10277898B2 (en) 2019-04-30
CN104126306B (zh) 2017-09-19
RU2582057C2 (ru) 2016-04-20
DK3300370T3 (da) 2019-05-20
RU2014134533A (ru) 2016-03-20
KR102074601B1 (ko) 2020-02-06
JP6635184B2 (ja) 2020-01-22
JP2016131382A (ja) 2016-07-21
JP5904268B2 (ja) 2016-04-13
KR102090344B1 (ko) 2020-03-17
JPWO2013129617A1 (ja) 2015-07-30
KR20200103875A (ko) 2020-09-02
MY190756A (en) 2022-05-12
TW201715884A (zh) 2017-05-01
AR112716A2 (es) 2019-12-04
WO2013129617A1 (ja) 2013-09-06
CN104126304B (zh) 2017-11-21
KR102248057B1 (ko) 2021-05-04
CN107743240A (zh) 2018-02-27
US20140369408A1 (en) 2014-12-18
TWI519133B (zh) 2016-01-21
JP6465227B2 (ja) 2019-02-06
JPWO2013129203A1 (ja) 2015-07-30
US11539954B2 (en) 2022-12-27
TW201715885A (zh) 2017-05-01
KR102153270B1 (ko) 2020-09-07
DK3694214T3 (da) 2021-09-27
US20140369407A1 (en) 2014-12-18
US10574990B2 (en) 2020-02-25
KR20180017210A (ko) 2018-02-20
JP2016131383A (ja) 2016-07-21
EP3709652B1 (en) 2021-09-22
CN104126306A (zh) 2014-10-29
RU2015103531A (ru) 2015-06-20
US9648316B2 (en) 2017-05-09
EP3432584A1 (en) 2019-01-23
AR112641A2 (es) 2019-11-20
EP3432582B1 (en) 2020-04-01
CN107592536A (zh) 2018-01-16
MX352223B (es) 2017-11-15
KR20200010571A (ko) 2020-01-30
DK3432584T3 (da) 2020-06-15
JP6465226B2 (ja) 2019-02-06
DK3282708T3 (da) 2019-05-20
ES2725674T3 (es) 2019-09-26
KR20180015756A (ko) 2018-02-13
US20200045314A1 (en) 2020-02-06
CN104170391B (zh) 2018-06-29
HUE049148T2 (hu) 2020-09-28
US20180176566A1 (en) 2018-06-21
BR112014020801A8 (pt) 2018-02-14
EP2822275A4 (en) 2015-12-02
IN2015DN00926A (es) 2015-07-10
KR20140143138A (ko) 2014-12-15
US20190260993A1 (en) 2019-08-22
JP6299889B2 (ja) 2018-03-28
ZA201405569B (en) 2014-11-26
CN107257491A (zh) 2017-10-17
AU2013227608B2 (en) 2016-07-21
AR112588A2 (es) 2019-11-13
CN107257491B (zh) 2019-10-18
KR20200008015A (ko) 2020-01-22
PL3300370T3 (pl) 2019-07-31
CA2862282A1 (en) 2013-09-06
JP6075484B2 (ja) 2017-02-08
US9838682B2 (en) 2017-12-05
US9813714B2 (en) 2017-11-07

Similar Documents

Publication Publication Date Title
JP6465226B2 (ja) 画像処理装置および方法、記録媒体、並びに、プログラム
AU2020205233B2 (en) Image processing device and method

Legal Events

Date Code Title Description
FG Grant or registration