MX2014007974A - Dispositivo y metodo de procesamiento de imagenes. - Google Patents

Dispositivo y metodo de procesamiento de imagenes.

Info

Publication number
MX2014007974A
MX2014007974A MX2014007974A MX2014007974A MX2014007974A MX 2014007974 A MX2014007974 A MX 2014007974A MX 2014007974 A MX2014007974 A MX 2014007974A MX 2014007974 A MX2014007974 A MX 2014007974A MX 2014007974 A MX2014007974 A MX 2014007974A
Authority
MX
Mexico
Prior art keywords
unit
image
adaptive compensation
coding unit
compensation
Prior art date
Application number
MX2014007974A
Other languages
English (en)
Other versions
MX346508B (es
Inventor
Hironari Sakurai
Ohji Nakagami
Takuya Kitamura
Yoichi Yagasaki
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of MX2014007974A publication Critical patent/MX2014007974A/es
Publication of MX346508B publication Critical patent/MX346508B/es

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

La presente descripción se refiere a un dispositivo y método de procesamiento de imágenes que hacen posible mejorar la eficiencia del procesamiento en codificación y descodificación. El tipo E0 en una LCU (115) y un coeficiente de la misma se determinan por el lado de codificación. El coeficiente tipo E0 se envía al lado de descodificación cuando el coeficiente ya se encuentra en LCU (III), y se almacena en una memoria intermedia de EO de un filtro de compensación adaptable en el lado de descodificación. Por lo tanto, con respecto a la LCU (115) en el lado de descodificación, el coeficiente tipo E0 puede copiarse de la memoria intermedia de EO y utilizarse sin que se envíe. De esta manera, el parámetro del filtro de compensación adaptable que se transfirió de manera convencional de proceso simple en el encabezado de una trama se envía secuencialmente en el encabezado de la LCU para cada LCU. La presente descripción puede aplicarse, por ejemplo, a un dispositivo de procesamiento de imágenes.

Description

DISPOSITIVO Y MÉTODO DE PROCESAMIENTO DE IMÁGENES Campo Técnico La presente descripción se refiere a dispositivos y métodos de procesamiento de imágenes, y más específicamente a un dispositivo y método de procesamiento de imágenes los cuales permiten una mejora en la eficiencia de codificación o descodificación .
Técnica Antecedente En años recientes, han entrado en uso ampliamente difundido dispositivos que manejan información de imagen en formato digital y, en este caso, utilizan redundancia específica para la información de imagen para lograr la compresión y codificación de imágenes al utilizar un esquema de codificación para compresión basada en una transformada ortogonal tal como una transformada de coseno discreto y compensación de movimiento para transmitir de manera eficiente y acumular información. Ejemplos de este esquema de codificación incluyen MPEG (Grupo de Expertos de Imágenes en Movimiento), y H.264 y MPEG-4 Parte 10 (Codificación de Video Avanzada, en adelante denominada como H.264/AVC).
Además, la estandarización de un esquema de codificación llamado HEVC (Codificación de Video de Alta Eficiencia) actualmente se lleva a cabo por JCTVC (Equipo de Colaboración Conjunta - Codificación de Video), el cual es una organización de estandarización conjunta de la ITU-T y el ISO/IEC, para lograr una eficiencia de codificación mucho mejor que H.264/AVC (véase por ejemplo, NPL 1).
En el presente proyecto de trabajo de HEVC, un filtro de desbloqueo, un filtro de bucle adaptable, y filtro de compensación adaptable (Compensación Adaptable de Muestra: SAO) se emplean como filtros en bucle.
En HEVC, parámetros del filtro de bucle adaptable se envían colectivamente hacia el lado del descodificador en grupos de una trama. En contraste, NPL 2 ha propuesto que un proceso de filtración de bucle adaptable se realice en unidades de una unidad de codificación más grande, o LCU.
Lista de Citas Literatura Que No Es Patente NPL 1: Thomas Wiegand, Woo-Jin Han, Benjamín Bross, Jens-Rainer Ohm, Gary J. Sullivan, "Proyecto de Trabajo 4 de Video de Codificación de Alta Eficiencia", JCTVC-F803, Equipo Conjunto de Colaboración sobre Codificación de Video (JCT-VC) de la ITU-T SG16 P3 e ISO/IEC JTC1/SC29/ G11 Sexta Reunión: Torino, IT, 14-22 de julio de 2011.
NPL 2: A. Fuldseth, Cisco Systems, G. bjontegaard, Cisco Systems, "ALF mejorada con baja latencia y complejidad reducida", JCTVC-G499, Equipo Conjunto de Colaboración sobre Codificación de Video (JCT-VC) de la UIT-T SG16 P3 e ISO/IEC JTC1/SC29/WG11 Séptima Reunión: Ginebra, CH, 21-30 noviembre de 2011.
Compendio de la Invención Problema Técnico En HEVC, además, el filtro de compensación adaptable se adapta a regiones denominadas como regiones de cuadri-árbol, las cuales se definen de forma única para el filtro de compensación adaptable. Además, los parámetros del filtro de compensación adaptable se definen colectivamente en sao_param() en grupos de una trama. sao_param() se coloca antes de los datos (información de video) en una corriente codificada. En el lado del codificador, por lo tanto, es necesario mantener los datos para una trama en una memoria intermedia hasta la finalización del proceso de filtración de compensación adaptable, la determinación de los coeficientes del filtro de compensación adaptable, y la creación de sao_param() .
La presente descripción se ha hecho en vista de tal situación, y permite la mejora en la eficiencia de procesamiento en la codificación o descodificación.
Solución al Problema Un dispositivo de procesamiento de imágenes de un primer aspecto de la presente descripción incluye una unidad de adquisición que adquiere los parámetros de un filtro de compensación adaptable en unidades de una unidad de codificación más grande de una corriente codificada en la cual los parámetros del filtro de compensación adaptable se establecen utilizando la unidad de codificación más grande como una unidad de transmisión; una unidad de descodificación que realiza un proceso de descodificación en la corriente codificada y que genera una imagen; y una unidad de filtro de compensación adaptable que realiza filtración de compensación adaptable sobre la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los parámetros adquiridos por la unidad de adquisición.
Los parámetros del filtro de compensación adaptable pueden incluir un tipo de filtro de compensación adaptable y un valor de compensación.
El dispositivo de procesamiento de imágenes además puede incluir una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo sobre la imagen generada por la unidad de descodificación, y la unidad de filtro de compensación adaptable puede realizarse filtración de compensación adaptable sobre una imagen en la cual la unidad de filtro de desbloqueo ha realizado la filtración de desbloqueo .
La unidad de adquisición puede adquirir, a partir de la corriente codificada, datos de identificación que identifican un parámetro de una unidad de codificación más grande previa en la cual se ha realizado una filtración de compensación adaptable antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable puede realizar la filtración de compensación adaptable sobre la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición.
La unidad de adquisición puede adquirir, a partir de la corriente codificada, los datos de identificación que identifican si se desea o no utilizar un parámetro de una unidad de codificación más grande previa en la cual se ha realizado la filtración de compensación adaptable antes de una unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable puede realizar la filtración de compensación adaptable sobre la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición.
La unidad de adquisición puede adquirir, a partir de la corriente codificada, los datos de identificación que identifican si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual se ha realizado la filtración de compensación adaptable antes de una unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable puede realizar la filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición.
La unidad de adquisición puede adquirir, a partir de la corriente codificada, datos de identificación que especifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, desde dentro de unidades de codificación más grandes previas en las cuales se ha realizado la filtración de compensación adaptable antes de la unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable puede realizar la filtración de compensación adaptable sobre la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición.
Los parámetros del filtro de compensación adaptable se transmiten al momento del inicio de una unidad de codificación más grande.
La unidad de descodificación puede realizar un proceso de descodificación en unidades cada una teniendo una estructura jerárquica.
Un método de procesamiento de imágenes del primer aspecto de la presente descripción se realiza por un dispositivo de procesamiento de imágenes, que incluye adquirir los parámetros de un filtro de compensación adaptable en unidades de una unidad de codificación más grande de una corriente codificada en la cual se establecen los parámetros del filtro de compensación adaptable utilizando la unidad de codificación más grande como una unidad de transmisión; realizar un proceso de descodificación en la corriente codificada para generar una imagen; y realizar la filtración de compensación adaptable sobre la imagen generada en unidades de una unidad de codificación más grande utilizando los parámetros adquiridos.
Un dispositivo de procesamiento de imágenes de un segundo aspecto de la presente descripción incluye una unidad de establecimiento que establece los parámetros de un filtro de compensación adaptable utilizando una unidad de codificación más grande como una unidad de transmisión; una unidad de filtro de compensación adaptable que realiza la filtración de compensación adaptable sobre una imagen que se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos por la unidad de establecimiento; una unidad de codificación que realiza un proceso de codificación en una imagen en la cual se ha realizado la filtración de compensación adaptable de la unidad de filtro de compensación adaptable, y que genera una corriente codificada utilizando la imagen; y una unidad de transmisión que transmite los parámetros establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación.
Los parámetros del filtro de compensación adaptable pueden incluir un tipo de filtro de compensación adaptable y un valor de compensación.
El dispositivo de procesamiento de imágenes además puede incluir una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo en una imagen descodificada localmente, y la unidad de filtro de compensación adaptable puede realizar filtración de compensación adaptable en una imagen en la cual se ha realizado la filtración de desbloqueo de la unidad de filtro de desbloqueo.
La unidad de establecimiento puede establecer los datos de identificación que identifica un parámetro de una unidad de codificación más grande previa en la cual se ha realizado la filtración de compensación adaptable antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual, y la unidad de transmisión puede transmitir los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación.
La unidad de establecimiento puede establecer los datos de identificación que identifican si se utiliza o no un parámetro de una unidad de codificación más grande previa en la cual se ha realizado filtración de compensación adaptable antes de una unidad de codificación más grande actual, y la unidad de transmisión puede transmitir los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación .
La unidad de establecimiento puede establecer los datos de identificación que identifican si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual se ha realizado la filtración de compensación adaptable antes de una unidad de codificación más grande actual, y la unidad de transmisión puede transmitir los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación.
La unidad de establecimiento puede establecer los datos de identificación que especifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, desde el interior de las unidades de codificación más grandes previas en las cuales se ha realizado la filtración de compensación adaptable antes de la unidad de codificación más grande actual, y la unidad de transmisión puede transmitir los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación.
La unidad de transmisión puede transmitir los parámetros del filtro de compensación adaptable establecidos por la unidad de establecimiento al momento del inicio de una unidad de codificación más grande.
La unidad de codificación puede realizar un proceso de codificación en unidades cada una teniendo una estructura j erárquica .
Un método de procesamiento de imágenes del segundo aspecto de la presente descripción se realiza por un dispositivo de procesamiento de imágenes, que incluye establecer los parámetros de un filtro de compensación adaptable utilizando una unidad de codificación más grande como una unidad de transmisión; realizar la filtración de compensación adaptable en una imagen que se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos; realizar un proceso de codificación en una imagen en la cual se ha realizado filtración de compensación adaptable, para generar una corriente codificada utilizando la imagen; y transmitir los parámetros establecidos y la corriente codificada generada.
En el primer aspecto de la presente descripción, los parámetros de un filtro de compensación adaptable se adquieren en unidades de una unidad de codificación más grande de una corriente codificada en la cual los parámetros del filtro de compensación adaptable se establecen utilizando la unidad de codificación más grande como una unidad de transmisión; y un proceso de descodificación se realiza en la corriente codificada para generar una imagen. Después, la filtración de compensación adaptable se realiza en la imagen generada en unidades de una unidad de codificación más grande utilizando los parámetros adquiridos.
En el segundo aspecto de la presente descripción, los parámetros de un filtro de compensación adaptable se establecen utilizando una unidad de codificación más grande como una unidad de transmisión; y la filtración de compensación adaptable se realiza en una imagen la cual se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos. Después, un proceso de codificación se realiza en una imagen en la cual se ha realizado filtración de compensación adaptable, para generar una corriente codificada utilizando la imagen; y se transmiten los parámetros establecidos y la corriente codificada generada.
Tenga en cuenta que cada uno de los dispositivos de procesamiento de imágenes descritos anteriormente puede ser un dispositivo independiente o un bloque interno incluido en un único dispositivo de codificación de imágenes o el dispositivo de descodificación de imágenes.
De acuerdo con el primer aspecto de la presente descripción, es posible descodificar una imagen. En particular, es posible mejorar la eficiencia de procesamiento .
De acuerdo con el segundo aspecto de la presente divulgación, es posible codificar una imagen. En particular, es posible mejorar la eficiencia de procesamiento.
BREVE DESCRIPCIÓN DE LOS DIBUJOS La Figura 1 es un diagrama de bloque que ilustra una configuración ejemplar principal de un dispositivo de codificación de imágenes.
La Figura 2 es un diagrama de flujo que representa un ejemplo del flujo de un proceso de codificación.
La Figura 3 es un diagrama de bloque que ilustra una configuración ejemplar principal de un dispositivo de descodificación de imágenes.
La Figura 4 es un diagrama de flujo que representa un ejemplo del flujo de un proceso de descodificación.
La Figura 5 es un diagrama que representa una estructura de cuadri-árbol en el esquema de HEVC.
La Figura 6 es un diagrama que representa la compensación de banda.
La Figura 7 es un diagrama que representa la compensación de borde.
La Figura 8 es un diagrama que ilustra las reglas de clasificación para la compensación de borde.
La Figura 9 es un diagrama que representa una visión general de la tecnología actual.
La Figura 10 es un diagrama que representa las ventajas de la presente tecnología.
La Figura 11 es un diagrama que ilustra un ejemplo de la sintaxis de sao_param().
La Figura 12 es un diagrama que representa sao_type_idx .
La Figura 13 es un diagrama de bloque que ilustra un ejemplo de configuración de un filtro de compensación adaptable al cual se aplica la presente descripción.
La Figura 14 es un diagrama de flujo que representa un proceso de filtración de compensación adaptable.
La Figura 15 es un diagrama de flujo que representa un proceso de escritura de coeficiente.
La Figura 16 es un diagrama que representa el proceso de escritura de coeficiente.
La Figura 17 es un diagrama de bloque que ilustra una configuración ejemplar de un filtro de compensación adaptable al cual se aplica la presente descripción.
La Figura 18 es un diagrama de flujo que representa un proceso de filtración de compensación adaptable.
La Figura 19 es un diagrama de flujo que representa un proceso de lectura de coeficiente.
La Figura 20 es un diagrama que representa el proceso de lectura de coeficiente.
La Figura 21 es un diagrama que ilustra un ejemplo de un esquema de codificación de imágenes de varias vistas.
La Figura 22 es un diagrama que ilustra una configuración ejemplar principal de un dispositivo de codificación de imágenes de varias vistas al cual se aplica la presente tecnología.
La Figura 23 es un diagrama que ilustra una configuración ejemplar principal de un dispositivo de descodificación de imágenes de varias vistas al cual se aplica la presente tecnología.
La Figura 24 es un diagrama que ilustra un ejemplo de un esquema de codificación de imágenes estratificado.
La Figura 25 es un diagrama que ilustra una configuración ejemplar principal de un dispositivo de codificación de imágenes estratificado al cual se aplica la presente tecnología.
La Figura 26 es un diagrama gue ilustra una configuración ejemplar principal de un dispositivo de descodificación de imágenes estratificada al cual se aplica la presente tecnología.
La Figura 27 es un diagrama de blogue que ilustra una configuración ejemplar principal de una computadora.
La Figura 28 es un diagrama de blogue que ilustra un ejemplo de una configuración esquemática de un aparato de televisión .
La Figura 29 es un diagrama de bloque que ilustra un ejemplo de una configuración esquemática de un teléfono móvil .
La Figura 30 es un diagrama de bloque que ilustra un ejemplo de una configuración esquemática de un aparato de grabación/reproducción .
La Figura 31 es un diagrama de bloque que ilustra un ejemplo de una configuración esquemática de un aparato de captura de imágenes .
La Figura 32 es un diagrama de bloque que ilustra un ejemplo del uso de la codificación escalable.
La Figura 33 es un diagrama de bloque que ilustra otro ejemplo del uso de la codificación escalable.
La Figura 34 es un diagrama de bloque que ilustra aún otro ejemplo del uso de la codificación escalable.
Descripción de las Modalidades En lo sucesivo se describirán los modos para llevar a cabo la presente descripción (denominadas en adelante como las modalidades) . Tenga en cuenta que la descripción se dará en el siguiente orden. 1. Visión general de dispositivos y operaciones 2. Explicación de las técnicas relacionadas con el arte 3. Primera modalidad (dispositivo de procesamiento de imágenes) 4. Segunda modalidad (dispositivo de codificación de imágenes de varias vistas/de descodificación de imágenes de varias vistas) 5. Tercera modalidad (dispositivo de codificación de imágenes estratificado/de descodificación de imágenes estratificado) 6. Cuarta modalidad (computadora) 7. Aplicaciones ejemplares 8. Aplicaciones ejemplares de codificación escalable <1. Visión general de Dispositivos y Operaciones> Configuración ejemplar de dispositivo de codificación de imágenes La Figura 1 ilustra una configuración de una modalidad de un dispositivo de codificación de imágenes que sirve como dispositivo de procesamiento de imágenes al cual se aplica la presente descripción.
Un dispositivo 11 de codificación de imágenes ilustrado en la Figura 1 codifica los datos de imagen utilizando un proceso de predicción. Ejemplos de un esquema de codificación, como se utiliza aquí, incluyen el esquema de HEVC (Codificación de Video de Alta Eficiencia) . En el esquema de HEVC, una unidad de codificación CU, una unidad de codificación más grande LCU, una unidad de codificación más pequeña SCU, una unidad de predicción PU, y una unidad de transformada TU se especifican, y la codificación/descodificación se realiza en unidades cada una teniendo una estructura jerárquica.
En el ejemplo de la Figura 1, el dispositivo 11 de codificación de imágenes incluye una unidad 21 de conversión de A/D (Análogo/Digital), una memoria intermedia 22 de reorganización de pantalla, una unidad 23 de cálculo, una unidad 24 de transformada ortogonal, una unidad 25 de cuantificación, una unidad 26 de codificación sin pérdidas, y una memoria intermedia 27 de acumulación. El dispositivo 11 de codificación de imágenes además incluye una unidad 28 de descuantificación, una unidad 29 de transformada ortogonal inversa, una unidad 30 de cálculo, un filtro 31 de desbloqueo, una memoria 32 de tramas, una unidad 33 de selección, una unidad 34 de intra-predicción, una unidad 35 de predicción de movimiento y compensación, una unidad 36 de selección de imagen de predicción, y una unidad 37 de control de proporción.
El dispositivo 11 de codificación de imágenes además incluye un filtro 41 de compensación adaptable y un filtro 42 de bucle adaptable entre el filtro 31 de desbloqueo y la memoria 32 de tramas.
La unidad 21 de conversión de A/D realiza la conversión de A/D sobre los datos de imagen de entrada y produce los datos de imagen resultantes en la memoria intermedia 22 de reorganización de pantalla para su almacenamiento .
La memoria intermedia 22 de reorganización de pantalla reorganiza una imagen almacenada que tiene tramas dispuestas en orden de visualización en una imagen que tiene tramas dispuestas en orden para codificar de acuerdo con una estructura de GOP (Grupo de Imagen) . La memoria intermedia 22 de reorganización de pantalla proporciona una imagen en la cual se han reorganizado las tramas en la unidad 23 de cálculo. La memoria intermedia 22 de reorganización de pantalla también proporciona la imagen en la cual se han reorganizado las tramas en la unidad 34 de intra-predicción y la unidad 35 de predicción de movimiento y de compensación-.
La unidad 23 de cálculo sustrae una imagen de predicción que se suministrará desde la unidad 34 de intra-predicción o la unidad 35 de predicción de movimiento y de compensación a través de la unidad 36 de selección de imagen de predicción de la imagen leída de la memoria intermedia 22 de reorganización de pantalla, y produce la información de diferencia sobre la diferencia entre ambas en la unidad 24 de transformada ortogonal.
Por ejemplo, en el caso de una imagen gue será intra-codificada, la unidad 23 de cálculo sustrae una imagen de predicción suministrada desde la unidad 34 de intra-predicción de la imagen leída de la memoria intermedia 22 de reorganización de pantalla. Además, por ejemplo, en el caso de una imagen que será inter-codificada, la unidad 23 de cálculo sustrae una imagen de predicción suministrada desde la unidad 35 de predicción de movimiento y de compensación de la imagen leída de la memoria intermedia 22 de reorganización de pantalla.
La unidad 24 de transformada ortogonal realiza una transformada ortogonal, tal como una transformada de coseno discreta o una transformada de Karhunen-Loéve, sobre la información de diferencia suministrada desde la unidad 23 de cálculo, y suministra los coeficientes de transformada obtenidos a la unidad 25 de cuantificación .
La unidad 25 de cuantificación cuantifica los coeficientes de transformada producidos de la unidad 24 de transformada ortogonal. La unidad 25 de cuantificación suministra la coeficientes de transformada cuantificados a la unidad 26 de codificación sin pérdidas.
La unidad 26 de codificación sin pérdidas realiza codificación sin pérdidas, tal como codificación de longitud variable o codificación aritmética, en los coeficientes de transformada cuantificados .
La unidad 26 de codificación sin pérdidas adquiere parámetros tales como información que indica un modo de intra-predicción desde la unidad 34 de intra-predicción, y adquiere parámetros tales como información que indica un modo de inter-predicción e información de vector de movimiento de la unidad 35 de predicción de movimiento y de compensación.
La unidad 26 de codificación sin pérdidas codifica los coeficientes de transformada cuantificados y los parámetros adquiridos respectivos (elementos de sintaxis) , y organiza (multiplexa) los coeficientes de transformada cuantificados codificados y los parámetros en parte de la información de encabezado de los datos codificados. La unidad 26 de codificación sin pérdidas suministra los datos codificados obtenidos al codificar la memoria intermedia 27 de acumulación para la acumulación.
En la unidad 26 de codificación sin pérdidas, por ejemplo, se realiza un proceso de codificación sin pérdidas, tal como codificación de longitud variable o codificación aritmética. Ejemplos de codificación de longitud variable incluyen CAVLC (Codificación de Longitud Variable de Contexto-Adaptable). Ejemplos de codificación aritmética incluyen CABAC (Codificación Aritmética Binaria de Contexto-Adaptable) .
La memoria intermedia 27 de acumulación retiene temporalmente la corriente codificada (datos) suministrada desde la unidad 26 de codificación sin pérdidas, y produce la corriente codificada (datos) en un dispositivo corriente abajo no ilustrado tal como un dispositivo de grabación y una trayectoria de transmisión en cierto momento como imagen codificada la cual se ha sometido a codificación. Es decir, la memoria intermedia 27 de acumulación también sirve como una unidad de transmisión que transmite corrientes codificadas .
Además, los coeficientes de transformada cuantificados por la unidad 25 de cuantificación también se suministran a la unidad 28 de descuantificación . La unidad 28 de descuantificación descuantifica los coeficientes de transformada cuantificados utilizando un método que corresponde al método de cuantificación realizado por la unidad 25 de cuantificación . La unidad 28 de descuantificación suministra los coeficientes de transformada obtenidos a la unidad 29 de transformada ortogonal inversa.
La unidad 29 de transformada ortogonal inversa realiza una transformada ortogonal inversa sobre los coeficientes de transformada suministrados utilizando un método que corresponde al proceso de transformada ortogonal realizado por la unidad 24 de transformada ortogonal. La salida sometida a la transformada ortogonal inversa (información de diferencia restaurada) se suministra a la unidad 30 de cálculo.
La unidad 30 de cálculo agrega la imagen de predicción suministrada desde la unidad 34 de intra-predicción o la unidad 35 de predicción de movimiento y de compensación a través de la unidad 36 de selección de imagen de predicción hasta el resultado de la transformada ortogonal inversa suministrada desde la unidad 29 de transformada ortogonal inversa, es decir, a la información de diferencia restaurada, para obtener una imagen descodificada localmente (imagen descodificada) .
Por ejemplo, si la información de diferencia corresponde a una imagen que será intra-codificada , la unidad 30 de cálculo agrega la imagen de predicción suministrada desde la unidad 34 de intra-predicción hasta la información de diferencia. Además, por ejemplo, si la información de diferencia corresponde a una imagen que será Ínter- codificada, la unidad 30 de cálculo agrega la imagen de predicción suministrada desde la unidad 35 de predicción de movimiento y de compensación hasta la información de diferencia .
La imagen descodificada, la cual es el resultado de la adición, se suministra al filtro 31 de desbloqueo y la memoria 32 de tramas.
El filtro 31 de desbloqueo realiza adecuadamente un proceso de filtración de desbloqueo para eliminar la distorsión de bloque de la imagen descodificada . El filtro 31 de desbloqueo suministra un resultado del proceso de filtración al filtro 41 de compensación adaptable.
El filtro 41 de compensación adaptable realiza un proceso de filtración de compensación (SAO: Compensación adaptable de muestra) en la imagen filtrada por el filtro 31 de desbloqueo para eliminar principalmente el timbre.
Existen nueve tipos de filtros de compensación en total: dos tipos de compensación de banda, seis tipos de compensación de borde y sin compensación. El filtro 41 de compensación adaptable determina una clase (tipo) de filtro de compensación y una compensación (valor) para cada LCU, la cual es la unidad de codificación más grande, y realiza un proceso de filtración en la imagen filtrada por el filtro 31 de desbloqueo utilizando el tipo y compensación determinados. En el filtro 41 de compensación, la compensación descrita en lo anterior es el coeficiente del filtro. La compensación en adelante también se denomina como el coeficiente, de ser necesario .
Tenga en cuenta que, a medida que se describan los detalles del filtro 41 de compensación adaptable a continuación con referencia a la Figura 13, el filtro 41 de compensación adaptable tiene una memoria intermedia para almacenar coeficientes. Si la memoria intermedia ha almacenado en la misma el mismo coeficiente que un coeficiente determinado para cada LCU, el filtro 41 de compensación adaptable suministra un indicador que señala el almacenamiento del coeficiente, un índice que indica la posición de almacenamiento del coeficiente en la memoria intermedia, y la información que indica el tipo a la unidad 26 de codificación sin pérdidas para codificarlos.
Por otra parte, si la memoria intermedia no ha almacenado en la misma el mismo coeficiente que un coeficiente determinado para cada LCU, el filtro 41 de compensación adaptable suministra un indicador que señala que no existe almacenamiento del coeficiente, el coeficiente, y la información que indica el tipo a la unidad 26 de codificación sin pérdidas para codificarlos.
El filtro 41 de compensación adaptable suministra la imagen que somete al proceso de filtración al filtro 42 de bucle adaptable.
El filtro 42 de bucle adaptable realiza un proceso de filtración de bucle adaptable (ALF) , por ejemplo, para cada LCU, la cual es la unidad de codificación más grande. En el filtro 42 de bucle adaptable, por ejemplo, un filtro de Wiener bidimensional se utiliza como un filtro. Por rutina, cualquier filtro que no sea un filtro de Wiener puede utilizarse .
El filtro 42 de bucle adaptable realiza un proceso de filtración en la imagen filtrada por el filtro 41 de compensación adaptable para cada LCU utilizando un coeficiente de filtro, y suministra un resultado del proceso de filtración a la memoria 32 de tramas.
Tenga en cuenta que, en el dispositivo 11 de codificación de imágenes, un coeficiente de filtro se calcula por el filtro 42 de bucle adaptable para cada LCU a fin de minimizar el residuo de la imagen original de la memoria intermedia 12 de reorganización pantalla, y se utiliza, la cual no se describirá en detalle en la presente. El coeficiente de filtro calculado se codifica por la unidad 26 de codificación sin pérdidas, y se transmite a un dispositivo 51 de descodificación de imágenes de la Figura 3 descrita a continuación. Además, aunque se describe en la presente un ejemplo en el cual se realiza el procesamiento para cada LUC, la unidad de procesamiento del filtro 42 de bucle adaptable no se limita al mismo.
La memoria 32 de tramas produce una imagen de referencia acumulada en la misma en la unidad 34 de intra-predicción o la unidad 35 de predicción de movimiento y de compensación a través de la unidad 33 de selección en cierto momento .
Por ejemplo, en el caso de una imagen que será intra-codificada, la memoria 32 de tramas suministra una imagen de referencia a la unidad 34 de intra-predicción a través de la unidad 33 de selección. Además, por ejemplo, en un caso en donde la inter-codificación va a realizarse, la memoria 32 de tramas suministra una imagen de referencia a la unidad 35 de predicción de movimiento y de compensación a través de la unidad 33 de selección.
Si la imagen de referencia suministrada desde la memoria 32 de tramas es una imagen de intra-codificación, la unidad 33 de selección suministra la imagen de referencia a la unidad 34 de intra-predicción. Además, si una imagen de referencia suministrada desde la memoria 32 de tramas es una imagen de inter-codificación, la unidad 33 de selección suministra la imagen de referencia a la unidad 35 de predicción de movimiento y de compensación.
La unidad 34 de intra-predicción realiza intra-predicción (predicción de intra-pantalla ) para generar una imagen de predicción utilizando valores de pixeles en una pantalla. La unidad 34 de intra-predicción realiza intra- predicción utilizando una pluralidad de modos (modos de intra-predicción) .
La unidad 34 de intra-predicción genera una imagen de predicción en todos los modos de intra-predicción, evalúa cada imagen de predicción, y selecciona un modo óptimo. Tras la selección de un modo de intra-predicción óptimo, la unidad 34 de intra-predicción suministra la imagen de predicción generada en el modo óptimo a la unidad 23 de cálculo y la unidad 30 de cálculo a través de la unidad 36 de selección de imagen de predicción.
Además, como se describe anteriormente, la unidad 34 de intra-predicción suministra parámetros, tales como información de modo de intra-predicción que indica el modo de intra-predicción que se ha adoptado, a la unidad 26 de codificación sin pérdidas, de ser necesario.
La unidad 35 de predicción de movimiento y de compensación realiza predicción de movimiento en una imagen que será inter-codificada, utilizando la imagen de entrada suministrada desde la memoria intermedia 22 de reorganización de pantalla y la imagen de referencia suministrada desde la memoria 32 de tramas a través de la unidad 33 de selección. La unidad 35 de predicción de movimiento y de compensación además realiza un proceso de compensación de movimiento de acuerdo con vectores de movimiento detectados a través de predicción de movimiento, y genera una imagen de predicción (información de imagen de inter-predicción) .
La unidad 35 de predicción de movimiento y de compensación realiza un proceso de inter-predicción para todos los modos de inter-predicción candidatos, y genera una imagen de predicción. La unidad 35 de predicción de movimiento y de compensación suministra la imagen de predicción generada a la unidad 23 de cálculo y la unidad 30 de cálculo a través de la unidad 36 de selección de imagen de predicción .
La unidad 35 de predicción de movimiento y de compensación además suministra parámetros, tal como la información de modo de inter-predicción que indica el modo de inter-predicción que se ha adoptado, y la información de vector de movimiento que indica los vectores de movimiento calculados, a la unidad 26 de codificación sin pérdidas.
En el caso de una imagen que será intra-codificada , la unidad 36 de selección de imagen de predicción suministra la salida de la unidad 34 de intra-predicción a la unidad 23 de cálculo y la unidad 30 de cálculo. En el caso de una imagen que será inter-codificada, la unidad 36 de selección de imagen de predicción suministra la salida de la unidad 35 de predicción de movimiento y de compensación a la unidad 23 de cálculo y la unidad 30 de cálculo.
La unidad 37 de control de proporción controla la proporción de la operación de cuantificación de la unidad 25 de cuantificación en función de la imagen comprimida acumulada en la memoria intermedia 27 de acumulación de manera que no se producirá un desbordamiento o subdesbordamiento .
Operación del dispositivo de codificación de imágenes El flujo del proceso de codificación ejecutado por el dispositivo 11 de codificación de imágenes como se describe anteriormente se describirá con referencia a la Figura 2.
En la etapa Sil, la unidad 21 de conversión de A/D realiza la conversión de A/D en una imagen de entrada. En la etapa S12, la memoria intermedia 22 de reorganización de pantalla almacena la imagen sometida a conversión de A/D, y reorganiza las imágenes en el orden de visualización en el orden de codificación.
Si la imagen que será procesada, suministrada desde la memoria intermedia 22 de reorganización de pantalla es una imagen de un bloque que se someterá a intra-procesamiento , la imagen descodificada que se hace referencia se lee de la memoria 32 de tramas, y se suministra a la unidad 34 de intra-predicción a través de la unidad 33 de selección.
En la etapa S13, basándose en estas imágenes, la unidad 34 de intra-predicción realiza intra-predicción en los pixeles en el bloque objetivo de procesamiento en todos los modos de intra-predicción candidatos. Tenga en cuenta que el pixel descodificado que se hace referencia puede ser un pixel que no se somete a filtración por el filtro 31 de desbloqueo.
A través del proceso descrito en lo anterior, la intra-predicción se realiza en todos los modos de intra-predicción candidatos, y las funciones de costos se calculan para todos los modos de intra-predicción candidatos. Después, se selecciona un modo óptimo de intra-predicción en función de las funciones de costos calculadas, y una imagen de predicción generada a través de intra-predicción en el modo óptimo de intra-predicción y su función de costo se suministran a la unidad 36 de selección de imagen de predicción .
Si la imagen que será procesada, suministrada desde la memoria intermedia 22 de reorganización de pantalla es una imagen que se someterá a inter-procesamiento, una imagen que se hace referencia se lee de la memoria 32 de tramas, y se suministra a la unidad 35 de predicción de movimiento y de compensación a través de la unidad 33 de selección. En la etapa S14, basándose en estas imágenes, la unidad 35 de predicción de movimiento y de compensación realiza un proceso de predicción de movimiento y compensación.
A través del proceso descrito en lo anterior, un proceso de predicción de movimiento se realiza en todos los modos de inter-predicción candidatos, y las funciones de costos se calculan para todos los modos de inter-predicción candidatos. Un modo óptimo de inter-predicción se determina en función de las funciones de costos calculadas. Después, una imagen de predicción generada en el modo óptimo de inter-predicción y su función de costo se suministran a la unidad 36 de selección de imagen de predicción.
En la etapa S15, la unidad 36 de selección de imagen de predicción determina uno del modo óptimo de intra-predicción y el modo óptimo de inter-predicción como un modo óptimo de predicción en función de las funciones de costo respectivas producidas de la unidad 34 de intra-predicción y la unidad 35 de predicción de movimiento y de compensación. Entonces, la unidad 36 de selección de imagen de predicción selecciona una imagen de predicción del modo óptimo de predicción determinado, y suministra la imagen de predicción seleccionada en las unidades 23 y 30 de cálculo. Esta imagen de predicción se utiliza para el cálculo en las etapas S16 y S21 descritas a continuación.
Tenga en cuenta que la información de selección en esta imagen de predicción se suministra a la unidad 34 de intra-predicción o la unidad 35 de predicción de movimiento y de compensación. Si se selecciona una imagen de predicción del modo óptimo de intra-predicción, la unidad 34 de intra-predicción suministra la información que indica el modo óptimo de intra-predicción (es decir, parámetros relacionados con la intra-predicción) a la unidad 26 de codificación sin pérdidas .
Si se selecciona una imagen de predicción del modo óptimo de ínter-predicción, unidad 35 de predicción de movimiento y de compensación produce la información que indica el modo óptimo de inter-predicción y la información que corresponde al modo óptimo de inter-predicción (es decir, parámetros relacionados con la predicción de movimiento) a la unidad 26 de codificación sin pérdidas. Ejemplos de la información que corresponde al modo óptimo de inter-predicción incluyen la información de vector de movimiento y la información de tramas de referencia.
En la etapa S16, la unidad 23 de cálculo calcula una diferencia entre la imagen sometida a reorganización en la etapa S12 y la imagen de predicción seleccionada en la etapa S15. La imagen de predicción se suministra a la unidad 23 de cálculo a través de la unidad 36 de selección de imagen de predicción de la unidad 35 de predicción de movimiento y de compensación para inter-predicción o desde la unidad 34 de intra-predicción para intra-predicción.
Los datos de diferencia tienen una menor cantidad de datos que los datos de imagen originales. Por consiguiente, la cantidad de datos puede reducirse en comparación con la de una imagen que se codifica como es.
En la etapa S17, la unidad 24 de transformada ortogonal realiza una transformada ortogonal sobre la información de diferencia suministrada desde la unidad 23 de cálculo. Específicamente, se realiza una transformada ortogonal tal como una transformada de coseno discreta o una transformada de Karhunen-Loéve, y se producen coeficientes de transformada .
En la etapa S18, la unidad 25 de cuantificación cuantifica los coeficientes de transformada. En esta cuantificación, como se describe con referencia al procesamiento de la etapa S28 descrito a continuación, se controla la disposición.
La información de diferencia cuantificada en la forma descrita anteriormente se descodifica localmente de la siguiente manera: En la etapa S19, la unidad 28 de descuantificación descuantifica los coeficientes de transformada cuantificados por la unidad 25 de cuantificación, utilizando las características que corresponden a las características de la unidad 25 de cuantificación . En la etapa S20, la unidad 29 de transformada ortogonal inversa realiza una transformada ortogonal inversa sobre los coeficientes de transformada descuantificados por la unidad 28 de descuantificación utilizando las características que corresponden a las características de la unidad 24 de transformada ortogonal.
En la etapa S21, la unidad 30 de cálculo agrega una entrada de imagen de predicción a través de la unidad 36 de selección de imagen de predicción a la información de diferencia descodificada localmente, y genera una imagen descodificada localmente (una imagen que corresponde a la entrada en la unidad 23 de cálculo) .
En la etapa S22, el filtro 31 de desbloqueo realiza un proceso de filtración de desbloqueo en la imagen producida de la unidad 30 de cálculo. En consecuencia, se elimina la distorsión de bloques. La imagen filtrada obtenida del filtro 31 de desbloqueo se produce en el filtro 41 de compensación adaptable .
En la etapa S23, el filtro 41 de compensación adaptable realiza un proceso de filtración de compensación adaptable. A través de este proceso, el tipo y el coeficiente del filtro de compensación se determinan para cada LCU, la cual es la unidad de codificación más grande, y un proceso de filtración se realiza sobre la imagen filtrada por el filtro 31 de desbloqueo, utilizando el tipo y el coeficiente del filtro de compensación. Tenga en cuenta que los detalles de este proceso de filtración de compensación adaptable se describirán a continuación con referencia a la Figura 14.
Entonces, si la memoria intermedia ha almacenado en la misma el mismo coeficiente que coeficiente determinado para cada LCU, un indicador que señala el almacenamiento del coeficiente, un índice que indica la posición de almacenamiento en la memoria intermedia, y la información que indica el tipo se suministran a la unidad 26 de codificación sin pérdidas. Por otro lado, si la memoria intermedia no tiene almacenado en la misma el mismo coeficiente que un coeficiente determinado para cada LCU, un indicador que se señala que no existe almacenamiento del coeficiente, el coeficiente, y la información que indica el tipo se suministran a la unidad 26 de codificación sin pérdidas.
Estas piezas de información suministradas a la unidad 26 de codificación sin pérdidas (en lo sucesivo denominadas colectivamente como parámetros de compensación adaptables) se codifican en la etapa S26 descrita a continuación .
En la etapa S24, el filtro 42 de bucle adaptable realiza un proceso de filtración de bucle adaptable en la imagen filtrada por el filtro 41 de compensación adaptable. Por ejemplo, la imagen filtrada por el filtro 41 de compensación adaptable experimenta un proceso de filtración para cada LCU utilizando un coeficiente de filtro, y como resultado del proceso de filtración sobre la imagen se suministra a la memoria 32 de tramas.
Como se describe anteriormente, hacer que la unidad de procesamiento del filtro 41 de compensación adaptable coincida con la unidad de procesamiento del filtro 42 de bucle adaptable puede proporcionar un procesamiento eficiente .
En la etapa S25, la memoria 32 de tramas almacena la imagen filtrada. Tenga en cuenta que una imagen que no es filtrada por el filtro 31 de desbloqueo, el filtro 41 de compensación adaptable, o el filtro 42 de bucle adaptable también se suministra a la memoria 32 de tramas desde la unidad 30 de cálculo, y se almacena en la memoria 32 de tramas .
Por otro lado, los coeficientes de transformada cuantificados en la etapa S18 descrita en lo anterior, también se suministran a la unidad 26 de codificación sin pérdidas. En la etapa S26, la unidad 26 de codificación sin pérdidas codifica los coeficientes de transformada cuantificados producidos de la unidad 25 de cuantificación y también codifica la parámetros suministrados. Es decir, una imagen de diferencia se codifica sin pérdidas utilizando codificación de longitud variable, codificación aritmética, o similares, y se comprime.
En la etapa S27, la memoria intermedia 27 de acumulación acumula la imagen de diferencia codificada (es decir, una corriente codificada) como una imagen comprimida. Una imagen comprimida acumulada en la memoria intermedia 27 de acumulación se lee, de ser necesario, y se transmite hacia el lado del descodificador a través de una trayectoria de transmisión .
En la etapa S28, la unidad 37 de control de proporción controla la proporción de la operación de cuantificación de la unidad 25 de cuantificación en función de la imagen comprimida acumulada en la memoria intermedia 27 de acumulación, de manera que no se producirá el desbordamiento o subdesbordamiento .
Después de la finalización del procesamiento de la etapa S28, el proceso de codificación termina.
Ejemplo de configuración del dispositivo de descodificación de imágenes La Figura 3 ilustra una configuración de una modalidad de un dispositivo de descodificación de imágenes que sirve como dispositivo de procesamiento de imágenes al cual se aplica la presente descripción. El dispositivo 51 de descodificación de imágenes ilustrado en la Figura 3 es un dispositivo de descodificación que corresponde al dispositivo 11 de codificación de imágenes de la Figura 1.
Se asume que una corriente codificada (datos) la cual se ha sometido a codificación por el dispositivo 11 de codificación de imágenes se transmite al dispositivo 51 de descodificación de imágenes que corresponde al dispositivo 11 de codificación de imágenes a través de una cierta trayectoria de transmisión, y se descodifica.
Como se ilustra en la Figura 3, el dispositivo 51 de descodificación de imágenes incluye una memoria intermedia 61 de acumulación, una unidad 62 de descodificación sin pérdidas, una unidad 63 de descuantificación, una unidad 64 de transformada ortogonal inversa, una unidad 65 de cálculo, un filtro 66 de desbloqueo, una memoria intermedia 67 de reorganización de pantalla, y una unidad 68 de conversión de D/A. El dispositivo 51 de descodificación de imágenes además incluye una memoria 69 de tramas, una unidad 70 de selección, una unidad 71 de intra-predicción, una unidad 72 de predicción de movimiento y de compensación, y una unidad 73 de selección.
El dispositivo 51 de descodificación de imágenes además incluye un filtro 81 de compensación adaptable y un filtro 82 de bucle adaptable entre el filtro 66 de desbloqueo y la memoria intermedia 67 de reorganización de pantalla y entre el filtro 66 de desbloqueo y la memoria 69 de tramas.
La memoria intermedia 61 de acumulación también es una unidad de recepción para recibir datos codificados transmitidos. La memoria intermedia 61 de acumulación recibe y acumula datos codificados transmitidos. Los datos codificados se han sometido a codificación por el dispositivo 11 de codificación de imágenes. La unidad 62 de descodificación"" sin pérdidas descodifica los datos codificados leídos de la memoria intermedia 61 de acumulación en cierto momento, utilizando un esquema que corresponde al esquema de codificación de la unidad 26 de codificación sin pérdidas de la Figura 1.
La unidad 62 de descodificación sin pérdidas suministra los parámetros descodificados, tales como información que indica el modo de intra-predicción a la unidad 71 de intra-predicción, y suministra los parámetros tales como la información que indica el modo de inter-predicción e información de vector de movimiento a la unidad 72 de predicción de movimiento y de compensación. La unidad 62 de descodificación sin pérdidas suministra adicionalmente los parámetros de compensación adaptables descodificados (tal como un indicador que señala la presencia o ausencia de un coeficiente almacenado en la memoria intermedia, el coeficiente, la información que indica un tipo, y un índice que indica la posición de almacenamiento del coeficiente en la memoria intermedia) para el filtro 81 de compensación adaptable .
La unidad 63 de descuantificación descuantifica los datos de coeficientes (coeficientes de cuantificación) obtenidos por la unidad 62 de descodificación sin pérdidas a través de la descodificación, utilizando un esquema que corresponde al esquema de cuantificación de la unidad 25 de cuantificación de la Figura 1. Es decir, la unidad 63 de descuantificación descuantifica los coeficientes cuantificados utilizando un método similar al de la unidad 28 de descuantificación de la Figura 1 al utilizar los parámetros de cuantificación suministrados desde el dispositivo 11 de codificación de imágenes.
La unidad 63 de descuantificación suministra los datos de coeficientes descuantificados, es decir, los coeficientes de transformada ortogonal, a la unidad 64 de transformada ortogonal inversa. La unidad 64 de transformada ortogonal inversa realiza una transformada ortogonal inversa en los coeficientes de transformada ortogonal utilizando el esquema que corresponde al esquema de transformada ortogonal de la unidad 24 de transformada ortogonal de la Figura 1, y obtiene los datos residuales descodificados que corresponden a los datos residuales que no se han transformado ortogonalmente en el dispositivo 11 de codificación de imágenes .
Los datos residuales descodificados obtenidos por la transformada ortogonal inversa se suministran a la unidad 65 de cálculo. La unidad 65 de cálculo también se suministra con una imagen de predicción de la unidad 71 de intra-predicción o la unidad 72 de predicción de movimiento y de compensación a través de la unidad 73 de selección.
La unidad 65 de cálculo suma los datos residuales descodificados y la imagen de predicción, y obtiene datos de imagen descodificados que corresponden a los datos de imagen de los cuales se ha sustraído la imagen de predicción por la unidad 23 de cálculo del dispositivo 11 de codificación de imágenes. La unidad 65 de cálculo suministra los datos de imagen descodificados al filtro 66 de desbloqueo.
El filtro 66 de desbloqueo realiza adecuadamente un proceso de filtración de desbloqueo para eliminar la distorsión de bloques de la imagen descodificada. El filtro 66 de desbloqueo suministra un resultado del proceso de filtración al filtro 81 de compensación adaptable.
El filtro 81 de compensación adaptable realiza un proceso de filtración de compensación (SAO) en la imagen filtrada por el filtro 66 de desbloqueo para eliminar principalmente el timbre.
El filtro 81 de compensación adaptable realiza un proceso de filtración en la imagen filtrada por el filtro 66 de desbloqueo para cada LCU, la cual es la unidad de codificación más grande, utilizando los parámetros de compensación adaptables suministrados desde la unidad 62 de descodificación sin pérdidas. El filtro 81 de compensación adaptable suministra la imagen que se ha sometido al proceso de filtración al filtro 82 de bucle adaptable.
Tenga en cuenta que, a medida que se describan los detalles del filtro 81 de compensación adaptable a continuación con referencia a la Figura 12 y los siguientes dibujos, el filtro 81 de compensación adaptable tiene una memoria intermedia para almacenar coeficientes. Si el indicador enviado desde la unidad 62 de descodificación sin pérdidas indica la presencia de un coeficiente almacenado en la memoria intermedia, el filtro 81 de compensación adaptable lee el coeficiente de la memoria intermedia al hacer referencia de la información que indica el tipo y el índice que indica la posición de almacenamiento del coeficiente en la memoria intermedia, y realiza un proceso de filtración utilizando el coeficiente de lectura.
Por otro lado, si el indicador enviado desde la unidad 62 de descodificación sin pérdidas indica la ausencia de un coeficiente almacenado en la memoria intermedia, el filtro 81 de compensación adaptable realiza un proceso de filtración utilizando el coeficiente adquirido de la unidad 62 de descodificación sin pérdidas. Después de eso, el filtro 81 de compensación adaptable escribe el coeficiente adquirido en la memoria intermedia.
El filtro 82 de bucle adaptable tiene una configuración básicamente similar a la del filtro 42 de bucle adaptable del dispositivo 11 de codificación de imágenes de la Figura 1, y realiza un proceso de filtración de bucle adaptable para cada LCU, la cual es la unidad de codificación más grande. El filtro 82 de bucle adaptable realiza un proceso de filtración en la imagen filtrada por el filtro 81 de compensación adaptable para cada LCU utilizando un coeficiente de filtro, y suministra un resultado del proceso de filtración a la memoria 69 de tramas y la memoria intermedia 67 de reorganización de pantalla.
Tenga en cuenta que, en el dispositivo 51 de descodificación de imágenes, un coeficiente de filtro, el cual se ha calculado para cada LUC y se ha codificado y enviado desde el filtro 42 de bucle adaptable del dispositivo 11 de codificación de imágenes, se descodifica por la unidad 62 de descodificación sin pérdidas y se utiliza, el cual no se describirá en detalle en la presente.
La memoria intermedia 67 de reorganización de pantalla realiza reorganización en la imagen. Es decir, el orden de las tramas reordenadas en orden de codificación por la memoria intermedia 22 de reorganización de pantalla de la Figura 1 cambia el orden de visualizacion original. La unidad 68 de conversión de D/A realiza conversión de D/A en la imagen suministrada por la memoria intermedia 67 de reorganización de pantalla, y produce la imagen resultante en una pantalla (no ilustrada) para su visualizacion.
La salida del filtro 82 de bucle adaptable se suministra además a la memoria 69 de tramas.
La memoria 69 de tramas, la unidad 70 de selección, la unidad 71 de intra-predicción, la unidad 72 de predicción de movimiento y de compensación, y la unidad 73 de selección corresponden a la memoria 32 de tramas, la unidad 33 de selección, la unidad 34 de intra-predicción, la unidad 35 de predicción de movimiento y de compensación, y la unidad 36 de selección de imagen de predicción del dispositivo 11 de codificación de imágenes, respectivamente.
La unidad 70 de selección lee una imagen que se someterá a inter-procesamiento y una imagen que se hace referencia desde la memoria 69 de tramas, y suministra las imágenes de lectura a la unidad 72 de predicción de movimiento y de compensación. Además, la unidad 70 de selección lee una imagen que se utilizará para intra-predicción desde la memoria 69 de tramas, y suministra la imagen de lectura a la unidad 71 de intra-predicción .
La unidad 71 de intra-predicción se suministra con información que indica un modo de intra-predicción y similar, que se obtiene al descodificar la información de encabezado, a partir de la unidad 62 de descodificación sin pérdidas, de acuerdo con proceda. La unidad 71 de intra-predicción genera una imagen de predicción, basándose en esta información, a partir de la imagen de referencia adquirida desde la memoria 69 de tramas, y suministra la imagen de predicción generada a la unidad 73 de selección.
La unidad 72 de predicción de movimiento y de compensación se suministra con información obtenida al descodificar la información de encabezado (información de modo de predicción, información de vector de movimiento, información de trama de referencia, indicador, diversos parámetros, etc. ) de la unidad 62 de descodificación sin pérdidas .
La unidad 72 de predicción de movimiento y de compensación genera una imagen de predicción, basada en estas piezas de información suministradas desde la unidad 62 de descodificación sin pérdidas, a partir de la imagen de referencia adquirida desde la memoria 69 de tramas, y suministra la imagen de predicción generada a la unidad 73 de selección .
La unidad 73 de selección selecciona la imagen de predicción generada por la unidad 72 de predicción de movimiento y de compensación o la unidad 71 de intra-predicción, y suministra la imagen de predicción seleccionada a la unidad 65 de cálculo.
Operación del dispositivo de descodificación de imágenes Un ejemplo del flujo del proceso de descodificación ejecutado por el dispositivo 51 de descodificación de imágenes como se describe en lo anterior se describirá con referencia a la Figura 4.
Cuando un proceso de descodificación se inicia, en la etapa S51, la memoria intermedia 61 de acumulación recibe y acumula una corriente codificada transmitida (datos) . En la etapa S52, la unidad 62 de descodificación sin pérdidas descodifica los datos codificados suministrados desde la memoria intermedia 61 de acumulación. Imágenes I, imágenes P, e imágenes B, las cuales se han codificado por la unidad 26 de codificación sin pérdidas de la Figura 1, se descodifican.
Antes de la descodificación de imágenes, la información sobre parámetros tal como la información de vector de movimiento, información de trama de referencia, e información de modo de predicción (el modo de intra-predicción o el modo de inter-predicción) también se descodifica .
Si la información de modo de predicción es información de modo de intra-predicción, la información de modo de predicción se suministra a la unidad 71 de intra-predicción. Si la información de modo de predicción es información de modo de inter-predicción, la información de vector de movimiento y similar que corresponde a la información de modo de predicción se suministra a la unidad 72 de predicción de movimiento y de compensación. Además, los parámetros de compensación adaptables también se descodifican y se suministran al filtro 81 de compensación adaptable.
En la etapa S53, la unidad 71 de intra-predicción o la unidad 72 de predicción de movimiento y de compensación realizan un proceso de generación de imágenes de predicción correspondiente de acuerdo con la información de modo de predicción suministrada desde la unidad 62 de descodificación sin pérdidas.
Específicamente, si la información de modo de intra-predicción se suministra desde la unidad 62 de descodificación sin pérdidas, la unidad 71 de intra-predicción genera una imagen de intra-predicción para el modo de intra-predicción. Si la información de modo de inter-predicción se suministra desde la unidad 62 de descodificación sin pérdidas, la unidad 72 de predicción de movimiento y de compensación realiza un proceso de compensación de movimiento y predicción del modo de inter-predicción, y genera una imagen de inter-predicción .
A través del proceso descrito en lo anterior, la imagen de predicción (imagen de intra-predicción) generada por la imagen de predicción (imagen de inter-predicción) generada por la unidad 72 de predicción de movimiento y de compensación o por la unidad 71 de intra-predicción se suministra a la unidad 73 de selección.
En la etapa S54, la unidad 73 de selección selecciona una imagen de predicción. Es decir, se suministra la imagen de predicción generada por la unidad 71 de intra-predicción o la imagen de predicción generada por la unidad 72 de predicción de movimiento y de compensación. En consecuencia, se selecciona la imagen de predicción suministrada y se suministra a la unidad 65 de cálculo, de manera que la imagen de predicción se agrega a la salida de la unidad 64 de transformada ortogonal inversa en la etapa S57 descrita a continuación.
En la etapa S52 descrita en lo anterior, los coeficientes de transformada descodificados por la unidad 62 de descodificación sin pérdidas también se suministran a la unidad 63 de descuantificación . En la etapa S55, la unidad 63 de descuantificación descuantifica los coeficientes de transformada descodificados por la unidad 62 de descodificación sin pérdidas, utilizando las características que corresponden a las características de la unidad 25 de cuantificación de la Figura 1.
En la etapa S56, la unidad de transformada ortogonal inversa 29 realiza una transformada ortogonal inversa en los coeficientes de transformada descuantificados por la unidad 28 de descuantificación, utilizando las características que corresponden a las características de la unidad 24 de transformada ortogonal de la Figura 1. En consecuencia, la información de diferencia que corresponde a la entrada de la unidad 24 de transformada ortogonal de la Figura 1 (la salida de la unidad 23 de cálculo) se descodifica .
En la etapa S57, la unidad 65 de cálculo agrega la imagen de predicción seleccionada en el procesamiento de la etapa S54 descrito anteriormente y la entrada a través de la unidad 73 de selección a la información de diferencia. De acuerdo con ello, la imagen original se descodifica.
En la etapa S58, el filtro 66 de desbloqueo realiza un proceso de filtración de desbloqueo en la imagen producida de la unidad 65 de cálculo. En consecuencia, se elimina la distorsión de bloques. La imagen descodificada enviada desde el filtro 66 de desbloqueo se produce en el filtro 81 de compensación adaptable.
En la etapa S59, el filtro 81 de compensación adaptable realiza un proceso de filtración de compensación adaptable. El filtro 81 de compensación adaptable realiza un proceso de filtración en la imagen filtrada por el filtro 66 de desbloqueo, utilizando los parámetros de compensación adaptables enviados desde la unidad 62 de descodificación sin pérdidas. El filtro 81 de compensación adaptable suministra la imagen que se ha sometido al proceso de filtración al filtro 82 de bucle adaptable.
Tenga en cuenta que, a medida que se describirán los detalles del filtro 81 de compensación adaptable a continuación con referencia a la Figura 12 y los siguientes dibujos, el filtro 81 de compensación adaptable tiene una memoria intermedia para almacenar coeficientes. Si el indicador enviado desde la unidad 62 de descodificación sin pérdidas indica la presencia de un coeficiente almacenado en la memoria intermedia, el coeficiente se lee de la memoria intermedia con referencia a la información que indica el tipo y el índice que indica la posición de almacenamiento del coeficiente en la memoria intermedia, y un proceso de filtración se realiza utilizando el coeficiente de lectura.
Por otro lado, si el indicador enviado desde la unidad 62 de descodificación sin pérdidas indica la ausencia de un coeficiente almacenado en la memoria intermedia, se realiza un proceso de filtración utilizando el coeficiente adquirido de la unidad 62 de descodificación sin pérdidas. Después de eso, el coeficiente adquirido se escribe en la memoria intermedia.
En la etapa S60, el filtro 82 de bucle adaptable realiza un proceso de filtración de bucle adaptable en la imagen filtrada por el filtro 81 de compensación adaptable. El filtro 82 de bucle adaptable realiza un proceso de filtración en una imagen de entrada para cada LCU, la cual es la unidad de codificación más grande, utilizando un coeficiente de filtro calculado para cada LCU, y suministra un resultado del proceso de filtración a la memoria intermedia 67 de reorganización de pantalla y la memoria 69 de tramas.
En la etapa S61, la memoria 69 de tramas almacena la imagen filtrada.
En la etapa S62, la memoria intermedia 67 de reorganización de pantalla realiza reorganización en la imagen después de la aplicación del filtro 82 de bucle adaptable. Es decir, el orden de las tramas reordenadas por la memoria intermedia 22 de reorganización de pantalla del dispositivo 11 de codificación de imágenes para la codificación se cambia al orden de visualizacion original.
En la etapa S63, la unidad 68 de conversión de D/A realiza conversión de D/A en la imagen enviada desde la memoria intermedia 67 de reorganización de pantalla. Esta imagen se produce en una pantalla (no ilustrada) , y se despliega una imagen.
Después de la finalización del procesamiento de la etapa S63, el proceso de descodificación termina. <Explicación de las Técnicas Relacionadas con el Arte> Proceso de compensación adaptable en el esquema de HEVC A continuación, se describirá un filtro de compensación adaptable en el esquema de HEVC. En el esquema de HEVC, se adopta el Sistema de Compensación Adaptable de Muestra .
En el lado del codificador, el filtro 41 de compensación adaptable se dispone entre el filtro 31 de desbloqueo (DB) y el filtro 42 de bucle adaptable (ALF) . También en el lado del descodificador, el filtro 81 de compensación adaptable se dispone entre el filtro 66 de desbloqueo (DB) y el filtro 82 de bucle adaptable (ALF) .
Los tipos de compensación adaptable (clases) incluyen dos tipos de compensación llamados compensación de banda, y seis tipos de compensación llamados borde de compensación, y también es posible ninguna aplicación de compensación. Además, es posible dividir una imagen en regiones de cuatro árboles y seleccionar, para cada región, cuál de los tipos de compensación adaptable descritos anteriormente utilizar para la codificación.
Esta información de selección se codifica como Info. de PQAO por una unidad de codificación (Codificación de Entropía) , se genera una corriente de bits, y la corriente de bits generada se transmite al lado del descodificador . Utilizando este método, la eficacia de codificación puede mejorarse .
Aquí, una estructura de cuadri-árbol se describirá con referencia a la Figura 5.
Por ejemplo, en el lado del codificador, como se indica por Al en la Figura 5, se calcula una función de costo JO de Nivel-0 (una partición de profundidad 0) que indica que una región 0 no tiene particiones. Además, se calculan funciones de costo de Jl, J2, J3, J4 y de Nivel-1 (una partición de profundidad 0) lo cual indica que la región 0 se divide en cuatro regiones 1 a 4.
Entonces, como se indica por A2, las funciones de costo se comparan, y se seleccionan las regiones de partición (Particiones) de Nivel-1 de acuerdo con JO > (Jl + J2 + J3 + J4) .
Del mismo modo, como se indica por A3, se calculan las funciones de costo J5 a J20 de Nivel-2 (una partición de profundidad 2) lo que indica que la región 0 se divide en 16 regiones de 5 a 20.
Entonces, como se indica por A4 , las funciones de costo se comparan, y se selecciona la región de partición (Partición) de Nivel-1 en la región 1 de acuerdo con Jl < (J5 + J6 + J9 + J10) . En la región 2, se seleccionan las regiones de partición (Particiones) de Nivel-2 de acuerdo con J2 > (Jl + J8 + Jll + J12) . En la región 3, se seleccionan las regiones de partición (Particiones) de Nivel-2 de acuerdo con J3 > (J13 + J14 + J17 + J18) . En la región 4, se selecciona la región de partición (Particiones) de Nivel-1 de acuerdo con JA > (J15 + J16 + J19 + J20) .
Como resultado, se determinan las regiones finales de cuadri-árbol (Particiones) indicados por A4 en la estructura de cuadri-árbol. Entonces, las funciones de costos para todos los tipos, particularmente, se determinan dos tipos de compensación de banda, seis tipos de compensación de borde, y sin compensación, se calculan para cada una de las regiones determinadas en la estructura de cuadri-árbol, y cuya compensación utilizan para codificación.
Por ejemplo, en el ejemplo de la Figura 5, como se indica por la flecha blanca, EO ( 4 ) , es decir, el cuarto tipo entre los tipos de compensación de borde, se determina para la región 1. Para la región 7, DESCONEXIÓN, es decir, sin compensación, se determina. Para la región 8, E0(2), es decir, el segundo tipo entre los tipos de compensación de borde, se determina. Para las regiones 11 y 12, DESCONEXIÓN, es decir, sin compensación, se determina.
Además, para la región 13, B0(1), es decir, el primer tipo entre los tipos de compensación de banda, se determina. Para la región 14, E0(2), es decir, el segundo tipo entre los tipos de compensación de borde, se determina. Para la región 17, B0(2), es decir, el segundo tipo entre los tipos de compensación de banda, se determina. Para la región 18, B0(1), es decir, el primer tipo entre los tipos de compensación de banda, se determina. Para la región 4, E0(1), es decir, el primer tipo entre los tipos de compensación de borde, se determina.
A continuación, los detalles de la compensación de banda se describirán con referencia a la Figura 6.
En la compensación de banda, en el ejemplo de la Figura 6, cada escala representa una banda = 8 pixeles, y los valores de pixeles de luminancia se separan en 32 bandas, cada banda teniendo un valor de compensación individual.
Es decir, en el ejemplo de la Figura 6, las 16 bandas centrales del Oavo a 255avo pixeles (32 bandas) se agrupan en un primer grupo, y las 8 bandas en cualquier lado se agrupan en un segundo grupo.
Después, las compensaciones en sólo el primer grupo o del segundo grupo se codifican y se envían al lado del descodificador . En general, cada región con frecuencia es una región blanca y negra de alto contraste o una región de tinte de bajo contraste, y es raro que el primer grupo y el segundo grupo contengan pixeles. Por esta razón, el envío de las compensaciones en sólo un grupo puede suprimir un aumento en la cantidad de codificación la cual es provocada por la transmisión de los valores de pixeles de los valores que no se incluyen en cada región en cuadri-árbol .
Tenga en cuenta que si se difunde una señal de entrada, el valor de la señal de luminancia se limita al margen de 16,235, y los valores de las señales de crominancia se limitan al margen de 16,240. En este caso, se aplica la difusión legal dada en la parte inferior de la Figura 6, y los valores de compensación para las 2 bandas en cualquier lado, los cuales se marcan por una cruz, no se transmiten.
A continuación, los detalles de la compensación de borde se describirán con referencia a la Figura 7.
En compensación de borde, se hace una comparación entre el valor de pixel objetivo y un valor de pixel vecino adyacente al valor de pixel objetivo, y un valor de compensación se transmite de acuerdo con la categoría correspondiente .
La compensación de borde tienen cuatro patrones unidimensionales ilustrados en la parte A de la Figura 7 a la parte D de la Figura 7, y dos patrones bidimensionales ilustrados en la parte E de la Figura 7 y la parte F de la Figura 7, y se transmiten compensaciones para las categorías ilustradas en la Figura 7.
La parte A de la Figura 7 ilustra un patrón de 1-D de 0-grados en el cual se disponen los pixeles vecinos de manera unidimensional a la derecha e izquierda del pixel objetivo C, es decir, un patrón de 1-D de 0-grados que define un ángulo de 0 grados con el patrón en la parte A de la Figura 7. La parte B de la Figura 7 ilustra un patrón de 1-D de 90-grados en el cual se disponen los pixeles vecinos de manera unidimensional por encima y por debajo del pixel objetivo C, es decir, un patrón de 1-D de 90-grados el cual define un ángulo de 90 grados con el patrón en la parte A de la Figura 7.
La parte C de la Figura 7 ilustra un patrón de 1-D de 135-grados en el cual se disponen los pixeles vecinos de manera unidimensional en las posiciones izquierda superior y derecha inferior del pixel objetivo C, es decir, un patrón de 1-D de 135-grados que define un ángulo de 135 grados con el patrón en la parte A de la Figura 7. La parte D de la Figura 7 ilustra un patrón de 1-D de 135-grados en el cual se disponen los pixeles vecinos de manera unidimensional en la parte izquierda superior y derecha inferior del pixel objetivo C, es decir, un patrón de 1-D de 135-grados el cual define un ángulo de 45 grados con el patrón en la parte A de la Figura 7.
La parte E de la Figura 7 ilustra un patrón de 2-D transversal en el cual se disponen los pixeles vecinos de manera bidimensional por encima y por debajo y a la derecha y a la izquierda del pixel objetivo C, es decir, un patrón de 2-D transversal el cual cruza el pixel objetivo C. La parte F de la Figura 7 ilustra un patrón de 2-D diagonal en el cual se disponen los pixeles vecinos de manera bidimensional en la parte derecha superior y la parte izquierda inferior y a la parte izquierda superior y la parte derecha inferior del pixel objetivo C, es decir, un patrón de 2-D diagonal el cual cruza de manera diagonal el pixel objetivo C.
La parte A de la Figura 8 ilustra las reglas de clasificación para patrones unidimensionales (Regla de clasificación para patrones de 1-D) . Los patrones en la parte A de la Figura 7 a la parte D de la Figura 7 se clasifican en cinco categorías, como se ilustra en la parte A de la Figura 8. Se calcula una compensación de acuerdo con las categorías, y se envía a la unidad de descodificación.
Si el valor de pixel del pixel objetivo C es menor que los valores de pixeles de los dos pixeles vecinos, el patrón se clasifica en la categoría 1. Si el valor de pixel del pixel objetivo C es menor que el valor de pixel de un pixel vecino y es igual para el valor de pixel del otro pixel vecino, el patrón se clasifica en la categoría 2. Si el valor de pixel del pixel objetivo C es mayor que el valor de pixel de un pixel vecino y es igual al valor de pixel del otro pixel vecino, el patrón se clasifica en la categoría 3. Si el valor de pixel del pixel objetivo C es mayor que los valores de pixeles de los dos pixeles vecinos, el patrón se clasifica en la categoría 4. De lo contrario, el patrón se clasifica en la categoría 0.
La parte B de la Figura 8 ilustra las reglas de clasificación para patrones bidimensionales (Regla de clasificación de patrones de 2-D) . Los patrones en la parte E de la Figura 7 y la parte F de la Figura 7 se clasifican en siete categorías, como se ilustra en la parte B de la Figura 8. Se envía una compensación al lado del descodificador de acuerdo con las categorías.
Si el valor de pixel del pixel objetivo C es menor que los valores de pixeles de cuatro pixeles vecinos, el patrón se clasifica en la categoría 1. Si el valor de pixel del pixel objetivo C es menor que los valores de pixeles del tercer pixel vecino y es igual al valor de pixel del cuarto pixel vecino, el patrón se clasifica en la categoría 2. Si el valor de pixel del pixel objetivo C es menor que los valores de pixeles del tercer pixel vecino y es mayor que el valor de pixel del cuarto pixel vecino, el patrón se clasifica en la categoría 3.
Si el valor de pixel del pixel objetivo C es mayor que los valores de pixeles del tercer pixel vecino y es menor que el valor de pixel del cuarto pixel vecino, el patrón se clasifica en la categoría 4. Si el valor de pixel del pixel objetivo C es mayor que los valores de pixeles del tercer pixel vecino y es igual al valor de pixel del cuarto pixel vecino, el patrón se clasifica en la categoría 5. Si el valor de pixel del pixel objetivo C es mayor que los valores de pixeles de los cuatro pixeles vecinos, el patrón se clasifica en la categoría 6. De lo contrario, el patrón se clasifica en la categoría 0.
Como se describe en lo anterior, en la compensación de borde, los patrones unidimensionales requieren una menor cantidad de cálculo debido a que una comparación se hace solamente entre dos pixeles vecinos. Tenga en cuenta que en una condición de codificación de alta eficiencia, un valor de compensación de 1 bit se hace más preciso que en una condición de codificación de bajo retardo y se envía al lado del descodificador .
El proceso de compensación adaptable descrito anteriormente es un proceso realizado en el esquema de HEVC para cada una de las regiones determinadas en la estructura de cuadri-árbol . Es decir, en el proceso de compensación adaptable, es necesario definir de forma única las regiones para el filtro de compensación adaptable, denominada como estructura de cuadri-árbol .
Además, los parámetros del filtro de compensación adaptable se definen colectivamente en sao_param(), el cual se coloca antes de los datos (información de video) , en grupos de una trama. En el lado del codificador, por lo tanto, es necesario para mantener los datos para una trama en una memoria intermedia hasta la finalización del proceso de filtración de compensación adaptable, la determinación de los coeficientes del filtro de compensación adaptable, y la creación de sao_param().
En vista de lo anterior, en algunas modalidades, como se describe en la sección posterior con referencia a la Figura 9, se realiza filtración de compensación adaptable en unidades de LCU, la cual es la unidad de codificación más grande., que corresponde al procesamiento de LCU-por-LCU del filtro de bucle adaptable, el cual se propuso en el NPL 2. <3. Primera Modalidad> Visión general de la presente tecnología En el ejemplo de la Figura 9, se ilustra una imagen que se divide en LCU 111 a LCU 117. El filtro 41 de compensación adaptable en el lado del codificador determina el tipo y el coeficiente (valor de compensación) del filtro de compensación adaptable en unidades de LCU, la cual es la unidad de codificación más grande, y envía el tipo y coeficiente al lado del descodificador al momento del inicio de cada LCU. En este caso, si el coeficiente coincide con cualquiera de los coeficientes que ya se han transmitido y que se han almacenado en la memoria intermedia, el filtro 81 de compensación adaptable en el lado del descodificador utiliza una copia del coeficiente en la memoria intermedia.
Por ejemplo, el tipo EO de la LCU 111 (la compensación de borde de la categoría 0) y su coeficiente se determinan en el lado del codificador, y el tipo y el coeficiente de la LCU 111 se envían al lado del descodificador al inicio de la LCU 111. El tipo Bl de la LCU 112 (la compensación de banda de la categoría 1) y su coeficiente se determinan en el lado del codificador, y el tipo y coeficiente de la LCU 111 se envían al lado del descodificador al inicio de la LCU 112. El tipo El de la LCU 113 (la compensación de borde de la categoría 1) y su coeficiente se determinan en el lado del codificador, y el tipo y coeficiente de la LCU 111 se envían al lado del descodificador al inicio de la LCU 112. El tipo B2 de la LCU 114 (la compensación de banda de la categoría 2) y su coeficiente se determinan en el lado del codificador, y el tipo y coeficiente de la LCU 111 se envían al lado del descodificador al inicio de la LCU 114.
En el lado del descodificador, el filtro 81 de compensación adaptable tiene una memoria intermedia 121 de EO (compensación de borde) y una memoria intermedia 122 de BO (compensación de banda) , y realiza un proceso de filtración en unidades de una LCU. Además, los coeficientes de transmisión se almacenan.
Aqui, el tipo EO de la LCU 115 (la compensación de borde de la categoría 0) y su coeficiente se determina en el lado del codificador. El coeficiente del tipo EO ya se ha enviado al lado del descodificador en el momento de la LCU 111, y se ha almacenado en memoria intermedia 121 de EO (compensación de borde) incluida en el filtro 81 de compensación adaptable en el lado del descodificador .
Para la LCU 115, por lo tanto, se utiliza una copia del coeficiente del tipo EO en la memoria intermedia 121 de EO en el lado del descodificador sin el envío del coeficiente del tipo EO . Tenga en cuenta que, para la LCU 116, no se determina ninguna compensación adaptable (desconexión) en el lado del codificador, y por lo tanto no se utiliza ningún coeficiente .
Además, el tipo EO de la LCU 117 (la compensación de borde de la categoría 0) y su coeficiente se determina en el lado del codificador. El coeficiente del tipo EO ya se ha enviado al lado del descodificador al momento de la LCU 111, y se ha almacenado en memoria intermedia 121 de EO (compensación de borde) incluida en el filtro 81 de compensación adaptable en el lado del descodificador .
Para la LCU 117, por lo tanto, se utiliza una copia del coeficiente del tipo EO en la memoria intermedia 121 de EO en el lado del descodificador sin el envío del coeficiente del tipo EO.
Como se describe anteriormente, los parámetros del filtro de compensación adaptable, que se transmiten en un solo lote al inicio de una trama en la técnica relacionada, se envían secuencialmente al comienzo de cada LCU. Por lo tanto, mientras que se requiere una memoria intermedia con una capacidad que corresponda a una trama en la técnica relacionada, una memoria intermedia con una capacidad reducida que corresponda a una LCU puede utilizarse.
Además, un coeficiente que ya se ha utilizado no se envía, reduciendo así el incremento en el número de coeficientes enviados, que es causado al enviar un coeficiente para cada LCU.
La Figura 10 ilustra ejemplos de partición del filtro de compensación adaptable. La parte izquierda de la Figura 10 ilustra un ejemplo de la partición de cuadri-árbol de la técnica relacionada, y la parte derecha de la Figura 10 ilustra un ejemplo de una partición de LCU de la presente tecnología .
En el caso de una estructura de cuadri-árbol, como se ilustra en la parte derecha de la Figura 10, una imagen sólo puede dividirse en regiones cuadradas. En contraste, en el filtro de CU, como se ilustra en la parte derecha de la Figura 10, una imagen puede dividirse en regiones de forma convexa o regiones de forma cóncava.
En realidad, como se indica por una linea punteada, una región de forma convexa se compone de, por ejemplo, una LCU de 8x8 y una LCU de 16x16, donde el mismo tipo y el uso del mismo coeficiente se representan. Del mismo modo, como se indica por una linea punteada, una región de forma cóncava se compone de, por ejemplo, tres LCU de 8x8, donde el mismo tipo y el uso del mismo coeficiente se representan.
Como se describe anteriormente, una región se divide en unidades de una LCU, incrementando asi la flexibilidad en la partición, en comparación con aquella basada en una estructura de cuadri-árbol en la técnica relacionada. La filtración de compensación adaptable puede realizarse de acuerdo con las características de una imagen de entrada.
Además, la unidad de procesamiento del filtro de compensación adaptable y la unidad de procesamiento del filtro de bucle adaptable se hacen coincidir, permitiendo que ambos procesos de filtración se realicen simultáneamente, en paralelo, en forma de tubería, o similares. En consecuencia, la eficiencia de procesamiento puede incrementarse.
Ejemplo de sintaxis La Figura 11 es un diagrama que ilustra un ejemplo de la sintaxis de sao_param() generada por el dispositivo 11 de codificación de imágenes. Los números que aparecen en el lado izquierdo de las filas respectivas son números de fila dados para el propósito de descripción.
En el ejemplo de la Figura 11, sample_adaptive_offset_flag en la octava fila es un indicador de si se realiza o no la filtración de compensación adaptable. sao_flag_cb en la décima fila indica la aplicación del filtro de compensación adaptable de CB cuando es igual a 1. sao_flag_cr en la doceava fila indica la aplicación del filtro de compensación adaptable de CR cuando es igual a 1. Tenga en cuenta que sample_adaptive__offset_flag, sao_flag_cb, y sao_flag_cr no se describen en la presente en particular.
Sao_type_idx en la décimo octava fila se refiere a un tipo de compensación. copy_flag en la vigésima fila especifica si se copia o no sao_type_idx (tipo) y sao_offset (coeficiente) de la LCU precedente. Es decir, copy_flag son datos de identificación que identifican los parámetros (tipo y compensación) de una LCU precedente en la cual se ha realizado la filtración de compensación adaptable antes de que la LCU actual se procese como siendo la misma que los parámetros de la LCU actual. En otras palabras, además, copy_flag son datos de identificación que identifican si se utilizan los parámetros de la LCU precedentes como los parámetros de la LCU actual. En otras palabras, además, copy_flag son datos de identificación que identifican si se utiliza una copia de los parámetros de la LCU precedente como los parámetros de la LCU actual. copy_idx en la vigésimo segunda fila se refiere a sao_type_idx (tipo) y sao_offset (coeficiente) (procesados) previos, los cuales van a copiarse. Es decir, copy_idx son datos de identificación que especifican la misma LCU (que va a copiarse) como la LCU actual en términos de parámetros desde dentro de las LCU previas. sao_offset en la vigésimo quinta fila se refiere a la compensación (coeficiente) de cada categoría.
Ejemplo de índice de tipo La Figura 12 es un diagrama que representa sao_type_idx . En el ejemplo de la Figura 12, sao_type_idx, NumSaoCategory, y tipo Borde o Banda se proporcionan en secuencia de izquierda a derecha. sao_type_idx es un índice que indica un tipo de filtro de compensación adaptable. NumSaoCategory es información que indica el número de categorías para el índice. El tipo Borde o Banda es información que indica a qué tipo de borde (o banda) corresponde el índice. Tenga en cuenta que, aproximadamente, sao_type_idx es Compensación de Borde (EO) cuando el valor de sao_type_idx se encuentra en el margen de 1 a 4 , y sao_type_idx es Compensación de Banda (BO) cuando el valor de sao_type_idx se encuentra en el margen de 5 y 6.
Es decir, si el valor de sao_type_idx es 0, NumSaoCategory (el número de categorías) es 0 y un proceso de compensación adaptable no se realiza.
Si el valor de sao_type_idx es 1, NumSaoCategory (el número de categorías) es 4 y el tipo de borde es el borde de 1-D de 0 grados ilustrado en la parte A de la Figura 7. Si el valor de sao_type_idx es 2, NumSaoCategory (el número de categorías) es 4 y el tipo de borde es el borde de 1-D de 90 grados ilustrado en la parte B de la Figura 7. Si el valor de sao_type_idx es de 3, NumSaoCategory (el número de categorías) es 4 y el tipo de borde es el borde de 1-D de 135 grados ilustrado en la parte C de la Figura 7. Si el valor de sao_type_idx es 4, NumSaoCategory (el número de categorías) es 4 y el tipo de borde es el borde de 1-D de 45 grados ilustrado en la parte D de la Figura 7.
Si el valor de sao_type_idx es 5, NumSaoCategory (el número de categorías) es 16 y el tipo de banda es Banda Central (el primer grupo en la Figura 6) . Si el valor de sao_type_idx es 6, NumSaoCategory (el número de categorías) es 16 y el tipo de banda es la Banda Lateral (el segundo grupo en la Figura 6) .
Tenga en cuenta que aunque los patrones bidimensionales de compensación de borde no se ilustran en el ejemplo de la Figura 7, un patrón bidimensional de compensación de borde también puede manejarse al incrementar del valor de sao_type_idx .
Ejemplo de configuración de filtro de compensación adaptable La Figura 13 es un diagrama de bloque que ilustra una configuración ejemplar del filtro de compensación adaptable y la unidad de codificación sin pérdidas en el dispositivo de codificación de imágenes de la Figura 1.
En el ejemplo de la Figura 13, el filtro 41 de compensación adaptable se construye para incluir una unidad 211 de determinación de tipo y compensación, una unidad 212 de procesamiento de compensación, una memoria intermedia 213 de imágenes, una unidad 214 de lectura de coeficiente, y una memoria intermedia 215 de compensación. El filtro 41 de compensación adaptable se construye para incluir además una unidad 216 de establecimiento de parámetros y una unidad 217 de escritura de coeficiente.
La unidad 26 de codificación sin pérdidas se construye para incluir al menos una unidad 221 de escritura de sintaxis.
Un valor de pixel desbloqueado enviado desde el filtro 31 de desbloqueo se introduce en la unidad 211 de determinación de tipo y compensación y la unidad 212 de procesamiento de compensación. La unidad 211 de determinación de tipo y compensación determina un tipo de filtro de compensación adaptable y la compensación del tipo en unidades de una LCU. En este caso, a modo de ejemplo, se determinan una función de costo se calcula en unidades de una LCU, y el tipo y la compensación que son óptimos para cada LCU, donde la función de costo es mínima. La unidad 211 de determinación de tipo y de compensación suministra un índice de tipo ( sao_type_idx) que indica el tipo determinado y la compensación (sao_offset) a la unidad 212 de procesamiento de compensación y la unidad 214 de lectura de coeficiente.
Tenga en cuenta que la compensación (coeficiente) es un coeficiente de 5 para la compensación de borde, y un coeficiente de 9 para la compensación de banda.
La unidad 212 de procesamiento de compensación realiza un proceso de filtración de compensación adaptable de los valores de pixeles desbloqueados enviados desde el filtro 31 de desbloqueo, para cada LCU utilizando el tipo y la compensación indicados por el índice de tipo enviado desde la unidad 211 de determinación de tipo y compensación. La unidad 212 de procesamiento de compensación suministra los valores de pixeles que se han sometido al proceso de compensación en la memoria intermedia 213 de imágenes.
La memoria intermedia 213 de imágenes almacena temporalmente los valores de pixeles que se han sometido al proceso de compensación por la unidad 212 de procesamiento de compensación, y suministra los valores de pixeles para el filtro 42 de bucle adaptable en cierto momento.
La unidad 214 de lectura de coeficiente busca en la memoria intermedia 215 de compensación una compensación que coincida con la compensación enviada desde la unidad 211 de determinación de tipo y compensación. Tenga en cuenta que la unidad 214 de lectura de coeficiente comprueba la memoria intermedia del tipo (memoria intermedia de compensación de borde o memoria intermedia de compensación de banda) indicado por el índice de tipo enviado desde la memoria intermedia 215 de compensación.
Si existe algún coeficiente correlacionado, la unidad 214 de lectura de coeficiente suministra un índice de copia (copy_idx) que indica la posición en la cual se almacena el coeficiente correlacionado en la memoria intermedia 215 de compensación para la unidad 216 de establecimiento de parámetros junto con el índice de tipo. Si no existe ningún coeficiente correlacionado, la unidad 214 de lectura de coeficiente suministra la compensación y el índice de tipo a la unidad 216 de establecimiento de parámetros.
La memoria intermedia 215 de compensación tiene una memoria intermedia para almacenar compensaciones para compensación de borde, y una memoria intermedia para almacenar compensaciones para compensación de banda. La memoria intermedia 215 de compensación se construye, por ejemplo, en un FIFO.
Si el índice de copia se suministra junto con el índice de tipo, la unidad 216 de establecimiento de parámetros establece el indicador de copia (copy_flag) en verdadero. La unidad 216 de establecimiento de parámetros suministra el indicador de copia, el índice de tipo, y el índice de copia en la unidad 221 de escritura de sintaxis como parámetros de compensación adaptables.
Si el índice de copia se suministra a la unidad 216 de establecimiento de parámetros, junto con la compensación, la unidad 216 de establecimiento de parámetros establece el indicador de copia (copy_flag) en falso. La unidad 216 de establecimiento de parámetros suministra el indicador de copia, el índice de tipo y la compensación en la unidad 221 de escritura de Sintaxis como parámetros de compensación adaptables. En este caso, la unidad 216 de establecimiento de parámetros también suministra el índice de tipo y la compensación en la unidad 217 de escritura de coeficiente, y provoca que la compensación se escriba en una región disponible en la memoria intermedia 215 de compensación.
La unidad 217 de escritura de coeficiente escribe la compensación enviada desde la unidad 216 de establecimiento de parámetros a una región disponible que se encuentra cerca del comienzo entre las regiones disponibles en la memoria intermedia del tipo indicado por el índice de tipo enviado desde la unidad 216 de establecimiento de parámetros dentro de la memoria intermedia 215 de compensación. Tenga en cuenta que la región disponible que se encuentra cerca del comienzo es una región disponible que tiene el índice más bajo.
La unidad 221 de escritura de sintaxis escribe los parámetros de compensación adaptables enviados desde la unidad 216 de establecimiento de parámetros en la porción de encabezado (sao_param) de la corriente codificada en unidades de una LCU, como se describe en lo anterior con referencia a, por ejemplo, la Figura 11.
Proceso de filtración de compensación adaptable en el lado del codificador A continuación, un proceso de filtración de compensación adaptable realizado por el filtro 41 de compensación adaptable de la Figura 13 se describirá con referencia a un diagrama de flujo de la Figura 14. Tenga en cuenta que este proceso de filtración de compensación adaptable es el proceso en la etapa S23 de la Figura 2.
Un valor de pixel desbloqueado enviado desde el filtro 31 de desbloqueo se ingresa en la unidad 211 de determinación de tipo y compensación y la unidad 212 de procesamiento de compensación. En la etapa S211, la unidad 211 de determinación de tipo y compensación determina un tipo de filtro de compensación adaptable y la compensación del tipo en unidades de una LCU . La unidad 211 de determinación de tipo y de compensación suministra un índice de tipo ( sao_type_idx) que indica el tipo determinado y la compensación (sao_offset) a la unidad 214 de lectura de coeficiente .
La unidad 214 de lectura de coeficiente busca en la memoria intermedia 215 de compensación una compensación que coincida con la compensación enviada desde la unidad 211 de determinación de tipo y compensación. En la etapa S212, la unidad 214 de lectura de coeficiente determina si existe o no una compensación correlacionada en la memoria intermedia 215 de compensación. Tenga en cuenta que la unidad 214 de lectura de coeficiente comprueba la memoria intermedia de tipo (memoria intermedia de compensación de borde o memoria intermedia de compensación de banda) indicada por el índice de tipo enviado desde la memoria intermedia 215 de compensación .
Si se determina en la etapa S212 que no existe compensación correlacionada, la unidad 214 de lectura de coeficiente suministra la compensación y el índice de tipo en la unidad 216 de establecimiento de parámetros.
En respuesta a esto, en la etapa S213, la unidad 216 de establecimiento de parámetros establece el indicador de copia (copy_flag) en falso.
La unidad 216 de establecimiento de parámetros también suministra el índice de tipo y la compensación a la unidad 217 de escritura de coeficiente, y, en la etapa S214, provoca que se realice un proceso de escritura de coeficiente (compensación) . Este proceso de escritura de coeficiente se describirá a continuación con referencia a la Figura 15.
En la etapa S217, la unidad 216 de establecimiento de parámetros suministra el indicador de copia, el índice de tipo y la compensación en la unidad 221 de escritura de sintaxis como parámetros de compensación adaptable, y provoca que se codifiquen los parámetros de compensación adaptables.
En respuesta a esto, en la etapa S26 de la Figura 2 descrita en lo anterior, la unidad 221 de escritura de sintaxis escribe los parámetros de compensación adaptables enviados desde la unidad 216 de establecimiento de parámetros hasta la porción de encabezado (sao_param) de la corriente codificada en unidades de una LCU.
Por otra parte, si se determina en la etapa S212 que existe una compensación correlacionada, el proceso procede a la etapa S215.
En la etapa S215, la unidad 214 de lectura de coeficiente establece un índice de copia (copy_idx) que indica la posición en la cual el coeficiente correlacionado se almacena en la memoria intermedia 215 de compensación, y suministra el índice de copia (copy_idx) a la unidad 216 de establecimiento de parámetros junto con el índice de tipo.
En respuesta a esto, en la etapa S216, la unidad 216 de establecimiento de parámetros establece el indicador de copia (copy_flag) en verdadero.
Entonces, la unidad 216 de establecimiento de parámetros suministra el indicador de copia, el índice de tipo, y el índice de copia a la unidad 221 de escritura de sintaxis como parámetros de compensación adaptables, y provoca que se codifiquen los parámetros de compensación adaptables .
En respuesta a esto, en la etapa S26 de la Figura 2 descrita en lo anterior, la unidad 221 de escritura de sintaxis escribe los parámetros de compensación adaptables enviados desde la unidad 216 de establecimiento de parámetros hasta la porción de encabezado (sao_param) de la corriente codificada en unidades de una LCU.
Mientras tanto, el índice de tipo ( sao_type_idx) y de compensación (sao_offset) determinados en la etapa S211 también se suministran a la unidad 212 de procesamiento de compensación .
En la etapa S218, la unidad 212 de procesamiento de compensación realiza un proceso de compensación. Es decir, la unidad 212 de procesamiento de compensación realiza un proceso de filtración de compensación adaptable en los valores de pixeles desbloqueados enviados desde el filtro 31 de desbloqueo, para cada LCU utilizando el tipo y la compensación indicados por el índice de tipo enviado desde la unidad 211 de determinación de tipo y compensación. Los valores de pixeles que se han sometido al filtro de compensación adaptable se almacenan en la memoria intermedia 213 de imágenes, y se suministran al filtro 42 de bucle adaptable en cierto momento.
Proceso de escritura de coeficiente A continuación, el proceso de escritura de coeficiente en la etapa S214 de la Figura 14 se describirá con referencia a un diagrama de flujo de la Figura 15. Tenga en cuenta que la Figura 16 se refiere a la descripción del proceso de escritura de coeficiente.
Como se ilustra en la Figura 16, la memoria intermedia 215 de compensación incluye dos memorias intermedias, es decir, una memoria intermedia 215-1 de EO en la cual se almacenan los coeficientes para la compensación de borde y una memoria intermedia 215-2 de BO en la cual se almacenan los coeficientes para la compensación de banda.
La memoria intermedia 215-1 de EO y la memoria intermedia 215-2 de BO almacenan los coeficientes, comenzando desde la posición que se encuentra cerca del inicio (lado izquierdo) . En la memoria intermedia 215-1 de EO y la memoria intermedia 215-2 de BO, una posición marcada con el Índice de copia (idx) es una región donde un coeficiente ya se ha escrito, y una posición marcada con "vacío" es una región disponible.
Es decir, en la memoria intermedia 215-1 de EO, los coeficientes ya se han escrito en la posición marcada con el índice de copia (idx) = 1, la posición marcada con el índice de copia = 2, la posición marcada con el índice de copia = 3, y la posición marcada con el índice de copia = 4.
Por ejemplo, en la memoria intermedia 215-2 de BO, los coeficientes ya se han escrito en la posición marcada con el índice de copia (idx) = 1 y la posición marcada con el índice de copia = 2.
En la etapa S231 de la Figura 15, la unidad 217 de escritura de coeficiente determina si el índice de tipo enviado desde la unidad 216 de establecimiento de parámetros es o no EO (compensación de borde) .
Si se determina en la etapa S231 que el índice de tipo es EO (compensación de borde), en la etapa S232, la unidad 217 de escritura de coeficiente selecciona la memoria intermedia 215-1 de EO.
Si se determina en la etapa S231 que el índice de tipo no es EO (compensación de borde) , es decir, el índice de tipo es compensación de banda, en la etapa S233, la unidad 217 de escritura de coeficiente selecciona la memoria intermedia 215-2 de BO.
En la etapa S234, la unidad 217 de escritura de coeficiente, escribe sao_offset (de compensación) en la región disponible que se encuentra cerca del comienzo de la memoria intermedia seleccionada.
Por ejemplo, como se ilustra en la Figura 16, si el índice de tipo ( sao_type_idx) es 5, el índice de tipo indica compensación de banda. Por lo tanto, en la etapa S233, se selecciona la memoria intermedia 215-2 de BO. Entonces, en la etapa S234, sao_offset (compensación) con un índice de tipo de 5 se escribe en la posición derecha adyacente a la posición marcada con el índice de copia = 2. Es decir, la posición derecha adyacente a la posición marcada con el índice de copia = 2 es la región que se encuentra cerca del comienzo entre las regiones disponibles.
Ejemplo de configuración de filtro de compensación adaptable La Figura 17 es un diagrama de bloque que ilustra una configuración ejemplar de la unidad de descodificación sin pérdidas y el filtro de compensación adaptable en el dispositivo de descodificación de imágenes de la Figura 3.
En el ejemplo de la Figura 17, la unidad 62 de descodificación sin pérdidas se construye para incluir al menos una unidad 251 de lectura de sintaxis.
El filtro 81 de compensación adaptable se construye para incluir una unidad 261 de recepción de parámetro, una unidad 262 de lectura de coeficiente, una memoria intermedia 263 de compensación, una unidad 264 de escritura de coeficiente, una unidad 265 de procesamiento de compensación, y una memoria intermedia 266 de imágenes.
La unidad 251 de lectura de sintaxis lee la sintaxis de la porción de encabezado de la corriente codificada y suministra parámetros de compensación adaptables en la sintaxis a la unidad 261 de recepción de parámetros.
Tenga en cuenta que, como también se describe anteriormente con referencia al lado del codificador, si el indicador de copia es verdadero, los parámetros de compensación adaptables incluyen un indicador de copia, un índice de tipo, y un índice de copia. Si el indicador de copia es falso, los parámetros de compensación adaptable incluyen un indicador de copia, un índice de tipo, y una compensación .
La unidad 261 de recepción de parámetros recibe los parámetros de compensación adaptables suministrados desde la unidad 251 de lectura de sintaxis, y suministra los parámetros de compensación adaptables a la unidad 262 de lectura de coeficiente.
La unidad 262 de lectura de coeficiente determina si el índice de tipo es o no 0. Si el índice de tipo es 0, la unidad 262 de lectura de coeficiente no provoca que la unidad 265 de procesamiento de compensación realice filtración de compensación adaptable.
Si el indicador de copia es verdadero, la unidad 262 de lectura de coeficiente lee la compensación desde la posición indicada por el índice de copia de la memoria intermedia del tipo indicado por el índice de tipo. La unidad 262 de lectura de coeficiente suministra la compensación de lectura y el índice de tipo a la unidad 265 de procesamiento de compensación.
Si el indicador de copia es falso, la unidad 262 de lectura de coeficiente suministra la compensación y el índice de tipo a la unidad 265 de procesamiento de compensación. En este caso, la unidad 262 de lectura de coeficiente también suministra la compensación y el índice de tipo a la unidad 264 de escritura de coeficiente, y provoca que la compensación se escriba en la memoria intermedia 263 de compensación .
La memoria intermedia 263 de compensación tiene una configuración similar a la de la memoria intermedia 215 de compensación de la Figura 13. Es decir, la memoria intermedia 263 de compensación tiene una memoria intermedia para almacenar las compensaciones para compensación de borde, y una memoria intermedia para almacenar las compensaciones para la compensación de banda. La memoria intermedia 263 de compensación se construye, por ejemplo, en un FIFO.
La unidad 264 de escritura de coeficiente tiene una configuración básicamente similar a la de la unidad 217 de escritura de coeficiente de la Figura 13. Es decir, la unidad 264 de escritura de coeficiente escribe la compensación enviada desde la unidad 262 de lectura de coeficiente a una región disponible que se encuentra cerca del inicio entre las regiones disponibles en la memoria intermedia del tipo indicado por el índice de tipo enviado desde la unidad 262 de lectura de coeficiente dentro de la memoria intermedia 263 de compensación .
La unidad 265 de procesamiento de compensación tiene una configuración básicamente similar a la de la unidad 212 de procesamiento de compensación de la Figura 13. Es decir, la unidad 265 de procesamiento de compensación realiza un proceso de filtración de compensación adaptable en los valores de pixeles desbloqueados enviados desde el filtro 66 de desbloqueo, para cada LCU utilizando el tipo y la compensación indicados por el índice de tipo enviado desde la unidad 262 de lectura de coeficiente. La unidad 265 de procesamiento de compensación suministra los valores de pixeles que se han sometido al proceso de compensación en la memoria intermedia 266 de imágenes.
Tenga en cuenta que si el índice tipo es 0, la unidad 265 de procesamiento de compensación suministra los pixeles filtrados enviados desde el filtro 66 de desbloqueo hasta la memoria intermedia 266 de imágenes como son. Es decir, en este caso, no se realiza un proceso de filtración de compensación adaptable.
La memoria intermedia 266 de imágenes tiene una configuración básicamente similar a la de la memoria intermedia 213 de imágenes de la Figura 13. Es decir, la memoria intermedia 266 de imágenes almacena temporalmente los valores de pixeles que se han sometido al proceso de compensación por la unidad 265 de procesamiento de compensación, y suministra los valores de pixeles al filtro 82 de bucle adaptable en cierto momento.
Proceso de filtración de compensación adaptable en el lado del descodificador A continuación, el proceso de filtración de compensación adaptable realizado por el filtro 81 de compensación adaptable de la Figura 17 se describirá con referencia a un diagrama de flujo de la Figura 18. Tenga en cuenta que este proceso de filtración de compensación adaptable es el proceso en la etapa S59 de la Figura 4.
En la etapa S52 de la Figura 4, cuando una corriente codificada va a descodificarse, la unidad 251 de lectura de sintaxis lee la sintaxis de la porción de encabezado de la corriente codificada y suministra los parámetros de compensación adaptables en la sintaxis en la unidad 261 de recepción de parámetro.
En la etapa S251, la unidad 261 de recepción de parámetros recibe los parámetros de compensación adaptables suministrados desde la unidad 251 de lectura de sintaxis, y suministra los parámetros de compensación adaptables a la unidad 262 de lectura de coeficiente.
En la etapa S252, la unidad 262 de lectura de coeficiente determina si el Indice de tipo ( sao_type_idx) es o no 0.
Si se determina en la etapa S252 que el índice de tipo es 0, el proceso de filtración de compensación adaptable finaliza. Es decir, en este caso, no se realiza un proceso de filtración de compensación adaptable, y la unidad 265 de procesamiento de compensación suministra los pixeles filtrados enviados desde el filtro 66 de desbloqueo hasta la memoria intermedia 266 de imágenes como son.
Si se determina en la etapa S252 que el índice de tipo no es 0, en la etapa S253, la unidad 262 de lectura de coeficientes determina si el indicador de copia (copy_flag) es o no verdadero.
Si se determina en la etapa S253 que el indicador de copia es verdadero, en la etapa S254, la unidad 262 de lectura de coeficiente realiza un proceso de lectura de coeficiente (compensación) . Este proceso de lectura de coeficiente se describirá a continuación con referencia a la Figura 19.
A través del proceso descrito en lo anterior, la compensación se lee desde la posición indicada por el índice de copia de la memoria intermedia del tipo indicado por el índice de tipo. La unidad 262 de lectura de coeficiente suministra la compensación leída y el índice de tipo a la unidad 265 de procesamiento de compensación.
Por otra parte, si se determina en la etapa S253 que el indicador de copia no es verdadero, la unidad 262 de lectura de coeficiente suministra la compensación e índice de tipo enviados desde la unidad 261 de recepción de parámetros a la unidad 265 de procesamiento de compensación.
Entonces, en la etapa S255, la unidad 262 de lectura de coeficiente también suministra la compensación y el índice de tipo enviado desde la unidad 261 de recepción de parámetros hasta la unidad 264 de escritura de coeficiente, y provoca que un proceso de escritura de coeficiente para la memoria intermedia 263 de compensación se realice. Este proceso de escritura de coeficiente básicamente es el mismo proceso que el proceso de escritura de coeficiente descrito anteriormente con referencia a la Figura 15, y una descripción del mismo se omite de esta manera.
En la etapa S256, la unidad 265 de procesamiento de compensación realiza un proceso de filtración de compensación adaptable de los valores de pixeles desbloqueados enviados desde el filtro 66 de desbloqueo, para cada LCU utilizando el tipo y la compensación indicados por el índice de tipo enviado desde la unidad 262 de lectura de coeficiente. La unidad 265 de procesamiento de compensación suministra los valores de pixeles que se han sometido al proceso de compensación en la memoria intermedia 266 de imágenes.
Proceso de lectura de coeficiente A continuación, el proceso de lectura de coeficiente en la etapa S254 de la Figura 18 se describirá con referencia a un diagrama de flujo de la Figura 19. Tenga en cuenta que la Figura 20 se refiere a la descripción del proceso de lectura de coeficiente.
Como se ilustra en la Figura 20, la memoria intermedia 263 de compensación incluye dos memorias intermedias, es decir, una memoria intermedia 263-1 de EO en la cual los coeficientes para la compensación de borde se almacenan, y una memoria intermedia 263-2 de BO en la cual los coeficientes de compensación de banda se almacenan.
La memoria intermedia 263-1 de EO y la memoria intermedia 263-2 de BO almacenan coeficientes, a partir de la posición que se encuentra cerca del inicio (lado izquierdo). En la memoria intermedia 263-1 de EO y la memoria intermedia 263-2 de BO, una posición marcada con el índice de copia (idx) es una región donde un coeficiente ya se ha escrito, y las otras posiciones son regiones disponibles.
Es decir, en la memoria intermedia 263-1 de EO, los coeficientes ya se han escrito en la posición marcada con el índice de copia (idx) = 1, la posición marcada con el índice de copia = 2, la posición marcada con el índice de copia = 3, y la posición marcada con índice de copia = 4.
Por ejemplo, en la memoria intermedia 263-2 de BO, los coeficientes ya se han escrito en la posición marcada con el índice de copia (idx) = 1, la posición marcada con el índice de copia = 2, la posición marcada con el índice de copia = 3, y la posición marcada con índice de copia = 4. En la etapa S271 de la Figura 19, la unidad 262 de lectura de coeficiente determina si el índice de tipo enviado desde la unidad 261 de recepción de parámetro es o no EO (compensación de borde) .
Si se determina en la etapa S271 que el índice es tipo EO (compensación de borde), en la etapa S272, la unidad 262 de lectura de coeficiente selecciona la memoria intermedia 263-1 de EO.
Si se determina en la etapa S271 que el índice de tipo no es EO (compensación de borde) , es decir, el índice de tipo es compensación de banda, en la etapa S273, la unidad 262 de lectura de coeficiente selecciona la memoria intermedia 263-2 de BO.
En la etapa S274, la unidad 262 de lectura de coeficiente lee sao_offset (de compensación) desde la posición indicada por el índice de copia (copy_idx) en la memoria intermedia seleccionada.
Por ejemplo, como se ilustra en la Figura 20, si el índice de tipo ( sao_type_idx) es 5, el índice de tipo indica compensación de banda. Por lo tanto, en la etapa S273, se selecciona la memoria intermedia 263-2 de BO. Entonces, en la etapa S274, sao_offset (de compensación) se lee desde la posición marcada con el índice de copia = 3.
Como se describe anteriormente, la filtración de compensación adaptable se realiza en unidades de una LCU, la cual es la unidad de codificación más grande, y los parámetros del filtro de compensación adaptable, que se transmiten en un solo lote al inicio de una trama en la técnica relacionada, se envían de manera subsiguiente al inicio de cada LCU. Por lo tanto, aunque se requiere una memoria intermedia con una capacidad que corresponde a una trama en la técnica relacionada, una memoria intermedia con una capacidad reducida que corresponde a una LCU puede utilizarse .
Además, el indicador de copia y el índice de copia se envían al lado del descodificador, y un coeficiente que ya se ha utilizado no se envía, reduciendo así el incremento en el número de coeficientes enviados, que es provocado al enviar un coeficiente para cada LCU.
Además, la filtración de compensación adaptable y la filtración de bucle adaptable pueden realizarse en unidades de la misma LCU. En consecuencia, la eficiencia de procesamiento puede mejorarse.
Además, una región se divide en unidades de una LCU, incrementando asi la flexibilidad en la partición, en comparación con aquella en una estructura de cuadri-árbol en la técnica relacionada. La filtración de compensación adaptable puede realizarse de acuerdo con las características de una imagen de entrada.
Tenga en cuenta que en la descripción anterior, la memoria intermedia 215 de compensación y la memoria intermedia 263 de compensación se construyen en un FIFO, a modo de ejemplo. Sin embargo, un FIFO no se proporciona en un sentido limitante. Es decir, la configuración de la memoria intermedia 215 de compensación y la memoria intermedia 263 de compensación puede ser cualquier otra configuración de memoria intermedia siempre y cuando la misma configuración se utilice en el lado del codificador y el lado del descodificador .
En lo anterior, el esquema de HEVC básicamente se utiliza como un esquema de codificación. Sin embargo, la presente descripción no se limita al mismo, y puede aplicarse cualquier otro esquema de codificación/esquema de descodificación que incluye al menos filtración de compensación adaptable como filtración en bucle.
Tenga en cuenta que la presente descripción se puede aplicar a un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes que se utilizan para recibir información de imagen (corriente de bits) comprimida utilizando una transformada ortogonal tal como una transformada de coseno discreta y compensación de movimiento, por ejemplo, como el esquema de HEVC o similares, a través de un medio de red, tales como difusión satelital, televisión por cable, Internet o un teléfono móvil. La presente descripción además puede aplicarse a un dispositivo de codificación de imágenes y un dispositivo de descodificación de imágenes para su uso en el procesamiento de un medio de almacenamiento tal como un disco óptico, un disco magnético, y una memoria flash. < . Segunda modalidad> Aplicación a codificación de imágenes de varias vistas/descodificación de imágenes de varias vistas La serie de procesos descritos anteriormente se puede aplicar a codificación de imágenes de varias vistas y descodificación de imágenes de varias vistas. La Figura 21 ilustra un ejemplo de un esquema de codificación de imágenes de varias vistas.
Como se ilustra en la Figura 21, las imágenes de varias vistas incluyen imágenes en una pluralidad de vistas, y una imagen en alguna de la pluralidad de vistas se designa como imagen de una vista base. Las imágenes distintas a la imagen de la vista base se manejan como imágenes de vistas no base .
En un caso en donde se realiza la codificación de imágenes de varias vistas como en la Figura 21, pueden establecerse los parámetros de filtro de compensación adaptables (un indicador de copia, un índice de copia, etc.) en cada vista (la misma vista) . Además, en cada vista (diferentes vistas), pueden compartirse también los parámetros de filtro de compensación adaptable establecidos en otro vista.
En este caso, los parámetros de filtro de compensación adaptable establecidos en la vista base se utilizan en al menos un vista no base. Alternativamente, por ejemplo, los parámetros de filtro de compensación adaptable establecidos en una vista no base (view_id = i) se utilizan en al menos una vista base y una vista no base (view_id = j) .
En consecuencia, la eficiencia de procesamiento puede mejorarse.
Dispositivo de codificación de imágenes de varias vistas La Figura 22 es un diagrama que ilustra un dispositivo de codificación de imágenes de varias vistas para realizar la operación de codificación de imágenes de varias vistas descrita anteriormente. Como se ilustra en la Figura 22, un dispositivo 600 de codificación de imágenes de varias vistas incluye una unidad 601 de codificación, una unidad 602 de codificación, y una unidad 603 de multiplexion.
La unidad 601 de codificación codifica una imagen de una vista base para generar una corriente codificada de imágenes de vistas base. La unidad 602 de codificación codifica una imagen de una vista no base para generar una corriente codificada de imágenes de vistas no base. La unidad 603 de multiplexion multiplexa la corriente codificada de imágenes de vistas base generada por la unidad 601 de codificación y la corriente codificada de imágenes de vistas no base generada por la unidad 602 de codificación para generar una corriente codificada de imágenes de varias vistas .
El dispositivo 11 de codificación de imágenes (Figura 1) puede utilizarse para cada una de la unidad 601 de codificación y la unidad 602 de codificación del dispositivo 600 de codificación de imágenes de varias vistas. En este caso, el dispositivo 600 de codificación de imágenes de varias vistas establece los parámetros de filtro de compensación adaptable establecidos por la unidad 601 de codificación y los parámetros del filtro de compensación adaptable establecidos por la unidad 602 de codificación, y transmite los parámetros de filtro de compensación adaptable establecidos .
Tenga en cuenta que, como se describe anteriormente, los parámetros de filtro de compensación adaptable establecidos por la unidad 601 de codificación pueden establecerse para que se compartan y utilicen por la unidad 601 de codificación y la unidad 602 de codificación, y puedan transmitirse. Por el contrario, los parámetros de filtro de compensación adaptable colectivamente establecidos por la unidad 602 de codificación pueden establecerse para que se compartan y utilicen por la unidad 601 de codificación y la unidad 602 de codificación, y puedan transmitirse.
Dispositivo de descodificación de imágenes de varias vistas.
La Figura 23 es un diagrama que ilustra un dispositivo de descodificación de imágenes de varias vistas para realizar la operación de descodificación de imágenes de varias vistas descrita anteriormente. Como se ilustra en la Figura 23, un dispositivo 610 de descodificación de imágenes de varias vistas incluye una unidad 611 de desmultiplexión, una unidad 612 de descodificación, y una unidad 613 de descodificación .
La unidad 611 de desmultiplexión desmultiplexa una corriente codificada de imágenes de varias vistas en la cual se han multiplexado una corriente codificada de vistas base y una corriente codificada de imágenes de vistas no base, y extrae la corriente codificada de imágenes de vistas base y la corriente codificada de imágenes de vistas no base. La unidad 612 de descodificación descodifica la corriente codificada de imágenes de vistas base extraída por la unidad 611 de desmultiplexion para obtener una imagen de una vista base. La unidad 613 de descodificación descodifica la corriente codificada de imágenes de vistas no base extraídas por la unidad 611 de desmultiplexion para obtener una imagen de una vista no base.
El dispositivo 51 de descodificación de imágenes (Figura 3) puede utilizarse para cada una de la unidad 612 de descodificación y la unidad 613 de descodificación del dispositivo 610 de descodificación de imágenes de varias vistas. En este caso, el dispositivo 610 de descodificación de imágenes de varias vistas realiza procesamiento utilizando los parámetros de filtro de compensación adaptable establecidos por la unidad 601 de codificación y descodificados por la unidad 612 de descodificación y los parámetros de filtro de compensación adaptable establecidos por la unidad 602 de codificación y descodificados por la unidad 613 de descodificación.
Tenga en cuenta que, como se describe anteriormente, en algunos casos, los parámetros de filtro de compensación adaptable establecidos por la unidad 601 de codificación (o la unidad 602 de codificación) pueden establecerse para que se compartan y utilicen por la unidad 601 de codificación y la unidad 602 de codificación, y puedan transmitirse. En tales casos, en el dispositivo 610 de descodificación de imágenes de varias vistas, se realiza procesamiento utilizando parámetros de filtro de compensación adaptable establecidos por la unidad 601 de codificación (o la unidad 602 de codificación) y descodificarse por la unidad 612 de descodificación (o la unidad 613 de descodificación) . <5. Tercera modalidad> Aplicación a codificación de imágenes estratificada/descodificación de imágenes estratificada La serie de procesos descrita" anteriormente puede aplicarse a codificación de imágenes estratificada y descodificación de imágenes estratificada. La Figura 24 ilustra un ejemplo de un esquema de codificación de imágenes estratificada .
Como se ilustra en la Figura 24, las imágenes estratificadas incluyen imágenes de una pluralidad de capas (resoluciones) , y una imagen de una cierta pluralidad de resoluciones se designa como imagen de una capa base. Las imágenes distintas a la imagen de la capa base se tratan como imágenes de capas no base (también denominadas como capas de mej ora) .
En un caso en donde se realiza la codificación de imágenes estratificada (escalabilidad espacial) como en la Figura 24, los parámetros de filtro de compensación adaptable pueden establecerse en cada capa (la misma capa) . Además, en cada capa (diferentes capas), parámetros de filtros de compensación adaptable establecidos en otra capa también pueden compartirse.
En este caso, los parámetros de filtro de compensación adaptable establecidos en la capa base se utilizan en al menos una capa no base. Alternativamente, por ejemplo, parámetros de filtro de compensación adaptable establecidos en una capa no base (layer_id = i) se utilizan en al menos una de la capa base y la capa no base (layer_id = En consecuencia, la eficiencia de procesamiento puede mej orarse .
Dispositivo de codificación de imágenes estratificada La Figura 25 es un diagrama que ilustra un dispositivo de codificación de imágenes estratificada para realizar la operación de codificación de imágenes estratificada descrita anteriormente. Como se ilustra en la Figura 25, un dispositivo 620 de codificación de imágenes estratificada incluye una unidad 621 de codificación, una unidad 622 de codificación 622, y una unidad 623 de multiplexión .
La unidad 621 de codificación codifica una imagen de una capa base para generar una corriente codificada de imágenes de capa base. La unidad 622 de codificación codifica una imagen de una capa no base para generar una corriente codificada de imágenes de capa no base. La unidad 623 de multiplexión multiplexa la corriente codificada de imágenes de capa base generada por la unidad 621 de codificación y la corriente codificada de imágenes de capa no base generada por la unidad 622 de codificación para generar una corriente codificada de imágenes estratificadas.
El dispositivo 11 de codificación de imágenes (Figura 1) puede utilizarse para cada una de la unidad 621 de codificación y la unidad 622 de codificación del dispositivo 620 de codificación de imágenes estratificadas. En este caso, el dispositivo 620 de codificación de imágenes estratificadas establece los parámetros de filtro de compensación adaptable establecidos por la unidad 621 de codificación y los parámetros de filtro de compensación adaptable establecidos por la unidad 602 de codificación, y transmite los parámetros de filtro de compensación adaptable establecidos.
Tenga en cuenta que, como se describe anteriormente, los parámetros de filtro de compensación adaptable establecidos por la unidad 621 de codificación puede establecerse para compartirse y utilizarse por la unidad 621 de codificación y la unidad 622 de codificación, y pueden transmitirse. Por el contrario, los parámetros de filtro de compensación adaptable establecidos por la unidad 622 de codificación pueden establecerse para compartirse y utilizarse por la unidad 621 de codificación y la unidad 622 de codificación, y pueden transmitirse.
Dispositivo de descodificación de imágenes estratificada La Figura 26 es un diagrama que ilustra un dispositivo de descodificación de imágenes estratificada para realizar la operación de descodificación de imágenes estratificada descrita anteriormente. Como se ilustra en la Figura 26, un dispositivo 630 de descodificación de imágenes estratificada incluye una unidad 631 de desmultiplexión, una unidad 632 de descodificación, y una unidad 633 de descodificación .
La unidad 631 de desmultiplexión desmultiplexa una corriente codificada de imágenes estratificadas en la cual se han multiplexado en una corriente codificada de imágenes de capa base y una corriente codificada de imágenes de capa no base, y extrae la corriente codificada de imágenes de capa base y la corriente codificada de imágenes de capa no base. La unidad 632 de descodificación descodifica la corriente codificada de imágenes de capa base extraída por la unidad 631 de desmultiplexion para obtener una imagen de una capa base. La unidad 633 de descodificación descodifica la corriente codificada de imágenes de capa no base extraída por la unidad 631 de desmultiplexion para obtener una imagen de una capa no base.
El dispositivo 51 de descodificación de imágenes (Figura 3) puede utilizarse para cada una de la unidad 632 de descodificación y la unidad 633 de descodificación del dispositivo 630 de descodificación de imágenes estratificada. En este caso, el dispositivo 630 de descodificación de imágenes estratificada realiza el procesamiento utilizando los parámetros de filtro de compensación adaptable establecidos por la unidad 621 de codificación y descodificados por la unidad 632 de descodificación y los parámetros de filtro de compensación adaptable establecidos por la unidad 622 de codificación y descodificados por la unidad 633 de descodificación.
Tenga en cuenta que, como se describe anteriormente, en algunos casos, los parámetros de filtro de compensación adaptable establecidos por la unidad 621 de codificación (o la unidad 622 de codificación) pueden establecerse para compartirse y utilizarse por la unidad 621 de codificación y la unidad 622 de codificación, y pueden transmitirse. En este caso, en el dispositivo 630 de descodificación de imágenes estratificada, el procesamiento se realiza utilizando parámetros de filtro de compensación adaptable establecidos por la unidad 621 de codificación (o la unidad 622 de codificación) y descodificados por la unidad 632 de descodificación (o la unidad 633 de descodificación) . <6. Cuarta modalidad> Ejemplo de configuración de computadora La serie de procesos descrita anteriormente puede ejecutarse por hardware o puede ejecutarse por software. Si la serie de procesos es para que se ejecute por software, un programa que constituye el software se instala en una computadora. Aquí, ejemplos de computadora incluyen una computadora incorporada en hardware dedicado, y una computadora capaz de ejecutar diversas funciones por la instalación de diversos programas, por ejemplo, una computadora personal de propósito general.
La Figura 27 es un diagrama de bloque que ilustra una configuración ejemplar de hardware de una computadora que ejecuta la serie de procesos descritos anteriormente de acuerdo con un programa.
En una computadora 800, una CPU 801 (Unidad de Procesamiento Central), una ROM 802 (Memoria de Sólo Lectura) , y una RAM 803 (Memoria de Acceso Aleatorio) se conectan entre si mediante un bus 804.
Una interfaz 805 de entrada/salida se conecta adicionalmente al bus 804. Una unidad 806 de entrada, una unidad 807 de salida, una unidad 808 de almacenamiento, una unidad 809 de comunicación, y una unidad 810 se conectan a la interfaz 805 de entrada/salida.
La unidad 806 de entrada incluye un teclado, un ratón, un micrófono, etc. La unidad 807 de salida incluye una pantalla, un altavoz, etc. La unidad 808 de almacenamiento incluye un disco duro, una memoria no volátil, etc. La unidad 809 de comunicación incluye una interfaz de red, etc. La unidad 810 impulsa un medio 811 removible tal como un disco magnético, un disco óptico, un disco magneto-óptico, o una memoria de semiconductor.
En la computadora que tiene la configuración descrita en lo anterior, la CPU 801 carga un programa almacenado en, por ejemplo, la unidad 808 de almacenamiento en la RAM 803 a través de la interfaz 805 de entrada/salida y el bus 804, y ejecuta el programa. Por consiguiente, se realiza la serie de procesos descrita anteriormente.
El programa ejecutado por la computadora 800 (la CPU 801) puede proporcionarse en forma grabada en el medio 811 removible, por ejemplo, un medio de paquete. Además, el programa también puede proporcionarse a través de un medio de transmisión alámbrica o inalámbrica tal como una red de área local, Internet, o difusión digital por satélite.
En la computadora, el medio 811 removible se establece en la unidad 810, permitiendo por este medio que el programa se instale en la unidad 808 de almacenamiento a través de la interfaz 805 de entrada/salida. Además, el programa puede recibirse por la unidad 809 de comunicación a través de un medio de transmisión alámbrica o inalámbrica, y puede instalarse en la unidad 808 de almacenamiento. Alternativamente, el programa puede instalarse de antemano en la ROM 802 o la unidad 808 de almacenamiento.
Tenga en cuenta que el programa que ejecuta la computadora puede ser un programa en el cual se realizan las operaciones de procesamiento en una forma temporal en el orden indicado en la presente, o puede ser un programa en el cual se realicen operaciones de procesamiento en paralelo o en el momento necesario, por ejemplo, cuando se solicite.
Además, las etapas que describen un programa almacenado en un medio de grabación, como se utiliza en la presente, incluyen, desde luego, las operaciones de procesamiento que se realizan de una manera temporal en el orden establecido, y las operaciones de procesamiento se ejecutan en paralelo o individualmente aunque no necesariamente se realizan en un forma temporal.
Además, el término "sistema", como se utiliza en la presente, se refiere a un aparato general que incluye una pluralidad de dispositivos (aparatos).
Además, una configuración descrita anteriormente como un dispositivo simple (o unidad de procesamiento) puede dividirse en una pluralidad de dispositivos (o unidades de procesamiento) . Por el contrario, una configuración descrita anteriormente como una pluralidad de dispositivos (o unidades de procesamiento) puede combinarse en un dispositivo simple (o unidad de procesamiento) . Además, desde luego, una configuración distinta a la descrita anteriormente puede agregarse a la configuración de cada dispositivo (o cada unidad de procesamiento) . Además, parte de la configuración de un cierto dispositivo (o unidad de procesamiento) puede incluirse en la configuración de otro dispositivo (u otra unidad de procesamiento) si los dispositivos (o unidades de procesamiento) tienen sustancialmente la misma configuración y/o la operación en términos de todo un sistema. En otras palabras, modalidades de la presente tecnología no se limitan a las modalidades anteriores, y una variedad de modificaciones pueden hacerse sin apartarse del alcance de la presente tecnología.
El dispositivo de codificación de imágenes y el dispositivo de descodificación de imágenes de acuerdo con las modalidades anteriores pueden aplicarse a diversas piezas de equipamiento electrónico tales como un transmisor o un receptor utilizado para distribuir datos a través de difusión por satélite, difusión alámbrica tal como televisión por cable, o Internet o utilizado para distribuir datos en o desde las terminales mediante comunicación celular, un aparato de grabación para grabar imágenes en medios tal como un disco óptico, un disco magnético, y una memoria flash, y un aparato de reproducción para reproducir imágenes a partir de tales medios de almacenamiento. Cuatro aplicaciones ejemplares se describirán a continuación. <7. Aplicaciones ejemplares> Primera aplicación ejemplar: receptor de televisión La Figura 28 ilustra un ejemplo de una configuración esquemática de un aparato de televisión al cual se aplican las modalidades anteriores. Un aparato 900 de televisión incluye una antena 901, un sintonizador 902, un desmultiplexor 903, un descodificador 904, una unidad 905 de procesamiento de señales de video, una unidad 906 de visualización, una unidad 907 de procesamiento de señales de audio, un altavoz 908, una interfaz 909 externa, una unidad 910 de control, una interfaz 911 de usuario, y un bus 912.
El sintonizador 902 extrae una señal en un canal deseado a partir de una señal de difusión recibida a través de la antena 901, y desmodula la señal extraída. Entonces, el sintonizador 902 produce una corriente de bits codificada obtenida a través de desmodulación al desmultiplexor 903. En otras palabras, el sintonizador 902 funciona como un medio de transmisión en el aparato 900 de televisión para recibir una corriente codificada que incluye imágenes codificadas.
El desmultiplexor 903 desmultiplexa, a partir de la corriente de bits codificada, una corriente de video y una corriente de audio de un programa para visualizarse, y produce las corrientes desmultiplexadas al descodificador 904. Además, el desmultiplexor 903 extrae datos auxiliares, tales como EPG (Guía de Programación Electrónica) de la corriente de bits codificada, y suministra los datos extraídos a la unidad 910 de control. Tenga en cuenta que el desmultiplexor 903 también puede desaleatorizar la corriente de bits codificada si la corriente de bits codificada se ha aleatorizado .
El descodificador 904 descodifica la corriente de video y la corriente de audio ingresada desde el desmultiplexor 903. Entonces, el descodificador 904 produce datos de vídeo obtenidos por un proceso de descodificación a la unidad 905 de procesamiento de señales de vídeo. El descodificador 904 produce adicionalmente datos de audio generados por un proceso de descodificación a la unidad 907 de procesamiento de señales de audio.
La unidad 905 de procesamiento de señales de vídeo reproduce los datos de vídeo ingresados desde el descodificador 904, y provoca que el video se visualice en la unidad 906 de visualización . La unidad 905 de procesamiento de señales de vídeo también puede provocar que una pantalla de aplicaciones suministrada a través de una red para que se visualice en la unidad 906 de visualización . La unidad 905 de procesamiento de señales de video además puede realizar procesamiento adicional, tal como eliminación de ruido, en los datos de video de acuerdo con los ajustes. Además, la unidad 905 de procesamiento de señales de video también puede generar unza imagen de GUI (Interfaz de Usuario Gráfica) , tal como un menú, un botón, o un cursor, y superponer la imagen generada en una imagen producida.
La unidad 906 de visualización se impulsa por una señal de impulsión suministrada desde la unidad 905 de procesamiento de señales de video, y despliega el video o imagen sobre una superficie de video de un dispositivo de visualización (tal como una pantalla de cristal liquido, una pantalla de plasma, o una OELD (Pantalla Orgánica de Electroluminiscencia (pantalla EL orgánica) ) .
La unidad 907 de procesamiento de señales de audio realiza un proceso de reproducción incluyendo conversión de D/A, amplificación, etc., en la entrada de datos de audio desde el descodificador 904, y provoca que el audio se produzca desde el altavoz 908. La unidad 907 de procesamiento de señales de audio además puede realizar un procesamiento adicional, tal como la eliminación de ruido sobre los datos de audio.
La interfaz 909 externa es una interfaz para conectar el aparato 900 de televisión a un dispositivo externo o una red. Por ejemplo, una corriente de video o corriente de audio recibida a través de la interfaz 909 externa pueden descodificarse por el descodificador 904. En otras palabras, la interfaz 909 externa también funciona como un medio de transmisión en el aparato 900 de televisión para recibir una corriente codificada que incluye imágenes codificadas .
La unidad 910 de control incluye un procesador, tal como una CPU, y memorias tales como una RAM y una ROM. Las memorias almacenan un programa que será ejecutado por la CPU, los datos de programación, datos de EPG, datos adquiridos a través de una red, etc. El programa almacenado en las memorias se lee y ejecuta por la CPU cuando, por ejemplo, se inicia el aparato 900 de televisión. La CPU ejecuta el programa para controlar la operación del aparato 900 de televisión de acuerdo con, por ejemplo, una señal de operación ingresada desde la interfaz 911 de usuario.
La interfaz 911 de usuario se conecta a la unidad 910 de control. La interfaz 911 de usuario incluye, por ejemplo, botones y conmutadores para permitir que el usuario opere el aparato 900 de televisión, una unidad de recepción para una señal de control remoto, etc. La interfaz 911 de usuario detecta una operación del usuario a través de los componentes descritos anteriormente para generar una señal de operación, y produce la señal de operación generada en la unidad 910 de control.
El bus 912 sirve para conectar el sintonizador 902, el desmultiplexor 903, el descodificador 904, la unidad 905 de procesamiento de señales de video, la unidad 907 de procesamiento de señales de audio, la interfaz 909 externa, y la unidad 910 de control entre si.
En el aparato 900 de televisión que tiene la configuración descrita en lo anterior, el descodificador 904 tiene la función del dispositivo de descodificación de imágenes de acuerdo con las modalidades anteriores. En consecuencia, la eficiencia de procesamiento puede mejorarse cuando el aparato 900 de televisión descodifica una imagen.
Segunda aplicación ejemplar: teléfono móvil La Figura 29 ilustra un ejemplo de una configuración esquemática de un teléfono móvil al cual se aplican las modalidades anteriores. Un teléfono 920 móvil incluye una antena 921, una unidad 922 de comunicación, un códec 923 de audio, un altavoz 924, un micrófono 925, una unidad 926 de cámara, una unidad 927 de procesamiento de imágenes, una unidad 928 de multiplexión/desmultiplexión, una unidad 929 de grabación/reproducción, una unidad 930 de visualización, una unidad 931 de control, una unidad 932 de operación, y un bus 933.
La antena 921 se conecta a la unidad 922 de comunicación. El altavoz 924 y el micrófono 925 se conectan al códec 923 de audio. La unidad 932 de operación se conecta a la unidad 931 de control. El bus 933 sirve para conectar la unidad 922 de comunicación, el códec 923 de audio, la unidad 926 de cámara, la unidad 927 de procesamiento de imágenes, la unidad 928 de multiplexión/desmultiplexión, la unidad 929 de grabación/reproducción, la unidad 930 de visualización, y la unidad 931 de control entre si.
El teléfono 920 móvil realiza operaciones, tales como transmitir y recibir una señal de audio, transmitir y recibir un correo electrónico o datos de imagen, capturar una imagen, y grabar datos, en varios modos de operación que incluyen un modo de llamada de voz, un modo de comunicación de datos, una modo de captura de imágenes, y un modo de videoteléfono .
En el modo de llamada de voz, una señal de audio análoga generada por el micrófono 925 se suministra al códec 923 de audio. El códec 923 de audio convierte la señal de audio análoga en datos de audio, y realiza la conversión de A/D y la compresión en los datos de audio convertidos. El códec 923 de audio entonces produce los datos de audio comprimidos en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula los datos de audio, y genera una señal de transmisión. La unidad 922 de comunicación transmite entonces la señal de transmisión generada a una estación base (no ilustrada) mediante la antena 921. Además, la unidad 922 de comunicación amplifica una señal de radio recibida mediante la antena 921, y realiza conversión de frecuencia en la señal amplificada para adquirir una señal de recepción. Entonces, la unidad 922 de comunicación desmodula y descodifica la señal de recepción para generar datos de audio, y produce los datos de audio generados en el códec 923 de audio. El códec 923 de audio expande los datos de audio, y realiza conversión de D/A para generar una señal de audio análoga. El códec 923 de audio suministra entonces la señal de audio generada al altavoz 924 para que se produzca el audio.
Además, en el modo de comunicación de datos, por ejemplo, la unidad 931 de control genera datos de texto que forma un correo electrónico de acuerdo con una operación del usuario mediante la unidad 932 de operación. Además, la unidad 931 de control provoca que el texto se despliegue en la unidad 930 de visualización. La unidad 931 de control adicionalmente genera datos de correo electrónico de acuerdo con una instrucción de transmisión dada a partir del usuario mediante la unidad 932 de operación, y produce los datos de correo electrónico generados en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula los datos de correo electrónico para generar una señal de transmisión. Entonces, la unidad 922 de comunicación transmite la señal de transmisión generada a la estación base (no ilustrada) mediante la antena 921. Además, la unidad 922 de comunicación amplifica una señal de radio recibida a través de la antena 921, y realiza la conversión de frecuencia en la señal amplificada para adquirir una señal de recepción. Entonces, la unidad 922 de comunicación desmodula y descodifica la señal de recepción para restaurar los datos de correo electrónico, y produce los datos de correo electrónico restaurados en la unidad 931 de control. La unidad 931 de control provoca que el contenido del correo electrónico se despliegue en la unidad 930 de visualización, y también provoca que los datos de correo electrónico se almacenen en un medio de almacenamiento de la unidad 929 de grabación/reproducción .
La unidad 929 de grabación/reproducción incluye un medio de almacenamiento legible/grabable deseado. El medio de almacenamiento puede ser, por ejemplo, un medio de almacenamiento integrado tal como una RAM o una memoria flash, o un medio de almacenamiento externo tal como un disco duro, un disco magnético, un disco magneto-óptico, un disco óptico, una memoria de USB (Mapa de Bits de Espacio no Asignado) o una tarjeta de memoria.
Además, en el modo de captura de imagen, por ejemplo, la unidad 926 de cámara captura una imagen de un objeto para generar datos de imagen, y produce los datos de imagen generados en la unidad 927 de procesamiento de imágenes. La unidad 927 de procesamiento de imágenes codifica los datos de imagen ingresados desde la unidad 926 de cámara, y provoca que una corriente codificada se almacene en el medio de almacenamiento de la unidad 929 de grabación/reproducción .
Además, en el modo de videoteléfono, por ejemplo, la unidad 928 de multiplexión/desmultiplexión multiplexa la corriente de video codificada por la unidad 927 de procesamiento de imágenes y la corriente de audio ingresada desde el códec 923 de audio, y produce una corriente multiplexada en la unidad 922 de comunicación. La unidad 922 de comunicación codifica y modula la corriente para generar una señal de transmisión. Entonces, la unidad 922 de comunicación transmite la señal de transmisión generada a una estación base (no ilustrada) a través de la antena 921. Además, la unidad 922 de comunicación amplifica una señal de radio recibida a través de la antena 921, y realiza la conversión de frecuencia en la señal amplificada para adquirir una señal de recepción. La señal de transmisión y la señal de recepción pueden incluir una corriente de bits codificada. Entonces, la unidad 922 de comunicación desmodula y descodifica la señal de recepción para restaurar una corriente, y produce la corriente restaurada en la unidad 928 de multiplexión/desmultiplexión. La unidad 928 de multiplexión/desmultiplexión desmultiplexa, a partir de la corriente de entrada, una corriente de video y un corriente de audio, y produce la corriente de video y la corriente de audio en la unidad 927 de procesamiento de imágenes y el códec 923 de audio, respectivamente. La unidad 927 de procesamiento de imágenes descodifica la corriente de video para generar datos de video. Los datos de video se suministra a la unidad 930 de visualización, y una serie de imágenes se despliega por la unidad 930 de visualización. El códec 923 de audio expande la corriente de audio, y realiza la conversión de D/A para generar una señal de audio análoga. El códec 923 de audio suministra entonces la señal de audio generada al altavoz 924 para provocar que se produzca el audio.
En el teléfono 920 móvil que tiene la configuración descrita en lo anterior, la unidad 927 de procesamiento de imágenes tiene la función del dispositivo de codificación de imágenes y el dispositivo de descodificación de imágenes de acuerdo con las modalidades anteriores. En consecuencia, la eficiencia de procesamiento puede mejorarse cuando el teléfono 920 móvil codifica y descodifica una imagen.
Tercera Aplicación ejemplar: aparato de grabación/reproducción .
La Figura 30 ilustra un ejemplo de una configuración esquemática de un aparato de grabación/reproducción al cual se aplican las modalidades anteriores. Un aparato 940 de grabación/reproducción codifica, por ejemplo, datos de audio y de vídeo de un programa de difusión recibido, y graba los datos de audio y los datos de vídeo codificados en un medio de grabación. Además, el aparato 940 de grabación/reproducción también puede codificar datos de audio y datos de vídeo adquiridos de, por ejemplo, otro aparato, y grabar los datos de audio y los datos de vídeo codificados en un medio de grabación.
Además, el aparato 940 de grabación/reproducción reproduce datos grabados en un medio de grabación utilizando un monitor y un altavoz de acuerdo con, por ejemplo, una instrucción dada por un usuario. En este caso, el aparato 940 de grabación/reproducción descodifica los datos de audio y los datos de vídeo.
La aparato 940 de grabación/reproducción incluye un sintonizador 941, una interfaz 942 externa, un codificador 943, un HDD 944 (Unidad de Disco Duro), una unidad 945 de disco, un selector 946, un descodificador 947, una OSD 948 (Pantalla Sobre Pantalla), una unidad 949 de control, y una interfaz 950 de usuario.
El sintonizador 941 extrae una señal en un canal deseado de una señal de difusión recibida mediante una antena (no ilustrada), y desmodula la señal extraída. El sintonizador 941 da salida entonces produce una corriente de bits codificada obtenida a través de la desmodulación en el selector 946. En otras palabras, el sintonizador 941 funciona como medios de transmisión en el aparato 940 de grabación/reproducción.
La interfaz 942 externa es una interfaz para conectar el aparato 940 de grabación/reproducción a un dispositivo externo o una red. La interfaz 942 externa, por ejemplo, puede ser una interfaz de IEEE 1394, una interfaz de red, una interfaz de USB, una interfaz de memoria flash, o similares. Por ejemplo, los datos de video y los datos de audio recibidos mediante la interfaz 942 externa se ingresan en el codificador 943. En otras palabras, la interfaz 942 externa funciona como medio de transmisión en el aparato 940 de grabación/reproducción.
El codificador 943 codifica los datos de video y datos de audio ingresados desde la interfaz 942 externa si los datos de video y datos de audio no se han codificado. El codificador 943 produce entonces una corriente de bits codificada en el selector 946.
El HDD 944 graba una corriente de bits codificada que incluye datos de contenido comprimidos tales como video y audio, varios programas, y otros datos en un disco duro interno. Además, el HDD 944 lee los datos antes descritos del disco duro cunado reproduce video y audio.
La unidad 945 de disco graba y lee los datos en y desde un medio de grabación colocado en la misma. El medio de grabación colocado en la unidad 945 de disco, por ejemplo, puede ser un disco DVD (tal como DVD-Video, DVD-RAM, DVD-R, DVD-R , DVD+R o DVD+RW) , un disco Blu-ray (marca registrada), o similares .
El selector 946 selecciona una corriente de bits codificada ingresada desde el sintonizador 941 o el codificador 943 cuando graba video y audio, y produce la corriente de bits codificada seleccionada en el HDD 944 o la unidad 945 de disco. Cuando reproduce video y audio, el selector 946 produce una corriente de bits codificada ingresada desde el HDD 944 o la unidad 945 de disco en el descodificador 947.
El descodificador 947 descodifica la corriente de bits codificada para generar datos de vídeo y datos de audio. El descodificador 947 entonces produce los datos de vídeo generados en la OSD 948. El descodificador 904 además produce los datos de audio generados en un altavoz externo.
La OSD 948 reproduce los datos de vídeo ingresados desde el descodificador 947, y despliega el vídeo. Además, la OSD 948 también puede superponer una imagen de GUI, tal como un menú, un botón, o un cursor en el vídeo que va a desplegarse .
La unidad 949 de control incluye un procesador, tal como una CPU, y memorias tales como RAM y ROM. Las memorias almacenan un programa que va a ejecutarse por la CPU, datos de programación, etc. El programa almacenado en las memorias se lee y ejecuta por la CPU cuando, por ejemplo, se pone el aparato 940 de grabación/reproducción. La CPU ejecuta el programa para controlar la operación del aparato 940 de grabación/reproducción de acuerdo con, por ejemplo, una señal de operación ingresada desde la interfaz 950 de usuario.
La interfaz 950 de usuario se conecta a la unidad 949 de control. La interfaz 950 de usuario incluye, por ejemplo, botones y conmutadores para permitir al usuario operar el aparato 940 de grabación/reproducción, una unidad de recepción para una señal de control remoto, etc. La interfaz 950 de usuario detecta una operación del usuario mediante los componentes descritos anteriormente para generar una señal de operación, y produce la señal de operación generada en la unidad 949 de control.
En el aparato 940 de grabación/reproducción que tiene la configuración descrita en lo anterior, el codificador 943 tiene la función del dispositivo de codificación de imágenes de acuerdo con las modalidades anteriores. Además, el descodificador 947 tiene la función del dispositivo de descodificación de imágenes de acuerdo con las modalidades anteriores. En consecuencia, la eficiencia de procesamiento puede mejorarse cuando el aparato 940 de grabación/reproducción codifica y descodifica una imagen.
Cuarta aplicación ejemplar: aparato de captura de imágenes La Figura 31 ilustra un ejemplo de una configuración esquemática de un aparato de captura de imágenes al cual se aplican las modalidades anteriores. Un aparato 960 de captura de imágenes captura una imagen de un objeto para generar datos de imagen, codifica los datos de imagen, y graba los datos de imagen codificados en un medio de grabación.
El aparato 960 de captura de imágenes incluye un bloque 961 óptico, una unidad 962 de captura de imágenes, una unidad 963 de procesamiento de señales, una unidad 964 de procesamiento de imágenes, una unidad 965 de visualización, una interfaz 966 externa, una memoria 967, una unidad 968 de medios, una OSD 969, una unidad 970 de control, una interfaz 971 de usuario, y un bus 972.
El bloque 961 óptico se conecta a la unidad 962 de captura de imágenes. La unidad 962 de captura de imágenes se conecta a la unidad 963 de procesamiento de señales. La unidad 965 de visualización se conecta a la unidad 964 de procesamiento de imágenes. La interfaz 971 de usuario se conecta a la unidad 970 de control. El bus 972 sirve para conectar la unidad 964 de procesamiento de imágenes, la interfaz 966 externa, la memoria 967, la unidad 968 de medios, la OSD 969, y la unidad 970 de control entre si.
El bloque 961 óptico incluye una lente de enfoque, un mecanismo de apertura, etc. El bloque 961 óptico forma una imagen óptica del objeto sobre una superficie de captura de imágenes de la unidad 962 de captura de imágenes. La unidad 962 de captura de imágenes incluye un sensor de imagen tal como un CCD (Dispositivo Acoplado por Carga) o sensor de imagen de CMOS (Semiconductor de Óxido de Metal Complementario) , y convierte la imagen óptica formada en la superficie de captura de imágenes en una señal de imagen que sirve como señal eléctrica al realizar la conversión fotoeléctrica. La unidad 962 de captura de imágenes entonces produce la señal de imagen en la unidad 963 de procesamiento de señales.
La unidad 963 de procesamiento de señales realiza varias operaciones de procesamiento de señales de la cámara, tales como corrección de knee, corrección gamma, y corrección de color, en señal de imagen ingresada desde la unidad 962 de captura de imágenes. La unidad 963 de procesamiento de señales produce los datos de imagen sometidos a las operaciones de procesamiento de señales de la cámara en la unidad 964 de procesamiento de imágenes.
La unidad 964 de procesamiento de imágenes codifica los datos de imagen ingresados desde la unidad 963 de procesamiento de señales para generar datos codificados. La unidad 964 de procesamiento de imágenes entonces produce los datos codificados generados en la interfaz 966 externa o la unidad 968 de medios. Además, la unidad 964 de procesamiento de imágenes descodifica los datos codificados ingresados desde la interfaz 966 externa o la unidad 968 de medios para generar datos de imagen. La unidad 964 de procesamiento de imágenes entonces produce los datos de imagen generados en la unidad 965 de visualización . Además, la unidad 964 de procesamiento de imágenes también puede producir los datos de imagen ingresados desde la unidad 963 de procesamiento de señales en la unidad 965 de visualización para provocar que la imagen se despliegue. Además, la unidad 964 de procesamiento de imágenes también puede superponer datos de visualización adquiridos en el menú de la OSD 969 en la imagen que va a producirse en la unidad 965 de visualización.
La OSD 969 genera una imagen en GUI, tal como un menú, un botón, o un cursor, y produce la imagen generada en la unidad 964 de procesamiento de imagen.
La interfaz 966 externa se forma, por ejemplo, como terminal de entrada/salida de USB. La interfaz 966 externa conecta, por ejemplo, el aparato 960 de captura de imágenes en una impresora cuando se imprime una imagen. Una unidad se conecta adicionalmente a la interfaz 966 externa, si es necesario. Un medio removible tal como un disco magnético o un disco óptico se coloca en la unidad, y un programa leído desde el medio removióle puede instalarse en el aparato 960 de captura de imágenes. Además, la interfaz 966 externa también puede formarse como una interfaz de red para conectarse a una red tal como una LAN o Internet. En otras palabras, la interfaz 966 externa funciona como medio de transmisión en el aparato 960 de captura de imágenes.
El medio de grabación que se coloca en la unidad 968 de medios, por ejemplo, puede ser cualquier medio removible legible/grabable, tal como un disco magnético, un disco magneto-óptico, un disco óptico, o una memoria de semiconductor. Alternativamente, un medio de grabación puede unirse de manera fija a la unidad 968 de medios, y puede formar una unidad de disco duro integrada o una unidad de almacenamiento no portátil tal como una SSD (Unidad de Estado Sólido) .
La unidad 970 de control incluye un procesador, tal como una CPU, y memorias tales como RAM y ROM. Las memorias almacenan un programa que se ejecuta por la CPU, datos de programación, etc. El programa almacenado en las memorias se lee y ejecuta por la CPU cuando, por ejemplo, se inicia el aparato 960 de captura de imágenes. La CPU ejecuta el programa para controlar la operación del aparato 960 de captura de imágenes de acuerdo con, por ejemplo, una señal de operación ingresada desde la interfaz 971 de usuario.
La interfaz 971 de usuario se conecta a la unidad 970 de control. La interfaz 971 de usuario incluye, por ejemplo, botones, conmutadores, etc., para permitir que el usuario opere el aparato 960 de captura de imágenes. La interfaz 971 de usuario detecta una operación del usuario mediante los componentes descritos anteriormente para generar una señal de operación, y produce la señal de operación generada en la unidad 970 de control.
En el aparato 960 de captura de imágenes que tiene la configuración descrita en lo anterior, la unidad 964 de procesamiento de imágenes tiene la función del dispositivo de codificación de imágenes y el dispositivo de descodificación de imágenes de acuerdo con las modalidades anteriores. En consecuencia, la eficiencia de procesamiento puede mejorarse cuando el aparato 960 de captura de imágenes codifica y descodifica una imagen. <8. Aplicaciones Ejemplares de Codificación Escalable> Primer sistema A continuación, un ejemplo especifico de uso de los datos codificados y escalables que se han codificado de manera escalable (jerárquicamente codificados) descritos anteriormente con referencia a la Figura 24 a la Figura 26 se describirá. La codificación escalable se utiliza, por ejemplo, para la selección de datos que transmitan, como en un ejemplo ilustrado en la Figura 32.
En un sistema 1000 de transmisión de datos ilustrado en la Figura 32, un servidor 1002 de distribución lee los datos codificados y escalables almacenados en una unidad 1001 de almacenamiento de datos codificados escalables, y distribuye los datos codificados escalables a los dispositivos de terminal, tales como una computadora 1004 personal, un dispositivo 1005 de AV, un dispositivo 1006 tipo Tablet, y un teléfono 1007 móvil, mediante una red 1003.
En este caso, el servidor 1002 de distribución selecciona datos codificados que tienen calidad deseable de acuerdo con el rendimiento del dispositivo de terminal, el entorno de comunicación, y similares, y transmite los datos codificados seleccionados. Incluso si el servidor 1002 de distribución transmite datos que tienen la calidad más alta de lo necesario, el dispositivo de terminal no siempre puede ser capaz de obtener una imagen de alta calidad, y puede provocarse retardo o desbordamiento. Además, tales datos pueden ocupar el ancho de banda de comunicación más de lo necesario, o pueden incrementar la carga en el dispositivo de terminal más de lo necesario. Por el contrario, incluso si el servidor 1002 de distribución transmite los datos que tienen la calidad más baja de lo necesario, el dispositivo de terminal puede no ser capaz de obtener una imagen con una calidad suficiente. Por lo tanto, el servidor 1002 de distribución lee los datos codificados escalables almacenados en la unidad 1001 de almacenamiento de datos codificados y escalables, si es necesario, como datos codificados que tiene la calidad adecuada para el rendimiento del dispositivo de terminal, entorno de comunicación, y similares, y transmite los datos codificados leídos.
Por ejemplo, se supone que la unidad 1001 de almacenamiento de datos codificados y escalables almacena los datos 1011 codificados y escalables (BL+EL) que se ha codificado de manera escalable. Los datos 1011 codificados y escalables (BL+EL) son datos codificados que incluyen una capa base y una capa de mejora, y son datos que se descodifican para obtener una imagen de la capa base y una imagen de la capa de mejora.
El servidor 1002 de distribución selecciona una capa adecuada de acuerdo con el rendimiento de un dispositivo de terminal que transmite datos, el entorno de comunicación, y similares, y lee los datos de la capa. Por ejemplo, el servidor 1002 de distribución lee los datos 1011 codificados y escalables (BL+EL) alta calidad de la unidad 1001 de almacenamiento de datos codificados y escalables, y transmite los datos 1011 codificados y escalables (BL+EL) a dispositivos que tienen altas capacidades de procesamiento, particularmente, , la computadora 1004 personal o el dispositivo 1006 tipo Tablet, como son. En contraste, por ejemplo, el servidor 1002 de distribución extrae los datos de la capa base de los datos 1011 codificados y escalables (BL+EL) , y transmite los datos extraídos de la capa base a los dispositivos que tienen bajas capacidades de procesamiento, particularmente, el dispositivo 1005 de AV y el teléfono 1007 móvil, como datos 1012 codificados escalables (BL) que tienen el mismo contenido que los datos 1011 codificados y escalables (BL+EL) , pero tienen menor calidad que los datos 1011 codificados y escalables (BL+EL) .
El uso de datos codificados escalables de esta manera facilita el ajuste de la cantidad de datos, suprimiendo de ese modo la aparición de retardo o desbordamiento y suprime un incremento innecesario de la carga en un dispositivo de terminal o un medio de comunicación. Además, los datos 1011 codificados y escalables (BL+EL) han reducido la redundancia entre las capas, y por lo tanto, tiene una menor cantidad de datos que los datos que tienen datos codificados de forma individual de las capas respectivas. En consecuencia, el área de almacenamiento de la unidad 1001 de almacenamiento de datos codificados y escalables puede utilizarse de manera más eficiente.
Tenga en cuenta que puesto que diversos dispositivos, tales como la computadora 1004 personal, el dispositivo 1005 de AV, el dispositivo 1006 tipo Tablet, y el teléfono 1007 móvil son aplicables como dispositivos de terminal, el rendimiento de hardware de los dispositivos de terminal difiere de dispositivo a dispositivo. Además, puesto que varias aplicaciones pueden ejecutarse por los dispositivos de terminal, las capacidades de software de las aplicaciones pueden variar. Además, la red 1003 que sirve como medio de comunicación puede implementarse como cualquier red de comunicación de linea que puede ser alámbrica, inalámbrica, o ambas, tal como Internet y una LAN (Red de Área Local) , y las capacidades de transmisión de datos varían. Tal rendimiento y capacidades pueden variar dependiendo de otra comunicación y similares.
En consecuencia, antes del comienzo de la transmisión de datos, el servidor 1002 de distribución puede comunicarse con un dispositivo de terminal al cual se transmitirán los datos, y puede obtener información con respecto a las capacidades del dispositivo de terminal, tal como el rendimiento de hardware del dispositivo de terminal o el rendimiento de aplicación (software) ejecutados por el dispositivo de terminal, y también información sobre el entorno de comunicación, tal como el ancho de banda disponible de la red 1003. Además, el servidor 1002 de distribución puede seleccionar una capa adecuada en función de la información obtenida.
Tenga en cuenta que una capa puede extraerse por un dispositivo de terminal. Por ejemplo, la computadora 1004 personal puede descodificar los datos 1011 codificados y escalables (BL+EL) transmitidos, y despliegan una imagen de una capa base o una imagen de una capa de mejora. Alternativamente, por ejemplo, la computadora 1004 personal puede extraer los datos 1012 codificados y escalables (BL) de la capa base a partir de los datos 1011 codificados y escalables (BL+EL) transmitidos, almacenar los datos 1012 codificados y escalables (BL) extraídos, transferir los datos 1012 codificados y escalables (BL) extraídos en otro dispositivo, o descodificar los datos 1012 codificados y escalables (BL) extraídos para desplegar una imagen de la capa base.
De manera rutinaria, el número de unidades 1001 de almacenamiento de datos codificados y escalables, el número de servidores 1002 de distribución, el número de redes 1003, y el número de dispositivos de terminal pueden ser arbitrarios. Además, aunque se ha dado una descripción de un ejemplo en el cual el servidor 1002 de distribución transmite los datos a un dispositivo de terminal, ejemplos de uso no se limitan a los mismos. El sistema 1000 de transmisión de datos puede utilizarse en cualquier sistema que selecciona y transmite una capa adecuada, cuando transmite datos codificados los cuales se han codificada de manera escalable en un dispositivo de terminal, de acuerdo con las capacidades del dispositivo de terminal, el entorno de comunicación, y similares .
Además, la presente tecnología también puede aplicarse al sistema 1000 de transmisión de datos ilustrado en la Figura 32 como se describe anteriormente en una manera similar a la aplicación en la codificación jerárquica y descodificación jerárquica descritas anteriormente con referencia a la Figura 24 a la Figura 26, de esta manera aprovechando las ventajas similares a las ventajas descritas anteriormente con referencia a la Figura 24 a la Figura 26.
Segundo sistema La codificación escalable también se utiliza, por ejemplo, como en un ejemplo ilustrado en la Figura 33, para transmitir mediante una pluralidad de medios de comunicación.
En un sistema 1100 de transmisión de datos ilustrado en la Figura 33, una estación 1101 de difusión transmite datos 1121 codificados y escalables (BL) de una capa base mediante la difusión 1111 terrestre. La estación 1101 de difusión además transmite (por ejemplo, empaqueta y transmite) los datos 1122 codificados y escalables (EL) de una capa de mejora mediante una red 1112 deseada formada de una red de comunicación la cual puede ser alámbrica, inalámbrica o ambas .
Un dispositivo 1102 de terminal tiene una función para recibir la difusión 1111 terrestre desde la estación 1101 de difusión, y recibe los datos 1121 escalables y codificados (BL) de la capa base transmitidos mediante la difusión 1111 terrestre. El dispositivo 1102 de terminal además tiene una función de comunicación para realizar la comunicación mediante la red 1112, y recibe los datos 1122 codificados y escalables (EL) de la capa de mejora transmitidos mediante la red 1112.
El dispositivo 1102 de terminal descodifica los datos 1121 codificados y escalables (BL) de la capa base adquiridos mediante la difusión 1111 terrestre de acuerdo con, por ejemplo, una instrucción de usuario o similar para obtener una imagen de la capa base, almacena los datos 1121 codificados y escalables (BL) , o transfiere los datos 1121 codificados y escalables (BL) a otro dispositivo.
Además, el dispositivo 1102 de terminal combina los datos 1121 codificados y escalables (BL) de la capa base adquiridos mediante la difusión 1111 terrestre con los datos 1122 codificados y escalables (EL) de la capa de mejora adquiridos mediante la red 1112 de acuerdo con, por ejemplo, una instrucción de usuario o similar para obtener datos codificados y escalables (BL+EL) , y descodifica los datos codificados y escalables (BL+EL) para obtener una imagen de la capa de mejora, almacena los datos escalables y codificados (BL+EL) , o transfiere los datos codificados y escalables (BL+EL) a otro dispositivo.
Como se describe anteriormente, los datos codificados y escalables pueden transmitirse mediante, por ejemplo, un medio de comunicación que es diferente de una capa a otra. Por lo tanto, la carga puede distribuirse, y puede impedirse que se produzca el retardo o desbordamiento.
Además, un medio de comunicación que se utiliza para la transmisión puede hacerse seleccionable para cada capa de acuerdo con la situación. Por ejemplo, los datos 1121 codificados y escalables (BL) de la capa base que tienen una cantidad relativamente grande de datos pueden transmitirse mediante un medio de comunicación que tiene una gran banda ancha, y los datos 1122 codificados y escalables (EL) de la capa de mejora que tienen una cantidad relativamente pequeña de datos pueden transmitirse, mediante un medio de comunicación que tiene un ancho de banda estrecho. Alternativamente, por ejemplo, el medio de comunicación mediante el cual los datos 1122 codificados y escalables (EL) de la capa de mejora se transmitirán pueden conmutarse entre la red 1112 y la difusión 1111 terrestre de acuerdo con el ancho de banda disponible de la red 1112. Por rutina, lo anterior se aplica de manera similar a los datos de una capa arbitraria.
El control en la forma descrita en lo anterior puede suprimir adicionalmente un incremento en la carga de transmisión de datos.
Por rutina, el número de capas es arbitrario, y el número de medios de comunicación que se utiliza para la transmisión también es arbitrario. Además, el número de dispositivos 1102 de terminal a los cuales se distribuirán los datos también es arbitrario. Además, aunque se ha dado una descripción en el contexto de difusión de la estación 1101 de difusión a manera ejemplo, los ejemplos de uso no se limitan a los mismos. El sistema 1100 de transmisión de datos puede aplicarse a cualquier sistema que divida los datos codificados que se han sometido a codificación escalable en una pluralidad de segmentos en unidades de capas y que transmite los segmentos de datos mediante una pluralidad de lineas .
Además, la presente tecnología también puede aplicarse al sistema 1100 de transmisión de datos ilustrado en la Figura 33 como se describe anteriormente en una manera similar a la aplicación en la codificación jerárquica y descodi icación jerárquica descritas anteriormente con referencia a la Figura 24 a la Figura 26, logrando de esta manera ventajas similares a las ventajas descritas anteriormente con referencia a la Figura 24 a la Figura 26.
Tercer sistema La codificación escalable también se utiliza, por ejemplo, como en un ejemplo ilustrado en la Figura 34, para almacenar los datos codificados.
En un sistema 1200 de captura de imágenes ilustrado en la Figura 34, un aparato 1201 de captura de imágenes realiza la codificación escalable en los datos de imagen obtenidos al capturar una imagen de un objeto 1211, y suministra los datos resultantes a un dispositivo 1202 de almacenamiento de datos codificados y escalables como datos 1221 codificados y escalables (BL+EL) .
El dispositivo 1202 de almacenamiento de datos codificados y escalables almacena los datos 1221 codificados y escalables (BL+EL) suministrados desde el aparato 1201 de captura de imágenes en la calidad que corresponde a la situación. Por ejemplo, en el tiempo normal, el dispositivo 1202 de almacenamiento de datos codificados y escalables extrae datos de una capa base de los datos 1221 codificados y escalables (BL+EL) , y almacena los datos extraídos de la capa base como datos 1222 codificados y escalables (BL) de la capa base que tiene una baja calidad y una pequeña cantidad de datos. En contraste, por ejemplo, en el tiempo de atención, el dispositivo 1202 de almacenamiento de datos codificados y escalables almacena los datos 1221 codificados y escalables (BL+EL) que tienen una alta calidad y una gran cantidad de datos, tal como son.
Por consiguiente, el dispositivo 1202 de almacenamiento de datos codificados y escalables puede guardar una imagen en alta calidad sólo cuando sea necesario.
Esto puede suprimir un incremento en la cantidad de datos, mientras que suprimir una reducción en el valor de la imagen debido a la reducción en la calidad, y puede mejorar la eficiencia de uso del área de almacenamiento.
Por ejemplo, se supone que el aparato 1201 de captura de imágenes es una cámara de seguridad. Si un objeto que va a controlarse (por ejemplo, intruso) no aparece en una imagen capturada (tiempo normal) , puede ser probable que la imagen capturada no tenga contenido importante. Por lo tanto, una reducción en la cantidad de datos tiene prioridad, y los datos de imagen (datos codificados y escalables) de la imagen se almacenan a baja calidad. En contraste, si un objeto que va a monitorearse aparece como el objeto 1211 en una imagen capturada (tiempo de atención) , puede ser probable que la imagen capturada tenga un contenido importante. Por lo tanto, la calidad de imagen tiene prioridad, y los datos de imagen (datos codificados y escalables) de la imagen se almacenan a alta calidad.
Tenga en cuenta que el tiempo normal o el tiempo de atención pueden determinarse, por ejemplo, mediante el dispositivo 1202 de almacenamiento de datos codificados y escalables al analizar una imagen. Alternativamente, el aparato 1201 de captura de imágenes puede determinar el tiempo normal o el tiempo de atención, y puede transmitir el resultado de determinación al dispositivo 1202 de almacenamiento de datos codificados y escalables.
Tenga en cuenta que la determinación del tiempo normal o el tiempo de atención puede basarse en un estándar arbitrario, y una imagen en la cual se basa la determinación puede tener cualquier contenido. Por rutina, condiciones distintas al contenido de una imagen, pueden utilizarse como el estándar de determinación. El estado puede cambiarse de acuerdo con, por ejemplo, la magnitud, la forma de onda, o similar del audio grabado, o puede cambiarse a intervalos de un periodo de tiempo predeterminado. Alternativamente, el estado puede cambiarse de acuerdo con una instrucción externa tal como una instrucción de usuario.
Además, aunque se ha dado una descripción de un ejemplo para cambiar entre dos estados, es decir, el tiempo normal y el tiempo de atención, el número de estados es arbitrario, y el cambio de estado puede hacerse entre más de dos estados, tal como tiempo normal, menos tiempo de atención, tiempo de atención, y mucho tiempo de atención. Tenga en cuenta que el número limite superior de los estados para que cambien depende del número de capas de datos codificados y escalables.
Además, el aparato 1201 de captura de imágenes puede configurarse para determinar el número de capas de codificación escalable de acuerdo con el estado. Por ejemplo, en el tiempo normal, el aparato 1201 de captura de imágenes puede generar datos 1222 codificados y escalables (BL) de la capa base que tienen una baja calidad y una pequeña cantidad de datos, y suministrar los datos 1222 codificados y escalables (BL) generados en el dispositivo 1202 de almacenamiento de datos codificados y escalables. Además, por ejemplo, en el tiempo de atención, el aparato 1201 de captura de imágenes puede generar datos 1221 codificados y escalables (BL+EL) generados de la capa base que tienen una alta calidad y una gran cantidad de datos, y suministrar los datos 1221 codificados y escalables (BL+EL) en el dispositivo 1202 de almacenamiento de datos codificados y escalables.
Aunque se ha descrito una cámara de seguridad como ejemplo, el sistema 1200 de captura de imágenes puede utilizarse en cualquier aplicación, y la aplicación no se limita a una cámara de seguridad.
Además, la presente tecnología también puede aplicarse al sistema 1200 de captura de imágenes ilustrado en la Figura 34 como se describe anteriormente en una manera similar a la aplicación en la codificación jerárquica y descodificación jerárquica descritas anteriormente con referencia a la Figura 24 a la Figura 26, logrando de esta manera ventajas similares a las ventajas descritas anteriormente con referencia a la Figura 24 a la Figura 26.
Tenga en cuenta que se ha descrito en la presente un ejemplo en el cual varias piezas de información, tales como parámetros del filtro de compensación adaptable se multiplexan en una corriente codificada y se transmiten desde el lado del codificador hasta el lado del descodificador . Sin embargo, la técnica para transmitir tales piezas de información no se limita a este ejemplo. Por ejemplo, estas piezas de información pueden transmitirse o grabarse como datos separados asociados con la corriente de bits codificada sin que se multiplexen en la corriente de bits codificada. El término "asociado", como se utiliza en la presente, significa que permite que una imagen (la cual puede ser parte de una imagen, tal como una sección o bloque) incluida en una corriente de bits se vincule con la información que corresponde a la imagen cuando se descodifica la imagen. Es decir, la información puede transmitirse en una trayectoria de transmisión diferente a la de la imagen (o corriente de bits) . Además, la información puede grabarse en un medio de grabación diferente a la de la imagen (o corriente de bits) (o grabarse en un área de grabación diferente del mismo medio de grabación) . Además, la información y la imagen (o corriente de bits) pueden asociarse entre si en unidades arbitrarias como una pluralidad de tramas, una trama, o una porción en una trama.
Aunque las modalidades preferidas de la presente descripción se han descrito en detalle con referencia a los dibujos anexos, la presente descripción no se limita a tales ejemplos. Es evidente que cualquier persona que tenga conocimiento ordinario en la campo de la técnica a la cual pertenece la presente descripción puede lograr varios cambios o modificaciones dentro del alcance de la idea técnica como se define en las REIVINDICACIONES, y se entenderá que tales cambios o modificación también pueden caer dentro del alcance técnico de la presente descripción.
Tenga en cuenta que la presente tecnología también puede proporcionar las siguientes configuraciones. (1) Un dispositivo de procesamiento de imágenes que incluye : una unidad de adquisición que adquiere los parámetros de un filtro de compensación adaptable en unidades de una unidad de codificación más grande de una corriente codificada en la cual los parámetros del filtro de compensación adaptable se establecen utilizando la unidad de codificación más grande como unidad de transmisión; una unidad de descodificación que realiza un proceso de descodificación en la corriente codificada y que genera una imagen; y una unidad de filtro de compensación adaptable que realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los parámetros adquiridos por la unidad de adquisición. (2) El dispositivo de procesamiento de imágenes de acuerdo con (1) anterior, en donde los parámetros del filtro de compensación adaptable incluyen un tipo del filtro de compensación adaptable y un valor de compensación. (3) El dispositivo de procesamiento de imágenes de acuerdo con (1) o (2) anteriores, que además comprende una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo en la imagen generada por la unidad de descodificación, en donde la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en una imagen en la cual la unidad de filtro de desbloqueo ha realizado la filtración de desbloqueo. (4) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (3) anteriores, en donde la unidad de adquisición adquiere, de la corriente codificada, datos de identificación que identifican un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición. (5) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (3) anteriores, en donde la unidad de adquisición adquiere, de la corriente codificada, datos de identificación que identifican si se utiliza o no un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición. (6) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (3) anteriores, en donde la unidad de adquisición adquiere, a partir de la corriente codificada, los datos de identificación que identifican si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable realiza la filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición. (7) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (3) anteriores, en donde la unidad de adquisición adquiere, de la corriente codificada, datos de identificación que especifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, dentro de las unidades de codificación más grandes previas en la cual la filtración de compensación adaptable se ha realizado antes de la unidad de codificación más grande actual, y la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los datos de identificación adquiridos por la unidad de adquisición. (8) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (7) anteriores, en donde los parámetros del filtro de compensación adaptable se transmiten al momento del inicio de una unidad de codificación más grande. (9) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (1) a (8) anteriores, en donde la unidad de descodificación realiza un proceso de descodificación en unidades cada una teniendo una estructura j erárquica . (10) Un método de procesamiento de imágenes que incluye : adquirir parámetros de un filtro de compensación adaptable en unidades de una unidad de codificación más grande de una corriente codificada en la cual los parámetros del filtro de compensación adaptable se establecen utilizando la unidad de codificación más grande como una unidad de transmisión; realizar un proceso de descodificación en la corriente codificada para generar una imagen; y realizar filtración de compensación adaptable en la imagen generada en unidades de una unidad de codificación más grande utilizando los parámetros adquiridos, en donde el método de procesamiento de imágenes se realiza mediante un dispositivo de procesamiento de imágenes. (11) Un dispositivo de procesamiento de imágenes que incluye: una unidad de establecimiento que establece los parámetros de un filtro de compensación adaptable utilizando una unidad de codificación más grande como una unidad de transmisión; un unidad de filtro de compensación adaptable que realiza la filtración adaptable en una imagen que se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos por la unidad de establecimiento; una unidad de codificación que realiza un proceso de codificación en una imagen en la cual la unidad de filtro de compensación adaptable ha realizado la filtración de compensación adaptable, y que genera una corriente codificada utilizando la imagen; y una unidad de transmisión que transmite los parámetros establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación. (12) El dispositivo de procesamiento de imágenes de acuerdo con (11) anterior, en donde los parámetros del filtro de compensación adaptable incluyen un tipo del filtro de compensación adaptable y un valor de compensación. (13) El dispositivo de procesamiento de imágenes de acuerdo con (11) o (12) anterior, que además incluye una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo en una imagen descodificada localmente , en donde la unidad de filtro de compensación adaptable realiza la filtración de compensación adaptable en una imagen en la cual la unidad de filtro de desbloqueo ha realizado la filtración de desbloqueo. (14) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (13) anteriores, en donde la unidad de establecimiento establece los datos de identificación que identifican un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación . (15) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (13) anteriores, en donde la unidad de establecimiento establece los datos de identificación que identifican si se utiliza o no un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación . (16) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (13) anteriores, en donde la unidad de establecimiento establece los datos de identificación que identifican si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación . (17) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (13) anteriores, en donde la unidad de establecimiento establece los datos de identificación que especifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, dentro de unidades de codificación más grandes previas en las cuales la filtración de compensación adaptable se ha realizado antes de la unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación . (18) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (17) anteriores, en donde la unidad de transmisión transmite los parámetros del filtro de compensación adaptable establecidos por la unidad de establecimiento al momento del inicio de una unidad de codificación más grande. (19) El dispositivo de procesamiento de imágenes de acuerdo con cualquiera de (11) a (18) anteriores, en donde la unidad de codificación realiza un proceso de codificación en unidades que cada una tiene una estructura j erárquica . (20) Un método de procesamiento de imágenes que incluye : establecer los parámetros de un filtro de compensación adaptable utilizando una unidad de codificación más grande como una unidad de transmisión; realizar la filtración de codificación adaptable en una imagen que se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos; realizar un proceso de codificación en una imagen en la cual la filtración de compensación adaptable se ha realizado, para generar una corriente codificada utilizando la imagen; y transmitir los parámetros establecidos y la corriente codificada generada, en donde el método de procesamiento de imágenes se realiza mediante un dispositivo de procesamiento de imágenes.
Lista de Signos de Referencia 11 dispositivo de codificación de imágenes, 26 unidad de codificación sin pérdidas, 31 filtro de desbloqueo, 41 filtro de compensación adaptable, 42 filtro de bucle adaptable, 51 dispositivo de descodificación de imágenes, 62 unidad de descodificación sin pérdidas, 66 filtro de desbloqueo, 81 filtro de compensación adaptable, 82 filtro de bucle adaptable, 211 unidad de determinación de tipo y compensación, 212 unidad de procesamiento de compensación, 213 memoria intermedia de imágenes, 214 unidad de lectura de coeficiente, 215 memoria intermedia de compensación, 215-1 memoria intermedia de EO, 215-2 memoria intermedia de BO, 216 unidad de establecimiento de parámetros, 217 unidad de escritura de coeficiente, 221 unidad de escritura de sintaxis, 251 unidad de lectura de sintaxis, 261 unidad de recepción de parámetros, 262 unidad de lectura de coeficiente, 263 memoria intermedia de compensación, 263-1 memoria intermedia de EO, 263-2 memoria intermedia de BO, 264 unidad de escritura de coeficiente, 265 unidad procesamiento de compensación, 266 memoria intermedia imágenes

Claims (20)

REIVINDICACIONES
1. Un dispositivo de procesamiento de imágenes caracterizado porque comprende: una unidad de descodificación que realiza un proceso de descodi icación en una corriente codificada en la cual se establecen los parámetros de un filtro de compensación adaptable al inicio de una unidad de codificación más grande utilizando la unidad de codificación más grande como una unidad de transmisión, y que genera una imagen; y una unidad de filtro de compensación adaptable que realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación, en unidades de una unidad de codificación más grande utilizando los parámetros del filtro de compensación adaptable establecido al inicio de la unidad de codificación más grande.
2. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque los parámetros del filtro de compensación adaptable incluyen un tipo del filtro de compensación adaptable y un valor de compensación.
3. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado además porque comprende una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo en la imagen generada por la unidad de descodificación, en donde la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable de una imagen en la cual la unidad de filtro de desbloqueo ha realizado la filtración de desbloqueo.
4. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación en unidades de una unidad de codificación más grande utilizando los datos de identificación que identifican un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual.
5. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación en unidades de una unidad de codificación más grande utilizando los datos de identificación que identifican si se utiliza o no un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual .
6. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de filtro de compensación adaptable realiza la filtración de compensación adaptable en la imagen generada por la unidad de descodificación en unidades de una unidad de codificación más grande a partir de datos de identificación de la identificación de si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual.
7. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable en la imagen generada por la unidad de descodificación en unidades de una unidad de codificación más grande utilizando los datos de identificación que identifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, desde dentro de las unidades de codificación más grandes previas en las cuales la filtración de compensación adaptable se ha realizado antes de la unidad de codificación más grande actual .
8. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque los parámetros del filtro de compensación adaptable se transmiten como la corriente codificada al inicio de una unidad de codificación más grande.
9. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 1, caracterizado porque la unidad de descodificación realiza un proceso de descodificación en unidades cada una teniendo una estructura j erárquica .
10. Un método de procesamiento de imágenes caracterizado porque comprende: realizar un proceso de descodificación en una corriente codificada en la cual los parámetros de un filtro de compensación adaptable se establecen al inicio de una unidad de codificación más grande utilizando la unidad de codificación más grande como una unidad de transmisión para generar una imagen; y realizar filtración de compensación adaptable en la imagen generada en unidades de una unidad de codificación más grande utilizando los parámetros del filtro de compensación adaptable establecido al principio de la unidad de codificación más grande, en donde el método de procesamiento de imágenes se realiza mediante un dispositivo de procesamiento de imágenes.
11. Un dispositivo de procesamiento de imágenes caracterizado porque comprende: una unidad de establecimiento que establece los parámetros de un filtro de compensación adaptable al inicio de una unidad de codificación más grande utilizando la unidad de codificación más grande como una unidad de transmisión; un unidad de filtro de compensación adaptable que realiza la filtración de compensación adaptable en una imagen que se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros del filtro de compensación adaptable establecidos por la unidad de establecimiento; una unidad de codificación que realiza un proceso de codificación en una imagen en la cual la unidad de filtro de compensación adaptable ha realizado la filtración de compensación adaptable, y que genera una corriente codificada utilizando la imagen; y una unidad de transmisión que transmite los parámetros del filtro de compensación adaptable establecidos al inicio de una unidad de codificación más grande por la unidad de establecimiento, como la corriente codificada generada por la unidad de codificación.
12. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque los parámetros del filtro de compensación adaptable incluyen un tipo de filtro de compensación adaptable y un valor de compensación.
13. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado además porque comprende una unidad de filtro de desbloqueo que realiza la filtración de desbloqueo en una imagen descodificada localmente, en donde la unidad de filtro de compensación adaptable realiza filtración de compensación adaptable de una imagen en la cual la unidad de filtro de desbloqueo ha realizado la filtración de desbloqueo.
14. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de establecimiento establece los datos de identificación que identifican un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual como siendo la misma que un parámetro de la unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación .
15. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de establecimiento establece los datos de identificación que identifican si se utiliza o no un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación .
16. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de establecimiento establece los datos de identificación que identifican si se utiliza o no una copia de un parámetro de una unidad de codificación más grande previa en la cual la filtración de compensación adaptable se ha realizado antes de una unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación .
17. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de establecimiento establece los datos de identificación que especifican una unidad de codificación más grande que es idéntica a una unidad de codificación más grande actual en términos de un parámetro, desde el interior de las unidades de codificación más grandes previas en las cuales la filtración de compensación adaptable se ha realizado antes de la unidad de codificación más grande actual, y la unidad de transmisión transmite los datos de identificación establecidos por la unidad de establecimiento y la corriente codificada generada por la unidad de codificación .
18. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de transmisión transmite los parámetros del filtro de compensación adaptable establecidos por la unidad de establecimiento, como la corriente codificada al inicio de una unidad de codificación más grande.
19. El dispositivo de procesamiento de imágenes de conformidad con la reivindicación 11, caracterizado porque la unidad de codificación realiza un proceso de codificación en unidades cada una teniendo una estructura RESUMEN DE LA INVENCION La presente descripción se refiere a un dispositivo y método de procesamiento de imágenes que hacen posible mejorar la eficiencia del procesamiento en codificación y descodificación. El tipo EO en una LCU (115) y un coeficiente de la misma se determinan por el lado de codificación. El coeficiente tipo EO se envia al lado de descodificación cuando el coeficiente ya se encuentra en LCU (III), y se almacena en una memoria intermedia de EO de un filtro de compensación adaptable en el lado de descodificación. Por lo tanto, con respecto a la LCU (115) en el lado de descodificación, el coeficiente tipo EO puede copiarse de la memoria intermedia de EO y utilizarse sin que se envié. De esta manera, el parámetro del filtro de compensación adaptable que se transfirió de manera convencional de proceso simple en el encabezado de una trama se envia secuencialmente en el encabezado de la LCU para cada LCU. La presente descripción puede aplicarse, por ejemplo, a un dispositivo de procesamiento de imágenes. jerárquica .
20. Un método de procesamiento de imágenes caracterizado porque comprende: establecer los parámetros de un filtro de compensación adaptable al inicio de una unidad de codificación más grande utilizando la unidad de codificación más grande como una unidad de transmisión; realizar filtración de compensación adaptable en una imagen la cual se ha sometido a un proceso de descodificación local en un caso en donde se codifica una imagen, en unidades de una unidad de codificación más grande utilizando los parámetros establecidos del filtro de compensación adaptable; realizar un proceso de codificación en una imagen en la cual la filtración de compensación adaptable se ha realizado, para generar una corriente codificada utilizando la imagen; y transmitir los parámetros del filtro de compensación adaptable establecidos al inicio de una unidad de codificación más grande, como la corriente codificada generada, en donde el método de procesamiento de imágenes se realiza mediante un dispositivo de procesamiento de imágenes.
MX2014007974A 2012-01-06 2012-12-21 Dispositivo y método de procesamiento de imágenes. MX346508B (es)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012001559 2012-01-06
JP2012146416A JP2014197723A (ja) 2012-01-06 2012-06-29 画像処理装置および方法
PCT/JP2012/083285 WO2013103101A1 (ja) 2012-01-06 2012-12-21 画像処理装置および方法

Publications (2)

Publication Number Publication Date
MX2014007974A true MX2014007974A (es) 2014-08-21
MX346508B MX346508B (es) 2017-03-23

Family

ID=48745163

Family Applications (3)

Application Number Title Priority Date Filing Date
MX2017003178A MX368338B (es) 2012-01-06 2012-12-21 Dispositivo y método de procesamiento de imágenes.
MX2014007974A MX346508B (es) 2012-01-06 2012-12-21 Dispositivo y método de procesamiento de imágenes.
MX2015008142A MX346282B (es) 2012-01-06 2012-12-21 Dispositivo y metodo de procesamiento de imagenes.

Family Applications Before (1)

Application Number Title Priority Date Filing Date
MX2017003178A MX368338B (es) 2012-01-06 2012-12-21 Dispositivo y método de procesamiento de imágenes.

Family Applications After (1)

Application Number Title Priority Date Filing Date
MX2015008142A MX346282B (es) 2012-01-06 2012-12-21 Dispositivo y metodo de procesamiento de imagenes.

Country Status (14)

Country Link
US (3) US10567805B2 (es)
EP (2) EP3595310B1 (es)
JP (5) JP2014197723A (es)
KR (2) KR102117147B1 (es)
CN (2) CN104025597B (es)
AU (1) AU2012364058B2 (es)
BR (2) BR112014016116B1 (es)
CA (2) CA3128226C (es)
IN (1) IN2015DN02942A (es)
MX (3) MX368338B (es)
MY (2) MY168575A (es)
RU (2) RU2604339C2 (es)
TW (3) TWI536808B (es)
WO (1) WO2013103101A1 (es)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014197723A (ja) 2012-01-06 2014-10-16 ソニー株式会社 画像処理装置および方法
TWI595776B (zh) 2012-06-27 2017-08-11 Sony Corp Image processing device and method
US20140348222A1 (en) * 2013-05-23 2014-11-27 Mediatek Inc. Method of Sample Adaptive Offset Processing for Video Coding and Inter-Layer Scalable Coding
CN117640952A (zh) 2018-05-23 2024-03-01 松下电器（美国）知识产权公司 解码装置和编码装置
CN108765341B (zh) * 2018-05-29 2022-06-21 郑州云海信息技术有限公司 一种图像处理的方法及其装置
US10284432B1 (en) * 2018-07-03 2019-05-07 Kabushiki Kaisha Ubitus Method for enhancing quality of media transmitted via network
WO2020007489A1 (en) 2018-07-06 2020-01-09 Huawei Technologies Co., Ltd. A picture encoder, a picture decoder and corresponding methods
CN112422969A (zh) * 2020-10-20 2021-02-26 西安万像电子科技有限公司 一种图像编解码方法及装置

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1978748B1 (en) * 2001-11-29 2014-04-16 Panasonic Corporation Coding distortion removal method
US7751484B2 (en) * 2005-04-27 2010-07-06 Lsi Corporation Method for composite video artifacts reduction
CN100438629C (zh) * 2005-09-19 2008-11-26 华为技术有限公司 图像编码处理中的环路滤波方法
JPWO2009001793A1 (ja) * 2007-06-26 2010-08-26 株式会社東芝 画像符号化と画像復号化の方法及び装置
TW200948092A (en) * 2008-03-07 2009-11-16 Toshiba Kk Dynamic image encoding/decoding method and device
US9143803B2 (en) 2009-01-15 2015-09-22 Qualcomm Incorporated Filter prediction based on activity metrics in video coding
EP2262267A1 (en) * 2009-06-10 2010-12-15 Panasonic Corporation Filter coefficient coding scheme for video coding
KR20110017719A (ko) * 2009-08-14 2011-02-22 삼성전자주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
EP2524504A1 (en) * 2010-01-14 2012-11-21 Dolby Laboratories Licensing Corporation Buffered adaptive filters
US8660174B2 (en) * 2010-06-15 2014-02-25 Mediatek Inc. Apparatus and method of adaptive offset for video coding
CN103369320B (zh) 2010-06-04 2016-06-22 索尼公司 图像处理设备和方法
US9819966B2 (en) * 2010-09-01 2017-11-14 Qualcomm Incorporated Filter description signaling for multi-filter adaptive filtering
US20120134425A1 (en) * 2010-11-29 2012-05-31 Faouzi Kossentini Method and System for Adaptive Interpolation in Digital Video Coding
US9161041B2 (en) * 2011-01-09 2015-10-13 Mediatek Inc. Apparatus and method of efficient sample adaptive offset
US9001883B2 (en) * 2011-02-16 2015-04-07 Mediatek Inc Method and apparatus for slice common information sharing
JP6327435B2 (ja) * 2011-03-03 2018-05-23 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置、及び、画像復号装置
JP5763210B2 (ja) * 2011-04-21 2015-08-12 メディアテック インコーポレイテッド 改良されたループ型フィルタリング処理のための方法と装置
KR101567467B1 (ko) * 2011-05-10 2015-11-09 미디어텍 인크. 루프내 필터 버퍼의 감소를 위한 방법 및 장치
US9008170B2 (en) * 2011-05-10 2015-04-14 Qualcomm Incorporated Offset type and coefficients signaling method for sample adaptive offset
US20120294353A1 (en) * 2011-05-16 2012-11-22 Mediatek Inc. Apparatus and Method of Sample Adaptive Offset for Luma and Chroma Components
US9277228B2 (en) * 2011-07-18 2016-03-01 Qualcomm Incorporated Adaptation parameter sets for video coding
US9641866B2 (en) * 2011-08-18 2017-05-02 Qualcomm Incorporated Applying partition-based filters
US9344743B2 (en) * 2011-08-24 2016-05-17 Texas Instruments Incorporated Flexible region based sample adaptive offset (SAO) and adaptive loop filter (ALF)
US10070152B2 (en) * 2011-08-24 2018-09-04 Texas Instruments Incorporated Sample adaptive offset (SAO) parameter signaling
WO2013053324A1 (en) * 2011-10-14 2013-04-18 Mediatek Inc. Method and apparatus for loop filtering
CN103843350A (zh) * 2011-10-14 2014-06-04 联发科技股份有限公司 回路滤波方法及其装置
US9386305B2 (en) * 2011-11-28 2016-07-05 Qualcomm Incorporated Largest coding unit (LCU) or partition-based syntax for adaptive loop filter and sample adaptive offset in video coding
SG11201403069SA (en) * 2011-12-22 2014-08-28 Samsung Electronics Co Ltd Video encoding method using offset adjustment according to classification of pixels by maximum encoding units and apparatus thereof, and video decoding method and apparatus thereof
JP2014197723A (ja) 2012-01-06 2014-10-16 ソニー株式会社 画像処理装置および方法
PT2822276T (pt) * 2012-02-29 2018-12-18 Lg Electronics Inc Processo de predição inter-camadas e dispositivo que o utiliza
JP5965958B2 (ja) 2014-10-21 2016-08-10 株式会社三共 遊技機および遊技枠

Also Published As

Publication number Publication date
MX368338B (es) 2019-09-30
AU2012364058B2 (en) 2017-03-02
TW201635789A (zh) 2016-10-01
TW201724851A (zh) 2017-07-01
EP3595310A1 (en) 2020-01-15
EP2802145B1 (en) 2019-11-27
TWI592009B (zh) 2017-07-11
TWI536808B (zh) 2016-06-01
US10567805B2 (en) 2020-02-18
RU2604339C2 (ru) 2016-12-10
CA3128226C (en) 2023-01-17
US11601685B2 (en) 2023-03-07
EP3595310B1 (en) 2021-07-28
MX346508B (es) 2017-03-23
KR20170128609A (ko) 2017-11-22
CA2857237C (en) 2021-10-12
KR102117147B1 (ko) 2020-05-29
KR102111175B1 (ko) 2020-05-14
MY193388A (en) 2022-10-11
JP6282237B2 (ja) 2018-02-21
MY168575A (en) 2018-11-14
TWI629893B (zh) 2018-07-11
JP2017127008A (ja) 2017-07-20
WO2013103101A1 (ja) 2013-07-11
KR20140117367A (ko) 2014-10-07
BR112014016116A2 (pt) 2017-06-13
JP2014197723A (ja) 2014-10-16
CN104539964A (zh) 2015-04-22
CA3128226A1 (en) 2013-07-11
JP2019198123A (ja) 2019-11-14
RU2015101983A (ru) 2015-05-10
CA2857237A1 (en) 2013-07-11
EP2802145A4 (en) 2015-12-16
CN104025597A (zh) 2014-09-03
IN2015DN02942A (es) 2015-09-18
BR122015001060B1 (pt) 2022-04-26
JP2015122788A (ja) 2015-07-02
BR112014016116A8 (pt) 2017-07-04
AU2012364058A1 (en) 2014-06-26
US20230055659A1 (en) 2023-02-23
EP2802145A1 (en) 2014-11-12
TW201342923A (zh) 2013-10-16
JPWO2013103101A1 (ja) 2015-05-11
MX346282B (es) 2017-03-14
CN104025597B (zh) 2019-07-26
CN104539964B (zh) 2018-08-21
BR122015001060A2 (pt) 2019-08-20
BR112014016116B1 (pt) 2022-04-19
US20200077121A1 (en) 2020-03-05
JP6624462B2 (ja) 2019-12-25
US20140314159A1 (en) 2014-10-23
RU2600537C1 (ru) 2016-10-20
JP6282117B2 (ja) 2018-02-21

Similar Documents

Publication Publication Date Title
JP6299889B2 (ja) 画像処理装置および方法、記録媒体、並びに、プログラム
US11601685B2 (en) Image processing device and method using adaptive offset filter in units of largest coding unit
WO2013172074A1 (ja) 画像処理装置及び画像処理方法
WO2014156708A1 (ja) 画像復号装置および方法
AU2015255161B2 (en) Image Processing Device and Method
WO2013105458A1 (ja) 画像処理装置および方法

Legal Events

Date Code Title Description
FG Grant or registration