BR122015001053A2 - Dispositivo e método de processamento de imagem - Google Patents

Dispositivo e método de processamento de imagem Download PDF

Info

Publication number
BR122015001053A2
BR122015001053A2 BR122015001053-5A BR122015001053A BR122015001053A2 BR 122015001053 A2 BR122015001053 A2 BR 122015001053A2 BR 122015001053 A BR122015001053 A BR 122015001053A BR 122015001053 A2 BR122015001053 A2 BR 122015001053A2
Authority
BR
Brazil
Prior art keywords
filter
unit
filtering
image
block
Prior art date
Application number
BR122015001053-5A
Other languages
English (en)
Other versions
BR122015001053B1 (pt
Inventor
Ikeda Masaru
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=47423858&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=BR122015001053(A2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Sony Corporation filed Critical Sony Corporation
Publication of BR122015001053A2 publication Critical patent/BR122015001053A2/pt
Publication of BR122015001053B1 publication Critical patent/BR122015001053B1/pt

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Picture Signal Circuits (AREA)

Abstract

1/1 resumo “dispositivo e mã‰todo de processamento de imagem” a tecnologia presente refere-se a um dispositivo de processamento de imagem e um mã©todo de processamento de imagem pelos 5 quais filtragem pode ser executada apropriadamente em um processo de antibloqueio convencional. um pixel (p0 ) que ã© 255 (linha sã³lida) antes de i um processo de antibloqueio muda grandemente depois de um processo de antibloqueio convencional, se tornando 159 (linha pontilhada). portanto, um processo de clipping com um valor de clipping de 10 ã© executado em 10 filtragem forte, e por meio de que, o valor do pixel (p0 ) que ã© 255 (linha i sã³lida) antes do processo de antibloqueio se torna 245 (linha grossa), e a mudanã§a grande convencional em valores de pixel pode ser reduzida a um mã­nimo. a descriã§ã£o pode ser aplicada a, por exemplo, um dispositivo de processamento de imagem.

Description

(54) Título: DISPOSITIVO E MÉTODO DE PROCESSAMENTO DE IMAGEM (51) Int. Cl.: H04N 19/117 (52) CPC: H04N 19/117 (30) Prioridade Unionista: 01/11/2011 JP 2011240550, 01/11/2011 JP 2011-24055007/11/2011 JP 2011-243839, 01/11/2011 JP 201124055007/11/2011 JP 2011-24383919/01/2012 JP 2012-009326, 01/11/2011 JP 201124055007/11/2011 JP 2011-24383919/01/2012 JP 2012-00932628/06/2011 JP 2011-143461 (73) Titular(es): SONY CORPORATION (72) Inventor(es): MASARU IKEDA (74) Procurador(es): KASZNAR LEONARDOS PROPRIEDADE INTELECTUAL (86) Pedido Internacional: PCT JP2012063606 de 28/05/2012 (87) Publicação Internacional: WO
2013/001957 de 03/01/2013 (57) Resumo: 1/1 RESUMO âDISPOSITIVO E MÃTODO DE PROCESSAMENTO DE IMAGEMâ A tecnologia presente refere-se a um dispositivo de processamento de imagem e um método de processamento de imagem pelos 5 quais filtragem pode ser executada apropriadamente em um processo de antibloqueio convencional. Um pixel (pO) que é 255 (linha sÃ3lida) antes de i um processo de antibloqueio muda grandemente depois de um processo de antibloqueio convencional, se tornando 159 (linha pontilhada). Portanto, um processo de clipping com um valor de clipping de 10 é executado em 10 filtragem forte, e por meio de que, o valor do pixel (pO) que é 255 (linha i sÃ3lida) antes do processo de antibloqueio se toma 245 (linha grossa), e a mudança grande convencional em valores de pixel pode ser reduzida a um mÃ-nimo. A descrição pode ser aplicada a, por exemplo, um dispositivo de processamento de imagem.
0 0 0 0 0 0 0 0 0 O O 0
! I ã
1/122 “DISPOSITIVO E MÉTODO DE PROCESSAMENTO DE IMAGEM”
Dividido do BR112013033183-6, depositado em 28/05/2012 CAMPO TÉCNICO [001] Esta técnica refere-se a um dispositivo de processamento de imagem e um método de processamento de imagem. Especificamente, esta técnica permite a um de processo de filtragem de antibloqueio aplicar filtragem apropriadamente.
FUNDAMENTOS DA TÉCNICA [002] Em recentes anos, dispositivos que operam informação de imagem tais como dados digitais que, em tal caso, visam transmitir e armazenar informação com uma alta eficiência, e que se conformam a um esquema, tal como MPEG2 (Organização Internacional para Padronização e Comissão de Eletrotécnica Internacional (ISO/IEC) 13818-2), para comprimir informação de imagem usando transformação ortogonal, tal como transformação de cosseno discreta, e usar compensação de movimento utilizando redundância que é única à informação de imagem ficaram difundidos em ambas, distribuição de informação em estações de radiodifusão e recepção de informação em casas ordinárias. Além disso, esquemas chamados H.264 e MPEG4 Parte 10 (Codificação de Vídeo Avançada (AVC)) que requerem uma quantidade maior de operação para codificação e decodificação, mas podem realizar uma eficiência de codificação mais alta do que MPEG2 ou similar também foram usados. Adicionalmente, hoje em dia, trabalhos de padronização para codificação de vídeo de alta eficiência (HEVC)m que é um esquema de codificação de imagem de próxima geração, estão em desenvolvimento tal que compressão, distribuição, ou similar de imagens de alta resolução de 4000 x 2000 pixels, que quatro vezes aquela de imagens de alta visualização, possa ser executada eficazmente.
[003] Nos trabalhos de padronização para codificação de vídeo de alta eficiência (HEVC) que é um esquema de codificação de imagem de
2/122 próxima geração, JCTVC-A119 (veja Documento Não Patente 1 abaixo) propõe aplicar um filtro de antibloqueio a cada bloco tendo o tamanho de 8 x 8 pixels ou maior. No método proposto em JCTVC-A119, aumentando um tamanho de bloco de unidade mínima ao qual um filtro de antibloqueio é para ser aplicado, é possível executar um processo de filtragem em paralelo em uma pluralidade de limites de bloco na mesma direção dentro de um macrobloco.
LISTA DE CITAÇÃO
DOCUMENTO QUE NÃO SEJA PATENTE [004] Documento que não é Patente 1: K. Ugur (Nokia), K. R.
Andersson (LM Ericsson), A. Fuldseth (Tandberg Telecom), JCTVC-A119: Video coding technology proposal by Tandberg, Nokia, e Ericsson, Documentos do primeiro encontro da Equipe Colaboradora Conjunta sobre Codificação de Vídeo (JCT-VC), Dresden, Alemanha, 15-23 de abril de 2010. SUMÁRIO DA INVENÇÃO
PROBLEMAS A SEREM RESOLVIDOS PELA INVENÇÃO [005] Porém, no processo de filtragem de antibloqueio convencional, filtragem não é executada apropriadamente.
[006] Portanto, um objetivo desta técnica é permitir a um processo de filtragem de antibloqueio aplicar filtragem apropriadamente.
SOLUÇÕES PARA OS PROBLEMAS [007] Um dispositivo de processamento de imagem de acordo com um primeiro aspecto desta técnica inclui: uma unidade de decodificação que decodifica um fluxo codificado, codificado em unidades cada uma tendo uma estrutura de camada para gerar uma imagem; uma unidade de filtragem que aplica um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco da imagem gerada pela unidade de decodificação e um bloco adjacente, adjacente ao bloco; e um controlador que controla a unidade
3/122 de filtragem tal que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem gerada pela unidade de decodificação.
[008] O controlador pode aplicar o processo de clipping a valores de partes que mudam quando o filtro de antibloqueio é aplicado.
[009] O controlador aplica o processo de clipping de acordo com as expressões seguintes:
Fórmula Matemática 37 pOj = ρΟ,+CI ip(_pv)_(pv)((p2i+2*p1i-6*p0i+2*q0i+q1i+4)»3):
q0i = q0i+Clip(_pv)_(pv)((p1j+2*p0i-6*q0i+2*q1j+q2i+4)»3):
pi i = plj+CI iP(_pv)_(pv)((p2j-3*p1 i+pOi+qOi+2)»2):
ql i = q1 j+Cli p(_pv)_(pv) ((pOj+qOj—3*q1 i+q2i+2)»2):
p2j = p2j+CI iP(_pv)_(pv)((2*p2i-5*p2i+p1i+p0i+q0i+4)»3);
q2, = q2j+CI ip(_pv)_(pv)((pOi+qOi-i-p1 i-5*q2i+2*q3i+4)»3); onde i = 0, 7 e pv é um valor de clipping.
[0010] O controlador pode fixar um valor que é múltiplo inteiro de parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
[0011] O controlador pode fixar um valor que é duas vezes os parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
[0012] O dispositivo de processamento de imagem adicionalmente inclui: uma unidade determinadora de intensidade de filtro que determina a intensidade do filtro de antibloqueio aplicado ao limite de bloco, e a unidade de filtragem pode aplicar o filtro de antibloqueio ao limite de bloco de acordo com a intensidade determinada pela unidade determinadora de intensidade de filtro, e o controlador pode controlar a unidade de filtragem de forma que,
4/122 quando a unidade determinadora de intensidade de filtro determina que filtragem forte seja para ser aplicada, um processo de clipping seja aplicado ao filtro de antibloqueio com relação aos componentes de luminância da imagem gerada pela unidade de decodificação.
[0013] A unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio usando uma pluralidade de linhas coma unidades de processamento.
[0014] A unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio usando quatro linhas como as unidades de processamento.
[0015] O dispositivo de processamento de imagem adicionalmente inclui: uma unidade determinadora de necessidade de filtragem que determina se o filtro de antibloqueio é para ser aplicado ao limite de bloco usando uma pluralidade de linhas coma unidades de processamento, e a unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio quando a unidade determinadora de necessidade de filtragem determina que o filtro de antibloqueio é para ser aplicado.
[0016] Um método de processamento de imagem de acordo com o primeiro aspecto desta técnica permite a um dispositivo de processamento de imagem executar: decodificar um fluxo codificado, codificado em unidades cada uma tendo uma estrutura de camada para gerar uma imagem; aplicar um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco da imagem gerada e um bloco adjacente, adjacente ao bloco; e controlar de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem gerada. [0017] Um dispositivo de processamento de imagem de acordo com um segundo aspecto desta técnica inclui: uma unidade de filtragem que aplica
5/122 um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco de uma imagem decodificada localmente quando uma imagem é codificada e um bloco adjacente, adjacente ao bloco; um controlador que controla a unidade de filtragem tal que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem decodificada localmente; e uma unidade de codificação que codifica a imagem em unidades cada uma tendo uma estrutura de camada usando uma imagem à qual o filtro de antibloqueio é aplicado.
[0018] O controlador pode aplicar o processo de clipping a valores de partes que mudam quando o filtro de antibloqueio é aplicado.
[0019] O controlador aplica o processo de clipping de acordo com as expressões seguintes:
Fórmula Matemática 38 pOj = pOj+CI ip(„pv)m(pv)((p2i+2*p1i-6’íep0i+23íeq0i+q1i+4)»3);
q0i = q0i+ClípFpv)Hpv)((p1i+2*p0i-6Mi+2*q1i+q2i+4)»3);
p1i = plj+GI ip(_pv)_(pv)((p2j-3*pl j+pOj+qOi+2)»2);
q1 s = qlj+GI ip(_pv)_(pv)((pOj+qOi-3*q1i+q2j+2)»2);
p2| = p2j +GI Íp(_pv)_(pv)((2*p2j-5*p2j+p1 j+p0j+q0i+4)»3);
q2j = q2j +GI ip(_pv)_(pv)((pOj+qOj+p1; —5*q2|+2*q3|+4)»3); onde i = 0, 7 e pv é um valor de clipping.
[0020] O controlador pode fixar um valor que é múltiplo inteiro de parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
[0021] O controlador pode fixar um valor que é duas vezes os
6/122 parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
[0022] O dispositivo de processamento de imagem adicionalmente inclui: uma unidade determinadora de intensidade de filtro que determina a intensidade do filtro de antibloqueio aplicado ao limite de bloco, e a unidade de filtragem pode aplicar o filtro de antibloqueio ao limite de bloco de acordo com a intensidade determinada pela unidade determinadora de intensidade de filtro, e o controlador pode controlar a unidade de filtragem de forma que, quando a unidade determinadora de intensidade de filtro determina que filtragem forte é para ser aplicada, um processo de clipping seja aplicado ao filtro de antibloqueio com relação aos componentes de luminância da imagem gerada pela unidade de decodificação.
[0023] A unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio usando uma pluralidade de linhas coma unidades de processamento.
[0024] A unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio usando quatro linhas como as unidades de processamento.
[0025] O dispositivo de processamento de imagem adicionalmente inclui: uma unidade determinadora de necessidade de filtragem que determina se o filtro de antibloqueio é para ser aplicado ao limite de bloco usando uma pluralidade de linhas coma unidades de processamento, e a unidade determinadora de intensidade de filtro pode determinar a intensidade do filtro de antibloqueio quando a unidade determinadora de necessidade de filtragem determina que o filtro de antibloqueio é para ser aplicado.
[0026] Um método de processamento de imagem de acordo com o segundo aspecto desta técnica permite a um dispositivo de processamento de imagem executar: aplicar um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco
7/122 que é um limite entre um bloco de uma imagem decodificada localmente quando uma imagem é codificada e um bloco adjacente, adjacente ao bloco; controlar de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem decodificada localmente; e codificar a imagem em unidades cada uma tendo uma estrutura de camada usando uma imagem à qual o filtro de antibloqueio é aplicado.
[0027] Em um primeiro aspecto da técnica presente, um fluxo codificado, codificado em unidades cada uma tendo uma estrutura de camada é decodificado para gerar uma imagem; e um filtro de antibloqueio é aplicado a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco, que é um limite entre um bloco da imagem gerada e um bloco adjacente, adjacente ao bloco. Além disso, controle é executado de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem gerada. [0028] Em um segundo aspecto da técnica presente, um filtro de antibloqueio é aplicado a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco de uma imagem decodificada localmente quando uma imagem é codificada e um bloco adjacente, adjacente ao bloco. Além disso, controle é executado de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem decodificada localmente; e a imagem é codificada em unidades cada uma tendo uma estrutura de camada usando uma imagem à qual o filtro de antibloqueio é aplicado.
EFEITOS DA INVENÇÃO [0029] De acordo com esta técnica, é possível permitir a um processo
8/122 de filtragem de antibloqueio aplicar filtragem apropriadamente.
DESCRIÇÃO BREVE DOS DESENHOS
Figuras 1(A) e 1(B) são diagramas para descrever um processo de filtragem de antibloqueio convencional.
Figura 2 é um diagrama ilustrando uma configuração quando aplicada a um dispositivo de codificação de imagem.
Figura 3 é um fluxograma ilustrando uma operação de
codificação de imagem.
Figura 4 X é um fluxograma ilustrando um processo de
intrapredição.
Figura 5 X é um fluxograma ilustrando um processo de
interpredição.
Figura 6 é um diagrama ilustrando uma configuração quando aplicada a um dispositivo de decodificação de imagem.
Figura 7 é um fluxograma ilustrando uma operação de decodificação de imagem.
Figura 8 é um diagrama para descrever uma operação básica de uma unidade de filtragem de antibloqueio.
Figura 9 é um diagrama ilustrando a configuração de uma primeira concretização da unidade de filtragem de antibloqueio.
Figura 10 é um fluxograma ilustrando a operação da primeira concretização da unidade de filtragem de antibloqueio.
Figura 11 é um diagrama ilustrando a configuração de uma unidade de operação de filtro.
Figura 12 é um diagrama ilustrando a configuração da unidade de operação de filtro.
Figuras 13(A) e 13(B) são diagramas para descrever a operação da unidade de operação de filtro.
Figuras 14(A) e 14(B) são diagramas para descrever a
9/122 operação da unidade de operação de filtro.
Figura 15 é um fluxograma ilustrando a operação de uma quinta concretização.
Figura 16 é um diagrama para descrever um processo de filtragem de antibloqueio convencional.
Figura 17 é um diagrama para descrever a técnica presente (sexta concretização).
Figura 18 é um diagrama para descrever a técnica presente (sexta concretização).
Figura 19 é um diagrama ilustrando pixels usados no processo de filtragem de antibloqueio da técnica presente.
Figura 20 é um diagrama para descrever valores de pixel que mudam devido à filtragem forte convencional.
Figura 21 é um diagrama para descrever os efeitos de filtragem forte baseada em clipping.
Figura 22 é um diagrama ilustrando a configuração de uma sexta concretização da unidade de filtragem de antibloqueio.
Figura 23 é um fluxograma ilustrando a operação da sexta concretização da unidade de filtragem de antibloqueio.
Figura 24 é um diagrama ilustrando a configuração de uma sétima concretização da unidade de filtragem de antibloqueio.
Figura 25 é um diagrama ilustrando a configuração de uma oitava concretização da unidade de filtragem de antibloqueio.
Figura 26 é um fluxograma ilustrando a operação da oitava concretização da unidade de filtragem de antibloqueio.
Figura 27 é um fluxograma para descrever um processo de antibloqueio de sinal de luminância.
Figura 28 é um diagrama para descrever um exemplo do caso de R3W2.
10/122
Figura 29 é um diagrama ilustrando um exemplo de um esquema de codificação de imagem de multivisualização.
Figura 30 é um diagrama ilustrando um exemplo de componentes principais de um dispositivo de codificação de imagem de multivisualização ao qual a técnica presente é aplicada.
Figura 31 é um diagrama ilustrando um exemplo de componentes principais de um dispositivo de decodificação de imagem de multivisualização ao qual a técnica presente é aplicada.
Figura 32 é um diagrama ilustrando um exemplo de um esquema de codificação de imagem de camada.
Figura 33 é um diagrama ilustrando um exemplo de componentes principais de um dispositivo de codificação de imagem de camada ao qual a técnica presente é aplicada.
Figura 34 é um diagrama ilustrando um exemplo de componentes principais de um dispositivo de decodificação de imagem de camada ao qual a técnica presente é aplicada.
Figura 35 é um diagrama ilustrando um exemplo de uma configuração esquemática de um aparelho de televisualização.
Figura 36 é um diagrama ilustrando um exemplo de uma configuração esquemática de um telefone móvel.
Figura 37 é um diagrama ilustrando um exemplo de uma configuração esquemática de um dispositivo de gravação/reprodução.
Figura 38 é um diagrama ilustrando um exemplo de uma configuração esquemática de um dispositivo de criação de imagem.
MODO PARA EXECUTAR A INVENÇÃO [0030] Em seguida, modos para executar a técnica presente serão descritos. A descrição será dada na ordem seguinte:
1. Técnica convencional
2. Configuração quando aplicada ao dispositivo de codificação
11/122 de imagem
3. Operação de dispositivo de codificação de imagem
4. Configuração quando aplicada ao dispositivo de decodificação de imagem
5. Operação de dispositivo de decodificação de imagem
6. Operação básica de unidade de filtragem de antibloqueio
7. Primeira concretização de unidade de filtragem de
antibloqueio 8. Segunda concretização de unidade de filtragem de
antibloqueio 9. Terceira concretização de unidade de filtragem de
antibloqueio 10. Quarta concretização de unidade de filtragem de
antibloqueio 11. Quinta concretização de unidade de filtragem de
antibloqueio 12. Descrição de sexta a oitava concretizações 13. Sexta concretização de unidade de filtragem de
antibloqueio 14. Sétima concretização de unidade de filtragem de
antibloqueio 15. Oitava concretização de unidade de filtragem de
antibloqueio 16. Nona concretização 17. Décima concretização (dispositivo de codificação e
decodificação de imagem de multivisualização)
18. Décima primeira concretização (dispositivo de codificação e decodificação de imagem de camada)
19. Exemplo de aplicação
12/122
1. Técnica convencional [0031] Um processo de filtragem de antibloqueio convencional será descrito com referência às Figuras 1(A) e 1(B).
[0032] Como ilustrado na Figura 1(A), por exemplo, quando um processo de filtragem de antibloqueio é executado em uma ordem de raster em unidades de codificação maiores respectivas (LCUs), dados de imagem correspondendo a um número predeterminado de linhas de um limite interbloco BB, de LCUu que é um bloco superior são armazenados em uma memória de linha, e um processo de filtragem vertical é executado usando os dados de imagem e dados de imagem de LCU1 que é um bloco inferior obtido depois do armazenamento. Por exemplo, como ilustrado na Figura 1(B), quando operação de filtro é executada usando dados de imagem correspondendo a quatro linhas do limite BB enquanto usando dados de imagem dos blocos superior e inferior cada um correspondendo a três linhas do limite interbloco BB como uma faixa de processamento do processo de filtragem vertical, dados de imagem correspondendo a quatro linhas do limite BB, de LCUu que é o bloco superior, são armazenados na memória de linha. Nos desenhos, pixels visados do filtro de antibloqueio são descritos por círculos duplos, e os limites superior e inferior da faixa de processo de filtro do filtro de antibloqueio são indicados por DBU e DBL, respectivamente. [0033] Desta maneira, desde que dados de imagem correspondendo a um número predeterminado de linhas do limite interbloco BB são armazenados na memória de linha de modo a serem usados para a operação de filtro, se o número de pixels na direção horizontal aumentar, a capacidade de memória da memória de linha aumenta.
2. Configuração quando aplicada a dispositivo de codificação de imagem [0034] Figura 2 ilustra uma configuração quando o dispositivo de processamento de imagem da técnica presente é aplicado a um dispositivo de codificação de imagem. Um dispositivo de codificação de imagem 10 inclui
13/122 um conversor analógico/digital (conversor A/D) 11, uma 12, um subtrator 13, um transformador ortogonal 14, um quantizador 15, um codificador sem perda 16, uma memória temporária de acumulação 17 e um controlador de taxa 18. O dispositivo de codificação de imagem 10 adicionalmente inclui um quantizador inverso 21, um transformador inverso ortogonal 22, um somador 23, uma unidade de filtragem de antibloqueio 24, uma memória de quadro 25, um seletor 26, um intrapreditor 31, um estimador/compensador de movimento e uma unidade de seleção de imagem predita/modo ótimo 33.
[0035] O conversor A/D 11 converte um sinal de imagem analógico em dados de imagem digitais e produz os dados de imagem digitais para a memória temporária de reordenação de quadro 12.
[0036] A memória temporária de reordenação de quadro 12 reordena os quadros dos dados de imagem produzidos do conversor A/D 11. A memória temporária de reordenação de quadro 12 executa a reordenação de quadro de acordo com uma estrutura de GOP (grupo de quadros) relacionada a um processo de codificação e produz os dados de imagem reordenados para o subtrator 13, o intrapreditor 31 e o estimador/compensador de movimento 32.
[0037] O subtrator 13 é provido com os dados de imagem produzidos da memória temporária de reordenação de quadro 12 e dados de imagem preditos selecionados pela unidade de seleção de imagem predita/modo ótimo descrita posteriormente. O subtrator 13 calcula dados de erro de predição que são uma diferença entre os dados de imagem produzidos da memória temporária de reordenação de quadro 12 e os dados de imagem preditos providos da unidade de seleção de imagem predita/modo ótimo 33 e produz os dados de erro de predição para o transformador ortogonal 14.
[0038] O transformador ortogonal 14 executa um processo de transformada ortogonal tal como transformada de cosseno discreta (DCT) ou transformada de Karhunen-Loeve com relação aos dados de erro de predição produzidos do subtrator 13. O transformador ortogonal 14 produz dados de
14/122 coeficiente de transformada obtidos executando o processo de transformada ortogonal ao quantizador 15.
[0039] O quantizador 15 é provido com os dados de coeficiente de transformada produzidos do transformador ortogonal 14 e um sinal de controle de taxa do controlador de taxa 18 descrito mais tarde. O quantizador 15 quantiza os dados de coeficiente de transformada e produz os dados quantizados para o codificador sem perda 16 e o quantizador inverso 21. Além disso, o quantizador 15 troca um parâmetro de quantização (escala de quantização) baseado no sinal de controle de taxa do controlador de taxa 18 para mudar a taxa de bit dos dados quantizados.
[0040] O codificador sem perda 16 é provido com os dados quantizados produzidos do quantizador 15 e informação de modo de predição do intrapreditor 31, do estimador/compensador de movimento 32, e da unidade de seleção de imagem predita/modo ótimo 33 descrita mais tarde. A informação de modo de predição inclui um tipo de macrobloco que permite a um tamanho de bloco predito ser identificado, um modo de predição, informação de vetor de movimento, informação de quadro de referência, e similar de acordo com intrapredição ou interpredição. O codificador sem perda 16 executa um processo de codificação sem perda tal como, por exemplo, codificação de comprimento variável ou codificação aritmética nos dados quantizados para gerar um fluxo codificado e produz o fluxo codificado para a memória temporária de acumulação 17. Além disso, o codificador sem perda 16 codifica por modo sem perda a informação de modo de predição para adicionar a informação de modo de predição codificada à informação de cabeçalho do fluxo codificado.
[0041] A memória temporária de acumulação 17 acumula os fluxos codificados do codificador sem perda 16. Além disso, a memória temporária de acumulação 17 produz os fluxos codificados acumulados a uma taxa de transferência correspondendo a uma linha de transmissão.
15/122 [0042] O controlador de taxa 18 monitora um espaço livre da memória temporária de acumulação 17, gera um sinal de controle de taxa de acordo com o espaço livre, e produz o sinal de controle de taxa para o quantizador 15. O controlador de taxa 18 adquire informação indicando o espaço livre da memória temporária de acumulação 17, por exemplo. O controlador de taxa 18 diminui taxa de bit dos dados quantizados usando o sinal de controle de taxa quando o espaço livre diminui. Além disso, o controlador de taxa 18 aumenta a taxa de bit dos dados quantizados usando o sinal de controle de taxa quando o espaço livre da memória temporária de acumulação 17 é suficientemente grande.
[0043] O quantizador inverso 21 executa um processo de quantização inversa nos dados quantizados providos do quantizador 15. O quantizador inverso 21 produz dados de coeficiente de transformada obtidos executando o processo de quantização inversa no transformador ortogonal inverso 22.
[0044] O transformador ortogonal inverso 22 produz dados obtidos executando um processo de transformada ortogonal nos dados de coeficiente de transformada providos do quantizador inverso 21 ao somador 23.
[0045] O somador 23 soma os dados providos do transformador ortogonal inverso 22 e os dados de imagem predita providos da unidade de seleção de imagem predita/modo ótimo 33 para gerar dados de imagem decodificados e produz os dados de imagem decodificados para a unidade de filtragem de antibloqueio 24 e a memória de quadro 25.
[0046] A unidade de filtragem de antibloqueio 24 executa um processo de filtragem para reduzir distorção de bloco ocorrendo durante codificação de imagem. A unidade de filtragem de antibloqueio 24 executa um processo de filtragem para remover distorção de bloco dos dados de imagem decodificados providos do somador 23 e produz os dados de imagem tendo sido sujeitos ao processo de filtragem à memória de quadro 25. Além disso, a unidade de filtragem de antibloqueio 24 controla uma faixa de
16/122 imagem usada para uma operação de filtro em um bloco posicionado no lado superior de um limite de acordo com um limite detectado executando detecção de limite interbloco em uma direção vertical. Desta maneira, controlando a faixa de imagem usada para operação de filtro, a unidade de filtragem de antibloqueio 24 permite a um processo de filtragem vertical ser executado até mesmo quando uma capacidade de memória da memória de linha que armazena dados de imagem é reduzida. Os detalhes disso serão descritos mais tarde.
[0047] A memória de quadro 25 mantém os dados de imagem decodificados providos do somador 23 e os dados de imagem decodificados tendo sido sujeitos ao processo de filtragem, providos da unidade de filtragem de antibloqueio 24 como dados de imagem de uma imagem de referência. [0048] O seletor 26 provê os dados de imagem de referência antes do processo de filtragem, lidos da memória de quadro 25 para o intrapreditor 31 a fim de executar intrapredição. Além disso, o seletor 26 provê os dados de imagem de referência tendo sido sujeitos ao processo de filtragem, lidos da memória de quadro 25 para o estimador/compensador de movimento 32 para executar interpredição.
[0049] O intrapreditor 31 executa um processo de intrapredição em todos os modos de intrapredição de candidato usando os dados de imagem de uma imagem visada de codificação produzida da memória temporária de reordenação de quadro 12 e os dados de imagem de referência antes do processo de filtragem, lidos da memória de quadro 25. Adicionalmente, o intrapreditor 31 calcula um valor de função de custo para cada modo de intrapredição e seleciona um modo de intrapredição no qual o valor de função de custo calculado é o menor (isto é, um modo de intrapredição no qual melhor eficiência de codificação é obtida) como um modo ótimo de intrapredição. O intrapreditor 31 produz dados de imagem preditos gerados no modo ótimo de intrapredição, a informação de modo de predição sobre o
17/122 modo ótimo de intrapredição, e um valor de função de custo no modo ótimo de intrapredição para a unidade de seleção de imagem predita/modo ótimo 33. Além disso, o intrapreditor 31 produz a informação de modo de predição sobre o modo de intrapredição no processo de intrapredição nos modos de intrapredição respectivos para o codificador sem perda 16 a fim de obter uma quantidade de código gerada usada no cálculo do valor de função de custo como descrito mais tarde.
[0050] O estimador/compensador de movimento 32 executa um processo de estimação/compensação de movimento em todos os tamanhos de bloco preditos correspondendo a macroblocos. O estimador/compensador de movimento 32 detecta um vetor de movimento usando os dados de imagem de referência tendo sido sujeitos ao processo de filtragem, lidos da memória de quadro 25 com relação a cada uma das imagens visadas de codificação dos tamanhos de bloco preditos respectivos, lidos da memória temporária de reordenação de quadro 12. Adicionalmente, o estimador/compensador de movimento 32 executa um processo de compensação de movimento na imagem decodificada baseado no vetor de movimento detectado para gerar uma imagem predita. Além disso, o estimador/compensador de movimento 32 calcula um valor de função de custo por cada tamanho de bloco predito e seleciona um tamanho de bloco predito no qual o valor de função de custo calculado é o menor (isto é, um tamanho de bloco predito no qual a melhor eficiência de codificação é obtida) como um modo ótimo de interpredição. O estimador/compensador de movimento 32 produz os dados de imagem preditos gerados no modo ótimo de interpredição, a informação de modo de predição sobre o modo ótimo de interpredição, e o valor de função de custo no modo ótimo de interpredição para a unidade de seleção de imagem predita/modo ótimo 33. Além disso, o estimador/compensador de movimento 32 produz a informação de modo de predição sobre o modo de interpredição no processo de interpredição nos tamanhos de bloco predito respectivo ao
18/122 codificador sem perda 16 a fim de obter uma quantidade de código gerada usada no cálculo do valor de função de custo. O estimador/compensador de movimento 32 também executa a predição em um modo de macrobloco saltado e um modo direto como o modo de interpredição.
[0051] A unidade de seleção de imagem predita/modo ótimo 33 compara o valor de função de custo provido do intrapreditor 31 e o valor de função de custo provido do estimador/compensador de movimento 32 em unidades de macrobloco respectivas e seleciona um modo no qual o valor de função de custo é o menor como um modo ótimo no qual a melhor eficiência de codificação é obtida. Além disso, a unidade de seleção de imagem predita/modo ótimo 33 produz dados de imagem predita gerados no modo ótimo ao subtrator 13 e ao somador 23. Adicionalmente, a unidade de seleção de imagem predita/modo ótimo 33 produz a informação de modo de predição do modo ótimo para o codificador sem perda 16. A unidade de seleção de imagem predita/modo ótimo 33 pode executar a intrapredição ou a interpredição em unidades de parte respectivas.
[0052] Uma unidade de codificação nas reivindicações inclui o intrapreditor 31 que gera dados de imagem predita, o estimador/compensador de movimento 32, a unidade de seleção de imagem predita/modo ótimo 33, o subtrator 13, o transformador ortogonal 14, o quantizador 15, o codificador sem perda 16, e similar.
3. Operação de dispositivo de codificação de imagem [0053] Figura 3 é um fluxograma ilustrando a operação de um processo de codificação de imagem. Na etapa ST11, o conversor A/D 11 executa conversão A/D em um sinal de imagem de entrada.
[0054] Na etapa ST12, a memória temporária de reordenação de quadro 12 executa ordenação de tela. A memória temporária de reordenação de quadro 12 armazena os dados de imagem providos do conversor A/D 11 e reordena os quadros respectivos de forma que os quadros arranjados na ordem
19/122 de exibição sejam reordenados na ordem de codificação.
[0055] Na etapa ST13, o subtrator 13 gera dados de erro de predição.
O subtrator 13 calcula uma diferença entre os dados de imagem das imagens reordenadas na etapa ST12 e os dados de imagem predita selecionados pela unidade de seleção de modo de imagem predita/modo ótimo 33 para gerar dados de erro de predição. Os dados de erro de predição têm uma quantidade de dados que é menor que aquela dos dados de imagem originais. Assim, é possível comprimir a quantidade de dados quando comparada quando a imagem é codificada como está. Quando a unidade de seleção de modo de imagem predita/modo ótimo 33 seleciona a imagem predita provida do intrapreditor 31 e a imagem predita do estimador/compensador de movimento 32 em unidades de parte respectivas, a intrapredição é executada na parte no qual a imagem predita provida do intrapreditor 31 é selecionada. Além disso, a interpredição é executada na parte no qual a imagem predita do estimador/compensador de movimento 32 é selecionada.
[0056] Na etapa ST14, o transformador ortogonal 14 executa um processo de transformada ortogonal. O transformador ortogonal 14 executa transformada ortogonal nos dados de erro de predição providos do subtrator 13. Especificamente, transformada ortogonal tal como transformada de cosseno discreta ou transformada de Karhunen-Loeve é executada nos dados de erro de predição, e dados de coeficiente de transformada são produzidos. [0057] Na etapa ST15, o quantizador 15 executa um processo de quantização. O quantizador 15 quantiza os dados de coeficiente de transformada. Quando a quantização é executada, controle de taxa é executado como será descrito no processo da etapa ST25.
[0058] Na etapa ST16, o quantizador inverso 21 executa um processo de quantização inversa. O quantizador inverso 21 executa quantização inversa no dados de coeficiente de transformada quantizados pelo quantizador 15 de acordo com uma propriedade correspondendo à propriedade do quantizador 15.
20/122 [0059] Na etapa ST17, o transformador ortogonal inverso 22 executa um processo de transformada ortogonal. O transformador ortogonal inverso 22 executa transformada ortogonal inversa nos dados de coeficiente de transformada quantizados inversamente pelo quantizador inverso 21 de acordo com uma propriedade correspondendo à propriedade do transformador ortogonal 14.
[0060] Na etapa ST18, o somador 23 gera dados de imagem decodificados. O somador 23 adiciona os dados de imagem predita providos da unidade de seleção de modo de imagem predita/modo ótimo 33 e os dados depois da transformada ortogonal inversa na posição correspondendo à imagem predita para gerar dados de imagem decodificados.
[0061] Na etapa ST19, a unidade de filtragem de antibloqueio 24 executa um processo de filtragem de antibloqueio. A unidade de filtragem de antibloqueio 24 executa filtragem nos dados de imagem decodificados produzidos do somador 23 para remover distorção de bloco. Além disso, a unidade de filtragem de antibloqueio 24 é configurada para executar um processo de filtragem vertical até mesmo quando a capacidade de memória da memória de linha que armazena os dados de imagem é reduzida. Especificamente, a unidade de filtragem de antibloqueio 24 controla a faixa de imagem usada para uma operação de filtro em um bloco posicionado no lado superior de um limite de acordo com um limite detectado executando detecção de limite interbloco na direção vertical.
[0062] Na etapa ST20, a memória de quadro 25 armazena dados de imagem decodificados. A memória de quadro 25 armazena os dados de imagem decodificados antes do processo de filtragem de antibloqueio.
[0063] Na etapa ST21, o intrapreditor 31 e o estimador/compensador de movimento 32 executam processos de predição. Isto é, o intrapreditor 31 executa um processo de intrapredição no modo de intrapredição e o estimador/compensador de movimento 32 executa um processo de
21/122 estimação/compensação de movimento no modo de interpredição. Por este processo, os processos de predição são executados em todos os modos de predição de candidato, e os valores de função de custo em todos os modos de predição de candidato são calculados. O modo ótimo de intrapredição e o modo ótimo de interpredição são selecionados baseado nos valores de função de custo calculados, e a imagem predita gerada no modo de predição selecionado e a função de custo e a informação de modo de predição são providas à unidade de seleção de imagem predita/modo ótimo 33.
[0064] Na etapa ST22, a unidade de seleção de imagem predita/modo ótimo 33 seleciona dados de imagem preditos. A unidade de seleção de imagem predita/modo ótimo 33 determina um modo ótimo no qual a melhor eficiência de codificação é obtida com base nos valores de função de custo respectivos produzidos do intrapreditor 31 e do estimador/compensador de movimento 32. Adicionalmente, a unidade de seleção de imagem predita/modo ótimo 33 seleciona os dados de imagem preditos no dado modo ótimo e provê os dados de imagem preditos para o subtrator 13 e o somador 23. A imagem predita é usada para a operação nas etapas ST13 e ST18 como descrito acima.
[0065] Na etapa ST23, o codificador sem perda 16 executa um processo de codificação sem perda. O codificador sem perda 16 executa codificação sem perda nos dados quantizados produzidos do quantizador 15. Isto é, codificação sem perda tal como codificação de comprimento variável ou codificação aritmética é executada nos dados quantizados, por meio de que os dados quantizados são comprimidos. Neste caso, na etapa ST22 descrita acima, a informação de modo de predição (por exemplo, incluindo o tipo de macrobloco, o modo de predição, a informação de vetor de movimento, a informação de quadro de referência, e similar) entrada ao codificador sem perda 16 também é sujeita à codificação sem perda. Adicionalmente, dados de codificação sem perda da informação de modo de predição são adicionados à
22/122 informação de cabeçalho do fluxo codificado gerado codificando por modo sem perda os dados quantizados.
[0066] Na etapa ST24, a memória temporária de acumulação 17 executa um processo de acumulação para acumular o fluxo codificado. O fluxo codificado acumulado na memória temporária de acumulação 17 é lido apropriadamente e é transmitido para um lado de decodificação por uma linha de transmissão.
[0067] Na etapa ST25, o controlador de taxa 18 executa controle de taxa. O controlador de taxa 18 controla a taxa da operação de quantização do quantizador 15 de forma que um transbordamento ou uma subutilização não ocorra na memória temporária de acumulação 17 quando a memória temporária de acumulação 17 acumula o fluxo codificado.
[0068] A seguir, o processo de predição na etapa ST21 da Figura 3 será descrito. O intrapreditor 31 executa um processo de intrapredição. O intrapreditor 31 executa intrapredição na imagem de um bloco atual em todos os modos de intrapredição de candidato. Os dados de imagem de uma imagem de referência referenciada na intrapredição não são sujeitos ao processo de filtragem da unidade de filtragem de antibloqueio 24, mas os dados de imagem de referência armazenados na memória de quadro 25 são usados. Embora os detalhes do processo de intrapredição sejam descritos mais tarde, por este processo, intrapredição é executada em todos os modos de intrapredição de candidato, e os valores de função de custo em todos os modos de intrapredição de candidato são calculados. Além disso, um modo de intrapredição no qual a melhor eficiência de codificação é obtida é selecionado de todos os modos de intrapredição baseado nos valores de função de custo calculados. O estimador/compensador de movimento 32 executa um processo de interpredição. O estimador/compensador de movimento 32 executa um processo de interpredição em todos os modos de interpredição de candidato (todos os tamanhos de bloco predito) usando os
23/122 dados de imagem de referência tendo sido sujeitos ao processo de filtragem, armazenados na memória de quadro 25. Embora os detalhes do processo de interpredição sejam descritos mais tarde, por este processo, o processo de predição é executado em todos os modos de interpredição de candidato, e os valores de função de custo em todos os modos de interpredição de candidato são calculados. Além disso, um modo de interpredição no qual a melhor eficiência de codificação é obtida é selecionado de todos os modos de interpredição baseado nos valores de função de custo calculados.
[0069] O processo de intrapredição será descrito com referência ao fluxograma da Figura 4. Na etapa ST31, o intrapreditor 31 executa intrapredição nos modos de predição respectivos. O intrapreditor 31 gera dados de imagem predita em cada modo de intrapredição usando os dados de imagem decodificados antes do processo de filtragem, armazenados na memória de quadro 25.
[0070] Na etapa ST32, o intrapreditor 31 calcula os valores de função de custo dos modos de predição respectivos. Por exemplo, o processo de codificação sem perda é executado por tentativas em todos os modos de predição de candidato, o valor de função de custo expresso por Expressão (1) abaixo é calculado nos modos de predição respectivos.
Cost(Mode e Ω) = D + λ/R ··· (1) [0071] Aqui, Ω representa um conjunto universal de modos de predição de candidato para codificar blocos e macroblocos. D representa energia diferencial (distorção) entre uma imagem decodificada e uma imagem de entrada quando codificação é executada em um modo de predição. R representa uma quantidade de código gerada incluindo coeficientes de transformada ortogonal, informação de modo de predição, e similar, e λ'' representa o multiplicador de Lagrange dado como uma função de um parâmetro de quantização QP.
[0072] Além disso, com relação a todos os modos de predição de
24/122 candidato, as imagens preditas são geradas e bits de cabeçalho tal como informação de vetor de movimento e informação de modo de predição são calculados, e o valor de função de custo expresso por Expressão (2) abaixo é calculado nos modos de predição respectivos.
Οοβό/ΜοάθΕΩ) = D + QPtoQuant(QP)-Header_Bit ··· (2) [0073] Aqui, Ω representa um conjunto universal de modos de predição de candidato para codificar blocos e macroblocos. D representa energia diferencial (distorção) entre uma imagem decodificada e uma imagem de entrada quando codificação é executada em um modo de predição. Header_Bit é uma parte de cabeçalho de um modo de predição, e QPtoQuant é uma função dada como uma função de um parâmetro de quantização QP.
[0074] Na etapa ST33, o intrapreditor 31 determina um modo ótimo de intrapredição. O intrapreditor 31 seleciona um modo de intrapredição no qual o valor de função de custo calculado é o menor baseado nos valores de função de custo calculados na etapa ST32 e determina o modo de intrapredição como o modo ótimo de intrapredição.
[0075] A seguir, o processo de interpredição será descrito com referência ao fluxograma da Figura 5. Na etapa ST41, o estimador/compensador de movimento 32 determina um vetor de movimento e uma imagem de referência nos modos de predição respectivos. Isto é, o estimador/compensador de movimento 32 determina o vetor de movimento e a imagem de referência de um bloco atual dos modos de predição respectivos. [0076] Na etapa ST42, o estimador/compensador de movimento 32 executa compensação de movimento nos modos de predição respectivos. O estimador/compensador de movimento 32 executa compensação de movimento na imagem de referência baseado no vetor de movimento determinado na etapa ST41 nos modos de predição respectivos (tamanho de bloco predito respectivo) e gera dados de imagem predita nos modos de
25/122 predição respectivos.
[0077] Na etapa ST43, o estimador/compensador de movimento 32 gera informação de vetor de movimento nos modos de predição respectivos. O estimador/compensador de movimento 32 gera informação de vetor de movimento incluída no fluxo codificado com relação aos vetores de movimento determinados nos modos de predição respectivos. Por exemplo, um vetor de movimento predito é determinado usando predição mediana e informação de vetor de movimento indicando uma diferença entre o vetor de movimento detectado por estimação de movimento e o vetor de movimento predito é gerado. A informação de vetor de movimento gerada desta maneira também é usada no cálculo do valor de função de custo na próxima etapa ST44, e quando a imagem predita correspondente é selecionada finalmente pela unidade de seleção de imagem predita/modo ótimo 33, a informação de vetor de movimento é incluída na informação de modo de predição e produzida ao codificador sem perda 16.
[0078] Na etapa ST44, o estimador/compensador de movimento 32 calcula o valor de função de custo nos modos de interpredição respectivos. O estimador/compensador de movimento 32 calcula o valor de função de custo usando a Expressão (1) ou (2) descritas acima.
[0079] Na etapa ST45, o estimador/compensador de movimento 32 determina um modo ótimo de interpredição. O estimador/compensador de movimento 32 seleciona um modo de predição no qual o valor de função de custo calculado é o menor baseado nos valores de função de custo calculados na etapa ST44.
4. Configuração quando aplicada ao dispositivo de decodificação de imagem [0080] O fluxo codificado gerado codificando uma imagem de entrada é provido a um dispositivo de decodificação de imagem por uma linha de transmissão predeterminada, um meio de gravação, ou similar e é decodificado.
26/122 [0081] Figura 6 ilustra a configuração de um dispositivo de decodificação de imagem. Um dispositivo de decodificação de imagem 50 inclui uma memória temporária de acumulação 51, um decodificador sem perda 52, um quantizador inverso 53, um transformador ortogonal inverso 54, um somador 55, uma unidade de filtragem de antibloqueio 56, uma memória temporária de reordenação de quadro 57 e um conversor D/A 58. O dispositivo de decodificação de imagem 50 adicionalmente inclui uma memória de quadro 61, seletores 62 e 65, um intrapreditor 63 e uma unidade compensação de movimento 64.
[0082] A memória temporária de acumulação 51 acumula fluxos codificados transmitidos a ela. O decodificador sem perda 52 decodifica os fluxos codificados providos da memória temporária de acumulação 51 de acordo com um esquema correspondendo ao esquema de codificação do codificador sem perda 16 da Figura 2. Além disso, o decodificador sem perda 52 produz informação de modo de predição obtida decodificando a informação de cabeçalho dos fluxos codificados ao intrapreditor 63 e à unidade de compensação de movimento 64.
[0083] O quantizador inverso 53 executa quantização inversa nos dados quantizados decodificados pelo decodificador sem perda 52 de acordo com um esquema correspondendo ao esquema de quantização do quantizador 15 da Figura 2. O transformador ortogonal inverso 54 executa transformada ortogonal inversa na saída do quantizador inverso 53 de acordo com um esquema correspondendo ao esquema de transformada ortogonal do transformador ortogonal 14 da Figura 2 e produz a saída para o somador 55. [0084] O somador 55 soma os dados depois da transformada ortogonal inversa e os dados de imagem preditos providos do seletor 65 para gerar dados de imagem decodificados e produz os dados de imagem decodificados para a unidade de filtragem de antibloqueio 56 e a memória de quadro 61.
[0085] A unidade de filtragem de antibloqueio 56 executa um
27/122 processo de filtragem nos dados de imagem decodificados providos semelhantemente do somador 55 à unidade de filtragem de antibloqueio 24 da Figura 2 para remover distorção de bloco e produz os dados de imagem decodificados para a memória temporária de reordenação de quadro 57 e a memória de quadro 61.
[0086] A memória temporária de reordenação de quadro 57 executa ordenação de tela. Isto é, os quadros reordenados da ordem de codificação usada na memória temporária de reordenação de quadro 12 da Figura 2 são reordenados na ordem de exibição original e são produzidos ao conversor D/A 58.
[0087] O conversor D/A 58 executa conversão D/A nos dados de imagem providos da memória temporária de reordenação de quadro 57 e produz os dados de imagem para uma exibição (não ilustrada) por esse meio para exibir imagens.
[0088] A memória de quadro 61 mantém os dados de imagem decodificada antes do processo de filtragem, providos do somador 55 e os dados de imagem decodificada tendo sido sujeitos ao processo de filtragem, providos da unidade de filtragem de antibloqueio 56 como dados de imagem de uma imagem de referência.
[0089] O seletor 62 provê os dados de imagem de referência antes do processo de filtragem, lidos da memória de quadro 61 para o intrapreditor 63 quando um bloco predito tendo sido sujeito à intrapredição é decodificado baseado na informação de modo de predição provida do decodificador sem perda 52. Além disso, o seletor 26 provê os dados de imagem de referência tendo sido sujeitos ao processo de filtragem, lidos memória de quadro 61 para a unidade de compensação de movimento 64 quando um bloco predito tendo sido sujeito à interpredição é decodificado baseado na informação de modo de predição provida do decodificador sem perda 52.
[0090] O intrapreditor 63 gera imagens preditas baseado na
28/122 informação de modo de predição provida do decodificador sem perda 52 e produz os dados de imagem preditos gerados para o seletor 65.
[0091] A unidade de compensação de movimento 64 executa compensação de movimento baseado na informação de modo de predição provida do decodificador sem perda 52 para gerar dados de imagem predita e produz os dados de imagem predita para o seletor 65. Isto é, a unidade de compensação de movimento 64 executa compensação de movimento usando um vetor de movimento baseado na informação de vetor de movimento com relação à imagem de referência indicada pela informação de quadro de referência baseado na informação de vetor de movimento e na informação de quadro de referência incluída na informação de modo de predição para gerar dados de imagem predita.
[0092] O seletor 65 provê os dados de imagem predita gerados pelo intrapreditor 63 para o somador 55. Além disso, o seletor 65 provê os dados de imagem predita gerados pela unidade de compensação de movimento 64 para o somador 55.
[0093] Uma unidade de decodificação nas reivindicações inclui o decodificador sem perda 52, o quantizador inverso 53, o transformador ortogonal inverso 54, o somador 55, o intrapreditor 63, a unidade de compensação de movimento 64, e similar.
5. Operação de dispositivo de decodificação de imagem [0094] A seguir, um dispositivo de processamento de imagem executado pelo dispositivo de decodificação de imagem 50 será descrito com referência ao fluxograma da Figura 7.
[0095] Na etapa ST51, a memória temporária de acumulação 51 acumula fluxos codificados transferidos a ela. Na etapa ST52, o decodificador sem perda 52 executa um processo de decodificação sem perda. O decodificador sem perda 52 decodifica os fluxos codificados providos da memória temporária de acumulação 51. Isto é, os dados quantizados dos
29/122 quadros respectivos codificados pelo codificador sem perda 16 da Figura 2 são obtidos. Além disso, o decodificador sem perda 52 executa decodificação sem perda na informação de modo de predição incluída na informação de cabeçalho do fluxo codificado para obter informação de modo de predição e provê a informação de modo de predição para a unidade de filtragem de antibloqueio 56 e os seletores 62 e 65. Adicionalmente, o decodificador sem perda 52 produz a informação de modo de predição para o intrapreditor 63 quando a informação de modo de predição é informação sobre o modo de intrapredição. Além disso, o decodificador sem perda 52 produz a informação de modo de predição para a unidade de compensação de movimento 64 quando a informação de modo de predição é informação sobre o modo de interpredição.
[0096] Na etapa ST53, o quantizador inverso 53 executa um processo de quantização inversa. O quantizador inverso 53 executa quantização inversa nos dados quantizados decodificados pelo decodificador sem perda 52 de acordo com uma propriedade correspondendo à propriedade do quantizador 15 da Figura 2. [0097] Na etapa ST54, o transformador ortogonal inverso 54 executa um processo de transformada ortogonal. O transformador ortogonal inverso 54 executa transformada ortogonal inversa nos dados de coeficiente de transformada quantizados inversamente pelo quantizador inverso 53 de acordo com uma propriedade correspondendo à propriedade do transformador ortogonal 14 da Figura 2.
[0098] Na etapa ST55, o somador 55 gera dados de imagem decodificados. O somador 55 soma os dados obtidos executando o processo de transformada ortogonal e os dados de imagem preditos selecionados na etapa ST59 descritos para gerar os dados de imagem decodificados mais tarde. Desta maneira, a imagem original é decodificada.
[0099] Na etapa ST56, a unidade de filtragem de antibloqueio 56 executa um processo de filtragem de antibloqueio. A unidade de filtragem de antibloqueio 56 executa um processo de filtragem nos dados de imagem
30/122 decodificados produzidos pelo somador 55 para remover distorção de bloco incluída na imagem decodificada.
[00100] Na etapa ST57, a memória de quadro 61 armazena os dados de imagem decodificados.
[00101] Na etapa ST58, o intrapreditor 63 e a unidade de compensação de movimento 64 executam um processo de predição. O intrapreditor 63 e a unidade de compensação de movimento 64 executam o processo de predição na informação de modo de predição provida do decodificador sem perda 52. [00102] Isto é, quando a informação de modo de predição da intrapredição é provida do decodificador sem perda 52, o intrapreditor 63 executa um processo de intrapredição baseado na informação de modo de predição para gerar os dados de imagem predita. Além disso, quando a informação de modo de predição do interpredição é provida do decodificador sem perda 52, a unidade de compensação de movimento 64 executa compensação de movimento baseado na informação de modo de predição para gerar os dados de imagem predita.
[00103] Na etapa ST59, o seletor 65 seleciona dados de imagem predita. Isto é, o seletor 65 seleciona a imagem predita provida do intrapreditor 63 e os dados de imagem predita gerados pela unidade de compensação de movimento 64 e proveem a imagem predita e os dados de imagem predita para o somador 55 para ser acrescentado à saída do transformador ortogonal inverso 54 na etapa ST55 como descrito acima. [00104] Na etapa ST60, a memória temporária de reordenação de quadro 57 executa ordenação de tela. Isto é, a memória temporária de reordenação de quadro 57 ordena os quadros de forma que os quadros reordenados na ordem de codificação usada na memória temporária de reordenação de quadro 12 do dispositivo de codificação de imagem 10 da Figura 2 sejam reordenados na ordem de exibição original.
[00105] Na etapa ST61, o conversor D/A 58 executa conversão D/A nos
31/122 dados de imagem da memória temporária de reordenação de quadro 57. Esta imagem é produzida a uma exibição (não ilustrada) e a imagem é exibida.
6. Operação básica de unidade de filtragem de antibloqueio [00106] Em geral, um processo de filtragem de antibloqueio de acordo com um esquema de codificação de imagem como H.264/AVC ou HEVC envolve determinar se filtragem é necessária ou não e executar um processo de filtragem com relação a um limite interbloco no qual filtragem é determinada ser necessária.
[00107] O limite interbloco inclui limites (isto é, limites interbloco horizontalmente adjacentes (em seguida chamados limites verticais) detectados executando detecção de limite interbloco na direção horizontal. Além disso, o limite interbloco inclui limites interbloco (isto é, limites interbloco verticalmente adjacentes (em seguida chamados limites de linha) detectados executando detecção de limite interbloco na direção vertical.
[00108] Figura 8 é um diagrama explicativo ilustrando um exemplo de pixels em dois blocos BKa e BKb adjacentes com um limite interposto. Neste exemplo, embora um limite vertical seja usado como um exemplo, o mesmo pode ser aplicado a um limite de linha. No exemplo da Figura 8, dados de imagem de pixels no bloco BKa são representados por símbolo pi, j. Aqui, i é um índice de coluna de pixel e j é um índice de fila de pixel. Além disso, uma unidade menor do processo de codificação é um bloco de 8 x 8 pixels, e índices de coluna i de 0, 1, 2 e 3 são nomeados sequencialmente (da esquerda à direita) da coluna perto do limite vertical. Índices de fila j de 0, 1, 2,..., e 7 são nomeados de topo para fundo. A metade esquerda do bloco BKa é omitida no desenho. Por outro lado, dados de imagem de pixels no bloco BKb são representados por símbolo qk, j. Aqui, k é um índice de coluna de pixel e j é um índice de fila de pixel. Os índices de coluna k de 0, 1, 2 e 3 são nomeados sequencialmente (da esquerda à direita) da coluna perto do limite vertical. A metade direita do bloco BKb também é omitida no desenho.
32/122 [00109] Quando é determinado que um filtro de antibloqueio é para ser aplicado a um limite e o limite é um limite vertical, por exemplo, um processo de filtragem é executado nos pixels nos lados esquerdo e direito do limite. Como para componentes de luminância, um filtro tendo intensidade de filtro forte e um filtro tendo intensidade de filtro fraca são comutados de acordo com o valor de dados de imagem.
Filtragem de componente de luminância [00110] Na seleção de intensidade, se as condições das Expressões (3) a (5) são satisfeitas é determinado para cada linha (ou cada coluna). Um filtro forte é selecionado quando todas as condições das Expressões (3) a (5) são satisfeitas, e um filtro fraco é selecionado quando as condições de qualquer uma das expressões não são satisfeitas.
Fórmula Matemática 1 d < (p»2) ---(3)
IP3 - po I +1 q» - q31 < (P » 3) (4) |p0-q0| < (( 5*tc + 1 ) » 1) · · · (õ) [00111] Na Expressão (3), d é um valor calculado baseado na Expressão (6). Além disso, β nas Expressões (4) e (5) e tc na Expressão (5) são valores que são fixados baseados em um parâmetro de quantização Q como indicado na Tabela 1.
Fórmula Matemática 2 d = | P2.2 - 2*pi,2 + Po,2 | + | q2,2 - 2*qi,2 + q0,2 | + I P2,5 - 2*pi,5 + po,5 | + | q2,5 - 2*qi,5 + qo,5 | (6)
Tabela 1
33/122
Q 0 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18
β 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 6 7 8
tc 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 1
Q 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37
β 9 10 1 1 12 13 14 15 16 17 18 20 22 24 26 28 30 32 34 36
tc ] 2 2 2 2 3 3 3 3 4 4 4
Q 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55
β 38 40 42 44 46 48 50 52 54 56 58 60 62 64 64 64 64 64
tc 5 5 6 6 7 8 9 9 10 10 11 11 12 12 13 13 14 14
[00112] Na filtragem fraca, os componentes de luminância dos pixels respectivos em uma faixa de processamento de filtro são calculados executando as operações das Expressões (7) a (11).
Fórmula Matemática 3
Pi’= CliplY( pi + Δ/2 ) (7)
Po’ = Cliplvf pn + Δ) ( 8) qo’= Cliplv( q0 - Δ) (9) qi’ = Clip1Y(qi-A/2) (10)
Δ = Clip3(-tc, tc, ( 13*( qo - po ) + 4*( qi - pi ) - 5*( q2 - po) + 16 ) » 5 ) (11) [00113] Na filtragem forte, os componentes de luminância dos pixels respectivos em uma faixa de processo de filtro são calculados executando as operações das Expressões (12) a (18).
Fórmula Matemática 4 p2’ = Cliply( ( 2*p.? + 3*p2 + pi + p<> + q« + 4 ) » 3 ) pi ’ = Cliply( ( p2 + pt + po + q0 + 2 ) » 2 ) po’ = Cliply( ( p? + 2*pi + 2*po + 2*qo + qj + 4 ) » 3 )
Po’ = ( lipl y( ( p2 + 2*pi + 2*po + 2*qo + qi + 4 ) » 3 ) qo’ = Cliply( ( pi + 2*po + 2*qo + 2*qi + q2 + 4 ) » 3 ) qi’ = Cliply( ( po + qo + qi + q2 + 2 ) » 2 ) q2’ = CliplY( ( po + qo+ qi + 3*q2+ 2*q3 + 4 ) » 3 ) (1 2) (1 3) (1 4) (1 5) ( 1 6) (17) (1 8) [00114] Além disso, na filtragem de componentes de crominância, os componentes de crominância dos pixels respectivos em uma faixa de processamento de filtro são calculados executando as operações das
Expressões (19) a (21).
Fórmula Matemática 5
34/122 ρ»’ = Clip1t( ρ» + Δ ) (19) q0’ = CliplcC - Δ ) (20)
Δ = Clip3( -tc, t<;, ( ( ( ( q(í - pft ) « 2 ) + pi - q! + 4 ) » 3 ) ) · · - (2 1 ) [00115] Nas expressões anteriores, CliplY e Cliplc representam operações das Expressões (22) e (23), e Clip3(x,y,z) nas Expressões (22) e (23) representa um valor determinado por Expressão (24).
Fórmula Matemática 6
Cliply( X ) = Clip3( 0, (1 « BitDepthy ) - 1, x ) CliplcC x ) - CIip3( 0, (1« BitDepthc ) - l. x )
Clip3( x, y, z ) x ; z < x y ; z > y z ’ De outro modo (2 2) (23) (2 4) [00116] Além disso, como para o limite de linha, a operação executada para cada linha usando os pixels na direção horizontal no limite vertical é executada para cada coluna usando os pixels na direção vertical, e o processo de filtragem é executado.
[00117] No processo de filtragem de antibloqueio, um processo que requer uma memória de linha é o processo de filtragem vertical, e em seguida, uma redução na capacidade de memória da memória de linha no processo de filtragem vertical será descrita em detalhes. Desde que a unidade de filtragem de antibloqueio 24 do dispositivo de codificação de imagem 10 tem a mesma configuração e executa a mesma operação como aquela da unidade de filtragem de antibloqueio 56 do dispositivo de decodificação de imagem 50, a unidade de filtragem antibloqueio 24 só será descrita.
7. Primeira concretização de unidade de filtragem de antibloqueio [00118] Figura 9 ilustra a configuração de uma primeira concretização da unidade de filtragem de antibloqueio. A unidade de filtragem de antibloqueio 24 inclui uma memória de linha 241, um unidade de detectora limite de linha 242, uma unidade determinadora de intensidade de filtro 243,
35/122 uma memória de coeficiente 244, uma unidade de operação de filtro 245 e um controlador de filtro 246.
[00119] A memória de linha 241 armazena dados de imagem providos do somador 23 baseado em um sinal de controle do controlador de filtro 246. Além disso, a memória de linha 241 lê os dados de imagem armazenados nela e produz os dados de imagem lidos para a unidade detectora de limite de linha 242, a unidade determinadora de intensidade de filtro 243 e a unidade de operação de filtro 245.
[00120] A unidade detectora de limite de linha 242 detecta um limite de linha no qual o processo de filtragem vertical é executado. A unidade detectora de limite de linha 242 executa o processo de determinação de necessidade de filtragem para cada bloco usando os dados de imagem providos do somador 23 e os dados de imagem lidos da memória de linha 241 e detecta um limite de linha no qual o processo de filtragem vertical é executado. A unidade detectora de limite de linha 242 produz os resultados de detecção para a unidade determinadora de intensidade de filtro 243.
[00121] A unidade determinadora de intensidade de filtro 243 determina a intensidade de filtro como descrito acima. A unidade determinadora de intensidade de filtro 243 determina se o processo de filtragem vertical é para ser executado em um modo de filtragem forte ou um modo de filtragem fraca usando os dados de imagem de dois blocos adjacentes com o limite de linha interposto em que o processo de filtragem vertical é executado, e produz os resultados de determinação para a unidade de operação de filtro 245.
[00122] A memória de coeficiente 244 armazena coeficientes de filtro usados na operação de filtragem do processo de filtragem de antibloqueio. [00123] A unidade de operação de filtro 245 executa uma operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro 243 usando os dados de imagem providos do somador
36/122
23, os dados de imagem armazenados na memória de linha 241, e os coeficientes de filtro lidos da memória de coeficiente 244. A unidade de operação de filtro 245 produz os dados de imagem tendo sido sujeitos ao processo de filtragem vertical à memória de quadro 25. Além disso, a unidade de operação de filtro 245 controla uma faixa de imagem usada na operação de filtragem em um bloco que está posicionado no lado superior do limite de linha baseado no resultado de determinação de limite de bloco provido do controlador de filtro 246.
[00124] O controlador de filtro 246 controla a memória de linha 241 de modo a armazenar dados de imagem correspondendo a um número predeterminado de linhas no lado inferior no bloco. Além disso, o controlador de filtro 246 lê os dados de imagem armazenados na memória de linha 241. Adicionalmente, o controlador de filtro 246 inclui uma unidade determinadora de limite de linha 2461. A unidade determinadora de limite de linha 2461 determina se um limite é um limite de linha (por exemplo, limite de linha inter-LCU) em unidades de bloco respectivas nas quais o processo é executado sequencialmente em uma direção de varredura de raster e produz os resultados de determinação para a unidade de operação de filtro 245. A unidade de operação de filtro 245 executa controles tal que o processo de filtragem vertical possa ser executado até mesmo quando a capacidade de memória da memória de linha é reduzida.
[00125] Figura 10 ilustra a operação da primeira concretização da unidade de filtragem de antibloqueio. Na etapa ST71, a unidade de filtragem de antibloqueio 24 detecta um limite de linha. A unidade de filtragem de antibloqueio 24 detecta um limite de linha no qual o processo de filtragem vertical é executado.
[00126] Na etapa ST72, a unidade de filtragem de antibloqueio 24 determina uma intensidade de filtro. A unidade de filtragem de antibloqueio 24 determina se um modo de filtragem forte ou um modo de filtragem fraca será
37/122 usado para o limite de linha no qual o processo de filtragem vertical é executado. [00127] Na etapa ST73, a unidade de filtragem de antibloqueio 24 determina se o limite no qual o processo de filtragem vertical é executado é um limite de linha inter-LCU. A unidade de filtragem de antibloqueio 24 procede à etapa ST74 quando o limite no qual o processo de filtragem vertical é executado é o limite de linha inter-LCU e procede à etapa ST75 quando o limite não é o limite de linha inter-LCU.
[00128] Na etapa ST74, a unidade de filtragem de antibloqueio 24 executa um processo de filtragem vertical de faixa reduzida. A unidade de filtragem de antibloqueio 24 executa o processo de filtragem vertical enquanto reduzindo a faixa de imagem usada para a operação de filtragem do LCU adjacente superior e o fluxo procede à etapa ST76.
[00129] Na etapa ST75, a unidade de filtragem de antibloqueio 24 executa um processo de filtragem vertical normal. A unidade de filtragem de antibloqueio 24 executa o processo de filtragem vertical usando derivações predeterminadas e coeficientes sem reduzir a faixa de imagem usada para a operação de filtragem e o fluxo procede à etapa ST76.
[00130] Na etapa ST76, a unidade de filtragem de antibloqueio 24 determina se o processo de filtragem vertical no limite foi completado. Quando o processo de filtragem vertical para as colunas respectivas do limite não foi completado, a unidade de filtragem de antibloqueio 24 retorna à etapa ST76 e executa o processo para a próxima coluna. Além disso, quando o processo de filtragem vertical para as colunas respectivas do limite foi completado, o fluxo procede à etapa ST77.
[00131] Na etapa ST77, a unidade de filtragem de antibloqueio 24 determina se o processo foi completado até o fim da tela. Quando o processo não foi completado até o fim da tela, a unidade de filtragem de antibloqueio 24 retorna à etapa ST71, detecta um novo limite e executa o processo de filtragem vertical. Quando o processo foi completado até o fim da tela, a
38/122 unidade de filtragem de antibloqueio 24 termina o processo para 11 telas. Configuração e operação de unidade de operação de filtro [00132] Figuras 11 e 12 ilustram a configuração da unidade de operação de filtro. Quando um processo de filtragem vertical de derivação mutável é executado, a unidade de operação de filtro 245 muda os dados de imagem de uma derivação ou muda o número de derivações tal que o processo de filtragem vertical possa ser executado até mesmo quando o número de linhas que armazenam dados de imagem é reduzido. Figura 11 ilustra a configuração de uma unidade de operação de filtro quando um processo de filtragem vertical é executado enquanto mudando os dados de imagem de uma derivação. Além disso, Figura 12 ilustra a configuração de uma unidade de operação de filtro quando um processo de filtragem vertical é executado enquanto mudando o número de derivações.
[00133] Na Figura 11, a unidade de operação de filtro 245 inclui uma unidade de memória de dados 2451, uma unidade de seleção de dados 2452 e uma unidade de processamento aritmético 2453.
[00134] Quando a capacidade de memória de uma memória de linha está reduzida, a unidade de armazenamento de dados 2451 armazena dados de imagem a serem usados para uma derivação na posição da linha reduzida. A unidade de memória de dados 2451 produz os dados de imagem armazenados nela à unidade de seleção de dados 2452 como os dados de imagem de uma derivação na posição da linha reduzida.
[00135] A unidade de seleção de dados 2452 seleciona um dos dados de imagem armazenados na unidade de memória de dados 2451 e dos dados de imagem armazenados na memória de linha e produz os dados de imagem selecionados para a unidade de processamento aritmético 2453.
[00136] A unidade de processamento aritmético 2453 executa um processo aritmético usando os dados de imagem providos do somador 23 e da unidade de seleção de dados 2452 e os coeficientes de filtro lidos da memória
39/122 de coeficiente 244 para gerar dados de imagem depois do processo de filtragem vertical e produz os dados de imagem para a memória de quadro 25. [00137] Na Figura 12, a unidade de operação de filtro 245 inclui uma unidade de processamento aritmético 2455 e uma unidade de processamento aritmético 2456.
[00138] A unidade de processamento aritmético 2455 executa um processo aritmético com um número predeterminado de derivações e produz dados de imagem depois do processo de filtragem vertical para a unidade de seleção de dados 2457.
[00139] A unidade de processamento aritmético 2456 executa um processo aritmético sem usar os dados de imagem da linha reduzida reduzindo o número de derivações de acordo com uma redução na capacidade de memória da memória de linha e produz os dados de imagem depois do processo de filtragem vertical para a unidade de seleção de dados 2457. [00140] A unidade de seleção de dados 2457 seleciona os dados de imagem dependendo de se o limite é um limite de linha inter-LCU. Quando o limite não é o limite entre LCUs, a unidade de seleção de dados 2457 seleciona os dados de imagem produzidos da unidade de processamento aritmético 2455. Além disso, quando o limite é o limite de linha inter-LCU, a unidade de seleção de dados 2457 seleciona os dados de imagem produzidos da unidade de processamento aritmético 2456.
[00141] Figuras 13(A) e 13(B) são diagramas para descrever a operação da unidade de operação de filtro 245. Os desenhos ilustram os dados de imagem de pixels respectivos de dois blocos adjacentes BKu e BKl. Aqui, a operação de filtragem é executada usando três pixels cada de um limite (limite de linha) BB como uma faixa de processamento de filtro do processo de filtragem vertical e quatro pixels cada do limite BB como uma derivação. Quando é determinado que a filtragem é para ser executada em um modo de filtragem forte, as operações das Expressões (12) a (18) descritas acima são
40/122 executadas para cada coluna pelas unidades de processamento aritmético 2453 e 2455. Além disso, quando é determinado que a filtragem é para ser executada em um modo de filtragem fraca, as operações das Expressões (7) a (10) descritas acima são executadas para cada coluna pelas unidades de processamento aritmético 2453 e 2455.
[00142] Quando o processo de filtragem de antibloqueio é executado em uma ordem de raster em unidades de LCU respectivas, é determinado que o processo de filtragem vertical é executado em um modo de filtragem forte, e as operações das Expressões (12) a (18) descritas acima são executadas. Assim, como ilustrado na Figura 13(A), os dados de imagem do bloco BKu no lado superior do limite BB correspondendo a quatro linhas do limite BB precisam ser armazenados na memória de linha.
[00143] Aqui, a unidade de operação de filtro 245 controla a faixa de imagem usada para a operação de filtragem no bloco posicionado no lado superior do limite BB por meio de que o processo de filtragem vertical pode ser executado até mesmo quando a capacidade de memória da memória de linha é reduzida. Por exemplo, como ilustrado na Figura 13(B), dados de imagem correspondendo a três linhas do limite BB são armazenados, e o processo de filtragem vertical usando os dados de imagem armazenados é executado. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a operação da Expressão (25). Além disso, a unidade de processamento aritmético 2456 ilustrada na Figura 12 executa a operação da Expressão (26), e a unidade de seleção de dados 2457 seleciona os dados de imagem da unidade de processamento aritmético 2456 e produz os dados de imagem. Nas Expressões (25) e (26), i indica um índice de coluna de pixel, e quando o processo de filtragem é executado em unidades de blocos de 8 x 8 pixels, i = 0 a 7.
Fórmula Matemática 7
41/122 p2i, = CliplY((2*p2i + 3*p2i + pIi + pM + q0i + 4)»3) (2 5) p2i’ = CliplY(( 5*p2i + pii + pOi + qOi + 4 ) » 3 ) (2 6) [00144] A unidade de processamento aritmético 2453 copia os pixels no bloco superior BKu na extremidade superior da faixa de processamento de filtro na direção superior e usa os mesmos. Isto é, usando os dados de imagem p2 dos pixels na extremidade superior da faixa de processamento de filtro armazenada na unidade de armazenamento de dados 2451 como os dados de imagem p3, os dados de imagem p2i' depois do processo de filtragem são calculados pela operação da Expressão (25).
[00145] A unidade de processamento aritmético 2456 reduz o número de derivações e calcula os dados de imagem p2i' depois do processo de filtragem pela operação da Expressão (26) usando as mudanças de coeficientes com a redução no número de derivações. Neste caso, os coeficientes são mudados tal que o coeficiente dos dados de imagem p2 seja mudado de 3 para 5 de modo a corresponder à cópia dos pixels de extremidade superior na faixa de derivação.
[00146] Quando o limite BB não é o limite de linha inter-LCU, desde que não é necessário usar os dados de imagem da memória de linha 241, a mesma operação de filtragem como a operação convencional é executada sem estreitar a faixa de imagem usada para a operação de filtragem. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a mesma operação de filtragem como a operação convencional. Além disso, a unidade de processamento aritmético 2455 ilustrada na Figura 12 executa a mesma operação de filtragem como a operação convencional e a unidade de seleção de dados 2457 seleciona e produz os dados de imagem da unidade de processamento aritmético 2455.
[00147] Desta maneira, quando o limite é um limite de linha de blocos nos quais o processo é executado sequencialmente em uma ordem de
42/122 varredura de raster, controlando a faixa de imagem usada para a operação de filtragem, até mesmo quando a capacidade de memória da memória de linha é reduzida, o processo de filtragem de antibloqueio pode ser executado da mesma maneira como antes da redução. Além disso, por exemplo, uma linha de imagem de 4K x 2K corresponde a duas linhas de imagem de 2K x 1K. Adicionalmente, no esquema de H.264/AVC, uma memória de linha correspondendo a quatro linhas é incluída, e a capacidade de memória correspondendo a uma linha de imagem de 4K x 2K corresponde a 50% da capacidade de memória do esquema de H.264/AVC. Assim, o efeito de reduzir a capacidade de memória em uma imagem de alta resolução é melhorada.
8. Segunda concretização de unidade de filtragem de antibloqueio [00148] Uma segunda concretização da unidade de filtragem de antibloqueio é diferente da primeira concretização visto que as operações da unidade de processamento aritmético 2453 e da unidade de processamento aritmético 2456 são diferentes daquelas da primeira concretização.
[00149] Na filtragem forte, quando o limite BB é o limite de linha inter-LCU, e as operações das Expressões (12) a (18) descritas acima são executadas, como ilustrado na Figura 13(A), os dados de imagem do bloco BKu no lado superior do limite BB correspondendo a quatro linhas do limite BB precisam ser armazenados na memória de linha.
[00150] Aqui, a unidade de operação de filtro 245 controla a faixa de imagem usada para a operação de filtragem no bloco posicionado no lado superior do limite BB, por meio de que o processo de filtragem vertical pode ser executado até mesmo quando a capacidade de memória da memória de linha é reduzida. Por exemplo, como ilustrado na Figura 13(B), dados de imagem correspondendo a três linhas do limite BB são armazenados, e o processo de filtragem vertical é executado usando os dados de imagem armazenados. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a operação da Expressão (27). Além disso, a unidade de processamento aritmético
43/122
2456 ilustrada na Figura 12 executa a operação da Expressão (28), e a unidade de seleção de dados 2457 seleciona os dados de imagem da unidade de processamento aritmético 2456 e produz os dados de imagem. Nas Expressões (27) e (28), i indica um índice de coluna de pixel, e quando o processo de filtragem é executado em unidades de blocos de 8 x 8 pixels, i = 0 a 7.
Fórmula Matemática 8
P2i ’= CIiplY( ( 2*p,j + 3*p2i + Pjí + Poi + qfli + 4 ) » 3 ) (27) p2i’ = CIiply(( 3*p2i + 3*pij + pó; + qoi + 4 ) » 3 ) - - - (2 8) [00151] A unidade de processamento aritmético 2453 executa cópia de espelho sobre os pixels no bloco superior BKu na extremidade superior da faixa de processamento de filtro. Isto é, armazenando os dados de imagem p1 na unidade de memória de dados 2451, copiando em espelho os dados de imagem p1sobre os pixels de extremidade superior na faixa de processamento de filtro para usar os dados de imagem p1 como os dados de imagem p3, os dados de imagem p2i' depois do processo de filtragem são calculados pela operação da Expressão (27).
[00152] A unidade de processamento aritmético 2456 reduz o número de derivações e calcula os dados de imagem p2i' depois do processo de filtragem pela operação da Expressão (28) usando os coeficientes muda com a redução no número de derivações. Neste caso, os coeficientes são mudados tal que o coeficiente dos dados de imagem p1 seja mudado de 2 para 3 de modo a corresponder à cópia de espelho sobre os pixels de extremidade superior na faixa de processamento de filtro.
[00153] Quando o limite BB não é o limite de linha inter-LCU, desde que não é necessário usar os dados de imagem da memória de linha 241, a mesma operação de filtragem como a operação convencional é executada sem estreitar a faixa de imagem usada para a operação de filtragem. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a
44/122 mesma operação de filtragem como a operação convencional. Além disso, a unidade de processamento aritmético 2455 ilustrada na Figura 12 executa a mesma operação de filtragem como a operação convencional e a unidade de seleção de dados 2457 seleciona e produz os dados de imagem da unidade de processamento aritmético 2455.
[00154] Desta maneira, quando o limite é um limite de linha de blocos nos quais o processo é executado sequencialmente em uma ordem de varredura de raster, controlando a faixa de imagem usada para a operação de filtragem, semelhantemente à primeira concretização, até mesmo quando a capacidade de memória é reduzida, o processo de filtragem de antibloqueio pode ser executado.
9. Terceira concretização de unidade de filtragem de antibloqueio [00155] Uma terceira concretização da unidade de filtragem de antibloqueio é diferente da primeira e segunda concretizações visto que as operações da unidade de processamento aritmético 2453 e da unidade de processamento aritmético 2456 são diferentes daquelas da primeira concretização.
[00156] Figuras 14(A) e 14(B) são diagramas para descrever a operação da unidade de operação de filtro 245. Os desenhos ilustram os dados de imagem de pixels respectivos de dois blocos adjacentes BKu e BKl. Aqui, a operação de filtragem é executada usando três pixels cada de um limite (limite de linha) BB como uma faixa de processo de filtro do processo de filtragem vertical e quatro pixels cada do limite BB como uma derivação. Quando é determinado que a filtragem é para ser executada em um modo de filtragem forte, as operações das Expressões (12) a (18) descritas acima são executadas para cada coluna pelas unidades de processamento aritmético 2453 e 2455. Além disso, quando é determinado que a filtragem é para ser executada em um modo de filtragem fraca, as operações das Expressões (7) a (10) descritas acima são executadas para cada coluna pelas unidades de
45/122 processamento aritmético 2453 e 2455.
[00157] Quando o processo de filtragem de antibloqueio é executado em uma ordem de raster em unidades de LCU respectivas, é determinado que o processo de filtragem vertical é executado em um modo de filtragem forte, e as operações das Expressões (12) a (18) descritas acima são executadas. Assim, como ilustrado na Figura 14(A), os dados de imagem do bloco BKu no lado superior do limite BB correspondendo a quatro linhas do limite BB precisam ser armazenados na memória de linha.
[00158] Aqui, a unidade de operação de filtro 245 controla a faixa de processamento de filtro e a faixa de imagem usada para a operação de filtragem no bloco posicionado no lado superior do limite BB, por meio de que o processo de filtragem vertical pode ser executado até mesmo quando a capacidade de memória da memória de linha é reduzida. Por exemplo, como ilustrado na Figura 14(B), a faixa de processamento de filtro no bloco superior BKu é fixado a uma faixa de dois pixels do limite BB, e os dados de imagem correspondendo a duas linhas do limite BB são armazenados. Adicionalmente, o processo de filtragem vertical é executado usando os dados de imagem armazenados semelhantemente à primeira concretização. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa as operações das Expressões (29) e (30). Além disso, a unidade de processamento aritmético 2456 ilustrada na Figura 12 executa as operações das Expressões (31) e (32), e a unidade de seleção de dados 2457 seleciona os dados de imagem da unidade de processamento aritmético 2456 e produz os dados de imagem. Nas Expressões (29) a (32), i indica um índice de coluna de pixel, e quando o processo de filtragem é executado em unidades de blocos de 8 x 8 pixels, i = 0 a 7.
Fórmula Matemática 9
46/122
Ρπ’ = Cliply({ ρπ + pn + p«j + qot + 2 ) » 2 ) (2 9)
Poí’= Clip1v({pii + 2*p,i + 2!l!pni + 2;f:q0i + q]i + 4)»3) - · (30) pis’= CliplY(( 2*pü + pOi + q(Ji + 2 ) » 2 ) (3 1)
Poí’ = Cliply( { 3*pjí + 2*poi + 2*qoi + qii + 4 ) » 3 ) · · · (3 2) [00159] A unidade de processamento aritmético 2453 copia os pixels no bloco superior BKu na extremidade superior da faixa de processamento de filtro na direção para cima e usa os mesmos. Isto é, usando os dados de imagem p1 dos pixels na extremidade superior da faixa de processamento de filtro armazenada na unidade de memória de dados 2451 como os dados de imagem p2, os dados de imagem p1i' e p0i' depois do processo de filtragem são calculados pelas operações das Expressões (29) e (30).
[00160] A unidade de processamento aritmético 2456 reduz o número de derivações e calcula os dados de imagem' p1i' e p0i' depois do processo de filtragem pelas operações das Expressões (31) e (32) usando os coeficientes muda com a redução no número de derivações. Neste caso, os coeficientes são mudados tal que o coeficiente dos dados de imagem p1 na Expressão (31) seja mudado de 1 para 2 e os dados de imagem p1 na Expressão (32) sejam mudados de 2 a 3 de modo a corresponder à cópia dos pixels de extremidade superior na faixa de derivação.
[00161] Quando o limite BB não é o limite de linha inter-LCU, desde que não é necessário usar os dados de imagem da memória de linha 241, a mesma operação de filtragem como a operação convencional é executada sem estreitar a faixa de imagem usada para a operação de filtragem. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a mesma operação de filtragem como a operação convencional. Além disso, a unidade de processamento aritmético 2455 ilustrada na Figura 12 executa a mesma operação de filtragem como a operação convencional e a unidade de seleção de dados 2457 seleciona e produz os dados de imagem da unidade de processamento aritmético 2455.
[00162] Desta maneira, quando o limite é um limite de linha de blocos
47/122 nos quais o processo é executado sequencialmente em uma ordem de varredura de raster, controlando a faixa de processamento de filtro e a faixa de imagem usada para a operação de filtragem, até mesmo quando a capacidade de memória é reduzida, o processo de filtragem de antibloqueio pode ser executado da mesma maneira como antes da redução. Além disso, é possível reduzir a capacidade de memória muito mais.
10. Quarta concretização de unidade de filtragem de antibloqueio [00163] Uma quarta concretização da unidade de filtragem de antibloqueio é diferente da primeira concretização visto que as operações da unidade de processamento aritmético 2453 e da unidade de processamento aritmético 2456 são diferentes daquelas da terceira concretização.
[00164] Na filtragem forte, quando o limite BB é o limite de linha inter-LCU, e as operações das Expressões (12) a (18) descritas acima são executadas, como ilustrado na Figura 14(A), os dados de imagem do bloco BKu no lado superior do limite BB correspondendo a quatro linhas do limite BB precisam ser armazenados na memória de linha.
[00165] Aqui, a unidade de operação de filtro 245 controla a faixa de processamento de filtro e a faixa de imagem usada para a operação de filtragem no bloco posicionado no lado superior do limite BB, por meio de que o processo de filtragem vertical pode ser executado até mesmo quando a capacidade de memória da memória de linha é reduzida. Por exemplo, como ilustrado na Figura 14(B), a faixa de processamento de filtro no bloco superior BKu é fixada a uma faixa de dois pixels do limite BB, e os dados de imagem correspondendo a duas linhas do limite BB são armazenados. Adicionalmente, o processo de filtragem vertical é executado usando os dados de imagem armazenados semelhantemente à segunda concretização. Isto é, a unidade de processamento aritmético 2453 ilustrada na Figura 11 executa as operações das Expressões (33) e (34). Além disso, a unidade de processamento aritmético 2456 ilustrada na Figura 12 executa as operações das Expressões (35) e (36), e a unidade de
48/122 seleção de dados 2457 seleciona os dados de imagem da unidade de processamento aritmético 2456 e produz os dados de imagem. Nas Expressões (33) a (36), i indica um índice de coluna de pixel, e quando o processo de filtragem é executado em unidades de blocos de 8 x 8 pixels, i = 0 a 7.
Fórmula Matemática 10
Pi? = ClíplvC( Poí + Pi> + Poi + qei + 2)»2) ---(33)
Poí* = Cliplv( ( p«i + 2*pn + 2*pw + 2*q()i + qn + 4 )» 3 ) · · · (3 4) pt? = CliplY(( Pu+2* pOi + qw + 2 )» 2 ) - (3 5) pM* = Cliply(( 2*pii + 3*poj + 2*qot + qts + 4 ) » 3 ) · · (3 6) [00166] A unidade de processamento aritmético 2453 executa cópia de espelho sobre os pixels no bloco superior BKu na extremidade superior da faixa de processamento de filtro. Isto é, armazenando os dados de imagem p0 na memória de dados unidade 2451, copiando em espelho os dados de imagem p0 sobre os pixels de extremidade superior na faixa de processamento de filtro para usar os dados de imagem p0 como os dados de imagem p2, os dados de imagem p1i' e p0i' depois do processo de filtragem são calculados pelas operações das Expressões (33) e (34).
[00167] A unidade de processamento aritmético 2456 reduz o número de derivações e calcula os dados de imagem p1i' e p0i' depois do processo de filtragem pelas operações das Expressões (35) e (36) usando os coeficientes muda com a redução no número de derivações. Neste caso, os coeficientes são mudados tal que o coeficiente dos dados de imagem p0 na Expressão (35) seja mudado de 1 para 2 e os dados de imagem p0 na Expressão (36) sejam mudados de 2 para 3 para corresponder à cópia de espelho sobre os pixels de extremidade superior na faixa de processamento de filtro.
[00168] Quando o limite BB não é o limite de linha inter-LCU, desde que não é necessário usar os dados de imagem da memória de linha 241, a mesma operação de filtragem como a operação convencional é executada sem estreitar a faixa de imagem usada para a operação de filtragem. Isto é, a
49/122 unidade de processamento aritmético 2453 ilustrada na Figura 11 executa a mesma operação de filtragem como a operação convencional. Além disso, a unidade de processamento aritmético 2455 ilustrada na Figura 12 executa a mesma operação de filtragem como a operação convencional e a unidade de seleção de dados 2457 seleciona e produz os dados de imagem da unidade de processamento aritmético 2455.
[00169] Desta maneira, quando o limite é um limite de linha de blocos em que o processo é executado sequencialmente em uma ordem de varredura de raster, controlando a faixa de processamento de filtro e a faixa de imagem usada para a operação de filtragem, até mesmo quando a capacidade de memória é reduzida, o processo de filtro de antibloqueio pode ser executado da mesma maneira como antes da redução. Além disso, é possível reduzir a capacidade de memória muito mais.
11. Quinta concretização de unidade de filtragem de antibloqueio [00170] A unidade de filtragem de antibloqueio descrita acima controla a faixa de imagem usada para a operação de filtragem em um bloco posicionado no lado superior de um limite e controla a faixa de processamento de filtro dependendo de se o limite BB é um limite de linha inter-LCU. A seguir, em uma quinta concretização, um caso onde um modo onde a faixa de imagem é controlada quando o limite BB é o limite de linha inter-LCU e um modo onde a faixa de imagem é controlada indiferente de se o limite BB é o limite de linha inter-LCU são providos, será descrito.
[00171] Figura 15 é um fluxograma ilustrando a operação da quinta concretização. Na etapa ST81, a unidade de filtragem de antibloqueio 24 detecta um limite de linha. A unidade de filtragem de antibloqueio 24 detecta um limite de linha no qual o processo de filtragem vertical é executado. [00172] Na etapa ST82, a unidade de filtragem de antibloqueio 24 determina uma intensidade de filtro. A unidade de filtragem de antibloqueio 24 determina se um modo de filtragem forte ou um modo de filtragem fraca
50/122 será usado para o limite de linha no qual o processo de filtragem vertical é executado.
[00173] Na etapa ST83, a unidade de filtragem de antibloqueio 24 determina se um processo de filtragem vertical de faixa reduzida é para ser executado com relação ao limite de linha inter-LCU somente (isto é, se um processo de filtragem vertical é para ser executado reduzindo a faixa de imagem usada para a operação de filtragem). Quando é determinado que o processo de filtragem vertical de faixa reduzida é para ser executado com relação ao limite de linha de blocos menor do que o tamanho de LCU como também o limite de linha inter-LCU, a unidade de filtragem de antibloqueio 24 procede à etapa ST84. Além disso, quando é determinado que o processo de filtragem vertical de faixa reduzida é para ser executado com relação ao limite de linha inter-LCU somente, a unidade de filtragem de antibloqueio 24 procede à etapa ST85.
[00174] A unidade de filtragem de antibloqueio 24 determina se o processo de filtragem vertical de faixa reduzida é para ser executado com relação ao limite de linha inter-LCU somente baseado nos parâmetros de quantização fixados em unidades de quadros, por exemplo. Quando o parâmetro de quantização é pequeno, melhor qualidade de imagem é obtida quando comparada quando o parâmetro de quantização é grande. Assim, quando o parâmetro de quantização é maior do que um valor de limiar predeterminado, a unidade de filtragem de antibloqueio 24 determina que o processo de filtragem vertical é para ser executado em um modo onde qualidade de imagem é melhorada executando o processo de filtragem vertical de faixa reduzida com relação ao limite de linha inter-LCU somente e executando um processo de filtragem vertical normal com relação a um limite de linha de blocos menores do que o tamanho de LCU, e procede à etapa ST84. Além disso, quando o parâmetro de quantização é igual a ou menor do que o valor de limiar predeterminado, a unidade de filtragem de antibloqueio
51/122 determina que o processo de filtragem vertical é para ser executado em um modo onde controle é feito fácil executando o processo de filtragem vertical de faixa reduzida com relação ao limite de linha entre blocos menores do que o tamanho de LCU como também o limite de linha inter-LCU, e procede à etapa ST85.
[00175] Na etapa ST84, a unidade de filtragem de antibloqueio 24 determina se um limite no qual o processo de filtragem vertical é executado é um limite de linha inter-LCU. A unidade de filtragem de antibloqueio 24 procede à etapa ST85 quando o limite no qual o processo de filtragem vertical é executado é o limite de linha inter-LCU e procede à etapa ST86 quando o limite é um limite de linha de blocos menores do que o tamanho de LCU. [00176] Na etapa ST85, a unidade de filtragem de antibloqueio 24 executa um processo de filtragem vertical de faixa reduzida. A unidade de filtragem de antibloqueio 24 executa o processo de filtragem vertical enquanto reduzindo a faixa de imagem usada para a operação de filtragem da LCU adjacente superior e procede à etapa ST87. No processo de filtragem vertical de faixa reduzida, a faixa de filtragem pode ser reduzida.
[00177] Na etapa ST86, a unidade de filtragem de antibloqueio 24 executa um processo de filtragem vertical normal. A unidade de filtragem de antibloqueio 24 executa o processo de filtragem vertical sem reduzir a faixa de imagem usada para a operação de filtragem e procede à etapa ST87.
[00178] Na etapa ST87, a unidade de filtragem de antibloqueio 24 determina se o processo de filtragem vertical no limite foi completado. Quando o processo de filtragem vertical para as colunas respectivas do limite não foi completado, a unidade de filtragem de antibloqueio 24 retorna à etapa ST87 e executa o processo para a próxima coluna. Além disso, quando o processo de filtragem vertical para as colunas respectivas do limite foi completado, o fluxo procede à etapa ST88.
[00179] Na etapa ST88, a unidade de filtragem de antibloqueio 24
52/122 determina se o processo foi completado até o fim da tela. Quando o processo não foi completado até o fim da tela, a unidade de filtragem de antibloqueio 24 retorna à etapa ST81, detecta um novo limite e executa o processo de filtragem vertical. Quando o processo foi completado até o fim da tela, a unidade de filtragem de antibloqueio 24 termina o processo para uma tela. [00180] Quando um tal processo é executado, é possível reduzir a capacidade de memória da memória de linha. Quando o processo de filtragem vertical de faixa reduzida é executado com relação a outros limites de linha como também o limite de linha inter-LCU, comutação de processos de filtragem não é requerida e controle é feito fácil. Além disso, quando o processo de filtragem vertical de faixa reduzida é executado com relação ao limite de linha inter-LCU somente, melhor qualidade de imagem pode ser obtida.
12. Descrição de sexta a oitava concretizações
Descrição de técnica convencional [00181] Na descrição anterior, um exemplo no qual os dados de imagem de uma derivação na faixa de imagem são copiados ou copiados em espelho e usados como dados de imagem da derivação que estão fora da faixa de imagem devido ao estreitamento da faixa de imagem usada para a operação de filtragem foi descrito. Aqui, na especificação presente, cópia é sinônimo com enchimento.
[00182] Como na técnica presente, um método de executar um processo de filtragem usando enchimento no limite de linha de LCUs somente foi proposto em JCTVC-F053.
[00183] Se referindo à Figura 16, um processo de filtragem de um filtro forte e um processo de filtragem usando enchimento para sinais de luminância no esquema de HEVC serão descritos.
[00184] Figura 16 é um diagrama explicativo ilustrando um exemplo de pixels em dois blocos BKu e BKl que são verticalmente adjacentes com um limite de linha interposto. No exemplo da Figura 16, dados de imagem de
53/122 pixels no bloco BKu são representados através de símbolo pji. Aqui, j é um índice de fila de pixel e i é índice de coluna de pixel. Além disso, uma unidade menor do processo de codificação é um bloco de 8 x 8 pixels, e índices de fila j de 0, 1, 2 e 3 são nomeados sequencialmente (de topo para fundo) da fila perto do limite de linha BB. Índices de coluna i de 0, 1, 2,..., e 7 são nomeados da esquerda à direita do bloco. A metade superior do bloco BKu é omitida no desenho. Por outro lado, dados de imagem de pixels no bloco BKl são representados através de símbolo qki. Aqui, k é um índice de fila de pixel e i é um índice de coluna de pixel. Os índices de fila k de 0, 1, 2 e 3 são nomeados sequencialmente (de topo para fundo) da fila perto do limite de linha BB. A metade inferior do bloco BKl também é omitida no desenho.
[00185] Na filtragem forte do sinal de luminância no esquema de HEVC, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (37) a (42). Expressões (37) a (42) correspondem às Expressões (14), (16), (13), (17), (12) e (18), respectivamente.
Fórmula Matemática 11 p0o=Clipo^55((p2i+2*pli+2*p0j+2*q0i+ql1+4)»3); q0o=Clipo-255((pl1+2*p0i+2*q0i+2*qli+q21+4)»3); pio =Clipo-255((p2í+pIi+p0i+q01+2)»2); q 1q — Clipo-255((p0i+q0i+q 1 j+q 2 j+2) »2); p2o =Clipo-255((2*p31+3*p21+pl,+p0i+q0i+4)»3); q2o = Clipo-255((pOi+qOi+q li+3*q2i+2*q3,+4)»3);
i =0,7 •••(37)
i =0,7 -(38)
i =0,7 -(39)
i =0,7 -(40)
i =0,7 •••(41)
i =0,7 -(42)
[00186] Aqui, Clip0-255 indica um processo de clipping de arredondar um valor até 0 quando o valor é 0 ou menor e arredondar um valor até 255 quando o valor é 255 ou maior. O mesmo é aplicado às expressões seguintes. [00187] Em contraste, na proposta convencional descrita acima, o processo de filtragem é executado usando enchimento com redução de R2W2, embora o processo de filtragem seja executado no limite de linha de LCUs somente. Aqui, R2W2 representa que o processo de filtragem é aplicado a
54/122 dois pixels no limite de linha inter-LCU se referindo a dois pixels no limite de linha inter-LCU.
[00188] Na filtragem forte de sinais de luminância na proposta convencional, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (43) a (47).
Fórmula Matemática 12 p0o =Clipo-.255((pli+2*pl]+2*pO1+2*qO1+qlj+4)»3); i =0,7 -(43) qOo =Clip0-255((pli+2*p0i+2*q01+2!i!ql1+q21+4)»3): i =0,7 --(44) pf. —(. lip pf t pl| · pO. i qO.-2) 2): i—0,7 —-(45) qlo=Clipo-255((pOi+qOi+qli+q2i+2)»2); i =0,7 --(46) q2o=Clipo^55((p0i+q0l+qli+3*q2i+2*q3i+4)»3); i =0,7 —(47) [00189] Aqui, Expressão (43) da filtragem forte na proposta convencional é diferente visto que p2i na Expressão (37) da filtragem forte do esquema de HEVC é mudado para p1i. Expressão (45) da filtragem forte na proposta convencional é diferente visto que p2i na Expressão (39) da filtragem forte do esquema de HEVC é mudado para p1i. A filtragem forte na proposta convencional é diferente visto que uma expressão correspondendo à Expressão (41) da filtragem forte do esquema de HEVC é apagada.
[00190] Expressões (44), (46) e (47) da filtragem forte na proposta convencional são iguais às Expressões (38), (40) e (42), respectivamente, da filtragem forte do esquema de HEVC.
[00191] Isto é, na proposta convencional, desde que o pixel p2i na terceira fila do limite de linha BB do bloco Bku não seja referido, o pixel p1i em uma fila imediatamente abaixo da terceira fila da mesma coluna é cheio e usado ao invés.
[00192] Além disso, o processo de filtragem não é aplicado ao pixel p20 na terceira fila do limite de linha BB do bloco Bku. Portanto, na filtragem forte da proposta convencional, uma expressão correspondendo à Expressão (41) da filtragem forte do esquema de HEVC é apagada.
55/122 [00193] Fazendo assim, na proposta convencional, a capacidade de memória da memória de linha é suprimida de ficar maior que aquela do esquema de HEVC.
[00194] Porém, no caso de imagens 4k, desde que é necessário ter uma memória de linha grande, é pedido adicionalmente reduzir a memória de linha no processo de antibloqueio. Além disso, ao reduzir a memória de linha, é pedido manter uma melhor função de redução de ruído de bloco do processo de antibloqueio do que o método da proposta convencional.
[00195] Aqui, na determinação de limite interbloco no esquema de
HEVC, como indicado por Expressão (48) abaixo, uma forma de onda tendo uma inclinação constante em ambos os lados de um limite de linha é sujeita ao processo. Portanto, na técnica presente, o processo de antibloqueio no limite de linha inter-LCU é executado usando a inclinação da forma de onda usada no determinação de limite interbloco, que será descrita em detalhes abaixo.
Fórmula Matemática 13 |p22-2*pl2+p02l+|q22-2*ql2+q02|+|p25-2*pÍ5+p05|+jq25-2*ql5+q05|<3 •••(48)
Descrição da técnica presente (aproximação linear) [00196] No exemplo da Figura 17, uma expressão de determinação de limite interbloco usada no esquema de HEVC, da Expressão (48) é ilustrada. [00197] Como ilustrado na Figura 17, o primeiro termo no lado esquerdo da Expressão (48) é uma expressão para determinar um pixel na terceira coluna do lado esquerdo do bloco Bku e pode ser expressa por uma diferença de diferenças (diferença de segunda ordem) (isto é, uma diferencial de segunda ordem tendo uma inclinação constante).
p22 - 2*pl2 + pÜ2 = (p22 - pl2) - (pl2 - p02) [00198] Do segundo ao quarto termo no lado esquerdo da Expressão (48) são uma expressão para determinar um pixel na sexta coluna do lado esquerdo do bloco Bku, uma expressão para determinar um pixel na terceira coluna do lado
56/122 esquerdo do bloco Bkl, e uma expressão para determinar um pixel na sexta coluna do lado esquerdo do bloco Bkl, respectivamente. O mesmo pode ser dito durante o segundo a quarto termos no lado esquerdo da Expressão (48).
[00199] Como acima, na determinação de limite interbloco no esquema de HEVC, desde que a forma de onda tendo uma inclinação constante é sujeita ao processo, o processo de antibloqueio no limite de linha inter-LCU usa a inclinação da forma de onda usada na determinação de limite interbloco. [00200] Na técnica convencional, como para pixels que não poderiam ser referidos, o processo de antibloqueio no limite de linha inter-LCU usa enchimento. Em contraste, na técnica presente, como para pixels que não puderam ser referidos, o processo de antibloqueio no limite de linha interLCU executa aproximação linear usando a inclinação da forma de onda. [00201] Isto é, no processo de antibloqueio no limite de linha inter-LCU na técnica presente, Expressão (49) abaixo de aproximação linear é usada. Fórmula Matemática 14 p2i = p li+(p2i--pli) =? p lj+(p 1 i—pOi) = 2*plj-p0i --(49) [00202] Como ilustrado na Figura 18, quando os valores de pixel de p2i, p1i e p0i têm uma inclinação, o valor de pixel de p2i não poderia ser referido no enchimento baseado em R2W2 convencional. Assim, embora o valor de pixel de p1i imediatamente abaixo do pixel p2i esteja cheio e usado em vez do valor de pixel de p2i como indicado pelo círculo sombreado, desde que o valor de pixel atual de p2i está na posição do círculo de ponto, um erro ocorre.
[00203] Em contraste, na predição linear baseada em R2W2 da técnica presente, desde que o valor de pixel de p2i não poderia ser referido, um valor de pixel (= o mesmo valor de pixel como o valor de pixel atual) predito através de predição linear da inclinação baseado no valor de pixel de p1i e p0i é usado como o valor de pixel de p2i como indicado pelo círculo sombreado. [00204] Dessa forma, quando valores de pixel têm uma inclinação, a técnica presente não incorre mais erros do que o método de enchimento
57/122 convencional. Assim, embora a técnica baseada em R2W2 seja usada, é possível reduzir a memória de linha enquanto mantendo a função de redução de ruído de bloco do processo de antibloqueio.
[00205] Além disso, por exemplo, uma linha de imagem de 4K x 2K corresponde a duas linhas de imagem de 2K x 1K. Adicionalmente, no esquema de H.264/AVC, uma memória de linha correspondendo a quatro linhas é incluída, e a capacidade de memória correspondendo a uma linha de imagem de 4K x 2K corresponde a 50% da capacidade de memória do esquema de H.264/AVC. Assim, o efeito de reduzir a capacidade de memória em uma imagem de alta resolução é melhorado.
[00206] Quando os valores de pixel de p2i, p1i e p0i não têm uma inclinação, substancialmente o mesmo resultado é obtido como quando o valor de pixel de p1i está imediatamente abaixo do pixel p2i usado. Neste caso, embora a técnica baseada em R2W2 seja usada, é possível reduzir a memória de linha enquanto mantendo a função de redução de ruído de bloco do processo de antibloqueio.
Processo de filtragem para caso de R2W2 [00207] A seguir, o processo de filtragem de sinais de luminância para o caso de R2W2 será descrito. Aqui, R2 representa o número de pixels referidos e W2 representa o número de pixels aos quais o processo de filtragem é aplicado. Isto é, R2W2 representa que o processo de filtragem é aplicado a dois pixels no limite de linha inter-LCU se referindo a dois pixels no limite de linha inter-LCU como ilustrado na Figura 19.
[00208] No exemplo da Figura 19, é ilustrado que pixels na terceira e quarta colunas do limite de linha BB no bloco BKu na Figura 16 não puderam ser referidos.
[00209] Como ilustrado novamente para comparação, na filtragem forte do sinal de luminância no esquema de HEVC, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são
58/122 calculados executando as operações das Expressões (50) a (55). Expressões (50) a (55) correspondem às Expressões (37) a (42), respectivamente.
Fórmula Matemática 15 p0o =ClipOv55((p2,+2*pl1+2*p01+2*q01+ql1+4)»3); i=0,7 —(50) q0o=ClipO-255((pli+2*p0i+2*q0i+2*qli+q2i+4)»3); i =0,7 -(51) pio =ClipO-255((p2í+pli+p0i+q0i+2)»2); i =0,7 -(52) qlo=Clip0-255((pOi+qOi+qlí+q2i+2)»2); i=0,7 -(53) p2o=ClipO-255((2*p3i-i-3*p2i+pli+p0i+q0i+4)»3); i=0,7 -(54) q20 = Clip0-255((p0,+q0,+ql1+3*q21-t-2*q3,+4)»3); i=0,7 -(55) [00210] Em contraste, na filtragem forte do sinal de luminância no caso de R2W2 da técnica presente, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (56) a (60).
Fórmula Matemática 16 pOo=ClipO-255((4*pl +p() 1+2*q0j+ql,+4) »3); q0o=ClÍpo^55((pli+2*p01+2*qü1+2*qli+q21+4)»3); pio =Clipo-255((3*p 1 ,+q0i+2 )»2);
qlo =Clipo-255((p0i+qOi-+-q l1+q2i+2)»2);
q20 =Clipo-255((p0i+q0i+q 1 j+3*q 2,+2*q 3,+4) >:>3);
i =0,7 •••(56)
i =0,7 -(57)
i =0,7 •••(58)
Í =0,7 -(59)
i =0,7 -(60)
[00211] Aqui, a Expressão (56) da filtragem forte do caso de R2W2 é diferente visto que p2i + 2*p1i + 2*p0i na Expressão (50) da filtragem forte do esquema de HEVC é mudado para 4*p1i + p0i de acordo com a Expressão (49) de aproximação linear.
[00212] Expressão (58) da filtragem forte do caso de R2W2 é diferente visto que p2i + 2*p1i + p0i na Expressão (52) da filtragem forte do esquema de HEVC é mudado para 3*p1i de acordo com a Expressão (49) de aproximação linear.
[00213] A filtragem forte do caso de R2W2 é diferente visto que uma expressão correspondendo à Expressão (54) da filtragem forte do esquema de HEVC é apagada.
[00214] Isto é, no caso de R2W2 da técnica presente, desde que o pixel p2i na terceira fila do limite de linha BB do bloco Bku não é referido, a
59/122
Expressão (49) de aproximação linear é substituída e usada ao invés.
[00215] Além disso, o processo de filtragem não é aplicado ao pixel p20 na terceira fila do limite de linha BB do bloco Bku. Portanto, na filtragem forte do caso de R2W2, uma expressão correspondendo à Expressão (54) da filtragem forte do esquema de HEVC é apagada.
[00216] A seguir, uma expressão de determinação de filtragem fraca para sinais de luminância a um limite de linha e filtragem fraca será descrita. [00217] Primeiro, na expressão de determinação de filtragem fraca para sinais de luminância no esquema de HEVC e a filtragem fraca, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (61) a (63). Os primeiros termos das Expressões (61) a (63) são expressões de determinação de filtragem fraca.
Fórmula Matemática 17 if(abs(delta) < iThrCut), delta=(9*(qOi-p0j)-3*(qli-pli)) pOo =Clipo-255(pOl+Clip(-tC)-tc(delta)); i =0,7 • q0o=Clipo-255(q0i“Clip(-tc)-tC(delta)); i =0,7 —(61) if(abs((p22-2*pl2+p02)+abs(p25-2*pl5+p05) < ÍSideThreshold)) • pio =Clipo-255(pli+Clíp(-te2)-te2((((p2i+pOi+l)»l)-plj+delta)»l); i =0,7 —(62) Íf(abs((q22“-2*ql2+q02)+abs(q25--2*q l5+qOs) < ÍSideThreshold)) • qlo=ClÍpo-255(qli+Clip{-tc2)-tç2((((q2i+qOi+l)»l)-qli-delta)»l); i =0,7 --(63) [00218] Aqui, como descrito acima, Clip0-255 indica um processo de clipping de arredondar um valor até 0 quando o valor é 0 ou menor e arredondar um valor até 255 quando o valor é 255 ou maior. Além disso, Clip(-tc)-tc indica um processo de clipping de arredondar um valor até -tc quando o valor é - tc ou menor e arredondar um valor até tc quando o valor é tc ou maior. O clipping tc2 é o mesmo. O mesmo é aplicado às expressões seguintes. Aqui, tc é um conjunto de valor baseado no parâmetro Q como indicado na Tabela 1.
[00219] Em contraste, na expressão de determinação de filtragem fraca para sinais de luminância no caso de R2W2 e a filtragem fraca, os
60/122 componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (64) a (66). Os primeiros termos das Expressões (64) a (66) são expressões de determinação de filtragem fraca.
Fórmula Matemática 18 if(abs(delta) < ÍThrCut), delta=(9*(q0i-p0j)-3*(qli-pli)) pOo =Clipo-255(pOl+Clip(-tC)-tc(delta)); i =0,7 • q0o=Clipo-255(q0i“Clip(-tc)-tC(delta)); i =0,7 —(64)
Íf(abs(O-(pl2-pO2))+abs(O-(p 15—p05)) < ÍSÍdeThreshold)) • plo=ClÍpo-255(pli+CIíp{-tc2)-tc2((((pli+pli+l)»l)-pIi+delta)»l); i =0,7 —(65) Íf(abs((q22--2*ql2+q02)+abs(q25--2*q l5+qOs) < ÍSÍdeThreshold)) • qlo=Clipo-255(qli+CIip{-tc2)-tç2((((q2i+qOi+l)»l)-qli-delta)»l); i =0,7 --(66) [00220] Aqui, uma expressão dentro do clipping tc2 do segundo termo que é uma expressão de filtragem fraca dentro da Expressão (65) do caso de R2W2 é diferente de uma expressão dentro do clipping tc2 do segundo termo na Expressão (62) do esquema de HEVC de acordo com a Expressão (49) de aproximação linear. Isto é, a expressão ((((p2i + p0i + 1) >>1)-p1i + delta) >> 1) dentro do clipping tc2 do segundo termo do esquema de HEVC é mudada à expressão ((((p1i + p1i + 1) >> 1)-p1i + delta) >> 1) dentro do clipping tc2 do segundo termo.
[00221] Além disso, uma expressão dentro da cláusula se do primeiro termo que é uma expressão de determinação de filtragem fraca dentro da Expressão (65) do caso de R2W2 é diferente de uma expressão dentro da cláusula se do primeiro termo na Expressão (62) do esquema de HEVC. Isto é, a expressão abs(p22 - 2*p12 + p02) + abs(p25 - 2*p15 + p05) dentro da cláusula se do primeiro termo do esquema de HEVC é mudada à expressão abs(0 - (p12 - p02)) + abs(0 (p15 - p05)) dentro da cláusula se do primeiro termo.
[00222] Isto é, no primeiro termo da Expressão (65), um pixel é imediatamente abaixo de um pixel atual é cheio como indicado na Expressão (67) abaixo em lugar de aproximar linearmente o mesmo. Em outras palavras, 0 na expressão abs(0 - (p12 - p02)) representa 0 = p22 - p12 e 0 na
61/122 expressão abs(0 - (pis - p0s)) representa 0 = p2s - pis.
Fórmula Matemática 19 p21 = pli --(67) [00223] Isto é porque como para determinação de inclinação na expressão de determinação de filtragem, o uso de aproximação linear permite ignorar determinação que de fato não pode ser ignorada. Assim, na determinação de inclinação da expressão de determinação de filtragem fraca, um pixel imediatamente abaixo de um pixel atual é cheio como indicado na Expressão (67). O mesmo pode ser dito para a expressão de determinação de filtragem forte e a expressão de determinação de limite interbloco descrita abaixo.
[00224] A seguir, uma expressão de determinação de limite interbloco e uma expressão de determinação de filtragem forte para sinais de luminância a um limite de linha serão descritas.
[00225] Primeiro, uma expressão de determinação de limite interbloco para sinais de luminância no esquema de HEVC é expressa através da Expressão (68) abaixo e uma expressão de determinação de filtragem forte é expressa através da Expressão (69) abaixo.
Fórmula Matemática 20 if(abs((p22-2*pl2+p02)+abs(p25-2*pl5+p05) +abs((q222*ql2+q02)+abs((q25-2*ql5+q05)+<£) •••(68)
Fórmula Matemática 21 d < (/3>> 2). d = abs((p22“2*pl2+p02)+abs(p25-2*pl5+p05) + abs ((q22-2 * q h+qí)2)+abs (q25 -2* q 15+q05) and(|p3i-pOJ + |qO1-q3J|) < (β »3 and |p0i—q0i| < ((5*tc+1) »l) —(69) [00226] Em contraste, uma expressão de determinação de limite interbloco no caso de R2W2 da técnica presente é expressa através da Expressão (70) abaixo e uma expressão de determinação de filtragem forte é expressa através da Expressão (71) abaixo.
Fórmula Matemática 22
62/122 if(abs (0—(p 12 -p02))+abs(0- (p 15 -p05))+abs ((q22 -2* q 12+q02) +abs(q25-2*ql5+q05) <β)
Fórmula Matemática 23 d<(/3»2), d = abs(0“(pl2“-p02))+abs(0“(pl5““p05))+ abs ((q 2 ? - 2 * q 12+q02)+abs (q2 5 -2 * q 15+q05) and(|(plí-pOj)«1| + |qOj-q3,|) <($»3) and |pOi-q€h| < ((5*tc+1) »1) -”(71) [00227] O primeiro e segundo termos na cláusula se da Expressão (70) para determinação de limite interbloco do caso de R2W2 é diferente do primeiro e segundo termos na cláusula se da Expressão (68) para determinação de limite interbloco do esquema de HEVC de acordo com a Expressão (67) para enchimento. Isto é, o primeiro e segundo termos abs(p22 - 2*p12 + p02) + abs(p25 - 2*pb + p05) na cláusula se do esquema de HEVC são mudados para o primeiro e segundo termos abs(0 - (p12 - p02)) + abs(0 (p15 - p05)) na cláusula se.
[00228] Além disso, uma expressão no valor absoluto na primeira fila da Expressão (71) para determinação de filtragem forte do caso de R2W2 é diferente de uma expressão no valor absoluto na primeira fila da Expressão (69) para determinação de filtragem forte no esquema de HEVC de acordo com a Expressão (67) para enchimento. Isto é, a expressão abs(p22 - 2*ph + p02) + abs(p25 - 2*p15 + p05) no valor absoluto na primeira fila da Expressão (69) é mudado para a expressão abs(0 - (p12 - p02)) + abs(0 - (p15 - p0s)) no valor absoluto na primeira fila da Expressão (71).
[00229] Adicionalmente, uma expressão aparecendo depois do primeiro e da Expressão (71) para a determinação de filtragem forte do caso de R2W2 é diferente de uma expressão aparecendo depois do primeiro e da Expressão (69) para a determinação de filtragem forte no esquema de HEVC. Isto é, a expressão (| p3i - p0i << 1| + |q0i - q3J) < (β >> 3)) aparecendo depois do primeiro e da Expressão (69) é mudada para a expressão (|p1i - p0i << 1 | + | q0i - q3i|) < ( β >> 3)) aparecendo depois do primeiro e da Expressão (71).
63/122 [00230] Desde que a determinação desta parte é determinação das magnitudes de valores de pixel, a Expressão (49) para aproximação linear e a Expressão (67) para enchimento são usadas. Isto é, a expressão aparecendo depois do primeiro e da Expressão (71) é gerada de tal maneira que p3i na expressão aparecendo depois do primeiro e da Expressão (69) seja primeiro aproximado como p2i por enchimento e p2i seja aproximado como 2*p1i - p0i por aproximação linear.
Processo de filtragem para caso de R2W1 [00231] A seguir, o processo de filtragem de sinais de luminância para o caso de R2W1 será descrito. Aqui, R2 representa o número de pixels referidos e W1 representa o número de pixels aos quais o processo de filtragem é aplicado. Isto é, R2W1 representa que o processo de filtragem é aplicado a um pixel no limite de linha inter-LCU se referindo a dois pixels no limite de linha inter-LCU como ilustrado na Figura 19.
[00232] Na filtragem forte do sinal de luminância no caso de R2W1 da técnica presente, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (72) a (75).
Fórmula Matemática 24 pOo =Clipo-255((4*pls+pO1+2*qOi+qlí+4)»3); i =0,7 -(72) qOo = Clip0-255((pli+2*p01+2*q01+2*ql;+q2t+4)»3); i =0,7 -(73) qlo — Clipo-255((pOj+qOj+qlj+q21+2)»2); i =0,7 “'(74) q2o=Clipo-255((p0i+q01+qli+3*q2i+2*q3i+4)»3); i=0,7 —(75) [00233] Aqui, a Expressão (72) da filtragem forte do caso de R2W1 é diferente visto que p2i + 2*p1i + 2*p0i na Expressão (50) da filtragem forte do esquema de HEVC é mudado para 4*p1i + p0i de acordo com a
Expressão (49) de aproximação linear.
[00234] A filtragem forte do caso de R2W1 é diferente visto que as expressões correspondendo às Expressões (52) e (54) da filtragem forte do esquema de HEVC são apagadas.
64/122 [00235] Isto é, na técnica presente, desde o pixel p2i na terceira fila do limite de linha BB do bloco Bku não é referido, a Expressão (49) de aproximação linear é substituída e usada ao invés.
[00236] Além disso, o processo de filtragem não é aplicado aos pixels p10 e p20 na segunda e terceira filas do limite de linha BB do bloco Bku. Portanto, a filtragem forte do caso de R2W1, as expressões correspondendo às Expressões (52) e (54) da filtragem forte do esquema de HEVC são apagadas. [00237] A seguir, uma expressão de determinação de filtragem fraca para luminância sinais a um limite de linha e filtragem fraca será descrita. [00238] Na expressão de determinação de filtragem fraca para sinais de luminância no caso de R2W1 e a filtragem fraca, os componentes de luminância dos pixels respectivos na faixa de processamento de filtro são calculados executando as operações das Expressões (76) e (77).
Fórmula Matemática 25 if(abs(delta) < iThrCut), delta = (9*(q0,-p01)-3*(ql,-pl1)) ρθο =Clipo-255(pOi+C]ip(-tC)-tc(delta)); i =0,7 qOo =Clipo-255(q0i-Clip(-to)-ic(delta)); i =0,7 —(76) if(abs((q22—2*ql2+q02)+abs(q25—2*ql5+q05) < iSideThreshold)) • qlo=Clipo-255(qli+Clip{-te2)-tc2((((q2i+qOi+l)»l)-qli-delta)»l); i =0,7 —(77) [00239] Aqui, no caso de R2W1, o processo de filtragem não é aplicado ao pixel p10 na segunda fila do limite de linha BB do bloco Bku. Portanto, na expressão de determinação de filtragem fraca para o caso de R2W1 e a filtragem fraca, uma expressão correspondendo à Expressão (62) do esquema de HEVC é apagada.
[00240] A seguir, uma expressão de determinação de limite interbloco e uma expressão de determinação de filtragem forte para sinais de luminância a um limite de linha serão descritas.
[00241] Uma expressão de determinação de limite interbloco no caso de R2W1 é expressa através da Expressão (78) abaixo e uma expressão de determinação de filtragem forte é expressa através da Expressão (79) abaixo.
65/122
Fórmula Matemática 26 if(abs (0—(p 12 -p02))+abs(0- (p 15 -p05))+abs ((q22 -2* q 12+q02) +abs(q25-2*ql5+q05) <β) •••(78)
Fórmula Matemática 27 d<(/3»2), d = abs(0“(pl2“p02))+abs(0“(pl5““p05))+ abs ((q22 - 2 * q 12+q02)+abs (q2 5 -2 * q 15+q05) and(|(plí-pOj)«l| + |q0j-q3,|) <($»3) and |pOi™qOi| < ((5*tc+l) »1) --(79) [00242] O primeiro e segundo termos na cláusula se da Expressão (78) para determinação de limite interbloco do caso de R2W1 é diferente do primeiro e segundo termos na cláusula se da Expressão (68) para determinação de limite interbloco do esquema de HEVC de acordo com a Expressão (67) para enchimento. Isto é, o primeiro e segundo termos abs(p22
- 2*p12 + p02) + abs(p25 - 2*p1s + p0s) na cláusula se do esquema de HEVC é mudada para o primeiro e segundo termos abs(0 - (p12 - p02)) + abs(0 - (p1s
- p05)) na cláusula se.
[00243] Além disso, uma expressão no valor absoluto na primeira fila da Expressão (79) para determinação de filtragem forte do caso de R2W1 é diferente de uma expressão no valor absoluto na primeira fila da Expressão (69) para determinação de filtragem forte no esquema de HEVC de acordo com a Expressão (67) para enchimento. Isto é, a expressão abs(p22 - 2*ph + p02) + abs(p25 - 2*p15 + p0s) no valor absoluto na primeira fila da Expressão (69) é mudada para a expressão abs(0 - (p12 - p02)) + abs(0 - (p1s - p0s)) no valor absoluto na primeira fila da Expressão (79).
[00244] Adicionalmente, uma expressão aparecendo depois do primeiro e da Expressão (79) para a determinação de filtragem forte do caso de R2W1 é diferente de uma expressão aparecendo depois do primeiro e da Expressão (69) para a determinação de filtragem forte no esquema de HEVC. Isto é, a expressão (|p3i - p0i << 1| + |q0i - q3i|) < (β >> 3)) aparecendo depois do primeiro e da Expressão (69) é mudada para a expressão (|p1i 66/122 p0i << 11 + IqOi - q3il) < (β >> 3)) aparecendo depois do primeiro e da Expressão (79).
[00245] Como descrito acima com relação ao caso de R2W2, desde que a determinação desta parte é determinação das magnitudes de valores de pixel, a Expressão (49) para aproximação linear e Expressão (67) para enchimento são usadas. Isto é, a expressão aparecendo depois do primeiro e da Expressão (79) é gerada de tal maneira que p3i na expressão aparecendo depois do primeiro e da Expressão (69) seja aproximado primeiro como p2i e p2i seja aproximado como 2*p1i - p0i.
[00246] Um exemplo de configuração e uma operação para realizar o processo de determinação anterior baseado em aproximação linear serão descritos com referência às Figuras 22 a 24 como sexta e sétima concretizações da unidade de filtragem de antibloqueio.
[00247] Como descrito acima, na técnica presente, a determinação de limite interbloco no limite de linha e a expressão de determinação de filtragem forte são mudadas usando a Expressão (49) para aproximação linear e Expressão (67) para enchimento. Assim, um processo de clipping é adicionado a um processo de filtragem forte como uma contramedida para um caso onde a expressão de determinação é ignorada erroneamente e o processo de filtragem de antibloqueio é executado erroneamente.
Descrição da técnica presente (Processo de clipping em filtragem forte) [00248] A seguir, um processo de clipping em filtragem forte, que é uma oitava concretização, será descrito. A filtragem forte para sinais de luminância no caso de R2W2 também pode usar as Expressões (80) a (84) em que um processo de clipping é adicionado.
Fórmula Matemática 28
67/122 pOo =Clipt>255(pOo+Clip(-teçt5(((4,1!pli+pOj+2*qOi+qlj+4)»3)-pOo)); ί =0,7 --(80) q0o=CiÍp0-255(pOo+Clip(-tcHto(((pΪ 1+2*pOt+2*qOl+2*qlJ+q2l+4)»3)-p0o)); í = 0,7 · · · (81) pio=ClipO-255(plo+Clip(_tó-te(((3*p1i+q0i+2)»2)-ph))); j =0,7 --(82) qlo=Clipo-255(qlo+Clipc-td-te(((p0í+q0i+qli+q2i+2)»2)-q]o)); j =0,7 ---(83) q2o=Clipo-255(q2o+CIip(-tc;-te(((pli+q01+qli+3*q2i+2*q3i+4)»3)-q2e)); i =0,7 ---(84) [00249] Expressão (80) para filtragem forte é uma expressão de cálculo para p00 depois de filtragem. Na Expressão (80) para filtragem forte, um processo de clipping de (-tc) a tc é aplicado a uma diferença entre a expressão no processo de clipping de 0 a 255 na Expressão (56) e p00 para obter um valor, o valor é adicionado a p00 para obter outro valor, e o outro valor é sujeito a um processo de clipping de 0 a 255.
[00250] Expressão (81) para filtragem forte é uma expressão de cálculo para q00 depois de filtragem. Na Expressão (81) para filtragem forte, um processo de clipping de (-tc) a tc é aplicado a uma diferença entre a expressão no processo de clipping de 0 a 255 na Expressão (57) e q00 para obter um valor, o valor é adicionado a q00 para obter outro valor, e o outro valor é sujeito a um processo de clipping de 0 a 255.
[00251] Expressão (82) para filtragem forte é uma expressão de cálculo para p10 depois de filtragem. Na Expressão (82) para filtragem forte, um processo de clipping de (-tc) a tc é aplicado a uma diferença entre a expressão no processo de clipping de 0 a 255 na Expressão (58) e p10 para obter um valor, o valor é adicionado a p10 para obter outro valor, e o outro valor é sujeito a um processo de clipping de 0 a 255.
[00252] Expressão (83) para filtragem forte é uma expressão de cálculo para q10 depois de filtragem. Na Expressão (83) para filtragem forte, um processo de clipping de (-tc) a tc é aplicado a uma diferença entre a expressão no processo de clipping de 0 a 255 na Expressão (59) e q10 para obter um valor, o valor é adicionado a q10 para obter outro valor, e o outro valor é sujeito a um processo de clipping de 0 a 255.
[00253] Expressão (84) para filtragem forte é uma expressão de cálculo
68/122 para q2o depois de filtragem. Na Expressão (84) para filtragem forte, um processo de clipping de (-tc) a tc é aplicado a uma diferença entre a expressão no processo de clipping de 0 a 255 na Expressão (60) e q20 para obter um valor, o valor é adicionado a q2o para obter outro valor, e o outro valor é sujeito a um processo de clipping de 0 a 255.
[00254] Fazendo assim, é possível suprimir aplicação excessiva do processo de filtragem.
[00255] Aqui, Matthias Narroschke, Tomas Wedi, Semih Esenlik, Results for modified decisions for deblocking, JCTVC-G590, Equipe Colaboradora Conjunta sobre Codificação de Vídeo (JCT-VC) de ITU-T SG16 WP3 e ISO/IEC JTC1/SC29/WG11 7a Reunião, Genebra, CH, 21-30 de novembro de 2011 (em seguida chamado Documento Não Patente 2) é proposto. [00256] No Documento Não Patente 2, é descrito que um processo de determinação de filtragem forte/fraca é executado em unidades de bloco respectivas. Porém, no processo de determinação descrito no Documento Não Patente 2, quando resultados de determinação em uma linha atual e uma unidade de bloco à qual a linha pertence são diferentes (por exemplo, quando filtragem fraca é determinada para a linha atual enquanto filtragem forte é determinada para um bloco que inclui a linha, informação de artigo é aplicada à linha atual), um processo de filtragem excessivo é aplicado.
[00257] Além disso, no Documento Não Patente 2, desde que o processo de determinação de filtragem forte/fraca seja executado em unidades de quatro linhas, um desassociação ocorre entre a determinação e o processo de filtragem. Como um exemplo do desassociação, filtragem fraca é determinada embora seja necessário determinar filtragem forte e filtragem forte é determinada embora seja necessário determinar filtragem fraca.
[00258] Na filtragem forte de sinais de luminância no esquema de HEVC (HM-5.0), as Expressões (85) a (89) abaixo são empregadas.
Fórmula Matemática 29
69/122
pOj =(p2j+2*plj+2*p0j+2*q0i+qlj+4)»3; i =0,7 — (85)
q0, =(pli+2*p01+2*q0i+2*ql,+q21+4)»3; i =0,7 -(86)
pl, = (3*p l]+q01+2)»2; i =0,7 -(87)
q 1 i =(p01+q0,+qlj+q21+2)»2; i =0,7 -(88)
q2, =(p01+q0i+qli+3*q21+2*q31+4)»3; Ϊ =0,7 -(89)
[00259] Na técnica presente, a fim de eliminar um desassociação do processo de determinação e uma imperfeição no processo de determinação, o processo de clipping indicado nas Expressões (90) a (94) abaixo. Na Expressão (90), desde que um processo de clipping é para ser executado em um valor Δ parcial que muda com o processo de filtragem, p0i está fora do processo de clipping. O mesmo é aplicado às Expressões (91) a (94).
Fórmula Matemática 30 pOi =p0i+Clip(-pv>(pv)((p2i+2*pli-6*p0i+2*q0i+qli+4)»3); i =0,7 -(90) qOj = qOi+Clip<-pv)-(pV)((plj +2*p0j-6*q0j +2*qlj+q2,+4)»3); i =0,7 - (91) pli=pli+Clip(-pvKpv)((-pli+q0i+2)»2); i =0,7 -(92) qli -qli+Clip(-pV).(pv)((p0j+q0j-3*ql,+q2,+2)»2); i =0,7 -(93) q2, = q2,+Clip(-pV)-(pV)((p01+q0,+ql,-5*q21+2*q3,+4)»3); i =0,7 -(94) [00260] Aqui, um valor de clipping pv é qualquer um de 1 vez, 2 vezes, vezes, 4 vezes, 5 vezes, 6 vezes, 7 vezes e 8 vezes do parâmetro tc. Isto é, pv = tc, 2*tc, 3*tc, 4*tc, 5*tc, 6*tc, 7*tc, 8*tc. Embora o valor de clipping pv seja preferivelmente 2 vezes do parâmetro tc, o valor de clipping pode ser qualquer um de 1 vez a 8 vezes do parâmetro. Além disso, o valor de clipping não está limitado a 1 vez a 8 vezes contanto que os mesmos efeitos sejam obtidos.
[00261] Além disso, tc muda com o parâmetro de quantização QP. Assim, o fator de multiplicação do valor de clipping aplicado a tc também pode ser aumentado (isto é, ser mudado com QP) quando QP aumenta. O parâmetro (o valor de clipping ou o valor de um fator de multiplicação do valor de clipping aplicado a tc) aplicado ao processo de clipping pode ser fixado com antecedência e pode ser adicionado a um fluxo codificado e transmissão feita para um lado de decodificação.
[00262] Expressões (90) a (94) descritas acima podem ser modificadas de forma que o processo de clipping seja executado como nas Expressões (95)
70/122 a (99) abaixo.
Fórmula Matemática 31 pOj = Clipo-255(p0i+Cnp(-pvKpv)((p2i+2*pli-6*p0i+2*q0i+ql i+4)»3)); i =0,7 - (95) qOi =Cfipo-255(qOi+Cfip(-pv).{pv)((pli+2*pOi-6*qO1+2*ql1+q2i+4)»3)); i =0,7 -(96) pli=CHpo 255(pl i+Clip(-Pv)-(pv)((-p 1 i+q0i+2)»2)); i =07 -(97) qh =Cíip0-255(qli+Ciip(-pv>(pV)((pOi+qOi-3*qll+q21+2)»2)); i=0,7 - (98) q2i=Ctipo-255(q2i+CHp(-pV>(pv)((pOi+qOi+ql r5*q21+2*q31+4)»3)); i=0,7 - (99) [00263] Aqui, as Expressões (85) a (89) para a filtragem forte de sinais de luminância do esquema de HEVC (HM-5.0) são expressões para filtragem forte de sinais de luminância a um limite de linha. Isto é, no esquema de HEVC (HM-5.0), a filtragem forte de sinais de luminância é expressa de fato através das Expressões (100) a (105) abaixo.
Fórmula Matemática 32
pOj = (p2i+2*p1i+2*pOi+2*qOi+q1i+4)»3; i =0,7 • · · (100)
qOj = (p1i+2*p0i+2*q0i+2*q1i+q2i+4)»3; i =0,7 • · · (101)
p1 i = (p2j +pl j +pOi+qOi +2)»2; i =0,7 • · · (102)
q1 i = (pOj+q0,+ql j+q2j+2)»2: i =0,7 • · · (103)
p2j = (2*p3 i+3*p2 j+p1 j+p0 j+q0 i+4) »3: i =0,7 • · · (104)
q2, = (pO j+q0 i+p 1 j+3*q2 j+2*q3 i+4) »3: i =0,7 • · · (105)
[00264] Na técnica presente, a fim de eliminar um desassociação do processo de determinação e uma imperfeição do processo de determinação, um processo de clipping pode ser aplicado à filtragem forte para sinais de luminância como indicado nas Expressões (106) a (111) de modo a corresponder às Expressões (100) a (105). Na primeira expressão da Expressão (106), semelhantemente às Expressões (90) a (94) descritas acima, desde que um processo de clipping é para ser executado no valor Δ parcial que muda com o processo de filtragem, p0i está fora do processo de clipping. O mesmo é aplicado às primeiras expressões das Expressões (107) a (111).
Fórmula Matemática 33
71/122 pOi - pOi + CUptqnHpriUpSi + 2Àpli * B*pOi + 2'ς0ι + qli + 4)»3b = Clipij.ft'Tft')'(Pik-pT'i((p3i+ 2*pli + 2*ρ0ϊ +2*qGi + qli + -!)»3):
qOi = rjO, + Clipi pvH^íÚpli + 2*p0i - G*qÜ. + 2flqh + q£ + 4)>s-3); — ClipqftT>rJíaOi-ívi((pl!+ S^pOi + 2*qOi + 2tqli + q2i + -Ι)»3λ pli= pli + Clip(]n'i(pv)((p2L— 3*pL + ρθι+ qtX -i-2)>:»2); = OJiptpl í, -ρΐ)Ηρ2ι + pli + pOi + qO) 1-2)3-3-5):
qli- qli + ClÍpi |ivHjr0((pOb + <.,0l — 3*qli * q2i +2)»2): = Clipr.ji.-p^nj,I,.pv)((píl, + qlX +- qli + q2i +2)»2b p2i= p2i + Clipi ih><í<i((2*p2l - 5*p2i + ph+ ρ(λ+ qOi + ;1)»3): — ClipJj,:’, .pX(2*p3j + 3*p2i + p! + pOj + qOi + 4)»3)l
Í = O,7 (106) i = 0,7 (107)
Figure BR122015001053A2_D0001
Figure BR122015001053A2_D0002
Figure BR122015001053A2_D0003
i = 0.7 (III) q2i - q2i + CLip(-p-.-Hpi>(Cptt + qOi + qli 5*q2i + 2*q& + 4)=->3)5 = Clipm,^·)((ρ(λ + qOi + íih + 3*q2i + 2q3. + Ί)»3ύ [00265] Aqui, um valor de clipping pv é qualquer um de 1 vez, 2 vezes, vezes, 4 vezes, 5 vezes, 6 vezes, 7 vezes e 8 vezes do parâmetro te. Isto é, pv = te, 2*tc, 3*tc, 4*tc, 5*tc, 6*tc, 7*tc, 8*tc. Embora o valor de clipping pv seja preferivelmente 2 vezes do parâmetro te, o valor de clipping pode ser qualquer um de 1 vez a 8 vezes do parâmetro. Além disso, o valor de clipping não está limitado a 1 vez a 8 vezes contanto que os mesmos efeitos sejam obtidos.
[00266] Além disso, te muda com o parâmetro de quantização QP. Assim, o fator de multiplicação do valor de clipping aplicado a te também pode ser aumentado (isto é, ser mudado com QP) quando QP aumenta. O parâmetro (o valor de clipping ou o valor de um fator de multiplicação do valor de clipping aplicado a te) aplicado ao processo de clipping pode ser fixado com antecedência e pode ser adicionado a um fluxo codificado e transmissão feita a um lado de decodificação.
[00267] Figura 20 é um diagrama ilustrando os valores maiores dos valores de pixel que mudam com a filtragem forte de sinais de luminância no esquema de HEVC (HM-5.0) das Expressões (100) a (105) descritas acima, obtidos por uma experiência.
[00268] AI_HE, RA_HE, LB_HE e LP_HE indicam condições desta
72/122 experiência. AI_HE indica que a experiência era executada em modo de Eficiência Alta TODO INTRA. RA_HE indica que a experiência era executada em modo de Eficiência Alta de Acesso Aleatório. LB_HE indica que a experiência era executada em modo de Eficiência Alta de Baixo Atraso B. LP_HE indica que a experiência era executada em modo de Eficiência Alta de Baixo Atraso P.
[00269] 22, 27, 32 e 37 aparecendo debaixo de AI_HE, RA_HE,
LB_HE e LP_HE são valores dos parâmetros de quantização usados na experiência. Além disso, Classe A a Classe F indicam o tipo de sequência de teste usada na experiência.
[00270] Como ilustrado na Figura 20, um valor de pixel que muda com a filtragem forte de sinais de luminância no esquema de HEVC (HM-5.0) (isto é, um valor de pixel que muda com a filtragem forte quando o processo de clipping não está presente) muda grandemente por 100 ou mais em alguns casos.
[00271] Portanto, um processo de clipping é aplicado à filtragem forte de sinais de luminância. Devido a isto, como ilustrado na Figura 21, é possível suprimir a influência de um desassociação do processo de determinação e uma imperfeição do processo de determinação tanto quanto possível.
[00272] No exemplo da Figura 21, quando há uma borda (que não é um limite de bloco) indicada por uma linha sólida, embora um processo de antibloqueio não seja para ser executado, se o processo de antibloqueio for executado de acordo com a técnica do Documento Não Patente 2, os valores de pixel são mudados grandemente como indicado por linhas de ponto.
[00273] Por exemplo, como indicado por linha sólida, antes que o processo de antibloqueio seja executado, os valores dos pixels p2i, p1, e p0i são 255, os valores dos pixels q0i, q1i e q2i são 0, e a diferença D entre os valores dos pixels p0i e q0i é 255.
73/122 [00274] Em contraste, como indicado por linha de ponto, depois que o processo de antibloqueio é executado, o valor do pixel p2i é 223, o valor do pixel p1i é 191, e o valor do pixel p0i é 159. Assim, os valores de pixel dos pixels p2i p1i e p0i são mudados grandemente. Além disso, depois que o processo de antibloqueio é executado, o valor do pixel q0i é 96, o valor do pixel q1i é 64 e o valor do pixel q2i é 32. Assim, os valores de pixel dos pixels q0i, q1i e q2i são mudados consideravelmente.
[00275] Em tal caso, na filtragem forte das Expressões (106) a (111) descritas acima, um processo de clipping do qual o valor de clipping é 10 é executado.
[00276] Em contraste, como indicado por linha em negrito, depois que o processo de antibloqueio é executado, os valores dos pixels p2i, p1i e p0i são 245, e os valores dos pixels q0i, q1i e q2i são 255. Assim, a mudança nos valores de pixel pode ser suprimida tanto quanto possível.
[00277] Um exemplo de configuração e uma operação do processo de clipping na filtragem forte serão descritos com referência às Figuras 25 a 27 descritas mais tarde como uma oitava concretização da unidade de filtragem de antibloqueio.
13. Sexta concretização de unidade de filtragem de antibloqueio Exemplo de configuração de unidade de filtragem de antibloqueio [00278] Figura 22 ilustra a configuração da sexta concretização da unidade de filtragem de antibloqueio. A unidade de filtragem de antibloqueio 24 é configurada para incluir uma memória de imagem 71, uma unidade determinadora de limite de bloco 72-1, uma unidade determinadora de intensidade de filtro 73-1, uma unidade de operação de filtro 74-1, um seletor 75, uma memória de coeficiente 76 e um controlador de filtro 77. A unidade de filtragem de antibloqueio 24 é configurada para adicionalmente incluir uma unidade determinadora de limite de linha/limite de bloco 72-2, uma unidade determinadora de intensidade de filtro de limite de linha 73-2 e uma
74/122 unidade de operação de filtro de limite de linha 74-2.
[00279] A memória de imagem 71 é uma unidade que corresponde à memória de linha 241 da Figura 9 e é configurada como uma memória de linha. A memória de imagem 71 armazena dados de imagem providos do somador 23. A memória de imagem 71 lê os dados de imagem armazenaram nela e provê os dados de imagem lidos para a unidade determinadora de limite de bloco 72-1, a unidade determinadora de intensidade de filtro 73-1 e a unidade de operação de filtro 74-1. Além disso, a memória de imagem 71 lê os dados de imagem armazenados nela e provê os dados de imagem lidos para a unidade determinadora de limite de linha/limite de bloco 72-2, a unidade determinadora de intensidade de filtro de limite de linha 73-2 e a unidade de operação de filtro de limite de linha 74-2.
[00280] As posições diferentes do limite de linha, os dados de imagem não são armazenados na memória de imagem 71, mas pode haver um caso onde os dados de imagem providos do somador 23 são providos às unidades respectivas e processados. Porém, no exemplo da Figura 22, por causa de conveniência, é descrito que os dados de imagem tendo atravessado a memória de imagem 71 são processados.
[00281] A unidade determinadora de limite de bloco 72-1 executa determinação de limite interbloco sob o controle do controlador 77. Isto é, a unidade determinadora de limite de bloco 72-1 executa o processo de determinação de limite interbloco para cada bloco usando os dados de imagem lidos da memória de imagem 71 e detecta um limite interbloco no qual o processo de filtragem é executado. A unidade determinadora de limite de bloco 72-1 produz os resultados de detecção para a unidade determinadora de intensidade de filtro 73-1.
[00282] A unidade determinadora de intensidade de filtro 73-1 determina a intensidade de filtro da maneira descrita acima sob o controle do controlador 77. Isto é, a unidade determinadora de intensidade de filtro 73-1
75/122 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca para cada linha usando os dados de imagem de dois blocos com um limite interbloco interposto, provido da memória de imagem 71 e produz os resultados de determinação para a unidade de operação de filtro 74-1.
[00283] A unidade de operação de filtro 74-1 executa uma operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro 73-1 para cada linha sob o controle do controlador 77 usando os dados de imagem armazenados na memória de imagem 71 e os coeficientes de filtro lidos da memória de coeficiente 76. A unidade de operação de filtro 74-1 produz os dados de imagem tendo sido sujeitos ao processo de filtragem ao seletor 75.
[00284] Quando o limite é um limite de linha inter-LCU, a unidade determinadora de limite de linha/limite de bloco 72-2 executa determinação de limite interbloco sob o controle do controlador 77. Isto é, a unidade determinadora de limite de linha/limite de bloco 72-2 executa o processo de determinação de limite interbloco para cada bloco usando os dados de imagem lidos da memória de imagem 71 e detecta um limite interbloco no qual o processo de filtragem é executado. A unidade determinadora de limite de linha/limite de bloco 72-2 produz os resultados de detecção para a unidade determinadora de intensidade de filtro de limite de linha 73-2.
[00285] Quando o limite é um limite de linha inter-LCU, a unidade determinadora de intensidade de filtro de limite de linha 73-2 determina a intensidade de filtro da maneira descrita acima sob o controle do controlador 77. Isto é, a unidade determinadora de intensidade de filtro de limite de linha 73-2 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca para cada linha usando os dados de imagem de dois blocos adjacentes com um limite interbloco interposto, provido da memória de imagem 71 e produz os resultados de
76/122 determinação para a unidade de operação de filtro de limite de linha 74-2. [00286] A unidade de operação de filtro de limite de linha 74-2 executa a operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro de limite de linha 73-2 para cada linha sob o controle do controlador 77 usando os dados de imagem armazenados na memória de imagem 71 e os coeficientes de filtro lidos da memória de coeficiente 76. A unidade de operação de filtro de limite de linha 74-2 produz os dados de imagem tendo sido sujeitos ao processo de filtragem ao seletor 75.
[00287] O seletor 75 seleciona qualquer um dos dados de imagem da unidade de operação de filtro 74-1 e dos dados de imagem da unidade de operação de filtro de limite de linha 74-2 sob o controle do controlador 77 e produz os dados de imagem selecionados para a memória de quadro 25. [00288] A memória de coeficiente 76 armazena coeficientes de filtro usados para a operação de filtragem do processo de filtragem de antibloqueio. A memória de coeficiente 76 lê os coeficientes de filtro armazenados nela e provê os coeficientes de filtro lidos para a unidade de operação de filtro 74-1 e a unidade de operação de filtro de limite de linha 74-2.
[00289] O controlador 77 controla as unidades respectivas da unidade de filtragem de antibloqueio 24. Por exemplo, o controlador 77 controla a memória de imagem 71 de modo a armazenar dados de imagem correspondendo a um número predeterminado de linhas no lado inferior no bloco e lê os dados de imagem armazenados na memória de imagem 71. O controlador 77 é configurado para incluir uma unidade determinadora de linha intra-LCU 77A.
[00290] A unidade determinadora de linha intra-LCU 77A determina se um limite é um limite de linha inter-LCU em unidades de bloco respectivas nas quais o processo é executado sequencialmente em uma direção de varredura de raster, e provê os resultados de determinação para a unidade determinadora de limite de bloco 72-1, a unidade determinadora de intensidade de filtro 73-1 e a unidade de operação de filtro 74-1 de forma que
77/122 as unidades executem o processo quando o limite não é o limite de linha. Além disso, a unidade determinadora de linha intra-LCU 77A também provê os resultados de determinação para a unidade determinadora de limite de linha/limite de bloco 72-2, a unidade determinadora de intensidade de filtro de limite de linha 73-2 e a unidade de operação de filtro de limite de linha 74-2 de forma que as unidades executem o processo quando o limite é o limite de linha. Adicionalmente, a unidade determinadora de linha intra-LCU 77A provê os resultados de determinação para o seletor 75 de forma que o seletor 75 selecione os dados de imagem da unidade de operação de filtro de limite de linha 74-2 quando o limite é o limite de linha e seleciona os dados de imagem da unidade de operação de filtro 74-1 quando o limite não é o limite de linha.
[00291] A unidade de filtragem de antibloqueio 24 ilustrada na Figura 22 pode ser configurada com antecedência para executar o processo de R2W2, por exemplo, e pode ser configurada para poder controlar a faixa de processamento de filtro e a faixa de operação de filtragem semelhantemente ao exemplo da Figura 9.
Operação de unidade de filtragem de antibloqueio [00292] A seguir, o processo de antibloqueio da unidade de filtragem de antibloqueio 24 da Figura 22 será descrito com referência ao fluxograma da Figura 23. No exemplo da Figura 23, um caso onde o processo de R2W2 é executado será descrito.
[00293] Na etapa S91, a unidade determinadora de linha intra-LCU 77A determina se um filtro aplicado é um filtro vertical de um limite de LCU em unidades de bloco respectivas nas quais o processo é executado sequencialmente em uma direção de varredura de raster. Isto é, na etapa S91, é determinado se um limite é um limite de linha inter-LCU e o filtro aplicado é um filtro vertical.
[00294] Quando é determinado na etapa S91 que o filtro aplicado é um
78/122 filtro vertical de um limite de LCU, o fluxo procede à etapa S92. Na etapa S92, a unidade determinadora de limite de linha/limite de bloco 72-2 executa determinação de limite interbloco de um limite de linha sob o controle do controlador 77 quando o limite é um limite de linha inter-LCU.
[00295] Isto é, a unidade determinadora de limite de linha/limite de bloco 72-2 executa o processo de determinação de limite interbloco para cada bloco de acordo com a Expressão (70) descrita acima usando os dados de imagem lidos da memória de imagem 71 e detecta um limite interbloco no qual o processo de filtragem é executado. A unidade determinadora de limite de linha/limite de bloco 72-2 produz os resultados de detecção para a unidade determinadora de intensidade de filtro de limite de linha 73-2.
[00296] Na etapa S93, a unidade determinadora de intensidade de filtro de limite de linha 73-2 determina a intensidade de filtro do limite de linha como descrito acima sob o controle do controlador 77 quando o limite é o limite de linha inter-LCU.
[00297] Isto é, a unidade determinadora de intensidade de filtro de limite de linha 73-2 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca usando os dados de imagem de dois blocos adjacentes com o limite interbloco, provido da memória de imagem 71. Um modo de filtragem forte é determinado de acordo com a Expressão (71) descrita acima. Além disso, um modo de filtragem fraca é determinado de acordo com os primeiros termos das Expressões (64) a (66) descritas acima. A unidade determinadora de intensidade de filtro de limite de linha 73-2 produz os resultados de determinação para a unidade de operação de filtro de limite de linha 74-2.
[00298] Na etapa S94, a unidade de operação de filtro de limite de linha 74-2 executa um processo de filtragem do limite de linha sob o controle do controlador 77. Isto é, a unidade de operação de filtro de limite de linha 74-2 executa uma operação de filtragem com a intensidade de filtro
79/122 determinada pela unidade determinadora de intensidade de filtro de limite de linha 73-2 usando os dados de imagem armazenados na memória de imagem 71 e o coeficiente de filtro lido da memória de coeficiente 76.
[00299] No caso da filtragem forte, a operação de filtragem é executada de acordo com as Expressões (56) a (60) descritas acima. Além disso, no caso da filtragem fraca, a operação de filtragem é executada de acordo com a segundo e terceira cláusulas das Expressões (64) a (66) descritas acima. A unidade de operação de filtro de limite de linha 74-2 produz os dados de imagem tendo sido sujeitos ao processo de filtragem ao seletor 75.
[00300] Na etapa S95, a unidade determinadora de linha intra-LCU 77A determina se uma linha atual é a última oitava linha da LCU. Quando é determinado na etapa S95 que a linha atual não é a última oitava linha da LCU, o fluxo retorna à etapa S93 e os processos subsequentes são repetidos. [00301] Além disso, quando é determinado na etapa S95 que a linha atual é a última oitava linha da LCU, o fluxo procede à etapa S100.
[00302] Por outro lado, quando é determinado na etapa que S91 que o filtro aplicado não é o filtro vertical do limite de LCU, o fluxo procede à etapa S96. Na etapa S96, a unidade determinadora de limite de bloco 72-1 executa determinação de limite interbloco sob o controle do controlador 77.
[00303] Isto é, a unidade determinadora de limite de bloco 72-1 executa o processo de determinação de limite interbloco para cada bloco de acordo com a Expressão (68) descrita acima usando os dados de imagem lidos da memória de imagem 71 e detecta um limite interbloco no qual o processo de filtragem é executado. A unidade determinadora de limite de bloco 72-1 produz os resultados de detecção para a unidade determinadora de intensidade de filtro 73-1.
[00304] Na etapa S97, a unidade determinadora de intensidade de filtro 73-1 determina a intensidade de filtro da maneira descrita acima sob o controle do controlador 77. Isto é, a unidade determinadora de intensidade de
80/122 filtro 73-1 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca para cada linha usando os dados de imagem de dois blocos adjacentes com o limite interbloco interposto, provido da memória de imagem 71. Um modo de filtragem forte é determinado de acordo com a Expressão (69) descrita acima. Um modo de filtragem fraca é determinado de acordo com os primeiros termos das Expressões (61) a (63) descritas acima. A unidade determinadora de intensidade de filtro 73-1 produz os resultados de determinação para a unidade de operação de filtro 74-1.
[00305] Na etapa S98, a unidade de operação de filtro 74-1 executa uma operação de filtragem do limite de bloco sob o controle do controlador 77. Isto é, a unidade de operação de filtro 74-1 executa a operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro 73-1 para cada linha usando os dados de imagem armazenados na memória de imagem 71 e os coeficientes de filtro lidos da memória de coeficiente 76.
[00306] No caso da filtragem forte, a operação de filtragem é executada de acordo com as Expressões (50) a (55) descritas acima. Além disso, no caso da filtragem fraca, a operação de filtragem é executada de acordo com a segunda e terceira cláusulas das Expressões (61) a (63) descritas acima. A unidade de operação de filtro 74-1 produz os dados de imagem tendo sido sujeitos ao processo de filtragem ao seletor 75.
[00307] Na etapa S99, a unidade determinadora de linha intra-LCU 77A determina se uma linha atual é a última oitava linha da LCU. Quando é determinado na etapa S99 que a linha atual não é a última oitava linha da LCU, o fluxo retorna à etapa S97 e os processos subsequentes são executados repetidamente.
[00308] Além disso, quando é determinado na etapa S99 que a linha atual é a última oitava linha da LCU, o fluxo procede à etapa S100.
81/122 [00309] Na etapa S100, a unidade determinadora de linha intra-LCU 77A determina se um bloco atual é o último bloco da imagem. Isto é, na etapa S100, é determinado se o limite é um limite de linha de outro bloco na tela.
[00310] Quando é determinado na etapa S100 que o bloco é o último bloco da imagem, o processo de antibloqueio termina. Quando é determinado na etapa S100 que o bloco não é o último bloco da imagem, o fluxo retorna à etapa S91, e os processos subsequentes são executados repetidamente na próxima LCU na ordem de varredura de raster.
[00311] No exemplo da Figura 22, a unidade determinadora de linha intra-LCU 77A seleciona se os coeficientes usados para o caso diferente do limite de linha na unidade de operação de filtro 74-1 ou os coeficientes para o caso do limite de linha na unidade de operação de filtro de limite de linha 742 serão usados. Desta maneira, o processo de filtragem no limite de linha e o processo de filtragem nas posições diferentes do limite de linha são comutados.
[00312] Em contraste, só um tipo de coeficientes pode ser usado e o endereço do pixel a ser lido pode ser controlado de forma que o processo de filtragem no limite de linha e o processo de filtragem nas posições diferentes do limite de linha sejam comutados.
[00313] Por exemplo, cálculo de P00 na filtragem forte baseada em R2W2 será descrito como um exemplo. Na Expressão (50) para a filtragem forte do esquema de HEVC, um termo relativo a p(bloco BKu) é p2i + 2*P1i + 2*q0i.
[00314] Por outro lado, na Expressão (56) para a filtragem forte do esquema de HEVC, um termo relativo a p(bloco BKu) é 4*P1i + q0i. [00315] Aqui, 4*P1i + q0i = q0i + 2*P1i + 2*P1i.
[00316] Isto é, o termo relativo a p na Expressão (50) e o termo relativo a p na Expressão (56) também usam coeficientes 1, 2, e 2 nessa ordem do lado esquerdo. Assim, substituindo (mudando os endereços de leitura) os valores de
82/122 pixel a serem multiplicados com os coeficientes usando os mesmos coeficientes, é possível trocar entre o processo de filtragem no limite de linha e o processo de filtragem nas posições diferentes do limite de linha.
14. Sétima concretização de unidade de filtragem de antibloqueio Exemplo de configuração de unidade de filtragem de antibloqueio [00317] Figura 24 ilustra a configuração de uma sétima concretização da unidade de filtragem de antibloqueio.
[00318] No exemplo da Figura 24, a unidade de filtragem de antibloqueio 24 é configurada para incluir uma memória de imagem 71, uma unidade determinadora de limite de bloco 72, uma unidade determinadora de intensidade de filtro 73, uma unidade de operação de filtro 74, uma memória de coeficiente 76 e um controlador 77.
[00319] Na unidade de filtragem de antibloqueio 24 da Figura 24, a memória de imagem 71, a memória de coeficiente 76 e o controlador 77 são iguais àqueles da unidade de filtragem de antibloqueio 24 da Figura 22. [00320] A unidade de filtragem de antibloqueio 24 da Figura 24 é diferente da unidade de filtragem de antibloqueio 24 da Figura 22 visto que a unidade determinadora de limite de bloco 72-1 e a unidade determinadora de limite de linha/limite de bloco 72-2 são mudadas coletivamente para a unidade determinadora de limite de bloco 72. A unidade de filtragem de antibloqueio 24 da Figura 24 é diferente da unidade de filtragem de antibloqueio 24 da Figura 22 visto que a unidade determinadora de intensidade de filtro 73-1 e a unidade determinadora de intensidade de filtro de limite de linha 73-2 são mudadas coletivamente para a unidade determinadora de intensidade de filtro 73. A unidade de filtragem de antibloqueio 24 da Figura 24 é diferente da unidade de filtragem de antibloqueio 24 da Figura 22 visto que a unidade de operação de filtro 74-1 e a unidade de operação de filtro de limite de linha 74-2 são mudadas coletivamente para a unidade de operação de filtro 74.
[00321] Adicionalmente, a unidade de filtragem de antibloqueio 24 da
83/122
Figura 24 é diferente da unidade de filtragem de antibloqueio 24 da Figura 22 visto que a unidade determinadora de linha intra-LCU 77A do controlador 77 é mudada para uma unidade determinadora de linha intra-LCU 77B.
[00322] Isto é, a unidade determinadora de linha intra-LCU 77B controla o endereço do pixel lido da memória de imagem 71 como descrito acima por meio de um exemplo de cálculo de P00 na filtragem forte baseada em R2W2. Assim, a memória de imagem 71 lê pixels baseada no controle da unidade determinadora de linha intra-LCU 77B e provê os pixels lidos para a unidade determinadora de limite de bloco 72, a unidade determinadora de intensidade de filtro 73 e a unidade de operação de filtro 74.
[00323] A unidade determinadora de limite de bloco 72 executa determinação de limite interbloco. Isto é, a unidade determinadora de limite de bloco 72 executa o processo de determinação de limite interbloco descrito acima para cada bloco usando os dados de imagem lidos da memória de imagem 71 e detecta um limite interbloco no qual o processo de filtragem é executado. A unidade determinadora de limite de bloco 72 produz os resultados de detecção para a unidade determinadora de intensidade de filtro 73.
[00324] A unidade determinadora de intensidade de filtro 73 determina a intensidade de filtro da maneira descrita acima. Isto é, a unidade determinadora de intensidade de filtro 73 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca para cada linha usando os dados de imagem de dois blocos adjacente com o limite interbloco interposto, provido da memória de imagem 71 e produz os resultados de determinação para a unidade de operação de filtro 74.
[00325] A unidade de operação de filtro 74 executa a operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro 73 para cada linha usando os dados de imagem armazenados na memória de imagem 71 e os coeficientes de filtro lidos da memória de coeficiente 76. A unidade de operação de filtro 74 produz os dados de imagem
84/122 tendo sido sujeitos ao processo de filtragem à memória de quadro 25.
[00326] O processo de filtragem de antibloqueio da unidade de filtragem de antibloqueio 24 da Figura 24 é basicamente igual ao processo de filtragem antibloqueio descrito acima com referência à Figura 23, e a descrição disso não será provida.
[00327] Como acima, pixels que não puderam ser referidos devido à faixa de imagem estreitada usada para a operação de filtragem são interpolados usando a inclinação da forma de onda usada na determinação de limite interbloco. Como resultado, o processo de antibloqueio quando os valores de pixel têm uma inclinação pode ser executado até mesmo quando a faixa de imagem no limite de linha inter-LCU é estreitado.
[00328] Além disso, na determinação de limite interbloco e determinação de filtragem forte/fraca, os pixels que não puderam ser referidos devido à faixa de imagem estreitada usada para a operação de filtragem são interpolados usando a inclinação e enchimento da forma de onda usada na determinação de limite interbloco. Como resultado, o processo de determinação de antibloqueio quando os valores de pixel têm uma inclinação pode ser executado até mesmo quando a faixa de imagem no limite de linha inter-LCU é estreitado.
[00329] Desta maneira, no limite de linha inter-LCU, até mesmo quando a faixa de imagem é estreitada, é possível reduzir a memória de linha enquanto mantendo a função do processo de antibloqueio.
15. Oitava concretização de unidade de filtragem de antibloqueio Exemplo de configuração de unidade de filtragem de antibloqueio [00330] Figura 25 ilustra a configuração de uma oitava concretização da unidade de filtragem de antibloqueio.
[00331] No exemplo da Figura 25, a unidade de filtragem de antibloqueio 24 é configurada para incluir uma memória de imagem 81, uma unidade determinadora de limite de bloco 82, uma unidade determinadora de
85/122 intensidade de filtro 83, uma unidade de operação de filtro 84, uma memória de coeficiente 85 e um controlador 86.
[00332] A memória de imagem 81 é uma unidade que corresponde à memória de imagem 71 da Figura 22 e é configurada como uma memória de linha. A memória de imagem 81 armazena dados de imagem providos do somador 23. A memória de imagem 81 lê os dados de imagem armazenados nela e provê os dados de imagem lidos para a unidade determinadora de limite de bloco 82, a unidade determinadora de intensidade de filtro 83 e a unidade de operação de filtro 84.
[00333] Nas posições diferentes do limite de linha, os dados de imagem não são armazenados na memória de imagem 81, mas pode haver caso onde os dados de imagem providos do somador 23 são providos às unidades respectivas e processados. Porém, no exemplo da Figura 25, por causa de conveniência, é descrito que os dados de imagem tendo atravessado a memória de imagem 81 são processados.
[00334] A unidade determinadora de limite de bloco 82 deriva limites todas oito linhas sob o controle do controlador 86 para calcular parâmetros usados para determinação e executa determinação de limite interbloco todas quatro linhas. Isto é, a unidade determinadora de limite de bloco 82 deriva um limite entre TU e PU usando os dados de imagem lidos da memória de imagem 81 e deriva um valor de BS. Adicionalmente, a unidade determinadora de limite de bloco 82 obtém uma média dos parâmetros de quantização QP de duas regiões adjacentes com um limite atual interposto para calcular um QP médio (parâmetro de quantização) e calcula os parâmetros tc e β baseado no QP médio calculado.
[00335] Além disso, a unidade determinadora de limite de bloco 82 determina se ou não executar filtragem todas quatro linhas usando os dados de imagem de dois blocos adjacentes com o limite interbloco interposto, provido da memória de imagem 81 e dos parâmetros calculados. A unidade
86/122 determinadora de limite de bloco 82 provê os parâmetros calculados para a unidade determinadora de intensidade de filtro 83 junto com os resultados de determinação de limite.
[00336] A unidade determinadora de intensidade de filtro 83 determina a intensidade de filtro todas quatro linhas sob o controle do controlador 86. Isto é, quando a unidade determinadora de limite de bloco 82 determina que filtragem é para ser executada, a unidade determinadora de intensidade de filtro 83 determina se o processo de filtragem será executado em um modo de filtragem forte ou um modo de filtragem fraca e produz os resultados de determinação para a unidade de operação de filtro 84.
[00337] A unidade de operação de filtro 84 executa a operação de filtragem com a intensidade de filtro determinada pela unidade determinadora de intensidade de filtro 83 todas quatro linhas usando os dados de imagem armazenados na memória de imagem 81 e os coeficientes de filtro lidos da memória de coeficiente 85 sob o controle do controlador 86. Em particular, quando a unidade determinadora de intensidade de filtro 83 determina que filtragem forte é para ser executada, a unidade de operação de filtro 84 executa um processo de filtragem baseado em clipping usando as Expressões (106) a (111) descritas acima. A unidade de operação de filtro 84 produz os dados de imagem tendo sido sujeitos ao processo de filtragem à memória de quadro 25 na fase subsequente.
[00338] A memória de coeficiente 85 armazena coeficientes de filtro usados na operação de filtragem do processo de filtragem de antibloqueio. A memória de coeficiente 85 lê os coeficientes de filtro armazenados nela e provê os coeficientes de filtro para a unidade de operação de filtro 84.
[00339] O controlador 86 recebe informação (informação de
LIGA/DESLIGA de filtro de antibloqueio, valores de deslocamento de parâmetros β e tc, e parâmetros de clipping) de uma unidade de operação (não ilustrada) (no caso do lado de decodificação, o decodificador sem perda 52). Além
87/122 disso, o controlador 86 também é provido com informação de modo de predição e parâmetros necessário para filtro de antibloqueio tais como parâmetros de quantização.
[00340] Por exemplo, o controlador 86 provê a informação de entrada para a unidade correspondente e controla as unidades respectivas da unidade de filtragem de antibloqueio 24 baseado na informação de LIGA/DESLIGA de entrada.
[00341] O controlador 86 controla a memória de imagem 81 de modo a armazenar dados de imagem correspondendo a um número predeterminado de linhas no lado inferior no bloco e lê os dados de imagem armazenados na memória de imagem 81. Além disso, quando de filtragem forte é executada, o controlador 86 controla a unidade de operação de filtro 84 para executar um processo de filtragem forte baseado em clipping. Neste caso, o controlador 86 provê parâmetros (por exemplo, um valor de clipping pv e um valor de multiplicação de tc do valor de clipping) relativo ao processo de clipping para a unidade de operação de filtro 84.
Operação de unidade de filtragem de antibloqueio [00342] A seguir, o processo de antibloqueio da unidade de filtragem de antibloqueio 24 da Figura 25 será descrito com referência ao fluxograma da Figura 26.
[00343] Por exemplo, informação de LIGA/DESLIGA, um valor de deslocamento de β, um valor de deslocamento de Tc, e parâmetros relativos ao processo de clipping são entrados ao controlador 86 por uma unidade de operação (não ilustrada) (no caso do lado de decodificação, o decodificador sem perda 52). Além disso, o controlador 86 também é provido com informação de modo de predição e parâmetros necessários para o filtro de antibloqueio tais como parâmetros de quantização.
[00344] Na etapa S201, o controlador 86 fixa deslocamentos de filtro (deslocamentos de β e Tc) e provê a informação de deslocamento fixada para
88/122 a unidade determinadora de intensidade de filtro 83.
[00345] Na etapa S202, o controlador 86 determina se o filtro de antibloqueio pode ser usado baseado na informação de LIGA/DESLIGA. Quando é determinado na etapa S202 que o filtro de antibloqueio não pode ser usado, o processo de filtragem de antibloqueio termina.
[00346] Quando é determinado na etapa S202 que o filtro de antibloqueio pode ser usado, o controlador 86 envia uma notificação disso para a unidade determinadora de limite de bloco 82, a unidade determinadora de intensidade de filtro 83 e a unidade de operação de filtro 84, e o fluxo procede à etapa S203. Neste caso, os parâmetros necessários e similar também são providos do controlador 86 às unidades respectivas.
[00347] Na etapa S203, a unidade determinadora de limite de bloco 82 deriva um limite entre TU e PU todas 8 linhas. Na etapa S204, a unidade determinadora de limite de bloco 82 deriva um valor de intensidade de limite (BS) baseado na informação sobre o limite entre TU e PU derivado na etapa S203 e a informação de modo de predição e similar provida do controlador 86.
[00348] Na etapa S205, a unidade determinadora de limite de bloco 82, a unidade determinadora de intensidade de filtro 83 e a unidade de operação de filtro 84 executam um processo de filtragem de limite de luminância. No processo de filtragem de limite de luminância, a filtragem de limite de luminância é executada nos sinais de luminância pelo processo da etapa S205, que será descrita com referência à Figura 27.
[00349] Na etapa S206, a unidade determinadora de limite de bloco 82, a unidade determinadora de intensidade de filtro 83 e a unidade de operação de filtro 84 executam um processo de filtragem de limite de crominância. Pelo processo da etapa S206, filtragem de limite de crominância é executada em sinais de crominância.
[00350] Na etapa S207, o controlador 86 determina se todos os limites foram processados. Quando é determinado na etapa S207 que todos os limites
89/122 não foram processados, o fluxo retorna à etapa S205 e os processos subsequentes são executados repetidamente. Quando é determinado na etapa S207 que todos os limites foram processados, o fluxo procede à etapa S208. [00351] Na etapa S208, o controlador 86 determina se todas as CUs foram processadas. Quando é determinado na etapa S208 que todas as CUs não foram processadas, o fluxo retorna à etapa S203 e os processos subsequentes são executados repetidamente.
[00352] Quando é determinado na etapa S208 que todas as CUs foram processadas, o processo de filtragem de antibloqueio termina.
Exemplo de processo de filtragem de limite de luminância [00353] A seguir, o processo de filtragem de limite de luminância na etapa S205 da Figura 26 será descrito com referência ao fluxograma da Figura 27. [00354] Na etapa S231, a unidade determinadora de limite de bloco 82 determina se o valor de BS é maior do que 0 todas oito linhas. Quando é determinado na etapa S231 que o valor de BS não é maior do que 0, o processo de filtragem de limite de luminância termina. Isto é, neste caso, o processo de filtragem da unidade de operação de filtro 84 não é executado no limite de luminância, e os valores de pixel antes do filtragem são produzidos como eles estão.
[00355] Quando é determinado na etapa S231 que o valor de BS é maior do que 0, o fluxo procede à etapa S232. Na etapa S232, a unidade determinadora de limite de bloco 82 obtém uma média de parâmetros de quantização QP de duas regiões adjacentes a um limite atual usando os valores de pixel da memória de imagem 81 todas oito linhas para calcular um QP médio (parâmetro de quantização). Neste caso, os parâmetros de quantização que QP são providos do controlador 86.
[00356] Na etapa S233, a unidade determinadora de limite de bloco 82 calcula os parâmetros tc e β baseado no QP médio calculado na etapa S232 todas oito linhas.
90/122 [00357] Na etapa S234, a unidade determinadora de limite de bloco 82 executa determinação de liga/desliga filtro todas quatro linhas. Isto é, a unidade determinadora de limite de bloco 82 executa determinação de liga/desliga filtro todas quatro linhas usando os parâmetros β calculados e similar. Este processo de determinação usa a Expressão (68) descrita acima, por exemplo.
[00358] Os resultados de determinação de liga/desliga na etapa S234 são providos à unidade determinadora de intensidade de filtro 83 junto com os parâmetros calculados como os resultados de determinação de limite.
[00359] Além disso, na etapa S235, a unidade determinadora de intensidade de filtro 83 executa determinação de intensidade de filtro todas quatro linhas. Isto é, a unidade determinadora de intensidade de filtro 83 executa determinação de intensidade de filtro todas quatro linhas usando os parâmetros β, tc, e similar calculados pela unidade determinadora de limite de bloco 82. Este processo de determinação usa os primeiros termos das Expressões (69) e (61) a (63) descritas acima, por exemplo.
[00360] Os resultados de determinação de liga/desliga na etapa S234 e os resultados de determinação de intensidade de filtro na etapa S235 são providos à unidade de operação de filtro 84. Neste caso, o parâmetro tc é provido também à unidade de operação de filtro 84.
[00361] Na etapa S236, a unidade de operação de filtro 84 determina se filtragem forte é para ser aplicada às quatro linhas atuais baseado nos resultados de determinação da unidade determinadora de intensidade de filtro 83. Quando é determinado na etapa S236 que filtragem forte é para ser aplicada às quatro linhas atuais, o fluxo procede à etapa S237.
[00362] Na etapa S237, a unidade de operação de filtro 84 executa um processo de filtragem forte baseado em clipping usando as Expressões (106) a (111) descritas acima sob o controle do controlador 86. A unidade de operação de filtro 84 produz os valores de pixel depois do processo de
91/122 filtragem para a fase subsequente.
[00363] Quando é determinado na etapa S236 que filtragem forte não é para ser aplicada, a unidade de operação de filtro 84 determina na etapa S238 se filtragem fraca é para ser aplicada às quatro linhas atuais baseado nos resultados de determinação da unidade determinadora de intensidade de filtro 83. Quando é determinado na etapa S238 que filtragem fraca é para ser aplicada, o fluxo procede à etapa 239.
[00364] Na etapa S239, a unidade de operação de filtro 84 executa um processo de filtragem fraca. A unidade de operação de filtro 84 produz os valores de pixel depois do processo de filtragem para a fase subsequente. [00365] Quando é determinado na etapa S238 que filtragem fraca não é para ser aplicada, o fluxo procede à etapa 240. Na etapa S240, a unidade de operação de filtro 84 não executa o processo nas quatro linhas atuais baseado nos resultados de determinação da unidade determinadora de intensidade de filtro 83, mas produz os valores de pixel depois do processo de filtragem para a fase subsequente como eles estão.
[00366] Na etapa S240, a unidade de operação de filtro 84 determina se o processo para oito linhas foi completado, e termina o processo de antibloqueio de sinal de luminância quando é determinado que o processo para oito linhas foi completado. Quando é determinado na etapa S240 que o processo para oito linhas não foi completado, o fluxo retorna à etapa S234 e os processos subsequentes são executados repetidamente.
[00367] Como acima, desde que o processo de filtragem forte baseado em clipping é executado quando é determinado que filtragem forte é para ser aplicada, é possível suprimir a influência de um desassociação do processo de determinação e uma imperfeição do processo de determinação tanto quanto possível. Deste modo, é possível permitir ao processo de antibloqueio aplicar filtragem apropriadamente.
[00368] Na descrição anterior, a aproximação linear e processo de
92/122 filtragem forte baseado em clipping foram descritos. Na descrição de aproximação linear, embora os casos de R2W2 e R2W1 tenham sido descritos, o processo de aproximação linear para os casos de R3W2 e R1W1 pode ser executado da mesma maneira.
16. Nona concretização
Exemplo de R3W2 [00369] A seguir, o caso de R3W2 será descrito com referência à Figura
28. No exemplo da Figura 28, círculos brancos sobre linha sólida indicam valores de pixel dos pixels respectivos p2i, p1i, p0i, q0i, q1, e q2i perto do limite BB ilustrado na Figura 16 antes do filtro de antibloqueio. Como ilustrado na Figura 28, uma abertura entre os blocos BKu e BKl é D = p0i - q0i.
[00370] Além disso, círculos sobre linha de ponto indicam os valores de pixel respectivos depois de filtragem forte de sinais de luminância no esquema de HEVC. Isto é, neste caso, a diferença entre os valores de pixel antes e depois da filtragem forte é 1/8*D para q2i, 2/8*D para q1i, e 3/8*D para q0i. Semelhantemente, a diferença entre os valores de pixel antes e depois da filtragem forte é 3/8*D para p0i, 2/8*D para p1i e 1/8*D para p2i. [00371] Aqui, considerando o processo de filtragem de sinal de luminância para o caso de R3W2, o pixel p2i não é sujeito à filtragem. Isto é, o pixel p2i tem um valor de pixel indicado por um círculo de ponto na linha sólida, e uma diferença para o valor de pixel p1i indicado pela linha de ponto aumenta. Assim, os valores de pixel têm um declive abrupto só entre os valores de pixel de p2i indicados pelo círculo de ponto na linha sólida e p1i indicado pela linha de ponto.
[00372] Assim, no caso de R3W2, a fim de fazer este declive suave, uma diferença Áp1, entre o valor de pixel (círculo branco) de p0i antes de filtragem e os valores de pixel (círculo hachurado) depois de filtragem forte é expressa através da Expressão (112) abaixo.
Fórmula Matemática 34
93/122
Δρί j = 1/16*(-3*D+2*4) = (-3*(pOi+qOi)+8)»4 = (13*pOj +3*qO; +8)»4-p1 j = (4*p2|+5*p1 ί+4*ρ0ί+3*ρ0|+8)»4-ρ1, · · · (112) [00373] Isto é, a Expressão (112) é derivada de forma que ΔρΕ tome 3/16*D que é uma metade da diferença Δp0i entre o valor de pixel (círculo branco) de p0i antes de filtragem e os valores de pixel (círculo hachurado) depois de filtragem forte.
[00374] Desde que o segundo termo à direita lado da última equação de aproximação da Expressão (112) é o valor de pixel (círculo branco) antes de filtragem, o primeiro termo no lado direito da última equação de aproximação da Expressão (112) representa o valor de pixel depois de filtragem forte, de p1i, indicado pelo círculo hachurado.
[00375] Isto é, os coeficientes multiplicados aos valores de pixel respectivos no primeiro termo no lado direito da última equação de aproximação da Expressão (112) são usados como os coeficientes da filtragem forte para o caso de R3W2. Como resultado, os resultados da filtragem forte para o caso de R3W2 podem ser feitos suaves quando comparado ao declive da linha de ponto da técnica convencional como indicado pelo declive da linha em negrito na Figura 28.
[00376] A expressão de determinação para filtrar forte do caso de R3W2 é expressa através da Expressão (113) abaixo.
Fórmula Matemática 35 d < (3»2) d = abs (q22-2*q12+q02) +abs (p25-2*p15+pO5) +abs (q22-2*q12+q02) +abs (q25-2*q15+q05) and (|p2j — pOj | + IqO, -q3, |) < (3»3) and|pOj—qOj|<((5*tc+l)»1) ··· (113) [00377] Uma expressão aparecendo depois do primeiro e da Expressão (113) para determinar a filtragem forte do caso de R3W2 é diferente de uma expressão aparecendo depois do primeiro e da Expressão
94/122 (69) para determinar a filtragem forte do esquema de HEVC. No caso de R3W2, desde que p3i não pôde ser referido, enchimento (isto é, p3i = p2i) não é aplicado.
[00378] Assim, as duas expressões só são diferentes só visto que a expressão (Ip3i - p0i << 1l + Iq0i - q3il) < (β >> 3)) aparecendo depois do primeiro e da Expressão (69) é mudado para a expressão (Ip2i - p0i << 1l + Iq0i q3il) < (β >> 3)) aparecendo depois do primeiro e da Expressão (113).
[00379] Além disso, a filtragem forte do caso de R3W2, uma expressão relativa a p10 é diferente daquela da Expressão (52) para a filtragem forte do esquema de HEVC de acordo com a Expressão (112) descrita acima como ilustrado na Expressão (114).
Fórmula Matemática 36 p10 = Cl ip0_256«4*p2i+5*p1 i+4*p0i+3*q0i+8)»4); i = 0, 7 • · · (114) [00380] Na filtragem forte do caso de R3W2, a Expressão (54) relativa a P20 da filtragem forte do esquema de HEVC não é necessária e é omitida. [00381] Desta maneira, a filtragem forte do caso de R3W2 pode ser executada sem deteriorar a precisão.
[00382] Além disso, na especificação presente, o tamanho das unidades de processamento do filtro de antibloqueio pode ser o tamanho de macroblocos do H.264/AVC, o tamanho de blocos de árvore de codificação das unidades de codificação de HEVC, e similar, por exemplo. Além disso, na especificação presente, o termo bloco ou macrobloco também inclui uma unidade de codificação (CU), uma unidade de predição (PU) e uma unidade de transformada (TU) no contexto de HEVC.
[00383] Uma série de processos descritos nesta especificação pode ser executada por hardware, software, ou uma combinação disso. Quando os processos são executados através de software, um programa incluindo a sequência de processo pode ser instalado e executado por uma memória de um computador montado em hardware exclusivo. Alternativamente, o
95/122 programa pode ser instalado e executado por um computador de propósito geral executando vários processos.
[00384] Por exemplo, o programa pode ser gravado com antecedência em um disco rígido ou uma memória só de leitura (ROM) como um meio de gravação. Alternativamente, o programa pode ser gravado temporariamente ou permanentemente em um disco magnético (tal como um disco flexível), um disco óptico (tal como um CD-ROM (memória só de leitura de disco compacto), um disco MO (magneto-óptico), ou um DVD (disco versátil digital)), e um meio de armazenamento removível (não mostrado) (tal como uma memória de semicondutor), por exemplo. Tal meio de armazenamento removível pode ser provido como denominado software de pacote.
[00385] O programa pode ser transferido por modo sem fios de um site de carregamento ao computador ou pode ser transferido por fios ao computador por uma rede tal como uma rede local (LAN) ou a Internet além de instalar o programa no computador do meio de gravação removível descrito acima. O computador pode receber o programa transferido desta maneira e instalar o mesmo em um meio de gravação tal como um disco rígido embutido.
19. Décima concretização
Aplicação a codificação e decodificação de imagem de multivisualização [00386] A série de processos pode ser aplicada à codificação e decodificação de imagem de multivisualização. Figura 29 ilustra um exemplo de um esquema de codificação de imagem de multivisualização.
[00387] Como ilustrado na Figura 29, uma imagem de multivisualização inclui imagens de uma pluralidade de visões, e uma imagem de uma única visualização predeterminada entre a pluralidade de visões é designada como uma imagem de visualização básica. As imagens de visualização respectivas diferentes da imagem de visualização básica são tratadas como imagens de visualização não básica.
96/122 [00388] Quando a imagem de multivisualização como ilustrada na Figura 29 é codificada, nas visões respectivas (mesmas visões), os parâmetros (por exemplo, um valor de clipping e um fator de multiplicação relativo a tc do valor de clipping) relativos ao processo de clipping para filtragem forte podem ser fixados. Além disso, nas visões respectivas (visões diferentes), os parâmetros relativos ao processo de clipping para filtragem forte fixados para as outras visões podem ser compartilhados.
[00389] Neste caso, os parâmetros relativos ao processo de clipping fixado a uma visualização básica são usados em pelo menos uma visualização não básica. Alternativamente, por exemplo, os parâmetros relativos ao processo de clipping fixados a uma visualização não básica (view_id = 0) são usados em pelo menos uma da visualização básica e uma visualização não básica (view_id = 1).
[00390] Adicionalmente, nas visões respectivas (mesmas visões), os parâmetros relativos ao processo de clipping para filtragem forte podem ser fixados. Além disso, nas visões respectivas (visões diferentes), os parâmetros relativos ao processo de clipping para filtragem forte fixados para as outras visões podem ser compartilhados.
[00391] Neste caso, os parâmetros relativos ao processo de clipping fixados a uma visualização básica são usados em pelo menos uma visualização não básica. Alternativamente, por exemplo, os parâmetros relativos ao processo de clipping fixados a uma visualização não básica (view_id = 0) são usados em pelo menos uma da visualização básica e uma visualização não básica (view_id = 1).
[00392] Desta maneira, é possível permitir ao processo de antibloqueio para aplicar filtragem apropriadamente.
Dispositivo de codificação de imagem de multivisualização [00393] Figura 30 é um diagrama ilustrando um dispositivo de codificação de imagem de multivisualização que executa a codificação de
97/122 imagem de multivisualização descrita acima. Como ilustrado na Figura 30, um dispositivo de codificação de imagem de multivisualização 600 inclui uma unidade de codificação 601, uma unidade de codificação 602 e um multiplexador 603.
[00394] A unidade de codificação 601 codifica uma imagem de visualização básica para gerar um fluxo codificado de imagem de visualização básica. A unidade de codificação 602 codifica uma imagem de visualização não básica para gerar um fluxo codificado de imagem de visualização não básica. O multiplexador 603 multiplexa o fluxo codificado de imagem de visualização básica gerado pela unidade de codificação 601 e o fluxo codificado de imagem de visualização não básica gerada pela unidade de codificação 602 para gerar um fluxo codificado de imagem de multivisualização.
[00395] O dispositivo de codificação de imagem 10 (Figura 1) pode ser aplicado às unidades de codificação 601 e 602 do dispositivo de codificação de imagem de multivisualização 600. Neste caso, o dispositivo de codificação de imagem de multivisualização 600 fixa os parâmetros relativos ao processo de clipping para filtragem forte fixada pela unidade de codificação 601 e os parâmetros relativos ao processo de clipping para filtragem forte fixada pela unidade de codificação 602 e transfere os parâmetros.
[00396] Como descrito acima, os parâmetros relativos ao processo de clipping para filtragem forte fixada pela unidade de codificação 601 podem ser transferidos de modo a serem compartilhados pelas unidades de codificação 601 e 602. Reciprocamente, os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 602 podem ser transferidos de modo a serem compartilhados pelas unidades de codificação 601 e 602. Dispositivo de decodificação de imagem de multivisualização [00397] Figura 31 é um diagrama ilustrando um dispositivo de decodificação de imagem de multivisualização que executa a decodificação
98/122 de imagem de multivisualização descrita acima. Como ilustrado na Figura 31, um dispositivo de decodificação de imagem de multivisualização 610 inclui um desmultiplexador 611, uma unidade de codificação 612 e uma unidade de decodificação 613.
[00398] O desmultiplexador 611 desmultiplexa o fluxo codificado de imagem de multivisualização no qual o fluxo codificado de imagem de visualização básica e o fluxo codificado de imagem de visualização não básica são multiplexados para extrair o fluxo codificado de imagem de visualização básica e o fluxo codificado de imagem de visualização não básica. A unidade de decodificação 612 decodifica o fluxo codificado de imagem de visualização básica extraído pelo desmultiplexador 611 para obter uma imagem de visualização básica. A unidade de decodificação 613 decodifica o fluxo codificado de imagem de visualização não básica extraído pelo desmultiplexador 611 para obter uma imagem de visualização não básica.
[00399] O dispositivo de decodificação de imagem 50 (Figura 6) pode ser aplicado às unidades de decodificação 612 e 613 do dispositivo de decodificação de imagem de multivisualização 610. Neste caso, o dispositivo de decodificação de imagem de multivisualização 610 executa o processo usando os parâmetros relativos ao processo de clipping para filtragem forte, que são fixados pela unidade de codificação 601 e decodificados pela unidade de decodificação 612 e os parâmetros relativos ao processo de clipping para filtragem forte, que são fixados pela unidade de codificação 602 e decodificados pela unidade de decodificação 613.
[00400] Como descrito acima, há um caso onde os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 601 (ou a unidade de codificação 602) são transferidos de modo a serem compartilhados pelas unidades de codificação 601 e 602. Neste caso, o dispositivo de decodificação de imagem de multivisualização 610 executa o
99/122 processo usando os parâmetros relativos ao processo de clipping para filtragem forte, que são fixados pela unidade de codificação 601 (ou a unidade de codificação 602) e decodificados pela unidade de decodificação 612 (ou a unidade de decodificação 613).
18. Décima primeira concretização
Aplicação à codificação e decodificação de imagem de camada [00401] A série de processos anterior pode ser aplicada á codificação e decodificação de imagem de camada. Figura 32 ilustra um exemplo de um esquema de codificação de imagem de multivisualização.
[00402] Como ilustrado na Figura 32, uma imagem de camada inclui imagens de uma pluralidade de camadas (resoluções), e uma imagem de uma única camada predeterminada entre a pluralidade de resoluções é designada como uma imagem de camada básica. As imagens de camada respectivas diferentes da imagem de camada básica são tratadas como imagens de camada não básica. [00403] Quando a codificação de imagem de camada (capacidade de expansão espacial) como ilustrada na Figura 32 é executada, nas camadas respectivas (mesmas camadas), os parâmetros relativos ao processo de clipping para filtragem forte podem ser fixados. Além disso, nas camadas respectivas (camadas diferentes), os parâmetros relativos ao processo de clipping para filtragem forte fixados para as outras camadas podem ser compartilhados.
[00404] Neste caso, os parâmetros relativos ao processo de clipping para filtragem forte fixados para uma camada básica são usados em pelo menos uma camada não básica. Alternativamente, por exemplo, os parâmetros relativos ao processo de clipping para filtragem forte fixados para uma camada não básica (layer_id = 0) são usados em pelo menos uma da camada básica e uma camada não básica (layer_id = 1).
[00405] Adicionalmente, nas camadas respectivas (mesmas camadas), os parâmetros relativos ao processo de clipping para filtragem forte podem ser
100/122 fixados. Além disso, nas camadas respectivas (camadas diferentes), os parâmetros relativos ao processo de clipping para filtragem forte fixados para as outras visões podem ser compartilhados.
[00406] Neste caso, os parâmetros relativos ao processo de clipping para filtragem forte fixados para uma camada básica são usados em pelo menos uma camada não básica. Alternativamente, por exemplo, os parâmetros relativos ao processo de clipping para filtragem forte fixados para uma camada não básica (layer_id = 0) são usados em pelo menos um da camada básica e uma camada não básica (layer_id = 1).
[00407] Desta maneira, é possível permitir ao processo de antibloqueio aplicar filtragem apropriadamente.
Dispositivo de codificação de imagem de camada [00408] Figura 33 é um diagrama ilustrando um dispositivo de codificação de imagem de camada que executa a codificação de imagem de camada descrita acima. Como ilustrado na Figura 33, um dispositivo de codificação de imagem de camada 620 inclui uma unidade de codificação 621, uma unidade de codificação 622 e um multiplexador 623.
[00409] A unidade de codificação 621 codifica uma imagem de camada básica para gerar um fluxo codificado de imagem de camada básica. A unidade de codificação 622 codifica uma imagem de camada não básica para gerar um fluxo codificado de imagem de camada não básica. O multiplexador 623 multiplexa o fluxo codificado de imagem de camada básica gerado pela unidade de codificação 621 e o fluxo codificado de imagem de camada não básica gerado pela unidade de codificação 622 para gerar um fluxo codificado de imagem de camada.
[00410] O dispositivo de codificação de imagem 10 (Figura 1) pode ser aplicado às unidades de codificação 621 e 622 do dispositivo de codificação de imagem de camada 620. Neste caso, o dispositivo de codificação de imagem de camada 620 fixa os parâmetros relativos ao processo de clipping
101/122 para filtragem forte fixados pela unidade de codificação 621 e os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 602 e transfere os parâmetros.
[00411] Como descrito acima, os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 621 podem ser transferidos de modo a serem compartilhados pelas unidades de codificação 621 e 622. Reciprocamente, os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 622 podem ser transferidos de modo a serem compartilhados pelas unidades de codificação 621 e 622. Dispositivo de decodificação de imagem de camada [00412] Figura 34 é um diagrama ilustrando um dispositivo de decodificação de imagem de camada que executa a decodificação de imagem de camada descrita acima. Como ilustrado na Figura 34, um dispositivo de decodificação de imagem de camada 630 inclui um desmultiplexador 631, uma unidade de decodificação 632 e uma unidade de decodificação 633. [00413] O desmultiplexador 631 desmultiplexa o fluxo codificado de imagem de camada no qual o fluxo codificado de imagem de camada básica e o fluxo codificado de imagem de camada não básica são multiplexados para extrair o fluxo codificado de imagem de camada básica e o fluxo codificado de imagem de camada não básica. A unidade de decodificação 632 decodifica o fluxo codificado de imagem de camada básica extraído pelo desmultiplexador 631 para obter uma imagem de camada básica. A unidade de decodificação 633 decodifica o fluxo codificado de imagem de camada não básica extraído pelo desmultiplexador 631 para obter uma imagem de camada não básica.
[00414] O dispositivo de decodificação de imagem 50 (Figura 6) pode ser aplicado às unidades de decodificação 632 e 633 do dispositivo de decodificação de imagem de multivisualização 630. Neste caso, o dispositivo de decodificação de imagem de multivisualização 630 executa o processo usando o parâmetro relativo ao processo de clipping para filtragem forte, que
102/122 é fixado pela unidade de codificação 621 e decodificado pela unidade de decodificação 632 e os parâmetros relativos ao processo de clipping para filtragem forte, que são fixados pela unidade de codificação 622 e decodificados pela unidade de decodificação 633.
[00415] Como descrito acima, há um caso onde os parâmetros relativos ao processo de clipping para filtragem forte fixados pela unidade de codificação 621 (ou a unidade de codificação 622) são transferidos de modo a serem compartilhados pelas unidades de codificação 621 e 622. Neste caso, o dispositivo de decodificação de imagem de multivisualização 630 executa o processo usando os parâmetros relativos ao processo de clipping para filtragem forte, que são fixados pela unidade de codificação 621 (ou a unidade de codificação 622) e decodificados pela unidade de decodificação 632 (ou a unidade de decodificação 633).
19. Exemplo de aplicação [00416] O dispositivo de codificação de imagem 10 e o dispositivo de decodificação de imagem 50 de acordo com as concretizações descritas acima podem ser aplicados a vários aparelhos eletrônicos tais como um transmissor ou um receptor que distribui sinais em radiodifusão de cabo (tal como radiodifusão de satélite ou uma TV a cabo) ou na Internet e distribui sinais a um terminal por comunicação celular, um dispositivo de gravação que grava imagens em um meio tal como um disco óptico, um disco magnético, ou uma memória flash, ou um dispositivo reprodutor que reproduz imagens destes meios de armazenamento. Quatro exemplos de aplicação serão descritos abaixo.
Primeiro exemplo de aplicação [00417] Figura 35 ilustra um exemplo de uma configuração esquemática de um aparelho de televisualização ao qual a concretização descrita acima é aplicada. Um aparelho de televisualização 900 inclui uma antena 901, um sintonizador 902, um desmultiplexador 903, um decodificador 904, um processador de sinal de vídeo 905, uma unidade de exibição 906, um
103/122 processador de sinal de áudio 907, um alto-falante 908 e uma interface externa 909. O aparelho de televisualização 900 adicionalmente inclui um controlador 910, uma interface de usuário 911, e similar.
[00418] O sintonizador 902 extrai um sinal de um canal desejado de um sinal radiodifundido recebido pela antena 901 e demodula o sinal extraído. Então, o sintonizador 902 produz um fluxo de bits codificado obtido por demodulação ao desmultiplexador 903. Isto é, o sintonizador 902 serve como meio de transmissão no aparelho de televisualização 900, que recebe o fluxo codificado no qual a imagem está codificada.
[00419] O desmultiplexador 903 separa um fluxo de vídeo e um fluxo de áudio de um programa a ser assistido do fluxo de bits codificado e produz cada fluxo separado ao decodificador 904. Além disso, o desmultiplexador 903 extrai dados auxiliares tal como EPG (Guia de Programa Eletrônico) do fluxo de bits codificado e provê os dados extraídos para o controlador 910. O desmultiplexador 903 pode desembaralhar quando o fluxo de bits codificado está embaralhado.
[00420] O decodificador 904 decodifica o fluxo de vídeo e o fluxo de áudio entrados do desmultiplexador 903. Então, o decodificador 904 produz dados de vídeo gerados por um processo de decodificação ao processador de sinal de vídeo 905. Além disso, o decodificador 904 produz dados de áudio gerados pelo processo de decodificação ao processador de sinal de áudio 907. [00421] O processador de sinal de vídeo 905 reproduz os dados de vídeo entrados do decodificador 904 e permite à unidade de exibição 906 exibir vídeo. O processador de sinal de vídeo 905 também pode permitir à unidade de vídeo 906 exibir uma tela de aplicativo provida pela rede. O processador de sinal de vídeo 905 também pode executar um processo adicional tal como remoção de ruído, por exemplo, para os dados de vídeo de acordo com colocação. Adicionalmente, o processador de sinal de vídeo 905 pode gerar uma imagem de GUI (Interface Gráfica de Usuário) tal como um
104/122 menu, um botão e um cursor, por exemplo, e sobrepor a imagem gerada sobre uma imagem de saída.
[00422] A unidade de exibição 906 é excitada por um sinal de excitação provido do processador de sinal de vídeo 905 para exibir o vídeo ou imagem em uma tela de vídeo de um dispositivo de exibição (por exemplo, um mostrador de cristal líquido, um mostrador de plasma, um OLED, e similar).
[00423] O processador de sinal de áudio 907 executa um processo de reprodução tal como conversão D/A e amplificação para os dados de áudio entrados do decodificador 904 e permite ao alto-falante 908 produzir o áudio. O processador de sinal de áudio 907 também pode executar um processo adicional tal como a remoção de ruído para os dados de áudio. A interface externa 909 é a interface para conectar o aparelho de televisualização 900 e um dispositivo externo ou a rede. Por exemplo, o fluxo de vídeo ou o fluxo de áudio recebido pela interface externa 909 pode ser decodificado pelo decodificador 904. Isto é, a interface externa 909 também serve como os meio de transmissão no aparelho de televisualização 900, que recebe o fluxo codificado no qual a imagem está codificada.
[00424] O controlador 910 inclui um processador tal como uma unidade de processamento central (CPU) e uma memória tal como uma memória de acesso aleatório (RAM) e uma memória só de leitura (ROM). A memória armazena o programa executado pela CPU, dados de programa, os dados de EPG, dados obtidos pela rede e similar. O programa armazenado na memória é lido pela CPU na iniciação do aparelho de televisualização 900 a ser executado, por exemplo. A CPU controla a operação do aparelho de televisualização 900 de acordo com um sinal de operação entrado da interface de usuário 911, por exemplo, executando o programa.
[00425] A interface de usuário 911 está conectada ao controlador 910. A interface de usuário 911 inclui um botão e uma chave para o usuário operar o aparelho de televisualização 900, um receptor de um sinal de controle
105/122 remoto e similar, por exemplo. A interface de usuário 911 detecta a operação pelo usuário pelos componentes para gerar o sinal de operação e produz o sinal de operação gerado para o controlador 910.
[00426] O barramento 912 conecta o sintonizador 902, o desmultiplexador 903, o decodificador 904, o processador de sinal de vídeo 905, o processador de sinal de áudio 907, a interface externa 909 e o controlador 910 entre si.
[00427] No aparelho de televisualização 900 configurado desta maneira, o decodificador 904 tem as funções do dispositivo de decodificação de imagem 50 de acordo com a concretização descrita acima. Portanto, quando imagens são decodificadas no aparelho de televisualização 900, o processo de filtragem de antibloqueio pode aplicar filtragem apropriadamente. Segundo exemplo de aplicação [00428] Figura 36 ilustra um exemplo de uma configuração esquemática de um telefone móvel ao qual a concretização descrita acima é aplicada. Um telefone móvel 920 inclui uma antena 921, uma unidade de comunicação 922, um codec de áudio 923, um alto-falante 924, um microfone 925, uma unidade de câmera 926, um processador de imagem 927, um desmultiplexador 928, uma unidade de gravação/reprodução 929, uma unidade de vídeo 930, um controlador 931, uma unidade de operação 932 e um barramento 933.
[00429] A antena 921 está conectada à unidade de comunicação 922. O alto-falante 924 e o microfone 925 estão conectados ao codec de áudio 923. A unidade de operação 932 está conectada ao controlador 931. O barramento 933 conecta a unidade de comunicação 922, o codec de áudio 923, a unidade de câmera 926, o processador de imagem 927, o desmultiplexador 928, a unidade de gravação/reprodução 929, a unidade de vídeo 930 e o controlador 931 entre si. [00430] O telefone móvel 920 executa a operação tal como transmissão/recepção de um sinal de áudio, transmissão/recepção de um e106/122 mail ou dados de imagem, tomada de imagem, e gravação de dados em vários modos de operação incluindo um modo de comunicação de áudio, um modo de comunicação de dados, um modo de criação de imagem, e um modo de telefone de televisualização.
[00431] No modo de comunicação de áudio, um sinal de áudio analógico gerado pelo microfone 925 é provido ao codec de áudio 923. O codec de áudio 923 converte o sinal de áudio analógico aos dados de áudio e converte em A/D os dados de áudio convertidos para comprimir. Então, o codec de áudio 923 produz os dados de áudio comprimidos para a unidade de comunicação 922. A unidade de comunicação 922 codifica e modula os dados de áudio para gerar um sinal de transmissão. Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado a uma estação base (não ilustrada) pela antena 921. Além disso, a unidade de comunicação 922 amplifica um sinal sem fios recebido pela antena 921 e aplica conversão de frequência ao mesmo para obter um sinal de recepção. Então, a unidade de comunicação 922 gera os dados de áudio demodulando e decodificando o sinal de recepção e produz os dados de áudio gerados para o codec de áudio 923. O codec de áudio 923 amplifica os dados de áudio e converte em D/A o mesmo para gerar o sinal de áudio analógico. Então, o codec de áudio 923 provê o sinal de áudio gerado para o alto-falante 924 para permitir ao mesmo produzir o áudio.
[00432] No modo de comunicação de dados, por exemplo, o controlador 931 gera dados de caractere compondo o e-mail de acordo com a operação pelo usuário pela unidade de operação 932. Além disso, o controlador 931 permite à unidade de exibição 930 exibir caracteres. O controlador 931 gera dados de e-mail de acordo com uma instrução de transmissão do usuário pela unidade de operação 932 para produzir os dados de e-mail gerados à unidade de comunicação 922. A unidade de comunicação 922 codifica e modula os dados de e-mail para gerar o sinal de transmissão.
107/122
Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado à estação base (não ilustrada) pela antena 921. Além disso, a unidade de comunicação 922 amplifica o sinal sem fios recebido pela antena 921 e aplica a conversão de frequência ao mesmo para obter o sinal de recepção. Então, a unidade de comunicação 922 demodula e decodifica o sinal de recepção para restaurar os dados de e-mail e produz os dados de e-mail restaurados para o controlador 931. O controlador 931 permite à unidade de exibição 930 exibir conteúdos dos dados de e-mail e permite ao meio de armazenamento da unidade de gravação/reprodução 929 armazenar os dados de e-mail.
[00433] A unidade de gravação/reprodução 929 inclui um meio de armazenamento legível/gravável arbitrário. Por exemplo, o meio de armazenamento pode ser um meio de armazenamento embutido tal como a RAM e a memória flash e pode ser um meio de armazenamento montado externamente tal como o disco rígido, o disco magnético, o disco magnetoóptico, o disco óptico, uma memória de USB, e um cartão de memória.
[00434] No modo de criação de imagem, por exemplo, a unidade de câmera 926 toma uma imagem de um objeto para gerar os dados de imagem e produz os dados de imagem gerados para o processador de imagem 927. O processador de imagem 927 codifica os dados de imagem entrados da unidade de câmera 926 e armazena o fluxo codificado no meio de armazenamento da unidade de gravação/reprodução 929.
[00435] Além disso, no modo de telefone de televisualização, por exemplo, o desmultiplexador 928 multiplexa o fluxo de vídeo codificado pelo processador de imagem 927 e o fluxo de áudio entrado do codec de áudio 923 e produz o fluxo multiplexado para a unidade de comunicação 922. A unidade de comunicação 922 codifica e modula o fluxo para gerar o sinal de transmissão. Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado para a estação base (não ilustrada) pela antena 921. Além disso, a unidade de comunicação 922 amplifica o sinal sem fios recebido pela
108/122 antena 921 e aplica a conversão de frequência ao mesmo para obter o sinal de recepção. O sinal de transmissão e o sinal de recepção podem incluir o fluxo de bits codificado. Então, a unidade de comunicação 922 restaura o fluxo demodulando e decodificando o sinal de recepção e produz o fluxo restaurado para o desmultiplexador 928. O desmultiplexador 928 separa o fluxo de vídeo e o fluxo de áudio do fluxo de entrada e produz o fluxo de vídeo e o fluxo de áudio para o processador de imagem 927 e o codec de áudio 923, respectivamente. O processador de imagem 927 decodifica o fluxo de vídeo para gerar os dados de vídeo. Os dados de vídeo são providos à unidade de vídeo 930 e uma série de imagens é exibida pela unidade de vídeo 930. O codec de áudio 923 amplifica o fluxo de áudio e converte em D/A o mesmo para gerar o sinal de áudio analógico. Então, o codec de áudio 923 provê o sinal de áudio gerado para o alto-falante 924 para produzir o áudio.
[00436] No telefone móvel 920 configurado desta maneira, o processador de imagem 927 tem as funções do dispositivo de codificação de imagem 10 e do dispositivo de decodificação de imagem 50 de acordo com a concretização descrita acima. Portanto, quando imagens são codificadas e decodificadas no telefone móvel 920, o processo de filtragem de antibloqueio pode aplicar filtragem apropriadamente.
Terceiro exemplo de aplicação [00437] Figura 37 ilustra um exemplo de uma configuração esquemática do dispositivo de gravação/reprodução ao qual a concretização descrita acima é aplicada. O dispositivo de gravação/reprodução 940 codifica os dados de áudio e os dados de vídeo de um programa radiodifundido recebido para gravar no meio de gravação, por exemplo. Além disso, o dispositivo de gravação/reprodução 940 pode codificar os dados de áudio e os dados de vídeo obtidos de outro aparelho para gravar no meio de gravação, por exemplo. Além disso, o dispositivo de gravação/reprodução 940 reproduz os dados gravados no meio de gravação por um monitor e o alto-falante de
109/122 acordo com a instrução do usuário. Neste caso, o dispositivo de gravação/reprodução 940 decodifica os dados de áudio e os dados de vídeo. [00438] O dispositivo de gravação/reprodução 940 inclui um sintonizador 941, uma interface externa 942, um codificador 943, um HDD (Unidade de Disco Rígido) 944, uma unidade de disco 945, um seletor 946, um decodificador 947, uma OSD (Exibição em Tela) 948, um controlador 949 e uma interface de usuário 950.
[00439] O sintonizador 941 extrai um sinal de um canal desejado do sinal radiodifundido recebido por uma antena (não ilustrada) e demodula o sinal extraído. Então, o sintonizador 941 produz o fluxo de bits codificado obtido pela demodulação ao seletor 946. Isto é, o sintonizador 941 serve como o meio de transmissão no dispositivo de gravação/reprodução 940.
[00440] A interface externa 942 é a interface para conectar o dispositivo de gravação/reprodução 940 e o dispositivo externo ou a rede. A interface externa 942 pode ser uma interface de IEEE1394, uma interface de rede, uma interface de USB, uma interface de memória flash e similar, por exemplo. Por exemplo, os dados de vídeo e os dados de áudio recebidos pela interface externa 942 são entrados ao codificador 943. Isto é, a interface externa 942 serve como o meio de transmissão no dispositivo de gravação/reprodução 940.
[00441] O codificador 943 codifica os dados de vídeo e os dados de áudio quando os dados de vídeo e os dados de áudio entrados da interface externa 942 não estão codificados. Então, o codificador 943 produz o fluxo de bits codificado para o seletor 946.
[00442] O HDD 944 grava o fluxo de bits codificado no qual dados de conteúdo tais como o vídeo e o áudio são comprimidos, vários programas e outros dados em um disco rígido interno. O HDD 944 lê os dados do disco rígido ao reproduzir o vídeo e o áudio.
[00443] A unidade de disco 945 grava e lê os dados no e do meio de
110/122 gravação montado. O meio de gravação montado na unidade de disco 945 pode ser o disco de DVD (DVD de vídeo, DVD-RAM, DVD-R, DVD-RW, DVD+R, DVD+RW e similar), um disco Blu-ray (marca registrada) e similar, por exemplo. O seletor 946 seleciona o fluxo de bits codificado entrado do sintonizador 941 ou do codificador 943 e produz o fluxo de bits codificado selecionado para o HDD 944 ou a unidade de disco 945 ao gravar o vídeo e o áudio. Além disso, o seletor 946 produz a entrada de fluxo de bits codificado do HDD 944 ou da unidade de disco 945 para o decodificador 947 ao reproduzir o vídeo e o áudio.
[00444] O decodificador 947 decodifica o fluxo de bits codificado para gerar os dados de vídeo e os dados de áudio. Então, o decodificador 947 produz os dados de vídeo gerados para o OSD 948. Além disso, o decodificador 904 produz os dados de áudio gerados para um alto-falante externo. O OSD 948 reproduz os dados de vídeo entrados do decodificador 947 para exibir o vídeo. O OSD 948 também pode sobrepor a imagem de GUI tal como o menu, o botão e o cursor, por exemplo, no vídeo exibido.
[00445] O controlador 949 inclui o processador tal como a CPU e a memória tal como a RAM e ROM. A memória armazena o programa executado pela CPU, os dados de programa e similar. O programa armazenado na memória é lido pela CPU para ser executado na ativação do dispositivo de gravação/reprodução 940, por exemplo. A CPU controla a operação do dispositivo de gravação/reprodução 940 de acordo com um sinal de operação entrado da interface de usuário 950, por exemplo, executando o programa.
[00446] A interface de usuário 950 está conectada ao controlador 949. A interface do usuário 950 inclui um botão e uma chave para o usuário operar o dispositivo de gravação/reprodução 940 e um receptor de um sinal de controle remoto, por exemplo. A interface de usuário 950 detecta a operação pelo usuário pelos componentes para gerar o sinal de operação e produz o sinal de operação gerado para o controlador 949.
111/122 [00447] No dispositivo de gravação/reprodução 940 configurado desta maneira, o codificador 943 tem as funções do dispositivo de codificação de imagem 10 de acordo com a concretização descrita acima. Além disso, o decodificador 947 tem as funções do dispositivo de decodificação de imagem 50 de acordo com a concretização descrita acima. Então, quando imagens são codificadas e decodificadas no dispositivo de gravação/reprodução 940, o processo de filtragem de antibloqueio pode aplicar filtragem apropriadamente. Quarto exemplo de aplicação [00448] Figura 38 ilustra um exemplo de uma configuração esquemática de um dispositivo de criação de imagem ao qual a concretização descrita acima é aplicada. Um dispositivo de criação de imagem 960 visualiza um objeto para gerar a imagem, codifica os dados de imagem e grava os mesmos em um meio de gravação.
[00449] O dispositivo de criação de imagem 960 inclui um bloco óptico
961, uma unidade de criação de imagem 962, um processador de sinal 963, um processador de imagem 964, uma unidade de exibição 965, uma interface externa 966, uma memória 967, uma unidade de mídia 968, uma OSD 969, um controlador 970, uma interface de usuário 971 e um barramento 972.
[00450] O bloco óptico 961 inclui uma lente de foco, um mecanismo de diafragma, e similar. O bloco óptico 961 forma uma imagem óptica do objeto sobre uma superfície de criação de imagem da unidade de criação de imagem 962. A unidade de criação de imagem 962 inclui um sensor de imagem tal como um CCD e um CMOS e converte a imagem óptica formada na superfície de criação de imagem a um sinal de imagem tal como um sinal elétrico através de conversão fotoelétrica. Então, a unidade de criação de imagem 962 produz o sinal de imagem para o processador de sinal 963. [00451] O processador de sinal 963 executa vários processos de sinal de câmera tais como correção de joelho, correção faixa, ou correção de cor para o sinal de imagem entrado da unidade de criação de imagem 962. O
112/122 processador de sinal 963 produz os dados de imagem depois do processo de sinal de câmera para o processador de imagem 964.
[00452] O processador de imagem 964 codifica os dados de imagem entrados do processador de sinal 963 para gerar os dados codificados. Então, o processador de imagem 964 produz os dados codificados gerados para a interface externa 966 ou a unidade de mídia 968. Além disso, o processador de imagem 964 decodifica os dados codificados entrados da interface externa 966 ou da unidade de mídia 968 para gerar os dados de imagem. Então, o processador de imagem 964 produz os dados de imagem gerados para a unidade de exibição 965. O processador de imagem 964 também pode produzir os dados de imagem entrados do processador de sinal 963 para a unidade de exibição 965 para exibir a imagem. O processador de imagem 964 também pode sobrepor dados para exibição obtidos da OSD 969 na imagem produzida à unidade de exibição 965.
[00453] A OSD 969 gera a imagem de GUI tal como o menu, o botão, e o cursor, por exemplo, e produz a imagem gerada para o processador de imagem 964.
[00454] A interface externa 966 é configurada como um terminal de entrada/saída de USB, por exemplo. A interface externa 966 conecta o dispositivo de criação de imagem 960 e uma impressora ao imprimir a imagem, por exemplo. Além disso, uma unidade de disco está conectada à interface externa 966 como necessário. O meio removível tal como o disco magnético e o disco óptico está montado na unidade, por exemplo, e o programa lido do meio removível pode ser instalado no dispositivo de criação de imagem 960. Adicionalmente, a interface externa 966 pode ser configurada como uma interface de rede conectada à rede tal como uma LAN e a Internet. Isto é, a interface externa 966 serve como o meio de transmissão no dispositivo de criação de imagem 960.
[00455] O meio de gravação montado na unidade de mídia 968 pode
113/122 ser um meio removível legível/gravável arbitrário tal como o disco magnético, o disco magneto-óptico, o disco óptico, e a memória de semicondutor, por exemplo. Além disso, o meio de gravação pode ser montado fixamente na unidade de mídia 968 para formar uma unidade de armazenamento não portátil tal como uma unidade de disco rígido embutida ou SSD (Unidade de Estado de Sólido), por exemplo.
[00456] O controlador 970 inclui o processador tal como a CPU e a memória tal como a RAM e a ROM. A memória armazena o programa executado pela CPU e os dados de programa. O programa armazenado na memória é lido pela CPU na iniciação do dispositivo de criação de imagem 960 para ser executado, por exemplo. A CPU controla a operação do dispositivo de criação de imagem 960 de acordo com o sinal de operação entrado da interface do usuário 971, por exemplo, executando o programa. [00457] A interface de usuário 971 está conectada ao controlador 970. A interface de usuário 971 inclui um botão, uma chave e similar para o usuário operar o dispositivo de criação de imagem 960, por exemplo. A interface de usuário 971 detecta a operação pelo usuário pelos componentes para gerar o sinal de operação e produz o sinal de operação gerado para o controlador 970.
[00458] O barramento 972 conecta o processador de imagem 964, a interface externa 966, a memória 967, a unidade de mídia 968, a OSD 969 e o controlador 970 entre si.
[00459] No dispositivo de criação de imagem 960 configurado desta maneira, o processador de imagem 964 tem as funções do dispositivo de codificação de imagem 10 e do dispositivo de decodificação de imagem 50 de acordo com a concretização descrita acima. Portanto, quando imagens são codificadas e decodificadas no dispositivo de criação de imagem 960, o processo de filtragem de antibloqueio pode aplicar filtragem apropriadamente. [00460] Na especificação presente, um exemplo no qual vários tipos de
114/122 informação tais como os parâmetros relativos ao processo de clipping para filtragem forte são multiplexados em fluxos codificados e são transmitidos do lado de codificação para o lado de decodificação foi descrito. Porém, um método de transmitir estes itens de informação não está limitado a este exemplo. Por exemplo, estes itens de informação podem ser transmitidos ou gravados como dados separados associados com o fluxo de bits codificado em lugar de serem multiplexados no fluxo de bits codificado. Aqui, o termo associado significa que a imagem (ou parte da imagem como um parte e um bloco) incluída no fluxo de bits e informação correspondendo à imagem podem ser ligadas entre si na hora de decodificação. Isto é, a informação pode ser transmitida em uma linha de transmissão diferente daquela da imagem (ou fluxo de bits). Além disso, a informação pode ser gravada em outro meio de gravação (ou outra área de gravação do mesmo meio de gravação) diferente daquela da imagem (ou fluxo de bits). Adicionalmente, a informação e a imagem (ou fluxo de bits) podem ser associadas entre si em unidades opcionais como uma pluralidade de quadros, um quadro, ou uma parte do quadro, por exemplo.
[00461] Além disso, a técnica presente não é para ser interpretada como estando limitada às concretizações descritas acima. As concretizações expõem a técnica presente em uma forma exemplar e ilustrativa, e é óbvio que modificações e substituições podem ocorrer àqueles qualificados na técnica sem partir do espírito da técnica presente. Em outras palavras, o espírito da técnica presente deveria ser determinado em atenção às reivindicações. [00462] Note que o dispositivo de processamento de imagem desta técnica pode incluir as constituições seguintes.
(1) Um dispositivo de processamento de imagem incluindo: uma unidade de decodificação que decodifica um fluxo codificado, codificado em unidades cada uma tendo uma estrutura de camada para gerar uma imagem;
115/122 uma unidade de filtragem que aplica um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco da imagem gerado pela unidade de decodificação e um bloco adjacente, adjacente ao bloco; e um controlador que controla a unidade de filtragem de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem gerados pela unidade de decodificação.
(2) O dispositivo de processamento de imagem de acordo com (1) , em que o controlador aplica o processo de clipping a valores de partes que mudam quando o filtro de antibloqueio é aplicado.
(3) O dispositivo de processamento de imagem de acordo com (2) , em que o controlador aplica o processo de clipping de acordo com as expressões seguintes:
Fórmula Matemática 37 pOj = ρΟ,+CI ίρ(_ρν)_(ρν)((ρ2ί+2*ρ1ί-6*ρ0ί+2*η0ί+η1ί+4)»3); qOj = qOi+CI iP(_pv)_(pv)((p1 i+2*pOi-6*qOi+2*q1 i+q2i+4)»3); pi i = plj+CI iP(_pv)_(pv)((p2j-3*p1 j +pOj +q0i+2)»2): ql i = q1 j+Cli p(_pv)_(pv) ((pOj+qOj—3*q1 j +q2j+2)»2): p2j = p2i+CI ip(_pv)_(pv)((2*p2i-5*p2i+p1i+p0i+q0i+4)»3);
q2j = q2j+CI i p(_pv)_(pv) ((pOj +qOj+p1 j—5*q2j+2*q3j+4)»3); onde i = 0, 7 e pv é um valor de clipping.
(4) O dispositivo de processamento de imagem de acordo com (3) , em que o controlador fixa um valor que é múltiplo inteiro de
116/122 parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
(5) O dispositivo de processamento de imagem de acordo com (4), em que o controlador fixa um valor que é duas vezes os parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
(6) O dispositivo de processamento de imagem de acordo com qualquer de (1) a (5), adicionalmente incluindo:
uma unidade determinadora de intensidade de filtro que determina a intensidade do filtro de antibloqueio aplicado ao limite de bloco, em que a unidade de filtragem aplica o filtro de antibloqueio ao limite de bloco de acordo com a intensidade determinada pela unidade determinadora de intensidade de filtro, e o controlador controla a unidade de filtragem de forma que, quando a unidade determinadora de intensidade de filtro determina que filtragem forte é para ser aplicada, um processo de clipping seja aplicado ao filtro de antibloqueio com relação aos componentes de luminância da imagem gerada pela unidade de decodificação.
(7) O dispositivo de processamento de imagem de acordo com (6) , em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio usando uma pluralidade de linhas como unidades de processamento.
(8) O dispositivo de processamento de imagem de acordo com (7) , em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio usando quatro linhas como as unidades
117/122 de processamento.
(9) O dispositivo de processamento de imagem de acordo com (7), adicionalmente incluindo:
uma unidade determinadora de necessidade de filtragem que determina se o filtro de antibloqueio é para ser aplicado ao limite de bloco usando uma pluralidade de linhas coma unidades de processamento, em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio quando a unidade determinadora de necessidade de filtragem determina que o filtro de antibloqueio é para ser aplicado.
(10) Um método de processamento de imagem para permitir a um dispositivo de processamento de imagem executar:
decodificar um fluxo codificado, codificado em unidades cada uma tendo uma estrutura de camada para gerar uma imagem;
aplicar um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco da imagem gerada e um bloco adjacente, adjacente ao bloco; e controlar de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem gerada.
(11) Um dispositivo de processamento de imagem incluindo: uma unidade de filtragem que aplica um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco de uma imagem decodificada localmente quando uma imagem é codificada e um bloco adjacente, adjacente ao bloco;
um controlador que controla a unidade de filtragem de forma
118/122 que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem decodificada localmente; e uma unidade de codificação que codifica a imagem em unidades cada uma tendo uma estrutura de camada usando uma imagem à qual o filtro de antibloqueio é aplicado.
(12) O dispositivo de processamento de imagem de acordo com (11), em que o controlador aplica o processo de clipping a valores de partes que mudam quando o filtro de antibloqueio é aplicado.
(13) O dispositivo de processamento de imagem de acordo com (12), em que o controlador aplica o processo de clipping de acordo com as expressões seguintes:
Fórmula Matemática 38 pOj = pOj + CI ip(_pv)_(pv)((p2j+2*pl i-6*pOi+2*qOi+q1 ;+4)»3);
qO; = q0i+Clíp(^pv)^(pv)((p1i+2*p0i-6*q0i+2*q1i+q2i+4)»3);
pi j = plj+GI ip(_pv)_(pv)((p2r3*p1 j+pOj+qOi+2)»2);
qÇ = ql j+CI ip(_pV)_(pv)((pOi+qOj-3*ql j+q2i+2)»2);
p2| = p2j+GI Íp(_pv)_(pv)((2*p2j-5*p2j+p1 j+p0j+q0i+4)»3);
q2; = q2j + GI ip(_pv)_ípv)((pOj-i-qOj+p1 i~5*q2j+2*q3i'i-4)»3); onde i = 0, 7 e pv é um valor de clipping.
(14) O dispositivo de processamento de imagem de acordo com (13), em que o controlador fixa um valor que é múltiplos inteiros de parâmetros do filtro de antibloqueio como o valor de clipping usado quando o
119/122 processo de clipping é executado.
(15) O dispositivo de processamento de imagem de acordo com (14), em que o controlador fixa um valor que é duas vezes os parâmetros do filtro de antibloqueio como o valor de clipping usado quando o processo de clipping é executado.
(16) O dispositivo de processamento de imagem de acordo com qualquer de (11) a (15), adicionalmente incluindo:
uma unidade determinadora de intensidade de filtro que determina a intensidade do filtro de antibloqueio aplicado ao limite de bloco, em que a unidade de filtragem aplica o filtro de antibloqueio ao limite de bloco de acordo com a intensidade determinada pela unidade determinadora de intensidade de filtro, e o controlador controla a unidade de filtragem de forma que, quando a unidade determinadora de intensidade de filtro determina que filtragem forte é para ser aplicada, um processo de clipping seja aplicado ao filtro de antibloqueio com relação aos componentes de luminância da imagem gerada pela unidade de decodificação.
(17) O dispositivo de processamento de imagem de acordo com (16), em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio usando uma pluralidade de linhas coma unidades de processamento.
(18) O dispositivo de processamento de imagem de acordo com (17), em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio usando quatro linhas como as unidades de processamento.
120/122 (19) O dispositivo de processamento de imagem de acordo com (17), adicionalmente incluindo:
uma unidade determinadora de necessidade de filtragem que determina se o filtro de antibloqueio é para ser aplicado ao limite de bloco usando uma pluralidade de linhas coma unidades de processamento, em que a unidade determinadora de intensidade de filtro determina a intensidade do filtro de antibloqueio quando a unidade determinadora de necessidade de filtragem determina que o filtro de antibloqueio é para ser aplicado.
(20) Um método de processamento de imagem para permitir a um dispositivo de processamento de imagem executar:
aplicar um filtro de antibloqueio a um limite de bloco de acordo com uma intensidade do filtro de antibloqueio aplicado ao limite de bloco que é um limite entre um bloco de uma imagem decodificada localmente quando uma imagem é codificada e um bloco adjacente, adjacente ao bloco;
controlar de forma que, quando filtragem forte é aplicada como a intensidade do filtro de antibloqueio, um processo de clipping seja aplicado ao filtro de antibloqueio com relação a componentes de luminância da imagem decodificada localmente; e codificar a imagem em unidades cada uma tendo uma estrutura de camada usando uma imagem à qual o filtro de antibloqueio é aplicado. LISTA DE SINAIS DE REFERÊNCIA
10: Dispositivo de codificação de imagem
11: Conversor A/D
12, 57: Memória temporária de reordenação de quadro
13: Subtrator
14: Transformador ortogonal
15: Quantizador
121/122
16: Codificador sem perda
17: Memória temporária de acumulação
18: Controlador de taxa
21, 53: Quantizador inverso
22, 54: Transformador ortogonal inverso
23, 55: Somador
24, 56: Unidade de filtragem de antibloqueio
25, 61: Memória de quadro
26, 62, 65: Seletor 31, 63: Intrapreditor
32: Estimador/compensador de movimento 33: Unidade de seleção de imagem predita/modo ótimo 50: Dispositivo de decodificação de imagem 51: Memória temporária de acumulação
52: Decodificador sem perda
61: Memória de quadro
64: Unidade de compensação de movimento
71: Memória de imagem
72, 72-1: Unidade determinadora de limite de bloco
72- 2: Unidade determinadora de limite de linha/limite de bloco
73, 73-1: Unidade determinadora de intensidade de filtro
73- 2: Unidade determinadora de intensidade de filtro de limite de linha
74, 74-1: Unidade de operação de filtro
74- 2: Unidade operação filtro de limite de linha 75: Seletor
76: Memória de coeficiente 77: Controlador
77A, 77B: Unidade determinadora de linha intra-LCU
122/122
241: Memória de linha
242: Unidade detectora de limite de linha
243: Unidade determinadora de intensidade de filtro
244: Memória de coeficiente
245: Unidade de operação de filtro
246: Controlador de filtro
2451: Unidade de memória de dados
2452: Unidade de seleção de dados
2453, 2455, 2456: Unidade de processamento aritmético
2457: Unidade de seleção de dados
2461: Unidade determinadora de limite de linha
1/6

Claims (12)

  1. REIVINDICAÇÕES
    1. Dispositivo de processamento de imagem, caracterizado por compreender:
    uma unidade de filtragem que aplica um primeiro filtro, o qual é diferente de um segundo filtro para pixels vizinhos na vizinhança de um limite de bloco dentro de uma imagem decodificada localmente decodificada; e um controlador que controla a unidade de filtragem de forma a aplicar um processo de clipping ao primeiro filtro utilizando um valor de clipping do primeiro filtro, o qual é maior do que um valor de clipping do segundo filtro; e uma unidade de codificação que codifica uma imagem utilizando uma imagem filtrada para a qual o primeiro filtro é aplicado.
  2. 2. Dispositivo de processamento de imagem de acordo com reivindicação 1, caracterizado por:
    o controlador aplicar o processo de clipping de acordo com as seguintes expressões:
    p0’ = p0 + Clip(-pv)-(pv)((p2 + 2*p1 - 6*p0 +2*q0 + q1 + 4)>>3);
    = Clip(p0 -pv)-(p0 +pv)((p2 + 2*p1 + 2*p0 +2*q0 + q1 + 4)>>3);
    = Clip3(p0-pv, p0+pv, (p2 + 2*p1 + 2*p0 +2*q0 + q1 + 4)>>3);
    p1' = p1 + Clip(-pv)-(pv)((p2 - 3*p1 + p0 + q0 +2)>>2);
    = Clip(p1 -pv)-(p1 +pv)((p2 + p1 + p0 + q0 +2)>>2);
    = Clip3(p1-pv, p1+pv, (p2 + p1 + p0 + q0 +2)>>2);
    p2' = p2 + Clip(-pv)-(pv)((2*p2 - 5*p2 + p1 + p0 + q0 + 4)>>3);
    = Clip(p2 -pv)-(p2 +pv)((2*p3 + 3*p2 + p1 + p0 + q0 + 4)>>3);
    = Clip3(p2-pv, p2+pv, (2*p3 + 3*p2 + p1 + p0 + q0 + 4)>>3);
    2/6 q0’ = q0 + Clip(-pv)-(pv)((p1 + 2*p0 - 6*q0 + 2*q1 + q2 + 4)>>3);
    = Clip(q0 -pv)-(q0 +pv)((p1 + 2*p0 + 2*q0 + 2*q1 + q2 + 4)>>3);
    = Clip3(q0-pv, q0+pv, (p1 + 2*p0 + 2*q0 + 2*q1 + q2 + 4)>>3);
    q1’ = q1 + Clip(-pv)-(pv)((p0 + q0 - 3*q1 + q2 +2)>>2);
    = Clip(q1 -pv)-(q1 +pv)((p0 + q0 + q1 + q2 +2)>>2); = Clip3(q1-pv, q1+pv, (p0 + q0 + q1 + q2 +2)>>2);
    q2’ = q2 + Clip(-pv)-(pv)((p0 + q0 + q1 - 5*q2 + 2*q3 + 4)>>3);
    = Clip(q2 -pv)-(q2 +pv)((p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3);
    = Clip3(q2-pv, q2+pv, p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3).
  3. 3. Dispositivo de processamento de imagem de acordo com a reivindicação 2, caracterizado por:
    o controlador aplicar o processo de clipping de acordo com as seguintes expressões:
    p0’ = p0 + Clip(-2*tc)-(2*tc)((p2 + 2*p1 - 6*p0 +2*q0 + q1 + 4)>>3);
    = Clip(p0 -2*tc)-(p0 +2*tc)((p2 + 2*p1 + 2*p0 +2*q0 + q1 + 4)>>3);
    = Clip3(p0-2*tc, p0+2*tc, (p2 +2*p1 +2*p0 +2*q0 +q1 + 4)>>3);
    q0’ = q0 + Clip(-2*tc)-( 2*tc)((p1 + 2*p0 - 6*q0 + 2*q1 + q2 + 4)>>3);
    = Clip(q0 -2*tc)-(q0 +2*tc)((p1 + 2*p0 + 2*q0 + 2*q1 + q2 + 4)>>3);
    = Clip3(q0-2*tc, q0+2*tc, (p1 +2*p0 +2*q0 +2*q1 + q2 + 4)>>3);
    pí’ = p1 + Clip(-2*tc)-( 2*tc)((p2 - 3*p1 + p0 + q0 +2)>>2);
    = Clip(p1 -2*tc)-(p1 +2*tc)((p2 + p1 + p0 + q0 +2)>>2);
    = Clip3(p1-2*tc, p1+2*tc, (p2 + p1 + p0 + q0 +2)>>2);
    3/6 ql’ = q1 + Clip(-2*tc)-( 2*tc)((p0 + q0 - 3*q1 + q2 +2)>>2);
    = Clip(qi -2*tc)-(qi +2*tc)((p0 + q0 + ql + q2 +2)>>2);
    = Clip3(q1-2*tc, q1+2*tc, (p0 + q0 + ql + q2 +2)>>2);
    p2’ = p2 + Clip(-2*tc)-( 2*tc)((2*p2 - 5*p2 + p1 + p0 + q0 + 4)>>3);
    = Clip(p2 -2*tc)-(p2 +2*tc)((2*p3 + 3*p2 + p1 + p0 + q0 + 4)>>3);
    = Clip3(p2-2*tc, p2+2*tc, (2*p3 +3*p2 + p1 + p0 + q0 + 4)>>3);
    q2’ = q2 + Clip(-2*tc)-( 2*tc)((p0 + q0 + q1 - 5*q2 + 2*q3 + 4)>>3);
    = Clip(q2 -2*tc)-(q2 +2*tc)((p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3);
    = Clip3(q2-2*tc, q2+2*tc, (p0 +q0 + q1 + 3*q2 + 2*q3 + 4)>>3).
  4. 4. Dispositivo de processamento de imagem de acordo com a reivindicação 3, caracterizado pelo fato de que a unidade de filtragem aplica o primeiro filtro aos pixels de luma vizinhos na vizinhança de um limite de bloco.
  5. 5. Dispositivo de processamento de imagem de acordo com a reivindicação 4, caracterizado pelo fato de que o primeiro filtro é mais forte em termos de força de filtro que o segundo filtro.
  6. 6. Dispositivo de processamento de imagem de acordo com a reivindicação 5, caracterizado pelo fato de que:
    o primeiro filtro é um filtro forte que filtra seis pixels vizinhos na vizinhança de um limite de bloco;
    o segundo filtro é um filtro fraco que filtra quatro pixels vizinhos na vizinhança de um limite de bloco.
  7. 7. Método de processamento de imagem, caracterizado por compreender as etapas de:
    aplicar um primeiro filtro, o qual é diferente de um segundo
    4/6 filtro para pixels vizinhos na vizinhança de um limite de bloco dentro de uma imagem decodificada localmente decodificada; e controlar a unidade de filtragem de forma a aplicar um processo de clipping ao primeiro filtro utilizando um valor de clipping do primeiro filtro que é maior do que um valor de clipping do segundo filtro; e codificar uma imagem utilizando uma imagem filtrada para a qual o primeiro filtro é aplicado.
  8. 8. Método de processamento de imagem de acordo com reivindicação 7, caracterizado pela etapa de:
    aplicar o processo de clipping de acordo com as seguintes expressões:
    p0’ = p0 + Clip(-pv)-(pv)((p2 + 2*p1 - 6*p0 +2*q0 + q1 + 4)>>3);
    = Clip(p0 -pv)-(p0 +pv)((p2 + 2*pl + 2*p0 +2*q0 + q1 + 4)>>3);
    = Clip3(p0-pv, p0+pv, (p2 + 2*p1 + 2*p0 +2*q0 + q1 + 4)>>3);
    pl’ = p1 + Clip(-pv)-(pv)((p2 - 3*pl + p0 + q0 +2)>>2);
    = Clip(p1 -pv)-(p1 +pv)((p2 + p1 + p0 + q0 +2)>>2);
    = Clip3(p1-pv, pl+pv, (p2 + pl + p0 + q0 +2)>>2);
    p2’ = p2 + Clip(-pv)-(pv)((2*p2 - 5*p2 + pl + p0 + q0 + 4)>>3);
    = Clip(p2 -pv)-(p2 +pv)((2*p3 + 3*p2 + pl + p0 + q0 + 4)>>3);
    = Clip3(p2-pv, p2+pv, (2*p3 + 3*p2 + pl + p0 + q0 + 4)>>3);
    q0’ = q0 + Clip(-pv)-(pv)((pl + 2*p0 - 6*q0 + 2*ql + q2 + 4)>>3);
    = Clip(q0 -pv)-(q0 +pv)((pl + 2*p0 + 2*q0 + 2*ql + q2 + 4)>>3);
    = Clip3(q0-pv, q0+pv, (pl + 2*p0 + 2*q0 + 2*ql + q2 + 4)>>3);
    ql’ = ql + Clip(-pv)-(pv)((p0 + q0 - 3*ql + q2 +2)>>2);
    5/6 — Cllp(q1 -pv)-(q1 +pv)((pO + q0 + q1 + q2 +2)>>2); = Clip3(q1-pv, ql+pv, (pO + qO + ql + q2 +2)>>2);
    q2' = q2 + Clip(-pv)-(pv)((p0 + q0 + q1 - 5*q2 + 2*q3 + 4)>>3);
    = Clip(q2 -pv)-(q2 +pv)((p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3);
    = Clip3(q2-pv, q2+pv, p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3).
  9. 9. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pela etapa de:
    aplicar o processo de clipping de acordo com as seguintes expressões:
    p0' = p0 + Clip(-2*tc)-(2*tc)((p2 + 2*p1 - 6*p0 +2*q0 + q1 + 4)>>3);
    = Clip(p0 -2*tc)-(p0 +2*tc)((p2 + 2*p1 + 2*p0 +2*q0 + q1 + 4)>>3);
    = Clip3(p0-2*tc, p0+2*tc, (p2 +2*p1 +2*p0 +2*q0 +q1 + 4)>>3);
    q0' = q0 + Clip(-2*tc)-( 2*tc)((p1 + 2*p0 - 6*q0 + 2*q1 + q2 + 4)>>3);
    = Clip(q0 -2*tc)-(q0 +2*tc)((p1 + 2*p0 + 2*q0 + 2*q1 + q2 + 4)>>3);
    = Clip3(q0-2*tc, q0+2*tc, (p1 +2*p0 +2*q0 +2*q1 + q2 + 4)>>3);
    p1' = p1 + Clip(-2*tc)-( 2*tc)((p2 - 3*p1 + p0 + q0 +2)>>2);
    = Clip(p1 -2*tc)-(p1 +2*tc)((p2 + p1 + p0 + q0 +2)>>2);
    = Clip3(p1-2*tc, p1+2*tc, (p2 + p1 + p0 + q0 +2)>>2);
    q1' = q1 + Clip(-2*tc)-( 2*tc)((p0 + q0 - 3*q1 + q2 +2)>>2);
    = Clip(q1 -2*tc)-(q1 +2*tc)((p0 + q0 + q1 + q2 +2)>>2);
    = Clip3(q1-2*tc, q1+2*tc, (p0 + q0 + q1 + q2 +2)>>2);
    p2' = p2 + Clip(-2*tc)-( 2*tc)((2*p2 - 5*p2 + p1 + p0 + q0 + 4)>>3); = Clip(p2 -2*tc)-(p2 +2*tc)((2*p3 + 3*p2 + p1 + p0 + q0 + 4)>>3);
    6/6 = Clip3(p2-2*tc, p2+2*tc, (2*p3 +3*p2 + p1 + p0 + q0 + 4)>>3);
    q2' = q2 + Clip(-2*tc)-( 2*tc)((p0 + q0 + q1 - 5*q2 + 2*q3 + 4)>>3);
    = Clip(q2 -2*tc)-(q2 +2*tc)((p0 + q0 + q1 + 3*q2 + 2*q3 + 4)>>3);
    = Clip3(q2-2*tc, q2+2*tc, (p0 +q0 + q1 + 3*q2 + 2*q3 + 4)>>3).
  10. 10. Método de processamento de imagem de acordo com a reivindicação 9, caracterizado pelo fato de que a unidade de filtragem aplica o primeiro filtro aos pixels de luma vizinhos na vizinhança de um limite de bloco.
  11. 11. Método de processamento de imagem de acordo com a reivindicação 10, caracterizado pelo fato de que o primeiro filtro é mais forte em termos de força de filtro que o segundo filtro.
  12. 12. Método de processamento de imagem de acordo com a reivindicação 11, caracterizado pelo fato de que:
    o primeiro filtro é um filtro forte que filtra seis pixels vizinhos na vizinhança de um limite de bloco;
    o segundo filtro é um filtro fraco que filtra quatro pixels vizinhos na vizinhança de um limite de bloco.
    1/35
    O O O ® © © © © ® Ο O O o o o ® ® ® © © ® O O O o o o ® ® ® © © ® O O O o o o © ®. © ® ® ® O O O o o o ® © ® ® ® ® Ο Ο Ο ω o o o ® ® ® ® © © OOO o o o ® ® © ® © © O O O o o o © ® © ® © © OOO ooo © ® © ® © © ooo o o o © ® ® © © © ooo
    ZD CÜ —I
    OQ CO OQ
BR122015001053-5A 2011-06-28 2012-05-28 Dispositivo e método de processamento de imagem BR122015001053B1 (pt)

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
JP2011143461 2011-06-28
JP2011-143461 2011-06-28
JP2011240550 2011-11-01
JP2011-240550 2011-11-01
JP2011-243839 2011-11-07
JP2011243839 2011-11-07
JP2012-009326 2012-01-19
JP2012009326 2012-01-19
PCT/JP2012/063606 WO2013001957A1 (ja) 2011-06-28 2012-05-28 画像処理装置と画像処理方法
BR112013033183-6A BR112013033183B1 (pt) 2011-06-28 2012-05-28 Dispositivo e método de processamento de imagem

Publications (2)

Publication Number Publication Date
BR122015001053A2 true BR122015001053A2 (pt) 2018-03-20
BR122015001053B1 BR122015001053B1 (pt) 2019-07-09

Family

ID=47423858

Family Applications (2)

Application Number Title Priority Date Filing Date
BR122015001053-5A BR122015001053B1 (pt) 2011-06-28 2012-05-28 Dispositivo e método de processamento de imagem
BR112013033183-6A BR112013033183B1 (pt) 2011-06-28 2012-05-28 Dispositivo e método de processamento de imagem

Family Applications After (1)

Application Number Title Priority Date Filing Date
BR112013033183-6A BR112013033183B1 (pt) 2011-06-28 2012-05-28 Dispositivo e método de processamento de imagem

Country Status (20)

Country Link
US (7) US10291937B2 (pt)
EP (6) EP2728870A4 (pt)
JP (6) JP6070553B2 (pt)
KR (8) KR102010160B1 (pt)
CN (15) CN107454400B (pt)
AU (3) AU2012277049B2 (pt)
BR (2) BR122015001053B1 (pt)
CA (2) CA3059756C (pt)
CO (1) CO6842008A2 (pt)
DK (1) DK3313074T3 (pt)
ES (1) ES2893754T3 (pt)
HU (1) HUE056075T2 (pt)
MX (2) MX356762B (pt)
MY (1) MY167204A (pt)
PH (1) PH12018501265A1 (pt)
RU (4) RU2607243C2 (pt)
SG (3) SG10201404907QA (pt)
TW (3) TWI571104B (pt)
WO (1) WO2013001957A1 (pt)
ZA (1) ZA201309214B (pt)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
JP5914962B2 (ja) 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
KR20190069613A (ko) 2011-02-10 2019-06-19 벨로스 미디어 인터내셔널 리미티드 화상 처리 장치 및 화상 처리 방법
MY167204A (en) * 2011-06-28 2018-08-13 Sony Corp Image processing device and image processing method
TWI652941B (zh) 2011-11-03 2019-03-01 太陽專利信託 用於解區塊之有效修整技術（二）
US9414064B2 (en) * 2011-11-25 2016-08-09 Sun Patent Trust Image processing method and image processing apparatus
US8921511B2 (en) 2012-07-27 2014-12-30 E I Du Pont De Nemours And Company Process for forming an aramid copolymer
US9973784B2 (en) 2012-09-20 2018-05-15 Sony Corporation Image processing device and method
US9445130B2 (en) * 2013-01-09 2016-09-13 Qualcomm Incorporated Blockiness metric for large HEVC block artifacts
US9628822B2 (en) * 2014-01-30 2017-04-18 Qualcomm Incorporated Low complexity sample adaptive offset encoding
JP7310139B2 (ja) * 2016-12-28 2023-07-19 ソニーグループ株式会社 画像処理装置及び画像処理方法
CN106911934B (zh) * 2017-03-01 2020-03-03 北京奇艺世纪科技有限公司 块效应去除方法及去块效应滤波器
WO2018225593A1 (ja) * 2017-06-05 2018-12-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法および復号方法
US10645408B2 (en) * 2017-09-17 2020-05-05 Google Llc Dual deblocking filter thresholds
US10448009B1 (en) * 2017-12-14 2019-10-15 Amazon Technologies, Inc. Determining sample adaptive offset filter parameters
US11153607B2 (en) * 2018-01-29 2021-10-19 Mediatek Inc. Length-adaptive deblocking filtering in video coding
KR102632984B1 (ko) * 2018-03-29 2024-02-05 소니그룹주식회사 화상 처리 장치 및 화상 처리 방법
JPWO2019225459A1 (ja) 2018-05-23 2021-04-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 符号化装置、復号装置、符号化方法及び復号方法
KR102584455B1 (ko) * 2018-09-24 2023-10-05 후아웨이 테크놀러지 컴퍼니 리미티드 품질 최적화된 디블로킹을 수행하기 위한 이미지 처리 디바이스 및 방법
WO2020073969A1 (en) * 2018-10-10 2020-04-16 Huawei Technologies Co., Ltd. An image processing device and method for performing deblocking
KR102606722B1 (ko) * 2018-10-12 2023-11-24 후아웨이 테크놀러지 컴퍼니 리미티드 비디오 코딩에서 디블로킹 필터를 위한 장치 및 방법
CA3119935A1 (en) 2018-11-14 2020-05-22 Sharp Kabushiki Kaisha Systems and methods for applying deblocking filters to reconstructed video data
CN117157977A (zh) * 2021-03-31 2023-12-01 瑞典爱立信有限公司 超长抽头去块
US20230245286A1 (en) * 2022-01-28 2023-08-03 V-Silicon Semiconductor (Hefei) Co., Ltd. 2d recursive de-banding

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2435757C (en) * 2001-11-29 2013-03-19 Matsushita Electric Industrial Co., Ltd. Video coding distortion removal method and apparatus using a filter
US7295609B2 (en) 2001-11-30 2007-11-13 Sony Corporation Method and apparatus for coding image information, method and apparatus for decoding image information, method and apparatus for coding and decoding image information, and system of coding and transmitting image information
JP4580626B2 (ja) * 2002-07-11 2010-11-17 パナソニック株式会社 フィルタリング強度の決定方法、動画像符号化方法、および動画像復号化方法
US7391812B2 (en) * 2002-07-14 2008-06-24 Apple Inc. Adaptively post filtering encoded video
US7167522B2 (en) * 2003-02-27 2007-01-23 Texas Instruments Incorporated Video deblocking filter
US7995849B2 (en) 2003-03-17 2011-08-09 Qualcomm, Incorporated Method and apparatus for improving video quality of low bit-rate video
JP2004328634A (ja) 2003-04-28 2004-11-18 Sony Corp 画像復号化装置及び方法
CN101616330B (zh) * 2003-07-16 2012-07-04 三星电子株式会社 用于色彩图像的视频编码/解码装置和方法
KR100855466B1 (ko) * 2004-01-27 2008-09-01 삼성전자주식회사 비디오 코딩 및 디코딩 방법, 및 이를 위한 장치
US7430336B2 (en) * 2004-05-06 2008-09-30 Qualcomm Incorporated Method and apparatus for image enhancement for low bit rate video compression
KR100614647B1 (ko) * 2004-07-02 2006-08-22 삼성전자주식회사 디블록킹 필터에서의 효과적인 에지 필터링 연산을 위한레지스터 어레이 구조
NO322722B1 (no) * 2004-10-13 2006-12-04 Tandberg Telecom As Fremgangsmate for videokoding gjennom reduksjon av blokkartefakter
KR100722972B1 (ko) * 2004-10-26 2007-05-30 삼성전자주식회사 디지털방송 수신기의 영상신호 처리 장치 및 방법
KR100843196B1 (ko) 2004-12-17 2008-07-02 삼성전자주식회사 Ｈ.264/ａｖｃ 비디오 디코더의 디블록킹 필터
RU2276355C1 (ru) * 2005-01-27 2006-05-10 Олег Федорович Меньших Устройство распознавания внутренних неоднородностей объекта
JP4543971B2 (ja) * 2005-03-07 2010-09-15 ソニー株式会社 符号化方法、符号化装置、符号化処理のプログラム及び符号化処理のプログラムを記録した記録媒体
US7961963B2 (en) * 2005-03-18 2011-06-14 Sharp Laboratories Of America, Inc. Methods and systems for extended spatial scalability with picture-level adaptation
JP4825524B2 (ja) 2006-01-31 2011-11-30 株式会社東芝 動画像復号装置および動画像復号方法
JP4605052B2 (ja) * 2006-03-03 2011-01-05 日本電気株式会社 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、フィルタ装置及びプログラム
WO2007116551A1 (ja) * 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
TWI384437B (zh) * 2006-12-18 2013-02-01 Sony Corp An image signal processing device, an image signal processing method, and a computer program product
WO2008084996A1 (en) * 2007-01-11 2008-07-17 Samsung Electronics Co, . Ltd. Method and apparatus for deblocking-filtering video data
JP2009004920A (ja) * 2007-06-19 2009-01-08 Panasonic Corp 画像符号化装置および画像符号化方法
US8913670B2 (en) 2007-08-21 2014-12-16 Blackberry Limited System and method for providing dynamic deblocking filtering on a mobile device
US8145977B2 (en) * 2007-10-15 2012-03-27 Joseph Schweiray Lee Methods and apparatus for providing error correction to unwritten pages and for identifying unwritten pages in flash memory
WO2009051719A2 (en) * 2007-10-16 2009-04-23 Thomson Licensing Methods and apparatus for video encoding and decoding geometically partitioned super blocks
CN101472177B (zh) * 2007-12-27 2013-03-06 宝利微电子系统控股公司 一种块效应检测方法
JP5232175B2 (ja) * 2008-01-24 2013-07-10 パナソニック株式会社 動画像圧縮装置
WO2009126299A1 (en) * 2008-04-11 2009-10-15 Thomson Licensing Deblocking filtering for displaced intra prediction and template matching
US8761538B2 (en) * 2008-12-10 2014-06-24 Nvidia Corporation Measurement-based and scalable deblock filtering of image data
JP2010288079A (ja) * 2009-06-11 2010-12-24 Sony Corp 画像処理装置及び画像処理方法
JP5344238B2 (ja) 2009-07-31 2013-11-20 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP5359657B2 (ja) 2009-07-31 2013-12-04 ソニー株式会社 画像符号化装置および方法、記録媒体、並びにプログラム
JP2011049740A (ja) * 2009-08-26 2011-03-10 Sony Corp 画像処理装置および方法
KR101073150B1 (ko) * 2009-08-28 2011-10-12 성균관대학교산학협력단 공통 데이터 패스 구조를 포함하는 디블록킹 필터링 연산 장치 및 그 방법
JP5914962B2 (ja) 2010-04-09 2016-05-11 ソニー株式会社 画像処理装置および方法、プログラム、並びに、記録媒体
TWI508534B (zh) 2010-05-18 2015-11-11 Sony Corp Image processing apparatus and image processing method
DK3177017T3 (da) 2010-06-04 2020-03-02 Sony Corp Kodning af en qp og en delta qp for billedblokke, der er større end en minimumsstørrelse
CN103716632B (zh) 2010-12-07 2017-04-19 索尼公司 图像处理设备和图像处理方法
CN106385586A (zh) 2010-12-07 2017-02-08 索尼公司 图像处理设备和图像处理方法
JP5741076B2 (ja) 2010-12-09 2015-07-01 ソニー株式会社 画像処理装置及び画像処理方法
US9565436B2 (en) * 2011-01-14 2017-02-07 Telefonaktiebolaget Lm Ericsson (Publ) Method for filter control and a filtering control device
KR20190069613A (ko) 2011-02-10 2019-06-19 벨로스 미디어 인터내셔널 리미티드 화상 처리 장치 및 화상 처리 방법
MY186854A (en) 2011-03-11 2021-08-26 Sony Corp Image processing apparatus and method
US9338476B2 (en) * 2011-05-12 2016-05-10 Qualcomm Incorporated Filtering blockiness artifacts for video coding
TWI530161B (zh) 2011-06-07 2016-04-11 Sony Corp Image processing apparatus and method
JP5907367B2 (ja) 2011-06-28 2016-04-26 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
MY167204A (en) * 2011-06-28 2018-08-13 Sony Corp Image processing device and image processing method
EP2869560A4 (en) 2012-06-29 2016-09-07 Sony Corp DEVICE AND METHOD OF ENCODING
US10820017B2 (en) * 2017-03-15 2020-10-27 Mediatek Inc. Method and apparatus of video coding

Also Published As

Publication number Publication date
MX352108B (es) 2017-11-09
AU2017202655A1 (en) 2017-05-11
CN113347420A (zh) 2021-09-03
SG10201404907QA (en) 2014-10-30
SG10201507034QA (en) 2015-10-29
US20240056611A1 (en) 2024-02-15
EP3313074B1 (en) 2021-09-22
SG10201507031PA (en) 2015-10-29
AU2017202655B2 (en) 2018-07-26
JP2015136147A (ja) 2015-07-27
CN110611810A (zh) 2019-12-24
US10291937B2 (en) 2019-05-14
KR102105497B1 (ko) 2020-04-29
KR20170055554A (ko) 2017-05-19
RU2643468C1 (ru) 2018-02-01
CN113347419A (zh) 2021-09-03
CN110602492A (zh) 2019-12-20
CN107426571B (zh) 2019-12-10
CN107295335A (zh) 2017-10-24
CN107318019A (zh) 2017-11-03
CA3059756C (en) 2022-10-18
BR122015001053B1 (pt) 2019-07-09
ES2893754T3 (es) 2022-02-10
KR102067368B1 (ko) 2020-01-16
TW201304550A (zh) 2013-01-16
CN107454401A (zh) 2017-12-08
TWI542195B (zh) 2016-07-11
CN107426571A (zh) 2017-12-01
AU2015213302B2 (en) 2017-04-06
CA2837055C (en) 2019-12-31
KR20190090888A (ko) 2019-08-02
US11039172B2 (en) 2021-06-15
CO6842008A2 (es) 2014-01-20
US20210344965A1 (en) 2021-11-04
KR20140043758A (ko) 2014-04-10
JP2018113698A (ja) 2018-07-19
CN110519592A (zh) 2019-11-29
CN107318019B (zh) 2020-02-28
US11647231B2 (en) 2023-05-09
MY167204A (en) 2018-08-13
TW201707450A (zh) 2017-02-16
KR102009050B1 (ko) 2019-08-08
EP3313075B1 (en) 2021-12-29
AU2015213302A1 (en) 2015-09-03
CN110611811B (zh) 2021-07-06
JPWO2013001957A1 (ja) 2015-02-23
KR20190090066A (ko) 2019-07-31
CN110611812A (zh) 2019-12-24
CN104113764A (zh) 2014-10-22
CN103609126B (zh) 2017-09-08
MX2013015405A (es) 2015-10-27
CN107318018B (zh) 2019-11-01
KR20200115675A (ko) 2020-10-07
JP2017060202A (ja) 2017-03-23
KR102166220B1 (ko) 2020-10-15
JP6065037B2 (ja) 2017-01-25
JP6468380B2 (ja) 2019-02-13
MX356762B (es) 2018-06-12
CA3059756A1 (en) 2013-01-03
US20160286240A1 (en) 2016-09-29
EP2728870A4 (en) 2015-01-14
CN110611812B (zh) 2021-07-06
CN110611810B (zh) 2021-06-01
CN103609126A (zh) 2014-02-26
TW201603560A (zh) 2016-01-16
CN107454400B (zh) 2020-10-20
BR112013033183B1 (pt) 2019-07-16
KR102071201B1 (ko) 2020-01-29
PH12018501265A1 (en) 2021-01-18
TWI571104B (zh) 2017-02-11
RU2013156835A (ru) 2015-06-27
ZA201309214B (en) 2014-06-25
HUE056075T2 (hu) 2022-01-28
EP4009637A1 (en) 2022-06-08
CN110602492B (zh) 2021-06-01
US11838556B2 (en) 2023-12-05
EP3001684A3 (en) 2016-07-20
AU2012277049B2 (en) 2017-04-06
CN110519592B (zh) 2021-06-01
CN107454400A (zh) 2017-12-08
AU2012277049A1 (en) 2013-12-12
CN107454401B (zh) 2019-11-19
US20140112396A1 (en) 2014-04-24
EP3313074A1 (en) 2018-04-25
KR102477475B1 (ko) 2022-12-14
US20190230383A1 (en) 2019-07-25
JP6468381B2 (ja) 2019-02-13
CN107318018A (zh) 2017-11-03
US11051043B2 (en) 2021-06-29
EP4009638A1 (en) 2022-06-08
BR112013033183A2 (pt) 2017-03-01
KR102067369B1 (ko) 2020-01-16
TWI637626B (zh) 2018-10-01
CN107295335B (zh) 2020-03-17
EP2728870A1 (en) 2014-05-07
DK3313074T3 (da) 2021-10-25
KR20190088573A (ko) 2019-07-26
JP2018113699A (ja) 2018-07-19
CN110611811A (zh) 2019-12-24
US10298958B2 (en) 2019-05-21
JP6459005B2 (ja) 2019-01-30
US20230232049A1 (en) 2023-07-20
EP3001684A2 (en) 2016-03-30
RU2608476C2 (ru) 2017-01-18
KR20190092623A (ko) 2019-08-07
RU2015103069A (ru) 2015-06-20
CA2837055A1 (en) 2013-01-03
JP6477939B2 (ja) 2019-03-06
JP2018113697A (ja) 2018-07-19
JP6070553B2 (ja) 2017-02-01
KR20200024958A (ko) 2020-03-09
KR102010160B1 (ko) 2019-08-12
US20240031610A1 (en) 2024-01-25
US20190191186A1 (en) 2019-06-20
RU2607243C2 (ru) 2017-01-10
WO2013001957A1 (ja) 2013-01-03
RU2680349C1 (ru) 2019-02-19
EP3313075A1 (en) 2018-04-25
CN104113764B (zh) 2017-10-27

Similar Documents

Publication Publication Date Title
AU2017202655B2 (en) Image processing device and image processing method

Legal Events

Date Code Title Description
B03A Publication of a patent application or of a certificate of addition of invention [chapter 3.1 patent gazette]
B07A Application suspended after technical examination (opinion) [chapter 7.1 patent gazette]
B09B Patent application refused [chapter 9.2 patent gazette]
B12B Appeal against refusal [chapter 12.2 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 28/05/2012, OBSERVADAS AS CONDICOES LEGAIS. (CO) 20 (VINTE) ANOS CONTADOS A PARTIR DE 28/05/2012, OBSERVADAS AS CONDICOES LEGAIS