BR122014013355B1

BR122014013355B1 - Aparelho e método de processamento de imagem

Info

Publication number: BR122014013355B1
Application number: BR122014013355-3A
Authority: BR
Inventors: Kazushi Sato
Original assignee: Sony Corporation
Priority date: 2010-06-04
Filing date: 2011-06-03
Publication date: 2021-11-23
Also published as: KR101828625B1; KR101918905B1; AU2011259939A2; HK1213409A1; CN105245895A; CA2798927C; KR20180014249A; AU2011259939B2; CN103369319B; ZA201208901B; MX362216B; EP4290860A3; MY190480A; US8849052B2; MY163789A; US9924177B2; KR20170118962A; TWI565301B; CA2798927A1; CN103369320B

Abstract

APARELHO E MÉTODO DE PROCESSAMENTO DE IMAGEM São divulgados um dispositivo e método de processamento de imagem que tornam possível realizar quantização ou quantização inversa que é mais adequada para os conteúdos das imagens. Uma unidade de decodificação reversível (202) decodifica dados de encriptação que são lidos a partir de um armazenamento temporário (201) em um sincronismo prédeterminado.Uma unidade de quantização inversa do submacrobloco (221) usa parâmetros de quantização supridos a partir de uma unidade de quantização inversa (203) para obter um valor de quantização para cada submacrobloco, e retorna os ditos valores de quantização à unidade de quantização inversa (203). A unidade de quantização inversa (203) usa os valores de quantização para cada submacrobloco supridos a partir da unidade de quantização inversa do submacrobloco (221) para quantizar inversamente coeficientes de quantização obtidos pela decodificação realizada pela unidade de decodificação reversível (202). Esta tecnologia pode ser aplicada em um dispositivo de processamento de imagem, por exemplo.

Description

CAMPO DA INVENÇÃO

[001] A presente tecnologia diz respeito a um aparelho e a um método de processamento de imagem e diz respeito a um aparelho e a um método de processamento de imagem para realizar um processo de quantização ou um processo de quantização inversa.

FUNDAMENTOS DA INVENÇÃO

[002] Recentemente, um aparelho em conformidade com um sistema, tal como MPEG (Grupo de Especialistas em Imagem em Movimento), que trata digitalmente informação de imagem e comprime a mesma por uma transformada ortogonal, tal como uma transformada discreta de cosseno, e compensação de movimento pelo uso de redundância específica da informação de imagem a fim de transmitir e acumular eficientemente a informação naquele momento, tem sido amplamente usado tanto na distribuição de informação em uma estação de difusão quanto na recepção de informação em residência padrão.

[003] Atualmente, há crescentes necessidades de codificação de compressão superior, tal como codificação de uma imagem de aproximadamente 4.096 x 2.048 pixels, quatro vezes maior que uma imagem em alta definição, ou distribuição da imagem em alta definição em um ambiente de capacidade de transmissão limitada, tal como a Internet. Portanto, VCEG em ITU-T estuda continuamente melhoria na eficiência de codificação.

[004] Um tamanho de pixel de um macrobloco que é uma área parcial da imagem, que é uma unidade de divisão (unidade do processo de codificação) da imagem no momento de codificação de imagem em MPEG1, MPEG2 e ITU-T H.264/MPEG4-AVC, que são sistemas de codificação de imagem convencionais, é sempre 16 x 16 pixels. Por outro lado, Documento Não Patente 1 sugere ampliar o número de pixels do macrobloco horizontal e verticalmente como tecnologia elementar do padrão de codificação de imagem da próxima geração. Este também sugere usar o macrobloco de 32 x 32 pixels e de 64 x 64 pixels, além do tamanho de pixel do macrobloco de 16 x 16 pixels definido por MPEG1, MPEG2, ITU-T H.264/MPEG4-AVC e congêneres. Isto é para aumentar a eficiência de codificação pela realização da compensação de movimento e da transformada ortogonal em uma unidade de área maior em áreas com movimento similar em virtude de ser previsto que o tamanho de pixel da imagem a ser codificada aumenta horizontal e verticalmente no futuro, tal como UHD (Ultra Alta Definição; 4.000 pixels x 2.000 pixels), por exemplo.

[005] O Documento Não Patente 1 adota uma estrutura hierárquica, desse modo, definindo um bloco maior como um superconjunto para o bloco não maior que 16 x 16 pixels, ainda mantendo compatibilidade com o macrobloco de AVC atual.

[006] Embora o Documento Não Patente 1 sugira aplicação do macrobloco ampliado em interfatia, o Documento Não Patente 2 sugere aplicação do macrobloco ampliado em intrafatia.

LISTA DE CITAÇÃO DOCUMENTOS NÃO PATENTE

[007] Documento Não Patente 1: Peisong Chenn, Yan Ye, Marta Karczewicz, “Video Coding Using Extended Block Sizes”, COM16-C123-E, Qualcomm Inc.

[008] Documento Não Patente 2: Sung-Chang Lim, Hahyun Lee, Jinho Lee, Jongho Kim, Haechul Choi, Seyoon Jeong, Jin Soo Choi, “Intra coding using extended block size”, VCEG-AL28, julho de 2009.

SUMÁRIO DA INVENÇÃO PROBLEMAS A SEREM RESOLVIDOS PELA INVENÇÃO

[009] Quando o macrobloco ampliado sugerido nos Documentos Não Patente 1 e 2 for aplicado, possibilidade de que uma área plana e uma área que inclui textura sejam misturadas em um único macrobloco torna-se alta.

[0010] Entretanto, já que somente um parâmetro de quantização pode ser especificado para um macrobloco nos Documentos Não Patente 1 e 2, é difícil para realizar quantização adaptativa de acordo com características das respectivas áreas em um plano.

[0011] A presente tecnologia foi realizada em vista de tais circunstâncias e um objetivo desta é inibir a qualidade da imagem subjetiva de uma imagem decodificada se deteriore pela realização de um processo de quantização mais apropriado.

SOLUÇÃO DOS PROBLEMAS

[0012] Um aspecto da presente tecnologia é um aparelho de processamento de imagem que inclui: uma unidade de decodificação que decodifica um fluxo codificado para gerar dados quantizados; uma unidade de definição que define um parâmetro de quantização usado quando os dados quantizados gerados pela unidade de decodificação forem inversamente quantizados para uma unidade de codificação em uma camada inferior a uma unidade de codificação de referência em uma camada de referência da unidade de codificação, que é uma unidade do processo de codificação, quando dados da imagem forem codificados; e uma unidade de quantização inversa que quantiza inversamente os dados quantizados gerados pela unidade de decodificação pelo uso do parâmetro de quantização definido pela unidade de definição.

[0013] A unidade de definição pode definir o parâmetro de quantização para uma unidade de codificação atual pelo uso de um parâmetro de quantização da diferença que indica um valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual, que é um alvo de um processo de quantização inversa, e o parâmetro de quantização definido para a unidade de codificação na mesma camada da unidade de codificação atual.

[0014] O parâmetro de quantização da diferença pode ser o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a unidade de codificação decodificado antes da unidade de codificação atual na ordem do processo de decodificação.

[0015] O parâmetro de quantização da diferença pode ser o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a unidade de codificação decodificado imediatamente antes da unidade de codificação atual na ordem do processo de decodificação.

[0016] A unidade de codificação de referência pode ser uma maior unidade de codificação, que é a unidade de codificação em uma camada mais superior.

[0017] O aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de recepção que recebe o fluxo codificado e dados do tamanho mínimo da unidade de codificação que indicam um tamanho mínimo da unidade de codificação para o qual o parâmetro de quantização da diferença é definido, e a unidade de definição pode definir o parâmetro de quantização para a unidade de codificação atual de acordo com os dados do tamanho mínimo da unidade de codificação recebidos pela unidade de recepção.

[0018] A unidade de recepção pode obter os dados do tamanho mínimo da unidade de codificação a partir de um cabeçalho de fatia do fluxo codificado.

[0019] Quando um tamanho indicado pelos dados do tamanho mínimo da unidade de codificação for 16 pixels, o parâmetro de quantização da diferença para a unidade de codificação cujo tamanho é menor que 16 pixels pode ser definido em 0.

[0020] A unidade de definição pode definir o parâmetro de quantização para uma unidade de codificação atual pelo uso de um parâmetro de quantização da diferença que indica um valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual, que é um alvo de um processo de decodificação, e o parâmetro de quantização definido para uma fatia à qual a unidade de codificação atual pertence.

[0021] A unidade de definição pode definir o parâmetro de quantização para a unidade de codificação atual pelo uso do parâmetro de quantização da diferença que indica o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a fatia à qual a unidade de codificação atual pertence quando a unidade de codificação atual for uma primeira unidade de codificação na ordem do processo de decodificação em uma camada da unidade de codificação de referência.

[0022] A unidade de codificação de referência pode ser uma maior unidade de codificação, que é a unidade de codificação em uma camada mais superior.

[0023] O aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de recepção que recebe o fluxo codificado e dados do tamanho mínimo da unidade de codificação que indicam um tamanho mínimo da unidade de codificação para o qual o parâmetro de quantização da diferença é definido, e a unidade de definição pode definir o parâmetro de quantização para a unidade de codificação atual de acordo com os dados do tamanho mínimo da unidade de codificação recebidos pela unidade de recepção.

[0024] A unidade de recepção pode obter os dados do tamanho mínimo da unidade de codificação a partir de um cabeçalho de fatia do fluxo codificado.

[0025] O parâmetro de quantização da diferença para a unidade de codificação cujo tamanho é menor que 16 pixels pode ser definido em 0 quando um tamanho indicado pelos dados do tamanho mínimo da unidade de codificação for 16 pixels.

[0026] A unidade de definição pode definir o parâmetro de quantização definido para a unidade de codificação de referência como o parâmetro de quantização definido para a unidade de codificação em uma camada inferior à unidade de codificação de referência quando um valor do parâmetro de quantização da diferença for 0 para a unidade de codificação na camada inferior à unidade de codificação de referência.

[0027] O aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de recepção que recebe dados de identificação da diferença para identificar se o valor do parâmetro de quantização da diferença é 0 para a unidade de codificação na camada inferior à unidade de codificação de referência, e a unidade de definição pode definir o parâmetro de quantização definido para a unidade de codificação de referência como o parâmetro de quantização definido para a unidade de codificação na camada inferior à unidade de codificação de referência pelo uso dos dados de identificação da diferença recebidos pela unidade de recepção.

[0028] Um aspecto da presente tecnologia é um método de processamento de imagem que inclui: gerar dados quantizados pela decodificação de um fluxo codificado; definir um parâmetro de quantização usado quando os dados quantizados gerados forem inversamente quantizados para uma unidade de codificação em uma camada inferior a uma unidade de codificação de referência em uma camada de referência da unidade de codificação, que é uma unidade do processo de codificação, quando dados da imagem forem codificados; e quantizar inversamente os dados quantizados gerados pelo uso do parâmetro de quantização definido.

[0029] Um outro aspecto da presente tecnologia é um aparelho de processamento de imagem que inclui: uma unidade de definição que define um parâmetro de quantização usado quando dados da imagem forem quantizados para uma unidade de codificação em uma camada inferior a uma unidade de codificação de referência em uma camada de referência da unidade de codificação, que é uma unidade do processo de codificação, quando os dados da imagem forem codificados; uma unidade de quantização que gera dados quantizados pela quantização dos dados da imagem pelo uso do parâmetro de quantização definido pela unidade de definição; e uma unidade de codificação que codifica os dados quantizados gerados pela unidade de quantização para gerar um fluxo codificado.

[0030] A unidade de definição pode definir um parâmetro de quantização da diferença que indica um valor da diferença entre o parâmetro de quantização definido para uma unidade de codificação atual, que é um alvo de um processo de codificação, e o parâmetro de quantização definido para a unidade de codificação na mesma camada da unidade de codificação atual, e o aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de transmissão que transmite o parâmetro de quantização da diferença definido pela unidade de definição e o fluxo codificado gerado pela unidade de codificação.

[0031] A unidade de definição pode definir, como o parâmetro de quantização da diferença, o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a unidade de codificação codificado antes da unidade de codificação atual na ordem do processo de codificação.

[0032] A unidade de definição pode definir, como o parâmetro de quantização da diferença, o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a unidade de codificação codificado imediatamente antes da unidade de codificação atual na ordem do processo de codificação.

[0033] A unidade de codificação de referência pode ser uma maior unidade de codificação, que é a unidade de codificação em uma camada mais superior.

[0034] A unidade de definição pode definir dados do tamanho mínimo da unidade de codificação que indicam um tamanho mínimo da unidade de codificação para o qual o parâmetro de quantização da diferença é definido, e a unidade de transmissão pode transmitir os dados do tamanho mínimo da unidade de codificação definidos pela unidade de definição.

[0035] A unidade de transmissão pode adicionar, como um cabeçalho de fatia, os dados do tamanho mínimo da unidade de codificação definidos pela unidade de definição à sintaxe do fluxo codificado gerado pela unidade de codificação.

[0036] A unidade de definição pode definir o parâmetro de quantização da diferença para a unidade de codificação cujo tamanho é menor que 16 pixels em 0 quando um tamanho indicado pelos dados do tamanho mínimo da unidade de codificação for definido em 16 pixels.

[0037] A unidade de definição pode definir um parâmetro de quantização da diferença que indica um valor da diferença entre o parâmetro de quantização definido para uma unidade de codificação atual, que é um alvo de um processo de codificação, e o parâmetro de quantização definido para uma fatia à qual a unidade de codificação atual pertence, e o aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de transmissão que transmite o parâmetro de quantização da diferença definido pela unidade de definição e o fluxo codificado gerado pela unidade de codificação.

[0038] A unidade de definição pode definir, como o parâmetro de quantização da diferença, o valor da diferença entre o parâmetro de quantização definido para a unidade de codificação atual e o parâmetro de quantização definido para a fatia à qual a unidade de codificação atual pertence quando a unidade de codificação atual for uma primeira unidade de codificação na ordem do processo de codificação em uma camada da unidade de codificação de referência.

[0039] A unidade de codificação de referência pode ser uma maior unidade de codificação, que é a unidade de codificação em uma camada mais superior.

[0040] A unidade de definição pode definir dados do tamanho mínimo da unidade de codificação que indicam um tamanho mínimo da unidade de codificação para o qual o parâmetro de quantização da diferença é definido, e a unidade de transmissão pode transmitir os dados do tamanho mínimo da unidade de codificação definidos pela unidade de definição.

[0041] A unidade de transmissão pode adicionar, como um cabeçalho de fatia, os dados do tamanho mínimo da unidade de codificação definidos pela unidade de definição à sintaxe do fluxo codificado gerado pela unidade de codificação.

[0042] A unidade de definição pode definir o parâmetro de quantização da diferença para a unidade de codificação cujo tamanho é menor que 16 pixels em 0 quando um tamanho indicado pelos dados do tamanho mínimo da unidade de codificação for definido em 16 pixels.

[0043] A unidade de definição pode definir o parâmetro de quantização definido para a unidade de codificação de referência como o parâmetro de quantização definido para a unidade de codificação na camada inferior à unidade de codificação de referência quando um valor do parâmetro de quantização da diferença for definido em 0 para a unidade de codificação na camada inferior à unidade de codificação de referência.

[0044] A unidade de definição pode definir dados de identificação da diferença para identificar se o valor do parâmetro de quantização da diferença é 0 para a unidade de codificação na camada inferior à unidade de codificação de referência, e o aparelho de processamento de imagem pode incluir adicionalmente: uma unidade de transmissão que transmite os dados de identificação da diferença definidos pela unidade de definição e o fluxo codificado gerado pela unidade de codificação.

[0045] Um outro aspecto da presente tecnologia é um método de processamento de imagem que inclui: definir um parâmetro de quantização usado quando dados da imagem forem quantizados para uma unidade de codificação em uma camada inferior a uma unidade de codificação de referência em uma camada de referência da unidade de codificação, que é uma unidade do processo de codificação, quando os dados da imagem forem codificados; gerar dados quantizados pela quantização dos dados da imagem pelo uso do parâmetro de quantização definido; e gerar um fluxo codificado pela codificação dos dados quantizados gerados.

[0046] Em um aspecto da presente tecnologia, o fluxo codificado é decodificado e os dados quantizados são gerados, o parâmetro de quantização usado quando os dados quantizados gerados forem inversamente quantizados é definido para a unidade de codificação na camada inferior à unidade de codificação de referência na camada de referência da unidade de codificação, que é a unidade do processo de codificação, quando os dados da imagem forem codificados, e os dados quantizados gerados são inversamente quantizados pelo uso do parâmetro de quantização definido.

[0047] Em um outro aspecto da presente tecnologia, o parâmetro de quantização usado quando os dados da imagem forem quantizados é definido para a unidade de codificação na camada inferior à unidade de codificação de referência na camada de referência da unidade de codificação, que é a unidade do processo de codificação, quando os dados da imagem forem codificados, os dados da imagem são quantizados e os dados quantizados são gerados pelo uso do parâmetro de quantização definido, e os dados quantizados gerados são codificados e o fluxo codificado é gerado.

EFEITOS DA INVENÇÃO

[0048] De acordo com a presente tecnologia, o processo de quantização ou o processo de quantização inversa podem ser realizados mais apropriadamente.

BREVE DESCRIÇÃO DOS DESENHOS

[0049] A figura 1 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de codificação de imagem no qual a presente tecnologia é aplicada.

[0050] A figura 2 é uma vista que ilustra um exemplo de relacionamento de correspondência entre um parâmetro de quantização para um sinal de luminância e um parâmetro de quantização para um sinal de crominância.

[0051] A figura 3 é uma vista que ilustra um exemplo de um macrobloco.

[0052] A figura 4 é uma vista que ilustra um outro exemplo do macrobloco.

[0053] A figura 5 é um diagrama de blocos que ilustra um exemplo de configuração detalhada de uma unidade de quantização.

[0054] A figura 6 é uma vista que ilustra um exemplo de uma imagem em uma unidade de macrobloco.

[0055] A figura 7 é um fluxograma que ilustra um exemplo de um fluxo de um processo de codificação.

[0056] A figura 8 é um fluxograma que ilustra um exemplo de um fluxo de um processo de cálculo do parâmetro de quantização.

[0057] A figura 9 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de decodificação de imagem no qual a presente tecnologia é aplicada.

[0058] A figura 10 é um diagrama de blocos que ilustra um exemplo de configuração detalhada de uma unidade de quantização inversa.

[0059] A figura 11 é um fluxograma que ilustra um exemplo de um fluxo de um processo de decodificação.

[0060] A figura 12 é um fluxograma que ilustra um exemplo de um fluxo de um processo de quantização inversa.

[0061] A figura 13 é um fluxograma que ilustra um outro exemplo do fluxo do processo de cálculo do parâmetro de quantização.

[0062] A figura 14 é um fluxograma que ilustra um outro exemplo do fluxo do processo de quantização inversa.

[0063] A figura 15 é uma vista que ilustra um exemplo de configuração de uma unidade de codificação.

[0064] A figura 16 é uma vista que ilustra um exemplo do parâmetro de quantização atribuído a cada unidade de codificação.

[0065] A figura 17 é uma vista que ilustra um exemplo de sintaxe.

[0066] A figura 18 é um diagrama de blocos que ilustra um outro exemplo de configuração do aparelho de codificação de imagem no qual a presente tecnologia é aplicada.

[0067] A figura 19 é um diagrama de blocos que ilustra um exemplo de configuração detalhada de uma unidade de quantização da unidade de codificação e de um controlador de taxa.

[0068] A figura 20 é um fluxograma que ilustra um ainda outro exemplo do fluxo do processo de cálculo do parâmetro de quantização.

[0069] A figura 21 é um diagrama de blocos que ilustra um outro exemplo de configuração do aparelho de decodificação de imagem no qual a presente tecnologia é aplicada.

[0070] A figura 22 é um diagrama de blocos que ilustra um exemplo de configuração detalhada de uma unidade de quantização inversa da unidade de codificação.

[0071] A figura 23 é um fluxograma que ilustra um ainda outro exemplo do fluxo do processo de quantização inversa.

[0072] A figura 24 é uma vista que compara características de métodos de cálculo de um parâmetro de quantização dQP.

[0073] A figura 25 é uma vista que ilustra um exemplo do parâmetro de quantização atribuído a cada unidade de codificação.

[0074] A figura 26 é uma vista que ilustra um exemplo da sintaxe de um cabeçalho de fatia.

[0075] A figura 27 é uma vista que ilustra um exemplo de um método de cálculo da atividade.

[0076] A figura 28 é uma vista que ilustra um relacionamento entre o parâmetro de quantização e uma escala de quantização.

[0077] A figura 29 é um diagrama de blocos que ilustra um ainda outro exemplo de configuração do aparelho de codificação de imagem no qual a presente tecnologia é aplicada.

[0078] A figura 30 é um diagrama de blocos que ilustra um exemplo de configuração detalhada da unidade de quantização da unidade de codificação, da unidade de quantização e do controlador de taxa.

[0079] A figura 31 é um fluxograma que ilustra um outro exemplo do fluxo do processo de codificação.

[0080] A figura 32 é um fluxograma que ilustra um exemplo de um fluxo de um processo de quantização.

[0081] A figura 33 é uma vista que ilustra um exemplo de um sistema de codificação de imagem multivisualizações.

[0082] A figura 34 é uma vista que ilustra um exemplo de configuração principal do aparelho de codificação de imagem multivisualizações no qual a presente tecnologia é aplicada.

[0083] A figura 35 é uma vista que ilustra um exemplo de configuração principal de um aparelho de decodificação de imagem multivisualizações no qual a presente tecnologia é aplicada.

[0084] A figura 36 é uma vista que ilustra um exemplo de um sistema de codificação de imagem hierárquica.

[0085] A figura 37 é uma vista que ilustra um exemplo de configuração principal de um aparelho de codificação de imagem hierárquica no qual a presente tecnologia é aplicada.

[0086] A figura 38 é uma vista que ilustra um exemplo de configuração principal de um aparelho de decodificação de imagem hierárquica no qual a presente tecnologia é aplicada.

[0087] A figura 39 é um diagrama de blocos que ilustra um exemplo de configuração principal de um computador no qual a presente tecnologia é aplicada.

[0088] A figura 40 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de televisão no qual a presente tecnologia é aplicada.

[0089] A figura 41 é um diagrama de blocos que ilustra um exemplo de configuração principal de um terminal móvel no qual a presente tecnologia é aplicada.

[0090] A figura 42 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de gravação / reprodução no qual a presente tecnologia é aplicada.

[0091] A figura 43 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de formação de imagem no qual a presente tecnologia é aplicada. MODO PARA REALIZAR A INVENÇÃO

[0092] Modos para realizar a presente tecnologia (a seguir, referidos como modalidades) são descritos a seguir. Note que a descrição é dada na seguinte ordem. 1. Primeira Modalidade (Aparelho de Codificação de Imagem) 2. Segunda Modalidade (Aparelho de Decodificação de Imagem) 3. Terceira Modalidade (Aparelho de Codificação de Imagem / Aparelho de Decodificação de Imagem) 4. Quarta Modalidade (Aparelho de Codificação de Imagem / Aparelho de Decodificação de Imagem) 5. Quinta Modalidade (Aparelho de Codificação de Imagem) 6. Sexta Modalidade (Codificação de Imagem Multivisualizações / Aparelhos de Decodificação de Imagem Multivisualizações) 7. Sétima Modalidade (Codificação De imagem hierárquica / Aparelhos de Decodificação De imagem hierárquica) 8. Oitava Modalidade (Aplicação) <1. Primeira Modalidade> [Aparelho de Codificação de Imagem]

[0093] A figura 1 ilustra uma configuração de uma modalidade de um aparelho de codificação de imagem como um aparelho de processamento de imagem no qual a presente tecnologia é aplicada.

[0094] Um aparelho de codificação de imagem 100 ilustrado na figura 1 é um aparelho de codificação, que codifica uma imagem de uma maneira similar ao sistema H.264/MPEG (Grupo de Especialistas em Imagem em Movimento)-4 Parte 10 (AVC (Codificação Avançada de Vídeo)) (a seguir, referido como H.264/AVC), por exemplo. Entretanto, o aparelho de codificação de imagem 100 especifica um parâmetro de quantização para cada submacrobloco.

[0095] Um macrobloco é uma área parcial da imagem, que é uma unidade de processo quando a imagem for codificada. O submacrobloco é uma pequena área obtida pela divisão do macrobloco em uma pluralidade de partes.

[0096] Em um exemplo da figura 1, o aparelho de codificação de imagem 100 inclui um conversor A/D (Analógico / Digital) 101, um armazenamento temporário de reordenamento de tela 102, uma unidade aritmética 103, uma unidade de transformada ortogonal 104, uma unidade de quantização 105, uma unidade de codificação sem perdas 106 e um armazenamento temporário de acúmulo 107. O aparelho de codificação de imagem 100 também inclui uma unidade de quantização inversa 108, uma unidade de transformada ortogonal inversa 109, uma unidade aritmética 110, um filtro de desbloqueio 111, uma memória de quadro 112, um seletor 113, uma unidade de intraprevisão 114, uma unidade de previsão / compensação de movimento 115, um seletor 116 e um controlador de taxa 117.

[0097] O aparelho de codificação de imagem 100 inclui adicionalmente uma unidade de quantização de submacrobloco 121 e uma unidade de quantização inversa do submacrobloco 122.

[0098] O conversor A/D 101 realiza conversão A/D dos dados da imagem de entrada e transmite os mesmos ao armazenamento temporário de reordenamento de tela 102 para armazenamento.

[0099] O armazenamento temporário de reordenamento de tela 102 reordena a imagem armazenada com quadros na ordem de exibição na ordem dos quadros para codificação de acordo com uma estrutura de GOP (Grupo de Figura). O armazenamento temporário de reordenamento de tela 102 supre a imagem, na qual a ordem dos quadros foi reordenada, à unidade aritmética 103. O armazenamento temporário de reordenamento de tela 102 também supre a imagem, na qual a ordem dos quadros foi reordenada, à unidade de intraprevisão 114 e à unidade de previsão / compensação de movimento 115.

[00100] A unidade aritmética 103 subtrai uma imagem prevista suprida a partir da unidade de intraprevisão 114 ou da unidade de previsão / compensação de movimento 115 através do seletor 116 da imagem lida a partir do armazenamento temporário de reordenamento de tela 102 e transmite informação de diferença à unidade de transformada ortogonal 104.

[00101] Por exemplo, em um caso da imagem na qual intracodificação é realizada, a unidade aritmética 103 subtrai, da imagem lida a partir do armazenamento temporário de reordenamento de tela 102, a imagem prevista suprida a partir da unidade de intraprevisão 114. Também, em um caso da imagem na qual intercodificação é realizada, por exemplo, a unidade aritmética 103 subtrai, da imagem lida a partir do armazenamento temporário de reordenamento de tela 102, a imagem prevista suprida a partir da unidade de previsão / compensação de movimento 115.

[00102] A unidade de transformada ortogonal 104 realiza uma transformada ortogonal, tais como uma transformada discreta de cosseno e uma transformada Karhunen-Loève, na informação de diferença suprida a partir da unidade aritmética 103 e supre um coeficiente de transformada à unidade de quantização 105.

[00103] A unidade de quantização 105 quantiza o coeficiente de transformada transmitido a partir da unidade de transformada ortogonal 104. A unidade de quantização 105 define o parâmetro de quantização para cada submacrobloco, que é uma área menor que o macrobloco, em cooperação com a unidade de quantização de submacrobloco 121 com base na informação suprida a partir do controlador de taxa 117 e realiza quantização. A unidade de quantização 105 supre o coeficiente de transformada quantizado à unidade de codificação sem perdas 106.

[00104] A unidade de codificação sem perdas 106 realiza codificação sem perdas, tais como codificação com comprimento variável e codificação aritmética, no coeficiente de transformada quantizado.

[00105] A unidade de codificação sem perdas 106 obtém informação que indica intraprevisão e congêneres a partir da unidade de intraprevisão 114 e obtém informação que indica um modo de interprevisão, informação do vetor de movimento e congêneres a partir da unidade de previsão / compensação de movimento 115. Neste ínterim, a informação que indica a intraprevisão (intraprevisão) também é referida a seguir como informação do modo de intraprevisão. Também, informação que indica um modo de informação que indica interprevisão (interprevisão) também é referida a seguir como informação do modo de interprevisão.

[00106] A unidade de codificação sem perdas 106 codifica o coeficiente de transformada quantizado e torna várias partes de informação, tais como um coeficiente de filtro, a informação do modo de intraprevisão, a informação do modo de interprevisão e o parâmetro de quantização, uma parte da informação do cabeçalho dos dados codificados (multiplexa). A unidade de codificação sem perdas 106 supre os dados codificados obtidos pela codificação ao armazenamento temporário de acúmulo 107 para acúmulo.

[00107] Por exemplo, a unidade de codificação sem perdas 106 realiza um processo de codificação sem perdas, tais como a codificação com comprimento variável ou a codificação aritmética. A codificação com comprimento variável inclui CAVLC (Codificação de Comprimento Variável Adaptável ao Contexto) definida pelo sistema H.264/AVC e congêneres. A codificação aritmética inclui CABAC (Codificação Aritmética Binária Adaptável ao Contexto) e congêneres.

[00108] O armazenamento temporário de acúmulo 107 mantém temporariamente os dados codificados supridos a partir da unidade de codificação sem perdas 106 e transmite os mesmos como uma imagem codificada, codificada pelo sistema H.264/AVC, aos subsequentes aparelho de gravação e canal de transmissão são ilustrados, por exemplo, em um sincronismo pré-determinado.

[00109] O coeficiente de transformada quantizado pela unidade de quantização 105 também é suprido à unidade de quantização inversa 108. A unidade de quantização inversa 108 quantiza inversamente o coeficiente de transformada quantizado por um método correspondente à quantização pela unidade de quantização 105. A unidade de quantização inversa 108 realiza quantização inversa pelo uso do parâmetro de quantização para cada submacrobloco definido pela unidade de quantização 105 em cooperação com a unidade de quantização inversa do submacrobloco 122. A unidade de quantização inversa 108 supre um coeficiente de transformada obtido à unidade de transformada ortogonal inversa 109.

[00110] A unidade de transformada ortogonal inversa 109 realiza transformada ortogonal inversa do coeficiente de transformada suprido usando um método correspondente a um processo de transformada ortogonal pela unidade de transformada ortogonal 104. Uma saída obtida por transformada ortogonal inversa (informação de diferença restaurada) é suprida à unidade aritmética 110.

[00111] A unidade aritmética 110 adiciona a imagem prevista suprida a partir da unidade de intraprevisão 114 ou da unidade de previsão / compensação de movimento 115 através do seletor 116 a um resultado da transformada ortogonal inversa, isto é, a informação de diferença restaurada suprida a partir da unidade de transformada ortogonal inversa 109 para obter uma imagem localmente decodificada (imagem decodificada).

[00112] Por exemplo, quando a informação de diferença corresponder à imagem na qual a intracodificação é realizada, a unidade aritmética 110 adiciona a imagem prevista suprida a partir da unidade de intraprevisão 114 na informação de diferença. Também, por exemplo, quando a informação de diferença corresponder à imagem na qual a intercodificação é realizada, a unidade aritmética 110 adiciona a imagem prevista suprida a partir da unidade de previsão / compensação de movimento 115 na informação de diferença.

[00113] Um resultado da adição é suprido ao filtro de desbloqueio 111 ou à memória de quadro 112.

[00114] O filtro de desbloqueio 111 remove distorção de bloco da imagem decodificada pela apropriada realização de um processo de filtro de desbloqueio e aumenta a qualidade da imagem pela apropriada realização de um processo de filtro em laço pelo uso de um filtro Wiener, por exemplo. O filtro de desbloqueio 111 classifica cada pixel e realiza um processo de filtro apropriado para cada classe. O filtro de desbloqueio 111 supre um resultado do processo de filtro à memória de quadro 112.

[00115] A memória de quadro 112 transmite uma imagem de referência acumulada à unidade de intraprevisão 114 ou à unidade de previsão / compensação de movimento 115 através do seletor 113 em um sincronismo pré-determinado.

[00116] Por exemplo, no caso da imagem na qual a intracodificação é realizada, a memória de quadro 112 supre a imagem de referência à unidade de intraprevisão 114 através do seletor 113. Também, por exemplo, quando a intercodificação for realizada, a memória de quadro 112 supre a imagem de referência à unidade de previsão / compensação de movimento 115 através do seletor 113.

[00117] Quando a imagem de referência suprida a partir da memória de quadro 112 para a imagem na qual a intracodificação é realizada, o seletor 113 supre a imagem de referência à unidade de intraprevisão 114. Também, quando a imagem de referência suprida a partir da memória de quadro 112 para a imagem na qual a intercodificação é realizada, o seletor 113 supre a imagem de referência à unidade de previsão / compensação de movimento 115.

[00118] A unidade de intraprevisão 114 realiza a intraprevisão (intraprevisão) para gerar a imagem prevista pelo uso de um valor de pixel em uma tela. A unidade de intraprevisão 114 realiza a intraprevisão em uma pluralidade de modos (modos de intraprevisão).

[00119] A unidade de intraprevisão 114 gera a imagem prevista em todos os modos de intraprevisão e avalia cada imagem prevista para selecionar um modo ideal. Mediante seleção do modo de intraprevisão ideal, a unidade de intraprevisão 114 supre a imagem prevista gerada no modo ideal à unidade aritmética 103 e à unidade aritmética 110 através do seletor 116.

[00120] Também, como exposto, a unidade de intraprevisão 114 supre apropriadamente, à unidade de codificação sem perdas 106, a informação, tal como a informação do modo de intraprevisão, que indica um modo de intraprevisão adotado.

[00121] A unidade de previsão / compensação de movimento 115 realiza previsão de movimento pelo uso da imagem de entrada suprida a partir do armazenamento temporário de reordenamento de tela 102 e da imagem de referência suprida a partir da memória de quadro 112 através do seletor 113, realiza um processo de compensação de movimento de acordo com um vetor de movimento detectado e gera a imagem prevista (informação de imagem de interprevisão) para a imagem na qual a intercodificação é realizada.

[00122] A unidade de previsão / compensação de movimento 115 realiza um processo de interprevisão em todos os modos de interprevisão candidatos para gerar a imagem prevista. A unidade de previsão / compensação de movimento 115 supre a imagem prevista gerada à unidade aritmética 103 e à unidade aritmética 110 através do seletor 116.

[00123] Também, a unidade de previsão / compensação de movimento 115 supre a informação do modo de interprevisão que indica um modo de interprevisão adotado e informação do vetor de movimento que indica um vetor de movimento calculado à unidade de codificação sem perdas 106.

[00124] No caso da imagem na qual a intracodificação é realizada, o seletor 116 supre uma saída da unidade de intraprevisão 114 à unidade aritmética 103 e à unidade aritmética 110 e, no caso da imagem na qual a intercodificação é realizada, o seletor 116 supre uma saída da unidade de previsão / compensação de movimento 115 à unidade aritmética 103 e à unidade aritmética 110.

[00125] O controlador de taxa 117 controla uma taxa de operação de quantização da unidade de quantização 105 de maneira tal que sobrefluxo ou subfluxo não ocorram com base em uma imagem comprimida acumulada no armazenamento temporário de acúmulo 107. O controlador de taxa 117 supre informação que indica a complexidade da imagem à unidade de quantização 105 para cada submacrobloco, que é a pequena área obtida pela divisão do macrobloco em uma pluralidade de partes.

[00126] Por exemplo, o controlador de taxa 117 provê atividade, que é informação que indica dispersão dos valores de pixel, à unidade de quantização 105 como a informação que indica a complexidade da imagem. É desnecessário dizer que a informação que indica a complexidade da imagem pode ser qualquer informação.

[00127] A unidade de quantização de submacrobloco 121 obtém a informação que indica a complexidade da imagem para cada submacrobloco a partir da unidade de quantização 105, define um valor de quantização (etapa de quantização) para cada submacrobloco com base na informação e retorna o valor à unidade de quantização 105.

[00128] A unidade de quantização inversa do submacrobloco 122 obtém o parâmetro de quantização a partir da unidade de quantização inversa 108, obtém o valor de quantização para cada submacrobloco pelo uso do valor do parâmetro e retorna o mesmo à unidade de quantização inversa 108. [Quantização de AVC]

[00129] Aqui, a quantização definida pela AVC (Codificação Avançada de Vídeo) é descrita como um exemplo de um processo de quantização convencional.

[00130] Embora uma matriz de transformada integral [H] definida pela AVC não satisfaça uma exigência de uma matriz de transformada ortogonal representada pela seguinte Equação (1), o processo de transformada ortogonal é realizado pela realização de diferentes processos de quantização em respectivos componentes depois da transformada integral e pela combinação da transformada integral e da quantização. [H][H]T = [I] ,„(1)

[00131] Na AVC, é possível definir um parâmetro de quantização QP, que pode ter valores de “0” a “51”, para cada macrobloco a fim de realizar a quantização.

[00132] Por exemplo, suponha que A(QP) e B(QP) tenham valores, que satisfazem uma seguinte equação (2), independente do valor de QP. A(QP) * B(QP) = 2m + n . .(2)

[00133] A transformada ortogonal e a transformada ortogonal inversa na AVC podem ser realizadas pela operação representada pelas seguintes Equações (3) e (4). d = c * A(QP) / 2m ..(3) c' = d * B(QP) / 2n ...(4)

[00134] Neste particular, c representa um coeficiente de transformada ortogonal antes da quantização, d representa o coeficiente de transformada ortogonal depois da quantização e c' representa o coeficiente de transformada ortogonal depois da quantização inversa.

[00135] Pela realização de um processo como este, é possível realizar os processos de quantização e quantização inversa não por divisão, mas somente pela operação de deslocamento na AVC.

[00136] Neste particular, valores de A e B diferem, dependendo de componentes.

[00137] O parâmetro de quantização QP é desenhado de maneira tal que o processo de quantização duas vezes mais grosseiro que o original seja realizado quando o valor deste incrementar em 6, tal como de 6 para 12, por exemplo.

[00138] Especialmente, deterioração em um sinal de crominância é facilmente perceptível em uma taxa de bit inferior, isto é, com um QP superior. Portanto, um parâmetro de quantização padrão QPC para o sinal de crominância é definido em relação a um parâmetro de quantização QPY para um sinal de luminância, da forma indicada em uma tabela da figura 2.

[00139] Um usuário pode controlar este relacionamento pela definição de informação sobre ChromaQPOffset incluído na informação de imagem comprimida.

[00140] Também, em um perfil não inferior a um Perfil Alto, é possível definir independentemente o parâmetro de quantização para um componente Cb/Cr pelo uso de ChromaQPOffset e 2ndChromaQPOffset. [Cálculo do Parâmetro de Quantização]

[00141] No sistema de codificação AVC e nos sistemas de codificação divulgados nos Documentos Não Patente 1 e 2, um parâmetro de quantização MB_QP para cada macrobloco é calculado da seguinte maneira.

[00142] Isto é, QpBdOffsetY é calculado, primeiro, a partir de bit_depth_luma_minus8 em um parâmetro de sequência definido da forma representada pela seguinte Equação (5). QpBdOffsetY = 6 * bit_depth_luma_minus8 .. .(5)

[00143] A seguir, um valor inicial do parâmetro de quantização em cada figura é especificado por pic_init_qp_minus26 em um conjunto de parâmetro de figura.

[00144] A seguir, por slice_qp_delta definido em uma camada da fatia, um parâmetro de quantização SliceQPY na fatia é calculado da forma representada pela seguinte Equação (6). SliceQPY = 26 + pic_init_qp_minus26 + slice_qp_delta —(6)

[00145] Finalmente, pelo uso de MB_QP_delta em uma camada do macrobloco, o parâmetro de quantização MB_QP para cada macrobloco é calculado da forma representada pela seguinte Equação (7). MB_QP = ((MB_QPPrev + mb_qp_delta + 52 + 2 * QpBdOffsetY) % (52 + QpBdOffsetY)) - QpBdOffsetY —(7) 1. Aqui, MB_QPPrev representa o parâmetro de quantização para um macrobloco prévio.

[00146] Na presente tecnologia, além disto, informação sobre submp_qp_delta é adicionalmente incluída em uma camada do submacrobloco na compressão de imagem.

[00147] Pelo uso desta informação, o parâmetro de quantização SubMB_QP para cada submacrobloco é calculado da forma representada pela seguinte Equação (8). SubMB_QP = Clip(0,51,MB_QP + submp_qp_delta) ...(8)

[00148] Aqui, Clip(min,max,value) representa uma função com um valor de retorno representado pela seguinte Equação (9). [Equação 1] min, se (value < min) Clip(min, max, value) = max, se(value>max) Value, θm outras circunstâncias

[00149] Isto é, o parâmetro de quantização SubMB_QP para cada submacrobloco é calculado da forma representada pela seguinte Equação (10). Aqui, um parâmetro de quantização mínimo definido antecipadamente é minQP e um parâmetro de quantização máximo definido antecipadamente é maxQP. [Equação 2] SUBMB_QP = Clip(minQP, maxQP, MB_QP + submb_qp_delta)

[00150] Neste particular, quando não houver submp_qp_delta na informação de imagem comprimida, um valor deste é definido em “0”, e o parâmetro de quantização para o macrobloco também é aplicado no submacrobloco. [Unidade de Quantização]

[00151] A figura 5 é um diagrama de blocos que ilustra um exemplo de configuração detalhada da unidade de quantização 105 da figura 1. Da forma ilustrada na figura 5, a unidade de quantização 105 inclui um armazenamento temporário da atividade do submacrobloco 151, uma unidade de cálculo do parâmetro de quantização 152 e um processador de quantização 153.

[00152] O armazenamento temporário da atividade do submacrobloco 151 mantém a atividade suprida a partir do controlador de taxa 117. Embora quantização adaptativa com base na atividade, da forma definida em um Modelo de Teste MPEG-2, seja realizada no sistema de codificação AVC, o controlador de taxa 117 calcula a atividade (também referida como atividade do submacrobloco) para cada submacrobloco. Um método de cálculo da atividade do submacrobloco é similar àquele em um caso convencional em que a atividade é calculada para cada macrobloco.

[00153] O armazenamento temporário da atividade do submacrobloco 151 mantém a atividade do submacrobloco suprida a partir do controlador de taxa 117 e supre a atividade do submacrobloco mantida à unidade de quantização de submacrobloco 121 para cada quantidade pré-determinada (por exemplo, uma quantidade de uma tela).

[00154] A unidade de quantização de submacrobloco 121 calcula o valor de quantização para cada submacrobloco pelo uso da atividade do submacrobloco suprida a partir do armazenamento temporário da atividade do submacrobloco 151. O valor de quantização para cada submacrobloco pode ser calculado por um método similar àquele em um caso em que o valor de quantização para cada macrobloco é calculado a partir da atividade para cada macrobloco.

[00155] Depois de obter o valor de quantização para cada submacrobloco, a unidade de quantização de submacrobloco 121 supre o valor de quantização para cada submacrobloco à unidade de cálculo do parâmetro de quantização 152.

[00156] A unidade de cálculo do parâmetro de quantização 152 calcula vários parâmetros de quantização pelo uso do valor de quantização para cada submacrobloco suprido a partir da unidade de quantização de submacrobloco 121.

[00157] Por exemplo, a unidade de cálculo do parâmetro de quantização 152 calcula os parâmetros de quantização, tais como pic_init_qp_minus26, slice_qp_delta e mb_qp_delta. A unidade de cálculo do parâmetro de quantização 152 pode obter o valor de quantização para cada macrobloco a partir do valor de quantização para cada submacrobloco. Portanto, a unidade de cálculo do parâmetro de quantização 152 calcula os vários parâmetros de quantização para definição, como em um caso do sistema de codificação AVC convencional.

[00158] A unidade de cálculo do parâmetro de quantização 152 obtém adicionalmente o parâmetro de quantização submp_qp_delta que indica a diferença entre o parâmetro de quantização MB_QP para cada macrobloco e o parâmetro de quantização SubMB_QP para cada submacrobloco. Exige-se transmitir o parâmetro de quantização para cada submacrobloco a um lado de decodificação. Torna-se possível diminuir uma quantidade de código do parâmetro de quantização para cada submacrobloco pela obtenção de um valor da diferença desta maneira. Aparentemente, o parâmetro de quantização submp_qp_delta é um formato de transmissão do parâmetro de quantização SubMB_QP. O parâmetro de quantização SubMB_QP para cada submacrobloco pode ser obtido pela transformação do valor de quantização para cada submacrobloco. Similarmente, o parâmetro de quantização MB_QP para cada macrobloco é obtido pela transformação do valor de quantização para cada macrobloco. A unidade de cálculo do parâmetro de quantização 152 calcula submp_qp_delta para cada submacrobloco pelo uso da supradescrita Equação (35), por exemplo.

[00159] A unidade de cálculo do parâmetro de quantização 152 supre o valor de quantização para cada submacrobloco ao processador de quantização 153. Também, a unidade de cálculo do parâmetro de quantização 152 supre vários parâmetros de quantização calculados (especificamente, pic_init_qp_minus26, slice_qp_delta, MB_QP_delta e congêneres) à unidade de codificação sem perdas 106, e transmite os mesmos juntamente com um fluxo codificado obtido pela codificação da imagem. Neste particular, como exposto, quando o valor de submp_qp_delta for “0”, transmissão de submp_qp_delta é omitida. Isto é, neste caso, o parâmetro de quantização diferente de submp_qp_delta é suprido à unidade de codificação sem perdas 106.

[00160] Adicionalmente, a unidade de cálculo do parâmetro de quantização 152 também supre o valor de quantização para cada submacrobloco à unidade de quantização inversa 108.

[00161] O processador de quantização 153 quantiza o coeficiente de transformada ortogonal suprido a partir da unidade de transformada ortogonal 104 pelo uso do valor de quantização para cada submacrobloco.

[00162] O processador de quantização 153 supre um coeficiente de transformada ortogonal quantizado à unidade de codificação sem perdas 106 e à unidade de quantização inversa 108.

[00163] Neste particular, a unidade de quantização inversa 108 quantiza inversamente o coeficiente de transformada ortogonal quantizado pela supradescrita unidade de quantização 105 pelo uso da unidade de quantização inversa do submacrobloco 122. Em um aparelho de decodificação de imagem correspondente ao aparelho de codificação de imagem 100, também, um processo similar ao processo de quantização inversa é realizado, de forma que a quantização inversa será descrita com detalhes quando o aparelho de decodificação de imagem for descrito.

[00164] No caso convencional, tal como o sistema de codificação AVC, somente um parâmetro de quantização pode ser definido para um macrobloco. Portanto, em um caso em que uma área plana e uma área que inclui textura são misturadas em um macrobloco, é difícil definir o parâmetro de quantização apropriado para ambas as áreas.

[00165] Especialmente, quanto maior o tamanho do macrobloco como um macrobloco ampliado (área parcial ampliada) proposto no Documento Não Patente 2 e congêneres, mais alta a possibilidade de que as imagens com diferentes características sejam misturadas na área, de forma que fique mais difícil realizar a quantização adaptativa correspondente às características de cada área.

[00166] Por outro lado, o aparelho de codificação de imagem 100 pode calcular um índice que indica a complexidade da imagem para cada submacrobloco pelo controlador de taxa 117 e calcula o valor de quantização para cada submacrobloco pela unidade de quantização de submacrobloco 121. Isto é, o processador de quantização 153 pode realizar o processo de quantização pelo uso do valor de quantização apropriado para cada submacrobloco.

[00167] De acordo com isto, o aparelho de codificação de imagem 100 pode realizar o processo de quantização mais adequado para conteúdos da imagem. Especialmente, também, em um caso em que o tamanho do macrobloco for ampliado e tanto a área plana quanto a área que inclui a textura forem incluídas em um único macrobloco, o aparelho de codificação de imagem 100 pode realizar um processo de quantização adaptativo adequado para cada área para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00168] Por exemplo, em uma imagem 160 ilustrada na figura 6, um macrobloco 161 inclui somente a área plana. Portanto, mesmo quando o aparelho de codificação de imagem 100 realizar o processo de quantização pelo uso de um único parâmetro de quantização para tal macrobloco 161, não há problema em particular na qualidade da imagem.

[00169] Por outro lado, um macrobloco 162 inclui tanto a área plana quanto uma área com textura. No processo de quantização pelo uso do único parâmetro de quantização, não é possível realizar a quantização adaptativa apropriada tanto para a área plana quanto para a área com textura. Portanto, se o aparelho de codificação de imagem 100 realizar o processo de quantização pelo uso do único parâmetro de quantização para tal macrobloco 161, a qualidade da imagem subjetiva da imagem decodificada pode ser deteriorada.

[00170] Em um caso como este, também, o aparelho de codificação de imagem 100 pode calcular o valor de quantização para cada submacrobloco, como exposto, de forma que seja possível realizar um processo de quantização mais apropriado para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00171] Também, quando for provável que uma quantidade de código total para cada figura ocasione sobrefluxo no armazenamento temporário de acúmulo 107, controle pelo parâmetro de quantização é realizado. Portanto, neste momento, pela permissão que a unidade de quantização 105 calcule o valor de quantização para cada submacrobloco e realize a quantização, como exposto, o aparelho de codificação de imagem 100 pode controlar a medição em relação ao sobrefluxo em uma unidade menor.

[00172] Adicionalmente, quando o valor de submp_qp_delta for “0”, transmissão de submp_qp_delta é omitida, de forma que seja possível inibir redução desnecessária na eficiência de codificação. Quando o valor de submp_qp_delta for “0”, o parâmetro de quantização SubMB_QP para cada submacrobloco e o parâmetro de quantização MB_QP para cada macrobloco são iguais um ao outro. Portanto, é possível tornar o parâmetro de quantização MB_QP para cada macrobloco o parâmetro de quantização SubMB_QP para cada submacrobloco no lado de decodificação, de forma que o valor de submp_qp_delta (“0”) não seja exigido. Portanto, é possível omitir a transmissão de submp_qp_delta, como exposto. É desnecessário dizer que submp_qp_delta com o valor de “0” pode ser transmitido; entretanto, é possível aumentar a eficiência de codificação pela omissão da transmissão de submp_qp_delta. [Fluxo do Processo de Codificação]

[00173] A seguir, um fluxo de cada processo executado pelo supradescrito aparelho de codificação de imagem 100 é descrito. Primeiro, um exemplo de um fluxo de um processo de codificação é descrito em relação a um fluxograma da figura 7.

[00174] Na etapa S101, o conversor A/D 101 realiza conversão A/D da imagem de entrada. Na etapa S102, o armazenamento temporário de reordenamento de tela 102 armazena a imagem que passou por conversão A/D e reordena figuras na ordem de exibição na ordem para codificação.

[00175] Na etapa S103, a unidade aritmética 103 calcula a diferença entre a imagem reordenada pelo processo da etapa S102 e a imagem prevista. A imagem prevista é suprida à unidade aritmética 103 através do seletor 116 da unidade de previsão / compensação de movimento 115 em um caso do interprevisão e da unidade de intraprevisão 114 em um caso do intraprevisão, respectivamente.

[00176] Uma quantidade de dados dos dados da diferença é menor que aquela dos dados da imagem originais. Portanto, é possível comprimir a quantidade de dados, se comparado com um caso em que a imagem é diretamente codificada.

[00177] Na etapa S104, a unidade de transformada ortogonal 104 transforma ortogonalmente a informação de diferença gerada pelo processo da etapa S103. Especificamente, a transformada ortogonal, tais como a transformada discreta de cosseno e a transformada Karhunen-Loève, é realizada e o coeficiente de transformada é transmitido.

[00178] Na etapa S105, a unidade de quantização 105 e a unidade de quantização de submacrobloco 121 obtêm o parâmetro de quantização. Um fluxo de um processo de cálculo do parâmetro de quantização é descrito com detalhes a seguir.

[00179] Na etapa S106, o processador de quantização 153 da unidade de quantização 105 quantiza o coeficiente de transformada ortogonal obtido pelo processo da etapa S104 pelo uso do valor de quantização para cada submacrobloco calculado pelo processo da etapa S105.

[00180] A informação de diferença quantizada pelo processo da etapa S106 é localmente decodificada da seguinte maneira. Isto é, na etapa S107, a unidade de quantização inversa 108 quantiza inversamente o coeficiente de transformada ortogonal quantizado (também referido como um coeficiente quantizado) gerado pelo processo da etapa S106 pelas características correspondentes às características da unidade de quantização 105. Na etapa S108, a unidade de transformada ortogonal inversa 109 realiza transformada ortogonal inversa do coeficiente de transformada ortogonal obtido pelo processo da etapa S107 pelas características correspondentes às características da unidade de transformada ortogonal 104.

[00181] Na etapa S109, a unidade aritmética 110 adiciona a imagem prevista na informação de diferença localmente decodificada para gerar a imagem localmente decodificada (imagem correspondente a uma entrada na unidade aritmética 103). Na etapa S110, o filtro de desbloqueio 111 filtra a imagem gerada pelo processo da etapa S109. De acordo com isto, a distorção de bloco é removida.

[00182] Na etapa S111, a memória de quadro 112 armazena a imagem da qual a distorção de bloco foi removida pelo processo da etapa S110. Neste particular, a imagem, que não é sujeita ao processo de filtro pelo filtro de desbloqueio 111, também é suprida da unidade aritmética 110 à memória de quadro 112 para ser armazenada.

[00183] Na etapa S112, a unidade de intraprevisão 114 realiza um processo de intraprevisão no modo de intraprevisão. Na etapa S113, a unidade de previsão / compensação de movimento 115 realiza um processo de interprevisão de movimento no qual previsão de movimento e compensação de movimento no modo de interprevisão são realizados.

[00184] Na etapa S114, o seletor 116 determina um modo de previsão ideal com base em cada valor da função de custo transmitido a partir da unidade de intraprevisão 114 e da unidade de previsão / compensação de movimento 115. Isto é, o seletor 116 seleciona a imagem prevista gerada pela unidade de intraprevisão 114 ou a imagem prevista gerada pela unidade de previsão / compensação de movimento 115.

[00185] Também, informação de seleção que indica a imagem prevista selecionada é suprida à unidade de intraprevisão 114 ou à unidade de previsão / compensação de movimento 115 cuja imagem prevista é selecionada. Quando a imagem prevista no modo de intraprevisão ideal for selecionada, a unidade de intraprevisão 114 supre informação que indica o modo de intraprevisão ideal (isto é, a informação do modo de intraprevisão) à unidade de codificação sem perdas 106.

[00186] Quando a imagem prevista de um modo de interprevisão ideal for selecionada, a unidade de previsão / compensação de movimento 115 transmite informação que indica o modo de interprevisão ideal e informação correspondente ao modo de interprevisão ideal, conforme necessário, à unidade de codificação sem perdas 106. A informação correspondente ao modo de interprevisão ideal inclui a informação do vetor de movimento, informação de indicador, informação do quadro de referência e congêneres.

[00187] Na etapa S115, a unidade de codificação sem perdas 106 codifica o coeficiente de transformada quantizado pelo processo da etapa S106. Isto é, a codificação sem perdas, tais como a codificação com comprimento variável e a codificação aritmética, é realizada em uma imagem da diferença (imagem da diferença secundária em um caso de interprevisão).

[00188] Neste particular, a unidade de codificação sem perdas 106 codifica o parâmetro de quantização calculado na etapa S105 para adicionar nos dados codificados.

[00189] Também, a unidade de codificação sem perdas 106 codifica a informação sobre o modo de previsão da imagem prevista selecionada pelo processo da etapa S114 para adicionar nos dados codificados obtidos pela codificação da imagem da diferença. Isto é, a unidade de codificação sem perdas 106 codifica a informação do modo de intraprevisão suprida a partir da unidade de intraprevisão 114 ou a informação correspondente ao modo de interprevisão ideal suprida a partir da unidade de previsão / compensação de movimento 115 e congêneres para adicionar nos dados codificados.

[00190] Na etapa S116, o armazenamento temporário de acúmulo 107 acumula os dados codificados transmitidos a partir da unidade de codificação sem perdas 106. Os dados codificados acumulados no armazenamento temporário de acúmulo 107 são apropriadamente lidos para serem transmitidos ao lado de decodificação através do canal de transmissão.

[00191] Na etapa S117, o controlador de taxa 117 controla a taxa da operação de quantização da unidade de quantização 105, de maneira tal que o sobrefluxo ou o subfluxo não ocorram com base na imagem comprimida acumulada no armazenamento temporário de acúmulo 107 pelo processo da etapa S116.

[00192] Quando o processo da etapa S117 for finalizado, o processo de codificação é finalizado. [Fluxo do Processo de Cálculo do Parâmetro de Quantização]

[00193] A seguir, um exemplo do fluxo do processo de cálculo do parâmetro de quantização executado na etapa S105 da figura 7 é descrito em relação a um fluxograma da figura 8.

[00194] Quando o processo de cálculo do parâmetro de quantização for iniciado, na etapa S131, o armazenamento temporário da atividade do submacrobloco 151 obtém a atividade do submacrobloco suprida a partir do controlador de taxa 117. O armazenamento temporário da atividade do submacrobloco 151 mantém a atividade do submacrobloco obtida pela quantidade de uma tela, por exemplo.

[00195] Na etapa S132, a unidade de quantização de submacrobloco 121 obtém a atividade do submacrobloco pela quantidade de uma tela, por exemplo, a partir do armazenamento temporário da atividade do submacrobloco 151. Então, a unidade de quantização de submacrobloco 121 calcula o valor de quantização para cada submacrobloco pelo uso da atividade do submacrobloco obtida.

[00196] Na etapa S133, a unidade de cálculo do parâmetro de quantização 152 obtém o parâmetro de quantização pic_init_qp_minus26 pelo uso do valor de quantização para cada submacrobloco calculado na etapa S132.

[00197] Na etapa S134, a unidade de cálculo do parâmetro de quantização 152 obtém o parâmetro de quantização slice_qp_delta pelo uso do valor de quantização para cada submacrobloco calculado na etapa S132.

[00198] Na etapa S135, a unidade de cálculo do parâmetro de quantização 152 obtém o parâmetro de quantização MB_QP_delta pelo uso do valor de quantização para cada submacrobloco calculado na etapa S132.

[00199] Na etapa S136, a unidade de cálculo do parâmetro de quantização 152 obtém o parâmetro de quantização submp_qp_delta pelo uso do valor de quantização para cada submacrobloco calculado na etapa S132.

[00200] Depois de obter os vários parâmetros de quantização, como exposto, a unidade de quantização 105 finaliza o processo de operação do parâmetro de quantização, retorna o processo para a etapa S105 da figura 7 e permite que o processo da etapa S106 e das subsequentes etapas seja executado.

[00201] Já que o processo de codificação e o processo de cálculo do parâmetro de quantização são realizados da maneira supradescrita, o aparelho de codificação de imagem 100 pode definir o valor de quantização para cada submacrobloco e realizar o processo de quantização mais apropriado.

[00202] Também, já que o parâmetro de quantização calculado desta maneira é transmitido ao aparelho de codificação de imagem, o aparelho de codificação de imagem 100 pode permitir que o aparelho de decodificação de imagem obtenha o valor de quantização para cada submacrobloco e realize a quantização inversa pelo uso do mesmo. <2. Segunda Modalidade> [Aparelho de Decodificação de Imagem]

[00203] A figura 9 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de decodificação de imagem no qual a presente tecnologia é aplicada. Um aparelho de decodificação de imagem 200 ilustrado na figura 9 é um aparelho de decodificação correspondente a um aparelho de codificação de imagem 100.

[00204] Dados codificados, codificados pelo aparelho de codificação de imagem 100, são transmitidos ao aparelho de decodificação de imagem 200 correspondente ao aparelho de codificação de imagem 100 através de um canal de transmissão pré-determinado para ser decodificado.

[00205] Da forma ilustrada na figura 9, o aparelho de decodificação de imagem 200 inclui um armazenamento temporário de acúmulo 201, uma unidade de decodificação sem perdas 202, uma unidade de quantização inversa 203, uma unidade de transformada ortogonal inversa 204, uma unidade aritmética 205, um filtro de desbloqueio 206, um armazenamento temporário de reordenamento de tela 207 e um conversor D/A 208. O aparelho de decodificação de imagem 200 também inclui uma memória de quadro 209, um seletor 210, uma unidade de intraprevisão 211, uma unidade de previsão / compensação de movimento 212 e um seletor 213.

[00206] Adicionalmente, o aparelho de decodificação de imagem 200 inclui uma unidade de quantização inversa do submacrobloco 221.

[00207] O armazenamento temporário de acúmulo 201 acumula os dados codificados transmitidos. Os dados codificados são codificados pelo aparelho de codificação de imagem 100. A unidade de decodificação sem perdas 202 decodifica os dados codificados lidos a partir do armazenamento temporário de acúmulo 201 em um sincronismo pré-determinado por um sistema correspondente a um sistema de codificação de uma unidade de codificação sem perdas 106 da figura 1.

[00208] A unidade de quantização inversa 203 opera em cooperação com a unidade de quantização inversa do submacrobloco 221 para quantizar inversamente dados de coeficiente obtidos pela decodificação pela unidade de decodificação sem perdas 202 (coeficiente quantizado) por um sistema correspondente a um sistema de quantização de uma unidade de quantização 105 da figura 1. Isto é, a unidade de quantização inversa 203 quantiza inversamente o coeficiente quantizado por um método similar àquele de uma unidade de quantização inversa 108 da figura 1 pelo uso de um parâmetro de quantização calculado para cada submacrobloco suprido a partir do aparelho de codificação de imagem 100.

[00209] A unidade de quantização inversa 203 supre os dados de coeficiente inversamente quantizados, isto é, um coeficiente de transformada ortogonal, à unidade de transformada ortogonal inversa 204. A unidade de transformada ortogonal inversa 204 realiza transformada ortogonal inversa do coeficiente de transformada ortogonal por um sistema correspondente a um sistema de transformada ortogonal de uma unidade de transformada ortogonal 104 da figura 1 para obter dados residuais decodificados correspondentes a dados residuais antes da transformada ortogonal pelo aparelho de codificação de imagem 100.

[00210] Os dados residuais decodificados obtidos por transformada ortogonal inversa são supridos à unidade aritmética 205. Uma imagem prevista é suprida da unidade de intraprevisão 211 ou da unidade de previsão / compensação de movimento 212 através do seletor 213 à unidade aritmética 205.

[00211] A unidade aritmética 205 adiciona os dados residuais decodificados na imagem prevista para obter dados da imagem decodificados correspondentes aos dados da imagem antes da subtração da imagem prevista por uma unidade aritmética 103 do aparelho de codificação de imagem 100. A unidade aritmética 205 supre os dados da imagem decodificados ao filtro de desbloqueio 206.

[00212] O filtro de desbloqueio 206 remove distorção de bloco da imagem decodificada suprida e, posteriormente, supre a mesma ao armazenamento temporário de reordenamento de tela 207.

[00213] O armazenamento temporário de reordenamento de tela 207 reordena uma imagem. Isto é, quadros reordenados na ordem para codificação por um armazenamento temporário de reordenamento de tela 102 da figura 1 são reordenados na ordem de exibição original. O conversor D/A 208 realiza conversão D/A da imagem suprida a partir do armazenamento temporário de reordenamento de tela 207 e transmite a mesma a uma tela (não ilustrada) para exibição.

[00214] Uma saída do filtro de desbloqueio 206 é adicionalmente suprida à memória de quadro 209.

[00215] A memória de quadro 209, o seletor 210, a unidade de intraprevisão 211, a unidade de previsão / compensação de movimento 212 e o seletor 213 correspondem a uma memória de quadro 112, um seletor 113, uma unidade de intraprevisão 114, uma unidade de previsão / compensação de movimento 115 e um seletor 116 do aparelho de codificação de imagem 100, respectivamente.

[00216] O seletor 210 lê uma imagem na qual um processo de interprevisão é realizado e uma imagem de referência a partir da memória de quadro 209 para suprir as imagens à unidade de previsão / compensação de movimento 212. Também, o seletor 210 lê uma imagem usada para intraprevisão a partir da memória de quadro 209 para suprir a imagem à unidade de intraprevisão 211.

[00217] Informação que indica um modo de intraprevisão e congêneres obtida pela decodificação da informação do cabeçalho é apropriadamente suprida da unidade de decodificação sem perdas 202 à unidade de intraprevisão 211. A unidade de intraprevisão 211 gera a imagem prevista a partir da imagem de referência obtida a partir da memória de quadro 209 com base nesta informação e supre a imagem prevista gerada ao seletor 213.

[00218] A unidade de previsão / compensação de movimento 212 obtém a informação obtida pela decodificação da informação do cabeçalho (informação do modo de previsão, informação do vetor de movimento, informação do quadro de referência, um indicador, vários parâmetros e congêneres) a partir da unidade de decodificação sem perdas 202.

[00219] A unidade de previsão / compensação de movimento 212 gera a imagem prevista a partir da imagem de referência obtida a partir da memória de quadro 209 com base na informação suprida da unidade de decodificação sem perdas 202 e supre a imagem prevista gerada ao seletor 213.

[00220] O seletor 213 seleciona a imagem prevista gerada pela unidade de previsão / compensação de movimento 212 ou pela unidade de intraprevisão 211 e supre a mesma à unidade aritmética 205.

[00221] A unidade de quantização inversa do submacrobloco 221 obtém o parâmetro de quantização a partir da unidade de quantização inversa 203 e obtém um valor de quantização para cada submacrobloco pelo uso da Equação (10), e retorna o mesmo à unidade de quantização inversa 203. [Unidade de Quantização Inversa]

[00222] A figura 10 é um diagrama de blocos que ilustra um exemplo de configuração detalhada da unidade de quantização inversa 203.

[00223] Da forma ilustrada na figura 10, a unidade de quantização inversa 203 inclui um armazenamento temporário do parâmetro de quantização 251, um armazenamento temporário do coeficiente de transformada ortogonal 252 e um processador de quantização inversa 253.

[00224] O parâmetro sobre quantização em cada camada, tais como um conjunto de parâmetro de figura e um cabeçalho de fatia dos dados codificados supridos a partir do aparelho de codificação de imagem 100, é decodificado pela unidade de decodificação sem perdas 202 para ser suprido ao armazenamento temporário do parâmetro de quantização 251. O armazenamento temporário do parâmetro de quantização 251 mantém apropriadamente o parâmetro de quantização e supre o parâmetro de quantização à unidade de quantização inversa do submacrobloco 221 em um sincronismo pré-determinado.

[00225] A unidade de quantização inversa do submacrobloco 221 calcula um parâmetro de quantização SubMB_QP para cada submacrobloco, da forma representada pelas Equações (5) até (10), por exemplo, pelo uso do parâmetro de quantização suprido a partir do armazenamento temporário do parâmetro de quantização 251, e transforma o mesmo no valor de quantização para cada submacrobloco para suprir o valor de quantização ao processador de quantização inversa 253.

[00226] Neste particular, da forma supradescrita na primeira modalidade, quando um valor de submp_qp_delta for “0”, submp_qp_delta não é transmitido. A unidade de quantização inversa do submacrobloco 221 aplica um valor de um parâmetro de quantização MB_QP para cada macrobloco no parâmetro de quantização SubMB_QP para cada submacrobloco quando não houver submp_qp_delta no parâmetro de quantização suprido a partir do armazenamento temporário do parâmetro de quantização 251.

[00227] Também, o coeficiente de transformada ortogonal quantizado obtido pela decodificação dos dados codificados supridos a partir do aparelho de codificação de imagem 100 pela unidade de decodificação sem perdas 202 é suprido ao armazenamento temporário do coeficiente de transformada ortogonal 252. O armazenamento temporário do coeficiente de transformada ortogonal 252 mantém apropriadamente o coeficiente de transformada ortogonal quantizado e supre o mesmo ao processador de quantização inversa 253 em um sincronismo pré-determinado.

[00228] O processador de quantização inversa 253 quantiza inversamente o coeficiente de transformada ortogonal quantizado suprido a partir do armazenamento temporário do coeficiente de transformada ortogonal 252 pelo uso do valor de quantização para cada submacrobloco suprido a partir da unidade de quantização inversa do submacrobloco 221. O processador de quantização inversa 253 supre o coeficiente de transformada ortogonal obtido por quantização inversa à unidade de transformada ortogonal inversa 204.

[00229] Da forma supradescrita, a unidade de quantização inversa 203 pode realizar um processo de quantização inversa pelo uso do valor de quantização calculado para cada submacrobloco. De acordo com isto, o aparelho de decodificação de imagem 200 pode realizar o processo de quantização inversa mais adequado para conteúdos da imagem. Especialmente, mesmo em um caso em que o tamanho do macrobloco for ampliado e tanto uma área plana quanto uma área que inclui textura forem incluídas em um único macrobloco, o aparelho de decodificação de imagem 200 pode realizar um processo de quantização inversa adaptativa adequado para cada área para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00230] Neste particular, a unidade de quantização inversa 108 do aparelho de codificação de imagem 100 ilustrado na figura 1 também tem uma configuração similar àquela da unidade de quantização inversa 203 e realiza um processo similar. Entretanto, a unidade de quantização inversa 108 obtém o parâmetro de quantização suprido a partir da unidade de quantização 105 e o coeficiente de transformada ortogonal quantizado, e realiza a quantização inversa.

[00231] Também, a unidade de quantização inversa 108 provê o parâmetro de quantização a uma unidade de quantização inversa do submacrobloco 122, que realiza um processo similar àquele da unidade de quantização inversa do submacrobloco 221, e permite que a unidade de quantização inversa do submacrobloco 122 gere o valor de quantização para cada submacrobloco. [Fluxo do Processo de Decodificação]

[00232] A seguir, um fluxo de cada processo executado pelo supradescrito aparelho de decodificação de imagem 200 é descrito. Primeiro, um exemplo de um fluxo de um processo de decodificação é descrito em relação a um fluxograma da figura 11.

[00233] Quando o processo de decodificação for iniciado, o armazenamento temporário de acúmulo 201 acumula os dados codificados transmitidos na etapa S201. Na etapa S202, a unidade de decodificação sem perdas 202 decodifica os dados codificados supridos a partir do armazenamento temporário de acúmulo 201. Isto é, uma figura I, uma figura P e uma figura B codificadas pela unidade de codificação sem perdas 106 da figura 1 são decodificadas.

[00234] Neste momento, a informação do vetor de movimento, a informação do quadro de referência, a informação do modo de previsão (modo de intraprevisão ou modo de interprevisão) e a informação, tais como o indicador e o parâmetro de quantização, também são decodificadas.

[00235] Quando a informação do modo de previsão for a informação do modo de intraprevisão, a informação do modo de previsão é suprida à unidade de intraprevisão 211. Quando a informação do modo de previsão for a informação do modo de interprevisão, a informação do vetor de movimento correspondente à informação do modo de previsão é suprida à unidade de previsão / compensação de movimento 212.

[00236] Na etapa S203, a unidade de quantização inversa 203 quantiza inversamente o coeficiente de transformada ortogonal quantizado obtido pela decodificação pela unidade de decodificação sem perdas 202. Na etapa S204, a unidade de transformada ortogonal inversa 204 realiza transformada ortogonal inversa do coeficiente de transformada ortogonal obtido pela quantização inversa pela unidade de quantização inversa 203 por um método correspondente à unidade de transformada ortogonal 104 da figura 1. De acordo com isto, informação de diferença correspondente a uma entrada da unidade de transformada ortogonal 104 da figura 1 (saída da unidade aritmética 103) é decodificada.

[00237] Na etapa S205, a unidade aritmética 205 adiciona a imagem prevista na informação de diferença obtida pelo processo da etapa S204. De acordo com isto, dados da imagem originais são decodificados.

[00238] Na etapa S206, o filtro de desbloqueio 206 filtra apropriadamente a imagem decodificada obtida pelo processo da etapa S205. De acordo com isto, distorção de bloco é apropriadamente removida da imagem decodificada.

[00239] Na etapa S207, a memória de quadro 209 armazena a imagem decodificada filtrada.

[00240] Na etapa S208, a unidade de intraprevisão 211 ou a unidade de previsão / compensação de movimento 212 realizam um processo de previsão da imagem de acordo com a informação do modo de previsão suprida a partir da unidade de decodificação sem perdas 202.

[00241] Isto é, em um caso em que a informação do modo de intraprevisão for suprida a partir da unidade de decodificação sem perdas 202, a unidade de intraprevisão 211 realiza um processo de intraprevisão no modo de intraprevisão. Também, em um caso em que a informação do modo de interprevisão for suprida a partir da unidade de decodificação sem perdas 202, a unidade de previsão / compensação de movimento 212 realiza um processo de previsão de movimento no modo de interprevisão.

[00242] Na etapa S209, o seletor 213 seleciona a imagem prevista. Isto é, a imagem prevista gerada pela unidade de intraprevisão 211 ou a imagem prevista gerada pela unidade de previsão / compensação de movimento 212 são supridas ao seletor 213. O seletor 213 seleciona a unidade de qual imagem prevista é suprida, e supre a imagem prevista à unidade aritmética 205. A imagem prevista é adicionada na informação de diferença pelo processo da etapa S205.

[00243] Na etapa S210, o armazenamento temporário de reordenamento de tela 207 reordena os quadros dos dados da imagem decodificados. Isto é, os quadros dos dados da imagem decodificados reordenados para a codificação pelo armazenamento temporário de reordenamento de tela 102 do aparelho de codificação de imagem 100 (figura 1) são reordenados na ordem de exibição original.

[00244] Na etapa S211, o conversor D/A 208 realiza conversão D/A dos dados da imagem decodificados cujos quadros são reordenados pelo armazenamento temporário de reordenamento de tela 207. Os dados da imagem decodificados são transmitidos a uma tela não ilustrada, e a imagem é exibida. [Processo de Quantização Inversa]

[00245] A seguir, um exemplo de um fluxo do processo de quantização inversa é descrito em relação a um fluxograma da figura 12.

[00246] Quando o processo de quantização inversa for iniciado, o armazenamento temporário do parâmetro de quantização 251 obtém um parâmetro de quantização pic_init_qp_minus26 suprido a partir da unidade de decodificação sem perdas 202 na etapa S231.

[00247] Na etapa S232, o armazenamento temporário do parâmetro de quantização 251 obtém um parâmetro de quantização slice_qp_delta suprido a partir da unidade de decodificação sem perdas 202.

[00248] Na etapa S233, o armazenamento temporário do parâmetro de quantização 251 obtém o parâmetro de quantização mb_qp_delta suprido a partir da unidade de decodificação sem perdas 202.

[00249] Na etapa S234, o armazenamento temporário do parâmetro de quantização 251 obtém um parâmetro de quantização submp_qp_delta suprido a partir da unidade de decodificação sem perdas 202. Entretanto, quando não houver submp_qp_delta, o processo da etapa S234 é omitido.

[00250] Na etapa S235, a unidade de quantização inversa do submacrobloco 221 calcula o valor de quantização para cada submacrobloco pelo uso de vários parâmetros de quantização obtidos pelos processos nas etapas S231 até S234. Entretanto, quando submp_qp_delta não for suprido a partir do aparelho de codificação de imagem 100 e o processo da etapa S234 for omitido, a unidade de quantização inversa do submacrobloco 221 aplica o valor de quantização para cada macrobloco no valor de quantização para cada submacrobloco.

[00251] Na etapa S236, o processador de quantização inversa 253 quantiza inversamente o coeficiente de transformada ortogonal quantizado mantido pelo armazenamento temporário do coeficiente de transformada ortogonal 252 pelo uso do valor de quantização para cada submacrobloco calculado pelo processo da etapa S235.

[00252] Quando o processo da etapa S236 for finalizado, a unidade de quantização inversa 203 retorna o processo para a etapa S203 e permite que os processos da etapa S204 e subsequentes etapas sejam executados.

[00253] Pela realização do processo de decodificação e do processo de quantização inversa, como exposto, o aparelho de decodificação de imagem 200 pode realizar o processo de quantização inversa pelo uso do valor de quantização calculado para cada submacrobloco e realizar o processo de quantização inversa mais adequado para os conteúdos da imagem. <3. Terceira Modalidade> [submb_qp_present_flag]

[00254] Embora tenha sido supradescrito que submp_qp_delta é apropriadamente transmitido como o parâmetro de quantização, também é possível transmitir adicionalmente um indicador, que reconhece a presença de submp_qp_delta para cada macrobloco.

[00255] Neste caso, uma configuração de um aparelho de codificação de imagem 100 é similar a um exemplo de configuração ilustrado na figura 1. Também, uma configuração de uma unidade de quantização 105 é similar a um exemplo de configuração ilustrado na figura 5. Entretanto, uma unidade de cálculo do parâmetro de quantização 152 calcula adicionalmente submb_qp_present_flag, que é informação de indicador que indica se submp_qp_delta cujo valor não é “0” está presente, para cada macrobloco. Quando algum submp_qp_delta dos submacroblocos que pertencem ao macrobloco tiver o valor não “0”, submb_qp_present_flag é definido em “1”, por exemplo. Também, quando submp_qp_delta de todos os submacroblocos que pertencem ao macrobloco forem “0”, submb_qp_present_flag é definido em “0”, por exemplo.

[00256] É desnecessário dizer que um valor de submb_qp_present_flag é arbitrário, e qualquer valor pode ser usado, desde que seja possível identificar um caso em que algum submp_qp_delta tem o valor não “0” a partir de um caso em que submp_qp_delta de todos os submacroblocos são “0”.

[00257] Quando a unidade de cálculo do parâmetro de quantização 152 definir o valor desta maneira, a unidade de cálculo do parâmetro de quantização 152 supre submb_qp_present_flag à unidade de codificação sem perdas 106 como um dos parâmetros de quantização. A unidade de codificação sem perdas 106 adiciona este submb_qp_present_flag em um cabeçalho do macrobloco, por exemplo, e codifica o mesmo. Isto é, submb_qp_present_flag é transmitido juntamente com dados codificados, bem como com um outro parâmetro de quantização.

[00258] Portanto, um processo de codificação neste caso é realizado como no caso supradescrito em relação ao fluxograma da figura 7. Também, um exemplo de um fluxo de um processo de cálculo do parâmetro de quantização neste caso é descrito em relação a um fluxograma da figura 13. Neste caso, também, o processo de cálculo do parâmetro de quantização é realizado de uma maneira basicamente similar àquela do caso ilustrado em relação ao fluxograma da figura 8.

[00259] Isto é, processos das etapas S331 até S336 são realizados como os processos das etapas S131 até S136 da figura 8. Entretanto, neste caso, a unidade de cálculo do parâmetro de quantização 152 calcula adicionalmente o parâmetro de quantização submb_qp_present_flag na etapa S337.

[00260] Da forma supradescrita, o parâmetro de quantização submb_qp_present_flag é calculado para ser transmitido.

[00261] Isto é, submb_qp_present_flag está presente em cada cabeçalho do macrobloco dos dados. Então, submp_qp_delta está presente em um cabeçalho do submacrobloco do macrobloco no qual o valor de submb_qp_present_flag é “1” e submp_qp_delta não está presente no cabeçalho do submacrobloco do macrobloco no qual o valor de submb_qp_present_flag é “0”.

[00262] Tais dados codificados são transmitidos do aparelho de codificação de imagem 100 a um aparelho de decodificação de imagem 200.

[00263] Uma configuração do aparelho de decodificação de imagem 200 neste caso é similar a um exemplo de configuração ilustrado na figura 9. Também, uma configuração de uma unidade de quantização inversa 203 é similar a um exemplo de configuração ilustrado na figura 10. Entretanto, uma unidade de quantização inversa do submacrobloco 221 calcula um valor de quantização para cada macrobloco para o macrobloco no qual submb_qp_present_flag é definido em “0” sem esperar pelo suprimento de submp_qp_delta e aplica o valor de quantização no valor de quantização para cada submacrobloco.

[00264] Em outras palavras, a unidade de quantização inversa do submacrobloco 221 obtém submp_qp_delta somente quando submb_qp_present_flag for “1”, e calcula o valor de quantização para cada submacrobloco.

[00265] Neste caso, um processo de decodificação é realizado de uma maneira similar àquela supradescrita em relação ao fluxograma da figura 11. Também, neste caso, um exemplo de um fluxo de um processo de quantização inversa é descrito em relação a um fluxograma da figura 14. Neste caso, também, o processo de quantização inversa é realizado de uma maneira basicamente similar àquela do caso descrito em relação ao fluxograma da figura 12.

[00266] Isto é, processos das etapas S431 até S433 são realizados como os processos das etapas S231 até S233 da figura 12. Entretanto, neste caso, o armazenamento temporário do parâmetro de quantização 251 obtém o parâmetro de quantização submb_qp_present_flag armazenado no cabeçalho do macrobloco na etapa S434.

[00267] Na etapa S435, a unidade de quantização inversa do submacrobloco 221 determina se o valor do parâmetro de quantização submb_qp_present_flag é “1”. Quando o valor do parâmetro de quantização submb_qp_present_flag for “1”, o armazenamento temporário do parâmetro de quantização 251 obtém o parâmetro de quantização submp_qp_delta na etapa S436. Na etapa S437, a unidade de quantização inversa do submacrobloco 221 calcula o valor de quantização para cada submacrobloco. Isto é, processos similares àqueles das etapas S234 e S235 da figura 12 são realizados.

[00268] Também, quando for determinado que o valor do parâmetro de quantização submb_qp_present_flag é “0”, na etapa S435, a unidade de quantização inversa do submacrobloco 221 calcula o valor de quantização para cada macrobloco, na etapa S438, e aplica o mesmo como o valor de quantização para cada submacrobloco.

[00269] Quando o valor de quantização for calculado da maneira supradescrita, o processador de quantização inversa 253 realiza quantização inversa pelo uso do valor de quantização na etapa S439.

[00270] Da forma supradescrita, o aparelho de decodificação de imagem 200 pode perceber mais facilmente a presença do parâmetro de quantização submp_qp_delta e pode calcular mais facilmente o valor de quantização sem necessidade de um processo desnecessário de busca de submp_qp_delta, que não está presente, pela transmissão de submb_qp_present_flag, que indica a presença do parâmetro de quantização submp_qp_delta para cada macrobloco para uso no momento da quantização inversa.

[00271] Embora o aparelho de codificação de imagem, que codifica pelo sistema equivalente a AVC, e o aparelho de decodificação de imagem, que decodifica pelo sistema equivalente a AVC, sejam supradescritos como um exemplo nas primeira até terceira modalidades, o escopo de aplicação da presente tecnologia não é limitado a estes, e a presente tecnologia pode ser aplicada a cada aparelho de codificação de imagem e aparelho de decodificação de imagem, que realizam o processo de codificação com base em um bloco com uma estrutura hierárquica, da forma ilustrada na figura 4.

[00272] Também, os vários parâmetros de quantização supradescritos podem ser adicionados em uma posição arbitrária dos dados codificados ou podem ser transmitidos a um lado de decodificação separadamente dos dados codificados, por exemplo. Por exemplo, a unidade de codificação sem perdas 106 pode descrever a informação em um fluxo contínuo de bits como sintaxe. Também, a unidade de codificação sem perdas 106 pode armazenar a informação em uma área pré-determinada como informação auxiliar para transmissão. Por exemplo, a informação pode ser armazenada em um conjunto de parâmetro (por exemplo, cabeçalho e congêneres da sequência e figura), tal como SEI (Informação de Melhoria Complementar).

[00273] Também é possível que a unidade de codificação sem perdas 106 transmita a informação do aparelho de codificação de imagem ao aparelho de decodificação de imagem separadamente dos dados codificados (como um outro arquivo). Neste caso, é necessário esclarecer o relacionamento de correspondência entre a informação e os dados codificados (de maneira tal que o lado de decodificação possa compreender o relacionamento), mas qualquer método pode ser usado para tal. Por exemplo, é possível criar separadamente informação de tabela que indica o relacionamento de correspondência ou embutir informação de ligação que indica dados correspondentes em cada um dos dados.

[00274] Neste particular, também é possível que a supradescrita quantização que usa o valor de quantização para cada submacrobloco (cálculo do parâmetro de quantização para cada submacrobloco) seja realizada somente para um macrobloco ampliado não menor que 32 x 32.

[00275] Por exemplo, um controlador de taxa 117 calcula a atividade para cada submacrobloco somente quando o macrobloco atual for o macrobloco ampliado e calcula a atividade para cada macrobloco quando o macrobloco atual for um macrobloco convencional não maior que 16 x 16 definido em um padrão de codificação existente, tal como a AVC.

[00276] A unidade de quantização de submacrobloco 121 calcula o valor de quantização para cada submacrobloco somente para o macrobloco ampliado e calcula o valor de quantização para cada macrobloco para o macrobloco convencional não maior que 16 x 16, por exemplo.

[00277] A unidade de cálculo do parâmetro de quantização 152 calcula o parâmetro de quantização Submp_qp_delta somente para o macrobloco ampliado e não calcula o parâmetro de quantização submp_qp_delta para o macrobloco convencional não maior que 16 x 16, por exemplo.

[00278] O processador de quantização 153 realiza a quantização pelo uso do valor de quantização para cada submacrobloco somente para o macrobloco ampliado e realiza a quantização pelo uso do valor de quantização para cada macrobloco para o macrobloco convencional não maior que 16 x 16, por exemplo.

[00279] Da maneira supradescrita, o aparelho de codificação de imagem 100 pode realizar a quantização pelo uso do valor de quantização para cada submacrobloco somente para o macrobloco ampliado com uma grande área na qual um efeito de inibição da deterioração da qualidade da imagem subjetiva de uma imagem decodificada pode ser suficientemente esperado e pode realizar a quantização pelo uso do valor de quantização para cada macrobloco para o macrobloco com um tamanho convencional no qual a expectativa para o efeito é relativamente pequena. De acordo com isto, o aparelho de codificação de imagem 100 pode inibir o aumento na carga ocasionado pela quantização usando o valor de quantização para cada submacrobloco.

[00280] Neste caso, certamente, é possível que o aparelho de decodificação de imagem 200 realize a quantização inversa pelo uso do valor de quantização para cada submacrobloco somente para o macrobloco ampliado como o aparelho de codificação de imagem 100.

[00281] Por exemplo, a unidade de quantização inversa do submacrobloco 221 calcula o valor de quantização para cada submacrobloco somente para o macrobloco ampliado e calcula o valor de quantização para cada macrobloco para o macrobloco convencional não maior que 16 x 16.

[00282] Portanto, o processador de quantização inversa 253 realiza a quantização inversa pelo uso do valor de quantização para cada submacrobloco somente para o macrobloco ampliado e realiza a quantização inversa pelo uso do valor de quantização para cada macrobloco para o macrobloco convencional não maior que 16 x 16, por exemplo.

[00283] Da maneira supradescrita, o aparelho de decodificação de imagem 200 pode realizar a quantização inversa pelo uso do valor de quantização para cada submacrobloco somente para o macrobloco ampliado com a grande área na qual o efeito de inibição da deterioração na qualidade da imagem subjetiva da imagem decodificada pode ser suficientemente esperado e pode realizar a quantização inversa pelo uso do valor de quantização para cada macrobloco para o macrobloco com o tamanho convencional no qual a expectativa para o efeito é relativamente pequena. De acordo com isto, o aparelho de decodificação de imagem 200 pode inibir o aumento na carga ocasionado pela quantização inversa usando o valor de quantização para cada submacrobloco.

[00284] Neste particular, quando submb_qp_present_flag for transmitido como na terceira modalidade, ele pode ser configurado para transmitir o parâmetro de quantização submb_qp_present_flag somente para o macrobloco ampliado. Em outras palavras, transmissão do parâmetro de quantização submb_qp_present_flag pode ser omitida para o macrobloco com o tamanho convencional. Certamente, ele pode ser configurado para transmitir o parâmetro de quantização submb_qp_present_flag com o valor que indica que não há parâmetro de quantização submp_qp_delta cujo valor é diferente de “0' para o macrobloco com o tamanho convencional. <4. Quarta Modalidade> [Sumário]

[00285] Embora tenha sido supradescrito que o parâmetro de quantização é especificado para cada submacrobloco, uma maneira de atribuir o parâmetro de quantização ao submacrobloco pode ser diferente daquela supradescrito. Por exemplo, também é possível definir um parâmetro de quantização SubMB_QP atribuído a cada submacrobloco da forma representada pela seguinte Equação (11) pelo uso de um parâmetro de quantização submp_qp_delta para cada submacrobloco e um parâmetro de quantização previous_qp para submacrobloco codificado imediatamente antes do mesmo. SubMB_QP = Clip(0,51,previous_qp + submp_qp_delta) ... (11) [Unidade de Codificação]

[00286] Um método como este será descrito a seguir pelo uso de uma unidade referida como uma unidade de codificação no lugar dos supradescritos macrobloco e submacrobloco.

[00287] Por exemplo, em um “Modelo de Teste Em Consideração” (JCTVC-B205), um macrobloco ampliado descrito em relação à figura 4 é definido por um conceito referido como a unidade de codificação.

[00288] A unidade de codificação é uma unidade de divisão de uma imagem (uma figura), que é uma unidade de processo, tal como um processo de codificação dos dados da imagem. Isto é, a unidade de codificação é um bloco (área parcial) obtido pela divisão da imagem (uma figura) em uma pluralidade de partes. Isto é, a unidade de codificação corresponde aos supradescritos macrobloco e submacrobloco.

[00289] A figura 15 é uma vista que ilustra um exemplo de configuração da unidade de codificação. Da forma ilustrada na figura 15, uma área da unidade de codificação pode ser adicionalmente dividida em uma pluralidade de partes e cada área pode se tornar a unidade de codificação de uma camada inferior. Isto é, as unidades de codificação podem ser hierarquicamente configuradas (configuradas para ter uma estrutura de árvore). Além do mais, um tamanho da unidade de codificação é arbitrário, e as unidades de codificação com diferentes tamanhos podem estar presentes em uma figura.

[00290] Em um exemplo da figura 15, o tamanho da unidade de codificação em uma camada mais superior (profundidade = 0) é definido em 128 x 128 pixels, uma área de 64 x 64 pixels obtida pela divisão da mesma ao meio vertical e horizontalmente (em quatro) torna-se a unidade de codificação em uma camada inferior (profundidade = 1) e a hierarquização das unidades de codificação é similarmente repetida, e uma área de 8 x 8 pixels torna-se a unidade de codificação em uma camada mais inferior (profundidade = 4).

[00291] Neste momento, a unidade de codificação na camada mais superior é referida como uma LCU (Maior Unidade de Codificação) e a unidade de codificação da camada mais inferior é referida como uma SCU (Menor Unidade de Codificação). Isto é, a LCU corresponde ao macrobloco e a unidade de codificação na camada inferior corresponde ao submacrobloco.

[00292] Neste particular, o tamanho e uma forma da unidade de codificação de cada camada e o número de camadas são arbitrários. Isto é, não se exige que os tamanhos e as formas de todas as LCU e SCU sejam iguais na imagem (uma figura), o número de camadas da unidade de codificação pode ser diferente de acordo com uma posição na imagem e uma maneira de divisão da área também é arbitrária. Isto é, a estrutura de árvore das unidades de codificação pode ser uma estrutura arbitrária.

[00293] É desnecessário dizer que um grau de liberdade da estrutura hierárquica das unidades de codificação pode ser parcialmente limitado, de maneira tal que as maneiras de divisão da área sejam as mesmas, mas somente os números de camadas sejam diferentes, por exemplo. Por exemplo, da forma ilustrada na figura 15, é possível configurar de maneira tal que uma área (uma figura ou uma unidade de codificação) seja dividida ao meio vertical e horizontalmente (isto é, em quatro) em qualquer posição, e os tamanhos da LCU e da SCU em cada posição são definidos, desse modo, definindo a estrutura hierárquica das unidades de codificação.

[00294] Os tamanhos da LCU e da SCU podem ser especificados por um conjunto de parâmetro de sequência na informação de imagem comprimida, por exemplo. É desnecessário dizer que eles podem ser especificados por outros metadados e congêneres. [Atribuição do Parâmetro de Quantização]

[00295] Nesta modalidade, o parâmetro de quantização submp_qp_delta é atribuído a cada unidade de codificação no lugar do macrobloco e do submacrobloco. Entretanto, neste caso, o parâmetro de quantização submp_qp_delta não é um valor da diferença entre um parâmetro de quantização MB_QP para cada macrobloco e o parâmetro de quantização SubMB_QP para cada submacrobloco, mas o valor da diferença entre o parâmetro de quantização previous_qp para uma unidade de codificação previamente codificada e o parâmetro de quantização SubMB_QP para a unidade de codificação atual.

[00296] Em outras palavras, o parâmetro de quantização submp_qp_delta que indica o valor da diferença entre o parâmetro de quantização previous_qp usado para codificação prévia e o parâmetro de quantização SubMB_QP para a unidade de codificação atual é atribuído a cada unidade de codificação. Isto é, o parâmetro de quantização submp_qp_delta que satisfaz a supradescrita Equação (11) é atribuído a cada unidade de codificação.

[00297] Neste particular, somente exige-se que a íntegra da área da imagem seja quantizada, de forma que o parâmetro de quantização submp_qp_delta seja realmente atribuído a uma parte das unidades de codificação, tal como somente à SCU, por exemplo.

[00298] Como nas outras modalidades supradescritas, é possível obter o parâmetro de quantização SubMB_QP para a unidade de codificação atual pela transformação de um valor de quantização obtido a partir da atividade para a unidade de codificação. Portanto, o parâmetro de quantização submp_qp_delta para cada unidade de codificação pode ser calculado pelo uso da Equação (11).

[00299] A figura 16 ilustra o exemplo de configuração da unidade de codificação em uma LCU e um exemplo do parâmetro de quantização atribuído a cada unidade de codificação. Da forma ilustrada na figura 16, um valor da diferença ΔQP entre o parâmetro de quantização previous_qp usado para a codificação prévia e o parâmetro de quantização SubMB_QP para a unidade de codificação atual é atribuído a cada unidade de codificação (CU) como o parâmetro de quantização.

[00300] Mais especificamente, um parâmetro de quantização ΔQP0 é atribuído a uma unidade de codificação superior esquerda 0 (Unidade de Codificação 0) na LCU. Também, um parâmetro de quantização ΔQP10 é atribuído a uma unidade de codificação superior esquerda 10 (Unidade de Codificação 10) dentre quatro unidades de codificação superiores direitas na LCU. Adicionalmente, um parâmetro de quantização ΔQP11 é atribuído a uma unidade de codificação superior direita 11 (Unidade de Codificação 11) dentre quatro unidades de codificação superiores direitas na LCU. Também, um parâmetro de quantização ΔQP12 é atribuído a uma unidade de codificação inferior esquerda 12 (Unidade de Codificação 12) dentre quatro unidades de codificação superiores direitas na LCU. Adicionalmente, um parâmetro de quantização ΔQP13 é atribuído a uma unidade de codificação inferior direita 13 (Unidade de Codificação 13) dentre quatro unidades de codificação superiores direitas na LCU.

[00301] Um parâmetro de quantização ΔQP20 é atribuído a uma unidade de codificação superior esquerda 20 (Unidade de Codificação 20) dentre quatro unidades de codificação inferiores esquerdas na LCU. Adicionalmente, um parâmetro de quantização ΔQP21 é atribuído a uma unidade de codificação superior direita 21 (Unidade de Codificação 21) dentre quatro unidades de codificação inferiores esquerdas na LCU. Também, um parâmetro de quantização ΔQP22 é atribuído a uma unidade de codificação inferior esquerda 22 (Unidade de Codificação 22) dentre quatro unidades de codificação inferiores esquerdas na LCU. Adicionalmente, um parâmetro de quantização ΔQP23 é atribuído a uma unidade de codificação inferior direita 23 (Unidade de Codificação 23) dentre quatro unidades de codificação inferiores esquerdas na LCU. Um parâmetro de quantização ΔQP3 é atribuído a uma unidade de codificação inferior direita 3 (Unidade de Codificação 3) na LCU.

[00302] O parâmetro de quantização para a unidade de codificação processado imediatamente antes da LCU é definido em PrevQP. Adicionalmente, suponha que a unidade de codificação superior esquerda 0 (Unidade de Codificação 0) na LCU é a unidade de codificação atual processada primeiro na LCU.

[00303] Um parâmetro de quantização CurrentQP para a unidade de codificação atual é calculado da forma representada pela seguinte Equação (12). CurrentQP = PrevQP + ΔQPo ...(12)

[00304] Suponha que a unidade de codificação a ser processada depois da unidade de codificação 0 é a unidade de codificação superior esquerda 10 (Unidade de Codificação 10) dentre quatro unidades de codificação superiores direitas na LCU ilustrada na figura 16.

[00305] Quando a unidade de codificação 10 se tornar o alvo de processamento, o parâmetro de quantização CurrentQP da unidade de codificação atual é calculado da forma representada pelas seguintes Equações (13) e (14). PrevQP = CurrentQP .(13) CurrentQP = PrevQP + ΔQP10 .(14)

[00306] Desta maneira, tornando o parâmetro de quantização atribuído a cada unidade de codificação o valor da diferença entre o parâmetro de quantização para a unidade de codificação previamente codificada e o parâmetro de quantização atual, não é necessário calcular o parâmetro de quantização para cada macrobloco, de forma que um processo de quantização possa ser realizado mais facilmente.

[00307] Neste particular, quando o valor da diferença entre o parâmetro de quantização para a unidade de codificação já codificada e o parâmetro de quantização atual for calculado, também é possível calcular o valor da diferença da unidade de codificação codificado antes da unidade de codificação atual (unidade de codificação codificada antes da unidade de codificação previamente codificada na LCU). Entretanto, o valor da diferença entre o parâmetro de quantização para a unidade de codificação previamente codificada e o parâmetro de quantização atual é preferível.

[00308] Isto é, quando o valor da diferença entre o parâmetro de quantização para a unidade de codificação previamente codificada e o parâmetro de quantização atual for calculado, somente exige-se que apenas o parâmetro de quantização para a unidade de codificação previamente codificada seja armazenado em uma memória, e o parâmetro de quantização pode ser gerenciado em um sistema FIFO (Primeiro a Entrar, Primeiro a Sair). Portanto, quando o valor da diferença do parâmetro de quantização for calculado, o parâmetro de quantização é facilmente gerenciado e uma quantidade de memória usada é pequena, de forma que haja uma vantagem na montagem.

[00309] Neste particular, um parâmetro de quantização como este cu_qp_delta para cada unidade de codificação é definido pela sintaxe da unidade de codificação, da forma ilustrada na figura 17, por exemplo, para ser transmitido a um lado de decodificação. Isto é, o parâmetro de quantização cu_qp_delta para cada unidade de codificação corresponde ao supradescrito parâmetro de quantização sub_qp_delta. [Aparelho de Codificação de Imagem]

[00310] A figura 18 é um diagrama de blocos que ilustra um exemplo de configuração principal de um aparelho de codificação de imagem no qual a presente tecnologia é aplicada. Um aparelho de codificação de imagem 300 ilustrado na figura 18 atribui o parâmetro de quantização cu_qp_delta a cada unidade de codificação, como exposto.

[00311] Da forma ilustrada na figura 18, o aparelho de codificação de imagem 300 tem uma configuração basicamente similar àquela de um aparelho de codificação de imagem 100 da figura 1. Entretanto, o aparelho de codificação de imagem 300 inclui uma unidade de quantização da unidade de codificação 305 e um controlador de taxa 317 no lugar de uma unidade de quantização 105, um controlador de taxa 117 e uma unidade de quantização de submacrobloco 121 do aparelho de codificação de imagem 100. Também, o aparelho de codificação de imagem 300 inclui uma unidade de quantização inversa da unidade de codificação 308 no lugar de uma unidade de quantização inversa 108 e uma unidade de quantização inversa do submacrobloco 122 do aparelho de codificação de imagem 100.

[00312] O controlador de taxa 317 controla uma taxa de operação de quantização da unidade de quantização da unidade de codificação 305, de maneira tal que sobrefluxo ou subfluxo não ocorram com base em uma imagem comprimida acumulada em um armazenamento temporário de acúmulo 107. Adicionalmente, o controlador de taxa 317 provê informação que indica a complexidade da imagem para cada unidade de codificação à unidade de quantização da unidade de codificação 305. A unidade de quantização da unidade de codificação 305 realiza quantização para cada unidade de codificação pelo uso da atividade. Também, a unidade de quantização da unidade de codificação 305 calcula o parâmetro de quantização para cada unidade de codificação. A unidade de quantização da unidade de codificação 305 supre um coeficiente de transformada ortogonal (dados de coeficiente) quantizado para cada unidade de codificação e o parâmetro de quantização calculado para cada unidade de codificação à unidade de codificação sem perdas 106 e codifica os mesmos para transmissão. Adicionalmente, a unidade de quantização da unidade de codificação 305 também provê o coeficiente de transformada ortogonal (dados de coeficiente) quantizado para cada unidade de codificação e o parâmetro de quantização calculado para cada unidade de codificação à unidade de quantização inversa da unidade de codificação 308.

[00313] A unidade de quantização inversa da unidade de codificação 308 realiza quantização inversa para cada unidade de codificação pelo uso do parâmetro de quantização para cada unidade de codificação suprido a partir da unidade de quantização da unidade de codificação 305. A unidade de quantização inversa da unidade de codificação 308 supre o coeficiente de transformada ortogonal (dados de coeficiente) inversamente quantizado para cada unidade de codificação à unidade de transformada ortogonal inversa 109. A unidade de quantização inversa da unidade de codificação 308 será descrita com detalhes a seguir na descrição de um aparelho de decodificação de imagem. [Configuração Detalhada Sobre a Quantização]

[00314] A figura 19 é um diagrama de blocos que ilustra um exemplo de configuração detalhada do controlador de taxa 317 e da unidade de quantização da unidade de codificação 305.

[00315] Da forma ilustrada na figura 19, o controlador de taxa 317 inclui uma unidade de cálculo da atividade 321 e um armazenamento temporário da atividade 322.

[00316] A unidade de cálculo da atividade 321 obtém a imagem que é um alvo do processo de codificação (unidade de codificação atual) a partir de um armazenamento temporário de reordenamento de tela 102 e calcula a atividade, que é informação que indica dispersão de valores de pixel, como informação que indica a complexidade da imagem. Isto é, a unidade de cálculo da atividade 321 calcula a atividade para cada unidade de codificação. Neste particular, somente exige-se que o processo de quantização seja realizado para a íntegra da imagem, de forma que também seja possível que a atividade seja calculada somente para uma parte das unidades de codificação, tal como somente para a SCU, por exemplo.

[00317] O armazenamento temporário da atividade 322 mantém a atividade para cada unidade de codificação calculada pela unidade de cálculo da atividade 321 e provê a mesma à unidade de quantização 105 em um sincronismo pré-determinado. O armazenamento temporário da atividade 322 mantém a atividade obtida para cada unidade de codificação por uma quantidade de uma tela, por exemplo.

[00318] Um método de cálculo da atividade é arbitrário, e pode ser um método similar àquele do supradescrito Modelo de Teste MPEG2, por exemplo. Também, conteúdos da informação que indica a complexidade da imagem também são arbitrários e podem ser a informação diferente de tal atividade.

[00319] A unidade de quantização da unidade de codificação 305 inclui uma unidade de cálculo do valor de quantização da unidade de codificação 331, uma unidade de cálculo do parâmetro de quantização da figura 332, uma unidade de cálculo do parâmetro de quantização da fatia 333, uma unidade de cálculo do parâmetro de quantização da unidade de codificação 334 e uma unidade de quantização da unidade de codificação 335.

[00320] A unidade de cálculo do valor de quantização da unidade de codificação 331 calcula o valor de quantização para cada unidade de codificação com base na atividade para cada unidade de codificação (informação que indica a complexidade da imagem para cada unidade de codificação) suprida a partir do controlador de taxa 317. O valor de quantização para cada unidade de codificação pode ser calculado por um método similar àquele em um caso em que o valor de quantização para cada LCU é calculado a partir da atividade para cada LCU. Neste particular, somente exige-se que o processo de quantização seja realizado para a íntegra da imagem, de forma que também seja possível que o valor de quantização para cada unidade de codificação seja calculado somente para uma parte das unidades de codificação. A seguir, considera-se que o valor de quantização para cada unidade de codificação é calculado somente para a SCU como um exemplo.

[00321] Depois de obter o valor de quantização para cada unidade de codificação, a unidade de cálculo do valor de quantização da unidade de codificação 331 supre o valor de quantização para cada unidade de codificação à unidade de cálculo do parâmetro de quantização da figura 332.

[00322] A unidade de cálculo do parâmetro de quantização da figura 332 obtém um parâmetro de quantização pic_init_qp_minus26 para cada figura pelo uso do valor de quantização para cada unidade de codificação.

[00323] A unidade de cálculo do parâmetro de quantização da fatia 333 obtém um parâmetro de quantização slice_qp_delta para cada fatia pelo uso do valor de quantização para cada unidade de codificação.

[00324] A unidade de cálculo do parâmetro de quantização da unidade de codificação 334 obtém um parâmetro de quantização cu_qp_delta para cada unidade de codificação pelo uso do parâmetro de quantização prevQP usado para a codificação prévia.

[00325] Os parâmetros de quantização gerados pela unidade de cálculo do parâmetro de quantização da figura 332 para a unidade de cálculo do parâmetro de quantização da unidade de codificação 334 são supridos à unidade de codificação sem perdas 106, codificados e transmitidos ao lado de decodificação, e também supridos à unidade de quantização inversa da unidade de codificação 308.

[00326] A unidade de quantização da unidade de codificação 335 quantiza o coeficiente de transformada ortogonal da unidade de codificação atual pelo uso do valor de quantização para cada unidade de codificação.

[00327] A unidade de quantização da unidade de codificação 335 supre o coeficiente de transformada ortogonal quantizado para cada unidade de codificação à unidade de codificação sem perdas 106 e à unidade de quantização inversa da unidade de codificação 308. [Fluxo do Processo de Codificação]

[00328] O aparelho de codificação de imagem 300 realiza o processo de codificação, basicamente, como no caso do aparelho de codificação de imagem 100 da figura 1 descrito em relação à figura 6. [Fluxo do Processo de Cálculo do Parâmetro de Quantização]

[00329] Um exemplo de um fluxo de um processo de cálculo do parâmetro de quantização executado no processo de codificação é descrito em relação a um fluxograma da figura 20.

[00330] Quando o processo de cálculo do parâmetro de quantização for iniciado, na etapa S531, a unidade de cálculo do valor de quantização da unidade de codificação 331 obtém a atividade para cada unidade de codificação suprida a partir do controlador de taxa 317.

[00331] Na etapa S532, a unidade de cálculo do valor de quantização da unidade de codificação 331 calcula o valor de quantização para cada unidade de codificação pelo uso da atividade para cada unidade de codificação.

[00332] Na etapa S533, a unidade de cálculo do parâmetro de quantização da figura 332 obtém o parâmetro de quantização pic_init_qp_minus26 pelo uso do valor de quantização para cada unidade de codificação calculado na etapa S532.

[00333] Na etapa S534, a unidade de cálculo do parâmetro de quantização da fatia 333 obtém o parâmetro de quantização slice_qp_delta pelo uso do valor de quantização para cada unidade de codificação calculado na etapa S532.

[00334] Na etapa S535, a unidade de cálculo do parâmetro de quantização da unidade de codificação 334 obtém o parâmetro de quantização cu_qp_delta para cada unidade de codificação (ΔQP0 até ΔQP23 e congêneres na figura 16) pelo uso do parâmetro de quantização prevQP usado para a codificação prévia.

[00335] Depois de obter os vários parâmetros de quantização da maneira supradescrita, a unidade de quantização da unidade de codificação 305 finaliza o processo de cálculo do parâmetro de quantização e realiza processos subsequentes ao processo de codificação.

[00336] Já que o processo de codificação e o processo de cálculo do parâmetro de quantização são realizados da maneira supradescrita, o aparelho de codificação de imagem 300 pode definir o valor de quantização para cada unidade de codificação e realizar um processo de quantização mais apropriado de acordo com conteúdos da imagem.

[00337] Também, já que o parâmetro de quantização calculado desta maneira é transmitido ao aparelho de decodificação de imagem, o aparelho de codificação de imagem 300 pode permitir que o aparelho de decodificação de imagem realize a quantização inversa para cada unidade de codificação.

[00338] Neste particular, a unidade de quantização inversa da unidade de codificação 308 incluída no aparelho de codificação de imagem 300 realiza um processo similar àquele da unidade de quantização inversa da unidade de codificação incluída no aparelho de decodificação de imagem correspondente ao aparelho de codificação de imagem 300. Isto é, o aparelho de codificação de imagem 300 também pode realizar a quantização inversa para cada unidade de codificação. [Aparelho de Decodificação de Imagem]

[00339] A figura 21 é um diagrama de blocos que ilustra um exemplo de configuração principal do aparelho de decodificação de imagem no qual a presente tecnologia é aplicada. Um aparelho de decodificação de imagem 400 ilustrado na figura 21, que corresponde ao supradescrito aparelho de codificação de imagem 300, decodifica corretamente um fluxo codificado (dados codificados) gerado pela codificação dos dados da imagem pelo aparelho de codificação de imagem 300 para gerar uma imagem decodificada.

[00340] Da forma ilustrada na figura 21, o aparelho de decodificação de imagem 400 tem uma configuração basicamente similar àquela de um aparelho de decodificação de imagem 200 da figura 8 e realiza um processo similar. Entretanto, o aparelho de decodificação de imagem 400 inclui uma unidade de quantização inversa da unidade de codificação 403 no lugar de uma unidade de quantização inversa 203 e uma unidade de quantização inversa do submacrobloco 221 do aparelho de decodificação de imagem 200.

[00341] A unidade de quantização inversa da unidade de codificação 403 quantiza inversamente o coeficiente de transformada ortogonal quantizado para cada unidade de codificação pelo aparelho de codificação de imagem 300 pelo uso do parâmetro de quantização e congêneres para cada unidade de codificação supridos a partir do aparelho de codificação de imagem 300.

[00342] A figura 22 é um diagrama de blocos que ilustra um exemplo de configuração principal da unidade de quantização inversa da unidade de codificação 403. Da forma ilustrada na figura 22, a unidade de quantização inversa da unidade de codificação 403 inclui um armazenamento temporário do parâmetro de quantização 411, um armazenamento temporário do coeficiente de transformada ortogonal 412, uma unidade de cálculo do valor de quantização da unidade de codificação 413 e um processador de quantização inversa da unidade de codificação 414.

[00343] O parâmetro de quantização em cada camada, tais como um conjunto de parâmetro de figura e um cabeçalho de fatia dos dados codificados supridos a partir do aparelho de codificação de imagem 300, é decodificado por uma unidade de decodificação sem perdas 202 para ser suprido ao armazenamento temporário do parâmetro de quantização 411. O armazenamento temporário do parâmetro de quantização 411 mantém apropriadamente o parâmetro de quantização e supre o mesmo à unidade de cálculo do valor de quantização da unidade de codificação 413 em um sincronismo pré-determinado.

[00344] A unidade de cálculo do valor de quantização da unidade de codificação 413 calcula o valor de quantização para cada unidade de codificação, da forma representada pelas equações (36) até (39), por exemplo, pelo uso do parâmetro de quantização suprido a partir do armazenamento temporário do parâmetro de quantização 411 e supre o valor de quantização ao processador de quantização inversa da unidade de codificação 414.

[00345] Também, o coeficiente de transformada ortogonal quantizado obtido pela decodificação dos dados codificados supridos a partir do aparelho de codificação de imagem 300 pela unidade de decodificação sem perdas 202 é suprido ao armazenamento temporário do coeficiente de transformada ortogonal 412. O armazenamento temporário do coeficiente de transformada ortogonal 412 mantém apropriadamente o coeficiente de transformada ortogonal quantizado para suprir ao processador de quantização inversa da unidade de codificação 414 em um sincronismo pré-determinado.

[00346] O processador de quantização inversa da unidade de codificação 414 quantiza inversamente o coeficiente de transformada ortogonal quantizado suprido a partir do armazenamento temporário do coeficiente de transformada ortogonal 412 pelo uso do valor de quantização para cada unidade de codificação suprida a partir da unidade de cálculo do valor de quantização da unidade de codificação 413. O processador de quantização inversa da unidade de codificação 414 supre o coeficiente de transformada ortogonal obtido pela quantização inversa a uma unidade de transformada ortogonal inversa 204.

[00347] Da forma supradescrita, a unidade de quantização inversa da unidade de codificação 403 pode realizar um processo de quantização inversa pelo uso do valor de quantização calculado para cada unidade de codificação. De acordo com isto, o aparelho de decodificação de imagem 400 pode realizar o processo de quantização inversa mais adequado para os conteúdos da imagem. Especialmente, mesmo em um caso em que um tamanho do macrobloco for ampliado (o tamanho da LCU é grande) e tanto uma área plana quanto uma área que inclui textura forem incluídas em uma única LCU, o aparelho de decodificação de imagem 400 pode realizar um processo de quantização inversa adaptativa adequado para cada área para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00348] Neste particular, a unidade de quantização inversa da unidade de codificação 308 do aparelho de codificação de imagem 300 ilustrada na figura 18 também tem uma configuração similar àquela da unidade de quantização inversa da unidade de codificação 403 e realiza um processo similar. Entretanto, a unidade de quantização inversa da unidade de codificação 308 obtém o parâmetro de quantização e o coeficiente de transformada ortogonal quantizado supridos a partir da unidade de quantização da unidade de codificação 305 e realiza a quantização inversa. [Fluxo do Processo de Decodificação]

[00349] O aparelho de decodificação de imagem 400 realiza um processo de decodificação de uma maneira basicamente similar àquela em um caso do aparelho de decodificação de imagem 200 da figura 8 descrito em relação ao fluxograma da figura 10. [Fluxo do Processo de Quantização Inversa]

[00350] Um exemplo de um fluxo do processo de quantização inversa executado no processo de decodificação pelo aparelho de decodificação de imagem 400 é descrito em relação a um fluxograma da figura 23.

[00351] Quando o processo de quantização inversa for iniciado, o armazenamento temporário do parâmetro de quantização 411 obtém o parâmetro de quantização pic_init_qp_minus26 suprido a partir da unidade de decodificação sem perdas 202 na etapa S631.

[00352] Na etapa S632, o armazenamento temporário do parâmetro de quantização 411 obtém o parâmetro de quantização slice_qp_delta suprido a partir da unidade de decodificação sem perdas 202.

[00353] Na etapa S633, o armazenamento temporário do parâmetro de quantização 411 obtém o parâmetro de quantização cu_qp_delta suprido a partir da unidade de decodificação sem perdas 202.

[00354] Na etapa S634, a unidade de cálculo do valor de quantização da unidade de codificação 413 calcula o valor de quantização para cada unidade de codificação pelo uso dos vários parâmetros de quantização obtidos pelos processos das etapas S631 até S633 e do parâmetro de quantização PrevQP previamente usado.

[00355] Na etapa S635, o processador de quantização inversa da unidade de codificação 414 quantiza inversamente o coeficiente de transformada ortogonal quantizado mantido pelo armazenamento temporário do coeficiente de transformada ortogonal 412 pelo uso do valor de quantização para cada unidade de codificação calculado pelo processo da etapa S634.

[00356] Quando o processo da etapa S635 for finalizado, a unidade de quantização inversa da unidade de codificação 403 retorna o processo ao processo de decodificação e permite que processos subsequentes sejam executados.

[00357] Da forma supradescrita, pela realização do processo de decodificação e do processo de quantização inversa, o aparelho de decodificação de imagem 400 pode realizar o processo de quantização inversa pelo uso do valor de quantização calculado para cada unidade de codificação e pode realizar o processo de quantização inversa mais adequado para os conteúdos da imagem.

[00358] Da forma supradescrita, a fim de diminuir uma quantidade de código do parâmetro de quantização para cada unidade de codificação (submacrobloco), um valor da diferença dQP entre um parâmetro de quantização pré-determinado e o parâmetro de quantização SubMB_QP (parâmetro de quantização submp_qp_delta) é obtido para ser transmitido em vez da transmissão do próprio parâmetro de quantização SubMB_QP. Dois métodos representados pelas seguintes Equações (15) e (16) foram supradescritos como métodos de cálculo do parâmetro de quantização dQP. dQP = CurrentQP - LCUQP ...(15) dQP = CurrentQP - PreviousQP .(16)

[00359] Nas Equações (15) e (16), CurrentQP representa o parâmetro de quantização para a unidade de codificação (CU) atual. Também, LCUQP representa o parâmetro de quantização para a LCU à qual a CU atual pertence (isto é, a LCU atual). Adicionalmente, PreviousQP representa o parâmetro de quantização para a CU processada imediatamente antes da CU atual.

[00360] Isto é, no caso da Equação (15), o valor da diferença entre o parâmetro de quantização para a LCU atual e o parâmetro de quantização para a CU atual é transmitido. Também, em um caso da Equação (16), o valor da diferença entre o parâmetro de quantização da CU previamente processada e o parâmetro de quantização da CU atual é transmitido.

[00361] O método de cálculo de tal parâmetro de quantização dQP para transmissão é arbitrário, e pode ser diferente dos dois exemplos supradescritos.

[00362] Por exemplo, também é possível transmitir o valor da diferença entre um parâmetro de quantização SliceQP para a fatia à qual a CU atual pertence (isto é, a fatia atual) e o parâmetro de quantização para a CU atual, da forma representada pela seguinte Equação (17). dQP = CurrentQP - SliceQP .(17)

[00363] O parâmetro de quantização CurrentQP pode ser obtido pela transformação do valor de quantização da CU atual calculado pela unidade de cálculo do valor de quantização da unidade de codificação 331 pela unidade de cálculo do parâmetro de quantização da unidade de codificação 334 da figura 19, por exemplo. Também, o parâmetro de quantização SliceQP pode ser obtido pela unidade de cálculo do parâmetro de quantização da fatia 333 da figura 19 usando o parâmetro de quantização pic_init_qp_minus26 obtido pela unidade de cálculo do parâmetro de quantização da figura 332 e o parâmetro de quantização slice_qp_delta obtido por si mesmo, por exemplo.

[00364] Portanto, por exemplo, a unidade de cálculo do parâmetro de quantização da unidade de codificação 334 da figura 19 pode obter o parâmetro de quantização dQP pelo uso dos valores. A unidade de cálculo do parâmetro de quantização da unidade de codificação 334 supre o parâmetro de quantização dQP à unidade de codificação sem perdas 106 para transmitir ao lado de decodificação.

[00365] O parâmetro de quantização pic_init_qp_minus26 e o parâmetro de quantização slice_qp_delta são definidos no “Modelo de Teste Em Consideração” (JCTVC-B205), por exemplo, e pode ser definido por um método similar àquele de um sistema de codificação convencional.

[00366] No lado de decodificação, o parâmetro de quantização para a CU pode ser obtido a partir do parâmetro de quantização dQP transmitido a partir do lado de codificação.

[00367] Por exemplo, a unidade de cálculo do valor de quantização da unidade de codificação 413 obtém o parâmetro de quantização SubMB_QP para a CU, da forma representada pela seguinte Equação (18), a partir do parâmetro de quantização dQP e transforma o mesmo para obter o valor de quantização. SubMB_QP = Clip(minQP,maxQP,SliceQP + submp_qp_delta) ...(18)

[00368] Na Equação (18), minQP representa um parâmetro de quantização mínimo definido antecipadamente e maxQP representa um parâmetro de quantização máximo definido antecipadamente.

[00369] Desta maneira, em um caso em que o parâmetro de quantização SliceQP for usado para obter o parâmetro de quantização dQP, também, a quantização e a quantização inversa podem ser realizadas como os dois métodos supradescritos. Isto é, não somente a quantização e a quantização inversa mais adequadas para os conteúdos da imagem podem ser realizadas, mas, também, a quantidade de código do parâmetro de quantização pode diminuir.

[00370] Uma tabela na qual características dos processos dos métodos são comparadas umas com as outras é ilustrada na figura 24. Na tabela ilustrada na figura 24, um método no topo (referido como um primeiro método) é um método de obtenção do parâmetro de quantização dQP pelo uso do parâmetro de quantização para a LCU. Um segundo método no topo (referido como um segundo método) é um método de obtenção do parâmetro de quantização dQP pelo uso do parâmetro de quantização para a CU processada imediatamente antes da CU atual. Um método na base (referido como um terceiro método) é um método de obtenção do parâmetro de quantização dQP pelo uso do parâmetro de quantização para a fatia atual.

[00371] Na tabela da figura 24, a facilidade de um processo de encadeamento e a eficiência de codificação são comparadas uma com a outra como as características dos métodos. Da forma indicada na tabela da figura 24, o processo de encadeamento é mais fácil no primeiro método do que no segundo método. O processo de encadeamento é mais fácil no terceiro método do que no primeiro método. Adicionalmente, a eficiência de codificação é maior no primeiro método do que no terceiro método. A eficiência de codificação é maior no segundo método do que no primeiro método.

[00372] Isto é, no geral, quanto mais próxima a área estiver da área atual, maior a correlação com a área atual (tais como a unidade de codificação e o submacrobloco). Portanto, é possível aumentar adicionalmente a eficiência de codificação do parâmetro de quantização dQP pela obtenção do parâmetro de quantização dQP pelo uso da área mais próxima da área atual.

[00373] Entretanto, no geral, quanto mais distante a área estiver da área atual, mais cedo esta é processada. Portanto, tempo até que a área atual seja processada torna-se maior. Isto é, tempo permitido para atraso de processamento e congêneres torna-se maior. Portanto, quando o parâmetro de quantização dQP for obtido pelo uso da área mais distante da área atual, é menos provável que atraso ocorra, o que é vantajoso para o processo de encadeamento.

[00374] Da forma supradescrita, os métodos têm diferentes características, de forma que um método apropriado difira, dependendo de uma condição com prioridade. Neste particular, também é possível que cada método possa ser selecionado. Um método de seleção é arbitrário. Por exemplo, um usuário e congêneres podem determinar antecipadamente o método a ser aplicado. Por exemplo, também é possível que qualquer método seja adaptativamente selecionado de acordo com uma condição arbitrária (para cada unidade de processo arbitrária ou quando um evento arbitrário ocorrer, por exemplo).

[00375] Quando qualquer método for adaptativamente selecionado, também é possível gerar informação de indicador que indica o método selecionado e transmitir a informação de indicador do lado de codificação (lado de quantização) ao lado de decodificação (lado de quantização inversa). Neste caso, o lado de decodificação (lado de quantização inversa) pode selecionar o mesmo método do lado de codificação (lado de quantização) pela referência à informação de indicador.

[00376] Também, o método de cálculo do parâmetro de quantização dQP é arbitrário e pode ser diferente do método supradescrito. O número de métodos de cálculo preparados também é arbitrário. Também, o valor pode ser variável. Também é possível transmitir informação que define o parâmetro de quantização dQP do lado de codificação (lado de quantização) ao lado de decodificação (lado de quantização inversa).

[00377] O método de cálculo do valor da diferença do parâmetro de quantização é ilustrado em consideração das características dos métodos supradescritos. A figura 25 ilustra um exemplo das configurações da LCU e da CU. O (número) indica de ordem de processo de codificação (decodificação) das unidades de codificação.

[00378] Em uma LCU(0), a ordem de codificação das unidades de codificação é como segue: CU(0) ^CU(Í0) ^CU(ÍÍ) ^CU(12) ^CU(13) > CUí20) ^CU(21) > CUG0i ^CU(31) >CUG2i ^CU(33) > CU(23) > CU(3)

[00379] Neste caso, o valor da diferença do parâmetro de quantização é como segue:

[00380] A unidade de codificação CU(0) no cabeçalho da LCU transmite o valor da diferença entre o parâmetro de quantização SliceQP para a fatia à qual a CU(0) pertence (isto é, a fatia atual) e o parâmetro de quantização para a CU atual(0) pelo uso da Equação (17). dQP(CU(0)) = CurrentQP(CU0) - SliceQP

[00381] A seguir, as unidades de codificação CU(10) até CU(3) diferentes daquelas do cabeçalho da LCU transmitem o valor da diferença entre o parâmetro de quantização (CurrentCU) para a CU atual e a CU previamente codificada (PreviousCU) pelo uso da Equação (16). dQP = CurrentQP(CUi) - PreviousQP(CUi-1)

[00382] Isto é, quando forem descritos em relação à figura 25, os valores da diferença do parâmetro de quantização são como segue: dQP(CU(10)) = CurrentQP(CU(10)) - PreviousQP(CU(0)) dQP(CU(11)) = CurrentQP(CU(11)) - PreviousQP(CU(10)) dQP(CU(12)) = CurrentQP(CU(12)) - PreviousQP(CU(11)) dQP(CU(13)) = CurrentQP(CU(13)) - PreviousQP(CU(12)) dQP(CU(20)) = CurrentQP(CU(20)) - PreviousQP(CU(13)) dQP(CU(21)) = CurrentQP(CU(21)) - PreviousQP(CU(20)) dQP(CU(30)) = CurrentQP(CU(30)) - PreviousQP(CU(21)) dQP(CU(31)) = CurrentQP(CU(31)) - PreviousQP(CU(30)) dQP(CU(32)) = CurrentQP(CU(32)) - PreviousQP(CU(31)) dQP(CU(33)) = CurrentQP(CU(33)) - PreviousQP(CU32)) dQP(CU(23)) = CurrentQP(CU(23)) - PreviousQP(CU33)) dQP(CU(3)) = CurrentQP(CU(3)) - PreviousQP(CU23)

[00383] Para outras LCU(1) até LCU(N), também, os valores da diferença do parâmetro de quantização são similarmente calculados para serem transmitidos.

[00384] Desta maneira, é possível satisfazer tanto a facilidade do processo de encadeamento quanto à eficiência de codificação pela adoção da vantagem das características de cada método (indicada pelo círculo duplo no desenho) pelo cálculo e transmissão do valor da diferença do parâmetro de quantização.

[00385] Neste particular, em vista de montagem, quando controle fechado for realizado na LUC, a unidade de codificação CU(0) no cabeçalho da LCU pode calcular o valor da diferença do parâmetro de quantização pelo uso da Equação (15).

[00386] Neste particular, não se exige que o parâmetro de quantização dQP supradescrito seja definido para todas as unidades de codificação, e este pode ser definido somente para a CU para a qual é desejável definir um valor diferente de um parâmetro de quantização de referência, tais como LCUQP, PreviousQP e SliceQP.

[00387] Com este propósito, também é possível adicionar a sintaxe MinCUForDQPCoded no cabeçalho de fatia (SliceHeader), por exemplo.

[00388] A figura 26 é uma vista que ilustra um exemplo da sintaxe do cabeçalho de fatia. O número na extremidade esquerda de cada linha é um número de linha atribuído para descrição.

[00389] Em um exemplo da figura 26, MinCUForDQPCoded é definido em uma 22a linha. Esta MinCUForDQPCoded especifica um tamanho mínimo da CU para a qual dQP é definido. Por exemplo, mesmo quando um tamanho mínimo da CU for 8 x 8, se for especificado que MinCUForDQPCoded = 16, a unidade de cálculo do parâmetro de quantização da unidade de codificação 334 do aparelho de codificação de imagem 300 define dQP somente para a CU com um tamanho não menor que 16 x 16, e não define dQP para a CU com o tamanho de 8 x 8. Isto é, neste caso, dQP para a CU com o tamanho não menor que 16 x 16 é transmitido. Neste particular, MinCUForDQPCoded pode ser definida como um indicador (por exemplo, 0: 4 x 4, 1: 8 x 8, 2: 16 x 16 e congêneres) para identificar (selecionar) o tamanho mínimo da CU para a qual dQP é definido a partir do tamanho da CU (4 x 4, 8 x 8, 16 x 16, 32 x 32 e congêneres) definido no momento de codificação (decodificação) como um método de especificação do tamanho mínimo da CU para a qual dQP é definido.

[00390] Por exemplo, quando se fizer um codificador que somente deseja controlar com a CU com o tamanho de 16 x 16, exige-se transmitir todo dQP como 0 na CU com o tamanho de 8 x 8, e isto pode deteriorar a eficiência de codificação.

[00391] Portanto, pela definição de tal sintaxe MinCUForDQPCoded, é possível omitir a transmissão de dQP para a CU com o tamanho de 8 x 8, neste caso, desse modo, inibindo que a eficiência de codificação se deteriore.

[00392] A unidade de cálculo do valor de quantização da unidade de codificação 413 do aparelho de decodificação de imagem 400 compreende que dQP para a CU com o tamanho de 8 x 8 não é transmitido de acordo com tal sintaxe e calcula o valor de quantização pelo uso do parâmetro de quantização de referência, tais como LCUQP, PreviousQP e SliceQP.

[00393] Neste particular, MinCUForDQPCoded pode ser armazenada em local diferente do cabeçalho de fatia. Por exemplo, esta pode ser armazenada no conjunto de parâmetro de figura (PictureParameterSet). É possível suportar a operação para mudar este valor depois da mudança de cena, por exemplo, pelo armazenamento do mesmo no cabeçalho de fatia ou no conjunto de parâmetro de figura.

[00394] Entretanto, quando MinCUForDQPCoded for armazenado no cabeçalho de fatia, também é possível suportar um caso em que a figura é multifatiada e processada em paralelo para cada fatia, o que é mais desejável. <5. Quinta Modalidade> [Sumário]

[00395] Embora tenha sido supradescrito que o parâmetro de quantização para cada submacrobloco (unidade de codificação menor que a LCU) é transmitido do aparelho de codificação de imagem ao aparelho de decodificação de imagem, neste caso, exige-se que o aparelho de decodificação de imagem também possa obter o parâmetro de quantização para cada submacrobloco (unidade de codificação menor que a LCU) e realize a quantização para cada submacrobloco (unidade de codificação menor que a LCU) pelo uso do parâmetro de quantização.

[00396] Portanto, ele pode ser configurado de maneira tal que o aparelho de codificação de imagem defina o parâmetro de quantização para cada macrobloco (LCU) e proveja o parâmetro de quantização para cada macrobloco (LCU) ao aparelho de decodificação de imagem durante a realização de um processo de quantização para cada submacrobloco (unidade de codificação menor que a LCU).

[00397] Por exemplo, durante o cálculo da atividade para cada macrobloco (LCU) pelo supradescrito Modelo de Teste 5, o aparelho de codificação de imagem calcula a atividade para cada bloco (unidade de codificação) de 8 x 8, 16 x 16 e congêneres menor que o macrobloco (LCU), mesmo quando um tamanho do macrobloco (LCU) for 64 x 64, 128 x 128 e congêneres.

[00398] Então, o aparelho de codificação de imagem determina um valor do parâmetro de quantização para cada bloco 8 x 8 ou bloco 16 x 16 com base na atividade para cada bloco 8 x 8 ou bloco 16 x 16 com base em um método do Modelo de Teste 5.

[00399] Entretanto, o parâmetro de quantização é definido para cada macrobloco (LCU).

[00400] Por exemplo, suponha que o tamanho da LCU (macrobloco) seja 64 x 64 pixels, da forma ilustrada na figura 27. Quando o aparelho de codificação de imagem calcular a atividade para cada unidade de codificação 16 x 16 para calcular o parâmetro de quantização para a LCU, a atividade para cada unidade de codificação (bloco) torna-se QP00 até QP33.

[00401] Em um caso da AVC, um parâmetro de quantização QP é desenhado de maneira tal que o processo de quantização duas vezes mais grosseiro que o original seja realizado quando um valor deste incrementar em 6, tal como de 6 para 12, por exemplo, da forma ilustrada na figura 28.

[00402] Deterioração em um sinal de crominância é facilmente perceptível, especialmente em uma taxa de bit inferior, isto é, com um QP superior. Portanto, um parâmetro de quantização padrão QPC para o sinal de crominância é definido antecipadamente em relação a um parâmetro de quantização QPY para um sinal de luminância.

[00403] Um usuário pode controlar este relacionamento pela definição de informação sobre ChromaQPOffset incluído na informação de imagem comprimida.

[00404] Por outro lado, em um caso desta modalidade, o aparelho de codificação de imagem determina um parâmetro de quantização QPMB para o macrobloco, da forma representada pela seguinte Equação (19) em uma primeira etapa. [Equação 3] QPMB = minQP,j ij sz 0,3

[00405] Em uma segunda etapa, o processo de quantização para cada bloco é realizado pelo uso dos valores de QP00 até QP33. Em decorrência disto, uma posição de um coeficiente não zero em cada bloco é armazenada em uma memória.

[00406] Em uma terceira etapa, o processo de quantização para cada bloco é realizado pelo uso de um valor de QPMB.

[00407] Em uma quarta etapa, somente um valor na posição do coeficiente que é o coeficiente não zero, também na segunda etapa, dentre não zero obtido na terceira etapa, é transmitido à informação de codificação sem perdas como informação codificada.

[00408] Pela realização de um processo como este, embora somente o QPMB seja transmitido à informação de imagem comprimida como o parâmetro de quantização, torna-se possível realizar quantização adaptativa e aumentar a qualidade da imagem subjetiva da informação de imagem comprimida que é uma saída pela realização de um pseudoprocesso para cada bloco pelo uso dos valores de QP00 até QP33. [Aparelho de Codificação de Imagem]

[00409] A figura 29 é um diagrama de blocos que ilustra um exemplo de configuração principal do aparelho de codificação de imagem no qual a presente tecnologia é aplicada. Da forma ilustrada na figura 29, um aparelho de codificação de imagem 500 neste caso tem uma configuração basicamente similar àquela de um aparelho de codificação de imagem 100 da figura 1 e realiza um processo similar.

[00410] Entretanto, o aparelho de codificação de imagem 500 inclui um controlador de taxa 317, uma unidade de quantização da unidade de codificação 504 e uma unidade de quantização 505 no lugar de uma unidade de quantização 105, um controlador de taxa 117 e uma unidade de quantização de submacrobloco 121 do aparelho de codificação de imagem 100.

[00411] Embora o aparelho de codificação de imagem 100 da figura 1 inclua uma unidade de quantização inversa do submacrobloco 122, além de uma unidade de quantização inversa 108, o aparelho de codificação de imagem 500 inclui somente a unidade de quantização inversa 108. Isto é, um processo de quantização inversa é realizado para cada LCU (macrobloco) como na AVC convencional e congêneres. Isto também se aplica ao aparelho de decodificação de imagem correspondente ao aparelho de codificação de imagem 500.

[00412] A unidade de quantização da unidade de codificação 504 realiza a quantização para cada unidade de codificação (por exemplo, SCU) pelo uso da atividade para cada unidade de codificação obtida pelo controlador de taxa 317.

[00413] A unidade de quantização 505 obtém o parâmetro de quantização para cada LCU e realiza a quantização para cada unidade de codificação pelo uso do mesmo. Então, a unidade de quantização 505 substitui o coeficiente não zero dentre coeficientes de transformada ortogonal quantizados das unidades de codificação obtidos pela unidade de quantização da unidade de codificação 504 por um resultado do processo de quantização pela unidade de quantização 505 (coeficiente de transformada ortogonal quantizado) na mesma posição.

[00414] Um resultado desta substituição é suprido à unidade de codificação sem perdas 106 e à unidade de quantização inversa 108 em decorrência da quantização. Também, o parâmetro de quantização para cada LCU calculada pela unidade de quantização 505 é suprido à unidade de codificação sem perdas 106 e à unidade de quantização inversa 108.

[00415] A unidade de quantização inversa 108 e uma unidade de quantização inversa do aparelho de decodificação de imagem (não ilustrada) realizam quantização inversa pelo uso do parâmetro de quantização para cada LCU, como no caso da AVC convencional e congêneres. [Configurações do Controlador de Taxa, Unidade de Quantização da Unidade de Codificação e Unidade de Quantização]

[00416] A figura 30 é um diagrama de blocos que ilustra um exemplo de configuração detalhada do controlador de taxa, da unidade de quantização da unidade de codificação e da unidade de quantização da figura 29.

[00417] Da forma ilustrada na figura 30, a unidade de quantização da unidade de codificação 504 inclui uma unidade de determinação de parâmetro de quantização da unidade de codificação 511, um processador de quantização da unidade de codificação 512 e um armazenamento temporário de posição do coeficiente não zero 513.

[00418] A unidade de determinação de parâmetro de quantização da unidade de codificação 511 determina um parâmetro de quantização CU_QP para cada unidade de codificação (por exemplo, SCU) em uma camada inferior à LCU pelo uso da atividade para cada unidade de codificação (por exemplo, SCU) na camada inferior à LCU suprida a partir de um armazenamento temporário da atividade 322 do controlador de taxa 317. A unidade de determinação de parâmetro de quantização da unidade de codificação 511 supre o parâmetro de quantização CU_QP para cada unidade de codificação ao processador de quantização da unidade de codificação 512 e a uma unidade de determinação do parâmetro de quantização da LCU 522 da unidade de quantização 505.

[00419] O processador de quantização da unidade de codificação 512 quantiza o coeficiente de transformada ortogonal suprido a partir de um armazenamento temporário do coeficiente de transformada ortogonal 521 da unidade de quantização 505 para cada unidade de codificação (por exemplo, SCU) na camada inferior à LCU pelo uso do parâmetro de quantização CU_QP para cada unidade de codificação suprida a partir da unidade de determinação de parâmetro de quantização da unidade de codificação 511. O processador de quantização da unidade de codificação 512 supre a posição da unidade de codificação na qual o valor não é 0 (coeficiente não zero) dentre coeficientes de transformada ortogonal quantizados das unidades de codificação obtidos pela quantização ao armazenamento temporário de posição do coeficiente não zero 513, e permite que o mesmo mantenha esta posição.

[00420] O armazenamento temporário de posição do coeficiente não zero 513 supre a posição mantida do coeficiente não zero a uma unidade de substituição de coeficiente 524 da unidade de quantização 505 em um sincronismo pré-determinado.

[00421] Da forma ilustrada na figura 30, a unidade de quantização 505 inclui o armazenamento temporário do coeficiente de transformada ortogonal 521, a unidade de determinação do parâmetro de quantização da LCU 522, um processador de quantização da LCU 523 e a unidade de substituição de coeficiente 524.

[00422] O armazenamento temporário do coeficiente de transformada ortogonal 521 mantém o coeficiente de transformada ortogonal suprido a partir de uma unidade de transformada ortogonal 104 e supre o coeficiente de transformada ortogonal mantido ao processador de quantização da unidade de codificação 512 e ao processador de quantização da LCU 523 em um sincronismo pré-determinado.

[00423] A unidade de determinação do parâmetro de quantização da LCU 522 determina um valor mínimo na LCU dos parâmetros de quantização CU_QP para cada unidade de codificação suprida a partir da unidade de determinação de parâmetro de quantização da unidade de codificação 511 como um parâmetro de quantização LCU_QP para cada LCU, da forma representada pela supradescrita Equação (19). A unidade de determinação do parâmetro de quantização da LCU 522 supre o parâmetro de quantização LCU_QP (valor mínimo de CU_QP na LCU atual) para cada LCU ao processador de quantização da LCU 523.

[00424] O processador de quantização da LCU 523 quantiza o coeficiente de transformada ortogonal suprido a partir do armazenamento temporário do coeficiente de transformada ortogonal 521 para cada unidade de codificação (por exemplo, SCU) na camada inferior à LCU pelo uso do parâmetro de quantização LCU_QP para cada LCU suprido a partir da unidade de determinação do parâmetro de quantização da LCU 522. O processador de quantização da LCU 523 supre o coeficiente de transformada ortogonal quantizado para cada unidade de codificação obtido pela quantização à unidade de substituição de coeficiente 524.

[00425] A unidade de substituição de coeficiente 524 substitui o coeficiente na posição diferente da posição do coeficiente não zero suprida a partir do armazenamento temporário de posição do coeficiente não zero 513, dentre coeficientes cujo valor não é 0 (coeficiente não zero), dos coeficientes de transformada ortogonal quantizados pelo processador de quantização da LCU 523, por 0.

[00426] Isto é, a unidade de substituição de coeficiente 524 adota um valor do resultado da quantização como o coeficiente de transformada ortogonal quantizado somente para a unidade de codificação (na camada inferior à LCU) na qual o valor do resultado da quantização obtido não é 0 tanto na quantização que usa o parâmetro de quantização CU_QP determinado para cada unidade de codificação na camada inferior à LCU quanto na quantização que usa o parâmetro de quantização LCU_QP determinado para cada LCU. Por outro lado, a unidade de substituição de coeficiente 524 define todos os valores de todos os coeficientes de transformada ortogonal quantizados em 0 para outras unidades de codificação (na camada inferior à LCU).

[00427] A unidade de substituição de coeficiente 524 supre o coeficiente de transformada ortogonal quantizado cujo valor é apropriadamente substituído desta maneira à unidade de codificação sem perdas 106 e à unidade de quantização inversa 108 juntamente com o parâmetro de quantização LCU_QP determinado para cada LCU.

[00428] A unidade de codificação sem perdas 106 codifica dados de coeficiente e parâmetro de quantização supridos para suprir ao aparelho de decodificação de imagem (capaz de decodificar dados codificados gerados pelo aparelho de codificação de imagem 500) correspondente ao aparelho de codificação de imagem 500. O aparelho de decodificação de imagem realiza a quantização inversa pelo uso do parâmetro de quantização LCU_QP para cada LCU suprida a partir do aparelho de codificação de imagem 500, como no caso da AVC convencional e congêneres.

[00429] Similarmente, a unidade de quantização inversa 108 quantiza inversamente os dados de coeficiente supridos a partir de unidade de substituição de coeficiente 524 pelo uso do parâmetro de quantização LCU_QP para cada LCU suprida a partir da unidade de substituição de coeficiente 524.

[00430] Neste particular, a unidade de quantização inversa 108 tem uma configuração basicamente similar àquela da unidade de quantização inversa 203 descrita em relação à figura 10. Entretanto, no caso da unidade de quantização inversa 108, um processador de quantização inversa 253 quantiza inversamente o coeficiente de transformada ortogonal quantizado suprido a partir de um armazenamento temporário do coeficiente de transformada ortogonal 252 pelo uso do parâmetro de quantização (parâmetro de quantização LCU_QP para cada LCU) suprido a partir de um armazenamento temporário do parâmetro de quantização 251. [Fluxo do Processo de Codificação]

[00431] A seguir, um exemplo de um fluxo de um processo de codificação executado pelo aparelho de codificação de imagem 500 é descrito em relação a um fluxograma da figura 31. Neste caso, cada processo do processo de codificação é realizado de uma maneira basicamente similar àquela em cada processo do processo de codificação descrito em relação ao fluxograma da figura 7.

[00432] Isto é, processos das etapas S701 até S704 são realizados como os processos das etapas S101 até S104 da figura 7. Entretanto, o processo de quantização da etapa S705 é realizado no lugar das etapas S105 e S106 da figura 7. Também, processos das etapas S706 até S716 são realizados como os processos das etapas S106 até S117. [Fluxo do Processo de Quantização]

[00433] A seguir, um exemplo de um fluxo do processo de quantização executado na etapa S705 da figura 31 é descrito em relação a um fluxograma da figura 32.

[00434] Quando o processo de quantização for iniciado, uma unidade de cálculo da atividade 321 calcula a atividade para cada unidade de codificação na etapa S731.

[00435] Na etapa S732, a unidade de determinação de parâmetro de quantização da unidade de codificação 511 determina o parâmetro de quantização CU_QP para cada unidade de codificação na camada inferior à LCU.

[00436] Na etapa S733, a unidade de determinação do parâmetro de quantização da LCU 522 determina o parâmetro de quantização LCU_QP para cada LCU.

[00437] Na etapa S734, o processador de quantização da unidade de codificação 512 realiza a quantização pelo uso do parâmetro de quantização CU_QP para cada unidade de codificação na camada inferior à LCU.

[00438] Na etapa S735, o armazenamento temporário de posição do coeficiente não zero 513 mantém a posição do coeficiente não zero gerada pelo processo de quantização da etapa S734.

[00439] Na etapa S736, o processador de quantização da LCU 523 realiza a quantização pelo uso do parâmetro de quantização LCU_QP para cada LCU.

[00440] Na etapa S737, a unidade de substituição de coeficiente 524 substitui o valor do coeficiente de transformada ortogonal quantizado da unidade de codificação na camada inferior à LCU na posição diferente da posição do coeficiente não zero mantido pelo processo da etapa S735 por 0.

[00441] Quando a substituição for finalizada, o processo de quantização é finalizado e o processo é retornado para a etapa S705 da figura 31, então, os processos da etapa S706 e subsequentes etapas são executados.

[00442] Da forma supradescrita, em um aparelho de codificação de informação de imagem e um aparelho de decodificação de informação de imagem cujas saída e entrada são a informação de imagem comprimida, respectivamente, com base em um sistema de codificação que usa um macrobloco ampliado, é possível realizar a quantização adaptativa com base em características de uma área plana e uma área com textura, mesmo quando elas estiverem misturadas em uma única LCU (macrobloco) pela realização do pseudoprocesso de quantização para cada unidade de código (submacrobloco) na camada inferior à LCU, desse modo, aumentando a qualidade da imagem subjetiva. <6. Sexta Modalidade> [Aplicação na Codificação de Imagem Multivisualizações / Decodificação de Imagem Multivisualizações]

[00443] A supradescrito série de processos pode ser aplicada na codificação de imagem multivisualizações e na decodificação de imagem multivisualizações. A figura 33 ilustra um exemplo de um sistema de codificação de imagem multivisualizações.

[00444] Da forma ilustrada na figura 33, uma imagem multivisualizações inclui imagens provenientes de uma pluralidade de pontos de visualização e uma imagem proveniente de um ponto de visualização pré- determinado, dentre uma pluralidade de pontos de visualização, é especificada como uma imagem de visualização base. Uma imagem proveniente de cada ponto de visualização diferente da imagem de visualização base é tratada como imagem de visualização não base.

[00445] Quando a codificação de imagem multivisualizações ilustrada na figura 33 for realizada, também é possível obter a diferença entre parâmetros de quantização de cada visualização (visualização idêntica). (1) visualização base: (1-1) dQP(visualização base) = Current_CU_QP(visualização base) - LCU_QP(visualização base) (1-2) dQP(visualização base) = Current_CU_QP(visualização base) - Previous_CU_QP(visualização base) (1-3) dQP(visualização base) = Current_CU_QP(visualização base) - Slice_QP(visualização base) (2) visualização não base: (2-1) dQP(visualização não base) = Current_CU_QP (visualização não base) - LCU_QP(visualização não base) (2-2) dQP(visualização não base) = CurrentQP(visualização não base) - PreviousQP(visualização não base) (2-3) dQP(visualização não base) = Current_CU_QP (visualização não base) - Slice_QP(visualização não base)

[00446] Quando a codificação de imagem multivisualizações for realizada, também é possível obter a diferença entre os parâmetros de quantização para cada visualização (visualizações diferentes). (3) visualização base / visualização não base: (3-1) dQP(intervisualização) = Slice_QP(visualização base) - Slice_QP(visualização não base) (3-2) dQP(intervisualização) = LCU_QP(visualização base) - LCU_QP(visualização não base) (4) visualização não base / visualização não base: (4-1) dQP(intervisualização) = Slice_QP(visualização não base i) - Slice_QP(visualização não base j) (4-2) dQP(intervisualização) = LCU_QP(visualização não base i) - LCU_QP(visualização não base j)

[00447] Neste caso, também é possível combinar os supradescritos (1) até (4). Por exemplo, na visualização não base, um método de obtenção da diferença entre os parâmetros de quantização em um nível da fatia entre a visualização base e a visualização não base (3-1 e 2-3 são combinados) e um método de obtenção da diferença entre os parâmetros de quantização em um nível da LCU entre a visualização base e a visualização não base (3-2 e 2-1 são combinados) são considerados. Desta maneira, também é possível aumentar a eficiência de codificação em um caso em que a codificação multivisualizações é realizada pela aplicação repetida da diferença.

[00448] Como no método supradescrito, também é possível definir um indicador para identificar se há dQP cujo valor não é 0 para cada dQP supradescrito. [Aparelho de Codificação de Imagem Multivisualizações]

[00449] A figura 34 é uma visualização que ilustra um aparelho de codificação de imagem multivisualizações, que realiza a supradescrita codificação de imagem multivisualizações. Da forma ilustrada na figura 34, um aparelho de codificação de imagem multivisualizações 600 inclui uma unidade de codificação 601, uma unidade de codificação 602 e uma unidade de multiplexação 603.

[00450] A unidade de codificação 601 codifica a imagem de visualização base para gerar um fluxo codificado de imagem de visualização base. A unidade de codificação 602 codifica a imagem de visualização não base para gerar um fluxo codificado de imagem de visualização não base. A unidade de multiplexação 603 multiplexa o fluxo codificado de imagem de visualização base gerado pela unidade de codificação 601 e o fluxo codificado de imagem de visualização não base gerado pela unidade de codificação 602 para gerar um fluxo codificado de imagem multivisualizações.

[00451] Um aparelho de codificação de imagem 100 (figura 1), um aparelho de codificação de imagem 300 (figura 18) ou um aparelho de codificação de imagem 500 (figura 29) podem ser aplicados na unidade de codificação 601 e na unidade de codificação 602 do aparelho de codificação de imagem multivisualizações 600. Neste caso, o aparelho de codificação de imagem multivisualizações 600 define um valor da diferença entre o parâmetro de quantização definido pela unidade de codificação 601 e o parâmetro de quantização definido pela unidade de codificação 602 para transmissão. [Aparelho de Decodificação de Imagem Multivisualizações]

[00452] A figura 35 é uma visualização que ilustra um aparelho de decodificação de imagem multivisualizações que realiza a supradescrita decodificação de imagem multivisualizações. Da forma ilustrada na figura 35, um aparelho de decodificação de imagem multivisualizações 610 inclui uma unidade de demultiplexação 611, uma unidade de decodificação 612 e uma unidade de decodificação 613.

[00453] A unidade de demultiplexação 611 demultiplexa o fluxo codificado de imagem multivisualizações no qual o fluxo codificado de imagem de visualização base e o fluxo codificado de imagem de visualização não base são multiplexados para extrair o fluxo codificado de imagem de visualização base e o fluxo codificado de imagem de visualização não base. A unidade de decodificação 612 decodifica o fluxo codificado de imagem de visualização base extraído pela unidade de demultiplexação 611 para obter a imagem de visualização base. A unidade de decodificação 613 decodifica o fluxo codificado de imagem de visualização não base extraído pela unidade de demultiplexação 611 para obter a imagem de visualização não base.

[00454] É possível aplicar um aparelho de decodificação de imagem 200 (figura 9) ou um aparelho de decodificação de imagem 400 (figura 21) na unidade de decodificação 612 e na unidade de decodificação 613 do aparelho de decodificação de imagem multivisualizações 610. Neste caso, o aparelho de decodificação de imagem multivisualizações 610 define o parâmetro de quantização proveniente do valor da diferença entre o parâmetro de quantização definido pela unidade de codificação 601 e o parâmetro de quantização definido pela unidade de codificação 602 para realizar quantização inversa. <7. Sétima Modalidade> [Aplicação na Codificação do Ponto da Imagem Hierárquica / Decodificação De imagem hierárquica]

[00455] A supradescrito série de processos pode ser aplicada na codificação de imagem hierárquica / decodificação de imagem hierárquica. A figura 36 ilustra um exemplo de um sistema de codificação de imagem multivisualizações.

[00456] Da forma ilustrada na figura 36, uma imagem hierárquica inclui imagens de uma pluralidade de camadas (resoluções), e uma imagem de uma camada pré-determinada dentre uma pluralidade de resoluções é especificada como uma imagem da camada base. Uma imagem de cada camada diferente da imagem da camada base é tratada como uma imagem da camada não base.

[00457] Quando a codificação de imagem hierárquica (escalonabilidade espacial) ilustrada na figura 36 for realizada, também é possível obter diferença entre parâmetros de quantização de cada camada (camada idêntica): (1) camada base: (1-1) dQP(camada base) = Current_CU_QP(camada base) - LCU_QP(camada base) (1-2) dQP(camada base) = Current_CU_QP(camada base) - Previous_CU_QP(camada base) (1-3) dQP(camada base) = Current_CU_QP(camada base) - Slice_QP(camada base) (2) camada não base: (2-1) dQP(camada não base) = Current_CU_QP(camada não base) - LCU_QP(camada não base) (2-2) dQP(camada não base) = CurrentQP(camada não base) - PreviousQP(camada não base) (2-3) dQP(camada não base) = Current_CU_QP(camada não base) - Slice_QP(camada não base) Quando a codificação hierárquica for realizada, também é possível obter a diferença entre os parâmetros de quantização de cada camada (diferentes camadas). (3) camada base / camada não base: (3-1) dQP(intercamadas) = Slice_QP(camada base) - Slice_QP (camada não base) (3-2) dQP(intercamadas) = LCU_QP(camada base) - LCU_QP (camada não base) (4) camada não base / camada não base: (4-1) dQP(intercamadas) = Slice_QP(camada não base i) - Slice_QP(camada não base j) (4-2) dQP(intercamadas) = LCU_QP(camada não base i) - LCU_QP(camada não base j)

[00458] Neste caso, também é possível combinar os supradescritos (1) até (4). Por exemplo, na camada não base, um método de obtenção da diferença entre os parâmetros de quantização em um nível da fatia entre a camada base e a camada não base (3-1 e 2-3 são combinados) e um método de obtenção da diferença entre os parâmetros de quantização em um nível da LCU entre a camada base e a camada não base (3-2 e 2-1 são combinados) são considerados. Desta maneira, pela repetida aplicação da diferença, também se torna possível aumentar a eficiência de codificação quando a codificação hierárquica for realizada.

[00459] Também é possível definir um indicador para identificar se há dQP cujo valor não é 0 para cada dQP supradescrito, como no método supradescrito. [Aparelho de Codificação de Imagem Hierárquica]

[00460] A figura 37 é uma visualização que ilustra um aparelho de codificação de imagem hierárquica, que realiza a supradescrita codificação de imagem hierárquica. Da forma ilustrada na figura 37, um aparelho de codificação de imagem hierárquica 620 inclui uma unidade de codificação 621, uma unidade de codificação 622 e uma unidade de multiplexação 623.

[00461] A unidade de codificação 621 codifica a imagem da camada base para gerar um fluxo codificado da imagem da camada base. A unidade de codificação 622 codifica a imagem da camada não base para gerar um fluxo codificado da imagem da camada não base. A unidade de multiplexação 623 multiplexa o fluxo codificado da imagem da camada base gerado pela unidade de codificação 621 e o fluxo codificado da imagem da camada não base gerado pela unidade de codificação 622 para gerar um fluxo codificado da imagem hierárquica.

[00462] Um aparelho de codificação de imagem 100 (figura 1), um aparelho de codificação de imagem 300 (figura 18) ou um aparelho de codificação de imagem 500 (figura 29) podem ser aplicados na unidade de codificação 621 e na unidade de codificação 622 do aparelho de codificação de imagem hierárquica 620. Neste caso, o aparelho de codificação de imagem hierárquica 600 define um valor da diferença entre o parâmetro de quantização definido pela unidade de codificação 621 e o parâmetro de quantização definido pela unidade de codificação 622 para transmissão. [Aparelho de Decodificação de Imagem Hierárquica]

[00463] A figura 38 é uma visualização que ilustra um aparelho de decodificação de imagem hierárquica que realiza a supradescrita decodificação de imagem hierárquica. Da forma ilustrada na figura 38, um aparelho de decodificação de imagem hierárquica 630 inclui uma unidade de demultiplexação 631, uma unidade de decodificação 632 e uma unidade de decodificação 633.

[00464] A unidade de demultiplexação 631 demultiplexa o fluxo codificado da imagem hierárquica obtido pela multiplexação do fluxo codificado da imagem da camada base e do fluxo codificado da imagem da camada não base para extrair o fluxo codificado da imagem da camada base e o fluxo codificado da imagem da camada não base. A unidade de decodificação 632 decodifica o fluxo codificado da imagem da camada base extraído pela unidade de demultiplexação 631 para obter a imagem da camada base. A unidade de decodificação 633 decodifica o fluxo codificado da imagem da camada não base extraído pela unidade de demultiplexação 631 para obter a imagem da camada não base.

[00465] Um aparelho de decodificação de imagem 200 (figura 9) ou um aparelho de decodificação de imagem 400 (figura 21) podem ser aplicados na unidade de decodificação 632 e na unidade de decodificação 633 do aparelho de decodificação de imagem hierárquica 630. Neste caso, o aparelho de decodificação de imagem hierárquica 630 define o parâmetro de quantização do valor da diferença entre o parâmetro de quantização definido pela unidade de codificação 631 e o parâmetro de quantização definido pela unidade de codificação 632 para realizar quantização inversa. <8. Oitava Modalidade> [Computador]

[00466] É possível que a supradescrita série de processos seja executada por hardware ou executada por software. Neste caso, ela pode ser configurada como um computador ilustrado na figura 39, por exemplo.

[00467] Na figura 39, uma CPU (Unidade Central de Processamento) 701 de um computador pessoal 700 executa vários processos de acordo com um programa armazenado em uma ROM (Memória Exclusiva de Leitura) 702 ou um programa carregado a partir de uma unidade de armazenamento 713 em uma RAM (Memória de Acesso Aleatório) 703. Dados necessários para que a CPU 701 execute os vários processos também são apropriadamente armazenados na RAM 703.

[00468] A CPU 701, a ROM 702 e a RAM 703 são conectadas umas nas outras através de um barramento 704. Uma interface de entrada / saída 710 também é conectada no barramento 704.

[00469] Uma unidade de entrada 711 formada por um teclado, um mouse e congêneres, uma unidade de saída 712 formada por uma tela, formada por um CRT (Tubo de Raios Catódicos) e uma LCD (Tela de Cristal Líquido), um alto-falante e congêneres, a unidade de armazenamento 713 formada por um disco rígido e congêneres e uma unidade de comunicação 714 formada por um modem e congêneres são conectadas na interface de entrada / saída 710. A unidade de comunicação 714 realiza um processo de comunicação através de uma rede, incluindo a Internet.

[00470] Uma unidade de disco 715 é conectada na interface de entrada / saída 710, conforme necessário, uma mídia removível 721, tais como um disco magnético, um disco ótico, um disco magneto-ótico e uma memória semicondutora, é nela apropriadamente montada, e um programa de computador lido a partir da mídia é instalado na unidade de armazenamento 713, conforme necessário.

[00471] Quando a supradescrita série de processos for executada por software, um programa, que compõe o software, é instalado a partir da rede ou de uma mídia de gravação.

[00472] A mídia de gravação é composta não somente pela mídia removível 721, que inclui o disco magnético (incluindo um disco flexível), o disco ótico (incluindo um CD-ROM (Memória Exclusiva de Leitura em Disco Compacto) e um DVD (Disco Versátil Digital)), o disco magneto-ótico (incluindo um MD (MiniDisco)) e a memória semicondutora, na qual o programa é gravado, distribuído a um usuário para distribuir o programa separadamente de um corpo principal do aparelho, mas, também, pela ROM 702 na qual o programa é gravado e o disco rígido incluído na unidade de armazenamento 713 distribuído ao usuário em um estado embutido antecipadamente no corpo principal do aparelho, da forma ilustrada na figura 39, por exemplo.

[00473] Neste particular, o programa executado pelo computador pode ser o programa cujos processos são cronologicamente realizados na ordem descrita nesta especificação ou o programa cujos processos são realizados em paralelo ou em um sincronismo exigido, tal como quando este for chamado.

[00474] Também, nesta especificação, uma etapa de descrição do programa gravado na mídia de gravação inclui não somente os processos cronologicamente realizados na ordem descrita, mas, também, os processos executados em paralelo ou individualmente, que não são necessariamente realizados cronologicamente.

[00475] Também, nesta especificação, um sistema significa a íntegra de um aparelho, incluindo uma pluralidade de dispositivos (aparelho).

[00476] Também é possível dividir a configuração supradescrita como um aparelho (ou processador) em uma pluralidade de aparelhos (ou processadores). De outra maneira, também é possível colocar as configurações supradescritas como uma pluralidade de aparelhos (ou processadores) em conjunto como um aparelho (ou processador). É desnecessário dizer que uma configuração diferente daquela supradescrita pode ser adicionada na configuração de cada aparelho (ou cada processador). Adicionalmente, também é possível adicionar uma parte da configuração de um certo aparelho (ou processador) na configuração de um outro aparelho (ou um outro processador), desde que a configuração e a operação como a íntegra de um sistema sejam substancialmente as mesmas. Isto é, uma modalidade da presente tecnologia não é limitada às supradescritas modalidades, e várias modificações podem ser feitas sem fugir do espírito da presente tecnologia.

[00477] Um aparelho de codificação de imagem 100 (figura 1), um aparelho de codificação de imagem 300 (figura 18), um aparelho de codificação de imagem 500 (figura 29), um aparelho de codificação de imagem multivisualizações 600 (figura 34), um aparelho de codificação de imagem hierárquica 620 (figura 37), um aparelho de decodificação de imagem 200 (figura 9), um aparelho de decodificação de imagem 400 (figura 21), um aparelho de decodificação de imagem multivisualizações 610 (figura 35) e um aparelho de decodificação de imagem hierárquica 630 (figura 38) de acordo com as supradescritas modalidades são aplicáveis em vários dispositivos eletrônicos, tais como um transmissor ou um receptor de difusão via satélite, difusão a cabo para uma televisão a cabo e congêneres, distribuição na Internet, distribuição a um terminal através de comunicação celular e congêneres, um aparelho de gravação, que grava uma imagem na mídia, tais como o disco ótico, o disco magnético e uma memória flash, ou um aparelho de reprodução, que reproduz a imagem a partir de uma mídia de armazenamento. Quatro aplicações são descritas a seguir. [Aparelho de Televisão]

[00478] A figura 40 ilustra um exemplo de uma configuração esquemática de um aparelho de televisão no qual a supradescrita modalidade é aplicada. Um aparelho de televisão 900 inclui uma antena 901, um sintonizador 902, um demultiplexador 903, um decodificador 904, um processador de sinal de vídeo 905, uma unidade de exibição 906, um processador de sinal de voz 907, um alto-falante 908, uma interface externa 909, um controlador 910, uma interface de usuário 911 e um barramento 912.

[00479] O sintonizador 902 extrai um sinal de um canal desejado a partir de um sinal de difusão recebido através da antena 901 e demodula o sinal extraído. Então, o sintonizador 902 transmite um fluxo contínuo de bits codificado obtido pela demodulação ao demultiplexador 903. Isto é, o sintonizador 902 serve como dispositivo de transmissão no aparelho de televisão 900, que recebe o fluxo codificado no qual a imagem é codificada.

[00480] O demultiplexador 903 separa um fluxo contínuo de vídeo e um fluxo contínuo de voz de um programa a ser assistido a partir do fluxo contínuo de bits codificado, e transmite cada fluxo contínuo separado ao decodificador 904.

[00481] Também, o demultiplexador 903 extrai dados auxiliares, tal como EPG (Guia Eletrônico de Programa), a partir do fluxo contínuo de bits codificado e supre os dados extraídos ao controlador 910. Neste particular, o demultiplexador 903 pode desembaralhar quando o fluxo contínuo de bits codificado estiver embaralhado.

[00482] O decodificador 904 decodifica o fluxo contínuo de vídeo e o fluxo contínuo de voz inseridos a partir do demultiplexador 903. Então, o decodificador 904 transmite dados de vídeo gerados por um processo de decodificação ao processador de sinal de vídeo 905. Também, o decodificador 904 transmite dados de voz gerados pelo processo de decodificação ao processador de sinal de voz 907.

[00483] O processador de sinal de vídeo 905 reproduz os dados de vídeo inseridos a partir do decodificador 904 e permite que a unidade de exibição 906 exiba o vídeo. O processador de sinal de vídeo 905 também pode permitir que a unidade de exibição 906 exiba uma tela de aplicação suprida através da rede. O processador de sinal de vídeo 905 também pode realizar um processo adicional, tal como remoção de ruído, por exemplo, nos dados de vídeo de acordo com a definição. Adicionalmente, o processador de sinal de vídeo 905 pode gerar uma imagem da GUI (Interface Gráfica de Usuário), tais como um menu, um botão e um cursor, por exemplo, e sobrepõe a imagem gerada em uma imagem de saída.

[00484] A unidade de exibição 906 é acionada por um sinal de acionamento suprido a partir do processador de sinal de vídeo 905 para exibir o vídeo ou a imagem em uma tela de vídeo de um dispositivo de exibição (por exemplo, uma tela de cristal líquido, uma tela de plasma, um OELD (Tela de Eletroluminescência Orgânica (tela EL orgânica) e congêneres).

[00485] O processador de sinal de voz 907 realiza um processo de reprodução, tais como conversão D/A e amplificação, nos dados de voz inseridos a partir do decodificador 904 e permite que o alto-falante 908 transmita voz. O processador de sinal de voz 907 também pode realizar um processo adicional, tal como a remoção de ruído, nos dados de voz.

[00486] A interface externa 909 é a interface para conectar o aparelho de televisão 900 e um dispositivo externo ou a rede. Por exemplo, o fluxo contínuo de vídeo ou o fluxo contínuo de voz recebidos através da interface externa 909 podem ser decodificados pelo decodificador 904. Isto é, a interface externa 909 também serve como o dispositivo de transmissão no aparelho de televisão 900, que recebe o fluxo codificado no qual a imagem é codificada.

[00487] O controlador 910 inclui um processador, tal como a CPU, e uma memória, tais como a RAM e a ROM. A memória armazena o programa executado pela CPU, dados de programa, os dados EPG, dados obtidos através da rede e congêneres. O programa armazenado na memória é lido pela CPU na inicialização do aparelho de televisão 900 para ser executado, por exemplo. A CPU controla a operação do aparelho de televisão 900 de acordo com um sinal de operação inserido a partir da interface de usuário 911, por exemplo, pela execução do programa.

[00488] A interface de usuário 911 é conectada no controlador 910. A interface de usuário 911 inclui um botão e um comutador para que o usuário opere o aparelho de televisão 900, um receptor de um sinal de controle remoto e congêneres, por exemplo. A interface de usuário 911 detecta a operação do usuário através dos componentes para gerar o sinal de operação e transmite o sinal de operação gerado ao controlador 910.

[00489] O barramento 912 conecta o sintonizador 902, o demultiplexador 903, o decodificador 904, o processador de sinal de vídeo 905, o processador de sinal de voz 907, a interface externa 909 e o controlador 910 uns nos outros.

[00490] No aparelho de televisão 900 configurado desta maneira, o decodificador 904 tem funções do aparelho de decodificação de imagem 200 (figura 9), do aparelho de decodificação de imagem 400 (figura 21), do aparelho de decodificação de imagem multivisualizações 610 (figura 35) ou do aparelho de decodificação de imagem hierárquica 630 (figura 38) de acordo com as supradescritas modalidades. Portanto, o decodificador 904 calcula um valor de quantização para cada submacrobloco pelo uso de um parâmetro de quantização, tal como submp_qp_delta, suprido a partir de um lado de codificação para realizar quantização inversa para o vídeo decodificado pelo aparelho de televisão 900. Portanto, é possível realizar um processo de quantização inversa mais adequado para conteúdos da imagem, desse modo, inibindo que a qualidade da imagem subjetiva de uma imagem decodificada se deteriore. [Telefone Celular]

[00491] A figura 41 ilustra um exemplo de uma configuração esquemática de um telefone celular no qual a supradescrita modalidade é aplicada. Um telefone celular 920 é provido com uma antena 921, uma unidade de comunicação 922, um codec de voz 923, um alto-falante 924, um microfone 925, uma unidade de câmera 926, um processador de imagem 927, uma unidade de multiplexação / separação 928, uma unidade de gravação / reprodução 929, uma unidade de exibição 930, um controlador 931, uma unidade de operação 932 e um barramento 933.

[00492] A antena 921 é conectada na unidade de comunicação 922. O alto-falante 924 e o microfone 925 são conectados no codec de voz 923. A unidade de operação 932 é conectada no controlador 931. O barramento 933 conecta a unidade de comunicação 922, o codec de voz 923, a unidade de câmera 926, o processador de imagem 927, a unidade de multiplexação / separação 928, a unidade de gravação / reprodução 929, a unidade de exibição 930 e o controlador 931 uns nos outros.

[00493] O telefone celular 920 realiza operação, tais como transmissão / recepção de um sinal de voz, transmissão / recepção de um correio eletrônico ou dados da imagem, tomada de imagem e gravação de dados em vários modos de operação, incluindo um modo de comunicação por voz, um modo de comunicação de dados, um modo de formação de imagem e um modo televisão - telefone.

[00494] No modo de comunicação por voz, um sinal de voz analógico gerado pelo microfone 925 é suprido ao codec de voz 923. O codec de voz 923 converte o sinal de voz analógico nos dados de voz e realiza conversão A/D dos dados de voz convertidos para compressão. Então, o codec de voz 923 transmite os dados de voz comprimidos à unidade de comunicação 922. A unidade de comunicação 922 codifica e modula os dados de voz para gerar um sinal de transmissão. Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado a uma estação base (não ilustrada) através da antena 921. Também, a unidade de comunicação 922 amplifica um sinal sem fios recebido através da antena 921 e aplica conversão de frequência no mesmo para obter um sinal de recepção. Então, a unidade de comunicação 922 gera os dados de voz pela demodulação e decodificação do sinal de recepção e transmite os dados de voz gerados ao codec de voz 923. O codec de voz 923 expande os dados de voz e realiza conversão D/A dos mesmos para gerar o sinal de voz analógico. Então, o codec de voz 923 supre o sinal de voz gerado ao alto-falante 924 para permitir que o mesmo transmita a voz.

[00495] No modo de comunicação de dados, por exemplo, o controlador 931 gera dados de caractere que compõem o correio eletrônico de acordo com a operação do usuário através da unidade de operação 932. Também, o controlador 931 permite que a unidade de exibição 930 exiba caracteres. O controlador 931 gera dados de correio eletrônico de acordo com uma instrução de transmissão do usuário através da unidade de operação 932 para transmitir os dados de correio eletrônico gerados à unidade de comunicação 922. A unidade de comunicação 922 codifica e modula os dados de correio eletrônico para gerar o sinal de transmissão. Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado à estação base (não ilustrada) através da antena 921. Também, a unidade de comunicação 922 amplifica um sinal sem fios recebido através da antena 921 e aplica a conversão de frequência no mesmo para obter o sinal de recepção. Então, a unidade de comunicação 922 demodula e decodifica o sinal de recepção para restaurar os dados de correio eletrônico e transmitir os dados de correio eletrônico restaurados ao controlador 931. O controlador 931 permite que a unidade de exibição 930 exiba conteúdos dos dados de correio eletrônico e permite que a mídia de armazenamento da unidade de gravação / reprodução 929 armazene os dados de correio eletrônico.

[00496] A unidade de gravação / reprodução 929 inclui uma mídia de armazenamento legível / gravável arbitrária. Por exemplo, a mídia de armazenamento pode ser uma mídia de armazenamento incorporada, tais como a RAM e a memória flash, e pode ser uma mídia de armazenamento externamente montada, tais como o disco rígido, o disco magnético, o disco magneto-ótico, o disco ótico, uma memória USB e um cartão de memória.

[00497] No modo de formação de imagem, por exemplo, a unidade de câmera 926 toma uma imagem de um objeto para gerar os dados da imagem e transmite os dados da imagem gerados ao processador de imagem 927. O processador de imagem 927 codifica os dados da imagem inseridos a partir da unidade de câmera 926 e armazena o fluxo codificado na mídia de armazenamento da unidade de gravação / reprodução 929.

[00498] Também, no modo televisão - telefone, por exemplo, a unidade de multiplexação / separação 928 multiplexa o fluxo contínuo de vídeo codificado pelo processador de imagem 927 e o fluxo contínuo de voz inserido a partir do codec de voz 923, e transmite o fluxo contínuo multiplexado à unidade de comunicação 922. A unidade de comunicação 922 codifica e modula o fluxo contínuo para gerar o sinal de transmissão. Então, a unidade de comunicação 922 transmite o sinal de transmissão gerado à estação base (não ilustrada) através da antena 921. Também, a unidade de comunicação 922 amplifica o sinal sem fios recebido através da antena 921 e aplica a conversão de frequência no mesmo para obter o sinal de recepção. O sinal de transmissão e o sinal de recepção podem incluir o fluxo contínuo de bits codificado. Então, a unidade de comunicação 922 restaura o fluxo contínuo pela demodulação e decodificação do sinal de recepção e transmite o fluxo contínuo restaurado à unidade de multiplexação / separação 928. A unidade de multiplexação / separação 928 separa o fluxo contínuo de vídeo e o fluxo contínuo de voz do fluxo contínuo de entrada e transmite o fluxo contínuo de vídeo e o fluxo contínuo de voz ao processador de imagem 927 e ao codec de voz 923, respectivamente. O processador de imagem 927 decodifica o fluxo contínuo de vídeo para gerar os dados de vídeo. Os dados de vídeo são supridos à unidade de exibição 930, e uma série de imagens é exibida pela unidade de exibição 930. O codec de voz 923 expande o fluxo contínuo de voz e realiza conversão D/A do mesmo para gerar o sinal de voz analógico. Então, o codec de voz 923 supre o sinal de voz gerado ao alto- falante 924 para transmitir a voz.

[00499] No telefone celular 920 configurado desta maneira, o processador de imagem 927 tem as funções do aparelho de codificação de imagem 100 (figura 1), do aparelho de codificação de imagem 300 (figura 18), do aparelho de codificação de imagem 500 (figura 29), do aparelho de codificação de imagem multivisualizações 600 (figura 34) ou do aparelho de codificação de imagem hierárquica 620 (figura 37) e as funções do aparelho de decodificação de imagem 200 (figura 9), do aparelho de decodificação de imagem 400 (figura 21), do aparelho de decodificação de imagem multivisualizações 610 (figura 35) ou do aparelho de decodificação de imagem hierárquica 630 (figura 38) de acordo com as supradescritas modalidades. Portanto, o processador de imagem 927 calcula o valor de quantização para cada submacrobloco e quantiza um coeficiente de transformada ortogonal pelo uso do valor de quantização para cada submacrobloco para o vídeo codificado e decodificado pelo telefone celular 920. Desta maneira, é possível realizar o processo de quantização mais adequado para os conteúdos da imagem e gerar os dados codificados para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore. Também, o processador de imagem 927 calcula o valor de quantização para cada submacrobloco pelo uso do parâmetro de quantização, tal como submp_qp_delta, suprido a partir do lado de codificação para realizar a quantização inversa. Portanto, é possível realizar o processo de quantização inversa mais adequado para os conteúdos da imagem para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00500] Embora tenha sido supradescrito como o telefone celular 920, o aparelho de codificação de imagem e o aparelho de decodificação de imagem nos quais a presente tecnologia é aplicada podem ser aplicados em qualquer aparelho com uma função de formação de imagem e uma função de comunicação similares àquelas do telefone celular 920, tais como um PDA (Assistentes Pessoais Digitais), um telefone inteligente, um UMPC (Computador Pessoal UltraMóvel), um netbook e um computador notebook, por exemplo, como no caso do telefone celular 920. [Aparelho de Gravação / Reprodução]

[00501] A figura 42 ilustra um exemplo de uma configuração esquemática do aparelho de gravação / reprodução no qual a supradescrita modalidade é aplicada. O aparelho de gravação / reprodução 940 codifica os dados de voz e os dados de vídeo de um programa de difusão recebido para gravar na mídia de gravação, por exemplo. Também, o aparelho de gravação / reprodução 940 pode codificar os dados de voz e os dados de vídeo obtidos a partir de um outro aparelho para gravar na mídia de gravação, por exemplo. Também, o aparelho de gravação / reprodução 940 reproduz os dados gravados na mídia de gravação por um monitor e o alto-falante de acordo com a instrução do usuário. Neste momento, o aparelho de gravação / reprodução 940 decodifica os dados de voz e os dados de vídeo.

[00502] O aparelho de gravação / reprodução 940 é provido com um sintonizador 941, uma interface externa 942, um codificador 943, uma HDD (Unidade de Disco Rígido) 944, uma unidade de disco 945, um seletor 946, um decodificador 947, uma OSD (Exibição Na Tela) 948, um controlador 949 e uma interface de usuário 950.

[00503] O sintonizador 941 extrai um sinal de um canal desejado a partir do sinal de difusão recebido através de uma antena (não ilustrada) e demodula o sinal extraído. Então, o sintonizador 941 transmite o fluxo contínuo de bits codificado obtido pela demodulação ao seletor 946. Isto é, o sintonizador 941 serve como o dispositivo de transmissão no aparelho de gravação / reprodução 940.

[00504] A interface externa 942 é a interface para conectar o aparelho de gravação / reprodução 940 e o dispositivo externo ou a rede. A interface externa 942 pode ser uma interface IEEE1394, uma interface de rede, uma interface USB, uma interface da memória flash e congêneres, por exemplo. Por exemplo, os dados de vídeo e os dados de voz recebidos através da interface externa 942 são inseridos no codificador 943. Isto é, a interface externa 942 serve como o dispositivo de transmissão no aparelho de gravação / reprodução 940.

[00505] O codificador 943 codifica os dados de vídeo e os dados de voz quando os dados de vídeo e os dados de voz inseridos a partir da interface externa 942 não forem codificados. Então, o codificador 943 transmite o fluxo contínuo de bits codificado ao seletor 946.

[00506] A HDD 944 grava o fluxo contínuo de bits codificado no qual dados de conteúdo, tais como o vídeo e a voz, são comprimidos, vários programas e outros dados em um disco rígido interno. A HDD 944 lê os dados a partir do disco rígido durante a reprodução do vídeo e da voz.

[00507] A unidade de disco 945 grava e lê os dados na mídia de gravação montada. A mídia de gravação montada na unidade de disco 945 pode ser o disco DVD (DVD-Vídeo, DVD-RAM, DVD-R, DVD-RW, DVD+R, DVD+RW e congêneres), um disco Blu-Ray (marca registrada) e congêneres, por exemplo.

[00508] O seletor 946 seleciona o fluxo contínuo de bits codificado inserido a partir do sintonizador 941 ou do codificador 943 e transmite o fluxo contínuo de bits codificado selecionado à HDD 944 ou à unidade de disco 945 durante a gravação do vídeo e da voz. Também, o seletor 946 transmite o fluxo contínuo de bits codificado inserido a partir da HDD 944 ou da unidade de disco 945 ao decodificador 947 durante a reprodução do vídeo e da voz.

[00509] O decodificador 947 decodifica o fluxo contínuo de bits codificado para gerar os dados de vídeo e os dados de voz. Então, o decodificador 947 transmite os dados de vídeo gerados à OSD 948. Também, o decodificador 904 transmite os dados de voz gerados a um alto-falante externo.

[00510] A OSD 948 reproduz os dados de vídeo inseridos a partir do decodificador 947 para exibir o vídeo. A OSD 948 também pode sobrepor a imagem da GUI, tais como o menu, o botão e o cursor, por exemplo, no vídeo exibido.

[00511] O controlador 949 inclui o processador, tal como a CPU, e a memória, tais como a RAM e a ROM. A memória armazena o programa executado pela CPU, os dados de programa e congêneres. O programa armazenado na memória é lido pela CPU para ser executado na ativação do aparelho de gravação / reprodução 940, por exemplo. A CPU controla a operação do aparelho de gravação / reprodução 940 de acordo com um sinal de operação inserido a partir da interface de usuário 950, por exemplo, pela execução do programa.

[00512] A interface de usuário 950 é conectada no controlador 949. A interface de usuário 950 inclui um botão e um comutador para que o usuário opere o aparelho de gravação / reprodução 940 e um receptor de um sinal de controle remoto, por exemplo. A interface de usuário 950 detecta a operação do usuário através dos componentes para gerar o sinal de operação e transmite o sinal de operação gerado ao controlador 949.

[00513] No aparelho de gravação / reprodução 940 configurado desta maneira, o codificador 943 tem as funções do aparelho de codificação de imagem 100 (figura 1), do aparelho de codificação de imagem 300 (figura 18), do aparelho de codificação de imagem 500 (figura 29), do aparelho de codificação de imagem multivisualizações 600 (figura 34) ou do aparelho de codificação de imagem hierárquica 620 (figura 37) de acordo com as supradescritas modalidades. Também, o decodificador 947 tem as funções do aparelho de decodificação de imagem 200 (figura 9), do aparelho de decodificação de imagem 400 (figura 21), do aparelho de decodificação de imagem multivisualizações 610 (figura 35) e do aparelho de decodificação de imagem hierárquica 630 (figura 38) de acordo com as supradescritas modalidades. Portanto, o valor de quantização para cada submacrobloco é calculado e o coeficiente de transformada ortogonal é quantizado pelo uso do valor de quantização para cada submacrobloco para o vídeo codificado e decodificado pelo aparelho de gravação / reprodução 940. Desta maneira, é possível realizar o processo de quantização mais adequado para os conteúdos da imagem e gerar os dados codificados para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore. Também, o valor de quantização para cada submacrobloco é calculado pelo uso do parâmetro de quantização, tal como submp_qp_delta, suprido a partir do lado de codificação, e a quantização inversa é realizada. Portanto, é possível realizar o processo de quantização inversa mais adequado para os conteúdos da imagem e inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore. [Aparelho de Formação de imagem]

[00514] A figura 43 ilustra um exemplo de uma configuração esquemática de um aparelho de formação de imagem no qual a supradescrita modalidade é aplicada. Um aparelho de formação de imagem 960 toma uma imagem do objeto para gerar a imagem, codifica os dados da imagem e grava os mesmos na mídia de gravação.

[00515] O aparelho de formação de imagem 960 é provido com um bloco ótico 961, uma unidade de formação de imagem 962, um processador de sinal 963, um processador de imagem 964, uma unidade de exibição 965, uma interface externa 966, uma memória 967, uma unidade de mídia 968, uma OSD 969, um controlador 970, uma interface de usuário 971 e um barramento 972.

[00516] O bloco ótico 961 é conectado na unidade de formação de imagem 962. A unidade de formação de imagem 962 é conectada no processador de sinal 963. A unidade de exibição 965 é conectada no processador de imagem 964. A interface de usuário 971 é conectada no controlador 970. O barramento 972 conecta o processador de imagem 964, a interface externa 966, a memória 967, a unidade de mídia 968, a OSD 969 e o controlador 970 uns nos outros.

[00517] O bloco ótico 961 inclui uma lente de foco, um mecanismo de diafragma e congêneres. O bloco ótico 961 forma uma imagem ótica do objeto em uma superfície de formação de imagem da unidade de formação de imagem 962. A unidade de formação de imagem 962 inclui um sensor de imagem, tais como um CCD e um CMOS, e converte a imagem ótica formada na superfície de formação de imagem em um sinal de imagem como um sinal elétrico por conversão fotoelétrica. Então, a unidade de formação de imagem 962 transmite o sinal de imagem ao processador de sinal 963.

[00518] O processador de sinal 963 realiza vários processos de sinal da câmera, tais como correção de inclinação, correção de gama, correção de cor, no sinal de imagem inserido a partir da unidade de formação de imagem 962. O processador de sinal 963 transmite os dados da imagem depois do processo de sinal da câmera ao processador de imagem 964.

[00519] O processador de imagem 964 codifica os dados da imagem inseridos a partir do processador de sinal 963 para gerar os dados codificados. Então, o processador de imagem 964 transmite os dados codificados gerados à interface externa 966 ou à unidade de mídia 968. Também, o processador de imagem 964 decodifica os dados codificados inseridos a partir da interface externa 966 ou da unidade de mídia 968 para gerar os dados da imagem. Então, o processador de imagem 964 transmite os dados da imagem gerados à unidade de exibição 965. O processador de imagem 964 também pode transmitir os dados da imagem inseridos a partir do processador de sinal 963 à unidade de exibição 965 para exibir a imagem. O processador de imagem 964 também pode sobrepor dados para exibição obtidos a partir da OSD 969 na imagem transmitida à unidade de exibição 965.

[00520] A OSD 969 gera a imagem da GUI, tais como o menu, o botão e o cursor, por exemplo, e transmite a imagem gerada ao processador de imagem 964.

[00521] A interface externa 966 é composta como um terminal de entrada / saída USB, por exemplo. A interface externa 966 conecta o aparelho de formação de imagem 960 e uma impressora durante impressão da imagem, por exemplo. Também, uma unidade de disco é conectada na interface externa 966 conforme necessário. A mídia removível, tais como o disco magnético e o disco ótico, é montada na unidade de disco, por exemplo, e o programa lido a partir da mídia removível pode ser instalado no aparelho de formação de imagem 960. Adicionalmente, a interface externa 966 pode ser configurada como uma interface de rede conectada na rede, tais como um LAN e a Internet. Isto é, a interface externa 966 serve como o dispositivo de transmissão no aparelho de formação de imagem 960.

[00522] A mídia de gravação montada na unidade de mídia 968 pode ser uma mídia removível legível / gravável arbitrária, tais como o disco magnético, o disco magneto-ótico, o disco ótico e a memória semicondutora, por exemplo. Também é possível que a mídia de gravação seja fixamente montada na unidade de mídia 968 para compor uma unidade de armazenamento não portátil, tal como uma unidade de disco rígido incorporada ou SSD (Unidade em Estado Sólido), por exemplo.

[00523] O controlador 970 inclui o processador, tal como a CPU, e a memória, tais como a RAM e a ROM. A memória armazena o programa executado pela CPU e os dados de programa. O programa armazenado na memória é lido pela CPU na inicialização do aparelho de formação de imagem 960 para ser executado, por exemplo. A CPU controla a operação do aparelho de formação de imagem 960 de acordo com o sinal de operação inserido a partir da interface de usuário 971, por exemplo, pela execução do programa.

[00524] A interface de usuário 971 é conectada no controlador 970. A interface de usuário 971 inclui um botão, um comutador e congêneres para que o usuário opere o aparelho de formação de imagem 960, por exemplo. A interface de usuário 971 detecta a operação do usuário através dos componentes para gerar o sinal de operação e transmite o sinal de operação gerado ao controlador 970.

[00525] No aparelho de formação de imagem 960 configurado desta maneira, o processador de imagem 964 tem as funções do aparelho de codificação de imagem 100 (figura 1), do aparelho de codificação de imagem 300 (figura 18), do aparelho de codificação de imagem 500 (figura 29), do aparelho de codificação de imagem multivisualizações 600 (figura 34) ou do aparelho de codificação de imagem hierárquica 620 (figura 37) e as funções do aparelho de decodificação de imagem 200 (figura 9), do aparelho de decodificação de imagem 400 (figura 21), do aparelho de decodificação de imagem multivisualizações 610 (figura 35) ou do aparelho de decodificação de imagem hierárquica 630 (figura 38) de acordo com as supradescritas modalidades. Portanto, o processador de imagem 964 calcula o valor de quantização para cada submacrobloco e quantiza o coeficiente de transformada ortogonal pelo uso do valor de quantização para cada submacrobloco para o vídeo codificado e decodificado pelo aparelho de formação de imagem 960. Desta maneira, é possível realizar o processo de quantização mais adequado para os conteúdos da imagem e gerar os dados codificados para inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore. Também, o processador de imagem 964 calcula o valor de quantização para cada submacrobloco pelo uso do parâmetro de quantização, tal como submp_qp_delta, suprido a partir do lado de codificação e realiza a quantização inversa. Portanto, é possível realizar o processo de quantização inversa mais adequado para os conteúdos da imagem e inibir que a qualidade da imagem subjetiva da imagem decodificada se deteriore.

[00526] É desnecessário dizer que o aparelho de codificação de imagem e o aparelho de decodificação de imagem nos quais a presente tecnologia é aplicada podem ser aplicados nos aparelho e sistema diferentes do supradescrito aparelho.

[00527] Neste particular, um exemplo no qual o parâmetro de quantização é transmitido do lado de codificação ao lado de decodificação foi descrito nesta especificação. É possível que um método de transmissão de um parâmetro de matriz de quantização seja transmitido ou gravado como dados separados associados com o fluxo contínuo de bits codificado, em vez de ser multiplexado com o fluxo contínuo de bits codificado. Aqui, o termo “associa” significa que a imagem incluída no fluxo contínuo de bits (ou uma parte da imagem, tais como uma fatia e um bloco) e a informação correspondente à imagem podem ser ligadas umas com as outras no momento de decodificação. Isto é, a informação pode ser transmitida em um canal de transmissão diferente daquele da imagem (ou fluxo contínuo de bits). Também, a informação pode ser gravada na mídia de gravação diferente daquela da imagem (ou fluxo contínuo de bits) (ou uma outra área de gravação da mesma mídia de gravação). Adicionalmente, é possível que a informação e a imagem (ou fluxo contínuo de bits) sejam associadas uma com a outra em uma unidade arbitrária, tais como uma pluralidade de quadros, um quadro ou uma parte do quadro, por exemplo.

[00528] Embora modalidades preferidas desta divulgação tenham sido descritas com detalhes em relação aos desenhos anexos, o escopo técnico desta divulgação não é limitado a tais exemplos. Fica claro que versados na técnica desta divulgação podem conceber várias modificações e correções no escopo da ideia técnica citada nas reivindicações, e entende-se que elas também pertencem naturalmente ao escopo técnico desta divulgação. LISTA DOS SINAIS DE REFERÊNCIA 100 Aparelho de codificação de imagem 105 Unidade de quantização 108 Unidade de quantização inversa 117 Controlador de taxa 121 Unidade de quantização de submacrobloco 122 Unidade de quantização inversa do submacrobloco 151 Armazenamento temporário da atividade do submacrobloco 152 Unidade de cálculo do parâmetro de quantização 153 Processador de quantização 200 Aparelho de decodificação de imagem 203 Unidade de quantização inversa 221 Unidade de quantização inversa do submacrobloco 251 Armazenamento temporário do parâmetro de quantização 252 Armazenamento temporário do coeficiente de transformada ortogonal 253 Processador de quantização inversa

Claims

1. Aparelho de processamento de imagem, caracterizado pelo fato de que compreende um circuito de processamento configurado para: definir um indicador, para cada bloco, que especifica se um parâmetro de quantização de diferença está presente em um fluxo contínuo de bits; definir, de acordo com o indicador, um parâmetro de quantização atual para um sub-bloco atual formado por particionamento de bloco, que divide um bloco em sub-blocos menores; quantizar dados de coeficiente de transformada usando o parâmetro de quantização atual para gerar dados quantizados; e codificar os dados quantizados para gerar o fluxo contínuo de bits que inclui o indicador e é incluído em uma primeira camada que é maior que uma segunda camada na qual o parâmetro de quantização de diferença é definido.

2. Aparelho de processamento de imagem de acordo com a reivindicação 1, caracterizado pelo fato de que o circuito de processamento é ainda configurado para definir o parâmetro de quantização atual para o sub- bloco atual usando um valor indicando um tamanho mínimo de sub-bloco para o qual o parâmetro de quantização de diferença é definido.

3. Aparelho de processamento de imagem de acordo com a reivindicação 1, caracterizado pelo fato de que o parâmetro de quantização de diferença é um valor de diferença entre o parâmetro de quantização atual para o sub-bloco atual e um parâmetro de quantização anterior para um sub-bloco anterior.

4. Aparelho de processamento de imagem de acordo com a reivindicação 3, caracterizado pelo fato de que o sub-bloco anterior é um sub- bloco decodificado imediatamente antes do sub-bloco atual em uma ordem na qual o fluxo contínuo de bits é decodificado.

5. Aparelho de processamento de imagem de acordo com a reivindicação 1, caracterizado pelo fato de que o parâmetro de quantização de diferença é um valor de diferença entre o parâmetro de quantização atual definido para o sub-bloco atual e um parâmetro de quantização de fatia atual definido para uma fatia atual.

6. Aparelho de processamento de imagem de acordo com a reivindicação 1, caracterizado pelo fato de que o circuito de processamento é configurado para definir o indicador como uma sintaxe do fluxo contínuo de bits.

7. Aparelho de processamento de imagem de acordo com a reivindicação 1, caracterizado pelo fato de que o bloco é uma maior unidade de codificação (LCU) e o sub-bloco é uma unidade de codificação, e a LCU é dividida recursivamente em unidades de codificação.

8. Método de processamento de imagem, caracterizado pelo fato de que compreende as etapas de: definir, com circuito de processamento, um indicador, para cada bloco, que especifica se um parâmetro de quantização de diferença está presente em um fluxo contínuo de bits; definir, de acordo com o indicador, um parâmetro de quantização atual para um sub-bloco atual formado por particionamento de bloco, que divide um bloco em sub-blocos menores; quantizar dados de coeficiente de transformada usando o parâmetro de quantização atual para gerar dados quantizados; e codificar os dados quantizados para gerar o fluxo contínuo de bits que inclui o indicador e é incluído em uma primeira camada maior que uma segunda camada na qual o parâmetro de quantização da diferença é definido.

9. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pelo fato de que compreende adicionalmente: definir o parâmetro de quantização atual para o sub-bloco atual usando um valor indicando um tamanho mínimo do sub-bloco para o qual o parâmetro de quantização de diferença está definido.

10. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pelo fato de que o parâmetro de quantização de diferença é um valor de diferença entre o parâmetro de quantização atual para o sub-bloco atual e um parâmetro de quantização anterior para um sub-bloco anterior.

11. Método de processamento de imagem de acordo com a reivindicação 10, caracterizado pelo fato de que o sub-bloco anterior é um sub-bloco que é decodificado imediatamente antes do sub-bloco atual em uma ordem na qual o fluxo contínuo de bits é decodificado.

12. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pelo fato de que o parâmetro de quantização de diferença é um valor de diferença entre o parâmetro de quantização atual definido para o sub-bloco atual e um parâmetro de quantização de fatia atual definido para uma fatia atual.

13. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pelo fato de que compreende adicionalmente definir o indicador como uma sintaxe do fluxo contínuo de bits.

14. Método de processamento de imagem de acordo com a reivindicação 8, caracterizado pelo fato de que o bloco é uma maior unidade de codificação (LCU) e o sub-bloco é uma unidade de codificação, e a LCU é dividida recursivamente em unidades de codificação.