BR112012003285B1

BR112012003285B1 - Dispositivo e método de processamento de imagem

Info

Publication number: BR112012003285B1
Application number: BR112012003285-2A
Authority: BR
Inventors: Kenji Kondo; Junichi Tanaka
Original assignee: Sony Corporation
Priority date: 2009-08-19
Filing date: 2010-08-10
Publication date: 2021-09-28
Also published as: US20200169758A1; AU2016203618A1; CA2769732A1; AU2016203618B2; KR20180083952A; TWI401969B; WO2011021530A1; AU2010285760B9; US9967593B2; KR20120048615A; EP2469856A1; CA2769732C; CA2994002C; IN2012DN01240A; AU2010285760A1; ZA201108188B; CN106028036B; RU2012104811A; KR20170113706A; BR112012003285A2

Abstract

dispositivo e método de processamento de imagem. são descritos e um método para processamento de imagem capaz de suprimir uma redução na eficiência de codificação. uma seção de adição de informação de controle (184) embute informação de controle para uma imagem armazenada em uma seção de armazenagem de informação de controle (183) dentro de um cabeçalho de fatia de uma fatia predeterminada de dados codificados armazenados em uma seção de armazenagem de dados codificados (182). por exemplo, a seção de adição de informação de controle (184) embute a informação de controle para uma imagem dentro de uma cabeçalho de fatia de uma fatia a ser transmitida primeiro em um quadro a ser processado nos dados codificados a que a informação de controle é adicionada em uma ordem predeterminada. a presente invenção pode ser aplicada a, por exemplo, dispositivos de processamento de imagem.

Description

[001] A presente invenção refere-se a um dispositivo e método de processamento de imagem e, especificamente, refere-se a um dispositivo e método de processamento de imagem que possibilita supressão da deterioração de eficiência de código, devido ao controle local do processamento de filtro quando codificando ou quando decodificando. FUNDAMENTOS DA ARTE

[002] Nos últimos anos, dispositivos entraram em uso muito difundido, submissos a formatos, tais como MPEG (Grupo de Peritos de Imagem em Movimento (Moving Picture Experts Group)) ou similares, que manipulam informação de imagem como sinais digitais, e tiram vantagem de redundância peculiar à informação de imagem, a fim de realizar transmissão de informação elevadamente eficaz e armazenagem naquela ocasião, para comprimir a imagem por transformação ortogonal, tal como discreta transformação de coseno, ou similar, e compensação de movimento, como ambas as distribuições de informação, tal como radiodifusão e recepção de informações domésticas em geral.

[003] Em particular, MPEG2 (ISO (International Organization for standardization) / IEC (International Electrotechnical Commission) 13818-2) é definido como um formato de codificação de imagem para fins gerais, e é um padrão abrangendo tanto imagens de varredura entrelaçada como imagens de varredura sequencial, e imagens de resolução padrão e imagens de alta definição, e tem amplamente sido empregado agora por ampla faixa de aplicações para uso profissional e para uso de consumidor. Empregando-se o formato de compressão MPEG2, um grau de código (taxa de bits) de 4 a 8 Mbps é alocado no evento de uma imagem de varredura entrelaçada de resolução padrão, tendo 720 x 480 pixéis, por exemplo. Também, empregando-se o formato de compressão MPEG2, um grau de código (taxa de bits) de 18 a 22 Mbps é alocado no evento de uma imagem de varredura entrelaçada de alta resolução tendo 1920 x 1088 pixéis, por exemplo, por meio do que, uma taxa de elevada compressão e excelente qualidade de imagem pode ser realizada.

[004] Com MPEG2, a codificação de elevada qualidade de imagem adaptada para uso de radiodifusão é principalmente tomada como um objetivo, porém um grau de código (taxa de bits) menor do que o grau de código de MPEG1, isto é, um formato de codificação tendo uma taxa de compressão mais elevada não é manipulado. De acordo com a dispersão de assistentes digitais pessoais, espera-se que a necessidade de tal formato de codificação seja aumentada de agora em diante e, em resposta a isto, foi realizada a padronização do formato de codificação MPEG4. Com respeito a um formato de codificação de imagem, a sua especificação foi confirmada como padrão internacional, como ISO/IEC 14496-2 em Dezembro de 1998.

[005] Além disso, nos últimos anos, a padronização de um padrão chamado H.26L (ITU-T (ITU Telecommunication Standardization Sector) Q6/16 VCEG (Grupo de Peritos de Codificação de Vídeo (Vídeo Coding Experts Group)) tem progredido, originalmente destinada para codificação de imagem para uso de videoconferência. Com H.26L, foi conhecido que, quando em comparação com um formato de codificação convencional, tal como MPEG2 ou MPEG4, embora maior grau de computação seja solicitado para sua codificação e decodificação, mais elevada eficiência de codificação é realizada. Também, atualmente, como parte da atividade de MPEG4, a padronização para também tirar vantagem de funções não suportadas por H.26L, com este H.26L tomado como uma base para realizar mais elevada eficiência de codificação, tem sido realizada como Modelo de Junta de Codificação de Vídeo de Compressão Aumentada. Como um esquema de padronização, H.264 e MPEG-4 Part10 (AVC (Advanced Vídeo Coding)) tornou-se um padrão internacional em Março de 2003.

[006] Também, há filtro de laço adaptativo (ALF (Adaptative Loop Filter)) como uma técnica de codificação de vídeo de próxima geração, que está sendo considerada como recente (Vide NPL 1, por exemplo). De acordo com este filtro de laço adaptativo, ótimo processamento de filtro é realizado em cada quadro, e o ruído de bloqueio que não foi completamente removido do filtro de desbloqueio e o ruído devido à quantização, podem ser reduzidos.

[007] Entretanto, imagens geralmente têm vários aspectos localmente, de modo que ótimos coeficientes de filtro sejam localmente diferentes. Com o método descrito em NPL 1, o mesmo coeficiente de filtro é aplicado a todos os pixéis dentro de um quadro, assim a qualidade de imagem do quadro total melhora, porém tem havido a preocupação de que possa haver deterioração local.

[008] Portanto, não tem sido concebido realizar processamento de filtro em regiões que localmente deterioram (Vide NPL 2 e NPL 3, por exemplo). Neste caso, o dispositivo de codificação de imagem corresponde a múltiplos blocos de controle dispostos sem espaços, como se estivessem sendo usados para pavimentação, com regiões de imagem, e controla se ou não realizar processamento de filtro sobre a imagem para cada bloco de controle. O dispositivo de codificação de imagem estabelece a informação do sinalizador para cada bloco, e realiza processamento de filtro adaptativo de acordo com a informação do sinalizador. Do mesmo modo, o dispositivo de decodificação de imagem também realiza processamento de filtro adaptativo com base na informação do sinalizador.

[009] Neste caso, as informações de controle (informação de controle ALF), tais como tamanho de bloco de controle, informação de sinalização de vários blocos de controle, e informação de coeficiente de filtro e o número de filtro TAPs do processamento de filtro adaptativo, e assim por diante, precisam ser incluídas nos dados codificados, a fim de possibilitar a execução de processamento de filtro adaptativo para ser realizada quando decodificando, que é a mesma que aquela quando codificando.

[0010] A informação de controle ALF anexa com frequência muda com cada imagem, por meio do que o pensamento geral é incluir um aparelho de parâmetro de imagem (PPS (Picture Parameter Set) ou aparelho de parâmetro de sequência (SPS (Sequence Parameter Set). Entretanto, quando incluindo informação de controle ALF nestes PPS e SPS, ALF, tal como pic_order_present_flag, num_ref_idx_10_active_minus1, profile_idc, e level_idc, podem incluir bits desnecessários na informação de compressão de imagem, uma vez que a informação sem direta correlação é adicionada, desse modo piorando a eficiência de codificação do seu código extra.

[0011] Também, mesmo no caso de criar uma unidade NAL independente (Network Abstraction Layer (Camada de Abstração em Rede) e remover a informação desnecessária mencionada acima, o código inicial, nal_ref_idc, e nal_unit_type, torna-se necessário, e o seu código extra pode piorar a eficiência de codificação.

[0012] A fim de evitar tais problemas, incluir a informação de controle ALF no cabeçalho de fatia tem sido proposto (por exemplo, Vide NPL 4). Também, um método para colocar informação indicadora de lugar, indicando o lugar da informação de controle ALF sem colocar a informação de controle ALF no cabeçalho de fatia, foi proposto (por exemplo, Vide NPL 5).

Lista de Citação Literatura Não de Patente

[0013] NPL 1:Yi-Jen Chiu e L. Xu, “Adaptive (Wiener) Filter for Video Compression,” ITU-T SG16 Contribuição, C437, Genebra, Abril de 2008.

[0014] NPL 2:Takeshi. Chujoh, et al., “Block-based Adaptive Loop Filter” ITU-T SG16 Q6 VCEGContribuição, AI18, Alemanha, Julho, 2008

[0015] NPL 3: T. Chujoh, N. Wada e G. Yasuda, “Quadtree-based Adaptive Loop Filter, “ITU-T SG16 Q6 VCEG Contribuição, VCEG-AK22 (r1), Japão, Abril, 2009.

[0016] NPL 4:Takeshi. Chujoh, et al., “Improvement of Block-based Adaptive Loop Filter” ITU-T SG16 Q6 VCEG Contribuição, AJ13, San Diego, Outubro, 2008

[0017] NPL 5:Yu-Wen Huang, et al., “Adaptive Quadtree-based Multi-reference Loop Filter”, ITU-T SG16 Q6 VCEG Contribuição, AK24, Yokohama Japão, Abril, 2009

Sumário Da Invenção Problema Técnico

[0018] Agora, há um método em que um quadro é dividido em multi- fatias, e o processamento de codificação e o processamento de decodificação da imagem são realizados para cada tal fatia (multi-fatias). Dividir um quadro em regiões de multi-fatias é um método eficaz para aumentar a resistência ao erro da informação controlada por imagem durante transferência.

[0019] Entretanto, NPL 2 a NPL 5 somente descrevem simplesmente blocos de ajuste para o quadro de um inteiro, e geram e transmitem informação do sinalizador para todos os blocos, não há descrição referente ao processamento da informação do sinalizador no caso de tais multi-fatias, e não está claro como gerar e usar a informação do sinalizador.

[0020] Portanto, no caso do método descrito na Literatura Não Patente, o dispositivo de codificação de imagem gera, para cada fatia, informação do sinalizador para todos os blocos dentro do quadro, e tem havido a preocupação de que a eficiência de codificação poderia deteriorar devido à informação do sinalizador desnecessária e assim por diante.

[0021] Também, como descrito acima, NPL 4 propõe incluir informação de controle ALF, que é o cabeçalho de fatia, porém no caso de multi-fatias com um arranjo onde multi-fatias em que a informação de controle ALF gerada para cada fatia é para ser incluída em cada cabeçalho de fatia dos dados codificados, tem havido a preocupação de que ocorreriam partes entre múltiplas informações de controle ALF com conteúdo redundante. Isto é, tem havido a preocupação de que a eficiência de codificação seria desnecessariamente deteriorada.

[0022] Isto é também o mesmo com o caso de colocar um indicador no cabeçalho de fatia, como descrito na NPL 5, como no caso de colocar indicadores em múltiplos cabeçalhos de fatia, isto significa incluir informação redundante nos dados codificados, e tem havido a preocupação de que a eficiência de codificação seria desnecessariamente deteriorada.

[0023] A presente invenção foi proposta na luz desta situação, e é um seu objetivo suprimir a deterioração da eficiência de codificação devido ao controle local do processamento de filtro quando codificando ou quando decodificando.

Solução para o problema

[0024] Um aspecto da presente invenção é um dispositivo de processamento de imagem incluindo: meio de gerar informação de controle, configurado para gerar informação de controle de filtro, para controlar processamento de filtro localmente realizado tal a imagem para cada região de um bloco de controle; meio de filtro, configurado para realizar o processamento de filtro como para a imagem, seguindo a informação de controle de filtro gerada pelo meio de geração de informação de controle; e meio de adição de informação de controle, configurado para adicionar, à informação de cabeçalho de cada incremento de dados predeterminado dos dados codificados cuja imagem foi codificada, a informação de controle de filtro correspondente a uma pluralidade de incrementos de dados de um quadro em que pertence a informação de cabeçalho.

[0025] O meio de adição de informação de controle pode adicionar a informação de controle de filtro à informação de cabeçalho de um primeiro incremento de dados transmitidos do quadro.

[0026] O meio de adição de informação de controle pode adicionar a informação de controle de filtro à informação de cabeçalho de um incremento de dados situado no início do quadro.

[0027] O meio de adição de informação de controle pode adicionar a informação de controle de filtro, correspondente ao quadro inteiro, à informação de cabeçalho.

[0028] O meio de adição de informação de controle pode adicionar, para cada uma de uma pluralidade de informação de cabeçalho dentro do quadro, a informação de controle de filtro correspondente a uma pluralidade de incrementos de dados que são mutuamente diferentes.

[0029] O dispositivo de processamento de imagem pode ainda incluir meio de ajuste, configurado para estabelecer o número de informações do cabeçalho dentro do quadro para o qual a informação de controle de filtro é para ser adicionada.

[0030] O meio de adição de informação de controle pode adicionar, à informação de cabeçalho, um indicador indicando a posição da informação de controle de filtro adicionada aos dados codificados.

[0031] O incremento de dados pode ser uma fatia, da qual uma pluralidade é formada dentro do quadro.

[0032] A informação de controle pode incluir um coeficiente de filtro do processamento de filtro, um tamanho de bloco indicando o tamanho da região do bloco de controle, e um sinalizador indicando se ou não realizar o processamento de filtro para cada região do bloco de controle.

[0033] O dispositivo de processamento de imagem pode ainda incluir meio de codificação configurado para codificar uma imagem gerada usando a imagem referente a qual processamento de filtro foi realizado pelo meio de filtragem, com o meio de adição de informação de controle adicionando a informação de controle de filtro à informação de cabeçalho dos dados codificados gerados por codificação do meio de codificação.

[0034] Um aspecto da presente invenção é também um método de processamento de imagem, em que o meio de geração de informação de controle de um dispositivo de processamento de imagem gera informação de controle de filtro, para processamento de filtro de controle localmente realizado como uma imagem para cada região de um bloco de controle, o meio de filtro do dispositivo de processamento de imagem realiza o processamento de filtro como a imagem, seguindo a informação de controle de filtro gerada, e meio de adição de informação de controle da adição do dispositivo de processamento de imagem, para informação de cabeçalho de cada predeterminado incremento de dados dos dados codificados em que a imagem foi codificada, a informação de controle de filtro correspondente a uma pluralidade de incrementos de dados de um quadro no qual a informação de cabeçalho pertence.

[0035] Outro aspecto da presente invenção é um dispositivo de processamento de imagem incluindo: meio de extração de informação de controle, configurado para extrair a informação de controle de filtro que foi adicionada à informação de cabeçalho para cada incremento de dados predeterminado dos dados codificados em que uma imagem foi codificada, a fim de controlar o processamento de filtro localmente realizado como a imagem de cada região de um bloco de controle correspondente a uma pluralidade de incrementos de dados; e meio de filtragem, configurado para realizar processamento de filtro como a imagem referente à quais dados codificados foram decodificados, seguindo a informação de controle de filtro extraída pelo meio de extração de informação de controle.

[0036] O dispositivo de processamento de imagem pode ainda incluir meio de decodificação, configurado para decodificar os dados codificados, com o meio de filtragem realizando o processamento de filtro como a imagem obtida pelos dados codificados sendo decodificados pelo meio de decodificação.

[0037] Outro aspecto da presente invenção é um método de processamento de imagem, em que o meio de extração de informação de controle de um dispositivo de processamento de imagem extrai informação de controle de filtro, que foi adicionada à informação de cabeçalho para cada incremento de dados predeterminado dos dados codificados em que uma imagem foi codificada, a fim de controlar o processamento de filtro localmente realizado como a imagem de cada região de um bloco de controle correspondente a uma pluralidade de incrementos de dados, e meio de filtragem do dispositivo de processamento de imagem para realizar processamento de filtro como a imagem referente a qual dos dados codificados foi decodificado, seguindo a informação de controle de filtro extraída.

[0038] De acordo com um aspecto da presente invenção, a informação de controle de filtro é gerada para controlar o processamento de filtro localmente realizado como a imagem para cada região de um bloco de controle, o processamento de filtro é realizado como a imagem seguindo a informação de controle de filtro gerada, e a informação de controle de filtro correspondente a uma pluralidade de incrementos de dados, de um quadro em que pertence a informação de cabeçalho, é adicionada à informação de cabeçalho para cada incremento de dados predeterminado dos dados codificados em que a imagem foi codificada.

[0039] De acordo com outro aspecto da presente invenção, a informação de controle de filtro é extraída, a qual foi adicionada à informação de cabeçalho para cada incremento de dados predeterminado dos dados codificados em que uma imagem foi codificada, a fim de controlar o processamento de filtro localmente realizado como a imagem de cada região de um bloco de controle correspondente a uma pluralidade de incrementos de dados, e o processamento de filtro é realizado como a imagem referente à quais dados codificados foram decodificados seguindo a informação de controle de filtro extraída pelo meio de extração de informação de controle.

Efeitos Vantajosos da Invenção

[0040] De acordo com a presente invenção, uma imagem pode ser codificada ou decodificada. Particularmente, a deterioração da eficiência de codificação, devido ao controle local do processamento de filtro quando codificando ou decodificando, pode ser suprimida mesmo mais adiante. Por exemplo, a deterioração na eficiência de codificação pode ser suprimida mesmo no caso de realização de codificação ou decodificação com cada quadro de uma imagem dividido em uma pluralidade.

Breve Descrição dos Desenhos

[0041] A Fig. 1 é um diagrama em blocos ilustrando um exemplo de configuração principal de um dispositivo de codificação de imagem no qual a presente invenção foi aplicada.

[0042] A Fig. 2 é um diagrama descrevendo processamento de predição/compensação de movimento de tamanho de bloco variável.

[0043] A Fig. 3 é um diagrama em blocos ilustrando um exemplo de configuração principal de uma unidade de geração de informação de controle.

[0044] A Fig. 4 é um diagrama descrevendo blocos ALF e sinalizadores de bloco de filtro.

[0045] A Fig. 5 é um diagrama descrevendo um exemplo de multi- fatias.

[0046] A Fig. 6 é um diagrama descrevendo o processamento da fatia 0.

[0047] A Fig. 7 é um diagrama descrevendo o processamento da fatia 1.

[0048] A Fig. 8 é um diagrama descrevendo o processamento da fatia 1 na qual a presente invenção foi aplicada.

[0049] A Fig. 9 é um diagrama em blocos ilustrando um exemplo de configuração principal de uma unidade de processamento de filtro adaptativa.

[0050] A Fig. 10 é um diagrama em blocos ilustrando um exemplo de configuração principal de uma unidade de codificação sem perda.

[0051] A Fig. 11 é um diagrama descrevendo uma situação que inclui informação de controle no cabeçalho da primeira fatia transmitida.

[0052] A Fig. 12 é um diagrama ilustrando um exemplo de sintaxe do cabeçalho de fatia.

[0053] A Fig. 13 é um fluxograma descrevendo um exemplo do fluxo de processamento de codificação.

[0054] A Fig. 14 é um fluxograma descrevendo um exemplo do fluxo do processamento de geração de informação de controle.

[0055] A Fig. 15 é um fluxograma descrevendo um exemplo do fluxo de processamento de geração de informação de bloco.

[0056] A Fig. 16 é um fluxograma descrevendo um exemplo do fluxo de processamento de filtro adaptativo.

[0057] A Fig. 17 é um fluxograma descrevendo um exemplo do fluxo de processamento de codificação sem perda.

[0058] A Fig. 18 é um diagrama em blocos ilustrando um exemplo de configuração principal de um dispositivo de codificação de imagem no qual a presente invenção foi aplicada.

[0059] A Fig. 19 é um diagrama em blocos ilustrando um exemplo de configuração principal de uma unidade de codificação sem perda.

[0060] A Fig. 20 é um fluxograma descrevendo um exemplo do fluxo de processamento de decodificação.

[0061] A Fig. 21 é um fluxograma descrevendo um exemplo do fluxo de processamento de decodificação sem perda.

[0062] A Fig. 22 é um diagrama descrevendo uma situação incluindo informação de controle no cabeçalho da fatia inicial.

[0063] A Fig. 23 é um fluxograma descrevendo outro exemplo do fluxo de processamento de codificação sem perda.

[0064] A Fig. 24 é um diagrama em blocos ilustrando outro exemplo de configuração de uma unidade de decodificação sem perda.

[0065] A Fig. 25 é um fluxograma descrevendo outro exemplo do fluxo de processamento de decodificação sem perda.

[0066] A Fig. 26 é um diagrama descrevendo uma situação incluindo informação de controle no cabeçalho de uma fatia opcional.

[0067] A Fig. 27 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de codificação sem perda.

[0068] A Fig. 28 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de decodificação sem perda.

[0069] A Fig. 29 é um diagrama descrevendo uma situação incluindo um indicador no cabeçalho de uma fatia.

[0070] A Fig. 30 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de codificação sem perda.

[0071] A Fig. 31 é um fluxograma descrevendo ainda outro exemplo de fluxo de processamento de decodificação sem perda.

[0072] A Fig. 32 é um diagrama descrevendo uma situação incluindo informação de controle em um indicador de fatia reunido por grupo.

[0073] A Fig. 33 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de codificação sem perda.

[0074] A Fig. 34 é um diagrama em blocos descrevendo outro exemplo de configuração da unidade de codificação sem perda.

[0075] A Fig. 35 é um fluxograma ilustrando ainda outro exemplo do fluxo de processamento de codificação sem perda.

[0076] A Fig. 36 é um diagrama em blocos ilustrando ainda outro exemplo de configuração da unidade de decodificação sem perda.

[0077] A Fig. 37 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de decodificação sem perda.

[0078] A Fig. 38 é um diagrama em blocos ilustrando ainda outro exemplo de configuração da unidade de codificação sem perda.

[0079] A Fig. 39 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de codificação sem perda.

[0080] A Fig. 40 é um diagrama em blocos ilustrando ainda outro exemplo de configuração da unidade de decodificação sem perda.

[0081] A Fig. 41 é um fluxograma descrevendo ainda outro exemplo do fluxo de processamento de decodificação sem perda.

[0082] A Fig. 42 é um diagrama descrevendo outro exemplo de blocos ALF e sinalizadores de bloco de filtro.

[0083] A Fig. 43 é um diagrama descrevendo outro exemplo de blocos ALF e sinalizadores de bloco de filtro.

[0084] A Fig. 44 é um diagrama descrevendo o meio de processamento sendo realizado no caso de multi-fatias.

[0085] A Fig. 45 é um diagrama em blocos ilustrando um exemplo de configuração principal de um computador pessoal no qual a presente invenção foi aplicada.

[0086] A Fig. 46 é um diagrama em blocos ilustrando um exemplo de configuração principal de um receptor de televisão no qual a presente invenção foi aplicada.

[0087] A Fig. 47 é um diagrama em blocos ilustrando um exemplo de configuração principal de um telefone celular no qual a presente invenção foi aplicada.

[0088] A Fig. 48 é um diagrama em blocos ilustrando um exemplo de configuração principal de um gravador de disco rígido no qual a presente invenção foi aplicada.

[0089] A Fig. 49 é um diagrama em blocos ilustrando um exemplo de configuração principal de uma câmara na qual a presente invenção foi aplicada.

[0090] A Fig. 50 é um diagrama ilustrando um exemplo de macroblocos.

Descrição das Formas de Realização

[0091] Agora, formas de realização da presente invenção (a seguir, formas de realização) serão descritas. Observe-se que a descrição procederá na seguinte ordem. 1. Primeira forma de realização (dispositivo de codificação de imagem) 2. Segunda forma de realização (dispositivo de decodificação de imagem) 3. Terceira forma de realização (exemplo de inclusão de informação de controle no cabeçalho da fatia inicial) 4. Quarta forma de realização (exemplo de inclusão de informação de controle no cabeçalho de uma fatia opcional) 5. Quinta forma de realização (exemplo de uso de um indicador) 6. Sexta forma de realização (exemplo de reunião de informação de controle em múltiplos grupos) 7. Sétima forma de realização (exemplo de controle de número de grupos) 8. Oitava forma de realização (exemplo de agrupamento independentemente por elemento) 9. Nona forma de realização (QALF) 10. Décima forma de realização (computador pessoal) 11. Décima primeira Forma de realização (receptor de televisão) 12. Décima segunda Forma de realização (gravador de disco rígido) 14. Décima quarta Forma de realização (câmara)

<1.Primeira Forma de realização> [Configuração do Dispositivo]

[0092] A Fig. 1 representa a configuração de uma forma de realização de um dispositivo de codificação de imagem servindo como um dispositivo de processamento de imagem no qual a presente invenção foi aplicada.

[0093] Um dispositivo de codificação de imagem 100, mostrado na Fig. 1, é um dispositivo de codificação que submete uma imagem à codificação de compressão, usando, por exemplo, o formato H.264 e MPEG-4 Part10 (Advanced Video Coding) (a seguir escrito como H.264/AVC) e ainda emprega um filtro de laço adaptativo.

[0094] Com o exemplo da Fig. 1, o dispositivo de codificação de imagem 100 tem uma unidade de conversão (Analógica/Digital) A/D 101, uma memória intermediária de rearranjo de tela 102, uma unidade de computação 103, uma unidade de transformação ortogonal 104, uma unidade de quantização 105, uma unidade de codificação sem perda 106, e uma memória intermediária de armazenagem 107. O dispositivo de codificação de imagem 100 também tem uma unidade de quantização inversa 108, uma unidade de transformação ortogonal inversa 109, uma unidade de computação 110, e um filtro de desbloqueio 111. Além disso, o dispositivo de codificação de imagem 100 tem uma unidade de geração de informação de controle 112, uma unidade de processamento de filtro adaptativa 113, e memória de quadro 114. Também, o dispositivo de codificação de imagem 100 tem uma unidade de intrapredição 115, uma unidade de compensação de movimento 116, uma unidade de predição de movimento 117, e uma unidade de seleção de imagem de predição 118. Além disso, o dispositivo de codificação de imagem 100 tem uma unidade de controle de taxa 119.

[0095] A unidade de conversão A/D 101 realiza conversão A/D de dados de imagem de entrada, e emite-os para o memória intermediária de rearranjo de tela 102 e armazena-os. O memória intermediária de rearranjo de tela 102 rearranja as imagens dos quadros na ordem armazenada para exibição, na ordem dos quadros para codificação, de acordo com o quadro GOP (Group of Picture).

[0096] A unidade de computação 103 subtrai da imagem exibida pelo memória intermediária de rearranjo de tela 102 a imagem de predição da unidade de intrapredição 115 selecionada pela unidade de seleção de imagem de predição 118 ou a imagem de predição da unidade de compensação de movimento 116, e emite sua informação de diferença para a unidade de transformação ortogonal 104. A unidade de transformação ortogonal 104 submete a informação de diferença da unidade de computação 103 para transformação ortogonal, tal como discreta transformação de coseno, transformação de Karhunem-Loève, ou similares, e emite um seu coeficiente de transformação. A unidade de quantização 105 quantifica o coeficiente de transformação que a unidade de transformação ortogonal 104 emitiu.

[0097] O coeficiente de transformação quantificado, que é a saída da unidade de quantização 105, é introduzido à unidade de codificação sem perda 106. A unidade de codificação sem perda 106 submete o coeficiente de transformação quantificado à codificação sem perda, tal como codificação de comprimento variável, codificação aritmética, ou similar.

[0098] A unidade de codificação sem perda 106 obtém informação indicando intrapredição, e assim por diante, da unidade de intrapredição 115, e obtém informação indicando um modo de interpredição, e assim por diante, da unidade de predição de movimento 117. Observe-se que a informação indicando intrapredição também será referida como informação de modo de intrapredição a seguir. Também, a informação indicando modo de informação indicando interpredição também será referida como informação de modo de interpredição a seguir.

[0099] A unidade de codificação sem perda 106 ainda obtém a informação de controle de processamento de filtro adaptativo, realizada na unidade de processamento de filtro adaptativa 113 da unidade de geração de informação de controle 112.

[00100] A unidade de codificação sem perda 106 codifica o coeficiente de transformação quantificado, e também recebe a informação de controle do processamento de filtro adaptativo, a informação indicando intrapredição, a informação indicando um modo de interpredição, parâmetros de quantificação, e assim por diante, como parte da informação de cabeçalho dos dados codificados (multiplexados). A unidade de codificação sem perda 106 supre os dados codificados obtidos por codificação para o memória intermediária de armazenagem 107 para armazenagem.

[00101] Por exemplo, com a unidade de codificação sem perda 106, o processamento de codificação sem perda, tal como codificação de comprimento variável, codificação aritmética, ou similar, é realizado. Exemplos da codificação de comprimento variável incluem CAVLC (Context-Adaptive Variable Length Coding (Codificação de Comprimento Variável Adaptativa-Contexto)) determinado pelo formato H.264/AVC. Exemplos de codificação aritmética incluem CABAC (Context-Adaptive Binary Arithmetic Coding (Codificação Aritmética Binária Adaptativa- Contexto).

[00102] O memória intermediária de armazenagem 107 temporariamente mantém os dados codificados supridos pela unidade de codificação sem perda 106, e em um predeterminado instante emite-os para, por exemplo, um dispositivo de armazenagem ou trajeto de transmissão ou similar a jusante, não mostrado no desenho, como uma imagem codificada pelo formato H.264/AVC.

[00103] Também, o coeficiente de transformação quantificado, emitido pela unidade de quantização 105, é também introduzido para a unidade de quantização inversa 108. A unidade de quantização inversa 108 realiza quantização inversa do coeficiente de transformação quantificado com um método correspondente à quantização da unidade de quantização 105, e supre o coeficiente de transformação obtido para a unidade de transformação ortogonal inversa 109.

[00104] A unidade de transformação ortogonal inversa 109 realiza transformação ortogonal inversa dos coeficientes de transformação supridos com um método correspondente ao processamento de transformação ortogonal pela unidade de transformação ortogonal 104. A emissão submetida à transformação ortogonal inversa é suprida à unidade de computação 110. A unidade de computação 110 adiciona a imagem de predição suprida da unidade de seleção de imagem de predição 118 para o resultado de transformação ortogonal inversa suprido da unidade de transformação ortogonal inversa 109, isto é, a informação de diferença restaurada, e obtém uma imagem decodificada localmente (imagem decodificada). Os seus resultados de adição são supridos ao filtro de desbloqueio 111.

[00105] O filtro de desbloqueio 111 remove ruído de bloco da imagem decodificada. O filtro de desbloqueio 111, em seguida, supre os resultados da remoção de ruído para a unidade de geração de informação de controle 112 e unidade de processamento de filtro adaptativa 113.

[00106] A unidade de geração de informação de controle 112 obtém a imagem decodificada suprida do filtro de desbloqueio 111 e a imagem de entrada atual exibida do memória intermediária de rearranjo de tela 102, e gera destas a informação de controle para filtragem adaptativa ser realizada na unidade de processamento de filtro adaptativa 113. Enquanto detalhes serão descritos mais tarde, a informação de controle inclui coeficientes de filtragem, tamanho de bloco, sinalizadores de bloco de filtro, e similares.

[00107] A unidade de geração de informação de controle 112 supre a informação de controle gerada à unidade de processamento de filtro adaptativa 113. A unidade de geração de informação de controle 112 também supre a informação de controle gerada à unidade de codificação sem perda 106 também. Como descrito acima, a informação de controle é incluída nos dados codificados (multiplexados) pela unidade de codificação sem perda 106. Isto é, a informação de controle é enviada para o dispositivo de decodificação de imagem juntamente com os dados codificados.

[00108] A unidade de processamento de filtro adaptativa 113 realiza processamento de filtro sobre a imagem decodificada suprida do filtro de desbloqueio 111, usando os coeficientes de filtro, a especificação de tamanho de bloco, e sinalizadores de bloco de filtro e similares, da informação de controle suprida pela unidade de geração de informação de controle 112. Um filtro Wiener (Wiener Filter), por exemplo, é usado como este filtro. Naturalmente, um filtro, que não um filtro Wiener, pode ser usado. A unidade de processamento de filtro adaptativa 113 supre os resultados de processamento de filtro para a memória de quadro 114, e armazena-os como uma imagem de referência.

[00109] A memória de quadro 114 emite a imagem de referência armazenada para a unidade de compensação de movimento 116 e unidade de predição de movimento 117 em um instante predeterminado.

[00110] Com este dispositivo de codificação de imagem 100, a imagem I, imagem B e imagem P do memória intermediária de rearranjo de tela 102 são supridas à unidade de intrapredição 115 como uma imagem a ser submetida à intrapredição (também referida como intraprocessamento), por exemplo. Também, a exibição das imagem B e imagem P do memória intermediária de rearranjo de tela 102 é suprida à unidade de predição de movimento 117 como uma imagem a ser submetida à interpredição (também referida como interprocessamento).

[00111] A unidade de intrapredição 115 realiza processamento de intrapredição de todos os modos de intrapredição candidatos com base na imagem a ser submetida à exibição de intrapredição do memória intermediária de rearranjo de tela 102, e a imagem de referência suprida da memória de quadro 114 para gerar uma imagem de predição.

[00112] Com a unidade de intrapredição 115, informação referente ao modo de intrapredição aplicado ao bloco/macrobloco atual é transmitida à unidade de codificação sem perda 106, e é incluída como uma parte da informação do cabeçalho nos dados decodificados. Com o formato de codificação de informação de imagem H.264, o modo de intrapredição 4 x 4, modo de intrapredição 8 x 8, e modo de intrapredição 16 x 16 são definidos por sinais de luminância, e também com respeito aos sinais de diferença de cor, um modo de predição pode ser definido para cada macrobloco, independente dos sinais de luminância. Para o modo de intrapredição 4 x 4, um modo de intrapredição é definido para cada bloco de luminância 4 x 4. Para o modo de intrapredição 8 x 8, um modo de intrapredição é definido para cada bloco de luminância 8 x 8. Para cada modo de intrapredição 16 x 16 e sinais de diferença de cor, um modo de predição é definido para cada macrobloco.

[00113] A unidade de intrapredição 115 calcula um valor de função de custo como o modo de intrapredição onde a imagem de predição foi gerada, e seleciona o modo de intrapredição onde o valor de função de custo calculado fornece o valor mínimo como o modo de intrapredição ótimo. A unidade de intrapredição 115 supre a imagem de predição gerada no modo de intrapredição ótimo para a unidade de seleção de imagem de predição 118.

[00114] Com respeito à imagem a ser submetida à intercodificação, a unidade de predição de movimento 117 obtém informação de imagem suprida do memória intermediária de rearranjo de tela 102 (imagem de entrada) e informação de imagem servindo como o quadro de referência suprido da memória de quadro 114 (imagem decodificada), e calcula um vetor de movimento. A unidade de predição de movimento 117 supre a informação de vetor de movimento indicando o vetor de movimento calculado para a unidade de codificação sem perda 106. Esta informação de vetor de movimento é incluída nos dados codificados (multiplexados) pela unidade de codificação sem perda 106. Isto é, a informação de vetor de movimento é enviada para o dispositivo de decodificação de imagem juntamente com os dados codificados.

[00115] Também, a unidade de predição de movimento 117 supre a informação de vetor de movimento para a unidade de compensação de movimento 116.

[00116] A unidade de compensação de movimento 116 realiza processamento de compensação de movimento de acordo com a informação de vetor de movimento suprida da unidade de predição de movimento 117, e gera informação de imagem de interpredição. A unidade de compensação de movimento 116 supre a informação de imagem de predição gerada para a unidade de seleção de imagem de predição 118.

[00117] No caso de uma imagem para realizar intracodificação, a unidade de seleção de imagem de predição 118 supre a saída da unidade de intrapredição 115 para a unidade de computação 103 e, no evento de uma imagem para realizar intercodificação, supre a saída da unidade de compensação de movimento 116 para a unidade de computação 103.

[00118] A unidade de controle de taxa 119 controla a taxa de operações de quantização da unidade de quantização 105 com base na imagem comprimida armazenada no memória intermediária de armazenagem 107, de modo que estouro ou estouro negativo não ocorra.

[00119] Com MPEG (Moving Picture Experts Group (Grupo de Peritos em imagem em movimento)) 2, o incremento de processamento de predição/compensação de movimento são blocos de compensação de movimento, e a informação de vetor de movimento independente pode ser retida em cada bloco de compensação de movimento. O tamanho de um bloco de compensação de movimento é de 16 x 16 pixéis, no caso do modo de compensação de movimento de quadro, e no caso de modo de compensação de movimento de campo é de 16 x 8 pixéis para cada um do primeiro campo e do segundo campo.

[00120] Por outro lado, com AVC (Advanced Video Coding), um macrobloco configurado de 16 x 16 pixéis, como mostrado no lado superior na Fig. 2, pode ser dividido em quaisquer das divisões de 16 x 16, 16 x 8, 8 x 16, ou 8 x 8, com cada informação de vetor de movimento independente de retenção. Também, como mostrado no lado inferior da Fig. 2, uma divisão 8 x 8 pode ser dividida em quaisquer das subdivisões de 8 x 8, 8 x 4, 4 x 8 ou 4 x 4, com cada informação de vetor de movimento independente de retenção. O processamento de predição/compensação de movimento é realizado com este bloco de compensação de movimento como um incremento.

[00121] A Fig. 3 é um diagrama em blocos ilustrando um exemplo de configuração principal da unidade de geração de informação de controle 112.

[00122] Como descrito acima, a unidade de geração de informação de controle 112 gera a informação de controle usada no filtro adaptativo (ALF (Adaptive Loop Filter)), que é um filtro de laço, realizada na unidade de processamento de filtro adaptativa 113. A unidade de geração de informação de controle 112 gera, como a informação de controle, coeficientes de filtro, tamanho de bloco ALF, e sinalizadores de bloco de filtro, por exemplo.

[00123] A unidade de geração de informação de controle 112 tem uma unidade de calcular coeficiente de filtro 131 e unidade de geração de informação de bloco 133.

[00124] A unidade de calcular coeficiente de filtro 131 obtém a imagem decodificada suprida do filtro de desbloqueio 111 e exibe a imagem de entrada atual do memória intermediária de rearranjo de tela 102, e calcula um coeficiente de filtro ALF para cada quadro. Coeficientes de filtro ALF são em seguida calculados para cada um dos quadros.

[00125] A unidade de geração de informação de bloco 132 gera informação de bloco, tal como o tamanho de bloco ALF, sinalizadores de bloco de filtro, e assim por diante. Por exemplo, a unidade de geração de informação de bloco 132 determina o tamanho de bloco ALF com base na imagem decodificada suprida do filtro de desbloqueio 111 e nos coeficientes de filtro calculados pela unidade de calcular coeficiente de filtro 131. Também, por exemplo, a unidade de geração de informação de bloco 132 gera um sinalizador de bloco de filtro para cada bloco ALF dentro da fatia a ser processada.

[00126] Agora, descrição será feita referente ao bloco ALF e sinalizador de bloco de filtro da informação de bloco. A Fig. 4 é um diagrama para descrever blocos ALF e sinalizadores de bloco de filtro.

[00127] Como descrito acima, o filtro adaptativo tem coeficientes de filtro determinados para cada quadro. Isto é, processamento de filtro ótimo é realizado em incrementos de quadros. Entretanto, geralmente, imagens de quadro não são totalmente uniformes e têm vários aspectos localmente. Portanto, coeficientes de filtro ótimos diferem localmente. Portanto, embora o processamento de filtro usando coeficientes de filtro determinassem cada quadro, como descrito acima, melhoram a qualidade de imagem para o quadro total, havendo a preocupação de que esta, de fato, deteriore localmente.

[00128] Portanto, BALF (Block based Adaptive Loop Filter), em que o processamento de filtro não é realizado em regiões onde a qualidade da imagem deteriora localmente, foi concebido.

[00129] Uma imagem decodificada, seguinte ao processamento de filtro de desbloqueio, é mostrada no quadro 151 em A na Fig. 4. Como mostrado em B na Fig. 4, a unidade de geração de informação de bloco 132 dispõe de múltiplos blocos ALF 152, que são blocos de controle servindo como o incremento de controle para processamento de filtro adaptativo localmente realizado, sem espaços como se estivessem sendo usados para pavimentação da região inteira do quadro 151. A região onde os blocos ALF 152 são colocados não tem que ser a mesma que a região do quadro 151, porém inclui pelo menos a região inteira do quadro. A região do quadro 151 é consequentemente dividida pelas regiões dos blocos ALF 152 (múltiplas regiões de controle).

[00130] A unidade de geração de informação de bloco 132 determina o tamanho da direção horizontal (seta de ambos os lados 153) e tamanho da direção vertical (seta de ambos os lados 154) dos blocos ALF 152. Para o tamanho dos blocos ALF, um de 8 x 8, 16 x 16, 24 x 24, 32 x 32, 48 x 48, 64 x 64, 96 x 96, ou 128 x 128, por exemplo, pode ser especificado para cada fatia. Observe-se que a informação especificando o tamanho do bloco ALF será chamada de índice de tamanho de bloco.

[00131] Uma vez que o tamanho de bloco é decidido, o número de blocos ALF por quadro também fica decidido, uma vez que o tamanho do quadro é fixado.

[00132] Como mostrado em C na Fig. 4, a unidade de geração de informação de bloco 132 estabelece um sinalizador de bloco de filtro 155, que controla se ou não realizar processamento de filtro, em cada bloco ALF 152. Por exemplo, um sinalizador de bloco de filtro 155 com um valor “1” é gerado para uma região onde a qualidade de imagem é melhorada pelo filtro adaptativo, e um sinalizador de bloco de filtro 155 com um valor “0” é gerado para uma região em que a qualidade de imagem é deteriorada pelo filtro adaptativo. Com o sinalizador de bloco de filtro 155, o valor “1” é um valor indicando que o processamento de filtro é para ser realizado, e o valor “0” é um valor indicando que o processamento de filtro não é para ser realizado.

[00133] A unidade de processamento de filtro adaptativa 113 controla o processamento de filtro adaptativo com base no valor do sinalizador de bloco de filtro 155. Por exemplo, a unidade de processamento de filtro adaptativa 113 realiza processamento de filtro nas regiões onde os blocos ALF 152 têm um valor “1” para o sinalizador de bloco de filtro 155, e não realiza processamento de filtro nas regiões onde os blocos ALF 152 têm um valor “0” para o sinalizador de bloco de filtro 155.

[00134] Também, o índice de tamanho de bloco descrito acima e o sinalizador de bloco de filtro são incluídos no cabeçalho de fatia dos dados codificados, e enviados pelo dispositivo de codificação de imagem 100 para o dispositivo de decodificação de imagem. O um ou mais sinalizadores de bloco de filtro correspondentes ao número de blocos ALF são incluídos no cabeçalho de fatia na ordem de varredura de rasteio, por exemplo.

[00135] Portanto, quanto menor o tamanho do bloco ALF, mais fino controle de filtro pode ser realizado, e mais apropriada filtragem ALF pode ser realizada. Entretanto, um tamanho de bloco ALF aumenta a quantidade de bits dos sinalizadores de bloco de filtro. Isto é, quanto menor for o tamanho de bloco ALF, mais diminuirá a eficiência de codificação dos dados codificados. Assim, a capacidade do filtro adaptativo e a eficiência de codificação dos dados codificados estão em uma relação de substitutibilidade.

[00136] O número de blocos ALF é calculado como na seguinte Expressão (1).

[00137] Na Expressão (1), NALFbloco representa o número de blocos ALF. Também, NMBw representa o número de macroblocos na direção horizontal da imagem, e NMBh representa o número de macroblocos na direção vertical da imagem. Além disso, Ntamanho representa o tamanho de um lado de um bloco ALF. Também, piso[x] é uma função onde x é arredondado para um decimal mais próximo, a fim de ser um número inteiro.

[00138] Agora, com H.264/AVC, um quadro pode ser dividido em múltiplas fatias, e dados codificados podem ser emitidos para cada fatia. A Fig. 5 é um diagrama para descrever um exemplo de multi-fatias. No caso do exemplo da Fig. 5, o quadro 151 é dividido nas três fatias de fatia 0, fatia 1, e fatia 2.

[00139] Dividir o quadro em regiões de múltiplas fatias é um método eficaz para aumentar a resistência ao erro durante transferência da informação de compressão de imagem.

[00140] NPL 2, que descreve BALF, não descreve estas multi-fatias. Isto é, somente blocos ALF estabelecidos para o quadro inteiro são descritos. Os blocos ALF são estabelecidos para o quadro inteiro, como descrito acima. Isto é, os blocos ALF para o quadro inteiro são determinados para cada fatia, e tem havido a preocupação de que blocos ALF desnecessários, externos a região de fatia, pudessem ser determinados.

[00141] Por exemplo, no exemplo da configuração de fatia mostrada na Fig. 5, no caso de processamento de uma fatia 0, como mostrado em A na Fig. 6 e como mostrado em B na Fig. 6, os blocos ALF 152 para o quadro inteiro 151 são determinados como a região de fatia 0 mostrada no quadro 161.

[00142] Similarmente, no caso de processamento da fatia 1, como mostrado em A na Fig. 7, no exemplo da configuração de fatia mostrada na Fig. 5, por exemplo, os blocos ALF 152 são determinados para o quadro inteiro 151 como a região de fatia 1 indicada pelo quadro 162, como mostrado em B na Fig. 7.

[00143] Os blocos ALF 152, mostrados na área compartilhada B da Fig. 6 e B da Fig. 7, são blocos externos às regiões de fatia 0 ou fatia 1, e são blocos desnecessários para o processamento das regiões de fatia 0 ou fatia 1.

[00144] Determinar tais blocos desnecessários ou sinalizadores para tais blocos é processamento irrelevante. Assim, a fim de não desnecessariamente aumentar o processamento, a unidade de geração de informação de bloco 132, da unidade de geração de informação de controle 112 da Fig. 3, gera somente os blocos ALF, incluindo a região da fatia a ser processada e os sinalizadores de bloco de fitro.

[00145] Por exemplo, no caso da fatia de processamento 1, como mostrado em A na Fig. 8, no exemplo de configuração de fatia mostrado na Fig. 5, a unidade de geração de informação de bloco 132 ajusta-se, como a região de fatia 1 mostrada no quadro 162, somente os blocos ALF 152 incluídos na sua região, como mostrado em B na Fig. 8, e gera os sinalizadores de bloco de filtro para somente os seus blocos ALF 152.

[00146] Retornando à Fig. 3, a unidade de geração de informação de bloco 132 tem uma unidade de identificação de região de fatia de objeto de processamento 141, a unidade de ajuste de bloco ALF 142, unidade de identificação de região de bloco ALF objeto de processamento 143, unidade de determinação 144, e unidade de geração de sinalizador de bloco de filtro 145.

[00147] A unidade de identificação de região de fatia de objeto de processamento 141 identifica a posição através do quadro inteiro da região da fatia a ser processada, isto é, suprida como uma imagem de decodificação.

[00148] A unidade de ajuste de bloco ALF 142 determina o tamanho de bloco ALF, e determina o bloco ALF 152 através do quadro inteiro. Assim, o número de blocos ALF no quadro inteiro é também identificado.

[00149] A unidade de identificação de região de bloco ALF objeto de processamento 143 seleciona um bloco ALF para ser processado de cada um dos blocos ALF 152 determinados pela unidade de ajuste de bloco ALF 142, e identifica a posição da região de blocos ALF selecionada para ser processada.

[00150] A unidade de determinação 144 determina se ou não a região de blocos ALF a ser processada inclui a região da fatia a ser processada. A unidade de geração de sinalizador de bloco de filtro 145 gera o sinalizador de bloco de filtro do bloco ALF, determinado como “incluindo a região da fatia a ser processada” pela unidade de determinação 144. A unidade de geração de sinalizador de bloco de filtro 145 usa um coeficiente de filtro, calculado pela unidade de calcular coeficiente de filtro 131, para realizar processamento de filtro adaptativo como a região do bloco ALF a ser processada, e determina o valor do sinalizador de bloco de filtro, dependendo em se a qualidade de imagem do resultado de processamento de filtro é melhorada antes do processamento.

[00151] A unidade de geração de sinalizador de bloco de filtro 145 emite a informação de controle, tal como o sinalizador de bloco de filtro e o tamanho de bloco ALF ou similar.

[00152] A Fig. 9 é um diagrama em blocos mostrando um exemplo de configuração principal da unidade de processamento de filtro adaptativa 113 da Fig. 1.

[00153] A unidade de processamento de filtro adaptativa 113 usa a informação de controle, suprida da unidade de geração de informação de controle 112, para realizar processamento de filtro na imagem decodificada suprida do filtro de desbloqueio 111.

[00154] A unidade de processamento de filtro adaptativa 113 tem uma unidade de controle 171, filtro adaptativo 172, e unidade de seleção 173, como mostrado na Fig. 9.

[00155] A unidade de controle 171 controla o filtro adaptativo 172 e a unidade de seleção 173. Por exemplo, a unidade de controle 171 obtém informação de controle da unidade de geração de informação de controle 112. Também, a unidade de controle 171 supre e ajusta o coeficiente de filtro incluído na informação de controle obtida para o filtro adaptativo 172. Além disso, a unidade de controle 171 identifica a posição da região do bloco ALF a ser processada, com base no tamanho de bloco ALF incluído na informação de controle. Também, a unidade de controle 171 controla o filtro adaptativo 172, com base no valor do sinalizador de bloco de filtro incluído na informação de controle, e submete cada região de bloco ALF ao processamento de filtro quando necessário, enquanto controlando as operaçãoes da unidade de seleção 173.

[00156] O filtro adaptativo 172 submete a região especificada pela unidade de controle 171, como um bloco ALF a ser processado, da imagem decodificada suprida pelo filtro de desbloqueio 111, para processamento de filtro, usando o coeficiente de filtro determinado pela unidade de controle 171. O filtro adaptativo 172 supre os resultados de processamento de filtro para a unidade de seleção 173.

[00157] A unidade de seleção 173 é controlada pela unidade de controle 171, para selecionar uma ou outra imagem decodificada suprida do filtro de desbloqueio 111 (imagem decodificada não submetida ao processamento de filtro adaptativo), e a imagem decodificada suprida do filtro adaptativo 172 (imagem decodificada submetida ao processamento de filtro adaptativo) supre esta à memória de quadro 114 e a armazena como uma imagem de referência.

[00158] Isto é, a unidade de processamento de filtro adaptativa 113 realiza processamento de filtro somente nas regiões em que o sinalizador de bloco de filtro, da imagem decodificada suprida do filtro de desbloqueio 111, indicou para realizar processamento de filtro (regiões determinadas para ter qualidade de imagem melhorada por processamento de filtro).

[00159] A Fig. 10 é um diagrama em blocos mostrando um exemplo de configuração principal da unidade de codificação sem perda 106 da Fig. 1.

[00160] Como descrito acima, a unidade de codificação sem perda 106 submete os dados de coeficiente quantizados, supridos da unidade de quantização 105, à codificação sem perda, e gera os dados codificados, enquanto embutindo (escrevendo) a informação de controle, suprida da unidade de geração de informação de controle 112, no cabeçalho de fatia dos seus dados codificados. Nesta ocasião, a unidade de codificação sem perda 106 compila a informação de controle para cada fatia dentro da imagem (quadro), e embute a uma imagem (um quadro) equivalente de sua informação de controle em um cabeçalho de fatia. Assim, a unidade de codificação sem perda 106 pode deletar as partes de sobreposição entre a informação de controle de cada fatia (parte redundante), e embuti-la dentro do cabeçalho de fatia. Assim, a unidade de codificação sem perda 106 pode melhorar a eficiência de codificação dos dados codificados mais do que no caso de embutir a informação de controle para cada fatia dentro dos dados codificados respectivamente.

[00161] A unidade de codificação sem perda 106 tem uma unidade de codificação 181, unidade de retenção de dados codificados 182, unidade de retenção de informação de controle 183, e unidade de adição de informação de controle 184, como mostrado na Fig. 10.

[00162] A unidade de codificação 181 submete os dados de imagem para cada fatia (dados de coeficiente quantificado) para codificação sem perda, em seguida gera dados codificados. Os dados codificados de cada fatia são retidos na unidade de retenção de dados codificados 182. A unidade de retenção de dados codificados 182 pode reter os dados codificados de pelo menos uma imagem equivalente.

[00163] A unidade de retenção de informação de controle 183 obtém e retém informação de controle para cada fatia gerada pela unidade de geração de informação de controle 112. A unidade de retenção de informação de controle 183 pode reter a informação de controle de pelo menos uma imagem equivalente. A unidade de adição de informação de controle 184 embute a informação de controle, retida na unidade de retenção de informação de controle 183, na informação de cabeçalho da primeira fatia emitida dentro da imagem dos dados codificados retidos na unidade de retenção de dados codificados 182, e supre-a ao memória intermediária de armazenagem 107.

[00164] Nesta ocasião, a unidade de adição de informação de controle 184 compila a informação de controle da imagem a ser processada, que é retida na unidade de retenção de informação de controle 183, deleta as partes redundantes e gera uma imagem equivalente de informação de controle, e embute esta no cabeçalho de fatia dos dados codificados.

[00165] Por exemplo, como mostrado na Fig. 11, o quadro 151 é composto de fatia 0, fatia 1, e fatia 2, e com a unidade de geração de informação de controle 112, a informação de controle 191-1 é gerada como a fatia 0, a informação de controle 191-2 é gerada como a fatia 1, e a informação de controle 191-3 é gerada como a fatia 2.

[00166] Também, os dados codificados 194 são emitidos na ordem de fatia 1, fatia 0, e fatia 2. Isto é, os dados codificados 194 são emitidos na ordem de cabeçalho de fatia 1 192-1, dados de fatia 1, cabeçalho de fatia 0 192-2, dados de fatia 0 193-2, cabeçalho de fatia 2 192-3, dados de fatia 2 193-3.

[00167] Nesta ocasião, a unidade de adição de informação de controle 184 embute a informação de controle 191-1 através da informação de controle 191-3 do quadro 151 todo, no cabeçalho de fatia 1 192-1, que é o cabeçalho da primeira fatia 1 (cabeçalho de fatia) introduzida. Nesta ocasião, a unidade de adição de informação de controle 184 compila a informação de controle 191-1 através da informação de controle 191-3, deleta as partes redundantes, gera (uma imagem equivalente de) informação de controle 191 (não mostrada) que corresponde ao quadro inteiro 151, e embute a sua informação de controle no cabeçalho de fatia 1 192-1.

[00168] A unidade de adição de informação 184 embute a informação de controle no cabeçalho de fatia de acordo com uma sintaxe, tal como aquela mostrada em A na Fig. 12 e B na Fig. 12, por exemplo. A, na Fig. 12, indica um exemplo de uma sintaxe de cabeçalho de fatia, e B, na Fig. 12, indica um exemplo de uma sintaxe para uma parte de informação de controle. Como mostrado em B na Fig. 12, a unidade de adição de informação 184 embute o sinalizador de bloqueio de filtro de todos os blocos de controle do quadro 151 dentro de um cabeçalho de fatia.

[Fluxo de Processamento]

[00169] Em seguida, o fluxo de processamento usando as partes configuradas, como descritas acima, será descrito. Primeiro, um exemplo de fluxo de processamento de codificação realizado pelo dispositivo de codificação de imagem 100 será descrito com referência ao fluxograma da Fig. 13.

[00170] Na etapa S101, a unidade de conversão A/D 101 converte uma imagem de entrada analógica para digital. Na etapa S102, o memória intermediária de rearranjo de tela 102 armazena a imagem convertida A/D e realiza rearranjo na sequência para exibir as imagens na sequência de codificação.

[00171] Na etapa S103, a unidade de computação 103 calcula a diferença entre uma imagem rearranjada pelo processamento na etapa S102 e a imagem de predição. A imagem de predição é suprida à unidade de computação 103 pela unidade de compensação de movimento 116 no evento de realização de interpredição, e pela unidade de intrapredição 115 no evento de realização de intrapredição, via a unidade de selecionar imagem de predição 118.

[00172] Os dados de diferença são menores na quantidade de dados quando comparados aos dados de imagem originais. Portanto, a quantidade de dados pode ser comprimida quando em comparação com o caso de codificação da imagem original sem alteração.

[00173] Na etapa S104, a unidade de transformação ortogonal 104 submete a informação de diferença, gerada pelo processamento na etapa S103, para transformação ortogonal. Especificamente, a transformação ortogonal, tal como discreta transformação de coseno, transformação de Karhunen-Loéve, ou similar, é realizada, e um coeficiente de transformação é emitido. Na etapa S105, a unidade de quantização 105 quantifica o coeficiente de transformação. Na ocasião desta quantização, uma taxa é controlada, tal como o processamento descrito mais tarde será descrito na etapa S119.

[00174] A informação de diferença assim quantificada é localmente decodificada como a seguir. Especificamente, na etapa S106, a unidade de quantização 108 submete o coeficiente de transformação, quantificado pela unidade de quantização 105, à quantização inversa, usando uma propriedade correspondente à propriedade da unidade de quantização 105. Na etapa S107, a unidade de transformação ortogonal 109 submete o coeficiente de transformação, submetido à quantização inversa pela unidade de quantização inversa 108, à transformação ortogonal inversa, usando uma propriedade correspondente à propriedade da unidade de transformação ortogonal 104.

[00175] Na etapa S108, a unidade de computação 110 adiciona a entrada de imagem de predição, via a unidade de selecionar imagem de predição 118, à informação de diferença decodificada localmente, e gera uma imagem decodificada localmente (a imagem correspondente à unidade de computação 103). Na etapa 109, o filtro de desbloqueio 111 submete a saída de imagem, da unidade de computação 110, à filtragem. Assim, o ruído de bloco é removido.

[00176] No processamento acima sendo realizado para uma fatia, na etapa S110, a unidade de geração de informação de controle 112 gera informação de controle a ser usada para processamento de filtro adaptativo. Os detalhes do processamento de geração de informação de controle serão descritos mais tarde.

[00177] Na informação de controle, tal como coeficientes de filtro, tamanho de bloco ALF, e sinalizador de bloco de filtro, e similares sendo gerados pelo processamento na etapa S110, na etapa S111 a unidade de processamento de filtro adaptativa 113 realiza processamento de filtro adaptativo sobre a imagem decodificada submetida ao processamento de filtro de desbloqueio no processamento da etapa S109, usando a informação de controle. Detalhes deste processamento de filtro adaptativo serão descritos mais tarde.

[00178] Na etapa S112, o quadro de memória 114 armazena a imagem submetida ao processamento de filtro adaptativo na etapa S111.

[00179] Na etapa S113, a unidade de intrapredição 115 realiza processamento de intrapredição no modo de intrapredição. Na etapa S114, a unidade de predição de movimento 117 e unidade de compensação de movimento 116 realizam processamento de predição/compensação de movimento no modo de interpredição.

[00180] Na etapa S115, a unidade de selecionar imagem de predição 118 seleciona uma de uma imagem de predição gerada por processamento de intrapredição ou de uma imagem de predição gerada por processamento de predição/compensação de intermovimento, de acordo com o modo de predição do quadro a ser processado. A unidade de selecionar imagem de predição 118 supre a imagem de predição selecionada às unidades de computação 103 e 110. Esta imagem de predição é, como descrito acima, usada para cálculos nas etapas S103 e S108.

[00181] Na etapa S116, a unidade de codificação sem perda 106 realiza o processamento de codificação sem perda, para codificar o coeficiente de transformação quantizado emitido pela unidade de quantização 105. Especificamente, a imagem de diferença é submetida à codificação sem perda, tal como codificação de comprimento variável, codificação aritmética, ou similar, e comprimida. Nesta ocasião, a unidade de codificação sem perda 106 embute (escreve), no cabeçalho de fatia, metadados da informação de controle gerada na etapa S110, informação de modo de intrapredição para processamento de intrapredição na etapa S113, modo de interpredição para processamento de predição/compensação de intermovimento na etapa S114, e assim por diante. Os metadados aqui são exibidos e usados na ocasião da decodificação de imagem. Detalhes do processamento de codificação sem perda serão descritos mais tarde.

[00182] Na etapa S117, o memória intermediária de armazenagem 107 armazena dados codificados. Os dados codificados armazenados no memória intermediária de armazenagem 107 são exibidos quando apropriado e transmitidos para o lado da decodificação, via o trajeto de transmissão.

[00183] Na etapa S118, a unidade de controle de taxa 119 controla a taxa da operação de quantização da unidade de quantização 105, assim, aquele estouro ou estouro negativo não ocorre, com base nos dados codificados armazenados no memória intermediária de armazenagem 107.

[00184] Em seguida, descrição será feita de um exemplo do fluxo de informação de controle gerando processamento, executado pela unidade de geração de informação de controle 112 na etapa S110 da Fig. 13, com referência ao fluxograma da Fig. 14.

[00185] Na informação de controle gerando processamento sendo iniciado na etapa S131, a unidade de calcular coeficiente de filtro 131, da unidade de geração de informação de controle 112, calcula um coeficiente de filtro usando a imagem de entrada suprida do memória intermediária de rearranjo de tela 102 e a imagem decodificada submetida ao processamento de filtro de desbloqueio, que é suprido do filtro de desbloqueio 111. Por exemplo, a unidade de calcular coeficiente de filtro 131 determina o valor do coeficiente de filtro, de modo que o resíduo da imagem de entrada e da imagem decodificada seja o menor.

[00186] No coeficiente de filtro sendo calculado na etapa S132, a unidade de geração de informação de bloco 132 realiza geração de informação de bloco, incluindo tamanho de bloco ALF e sinalizador de bloco de filtro. Detalhes do processamento de geração de informação de bloco serão descritos mais tarde. Na informação de bloco sendo gerada, o fluxo retorna para a etapa S110 da Fig. 13, e o processamento na etapa S111 é em seguida executado.

[00187] Observe-se que o cálculo do coeficiente de filtro realizado na etapa S131 pode ser realizado nos incrementos de quadro. Neste caso, o processamento na etapa S131 pode ser realizado somente em uma fatia predeterminada dentro do quadro (por exemplo, uma fatia onde o número de identificação dentro do quadro é um valor predeterminado (por exemplo, “0”), ou uma primeira fatia processada dentro do quadro, ou similar), com este valor usado para as outras fatias. Também, uma imagem arbitrária pode ser usada para cálculo dos coeficientes de filtro. Por exemplo, o cálculo pode ser realizado com base nas imagens de quadro passadas.

[00188] Em seguida, um exemplo de fluxo do processamento de geração de informação de bloco, executado na etapa S132 na Fig. 14, será descrito com referência ao fluxograma da Fig. 15.

[00189] No processamento de geração de informação de bloco sendo iniciado, na etapa S151 a unidade de identificação da região de fatia do objeto de processamento 141 identifica a região da fatia a ser processada.

[00190] A fim de conhecer a região da fatia atual que é para ser processada, esta pode ser encontrada conhecendo-se os macroblocos incluídos na fatia atual, e conhecendo-se os pixéis incluídos nos macroblocos desta. A unidade de identificação da região de fatia do objeto de processamento 141 obtém o endereço do macrobloco inicial da fatia atual do cabeçalho de fatia.

[00191] Agora, o endereço do macrobloco inicial é um número designado para macroblocos na ordem de varredura por rastreio à esquerda superior da tela. Como mostrado na Fig. 5, o endereço de macrobloco à esquerda superior da imagem (quadro 151) é 0. A fatia 0 é iniciada à esquerda superior do quadro 151, assim, o endereço de macrobloco do macrobloco inicial 156-1 da fatia 0 é 0. Seguindo esta ordem, veremos que o endereço de macrobloco do macrobloco final 156-2 da fatia 0 é E0. Também, do mesmo modo que com esta fatia 0, o endereço de macrobloco do macrobloco inicial 157-1 da fatia 1 é S1, e o endereço de macrobloco do macrobloco final 157-1 é E1. Além disso, o endereço de macrobloco do macrobloco inicial 158-1 da fatia 2 é S2, e o endereço de macrobloco do macrobloco final 158-2 é E2.

[00192] Quando a fatia atual é decodificada, um endereço de macrobloco é adicionado cada vez que o processamento de decodificação de um macrobloco é completado e, eventualmente, o macrobloco final da fatia atual é alcançado. Um sinalizador indicando o macrobloco final da fatia é estabelecido no macrobloco final. Devido a isto, todos os endereços de macrobloco que a fatia atual retém podem ser conhecidos. Isto é, do endereço de macrobloco inicial até o endereço de macrobloco final.

[00193] Agora, com um aparelho de parâmetro de sequência (SPS (Sequence Parameter Set)) de uma corrente AVC (informação de compressão de imagem), o tamanho de imagem de um quadro é indicado pelo número de macroblocos. pic_height_in_map_units_minus1 indica o número de macroblocos na direção vertical da imagem. pic_width_in_mbs_minus1 indica o número de macroblocos na direção horizontal da imagem.

[00194] Portanto, do endereço de macrobloco, a posição do

[00195] Na Expressão (2) e Expressão (3), mbx indica qual número à esquerda o macrobloco é, e mby indica qual número do topo o macrobloco é. Também, piso [z] indica z sendo arredondado para um decimal mais próximo, a fim de ser um número inteiro, e A % B indica o resto da divisão de A com B.

[00196] Se dissermos que o tamanho do macrobloco é determinado para ser de 16 x 16 pixéis, a posição da direção vertical e da direção horizontal do pixel à esquerda superior do macrobloco é (16 x mbx, 16 x mby), e os pixéis incluídos no macrobloco são pixéis incluídos na faixa de 16 pixéis na direção inferior e 16 pixéis na direção à direita da posição de pixel à esquerda superior. Assim afastados, todos os pixéis da fatia atual podem ser conhecidos. Isto é, a região da fatia para ser processada é identificada.

[00197] Na Expressão (4) e Expressão (5), num_alf_block_x e num_alf_block_y são os números de blocos ALF horizontais e verticais incluídos na imagem, respectivamente. Também, alf_block_size representa o tamanho de um lado de um bloco ALF. Para simplificar a descrição aqui, diremos que blocos ALF são quadrados. Naturalmente, um arranjo pode ser feito onde o tamanho de direção vertical e o tamanho de direção horizontal dos blocos ALF são diferentes entre si.

[00198] Na etapa S154, a unidade de identificação da região de bloco ALF objeto de processamento 143 determina os blocos ALF para serem processados. Na etapa S155, a unidade de identificação da região de bloco ALF objeto de processamento 143 determina a região do bloco ALF a ser processado.

[00199] A posição do bloco ALF i’th é expressa pela seguinte Expressão (6) e Expressão (7).

[00200] Na Expressão (6) e Expressão (7), cada alf_block_x e alf_block_y indica qual número, na direção horizontal e na direção vertical, o bloco ALF i’th é. A posição do pixel à esquerda superior do bloco ALF i’th é uma posição obtida multiplexando-se cada um de alf_block_x e alf_block_y e alf_block_size. Isto é, a direção horizontal é 16 x alf_block_x, e a direção vertical é 16 x alf_block_y. Portanto, a região do bloco ALF i’th é uma faixa de alf_block_size x alf_block_size do seu pixel à esquerda superior.

[00201] Na etapa S156, a unidade de determinação 144 determina se ou não uma região da fatia a ser processada é incluída dentro da região do bloco ALF a ser processado, que foi identificado como descrito acima.

[00202] No evento em que determinação é feita de que a região da fatia a ser processada está incluída dentro da região do bloco ALF a ser processado, o fluxo avança para a etapa S157. O bloco ALF a ser processado é um bloco ALF necessário para a fatia ser processada, por meio do que, na etapa S157, a unidade de geração de sinalizador de bloco de filtro 145 gera um sinalizador de bloco de filtro para o seu bloco ALF. Na etapa S158, a unidade de geração de sinalizador de bloco de filtro 145 emite o sinalizador de bloco de filtro gerado.

[00203] No processamento do término da etapa S158, o fluxo avança para a etapa S159. Também, na etapa S156, no caso de a determinação ser feita de que a região da fatia a ser processada não está incluída dentro da região do bloco ALF a ser processado, o bloco ALF é desnecessário para a fatia ser processada, por meio do que o fluxo avança para a etapa S159.

[00204] Na etapa S159, determinação é feita quanto a se ou não a unidade de identificação da região de bloco ALF objeto de processamento 143 processou todos os blocos ALF dentro de um quadro e, no caso de determinação ser feita do processamento não ter sido realizado, o fluxo retorna para a etapa S154, um novo bloco ALF é determinado para ser processado, e o processamento em seguida é repetido. Cada vez que este processamento de laço é repetido, a unidade de identificação da região de bloco ALF objeto de processamento 143 seleciona um bloco ALF do grupo de bloco ALF pavimentado em uma região do quadro como um bloco ALF para ser processado, um de cada vez a partir do bloco ALF esquerdo superior na ordem de varredura por rastreio.

[00205] Também, no caso de determinação ser feita na etapa S159 de que todos os blocos ALF dentro do quadro foram processados, o processamento de geração de informação de bloco é finalizado, o fluxo retorna para a etapa S132 na Fig. 14, o processamento de geração de informação de controle é finalizado, o fluxo retorna para a etapa S110 da Fig. 13, e o processamento na etapa S111 e daí em diante é realizado.

[00206] Observe-se que na descrição acima, no evento em que blocos ALF são dispostos a fim de pavimentar uma região de uma imagem de quadro, o quadro superior esquerdo é descrito ser o ponto de origem, porém a posição deste ponto de origem é ótima. Por exemplo, esta pode ser à esquerda inferior, à direita inferior, à direita superior, ou no centro do quadro. Entretanto, a posição do ponto de origem e a maneira de ordenar os blocos ALF precisam ser determinadas antecipadamente, a fim de serem comuns entre o processamento de codificação e o processamento de decodificação.

[00207] Também, na descrição acima, a ordem de selecionar os blocos ALF para serem processados é descrita como sendo a ordem superior esquerda de varredura por rastreio, porém a ordem de seleção e a posição de partida aqui são ótimas.

[00208] Em seguida, um exemplo de fluxo do processamento de filtro adaptativo, executado na etapa S111 na Fig. 13, será descrito com referência ao fluxograma da Fig. 16.

[00209] No processamento de filtro adaptativo sendo processado, uma imagem decodificada da fatia a ser processada é suprida para o filtro adaptativo 172 e unidade de selecionar 173. Na etapa S171, a unidade de controle 171 identifica a região da fatia a ser processada. Como com o caso do processamento da etapa S151 da Fig. 15, a unidade de controle 171 obtém um endereço de macrobloco da fatia relevante do cabeçalho de fatia, ainda detecta a identificação de sinalizador do último macrobloco, e identifica a região do macrobloco inicial até o último macrobloco como a região da fatia para ser processada.

[00210] Na etapa S172, a unidade de controle 171 obtém o coeficiente de filtro gerado pela unidade de geração de informação de controle 112 e ajusta o coeficiente de filtro no filtro adaptativo 172. Na etapa S173, a unidade de controle 171 obtém o tamanho de bloco ALF determinado pela unidade de geração de informação de controle 112, e ajusta (dispõe) os blocos ALF no seu tamanho de bloco ALF a fim de pavimentar a região inteira do quadro.

[00211] Na etapa S174, a unidade de controle 171 determina um dos blocos ALF não processados, do grupo de bloco ALF assim ajustados, para ser o bloco ALF a ser processado, como com o caso da etapa S154 da Fig. 15. A ordem de seleção de bloco ALF é determinada antecipadamente, e é comum com a ordem de seleção daquela unidade de geração de informação de controle 112.

[00212] Na etapa S175, a unidade de controle 171 identifica a região do bloco ALF determinada para ser processada, como no caso da etapa S155 da Fig. 15.

[00213] Na etapa S176, a unidade de controle 171 determina se ou não a região da fatia a ser processada está incluída dentro da região do bloco ALF a ser processado, do mesmo modo que com o caso da etapa S156 da Fig. 15. No caso de determinação ser feita de que esta está incluída, o fluxo avança para a etapa S177.

[00214] Na etapa S177, a unidade de controle 171 obtém o sinalizador de bloco de filtro do bloco ALF para ser processado, que foi gerado pela unidade de geração de informação de controle 112. A unidade de geração de informação de controle 112 gera o sinalizador de bloco de filtro, como descrito acima, por meio do que, atualmente somente o sinalizador de bloco de filtro para o bloco ALF, incluindo a região da fatia para ser processada, é suprido. A ordem de processamento do bloco ALF é comum com aquela da unidade de geração de informação de controle 112, por meio do que os sinalizadores de bloco de filtro são supridos na ordem de processamento de bloco ALF. Portanto, a unidade de controle 171 obtém (usa) os sinalizadores de bloco de filtro na sua ordem suprida e, portanto, podem obter (usar) o sinalizador de bloco de filtro do bloco ALF para ser processado.

[00215] Observe-se que o instante de suprimento do sinalizador de bloco de filtro e o instante de obtenção do sinalizador de bloco de filtro, da unidade de controle 171, não se igualam. Isto é, a unidade de controle 171 pode temporariamente reter o sinalizador de bloco de filtro, suprido da unidade de geração de informação de controle 112, em uma memória intermediária embutido ou similar, por exemplo, e exibir o sinalizador de bloco de filtro do memória intermediária durante o processamento da etapa S177. Neste caso, também se estabelecendo a ordem de exibição dos sinalizadores de bloco de filtro para ser a ordem suprida da unidade de geração de informação de controle 112, isto é, a mesma que a ordem de armazenagem do memória intermediária, a unidade de controle 171 pode obter o sinalizador de bloco de filtro do bloco ALF para ser processado.

[00216] Na etapa S178, a unidade de controle 171 determina se ou não o valor do sinalizador de bloco de filtro é 1. No caso em que o valor do sinalizador de bloco de filtro é 1, e instruções são fornecidas para realizar o processamento de filtro sobre a região do bloco ALF a ser processado, o fluxo avança para a etapa S179. Na etapa 179, o filtro adaptativo 172 é controlado pela unidade de controle 171 para realizar processamento de filtro sobre o bloco ALF a ser processado. No término do processamento da etapa S179, o fluxo avança para a etapa S180. Neste caso, na etapa S180, a unidade de selecionar 173 é controlada pela unidade de controle 171 para selecionar a saída do filtro adaptativo 172, e emite esta na memória de quadro 114. Isto é, a (uma região de uma parte da) imagem decodificada submetida ao processamento de filtro é armazenada na memória de quadro 114. No processamento do término da etapa S180, o fluxo avança para a etapa S181.

[00217] Também, na etapa S178, no caso em que o valor do sinalizador de bloco de filtro é 0 e que instruções são fornecidas para o processamento de filtro não ser realizado sobre a região do bloco ALF a ser processado, o processamento na etapa S179 é omitido, e o fluxo avança para a etapa S180. Neste caso, a unidade de selecionar 173 é controlada pela unidade de controle 171, para selecionar a saída do filtro de desbloqueio 111 e emiti-lo para o quadro de memória 114 na etapa S180. Isto é, a (uma região de uma parte da) imagem decodificada não submetida ao processamento de filtro é armazenada no quadro de memória 114. No processamento do término da etapa S180, o fluxo avança para a etapa S181.

[00218] Também, no caso de determinação ser feita na etapa S176 de que a região da fatia a ser processada não está incluída na região do bloco ALF a ser processado, o bloco ALF a ser processado é um bloco ALF que não está relacionado com a fatia a ser processada, assim, o processamento na etapa S177, através da etapa S180, é omitido, e o fluxo avança para a etapa S181.

[00219] Na etapa S181, a unidade de controle 171 determina se ou não todos os blocos ALF dentro do quadro foram processados. No caso de determinação ser feita de que os blocos ALF não processados existem, o fluxo retorna para a etapa S174, e o processamento a seguir é repetido para um novo bloco ALF a ser processado. Em cada ocasião o processamento de laço aqui é repetido, a unidade de controle 171 seleciona um bloco ALF de um grupo de bloco ALF pavimentado em uma região do quadro como um bloco ALF a ser processado, um de cada vez a partir do bloco ALF esquerdo superior na ordem de varredura por rastreio.

[00220] Também, no caso de determinação ser feita na etapa S181 de que todos os blocos ALF dentro do quadro foram processados, o processamento de filtro adaptativo é finalizado, o fluxo retorna para a etapa S111 na Fig. 13, e o processamento na etapa S112 e daí em diante é realizado.

[00221] Realizando-se assim o processamento de filtro adaptativo, a unidade de processamento de filtro adaptativa 113 pode apropriadamente executar o processamento de filtro como a fatia a ser processada, com base no sinalizador de bloco de filtro da parte dos blocos ALF dentro do quadro, necessário para a fatia ser processada nas múltiplas fatias formadas no quadro. Assim, a unidade de processamento de filtro adaptativa 113 pode reduzir o ruído de bloco e ruído de quantização da fatia a ser processada que poderia não ser removida com o filtro de desbloqueio.

[00222] Em seguida, um exemplo de fluxo de processamento de codificação sem perda, executado na etapa S116 da Fig., 13 será descrito com referência ao fluxograma da Fig. 17.

[00223] No início do processamento de codificação sem perda, na etapa S191, a unidade de codificação 181 da unidade de codificação sem perda 106 sequencialmente codifica os dados de imagem supridos (dados de coeficiente quantificado), desse modo codificando a fatia a ser processada e gerando dados codificados.

[00224] Na etapa S192, a unidade de retenção de dados codificados 182 retém os dados codificados gerados na etapa S191. Na etapa S193, a unidade de retenção de informação de controle 183 retém a informação de controle correspondente a uma fatia (fatia a ser processada) em que dados codificados pertencem, suprida da unidade de geração de informação de controle 112.

[00225] Os vários processamentos na etapa S191, através da etapa S193, como descrito acima, são realizados para cada fatia dentro do quadro. No término do processamento de uma fatia equivalente, na etapa S194, a unidade de adição de informação de controle 184 determina se ou não a unidade de codificação 181 tem dados de imagem codificados (dados de coeficiente quantificado) para todas as fatias dentro do quadro. No caso de determinação ser feita de que uma fatia não processada existe, o fluxo retorna para a etapa S191, e o processamento em seguida é repetido.

[00226] Na etapa S194, no caso de determinação ser feita de que todas as fatias dentro do quadro foram codificadas pela unidade de codificação 181, o fluxo avança para a etapa S195.

[00227] Na etapa S195, a unidade de adição de informação de controle 184 embute a informação de controle, retida na unidade de retenção de informação de controle 183, no cabeçalho de fatia da primeira fatia transmitida dos dados codificados para um quadro equivalente que é retido na unidade de retenção de dados codificados 182. Nesta ocasião, a unidade de adição de informação de controle 184 obtém e compila a informação de controle, retida na unidade de retenção de informação de controle 183, e gera informação de controle equivalente a uma imagem do quadro (imagem) em que os dados codificados pertencem. A unidade de adição de informação de controle 184 embute a uma imagem equivalente de sua informação de controle no cabeçalho de fatia.

[00228] Isto é, no um quadro equivalente de dados codificados compostos de múltiplas fatias, um quadro (imagem) equivalente de informação de controle (coeficiente de filtro, tamanho de bloco ALF, sinalizador de bloco de filtro, e similares) é adicionado (embutido) em um dos seus cabeçalhos de fatia.

[00229] Isto é, a informação de controle de múltiplas fatias é adicionada a um cabeçalho de fatia (informação de controle de outras fatias é também adicionada). No caso de embutir a informação de controle dentro de múltiplos cabeçalhos de fatia por fatia, conteúdo duplicativo pode ocorrer na informação de controle, porém a unidade de adição de informação de controle 184 compila e adiciona o um quadro equivalente de informação de controle em um cabeçalho de fatia, por meio do que tal redundância pode ser reduzida, e a eficiência de codificação pode ser melhorada.

[00230] Agora, “adicionar” significa correlacionar a informação de controle aos dados codificados com uma ótima forma. Por exemplo, isto pode ser descrito como uma sintaxe dos dados codificados, ou pode ser descrito como dados de usuário. Também, a informação de bloco pode ser em um estado ligado com os dados codificados como metadados. Isto é, “adicionar” inclui “embutir”, “descrever”, “multiplexar”, “ligar”, e assim por diante.

[00231] A unidade de adição de informação de controle 184, que adicionou a informação de controle aos dados codificados, na etapa S196 emite os dados codificados em uma ordem predeterminada. Na emissão de uma imagem equivalente de dados codificados, a unidade de codificação sem perda 106 termina o processamento de codificação sem perda, retorna para a etapa S116 da Fig. 13, e avança para o processamento na etapa S117 e daí em diante.

[00232] Realizando-se tal processamento de codificação sem perda, o dispositivo de codificação de imagem 100 pode suprimir a redução da eficiência de codificação por controle local do processamento de filtro na ocasião de codificação ou na ocasião de decodificação. Por exemplo, no caso de dividir completamente os vários quadros de imagem em múltiplas fatias e processar, o dispositivo de codificação de imagem 100 pode suprimir a redução da eficiência de codificação.

<2.Segunda Forma de realização>

[00233] Em seguida, um dispositivo de decodificação de imagem, correspondente ao dispositivo de codificação de imagem 100 descrito na primeira forma de realização, será descrito. A Fig. 18 é um diagrama em blocos ilustrando o exemplo de configuração de uma forma de realização de um dispositivo de decodificação de imagem servindo como um dispositivo de processamento de imagem no qual a presente invenção foi aplicada.

[00234] Um dispositivo de decodificação de imagem 200 decodifica saída de dados codificados do dispositivo de codificação de imagem 100, e gera uma imagem decodificada.

[00235] Um dispositivo de decodificação de imagem 200 é configurado de uma memória intermediária de armazenagem 201, uma unidade de decodificação sem perda 202, uma unidade de quantização inversa 203, uma unidade de transformação ortogonal inversa 204, uma unidade de computação 205, e um filtro de desbloqueio 206. O dispositivo de decodificação de imagem 200 também tem uma unidade de processamento de filtro adaptativa 207. O dispositivo de decodificação de imagem 200 ainda tem uma memória intermediária de rearranjo de tela 208 e uma unidade de conversão D/A (Digital/Analógica) 209. O dispositivo de decodificação de imagem 200 também tem memória de quadro 210, uma unidade de intrapredição 211, uma unidade de compensação de movimento 212, e uma unidade de seleção 213.

[00236] O memória intermediária de armazenagem 201 armazena uma informação de imagem comprimida transmitida. A unidade de decodificação sem perda 202 decodifica a informação suprida do memória intermediária de armazenagem 201 e codificada pela unidade de codificação sem perda 106 da Fig. 1 usando um formato correspondente ao formato de codificação da unidade de codificação sem perda 106.

[00237] No evento em que o macrobloco atual foi intracodificado, a unidade de decodificação sem perda 202 extrai a informação de modo de intrapredição, armazenada na parte de cabeçalho dos dados codificados, e transmite-a para a unidade de intrapredição 211. Também, no evento em que o macrobloco atual foi intercodificado, a unidade de decodificação sem perda 202 extrai a informação de vetor de movimento, armazenada na parte de cabeçalho dos dados codificados, e transfere-a para a unidade de compensação de movimento 212.

[00238] Também, a unidade de decodificação sem perda 202 extrai uma imagem equivalente da informação de controle (informação de controle gerada pela unidade de geração de informação de controle 112) para o filtro adaptativo, do cabeçalho de fatia da primeira fatia suprida dentro do quadro, dos dados codificados, e supre-a à unidade de processamento de filtro adaptativa 207.

[00239] A unidade de quantização inversa 203 submete a imagem decodificada, pela unidade de decodificação sem perda 202, à quantização inversa, usando um formato correspondente ao formato de quantização da unidade de quantização 105 da Fig. 1. A unidade de transformação ortogonal inversa 204 submete a saída da unidade de quantização inversa 203 à transformação ortogonal inversa, usando um formato correspondente ao formato de transformação ortogonal da unidade de transformação ortogonal 104 da Fig. 1.

[00240] A unidade de computação 205 adiciona a imagem de predição, suprida da unidade de seleção 213, à informação de diferença submetida à transformação ortogonal inversa, e gera uma imagem decodificada. O filtro de desbloqueio 206 remove o ruído de bloco da imagem decodificada que foi gerada pelo processamento de adição.

[00241] A unidade de processamento de filtro adaptativa 207 realiza processamento de filtro na imagem suprida do filtro de desbloqueio 206 com base na informação do coeficiente de filtro, tamanho de bloco ALF, e sinalizador de bloco de filtro, e similares, incluídos na uma imagem equivalente de informação de controle suprida da unidade de decodificação sem perda 202. A unidade de processamento de filtro adaptativa 207 realiza processamento de filtro adaptativo do mesmo modo que com a unidade de processamento de filtro adaptativa 113 da Fig. 1. Portanto, a unidade de processamento de filtro adaptativa 207 pode reduzir ruído de bloco e ruído devido à quantização, que poderia não ser completamente removido com o filtro de desbloqueio 206.

[00242] A unidade de processamento de filtro adaptativa 207 supre a imagem seguinte ao processamento de filtro à memória de quadro 210, a fim de ser armazenada como informação de imagem de referência, e também a emite ao memória intermediária de rearranjo de tela 208.

[00243] O memória intermediária de rearranjo de tela 208 realiza rearranjo de imagens. Isto é, a ordem dos quadros rearranjados para codificação pelo memória intermediária de rearranjo de tela 102 da Fig. 1 é rearranjada na ordem de exibição original. A unidade de conversão D/A 209 realiza conversão D/A da imagem suprida do memória intermediária de rearranjo de tela 208, e emite-a. Por exemplo, a unidade de conversão D/A 209 emite os sinais de saída obtidos realizando-se conversão D/A para um monitor, não mostrado, e exibe uma imagem.

[00244] A unidade de intra predição 211 gera uma imagem de predição baseada na informação suprida pela unidade de codificação sem perda 202, no evento de que o quadro atual tenha sido intra codificado, e emite a imagem de predição gerada para a unidade de seleção 213.

[00245] No evento de que o quadro de corrente tenha sido inter codificado, a unidade de compensação de movimento 212 realiza processamento de compensação de movimento quanto à informação de imagem de referência armazenada na memória de quadro 210, com base na informação do vetor de movimento suprida pela unidade de codificação sem perda 202.

[00246] No evento de que o macrobloco atual tenha sido intra codificado, a unidade de seleção 213 conecta-se à unidade de intra predição 211 e supre a imagem suprida pela unidade de intra predição 211 para a unidade de computação 205 como uma imagem de predição. Também no evento de que o macrobloco atual tenha sido inter codificado, a unidade de seleção 213 conecta-se à unidade de compensação de movimento 212 e supre a imagem suprida pela unidade de compensação de movimento 212 para a unidade de computação 205 como uma imagem de predição.

[00247] A Fig. 19 é um diagrama de bloco mostrando um exemplo de configuração detalhada da unidade de decodificação sem perda 202 da Fig. 18. Observamos que a descrição de uma configuração relativa à extração da informação de modo de intra-predição e informação do vetor de movimento serão omitidas, por simplicidade de descrição.

[00248] Como mostrado na Fig. 19, a unidade de decodificação sem perda 202 tem uma unidade de extração de informação de controle 221 e unidade de decodificação 222. A unidade de extração de informação de controle 221 obtém dados codificados do memória intermediária de armazenagem 201, extrai um valor de imagem da informação de controle do cabeçalho de fatia da fatia suprida primeiro dentro do quadro e supre este para a unidade de processamento de filtro adaptativa 207.

[00249] A unidade de codificação 222 decodifica os dados codificados supridos pela unidade de extração de informação de controle 221 com um método de decodificação correspondendo ao método de codificação da unidade de codificação sem perda 106, e gera dados decodificados (dados de coeficiente quantizado). A unidade de decodificação 222 supre os dados decodificados gerados para a unidade de quantização inversa 203.

[00250] Assim, a unidade de extração de informação de controle 221 extrai a informação de controle embutida no cabeçalho de fatia dos dados codificados e supre esta para a unidade de processamento de filtro adaptativa 207, por meio do que a unidade de processamento de filtro adaptativa 207 pode apropriadamente realizar processamento de filtro adaptativo baseado em sua informação de controle. Isto é, a unidade de processamento de filtro adaptativa 207 pode realizar processamento de filtro adaptativo similar à unidade de processamento de filtro adaptativa 113 do dispositivo de codificação de imagem 100.

(Fluxo de Processamento)

[00251] Um exemplo do fluxo do processamento de decodificação que este dispositivo de decodificação de imagem 200 executa será descrito com referência ao fluxograma da Fig. 20.

[00252] Na etapa S201, o memória intermediária de armazenagem 201 armazena a imagem transmitida (dados codificados). Na etapa S202, a unidade de decodificação sem perda 202 realiza processamento de decodificação sem perda para submeter os dados codificados supridos pelo memória intermediária de armazenagem 201 para decodificação sem perda.

[00253] Embora os detalhes sejam descritos mais tarde, com o processamento de decodificação sem perda aqui, a imagem I, imagem P e imagem B codificadas pela unidade de codificação sem perda 106 da Fig. 1, são decodificadas. Observamos que nesta ocasião, a informação do vetor de movimento, informação de quadro de referência, informação do modo de predição (informação indicando o modo de intra predição ou modo de inter predição) e assim em diante são também extraídas.

[00254] Especificamente, no evento de que a informação do modo de predição seja informação de modo de intra-predição, a informação do modo de predição é suprida para a unidade de intra predição 211. No evento de que a informação do modo de predição seja informação de modo de inter predição, a informação do vetor de movimento e informação de quadro de referência correspondendo à informação do modo de predição são supridas à unidade de compensação de movimento 212.

[00255] Também com o processamento de decodificação sem perda aqui, um valor de imagem da informação de controle para processamento de filtro adaptativo é extraída do cabeçalho de fatia dos dados codificados e é suprido para a unidade de processamento de filtro adaptativa 207.

[00256] Na etapa S203, a unidade de quantização inversa 203 inversamente quantifica o coeficiente de transformação decodificado na etapa S202 utilizando uma propriedade correspondendo à propriedade da unidade de quantização 105 da Fig. 1. Na etapa S204, a unidade de transformação ortogonal inversa 204 submete o coeficiente de transformação inversamente quantizado na etapa S203 a transformação ortogonal inversa empregando uma propriedade correspondendo à propriedade da unidade de transformação ortogonal 104 da Fig. 1. Isto significa que a informação de diferença correspondendo à entrada da unidade de transformação ortogonal 104 da Fig. 1 (a saída da unidade de computação 103) foi decodificada.

[00257] Na etapa S205, a unidade de computação 205 adiciona a imagem de predição selecionada no processamento na etapa por último descrita à informação de diferença. Assim, a imagem original é decodificada. Na etapa S206, o filtro de desbloqueio 206 submete a saída da imagem da unidade de computação 205 a filtragem. Assim, o ruído de bloco é removido.

[00258] Na etapa S207, a unidade de processamento de filtro adaptativa 207 realiza ainda processamento de filtro adaptativo na imagem que foi submetida a processamento de filtro desbloqueante. Este processamento de filtro adaptativo é o mesmo que o processamento que a unidade de processamento de filtro adaptativa 113 da Fig. 1 realiza. Isto é, este processamento de filtro adaptativo é o mesmo que o caso descrito com referência ao fluxograma da Fig. 16, que não usando a informação de controle suprida pela unidade de decodificação sem perda 202. Observamos, entretanto, que a informação de controle suprida por esta unidade de decodificação sem perda 202 foi gerada pela unidade de geração de informação de controle 112 da Fig.1 e é substancialmente equivalente à informação de controle suprida pela unidade de geração de informação de controle 112, que a unidade de processamento de filtro adaptativa 113 da Fig. 1 utiliza.

[00259] Devido a este processamento de filtro adaptativo, ruído de bloco e ruído devido à quantização que não pôde ser completamente removida com o processamento de filtro de desbloqueio podem ser reduzidos.

[00260] Na etapa S208, a memória de quadro 210 armazena a imagem submetida a filtragem.

[00261] No evento de que informação do modo de intra predição tenha sido suprida, na etapa S209 a unidade de intra predição 211 realiza processamento de intrapredição no modo de intra predição. Também no evento de que informação de modo de inter-predição tenha sido suprida, na etapa S210 a unidade de compensação de movimento 212 realiza processamento de compensação de movimento no modo de inter predição.

[00262] Na etapa S211, a unidade de seleção 213 seleciona uma imagem de predição. Isto é, uma da imagem de predição gerada pela unidade de intra predição 212 e da imagem de predição grada pela unidade de compensação de movimento 212 é selecionada e a imagem de predição selecionada é suprida para a unidade de computação 205.

[00263] Por exemplo, no evento de uma imagem que tenha sido intracodificada, a unidade de seleção 213 seleciona uma imagem de predição gerada pela unidade de intra predição 211 e supre esta para unidade de computação 205. Também no evento de uma imagem que tenha sido intercodificada, a unidade de seleção 213 seleciona uma imagem de predição gerada pela unidade de compensação de movimento 212 e supre esta para a unidade de computação 205.

[00264] Na etapa S212, o memória intermediária de rearranjo de tela 208 realiza rearranjo. Especificamente, a sequência dos quadros rearranjados para codificação pelo memória intermediária de rearranjo de tela 102 do dispositivo de codificação de imagem 100 da Fig. 1 é rearranjado para a sequência de exibição original.

[00265] Na etapa S213, a unidade de conversão D/A 209 realiza conversão D/A da imagem do memória intermediária de rearranjo de tela 208. Esta imagem é emitida para um monitor não mostrado e a imagem é exibida.

[00266] Assim, com a unidade de decodificação de imagem 200, a unidade de decodificação sem perda 202 extrai a informação de controle suprida pelo dispositivo de codificação de imagem 100 e decodifica e a unidade de processamento de filtro adaptativa 207 realiza processamento de filtro adaptativo o mesmo que com a unidade de processamento de filtro adaptativa 113 do dispositivo de codificação de imagem 100, usando esta informação de controle.

[00267] Em seguida, será descrito um exemplo de fluxo de processamento de decodificação sem perda executado na etapa S202 da Figura 20, com referência ao fluxograma da Fig. 21.

[00268] Quando o processamento de decodificação sem perda é iniciado, a unidade de extração de informação de controle 221 determina na etapa S231 se ou não os dados codificados supridos é a fatia primeiro transmitida do quadro (imagem).

[00269] Por exemplo, no caso de que o número de quadro (frame_num) difira das fatias até agora, sua fatia é a primeira fatia da imagem pertinente. Também, por exemplo, no caso de que o sinalizador indicando que a imagem de quadro ou a imagem de campo (field_pic_flag) difere das fatias até agora, sua fatia é a primeira fatia da imagem pertinente. Além disso, por exemplo, no caso em que o sinalizador indicando um campo de topo ou campo de base (bottom_field_flag) difira das fatias até agora, sua fatia é a primeira fatia da imagem pertinente. Também, por exemplo, no caso de que o número de quadro (frame_num) seja o mesmo e o valor da contagem de ordem de imagem POC difira das fatias até agora, sua fatia é a primeira fatia da imagem pertinente. Além disso, por exemplo, no caso de que a informação nal_ref_idc difira das fatias até agora, sua fatia é a primeira fatia da imagem pertinente. Também, no caso de uma imagem IDR, em que a informação idr_pic_idc difira das fatias até agora, sua fatia é a primeira fatia da imagem pertinente.

[00270] Deste modo, a unidade de extração de informação de controle 221 referencia os valores aqui e, no caso em que um dos valores difira das fatias até agora, determina que sua fatia é a primeira fatia da imagem pertinente.

[00271] Não precisa ser mencionado que a unidade de extração de informação de controle 221 pode determinar se ou não a fatia é aquela que tinha sido transmitida primeiro, com base em informação que não esta.

[00272] Na etapa S231, no de determinação ser feita de que a fatia tinha sido primeiro transmitida do quadro, o fluxo avança para a etapa S232. Na etapa S232, a unidade de extração de informação de controle 221 extrai um valor de imagem da informação de controle de seu cabeçalho de fatia e supre e supre este para a unidade de processamento de filtro adaptativa 207.

[00273] Quando a informação de controle é extraída, o fluxo avança para a etapa S233. Também na etapa S231, no caso de a determinação ser feita de que os dados codificados supridos não é a fatia primeiro transmitida do quadro (imagem), o fluxo avança para a etapa S233.

[00274] Na etapa S233, a unidade de decodificação 222 decodifica a fatia a ser processada dos dados codificados. Na etapa S234, a unidade de decodificação 222 emite os dados decodificados e decodificados obtidos (dados de coeficiente quantizados) para a unidade de quantização inversa 203. Na etapa S235, a unidade de decodificação 222 determina se ou não todos as fatias dentro do quadro foram processadas. No caso de ser feita determinação de que uma fatia não processada existe, o fluxo retorna para a etapa S231 e o processamento em seguida é repetido. Também no caso de determinação ser feita na etapa S235 de que todas fatias dentro do quadro foram processadas, o processamento de decodificação sem perda é terminado, o fluxo retorna para a etapa S207 da Fig. 20, e o processamento da etapa S208 e em seguida é executado.

[00275] Realizando processamento de decodificação sem perda desta maneira, a unidade de decodificação sem perda 202 pode extrair a informação de controle adicionada aos dados codificados e suprir esta para a unidade de processamento de filtro adaptativa 207. Assim, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executar processamento de filtro adaptativo. Deste modo,a unidade de processamento de filtro adaptativa 207 pode reduzir ruído de bloco e ruído devido à quantização da fatia a ser processada, que não pôde ser completamente removida com o filtro de desbloqueio.

[00276] Também nesta ocasião, como descrito acima, a informação de controle é embutida no cabeçalho de fatia da primeira fatia da imagem pertinente, e a unidade de extração de informação de controle 221 apropriadamente detecta a primeira fatia da imagem pertinente e extrai um valor de imagem da informação de controle de seu cabeçalho de fatia.

[00277] Ao assim fazer, a unidade de processamento de filtro adaptativa 207 pode preparar a informação de controle da imagem pertinente no ponto do processamento da primeira fatia, e pode realizar processamento de filtro adaptativo sem indevido retardo. Isto é, no evento de realizar processamento de filtro adaptativo em cada fatia, não á necessidade de prover tempo de espera desnecessário para preparação da informação de controle, por meio do que a unidade de processamento de filtro adaptativa 207 pode realizar processamento de filtro adaptativo em um tempo de processamento similar, como o caso de embutir a informação de controle dentro de cada cabeçalho de fatia.

[00278] Portanto, o desta invenção 200 pode suprimir redução de eficiência de codificação pelo controle local do processamento de filtro. Por exemplo, a redução da eficiência de codificação pode ser suprimida, mesmo no caso de dividir cada quadro de imagem em múltiplas fatias e processamento.

<3. Terceira Forma de Realização> [Breve Descrição do Exemplo de Incluir Informação de Controle no Cabeçalho da Fatia de Partida]

[00279] Observe-se que, embora a descrição tenha sido feita acima daquele valor de imagem da informação de controle, ela é adicionada ao cabeçalho de fatia da primeira saída de fatia (transmitida), porém a informação de controle pode ser adicionada ao cabeçalho de fatia de outra fatia. Por exemplo, a informação de controle pode ser adicionada ao cabeçalho da fatia de partida.

[00280] A fatia de partida é a fatia situada no topo de um quadro (imagem), por exemplo. Também a fatia de partida é a fatia com o menor no. de identificação de fatia, por exemplo. Além disso, a fatia de partida é a fatia incluindo um macrobloco cujo endereço MB é “0”, por exemplo. Geralmente, estas fatias são todas a mesma fatia, porém não precisam concordar. Neste caso, a fatia de partida é determinada com base em qualquer uma das condições.

[00281] Isto é, embora a fatia transmitida primeiro como descrito com a primeira forma de realização e segunda forma de realização, seja a fatia identificada por sua ordem de processamento, esta fatia de partida é uma fatia identificada pela relação posicional (p. ex., identificação No. ou coordenadas).

[00282] Por exemplo, digamos que como mostrado na Fig. 22, em um quadro 151, configurado de três fatias (fatia 0, fatia 1 e fatia 2), a fatia 0 seja colocada como a fatia de partida.

[00283] Neste caso, a informação de controle 191-1, através da informação de controle 191-3, gerada para as fatias, é toda adicionada ao cabeçalho de fatia 0 192-2, que é o cabeçalho de fatia da fatia de início, independente da ordem em que as fatias são processadas. O endereço MB inicial desta fatia 0 é 0. Por conseguinte, neste caso, a unidade de extração de informação de controle 221 referencia o valor da first_mb_in_slice (informação estipulando o primeiro endereço MB da fatia) no cabeçalho de fatia e, se seu valor for “0”, pode-se saber que a informação de controle é incluída a seguir. Portanto, a unidade de extração de informação de controle 221 pode facilmente confirmar a existência da informação de controle sem inspeção do limite, e extraí-la.

[00284] Entretanto, como mostrado na Fig. 22 também, a fatia de partida não é necessariamente transmitida primeiro. No caso do exemplo da Fig. 22, os dados codificados 194 são transmitidos na ordem de fatia 1, fatia 0,

[00285] Deste modo, nesta caso, a unidade de processamento de filtro adaptativa 207 não pode realizar processamento de filtro adaptativo para fatias transmitidas antes da fatia de partida (fatia 0 no caso do exemplo da Fig. 22) até a informação de controle ser extraída da fatia de partida.

[Lado de Codificação]

[00286] A configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 neste caso é o mesmo que o caso da primeira forma de realização descrita com referência à Fig. 10.

[00287] O fluxo do processamento de codificação sem perda neste caso será determinado com referência ao fluxograma da Fig. 23. O fluxograma nesta Fig. 23 corresponde ao fluxograma mostrado na Fig. 17.

[00288] Neste caso também, basicamente o mesmo processamento, como com o caso da primeira forma de realização, é realizado. Isto é, no processamento de codificação sem perda iniciado na etapa S116 da Fig. 13, cada processamento da etapa S251 a S254 é realizado na mesma maneira com cada processamento da etapa S191 à etapa S194 da Fig. 17 e os dados de coeficiente quantizados é codificado para cada fatia.

[00289] Na etapa S255, a unidade de adição de informação de controle 184 embute a informação de controle mantida na unidade de retenção de informação de controle 183 no cabeçalho de fatia da fatia de partida no valor de quatro dos dados codificados retidos na unidade de retenção de dados codificados 182. Nesta ocasião, a unidade de adição de informação de controle 184 obtém e reúne a informação de controle retida na unidade de retenção de informação de controle 183 e gera um valor de imagem da informação de controle do quadro (imagem) a que os dados codificados pertence. A unidade de adição de informação de controle 184 embute este valor de imagem da informação de controle no cabeçalho de fatia da fatia de partida.

[00290] Na etapa S256, a unidade de adição de informação de controle 184 que adicionou a informação de controle aos dados codificados emite os dados codificados em uma ordem predeterminada. Ao emitir o valor de imagem dos dados codificados, a unidade de codificação sem perda 106 termina o processamento de codificação sem perda, retorna para a etapa S116 da Fig. 13 e avança para o processamento da etapa S117 em diante.

[00291] Ao realizar tal processamento de codificação sem perda, o dispositivo de codificação de imagem 100 pode suprimir deterioração da eficiência de codificação devido ao controle local de processamento de filtro, da mesma maneira como com a primeira forma de realização. Além disso, a extração da informação de controle na ocasião da decodificação pode ser facilitada.

[Lado de Decodificação]

[00292] Em seguida, será feita descrição referente ao dispositivo de decodificação de imagem 200 de acordo com a primeira forma de realização. A Fig. 24 é um diagrama de bloco ilustrando um exemplo de configuração da unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 neste caso. Como mostrado na Fig. 24, a unidade de decodificação sem perda 202 neste caso tem basicamente a mesma configuração que a unidade de decodificação sem perda 202 no caso da segunda forma de realização descrita com referência à Fig. 19.

[00293] Entretanto, neste caso, a unidade de decodificação sem perda 202 inclui ainda uma unidade de retenção de dados decodificados 223. A unidade de retenção de dados decodificados 223 retém os dados decodificados decodificados e gerados na unidade de decodificação 222.

[00294] No caso de incluir a informação de controle no cabeçalho de fatia da fatia de partida, a informação de controle não é obtida até a fatia de partida ser transmitida, como descrito acima. Portanto, a unidade de retenção de dados decodificados 223 retém os dados decodificados da fatia transmitida antes da fatia de partida, até a informação de controle ser obtida.

[00295] Em seguida, um exemplo do fluxo do processamento de decodificação sem perda neste caso que é executado na etapa S202 da Fig. 20, será descrito com referência ao fluxograma da Fig. 25. O fluxograma desta Fig. 25 corresponde ao fluxograma mostrado na Fig. 21.

[00296] Neste caso também, o processamento é realizado basicamente da mesma maneira que com o caso da segunda forma de realização. Isto é, no início do processamento de decodificação sem perda, na etapa S271 a unidade de extração de informação de controle 221 determina se ou não os dados codificados supridos são a fatia de partida do quadro (imagem).

[00297] Por exemplo, no evento de que a determinação é feita de que o valor de first_mb_in_slice no cabeçalho de fatia é “0” e, deste modo, é a fatia de partida, o fluxo avança para a etapa S272. Na etapa S272, a unidade de extração de informação de controle 221 extrai um valor de imagem de informação de controle de seu cabeçalho de fatia e supre este para a unidade de processamento de filtro adaptativa 207.

[00298] Quando a informação de controle tendo é extraída, o fluxo avança para a etapa S273. Também, no evento de que a determinação é feita na etapa S271 de que os dados codificados supridos não é a fatia de partida, o fluxo avança para a etapa S273.

[00299] Na etapa S273, quando os dados codificados sendo decodificados pela unidade de decodificação 222, na etapa S274 a unidade de retenção de dados decodificados 223 retém os dados decodificados que foram decodificados e obtidos.

[00300] Na etapa S275, a unidade de retenção de dados decodificados 223 determina se ou não a informação de controle foi extraída pela unidade de extração de informação de controle 221. No evento de que determinação tenha sido feita de que esta tenha sido extraída, a unidade de retenção de dados decodificados 223 avança para a etapa S276 e inicia a saída dos dados codificados que são mantidos na unidade de quantização inversa 203.

[00301] Na saída do início dos dados decodificados, o fluxo avança para a etapa S277. Também no evento de que a determinação é feita na etapa S275 que a informação de controle não foi extraída para o quadro atual atualmente sendo processado, o fluxo avança para a etapa S277.

[00302] Na etapa S277, a unidade de extração de informação de controle 221 determina se ou não todas as fatias dentro do quadro foram processadas. Na determinação sendo feita de que há uma fatia não processada existindo, o fluxo retorna para a etapa s271 e o subsequente processamento é repetido para a fatia não processada. Também no evento de que determinação é feita na etapa S277 de que todas as fatias dentro do quadro foram processadas, o processamento de decodificação sem perda termina, o fluxo retorna para a etapa S207 na Fig. 20 e o processamento da etapa S208 é executado.

[00303] Realizando assim processamento de decodificação sem perda, a unidade de decodificação sem perda 202 pode extrair informação de controle adicionada aos dados codificados e suprir à unidade de processamento de filtro adaptativa 207. Portanto, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executr processamento de filtro adaptativo. Deste modo, a unidade de processamento de filtro adaptativa 207 pode reduzir ruído de bloco e ruído devido a quantização na fatia a ser processada que não pôde ser completamente removida pelo filtro de desbloqueio.

[00304] Também, nesta ocasião, como descrito acima, a informação de controle é corporificada no cabeçalho de fatia da fatia de partida da imagem atual e a unidade de extração de informação de controle 221 pode facilmente detectar a fatia de partida da imagem atual e extrair um valor de imagem da informação de controle do cabeçalho de fatia.

<4. Quarta Forma de Realização> [Breve Descrição do Exemplo de Incluir Informação de Controle no Cabeçalho da Fatia Predeterminada]

[00305] Observe-se que a informação de controle pode ser adicionada ao cabeçalho de fatia de uma fatia que não a acima descrita primeira fatia transmitida para a fatia de partida.

[00306] Por exemplo, digamos que como mostrado na Fig. 26, em um quadro 151, configurado de três fatias (fatia 0, fatia 1 e fatia 2), a fatia 0 seja colocada como a fatia de partida.

[00307] Nesta ocasião, a informação de controle 191-1 através da informação de controle 191-3 gerada para as fatias pode ser toda adicionada ao cabeçalho da fatia 2 192-3, que é o cabeçalho de fatia da fatia 2, que foi colocada antecipadamente como a fatia predeterminada, independente da ordem em que as fatias são para ser processadas.

[00308] O método de identificação desta fatia 2 (cabeçalho de fatia 2 192-3) é opcional. Também, neste caso, o método de detecção de informação de controle para a unidade de extração de informação de controle 221 do dispositivo de decodificação de imagem 200 é também opcional.

[00309] Como com o caso da terceira forma de realização, com este caso também, a fatia em que a informação de controle foi embutida não é necessariamente transmitida primeiro. No caso do exemplo da Fig. 26, os dados codificados 194 são transmitidos na ordem de fatia 1, fatia 0 e fatia 2. Isto é, a fatia 0 e fatia 1 são transmitidas antes da fatia 2, que inclui a informação de controle.

[00310] Deste modo, neste caso também, a unidade de processamento de filtro adaptativa 207 não pode realizar processamento de filtro adaptativo para as fatias transmitidas antes da fatia 2 (fatia 0 e fatia 1 no caso do exemplo da Fig. 26) até a informação de controle ser extraída da fatia 2.

[Lado de Codificação]

[00311] A configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 neste caso é a mesma que como o caso da primeira forma de realização descrita com referência à Fig. 10.

[00312] O fluxo do processamento de codificação sem perda neste caso será descrito com referência ao fluxograma da Fig. 27. O fluxograma desta Fig. 27 corresponde ao fluxograma mostrado na Fig. 17.

[00313] Neste caso também, basicamente o mesmo processamento como com o caso da primeira forma de realização é realizado. Isto é, no processamento de codificação sem perda sendo iniciado na etapa S116 da Fig. 13, cada processamento da etapa S291 a S294 é realizado da mesma maneira que com cada processamento da etapa S191 à etapa S194 da Fig. 17 e dados de coeficiente quantizados são codificados pra cada fatia.

[00314] Na etapa S295, a unidade de adição de informação de controle 184 embute a informação de controle retida na unidade de retenção de informação de controle 183 no cabeçalho de fatia da fatia predeterminada coloca antecipadamente no valor de quadro de dados codificados retidos na unidade de retenção de dados codificados 182. Nesta ocasião, a unidade de adição de informação de controle 184 obtém e reúne informação de controle retida na unidade de retenção de informação de controle 183 e gera um valor de imagem de informação de controle do quadro (imagem) a que os dados codificados pertencem. A unidade de adição de informação de controle 184 embute este valor de imagem da informação de controle no cabeçalho de fatia da fatia predeterminada.

[00315] Na etapa S296, a unidade de adição de informação de controle 184, que foi adicionada na informação de controle aos dados codificados, emite os dados codificados em uma ordem predeterminada. Ao emitir o valor de imagem dos dados codificados, a unidade de codificação sem perda 106 termina o processamento de codificação sem perda, retorna para a etapa S116 da Fig. 13 e avança para o processamento da etapa S117 em diante.

[00316] Realizando tal processamento de codificação sem perda, o dispositivo de codificação de imagem 100 pode suprimir deterioração da eficiência de codificação devida ao controle de processamento de filtro, da mesma maneira como com a primeira forma de realização.

[Lado de Decodificação]

[00317] Em seguida, será feita descrição referente ao dispositivo de decodificação de imagem 200 de acordo com a primeira forma de realização. A configuração da unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 é a mesma que o caso da terceira forma de realização descrita com referência à Fig. 24.

[00318] Um exemplo do fluxo de processamento de decodificação sem perda deste caso que é executado na etapa S202 da Fig. 20 será descrito com referência ao fluxograma da Fig. 28. O fluxograma desta Fig. 28 corresponde ao fluxograma mostrado na Fig. 25.

[00319] Neste caso também o processamento é realizado basicamente da mesma maneira que com o caso da tambor fotossensível. Isto é, na partida do processamento de decodificação sem perda, na etapa S311, a unidade de extração de informação de controle 221 determina se ou não os dados codificados supridos são a fatia predeterminada (fatia incluindo a informação de controle no cabeçalho de fatia) do quadro (imagem).

[00320] No evento de que seja feita determinação de que esta é a fatia predeterminada, o fluxo avança para a etapa S312. Na etapa S312, a unidade de extração de informação de controle 221 extrai um valor de imagem de informação de controle de seu cabeçalho de fatia e supre este para a unidade de processamento de filtro adaptativa 207.

[00321] Quando a informação de controle é extraída, o fluxo avança para a etapa S313. Também no evento de que seja feita determinação na etapa s311 de que os dados codificados supridos não são a fatia predeterminada a que a informação de controle foi adicionada, o fluxo avança para a etapa s313.

[00322] Em seguida, cada processamento de etapa S313 a S317 é executado da mesma maneira que com cada processamento da etapa s273 a S277 da etapa S25.

[00323] Realizando assim o processamento de decodificação sem perda, a unidade de decodificação sem perda 202 pode extrair informação de controle adicionada aos dados codificados e suprir para a unidade de processamento de filtro adaptativa 207. Por conseguinte, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executar processamento de filtro adaptativo. Deste modo, a unidade de processamento de filtro adaptativa 207 pode reduzir ruído de bloco e ruído devido à quantização da fatia a ser processada que não poderia ser completamente removido pelo filtro de desbloqueio.

<5. Quinta Forma de Realização> [Breve Descrição do Exemplo de Utilização de Ponteiro]

[00324] Observe-se que, além de adicionar a própria informação de controle ao cabeçalho de fatia como descrito acima, um ponteiro indicando o local em que a informação de controle foi adicionada pode ser incluído no cabeçalho de fatia, por exemplo.

[00325] Por exemplo, digamos que, como mostrado na Fig. 29, a informação de controle 191-1 através da informação de controle 191-3 correspondendo da fatia 0 à fatia 2 do quadro 151, é reunida e adicionada atrás dos dados de fatia 2 193-3 dos dados codificados 194, como um valor de imagem de informação de controle 231. Um ponteiro indicando a posição da informação de controle 231 é adicionado ao cabeçalho de fatia 1 192-1, que é transmitido primeiro.

[00326] Assim, a unidade de extração de informação de controle 221 do dispositivo de codificação de imagem 200 pode referenciar ao cabeçalho de fatia 1 192-1 e obter a informação de controle 231 do ponteiro adicionado. Isto é, a unidade de extração de informação de controle 231 pode extrair informação de controle dos dados codificados geralmente da mesma maneira que como caso da segunda forma de realização.

[00327] Entretanto, neste caso, a unidade de extração de informação de controle 221 não pode realmente extrair a informação de controle 231 até a informação de controle 231 ser suprida.

[00328] O local em que a informação de controle 231 é adicionada é opcional, como é de se esperar. Por exemplo, a informação de controle pode ser adicionada em uma posição que é para ser transmitida antes do cabeçalho de fatia 1 192-1. Neste caso, a unidade de extração de informação de controle 221 pode extrair a informação de controle no ponto de ter referenciado o ponteiro do cabeçalho de fatia 192-1.

[Lado de Codificação]

[00329] Neste caso também, a configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 é o mesmo que com o caso da primeira forma de realização descrita com referência à Fig. 10.

[00330] O fluxo do processamento de codificação sem perda neste caso será descrito com referência ao fluxograma da Fig. 30. O fluxograma desta Fig. 30 corresponde ao fluxograma mostrado na Fig. 17.

[00331] Neste caso também, basicamente o mesmo processamento como com o caso da primeira forma de realização é realizado. Isto é, no processamento de codificação sem perda ser iniciado na etapa S116 da Fig. 13, cada processamento da etapa S331 a S334 é realizado da mesma maneira que com cada processamento da etapa S191 à etapa S194 da Fig. 17 e dados de coeficiente quantizados são codificados para cada fatia.

[00332] Na etapa S335, a unidade de adição de informação de controle 184 adiciona informação de controle, mantida na unidade de retenção de informação de controle 183, na posição predeterminada dos dados codificados. Nesta ocasião, a unidade de adição de informação de controle 184 obtém e reúne informação de controle retida na unidade de retenção de informação de controle 183 e gera um valor de imagem de informação de controle do quadro (imagem) a que os dados codificados pertencem. A unidade de adição de informação de controle 184 adiciona este valor de imagem de informação de controle no local predeterminado dos dados codificados.

[00333] Na etapa S336, a unidade de adição de informação de controle 184 embute um ponteiro, indicando a posição em que a informação de controle foi adicionada, ao cabeçalho de fatia a ser primeiro transmitido novalor de quadro de dados codificados mantidos na unidade de retenção de dados codificados 182.

[00334] Na etapa S337, a unidade de adição de informação de controle 184, que adicionou a informação de controle aos dados codificados, emite os dados codificados em uma ordem predeterminada. Ao emitir o valor de imagem de dados codificados, a unidade de codificação sem perda 106 termina o processamento de decodificação sem perda, retorna para a etapa S116 da Fig. 13 e avança para o processamento da etapa S117 em diante.

[00335] Realizando tal processamento de codificação sem perda, o dispositivo de codificação de imagem 100 pode suprimir a deterioração na eficiência de codificação devido ao controle local do processamento de filtro, da mesma maneira que com a primeira forma de realização.

[Lado de Decodificação]

[00336] Em seguida, será feita descrição referente ao dispositivo de decodificação de imagem 200 de acordo com a primeira forma de realização. A configuração da unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 é a mesma que o caso da terceira forma de realização descrita com referência à Fig. 24.

[00337] Um exemplo do fluxo do processamento de decodificação sem perda deste caso que é executado na etapa S202 da Fig. 20 será descrito com referência ao fluxograma da Fig. 28. O fluxograma desta Fig. 28 corresponde ao fluxograma mostrado na Fig. 25.

[00338] Em seguida, um exemplo do fluxo do processamento de decodificação sem perda deste caso que é executado na etapa S202 da Fig. 20 será descrito com referência ao fluxograma da Fig. 31. O fluxograma desta Fig. 31 corresponde ao fluxograma mostrado na Fig. 25.

[00339] Neste caso também, o processamento é realizado basicamente da mesma maneira que com o caso da terceira forma de realização. Isto é, no início do processamento de decodificação sem perda, na etapa s351, a unidade de extração de informação de controle 221 determina se ou não os dados codificados supridos são a fatia primeiro transmitida do quadro (imagem).

[00340] No evento de que determinação seja feita que esta é a fatia primeiro transmitida, como o resultado de determinação da mesma, como com o caso da segunda forma de realização, o fluxo avança para a etapa S352. Na etapa S352, a unidade de extração de informação de controle 221 referencia o ponteiro adicionado àquele cabeçalho de fatia.

[00341] Ao ter referenciado o ponteiro, o fluxo avança para a etapa S353. Também no evento de que determinação é feita na etapa s351 de que os dados codificados supridos não são a primeira fatia transmitida no quadro, o fluxo avança para a etapa S353.

[00342] Na etapa S353, a unidade de extração de informação de controle 221 determina se ou não a informação de controle é extraível no atual ponto de tempo. No evento de que determinação seja feita de que o valor de imagem da informação de controle adicionada aos dados codificados já foi suprida e é extraível, o fluxo avança para a etapa S354 e a unidade de extração de informação de controle 221 extrai o valor de uma imagem da informação de controle e supre-a para a unidade de processamento de filtro adaptativa 207.

[00343] Na informação de controle tendo sido extraída, o fluxo avança para a etapa S355. Também no evento de que determinação seja feita na etapa S353 de que a informação de controle não foi suprida ainda e não é extraível, o fluxo avança para a etapa S355.

[00344] A fatia a ser processada dos dados codificados tendo sido decodificados pela unidade de decodificação 222 da etapa S355, na etapa S356 a unidade de retenção de dados decodificados 223 retém os dados decodificados que foram decodificados e obtidos.

[00345] Na etapa S357, a unidade de retenção de dados decodificados 223 determina se ou não a informação de controle foi extraída pela unidade de extração de informação de controle 221. No evento de que seja feita determinação de que esta foi extraída, a unidade de retenção de dados decodificados 223 avança para a etapa S358 e inicia emissão dos dados decodificados que são mantidos na unidade de quantização inversa 203.

[00346] Na saída do início dos dados decodificados, o fluxo avança para a etapa S359. Também no evento de que determinação seja feita na etapa S357 de que informação de controle não foi extraída referente ao quadro pertinente atualmente sendo processado, o fluxo avança para a etapa s359.

[00347] Na etapa S359 a unidade de extração de informação de controle 221 determina se ou não todas as fatias dentro do quadro foram processadas. No evento de que determinação seja feita de que há uma fatia não processada existente, o fluxo retorna para a etapa S351 e o processamento subsequente é repetido para a fatia não processada. Também no evento de que determinação seja feita na etapa S359 de que todas as fatias dentro do quadro foram processadas, a o processamento de decodificação sem perda termina, o fluxo retorna para a etapa S207 da Fig. 20 e o processamento da etapa S208 em diante é executado.

[00348] Realizando assim processamento de decodificação sem perda, a unidade de decodificação sem perda 202 pode extrair informação de controle com base no ponteiro adicionado aos dados codificados e suprir para a unidade de processamento de filtro adaptativa 207. Assim, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executar processamento de filtro adaptativo. Assim, a unidade de processamento de filtro adaptativo 207 pode reduzir o ruído de bloco e ruído devido à quantização da fatia a ser processada que não pôde ser completamente removido pelo filtro de desbloqueio.

[00349] Deste modo, o dispositivo de decodificação de imagem 200 pode suprimir deterioração da eficiência de codificação devida ao controle local do processamento de filtro, da mesma maneira que com a segunda forma de realização. Também pode ser suprimida deterioração da eficiência de codificação em casos de dividir os quadros de uma imagem em múltiplas fatias para processamento também.

[Outros Exemplos]

[00350] Observe-se que, embora descrição tenha sido feita acima de um ponteiro indicando a posição em que a informação de controle foi adicionado é adicionada ao cabeçalho de fatia da fatia primeiro transmitida do quadro, a posição em que o ponteiro é embutido é opcional. Por exemplo, a informação de controle pode ser adicionado à fatia de partida como com a terceira forma de realização, ou informação de controle pode ser adicionada ao cabeçalho de fatia de uma fatia predeterminada colocada antecipadamente como com a quarta forma de realização.

[00351] Também o ponteiro acima descrito pode sr informação de qualquer forma.

<6. Sexta Forma de Realização> [Breve Descrição do Exemplo de Informação de Reunião em Múltiplos Grupos]

[00352] Embora descrição tenha sido feita acima com um valor de imagem de informação de controle sendo reunida como uma, não restringido a isto, fatias de um quadro podem ser dividas em múltiplos grupos com informação de controle para cada grupo sendo reunida, por exemplo.

[00353] Por exemplo, na Fig. 32, as linhas pontilhads indicam o limite das fatias dentro do quadro 151 e as linhas deslizadas indicam grupos em que múltiplas fatias são reunidas. A informação de controle para cada fatia é reunida por grupo.

[00354] Na Fig. 32, informação de controle 241-1 é uma reunião de fatias 1f de informação de controle pertencentes ao primeiro grupo do topo do quadro 151. A informação de controle 241-2 é uma reunião de fatias 1f de informação de controle pertencentes ao segundo grupo do topo do quadro 151. A informação de controle 241-3 é uma reunião de fatias 1f de informação de controle pertencentes ao terceiro grupo do topo do quadro 151.

[00355] Estas informações de controle são embutidas nos cabeçalhos de fatia das fatias primeiro transmitidas para fora de seus respectivos grupos.

[00356] Na Fig. 32, a informação de controle 241-1 é embutida em um cabeçalho de fatia A 242-1, que é o cabeçalho de fatia da fatia A que é transmitida primeiro, em dados codificados 244-1 do primeiro grupo do topo do quadro 151.

[00357] Da mesma maneira, a informação de controle 241-2 é embutida em um cabeçalho de fatia B 242-2, que é o cabeçalho de fatia da fatia B que é transmitida primeiro, em dados codificados 244-2 do segundo grupo do topo do quadro 151.

[00358] Da mesma maneira, a informação de controle 241-3 é embutida em um cabeçalho de fatia C 242-3, que é o cabeçalho de fatia da fatia C, que é transmitida primeiro, em dados codificados 244-3 do terceiro grupo do topo do quadro 151.

[00359] Isto é, neste caso, múltiplas informações de controle são adicionadas ao quadro dos dados codificados, porém, devido a serem reunidas em incrementos de grupos, a redundância é reduzida em comparação com um caso de adicionar informação de controle a cada fatia e eficiência de codificação é melhorada. Também, informação de controle é adicionada dividida em uma pluralidade, de modo que resistência a pacotes baixados e assim em diante na ocasião da transmissão é reforçada em comparação com as formas de realização acima descritas.

[00360] Observe-se que os grupos compostos de múltiplas fatias são estabelecidos antecipadamente. Isto é, em quantos grupos as fatias dentro do quadro serão divididas e a que grupo a fatia pertencerá, é estabelecido antecipadamente.

[Lado de Codificação]

[00361] O dispositivo de codificação de imagem 100 deste caso será descrito. A configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 neste caso é a mesma que com o caso da primeira forma de realização descrita com referência à Fig. 10.

[00362] O fluxo do processamento de codificação sem perda neste caso será descrito com referência ao fluxograma da Fig. 33. O fluxograma desta Fig. 23 corresponde ao fluxograma mostrado na Fig. 17.

[00363] Neste caso também, basicamente o mesmo processamento como com o caso da primeira forma de realização é realizado. Isto é, no processamento de codificação sem perda sendo iniciado na etapa S116 da Fig. 13, cada processamento da etapa S371 a S374 é realizado da mesma maneira com cada processamento da etapa 191 à etapa S194 da Fig. 17 e os dados de coeficiente de quantizados são codificados para cada fatia.

[00364] Entretanto, neste caso, na etapa S374, a unidade de adição de informação de controle 184 determina se ou não todas as fatias foram codificadas, não para o quadro, porém em incrementos de grupos. Isto é, na etapa S374 a unidade de adição de informação de controle 184 determina se ou não a unidade de codificação 181 codificou todas as fatias pertencentes ao grupo a ser processado.

[00365] No evento de que a determinação foi feita de que há uma fatia não processada existente que pertence ao grupo a ser processado, o fluxo retorna para a etapa s371 e o processamento subsequente é repetido para a fatia não processada. Também, no evento de que determinação seja feita na etapa S374 de que a unidade de codificação 181 codificou todas as fatias pertencentes ao grupo a ser processado, o fluxo avança para a etapa S375.

[00366] Na etapa S375, a unidade de adição de informação de controle 184 embute a informação de controle mantida na unidade de retenção de informação de controle 183 no cabeçalho de fatia da fatia de partida do valor de grupo dos dados codificados mantidos na unidade de retenção de dados codificados 182. Nesta ocasião, a unidade de adição de informação de controle 184 obtém e reúne informação de controle retida na unidade de retenção de informação de controle 183 e gera informação de controle do grupo a que os dados codificados pertence (um valor de grupo da informação de controle). A unidade de adição de informação de controle 184 embute um valor de grupo da informação de controle no cabeçalho de fatia da fatia primeiro transmitida do grupo.

[00367] Na etapa S376, a unidade de adição de informação de controle 184, que adicionou a informação de controle aos dados codificados, emite o valor de um grupo dos dados codificados em uma ordem predeterminada. Ao dar saída no valor de um grupo dos dados codificados, na etapa S377 a unidade de codificação sem perda 106 determina se ou não todos os grupos dentro do quadro foram processados.

[00368] No evento de que a determinação é feita de que há um grupo não processado existente, o fluxo retorna para a etapa S371 e o processamento subsequente é repetido para o grupo não processado. Também no evento de que determinação seja feita na etapa S377 de que todos os grupos dentro do quadro foram processados, a unidade de codificação sem perda 106 termina o processamento de codificação sem perda, retorna para a etapa S116 na Fig. 13 e avança para o processamento da etapa s117 em diante.

[00369] Realizando tal processamento de codificação sem perda o dispositivo de codificação de imagem 100 pode suprimir deterioração da eficiência de codificação devida ao controle local do processamento de filtro. Também resistência aos pacotes baixados e assim em diante é reforçada.

[Lado de Decodificação]

[00370] Em seguida, será feita descrição referente ao dispositivo de decodificação de imagem 200 de acordo com a presente forma de realização. Neste caso, é suficiente para a unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 extrair informação de controle em incrementos de grupos, em vez de em incrementos de quadros (imagens). Deste modo, a unidade de decodificação sem perda 202 tem a mesma configuração quanto à unidade de decodificação sem perda 202 no caso da segunda forma de realização descrita com referência à Fig. 19.

[00371] Também o processamento de decodificação sem perda pela unidade de decodificação sem perda 202 pode ser executado da mesma maneira que com o exemplo descrito com referência ao fluxograma da Fig. 21, exceto que incrementos de quadros (imagens) são incrementos de quadros.

[00372] Assim, a unidade de decodificação sem perda 202 pode extrair informação de controle adicionada aos dados codificados e suprir para a unidade de processamento de filtro adaptativa 207. Deste modo, a unidade de processamento de filtro adaptativa pode apropriadamente executar processamento de filtro adaptativo.

[Outros Exemplos]

[00373] Observe-se que, embora a descrição tenha sido feita acima de adicionar informação de controle ao cabeçalho de fatia da fatia do grupo primeiro transmitida, a posição em que esta informação de controle é embutida é opcional. Por exemplo, a informação de controle pode ser adicionada ao cabeçalho de fatia da fatia de partida de cada grupo como com a terceira forma de realização, ou a informação de controle pode ser adicionada a uma fatia predeterminada estabelecida antecipadamente para cada grupo como com a quarta forma de realização.

<Sétima Forma de Realização] [Breve Descrição do Exemplo de Controle do Número de Grupos]

[00374] Embora a descrição tenha sido feita na segunda forma de realização referente a um grupo composto de múltiplas fatias como um incremento para reunir informação de controle, o dispositivo de codificação de imagem 100 pode definir grupos por incrementos predeterminados, tais como por quadro, por GOP ou similar, por exemplo. Isto é, neste caso o dispositivo de codificação de imagem 100 define, por exemplo, que fatia pertence a que grupos e agora muitos grupos são para ser formados em um quadro (quanto da informação de controle é para ser agregada por um quadro), para cada quadro.

[Lado de Codificação]

[00375] O dispositivo de codificação de imagem 100 neste caso será descrito. A Fig. 34 é um diagrama de blocos ilustrando um exemplo de configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 neste caso.

[00376] Como mostrado na Fig. 34. a unidade de codificação sem perda 106 neste caso, tem a unidade de codificação 181 através da unidade de adição de informação de controle 184 da mesma maneira como com a primeira forma de realização. Entretanto,a unidade de codificação sem perda 106 neste caso tem ainda uma unidade de codificação 251.

[00377] A unidade de codificação 251 define grupos e determina o número de grupos dentro do quadro a ser processado. Em outras palavras, a unidade de codificação 251 determina a faixa de dados a que cada informação de controle embutida nos dados codificados corresponde.

[00378] A unidade de codificação 251 controla a unidade de codificação 181 através da unidade de adição de informação de controle 184 para embutir a informação de controle correspondendo ao grupo no cabeçalho de fatia da fatia transmitida primeiro de cada grupo.

[00379] Um exemplo do fluxo de processamento de codificação sem perda neste caso será descrito com referência ao fluxograma da Fig. 35. O fluxograma desta Fig. 35 corresponde ao fluxograma mostrado na Fig. 33.

[00380] Neste caso também, o processamento é realizado basicamente da mesma maneira que com o caso da sexta forma de realização. O processamento de codificação sem perda sendo iniciado na etapa S116 da Fig. 13, na etapa S391 a unidade de codificação 251 define os grupos para o quadro a ser processado, e estabelece o número de grupos. A unidade de codificação 251 controla a unidade de codificação 181 através da unidade de adição de informação de controle 184 com base nos ajustes relativos aos grupos.

[00381] Em seguida aos ajustes para grupos realizados na etapa S391, cada processamento da etapa S391 a S398 é realizado. isto é, cada processamento da etapa S392 a S398 após os grupos terem sido estabelecidos é realizado da mesma maneira com cada processamento da etapa S371 à etapa S377 da Fig. 33.

[00382] Realizando tal processamento de codificação sem perda o dispositivo de codificação de imagem 100 pode suprimir deterioração na eficiência de codificação devido ao controle local do processamento de filtro. Também a resistência aos pacotes baixados e assim em diante é reforçada.

[Lado de Decodificação]

[00383] Em seguida, será feita descrição referente ao dispositivo de decodificação de imagem 200 de acordo com a presente forma de realização. A Fig. 36 é um diagrama de blocos ilustrando um exemplo de configuração da unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 neste caso.

[00384] Neste caso, a unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 extrai informação de controle em incrementos de grupo, em vez de incrementos de quadro (imagem). Deste modo, a unidade de decodificação sem perda 202 deste caso tem a unidade de extração de informação de controle 221 através da unidade de retenção de dados decodificados 223, da mesma maneira que a unidade de decodificação sem perda 202 do caso da terceira forma de realização descrita com referência à Fig. 24, por exemplo. Entretanto, neste caso, o dispositivo de decodificação de imagem 200 não compreendeu o número de grupos dentro do quadro a ser processado e, portanto, e analisa cada cabeçalho de fatia e busca a informação de controle. Desse modo, neste caso, a unidade de decodificação sem perda 202 tem ainda, como mostrado na Fig. 36, uma unidade de análise de cabeçalho 261.

[00385] A unidade de análise de cabeçalho. 261 referencia cada cabeçalho de fatia dos dados codificados supridos a ela e busca a informação de controle. A unidade de extração de informação de controle 221 extrai a informação de controle com base nos resultados da análise. Também cada parte realiza processamento para cada grupo da mesma maneira que com o caso da sexta forma de realização.

[00386] Em seguida, um exemplo do fluxo de processamento de decodificação sem perda deste caso que é executado na etapa S202 da Fig. 20 será descrito com referência ao fluxograma da Fig. 37. O fluxograma desta Fig. 37 corresponde ao fluxogram mostrado na Fig. 25.

[00387] Neste caso também, o processamento é realizado basicamente da mesma maneira que com o caso da terceira forma de realização. Isto é, próximo ao início do processamento de decodificação sem perda, na etapa S411, a unidade de análise de cabeçalho. 261 referencia o cabeçalho de fatia da fatia a ser processada nos dados codificados que foi suprido e determina se ou não informação de controle existe naquele cabeçalho de fatia. No evento de que determinação seja feita que a fatia a ser processada é a fatia primeiro transmitida do grupo e o cabeçalho de fatia incluir informação de controle do grupo, o fluxo avança para a etapa S412.

[00388] Na etapa S412, a unidade de extração de informação de controle 221 extrai o valor de um grupo de informação de controle de seu cabeçalho de fatia. A informação de controle tendo sido extraída, o fluxo avança para a etapa S413. Também no evento de que determinação seja feita na etapa S411 de que nenhuma informação de controle exista no cabeçalho de fatia, o fluxo avança para a etapa S413.

[00389] Cada processamento da etapa S413 à etapa S417 é executado da mesma maneira como com cada processamento da etapa S273 à S277 da etapa S25.

[00390] Assim, a unidade de decodificação sem perda 202 pode extrair informação de controle adicionada aos dados codificados e suprir para a unidade de processamento de filtro adaptativa 207. Deste modo, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executar processamento de filtro adaptativo.

[Controle do Número de Grupos]

[00391] Em seguida, controle do número de grupos será descrito.

[00392] Geralmente, aumentando-se o número de grupos (aumentando- se o número de informação de controle por quadro) aumenta-se a redundância da informação de controle e a eficiência de codificação dos dados codificados deteriora-se. Portanto, a quantidade de informações que o dispositivo de decodificação de imagem 200 tem para processar aumenta. Também o número de vezes de extração da informação de controle aumenta. Por conseguinte, há uma possibilidade de que a carga sobre o dispositivo de decodificação de imagem 200 aumente. Entretanto, a quantidade de informação de cada informação de controle é menor, assim a quantidade de memória necessária é reduzida.

[00393] Por outro lado, aumentando-se o número de grupos, o dispositivo de codificação de imagem 100 pode emitir dados codificados em incrementos menores. Isto é, o tempo de retardo para processamento de codificação pode ser reduzido. Também neste caso os dados codificados são emitidos com alta frequência, a quantidade de memória assim sendo reduzida.

[00394] Contrariamente, a redução do número de grupos (redução do número de informação de controle por quadro) reduz a redundância da informação de controle e a eficiência de codificação dos dados codificados melhora. Destemodo, a quantidade de informação que o dispositivo de codificação de imagem 200 tem que processar diminui. Também o número de vezes de extração informação de controle diminui. Deste modo, há a possibilidade de que a carga sobre o dispositivo de codificação de imagem 200 seja menor. Entretanto, a quantidade de informação de cada informação de controle é maior, assim a quantidade de memória necessária sendo aumentada.

[00395] Por outro lado, reduzindo-se o número de grupos, o dispositivo de codificação de imagem 100 emitirá dados codificados em maiores incrementos. Isto é, o tempo de retardo para processamento de codificação aumenta. Também neste caso os dados codificados é emitido com baixa frequência, assim a quantidade de memória necessária sendo aumentada.

[00396] Desta maneira, vários tipos de parâmetros mudam de acordo com aumento/diminuição do número de grupos. Deste modo, o número ótimo de grupos é determinado pelas especificações do sistema, tais como recursos de hardware, fins de uso e assim em diante.

[00397] Por exemplo, no caso de um sistema em que os dados codificados que o dispositivo de codificação de imagem 100 gerou é salvo em um servidor ou similar e estes dados codificados são providos com base em uma solicitação do dispositivo de decodificação de imagem 200 por exemplo, aumento do tempo de retardo no dispositivo de codificação de imagem 100 quase não tendo influência para prover os dados codificados. Com um tal sistema, ao alívio de supressão da carga do processamento de decodificação deve ser dada prioridade em relação a reduzir o tempo de retardo no processamento de codificação.

[00398] Também no caso de um sistema em que, por exemplo, os dados de imagem gerados por filmagem ou similar são instantaneamente (em tempo real) codificados pelo dispositivo de codificação de imagem 100, os dados codificados são transmitidos, os dados codificados são decodificados pelo dispositivo de decodificação de imagem 200 e a imagem decodificada é exibida, a supressão do retardo de tempo de cada processamento sendo da maior importância.

[00399] Além disso, no evento de que a capacidade de processamento do dispositivo de decodificação de imagem 200 seja baixa, à supressão da carga no processamento de decodificação é preferivelmente dada prioridade. Por outro lado, no evento de que a capacidade de processamento do dispositivo de codificação de imagem 100 seja baixa, é preferivelmente dada prioridade à supressão da carga no processamento de codificação. Também pode haver casos concebidos onde a melhora da eficiência de codificação deve receber prioridade, dependendo da taxa de bits dos dados de imagem, largura de faixa disponível do trajeto de transmissão e assim em diante.

[00400] Assim, os valores ótimos para vários parâmetros tais como tempo de retardo, eficiência de codificação, carga de processamento e capacidade de memória e assim em diante diferem, dependendo das especificações do sistema. Deste modo, a unidade de codificação 251 estabelece grupos de modo que os vários tipos de parâmetros são ótimos com respeito às especificações do sistema. Portanto, a aplicação pode ser feita em uma mais ampla variedade de sistemas.

[00401] Observe-se que o dispositivo de codificação de imagem 100 ou o dispositivo de codificação de imagem 200 podem coletar informações relativas a recursos de hardware de outros dispositivos dentro do sistema ou do trajeto de transmissão, ou trocando-se vários tipos de informações com outros dispositivos, a fim de estabelecer estes grupos.

[00402] Também o número de grupos de um quadro pode ser qualquer número, contanto que seja um ou mais. Além disso, o controle do número de grupos pode ser em outros que não em incrementos de quadros. Por exemplo, pode ser em incrementos de GOPs ou similares.

[00403] Também embora descrição tenha sido feita acima com a informação de controle sendo adicionada ao cabeçalho de corrediça da fatia primeiro transmitida de cada grupo, a posição para embutir esta informação de controle é opcional. Por exemplo, a informação de controle pode ser adicionada ao cabeçalho de fatia da fatia de partida como com a terceira forma de realização, ou a informação de controle pode ser adicionada a uma fatia predeterminada estabelecida antecipadamente como com a quarta forma de realização.

[00404] Além disso, o dispositivo de codificação de imagem 100 pode estabelecer a fatia (cabeçalho de fatia) para a informação de controle a ser embutida. Tais ajustes podem sr feitos em incrementos opcionais, tais como em incrementos de quadros ou em incrementos de GOPs, por exemplo. Também isto pode ser realizado irregularmente.

[00405] Embora descrição tenha sido feita nas formas de realização acima com informação de controle dentro de um quadro sendo reunido em um ou uma pluralidade, em incrementos de fatias, os incrementos de reunir esta informação de controle é opcional. Por exemplo, isto pode ser realizado em incrementos menores do que fatias, p. ex., em incrementos de macroblocos. Isto é, uma pluralidade de informação de controle para cada macrobloco pode ser reunida para gerar informação de controle para cada grupo.

<8. Oitava Forma de Realização> [Breve Descrição do Exemplo de Agrupamento de Cada Elemento Independentemente]

[00406] Embora descrição tenha sido feita acima com os elementos de coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro, configurando a informação de controle, sendo reunidos em mutuamente os mesmos incrementos, estes elementos podem ser reunidos em incrementos independentes um do outro. Isto é, os elementos de coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro podem ser agrupados independentemente entre si.

[00407] Neste caso, a faixa (fatia) da imagem a que corresponde um grupo de coeficientes de filtro, a faixa (fatia) da imagem a que corresponde um grupo de tamanhos de bloco e a faixa (fatia) da imagem a que corresponde um grupo de sinalizadores de bloco de filtro são estabelecidas mutuamente independentes, desse modo os cabeçalhos de fatia, onde estas informações são armazenadas, podem também ser diferentes entre si.

[00408] Por conseguinte, neste caso, o dispositivo de codificação de imagem 100 e o dispositivo de decodificação de imagem 200 necessitam realizar o mesmo processamento como com a informação de controle descrita acima para os elementos do coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro.

[Lado de Codificação]

[00409] O dispositivo de codificação de imagem 100 neste caso será descrito. A Fig. 38 é um diagrama de blocos ilustrando um exemplo de configuração da unidade de codificação sem perda 106 do dispositivo de codificação de imagem 100 neste caso.

[00410] Como mostrado na Fig. 38, a unidade de codificação sem perda 106 neste caso tem, da mesma maneira como com o caso da primeira forma de realização, a unidade de codificação 181 através da unidade de retenção de informação de controle 183. Também a unidade de codificação 106 neste caso também tem uma unidade de adição de informação de controle 281 em vez da unidade de adição de informação de controle 184.

[00411] A unidade de adição de informação de controle 281 embute os elementos do coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro no cabeçalho de fatia dos dados codificados, por cada grupo estabelecido mútua e independentemente. A unidade de adição de informação de controle 281 tem uma unidade de adição de sinalizador 291, uma unidade de adição de tamanho de bloco 292 e uma unidade de adição de coeficiente de filtro 293.

[00412] A unidade de adição de sinalizador 291 adiciona um sinalizador de bloco de filtro para o grupo de sinalizador a ser processado para o cabeçalho de fatia da fatia primeiro transmitida do grupo de sinalizador a ser processado. Um grupo de sinalizador é um grupo de fatias a que um conjunto de sinalizadores de bloco de filtro embutidos no mesmo cabeçalho de fatia correspondem entre si.

[00413] A unidade de adição de tamanho de bloco 292 adiciona um tamanho de bloco para o grupo de tamanho de bloco a ser processado para o cabeçalho de fatia da fatia primeiro transmitida do grupo de tamanho de bloco a ser processado. Um grupo de tamanho de bloco é um grupo de fatias a que um conjunto de tamanhos de bloco embutidos no mesmo cabeçalho de fatia corresponde entre si.

[00414] A unidade de adição de coeficiente de filtro 293 adiciona um coeficiente de filtro para o grupo de coeficiente de filtro a ser processado para o cabeçalho de fatia da fatia primeiro transmitida do grupo de coeficiente de filtro a ser processado. Um grupo de coeficiente de filtro é um grupo de fatias a que um conjunto de coeficientes de filtro embutidos no mesmo cabeçalho de fatia corresponde entre si.

[00415] Um exemplo do fluxo do processamento de codificação sem perda deste caso será descrito com referência ao fluxograma da Fig. 39. O fluxograma desta Fig. 39 corresponde ao fluxograma mostrado na Fig. 33.

[00416] Neste caso também, basicamente o mesmo processamento como com o caso da sexta forma de realização é realizado. Isto é, no processamento de codificação sem perda sendo iniciado na etapa S116 da Fig. 13, cada processamento da etapa S431 a s433 é realizado da mesma maneira que com cada processamento da etapa S371 à etapa S373 da Fig. 33.

[00417] Na etapa S434, a unidade de adição de sinalizador 291 da unidade de adição de informação de controle 281 determina se ou não a unidade de codificação 181 codificou todas as fatias do grupo sinalizador a ser processado. No evento de que determinação seja feita que todas as fatias foram codificadas, o fluxo avança para a etapa S435.

[00418] Na etapa S435, a unidade de adição de sinalizador 291 embute um valor de grupo de sinalizador de sinalizador de bloco de filtro no cabeçalho de fatia da fatia primeiro transmitida dentro daquele grupo de sinalizador a ser processado.

[00419] No embutimento dos sinalizadores de bloco de filtro terminando, o fluxo avança para a etapa S436. Também no evento de que determinação tenha sido feita na etapa S434 de que há uma fatia não processada no grupo de sinalizadores a ser processado, o fluxo avança para a etapa S436.

[00420] Na etapa S436, a unidade de adição de tamanho de bloco 292 da unidade de adição de informação de controle 281 determina se ou não a unidade de codificação 181 codificou todas as fatias do grupo de sinalizadores a ser processado. No evento de que a determinação seja feita de que todas as fatias foram codificadas, o fluxo avança para a etapa S437.

[00421] Na etapa S437, a unidade de adição de tamanho de bloco 292 embute um valor de grupo de tamanho de bloco de tamanhos de bloco do cabeçalho de fatia da fatia primeiro transmitida dentro daquele grupo de tamanho de bloco a ser processado.

[00422] No embutimento de tamanhos de bloco terminando, o fluxo avança para a etapa S438. Também no evento de que determinação tenha sido feita na etapa S438 de que há uma fatia não processada no grupo de tamanho de bloco a ser processado, o fluxo avança para a etapa S438.

[00423] Na etapa S438, a unidade de adição de coeficiente de filtro 293 da unidade de adição de informação de controle 281 determina se ou não a unidade de codificação 181 codificou todas as fatias do grupo de coeficiente de filtro a ser processado. No evento de que determinação seja feita de que uma fatia não processada existe, o fluxo retorna para a etapa S431 e o processamento subsequente é repetido.

[00424] Também na etapa S438,no evento de que determinação seja feita de que todas as fatias foram codificadas, o fluxo avança pra a etapa s439. Na etapa S439, a unidade de adição de coeficiente de filtro 293 embute um valor de grupo de coeficiente de filtro dos coeficientes de filtro no cabeçalho de fatia da fatia primeiro transmitida dentro daquele grupo de coeficiente de filtro a ser processado.

[00425] No embutimento de coeficientes de filtro terminando, o fluxo avança para a etapa S440. Na etapa S440, a unidade de adição de informação de controle 281 emite os dados codificados na ordem predeterminada. Na etapa S441, a unidade de codificação sem perda 106 determina se ou não todos os grupos dentro do quadro foram processados. No evento de que determinação seja feita de que um grupo não processado permanece, o fluxo retorna para a etapa S431 e o processamento subsequente é repetido.

[00426] Também no evento de que determinação seja feita na etapa S441 de que todos os grupos dentro do quadro foram processados, a unidade de codificação sem perda 106 termina o processamento de codificação sem perda e o fluxo retorna para a etapa S116 da Fig. 13 e avança para o processamento da etapa S117 e assim em diante.

[00427] Assim realizando oi processamento de codificação sem perda, a unidade de codificação sem perda 106 pode adicionar os elementos de informação de controle em incrementos apropriados para cada um. Deste modo, o dispositivo de codificação de imagem 100 pode controlar vários tipos de elementos, tais como eficiência de codificação, tempo de retardo, quantidade de carga e assim em diante. por exemplo, mais apropriadamente. [Lado de Decodificação]

[00428] Em seguida, o dispositivo de decodificação de imagem 200 de acordo com a presente forma de realização será descrito. Neste caso, a unidade de decodificação sem perda 202 do dispositivo de codificação de imagem 200 extrai os elementos do coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro, em incrementos de grupos de cada um, em vez de incrementos de quadros (imagens).

[00429] A Fig. 40 é um diagrama de blocos ilustrando um exemplo de configuração da unidade de decodificação sem perda 202 do dispositivo de decodificação de imagem 200 neste caso. Como mostradona Fig. 40, da mesma maneira como com o caso da terceira forma de realização, a unidade de decodificação sem perda 202 deste caso tem uma unidade de decodificação 222 e unidade de retenção de dados decodificados 223. Também esta unidade de decodificação 222 tem uma unidade de extração de informação de controle 301 em vez da unidade de extração de informação de controle 221.

[00430] A unidade de extração de informação de controle 301 extrai os elementos do coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro do cabeçalho de fatia dos dados codificados. A unidade de extração de informação de controle 301 tem uma unidade de extração de sinalizador 311, uma unidade de extração de tamanho de bloco 312 e uma unidade de extração de coeficiente de filtro 313.

[00431] A unidade de extração de sinalizador 311 extrai, do cabeçalho de fatia da fatia primeiro transmitida do grupo de sinalizador a ser processado, os sinalizadores de bloco de filtro daquele grupo de sinalizadores a ser processado.

[00432] A unidade de extração de tamanho de bloco 312 extrai, do cabeçalho de fatia da fatia primeiro transmitida do grupo de tamanho de bloco a ser processado, os tamanhos de blocos daquele grupo de tamanhos de bloco a ser processado.

[00433] A unidade de extração de coeficiente de filtro 313 extrai, do cabeçalho de fatia da fatia primeiro transmitida do grupo de coeficiente de filtro a ser processado os coeficientes de filtro daque grupo de coeficiente de filtro a ser processado.

[00434] Em seguida, um exemplo do fluxo do processamento de decodificação sem perda deste caso que é executado na etapa S202 da Fig. 20 será descrito com referência ao fluxograma da Fig. 41. O fluxograma desta Fig. 41 corresponde ao fluxograma mostrado na Fig. 25.

[00435] Neste caso também, o processamento é realizado basicamente da mesma maneira como com o caso da segunda forma de realização. Isto é, no início do processamento de decodificação sem perda, na etapa s461, a unidade de extração de sinalizador 311 da unidade de extração de informação de controle 301 determina se ou não os dados codificados que foram supridos é a fatia primeiro transmitida do grupo de sinalizadores a ser processado. No evento de que determinação seja feita que esta é a fatia primeiro transmitida do grupo de sinalizadores a ser processado, o fluxo avança para a etapa S462.

[00436] Na etapa S462, a unidade de extração de sinalizador 311 extrai um valor de grupo de sinalizador dos sinalizadores de bloco do cabeçalho de fatia da fatia a ser processada.

[00437] Na extração dos sinalizadores de bloco de filtro, o fluxo avança para a etapa S463. Também no evento de que a determinação seja feita na etapa S461 de que esta não é a fatia primeiro transmitida do grupo de sinalizador a ser processado, o fluxo avança para a etapa S463.

[00438] Na etapa S463, a unidade de extração de tamanho de bloco 312 da unidade de extração de informação de controle 301 determina se ou não os dados codificados que foram supridos é a fatia primeiro transmitida do grupo de tamanhos de bloco a ser processado. No evento de que determinação seja feita que este é a fatia primeiro transmitida do grupo de tamanhos de bloco a ser processado, o fluxo avança para a etapa S464.

[00439] Na etapa S464, a unidade de extração de tamanho de bloco 312 extrai um valor de grupo de tamanho de bloco dos tamanhos de bloco do cabeçalho de fatia da fatia a ser processada.

[00440] Na extração de tamanhos de bloco, o fluxo avança para a etapa S464. Também no evento de que determinação seja feita na etapa S463 de que esta não é a fatia primeiro transmitida do grupo de tamanhos de bloco a ser processado, o fluxo avança para a etapa S465.

[00441] Na etapa S465, a unidade de extração de coeficiente de filtro 313 da unidade de extração de informação de controle 301 determina se ou não os dados codificados que foram supridos são a fatia primeiro transmitida do grupo de coeficiente de filtro a ser processado. No evento de que seja feita determinação de que esta é a fatia primeiro transmitida do grupo de coeficiente de filtro a ser processado, o fluxo avança para a etapa S466.

[00442] Na etapa S466, a unidade de extração de coeficiente de filtro 313 extrai um valor de grupo de coeficiente de filtro dos coeficientes de filtro do cabeçalho de fatia da fatia a ser processada.

[00443] Após os coeficientes de filtro serem extraídos, o fluxo avança para a etapa S467. Também no evento de que determinação seja feita na etapa S465 de que esta não é a fatia primeiro transmitida do grupo de coeficiente de filtro a ser processado, o fluxo avança para a etapa S467.

[00444] Na etapa S467, a unidade de decodificação 222 decodifica a fatia a ser processada dos dados codificados. Na etapa S468, a unidade de retenção de dados decodificados 223 retém os dados decodificados que foram decodificados e obtidos.

[00445] Na etapa S469, a unidade de retenção de dados decodificados 223 determina se ou não existe uma fatia referente a que todos elementos da informação de controle (sinalizador de bloco de filtro, tamanho de bloco e coeficiente de filtro) foram extraídos pela unidade de extração de informação de controle 301. No evento de que determinação seja feita de que extração foi realizada, a unidade de retenção de dados decodificados 223 avança para a etapa S470 e inicia emissão para a unidade de quantização inversa 203, dos dados decodificados retidos ali, da fatia referente a qual todos os elementos da informação de controle foram extraídos.

[00446] Na emissão do início de dados decodificados, o fluxo avança para a etapa S471. Também no evento de que seja feita determinação na etapa S469 de que não existe uma fatia referente a qual todos os elementos da informação de controle foram extraídos, o fluxo avança para a etapa S471.

[00447] Na etapa S471, a unidade de extração de informação de controle 301 determina se ou não todas as fatias dentro do quadro foram processadas. No evento de que determinação seja feita de que existe uma fatia não processada, o fluxo retorna para a etapa S461 e o subsequente processamento é repetido na fatia não processada. Também no evento de que determinação seja feita na etapa S471 de que todas as fatias dentro do quadro foram processadas, o processamento de decodificação sem perda termina, o fluxo retorna para a etapa S207 da Fig. 20 e o processamento da etapa S208 em diante é executado.

[00448] Assim realizando processamento de decodificação sem perda, a unidade de decodificação sem perda 202 pode extrair informação de controle adicionada aos dados codificados independentemente entre si e suprir à unidade de processamento de filtro adaptativa 207. Assim, a unidade de processamento de filtro adaptativa 207 pode apropriadamente executar processamento de filtro adaptativo. Assim, a unidade de processamento de filtro adaptativa 207 pode reduzir o ruído de bloco e ruído devido a quantização da fatia a ser processada que não pode ser completamente removida pelo filtro de desbloqueio.

[Outros Exemplos]

[00449] Naturalmente, neste caso também, os elementos de coeficiente de filtro, tamanho de bloco e sinalizador de bloco de filtro podem ser embutidos no cabeçalho de fatia da fatia de partida de cada grupo de elemento, ou podem ser embutidos no cabeçalho de fatia de outro fatia predeterminada.

[00450] Também cada grupo de elemento pode ser determinado para cada GOP ou quadro por exemplo, com o número de grupos de cada elemento sendo trocável na direção temporal.

<9. Nona Forma de Realização> [Descrição de QALF]

[00451] Os blocos ALF podem ter uma estrutura de árvore quad, como descrito com NPL 3. Esta técnica é chamada QALF (Filtro de Laço Adaptativo baseado em Árvore Quad). Uma estrutura de árvore quad é uma estrutura hierárquica em que, em um nível hierárquivo mais baixo, a região de um nível hierárquico de um bloco ALF acima é dividido em quadro.

[00452] A Fig. 42 ilustra um exemplo em que a divisão de bloco ALF é expressa por uma estrutura de árvore quad, onde o número máximo de camadas é três, com um sinalizador de bloco de filtro sendo especificado para cada bloco ALF.

[00453] A na Fig. 42 indica uma camada 0 que é um bloco ALF servindo como a raiz da estrutura de árvore quad. Na estrutura de árvore quad, cada bloco ALF tem um sinalizador de divisão de bloco indicando se ou não ele é dividido em quatro no nível hierárquico mais baixo. O valor do sinalizador de divisão de bloco do bloco ALF mostrado em A na Fig. 42 é “1”. Isto é, este bloco ALF é dividido em quatro no nível hierárquico mais baixo (camada 1). B na Fig. 41 mostra a camada 1. Isto é, quatro blocos ALF são formados na camada 1.

[00454] No evento de que o sinalizador de divisão de bloco seja “0”, um outro nível hierárquico mais baixo não é dividido em quatro. Isto é, não há mais divisão e um sinalizador de bloco de filtro é gerado como aquele bloco ALF. Isto é, um bloco ALF cujo sinalizador de divisão de bloco é “0” também tem um sinalizador de bloco de filtro. O “0” à esquerda de “0-1” mostrado em B na Fig. 42 indica o sinalizador de divisão de bloco do bloco ALF e o “1” à direita mostra o sinalizador de bloco de filtro do bloco ALF.

[00455] Os dois blocos ALF cujo sinalizador de divisão de bloco na camada 1 é “1” são divididos em quatro no nível hierárquico mais baixo (camada 2). C na Fig. 42 ilustra a camada 2. Isto é, dez blocos ALF são formados na camada 2.

[00456] Da mesma maneira, os blocos ALF como sinalizador de divisão de bloco de “0” na camada 2 são também designados um sinalizador de bloco de filtro. Em C na Fig. 42, o sinalizador de divisão de bloco de um bloco ALF é “1”. Isto é, aquele bloco ALF é dividido em quatro no outro nível hierárquivo mais baixo (camada 3). D na Fig. 42 mostra a camada 3. Isto é, 13 blocos ALF são formados na camada 3.

[00457] Formando uma árvore quad como mostrado na Fig. 42, a estrutura do bloco ALF finalmente torna-se como mostrado na Fig. 43. Assim, com uma estrutura de árvore quad o tamanho dos blocos ALF difere em cada nível hierárquico. Istoé, utilizando-se uma estrutura de árvore quad, os tamanhos dos blocos ALF podem ser feitos serem diferentes entre si dentro do quadro.

[00458] O controle do sinalizador de bloco de filtro de cada bloco ALF é o mesmo que com a primeira forma de realização. Isto é, o processamento de filtro não é realizado em regiões em que o valor do sinalizador de bloco de filtro é “0” (as partes hachuradas da Fig. 43).

[00459] O problema que em que há preocupação de que a eficiência de codificação possa deteriorar no caso de multi-fatias ocorre como o mesmo problema com QALF, onde a expressão dos blocos ALF foi melhorada.

[00460] A Fig. 44 ilustra um exemplo de codificação da região de fatia 1 da Fig. 5 usando-se a técnica QALF.

[00461] Aqui, a região da linha cheia 421 representa a região de fatia 1. Se a informação de controle do inteiro QALF 411 for dividida em fatias, como indicado pela linha cheia 421, para servir como uma pluralidade de informação de controle, e adicionando-se esta aos dados codificados, informação redundante ocorre entre a informação de controle.

[00462] Deste modo, com o caso de QALF também, o dispositivo de codificação de imagem 100 inclui a informação de controle de múltiplas fatias de um cabeçalho de fatia dos dados codificados, pelo mesmo método que com o caso de BALF descrito na primeira forma de realização. O dispositivo de decodificação de imagem 200 também extrai informação de controle e realiza processamento de filtro adaptativo da mesma maneira que com o caso de BALF.

[00463] Assim, a redundância de informação de controle adicionada aos dados codificados é suprimida, assim a eficiência de codificação pode ser melhorada em relação ao caso de informação de controle de embutimento de cada fatia.

<10. Décima Forma de Realização> [Computador Pessoal]

[00464] A acima descrita série de processamento pode ser executada por hardware e pode ser executada por software. Neste caso, uma configuração pode ser feita como um computador pessoal, tal como mostrado na Fig. 45, por exemplo.

[00465] Na Figura 15, uma CPU 501 de um computador pessoal 500 executa vários tipos de processamento seguindo programas armazenados na ROM (Memória de Somente Leitura) 502 ou programas carregados na RAM (Memória de Acesso Aleatório) 503 de uma unidade de armazenagem 513. A RAM 503 também armazena dados e assim em diante necessários para a CPU 501 executar vários tipos de processamento, como apropriado.

[00466] A CPU 501, ROM RO2 e RAM 503 são mutuamente conectadas por um barramento 504. Este barramento 504 é também conectado a uma interface de entrada/saída 510.

[00467] Conectada à inteface de entrada/saída 510 há uma unidade de entrada 511 composta de um teclado, um mouse e assim em diante, uma unidade de saída 512 composta de um monitor, tal como um CRT (Tubos de Raios Catódicos) ou LCD (Monitor de Cristal Líquido) ou similar, um altofalante e assim em diante, uma unidade de armazenagem 513 composta de um disco rígido e assim em diante, e uma unidade de codificação 514 composta de um modem e assim em diante. A unidade de comunicação 514 realiza processamento de comunicação via redes incluindo a Internet.

[00468] Também conectada à interface de entrada/saída 510 há uma unidade 515 como necessário, a que um meio removível 521, tal como um disco magnético, um disco óptico, um disco magneto-óptico, memória semicondutora ou similares, é montado como apropriado e os programas de computador exibidos por eles são instalados na unidade de armazenagem 513, como necessário.

[00469] No evento de executar a série acima descrita de processamento por software, um programa configurando o software é instalado por uma rede ou meio de gravação.

[00470] Como mostrado na Fig. 45, por exemplo, este meio de gravação não é somente configurado de um meio removível 521 composto de um disco magnético (incluindo disco flexível), disco óptico (incluindo CD- ROM (Disco Compacto - Memória de Somente Leitura), DVD (Disco Versátil Digital), disco magneto-óptico (MD (Mini Disco)), ou memória semicondutora ou similar, em que programas são gravados e distribuídos a fim de distribuir programas para usuários separadamente pela unidade principal de dispositivo, porém também são configurados de ROM 502, um disco rígido incluído na unidade de armazenagem 513, e assim em diante, em que programas são gravados, distribuídos para usuários dentro da unidade principal de dispositivos antecipadamente.

[00471] Observe-se que um programa que o computador executa pode ser um programa em que o processamento é realizado em sequência de tempo seguindo a ordem descrita no presente Relatório, ou pode ser um programa em que processamento é realizado em paralelo ou em uma regulação necessária, tal como quando uma chamada foi realizada.

[00472] Também com o presente Relatório, as etapas descrevendo programas gravados no meio de gravação incluem processamento realizado em sequência de tempo seguindo a ordem descrita como uma coisa a se esperar, e também processamento executado em paralelo ou individualmente, sem necessariamente ser processado em sequência de tempo.

[00473] Também com o presente relatório, o termo sistema representa a totalidade de dispositivos configurados de múltiplos dispositivos (dispositivos).

[00474] Também uma configuração que foi descrita acima como um dispositivo (ou unidade de processamento) pode ser dividido e configurado como múltiplos dispositivos (ou unidades de processamento). Contrariamente, configurações que foram descritas acima como múltiplos dispositivos (ou unidades de processamento) podem ser integradas e configuradas como um único dispositivo (ou unidade de processamento). Também configurações outras que não aquelas descritas acima podem ser adicionadas aos dispositivos (ou unidades de processamento), como uma coisa de se esperar. Além disso, parte de uma configuração de um certo dispositivo (ou unidade de processamento) pode ser incluída em uma configuração de outro dispositivo (ou outra unidade de processamento), contanto que a configuração e operações do sistema global sejam substancialmente as mesmas. Isto é, as formas de realização da presente invenção não são restringidas às formas de realização acima descritas e várias modificações podem ser feitas sem desvio da essência da presente invenção.

[00475] Por exemplo, a imagem acima descrita codificando o dispositivo 100 e o dispositivo de codificação de imagem 200 podem ser aplicados a vários dispositivos eletrônicos de imagear. O seguinte é uma descrição de seus exemplos.

<11. Décima-primeira Forma de Realização> [Receptor de Televisão]

[00476] A Fig. 46 é um diagrama de blocos ilustrando um exemplo de configuração principal de uma receptor de televisão empregando o dispositivo de codificação de imagem 200 em que a presente invenção foi aplicada.

[00477] Um receptor de televisão 1000 mostrado na Fig. 46 inclui um sintonizador terrestre 1013. um decodificador de vídeo 1015,um circuito de processamento de sinal de vídeo 1018, um circuito gerador de gráficos 1019, um circuito de acionamento de painel 1020 e um painel de monitor 1021.

[00478] O sintonizador terrestre 1013 recebe os sinais de onda de radiodifusão de uma radiodifusão analógica terrestre via uma antena, desmodula, obtém os sinais de vídeo e supre estes ao decodificador de vídeo 1015. O decodificador de vídeo 1015 submete os sinais de vídeo supridos pelo sintonizador terrestre 1013 ao processamento de decodificação e supre os sinais do componente digital obtidos para a circuito de processamento de sinal de vídeo 1018.

[00479] O circuito de processamento de sinal de vídeo 1018 submete os dados de vídeo supridos pelo decodificador de vídeo 1015 ao processamento predeterminado, tal como remoção de ruído ou similar, e supre os dados de vídeo obtidos para o circuito gerador de gráficos 1019.

[00480] O circuito gerador de gráficos 1019 gera os dados de vídeo de um programa a ser exibido em um painel de exibição 1021, ou dados de imagem devidos a processamento baseado em uma aplicação a ser suprida via uma rede, ou similar, e supre os dados de vídeo ou dados de imagem gerados para o circuito de acionamento de painel. Também o circuito gerador de gráficos 1019 também realiza processamento tal como suprimento de dados de vídeo obtidos gerando dados de vídeo (gráficos) para o usuário exibir em uma tela usada para seleção de um item ou similar, e superpondo estes nos dados de vídeo de um programa, ao circuito de acionamento de painel 1020 como apropriado.

[00481] O circuito de acionamento de painel 1020 aciona o painel de monitor 1021 com base nos dados supridos pelo circuito gerador de gráficos 1019 para exibir o vídeo de um programa ou as várias telas acima mencionadas no painel de monitor 1021.

[00482] O painel de monitor 1021 é composto de um LCD (Monitor de Cristal Líquido) e assim em diante, e exibe o vídeo de um programa ou similar de acordo com o controle pelo circuito de acionamento de painel 1020.

[00483] Também o receptor de televisão 1000 inclui um circuito de conversão de A/D (analógico/digital) de áudio 1014, um circuito de processamento de sinal de áudio 1022, um circuito de sintetização de cancelamento de eco/áudio 1023, um circuito amplificador de áudio 1024 e um altofalante 1025.

[00484] O sintonizador terrestre 1013 desmodula o sinal de onda de radiodifusão recebido, desse modo obtendo não somente um sinal de vídeo mas também um sinal de áudio. O sintonizador terrestre 1013 supre o sinal de áudio obtido para o circuito de conversão A/D de áudio 1014.

[00485] O circuito de conversão A/D de áudio 1014 submete o sinal de áudio suprido pelo sintonizador terrestre 1013 para o processamento de conversão A/D, e supre o sinal de áudio digital obtido para o circuito de processamento de sinal de áudio 1022.

[00486] O circuito de processamento de sinal de áudio 1022 submete os dados de áudio supridos pelo circuito de conversão A/D de áudio 1014 para o processamento predeterminado, tal como remoção de ruído ou similar e supre os dados de áudio obtidos para o circuito de cancelamento/sintetização de áudio 1023.

[00487] O circuito de cancelamento/sintetização de áudio 1023 supre os dados de áudio supridos pelo circuito de processamento de sinal de áudio 1022 para circuito amplificador de áudio 1024.

[00488] O circuito amplificador de áudio 1024 submete os dados de áudio supridos pelo circuito de cancelamento/sintetização de áudio 1023 para o processamento de conversão D/A, submete ao processamento amplificador para ajustar ao volume predeterminado e então emite o áudio pelo altofalante 1025.

[00489] Além disso, o receptor de televisão 1000 também inclui um sintonizador digital 1016 e um decodificador 1017.

[00490] O sintonizador digital 1016 recebe os sinais de onda de radiodifusão de uma radiodifusão digital (radiodifusão digital terrestre, BS (Satélite de Radiodifusão) / CS (satélite de comunicações) radiodifusão digital) via a antena, desmodula para obter MPEG-TS (Moving Picture Experts Group-Transporte Stream) e supre este para o decodificador MPEG 1017.

[00491] O decodificador MPEG 1017 desembaralha o embaralhamento dado ao MPEG-TS suprido pelo sintonizador digital 1016 e extrai um fluxo incluindo os dados de um programa servindo como um objeto de reprodução (objeto de visualização). O decodificador MPEG 1017 decodifica um pacote de áudio compondo o fluxo extraído, supre os dados de áudio obtidos para o circuito de processamento de sinal de áudio 1022 e também decodifica um pacote de vídeo compondo o fluxo, e supre os dados de vídeo obtidos para o circuito de processamento de sinal de vídeo 1018. Também o decoficador MPEG 1017 supre os dados EPG (Guia de Programa Eletrônico) extraídos de MPEG-TS para uma CPU 1032 via um trajeto não mostrado.

[00492] O receptor de televisão 1000 utiliza o dispositivo de decodificação de imagem acima mencionado 200 como o decodificador MPEG 1017 para decodificar pacotes de vídeo desta maneira. Observe-se que o MPEG-TS transmitido pela estação de radiodifusão ou similar foi codificado pelo dispositivo de codificação 100.

[00493] O decodificador MPEG 1017 extrai o valor de múltiplas fatias de informação de controle embutido em um cabeçalho de fatia, dos dados codificados supridos pelo dispositivo de codificação de imagem 100, da mesma maneira que com o dispositivo de codificação de imagem 200, e realiza processamento de controle de filtro adaptativo usando esta informação de controle, por meio do que deterioração da eficiência de codificação devida ao controle local de processamento de filtro pode ser suprimida.

[00494] Os dados de vídeo supridos pelo decodificador MPEG 1017 são, da mesma maneira que com o caso dos dados de vídeo supridos pelo decodificador de vídeo 1015, submetidos a processamento predeterminado no circuito de processamento de sinal de vídeo 1018, superpostos sobre os dados de vídeo gerados e assim em diante no circuito gerador de gráficos 1019 como apropriado, supridos ao painel de monitor 1021 via o circuito de acionamento de painel 1020, e sua imagem é exibida nele.

[00495] Os dados de áudio supridos pelo decodificador MPEG 1017 são, da mesma maneira que com o caso dos dados de áudio supridos pelo circuito de conversão A/D de áudio 1014, submetidos ao processamento predeterminado no circuito de processamento de sinal de áudio 1022, supridos para o circuito amplificador de áudio 1024 via o circuito de cancelamento de eco/sintetização de áudio 1023 e submetidos ao processamento de conversão D/A e processamento amplificador. Como resultado, o áudio ajustado em predeterminado volume é emitido pelo altofalante 1025.

[00496] Também o receptor de televisão 1000 inclui um microfone 1026 e um circuito de conversão A/D 1027.

[00497] O circuito de conversão A/D 1027 recebe os sinais de áudio de usuário coletados pelo microfone 1026 provido para o receptor de televisão 1000 servindo para conversação de áudio, submete o sinal de áudio recebido a processamento de conversão A/D e supre os dados de áudio digital para o circuito de cancelamento de eco/sintetização de áudio 1023.

[00498] No evento de que os dados de áudio de usuário (usuário A) do receptor de televisão 1000 tenha sido suprido pelo circuito de conversão A/D 1027, o circuito de cancelamento de eco/sintetização de áudio 1023 realiza cancelamento de áudio com os dados de áudio do usuário (usuário A) obtidos como um objeto, e emite os dados de áudio obtidos sintetizando os dados de áudio do usuário A e outros dados de áudio ou similar do altofalante 1025 via o circuito amplificador de áudio 1024.

[00499] Além disso, o receptor de televisão 1000 também inclui um codec de áudio 1028, um barramento interno 1029, SDRAM (memória de acesso aleatório dinâmica síncrona) 1030, memória flash 1031, uma CPU 1032, um USB (barramento serial universal) I/F 1033 e uma rede I/F 1034.

[00500] O circuito de conversão A/D 1027 recebe o sinal de áudio do usuário coletado pelo microfone 1026 provido para o receptor de televisão 1000 servindo como conversação de áudio, submete o sinal de áudio recebido a processamento de conversão A/D e supre os dados de áudio digital obtidos para codec de áudio 1028.

[00501] O codec de áudio 1028 converte os dados de áudio supridos pelo circuito de conversão A/D 1027 em dados de um formato predeterminado para transmissão via uma rede e supre para a rede I/f 1034 via o barramento interno 1029.

[00502] A rede I/F 1034 é conectada à rede via um cabo montado sobre um terminal de rede 1035. A rede I/F 1034 transmite os dados de áudio supridos pelo codec de áudio 1028 para outro dispositivo conectado a sua rede, por exemplo. Também a rede I/F 1034 recebe, via o terminal de rede 1035, os dados de áudio transmitidos por outro dispositivo conectado a ele via a rede e supre estes para o codec de áudio 1028 via barramento interno 1029, por exemplo.

[00503] O codec de áudio 1028 converte os dados de áudio supridos pela rede I/F 1034 nos dados de um formato predeterminado e supre estes para o circuito de cancelamento de eco/sintetização de áudio 1023.

[00504] O circuito de cancelamento de eco/sintetização de áudio 1023 realiza cancelamento de eco com os dados de áudio supridos pelo codec de áudio 1028 tomado como um objeto e emite os dados de áudio obtidos sintetizando-se os dados de áudio e outros dados deáudio, ou similar, pelo autofalante 1025 via o circuito amplificador de áudio 1024.

[00505] A SDRAM 1030 armazena vários tipos de dados necessários para a CPU 1032 realizando processamento.

[00506] A memória flash 1031 armazena um programa a ser executado pela CPU 1032. O programa armazenado na memória flash 1031 é exibido pela CPU 1032 em predeterminado instante tal como quando ativando o receptor de televisão 1000, ou similar. Os dados EPG obtidos via uma radiodifusão digital, dados obtidos de um servidor predeterminado via a rede e assim em diante são também armazenados na memória flash 1031.

[00507] Por exemplo, MPEG-TS incluindo os dados de conteúdo obtidos por um servidor predeterminado via a rede pelo controle da CPU 1032 são armazenados na memória flash 1031. A memória flash 1031 supre seu MPEG-TS para o decodificador MPEG 1017 via o barramento interno 1029 pelo controle da CPU 1032, por exemplo.

[00508] O decodificador MPEG 1017 processa seu MPEG-TS da mesma maneira que com o caso do MPEG-TS suprido pelo sintonizador digital 1016. Desta maneira, o receptor de televisão 1000 recebe os dados de conteúdo composto de vídeo, áudio e assim em diante via a rede, decodifica empregando o decodificador MPET 1017, por meio do que seu vídeo pode ser exibido e seu áudio pode ser emitido.

[00509] Também o receptor de televisão 1000 também inclui uma unidade de recepção de luz 1037 para receber o sinal infravermelho transmitido por um controlador remoto 1051.

[00510] A unidade de recepção de luz 1037 recebe raios infravermelhos do controlador remoto 1051 e emite um código de controle, representando o teor da operação de usuário, obtido por desmodulação, para a CPU 1032.

[00511] A CPU 1032 executa o programa armazenado na memória flash 1031 para controlar a inteira operação do receptor de televisão 1000 de acordo como código de controle suprido pela unidade de recepção de luz 1037 e assim em diante. A CPU 1032 e as unidades do receptor de televisão 1000 são conectadas via um trajeto não mostrado.

[00512] A USB I/F 1033 realiza transmissão/recepção de dados como um dispositivo externo do receptor de televisão 1000, que é conectado via um cabo USB montado em um terminal USB 1036. A rede I/F 1034 conecta-se à rede via um cabo montado sobre o terminal de rede 1035, também realiza transmissão/recepção de dados que não dados de áudio a vários dispositivos conectados à rede.

[00513] O receptor de televisão 1000 utiliza dispositivo de decodificação 200 como o decodificador MPEG 1017, por meio do que valor de várias fatias de informação de controle adicionadas a um cabeçalho de fatia de dados codificados pode ser extraído e, além disso, esta informação de controle pode ser usada para executar processamento de filtro adaptativo apropriado. Como resultado, o receptor de televisão 1000 pode realizar supressão da deterioração da eficiência de codificação devida ao controle local do processamento de filtro de sinais de radiodifusão recebidos via uma antena ou dados de conteúdo obtidos via uma rede.

<12. Décima-segunda Forma de Realização> [Telefone Celular]

[00514] A Fig. 48 é um diagrama de blocos ilustrando um exemplo de configuração principal de um telefone celular empregando o dispositivo de codificação de imagem e o dispositivo de decodificação de imagem a que a presente invenção foi aplicada.

[00515] Um telefone celular 1100, mostrado na Fig. 48, inclui uma unidade de controle principal 1150, configurada a fim de integralmente controlar as unidades, uma unidade de circuito de suprimento de força 1151, uma unidade de controle de entrada de operação 1152, um codificador de imagem 1153, uma unidade I/F de câmera 1154, uma unidade de controle LCD 1154, um decodificador de imagem 1156, uma unidade de multiplexação/separação 1157, uma unidade de gravação e reprodução 1162, uma unidade de circuito de modulação/desmodulação 1158, e um codec de áudio 1159. Estes são mutuamente conectados via um barramento 1160.

[00516] Também o telefone celular 1100 inclui teclas operacionais 1119, uma câmara CCD (dispositivo acoplado a carga) 1116, um monitor de cristal líquido 1118, uma unidade de armazenagem 1123, uma unidade de circuito de transmissão/recepção 1163, uma antena 1114, um microfone (MIC) 1121 e um altofalante 1117.

[00517] No fim de uma chamada e a tecla de força sendo ligada pela operação do usuário, a unidade de circuito de suprimento de força 1151 ativa o telefone celular 1100 em um estado operacional suprindo força para as unidades de um pacote de bateria.

[00518] O telefone celular 100 realiza várias operações, tais como transmissão/recepção de um sinal de áudio, transmissão/recepção de um email e dados de imagem, filmagem de imagem, gravação de dados e assim em diante, em vários modos tais como um modo de chamada de voz, um modo de comunicação de dados e assim em diante, com base no controle da unidade de controle principal 1150 composta de uma CPU, ROM, RAM e assim em diante.

[00519] Por exemplo, no modo de chamada de voz, o telefone celular 11100 converte o sinal de áudio coletado pelo microfone (mike) 1121 em dados de áudio digital pelo codec de áudio 1159, submete estes ao processamento de espalhamento de espectro na unidade de circuito de modulação/desmodulação 1158 e submete-os a processamento de conversão digital/analógico e processamento de conversão de frequência na unidade de circuito de transmissão/recepção 1163. O telefone celular 1100 transmite o sinal para transmissão obtido por seu processamento de conversão para uma estação de base não mostrada, via a antena 1114. O sinal para transmissão (sinal de áudio) transmitido para a estação de base é suprido para o telefone celular da outra parte via a rede de telefone pública.

[00520] Também, por exemplo, no modo de chamada de voz, o telefone celular 1100 amplifica o sinal de recepção recebido na antena 1114, na unidade de circuito de transmissão/recepção 1163, submete ainda a processamento de conversão de frequência e processamento de conversão analógico/digital, submete ao processamento de dispersão inversa de espectro na unidade de circuito de modulação/desmodulação 1158 e converte em um sinal de áudio analógico pelo codec de áudio 1159. O telefone celular 1100 emite seu sinal de áudio analógico convertido e obtido pelo altofalante 1117.

[00521] Além disso, por exemplo, no evento de transmitir um e-mail no modo de comunicação de dados, o telefone celular 1100 aceita os dados de texto da entrada de e-mail pela operação das teclas de operação 1119 na unidade de controle de entrada de operação 1152. O telefone celular 1110 processa seus dados de texto na unidade de controle principal 1150 e exibe no monitor de cristal líquido 1118 via a unidade de controle LCD 1155 como uma imagem.

[00522] Também o telefone celular 1100 gera dados de e-mail na unidade de controle principal 1150, com base nos dados de texto aceitos pela unidade de controle de entrada de operação 1152, nas instruções de usuário e assim em diante. O telefone celular 1100 submete seus dados de e-mail a processamento de dispersão de espectro na unidade de circuito de modulação/desmodulação 1158 e submete a processamento de conversão digital/analógico e processamento de conversão de frequência na unidade de circuito de transmissão/recepção 1163. O telefone celular 1100 transmite o sinal para transmissão obtido pelo seu processamento de conversão para uma estação de base não mostrada, via a antena 1114. O sinal para transmissão (e-mail) transmitido para a estação de base é suprido para uma destinação predeterminada via a rede, servidor de correio e assim em diante.

[00523] Também, por exemplo, no evento de receber um e-mail no modo de comunicação de dados, o telefone celular 1100 recebe o sinal transmitido da estação de base via a antena 1114 com a unidade de circuito de transmissão/recepção 163, amplifica e ainda submete a processamento de conversão de frequência e processamento de conversão analógico/digital. O telefone celular 1100 submete seu sinal de recepção ao processamento de dispersão inversa de espectro na unidade de circuito de modulação/desmodulação 1158 para restaurar os dados de e-mail originais. O telefone celular 1100 exibe os dados de e-mail restaurados no monitor de cristal líquido 1118 via a unidade de controle LCD 1155.

[00524] Observe-se que o telefone celular 1100 pode gravar (armazenar) os dados de e-mail recebidos na unidade de armazenagem 1123 via a unidade de gravação e reprodução 1162.

[00525] Esta unidade de armazenagem 1123 é um meio de gravação reescrevível opcional. A unidade de armazenagem 1123 pode ser memória semicondutora, tal como RAM, memória flash embutida ou similar, pode ser um disco rígido ou pode ser um meio removível, tal como um disco magnético, um disco magneto óptico, um disco óptico, memória USB, um cartão de memória ou similar. Não precisa ser mencionado que a unidade de armazenagem 1123 pode ser outra que não estas.

[00526] Além disso, por exemplo, no evento de transmitir dados de imagem no modo de comunicação de dados, o telefone celular 1100 gera dados de imagem imageando na câmera CCD 1116. A câmera CCD 1116 inclui um CCD servindo como um dispositivo óptico tal como uma lente, diafragma e assim em diante, e servindo como um dispositivo de conversão fotoelétrico, que imageia um assunto, converte a intensidade da luz recebida em um sinal elétrico e gera os dados de imagem de uma imagem do assunto. A câmara CCD 1116 realiza codificação de compressão dos dados de imagem no codificador de imagem 1153 via a unidade I/F de câmera 1154 e converte em dados de imagem codificados.

[00527] O telefone celular 1100 emprega o dispositivo de codificação de imagem mencionado 100 como o codificador de imagem 1153 para realizar tal processamento. Deste modo, da mesma maneira como com o dispositivo de codificação de imagem 100, o codificador de imagem 1053 pode suprimir deterioração da eficiência de codificação devida ao controle local do processamento de filtro. Por exemplo, o codificador de imagem 1053 pode melhorar a eficiência de codificação através de um caso de embutir informação de controle em cada fatia, adicionando múltiplas fatias com uma informação de controle adicionada a um cabeçalho de fatia dos dados codificados.

[00528] Observe-se que, nesta ocasião simultaneamente, o telefone celular 1100 converte o áudio coletado no microfone (mike) 1121, enquanto filmando com a câmera CCD 1116, de analógico para digital no codec de áudio 1159 e ainda codifica isto.

[00529] O telefone celular 1100 multiplexa os dados de imagem codificados supridos pelo codificador de imagem 1153, e os dados de áudio digital supridos pelo codec de áudio 1159 na unidade de multiplexação/separação 1157 utilizando um método predeterminado. O telefone celular 1100 submete os dados multiplexados obtidos como resultado ao processamento de dispersão de espectro na unidade de circuito de modulação/desmodulação 1158 e submete ao processamento de conversão de digital/analógico e processamento de conversão de frequência na unidade de circuito de transmissão/recepção 1163. O telefone celular 11100 transmite o sinal para transmissão obtido por seu processamento de conversão para uma estação de base não mostrada via a antena 1114. O sinal para transmissão (dados de imagem) transmitida para a estação de base é suprido à outra parte via a rede ou similar.

[00530] Observe-se que no evento de que os dados de imagem não sejam transmitidos, o telefone celular 11100 pode também exibir os dados de imagem gerados na câmera CCD 1116 no monitor de cristal líquido 1118 via a unidade de controle LCD 1155 em vez do codificador de imagem 1153.

[00531] Também, por exemplo, no evento de receber os dados de um ângulo de imagem móvel ligado a um website simples ou similar no modo de comunicação de dados, o telefone celular 1100 recebe o sinal transmitido pela estação de base na unidade de circuito de transmissão/recepção 1163 via a antena 1114, amplifica e ainda submete a processamento de conversão de frequência e processamento de conversão analógico/digital. O telefone celular 1100 submete o sinal recebido a processamento de dispersão inversa de espectro na unidade de circuito de modulação/desmodulação 1158 para restaurar os dados multiplexados originais. O telefone celular 1100 separa seus dados multiplexados na unidade de multiplexação/separação 1157 emdados de imagem e dados de áudio codificados.

[00532] O telefone celular 1100 decodifica os dados de imagem codificados no decodificador de imagem 1156 utilizando o formato de decodificação correspondendo a um predeterminado formato de codificação, tal como MPEG2, MPEG4 ou similar, desse modo gerando dados de imagem móvel de reprodução e exibe estes no monitor de cristal líquido 1118 via a unidade de controle LCD 1155. Assim, os dados de imagem móvel incluídos em um arquivo de imagem móvel ligado a um website simples são exibidos no monitor de cristal líquido 1118, por exemplo.

[00533] O telefone celular 1100 emprega o dispositivo de decodificação de imagem acima mencionado 200 como o decodificador de imagem 1156 para realizar tal processamento. Por conseguinte, da mesma maneira que com o dispositivo de decodificação de imagem 200, o desta invenção 1156 extrai valor de múltiplas fatias da informação de controle adicionada a um cabeçalho de fatia de dados codificados e, além disso, este cabeçalho de controle pode ser usado para apropriadamente executar processamento de filtro adaptativo. Como resultado, a supressão da deterioração de eficiência de codificação devida ao controle local do processamento de filtro pode ser realizada.

[00534] Nesta ocasião, simultaneamente, o telefone celular 1100 converte os dados de áudio digital em um sinal de áudio analógico no codec de áudio 1159 e dá saída neste pelo altofalante 1117. Assim, os dados de áudio incluídos em um arquivo de imagem móvel ligado a um website simples são executados, por exemplo.

[00535] Observe-se que, da mesma maneira como com o caso de email, o telefone celular 1100 pode gravar (armazenar) os dados recebidos ligados a um website simples ou similar na unidade de armazenagem 1123 via a unidade de gravação e reprodução 1162.

[00536] Também o telefone celular 1100 analisa o código bidimensional imageado, obtido pela câmera CCD 1116 na unidade de controle principal 1150, por meio do que informação gravada no código bidimensional pode ser obtida.

[00537] Além disso, o telefone celular 1100 pode comunicar-se com um dispositivo eterno na unidade de comunicação infravermelha 1181 empregando raios infravermelhos.

[00538] O telefone celular 1100 emprega o dispositivo de codificação de imagem 100 como o codificador de imagem 1153, por meio do que supressão pode ser realizada da deterioração da eficiência de codificação devido a controle local do processamento de filtro referente a dados codificados gerados pelos dados de imageação de codificação gerados na câmera CCD 1116, por exemplo. Como resultado, o telefone celular 1100 pode prover dados codificados (dados de imagem), com melhor eficiência de codificação que um caso de embutir informação de controle em cada fatia, para outro dispositivo.

[00539] Também o telefone celular 1100 emprega o dispositivo de codificação de imagem 200 como o decodificador de imagem 1156, por meio do que múltiplas fatias com uma informação de controle adicionada a um cabeçalho de fatia dos dados codificados podem ser extraídos e, além disso, a informação de controle pode ser usada para apropriadamente executar processamento de filtro adaptativo. Como resultado, o telefone celular 1100 pode realizar supressão da deterioração da eficiência de codificação devida ao controle local do processamento de filtro referente a dados de um arquivo de imagem móvel ligado a um simples website ou similar, por exemplo.

[00540] observe-se que a descrição foi feita até agora em que o telefone celular 1110 emprega a câmera CCD 1116, porém o telefone celular 1100 pode empregar um sensor de imagem (sensor de imagem CMOS) empregando CMOS (semicondutor de óxido metálico complementar) em vez desta câmera CCD 1116. Neste caso também, o telefone celular 1100 pode imagear um assunto e gerar os dados de imagem de uma imagem do assunto da mesma maneira que com o caso de empregar a câmara CCD 1116.

[00541] Também a descrição foi feita até agora referente a telefone celular 1100, porém o dispositivo de codificação de imagem 100 e o dispositivo de decodificação de imagem 200 podem ser aplicados a qualquer espécie de dispositivo da mesma maneira que com o caso do telefone celular 1100, contanto que seja um dispositivo tendo as mesmas função de imageação e função de comunicação que aqueles do telefone celular 1100, por exemplo, tal como um PDA (assistentes digitais pessoais), telefone inteligente, UMPC (computador pessoal ultra móvel), NETBOOK, computador pessoal dimensionado-notebook ou similar.

<13. Décima-terceira Forma de Realização> [Gravador de Disco Rígido]

[00542] A Fig. 48 é um diagrama de blocos ilustrando um exemplo de configuração principal de um gravador de disco rígido que emprega o dispositivo de codificação de imagem e o dispositivo de decodificação de imagem a que a presente invenção foi aplicada.

[00543] Um gravador de disco rígido (gravador HDD) 1200 mostrado na Fig. 48 é um dispositivo que armazena, em um disco rígido embutido, dados de áudio e dados de vídeo de um programa de difusão incluído em sinais de onda de radiodifusão (sinais de televisão) recebidos por um sintonizador e transmitidos por um satélite ou uma antena terrestre ou similar e provê os dados armazenados para o usuário na ocasião de acordo com instruções do usuário.

[00544] O gravador de disco rígido 1200 pode extrair dados de áudio e dados de vídeo dos sinais de onda de difusão, decodificar estes como apropriados e armazenar no disco rígido embutido, por exemplo. Também, o gravador de disco rígido 1200 pode também obter dados de áudio e dados de vídeo de outro dispositivo via a rede, decodificar estes como apropriado e armazenar no disco rígido embutido, por exemplo.

[00545] Além disso, o gravador de disco rígido 1200 pode decodificar dados de áudio e dados de vídeo gravados no disco rígido embutido, suprir estes para um monitor 1260, exibir uma sua imagem na tela do monitor 1260 e dar saída em seu áudio pelo autofalante do monitor 1260, por exemplo. Também o gravador de disco rígido 1200 pode decodificar dados de áudio e dados de vídeo extraídos dos sinais de difusão obtidos via um sintonizador, ou dados de áudio e dados de vídeo obtidos de outro dispositivo via uma rede, suprir estes para o monitor 1260, exibir uma sua imagem na tela do monitor 1260 e emitir seu áudio pelo altofalante do monitor 1260, por exemplo.

[00546] Naturalmente, operações outras que não estas podem ser realizadas.

[00547] Como mostrado na Fig. 48, o gravador de disco rígido 1200 inclui uma unidade de recepção 1221, uma unidade de desmodulação 1222, um desmultiplexador 1223, um decodificador de áudio 1224, um decodificador de vídeo 1225 e uma unidade de controle de gravador 1226. O gravador de disco rígido 1200 inclui ainda memória de dados EPG 1227, memória de programa 1228, memória de trabalho 1229, um conversor de monitor 1230, uma unidade de controle OSD (exibição em tela) 1231, uma unidade de controle de monitor 1232, uma unidade de gravação e reprodução 1233, um conversor D/A 1234 e uma unidade de comunicação 1235.

[00548] Também o conversor de monitor 1230 inclui um codificador de vídeo 1241. A unidade de gravação e reprodução 1233 inclui um codificador 1251 e um decodificador 1252.

[00549] A unidade de recepção 1221 recebe o sinal infravermelho do controlador remoto (não mostrado), converte em um sinal elétrico e dá saída para a unidade de controle de gravador 1226. A unidade de controle de gravador 1226 é configurada de, por exemplo, um microprocessador e assim em diante e executa vários tipos de processamento de acordo com o programa armazenado na memória de programa 1228. Nesta ocasião, a unidade de controle de gravador 1226 utiliza a memória de trabalho 1229 de acordo com a necessidade.

[00550] A unidade de comunicação 1235, que é conectada à rede, realiza processamento de comunicação com outro dispositivo via a rede. Por exemplo, a unidade de comunicação 1235 é controlada pela unidade de controle de gravador 1226 para comunicar-se com um sintonizador (não mostrado) e principalmente emitir um sinal de controle de seleção de canal para o sintonizador.

[00551] A unidade de desmodulação 1222 desmodula o sinal suprido pelo sintonizador e emite-o para o desmultiplexador 1223. O desmultiplexador 1223 separa os dados supridos pela unidade de desmodulação 1222 em dados de áudio, dados de vídeo e dados EPG e emite- os para o decodificador de áudio 1224, decodificador de vídeo 1225 e unidade de controle de gravador 1226, respectivamente.

[00552] O decodificador de áudio 1224 decodifica os dados de áudio introduzidos e emite-os para a unidade de gravação e reprodução 1233. O decodificador de vídeo 1225 decodifica os dados de vídeo introduzidos e emite-os para o conversor de monitor 1230. A unidade de controle de gravador 1226 supre os dados EPG introduzidos para a memória de dados EPG 1227 para armazenagem.

[00553] O conversor de monitor 1230 codifica os dados de vídeo supridos do decodificador de vídeo 1225 ou unidade de controle de gravador 1226 em, por exemplo, os dados de vídeo conformando-se com o formato NTSC (National Television Standards Committee) usando o codificador de vídeo 1241 e emite para a unidade de gravação e reprodução 1233. Também o conversor de monitor 1230 converte o tamanho da tela dos dados de vídeo supridos pelo decodificador de vídeo 1225 ou unidade de controle de gravador 1226 no tamanho correspondendo ao tamanho do monitor 1260, converte os dados de vídeo cujo tamanho de tela foi convertido nos dados de vídeo conformando-se com o formato NTSC usando o codificador de vídeo 1241, converte em um sinal analógico e emite-os para a unidade de controle de exibição 1232.

[00554] A unidade de controle de exibição 1232 sobrepõe, sob o controle da unidade de controle de gravador 1226, a saída de sinal OSD da unidade de controle OSD (exibição na tela) 1231 na entrada do sinal de vídeo do conversor de exibição 1230 e emite-a para exibição pelo monitor 1260.

[00555] Também a saída de dados de áudio do decodificador de áudio 1224 foi convertida em um sinal analógico usando-se o conversor D/A 1234 e suprida para o monitor 1260. O monitor 1260 emite este sinal de áudio por um altofalante embutido.

[00556] A unidade de gravação e reprodução 1233 inclui um disco rígido como um meio de gravação em que os dados de vídeo, dados de áudio e assim em diante são gravados.

[00557] A unidade de gravação e reprodução 1233 codifica os dados de áudio supridos pelo codificador de áudio 1124 pelo codificador 1251. Também a unidade de gravação e reprodução 1233 codifica os dados de vídeo supridos pelo codificador de vídeo 1241 do conversor de exibição 1230 pelo codificador 1251. A unidade de gravação e reprodução 1233 sintetiza os dados codificados de seus dados de áudio e os dados codificados de seus dados de vídeo empregando o multiplexador. A unidade de gravação e reprodução 1233 amplifica os dados sintetizados por codificação de canal e grava seus dados no disco rígido via uma cabeça de gravação.

[00558] A unidade de gravação e reprodução 1233 reproduz os dados gravados no disco rígido via uma cabeça de reprodução, amplifica e separa em dados de áudio e dados de vídeo utilizando o desmultiplexador. A unidade de gravação e reprodução 1233 decodifica os dados de áudio e os dados de vídeo pelo decodificador 1252 utilizando o formato MPEG. A unidade de gravação e reprodução 1233 converte os dados de áudio decodificados de digital para analógico e emite-os para o altofalante do monitor 1260. Também a unidade de gravação e reprodução 1233 converte os dados de vídeo decodificados de digital para analógico e emite-os para exibição do monitor 1260.

[00559] A unidade de controle de gravador 1226 exibe os últimos dados EPG da memória de dados EPG 1227 com base nas instruções do usuário indicadas pelo sinal infravermelho do controlador remoto, que é recebido via a unidade de recepção 1221, e supre para a unidade de controle OSD 1231. A unidade de controle OSD 1231 gera dados de imagem correspondendo aos dados EPG de entrada e emite-os para a unidade de controle de exibição 1232. A unidade de controle de exibição 1232 emite os dados de vídeo introduzidos pela unidade de controle OSD 1231 para a exibição do monitor 1260. Assim, EPG (guia de programa eletrônico) é exibido no monitor 1260.

[00560] Também o gravador de disco rígido 1200 pode obter vários tipos de dados tais como dados de vídeo, dados de áudio, dados EPG e assim em diante, supridos por outro dispositivo via a rede, tal como a Internet ou similar.

[00561] A unidade de comunicação 1235 é controlada pela unidade de controle de gravador 1226 para obter dados codificados tais como dados de vídeo, dados de áudio, dados EPG e assim em diante, transmitidos de outro dispositivo via a rede, e para suprir estes para a unidade de controle de gravador 1226. A unidade de controle de gravador 1226 supre os dados codificados dos dados de vídeo e dados de áudio obtidos para a unidade de gravação e reprodução 1233 e armazena no disco rígido, por exemplo. Nesta ocasião, a unidade de controle de gravador 1226 e a unidade de gravação e reprodução 1233 podem realizar processamento, tal como recodificação ou similar, de acordo com a necessidade.

[00562] Também a unidade de controle de gravador 1226 decodifica os dados codificados dos dados de vídeo obtidos e dados de áudio e supre os dados de vídeo obtidos para o conversor de exibição 1230. O conversor de exibição 1230 processa, da mesma maneira que os dados de vídeo supridos pelo decodificador de vídeo 1225, os dados de vídeo supridos pela unidade de controle de gravador 1226, supre-os para o monitor 1260 via a unidade de controle de exibição 1232 para exibição de uma sua imagem.

[00563] Alternativamente, um arranjo pode ser feito em que, de acordo com esta exibição de imagem, a unidade de controle de gravador 1226 supre os dados de áudio decodificados para o monitor 1260 via o conversor D/A 1234 e emite seu áudio pelo altofalante.

[00564] Além disso, a unidade de controle de gravador 1226 decodifica os dados codificados dos dados EPG obtidos e supre os dados EPG decodificados para a memória de dados EPG 1227.

[00565] O gravador de disco rígido 1200 assim configurado emprega o dispositivo de decodificação de imagem 200 como o decodificador de vídeo 1225, decodificador 1252 e decodificador alojado na unidade de controle de gravador 1226. Portanto, da mesma maneira que com o dispositivo de decodificação de imagem 200, o decodificador de vídeo 1225, decodificador 1252 e decodificador alojado na unidade de controle de gravador 1226 extraem e decodificam valor de múltiplas fatias de informação de controle adicionado a uma fatia dos dados codificados e realizam ainda apropriado processamento de controle de filtro adaptativo empregando a informação de controle. Como resultado, supressão da deterioração da eficiência de codificação devida ao controle local processamento de filtro pode ser realizada.

[00566] Portanto, o gravador de disco rígido 1200 pode extrair valor de múltiplas fatias de informação de controle adicionado a um cabeçalho de fatia dos dados codificados e, além disso, pode apropriadamente executar processamento de filtro adaptativo que controla a informação. Como resultado, o gravador de disco rígido 1200 pode realizar supressão de deterioração da eficiência de codificação devida ao controle local dos dados de vídeo referentes a processamento de filtro, recebidos via o sintonizador ou unidade de comunicação 1235 e dados de vídeo gravados no disco rígido da unidade de gravação e reprodução 1233, por exemplo.

[00567] Também o gravador de disco rígido 1200 emprega o dispositivo de codificação de imagem 100 como o codificador 1251. Desse modo, da mesma maneira que com o caso do dispositivo de codificação de imagem 100, o codificador 1251 pode realizar supressão de deterioração de eficiência de codificação devida ao controle local do processamento de filtro. Por exemplo, o codificador 1251 adiciona valor de múltiplas fatias de informação de controle adicionada a um cabeçalho de fatia dos dados codificados, desse modo a eficiência de codificação pode ser melhorada quando comparada com um caso de embutir informação de controle em cada fatia.

[00568] Deste modo, o gravador de disco rígido 200 emprega o dispositivo de codificação de imagem 100 como o codificador 1251 e, consequentemente, pode suprimir deterioração da eficiência de codificação devido ao controle local de dados codificados referentes a processamento de filtro gravados no disco rígido, por exemplo. Como resultado, o gravador de disco rígido 1200 pode utilizar a região de armazenagem do disco rígido mais eficientemente em comparação com um caso de embutir informação de controle em cada fatia.

[00569] Observe-se que a descrição foi feita até agora referente ao gravador de disco rígido 1200 para gravar dados de vídeo e dados de áudio no disco rígido, porém é desnecessário dizer que qualquer espécie de meio de gravação pode ser empregado. Por exemplo, mesmocom um gravador a que um meio de gravação que não um disco rígido, tal como uma memória flash, disco óptico, fita de vídeo ou similar é aplicado, o dispositivo de codificação de imagem 100 e dispositivo de decodificação de imagem 200 pode ser aplicado da mesma maneira que com o caso do gravador de disco rígido acima 1200.

<14. Décimo-quarta Forma de Realização> [Câmera]

[00570] A Fig. 49 é um diagrama de blocos ilustrando um exemplo de configuração principal de uma câmera empregando o dispositivo de codificação de imagem e dispositivo de decodificação de imagem a que a presente invenção foi aplicada.

[00571] Uma câmera 1300 mostrada na Fig. 49 imageia um assunto, exibe uma imagem do assunto em um LCD 1316 e grava esta em um meio de gravação 1333 como dados de imagem.

[00572] Um bloco de lente 1311 introduz luz (isto é, imagem de um assunto) em um CCD/CMOS 1312. O CCD/CMOS 1312 é um sensor de imagem empregando um CCD ou CMOS, que converte a intensidade de luz recebida em um sinal elétrico e supre para uma upsc 1313.

[00573] A unidade de processamento de sinal de câmera 1313 converte o sinal elétrico suprido por CCD/CMOS 1312 em sinais de diferença de cor de Y, Cr e Cb e supre para uma unidade de processamento de sinal de imagem 1314. A unidade de processamento de sinal de imagem 1314 submete, sob o controle de um controlador 1321, o sinal de imagem suprido pela unidade de processamento de sinal de câmera 1313 para processamento de imagem predeterminado ou codifica o seu sinal de imagem por um codificador 1341 utilizando o formatoMPEG por exemplo. A unidade de processamento de sinal de imagem 1314 supre os dados codificados gerados codificando um sinal de imagem para um decodificador 1315. Além disso, a unidade de processamento de sinal de imagem 1314 obtém dados para exibição gerados em uma exibição em tela (OSD) 1320 e supre-os para o decodificador 1315.

[00574] Com o acima mencionado processamento, a unidade de processamento de sinal de câmera 1313 apropriadamente aproveita a DRAM (memória de acesso aleatório dinâmica) 1318 conectada via um barramento 1317 para reter os dados de imagem, dados codificados dos seus dados de imagem e assim em diante em sua DRAM 1318 de acordo com a necessidade.

[00575] O decodificador 1315 decodifica os dados codificados supridos pela unidade de processamento de sinal de imagem 1314 e supre os dados de imagem obtidos (dados de imagem decodificados) para o LCD 1316. Também o decodificador 1315 supre os dados para exibição supridos pela unidade de processamento de sinal de imagem 1314 para o LCD 1316. O LCD 1316 sintetiza a imagem dos dados de imagem decodificados e a imagem dos dados para exibição supridos pelo decodificador 1315, como apropriado e exibe uma sua imagem de sintetização.

[00576] A exibição em-tela 1320 emite, sob o controle do controlador 1321, dados para exibição,tais como uma tela ou ícone de menu ou similar composto de um símbolo, caracteres ou uma figura para a unidade de processamento de sinal de imagem 1314 via o barramento 1317.

[00577] Com base em um sinal indicando o conteúdo comandado pelo usuário usando uma unidade operacional 1322, o controlador 1321, executa vários tipos de processamento e também controla a unidade de processamento de sinal de imagem 1314, a DRAM 1318, a interface externa 1319, exibição em-tela 1320, unidade de mídia 1323 e assim em diante via o barramento 1317. Um programa, dados e assim em diante, necessários para o controlador 1321 executar vários tipos de processamento são armazenados na ROM FLASH 1324.

[00578] Por exemplo, o controlador 1321 pode codificar os dados de imagem armazenados na DRAM 1318 ou decodificar dados codificados armazenados na DRAM 1318, em vez de na unidade de processamento de sinal de imagem 1314 e decodificador 1315. Nesta ocasião, o controlador 1321 pode realizar processamento de codificação e decodificação usando o mesmo formato que o formato de codificação e decodificação da unidade de processamento de sinal de imagem 1314 e decodificador 1315 ou pode realizar processamento de codificação e decodificação usando um formato que a unidade de processamento de sinal de imagem 1314 nem o decodificador 1315 podem manusear.

[00579] Também, por exemplo, no evento de que o início da impressão de imagem tenha sido instruído pela unidade operacional 1322, o controlador 1321 exibe dados de imagem da DRAM 1318 e supre estes para uma impressora 1334 conectada à interface externa 1319 via o barramento 1317 para impressão.

[00580] Além disso, por exemplo, no evento de que a gravação de imagem tenha sido instruída pela unidade operacional 1322, o controlador 1321 exibe dados codificados da DRAM 1318 e supre-os para um meio de gravação 1333 montado na unidade de mídia 1323 via o barramento 1317 para armazenagem.

[00581] O meio de gravação 1333 é um meio removível legível/gravável, por exemplo, tal como um disco magnético, um disco magneto-óptico, um disco óptico, memória semicondutora ou similar. Não é necessário dizer que o meio de gravação 1333 é também opcional com referência ao tipo de um meio removível e, consequentemente, pode ser um dispositivo de fita ou pode ser um disco, ou pode ser um cartão de memória. Não é preciso dizer que o meio de gravação 1333 pode ser um cartão IC de não-contato ou similar.

[00582] Alternativamente, a unidade de mídia 1323 e o meio de gravação 1333 podem ser configurados a fim de serem integrados em um meio de gravação de não-transportabilidade, por exemplo, tal como uma unidade de disco rígido embutido, SSD (unidade de estado sólido) ou similar.

[00583] A interface externa 1319 é configurada de, por exemplo, um terminal de entrada/saída USB e assim em diante e é conectado à impressora 1334 no evento de realizar impressão de uma imagem. Também, uma unidade 1331 é conectada á interface externa 1319 de acordo com a necessidade, sobre a qual o meio removível 1332 tal como um disco magnético, disco óptico ou disco magneto-óptico é fixado como apropriado, e um programa de computador exibido dela é instalado na ROM FLASH 1324 de acordo com a necessidade.

[00584] Além disso, a interface externa 1319 inclui uma interface de rede a ser conectada a uma rede predeterminada, tal como uma LAN, a Internet ou similar. Por exemplo, de acordo com as instruções da unidade operacional 1322, o controlador 1321 pode exibir dados codificados pela DRAM 1318 e supri-los pela interface externa 1319 para outro dispositivo conectado via a rede. Também o controlador 1321 pode obter, via a interface externa 1319, dados codificados ou dados de imagem supridos por outro dispositivo via a rede, e retê-los na DRAM 1318, ou supri-los à unidade de processamento de sinal de imagem 1314.

[00585] A câmera 1300 assim configurada emprega o dispositivo de decodificação de imagem 200 como o decodificador 1315. Consequentemente, da mesma maneira como com o dispositivo de decodificação de imagem 200, o decodificador 1315 pode extrair múltiplas fatias de informação de controle adicionadas a um cabeçalho de fatia dos dados codificados e pode ainda apropriadamente executar processamento de filtro adaptativo usando aquela informação de controle. Como resultado, supressão de deterioração da eficiência de codificação devida ao controlo local do processamento de filtro pode ser realizada.

[00586] Deste modo, a câmera 1300 pode extrair múltiplas fatias de informação de controle adicionada em um cabeçalho de fatia dos dados codificados e pode ainda apropriadamente executar processamento de filtro adaptativo usando aquela informação de controle. Como resultado, o gravador de disco rígido 1200 pode realizar supressão de deterioração de eficiência de codificação devida ao controle local de processamento de filtro referente aos dados de imagem gerados no CCD/CMOS 1312, dados codificados de dados de vídeo exibidos pela DRAM 1318 ou meio de gravação 1333 e dados codificados de dados de vídeo obtidos via uma rede.

[00587] Também a câmera 1330 emprega o dispositivo de codificação de imagem 100 como o codificador 1341. Por conseguinte, da mesma maneira que com o caso do dispositivo de codificação de imagem 100, o codificador 1341 pode suprimir deterioração de eficiência de codificação devida ao controle local de processamento de filtro. Por exemplo, múltiplas fatias de informação de controle adicionadas a um cabeçalho de fatia dos dados codificados são adicionadas, de modo que a eficiência de codificação pode ser melhorada em comparação com um caso de embutir informação de controle em cada fatia.

[00588] Consequentemente, a câmera 1300 pode suprimir deterioração de eficiência de codificação devida ao controle local do processamento de filtro referente aos dados codificados na DRAM 1318 ou meio de gravação 1333 ou dados codificados a serem providos a outros dispositivos, por exemplo. Como resultado, a câmera 1300 pode usar a região de armazenagem da DRAM 1318 ou o meio de gravação 1333 mais eficientemente. Também a câmera 1300 pode prover dados codificados (dados de imagem) com boa eficiência de codificação para outros dispositivos.

[00589] Observe-se que o método de codificação do dispositivo de decodificação de imagem 200 pode ser aplicado ao processamento de decodificação que o controlador 1321 realiza. Da mesma maneira, o método de codificação do dispositivo de codificação de imagem 100 pode ser aplicado ao processamento de codificação que o controlador 1321 realiza.

[00590] Também os dados de imagem que a câmera 1300 obtém podem ser imagens móveis ou podem ser imagens estáticas.

[00591] Como é de esperar, o dispositivo de codificação de imagem 100 e o dispositivo de decodificação de imagem 200 podem ser aplicados a dispositivos ou sistemas que não os dispositivos acima descritos.

[00592] Também o tamanho dos macroblocos não é restrito a 16 x 16 pixéis. A aplicação pode ser feita a macroblocos de vários tamanhos, tais como aquele de 32 x 32 pixéis mostrados na Fig. 51, por exemplo.

[00593] Embora a descrição tenha sido feita acima com informação de sinalizador e similares sendo multiplexada (descrita) no fluxo de bits, os sinalizadores e os dados de imagem (ou fluxo de bits) podem ser transmitidos (gravados), por exemplo, além de serem multiplexados. Uma forma pode ser feita em que os dados de sinalizador e de imagem (ou fluxo de bits) são ligados (adicionados) também.

[00594] Ligação (adição) indica um estado em que os dados de imagem (ou fluxos de bits) e sinalizadores são mutuamente ligados (um estado correlacionado) e a relação posicional física é arbitrária. Por exemplo, os dados de imagem (ou fluxo de bits) e sinalizadores podem ser transmitidos através de trajetos de transmissão separados. Também os dados de imagem (ou fluxo de bits) e sinalizadores podem ser gravados em meios de gravação (ou em áreas de gravação separadas dentro do mesmo meio de gravação). Observe-se que os incrementos em que os dados de imagem (ou fluxos de bit) e sinalizadores são ligados são opcionais e podem ser estabelecidos em incrementos de processamento de codificação (um quadro, múltiplos quadros etc.), por exemplo.

Lista de Sinais de Referência

[00595] 100 dispositivo de codificação de imagem 112 unidade de geração de informação de controle 113 unidade de controle de filtro adaptativa 132 unidade de geração de informação de bloco 141 unidade identificadora de região de fatia de objeto de processamento 142 unidade de ajuste de bloco ALF 143 unidade de identificação de região de bloco ALF de objeto de processamento 144 unidade de determinação 145 unidade geradora de sinalizador de bloco de filtro 171 unidade de controle 172 filtro adaptativo 173 unidade de seleção 181 unidade de codificação 182 unidade de retenção de dados codificados 183 unidade de retenção de informação de controle 184 unidade de adição de informação de controle 200 dispositivo de decodificação de imagem 202 unidade de decodificação sem perda 207 unidade de processamento de filtro adaptativa 221 unidade de extração de informação de controle 222 unidade de decodificação 223 unidade de retenção de dados decodificados 251 unidade de codificação 261 unidade de análise de cabeçalho 281 unidade de adição de informação de controle 291 unidade de adição de sinalizador 292 unidade de adição de tamanho de bloco 293 unidade de adição de coeficiente de filtro 301 unidade de extração de informação de controle 311 unidade de extração de sinalizador 312 unidade de extração de tamanho de bloco 313 unidade de extração de coeficiente de filtro

Claims

1. Dispositivo de processamento de imagem, caracterizado pelo fato de compreender: circuito configurado para: decodificar dados codificados, incluindo informação de controle de filtro que representam respectivos controles de filtro de cada uma de uma pluralidade de fatias formadas dentro de um quadro para gerar uma imagem; e aplicar um filtro à pluralidade de fatias da imagem de acordo com a informação de controle de filtro, em que a informação de controle de filtro, que representa os respectivos controles de filtro de todas as fatias da pluralidade de fatias, é incluída como sintaxe dos dados codificados em um cabeçalho de fatia de apenas uma fatia da pluralidade de fatias, em que a informação de controle de filtro inclui um coeficiente de filtro para processamento de filtro na imagem com base na informação de controle de filtro, um tamanho de bloco indicando um tamanho de uma região de um bloco, e um sinalizador indicando se é para executar o processamento de filtro para cada região do bloco.

2. Dispositivo de processamento de imagem de acordo com a reivindicação 1, caracterizadopelo fato de que a informação de controle de filtro é definida para o cabeçalho de fatia da uma fatia da pluralidade de fatias, que corresponde a um incremento de dados dos dados codificados do quadro, o incremento de dados sendo um incremento de dados do quadro que é transmitido primeiro.

3. Dispositivo de processamento de imagem de acordo com a reivindicação 1, caracterizadopelo fato de que a informação de controle de filtro é definida para o cabeçalho da fatia de apenas uma fatia da pluralidade de fatias que é um incremento de dados situado no início dos dados codificados do quadro.

4. Dispositivo de processamento de imagem de acordo com a reivindicação 1, caracterizadopelo fato de em que a informação de controle de filtro é definida para o cabeçalho da fatia como um ponteiro indicando uma posição da informação de controle de filtro nos dados codificados.

5. Dispositivo de processamento de imagem de acordo com a reivindicação 1, caracterizadopelo fato de que um tamanho dos respectivos incrementos de dados é um tamanho das respectivas fatias da pluralidade das fatias que formam o quadro.

6. Dispositivo de processamento de imagem de acordo com a reivindicação 1, caracterizadopelo fato de que o circuito é ainda configurado para gerar a informação de controle de filtro para controlar o primeiro processamento de filtro realizado para cada fatia da pluralidade de fatias.

7. Dispositivo de processamento de imagem de acordo com a reivindicação 6, caracterizadopelo fato de o circuito é ainda configurado para executar o segundo processamento de filtro em uma imagem decodificada localmente ao executar um processo de codificação com base na informação de controle do filtro.

8. Método de processamento de imagem, caracterizadopelo fato de que compreende: dividir, por circuito, um quadro de uma imagem em uma pluralidade de fatias, gerando, pelo circuito, informação de controle de filtro representando os respectivos controles de filtro de cada uma da pluralidade de fatias formadas dentro do quadro da imagem; e codificar, pelo circuito, a imagem para gerar dados codificados incluindo a informação de controle de filtro, em que a informação de controle de filtro, que representa os respectivos controles de filtro de todas as fatias da pluralidade de fatias, é incluída como sintaxe dos dados codificados em um cabeçalho de fatia de apenas uma fatia da pluralidade de fatias, em que a informação de controle de filtro inclui um coeficiente de filtro para processamento de filtro na imagem com base na informação de controle de filtro, um tamanho de bloco indicando o tamanho de uma região de um bloco, e um sinalizador indicando se é para executar o processamento de filtro para cada região do bloco.

9. Método de processamento de imagem, de acordo com a reivindicação 8, caracterizadopelo fato de compreender ainda a exclusão de partes redundantes da informação de controle de filtro no cabeçalho da fatia de uma fatia da pluralidade de fatias.