BRPI0304528B1 - Method and apparatus for image coding and method and apparatus for image decoding - Google Patents
Method and apparatus for image coding and method and apparatus for image decoding Download PDFInfo
- Publication number
- BRPI0304528B1 BRPI0304528B1 BRPI0304528B1 BR PI0304528 B1 BRPI0304528 B1 BR PI0304528B1 BR PI0304528 B1 BRPI0304528 B1 BR PI0304528B1
- Authority
- BR
- Brazil
- Prior art keywords
- image
- images
- encoded
- memory
- information
- Prior art date
Links
- 230000015654 memory Effects 0.000 claims description 223
- 238000000605 extraction Methods 0.000 claims 3
- 239000000284 extract Substances 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 30
- 238000000034 method Methods 0.000 description 21
- 238000004891 communication Methods 0.000 description 14
- 230000005540 biological transmission Effects 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 9
- 230000000875 corresponding Effects 0.000 description 9
- 239000000203 mixture Substances 0.000 description 7
- 238000007906 compression Methods 0.000 description 6
- 238000001228 spectrum Methods 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 4
- 229920001690 polydopamine Polymers 0.000 description 4
- 230000001131 transforming Effects 0.000 description 4
- 238000009792 diffusion process Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000003287 optical Effects 0.000 description 2
- 230000001360 synchronised Effects 0.000 description 2
- 101700080201 SC29 Proteins 0.000 description 1
- 229910000831 Steel Inorganic materials 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006011 modification reaction Methods 0.000 description 1
- 230000000750 progressive Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 230000001960 triggered Effects 0.000 description 1
Description
Relatório Descritivo da Patente de Invenção para "WIÉTODO E APARELHO DE CODIFICAÇÃO DE IMAGEM E MÉTODO E APARELHO DE DECODIFICAÇÃO DE IMAGEM".
Campo Técnico A presente invenção refere-se a um método de codificação de imagem para de forma eficiente compactar sinais de imagem em movimento utilizando a correlação entre as imagens, a um método de decodificação de imagem para decodificar os sinais corretamente e um meio de gravação com um programa para executar estes métodos utilizando software. Técnica Anterior Recentemente, surgiu a era da multimídia, na qual som, imagens e outros valores de pixel são integrados em um meio, e o meio de informação convencional como as ferramentas de comunicação como jornais, revistas, TV, rádio e telefone são considerados como alvos da multimídia. Geralmente, a multimídia é uma forma de representação simultânea não somente de caracteres mas também de gráficos, som e especialmente imagens. De modo a manipular o meio de informação convencional mencionado acima como multimídia, é um requisito representar a informação de forma digital.
Entretanto, é irreal diretamente processar uma gigantesca quantidade de informação de forma digital utilizando o meio de informação convencional mencionado acima porque, quando calculando-se a quantidade de dados de cada meio de informação mencionado acima como quantidade de dados digitais, a quantidade de dados por caracter é 1 até 2 bytes enquanto que a do som por segundo não é menor do que 64 kbits (qualidade de fala do telefone) e que as imagens em movimento por segundo não é menor do que 100 Mbits (qualidade de recepção de TV atual). Por exemplo, um telefone TV já tornou-se comercialmente prático graças à Rede Digital de Serviço Integrado (ISDN) com uma velocidade de transmissão de 64 kbps até 1,5 Mbps, mas é impossível transmitir imagens de uma câmara de TV à medida que elas estão utilizando a ISDN.
Isto é porque a técnica de compactação de informação é ne- cessária. Por exemplo, a tecnologia de compactação de imagem em movimento do padrão H.261 ou H.263 internacionalmente padronizado pela International Telecommunication Union Telecommunication Standardization Sector (ITU-T) é utilizada para telefones TV. Além disso, é possível armazenar informação de imagem com informação de som nos discos compactos (CDs) de mísica comum utilizando a técnica de compactação de informação do padrão MPEG-1.
Aqui, o Moving Picture Experts Group (MPEG) é um padrão internacional para de forma digital compactar sinais de imagem em movimento e o MPEG-1 é o padrão para compactar sinais de imagem em movimento para 1,5 Mbps, ou seja, compactar informação de sinal de TV para cerca de um centésimo. Além disso, a qualidade que satisfaz o padrão MPEG-1 é nível médio que pode ser realizado em uma taxa de transmissão de cerca de 1,5 Mbps. O MPEG-2 é assim padronizado de modo a satisfazer a necessidade por qualidade mais elevada da imagem, e ele compacta os sinais de imagem em movimento para 2 até 15 Mbps.
Atualmente, o grupo de trabalho (ISO/IECJTC1/SC29/WG11) que padronizou o MPEG-1 e o MPEG-2, tem padronizado o MPEG-4 com uma taxa de compactação mais elevada. O MPEG-4 introduziu não somente a codificação eficiente em uma baixa taxa de bits, mas também uma tecnologia poderosa de resistência a erro que minimiza a deterioração subjetiva da imagem no caso de um erro de transmissão ocorrer. Além disso, como um sistema de codificação de imagem para as próximas gerações, ISO/IEC e ITU-T estão juntamente trabalhando para a padronização do Joint Video Team (JVT). Atualmente, o padrão chamado Joint model 2 (JM2) é a versão mais recente. A imagem para a codificação por intropredição sem qualquer imagem de referência é chamada de Imagem Intracodifiçada (Imagem I). Além disso, a imagem para a codificação por interpredição com uma imagem de referência é chamada de Imagem Intercodificado (Imagem P). Além disso, a imagem para a codificação por interpredição na qual duas imagens de referência são referidas simultaneamente é chamada Imagem Codificada por Bipredição (Imagem B). ' "Imagem" utilizada aqui é um termo representando uma imagem.
Em uma imagem progressiva, uma imagem significa um quadro, mas em uma imagem entrelaçada, ela significa um quadro ou um campo. Uma "imagem entrelaçada" mencionada aqui significa um quadro composto de dois campos com um ligeiro atraso de tempo. Nos processos de codificação e de decodificação de imagens entrelaçadas, é possível processar um quadro como ele é, como dois campos, ou por cada bloco no quadro em uma estrutura quadro por quadro ou em uma estrutura campo por campo.
No JVT, é possível escolher uma imagem arbitrária como uma imagem de referência à frente a partir de uma pluralidade de imagens, diferente da codificação de imagem em movimento convencional. Além disso, um sistema para trocar os fluxos de bits codificados em imagens específicas, ou seja, Imagens Codificadas por Troca (Imagens S) foi introduzido. (Existem imagens SI e imagens SP nas imagens S e estas são as imagens para a codificação por intropredição ou para a codificação por interpredição, respectivamente). O sistema de imagem S é para garantir que os fluxos após as Imagens S possam ser decodificados corretamente no caso de troca do fluxo para o fluxo logo antes das imagens S. Além disso, é possível trocar fluxos em um servidor, tal como um servidor de distribuição de imagem em movimento de acordo com a capacidade de comunicação dos terminais de recepção ou com a preferência dos receptores.
No método de codificação de imagem ou no método de decodificação de imagem convencional, as imagens S são introduzidas de modo que (1) elas possam escolher uma imagem arbitrária como uma imagem de referência à frente a partir de uma pluralidade de imagens e (2) elas também podem trocar imagens em imagens específicas. A despeito da introdução destas duas técnicas, lamentavelmente, os problemas que ocorrem quando estas duas técnicas são combinadas ainda não foram bem considerados. Na realidade, é difícil utilizar ambas técnicas juntas por causa dos problemas apresentados abaixo. A Figura 1 é uma ilustração apresentando as relações entre as imagens e os números de imagem (PN) quando codificando-se um sinal de imagem de entrada (VIN). O mesmo sinal de imagem é codificado em taxas de imagem diferentes (o número de imagens por segundo) para formar os Fluxos 1, 2 e 3. O números de imagem (PN) são números para identificar as imagens codificadas. No JM2, as imagens a serem referidas como imagens de referência na codificação seguinte são designadas com números incrementados de 1. Para simplificar a explicação, o exemplo da figura 1 apresenta somente o caso em que todas as imagens em cada fluxo são referidas como imagens de referência na codificação seguinte e os números de imagem são sempre incrementandos de 1. As imagens que não são referidas na codificação seguinte não estão relacionadas com o aumento ou diminuição nos números de imagem e não são armazenadas em uma memória. Portanto, a explicação em relação às imagens que não são referidas na codificação seguinte é omitida porque as imagens não estão relacionadas com a explicação seguinte das operações.
Como apresentado na figura 1, no momento t3, as imagens diagonalmente sombreadas são codificadas como imagens S. A figura 2 é um diagrama apresentando os números de imagem (PN) das imagens a serem armazenadas na memória de imagem de referência quando codificando-se ou decodificando-se imagens S. A figura 2 apresenta imagens armazenadas na memória de imagem de referência (Mem) e suas posições. Na memória de imagem de referência (Mem), as imagens na posição esquerda são mais recentes no tempo do que as imagens na posição direita. Na hora da codificação por predição, as mesmas imagens devem ser referidas ao se codificar e decodificar. Quando é possível escolher cada imagem de referência a partir de uma pluralidade de imagens de referência como no JM2, é necessário especificar que imagens são referidas.
Existem dois métodos seguintes para apresentar as imagens de referência e o JM2 utiliza os dois métodos de forma apropriada de acordo com os propósitos. 1) Claramente expressar quantas imagens existem antes de uma imagem mais recente, 2) Claramente expressar uma imagem de referência por um número de imagem (PN).
De modo a corretamente codificar as imagens S e as imagens seguintes e para decodificar estas imagens corretamente na hora da deco-dificação quando trocando os fluxos nas imagens S, o conteúdo da memória de imagem de referência (Mem) deve ser o mesmo em cada caso de troca de fluxos nas imagens S.
Entretanto, como apresentado na ilustração da figura 2 apresentando os números de imagem (PN) de imagens a serem armazenadas na memória de imagem de referência (Mem), o conteúdo da memória de imagem de referência (Mem) não é o mesmo no início da codificação ou da de-codificação de uma imagem S em cada fluxo. A não ser que tal método convencional seja aperfeiçoado, é impossível utilizar o método de codificação para escolher imagens de referência a partir da memória de imagem de referência (Mem) em combinação com o sistema de imagem S para trocar fluxos. A presente invenção visa resolver todos os problemas mencionados acima, tornando o sistema de imagem S utilizável em combinação com outro método de codificação para escolher imagens de referência na memória de imagem de referência (Mem) e assim proporcionando métodos de codificação e de decodificação de imagem que aperfeiçoam as taxas de compactação no método de codificação combinado mencionado acima utilizando imagens S.
Descrição da Invenção De modo a resolver este problema, a primeira invenção é um método de codificação de imagem para especificar uma imagem de referência armazenada em uma memória utilizando um número de imagem para referência e gerar um fluxo codificado de imagens em movimento, o método de codificação de imagem compreendendo uma etapa de codificação de número de imagem para codificar núme- ros de imagem correspondendo às imagens correntes, uma etapa de codificação para codificar as imagens correntes, uma etapa de tornar todas as imagens armazenadas na memória, exceto as imagens correntes liberadas para referência após a etapa de codificação de imagem, uma etapa de inicialização de número de imagem para inicializar os números de imagem das imagens correntes na memória e uma etapa de codificação de informação de liberação de todas as imagens para codificar todas as informações de liberação de imagem para instruir um aparelho de decodificação de imagem para liberar todas as imagens que já foram armazenadas na memória, exceto as imagens correntes. A segunda invenção é um método de decodificação de imagem para especificar uma imagem de referência armazenada em uma memória utilizando um número de imagem para referência e decodificar o fluxo codificado de imagens em movimento, o método de decodificação de imagem compreendendo uma etapa de decodificação da informação de liberação de todas as imagens para verificar e decodificar uma informação de liberação de todas as imagens significando liberar todas as imagens em um fluxo codificado armazenado em uma memória, exceto as imagens correntes a serem decodificadas, uma etapa de decodificação para decodificar as imagens correntes no fluxo codificado, uma etapa para liberar todas as imagens armazenadas na memória, exceto as imagens correntes de acordo com a informação de liberação de todas as imagens decodificadas após a etapa de decodificação e uma etapa de inicialização de número de imagem para designar um número de imagem inicializado para a imagem corrente na memória. A terceira invenção é um método de codificação de imagem para codificar uma pluralidade de sinais de imagem e gerar sinais codificados correspondendo às respectivas imagens, onde uma imagem de troca capaz de trocar uma pluralidade de sinais codificados e as imagens seguintes da imagem de troca podem referir-se à somente um grupo de imagens do mesmo tempo nos sinais codificados. A quarta invenção é um método de decodificação de imagem para decodificar um sinal codificado, onde a informação em relação às imagens liberadas para referência antes de uma imagem de troca que pode ser trocada é decodificada, as imagens decodificadas em uma memória de imagem de referência são liberadas baseado no resultado da decodificação e após a imagem de troca, um sinal codificado é decodificado referindo-se a uma imagem de referência que não está liberada. A quinta invenção é um método de codificação de imagem para codificar uma pluralidade de sinais de imagem e gerar sinais codificados correspondendo às respectivas imagens, onde o método de codificação de imagem possui uma etapa de alterar um número de imagem de uma imagem de troca capaz de trocar uma pluralidade de sinais codificados para o mesmo valor no respectivo sinal dos sinais codificados. A sexta invenção é um método de decodificação de imagem para decodificar um sinal codificado compreendendo, uma etapa para alterar um número de imagem de uma imagem de referência para o mesmo valor em um sinal codificado que pode ser trocado no momento de trocar os sinais codificados em uma imagem de troca que pode ser trocada.
Como mencionado acima, com o método de codificação de imagem e com o método de decodificação de imagem na presente invenção, é possível utilizar o aspecto das imagens S e um método de codificação para escolher uma imagem de referência em uma memória de imagem de referência em combinação, o que torna possível proporcionar um método de codificação de imagem e um método de decodificação de imagem para aperfeiçoar as taxas de compactação mesmo quando utilizando-se imagens S no método de codificação e assim estes métodos são altamente práticos. Breve Descrição dos Desenhos A figura 1 é uma ilustração das relações entre as imagens e os números de imagem (PN) quando codificando um sinal de imagem de entrada (Vin). A figura 2 é uma diagrama apresentando os números de imagem (PN) de imagens a serem armazenadas em uma memória de imagem de referência (Mem) quando codificando e decodificando imagens S. A figura 3 é uma ilustração de números de imagem (PN) de imagens a serem armazenadas na memória de imagem de referência (Mem).
As figuras 4A, 4B e 4C são fluxogramas de como codificar e decodificar informação ao se controlar as imagens a serem armazenadas na memória de imagem de referência (Mem) no método de codificação de imagem e no método de decodificação de imagem da presente invenção.
As figuras 5A e 5B são ilustrações de números de imagem (PN) das imagens a serem armazenadas na memória de imagem de referência (Mem).
As figuras 6A, 6B e 6C são fluxogramas de como codificar e decodificar informação em relação a controlar as imagens a serem armazenadas na memória de imagem de referência (Mem) no método de codificação de imagem e no método de decodificação de imagem da presente invenção. A figura 7 é uma ilustração da relação entre as imagens e os números de imagem (PN) quando codificando o sinal de imagem de entrada (Vin) da presente invenção.
As figuras 8A e 8B são fluxogramas de como decodificar informação ao se controlar as imagens a serem armazenadas na memória de imagem de referência (Mem) no método de decodificação de imagem da presente invenção. A figura 9 é um diagrama de blocos apresentando a estrutura do aparelho de codificação de imagem da presente invenção.
As figuras 10A, 10B, 10C e 10D são diagramas apresentando os exemplos de estruturas de dados de sinais codificados, Str da presente invenção. A figura 11 é um diagrama de blocos apresentando a estrutura de uma aparelho de decodificação de imagem da presente invenção. A figura 12 é uma ilustração da relação entre as imagens e os números de imagem (PN) para codificar um sinal de imagem de entrada (Vin) da presente invenção. A figura 13 é um fluxograma apresentando um método de codificação por fornecer um número de imagem para cada imagem de cada fluxo na presente invenção. A figura 14 é um fluxograma apresentando um método de deco-dificação em uma sétima modalidade. A figura 15 é um diagrama apresentando uma estrutura de memória na sétima modalidade.
As figuras 16A e 16B são fluxogramas apresentando um método de codificação na sétima modalidade.
As figuras 17A e 17B são fluxogramas apresentando outro método de codificação na sétima modalidade. A figura 18 é um fluxograma apresentando outro método de codificação na sétima modalidade. A figura 19 é um diagrama de blocos apresentando uma estrutura de um aparelho de codificação em uma oitava modalidade. A figura 20 é um diagrama de blocos apresentando uma estrutura de outro aparelho de codificação na oitava modalidade.
As figuras 21A e 21B são fluxogramas apresentando um método de decodificação em uma décima modalidade. A figura 22 é um diagrama de blocos apresentando uma estrutura de um aparelho de decodificação em uma décima primeira modalidade.
As figuras 23A e 23B são fluxogramas apresentando o processamento para formar os sinais codificados e decodificar os sinais codificados. A figura 24 é um diagrama de blocos apresentando uma estrutura de um aparelho de codificação de imagem realizando um método de codificação em uma décima segunda modalidade. A figura 25 é um diagrama de blocos apresentando uma estrutura de um aparelho de decodificação de imagem realizando o método de decodificação na décima segunda modalidade. A figura 26 é uma ilustração em relação a um meio de gravação armazenando um programa para realizar os métodos de codificação de imagem e os métodos de decodificação de imagem na primeira até a décima segunda modalidades utilizando um sistema de computador. A figura 27 é um diagrama de blocos apresentando a estrutura como um todo de um sistema de suprimento de conteúdo realizando um serviço de distribuição de conteúdo com respeito à presente invenção. A figura 28 é um diagrama apresentando um exemplo de telefones celulares relacionados com a presente invenção. A figura 29 é um diagrama de bloco apresentando a estrutura dos mesmos telefones celulares, e A figura 30 é um diagrama apresentando a estrutura de um sistema de difusão digital com respeito à presente invenção.
Melhor Modo para Realizar a Invenção As presentes modalidades da presente invenção serão explicadas abaixo com referência aos desenhos 3 até 30. (Primeira Modalidade) A figura 3 é uma ilustração apresentando os números de imagem (PN) das imagens a serem armazenadas na memória de imagem de referência (Mem). A diferença entre a mesma figura e a figura 2 apresentando os números de imagem (PN) de imagens a serem armazenadas na memória de imagem de referência (Mem) será explicada abaixo. Já foi explicado que, após trocar os sinais codificados quando codificando e decodificando imagens S, o conteúdo da memória de imagem de referência (Mem) não é o mesmo. Portanto, nos métodos de codificação e de decodificação da presente invenção na figura 1 apresentando as relações de imagens e de seus números de imagem (PN) quando codificando o sinal de imagem de entrada (Vin), somente imagens nos tempos tO, t1 e t2 que são exatamente as mesmas respectivamente em todos os fluxos são armazenadas na memória de imagem de referência (Mem), enquanto as outras imagens são apagadas na memória de imagem de referência (Mem) antes da codificação e da decodificação de imagens S. A figura 3 apresenta o resultado deste processamento como uma ilustração apresentando os números de imagem (PN) das imagens a serem armazenadas na memória de imagem de referência (Mem).
Como apresentado na figura 3 explicando os números de ima- gem de imagens a serem armazenadas na memória de imagem de referência (Mem), quando o método de "Claramente expressar quantas imagens existem antes de uma imagem mais recente" é empregado para especificar as imagens de referência na codificação e na decodificação, é possível codificar e decodificar as imagens corretamente porque exatamente as mesmas imagens do mesmo tempo são referidas em qualquer caso do fluxo 1,2 ou 3. A figura 4 é um fluxograma apresentando os métodos de codificação e de decodificação de informação com respeito ao controle de imagem de imagens a serem armazenadas na memória de imagem de referência (Mem) nos métodos de codificação e de decodificação de imagem da presente invenção. A figura 4A é um fluxograma do método de codificação que apresenta como realizar o método da operação explicado na figura 3, e os métodos de codificação e de decodificação da informação necessária para realizar a operação.
Na Etapa 0, as imagens nos mesmos pontos de tempo em uma pluralidade de informação de codificação (fluxos) são escolhidas. Na Etapa 1, é possível codificar a informação de apagar apresentando a deleção das outras imagens que não são escolhidas na Etapa 0. Na Etapa 2, as imagens que não são escolhidas na Etapa 0 são apagadas da memória de imagem de referência (Mem). Até este ponto, como apresentado na figura 3, é possível perceber a condição de armazenamento na memória de imagem de referência (Mem) para perceber os fluxos que podem ser decodificados mesmo após trocar os sinais codificados.
Além disso, é possível alterar a ordem das Etapas 1 e 2, e se ela for alterada, o fluxograma do método de codificação de imagem apresentado na figura 4B é utilizado.
Decodificar a informação de deleção codificada de acordo com o método de codificação apresentado como o fluxograma na figura 4A utilizando o método de decodificação apresentado como o fluxograma na figura 4C torna possível perceber uma condição de armazenamento da memória de imagem de referência (Mem) para perceber os fluxos que podem ser decodificados utilizando o método de decodificação de imagem mesmo após trocar os sinais codificados como apresentado na figura 3.
Por decodificar a informação de deleção na Etapa 5, é possível apresentar imagens que não são imagens do mesmo tempo em uma pluralidade de informação de codificação (fluxos). Estas imagens são o resto das imagens escolhidas na Etapa 0 da figura 4A como imagens do mesmo tempo. A seguir, na Etapa 6, as imagens escolhidas na Etapa 5 são apagadas na memória de imagem de referência (Mem). Especificamente, quando imagens armazenadas na memória de imagem de referência (Mem) são deleta-das (ou apagadas), imagens a serem deletadas são designadas com IDs (informação de identificação) tal como "liberação" proibindo de utilizar imagens com respeito às imagens de referência. Para este propósito, a unidade de decodificação de imagem (PicDec) e a unidade de codificação de imagem (PicEnc) sempre verificam se os IDs de "liberação" estão designados ou não, cada vez que estas unidades referem-se às imagens armazenadas na memória de imagem de referência (Mem). Somente imagens que não são designadas com os IDs de "liberação" são referidas por estas unidades enquanto as imagens designadas com os IDs de "liberação" não são referidas por estas unidades. Da mesma forma, as imagens na memória de imagem de referência (Mem) são deletadas (ou apagadas) nas modalidades seguintes. Obviamente, a medida que este método de deleção é um exemplo, não é necessário dizer que é possível deletar os dados de imagem mencionados acima na memória de imagem de referência (Mem) por realmente deletar ou apagar estes dados. Até este ponto, é possível perceber a condição de armazenamento na memória de imagem de referência (Mem) para perceber os fluxos que podem ser decodificados mesmo após a troca dos sinais codificados como apresentado na figura 3. (Segunda Modalidade) A figura 5A é uma ilustração apresentando os números de imagem (PN) de imagens a serem armazenadas na memória de imagem de referência (Mem). A diferença entre as figuras 5A e 3 apresentando os núme- ros de imagem (PN) das imagens a serem armazenadas na memória de imagem de referência (Mem) é se os números de imagem (PN) na memória de imagem de referência (Mem) são os mesmos ou não.
Como não somente os tempos das imagens armazenadas na memória de imagem de referência (Mem),mas também os números de imagem (PN) em cada fluxo na memória de imagem de referência (Mem) são os mesmos no quadro de tempo, é possível utilizar o método de "Claramente expressar as imagens de referência pelos números de imagem (PN)" quando especificando as imagens de referência na codificação e na decodifica-ção e assim torna-se possível codificar e decodificar as imagens corretamente porque exatamente as mesmas imagens do mesmo tempo são referidas em qualquer caso do fluxo 1, 2 ou 3. É possível perceber isto quando substituindo os números de imagem das imagens armazenadas na memória de imagem de referência (Mem) com um novo mesmo número de imagem e codificar e decodificar a informação para substituir os números de imagem antigos pelo novo número de imagem antes de codificar e decodificar as imagens S.
Em adição, existe uma necessidade de associar os números de imagem (PN) de imagens sem qualquer um dos fluxos porque o mesmo número de imagem (PN) deve ser utilizado quando armazenando imagens S na próxima vez. A figura 6 é um fluxograma apresentando os métodos de codificação e de decodificação de informação para controlar as imagens a serem armazenadas na memória de imagem de referência (Mem) de acordo com os métodos de codificação e de decodificação de imagem da presente invenção e apresenta os métodos de realização da operação explicada na figura 5A e os métodos de codificação e de decodificação de informação necessária para a realização.
Na Etapa 10, o valor máximo dos números de imagem (PN) ("8" no exemplo da figura 5A) de imagens nos sinais codificados para serem trocadas na memória de referência (Mem) é detectado. Na Etapa 12, a informação para designar de novo números de imagem (PN) de cada imagem armazenada na memória de imagem de referência (Mem) é codificada com referência ao valor máximo dos números de referência (PN). Além disso, a medida que surge necessidade, os números de imagem (PN) a serem designados para as próximas imagens S são codificados. A medida que o fluxo 3 na figura 5A é o mesmo que o fluxo 3 na figura 3, não existe necessidade de designar novamente os números de imagem, das imagens no fluxo 3. Portanto, os números de imagem são novamente designados somente para as imagens necessárias, somente informação sobre a designação necessária precisa ser codificada na Etapa 11. Finalmente, os números de imagem apresentados pela informação codificada na Etapa 11 são novamente designados na Etapa 12. Até este ponto, como apresentado na figura 5, a condição de armazenamento na memória de referência (Mem) para perceber os fluxos que podem ser decodificados mesmo após trocar os sinais codificados, é percebida.
Além disso, como o número de imagem (PN) de imagens S é 12, de modo a tornar os números de imagem (PN) contínuos após a codificação e decodificação destas imagens S, é possível utilizar o número de imagem 11, que é o número de imagem (PN) imediatamente antes de uma imagem S (imediatamente antes de uma imagem S do fluxo 1 na figura 1) como apresentado na figura 5B. Neste caso, os números de imagem (PN) sempre aumentam no processo de codificação e de decodificação à medida que o número de imagem (PN) da imagem S é 12, o que é mais eficaz porque a função de verificação de erro para considerar a diminuição nos números de imagem (PN) como um erro, também é realizada. A figura 7 é uma ilustração apresentando as relações das imagens e dos números de imagem (PN) quando codificando um sinal de imagem de entrada (Vin) da presente invenção. A figura 7 é um exemplo de nova designação de números de imagem (PN) utilizando o método explicado na figura 5B, todos os números de imagem, de imagens S, são 12. Portanto, é claro que todas as imagens após as imagens S podem ser corretamente decodificadas mesmos após trocar os fluxos nas imagens S porque as imagens na memória de referência (Mem) são idênticas independente dos fluxos quando codificando e decodificando as imagens S. Além disso, é possível alterar a ordem operacional das Etapas 11 e 12 e neste caso, um fluxograma do método de codificação de imagem apresentado na figura 6B é utilizado. A decodificação da informação de deleção codificada na figura 6A apresentada no fluxograma do método de codificação utilizando o método de decodificação apresentado no fluxograma da figura 6C do método de decodificação torna possível perceber a condição de armazenamento da memória de imagem de referência (Mem) para perceber os fluxos que podem ser decodificados utilizando o método de decodificação de imagem mesmo após os sinais codificados serem trocados como apresentado na figura 5A.
Decodificar a informação em relação a nova designação de números de imagem (PN) na Etapa 15 torna possível especificar as imagens necessárias para a nova designação de números de imagem (PN) e o método. A seguir, na Etapa 16, os números de imagem (PN) das imagens na memória de imagem de referência (Mem) são novamente designados baseado nas imagens decodificadas na Etapa 15 e também requerem a nova designação de números de imagem (PN) e o método de nova designação. Até este ponto é possível perceber a condição de armazenamento na memória de imagem de referência (Mem) para perceber os fluxos que podem ser decodificados mesmo após trocar os sinais codificados como apresentado na figura 5.
Enquanto esta segunda modalidade explica a eficácia na combinação com a primeira modalidade, à medida que a segunda modalidade somente pode realizar o mérito de codificar e decodificar corretamente no caso de "Claramente expressar as imagens de referência por números de imagem (PN)", é possível utilizar somente a segunda modalidade, ao invés da segunda modalidade em combinação com a primeira modalidade se o efeito da segunda modalidade for de forma suficientemente eficaz. (Terceira Modalidade) A figura 8 é outra modalidade de modo a realizar uma ilustração dos números de imagem (PN) de imagens a serem armazenadas na memória de imagem de referência (Mem) na figura 5.
Os tipos de imagem são identificados pela informação de tipo de imagem (PicType). Portanto, quando uma imagem é identificada como uma imagem S que pode alterar fluxos pela informação de tipo de imagem (PicType), fazer uma regra para novamente designar os números de imagem (PN) das imagens na memória de imagem de referência (Mem) para coincidir com os números de imagem (PN) de imagens S torna possível omitir a codificação e a decodificação da informação em relação ao método de nova designação para cada número de imagem (PN), de imagens na memória de imagem de referência (Mem). A operação apresentada na figura 8A será explicada abaixo. Na Etapa 20, os números de imagem (PN) de imagens são obtidos pela decodificação dos sinais codificados. A informação de tipo de imagem (PicType) das imagens, é obtida na Etapa 21. Quando a informação de tipo de imagem (PicType) é revelada como sendo imagens S, os números de imagem (PN) das imagens na memória de imagem de referência (Mem) de um modo que eles coincidem com os números de imagem (PN) de imagens S são novamente designados baseado em um método especificado na Etapa 22. Até este ponto, como apresentado na figura 5, é possível perceber a condição de armazenamento na memória de imagem de referência (Mem) que percebe os fluxos que podem ser decodificados mesmo após a troca dos sinais codificados.
Além disso, é possível alterar o ordem das Etapas 21 e 22 e se ela for alterada, o fluxograma do método de codificação de imagem apresentado na figura 8B é utilizado.
Além disso, é possível codificar e decodificar somente parte da informação de nova designação de números de imagem (PN) (os quais não podem ser representados pela regra para nova designação dos números de imagem (PN) na memória de imagem de referência (Mem) de um modo que eles coincidam com os números de imagem (PN) de imagens S) na Etapas 11 e 15 na figura 6 por combinar a ilustração das figuras 8 e 6 com respeito aos números de imagem (PN), de imagens a serem armazenadas na memória de imagem de referência (Mem) na figura 5 (Quarta Modalidade) A figura 9 é um diagrama de blocos apresentando a estrutura do aparelho de codificação de imagem da presente invenção. A figura 9 como um diagrama de blocos com respeito ao aparelho de codificação de imagem da presente invenção é um exemplo para realizar o método de codificação de imagem na primeira modalidade e na segunda modalidade. A unidade de geração de número de imagem (PNGen) gera números de imagem (PN). Os números de imagem (PN) são IDs para identificar as imagens armazenadas na memória de imagem de referência (Mem), cada imagem armazenada na memória de imagem de referência (Mem) é designada com um número de imagem (PN) exclusivo. Normalmente, os números de imagem (PN) são incrementados de 1 cada vez que uma imagem é armazenada na memória de imagem de referência (Mem). Quando um número de imagem (PN) recebido por um aparelho de decodificação de imagem é incrementado de 2 ou mais, o aparelho de decodificação de imagem pode descobrir se uma imagem a ser armazenada está ausente por causa de erro na linha de transmissão, e pode corrigir o erro e tornar o erro menos evidente. A unidade de verificação de número de imagem máximo (MaxPN) compara outros números de imagem de sinal codificado (OtherPN) e os números de imagem (PN) gerados na unidade de geração de número de imagem (PNGen), detecta o.valor máximo dos números de imagem (PN), notifica a unidade de comprimento variável (VLC) e a unidade de geração de número de imagem (PNGen) do valor máximo dos números de imagem (PN) e inicializa os números de imagem (PN) a serem gerados na unidade de geração de número de imagem (PNGen), utilizando o valor máximo dos números de imagem (PN). Outros números de imagem de sinal codificado (OtherPN) são números de imagem de imagens em um fluxo diferente, em paralelo com as imagens a serem codificadas. Por conseqüência, após isto, a unidade de geração de número de imagem (PNGen) começa a emitir os números de imagem (PN) maiores do que o valor máximo dos números de imagem (PN). A unidade de comparação de tempo de imagem codificada (Ti-meCmp) compara o tempo do quadro de cada imagem no sinal de imagem de entrada (Vin) codificado até agora e o tempo do quadro de cada imagem codificada como outros sinais codificados (fluxos) e notifica a unidade de deleção de imagem (PicDel) da informação de imagem com respeito ao tempo do quadro codificado em todos os fluxos.
Quando a informação de tipo de imagem (PicType) apresenta que a próxima imagem é uma imagem S, a unidade de deleção de imagem (PicDel) ordena a memória de imagem de referência (Mem) para deletar as imagens fora do quadro de tempo em todos os fluxos armazenados na memória de imagem de referência (Mem) baseado na informação notificada pela unidade de comparação de tempo da imagem codificada (TimeCmp) e notifica a unidade de codificação de comprimento variável (VLC) da mesma informação, ao mesmo tempo. A unidade de codificação de imagem (PicEnc) refere-se às imagens na memória de imagem de referência (Mem), codifica o sinal de imagem de entrada (Vin) incluindo a conversão de freqüência e a quantização como um tipo de imagem apresentado na informação de tipo de imagem (PicType), envia o resultado para a unidade de decodificação de imagem (PicDec) e para a unidade de codificação de comprimento variável (VLC). A unidade de decodificação de imagem (PicDec) executa a quantização inversa e a conversão de freqüência-da resultado da codificação na unidade de codificação de imagem (PicEnc) como os tipos de imagem apresentados na informação de tipo de imagem (PicType) e armazena os tipos de imagem como números de imagem (PN) na memória de imagem de referência (Mem) de modo a referir-se aos tipos de imagem no processo de codificação de imagem seguinte. A unidade de codificação de comprimento variável (VLC) transforma o resultado codificado na unidade de codificação de imagem (PicEnc) em códigos de comprimento variável de modo a formar um fluxo de bits, co- difica a informação necessária para a decodificação, que é a informação para deletar imagens armazenadas na memória de imagem de referência (Mem) notificadas pela unidade de deleção de imagem (PicDel), o valor máximo dos números de imagem (PN) e os números de imagem (PN) mencionados acima, de modo a emitir a informação como sinais codificados (Str). A unidade de codificação de comprimento variável (VLC) também codifica a informação notificada pela unidade de deleção de imagem (PicDel) e a informação para a nova designação de números de imagem (PN) das imagens armazenadas na memória de imagem de referência (Mem), baseado no método apresentado na segunda modalidade. A figura 10 apresenta um exemplo estrutural de sinais codificados (Str) na presente invenção. Cada dado na figura 10A será explicado abaixo.
Primeiro, os números de imagem (PN) são codificados. A seguir, o número de imagem (PN) máximo a ser novamente designado, a informação para deletar as imagens armazenadas na memória de imagem de referência (Mem) e a informação para a nova designação dos números de imagem armazenados na memória de imagem de referência (Mem), são codificados. Após isto, a informação de tipo de imagem (PicType) e os dados codificados da imagem que são emitidos pela unidade de codificação de imagem (PicEnc) são localizados.
Como a figura 10A é simplesmente um exemplo da localização dos dados, é possível alterar a ordem dos dados como apresentado na figura 10B, de modo a executar a codificação deimagem. É possível preparar o aparelho de codificação de imagem consistindo nas unidades mencionadas acima que realizam o método de codificação de imagem apresentado nas primeira e segunda modalidades. (Quinta Modalidade) A figura 11 é um diagrama de blocos apresentando a estrutura do aparelho de decodificação de imagem da presente invenção. A figura 11, como um diagrama de blocos com respeito ao aparelho de decodificação de imagem da presente invenção, é um exemplo de um aparelho de decodifica- ção de imagem que realiza as primeira, segunda e terceira modalidades. Sua função será explicada abaixo. A unidade de decodificação de comprimento variável (VLD) decodifica os sinais codificados (Str), emite várias informações (tal como uma ordem para deletar imagens armazenadas na memória de imagem de referência (Mem), a informação de tipo de imagem (PicType), os números de imagem (PN), a informação para a nova designação de números de imagem (PN) e os dados da imagem). A ordem para deletar imagens armazenadas na memória de imagem de referência (Mem) obtida na unidade de decodificação de comprimento variável (VLD) é primeiramente enviada para a unidade de deleção de imagem (PicDel). A unidade de deleção de imagem (PicDel) deleta as imagens especificadas, armazenadas na memória de imagem de referência (Mem). A informação de tipo de imagem (PicType) obtida na unidade de decodificação de comprimento variável (VLD) é enviada para a unidade de decodificação de imagem (PicDec) de modo a apresentar o método de decodificação.
Os números de imagem (PN) obtidos na unidade de decodificação de comprimento variável (VLD) são enviados para a memória de imagem de referência (Mem) como números de imagem (PN) quando armazenando as imagens decodificadas na unidade de decodificação de imagem (PicDec). A informação para a nova-designação de-númere de- imagem (PN) das imagens armazenadas na memória de imagem de referência (Mem), obtida na unidade de decodificação de comprimento variável (VLD), é enviada para a unidade de alteração de número de imagem (PNchg). A unidade de alteração de número de imagem (PNchg) segue a instrução e faz a nova designação de números de imagem (PN) das imagens armazenadas na memória de imagem de referência (Mem). Para ser mais específico, a unidade de alteração de número de imagem (PNchg) lê os números de imagem (PN) das imagens armazenadas na memória de imagem de refe- rência (Mem), faz a nova designação dos valores de números de imagem (PN) lidos e então grava os novos números de imagem (PN) na memória de imagem de referência (Mem).
Na unidade de decodificação de imagem (PicDec), os dados de ^ imagem obtidos na unidade de decodificação de comprimento variável (VLD) são decodificados em um método de decodificação adequado para o tipo de imagem especificado, apresentado na informação de tipo de imagem (PicType). Em outras palavras, as imagens I são decodificadas sem referir-se às imagens na memória de imagem de referência (Mem), enquanto as imagens P e as imagens B são decodificadas referindo-se às imagens na memória de imagem de referência (Mem). As imagens decodificadas obtidas deste modo são armazenadas na memória de imagem de referência (Mem) e emitidas como sinais de imagem decodificados (Vout).
Até este ponto, é possível preparar o aparelho de decodificação de imagem consistindo nas unidades mencionadas acima que realizam o método de decodificação de imagem apresentado nas primeira, segunda e terceira modalidades. (Sexta Modalidade) No aparelho de codificação de imagem apresentado na primeira até a quinta modalidades quando trocando-se fluxos em imagens S, os números de imagem das imagens antes daquelas que podem ser trocadas, são trocados de modo a tornar os números de imagem contínuos com os números de imagem das imagens que podem ser trocadas. Nesta sexta modalidade, os números de imagem são trocados nas imagens que-podem ser trocadas.
Como codificar uma pluralidade de fluxos possuindo uma taxa de imagem ou uma taxa de bits diferente, ou uma estrutura diferente, aqui está um exemplo de um método de troca de fluxo que permite a codificação após trocar as imagens codificadas de uma imagem sob codificação em um fluxo, para uma imagem em outro fluxo. Por conveniência de explicação, a frase mais simples de "trocar fluxos" é utilizada abaixo.
Em adição, nesta sexta modalidade, se as imagens a serem co- dificadas devam ou não ser armazenadas na memória de referência, é julgado baseado no incremento no número de imagem, entre as imagens a serem codificadas e as imagens adjacentes à frente das imagens a serem codificadas (Simplesmente, "a imagem precedente" é utilizada abaixo) na ordem de codificação. Para ser específico, quando um incremento no número de imagem entre uma imagem precedente e uma imagem a ser codificada é 1, significa que a imagem a ser codificada está armazenada na memória de referência. Quando o número de imagem da imagem a ser codificada, é o mesmo que o número de imagem da imagem precedente, significa que a imagem corrente não está armazenada na memória de referência. O processamento para trocar os números de imagem, (PN) de imagens que podem ser trocadas, será explicado de forma concreta com referência à figura 12. A figura 12 é um diagrama apresentando um exemplo das relações entre imagens e números de imagem (PN) quando um número de imagem de entrada (Vin) é codificado. Um sinal de imagem idêntico é codificado em taxas de imagem diferentes para formar os fluxos 1,2 e 3. Na figura 12, as imagens estão localizadas de acordo com a ordem de codificação em cada fluxo.
No fluxo 1, os números de imagem (PN) são designados para cada imagem de modo que os números de imagem são incrementados de 1. Além disso, no fluxo 2, existem imagens designadas com os números de imagem (PN) incrementados de 1 e imagens designadas com os mesmos números de imagem (PN) que as imagens precedentes. Além disso, no fluxo 3, números de imagem (PN) são designados para cada imagem de modo que os números de imagem sejam incrementados de 1 como no fluxo 1.
Portanto, à medida que os números de imagem são incrementados de 1 nos fluxos 1 e 3, as imagens a serem codificadas são armazenadas na memória de referência. No fluxo 2, as imagens designadas com os números de imagem (PN) de um modo no qual os números de imagem são incrementados de 1 são armazenadas na memória de referência e as imagens designadas com os mesmos números de imagem (PN) que as imagens precedentes não são armazenadas na memória de referência.
Além disso, as imagens designadas com o número de imagem "0" nos fluxos 1,2 e 3 são imagens a serem exibidas no tempo tO. Da mesma forma, os grupos de imagens listadas abaixo são imagens a serem exibidas no mesmo tempo: A imagem F14 no fluxo 1, a imagem F22 no fluxo 2 e a imagem F31 no fluxo 3 são imagens a serem exibidas no tempo t1. A Imagem F18 no fluxo 1, a imagem F24 no fluxo 2 e a imagem F32 no fluxo 3 são imagens a serem exibidas no tempo t2. A imagem F112 no fluxo 1, a imagem F26 no fluxo 2 e a imagem F33 no fluxo 3 são imagens a serem exibidas no tempo t3. A imagem F117 no fluxo 1, a imagem F215 no fluxo 2 e a imagem F34 no fluxo 3 são imagens a serem exibidas no tempo t4. Observe que as imagens F112, F26 e F33 correspondem às imagens S na primeira e na segunda modalidades.
Na figura 12, os fluxos são trocados por meio da imagem BP1 e BP2 que existem entre a imagem antes da troca e a imagem após a troca e ambas BP1 e BP2 são imagens de troca a serem codificadas de um modo no qual elas possuam o mesmo tempo que as suas imagens precedentes nos respectivos fluxos de troca.
Por exemplo, no caso onde a imagem F026 no fluxo 2 (uma imagem no fluxo antes da troca) é trocada para a imagem F113 no fluxo 1 (uma imagem no fluxo após a troca), a imagem de troca BP1 que existe entre F26 e F113 é utilizada como uma imagem no tempo t3. Neste caso, o número de imagem da imagem de troca BP1, que é uma imagem de troca, é alterado para "12" para tornar o número contínuo com o número de imagem 13 da imagem F113 no fluxo após a troca.
Além disso, da mesma forma, no caso onde a imagem F32 no fluxo 3 (uma imagem no fluxo antes da troca) é trocada para a imagem F213 no fluxo 2 (uma imagem no fluxo após a troca), a imagem de troca BP2 que existe entre F32 e F213 é utilizada como uma imagem no tempo t3. Neste caso, o número de imagem da imagem de troca BP2, que é uma imagem de troca, é alterado para tornar o número contínuo com o número de imagem 13 da imagem F213 no fluxo após a troca.
Deste modo, por designar os números de imagem (PN) das imagens de troca para tornar os números contínuos com os números de imagem (PN) das imagens no fluxo após a troca, os números de imagem (PN) das imagens no fluxo após a troca são alterados para serem idênticos em qualquer caso de imagens codificadas dentro de cada fluxo ou dos fluxos de troca. A seguir, o processamento para designar os números de imagem (PN) no caso de fluxos de troca será explicado abaixo. A figura 13 é um fluxograma apresentando uma método de codificação após designar os números de imagem (PN) para as respectivas imagens nos fluxos da figura 12.
Na etapa 1401, é julgado se cada uma das imagens a ser codificada é uma imagem S ou não. Quando as imagens correntes são imagens S, os números de imagem (PN) das imagens correntes são alterados para os valores iniciais de M na etapa 1402. Quando as imagens correntes codificadas não são imagens S, os números de imagem (PN) das imagens correntes não são alterados.
Na etapa 1403, é julgado se cada uma das imagens a ser codificada é ou não a próxima imagem das imagens S. Quando as imagens correntes são as próximas imagens das imagens S, é julgado se cada uma das imagens S é ou não armazenada na memória na etapa 1404. Quando as imagens correntes não são as imagens próximas das imagens S, é julgado se cada uma das imagens correntes é ou não armazenada na memória na etapa 1405.
Quando as imagens S são julgadas como sendo armazenadas na memória na etapa 1404, o número de imagem "M" é incrementado de 1 para formar M+1 na etapa 1406, os números de imagem (PN) incrementados substituindo os números de imagem (PN) anteriores.
Quando as imagens S não são julgadas como sendo armazenadas na memória na etapa 1404, os números de imagem (PN) são considerados como "M" na etapa 1407. Os números de imagem (PN) não são alterados. Na etapa 1405 é julgado se as imagens a serem codificadas são ou não armazenadas na memória. Quando as imagens correntes são julgadas como sendo armazenadas na memória, os números de imagem (PN) são incrementados de PN+1 na etapa 1408 e os números de imagem (PN) incrementados substituem os números de imagem (PN) anteriores.
Quando as imagens a serem codificadas são julgadas como não sendo armazenadas na memória, os números de imagem (PN) não são alterados.
Na etapa 1409, as imagens desejadas são codificadas. Na etapa 1410, é julgado se todas as imagens correntes foram ou não codificadas. Quando todas as imagens correntes não forem codificadas, a etapa 1401 deverá ser repetida. Quando todas as imagens correntes forem codificadas, a etapa 1410 terminará. O processamento apresentado na figura 13 torna possível produzir fluxos de dados codificados cujos números de imagem (PN) são contínuos nos fluxos após a troca das imagens codificadas.
Além disso, os sinais codificados (Str) produzidos deste modo podem ser decodificados baseado no método de decodificação pelo aparelho de decodificação de imagem na quinta modalidade. Deste modo, o aparelho de decodificação de imagem que decodifica os sinais de codificados na sexta modalidade é realizado.
Além disso, os métodos de codificação e de codificação apresentados na primeira até a sexta modalidades mencionadas acima podem ser implementados em instrumentos de comunicação móveis tal como telefones celulares e sistemas de navegação de carro e câmaras tal como câmaras de vídeo digitais ou câmaras de aço digitais pela utilização de semicondutores tal como o LSI. Além disso, existem 3 tipos de aparelhos adequados para a implementação: um terminal do tipo envio e recepção com ambos aparelhos de codificação e de decodificação, um terminal de envio somente com um aparelho de codificação e um terminal de recepção somente com um aparelho de decodificação. (Sétima Modalidade) Imagens que devem ser referidas pelas imagens a serem deco- díficadas são apresentadas em uma forma de números de imagem (PN). Além disso, erros de números de imagem (PN) podem ser detectados baseado no aumento e na diminuição nos números de imagem (PN). A figura 14 apresenta o processamento para verificar e corrigir erros de números de imagem (PN) baseado nos números de imagem (PN).
Primeiro, os números de imagem (PN) são detectados na etapa 20. A seguir, os tipos de imagem (PicType) são detectados na etapa 21. Após isto, é julgado se os números de imagem (PN) detectados na etapa A2 são ou não contínuos. Quando os números de imagem (PN) são contínuos na etapa A2, o processamento de verificação e de correção de erro dos números de imagem (PN) está completado. Quando os números de imagem (PN) não são contínuos na etapa A2, os erros devem ser corrigidos na etapa A3. Observe que o processamento para verificar o PN máximo armazenado e designar novamente os "PN"s pode ser executado de um modo a somente ser feito após este processamento de verificação e correção de erro ou simultaneamente feito com este processamento de verificação e correção de erro. O primeiro método imaginável para o processamento de correção de erro na etapa A3 é requisitar o reenvio dos dados com respeito aos números de imagem com erros e a seguir o processamento de verificação de erro dos números de imagem (PN) novamente após receber os dados reenviados. Entretanto, a causa da descontinuação nos números de imagem (PN) das imagens S não é um erro de transmissão. Ou seja, à medida que o número de imagens em cada fluxo armazenado na memória antes das imagens S pode variar no caso onde a descontinuação nos números de imagem (PN) de imagens S é verificada, a imagem cujo número de imagem (PN) é requerido para ser reenviado pode não existir e assim é altamente improvável que uma imagem ausente possa ser enviada. Portanto, as requisições pelas imagens que não podem ser enviadas são feitas interminavelmente, o que pode ser um impedimento ao se exibir as imagens. Por esta razão, como uma medida contrária no caso de problema ao se exibir as imagens, será dada explicação adicional em uma décima modalidade abaixo.
Além disso, se o número de imagens no fluxo após a troca na memória na hora de trocar os fluxos não for o mesmo que o de imagens no fluxo original, a exibição das imagens pode não ser feita de forma apropriada.
Primeiro, existem memórias de uma memória FIFO para armazenamento de curto prazo e uma memória para armazenamento de longo prazo que podem diretamente especificar os lugares de armazenamento sem empregar o "primeiro que entra, primeiro que sai" de modo a armazenar as imagens por mais tempo do que a memória mencionada acima para o armazenamento de curto prazo. Quando a memória para o armazenamento de curto prazo pode armazenar 7 imagens e a memória para armazenamento de longo prazo pode armazenar 4 imagens, a imagem de referência é especificada baseado na ordem calculada a partir da memória para armazenamento de curto prazo. Por exemplo, a LT2 utilizada pode ser especificada como a oitava imagem (Idx = 7) na memória para armazenamento de longo prazo. Deste modo, as imagens de referência são especificadas baseado nas posições relativas.
Quando existem 3 fluxos como apresentado na figura 7, as localizações na memória para especificar imagens idênticas (tal como as imagens S apresentadas na figura 7) variam de fluxo para fluxo como apresentado na figura 2. E quando referindo-se às imagens em outro fluxo a partir das imagens S, as localizações na memória para especificar as imagens de referência variam de acordo com a memória em cada fluxo. Quando existe uma pluralidade de fluxos na hora de trocar os fluxos de um fluxo predeterminado para outro fluxo, as imagens S são aquelas imagens cujas imagens precedentes nos fluxos antes e após a troca são idênticas. Não somente as imagens S mas também as imagens I podem ser as imagens nas quais os fluxos são trocados quando as imagens decodificadas em uma pluralidade de fluxos na memória de referência são exatamente as mesmas e assim as imagens I podem ser utilizadas para o mesmo propósito como as imagens S (para fluxos de troca).
Considerando-se várias condições como esta, é difícil especifi- car as imagens de referência corretamente se o número de imagens varia de fluxo para fluxo e é altamente provável que surja qualquer erro mesmo quando as imagens de referência são especificadas.
Portanto, esta sétima modalidade irá apresentar os métodos de codificação e de decodificação de informação adicional utilizada para evitar um processo de verificação de erro interminável dos números de imagem (PN) ativado por problemas como a descontinuação dos números de imagem (PN) ou pela incongruência no conteúdo da memória. Esta informação adicional (toda a informação de deleção de imagem) é a ordem para apresentar que as imagens, exceto as imagens I e as imagens S a serem codificadas, devem ser deletadas da memória para referência na codificação e na decodificação de modo a impedir qualquer erro de ocorrer no processo de codificação das imagens após codificar imagens I capazes de codificação de intra-imagem e as imagens S mencionadas acima.
Este processo torna cada condição de memória idêntica em uma pluralidade de fluxos após trocar os fluxos de um fluxo predeterminado para outro fluxo e torna possível especificar imagens predeterminadas na memória corretamente mesmo quando as imagens de referência são necessárias para a codificação por intra-predição e assim por diante. Além disso, impedir a descontinuação nos números de imagem (PN) de ser detectada e corrigida como um erro resolve o problema de impedir a decodificação causado pelas requisições para reenvio de imagens não-existentes. O método de codificação será explicado abaixo na figura 16A. A figura 16A apresenta o processo de formação de sinais codificados nesta sétima modalidade.
Primeiro, os números de imagem (PN) são detectados na etapa 20. A seguir, os tipos de imagem (PicType) são detectados na etapa 21. É julgado se os tipos de imagem detectados são ou não imagens I na etapa A1. Quando os tipos de imagem detectados são imagens I, todas as imagens, exceto as imagens I a serem codificadas na memória, são deletadas na etapa A10. Na etapa A11 seguinte, toda a informação de deleção de imagem significando deletar todas as imagens na memória é codificada e este é o último procedimento da informação adicional de codificação.
Além disso, a etapa A1 na figura 16A pode ser utilizada como uma etapa para julgar se os tipos de imagem são ou não imagens S no mesmo processamento de codificação como apresentado na figura 16B. Além disso, é possível combinar a etapa A1 com a etapa A2 e julgar se os tipos de imagem são imagens I ou imagens S após verificar os tipos de imagem na etapa 21.
Como apresentado na figura 17A, quando os tipos de imagem a serem codificadas são revelados como sendo imagens I na etapa A1 na hora da verificação dos tipos de imagem na etapa 21 e quando os números de imagem (PN) são julgados como sendo descontínuos após o julgamento em relação a se os números de imagem são ou não contínuos como o julgamento feito na etapa A3, também é possível deletar todas as imagens, exceto as imagens I a serem codificadas na memória. Por outro lado, quando os números de imagem (PN) são contínuos na etapa A3, as imagens na memória não são deletadas. Quando verificando se as imagens S em relação ao tipos de imagem, a mesma explicação apresentada na figura 17A continua verdadeira. Além disso, é possível combinar a etapa A1 com a etapa A2 e julgar se os tipos de imagem são imagens I ou imagens S após verificar os tipos de imagem na etapa 21.
Também é possível executar o processamento da etapa 30 julgando se os números de imagens armazenadas na memória são ou não os mesmos de modo a evitar a ocorrência de erros causados pela diferença no número de imagens armazenadas na memória como apresentado na figura 17B após o processamento da etapa A3 apresentado na figura 17A. É possível executar o processamento da etapa A30 antes de ir para o processamento da etapa A3 apresentado na figura 17. E é possível deletar todas as imagens após executar a Etapa A30 antes de executar a Etapa A3 na figura 17B quando os números de imagens variam de fluxo para fluxo e é possível deletar todas as imagens apresentadas na etapa A10 quando os números de imagens não variam de fluxo para fluxo e os números de imagem (PN) são descontínuos (figura 18).
Desse modo, o processamento da figura 17 torna possível manter o armazenamento das imagens que podem ser imagens de referência na memória tantas quantas possíveis e aperfeiçoar a capacidade de diminuição de erros de reprodução de imagens. Como para as imagens I ou imagens S, elas não precisam de correção de erro quando os números de imagens armazenadas na memória variam ou os números de imagem (PN) são descontínuos, o que simplifica o controle da memória no aparelho de codificação.
Observe que especificar as imagens I e ordenar a deleção de todas as imagens na memória pode ser apresentado por tipos de imagem que especificam imagens especiais como imagens I. (Oitava Modalidade) A figura 19 é um diagrama de blocos apresentando a estrutura do aparelho de codificação de imagem da presente invenção. O diagrama de blocos do aparelho de codificação de imagem na presente invenção apresentado na figura 19 é um exemplo para realizar o método de codificação de imagem na figura 16. A unidade de geração de número de imagem (PNGen) gera números de imagem (PN). Os números de imagem (PN) são IDs que identificam as imagens armazenadas na memória de imagem de referência (Mem) e para cada imagem diferente armazenada na memória de imagem de referência (Mem) é dado um número de imagem (PN) exclusivo. Normalmente, os números de imagem (PN) são incrementados de 1 cada vez que uma imagem é armazenada na memória de imagem de referência. Se os números de imagem (PN) recebidos no aparelho de decodificação de imagem forem incrementados de 2 ou mais, é possível detectar a ausência de imagens a serem armazenadas na linha de transmissão pelo aparelho de decodificação de imagem e realizar o processamento de correção de erro tal como o aperfeiçoamento de imagem (tornando o erro menos evidente) ou a correção do erro (retransmitindo uma imagem sem erros para reproduzir a imagem).
Quando a informação de tipo de imagem (PicType) apresenta que as imagens envolvidas são imagens S (correspondendo ao processamento da etapa A2 na figura 16), a unidade de deleção de imagem 3 (Pi-cDel) ordena a memória de imagem de referência (Mem) para deletar as imagens armazenadas na memória de imagem de referência (Mem) exceto as imagens a serem codificadas e envia a informação para a unidade de codificação de comprimento variável (VLC) ao mesmo tempo.
Por outro lado, a informação de tipo de imagem (PicType) apresenta que as imagens envolvidas são imagens I (correspondendo ao processamento da etapa A1 na figura 16), a unidade de deleção de imagem (PicDel) ordena a memória de imagem de referência (Mem) para deletar as imagens armazenadas na memória de imagem de referência (Mem) exceto as imagens a serem codificadas e também envia a informação para a unidade de codificação de comprimento variável (VLC) ao mesmo tempo. A unidade de codificação de imagem (PicEnc) refere-se às imagens armazenadas na memória de imagem de referência (Mem) de modo a codificar o sinal de imagem de entrada (Vin) incluindo a conversão de fre-qüência e a quantização quanto aos tipos de imagens apresentados pela informação de tipo de imagem (PicType) e envia o resultado para a unidade de decodificação de imagem (PicDec) ou para a unidade de codificação de comprimento variável (VLC). A unidade de decodificação de imagem (PicDec) inversamente quantiza e converte a freqüência da informação codificada na unidade de codificação de imagem (PicEnc) como tipos de imagem apresentados como informação de tipo de imagem (PicType) e armazena a informação na memória de imagem de referência (Mem) como os números de imagem (PN) para referir-se dessa maneira aos números de imagem na codificação de imagem seguinte. A unidade de codificação de comprimento variável (VLC) executa a codificação de comprimento variável em relação à informação codificada na unidade de codificação de imagem (PicEnc) de modo a formar o fluxo de bits e codifica a informação necessária para decodificação tal como a informação para deletar as imagens armazenadas na memória de imagem de referência (Mem) notificada pela unidade de deleção de imagem 3 (Pi-cDel), números de imagem (PN) e informação de tipo de imagem (PicType) para emitir a informação como sinais codificados (Str). A estrutura dos sinais codificados (Str) na presente invenção será apresentada na figura 10C e 10D. Os dados serão explicados abaixo.
Primeiro, os números de imagem (PN) são codificados. A seguir, a informação para deletar as imagens armazenadas na memória de imagem de referência (Mem), então a informação de tipo de imagem (PicType) e os dados de codificação de imagem emitidos pela unidade de codificação de imagem (PicEnc) são localizados. À medida que a figura 10C é meramente um exemplo da localização dos dados, é possível trocar as ordens de codificação dos dados como apresentado na figura 10D. O processamento mencionado acima permite ao aparelho de codificação de imagem realizar o método de codificação de imagem apresentado na figura 16 e proporciona um aparelho de codificação com alta resistência a erro. (Nona Modalidade) A figura 20 é um diagrama de blocos apresentando a estrutura do aparelho de codificação de imagem na presente invenção. O diagrama de blocos do aparelho de codificação de imagem da presente invenção apresentado na figura 20 é um exemplo para realizar o método de codificação de imagem na figura 17. A explicação com respeito às mesmas unidades explicadas na figura 19 será omitida das explicações seguintes. A figura 20 e a figura 19 diferem no processo na unidade de deleção de imagem 4 (PicDel). Para ser específico, quando a informação de tipo de imagem (PicType) apresenta as imagens envolvidas que são imagens S (correspondendo ao processamento da etapa A2 na figura 17) e o número de imagens varia de fluxo para fluxo quando comparando-se os números (correspondendo ao processamento da etapa A30 na figura 17), a unidade de deleção de imagem 4 (PicDel) ordena a memória de imagem de referência (Mem) para deletar as imagens armazenadas na memória de imagem de referência (Mem), exceto as imagens a serem codificadas e envia a informação para a unidade de codificação de comprimento variável (VLC) ao mesmo tempo. O mesmo é feito no caso de imagens I apresentadas pela informação de tipo de imagem (PicType). A estrutura dos sinais codificados da presente invenção é a mesma que as apresentadas na figura 10C e 10D. O processamento mencionado acima permite ao aparelho de codificação de imagem realizar o método de codificação de imagem apresentado na figura 17 e proporciona o aparelho de codificação com alta resistência a erro. (Décima Modalidade) A sétima modalidade acima apresentava que a exibição da imagem pode ser impedida por causa das requisições para reenvio de imagens que não podem ser reenviadas serem repetidamente feitas quando a des-continuação dos números de imagem ocorria em uma imagem S. O método para resolução do problema para o exemplo da exibição de imagem com os problemas causados por esta razão será explicado abaixo. A figura 21A apresenta o processamento para decodificar as imagens codificadas.
Primeiro, os números de imagem (PN) são detectados na etapa 20. A seguir, os tipos de imagem (PicType) são detectados na etapa 21. É julgado se os tipos de imagem detectados são ou não imagens I na etapa A1. Quando os tipos de imagem detectados não são imagens I, É julgado se os números de imagem (PN) são ou não contínuos na etapa A3. Por outro lado, quando os tipos de imagem detectados são imagens I, não existe necessidade de detectar ou de corrigir erros e uma série do processamento termina.
Quando os números de imagem (PN) não são contínuos na etapa A3, os erros são corrigidos na etapa A4. Por outro lado, se os números de imagem (PN) são contínuos na etapa A3, a verificação de erro e a correção estão completadas. A correção de erro na etapa A4 pode ser, por exemplo, o pro- cessamento da detecção dos números de imagem (PN) máximos armazenados como explicado na modalidade mencionada acima, ou deletar todas as imagens na memória após receber a informação de deleção de todas as imagens significando deletar todas as imagens na memória no processamento de designar novamente os números de imagem (PN).
Como apresentado na figura 21B, da etapa A1 na figura 21 A, o mesmo processamento de codificação pode ser executado como uma etapa de julgar se os tipos de imagem são ou não imagens S. Além disso, é possível combinar a etapa A1 com a etapa A2 e julgar quais tipos de imagem de imagens I ou de imagens S eles possuem após verificar os tipos de imagem na etapa 21.
Deste modo, é possível evitar o impedimento da decodificação como um resultado de repetir as requisições pelo reenvio de imagens ausentes de modo a corrigir erros quando os números de imagem de imagens I ou de imagens S não são contínuos. Este processamento em uma imagem I é especialmente útil no caso de uma imagem I especial capaz de trocar fluxos. (Décima Primeira Modalidade) A figura 22 é um diagrama de blocos apresentando a estrutura do aparelho de decodificação de imagem da presente invenção. O diagrama de blocos do aparelho de decodificação de imagem da presente invenção apresentado na figura 22 apresenta um exemplo para realizar o método de decodificação de imagem apresentado na figura 21. A explicação com respeito às mesmas unidades como explicadas na figura 11 será omitida das explicações seguintes. O ponto diferente da figura 22 da figura 11 é o processamento na unidade de verificação de erro (ErrChk) utilizando os tipos de imagem (PicType) pela unidade de verificação de número de imagem (PNchk). Para ser específico, quando os números de imagem (PN) a serem informados na unidade de verificação de número de imagem (PNchk) não são contínuos e os tipos de imagem não são imagens I, nem imagens S, uma ordem de correção de erro (Err) é emitida pela unidade de verificação de erro (ErrChk).
Com uma ordem de correção de erro, o processamento tal como a verificação do PN máximo armazenado, a nova designação de PN ou a deleção de todas as imagens na memória de acordo com a informação de deleção de todas as imagens significando deletar todas as imagens na memória. O processamento mencionado acima permite ao aparelho de codificação de imagem realizar o método de codificação de imagem apresentado na figura 21 e proporciona um aparelho de decodificação com alta resistência a erro. (Décima Segunda Modalidade) Esta modalidade explica outras medidas contrárias contra uma verificação de erro interminável de números de imagem (PN) causada por problemas tal como descontinuação dos números de imagem (PN) ou incongruência no conteúdo da memória. Esta décima segunda modalidade difere da sétima modalidade pelo fato de que os números de imagem (PN) são novamente designados de "0" quando todas as imagens são deletadas após a mesma etapa de deletar todas as imagens na codificação apresentada na sétima modalidade.
Este processo torna as respectivas condições de memória em uma pluralidade de fluxos idênticas após trocar os fluxos de um fluxo predeterminado para outro fluxo e inicializa os números de imagem (PN) e portanto torna possível de forma correta especificar as imagens predeterminadas na memória mesmo quando as imagens de referência são requeridas na codificação por íntra-predição e assim por diante. Também é possível resolver o problema de impedir a decodificação quando trocando-se os fluxos codificados a serem decodificados a partir do fluxo predeterminado para outro fluxo evitando corrigir qualquer descontinuação de número de imagem como erros.
Como explicado, para cada imagem no fluxo é dado um número de imagem (PN) exclusivo contínuo em ordem de tempo de exibição nos fluxos codificados obtidos por se codificar as imagens em movimento. A razão pela qual os números de imagem (PN) são dados números de imagem exclusivos (PN) contínuos em ordem de tempo de exibição é que isto torna possível verificar a ausência de imagens no fluxo codificado causada por um erro na linha de transmissão no caso onde o aparelho de decodificação de imagem recebe o fluxo codificado por meio da linha de transmissão. Quando o número de imagem (PN) de uma imagem a ser informada na ordem de tempo de exibição é incrementado de 2 ou mais enquanto o fluxo codificado recebido está sendo decodificado, este aparelho de decodificação de imagem pode verificar o erro de transmissão ocorrido logo antes da hora de recepção da imagem envolvida e requisitar ao remetente para reenviar as imagens ausentes. Portanto, contanto que o aparelho de decodificação de imagem esteja decodificando um fluxo codificado de forma contínua, ele pode verificar erros de transmissão de forma eficaz e receber as imagens ausentes reenviadas para decodificar os fluxos codificados de forma perfeita.
Entretanto, esta verificação de erro causa um pequeno e rápido aumento do processamento de verificação de erro interminável, no caso do aparelho de decodificação de imagem utilizado para continuar a decodificação após trocar para outro fluxo codificado com uma taxa de imagem diferente enquanto decodificando-se um fluxo codificado após informar uma pluralidade de fluxos codificados obtidos por se codificar a mesma imagem em movimento em uma taxa de imagem diferente. A causa deste pequeno e rápido aumento é que os números de imagem (PN) de imagens exceto a primeira imagem em cada fluxo variam entre as imagens codificadas com taxas de imagem diferentes, mesmo no caso de imagens a serem exibidas ao mesmo tempo, em outras palavras, os números de imagem (PN) são contínuos dentro de cada fluxo codificado na ordem de tempo de exibição. Portanto, quando o alvo da decodificação é trocado para outro fluxo no meio da decodificação de um fluxo codificado em um aparelho de decodificação de imagem, os números de imagem (PN) são descontínuos mesmo no caso de imagens a serem exibidas ao mesmo tempo. O método de codificação utilizando informação adicional (a informação de deleção de todas as imagens) foi explicado na sétima modalidade de modo a evitar a verificação de erro interminável de números de imagem (PN) causada por problemas tal como descontinuação de números de imagem (PN) ou incongruência do conteúdo da memória deste modo. Esta informação adicional é a ordem para deletar todas as imagens, exceto as imagens a serem codificadas a partir da memória para referência ao se codificar ou decodificar de modo que não deve ocorrer qualquer erro na hora de trocar os fluxos no processo de codificação de imagem após codificar imagens I para a codificação intra ou para as imagens S mencionadas acima. O método de codificação será explicado abaixo utilizando a figura 23. A figura 23 apresenta o processo de formação de sinais codificados nesta décima segunda modalidade.
Primeiro, os números de imagem (PN) são detectados na etapa 1. A seguir, os números de imagem (PN) detectados na etapa 1 são codificados na etapa 2. Além disso, os tipos de imagem (PicType) são detectados na etapa 3. Na etapa 3, é julgado se os tipos de imagem detectados são ou não imagens S.
Quando os tipos de imagem detectados são imagens S, a informação de deleção de todas as imagens significando deletar todas as imagens na memória é codificada na etapa 5. A seguir, as imagens S são codificadas na etapa 6A. Além disso, os números de imagem são inicializados na etapa 7 e na etapa 8 seguinte, todas as imagens, exceto as imagens S a serem codificadas na memória, são deletadas na etapa 8. Até este ponto, o processamento de codificar a informação adicional e inicializar os números de imagem (PN) termina.
Como os números de imagem (PN) são contínuos a não ser que os tipos de imagem detectados sejam imagens S, estas imagens são codificadas na etapa 6B, mas o processamento é completado sem codificar a informação adicional, inicializando os números de imagem (PN) e deletando todas as imagens A inicialização dos números de imagem (PN) na etapa 7 é de modo tal a fornecer o número de imagem de "0" para as imagens S codificadas. Em outras palavras, inicializar os números de imagem (PN) das imagens S significa fornecer para as imagens após as imagens S na ordem de tempo de exibição novos números de imagem (por exemplo, PN 1) começando a partir do número de imagem (PN 0) das imagens S. Por conse-qüência, os números de imagem (PN) são inicializados após codificar as imagens S (ou seja, após codificar os números de imagem (PN) das imagens S). O julgamento em relação a se as imagens são ou não imagens S é feito na etapa 4, o julgamento em relação a se as imagens são ou não imagens I, pode ser feito. Além disso, quando existe uma etapa para deletar todas as imagens na etapa 23A, os números de imagem (PN) devem ser inicializados simultaneamente devido a se as imagens forem ou não imagens I ou imagens S, não é um padrão de julgamento único quanto a se os números de imagem (PN) devem ser inicializados. Além disso, o processamento de codificação de número de imagem (PN) na Etapa 2 pode ser executado em qualquer tempo entre o processamento de verificação do número de imagem na etapa 1 e o processamento de inicialização de número de imagem na etapa 7. Além disso, é possível inicializar os números de imagem (PN) na etapa 7 após deletar todas as imagens, exceto as imagens S a serem codificadas na memória, na etapa 8. Além disso, o processamento para codificar a informação de deleção de todas as imagens significando deletar todas as imagens na memória na etapa 5 é o processamento após o julgamento quanto a se as imagens são ou não imagens S e pode ser executado a qualquer tempo antes do processamento apresentado na figura 23A ter terminado. Além disso, é possível não codificar a informação adicional utilizando tipos de imagem especiais (PicType) que incluem a informação adicional significando deletar todas as imagens, exceto as imagens a serem codificadas a partir da memória para referência na codificação ou na decodificação. A nova designação dos números de imagem (PN) de modo a trocar os fluxos nas imagens S ou nas imagens I é eficaz, mas a eficácia não está limitada ao caso onde fluxos são trocados nas imagens S ou nas imagens I, em outras palavras, os números de imagem (PN) podem ter a nova designação do mesmo modo contanto que outras imagens tal como as imagens P sejam capazes de trocar os fluxos e que exista uma etapa para deletar todas as imagens desnecessárias para referência. A figura 24 é um diagrama de blocos apresentando a estrutura do aparelho de codificação de imagem capaz de realizar o método de codificação na décima segunda modalidade. A unidade de geração de número de imagem (PNGen) gera números de imagem (PN). Os números de imagem (PN) são IDs que identificam as imagens armazenadas na memória de imagem de referencia (Mem), para cada imagem armazenada na memória de imagem de referência (Mem) é dado um número de imagem (PN) exclusivo. Basicamente, os números de imagem (PN) são incrementados de 1 cada vez que uma imagem é armazenada na memória de imagem de referência (Mem). Além disso, os números de imagem (PN) das imagens S correntes são inicializados para "0" após as imagens S serem codificadas de acordo com a notificação a partir da unidade de codificação de imagem (PicEnc).
Quando a informação de tipo de imagem (PicType) apresenta que as imagens são imagens S (correspondendo ao processamento da etapa 3 na figura 23), a unidade de deleção de imagem 5 (PicDel) notifica a memória de imagem de referência (Mem) de uma ordem para deletar as imagens, exceto as imagens a serem codificadas (informação de deleção de todas as imagens) armazenadas na memória de imagem de referência (Mem) e notifica a unidade de codificação de comprimento variável (VLC) da informação ao mesmo tempo. A unidade de codificação de imagem (PicEnc) refere-se às imagens armazenadas na memória de imagem de referência (Mem) de modo a codificar o sinal de imagem de entrada (Vin) nos tipos de imagem apresentados pela informação de tipo de imagem (PicType) simultaneamente executando a conversão de freqüência e a quantização e envia os resultado para a unidade de decodificação de imagem (PicDec) e para a unidade de codificação de comprimento variável (VLC). Além disso, a unidade de codificação de imagem (PicEnc) notifica a unidade de geração de número de imagem 2 (PNGen) da ordem para inicializar os números de imagem (PN) após codificar as imagens S. A unidade de decodificação de imagem (PicDec) de forma inversa quantiza e de forma inversa converte a informação codificada na unidade de codificação de imagem (PicEnc) nos tipos de imagem apresentados como a informação de tipo de imagem (PicType) e armazena a informação na memória de imagem de referência (Mem) associando com os números de imagem (PN) de modo a referir-se aos tipos de imagem na codificação de imagem seguinte. A unidade de codificação de comprimento variável (VLC) executa a codificação de comprimento variável em relação à informação codificada na unidade de codificação de imagem (PicEnc) de modo a formar um fluxo de bits e codifica a informação necessária na decodificação, tal como a informação para deletar as imagens armazenadas na memória de imagem de referência (Mem) (ou seja, a informação de deleção de todas as imagens) notificada pela unidade de deleção de imagem 5 (PicDel), os números de imagem (PN) e a informação de tipo de imagem (PicType) para emitir a informação como os sinais codificados (Str). A seguir, o método de decodificação será explicado abaixo utilizando a figura 23B. A figura 23B apresenta o processamento de decodificação dos sinais codificados.
Primeiro, os números de imagem (PN) são decodificados na etapa 9. A seguir, é julgado se a informação de deleção de todas as imagens está ou não codificada na etapa 10.
Quando a informação de deleção de todas as imagens é julgada como estando codificada na etapa 10, a informação de deleção de todas as imagens é decodificada na etapa 11. Além disso, as imagens são decodificadas na etapa 12A. Após isto, todas as imagens, exceto as imagens a serem decodificadas na memória, são deletadas na etapa 13 e os números de imagem (PN) são inicializados na etapa 14. Até este ponto, o processamento para decodificar a informação adicional e para inicializar os números de imagem (PN) termina.
Quando a informação de deleção de todas as imagens é julgada como não estando codificada na etapa 10, as imagens são decodificadas na etapa 12B e o processamento para decodificar a informação adicional e ini-cializar os números de imagem (PN) é completado na etapa 12B. A inicialização dos números de imagem (PN) na etapa 14 é tal de modo a fornecer o número de imagem de "O" para as imagens decodificadas. Em outras palavras, quando decodificando-se os sinais codificados de acordo com o procedimento de codificação apresentado na figura 23A, inicializar os números de imagem (PN) das imagens S significa fornecer para as imagens após as imagens S na ordem de tempo de exibição, novos números de imagem contínuos começando a partir do número de imagem das imagens S.
Quando existe uma etapa para deletar todas as imagens na figura 23B, o processamento para inicializar os números de imagem (PN) é necessário, em outras palavras, o julgamento quanto a se os números de imagem devem ou não ser inicializados não é influenciado pelos tipos de imagem a serem decodificadas. Além disso, o processamento para inicializar os números de imagem (PN) na etapa 14 pode ser executado antes do processamento para deletar todas as imagens, exceto as imagens a serem codificadas, na memória na etapa 13. É possível não codificar a informação adicional por utilizar tipos de imagem (PicType) especiais que incluam a informação adicional significando deletar todas as imagens, exceto as imagens a serem decodificadas a partir da memória para referência, na decodi-ficação. A figura 25 é um diagrama de blocos apresentando a estrutura do aparelho de decodificação de imagem que realiza o método de decodifi-cação desta décima segunda modalidade. A unidade de decodificação de comprimento variável (VLD) decodifica os sinais codificados (Str) e emite várias informações (tal como uma ordem para deletar as imagens armazenadas na memória de imagem de referência (Mem), a informação de tipo de imagem (PicType), os números de imagem (PN), a informação para a nova designação dos números de imagem (PN) e os dados da imagem).
Primeiro, a ordem para deletar as imagens armazenadas na memória de imagem de referência (Mem) obtida na unidade de decodifica-ção de comprimento variável (VLD) (informação de deleção de todas as imagens) é enviada para a unidade de deleção de imagem 6 (PicDel). A seguir, a unidade de deleção de imagem 6 (PicDel) deleta as imagens especificadas armazenadas na memória de imagem de referência (Mem). A informação de tipo de imagem (PicType) obtida na unidade de decodificação de comprimento variável (VLD) é enviada para a unidade de decodificação de imagem (PicDec) para especificar o método de decodificação.
Os números de imagem (PN) obtidos na unidade de decodificação de comprimento variável (VLD) é enviada para a memória de imagem de referência (Mem) para ser utilizada como os números de imagem (PN) na hora de armazenar as imagens decodificadas na unidade de decodificação de imagem (PicDec). A informação de deleção de todas as imagens obtida na unidade de decodificação de comprimento variável (VLD) é enviada para a unidade de alteração de número de imagem 2 (PNchg). A unidade de alteração de número de imagem 2 (PNchg) faz a nova designação (inicializa) dos números de imagem (PN) das imagens armazenadas na memória de imagem de referência (Mem) de acordo com a ordem. Para ser específico, após todas as imagens, exceto as imagens a serem decodificadas (as imagens S), na memória de imagem de referência, a unidade de alteração de número de imagem 2 (PNchg) lê os números de imagem (PN) das imagens armazenadas na memória de imagem de referência (Mem), altera os valores dos números de imagem (PN) lidos para "0" e grava os números de imagem (PN) na memória de imagem de referência (Mem).
Os dados da imagem obtidos na unidade de decodificação de comprimento variável (VLD) são decodificados utilizando-se o método de decodificação baseado no tipo de imagem apresentado pela informação de tipo de imagem (PicType) na unidade de decodificação de imagem (PicDec). Em outras palavras, as imagens P e as imagens B são decodificadas referindo-se às imagens armazenadas na memória de imagem de referência (Mem) enquanto as imagens I são decodificadas sem referir-se às imagens na memória de imagem de referência. As imagens decodificadas obtidas deste modo são armazenadas na memória de imagem de referência (Mem) e emitidas como sinais de imagem decodificados (Vout). A estrutura mencionada acima torna possível realizar o aparelho de decodificação de imagem para realizar o método de decodificação de imagem apresentado na figura 23 e proporciona um aparelho de decodificação com alta resistência a erro. O processamento dos métodos de codificação e de decodificação apresentados nesta décima segunda modalidade tornam as condições da memória em uma pluralidade de fluxos idênticos após trocar os fluxos de um fluxo predeterminado para outro fluxo e assim torna possível de forma correta especificar as imagens predeterminadas na memória mesmo quando as imagens de referência são requeridas na codificação por intra-predição e assim por diante. É possível alterar imagens I para imagens especiais nas quais os fluxos podem ser reproduzidos por se deletar todas as imagens na memória de referência quando utilizando-se imagens I ao mesmo tempo que a modalidade mencionada acima explica que a informação adicional (a informação de deleção de todas as imagens) e os tipos de imagem (PicType) podem ser codificados todos de uma vez. Estas imagens I especiais são chamadas de Renovadoras Instantâneas do Decodificador (IDR). Uma imagem IDR é eficaz como uma imagem I principal do Grupo de Imagens (GOP) porque as imagens IDR tornam-se uma posição inicial de acesso aleatório. Por determinar que todas as imagens, exceto as imagens correntes na memória, são deletadas e os números de imagem (PN) são inicializados após a codificação das imagens correntes cada vez que estas imagens IDR são codificadas, não existe necessidade de codificar informação adicional, mesmo quando todas as imagens, exceto as imagens correntes na memória, são deletadas no aparelho de decodificação de imagem. Neste caso, o aparelho de decodificação de imagem detecta as imagens IDR nos fluxos codificados baseado nos tipos de imagem, deleta todas as imagens, exceto as imagens IDR correntes na memória e inicializa os números de imagem (PN) após codificar e decodificar as imagens IDR correntes mesmo quando qualquer informação adicional não é codificada cada vez que as imagens IDR são decodificadas. (Décima Terceira Modalidade) Além disso, armazenar programas para realizar as estruturas dos métodos de codificação e de decodificação de imagem apresentados nas modalidades mencionadas acima em um meio de armazenamento tal como um disco flexível torna possível facilmente executar o processamento apresentado nas modalidades acima no sistema de computador independente. A figura 26 é uma ilustração com respeito ao meio de armazenamento para armazenar o programa para realizar os métodos de codificação e de decodificação apresentados na primeira até a décima segunda modalidades mencionadas acima nos sistemas de computador. A figura 26B apresenta um disco flexível e uma vista frontal e a vista em seção transversal da aparência do disco flexível e a figura 26A apresenta um exemplo de um formato físico de um disco flexível como um corpo do meio de gravação. Um disco flexível (FD) está contido em um invólucro F, uma pluralidade de trilhas (Tr) são formadas de forma concêntrica na superfície do disco a partir da periferia para dentro do raio interno do disco e cada trilha é dividida em 16 setores (Se) na direção angular. Portanto, no caso do disco flexível armazenando o programa mencionado acima, o método de codificação de imagem e o método de decodificação de imagem como o programa é gravado em uma área alocada para o mesmo no disco flexível (FD).
Além disso, a figura 26C apresenta a estrutura para gravar e ler o programa no disco flexível (FD). Quando o programa é gravado no disco flexível (FD), o sistema de computador (Cs) grava no método de codificação de imagem ou no método de decodificação de imagem como um programa via um controlador do disco flexível. Quando o método de codificação de imagem e o método de decodificação de imagem mencionados acima são construídos no sistema de computador pelo programa no disco flexível, o programa é lido a partir do controlador de disco flexível e transferido para o sistema de computador. A explicação acima é feita utilizando um disco flexível como um meio de gravação, mas o mesmo processamento pode ser também executado utilizando um disco ótico. Em adição, o meio de gravação não está limitado aos discos flexíveis e aos discos óticos, em outras palavras, qualquer outro meio capaz de gravar um programa como CD-ROMs, cartões de memória e cassetes ROM podem ser utilizados.
Aqui, as aplicações do método de codificação de imagem e do método de decodificação de imagem apresentados nas modalidades mencionadas acima e o sistema utilizando os mesmos serão adicionalmente explicados. A figura 27 é um diagrama de blocos apresentando a configuração como um todo de um sistema de suprimento de conteúdo ex100 para realizar o serviço de distribuição de conteúdo. A área para proporcionar o serviço de comunicação é dividida em células de tamanhos desejados e os locais de célula ex107 até ex110 de estação fixas sem fio são colocadas nas respectivas células.
Este sistema de suprimento de conteúdo ex100 está conectado com os aparelhos tal como um computador ex111, um Assistente Pessoal Digital (PDA) ex112, uma câmara ex113, um telefone celular ex114 e um telefone celular com uma câmara ex115 via, por exemplo, uma combinação da Internet ex101, um provedor de serviço Internet ex102, uma rede de telefone ex104 e locais de célula ex107 até ex110.
Entretanto, o sistema de suprimento de conteúdo ex100 não está limitado à configuração como apresentado na figura 27 e pode estar conectado com uma combinação de qualquer um dos mesmos. Além disso, cada aparelho pode ser conectado diretamente com a rede de telefone ex104, não através dos locais de célula como estações de rádio fixas ex107 até ex110. A câmara ex113 é um aparelho capaz de filmar vídeo (imagens em movimento) tal como uma câmara de vídeo digital. O telefone celular pode ser um telefone celular de um sistema de Comunicação Digital Pessoal (PDC), de um sistema de Acesso Múltiplo por Divisão de Código (CDMA), um sistema de Acesso Múltiplo por Divisão de Código de Banda Larga (W-CDMA) ou um Sistema Global para Comunicações Móvel (GSM), um sistema de Telefone de Mão Pessoal (PHS) ou semelhante.
Um servidor ex103 está conectado com a câmara ex113 via a rede de telefone ex104 e do local de célula ex109, o que permite a distribuição ao vivo ou semelhante utilizando a câmara ex113 baseado nos dados codificados transmitidos a partir do usuário. A câmara ex113 ou o servidor para transmitir os dados podem codificar os dados filmados. Além disso, os dados de imagem em movimento filmados por uma câmara 116 podem ser transmitidos para o servidor ex103 via o computador ex111. A câmara ex116 é um aparelho capaz de filmar imagens em movimento e paradas tal como uma câmara digital. A câmara ex116 ou o computador ex111 podem codificar os dados de imagem em movimento. Uma LSI ex117 incluída no computador ex111 ou na câmara ex116 executa o processamento de codificação. O software para codificar e decodificar as imagens pode estar integrado dentro de qualquer tipo de meio de armazenamento tal como CD-ROMs, discos flexíveis e discos rígidos que seja um meio de gravação legível pelo computador ex111 ou semelhante. Adicionalmente, um telefone celular ex115 pode transmitir os dados de imagem em movimento. Estes dados de imagem são os dados codificados pela LSI incluída no telefone celular ex115. O sistema de suprimento de conteúdo ex100 codifica o conteúdo (tal como um vídeo de música ao vivo) filmado pelos usuários utilizando a câmara ex113, a câmara ex116 ou semelhante, da mesma maneira que as modalidades mencionadas acima, e transmite o mesmo para o servidor ex103, enquanto o servidor ex103 faz a distribuição do fluxo de dados de conteúdo para os clientes quando de sua requisição. Os clientes incluem o computador ex111, o PDA ex112, a câmara ex113, o telefone celular ex114 e assim por diante, que são capazes de decodificar os dados codificados menciona- dos acima. No sistema de suprimento de conteúdo ex100, os clientes podem assim receber e reproduzir os dados codificados e adicionalmente podem receber, decodificar e reproduzir os dados em tempo real de modo a realizar a difusão pessoal deste modo.
Quando cada aparelho neste sistema executa a codificação ou a decodificação, o aparelho de codificação de imagem ou o aparelho de de-codificação de imagem pode ser utilizado, como apresentado nas modalidades mencionadas acima.
Um telefone celular será explicado como um exemplo do aparelho. A figura 28 é um diagrama apresentando o telefone celular ex115 utilizando o método de codificação de imagem e o método de decodificação de imagem explicados nas modalidades mencionadas acima. O telefone celular ex115 possui uma antena ex201 para comunicação com o local de célula ex110 via ondas de rádio, uma unidade de câmara ex203 capaz de filmar imagens em movimento e paradas tal como uma câmara CCD, uma unidade de exibição ex202 tal como um vídeo de cristal líquido para exibir os dados obtidos por se decodificar as imagens e semelhantes, filmadas pela unidade de câmara ex203 e recebidas pela antena ex201, uma unidade de corpo incluindo um conjunto de teclas de operação ex204, uma unidade de saída de voz ex208 tal como um alto-falante para emitir vozes, uma unidade de entrada de voz 205 tal como um microfone para entrada de vozes, um meio de armazenamento ex207 para armazenar dados codificados ou decodificados tal como das imagens em movimento ou paradas filmadas pela câmara, dados de correios eletrônicos recebidos e dados de imagens em movimento ou paradas e uma unidade de conexão ex206 para ligar o meio de armazenamento ex207 com o telefone celular ex115. O meio de armazenamento ex207 é equipado com uma memória flash, um tipo de Memória somente para leitura programável (EEPROM) que é uma memória não volátil que pode ser eletricamente apagada e regravada, em um invólucro plástico tal como cartões SD. A seguir, o telefone celular ex115 será explicado com referência à figura 29. No telefone celular ex115, uma unidade de controle principal ex311 para controle geral de cada unidade da unidade de corpo incluindo a unidade de vídeo ex202 e as teclas de operação ex204 está conectada com uma unidade de circuito de suprimento de força ex310, uma unidade de controle de entrada de operação ex304, uma unidade de codificação de imagem ex312, uma unidade de interface com a câmara ex303, um Vídeo de Cristal Líquido (LCD) ex302, uma unidade de decodificação de imagem ex309, uma unidade de demultiplexação ex308, uma unidade de gravação e de reprodução ex307, uma unidade de circuito de modem ex306 e uma unidade de processamento de voz ex305, uns com os outros através do barra-mento síncrono ex313.
Quando uma tecla de término de chamada ou uma tecla de ativação é ligada pela operação de um usuário, a unidade de circuito de suprimento de força ex310 fornece para os respectivos componentes energia a partir de uma bateria, de modo a ativar o telefone celular digital com uma câmara ex115 para colocar o mesmo no estado de pronto.
No telefone celular ex115, a unidade de processamento de voz ex305 converte os sinais de voz recebidos pela unidade de entrada de voz ex205 em modo de conversão para dados de voz digitais sob o controle da unidade de controle principal ex311 incluindo uma CPU, uma ROM e uma RAM, a unidade de circuito de modem ex306 executa o processamento de espectro de difusão dos dados de voz digitais e a unidade de circuito de comunicação ex301 executa a conversão de digital para analógico e a transformação de freqüência dos dados, de modo a transmitir os mesmos via a antena ex201. Além disso, no telefone celular ex115, a unidade de circuito de comunicação ex301 amplifica os dados recebidos pela antena ex201 no modo de conversação e executa a transformação de freqüência e a conversão analógico para digital para os dados, a unidade de circuito de modem ex306 executa o processamento inverso de espectro de difusão dos dados e a unidade de processamento de voz ex305 converte os mesmos para dados de voz analógicos, de modo a emitir os mesmos via a unidade de saída de voz 208.
Adicionalmente, quando transmitindo um correio eletrônico no modo de comunicação de dados, os dados de texto do correio eletrônico informados por se operar as teclas de operação ex204 da unidade de corpo são enviados para a unidade de controle principal ex311 através da unidade de controle de entrada de operação ex304. Na unidade de controle principal ex311, após a unidade de circuito de modem ex306 executar o processamento de espectro de difusão dos dados de texto e a unidade de circuito de comunicação ex301 executar a conversão digital para analógico e a transformação de frequência para os mesmos, os dados são transmitidos para o local de célula ex110 via a antena ex201.
Quando dados de imagem são transmitidos no modo de comunicação de dados, os dados da imagem em movimento filmados pela unidade de câmara ex203 são fornecidos para a unidade de codificação de imagem ex312 via a unidade de interface com a câmara ex303. Quando os dados de imagem não são transmitidos, também é possível exibir os dados da imagem filmados pela unidade de câmara ex203 diretamente na unidade de vídeo 202 via a unidade de interface com a câmara ex303 e a unidade de controle do LCD ex302. A unidade de codificação de imagem ex312, a qual inclui o aparelho de codificação de imagem como explicado na presente invenção, compacta e codifica os dados da imagem fornecidos a partir da unidade de câmara ex203 pelo método de codificação utilizado para o aparelho de codificação de imagem como apresentado nas modalidades mencionadas acima de modo a transformar os mesmos em dados de imagem codificados e envia os mesmos para a unidade de demultiplexação ex308. Nesta hora, o telefone celular ex115 envia as vozes recebidas pela unidade de entrada de voz ex205 durante a filmagem pela unidade de câmara ex203 para a unidade de demultiplexação ex308 como dados de voz digitais via a unidade de processamento de voz ex305. A unidade de demultiplexação ex308 multiplexa os dados de imagem codificados fornecidos a partir da unidade de codificação de imagem ex312 e os dados de voz fornecidos a partir da unidade de processa- mento de voz ex305 utilizando um método predeterminado, a unidade de circuito de modem ex306 executa o processamento de espectro de difusão dos dados multiplexados obtidos como um resultado da multiplexação e a unidade e circuito de comunicação ex301 executa a conversão digital para analógico e a transformação de freqüência dos dados para transmitir via a antena ex201.
No que diz respeito a receber dados de um arquivo de imagem em movimento que está ligado com uma página da Rede (Web) ou semelhante no modo de comunicação de dados, a unidade de circuito de modem ex306 executa o processamento de espectro de difusão dos dados recebidos a partir do local da célula ex110 via a antena ex201 e envia os dados multiplexados obtidos como resultado do processamento para a unidade de demultiplexação ex308.
De modo a decodificar os dados multiplexados recebidos via a antena ex201, a unidade de demultiplexação ex308 separa os dados multiplexados em um fluxo de bits de dados de imagem e em um fluxo de bits de dados de voz e fornece os dados de imagem codificados correntes para a unidade de decodificação de imagem ex309 e os dados de voz correntes para a unidade de processamento de voz ex305, respectivamente, via o bar-ramento síncrono ex313. A seguir, a unidade de decodificação de imagem ex309, a qual inclui o aparelho de decodificação de imagem como explicado na presente invenção decodifica o fluxo de bits de dados de imagem utilizando o método de decodificação correspondendo ao método de codificação, como apresentado nas modalidades mencionadas acima para gerar os dados de imagem em movimento reproduzidos e fornece estes dados para a unidade de vídeo ex202 via a unidade de controle LCD ex302 e assim os dados de imagem em movimento incluídos em um arquivo de imagem em movimento ligados com uma página da Rede, por exemplo, são exibidos. Ao mesmo tempo, a unidade de processamento de voz ex305 converte os dados de voz em dados de voz analógicos e fornece estes dados para a unidade de saída de voz ex208 e assim os dados de voz incluídos no arquivo de imagem em movimento ligado com uma página da Rede, por exemplo, são reproduzidos. A presente invenção não está limitada ao sistema mencionado acima e pelo menos o aparelho de codificação de imagem ou o aparelho de decodificação de imagem nas modalidades mencionadas acima pode ser incorporado em um sistema de difusão digital como apresentado na figura 30. Tal difusão digital terrestre ou por satélite tem estado nos noticiários ultimamente. Mais especificamente, um fluxo de bits de informação de vídeo é transmitido a partir de uma estação de difusão ex409 para um satélite de comunicação ou de difusão ex410 via ondas de rádio. Quando da recepção das mesmas, o satélite de difusão ex410 transmite ondas de rádio para difusão, uma antena de uso doméstico ex406 com uma função de recepção de difusão por satélite recebe as ondas de rádio e uma televisão (receptor) ex401 ou uma caixa decodificadora (STB) ex407 decodifica e reproduz o fluxo de bits. O aparelho de decodificação de imagem como apresentado nas modalidades mencionadas acima pode ser implementado no aparelho de reprodução ex403 para ler e decodificar o fluxo de bits gravado em um meio de armazenamento ex402 que é um meio de gravação tal como um CD e um DVD. Neste caso, os sinais de imagem em movimento reproduzidos são exibidos em um monitor ex404. Também é concebido implementar o aparelho de decodificação de imagem na caixa decodificadora ex407 conectada com um cabo ex405 para uma televisão a cabo ou para a antena ex406 para difusão por satélite e/ou terrestre de modo a reproduzir os mesmos em um monitor ex408 da televisão. O aparelho de decodificação de imagem pode ser incorporado na televisão, ao invés de na caixa decodificadora. Ou, um carro ex412 possuindo uma antena ex411 pode receber sinais a partir do satélite ex410 ou do local de célula ex107 para reproduzir as imagens em movimento em um aparelho de vídeo tal como um sistema de navegação de carro ex413.
Adicionalmente, o aparelho de codificação apresentado nas modalidades mencionadas acima pode codificar sinais de imagem para gravação em um meio de gravação. Como um exemplo concreto, existe um gravador ex420, tal como um gravador de DVD para gravar sinais de imagem em um disco DVD ex421 e um gravador de disco para gravar os mesmos em um disco rígido. Eles podem ser gravados em um cartão SD ex422. Se o gravador ex420 incluir o aparelho de decodificação de imagem apresentado nas modalidades mencionadas acima, os sinais de imagem gravados no disco DVD ex421 ou no cartão SD ex422 podem ser reproduzidos para exibição no monitor ex408.
Observe que uma estrutura imaginável do sistema de navegação de carro ex413, é a estrutura sem a unidade e câmara ex203, a unidade de interface com a câmara ex303 e a unidade de codificação de imagem ex312 que são componentes existente na figura 29. O mesmo vale para o computador ex111, para a televisão (receptor) ex401 e semelhantes.
Em adição, três tipos de implementações podem ser concebidas para um terminal tal como o telefone celular ex114 mencionado acima; um terminal de envio/recepção implementado tanto com um codificador como com um decodificador; um terminal de envio implementado somente com um codificador; e um terminal de recepção implementado somente com um decodificador.
Como descrito acima, é possível utilizar o método de codificação de imagem ou o método de decodificação de imagem nas modalidades mencionadas acima em qualquer um dos aparelhos e sistemas mencionados acima e por utilizar este método, os efeitos explicados nas modalidades acima podem ser obtidos. A partir da invenção assim descrita, será óbvio que as modalidades da invenção podem ser variadas de vários modos. Tais variações não são para ser consideradas como uma saída do espírito e do escopo da invenção e todas tais modificações como seriam óbvias para os versados na técnica são pretendidas para inclusão dentro do escopo das reivindicações seguintes.
Aplicabilidade Industrial O aparelho de codificação de imagem de acordo com a presente invenção é útil como o aparelho de codificação de imagem instalado nos computadores pessoais com funções de comunicação, PDAs, estações de difusão digital, e em telefones celulares.
Além disso, o aparelho de decodificação de imagem de acordo com a presente invenção é útil como o aparelho de decodificação de imagem instalado em computadores pessoais com funções de comunicação, PDAs, STBs recebendo difusão digital e telefones celulares.
REIVINDICAÇÕES
Claims (34)
1. Método de decodificação de imagem para decodificar um sinal codificado, o método caracterizado por compreender: obter um número de imagem a partir de um sinal codificado; extrair primeira informação a partir do sinal codificado, a primeira informação inclui uma instrução para liberar todas as imagens armazenadas em uma memória; decodificar o sinal codificado para obter uma imagem decodificada; armazenar a imagem decodificada na memória; liberar todas as imagens, que são armazenadas na memória antes de extrair a primeira informação, após a primeira informação ser extraída do sinal codificado, e iniciar o número de imagem obtido após a decodificação do sinal codificado, e atribuir um novo número de imagem à imagem decodificada, após a primeira informação ser extraída do sinal codificado.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a liberação de todas as imagens é executada após a decodificação do sinal codificado.
3. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a imagem armazenada na memória é uma imagem de referência, e todas as imagens que são liberadas na liberação de todas as imagens são imagens de referência.
4. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a liberação de todas as imagens armazenadas na memória é executada pela marcação da informação, que indica a liberação de todas as imagens decodificadas armazenadas na memória.
5. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a primeira informação é incluída no sinal codificado.
6. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a primeira informação é informação que indica uma imagem de atualização de decodificador instantânea.
7. Método, de acordo com a reivindicação 6, caracterizado pelo fato de que a imagem de atualização de decodificador instantânea é uma imagem codificada por intra-predição.
8. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a primeira informação é informação do tipo de imagem que indica uma imagem codificada por intra-predição.
9. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que uma imagem codificada por intra-predição , que inclui a primeira informação, é decodificada como um começo da decodificação em uma de-codificação de acesso aleatório.
10. Aparelho de decodificação de imagem que decodifica um sinal codificado, o aparelho caracterizado por compreender: uma unidade de obtenção de um número de imagem operável para obter um número de imagem a partir de um sinal codificado; uma unidade de extração operável para extrair primeira informação a partir do sinal codificado obtido pela unidade de obtenção de número de imagem, a primeira informação inclui uma instrução para liberar todas as imagens armazenadas em uma memória; uma unidade de decodificação de imagem operável para obter uma imagem decodificada pela decodificação do sinal codificado; uma unidade de armazenamento operável para armazenar a imagem decodificada na memória; uma unidade de liberação operável para liberar todas as imagens, que são armazenadas na memória antes da unidade de extração extrair a primeira informação, após a primeira informação ser extraída do sinal codificado, e uma unidade de atribuição operável para iniciar o número de imagem obtido após a unidade de decodificação de imagem ter decodificado o sinal codificado, e para atribuir um novo número de imagem à imagem decodificada, após a primeira informação ser extraída do sinal codificado.
11. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a unidade de liberação é operável para liberar todas as i- magens decodificadas armazenadas na memória após a unidade de decodi-ficação de imagem ter decodificado o sinal codificado.
12. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a imagem a ser armazenada na memória pela unidade de armazenamento é uma imagem de referência, e todas as imagens que são liberadas pela unidade de liberação também são imagens de referência.
13. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a unidade de liberação é operável para liberar todas as imagens armazenadas na memória pela marcação da informação, que indica a liberação de todas as imagens decodificadas armazenadas na memória.
14. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a primeira informação é incluída no sinal codificado.
15. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a informação de liberação é informação indicativa de uma imagem de atualização de decodificador instantânea.
16. Aparelho, de acordo com a reivindicação 15, caracterizado pelo fato de que a imagem de atualização de decodificador instantânea é uma imagem codificada por intra-predição.
17. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a informação de liberação é informação do tipo de imagem que indica uma imagem codificada por intra-predição.
18. Aparelho, de acordo com a reivindicação 10, caracterizado pelo fato de que a unidade de decodificação de imagem é operável para decodificar uma imagem codificada por intra-predição, que inclui a informação de liberação, como um começo da decodificação em uma decodificação de acesso aleatório.
19. Método de codificação para codificação de uma imagem móvel, o método caracterizado por compreender: codificação de um número de imagem de uma imagem a ser codificada; codificação de primeira informação, a primeira informação inclui uma instrução que indica que todas as imagens, que estão armazenadas em uma memória antes da codificação da imagem a ser codificada, devem ser liberadas; emissão de uma imagem codificada pela codificação da imagem a ser codificada; geração de uma imagem decodificada pela decodificação da imagem codificada; liberação de todas as imagens que estão armazenadas na memória antes da codificação da imagem a ser codificada; armazenamento da imagem decodificada em uma memória; e inicialização do número de imagem da imagem a ser codificada e atribuição de um novo número de imagem a uma imagem a ser codificada que segue a imagem a ser codificada.
20. Método, de acordo com a reivindicação 19, caracterizado pelo fato de que a liberação de todas as imagens é executada após a geração da imagem decodifica pela decodificação da imagem codificada.
21. Método, de acordo com a reivindicação 19, caracterizado pelo fato de que uma imagem armazenada na memória é uma imagem de referência, e todas as imagens que são liberadas na liberação de todas as imagens armazenadas na memória também são imagens de referência.
22. Método, de acordo com a reivindicação 19, caracterizado pelo fato de que a liberação de todas as imagens armazenadas na memória é executada pelo estabelecimento de informação, que indica a liberação para todas as imagens decodificadas armazenadas na memória.
23. Método, de acordo com a reivindicação 19, caracterizado pelo fato de que a primeira informação é informação que indica uma imagem de atualização de decodificador instantânea.
24. Método, de acordo com a reivindicação 23, caracterizado pelo fato de que a imagem de atualização de decodificador instantânea é uma imagem codificada por intra-predição.
25. Método, de acordo com a reivindicação 19, caracterizado pelo fato de que a primeira informação é informação do tipo de imagem que indica uma imagem codificada por intra-predição.
26. Aparelho de codificação para codificar uma imagem móvel, o aparelho caracterizado por compreender: uma unidade de codificação de número de imagem operável para codificar um número de imagem de uma imagem a ser codificada; uma unidade de codificação de informação de liberação operável para codificar primeira informação, a primeira informação inclui uma instrução que indica que todas as imagens, que estão armazenadas em uma memória antes da codificação da imagem a ser codificada, devem ser liberadas; unidade de codificação de imagem operável para emitir uma imagem codificada pela codificação da imagem a ser codificada; unidade de decodificação de imagem operável para gerar uma imagem decodificada pela decodificação da imagem codificada; unidade de liberação operável para liberar todas as imagens que estão armazenadas na memória antes da codificação da imagem a ser codificada; unidade de armazenamento operável para armazenar a imagem decodificada na memória; e unidade de atribuição operável para iniciar o número de imagem da imagem a ser codificada e atribuir um novo número de imagem a uma imagem a ser codificada que segue a imagem a ser codificada.
27. Aparelho, de acordo com a reivindicação 26, caracterizado pelo fato de que a unidade de liberação é operável para liberar todas as imagens armazenadas na memória após a unidade de decodificação de imagem ter decodificado o sinal codificado.
28. Aparelho, de acordo com a reivindicação 26, caracterizado pelo fato de que a imagem a ser armazenada na memória pela unidade de armazenamento é uma imagem de referência, e todas as imagens que são liberadas pela unidade de liberação também são imagens de referência.
29. Aparelho, de acordo com a reivindicação 26, caracterizado pelo fato de que a unidade de liberação é operável para liberar todas as imagens armazenadas na memória pela marcação da informação, que indica a liberação para todas as imagens armazenadas na memória.
30. Aparelho, de acordo com a reivindicação 26, caracterizado pelo fato de que a primeira informação é informação indicativa de uma imagem de atualização de decodificador instantânea.
31. Aparelho, de acordo com a reivindicação 30, caracterizado pelo fato de que a imagem de atualização de decodificador instantânea é uma imagem codificada por intra-predição.
32. Aparelho, de acordo com a reivindicação 26, caracterizado pelo fato de que a primeira informação é informação do tipo de imagem que indica uma imagem de intra-predição.
33. Método de decodificação de imagem para decodificar um sinal codificado, o método caracterizado por compreender: obter um número de imagem a partir de um sinal codificado; extrair primeira informação a partir do sinal codificado, a primeira informação inclui uma instrução para atribuir todas as imagens armazenadas em uma memória para serem não utilizadas; decodificar o sinal codificado para obter uma imagem decodificada; armazenar a imagem decodificada na memória; atribuir todas as imagens armazenadas na memória para serem não utilizadas após a primeira informação ser extraída do sinal codificado, em que todas as imagens são armazenadas na memória antes da extração da primeira informação; e iniciar o número de imagem obtido após a decodificação do sinal codificado, e atribuir um novo número de imagem à imagem decodificada, após a primeira informação ser extraída do sinal codificado.
34. Método de codificação para codificação de uma imagem móvel, o método caracterizado por compreender: codificação de um número de imagem de uma imagem a ser codificada; codificação de primeira informação, a primeira informação inclui uma instrução que indica que todas as imagens, que estão armazenadas em uma memória antes da codificação da imagem a ser codificada, devem ser não utilizadas; emissão de uma imagem codificada pela codificação da imagem a ser codificada; geração de uma imagem decodificada pela decodificação da imagem codificada; atribuição para serem não utilizadas de todas as imagens que estão armazenadas na memória antes da codificação da imagem a ser codificada; armazenamento da imagem decodificada em uma memória; e inicialização do número de imagem da imagem a ser codificada e atribuição de um novo número de imagem a uma imagem a ser codificada que segue a imagem a ser codificada.
Family
ID=
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1496706B1 (en) | S-pictures decoding method by buffer reset and PN reordering for continuity. | |
JP5355807B2 (ja) | 符号化データ配信方法および配信システム | |
JP2010226743A (ja) | 画像復号化方法、画像復号化装置およびプログラム | |
JP4405272B2 (ja) | 動画像復号化方法、動画像復号化装置及びプログラム | |
JP5171662B2 (ja) | 画像符号化方法および画像符号化装置 | |
BRPI0304528B1 (pt) | Method and apparatus for image coding and method and apparatus for image decoding |