BRPI0710048A2 - método e aparelho para decodificar / codificar um sinal de vìdeo - Google Patents

Abstract

MéTODO E APARELHO PARA DECODIFICAR 1 CODIFICAR UM SINAL DE VIDEO A presente invenção fornece um método para decodificar um sinal de vídeo. O método inclui as etapas de verificar um esquema de codificação do sinal de vídeo, obter informação de configuração para o sinal de vídeo de acordo com o esquema de codificação, reconhecer um número total de visualizações usando a informação de configuração, reconhecer informação de referência inter-visualização com base no número total de visualizações, e decodificar o sinal de vídeo com base na informação de referência inter-visualização, em que a informação de configuração inclui pelo menos informação de visualização para identificar uma visualização do sinal de vídeo.

Description

"MÉTODO E APARELHO PARA DECODIFICAR / CODIFICAR UM 'SINAL DEVÍDEO"

CAMPO TÉCNICO

A presente invenção diz respeito a um método para codificar / decodificar um sinalde vídeo e a um aparelho deste.

ANTECEDENTES DA INVENÇÃO

Codificação de compressão significa uma série de técnicas de processamento desinal para transmitir informação digitalizada por meio de circuito de comunicação ou paraarmazenar informação digitalizada de uma forma adequada em uma mídia dearmazenamento. Objetos para a codificação de compressão incluem áudio, vídeo, texto econgêneres. Em particular, uma técnica para realizar codificação de compressão em umaseqüência é chamada de compressão de seqüência de vídeo. No geral, a seqüência devídeo é caracterizada por ter redundância espacial e redundância temporal.

DIVULGAÇÃO DA INVENÇÃOOBJETIVO TÉCNICO

O objetivo da presente invenção é melhorar a eficiência de codificação de um sinalde vídeo.

SOLUÇÃO TÉCNICA

Um objetivo da presente invenção é codificar um sinal de vídeo eficientemente peladefinição de informação de visualização para identificar uma visualização de imagem.

Um outro objetivo da presente invenção é melhorar a eficiência de codificação pelacodificação de um sinal de vídeo com base em informação de referência intervisualização.

Um outro objetivo da presente invenção é fornecer escalabilidade de visualizaçãode um sinal de vídeo pela definição de informação de nível de visualização.

Um outro objetivo da presente invenção é codificar um sinal de vídeoeficientemente pela definição de um identificador de prognóstico de síntese intervisualizaçãoque indica se deve-se obter uma imagem de uma visualização virtual.

EFEITOS VANTAJOSOS

Na codificação de um sinal de vídeo, a presente invenção permite que a codificaçãoseja mais eficientemente realizada pela execução de prognóstico intervisualização usandoinformação de visualização para identificar uma visualização de imagem. E, pela recém-definição de informação de nível que indica informação para uma estrutura hierárquica parafornecer escalabilidade de visualização, a presente invenção pode fornecer uma seqüênciade visualização adequada para um usuário. Além do mais, pela definição de umavisualização correspondente a um nível mais inferior como uma visualização de referência, apresente invenção fornece compatibilidade com um decodificador convencional. Além disto,a presente invenção melhora a eficiência de codificação, decidindo se prognostica umaimagem de uma visualização virtual na realização do prognóstico intervisualização. No casode prognosticar uma imagem de uma visualização virtual, a presente invenção habilitaprognóstico mais preciso, reduzindo assim o número de bits a ser transmitidos.

DESCRIÇÃO RESUMIDA DOS DESENHOS

A figura 1 é um diagrama de blocos esquemático de um aparelho para decodificarum sinal de vídeo de acordo com a presente invenção.

A figura 2 é um diagrama de informação de configuração para um vídeomultivisualização adicionável em um fluxo contínuo de bits de vídeo multivisualizaçãocodificado de acordo com uma modalidade da presente invenção.

A figura 3 é um diagrama de blocos interno de uma unidade de construção de listade imagem de referência 620 de acordo com uma modalidade da presente invenção.

A figura 4 é um diagrama de uma estrutura hierárquica da informação de nível parafornecer escalabilidade de visualização de um sinal de vídeo de acordo com umamodalidade da presente invenção.

A figura 5 é um diagrama de uma configuração de unidade NAL que incluiinformação de nível em uma área de extensão de um cabeçalho NAL de acordo com umamodalidade da presente invenção.

A figura 6 é um diagrama de uma estrutura de prognóstico geral de um sinal devídeo multivisualização de acordo com uma modalidade da presente invenção para explicarum conceito de um grupo de imagem intervisualização.

A figura 7 é um diagrama de uma estrutura de prognóstico de acordo com umamodalidade da presente invenção para explicar um conceito de um grupo de imagemintervisualização recém-definido.

A figura 8 é um diagrama de blocos esquemático de um aparelho para decodificarum vídeo multivisualização que usa informação de identificação de grupo de imagemintervisualização de acordo com uma modalidade da presente invenção.

A figura 9 é um fluxograma de um processo para construir uma lista de imagem dereferência de acordo com uma modalidade da presente invenção.

A figura 10 é um diagrama para explicar um método para a inicialização de umalista de imagem de referência quando uma fatia atual for uma fatia P de acordo com umamodalidade da presente invenção.

A figura 11 é um diagrama para explicar um método para inicializar uma lista deimagem de referência quando uma fatia atual for uma fatia B de acordo com umamodalidade da presente invenção.

A figura 12 é um diagrama de blocos interno de uma unidade de reordenação delista de imagem de referência 630 de acordo com uma modalidade da presente invenção.

A figura 13 é um diagrama de blocos interno de uma unidade de mudança deatribuição de índice de referência 643B ou 645B de acordo com uma modalidade da ··'presente invenção.

A figura 14 é um diagrama para explicar um processo para reordenar uma lista deimagem de referência usando informação de visualização de acordo com uma modalidadeda presente invenção.

A figura 15 é um diagrama de blocos interno de uma unidade de reordenação delista de imagem de referência 630 de acordo com uma outra modalidade da presenteinvenção.

A figura 16 é um diagrama de blocos interno de uma unidade de reordenação delista de imagem de referência 970 para prognóstico intervisualização de acordo com umamodalidade da presente invenção.

A figura 17 e a figura 18 são diagramas de sintaxe para reordenação de lista deimagem de referência de acordo com uma modalidade da presente invenção.

A figura 19 é um diagrama de sintaxe para reordenação de lista de imagem dereferência de acordo com uma outra modalidade da presente invenção.

A figura 20 é um diagrama de um processo para obter um valor de diferença deiluminação de um bloco atual de acordo com uma modalidade da presente invenção.

A figura 21 é um fluxograma de um processo para realizar compensação deiluminação de um bloco atual de acordo com uma modalidade da presente invenção.

A figura 22 é um diagrama de um processo para obter um valor de prognóstico dediferença de iluminação de um bloco atual usando informação para um bloco vizinho deacordo com uma modalidade da presente invenção.

A figura 23 é um fluxograma de um processo para realizar compensação deiluminação usando informação para um bloco vizinho de acordo com uma modalidade dapresente invenção.

A figura 24 é um fluxograma de um processo para realizar compensação deiluminação usando informação para um bloco vizinho de acordo com uma outra modalidadeda presente invenção.

A figura 25 é um diagrama de um processo para prognosticar uma imagem atualusando uma imagem em uma visualização virtual de acordo com uma modalidade dapresente invenção.

A figura 26 é um fluxograma de um processo para sintetizar uma imagem em umavisualização virtual na realização de um prognóstico intervisualização na MVC de acordocom uma modalidade da presente invenção.

A figura 27 é um fluxograma de um método para executar um prognósticoponderado de acordo com um tipo de fatia na codificação de sinal de vídeo de acordo com apresente invenção.A figura 28 é um diagrama de tipos de macroblocos permitidos em um tipo de fatiana codificação de sinal de vídeo de acordo com a presente invenção.

A figura 29 e a figura 30 são diagramas de sintaxe para executar um prognósticoponderado de acordo com um tipo de fatia recém-definido de acordo com uma modalidadeda presente invenção.

A figura 31 é um fluxograma de um método para executar um prognósticoponderado usando informação de indicador que indica se deve-se executar prognósticoponderado intervisualização na codificação de sinal de vídeo de acordo com a presenteinvenção.

A figura 32 é um diagrama para explicar um método de prognóstico ponderado deacordo com uma informação de indicador que indica se deve-se executar um prognósticoponderado usando informação para uma imagem em uma visualização diferente daquela deuma imagem atual de acordo com uma modalidade da presente invenção.

A figura 33 é um diagrama de sintaxe para executar um prognóstico ponderado deacordo com uma informação de indicador recém-definida de acordo com uma modalidadeda presente invenção.

A figura 34 é um fluxograma de um método para executar um prognósticoponderado de acordo com um tipo de unidade NAL (camada de abstração de rede) deacordo com uma modalidade da presente invenção.

A figura 35 e a figura 36 são diagramas de sintaxe para executar um prognósticoponderado no caso em que um tipo de unidade NAL for para codificação de vídeomultivisualização de acordo com uma modalidade da presente invenção.

A figura 37 é um diagrama de blocos parcial de um aparelho de decodificação desinal de vídeo de acordo com um tipo de fatia recém-definido de acordo com umamodalidade da presente invenção.

A figura 38 é um fluxograma para explicar um método para decodificar um sinal devídeo no aparelho mostrado na figura 37 de acordo com a presente invenção.

A figura 39 é um diagrama de um modo de prognóstico de macrobloco de acordocom uma modalidade da presente invenção.

A figura 40 e a figura 41 são diagramas de sintaxe com modo de tipo de fatia e demacrobloco aplicados de acordo com a presente invenção.

A figura 42 é um diagrama de modalidades nas quais os tipos de fatia da figura 41são aplicados.

A figura 43 é um diagrama de várias modalidades do tipo de fatia incluído nos tiposde fatia mostrados na figura 41.

A figura 44 é um diagrama de um macrobloco permitido para um tipo de fatiamisturado pelo prognóstico de dois prognósticos misturados de acordo com uma modalidadeda presente invenção. '

As figuras 45 a 47 são diagramas de um tipo de macrobloco de um macroblocoexistente em uma fatia misturada pelo prognóstico de dois prognósticos misturados deacordo com uma modalidade da presente invenção.

A figura 48 é um diagrama de blocos parcial de um aparelho de codificação de sinalde vídeo de acordo com um tipo de fatia recém-definido de acordo com uma modalidade dapresente invenção.

A figura 49 é um fluxograma de um método para codificar um sinal de vídeo noaparelho mostrado na figura 48 de acordo com a presente invenção.

MELHOR MODO PARA REALIZAR A INVENÇÃO

Para alcançar estas e outras vantagens e, de acordo com o propósito da presenteinvenção, da forma concebida e descrita no geral, um método para decodificar um sinal devídeo inclui as etapas de verificar e codificar esquema do sinal de vídeo, obter informaçãode configuração para o sinal de vídeo de acordo com o esquema de codificação, reconhecerum número total de visualizações usando a informação de configuração, reconhecerinformação de referência intervisualização com base no número total de visualizações, edecodificar o sinal de vídeo com base na informação de referência intervisualização, em quea informação de configuração inclui pelo menos informação de visualização para identificaruma visualização do sinal de vídeo.

Para alcançar adicionalmente estas e ainda outras vantagens e, de acordo com opropósito da presente invenção, um método para decodificar um sinal de vídeo inclui asetapas de verificar um esquema de codificação do sinal de vídeo, obter informação deconfiguração para o sinal de vídeo de acordo com o'esquema de codificação, verificar umnível para escalabilidade de visualização do sinal de vídeo a partir da informação deconfiguração, reconhecer informação de referência de intervisualização usando ainformação de configuração, e decodificar o sinal de vídeo com base no nível e nainformação de referência intervisualização, em que a informação de configuração incluiinformação de visualização para identificar uma visualização da imagem.MODO PARA A INVENÇÃO

Agora, será feita referência com detalhes às modalidades preferidas da presenteinvenção, exemplos das quais estão ilustrados nos desenhos anexos.

A técnica para comprimir e codificar dados de sinal de vídeo considera redundânciaespacial, redundância temporal, redundância escalável e redundância intervisualização. Eela também pode realizar uma codificação de compressão considerando uma redundânciamútua entre visualizações no processo de codificação de compressão. A técnica para acodificação de compressão, que considera a redundância intervisualização, é somente umamodalidade da presente invenção. E a idéia técnica da presente invenção é aplicável àredundância temporal, à redundância escalável, etc.

Examinando uma configuração de um fluxo contínuo de bits em H.264/AVC, existeuma estrutura de camada separada, chamada de NAL (camada de abstração de rede), entreuma VCL (camada de codificação de vídeo), que lida com o próprio processo de codificaçãode imagem em movimento, e um sistema inferior, que transporta e armazena informaçãocodificada. Uma saída de um processo de codificação são dados VCL que são mapeadospela unidade NAL antes do transporte ou do armazenamento. Cada unidade NAL incluidados de vídeo comprimidos ou RBSP (carga útil de seqüência de bytes brutos: dados deresultado da compressão da imagem em movimento) que são os dados correspondentes àinformação de cabeçalho.

Basicamente, a unidade NAL inclui um cabeçalho NAL e uma RBSP. O cabeçalhoNAL inclui informação de indicador (nal_ref_idc) que indica se uma fatia, como uma imagemde referência da unidade NAL, está incluída, e um identificador (nal_unit_type) que indica otipo da unidade NAL. Dados originais comprimidos são armazenados na RBSP. E bitdelimitador da RBSP é adicionado na última parte da RBSP para representar umcomprimento da RBSP como um múltiplo de 8 bits. Como o tipo da unidade NAL, háimagem IDR (atualização de decodificação instantânea), SPS (ajuste de parâmetro deseqüência), PPS (ajuste de parâmetro de imagem), SEI (informação de melhoriacomplementar), ou congêneres.

Na padronização, restrições para vários perfis e níveis são ajustadas para habilitara implementação de um produto alvo com um custo apropriado. Neste caso, umdecodificador deve satisfazer a restrição decidida de acordo com o perfil e nívelcorrespondentes. Assim, dois conceitos, "perfil" e "nível", são definidos para indicar umafunção ou parâmetro para representar quão distante o decodificador pode lidar com umafaixa de uma seqüência comprimida. E um indicador de perfil (profilejdc) pode identificarque um fluxo contínuo de bits é baseado em um perfil prescrito. O indicador de perfilsignifica um indicador que indica um perfil no qual um fluxo contínuo de bits é baseado. Porexemplo, em H.264/AVC, se um indicador de perfil for 66, isto significa que um fluxocontínuo de bits é baseado em um perfil de valor de referência. Se um indicador de perfil for77, isto significa que um fluxo contínuo de bits é baseado em um perfil principal. Se umindicador de perfil for 88, isto significa que um fluxo contínuo de bits é baseado em um perfilestendido. E o identificador de perfil pode ser incluído em um ajuste de parâmetro deseqüência.

Então, a fim de lidar com um vídeo multivisualização, é necessário identificar se umperfil de um fluxo contínuo de bits inserido é um perfil multivisualização. Se o perfil do fluxocontínuo de bits inserido for o perfil multivisualização, é necessário adicionar sintaxe parahabilitar pelo menos uma informação adicional para que multivisualização seja transmitida.Neste caso, o perfil multivisualização indica um modo de perfil que trata vídeomultivisualização como uma técnica de correção de H.264/AVC. Na MVC1 pode ser maiseficiente adicionar sintaxe como informação adicional para um modo MVC em vez desintaxe incondicional. Por exemplo, quando um indicador de perfil do AVC indicar um perfilmultivisualização, se informação para um vídeo multivisualização for adicionada, é possívelmelhorar a eficiência de codificação.

Um ajuste de parâmetro de seqüência indica informação de cabeçalho contendoinformação que transpõe codificação para uma seqüência geral, tais como um perfil, umnível e congêneres. Uma imagem em movimento completa comprimida, isto é, umaseqüência, deve começar em um cabeçalho de seqüência. Então, um ajuste de parâmetrode seqüência correspondente à informação de cabeçalho deve chegar em um decodificadorantes que os dados relacionados ao ajuste de parâmetro cheguem. A saber, a RBSP doajuste de parâmetro de seqüência desempenha um papel como a informação de cabeçalhopara os dados de resultado da compressão da imagem em movimento. Preferivelmente,uma vez que um fluxo contínuo de bits é inserido, um indicador de perfil identifica em qualde uma pluralidade de perfis o fluxo contínuo de bits inserido é baseado. Então, pela adiçãode uma parte para decidir se um fluxo contínuo de bits inserido diz respeito a um perfilmultivisualização na sintaxe (por exemplo, 'Se (profile_idc==MULTI_VIEW_PROFILE)'),decide-se se o fluxo contínuo de bits inserido diz respeito ao perfil multivisualização. Váriostipos de informação de configuração podem ser adicionados somente se o fluxo contínuo debits inserido for aprovado como relacionado ao perfil multivisualização. Por exemplo, pode-se adicionar inúmeras visualizações totais, inúmeras imagens de referência intervisualização(Lista0/1) no caso de um grupo de imagem intervisualização, inúmeras imagens dereferência intervisualização (Lista0/1) no caso de um grupo de imagem não intervisualizaçãoe congêneres, e várias informações para visualização são usadas para a geração e para ogerenciamento de uma lista de imagem de referência em um armazenamento temporário deimagem decodificada.

A figura 1 é um diagrama de blocos esquemático de um aparelho para decodificarum sinal de vídeo de acordo com a presente invenção.

Em relação à figura 1, um aparelho para decodificar um sinal de vídeo de acordocom a presente invenção inclui um analisador NAL 100, uma unidade de decodificação deentropia 200, uma unidade de quantização invertida / transformação invertida 300, umaunidade de intraprognóstico 400, uma unidade de filtro de desagrupamento 500, umaunidade de armazenamento temporário de imagem decodificada 600, uma unidade deinterprognóstico 700 e congêneres.

A unidade de armazenamento temporário de imagem decodificada 600 inclui umaunidade de armazenamento de imagem de referência 610, uma unidade de construção delista de imagem de referência 620, uma unidade de gerenciamento de imagem de referência650 e congêneres, e a unidade de construção de lista de imagem de referência 620 incluiuma unidade de derivação variável 625, uma unidade de inicialização de lista de imagem dereferência 630 e uma unidade de reordenação de lista de imagem de referência 640.

Ea unidade de interprognóstico 700 inclui uma unidade de compensação demovimento 710, uma unidade de compensação de iluminação 720, uma unidade deprognóstico de diferença de iluminação 730, uma unidade de prognóstico de síntese devisualização 740 e congêneres.

O analisador NAL 100 realiza análise pela unidade NAL para decodificar uma seqüência de vídeo recebida. No geral, pelo menos um ajuste de parâmetro de seqüência epelo menos um ajuste de parâmetro de imagem são transferidos para um decodificadorantes de um cabeçalho de fatia e de dados de fatia ser decodificados. Neste caso, váriostipos de informações de configuração podem ser incluídos em uma área do cabeçalho NALou em uma área de extensão de um cabeçalho NAL. Uma vez que MVC é uma técnica de correção para uma técnica AVC convencional, ela pode ser mais eficiente para adicionar asinformações de configuração no caso de somente um fluxo contínuo de bits MVC do que aadição incondicional. Por exemplo, ela pode adicionar informação de indicador paraidentificar presença ou não presença de um fluxo contínuo de bits MVC na área docabeçalho NAL ou na área de extensão do cabeçalho NAL. Somente se um fluxo contínuo de bits inserido for um fluxo contínuo de bits codificado de vídeo multivisualização de acordocom a informação do indicador, pode-se adicionar informações de configuração para umvídeo multivisualização. Por exemplo, as informações de configuração podem incluirinformação de nível temporal, informação de nível de visualização, informação deidentificação de grupo de imagem intervisualização, informação de identificação de visualização e congêneres. Isto é explicado com detalhes em relação à figura 2, comosegue.

A figura 2 é um diagrama de informação de configuração para um vídeomultivisualização adicionável em um fluxo contínuo de bits codificado de vídeomultivisualização de acordo com uma modalidade da presente invenção. Detalhes da informação de configuração para um vídeo multivisualização são explicados na seguintedescrição.

Antes de mais nada, informação de nível temporal indica informação para umaestrutura hierárquica para fornecer escalabilidade temporal de um sinal de vídeo (1). Pormeio da informação de nível temporal, pode-se fornecer a um usuário seqüências sobre várias zonas de tempo.

Informação de nível de visualização indica informação para uma estruturahierárquica para fornecer escalabilidade de visualização de um sinal de vídeo (2). Em umvídeo multivisualização, é necessário definir um nível para um tempo e um nível para umavisualização para fornecer a um usuário várias seqüências temporais e de visualização. Nocaso da definição da informação de nível supracitada, pode-se usar escalabilidade temporale escalabilidade de visualização. Portanto, um usuário pode selecionar uma seqüência emum tempo específico e visualização, ou uma seqüência selecionada pode ser restrita poruma condição.

As informações de nível podem ser ajustadas de várias maneiras de acordo comuma condição específica. Por exemplo, a informação de nível pode ser ajustadadiferentemente de acordo com a localização da câmera ou com o alinhamento da câmera. ea informação de nível pode ser determinada pela consideração da dependência devisualização. Por exemplo, um nível para uma visualização com imagem I em um grupo deimagem intervisualização é ajustado em 0, um nível para uma visualização com imagem Pno grupo de imagem intervisualização é ajustado em 1, e um nível para uma visualizaçãocom imagem B no grupo de imagem intervisualização é ajustado em 2. Além do mais, asinformações de nível podem ser aleatoriamente ajustadas, não com base em uma condiçãoespecial. A informação de nível de visualização será explicada com detalhes em relação àfigura 4 e à figura 5, posteriormente.

Informação de identificação de grupo de imagem intervisualização indicainformação para identificar se uma imagem codificada de uma unidade NAL atual é umgrupo de imagem intervisualização (3). Neste caso, o grupo de imagem intervisualizaçãosignifica uma imagem codificada na qual todas as fatias referenciam somente fatias com amesma contagem de ordem de imagem. Por exemplo, o grupo de imagem intervisualizaçãosignifica uma imagem codificada que diz respeito a fatias em uma diferente visualizaçãosomente, sem referência às fatias em uma visualização atual. Em um processo dedecodificação de um vídeo multivisualização, um acesso aleatório intervisualização pode sernecessário. A informação de identificação de grupo de imagem intervisualização pode sernecessária para realizar um acesso aleatório eficiente, e informação de referênciaintervisualização pode ser necessária para prognóstico intervisualização. Então, informaçãode identificação de grupo de imagem intervisualização pode ser usada para obter ainformação de referência intervisualização. Além do mais, a informação de identificação degrupo de imagem intervisualização pode ser usada para adicionar imagens de referênciapara prognóstico intervisualização na construção de uma lista de imagem de referência.Além disso, a informação de identificação de grupo de imagem intervisualização pode serusada para gerenciar as imagens de referência adicionadas para o prognósticointervisualização. Por exemplo, as imagens de referência podem ser classificadas emgrupos de imagem intervisualização e grupos de imagem não intervisualização e, então, asimagens de referência classificadas podem ser marcadas em que as imagens de referênciaque deixam de ser usadas para o prognóstico intervisualização não devem ser usadas.Neste ínterim, a informação de identificação de grupo de imagem intervisualização éaplicável a um decodificador de referência hipotético. Detalhes da informação deidentificação de grupo de imagem intervisualização serão explicados em relação à figura 6,posteriormente.

A informação de identificação significa informação para discriminar uma imagem emuma visualização atual de uma imagem em uma visualização diferente (4). Na codificaçãode um sinal de vídeo, POC (contagem de ordem de imagem) ou 'frame_num' podem serusados para identificar cada imagem. No caso de uma seqüência de vídeomultivisualização, prognóstico intervisualização pode ser executado. Então, informação deidentificação para discriminar uma imagem em uma visualização atual de uma imagem emuma outra visualização é necessária. Então, é necessário definir informação de identificaçãode visualização para identificar uma visualização de uma imagem. A informação deidentificação de visualização pode ser obtida a partir de uma área de cabeçalho de um sinalde vídeo. Por exemplo, a área de cabeçalho pode ser uma área de cabeçalho NAL, umaárea de extensão de um cabeçalho NAL, ou uma área de cabeçalho de fatia. Informaçãopara uma imagem em uma visualização diferente daquela de uma imagem atual é obtidausando a informação de identificação de visualização e pode-se decodificar o sinal de vídeousando a informação da imagem na visualização diferente. A informação de identificação devisualização é aplicável a um processo de codificação / decodificação geral do sinal devídeo, e a informação de identificação de visualização pode ser aplicada à codificação devídeo multivisualização usando o 'frame_num' que considera uma visualização em vez deconsiderar um identificador de visualização específico.

Neste ínterim, a unidade de decodificação de entropia 200 realiza decodificação deentropia em um fluxo contínuo de bits analisado e então, um coeficiente de cadamacrobloco, um vetor de movimento e congêneres são extraídos. A unidade de quantizaçãoinvertida / transformação invertida 300 obtém um valor de coeficiente transformado pelamultiplicação de um valor quantizado recebido por uma constante e, então, transforma ovalor do coeficiente inversamente para reconstruir um valor de pixel. Usando o valor de pixelreconstruído, a unidade de intraprognóstico 400 realiza um intraprognóstico a partir de umaamostra decodificada em uma imagem atual. Neste ínterim, a unidade de filtro dedesagrupamento 500 é aplicada em cada macrobloco codificado para reduzir a distorção debloco. Um filtro suaviza a borda de um bloco para melhorar uma qualidade de imagem deum quadro decodificado. Uma seleção de um processo de filtragem depende da força docontorno e do gradiente de uma amostra de imagem ao redor de um contorno. Por meio defiltragem, imagens são transmitidas ou armazenadas na unidade de armazenamentotemporário de imagem decodificada 600 para ser usadas como imagens de referência.A unidade de armazenamento temporário de imagem decodificada 600desempenha um papel no armazenamento ou na abertura das imagens previamentecodificadas para realizar um interprognóstico. Neste caso, para armazenar as imagens naunidade de armazenamento temporário de imagem decodificada 600 ou para abrir asimagens, 'frame_num' e POC (contagem de ordem de imagem) de cada imagem sãousados. Então, já que existem imagens em uma visualização diferente daquela de umaimagem atual entre as imagens previamente codificadas, informação de visualização paraidentificar uma visualização de uma imagem pode ser usada juntamente com o 'frame_num'e o POC. A unidade de armazenamento temporário de imagem codificada 600 inclui aunidade de armazenamento de imagem de referência 610, a unidade de construção de listade imagem de referência 620, e a unidade de gerenciamento de imagem de referência 650.A unidade de armazenamento de imagem de referência 610 armazena imagens que serãoreferidas para a codificação da imagem atual. A unidade de construção de lista de imagemde referência 620 constrói uma lista e imagens de referência para o prognósticointerimagem. Na codificação de vídeo multivisualização, o prognóstico intervisualizaçãopode ser necessário. Então, se uma imagem atual diz respeito a uma imagem em uma outravisualização, pode ser necessário construir uma lista de imagem de referência para oprognóstico intervisualização. Neste caso, a unidade de construção de lista de imagem dereferência 620 pode usar informação para visualização na geração da lista de imagem dereferência para o prognóstico intervisualização. Detalhes da unidade de construção de listade imagem de referência 620 serão explicados em relação à figura 3, posteriormente.

A figura 3 é um diagrama de blocos interno de uma unidade de construção de listade imagem de referência 620 de acordo com uma modalidade da presente invenção.

A unidade de construção de lista de imagem de referência 620 inclui a unidade dederivação variável 625, a unidade de inicialização de lista de imagem de referência 630, e aunidade de reordenação de lista de referência 640.

A unidade de derivação variável 625 deriva variáveis usadas para a inicialização dalista de imagem de referência. Por exemplo, a variável pode ser derivada usando'frame_num' que indica um número de identificação de imagem. Em particular, as variáveisFrameNum e FrameNumWrap podem ser usadas para cada imagem de referência de curtoprazo. Antes de mais nada, a variável FrameNum é igual a um valor de um elemento desintaxe frame_num. A variável FrameNumWrap pode ser usada para a unidade dearmazenamento temporário de imagem decodificada 600 para atribuir um número pequenoa cada imagem de referência, e a variável FrameNumWrap pode ser derivada da variávelFrameNum. Então, pode-se derivar uma variável PicNum usando a variável derivadaFrameNumWrap. Neste caso, a variável PicNum pode significar um número de identificaçãode uma imagem usado pela unidade de armazenamento temporário de imagemdecodificada 600. No caso da indicação de uma imagem de referência de longo prazo, umavariável LongTermPicNum pode ser usada.

A fim de construir uma lista de imagem de referência para prognósticointervisualização, pode-se derivar uma primeira variável (por exemplo, ViewNum) paraconstruir uma lista de imagem de referência para prognóstico intervisualização. Porexemplo, pode-se derivar uma segunda variável (por exemplo, Viewld) usando 'viewjd'para identificar uma visualização de uma imagem. Antes de mais nada, a segunda variávelpode ser igual a um valor do elemento de sintaxe 'viewjd'. e a terceira variável (porexemplo, ViewIdWrap) pode ser usada para a unidade de armazenamento temporário deimagem decodificada 600 para atribuir um pequeno número de identificação de visualizaçãoa cada imagem de referência, e pode ser derivada da segunda variável. Neste caso, aprimeira variável ViewNum pode significar um número de identificação de visualização daimagem usado pela unidade de armazenamento temporário de imagem decodificada 600.Ainda, já que inúmeras imagens de referência usadas para prognóstico intervisualização nacodificação de vídeo multivisualização podem ser relativamente menores do que aquelasusadas para prognóstico temporal, pode-se não definir uma outra variável para indicar umnúmero de identificação de visualização de uma imagem de referência de longo prazo.

A unidade de inicialização de lista de imagem de referência 630 inicializa uma listade imagem de referência usando as variáveis supramencionadas. Neste caso, um processode inicialização para a lista de imagem de referência pode diferir de acordo com um tipo defatia. Por exemplo, no caso da decodificação de uma fatia P, pode-se atribuir um índice dereferência com base em uma ordem de decodificação. No caso da decodificação de umafatia B, pode-se atribuir um índice de referência com base em uma ordem de transmissão deimagem. No caso da inicialização de uma lista de imagem de referência para prognósticointervisualização, pode-se atribuir um índice a uma imagem de referência com base naprimeira variável, isto é, a variável derivada da informação de visualização.

A unidade de reordenação de lista de imagem de referência 640 desempenha umpapel na melhoria da eficiência de compressão pela atribuição de um índice menor a umaimagem freqüentemente referida na lista de imagem de referência inicializada. Isto é emvirtude de um pequeno bit ser atribuído se um índice de referência para codificação ficarmenor.

E, a unidade de reordenação de lista de imagem de referência 640 inclui umaunidade de verificação de tipo de fatia 642, uma unidade de reordenação de lista-O deimagem de referência 643, e uma unidade de reordenação de lista-1 de imagem dereferência 645. Se uma lista de imagem de referência inicializada for inserida, a unidade deverificação de tipo de fatia 642 verifica o tipo de uma fatia a ser decodificada e, então,decide se reordena-se uma lista-O de imagem de referência ou uma lista-1 de imagem dereferência. Então, a unidade de reordenação de lista-0/1 de imagem de referência 643, 645realiza a reordenação da lista-O de imagem de referência se o tipo de fatia não for uma fatiaI, e também realiza a reordenação da lista-1 de imagem de referência adicionalmente, se otipo de fatia for uma fatia B. Assim, depois do fim do processo de reordenação, uma lista deimagem de referência é construída.

A unidade de reordenação de lista-0/1 de imagem de referência 643, 645 inclui umaunidade de obtenção de informação de identificação 643A, 645A e uma unidade demudança de atribuição de índice de referência 643B, 645B, respectivamente. A unidade deobtenção de informação de identificação 643A, 645A recebe informação de identificação(reordening_of_pic_nums_idc) que indica um método de atribuição de um índice dereferência se a reordenação de uma lista de imagem de referência for realizado de acordocom a informação do indicador que indica se deve-se executar a reordenação da lista deimagem de referência, e a unidade de mudança de atribuição de índice de referência 643B,645B reordena a lista de imagem de referência trocando uma atribuição de um índice dereferência de acordo com a informação de identificação.

E, a unidade de reordenação de lista de imagem de referência 640 é operável porum outro método. Por exemplo, a reordenação pode ser executada pela verificação de umtipo de unidade NAL transferido antes de passar através da unidade de verificação de tipode fatia 642 e, então, pela classificação do tipo de unidade NAL em um caso de MVC NAL eum caso não MVC NAL.

A unidade de gerenciamento de imagem de referência 650 gerencia imagens dereferência para executar interprognóstico de forma mais flexível. Por exemplo, um métodode operação de controle de gerenciamento de memória e um método de janela deslizantesão usados. Isto é para gerenciar uma memória de imagem de referência e uma memória deimagem não referência pela unificação das memórias em uma memória, e para realizar umeficiente gerenciamento de memória com uma memória pequena. Na codificação de vídeomultivisualização, já que imagens em uma direção de visualização têm a mesma contagemde ordem de imagem, informação para identificação de uma visualização de cada uma dasimagens é usada na marcação das imagens em uma direção de visualização, e imagens dereferência gerenciadas da maneira exposta podem ser usadas pela unidade deinterprognóstico 700.

A unidade de interprognóstico 700 realiza interprognóstico usando imagens dereferência armazenadas na unidade de armazenamento temporário de imagem decodificada600. Um macrobloco intercodificado pode ser dividido em partições de macrobloco. e cadauma das partições de macrobloco pode ser prognosticada a partir de uma ou duas imagensde referência. A unidade de interprognóstico 700 inclui a unidade de compensação demovimento 710, a unidade de compensação de iluminação 720, a unidade de prognósticode diferença de iluminação 730, a unidade de prognóstico de síntese de visualização 740, ea unidade de prognóstico ponderado 750 e congêneres.

A unidade de compensação de movimento 710 compensa um movimento de umbloco atual usando informações transferidas da unidade de codificação de entropia 200.

Vetores de movimento dos blocos vizinhos do bloco atual são extraídos de um sinal devídeo e, então, um preditor de vetor de movimento do bloco atual é derivado dos vetores demovimento dos blocos vizinhos, e o movimento do bloco atual é compensado usando opreditor de vetor de movimento derivado e um vetor de movimento diferencial extraído dosinal de vídeo, e pode-se realizar a compensação de movimento usando uma imagem dereferência ou uma pluralidade de imagens. Na codificação de vídeo multivisualização, nocaso em que uma imagem atual diz respeito a imagens em diferentes visualizações, pode-se realizar compensação de movimento usando informação da lista de imagem dereferência para o prognóstico intervisualização armazenado na unidade de armazenamentotemporário de imagem decodificada 600. e também pode-se realizar compensação demovimento usando informação concorrente para identificar uma visualização da imagem dereferência. Um modo direto é um modo de codificação para prognosticar informação demovimento de um bloco atual da informação de movimento para um bloco codificado. Já queeste método pode economizar inúmeros bits exigidos para codificação da informação demovimento, a eficiência de compressão aumenta. Por exemplo, um modo de direçãotemporal prognostica informação de movimento para um bloco atual usando uma correlaçãode informação de movimento em uma direção temporal. Usando um método similar a estemétodo, a presente invenção pode prognosticar informação de movimento para um blocoatual usando uma correlação da informação de movimento em uma direção de visualização.

Neste ínterim, no caso em que um fluxo contínuo de bits inserido corresponde a umvídeo multivisualização, já que as respectivas seqüências de visualização são obtidas pordiferentes câmeras, uma diferença de iluminação é gerada por fatores internos e externosdas câmeras. Para impedir isto, a unidade de compensação de iluminação 720 compensa adiferença de iluminação. Na realização da compensação de iluminação, pode-se usarinformação de indicador que indica se deve-se realizar compensação de iluminação em umacamada específica de um sinal de vídeo. Por exemplo, pode-se realizar uma compensaçãode iluminação usando informação de indicador que indica se deve-se realizar acompensação de iluminação em uma fatia ou macrobloco correspondentes. Na realizaçãoda compensação de iluminação usando a informação de indicador, a compensação deiluminação é aplicável a vários tipos de macroblocos (por exemplo, modo inter 16 χ 16, modo salto B1 modo direto, etc.).

Na realização da compensação de iluminação, pode-se usar informação para umbloco vizinho ou informação para um bloco em uma visualização diferente daquela de umbloco atual para reconstruir o bloco atual, e também pode-se usar um valor de diferença deiluminação do bloco atual. Neste caso, se o bloco atual diz respeito a blocos em umavisualização diferente, pode-se realizar compensação de iluminação usando a informaçãoda lista de imagem de referência para o prognóstico intervisualização armazenada naunidade de armazenamento temporário de imagem decodificada 600. Neste caso, o valor dadiferença de iluminação do bloco atual indica uma diferença entre um valor médio de pixeldo bloco atual e um valor médio de pixel de um bloco de referência correspondente ao blocoatual. Por exemplo, usando o valor de diferença de iluminação, o valor do prognóstico dediferença de iluminação do bloco atual é obtido usando blocos vizinhos do bloco atual, e umvalor de diferença (diferença de iluminação residual) entre o valor de diferença deiluminação e o valor do prognóstico de diferença de iluminação é usado. Portanto, a unidadede decodificação pode reconstruir o valor da diferença de iluminação do bloco atual usandoa diferença de iluminação residual e o valor de prognóstico da diferença de iluminação. Naobtenção de um valor de prognóstico de diferença de iluminação de um bloco atual, pode-seusar informação para um bloco vizinho. Por exemplo, pode-se prognosticar um valor dediferença de iluminação de um bloco atual usando um valor de diferença de iluminação deum bloco vizinho. Antes do prognóstico, verifica-se se um índice de referência do bloco atualé igual àquele do bloco vizinho. Então, de acordo com o resultado da verificação, decide-sequal tipo de um bloco vizinho ou de um valor serão usados.

A unidade de prognóstico de síntese de visualização 740 é usada para sintetizarimagens em uma visualização virtual usando imagens em uma visualização vizinha a umavisualização de uma imagem atual, e para prognosticar a imagem atual usando as imagenssintetizadas na visualização virtual. A unidade de decodificação pode decidir se deve-sesintetizar uma imagem em uma visualização virtual de acordo com um identificador deprognóstico de síntese intervisualização transferido de uma unidade de codificação. Porexemplo, se view_synthetize_pred_flag = ou view_syn_pred_flag = 1, uma fatia oumacrobloco em uma visualização virtual é sintetizado. Neste caso, quando o identificador deprognóstico de síntese intervisualização informar que uma visualização virtual será gerada,pode-se gerar uma imagem na visualização virtual usando informação de visualização paraidentificar uma visualização da imagem, e no prognóstico de uma imagem atual dasimagens sintetizadas na visualização virtual, pode-se usar a informação de visualizaçãopara usar a imagem na visualização virtual como uma imagem de referência.

A unidade de prognóstico ponderado 750 é usada para compensar um fenômenoem que a qualidade de uma imagem de uma seqüência é consideravelmente degradada nocaso da codificação da seqüência da qual o brilho varia temporariamente. Na MVC,prognóstico ponderado pode ser realizado para compensar uma diferença de brilho de umaseqüência em uma visualização diferente, bem como ele é realizado para uma seqüência daqual o brilho varia temporariamente. Por exemplo, o método do prognóstico ponderado podeser classificado em método de prognóstico ponderado explícito e método de prognósticoponderado implícito.

Em particular, o prognóstico ponderado explícito pode usar uma imagem dereferência ou duas imagens de referência. No caso do uso de uma imagem de referência,um sinal de prognóstico é gerado a partir da multiplicação de um sinal de prognósticocorrespondente à compensação de movimento por um coeficiente ponderado. No caso douso de duas imagens de referência, um sinal de prognóstico é gerado a partir da adição deum valor de deslocamento a um valor resultante da multiplicação de um sinal de prognósticocorrespondente à compensação de movimento por um coeficiente ponderado.

Ε, o prognóstico ponderado implícito realiza um prognóstico ponderado usandouma distância de uma imagem de referência. Como um método para obter a distância daimagem de referência, pode-se usar POC (contagem de ordem de imagem), que indica umaordem de transmissão de imagem, por exemplo. Neste caso, a POC pode ser obtidaconsiderando a identificação de uma visualização de cada imagem. Na obtenção de umcoeficiente ponderado para uma imagem em uma visualização diferente, pode-se usarinformação de visualização para identificar uma visualização de uma imagem para obteruma distância entre visualizações das respectivas imagens.

Na codificação de sinal de vídeo, informação de profundidade é usada para umaaplicação específica ou com outro propósito. Neste caso, a informação de profundidadepode significar informação que pode indicar uma diferença de disparidade intervisualização.Por exemplo, pode-se obter um vetor de disparidade por prognóstico intervisualização. e ovetor de disparidade obtido deve ser transferido a um aparelho de decodificação paracompensação de disparidade de um bloco atual. Ainda, se um mapa de profundidade forobtido e, então, transferido ao aparelho de decodificação, o vetor de disparidade pode serinferido do mapa de profundidade (ou mapa de densidade) sem transferir o vetor dedisparidade ao aparelho de decodificação. Neste caso, ele é vantajoso em que o número debits da informação de profundidade a ser transferida ao aparelho de decodificação pode serreduzido. Então, pela derivação do vetor de disparidade do mapa de profundidade, pode-sefornecer um novo método de compensação de disparidade. Assim, no caso do uso de umaimagem em uma diferente visualização no curso da derivação do vetor de disparidade domapa de profundidade, informação de visualização para identificar uma visualização daimagem pode ser usada.

As imagens interprognosticadas ou intraprognosticadas por meio do processoexposto são selecionadas de acordo com um modo de prognóstico para reconstruir umaimagem atual. Na descrição seguinte, várias modalidades que fornecem um método dedecodificação eficiente de um sinal de vídeo são explicadas.A figura 4 é um diagrama de uma estrutura hierárquica da informação de nível parafornecer escalabilidade de visualização de um sinal de vídeo de acordo com umamodalidade da presente invenção.

Em relação à figura 4, informação de nível para cada visualização pode serdecidida pela consideração de informação de referência intervisualização. Por exemplo, jáque é impossível decodificar uma imagem P e uma imagem B sem uma imagem I, pode-seatribuir 'nível = 0' a uma visualização base da qual grupo de imagem intervisualização é aimagem I, 'nível = 1' a uma visualização base da qual o grupo de imagem intervisualização éa imagem P, e 'nível = 2' a uma visualização base da qual o grupo de imagemintervisualização é a imagem B. Ainda, também pode-se decidir informação de nívelaleatoriamente de acordo com um padrão específico.

Informação de nível pode ser aleatoriamente decidida de acordo com um padrãoespecífico ou sem um padrão. Por exemplo, no caso em que informação de nível é decididacom base em uma visualização, pode-se ajustar uma visualização V0 como umavisualização base ao nível de visualização 0, uma visualização das imagens prognosticadasusando imagens em uma visualização ao nível de visualização 1, e uma visualização dasimagens prognosticadas usando imagens em uma pluralidade de visualizações ao nível devisualização 2. Neste caso, pelo menos uma seqüência de visualização com compatibilidadecom um decodificador convencional (por exemplo, H.264/AVC, MPEG-2, MPEG-4, etc.)pode ser necessária. Esta visualização base se torna uma base da codificação demultivisualização, que pode corresponder a uma visualização de referência para oprognóstico de uma outra visualização. Uma seqüência correspondente a uma visualizaçãobase na MVC (codificação de vídeo multivisualização) pode ser configurada em um fluxocontínuo de bits independente, sendo codificada por um esquema de codificação comseqüência convencional (MPEG-2, MPEG-4, H.263, H.264, etc.). Uma seqüênciacorrespondente a uma visualização base é compatível com H.264/AVC ou pode não ser.Ainda, uma seqüência em uma visualização compatível com H.264/AVC corresponde a umavisualização base.

Como pode-se ver na figura 4, pode-se ajustar uma visualização V2 das imagensprognosticadas usando imagens na visualização V0, uma visualização V4 das imagensprognosticadas usando imagens na visualização V2, uma visualização V6 das imagensprognosticadas usando imagens na visualização V4, e uma visualização V7 das imagensprognosticadas usando imagens na visualização V6 ao nível 1. e pode-se ajustar umavisualização V1 das imagens prognosticadas usando imagens nas visualizações V0 e V2 euma visualização V3 prognosticada da mesma maneira, e uma visualização V5prognosticada da mesma maneira ao nível 2. Então, no caso em que um decodificador dousuário não pode visualizar uma seqüência de vídeo multivisualização, ele somentedecodifica seqüências na visualização correspondentes ao nível de visualização 0. No casoem que o decodificador do usuário é restrito pela informação de perfil, somente pode-sedecodificar a informação de um nível de visualização restrito. Neste caso, um perfil significaque elementos técnicos para algoritmos em um processo de codificação / decodificação devídeo são padronizados. Em particular, o perfil é um ajuste dos elementos técnicos exigidospara decodificar uma seqüência de bits de uma seqüência comprimida, e pode ser um tipode uma subpadronização.

De acordo com uma outra modalidade da presente invenção, a informação de nívelpode variar de acordo com a localização de uma câmera. Por exemplo, considerando que asvisualizações VO e V1 são seqüências obtidas por uma câmera localizada na frente, que asvisualizações V2 e V3 são seqüências localizadas atrás, que as visualizações V4 e V5 sãoseqüências localizadas na esquerda, e que as visualizações V6 e V7 são seqüênciaslocalizadas na direita, pode-se ajustar as visualizações VO e V1 ao nível de visualização 0,as visualizações V2 e V3 ao nível de visualização 1, as visualizações V4 e V5 ao nível devisualização 2, e as visualizações V6 e V7 ao nível de visualização 3. Alternativamente,informação de nível pode variar de acordo com o alinhamento da câmera. Alternativamente,informação de nível pode ser aleatoriamente decidida não com base em um padrãoespecífico.

A figura 5 é um diagrama de uma configuração de unidade NAL que incluiinformação de nível em uma área de extensão de um cabeçalho NAL de acordo com umamodalidade da presente invenção.

Em relação à figura 5, basicamente, uma unidade NAL inclui um cabeçalho NAL euma RBSP. O cabeçalho NAL inclui informação de indicador (nal_ref_idc) que indica se umafatia que está se tornando uma imagem de referência da unidade NAL está incluída, e umidentificador (nal_unit_type) que indica o tipo da unidade NAL. e o cabeçalho NAL podeincluir adicionalmente informação de nível (viewjevel) que indica informação para umaestrutura hierárquica para fornecer escalabilidade de visualização.

Dados originais comprimidos são armazenados na RBSP, e bit delimitador daRBSP é adicionado em uma última parte da RBSP para representar um comprimento daRBSP como um número múltiplo de 8 bits. Como os tipos da unidade NAL, há IDR(atualização de decodificação instantânea), SPS (ajuste de parâmetro de seqüência), PPS(ajuste de parâmetro de imagem), SEI (informação de melhoria complementar), etc.

O cabeçalho NAL inclui informação para um identificador de visualização, e umaseqüência de vídeo de um nível de visualização correspondente é decodificada em relaçãoao identificador de visualização no curso da realização da decodificação de acordo com umnível de visualização.

A unidade NAL inclui um cabeçalho NAL 51 e uma camada de fatia 53. Ocabeçalho NAL 51 inclui uma extensão de cabeçalho NAL 52. e a camada de fatia 53 incluium cabeçalho de fatia 54 e dados de fatia 55.

O cabeçalho NAL 51 inclui um identificador (nal_unit_type) que indica um tipo daunidade NAL. Por exemplo, o identificador que indica o tipo de unidade NAL pode ser umidentificador tanto para codificação escalável quanto para codificação de vídeomultivisualização. Neste caso, a extensão do cabeçalho NAL 52 pode incluir informação deindicador que discrimina se uma NAL atual é a NAL para a codificação de vídeo escalávelou a NAL para a codificação de vídeo multivisualização. e a extensão de cabeçalho NAL 52pode incluir informação de extensão para a NAL atual de acordo com a informação deindicador. Por exemplo, no caso em que a NAL atual for a NAL para a codificação de vídeomultivisualização de acordo com a informação do indicador, a extensão de cabeçalho NAL52 pode incluir informação de nível (viewjevel) que indica informação para uma estruturahierárquica para fornecer escalabilidade de visualização.

A figura 6 é um diagrama de uma estrutura de prognóstico geral de um sinal devídeo multivisualização de acordo com uma modalidade da presente invenção para explicarum conceito de um grupo de imagem intervisualização.

Em relação à figura 6, TO a T100, em um eixo geométrico horizontal, indicamquadros de acordo com o tempo e SO a S7, em um eixo geométrico vertical, indicamquadros de acordo com a visualização. Por exemplo, imagens em TO significam quadroscapturados por diferentes câmeras na mesma zona de tempo TO, enquanto que imagens emSO significam seqüências capturadas por uma única câmera em diferentes zonas de tempo,e setas no desenho indicam direções de prognóstico e ordens de prognóstico dasrespectivas imagens. Por exemplo, uma imagem PO em uma visualização S2 em uma zonade tempo TO é uma imagem prognosticada a partir de I0, que se torna uma imagem dereferência de uma imagem PO em uma visualização S4 na mesma zona de tempo TO. e elase torna uma imagem de referência das imagens B1 e B2 nas zonas de tempo T4 e T2 navisualização S2, respectivamente.

Em um processo de decodificação de vídeo multivisualização, um acesso aleatóriointervisualização pode ser necessário. Então, um acesso a uma visualização aleatória deveser possível pela minimização do esforço de decodificação. Neste caso, um conceito de umgrupo de imagem intervisualização pode ser necessário para realizar um acesso eficiente. Ogrupo de imagem intervisualização significa uma imagem codificada na qual todas as fatiasreferenciam somente fatias com a mesma contagem de ordem de imagem. Por exemplo, ogrupo de imagem intervisualização significa uma imagem codificada que diz respeito a fatiasem uma visualização diferente somente sem referenciar fatias em uma visualização atual.Na figura 6, se uma imagem IO em uma visualização SO em uma zona de tempo TO for umgrupo de imagem intervisualização, todas as imagens em diferentes visualizações namesma zona de tempo, isto é, a zona de tempo TO, se tornam grupos de imagemintervisualização. Como um outro exemplo, se uma imagem 10 em uma visualização SO emuma zona de tempo T8 for um grupo de imagem intervisualização, todas as imagens emdiferentes visualizações na mesma zona de tempo, isto é, a zona de tempo T8, são gruposde imagem intervisualização. Igualmente, todas as imagens em T16,..., T96 e T100 tambémse tornam grupos de imagem intervisualização.

A figura 7 é um diagrama de uma estrutura de prognóstico de acordo com umamodalidade da presente invenção para explicar um conceito de um grupo de imagemintervisualização recém-definido.

Em uma estrutura de prognóstico geral da MVC, GOP pode começar com umaimagem I. e a imagem I é compatível com H.264/AVC. Então, todos os grupos de imagemintervisualização compatíveis com H.264/AVC sempre podem se tornar a imagem I. Ainda,no caso em que as imagens I são substituídas por uma imagem P, codificação maiseficiente é habilitada. Em particular, codificação mais eficiente é habilitada usando a estrutura de prognóstico que habilita GOP a começar com a imagem P compatível comH.264/AVC.

Neste caso, se o grupo de imagem intervisualização for redefinido, todas as fatiasse tornam imagem codificada que pode se referir não somente a uma fatia em um quadroem uma mesma zona de tempo, mas também a uma fatia na mesma visualização em umadiferente zona de tempo. Ainda. No caso da referência a uma fatia em uma diferente zonade tempo em uma mesma visualização, pode-se restringir somente ao grupo de imagemintervisualização compatível com H.264/AVC. Por exemplo, uma imagem P em um ponto desincronia T8 em uma visualização SO na figura 6 pode se tornar um grupo de imagemintervisualização recém-definido. Igualmente, uma imagem P em um ponto de sincronia T96em uma visualização SO ou uma imagem P em um ponto de sincronia T100 em umavisualização SO pode se tornar um grupo de imagem intervisualização recém-definido. e ogrupo de imagem intervisualização pode ser definido somente se ele for uma visualizaçãobase.

Depois que o grupo de imagem intervisualização foi decodificado, todas as imagensseqüencialmente codificadas são decodificadas a partir das imagens decodificadas adiantedo grupo de imagem intervisualização em uma ordem de transmissão sem interprognóstico.

Considerando a estrutura de codificação geral do vídeo multivisualização mostradona figura 6 e na figura 7, já que informação de referência intervisualização de um grupo deimagem intervisualização difere daquela de um grupo de imagem não intervisualização, énecessário discriminar o grupo de imagem intervisualização e o grupo de imagem nãointervisualização, um em relação ao outro, de acordo com a informação de identificação degrupo de imagem intervisualização.A informação de referência intervisualização significa a informação que podereconhecer uma estrutura de prognóstico entre as imagens intervisualização. Isto pode serobtido a partir de uma área de dados de um sinal de vídeo. Por exemplo, ela pode ser obtidade uma área de ajuste de parâmetro de seqüência, e a informação de referênciaintervisualização pode ser reconhecida usando o número de imagens de referência e ainformação de visualização para as imagens de referência. Por exemplo, o número devisualizações total é obtido e, então, a informação de visualização para identificar cadavisualização pode ser obtida com base no número de visualizações total, e pode-se obter onúmero das imagens de referência para uma direção de referência para cada visualização.

De acordo com o número das imagens de referência, pode-se obter a informação devisualização para cada uma das imagens de referência. Desta maneira, a informação dereferência intervisualização pode ser obtida, e a informação de referência intervisualizaçãopode ser reconhecida pela discriminação de um grupo de imagem intervisualização e de umgrupo de imagem não intervisualização. Esta pode ser reconhecida usando informação deidentificação de grupo de imagem intervisualização que indica se uma fatia codificada emuma NAL atual é um grupo de imagem intervisualização. Detalhes da informação deidentificação do grupo de imagem intervisualização são explicados em relação à figura 8,como segue:

A figura 8 é um diagrama de blocos esquemático de um aparelho para decodificarum vídeo multivisualização que usa informação de identificação de grupo de imagem deacordo com uma modalidade da presente invenção.

Em relação à figura 8, um aparelho de decodificação de acordo com umamodalidade da presente invenção inclui uma unidade de decisão de fluxo contínuo de bits81, uma unidade de obtenção de informação de identificação de grupo de imagemintervisualização 82, e uma unidade de decodificação de vídeo multivisualização 83.

Se um fluxo contínuo de bits for inserido, a unidade de decisão de fluxo contínuo debits 81 decide se o fluxo contínuo de bits inserido é um fluxo contínuo de bits codificado parauma codificação de vídeo escalável ou um fluxo contínuo de bits codificado para codificaçãode vídeo multivisualização. Isto pode ser decidido pela informação de indicador incluída nofluxo contínuo de bits.

A unidade de obtenção de informação de identificação de grupo de imagemintervisualização 82 pode obter informação de identificação de grupo de imagemintervisualização se o fluxo contínuo de bits inserido for o fluxo contínuo de bits para umacodificação de vídeo multivisualização em decorrência da decisão. Se a informação deidentificação do grupo de imagem intervisualização obtida for 'verdadeiro', isto significa queuma fatia codificada de uma NAL atual é um grupo de imagem intervisualização. E se ainformação de identificação do grupo de imagem intervisualização for 'falso', isto significaque uma fatia codificada de uma NAL atual é um grupo de imagem não intervisualização. Ainformação de identificação do grupo de imagem intervisualização pode ser obtida a partirde uma área de extensão de um cabeçalho NAL ou de uma área de camada de fatia.

A unidade de decodificação de vídeo multivisualização 83 decodifica um vídeomultivisualização de acordo com a informação de identificação do grupo de imagemintervisualização. De acordo com uma estrutura de codificação geral de uma seqüência devídeo multivisualização, informação de referência intervisualização de um grupo de imagemintervisualização difere daquela de um grupo de imagem não intervisualização. Então, pode-se usar a informação de identificação do grupo de imagem intervisualização na adição dasimagens de referência para o prognóstico intervisualização para gerar uma lista de imagemde referência, por exemplo, e também pode-se usar a informação de identificação do grupode imagem intervisualização para gerenciar as imagens de referência para o prognósticointervisualização. Além do mais, a informação de identificação do grupo de imagemintervisualização é aplicável a um decodificador de referência hipotético.

Como um outro exemplo de uso da informação de identificação de grupo deimagem intervisualização, no caso do uso de informação em uma visualização diferentepara cada processo de decodificação, informação de referência intervisualização incluídaem um ajuste de parâmetro de seqüência é usada. Neste caso, informação para discriminarse uma imagem atual é um grupo de imagem intervisualização ou um grupo de imagem nãointervisualização, isto é, informação de identificação de grupo de imagem intervisualizaçãopode ser exigida. Então, pode-se usar diferentes informações de referência intervisualizaçãopara cada processo de decodificação.

A figura 9 é um fluxograma de um processo para gerar uma lista de imagem dereferência de acordo com uma modalidade da presente invenção.

Em relação à figura 9, a unidade de armazenamento temporário de imagemdecodificada 600 desempenha um papel no armazenamento ou na abertura das imagenspreviamente codificadas para realizar prognóstico interimagem.

Antes de mais nada, imagens codificadas antes de uma imagem atual sãoarmazenadas na unidade de armazenamento de imagem de referência 610 para ser usadascomo imagem de referência (S91).

Na codificação de vídeo multivisualização, já que algumas das imagenspreviamente codificadas estão em uma visualização diferente daquela da imagem atual, ainformação de visualização para identificar uma visualização de uma imagem pode serusada para utilizar estas imagens como imagens de referência. Então, o decodificador deveobter informação de visualização para identificar uma visualização de uma imagem (S92).Por exemplo, a informação de visualização pode incluir 'viewjd' para identificar umavisualização de uma imagem.A unidade de armazenamento temporário de imagem decodificada 600 precisaderivar uma variável ali usada para gerar uma lista de imagem de referência. Já queprognóstico intervisualização pode ser exigido para codificação de vídeo multivisualização,se uma imagem atual diz respeito a uma imagem em uma visualização diferente, pode sernecessário gerar uma lista de imagem de referência para prognóstico intervisualização.Neste caso, a unidade de armazenamento temporário de imagem decodificada 600 precisaderivar uma variável usada para gerar a lista de imagem de referência para o prognósticointervisualização usando a informação de visualização obtida (S93).

Uma lista de imagem de referência para prognóstico temporal ou uma lista deimagem de referência para prognóstico intervisualização podem ser geradas por um métododiferente de acordo com o tipo de fatia de uma fatia atual (S94). Por exemplo, se um tipo defatia for uma fatia P/SP, uma lista 0 de imagem de referência é gerada (S95). No caso emque um tipo de fatia for uma fatia B1 uma lista 0 de imagem de referência e uma lista 1 deimagem de referência são geradas (S96). Neste caso, a lista 0 de imagem de referência oua lista 1 de imagem de referência podem incluir a lista de imagem de referência para oprognóstico temporal somente ou tanto a lista de imagem de referência para o prognósticotemporal quanto a lista de imagem de referência para o prognóstico intervisualização. Istoserá explicado com detalhes em relação à figura 8 e à figura 9, posteriormente.

A lista de imagem de referência inicializada passa por um processo para atribuir ummenor número a uma imagem freqüentemente referida para melhorar adicionalmente umataxa de compressão (S97). e este pode ser chamado de um processo de reordenação parauma lista de imagem de referência, o que será explicado com detalhes em relação às figuras12 até 19, posteriormente. A imagem atual é decodificada usando a lista da imagem dereferência reordenada e a unidade de armazenamento temporário de imagem decodificada600 precisa gerenciar as imagens de referência decodificadas para operar umarmazenamento temporário mais eficientemente (S98). As imagens de referênciagerenciadas pelo processo exposto são lidas pela unidade de interprognóstico 700 para serusadas para interprognóstico. Na codificação de vídeo multivisualização, o interprognósticopode incluir prognóstico intervisualização. Neste caso, a lista de imagem de referência parao prognóstico intervisualização é usada.

Exemplos detalhados para um método para gerar uma lista de imagem dereferência de acordo com um tipo de fatia são explicados em relação à figura 10 e à figura11 como segue.

A figura 10 é um diagrama para explicar um método para inicializar uma lista deimagem de referência quando uma fatia atual for uma fatia P de acordo com umamodalidade da presente invenção.

Em relação à figura 10, um tempo é indicado por T0, T1, ..., TN, enquanto que umavisualização é indicada por VO1 V1..... V4. Por exemplo, uma imagem atual indica umaimagem em um tempo T3 em uma visualização V4. e um tipo de fatia da imagem atual éuma fatia P. 'PN' é uma abreviatura de uma variável PicNum1 'LPN' é uma abreviatura deuma variável LongTermPicNum1 e 'VN' é uma abreviatura de uma variável ViewNum. Umnumerai anexado a uma parte final de cada uma das variáveis indica um índice que indicaum tempo de cada imagem (para PN ou LPN) ou uma visualização de cada imagem (paraVN). Isto é aplicável à figura 11 da mesma maneira.

Uma lista de imagem de referência para prognóstico temporal ou uma lista deimagem de referência para prognóstico intervisualização pode ser gerada de uma maneiradiferente de acordo com o tipo de fatia de uma fatia atual. Por exemplo, um tipo de fatia nafigura 12 é uma fatia P/SP. Neste caso, uma lista 0 de imagem de referência é gerada. Emparticular, a lista 0 de imagem de referência pode incluir uma lista de imagem de referênciapara prognóstico temporal e/ou uma lista de imagem de referência para prognósticointervisualização. Na presente modalidade, considera-se que uma lista de imagem dereferência inclui tanto uma lista de imagem de referência para prognóstico temporal quantouma lista de imagem de referência para prognóstico intervisualização.

Há vários métodos para ordenar imagens de referência. Por exemplo, imagens dereferência podem ser alinhadas de acordo com uma ordem de decodificação ou detransmissão da imagem. Alternativamente, imagens de referência podem ser alinhadas combase em uma variável derivada usando informação de visualização. Alternativamente,imagens de referência podem ser alinhadas de acordo com informação de referênciaintervisualização que indica uma estrutura de prognóstico intervisualização.

No caso de uma lista de imagem de referência para prognóstico temporal, imagensde referência de curto prazo e imagens de referência de longo prazo podem ser alinhadascom base em uma ordem de decodificação. Por exemplo, elas podem ser alinhadas deacordo com um valor de uma variável PicNum ou LongTermPicNum derivadas de um valorque indica um número de identificação de imagem (por exemplo, frame_num ouLongtetrframeidx). Antes de mais nada, imagens de referência de curto prazo podem serinicializadas antes das imagens de referência de longo prazo. Uma ordem de alinhamentodas imagens de referência de curto prazo pode ser ajustada de uma imagem de referênciacom um valor mais alto da variável PicNum até uma imagem de referência com um valor decâmara de reação mais baixo. Por exemplo, as imagens de referência de curto prazo podemser alinhadas na ordem de PN1 com uma variável mais alta, PN2 com uma variávelintermediária, e PNO com uma variável mais baixa entre PNO até PN2. Uma ordem dealinhamento das imagens de referência de longo prazo pode ser ajustada de uma imagemde referência com um valor mais baixo da variável LongTermPicNum até uma imagem dereferência com um valor de variável mais alto. Por exemplo, as imagens de referência delongo prazo podem ser alinhadas na ordem de LPNO com uma variável mais alta e LPN1com uma variável mais baixa.

No caso de uma lista de imagem de referência para prognóstico intervisualização,imagens de referência podem ser alinhadas com base em uma primeira variável ViewNumderivada usando informação de visualização. Em particular, imagens de referência podemser alinhadas na ordem de uma imagem de referência com o valor de uma primeira variávelmais alto (ViewNum) até uma imagem de referência com um valor de uma primeira variável(ViewNum) mais baixo. Por exemplo, imagens de referência podem ser alinhadas na ordemde VN3 com uma variável mais alta, VN2, VN1 e VNO com uma variável mais baixa entreVNO1 VN1, VN2 e VN3.

Assim, tanto a lista de imagem de referência para o prognóstico temporal quanto alista de imagem de referência para o prognóstico intervisualização podem ser gerenciadascomo uma lista de imagem de referência. Alternativamente, tanto a lista de imagem dereferência para o prognóstico temporal quanto a lista de imagem de referência para oprognóstico intervisualização podem ser gerenciadas como listas de imagem de referênciaseparadas, respectivamente. No caso de gerenciar tanto a lista de imagem de referênciapara o prognóstico temporal quanto a lista de imagem de referência para o prognósticointervisualização como uma lista de imagem de referência, elas podem ser inicializadas deacordo com uma ordem, ou simultaneamente. Por exemplo, no caso da inicialização tantoda lista de imagem de referência para o prognóstico temporal quanto da lista de imagem dereferência para o prognóstico intervisualização de acordo com uma ordem, a lista deimagem de referência para o prognóstico temporal é preferivelmente inicializado e, então, alista de imagem de referência para o prognóstico intervisualização adicionalmenteinicializada. Este conceito também é aplicável à figura 11.

Um caso em que um tipo de fatia da imagem atual é fatia B é explicado em relaçãoà figura 11, como segue.

A figura 11 é um diagrama para explicar um método para inicializar uma lista deimagem de referência quando uma fatia atual for uma fatia B de acordo com umamodalidade da presente invenção.

Em relação à figura 9, no caso em que um tipo de fatia é uma fatia B1 uma lista 0 deimagem de referência e uma lista 1 de imagem de referência são geradas. Neste caso, alista 0 de imagem de referência ou a lista 1 de imagem de referência podem incluir uma listade imagem de referência para prognóstico temporal somente ou tanto uma lista de imagemde referência para prognóstico temporal quanto uma lista de imagem de referência paraprognóstico intervisualização.

No caso da lista de imagem de referência para o prognóstico temporal, um métodode alinhamento de imagem de referência de curto prazo pode diferir de um método dealinhamento de imagem de referência de longo prazo. Por exemplo, no caso das imagensde referência de curto prazo, imagens de referência podem ser alinhadas de acordo comuma contagem de ordem de imagem (doravante abreviado como POC). No caso dasimagens de referência de longo prazo, imagens de referência podem ser alinhadas deacordo com um valor de variável (LongtermPicNum). e as imagens de referência de longoprazo podem ser inicializadas antes das imagens de referência de longo prazo.

A fim de alinhar imagens de referência de curto prazo da lista O de imagem dereferência, imagens de referência são preferivelmente alinhadas de uma imagem dereferência com um valor POC mais alto até uma imagem de referência com um valor POCmais baixo entre imagens de referência com valores POC menores do que aqueles daimagem atual e, então, são alinhadas de uma imagem de referência com um valor POCmais baixo até uma imagem de referência com um valor POC mais alto entre imagens dereferência com valores POC maiores do que aqueles da imagem atual. Por exemplo,imagens de referência podem ser preferivelmente alinhadas da PN1 com um valor POCmais alto em relação às imagens PNO e PN1 com valores POC menores do que aqueles daimagem atual até PNO e, então, alinhadas de PN3 com um valor POC mais baixo emrelação às imagens PN3 e PN4 com um valor POC menor do que aquele da imagem atualaté PN4.

A fim de alinhar imagens de referência de longo prazo da lista O de imagem dereferência, imagens de referência são alinhadas de uma imagem de referência com umavariável LongtermPicNum mais baixa até uma imagem de referência com uma variável maisalta. Por exemplo, imagens de referência são alinhadas de LPNO com um valor mais baixoem LPNO e LPN1 até LPN1 com uma segunda variável mais baixa.

No caso da lista de imagem de referência para o prognóstico intervisualização,imagens de referência podem ser alinhadas com base em uma primeira variável ViewNumderivada usando informação de visualização. Por exemplo, no caso da lista O de imagem dereferência para o prognóstico intervisualização, imagens de referência podem ser alinhadasde uma imagem de referência com um valor da primeira variável mais alto entre imagens dereferência com valores de primeira variável mais baixos do que aqueles da imagem atual atéuma imagem de referência com um primeiro veículo de variável mais baixo. Então, asimagens de referência são alinhadas de uma imagem de referência com um primeiro valorde variável mais baixo entre imagens de referência com primeiro valores de variável maioresdo que aqueles da imagem atual até uma imagem de referência com um valor de primeiravariável mais alto. Por exemplo, preferivelmente, imagens de referência são alinhadas deVN1 com um valor de primeira variável mais alto em VNO e VN com valores de primeiravariável menores do que aqueles da imagem atual até VNO com um valor de primeiravariável mais baixo e então alinhadas de VN3 com um valor de primeira variável mais baixoem VN3 e VN4 com valores de primeira variável maiores do que aqueles da imagem atualata VN4 com um valor de primeira variável mais alto.

No caso da lista 1 de imagem de referência, o método de alinhamento exposto dalista de referência O é similarmente aplicável.

Antes de mais nada, no caso da lista de imagem de referência para o prognósticotemporal, a fim de alinhar imagens de referência de curto prazo da lista 1 de imagem dereferência, imagens de referência são preferivelmente alinhadas de uma imagem dereferência com um valor POC mais baixo até uma imagem de referência com um valor POCmais alto entre imagens de referência com valores POC maiores do que aqueles da imagematual e, então, são alinhadas de uma imagem de referência com um valor POC mais alto atéuma imagem de referência com um valor POC mais baixo entre imagens de referência comvalores POC menores do que aqueles da imagem atual. Por exemplo, imagens dereferência podem ser preferivelmente alinhadas de PN3 com um valor POC mais baixo emrelação às imagens PN3 e PN4 com valores POC maiores do que aqueles da imagem atualaté PN4 e, então, alinhadas de PN1 com um valor POC mais alto nas imagens de referênciaPNO e PN1 com valores POC maiores do que aqueles da imagem atual até PNO.

A fim de alinhar imagens de referência de longo prazo da lista 1 de imagem dereferência, imagens de referência são alinhadas de uma imagem de referência com umavariável LongtermPicNum mais baixa até uma imagem de referência com uma variável maisalta. Por exemplo, imagens de referência são alinhadas de LPNO com um valor mais baixoem LPNO e LPN1 até LPN1 com uma variável mais baixa.

No caso da lista de imagem de referência para o prognóstico intervisualização,imagens de referência podem ser alinhadas com base em uma primeira variável ViewNumderivada usando informação de visualização. Por exemplo, no caso da lista 1 de imagem dereferência para o prognóstico intervisualização, imagens de referência podem ser alinhadasde uma imagem de referência com um valor de primeira variável mais baixo entre imagensde referência com valores de primeira variável maiores do que aqueles da imagem atual atéuma imagem de referência com um valor de primeira variável mais alto. Então, as imagensde referência são alinhadas de uma imagem de referência com um valor de primeira variávelmais alto entre imagens de referência com valores de primeira variável menores do queaqueles da imagem atual até uma imagem de referência com um valor de primeira variávelmais baixo. Por exemplo, imagens de referência são preferivelmente alinhadas de VN3 comum valor de primeira variável mais baixo em VN3 e VN4 com valores de primeira variávelmaiores do que aqueles da imagem atual até VN4 com um valor de primeira variável maisalto e, então, alinhadas de VN1 com um valor de primeira variável mais alto em VNO e VN1com valores de primeira variável menores do que aqueles da imagem atual até VNO com umvalor de primeira variável mais baixo.A lista de imagem de referência inicializada pelo processo exposto é transferida àunidade de reordenação de lista de imagem de referência 640. Então, a lista de imagem dereferência inicializada é reordenada para codificação mais eficiente. O processo dereordenação é para reduzir uma taxa de bit pela atribuição de um pequeno número a umaimagem de referência com probabilidade mais alta de ser selecionada como uma imagemde referência pela operação de um armazenamento temporário de imagem decodificada.Vários métodos de reordenação de uma lista de imagem de referência são explicados emrelação às figuras 12 a 19, como segue.

A figura 12 é um diagrama de blocos interno da unidade de reordenação de lista deimagem de referência 640 de acordo com uma modalidade da presente invenção.

Em relação à figura 12, a unidade de reordenação de lista de imagem de referência640 inclui, basicamente, uma unidade de verificação de tipo de fatia 642, uma unidade dereordenação de lista 0 de imagem de referência 643, e uma unidade de reordenação de lista1 de imagem de referência 645.

Em particular, a unidade de reordenação de lista 0 de imagem de referência 643inclui uma primeira unidade de obtenção de informação de identificação 643A e umaprimeira unidade de mudança de atribuição de índice de referência 643B. e a unidade dereordenação de lista 1 de imagem de referência 645 inclui uma segunda unidade deobtenção de identificação 645A e uma segunda unidade de mudança de atribuição de índicede referência 645B.

A unidade de verificação de tipo de fatia 642 verifica um tipo de fatia de uma fatiaatual. Então, é decidido se deve-se reordenar uma lista 0 de imagem de referência e/ou umalista 1 de imagem de referência de acordo com o tipo de fatia. Por exemplo, se o tipo de fatiade uma fatia atual for uma fatia I, nem a lista O de imagem de referência nem a lista 1 deimagem de referência são reordenadas. Se o tipo de fatia da fatia atual for fatia P, somentea lista O de imagem de referência é reordenada. Se o tipo de fatia de uma fatia atual for fatiaB, tanto a lista O de imagem de referência quanto a lista 1 de imagem de referência sãoreordenadas.

A unidade de reordenação de lista 0 de imagem de referência 643 é ativada seinformação de indicador para executar a reordenação da lista O de imagem de referência for'verdadeiro' e se o tipo de fatia da fatia atual não for a fatia I. A primeira unidade deobtenção de informação de identificação 643A obtém informação de identificação que indicaum método de atribuição de índice de referência. A primeira unidade de mudança deatribuição de índice de referência 643B muda um índice de referência atribuído a cadaimagem de referência da lista 0 de imagem de referência de acordo com a informação deidentificação.

Igualmente, a unidade de reordenação de lista 1 de imagem de referência 645 éativada se informação de indicador para executar a reordenação da lista 1 de imagem dereferência for 'verdadeiro' e se o tipo de fatia da fatia atual for fatia Β. A segunda unidade deobtenção de informação de identificação 645A obtém informação de identificação que indicaum método de atribuição de índice de referência. A segunda unidade de mudança deatribuição de índice de referência 645B muda um índice de referência atribuído a cadaimagem de referência da lista 1 de imagem de referência de acordo com a informação deidentificação.

Então, informação da lista de imagem de referência usada para interprognósticoreal é gerada por meio da unidade de reordenação de lista 0 de imagem de referência 643 eda unidade de reordenação de lista 1 de imagem de referência 645.

Um método para mudar um índice de referência atribuído a cada imagem dereferência pelas primeira ou segunda unidades de mudança de atribuição de índice dereferência 643B ou 645B é explicado em relação à figura 13, como segue.

A figura 13 é um diagrama de blocos interno de uma unidade de mudança deatribuição de índice de referência 643B ou 645B de acordo com uma modalidade dapresente invenção. Na seguinte descrição, a unidade de reordenação de lista 0 de imagemde referência 643 e a unidade de reordenação de lista 1 de imagem de referência 645mostradas na figura 12 são explicadas juntamente.

Em relação à figura 13, cada uma das primeira e segunda unidades de mudança deatribuição de índice de referência 643B e 645B inclui uma unidade de mudança deatribuição de índice de referência para prognóstico temporal 644A, uma unidade demudança de atribuição de índice de referência para imagem de referência de longo prazo644B, uma unidade de mudança de atribuição de índice de referência para prognósticointervisualização 644C, e uma unidade de término de mudança de atribuição de índice dereferência 644D. De acordo com informações de identificação obtidas pelas primeira esegunda unidades de obtenção de informação de identificação 643A e 645A, partes nasprimeira e segunda unidades de mudança de atribuição de índice de referência 643B e 645Bsão ativadas, respectivamente, e o processo de reordenação continua sendo executado atéque a informação de identificação para o término da mudança de atribuição do índice dereferência seja inserida.

Por exemplo, se informação de identificação para mudar atribuição de um índice dereferência para prognóstico temporal for recebida das primeira ou segunda unidades deobtenção de informação de identificação 643A ou 645A, a unidade de mudança deatribuição de índice de referência para prognóstico temporal 644A é ativada. A unidade demudança de atribuição de índice de referência para prognóstico temporal 644A obtém umadiferença de número de imagem de acordo com a informação de identificação recebida.Neste caso, a diferença de unidade de mapeamento de imagem significa uma diferençaentre um número de imagem de uma imagem atual e um número de imagem prognosticado,e o número de imagem prognosticado pode indicar um número de uma imagem dereferência atribuída exatamente antes. Então, pode-se mudar a atribuição do índice dereferência usando a diferença do número de imagem obtida. Neste caso, a diferença do número de imagem pode ser adicionada / subtraída do número de imagem prognosticado deacordo com a informação de identificação.

Como um outro exemplo, se informação de identificação para mudar atribuição deum índice de referência a uma imagem de referência de longo prazo designada for recebida,a unidade de mudança de atribuição de índice de referência para uma imagem de referência de longo prazo 644B é ativada. A unidade de mudança de atribuição de índice de referênciapara uma imagem de referência de longo prazo 644B obtém um número de imagem dereferência de longo prazo de uma imagem designada de acordo com o número deidentificação.

Como um outro exemplo, se informação de identificação para mudar atribuição de um índice de referência para prognóstico intervisualização for recebida, a unidade demudança de atribuição de índice de referência para prognóstico intervisualização 644C éativada. A unidade de mudança de atribuição de índice de referência para prognósticointervisualização 644C obtém diferença de informação de visualização de acordo com ainformação de identificação. Neste caso, a diferença de informação de visualização significa uma diferença entre um número de visualização de uma imagem atual e um número devisualização prognosticado, e o número de visualização prognosticado pode indicar umnúmero de visualização de uma imagem de referência atribuída exatamente antes. Então,pode-se mudar a atribuição de um índice de referência usando a diferença de informação devisualização obtida. Neste caso, a diferença de informação de visualização pode ser adicionada / subtraída do número de visualização prognosticado de acordo com ainformação de identificação.

Como um outro exemplo, se informação de identificação para terminar umamudança de atribuição de índice de referência for recebida, a unidade de término demudança de atribuição de índice de referência 644D é ativada. A unidade de término de mudança de atribuição de índice de referência 644D termina uma mudança de atribuição deum índice de referência de acordo com a informação de identificação recebida. Então, aunidade de reordenação de lista de imagem de referência 640 gera informação de lista deimagem de referência.

Assim, imagens de referência usadas para prognóstico intervisualização podem ser gerenciadas juntamente em relação às imagens usadas para prognóstico temporal.Alternativamente, imagens de referência usadas para prognóstico intervisualização podemser gerenciadas separadas das imagens de referência usadas para prognóstico temporal.Para isto, novas informações para gerenciar as imagens de referência usadas para oprognóstico intervisualização podem ser exigidas. Isto será explicado em relação às figuras15a 19, posteriormente.

Detalhes da unidade de mudança de atribuição de índice de referência paraprognóstico intervisualização 644C são explicados em relação à figura 14, como segue.

A figura 14 é um diagrama para explicar um processo para reordenar uma lista deimagem de referência usando invólucro de visualização de acordo com uma modalidade dapresente invenção.

Em relação à figura 14, se um número de visualização VN de uma imagem atual for3, se o tamanho de um armazenamento temporário de imagem decodificada DPBzise for 4,e se o tipo de fatia de uma fatia atual for fatia P, um processo de reordenação para uma lista0 de imagem de referência é explicado como segue.

Antes de mais nada, um número de visualização inicialmente prognosticado é '3',que é o número de visualização da imagem atual, e um alinhamento inicial da lista 0 deimagem de referência para prognóstico intervisualização é '4, 5, 6, 2' (1). Neste caso, seinformação de identificação para mudar atribuição de um índice de referência paraprognóstico intervisualização pela subtração de uma diferença de informação devisualização for recebida, Ί' é obtida como a diferença de informação de visualização deacordo com a informação de identificação recebida. Um número de visualizaçãoprognosticado (=2) é calculado pela subtração da diferença de informação de visualização(=1) do num de visualização prognosticado (=3). Em particular, um primeiro índice da lista 0de imagem de referência para o prognóstico intervisualização é atribuído a uma imagem dereferência com o número de visualização 2. e uma imagem previamente atribuída aoprimeiro índice pode ser movida para uma parte mais atrás da lista 0 de imagem dereferência. Então, a lista 0 de imagem de referência reordenada é '2, 5, 6, 4' (2).Subseqüentemente, se informação de identificação para mudar atribuição de um índice dereferência para prognóstico intervisualização pela subtração da diferença de informação devisualização for recebida, '-2' é obtido como a diferença de informação de visualização deacordo com a informação de identificação. Então, um número de visualização recém-prognosticado (=4) é calculado pela subtração da diferença de informação de visualização(=-2) do número de visualização prognosticado (=2). Em particular, um segundo índice dalista 0 de imagem de referência para o prognóstico intervisualização é atribuído a umaimagem de referência com um número de visualização 4. Portanto, a lista 0 de imagem dereferência reordenada é '2, 4, 6, 5' (3). Subseqüentemente, se informação de identificaçãopara terminar a mudança de atribuição de índice de referência for recebida, a lista 0 deimagem de referência com a lista 0 de imagem de referência reordenada como um fim égerada de acordo com a informação de identificação recebida (4). Portanto, a ordem da listaO de imagem de referência finalmente gerada para o prognóstico intervisualização é '2, 4, 6,5'.

Como um outro exemplo de reordenação do resto das imagens depois que oprimeiro índice da lista 0 de imagem de referência para o prognóstico intervisualização foiatribuído, uma imagem atribuída a cada índice pode ser movida até uma posiçãoexatamente atrás daquela da imagem correspondente. Em particular, um segundo índice éatribuído a uma imagem com um número de visualização 4, um terceiro índice é atribuído auma imagem (número de visualização 5) à qual o segundo índice foi atribuído, e um quartoíndice é atribuído a uma imagem (número de visualização 6) à qual o terceiro índice foiatribuído. Portanto, a lista 0 de imagem de referência reordenada se torna '2, 4, 5, 6'. e umprocesso de reordenação subseqüente pode ser executado da mesma maneira.

A lista de imagem de referência gerada pelo processo exposto é usada parainterprognóstico. Tanto a lista de imagem de referência para o prognóstico intervisualizaçãoquanto a lista de imagem de referência para o prognóstico temporal podem ser gerenciadascomo uma lista de imagem de referência. Alternativamente, cada uma da lista de imagem dereferência para o prognóstico intervisualização e da lista de imagem de referência para oprognóstico temporal pode ser gerenciada como uma lista de imagem de referênciaseparada. Isto é explicado em relação às figuras 15 a 19, como segue.

A figura 15 é um diagrama de blocos interno de uma unidade de reordenação delista de imagem de referência 640 de acordo com uma outra modalidade da presenteinvenção.

Em relação à figura 15, a fim de gerenciar uma lista de imagem de referência paraprognóstico intervisualização como uma lista de imagem de referência separada, novasinformações podem ser necessárias. Por exemplo, uma lista de imagem de referência paraprognóstico temporal é reordenada e, então, uma lista de imagem de referência paraprognóstico intervisualização é reordenada em alguns casos.

Basicamente, a unidade de reordenação de lista de imagem de referência 640 incluiuma unidade de reordenação de lista de imagem de referência para prognóstico temporal910, uma unidade de verificação de tipo NAL 960, e uma unidade de reordenação de lista deimagem de referência para prognóstico intervisualização 970.

A unidade de reordenação de lista de imagem de referência para prognósticotemporal 910 inclui uma unidade de verificação de tipo de fatia 642, uma terceira unidade deobtenção de informação de identificação 920, uma terceira unidade de mudança deatribuição de índice de referência 930, uma quarta unidade de obtenção de informação deidentificação 940, e uma quarta unidade de mudança de atribuição de índice de referência950. A terceira unidade de mudança de atribuição de índice de referência 930 inclui umaunidade de mudança de atribuição de índice de referência para prognóstico temporal 930A,uma unidade de mudança de atribuição de índice de referência para uma imagem dereferência de longo prazo 930B, e uma unidade de término de mudança de atribuição deíndice de referência 930C. Igualmente, a quarta unidade de mudança de atribuição de índicede referência 950 inclui uma unidade de mudança de atribuição de índice de referência paraprognóstico temporal 950A, uma unidade de mudança de atribuição de índice de referênciapara imagem de referência de longo prazo 950B, e uma unidade de término de mudança deatribuição de índice de referência 950C.

A unidade de reordenação de lista de imagem de referência para prognósticotemporal 910 reordena imagens de referência usadas para prognóstico temporal. Operaçõesda unidade de reordenação de lista de imagem de referência para prognóstico temporal 910são idênticas àquelas da unidade de reordenação de lista de imagem de referência 640exposta mostrada na figura 10, exceto informações para as imagens de referência para oprognóstico intervisualização. Então, detalhes da unidade de reordenação de lista deimagem de referência para prognóstico temporal 910 são omitidos na seguinte descrição.

A unidade de verificação de tipo NAL 960 verifica um tipo NAL de um fluxo contínuode bits recebido. Se o tipo NAL for uma NAL para codificação de vídeo multivisualização,imagens de referência usadas para o prognóstico intervisualização são reordenadas pelaunidade de reordenação de lista de imagem de referência para prognóstico temporal 970. Alista de imagem de referência gerada para o prognóstico intervisualização é usada parainterprognóstico juntamente com a lista de imagem de referência gerada pela unidade dereordenação de lista de imagem de referência para prognóstico temporal 910. Ainda, se otipo NAL não for a NAL para a codificação de vídeo multivisualização, a lista de imagem dereferência para o prognóstico intervisualização não é reordenada. Neste caso, somente umalista de imagem de referência para prognóstico temporal é gerada, e a unidade dereordenação de lista de imagem de referência para prognóstico intervisualização 970reordena imagens de referência usadas para prognóstico intervisualização. Isto é explicadocom detalhes em relação à figura 16, como segue.

A figura 16 é um diagrama de blocos interno da unidade de reordenação de lista deimagem de referência 970 para prognóstico intervisualização de acordo com umamodalidade da presente invenção.

Em relação à figura 16, a unidade de reordenação de lista de imagem de referênciapara prognóstico intervisualização 970 inclui uma unidade de verificação de tipo de fatia 642,uma quinta unidade de obtenção de informação de identificação 971, uma quinta unidade demudança de atribuição de índice de referência 972, uma sexta unidade de obtenção deinformação de identificação 973, e uma sexta unidade de mudança de atribuição de índicede referência 974.

A unidade de verificação de tipo de fatia 642 verifica o tipo de fatia da fatia atual. Sefor o caso, então, decide-se se deve-se executar a reordenação de uma lista 0 de imagemde referência e/ou de uma lista 1 de imagem de referência de acordo com o tipo de fatia.Detalhes da unidade de verificação do tipo de fatia 642 que são omitidos na seguintedescrição podem ser inferidos da figura 10.

Cada uma da quinta e da sexta unidades de obtenção de informação deidentificação 971 e 973 obtém informação de identificação que indica um método deatribuição de índice de referência, e cada uma das quinta e sexta unidades de mudança deatribuição de índice de referência 972 e 974 muda um índice de referência atribuído a cadaimagem de referência da lista 0 de imagem de referência e/ou da lista 1 de imagem dereferência. Neste caso, o índice de referência pode significar um número de visualizaçãosomente de uma imagem de referência, e a informação de identificação que indica o métodode atribuição de índice de referência pode ser informação de indicador. Por exemplo, se ainformação de indicador for verdadeiro, uma atribuição de um número de visualização émudada. Se a informação de identificação for falso, um processo de reordenação de umnúmero de visualização pode ser transmitido. Se a informação de identificação forverdadeiro, cada uma das quinta e sexta unidades de mudança de atribuição de índice dereferência 972 e 974 pode obter uma diferença do número de visualização de acordo com ainformação do indicador. Neste caso, a diferença do número de visualização significa umadiferença entre um número de visualização de uma imagem atual e um número devisualização de uma imagem prognosticada, e o número de visualização da imagemprognosticada pode significar um número de visualização de uma imagem de referênciaatribuída exatamente antes. Então, pode-se mudar a atribuição do número de visualizaçãousando a diferença do número de visualização. Neste caso, a diferença do número devisualização pode ser adicionada / subtraída do número de visualização da imagemprognosticada de acordo com a informação de identificação.

Assim, para gerenciar a lista de imagem de referência para o prognósticointervisualização como uma lista de imagem de referência separada, é necessário definirnovamente uma estrutura de sintaxe. Como uma modalidade dos conteúdos explicados nafigura 15 e na figura 16, a sintaxe é explicada em relação à figura 17, à figura 18 e à figura19, como segue.

A figura 17 e a figura 18 são diagramas de sintaxe para a reordenação da lista deimagem de referência de acordo com uma modalidade da presente invenção.

Em relação à figura 17, uma operação da unidade de reordenação de lista deimagem de referência para o prognóstico temporal 910 mostrada na figura 15 érepresentada como sintaxe. Comparado com os blocos mostrados na figura 15, a unidadede verificação de tipo de fatia 642 corresponde a S1 e S6, e a quarta unidade de obtençãode informação de identificação 940 corresponde a S7. Os blocos internos da terceiraunidade de mudança de atribuição de índice de referência 930 correspondem a S3, S4 e S5,respectivamente, e os blocos internos da quarta unidade de mudança de atribuição deíndice de referência 950 correspondem a S8, S9 e S10, respectivamente.

Em relação à figura 18, operações da unidade de verificação do tipo NAL 960 e aunidade de reordenação de lista de imagem de referência intervisualização 920 sãorepresentadas como sintaxe. Comparado com os respectivos blocos mostrados na figura 15e na figura 16, a unidade de verificação tipo NAL 960 corresponde a S13 e S16, a quintaunidade de obtenção de informação de identificação 971 corresponde a S14, e a sextaunidade de obtenção de informação de identificação 973 corresponde a S17. A quintaunidade de mudança de atribuição de índice de referência 972 corresponde a S15 e a sextaunidade de mudança de atribuição de índice de referência 974 corresponde a S18.

A figura 19 é um diagrama de sintaxe para a reordenação da lista de imagem dereferência de acordo com uma outra modalidade da presente invenção.

Em relação à figura 19, operações da unidade de verificação de tipo NAL 960 e aunidade de reordenação de lista de imagem de referência intervisualização 970 sãorepresentadas como sintaxe. Comparado com os respectivos blocos mostrados na figura 15e na figura 16, a unidade de verificação do tipo NAL 960 corresponde a S21, a unidade deverificação do tipo de fatia 642 corresponde a S22 e S25, a quinta unidade de obtenção deinformação de identificação 971 corresponde a S23, e a sexta unidade de obtenção deinformação de identificação 973 corresponde a S26. A quinta unidade de mudança deatribuição de índice de referência 972 corresponde a S24 e a sexta unidade de mudança deatribuição de índice de referência 974 corresponde a S27.

Da forma mencionada na descrição exposta, a lista de imagem de referência para oprognóstico intervisualização pode ser usada pela unidade de interprognóstico 700 etambém é usada para realizar compensação de iluminação. A compensação de iluminaçãoé aplicável no curso da realização da estimativa de movimento / compensação demovimento. No caso em que uma imagem atual usa uma imagem de referência em umavisualização diferente, pode-se realizar a compensação de iluminação mais eficientementeusando a lista de imagem de referência para o prognóstico intervisualização. Ascompensações de iluminação de acordo com modalidades da presente invenção sãoexplicadas como segue.

A figura 20 é um diagrama para um processo para obter um valor de diferença deiluminação do bloco atual de acordo com uma modalidade da presente invenção.

Compensação de iluminação significa um processo para decodificar uma solicitaçãocompensada adaptativamente em relação ao movimento de acordo com a mudança deiluminação, e ela é aplicável a uma estrutura de prognóstico de um sinal de vídeo, porexemplo, prognóstico intervisualização, prognóstico intravisualização e congêneres.Compensação de iluminação significa um processo para decodificar um sinal devídeo usando uma diferença de iluminação residual e um valor de prognóstico de diferençade iluminação correspondente a um bloco a ser decodificado. Neste caso, o valor deprognóstico de diferença de iluminação pode ser obtido de um bloco vizinho do bloco atual.Um processo para obter um valor de prognóstico de diferença de iluminação do blocovizinho pode ser decidido usando informação de referência para o bloco vizinho, e umaseqüência e direção podem ser levadas em consideração no curso da busca por blocosvizinhos. O bloco vizinho significa um bloco já decodificado e também significa um blocodecodificado pela consideração da redundância na mesma imagem para uma visualizaçãoou tempo ou uma seqüência decodificados pela consideração da redundância nas diferentesimagens.

Na comparação de similaridades entre um bloco atual e um bloco de referênciacandidato, uma diferença de iluminação entre os dois blocos deve ser levada emconsideração. A fim de compensar a diferença de iluminação, nova estimação /compensação de movimento é executada. Novo SAD pode ser encontrado usando aFórmula 1.

[Fórmula 1]

<formula>formula see original document page 37</formula>

[Fórmula 2]

<formula>formula see original document page 37</formula>

Neste caso, 'Mcurr' indica um valor de pixel médio de um bloco atual e 'Mref indicaum valor de pixel médio de um bloco de referência. lf(i,j)' indica um valor de pixel de umbloco atual e 'r(i+x, j+y)' indica um valor de pixel de um bloco de referência. Pela realizaçãode estimativa de movimento com base no novo SAD de acordo com a Fórmula 2, pode-seobter um valor de diferença de pixel médio entre o bloco atual e o bloco de referência, e ovalor de diferença de pixel médio obtido pode ser chamado de um valor de diferença deiluminação (IC_offset).

No caso da realização de estimativa de movimento na qual a compensação deiluminação é aplicada, um valor de diferença de iluminação e um vetor de movimento sãogerados, e a compensação de iluminação é executada de acordo com a Fórmula 3 usando ovalor de diferença de iluminação e o vetor de movimento.

[Fórmula 3]

<formula>formula see original document page 38</formula>

Neste caso, NewR(i,j) indica um valor de erro compensado (residual) e (x\ y') indicaum vetor de movimento.

Um valor de diferença de iluminação (Mcurr - Mref) deve ser transferido à unidadede decodificação. A unidade de decodificação realiza a compensação de iluminação daseguinte maneira.

[Fórmula 4]

<formula>formula see original document page 38</formula>

Na Fórmula 4, NewR"(i,j) indica um valor de erro compensado com iluminaçãoreconstruída (residual) e f'(i,j) indica um valor de pixel de um bloco atual reconstruído.

A fim de reconstruir um bloco atual, um valor de diferença de iluminação deve sertransferido à unidade de decodificação. e o valor de diferença de iluminação pode serprognosticado a partir da informação dos blocos vizinhos. A fim de reduzir adicionalmente onúmero de bits para codificar o valor da diferença de iluminação, pode-se transmitir um valorde diferença (RIC_offset) entre o valor da diferença de iluminação do bloco atual (IC_offset)e o valor da diferença de iluminação do bloco vizinho (predlC_offset) somente. Isto érepresentado pela Fórmula 5.

[Fórmula 5]

<formula>formula see original document page 38</formula>

A figura 21 é um fluxograma de um processo para realizar compensação deiluminação de um bloco atual de acordo com uma modalidade da presente invenção.

Em relação à figura 21, antes de mais nada, um valor de diferença de iluminação deum bloco vizinho que indica um valor de diferença de pixel médio entre o bloco vizinho dobloco atual e de um bloco referido pelo bloco vizinho é extraído do sinal de vídeo. (S2110).

Subseqüentemente, um valor de prognóstico de diferença de iluminação paracompensação de iluminação do bloco atual é obtido usando o valor de diferença deiluminação (S2120). Então, pode-se reconstruir um valor de diferença de iluminação dobloco atual usando o valor de prognóstico de diferença de iluminação obtido.

Na obtenção do valor de prognóstico de diferença de iluminação, pode-se usarvários métodos. Por exemplo, antes de o valor da diferença de iluminação do bloco atual serprognosticado a partir do valor da diferença de iluminação do bloco vizinho, verifica-se seum índice de referência do bloco atual é igual àquele do bloco vizinho. Então, pode-sedecidir qual tipo de bloco vizinho ou qual valor será usado de acordo com o resultado daverificação. Como um outro exemplo, na obtenção do valor de prognóstico da diferença deiluminação, pode ser usada informação de indicador (IC_flag) que indica se deve-seexecutar uma compensação de iluminação do bloco atual, e informação do indicador para obloco atual também pode ser prognosticada usando a informação dos blocos vizinhos.Como um outro exemplo, pode-se obter o valor de prognóstico de diferença de iluminaçãousando tanto o método de verificação de índice de referência quanto o método deprognóstico de informação do indicador. Estes são explicados com detalhes em relação àsfiguras 22 a 24, como segue.

A figura 22 é um diagrama de blocos de um processo para obter um valor deprognóstico de diferença de iluminação de um bloco atual usando informação para um blocovizinho de acordo com uma modalidade da presente invenção.

Em relação à figura 22, pode-se usar informação para um bloco vizinho naobtenção da um valor de prognóstico de diferença de iluminação do bloco atual. Na presentedivulgação, um bloco pode incluir um macrobloco ou um submacrobloco. Por exemplo,pode-se prognosticar um valor de diferença de iluminação do bloco atual usando um valorde diferença de iluminação do bloco vizinho. Antes disto, verifica-se se um índice dereferência do bloco atual é igual àquele do bloco vizinho. Então, de acordo com o resultadoda verificação, pode-se decidir qual tipo de bloco vizinho ou qual valor será usado. Na figura22, 'refldxLx' indica um índice de referência do bloco atual, 'refldxLXN' indica um índice dereferência de um bloco N. Neste caso, 'N' é uma arca de um bloco vizinho ao bloco atual eindica A, B ou C. E, 'PredlC_offsetN' indica um valor de diferença de iluminação paracompensação de iluminação de um bloco N vizinho. Se o bloco C que está localizado emuma extremidade superior direita do bloco atual não puder ser usado, pode-se usar umbloco D, em vez do bloco C. Em particular, informação para o bloco D é usada comoinformação para o bloco C. Se nem o bloco B nem o bloco C puderem ser usados, em vezdisto, pode-se usar o bloco A. A saber, pode-se usar a informação para o bloco A como ainformação para o bloco B ou para o bloco C.

Como um outro exemplo, na obtenção do valor de prognóstico da diferença deiluminação, pode-se usar informação do indicador (IC_flag) que indica se deve-se executaruma compensação de iluminação do bloco atual. Alternativamente, pode-se usar tanto ométodo de verificação de índice de referência quanto o método de prognóstico deinformação de indicador na obtenção do valor de prognóstico de diferença de iluminação.Neste caso, se a informação do indicador para o bloco vizinho indicar que a compensaçãode iluminação não é executada, isto é, se IC_flag==0, o valor da diferença de iluminação'PredlC_offsetN' do bloco vizinho é ajustado em 0.

A figura 23 é um fluxograma de um processo para realizar compensação deiluminação usando informação para um bloco vizinho de acordo com uma modalidade dapresente invenção.

Em relação à figura 23, a unidade de decodificação extrai um valor de pixel médiode um bloco de referência, um índice de referência do bloco atual, um índice de referênciado bloco de referência e congêneres de um sinal de vídeo e, então, pode obter um valor deprognóstico de diferença de iluminação do bloco atual usando a informação extraída. Aunidade de decodificação obtém um valor de diferença (diferença de iluminação residual)entre um valor de diferença de iluminação do bloco atual e o valor de prognóstico dediferença de iluminação e, então, pode reconstruir um valor de diferença de iluminação dobloco atual usando a diferença de iluminação residual obtida e o valor de prognóstico dadiferença de iluminação. Neste caso, pode-se usar informação para um bloco vizinho paraobter o valor de prognóstico da diferença de iluminação do bloco atual. Por exemplo, pode-se prognosticar um valor de diferença de iluminação do bloco atual usando o valor dediferença de iluminação do bloco vizinho. Antes disto, verifica-se se um índice de referênciado bloco atual é igual àquele do bloco vizinho. Então, de acordo com o resultado daverificação, pode-se decidir qual tipo de bloco vizinho ou de valor será usado.

Em particular, um valor de diferença de iluminação de um bloco vizinho que indicaum valor de diferença de pixel médio entre o bloco vizinho de um bloco atual e um blocoreferido pelo bloco vizinho é extraído de um sinal de vídeo. (S2310).

Subseqüentemente, verifica-se se um índice de referência do bloco atual é igual aum índice de referência de um bloco vizinho de uma pluralidade de blocos vizinhos (S2320).

Em decorrência da etapa de verificação S2320, se existir pelo menos um blocovizinho com o mesmo índice de referência daquele do bloco atual, verifica-se se existe umbloco vizinho correspondente ou não (S2325).

Em decorrência da etapa de verificação S2325, se existir somente um bloco vizinhocom o mesmo índice de referência do bloco atual, um valor de diferença de iluminação dobloco vizinho com o mesmo índice de referência do bloco atual é atribuído a um valor deprognóstico de diferença de iluminação do bloco atual (S2330). Em particular, ele é'PredlC_offset = Predlc_offsetN'.

Se o bloco vizinho com o mesmo índice de referência daquele do bloco atual deixarde existir em decorrência da etapa de verificação S2320 ou se existir pelo menos doisblocos vizinhos com o mesmo índice de referência daquele do bloco atual em decorrênciada etapa de verificação S2325, uma mediana dos valores de diferença de iluminação(PredlC_offsetN, N = A, B ou C) dos blocos vizinhos é atribuída a um valor de prognósticode diferença de iluminação do bloco atual (S650). Em particular, ele é 'PredlC_offset =Median(PredlC_offsetA, PredlC_offsetB, PredlC_offsetC').

A figura 24 é um fluxograma de um processo para realizar compensação deiluminação usando informação para um bloco vizinho de acordo com uma outra modalidadeda presente invenção.

Em relação à figura 24, uma unidade de decodificação deve reconstruir um valor dediferença de iluminação do bloco atual para realizar a compensação de iluminação. Nestecaso, pode-se usar informação para um bloco vizinho para obter um valor de prognóstico dediferença de iluminação do bloco atual. Por exemplo, pode-se prognosticar um valor dediferença de iluminação do bloco atual usando o valor de diferença de iluminação do blocovizinho. Antes disto, verifica-se se um índice de referência do bloco atual é igual àquele dobloco vizinho. Então, de acordo com o resultado da verificação, pode-se decidir qual de umbloco vizinho ou de um valor será usado.

Em particular, um valor de diferença de iluminação de um bloco vizinho que indicaum valor de diferença de pixel médio entre o bloco vizinho do bloco atual e um bloco referidopelo bloco vizinho é extraído de um sinal de vídeo (S2410).

Subseqüentemente, verifica-se se um índice de referência do bloco atual é igual aum índice de referência de um de uma pluralidade de blocos vizinhos (S2420).

Em decorrência da etapa de verificação S720, se existir pelo menos um blocovizinho com o mesmo índice de referência daquele do bloco atual, verifica-se se existe umbloco vizinho correspondente ou não (S2430).

Em decorrência da etapa de verificação S2430, se existir somente um bloco vizinhocom o mesmo índice de referência daquele do bloco atual, um valor de diferença deiluminação do bloco vizinho com o mesmo índice de referência daquele do bloco atual éatribuído a um valor de prognóstico de diferença de iluminação do bloco atual (S2440). Emparticular, ele é 'PredlC_offset = PredlC_offsetN'.

Se o bloco vizinho com o mesmo índice de referência daquele do bloco atual deixarde existir em decorrência da etapa de verificação S2420, o valor de prognóstico da diferençade iluminação do bloco atual é ajustado em 0 (S2460). Em particular, ele é 'PredlC_offset =0'.Se existir pelo menos dois blocos vizinhos com o mesmo índice de referênciadaquele do bloco atual em decorrência da etapa de verificação S2430, o bloco vizinho comum índice de referência diferente daquele do bloco atual é ajustado em 0, e uma medianados valores de diferença de iluminação dos blocos vizinhos, incluindo o valor ajustado em 0,é atribuída ao valor de prognóstico da diferença de iluminação do bloco atual (S2450). Emparticular, ele é 'PredlC_offset = Median(PredlC_offsetA, PredlC_offsetB, PredlC_offsetC)'.Ainda, no caso em que existe o bloco vizinho com o índice de referência diferente daqueledo bloco atual, o valor Ό' pode ser incluído em PredlC_offsetA, em PredlC_offsetB ou emPredlC_offsetC.

Neste ínterim, informação de visualização para identificar uma visualização de umaimagem e uma lista de imagem de referência para prognóstico intervisualização é aplicávelà sintetização de uma imagem em uma visualização virtual. Em um processo para sintetizaruma imagem em uma visualização virtual, uma imagem em uma visualização diferente podeser referida. Então, se a informação de visualização e a lista de imagem de referência para oprognóstico intervisualização forem usadas, pode-se sintetizar uma imagem em umavisualização virtual mais eficientemente. Na seguinte descrição, são explicados métodospara sintetizar uma imagem em uma visualização virtual de acordo com modalidades dapresente invenção.

A figura 25 é um diagrama de blocos de um processo para prognosticar umaimagem atual usando uma imagem em uma visualização virtual de acordo com umamodalidade da presente invenção.

Em relação à figura 25, na realização de prognóstico intervisualização nacodificação de vídeo multivisualização, pode-se prognosticar uma imagem atual usando umaimagem em uma visualização diferente daquela da visualização atual como uma imagem dereferência. Ainda, uma imagem em uma visualização virtual é obtida usando imagens emuma visualização vizinha àquela de uma imagem atual e, então, a imagem atual éprognosticada usando a imagem obtida na visualização virtual. Se for o caso, o prognósticopode ser realizado mais precisamente. Neste caso, um identificador de visualização, queindica uma visualização de uma imagem, pode ser usado para utilizar imagens emvisualizações ou imagens vizinhas em uma visualização específica. NO caso em que avisualização virtual for gerada, deve existir sintaxe específica para indicar se deve-se gerar avisualização virtual. Se a sintaxe indicar que a visualização virtual deve ser gerada, pode-segerar a visualização virtual usando o identificador de visualização. As imagens navisualização virtual obtidas pela unidade de prognóstico de síntese de visualização 740 sãousadas como imagens de referência. Neste caso, o identificador de visualização pode seratribuído às imagens na visualização virtual. Em um processo para realizar prognóstico devetor de movimento para transferir um vetor de movimento, blocos vizinhos do bloco atualpodem se referir às imagens obtidas pela unidade de prognóstico de síntese de visualização740. Neste caso, para usar a imagem na visualização virtual como a imagem de referência,um identificador de visualização que indica uma visualização de uma imagem pode serutilizado.

A figura 26 é um fluxograma de um processo para sintetizar uma imagem de umavisualização virtual na realização de prognóstico intervisualização na MVC de acordo comuma modalidade da presente invenção.

Em relação à figura 26, uma imagem em uma visualização virtual é sintetizadausando imagens em uma visualização vizinha àquela da imagem atual. Então, a imagematual é prognosticada usando a imagem sintetizada na visualização virtual. Se for o caso,pode-se alcançar prognóstico mais preciso. No caso em que uma imagem em umavisualização virtual é sintetizada, existe sintaxe específica indicando se deve-se executar umprognóstico de uma imagem atual pela sintetização da imagem na visualização virtual. Sefor decidido executar o prognóstico da imagem atual, é possível codificação mais eficiente. Asintaxe específica é definida como um identificador de prognóstico de sínteseintervisualização, que é explicado como segue. Por exemplo, uma imagem em umavisualização virtual é sintetizada por uma camada de fatia para definir'view_synthesize_pred_flag' que indica se deve-se executar um prognóstico de uma imagematual, e uma imagem em uma visualização virtual é sintetizada por uma camada demacrobloco para definir 'view_syn_pred_flag' que indica se deve-se executar umprognóstico de uma imagem atual. Se 'view_synthsize_pred_flag = 1', uma fatia atualsintetiza uma fatia em uma visualização virtual usando uma fatia em uma visualizaçãovizinha àquela da fatia atual. Então, pode-se prognosticar a fatia atual usando a fatiasintetizada. Se 'view_synthesize_pred_flag = 0', uma fatia em uma visualização virtual não ésintetizada. Igualmente, se 'view_syn_pred_flag = 1', um macrobloco atual sintetiza ummacrobloco em uma visualização virtual usando um macrobloco em uma visualizaçãovizinha àquela do macrobloco atual. Então, pode-se prognosticar o macrobloco atual usandoo macrobloco sintetizado. Se 'view_syn_pred_flag = 0', um macrobloco em uma visualizaçãovirtual não é sintetizado. Portanto, na presente invenção, o identificador de prognóstico desíntese intervisualização que indica se deve-se obter uma imagem em uma visualizaçãovirtual é extraído de um sinal de vídeo. Então, pode-se obter a imagem na visualizaçãovirtual usando o identificador de prognóstico de síntese intervisualização.

Da forma mencionada na descrição exposta, informação de visualização paraidentificar uma visualização de uma imagem e uma lista de imagem de referência paraprognóstico intervisualização podem ser usadas pela unidade de interprognóstico 700. eelas também podem ser usadas na realização de prognóstico ponderado. O prognósticoponderado é aplicável a um processo para realizar compensação de movimento. Fazendoisto, se uma imagem atual usar uma imagem de referência em uma visualização diferente,pode-se realizar o prognóstico ponderado mais eficientemente usando a informação devisualização e a lista de imagem de referência para o prognóstico intervisualização. Métodosde prognóstico ponderado de acordo com modalidades da presente invenção são explicadoscomo segue.

A figura 27 é um fluxograma de um método para executar prognóstico ponderadode acordo com um tipo de fatia na codificação de sinal de vídeo de acordo com a presenteinvenção.

Em relação à figura 27, prognóstico ponderado é um método para escalar umaamostra de dados de prognóstico compensados em relação ao movimento em ummacrobloco da fatia P ou da fatia B. Um método de prognóstico ponderado inclui um modoexplícito para realizar prognóstico ponderado para uma imagem atual usando umainformação de coeficiente ponderado obtida da informação para imagens de referência, eum modo implícito para realizar prognóstico ponderado para uma imagem atual usando umainformação de coeficiente ponderado obtida da informação para uma distância entre aimagem atual e um das imagens de referência. O método de prognóstico ponderado podeser diferentemente aplicado de acordo com um tipo de fatia do macrobloco atual. Porexemplo, no modo explícito, a informação de coeficiente ponderado pode variar de acordocom se o macrobloco atual, no qual prognóstico ponderado é realizado, é um macrobloco deuma fatia P ou um macrobloco de uma fatia B. e o coeficiente ponderado do modo explícitopode ser decidido por um codificador e pode ser transferido sendo incluído em umcabeçalho da fatia. Por outro lado, no modo implícito, um coeficiente ponderado pode serobtido com base em uma posição relativamente temporal da Lista 0 e da Lista 1. Porexemplo, se uma imagem de referência estiver temporariamente próxima de uma imagematual, um grande coeficiente ponderado é aplicável. Se uma imagem de referência estivertemporariamente distante de uma imagem atual, um pequeno coeficiente ponderado éaplicável.

Antes de mais nada, um tipo de fatia de um macrobloco para aplicar prognósticoponderado é extraído de um sinal de vídeo (S2710).Subseqüentemente, prognóstico ponderado pode ser realizado em um macroblocode acordo com o tipo de fatia extraído (S2720).

Neste caso, o tipo de fatia pode incluir um macrobloco no qual prognósticointervisualização é aplicado. O prognóstico intervisualização significa que uma imagem atualé prognosticada usando informação para uma imagem em uma visualização diferentedaquela da imagem atual. Por exemplo, o tipo de fatia pode incluir um macrobloco no qualprognóstico temporal para realizar prognóstico usando informação para uma imagem emuma mesma visualização daquela da imagem atual é aplicado, um macrobloco no qual oprognóstico intervisualização é aplicado, e um macrobloco no qual tanto o prognósticotemporal quanto o prognóstico intervisualização são aplicados, e o tipo de fatia pode incluirum macrobloco no qual somente prognóstico temporal é aplicado, um macrobloco no qualsomente prognóstico intervisualização é aplicado, ou um macrobloco no qual tanto oprognóstico temporal quanto o prognóstico intervisualização são aplicados. Além do mais, otipo de fatia pode incluir dois dos tipos de macrobloco ou todos os três tipos de macrobloco.Isto será explicado com detalhes em relação à figura 28, posteriormente. Assim, no caso emque um tipo de fatia que inclui um prognóstico intervisualização aplicado em macrobloco éextraído de um sinal de vídeo, prognóstico ponderado é realizado usando informação parauma imagem em juma visualização diferente daquela de uma imagem atual. Fazendo isto,um identificador de visualização para identificar uma visualização de uma imagem pode serutilizado para usar informação para uma imagem em uma visualização diferente.

A figura 28 é um diagrama de tipos de macrobloco permitidos em um tipo de fatiana codificação de sinal de vídeo de acordo com uma modalidade da presente invenção.

Em relação à figura 28, se um tipo de fatia P por prognóstico intervisualização fordefinido como VP (View_P), um intramacrobloco I, um macrobloco P prognosticado de umaimagem em uma visualização atual, ou um macrobloco VP prognosticado de uma imagemem uma visualização diferente é permitido para o tipo de fatia P pelo prognósticointervisualização (2810).

No caso em que um tipo de fatia B por prognóstico intervisualização for definidocomo VB (View_B), um macrobloco P ou B prognosticado de pelo menos uma imagem emuma visualização atual ou um macrobloco VP ou VB prognosticado de pelo menos umaimagem em uma visualização diferente é permitido (2820).

No caso em que um tipo de fatia, no qual o prognóstico é realizado usandoprognóstico temporal, prognóstico intervisualização, ou tanto o prognóstico temporal quantoo prognóstico intervisualização, é definido como 'Misturado', um intramacrobloco I, ummacrobloco P ou B prognosticado a partir de pelo menos uma imagem em uma visualizaçãoatual, um macrobloco VP ou VB prognosticado a partir de pelo menos uma imagem em umavisualização diferente, ou um macrobloco 'Misturado' prognosticado usando tanto a imagemna visualização atual quanto a imagem na visualização diferente são permitidos para o tipode fatia misturado (2830). Neste caso, a fim de usar a imagem na visualização diferente,pode-se usar um identificador de visualização para identificar uma visualização de umaimagem.

A figura 29 e a figura 30 são diagramas de sintaxe para executar prognósticoponderado de acordo com um tipo de fatia recém-definido de acordo com uma modalidadeda presente invenção.

Da forma mencionada na descrição exposta da figura 28, se o tipo de fatia fordecidido como VP1 VB ou Misturado, a sintaxe para realizar o prognóstico ponderadoconvencional (por exemplo, H.264) pode ser modificada na figura 29 ou na figura 30.

Por exemplo, se um tipo de fatia for fatia P por prognóstico temporal, uma parte'se(slice_type != VP || slice_type != VB)' é adicionada (2910).

Se um tipo de fatia for uma fatia B pode prognóstico temporal, a declaração se podeser modificada em 'se(slice_type == B || slice_type == Misturado)' (2920).

Definindo novamente um tipo de fatia VP e um tipo de fatia VB, um formato similar àfigura 29 pode ser novamente adicionado (2930, 2940). Neste caso, já que informação parauma visualização é adicionada, elementos de sintaxe incluem partes de 'visualização',respectivamente. Por exemplo, há 'luma_log2_view_weight_denom,chroma_log2_view_weight_denom'.

A figura 31 é um fluxograma de um método para executar prognóstico ponderadousando informação de indicador que indica se deve-se executar prognóstico ponderadointervisualização na codificação de sinal de vídeo de acordo com a presente invenção.

Em relação à figura 31, na codificação de sinal de vídeo à qual a presente invençãoé aplicada, no caso de usar informação de indicador que indica se prognóstico ponderadoserá executado, codificação mais eficiente é habilitada.

A informação do indicador pode ser definida com base em um tipo de fatia. Porexemplo, pode existir informação de indicador que indica se prognóstico ponderado seráaplicado em uma fatia P ou em uma fatia SP, ou informação de indicador que indica seprognóstico ponderado será aplicado em uma fatia B.

Em particular, a informação de indicador pode ser definida como'weighted_pred_flag' ou 'weighted_bipred_idc'. Se 'weighted_pred_flag = 0', ele indica queprognóstico ponderado não é aplicado na fatia P nem na fatia SP. Se 'weighted_pred_flag =1', ele indica que prognóstico ponderado é aplicado na fatia P e na fatia SP. Se'weighted_bipred_idc = 0', ele indica que prognóstico ponderado padrão é aplicado na fatiaB. Se 'weighted_bipred_idc = 1', ele indica que prognóstico ponderado explícito é aplicadona fatia B. Se 'weighted_bipred_idc = 2', ele indica que prognóstico ponderado implícito éaplicado na fatia B.

Na codificação de vídeo multivisualização, informação de indicador que indica seprognóstico ponderado será executado usando informação para uma imagemmultivisualização pode ser definida com base em um tipo de fatia.

Antes de mais nada, um tipo de fatia e informação de indicador que indica seprognóstico ponderado intervisualização será executado são extraídos de um sinal de vídeo(S3110, S3120). Neste caso, o tipo de fatia pode incluir um macrobloco no qual prognósticotemporal para realizar prognóstico usando informação para uma imagem em uma mesmavisualização daquela de uma imagem atual é aplicado, e um macrobloco no qualprognóstico intervisualização para realizar prognóstico usando informação para umaimagem em uma visualização diferente daquela de uma imagem atual é aplicado.

Então, pode-se decidir um modo de prognóstico ponderado com base no tipo defatia extraída e na informação de indicador extraída (S3130).

Subseqüentemente, pode-se realizar prognóstico ponderado de acordo com omodo de prognóstico ponderado (S3140). Neste caso, a informação do indicador podeincluir informação de indicador que indica se prognóstico ponderado será executado usandoinformação para uma imagem em uma visualização diferente daquela de uma imagem atual,bem como os supramencionados 'weighted_pred_flag' e 'weighted_bipred_flag'. Isto seráexplicado com detalhes em relação à figura 32, posteriormente.

Portanto, no caso em que um tipo de fatia de um macrobloco atual é um tipo defatia que inclui um macrobloco no qual prognóstico intervisualização é aplicado, codificaçãomais eficiente é habilitada em vez de um caso de usar informação de indicador que indica seprognóstico ponderado será executado usando informação para uma imagem em umavisualização diferente.

A figura 32 é um diagrama para explicar um método de prognóstico ponderado deacordo com informação de indicador que indica se deve-se executar prognóstico ponderadousando informação para uma imagem em uma visualização diferente daquela da imagematual de acordo com uma modalidade da presente invenção.

Em relação à figura 32, por exemplo, informação de indicador que indica seprognóstico ponderado será executado usando informação para uma imagem em umavisualização diferente daquela de uma imagem atual pode ser definida como'view_weighted_pred_flag' ou 'view_weighted_bipred_flag'.

Se 'view_weighted_pred_flag = 0', ele indica que prognóstico ponderado não éaplicado em uma fatia VP. Se 'view_weighted_pred_flag = 1', prognóstico ponderadoexplícito é aplicado em uma fatia VP. Se 'view_weighted_pred_flag = 0', ele indica queprognóstico ponderado padrão é aplicado em uma fatia VB. Se 'view_weighted_pred_flag =1', ele indica que prognóstico ponderado explícito é aplicado a uma fatia VB. Se'view_weighted_pred_flag = 2', ele indica que prognóstico ponderado padrão implícito éaplicado em uma fatia VB.

No caso em que prognóstico ponderado implícito for aplicado em uma fatia VB, umcoeficiente ponderado pode ser obtido a partir de uma distância relativa entre umavisualização atual e uma visualização diferente. No caso em que prognóstico ponderadoimplícito é aplicado e uma fatia VB, prognóstico ponderado pode ser realizado usando umidentificador de visualização que identifica uma visualização de uma imagem ou umacontagem de ordem de imagem (POC) renderizada pela consideração da discriminação decada visualização.As informações de. indicador expostas podem ser incluídas em um ajuste deparâmetro de imagem (PPS). Neste caso, o ajuste de parâmetro de imagem (PPS) significainformação de cabeçalho que indica um modo de codificação de todas as imagens (porexemplo, modo de codificação de entropia, valor inicial de parâmetro de quantização porunidade de imagem, etc.). Ainda, o ajuste de parâmetro de imagem não é anexado a todasas imagens. Se um ajuste de parâmetro de imagem não existir, um ajuste de parâmetro deimagem existente exatamente antes é usado como informação de cabeçalho.

A figura 33 é um diagrama de sintaxe para executar prognóstico ponderado deacordo com a informação de indicador recém-definida de acordo com uma modalidade dapresente invenção.

Em relação à figura 33, na codificação de vídeo multivisualização na qual apresente invenção é aplicada, no caso em que um tipo de fatia que inclui um macroblocoaplicado no prognóstico intervisualização e informação de indicador que indica seprognóstico ponderado será executado usando informação para uma imagem em umavisualização diferente daquela de uma imagem atual são definidos, é necessário decidir qualtipo de prognóstico ponderado será executado de acordo com o tipo de fatia.

Por exemplo, se um tipo de fatia, mostrado na figura 33, extraído de um sinal devídeo for uma fatia P ou uma fatia SP, prognóstico ponderado pode ser executado se'weighted_pred_flag = 1'. No caso em que um tipo de fatia for uma fatia B, prognósticoponderado pode ser executado se 'weighted_bipred_flag = 1'. No caso em que um tipo defatia for uma fatia VP, prognóstico ponderado pode ser executado se'view_weighted_pred_flag = 1'. No caso em que um tipo de fatia for uma fatia VB,prognóstico ponderado pode ser executado se 'view_weighted_bipred_flag = 1'.

A figura 34 é um fluxograma de um método para executar prognóstico ponderadode acordo com uma unidade NAL (camada de abstração de rede) de acordo com umamodalidade da presente invenção.

Em relação à figura 34, antes de mais nada, um tipo de unidade NAL(nal_unit_type) é extraído de um sinal de vídeo (S910). Neste caso, o tipo de unidade NALsignifica um identificador que indica um tipo de unidade NAL. Por exemplo, se 'nal_unit_type5', uma unidade NAL é uma fatia de uma imagem IDR. e a imagem IDR (atualização dedecodificação instantânea) significa uma imagem de cabeçalho de uma seqüência de vídeo.

Subseqüentemente, verifica-se se o tipo de unidade NAL extraído é um tipo deunidade NAL para codificação de vídeo multivisualização (S3420).

Se o tipo de unidade NAL for o tipo de unidade NAL para codificação de vídeomultivisualização, prognóstico ponderado é realizado usando informação para uma imagemem uma visualização diferente daquela de uma imagem atual (S3430). O tipo de unidadeNAL pode ser um tipo de unidade NAL aplicável tanto a codificação de vídeo escalávelquanto a codificação de vídeo multivisualização ou um tipo de unidade NAL parâcodificaçãode vídeo multivisualização somente. Assim, se o tipo de unidade NAL for para codificaçãode vídeo multivisualização, o prognóstico ponderado deve ser executado usando ainformação para a imagem na visualização diferente daquela da imagem atual. Então, énecessário definir nova sintaxe. Isto será explicado com detalhes em relação à figura 35 e àfigura 36, como segue.

A figura 35 e a figura 36 são diagramas de sintaxe para executar prognósticoponderado no caso em que um tipo de unidade NAL é para codificação de vídeomultivisualização de acordo com uma modalidade da presente invenção.

Antes de mais nada, se um tipo de unidade NAL for um tipo de unidade NAL paracodificação de vídeo multivisualização, sintaxe para executar prognóstico ponderadoconvencional (por exemplo, H.264) pode ser modificada na sintaxe mostrada na figura 35 ouna figura 36. Por exemplo, um número de referência 3510 indica uma parte de sintaxe pararealizar prognóstico ponderado convencional e um número de referência 3520 indica umaparte de sintaxe para realizar prognóstico ponderado em codificação de vídeomultivisualização. Então, o prognóstico ponderado é realizado pela parte de sintaxe 3520somente se o tipo de unidade NAL for o tipo de unidade NAL para codificação de vídeomultivisualização. Neste caso, já que informação para uma visualização é adicionada, cadaelemento de sintaxe inclui uma parte de 'visualização'. Por exemplo, há'luma_view_log2_weight_denom, chroma_view_log2_weight_denom' ou congêneres, e umnúmero de referência 3530 na figura 36 indica uma parte de sintaxe para realizarprognóstico ponderado convencional, e um número de referência 3540 na figura 36 indicauma parte de sintaxe para realizar prognóstico ponderado em codificação de vídeomultivisualização. Então, o prognóstico ponderado é realizado pela parte de sintaxe 3540somente se o tipo de unidade NAL for o tipo de unidade NAL para codificação de vídeomultivisualização. Igualmente, já que informação para uma visualização é adicionada, cadaelemento de sintaxe inclui uma parte de 'visualização'. Por exemplo, há'Iuma_view_weight_l1_flag, chroma_view_weight_M_flag' ou congêneres. Assim, se um tipode unidade NAL para codificação de vídeo multivisualização for definido, codificação maiseficiente é habilitada em uma maneira de realizar prognóstico ponderado usando informaçãopara uma imagem em uma visualização diferente daquela de uma imagem atual.

A figura 37 é um diagrama de blocos de um aparelho para decodificar um sinal devídeo de acordo com uma modalidade da presente invenção.

Em relação à figura 37, um aparelho para decodificar um sinal de vídeo de acordocom a presente invenção inclui uma unidade de extração de tipo de fatia 3710, uma unidadede extração de modo de prognóstico 3720 e uma unidade de decodificação 3730.

A figura 38 é um fluxograma de um método para decodificar um sinal de vídeo noaparelho de decodificação mostrado na figura 37 de acordo com uma modalidade dapresente invenção.

Em relação à figura 38, um método para decodificar um sinal de vídeo de acordocom uma modalidade da presente invenção inclui uma etapa S3810 de extrair um tipo defatia e um modo de prognóstico de macrobloco, e uma etapa S3820 de decodificar ummacrobloco atual de acordo com o tipo de fatia e/ou modo de prognóstico de macrobloco.

Primeiro, um esquema de prognóstico usado por uma modalidade da presenteinvenção é explicado para ajudar no entendimento da presente invenção. O esquema deprognóstico pode ser classificado em um prognóstico intravisualização (por exemplo,prognóstico entre imagens em uma mesma visualização) e um prognóstico intervisualização(por exemplo, prognóstico entre imagens em diferentes visualizações), e o prognósticointravisualização pode ser o mesmo esquema de prognóstico de um prognóstico temporalgeral.

De acordo com a presente invenção, a unidade de extração de tipo de fatia 3710extrai um tipo de fatia de uma fatia que inclui um macrobloco atual (S3810).

Neste caso, um campo de tipo de fatia (slice_type) que indica um tipo de fatia paraprognóstico intravisualização e/ou um campo de tipo de fatia (view_slice_type) que indicaum tipo de fatia para prognóstico intervisualização podem ser fornecidos como parte dasintaxe do sinal de vídeo para fornecer o tipo de fatia. Isto será descrito com mais detalhes aseguir em relação às figuras 6(a) e 6(b). e cada um do tipo de fatia (slice_type) paraprognóstico intravisualização do tipo de fatia (view_slice_type) para prognósticointervisualização pode indicar, por exemplo, um tipo de fatia I (l_SLICE), um tipo de fatia P(P_SLICE) ou um tipo de fatia B (B_SLICE).

Por exemplo, se 'slice_type' de uma fatia específica for uma fatia B e'view_slice_type' for uma fatia P, um macrobloco na fatia específica é decodificado por umesquema de codificação de fatia B (B_SLICE) em uma direção de intravisualização (isto é,uma direção temporal) e/ou por um esquema de codificação de fatia P (P_SLICE) em umadireção de visualização.

Neste ínterim, o tipo de fatia pode incluir um tipo de fatia P (VP) para prognósticointervisualização, um tipo de fatia B (VB) para prognóstico intervisualização e um tipo defatia misturado (Misturado) pelo prognóstico resultante da mistura de ambos os tipos deprognóstico. A saber, o tipo de fatia misturado fornece prognóstico usando uma combinaçãode prognóstico intravisualização e intervisualização.

Neste caso, um tipo de fatia P para prognóstico intervisualização significa um casoem que cada macrobloco ou partição de macrobloco incluído em uma fatia é prognosticadoa partir de uma imagem em uma visualização atual ou de uma imagem em uma visualizaçãodiferente. Um tipo de fatia B para prognóstico intervisualização significa um caso em quecada macrobloco ou partição de macrobloco incluído em uma fatia é prognosticado a partirde 'uma ou duas imagens em uma visualização atual' ou de 'uma imagem em umavisualização diferente ou duas imagens em visualizações diferentes, respectivamente', e umtipo de fatia misturado para prognóstico resultante da mistura de ambos os prognósticossignifica um caso em que cada macrobloco ou partição de macrobloco incluído em uma fatiaé prognosticado a partir de 'uma ou duas imagens em uma visualização atual', de 'umaimagem em uma visualização diferente ou duas imagens em visualizações diferentes,respectivamente', ou de 'uma ou duas imagens em uma visualização atual e uma imagemem uma visualização diferente ou duas imagens em visualizações diferentes,respectivamente'.

Em outras palavras, uma imagem referida e tipo de macrobloco permitido diferemem cada tipo de fatia, o que será explicado com detalhes em relação à figura 43 e à figura44, posteriormente.

E, a sintaxe entre as modalidades expostas do tipo de fatia será explicada comdetalhes em relação à figura 40 e à figura 41, posteriormente.

A unidade de extração de modo de prognóstico 3720 pode extrair um indicador demodo de prognóstico de macrobloco que indica se o macrobloco atual é um macrobloco porprognóstico intravisualização, um macrobloco por prognóstico intervisualização ou ummacrobloco por prognóstico resultante da mistura de ambos os tipos de prognóstico(S3820). Para isto, a presente invenção define um modo de prognóstico de macrobloco(mb_pred_mode). Uma modalidade dos modos de prognóstico de macrobloco seráexplicada com detalhes em relação às figuras 39, 40 e à figura 41, posteriormente.

A unidade de decodificação 370 decodifica o macrobloco atual de acordo com o tipode fatia e/ou com o modo de prognóstico de macrobloco para receber / produzir omacrobloco atual (S3820). Neste caso, o macrobloco atual pode ser decodificado de acordocom o tipo de macrobloco do macrobloco atual decidido a partir da informação tipomacrobloco. e o tipo de macrobloco pode ser decidido de acordo com o modo deprognóstico de macrobloco e com o tipo de fatia.

No caso em que o modo de prognóstico de macrobloco é um modo paraprognóstico intravisualização, o tipo de macrobloco é decidido de acordo com um tipo defatia para prognóstico intravisualização e então o macrobloco atual é decodificado porprognóstico intravisualização de acordo com o tipo de macrobloco decidido.

No caso em que o modo de prognóstico de macrobloco é um modo paraprognóstico intervisualização, o tipo de macrobloco é decidido de acordo com um tipo defatia para prognóstico intervisualização e, então, o macrobloco atual é decodificado peloprognóstico intervisualização de acordo com o tipo de macrobloco decidido.

No caso em que o modo de prognóstico do macrobloco for um modo paraprognóstico resultante da mistura de ambos os prognósticos, o tipo de macrobloco édecidido de acordo com um tipo de fatia para prognóstico intravisualização e com um tipo defatia para prognóstico intervisualização e, então, o macrobloco atual é decodificado peloprognóstico resultante da mistura de ambos os prognósticos de acordo com cada um dostipos de macrobloco decididos.

Neste caso, o tipo de macrobloco depende de um modo de prognóstico demacrobloco e de um tipo de fatia. Em particular, um esquema de prognóstico a ser usadopara um tipo de macrobloco pode ser determinado a partir de um modo de prognóstico demacrobloco e, então, um tipo de macrobloco é decidido a partir da informação de tipo demacrobloco por um tipo de fatia de acordo com o esquema de prognóstico. A saber, um ouambos os slicejype e view_slice_type extraídos são selecionados com base no modo deprognóstico de macrobloco.

Por exemplo, se um modo de prognóstico de macrobloco for um modo paraprognóstico intervisualização, um tipo de macrobloco pode ser decidido a partir de umatabela de macrobloco dos tipos de fatia (I, Ρ, B) correspondentes a um tipo de fatia(view_slice_type) para prognóstico intervisualização. A relação entre um modo deprognóstico de macrobloco e um tipo de macrobloco será explicada com detalhes emrelação às figuras 39, 40 e à figura 41, posteriormente.

A figura 39 é um diagrama de um modo de prognóstico de macrobloco de acordocom modalidades de exemplo da presente invenção.

Na figura 39(a), é mostrada uma tabela correspondente a uma modalidade dosmodos de prognóstico de macrobloco (mb_pred_mode) de acordo com a presente invenção.

No caso em que prognóstico intravisualização, isto é, prognóstico temporal, forusado para um macrobloco somente, Ό' é atribuído a um valor do 'mb_pred_mode'. No casoem que prognóstico intervisualização for usado para um macrobloco somente, Ύ é atribuídoa um valor do 'mb_pred_mode'. No caso em que tanto prognóstico temporal quantointervisualização for usado para um macrobloco, '2' é atribuído a um valor do'mb_pred_mode'.

Neste caso, se um valor do 'mb_pred_mode' for T1 isto é, se o 'mb_pred_mode'indicar o prognóstico intervisualização, Lista 0 de direção de visualização (ViewListO) ouLista 1 de direção de visualização (ViewListI) é definida como uma lista de imagem dereferência para o prognóstico intervisualização.

Na figura 39(b), é mostrada a relação entre um modo de prognóstico de macroblocoe um tipo de macrobloco de acordo com uma outra modalidade.

Se um valor de 'mb_pred_mode' for Ό', somente prognóstico temporal é usado, eum tipo de macrobloco é decidido de acordo com um tipo de fatia (slice_type) paraprognóstico intravisualização.Se um valor de 'mb_pred_mode' for T, somente prognóstico intervisualização éusado, e um tipo de macrobloco é decidido de acordo com um tipo de fatia (view_slice_type)para prognóstico intervisualização.

Se um valor de 'mb_pred_mode' for '2', prognóstico misturado tanto do prognósticotemporal quanto do prognóstico intravisualização é usado. E dois tipos de macrobloco sãodecididos de acordo com um tipo de fatia (slice_type) para prognóstico intravisualização, eum tipo de fatia (view_slice_type) para prognóstico intervisualização.

Com base no modo de prognóstico de macrobloco, o tipo de macrobloco é dadocom base no tipo de fatia mostrado nas tabelas 1-3, a seguir. [Favor inserir tabelas 7-12 - 7-14 em N6540 aqui como tabelas 1-3]

Em outras palavras, nesta modalidade, um esquema de prognóstico usado para ummacrobloco e um tipo de fatia referido são decididos por um modo de prognóstico demacrobloco. e um tipo de macrobloco é decidido de acordo com o tipo de fatia.

A figura 40 e a figura 41 são diagramas de modalidades de exemplo da sintaxe deuma parte do sinal de vídeo recebido pelo aparelho para decodificar o sinal de vídeo. Daforma mostrada, a sintaxe tem informação de tipo de fatia e de modo de prognóstico demacrobloco de acordo com uma modalidade da presente invenção.

Na figura 40, uma sintaxe de exemplo é mostrada. Na sintaxe, o campo 'slice_type'e o campo 'view_slice_type' fornecem tipos de fatia, e o campo 'mb_pred_mode' fornece ummodo de prognóstico de macrobloco.

De acordo com a presente invenção, o campo 'slice_type' fornece um tipo de fatiapara prognóstico intravisualização, e o campo 'view_slice_type' fornece um tipo de fatia paraprognóstico intervisualização. Cada tipo de fatia pode se tornar tipo de fatia I, tipo de fatia Pou tipo de fatia B. Se um valor do 'mb_pred_mode' for Ό' ou Ί', um tipo de macrobloco édecidido. Ainda, no caso em que um valor do 'mb_pred_mode' for '2', pode-se ver que umoutro tipo de macrobloco (ou dois tipos) é adicionalmente decidido. Em outras palavras, asintaxe mostrada em (a) da figura 40 indica que 'view_slice_type' é adicionado para aplicaradicionalmente os tipos de fatia convencionais (I, Ρ, B) na codificação de vídeomultivisualização.

Na figura 41, uma outra sintaxe de exemplo é mostrada. Na sintaxe, um campo'slice_type' é empregado para fornecer um tipo de fatia e um campo 'mb_pred_mode' éempregado para fornecer um modo de prognóstico de macrobloco.

De acordo com a presente invenção, o campo 'slice_type' pode incluir, entre outros,um tipo de fatia (VP) para prognóstico intervisualização, um tipo de fatia B (VB) paraprognóstico intervisualização, e um tipo de fatia misturado (Misturado) para prognósticoresultante da mistura de ambos os prognósticos intravisualização e intervisualização.

Se um valor do campo 'mb_pred_mode' for Ό' ou Ί', um tipo de macrobloco édecidido. Ainda, no caso em que um valor do campo 'mb_pred_mode' for '2', pode-se verque um tipo de macrobloco adicional (isto é, total de dois) é decidido. Nesta modalidade, ainformação do tipo de fatia existe em um cabeçalho de fatia, o que será explicado comdetalhes em relação às figuras 42. Em outras palavras, a sintaxe mostrada na figura 41indica que os tipos de fatia VP, VB e Misturado são adicionados no tipo de fatiaconvencional (slice_type).

As figuras 42 são diagramas de exemplo para aplicar os tipos de fatia mostrados nafigura 41.

O diagrama da figura 42(a) mostra que um tipo de fatia P (VP) para prognósticointervisualização, um tipo de fatia B (VB) para prognóstico intervisualização e um tipo defatia misturado (Misturado) para prognóstico resultante da mistura de ambos os prognósticospode existir como o tipo de fatia, além dos outros tipos de fatia, em um cabeçalho de fatia.

Em particular, os tipos de fatia VP, VB e Misturado de acordo com uma modalidade deexemplo são adicionados nos tipos de fatia que podem existir em um cabeçalho de fatiageral.

O diagrama da figura 42(b) mostra que um tipo de fatia P (VP) para prognósticointervisualização, um tipo de fatia B (VB) para prognóstico intervisualização e um tipo defatia misturado (Misturado) para prognóstico resultante da mistura de ambos os prognósticospodem existir como o tipo de fatia em um cabeçalho de fatia para codificação de vídeomultivisualização (MVC). Em particular, os tipos de fatia de acordo com uma modalidade deexemplo são definidos em um cabeçalho de fatia para codificação de vídeomultivisualização.

O diagrama da figura 42(c) mostra que um tipo de fatia (VP) para prognósticointervisualização, um tipo de fatia B (VB) para prognóstico intervisualização e um tipo defatia misturado (Misturado) para prognóstico resultante da mistura de ambos os prognósticospode existir como o tipo de fatia, além do tipo de fatia existente para codificação de vídeoescalável, em um cabeçalho de fatia para codificação de vídeo escalável (SVC). Emparticular, os tipos de fatia VP, VB e Misturado de acordo com uma modalidade de exemplosão adicionados nos tipos de fatia que podem existir em um cabeçalho de fatia do padrão decodificação de vídeo escalável (SVC).

A figura 43 é um diagrama de vários exemplos de tipo de fatia incluídos no tipo defatia mostrado na figura 41.

Na figura 43(a), é mostrado um caso em que um tipo de fatia é prognosticado apartir de uma imagem em uma visualização diferente. Então, um tipo de fatia se torna umtipo de fatia (VP) para prognóstico intervisualização.

Na figura 43(b), é mostrado um caso em que um tipo de fatia é prognosticado apartir de duas imagens em diferentes visualizações, respectivamente. Então, um tipo de fatiase toma um tipo de fatia B (VB) para prognóstico intervisualização.

Nas figuras 43(c) e 43(f), é mostrado um caso em que um tipo de fatia éprognosticado a partir de uma ou de duas imagens em uma visualização atual e de umaimagem em uma visualização diferente. Então, um tipo de fatia se torna um tipo de fatiamisturado (Misturado) para prognóstico resultante da mistura de ambos os prognósticos.Também, nas figuras 43(d) e 43(e), é mostrado um caso em que um tipo de fatia éprognosticado a partir de uma ou de duas imagens em uma visualização atual e de duasimagens em visualizações diferentes. Então, um tipo de fatia também se torna um tipo defatia misturado (Misturado).

A figura 44 é um diagrama de um macrobloco permitido para os tipos de fatiamostrados na figura 41.

Em relação à figura 44, um intramacrobloco (I), um macrobloco (P) prognosticado apartir de uma imagem em uma visualização atual ou um macrobloco (VP) prognosticado apartir de uma imagem em uma visualização diferente é permitido para um tipo de fatia P(VP) por prognóstico intervisualização.

Um intramacrobloco (I), um macrobloco (P ou B) prognosticado a partir de uma oude duas imagens em uma visualização atual, ou um macrobloco VP ou VB prognosticado apartir de uma imagem em uma visualização diferente ou de duas imagens em visualizaçõesdiferentes, respectivamente, são permitidos para um tipo de fatia B (VB) por prognósticointervisualização.

E, um intramacrobloco (I), um macrobloco (P ou B) prognosticado a partir de umaou de duas imagens em uma visualização atual, um macrobloco (VP ou VB) prognosticado apartir de uma imagem em uma visualização diferente ou de duas imagens em visualizaçõesdiferentes, respectivamente, ou um macrobloco (Misturado) prognosticado a partir de umaou de duas imagens em uma visualização atual, de uma imagem em uma visualizaçãodiferente ou de duas imagens em visualizações diferentes, respectivamente, são permitidospara um tipo de fatia misturado (Misturado).

As figuras 45-47 são diagramas de um tipo de macrobloco de um macroblocoexistente em um tipo de fatia misturado (Misturado) de acordo com as modalidades dapresente invenção.

Nas figuras 45(a) e 45(b), são mostrados esquemas de configuração para um tipode macrobloco (mb_type) e um tipo de submacrobloco (sub_mb_type) de um macroblocoexistente em uma fatia misturada, respectivamente.

Nas figuras 46 e 47, são mostradas representações binárias de direção(s)preditiva(s) de um macrobloco existente em uma fatia misturada e direção(s) preditiva(s) realda fatia misturada, respectivamente.

De acordo com uma modalidade da presente invenção, um tipo de macrobloco(mb_type) é preparada pela consideração tanto do tamanho de uma partição de macrobloco(Partition_Size) quanto de uma direção preditiva (Direction) de uma partição de macrobloco.

E, um tipo de submacrobloco (sub_mb_type) é preparado pela consideração tantodo tamanho de uma partição de submacrobloco (Sub_Partition_Size) quanto de uma direçãopreditiva (Sub_Direction) de cada partição de submacrobloco.

Em relação à figura 45(a), 'DirectionO' e 'Directionl' indicam uma direção preditivade uma primeira partição de macrobloco e uma direção preditiva de uma segunda partiçãode macrobloco, respectivamente. Em particular, no caso de um macrobloco 8x16,'DirectionO' indica uma direção preditiva para uma partição de macrobloco 8x16 esquerda e'Directionl' indica uma direção preditiva para uma partição de macrobloco 8x16 direita. Umprincípio de configuração do tipo de macrobloco (mb_type) é explicado em detalhes comosegue. Primeiro, os primeiros dois bits indicam o tamanho da partição (Partition_Size) de ummacrobloco correspondente, e um valor de 0-3 fica disponível para os primeiros dois bits. equatro bits depois dos primeiros dois bits indicam uma direção preditiva (Direction) no casoem que um macrobloco é dividido em partições.

Por exemplo, no caso de um macrobloco 16x16, quatro bits que indicam umadireção preditiva do macrobloco são anexados atrás dos primeiros dois bits. No caso de ummacrobloco 16x8, quatro bits depois dos primeiros dois bits indicam uma direção preditiva(DirectionO) de uma primeira partição e outros quatro bits são anexados nos quatro bitsanteriores para indicar uma direção preditiva (DirectionI) de uma segunda partição.Igualmente, no caso de um macrobloco 8x16, oito bits são anexados atrás dos primeirosdois bits. Neste caso, os primeiros quatro bits dos oito bits anexados nos primeiros dois bitsindicam uma direção preditiva de uma primeira partição, e os próximos quatro bits indicamuma direção preditiva de uma segunda partição.

Em relação à figura 45(b), uma direção preditiva (Sub_Direction) de umsubmacrobloco é usada da mesma maneira da direção preditiva (Direction) da partição demacrobloco mostrada na figura 45(a). Um princípio de configuração do tipo desubmacrobloco (sub_mb_type) é explicado com detalhes a seguir.

Primeiro, os primeiros dois bits indicam um tamanho de partição (Partition_Size) deum macrobloco correspondente, e os segundos dois bits, depois dos dois bits anteriores,indicam tamanho de partição (Sub_Partition_Size) de um submacrobloco do macroblococorrespondente. Um valor de 0-3 fica disponível para cada um dos primeiros e segundosdois bits. Subseqüentemente, quatro bits anexados depois dos segundos dois bits indicamuma direção preditiva (Sub_Direction) no caso em que um macrobloco é dividido empartições de submacrobloco. Por exemplo, se o tamanho (Partition_Size) de uma partiçãode um macrobloco for 8x8 e se o tamanho (Sub_Partition_Size) de uma partição de umsubmacrobloco for 4x8, os primeiros dois bits têm um valor de 3, os segundos dois bits têmum valor de 2, os primeiros quatro bits depois dos segundos dois bits indicam uma direçãopreditiva para um bloco 4x8 à esquerda dos dois blocos 4x8, e os segundos quatro bitsdepois dos primeiros quatro bits indicam uma direção preditiva para um bloco 4x8 à direita.

Em relação à figura 46, uma direção preditiva de um macrobloco é construída comquatro bits. e pode-se ver que cada representação binária se torna T de acordo com umcaso de referência a uma imagem na posição à esquerda (L)1 no topo (T)1 à direita (R) ou nabase (B) de uma imagem atual.

Em relação à figura 47, por exemplo, no caso em que uma direção preditiva é topo(T), uma imagem localizada no topo em uma direção de visualização de uma imagem atualé referida. No caso em que uma direção preditiva corresponde a todas as direções (LTRB),pode-se ver que imagens em todas as direções (LTBR) de uma imagem atual são referidas.

A figura 48 é um diagrama de blocos de um aparelho para codificar um sinal devídeo de acordo com uma modalidade da presente invenção.

Em relação à figura 48, é mostrado um aparelho para codificar um sinal de vídeo deacordo com uma modalidade da presente invenção. O aparelho inclui uma unidade dedecisão de tipo de macrobloco 4810, uma unidade de geração de macrobloco 4820 e umaunidade de codificação 4830.

A figura 49 é um fluxograma de um método para codificar um sinal de vídeo noaparelho de codificação mostrado na figura 48 de acordo com uma modalidade da presenteinvenção.

Em relação à figura 49, um método para codificar um sinal de vídeo de acordo comuma modalidade da presente invenção inclui uma etapa S4910 para decidir um primeiro tipode macrobloco para prognóstico intravisualização e um segundo tipo de macrobloco paraprognóstico intervisualização, uma etapa S4920 para gerar um primeiro macrobloco com oprimeiro tipo de macrobloco e um segundo macrobloco com o segundo tipo de macrobloco,uma etapa S4930 para gerar um terceiro macrobloco usando os primeiro e segundomacroblocos, e uma etapa S4940 para codificar um tipo de macrobloco de um macroblocoatual e um modo de prognóstico de macrobloco.

De acordo com a presente invenção, a unidade de decisão de tipo de macrobloco4810 decide um primeiro tipo de macrobloco para prognóstico intravisualização e umsegundo tipo de macrobloco para prognóstico intervisualização (S4910) como descrito comdetalhes anteriormente.

Subseqüentemente, a unidade de geração de macrobloco 4820 gera um primeiromacrobloco com o primeiro tipo de macrobloco e um segundo macrobloco com o segundotipo de macrobloco (S4920) usando técnicas de prognóstico bem conhecidas e, então, geraum terceiro macrobloco usando os primeiro e segundo macroblocos (S4930). Neste caso, oterceiro macrobloco é gerado de acordo com um valor médio entre o primeiro e o segundomacroblocos.

Finalmente, a unidade de codificação 4830 codifica um tipo de macrobloco(mb_type) de um macrobloco atual e um modo de prognóstico de macrobloco(mb_pred_mode) do macrobloco atual pela comparação de eficiências de codificação dosprimeiro até terceiro macroblocos (S4940).

Neste caso, há vários métodos para medir as eficiências de codificação. Emparticular, um método que usa custo RD (taxa de distorção) é usado nesta modalidade dapresente invenção. Como é bem conhecido, no método do custo RD, um custocorrespondente é calculado com dois componentes: um número de bits de codificaçãogerado a partir da codificação de um bloco correspondente e um valor de distorção queindica um erro de uma seqüência atual.

Os primeiro e segundo tipos de macrobloco podem ser decididos de uma maneirapara selecionar um tipo de macrobloco com um valor mínimo do custo RD explicadoanteriormente. Por exemplo, um tipo de macrobloco com um valor mínimo do custo RD entretipos de macrobloco por prognóstico intravisualização é decidido como o primeiro tipo demacrobloco. e um tipo de macrobloco com um valor mínimo do custo RD entre tipos domacrobloco por prognóstico intervisualização é decidido como o segundo tipo demacrobloco.

Na etapa de codificação do tipo de macrobloco e do modo de prognóstico domacrobloco, o tipo de macrobloco e o modo de prognóstico associado com um dos primeiroe segundo macroblocos com o menor custo RD podem ser selecionados.Subseqüentemente, o custo RD do terceiro macrobloco é determinado. Finalmente, o tipo demacrobloco e o modo de prognóstico do macrobloco do macrobloco atual são codificadospela comparação do custo RD dos primeiro ou segundo macrobloco selecionado e do custoRD do terceiro macrobloco entre si.

Se o custo RD do primeiro ou segundo macrobloco selecionado for igual ou maiorao custo RD do terceiro macrobloco, o tipo de macrobloco se torna um tipo de macroblococorrespondente ao primeiro ou segundo macrobloco selecionados.

Por exemplo, se o custo RD do primeiro macrobloco for menor do que aquele dosegundo e terceiro macroblocos, o macrobloco atual é ajustado como o primeiro tipo demacrobloco. E o modo de prognóstico de macrobloco (isto é, intravisualização) se torna umesquema de prognóstico de um macrobloco correspondente ao custo RD.

Por exemplo, se o custo RD do segundo macrobloco for menor do que aquele dosprimeiro e terceiro macroblocos, um esquema de prognóstico intervisualização como oesquema de prognóstico do segundo macrobloco se torna o modo de prognóstico domacrobloco do macrobloco atual.

Neste ínterim, se o custo RD do terceiro macrobloco for menor do que os custos RDdo primeiro e do segundo macroblocos, tipos de macrobloco correspondem tanto aoprimeiro quanto ao segundo tipos de macrobloco. Em particular, tipos de macrobloco deprognóstico intravisualização e prognóstico intervisualização se tornam tipos de macroblocodo macrobloco atual, e o modo de prognóstico do macrobloco se torna um esquema deprognóstico misturado resultante da mistura dos prognósticos intravisualização eintervisualização.

Dessa maneira, a presente invenção fornece pelo menos o seguinte efeito ouvantagem.

A presente invenção pode excluir a informação de redundância entre visualizaçõesem função de vários esquemas de prognóstico entre visualizações e informações, tais comotipos de fatia, tipos de macrobloco e modos de prognóstico de macrobloco, desse modo,melhorando o desempenho da eficiência de codificação / decodificação.

APLICABILIDADE INDUSTRIAL

Embora a presente invenção tenha sido aqui descrita e ilustrada em relação àssuas modalidades preferidas, ficará aparente aos versados na técnica que váriasmodificações e variações podem ser feitas sem fugir do espírito e do escopo da invenção.Assim, pretende-se que a presente invenção cubra as modificações e variações destainvenção que caiam no escopo das reivindicações anexas e dos seus equivalentes.

Claims (15)

1. Método para decodificar um dado de vídeo multi visualização em um fluxocontinuo de vídeo multi visualização, CARACTERIZADO pelo fato de compreender:Receber o fluxo contínuo de dados de vídeo multi visualização incluindo imagem deacesso randômico incluindo uma parte de acesso randômico , a parte de acesso randômicofazendo referencia somente a parte que corresponde a um mesmo tempo e umavisualização diferente da imagem de acesso randômico;Obter sinalizador de acesso randômico para predição inter visualização o mesmoindicando se um tipo de imagem é uma imagem de acesso randômico;Obter informação de inicialização de uma lista de imagem de referencia para aparte de acesso randômico baseada na sinalização de acesso randômico, a informação deinicialização representando uma relação de referencia entre a pluralidade de visualizaçõescom informação de numero de visualização e informação de identificação de visualização;Inicializar a lista de imagem de referencia usando a informação de numero devisualização e a informação de identificação de visualização;Obter informação de modificação para a lista de imagem de referencia inicializada apartir de um fluxo de dados contínuo de vídeo multi visualização, a informação demodificação representando como especificar um índex de referencia de inter visualização nalista de imagem de referencia inicializada;Determinar um valor de modificação de especificação para modificar o índex dereferencia inter visualização na lista de imagem de referencia inicializada de acordo com ainformação de modificação;Modificar a lista de imagem de referência inicializada para predição intervisualização usando o valor de modificação de especificação determinado;Determinar um valor de predição de um macro bloco na imagem de acessorandômico baseado na lista de imagem de referencia modificada ; eDecodificar o macro bloco usando o valor de predição, onde a informação deinicialização é obtida com base em um valor indicando ordem de decodificação entre apluralidade de visualizações.

2. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que ainformação de numero de visualização indica um numero de visualizações de referencia daimagem de acesso randômico, e a informação de identificação de visualização prove umidentificador de visualização de cada visualização de referencia para a imagem de acessorandômico.

3. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de queos dados de vídeo multi visualização incluem dados de vídeo de visualização debase independentes de outras visualizações, a visualização de base sendo umavisualização decodificada sem uso de predição inter visualização.

4. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que oíndex de referencia inter visualização é especificado pela realização de uma operação desubtração ou uma operação de adição de acordo com a informação de modificação.

5. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que ainformação de modificação é obtida a partir de um cabeçalho parcial.

6. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que ovalor de modificação de especificação determinado é usado para especificar um índex dereferencia inter visualização para a imagem de acesso randômico na lista de imagem dereferencia inicializada.

7. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que ovalor de modificação de especificação representa uma variável associada com umidentificador de visualização de uma imagem de referencia inter visualização na lista deimagem de referencia inicializada.

8. Método de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que aposição de qualquer outra imagem remanescente é deslocada para depois na lista deimagem de referencia inicializada.

9. Aparelho para decodificar dados de vídeo multi visualização em um fluxocontinuo de vídeo multi visualização, CARACTERIZADO pelo fato de que compreende:Uma unidade de análise nal recebendo o fluxo continuo de dados de vídeo multivisualização incluindo uma imagem de acesso randômico incluindo uma parte de acessorandômico, a parte de acesso randômico fazendo referencia somente a partecorrespondente a um mesmo tempo e uma visualização diferente da imagem de acessorandômico, e obter identificação de acesso randômico para predição inter visualização, aidentificação de acesso randômico indicando se um tipo de imagem é a imagem de acessorandômico, e obter informação de inicialização de uma lista de imagem de referência para aparte de acesso randômico baseada na identificação de acesso randômico , a informação deinicialização representando uma relação de referencia entre uma pluralidade de vistas cominformação de numero de vista e informação de identificação de vista;Uma unidade de armazenamento temporário de imagem decodificada inicializandoa lista de imagem de referencia usando a informação de numero de vista e a informação deidentificação de vista, e obter informação de modificação para a lista de imagem dereferencia inicializada a partir do fluxo de dados de vídeo multi visualização, a informação demodificação representando a maneira como assinar um índex de referencia inter vista nalista de imagem de referencia inicializada, e determinar um valor de modificação desentença para modificar o índex de referencia inter visualização na lista de imagem dereferencia inicializada de acordo com a informação de modificação, e modificar a lista deimagem de referencia inicializada para predição inter vista usando o valor de modificação desentença determinado; eUma unidade de inter predição que determina um valor de predição de ummacrobloco na imagem de acesso randômico baseada na lista de imagem de referenciamodificada, e decodificar o macrobloco usando o valor de predição,Em que a informação de inicialização é obtida com base em um valor indicandoordem de decodificação entre a pluralidade de visualizações.

10. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de quea informação do numero de visualizações indica um numero de visualizações de referenciada imagem de acesso randômico, e a informação de identificação de visualização forneceum identificador de visualização para cada visualização de referencia para a imagem deacesso randômico.

11. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de queos dados de vídeo multi visualização incluem dados de vídeo de uma visualização de baseindependente de outras visualizações, a visualização de base sendo uma visualizaçãodecodificada sem uso de predição inter visualização.

12. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de queo índex de referencia inter visualização é especificado através de uma operação de adiçãoou subtração de acordo com a informação de modificação.

13. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de queo valor de modificação de especificação determinado é usado para especificar um índex dereferencia inter visualização para a imagem de acesso randômico na lista de imagem dereferencia inicializada.

14. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de queo valor de modificação de especificação representa uma variável associada com umidentificador de visualização de uma imagem de referencia inter visualização na lista deimagem de referencia inicializada.

15. Aparelho de acordo com a reivindicação 9, CARACTERIZADO pelo fato de quea posição de quaisquer outras imagens remanescentes é deslocada para depois na lista deimagem de referencia inicializada.