BRPI0806237A2 - métodos e aparelhos para informação de multivistas transmitida em sintaxe de alto nìvel - Google Patents

Abstract

MéTODOS E APARELHOS PARA INFORMAçãO DE MULTIVISTAS TRANSMITIDA EM SINTAXE DE ALTO NìVEL. São providos métodos e aparelho para informação de multivistas transmitida em sintaxe de alto nível. São revelados um método de codificação (300) e um aparelho (100) para codificar conteúdo de vídeo de multivistas em um fluxo de bits resultante e informação de codificação de multivistas para o conteúdo de vídeo de multivistas em ao menos um elemento de sintaxe de alto nível (310). São revelados um método de decodificação (700) e um aparelho (200) para decodificar conteúdo de vídeo de multivistas a partir de um fluxo de bits resultante e informação de codificação de multivistas para o conteúdo de multivistas a partir de pelo menos um elemento de sintaxe de alto nível (708).

Description

"MÉTODOS E APARELHOS PARA INFORMAÇÃO DE MULTIVISTAS TRANSMITIDA EM SINTAXE DE ALTO NÍVEL"

REFERÊNCIA REMISSIVA A PEDIDOS RELACIONADOS

Esse pedido reivindica o benefício do Pedido Provisório dos Estados Unidos 60/883.464, depositado em 4 de janeiro de 2007, que é incorporado aqui integralmente me- diante referência.

CAMPO TÉCNICO

Os presentes princípios se referem genericamente ao codificador e decodificação de vídeo e, mais especificamente, aos métodos e aparelho para informação de multivistas transmitida em sintaxe de alto nível.

ANTECEDENTES

Um fluxo de bits concordante com a Organização Internacional para Padroniza- ção/Padrão de Codificação Avançada de Vídeo (AVC) Parte 10 de Grupo-IV de Especialis- tas em Imagem Cinematográfica da Comissão Internacional Eletrotécnica (ISO/IEC)/União de Telecomunicações Internacionais, recomendação H.264 de Setor de Telecomunicação (ITU-T) em seguida o "padrão MPEG-4 AVC") ou uma sua extensão tal como, por exemplo, codificação de vídeo escalonável (SVC) e codificação de vídeo de multivistas (MVC), inclui unidades de Vista de Abstração de Rede (NAL). Uma unidade NAL é um elemento atômico que pode ser enquadrado para transporte e analisado independentemente. As unidades NAL podem ser categorizadas com relação às unidades NAL de vista de codificação de ví- deo (VCL) e unidades não-VCL NAL. As unidades VCL NAL incluem elementos de sintaxe representando um ou mais macroblocos codificados, cada um dos quais correspondendo a um bloco de amostras na imagem não-compactada. Uma unidade não-VCL NAL pode ser de um dos seguintes tipos: um conjunto de parâmetros de seqüência (e sua extensão), um conjunto de parâmetros de imagem, uma unidade NAL de informação de otimização suple- mentar (SEI), e assim por diante. Uma unidade NAL de informação de otimização suplemen- tar inclui uma ou mais mensagens de informação de otimização suplementar, as quais não são exigidas para a decodificação das imagens de saída, mas auxiliam nos processos rela- cionados tal como temporização de saída de imagem, renderização, detecção de erro, ocul- tação de erro, reserva de recursos, e assim por diante. Embora essa informação possa ser adquirida mediante análise do fluxo de bits original, mensagens de informação de otimiza- ção suplementar podem ser usadas para prover toda a informação exigida sem efetivamente decodificar o fluxo de bits. O componente de sistema pode acessar diretamente a informa- ção e isso torna a operação de nível de sistema muito mais fácil.

Até o presente, 22 tipos de mensagens de informação de otimização suplementar são especificados no Padrão MPEG-4 AVC e 7 tipos adicionais de mensagens de informa- ção de otimização suplementar são especificados na extensão de codificação de vídeo es- calonável (SVC) do Padrão MPEG-4 AVC. Como a extensão de codificação de vídeo de multivistas (MVC) do padrão MPEG-4 AVC é nova, não há mensagens de informação de otimização suplementar relacionada a elas que proporcione qualquer informação de codifi- cação de vídeo de multivistas necessária ou desejada.

SUMÁRIO

Esses e outros empecilhos e desvantagens da técnica anterior são tratados pelos presentes princípios, os quais se referem aos métodos e aparelho para informação de multi- vistas transmitida em sintaxe de alto nível.

De acordo com um aspecto dos presentes princípios, é provido um aparelho. O a- parelho inclui um codificador para codificar conteúdo de vídeo de multivistas em um fluxo de bits resultante e informação de codificação de multivistas para o conteúdo de vídeo de multi- vistas em ao menos um elemento de sintaxe de alto nível.

De acordo com outro aspecto dos presentes princípios, é provido um método. O método inclui codificar conteúdo de vídeo de multivistas em um fluxo de bits resultante e codificar informação de codificação de multivistas para o conteúdo de multivistas em ao me- nos um elemento de sintaxe de alto nível.

De acordo com ainda outro aspecto dos presentes princípios, é provido um apare- lho. O aparelho inclui um decodificador para decodificar conteúdo de vídeo de multivistas a partir de um fluxo de bits resultante e informação de codificação de multivistas para o conte- údo de multivistas a partir de ao menos um elemento de sintaxe de alto nível.

De acordo com ainda outro aspecto dos presentes princípios, é provido um método. O método inclui decodificar o conteúdo de vídeo de multivistas a partir de um fluxo de bits resultante e informação de codificação de multivistas para o conteúdo de multivistas a partir de ao menos um elemento de sintaxe de alto nível.

Esses e outros aspectos, características e vantagens dos presentes princípios se tornarão evidentes a partir da descrição detalhada de modalidades exemplares, as quais devem ser lidas em conexão com os desenhos anexos.

DESCRIÇÃO RESUMIDA DOS DESENHOS

Os presentes princípios podem ser mais bem-entendidos de acordo com as seguin- tes figuras exemplares, nas quais:

A Figura 1 é um diagrama de blocos para um codificador de Codificação de Vídeo de Multivistas (MVC) exemplar ao qual os presentes princípios podem ser aplicados, de a- cordo com uma modalidade dos presentes princípios;

A Figura 2 é um diagrama de blocos para um decodificador de Codificação de Vi- deo de Multivistas (MVC) exemplar aos quais os presentes princípios podem ser aplicados, de acordo com uma modalidade dos presentes princípios;

As Figuras 3A-3D são fluxogramas para um método exemplar para codificar infor- mação de multivistas, de acordo com uma modalidade dos presentes princípios;

As Figuras 4A-4D são fluxogramas para um método exemplar para decodificar in- formação de multivistas, de acordo com uma modalidade dos presentes princípios.

DESCRIÇÃO DETALHADA

Os presentes princípios são dirigidos aos métodos e aparelhos para informação de multivistas transmitida em sintaxe de alto nível.

A presente descrição ilustra os presentes princípios. Desse modo será considerado que aqueles versados na técnica serão capazes de conceber vários arranjos que, embora não explicitamente descritos ou mostrados aqui, incorporam os presentes princípios e são incluídos dentro de seu espírito e escopo.

Todos os exemplos e linguagem condicional, aqui apresentados, pretendem ter propósitos pedagógicos para auxiliar o leitor no entendimento dos presentes princípios e conceitos contribuídos pelo inventor(es) para aperfeiçoamento da técnica, e devem ser con- siderados como sendo sem limitação aos tais exemplos especificamente mencionados e condições.

Além disso, todas as declarações relacionadas aos princípios, aspectos e modali- dades dos presentes princípios, assim como seus exemplos específicos, pretendem abran- ger seus equivalentes estruturais assim como seus equivalentes funcionais. Adicionalmente, pretende-se que tais equivalentes incluam os equivalentes atualmente conhecidos assim como os equivalentes desenvolvidos no futuro, isto é, quaisquer elementos desenvolvidos que realizem a mesma função, independente da estrutura.

Desse modo, por exemplo, será considerado por aqueles versados na técnica que os diagramas de blocos apresentados aqui representam vistas conceptuais de conjunto de circuitos, ilustrativo incorporando os presentes princípios. Similarmente, será considerado que quaisquer fluxogramas, diagramas de fluxo, diagramas de transição de estado, pseudo- código, e semelhante, representam vários processos os quais pode ser representados subs- tancialmente em meios legíveis por computador e assim executados por um computador ou processador, seja tal computador ou processador mostrado explicitamente ou não.

As funções dos vários elementos mostrados nas figuras podem ser providas atra- vés do uso de hardware dedicado assim como hardware capaz de executar software em associação com software apropriado. Quando provido por um processador, as funções po- dem ser providas por um único processador dedicado por um único processador comparti- lhado, ou por uma pluralidade de processadores individuais, alguns dos quais podem ser compartilhados. Além disso, uso explícito do termo "processador" ou "controlador" não deve ser considerado como se referindo exclusivamente a hardware capaz de executar software, e pode incluir implicitamente, sem limitação, hardware de processador de sinal digital ("DSP"), memória de leitura ("ROM") para armazenar software, memória de acesso aleatória ("RAM") e meio de armazenamento não-volátil.

Outro hardware, convencional e/ou de uso especial, também pode ser incluído. Si- milarmente, quaisquer comutadores mostrados nas figuras são apenas conceptuais. A fun- ção dos mesmos pode ser realizada através da operação de lógica de programa, através de lógica dedicada, através da interação de lógica dedicada e controle de programa, ou até mesmo manualmente, a técnica específica sendo selecionável pelo implementador confor- ma mais especificamente entendido a partir do contexto.

Nas reivindicações a seguir, qualquer elemento expresso como um meio para reali- zar uma função especificada pretende abranger qualquer forma de realizar aquela função incluindo, por exemplo, (a) uma combinação de elementos de circuito que realizam aquela função ou (b) software em qualquer forma incluindo, portanto, firmware, microcódigo ou se- melhante, combinado com conjunto de circuitos apropriados para executar aquele software para realizar a função. Os presentes princípios conforme definidos por tais reivindicações residem no fato de que as funcionalidades providas pelos vários meios mencionados são combinadas e harmonizadas conforme exigido pelas reivindicações. Considera-se assim que qualquer meio que possa prover essas funcionalidades é equivalente àqueles aqui mos- trados.

Referência no relatório descritivo a "uma modalidade" ou "alguma modalidade" dos presentes princípios significa que uma característica específica, estrutura, aspecto, e assim por diante descrita em conexão com a modalidade é incluída ao menos em uma modalidade dos presentes princípios. Assim, os surgimentos da frase "em uma modalidade" ou "numa modalidade" aparecendo em vários locais por todo o relatório descritivo não estão todos necessariamente se referindo à mesma modalidade.

Deve ser considerado que o uso do termo "e/ou", por exemplo, no caso de "A e/ou B", pretende abranger a seleção da primeira opção relacionada (A), a seleção da segunda opção relacionada (B) ou a seleção de ambas as opções (A e B). Como um exemplo adicio- nal, no caso de "A, B, e/ou C", tal fraseologia pretende abranger a seleção da primeira op- ção relacionada (A), a seleção da segunda opção relacionada (B)1 a seleção da terceira op- ção relacionada (C), a seleção da primeira e da segunda opção relacionada (A e B), a sele- ção da primeira e terceira opção relacionada (A e C), a seleção da segunda e terceira opção relacionada (B e C), ou a seleção de todas as três opções (AeBe C). Isso pode se esten- der, como facilmente evidente para aqueles versados na técnica e artes relacionadas, a to- dos os itens relacionados.

Adicionalmente, as frases "ler/analisar" e "lido/analisado" se referem à leitura ou a ambos, análise e leitura.

Além disso, deve ser considerado que embora uma ou mais modalidades dos pre- sentes princípios sejam aqui descritas com relação à extensão de codificação de vídeo de multivistas do padrão MPEG-4 AVC1 os presentes princípios não são limitados apenas a esse padrão e sua extensão correspondente e, assim, podem ser utilizados com relação a outros padrões de codificação de vídeo, recomendações, e extensões dos mesmos, relacio- nados à codificação de vídeo de multivistas, enquanto mantendo o espírito dos presentes princípios.

Conforme aqui usado, "sintaxe de alto nível" se refere à sintaxe presente no fluxo de bits que reside hierarquicamente acima da camada de macrobloco. Por exemplo, sintaxe de alto nível, como aqui usado, pode se referir a, mas não se limita à sintaxe no nívei de cabeçalho de seção, o nível de conjunto de parâmetros de seqüência (SPS)1 o nível de con- junto de parâmetros de imagem (PPS), o nível de conjunto de parâmetros de vistas (VPS), o nível de cabeçalho de unidade de camada de abstração de rede (NAL), e em uma mensa- gem de informação de otimização suplementar (SEI).

Com a finalidade de ilustração e brevidade, as seguintes modalidades são descritas aqui com relação ao uso de mensagens de informação de otimização suplementar (SEI). Contudo, deve ser considerado que os presentes princípios não são limitados apenas ao uso de mensagens de informação de otimização suplementar (SEI) com relação à condução de informação de multivistas conforme aqui revelado e, assim, a condução de informação de multivistas pode ser implementada com relação ao menos aos tipos descritos acima de sin- taxes de alto nível incluindo, mas não limitada a, sintaxes no nível de cabeçalho de seção, o nível de conjunto de parâmetros de seqüência (SPS), o nível de conjunto de parâmetros de imagens (PPS), o nível de conjunto de parâmetros de vistas (VPS), o nível de cabeçalho de unidade de camada de abstração de rede (NAL), e em uma mensagem de informação de otimização suplementar (SEI), enquanto mantendo o espírito dos presentes princípios.

De acordo com a Figura 1, um codificador de Codificação de Vídeo de Multivistas (MVC) exemplar é indicado geralmente pelo numerai de referência 100. O codificador 100 inclui um combinador 105 tendo uma saída conectada em comunicação de sinal com uma entrada de um transformador 110. Uma saída do transformador 110 é conectada em comu- nicação de sinal com uma entrada do quantizador 115. Uma saída do quantizador 115 é conectada em comunicação de sinal com uma entrada de um codificador de entropia 120 e uma entrada de um quantizador inverso 125. Uma saída do quantizador inverso 125 é co- nectada em comunicação de sinal com uma entrada de um transformador inverso 130. Uma saída do transformador inverso 130 é conectada em comunicação de sinal com uma primei- ra entrada de não-inversão de um combinador 135. Uma saída do combinador 135 é conec- tada em comunicação de sinal com uma entrada de um intra-preditor 145 e uma entrada de um filtro de desblocagem 150. Uma saída do filtro de desblocagem 150 é conectada em co- municação de sinal com uma entrada de um meio de armazenamento de imagem de refe- rência 155 (para a vista i). Uma saída do meio de armazenamento de imagem de referência 155 é conectada em comunicação de sinal com uma primeira entrada de um compensador de movimento 175 e uma primeira entrada de um estimador de movimento 180. Uma saída do estimador de movimento 180 é conectada em comunicação de sinal com uma segunda entrada do compensador de movimento 175.

Uma saída de um meio de armazenamento de imagem de referência 160 (para ou- tras vistas) é conectada em comunicação de sinal com uma primeira entrada de um estima- dor de disparidade 170 e uma primeira entrada de um compensador de disparidade 165. Uma saída do estimador de disparidade 170 é conectada em comunicação de sinal com uma segunda entrada do compensador de disparidade 165.

Uma saída do decodificador de entropia 120 está disponível como uma saída do codificador 100. Uma entrada de não-inversão do combinador 105 está disponível como uma entrada do codificador 100, e é conectada em comunicação de sinal com uma segunda entrada do estimador de disparidade 170, e uma segunda entrada do estimador de movi- mento 180. Uma saída de um comutador 185 é conectada em comunicação de sinal com uma segunda entrada de não-inversão do combinador 135 e com uma entrada de inversão do combinador 105. O comutador 185 inclui uma primeira entrada conectada em comunica- ção de sinal com uma saída do compensador de movimento 175, uma segunda entrada co- nectada em comunicação de sinal com uma saída do compensador de disparidade 165, e uma terceira entrada de comunicação de sinal com uma saída do intra-preditor 145.

Voltando-se para a Figura 2, um decodificador de Codificação de Vídeo de Multivis- tas (MVC) exemplar é indicado geralmente pelo numerai de referência 200. O decodificador 200 inclui um decodificador de entropia 205 tendo uma saída conectada em comunicação de sinal com uma entrada de um quantizador inverso 210. Uma saída do quantizador inverso é conectada em comunicação de sinal com uma entrada de um transformador inverso 215. Uma saída do transformador inverso 215 é conectada em comunicação de sinal com uma primeira entrada de não-inversão de um combinador 220. Uma saída do combinador 220 é conectada em comunicação de sinal com uma entrada de um filtro de desblocagem 225 e uma entrada de um intra-preditor 230. Uma saída do filtro de desblocagem 225 é conectada em comunicação de sinal com uma entrada de um meio de armazenamento de imagem de referência (para vista i). Uma saída do meio de armazenamento de imagem de referência 240 é conectada em comunicação de sinal com uma primeira entrada de um compensador de movimento 235.

Uma saída de um meio de armazenamento de imagem de referência 245 (para ou- tras vistas) é conectada em comunicação de sinal com uma primeira entrada de um com- pensador de disparidade 250.

Uma entrada do codificador de entropia 205 está disponível como uma entrada para o decodificador 200, para receber um fluxo de bits de resíduo. Além disso, uma entrada de controle do comutador 255 também está disponível como uma entrada para o decodificador 200, para receber sintaxe de controle para controlar qual entrada é selecionada pelo comu- tador 255. Adicionalmente, uma segunda entrada do compensador de movimento 235 está disponível como uma entrada do decodificador 200, para receber vetores de movimento.

Além disso, uma segunda entrada do compensador de disparidade 250 está disponível co- mo uma entrada para o decodificador 200, para receber vetores de disparidade.

Uma saída de um comutador 255 é conectada em comunicação de sinal com uma segunda entrada de não-inversão do combinador 220. Uma primeira do comutador 255 é conectada em comunicação de sinal com uma saída do compensador de disparidade 250. Uma segunda entrada do comutador 255 é conectada em comunicação de sinal com uma saída do compensador de movimento 235. Uma terceira entrada do comutador 255 é conec- tada em comunicação de sinal com uma saída do intra-preditor 230. Uma saída do módulo de modo 260 é conectada em comunicação de sinal com o comutador 255 para controlar qual entrada é selecionada pelo comutador 255. Uma saída do filtro de desblocagem 225 está disponível como uma saída do decodificador.

Conforme observado acima, os presentes princípios são dirigidos aos métodos e aparelhos para informação de multivistas transmitidas em mensagens de informação de oti- mização suplementar (SEI). Em uma modalidade, as mensagens novas de informação de otimização suplementar (SEI) são providas para sinalização de informação de multivistas na extensão de codificação de vídeo de multivistas (MVC) do Padrão MPEG-4 AVC.

Os presentes princípios podem ser aplicados em várias operações de nível de sis- tema correspondendo aos fluxos de vídeo de multivistas incluindo, mas não limitadas a, tais operações como adaptação de fluxo, extração e transmissão de dados, acesso aleatório, detecção de erro, ocultação de erro, e assim por diante. Embora a informação exigida possa ser obtida mediante análise do fluxo de bits original, tal análise de fluxo de bits não é trivial em temos não somente de implementação como também de complexidade computacional. É mais flexível e útil se a informação for tornada acessível aos componentes de sistema além do codificador e decodificador de vídeo. Modalidades dos presentes princípios propor- cionam tal informação além do codificador e decodificador.

De acordo com os presentes princípios, propomos várias mensagens novas de in- formação de otimização suplementar para prover informação de codificação de vídeo de multivistas (MVC) necessária. Na codificação de vídeo de multivistas, temos algumas vistas de câmera codificadas, algumas vistas de câmera não-codificadas, e algumas vistas livres não-capturadas pela câmera, mas geradas a partir de vistas originais de câmera. De acordo com os presentes princípios, descreveremos novas mensagens de informação de otimiza- ção suplementar com base em, mas não limitadas a, às seguintes três categorias ilustrati- vas: (1) vistas codificadas de câmera; (2) vistas não-codificadas de câmera; e (3) vistas ge- radas para aplicações de ponto de vista livre. Evidentemente, de acordo com os ensinamen- tos dos presentes princípios aqui providos, as modalidades dos presentes princípios não são limitadas apenas a essas categorizações, e outras categorizações e implementações podem ser prontamente implementadas por aqueles de conhecimento comum nessa técnica e em técnicas relacionadas, enquanto mantendo o espírito dos presentes princípios.

Tipos exemplares de informação de codificação de vídeo de multivistas que são re- levantes e úteis na comunicação de vídeo de multivistas incluem, mas não são limitados ao seguinte.

Com relação às vistas codificadas de câmera, tipos exemplares de informação de codificação de vídeo de multivistas incluem, mas não são limitados aos seguintes: o número total de vistas codificadas; as características de cada vista codificada; identificador de vista e sua ordem de codificação; informação de escalabilidade de vista; informação de dependên- cia de vista; taxa de bits; tamanho de quadro; taxa de quadro; informação ROI (Região de Interesse); informação de escalabilidade (temporal, espacial e/ou de relação de sinal/ruído (SNR)); decodificador exigido (por exemplo, perfil, informação de compatibilidade de nível e perfil); conjuntos de parâmetros iniciais exigidos; e parâmetros de câmera.

Com relação às vistas não-codificadas de câmera, tipos exemplares de informação de codificação de vídeo de multivistas incluem, mas não são limitados aos seguintes: o nú- mero total de vistas não-codificadas; a característica de cada vista não-codificada; identifi- cador de vista; informação de interpolação de vista; e parâmetros de câmera.

Com relação ao ponto de vista livre, tipos exemplares de informação de codificação de vídeo de multivistas incluem, mas não são limitados ao seguinte: informação de geração de vista livre.

Os tipos precedentes de informação codificada de vídeo de multivistas podem ser usados na negociação de resposta/oferta de meios, permuta de capacidade, e processos de adaptação de fluxo. Além disso, os tipos precedentes de informação codificada de vídeo de multivistas podem ser usados para extração eficiente de dados, transmissão, geração de vistas, etc.

Informação para Vistas Codificadas de Câmera

Um identificador de vista é singular e é usado para distinguir uma vista das outras vistas. Um identificador de vista é usado para o processo de emissão, extração de vista, acesso aleatório de vista, e assim por diante. A ordem da codificação de vistas monitora as vistas codificadas. Um identificador de vista é incrementado em um para cada vista codifica- da na ordem de codificação. Um identificador de vista é útil ao decodificador na detecção de vistas perdidas.

Informação de escalabilidade de vista é usada para permitir acesso às vistas sele- cionadas com esforço mínimo de decodificação. Informação de escalabilidade de vista per- mite que ο vídeo seja exibido em vários terminais diferentes e através de uma rede(s) com condições variadas. Informação de escalabilidade de vista pode ser usada para detectar vistas perdidas quando um nível de vista descontínuo é detectado.

Embora seja sabido que nem todas as vistas são exigidas para certa representação de vista, não se sabe como norma, quais as vistas que não são exigidas. Informação de dependência de vista pode ajudar na extração de vista, acesso aleatório de vista, e assim por diante. Informação de dependência de vista pode ajudar um decodificador a acessar um quadro em uma determinada vista com uma decodificação mínima de quadros na dimensão da vista. Informação de dependência de vista pode ajudar um servidor de fluxo contínuo a evitar o envio de vistas desnecessárias sem ter que analisar o fluxo de bits para efetuar tal evitação. Para ocultação de erro de uma vista perdida, informação de dependência pode ajudar um decodificador a decidir qual vista copiar e/ou interpolar para ocultar a vista perdi- da.

Dependendo da aplicação e dos recursos disponíveis, taxa de bits, taxa de quadros e informação de tamanho de quadro poderiam ser ajustados diferentemente para diferentes vistas. A informação pode ser usada para derivar a qualidade de imagem entre as vistas, de modo que a aplicação pode decidir qual vista extrair para exibição. Além disso, informação de taxa de bits pode ajudar um decodificador a gerenciar os recursos de computação para processamento paralelo. Informação de tamanho de quadro e de taxa de quadros pode ser usada para síntese de vista. A informação também pode ajudar na detecção de erro. Se a taxa de bits ou a taxa de quadros recebida para certa vista for inferior àquela especificada, sabemos que há erros nessa vista.

Dependendo da aplicação, para algumas vistas, apenas partes das imagens são codificadas. Informação de Região de Interesse (ROI) é útil para suportar a região de vista de interesse. Para fins de ocultação de erros, a região de interesse serve para prover uma indicação com relação a qual porção de uma imagem é relevante.

Para cada vista, informação de escalabilidade temporal/espacial/de relação de si- nal/ruído (SNR) provê a flexibilidade para deixar que o elemento de rede ciente dos meios ou o receptor saiba qual informação de escalabilidade que pode ser descartada para uma vista específica.

Nos sistemas de codificação de vídeo de multivistas, atuais, vistas compatíveis com o Padrão MPEG-4 AVC e vistas não-compatíveis utilizam diferentes conjuntos de parâme- tros de seqüência, o que significa que uma representação de vistas pode não usar todos os conjuntos de parâmetros iniciais do fluxo inteiro. Desse modo a transmissão de todos os conjuntos de parâmetros iniciais pode causar um desperdício de largura de banda de trans- missão e um retardo de configuração inicial mais longo, particularmente porque os conjuntos de parâmetros iniciais são transmitidos tipicamente fora de banda e de forma segura, o que significa que a confirmação de recepção é usada e a retransmissão pode ser usada. A sina- lização dos conjuntos de parâmetros iniciais para cada representação de vista resolve os problemas.

Os parâmetros de câmera são úteis para a geração de vistas; interpolação de vis- tas; síntese de vistas; e assim por diante. A geração de vistas, interpolação de vistas, e sín- tese de vistas não apenas tem o propósito de codificação, mas também podem ser usados para ocultação de erro no decodificador.

Uma modalidade de uma mensagem de informação de otimização suplementar que suporta a informação de vista de câmera codificada descrita acima é ilustrada na TABELA 1.

TABELA 1

<table>table see original document page 11</column></row><table> <table>table see original document page 12</column></row><table> <table>table see original document page 13</column></row><table>

A sintaxe da mensagem de informação de otimização suplementar para a informa- ção de vista de câmera codificada é indicada em negrito na TABELA 1 e as semânticas são descritas como a seguir. Deve-se observar que os conjuntos de parâmetros iniciais referidos na sintaxe e/ou semântica se referem aqueles conjuntos de parâmetros que podem ser co- locados no início do fluxo de bits ou que podem ser transmitidos no início de uma sessão.

num_coded_views_minus1 plus 1 indica o número de vistas codificadas suportadas pe- lo fluxo de bits. O valor de num_coded_views_minus1 está na faixa de 0 a 1023, inclusive.

view_id[ i ] indica o identificador da ia vista.

view_num[ i ] indica a ordem de codificação de vista para a vista com um identificador de vista igual a view_id[ i ]. view_num é incrementada em um para cada vista codificada na or- dem de codificação.

view_level[ i ] indica um nível de escalabilidade de vista para a vista com um identifica- dor de vista igual a view_id[ i ].

view_dependency_info_present_flag[ i ] igual a 1 indica a presença de informação de dependência de vista para a vista com um identificador de vista igual a view_id[ i ] na mensagem de informação de otimização suplementar. Um valor de 0 indica que a informação de depen- dência de vista para a vista é idêntica à outra vista indicada por vi- ew_dependency_info_src_view_id_delta[ i ] (quando view_dependency_info_src_view_id_delta[ i ] não é igual a 0) ou que a informação de dependência de vista para a vista não está presente na mensagem de informação de otimização suplementar (quando

view_dependency_info_src_view_id_delta[ i ] é igual a 0).

bitrate_info_present_flag[ i ] igual a 1 indica a presença de informação de taxa de bits para a vista com um identificador de vista igual a view_id[ i ] na mensagem de informação de otimização suplementar. Um vaior de 0 indica que a informação de taxa de bits para a vista com um identificador de vista igual a view_id[ i ] não está presente na mensagem de informa- ção de otimização suplementar.

frm_rate_info_present_flag[ i ] indica a presença de informação de taxa de quadro pa- ra a vista com um identificador de vista igual a view_id[ i ] na mensagem de informação de oti- mização suplementar. Um valor de 0 indica que a informação de taxa de quadro para a vista é a mesma que outra vista indicada por frm_rate_info_src_view_id_delta[ i ] (quando frm_rate_info_src_view_id_delta[ i ] não é igual a 0) ou que a informação de taxa de quadros para a vista não está presente na mensagem de informação de otimização suplementar (quan- do frm_rate_info_src_view_id_delta[ i ] é igual a 0).

frm_size_info_present_flag[ i ] igual a 1 indica a presença de informação de tamanho de quadro para a vista com um identificador de vista igual a view_id[ i ] na mensagem de infor- mação de otimização suplementar. Um valor de 0 indica que a informação de tamanho de qua- dro para a vista é idêntica à outra vista indicada por

frm_size_info_src_view_id_delta_minus1 [ i].

sub_region_view_flag[ i ] igual a 1 indica que informação de sub-região para a vista com um identificador de vista igual a view_id[ i ] está presente na mensagem de informação de otimização suplementar. Um valor de 0 indica que informação de sub-região para a vista é i- dêntica à outra vista indicada por sub_region_info_src_view_id_delta[ i ] (quando sub_region_info_src_view_id_delta[ i ] não é igual a 0) ou que a informação de sub-região para a vista não está presente na mensagem de informação de otimização suplementar (quando sub_region_info_src_view_id_delta[ i ] é igual a 0).

scalability_info_present_flag[ i ] igual a 1 indica a presença de informação de escalabi- Iidade para a vista com um identificador de vista igual a view_id[ i ] na mensagem de informa- ção de otimização suplementar. Um valor de 0 indica que a informação de dependência de vista para a vista é idêntica à outra vista indicada por vi- ew_dependency_info_src_view_id_delta[i] (quando scalable_info_src_view_id_delta[i] não é igual a 0) ou que a informação de escalabilidade para a vista não está presente na mensagem de informação de otimização suplementar (quando scalable_info_src_view_id_delta[i] é igual a 0). Um valor de 1 indica o uso da mensa- 5 gem de informação de otimização suplementar scalable_info() na extensão de codificação de vídeo escalonável (SVC) do Padrão MPEG-4 AVC.

profile_level_info_present_flag[i] igual a 1 indica a presença de informação de perfil e nível para a vista com um identificador de vista igual a view_id[i] na mensagem de informação de otimização suplementar. Um valor de 0 indica que a informação de perfil e nível para a vista com um identificador de vista igual a view_id[i] é idêntica à outra vista indicada por profi- le_level_info_src_view_id_delta [i] (quando profile_levelJnfo_src_view_id_delta[i] não é igual a 0) ou que a informação de perfil e nível para a vista não está presente na mensagem de infor- mação de otimização suplementar (quando profile_level_info_src_view_id_delta [i] é igual a 0).

init_parameter_sets_info_present_flag[i] igual a 1 indica a presença da informação de conjuntos de parâmetros iniciais para a vista com um identificador de vista igual a view_id[i] na mensagem de informação de otimização suplementar. Um valor de 0 indica que a informação de conjuntos de parâmetros iniciais para a vista é idêntica à outra vista indicada por i- nit_parameter_set _info_src_view_id_delta[i] (quando

init_parameter_set _info_src_view_id_delta[i] não é igual a 0) ou que a informação de conjuntos de parâmetros iniciais para a vista não está presente na mensagem de informação de otimização suplementar (quando init_parameter_set _info_src_view_id_delta[i] é igual a 0).

camera_parameters_jnfo_present_flag[i] é igual a 1 indica a presença de informação de parâmetro de câmera para a vista com um identificador de vista igual a view_id[i] na men- sagem de informação de otimização suplementar. Um valor de 0 indica que a informação de pa- râmetro de câmera para a vista é idêntica à outra vista indicada por came- ra_parameter_info_src_view_id_delta[i] (quando

camera_parameter_info_src_view_id_delta[i] não é igual a 0) ou que a informação de parâmetro de câmera para a vista não está presente na mensagem de informação de otimização suplementar (camera_parameter_info_src_view_id_delta[i] é igual a 0).

view_profile_idc[i], view_constraint_set0_flag[i],

view_constraint_set1_flag[i], view_constraint_set2_flag[i],

view_constraint_set3_flag[i], e view_level_idc[i] indica a concordância de perfil e de nível do fluxo de bits da representação da vista com um identificador de vista igual a view_id[i]. A semântica de view_profile_idc[ i ], view_constraint_setO_flag[ i ], view_constraint_set1_flag[ i ], view_constraint_set2_flag[ i ], view_constraint_set3_flag[ i ], e view_level_idc[ i ] é idêntica à semântica de profilejdc, constraint_set0_flag, constraint_set1_flag, constraint_set2_flag, cons- traint_set3_flag, e IeveIJdc1 respectivamente, com o fluxo de bits em questão sendo aquele des- sa representação de vista.

profile_level_info_src_viewJd_delta[ i ] maior do que 0 especifica que a vista com um identificador de vista igual a view_id[ i ] tem a mesma informação de perfil e nível que a vista com identificador de vista igual a (view_id[ i ] + profile_levelJnfo_src_view_id_delta[ i ]). aUm valor de 0 indica a informação de perfil e nível para a vista com o identificador de vista igual a view_id[ i ] não está presente na mensagem de informação otimizada suplementar.

avg_bitrate[ i ] indica a taxa média de bits, em unidades de 1000 bits por segundo, do fluxo de bits da representação da vista com um identificador de vista igual a view_id[ i ]. A se- mântica de avg_bitrate[ i ] é idêntica à semântica de average_bit_rate na mensagem de infor- mação de otimização suplementar de características de vista de subseqüência quando accura- te_statistics_flag é igual a 1, exceto que aqui o fluxo de bits alvo é o fluxo de bits da representa- ção de vista.

max_bitrate_view[ i ] indica a taxa máxima de bits, em unidades de 1000 bits por se- gundo, do fluxo de bits da vista com um identificador de vista igual a view_id[ i ], calculado com base na janela de tempo especificada por max_bitrate_calc_window[ i ].

max_bitrate_decoded_picture[ i ] indica a taxa máxima de bits em unidades de 1000 bits por segundo, do fluxo de bits da representação da vista com um identificador de vista igual a view_id[ i ], calculado com base em uma janela de tempo especificada por max_bitrate_calc_window[ i ].

max_bitrate_calc_window[ i ] indica o comprimento da janela de tempo, em unidades de 1/100

segundos, com base na qual max_bitrate1 [ i ] e max_bitrate2[ i ] são calculados.

constant_frm_rate_idc[ i ] indica se a taxa de quadros da representação da vista com um identificador de vista igual a view_id[ i ] é constante. Se o valor de avg_frm_rate conforme especificado aqui abaixo for constante, independente de qual seção temporal da representação de vista é usada para o cálculo, então a taxa de quadros é constante, caso contrário a taxa de quadros é não-constante. Um valor de 0 denota uma taxa de quadros não-constante, um valor de 1 denota uma taxa de quadros constante, e um valor de 2 denota que não é evidente se a taxa de quadro é constante. O valor de constantFrameRate está na faixa de 0 a 2, inclusive.

avg_frm_rate[ i ] indica a taxa média de quadros, em unidades de quadros por segun- do, do fluxo de bits da representação da vista com um identificador de vista igual a view_id[ i ]. A semântica de avg_frm_rate[ i ] é idêntica à semântica de average_frame_rate na mensagem de informação de otimização suplementar de características de vista de subsequência quando accurate_statistics_flag for igual a 1, exceto que aqui o fluxo de bits alvo é o fluxo de bits da re- presentação de vista.

frm_rate_info_src_view_id_delta maior do que 0 indica que a vista com um identificador de vista igual a view_id[ i ] tem a mesma informação de taxa de quadros que a vista com um identificador de vista igual a (view_id[ i ] - frm_rateJnfo_src_view_id_delta [ i ]). Um valor de 0 indica que a informação de taxa de quadros da vista com um identificador de vista igual a vi- ew_id[ i ] não está presente na mensagem de informação de otimização suplementar.

frm_width_in_mbs_minus1 [ i ] plus 1 indica a largura máxima, em macroblocos, de um quadro codificado na representação da vista com identificador de vista igual a view_id[ i ].

A variável PicWidthlnMbs[ i ] é derivada como (frm_width_in_mbs_minus1 [ i ]+1). frm_height_in_mbs_minus1 [ i ] plus 1 indica a altura máxima, em macroblocos, de um quadro codificado na representação da vista com um identificador de vista igual a view_id[ i ].

A variável PicHeightlnMbs[ i ] é derivada como (frm_height_in_mbs_minus1[ i ]+1).

A variável PicSizeInMbsf i ] indica o tamanho de imagem em unidades de macroblocos e é derivada como PicWidthlnMbs[ i ]* PicHeightInMbsf i ].

frm_size_info_src_view_id_delta[ i ] especifica que a vista com um identificador de vis- ta igual a view_id[ i ] tem a mesma informação de tamanho de quadro que a vista com um identi- ficador igual a ( view_id[ i ] + frm_size_info_src_view_id_delta [ i ]). Um valor de 0 indica que a informação de tamanho de quadro da vista com um identificador de vista igual a view_id[ i ] não está presente na mensagem de informação de otimização suplementar.

horizontal_offset[ i ] e vertical_offset[ i ] fornecem os deslocamentos horizontais e verti- cais, respectivamente, do pixel superior esquerdo da região retangular representada pela repre- sentação da vista com um identificador de vista igual a view_id[ i ].

region_width[ i ] e region_height[ i ] indica a largura e altura, respectivamente, da região retangular representada pela representação da vista com um identificador de vista igual a vi- ew_id[ i ].

sub_region_info_src_view_id_delta[ i ] indica que a vista com um identificador de vista igual a view_id[ i ] tem a mesma informação de sub-região que a vista com um identificador de vista igual a (view_id[ i ] + sub_region_info_src_view_id_delta [ i ]). Um valor de 0 indica que a informação de sub-região da vista com um identificador de vista igual a view_id[ i ] não está pre- sente na mensagem de informação de otimização suplementar.

num_directly_dependent_views_anchor[ i ] indica o número de vistas das quais as i- magens de âncora da vista com um identificador de vista igual a view_id[ i ] são diretamente dependentes. O valor de num_directly_dependent_views_anchor está na faixa de 0 a 15 inclusi- ve.

num_directly_dependent_views_non_anchor[ i ] indica o número de vistas das quais as imagens de não-âncora da vista com identificador de vista igual a view_id[ i ] são diretamente dependentes. As imagens de não-âncora da vista A são diretamente dependentes das imagens de não-âncora da vista B se houver ao menos uma imagem de não-âncora codificada na vista A utilizando predição entre vistas a partir de uma imagem de não-âncora a partir da vista Β. O va- lor de num_directly_dependent_views_non_anchor está no escopo de 0 a 15, inclusive.

directly_dependent_view_id_delta_anchor[ i ][ j ] indica a diferença entre a view_id[ i ] e um identificador de vista da ja vista da qual a imagem de âncora da vista com identificador de vista igual a view_id[ i ] depende diretamente. O identificador de vista da vista diretamente de- pendendo é igual a (view_id[ i ] +

directly_dependent_layer_id_delta_anchor [ i ][ j ]).

directly_dependent_view_id_delta_non_anchor[ i ][ j ] indica a diferença entre a vi- ew_id[ i ] e um identificador de vista da ja vista da qual a imagem de não-âncora da vista com um identificador de vista igual a view_id[ i ] é diretamente dependente. O identificador de vista da vista diretamente dependente é igual a (view_id[ i ] + directly_dependent_layer_id_delta_non_anchor [ i ][ j ]).

num_init_seq_parameter_set_minus1[ i ] plus 1 indica o número de conjuntos de parâ- metros de seqüência inicial para decodificar a representação da vista com um identificador de vista igual a view_id[ i ]. init_seq_parameter_set_id_delta[i][j] indica o valor do seq_parameter_set_id do j° conjunto de parâmetros de seqüência inicial para decodificar a representação da vista com um identificador de vista igual a view_id[i] se j for igual a 0. Se j for maior do que 0, i- nit_seq_parameter_set_id_delta[i][j] indica a diferença entre o valor de seq_parameter_set_id do j° conjunto de parâmetros de seqüência inicial e o valor do seq_parameter_set_id of the (j-l)° do (j-1)° conjunto de parâmetros de seqüência inicial. Os conjuntos de parâmetros de seqüência inicial são logicamente ordenados na ordem ascendente do valor de seq_parameter_set_id.

num_ínit_pic_parameter_set_minus1[i] plus 1 indica o número de conjuntos de parâ- metros de imagem inicial para decodificar a representação da vista com um identificador de vista igual a view_id[i].

init_pic_parameter_set_id_delta[i][j] indica o valor do pic_parameter_set_id do j° con- junto de parâmetros de imagem inicial para decodificar a representação da vista com um identi- ficador de vista igual a view_id[ i ] se j for igual a 0. Se j for maior do que O1 i- nit_pic_parameter_set_id_delta[i][j] indica a diferença entre o valor do pic_parameter_set_id do j° conjunto de parâmetros de imagem inicial e o valor do pic_parameter_set_id do (j-1)° con- junto de parâmetros de imagem inicial. Os conjuntos de parâmetros de imagem inicial são logi- camente ordenados na ordem ascendente do valor de pic_parameter_set_id.

init_parameter_sets_info_src_view_id_delta [i] especifica que a vista com um identifi- cador de vista igual a view_id[i] tem a mesma informação de conjuntos de parâmetros iniciais que a vista com um identificador de vista igual a

(view_id[i] + init_parameter_sets_info_src_view_id_delta[i]). O valor de 0 indica que a informação de conjuntos de parâmetros iniciais da vista com um identificador de vista i- gual a view_id[i] não está presente na mensagem de informação de otimização suplementar.

camera_parameter_info_src_view_id_delta[i] especifica que a vista com um identifica- dor de vista igual a view_id[i] tem a mesma informação de parâmetro de câmera que a vista com um identificador de vista igual a

(view_id[i] + camera_parameter_info_src_view_id_delta[i]). Um valor de 0 indica que a informação de parâmetro de câmera da vista com um identificador de vista igual a vi- ew_id[i] não está presente na mensagem de informação de otimização suplementar.

Informação para Vistas Não-Codificadas de Câmera Um identificador de vista é usado para indicar ao decodificador qual vista não está codificada. Um identificador de vista pode ajudar o decodificador a determinar se uma vista ausente está perdida devido a um erro(s) de rede ou devido ao fato de estar intencionalmente não-codificada.

Informação de interpolação de vista é útil para um decodificador na interpolação de vistas não-codificadas a partir de vistas codificadas. A informação de interpolação de vista pode incluir informação tal como, por exemplo, quais vistas são usadas para interpolação, qual método de interpolação deve ser usado, e assim por diante. Assim, se a aplicação solici- tar a exibição de apenas certas vistas não-codificadas, então o servidor precisa apenas extra- ir e enviar as vistas exigidas para interpolação, e suas vistas dependentes com base na in- formação de dependência de vista das vistas codificadas.

Parâmetros de câmera podem ser usados para interpolar ou sintetizar as vistas não- codificadas.

Uma modalidade de uma mensagem de informação de otimização suplementar a qual suporta a informação de vista de câmera não-codificada descrita acima é ilustrada na

TABELA 2. TABELA 2

<table>table see original document page 20</column></row><table>

A sintaxe da mensagem de informação de otimização suplementar para a informa- ção de vista de câmera não-codificada é indicada em negrito na TABELA 2 e a semântica é descrita como a seguir. Deve-se observar que os conjuntos de parâmetros iniciais referidos na sintaxe e/ou semântica se referem àqueles conjuntos de parâmetros que podem ser co- locados no início do fluxo de bits ou que podem ser transmitidos no início de uma sessão.

num_non_coded_views_minus1 plus 1 indica o número de vistas não-codificadas su- portadas pelo fluxo de bits. O valor de num_non_coded_views_minus1 está na faixa de 0 a 1023, inclusive.

view_id[ i ] indica o identificador da ia vista.

view_interpolation_info_present_flag[ i ] igual a 1 indica a presença de informação de interpolação de vista para a vista com um identificador de vista igual a view_id[ i ] na mensagem de informação de otimização suplementar. Um valor de 0 indica que a informação de interpola- ção de vista para a vista é idêntica à outra vista indicada por vi- ew_interpolation_info_src_view_id_delta[ i ] (quando

viewJnterpolationJnfo_src_view_id_delta[ i ] não for igual a 0) ou que a informação de dependência de vista para a vista não está presente na mensagem de informação de otimização suplementar (quando view_interpolation_info_src_view_id_delta[ i ] for igual a 0).

camera_parameters_info_present_flag[ i ] igual a 1 indica a presença de informação de parâmetro de câmera para a vista com um identificador de vista igual a view_id[ i ] na mensa- gem de informação de otimização suplementar. Um valor de 0 indica que a informação de pa- râmetro de câmera para a vista é idêntico a de outra vista indicada pelo came- ra_parameter_info_src_view_id_delta[ i ] (quando

camera_parameter_info_src_viewJd_delta[ i ] não é igual a 0) ou que a informação de parâmetro de câmera para a vista não está presente na mensagem de informação de otimiza- ção suplementar (quando camera_parameter_info_src_view_id_delta[ i ] for igual a 0).

camera_parameters: presume-se que os parâmetros de câmera são conduzidos na forma de matriz P de projeção 3x4, que pode ser usada para mapear um ponto no cenário tridi- mensional para a coordenada de imagem bidimensional: / = P*[XW:YW:ZW:1]

onde / está nas coordenadas homogêneas / = [λ·Ιχ: A-Iy: λ].

Cada elemento camera_parameters_*_* pode ser representado de acordo com o pa- drão de pontos flutuantes (32 bits) de precisão única Instituto de Engenheiros Elétricos e Eletrô- nicos (IEEE).

num_referenced_views [ i ] indica o número de vistas a partir das quais a vista com um identificador de vista igual a view_id[ i ] é interpolada. O valor de

num_directly_dependent_views está na faixa de 0 a 1023, inclusive.

directly_dependent_view_id_delta[ i ][ j ] indica a diferença entre view_id[ i ] e um iden- tificador de vista da ja vista a partir da qual a vista com um identificador de vista igual a view_id[ i ] é interpolada. O identificador de vista de uma tal vista é igual a (view_id[i] + direc- tly_dependent_layer_id_delta [i][j]).

camera_parameterJnfo_src_view_id_delta[i] especifica que a vista com o identifica- dor de vista igual a view_id[ i ] tem a mesma informação de parâmetro de câmera que a vista com um identificador de vista igual a (view_id[ i ] + camera_parameter_info_src_view_id_delta[ i ]). Um valor de 0 indica que a informação de parâmetro de câmera da vista com identificador de vista igual a view_id[ i ] não está presente na mensagem de informação de otimização suple- mentar.

Informação para aplicações de ponto de vista livre

Vídeo de ponto de vista livre oferece a mesma funcionalidade que é conhecida a partir dos gráficos de computador tridimensionais (3D). O usuário pode escolher uma direção de visu- alização e ponto de vista específico dentro de uma cena visual, desse modo proporcionando navegação de ponto de vista livre, interativa. Esse recurso é de interesse para muitas aplicações de usuário, tal como, por exemplo, um DVD de um evento de ópera/concerto/esporte onde o usuário pode livremente escolher o ponto de vista.

Para melhorar suportar as aplicações de ponto de vista livre, uma mensagem de infor- mação de otimização suplementar de informação de multivistas pode ser usada para conduzir informação específica para ponto de vista livre incluindo, mas não limitado a, os seguintes:

Um exemplo de informação de ponto de vista livre é o tipo de ajuste de sistema de câ- mera tal como, por exemplo, um sistema linear, um sistema de domo, e/ou sistema retangular bidimensional (2D).

Outro exemplo da informação de ponto de vista livre é a definição de espaço de nave- gação, incluindo a extensão na qual um usuário tem permissão para mudar o ponto de vista e/ou a direção de visualização. Dependendo da capacidade do dispositivo de renderização, o espaço de navegação poderia ser definido como um espaço unidimensional ou multidimensio- nal. No caso de um espaço bidimensional, o sistema de coordenadas poderia ser definido como as dimensões de ponto de vista horizontal/vertical ou direção de visualização de panoramiza- ção/inclinação.

Ainda outro exemplo da informação de ponto de vista livre é o conjunto de vistas ne- cessárias para renderização para uma determinada posição no espaço de navegação. Por e- xemplo, se o dispositivo de renderização for limitado em termos de habilitação para navegar ao longo de uma linha base unidimensional, então o conjunto de vistas dependentes para cada segmento daquela linha base deve ser especificado. Essa informação, se disponível, ajudará um decodificador que é capaz de decodificar conteúdo de vídeo de multivistas a decidir o sub- conjunto de imagens de vista necessárias a serem decodificadas para renderizar uma determi- nada posição no espaço de navegação.

Uma modalidade de uma mensagem de informação de otimização suplementar a qual suporta a informação de ponto de vista livre descrito acima é ilustrada na Tabela 3.

TABELA 3

<table>table see original document page 23</column></row><table>

A sintaxe da mensagem de informação de otimização suplementar para a informação de ponto de vista livre é indicada em negrito na TABELA 3 e a semântica é descrita como a se- guir. Deve ser observado que os conjuntos de parâmetros iniciais referidos na sintaxe e/ou se- mântica se refere àqueles conjuntos de parâmetros que podem ser colocados no início do fluxo de bits ou que pode ser transmitido no início de uma sessão.

camera_array_type indica o tipo de sistema de câmera.

left_bound_for_navigation indica o limite esquerdo do espaço de navegação.

right_bound_for_navigation indica o limite esquerdo do espaço de navegação.

num_segments_in_navigation_space indica o número de segmentos no espaço de na- vegação que tem um conjunto diferente de vistas necessárias para renderização.

left_bound_segment indica o limite esquerdo do segmento atual no espaço de navega- ção.

num_views_needed_for_rendering indica o número de vistas necessárias para renderi- zação ao navegar dentro do segmento atual. viewJd_needed_for_rendering[i][j] indica o view_jd da ja vista que é necessária para renderização ao se navegar no i° segmento no espaço de navegação.

De acordo agora com as Figuras 3A-3D, um método exemplar para codificar informa- ção de multivistas é indicado geralmente pelo numerai de referência 300. Deve ser considerado que o método 300 inclui um método 500 para codificar informação de multivistas que inclui in- formação de vista de câmera não-codificada e um método 600 para codificar informação de mul- tivistas que inclui informação de ponto de vista livre. Além disso, deve ser considerado que o método 300 também codifica informação de multivistas que inclui informação de vista codificada de câmera.

O método 300 inclui um bloco inicial 302 que passa o controle para um bloco de função 304. O bloco de função 304 lê um arquivo de configuração de codificador, e passa o controle para um bloco de função 306. O bloco de função 306 configura os parâmetros de codificação, e passa o controle para um bloco de função 308. O bloco de função 308 cria uma sintaxe de alto nível (por exemplo, conjunto de parâmetros de seqüência (SPS), conjunto de parâmetros de imagem (PPS), e/ou conjunto de parâmetros de vista), e passa o controle para um bloco de fun- ção 310. O bloco de função 310 começa a criar uma mensagem de informação de otimização suplementar (SEI) de informação de vista de câmera codificada, e passa o controle para um bloco de função 312. O bloco de função 312 define o número de vistas codificadas, e passa o controle para um bloco de decisão 314. O bloco de decisão 314 determina se o número de vis- tas codificadas está ou não definido para todas as vistas. Caso afirmativo, então o controle é passado para um bloco de função 316. Caso contrário, o controle é passado para um bloco de função 320.

O bloco de função 316 grava uma mensagem de informação de otimização suplemen- tar (SEI) para um fluxo de bits, e passa o controle para um bloco de função 317. O bloco de fun- ção 317 envia a mensagem de informação de otimização suplementar (SEI) em banda ou fora de banda, e passa o controle para um bloco de função 318. O bloco de função 318 codifica as vistas, e passa o controle para um bloco final 399.

O bloco de função 320 define o parâmetro viewjd syntax, e passa o controle para um bloco de função 322. O bloco de função define o elemento view_num syntax, e passa o controle para um bloco de função 324. O bloco de função 324 define o parâmetro viewjevel syntax, e para o controle para o bloco de função 326. O bloco de função 326 define o indicador de depen- dência de vista presente, e passa o controle para um bloco de função 328. O bloco de função 328 define o indicador de informação de taxa de bits presente, e passa o controle para um bloco de função 330. O bloco de função 330 define o indicador de informação de taxa de quadros pre- sente, e passa o controle para um bloco de função 322. O bloco de função 322 define o indica- dor de informação de tamanho de quadro presente, e passa o controle para um bloco de função 334. O bloco de função 334 define o indicador de sub-região, e passa o controle para um bloco de função 336. O bloco de função 336 define o indicador de informação de escalabilidade pre- sente, e passa o controle para um bloco de função 338. O bloco de função 338 define o indica- dor de perfil/nível, e passa o controle para um bloco de função 340. O bloco de função 340 defi- ne o indicador de conjuntos de parâmetros iniciais, e passa o controle para um bloco de função 342. O bloco de função 342 define o indicador de parâmetro de câmera presente, e passa o controle para um bloco de decisão 344. O bloco de decisão 344 determina se ou não o indicador de informação de perfil/nível presente é ajustado. Caso afirmativo, então o controle é passado para um bloco de função 346. Caso contrário, o controle é passado para um bloco de função 348.

O bloco de função 346 define os indicadores de limitação de perfil/nível, define o indi- cador viewjevel e passa o controle para um bloco de decisão 350. O bloco de decisão 350 de- termina se o indicador de informação de taxa de bits presente está ou não definido. Caso afirma- tivo, o controle é passado para um bloco de função 352. Caso contrário, o controle é passado para um bloco de decisão 354. O bloco de função 352 define a informação relacionada à taxa de bits, e passa o controle para o bloco de decisão 354.

O bloco de decisão 354 determina se o indicador de informação de quadro presente está ou não ajustado. Caso afirmativo, então o controle é passado para um bloco de função 356. Caso contrário, o controle é passado para um bloco de função 358.

O bloco de função 356 define a informação relacionada à taxa de quadros, e passa o controle para um bloco de decisão 360.

O bloco de decisão 360 determina se o indicador de informação de tamanho de quadro está ou não definido. Caso afirmativo, o controle é passado para um bloco de função 362. Caso contrário, o controle é passado para um bloco de função 364.

O bloco de função 362 define a informação de tamanho de quadro, e passa o controle para um bloco de decisão 366.

O bloco de decisão 366 determina se o indicador de informação de sub-região presen- te está ou não definido. Caso afirmativo, então o controle é passado para um bloco de função 368. Caso contrário, o controle é passado para um bloco de função 370.

O bloco de função 368 define a informação de sub-região, e passa o controle para um conector de página ligado ou desligado 395.

O conector de página ligado ou desligado 395 passa o controle para um bloco de deci- são 402. O bloco de decisão 402 determina se o indicador de informação de dependência de vista presente é ou não aplicado. Caso afirmativo, o controle é passado para um bloco de fun- ção 404. Caso contrário, o controle é passado para um bloco de função 406.

O bloco de função 404 define os parâmetros de informação de dependência de vista, e passa o controle para um bloco de decisão 408. O bloco de decisão 408 determina se o indica- dor de informação inicial de conjuntos de parâmetro está ou não aplicado. Caso afirmativo, o controle é passado para um bloco de função 410. Caso contrário, o controle é passado para um bloco de função 412.

O bloco de função 410 define os parâmetros de informação inicial de conjuntos de pa- râmetros, e passa o controle para um bloco de decisão 414. O bloco de decisão 414 determina se o indicador de informação de ponto de vista livre presente está ou não aplicado. Caso afirma- tivo, então o controle é passado para um bloco de função 416. Caso contrário, o controle é pas- sado para um bloco de função 418.

O bloco de função 416 define os parâmetros de informação de ponto de vista livre, e passa o controle para um bloco de decisão 420. O bloco de decisão 420 determina se o indica- dor de informação escalonável presente está ou não aplicado. Se afirmativo, então o controle é passado para um bloco de função 422. Caso contrário, o controle é passado para um bloco de função 424.

O bloco de função 422 define os parâmetros de informação escalonável, e passa o controle para um bloco de decisão 426. O bloco de decisão 426 determina se o indicador de informação de câmera presente está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 428. Caso contrário, o controle é passado para um bloco de função 430.

O bloco de função 428 define os parâmetros de informação de câmera, e passa o con- trole para um conector de página ligado ou desligado 397. O conector de página ligado ou desli- gado 397 retorna o controle para o bloco de decisão 314.

O bloco de função 348 define o valor viewjd delta de origem, e passa o controle para o bloco de decisão 348.

O bloco de função 358 define os valores delta viewjd de origem, e passa o controle para o bloco de decisão 360.

O bloco de função 364 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 366.

O bloco de função 370 define o valor delta viewjd de origem, e passa o conector de página ligado ou desligado 395.

O bloco de função 406 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 408.

O bloco de função 412 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 414.

O bloco de função 418 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 420.

O bloco de função 424 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 426.

O bloco de função 430 define o valor delta viewjd de origem, e passa o conector de página ligado ou desligado 397.

O método 500 inclui um bloco inicial 502 que passa o controle para um bloco de função 504. O bloco de função 504 define o número de vistas codificadas, e passa o controle para um bloco de decisão 506. O bloco de decisão 506 determina se quaisquer indicadores estão ou não definidos para todas as vistas não-codificadas. Caso afirmativo, então o controle é passado para o conector de página ligado ou desligado 397. Caso contrário, o controle é passado para um bloco de função 508.

O bloco de função 508 define o parâmetro de sintaxe viewjd para as vistas não- codificadas, e passa o controle para um bloco de função 510. O boco de função 510 define o indicador de informação de interpolação de vista presente para as vistas não-codificadas, e pas- sa o controle para o bloco de função 512. O bloco de função 512 define o indicador de informa- ção de parâmetros de câmera presente para as vistas não-codificadas, e passa o controle para um bloco de decisão 514. O bloco de decisão 514 determina se o indicador de interpolação de vista está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 516. Caso contrário, o controle é passado para um bloco de função 518.

O bloco de função 516 define a informação de interpolação de vista, e passa o controle para um bloco de decisão 520. O bloco de decisão 520 determina se o indicador de parâmetros de câmera presente está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 522. Caso contrário, o controle é passado para um bloco de função 524.

O bloco de função 522 define a informação de parâmetros de câmera, e retorna o con- trole para o bloco de decisão 506.

O bloco de função 518 define o valor delta viewjd de origem, e passa o controle para o bloco de decisão 520.

O bloco de função 524 define o valor delta viewjd de origem, e retorna o controle ao bloco de decisão 506.

O método 600 inclui um bloco inicial 602 que passa o controle para um bloco de função 604. O bloco de função 604 define o tipo de sistema de câmera, e passa o controle para um bloco de decisão 606. O bloco de decisão 606 determina se o tipo de sistema de câmera é ou não igual a um. Se afirmativo, o controle é passado para um conector de página ligado ou desli- gado 393. Caso contrário, o controle é passado para um bloco de função 608. O bloco de fun- ção 608 define o limite esquerdo para a navegação, e passa o controle para um bloco de função 610. O bloco de função 610 define o limite direito para a navegação, e passa o controle para um bloco de função 612. O bloco de função 612 define o número de segmentos no espaço de na- vegação, e passa o controle para um bloco de decisão 614. O bloco de decisão 614 determina se todos os segmentos estão ou não concluídos (isto é, limites e número de segmentos defini- dos). Se afirmativo, o controle é passado para o conector de página ligado ou desligado 393. Caso contrário, o controle é passado para um bloco de função 616. O bloco de função 616 defi- ne o segmento de limite esquerdo, e passa o controle para um bloco de função 618. O bloco de função 618 define o número de vistas necessárias para renderização, e passa o controle para um bloco de decisão 620. O bloco de decisão 620 determina se todas as vistas estão concluí- das. Se afirmativo, então o controle é retornado ao bloco de decisão 614. Caso contrário, o con- trole é passado para um bloco de função 622. O bloco de função 622 define o parâmetro de sintaxe viewjd conforme necessário.

Voltando-se agora para as Figuras 4A-4D, um método exemplar para decodificar in- formação de multivistas é indicado geralmente pelo numerai de referência 700. Deve ser consi- derado que o método 700 inclui um método 900 para codificar informação de multivistas que inclui informação de vista de câmera não-codificada e um método 1000 para codificar informa- ção de multivistas que inclui informação de ponto de vista livre. Além disso, deve ser considera- do que o método 700 também codifica informação de multivistas que inclui informação de vista de câmera codificada.

O método 700 inclui um bloco inicial 702 que passa o controle para um bloco de função 704. O bloco de função 704 recebe as mensagens de conjunto de parâmetros de seqüência (SPS), conjunto de parâmetros de imagem (PPS), e/ou de conjunto de parâmetros de vista (VPS) em banda ou fora de banda, e passa o controle para um bloco de função 706. O bloco de função 706 lê a sintaxe de alto nível (conjunto de parâmetros de seqüência (SPS), conjunto de parâmetros de imagem (PPS), e/ou conjunto de parâmetros de vista (VPS)), e passa o controle para um bloco de função 708. O bloco de função 708 começa analisar a mensagem de informa- ção de otimização suplementar de câmera codificada, e passa o controle para um bloco de fun- ção 710. O bloco de função 710 lê/analisa os números de vista codificados, e passa o controle para o bloco de decisão 714. O bloco de decisão 714 determina se todas as vistas foram li- das/analisadas. Se afirmativo, então o controle é passado para um bloco de função 716. Caso contrário, o controle é passado para um bloco de função 720.

O bloco de função 716 armazena a mensagem de informação de otimização suple- mentar (FEI) na memória, e passa o controle para um bloco de função 718. O bloco de função 718 decodifica as vistas, e passa o controle para um bloco final 799.

O bloco de função 720 lê/analisa o elemento de sintaxe viewjd, e passa o controle pa- ra um bloco de função 722. O bloco de função 722 lê/analisa o elemento de sintaxe view_num, e passa o controle para um bloco de função 724. O bloco de função 724 lê/analisa o elemento de sintaxe viewjevel, e passa o controle para um bloco de função 726. O bloco de função 726 lê/analisa o indicador de dependência de vista presente, e passa o controle para um bloco de função 728. O bloco de função 728 lê/analisa o indicador de informação de taxa de bits presen- te, e passa o controle para um bloco de função 730. O bloco de função 730 lê/analisa o indica- dor de informação de taxa de quadro presente, e passa o controle para um bloco de função 732. O bloco de função 732 lê/analisa o indicador de informação de tamanho de quadro presente, e passa o controle para um bloco de função 734. O bloco de função 734 lê/analisa o indicador de sub-região, e passa o controle para um bloco de função 736. O bloco de função 736 lê/analisa o indicador de informação de escalabilidade presente, e passa o controle para um bloco de função 738. O boco de função 738 lê/analisa o indicador de perfil/nível, e passa o controle para um blo- co de função 740. O bloco de função 740 lê/analisa o indicador de conjuntos de parâmetros ini- ciais, e passa o controle para um bloco de função 742. O bloco de função 742 lê/analisa o indi- cador de parâmetro de câmara presente, e passa o controle para um bloco de decisão 744. O bloco de decisão 744 determina se indicador de informação de perfil/nívei presente foi ou não lido/analisado. Se afirmativo, então o controle é passado para um bloco de função 746. Caso contrário, o controle é passado para um bloco de função 748.

O bloco de função 746 lê/analisa os indicadores de limitação de perfil/nível, lê/analisa o elemento de sintaxe viewjevel, e passa o controle para o bloco de decisão 750. O bloco de decisão 750 determina se o indicador de informação de taxa de bits presente foi ou não li- do/analisado. Se afirmativo, o controle é passado para um bloco de função 752. Caso contrário, o controle é passado para um bloco de decisão 754.

O bloco de função 752 lê/analisa a informação relacionada à taxa de bits, e passa o controle para o bloco de decisão 754.

O bloco de decisão 754 determina se o indicador de informação de quadro presente foi ou não lido/analisado. Se afirmativo, o controle é passado para um bloco de função 756. Caso contrário, o controle é passado para um bloco de função 758.

O bloco de função 756 lê/analisa informação relacionada à taxa de quadros, e passa o controle para um bloco de decisão 760.

O bloco de decisão 760 determina se indicador de informação de tamanho de quadro presente foi ou não lido/analisado. Se afirmativo, o controle é passado para um bloco de função 762. Caso contrário, o controle é passado para um bloco de função 764.

O bloco de função 762 lê/analisa informação de tamanho de quadro, e passa o controle para um bloco de decisão 766. O bloco de decisão 766 determina se o indicador de informação de sub-região presente foi ou não lido/analisado. Se afirmativo, o controle é passado para um bloco de função 768. Caso contrário, o controle é passado para um bloco de função 860.

O bloco de função 768 lê/analisa a informação de sub-região, e passa o controle para um conector de página ligado ou desligado 795.

O conector de página ligado ou desligado 795 passa o controle para um bloco de deci- são 802. O bloco de decisão 802 determina se o indicador de informação de dependência de vista presente foi ou não definido. Se afirmativo, o controle é passado para um bloco de função 804. Caso contrário, o controle é passado para um bloco de função 806.

O bloco de função 804 lê/analisa os parâmetros de informação de dependência de vis- ta, e passa o controle para um bloco de decisão 808. O bloco de decisão 808 determina se o indicador de informação inicial de conjuntos de parâmetros presente está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 810. Caso contrário, o controle é passado para um bloco de função 812.

O bloco de função 810 lê/analisa os parâmetros de informação inicial de conjuntos de parâmetro, e passa o controle para um bloco de decisão 814. O bloco de decisão 814 determina se o indicador de informação de ponto de vista livre presente está ou não definido. Se afirmativo, o controle é passado para um bloco de função 816. Caso contrário, o controle é passado para um bloco de função 818.

O bloco de função 816 lê/analisa os parâmetros de informação de ponto de vista livre, e passa o controle para um bloco de decisão 820. O bloco de decisão 820 determina se o indi- cador de informação escalonável presente está ou não definido. Se afirmativo, o controle é pas- sado para um bloco de função 822. Caso contrário, o controle é passado para um bloco de fun- ção 824.

O bloco de função 822 lê/analisa os parâmetros de informação escalonáveis, e passa o controle para um bloco de decisão 826. O bloco de decisão 826 determina se o indicador de informação de câmera presente está ou não definido. Caso afirmativo, o controle é passado para um bloco de função 828. Caso contrário, o controle é passado para um bloco de função 830.

O bloco de função 828 lê/analisa os parâmetros de informação de câmera, e passa o controle para o conector de página ligado ou desligado 797.

O bloco de função 748 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 750.

O bloco de função 758 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 760.

O bloco de função 764 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 766.

O bloco de função 770 lê/analisa o valor delta viewjd de origem, e passa o controle para o conector de página ligado ou desligado 795.

O bloco de função 806 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 808.

O bloco de função 812 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 814.

O bloco de função 818 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 820.

O bloco de função 824 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 826.

O bloco de função 830 lê/analisa o valor delta viewjd de origem, e passa o controle para o conector de página ligado ou desligado 797.

O método 900 inclui um bloco inicial 902 que passa o controle para um bloco de função 904. O bloco de função 904 lê/analisa o número de vistas não-codificadas, e passa o controle para um bloco de decisão 906. O bloco de decisão 906 determina se todas as vistas não- codificadas foram ou não lidas/analisadas. Se afirmativo, então o controle é passado para o co- nector de página ligado ou desligado 797. Caso contrário, o controle é passado para o bloco de função 908. O bloco de função 908 lê/analisa o elemento de sintaxe viewjd, e passa o controle para um bloco de função 910. O bloco de função 910 lê/analisa o indicador de informação de interpelação de vista presente, e passa o controle para um bloco de função 912. O bloco de fun- ção 912 lê/analisa o indicador de informação de parâmetros de câmera presentes, e passa o controle para um bloco de decisão 914. O bloco de decisão 914 determina se o indicador de interpolação de vista está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 916. Caso contrário, o controle é passado para um bloco de função 918.

O bloco de função 916 lê/analisa a informação de interpolação de vista, e passa o con- trole para um bloco de decisão 920. O bloco de decisão 920 determina se o indicador de parâ- metros de câmera presente está ou não definido. Se afirmativo, então o controle é passado para um bloco de função 922. Caso contrário, o controle é passado para um bloco de função 924.

O bloco de função 918 lê/analisa o valor delta viewjd de origem, e passa o controle para o bloco de decisão 920.

O bloco de função 924 lê/analisa o valor delta viewjd de origem, e retorna o controle ao bloco de decisão 906.

O método 1000 inclui um bloco inicial 1002 que passa o controle para um bloco de fun- ção 1004. O bloco de função 1004 lê/analisa o tipo de sistema de câmera, e passa o controle para um bloco de decisão 1006. O bloco de decisão 1006 determina se o tipo de sistema de câmera é ou não igual a um. Se afirmativo, então o controle é passado para o conector de pági- na ligado para o conector de página ligado ou desligado 793. Caso contrário, o controle é pas- sado para um bloco de função 1008.

O bloco de função 1008 lê/analisa o limite esquerdo para navegação, e passa o contro- le para um bloco de função 1010. O bloco de função 1010 lê/analisa o limite direito para nave- gação e passa o controle para o bloco de função 1012. O bloco de função 1012 lê/analisa o nú- mero de segmentos no espaço de navegação, e passa o controle para um bloco de decisão 1014. O bloco de decisão 1014 determina se todos os segmentos estão ou não feitos. Se afir- mativo, o controle é passado para o conector de página ligado ou desligado 793. Caso contrário, o controle é passado para um bloco de função 1016. O bloco de função 1016 lê/analisa o seg- mento de limite esquerdo, e passa o controle para o bloco de função 1018. O bloco de função 1018 lê/analisa o número de vistas necessárias para renderização, e passa o controle para um bloco de decisão 1020. O bloco de decisão 1020 determina se a análise de todas as vistas foi ou não concluída. Se afirmativo, então o controle é retornado ao bloco de decisão 1014. Caso contrário, o controle é passado para o bloco de função 1022.

O bloco de função 1022 lê/analisa o viewjd conforme necessário.

Uma descrição será feita agora de algumas das muitas vantagens/características ine- rentes da presente invenção, algumas das quais foram mencionadas acima. Por exemplo, uma vantagem/característica é um aparelho que inclui um codificador para codificar conteúdo de ví- deo de multivistas em um fluxo de bits resultantes e informação de codificação de multivistas para o conteúdo de vídeo de multivistas em ao menos um elemento de sintaxe de alto nível.

Outra vantagem/característica é o aparelho tendo o codificador conforme descrito aci- ma, em que o ao menos um elemento de sintaxe de alto nível compreende ao menos um de um cabeçalho de seção, um conjunto de parâmetros de seqüência, um conjunto de parâmetros de imagem, um conjunto de parâmetros de vistas, um cabeçalho de unidade de camada de abstra- ção de rede, e uma mensagem de informação de otimização suplementar.

Ainda outra vantagem/característica é o aparelho tendo o codificador como descrito a - cima, em que a informação de codificação de multivistas inclui ao menos uma de informação de vista codificada de câmera, informação de vista não-codificada de câmera, e informação de pon- to de vista livre.

Ainda outra vantagem/característica é o aparelho tendo o codificador em que a infor- mação de codificação de multivistas inclui ao menos uma de informação de vista de câmera codificada, informação de vista de câmera não-codificada, e informação de ponto de vista livre conforme descrito acima, em que a informação de vista de câmera codificada inclui ao menos uma de um número de vistas codificadas de câmera e características de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de ví- deo de multivistas.

Além disso, outra vantagem/característica é o aparelho tendo o codificador em que a informação de vista codificada de câmera inclui ao menos uma de um número de vistas codifi- cadas de câmera e característica de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer um de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas conforme descrito acima, em que as características de cada uma das vistas codificadas de câmera inclui ao menos uma de informação de escalabilidade, informação de escalabilidade de vista, informação de dependência de vista, informação de região de interesse, uma taxa de bits, um tamanho de quadro, uma taxa de quadro, conjuntos de parâmetros iniciais, e parâmetros de câmera, especi- ficações de decodificador, informação de restrição de fluxo de bits, um identificador de vista, e informação de ordem de codificação, em que a informação de escalabilidade inclui ao menos uma de informação de escalabilidade temporal, informação de escalabilidade espacial, e infor- mação de escalabilidade de sinal/ruído, as especificações de decodificador são indicadas por ao menos uma de informação de perfil e nível e informação de limitação de perfil e nível.

Adicionalmente, outra vantagem/característica é o aparelho tendo o codificador em que a informação de codificação de multivistas inclui ao menos uma de informação de vista codifica- da de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre conforme descrito acima, em que a informação de vista não-codificada de câmera inclui ao menos uma de um número de vistas não-codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qual- quer um de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas.

Além disso, outra vantagem/característica é o aparelho tendo o codificador em que a informação de vista não-codificada de câmera inclui ao menos uma de um número de vistas não-codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas, em que as características de cada uma das vistas não-codificadas inclui ao menos um de um identifica- dor de vista, informação de interpolação de vista, e parâmetros de câmera.

Adicionalmente, outra vantagem/característica é o aparelho tendo o codificador em que a informação de codificação de multivistas inclui ao menos uma de informação de vista codifica- da de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre conforme descrito acima, em que a informação de ponto de vista livre inclui ao menos um de parâmetros e métodos para gerar ao menos uma vista em um determinado ponto de vista e um ângulo de visualização.

Além disso, outra vantagem/característica é o aparelho tendo o codificador em que a informação de ponto dé vista livre inclui ao menos um de parâmetros e métodos para gerar ao menos uma vista em um determinado ponto de vista e um ângulo de visualização conforme descrito acima, em que os parâmetros para gerar a ao menos uma vista inclui ao menos um de configurações de sistema de câmera, uma definição de espaço de navegação, e um conjunto de vistas codificadas de câmera para renderizar uma posição especificada no espaço de navega- ção.

Adicionalmente, outra vantagem/característica é o aparelho tendo o codificador como descrito acima, em que o ao menos um elemento de sintaxe de alto nível é transmitido em ao menos uma de em banda e fora de banda com relação ao fluxo de bits.

Essas e outras características e vantagens dos presentes princípios podem ser facil- mente averiguadas por aqueles versados na técnica pertinente com base nos presentes ensi- namentos. Deve ser entendido que os ensinamentos dos presentes princípios podem ser im- plementados em várias formas de hardware, software, firmware, processadores de uso especial, ou combinações dos mesmos.

Mais preferivelmente, os ensinamentos dos presentes princípios são implementados como uma combinação de hardware e software. Além disso, o software pode ser implementado como um programa de aplicação incorporado de forma tangível em uma unidade de armazena- mento de programa. O programa de aplicação pode ser transferido para, e executado por uma máquina compreendendo qualquer arquitetura adequada. Preferivelmente, a máquina é imple- mentada em uma plataforma de computador tendo hardware tal como uma ou mais unidades centrais de processamento ("CPU"), uma memória de acesso aleatório ("RAM") e interfaces de entrada/saída ("l/O"). A plataforma de computador também pode incluir um sistema operacional e código de microinstrução. Os vários processos e funções aqui descritos podem ser ou parte do código de microinstrução ou parte do programa de aplicação, ou qualquer combinação dos mesmos, os quais podem ser executados por uma CPU. Além disso, várias outras unidades periféricas podem ser conectadas à plataforma de computador tal como uma unidade de arma- zenamento de dados adicionais e uma unidade de impressão.

Deve ser entendido ainda que, devido ao fato de alguns componentes e métodos cons- tituintes de sistema ilustrados nos desenhos anexos serem implementados preferivelmente em software, as conexões efetivas entre os componentes de sistema ou blocos de função de pro- cesso podem diferir dependendo da maneira na qual os presentes princípios são programados. Dados os presentes ensinamentos, aqueles versados na técnica pertinente serão capazes de considerar essas e similares implementações ou configurações dos presentes princípios.

Embora as modalidades ilustrativas tenham sido descritas aqui com referência aos de- senhos anexos, deve ser entendido que os presentes princípios não são limitados àquelas exa- tas modalidades, e que várias alterações e modificações podem ser efetuadas nas mesmas por aqueles versados na técnica pertinente sem se afastar do escopo ou espírito dos presentes princípios. Todas as tais alterações e modificações pretendem ser incluídas no escopo dos pre- sentes princípios como apresentado nas reivindicações anexas.

Claims (42)

1. Aparelho, CARACTERIZADO por compreender: um codificador (100) para codificar conteúdo de vídeo de multivistas em um fluxo de bits resultante e informação de codificação de multivistas para o conteúdo de vídeo de multivis- tas em ao menos um elemento de sintaxe de alto nível.

2. Aparelho, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o ao menos um elemento de sintaxe de alto nível compreende ao menos um de um cabeçalho de seção, um conjunto de parâmetros de seqüência, um conjunto de parâmetros de imagem, um conjunto de parâmetros de vistas, um cabeçalho de unidade de camada de abstração de rede, e uma mensagem de informação de otimização suplementar.

3. Aparelho, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que a informação de codificação de multivistas inclui ao menos uma de informação de vista codificada de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre.

4. Aparelho, de acordo com a reivindicação 3, CARACTERIZADO pelo fato de que a informação de vista codificada de câmera inclui ao menos uma de um número de vistas codifi- cadas de câmera e características de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codi- ficadas de câmera correspondendo ao conteúdo de vídeo de multivistas.

5. Aparelho, de acordo com a reivindicação 4, CARACTERIZADO pelo fato de que as características de cada uma das vistas codificadas de câmera incluem ao menos uma de infor- mação de escalabilidade, informação de escalabilidade de vista, informação de dependência de vista, informação de região de interesse, uma taxa de bits, um tamanho de quadro, uma taxa de quadro, conjuntos de parâmetros iniciais, e parâmetros de câmera, especificações de decodifi- cador, informação de restrição de fluxo de bits, um identificador de vistas, e informação de or- dem de codificação, em que a informação de escalabilidade inclui ao menos uma de informação de escalabilidade temporal, informação de escalabilidade espacial, e informação de escalabili- dade de relação de sinal/ruído, as especificações de decodificador são indicadas por ao menos uma de informação de perfil e nível e informação de limitação de perfil e nível.

6. Aparelho, de acordo com a reivindicação 3, CARACTERIZADO pelo fato de que a informação de vista não-codificada de câmera inclui ao menos uma de um número de vistas não-codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas.

7. Aparelho, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que as características de cada uma das vistas não-codificadas inclui ao menos um de um identificador de vista, informação de interpolação de vista, e parâmetros de câmera.

8. Aparelho, de acordo com a reivindicação 3, CARACTERIZADO pelo fato de que a informação de ponto de vista livre inclui ao menos um de parâmetros e métodos para gerar ao menos uma vista em um determinado ponto de vista e um ângulo de visualização.

9. Aparelho, de acordo com a reivindicação 7, CARACTERIZADO pelo fato de que os parâmetros para gerar a pelo menos uma vista inclui ao menos um de configurações de sistema de câmera, uma definição de um espaço de navegação, e um conjunto de vistas codificadas de câmera para renderizar uma posição específica no espaço de navegação.

10. Aparelho, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o pelo menos um elemento de sintaxe de alto nível é transmitido em ao menos uma de em banda e fora de banda com relação ao fluxo de bits.

11. Método, CARACTERIZADO por compreender: codificar conteúdo de vídeo de multivistas em um fluxo de bits resultante e codificar in- formação de codificação de multivistas para o conteúdo de multivistas em ao menos um ele- mento de sintaxe de alto nível (310).

12. Método, de acordo com a reivindicação 11, CARACTERIZADO pelo fato de que o ao menos um elemento de sintaxe de alto nível compreende ao menos um de um cabeçalho de seção, um conjunto de parâmetros de seqüência, um conjunto de parâmetros de imagem, um conjunto de parâmetros de vista, um cabeçalho de unidade de camada de abstração de rede, e uma mensagem de informação de otimização suplementar.

13. Método, de acordo com a reivindicação 11, CARACTERIZADO pelo fato de que a informação de codificação de multivistas inclui pelo menos uma de informação de vista codifica- da de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre (310, 500, 600).

14. Método, de acordo com a reivindicação 13, CARACTERIZADO pelo fato de que a informação de vista codificada de câmera inclui pelo menos uma de um número de vistas codifi- cadas de câmera e características de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer um de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas (312).

15. Método, de acordo com a reivindicação 14, CARACTERIZADO pelo fato de que as características de cada uma das vistas codificadas de câmera incluem ao menos uma de infor- mação de escalabilidade, uma informação de escalabilidade de vista, informação de dependên- cia de vista, informação de região de interesse, uma taxa de bits, um tamanho de quadro, uma taxa de quadros, conjuntos de parâmetros iniciais, e parâmetros de câmera, especificações de decodificador, informação de restrição de fluxo de bits, um identificador de vista, e informação de ordem de codificação, em que a informação de escalabilidade inclui ao menos uma de informa- ção de escalabilidade temporal, informação de escalabilidade espacial, e informação de escala- bilidade de relação de sinal/ruído, as especificações de decodificador são indicadas por ao me- nos uma de informação de perfil e nível e informação de limitação de perfil e nível (300).

16. Método, de acordo com a reivindicação 13, CARACTERIZADO pelo fato de que a informação de vista não-codificada de câmera inclui ao menos uma de um número de vistas não codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de uma ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas (504).

17. Método, de acordo com a reivindicação 16, CARACTERIZADO pelo fato de que as características de cada uma das vistas não-codificadas inclui ao menos um de um identificador de vista, informação de interpolação de vista, e parâmetros de câmera (508, 510, 512, 516, -522).

18. Método, de acordo com a reivindicação 13, CARACTERIZADO pelo fato de que a informação de ponto de vista livre inclui ao menos um de parâmetros e métodos para gerar ao menos uma vista em um determinado ponto de vista e um ângulo de visualização (414, 416).

19. Método, de acordo com a reivindicação 18, CARACTERIZADO pelo fato de que os parâmetros para gerar a pelo menos uma vista incluem pelo menos um de configurações de sistema de câmera, uma definição de um espaço de navegação, e um conjunto de vistas codifi- cadas de câmera para renderizar uma posição especificada no espaço de navegação (600).

20. Método, de acordo com a reivindicação 11, CARACTERIZADO pelo fato de que o ao menos um elemento de sintaxe de alto nível é transmitido em ao menos uma de em banda e fora de banda com relação ao fluxo de bits (317).

21. Aparelho, CARACTERIZADO por compreender: um decodificador (200) para decodificar conteúdo de vídeo de multivistas a partir de um fluxo de bits resultantes e informação de codificação de multivistas para o conteúdo de multivis- tas a partir de ao menos um elemento de sintaxe de alto nível.

22. Aparelho, de acordo com a reivindicação 21, CARACTERIZADO pelo fato de que o pelo menos um elemento de sintaxe de alto nível compreende ao menos um de um cabeçalho de seção, um conjunto de parâmetros de seqüência, um conjunto de parâmetros de imagem, um conjunto de parâmetro de vista, um cabeçalho de unidade de camada de abstração de rede, e uma mensagem de informação de otimização suplementar.

23. Aparelho, de acordo com a reivindicação 21, CARACTERIZADO pelo fato de que a informação de codificação de multivistas inclui ao menos uma de informação de vista codificada de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre.

24. Aparelho, de acordo com a reivindicação 23, CARACTERIZADO pelo fato de que a informação de vista codificada de câmera inclui pelo menos uma de um número de vistas codifi- cadas de câmera e características de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codi- ficadas de câmera correspondendo ao conteúdo de vídeo de multivistas.

25. Aparelho, de acordo com a reivindicação 24, CARACTERIZADO pelo fato de que as características de cada uma das vistas codificadas de câmera incluem pelo menos uma de informação de escalabilidade, informação de escalabilidade de vista, informação de dependên- cia de vista, informação de região de interesse, uma taxa de bits, um tamanho de quadro, uma taxa de quadros, conjuntos de parâmetros iniciais, e parâmetros de câmera, especificações de decodificador, informação de restrição de fluxo de bits, um identificador de vista, e informação de ordem de codificação, em que a informação de escalabilidade inclui pelo menos uma informa- ção de escalabilidade temporal, informação de escalabilidade espacial, e informação de escala- bilidade de relação de sinal/ruído, as especificações de decodificador são indicadas por ao me- nos uma informação de perfil e de nível e informação de limitação de perfil e de nível.

26. Aparelho, de acordo com a reivindicação 23, CARACTERIZADO pelo fato de que a informação de vista não-codificada de câmera inclui pelo menos um de um número de vistas não-codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas.

27. Aparelho, de acordo com a reivindicação 26, CARACTERIZADO pelo fato de que as características de cada uma das vistas não codificadas incluem ao menos um de um identifi- cador de vista, informação de interpolação de vista, e parâmetros de câmera.

28. Aparelho, de acordo com a reivindicação 23, CARACTERIZADO pelo fato de que a informação de ponto de vista livre inclui pelo menos um dos parâmetros e métodos para gerar ao menos uma vista em um determinado ponto de vista e um ângulo de visualização.

29. Aparelho, de acordo com a reivindicação 28, CARACTERIZADO pelo fato de que os parâmetros para gerar a pelo menos uma vista inclui pelo menos um de configurações de sistema de câmera, uma definição de um espaço de navegação, e um conjunto de vistas codifi- cadas de câmera para renderizar uma posição especificada no espaço de navegação.

30. Aparelho, de acordo com a reivindicação 21, CARACTERIZADO pelo fato de que o pelo menos um elemento de sintaxe de alto nível é recebido em pelo menos uma de em banda e fora de banda com relação ao fluxo de bits.

31. Método, CARACTERIZADO por compreender: decodificar conteúdo de vídeo de multivistas a partir de uma informação de codificação de multivistas e fluxo de bits resultante para o conteúdo de multivistas em ao menos um elemen- to de sintaxe de alto nível (708).

32. Método, de acordo com a reivindicação 31, CARACTERIZADO pelo fato de que o pelo menos um elemento de sintaxe de alto nível compreende pelo menos um de um cabeçalho de seção, um conjunto de parâmetros de seqüência, um conjunto de parâmetros de imagem, um conjunto de parâmetros de vistas, um cabeçalho de unidade de camada de abstração de rede, e uma mensagem de informação de otimização suplementar.

33. Método, de acordo com a reivindicação 31, CARACTERIZADO pelo fato de que a informação de codificação de multivistas inclui pelo menos uma de informação de vista codifica- da de câmera, informação de vista não-codificada de câmera, e informação de ponto de vista livre (708, 900,1000).

34. Método, de acordo com a reivindicação 33, CARACTERIZADO pelo fato de que a informação de vista codificada de câmera inclui pelo menos uma de um número de vistas codifi- cadas de câmera e características de cada uma das vistas codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de uma ou mais de um número total de vistas co- dificadas de câmera correspondendo ao conteúdo de vídeo de multivistas (710).

35. Método, de acordo com a reivindicação 34, CARACTERIZADO pelo fato de que as características de cada uma das vistas codificadas de câmera incluem pelo menos uma de in- formação de escalabilidade, informação de escalabilidade de vista, informação de dependência de vista, informação de região de interesse, uma taxa de bits, um tamanho de quadro, uma taxa de quadros, conjuntos de parâmetro iniciais, e parâmetros de câmera, especificações de decodi- ficador, informação de restrição de fluxo de bits, um identificador de vistas, e informação de or- dem de codificação, em que a informação de escalabilidade inclui pelo menos uma de informa- ção de escalabilidade temporal, informação de escalabilidade espacial, e informação de escala- bilidade de relação de sinal/ruído, as especificações de decodificador são indicadas por pelo menos uma de informação de perfil e de nível e informação de limitação de perfil e de nível (700).

36. Método, de acordo com a reivindicação 33, CARACTERIZADO pelo fato de que a informação de vista não-codificada de câmera inclui pelo menos uma de um número de vistas não-codificadas de câmera e características de cada uma das vistas não-codificadas de câmera, o número de vistas codificadas de câmera sendo qualquer de um ou mais de um número total de vistas codificadas de câmera correspondendo ao conteúdo de vídeo de multivistas (904).

37. Método, de acordo com a reivindicação 36, CARACTERIZADO pelo fato de que as características de cada uma das vistas não-codificadas inclui ao menos um de um identificador de vista, informação de interpolação de vista, e parâmetros de câmera (908, 910, 912, 916, -922).

38. Método, de acordo com a reivindicação 33, CARACTERIZADO pelo fato de que a informação de ponto de vista livre inclui ao menos um de parâmetros e métodos para gerar pelo menos uma vista em um determinado ponto de vista e um ângulo de visualização (814, 816).

39. Método, de acordo com a reivindicação 38, CARACTERIZADO pelo fato de que os parâmetros para gerar a pelo menos uma vista incluem pelo menos um de configurações de sistema de câmera, uma definição de um espaço de navegação, e um conjunto de vistas codifi- cadas de câmera para renderizar uma posição especificada no espaço de navegação (1000).

40. Método, de acordo com a reivindicação 31, CARACTERIZADO pelo fato de que o ao menos um elemento de sintaxe de alto nível é recebido em pelo menos uma de em banda e fora de banda com relação ao fluxo de bits (704).

41. Estrutura de sinal de vídeo para codificação de vídeo, CARACTERIZADA por com- preender: conteúdo de vídeo de multivistas codificado em um fluxo de bits resultante, em que a informação de codificação de multivistas para o conteúdo de multivistas é codificada em ao me- nos um elemento de sintaxe de alto nível.

42. Meios de armazenamento tendo dados de sinal de vídeo codificados nos mesmos, CARACTERIZADOS por compreender: conteúdo de vídeo de multivistas codificado em um fluxo de bits resultante, em que a informação de codificação de multivistas para o conteúdo de multivistas é codificado em pelo menos um elemento de sintaxe de alto nível.