BRPI0706438A2 - método e aparelho para codificação de vìdeo multivisualização - Google Patents

método e aparelho para codificação de vìdeo multivisualização Download PDF

Info

Publication number
BRPI0706438A2
BRPI0706438A2 BRPI0706438-1A BRPI0706438A BRPI0706438A2 BR PI0706438 A2 BRPI0706438 A2 BR PI0706438A2 BR PI0706438 A BRPI0706438 A BR PI0706438A BR PI0706438 A2 BRPI0706438 A2 BR PI0706438A2
Authority
BR
Brazil
Prior art keywords
image
video
different
cross
view
Prior art date
Application number
BRPI0706438-1A
Other languages
English (en)
Inventor
Yeping Su
Peng Yin
Cristina Gomila
Original Assignee
Thomson Licensinc S A
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensinc S A filed Critical Thomson Licensinc S A
Priority to BR122016024819-4A priority Critical patent/BR122016024819B1/pt
Publication of BRPI0706438A2 publication Critical patent/BRPI0706438A2/pt
Publication of BRPI0706438B1 publication Critical patent/BRPI0706438B1/pt

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

MéTODOS E APARELHO PARA CODIFICAçAO DE VIDEO MULTIVISUALIZAçAO São fornecidos métodos e aparelho para codificação de vídeo multivisualização. Um codificador de video inclui um codificador (100) para codificar um bloco em uma imagem pela escolha entre prognóstico temporal e prognóstico de visualização cruzada para habilitar um prognóstico para o bloco. A imagem é uma de um conjunto de imagens correspondente ao conteúdo de vídeo multivisualização e com diferentes pontos de visualização em relação a uma mesma cena ou a uma cena similar. A imagem representa um dos diferentes pontos de visualização. Uma sintaxe de alto nível é usada para indicar o uso do prognóstico de visualização cruzada para o bloco.

Description

"MÉTODOS E APARELHO PARA CODIFICAÇÃO DE VÍDEO MULTIVIS UALIZAÇÃO"
REFERÊNCIA CRUZADA A PEDIDOS RELACIONADOS
Este pedido reivindica o beneficio do pedido pro-visório US 60/757.289, intitulado "Multi-View Video CodingSystem", depositado em 9 de janeiro de 2006, que é aqui in-corporado pela referência. Além do mais, este pedido estárelacionado ao pedido não provisório, Documento JudicialPU060004, intitulado "Methods and Apparatus for Multi-ViewVideo Coding", do mesmo requerente, incorporado pela refe-rência em sua integra e depositado simultaneamente.
CAMPO DA INVENÇÃO
A presente invenção diz respeito, no geral, a co-dificadores e decodificadores de video e, mais particular-mente, a métodos e aparelho para Codificação de Video Multi-visualização.
ANTECEDENTES DA INVENÇÃO
Codificação de video multivisualização (MVC) é aestrutura de compressão para a codificação das seqüênciasmultivisualização. Uma seqüência de Codificação de VideoMultivisualização (MVC) é um conjunto de duas ou mais se-qüências de video que captura a mesma cena de um diferenteponto de visualização.
Reconhece-se amplamente que a Codificação de VideoMultivisualização é uma tecnologia chave que serve a uma am-pla variedade de aplicações, incluindo aplicações com pontode visualização livre e aplicações de video em 3D, entrete-nimento doméstico e vigilância. Nestas aplicações multivisu-alização, a quantidade de dados de video envolvida é enorme.Assim, existe uma necessidade de tecnologias de compressãoeficientes para melhorar a eficiência de codificação das a-tuais soluções de codificação de video que realizam a difu-são simultânea de visualizações independentes.
Nos últimos anos, foram feitos muitos esforços noprojeto de métodos eficientes para a compressão de video es-tereoscópico. Métodos de compressão monoscópica convencio-nais podem ser aplicados independentemente às visualizaçõesesquerda e direita de um par de imagem estéreo. Entretanto,maiores taxas de compressão podem ser alcançadas se a altacorrelação entre as visualizações for explorada.
Considerando uma abordagem da tecnologia anteriorna qual ambas as visualizações de um par de imagem estereos-cópica são codificadas, um Perfil Multivisualização (MVP)foi definido no padrão Grupo de Especialistas em Imagens emMovimento-2 (MPEG-2) da Organização Internacional para Pa-dronização / Comissão Eletrotécnica Internacional (ISO/IEC)para transmitir um par de sinais de video. 0 MVP se baseiaem uma abordagem de representação de sinal multicamadas demaneira tal que uma visualização (freqüentemente, a visuali-zação esquerda) é atribuída a uma camada base, e a outra vi-sualização é atribuída a uma camada de melhoria. A codifica-ção monoscópica com as mesmas ferramentas do Perfil Princi-pai (MP) é aplicada na camada base. A camada de melhoria écodificada usando ferramentas de escalabilidade temporal eum prognóstico híbrido do movimento e dos campos de disparidade.Em métodos da tecnologia anterior relacionados aopadrão de Codificação Avançada de Video (AVC) parte 10 doGrupo de Especialistas de Imagens em Movimento-4 (MPEG-4) daOrganização Internacional para a Padronização / Comissão E-letrotécnica Internacional (ISO/IEC) / recomendação H.264 doSetor-de Telecomunicações da União Internacional de Teleco-municações (ITU-T) (doravante o "padrão MPEG-4 AVC"), a co-dificação estereoscópica de vídeo pode ser realizada de duasmaneiras diferentes: (i) como um caso em particular de codi-ficação de imagem entrelaçada, em que todos os campos de umaparidade em particular são atribuídos à visualização esquer-da e todos os campos da paridade oposta são considerados avisualização direita do conteúdo de visualização estéreo;ou, alternativamente, (ii) pela alternação de quadros dasvisualizações esquerda e direita para criar uma única se-qüência monoscópica de vídeo. Uma mensagem de informação demelhoria complementar (SEI) de estereovisão fornece uma in-dicação ao decodificador se a seqüência de vídeo codificadarepresenta conteúdo estereoscópico ou não e qual método foiusado para codificar o conteúdo correspondente.
Estes métodos previamente conhecidos exigem míni-mas modificações das técnicas de codificação monoscópica e-xistentes. Entretanto, eles mostram uma capacidade limitadade reduzir a redundância existente entre as duas visualiza-ções em um par estereoscópico. Em decorrência disto, a codi-ficação da visualização estéreo resulta em um grande sobre-processamento, se comparado com a codificação de uma únicavisualização monoscópica. Além do mais, não há suporte ante-rior para a codificação de mais do que duas visualizações decâmera.
SUMÁRIO DA INVENÇÃO
Estes e outros inconvenientes e desvantagens datecnologia anterior são abordados pela presente invenção,que é direcionada a métodos e aparelho para Codificação deVideo Multivisualização.
De acordo com um aspecto da presente invenção, éfornecido um codificador de video. O codificador de videoinclui um codificador para codificar um bloco em uma imagemusando pelo menos uma das duas listas de imagem de referên-cia. A imagem é uma de um conjunto de imagens correspondenteao conteúdo de video multivisualização e com diferentes pon-tos de visualização em relação a uma mesma cena ou a uma ce-na similar. A imagem representa um ponto de visualização a-tual de um dos diferentes pontos de visualização. As duaslistas de imagem de referência de visualização cruzada cor-respondem a imagens de referência com uns dos diferentespontos de visualização diferentes do ponto de visualizaçãoatual.
De acordo com um outro aspecto da presente inven-ção, é fornecido um codificador de video. 0 codificador devideo inclui pelo menos um armazenamento temporário para ar-mazenar imagens decodificadas correspondentes ao conteúdomultivisualização para diferentes pontos de visualização deuma mesma cena ou de uma cena similar.
De acordo com um ainda outro aspecto da presenteinvenção, é fornecido um método de codificação de video. Ométodo inclui codificar um bloco em uma imagem usando pelomenos uma das duas listas de imagem de referência de visua-lização cruzada. A imagem é uma de um conjunto de imagenscorrespondente ao conteúdo de video multivisualização e comdiferentes pontos de visualização em relação a uma mesma ce-na ou a uma cena similar. A imagem representa um ponto devisualização atual dos diferentes pontos de visualização. Asduas listas de imagem de referência de visualização cruzadacorrespondem a imagens de referência com uns dos diferentespontos de visualização diferentes do ponto de visualizaçãoatual.
De acordo com um ainda outro aspecto da presenteinvenção, é fornecido um método para codificação de video. 0método inclui armazenar, em pelo menos um armazenamento tem-porário, imagens decodificadas correspondentes ao conteúdomultivisualização para diferentes pontos de visualização deuma mesma cena ou de uma cena similar.
De acordo com um aspecto adicional da presente in-venção, é fornecido um decodificador de video. 0 decodifica-dor de video inclui um. decodificador para decodificar umbloco em uma imagem usando pelo menos uma das duas listas deimagem de referência de visualização cruzada. A imagem é umade um conjunto de imagens correspondente ao conteúdo de vi-deo multivisualização e com diferentes pontos de visualiza-ção em relação em relação a uma mesma cena ou a uma cena si-milar. A imagem representa um ponto de visualização atualdos diferentes pontos de visualização. As duas listas de i-magem de referência de visualização cruzada correspondem àsimagens de referência com uns dos diferentes pontos de visu-alização diferentes do ponto de visualização atual.
De acordo com um aspecto ainda adicional da pre-sente invenção, é fornecido um decodificador de video. 0 de-codificador de video inclui pelo menos um armazenamento tem-porário para armazenar imagens decodificadas correspondentesao conteúdo multivisualização para diferentes pontos de vi-sualização de uma mesma cena ou de uma cena similar.
De acordo com um aspecto adicional da presente in-venção, é fornecido um método para decodificação de video. Ométodo inclui decodificar um bloco em uma imagem usando pelomenos uma das listas de imagem de referência de visualizaçãocruzada. A imagem é uma de um conjunto de imagens correspon-dente ao conteúdo de video multivisualização e com diferen-tes pontos de visualização em relação a uma mesma cena ou auma cena similar. A imagem representa um ponto de visualiza-ção atual dos diferentes pontos de visualização. As duaslistas de imagem de referência de visualização cruzada cor-respondem às imagens de referência com uns dos diferentespontos de visualização diferentes do ponto de visualizaçãoatual.
De acordo com um aspecto ainda adicional da pre-sente invenção, é fornecido um método para decodificação devideo. O método inclui armazenar, em pelo menos um armazena-mento temporário, imagens decodificadas correspondentes aoconteúdo multivisualização para diferentes pontos de visua-lização de uma mesma cena ou de uma cena similar.
Estes e outros aspectos, recursos e vantagens dapresente invenção ficaram aparentes a partir da seguintedescrição detalhada das modalidades exemplares, que deve serlida em conjunto com os desenhos anexos.
DESCRIÇÃO RESUMIDA DOS DESENHOS
A presente invenção pode ser mais bem entendida deacordo com as seguintes figuras exemplares, nas quais:
a figura 1 é um diagrama de blocos para um codifi-cador de Codificação de Video Multivisualização (MVC) noqual os presentes princípios podem ser aplicados, de acordocom uma modalidade dos presentes princípios;
a figura 2 é um diagrama de blocos para um decodi-ficador de Codificação de Vídeo Multivisualização (MVC) noqual os presentes princípios podem ser aplicados, de acordocom uma modalidade dos presentes princípios;
a figura 3 é um fluxograma para um método exemplarpara a construção da lista de referência para conteúdo devídeo multivisualização, de acordo com uma modalidade dospresentes princípios;
a figura 4 é um fluxograma para um método exemplarpara realizar uma deci-são de modo de visualização temporal /cruzada, de acordo com uma modalidade dos presentes princí-pios;
a figura 5 é um fluxograma para um método exemplarpara processar vetores de movimento e de disparidade para amesma fatia correspondente ao conteúdo de vídeo multivisua-lização, de acordo com uma modalidade dos presentes princí-pios; e
a figura 6 é um fluxograma para um outro métodopara processar vetores de movimento e de disparidade paraconteúdo de video multivisualização, de acordo com uma moda-lidade dos presentes princípios.
DESCRIÇÃO DETALHADA
A presente invenção é direcionada a métodos e apa-relho para Codificação de Vídeo Multivisualização.
A presente descrição ilustra os princípios da pre-sente invenção. Assim, percebe-se que versados na técnicapodem conceber vários arranjos que, embora não explicitamen-te descritos ou mostrados aqui, incorporam os princípios dainvenção e estão incluídos no seu espírito e escopo.
Pretende-se que todos os exemplos e linguagem con-dicional aqui citados tenham propósitos pedagógicos para au-xiliar o leitor no entendimento dos princípios da invenção edos conceitos contribuídos pelo inventor para desenvolver atecnologia, e devem ser interpretados sem limitação a taisexemplos e condições especificamente citados.
Além do mais, pretende-se que todas as declaraçõesque aqui citam princípios, aspectos e modalidades da inven-çao, bem como seus exemplos específicos, abranjam tanto seusequivalentes estruturais quanto funcionais. Adicionalmente,pretende-se que tais equivalentes incluam tanto equivalentesatualmente conhecidos quanto equivalentes desenvolvidos nofuturo, isto é, qualquer elemento desenvolvido que realize amesma função, independente da estrutura.
Assim, por exemplo, versados na técnica percebemque os diagramas de blocos aqui apresentados representam vi-sualizações conceituais do sistema de circuitos ilustrativoque incorpora os princípios da invenção. Similarmente, per-cebe-se que todos os fluxogramas, diagramas de fluxo, dia-gramas de transição de estado, pseudocódigos e congêneresrepresentam vários processos que podem ser substancialmenterepresentados em mídia legível por computador e, portanto,executados por um computador ou processador, caso tal compu-tador ou processador sejam explicitamente mostrados ou não.
As funções dos vários elementos mostrados nas fi-guras podem ser fornecidas por meio do uso de hardware dedi-cado, bem como de hardware que pode executar software emconjunto com software apropriado. Quando fornecidas por umprocessador, as funções podem ser fornecidas por um únicoprocessador dedicado, por um único processador compartilhadoou por uma pluralidade de processadores individuais, algunsdos quais podem ser compartilhados. Além do mais, o uso ex-plícito do termo "processador" ou "controlador" não deve serinterpretado dizendo respeito exclusivamente a hardware quepode executar software, e pode incluir implicitamente, massem limitações, hardware processador de sinal digital("DSP"), memória exclusiva de leitura ("ROM") para armazenarsoftware, memória de acesso aleatório ("RAM") e armazenamen-to não volátil.
Outro hardware, convencional e/ou personalizado,também pode ser incluído. Similarmente, todas as chaves mos-tradas nas figuras são somente conceituais. Sua função podeser realizada por meio da operação de lógica de programa,por meio de lógica dedicada, por meio da interação do con-trole do programa e da lógica dedicada, ou mesmo manualmen-te, a técnica em particular sendo selecionada pelo implemen-tador, como é mais especificamente entendido a partir docontexto.
Nas reivindicações anexas, pretende-se que todosos elementos expressos como um dispositivo para realizar umafunção especifica abranjam qualquer maneira de realizar a-quela função, incluindo, por exemplo, a) uma combinação deelementos de circuito que realiza aquela função ou b) soft-ware em qualquer forma, incluindo, portanto, software embar-cado, microcódigo ou congêneres, combinados com sistema decircuitos apropriado para executar aquele software para rea-lizar a função. A invenção definida por tais reivindicaçõesfica residente no fato de que as funcionalidades fornecidaspelos vários dispositivos citados são combinadas e articula-das da maneira que as reivindicações exigem. Assim, conside-ra-se que todos os dispositivos que podem fornecer aquelasfuncionalidades são equivalentes àqueles aqui mostrados.
Nesta especificação, a referência a "uma modalida-de" ou "a modalidade" dos presentes princípios significa queum recurso, estrutura, característica e assim por diante emparticular descrito em conjunto com a modalidade está inclu-ído em pelo menos uma modalidade dos presentes princípios.Assim, nem todas as aparências da frase "em uma modalidade"ou "na modalidade" que aparecem em vários locais por toda aespecificação, se referem, necessariamente à mesma modalidade.
Voltando para a figura 1, um codificador de Codi-ficação de Vídeo Multivisualização (MVC) exemplar é indica-do, no geral, pelo número de referência 100. O codificador100 inclui um combinador 105 com uma saida conectada em co-municação de sinal com uma entrada de um transformador 110.
Uma saida do transformador 110 é conectada em comunicação desinal com uma entrada do quantizador 115. Uma saida do quan-tizador 115 é conectada em comunicação de sinal com uma en-trada de um codificador de entropia 120 e com uma entrada deum quantizador invertido 125. Uma saida do quantizador in-vertido 125 é conectada em comunicação de sinal com uma en-trada de um transformador invertido 130. Uma saida do trans-formador invertido 130 é conectada em comunicação de sinalcom uma primeira entrada não invertida de um combinador 135.
Uma saida do combinador 135 é conectada em comunicação desinal com uma entrada de um intrapreditor 145 e com uma en-trada de um filtro de desagrupamento 150. Uma saida do fil-tro de desagrupamento 150 é conectada em comunicação de si-nal com uma entrada de um armazenamento da imagem de refe-rência 155 (para a visualização i). Uma saida do armazena-mento da imagem de referência 155 é conectada em comunicaçãode sinal com uma primeira entrada de um compensador de movi-mento 175 e com uma primeira entrada de um estimador de mo-vimento 180. Uma saida do estimador de movimento 180 é co-nectada em comunicação de sinal com uma segunda entrada docompensador de movimento 175.
Uma saida de um armazenamento da imagem de refe-rência 160 (para outras visualizações) é conectada em comu-nicação de sinal com uma primeira entrada de um estimador dedisparidade / iluminação 17 0 e com uma primeira entrada deum compensador de disparidade / iluminação 165. Uma saida doestimador de disparidade / iluminação 170 é conectada em co-municação de sinal com uma segunda entrada do compensador dedisparidade / iluminação 165.
Uma saida do decodificador de entropia 120 ficadisponível como uma saída do codificador 100. Uma entradanão invertida do combinador 105 fica disponível como uma en-trada do codificador 100 e é conectada em comunicação de si-nal com uma segunda entrada do estimador de disparidade /iluminação 170 e com uma segunda entrada do estimador de mo-vimento 180. Uma saída de uma chave 185 é conectada em comu-nicação de sinal com uma segunda entrada não invertida docombinador 135 e com uma entrada invertida do combinador105. A chave 185 inclui uma primeira entrada conectada emcomunicação de sinal com uma saída do compensador de movi-mento 175, uma segunda entrada conectada em comunicação desinal com uma saída do compensador de disparidade / ilumina-ção 165, e uma terceira entrada conectada em comunicação desinal com uma saída do intrapreditor 145.
Um módulo de decisão de modo 140 tem uma saída co-nectada na chave 185 para controlar qual entrada é selecio-nada pela chave 185.
Voltando para a figura 2, um decodif icador de Co-dificação de Vídeo Multivisualização é indicado, no geral,pelo número de referência 200. O decodificador 200 inclui umdecodificador de entropia 205 com uma saída conectada em co-municação de sinal com uma entrada de um quantizador inver-tido 210. Uma saída do quantizador invertido é conectada emcomunicação de sinal com uma entrada de um transformador in-vertido 215. Uma saida do transformador invertido 215 é co-nectada em comunicação de sinal com uma primeira entrada nãoinvertida de um combinador 220. Uma saida do combinador 220é conectada em comunicação de sinal com uma entrada de umfiltro de desagrupamento 225 e com uma entrada de um intra-preditor 230. Uma saida do filtro de desagrupamento 225 éconectada em comunicação de sinal com uma entrada de um ar-mazenamento da imagem de referência 240 (para visualizaçãoi). Uma saida do armazenamento da imagem de referência 240 éconectada em comunicação de sinal com uma primeira entradade um compensador de movimento 235.
Uma saida do armazenamento da imagem de referência245 (para outras visualizações) é conectada em comunicaçãode sinal com uma primeira entrada de um compensador de dis-paridade / iluminação 250.
Uma entrada de um codificador de entropia 205 ficadisponível como uma entrada para o decodif icador 200 parareceber o fluxo contínuo de bits residual. Além do mais, umaentrada de um módulo de modo 2 60 também fica disponível comouma entrada para o decodificador 200 para receber a sintaxede controle para controlar qual entrada é selecionada pelachave 255. Adicionalmente, uma segunda entrada do compensa-dor de movimento 235 fica disponível como uma entrada do de-codificador 200 para receber os vetores de movimento. Tam-bém, uma segunda entrada do compensador de disparidade / i-luminação 250 fica disponível como uma entrada para o deco-dificador 200 para receber vetores de disparidade e sintaxede compensação de iluminação.
Uma saída de uma chave 255 é conectada em comuni-cação de sinal com uma segunda entrada não invertida do com-binador 220. Uma primeira entrada da chave 255 é conectadaem comunicação de sinal com uma saída do compensador de dis-paridade / iluminação 250. Uma segunda entrada da chave 255é conectada em comunicação de sinal com uma saída do compen-sador de movimento 235. Uma terceira entrada da chave 255 éconectada em comunicação de sinal com uma saída do intrapre-ditor 230. Uma saída do módulo de modo 260 é conectada emcomunicação de sinal com a chave 255 para controlar qual en-trada é selecionada pela chave 255. Uma saída do filtro dedesagrupamento 225 fica disponível como uma saída do decodi-ficador.
A codificação de vídeo multivisualização (MVC) é aestrutura de compressão para a codificação das seqüênciasmultivisualização. Uma seqüência de Codificação de VídeoMultivisualização (MVC) é um conjunto de duas ou mais se-qüências de vídeo que captura a mesma cena a partir de umponto de visualização diferente.
Já que uma fonte de vídeo multivisualização incluimúltiplas visualizações da mesma cena, existe um alto graude correlação entre as imagens de múltiplas visualizações.
Portanto, a redundância de visualização pode ser exploradaalém da redundância temporal, e é alcançada pela realizaçãodo prognóstico de visualização através das diferentes visua-lizações. Dessa maneira, modalidades dos presentes princí-pios aqui descritos podem envolver prognóstico tanto tempo-ral quanto de visualização cruzada.
Com propósitos ilustrativos, modalidades dos pre-sentes princípios são aqui descritas em relação ao padrãoMPEG-4 AVC. Entretanto, percebe-se que a presente invençãonão é limitada ao padrão MPEG-4 AVC e, dados os preceitosdos presentes princípios aqui fornecidos, versados na técni-ca percebem que este e outros padrões de codificação de ví-deo podem fazer a Codificação de Vídeo Multivisualização àqual os presentes princípios podem ser aplicados, mantendo oescopo dos presentes princípios. Modalidades dos presentesprincípios aqui descritos que dizem respeito ao padrão MPEG-4 AVC podem envolver, por exemplo, mudanças no filtro de de-sagrupamento e/ou na codificação de entropia das sintaxes.
Em uma modalidade, no nível da fatia, as listas doprognóstico de visualização cruzada são introduzidas parahabilitar prognóstico de disparidade, e uma sintaxe tipo co-dificação de visualização cruzada é adicionada para indicaro tipo de codificação do prognóstico de disparidade. No ní-vel do macrobloco (MB), uma sintaxe de indicador é introdu-zida para indicar se a compensação de movimento ou a compen-sação de disparidade é usada para cada bloco de sinal. Alémdo mais, outras mudanças que podem ser utilizadas em modali-dades direcionadas para o padrão MPEG-4 AVC incluem, por e-xemplo, um filtro de desagrupamento, contextos de Codifica-ção Aritmética Binária Adaptativa ao Contexto (CABAC) paraas novas sintaxes, e sintaxes adicionais no nível do conjun-to de parâmetro e no nível do cabeçalho da fatia.
Agora, uma descrição será dada considerando listasdo tipo codificação de visualização cruzada e listas de re-ferência de visualização cruzada de acordo com uma modalida-de dos presentes princípios.
O padrão MPEG-4 AVC realiza o prognóstico inter-quadros pela formação de duas listas de prognóstico, ListO eListl. Portanto, um bloco de imagem no quadro atual pode sercompensado tanto pelo uso de somente uma imagem de referên-cia na ListO quanto pelo uso de duas imagens de referência,uma de cada lista. No cabeçalho da fatia, uma sintaxe sli-ce_type é assinalada para indicar o tipo de codificação tem-poral para cada fatia. Quando slice_type = P_SLICE, somenteListO será usada na compensação de movimento. Quando sli-ce_type = B_SLICE, possivelmente, tanto a ListO quanto aListl podem ser usadas na compensação de movimento.
Para habilitar o prognóstico de visualização cru-zada entre as diferentes visualizações, uma modalidade dospresentes princípios envolve o uso de duas novas listas deprognóstico: ViewListO e ViewListl. Imagens na ViewListO /ViewListl são imagens de referência das visualizações da câ-mera diferentes da visualização atual. Uma nova sintaxe vi-ew_slice_type no cabeçalho da fatia é usada para indicar otipo de codificação para o prognóstico de visualização cru-zada. Por exemplo, se uma fatia específica tiver slice_type= B_SLICE e view_slice_type = P_SLICE, então, um macrobloco(MB) naquela fatia pode ser tanto temporalmente codificadocomo um tipo de codificação B_SLICE quanto codificado em vi-sualização cruzada como um tipo de codificação P_SLICE.
Uma maneira alternativa de habilitar os prognósti-cos de visualização cruzada na estrutura do padrão MPEG-4AVC envolve inserir imagens de referência de outras visuali-zações nas listas ListO / Listl sem introduzir novas listasde prognóstico de visualização e tipo de codificação de vi-sualização cruzada. Entretanto, as vantagens da primeira a-bordagem são como segue. Uma vantagem da primeira abordagemé que, já que as imagens de referência em ViewListO / Vie-wListl somente incluem referências de visualização cruzada,sinalizar o ref_Idx gastará menos bits do que ter tanto asreferências de mesma visualização quanto as referências devisualização cruzada na mesma lista. Uma outra vantagem daprimeira abordagem é que ter duas novas listas ViewListO /ViewListl fornece uma maneira separada de tratar os prognós-ticos temporal e de visualização cruzada. Isto diz respeitoao caso em que as ListO / Listl incluem tanto referênciastemporais quanto referências de visualização cruzada, paraque o padrão MPEG-4 AVC que reordena o processo para a re-construção das listas da imagem de referência tenha que sermodificado, e, necessariamente, será mais complexo.
Em uma modalidade, as listas de referência de vi-sualização cruzada para cada fatia podem ser formadas de a-cordo com as seguintes regras. Em relação à primeira regra,no cabeçalho da fatia, o número de imagens de referência devisualização cruzada e de seus view_id's é assinalado tantopara ViewListO quanto para ViewListl. Os view_id's são dis-tintivos em cada uma das duas listas de prognóstico de visu-alização cruzada. Em relação à segunda regra, as imagens dereferência na lista de prognóstico de visualização cruzadasão ordenadas na mesma seqüência que elas aparecem no cabe-çalho da fatia. Para cada visualização referida, a imagem dereferência com o número de Contagem de Ordem de Imagem (POC)mais próximo (em relação ao POC da fatia atual) é usada nalista de prognóstico de visualização cruzada da fatia atual.
Sintaxes de reordenamento de referência adicionaispodem ser incluídas para permitir tratamento mais flexíveldas imagens de referência de visualização cruzada.
Voltando para a figura 3, um método exemplar paraa construção da lista de referência para o conteúdo de vídeomultivisualização é indicado, no geral, pelo número de refe-rência 300. O método 300 inclui um bloco de início 305 quepassa o controle para um bloco de decisão 310. 0 bloco dedecisão 310 determina se um tipo de fatia atual é fatia P oufatia B ou não. Então, se for o caso, o controle é passadopara um bloco de função 315. Caso contrário, o controle épassado para um bloco de decisão 330.
O bloco de função 315 constrói a ListO usando re-ferências temporais, e passa o controle para um bloco de de-cisão 320. O bloco de decisão 320 determina se o tipo de fa-tia atual é fatia B ou não. Então, se for o caso, o controleé passado para o bloco de função 325. Caso contrário, o con-trole é passado para o bloco de decisão 330.
O bloco de função 325 constrói a Listl usando re-ferências temporais e passa o controle para o bloco de deci-são 330.
O bloco de decisão 330 determina se o tipo de fa-tia de visualização atual é fatia P ou fatia B ou não. En-tão, se for o caso, o controle é passado para um bloco defunção 335. Caso contrário, o controle é passado para umbloco de limite de laço 350.
0 bloco de função 335 constrói a ViewListO usandoreferências de visualização cruzada e passa o controle paraum bloco de decisão 340. O bloco de decisão 340 determina seo tipo de fatia de visualização atual é fatia B ou não. En-tão, se for o caso, o controle é passado para um bloco defunção 345. Caso contrário, o controle é passado para o blo-co de limite de laço 350.
O bloco de função 345 constrói ViewListO usandoreferências de visualização cruzada e passa o controle parao bloco de limite de laço 350.
O bloco de limite de laço 350 começa um laço emcada macrobloco incluindo o ajuste de uma faixa para o laçousando uma variável mb = 0 até MacroBlocksinPic-I e passa ocontrole para um bloco de função 355. 0 bloco de função 355codifica um macrobloco atual usando ListO / Listl e passa ocontrole para um bloco de decisão 360. 0 bloco de decisão360 determina se o tipo de fatia de visualização atual é i-gual à fatia P ou fatia B ou não. Se for o caso, o controleé passado para um bloco de função 365. Caso contrário, ocontrole é passado para um bloco de função 370.
0 bloco de função 365 codifica o macrobloco atualusando ViewListO / ViewListl e passa o controle para o blocode função 370.
O bloco de função 370 seleciona o melhor modo, a-justa o mvc_prediction_fIag e passa o controle para um blocode função 375. O bloco de função 375 realiza processamentode armazenamento temporário do vetor de movimento / dispari-dade e passa o controle para um bloco de limite de laço 380.O bloco de limite de laço termina o laço e passa o controlepara um bloco de função 385. O bloco de função 385 salva aimagem codificada em armazenamento temporário de imagens de-codificadas (dqb) e passa o controle para um bloco de fim390.
Já que o prognóstico de visualização cruzada decada fatia é completamente configurável usando listas do ti-po de codificação de visualização cruzada e do prognósticode visualização, o codec de Codificação de Video Multivisua-lização (MVC) pode suportar ordem de codificação de visuali-zação e escalabilidade de visualização arbitrárias.
Em uma modalidade, no nivel MB, uma nova sintaxechamada mvc_pred_fIag indica se prognóstico temporal ouprognóstico de visualização cruzada é usado para codificarcada bloco de sinal. No caso de mvc_pred_fIag = 0, ListO /Listl será utilizada para a compensação de movimento depen-dendo do slice_type. Quando mvc_pred_fIag = 1, então, Vie-wListO / ViewListl serão utilizadas dependendo do vi-ew_slice_type.
Voltando para a figura 4, um método exemplar pararealizar uma decisão de modo temporal / visualização cruzadaé indicado, no geral, pelo número de referência 400. 0 méto-do 400 inclui um bloco de inicio 405 que passa o controlepara um bloco de decisão 410. 0 bloco de decisão 410 deter-mina se o tipo de fatia atual é fatia P ou fatia B ou não.Então, se for o caso, o controle é passado para um bloco defunção 415. Caso contrário, o controle é passado para umbloco de decisão 430.
O bloco de função 415 constrói ListO usando refe-rências temporais e passa o controle para um bloco de deci-são 420. O bloco de decisão 420 determina se o tipo de fatiaatual é fatia B ou não. Se for o caso, o controle é passadopara um bloco de função 425. Caso contrário, o controle épassado para o bloco de decisão 430.
O bloco de função 425 constrói a Listl usando re-ferências temporais e passa o controle para o bloco de deci-são 430.
O bloco de decisão 430 determina se o tipo de fa-tia de visualização atual é fatia P ou fatia B ou não. En-tão, se for o caso, o controle é passado para um bloco defunção 435. Caso contrário, o controle é passado para umbloco de limite de laço 450.
O bloco de função 435 constrói ViewListO usandoreferências de visualização cruzada e passa o controle paraum bloco de decisão 440. 0 bloco de decisão 440 determina seo tipo de fatia de visualização atual é fatia B ou não. En-tão, se for o caso, o controle é passado para um bloco defunção 445. Caso contrário, o controle é passado para o blo-co de limite de laço 450.
O bloco de função 445 constrói a ViewListO usandoreferências de visualização cruzada e passa o controle parao bloco de limite de laço 450.
O bloco de limite de laço 450 começa um laço emcada macrobloco incluindo o ajuste de uma faixa do laço u-sando uma variável mb = 0 até MacroBlocksinPic-I e passa ocontrole para um bloco de decisão 455. O bloco de decisão455 determina se mvc_prediction_fIag é igual a 1 ou não. En-tão, se for o caso, o controle é passado para um bloco defunção 460. Caso contrário, o controle é passado para umbloco de função 4 65.
0 bloco de função 4 60 decodifica um macrobloco u-sando ViewListO / ViewListl e passa o controle para um blocode função 470.
0 bloco de função 4 65 decodifica o macrobloco u-sando ListO / Listl e passa o controle para um bloco de fun-ção 470.
0 bloco de função 470 realiza o processamento doarmazenamento temporário do vetor de movimento / disparidadee passa o controle para um bloco de limite de laço 475. 0bloco de limite de laço 475 termina o laço e passa o contro-le para um bloco de função 480. 0 bloco de função 480 salvaa imagem decodificada em armazenamento temporário de imagensdecodifiçadas (dqb) e passa o controle para um bloco de fim485.
Três novos contextos CABAC são adicionados paracodificar a sintaxe mvc_pred_dir. A modelagem de contexto éa mesma da sintaxe transform_size_8x8_fIag.
Na extensão multivisualização do padrão MPEG-4AVC, o armazenamento temporário da imagem decodificada (dpb)precisa ser capaz de tratar as imagens decodificadas a par-tir de múltiplas visualizações. Considerando que há N visua-lizações de entrada, uma modalidade dos presentes princípiospode envolver N dpb's separados. Cada dpb armazena imagensdecodificadas de uma visualização específica.
Uma maneira alternativa de gerenciar dpb é colocartodas as imagens de visualização em um único dpb. Entretan-to, a primeira abordagem tem as seguintes vantagens. Umavantagem da primeira abordagem é que cada visualização temseu próprio dpb, com o mesmo processo de marcação de refe-rência decodificada que o padrão MPEG-4 AVC. Esta abordagemmais simples reduz as complicações de gerenciar diferentesimagens de visualização no mesmo dpb. Uma outra vantagem daprimeira abordagem diz respeito à indesejabilidade de redu-zir o número de quadros de referência temporal disponíveis,já que a correlação temporal é, no geral, mais forte do quea correlação de visualização cruzada. Com cada visualizaçãogerenciando suas próprias imagens de referência no seu dpb,o prognóstico temporal terá a mesma capacidade de prognósti-co de quadro de referência múltipla que na difusão simultânea.
Um traço característico da MVC, comparando com acodificação de vídeo convencional, é a coexistência tanto demovimento quanto de disparidade. Os blocos que são temporal-mente prognosticados precisarão assinalar vetores de movi-mento (MV) em relação a vetores de disparidade (DV) paraprognóstico de visualização cruzada.
Dois métodos exemplares são aqui descritos paralidar tanto com os vetores de movimento quanto com os veto-res de disparidade para a mesma fatia. Entretanto, percebe-se que dados os preceitos da presente invenção aqui forneci-dos, versados na técnica contemplam estes e outros métodospara a mesma, mantendo o escopo da presente invenção.
No primeiro método, para cada bloco, sinalizar earmazenar um vetor de movimento ou um vetor de disparidade,mas não ambos. Se um vetor de movimento ou um vetor de dis-paridade será assinalado e armazenado depende da sintaxemvc_pred_flag. Isto exigirá menos armazenamento de memória,mas o campo do vetor combinado não será consistente.
No segundo método, para cada bloco, armazenar tan-to um vetor de movimento quanto um vetor de disparidade. Is-to pode ser alcançado tanto pela sinalização de ambos os ve-tores quanto pela sinalização de somente um deles e pelo en-chimento do outro usando a interpolação do campo do vetor.Esta abordagem tomará mais armazenamento de memória, mas aconsistência de ambos os campos de movimento e de disparida-de pode ser mais bem preservada.
Uma modalidade exemplar do primeiro método é mos-trada e descrita em relação à figura 5. Uma modalidade exem-plar do segundo método é mostrada e descrita em relação àfigura 6.
Voltando para a figura 5, um método exemplar paraprocessar vetores de movimento e de disparidade para a mesmafatia correspondente ao conteúdo de video multivisualizaçãoé indicado, no geral, pelo número de referência 500. O méto-do 500 inclui um bloco de inicio 505 que passa o controlepara um bloco de decisão 510. O bloco de decisão 510 deter-mina se mvc_pred_flag é igual a 0 ou não. Então, se for ocaso, o controle é passado para um bloco de função 515. Casocontrário, o controle é passado para um bloco de função 520.O bloco de função 515 forma o preditor do vetor de dispari-dade, processa o vetor de disparidade DV, armazena o vetorde disparidade DV em VectorBuffer e passa o controle para umbloco de fim 525.
0 bloco de função 520 forma o preditor do vetor demovimento, processa o vetor de movimento MV, armazena o ve-tor de movimento MV em VectorBuffer e passa o controle parao bloco de fim 525.
Voltando para a figura 6, um outro método paraprocessar vetores de movimento e de disparidade para conteú-do de video multivisualização é indicado, no geral, pelo nú-mero de referência 600. 0 método 600 inclui um bloco de iní-cio 605 que passa o controle para um bloco de função 610. 0bloco de função 610 forma o preditor do vetor de disparida-de, processa o vetor de disparidade DV, armazena o vetor dedisparidade DV em VectorBufferl e passa o controle para umbloco de função 615. 0 bloco de função 615 forma o preditordo vetor de movimento, processa o vetor de movimento MV, ar-mazena o vetor de movimento MV em VectorBuffer2 e passa ocontrole para um bloco de fim 620.
A implicação de ambos os vetores de movimento e dedisparidade na codificação da mesma fatia surge nos seguin-tes aspectos: (1) codificação preditiva dos vetores de movi-mento / disparidade; e (2) modos Direto e Ignorar.
No padrão MPEG-4 AVC, os componentes do vetor demovimento são diferencialmente codificados usando prognósti-co de mediana ou direcional a partir dos blocos vizinhos. NaCodificação de Video Multivisualização, os blocos vizinhospodem ter uma(s) direção(s) de prognóstico diferente(s) emrelação ao bloco atual. A fim de economizar bits na codifi-cação dos vetores de movimento / disparidade, é preferívelusar a informação mais correlacionada para formar um predi-tor. Dependendo se há tanto os vetores de movimento quantoos vetores de disparidade disponíveis para os blocos vizi-nhos, para o primeiro método, use somente aqueles blocos vi-zinhos que têm a mesma direção de prognóstico. Para o segun-do método, use somente os vetores de movimento dos blocosvizinhos na formação do preditor do vetor de movimento, euse somente os vetores de disparidade dos blocos vizinhos naformação do preditor de disparidade.
Aparte dos blocos espaciais vizinhos, blocos tem-poralmente co-localizados também podem ser usados para me-lhorar o prognóstico de disparidade em virtude de os camposde disparidade ser usualmente estacionários na dimensão tem-poral.
Os modos Direto e Ignorar no padrão MPEG-4 AVC sãoferramentas de codificação efetivas que exploram melhor acorrelação espaço-temporal que existe entre os macroblocosadjacentes, em virtude de eles poderem representar movimentosem ter que transmitir os vetores de movimento. Na Codifica-ção de Vídeo Multivisualização, aqueles modos devem ser a-daptados a fim de considerar a correlação de visualizaçãocruzada adicional.
Para modos P_Skip, o sinal reconstruído é obtidosimilar ao sinal de prognóstico de um macrobloco tipoP 16x16 que referencia a imagem que está localizada no índi-ce 0 de ListO. O vetor de movimento usado para reconstruir omacrobloco P_Skip é similar ao preditor do vetor de movimen-to para o bloco 16x16. Na MVC, a adaptação supradescrita dopreditor do vetor de movimento / disparidade ajudará a tor-nar o modo· P_Skip mais usado.
Para a codificação de B_SLICE, os modos B_Skip /B_Direct_16xl6 / B_Direct_8x8 devem ser adaptados para con-siderar a mistura de movimento e de disparidade. Há dois di-ferentes modos Direto suportados no padrão MPEG-4 AVC, a sa-ber, Direto temporal e Direto espacial.
Para o modo Direto temporal, os vetores de movi-mento são derivados da posição co-localizada na primeira re-ferência da Listl. Quando a primeira referência de Listl fordisparidade prognosticada, o sistema pode tanto procurar ve-tores de movimento na posição co-localizada em outras refe-rências da Listl (ref_idx > 0) quanto usar o preditor do ve-tor de movimento espacial.
Para o modo Direto espacial, os vetores de movi-mento são derivados de uma maneira similar à empregada peloP_SKIP, mas com ambas ListO / Listl consideradas. A mesmaadaptação feita em P_SKIP também pode ser estendida naListl.
As Tabelas 1-4 ilustram várias sintaxes para Codi-ficação de Vídeo Multivisualização incluindo aquelas de a-cordo com várias modalidades dos presentes princípios. A Ta-bela 1 ilustra a sintaxe RBSP ajustada do parâmetro seqüên-cia para Codificação de Video Multivisualização. A Tabela 2ilustra a sintaxe RBSP ajustada do parâmetro imagem para Co-dificação de Vídeo Multivisualização. A Tabela 3 ilustra asintaxe do cabeçalho de fatia para Codificação de Vídeo Mul-tivisualização. A Tabela 4 ilustra a sintaxe de camada demacrobloco para Codificação de Vídeo Multivisualização.
TABELA 1
<table>table see original document page 29</column></row><table> TABELA 2
<table>table see original document page 29</column></row><table><table>table see original document page 30</column></row><table>
TABELA 3
<table>table see original document page 30</column></row><table><table>table see original document page 31</column></row><table><table>table see original document page 32</column></row><table>
TABELA 4
<table>table see original document page 32</column></row><table>
Agora, será dada uma descrição de algumas das mui-tas vantagens / recursos presentes da presente invenção, al-gumas das quais fora mencionadas anteriormente. Por exemplo,uma vantagem / recurso é um codificador de video que incluium codificador para codificar um bloco em uma imagem usandopelo menos uma das duas listas de imagem de referência devisualização cruzada. A imagem é uma de um conjunto de ima-gens correspondente ao conteúdo de video multivisualização ecom diferentes pontos de visualização em relação a uma mesmacena ou a uma cena similar. A imagem representa um ponto devisualização atual dos diferentes pontos de visualização. Aslistas de imagem de referência de visualização cruzada cor-respondem às imagens de referência com uns dos diferentespontos de visualização diferentes do ponto de visualizaçãoatual.
Uma outra vantagem / recurso é o codificador devideo supradescrito em que as duas listas de imagem de refe-rência de visualização cruzada são diferentes da ListO eListl do padrão de Codificação Avançada de Video do Grupo deEspecialistas de Imagens em Movimento-4 Parte 10 da Organi-zação Internacional para Padronização / Comissão Eletrotéc-nica Internacional / ou da recomendação H.264 do Setor deTelecomunicações da União Internacional de Telecomunicações.
Uma ainda outra vantagem / recurso é um codifica-dor de video que inclui pelo menos um armazenamento temporá-rio para armazenar imagens decodificadas correspondentes aoconteúdo multivisualização para diferentes pontos de visua-lização de uma mesma cena ou de uma cena similar.
Além do mais, uma outra vantagem / recurso é o co-dificador de video supradescrito, em que o pelo menos um ar-mazenamento temporário inclui um armazenamento temporárioseparado para cada um dos diferentes pontos de visualização.
Estes e outros recursos e vantagens da presenteinvenção podem ser prontamente apurados pelos versados natécnica com base nos preceitos aqui descritos. Entende-seque os preceitos da presente invenção podem ser implementa-dos em várias formas de hardware, software, software embar-cado, processadores de uso pessoal ou combinações destes.
Mais preferivelmente, os preceitos da presente in-venção são implementados como uma combinação de hardware esoftware. Além do mais, o software pode ser implementado co-mo um programa de aplicação tangivelmente incorporado em umaunidade de armazenamento de programa. 0 programa de aplica-ção pode ser carregado em uma máquina que compreende qual-quer arquitetura e executado por ela. Preferivelmente, a má-quina é implementada em uma plataforma de computador comhardware tal como uma ou mais unidades centrais de processa-mento ("CPU"), uma memória de acesso aleatório ("RAM") e in-terfaces de entrada / saida ("1/0"). A plataforma de compu-tador também pode incluir um sistema operacional e código demicroinstrução. Os vários processos e funções aqui descritospodem ser tanto parte do código de microinstrução quantoparte do programa de aplicação, ou qualquer combinação des-tes, que podem ser executados por uma CPU. Além do mais, vá-rias outras unidades periféricas podem ser conectadas naplataforma do computador, tais como uma unidade de armazena-mento de dados adicional e uma unidade de impressão.
Entende-se adicionalmente que, em virtude de al-guns dos componentes e métodos do sistema constituinte re-presentados nos desenhos anexos ser preferivelmente imple-mentados em software, as conexões reais entre os componentesdo sistema ou os blocos de função do processo podem diferirdependendo da maneira na qual a presente invenção é progra-mada. Dados os preceitos aqui descritos, versados na técnicapodem contemplar estas e similares implementações e configu-rações da presente invenção.
Embora as modalidades ilustrativas tenham sido a-qui descritas em relação aos desenhos anexos, entende-se quea presente invenção não é limitada a estas precisas modali-dades, e que várias mudanças e modificações podem ser efetu-adas pelos versados na técnica sem fugir do escopo ou do es-pirito da presente invenção. Pretende-se que todas tais mu-danças e modificações sejam incluídas no escopo da presenteinvenção apresentado nas reivindicações anexas.

Claims (19)

1. Codificador de vídeo, CARACTERIZADO pelo fatode que compreende:um codificador (100) para codificar um bloco emuma imagem usando pelo menos uma das duas listas de imagemde referência de visualização cruzada, a imagem sendo uma deum conjunto de imagens correspondente ao conteúdo de vídeomultivisualização e com diferentes pontos de visualização emrelação a uma mesma cena ou a uma cena similar, a imagem re-presentando um dos diferentes pontos de visualização, as du-as listas de imagem de referência de visualização cruzadacorrespondendo às imagens de referência com uns dos diferen-tes pontos de visualização diferentes do ponto de visualiza-ção atual.
2. Codificador de vídeo, de acordo com a reivindi-cação 1, CARACTERIZADO pelo fato de que as duas listas daimagem de referência de visualização cruzada são diferentesda ListO e da Listl do padrão de Codificação Avançada de Ví-deo do Grupo de Especialistas de Imagens em Movimento-4 Par-te 10 da Organização Internacional para Padronização / Co-missão Eletrotécnica Internacional / ou da recomendaçãoH.264 do Setor de Telecomunicações da União Internacional deTelecomunicações.
3. Codificador de vídeo, CARACTERIZADO pelo fatode que compreende:pelo menos um armazenamento temporário (160) paraarmazenar imagens decodificadas correspondentes ao conteúdomultivisualização para diferentes pontos de visualização deuma mesma cena ou de uma cena similar.
4. Codificador de video, de acordo com a reivindi-cação 3, CARACTERIZADO pelo fato de que o dito pelo menos umarmazenamento temporário (160) compreende um armazenamentotemporário separado para cada um dos diferentes pontos devisualização.
5. Método para codificação de video, CARACTERIZADOpelo fato de que compreende:codificar um bloco em uma imagem usando pelo menosuma das duas listas de imagem de referência de visualizaçãocruzada, a imagem sendo uma de um conjunto de imagens cor-respondente ao conteúdo de video multivisualização e com di-ferentes pontos de visualização em relação a uma mesma cenaou a uma cena similar, a imagem representando um ponto devisualização atual dos diferentes pontos de visualização, asduas listas de imagem de referência de visualização cruzadacorrespondendo às imagens de referência com uns dos diferen-tes pontos de visualização diferentes do ponto de visualiza-ção atual (365).
6. Método, de acordo com a reivindicação 5,CARACTERIZADO pelo fato de que as duas listas de imagem dereferência de visualização cruzada são diferentes das ListOe Listl do padrão de Codificação Avançada de Video do Grupode Especialistas de Imagens em Movimento-4 Parte 10 da Orga-nização Internacional para Padronização / Comissão Eletro-técnica Internacional / ou da recomendação H.264 do Setor deTelecomunicações da União Internacional de Telecomunicações(335, 345).
7. Método para codificação de vídeo, CARACTERIZADOpelo fato de que compreende:armazenar, em pelo menos um armazenamento temporá-rio, imagens decodificadas correspondentes ao conteúdo mul-tivisualização para diferentes pontos de visualização de umamesma cena ou de uma cena similar (385).
8. Método, de acordo com a reivindicação 7,CARACTERIZADO pelo fato de que a dita etapa de armazenar ar-mazena as imagens decodificadas para cada um dos diferentespontos de visualização em respectivos armazenamentos tempo-rários, cada um dos respectivos armazenamentos temporárioscorrespondendo a um dos diferentes pontos de visualização (385).
9. Decodificador de vídeo, CARACTERIZADO pelo fatode que compreende:um decodificador (200) para decodificar um blocoem uma imagem usando pelo menos uma das duas listas de ima-gem de referência de visualização cruzada, a imagem sendouma de um conjunto de imagens correspondente ao conteúdo devídeo multivisualização e com diferentes pontos de visuali-zação em relação a uma mesma cena ou a uma cena similar, aimagem representando um ponto de visualização atual dos di-ferentes pontos de visualização, as duas listas da imagem dereferência de visualização cruzada correspondendo às imagensde referência com uns dos diferentes pontos de visualizaçãodiferentes do ponto de visualização atual.
10. Decodificador de vídeo, de acordo com a rei-vindicação 9, CARACTERIZADO pelo fato de que as duas listasde imagem de referência de visualização cruzada são diferen-tes da ListO e Listl do padrão de Codificação Avançada deVideo do Grupo de Especialistas de Imagens em Movimento-4Parte 10 da Organização Internacional para Padronização /Comissão Eletrotécnica Internacional / ou da recomendaçãoH.264 do Setor de Telecomunicações da União Internacional deTelecomunicações.
11. Decodificador de video, CARACTERIZADO pelo fa-to de que compreende:pelo menos um armazenamento temporário (245) paraarmazenar imagens decodificadas correspondentes ao conteúdomultivisualização para diferentes pontos de visualização deuma mesma cena ou de. uma cena similar.
12. Decodificador de video, de acordo com a rei-vindicação 11, CARACTERIZADO pelo fato de que o dito pelomenos um armazenamento temporário (245) compreende um arma-zenamento temporário separado para cada um dos diferentespontos de visualização.
13. Método para decodificação de video,CARACTERIZADO pelo fato de que compreende:decodificar (435, 445) um bloco em uma imagem u-sando pelo menos uma das duas listas de imagem de referênciade visualização cruzada, a imagem sendo uma de um conjuntode imagens correspondente ao conteúdo de video multivisuali-zação e com diferentes pontos de visualização em relação auma mesma cena ou a uma cena similar, a imagem representandoum ponto de visualização atual dos diferentes pontos de vi-sualização, as duas listas de imagem de referência de visua-lização cruzada correspondendo às imagens de referência comuns dos diferentes pontos de visualização diferentes do pon-to de visualização atual.
14. Método, de acordo com a reivindicação 13,CARACTERIZADO pelo fato de que as duas listas de imagem dereferência de visualização cruzada são diferentes da ListO eListl do padrão de Codificação Avançada de Video do Grupo deEspecialistas de Imagens em Movimento-4 Parte 10 da Organi-zação Internacional para Padronização / Comissão Eletrotéc-nica Internacional / ou da recomendação H.264 do Setor deTelecomunicações da União Internacional de Telecomunicações(435, 445).
15. Método para decodificação de video,CARACTERIZADO pelo fato de que compreende:armazenar (480), em pelo menos um armazenamentotemporário, imagens decodificadas correspondentes ao conteú-do multivisualização para diferentes pontos de visualizaçãode uma mesma cena ou de uma cena similar.
16. Método, de acordo com a reivindicação 15,CARACTERIZADO pelo fato de que a dita etapa de armazenar(480) armazena as imagens decodificadas para cada um dos di-ferentes pontos de visualização em respectivos armazenamen-tos temporários, cada um dos respectivos armazenamentos tem-porários correspondendo a um dos diferentes pontos de visua-lização.
17. Estrutura de sinal de video, CARACTERIZADA pe-lo fato de que compreende:um bloco em uma imagem codificado usando pelo me-nos uma das duas listas de imagem de referência de visuali-zação cruzada, a imagem sendo uma de um conjunto de imagenscorrespondente ao conteúdo de vídeo multivisualização e comdiferentes pontos de visualização em relação a uma mesma ce-na ou a uma cena similar, a imagem representando um ponto devisualização atual dos diferentes pontos de visualização, asduas listas de imagem de referência de visualização cruzadacorrespondentes às imagens de referência com uns dos dife-rentes pontos de visualização diferentes do ponto de visua-lização atual.
18. Mídia de armazenamento com dados de sinal devídeo codificados, CARACTERIZADA pelo fato de que compreende:um bloco em uma imagem codificado usando pelo me-nos uma das duas listas de imagem de referência de visuali-zação cruzada, a imagem sendo uma de um conjunto de imagenscorrespondente ao conteúdo de vídeo multivisualização e comdiferentes pontos de visualização em relação a uma mesma ce-na ou a uma cena similar, a imagem representando um ponto devisualização atual dos diferentes pontos de visualização, asduas listas de imagem de referência de visualização cruzadacorrespondendo às imagens de referência com uns dos diferen-tes pontos de visualização diferentes do ponto de visualiza-ção atual.
19. Mídia de armazenamento com dados de sinal devídeo codificados, CARACTERIZADA pelo fato de que compreende:imagens decodificadas correspondentes ao conteúdomultivisualização para diferentes pontos de visualização deuma mesma cena ou de uma cena similar.
BRPI0706438-1A 2006-01-09 2007-01-08 Método para decodificação de vídeo e decodificador de vídeo BRPI0706438B1 (pt)

Priority Applications (1)

Application Number Priority Date Filing Date Title
BR122016024819-4A BR122016024819B1 (pt) 2006-01-09 2007-01-08 Codificador e decodificador de vídeo, método de codificação e decodificação de vídeo e meio de armazenamento

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US75728906P 2006-01-09 2006-01-09
US60/757,289 2006-01-09
PCT/US2007/000482 WO2007081926A2 (en) 2006-01-09 2007-01-08 Methods and apparatuses for multi-view video coding

Publications (2)

Publication Number Publication Date
BRPI0706438A2 true BRPI0706438A2 (pt) 2011-03-29
BRPI0706438B1 BRPI0706438B1 (pt) 2020-01-07

Family

ID=38193755

Family Applications (3)

Application Number Title Priority Date Filing Date
BRPI0706438-1A BRPI0706438B1 (pt) 2006-01-09 2007-01-08 Método para decodificação de vídeo e decodificador de vídeo
BR122016024819-4A BR122016024819B1 (pt) 2006-01-09 2007-01-08 Codificador e decodificador de vídeo, método de codificação e decodificação de vídeo e meio de armazenamento
BRPI0706434-9A BRPI0706434B1 (pt) 2006-01-09 2007-01-08 codificador de vídeo, decodificador de vídeo, método para codificar vídeo, método para decodificar vídeo, estrutura de sinal de vídeo para codificação de vídeo, e mídia de armazenamento com dados de sinal de vídeo codificados

Family Applications After (2)

Application Number Title Priority Date Filing Date
BR122016024819-4A BR122016024819B1 (pt) 2006-01-09 2007-01-08 Codificador e decodificador de vídeo, método de codificação e decodificação de vídeo e meio de armazenamento
BRPI0706434-9A BRPI0706434B1 (pt) 2006-01-09 2007-01-08 codificador de vídeo, decodificador de vídeo, método para codificar vídeo, método para decodificar vídeo, estrutura de sinal de vídeo para codificação de vídeo, e mídia de armazenamento com dados de sinal de vídeo codificados

Country Status (10)

Country Link
US (6) US10194171B2 (pt)
EP (8) EP1972145A2 (pt)
JP (14) JP5229810B2 (pt)
KR (2) KR101350597B1 (pt)
CN (9) CN103108184B (pt)
AU (2) AU2007205179B2 (pt)
BR (3) BRPI0706438B1 (pt)
RU (2) RU2494569C2 (pt)
WO (2) WO2007081926A2 (pt)
ZA (3) ZA200805337B (pt)

Families Citing this family (123)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7903737B2 (en) * 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
ZA200805337B (en) 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
WO2007081176A1 (en) * 2006-01-12 2007-07-19 Lg Electronics Inc. Processing multiview video
US20070177671A1 (en) * 2006-01-12 2007-08-02 Lg Electronics Inc. Processing multiview video
KR101276847B1 (ko) 2006-01-12 2013-06-18 엘지전자 주식회사 다시점 비디오의 처리
US8565319B2 (en) * 2006-03-30 2013-10-22 Lg Electronics Inc. Method and apparatus for decoding/encoding a video signal
US20100091845A1 (en) * 2006-03-30 2010-04-15 Byeong Moon Jeon Method and apparatus for decoding/encoding a video signal
EP2030450B1 (en) * 2006-06-19 2015-01-07 LG Electronics Inc. Method and apparatus for processing a video signal
ZA200900857B (en) * 2006-07-06 2010-05-26 Thomson Licensing Method and apparatus for decoupling frame number and/or picture order count (POC) for multi-view video encoding and decoding
JP2009543461A (ja) 2006-07-06 2009-12-03 トムソン ライセンシング マルチビュービデオ符号化及び復号化のためにフレームナンバー及び／又はピクチャオーダカウント（ｐｏｃ）を分離する方法及び装置
WO2008007913A1 (en) 2006-07-12 2008-01-17 Lg Electronics, Inc. A method and apparatus for processing a signal
WO2008020734A1 (en) 2006-08-18 2008-02-21 Gwangju Institute Of Science And Technology A method and apparatus for encoding or decoding frames of different views in multiview video using global disparity
TW200820791A (en) * 2006-08-25 2008-05-01 Lg Electronics Inc A method and apparatus for decoding/encoding a video signal
EP2080382B1 (en) * 2006-10-20 2016-07-20 Nokia Technologies Oy System and method for implementing low-complexity multi-view video coding
CA2672924C (en) * 2006-12-28 2014-07-22 Nippon Telegraph And Telephone Corporation Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media which store the programs
US8494046B2 (en) * 2007-03-23 2013-07-23 Lg Electronics Inc. Method and an apparatus for decoding/encoding a video signal by performing illumination compensation
MX2009010973A (es) 2007-04-12 2009-10-30 Thomson Licensing Texturizado en codificacion y descodificacion de video.
WO2008130528A2 (en) 2007-04-17 2008-10-30 Thomson Licensing Hypothetical reference decoder for multiview video coding
US8953684B2 (en) * 2007-05-16 2015-02-10 Microsoft Corporation Multiview coding with geometry-based disparity prediction
TW200910975A (en) * 2007-06-25 2009-03-01 Nippon Telegraph & Telephone Video encoding method and decoding method, apparatuses therefor, programs therefor, and storage media for storing the programs
US8804839B2 (en) * 2007-06-27 2014-08-12 Korea Electronics Technology Institute Method for image prediction of multi-view video codec and computer-readable recording medium thereof
EP3190791B1 (en) * 2007-06-29 2018-11-28 Velos Media International Limited Image encoding device and image decoding device
US10298952B2 (en) 2007-08-06 2019-05-21 Interdigital Madison Patent Holdings Methods and apparatus for motion skip move with multiple inter-view reference pictures
CN103428504B (zh) * 2007-08-15 2017-04-12 汤姆森许可贸易公司 在多视图编码的视频中进行错误隐藏的方法和装置
CN101562745B (zh) * 2008-04-18 2012-07-04 华为技术有限公司 一种多视点视频图像编码和解码的方法及装置
RU2518435C2 (ru) * 2008-07-20 2014-06-10 Долби Лэборетериз Лайсенсинг Корпорейшн Оптимизация кодера в системах доставки стереоскопического видео
CN104768031B (zh) 2009-01-26 2018-02-09 汤姆森特许公司 用于视频解码的装置
BRPI1008226A2 (pt) * 2009-02-12 2019-09-24 Nippon Telegraph & Telephone método de codificação de imagem como múltiplas vistas, método de decodificação de imagem com múltiplas vistas, dispositivo de codificação de imagem com múltiplas vistas,dispositivo de codificação de imagem com múltiplas vistas,programa de codificação de imagem como múltiplas vistas, programa de codificação de imagem como múltiplas vistas.
JP6159507B2 (ja) 2009-02-19 2017-07-05 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ３ｄ映像フォーマット
JP4993224B2 (ja) * 2009-04-08 2012-08-08 ソニー株式会社 再生装置および再生方法
WO2010123203A2 (ko) * 2009-04-22 2010-10-28 엘지전자 주식회사 다시점 영상의 참조 픽쳐 리스트 변경 방법
CN102484700A (zh) 2009-05-01 2012-05-30 汤姆森特许公司 3d视频编码格式
TWI384887B (zh) * 2009-06-11 2013-02-01 Univ Nat Central 多視點影像編解碼方法
KR20110007928A (ko) * 2009-07-17 2011-01-25 삼성전자주식회사 다시점 영상 부호화 및 복호화 방법과 장치
US20110045408A1 (en) * 2009-08-20 2011-02-24 Shota Suzuki Color-forming photosensitive composition, lithographic printing plate precursor and novel cyanine dye
US8624959B1 (en) * 2009-09-11 2014-01-07 The Boeing Company Stereo video movies
JP5722349B2 (ja) 2010-01-29 2015-05-20 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ ブロックに基づくインターリーブ
KR101628383B1 (ko) * 2010-02-26 2016-06-21 연세대학교 산학협력단 영상 처리 장치 및 방법
KR20110101099A (ko) * 2010-03-05 2011-09-15 한국전자통신연구원 복수 전송 계층 연동형 3ｄｔｖ 방송 서비스 제공을 위한 송신 및 수신 방법, 송신 및 수신 장치
WO2011146451A1 (en) * 2010-05-20 2011-11-24 Thomson Licensing Methods and apparatus for adaptive motion vector candidate ordering for video encoding and decoding
JP2012034352A (ja) * 2010-06-30 2012-02-16 Panasonic Corp ステレオ動画像符号化装置及びステレオ動画像符号化方法
WO2012036902A1 (en) 2010-09-14 2012-03-22 Thomson Licensing Compression methods and apparatus for occlusion data
JP5531881B2 (ja) * 2010-09-22 2014-06-25 富士通株式会社 動画像復号装置、動画像復号方法、及び集積回路
HU1000640D0 (en) * 2010-11-29 2011-02-28 Holografika Hologrameloeallito Fejlesztoe Es Forgalmazo Kft Image coding and decoding method and apparatus for efficient encoding and decoding of 3d field content
KR101893559B1 (ko) 2010-12-14 2018-08-31 삼성전자주식회사 다시점 비디오 부호화/복호화 장치 및 방법
KR20120080122A (ko) * 2011-01-06 2012-07-16 삼성전자주식회사 경쟁 기반의 다시점 비디오 부호화/복호화 장치 및 방법
JP6004271B2 (ja) * 2011-01-12 2016-10-05 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置および画像復号装置
WO2012096176A1 (en) 2011-01-12 2012-07-19 Panasonic Corporation Methods and apparatuses for encoding and decoding video using multiple reference pictures
US20120189060A1 (en) * 2011-01-20 2012-07-26 Industry-Academic Cooperation Foundation, Yonsei University Apparatus and method for encoding and decoding motion information and disparity information
US10841573B2 (en) * 2011-02-08 2020-11-17 Sun Patent Trust Methods and apparatuses for encoding and decoding video using multiple reference pictures
KR20120095610A (ko) * 2011-02-21 2012-08-29 삼성전자주식회사 다시점 비디오의 부호화 방법 및 장치, 그 복호화 방법 및 장치
JP5747559B2 (ja) * 2011-03-01 2015-07-15 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置、及び動画像復号プログラム
WO2012124121A1 (ja) * 2011-03-17 2012-09-20 富士通株式会社 動画像復号方法、動画像符号化方法、動画像復号装置及び動画像復号プログラム
US9445092B2 (en) * 2011-03-18 2016-09-13 Sony Corporation Image processing apparatus, image processing method, and program
WO2012128068A1 (ja) * 2011-03-18 2012-09-27 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
KR20120118780A (ko) 2011-04-19 2012-10-29 삼성전자주식회사 다시점 비디오의 움직임 벡터 부호화 방법 및 장치, 그 복호화 방법 및 장치
US9485517B2 (en) 2011-04-20 2016-11-01 Qualcomm Incorporated Motion vector prediction with motion vectors from multiple views in multi-view video coding
JP5341952B2 (ja) * 2011-05-30 2013-11-13 株式会社東芝 ビデオサーバ及びデータ収録再生方法
WO2013001748A1 (ja) * 2011-06-29 2013-01-03 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
WO2013001749A1 (ja) 2011-06-29 2013-01-03 パナソニック株式会社 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置および画像符号化復号装置
JP2013034171A (ja) * 2011-06-30 2013-02-14 Sony Corp 画像処理装置および方法
SG10201609891QA (en) 2011-06-30 2016-12-29 Sony Corp Image processing device and image processing method
JP2014527782A (ja) * 2011-08-30 2014-10-16 インテル コーポレイション 多視点ビデオコード化方式
RU2583040C2 (ru) * 2011-08-30 2016-05-10 Нокиа Текнолоджиз Ой Устройство, способ и компьютерная программа для кодирования и декодирования видеосигналов
AU2012303085A1 (en) * 2011-08-31 2014-01-30 Sony Corporation Encoding device, encoding method, decoding device, and decoding method
JP6039178B2 (ja) * 2011-09-15 2016-12-07 シャープ株式会社 画像符号化装置、画像復号装置、並びにそれらの方法及びプログラム
WO2013042884A1 (ko) * 2011-09-19 2013-03-28 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치
CN104247432B (zh) 2011-11-11 2019-06-11 Ge视频压缩有限责任公司 使用深度图估计和更新的高效多视点编码
WO2013068548A2 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Efficient multi-view coding using depth-map estimate for a dependent view
EP3739886A1 (en) 2011-11-18 2020-11-18 GE Video Compression, LLC Multi-view coding with efficient residual handling
US9432665B2 (en) * 2011-12-02 2016-08-30 Qualcomm Incorporated Coding least significant bits of picture order count values identifying long-term reference pictures
US20130163880A1 (en) * 2011-12-23 2013-06-27 Chao-Chung Cheng Disparity search methods and apparatuses for multi-view videos
US20130176390A1 (en) * 2012-01-06 2013-07-11 Qualcomm Incorporated Multi-hypothesis disparity vector construction in 3d video coding with depth
WO2013108613A1 (ja) * 2012-01-17 2013-07-25 パナソニック株式会社 動画像符号化方法、動画像復号化方法、動画像符号化装置、動画像復号化装置および動画像符号化復号化装置
WO2013107028A1 (en) * 2012-01-19 2013-07-25 Mediatek Singapore Pte. Ltd. Methods and apparatuses of amvp simplification
US9591328B2 (en) 2012-01-20 2017-03-07 Sun Patent Trust Methods and apparatuses for encoding and decoding video using temporal motion vector prediction
WO2013115942A1 (en) * 2012-02-01 2013-08-08 Vidyo, Inc. Techniques for multiview video coding
KR101996682B1 (ko) 2012-02-03 2019-07-04 선 페이턴트 트러스트 화상 부호화 방법, 화상 복호 방법, 화상 부호화 장치, 화상 복호 장치 및 화상 부호화 복호 장치
CN103650497B (zh) * 2012-03-02 2018-01-05 太阳专利托管公司 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置
CA2866121C (en) 2012-03-06 2018-04-24 Panasonic Intellectual Property Corporation Of America Moving picture coding method, moving picture decoding method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus
US9503720B2 (en) 2012-03-16 2016-11-22 Qualcomm Incorporated Motion vector coding and bi-prediction in HEVC and its extensions
US10200709B2 (en) 2012-03-16 2019-02-05 Qualcomm Incorporated High-level syntax extensions for high efficiency video coding
JP2013211776A (ja) * 2012-03-30 2013-10-10 Sharp Corp 画像符号化装置、画像復号装置、画像符号化方法、画像復号方法およびプログラム
JP6681609B2 (ja) * 2012-04-09 2020-04-15 サン パテント トラスト 画像符号化方法および画像復号化方法
EP2847996B1 (en) 2012-05-09 2020-10-07 Sun Patent Trust Method of performing motion vector prediction, encoding and decoding methods, and apparatuses thereof
US20130329007A1 (en) * 2012-06-06 2013-12-12 Qualcomm Incorporated Redundancy removal for advanced motion vector prediction (amvp) in three-dimensional (3d) video coding
KR102136903B1 (ko) * 2012-07-18 2020-07-22 소니 주식회사 화상 처리 장치 및 방법
ITTO20120647A1 (it) * 2012-07-24 2014-01-25 St Microelectronics Srl Procedimenti e sistemi per il trattamento di immagini stereoscopiche, prodotti informatici e supporto relativi
EP2878125A4 (en) * 2012-07-27 2016-10-12 Hfi Innovation Inc CONSTRAINED DISPARITY VECTOR DERIVATION METHOD IN 3D VIDEO CODING
US9357195B2 (en) * 2012-08-16 2016-05-31 Qualcomm Incorporated Inter-view predicted motion vector for 3D video
US20140071235A1 (en) * 2012-09-13 2014-03-13 Qualcomm Incorporated Inter-view motion prediction for 3d video
US9319657B2 (en) * 2012-09-19 2016-04-19 Qualcomm Incorporated Selection of pictures for disparity vector derivation
US20140086328A1 (en) * 2012-09-25 2014-03-27 Qualcomm Incorporated Scalable video coding in hevc
US9584825B2 (en) * 2012-09-27 2017-02-28 Qualcomm Incorporated Long-term reference picture signaling in video coding
WO2014050675A1 (ja) * 2012-09-28 2014-04-03 ソニー株式会社 画像処理装置および方法
JP6301932B2 (ja) 2012-10-01 2018-03-28 ジーイー ビデオ コンプレッション エルエルシー エンハンスメント層の中の変換係数ブロックの副ブロックに基づいた符号化を使用するスケーラブルビデオ符号化
CN104704835B (zh) * 2012-10-03 2017-11-24 联发科技股份有限公司 视频编码中运动信息管理的装置与方法
EP2934011A4 (en) * 2012-12-11 2016-05-11 Sony Corp ENCLOSURE DEVICE AND ENCLOSURE METHOD AND DECOMPOSITION DEVICE AND DECOMPOSITION METHOD
TWI669950B (zh) * 2012-12-21 2019-08-21 日商新力股份有限公司 影像處理裝置及方法
KR20160147069A (ko) * 2013-01-07 2016-12-21 미디어텍 인크. ３차원 비디오 코딩에서의 직접 모드 및 스킵 모드에 대한 공간 모션 벡터 예측 유도 방법 및 장치
US9762905B2 (en) * 2013-03-22 2017-09-12 Qualcomm Incorporated Disparity vector refinement in video coding
CN105122803B (zh) * 2013-04-02 2019-01-08 Vid拓展公司 针对可伸缩视频编码的增强型时间运动向量预测
WO2014166068A1 (en) * 2013-04-09 2014-10-16 Mediatek Inc. Refinement of view synthesis prediction for 3-d video coding
WO2014166360A1 (en) * 2013-04-10 2014-10-16 Mediatek Inc. Method and apparatus for bi-prediction of illumination compensation
WO2015005750A1 (ko) 2013-07-12 2015-01-15 삼성전자 주식회사 변이 벡터 유도를 사용하는 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
JP2016528808A (ja) * 2013-07-18 2016-09-15 エルジー エレクトロニクス インコーポレイティド ビデオ信号処理方法およびビデオ信号処理装置
CN105556972B (zh) 2013-07-18 2019-04-05 三星电子株式会社 用于层间视频解码和编码设备和方法的对深度图像的场景内预测方法
WO2015056955A1 (ko) 2013-10-14 2015-04-23 삼성전자 주식회사 다시점 비디오 부호화 방법 및 장치, 다시점 비디오 복호화 방법 및 장치
US10075690B2 (en) * 2013-10-17 2018-09-11 Mediatek Inc. Method of motion information prediction and inheritance in multi-view and three-dimensional video coding
RU2550544C1 (ru) * 2013-12-16 2015-05-10 Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Тульский государственный университет" (ТулГУ) Способ компенсации движения в цифровых динамических стереовидеоизображениях
WO2015194915A1 (ko) 2014-06-20 2015-12-23 삼성전자 주식회사 인터 레이어 비디오 부복호화를 위한 깊이 영상의 예측 모드 전송 방법 및 장치
US10321145B2 (en) 2014-10-07 2019-06-11 Samsung Electronics Co., Ltd. Method and device for encoding or decoding image by means of view merging prediction
US10554966B2 (en) 2014-10-07 2020-02-04 Samsung Electronics Co., Ltd. Multi-view image encoding/decoding method and apparatus
JP6937302B2 (ja) * 2015-11-23 2021-09-29 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートＥｌｅｃｔｒｏｎｉｃｓ Ａｎｄ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｒｅｓｅａｒｃｈ Ｉｎｓｔｉｔｕｔｅ 多視点ビデオの符号化／復号化方法
US20180091812A1 (en) * 2016-09-23 2018-03-29 Apple Inc. Video compression system providing selection of deblocking filters parameters based on bit-depth of video data
KR102004247B1 (ko) * 2016-11-25 2019-07-29 경희대학교 산학협력단 영상 병렬 처리 방법 및 장치
US11113636B2 (en) 2016-12-30 2021-09-07 Stubhub, Inc. Automated generation of a package data object
CN106791835B (zh) * 2017-03-01 2019-12-10 北京大学 一种参考图像管理方法
CN107071385B (zh) * 2017-04-18 2019-01-25 杭州派尼澳电子科技有限公司 一种基于h265引入视差补偿的立体视频编码方法
KR102503743B1 (ko) 2018-04-11 2023-02-28 삼성전자주식회사 이미지 처리 장치 및 방법
US11665365B2 (en) * 2018-09-14 2023-05-30 Google Llc Motion prediction coding with coframe motion vectors
US11991376B2 (en) * 2020-04-09 2024-05-21 Intel Corporation Switchable scalable and multiple description immersive video codec
CN111556331A (zh) * 2020-05-08 2020-08-18 湖南快乐阳光互动娱乐传媒有限公司 一种智能化多机位直播装置

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2643531B1 (fr) 1989-02-21 1996-04-26 Thomson Csf Procede et dispositif de compression de l'information destine au decodage compatible d'une famille de signaux de television de resolutions croissantes
JPH05229842A (ja) 1992-01-27 1993-09-07 Fujikura Ltd 耐放射イメージファイバ
US6052414A (en) * 1994-03-30 2000-04-18 Samsung Electronics, Co. Ltd. Moving picture coding method and apparatus for low bit rate systems using dynamic motion estimation
US5617334A (en) * 1995-07-21 1997-04-01 The Trustees Of Columbia University In The City Of New York Multi-viewpoint digital video coder/decoder and method
TW335480B (en) 1995-09-29 1998-07-01 Matsushita Electric Ind Co Ltd Method and apparatus for encoding a bistream for multi-angle connection
JP3263807B2 (ja) 1996-09-09 2002-03-11 ソニー株式会社 画像符号化装置および画像符号化方法
JPH10191393A (ja) 1996-12-24 1998-07-21 Sharp Corp 多視点画像符号化装置
JPH10191394A (ja) * 1996-12-24 1998-07-21 Sharp Corp 多視点画像符号化装置
KR20010029494A (ko) 1997-07-11 2001-04-06 요트.게.아. 롤페즈 시청각 데이터 디코딩 방법
US6055264A (en) * 1997-08-01 2000-04-25 Nokia Mobile Phones Limited Method and apparatus for fast acquisition and multipath search in a spread spectrum system
JP3931392B2 (ja) 1997-08-25 2007-06-13 ソニー株式会社 立体画像用ビデオ信号生成装置、立体画像用ビデオ信号送出装置および立体画像用ビデオ信号受信装置
KR100531566B1 (ko) 1997-10-23 2005-11-29 미쓰비시덴키 가부시키가이샤 화상 복호화 장치
CN1156164C (zh) * 1997-11-27 2004-06-30 英国电讯有限公司 代码转换器及其方法
US6055274A (en) * 1997-12-30 2000-04-25 Intel Corporation Method and apparatus for compressing multi-view video
JP3519594B2 (ja) 1998-03-03 2004-04-19 Ｋｄｄｉ株式会社 ステレオ動画像用符号化装置
JP2000132683A (ja) 1998-10-23 2000-05-12 Toshiba Corp 多視点画像符号化方法
US6693964B1 (en) * 2000-03-24 2004-02-17 Microsoft Corporation Methods and arrangements for compressing image based rendering data using multiple reference frame prediction techniques that support just-in-time rendering of an image
CN1205818C (zh) * 2000-04-11 2005-06-08 皇家菲利浦电子有限公司 视频编码和解码方法
JP4608136B2 (ja) 2001-06-22 2011-01-05 オリンパス株式会社 動きベクトル及び視差ベクトル検出装置
KR20030001758A (ko) * 2001-06-27 2003-01-08 한국전자통신연구원 움직임 및 시차 보상을 갖는 입체영상의 부호화/복호화장치 및 그 방법
US6566133B1 (en) * 2001-08-01 2003-05-20 Isis Pharmaceuticals, Inc. Antisense inhibition of dual specific phosphatase 9 expression
JP2004007379A (ja) * 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
KR100508798B1 (ko) 2002-04-09 2005-08-19 엘지전자 주식회사 쌍방향 예측 블록 예측 방법
KR100481732B1 (ko) 2002-04-20 2005-04-11 전자부품연구원 다 시점 동영상 부호화 장치
JP2004023458A (ja) 2002-06-17 2004-01-22 Toshiba Corp 動画像符号化／復号化方法及び装置
KR100523052B1 (ko) * 2002-08-30 2005-10-24 한국전자통신연구원 다중 디스플레이 방식을 지원하는 다시점 동영상의 객체 기반 부호화 장치 및 그 방법과 그를 이용한 객체 기반 송수신 시스템 및 그 방법
KR100751422B1 (ko) 2002-12-27 2007-08-23 한국전자통신연구원 스테레오스코픽 비디오 부호화 및 복호화 방법, 부호화 및복호화 장치
JP4259884B2 (ja) 2003-01-20 2009-04-30 シャープ株式会社 画像データ作成装置およびそのデータを再生する画像データ再生装置
CN1258925C (zh) 2003-06-27 2006-06-07 中国科学院计算技术研究所 多视角视频编解码预测补偿方法及装置
FR2857132A1 (fr) * 2003-07-03 2005-01-07 Thomson Licensing Sa Dispositif, systeme et procede de codage d'images numeriques
US7778328B2 (en) 2003-08-07 2010-08-17 Sony Corporation Semantics-based motion estimation for multi-view video coding
BRPI0413979A (pt) 2003-08-26 2006-11-07 Thomson Licensing método e aparelho para minimizar o número de imagens de referência usadas para inter-codificação
JP4355914B2 (ja) 2003-10-01 2009-11-04 日本電気株式会社 多視点画像伝送システムと方法、多視点画像圧縮装置と方法、多視点画像伸長装置と方法およびプログラム
FI115589B (fi) * 2003-10-14 2005-05-31 Nokia Corp Redundanttien kuvien koodaaminen ja dekoodaaminen
CN1545333A (zh) * 2003-11-21 2004-11-10 �Ϻ���ͨ��ѧ 立体视频图像信号压缩的方法
JP4702059B2 (ja) * 2003-12-22 2011-06-15 日本電気株式会社 動画像を符号化する方法及び装置
JP3879741B2 (ja) 2004-02-25 2007-02-14 ソニー株式会社 画像情報符号化装置および画像情報符号化方法
JP4421940B2 (ja) * 2004-05-13 2010-02-24 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置および方法、並びに動画像復号化装置および方法
RU2392664C2 (ru) * 2004-09-22 2010-06-20 Пол Дж. НУННАРИ Система и способ стимулирования охраны здоровья в пункте продаж
FR2878758B1 (fr) 2004-12-06 2007-08-24 Sylvius Sarl Ensemble de jeu electronique avec objets physiques identifiables ou localisables par le jeu
US7728877B2 (en) * 2004-12-17 2010-06-01 Mitsubishi Electric Research Laboratories, Inc. Method and system for synthesizing multiview videos
KR100779875B1 (ko) * 2005-01-14 2007-11-27 주식회사 휴맥스 다-시점 코딩을 위한 참조 프레임 순서 설정 방법 및 그방법을 기록한 기록매체
JP5020953B2 (ja) 2005-07-18 2012-09-05 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュート 時間及び視点間参照映像バッファを活用した予測符号化／復号化装置及びその方法
US8559515B2 (en) 2005-09-21 2013-10-15 Samsung Electronics Co., Ltd. Apparatus and method for encoding and decoding multi-view video
US7903737B2 (en) 2005-11-30 2011-03-08 Mitsubishi Electric Research Laboratories, Inc. Method and system for randomly accessing multiview videos with known prediction dependency
ZA200805337B (en) * 2006-01-09 2009-11-25 Thomson Licensing Method and apparatus for providing reduced resolution update mode for multiview video coding
JP5225141B2 (ja) 2009-02-20 2013-07-03 下西技研工業株式会社 ディスプレイ支持装置
JP2010191393A (ja) 2009-02-20 2010-09-02 Bridgestone Corp カラーフィルタ基板の製造方法およびカラー情報表示用パネルの製造方法

Also Published As

Publication number Publication date
JP5229810B2 (ja) 2013-07-03
CN101931806A (zh) 2010-12-29
ZA200805337B (en) 2009-11-25
JP6214097B2 (ja) 2017-10-18
WO2007081926A3 (en) 2007-10-04
JP2018164312A (ja) 2018-10-18
US20090010323A1 (en) 2009-01-08
CN103096089B (zh) 2016-03-23
KR101350676B1 (ko) 2014-01-14
JP2014003681A (ja) 2014-01-09
JP2015097406A (ja) 2015-05-21
KR20080092359A (ko) 2008-10-15
JP5219212B2 (ja) 2013-06-26
CN102685488B (zh) 2016-04-20
JP2009522986A (ja) 2009-06-11
CN103118258A (zh) 2013-05-22
EP1972145A2 (en) 2008-09-24
JP2013176065A (ja) 2013-09-05
WO2007081756A2 (en) 2007-07-19
AU2007205179B2 (en) 2011-08-25
BRPI0706438B1 (pt) 2020-01-07
EP2458868A3 (en) 2013-01-23
CN101366285B (zh) 2012-04-18
RU2433561C2 (ru) 2011-11-10
CN101931806B (zh) 2014-03-26
EP2458870A2 (en) 2012-05-30
RU2008132879A (ru) 2010-02-20
CN102685489A (zh) 2012-09-19
US20130242048A1 (en) 2013-09-19
US10194171B2 (en) 2019-01-29
AU2007205179A1 (en) 2007-07-19
US20190037241A1 (en) 2019-01-31
CN101366285A (zh) 2009-02-11
JP2017077015A (ja) 2017-04-20
US8842729B2 (en) 2014-09-23
EP2458871A3 (en) 2013-01-23
US9143782B2 (en) 2015-09-22
EP2458868A2 (en) 2012-05-30
JP5483510B2 (ja) 2014-05-07
JP5229842B1 (ja) 2013-07-03
JP2016059067A (ja) 2016-04-21
CN103118258B (zh) 2016-03-23
EP2458869A3 (en) 2013-01-23
JP6086560B2 (ja) 2017-03-01
AU2007205007B2 (en) 2011-03-31
CN102685489B (zh) 2015-04-29
EP2309750A2 (en) 2011-04-13
JP6578421B2 (ja) 2019-09-18
EP2458870A3 (en) 2013-01-23
CN103096089A (zh) 2013-05-08
BR122016024819B1 (pt) 2020-05-26
AU2007205007A1 (en) 2007-07-19
CN103096088B (zh) 2016-03-23
JP2012231512A (ja) 2012-11-22
CN103108184A (zh) 2013-05-15
BRPI0706434A2 (pt) 2011-03-29
JP2013138486A (ja) 2013-07-11
JP6008433B2 (ja) 2016-10-19
KR20080092357A (ko) 2008-10-15
EP3484157A2 (en) 2019-05-15
JP2009522985A (ja) 2009-06-11
JP5602192B2 (ja) 2014-10-08
JP6077965B2 (ja) 2017-02-08
JP2014239523A (ja) 2014-12-18
JP5483509B2 (ja) 2014-05-07
ZA200805751B (en) 2009-10-28
CN103108184B (zh) 2016-03-23
WO2007081756A3 (en) 2008-01-03
CN103096088A (zh) 2013-05-08
JP2012213205A (ja) 2012-11-01
US20150350668A1 (en) 2015-12-03
EP2458869A2 (en) 2012-05-30
JP6453839B2 (ja) 2019-01-16
US20090168874A1 (en) 2009-07-02
EP1972148A2 (en) 2008-09-24
RU2494569C2 (ru) 2013-09-27
BRPI0706434B1 (pt) 2021-02-02
JP5534536B2 (ja) 2014-07-02
US20150350680A1 (en) 2015-12-03
ZA200805650B (en) 2009-10-28
CN101366286B (zh) 2013-03-27
CN101366286A (zh) 2009-02-11
US9521429B2 (en) 2016-12-13
EP2309750A3 (en) 2013-12-25
US9525888B2 (en) 2016-12-20
JP2013176067A (ja) 2013-09-05
EP2458871A2 (en) 2012-05-30
CN102685488A (zh) 2012-09-19
JP2013176066A (ja) 2013-09-05
EP3484157A3 (en) 2019-08-07
JP5610552B2 (ja) 2014-10-22
WO2007081926A2 (en) 2007-07-19
RU2008132834A (ru) 2010-02-20
KR101350597B1 (ko) 2014-01-14

Similar Documents

Publication Publication Date Title
BRPI0706438A2 (pt) método e aparelho para codificação de vìdeo multivisualização

Legal Events

Date Code Title Description
B15K Others concerning applications: alteration of classification

Ipc: H04N 19/597 (2014.01), H04N 19/109 (2014.01), H04N

B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06T Formal requirements before examination [chapter 6.20 patent gazette]
B25G Requested change of headquarter approved

Owner name: THOMSON LICENSING (FR)

B25G Requested change of headquarter approved

Owner name: THOMSON LICENSING (FR)

B25A Requested transfer of rights approved

Owner name: INTERDIGITAL VC HOLDINGS, INC. (US)

B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 07/01/2020, OBSERVADAS AS CONDICOES LEGAIS.