BRPI0809210A2 - Gerenciamento de lista de imagens de referência - Google Patents
Gerenciamento de lista de imagens de referência Download PDFInfo
- Publication number
- BRPI0809210A2 BRPI0809210A2 BRPI0809210-9A BRPI0809210A BRPI0809210A2 BR PI0809210 A2 BRPI0809210 A2 BR PI0809210A2 BR PI0809210 A BRPI0809210 A BR PI0809210A BR PI0809210 A2 BRPI0809210 A2 BR PI0809210A2
- Authority
- BR
- Brazil
- Prior art keywords
- reference image
- list
- image
- images
- reordering
- Prior art date
Links
- 238000000034 method Methods 0.000 claims description 31
- 230000011664 signaling Effects 0.000 claims description 5
- 230000003044 adaptive effect Effects 0.000 description 5
- 238000001914 filtration Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000009795 derivation Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/114—Adapting the group of pictures [GOP] structure, e.g. number of B-frames between two anchor frames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
"GERENCIAMENTO DE LISTA DE IMAGENS DE REFERÊNCIA" REFERÊNCIA CRUZADA COM PEDIDOS RELACIONADOS
O presente pedido reivindica o benefício do Pedido de Patente Provisório norteamericano N. de Série 60/921713, depositado em 04 de abril de 2007, incorporado ao presente documento a título de referência, em sua totalidade.
CAMPO DA TÉCNICA
A presente invenção refere-se a, de modo geral, à codificação e decodificação de vídeo e, mais particularmente, a um método e aparelho para o gerenciamento de lista de imagens de referência em uma visualização de múltiplas janelas de vídeo codificado, usando uma sintaxe de alto nível.
FUNDAMENTOS DA INVENÇÃO
Na atual implementação da codificação MVC baseada no padrão de codificação
H.264 / MPEG-4 AVC, o software de referência atinge uma predição de visualização de múltiplas janelas por meio da codificação de cada visualização com um único codificador, levando em consideração as referências de visualização cruzada. Além disso, a codificação MVC também desacopla o vetor frame_num e a codificação POC entre as diferentes visualizações, permitindo, assim, que imagens com o mesmo vetor frame_num e codificação POC (por exemplo, as imagens pertencentes a diferentes visualizações), estejam presentes no Armazenador temporário de Imagens Decodificadas (Decoded Picture Buffer) (DPB). Estas imagens são diferenciadas usando-se o identificador viewjd associado às mesmas.
Os comandos de reordenação da Lista de Imagens de Referência utilizados para reordenar a visualização entre janelas de imagens de referência impõem algumas restrições sobre os valores de certos elementos de sintaxe, além de não permitir a duplicação de uma imagem com um identificador viewjd em particular na lista de referência. A duplicação de uma imagem de referência é útil, por exemplo, nos casos em que uma versão modificada da imagem de referência é usada como uma imagem de referência juntamente com a imagem de referência original. Isso é usado em uma predição ponderada e em uma filtragem de referência adaptativa.
SUMÁRIO DA INVENÇÃO
Em pelo menos uma implementação da presente invenção, uma mudança para a sintaxe de alto nível do padrão de codificação de visualização de múltiplas janelas de vídeo baseado no padrão H.264/MPEG-4 AVC é feita no sentido de permitir um gerenciamento eficiente das listas de imagens de referência. Em particular, a presente invenção permite que a visualização entre janelas de imagens de referência seja duplicada na lista final de referência, ao modificar a equação usada para selecionar o índice da visualização entre janelas de imagens que deve ser adicionado à lista de referência. A duplicação de uma imagem de referência é útil, por exemplo, nos casos em que uma versão modificada da imagem de referência é usada como uma imagem de referência juntamente com a imagem de referência original. Isso é usado em uma predição ponderada e em uma filtragem de referência adaptativa.
A reordenação de imagens de referência será também mais eficientemente implementada através de uma aplicação da presente invenção. A reordenação de imagens de referência é útil, por exemplo, no sentido de melhorar a eficiência da codificação ao permitir que as imagens mais correlacionadas à imagem corrente estejam presentes nos índices mais baixos da lista de imagens de referência. Na extensão da codificação MVC, um novo conjunto de comandos de reordenação RPLR foi introduzido no sentido de reordenar a visualização entre janelas de imagens de referência. Isso é mostrado na Tabela 2.
Em pelo menos uma implementação da presente invenção, as equações especificadas na derivação do valor do índice de visualização na especificação de codificação MVC em questão são modificadas no sentido de permitir o gerenciamento das listas de imagens de referência. Essa modificação elimina as restrições impostas à especificação corrente, além de ainda permitir a duplicação de uma visualização entre janelas de imagens de referência na lista de referência.
BREVE DESCRIÇÃO DOS DESENHOS
A tabela 1 mostra a sintaxe de reordenação da lista de imagens de referência em codificação AVC.
A tabela 2 mostra a sintaxe de reordenação da lista de imagens de referência em codificação MVC.
A tabela 3 mostra as operações de conexão da sintaxe reordering_of_pics_nums_idc para a reordenação das listas de imagens de referência em codificação MVC.
DESCRICÃO DETALHADA DA INVENÇÃO
Em pelo menos uma implementação da presente invenção, uma mudança para a sintaxe de alto nível do padrão de codificação de visualização de múltiplas janelas de vídeo baseado no padrão H.264/MPEG-4 AVC é feita no sentido de permitir um gerenciamento eficaz das listas de imagens de referência. Em particular, a presente invenção permite que a visualização entre janelas de imagens de referência seja duplicada na lista de referência final ao modificar a equação usada para selecionar o índice da visualização entre janelas de imagens que deve ser adicionado à lista de referência.
Na implementação de uma codificação MVC com base no atual padrão de codificação H.264 / MPEG-4 AVC, o software de referência obtém uma predição de visualização de múltiplas janelas ao codificar cada visualização com um único codificador, levando em consideração as referências de visualizações cruzadas. Além disso, a codificação MVC também desacopla o vetor frame_num e a codificação POC entre as diferentes visualizações, permitindo, assim, que imagens com o mesmo vetor frame_num e codificação POC (por exemplo, as imagens pertencentes a diferentes visualizações), estejam presentes no armazenador DPB. Estas imagens são diferenciadas usando-se o identificador viewjd associado às mesmas.
Os comandos de reordenação da Lista de Imagens de Referência utilizados para
reordenar a visualização entre janelas de imagens de referência impõem algumas restrições sobre os valores de certos elementos de sintaxe, além de não permitir a duplicação de uma imagem com um identificador viewjd em particular na lista de referência. A duplicação de uma imagem de referência é útil, por exemplo, nos casos em que uma versão modificada da 10 imagem de referência é usada como uma imagem de referência juntamente com a imagem de referência original. Isso é usado em uma predição ponderada e em uma filtragem de referência adaptativa.
O padrão de codificação H.264/MPEG-4 AVC permite que o codificador / decodificador altere a ordem do default das imagens de referência da IistO (e da Iistl para Bslices) 15 temporariamente para a próxima fatia decodificada. Isto é obtido através dos comandos de Reordenação da lista de imagens de referência (RPLR) presentes no cabeçalho da fatia. Estes comandos de reordenação RPLR são mostrados na tabela de sintaxe para uma reordenação RPLR na Tabela 1.
A reordenação de imagens de referência é útil, por exemplo, para melhorar a efici20 ência da codificação, permitindo que as imagens mais correlacionadas à imagem corrente estejam presentes nos índices mais baixos da lista de imagens de referência. Na extensão da codificação MVC, um novo conjunto de comandos de reordenação RPLR é introduzido no sentido de reordenar a visualização entre janelas de imagens de referência. Isso é mostrado na Tabela 2.
A semântica para os novos comandos de reordenação RPLR é mostrada em "Erro!
Fonte de referência não encontrada". A sintaxe abs_diff_viewjdx_minus1 tem, ainda, a semântica a seguir.
O valor abs_diff_viewjdx_minus1 mais 1 que especifica a diferença absoluta entre o índice de visualização da imagem a ser colocada no índice corrente na lista de imagens de 30 referência e o valor de predição de índice de visualização. O valor abs_diff_viewjdx_minus1 ficará na faixa de 0 a num_anchor_refs_IX[curr_viewJd]-1 quando a fatia de decodificação corrente pertence a uma imagem âncora, ou na faixa de 0 a num_non_anchor_refsJX[curr_viewJd]-1 quando a mesma pertence a uma imagem não âncora. O identificador curr_viewjd é igual ao identificador viewjd da visualização que con35 tém a fatia em questão. Os valores permitidos de abs_diff_viewjdx_minus1 são ainda mais restritos, conforme especificado no subitem H.8.2.2.3 da codificação MVC.
Um índice de visualização de uma visualização entre janelas de imagens indica a ordem do identificador viewjd da visualização entre janelas de imagens que ocorre na dependência para a visualização da decodificação corrente na extensão da codificação MVC SPS. Para uma imagem com um índice de visualização igual ao índice viewjndex, o seu identificador viewjd será igual ao índice anchor_refJX[curr_viewJd][viewJndex] quando a 5 fatia de codificação corrente pertencer a uma imagem âncora, ou será igual ao índice non_anchor_ref_IX[curr_viewJd][viewJndex] quando a mesma pertencer a uma imagem não âncora.
Tabela 1: Sintaxe de reordenação de lista de imagens de referência em codificação
AVC
ref_pic_list_reordering() { C Descritor if( slice_type != I && slice_type != SI && slice_type != EI) { /* slice_type EI é especificado no Anexo F */ ref_picJist_reordering_flag_IO 2 u(l) if( ref_picJist_reordering_flagJO) do { reordering of pic nuins íric 2 ue(v) if( reordering_of_pic_nums_idc = = 0 [ j reordering_of_pic_nums_idc »= 1 ) abs_diff_pic_num_niinusl 2 ue(v) else ifC reordering of pic nums ide = = 2 ) long_temi_pic_nuni 2 ue(v) } while( reordering_of_pic_nums_idc != 3 ) } if( slice_type = = B 11 slice_type = = EB ) f /* slice_type EB é especificado no Anexo F */ ref_pic_iist_reordering_flag_ll 2 u(l) if( ref_pic_list_reordering_fIag_l I ) do { reordering_of_pic_nums_idc 2 ue(v) if( reordering_of_pic_nums_idc = = 0 11 reordering_of_pic_nums_idc == I ) abs„difT_pic_num_minusl 2 ue(v) else if( reordering_of_pic_nums_idc = = 2 ) long_termjplc_niun 2 ue(v) ) while( reordering_of_pic_nums_idc != 3 ) } } 10 Tabela 2: Sintaxe de reordenação de lista de imaaens de referência em codificação
MVC
ref_pic_list_reordering() { C Descritor if( slice_type != I && slice_type != ) { ref_pic_list_reordering_flag_10 2 u(D ifC ref_picJist_reordering_flag_JO ) do ( reordering_of_pic_numsJdc 2 ue(v) if( reordering_of_pic_nums_idc = = 0 |) . reordering_of_pic_nums_idc == 1 ) abs_diff_pic_mim_mimisl 2 ue(v) elseif(reordering_of_pic_nums_idc - = 2) long_term_pic_num 2 ue(v). if (reordering_of_pic_nums_idc = - 4 11 reordering_of_pic_nums_idc ==5) abs_diff_vlew_idx_minusl 2 ue(v) } while( reordering_of_pic_nums_idc != 3) } if( slice_type == B | [ slice_type = = EB) { ref pic Iist reorderinq flag 11 2 u(D if( ref_picJist_reordering_flag_ll ) do ( reordering_of_pic_nums„idc 2 ue(v) if( reordering_of_pic_nums_idc = = 0 11 reordering_of_pic_nums_idc = = 1 ) abs_diff_pic_num_minusl 2 ue(v) else ifi[ reordering_of_pic_nums_idc = = 2 ) long_term_pic_num 2 ue(v) if(reordering_of_pic_nums_idc = = 4 JJ reordering_of_pic_nums_idc ~ - 5) abs_diff_view_idx_minusl 2 ue(v) } while( reordering_of_pic_nums_idc != 3 ) } } Tabela 3
Operações de sintaxe reorderinq of pic nums ide para a reordenação de listas de
imaaens de referência em codificação MVC
reordering_of_pic_nums_idc Reordenação especificada O abs_diff_pic_num_minus1 está presente e corresponde a uma diferença a subtrair de um valor de predição de número de imagens 1 abs_diff_pic_num_minus1 está presente e corresponde a uma diferença a adicionar a um valor de predição de número de imagens 2 long_term_pic_num está presente e especifica o número de imagens de armazenamento longo para uma imagem de referência 3 Finalizar Ioop para a reordenação da lista de imagens de referência inicial 4 abs_diff_view_idx_minus1 está presente e corresponde a uma diferença a subtrair de um valor de predição de índice de visualização abs_diff_view_idx_minus1 está presente e corresponde a uma diferença a adicionar a um valor de predição de índice de visualização Em pelo menos uma implementação, a presente invenção modifica as equações especificadas na derivação do valor do índice de visualização na especificação da codificação MVC corrente para o gerenciamento das listas de imagens de referência. Essa modificação elimina as restrições impostas na especificação corrente e, adicionalmente, permite a duplicação de uma imagem de referência de visualização entre janelas.
O processo de reordenação das imagens entre janelas de visualização é especificado como:
As entradas para este processo vêm a ser a lista de imagens de referência RefPicListX (sendo X igual a 0 ou 1) e um índice refldxLX nesta lista.
As saídas desse processo vêm a ser uma lista de imagens de referência possivel
mente modificadas RefPicListX (sendo X igual a 0 ou 1) e o índice incrementado refldxLX.
A variável picViewIdxLX é derivada da seguinte forma.
- quando a sintaxe reordering_of_pic_nums_idc for igual a 4: picViewIdxLX = picViewIdxLXPred - (abs_diff_view_idx_minus1 + 1) (1)
- quando a sintaxe reordering_of_pic_nums_idc for igual a 5:
picViewIdxLX = picViewIdxLXPred + (abs_diff_view_idx_minus1 + 1) (2) picViewIdxLXPred vem a ser o valor de predição para a variável picViewIdxLX. Quando o processo especificado neste subitem é invocado pela primeira vez para uma fatia (ou seja, para a primeira ocorrência da sintaxe reordering_of_pic_nums_idc igual a 4 ou 5 na sintaxe ref_pic_list_reordering() ), os valores de predição picViewIdxLOPred e picViewIdxLIPred serão inicialmente definidos iguais a 0. Quando o processo especificado neste subitem é invocado pela primeira vez para uma fatia e a sintaxe reordering_of_pic_nums_idc é igual a 4, e o abs_diff_viéw_idx_minus1 seguinte é igual a 0, a variável picViewIdxLX é derivada diretamente como 0 sem usar as equações acima. Após cada atribuição da variável picViewIdxLX, o valor da variável picViewIdxLX será atribuído ao valor de predição picViewldxLXPred.
O procedimento a seguir é realizado a fim de colocar a visualização entre janelas de imagem com um índice de visualização igual à variável picViewIdxLX na posição de índice refldxLX, mudar a posição de quaisquer outras imagens restantes para mais adiante na lista, como se segue.
TargetViewID = num_multiview_refs_forListX [picViewIdxLX] para (cldx = num_ref_idx_IX_active_minus1 + 1; cldx > refldxLX; cldx-)
RefPicListX[ cldx] = RefPicListX[ cldx -1]
RefPicListX[ refldxLX++] = visualização entre janelas de imagens de referência com um identificador id de visualização igual a TargetViewID nldx = refldxLX
para ( cldx = refldxLX; cldx <= num_ref_idx_IX_active_minus1 + 1; cldx++) se ( ViewlD(RefPicListX[ cldx ])!= TargetViewID ||
PictureOrderCnt(RefPicListX [ cldx])! = CurrPOC)
RefPicListXI nldx++] = RefPicListX[ cldx ]
Quando CurrPOC indica o PicOrderCnt() da imagem de decodificação corrente. Conforme visto a partir da descrição acima, que impõe a restrição a seguir:
Quando o processo especificado neste subitem é invocado pela primeira vez para 20 uma fatia, e a sintaxe reordering_of_pic_nums_idc é igual a 4, e o elemento de sintaxe seguinte de abs_diff_view_idx_minus1 é igual a 0, neste caso a variável picViewIdxLX é derivada diretamente como 0 sem usar as equações acima. Isso exclui a possibilidade de se ter um valor negativo para a variável picViewIdxLX se, por exemplo, os valores de predição picViewIdxLXPred e abs_diff_view_idx_minus1 tiverem, ambos, valores iniciais de zero.
Além disso, ao se usar as equações (1) e (2), não será possível se duplicar as en
tradas na lista de referência, uma vez que essas equações irão gerar valores incorretos.
A fim de abordar estas questões, pelo menos uma implementação propõe se modificar a duas equações (1) e (2) da seguinte maneira.
A variável picViewIdxLX é derivada como se segue.
- Se a sintaxe reordering_of_pic_nums_idc for igual a 4
se (picViewIdxLXPred - ( abs_diff_view_idx_minus1 + 1) < 0)
picViewIdxLX = picViewIdxLXPred - (abs_diff_view_idx_minus1 + 1) + MaxViewIdx
(3)
ou
picViewIdxLX = picViewIdxLXPred - (abs_diff_view_idx_minus1 + 1)
- Caso contrário, a sintaxe (reordering_of_pic_nums_idc) será igual a 5, se (picViewIdxLXPred + (abs_diff_view_idx_minus1 + 1) > = MaxViewIdx) picViewIdxLX = picViewIdxLXPred + (abs_diff_view_idx_minus1 + 1) - MaxViewIdx
(4)
ou
picViewIdxLX = picViewIdxLXPred + (abs_diff_view_idx_minus1 + 1)
MaxViewIdx é uma variável, e o valor da variável MaxViewIdx valor nas equações
(3) e (4) é derivado ao se usar a sintaxe da extensão SPS MVC como segue:
Quando a imagem corrente é uma imagem de âncora, neste caso,
MaxViewIdx = num_anchor_refs_IX [curr_view_id]
De outra maneira,
MaxViewIdx = num_non_anchor_refs_IX [curr_view_id]
Claramente, tanto o codificador como o decodificador podem derivar os valores de MaxViewIdx.
Uma vantagem deste método é que ao se sinalizar abs_diff_view_idx_minus1 para um valor igual a (MaxViewldx-1), torna-se possível duplicar um valor de índice de visualização em particular. Ou seja, ao se usar a sintaxe da Tabela 2 para sinalizar esse valor, um valor de índice de visualização em particular será duplicado na lista de referência do decodificador, uma vez que a variável picViewIdxLX = picViewIdxLXPred.
Além disso, esse método elimina a restrição que foi originalmente aplicada sobre o valor de abs_diff_view_idx_minus1 quando a sintaxe "reordering_of_pic_nums_idc = 4" é o 20 primeiro comando da fatia. Ou seja, a variável picViewIdxLX não precisa ser automaticamente ajustada a zero. Isto acontece porque a primeira instrução "se" exatamente acima da equação (3) pega a ocorrência de um valor potencialmente inválido para a variável picViewIdxLX (conforme computado com a equação existente (1)).
As características e aspectos descritos no presente documento permitem, por e25 xemplo, a duplicação de uma visualização entre janelas de imagens de referência de uma lista de imagens de referência. Esta duplicação pode se referir apenas à duplicação de um ponteiro para uma imagem de referência corrente (que inclui os valores de pixel), em cujo caso a lista de imagens de referência poderá, por exemplo, incluir uma série de ponteiros para uma ou mais imagens de referência em questão. As imagens de referência correntes 30 podem ser armazenadas, por exemplo, em um armazenador temporário de imagem decodificada. Em tal implementação, um ou mais dentre os ponteiros da lista de imagens de referência são duplicados de modo os ponteiros apontem para a mesma imagem de referência em questão.
A duplicação da visualização entre janelas de imagens de referência de uma lista de imagens de referência pode ser usada, por exemplo, na realização de uma filtragem de referência adaptativa, conforme descrito no Pedido de Patente Provisório U.S. N. de Série 60/807 645, depositado em 18 de julho de 2006, e intitulado "Adaptive Reference Frame Filtering for Video Coding", cuja totalidade de conteúdos é incorporada ao presente documento a título de referência.
Deve ficar claro que as implementações podem ainda duplicar a imagem de referência corrente que é apontada por múltiplos ponteiros de uma lista de imagens de referência. Além disso, as implementações podem manter uma lista de imagens de referência que inclui as imagens de referência correntes, ao invés de simplesmente apontar para as imagens de referência em questão.
As características e aspectos das implementações descritas podem ser adaptados também para outras implementações. Por exemplo, outros processos de codificação / decodificação que mantêm uma lista de imagens de referência podem permitir a duplicação de uma imagem de referência da lista. Esses outros processos de codificação / decodificação podem permitir tal duplicação, utilizando, por exemplo, uma sinalização explícita ou uma sinalização explícita. Como exemplo de sinalização explícita, uma implementação pode incluir uma sintaxe com cada imagem codificada indicando se uma imagem de referência em particular deve ser duplicada na lista.
As implementações descritas no presente documento podem ser executadas, por exemplo, em um método ou processo, em um aparelho ou em um programa de software. Mesmo que apenas apresentado no contexto de uma única forma de implementação (por exemplo, apresentada apenas como um método), a implementação ou os recursos apresentados poderão também ser implementados de outras formas (por exemplo, como um aparelho ou um programa). Um aparelho pode ser implementado, por exemplo, em um hardware, em um software ou em um firmware apropriados. Os métodos podem ser implementados, por exemplo, em um aparelho como, por exemplo, em um decodificador, em um codificador, ou em algum outro dispositivo de processamento. Além disso, os métodos podem ser implementados por meio de instruções que são executadas por um dispositivo de processamento ou outro aparelho, e as instruções podem ser armazenadas em um meio legível em computador, como, por exemplo, em um CD ou em outro dispositivo de armazenamento legível em computador, ou em um circuito integrado.
Como se tornará evidente a uma pessoa com habilidade na técnica, as implementações podem ainda produzir um sinal formatado para carregar informações que podem ser, por exemplo, armazenadas ou transmitidas. As informações podem incluir, por exemplo, instruções para a execução de um método, ou dados produzidos por uma das implementações descritas.
Por exemplo, um sinal pode ser formatado de modo a carregar como dados os valores para a explícita sintaxe de sinalização.
Além disso, outras implementações são contempladas pelo presente pedido. Por exemplo, implementações adicionais podem ser criadas ao combinar, excluir, modificar ou suplementar vários aspectos das implementações apresentadas.
As reivindicações provêm uma pequena lista de diversas implementações. A lista não pretende ser exaustiva, sendo concebida tão-somente de modo a oferecer uma breve descrição de um pequeno número de implementações dentre as muitas possíveis.
Claims (17)
1. Método para construir uma lista de imagens de referência, em um formato de codificação de visualização de múltiplas janelas de vídeo, o método sendo CARACTERIZADO pelo fato de compreender as etapas de: - prover informações no fluxo de bits que indicam quando uma imagem de referência em particular deve ser duplicada em uma lista de imagens de referência; - reordenar de modo a permitir a duplicação de uma visualização entre janelas de imagens na lista de imagens de referência.
2. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que uma equação para calcular o valor de índice de visualização é modificada no sentido de permitir a duplicação.
3. Método, de acordo com a reivindicação 2, CARACTERIZADO pelo fato de que a equação adiciona o valor de um índice máximo de referência, quando uma determinada condição é atendida.
4. Método, de acordo com a reivindicação 2, CARACTERIZADO pelo fato de que a equação subtrai o valor de um índice máximo de referência quando uma determinada condição é atendida.
5. Método, de acordo com a reivindicação 3 ou 4, CARACTERIZADO pelo fato de que o valor máximo do índice de referência é determinado a partir de uma sintaxe SPS.
6. Método, de acordo com a reivindicação 5, CARACTERIZADO pelo fato de que o valor máximo do índice de referência pode ser diferente para as imagens âncoras e não âncoras.
7. Codificador configurado para prover informações, o codificador sendo CARACTERIZADO pelo fato de prover informações compreendendo instruções para obter a duplicação de uma imagem de referência em particular em uma lista de imagens de referência.
8. Codificador, de acordo com a reivindicação 7, CARACTERIZADO pelo fato de que a informação inclui um valor de uma sintaxe de sinalização explícita.
9. Decodificador, CARACTERIZADO pelo fato de ser configurado para duplicar uma imagem de referência em particular em uma lista de imagens de referência.
10. Codificador e decodificador, de acordo com as reivindicações 7 e 9, CARACTERIZADO pelo fato de que a imagem de referência em particular é uma imagem de referência de visualização entre janelas de imagens.
11. Decodificador, de acordo com a reivindicação 9, CARACTERIZADO pelo fato de que o dito decodificador é configurado ainda para receber informações, instruindo que a duplicação será executada.
12. Decodificador, de acordo com a reivindicação 11, CARACTERIZADO pelo fato de que a informação inclui um valor de uma sintaxe de sinalização explícita.
13. Método para possível utilização por um codificador, o método sendo CARACTERIZADO pelo fato de incluir a etapa de prover informações, instruindo que uma imagem de referência em particular deve ser duplicada em uma lista de imagens de referência.
14. Método para possível utilização por um decodificador, o método sendo CARACTERIZADO pelo fato de incluir a etapa de duplicar uma imagem de referência particular em uma lista de imagens de referência.
15. Método, de acordo com a reivindicação 14, CARACTERIZADO pelo fato de incluir, ainda, a etapa de receber informações, instruindo que a duplicação será executada.
16. Meio legível em computador, CARACTERIZADO pelo fato de incluir instruções de modo a fazer com que uma imagem de referência seja duplicada em uma lista de imagens de referência mantida por um decodificador para utilização na decodificação de imagens.
17. Meio, de acordo com a reivindicação 16, CARACTERIZADO pelo fato de que as ditas instruções fazem com que a imagem de referência seja duplicada em resposta ao recebimento de um sinal que instrui tal duplicação.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US92171307P | 2007-04-04 | 2007-04-04 | |
| US60/921.713 | 2007-04-04 | ||
| PCT/US2008/003492 WO2008123917A2 (en) | 2007-04-04 | 2008-03-17 | Reference picture list management |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| BRPI0809210A2 true BRPI0809210A2 (pt) | 2014-09-02 |
Family
ID=39739681
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BRPI0809210-9A BRPI0809210A2 (pt) | 2007-04-04 | 2008-03-17 | Gerenciamento de lista de imagens de referência |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US20100118933A1 (pt) |
| EP (1) | EP2135456B1 (pt) |
| JP (5) | JP5273824B2 (pt) |
| KR (1) | KR101418627B1 (pt) |
| CN (1) | CN101647287B (pt) |
| BR (1) | BRPI0809210A2 (pt) |
| TW (3) | TWI551116B (pt) |
| WO (1) | WO2008123917A2 (pt) |
Families Citing this family (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2010086500A1 (en) | 2009-01-28 | 2010-08-05 | Nokia Corporation | Method and apparatus for video coding and decoding |
| EP2394432A4 (en) * | 2009-02-03 | 2016-12-14 | Thomson Licensing | PROCESS AND DEVICES FOR MOTION COMPENSATION WITH SMOOTH REFERENCE IMAGE IN BITTIEFENSKALIERBARKEIT |
| EP2424240A4 (en) * | 2009-04-22 | 2013-04-10 | Lg Electronics Inc | METHOD FOR MODIFYING REFERENCE COPY LISTS FOR A MORE VIEWED VIDEO |
| ES2739475T3 (es) * | 2009-05-11 | 2020-01-31 | Ntt Docomo Inc | Dispositivo, método y programa de codificación de imágenes en movimiento, y dispositivo, método y programa de decodificación de imágenes en movimiento |
| US8411746B2 (en) * | 2009-06-12 | 2013-04-02 | Qualcomm Incorporated | Multiview video coding over MPEG-2 systems |
| US8780999B2 (en) | 2009-06-12 | 2014-07-15 | Qualcomm Incorporated | Assembling multiview video coding sub-BITSTREAMS in MPEG-2 systems |
| CN102342109A (zh) * | 2009-07-29 | 2012-02-01 | 松下电器产业株式会社 | 多视点视频解码装置及其方法 |
| US9485492B2 (en) | 2010-09-14 | 2016-11-01 | Thomson Licensing Llc | Compression methods and apparatus for occlusion data |
| US20130287106A1 (en) * | 2011-01-07 | 2013-10-31 | Samsung Electronics Co., Ltd. | Video prediction method capable of performing bilateral prediction and unilateral prediction and a device thereof, video encoding method and device thereof, and video decoding method and device thereof |
| US9008176B2 (en) * | 2011-01-22 | 2015-04-14 | Qualcomm Incorporated | Combined reference picture list construction for video coding |
| US8934552B2 (en) * | 2011-03-31 | 2015-01-13 | Qualcomm Incorporated | Combined reference picture list construction and mapping |
| US11496760B2 (en) | 2011-07-22 | 2022-11-08 | Qualcomm Incorporated | Slice header prediction for depth maps in three-dimensional video codecs |
| US9521418B2 (en) * | 2011-07-22 | 2016-12-13 | Qualcomm Incorporated | Slice header three-dimensional video extension for slice header prediction |
| US9288505B2 (en) | 2011-08-11 | 2016-03-15 | Qualcomm Incorporated | Three-dimensional video with asymmetric spatial resolution |
| EP2751998A4 (en) * | 2011-08-30 | 2015-08-12 | Intel Corp | Multiview video coding schemes |
| US9237356B2 (en) | 2011-09-23 | 2016-01-12 | Qualcomm Incorporated | Reference picture list construction for video coding |
| US9264717B2 (en) | 2011-10-31 | 2016-02-16 | Qualcomm Incorporated | Random access with advanced decoded picture buffer (DPB) management in video coding |
| US9485503B2 (en) | 2011-11-18 | 2016-11-01 | Qualcomm Incorporated | Inside view motion prediction among texture and depth view components |
| PL3016391T3 (pl) | 2012-01-17 | 2017-09-29 | Telefonaktiebolaget Lm Ericsson (Publ) | Obsługa listy obrazów referencyjnych |
| TWI863690B (zh) | 2012-01-19 | 2024-11-21 | 美商內數位Vc控股公司 | 影像編碼參考圖像清單發信及建構方法及裝置 |
| CN103650497B (zh) | 2012-03-02 | 2018-01-05 | 太阳专利托管公司 | 图像编码方法、图像解码方法、图像编码装置、图像解码装置及图像编码解码装置 |
| DK2830313T3 (da) | 2012-04-16 | 2019-10-28 | Samsung Electronics Co Ltd | Fremgangsmåde og apparat til at fastslå referencebilledsæt af et billede. |
| US9438898B2 (en) | 2012-09-07 | 2016-09-06 | Vid Scale, Inc. | Reference picture lists modification |
| US9807407B2 (en) * | 2013-12-02 | 2017-10-31 | Qualcomm Incorporated | Reference picture selection |
| US20170359577A1 (en) * | 2014-10-07 | 2017-12-14 | Samsung Electronics Co., Ltd. | Method and device for encoding or decoding multi-layer image, using interlayer prediction |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3443880B2 (ja) * | 1992-09-18 | 2003-09-08 | ソニー株式会社 | ビデオ信号符号化方法及び復号化方法 |
| GB2352350B (en) * | 1999-07-19 | 2003-11-05 | Nokia Mobile Phones Ltd | Video coding |
| JP2004007379A (ja) * | 2002-04-10 | 2004-01-08 | Toshiba Corp | 動画像符号化方法及び動画像復号化方法 |
| KR100481732B1 (ko) * | 2002-04-20 | 2005-04-11 | 전자부품연구원 | 다 시점 동영상 부호화 장치 |
| US7489342B2 (en) * | 2004-12-17 | 2009-02-10 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for managing reference pictures in multiview videos |
| JP2007503776A (ja) * | 2003-08-26 | 2007-02-22 | トムソン ライセンシング | インター符号化に使われる参照画像数を最小化するための方法および装置 |
| US20060083298A1 (en) * | 2004-10-14 | 2006-04-20 | Nokia Corporation | Reference picture management in video coding |
| US7728877B2 (en) * | 2004-12-17 | 2010-06-01 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for synthesizing multiview videos |
| US7728878B2 (en) * | 2004-12-17 | 2010-06-01 | Mitsubishi Electric Research Labortories, Inc. | Method and system for processing multiview videos for view synthesis using side information |
| US7710462B2 (en) * | 2004-12-17 | 2010-05-04 | Mitsubishi Electric Research Laboratories, Inc. | Method for randomly accessing multiview videos |
| KR100732961B1 (ko) * | 2005-04-01 | 2007-06-27 | 경희대학교 산학협력단 | 다시점 영상의 스케일러블 부호화, 복호화 방법 및 장치 |
| JP2007067842A (ja) * | 2005-08-31 | 2007-03-15 | Victor Co Of Japan Ltd | 動画像符号化データ編集装置および動画像符号化データ編集方法 |
| US8559515B2 (en) * | 2005-09-21 | 2013-10-15 | Samsung Electronics Co., Ltd. | Apparatus and method for encoding and decoding multi-view video |
| KR100934671B1 (ko) * | 2006-03-30 | 2009-12-31 | 엘지전자 주식회사 | 비디오 신호를 디코딩/인코딩하기 위한 방법 및 장치 |
| JP2007336275A (ja) * | 2006-06-15 | 2007-12-27 | Toshiba Corp | 動画像再生装置 |
| BRPI0716957A2 (pt) * | 2006-10-13 | 2013-10-29 | Thomson Licensing | Sintaxe de gerenciamento de lista de imagens de referência para codificação de vídeo de múltiplas vistas |
| EP2087738B1 (en) * | 2006-10-13 | 2016-04-13 | Thomson Licensing | Method for reference picture management involving multiview video coding |
| BRPI0718206B1 (pt) * | 2006-10-16 | 2020-10-27 | Nokia Technologies Oy | método para codificar uma pluralidade de visões de uma cena; método de codificação de uma sequência de bits de vídeo codificada e aparelho |
-
2008
- 2008-03-17 CN CN2008800104037A patent/CN101647287B/zh not_active Expired - Fee Related
- 2008-03-17 JP JP2010502080A patent/JP5273824B2/ja not_active Expired - Fee Related
- 2008-03-17 EP EP08726902.3A patent/EP2135456B1/en not_active Not-in-force
- 2008-03-17 KR KR1020097020719A patent/KR101418627B1/ko not_active Expired - Fee Related
- 2008-03-17 WO PCT/US2008/003492 patent/WO2008123917A2/en not_active Ceased
- 2008-03-17 US US12/450,098 patent/US20100118933A1/en not_active Abandoned
- 2008-03-17 BR BRPI0809210-9A patent/BRPI0809210A2/pt active Search and Examination
- 2008-04-03 TW TW101109389A patent/TWI551116B/zh not_active IP Right Cessation
- 2008-04-03 TW TW101109388A patent/TWI533669B/zh not_active IP Right Cessation
- 2008-04-03 TW TW097112372A patent/TWI422230B/zh not_active IP Right Cessation
-
2012
- 2012-11-07 JP JP2012245139A patent/JP5558545B2/ja not_active Expired - Fee Related
-
2014
- 2014-06-03 JP JP2014114534A patent/JP6066425B2/ja not_active Expired - Fee Related
-
2016
- 2016-11-17 JP JP2016224226A patent/JP2017063471A/ja not_active Ceased
-
2018
- 2018-10-29 JP JP2018202442A patent/JP2019068427A/ja active Pending
Also Published As
| Publication number | Publication date |
|---|---|
| EP2135456B1 (en) | 2017-05-03 |
| TWI551116B (zh) | 2016-09-21 |
| CN101647287B (zh) | 2013-10-30 |
| TW200904198A (en) | 2009-01-16 |
| JP5558545B2 (ja) | 2014-07-23 |
| TW201230814A (en) | 2012-07-16 |
| WO2008123917A2 (en) | 2008-10-16 |
| JP2017063471A (ja) | 2017-03-30 |
| CN101647287A (zh) | 2010-02-10 |
| JP2010524338A (ja) | 2010-07-15 |
| TWI422230B (zh) | 2014-01-01 |
| EP2135456A2 (en) | 2009-12-23 |
| JP2013066200A (ja) | 2013-04-11 |
| TWI533669B (zh) | 2016-05-11 |
| JP6066425B2 (ja) | 2017-01-25 |
| KR20100015366A (ko) | 2010-02-12 |
| TW201230815A (en) | 2012-07-16 |
| JP2014195320A (ja) | 2014-10-09 |
| KR101418627B1 (ko) | 2014-07-15 |
| JP5273824B2 (ja) | 2013-08-28 |
| WO2008123917A3 (en) | 2008-12-04 |
| JP2019068427A (ja) | 2019-04-25 |
| US20100118933A1 (en) | 2010-05-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| BRPI0809210A2 (pt) | Gerenciamento de lista de imagens de referência | |
| US11570447B2 (en) | Video coding and video decoding | |
| CN101653000B (zh) | 用于包含多视点视频编码的参考图像管理的方法 | |
| ES3017811T3 (en) | Reference picture signaling | |
| BRPI0716957A2 (pt) | Sintaxe de gerenciamento de lista de imagens de referência para codificação de vídeo de múltiplas vistas | |
| BRPI0708305A2 (pt) | método e aparelho para uso em um sistema de codificação de vìdeo de múltiplas visões | |
| JP5351020B2 (ja) | バーチャルリファレンスピクチャを使用した方法及び装置 | |
| KR20100014552A (ko) | 비디오 신호의 인코딩/디코딩 방법 및 장치 | |
| BR122012021797A2 (pt) | Aparelho para incorporar informação de usabilidade de vídeo (vui) em um sistema de codificação de vídeo de múltiplas visualizações (mvc) | |
| BR122022001681B1 (pt) | Sistema de computação, método em um sistema de computação que implementa um decodificador de vídeo e meio de armazenamento legível por computador | |
| BR112014018856B1 (pt) | Método para a codificação de conteúdo de vídeo tridimensional, aparelho para codificação de conteúdo de vídeo tridimensional, meio legível por computador, método para decodificar conteúdo de vídeo tridimensional codificado, aparelho para decodificar conteúdo de vídeo tridimensional codificado | |
| JP2016514432A (ja) | デプスルックアップテーブルを符号化する方法 | |
| BR112015024940B1 (pt) | Método e dispositivo para construir uma primeira lista de imagens de referência e uma segunda lista de imagens de referência para predição intercamadas de uma imagem atual de uma sequência de vídeo multicamadas, meio de armazenamento legível por computador, e, terminal móvel | |
| BR112015020340B1 (pt) | Processo e dispositivo de decodificação de uma imagem corrente, suporte de gravação legível por computador e processo e dispositivo de codificação de uma imagem corrente | |
| BRPI0714150A2 (pt) | mÉtodos e aparelho para uso em codificaÇço de vÍdeo de méltiplas visualizaÇÕes | |
| BR122012021798A2 (pt) | Método para incorporar informação de usabilidade de vídeo (vui) em um sistema de codificação de vídeo de múltiplas visualizações (mvc) |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| B15K | Others concerning applications: alteration of classification |
Ipc: H04N 19/114 (2014.01), H04N 19/597 (2014.01), H04N |
|
| B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
| B25G | Requested change of headquarter approved |
Owner name: THOMSON LICENSING (FR) |
|
| B25G | Requested change of headquarter approved |
Owner name: THOMSON LICENSING (FR) |
|
| B25A | Requested transfer of rights approved |
Owner name: INTERDIGITAL VC HOLDINGS, INC. (US) |
|
| B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
| B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
| B11D | Dismissal acc. art. 38, par 2 of ipl - failure to pay fee after grant in time |