BR112021012414A2 - Dispositivo de decodificação de imagem em movimento, dispositivode codificação de imagem em movimento e métodos relacionados - Google Patents

Dispositivo de decodificação de imagem em movimento, dispositivode codificação de imagem em movimento e métodos relacionados Download PDF

Info

Publication number
BR112021012414A2
BR112021012414A2 BR112021012414-4A BR112021012414A BR112021012414A2 BR 112021012414 A2 BR112021012414 A2 BR 112021012414A2 BR 112021012414 A BR112021012414 A BR 112021012414A BR 112021012414 A2 BR112021012414 A2 BR 112021012414A2
Authority
BR
Brazil
Prior art keywords
motion vector
motion information
block
vector predictor
unit
Prior art date
Application number
BR112021012414-4A
Other languages
English (en)
Inventor
Shigeru Fukushima
Hiroya Nakamura
Satoru Sakazume
Toru Kumakura
Hiroyuki Kurashige
Hideki Takehara
Original Assignee
Jvckenwood Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jvckenwood Corporation filed Critical Jvckenwood Corporation
Publication of BR112021012414A2 publication Critical patent/BR112021012414A2/pt

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

dispositivo de decodificação de imagem em movimento, dispositivo de codificação de imagem em movimento e métodos relacionados. a fim de prover tecnologia de codificação eficiente com uma carga baixa, um dispositivo de decodificação de imagem inclui uma unidade de derivação de candidato de informações de movimento espacial configurada para derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço, uma unidade de derivação de candidato de informações de movimento temporal configurada para derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo e uma unidade de derivação de candidato de informações de movimento com base em histórico configurada para derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento temporal é comparado a nenhum dentre o candidato de informações de movimento espacial ou o candidato de informações de movimento com base em histórico em relação às informações de movimento.

Description

DISPOSITIVO DE DECODIFICAÇÃO DE IMAGEM EM MOVIMENTO, DISPOSITIVO
DE CODIFICAÇÃO DE IMAGEM EM MOVIMENTO E MÉTODOS RELACIONADOS [Campo Técnico]
[001] A presente invenção está relacionada a tecnologia de codificação e decodificação de imagem para dividir uma imagem em blocos e desempenhar predição. [Antecedentes Técnicos]
[002] Na codificação e decodificação de imagem, uma imagem alvo é dividida em blocos, cada um dos quais é um conjunto de um número prescrito de amostras, e um processo é desempenhado em unidades de blocos. A eficiência da codificação é melhorada pela divisão de uma imagem em blocos apropriados e definindo apropriadamente a predição intraimagem (intrapredição) e predição interimagem (interpredição).
[003] Na codificação/decodificação de imagem em movimento, a eficiência da codificação é melhorada pela interpredição para desempenhar a predição a partir de uma imagem codificada/decodificada. A Literatura Patentária 1 descreve a tecnologia para aplicar uma transformada afim no momento da interpredição. Não é incomum que um objeto cause deformação, tal como ampliação/redução e rotação em imagem em movimento, e a codificação eficiente é habilitada pela aplicação da tecnologia da Literatura Patentária 1. [Lista de Citações] [Literatura Patentária] [Literatura Patentária 1]
[004] Pedido de Patente Japonesa não examinado, Primeira Publicação No H9-172644. [Sumário da Invenção] [Problema Técnico]
[005] No entanto, porque a tecnologia da Literatura Patentária 1 envolve uma transformada de imagem, existe o problema de que a carga de processamento é grande. Tendo em vista o problema acima, a presente invenção provê tecnologia de codificação eficiente com uma carga baixa. [Solução para o Problema]
[006] A fim de resolver os problemas acima, um dispositivo de decodificação de imagem em movimento de acordo com um aspecto da presente invenção inclui uma unidade de derivação de candidato de informações de movimento espacial configurada para derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço; uma unidade de derivação de candidato de informações de movimento temporal configurada para derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo; e uma unidade de derivação de candidato de informações de movimento com base em histórico configurada para derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento temporal é comparado a nenhum dentre o candidato de informações de movimento espacial ou o candidato de informações de movimento com base em histórico em relação às informações de movimento.
[007] Além disso, um método de decodificação de imagem em movimento de acordo com outro aspecto da presente invenção inclui etapas de: derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço; derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo; e derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento temporal é comparado a nenhum dentre o candidato de informações de movimento espacial ou o candidato de informações de movimento com base em histórico em relação às informações de movimento.
[008] Além disso, um programa de decodificação de imagem em movimento de acordo com outro aspecto da presente invenção faz com que um computador execute as etapas de: derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço; derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo; e derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento temporal é comparado a nenhum dentre o candidato de informações de movimento espacial ou o candidato de informações de movimento com base em histórico em relação às informações de movimento. [Efeitos Vantajosos da Invenção]
[009] De acordo com a presente invenção, é possível implementar um processo de codificação/decodificação de imagem altamente eficiente com uma carga baixa. [Breve Descrição das Figuras]
[0010] A figura 1 é um diagrama de blocos de um dispositivo de codificação de imagem de acordo com uma modalidade da presente invenção.
[0011] A figura 2 é um diagrama de blocos de um dispositivo de decodificação de imagem de acordo com uma modalidade da presente invenção.
[0012] A figura 3 é um fluxograma explicativo mostrando uma operação de divisão de um bloco de árvore.
[0013] A figura 4 é um diagrama mostrando um estado no qual uma imagem de entrada é dividida em blocos de árvore.
[0014] A figura 5 é um diagrama explicativo mostrando a varredura-Z.
[0015] A figura 6A é um diagrama mostrando uma forma dividida de um bloco.
[0016] A figura 6B é um diagrama mostrando uma forma dividida de um bloco.
[0017] A figura 6C é um diagrama mostrando uma forma dividida de um bloco.
[0018] A figura 6D é um diagrama mostrando uma forma dividida de um bloco.
[0019] A figura 6E é um diagrama mostrando uma forma dividida de um bloco.
[0020] A figura 7 é um fluxograma explicativo mostrando uma operação de divisão de um bloco em quatro partes.
[0021] A figura 8 é um fluxograma explicativo mostrando uma operação de divisão de um bloco em duas ou três partes.
[0022] A figura 9 é a sintaxe para expressar um formato de separação de bloco.
[0023] A figura 10A é um diagrama explicativo mostrando intrapredição.
[0024] A figura 10B é um diagrama explicativo mostrando a intrapredição.
[0025] A figura 11 é um diagrama explicativo mostrando um bloco de referência de interpredição.
[0026] A figura 12 é a sintaxe para expressar um modo de predição de bloco de codificação.
[0027] A figura 13 é um diagrama mostrando a correspondência entre um elemento de sintaxe relacionado à interpredição e um modo.
[0028] A figura 14 é um diagrama explicativo mostrando a compensação de movimento afim de dois pontos de controle.
[0029] A figura 15 é um diagrama explicativo mostrando a compensação de movimento afim de três pontos de controle.
[0030] A figura 16 é um diagrama de blocos de uma configuração detalhada de uma unidade de interpredição 102 da figura 1.
[0031] A figura 17 é um diagrama de blocos de uma configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16.
[0032] A figura 18 é um diagrama de blocos de uma configuração detalhada de uma unidade de derivação de modo de mesclagem normal 302 da figura 16.
[0033] A figura 19 é um fluxograma explicativo mostrando um processo de derivação de modo de preditor de vetor de movimento normal da unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16.
[0034] A figura 20 é um fluxograma mostrando um procedimento de processamento do processo de derivação do modo de preditor de vetor de movimento normal.
[0035] A figura 21 é um fluxograma explicativo mostrando um procedimento de processamento de um processo de derivação de modo de mesclagem normal.
[0036] A figura 22 é um diagrama de blocos de uma configuração detalhada de uma unidade de interpredição 203 da figura 2.
[0037] A figura 23 é um diagrama de blocos de uma configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22.
[0038] A figura 24 é um diagrama de blocos de uma configuração detalhada de uma unidade de derivação de modo de mesclagem normal 402 da figura 22.
[0039] A figura 25 é um fluxograma explicativo mostrando um processo de derivação de modo de preditor de vetor de movimento normal da unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22.
[0040] A figura 26 é um diagrama explicativo mostrando um procedimento de processamento de inicialização/atualização de uma lista de candidatos de preditor de vetor de movimento com base em histórico.
[0041] A figura 27 é um fluxograma de um procedimento de processamento de verificação de elemento idêntico no procedimento de processamento de inicialização/atualização de uma lista de candidatos de preditor de vetor de movimento com base em histórico.
[0042] A figura 28 é um fluxograma de um procedimento de processamento de deslocamento de elemento no procedimento de processamento de inicialização/atualização de uma lista de candidatos de preditor de vetor de movimento com base em histórico.
[0043] A figura 29 é um fluxograma explicativo mostrando um procedimento de processamento de derivação de candidato de preditor de vetor de movimento com base em histórico.
[0044] A figura 30 é um fluxograma explicativo mostrando um procedimento de processamento de derivação de candidato de mesclagem com base em histórico.
[0045] A figura 31A é um diagrama explicativo mostrando um exemplo de um processo de atualização de lista de candidatos de preditor de vetor de movimento com base em histórico.
[0046] A figura 31B é um diagrama explicativo mostrando um exemplo de um processo de atualização de lista de candidatos de preditor de vetor de movimento com base em histórico.
[0047] A figura 31C é um diagrama explicativo mostrando um exemplo de um processo de atualização de lista de candidatos de preditor de vetor de movimento com base em histórico.
[0048] A figura 32 é um diagrama explicativo mostrando a predição de movimento compensado quando um tempo de relógio de uma imagem de referência (RefL0Pic) de L0 é anterior ao de uma imagem alvo (CurPic) como predição L0.
[0049] A figura 33 é um diagrama explicativo mostrando a predição de movimento compensado quando um tempo de relógio de uma imagem de referência de predição L0 é posterior ao de uma imagem alvo como predição L0.
[0050] A figura 34 é um diagrama explicativo mostrando uma direção de predição de predição de movimento compensado quando um tempo de relógio de uma imagem de referência de predição L0 é anterior ao de uma imagem alvo e um tempo de relógio de uma imagem de referência de predição L1 é posterior àquele de uma imagem alvo como bipredição.
[0051] A figura 35 é um diagrama explicativo mostrando uma direção de predição de predição de movimento compensado quando um tempo de relógio de uma imagem de referência de predição L0 e um tempo de relógio de uma imagem de referência de predição L1 são anteriores ao de uma imagem alvo como bipredição.
[0052] A figura 36 é um diagrama explicativo mostrando uma direção de predição de predição de movimento compensado quando um tempo de relógio de uma imagem de referência de predição L0 e um tempo de relógio de uma imagem de referência de predição L1 são posteriores ao de uma imagem alvo como bipredição.
[0053] A figura 37 é um diagrama explicativo mostrando um exemplo de uma configuração de hardware de um dispositivo de codificação/decodificação de acordo com uma modalidade da presente invenção.
[0054] A figura 38 é um diagrama de blocos de uma configuração detalhada da unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16 de acordo com uma segunda modalidade da presente invenção.
[0055] A figura 39 é um diagrama de blocos de uma configuração detalhada da unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22 de acordo com a segunda modalidade da presente invenção.
[0056] A figura 40 é um diagrama de blocos de uma configuração detalhada da unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16 de acordo com uma terceira modalidade da presente invenção.
[0057] A figura 41 é um diagrama de blocos de uma configuração detalhada da unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22 de acordo com a terceira modalidade da presente invenção. [Descrição das Modalidades]
[0058] A tecnologia e os termos técnicos usados na modalidade serão definidos. <Bloco de árvore>
[0059] Na modalidade, uma imagem alvo de codificação/decodificação é igualmente dividida em unidades de um tamanho predeterminado. Esta unidade é definida como um bloco de árvore. Embora o tamanho do bloco de árvore é de amostras de 128×128 na figura 4, o tamanho do bloco de árvore não está limitado aos mesmos e qualquer tamanho pode ser definido. O bloco de árvore de um alvo (correspondendo a um alvo de codificação em um processo de codificação ou um alvo de decodificação no processo de decodificação) é comutado em uma ordem de varredura raster, ou seja, da esquerda para a direita e de topo para o fundo. O interior de cada bloco de árvore pode ser adicionalmente dividido recursivamente. Um bloco que é um alvo de codificação/decodificação após o bloco de árvore ser dividido recursivamente é definido como um bloco de codificação. Além disso, um bloco de árvore e um bloco de codificação são definidos coletivamente como blocos. A codificação eficiente é habilitada por desempenhar a separação de blocos apropriado. O tamanho do bloco de árvore pode ser um valor fixo predeterminado pelo dispositivo de codificação e o dispositivo de decodificação ou o tamanho do bloco de árvore determinado pelo dispositivo de codificação pode ser configurado para ser transmitido para o dispositivo de decodificação. Na presente invenção, um tamanho máximo do bloco de árvore é de amostras de 128×128 e um tamanho mínimo do bloco de árvore é de amostras de 16×16. Além disso, um tamanho máximo do bloco de codificação é de amostras de 64×64 e um tamanho mínimo do bloco de codificação é de amostras de 4×4. <Modo de predição>
[0060] A comutação é desempenhada entre intrapredição (MODE_INTRA) na qual a predição é desempenhada a partir de um sinal de imagem processado da imagem alvo e a interpredição (MODE_INTER) na qual a predição é desempenhada a partir de um sinal de uma imagem de uma imagem processada em unidades de blocos de codificação alvo.
[0061] A imagem processada é usada para uma imagem, um sinal de imagem, um bloco de árvore, um bloco, um bloco de codificação e afins obtidos ao decodificar um sinal completamente codificado no processo de codificação e é usado para uma imagem, um sinal de imagem, um bloco de árvore, um bloco, um bloco de codificação e afins obtidos ao completar a decodificação em um processo de decodificação.
[0062] O modo no qual a intrapredição (MODE_INTRA) e a interpredição (MODE_INTER) são identificadas é definido como o modo de predição (PredMode). O modo de predição (PredMode) tem intrapredição (MODE_INTRA) ou interpredição (MODE_INTER) como um valor. <Interpredição>
[0063] Na interpredição, na qual a predição é desempenhada a partir de um sinal de imagem de uma imagem processada, uma pluralidade de imagem processadas pode ser usada como imagens de referência. A fim de gerenciar uma pluralidade de imagens de referência, dois tipos de listas de referência de L0 (lista de referência 0) e L1 (lista de referência 1) são definidos e uma imagem de referência é identificada usando cada índice de referência. Em uma fatia P, a predição L0 (Pred_L0) pode ser usada. Em uma fatia B, a predição L0 (Pred_L0), a predição L1 (Pred_L1) e a bipredição (Pred_BI) podem ser usadas. A predição L0 (Pred_L0) é uma interpredição que se refere a uma imagem de referência gerenciada em L0 e a predição L1 (Pred_L1) é uma interpredição que se refere a uma imagem de referência gerenciada em L1. A bipredição (Pred_BI) é interpredição na qual tanto a predição L0 quanto a predição L1 são desempenhadas e uma imagem de referência gerenciada em cada um de L0 e L1 é referida. As informações para identificar a predição L0, a predição L1 e a bipredição são definidas como um modo de interpredição. No processamento subsequente, constantes e variáveis com o subscrito LX na saída são assumidas como sendo processadas para cada uma de L0 e L1. <Modo de preditor de vetor de movimento>
[0064] O modo de preditor de vetor de movimento é um modo para transmitir um índice para identificar um preditor de vetor de movimento, uma diferença de vetor de movimento, um modo de interpredição e um índice de referência e determinar informações de interpredição de um bloco alvo. O preditor de vetor de movimento é derivado a partir de um candidato de preditor de vetor de movimento derivado a partir de um bloco processado vizinho do bloco alvo ou um bloco localizado na mesma posição ou nas proximidades de (perto) do bloco alvo entre os blocos pertencentes à imagem processada e um índice para identificar um preditor de vetor de movimento. <Modo de mesclagem>
[0065] O modo de mesclagem é um modo no qual as informações de interpredição de um bloco alvo são derivadas a partir de informações de interpredição de um bloco processado vizinho de um bloco alvo ou um bloco localizado na mesma posição ou nas proximidades de (perto) do bloco alvo entre blocos pertencentes à imagem processada sem transmitir uma diferença de vetor de movimento e um índice de referência.
[0066] O bloco processado vizinho do bloco alvo e as informações de interpredição do bloco processado são definidos como candidatos de mesclagem espacial. O bloco localizado na mesma posição ou nas proximidades de (perto) do bloco alvo entre os blocos pertencentes à imagem processada e as informações de interpredição derivadas a partir de informações de interpredição do bloco são definidos como candidatos de mesclagem temporal. Cada candidato de mesclagem é registrado em uma lista de candidatos de mesclagem e um candidato de mesclagem usado para predição de um bloco alvo é identificado por um índice de mesclagem. <Bloco vizinho>
[0067] Figura 11 é um diagrama explicativo mostrando um bloco de referência que é referido na derivação de informações de interpredição no modo de preditor de vetor de movimento e no modo de mesclagem. A0, A1, A2, B0, B1, B2 e B3 são blocos processados próximos ao bloco alvo. T0 é um bloco localizado na mesma posição ou nas proximidades de (perto) do bloco alvo na imagem alvo entre os blocos pertencentes à imagem processada.
[0068] A1 e A2 são blocos localizados no lado esquerdo do bloco de codificação alvo e vizinho do bloco de codificação alvo. B1 e B3 são blocos localizados no lado superior do bloco de codificação alvo e vizinhos do bloco de codificação alvo. A0, B0 e B2 são blocos localizados na parte inferior esquerda, superior direita e superior esquerda do bloco de codificação alvo, respectivamente.
[0069] Detalhes de como lidar com blocos vizinhos no modo de preditor de vetor de movimento e no modo de mesclagem serão descritos abaixo. <Compensação de movimento afim>
[0070] A compensação de movimento afim é um processo de desempenhar a compensação de movimento ao dividir um bloco de codificação em sub-blocos de uma unidade predeterminada e determinar individualmente um vetor de movimento para cada um dos sub-blocos nos quais o bloco de codificação é dividido. O vetor de movimento de cada sub-bloco é derivado com base em um ou mais pontos de controle derivados a partir de informações de interpredição de um bloco processado vizinho do bloco alvo ou um bloco localizado na mesma posição ou nas proximidades de (perto) do bloco alvo entre os blocos pertencentes à imagem processada. Embora o tamanho do sub-bloco é de amostras de 4×4 na presente modalidade, o tamanho do sub-bloco não é limitado a ele e um vetor de movimento pode ser derivado em unidades de amostras.
[0071] Um exemplo de compensação de movimento afim no caso de dois pontos de controle é mostrado na figura 14. Neste caso, os dois pontos de controle têm dois parâmetros de um componente de direção horizontal e um componente de direção vertical. Assim, uma transformada afim no caso de dois pontos de controle é referida como uma transformada afim de quatro parâmetros. CP1 e CP2 da figura 14 são pontos de controle.
[0072] Um exemplo de compensação de movimento afim no caso de três pontos de controle é mostrado na figura 15. Neste caso, os três pontos de controle têm dois parâmetros de um componente de direção horizontal e um componente de direção vertical. Assim, uma transformada afim no caso de três pontos de controle é referida como uma transformada afim de seis parâmetros. CP1, CP2 e CP3 da figura 15 são pontos de controle.
[0073] A compensação de movimento afim pode ser usada tanto no modo de preditor de vetor de movimento quanto no modo de mesclagem. Um modo no qual a compensação de movimento afim é aplicada no modo de preditor de vetor de movimento é definido como um modo de preditor de vetor de movimento com base em sub-bloco e um modo no qual a compensação de movimento afim é aplicada no modo de mesclagem é definido como um modo de mesclagem com base em sub-bloco. <Sintaxe de interpredição>
[0074] A sintaxe relacionada à interpredição será descrita usando as figuras. 12 e 13.
[0075] O flag merge_flag na figura 12 indica se o bloco de codificação alvo está definido para o modo de mesclagem ou o modo de preditor de vetor de movimento. O flag merge_affine_flag indica se o modo de mesclagem com base em sub-bloco é aplicado ou não ao bloco de codificação alvo do modo de mesclagem. O flag inter_affine_flag indica se o modo de preditor de vetor de movimento com base em sub-bloco é aplicado ou não ao bloco de codificação alvo do modo de preditor de vetor de movimento. O flag cu_affine_type_flag é usado para determinar o número de pontos de controle no modo de preditor de vetor de movimento com base em sub-bloco.
[0076] Figura 13 mostra um valor de cada elemento de sintaxe e um método de predição correspondente a tal. O modo de mesclagem normal corresponde a merge_flag=1 e merge_affine_flag=0 e não é um modo de mesclagem com base em sub-bloco. O modo de mesclagem com base em sub- bloco corresponde a merge_flag=1 e merge_affine_flag=1. O modo de preditor de vetor de movimento normal corresponde a merge_flag=0 e inter_affine_flag=0. O modo de preditor de vetor de movimento normal é um modo de mesclagem de preditor de vetor de movimento que não é um modo de preditor de vetor de movimento com base em sub-bloco. O modo de preditor de vetor de movimento com base em sub-bloco corresponde a merge_flag=0 e inter_affine_flag=1. Quando merge_flag=0 e inter_affine_flag=1, cu_affine_type_flag é adicionalmente transmitido para determinar o número de pontos de controle. <POC>
[0077] Uma contagem de ordem de imagem (POC) é uma variável associada a uma imagem a ser codificada e é preparada para um valor que é incrementado em 1 de acordo com uma ordem de saída de imagem. De acordo com o valor POC, é possível discriminar se as imagens são iguais, discriminar uma relação ântero-posterior entre as imagens na ordem de saída ou derivar a distância entre as imagens. Por exemplo, se as POCs de duas imagens têm o mesmo valor, pode ser determinado que são a mesma imagem. Quando as POCs de duas imagens têm valores diferentes, pode ser determinado que a imagem com o menor valor de POC é a imagem a ser emitida primeiro. Uma diferença entre as POCs das duas imagens indica uma distância interimagens na direção do eixo do tempo. (Primeira modalidade)
[0078] O dispositivo de codificação de imagem 100 e o dispositivo de decodificação de imagem 200 serão descritos acordo com a primeira modalidade da presente invenção.
[0079] A figura 1 é um diagrama de blocos de um dispositivo de codificação de imagem 100 de acordo com a primeira modalidade. O dispositivo de codificação de imagem 100, de acordo com a modalidade, inclui uma unidade de separação de bloco 101, uma unidade de interpredição 102, uma unidade de intrapredição 103, uma memória de imagem decodificada 104, uma unidade de determinação de método de predição 105, uma unidade de geração residual 106, uma unidade de transformada ortogonal/quantização 107, uma unidade de codificação de bit strings 108, uma unidade de quantização inversa/transformada ortogonal inversa 109, uma unidade de sobreposição de sinal de imagem de decodificação 110 e uma memória de armazenamento de informações de codificação 111.
[0080] A unidade de separação de bloco 101 divide recursivamente a imagem de entrada para gerar um bloco de codificação. A unidade de separação de bloco 101 inclui uma unidade de separação quádrupla que divide um bloco alvo de separação na direção horizontal e na direção vertical e uma unidade de separação binária ternária que divide o bloco alvo de separação na direção horizontal ou na direção vertical. A unidade de separação de bloco 101 define o bloco de codificação gerado como um bloco de codificação alvo e fornece um sinal de imagem do bloco de codificação alvo à unidade de interpredição 102, a unidade de intrapredição 103 e a unidade de geração residual 106. Além disso, a unidade de separação de bloco 101 fornece informações indicando uma determinada estrutura de separação recursiva para a unidade de codificação de bit strings 108. A operação detalhada da unidade de separação de bloco 101 será descrita abaixo.
[0081] A unidade de interpredição 102 desempenha interpredição do bloco de codificação alvo. A unidade de interpredição 102 deriva uma pluralidade de candidatos de informações de interpredição a partir de informações de interpredição armazenadas na memória de armazenamento de informações de codificação 111 e o sinal de imagem decodificado armazenado na memória de imagem decodificada 104 seleciona um modo de interpredição adequado a partir da pluralidade de candidatos derivados e fornece o modo de interpredição selecionado e um sinal de imagem predito de acordo com o modo de interpredição selecionado à unidade de determinação de método de predição
105. Uma configuração e operação detalhadas da unidade de interpredição 102 serão descritas abaixo.
[0082] A unidade de intrapredição 103 desempenha intrapredição do bloco de codificação alvo. A unidade de intrapredição 103 refere-se a um sinal de imagem decodificado armazenado na memória de imagem decodificada 104 como uma amostra de referência e gera um sinal de imagem predito de acordo com a intrapredição com base nas informações de codificação, tal como um modo de intrapredição armazenado na memória de armazenamento de informações de codificação 111. Na intrapredição, a unidade de intrapredição 103 seleciona um modo de intrapredição adequado a partir de uma pluralidade de modos de intrapredição e fornece um modo de intrapredição selecionado e um sinal de imagem predito de acordo com o modo de intrapredição selecionado à unidade de determinação de método de predição 105.
[0083] Exemplos de intrapredição são mostrados nas figuras. 10A e 10B. A figura 10A mostra a correspondência entre uma direção de predição de intrapredição e um número de modo de intrapredição. Por exemplo, no modo de intrapredição 50, uma imagem de intrapredição é gerada ao copiar amostras de referência na direção vertical. O modo de intrapredição 1 é um modo DC e é um modo no qual todos os valores de amostra do bloco alvo são um valor médio de amostras de referência. O modo de intrapredição 0 é um modo planar e é um modo para criar uma imagem de intrapredição bidimensional a partir de amostras de referência nas direções vertical e horizontal. A figura 10B é um exemplo no qual uma imagem intrapredição é gerada no caso do modo de intrapredição 40. A unidade de intrapredição 103 copia o valor da amostra de referência na direção indicada pelo modo de intrapredição em relação a cada amostra do bloco alvo. Quando a amostra de referência do modo de intrapredição não está em uma posição de número inteiro, a unidade de intrapredição 103 determina um valor de amostra de referência de acordo com uma interpolação de valores de amostra de referência de posições inteiras vizinhas.
[0084] A memória de imagem decodificada 104 armazena uma imagem decodificada gerada pela unidade de sobreposição de sinal de imagem de decodificação 110. A memória de imagem decodificada 104 fornece a imagem decodificada armazenada para a unidade de interpredição 102 e a unidade de intrapredição 103.
[0085] A unidade de determinação de método de predição 105 determina o modo de predição ótimo ao avaliar cada uma dentre intrapredição e interpredição usando informações de codificação, uma quantidade de código residual, uma quantidade de distorção entre um sinal de imagem predito e um sinal de imagem alvo e semelhantes. No caso de intrapredição, a unidade de determinação de método de predição 105 fornece informações de intrapredição, como um modo de intrapredição, como as informações de codificação para a unidade de codificação de bit strings 108. No caso do modo de mesclagem de interpredição, a unidade de determinação de método de predição 105 fornece informações de interpredição, tais como um índice de mesclagem e informações indicando se o modo é ou não um modo de mesclagem com base em sub-bloco (um flag de mesclagem com base em sub-
bloco) como as informações de codificação para a unidade de codificação de bit strings 108. No caso do modo de predição de vetor de movimento de interpredição, a unidade de determinação de método de predição 105 fornece informações de interpredição, como o modo de interpredição, um índice de preditor de vetor de movimento, índices de referência de L0 e L1, uma diferença de vetor de movimento e informações indicando se o modo é ou não um modo de preditor de vetor de movimento com base em sub-bloco (um flag de preditor de vetor de movimento com base em sub-bloco) como as informações de codificação para a unidade de codificação de bit strings 108. Adicionalmente, a unidade de determinação de método de predição 105 fornece as informações de codificação determinadas para a memória de armazenamento de informações de codificação 111. A unidade de determinação de método de predição 105 fornece um sinal de imagem predito para a unidade de geração residual 106 e a unidade de sobreposição de sinal de imagem de decodificação
110.
[0086] A unidade de geração residual 106 gera um residual pela subtração do sinal de imagem predito do sinal de imagem alvo e fornece o residual para a unidade de transformada ortogonal/quantização 107.
[0087] A unidade de transformada ortogonal/quantização 107 desempenha uma transformada e quantização ortogonal no residual de acordo com o parâmetro de quantização para gerar um residual ortogonalmente transformado/quantizado e fornece o residual gerado para a unidade de codificação de bit strings 108 e a unidade de quantização inversa/transformada ortogonal inversa 109.
[0088] A unidade de codificação de bit strings 108 codifica as informações de codificação de acordo com o método de predição determinado pela unidade de determinação de método de predição 105 para cada bloco de codificação,
além de informações de unidades de sequências, imagem, fatias e blocos de codificação. Especificamente, a unidade de codificação de bit strings 108 codifica o modo de predição PredMode para cada bloco de codificação. Quando o modo de predição é interpredição (MODE_INTER), a unidade de codificação de bit strings 108 codifica as informações de codificação (informações de interpredição), tal como um flag para discriminar se o modo é ou não um modo de mesclagem, um flag de mesclagem com base em sub-bloco, um índice de mesclagem quando o modo é o modo de mesclagem, um modo de interpredição quando o modo não é o modo de mesclagem, um índice de preditor de vetor de movimento, informações sobre uma diferença de vetor de movimento e um flag de preditor de vetor de movimento com base em sub-bloco de acordo com a sintaxe especificada (uma regra de sintaxe de bit strings) e gera primeiras bit strings. Quando o modo de predição é intrapredição (MODE_INTRA), as informações de codificação (informações de intrapredição), tal como o modo de intrapredição, é codificado de acordo com a sintaxe especificada (uma regra de sintaxe de bit strings) e as primeiras bit strings são gerados. Além disso, a unidade de codificação de bit strings 108 codifica por entropia o residual ortogonalmente transformado e quantizado de acordo com a sintaxe especificada para gerar segundas bit strings. A unidade de codificação de bit strings 108 multiplexa as primeiras bit strings e as segundas bit strings de acordo com a sintaxe especificada e emite um bitstream.
[0089] A unidade de quantização inversa/transformada ortogonal inversa 109 calcula o residual ao desempenhar quantização inversa e uma transformada ortogonal inversa no residual ortogonalmente transformado/quantizado fornecido a partir da unidade de transformada ortogonal/quantização 107 e fornece o residual calculado à unidade de sobreposição de sinal de imagem de decodificação 110.
[0090] A unidade de sobreposição de sinal de imagem de decodificação 110 sobrepõe o sinal de imagem predito de acordo com a determinação da unidade de determinação de método de predição 105 e o residual quantizado inversamente e transformado inversa e ortogonalmente pela unidade de quantização inversa/transformada ortogonal inversa 109 para gerar uma imagem decodificada e armazena a imagem decodificada na memória de imagem decodificada 104. Além disso, a unidade de sobreposição de sinal de imagem de decodificação 110 pode armazenar a imagem decodificada na memória de imagem decodificada 104 após desempenhar um processo de filtragem de redução da distorção, tal como a distorção de bloco devido à codificação na imagem decodificada.
[0091] A memória de armazenamento de informações de codificação 111 armazena informações de codificação, tal como um modo de predição (interpredição ou intrapredição) determinado pela unidade de determinação de método de predição 105. No caso da interpredição, as informações de codificação armazenadas na memória de armazenamento de informações de codificação 111 incluem informações de interpredição, tal como um determinado vetor de movimento, índices de referência de listas de referência L0 e L1 e uma lista de candidatos de preditor de vetor de movimento com base em histórico. Além disso, no caso do modo de mesclagem de interpredição, as informações de codificação armazenadas na memória de armazenamento de informações de codificação 111 incluem informações de interpredição, tais como um índice de mesclagem, e informações indicando se o modo é ou não o modo de mesclagem com base em sub-bloco (um sub-bloco com base no flag de mesclagem), além de informações descritas acima. Além disso, no caso do modo de preditor de vetor de movimento da interpredição, as informações de codificação armazenadas na memória de armazenamento de informações de codificação 111 incluem informações de interpredição, tal como um modo de interpredição, um índice de preditor de vetor de movimento, uma diferença de vetor de movimento e informações indicando se o modo é ou não o modo de preditor de vetor de movimento com base em sub-bloco (um flag de preditor de vetor de movimento com base em sub-bloco), além de informações descritas acima. No caso da intrapredição, as informações de codificação armazenada na memória de armazenamento de informações de codificação 111 inclui informações de intrapredição, tal como o modo de intrapredição determinado.
[0092] A figura 2 é um diagrama de blocos mostrando uma configuração do dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção correspondente ao dispositivo de codificação de imagem da figura 1. O dispositivo de decodificação de imagem de acordo com a modalidade inclui uma unidade de decodificação de bit strings 201, uma unidade de separação de bloco 202, uma unidade de interpredição 203, uma unidade de intrapredição 204, uma memória de armazenamento de informações de codificação 205, uma unidade de quantização inversa/transformada ortogonal inversa 206, uma unidade de sobreposição de sinal de imagem de decodificação 207 e uma memória de imagem decodificada 208.
[0093] Visto que um processo de decodificação do dispositivo de decodificação de imagem da figura 2 corresponde a um processo de decodificação provido no dispositivo de codificação de imagem da figura 1, os componentes da memória de armazenamento de informações de codificação 205, a unidade de quantização inversa/transformada ortogonal inversa 206, a unidade de sobreposição de sinal de imagem de decodificação 207 e a memória de imagem decodificada 208 da figura 2 têm funções correspondentes aos componentes da memória de armazenamento de informações de codificação 111, a unidade de quantização inversa/transformada ortogonal inversa 109, a unidade de sobreposição de sinal de imagem de decodificação 110 e a memória de imagem decodificada 104 do dispositivo de codificação de imagem da figura
1.
[0094] Um bitstream fornecido para a unidade de decodificação de bit strings 201 é separado de acordo com uma regra de sintaxe especificada. A unidade de decodificação de bit strings 201 decodifica uma primeira bit string separada e obtém informações de unidades de sequências, imagem, fatias, blocos de codificação e informações de codificação de unidades de blocos de codificação. Especificamente, a unidade de decodificação de bit strings 201 decodifica um modo de predição PredMode para discriminar interpredição (MODE_INTER) ou intrapredição (MODE_INTRA) em unidades de blocos de codificação. Quando o modo de predição é interpredição (MODE_INTER), a unidade de decodificação de bit strings 201 decodifica informações de codificação (informações de interpredição) sobre um flag para discriminar se o modo é ou não um modo de mesclagem, um índice de mesclagem quando o modo é o modo de mesclagem, um flag de mesclagem com base em sub-bloco, um modo de interpredição quando o modo é um modo de preditor de vetor de movimento, um índice de preditor de vetor de movimento, uma diferença de vetor de movimento, um flag de preditor de vetor de movimento com base em sub-bloco e afins de acordo com a sintaxe especificada e fornece as informações de codificação (as informações de interpredição) à memória de armazenamento de informações de codificação 205 via unidade de interpredição 203 e da unidade de separação de bloco 202. Quando o modo de predição é intrapredição (MODE_INTRA), as informações de codificação (informações de intrapredição), tal como o modo de intrapredição, são decodificadas de acordo com a sintaxe especificada e informações de codificação (as informações de intrapredição) são fornecidas à memória de armazenamento de informações de codificação 205 via unidade de interpredição 203 ou da unidade de intrapredição 204 e da unidade de separação de bloco 202. A unidade de decodificação de bit strings 201 decodifica as segundas bit strings separadas para calcular um residual quantizado/transformado ortogonalmente e fornece o residual quantizado/transformado ortogonalmente à unidade de quantização inversa/transformada ortogonal inversa 206.
[0095] Quando o modo de predição PredMode do bloco de codificação alvo é o modo de preditor de vetor de movimento na interpredição (MODE_INTER), a unidade de interpredição 203 deriva uma pluralidade de candidatos de preditor de vetor de movimento usando informações de codificação do sinal de imagem anteriormente decodificado armazenado na memória de armazenamento de informações de codificação 205 e registra a pluralidade de candidatos de preditor de vetor de movimento derivados na lista de candidatos de preditor de vetor de movimento a ser descrita abaixo. A unidade de interpredição 203 seleciona um preditor de vetor de movimento de acordo com o índice de preditor de vetor de movimento decodificado e fornecido pela unidade de decodificação de bit strings 201 a partir da pluralidade de candidatos de preditor de vetor de movimento registrados na lista de candidatos de preditor de vetor de movimento, calcula um vetor de movimento a partir da diferença de vetor de movimento decodificada pela unidade de decodificação de bit strings 201 e o preditor de vetor de movimento selecionado e armazena o vetor de movimento calculado na memória de armazenamento de informações de codificação 205 em conjunto com outras informações de codificação. As informações de codificação do bloco de codificação na presente invenção fornecido/armazenado são um modo de predição PredMode, flags predFlagL0[xP][yP] e predFlagL1[xP][yP] indicando se deve ou não usar predição L0 e predição L1, índices de referência refIdxL0[xP][yP] e refIdxL1[xP][yP] de L0 e
L1, vetores de movimento mvL0[xP][yP] e mvL1[xP][yP] de L0 e L1 e afins.
Na presente invenção, xP e yP são índices que indicam uma posição de uma amostra superior esquerda do bloco de codificação dentro da imagem.
Quando o modo de predição PredMode é interpredição (MODE_INTER) e o modo de interpredição é predição L0 (Pred_L0), o flag predFlagL0 indicando se deve ou não usar predição L0 é 1 e o flag predFlagL1 indicando se deve ou não usar predição L1 é 0. Quando o modo de interpredição é predição L1 (Pred_L1), o flag predFlagL0 indicando se deve ou não usar predição L0 é 0 e o flag predFlagL1 indicando se deve ou não usar predição L1 é 1. Quando o modo de interpredição é bipredição (Pred_BI), tanto o flag predFlagL0 indicando se deve ou não usar a predição L0 como o flag predFlagL1 indicando se deve ou não usar a predição L1 são 1. Adicionalmente, os candidatos de mesclagem são derivados no modo de mesclagem no qual o modo de predição PredMode do bloco de codificação do alvo é interpredição (MODE_INTER). Uma pluralidade de candidatos de mesclagem são derivados usando as informações de codificação dos blocos de codificação previamente decodificados armazenados na memória de armazenamento de informações de codificação 205 e são registrados em uma lista de candidatos de mesclagem a ser descrita abaixo, um candidato de mesclagem correspondendo a um índice de mesclagem a ser decodificado e fornecida pela unidade de decodificação de bit strings 201 é selecionada a partir da pluralidade de candidatos de mesclagem registrados na lista de candidatos de mesclagem e informações de interpredição, tal como os flags predFlagL0[xP][yP] e predFlagL1[xP][yP] indicando se usar ou não predição L0 e predição L1 do candidato de mesclagem selecionado, os índices de referência refIdxL0[xP][yP] e refIdxL1[xP][yP] de L0 e L1, e os vetores de movimento mvL0[xP][yP] e mvL1[xP][yP] de L0 e L1 é armazenado na memória de armazenamento de informações de codificação 205. Na presente invenção, xP e yP são índices que indicam a posição da amostra superior esquerda do bloco de codificação na imagem. Uma configuração e operação detalhadas da unidade de interpredição 203 serão descritas abaixo.
[0096] A unidade de intrapredição 204 desempenha intrapredição quando o modo de predição PredMode do bloco de codificação do alvo é intrapredição (MODE_INTRA). As informações de codificação decodificada pela unidade de decodificação de bit strings 201 incluem um modo de intrapredição. A unidade de intrapredição 204 gera um sinal de imagem predito de acordo com a intrapredição a partir do sinal de imagem decodificado armazenado na memória de imagem decodificada 208 de acordo com o modo de intrapredição incluído nas informações de codificação decodificadas pela unidade de decodificação de bit strings 201 e fornece o sinal de imagem predito gerado à unidade de sobreposição de sinal de imagem de decodificação 207. Visto que a unidade de intrapredição 204 corresponde à unidade de intrapredição 103 do dispositivo de codificação de imagem 100, um processo semelhante àquele da unidade de intrapredição 103 é desempenhado.
[0097] A unidade de quantização inversa/transformada ortogonal inversa 206 desempenha uma transformada ortogonal inversa e quantização inversa no residual quantizado/transformado ortogonalmente decodificado pela unidade de decodificação de bit strings 201 e obtém o residual inversa e ortogonalmente transformado/inversamente quantizado.
[0098] A unidade de sobreposição de sinal de imagem de decodificação 207 decodifica um sinal de imagem de decodificação pela sobreposição um sinal de imagem predito interpredito pela unidade de interpredição 203 ou um sinal de imagem predito intrapredito pela unidade de intrapredição 204 e o residual inversa e ortogonalmente transformado/inversamente quantizado pela unidade de quantização inversa/transformada ortogonal inversa 206 e armazena o sinal de imagem de decodificação decodificado na memória de imagem decodificada
208. No momento do armazenamento na memória de imagem decodificada 208, a unidade de sobreposição de sinal de imagem de decodificação 207 pode armazenar uma imagem decodificada na memória de imagem decodificada 208 após um processo de filtragem para reduzir a distorção de bloco ou afins devido à codificação ser desempenhada na imagem decodificada.
[0099] A seguir, uma operação da unidade de separação de bloco 101 no dispositivo de codificação de imagem 100 será descrita. figura 3 é um fluxograma mostrando uma operação de dividir uma imagem em blocos de árvore e dividir adicionalmente cada bloco de árvore. Primeiro, uma imagem de entrada é dividida em blocos de árvore tendo um tamanho predeterminado (etapa S1001). Cada bloco de árvore é varrido em uma ordem predeterminada, isto é, ordem de varredura raster (etapa S1002), e o interior do bloco de árvore de um alvo é dividido (etapa S1003).
[00100] A figura 7 é um fluxograma mostrando uma operação detalhada de um processo de divisão da etapa S1003. Primeiramente, determina-se se um bloco alvo será ou não dividido em quatro partes (etapa S1101).
[00101] Quando é determinado que o bloco alvo será dividido em quatro partes, o bloco alvo será dividido em quatro partes (etapa S1102). Cada bloco obtido pela divisão do bloco alvo é varrido em uma ordem de varredura Z, isto é, na ordem superior esquerdo, superior direito, inferior esquerdo e inferior direito (etapa S1103). A figura 5 mostra um exemplo da ordem de varredura Z e o numeral de referência 601 da figura 6A demonstra um exemplo no qual o bloco alvo é dividido em quatro partes. Os números 0 a 3 do numeral de referência 601 da figura 6A indicam a ordem de processamento. Em seguida, o processo de separação da figura 7 é executado recursivamente para cada bloco da divisão na etapa S1101 (etapa S1104).
[00102] Quando é determinado que o bloco alvo não será dividido em quatro partes, uma separação binária-ternária é desempenhada (etapa S1105).
[00103] A figura 8 é um fluxograma mostrando a operação detalhada de um processo de divisão binária-ternária da etapa S1105. Primeiro, é determinado se um bloco alvo será ou não dividido em duas ou três partes, isto é, se uma separação binária ou ternária será desempenhada ou não (etapa S1201).
[00104] Quando não é determinado que o bloco alvo será dividido em duas ou três partes, isto é, quando é determinado que o bloco alvo não será dividido, a separação termina (etapa S1211). Isto é, um processo de separação recursiva não é adicionalmente desempenhado em blocos divididos de acordo com o processo de separação recursiva.
[00105] Quando é determinado que o bloco alvo será dividido em duas ou três partes, é determinado adicionalmente se o bloco alvo será ou não dividido em duas partes (etapa S1202).
[00106] Quando é determinado que o bloco alvo será dividido em duas partes, é determinado se o bloco alvo será ou não dividido em partes superior e inferior (na direção vertical) (etapa S1203). Com base em um resultado de determinação, o bloco alvo é dividido em duas partes que são partes superior e inferior (na direção vertical) (etapa S1204) ou o bloco alvo é dividido em duas partes que são partes esquerda e direita (em uma direção horizontal) (etapa S1205). Como resultado da etapa S1204, o bloco alvo é dividido em duas partes que são partes superior e inferior (na direção vertical), como indicado pelo numeral de referência 602 na figura 6B. Como resultado da etapa S1205, o bloco alvo é dividido em duas partes que são as partes esquerda e direita (na direção horizontal), como indicado pelo número de referência 604 da figura 6D.
[00107] Quando não é determinado que o bloco alvo será dividido em duas partes, isto é, quando é determinado que o bloco alvo será dividido em três partes, na etapa S1202, é determinado se o bloco alvo será ou não dividido em partes superior, intermediária e inferior (na direção vertical) (etapa S1206). Com base em um resultado da determinação, o bloco alvo é dividido em três partes que são partes superior, intermediária e inferior (na direção vertical) (etapa S1207) ou o bloco alvo é dividido em três partes que são esquerda, meio e partes direitas (na direção horizontal) (etapa S1208). Como resultado da etapa S1207, o bloco alvo é dividido em três partes que são partes superior, intermediária e inferior (na direção vertical), como indicado pelo numeral de referência 603 da figura 6C. Como resultado da etapa S1208, o bloco alvo é dividido em três partes que são as partes esquerda, intermediária e direita (na direção horizontal), como indicado pelo número de referência 605 da figura 6E.
[00108] Após qualquer uma das etapas S1204, S1205, S1207 e S1208 ser executada, cada um dos blocos no quais o bloco alvo é dividido é varrido da esquerda à direita e de cima para baixo (etapa S1209). Os números 0 a 2 dos números de referência 602 a 605 das figuras 6B a 6E indicam a ordem de processamento. Para cada um dos blocos nos quais o bloco alvo é dividido, um processo de separação binária-ternária da figura 8 é executado recursivamente (etapa S1210).
[00109] A separação de bloco recursiva na presente invenção descrita pode limitar a necessidade de uma separação de acordo com o número de separações ou um tamanho do bloco alvo ou afins. As informações que limitam a necessidade de uma separação podem ser implementadas por uma configuração na qual as informações não são distribuídas ao fazer um acordo entre o dispositivo de codificação e o dispositivo de decodificação antecipadamente ou implementadas por uma configuração na qual o dispositivo de codificação determina as informações que limitam a necessidade de uma separação, registra as informações em uma bit string e as distribui ao dispositivo de decodificação.
[00110] Quando um determinado bloco é dividido, um bloco antes da separação é referido como bloco pai e cada bloco após a separação é referido como bloco filho.
[00111] A seguir, a operação da unidade de separação de bloco 202 no dispositivo de decodificação de imagem 200 será descrita. A unidade de separação de bloco 202 divide o bloco de árvore de acordo com um procedimento de processamento semelhante àquele da unidade de separação de bloco 101 do dispositivo de codificação de imagem 100. Entretanto, há uma diferença na qual a unidade de separação de bloco 101 do dispositivo de codificação de imagem 100 aplica uma técnica de otimização, tal como estimativa de um formato ótimo com base na otimização de taxa de distorção ou reconhecimento para determinar um formato de separação de bloco ótimo, sendo que a unidade de separação de bloco 202 do dispositivo de decodificação de imagem 200 determina um formato de separação de bloco ao decodificar as informações de separação de bloco gravadas nas bit string.
[00112] A sintaxe (uma regra de sintaxe de bit strings) relacionada a uma separação de bloco de acordo com a primeira modalidade é mostrada na figura
9. coding_quadtree() representa a sintaxe relacionada a um processo de separação quádrupla no bloco. multi_type_tree() representa a sintaxe relacionada a um processo binário ou ternário de separação em um bloco. qt_split é um flag indicando se um bloco está ou não dividido em quatro partes. qt_split=1 quando o bloco é dividido em quatro partes e qt_split=0 quando o bloco não é dividido em quatro partes. Quando o bloco é dividido em quatro partes (qt_split=1), um processo de separação quádrupla é desempenhado recursivamente em blocos, cada um dos quais foi dividido em quatro partes (coding_quadtree(0), coding_quadtree(1), coding_quadtree(2),
coding_quadtree(3) e os argumentos de 0 a 3 correspondem aos números indicados pelo numeral de referência 601 da figura 6A). Quando o bloco não é dividido em quatro partes (qt_split=0), a separação subsequente é determinada de acordo com multi_type_tree(). mtt_split é um flag indicando se uma separação é ou não desempenhada adicionalmente. Quando uma separação é desempenhada adicionalmente (mtt_split=1), mtt_split_vertical que é um flag que indica se o bloco está dividido verticalmente ou horizontalmente e mtt_split_binary que é um flag para determinar se uma separação binária ou ternária é desempenhada são transmitidos. mtt_split_vertical=1 indica uma separação na direção vertical e mtt_split_vertical=0 indica uma separação na direção horizontal. mtt_split_binary=1 indica uma separação binária e mtt_split_binary=0 indica uma separação ternária. Na separação binária (mtt_split_binary=1), um processo de separação é desempenhado recursivamente em blocos, cada um dos quais é dividido em duas partes (multi_type_tree(0), multi_type_tree(1) e os argumentos 0 a 1 correspondem aos números indicados pelo numeral de referência 602 ou 604 nas figuras. 6B a 6D). No caso da separação ternária (mtt_split_binary=0), um processo de separação é desempenhado recursivamente em blocos, cada um dos quais é dividido em três partes (multi_type_tree(0), multi_type_tree(1), multi_type_tree(2) e argumentos 0 a 2 correspondem aos números indicados pelo numeral de referência 603 da figura 6B ou aos números indicados pelo numeral de referência 605 da figura 6E). Até que mtt_split=0 seja alcançado, uma separação de bloco hierárquico é desempenhada ao chamar recursivamente multi_type_tree. <Interpredição>
[00113] Um método de interpredição de acordo com a modalidade é desempenhado na unidade de interpredição 102 do dispositivo de codificação de imagem da figura 1 e a unidade de interpredição 203 do dispositivo de decodificação de imagem da figura 2.
[00114] Um método de interpredição de acordo com a modalidade será descrito em detalhes com referência aos desenhos. O método de interpredição é desempenhado em ambos os processos de codificação como de decodificação em unidades de blocos de codificação. <Descrição da unidade de interpredição 102 do lado de codificação>
[00115] A figura 16 é um diagrama mostrando uma configuração detalhada da unidade de interpredição 102 do dispositivo de codificação de imagem na figura 1. A unidade de derivação de modo de preditor de vetor de movimento normal 301 deriva uma pluralidade de candidatos de preditor de vetor de movimento normal para selecionar um preditor de vetor de movimento e calcula uma diferença de vetor de movimento entre o preditor de vetor de movimento selecionado e um vetor de movimento detectado. Um modo de interpredição detectado, índice de referência e vetor de movimento e a diferença vetor de movimento calculada tornam-se informações de interpredição do modo de preditor de vetor de movimento normal. Estas informações de interpredição são fornecidas à unidade de determinação de modo de interpredição 305. Uma configuração detalhada e um processo da unidade de derivação de modo de preditor de vetor de movimento normal 301 serão descritos abaixo.
[00116] A unidade de derivação de modo de mesclagem normal 302 deriva uma pluralidade de candidatos de mesclagem normal para selecionar um candidato de mesclagem normal e obtém informações de interpredição do modo de mesclagem normal. Estas informações de interpredição são fornecidas à unidade de determinação de modo de interpredição 305. Uma configuração detalhada e um processo da unidade de derivação de modo de mesclagem normal 302 serão descritos abaixo.
[00117] Uma unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 303 deriva uma pluralidade de candidatos de preditor de vetor de movimento com base em sub-bloco para selecionar um preditor de vetor de movimento com base em sub-bloco e calcula uma diferença de vetor de movimento entre o preditor de vetor de movimento com base em sub-bloco selecionado e o vetor de movimento detectado. Um modo de interpredição detectado, índice de referência e vetor de movimento e a diferença de vetor de movimento calculada tornam-se as informações de interpredição do modo de preditor de vetor de movimento com base em sub- bloco. Estas informações de interpredição são fornecidas à unidade de determinação de modo de interpredição 305.
[00118] A unidade de derivação de modo de mesclagem com base em sub- bloco 304 deriva uma pluralidade de candidatos de mesclagem com base em sub-bloco para selecionar um candidato de mesclagem com base em sub-bloco e obtém informações de interpredição do modo de mesclagem com base em sub-bloco. Estas informações de interpredição são fornecidas à unidade de determinação de modo de interpredição 305.
[00119] A unidade de determinação de modo de interpredição 305 determina informações de interpredição com base nas informações de interpredição fornecidas a partir da unidade de derivação de modo de preditor de vetor de movimento normal 301, a unidade de derivação de modo de mesclagem normal 302, a unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 303 e a unidade de derivação de modo de mesclagem com base em sub-bloco 304. As informações de interpredição de acordo com o resultado da determinação são fornecidas a partir da unidade de determinação de modo de interpredição 305 à unidade de predição de movimento compensado 306.
[00120] A unidade de predição de movimento compensado 306 desempenha interpredição no sinal de imagem de referência armazenado na memória de imagem decodificada 104 com base nas informações de interpredição determinada. Uma configuração detalhada e o processo da unidade de predição de movimento compensado 306 serão descritos abaixo. <Descrição da unidade de interpredição 203 do lado de codificação>
[00121] A figura 22 é um diagrama mostrando uma configuração detalhada da unidade de interpredição 203 do dispositivo de decodificação de imagem da figura 2
[00122] Uma unidade de derivação de modo de preditor de vetor de movimento normal 401 deriva uma pluralidade de candidatos de preditor de vetor de movimento normal para selecionar um preditor de vetor de movimento, calcula uma soma do preditor de vetor de movimento selecionado e a diferença do vetor de movimento decodificado e define a soma calculada como um vetor de movimento. Um modo de interpredição decodificado, índice de referência e vetor de movimento tornam-se informações de interpredição do modo de preditor de vetor de movimento normal. Estas informações de interpredição são fornecidas a uma unidade de predição de movimento compensado 406 via comutador 408. Uma configuração detalhada e o processo da unidade de derivação de modo de preditor de vetor de movimento normal 401 serão descritos abaixo.
[00123] Uma unidade de derivação de modo de mesclagem normal 402 deriva uma pluralidade de candidatos de mesclagem normal para selecionar um candidato de mesclagem normal e obtém informações de interpredição do modo de mesclagem normal. Estas informações de interpredição são fornecidas à unidade de predição de movimento compensado 406 via comutador 408. Uma configuração detalhada e um processo da unidade de derivação de modo de mesclagem normal 402 serão descritos abaixo.
[00124] Uma unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 403 deriva uma pluralidade de candidatos de preditor de vetor de movimento com base em sub-bloco para selecionar um preditor de vetor de movimento com base em sub-bloco, calcula uma soma do preditor de vetor de movimento com base em sub-bloco selecionado e a diferença de vetor de movimento decodificado e define a soma calculada como um vetor de movimento. Um modo de interpredição decodificado, índice de referência e vetor de movimento tornam-se as informações de interpredição do modo de preditor de vetor de movimento com base em sub-bloco. Estas informações de interpredição são fornecidas à unidade de predição de movimento compensado 406 via comutador 408.
[00125] Uma unidade de derivação de modo de mesclagem com base em sub-bloco 404 deriva uma pluralidade de candidatos de mesclagem com base em sub-bloco para selecionar um candidato de mesclagem com base em sub-bloco e obtém informações de interpredição do modo de mesclagem com base em sub-bloco. Estas informações de interpredição são fornecidas à unidade de predição de movimento compensado 406 via comutador 408.
[00126] A unidade de predição de movimento compensado 406 desempenha interpredição no sinal de imagem de referência armazenado na memória de imagem decodificada 208 com base nas informações de interpredição determinada. Uma configuração detalhada e um processo da unidade de predição de movimento compensado 406 são semelhantes aos da unidade de predição de movimento compensado 306 do lado de codificação. <Unidade de derivação de modo de preditor de vetor de movimento normal (AMVP normal)>
[00127] A unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 17 inclui uma unidade de derivação de candidato de preditor de vetor de movimento espacial 321, uma unidade de derivação de candidato de preditor de vetor de movimento temporal 322, uma unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 323, uma unidade de reabastecimento de candidato de preditor de vetor de movimento 325, uma unidade de detecção de vetor de movimento normal 326, uma unidade de seleção de candidato de preditor de vetor de movimento 327 e uma unidade de subtração de vetor de movimento 328.
[00128] A unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 23 inclui uma unidade de derivação de candidato de preditor de vetor de movimento espacial 421, uma unidade de derivação de candidato de preditor de vetor de movimento temporal 422, uma unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 423, uma unidade de reabastecimento de candidato de preditor de vetor de movimento 425, uma unidade de seleção de candidato de preditor de vetor de movimento 426 e uma unidade de adição de vetor de movimento 427.
[00129] Os procedimentos de processamento da unidade de derivação de modo de preditor de vetor de movimento normal 301 do lado de codificação e a unidade de derivação de modo de preditor de vetor de movimento normal 401 do lado de decodificação serão descritos usando os fluxogramas das figuras 19 e 25, respectivamente. A figura 19 é um fluxograma mostrando um procedimento de processamento de derivação de modo de preditor de vetor de movimento normal da unidade de derivação de modo de preditor de vetor de movimento normal 301 do lado de codificação e a figura 25 é um fluxograma mostrando um procedimento de processamento de derivação de modo de preditor de vetor de movimento normal da unidade de derivação de modo de preditor de vetor de movimento normal 401 do lado de decodificação.
<Unidade de derivação de modo de preditor de vetor de movimento normal (AMVP normal): descrição do lado de codificação>
[00130] O procedimento de processamento de derivação de modo de preditor de vetor de movimento normal do lado da codificação será descrito com referência à figura 19. Na descrição do procedimento de processamento da figura 19, o termo "normal" mostrado na figura 19 pode ser omitido.
[00131] Primeiramente, a unidade de detecção de vetor de movimento normal 326 detecta um vetor de movimento normal para cada modo de interpredição e cada índice de referência (etapa S100 da figura 19).
[00132] Subsequentemente, na unidade de derivação de candidato de preditor de vetor de movimento espacial 321, a unidade de derivação de candidato de preditor de vetor de movimento temporal 322, a unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 323, a unidade de reabastecimento de candidato de preditor de vetor de movimento 325, a unidade de seleção de candidato de preditor de vetor de movimento 327 e a unidade de subtração de vetor de movimento 328, uma diferença de vetor de movimento de um vetor de movimento usada para interpredição do modo de preditor de vetor de movimento normal é calculada para cada um de L0 e L1 (etapas S101 a S106 da figura 19). Especificamente, quando o modo de predição PredMode do bloco alvo é interpredição (MODE_INTER) e o modo de interpredição é predição L0 (Pred_L0), a lista de candidatos de preditor de vetor de movimento mvpListL0 de L0 é calculada para selecionar o preditor de vetor de movimento mvpL0 e a diferença do vetor de movimento mvdL0 do vetor de movimento mvL0 de L0 é calculada. Quando o modo de interpredição do bloco alvo é predição L1 (Pred_L1), a lista de candidatos de preditor de vetor de movimento mvpListL1 de L1 é calculada para selecionar o preditor de vetor de movimento mvpL1 e a diferença de vetor de movimento mvdL1 do vetor de movimento mvL1 de L1 é calculada. Quando o modo de interpredição do bloco alvo é bipredição (Pred_BI), tanto a predição L0 como a predição L1 são desempenhadas, a lista de candidatos de preditor de vetor de movimento mvpListL0 de L0 é calculada para selecionar um preditor de vetor de movimento mvpL0 de L0, a diferença de vetor de movimento mvdL0 de um vetor de movimento mvL0 de L0 é calculada, a lista de candidatos de preditor de vetor de movimento mvpListL1 de L1 é calculada para selecionar um preditor de vetor de movimento mvpL1 de L1 e uma diferença de vetor de movimento mvdL1 de um vetor de movimento mvL1 de L1 é calculada.
[00133] Embora um processo de cálculo da diferença do vetor de movimento seja desempenhado para cada um de L0 e L1, o processo de cálculo de diferença de vetor de movimento torna-se um processo comum para L0 e L1. Portanto, na descrição a seguir, L0 e L1 são representados como LX comum. X de LX é 0 no processo de calcular a diferença de vetor de movimento de L0 e X de LX é 1 no processo de cálculo da diferença do vetor de movimento de L1. Além disso, quando informações de outra lista em vez de LX são referidas durante o processo de calcular a diferença de vetor de movimento de LX, a outra lista é representada como LY.
[00134] Quando o vetor de movimento mvLX de LX é usado (etapa S102 da figura 19: SIM), os candidatos de preditor de vetor de movimento de LX são calculados para construir a lista de candidatos de preditor de vetor de movimento mvpListLX de LX (etapa S103 da figura 19). Na unidade de derivação de candidato de preditor de vetor de movimento espacial 321, a unidade de derivação de candidato de preditor de vetor de movimento temporal 322, a unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 323 e a unidade de reabastecimento de candidato de preditor de vetor de movimento 325 da unidade de derivação de modo de preditor de vetor de movimento normal 301, uma pluralidade de candidatos de preditor de vetor de movimento são derivados para construir a lista de candidatos de preditor de vetor de movimento mvpListLX. O procedimento de processamento detalhado da etapa S103 da figura 19 será descrito abaixo usando o fluxograma da figura
20.
[00135] Subsequentemente, a unidade de seleção de candidato de preditor de vetor de movimento 327 seleciona um preditor de vetor de movimento mvpLX de LX da lista de candidatos de preditor de vetor de movimento mvpListLX de LX (etapa S104 da figura 19). Na presente invenção, um elemento (um i-ésimo elemento quando contado a partir do 0-ésimo elemento) na lista de candidatos de preditor de vetor de movimento, mvpListLX, é representado como mvpListLX[i]. Cada diferença de vetor de movimento que é uma diferença entre o vetor de movimento mvLX e cada candidato de preditor de vetor de movimento mvpListLX[i] armazenado na lista de candidatos de preditor de vetor de movimento mvpListLX é calculado. Uma quantidade de código quando as diferenças do vetor de movimento são codificadas é calculada para cada elemento (candidato de preditor de vetor de movimento) da lista de candidatos de preditor de vetor de movimento mvpListLX. Em seguida, um candidato de preditor de vetor de movimento mvpListLX[i] que minimiza a quantidade de código para cada candidato de preditor de vetor de movimento entre os elementos registrados na lista de candidatos de preditor de vetor de movimento mvpListLX é selecionado como o preditor de vetor de movimento mvpLX e seu índice i é adquirido. Quando há uma pluralidade de candidatos de preditor de vetor de movimento tendo a menor quantidade de código gerado na lista de candidatos de preditor de vetor de movimento mvpListLX, um candidato de preditor de vetor de movimento mvpListLX[i] representado por um número menor no índice i na lista de candidatos de preditor de vetor de movimento mvpListLX é selecionado como um preditor de vetor de movimento ótimo mvpLX e seu índice i é adquirido.
[00136] Posteriormente, a unidade de subtração de vetor de movimento 328 subtrai o preditor de vetor de movimento selecionado mvpLX de LX do vetor de movimento mvLX de LX e calcula uma diferença de vetor de movimento mvdLX de LX como mvdLX=mvLX-mvpLX (etapa S105 da figura 19). <Unidade de derivação de modo de preditor de vetor de movimento normal (AMVP normal): descrição do lado de decodificação>
[00137] A seguir, o procedimento de processamento de modo de preditor de vetor de movimento normal do lado de decodificação será descrito com referência à figura 25. No lado de decodificação, na unidade de derivação de candidato de preditor de vetor de movimento espacial 421, a unidade de derivação de candidato de preditor de vetor de movimento temporal 422, a unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 423 e a unidade de reabastecimento de candidato de preditor de vetor de movimento 425, um vetor de movimento para uso na interpredição do modo de preditor de vetor de movimento normal é calculado para cada um de L0 e L1 (etapas S201 a S206 da figura 25). Especificamente, quando o modo de predição PredMode do bloco alvo é interpredição (MODE_INTER) e o modo de interpredição do bloco alvo é predição L0 (Pred_L0), a lista de candidatos de preditor de vetor de movimento mvpListL0 de L0 é calculada para selecionar o preditor de vetor de movimento mvpL0 e um vetor de movimento mvL0 de L0 é calculado. Quando o modo de interpredição do bloco alvo é predição L1 (Pred_L1), a lista de candidatos de preditor de vetor de movimento mvpListL1 de L1 é calculada para selecionar o preditor de vetor de movimento mvpL1 e o vetor de movimento mvL1 de L1 é calculado. Quando o modo de interpredição do bloco alvo é bipredição (Pred_BI), tanto a predição L0 como a predição L1 são desempenhadas, a lista de candidatos de preditor de vetor de movimento mvpListL0 de L0 é calculada para selecionar um preditor de vetor de movimento mvpL0 de L0, um o vetor de movimento mvL0 de L0 é calculado, a lista de candidatos de preditor de vetor de movimento mvpListL1 de L1 é calculada para selecionar um preditor de vetor de movimento mvpL1 de L1 e cada vetor de movimento mvL1 de L1 é calculado.
[00138] Embora um processo de cálculo do vetor de movimento seja desempenhado para cada um de L0 e L1 no lado de decodificação como no lado de codificação, o processo de cálculo do vetor de movimento torna-se um processo comum tanto para L0 quanto para L1. Portanto, na descrição a seguir, L0 e L1 são representados como LX comum. LX representa um modo de interpredição para uso na interpredição de um bloco de codificação alvo. X é 0 no processo de cálculo do vetor de movimento de L0 e X é 1 no processo de cálculo do vetor de movimento de L1. Além disso, quando as informações de outra lista de referência em vez de uma lista de referência idêntica àquela de LX de um alvo de cálculo é referida durante o processo de cálculo do vetor de movimento de LX, a outra lista de referência é representada como LY.
[00139] Quando o vetor de movimento mvLX de LX é usado (etapa S202 da figura 25: SIM), os candidatos de preditor de vetor de movimento de LX são calculados para construir a lista de candidatos de preditor de vetor de movimento mvpListLX de LX (etapa S203 da figura 25). Na unidade de derivação de candidato de preditor de vetor de movimento espacial 421, a unidade de derivação de candidato de preditor de vetor de movimento temporal 422, a unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 423 e a unidade de reabastecimento de candidato de preditor de vetor de movimento 425 da unidade de derivação de modo de preditor de vetor de movimento normal 401, uma pluralidade de candidatos de preditor de vetor de movimento são calculados para construir uma lista de candidatos de preditor de vetor de movimento mvpListLX. Um procedimento de processamento detalhado da etapa S203 da figura 25 será descrito abaixo usando o fluxograma da figura 20.
[00140] Subsequentemente, o candidato de preditor de vetor de movimento mvpListLX [mvpIdxLX] correspondente ao índice mvpIdxLX do preditor de vetor de movimento decodificado e fornecido pela unidade de decodificação de bit strings 201 a partir da lista de candidatos de preditor de vetor de movimento mvpListLX é extraído como um preditor de vetor de movimento selecionado mvpLX na unidade de seleção de candidato de preditor de vetor de movimento 426 (etapa S204 da figura 25).
[00141] Subsequentemente, a unidade de adição de vetor de movimento 427 soma a diferença de vetor de movimento mvdLX de LX que é decodificada e fornecida pela unidade de decodificação de bit strings 201 e o preditor de vetor de movimento mvpLX de LX e calcula o vetor de movimento mvLX de LX como mvLX=mvpLX+mvdLX (etapa S205 da figura 25). <Unidade de derivação de modo de preditor de vetor de movimento normal (AMVP normal): método de predição de vetor de movimento>
[00142] A figura 20 é um fluxograma mostrando um procedimento de processamento de um processo de derivação de modo de preditor de vetor de movimento normal tendo uma função comum à unidade de derivação de modo de preditor de vetor de movimento normal 301 do dispositivo de codificação de imagem e a unidade de derivação de modo de preditor de vetor de movimento normal 401 do dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção.
[00143] A unidade de derivação de modo de preditor de vetor de movimento normal 301 e a unidade de derivação de modo de preditor de vetor de movimento normal 401 incluem uma lista de candidatos de preditor de vetor de movimento mvpListLX. A lista de candidatos de preditor de vetor de movimento mvpListLX tem uma estrutura de lista e é provida com uma área de armazenamento onde um índice de preditor de vetor de movimento indicando a localização dentro da lista de candidatos de preditor de vetor de movimento e um candidato de preditor de vetor de movimento correspondente ao índice são armazenados como elementos. O número do índice de preditor de vetor de movimento começa a partir de 0 e os candidatos de preditor de vetor de movimento são armazenados na área de armazenamento da lista de candidatos de preditor de vetor de movimento mvpListLX. Na presente modalidade, assume-se que pelo menos dois candidatos de preditor de vetor de movimento (informações de interpredição) podem ser registrados na lista de candidatos de preditor de vetor de movimento mvpListLX. Além disso, uma variável numCurrMvpCand indicando o número de candidatos de preditor de vetor de movimento registrados na lista de candidatos de preditor de vetor de movimento mvpListLX é definida como 0.
[00144] As unidades de derivação de candidato de preditor de vetor de movimento espacial 321 e 421 derivam candidatos de preditor de vetor de movimento a partir de blocos vizinhos no lado esquerdo. Neste processo, um preditor de vetor de movimento mvLXA é derivado com referência às informações de interpredição do bloco vizinho no lado esquerdo (A0 ou A1 da figura 11), ou seja, um flag indicando se um candidato de preditor de vetor de movimento pode ou não ser usado, um vetor de movimento, um índice de referência e afins e o mvLXA derivado é adicionado à lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S301 da figura 20). Além disso, X é 0 no momento da predição L0 e X é 1 no momento da predição L1 (o mesmo é verdadeiro a seguir). Subsequentemente, as unidades de derivação de candidato de preditor de vetor de movimento espacial 321 e 421 derivam um candidato preditor de vetor de movimento a partir de um bloco vizinho no lado superior. Neste processo, o preditor de vetor de movimento mvLXB é derivado com referência às informações de interpredição de um bloco vizinho no lado superior (B0, B1 ou B2 da figura 11), ou seja, um flag indicando se um candidato de preditor de vetor de movimento pode ser usado ou não, um vetor de movimento, um índice de referência e afins e mvLXB é adicionado à lista de candidatos de preditor de vetor de movimento mvpListLX se o mvLXA derivado não for igual ao mvLXB derivado (etapa S302 da figura 20). O processamento das etapas S301 e S302 da figura 20 é comum, exceto que as posições dos blocos vizinhos a serem referidos e o número de blocos vizinhos a serem referidos são diferentes, e um flag availableFlagLXN indicando se um candidato de preditor de vetor de movimento para o bloco de codificação pode ser usado ou não, um vetor de movimento mvLXN e um índice de referência refIdxN (N representa A ou B e o mesmo é verdadeiro a seguir) são derivados.
[00145] Subsequentemente, as unidades de derivação de candidato de preditor de vetor de movimento com base em histórico 323 e 423 adicionam um candidato de preditor de vetor de movimento com base em histórico registrado na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList à lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S303 da figura 20). Os detalhes do procedimento de processamento de registro da etapa S303 serão descritos abaixo com referência ao fluxograma da figura 29.
[00146] Subsequentemente, as unidades de derivação de candidato de preditor de vetor de movimento temporal 322 e 422 derivam candidatos de preditor de vetor de movimento a partir de blocos em uma imagem cujo tempo é diferente daquele da imagem alvo atual. Neste processo, um flag availableFlagLXCol indicando se um candidato de preditor de vetor de movimento para um bloco de codificação de uma imagem de tempo diferente pode ser usado ou não, um vetor de movimento mvLXCol, um índice de referência refIdxCol e uma lista de referência listCol são derivados e mvLXCol é adicionado à lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S304 da figura 20).
[00147] Além disso, assume-se que os processos das unidades de derivação de candidato de preditor de vetor de movimento temporal 322 e 422 podem ser omitidos em unidades de sequências (SPS), imagem (PPS) ou fatias.
[00148] Subsequentemente, as unidades de reabastecimento de candidato de preditor de vetor de movimento 325 e 425 adicionam candidatos de preditor de vetor de movimento tendo um valor predeterminado, tal como (0, 0) até que a lista de candidatos de preditor de vetor de movimento mvpListLX seja satisfeita (S305 da figura 20). <Unidade de derivação de modo de mesclagem normal (mesclagem normal)>
[00149] A unidade de derivação de modo de mesclagem normal 302 da figura 18 inclui uma unidade de derivação de candidato de mesclagem espacial 341, uma unidade de derivação de candidato de mesclagem temporal 342, uma unidade de derivação de candidato de mesclagem média 344, uma unidade de derivação de candidato de mesclagem com base em histórico 345, uma unidade de reabastecimento de candidato de mesclagem 346 e uma unidade de seleção de candidato de mesclagem 347.
[00150] A unidade de derivação de modo de mesclagem normal 402 da figura 24 inclui uma unidade de derivação de candidato de mesclagem espacial 441, uma unidade de derivação de candidato de mesclagem temporal 442, uma unidade de derivação de candidato de mesclagem média 444, uma unidade de derivação de candidato de mesclagem com base em histórico 445, uma unidade de reabastecimento de candidato de mesclagem 446 e uma unidade de seleção de candidato de mesclagem 447.
[00151] A figura 21 é um fluxograma explicativo mostrando um procedimento de um processo de derivação de modo de mesclagem normal tendo uma função comum à unidade de derivação de modo de mesclagem normal 302 do dispositivo de codificação de imagem e a unidade de derivação de modo de mesclagem normal 402 do dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção.
[00152] A seguir, vários processos serão descritos etapa a etapa. Embora seja descrito um caso no qual um tipo de fatia slice_type é uma fatia B, a menos que especificado de outra maneira na descrição a seguir, a presente invenção também pode ser aplicada ao caso de uma fatia P. Entretanto, quando o tipo de fatia slice_type é uma fatia P, visto que apenas a predição L0 (Pred_L0) é provida como o modo de interpredição e predição L1 (Pred_L1) e bipredição (Pred_BI) estão ausentes, um processo relacionado a L1 pode ser omitido.
[00153] A unidade de derivação de modo de mesclagem normal 302 e a unidade de derivação de modo de mesclagem normal 402 têm uma lista de candidatos de mesclagem mergeCandList. A lista de candidatos de mesclagem mergeCandList tem uma estrutura de lista e é provida com um índice de mesclagem indicando o local dentro da lista de candidatos de mesclagem e uma área de armazenamento no qual os candidatos de mesclagem correspondentes ao índice são armazenados como elementos. O número do índice de mesclagem começa a partir de 0 e os candidatos de mesclagem são armazenados na área de armazenamento da lista de candidatos mesclados mergeCandList. No processo subsequente, o candidato de mesclagem do índice de mesclagem i registrado na lista de candidatos de mesclagem mergeCandList é representado por mergeCandList[i]. Na presente modalidade, assume-se que pelo menos seis candidatos de mesclagem (informações de interpredição) podem ser registrados na lista de candidatos de mesclagem mergeCandList. Adicionalmente, uma variável numCurrMergeCand indicando o número de candidatos de mesclagem registrados na lista de candidatos de mesclagem mergeCandList é definida como
0.
[00154] Uma unidade de derivação de candidato de mesclagem espacial 341 e uma unidade de derivação de candidato de mesclagem espacial 441 derivam candidatos de mesclagem espacial a partir de blocos (B1, A1, B0, A0 e B2 da figura 11) adjacentes ao lado esquerdo e ao lado superior de um bloco alvo na ordem de B1, A1, B0, A0 e B2 a partir das informações de codificação armazenadas na memória de armazenamento de informações de codificação 111 do dispositivo de codificação de imagem ou na memória de armazenamento de informações de codificação 205 do dispositivo de decodificação de imagem e registrar os candidatos de mesclagem espacial derivados na lista de candidatos de mesclagem mergeCandList (etapa S401 da figura 21). Na presente invenção, N indicando qualquer um dos candidatos de mesclagem espacial B1, A1, B0, A0 e B2 e o candidato de mesclagem temporal Col é definido. Um flag availableFlagN indicando se as informações de interpredição do bloco N podem ser usadas ou não como um candidato de mesclagem espacial, um índice de referência refIdxL0N de L0 e um índice de referência refIdxL1N de L1 do candidato de mesclagem espacial N, um flag de predição L0 predFlagL0N indicando se a predição L0 é ou não desempenhada, um flag de predição L1 predFlagL1N indicando se a predição L1 é ou não desempenhada, um vetor de movimento mvL0N de L0 e um vetor de movimento mvL1N de L1 são derivados. Entretanto, visto que o candidato de mesclagem é derivado sem se referir às informações de interpredição do bloco incluído no bloco de codificação que é um alvo na presente modalidade, nenhum candidato de mesclagem espacial usando as informações de interpredição do bloco incluído no bloco de codificação alvo é derivado.
[00155] Subsequentemente, a unidade de derivação de candidato de mesclagem temporal 342 e a unidade de derivação de candidato de mesclagem temporal 442 derivam candidatos de mesclagem temporal a partir de imagens de tempos diferentes e registram os candidatos de mesclagem temporal derivados na lista de candidatos de mesclagem mergeCandList (etapa S402 da figura 21). Um flag availableFlagCol indicando se o candidato de mesclagem temporal pode ou não ser usado, um flag de predição L0 predFlagL0Col indicando se a predição L0 do candidato de mesclagem temporal é ou não desempenhada, um flag de predição L1 predFlagL1Col indicando se a predição L1 é ou não desempenhada, um vetor de movimento mvL0Col de L0 e um vetor de movimento mvL1Col de L1 são derivados.
[00156] Além disso, assume-se que os processos da unidade de derivação de candidato de mesclagem temporal 342 e a unidade de derivação de candidato de mesclagem temporal 442 podem ser omitidos em unidades de sequências (SPS), imagem (PPS) ou fatias.
[00157] Subsequentemente, a unidade de derivação de candidato de mesclagem com base em histórico 345 e a unidade de derivação de candidato de mesclagem com base em histórico 445 registram candidatos de preditor de vetor de movimento com base em histórico registrados na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList na lista de candidatos de mesclagem mergeCandList (etapa S403 da figura 21).
[00158] Além disso, quando o número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos de mesclagem mergeCandList for menor que o número máximo de candidatos de mesclagem
MaxNumMergeCand, o número máximo de candidatos de mesclagem MaxNumMergeCand é definido como um limite superior do número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos de mesclagem mergeCandList e os candidatos de mesclagem com base em histórico são derivados e registrados na lista de candidatos de mesclagem mergeCandList.
[00159] Subsequentemente, a unidade de derivação de candidato de mesclagem média 344 e a unidade de derivação de candidato de mesclagem média 444 derivam um candidato de mesclagem médio a partir da lista de candidatos de mesclagem mergeCandList e adiciona o candidato de mesclagem médio derivado à lista de candidatos de mesclagem mergeCandList (etapa S404 da figura 21).
[00160] Além disso, quando o número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos de mesclagem mergeCandList for menor que o número máximo de candidatos MaxNumMergeCand, o número máximo de candidatos MaxNumMergeCand é definido como um limite superior do número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos de mesclagem mergeCandList e os candidatos de mesclagem médios são derivados e registrados na lista de candidatos de mesclagem mergeCandList.
[00161] Na presente invenção, o candidato de mesclagem médio é um novo candidato de mesclagem tendo um vetor de movimento obtido pela média de vetores de movimento de um primeiro candidato de mesclagem e um segundo candidato de mesclagem registrados na lista de candidatos de mesclagem mergeCandList para cada uma das predições L0 e L1.
[00162] Subsequentemente, na unidade de reabastecimento do candidato de mesclagem 346 e na unidade de reabastecimento do candidato de mesclagem 446, quando o número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos e mesclagem mergeCandList for menor do que o número máximo de candidatos de mesclagem MaxNumMergeCand, o número máximo de candidatos de mesclagem MaxNumMergeCand é definido como um limite superior do número de candidatos de mesclagem numCurrMergeCand registrados dentro da lista de candidatos de mesclagem mergeCandList e um candidato de mesclagem adicional é derivado e registrado na lista de candidatos de mesclagem mergeCandList (etapa S405 da figura 21). Na fatia P, um candidato de mesclagem para o qual um vetor de movimento tem um valor de (0, 0) e o modo de predição é predição L0 (Pred_L0) é adicionado usando o número máximo de candidatos de mesclagem MaxNumMergeCand como o limite superior. Na fatia B, um candidato de mesclagem para o qual um vetor de movimento tem um valor de (0, 0) e o modo de predição é bipredição (Pred_BI) é adicionado. Um índice de referência quando o candidato de mesclagem é adicionado é diferente do índice de referência adicionado anteriormente.
[00163] Subsequentemente, a unidade de seleção de candidato de mesclagem 347 e a unidade de seleção de candidato de mesclagem 447 selecionam os candidatos de mesclagem a partir dos candidatos de mesclagem registrados dentro da lista de candidatos de mesclagem mergeCandList. A unidade de seleção de candidato de mesclagem 347 do lado da codificação seleciona um candidato de mesclagem calculando uma quantidade de código e uma quantidade de distorção, e fornece um índice de mesclagem indicando o candidato de mesclagem selecionado e informações de interpredição do candidato de mesclagem à unidade de predição de movimento compensado 306 via unidade de determinação de modo de interpredição 305. Por outro lado, a unidade de seleção de candidato de mesclagem 447 do lado de decodificação seleciona um candidato de mesclagem com base em um índice de mesclagem decodificado e fornece o candidato de mesclagem selecionado à unidade de predição de movimento compensado 406. <Atualização de lista de candidatos de preditor de vetor de movimento com base em histórico>
[00164] Em seguida, um método de inicialização e um método de atualização da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList provida na memória de armazenamento de informações de codificação 111 do lado da codificação e a memória de armazenamento de informações de codificação 205 do lado de decodificação serão descritos em detalhes. A figura 26 é um fluxograma explicativo demonstra um procedimento de processamento de inicialização/atualização de uma lista de candidatos de preditor de vetor de movimento com base em histórico.
[00165] Na presente modalidade, assume-se que a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é atualizada na memória de armazenamento de informações de codificação 111 e na memória de armazenamento de informações de codificação 205. Uma unidade de atualização de lista de candidatos de preditor de vetor de movimento com base em histórico pode ser instalada na unidade de interpredição 102 e a unidade de interpredição 203 para atualizar a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList.
[00166] A lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é inicialmente definida no início da fatia, a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é atualizada quando o modo de preditor de vetor de movimento normal ou o modo de mesclagem normal foi selecionado pela unidade de determinação de método de predição 105 no lado da codificação e a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é atualizada quando as informações de predição decodificada pela unidade de decodificação de bit strings 201 é sobre o modo de preditor de vetor de movimento normal ou o modo de mesclagem normal no lado da decodificação.
[00167] As informações de interpredição usadas quando a interpredição é desempenhada no modo de predição de vetor de movimento normal ou o modo de mesclagem normal é registrada como um candidato de informações de interpredição hMvpCand na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList. O candidato de informações de interpredição hMvpCand inclui um índice de referência refIdxL0 de L0, um índice de referência refIdxL1 de L1, um flag de predição L0 predFlagL0 indicando se a predição L0 é desempenhada ou não, um flag de predição L1 predFlagL1 indicando se a predição L1 é desempenhada ou não, um vetor de movimento mvL0 de L0 e um vetor de movimento mvL1 de L1.
[00168] Quando há informações de interpredição tendo o mesmo valor que um candidato de informações de interpredição hMvpCand entre os elementos (isto é, informações de interpredição) registrada na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList provida na memória de armazenamento de informações de codificação 111 do lado da codificação e a memória de armazenamento de informações de codificação 205 do lado de decodificação, o elemento é removido a partir da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList. Por outro lado, quando não há informações de interpredição tendo o mesmo valor que um candidato de informações de interpredição hMvpCand, o elemento no início da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é removido e o candidato de informações de interpredição hMvpCand é adicionado ao final da lista de candidatos de preditor de vetor de movimento com base em histórico, HMvpCandList.
[00169] O número de elementos da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList provida na memória de armazenamento de informações de codificação 111 do lado de codificação e a memória de armazenamento de informações de codificação 205 do lado de decodificação de acordo com a presente invenção é assumido como sendo seis.
[00170] Em primeiro lugar, a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é inicializada em unidades de fatias (etapa S2101 da figura 26). Todos os elementos da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList estão vazios no início da fatia e um valor do número de candidatos de preditor de vetor de movimento com base em histórico (o número atual de candidatos) NumHMvpCand registrado na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é definida como 0.
[00171] Além disso, a inicialização da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é desempenhada em unidades de fatias (um primeiro bloco de codificação de uma fatia), mas pode ser desempenhada em unidades de imagens, partes ou linhas de bloco de árvore.
[00172] Subsequentemente, o seguinte processo de atualização da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é desempenhado iterativamente para cada bloco de codificação dentro da fatia (etapas S2102 a S2111 da figura 26).
[00173] Primeiro, a definição inicial é desempenhada para cada bloco de codificação. Um flag identicalCandExist indicando se há ou não um candidato idêntico que é definido para um valor de FALSE e um índice alvo de remoção removeIdx indicando que um candidato alvo de remoção é definido para 0 (etapa
S2103 da figura 26).
[00174] É determinado se há ou não um candidato de informações de interpredição hMvpCand do alvo de registro (etapa S2104 da figura 26). Quando a unidade de determinação de método de predição 105 do lado de codificação determina que o modo é o modo de preditor de vetor de movimento normal ou o modo de mesclagem normal ou quando a unidade de decodificação de bit strings 201 do lado de decodificação decodifica o modo como o modo de preditor de vetor de movimento normal ou o modo de mesclagem normal, suas informações de interpredição são definidas como um candidato de informações de interpredição hMvpCand do alvo de registro. Quando a unidade de determinação de método de predição 105 do lado de codificação determina que o modo é o modo de intrapredição, o modo de preditor de vetor de movimento com base em sub-bloco ou o modo de mesclagem com base em sub-bloco ou quando a unidade de decodificação de bit strings 201 do lado de decodificação decodifica o modo como o modo de intrapredição, o modo de predição de vetor de movimento com base em sub-bloco ou o modo de mesclagem com base em sub-bloco, um processo de atualização da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList não é desempenhado e o candidato de informações de interpredição hMvpCand do alvo de registro não existe. Quando não há informações de interpredição candidatas hMvpCand do alvo de registro, as etapas S2105 a S2106 são puladas (etapa S2104 da figura 26: NÃO). Quando há um candidato de informações de interpredição hMvpCand do alvo de registro, o processamento a partir da etapa S2105 é desempenhado (etapa S2104 da figura 26: SIM).
[00175] Subsequentemente, é determinado se existe ou não um elemento (informações de interpredição) tendo o mesmo valor que o candidato de informações de interpredição hMvpCand do alvo de registro, isto é, um elemento idêntico, entre os elementos da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (etapa S2105 da figura 26). A figura 27 é um fluxograma de um procedimento de processamento de verificação de elemento idêntico.
Quando um valor do número de candidatos de preditor de vetor de movimento com base em histórico NumHMvpCand é 0 (etapa S2121 da figura 27: NÃO), a lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList está vazia e não há candidato idêntico, de modo que as etapas S2122 a S2125 da figura 27 são pulados e o presente procedimento de processamento de verificação de elemento idêntico é concluído.
Quando o valor do número de candidatos de preditor de vetor de movimento com base em histórico NumHMvpCand é maior que 0 (SIM na etapa S2121 da figura 27), o processamento da etapa S2123 é iterado até que o índice de preditor de vetor de movimento com base em histórico hMvpIdx mude a partir de 0 para NumHMvpCand− 1 (etapas S2122 a S2125 da figura 27). Em primeiro lugar, é feita uma comparação a respeito de um hMvpIdx-ésimo elemento HmvpCandList [hMvpIdx] quando contado a partir de um 0-ésimo elemento da lista de candidatos de preditor de vetor de movimento com base em histórico ser ou não idêntico ao candidato de informações de interpredição hMvpCand (etapa S2123 da Figura 27).Quando eles são os mesmos (etapa S2123 da figura 27: SIM), um flag identicalCandExist indicando se há ou não um candidato idêntico é definido para um valor de TRUE e um índice alvo de remoção removeIdx indicando uma posição de um elemento de um alvo de remoção é definido para um valor atual do índice de preditor de vetor de movimento com base em histórico hMvpIdx, e o presente processo de verificação de elemento idêntico termina.
Quando eles não são os mesmos (etapa S2123 da figura 27: NÃO), hMvpIdx é incrementado em 1. Se o índice de preditor de vetor de movimento com base em histórico hMvpIdx for menor ou igual a NumHMvpCand-1, o processamento a partir da etapa S2123 é desempenhado.
[00176] Com referência ao fluxograma da figura 26, novamente, um processo de deslocamento e adição de um elemento da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList é desempenhado (etapa S2106 da figura 26). A figura 28 é um fluxograma de um procedimento de processamento de deslocamento/adição de um elemento da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList da etapa S2106 da figura 26. Primeiro, é determinado se deve ou não adicionar um novo elemento após remover um elemento armazenado na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList ou adicionar um novo elemento sem remover o elemento. Especificamente, é feita uma comparação a respeito se ou não o flag identicalCandExist, indicando se existe ou não um candidato idêntico, é TRUE ou NumHMvpCand é seis (etapa S2141 da figura 28). Quando tanto a condição de que o flag IdenticalCandExist indicando se existe ou não um candidato idêntico é TRUE ou a condição de que o número atual de candidatos NumHMvpCand é seis é satisfeita (etapa S2141 da figura 28: SIM), um novo elemento é adicionado após a remoção do elemento armazenado na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList. O valor inicial do índice i é definido como um valor de removeIdx+1. O processo de deslocamento de elemento da etapa S2143 é iterado a partir deste valor inicial para NumHMvpCand (etapas S2142 a S2144 da figura 28). Ao copiar o elemento de HMvpCandList[i] para HMvpCandList[i-1], o elemento é deslocado para frente (etapa S2143 da figura 28) e i é incrementado em 1 (etapas S2142 a S2144 da figura 28). Subsequentemente, o candidato de informações de interpredição hMvpCand é adicionado ao (NumHMvpCand−1)-ésimo elemento HMvpCandList [NumHMvpCand−1] quando contado a partir de 0-ésimo elemento que corresponde ao final da lista de candidatos de preditor de vetor de movimento com base em histórico (etapa S2145 da figura 28) e o presente processo de deslocamento/adição de um elemento da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList termina. Por outro lado, quando nem a condição de que o flag identicalCandExist indicando se existe ou não um candidato idêntico é TRUE, nem a condição de que o número atual de candidatos NumHMvpCand é seis é satisfeita (etapa S2141 da figura 28: NÃO), o candidato de informações de interpredição hMvpCand é adicionado ao final da lista de candidatos de preditor de vetor de movimento com base em histórico sem remover um elemento armazenado na lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (etapa S2146 da figura 28). Na presente invenção, o final da lista de candidatos de preditor de vetor de movimento com base em histórico é um NumHMvpCand- ésimo elemento HMvpCandList [NumHMvpCand] quando contado a partir de 0- ésimo elemento. Além disso, NumHMvpCand é incrementado em 1 e o presente processo de deslocamento/adição de um elemento da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList termina.
[00177] A figura 31 é um diagrama explicativo mostrando um exemplo de um processo de atualização da lista de candidatos de preditor de vetor de movimento com base em histórico. Quando um novo elemento é adicionado à lista de candidatos de preditor de vetor de movimento com base no histórico HMvpCandList em que seis elementos (informações de interpredição) foram registrados, os elementos são comparados com as novas informações de interpredição em ordem a partir de um elemento frontal da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (figura 31A). Se o novo elemento tiver o mesmo valor que um terceiro elemento HMVP2 a partir do início da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList, o elemento HMVP2 é removido a partir da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList e elementos subsequentes HMVP3 a HMVP5 são deslocados para frente (copiados) um por um, e o novo elemento é adicionado ao final da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (figura 31B) para completar a atualização da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (figura 31C). <Processo de derivação de candidato de preditor de vetor de movimento com base em histórico>
[00178] Em seguida, um método para derivar um candidato de preditor de vetor de movimento com base em histórico a partir da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList que é um procedimento de processamento da etapa S304 da figura 20 que é um processo comum à unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 323 da unidade de derivação de modo de preditor de vetor de movimento normal 301 do lado de codificação e a unidade de derivação de candidato de preditor de vetor de movimento com base em histórico 423 da unidade de derivação de modo de preditor de vetor de movimento normal 401 do lado de decodificação será descrita em detalhes. A figura 29 é um fluxograma explicativo mostrando um procedimento de processamento de derivação de candidato de preditor de vetor de movimento com base em histórico.
[00179] Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é maior ou igual ao número máximo de elementos na lista de candidatos de preditor de vetor de movimento mvpListLX (na presente invenção, 2) ou um valor do número de candidatos de preditor de vetor de movimento com base em histórico NumHMvpCand é 0 (NÃO na etapa
S2201 da figura 29), o processamento das etapas S2202 a S2209 da figura 29 é omitido e o procedimento de processamento de derivação do candidato de preditor de vetor de movimento com base em histórico termina. Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é menor que 2, que é o número máximo de elementos da lista de candidatos de preditor de vetor de movimento mvpListLX e o valor do número de candidatos de preditor de vetor de movimento com base em histórico NumHMvpCand é maior que 0 (SIM na etapa S2201 da figura 29), o processamento das etapas S2202 a S2209 da figura 29 é desempenhado.
[00180] Subsequentemente, o processamento das etapas S2203 a S2208 da figura 29 é iterado até que o índice i mude a partir de 1 para um valor menor de 4 e o número de candidatos de preditor de vetor de movimento com base em histórico numCheckedHMvpCand (etapas S2202 a S2209 da figura 29). Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é maior ou igual a 2, que é o número máximo de elementos da lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S2203 da figura 29: NÃO), o processamento das etapas S2204 a S2209 na figura 29 é omitido e o presente procedimento de processamento de derivação de candidato de preditor de vetor de movimento com base em histórico termina. Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é menor que 2, que é o número máximo de elementos da lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S2203 da figura 29: SIM), o processamento a partir da etapa S2204 da figura 29 é desempenhado.
[00181] Subsequentemente, o processamento da etapa S2205 a S2207 é desempenhado para Y = 0 e 1 (L0 e L1) (etapas S2204 a S2208 da figura 29). Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é maior ou igual a 2, que é o número máximo de elementos da lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S2205 da figura 29: NÃO), o processamento das etapas S2206 a S2209 na figura 29 é omitido e o presente procedimento de processamento de derivação de candidato de preditor de vetor de movimento com base em histórico termina. Quando o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é menor que 2, que é o número máximo de elementos da lista de candidatos de preditor de vetor de movimento mvpListLX (etapa S2205 da figura 29: SIM), o processamento a partir da etapa S2206 da figura 29 é desempenhado.
[00182] Subsequentemente, no caso de um elemento que tem um índice de referência idêntico ao índice de referência refIdxLX de um vetor de movimento alvo de codificação/decodificação e que é diferente a partir de qualquer elemento da lista de preditores de vetor de movimento mvpListLX dentro da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (SIM na etapa S2206 da figura 29), o vetor de movimento de LY do candidato de preditor de vetor de movimento com base em histórico HMvpCandList [NumHMvpCand−i] é adicionado a um numCurrMvpCand-ésimo elemento mvpListLX[numCurrMvpCand] quando contado a partir do 0-ésimo elemento da lista de candidatos de preditor de vetor de movimento (etapa S2207 da figura 29) e o número atual de candidatos de preditor de vetor de movimento numCurrMvpCand é incrementado em um. Quando não há nenhum elemento que tenha um índice de referência idêntico ao índice de referência refIdxLX de um vetor de movimento alvo de codificação/decodificação e que seja diferente de qualquer elemento da lista de preditores de vetor de movimento mvpListLX dentro da lista de candidatos de preditor de vetor de movimento com base em histórico HMvpCandList (NÃO na etapa S2206 da figura 29), o processo de adição da etapa S2207 é pulado.
[00183] O processamento acima das etapas S2205 a S2207 da figura 29 é desempenhado para L0 e L1 (etapas S2204 a S2208 da figura 29). Quando o índice i é incrementado em 1 e o índice i é menor ou igual a um valor menor de 4 e o número de candidatos de preditor de vetor de movimento com base em histórico NumHMvpCand, o processamento a partir da etapa S2203 é desempenhado novamente (etapas S2202 a S2209 da figura 29). <Processo de derivação de candidato de mesclagem com base em histórico>
[00184] Em seguida, um método de derivar candidatos de mesclagem com base em histórico a partir da lista de candidatos de mesclagem com base em histórico HMvpCandList que é o procedimento de processamento da etapa S404 da figura 21 que é um processo comum para a unidade de derivação de candidato de mesclagem com base em histórico 345 da unidade de derivação de modo de mesclagem normal 302 do lado de codificação e a unidade de derivação de candidato de mesclagem com base em histórico 445 da unidade de derivação de modo de mesclagem normal 402 do lado de decodificação será descrito em detalhes. A figura 30 é um fluxograma explicativo mostrando o procedimento de processamento de derivação de candidato de mesclagem com base em histórico.
[00185] Primeiro, um processo de inicialização é desempenhado (etapa S2301 da figura 30). Cada (numCurrMergeCand−1)-ésimo elemento a partir de 0 de isPruned[i] é definido como um valor FALSE e uma variável numOrigMergeCand é definida como o número de elementos numCurrMergeCand registrados na lista de candidatos de mesclagem atual.
[00186] Subsequentemente, o valor inicial do índice hMvpIdx é definido como 1 e o processo de adição das etapas S2303 a S2310 da figura 30 é iterado até que o índice hMvpIdx mude do valor inicial para NumHMvpCand (etapas
S2302 a S2311 da figura 30). Se o número de elementos registrados na atual lista de candidatos de mesclagem numCurrMergeCand não for menor ou igual a (o número máximo de candidatos de mesclagem MaxNumMergeCand−1), os candidatos de mesclagem serão adicionados a todos os elementos da lista de candidatos de mesclagem, de modo que o presente processo de derivação de candidato de mesclagem com base em histórico termine (NÃO na etapa S2303 da figura 30). Quando o número de elementos numCurrMergeCand registrados na lista de candidatos de mesclagem atual é menor ou igual a (o número máximo de candidatos de mesclagem MaxNumMergeCand-1), o processamento a partir da etapa S2304 é desempenhado. sameMotion é definido para um valor de FALSE (etapa S2304 da figura 30). Subsequentemente, o valor inicial do índice i é definido como 0 e o processamento das etapas S2306 e S2307 da figura 30 é desempenhado até que o índice mude do valor inicial para numOrigMergeCand−1 (S2305 a S2308 na figura 30). Uma comparação é feita a respeito se ou não um (NumHMvpCand−hMvpIdx)-ésimo elemento HMvpCandList[NumHMvpCand−hMvpIdx] quando contado a partir de um 0-ésimo elemento da lista de candidatos de preditor de vetor de movimento com base em histórico tem o mesmo valor que um i-ésimo elemento mergeCandList[i] quando contado a partir do 0-ésimo elemento de uma lista de candidatos de mesclagem (etapa S2306 da figura 30).
[00187] Os candidatos de mesclagem têm o mesmo valor quando os valores de todos os componentes (um modo de interpredição, um índice de referência e um vetor de movimento) dos candidatos de mesclagem são idênticos. Quando os candidatos de mesclagem têm o mesmo valor e isPruned[i] é FALSE (SIM na etapa S2306 da figura 30), ambos sameMotion e isPruned[i] são definidos como TRUE (etapa S2307 da figura 30). Quando os candidatos de mesclagem não têm o mesmo valor (NÃO na etapa S2306 da figura 30), o processamento da etapa S2307 é pulado. Quando o processamento iterativo das etapas S2305 a S2308 da figura 30 foi concluída, uma comparação é feita a respeito se sameMotion é ou não FALSE (etapa S2309 da figura 30). Se sameMotion for FALSE (SIM na etapa S2309 da figura 30), isto é, porque um (NumHMvpCand−hMvpIdx)-ésimo elemento HMvpCandList [NumHMvpCand- hMvpIdx] quando contado a partir do 0-ésimo elemento da lista de candidatos de preditor de vetor de movimento com base em histórico não existe em mergeCandList, um (NumHMvpCand−hMvpIdx)-ésimo elemento HMvpCandList[NumHMvpCand−hMvpIdx] quando contado a partir do 0-ésimo elemento da lista de candidatos de preditor de vetor de movimento com base em histórico é adicionado a um numCurrMergeCand-ésimo elemento mergeCandList[numCurrMergeCand] da lista de candidatos de mesclagem e numCurrMergeCand é incrementado em 1 (etapa S2310 da figura 30). O índice hMvpIdx é incrementado em 1 (etapa S2302 da figura 30) e um processo de iteração das etapas S2302 a S2311 da figura 30 é desempenhado.
[00188] Quando a verificação de todos os elementos da lista de candidatos de preditor de vetor de movimento com base no histórico é concluída ou quando os candidatos de mesclagem são adicionados a todos os elementos da lista de candidatos de mesclagem, o presente processo de derivação do candidato de mesclagem com base no histórico é concluído. <Processo de predição de movimento compensado>
[00189] A unidade de predição de movimento compensado 306 adquire uma posição e um tamanho de um bloco que é um alvo atual de um processo de predição na codificação. Além disso, a unidade de predição de movimento compensado 306 adquire informações de interpredição a partir da unidade de determinação de modo de interpredição 305. Um índice de referência e um vetor de movimento são derivados a partir das informações de interpredição adquiridas e um sinal de predição é gerado após um sinal de imagem de uma posição para a qual uma imagem de referência identificada pelo índice de referência dentro da memória de imagem decodificada 104 é movida a partir de uma posição idêntica àquela de um sinal de imagem de um bloco de predição por uma quantidade de vetor de movimento é adquirido.
[00190] Um sinal de predição de movimento compensado é fornecido a uma unidade de determinação de método de predição 105 usando um sinal de predição adquirido a partir de uma imagem de referência como um sinal de predição de movimento compensado quando o modo de interpredição na interpredição é a predição a partir de uma única imagem de referência, como predição L0 ou predição L1 e usando um sinal de predição obtido por sinais de predição de média ponderada adquiridos a partir de duas imagens de referência como um sinal de predição de movimento compensado quando o modo de predição é predição a partir de duas imagens de referência, tal como um modo de interpredição de Bipredição. Embora uma razão média ponderada de bipredição seja de 1:1 na presente invenção, uma média ponderada pode ser desempenhada usando outra razão. Por exemplo, uma razão de ponderação pode aumentar à medida que o intervalo de imagem entre uma imagem, que é um alvo de predição, e uma imagem de referência diminui. Além disso, a razão de ponderação pode ser calculada usando uma tabela correspondente entre combinações de intervalos de imagem e relações de razões.
[00191] A unidade de predição de movimento compensado 406 tem uma função semelhante à da unidade de predição de movimento compensado 306 do lado de codificação. A unidade de predição de movimento compensado 406 adquire informações de interpredição a partir da unidade de derivação de modo de preditor de vetor de movimento normal 401, a unidade de derivação de modo de mesclagem normal 402, a unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 403 e a unidade de derivação de modo de mesclagem com base em sub-bloco 404 via comutador 408. A unidade de predição de movimento compensado 406 fornece um sinal de predição de movimento compensado obtido para a unidade de sobreposição de sinal de imagem de decodificação 207. <Sobre o modo de interpredição>
[00192] Um processo de desempenho de predição a partir de uma única imagem de referência é definido como unipredição. No caso de unipredição, a predição usando qualquer uma das duas imagens de referência registradas nas listas de referência L0 e L1, como predição L0 ou predição L1, é desempenhada.
[00193] A figura 32 mostra o caso de unipredição em que um tempo de relógio de uma imagem de referência (RefL0Pic) de L0 é anterior ao de uma imagem alvo (CurPic). A figura 33 mostra o caso de unipredição em que um tempo de relógio de uma imagem de referência da predição L0 é posterior ao de uma imagem alvo. Da mesma forma, a imagem de referência da predição de L0 das figuras. 32 e 33 pode ser substituída por uma imagem de referência (RefL1Pic) de predição L1 para desempenhar unipredição.
[00194] O processo de desempenho de predição a partir de duas imagens de referência é definido como bipredição e a bipredição é representada como Bipredição usando predição L0 e predição L1. A figura 34 mostra o caso da bipredição em que um tempo de relógio de uma imagem de referência de predição L0 é anterior ao de uma imagem alvo e um tempo de relógio de uma imagem de referência de predição L1 é posterior ao da imagem alvo. A figura 35 mostra o caso de bipredição em que os tempos de relógio da imagem de referência da predição L0 e da imagem de referência da predição L1 são anteriores aos de uma imagem alvo. A figura 36 mostra o caso de bipredição em que o tempo de relógio de uma imagem de referência de predição L0 e o tempo de relógio de uma imagem de referência de predição L1 são posteriores ao de uma imagem alvo.
[00195] Como descrito acima, uma relação entre um tipo de predição de L0/L1 e o tempo pode ser usada sem ser limitada a L0 que está na direção passada e L1 que está na direção futura. No caso de bipredição, cada uma das predições L0 e L1 pode ser desempenhada usando a mesma imagem de referência. Além disso, é determinado se desempenhar a predição de movimento compensado de acordo com a unipredição ou bipredição com base em, por exemplo, informações (por exemplo, um flag) indicando se deve ser usada a predição L0 e se deve ser usada a predição L1. <Sobre o índice de referência>
[00196] Na modalidade da presente invenção, é possível selecionar uma imagem de referência ótima a partir de uma pluralidade de imagem de referência em predição de movimento compensado para melhorar a precisão da predição de movimento compensado. Assim, a imagem de referência usada na predição de movimento compensado é usada como um índice de referência e o índice de referência é codificado no bitstream junto com a diferença do vetor de movimento. <Processo de compensação de movimento com base em modo de predição de vetor de movimento normal>
[00197] Conforme mostrado na unidade de interpredição 102 do lado de codificação da figura 16, quando as informações de interpredição a partir da unidade de derivação de modo de preditor de vetor de movimento normal 301 foi selecionada na unidade de determinação de modo de interpredição 305, a unidade de predição de movimento compensado 306 adquire as informações de interpredição a partir da unidade de determinação de modo de interpredição 305, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de determinação de método de predição 105.
[00198] Da mesma forma, como mostrado na unidade de interpredição 203 do lado de decodificação da figura 22, quando o comutador 408 foi conectado à unidade de derivação de modo de preditor de vetor de movimento normal 401 no processo de decodificação, a unidade de predição de movimento compensado 406 adquire informações de interpredição a partir da unidade de derivação de modo de preditor de vetor de movimento normal 401, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de sobreposição de sinal de imagem de decodificação 207. <Processo de compensação de movimento com base em modo de mesclagem normal>
[00199] Além disso, como mostrado na unidade de interpredição 102 no lado de codificação da figura 16, quando as informações de interpredição foram selecionadas a partir da unidade de derivação de modo de mesclagem normal 302 na unidade de determinação de modo de interpredição 305, a unidade de predição de movimento compensado 306 adquire as informações de interpredição a partir da unidade de determinação de modo de interpredição 305, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de determinação de método de predição 105.
[00200] Da mesma forma, como mostrado na unidade de interpredição 203 no lado de decodificação da figura 22, quando o comutador 408 foi conectado à unidade de derivação de modo de mesclagem normal 402 no processo de decodificação, a unidade de predição de movimento compensado 406 adquire informações de interpredição a partir da unidade de derivação de modo de mesclagem normal 402, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de sobreposição de sinal de imagem de decodificação 207. <Processo de compensação de movimento com base em modo de predição de vetor de movimento com base em sub-bloco>
[00201] Além disso, como mostrado na unidade de interpredição 102 no lado de codificação da figura 16, quando as informações de interpredição a partir da unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 303 foi selecionada na unidade de determinação de modo de interpredição 305, a unidade de predição de movimento compensado 306 adquire as informações de interpredição a partir da unidade de determinação de modo de interpredição 305, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de determinação de método de predição 105.
[00202] Da mesma forma, como mostrado na unidade de interpredição 203 no lado de decodificação da figura 22, quando o comutador 408 foi conectado à unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 403 no processo de decodificação, a unidade de predição de movimento compensado 406 adquire informações de interpredição a partir da unidade de derivação de modo de preditor de vetor de movimento com base em sub-bloco 403, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de sobreposição de sinal de imagem de decodificação 207. <Processo de compensação de movimento com base em modo de mesclagem com base em sub-bloco>
[00203] Além disso, como mostrado na unidade de interpredição 102 no lado de codificação da figura 16, quando as informações de interpredição a partir da unidade de derivação de modo de mesclagem com base em sub-bloco 304 foi selecionada na unidade de determinação de modo de interpredição 305, a unidade de predição de movimento compensado 306 adquire as informações de interpredição a partir da unidade de determinação de modo de interpredição 305, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de determinação de método de predição 105.
[00204] Da mesma forma, como mostrado na unidade de interpredição 203 no lado de decodificação da figura 22, quando o comutador 408 foi conectado à unidade de derivação de modo de mesclagem com base em sub-bloco 404 no processo de decodificação, a unidade de predição de movimento compensado 406 adquire informações de interpredição a partir da unidade de derivação de modo de mesclagem com base em sub-bloco 404, deriva um modo de interpredição, um índice de referência e um vetor de movimento de um bloco alvo atual e gera um sinal de predição de movimento compensado. O sinal de predição de movimento compensado gerado é fornecido à unidade de sobreposição de sinal de imagem de decodificação 207.
<Processo de compensação de movimento com base em predição de transformada afim>
[00205] No modo de preditor de vetor de movimento normal e no modo de mesclagem normal, a compensação de movimento de um modelo afim pode ser usada com base nos flags a seguir. Os flags a seguir são refletidos nos flags a seguir com base nas condições de interpredição determinadas pela unidade de determinação de modo de interpredição 305 no processo de codificação e são codificados em um bitstream. No processo de decodificação, é determinado se desempenha ou não a compensação de movimento do modelo afim com base nos seguintes flags no bitstream.
[00206] sps_affine_enabled_flag representa se a compensação de movimento do modelo afim pode ou não ser usada na interpredição. Se sps_affine_enabled_flag for 0, a supressão é desempenhada sem compensação de movimento de um modelo afim em unidades de sequências. Além disso, inter_affine_flag e cu_affine_type_flag não são transmitidos na sintaxe de CU (bloco de codificação) de uma sequência de vídeo de codificação. Se sps_affine_enabled_flag for 1, a compensação de movimento de um modelo afim pode ser usada em uma sequência de vídeo de codificação.
[00207] sps_affine_type_flag representa se a compensação de movimento de um modelo afim de seis parâmetros pode ser usada ou não na interpredição. Se sps_affine_type_flag for 0, a supressão é desempenhada sem compensação de movimento do modelo afim de seis parâmetros. Além disso, cu_affine_type_flag não é transmitido na sintaxe de CU de uma sequência de vídeo de codificação. Se sps_affine_type_flag for 1, a compensação de movimento do modelo afim de seis parâmetros pode ser usada na sequência de vídeo de codificação. Quando sps_affine_type_flag não existe, é considerado 0.
[00208] Quando uma fatia P ou B é decodificada, se inter_affine_flag for 1 no CU alvo atual, a compensação de movimento do modelo afim é usada para gerar um sinal de predição de movimento compensado do CU alvo atual. Se inter_affine_flag for 0, o modelo afim não é usado no CU alvo atual. Quando inter_affine_flag não existe, é assumido como 0.
[00209] Quando uma fatia P ou B é decodificada, se cu_affine_type_flag for 1 no CU alvo atual, a compensação de movimento de um modelo afim de seis parâmetros é usada para gerar um sinal de predição de movimento compensado do CU alvo atual. Se cu_affine_type_flag for 0, a compensação de movimento de um modelo afim de quatro parâmetros é usada para gerar um sinal de predição de movimento compensado do CU alvo atual.
[00210] Na compensação de movimento de um modelo afim, porque um índice de referência e um vetor de movimento são derivados em unidades de sub-blocos, um sinal de predição de movimento compensado é gerado usando um índice de referência ou um vetor de movimento que é um alvo em unidades de sub-blocos.
[00211] Um modelo afim de quatro parâmetros é um modo no qual o vetor de movimento do sub-bloco é derivado a partir de quatro parâmetros de componentes horizontais e componentes verticais de vetores de movimento dos dois pontos de controle e a compensação de movimento é desempenhada em unidades de sub-blocos.
[00212] Na presente modalidade, na derivação da lista de candidatos de preditor de vetor de movimento no modo de preditor de vetor de movimento normal, os candidatos são adicionados na ordem do candidato de preditor de vetor de movimento espacial, o candidato de preditor de vetor de movimento com base em histórico e o candidato de preditor de vetor de movimento temporal. Ao adotar a configuração acima, os seguintes efeitos podem ser obtidos.
[00213] 1. No processo de derivação de candidato de preditor de vetor de movimento com base em histórico, um procedimento de verificação de elemento idêntico é desempenhado aos elementos já adicionados à lista de candidatos de preditor de vetor de movimento e aos elementos da lista de candidatos de preditor de vetor de movimento com base em histórico. Visto que os elementos da lista de candidatos de preditor de vetor de movimento com base em histórico são adicionados à lista de candidatos de preditor de vetor de movimento apenas quando os elementos não são os mesmos, é garantido que a lista de candidatos de preditor de vetor de movimento tenha elementos diferentes. Adicionalmente, o candidato de preditor de vetor de movimento espacial usando uma correlação espacial e o candidato de preditor de vetor de movimento com base em histórico usando um histórico de processamento têm características diferentes. Consequentemente, há uma grande possibilidade de que uma pluralidade de candidatos de preditor de vetor de movimento com características diferentes possa ser provida e a eficiência de codificação possa ser melhorada.
[00214] 2. No processo de derivação de candidato de preditor de vetor de movimento com base em histórico, o processo de verificação de elemento idêntico com o candidato de preditor de vetor de movimento espacial é desempenhado, mas o processo de verificação de elemento idêntico não é desempenhado com o candidato de preditor de vetor de movimento temporal. Consequentemente, visto que o número de vezes que o elemento idêntico é verificado pode ser limitado, a carga de processamento relacionada à derivação da lista de candidatos de preditor de vetor de movimento pode ser reduzida.
[00215] 3. No processo de derivação de candidato de preditor de vetor de movimento temporal, o processo de verificação de elemento idêntico associado ao candidato de preditor de vetor de movimento espacial e ao candidato de preditor de vetor de movimento com base em histórico não é desempenhado. Por conseguinte, o candidato de preditor de vetor de movimento com base em histórico e o candidato de preditor de vetor de movimento temporal podem ser derivados independentemente. A taxa de tranferência pode ser melhorado por processamento paralelo. (Segunda modalidade)
[00216] Em uma segunda modalidade, na geração de uma lista de candidatos de preditor de vetor de movimento em um modo de preditor de vetor de movimento normal, os candidatos de preditor de vetor de movimento temporal não são derivados e os candidatos são adicionados na ordem de um candidato de preditor de vetor de movimento espacial e um candidato de preditor de vetor de movimento com base em histórico.
[00217] A figura 38 é um diagrama de blocos da configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16 de acordo com a segunda modalidade.
[00218] A figura 39 é um diagrama de blocos da configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22 de acordo com a segunda modalidade.
[00219] Na segunda modalidade, visto que a lista de candidatos de preditor de vetor de movimento é gerada sem derivar os candidatos de preditor de vetor de movimento temporal, a carga de processamento pode ser reduzida. Além disso, no modo de preditor de vetor de movimento normal, visto que os candidatos de preditor de vetor de movimento com base em histórico são suficientes para a lista de candidatos de preditor de vetor de movimento, a eficiência de codificação não é reduzida. (Terceira modalidade)
[00220] Em uma terceira modalidade, na geração de uma lista de candidatos de preditor de vetor de movimento em um modo de preditor de vetor de movimento normal, candidatos são adicionados na ordem de um candidato de preditor de vetor de movimento espacial, um candidato de preditor de vetor de movimento temporal e um candidato de preditor de vetor de movimento com base em histórico. Na presente invenção, em um processo de derivação de candidato de preditor de vetor de movimento com base em histórico, um processo de verificação de elemento idêntico associado ao candidato de preditor de vetor de movimento espacial e ao candidato de preditor de vetor de movimento temporal não é desempenhado.
[00221] A figura 40 é um diagrama de blocos da configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 301 da figura 16 de acordo com a terceira modalidade.
[00222] A figura 41 é um diagrama de blocos da configuração detalhada de uma unidade de derivação de modo de preditor de vetor de movimento normal 401 da figura 22 de acordo com a terceira modalidade.
[00223] Na terceira modalidade, conforme na primeira modalidade, o número de vezes que o elemento idêntico é verificado pode ser limitado, de modo que a carga de processamento relacionada à derivação da lista de candidatos de preditor de vetor de movimento possa ser reduzida. Além disso, ao adicionar candidatos de preditor de vetor de movimento temporal com classificações mais altas que os candidatos de preditor de vetor de movimento com base em histórico à lista de candidatos de preditor de vetor de movimento temporal, o candidato de preditor de vetor de movimento temporal com alta eficiência de predição pode ser priorizado em relação ao candidato de preditor de vetor de movimento com base em histórico e a lista de candidatos de preditor de vetor de movimento com alta eficiência de codificação pode ser gerada enquanto a carga de processamento é limitada sem desempenhar o processo de verificação de elemento idêntico no preditor de vetor de movimento entre diferentes tipos de candidatos (candidatos de preditor de vetor de movimento espacial, candidatos de preditor de vetor de movimento temporal e candidatos de preditor de vetor de movimento com base em histórico).
[00224] Duas ou mais de todas as modalidades descritas acima podem ser combinadas.
[00225] Em todas as modalidades descritas acima, uma saída de bitstream pelo dispositivo de codificação de imagem tem um formato de dados específico para que o bitstream possa ser decodificado de acordo com o método de codificação usado na modalidade. Além disso, um dispositivo de decodificação de imagem correspondente ao dispositivo de codificação de imagem pode decodificar o bitstream do formato de dados específico.
[00226] Quando uma rede com fio ou sem fio é usada para trocar um bitstream entre o dispositivo de codificação de imagem e o dispositivo de decodificação de imagem, o bitstream pode ser convertido em um formato de dados adequado para uma forma de transmissão de um percurso de comunicação e transmissão. Neste caso, um dispositivo de transmissão para converter a saída de bitstream a partir do dispositivo de codificação de imagem em dados codificados de um formato de dados adequado para a forma de transmissão do percurso de comunicação e transmissão dos dados codificados para a rede e um dispositivo de recepção para receber os dados codificados a partir da rede, a restauração dos dados codificados para o bitstream e o fornecimento do bitstream para o dispositivo de decodificação de imagem são providos. O dispositivo de transmissão inclui uma memória que armazena em buffer a saída do bitstream pelo dispositivo de codificação de imagem, uma unidade de processamento de pacotes que empacota o bitstream e uma unidade de transmissão que transmite dados codificados em pacotes via rede. O dispositivo de recepção inclui uma unidade de recepção que recebe os dados codificados em pacotes via rede, uma memória que armazena em buffer os dados codificados recebidos e uma unidade de processamento de pacotes que gera um bitstream ao desempenhar o processamento de pacotes nos dados codificados e fornece o bitstream ao dispositivo de decodificação de imagem.
[00227] Além disso, um dispositivo de display pode ser provido pela adição de uma unidade de display que exibe uma imagem decodificada pelo dispositivo de decodificação de imagem à configuração. Neste caso, a unidade de display lê um sinal de imagem decodificado gerado pela unidade de sobreposição de sinal de imagem de decodificação 207 e armazenado na memória de imagem decodificada 208 e exibe o sinal de imagem decodificado em uma tela.
[00228] Além disso, um dispositivo de imagem pode ser provido pela adição de uma unidade de imagem que insere uma imagem capturada no dispositivo de codificação de imagem para a configuração. Neste caso, a unidade de imagem insere um sinal de imagem capturado para a unidade de separação de bloco 101.
[00229] A figura 37 mostra um exemplo de uma configuração de hardware de um dispositivo de codificação/decodificação de acordo com a presente modalidade. O dispositivo de codificação/decodificação inclui a configuração do dispositivo de codificação de imagem e o dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção. Um dispositivo de codificação/decodificação 9000 relacionado inclui uma CPU 9001, um IC de codec 9002, uma interface de I/O 9003, uma memória 9004, um drive de disco óptico 9005, uma interface de rede 9006 e uma interface de vídeo 9009 e as respectivas partes estão conectadas por um barramento 9010.
[00230] Uma unidade de codificação de imagem 9007 e uma unidade de decodificação de imagem 9008 são normalmente implementadas como o IC de codec 9002. Um processo de codificação de imagem do dispositivo de codificação de imagem de acordo com a modalidade da presente invenção é executado pela unidade de codificação de imagem 9007 e um processo de decodificação de imagem no dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção é desempenhado pela unidade de decodificação de imagem 9008. A interface de I/O 9003 é implementada por, por exemplo, uma interface USB e é conectada a um teclado externo 9104, um mouse 9105 e afins. A CPU 9001 controla o dispositivo de codificação/decodificação 9000 de modo que uma operação desejada pelo usuário seja executada com base em uma entrada de operação do usuário por meio da interface de I/O 9003. As operações do usuário usando o teclado 9104, o mouse 9105 e afins incluem a seleção de uma função de codificação ou decodificação a ser executada, definir a qualidade da codificação, designação de um destino de entrada/saída de um bitstream, designação de um destino de entrada/saída de uma imagem e afins.
[00231] Quando o usuário deseja uma operação de reprodução de uma imagem gravada em um meio de gravação de disco 9100, o drive de disco óptico 9005 lê um bitstream a partir do meio de gravação de disco 9100 que foi inserido e transmite o bitstream lido para a unidade de decodificação de imagem 9008 do IC de codec 9002 por meio do barramento 9010. A unidade de decodificação de imagem 9008 executa um processo de decodificação de imagem no bitstream de entrada no dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção e transmite uma imagem decodificada para um monitor externo 9103 por meio da interface de vídeo 9009. O dispositivo de codificação/decodificação 9000 inclui uma interface de rede 9006 e pode ser conectado a um servidor de distribuição externo 9106 e a um terminal portátil 9107 por meio de uma rede 9101. Quando o usuário deseja reproduzir a imagem gravada no servidor de distribuição 9106 ou no terminal portátil 9107 em vez da imagem gravada no meio de gravação de disco 9100, a interface de rede 9006 adquire um bitstream a partir da rede 9101 em vez de ler o bitstream a partir do meio de gravação de disco de entrada 9100. Quando o usuário deseja reproduzir a imagem gravada na memória 9004, o processo de decodificação de imagem no dispositivo de decodificação de imagem de acordo com a modalidade da presente invenção é executado no bitstream gravado na memória 9004.
[00232] Quando o usuário deseja desempenhar uma operação de codificação de uma imagem capturada pela câmera externa 9102 e gravar a imagem codificada na memória 9004, a interface de vídeo 9009 insere a imagem a partir da câmera 9102 e transmite a imagem para a unidade de codificação de imagem 9007 do IC de codec 9002 por meio do barramento 9010. A unidade de codificação de imagem 9007 executa um processo de codificação de imagem em uma entrada de imagem via interface de vídeo 9009 no dispositivo de codificação de imagem de acordo com a modalidade da presente invenção para criar um bitstream. Em seguida, o bitstream é transmitido para a memória 9004 por meio do barramento 9010. Quando o usuário deseja gravar um bitstream no meio de gravação de disco 9100 em vez da memória 9004, o drive de disco óptico 9005 grava o bitstream no meio de gravação de disco 9100 que foi inserido.
[00233] Também é possível implementar uma configuração de hardware que inclui um dispositivo de codificação de imagem sem incluir um dispositivo de decodificação de imagem ou uma configuração de hardware que inclui um dispositivo de decodificação de imagem sem incluir um dispositivo de codificação de imagem. Tal configuração de hardware é implementada, por exemplo, substituindo o IC de codec 9002 pela unidade de codificação de imagem 9007 ou a unidade de decodificação de imagem 9008.
[00234] Os processos acima relacionados à codificação e decodificação podem ser implementados como um dispositivo de transmissão,
armazenamento e recepção usando hardware e implementado por firmware armazenado em uma memória somente de leitura (ROM), uma memória flash ou afins ou software de um computador ou afins. Um programa de firmware e um programa de software do mesmo podem ser providos ao gravar os programas em uma mídia de gravação capaz de ser lida por um computador ou afins ou podem ser providos a partir de um servidor através de uma rede com fio ou sem fio ou podem ser providos como difusão de dados de difusão digital terrestre ou por satélite.
[00235] A presente invenção foi descrita acima com base nas modalidades. As modalidades são exemplos e será entendido por técnicos no assunto que várias modificações são possíveis em combinações dos respectivos componentes e processos de processamento e tais modificações estão dentro do escopo da presente invenção. [Lista de Sinais de Referência] 100 Dispositivo de codificação de imagem 101 Unidade de separação de bloco 102 Unidade de interpredição 103 Unidade de intrapredição 104 Memória de imagem decodificada 105 Unidade de determinação de método de predição 106 Unidade de geração residual 107 Unidade de transformada ortogonal/quantização 108 Unidade de codificação de bit strings 109 Unidade de quantização inversa/transformada ortogonal inversa 110 Unidade de sobreposição de sinal de imagem de decodificação 111 Memória de armazenamento de informações de codificação 200 Dispositivo de decodificação de imagem
201 Unidade de decodificação de bit strings 202 Unidade de separação de bloco 203 Unidade de interpredição 204 Unidade de intrapredição 205 Memória de armazenamento de informações de codificação 206 Unidade de quantização inversa/transformada ortogonal inversa 207 Unidade de sobreposição de sinal de imagem de decodificação 208 Memória de imagem decodificada

Claims (4)

REIVINDICAÇÕES
1. Dispositivo de decodificação de imagem em movimento caracterizado pelo fato de que compreende: uma unidade de derivação de candidato de informações de movimento espacial configurada para derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço; uma unidade de derivação de candidato de informações de movimento temporal configurada para derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo; e uma unidade de derivação de candidato de informações de movimento com base em histórico configurada para derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento com base em histórico é comparado ao candidato de informações de movimento espacial em relação às informações de movimento e não é comparado ao candidato de informações de movimento temporal em relação às informações de movimento.
2. Método de decodificação de imagem em movimento para uso em um dispositivo de decodificação de imagem em movimento, o método de decodificação de imagem em movimento caracterizado pelo fato de que compreende as etapas de: derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do espaço; derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de decodificação em um domínio do tempo; e derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco decodificado, em que o candidato de informações de movimento com base em histórico é comparado ao candidato de informações de movimento espacial em relação às informações de movimento e não é comparado ao candidato de informações de movimento temporal em relação às informações de movimento.
3. Dispositivo de codificação de imagem em movimento caracterizado pelo fato de que compreende: uma unidade de derivação de candidato de informações de movimento espacial configurada para derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de codificação em um domínio do espaço; uma unidade de derivação de candidato de informações de movimento temporal configurada para derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de codificação em um domínio do tempo; e uma unidade de derivação de candidato de informações de movimento com base em histórico configurada para derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco codificado, em que o candidato de informações de movimento com base em histórico é comparado ao candidato de informações de movimento espacial em relação às informações de movimento e não é comparado ao candidato de informações de movimento temporal em relação às informações de movimento.
4. Método de codificação de imagem em movimento para uso em um dispositivo de codificação de imagem em movimento, o método de codificação de imagem em movimento caracterizado pelo fato de que compreende as etapas de: derivar um candidato de informações de movimento espacial a partir de informações de movimento de um bloco vizinho a um bloco alvo de codificação em um domínio do espaço; derivar um candidato de informações de movimento temporal a partir de informações de movimento de um bloco vizinho a um bloco alvo de codificação em um domínio do tempo; e derivar um candidato de informações de movimento com base em histórico a partir de uma memória para reter informações de movimento de um bloco codificado, em que o candidato de informações de movimento com base em histórico é comparado ao candidato de informações de movimento espacial em relação às informações de movimento e não é comparado ao candidato de informações de movimento temporal em relação às informações de movimento.
FIGURA 1 MEMÓRIA DE
ARMAZENAMENTO
DE Petição 870210060567, de 05/07/2021, pág. 94/131
INFORMAÇÕES DE
CODIFICAÇÃO
UNIDADE DE UNIDADE DE
UNIDADE DE UNIDADE DE DETERMINAÇÃO
SEPARAÇÃO CODIFICAÇÃO
INTERPREDIÇÃO DE MÉTODO DE DE BIT
DE BLOCO PREDIÇÃO STRINGS 1/38
UNIDADE DE
INTRAPREDIÇÃO
MEMÓRIA DE UNIDADE DE UNIDADE DE
SOBREPOSIÇÃO DE QUANTIZAÇÃO IMAGEM SINAL DE IMAGEM DE INVERSA/
DECODIFICADA DECODIFICAÇÃO TRANSFORMADA
ORTOGONAL INVERSA
UNIDADE DE UNIDADE DE
GERAÇÃO TRANSFORMADA RESIDUAL ORTOGONAL/
QUANTIZAÇÃO
BR112021012414-4A 2018-12-28 2019-12-20 Dispositivo de decodificação de imagem em movimento, dispositivode codificação de imagem em movimento e métodos relacionados BR112021012414A2 (pt)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018247407 2018-12-28
JP2018-247407 2018-12-28
JP2019-063065 2019-03-28
JP2019063065 2019-03-28
PCT/JP2019/050103 WO2020137888A1 (ja) 2018-12-28 2019-12-20 動画像復号装置、動画像復号方法、動画像復号プログラム、動画像符号化装置、動画像符号化方法及び動画像符号化プログラム

Publications (1)

Publication Number Publication Date
BR112021012414A2 true BR112021012414A2 (pt) 2021-09-08

Family

ID=71128684

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112021012414-4A BR112021012414A2 (pt) 2018-12-28 2019-12-20 Dispositivo de decodificação de imagem em movimento, dispositivode codificação de imagem em movimento e métodos relacionados

Country Status (10)

Country Link
US (4) US11503283B2 (pt)
EP (1) EP3905686A4 (pt)
JP (5) JP6866919B2 (pt)
KR (2) KR102606883B1 (pt)
CN (1) CN113287314A (pt)
BR (1) BR112021012414A2 (pt)
CA (1) CA3129872A1 (pt)
MX (1) MX2021007756A (pt)
RU (1) RU2768375C1 (pt)
WO (1) WO2020137888A1 (pt)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020098813A1 (en) 2018-11-16 2020-05-22 Beijing Bytedance Network Technology Co., Ltd. Usage for history-based affine parameters
CN113287314A (zh) * 2018-12-28 2021-08-20 Jvc建伍株式会社 动图像解码装置、动图像解码方法、动图像解码程序、动图像编码装置、动图像编码方法以及动图像编码程序
WO2020169109A1 (en) * 2019-02-22 2020-08-27 Beijing Bytedance Network Technology Co., Ltd. Sub-table for history-based affine mode

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3277111B2 (ja) 1995-10-18 2002-04-22 シャープ株式会社 動画像符号化装置および動画像復号化装置
US8514933B2 (en) 2005-03-01 2013-08-20 Qualcomm Incorporated Adaptive frame skipping techniques for rate controlled video encoding
US9313494B2 (en) * 2011-06-20 2016-04-12 Qualcomm Incorporated Parallelization friendly merge candidates for video coding
HUE052897T2 (hu) * 2011-06-27 2021-05-28 Samsung Electronics Co Ltd Mozgásinformáció kódolása és dekódolása
US9992511B2 (en) 2011-10-21 2018-06-05 Nokia Technologies Oy Method for video coding and an apparatus
US9571833B2 (en) * 2011-11-04 2017-02-14 Nokia Technologies Oy Method for coding and an apparatus
KR20130050149A (ko) * 2011-11-07 2013-05-15 오수미 인터 모드에서의 예측 블록 생성 방법
CN107371019B (zh) * 2011-12-28 2019-12-06 Jvc 建伍株式会社 动图像编码装置、动图像编码方法以及存储介质
US9300906B2 (en) 2013-03-29 2016-03-29 Google Inc. Pull frame interpolation
CN106471806B (zh) * 2014-06-16 2019-06-04 高通股份有限公司 3d-hevc中的简化移位合并候选者及合并列表导出
SG11202011714RA (en) * 2018-06-29 2020-12-30 Beijing Bytedance Network Technology Co Ltd Partial/full pruning when adding a hmvp candidate to merge/amvp
US10785582B2 (en) 2018-12-10 2020-09-22 Starkey Laboratories, Inc. Ear-worn electronic hearing device incorporating an antenna with cutouts
US11297330B2 (en) 2018-09-22 2022-04-05 Lg Electronics Inc. Method and apparatus for processing video signal based on inter prediction
CN117768651A (zh) 2018-09-24 2024-03-26 北京字节跳动网络技术有限公司 处理视频数据的方法、装置、介质、以及比特流存储方法
US11470340B2 (en) 2018-12-10 2022-10-11 Tencent America LLC Simplified merge list construction for small coding blocks
CN116389750A (zh) * 2018-12-28 2023-07-04 Jvc建伍株式会社 动图像解码装置和方法、以及动图像编码装置和方法
CN113287314A (zh) * 2018-12-28 2021-08-20 Jvc建伍株式会社 动图像解码装置、动图像解码方法、动图像解码程序、动图像编码装置、动图像编码方法以及动图像编码程序

Also Published As

Publication number Publication date
US20220078411A1 (en) 2022-03-10
RU2768375C1 (ru) 2022-03-24
JP7405127B2 (ja) 2023-12-26
RU2022106266A (ru) 2022-03-17
JP2024053072A (ja) 2024-04-12
MX2021007756A (es) 2021-08-05
WO2020137888A1 (ja) 2020-07-02
JP2022036089A (ja) 2022-03-04
EP3905686A4 (en) 2022-10-19
US20230328235A1 (en) 2023-10-12
CN113287314A (zh) 2021-08-20
KR20210022757A (ko) 2021-03-03
JP2021100285A (ja) 2021-07-01
JP6866919B2 (ja) 2021-04-28
EP3905686A1 (en) 2021-11-03
JP2020167663A (ja) 2020-10-08
US11856190B2 (en) 2023-12-26
US20230328236A1 (en) 2023-10-12
US11503283B2 (en) 2022-11-15
CA3129872A1 (en) 2020-07-02
JP2024023678A (ja) 2024-02-21
KR102606883B1 (ko) 2023-11-24
JP7140224B2 (ja) 2022-09-21
KR20230163002A (ko) 2023-11-29
US20230031647A1 (en) 2023-02-02

Similar Documents

Publication Publication Date Title
BR112021012484A2 (pt) Dispositivo de codificação de imagem, método de codificação de imagem, e programa de codificação de imagem, dispositivo de decodificação de imagem, método de decodificação de imagem e programa de decodificação de imagem
BR112021012414A2 (pt) Dispositivo de decodificação de imagem em movimento, dispositivode codificação de imagem em movimento e métodos relacionados
BR112021012485A2 (pt) Dispositivo de codificação de imagem, método de codificação de imagem, e programa de codificação de imagem, dispositivo de decodificação de imagem, método de decodificação de imagem, e programa de decodificação de imagem
BR112021012481A2 (pt) Dispositivo de codificação de imagem em movimento, método de codificação de imagem em movimento, programa de codificação de imagem em movimento, dispositivo de decodificação de imagem em movimento, método de decodificação de imagem em movimento, e programa de decodificação de imagem em movimento
BR112021025852B1 (pt) Dispositivo de codificação de imagem, método de codificação de imagem, dispositivo de decodificação de imagem e método de decodificação de imagem
BR112021012426A2 (pt) Dispositivo de codificação de imagem em movimento, método de codificação de imagem em movimento, programa de codificação de imagem em movimento, dispositivo de decodificação de imagem em movimento, método de decodificação de imagem em movimento e programa de decodificação de imagem em movimento
BR112021012479A2 (pt) Dispositivo de codificação de imagem em movimento, método de codificação de imagem em movimento, programa de codificação de imagem em movimento, dispositivo de decodificação de imagem em movimento, método de decodificação de imagem em movimento e programa de decodificação de imagem em movimento
BR112021016738A2 (pt) Dispositivo de codificação de imagem, método de codificação de imagem, programa de codificação de imagem, dispositivo de decodificação de imagem, método de decodificação de imagem e programa de decodificação de imagem
BR112021012435A2 (pt) Dispositivo de decodificação de imagem, método de decodificação de imagem e programa de decodificação de imagem
BR112021012418A2 (pt) Dispositivo de codificação de imagem, método de codificação de imagem, dispositivo de decodificação de imagem e método de decodificação de imagem
CN113068038B (zh) 动图像解码装置、动图像解码方法、动图像解码程序
BR112021015535B1 (pt) Dispositivo de codificação de vídeo, método de codificação de vídeo, dispositivo de decodificação de vídeo e método de decodificação de vídeo
BR112021004690B1 (pt) Dispositivo de conversão em código de imagem em movimento, método de conversão em código de imagem em movimento, dispositivo de decodificação de imagem em movimento e método de decodificação de imagem em movimento
RU2779930C2 (ru) Устройство декодирования динамических изображений, способ декодирования динамических изображений, программа декодирования динамических изображений, устройство кодирования динамических изображений, способ кодирования динамических изображений и программа кодирования динамических изображений
WO2020137857A1 (ja) 画像符号化装置、画像符号化方法、画像符号化プログラム、画像復号装置、画像復号方法及び画像復号プログラム
CN113055690A (zh) 图像编码装置和方法、图像解码装置和方法、存储介质
TW202415072A (zh) 影像編碼裝置、影像編碼方法、影像編碼程式、影像解碼裝置、影像解碼方法、影像解碼程式、儲存方法及送訊方法