BR112019019702A2

BR112019019702A2 - método de transformada em sistema de codificação de imagem e aparelho para o mesmo

Info

Publication number: BR112019019702A2
Application number: BR112019019702A
Authority: BR
Inventors: Jang Hyeongmoon; Lim Jaehyun; Kim Seunghwan
Original assignee: Lg Electronics Inc
Priority date: 2017-03-21
Filing date: 2018-01-31
Publication date: 2020-04-14
Also published as: US20200177889A1; MX2019011211A; WO2018174402A1; RU2020116853A; KR20190125482A; RU2722394C1; RU2020116853A3; EP3588952B1; CA3057445A1; CN110546952A; RU2733279C2; KR102171362B1; AU2018239635A1; EP3588952A1; JP2020510374A; EP3588952A4

Abstract

um método de transformada, de acordo com a presente invenção, compreende as etapas de: obter coeficientes de transformada para um bloco alvo; determinar um conjunto de transformada secundária não-separável (nsst) para o bloco alvo; selecionar um de uma pluralidade de núcleos nsst incluídos no conjunto nsst com base em um índice nsst; e gerar coeficientes de transformada modificados pela transformação secundária não-separável dos coeficientes de transformada com base no núcleo nsst que foi selecionado, em que o conjunto nsst para o bloco alvo é determinado com base em um modo de predição intra e/ou no tamanho do bloco alvo. de acordo com a presente invenção, a quantidade de dados transmitida, que é necessária para o processamento residual, pode ser reduzida e a eficiência de codificação residual pode ser aumentada.

Description

“MÉTODO DE TRANSFORMADA EM SISTEMA DE CODIFICAÇÃO DE IMAGEM E APARELHO PARA O MESMO”

ANTECEDENTES DA INVENÇÃO

Campo Técnico [001] A presente modalidade relaciona-se a uma tecnologia de codificação de imagem, e, mais particularmente, a um sistema de codificação de imagem, um método de transformada e um aparelho.

Técnica Relacionada [002]A demanda por imagens de alta resolução e alta qualidade, como imagens em HD (Alta Definição) e UHD (Ultra-Alta Definição), tem aumentado em diversas áreas. Uma vez que os dados de imagem possuem alta resolução e alta qualidade, a quantidade de informação ou bits a ser transmitida aumenta se comparado aos dados de imagem de versões anteriores. Portanto, quando os dados de imagem são transmitidos utilizando-se um meio, tal como uma linha de banda larga convencional com fio ou sem fio, ou quando os dados de imagem são armazenados utilizando-se um meio de armazenamento existente, aumenta-se o custo de transmissão e o custo de armazenamento dos mesmos.

[003] Consequentemente, há a necessidade de uma técnica de compressão de imagem com alta eficiência para transmitir, armazenar e reproduzir informações de imagens de alta resolução e alta qualidade de maneira eficaz.

SUMÁRIO [004]A presente modalidade provê um método e aparelho para aprimorar a eficiência de codificação de imagem.

[005]A presente modalidade também provê um método e aparelho para aprimorar a eficiência de transformada.

[006]A presente modalidade também provê um método e aparelho para aprimorar a eficiência da codificação residual baseado em uma multitransformada.

Petição 870190117153, de 13/11/2019, pág. 8/53

2/39 [007] A presente modalidade também provê um método e aparelho de transformada secundária não-separável.

[008] Em um aspecto, é proporcionado um método de transformada realizado por um aparelho de decodificação. O método inclui obter coeficientes de transformada para um bloco alvo, determinar um conjunto de transformada secundária nãoseparável (NSST) para o bloco alvo, selecionar um de uma pluralidade de núcleos NSST incluídos no conjunto NSST baseado em um índice NSST, e gerar coeficientes de transformada modificados pela transformação secundária não separável dos coeficientes de transformada baseado no núcleo NSST selecionado. O conjunto NSST para o bloco alvo é determinado com base em pelo menos um de um modo de predição intra e um tamanho do bloco alvo.

[009] De acordo com outra modalidade da presente invenção, é proporcionado um aparelho de decodificação realizando uma transformada. O aparelho de decodificação inclui uma unidade de desquantização configurada para obter coeficientes de transformada para um bloco alvo por meio da realização da desquantização em coeficientes de transformada quantizados do bloco alvo, e um transformador inverso configurado para determinar um conjunto de transformada secundária nãoseparável (NSST) para o bloco alvo, selecionar um de uma pluralidade de núcleos NSST incluídos no conjunto NSST com base em um índice NSST, e gerar coeficientes de transformada modificados pela transformação secundária não-separável dos coeficientes de transformada com base no núcleo NSST selecionado. O transformador inverso determina o conjunto NSST para o bloco alvo com base em pelo menos um de um modo de predição intra e um tamanho do bloco alvo.

[010] De acordo com ainda outra modalidade da presente invenção, é proporcionado um método de transformada realizado por um aparelho de codificação. O método inclui obter coeficientes de transformada para um bloco alvo, determinar um conjunto de transformada secundária não-separável (NSST) para o bloco alvo, sele

Petição 870190117153, de 13/11/2019, pág. 9/53

3/39 cionar um de uma pluralidade de núcleos NSST incluídos no conjunto NSST, definir um índice NSST, e gerar coeficientes de transformada modificados pela transformação secundária não separável dos coeficientes de transformada baseado no núcleo NSST selecionado. O conjunto NSST para o bloco alvo é determinado com base em pelo menos um de um modo de predição intra e o tamanho do bloco alvo.

[011] De acordo com ainda outra modalidade da presente invenção, é proporcionado um aparelho de codificação realizando uma transformada. O aparelho de codificação inclui um transformador configurado para obter coeficientes de transformada para um bloco alvo por meio da realização de uma transformada primária nas amostras residuais do bloco alvo, determinar um conjunto de transformada secundária não-separável (NSST) para o bloco alvo, selecionar um de uma pluralidade de núcleos NSST incluídos no conjunto NSST com base em um índice NSST, e gerar coeficientes de transformada modificados pela transformação secundária nãoseparável dos coeficientes de transformada com base no núcleo NSST selecionado. O transformador determina o conjunto NSST para o bloco alvo com base em pelo menos um de um modo de predição intra e o tamanho do bloco alvo.

[012] De acordo com a presente modalidade, é possível aprimorar a eficiência geral de compressão de imagem/vídeo.

[013] De acordo com a presente modalidade, a quantidade de dados necessária para processamento residual pode ser reduzida e a eficiência de codificação residual pode ser aprimorada através de uma transformada eficiente.

[014] De acordo com a presente modalidade, os coeficientes de transformada que não sejam 0 podem ser concentrados em um componente de baixa frequência através de uma transformada secundária em um domínio da frequência.

[015] De acordo com a presente modalidade, a eficiência da transformada pode ser aprimorada aplicando-se um núcleo de transformada de forma variável/adaptativa ao realizar uma transformada secundária não-separável.

Petição 870190117153, de 13/11/2019, pág. 10/53

4/39

BREVE DESCRIÇÃO DOS DESENHOS [016]A FIG. 1 é um diagrama esquemático ilustrando uma configuração de um dispositivo de codificação de vídeo ao qual a presente modalidade é aplicável.

[017]A FIG. 2 é um diagrama esquemático ilustrando uma configuração de um dispositivo de decodificação de vídeo ao qual a presente modalidade é aplicável.

[018]A FIG. 3 ilustra esquematicamente um esquema de multitransformada de acordo com a presente modalidade.

[019] A FIG. 4 ilustra 65 modos de direção intra de um modo de predição.

[020]A FIG. 5 ilustra um método de determinação de um conjunto NSST com base em um modo de predição intra e em um tamanho de bloco.

[021]A FIG. 6 ilustra esquematicamente um exemplo de um método de codificação de vídeo/imagem incluindo um método de transformada de acordo com a presente modalidade.

[022]A FIG. 7 ilustra esquematicamente um exemplo de um método de decodificação de vídeo/imagem incluindo um método de transformada de acordo com a presente modalidade.

DESCRIÇÃO DAS MODALIDADES ILUSTRATIVAS [023] A presente modalidade pode ser modificada de várias formas, e exemplos específicos da mesma serão descritos e ilustrados nos desenhos. Entretanto, os exemplos não têm a intenção de limitar a modalidade. Os termos usados na descrição a seguir são usados para meramente descrever exemplos específicos, mas não pretendem limitar a modalidade. Uma expressão de um número singular inclui uma expressão do número plural, contanto que seja lida claramente de maneira diferente. Termos como “incluem” e “possuem” pretendem indicar que os aspectos, números, etapas, operações, elementos, componentes, ou combinações dos mesmos usados na descrição a seguir existem, e deve-se compreender que a possibilidade de existência ou adição de um ou mais aspectos, números, etapas, operações, ele

Petição 870190117153, de 13/11/2019, pág. 11/53

5/39 mentos, componentes ou combinações diferentes dos mesmos não está excluída.

[024]Entrementes, os elementos nos desenhos descritos na modalidade são ilustrados de maneira independente para fins de conveniência para explicação de diferentes funções específicas, e não significam que os elementos são incorporados por hardware independente ou software independente. Por exemplo, dois ou mais elementos dentre os elementos podem ser combinados para formar um único elemento, ou um elemento pode ser dividido em vários elementos. As modalidades nas quais os elementos são combinados e/ou divididos pertencem à modalidade sem divergir do conceito da modalidade.

[025] Daqui em diante, exemplos da presente modalidade serão descritos em detalhes com referência aos desenhos acompanhantes. Além disso, numerais de referência similares são usados para indicar elementos similares por todos os desenhos, e as mesmas descrições para elementos similares serão omitidas.

[026] No presente relatório descritivo, geralmente uma imagem significa uma unidade representando uma imagem em um momento específico, uma faria é uma unidade constituindo uma parte da imagem. Uma imagem pode ser composta de várias fatias, e os termos de uma imagem e uma fatia podem ser misturados um com o outro conforme demanda a ocasião.

[027] Um pixel ou um “pel” (elemento de imagem) pode representar uma unidade mínima constituindo uma imagem. Adicionalmente, o termo amostra pode ser usado como correspondendo a um pixel. A amostra pode em geral representar um pixel ou um valor de um pixel, pode representar somente um pixel (um valor de pixel) de um componente de luma, e pode representar somente um pixel (um valor de pixel) de um componente de croma.

[028] Uma unidade indica uma unidade básica de processamento de imagem. A unidade pode incluir pelo menos uma de uma área específica e informações relacionadas à área. Opcionalmente, a unidade pode ser misturada com termos tais co

Petição 870190117153, de 13/11/2019, pág. 12/53

6/39 mo bloco, área, ou similares. Em um caso típico, um bloco MxN pode representar um conjunto de amostras ou coeficientes de transformada dispostos em M colunas e N linhas.

[029] A FIG. 1 ilustra brevemente uma estrutura de um aparelho de codificação de vídeo ao qual a presente modalidade é aplicável.

[030] Referindo-se à FIG. 1, um aparelho de codificação de vídeo 100 pode incluir um particionador de imagem 105, um preditor 110, um processador residual 120, um codificador por entropia 130, um somador 140, um filtro 150, e uma memória 160. O processador residual 120 pode incluir um subtrator 121, um transformador 122, um quantizador 123, um reordenador 124, um desquantizador 125, um transformador inverso 126.

[031] O particionador de imagem 105 pode dividir uma imagem de entrada em pelo menos uma unidade de processamento.

[032] Em um exemplo, a unidade de processamento pode ser referida como uma unidade de codificação (Cll). Neste caso, a unidade de codificação pode ser dividida recursivamente a partir da maior unidade de codificação (LCU) de acordo com uma estrutura de árvore quaternária-binária (QTBT). por exemplo, uma unidade de codificação pode ser dividida em uma pluralidade de unidades de codificação de profundidade maior com base em uma estrutura de árvore quaternária e/ou em uma estrutura de árvore binária. Neste caso, por exemplo, a estrutura de árvore quaternária pode ser aplicada primeiro e a estrutura de árvore binária pode ser aplicada depois. Como alternativa, a estrutura de árvore binária pode ser aplicada primeiro. O procedimento de codificação de acordo com a presente modalidade pode ser realizado com base em uma unidade de codificação final que não é dividida nem mais um pouco. Neste caso, a maior unidade de codificação pode ser usada como a unidade de codificação final com base na eficiência de codificação, entre outros, dependendo das características da imagem, ou a unidade de codificação pode ser di

Petição 870190117153, de 13/11/2019, pág. 13/53

7/39 vidida recursivamente em unidades de codificação de profundidade inferior conforme necessário e uma unidade de codificação possuindo um tamanho ideal pode ser usada como a unidade de codificação final. Aqui, o procedimento de codificação pode incluir um procedimento, tal como predição, transformação e reconstrução, que será descrito posteriormente.

[033] Em outro exemplo, a unidade de processamento pode incluir uma unidade de codificação (Cll), unidade de predição (PU), ou uma unidade de transformada (TU). A unidade de codificação pode ser dividida a partir da maior unidade de codificação (LCU) em unidades de codificação de maior profundidade de acordo com a estrutura de árvore quaternária. Neste caso, a maior unidade de codificação pode ser usada diretamente como a unidade de codificação final com base na eficiência de codificação, entre outros, dependendo das características da imagem, ou a unidade de codificação pode ser dividida recursivamente em unidades de codificação de profundidade maior conforme necessário e uma unidade de codificação possuindo um tamanho ideal pode ser usada como uma unidade de codificação final. Quando a menor unidade de codificação (SCU) é definida, a unidade de codificação pode não ser dividida em unidades de codificação menores do que a menor unidade de codificação. Aqui, a unidade de codificação final refere-se a uma unidade de codificação que é particionada ou dividida em uma unidade de predição ou em uma unidade de transformada. A unidade de predição é uma unidade que é particionada a partir de uma unidade de codificação, e pode ser uma unidade de predição de amostra. Aqui, a unidade de predição pode ser dividida em sub-blocos. A unidade de transformada pode ser dividida a partir da unidade de codificação de acordo com a estrutura de árvore quaternária e pode ser uma unidade para derivar um coeficiente de transformada e/ou uma unidade para derivar um sinal residual a partir do coeficiente de transformada. Daqui em diante, a unidade de codificação pode ser referida como um bloco de codificação (CB), a unidade de predição pode ser referida como

Petição 870190117153, de 13/11/2019, pág. 14/53

8/39 um bloco de predição (PB), e a unidade de transformada pode ser referida como um bloco de transformada (TB). O bloco de predição ou unidade de predição pode se referir a uma área específica na forma de um bloco em uma imagem e incluir uma matriz de amostras de predição. Além disso, o bloco de transformada ou unidade de transformada pode se referir a uma área específica na forma de um bloco em uma imagem e incluir o coeficiente de transformada ou uma matriz de amostras residuais.

[034] O preditor 110 pode realizar predição em um bloco de processamento alvo (daqui em diante, um bloco atual), e pode gerar um bloco predito incluindo amostras de predição para o bloco atual. Uma unidade de predição realizada no preditor 110 pode ser um bloco de codificação, ou pode ser um bloco de transformada, ou pode ser um bloco de predição.

[035] O preditor 110 pode determinar se a intra-predição é aplicada ou a interpredição é aplicada ao bloco atual. Por exemplo, o preditor 110 pode determinar se a intra-predição ou a inter-predição é aplicada na unidade de CU.

[036] No caso da intra-predição, o preditor 110 pode derivar uma amostra de predição para o bloco atual com base em uma amostra de referência fora do bloco atual em uma imagem à qual pertence o bloco atual (daqui em diante, uma imagem atual). Neste caso, o preditor 110 pode derivar a amostra de predição com base em uma média ou interpolação das amostras de referência adjacentes do bloco atual (caso (i)), ou pode derivar a amostra de predição com base em uma amostra de referência existente em uma direção específica (predição) quanto a uma amostra de predição dentre as amostras de referência adjacentes do bloco atual (caso (ii)). O caso (i) pode ser chamado de modo não-direcional ou modo não-angular, e o caso (ii) pode ser chamado de modo direcional ou modo angular. Na intra-predição, os modos de predição podem incluir, como um exemplo, 33 modos direcionais e pelo menos dois modos não-direcionais. Os modos não-direcionais podem incluir o modo DC e o modo planar. O preditor 110 pode determinar o modo de predição a ser apli

Petição 870190117153, de 13/11/2019, pág. 15/53

9/39 cado ao bloco atual usando o modo de predição aplicado ao bloco adjacente.

[037] No caso da inter-predição, o preditor 110 pode derivar a amostra de predição para o bloco atual com base em uma amostra especificada por um vetor de movimento em uma imagem de referência. O preditor 110 pode derivar a amostra de predição para o bloco atual pela aplicação de qualquer um de um modo de salto, um modo de combinação, e um modo de predição de vetor de movimento (MVP). No caso do modo de salto e do modo de combinação, o preditor 110 pode usar informações de movimento do bloco adjacente como informações de movimento do bloco atual. No caso do modo de salto, diferentemente do modo de combinação, uma diferença (residual) entre a amostra de predição e uma amostra original não é transmitida. No caso do modo MVP, um vetor de movimento do bloco adjacente é usado como um preditor de vetor de movimento, e, dessa forma, é usado como um preditor de vetor de movimento do bloco atual para derivar um vetor de movimento do bloco atual.

[038] No caso da inter-predição, o bloco adjacente pode incluir um bloco espacial adjacente existente na imagem atual e um bloco temporal adjacente existente na imagem de referência. A imagem de referência incluindo o bloco temporal adjacente também pode ser chamada de imagem co-localizada (colPic). As informações de movimento podem incluir o vetor de movimento e um índice de imagem de referência. Informações, tais como informações de modo de predição e informações de movimento, podem ser codificadas (por entropia), e então emitidas como uma forma de um fluxo de bits.

[039] Quando as informações de movimento de um bloco temporal adjacente são usadas no modo de salto e no modo de combinação, uma imagem mais alta em uma lista de imagens de referência pode ser usada como uma imagem de referência. As imagens de referência incluídas na lista de imagens de referência podem ser alinhadas com base em uma diferença de contagem de ordem de imagem (POC)

Petição 870190117153, de 13/11/2019, pág. 16/53

10/39 entre uma imagem atual e uma imagem de referência correspondente. Uma POC corresponde a uma ordem de exibição e pode ser discriminada de uma ordem de codificação.

[040] O subtrator 121 gera uma amostra residual que é uma diferença entre uma amostra original e uma amostra de predição. Se o modo de salto for aplicado, a amostra residual pode não ser gerada como descrito acima.

[041] O transformador 122 transforma amostras residuais em unidades de um bloco de transformada para gerar um coeficiente de transformada. O transformador 122 pode realizar transformação com base no tamanho de um bloco de transformada correspondente e em um modo de predição aplicado a um bloco de codificação ou bloco de predição espacialmente sobreposto com o bloco de transformada. Por exemplo, as amostras residuais podem ser transformadas usando o núcleo de transformada de transformada discreta de seno (DST) se for aplicada intra-predição ao bloco de codificação ou ao bloco de predição sobreposto com o bloco de transformada e o bloco de transformada for uma matriz residual de 4x4 e é transformado usando o núcleo de transformada de transformada discreta de cosseno (DCT) em outros casos.

[042] O quantizador 123 pode quantizer os coeficientes de transformada para gerar coeficientes de transformada quantizados.

[043] O reordenador 124 reordena os coeficientes de transformada quantizados. O reordenador 124 pode reordenar os coeficientes de transformada quantizados na forma de um bloco em um vetor unidimensional através de um método de varredura de coeficiente. Embora o reordenador 124 seja descrito como um componente separado, o reordenador 124 pode ser uma parte do quantizador 123.

[044] O codificador por entropia 130 pode realizar codificação por entropia nos coeficientes de transformada quantizados. A codificação por entropia pode incluir um método de codificação, por exemplo, Golomb exponencial, codificação de

Petição 870190117153, de 13/11/2019, pág. 17/53

11/39 comprimento variável adaptativa ao contexto (CAVLC), uma codificação aritmética binária adaptativa ao contexto (CABAC), ou similares. O codificador por entropia 130 pode realizar a codificação por entropia ou codificação por um método predeterminado junto ou separadamente em informações (por exemplo, um valor de elemento de sintaxe ou similar) necessárias para reconstrução de vídeo em acréscimo aos coeficientes de transformada quantizados. As informações codificadas por entropia podem ser transmitidas ou armazenadas na unidade de uma camada de abstração de rede (NAL) em uma forma de fluxo de bits.

[045] O desquantizador 125 desquantiza valores (coeficientes de transformada) quantizados pelo quantizador 123 e o transformador inverso 126 transforma inversamente valores desquantizados pelo desquantizador 125 para gerar uma amostra residual.

[046] O somador 140 adiciona uma amostra residual a uma amostra de predição para reconstruir uma imagem. A amostra residual pode ser adicionada à amostra de predição em unidades de um bloco para gerar um bloco reconstruído. Embora o somador 140 seja descrito como um componente separado, o somador 140 pode ser uma parte do preditor 110. Enquanto isso, o somador 140 pode ser referido como um reconstrutor ou gerador de bloco reconstruído.

[047] O filtro 150 pode aplicar o filtro de remoção do efeito de bloco (deblocking) e/ou um deslocamento adaptativo de amostra à imagem reconstruída. Os artefatos em um limite de bloco na imagem reconstruída ou a distorção na quantização podem ser corrigidos através do filtro de remoção do efeito de bloco e/ou do deslocamento adaptativo de amostra. O deslocamento adaptativo de amostra pode ser aplicado em unidades de uma amostra após o filtro de remoção do efeito de bloco ser concluído. O filtro 150 pode aplicar um filtro de malha adaptativo (ALF) à imagem reconstruída. O ALF pode ser aplicado à imagem reconstruída à qual o filtro de remoção do efeito de bloco e/ou o deslocamento adaptativo de amostra foi aplicado.

Petição 870190117153, de 13/11/2019, pág. 18/53

12/39 [048]A memória 160 pode armazenar uma imagem reconstruída (imagem decodificada) ou informação necessária para codificação/decodificação. Aqui, a imagem reconstruída pode ser a imagem reconstruída filtrada pelo filtro 150. A imagem reconstruída armazenada pode ser usada como uma imagem de referência para (inter) predição de outras imagens. Por exemplo, a memória 160 pode armazenar imagens (de referência) usadas para inter-predição. Aqui, as imagens usadas para interpredição podem ser designadas de acordo com um conjunto de imagens de referência ou uma lista de imagens de referência.

[049]A FIG. 2 ilustra brevemente uma estrutura de um dispositivo de decodificação de vídeo ao qual a presente modalidade é aplicável.

[050] Referindo-se à FIG. 2, um aparelho de decodificação de vídeo 200 pode incluir um decodificador por entropia 210, um processador residual 220, um preditor 230, um somador 240, um filtro 250, e uma memória 260. O processador residual 220 pode incluir um reordenador 221, um desquantizador 222, um transformador inverso 223. Embora não ilustrado nos desenhos, o aparelho de decodificação de vídeo 200 pode incluir uma unidade de recepção para receber um fluxo de bits incluindo informações de vídeo. A unidade de recepção pode ser configurada como um módulo separado ou pode ser incluída no decodificador por entropia 210.

[051] Quando um fluxo de bits incluindo informações de vídeo é alimentado, o aparelho de decodificação de vídeo 200 pode reconstruir um vídeo em associação com um processo pelo qual as informações de vídeo são processadas no aparelho de codificação de vídeo.

[052] Por exemplo, o aparelho de decodificação de vídeo 200 pode realizar a decodificação de vídeo usando uma unidade de processamento aplicada no aparelho de codificação de vídeo. Portanto, o bloco de unidade de processamento da decodificação de vídeo pode ser, por exemplo, uma unidade de codificação, e, em outro exemplo, uma unidade de codificação, uma unidade de predição ou uma unidade

Petição 870190117153, de 13/11/2019, pág. 19/53

13/39 de transformada. A unidade de codificação pode ser dividida a partir da maior unidade de codificação de acordo com a estrutura de árvore quaternária e/ou a estrutura de árvore binária.

[053] Uma unidade de predição e uma unidade de transformada podem ser adicionalmente usadas em alguns casos, e neste caso, o bloco de predição é um bloco derivado ou particionado a partir da unidade de codificação e pode ser uma unidade de predição de amostra. Aqui, a unidade de predição pode ser dividida em sub-blocos. A unidade de transformada pode ser dividida a partir da unidade de codificação de acordo com a estrutura de árvore quaternária e pode ser uma unidade que deriva um coeficiente de transformada e/ou uma unidade que deriva um sinal residual a partir do coeficiente de transformada.

[054] O decodificador por entropia 210 pode analisar o fluxo de bits para gerar informações necessárias para reconstrução de vídeo ou reconstrução de imagem. Por exemplo, o decodificador por entropia 210 pode decodificar informações no fluxo de bits com base em um método de codificação, tal como codificação de Golomb exponencial, CAVLC, CABAC, ou similares, e pode gerar um valor de um elemento de sintaxe necessário para reconstrução de vídeo e um valor quantizado de um coeficiente de transformada com respeito a um residual.

[055] Mais especificamente, um método de decodificação por entropia CABAC pode receber um binário (“bin”) correspondendo a cada elemento de sintaxe em um fluxo de bits, determinar um modelo de contexto usando decodificação das informações do elemento de sintaxe alvo e decodificação das informações dos blocos adjacentes e decodificação dos blocos alvo ou informações do símbolo/binário decodificado em uma etapa anterior, predizer a probabilidade de geração de binário de acordo com o modelo de contexto determinado e realizar a decodificação aritmética do binário para gerar um símbolo correspondendo a cada valor de elemento de sintaxe. Aqui, o método de decodificação por entropia CABAC pode atualizar o mo

Petição 870190117153, de 13/11/2019, pág. 20/53

14/39 delo de contexto usando informações de um símbolo/binário decodificado para um modelo de contexto do próximo símbolo/binário após a determinação do modelo de contexto.

[056] As informações sobre predição dentre as informações decodificadas no decodificador por entropia 210 podem ser fornecidas ao preditor 250 e os valores residuais, ou seja, os coeficientes de transformada quantizada, nos quais a decodificação por entropia foi realizada pelo decodificador por entropia 210, podem ser transmitidos ao reordenador 221.

[057] O reordenador 221 pode reordenar os coeficientes de transformada quantizados em uma forma de bloco bidimensional. O reordenador 221 pode realizar o reordenamento correspondendo à varredura de coeficiente realizada pelo dispositivo de codificação. Embora o reordenador 221 seja descrito como um componente separado, o reordenador 221 pode ser uma parte do desquantizador 222.

[058] O desquantizador 222 pode desquantizar os coeficientes de transformada quantizados com base em um parâmetro de (des)quantização para gerar um coeficiente de transformada. Neste caso, as informações para derivar um parâmetro de quantização podem ser sinalizadas a partir do dispositivo de codificação.

[059] O transformador inverso 223 pode transformar inversamente os coeficientes de transformada para derivar amostras residuais.

[060] O preditor 230 pode realizar predição em um bloco atual, e pode gerar um bloco predito incluindo amostras de predição para o bloco atual. Uma unidade de predição realizada no preditor 230 pode ser um bloco de codificação, ou pode ser um bloco de transformada, ou pode ser um bloco de predição.

[061]O preditor 230 pode determinar se irá aplicar intra-predição ou interpredição com base nas informações sobre uma predição. Neste caso, uma unidade para determinar que será usada entre a intra-predição e a inter-predição pode ser diferente de uma unidade para gerar uma amostra de predição. Além disso, uma

Petição 870190117153, de 13/11/2019, pág. 21/53

15/39 unidade para gerar a amostra de predição também pode ser diferente na interpredição e na intra-predição. Por exemplo, qual será aplicada entre a inter-predição e a intra-predição pode ser determinado na unidade de Cll. Adicionalmente, por exemplo, na inter-predição, a amostra de predição pode ser gerada por meio da determinação do modo de predição na unidade de PU, e na intra-predição, a amostra de predição pode ser gerada em unidade de TU por meio da determinação do modo de predição na unidade de PU.

[062] No caso da intra-predição, o preditor 230 pode derivar uma amostra de predição para um bloco atual com base em uma amostra de referência adjacente em uma imagem atual. O preditor 230 pode derivar a amostra de predição para o bloco atual por meio da aplicação de um modo direcional ou de um modo não-direcional com base na amostra de referência adjacente do bloco atual. Neste caso, um modo de predição a ser aplicado ao bloco atual pode ser determinado usando um modo de intra-predição de um bloco adjacente.

[063] No caso da inter-predição, o preditor 230 pode derivar uma amostra de predição para um bloco atual com base em uma amostra especificada em uma imagem de referência de acordo com um vetor de movimento. O preditor 230 pode derivar a amostra de predição para o bloco atual usando um dentre o modo de salto, o modo de combinação e do modo MVP. Aqui, as informações de movimento necessárias para inter-predição do bloco atual fornecidas pelo aparelho de codificação, por exemplo, um vetor de movimento e informações sobre um índice de imagem de referência podem ser obtidos ou derivados com base nas informações sobre a predição.

[064] No modo de salto e no modo de combinação, as informações de movimento de um bloco adjacente podem ser usadas como informações de movimento do bloco atual. Aqui, o bloco adjacente pode incluir um bloco espacial adjacente e um bloco temporal adjacente.

[065] O preditor 230 pode construir uma lista de candidatos de combinação

Petição 870190117153, de 13/11/2019, pág. 22/53

16/39 usando informações de movimento dos blocos adjacentes e usar informações indicadas por um índice de combinação na lista de candidatos de combinação como um vetor de movimento do bloco atual. O índice de combinação pode ser sinalizado pelo dispositivo de codificação. As informações de movimento podem incluir um vetor de movimento uma imagem de referência. Quando as informações de movimento de um bloco temporal adjacente são usadas no modo de salto e no modo de combinação, uma imagem mais alta em uma lista de imagens de referência pode ser usada como uma imagem de referência.

[066] No caso do modo de salto, uma diferença (residual) entre uma amostra de predição e uma amostra original não é transmitida, distinguida do modo de combinação.

[067] No caso do modo MVP, o vetor de movimento do bloco atual pode ser derivado usando um vetor de movimento de um bloco adjacente como um preditor de vetor de movimento. Aqui, o bloco adjacente pode incluir um bloco espacial adjacente e um bloco temporal adjacente.

[068] Quando o modo de combinação é aplicado, por exemplo, uma lista de candidatos de combinação pode ser gerada usando um vetor de movimento de um bloco espacial adjacente reconstruído e/ou um vetor de movimento correspondendo a um bloco Col, que é um bloco temporal adjacente. Um vetor de movimento de um bloco candidato selecionado a partir da lista de candidatos de combinação é usado como o vetor de movimento do bloco atual no modo de combinação. As informações supramencinadas sobre predição podem incluir um índice de combinação indicando um bloco candidato possuindo o melhor vetor de movimento selecionado a partir dos blocos candidatos incluídos na lista de candidatos de combinação. Aqui, o preditor 230 pode derivar o vetor de movimento do bloco atual usando o índice de combinação.

[069] Quando o modo MPV (Predição de Vetor de Movimento) é aplicado co

Petição 870190117153, de 13/11/2019, pág. 23/53

17/39 mo outro exemplo, uma lista de candidatos de preditor de vetor de movimento pode ser gerada usando a vetor de movimento de um bloco espacial adjacente reconstruído e/ou um vetor de movimento correspondendo a um bloco Col que é um bloco temporal adjacente. Isto é, o vetor de movimento do bloco espacial adjacente reconstruído e/ou o vetor de movimento correspondendo ao bloco Col que é o bloco temporal adjacente pode ser usado como candidatos de vetor de movimento. As informações supramencionadas sobre predição podem incluir um índice de vetor de movimento de predição indicando o melhor vetor de movimento selecionado a partir dos candidatos de vetor de movimento incluídos na lista. Aqui, o preditor 230 pode selecionar um vetor de movimento de predição do bloco atual a partir dos candidatos de vetor de movimento incluídos na lista de candidatos de vetor de movimento usando o índice de vetor de movimento. O preditor do dispositivo de codificação pode obter uma diferença de vetor de movimento (MVD) entre o vetor de movimento do bloco atual e um preditor de vetor de movimento, codificar a MVD e gerar a MVD na forma de um fluxo de bits. Isto é, o MVD pode ser obtido subtraindo-se o preditor de vetor de movimento do vetor de movimento do bloco atual. Aqui, o preditor 230 pode obter um vetor de movimento incluído nas informações sobre a predição e derivar o vetor de movimento do bloco atual somando a diferença do vetor de movimento ao preditor de vetor de movimento. Além disso, o preditor pode obter ou derivar um índice de imagem de referência indicando uma imagem de referência a partir das informações mencionadas anteriormente sobre a predição.

[070] O somador 240 pode adicionar uma amostra residual a uma amostra de predição para reconstruir um bloco atual ou uma imagem atual. O somador 240 pode reconstruir a imagem atual somando a amostra residual à amostra de predição em unidades de um bloco. Quando o modo de salto é aplicado, uma residual não é transmitida e, assim, a amostra de predição pode se tornar uma amostra reconstruída. Embora o somador 240 seja descrito como um componente separado, o soma

Petição 870190117153, de 13/11/2019, pág. 24/53

18/39 dor 240 pode ser uma parte do preditor 230. Enquanto isso, o somador 240 pode ser referido como um reconstrutor ou gerador de bloco reconstruído.

[071] O filtro 250 pode aplicar o filtro de remoção do efeito de bloco, deslocamento adaptativo de amostra e/ou ALF à imagem reconstruída. Aqui, o deslocamento adaptativo de amostra pode ser aplicado em unidades de uma amostra após o filtro de remoção do efeito de bloco. O ALF pode ser aplicado após o filtro de remoção do efeito de bloco e/ou a aplicação do deslocamento adaptativo de amostra.

[072]A memória 260 pode armazenar uma imagem reconstruída (imagem decodificada) ou informação necessária para decodificação. Aqui, a imagem reconstruída pode ser a imagem reconstruída filtrada pelo filtro 250. Por exemplo, a memória 260 pode armazenar imagens usadas para inter-predição. Aqui, as imagens usadas para inter-predição podem ser designadas de acordo com um conjunto de imagens de referência ou uma lista de imagens de referência. Uma imagem reconstruída pode ser usada como uma imagem de referência para outras imagens. A memória 260 pode gerar imagens reconstruídas em uma ordem de saída.

[073] Enquanto isso, como descrito acima, ao realizar a codificação de vídeo, uma predição é realizada para melhorar a eficiência de compressão. Consequentemente, um bloco predito incluindo amostras de predição for um bloco atual, isto é, um bloco de codificação alvo, pode ser gerado. Neste caso, o bloco predito inclui amostras de predição em um domínio espacial (ou domínio de pixel). O bloco predito é derivado de forma idêntica no aparelho de codificação e no aparelho de decodificação. O aparelho de codificação pode melhorar a eficiência de codificação sinalizando informações residuais em um resíduo entre um bloco original e o bloco predito, que não seja um valor de amostra original do próprio bloco original, ao aparelho de decodificação. O aparelho de decodificação pode derivar um bloco residual incluindo amostras residuais com base nas informações residuais, pode gerar um bloco de reconstrução incluindo amostras de reconstrução somando o bloco residual e o

Petição 870190117153, de 13/11/2019, pág. 25/53

19/39 bloco predito, e pode gerar uma imagem de reconstrução incluindo os blocos de reconstrução.

[074]As informações residuais podem ser geradas através de um procedimento de transformada e quantização. Por exemplo, o aparelho de codificação pode derivar o bloco residual entre o bloco original e o bloco predito, pode derivar coeficientes de transformada realizando um procedimento de transformada nas amostras residuais (matriz de amostras residuais) incluídas no bloco residual, pode derivar coeficientes de transformada quantizados realizando um procedimento de quantização nos coeficientes de transformada, e pode sinalizar informações residuais relacionadas ao aparelho de decodificação (através de um fluxo de bits). Neste caso, as informações residuais podem incluir informações, tais como informações de valor, informações de localização, um esquema de transformada, um núcleo de transformada, e um parâmetro de quantização dos coeficientes de transformada quantizados. O aparelho de decodificação pode realizar um procedimento de desquantização / transformada inversa com base nas informações residuais, e pode derivar as amostras residuais (ou bloco residual). O aparelho de decodificação pode gerar a imagem de reconstrução com base no bloco predito e no bloco residual. O aparelho de codificação também pode derivar o bloco residual realizando uma desquantização/transformada inversa nos coeficientes de transformada quantizados para a referência da inter predição de uma imagem subsequente, e pode gerar a imagem de reconstrução com base no bloco residual.

[075] Enquanto isso, de acordo com a presente modalidade, um esquema de multi-transformada pode ser aplicado ao realizar a transformada descrita acima.

[076]A FIG. 3 ilustra esquematicamente um esquema de multitransformada de acordo com a presente modalidade.

[077] Referindo-se à FIG. 3, o transformador pode corresponder ao transformador do aparelho de codificação da FIG. 1. O transformador inverso pode corres

Petição 870190117153, de 13/11/2019, pág. 26/53

20/39 ponder ao transformador inverso do aparelho de codificação da FIG. 1 ou ao transformador inverso do aparelho de decodificação da FIG. 2.

[078] O transformador pode derivar coeficientes de transformada (primários) realizando uma transformada primária com base nas amostras residuais (matriz de amostras residuais) dentro de um bloco residual (S310). Neste caso, a transformada primária pode incluir uma transformada multi-núcleo adaptativa.

[079] a transformada multi-núcleo adaptativa pode indicar um método para realizar uma transformada adicionalmente usando uma transformada discreta de cosseno (DCT) Tipo 2, uma transformada discreta de seno (DST) Tipo 7, uma DCT Tipo 8 e/ou uma DST Tipo 1. Ou seja, a transformada multi-núcleo pode indicar um método de transformada para transformar um sinal residual (ou bloco residual) de um domínio espacial em coeficientes de transformada (ou coeficientes de transformada primária) de domínio da frequência com base em uma pluralidade de núcleos de transformada selecionados dentre a DCT Tipo 2, a DST Tipo 7, a DCT Tipo 8 e a DST Tipo 1. Neste caso, os coeficientes de transformada primária podem ser chamados de coeficientes de transformada temporários do ponto de vista do transformador.

[080] em outras palavras, se o método de transformada existente for aplicado, os coeficientes de transformada podem ser gerados pela aplicação de uma transformada a partir de um domínio espacial para um sinal residual (ou bloco residual) a um domínio da frequência com base na DCT Tipo 2. Em contrapartida, se a transformada multi-núcleo adaptativa for aplicada, os coeficientes de transformada (ou coeficientes de transformada primária) podem ser gerados pela aplicação de uma transformada a partir de um domínio espacial para um sinal residual (ou bloco residual) a um domínio da frequência com base na DCT Tipo 2, na DST Tipo 7, na DCT Tipo 8 e/ou na DST Tipo 1. Neste caso, a DCT Tipo 2, a DST Tipo 7, a DCT Tipo 8 e a DST Tipo 1 podem ser chamadas de tipo de transformada ou núcleo de

Petição 870190117153, de 13/11/2019, pág. 27/53

21/39 transformada.

[081] Por referência, os tipos de transformada DCT/DST podem ser definidos baseado em funções de base. As funções de base podem ser representadas como se segue.

[Tabela 1]

Tipo de Transformada	Função de base 7i(/), /, j=0, 1, ..., N- 1
DCT-II	......................J í S3 onde yt í - ⁰ * 1 i -7^: £1
DCT-V	1 H ~ ή ( U í Λ M . (1 / Ô
DCT-VIII
DST-I	_W)!1. [Z._5CTg.:A2i.:0±h
DST-VII	T. í U ™ í--- sen J - + ϊ /

[082] Se a transformada multi-núcleo adaptativa for realizada, um núcleo de transformada vertical e um núcleo de transformada horizontal para um bloco alvo podem ser selecionados dentre os núcleos de transformada. Uma transformada vertical para um bloco alvo pode ser realizada com base no núcleo de transformada vertical. Uma transformada horizontal para o bloco alvo pode ser realizada com base no núcleo de transformada horizontal. Neste caso, a transformada horizontal pode indicar uma transformada para os componentes horizontais do bloco alvo. A transformada vertical pode indicar uma transformada para os componentes verticais do bloco alvo. O núcleo de transformada vertical / núcleo de transformada horizontal pode ser determinado adaptativamente com base em um modo de predição do bloco alvo (CU ou sub-bloco) englobando um bloco residual e/ou um índice de transforma

Petição 870190117153, de 13/11/2019, pág. 28/53

22/39 da indicativo de um subconjunto de transformada.

[083] O transformador pode derivar coeficientes de transformada (secundários) realizando uma transformada secundária com base nos coeficientes de transformada (primários) (S320). Se a transformada primária fosse uma transformada do domínio espacial para o domínio da frequência, a transformada secundária pode ser considerada como sendo uma transformada do domínio da frequência para o domínio da frequência. A transformada secundária pode incluir uma transformada nãoseparável. Neste caso, a transformada secundária pode ser chamada de transformada secundária não-separável (NSST). A transformada secundária não-separável pode indicar uma transformada para gerar coeficientes de transformadas (ou coeficientes de transformada secundária) para um sinal residual realizando uma transformada secundária nos coeficientes de transformada (primária), derivados através da transformada primária, com base em uma matriz de transformada não-separável. Neste caso, a transformada vertical e a transformada horizontal são separadas (ou transformada horizontal e vertical independentemente) e não são aplicadas, mas as transformadas podem ser aplicadas aos coeficientes de transformada (primária) de uma vez com base na matriz de transformada não-separável. Em outras palavras, a transformada secundária não-separável pode indicar um método de transformada para gerar coeficientes de transformada (ou coeficientes de transformada secundária) realizando transformadas sem separar os componentes verticais e componentes horizontais dos coeficientes de transformada (primária) com base ma matriz de transformada não-separável. A transformada secundária não-separável pode ser aplicada à região superior-esquerda de um bloco (pode ser chamada daqui em diante de bloco de coeficientes de transformada) configurado com os coeficientes de transformada (primária). Por exemplo, se cada uma dentre a largura (W) e a altura (H) do bloco de coeficientes de transformada for de 8 ou mais, uma transformada secundária não-separável de 8x8 pode ser aplicada à região de 8x8 superior

Petição 870190117153, de 13/11/2019, pág. 29/53

23/39 esquerda do bloco de coeficientes de transformada. Adicionalmente, se cada uma dentre a largura (W) e a altura (H) do bloco de coeficientes de transformada for menor do que 8, uma transformada secundária não-separável de 4x4 pode ser aplicada à região min (8,W)xmin (8,H) superior-esquerda do bloco de coeficientes de transformada.

[084] Especificamente, por exemplo, se um bloco de entrada de 4x4 for utilizado, uma transformada secundária não-separável pode ser realizada como se segue.

[085] O bloco de entrada de 4χ4 X pode ser representado como se segue.

[Equação 1]

	Γ*οο	*01	*02	*031
X -	*10	*11	*12	*13
	*20	*21	*22	*23
	-*30	*31	*32	*33-

[086] Se ο X for indicado em uma forma de vetor, um vetor X pode ser representado como se segue.

[Equação 2]

X ⁼ [*00 *01 *02 *03 *10 *11 *12 *13 *20 *21 *22 *23 *30 *31 *32 ^3s]^T [087] Neste caso, a transformada não-separável secundária pode ser calculada como se segue.

[Equação 3]

F = T-X [088] Neste caso, F indica um vetor de coeficiente de transformada, e T indica uma matriz de transformada de 16x16 (não-separável) [089] Um vetor de coeficiente de transformada de F de 16x1 pode ser derivado através da Equação 3. O F pode ser reorganizado em um bloco de 4x4 atra

Petição 870190117153, de 13/11/2019, pág. 30/53

24/39 vés de uma ordem de varredura (horizontal, vertical, diagonal). Entretanto, no cálculo acima, por exemplo, uma Transformada de Hypercube-Givens (HyGT) pode ser usada para o cálculo de uma transformada secundária não-separável de modo a reduzir a carga computacional de uma transformada secundária não-separável.

[090] Enquanto isso, na transformada secundária não-separável, um núcleo de transformada (ou tipo de transformada) pode ser selecionado com base em um modo (dependente do modo). Neste caso, o modo pode incluir um modo de predição intra e/ou um modo de predição inter.

[091] Como descrito acima, a transformada secundária não-separável pode ser realizada com base em uma transformada de 8x8 ou transformada de 4x4 determinada com base na largura (W) e na altura (H) do bloco de coeficientes de transformada. Ou seja, a transformada secundária não-separável pode ser realizada com base em um tamanho de sub-bloco de 8x8 ou em um tamanho de sub-bloco de 4x4. Por exemplo, de modo a selecionar um núcleo de transformada baseado em modo, 35 conjuntos de núcleos de transformada secundária não-separável, cada conjunto possuindo três núcleos, para uma transformada secundária não-separável, podem ser configurados tanto para o tamanho de sub-bloco de 8x8 quanto para o tamanho de sub-bloco de 4x4. Ou seja, 35 conjunto de transformada podem ser configurados para o tamanho de sub-bloco de 8x8, e 35 conjuntos de transformada podem ser configurados para o tamanho de sub-bloco de 4x4. Neste caso, três núcleos de transformada de 8x8 podem ser incluídos em cada um dos 35 conjuntos de transformada para o tamanho de sub-bloco de 8x8. Neste caso, três núcleos de transformada de 4x4 podem ser incluídos em cada um dos 35 conjuntos de transformada para o tamanho de sub-bloco de 4x4. Entretanto, o tamanho de sub-bloco de transformada, o número de conjuntos, e o número de núcleos dentro de um conjunto são exemplos, e outro tamanho além de 8x8 ou 4x4 pode ser usado ou n conjuntos podem ser configurados, e k núcleos de transformada podem ser incluídos em cada

Petição 870190117153, de 13/11/2019, pág. 31/53

25/39 conjunto.

[092] O conjunto de transformada pode ser chamado de conjunto NSST. Um núcleo de transformada dentro do conjunto NSST pode ser chamado de núcleo NSST. A seleção de um conjunto específico dos conjuntos de transformada pode ser realizada com base no modo de predição intra de um bloco alvo (CU ou sub-bloco), por exemplo.

[093] Por referência, por exemplo, um modo de predição pode incluir dois modos de predição intra não-direcionais (ou não-angulares) e 65 modos de predição intra direcionais (ou angulares). O modo de predição intra não-direcional pode incluir um modo de predição intra N- 0 (planar) e um modo de predição intra DC NM. Os modos de predição intra direcionais podem incluir sessenta e cinco modos de predição intra N- 2 ao N- 66. Entretanto, eles são exemplos, e a presente modalidade pose ser aplicada a um caso em que o número de modos de predição intra é diferente. Enquanto isso, em alguns casos, o modo de predição intra N- 67 pode ser adicionalmente utilizado. O modo de predição intra N²67 pode indicar um modo de modelo linear (LM).

[094] A FIG. 4 ilustra 65 modos de direção intra de um modo de predição.

[095] Referindo-se à FIG. 4, os modos podem ser divididos em modos de predição intra possuindo direcionalidade horizontal e modos de predição intra possuindo direcionalidade vertical baseado em um modo de predição intra N- 34 possuindo uma direção de predição diagonal esquerda-ascendente. Na FIG. 3, H e V significam a direcionalidade horizontal e a direcionalidade vertical, respectivamente, e os números -32 a 32 indicam o deslocamento de 1/32 de unidade em uma localização na grade de amostras. Os modos de predição intra N² 2 a N² 33 possuem direcionalidade horizontal, e os modos de predição intra N- 34 a N- 36 possuem direcionalidade vertical. O modo de predição intra N² 18 e o modo de predição intra N50 indicam um modo de predição intra horizontal e um modo de predição intra verti

Petição 870190117153, de 13/11/2019, pág. 32/53

26/39 cal, respectivamente. 0 modo de predição intra N- 2 pode ser chamado de modo de predição intra diagonal esquerdo-descendente, o modo de predição intra N- 34 pode ser chamado de modo de predição intra diagonal esquerdo-ascendente, e o modo de predição intra N- 66 pode ser chamado de modo de predição intra diagonal direito-ascendente.

[096] Neste caso, o mapeamento entre os 35 conjuntos de transformada e os modos de predição intra pode ser indicado como na tabela a seguir, por exemplo. Por referência, se um modo LM for aplicado a um bloco alvo, uma transformada secundária pode não ser aplicada ao bloco alvo.

[Tabela 2]

modo infra	0	1	2	3	4	5	6	7	8	9	10	11	12	13	14	15	16	17	d 19	20	21	22	23	24	25	26	27	28	29	30	31	32	33
conjunto	0	1	2	3	4	5	6	7	8	9	10	11	12	13	14	15	16	17	18 19	20	21	22	23	24	25	26	27	28	29	30	31	32	33
modo intra	34	35	36	37	38	39	40	41	42	43	44	45	46	47	48	49	50	51	5253	54	5S	56	57	58	59	60	61	62	63	64	65	66	6/ i..M)
conjunto	34	33	32	31	30	29	28	27	26	25	24	23	22	21	20	19	18	17	16\|1S	14	13	12	11	10	9	8	7	6	5	4	3	2	NULO

[097]Enquanto isso, se um conjunto específico for determinado para ser usado, um dos três núcleos de transformada dentro do conjunto específico pode ser selecionado com base em um índice NSST. O aparelho de codificação pode derivar o índice NSST que indica um núcleo de transformada específico com base na verificação de taxa-distorção (RD). O índice NSST pode ser sinalizado para o aparelho de decodificação. O aparelho de decodificação pode selecionar um dos três núcleo de transformadas dentro de um conjunto específico com base no índice NSST. Por exemplo, um valor de índice NSST 0 pode indicar o primeiro núcleo NSST, um valor de índice NSST 1 pode indicar o segundo núcleo NSST, e um valor de índice NSST 2 pode indicar o terceiro núcleo NSST. Como alternativa, o valor de índice NSST 0 pode indicar que um NSST não é aplicado a um bloco alvo. Os valores de índice NSST 1 a 3 podem indicar os três núcleos de transformada.

[098] Referindo-se novamente à FIG. 3, o transformador pode realizar a transformada secundária não-separável com base em um núcleo de transformada selecionado, e pode obter coeficientes de transformada (secundária). Os coeficien

Petição 870190117153, de 13/11/2019, pág. 33/53

27/39 tes de transformada (secundária) podem ser derivados como coeficientes de transformadas quantizados através da unidade de quantização como descrito acima, podem ser codificados e sinalizados para o aparelho de decodificação, e podem ser transmitidos ao desquantização/transformador inverso do aparelho de codificação.

[099] O transformador inverso pode realizar uma série de procedimentos na ordem inversa dos procedimentos realizados no transformador. O transformador inverso pode receber coeficientes de transformada (desquantizados) (secundários), pode derivar coeficientes de transformada (primários) realizando uma transformada secundária (S350), e pode obter um bloco residual (amostras residuais) realizando uma transformada primária nos coeficientes de transformada (primária). Neste caso, os coeficientes de transformada primária podem ser chamados de coeficientes de transformada modificados do ponto de vista do transformador inverso. O aparelho de codificação e o aparelho de decodificação pode gerar um bloco de reconstrução com base no bloco residual e no bloco predito e gerar uma imagem de reconstrução com base no bloco de reconstrução, como descrito acima.

[0100] Enquanto isso, o tamanho de um núcleo de transformada (núcleo NSST) para uma transformada secundária não-separável pode ser fixo ou pode não ser fixo, e o núcleo de transformada (núcleo NSST) pode ser configurado junto com núcleos de transformada possuindo diferentes tamanhos dentro de um conjunto.

[0101]Por exemplo, um conjunto NSST de 4x4 inclui somente núcleos NSST de 4x4 e um conjunto NSST de 8x8 inclui somente núcleos NSST de 8x8, dependendo do tamanho de um bloco alvo (ou sub-bloco ou bloco de coeficiente de transformada).

[0102]Para outro exemplo, um conjunto NSST misto pode ser configurado como se segue. O conjunto NSST misto pode incluir núcleos NSST possuindo tamanhos diferentes. Por exemplo, o conjunto NSST misto pode incluir um núcleo NSST de 4x4 além de um núcleo NSST de 8x8. Um conjunto NSST incluindo somente os

Petição 870190117153, de 13/11/2019, pág. 34/53

28/39 núcleos NSST de 8*8 ou os núcleos NSST de 4x4 comparado a um conjunto NSST misto pode ser chamado de conjunto NSST não-misto.

[0103]O número de núcleos NSST incluídos no conjunto NSST misto pode ser fixo ou pode ser variável. Por exemplo, um conjunto NSST #1 pode incluir 3 núcleos NSST, e um conjunto NSST #2 pode incluir 4 núcleos NSST. Adicionalmente, a sequência dos núcleos NSST incluídos no conjunto NSST misto pode não ser fixa e pode ser definida de maneira diferente, dependendo de um conjunto NSST. Por exemplo, no conjunto NSST #1, os núcleos NSST 1, 2, e 3 podem ser mapeados como respectivos índices NSST 1,2, e 3. No conjunto NSST #2, os núcleos NSST 3, 2, e 1 podem ser mapeados como respectivos índices NSST 1,2, e 3.

[0104]Especificamente, uma determinação da prioridade dos núcleos NSST disponíveis dentro de um conjunto NSST pode ser baseada no tamanho (por exemplo, núcleo NSST de 8x8 ou núcleo NSST de 4x4) dos núcleos NSST. Por exemplo, se um bloco alvo correspondente for de um dado tamanho ou mais, um núcleo NSST de 8x8 pode ter maior prioridade do que um núcleo NSST de 4x4. Neste caso, um índice NSST possuindo um valor menor pode ser preferencialmente atribuído ao núcleo NSST de 8x8.

[0105]Adicionalmente, uma determinação da prioridade dos núcleos NSST disponíveis dentro de um conjunto NSST pode ser baseada na sequência (1^â, 2-, e

3-) dos núcleos NSST. Por exemplo, um 1² núcleo NSST de 4x4 pode ter prioridade maior do que um 2- núcleo NSST de 4x4.

[0106]Especificamente, por exemplo, o mapeamento dos núcleos NSST e dos índices NSST dentro de um conjunto NSST pode incluir as modalidades reveladas na Tabela 3 ou 4.

[Tabela 3]

índice índice NSST	Conjunto NSST de 4x4	Conjunto NSST de 8x8	Conjunto NSST Misto
1	1- Núcleo de 4x4	1² Núcleo de 8x8	1² Núcleo de 8x8
2	2² Núcleo de 4x4	2² Núcleo de 8x8	2² Núcleo de 8x8

Petição 870190117153, de 13/11/2019, pág. 35/53

29/39

3	32 Núcleo de 4x4	32 Núcleo de 8x8	12 Núcleo de 4x4

[Tabela 4]

índice índice NSST	Conjunto NSST Misto Tipo 1	Conjunto NSST Misto Tipo 2	Conjunto NSST Misto Tipo 3
1	3² Núcleo de 8x8	1² Núcleo de 8x8	12 Núcleo de 4x4
2	2² Núcleo de 8x8	2² Núcleo de 8x8	12 Núcleo de 8x8
3	12 Núcleo de 8x8	12 Núcleo de 4x4	22 Núcleo de 4x4
4	N.D.	22 Núcleo de 4x4	22 Núcleo de 8x8
5	N.D.	32 Núcleo de 4x4

[0107]A decisão quanto a se um conjunto NSST misto é usado pode ser indicada por vários métodos. Por exemplo, a decisão quanto a se um conjunto NSST misto é usada pode ser determinada com base em uma predição intra de um bloco alvo (ou Cll incluindo um bloco alvo) e/ou no tamanho do bloco alvo.

[0108]Por exemplo, a decisão quanto a se um conjunto NSST misto é usado pode ser determinada com base em um modo de predição intra de um bloco alvo. Em outras palavras, a decisão quanto a se o conjunto NSST misto é usado com base em um modo de predição intra ou quanto a se um conjunto NSST individual baseado no tamanho de sub-bloco é usado pode ter sido pré-determinada. Consequentemente, um conjunto NSST adequado para um bloco alvo atual pode ser determinado, e um núcleo NSST apropriado pode ser aplicado. Por exemplo, a decisão quanto a se o conjunto NSST misto é usado pode ser indicada como na tabela a seguir, dependendo de um modo de predição intra.

[Tabela 5]

í Mocfcfatra	0	ΐ	2 \|3 [4	5	6Í	7 8	9	10\|11	1213	14^1	17	18	19	20	21	22	23	34:	25	26	27	28	29	3Q	31	32 33
I Tipo Mist-o	1	1	1 11 1	0	0	0 0	ô	0\| 0	0 0	01 1	1	1	1	1	0	0	0	o\|	0	0	0	0	0	0	0	1 1
1 Modo totra 1 T;po Misto	34 1	35 1	36 37j38 ' j'\| 0\|Õ	39	40 0	41 42 'οΐΰ	43 0	4¼ oTõ	46M7 0Γ0	4aUa.5c Τ\|Τ\|’Γ	51 1	52 1	53 0	54 0	55 0	56 0		3 oi	0	60 Õ	61 0	62 0	63 0	64 0	65 0	6967 1 [Ô

[0109]Neste caso, as informações do tipo mista indicam se o conjunto NSST misto é aplicado ao bloco alvo com base em um modo de predição intra. Isso pode

Petição 870190117153, de 13/11/2019, pág. 36/53

30/39 ser usado em associação com o método revelado na Tabela 2. Por exemplo, as informações do tipo mista podem indicar se um conjunto NSST não-misto será mapeado e usado para cada modo de predição intra ou se um conjunto NSST misto será configurado e usado como descrito acima na Tabela 2. Especificamente, se um valor das informações do tipo mista for 1, um conjunto NSST misto definido em um sistema em vez de um conjunto NSST não-misto pode ser configurado e usado. Neste caso, o conjunto NSST misto definido no sistema pode indicar o conjunto NSST misto. Se um valor das informações do tipo mista for 0, o conjunto NSST não-misto pode ser usado com base em um modo de predição intra. As informações do tipo mista podem ser chamadas de sinalizador do tipo misto indicando se o conjunto NSST misto é usado. De acordo com a presente modalidade, dois tipos de conjuntos NSST (conjunto NSST não-misto e conjunto NSST misto) podem ser usados de forma adaptativa/vahável com base em um sinalizador do tipo misto.

[0110]Enquanto isso, dois ou mais conjuntos NSST mistos podem ser configurados. Neste caso, as informações do tipo mista podem ser indicadas como N (N pode ser maior do que ou igual a 2) tipos de vários valores. Neste caso, as informações do tipo mista podem ser chamadas de índice do tipo misto.

[0111]Para outro exemplo, a decisão quanto a se um conjunto NSST misto é usado pode ser determinada considerando-se um modo de predição intra associado com um bloco alvo e o tamanho do bloco alvo ao mesmo tempo. O bloco alvo pode ser chamado de vários nomes, tal como um sub-bloco, um bloco de transformada, e um bloco de coeficiente de transformada.

[0112] Por exemplo, as informações do tipo de modo podem ser configuradas no lugar das informações do tipo mista. Se um valor das informações do tipo de modo correspondendo a um modo de predição intra for 0, um conjunto NSST não-misto pode ser definido. Em caso negativo (por exemplo, um valor das informações do tipo de modo é 1), vários conjuntos NSST mistos podem ser determinados com base no

Petição 870190117153, de 13/11/2019, pág. 37/53

31/39 tamanho de um bloco alvo correspondente. Por exemplo, se um modo intra for um modo não-direcional (Planar ou DC), um NSST misto pode ser usado. Se um modo intra for um modo direcional, um conjunto NSST não-misto pode ser usado.

[0113]A FIG. 5 ilustra um método de determinação de um conjunto NSST com base em um modo de predição intra e em um tamanho de bloco.

[0114]Referindo-se à FIG. 5, o aparelho de codificação (aparelho de codificação e/ou o aparelho de decodificação) deriva coeficientes de transformada (secundária) pela transformação inversa dos coeficientes de transformada (quantizados) (S540), e deriva coeficientes de transformada (primária) pela transformação (inversa) secundária dos coeficientes de transformada (secundária) (S550). Neste caso, os coeficientes de transformada (secundária) podem ser chamados de coeficientes de transformada temporários, e os coeficientes de transformada (primária) podem ser chamados de coeficientes de transformadas modificados. Neste caso, a transformada secundária pode incluir a transformada secundária não-separável. A transformada secundária não-separável é realizada com base em um núcleo NSST. O núcleo NSST pode ser selecionado a partir de um conjunto NSST. Neste caso, o núcleo NSST pode ser indicado a partir do conjunto NSST com base nas informações de índice NSST.

[0115]O aparelho de codificação pode selecionar o conjunto NSST dentre os candidatos de conjunto NSST com base em um modo de predição intra e em um tamanho de bloco (S545). Por exemplo, os candidatos do conjunto NSST podem incluir pelo menos um conjunto NSST não-misto e pelo menos um conjunto NSST misto. Por exemplo, os candidatos do conjunto NSST podem incluir pelo menos um de um conjunto de 8x8 (conjunto NSST não-misto 1), incluindo somente núcleos NSST de 8x8, e um conjunto NSST de 4x4 (conjunto NSST não-misto 2) incluindo somente núcleos NSST de 4x4, e podem incluir um ou mais conjuntos NSST mistos. Neste caso, por exemplo, o aparelho de codificação pode determinar um conjunto

Petição 870190117153, de 13/11/2019, pág. 38/53

32/39

NSST específico a partir dos candidatos de conjunto NSST com base em se cada uma da largura (W) e altura (H) de um bloco alvo é 8 ou mais e com base em um número de modo de predição intra atual. Um núcleo NSST específico pode ser indicado a partir do conjunto NSST específico através das informações de índice NSST como descrito acima.

[0116] Enquanto isso, o índice NSST pode ser binarizado usando vários métodos para eficiência de codificação. Neste caso, um valor binarização pode ser definido de maneira eficiente considerando-se uma alteração na distribuição estatística dos valores de índice NSST que são codificados e transmitidos. Isto é, neste caso, um núcleo a ser realmente aplicado pode ser selecionado com base na sintaxe indicativa de um tamanho de núcleo.

[0117]Como descrito acima, de acordo com a presente modalidade, o número de núcleos NSST incluídos em cada conjunto de transformada (conjunto NSST) pode ser diferente. Para um método de binarização de eficiência, a binarização de comprimento variável pode ser realizada com base em um unáho truncado (TU) como na seguinte tabela baseado em um valor de índice NSST máximo disponível para cada conjunto NSST.

[Tabela 6]

índice NSST	Binarização 1 (índice máximo^)	Binarização 2 (índice máximo^)	Binarização 3 (índice máximo^)	Binarização 4 (índice máximo^)
0	0	0	0	0
1	10	10	10	10
2	11	110	110	110
3	N.D.	111	1110	1110
4	N.D.	1111	11110
5	N.D.	11111
	N.D.

[0118] Neste caso, os valores binarizados de “0” ou Ί” podem ser chamados de binários. Neste caso, cada um dos binários pode ser codificado com base no contexto através de CABAC/CAVLC. Neste caso, um valor de modelagem de contexto

Petição 870190117153, de 13/11/2019, pág. 39/53

33/39 pode ser determinado baseado pelo menos no tamanho de um bloco alvo (subbloco, bloco de transformada ou bloco de coeficiente de transformada), em um modo de predição intra, em um valor das informações do tipo mista (informações de modo misto), ou em um valor de índice NSST máximo de um conjunto NSST correspondente. Neste caso, o modelo de contexto pode ser indicado com base em um índice de contexto. O índice de contexto pode ser indicado como a soma de um desvio de contexto e um incremento de contexto.

[0119]A FIG. 6 ilustra esquematicamente um exemplo de um método de codificação de vídeo/imagem incluindo um método de transformada de acordo com a presente modalidade. O método revelado na FIG. 6 pode ser realizado pelo aparelho de codificação revelado na FIG. 1. Especificamente, por exemplo, S600 a S630 da FIG. 6 podem ser realizados pelo transformador do aparelho de codificação.

[0120] Referindo-se à FIG. 6, o aparelho de codificação obtém coeficientes de transformada para um bloco alvo (S600). O aparelho de codificação pode obter amostras residuais para o bloco alvo através de uma comparação entre um bloco original e um bloco predito, e pode obter os coeficientes de transformada para o bloco alvo através da transformada primária das amostras residuais. A transformada primária inclui um procedimento de transformar amostras residuais em um domínio espacial em coeficientes de transformada em um domínio da frequência. Neste caso, o bloco alvo pode incluir um sub-bloco, bloco de transformada ou bloco de coeficiente de transformada dentro de uma Cll.

[0121]O aparelho de codificação determina um conjunto NSST para o bloco alvo (S610). O conjunto NSST pode incluir um núcleo NSST usado para uma transformada secundária. A transformada secundária inclui uma transformada secundária não-separável. O conjunto NSST para o bloco alvo pode ser determinado com base em pelo menos um de um modo de predição intra e o tamanho do bloco alvo.

[0122]O conjunto NSST pode incluir núcleos NSST de 8x8 ou núcleos NSST

Petição 870190117153, de 13/11/2019, pág. 40/53

34/39 de 4x4. Neste caso, o conjunto NSST pode ser chamado de conjunto NSST nãomisto. A decisão quanto a se o conjunto NSST inclui núcleos NSST de 8x8 ou inclui núcleos NSST de 4x4 pode ser determinada com base no tamanho do bloco alvo, como descrito acima.

[0123]Como alternativa, o conjunto NSST pode ser um conjunto NSST misto incluindo um núcleo NSST de 4x4 e um núcleo NSST de 8x8. Neste caso, um valor de índice atribuído ao núcleo NSST de 8x8 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 4x4. Por exemplo, se o tamanho do bloco alvo for maior do que um tamanho de referência predefinido, um valor de índice atribuído ao núcleo NSST de 8x8 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 4x4. Como alternativa, pelo contrário, um valor de índice atribuído ao núcleo NSST de 4x4 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 8x8.

[0124]O conjunto NSST pode incluir uma pluralidade de núcleos NSST. O número de núcleos NSST pode ser definido de forma variável. Por exemplo, o número de núcleos NSST incluídos em um primeiro conjunto NSST pode ser diferente do número de núcleos NSST incluídos em um segundo conjunto NSST.

[0125]Enquanto isso, a decisão quanto a se um NSST não-misto é usado ou um conjunto NSST misto é usado como o conjunto NSST para o bloco alvo pode ser indicada com base nas informações do tipo misto ou nas informações de modo misto.

[0126]Por exemplo, se um valor das informações do tipo mista for 0, pode-se utilizar um conjunto NSST não-misto incluindo núcleos NSST de 8x8 ou núcleos NSST de 4x4. Se um valor das informações do tipo mista não for 0, pode-se utilizar um conjunto NSST misto incluindo um núcleo NSST de 4x4 e um núcleo NSST de 8x8. Se uma pluralidade de conjuntos NSST mistos estiver disponível, um da pluralidade de conjuntos NSST mistos pode ser indicado com base em um valor 1, 2, etc.

Petição 870190117153, de 13/11/2019, pág. 41/53

35/39 das informações do tipo mista.

[0127]O conjunto NSST para o bloco alvo pode ser determinado com base tanto em um modo de predição intra e quanto no tamanho do bloco alvo. O modo de predição intra pode ser um de 67 (68 se um modo LM for incluído) modos de predição intra incluindo um modo LM, por exemplo. O modo de predição intra pode ser um modo de predição associado com o bloco alvo ou pode ser um modo de predição intra configurado em uma CU cobrindo espacialmente o bloco alvo ou um sub-bloco da mesma.

[0128]O aparelho de codificação seleciona um de uma pluralidade de núcleos NSST incluídos no conjunto NSST e define um índice NSST (S620). O aparelho de codificação pode selecionar um da pluralidade de núcleos NSST incluídos no conjunto NSST através do cálculo de repetição com base em um custo de RD. O aparelho de codificação pode definir o índice NSST como um valor indicativo do núcleo NSST selecionado.

[0129]O aparelho de codificação gera coeficientes de transformada modificados pela transformação secundária não-separável dos coeficientes de transformada com base no núcleo NSST selecionado (S630). O aparelho de codificação pode codificar e gerar os coeficientes de transformada modificados de acordo com um procedimento determinado. Neste caso, pelo menos uma das informações do tipo mista, das informações de modo misto e das informações sobre o índice NSST pode ser codificada como se segue. O aparelho de codificação pode gerar as informações codificadas na forma de um fluxo de bits. O fluxo de bits pode ser transmitido ao aparelho de decodificação através de uma rede ou através de um meio de armazenamento.

[0130]Se as informações sobre o índice NSST forem codificadas, um valor do índice NSST pode ser binahzado com comprimento variável. Neste caso, por exemplo, como revelado na Tabela 6, o valor do índice NSST pode ser binarizado de

Petição 870190117153, de 13/11/2019, pág. 42/53

36/39 acordo com um esquema unário truncado (TU). Enquanto isso, o valor do índice NSST pode ser codificado com base no contexto, tal como CABAC ou CAVLC. Neste caso, um modelo de contexto pode ser determinado com base em pelo menos um dentre o tamanho do bloco alvo, um modo de predição intra, um valor das informações do tipo mista e um valor de índice máximo dentro do conjunto NSST.

[0131]A FIG. 7 ilustra esquematicamente um exemplo de um método de decodificação de vídeo/imagem incluindo um método de transformada de acordo com a presente modalidade. O método revelado na FIG. 7 pode ser realizado pelo aparelho de decodificação revelado na FIG. 2. Especificamente, por exemplo, na FIG. 7, S700 pode ser realizado pela unidade de desquantização do aparelho de decodificação, e S710 a S730 pode ser realizado pelo transformador inverso do aparelho de decodificação. Enquanto isso, na presente modalidade, o aparelho de decodificação é descrito basicamente, mas o método revelado na FIG. 7 pode ser realizado de maneira idêntica na unidade de desquantização e transformador inverso do aparelho de codificação.

[0132] Referindo-se à FIG. 7, o aparelho de decodificação obtém coeficientes de transformada para um bloco alvo (S700). O aparelho de decodificação pode obter os coeficientes de transformada pela desquantização dos coeficientes de transformada quantizados para o bloco alvo, obtidos a partir das informações recebidas através de um fluxo de bits. Neste caso, o bloco alvo pode incluir um sub-bloco, bloco de transformada ou bloco de coeficiente de transformada dentro de uma CU.

[0133]O aparelho de decodificação determina um conjunto NSST para o bloco alvo (S710). O conjunto NSST pode incluir um núcleo NSST para uma transformada secundária. A transformada secundária inclui uma transformada secundária não-separável. O conjunto NSST para o bloco alvo pode ser determinado com base em pelo menos um de um modo de predição intra e o tamanho do bloco alvo.

[0134]O conjunto NSST pode incluir núcleos NSST de 8x8 ou núcleos NSST

Petição 870190117153, de 13/11/2019, pág. 43/53

37/39 de 4x4. Neste caso, o conjunto NSST pode ser chamado de conjunto NSST nãomisto. A decisão quanto a se o conjunto NSST inclui núcleos NSST de 8x8 ou inclui núcleos NSST de 4x4 pode ser determinada com base no tamanho do bloco alvo, como descrito acima.

[0135]Como alternativa, o conjunto NSST pode ser um conjunto NSST misto incluindo um núcleo NSST de 4x4 e um núcleo NSST de 8x8. Neste caso, um valor de índice atribuído ao núcleo NSST de 8x8 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 4x4. Por exemplo, se o tamanho do bloco alvo for maior do que um tamanho de referência predefinido, um valor de índice atribuído ao núcleo NSST de 8x8 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 4x4. Como alternativa, pelo contrário, um valor de índice atribuído ao núcleo NSST de 4x4 pode ser menor do que um valor de índice atribuído ao núcleo NSST de 8x8.

[0136]O conjunto NSST pode incluir uma pluralidade de núcleos NSST. O número de núcleos NSST pode ser definido de forma variável. Por exemplo, o número de núcleos NSST incluídos em um primeiro conjunto NSST pode ser diferente do número de núcleos NSST incluídos em um segundo conjunto NSST.

[0137] Enquanto isso, a decisão quanto a se um NSST não-misto é usado ou um conjunto NSST misto é usado como o conjunto NSST para o bloco alvo pode ser determinada com base nas informações do tipo misto ou nas informações de modo misto.

[0138]Por exemplo, se um valor das informações do tipo mista for 0, pode-se utilizar um conjunto NSST não-misto incluindo núcleos NSST de 8x8 ou núcleos NSST de 4x4. Se um valor das informações do tipo mista não for 0, pode-se utilizar um conjunto NSST misto incluindo um núcleo NSST de 4x4 e um núcleo NSST de 8x8. Se uma pluralidade de conjuntos NSST mistos estiver disponível, um da pluralidade de conjuntos NSST mistos pode ser indicado com base em um valor 1, 2, etc.

Petição 870190117153, de 13/11/2019, pág. 44/53

38/39 das informações do tipo mista.

[0139]O conjunto NSST para o bloco alvo pode ser determinado com base tanto em um modo de predição intra quanto no tamanho do bloco alvo. O modo de predição intra pode ser um de 67 (68 se um modo LM for incluído) modos de predição intra, por exemplo. O modo de predição intra pode ser um modo de predição associado com o bloco alvo ou pode ser um modo de predição intra configurado em uma Cll cobrindo espacialmente o bloco alvo ou um sub-bloco da mesma.

[0140]O aparelho de decodificação seleciona um de uma pluralidade de núcleos NSST, incluídos no conjunto NSST, baseado em um índice NSST (S720). O índice NSST pode ser obtido através de um fluxo de bits. O aparelho de decodificação pode obter um valor do índice NSST através de decodificação (por entropia). O valor do índice NSST pode ser binarizado com comprimento variável. Neste caso, por exemplo, como revelado na Tabela 6, o valor do índice NSST pode ser binarizado de acordo com um esquema unário truncado (TU). Enquanto isso, o valor do índice NSST pode ser decodificado com base no contexto, tal como CABAC ou CAVLC. Neste caso, um modelo de contexto pode ser determinado com base em pelo menos um dentre o tamanho do bloco alvo, um modo de predição intra, um valor das informações do tipo mista e um valor de índice máximo dentro do conjunto NSST.

[0141]O aparelho de decodificação gera coeficientes de transformada modificados pela transformação secundária (inversa) não-separável dos coeficientes de transformada com base no núcleo NSST selecionado (S730). O aparelho de decodificação pode obter amostras residuais para o bloco alvo realizando uma transformada primária (inversa) nos coeficientes de transformada modificados.

[0142]O aparelho de decodificação pode obter amostras de reconstrução combinando amostras de predição obtidas com base nos resultados da predição intra e nas amostras residuais, e pode reconstruir uma imagem com base nas amos

Petição 870190117153, de 13/11/2019, pág. 45/53

39/39 tras de reconstrução.

[0143] Em seguida, o aparelho de decodificação pode aplicar um procedimento de filtragem em malha, tal como um filtro de remoção do efeito de bloco, um procedimento SAO e/ou ALF, à imagem reconstruída de modo a aprimorar a qualidade subjetiva/objetiva da imagem, se necessário, como descrito acima.

[0144]O método de acordo com a presente modalidade pode ser implementado em uma forma de software. O aparelho de codificação e/ou o aparelho de decodificação de acordo com a presente modalidade pode ser incluído em um aparelho para realizar o processamento de imagem, tal como TV, um computador, um smartphone, um decodificador de sinais, ou um aparelho de exibição.

[0145]Na presente modalidade, se as modalidades forem implementadas em software, o método pode ser implementado como um módulo (processo ou função) que realiza a função acima. O módulo pode ser armazenado em uma memória e executado por um processador. A memória pode ser posicionada dentro ou fora do processador, e pode ser conectada ao processador por vários meios bemconhecidos. O processador pode incluir um circuito integrado de aplicação específica (ASIC), outros chipsets, circuitos lógicos e/ou processadores de dados. A memória pode incluir uma memória somente para leitura (ROM), uma memória de acesso aleatório (RAM), uma memória flash, um cartão de memória, um meio de armazenamento e/ou outros dispositivos de armazenamento.

Claims

REIVINDICAÇÕES

1. Método de transformada realizado por um aparelho de decodificação, o método sendo CARACTERIZADO por compreender:

receber um índice de transformada não-separável;

obter coeficientes de transformada para um bloco alvo;

determinar um conjunto de transformada não-separável para o bloco alvo;

selecionar um de uma pluralidade de núcleos de transformada não-separáveis incluídos no conjunto de transformada não-separável no índice de transformada nãoseparável; e gerar coeficientes de transformada modificados pela transformação nãoseparável dos coeficientes de transformada baseado no núcleo de transformada não-separável selecionado, em que o conjunto de transformada não-separável para o bloco alvo é determinado com base em pelo menos um de um modo de predição intra e um tamanho do bloco alvo, e em que um valor do índice de transformada não-separável é representado com base em uma binarização unária truncada (TU).
2. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o conjunto de transformada não-separável é um conjunto de transformada nãoseparável misto compreendendo um núcleo de transformada não-separável de 4x4 e um núcleo de transformada não-separável de 8x8.
3. Método, de acordo com a reivindicação 2, CARACTERIZADO pelo fato de que um valor de índice atribuído ao núcleo de transformada não-separável de 8x8 é menor do que um valor de índice atribuído ao núcleo de transformada não-separável de 4x4.
4. Método, de acordo com a reivindicação 2, CARACTERIZADO pelo fato de que, se o tamanho do bloco alvo for maior do que um tamanho de referência

Petição 870190094488, de 20/09/2019, pág. 16/20

2/5 predefinido, um valor de índice atribuído ao núcleo de transformada não-separável de 8x8 é menor do que um valor de índice atribuído ao núcleo de transformada nãoseparável de 4x4.
5. Método, de acordo com a reivindicação 2, CARACTERIZADO pelo fato de que um número dos núcleos de transformada não-separáveis incluídos no conjunto de transformada não-separável é variável.
6. Método, de acordo com a reivindicação 1, CARACTERIZADO por adicionalmente compreender:

obter informações do tipo mista; e determinar se um conjunto de transformada não-separável misto é usado com base nas informações do tipo mista.
7. Método, de acordo com a reivindicação 6, CARACTERIZADO pelo fato de que:

se um valor das informações do tipo mista for 0, utiliza-se um conjunto de transformada não-separável não-misto incluindo núcleos de transformada nãoseparáveis de 8x8 ou núcleos de transformada não-separáveis de 4x4, e se um valor das informações do tipo mista não for 0, utiliza-se um conjunto de transformada não-separável misto incluindo um núcleo de transformada nãoseparável de 4x4 e um núcleo de transformada não-separável de 8x8.
8. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o conjunto de transformada não-separável para o bloco alvo é determinado baseado tanto no modo de predição intra quanto no tamanho do bloco alvo.
9. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que o valor do índice de transformada não-separável é binahzado com comprimento variável.
10. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que um valor máximo do índice de transformada não-separável é 2, e

Petição 870190094488, de 20/09/2019, pág. 17/20

3/5 em que o valor 0 do índice de transformada não-separável é representado pela cadeia de caracteres binária “0”, o valor 1 do índice de transformada nãoseparável é representado pela cadeia de caracteres binária “10”, e o valor 2 do índice de transformada não-separável é representado pela cadeia de caracteres binária “11”.
11. Método, de acordo com a reivindicação 1, CARACTERIZADO pelo fato de que:

um valor do índice de transformada não-separável é obtido com base na decodificação baseada em contexto, e um modelo de contexto para a decodificação baseada em contexto do valor do índice de transformada não-separável é determinado com base em pelo menos um dentre o tamanho do bloco alvo, o modo de predição intra, um valor das informações do tipo mista e um valor de índice máximo dentro do conjunto de transformada não-separável.
12. Método de transformada realizado por um aparelho de codificação, o método sendo CARACTERIZADO por compreender:

obter coeficientes de transformada para um bloco alvo;

determinar um conjunto de transformada não-separável para o bloco alvo;

selecionar um de uma pluralidade de núcleos de transformada não-separáveis incluídos no conjunto de transformada não-separável, em que o núcleo de transformada não-separável selecionado é usado para transformação não-separável dos coeficientes de transformada para o bloco alvo;

gerar um índice de transformada não-separável especificando o núcleo de transformada não-separável selecionado a partir do conjunto de transformada nãoseparável; e codificar informação no índice de transformada não-separável, em que o conjunto de transformada não-separável para o bloco alvo é

Petição 870190094488, de 20/09/2019, pág. 18/20

4/5 determinado com base em pelo menos um de um modo de predição intra e um tamanho do bloco alvo, e em que um valor do índice de transformada não-separável é representado com base em uma binarização unária truncada (TU).
13. Método, de acordo com a reivindicação 16, CARACTERIZADO pelo fato de que um valor máximo do índice de transformada não-separável é 2, e em que o valor 0 do índice de transformada não-separável é representado pela cadeia de caracteres binária “0”, o valor 1 do índice de transformada nãoseparável é representado pela cadeia de caracteres binária “10”, e o valor 2 do índice de transformada não-separável é representado pela cadeia de caracteres binária “11”.
14. Meio de armazenamento digital armazenando informações que fazem com que um aparelho de decodificação realize um método de transformada, o método sendo CARACTERIZADO por compreender:

obter um índice de transformada não-separável;

obter coeficientes de transformada para um bloco alvo;

determinar um conjunto de transformada não-separável para o bloco alvo;

selecionar um de uma pluralidade de núcleos de transformada não-separáveis incluídos no conjunto de transformada não-separável no índice de transformada nãoseparável; e gerar coeficientes de transformada modificados pela transformação nãoseparável dos coeficientes de transformada baseado no núcleo de transformada não-separável selecionado, em que o conjunto de transformada não-separável para o bloco alvo é determinado com base em pelo menos um de um modo de predição intra e um tamanho do bloco alvo, e em que um valor do índice de transformada não-separável é representado

Petição 870190094488, de 20/09/2019, pág. 19/20

5/5 com base em uma binarização unária truncada (TU).
15. Meio de armazenamento digital, de acordo com a reivindicação 18, CARACTERIZADO pelo fato de que um valor máximo do índice de transformada não-separável é 2, e em que o valor 0 do índice de transformada não-separável é representado pela cadeia de caracteres binária “0”, o valor 1 do índice de transformada nãoseparável é representado pela cadeia de caracteres binária “10”, e o valor 2 do índice de transformada não-separável é representado pela cadeia de caracteres binária “11”.