BR122016028746A2 - dispositivo, e, método de processamento de imagem - Google Patents

Abstract

é provido um dispositivo de processamento de imagem incluindo uma seção de definição configurada para definir informação de parâmetro de gerenciamento de armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário de decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e de uma camada inferior; uma seção de codificação configurada para codificar uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits; e, uma seção de transmissão configurada para transmitir a informação de parâmetro de gerenciamento do armazenamento temporário definida pela seção de definição e o fluxo contínuo de bits gerado pela seção de codificação. também é revelado o respectivo método de processamento de imagem.

Description

“DISPOSITIVO, E, MÉTODO DE PROCESSAMENTO DE IMAGEM”

Dividido do BR 11 2015 014832-8, depositado em 16/12/2013.

CAMPO DA INVENÇÃO [001] A presente divulgação diz a respeito de um dispositivo e de um método de processamento de imagem, e, mais particularmente, diz respeito a um dispositivo e a um método de processamento de imagem que são capazes de realizar um processo de decodificação em um sincronismo apropriado na codificação de vídeo escalonável.

FUNDAMENTOS DA INVENÇÃO [002] Recentemente, dispositivos para comprimir e codificar uma imagem pela adoção de um esquema de codificação de tratamento de informação de imagem digitalmente e realização da compressão por uma transformada ortogonal, tal como uma transformada discreta de cosseno, e compensação de movimento usando redundância específica da informação de imagem com o propósito de transmissão da informação e acúmulo com alta eficiência quando a informação de imagem for tratada digitalmente têm se difundido. Grupo de Especialistas em Imagem em Movimento (MPEG), H.264, MPEG-4 Parte 10 (Codificação Avançada de Vídeo) (a seguir, referido como H.264/AVC) e congêneres são exemplos de tais esquemas de codificação.

[003] Portanto, com o propósito de melhorar a eficiência de codificação, se comparada com H.264/AVC, a padronização de um esquema de codificação referido como codificação de vídeo em alta eficiência (HEVC) pela Equipe de Colaboração em Conjunto - Codificação de Vídeo (JCTVC), que é uma organização de padronização em conjunto do Setor de Padronização de Telecomunicação da União de Telecomunicação Internacional (ITU-T) e Organização Internacional para Padronização (ISO) / Comissão Eletrotécnica Internacional (IEC), está atualmente em progresso, e a Literatura Não Patente 1 foi emitida como um esboço do esquema.

Petição 870160073535, de 07/12/2016, pág. 10/212 / 145 [004] Neste particular, os esquemas de codificação de imagem existentes, tais como MPEG-2 e AVC, têm uma função de escalonabilidade para dividir uma imagem em uma pluralidade de camadas e codificar a pluralidade de camadas.

[005] Em outras palavras, por exemplo, para um terminal que tem uma baixa capacidade de processamento, tal como um telefone celular, a informação de compressão de imagem de apenas uma camada base é transmitida, e uma imagem em movimento de baixas resoluções espacial e temporal ou uma baixa qualidade é reproduzida e, para um terminal que tem uma alta capacidade de processamento, tais como uma televisão ou um computador pessoal, a informação de compressão de imagem de uma camada de melhoria, bem como uma camada base, é transmitida, e uma imagem em movimento de altas resoluções espacial e temporal ou uma alta qualidade é reproduzida. Isto é, a informação de compressão de imagem de acordo com uma capacidade de um terminal ou uma rede pode ser transmitida a partir de um servidor sem realização do processo de transcodificação.

[006] Em HEVC, é possível designar um parâmetro do decodificador de referência hipotético (HRD) de forma que um sobrefluxo ou um subfluxo de um armazenamento temporário não ocorram quando um processo de decodificação para informação de compressão de imagem for realizado. Particularmente, é possível designar um parâmetro HRD para cada camada quando codificação de vídeo escalonável for realizada (veja a Literatura Não Patente 2).

Lista de Citação

Literatura Não Patente [007] Literatura Não Patente 1: Benjamin Bross, Woo-Jin Han, JensRainer Ohm, Gary J. Sullivan, Thomas Wiegand, High efficiency video coding (HEVC) text specification draft 9, JCTVC-K1003, 2012,10,21 [008] Literatura Não Patente 2: Jill Boyce, Ye-Kui Wang, NAL unit

Petição 870160073535, de 07/12/2016, pág. 11/212 / 145 header and parameter set designs for HEVC extensions, JCTVC-K1007, 2012,10,19

SUMÁRIO DA INVENÇÃO

Problema Técnico [009] Entretanto, quando o parâmetro HRD for designado para cada camada ou uma camada de tempo que serve como uma das subcamadas, é difícil detectar se o processo de decodificação é realizado por um único dispositivo de decodificação ou por uma pluralidade de dispositivos de decodificação.

[0010] A presente divulgação foi feita à luz do exposto, e é desejável realizar um processo de decodificação em um sincronismo apropriado. Solução para o Problema [0011] De acordo com um aspecto da presente divulgação, é provido um dispositivo de processamento de imagem que inclui uma seção de recepção configurada para receber um fluxo contínuo de bits obtido pela codificação de uma imagem que tem pelo menos uma camada e informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior, e uma seção de decodificação configurada para decodificar o fluxo contínuo de bits recebido pela seção de recepção e gerar uma imagem.

[0012] A camada pode incluir uma camada e uma subcamada.

[0013] A camada é uma visualização da codificação multivisualizações.

[0014] A camada é uma camada de codificação de vídeo escalonável.

Petição 870160073535, de 07/12/2016, pág. 12/212 / 145 [0015] A informação de parâmetro de gerenciamento do armazenamento temporário é descrita na informação de melhoria complementar (SEI).

[0016] A informação de parâmetro de gerenciamento do armazenamento temporário é descrita em buffering_period_SEI.

[0017] A informação de presença / ausência de parâmetro que indica uma presença ou uma ausência do parâmetro para gerenciar o armazenamento temporário do decodificador que serve como o parâmetro para realizar o processo de decodificação apenas da correspondente camada é descrita em um vps (video parameter set)_extension.

[0018] A seção de recepção pode receber um indicador de AVC que indica que uma camada inferior à correspondente camada é codificada por MPEG-4 Parte 10 - Codificação Avançada de Vídeo (AVC) e a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica que o parâmetro para gerenciar o armazenamento temporário do decodificador é o parâmetro para realizar o processo de decodificação apenas da correspondente camada.

[0019] De acordo com um aspecto da presente divulgação, é provido um método de processamento de imagem que inclui receber, por um dispositivo de processamento de imagem, um fluxo contínuo de bits obtido pela codificação de uma imagem que tem pelo menos uma camada e informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior, receber, pelo dispositivo de processamento de imagem, um fluxo contínuo de bits obtido pela

Petição 870160073535, de 07/12/2016, pág. 13/212 / 145 codificação de uma imagem que inclui pelo menos uma camada usando um parâmetro correspondente à informação de parâmetro de gerenciamento do armazenamento temporário e pela decodificação, pelo dispositivo de processamento de imagem, do fluxo contínuo de bits recebido e gerar uma imagem.

[0020] De acordo com um outro aspecto da presente divulgação, é provido um dispositivo de processamento de imagem que inclui uma seção de definição configurada para definir informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior, uma seção de codificação configurada para codificar uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits, e uma seção de transmissão configurada para transmitir a informação de parâmetro de gerenciamento do armazenamento temporário definida pela seção de definição e o fluxo contínuo de bits gerado pela seção de codificação.

[0021] A camada pode incluir uma camada e uma subcamada.

[0022] A camada é uma visualização da codificação multivisualizações.

[0023] A camada é uma camada de codificação de vídeo escalonável.

[0024] A informação de parâmetro de gerenciamento do armazenamento temporário é descrita na informação de melhoria complementar (SEI).

[0025] A informação de parâmetro de gerenciamento do armazenamento temporário é descrita em buffering_period_SEI.

[0026] A informação de presença / ausência de parâmetro que indica

Petição 870160073535, de 07/12/2016, pág. 14/212 / 145 uma presença ou uma ausência do parâmetro para gerenciar o armazenamento temporário do decodificador que serve como o parâmetro para realizar o processo de decodificação apenas da correspondente camada é descrita em um vps (video parameter set)_extension.

[0027] A seção de definição pode definir um indicador de AVC que indica que uma camada inferior à correspondente camada é codificada por MPEG-4 Parte 10 - Codificação Avançada de Vídeo (AVC) e a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica que o parâmetro para gerenciar o armazenamento temporário do decodificador é o parâmetro para realizar o processo de decodificação apenas da correspondente camada.

[0028] De acordo com um outro aspecto da presente divulgação, é provido um método de processamento de imagem que inclui definir, por um dispositivo de processamento de imagem, a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior, codificar, pelo dispositivo de processamento de imagem, uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits, e transmitir, pelo dispositivo de processamento de imagem, a informação de parâmetro de gerenciamento do armazenamento temporário definida e o fluxo contínuo de bits gerado.

[0029] De acordo com um aspecto da presente divulgação, um fluxo contínuo de bits obtido pela codificação de uma imagem que tem pelo menos uma camada e informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro

Petição 870160073535, de 07/12/2016, pág. 15/212 / 145 para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior são recebidos. Então, o fluxo contínuo de bits recebido é decodificado para gerar uma imagem.

[0030] De acordo com um outro aspecto da presente divulgação, a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e de que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior é definida, e uma imagem que tem pelo menos uma camada é codificada para gerar um fluxo contínuo de bits. Então, a informação de parâmetro de gerenciamento do armazenamento temporário definida e o fluxo contínuo de bits gerado são transmitidos.

[0031] Também, o supra descrito dispositivo de processamento de imagem pode ser um dispositivo independente ou um bloco interno que constitui um dispositivo de codificação de imagem ou um dispositivo de decodificação de imagem.

Efeitos Vantajosos da Invenção [0032] De acordo com um aspecto da presente divulgação, é possível decodificar uma imagem. Particularmente, é possível realizar um processo de decodificação em um sincronismo apropriado.

[0033] De acordo com um outro aspecto da presente divulgação, é possível codificar uma imagem. Particularmente, é possível realizar um

Petição 870160073535, de 07/12/2016, pág. 16/212 / 145 para para para descrever descrever descrever um um um exemplo exemplo exemplo de de de processo de decodificação em um sincronismo apropriado.

BREVE DESCRIÇÃO DOS DESENHOS [0034] A figura 1 é um diagrama para descrever um exemplo de uma configuração de uma unidade de codificação.

[0035] A figura 2 é um diagrama codificação de vídeo escalonável espacial.

[0036] A figura 3 é um diagrama codificação de vídeo escalonável temporal.

[0037] A figura 4 é um diagrama codificação de vídeo escalonável de uma razão de sinal por ruído.

[0038] A figura 5 é um diagrama que ilustra um exemplo de sintaxe de um parâmetro HRD de uma HEVC.

[0039] A figura 6 é um diagrama para descrever um processo paralelo de codificação de vídeo com escalonabilidade.

[0040] A figura 7 é um diagrama que ilustra um exemplo de sintaxe de um parâmetro HRD de acordo com a presente tecnologia.

[0041] A figura 8 é um diagrama que ilustra um outro exemplo de sintaxe de um parâmetro HRD de acordo com a presente tecnologia.

[0042] A figura 9 é um diagrama que ilustra um outro exemplo de sintaxe de um parâmetro HRD de acordo com a presente tecnologia.

[0043] A figura 10 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um dispositivo de codificação escalonável.

[0044] A figura 11 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de uma seção de codificação de imagem da camada de melhoria.

[0045] A figura 12 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um armazenamento temporário de acúmulo e uma seção de definição do tipo de HRD.

[0046] A figura 13 é um diagrama para descrever um exemplo de uma

Petição 870160073535, de 07/12/2016, pág. 17/212 / 145 estrutura de camada.

[0047] A figura 14 é um fluxograma para descrever um exemplo de um fluxo de um processo de codificação.

[0048] A figura 15 é um fluxograma para descrever um exemplo de um processo de codificação de camada.

[0049] A figura 16 é um fluxograma para descrever um processo de codificação do parâmetro HRD.

[0050] A figura 17 é um fluxograma para descrever um processo de cálculo do parâmetro HRD.

[0051] A figura 18 é um fluxograma para descrever um parâmetro

HRD do processo de cálculo da camada de tempo.

[0052] A figura 19 é um fluxograma para descrever um outro exemplo de um processo de codificação do parâmetro HRD.

[0053] A figura 20 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um dispositivo de decodificação escalonável.

[0054] A figura 21 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de uma seção de decodificação de imagem da camada de melhoria.

[0055] A figura 22 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um armazenamento temporário de acúmulo e de uma seção de decodificação do tipo de HRD.

[0056] A figura 23 é um fluxograma para descrever um exemplo de um fluxo de um processo de decodificação.

[0057] A figura 24 é um fluxograma para descrever um exemplo de um fluxo de um processo de decodificação de camada.

[0058] A figura 25 é um fluxograma para descrever um outro exemplo de um fluxo de um processo de decodificação do parâmetro HRD.

[0059] A figura 26 é um fluxograma para descrever um outro

Petição 870160073535, de 07/12/2016, pág. 18/212 / 145 exemplo de um fluxo de um processo de monitoramento do armazenamento temporário de acúmulo.

[0060] A figura 27 é um diagrama que ilustra um exemplo de sintaxe de vps_extension.

[0061] A figura 28 é um diagrama que ilustra um exemplo de sintaxe de sps_extension.

[0062] A figura 29 é um diagrama que ilustra um exemplo de sintaxe de vps.

[0063] A figura 30 é um diagrama que ilustra um exemplo de semântica de layer_id_included_flag.

[0064] A figura 31 é um diagrama para descrever um exemplo de definição de LayerSet.

[0065] A figura 32 é um diagrama que ilustra um exemplo de sintaxe de buffering_period_SEl.

[0066] A figura 33 é um diagrama que ilustra um exemplo de sintaxe de buffering_period_SEl.

[0067] A figura 34 é um diagrama que ilustra um exemplo de sintaxe de buffering_period_SEl.

[0068] A figura 35 é um diagrama que ilustra um exemplo de sintaxe de buffering_period_SEI.

[0069] A figura 36 é um diagrama de blocos que ilustra um outro exemplo de uma configuração principal de uma seção de codificação de imagem da camada de melhoria.

[0070] A figura 37 é um diagrama de blocos que ilustra um exemplo de uma configuração de uma seção de definição da SEI do período de armazenamento temporário.

[0071] A figura 38 é um fluxograma para descrever um exemplo de um processo de codificação de camada.

[0072] A figura 39 é um fluxograma para descrever um exemplo de

Petição 870160073535, de 07/12/2016, pág. 19/212 / 145 um processo de codificação da SEI do período de armazenamento temporário. [0073] A figura 40 é um diagrama de blocos que ilustra um outro exemplo de uma configuração principal de uma seção de decodificação de imagem da camada de melhoria.

[0074] A figura 41 é um diagrama de blocos que ilustra um exemplo de uma configuração de uma seção de decodificação da SEI do período de armazenamento temporário.

[0075] A figura 42 é um fluxograma para descrever um exemplo de um processo de decodificação de camada.

[0076] A figura 43 é um fluxograma para descrever um exemplo de um processo de decodificação da SEI do período de armazenamento temporário.

[0077] A figura 44 é um fluxograma para descrever um exemplo de um processo de codificação do parâmetro HRD no caso de um indicador de AVC.

[0078] A figura 45 é um fluxograma para descrever um exemplo de um processo de codificação da SEI do período de armazenamento temporário no caso de um indicador de AVC.

[0079] A figura 46 é um diagrama que ilustra um exemplo de um esquema de codificação de imagem multivisualizações.

[0080] A figura 47 é um diagrama que ilustra um exemplo de uma configuração principal de um dispositivo de codificação de imagem multivisualizações no qual a presente divulgação é aplicada.

[0081] A figura 48 é um diagrama que ilustra um exemplo de uma configuração principal de um dispositivo de decodificação de imagem multivisualizações no qual a presente divulgação é aplicada.

[0082] A figura 49 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um computador.

[0083] A figura 50 é um diagrama de blocos que ilustra um exemplo

Petição 870160073535, de 07/12/2016, pág. 20/212 / 145 de uma configuração esquemática de um dispositivo de televisão.

[0084] A figura 51 é um diagrama de blocos que ilustra um exemplo de uma configuração esquemática de um telefone celular.

[0085] A figura 52 é um diagrama de blocos que ilustra um exemplo de uma configuração esquemática de um dispositivo de gravação / reprodução.

[0086] A figura 53 é um diagrama de blocos que ilustra um exemplo de uma configuração esquemática de um dispositivo de captura de imagem.

[0087] A figura 54 é um diagrama de blocos que ilustra um exemplo de uso de codificação de vídeo escalonável.

[0088] A figura 55 é um diagrama de blocos que ilustra um outro exemplo de uso de codificação de vídeo escalonável.

[0089] A figura 56 é um diagrama de blocos que ilustra um outro exemplo de uso de codificação de vídeo escalonável.

DESCRIÇÃO DAS MODALIDADES [0090] A seguir, modos (a seguir, referidos como modalidades) para realizar a presente divulgação serão descrito. A descrição prosseguirá na seguinte ordem:

0. Visão geral

1. Primeira modalidade (dispositivo de codificação de imagem)

2. Segunda modalidade (dispositivo de decodificação de imagem)

3. Terceira modalidade (exemplo de sintaxe)

4. Quarta modalidade (exemplo de buffering_period_SEI)

5. Quinta modalidade (exemplo do indicador de AVC)

6. Sexta modalidade (dispositivo de codificação de imagem multivisualizações / dispositivo de decodificação de imagem multivisualizações)

Petição 870160073535, de 07/12/2016, pág. 21/212 / 145

7. Sétima modalidade (computador)

8. Aplicações

9. Aplicações de codificação de vídeo escalonável <0. Visão geral>

<Esquema de codificação>

[0091] A seguir, a presente tecnologia será descrita em conexão com uma aplicação em codificação e decodificação de imagem de um esquema de codificação de vídeo em alta eficiência (HEVC).

<Unidade de codificação>

[0092] Em um esquema de Codificação Avançada de Vídeo (AVC), uma estrutura hierárquica com base em um macrobloco e um submacrobloco é definida. Entretanto, um macrobloco de 16 x 16 pixels não é ideal para um grande quadro de imagem, tal como uma definição Ultra Alta (UHD) (4.000 x 2.000 pixels), que serve como um alvo de um esquema de codificação da próxima geração.

[0093] Por outro lado, no esquema HEVC, uma unidade de codificação (CU) é definida da forma ilustrada na figura 1.

[0094] Uma CU também é referida como um bloco de árvore de codificação (CTB), e serve como uma área parcial de uma imagem de uma unidade de figura que desempenha o mesmo papel de um macrobloco no esquema AVC. O último é fixo em um tamanho de 16 x 16 pixels, mas o primeiro não é fixo em um certo tamanho, mas designado na informação de compressão de imagem em cada sequência.

[0095] Por exemplo, uma maior unidade de codificação (LCU) e uma menor unidade de codificação (SCU) de uma CU são especificadas em um conjunto de parâmetro de sequência (SPS) incluído em dados codificados a serem transmitidos.

[0096] Como split_flag = 1 é definido em uma faixa na qual cada

LCU não é menor que uma SCU, uma unidade de codificação pode ser

Petição 870160073535, de 07/12/2016, pág. 22/212 / 145 dividida em CUs que têm um menor tamanho. No exemplo da figura 1, um tamanho de uma LCU é 128, e uma maior profundidade escalonável é 5. Uma CU de um tamanho de 2N x 2N é dividida em CUs que têm um tamanho de N X N que serve como uma camada que é um nível inferior quando um valor de splitfag for 1.

[0097] Adicionalmente, uma CU é dividida em unidades de previsão (PUs) que são áreas (áreas parciais de uma imagem de uma unidade de figura) que servem como unidades de processamento de intraprevisão ou interprevisão e dividida em unidades de transformada (TUs) que são áreas (áreas parciais de uma imagem de uma unidade de figura) que servem como unidades de processamento de transformada ortogonal. Atualmente, no esquema HEVC, além de 4 x 4 e 8 x 8, transformada ortogonal de 16 x 16 e 32 x 32 pode ser usada.

[0098] Como no esquema HEVC, no caso de um esquema de codificação no qual uma CU é definida e vários tipos de processos são realizados em unidades de CUs, no esquema AVC, pode ser considerado que um macrobloco corresponde a uma LCU, e pode ser considerado que um bloco (sub-bloco) corresponde a uma CU. Adicionalmente, no esquema AVC, pode ser considerado que um bloco de compensação de movimento corresponde a uma PU. Aqui, já que uma CU tem uma estrutura hierárquica, um tamanho de uma LCU de uma camada mais no topo é comumente definido para ser maior que um macrobloco no esquema AVC, por exemplo, tal como 128 x 128 pixels.

[0099] Assim, a seguir, considera-se que uma LCU inclui um macrobloco no esquema AVC, e considera-se que uma CU inclui um bloco (sub-bloco) no esquema AVC. Em outras palavras, um bloco usado na seguinte descrição indica uma área parcial arbitrária em uma figura e, por exemplo, um tamanho, uma forma e características destes não são limitados. Em outras palavras, um bloco inclui uma área arbitrária (uma unidade de

Petição 870160073535, de 07/12/2016, pág. 23/212 / 145 processamento), tais como uma TU, uma PU, uma SCU, uma CU, uma LCU, um sub-bloco, um macrobloco ou uma fatia. Certamente, também, um bloco inclui outras áreas parciais (unidades de processamento). Quando for necessário limitar um tamanho, uma unidade de processamento ou congêneres, isto será apropriadamente descrito.

<Seleção de Modo>

[00100] Neste particular, nos esquemas de codificação AVC e HEVC, a fim de alcançar alta eficiência de codificação, é importante selecionar um modo de previsão apropriado.

[00101] Como um exemplo de um método de seleção como este, há um método implementado no software de referência (encontrado em http://iphome.hhi.de/suehring/tml/index.htm) de H.264/MPEG-4 AVC chamado de um modelo em conjunto (JM).

[00102] No JM, como será descrito posteriormente, é possível selecionar dois métodos de determinação de modo, isto é, um modo de alta complexidade e um modo de baixa complexidade. Em ambos os modos, valores da função de custo relacionados aos respectivos modos de previsão são calculados, e um modo de previsão que tem um menor valor da função de custo é selecionado como um modo ideal para um correspondente bloco ou macrobloco.

[00103] Uma função de custo no modo de alta complexidade é representada como a seguinte Fórmula (1):

Custo(Modo e Ω) = D + λ * R ... (1) [00104] Aqui, Ω indica um conjunto universal de modos candidatos para codificação de um correspondente bloco ou macrobloco, e D indica energia diferencial entre uma imagem decodificada e uma imagem de entrada quando codificação for realizada em um correspondente modo de previsão. λ indica multiplicador de Lagrange indeterminado dado em função de um parâmetro de quantização. R indica uma quantidade de codificação total que

Petição 870160073535, de 07/12/2016, pág. 24/212 / 145 inclui um coeficiente de transformada ortogonal quando codificação for realizada em um modo correspondente.

[00105] Em outras palavras, a fim de realizar codificação no modo de alta complexidade, é necessário realizar um processo de codificação temporária uma vez por todos os modos candidatos a fim de calcular os parâmetros D e R e, assim, uma grande quantidade de computação é exigida.

[00106] Uma função de custo no modo de baixa complexidade é representada pela seguinte Fórmula (2):

Custo(Modo e Ω) = D + QP2Quant(QP) * HeaderBit ... (2) [00107] Aqui, D é diferente daquele do modo de alta complexidade e indica energia diferencial entre uma imagem de previsão e uma imagem de entrada. QP2Quant (QP) é dado em função de um parâmetro de quantização QP e HeaderBit indica uma quantidade de codificação relacionada a informação que pertence a um cabeçalho, tais como um vetor de movimento ou um modo que não inclui coeficiente de transformada ortogonal.

[00108] Em outras palavras, no modo de baixa complexidade, é necessário realizar um processo de previsão para respectivos modos candidatos, mas, já que uma imagem decodificada não é necessária, é desnecessário realizar um processo de codificação. Assim, é possível implementar uma quantidade de computação menor que aquela no modo de alta complexidade.

<Codificação de vídeo escalonável>

[00109] Neste particular, os esquemas de codificação de imagem existentes, tais como MPEG2 e AVC, têm uma função de escalonabilidade ilustrada nas figuras 2 a 4. Codificação de vídeo escalonável diz respeito a um esquema de divisão (hierarquização) de uma imagem em uma pluralidade de camadas e realização de codificação para cada camada.

[00110] Na hierarquização de uma imagem, uma imagem é dividida em uma pluralidade de imagens (camadas) com base em um certo parâmetro.

Petição 870160073535, de 07/12/2016, pág. 25/212 / 145

Basicamente, cada camada é configurada com dados diferenciais, de forma que redundância seja reduzida. Por exemplo, quando uma imagem for hierarquizada em duas camadas, isto é, uma camada base e uma camada de melhoria, uma imagem de uma qualidade inferior a uma imagem original é obtida usando apenas dados da camada base, e uma imagem original (isto é, uma imagem de alta qualidade) é obtida pela combinação dos dados da camada base com dados da camada de melhoria.

X [00111] À medida que uma imagem é hierarquizada, como exposto, é possível obter imagens de várias qualidades de acordo com a situação. Por exemplo, para um terminal que tem uma baixa capacidade de processamento, tal como um telefone celular, a informação de compressão de imagem de apenas uma camada base é transmitida, e uma imagem em movimento de baixas resoluções espacial e temporal ou uma baixa qualidade é reproduzida e, para um terminal que tem uma alta capacidade de processamento, tais como uma televisão ou um computador pessoal, a informação de compressão de imagem de uma camada de melhoria bem como uma camada base é transmitida, e uma imagem em movimento de altas resoluções espacial e temporal ou uma alta qualidade é reproduzida. Em outras palavras, a informação de compressão de imagem de acordo com uma capacidade de um terminal ou de uma rede pode ser transmitida a partir de um servidor sem realização do processo de transcodificação.

[00112] Como um parâmetro que tem escalonabilidade, por exemplo, há resolução espacial (escalonabilidade espacial), da forma ilustrada na figura 2. Quando a escalonabilidade espacial diferir, respectivas camadas têm diferentes resoluções. Em outras palavras, cada figura é hierarquizada em duas camadas, isto é, uma camada base de uma resolução espacialmente inferior àquela de uma imagem original e uma camada de melhoria que é combinada com uma imagem da camada base para obter uma imagem original (uma resolução espacial original), da forma ilustrada na figura 2.

Petição 870160073535, de 07/12/2016, pág. 26/212 / 145

Certamente, o número de camadas é um exemplo, e cada figura pode ser hierarquizada em um número arbitrário de camadas.

[00113] Como um outro parâmetro que tem tal escalonabilidade, por exemplo, há uma resolução temporal (escalonabilidade temporal), da forma ilustrada na figura 3. No caso da escalonabilidade temporal, respectivas camadas têm diferentes taxas de quadro. Em outras palavras, neste caso, cada figura é hierarquizada em camadas que têm diferentes taxas de quadro, uma imagem em movimento de uma alta taxa de quadro pode ser obtida pela combinação de uma camada de uma alta taxa de quadro com uma camada de uma baixa taxa de quadro e uma imagem em movimento original (uma taxa de quadro original) pode ser obtida pela combinação de todas as camadas, da forma ilustrada na figura 3. O número de camadas é um exemplo, e cada figura pode ser hierarquizada em um número arbitrário de camadas.

[00114] Adicionalmente, como um outro parâmetro que tem tal escalonabilidade, por exemplo, há uma razão de sinal por ruído (SNR) (escalonabilidade de SNR). No caso da escalonabilidade de SNR, há respectivas camadas que têm diferentes SNRs. Em outras palavras, neste caso, cada figura é hierarquizada em duas camadas, isto é, uma camada base de uma SNR inferior àquela de uma imagem original e uma camada de melhoria que é combinada com uma imagem da camada base para obter uma SNR original, da forma ilustrada na figura 4. Em outras palavras, para informação de compressão de imagem da camada base, a informação relacionada a uma imagem de uma baixa PSNR é transmitida, e uma imagem de alta PSNR pode ser reconstruída pela combinação da informação com a informação de compressão da imagem da camada de melhoria. Certamente, o número de camadas é um exemplo, e cada figura pode ser hierarquizada em um número arbitrário de camadas.

[00115] Um parâmetro diferente dos supra descritos exemplos pode ser aplicado como um parâmetro que tem escalonabilidade. Por exemplo, há

Petição 870160073535, de 07/12/2016, pág. 27/212 / 145 escalonabilidade com profundidade de bit na qual a camada base inclui uma imagem de 8 bits, e uma imagem de 10 bits pode ser obtida pela adição da camada de melhoria na camada base.

[00116] Adicionalmente, há escalonabilidade de croma na qual a camada base inclui uma imagem componente de um formato 4:2:0, e uma imagem componente de um formato 4:2:2 pode ser obtida pela adição da camada de melhoria na camada base.

[00117] Adicionalmente, como um parâmetro que tem escalonabilidade, há um multivisualizações. Neste caso, uma imagem é hierarquizada em camadas de diferentes visualizações.

[00118] Por exemplo, camadas descritas na presente modalidade incluem espacial, temporal, SNR, profundidade de bit, cor e visualização da codificação de vídeo com escalonabilidade supra descritas.

[00119] Adicionalmente, o termo camada usado nesta especificação inclui uma camada de codificação de vídeo escalonável e cada visualização quando multivisualizações de multivisualizações for considerada.

[00120] Adicionalmente, considera-se que o termo camada usado nesta especificação inclui uma camada principal (correspondente a subordinada) e uma subcamada. Como um exemplo específico, uma camada principal pode ser uma camada de escalonabilidade espacial e uma subcamada pode ser configurada com uma camada de escalonabilidade temporal.

[00121] Na presente modalidade, uma camada (Japonês) e uma camada têm o mesmo significado, e uma camada (Japonês) será apropriadamente descrita como uma camada.

<Parâmetro HRD>

[00122] Neste particular, em HEVC, quando o processo de decodificação da informação de compressão de imagem for realizado, é possível designar um parâmetro do Decodificador de Referência Hipotético (HDR) ilustrado na figura 5, de forma que nem sobrefluxo nem subfluxo de

Petição 870160073535, de 07/12/2016, pág. 28/212 / 145 um armazenamento temporário ocorram. Em outras palavras, o parâmetro HRD é um parâmetro usado para gerenciar um armazenamento temporário do decodificador. Particularmente, quando codificação de vídeo escalonável for realizada, é possível designar o parâmetro HRD para cada camada em um conjunto de parâmetro de vídeo (VPS).

<Processo paralelo da codificação de vídeo com escalonabilidade>

[00123] Em um exemplo da figura 6, dois exemplos (ex1 e ex2) que usam uma sequência que inclui uma figura I, uma figura b, uma figura B, uma figura b e uma figura B são ilustrados no lado esquerdo da figura 6 como um exemplo de escalonabilidade temporal. Nesta sequência, a figura I, a figura B e a figura B são uma camada de tempo inferior, e a figura b e a figura b são uma camada de tempo superior.

[00124] Aqui, a figura B indica uma figura que é referida, e a figura b indica uma figura que não é referida.

[00125] ex1 é um exemplo no qual todas as figuras são decodificadas por um dispositivo de decodificação n° 0. Por outro lado, ex2 é um exemplo no qual a camada de tempo inferior da figura I, da figura B e da figura B é decodificada pelo dispositivo de decodificação n° 0, e a camada de tempo superior da figura b e da figura b é decodificada por um dispositivo de decodificação n° 1.

[00126] No lado direito da figura 6, como um exemplo de HEVC escalonável, dois exemplos (ex11 e ex12) que usam uma sequência que inclui a figura I, a figura B e a figura B da EL (camada de melhoria) que serve como a camada superior e a figura I, a figura B e a figura B da BL (camada base) que serve como a camada inferior são ilustrados. O HEVC escalonável significa codificação de vídeo escalonável definida em HEVC.

[00127] ex11 é um exemplo no qual todas as figuras são decodificadas pelo dispositivo de decodificação n° 0. Por outro lado, ex12 é um exemplo no

Petição 870160073535, de 07/12/2016, pág. 29/212 / 145 qual a camada inferior da figura I, da figura B e da figura B da BL é decodificada pelo dispositivo de decodificação n° 0, e a camada superior da figura I, da figura B e da figura B da EL é decodificada pelo dispositivo de decodificação n° 1.

[00128] Para cada camada de HEVC escalonável, cada camada de tempo de escalonabilidade temporal no lado direito é configurada como uma subcamada.

[00129] Da forma supra descrita, na escalonabilidade temporal da tecnologia relacionada, em HEVC escalonável, um processo pode ser realizado por um único dispositivo de decodificação, e um processo paralelo pode ser realizado por uma pluralidade de dispositivos de decodificação. Adicionalmente, através da sintaxe da figura 5, é possível designar o parâmetro HRD que serve como o parâmetro usado para gerenciar o armazenamento temporário do decodificador para cada camada ou uma camada de tempo que é uma das subcamadas.

[00130] Entretanto, da forma ilustrada na figura 6, é difícil detectar se o processo de decodificação é realizado por um único dispositivo de decodificação ou uma pluralidade de dispositivos de decodificação.

[00131] Neste particular, na presente tecnologia, o parâmetro HRD é transmitido através da sintaxe ilustrada na figura 7. Em outras palavras, na presente tecnologia, a informação que indica se o parâmetro HRD é um parâmetro para realizar um processo de decodificação apenas em uma camada correspondente ou um parâmetro para realizar um processo de decodificação de uma camada correspondente e uma camada inferior é definida. Assim, da forma ilustrada na figura 6, é claramente definido se o processo de decodificação é realizado por um único dispositivo de decodificação ou uma pluralidade de dispositivos de decodificação e, assim, é possível realizar um processo de decodificação em um sincronismo apropriado.

<Exemplo do parâmetro HRD>

Petição 870160073535, de 07/12/2016, pág. 30/212 / 145 [00132] A figura 7 é um diagrama que ilustra um exemplo da sintaxe do parâmetro HRD de acordo com a presente tecnologia. Números na esquerda de cada linha são números de linha adicionados para descrição.

[00133] Em um exemplo da figura 7, hrd_parameters_type_flag é definido em uma 10^a linha. Quando um valor de hrd_parameters_type_flag for 1, um valor para realizar um processo de decodificação de apenas uma camada correspondente é definido como um parâmetro HRD de um parágrafo subsequente. Quando um valor de hrd_parameters_type_flag for 0, um valor para realizar um processo de decodificação de uma camada correspondente e uma camada inferior é definido como um parâmetro HRD de um parágrafo subsequente.

[00134] Adicionalmente, hrd_parameters_type_flag pode ser incluído em uma declaração se que começa a partir de uma 11a linha.

[00135] sub_hrd_parameters_type[i]_flag é definido em uma 25^a linha. Quando um valor de sub_hrd_parameters_type[i]_flag for 1, um valor para realizar um processo de decodificação de apenas uma correspondente camada de tempo é definido como um parâmetro HRD subordinado de um parágrafo subsequente. Quando um valor de hrd_parameters_type_flag for 0, um valor para realizar um processo de decodificação de uma correspondente camada de tempo e uma camada de tempo inferior é definido como um parâmetro HRD subordinado de um parágrafo subsequente.

[00136] A figura 7 ilustra o exemplo no qual a designação é realizada por qualquer um método (apenas uma camada correspondente está incluída ou uma camada inferior também está incluída) para cada camada e cada camada de tempo, mas a presente tecnologia não é limitada a este exemplo. Por exemplo, o parâmetro HRD no qual o parâmetro HRD é designado por ambos os métodos pode ser incluído.

<Outro exemplo do parâmetro HRD>

[00137] A figura 8 é um diagrama que ilustra um outro exemplo de

Petição 870160073535, de 07/12/2016, pág. 31/212 / 145 sintaxe do parâmetro HRD de acordo com a presente tecnologia. Números na esquerda de cada linha são números de linha adicionados para descrição. [00138] Em um exemplo da figura 8, hrd_parameters_type1 _present_flag é definido em uma 11^a linha. Quando um valor de hrd_parameters_type1 _present_flag for 1, um valor para realizar um processo de decodificação de apenas uma camada correspondente é definido como um parâmetro HRD do tipo 1 definido nas 13a até 24a linhas. Quando um valor de hrd_parameters_type1 _present_flag for 0, um valor para realizar um processo de decodificação de uma camada correspondente e uma camada inferior é definido como o parâmetro HRD do tipo 1.

[00139] hrd_parameters_type2_present_flag é definido em uma 12a linha. Quando um valor de hrd_parameters_type2_present_flag for 1, um valor para realizar um processo de decodificação de apenas uma camada correspondente é definido como um parâmetro HRD do tipo 2 definido nas 25a até 36a linhas. Quando um valor de hrd_parameters_type1 _present_flag for 0, um valor para realizar um processo de decodificação de uma camada correspondente e uma camada inferior é definido como o parâmetro HRD do tipo 2.

[00140] Similarmente ao exemplo supra descrito em relação à figura 7, os indicadores das 11a e 12a linhas podem ser descritos antes de uma declaração se que começa a partir de uma 10a linha.

[00141] sub_hrd_parameters_type1 _present_flag é definido em uma

40a linha. Quando um valor de sub_hrd_parameters_type1 _present_flag for 1, um valor para realizar um processo de decodificação de apenas uma correspondente camada de tempo é definido como um parâmetro HRD do tipo 1 definido nas 45a a 52a linhas. Quando um valor de sub_hrd_parameters_type1 _present_flag for 0, um valor para realizar um processo de decodificação de uma correspondente camada de tempo e uma camada de tempo inferior é definido como o parâmetro HRD do tipo 1.

Petição 870160073535, de 07/12/2016, pág. 32/212 / 145 [00142] sub_hrd_parameters_type2_present_flag é definido em uma

41^a linha. Quando um valor de sub_hrd_parameters_type2_present_flag for 1, um valor para realizar um processo de decodificação de apenas uma correspondente camada de tempo é definido como um parâmetro HRD do tipo 2 definido nas 53a até 60a linhas. Quando um valor de sub_hrd_parameters_type1 _present_flag for 0, um valor para realizar um processo de decodificação de uma correspondente camada de tempo e uma camada de tempo inferior é definido como um parâmetro HRD do tipo 2.

[00143] Da forma supra descrita, na presente tecnologia, os parâmetros do tipo 1 e do tipo 2 que servem como o parâmetro HRD para o processo de decodificação apenas da correspondente camada e o parâmetro HRD para o processo de decodificação da correspondente camada e da camada inferior são definidos no lado da codificação. Assim, o lado da decodificação pode selecionar o parâmetro de acordo com um dispositivo ou um fluxo contínuo de bits recebido.

[00144] Adicionalmente, quando a informação de compressão de imagem incluir apenas uma camada, isto é, uma camada de escalonabilidade ou uma camada de escalonabilidade temporal, hrd_parameter_type_flag e sub_hrd_parameter_type_flag podem ter qualquer valor, e o processo de decodificação não é afetado.

[00145] A seguir, a presente tecnologia será descrita em conexão com aplicações em um dispositivo específico. A título de conveniência de descrição, a seguinte descrição prosseguirá com um caso de ex12 de HEVC escalonável e ex1 de escalonabilidade temporal da figura 6. Aqui, a presente tecnologia não é limitada a este caso. Por exemplo, pode haver um caso de ex12 de HEVC escalonável e ex2 de escalonabilidade temporal na figura 6, um caso de ex11 de HEVC escalonável e ex2 de escalonabilidade temporal na figura 6, e um caso de ex11 de HEVC escalonável e ex1 de escalonabilidade temporal na figura 6.

Petição 870160073535, de 07/12/2016, pág. 33/212 / 145 <1. Primeira modalidade>

<Dispositivo de codificação escalonável>

[00146] A figura 10 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um dispositivo de codificação escalonável.

[00147] Um dispositivo de codificação escalonável 100 ilustrado na figura 10 codifica cada camada de dados de imagem hierarquizados em uma camada base e uma camada de melhoria.

[00148] O dispositivo de codificação escalonável 100 é configurado para incluir uma seção de codificação de imagem da camada base 101-1, uma seção de codificação de imagem da camada de melhoria 101-2 e uma seção de controle de codificação 102.

[00149] A seção de codificação de imagem da camada base 101-1 adquire informação de imagem (imagem da camada base informação) da camada base. A seção de codificação de imagem da camada base 101-1 codifica a informação de imagem da camada base sem relação a outras camadas, gera dados codificados (dados codificados da camada base) da camada base e transmite os dados codificados gerados.

[00150] A seção de codificação de imagem da camada de melhoria 101-2 adquire informação de imagem (imagem da camada de melhoria informação) da camada de melhoria. A seção de codificação de imagem da camada de melhoria 101-2 codifica a informação da imagem da camada de melhoria. Neste momento, a seção de codificação de imagem da camada de melhoria 101-2 realiza previsão intercamadas em relação à informação relacionada à codificação da camada base, conforme necessário.

[00151] Adicionalmente, a seção de codificação de imagem da camada de melhoria 101-2 define o tipo de parâmetro HRD para cada camada, e calcula o parâmetro HRD que serve como o parâmetro usado para gerenciar o armazenamento temporário do decodificador com base na informação do estado de um armazenamento temporário de acúmulo de acordo com o tipo de

Petição 870160073535, de 07/12/2016, pág. 34/212 / 145 parâmetro HRD definido. A seção de codificação de imagem da camada de melhoria 101-2 codifica o parâmetro HRD calculado.

[00152] Especificamente, o tipo de parâmetro HRD indica se o parâmetro HRD é o parâmetro para decodificação apenas de uma camada correspondente ou o parâmetro para realizar o processo de decodificação de uma camada correspondente e uma camada inferior. Este tipo pode definir ambos os parâmetros, bem como qualquer um dos parâmetros. O lado da codificação calcula o parâmetro HRD de acordo com o indicador (informação) que indica o tipo definido, e transmite o indicador que indica o tipo definido e o parâmetro HRD calculado para o lado da decodificação. A seguir, o indicador que indica o tipo de parâmetro HRD é apropriadamente referido como um indicador de tipo do parâmetro HRD.

[00153] Quando o indicador que indica o tipo de parâmetro HRD for 1, a seção de codificação de imagem da camada de melhoria 101-2 calcula o parâmetro HRD com base na informação do estado de seu próprio armazenamento temporário de acúmulo. Quando o indicador que indica o tipo de parâmetro HRD for 0, a seção de codificação de imagem da camada de melhoria 101-2 adquire informação do estado do armazenamento temporário de acúmulo integral da seção de codificação de imagem da camada base 1011, e calcula o parâmetro HRD com base na informação do estado da seção de codificação de imagem da camada base 101-1 e seu próprio armazenamento temporário de acúmulo. Este processo é realizado em uma camada e uma subcamada (camada de tempo). Na seção de codificação de imagem da camada base 101-1, este processo é realizado apenas na subcamada.

[00154] A seção de codificação de imagem da camada de melhoria 101-2 gera dados codificados (dados codificados da camada de melhoria) da camada de melhoria através da codificação exposta, e transmite os dados codificados gerados.

[00155] A seção de codificação de imagem da camada base 101-1 e a

Petição 870160073535, de 07/12/2016, pág. 35/212 / 145 seção de codificação de imagem da camada de melhoria 101-2 são apropriadamente referidas coletivamente como uma seção de codificação de imagem em camada 101.

[00156] A seção de controle de codificação 102 controla o processo de codificação das seções de codificação de imagem em camada 101, por exemplo, na visualização da relação de referência das seções de codificação de imagem em camada 101.

[00157] No exemplo da figura 10, uma seção de codificação de imagem da camada de melhoria 101-2 é ilustrada, mas quando houver uma camada superior, seções de codificação da imagem da camada de melhoria 101-3, 101-4, ... que codificam a camada superior são providas para cada uma das camadas superiores.

<Exemplo de configuração da seção de codificação de imagem em camada>

[00158] A figura 11 é um diagrama de blocos que ilustra um exemplo de uma configuração principal da seção de codificação de imagem da camada de melhoria 101-2. A seção de codificação de imagem da camada base 101-1 da figura 10 tem, basicamente, a mesma configuração da seção de codificação de imagem da camada de melhoria 101-2 da figura 11, exceto em que um tipo de uma imagem que serve como um alvo é diferente. A título de conveniência de descrição, no exemplo da figura 11, uma configuração da seção de codificação de imagem da camada de melhoria 101-2 será descrita como um exemplo.

[00159] Da forma ilustrada na figura 11, a seção de codificação de imagem da camada de melhoria 101-2 inclui uma seção de conversão A/D 111, um armazenamento temporário de reordenamento de tela 112, uma seção de operação 113, uma seção de transformada ortogonal 114, uma seção de quantização 115, uma seção de codificação sem perdas 116, um armazenamento temporário de acúmulo 117, uma seção de quantização

Petição 870160073535, de 07/12/2016, pág. 36/212 / 145 inversa 118 e uma seção de transformada ortogonal inversa 119. A seção de codificação de imagem da camada de melhoria 101-2 inclui adicionalmente uma seção de operação 120, um filtro em laço 121, uma memória de quadro 122, uma seção de seleção 123, uma seção de intraprevisão 124, uma seção de previsão / compensação de movimento 125, uma seção de seleção de imagem previsiva 126 e uma seção de controle de taxa 127. A seção de codificação de imagem da camada de melhoria 101-2 inclui adicionalmente uma seção de definição do tipo de HRD 128.

[00160] A seção de conversão A/D 111 realiza conversão A/D nos dados da imagem de entrada (a informação da imagem da camada de melhoria), e supre os dados de imagem convertidos (dados digitais) para serem armazenados no armazenamento temporário de reordenamento de tela 112. O armazenamento temporário de reordenamento de tela 112 reordena imagens de quadros armazenadas em uma ordem de exibição em uma ordem de quadro para codificação de acordo com um Grupo De Figuras (GOP), e supre as imagens nas quais a ordem de quadro é reordenada para a seção de operação 113. O armazenamento temporário de reordenamento de tela 112 também supre as imagens nas quais a ordem de quadro é reordenada para a seção de intraprevisão 124 e a seção de previsão / compensação de movimento 125.

[00161] A seção de operação 113 subtrai uma imagem previsiva suprida a partir da seção de intraprevisão 124 ou da seção de previsão / compensação de movimento 125 por meio da seção de seleção de imagem previsiva 126 de uma imagem lida a partir do armazenamento temporário de reordenamento de tela 112, e transmite informação diferencial desta para a seção de transformada ortogonal 114. Por exemplo, no caso de uma imagem que foi sujeita a intracodificação, a seção de operação 113 subtrai a imagem previsiva suprida a partir da seção de intraprevisão 124 da imagem lida a partir do armazenamento temporário de reordenamento de tela 112.

Petição 870160073535, de 07/12/2016, pág. 37/212 / 145

Adicionalmente, por exemplo, no caso de uma imagem que foi sujeita a intercodificação, a seção de operação 113 subtrai a imagem previsiva suprida a partir da seção de previsão / compensação de movimento 125 da imagem lida a partir do armazenamento temporário de reordenamento de tela 112. [00162] A seção de transformada ortogonal 114 realiza uma transformada ortogonal, tais como uma transformada discreta de cosseno ou uma transformada Karhunen-Loève, na informação diferencial suprida a partir da seção de operação 113. A seção de transformada ortogonal 114 supre coeficientes de transformada para a seção de quantização 115.

[00163] A seção de quantização 115 quantiza os coeficientes de transformada supridos a partir da seção de transformada ortogonal 114. A seção de quantização 115 define um parâmetro de quantização com base na informação relacionada a um valor alvo de uma quantidade de codificação suprido a partir da seção de controle de taxa 127, e realiza a quantização. A seção de quantização 115 supre os coeficientes de transformada quantizados para a seção de codificação sem perdas 116.

[00164] A seção de codificação sem perdas 116 codifica os coeficientes de transformada quantizados na seção de quantização 115 de acordo com um esquema de codificação arbitrário. Já que dados de coeficiente são quantizados sob controle da seção de controle de taxa 127, a quantidade de codificação torna-se um valor alvo (ou se aproxima de um valor alvo) definido pela seção de controle de taxa 127.

[00165] A seção de codificação sem perdas 116 adquire informação que indica um modo de intraprevisão ou congêneres a partir da seção de intraprevisão 124, e adquire informação que indica um modo de interprevisão, a informação do vetor de movimento diferencial ou congêneres a partir da seção de previsão / compensação de movimento 125. Adicionalmente, a seção de codificação sem perdas 116 gera apropriadamente uma unidade NAL da camada de melhoria que inclui um conjunto de parâmetro de sequência (SPS),

Petição 870160073535, de 07/12/2016, pág. 38/212 / 145 um conjunto de parâmetro de figura (PPS) e congêneres.

[00166] A seção de codificação sem perdas 116 codifica vários tipos de informação de acordo com um esquema de codificação arbitrário, e define (multiplexa) a informação codificada como parte de dados codificados (também referido como um fluxo contínuo codificado). A seção de codificação sem perdas 116 supre os dados codificados obtidos pela codificação para serem acumulados no armazenamento temporário de acúmulo 117.

[00167] Exemplos do esquema de codificação da seção de codificação sem perdas 116 incluem codificação de comprimento variável e codificação aritmética. Como a codificação de comprimento variável, por exemplo, há Codificação de Comprimento Variável Adaptável ao Contexto (CAVLC) definida no esquema H.264/AVC. Como a codificação aritmética, por exemplo, há Codificação Aritmética Binária Adaptável ao Contexto (CABAC).

[00168] O armazenamento temporário de acúmulo 117 mantém temporariamente os dados codificados (dados codificados da camada de melhoria) supridos a partir da seção de codificação sem perdas 116. O armazenamento temporário de acúmulo 117 transmite os dados codificados da camada de melhoria mantidos para um dispositivo de gravação (mídia de gravação), um caminho de transmissão ou congêneres (não ilustrados) em um estágio subsequente em um certo sincronismo. Em outras palavras, o armazenamento temporário de acúmulo 117 serve como uma seção de transmissão que também transmite os dados codificados. Adicionalmente, quando houver uma solicitação proveniente da seção de definição do tipo de HRD 128, o armazenamento temporário de acúmulo 117 supre informação que indica um estado do armazenamento temporário de acúmulo 117. Adicionalmente, por exemplo, quando houver uma seção de codificação de imagem da camada de melhoria 101-3 de uma camada superior, e houver uma

Petição 870160073535, de 07/12/2016, pág. 39/212 / 145 solicitação proveniente de sua seção de definição do tipo de HRD 128, da forma indicada por uma linha pontilhada, o armazenamento temporário de acúmulo 117 supre a informação que indica o estado do armazenamento temporário de acúmulo 117 para a seção de codificação de imagem da camada de melhoria 101-3 da camada superior.

[00169] Os coeficientes de transformada quantizados pela seção de quantização 115 também são supridos para a seção de quantização inversa 118. A seção de quantização inversa 118 quantiza inversamente os coeficientes de transformada quantizados de acordo com um método correspondente à quantização realizada pela seção de quantização 115. A seção de quantização inversa 118 supre os coeficientes de transformada obtidos para a seção de transformada ortogonal inversa 119.

[00170] A seção de transformada ortogonal inversa 119 realiza uma transformada ortogonal inversa nos coeficientes de transformada supridos a partir da seção de quantização inversa 118 de acordo com um método correspondente ao processo de transformada ortogonal realizado pela seção de transformada ortogonal 114. Uma saída (informação diferencial restaurada) que foi sujeita à transformada ortogonal inversa é suprida para a seção de operação 120.

[00171] A seção de operação 120 obtém uma imagem localmente decodificada (uma imagem decodificada) pela adição da imagem previsiva suprida a partir da seção de intraprevisão 124 ou da seção de previsão / compensação de movimento 125 por meio da seção de seleção de imagem previsiva 126 na informação diferencial restaurada que serve como um resultado da transformada ortogonal inversa suprido a partir da seção de transformada ortogonal inversa 119. A imagem decodificada é suprida para o filtro em laço 121 ou a memória de quadro 122.

[00172] O filtro em laço 121 inclui um filtro de desbloqueio, um filtro de deslocamento adaptativo, um filtro em laço adaptativo ou congêneres, e

Petição 870160073535, de 07/12/2016, pág. 40/212 / 145 realiza apropriadamente um processo de filtro na imagem reconstruída suprida a partir da seção de operação 120. Por exemplo, o filtro em laço 121 realiza o processo de filtro de desbloqueio na imagem reconstruída, e remove distorção de bloco da imagem reconstruída. Adicionalmente, por exemplo, o filtro em laço 121 melhora a qualidade da imagem pela realização do processo de filtro em laço no resultado do processo de filtro de desbloqueio (a imagem reconstruída da qual a distorção de bloco foi removida) usando um filtro Wiener. O filtro em laço 121 supre o resultado do processo de filtro (a seguir, referida como uma imagem decodificada) para a memória de quadro 122.

[00173] O filtro em laço 121 pode realizar adicionalmente qualquer outro processo de filtro arbitrário na imagem reconstruída. O filtro em laço 121 pode suprir informação usada no processo de filtro, tal como um coeficiente de filtro, para a seção de codificação sem perdas 116, conforme necessário, de forma que a informação possa ser codificada.

[00174] A memória de quadro 122 armazena a imagem reconstruída suprida a partir da seção de operação 120 e a imagem decodificada suprida a partir do filtro em laço 121. A memória de quadro 122 supre a imagem reconstruída armazenada para a seção de intraprevisão 124 por meio da seção de seleção 123 em um certo sincronismo ou com base em uma solicitação externa, por exemplo, proveniente da seção de intraprevisão 124. Adicionalmente, a memória de quadro 122 supre a imagem decodificada armazenada para a seção de previsão / compensação de movimento 125 por meio da seção de seleção 123 em um certo sincronismo ou com base em uma solicitação externa, por exemplo, proveniente da seção de previsão / compensação de movimento 125.

[00175] A memória de quadro 122 armazena a imagem decodificada suprida, e supre a imagem decodificada armazenada para a seção de seleção 123 como uma imagem de referência em um certo sincronismo.

[00176] A seção de seleção 123 seleciona um destino de suprimento da

Petição 870160073535, de 07/12/2016, pág. 41/212 / 145 imagem de referência suprida a partir da memória de quadro 122. Por exemplo, no caso da intraprevisão, a seção de seleção 123 supre a imagem de referência (um valor de pixel de uma figura atual) suprida a partir da memória de quadro 122 para a seção de previsão / compensação de movimento 125. Adicionalmente, por exemplo, no caso da interprevisão, a seção de seleção 123 supre a imagem de referência suprida a partir da memória de quadro 122 para a seção de previsão / compensação de movimento 125.

[00177] A seção de intraprevisão 124 realiza a intraprevisão (previsão intratela) para gerar a imagem previsiva usando o valor de pixel da figura atual que serve como a imagem de referência suprida a partir da memória de quadro 122 por meio da seção de seleção 123. A seção de intraprevisão 124 realiza a intraprevisão em uma pluralidade de modos de intraprevisão que são preparados antecipadamente.

[00178] A seção de intraprevisão 124 gera imagens previsivas em todos os modos de intraprevisão que servem como os candidatos, avalia valores da função de custo das imagens previsivas usando a imagem de entrada suprida a partir do armazenamento temporário de reordenamento de tela 112 e seleciona um modo ideal. Quando o modo de intraprevisão ideal for selecionado, a seção de intraprevisão 124 supre a imagem previsiva gerada no modo ideal para a seção de seleção de imagem previsiva 126.

[00179] Da forma supra descrita, a seção de intraprevisão 124 supre apropriadamente, por exemplo, a informação do modo de intraprevisão que indica o modo de intraprevisão empregado para a seção de codificação sem perdas 116 de forma que a informação seja codificada.

[00180] A seção de previsão / compensação de movimento 125 realiza a previsão de movimento (a interprevisão) usando a imagem de entrada suprida a partir do armazenamento temporário de reordenamento de tela 112 e a imagem de referência suprida a partir da memória de quadro 122 por meio da seção de seleção 123. Embora não ilustrado, na seção de previsão /

Petição 870160073535, de 07/12/2016, pág. 42/212 / 145 compensação de movimento 125, a imagem de referência suprida a partir da memória de quadro 122 da seção de codificação de imagem da camada base 101-1 também é referida conforme necessário. A seção de previsão / compensação de movimento 125 realiza um processo de compensação de movimento de acordo com um vetor de movimento detectado, e gera uma imagem previsiva (informação de imagem interprevisiva). A seção de previsão / compensação de movimento 125 realiza a interprevisão em uma pluralidade de modos de interprevisão que são preparados antecipadamente. [00181] A seção de previsão / compensação de movimento 125 gera imagens previsivas em todos os modos de interprevisão que servem como um candidato. A seção de previsão / compensação de movimento 125 avalia valores da função de custo das imagens previsivas usando a imagem de entrada suprida a partir do armazenamento temporário de reordenamento de tela 112, a informação do vetor de movimento diferencial gerado e congêneres, e seleciona um modo ideal. Quando o modo de interprevisão ideal for selecionado, a seção de previsão / compensação de movimento 125 supre a imagem previsiva gerada no modo ideal para a seção de seleção de imagem previsiva 126.

[00182] A seção de previsão / compensação de movimento 125 supre informação que indica o modo de interprevisão empregado, a informação necessária para realizar processamento no modo de interprevisão quando os dados codificados forem decodificados e congêneres para a seção de codificação sem perdas 116, de forma que a informação seja codificada. Por exemplo, como a informação necessária, há informação de um vetor de movimento diferencial gerado e, como informação do vetor de movimento de previsão, há um indicador que indica um índice de um vetor de movimento de previsão.

[00183] A seção de seleção de imagem previsiva 126 seleciona uma fonte de suprimento da imagem de previsão a ser suprida para a seção de

Petição 870160073535, de 07/12/2016, pág. 43/212 / 145 operação 113 e a seção de operação 120. Por exemplo, no caso do intracodificação, a seção de seleção de imagem previsiva 126 seleciona a seção de intraprevisão 124 como a fonte de suprimento da imagem previsiva, e supre a imagem previsiva suprida a partir da seção de intraprevisão 124 para a seção de operação 113 e a seção de operação 120. Por exemplo, no caso da intercodificação, a seção de seleção de imagem previsiva 126 seleciona a seção de previsão / compensação de movimento 125 como a fonte de suprimento da imagem previsiva, e supre a imagem previsiva suprida a partir da seção de previsão / compensação de movimento 125 para a seção de operação 113 e a seção de operação 120.

[00184] A seção de controle de taxa 127 controla uma taxa de uma operação de quantização da seção de quantização 115 com base na quantidade de codificação dos dados codificados acumulados no armazenamento temporário de acúmulo 117, de maneira tal que nenhum sobrefluxo ou subfluxo ocorram.

[00185] A seção de definição do tipo de HRD 128 decide o tipo de parâmetro HRD de acordo com a instrução do usuário, e adquire informação que indica um estado de acúmulo a partir do armazenamento temporário de acúmulo 117 ou do armazenamento temporário de acúmulo (a camada inferior) 117 da seção de codificação de imagem da camada base 101-1 de acordo com o tipo de parâmetro HRD decidido. A seção de definição do tipo de HRD 128 calcula o parâmetro HRD com base na informação adquirida, e faz com que a seção de codificação sem perdas 116 codifique o indicador que indica o tipo de parâmetro HRD e o parâmetro HRD.

[00186] Adicionalmente, quando a informação de compressão de imagem (dados codificados) a ser transmitida incluir uma camada, o valor do indicador que indica o tipo de parâmetro HRD é arbitrário, e não afeta o processo no lado da decodificação.

<Exemplo de configuração do armazenamento temporário de

Petição 870160073535, de 07/12/2016, pág. 44/212 / 145 acúmulo e da seção de definição do tipo de HRD>

[00187] A figura 12 é um diagrama de blocos que ilustra um exemplo de uma configuração do armazenamento temporário de acúmulo e da seção de definição do tipo de HRD da figura 11.

[00188] Em um exemplo da figura 12, o armazenamento temporário de acúmulo 117 é configurado para incluir um armazenamento temporário de acúmulo parcial 131 e um armazenamento temporário de acúmulo integral 132.

[00189] A seção de definição do tipo de HRD 128 é configurada para incluir uma seção de cálculo do parâmetro HRD da camada 141, uma seção de cálculo do parâmetro HRD da camada no tempo 142, uma seção de definição do tipo de parâmetro HRD 143 e uma seção de definição do tipo de parâmetro HRD no tempo 144.

[00190] O armazenamento temporário de acúmulo parcial 131 é configurado com cada armazenamento temporário de acúmulo que acumula dados codificados relacionados a cada camada de tempo superior dentre os dados codificados (códigos) acumulados no armazenamento temporário de acúmulo integral 132. A informação que indica o estado de cada armazenamento temporário de acúmulo é suprida para a seção de cálculo do parâmetro HRD da camada no tempo 142 sob solicitação.

[00191] O armazenamento temporário de acúmulo integral 132 acumula os dados codificados (códigos), codificados pela seção de codificação sem perdas 116. Adicionalmente, a informação que indica um estado do armazenamento temporário de acúmulo integral 132 é suprida para a seção de cálculo do parâmetro HRD da camada 141 e a seção de cálculo do parâmetro HRD da camada no tempo 142 sob solicitação. Adicionalmente, há casos em que há a seção de codificação de imagem da camada de melhoria 101-3 da camada superior, da forma indicada por uma linha pontilhada. Neste caso, a informação que indica o estado do armazenamento temporário de

Petição 870160073535, de 07/12/2016, pág. 45/212 / 145 acúmulo integral 132 também é suprida para a seção de definição do tipo de HRD (camada superior) 128 de acordo com a solicitação da seção de definição do tipo de HRD (camada superior) 128 da seção de codificação de imagem da camada de melhoria 101-3.

[00192] A seção de cálculo do parâmetro HRD da camada 141 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 132 e a informação que indica o estado do armazenamento temporário de acúmulo (a camada inferior) 117 da seção de codificação de imagem da camada base 101-1 de acordo com o tipo de parâmetro HRD (indicador) suprido a partir da seção de definição do tipo de parâmetro HRD 143. Na prática, a informação é adquirida a partir do armazenamento temporário de acúmulo integral 132 do armazenamento temporário de acúmulo da seção de codificação de imagem da camada base 101-1.

[00193] Quando o indicador do tipo de parâmetro HRD indicar 1, a informação que indica o estado do armazenamento temporário de acúmulo integral 132 é adquirida. Quando o indicador do tipo de parâmetro HRD indicar 0, a informação que indica o estado do armazenamento temporário de acúmulo integral 132 e a informação que indica o estado do armazenamento temporário de acúmulo (a camada inferior) 117 da seção de codificação de imagem da camada base 101-1 são adquiridas.

[00194] A seção de cálculo do parâmetro HRD da camada 141 calcula um parâmetro HRD da camada com base no indicador do tipo de parâmetro HRD suprido a partir da seção de definição do tipo de parâmetro HRD 143 e na informação adquirida, e supre o parâmetro HRD da camada calculado para a seção de codificação sem perdas 116.

[00195] A seção de cálculo do parâmetro HRD da camada no tempo 142 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 132 e a informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo a

Petição 870160073535, de 07/12/2016, pág. 46/212 / 145 partir do armazenamento temporário de acúmulo parcial 131 de acordo com o tipo de parâmetro HRD subordinado (indicador) suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144.

[00196] Quando o indicador do tipo de parâmetro HRD subordinado indicar 1, a informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 131 é adquirida. Quando o indicador do tipo de parâmetro HRD subordinado indicar 0, a informação que indica o estado do armazenamento temporário de acúmulo integral 132 e a informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 131 são adquiridas.

[00197] A seção de cálculo do parâmetro HRD da camada no tempo 142 calcula um parâmetro HRD da camada no tempo com base no tipo de parâmetro HRD subordinado suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144 e na informação adquirida, e supre o parâmetro HRD da camada no tempo calculado para a seção de codificação sem perdas 116.

[00198] A seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD de acordo com a instrução do usuário, e supre o indicador que indica o tipo de parâmetro HRD definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada 141.

[00199] A seção de definição do tipo de parâmetro HRD no tempo 144 define o tipo de parâmetro HRD subordinado de acordo com a instrução do usuário, e supre um indicador que indica o tipo de parâmetro HRD subordinado definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada no tempo 142.

[00200] A seção de codificação sem perdas 116 codifica o indicador

Petição 870160073535, de 07/12/2016, pág. 47/212 / 145 que indica o tipo de parâmetro HRD suprido a partir da seção de definição do tipo de parâmetro HRD 143 e o parâmetro HRD da camada suprido a partir da seção de cálculo do parâmetro HRD da camada 141, e define a informação codificada como informação de cabeçalho dos dados codificados. A seção de codificação sem perdas 116 codifica o indicador que indica o tipo de parâmetro HRD subordinado suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144 e o parâmetro HRD da camada no tempo suprido a partir da seção de cálculo do parâmetro HRD da camada no tempo 142, e define a informação codificada como a informação de cabeçalho dos dados codificados. Os dados codificados são transmitidos para o armazenamento temporário de acúmulo integral 132.

<Estrutura de camada>

[00201] Na codificação de vídeo escalonável, dados de imagem são hierarquizados em uma pluralidade de camadas da forma supra descrita em relação às figuras 2 a 4. A seguir, a título de descrição, esta camada é referida como uma camada principal.

[00202] Um grupo de figura de cada camada principal configura uma sequência na camada principal. As figuras na sequência formam uma estrutura hierárquica (uma estrutura GOP), da forma ilustrada na figura 13, similarmente aos dados da imagem em movimento de uma única camada principal. A seguir, a título de descrição, uma camada em uma camada principal é referida como uma subcamada.

[00203] No exemplo da figura 13, uma camada principal é configurada com duas camadas, isto é, uma camada base (BaseLayer) e uma camada de melhoria (EnhLayer). A camada base é uma camada na qual uma imagem é formada apenas por sua própria camada principal sem depender de outras camadas principais. Dados da camada base são codificados e decodificados sem relação a outras camadas principais. A camada de melhoria é uma camada principal que é combinada com dados da camada base para obter uma

Petição 870160073535, de 07/12/2016, pág. 48/212 / 145 imagem. Dados da camada de melhoria podem ser usados por um processo de previsão (um processo de interprevisão da camada principal) (que também é referida como previsão intercamadas) com uma correspondente camada base.

[00204] O número de camadas principais dos dados codificados hierarquizados pela codificação de vídeo escalonável é arbitrário. A seguir, considera-se que cada camada principal é definida como uma camada base ou uma camada de melhoria e, em cada camada de melhoria, considera-se que qualquer uma camada base é definida como um destino de referência.

[00205] No exemplo da figura 13, cada uma da camada base e da camada de melhoria tem uma estrutura GOP configurada com três subcamadas, isto é, uma subcamada 0 (SublayerO), uma subcamada 1 (Sublayerl) e uma subcamada 2 (Sublayer2). Um quadrado ilustrado na figura 13 indica uma figura, e um caractere no quadrado indica um tipo de uma figura. Por exemplo, um quadrado no qual I é gravado indica uma figura I, um quadrado no qual B é gravado indica uma figura B que é referível e um quadrado no qual b é gravado indica uma figura B que não é referida. Adicionalmente, uma linha pontilhada entre quadrados indica uma relação de dependência (uma relação de referência). Da forma indicada por linhas pontilhadas individuais, uma figura de uma subcamada superior depende de uma figura de uma subcamada inferior. Em outras palavras, a figura da subcamada 1 ou a figura da subcamada 0 são referidas pela figura da subcamada 2 (Sublayer2). Adicionalmente, a figura da subcamada 0 é referida pela figura da subcamada 1. A figura da subcamada 0 é apropriadamente referida pela figura da subcamada 0.

[00206] O número de subcamadas (um número da subcamada) é arbitrário. A estrutura GOP também é arbitrária, e não limitada ao exemplo da figura 13.

[00207] Aqui, uma relação de correspondência com a presente

Petição 870160073535, de 07/12/2016, pág. 49/212 / 145 modalidade será descrita. Dados codificados de todas as figuras da camada de melhoria são acumulados no armazenamento temporário de acúmulo integral 132 da figura 12.

[00208] O armazenamento temporário de acúmulo parcial 131 da figura 12 inclui um armazenamento temporário de acúmulo da subcamada 1 e um armazenamento temporário de acúmulo da subcamada 2. Em outras palavras, por exemplo, dados codificados das figuras B da subcamada 1 indicados por B2, B4 e B6 na camada de melhoria da figura 13 são acumulados no armazenamento temporário de acúmulo da subcamada 1. Dados codificados das figuras B da subcamada 2 indicados por b1, b3, b5 e b7 na camada de melhoria são acumulados no armazenamento temporário de acúmulo da subcamada 2.

[00209] Adicionalmente, dados codificados de todas as figuras da camada base da figura 13 são acumulados no (no armazenamento temporário de acúmulo integral 132 do) armazenamento temporário de acúmulo 117 da seção de codificação de imagem da camada base 101-1 ilustrado na figura 12, e informação que indica o estado do armazenamento temporário é suprida para a seção de cálculo do parâmetro HRD da camada 141 como informação que indica um estado do armazenamento temporário de acúmulo integral da camada inferior.

[00210] Adicionalmente, embora não ilustrado, o armazenamento temporário de acúmulo parcial 131 do armazenamento temporário de acúmulo 117 da seção de codificação de imagem da camada base 101-1 inclui um armazenamento temporário de acúmulo da subcamada 1 e um armazenamento temporário de acúmulo da subcamada 2. Em outras palavras, por exemplo, dados codificados das figuras B da subcamada 1 indicados por B2, B4 e B6 na camada base da figura 13 são acumulados no armazenamento temporário de acúmulo da subcamada 1. Dados codificados das figuras B da subcamada 2 indicados por b1, b3, b5 e b7 na camada base são acumulados no

Petição 870160073535, de 07/12/2016, pág. 50/212 / 145 armazenamento temporário de acúmulo da subcamada 2.

<Fluxo do processo de codificação>

[00211] A seguir, o fluxo do processo realizado pelo dispositivo de codificação escalonável 100 será descrito. Primeiro, um exemplo do fluxo de um processo de codificação será descrito em relação a um fluxograma da figura 14.

[00212] Quando o processo de codificação iniciar, na etapa S101, a seção de controle de codificação 102 do dispositivo de codificação escalonável 100 decide uma camada de um alvo de processamento na visualização da relação de referência de uma imagem ou congêneres.

[00213] Na etapa S102, a seção de codificação de imagem da camada base 101-1 realiza um processo de codificação de camada sob controle da seção de controle de codificação 102. O processo de codificação de camada será descrito a seguir em relação à figura 15. Quando o processo da etapa S102 terminar, o processo prossegue para a etapa S103.

[00214] Na etapa S103, a seção de controle de codificação 102 determina se todas as camadas principais foram processadas ou não. Quando for determinado que há uma camada principal não processada, o processo prossegue para a etapa S104.

[00215] Na etapa S104, a seção de controle de codificação 102 define uma próxima camada principal não processada como um alvo de processamento (camada principal atual). Quando o processo da etapa S104 terminar, o processo retorna para a etapa S102. Na etapa S102, a seção de codificação de imagem da camada de melhoria 101-2 realiza o processo de codificação de camada sob controle da seção de controle de codificação 102. O processo das etapas S102 até S104 é repetidamente realizado para codificar as camadas principais, como exposto. O processo da etapa S102 pode ser processado em paralelo por uma pluralidade de seções de codificação de imagem em camada 101 que não têm relação de referência.

Petição 870160073535, de 07/12/2016, pág. 51/212 / 145 [00216] Então, quando for determinado que todas as camadas principais foram processadas na etapa S103, o processo de codificação termina.

<Fluxo do processo de codificação de camada>

[00217] A seguir, o processo de codificação de camada da etapa S102 da figura 14 será descrito em relação a um fluxograma da figura 15. Um exemplo da figura 15 será descrito em conexão com um exemplo da seção de codificação de imagem da camada de melhoria 101-2.

[00218] Na etapa S111, a seção de conversão A/D 111 da seção de codificação de imagem da camada de melhoria 101-2 realiza conversão A/D na informação de imagem de entrada (dados de imagem) da camada de melhoria. Na etapa S112, o armazenamento temporário de reordenamento de tela 112 armazena informação de imagem (dados digitais) da camada de melhoria que foi sujeita à conversão A/D, e reordena as figuras arranjadas na ordem de exibição na ordem da codificação.

[00219] Na etapa S113, a seção de intraprevisão 124 realiza o processo de intraprevisão no modo de intraprevisão. Na etapa S114, a seção de previsão / compensação de movimento 125 realiza um processo de interprevisão de movimento no qual previsão de movimento e compensação de movimento no modo de interprevisão são realizadas. Na etapa S115, a seção de seleção de imagem previsiva 126 decide um modo ideal com base nos valores da função de custo transmitidos a partir da seção de intraprevisão 124 e da seção de previsão / compensação de movimento 125. Em outras palavras, a seção de seleção de imagem previsiva 126 seleciona tanto a imagem previsiva gerada pela seção de intraprevisão 124 quanto a imagem previsiva gerada pela seção de previsão / compensação de movimento 125. Na etapa S116, a seção de operação 113 calcula uma diferença entre a imagem reordenada no processo da etapa S112 e a imagem previsiva selecionada no processo da etapa S115. Os dados diferenciais são menores em uma

Petição 870160073535, de 07/12/2016, pág. 52/212 / 145 quantidade de dados do que os dados da imagem original. Assim, é possível comprimir uma quantidade de dados para ficar menor do que quando uma imagem for codificada sem mudança.

[00220] Na etapa S117, a seção de transformada ortogonal 114 realiza o processo de transformada ortogonal na informação diferencial gerada no processo da etapa S116. Na etapa S118, a seção de quantização 115 quantiza os coeficientes de transformada ortogonal obtidos no processo da etapa S117 usando o parâmetro de quantização calculado pela seção de controle de taxa 127.

[00221] A informação diferencial quantizada no processo da etapa S118 é localmente decodificada como segue. Em outras palavras, na etapa S119, a seção de quantização inversa 118 realiza quantização inversa nos coeficientes quantizados (que também são referidos como coeficientes de quantização), quantizados no processo da etapa S118 de acordo com características correspondentes às características da seção de quantização 115. Na etapa S120, a seção de transformada ortogonal inversa 119 realiza a transformada ortogonal inversa nos coeficientes de transformada ortogonal obtidos no processo da etapa S117. Na etapa S121, a seção de operação 120 gera uma imagem localmente decodificada (uma imagem correspondente a uma entrada da seção de operação 113) pela adição da imagem previsiva na informação diferencial localmente decodificada.

[00222] Na etapa S122, o filtro em laço 121 realiza filtragem na imagem gerada no processo da etapa S121. Em decorrência disto, por exemplo, distorção de bloco é removida. Na etapa S123, a memória de quadro 122 armazena a imagem na qual, por exemplo, a distorção de bloco foi deletada no processo da etapa S122. A imagem que não for sujeita ao processo de filtro realizado pelo filtro em laço 121 também é suprida a partir da seção de operação 120 e armazenada na memória de quadro 122. A imagem armazenada na memória de quadro 122 é usada no processo da etapa

Petição 870160073535, de 07/12/2016, pág. 53/212 / 145

S113 ou no processo da etapa S114.

[00223] Na etapa S124, a seção de definição do tipo de HRD 128 realiza um processo de codificação do parâmetro HRD. O processo de codificação do parâmetro HRD será descrito a seguir em relação à figura 16 e, através deste processo, o indicador que indica o tipo de parâmetro HRD e o parâmetro HRD são supridos para a seção de codificação sem perdas 116.

[00224] Na etapa S125, a seção de codificação sem perdas 116 codifica os coeficientes quantizados no processo da etapa S118. Em outras palavras, codificação sem perdas, tais como codificação de comprimento variável ou codificação aritmética, é realizada nos dados correspondentes à imagem diferencial.

[00225] Neste momento, a seção de codificação sem perdas 116 codifica informação relacionada ao modo de previsão da imagem previsiva selecionada no processo da etapa S115 e adiciona a informação codificada nos dados codificados obtidos pela codificação da imagem diferencial. Em outras palavras, a seção de codificação sem perdas 116 também codifica, por exemplo, a informação de acordo com a informação do modo de intraprevisão ideal suprida a partir da seção de intraprevisão 124 ou do modo de interprevisão ideal suprida a partir da seção de previsão / compensação de movimento 125, e adiciona a informação codificada nos dados codificados. Adicionalmente, a seção de codificação sem perdas 116 também codifica informação, tal como um indicador que indica o tipo de parâmetro HRD e o parâmetro HRD, suprida no processo da etapa S124, e adiciona a informação codificada nos dados codificados.

[00226] Na etapa S126, o armazenamento temporário de acúmulo 117 acumula os dados codificados da camada de melhoria obtidos no processo da etapa S125. Os dados codificados da camada de melhoria acumulados no armazenamento temporário de acúmulo 117 são apropriadamente lidos e transmitidos para o lado da decodificação por meio de um caminho de

Petição 870160073535, de 07/12/2016, pág. 54/212 / 145 transmissão ou uma mídia de gravação.

[00227] Na etapa S127, a seção de controle de taxa 127 controla a operação de quantização da seção de quantização 115 com base na quantidade de codificação (a quantidade de codificação gerada) dos dados codificados acumulados no armazenamento temporário de acúmulo 117 no processo da etapa S126, de forma que nenhum sobrefluxo ou subfluxo ocorram. Adicionalmente, a seção de controle de taxa 127 supre informação relacionada ao parâmetro de quantização para a seção de quantização 115.

[00228] Quando o processo da etapa S127 terminar, o processo de codificação termina, e o processo retorna para a etapa S102 da figura 14.

<Fluxo do processo de codificação do parâmetro HRD> [00229] A seguir, um exemplo de codificação do parâmetro HRD ilustrado na figura 7 será descrito em relação a um fluxograma da figura 16. [00230] Na etapa S131, a seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD de acordo com a instrução do usuário. A seção de definição do tipo de parâmetro HRD 143 supre o indicador que indica o tipo de parâmetro HRD definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada 141.

[00231] Na etapa S132, a seção de cálculo do parâmetro HRD da camada 141 realiza um processo de cálculo do parâmetro HRD da correspondente camada de acordo com o indicador que indica o tipo de parâmetro HRD suprido a partir da seção de definição do tipo de parâmetro HRD 143. O processo de cálculo do parâmetro HRD será descrito a seguir em relação à figura 17.

[00232] Na etapa S133, a seção de cálculo do parâmetro HRD da camada 141 supre o parâmetro HRD da correspondente camada calculado na etapa S132 para a seção de codificação sem perdas 116 de forma que o parâmetro HRD da correspondente camada seja codificado.

Petição 870160073535, de 07/12/2016, pág. 55/212 / 145 [00233] O indicador que indica o tipo de parâmetro HRD suprido na etapa S131 e o parâmetro HRD da camada suprido na etapa S133 são codificados na etapa S125 da figura 15.

[00234] Na etapa S134, a seção de definição do tipo de parâmetro HRD no tempo 144 define o tipo de parâmetro HRD subordinado de acordo com a instrução do usuário. A seção de definição do tipo de parâmetro HRD no tempo 144 supre o indicador que indica o tipo de parâmetro HRD subordinado definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada no tempo 142.

[00235] Na etapa S135, a seção de cálculo do parâmetro HRD da camada no tempo 142 realiza um processo de cálculo do parâmetro HRD da correspondente camada de tempo de acordo com o indicador que indica o tipo de parâmetro HRD subordinado suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144. O processo de cálculo do parâmetro HRD da camada de tempo será descrito a seguir em relação à figura 18.

[00236] Na etapa S136, a seção de cálculo do parâmetro HRD da camada no tempo 142 supre o parâmetro HRD da camada de tempo calculado na etapa S135 para a seção de codificação sem perdas 116 de forma que o parâmetro HRD da camada de tempo seja codificado.

[00237] O indicador que indica o tipo de parâmetro HRD subordinado suprido na etapa S134 e o parâmetro HRD da camada de tempo suprido na etapa S134 são codificados na etapa S125 da figura 15.

[00238] Na etapa S137, a seção de cálculo do parâmetro HRD da camada no tempo 142 determina se o processo terminou ou não em todas as camadas de tempo. Quando for determinado que o processo terminou em todas as camadas de tempo na etapa S137, o processo de codificação do parâmetro HRD termina, e o processo retorna para a etapa S124 da figura 15.

[00239] Quando for determinado que o processo não terminou em qualquer uma das camadas de tempo na etapa S137, o processo retorna para a

Petição 870160073535, de 07/12/2016, pág. 56/212 / 145 etapa S134, e o subsequente processo é repetido.

<Fluxo do processo de cálculo do parâmetro HRD>

[00240] A seguir, o processo de cálculo do parâmetro HRD na etapa S132 da figura 16 será descrito em relação a um fluxograma da figura 17.

[00241] O indicador do tipo de parâmetro HRD é suprido para a seção de cálculo do parâmetro HRD da camada 141 através da etapa S131 da figura

16. Na etapa S141, a seção de cálculo do parâmetro HRD da camada 141 determina se o indicador do tipo de parâmetro HRD suprido a partir da seção de definição do tipo de parâmetro HRD 143 é 1 ou não.

[00242] Quando for determinado que o indicador do tipo de parâmetro HRD é 1, na etapa S141, o processo prossegue para a etapa S142.

[00243] Na etapa S142, a seção de cálculo do parâmetro HRD da camada 141 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 132. Na etapa S143, a seção de cálculo do parâmetro HRD da camada 141 calcula o parâmetro HRD da correspondente camada com base na informação adquirida que indica o estado do armazenamento temporário de acúmulo integral 132.

[00244] Quando for determinado que o indicador do tipo de parâmetro HRD não é 1, na etapa S141, o processo prossegue para a etapa S144.

[00245] Na etapa S144, a seção de cálculo do parâmetro HRD da camada 141 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 132. Na etapa S145, a seção de cálculo do parâmetro HRD da camada 141 adquire a informação que indica o estado do armazenamento temporário de acúmulo (a camada inferior) 117 da seção de codificação de imagem da camada base 101-1. Na etapa S146, a seção de cálculo do parâmetro HRD da camada 141 calcula o parâmetro HRD da correspondente camada com base na informação adquirida.

[00246] Depois das etapas S143 ou S146, o processo de cálculo do parâmetro HRD termina, e o processo retorna para a etapa S132 da figura 16.

Petição 870160073535, de 07/12/2016, pág. 57/212 / 145 <Fluxo do processo de cálculo do parâmetro HRD da camada no tempo>

[00247] A seguir, o processo de cálculo do parâmetro HRD da camada de tempo na etapa S135 da figura 16 será descrito em relação a um fluxograma da figura 18.

[00248] O indicador do tipo de parâmetro HRD subordinado é suprido para a seção de cálculo do parâmetro HRD da camada no tempo 142 através da etapa S134 da figura 16. Na etapa S151, a seção de cálculo do parâmetro HRD da camada no tempo 142 determina se o indicador do tipo de parâmetro HRD subordinado suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144 é 1 ou não.

[00249] Quando for determinado que o indicador do tipo de parâmetro HRD subordinado é 1, na etapa S151, o processo prossegue para a etapa S152.

[00250] Na etapa S152, a seção de cálculo do parâmetro HRD da camada no tempo 142 adquire a informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 131. Na etapa S153, a seção de cálculo do parâmetro HRD da camada no tempo 142 calcula o parâmetro HRD da camada de tempo com base na informação adquirida que indica o estado do armazenamento temporário de acúmulo parcial 131.

[00251] Quando for determinado que o indicador do tipo de parâmetro HRD subordinado não é 1, na etapa S151, o processo prossegue para a etapa S154.

[00252] Na etapa S154, a seção de cálculo do parâmetro HRD da camada no tempo 142 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 132. Na etapa S155, a seção de cálculo do parâmetro HRD da camada no tempo 142 adquire a informação que indica o estado do armazenamento temporário de acúmulo da

Petição 870160073535, de 07/12/2016, pág. 58/212 / 145 correspondente camada de tempo do armazenamento temporário de acúmulo parcial 131. Na etapa S156, a seção de cálculo do parâmetro HRD da camada no tempo 142 calcula o parâmetro HRD da correspondente camada de tempo com base na informação adquirida.

[00253] Depois das etapas S153 ou S156, o processo de cálculo do parâmetro HRD da camada no tempo termina, e o processo retorna para a etapa S135 da figura 16.

<Outro fluxo do processo de codificação do parâmetro HRD> [00254] A seguir, o processo de codificação do parâmetro HRD da etapa S124 da figura 15 será descrito em relação a um fluxograma da figura 19. A figura 16 ilustra um exemplo de codificação do parâmetro HRD ilustrado nas figuras 8 e 9.

[00255] Na etapa S161, a seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD de acordo com a instrução do usuário. A seção de definição do tipo de parâmetro HRD 143 supre o indicador que indica o tipo de parâmetro HRD definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada 141.

[00256] Na etapa S162, a seção de cálculo do parâmetro HRD da camada 141 realiza o processo de cálculo do parâmetro HRD da correspondente camada de acordo com o indicador que indica o tipo de parâmetro HRD suprido a partir da seção de definição do tipo de parâmetro HRD 143. Já que o processo de cálculo do parâmetro HRD é basicamente igual ao processo descrito em relação à figura 17, descrição duplicada é omitida.

[00257] Na etapa S163, a seção de cálculo do parâmetro HRD da camada 141 determina se o processo de cálculo do parâmetro HRD terminou ou não tanto no tipo 1 quanto no tipo 2. Quando for determinado que o processo de cálculo do parâmetro HRD não terminou em cada tipo, na etapa

Petição 870160073535, de 07/12/2016, pág. 59/212 / 145

S163, o processo retorna para a etapa S162, e o subsequente processo é repetido.

[00258] Adicionalmente, quando tanto o tipo 1 quanto o tipo 2 forem calculados, o processo prossegue para a etapa S163.

[00259] Quando for determinado que o processo de cálculo do parâmetro HRD terminou tanto no tipo 1 quanto no tipo 2 da etapa S163, o processo prossegue para a etapa S164.

[00260] Na etapa S164, a seção de cálculo do parâmetro HRD da camada 141 supre o parâmetro HRD da correspondente camada calculado na etapa S162 para a seção de codificação sem perdas 116 de forma que o parâmetro HRD da correspondente camada seja codificado.

[00261] O indicador que indica o tipo de parâmetro HRD suprido na etapa S161 e o parâmetro HRD da camada suprido na etapa S164 são codificados na etapa S125 da figura 15.

[00262] Na etapa S165, a seção de definição do tipo de parâmetro HRD no tempo 144 define o tipo de parâmetro HRD subordinado de acordo com a instrução do usuário. A seção de definição do tipo de parâmetro HRD no tempo 144 supre o indicador que indica o tipo de parâmetro HRD subordinado definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada no tempo 142.

[00263] Na etapa S166, a seção de cálculo do parâmetro HRD da camada no tempo 142 realiza o processo de cálculo do parâmetro HRD da correspondente camada de tempo de acordo com o indicador que indica o tipo de parâmetro HRD subordinado suprido a partir da seção de definição do tipo de parâmetro HRD no tempo 144. Já que o processo de cálculo do parâmetro HRD da camada de tempo é basicamente igual ao processo descrito em relação à figura 18, descrição duplicada é omitida.

[00264] Na etapa S167, a seção de cálculo do parâmetro HRD da camada 141 determina se o processo de cálculo do parâmetro HRD terminou

Petição 870160073535, de 07/12/2016, pág. 60/212 / 145 ou não tanto no tipo 1 quanto no tipo 2. Quando for determinado que o processo de cálculo do parâmetro HRD não terminou em ambos os tipos, na etapa S163, o processo retorna para a etapa S166, e o subsequente processo é repetido.

[00265] Adicionalmente, quando tanto o tipo 1 quanto o tipo 2 forem calculados, o processo prossegue para a etapa S168.

[00266] Quando for determinado que o processo de cálculo do parâmetro HRD terminou tanto no tipo 1 quanto no tipo 2, na etapa S167, o processo prossegue para a etapa S168.

[00267] Na etapa S168, a seção de cálculo do parâmetro HRD da camada no tempo 142 supre o parâmetro HRD da correspondente camada de tempo calculado na etapa S166 para a seção de codificação sem perdas 116 de forma que o parâmetro HRD da camada de tempo seja codificado.

[00268] O indicador que indica o tipo de parâmetro HRD subordinado suprido na etapa S165 e o parâmetro HRD da camada de tempo suprido na etapa S168 são codificados na etapa S125 da figura 15.

[00269] Na etapa S169, a seção de cálculo do parâmetro HRD da camada no tempo 142 determina se o processo terminou ou não em todas as camadas de tempo. Quando for determinado que o processo terminou em todas as camadas de tempo, na etapa S169, o processo de codificação do parâmetro HRD termina, e o processo retorna para a etapa S124 da figura 15.

[00270] Quando for determinado que o processo não terminou em qualquer uma das camadas de tempo, na etapa S169, o processo retorna para a etapa S165, e o subsequente processo é repetido.

[00271] Da forma supra descrita, o indicador do tipo de parâmetro HRD que indica se o parâmetro HRD é o parâmetro para realizar o processo de decodificação de apenas uma camada correspondente ou o parâmetro para realizar o processo de decodificação da correspondente camada e a camada inferior é definido no lado da codificação. Assim, é possível realizar um

Petição 870160073535, de 07/12/2016, pág. 61/212 / 145 processo de decodificação em um sincronismo apropriado.

<2. Segunda modalidade>

<Dispositivo de decodificação escalonável>

[00272] A seguir, decodificação dos dados codificados (fluxo contínuo de bits) que foram sujeitos à codificação de vídeo escalonável da forma supra descrita será descrita. A figura 20 é um diagrama de blocos que ilustra um exemplo de uma configuração principal de um dispositivo de decodificação escalonável correspondente ao dispositivo de codificação escalonável 100 da figura 10. Por exemplo, um dispositivo de decodificação escalonável 200 ilustrado na figura 20 realiza decodificação escalonável nos dados codificados obtidos pela realização da codificação escalonável nos dados de imagem através do dispositivo de codificação escalonável 100 de acordo com um método correspondente ao método de codificação.

[00273] O dispositivo de decodificação escalonável 200 é configurado para incluir uma seção de decodificação de imagem da camada base 201-1, uma seção de decodificação de imagem da camada de melhoria 201-2 e uma seção de controle de decodificação 202.

[00274] A seção de decodificação de imagem da camada base 201-1 é uma seção de decodificação de imagem correspondente à seção de codificação de imagem da camada base 101-1 da figura 10, e adquire, por exemplo, os dados codificados da camada base obtidos pela codificação da informação de imagem da camada base através da seção de codificação de imagem da camada base 101-1. A seção de decodificação de imagem da camada base 201-1 decodifica os dados codificados da camada base sem relação a outras camadas, reconstrói a informação de imagem da camada base e transmite a informação de imagem da camada base.

[00275] A seção de decodificação de imagem da camada de melhoria 201-2 é uma seção de decodificação de imagem correspondente à seção de codificação de imagem da camada de melhoria 101-2, e adquire, por exemplo,

Petição 870160073535, de 07/12/2016, pág. 62/212 / 145 os dados codificados da camada de melhoria obtidos pela codificação da informação da imagem da camada de melhoria através da seção de codificação de imagem da camada de melhoria 101-2. A seção de decodificação de imagem da camada de melhoria 201-2 decodifica os dados codificados da camada de melhoria. Neste momento, a seção de decodificação de imagem da camada de melhoria 201-2 realiza a previsão intercamadas em relação à informação relacionada à decodificação da camada base, conforme necessário.

[00276] Adicionalmente, o indicador que indica o tipo de parâmetro HRD e o parâmetro HRD são adicionados em cada parte de dados codificados (fluxo contínuo de bits) e transmitidos. A seção de decodificação de imagem da camada de melhoria 201-2 recebe o indicador que indica o tipo de parâmetro HRD, adquire a informação do estado do armazenamento temporário de acúmulo de acordo com o indicador recebido que indica o tipo de parâmetro HRD e monitora o armazenamento temporário de acúmulo.

[00277] Quando o indicador que indica o tipo de parâmetro HRD for 1, a seção de decodificação de imagem da camada de melhoria 201-2 reconhece o parâmetro HRD como um parâmetro usado para decodificar apenas uma camada correspondente, adquire a informação do estado de seu próprio armazenamento temporário de acúmulo e monitora o armazenamento temporário de acúmulo. Quando o indicador que indica o tipo de parâmetro HRD for 0, a seção de decodificação de imagem da camada de melhoria 2012 reconhece o parâmetro HRD como um parâmetro usado para realizar um processo de decodificação de uma camada correspondente e uma camada inferior, adquire a informação do estado do armazenamento temporário de acúmulo da seção de decodificação de imagem da camada base 201-1 e monitora o armazenamento temporário de acúmulo. Este processo é realizado em uma camada e uma subcamada (camada de tempo). Na seção de decodificação de imagem da camada base 201-1, este processo é realizado em

Petição 870160073535, de 07/12/2016, pág. 63/212 / 145 apenas uma subcamada.

[00278] Através da decodificação, a seção de decodificação de imagem da camada de melhoria 201-2 decodifica os dados codificados da camada de melhoria, reconstrói a informação da imagem da camada de melhoria e transmite a informação da imagem da camada de melhoria.

[00279] A seção de decodificação de imagem da camada base 201-1 e a seção de decodificação de imagem da camada de melhoria 201-2 são apropriadamente referidas coletivamente como uma seção de decodificação de imagem em camada 201.

[00280] A seção de controle de decodificação 202 controla o processo de decodificação das seções de decodificação da imagem em camada 201, por exemplo, na visualização da relação de referência das seções de decodificação da imagem em camada 201.

[00281] No exemplo da figura 20, uma seção de decodificação de imagem da camada de melhoria 201-2 é ilustrada, mas quando houver uma camada superior, seções de decodificação da imagem da camada de melhoria 201-3, 4, ... que codificam a camada superior são providas para cada uma das camadas superiores.

<Exemplo de configuração da seção de decodificação de imagem em camada>

[00282] A figura 21 é um diagrama de blocos que ilustra um exemplo de uma configuração principal da seção de decodificação de imagem da camada de melhoria 201-2 da figura 20. A seção de decodificação de imagem da camada base 201-1 da figura 20 tem, basicamente, a mesma configuração da seção de decodificação de imagem da camada de melhoria 201-2 da figura 21, exceto em que um tipo de uma imagem que serve como um alvo é diferente. A título de descrição, no exemplo da figura 21, uma configuração da seção de decodificação de imagem da camada de melhoria 201-2 será descrita como um exemplo.

Petição 870160073535, de 07/12/2016, pág. 64/212 / 145 [00283] Da forma ilustrada na figura 21, a seção de decodificação de imagem da camada de melhoria 201-2 inclui um armazenamento temporário de acúmulo 211, uma seção de decodificação sem perdas 212, uma seção de quantização inversa 213, uma seção de transformada ortogonal inversa 214, uma seção de operação 215, um filtro em laço 216, um armazenamento temporário de reordenamento de tela 217 e uma seção de conversão D/A 218. A seção de decodificação de imagem da camada de melhoria 201-2 inclui adicionalmente uma memória de quadro 219, uma seção de seleção 220, uma seção de intraprevisão 221, uma seção de previsão / compensação de movimento 222 e uma seção de seleção 223. A seção de decodificação de imagem da camada de melhoria 201-2 inclui adicionalmente uma seção de decodificação do tipo de HRD 224.

[00284] O armazenamento temporário de acúmulo 211 é uma seção de recepção que recebe os dados codificados da camada de melhoria transmitidos. O armazenamento temporário de acúmulo 211 recebe e acumula os dados codificados da camada de melhoria transmitidos, e supre os dados codificados para a seção de decodificação sem perdas 212 em um certo sincronismo. Informação necessária para decodificação da informação do modo de previsão ou congêneres é adicionada nos dados codificados da camada de melhoria. O indicador que indica o tipo de parâmetro HRD e o parâmetro HRD também são adicionados nos dados codificados da camada de melhoria.

[00285] Quando houver uma solicitação proveniente da seção de decodificação do tipo de HRD 224, o armazenamento temporário de acúmulo 211 supre informação que indica um estado do armazenamento temporário de acúmulo 211. Adicionalmente, por exemplo, quando houver uma seção de decodificação de imagem da camada de melhoria 201-3 de uma camada superior, da forma indicada por uma linha pontilhada, e houver uma solicitação proveniente de sua seção de decodificação do tipo de HRD 224, o

Petição 870160073535, de 07/12/2016, pág. 65/212 / 145 armazenamento temporário de acúmulo 211 supre a informação que indica o estado do armazenamento temporário de acúmulo 211.

[00286] A seção de decodificação sem perdas 212 decodifica a informação que foi codificada pela seção de codificação sem perdas 116 e suprida a partir do armazenamento temporário de acúmulo 211 de acordo com um esquema correspondente ao esquema de codificação da seção de codificação sem perdas 116. A seção de decodificação sem perdas 212 supre dados de coeficiente quantizados de uma imagem diferencial obtida pela decodificação para a seção de quantização inversa 213.

[00287] Adicionalmente, a seção de decodificação sem perdas 212 extrai e adquire apropriadamente a unidade NAL que inclui o conjunto de parâmetro de vídeo (VPS), o conjunto de parâmetro de sequência (SPS) o conjunto de parâmetro de figura (PPS) e congêneres, que são incluídos nos dados codificados da camada de melhoria. A seção de decodificação sem perdas 212 extrai a informação relacionada ao modo de previsão ideal da informação, determina qual do modo de intraprevisão e do modo de interprevisão foi selecionado como o modo de previsão ideal com base na informação e supre a informação relacionada ao modo de previsão ideal para uma da seção de intraprevisão 221 e da seção de previsão / compensação de movimento 222 que corresponde ao modo determinado como selecionado.

[00288] Em outras palavras, por exemplo, na seção de decodificação de imagem da camada de melhoria 201-2, quando o modo de intraprevisão for selecionado como o modo de previsão ideal, a informação relacionada ao modo de previsão ideal é suprida para a seção de intraprevisão 221. Adicionalmente, por exemplo, na seção de decodificação de imagem da camada de melhoria 201-2, quando o modo de interprevisão for selecionado como o modo de previsão ideal, a informação relacionada ao modo de previsão ideal é suprida para a seção de previsão / compensação de movimento 222.

Petição 870160073535, de 07/12/2016, pág. 66/212 / 145 [00289] Adicionalmente, a seção de decodificação sem perdas 212 extrai informação necessária para quantização inversa, tais como a matriz de quantização ou o parâmetro de quantização, a partir da unidade NAL, e supre a informação extraída para a seção de quantização inversa 213. Adicionalmente, a seção de decodificação sem perdas 212 extrai o indicador que indica o tipo de parâmetro HRD e o parâmetro HRD, por exemplo, a partir do VPS, e supre o indicador extraído que indica o tipo de parâmetro HRD e o parâmetro HRD para a seção de decodificação do tipo de HRD 224.

[00290] A seção de quantização inversa 213 quantiza inversamente os dados de coeficiente quantizados obtidos através da decodificação realizada pela seção de decodificação sem perdas 212 de acordo com um esquema correspondente ao esquema de quantização da seção de quantização 115. A seção de quantização inversa 213 é a mesma seção de processamento que a seção de quantização inversa 118. Em outras palavras, a descrição da seção de quantização inversa 213 também pode ser aplicada na seção de quantização inversa 118. Aqui, é necessário mudar e ler apropriadamente um destino de entrada / saída de dados ou congêneres de acordo com um dispositivo. A seção de quantização inversa 213 supre os dados de coeficiente obtidos para a seção de transformada ortogonal inversa 214.

[00291] A seção de transformada ortogonal inversa 214 realiza a transformada ortogonal inversa nos dados de coeficiente supridos a partir da seção de quantização inversa 213 de acordo com um esquema correspondente ao esquema de transformada ortogonal da seção de transformada ortogonal 114. A seção de transformada ortogonal inversa 214 é a mesma seção de processamento que a seção de transformada ortogonal inversa 119. Em outras palavras, a descrição da seção de transformada ortogonal inversa 214 também pode ser aplicada na seção de transformada ortogonal inversa 119. Aqui, é necessário mudar e ler apropriadamente um destino de entrada / saída de dados ou congêneres de acordo com um dispositivo.

Petição 870160073535, de 07/12/2016, pág. 67/212 / 145 [00292] A seção de transformada ortogonal inversa 214 obtém dados residuais decodificados correspondentes os dados residuais que não são sujeitos à transformada ortogonal na seção de transformada ortogonal 114 através do processo de transformada ortogonal inversa. Os dados residuais decodificados obtidos através da transformada ortogonal inversa são supridos para a seção de operação 215. Adicionalmente, a imagem previsiva é suprida a partir da seção de intraprevisão 221 ou da seção de previsão / compensação de movimento 222 para a seção de operação 215 por meio da seção de seleção 223.

[00293] A seção de operação 215 adiciona os dados residuais decodificados e a imagem previsiva, e obtém dados de imagem decodificados correspondentes aos dados de imagem dos quais a imagem previsiva não é subtraída pela seção de operação 113. A seção de operação 215 supre os dados de imagem decodificados para o filtro em laço 216.

[00294] O filtro em laço 216 realiza apropriadamente o processo de filtro, tais como o filtro de desbloqueio, o filtro de deslocamento adaptativo ou o filtro em laço adaptativo, na imagem decodificada suprida, e supre a imagem resultante para o armazenamento temporário de reordenamento de tela 217 e a memória de quadro 219. Por exemplo, o filtro em laço 216 remove a distorção de bloco da imagem decodificada pela realização do processo de filtro de desbloqueio na imagem decodificada. Adicionalmente, por exemplo, o filtro em laço 216 melhora a qualidade da imagem pela realização do processo de filtro em laço no resultado do processo de filtro de desbloqueio (a imagem decodificada da qual a distorção de bloco foi removida) usando o filtro Wiener. O filtro em laço 216 é a mesma seção de processamento do filtro em laço 121.

[00295] Adicionalmente, a imagem decodificada transmitida a partir da seção de operação 215 pode ser suprida para o armazenamento temporário de reordenamento de tela 217 ou a memória de quadro 219 sem intervenção do

Petição 870160073535, de 07/12/2016, pág. 68/212 / 145 filtro em laço 216. Em outras palavras, parte do, ou todo o, processo de filtro realizado pelo filtro em laço 216 pode ser omitido.

[00296] O armazenamento temporário de reordenamento de tela 217 reordena a imagem decodificada. Em outras palavras, a ordem dos quadros reordenados na ordem da codificação pelo armazenamento temporário de reordenamento de tela 112 é reordenada na ordem de exibição original. A seção de conversão D/A 218 realiza conversão D/A na imagem suprida a partir do armazenamento temporário de reordenamento de tela 217, e transmite a imagem convertida para ser exibida em uma tela (não ilustrada).

[00297] A memória de quadro 219 armazena a imagem decodificada suprida, e supre a imagem decodificada armazenada para a seção de seleção 220 como a imagem de referência em um certo sincronismo ou com base em uma solicitação externa, por exemplo, proveniente da seção de intraprevisão 221, da seção de previsão / compensação de movimento 222 ou congêneres.

[00298] A memória de quadro 219 define a imagem decodificada armazenada como informação relacionada à decodificação da camada de melhoria, e supre a informação para a seção de decodificação de imagem da camada de melhoria 201-2 de uma camada superior.

[00299] A seção de seleção 220 seleciona o destino de suprimento da imagem de referência suprida a partir da memória de quadro 219. Quando uma imagem codificada pela intracodificação for decodificada, a seção de seleção 220 supre a imagem de referência suprida a partir da memória de quadro 219 para a seção de intraprevisão 221. Adicionalmente, quando uma imagem codificada pela intercodificação for decodificada, a seção de seleção 220 supre a imagem de referência suprida a partir da memória de quadro 219 para a seção de previsão / compensação de movimento 222.

[00300] Por exemplo, a informação que indica o modo de intraprevisão obtido pela decodificação da informação de cabeçalho é apropriadamente suprida a partir da seção de decodificação sem perdas 212 para a seção de

Petição 870160073535, de 07/12/2016, pág. 69/212 / 145 intraprevisão 221. A seção de intraprevisão 221 gera a imagem previsiva pela realização da intraprevisão usando a imagem de referência adquirida a partir da memória de quadro 219 no modo de intraprevisão usado na seção de intraprevisão 124. A seção de intraprevisão 221 supre a imagem previsiva gerada para a seção de seleção 223.

[00301] A seção de previsão / compensação de movimento 222 adquire informação (informação do modo de previsão ideal, a informação da imagem de referência e congêneres) obtida pela decodificação da informação de cabeçalho proveniente da seção de decodificação sem perdas 212.

[00302] A seção de previsão / compensação de movimento 222 gera a imagem previsiva pela realização da interprevisão usando a imagem de referência adquirida a partir da memória de quadro 219 no modo de interprevisão indicado pela informação do modo de previsão ideal adquirida a partir da seção de decodificação sem perdas 212. Embora não ilustrado, na seção de previsão / compensação de movimento 222, a imagem de referência suprida a partir da memória de quadro 219 da seção de decodificação de imagem da camada base 201-1 também é referida conforme necessário.

[00303] A seção de seleção 223 supre a imagem previsiva suprida a partir da seção de intraprevisão 221 ou a imagem previsiva suprida a partir da seção de previsão / compensação de movimento 222 para a seção de operação 215. Então, a seção de operação 215 adiciona a imagem previsiva gerada usando o vetor de movimento nos dados residuais decodificados (a informação de imagem diferencial) supridos a partir da seção de transformada ortogonal inversa 214 para decodificar a imagem original.

[00304] A seção de decodificação do tipo de HRD 224 adquire a informação que indica o estado de acúmulo a partir do armazenamento temporário de acúmulo 211 ou do armazenamento temporário de acúmulo (a camada inferior) 211 da seção de decodificação de imagem da camada base 201-1 de acordo com o indicador que indica o tipo de parâmetro HRD suprido

Petição 870160073535, de 07/12/2016, pág. 70/212 / 145 a partir da seção de decodificação sem perdas 212. A seção de decodificação do tipo de HRD 224 monitora o armazenamento temporário de acúmulo 211 com base na informação adquirida de acordo com o parâmetro HRD correspondente ao indicador que indica o tipo de parâmetro HRD.

<Exemplo de configuração do armazenamento temporário de acúmulo e da seção de decodificação do tipo de HRD>

[00305] A figura 22 é um diagrama de blocos que ilustra um exemplo de uma configuração do armazenamento temporário de acúmulo e da seção de decodificação do tipo de HRD da figura 21.

[00306] Em um exemplo da figura 22, o armazenamento temporário de acúmulo 211 é configurado para incluir um armazenamento temporário de acúmulo parcial 231 e um armazenamento temporário de acúmulo integral 232.

[00307] A seção de decodificação do tipo de HRD 224 é configurada para incluir uma seção de monitoramento do parâmetro HRD da camada 241, uma seção de monitoramento do parâmetro HRD da camada no tempo 242, uma seção de decodificação do tipo de parâmetro HRD 243 e uma seção de decodificação do tipo de parâmetro HRD no tempo 244.

[00308] O armazenamento temporário de acúmulo parcial 231 é configurado com armazenamentos temporários de acúmulo que acumulam dados codificados relacionados a cada camada de tempo superior dentre os dados codificados (códigos) acumulados no armazenamento temporário de acúmulo integral 232. A informação que indica o estado de cada armazenamento temporário de acúmulo é suprida para a seção de monitoramento do parâmetro HRD da camada no tempo 242 sob solicitação.

[00309] O armazenamento temporário de acúmulo integral 232 acumula os dados codificados (códigos), codificados pela seção de codificação de imagem da camada de melhoria 101-2. A informação que indica o estado de armazenamento temporário de acúmulo integral do

Petição 870160073535, de 07/12/2016, pág. 71/212 / 145 armazenamento temporário de acúmulo integral 232 é suprida para a seção de monitoramento do parâmetro HRD da camada 241 e a seção de monitoramento do parâmetro HRD da camada no tempo 242 sob solicitação. Adicionalmente, há casos em que há uma seção de decodificação de imagem da camada de melhoria 201-3 de uma camada superior, da forma indicada por uma linha pontilhada. Neste caso, quando houver uma solicitação a partir da seção de decodificação do tipo de HRD (camada superior) 224 da seção de decodificação de imagem da camada de melhoria 201-3, a informação que indica o estado de armazenamento temporário de acúmulo integral do armazenamento temporário de acúmulo integral 232 também é suprida para a seção de decodificação do tipo de HRD (camada superior) 224.

[00310] A seção de monitoramento do parâmetro HRD da camada 241 recebe o parâmetro HRD suprido a partir da seção de decodificação sem perdas 212, e adquire o parâmetro HRD correspondente ao indicador que indica o tipo de parâmetro HRD suprido a partir da seção de decodificação do tipo de parâmetro HRD 243. A seção de monitoramento do parâmetro HRD da camada 241 monitora o armazenamento temporário de acúmulo 211 com base no parâmetro HRD adquirido.

[00311] Em outras palavras, a seção de monitoramento do parâmetro HRD da camada 241 adquire informação que indica o estado do armazenamento temporário de acúmulo integral 232 e informação que indica o estado do armazenamento temporário de acúmulo (a camada inferior) 211 da seção de decodificação de imagem da camada base 201-1 de acordo com o indicador que indica o tipo de parâmetro HRD suprido a partir da seção de decodificação do tipo de parâmetro HRD 243.

[00312] No caso do tipo de parâmetro HRD no qual o indicador indica 1, a informação que indica o estado do armazenamento temporário de acúmulo integral 232 é adquirida. No caso do tipo de parâmetro HRD no qual o indicador indica 0, a informação que indica o estado do armazenamento

Petição 870160073535, de 07/12/2016, pág. 72/212 / 145 temporário de acúmulo integral 232 e a informação que indica o estado do armazenamento temporário de acúmulo (a camada inferior) 211 da seção de decodificação de imagem da camada base 201-1 são adquiridas. Na prática, a informação é adquirida a partir do armazenamento temporário de acúmulo integral 232 do armazenamento temporário de acúmulo da seção de decodificação de imagem da camada base 201-1.

[00313] A seção de monitoramento do parâmetro HRD da camada no tempo 242 recebe o parâmetro HRD da camada no tempo suprido a partir da seção de decodificação sem perdas 212, e adquire o parâmetro HRD da camada no tempo correspondente ao indicador que indica o tipo de parâmetro HRD subordinado suprido a partir da seção de decodificação do tipo de parâmetro HRD no tempo 244. A seção de monitoramento do parâmetro HRD da camada 241 monitora o armazenamento temporário de acúmulo 211 com base no parâmetro HRD da camada no tempo adquirido.

[00314] Em outras palavras, a seção de monitoramento do parâmetro HRD da camada no tempo 242 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 232 e informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 231 de acordo com o indicador que indica o tipo de parâmetro HRD subordinado suprido a partir da seção de decodificação do tipo de parâmetro HRD no tempo 244.

[00315] Quando o indicador que indica o tipo de parâmetro HRD subordinado for 1, a informação que indica o estado do armazenamento temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 231 é adquirida. Quando o indicador que indica o tipo de parâmetro HRD subordinado for 0, a informação que indica o estado do armazenamento temporário de acúmulo integral 232 e a informação que indica o estado do armazenamento

Petição 870160073535, de 07/12/2016, pág. 73/212 / 145 temporário de acúmulo da correspondente camada de tempo do armazenamento temporário de acúmulo parcial 231 são adquiridas.

[00316] A seção de decodificação do tipo de parâmetro HRD 243 recebe o indicador do tipo de parâmetro HRD suprido a partir da seção de decodificação sem perdas 212. Então, a seção de decodificação do tipo de parâmetro HRD 243 seleciona um indicador que indica um tipo de parâmetro HRD correspondente a uma configuração de camada de um fluxo contínuo real ou uma configuração ou uma função de um dispositivo dentre os indicadores recebidos, e supre o indicador selecionado para a seção de monitoramento do parâmetro HRD da camada 241.

[00317] A seção de decodificação do tipo de parâmetro HRD no tempo 244 recebe o indicador do tipo de parâmetro HRD subordinado suprido a partir da seção de decodificação sem perdas 212. Então, a seção de decodificação do tipo de parâmetro HRD no tempo 244 seleciona um indicador que indica um tipo de parâmetro HRD subordinado correspondente a uma configuração de camada de um fluxo contínuo real ou uma configuração ou uma função de um dispositivo dentre os indicadores recebidos, e supre o indicador selecionado para a seção de monitoramento do parâmetro HRD da camada 241.

[00318] No caso do parâmetro HRD supra descrito em relação às figuras 8 e 9, dois tipos (um tipo de apenas uma camada correspondente e um tipo de uma camada correspondente e uma camada inferior) são descritos e, assim, qualquer tipo pode ser selecionado por uma configuração ou uma função de um fluxo contínuo real ou dispositivo. Por outro lado, no caso do parâmetro HRD supra descrito em relação à figura 7, apenas um tipo é descrito e, assim, o parâmetro HRD é ignorado quando um tipo de uma configuração ou uma função de um fluxo contínuo real ou dispositivo for diferente de um tipo descrito.

<Fluxo do processo de decodificação>

Petição 870160073535, de 07/12/2016, pág. 74/212 / 145 [00319] A seguir, o fluxo do processo realizado pelo dispositivo de decodificação escalonável 200 será descrito. Primeiro, um exemplo do fluxo do processo de decodificação será descrito em relação a um fluxograma da figura 23.

[00320] Quando o processo de decodificação iniciar, na etapa S201, a seção de controle de decodificação 202 do dispositivo de decodificação escalonável 200 decide uma camada de um alvo de processamento, por exemplo, na visualização da relação de referência de uma imagem.

[00321] Na etapa S202, a seção de decodificação de imagem da camada base 201-1 realiza um processo de decodificação de camada sob controle da seção de controle de decodificação 202. O processo de decodificação de camada será descrito a seguir em relação à figura 24. Quando o processo da etapa S202 terminar, o processo prossegue para a etapa S203.

[00322] Na etapa S203, a seção de controle de decodificação 202 determina se todas as camadas principais foram processadas ou não. Quando for determinado que há uma camada principal não processada, o processo prossegue para a etapa S204.

[00323] Na etapa S204, a seção de controle de decodificação 202 define uma próxima camada principal não processada como um alvo de processamento (camada principal atual). Quando o processo da etapa S204 terminar, o processo retorna para a etapa S202. Na etapa S202, a seção de decodificação de imagem da camada de melhoria 201-2 realiza o processo de decodificação de camada sob controle da seção de controle de decodificação 202. O processo das etapas S202 a S204 é repetidamente realizado para codificar as camadas principais, como exposto. O processo da etapa S202 pode ser processado em paralelo por uma pluralidade de seções de decodificação da imagem em camada 201 que não têm relação de referência.

[00324] Então, quando for determinado que todas as camadas

Petição 870160073535, de 07/12/2016, pág. 75/212 / 145 principais foram processadas, na etapa S203, o processo de decodificação termina.

<Fluxo do processo de decodificação de camada>

[00325] A seguir, um exemplo do fluxo do processo de decodificação de camada realizado na etapa S202 da figura 23 será descrito em relação a um fluxograma da figura 24. Um exemplo da figura 24 será descrito em conexão com um exemplo da seção de decodificação de imagem da camada de melhoria 201-2.

[00326] Quando o processo de decodificação de camada iniciar, na etapa S211, o armazenamento temporário de acúmulo 211 da seção de decodificação de imagem da camada de melhoria 201-2 acumula os fluxos contínuos de bits da camada de melhoria transmitidos a partir do lado da codificação.

[00327] Na etapa S212, a seção de decodificação sem perdas 212 decodifica o fluxo contínuo de bits (a informação de imagem diferencial codificada) da camada de melhoria suprido a partir do armazenamento temporário de acúmulo 211. Em outras palavras, a figura I, a figura P e a figura B codificadas pela seção de codificação sem perdas 116 são decodificadas. Neste momento, vários tipos de informação diferentes da informação de imagem diferencial incluída no fluxo contínuo de bits, tal como a informação de cabeçalho, também são decodificados. O indicador que indica o tipo de parâmetro HRD suprido a partir da seção de decodificação sem perdas 212 e o parâmetro HRD são supridos para a seção de decodificação do tipo de HRD 224.

[00328] Na etapa S213, a seção de decodificação do tipo de HRD 224 realiza um processo de decodificação do parâmetro HRD. O processo de decodificação do parâmetro HRD será descrito a seguir em relação à figura 26.

[00329] O parâmetro HRD é decodificado na etapa S213, e o

Petição 870160073535, de 07/12/2016, pág. 76/212 / 145 armazenamento temporário de acúmulo 211 é monitorado com base no parâmetro HRD decodificado, de forma que nenhum sobrefluxo ou subfluxo ocorram.

[00330] Na etapa S214, a seção de quantização inversa 213 quantiza inversamente os coeficientes quantizados obtidos no processo da etapa S212.

[00331] Na etapa S215, a seção de transformada ortogonal inversa 214 realiza a transformada ortogonal inversa em um bloco atual (uma TU atual).

[00332] Na etapa S216, a seção de intraprevisão 221 ou a seção de previsão / compensação de movimento 222 realizam o processo de previsão, e geram a imagem previsiva. Em outras palavras, o processo de previsão é realizado no modo de previsão que foi determinado como aplicado no momento da codificação na seção de decodificação sem perdas 212. Mais especificamente, por exemplo, quando a intraprevisão for aplicada no momento da codificação, a seção de intraprevisão 221 gera a imagem previsiva no modo de intraprevisão reconhecido como ideal no momento da codificação. Adicionalmente, por exemplo, quando a interprevisão for aplicada no momento da codificação, a seção de previsão / compensação de movimento 222 gera a imagem previsiva no modo de interprevisão reconhecido como ideal no momento da codificação.

[00333] Na etapa S217, a seção de operação 215 adiciona a imagem previsiva gerada na etapa S216 na informação de imagem diferencial gerada pelo processo de transformada ortogonal inversa da etapa S215. Em decorrência disto, a imagem original é decodificada.

[00334] Na etapa S218, o filtro em laço 216 realiza apropriadamente o processo de filtro em laço na imagem decodificada obtida na etapa S217.

[00335] Na etapa S219, o armazenamento temporário de reordenamento de tela 217 reordena a imagem que foi sujeita ao processo de filtro na etapa S218. Em outras palavras, a ordem dos quadros reordenados para codificação através do armazenamento temporário de reordenamento de

Petição 870160073535, de 07/12/2016, pág. 77/212 / 145 tela 112 é reordenada na ordem de exibição original.

[00336] Na etapa S220, a seção de conversão D/A 218 realiza conversão D/A na imagem na qual a ordem dos quadros é reordenada na etapa S219. A imagem é transmitida para uma tela (não ilustrada), e a imagem é exibida.

[00337] Na etapa S221, a memória de quadro 219 armazena a imagem que foi sujeita ao processo de filtro em laço na etapa S218.

[00338] Quando o processo da etapa S221 terminar, o processo de decodificação da camada base termina, e o processo retorna para a figura 23.

<Fluxo do processo de decodificação do parâmetro HRD> [00339] A seguir, um exemplo do fluxo do processo de decodificação do parâmetro HRD realizado na etapa S213 da figura 24 será descrito em relação a um fluxograma da figura 25.

[00340] A seção de decodificação do tipo de parâmetro HRD 243 recebe o indicador que indica o tipo de parâmetro HRD da correspondente camada na etapa S231. Então, a seção de decodificação do tipo de parâmetro HRD 243 supre, por exemplo, um indicador que indica um tipo de parâmetro HRD correspondente a uma configuração de camada de um fluxo contínuo real dentre os indicadores recebidos para a seção de monitoramento do parâmetro HRD da camada 241.

[00341] Na etapa S232, a seção de monitoramento do parâmetro HRD da camada 241 recebe o parâmetro HRD suprido a partir da seção de decodificação sem perdas 212, e adquire o parâmetro HRD correspondente ao indicador que indica o tipo de parâmetro HRD suprido a partir da seção de decodificação do tipo de parâmetro HRD 243.

[00342] Na etapa S233, a seção de decodificação do tipo de parâmetro HRD no tempo 244 recebe o indicador que indica o tipo de parâmetro HRD suprido a partir da seção de decodificação sem perdas 212. Então, a seção de decodificação do tipo de parâmetro HRD no tempo 244 supre, por exemplo,

Petição 870160073535, de 07/12/2016, pág. 78/212 / 145 um indicador que indica um tipo de parâmetro HRD subordinado correspondente a uma configuração de camada de um fluxo contínuo real dentre os indicadores recebidos para a seção de monitoramento do parâmetro HRD da camada 241.

[00343] Na etapa S234, a seção de monitoramento do parâmetro HRD da camada no tempo 242 recebe o parâmetro HRD da camada no tempo suprido a partir da seção de decodificação sem perdas 212, e adquire o parâmetro HRD da camada no tempo correspondente ao indicador do tipo de parâmetro HRD subordinado suprido a partir da seção de decodificação do tipo de parâmetro HRD no tempo 244.

[00344] Na etapa S235, a seção de monitoramento do parâmetro HRD da camada no tempo 242 determina se o processo terminou ou não em todas as camadas de tempo. Quando for determinado que o processo não terminou em qualquer uma das camadas de tempo, na etapa S235, o processo retorna para a etapa S233, e o subsequente processo é repetido.

[00345] Quando for determinado que o processo terminou em todas as camadas de tempo, na etapa S235, o processo prossegue para a etapa S236. Na etapa S236, a seção de monitoramento do parâmetro HRD da camada 241 e a seção de monitoramento do parâmetro HRD da camada no tempo 242 realizam um processo de monitoramento do armazenamento temporário de acúmulo que será descrito a seguir.

<Fluxo do processo de monitoramento do armazenamento temporário de acúmulo>

[00346] A seguir, o processo de monitoramento do armazenamento temporário de acúmulo será descrito em relação a um fluxograma da figura 26. O processo de monitoramento do armazenamento temporário de acúmulo é um exemplo que usa o indicador do tipo de parâmetro HRD de acordo com a presente tecnologia, e a presente tecnologia não é limitada a este exemplo. A título de descrição, um sincronismo no qual este processo é realizado é

Petição 870160073535, de 07/12/2016, pág. 79/212 / 145 descrito como estando no processo de decodificação do parâmetro HRD, mas a presente tecnologia não é limitada a este exemplo, e este processo pode ser realizado, por exemplo, em qualquer sincronismo no processo de decodificação de camada da figura 24.

[00347] Na etapa S251, a seção de monitoramento do parâmetro HRD da camada 241 determina se o indicador que indica o tipo de parâmetro HRD da correspondente camada é 1 ou não. Quando o indicador que indica o tipo de parâmetro HRD da correspondente camada for determinado como 1, na etapa S251, o processo prossegue para a etapa S252.

[00348] Na etapa S252, a seção de monitoramento do parâmetro HRD da camada 241 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 232 e, na etapa S253, a seção de monitoramento do parâmetro HRD da camada 241 monitora o armazenamento temporário de acúmulo integral 232 da correspondente camada de acordo com o parâmetro HRD da correspondente camada usando a informação adquirida.

[00349] Quando o indicador que indica o tipo de parâmetro HRD da correspondente camada for determinado como 0, na etapa S251, o processo prossegue para a etapa S254.

[00350] Na etapa S254, a seção de monitoramento do parâmetro HRD da camada 241 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 232 e, na etapa S255, a seção de monitoramento do parâmetro HRD da camada 241 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 232 da camada inferior.

[00351] Então, na etapa S256, a seção de monitoramento do parâmetro HRD da camada 241 monitora o armazenamento temporário de acúmulo integral 232 da correspondente camada usando a informação adquirida nas etapas S254 e S255 de acordo com o parâmetro HRD da correspondente

Petição 870160073535, de 07/12/2016, pág. 80/212 / 145 camada.

[00352] Na etapa S257, a seção de monitoramento do parâmetro HRD da camada no tempo 242 determina se o indicador que indica o tipo de parâmetro HRD da correspondente camada de tempo é 1 ou não. Quando o indicador que indica o tipo de parâmetro HRD da correspondente camada de tempo for determinado como 1, na etapa S257, o processo prossegue para a etapa S258.

[00353] Na etapa S258, a seção de monitoramento do parâmetro HRD da camada no tempo 242 adquire informação que indica o estado do armazenamento temporário de acúmulo de cada correspondente camada de tempo a partir do armazenamento temporário de acúmulo parcial 231.

[00354] Na etapa S259, a seção de monitoramento do parâmetro HRD da camada no tempo 242 monitora o (cada armazenamento temporário do) armazenamento temporário de acúmulo parcial 231 usando a informação adquirida na etapa S258 de acordo com o parâmetro HRD de cada camada de tempo.

[00355] Quando o indicador que indica o tipo de parâmetro HRD da correspondente camada de tempo for determinado como 0, na etapa S257, o processo prossegue para a etapa S260.

[00356] Na etapa S260, a seção de monitoramento do parâmetro HRD da camada no tempo 242 adquire a informação que indica o estado do armazenamento temporário de acúmulo integral 232.

[00357] Na etapa S261, a seção de monitoramento do parâmetro HRD da camada no tempo 242 adquire a informação que indica o estado do armazenamento temporário de acúmulo de cada correspondente camada de tempo a partir do armazenamento temporário de acúmulo parcial 231.

[00358] Na etapa S259, a seção de monitoramento do parâmetro HRD da camada no tempo 242 monitora o (cada armazenamento temporário do) armazenamento temporário de acúmulo parcial 231 usando a informação

Petição 870160073535, de 07/12/2016, pág. 81/212 / 145 adquirida nas etapas S260 e S261 de acordo com o parâmetro HRD de cada camada de tempo.

[00359] Da forma supra descrita, pelo menos um indicador é definido para indicar se o parâmetro HRD é o parâmetro para realizar decodificação de apenas uma camada correspondente ou o parâmetro para realizar o processo de decodificação de uma camada correspondente e uma camada inferior e, assim, é possível realizar um processo de decodificação em um sincronismo apropriado.

[00360] Este indicador pode ser transmitido para o lado da decodificação como informação de melhoria complementar (SEI).

[00361] Aqui, é difícil detectar se o processo de decodificação é realizado por um único dispositivo de decodificação ou uma pluralidade de dispositivos de decodificação, da forma supra descrita em relação à figura 6. Neste particular, o exemplo de definição da informação que indica se o parâmetro HRD é o parâmetro para realizar o processo de decodificação de apenas uma camada correspondente ou o parâmetro para realizar o processo de decodificação de uma camada correspondente e uma camada inferior foi supra descrito.

[00362] Entretanto, o HEVC atual suporta apenas o parâmetro HRD do exemplo (isto é, o exemplo no qual o processo de decodificação das múltiplas camadas é realizado por um único dispositivo de decodificação) de ex11 ilustrado na figura 6. Em outras palavras, no HEVC atual, o parâmetro HRD do exemplo de ex11 é definido no conjunto de parâmetro de vídeo (VPS) e transmitido para o lado da decodificação.

[00363] Neste particular, na presente tecnologia, uma técnica de transmissão de um parâmetro HRD do exemplo (isto é, o exemplo no qual o processo de decodificação das múltiplas camadas é realizado por uma pluralidade de dispositivos de decodificação) de ex12 ilustrado na figura 6 para o lado da decodificação através de vps_extension em HEVC escalonável

Petição 870160073535, de 07/12/2016, pág. 82/212 / 145 é proposta como uma terceira modalidade.

<3. Terceira modalidade>

<Exemplo de sintaxe de vps_ extension>

[00364] A figura 27 é um diagrama que ilustra um exemplo da sintaxe de vps_ extension. Em um exemplo da figura 27, i indica o número de layer_sets, e j indica o número de ids de camada. Adicionalmente, começando a partir de j = 1 indica que há apenas uma camada base quando j = 0 e, neste caso, os métodos de processamento de ex11 e ex12 não são diferentes, mas todos iguais.

[00365] Em um exemplo da figura 27, layer_set_hrd_layer_info _present_flag[i][j] é definido para cada layer_id_included_flag [i][j]. Quando layer_set_hrd_layer_info_present_flag[i][j] for 1, isto indica que o parâmetro HRD correspondente ao exemplo de ex12 está presente (em vps_ extension) e, neste caso, o parâmetro HRD correspondente ao exemplo de ex12 é definido na seguinte e subsequentes linhas.

[00366] Adicionalmente, o parâmetro HRD correspondente ao exemplo de ex12 pode ser definido em sps (sequence parameter set)_extension, da forma ilustrada na figura 28.

<Exemplo da sintaxe de sps_ extension>

[00367] A figura 28 é um diagrama que ilustra um exemplo da sintaxe de sps_ extension.

[00368] Em um exemplo da figura 28, layer_set_hrd_layer_info_present_flag é definido. Quando este indicador for 1, isto indica que o parâmetro HRD correspondente ao exemplo de ex12 está presente (em sps_ extension) e, neste caso, o parâmetro HRD correspondente ao exemplo de ex12 é definido na próxima linha.

[00369] No exemplo das figuras 27 e 28, o parâmetro HRD é definido para cada layer_set. layer_set é definido no VPS, da forma ilustrada na figura

Petição 870160073535, de 07/12/2016, pág. 83/212 / 145

29.

<Exemplo da sintaxe de VPS>

[00370] A figura 29 é um diagrama que ilustra um exemplo da sintaxe de um VPS. Números na esquerda de cada linha são números de linha adicionados para descrição.

[00371] Em uma 16^a linha da figura 29, o número de layer_sets é definido como vps_num_layer_sets_minus1.

[00372] Nas 17a até 19a linhas, é descrito se uma camada de id[j] está incluída ou não em layer_set de [i] como layer_id_included_flag[i][j]. layer_id_included_flag [i][j] será descrito com detalhes na semântica ilustrada na figura 30.

[00373] Em uma 27a linha, o número de parâmetros HRD é definido em um vps como vps_num_hrd_parameters. Em uma 29a linha, hrd_parameters é associado com layer_set como hrd_layer_set_idx[i]. Em uma 32a linha, o parâmetro HRD do exemplo de ex11 é descrito como exposto.

[00374] Em uma 35a linha, vps_extension_flag que indica a presença ou a ausência de vps_extension é descrito.

<Exemplo da semântica de layer_id_included_flag[i][j]>

[00375] A figura 30 ilustra um exemplo da semântica de layer_id_included_flag[i][j].

[00376] layer_id_included_flag[i][j] igual a 1 especifica que o valor de nuh_layer_id igual a j está incluído na lista do identificador de camada layerSetLayerIdList[i ]. layer_id_included_flag[i][j] igual a 0 especifica que o valor de nuh_layer_id igual a j não esta incluído na lista do identificador de camada layerSetLayerIdList[i].

[00377] O valor de numLayersInIdList[0] é definido igual a 1 e o valor de layerSetLayerIdList[0][0] é definido igual a 0.

[00378] Para cada valor de i na faixa de 1 até

Petição 870160073535, de 07/12/2016, pág. 84/212 / 145 vps_num_layer_sets_minus1, inclusive, a variável numLayerslnldList\i\ e a lista do identificador de camada layerSetLayerldList[i\ são derivadas como segue:

n = 0 para (m = 0; m <= vps_max_layer_id; m++) se ( layer_id_included_flag \i\\m\) layerSetLayerldList[i\ \n++\ = m numLayerslnldList\i\ = n \00379\ Para cada valor de i na faixa de 1 até vps_num_layer_sets_minus1, inclusive, numLayerslnldList\i\ deve estar na faixa de 1 até vps_max_layers_minus1 + 1, inclusive.

\00380\ Quando numLayerslnldList\iA\ for igual a numLayerslnldList\iB\ para qualquer um de iA e iB na faixa de 0 até vps_num_layer_sets_minus1, inclusive, com iA não igual a iB, o valor de layerSetLayerldList\iA\\n\ não deve ser igual a layerSetLayerldList\iB\\n\ pelo menos para um valor de n na faixa de 0 até numLayerslnldList\iA\, inclusive.

\00381\ Um conjunto de camada é identificado pela lista do identificador de camada associada. O i-ésimo conjunto de camada especificado pelo VPS é associado com a lista do identificador de camada layerSetLayerldList\i\, para i na faixa de 0 até vps_num_layer_sets_minus1, inclusive.

\00382\ Um conjunto de camada consiste em todos os pontos de operação que são associados com a mesma lista do identificador de camada.

\00383\ Cada ponto de operação é identificado pela lista do identificador de camada associada, denotado como OpLayerldList, que consiste na lista de valores de nuh_layer_id de todas as unidades NAL incluídas no ponto de operação, em ordem crescente de valores de nuh_layer_id, e uma variável OpTid, que é igual a o mais alto Temporalld de

Petição 870160073535, de 07/12/2016, pág. 85/212 / 145 todas as unidades NAL incluídas no ponto de operação. O subconjunto do fluxo contínuo de bits associado com o ponto de operação identificado por OpLayerIdList e OpTid é a saída do processo de extração do subfluxo contínuo de bits especificado na cláusula 10 com o fluxo contínuo de bits, o mais alto Temporalld alvo igual a OpTid e a lista do identificador de camada igual a OpLayerldList alvo como entradas. O OpLayerldList e o OpTid que identificam um ponto de operação também são referidos como o OpLayerldList e o OpTid associados com o ponto de operação, respectivamente.

[00384] Particularmente, da forma circundada por um quadro na figura 30, é descrito que layer_set consiste em todos os pontos de operação que são associados com a mesma lista do identificador de camada, e alguns fluxos contínuos de bits que podem ser extraídos entre fluxos contínuos de bits são associados com pontos de operação identificado por OpLayerldList.

[00385] Especificamente, layer_set é definido, por exemplo, da forma ilustrada na figura 31.

[00386] Por exemplo, quando camadas 0, 1 e 2 forem incluídas em LayerSet[1], e as camadas 0 e 2 forem incluídas em LayerSet[2], layer_id_included_flag é definido como segue.

[00387] layer_id_included_flag[1][0] = 1 é definido, que indica que a camada 0 está incluída em LayerSet[1]. Adicionalmente, layer_id_included_flag[1][1] = 1 é definido, que indica que a camada 1 está incluída em LayerSet[1], e layer_id_included_flag[1][2] = 1 é definido, que indica que a camada 2 está incluída em LayerSet[1].

[00388] layer_id_included_flag[2][0] = 1 é definido, que indica que a camada 0 está incluída em LayerSet[2]. Adicionalmente, layer_id_included_flag [2][1] = 0 é definido, que indica que a camada 1 não está incluída em LayerSet[2], e layer_id_included_flag[2][2] = 1 é definido, que indica que a camada 2 está incluída em LayerSet[2].

Petição 870160073535, de 07/12/2016, pág. 86/212 / 145 [00389] Da forma supra descrita, o indicador que indica que há o parâmetro HRD correspondente ao exemplo de ex11 da figura 6 e o parâmetro HRD correspondente ao exemplo de ex11 é transmitido para o lado da decodificação através do vps. Por outro lado, o indicador que indica que há o parâmetro HRD correspondente ao exemplo de ex12 da figura 6 e o parâmetro HRD correspondente ao exemplo de ex12 é transmitido para o lado da decodificação através de vps_extension. Assim, o lado da decodificação pode realizar um processo de decodificação em um sincronismo apropriado.

[00390] Adicionalmente, o indicador que indica que há o parâmetro HRD correspondente ao exemplo de ex12 também pode ser transmitido para o lado da decodificação como uma mensagem SEI.

<4. Quarta modalidade>

<Um outro exemplo do método de gerenciamento do agendamento do armazenamento temporário>

[00391] Neste particular, a fim de impedir sobrefluxo ou subfluxo de um armazenamento temporário, é necessário aplicar qualquer um dos seguintes métodos em um gerenciamento de agendamento de armazenamento temporário.

[00392] Um primeiro método é um método que usa o parâmetro transmitido na sintaxe do parâmetro HRD nas primeira até terceira modalidades.

[00393] Um segundo método é um método que usa buffering_period_SEl e picture_timing_SEI.

[00394] Um terceiro método é um método que usa um parâmetro transmitido em uma camada superior a uma camada de vídeo, tal como um registro de tempo (por exemplo, um PTS ou um DTS) em uma camada do sistema.

[00395] Destes métodos, o método que usa buffering_period_SEI de acordo com o segundo método será descrito a seguir.

Petição 870160073535, de 07/12/2016, pág. 87/212 / 145 <Sintaxe de buffering_period_SEl>

[00396] A figura 32 é um diagrama que ilustra um exemplo da sintaxe de buffering_period_SEl. Números na esquerda de cada linha são números de linha adicionados para descrição.

[00397] Em uma 2^a linha da figura 32, um parâmetro de buffering_period é definido como bp_seq_parameter_set_id, e pode ser associado com um SPS.

[00398] Nas linhas subsequentes, um parâmetro de gerenciamento de agendamento de um armazenamento temporário de acúmulo pelo acúmulo de uma camada inferior é definido.

[00399] Neste particular, uma técnica para definir um parâmetro para o caso de ex12 para realizar um processo de decodificação para decodificação das respectivas camadas que incluem uma camada a ser referida através dispositivos de decodificação separados, além do caso de ex11 da realização de um processo de decodificação por um único dispositivo de decodificação, como um parâmetro para gerenciamento do armazenamento temporário por hdr_parameters() na informação de compressão de imagem ou na informação de compressão de imagem subordinada, da forma supra descrita em relação à figura 6, foi proposta.

[00400] hdr_parameters() de acordo com o primeiro método pode ser transmitido em associação com um VPS ou um SPS e, no caso do primeiro, hdr_parameters() pode ser transmitido para um conjunto de camada associado com um VPS, bem como uma única camada.

[00401] Entretanto, buffering_period_SEl ilustrado na figura 32 pode ser associado com apenas um SPS. Assim, é difícil transmitir um parâmetro associado com uma pluralidade de conjuntos de camada como em hdr_parameters() em um VPS.

[00402] Neste particular, na presente tecnologia, um gerenciamento de agendamento de um armazenamento temporário de acúmulo por

Petição 870160073535, de 07/12/2016, pág. 88/212 / 145 bufffering_period_SEI é realizado pela sintaxe ilustrada nas figuras 33 a 35. [00403] buffering_period_SEI de acordo com a presente tecnologia difere de buffering_period_SEI ilustrado na figura 32 nos seguintes pontos. [00404] Em outras palavras, uma primeira diferença reside em que buffering_period_SEI de acordo com a presente tecnologia pode ser associado com um VPS, bem como um SPS. Uma segunda diferença reside em que um parâmetro pode ser definido para cada conjunto de camada definido em um VPS quando associado com um VPS. Uma terceira diferença reside em que é possível definir um parâmetro quando todas as camadas incluídas em um conjunto de camada forem decodificadas por um único dispositivo de decodificação e um parâmetro quando respectivas camadas forem decodificadas por dispositivos de decodificação separados, da forma ilustrada na figura 6.

[00405] As figuras 33 a 35 são diagramas que ilustram um exemplo da sintaxe de buffering_period_SEI. Números na esquerda de cada linha são números de linha adicionados para descrição.

[00406] Em um exemplo da figura 33, associated_parameter_set_flag é definido em uma 2^a linha. associated_parameter_set_flag é um indicador que designa qual um VPS e um SPS é associado com buffering_period_SEI. Quando associated_parameter_set_flag for 0, isto indica uma associação com um VPS e, quando associated_parameter_set_flag for 1, isto indica uma associação com um SPS.

[00407] Um parâmetro quando associated_parameter_set_flag for 0 (VPS) é descrito nas 3a a 11 linhas. bp_video_parameter_set_id em uma 4a linha indica um correspondente VPS, e vps_num_bp_parameters em um 5a linha indica o número de bp_parameters transmitidos.

[00408] bp_layer_set_idx em uma 7^Ά linha indica um conjunto de camada correspondente a cada bp_parameter, e a sintaxe de layer_buffering_period das figuras 34 e 35 é lida com layer_buffering_period

Petição 870160073535, de 07/12/2016, pág. 89/212 / 145 em uma 10^a linha.

[00409] Um parâmetro quando associated_parameter_set_flag for 1 (SPS) é descrito como indicado por outro nas 12a até 15a linhas.

[00410] bp_seq_parameter_set_id em uma 13a linha indica um correspondente SPS, e a sintaxe de layer_buffering_period das figuras 34 e 35 é lida com layer_buffering_period em uma 14a jjnha.

[00411] Em outras palavras, de acordo com a sintaxe da figura 33, no caso do VPS, a sintaxe da figura 34 é lida pelo número de conjuntos de camada e, no caso do SPS, a sintaxe das figuras 34 e 35 é lida uma vez.

[00412] Da forma supra descrita, quando associated_parameter_set_flag for 0 (VPS), é possível transmitir o parâmetro para gerenciamento do armazenamento temporário para o conjunto de camada designado pelo VPS de acordo com a sintaxe de layer_buffering_period_SEI das figuras 34 e 35.

[00413] Na transmissão do parâmetro relacionado ao NAL e ao VCL das figuras 34 e 35, layer_specific_parameters_present_flag que serve como um indicador que indica se um parâmetro de apenas uma camada correspondente é transmitido ou não é definido da forma ilustrada nas 18a e 38a linhas. Quando este indicador for 1, isto indica que um parâmetro de apenas uma camada correspondente descrita nas 19a até 27a linhas e nas 39a até 47a linhas é transmitido. Em outras palavras, quando layer_specific_parameters_present_flag for 1, é possível transmitir um parâmetro para realizar um processo de decodificação como em ex12, além do ex11 da figura 6.

[00414] No exemplo das figuras 34 e 35, buffering_period_SEI é basicamente igual ao buffering_period_SEI supra descrito em relação à figura 32, exceto pelos supradescritos pontos e, nas outras linhas, um parâmetro de gerenciamento de agendamento de um armazenamento temporário de acúmulo pelo acúmulo de uma camada inferior é definido.

Petição 870160073535, de 07/12/2016, pág. 90/212 / 145 [00415] Assim, quando o gerenciamento de agendamento de um armazenamento temporário de acúmulo por buffering_period_SEI for realizado, é possível gerenciar um conjunto de camada, bem como uma única camada. Adicionalmente, é possível realizar um gerenciamento de agendamento tanto quando todas as camadas incluídas em um conjunto de camada forem decodificadas por um único dispositivo de decodificação quanto quando respectivas camadas forem decodificadas por dispositivos de decodificação separados.

<Dispositivo de codificação escalonável>

[00416] Um dispositivo de codificação escalonável no caso de buffering_period_SEI tem, basicamente, a mesma configuração do caso do parâmetro HRD. Assim, um exemplo de uma configuração de um dispositivo de codificação escalonável no caso de buffering_period_SEI será descrito em relação à figura 10.

[00417] Em outras palavras, como no caso do parâmetro HRD, a seção de codificação de imagem da camada base 101-1 adquire informação de imagem (informação de imagem da camada base) da camada base. A seção de codificação de imagem da camada base 101-1 codifica a informação de imagem da camada base sem relação a outras camadas, gera dados codificados (dados codificados da camada base) da camada base e transmite os dados codificados gerados.

[00418] Como no caso do parâmetro HRD, a seção de codificação de imagem da camada de melhoria 101-2 adquire informação de imagem (informação da imagem da camada de melhoria) da camada de melhoria. A seção de codificação de imagem da camada de melhoria 101-2 codifica a informação da imagem da camada de melhoria. Neste momento, a seção de codificação de imagem da camada de melhoria 101-2 realiza previsão intercamadas em relação à informação relacionada à codificação da camada base, conforme necessário.

Petição 870160073535, de 07/12/2016, pág. 91/212 / 145 [00419] Adicionalmente, a informação de gerenciamento do armazenamento temporário é suprida a partir da seção de codificação de imagem da camada base 101-1 para a seção de codificação de imagem da camada de melhoria 101-2, conforme necessário. Diferente do caso do parâmetro HRD, a seção de codificação de imagem da camada de melhoria 101-2 designa um conjunto de parâmetro associado, e designa um parâmetro de cada conjunto de camada ou um parâmetro para uma sequência de acordo com o conjunto de parâmetro designado. Então, a seção de codificação de imagem da camada de melhoria 101-2 define o parâmetro designado em relação à informação de gerenciamento do armazenamento temporário suprida a partir da seção de codificação de imagem da camada base 101-1.

[00420] Adicionalmente, diferente do caso do parâmetro HRD, a seção de codificação de imagem da camada de melhoria 101-2 define layer_specific_parameters_present_flag, e define um parâmetro de cada camada de acordo com um valor de layer_specific_parameters _present_flag. Então, a seção de codificação de imagem da camada de melhoria 101-2 codifica buffering_period_SEl e layer_buffering_period_SEl que incluem os parâmetros definidos, e supre a informação codificada para uma seção de codificação sem perdas 301.

[00421] A seção de codificação de imagem da camada de melhoria 101-2 gera dados codificados (dados codificados da camada de melhoria) da camada de melhoria através da codificação exposta, e transmite os dados codificados gerados.

[00422] Como no caso do parâmetro HRD, a seção de controle de codificação 102 controla o processo de codificação das seções de codificação de imagem em camada 101, por exemplo, na visualização da relação de referência das seções de codificação de imagem em camada 101.

<Exemplo de configuração da seção de codificação de imagem em camada>

Petição 870160073535, de 07/12/2016, pág. 92/212 / 145 [00423] A figura 36 é um diagrama de blocos que ilustra um exemplo de uma configuração principal da seção de codificação de imagem da camada de melhoria 101-2 no caso de buffering_period_SEI.

[00424] Adicionalmente, a seção de codificação de imagem da camada base 101-1 no caso de buffering_period_SEI tem, basicamente, a mesma configuração da seção de codificação de imagem da camada de melhoria 1012 da figura 36, exceto em que um tipo de uma imagem que serve como um alvo é diferente. A título de descrição, no exemplo da figura 36, uma configuração da seção de codificação de imagem da camada de melhoria 1012 será descrita como um exemplo.

[00425] A seção de codificação de imagem da camada de melhoria 101-2 da figura 36 difere da seção de codificação de imagem da camada de melhoria 101-2 da figura 11 em que a seção de codificação sem perdas 116 é substituída pela seção de codificação sem perdas 301, a seção de definição do tipo de HRD 128 não é provida e uma seção de definição da SEI do período de armazenamento temporário 302 é adicionada.

[00426] Em outras palavras, a seção de codificação de imagem da camada de melhoria 101-2 da figura 36 inclui uma seção de conversão A/D 111, um armazenamento temporário de reordenamento de tela 112, uma seção de operação 113, uma seção de transformada ortogonal 114, uma seção de quantização 115, uma seção de codificação sem perdas 301, um armazenamento temporário de acúmulo 117, uma seção de quantização inversa 118 e uma seção de transformada ortogonal inversa 119. A seção de codificação de imagem da camada de melhoria 101-2 inclui adicionalmente uma seção de operação 120, um filtro em laço 121, uma memória de quadro 122, uma seção de seleção 123, uma seção de intraprevisão 124, uma seção de previsão / compensação de movimento 125, uma seção de seleção de imagem previsiva 126 e uma seção de controle de taxa 127. A seção de codificação de imagem da camada de melhoria 101-2 inclui adicionalmente a seção de

Petição 870160073535, de 07/12/2016, pág. 93/212 / 145 definição da SEI do período de armazenamento temporário 302.

[00427] Como a seção de codificação sem perdas 116 da figura 11, a seção de codificação sem perdas 301 codifica os coeficientes de transformada quantizados na seção de quantização 115 de acordo com um esquema de codificação arbitrário. Já que dados de coeficiente são quantizados sob controle da seção de controle de taxa 127, a quantidade de codificação tornase um valor alvo (ou se aproxima de um valor alvo) definido pela seção de controle de taxa 127.

[00428] Como a seção de codificação sem perdas 116, a seção de codificação sem perdas 301 adquire informação que indica um modo de intraprevisão ou congêneres a partir da seção de intraprevisão 124, e adquire informação que indica um modo de interprevisão, a informação do vetor de movimento diferencial ou congêneres a partir da seção de previsão / compensação de movimento 125.

[00429] Adicionalmente, diferente da seção de codificação sem perdas 116, a seção de codificação sem perdas 301 adquire informação codificada (sintaxe) de layer_buffering_period_SEI a partir da seção de definição da SEI do período de armazenamento temporário 302, além de buffering_period_SEI. [00430] Adicionalmente, como a seção de codificação sem perdas 116, a seção de codificação sem perdas 301 gera apropriadamente uma unidade NAL da camada de melhoria que inclui um conjunto de parâmetro de sequência (SPS), um conjunto de parâmetro de figura (PPS) e congêneres. Como a seção de codificação sem perdas 116, a seção de codificação sem perdas 301 codifica vários tipos de informação de acordo com um esquema de codificação arbitrário, e define (multiplexa) a informação codificada como parte de dados codificados (também referido como um fluxo contínuo codificado). A seção de codificação sem perdas 301 supre os dados codificados obtidos pela codificação para serem acumulados no armazenamento temporário de acúmulo 117.

Petição 870160073535, de 07/12/2016, pág. 94/212 / 145 [00431] Adicionalmente, diferente da seção de codificação sem perdas 116, por exemplo, quando houver uma seção de codificação de imagem da camada de melhoria 101-3 de uma camada superior, da forma indicada por uma linha pontilhada, e houver uma solicitação proveniente de sua seção de definição da SEI do período de armazenamento temporário 302, a seção de codificação sem perdas 301 supre informação de gerenciamento do armazenamento temporário de acúmulo 117 para a seção de codificação de imagem da camada de melhoria 101-3 da camada superior.

[00432] O armazenamento temporário de acúmulo 117 mantém temporariamente os dados codificados (dados codificados da camada de melhoria) supridos a partir da seção de codificação sem perdas 301. O armazenamento temporário de acúmulo 117 transmite os dados codificados da camada de melhoria mantidos para um dispositivo de gravação (mídia de gravação), um caminho de transmissão ou congêneres (não ilustrados) em um estágio subsequente em um certo sincronismo. Em outras palavras, o armazenamento temporário de acúmulo 117 serve como uma seção de transmissão que também transmite os dados codificados.

[00433] A seção de definição da SEI do período de armazenamento temporário 302 designa um conjunto de parâmetro associado, e designa um parâmetro de cada conjunto de camada ou um parâmetro para uma sequência de acordo com o conjunto de parâmetro designado. Adicionalmente, a seção de definição da SEI do período de armazenamento temporário 302 define o parâmetro designado em relação à informação de gerenciamento do armazenamento temporário suprida a partir da seção de codificação sem perdas 301 (a camada inferior) da seção de codificação de imagem da camada base 101-1. Por exemplo, este parâmetro é um parâmetro de acúmulo proveniente de uma camada inferior. Adicionalmente, a seção de definição da SEI do período de armazenamento temporário 302 define layer_specific_parameters_present_flag e define um parâmetro de cada

Petição 870160073535, de 07/12/2016, pág. 95/212 / 145 camada de acordo com o valor definido de layer_specific _parameters _present_flag.

[00434] A seção de definição da SEI do período de armazenamento temporário 302 codifica buffering_period_SEl e layer_buffering_period_SEl que incluem os parâmetros definidos, como exposto, e supre a informação codificada para a seção de codificação sem perdas 301.

<Exemplo de configuração da seção de definição da SEI do período de armazenamento temporário>

[00435] A figura 37 é um diagrama de blocos que ilustra um exemplo de uma configuração da seção de definição da SEI do período de armazenamento temporário da figura 36.

[00436] Em um exemplo da figura 37, a seção de definição da SEI do período de armazenamento temporário 302 é configurada para incluir uma seção de definição do conjunto de parâmetro associado 311, um armazenamento temporário do conjunto de camada 312, uma seção de definição da SEI do período de armazenamento temporário de camada 313 e uma seção de designação da transmissão do parâmetro de camada 314.

[00437] A seção de definição do conjunto de parâmetro associado 311 realiza uma designação relacionada a associated_parameter_set_flag de acordo com a operação do usuário. Em outras palavras, o usuário designa qual de um VPS (flag = 0) e um SPS (flag = 1) é associado com buffering_period_SEl. A seção de definição do conjunto de parâmetro associado 311 designa um valor de associated_parameter_set_flag, e supre o valor designado para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00438] No caso de associated_parameter_set_flag = 0, isto é, quando buffering_period_SEl for associado com um VPS, a informação relacionada a um conjunto de camada armazenada em um VPS da informação de compressão da imagem da camada de melhoria é suprida e acumulada no

Petição 870160073535, de 07/12/2016, pág. 96/212 / 145 armazenamento temporário do conjunto de camada 312 através da seção de codificação sem perdas 301. O armazenamento temporário do conjunto de camada 312 acumula a informação relacionada ao conjunto de camada, e supre a informação relacionada ao conjunto de camada para a seção de definição da SEI do período de armazenamento temporário de camada 313 em um certo sincronismo.

[00439] Adicionalmente, a informação de gerenciamento do armazenamento temporário na camada base é suprida a partir da seção de codificação sem perdas 301 da seção de codificação de imagem da camada base 101-1 para a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00440] A seção de designação da transmissão do parâmetro de camada 314 designa layer_specific_parameters_present_flag de acordo com a operação do usuário. Em outras palavras, o usuário designa um valor de layer_specific_parameters_present_flag que indica se uma definição de parâmetro de cada camada é realizada ou não. A seção de designação da transmissão do parâmetro de camada 314 designa um valor de layer_specific_parameters_present_flag, e supre o valor designado para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00441] A seção de definição da SEI do período de armazenamento temporário de camada 313 realiza o processo de codificação de buffering_period_SEI e layer_buffering_period_SEl, e supre informação codificada destes para a seção de codificação sem perdas 301.

[00442] Especificamente, a seção de definição da SEI do período de armazenamento temporário de camada 313 define o parâmetro designado de acordo com associated_parameter_set_flag suprido a partir da seção de definição do conjunto de parâmetro associado 311 em relação à informação de gerenciamento do armazenamento temporário suprida a partir da seção de

Petição 870160073535, de 07/12/2016, pág. 97/212 / 145 codificação sem perdas 301 (a camada inferior) da seção de codificação de imagem da camada base 101-1. Em outras palavras, quando um valor de associated_parameter_set_flag for 1 (= VPS), a seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro para cada conjunto de camada com base na informação relacionada ao conjunto de camada suprida a partir do armazenamento temporário do conjunto de camada 312. Adicionalmente, quando um valor de associated_parameter_set_flag for 0 (= SPS), a seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro para uma sequência.

[00443] Adicionalmente, a seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro de cada camada de acordo com um valor de layer_specific_parameters _present_flag, isto é, quando um valor de layer_specific_parameters_present_flag for 1. Adicionalmente, a seção de definição da SEI do período de armazenamento temporário de camada 313 codifica buffering_period_SEI e layer_buffering_period_SEI que incluem o parâmetro definido, e supre a informação codificada para a seção de codificação sem perdas 301.

<Fluxo do processo de codificação>

[00444] A seguir, o fluxo do processo realizado pelo dispositivo de codificação escalonável 100 no caso de buffering_period_SEI será descrito. O fluxo do processo de codificação é, basicamente, igual ao fluxo do processo de codificação supra descrito em relação à figura 14, e uma descrição deste é omitida.

<Fluxo do processo de codificação de camada>

[00445] A seguir, o processo de codificação de camada na etapa S102 da figura 14 será descrito em relação a um fluxograma da figura 38. Nas etapas S311 a S323, S326 e S327 da figura 38, basicamente, os mesmos processos das etapas S111 a S123, S126 e S127 da figura 15 são realizados e,

Petição 870160073535, de 07/12/2016, pág. 98/212 / 145 assim, uma descrição destes é omitida.

[00446] Em outras palavras, na etapa S324, a seção de definição da SEI do período de armazenamento temporário 302 realiza um processo de codificação da SEI do período de armazenamento temporário. O processo de codificação da SEI do período de armazenamento temporário será descrito a seguir em relação à figura 39, e através deste processo, os respectivos parâmetros são definidos, e informação de buffering_period_SEI e de layer_buffering_period_SEI que inclui os parâmetros definidos é codificada e suprida para a seção de codificação sem perdas 301.

[00447] Na etapa S325, a seção de codificação sem perdas 301 codifica os coeficientes quantizados no processo da etapa S318. Em outras palavras, codificação sem perdas, tais como codificação de comprimento variável ou codificação aritmética, é realizada nos dados correspondentes a uma imagem diferencial.

[00448] Neste momento, a seção de codificação sem perdas 301 codifica a informação relacionada ao modo de previsão da imagem previsiva selecionada no processo da etapa S315, e adiciona a informação codificada nos dados codificados obtidos pela codificação da imagem diferencial. Em outras palavras, a seção de codificação sem perdas 301 também codifica, por exemplo, a informação de acordo com a informação do modo de intraprevisão ideal suprida a partir da seção de intraprevisão 124 ou do modo de interprevisão ideal suprida a partir da seção de previsão / compensação de movimento 125, e adiciona a informação codificada nos dados codificados. Adicionalmente, a seção de codificação sem perdas 301 também codifica, por exemplo, a informação codificada (sintaxe) de buffering_period_SEI e de layer_buffering_period_SEI suprida no processo da etapa S324 de acordo com um certo esquema de codificação, e adiciona a informação codificada nos dados codificados.

<Fluxo do processo de definição da SEI do período de

Petição 870160073535, de 07/12/2016, pág. 99/212 / 145 armazenamento temporário>

[00449] A seguir, o processo de codificação da SEI do período de armazenamento temporário da etapa S324 da figura 38 será descrito em relação a um fluxograma da figura 39.

[00450] Por exemplo, o armazenamento temporário do conjunto de camada 312 acumula a informação relacionada ao conjunto de camada e supre a informação relacionada ao conjunto de camada para a seção de definição da SEI do período de armazenamento temporário de camada 313 em um certo sincronismo.

[00451] Na etapa S331, a seção de definição do conjunto de parâmetro associado 311 designa um conjunto de parâmetro associado de acordo com a operação do usuário. Em outras palavras, o usuário designa qual de um VPS (flag = 0) e um SPS (flag = 1) é associado com buffering_period_SEL [00452] Na etapa S332, a seção de definição do conjunto de parâmetro associado 311 determina se o conjunto de parâmetro associado é um VPS ou não. Quando for determinado que o conjunto de parâmetro associado é um VPS, na etapa S332, o processo prossegue para a etapa S333.

[00453] Na etapa S333, a seção de definição do conjunto de parâmetro associado 311 designa um parâmetro de cada conjunto de camada. Em outras palavras, a seção de definição do conjunto de parâmetro associado 311 designa um valor de associated_parameter_set_flag (flag = 0), e supre o valor designado para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00454] Neste momento, a informação relacionada ao conjunto de camada armazenada no VPS da informação de compressão da imagem da camada de melhoria é suprida para, e acumulada no, armazenamento temporário do conjunto de camada 312 através da seção de codificação sem perdas 301. Então, a seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro de cada conjunto de camada

Petição 870160073535, de 07/12/2016, pág. 100/212 / 145 com base na informação relacionada ao conjunto de camada suprida a partir do armazenamento temporário do conjunto de camada 312 em relação à informação de gerenciamento do armazenamento temporário suprida a partir da seção de codificação sem perdas 301 (a camada inferior) da seção de codificação de imagem da camada base 101-1.

[00455] Neste particular, quando for determinado que o conjunto de parâmetro associado não é um VPS, na etapa S332, o processo prossegue para a etapa S334.

[00456] Na etapa S334, a seção de definição do conjunto de parâmetro associado 311 designa um parâmetro de uma sequência. Em outras palavras, a seção de definição do conjunto de parâmetro associado 311 designa um valor de associated_parameter_set_flag (flag = 1) e supre o valor designado para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00457] A seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro de uma sequência em relação à informação de gerenciamento do armazenamento temporário suprida a partir da seção de codificação sem perdas 301 (a camada inferior) da seção de codificação de imagem da camada base 101-1.

[00458] Na etapa S335, a seção de designação da transmissão do parâmetro de camada 314 define layer_specific_parameters_present_flag de acordo com a operação do usuário. Em outras palavras, o usuário designa um valor de layer_specific_parameters_present_flag que indica se a definição de um parâmetro de cada camada é realizada ou não.

[00459] A seção de designação da transmissão do parâmetro de camada 314 supre o valor definido de layer_specific_parameters_present_flag para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00460] Na etapa S336, a seção de definição da SEI do período de

Petição 870160073535, de 07/12/2016, pág. 101/212 / 145 armazenamento temporário de camada 313 determina se um valor de layer_specific_parameters_present_flag é 1 ou não. Quando for determinado que um valor de layer_specific_parameters_present_flag é 1, na etapa S336, o processo prossegue para a etapa S337.

[00461] Na etapa S337, a seção de definição da SEI do período de armazenamento temporário de camada 313 define um parâmetro de cada camada.

[00462] Adicionalmente, quando um valor de layer_specific_parameters_present_flag for determinado como 0, na etapa S336, o processo da etapa S337 é ignorado.

[00463] Na etapa S338, a seção de definição da SEI do período de armazenamento temporário de camada 313 codifica buffering_period_SEI e layer_buffering_period_SEI que incluem os parâmetros definidos, como exposto, e supre a informação codificada para a seção de codificação sem perdas 301.

[00464] Já que buffering_period_SEI é associado com um VPS, bem como um SPS, como exposto, quando o gerenciamento de agendamento de um armazenamento temporário de acúmulo por buffering_period_SEI for realizado, é possível gerenciar um conjunto de camada, bem como uma única camada.

[00465] Adicionalmente, já que um parâmetro de cada camada é transmitido, é possível realizar um gerenciamento de agendamento tanto quando todas as camadas incluídas em um conjunto de camada forem decodificadas por um único dispositivo de decodificação quanto quando respectivas camadas forem decodificadas por dispositivos de decodificação separados.

<Dispositivo de decodificação escalonável>

[00466] Uma configuração de um dispositivo de decodificação escalonável no caso de buffering_period_SEI é, basicamente, igual ao caso do

Petição 870160073535, de 07/12/2016, pág. 102/212 / 145 parâmetro HRD. Assim, um exemplo de uma configuração de um dispositivo de decodificação escalonável no caso de buffering_period_SEI será descrito em relação à figura 20.

[00467] Em outras palavras, como no caso do parâmetro HRD, a seção de decodificação de imagem da camada base 201-1 é uma seção de decodificação de imagem correspondente à seção de codificação de imagem da camada base 101-1 da figura 10, e adquire, por exemplo, os dados codificados da camada base obtidos pela codificação da informação de imagem da camada base através da seção de codificação de imagem da camada base 101-1. A seção de decodificação de imagem da camada base 201-1 decodifica os dados codificados da camada base sem relação a outras camadas, reconstrói a informação de imagem da camada base e transmite a informação de imagem da camada base.

[00468] A seção de decodificação de imagem da camada de melhoria 201-2 é uma seção de decodificação de imagem correspondente à seção de codificação de imagem da camada de melhoria 101-2, e adquire, por exemplo, os dados codificados da camada de melhoria obtidos pela codificação da informação da imagem da camada de melhoria através da seção de codificação de imagem da camada de melhoria 101-2, como no caso do parâmetro HRD. A seção de decodificação de imagem da camada de melhoria 201-2 decodifica os dados codificados da camada de melhoria. Neste momento, a seção de decodificação de imagem da camada de melhoria 201-2 realiza a previsão intercamadas em relação à informação relacionada à decodificação da camada base, conforme necessário.

[00469] Adicionalmente, diferente do caso do parâmetro HRD, buffering_period_SEI da figura 33 e layer_buffering_period_SEI das figuras 34 e 35 são adicionados em cada um dos dados codificados (fluxo contínuo de bits) e transmitidos. Diferente do caso do parâmetro HRD, a seção de decodificação de imagem da camada de melhoria 201-2 adquire informação

Petição 870160073535, de 07/12/2016, pág. 103/212 / 145 relacionada a um conjunto de parâmetro associado a partir de buffering_period_SEI, e decodifica um parâmetro de cada conjunto de camada ou um parâmetro para uma sequência de acordo com um conjunto de parâmetro indicado pela informação adquirida.

[00470] Adicionalmente, diferente do caso do parâmetro HRD, a seção de decodificação de imagem da camada de melhoria 201-2 recebe layer_specific _parameters _present_flag a partir de layer_buffering_period_SEI, e decodifica um parâmetro de cada camada de acordo com um valor de layer_specific_parameters_present_flag. Então, a seção de decodificação de imagem da camada de melhoria 201-2 monitora o armazenamento temporário de acúmulo com base nos parâmetros decodificados.

[00471] Adicionalmente, no caso do parâmetro que não é um parâmetro de cada camada, isto é, o parâmetro acumulado a partir da camada inferior, a seção de decodificação de imagem da camada de melhoria 201-2 monitora o armazenamento temporário de acúmulo em relação à informação de gerenciamento do armazenamento temporário suprida a partir de uma seção de decodificação sem perdas 351 da seção de decodificação de imagem da camada base 201-1.

[00472] Através da decodificação, a seção de decodificação de imagem da camada de melhoria 201-2 decodifica os dados codificados da camada de melhoria, reconstrói a informação da imagem da camada de melhoria e transmite a informação da imagem da camada de melhoria.

[00473] Como no caso do parâmetro HRD, a seção de controle de decodificação 202 controla o processo de decodificação das seções de decodificação da imagem em camada 201, por exemplo, na visualização da relação de referência das seções de decodificação da imagem em camada 201.

<Exemplo de uma configuração da seção de decodificação de imagem em camada>

Petição 870160073535, de 07/12/2016, pág. 104/212 / 145 [00474] A figura 40 é um diagrama de blocos que ilustra um exemplo de uma configuração principal da seção de decodificação de imagem da camada de melhoria 201-2 no caso de buffering_period_SEI.

[00475] A seção de decodificação de imagem da camada base 201-1 no caso de buffering_period_SEI tem, basicamente, a mesma configuração da seção de decodificação de imagem da camada de melhoria 201-2 da figura 40, exceto em que um tipo de uma imagem que serve como um alvo é diferente. A título de descrição, no exemplo da figura 40, uma configuração da seção de decodificação de imagem da camada de melhoria 201-2 será descrita como um exemplo.

[00476] A seção de decodificação de imagem da camada de melhoria 201-2 da figura 40 difere da seção de decodificação de imagem da camada de melhoria 201-2 da figura 21, em que a seção de decodificação sem perdas 212 é substituída pela seção de decodificação sem perdas 351, a seção de decodificação do tipo de HRD 224 não é provida e uma seção de decodificação da SEI do período de armazenamento temporário 352 é adicionada.

[00477] Em outras palavras, a seção de decodificação de imagem da camada de melhoria 201-2 inclui um armazenamento temporário de acúmulo 211, uma seção de decodificação sem perdas 351, uma seção de quantização inversa 213, uma seção de transformada ortogonal inversa 214, uma seção de operação 215, um filtro em laço 216, um armazenamento temporário de reordenamento de tela 217 e uma seção de conversão D/A 218. A seção de decodificação de imagem da camada de melhoria 201-2 inclui adicionalmente uma memória de quadro 219, uma seção de seleção 220, uma seção de intraprevisão 221, uma seção de previsão / compensação de movimento 222 e uma seção de seleção 223. A seção de decodificação de imagem da camada de melhoria 201-2 inclui adicionalmente a seção de decodificação da SEI do período de armazenamento temporário 352.

Petição 870160073535, de 07/12/2016, pág. 105/212 / 145 [00478] O armazenamento temporário de acúmulo 211 é uma seção de recepção que recebe os dados codificados da camada de melhoria transmitidos. Informação necessária para decodificação, tal como a informação do modo de previsão, é adicionada nos dados codificados da camada de melhoria. buffering_period_SEI da figura 33 e layer_buffering_period_SEI das figuras 34 e 35 são adicionados nos dados codificados da camada de melhoria. O armazenamento temporário de acúmulo 211 recebe e acumula os dados codificados da camada de melhoria transmitidos, e supre os dados codificados para a seção de decodificação sem perdas 212 em um certo sincronismo.

[00479] Adicionalmente, o armazenamento temporário de acúmulo 211 recebe informação decodificada de layer_buffering_period_SEI suprida a partir da seção de decodificação da SEI do período de armazenamento temporário 352 e realiza gerenciamento do armazenamento temporário com base na informação decodificada de layer_buffering_period_SEI.

[00480] Como a seção de decodificação sem perdas 212 da figura 21, a seção de decodificação sem perdas 351 decodifica a informação que foi codificada pela seção de codificação sem perdas 301 e suprida a partir do armazenamento temporário de acúmulo 211 de acordo com um esquema correspondente ao esquema de codificação da seção de codificação sem perdas 301. A seção de decodificação sem perdas 351 supre dados de coeficiente quantizados de uma imagem diferencial obtida pela decodificação para a seção de quantização inversa 213.

[00481] Adicionalmente, como a seção de decodificação sem perdas 212, a seção de decodificação sem perdas 351 extrai e adquire apropriadamente a unidade NAL que inclui o conjunto de parâmetro de vídeo (VPS), o conjunto de parâmetro de sequência (SPS), o conjunto de parâmetro de figura (PPS) e congêneres que são incluídos nos dados codificados da camada de melhoria. Como a seção de decodificação sem perdas 212, a seção

Petição 870160073535, de 07/12/2016, pág. 106/212 / 145 de decodificação sem perdas 351 extrai a informação relacionada ao modo de previsão ideal da informação, determina qual do modo de intraprevisão e do modo de interprevisão foi selecionado como o modo de previsão ideal com base na informação, e supre a informação relacionada ao modo de previsão ideal para uma da seção de intraprevisão 221 e da seção de previsão / compensação de movimento 222 que corresponde ao modo determinado como selecionado.

[00482] Em outras palavras, por exemplo, na seção de decodificação de imagem da camada de melhoria 201-2, quando o modo de intraprevisão for selecionado como o modo de previsão ideal, a informação relacionada ao modo de previsão ideal é suprida para a seção de intraprevisão 221. Adicionalmente, por exemplo, na seção de decodificação de imagem da camada de melhoria 201-2, quando o modo de interprevisão for selecionado como o modo de previsão ideal, a informação relacionada ao modo de previsão ideal é suprida para a seção de previsão / compensação de movimento 222.

[00483] Adicionalmente, similarmente à seção de decodificação sem perdas 212, a seção de decodificação sem perdas 351 extrai, por exemplo, a informação necessária para quantização inversa, tais como a matriz de quantização ou o parâmetro de quantização, da unidade NAL ou congêneres, e supre a informação extraída para a seção de quantização inversa 213. Adicionalmente, diferente da seção de decodificação sem perdas 212, a seção de decodificação sem perdas 351 analisa sintaticamente e separa, por exemplo, buffering_period_SEl da figura 33 e layer_buffering_period_SEl das figuras 34 e 35, e supre buffering_period_SEl da figura 33 e layer_buffering_period_SEl das figuras 34 e 35 para a seção de decodificação da SEI do período de armazenamento temporário 352.

[00484] A seção de decodificação da SEI do período de armazenamento temporário 352 decodifica um parâmetro de cada conjunto de

Petição 870160073535, de 07/12/2016, pág. 107/212 / 145 camada ou um parâmetro para uma sequência de acordo com associated_parameter_set_flag de buffering_period_SEl supridos a partir da seção de decodificação sem perdas 351. Em outras palavras, quando um valor de associated_parameter_set_flag for 0 (= VPS), a seção de decodificação da SEI do período de armazenamento temporário de camada 352 recebe o parâmetro de cada conjunto de camada com base na informação relacionada ao conjunto de camada suprida a partir do armazenamento temporário do conjunto de camada 312. Então, a seção de decodificação da SEI do período de armazenamento temporário de camada 352 decodifica o parâmetro recebido de cada conjunto de camada em relação à informação de gerenciamento do armazenamento temporário da camada base suprida a partir da seção de decodificação sem perdas (a camada inferior) 351 da seção de decodificação de imagem da camada base 201-1.

[00485] Adicionalmente, quando um valor de associated_parameter_set_flag for 1 (= SPS), a seção de definição da SEI do período de armazenamento temporário de camada 313 recebe um parâmetro para uma sequência. Então, a seção de decodificação da SEI do período de armazenamento temporário de camada 352 decodifica o parâmetro recebido para a sequência em relação à informação de gerenciamento do armazenamento temporário da camada base da seção de decodificação sem perdas (a camada inferior) 351 da seção de decodificação de imagem da camada base 201-1.

[00486] Adicionalmente, a seção de decodificação da SEI do período de armazenamento temporário 352 recebe layer_specific _parameters _present_flag de layer_buffering_period_SEl suprido a partir da seção de decodificação sem perdas 351, e recebe e decodifica um parâmetro de cada camada de acordo com um valor de layer_specific_parameters_present_flag, isto é, quando um valor de layer_specific_parameters_present_flag for 1. Então, a seção de

Petição 870160073535, de 07/12/2016, pág. 108/212

100 / 145 decodificação da SEI do período de armazenamento temporário de camada 352 supre a informação decodificada de layer_buffering_period_SEI, decodificada de acordo com associated_parameter_set_flag e layer_specific_parameters_present_flag para o armazenamento temporário de acúmulo 211.

[00487] Adicionalmente, por exemplo, quando houver uma seção de decodificação de imagem da camada de melhoria 201-3 de uma camada superior, da forma indicada por uma linha pontilhada, e houver uma solicitação a partir de sua seção de decodificação da SEI do período de armazenamento temporário 352, a seção de decodificação sem perdas 351 supre a informação de gerenciamento do armazenamento temporário de acúmulo 211 para a seção de decodificação de imagem da camada de melhoria 201-3 da camada superior.

<Exemplo de configuração da seção de decodificação da SEI do período de armazenamento temporário>

[00488] A figura 41 é um diagrama de blocos que ilustra um exemplo de uma configuração da seção de decodificação da SEI do período de armazenamento temporário da figura 40.

[00489] Em um exemplo da figura 41, a seção de decodificação da SEI do período de armazenamento temporário 352 é configurada para incluir uma seção de decodificação do conjunto de parâmetro associado 361, um armazenamento temporário do conjunto de camada 362, uma seção de decodificação da SEI do período de armazenamento temporário de camada 363 e uma seção de recepção da transmissão do parâmetro de camada 364.

[00490] A seção de decodificação sem perdas 351 analisa sintaticamente e separa buffering_period_SEI e layer_buffering_period_SEI, e supre informação codificada de buffering_period_SEI e associated_parameter_set_flag para a seção de decodificação do conjunto de parâmetro associado 361. Adicionalmente, a seção de decodificação sem

Petição 870160073535, de 07/12/2016, pág. 109/212

101 / 145 perdas 351 supre informação codificada de layer_buffering_period_SEI para a seção de decodificação da SEI do período de armazenamento temporário de camada 363, e supre layer_specific_parameters_present_flag nesta para a seção de recepção da transmissão do parâmetro de camada 364.

[00491] A seção de decodificação do conjunto de parâmetro associado 361 recebe associated_parameter_set_flag suprida a partir da seção de decodificação sem perdas 351, e analisa a informação codificada de buffering_period_SEI de acordo com um valor desta. Em outras palavras, a seção de decodificação do conjunto de parâmetro associado 361 adquire informação necessária a partir da informação codificada de buffering_period_SEI de acordo com um valor de associated_parameter_set_flag, e supre a informação adquirida para a seção de decodificação da SEI do período de armazenamento temporário de camada 363.

[00492] No caso de associated_parameter_set_flag = 0, isto é, quando buffering_period_SEI for associado com um VPS, a seção de decodificação sem perdas 351 supre a informação relacionada ao conjunto de camada armazenada no VPS da informação de compressão da imagem da camada de melhoria para o armazenamento temporário do conjunto de camada 362. O armazenamento temporário do conjunto de camada 362 acumula a informação relacionada ao conjunto de camada, e supre a informação relacionada ao conjunto de camada para a seção de decodificação da SEI do período de armazenamento temporário de camada 363 em um certo sincronismo.

[00493] A seção de decodificação da SEI do período de armazenamento temporário de camada 363 analisa a informação codificada de layer_buffering_period_SEI de acordo com associated_parameter_set_flag suprido a partir da seção de decodificação do conjunto de parâmetro associado 361 em relação à informação de gerenciamento do armazenamento temporário da camada base da seção de decodificação sem perdas (a camada

Petição 870160073535, de 07/12/2016, pág. 110/212

102 / 145 inferior) 351 da seção de decodificação de imagem da camada base 201-1. Então, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 decodifica o parâmetro de cada conjunto de camada ou o parâmetro para a sequência usando a informação codificada analisada.

[00494] Em outras palavras, quando um valor de associated_parameter_set_flag for 1 (= VPS), a seção de decodificação da SEI do período de armazenamento temporário de camada 363 decodifica o parâmetro de cada conjunto de camada com base na informação relacionada ao conjunto de camada suprida a partir do armazenamento temporário do conjunto de camada 362. Adicionalmente, quando um valor de associated_parameter_set_flag for 0 (= SPS), a seção de decodificação da SEI do período de armazenamento temporário de camada 363 decodifica o parâmetro para a sequência.

[00495] Adicionalmente, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 recebe layer_specific_parameters_present_flag suprido a partir da seção de recepção da transmissão do parâmetro de camada 364, e analisa a informação codificada de layer_buffering_period_SEI de acordo com um valor desta. Quando um valor de layer_specific_parameters_present_flag for 1, a seção de decodificação da SEI do período de armazenamento temporário de camada

363 decodifica o parâmetro de cada camada.

[00496] Então, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 supre a informação decodificada de layer_buffering_period_SEI, decodificada de acordo com associated_parameter_set_flag e layer_specific_parameters_present_flag, para o armazenamento temporário de acúmulo 211.

[00497] A seção de recepção da transmissão do parâmetro de camada

364 analisa um valor de layer_specific_parameters_present_flag, e supre o

Petição 870160073535, de 07/12/2016, pág. 111/212

103 / 145 valor analisado de layer_specific_parameters_present_flag para a seção de decodificação da SEI do período de armazenamento temporário de camada 363.

<Fluxo do processo de decodificação>

[00498] A seguir, o fluxo do processo realizado pelo dispositivo de decodificação escalonável 200 no caso de buffering_period_SEI será descrito. O fluxo do processo de decodificação é, basicamente, igual ao fluxo do processo de decodificação supra descrito em relação à figura 23 e, assim, uma descrição deste é omitida.

<Fluxo do processo de decodificação de camada>

[00499] A seguir, o processo de decodificação de camada da etapa S202 da figura 23 será descrito em relação a um fluxograma da figura 42. Nas etapas S351 e S354 até S361 da figura 42, basicamente, os mesmos processos das etapas S211 e S214 até S221 da figura 24 são realizados e, assim, uma descrição destes é omitida.

[00500] Em outras palavras, na etapa S352, a seção de decodificação sem perdas 351 decodifica o fluxo contínuo de bits (a informação de imagem diferencial codificada) da camada de melhoria suprido a partir do armazenamento temporário de acúmulo 211. Em outras palavras, a figura I, a figura P e a figura B codificadas pela seção de codificação sem perdas 301 são decodificados. Neste momento, vários tipos de informação diferentes da informação de imagem diferencial incluída no fluxo contínuo de bits, tal como a informação de cabeçalho, também são decodificados. Por exemplo, a seção de decodificação sem perdas 351 analisa sintaticamente e separa buffering_period_SEI e layer_buffering_period_SEI, e supre buffering_period_SEI e layer_buffering_period_SEI para a seção de decodificação da SEI do período de armazenamento temporário 352.

[00501] Na etapa S353, a seção de decodificação da SEI do período de armazenamento temporário 352 realiza um processo de decodificação da SEI

Petição 870160073535, de 07/12/2016, pág. 112/212

104 / 145 do período de armazenamento temporário. O processo de decodificação da SEI do período de armazenamento temporário será descrito a seguir em relação à figura 43.

[00502] layer_buffering_period_SEI é decodificado na etapa S353, e a informação decodificada de layer_buffering_period_SEI é suprida para o armazenamento temporário de acúmulo 211. Então, o armazenamento temporário de acúmulo 211 realiza o gerenciamento do armazenamento temporário com base na informação decodificada de layer_buffering_period_SEI.

<Fluxo do processo de decodificação da SEI do período de armazenamento temporário>

[00503] A seguir, o processo de decodificação da SEI do período de armazenamento temporário da etapa S353 da figura 42 será descrito em relação a um fluxograma da figura 43.

[00504] A seção de decodificação sem perdas 351 analisa sintaticamente e separa buffering_period_SEI e layer_buffering_period_SEI, e supre a informação codificada de buffering_period_SEI e associated_parameter_set_flag para a seção de decodificação do conjunto de parâmetro associado 361. Adicionalmente, a seção de decodificação sem perdas 351 supre a informação codificada de layer_buffering_period_SEI para a seção de decodificação da SEI do período de armazenamento temporário de camada 363, e supre layer_specific__parameters_present_flag para a seção de recepção da transmissão do parâmetro de camada 364.

[00505] Na etapa S371, a seção de decodificação do conjunto de parâmetro associado 361 recebe associated_parameter_set_flag, que serve como a informação relacionada ao conjunto de parâmetro associado suprida a partir da seção de decodificação sem perdas 351. Na etapa S372, a seção de decodificação do conjunto de parâmetro associado 361 determina se o conjunto de parâmetro associado é ou não o VPS em relação ao valor de

Petição 870160073535, de 07/12/2016, pág. 113/212

105 / 145 associated_parameter_set_flag suprido a partir da seção de decodificação sem perdas 351.

[00506] Quando um valor de associated_parameter_set_flag for determinado como 0, na etapa S372, isto é, quando o conjunto de parâmetro associado for determinado como o VPS, o processo prossegue para a etapa S373. Neste momento, a seção de decodificação do conjunto de parâmetro associado 361 adquire informação necessária (informação relacionada ao parâmetro de cada conjunto de camada) a partir da informação codificada de buffering_period_SEI, e supre a informação adquirida para a seção de decodificação da SEI do período de armazenamento temporário de camada 363.

[00507] Em resposta a isto, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 analisa a informação codificada de layer_buffering_period_SEI de acordo com associated_parameter_set_flag = 1 suprido a partir da seção de decodificação do conjunto de parâmetro associado 361 em relação à informação necessária obtida a partir da informação codificada de buffering_period_SEI e da informação de gerenciamento do armazenamento temporário da camada base da seção de decodificação sem perdas (a camada inferior) 351 da seção de decodificação de imagem da camada base 201-1. Então, na etapa S373, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 decodifica o parâmetro de cada conjunto de camada usando a informação codificada analisada. A seção de decodificação da SEI do período de armazenamento temporário de camada 363 supre a informação decodificada de layer_buffering_period_SEI obtida pela decodificação do parâmetro de cada conjunto de camada para o armazenamento temporário de acúmulo 211.

[00508] Adicionalmente, quando um valor de associated_parameter_set_flag for determinado como 1, na etapa S372, isto

Petição 870160073535, de 07/12/2016, pág. 114/212

106 / 145 é, quando um conjunto de parâmetro associado for determinado como o SPS diferente do VPS, o processo prossegue para a etapa S374. Neste momento, a seção de decodificação do conjunto de parâmetro associado 361 adquire informação necessária (informação relacionada ao parâmetro para a sequência) a partir da informação codificada de buffering_period_SEI, e supre a informação adquirida para a seção de decodificação da SEI do período de armazenamento temporário de camada 363.

[00509] Em resposta a isto, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 analisa a informação codificada de layer_buffering_period_SEI de acordo com associated_parameter_set_flag = 0 suprido a partir da seção de decodificação do conjunto de parâmetro associado 361 em relação à informação necessária obtida a partir da informação codificada de buffering_period_SEI e da informação de gerenciamento do armazenamento temporário da camada base da seção de decodificação sem perdas (a camada inferior) 351 da seção de decodificação de imagem da camada base 201-1. Então, na etapa S374, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 decodifica o parâmetro para a sequência usando a informação codificada analisada. A seção de decodificação da SEI do período de armazenamento temporário de camada 363 supre a informação decodificada de layer_buffering_period_SEI obtida pela decodificação do parâmetro para a sequência para o armazenamento temporário de acúmulo 211.

[00510] Na etapa S375, a seção de recepção da transmissão do parâmetro de camada 364 recebe layer_specific_parameters_present_flag suprido a partir da seção de decodificação sem perdas 351. A seção de recepção da transmissão do parâmetro de camada 364 analisa um valor de layer_specific_parameters_present_flag, e supre o valor analisado de layer_specific_parameters_present_flag para a seção de decodificação da SEI do período de armazenamento temporário de camada 363.

Petição 870160073535, de 07/12/2016, pág. 115/212

107 / 145 [00511] Na etapa S376, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 determina se um valor de layer_specific_parameters_present_flag é 1 ou não. Quando um valor de layer_specific_parameters_present_flag for determinado como 1, na etapa S376, o processo prossegue para a etapa S377.

[00512] Na etapa S377, a seção de decodificação da SEI do período de armazenamento temporário de camada 363 analisa a informação codificada de layer_buffering_period_SEI, e decodifica o parâmetro de cada camada. A seção de decodificação da SEI do período de armazenamento temporário de camada 363 supre a informação decodificada de layer_buffering_period_SEI obtida pela decodificação do parâmetro de cada camada para o armazenamento temporário de acúmulo 211.

[00513] Adicionalmente, quando um valor de layer_specific_parameters_present_flag for determinado como 0, na etapa S376, a etapa S377 é ignorada.

[00514] Já que buffering_period_SEI é associado com um VPS, bem como um SPS, como exposto, quando o gerenciamento de agendamento de um armazenamento temporário de acúmulo por buffering_period_SEI for realizado, é possível gerenciar um conjunto de camada, bem como uma única camada.

[00515] Adicionalmente, já que um parâmetro de cada camada é transmitido, é possível realizar um gerenciamento de agendamento tanto quanto todas as camadas incluídas em um conjunto de camada forem decodificadas por um único dispositivo de decodificação quanto quando respectivas camadas forem decodificadas por dispositivos de decodificação separados.

<5. Quinta modalidade>

<Sobre o indicador de AVC>

[00516] Neste particular, uma técnica para definir um parâmetro para o

Petição 870160073535, de 07/12/2016, pág. 116/212

108 / 145 caso de ex12 para realizar um processo de decodificação para decodificação das respectivas camadas que incluem uma camada a ser referida através dos dispositivos de decodificação separados, além do caso de ex11 da realização de um processo de decodificação por um único dispositivo de decodificação como um parâmetro para gerenciamento do armazenamento temporário por hdr_parameters() na informação de compressão de imagem ou na informação de compressão de imagem subordinada, da forma supra descrita em relação à figura 6, foi proposta.

[00517] Entretanto, quando a camada base (BL) que serve como a camada inferior for codificada pelo AVC e a camada de melhoria (EL) que serve como a camada superior for codificada pelo HEVC, é difícil implementar um exemplo de processamento do BL e do EL por um único dispositivo de decodificação.

[00518] Neste particular, em Vps_extention(), avc_base_layer_flag que serve como um indicador que indica que a camada base é codificada pelo AVC é transmitido. Então, quando avc_base_layer_flag = 1, transmissão de parâmetro do exemplo de ex11 é proibida. Isto é implementado por uma restrição de semântica. A seguir, avc_base_layer_flag também é referido como um indicador de AVC.

<Processo de codificação do parâmetro HRD no caso do indicador de AVC>

[00519] A seguir, um outro exemplo do processo de codificação do parâmetro HRD da etapa S124 da figura 15 será descrito em relação a um fluxograma da figura 44. Nas etapas S413 até S418 da figura 44, basicamente, os mesmos processos das etapas S132 até S137 da figura 16 são realizados e, assim, descrição duplicada é omitida.

[00520] Por exemplo, a seção de codificação sem perdas 116 da figura 12 supre avc_base_layer_flag de Vps_extention para a seção de definição do tipo de parâmetro HRD 143.

Petição 870160073535, de 07/12/2016, pág. 117/212

109 / 145 [00521] Na etapa S411, a seção de definição do tipo de parâmetro HRD 143 verifica um valor de avc_base_layer_flag (indicador de AVC) suprido a partir da seção de codificação sem perdas 116.

[00522] Na etapa S412, a seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD. Neste momento, quando um valor de avc_base_layer_flag (indicador de AVC) verificado na etapa S411 for 1, isto indica que a camada base é codificada pelo AVC, e um processo de realização de um processo de decodificação de uma camada correspondente e uma camada inferior é proibido. Assim, a seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD em 1, que serve como um valor para realizar um processo de decodificação de apenas uma camada correspondente.

[00523] Quando um valor de avc_base_layer_flag (indicador de AVC) verificado na etapa S411 for 0, similarmente à etapa S131 da figura 16, a seção de definição do tipo de parâmetro HRD 143 define o tipo de parâmetro HRD de acordo com a instrução do usuário.

[00524] A seção de definição do tipo de parâmetro HRD 143 supre o indicador que indica o tipo de parâmetro HRD definido para a seção de codificação sem perdas 116 e a seção de cálculo do parâmetro HRD da camada 141.

[00525] Da forma supra descrita, em Vps_extention(), quando avc_base_layer_flag = 1, que indica que a camada base é codificada pelo AVC, o tipo de parâmetro HRD é definido em 1, que serve como um valor para realizar um processo de decodificação de apenas uma camada correspondente. Assim, quando a camada base for codificada pelo AVC, já que um processo de realização de um processo de decodificação de uma camada correspondente e uma camada inferior for proibido no lado da decodificação, o lado da decodificação é impedido de receber um fluxo contínuo de bits ilegal.

Petição 870160073535, de 07/12/2016, pág. 118/212

110 / 145 [00526] A semântica exposta pode ser aplicada até mesmo no caso de buffering_period_SEI.

<Processo de codificação da SEI do período de armazenamento temporário no caso de indicador de AVC>

[00527] A seguir, um outro exemplo do processo de codificação da SEI do período de armazenamento temporário da etapa S324 da figura 38 será descrito em relação a um fluxograma da figura 45. Nas etapas S431 até S434 e nas etapas S437 até S439 da figura 45, basicamente, os mesmos processos das etapas S331 até S334 e S336 até S338 da figura 39 são realizados e, assim, descrição duplicada é omitida.

[00528] Por exemplo, a seção de codificação sem perdas 301 da figura 37 supre avc_base_layer_flag de Vps_extention para a seção de designação da transmissão do parâmetro de camada 314.

[00529] Na etapa S435, a seção de designação da transmissão do parâmetro de camada 314 verifica um valor de avc_base_layer_flag (indicador de AVC) suprido a partir da seção de codificação sem perdas 301.

[00530] Na etapa S436, a seção de designação da transmissão do parâmetro de camada 314 define layer_specific_parameters_present_flag. Neste momento, quando um valor de avc_base_layer_flag (indicador de AVC) verificado na etapa S435 for 1, isto indica que a camada base é codificada pelo AVC, e um processo de realização de um processo de decodificação de uma camada correspondente e uma camada inferior é proibido. Assim, a seção de designação da transmissão do parâmetro de camada 314 define layer_specific_parameters_present_flag em 1, que serve como um valor que indica que um parâmetro de cada camada é definido. Adicionalmente, quando layer_specific_parameters_present_flag = 1, um parâmetro acumulado a partir de uma camada inferior pode não ser definido.

[00531] Quando um valor de avc_base_layer_flag (indicador de AVC) verificado na etapa S435 for 0, similarmente à etapa S335 da figura 39, a

Petição 870160073535, de 07/12/2016, pág. 119/212

111 / 145 seção de designação da transmissão do parâmetro de camada 314 define layer_specific_parameters_present_flag de acordo com a operação do usuário.

[00532] A seção de designação da transmissão do parâmetro de camada 314 supre o valor definido de layer_specific_parameters_present_flag para a seção de codificação sem perdas 301 e a seção de definição da SEI do período de armazenamento temporário de camada 313. Adicionalmente, a informação de gerenciamento do armazenamento temporário na camada base é suprida a partir da seção de codificação sem perdas 301 da seção de codificação de imagem da camada base 101-1 para a seção de definição da SEI do período de armazenamento temporário de camada 313.

[00533] Da forma supra descrita, em Vps_extention(), quando avc_base_layer_flag = 1, layer_specific_parameters_present_flag é definido em 1, que serve como um valor que indica que um parâmetro de cada camada é definido. Assim, quando a camada base for codificada pelo AVC, já que um processo de realização de um processo de decodificação de uma camada correspondente e uma camada inferior é proibido no lado da decodificação, o lado da decodificação é impedido de receber um fluxo contínuo de bits ilegal. [00534] Embora o exemplo no qual dados de imagem são hierarquizados em uma pluralidade de camadas pela codificação de vídeo escalonável tenha sido supra descrito, o número de camadas é arbitrário. Por exemplo, algumas figuras podem ser hierarquizadas. Adicionalmente, embora o exemplo no qual a camada de melhoria é processada em relação à camada base no momento da codificação e da decodificação tenha sido supra descrito, a presente tecnologia não é limitada a este exemplo, e a camada de melhoria pode ser processada em relação a qualquer outra camada de melhoria processada.

[00535] Adicionalmente, uma visualização na codificação e na decodificação de imagem multivisualizações também está incluída como uma

Petição 870160073535, de 07/12/2016, pág. 120/212

112 / 145 camada supra descrita. Em outras palavras, a presente tecnologia pode ser aplicada em codificação de imagem multivisualizações e decodificação de imagem multivisualizações. A figura 46 ilustra um exemplo de um esquema de codificação de imagem multivisualizações.

<6. Sexta modalidade>

[Aplicação na codificação de imagem multivisualizações e na decodificação de imagem multivisualizações] [00536] A supra descrita série de processos pode ser aplicada na codificação de imagem multivisualizações e na decodificação de imagem multivisualizações. A figura 46 ilustra um exemplo de um esquema de codificação de imagem multivisualizações.

[00537] Da forma ilustrada na figura 46, uma imagem multivisualizações inclui imagens de uma pluralidade de visualizações. Uma pluralidade de visualizações da imagem multivisualizações incluem uma visualização base na qual codificação e decodificação são realizadas usando uma imagem de sua própria visualização sem usar uma imagem de uma outra visualização e uma visualização não base na qual codificação e decodificação são realizadas usando uma imagem de uma outra visualização. Como uma visualização não base, uma imagem de uma visualização base pode ser usada, e uma imagem de uma outra visualização não base pode ser usada.

[00538] Quando a imagem multivisualizações da figura 46 for codificada ou decodificada, uma imagem de cada visualização é codificada ou decodificada, mas os métodos de acordo com a primeira e a segunda modalidades podem ser aplicados na codificação ou na decodificação de cada visualização. Em decorrência disto, é possível realizar um processo de decodificação em um sincronismo apropriado.

[00539] Adicionalmente, os indicadores ou os parâmetros usados nos métodos de acordo com a primeira e a segunda modalidades podem ser compartilhados na codificação e na decodificação de cada visualização. Em

Petição 870160073535, de 07/12/2016, pág. 121/212

113 / 145 decorrência disto, é possível suprimir a transmissão de informação redundante e reduzir uma quantidade de informação a ser transmitida (uma quantidade de codificação) (isto é, é possível suprimir uma redução na eficiência de codificação).

[00540] Mais especificamente, por exemplo, o indicador do tipo de parâmetro HRD, o parâmetro HRD ou buffering_period_SEI e layer_buffering_period_SEI podem ser compartilhados na codificação e na decodificação de cada visualização.

[00541] Certamente, qualquer outra informação necessária também pode ser compartilhada na codificação e na decodificação de cada visualização.

[Dispositivo de codificação de imagem multivisualizações] [00542] A figura 47 é um diagrama que ilustra um dispositivo de codificação de imagem multivisualizações que realiza a supra descrita codificação de imagem multivisualizações. Da forma ilustrada na figura 47, o dispositivo de codificação de imagem multivisualizações 600 tem uma seção de codificação 601, uma seção de codificação 602 e uma seção de multiplexação 603.

[00543] A seção de codificação 601 codifica uma imagem de visualização base e gera um fluxo contínuo codificado da imagem de visualização base. A seção de codificação 602 codifica uma imagem de visualização não base e gera um fluxo contínuo codificado de imagem de visualização não base. A seção de multiplexação 603 multiplexa o fluxo contínuo codificado da imagem de visualização base gerado na seção de codificação 601 e o fluxo contínuo codificado de imagem de visualização não base gerado na seção de codificação 602, e gera um fluxo contínuo codificado de imagem multivisualizações.

[00544] O dispositivo de codificação escalonável 100 (figura 10) pode ser aplicado na seção de codificação 601 e na seção de codificação 602 do

Petição 870160073535, de 07/12/2016, pág. 122/212

114 / 145 dispositivo de codificação de imagem multivisualizações 600. Em outras palavras, é possível definir o indicador do tipo de parâmetro HRD ou o parâmetro HRD para cada visualização na codificação de cada visualização, e é possível realizar um processo de decodificação em um sincronismo apropriado. Adicionalmente, já que a seção de codificação 601 e a seção de codificação 602 podem usar o mesmo indicador do tipo de parâmetro HRD ou o mesmo parâmetro HRD (isto é, podem compartilhar o indicador ou o parâmetro), é possível suprimir uma redução na eficiência de codificação, e é possível realizar um processo de decodificação em um sincronismo apropriado. Além do mais, já que o mesmo se aplica a buffering_period_SEI e layer_buffering_period_SEI, é similarmente possível suprimir uma redução na eficiência de codificação, e é possível realizar um processo de decodificação em um sincronismo apropriado.

[Exemplo de configuração do dispositivo de decodificação de imagem multivisualizações] [00545] A figura 48 é um diagrama que ilustra o dispositivo de decodificação de imagem multivisualizações para realizar a supra descrita decodificação de imagem multivisualizações. Da forma ilustrada na figura 39, o dispositivo de decodificação de imagem multivisualizações 610 tem uma seção de multiplexação inversa 611, uma seção de decodificação 612 e uma seção de decodificação 613.

[00546] A seção de multiplexação inversa 611 multiplexa inversamente um fluxo contínuo codificado de imagem multivisualizações no qual um fluxo contínuo codificado da imagem de visualização base e um fluxo contínuo codificado de imagem de visualização não base são multiplexados, e extrai o fluxo contínuo codificado da imagem de visualização base e o fluxo contínuo codificado de imagem de visualização não base. A seção de decodificação 612 decodifica o fluxo contínuo codificado da imagem de visualização base extraído pela seção de multiplexação inversa 611 e obtém uma imagem de

Petição 870160073535, de 07/12/2016, pág. 123/212

115 / 145 visualização base. A seção de decodificação 613 decodifica o fluxo contínuo codificado de imagem de visualização não base extraído pela seção de multiplexação inversa 611 e obtém uma imagem de visualização não base. [00547] O dispositivo de decodificação escalonável 200 (figura 20) pode ser aplicado na seção de decodificação 612 e na seção de decodificação 613 do dispositivo de decodificação de imagem multivisualizações 610. Em outras palavras, é possível definir o indicador do tipo de parâmetro HRD ou o parâmetro HRD para cada visualização na codificação de cada visualização, e é possível realizar um processo de decodificação em um sincronismo apropriado. Adicionalmente, já que a seção de decodificação 612 e a seção de decodificação 613 podem usar o mesmo indicador do tipo de parâmetro HRD ou o mesmo parâmetro HRD (isto é, podem compartilhar o indicador ou o parâmetro), é possível suprimir uma redução na eficiência de codificação, e é possível realizar um processo de decodificação em um sincronismo apropriado. Além do mais, já que o mesmo se aplica a buffering_period_SEI e layer_buffering_period_SEI, é similarmente possível suprimir uma redução na eficiência de codificação, e é possível realizar um processo de decodificação em um sincronismo apropriado.

[00548] Da forma supra descrita, a presente tecnologia pode ser aplicada em todos os dispositivos de codificação de imagem e todos os dispositivos de decodificação de imagem com base na codificação e na decodificação escalonáveis.

[00549] Por exemplo, a presente tecnologia pode ser aplicada em um dispositivo de codificação de imagem e um dispositivo de decodificação de imagem usados quando informação de imagem (fluxo contínuo de bits) comprimida por uma transformada ortogonal, tal como uma transformada discreta de cosseno, e compensação de movimento, como em MPEG e H.26x, for recebida por meio de uma mídia em rede, tais como difusão via satélite, televisão a cabo, a Internet ou um telefone celular. Adicionalmente, a presente

Petição 870160073535, de 07/12/2016, pág. 124/212

116 / 145 tecnologia pode ser aplicada em um dispositivo de codificação de imagem e um dispositivo de decodificação de imagem usados quando processamento for realizado em uma mídia de armazenamento, tais como um disco ótico, um disco magnético ou uma memória flash. Além do mais, a presente tecnologia pode ser aplicada até mesmo em um dispositivo de transformada ortogonal ou um dispositivo de transformada ortogonal inversa equipados no dispositivo de codificação de imagem, no dispositivo de decodificação de imagem ou congêneres.

<7. Sétima modalidade>

[Computador] [00550] A supra descrita série de processos pode ser executada por hardware ou pode ser executada por software. Quando a série de processos precisar ser realizada por software, os programas que formam o software são instalados em um computador. Aqui, um computador inclui um computador que é incorporado em hardware dedicado ou um computador pessoal (PC) de uso geral que pode executar várias funções pela instalação de vários programas no computador, por exemplo.

[00551] A figura 49 é um diagrama de blocos que ilustra um exemplo de configuração de hardware de um computador para executar a supra descrita série de processos através de um programa.

[00552] Em um computador 800 mostrado na figura 49, uma unidade de processamento central (CPU) 801, uma memória exclusiva de leitura (ROM) 802 e uma memória de acesso aleatório (RAM) 803 são conectadas umas nas outras por um barramento 804.

[00553] Uma interface de entrada e saída (I/F) 810 é adicionalmente conectada no barramento 804. Uma seção de inserção 811, uma seção de transmissão 812, uma seção de armazenamento 813, uma seção de comunicação 814 e uma unidade de acionamento 815 são conectadas na I/F de entrada e saída 810.

Petição 870160073535, de 07/12/2016, pág. 125/212

117 / 145 [00554] A seção de inserção 811 é formada com um teclado, um mouse, um microfone, um painel sensível ao toque, um terminal de inserção e congêneres. A seção de transmissão 812 é formada com uma tela, um altofalante, um terminal de transmissão e congêneres. A seção de armazenamento 813 é formada com um disco rígido, uma memória não volátil ou congêneres. A seção de comunicação 814 é formada com uma interface de rede ou congêneres. A unidade de disco 815 aciona uma mídia removível 821, tais como um disco magnético, um disco ótico, um disco magneto-ótico ou uma memória semicondutora.

[00555] No computador configurado como exposto, a CPU 801 carrega os programas armazenados na seção de armazenamento 813 na RAM 803 por meio da I/F de entrada e saída 810 e do barramento 804, e executa os programas, de forma que a supra descrita série de processos seja realizada. A RAM 803 também armazena dados necessários para que a CPU 801 execute os vários processos.

[00556] O programa executado pelo computador 800 (a CPU 801) pode ser provido por ser gravado na mídia removível 821 como uma mídia acondicionada ou congêneres. O programa também pode ser aplicado por meio de uma mídia de transferência com fios ou sem fios, tais como uma rede de área local, a Internet ou uma difusão por satélite digital.

[00557] No computador, pelo carregamento da mídia removível 821 na unidade de disco 815, o programa pode ser instalado na seção de armazenamento 813 por meio da I/F de entrada e saída 810. Também é possível receber o programa a partir de uma mídia de transferência com fios ou sem fios usando a seção de comunicação 814 e instalar o programa na seção de armazenamento 813. Como uma outra alternativa, o programa pode ser instalado antecipadamente na ROM 802 ou na seção de armazenamento 813.

[00558] Deve-se notar que o programa executado por um computador

Petição 870160073535, de 07/12/2016, pág. 126/212

118 / 145 pode ser um programa que é processado em série temporal de acordo com a sequência descrita nesta especificação ou um programa que é processado em paralelo ou em sincronismo necessário, tal como mediante chamada.

[00559] Na presente divulgação, etapas para descrever o programa a ser gravado na mídia de gravação podem incluir processamento realizado em série temporal de acordo com a ordem de descrição e processamento não processado em série temporal, mas realizado em paralelo ou individualmente. [00560] Além do mais, nesta divulgação, um sistema significa um conjunto de uma pluralidade de elementos (dispositivos, módulos (partes) ou congêneres) independente se ou não todos os elementos são arranjados em um único alojamento. Assim, tanto uma pluralidade de dispositivos que ficam acomodados em alojamentos separados e conectados por meio de uma rede quanto um único dispositivo no qual uma pluralidade de módulos ficam acomodados em um único alojamento são sistemas.

[00561] Adicionalmente, um elemento descrito como um único dispositivo (ou unidade de processamento) anteriormente pode ser dividido e configurado como uma pluralidade de dispositivos (ou unidades de processamento). Ao contrário, elementos descritos como uma pluralidade de dispositivos (ou unidades de processamento) anteriormente podem ser configurados coletivamente como um único dispositivo (ou unidade de processamento). Adicionalmente, um elemento diferente daqueles supra descritos pode ser adicionado em cada dispositivo (ou unidade de processamento). Além do mais, uma parte de um elemento de um dado dispositivo (ou unidade de processamento) pode ser incluída em um elemento de um outro dispositivo (ou uma outra unidade de processamento), desde que a configuração ou a operação do sistema como um todo seja substancialmente igual.

[00562] As modalidades preferidas da presente divulgação foram supra descritas em relação aos desenhos anexos, embora a presente invenção não

Petição 870160073535, de 07/12/2016, pág. 127/212

119 / 145 seja limitada aos exemplos expostos, certamente. Versados na técnica podem descobrir várias alterações e modificações no escopo das reivindicações anexas, e entende-se que elas cairão naturalmente no escopo técnico da presente divulgação.

[00563] Por exemplo, a presente divulgação pode adotar uma configuração de computação em nuvem que processa pela alocação e conexão de uma função por uma pluralidade de aparelhos através de uma rede.

[00564] Adicionalmente, cada etapa descrita pelos supramencionados fluxogramas pode ser executada por um aparelho ou pela alocação de uma pluralidade de aparelhos.

[00565] Além do mais, no caso em que uma pluralidade de processos estiverem incluídos em uma etapa, a pluralidade de processos incluídas nesta uma etapa pode ser executada por um aparelho ou pela alocação de uma pluralidade de aparelhos.

[00566] O dispositivo de codificação de imagem e o dispositivo de decodificação de imagem de acordo com a modalidade podem ser aplicados em vários dispositivos eletrônicos, tais como transmissores e receptores para difusão via satélite, difusão a cabo, tal como TV a cabo, distribuição na Internet, distribuição para terminais por meio de comunicação celular e congêneres, dispositivos de gravação que gravam imagens em uma mídia, tais como discos óticos, discos magnéticos e memória flash, e dispositivos de reprodução que reproduzem imagens a partir de tal mídia de armazenamento. Quatro aplicações serão descritas a seguir.

<8. Aplicações>

[Primeira Aplicação: Receptores de Televisão] [00567] A figura 50 ilustra um exemplo de uma configuração esquemática de um dispositivo de televisão no qual a modalidade é aplicada.

Um dispositivo de televisão 900 inclui uma antena 901, um sintonizador 902, um demultiplexador 903, um decodificador 904, uma seção de processamento

Petição 870160073535, de 07/12/2016, pág. 128/212

120 / 145 do sinal de vídeo 905, uma seção de exibição 906, uma seção de processamento do sinal de áudio 907, um alto-falante 908, uma I/F externa 909, uma seção de controle 910, uma I/F de usuário 911 e um barramento 912.

[00568] O sintonizador 902 extrai um sinal de um canal desejado a partir de sinais de difusão recebidos por meio da antena 901, e demodula o sinal extraído. O sintonizador 902, então, transmite um fluxo contínuo de bits codificado obtido através da demodulação para o demultiplexador 903. Isto é, o sintonizador 902 serve como uma unidade de transmissão do dispositivo de televisão 900 para receber um fluxo contínuo codificado no qual uma imagem é codificada.

[00569] O demultiplexador 903 demultiplexa o fluxo contínuo de bits codificado para obter um fluxo contínuo de vídeo e um fluxo contínuo de áudio de um programa a ser visualizado, e transmite cada fluxo contínuo obtido através da demultiplexação para o decodificador 904. O demultiplexador 903 também extrai dados auxiliares, tais como guias eletrônicos de programa (EPGs), do fluxo contínuo de bits codificado, e supre os dados extraídos para a seção de controle 910. Adicionalmente, o demultiplexador 903 pode realizar desembaralhamento quando o fluxo contínuo de bits codificado tiver sido embaralhado.

[00570] O decodificador 904 decodifica o fluxo contínuo de vídeo e o fluxo contínuo de áudio inserido a partir do demultiplexador 903. O decodificador 904, então, transmite dados de vídeo gerados no processo de decodificação para a seção de processamento do sinal de vídeo 905. O decodificador 904 também transmite os dados de áudio gerados no processo de decodificação para a seção de processamento do sinal de áudio 907.

[00571] A seção de processamento do sinal de vídeo 905 reproduz os dados de vídeo inseridos a partir do decodificador 904, e faz com que a seção de exibição 906 exiba o vídeo. A seção de processamento do sinal de vídeo

Petição 870160073535, de 07/12/2016, pág. 129/212

121 / 145

905 também pode fazer com que a seção de exibição 906 exiba uma tela de aplicação suprida por meio de uma rede. Adicionalmente, a seção de processamento do sinal de vídeo 905 pode realizar um processo adicional, tal como remoção de ruído, por exemplo, nos dados de vídeo de acordo com a definição. Além do mais, a seção de processamento do sinal de vídeo 905 pode gerar uma imagem de uma I/F gráfica de usuário (GUI), tais como um menu, um botão e um cursor, e sobrepõe a imagem gerada em uma imagem de saída.

[00572] A seção de exibição 906 é acionada por um sinal de acionamento suprido a partir da seção de processamento do sinal de vídeo 905, e exibe um vídeo ou uma imagem em uma tela de vídeo de um dispositivo de exibição (por exemplo, tela de cristal líquido, tela de plasma, tela de eletroluminescência orgânica (OLED), etc.).

[00573] A seção de processamento do sinal de áudio 907 realiza um processo de reprodução, tais como conversão D/A e amplificação, nos dados de áudio inseridos a partir do decodificador 904, e transmite um som a partir do alto-falante 908. A seção de processamento do sinal de áudio 907 também pode realizar um processo adicional, tal como remoção de ruído, nos dados de áudio.

[00574] A I/F externa 909 é uma I/F para conectar o dispositivo de televisão 900 em um dispositivo externo ou uma rede. Por exemplo, um fluxo contínuo de vídeo ou um fluxo contínuo de áudio recebidos por meio da I/F externa 909 podem ser decodificados pelo decodificador 904. Isto é, a I/F externa 909 também serve como uma unidade de transmissão do dispositivo de televisão 900 para receber um fluxo contínuo codificado no qual uma imagem é codificada.

[00575] A seção de controle 910 inclui um processador, tal como uma unidade de processamento central (CPU), e uma memória, tais como memória de acesso aleatório (RAM) e memória exclusiva de leitura (ROM). A

Petição 870160073535, de 07/12/2016, pág. 130/212

122 / 145 memória armazena um programa a ser executado pela CPU, dados de programa, dados de EPG, dados adquiridos por meio de uma rede e congêneres. O programa armazenado na memória é lido e executado pela CPU no momento da ativação do dispositivo de televisão 900, por exemplo. A CPU controla a operação do dispositivo de televisão 900, por exemplo, de acordo com um sinal de operação inserido a partir da I/F de usuário 911 pela execução do programa.

[00576] A I/F de usuário 911 é conectada na seção de controle 910. A I/F de usuário 911 inclui, por exemplo, um botão e uma chave usados para que um usuário opere o dispositivo de televisão 900, e uma seção de recepção para um sinal de controle remoto. A I/F de usuário 911 detecta uma operação de um usuário por meio destes elementos estruturais, gera um sinal de operação e transmite o sinal de operação gerado para a seção de controle 910.

[00577] O barramento 912 conecta o sintonizador 902, o demultiplexador 903, o decodificador 904, a seção de processamento do sinal de vídeo 905, a seção de processamento do sinal de áudio 907, a I/F externa 909 e a seção de controle 910 uns nos outros.

[00578] O decodificador 904 tem uma função do dispositivo de decodificação escalonável 200 de acordo com a modalidade no dispositivo de televisão 900 configurado desta maneira. Assim, quando uma imagem for decodificada no dispositivo de televisão 900, é possível realizar um processo de decodificação em um sincronismo apropriado.

[Segunda Aplicação: Telefones Celulares] [00579] A figura 51 ilustra um exemplo de uma configuração esquemática de um telefone celular no qual a modalidade é aplicada. Um telefone celular 920 inclui uma antena 921, uma seção de comunicação 922, um codec de áudio 923, um alto-falante 924, um microfone 925, uma seção de câmera 926, uma seção de processamento de imagem 927, uma seção de demultiplexação 928, uma seção de gravação / reprodução 929, uma seção de

Petição 870160073535, de 07/12/2016, pág. 131/212

123 / 145 exibição 930, uma seção de controle 931, uma seção de operação 932 e um barramento 933.

[00580] A antena 921 é conectada na seção de comunicação 922. O alto-falante 924 e o microfone 925 são conectados no codec de áudio 923. A seção de operação 932 é conectada na seção de controle 931. O barramento 933 conecta a seção de comunicação 922, o codec de áudio 923, a seção de câmera 926, a seção de processamento de imagem 927, a seção de demultiplexação 928, a seção de gravação / reprodução 929, a seção de exibição 930 e a seção de controle 931 uns nos outros.

[00581] O telefone celular 920 realiza uma operação, tais como transmissão e recepção de um sinal de áudio, transmissão e recepção de dados de correio eletrônico ou de imagem, captura de imagem e gravação de dados em vários modos de operação, incluindo um modo de chamada por áudio, um modo de comunicação de dados, um modo de captura de imagem e um modo de videofone.

[00582] Um sinal de áudio analógico gerado pelo microfone 925 é suprido para o codec de áudio 923 no modo de chamada por áudio. O codec de áudio 923 converte o sinal de áudio analógico em dados de áudio, tem os dados de áudio convertidos sujeitos à conversão A/D e comprime os dados convertidos. O codec de áudio 923, então, transmite os dados de áudio comprimidos para a seção de comunicação 922. A seção de comunicação 922 codifica e modula os dados de áudio, e gera um sinal de transmissão. A seção de comunicação 922, então, transmite o sinal de transmissão gerado para uma estação base (não ilustrada) por meio da antena 921. A seção de comunicação 922 também amplifica um sinal sem fios recebido por meio da antena 921 e converte a frequência do sinal sem fios para adquirir um sinal recebido. A seção de comunicação 922, então, demodula e decodifica o sinal recebido, gera dados de áudio, e transmite os dados de áudio gerados para o codec de áudio 923. O codec de áudio 923 estende os dados de áudio, tem os dados de

Petição 870160073535, de 07/12/2016, pág. 132/212

124 / 145 áudio sujeitos à conversão D/A, e gera um sinal de áudio analógico. O codec de áudio 923, então, supre o sinal de áudio gerado para o alto-falante 924 para transmitir um som.

[00583] A seção de controle 931 também gera dados de texto de acordo com uma operação feita por um usuário por meio da seção de operação 932, os dados de texto, por exemplo, compondo o correio eletrônico. Além do mais, a seção de controle 931 faz com que a seção de exibição 930 exiba o texto. Além do mais, a seção de controle 931 gera dados de correio eletrônico de acordo com uma instrução de transmissão proveniente de um usuário por meio da seção de operação 932, e transmite os dados de correio eletrônico gerados para a seção de comunicação 922. A seção de comunicação 922 codifica e modula os dados de correio eletrônico, e gera um sinal de transmissão. A seção de comunicação 922, então, transmite o sinal de transmissão gerado para uma estação base (não ilustrada) por meio da antena 921. A seção de comunicação 922 também amplifica um sinal sem fios recebido por meio da antena 921 e converte a frequência do sinal sem fios para adquirir um sinal recebido. A seção de comunicação 922, então, demodula e decodifica o sinal recebido para restaurar os dados de correio eletrônico, e transmite os dados de correio eletrônico restaurados para a seção de controle 931. A seção de controle 931 faz com que a seção de exibição 930 exiba o conteúdo do correio eletrônico, e também faz com que a mídia de armazenamento da seção de gravação / reprodução 929 armazene os dados de correio eletrônico.

[00584] A seção de gravação / reprodução 929 inclui uma mídia de armazenamento legível e gravável. Por exemplo, a mídia de armazenamento pode ser uma mídia de armazenamento incorporada, tais como RAM e memória flash, ou uma mídia de armazenamento externamente montada, tais como discos rígidos, discos magnéticos, discos magneto-óticos, discos óticos, memória tipo barramento serial universal (USB) e cartões de memória.

Petição 870160073535, de 07/12/2016, pág. 133/212

125 / 145 [00585] Além do mais, a seção de câmera 926, por exemplo, captura uma imagem de um sujeito para gerar dados de imagem, e transmite os dados de imagem gerados para a seção de processamento de imagem 927 no modo de captura de imagem. A seção de processamento de imagem 927 codifica os dados de imagem inseridos a partir da seção de câmera 926, e faz com que a mídia de armazenamento da seção de armazenamento / reprodução 929 armazene o fluxo contínuo codificado.

[00586] Além do mais, a seção de demultiplexação 928, por exemplo, multiplexa um fluxo contínuo de vídeo codificado pela seção de processamento de imagem 927 e um fluxo contínuo de áudio inserido a partir do codec de áudio 923, e transmite o fluxo contínuo multiplexado para a seção de comunicação 922 no modo de videofone. A seção de comunicação 922 codifica e modula o fluxo contínuo, e gera um sinal de transmissão. A seção de comunicação 922, então, transmite o sinal de transmissão gerado para uma estação base (não ilustrada) por meio da antena 921. A seção de comunicação 922 também amplifica um sinal sem fios recebido por meio da antena 921 e converte a frequência do sinal sem fios para adquirir um sinal recebido. Estes sinal de transmissão e sinal recebido podem incluir um fluxo contínuo de bits codificado. A seção de comunicação 922, então, demodula e decodifica o sinal recebido para restaurar o fluxo contínuo, e transmite o fluxo contínuo restaurado para a seção de demultiplexação 928. A seção de demultiplexação 928 demultiplexa o fluxo contínuo de entrada para obter um fluxo contínuo de vídeo e um fluxo contínuo de áudio, e transmite o fluxo contínuo de vídeo para a seção de processamento de imagem 927 e o fluxo contínuo de áudio para o codec de áudio 923. A seção de processamento de imagem 927 decodifica o fluxo contínuo de vídeo, e gera dados de vídeo. Os dados de vídeo são supridos para a seção de exibição 930, e uma série de imagens é exibida pela seção de exibição 930. O codec de áudio 923 estende o fluxo contínuo de áudio, tem o fluxo contínuo de áudio sujeito à conversão

Petição 870160073535, de 07/12/2016, pág. 134/212

126 / 145

D/A e gera um sinal de áudio analógico. O codec de áudio 923, então, supre o sinal de áudio gerado para o alto-falante 924, e faz com que um som seja transmitido.

[00587] A seção de processamento de imagem 927 tem funções do dispositivo de codificação escalonável 100 e do dispositivo de decodificação escalonável 200 de acordo com a modalidade do telefone celular 920 configurado desta maneira. Assim, quando uma imagem for codificada ou decodificada no telefone celular 920, é possível realizar um processo de decodificação em um sincronismo apropriado.

[Terceira Aplicação: Dispositivo de Gravação / Reprodução] [00588] A figura 52 ilustra um exemplo de uma configuração esquemática de um dispositivo de gravação / reprodução no qual a modalidade é aplicada. Um dispositivo de gravação / reprodução 940, por exemplo, codifica dados de áudio e dados de vídeo de um programa de difusão recebido e grava os dados de áudio codificados e os dados de vídeo codificados em uma mídia de gravação. Por exemplo, o dispositivo de gravação / reprodução 940 também pode codificar dados de áudio e dados de vídeo adquiridos a partir de um outro dispositivo e gravar os dados de áudio codificados e os dados de vídeo codificados em uma mídia de gravação. Além do mais, o dispositivo de gravação / reprodução 940, por exemplo, usa um monitor ou um alto-falante para reproduzir os dados gravados na mídia de gravação de acordo com uma instrução de um usuário. Neste momento, o dispositivo de gravação / reprodução 940 decodifica os dados de áudio e os dados de vídeo.

[00589] O dispositivo de gravação / reprodução 940 inclui um sintonizador 941, uma I/F externa 942, um codificador 943, uma unidade de disco rígido (HDD) 944, uma unidade de disco 945, um seletor 946, um decodificador 947, uma exibição na tela (OSD) 948, uma seção de controle

949 e uma I/F de usuário 950.

Petição 870160073535, de 07/12/2016, pág. 135/212

127 / 145 [00590] O sintonizador 941 extrai um sinal de um canal desejado a partir dos sinais de difusão recebidos por meio de uma antena (não mostrada), e demodula o sinal extraído. O sintonizador 941, então, transmite um fluxo contínuo de bits codificado obtido através da demodulação para o seletor 946. Isto é, o sintonizador 941 serve como uma unidade de transmissão do dispositivo de gravação / reprodução 940.

[00591] A I/F externa 942 é uma I/F para conectar o dispositivo de gravação / reprodução 940 em um dispositivo externo ou uma rede. Por exemplo, a I/F externa 942 pode ser um I/F do Instituto de Engenheiros Eletricistas e Eletrônicos (IEEE) 1394, uma I/F de rede, uma I/F USB, uma I/F de memória flash ou congêneres. Por exemplo, dados de vídeo e dados de áudio recebidos por meio da I/F externa 942 são inseridos no codificador 943. Isto é, a I/F externa 942 serve como uma unidade de transmissão do dispositivo de gravação / reprodução 940.

[00592] Quando os dados de vídeo e os dados de áudio inseridos a partir da I/F externa 942 não tiverem sido codificados, o codificador 943 codifica os dados de vídeo e os dados de áudio. O codificador 943, então, transmite um fluxo contínuo de bits codificado para o seletor 946.

[00593] A HDD 944 grava, em um disco rígido interno, o fluxo contínuo de bits codificado no qual dados de conteúdo de um vídeo e um som são comprimidos, vários programas e outras partes de dados. A HDD 944 também lê estas partes de dados a partir do disco rígido no momento da reprodução de um vídeo ou um som.

[00594] A unidade de disco 945 grava e lê dados em uma mídia de gravação que é montada. A mídia de gravação que é montada na unidade de disco 945 pode ser, por exemplo, um disco DVD (DVD-Vídeo, DVD-RAM,

DVD-R, DVD-RW, um DVD+R, DVD+RW, etc.), um disco Blu-ray (marca registrada) ou congêneres.

[00595] O seletor 946 seleciona, no momento da gravação de um vídeo

Petição 870160073535, de 07/12/2016, pág. 136/212

128 / 145 ou um som, um fluxo contínuo de bits codificado inserido a partir do sintonizador 941 ou do codificador 943, e transmite o fluxo contínuo de bits codificado selecionado para a HDD 944 ou a unidade de disco 945. O seletor 946 também transmite, no momento da reprodução de um vídeo ou um som, um fluxo contínuo de bits codificado inserido a partir do HDD 944 ou da unidade de disco 945 para o decodificador 947.

[00596] O decodificador 947 decodifica o fluxo contínuo de bits codificado, e gera dados de vídeo e dados de áudio. O decodificador 947, então, transmite os dados de vídeo gerados para a OSD 948. O decodificador 904 também transmite os dados de áudio gerados para um alto-falante externo.

[00597] A OSD 948 reproduz os dados de vídeo inseridos a partir do decodificador 947, e exibe um vídeo. A OSD 948 também pode sobrepor uma imagem de uma GUI, tais como um menu, um botão e um cursor em um vídeo exibido.

[00598] A seção de controle 949 inclui um processador, tal como uma CPU, e uma memória, tais como RAM e ROM. A memória armazena um programa a ser executado pela CPU, dados de programa e congêneres. Por exemplo, um programa armazenado na memória é lido e executado pela CPU no momento da ativação do dispositivo de gravação / reprodução 940. A CPU controla a operação do dispositivo de gravação / reprodução 940, por exemplo, de acordo com um sinal de operação inserido a partir da I/F de usuário 950 pela execução do programa.

[00599] A I/F de usuário 950 é conectada na seção de controle 949. A

I/F de usuário 950 inclui, por exemplo, um botão e uma chave usados por um usuário para operar o dispositivo de gravação / reprodução 940 e uma seção de recepção para um sinal de controle remoto. A I/F de usuário 950 detecta uma operação feita por um usuário por meio destes elementos estruturais, gera um sinal de operação e transmite o sinal de operação gerado para a seção de

Petição 870160073535, de 07/12/2016, pág. 137/212

129 / 145 controle 949.

[00600] O codificador 943 tem uma função do dispositivo de codificação escalonável 100 de acordo com a modalidade no dispositivo de gravação / reprodução 940 configurado desta maneira. O decodificador 947 também tem uma função do dispositivo de decodificação escalonável 200 de acordo com a modalidade. Assim, quando uma imagem for codificada ou decodificada no dispositivo de gravação / reprodução 940, é possível realizar um processo de decodificação em um sincronismo apropriado.

[Quarta Aplicação: Dispositivo de Captura de Imagem] [00601] A figura 53 ilustra um exemplo de uma configuração esquemática de um dispositivo de captura de imagem no qual a modalidade é aplicada. Um dispositivo de captura de imagem 960 captura uma imagem de um sujeito para gerar uma imagem, codifica os dados de imagem e grava os dados de imagem em uma mídia de gravação.

[00602] O dispositivo de captura de imagem 960 inclui um bloco ótico

961, uma seção de captura de imagem 962, uma seção de processamento de sinal 963, uma seção de processamento de imagem 964, uma seção de exibição 965, uma I/F externa 966, uma memória 967, uma unidade de mídia 968, uma OSD 969, uma seção de controle 970, uma I/F de usuário 971 e um barramento 972.

[00603] O bloco ótico 961 é conectado na seção de captura de imagem

962. A seção de captura de imagem 962 é conectada na seção de processamento de sinal 963. A seção de exibição 965 é conectada na seção de processamento de imagem 964. A I/F de usuário 971 é conectada na seção de controle 970. O barramento 972 conecta a seção de processamento de imagem 964, a I/F externa 966, a memória 967, a unidade de mídia 968, a OSD 969 e a seção de controle 970 umas nas outras.

[00604] O bloco ótico 961 inclui uma lente de foco, um mecanismo de parada de abertura e congêneres. O bloco ótico 961 forma uma imagem ótica

Petição 870160073535, de 07/12/2016, pág. 138/212

130 / 145 de um sujeito em uma superfície de captura de imagem da seção de captura de imagem 962. A seção de captura de imagem 962 inclui um sensor de imagem, tais como um dispositivo de carga acoplada (CCD) e um semicondutor de óxido de metal complementar (CMOS), e converte a imagem ótica formada na superfície de captura de imagem em um sinal de imagem que é um sinal elétrico através de conversão fotoelétrica. A seção de captura de imagem 962, então, transmite o sinal de imagem para a seção de processamento de sinal

963.

[00605] A seção de processamento de sinal 963 realiza vários processos de sinal da câmera, tais como correção de knee, correção de gama e correção de cor no sinal de imagem inserido a partir da seção de captura de imagem 962. A seção de processamento de sinal 963 transmite os dados de imagem sujeitos ao processo de sinal da câmera para a seção de processamento de imagem 964.

[00606] A seção de processamento de imagem 964 codifica os dados de imagem inseridos a partir da seção de processamento de sinal 963, e gera dados codificados. A seção de processamento de imagem 964, então, transmite os dados codificados gerados para a I/F externa 966 ou a unidade de mídia 968. A seção de processamento de imagem 964 também decodifica dados codificados inseridos a partir da I/F externa 966 ou da unidade de mídia 968, e gera dados de imagem. A seção de processamento de imagem 964, então, transmite os dados de imagem gerados para a seção de exibição 965. A seção de processamento de imagem 964 também pode transmitir os dados de imagem inseridos a partir da seção de processamento de sinal 963 para a seção de exibição 965, e fazer com que a imagem seja exibida. Além do mais, a seção de processamento de imagem 964 pode sobrepor dados para exibição adquiridos a partir da OSD 969 em uma imagem para ser transmitida para a seção de exibição 965.

[00607] A OSD 969 gera uma imagem de uma GUI, tais como um

Petição 870160073535, de 07/12/2016, pág. 139/212

131 / 145 menu, um botão e um cursor, e transmite a imagem gerada para a seção de processamento de imagem 964.

[00608] A I/F externa 966 é configurada, por exemplo, como um terminal de entrada e saída USB. A I/F externa 966 conecta o dispositivo de captura de imagem 960 e uma impressora, por exemplo, no momento da impressão de uma imagem. Uma unidade de disco é adicionalmente conectada na I/F externa 966, conforme necessário. Uma mídia removível, tais como discos magnéticos e discos óticos, é montada na unidade de disco, e um programa lido a partir da mídia removível pode ser instalado no dispositivo de captura de imagem 960. Além do mais, a I/F externa 966 pode ser configurada como uma I/F de rede para ser conectada em uma rede, tais como uma LAN e a Internet. Isto é, a I/F externa 966 serve como uma unidade de transmissão do dispositivo de captura de imagem 960.

[00609] Uma mídia de gravação a ser montada na unidade de mídia

968 pode ser uma mídia removível legível e gravável, tais como discos magnéticos, discos magneto-óticos, discos óticos e memória semicondutora. A mídia de gravação também pode ser fixamente montada na unidade de mídia 968, configurando uma seção de armazenamento não transportável, tal como unidades de disco rígido ou unidades em estado sólido (SSDs) incorporadas.

[00610] A seção de controle 970 inclui um processador, tal como uma CPU, e uma memória, tais como RAM e ROM. A memória armazena um programa a ser executado pela CPU, dados de programa e congêneres. Um programa armazenado na memória é lido e executado pela CPU, por exemplo, no momento da ativação do dispositivo de captura de imagem 960. A CPU controla a operação do dispositivo de captura de imagem 960, por exemplo, de acordo com um sinal de operação inserido a partir da I/F de usuário 971 pela execução do programa.

[00611] A I/F de usuário 971 é conectada na seção de controle 970. A

Petição 870160073535, de 07/12/2016, pág. 140/212

132 / 145

I/F de usuário 971 inclui, por exemplo, um botão, um comutador e congêneres usados para que um usuário opere o dispositivo de captura de imagem 960. A I/F de usuário 971 detecta uma operação feita por um usuário por meio destes elementos estruturais, gera um sinal de operação e transmite o sinal de operação gerado para a seção de controle 970.

[00612] A seção de processamento de imagem 964 tem uma função do dispositivo de codificação escalonável 100 e do dispositivo de decodificação escalonável 200 de acordo com a modalidade no dispositivo de captura de imagem 960 configurado desta maneira. Assim, quando uma imagem codificada for decodificada no dispositivo de captura de imagem 960, é possível realizar um processo de decodificação em um sincronismo apropriado.

<9. Exemplo de aplicação da codificação de vídeo escalonável>

[Primeiro sistema] [00613] A seguir, um exemplo específico do uso de dados codificados escalonáveis, em que uma codificação de vídeo escalonável (codificação hierárquica) é realizada, será descrito. A codificação de vídeo escalonável, por exemplo, é usada para seleção dos dados a serem transmitidos como exemplos ilustrados na figura 54.

[00614] Em um sistema de transmissão de dados 1000 ilustrado na figura 54, um servidor de distribuição 1002 lê dados codificados escalonáveis armazenados em uma seção de armazenamento de dados codificados escalonáveis 1001, e distribui os dados codificados escalonáveis para um dispositivo de terminal, tais como um PC 1004, um dispositivo AV 1005, um dispositivo tipo tablet 1006 ou um telefone celular 1007 por meio de uma rede 1003.

[00615] Neste momento, o servidor de distribuição 1002 seleciona e transmite dados codificados que têm qualidade apropriada de acordo com a

Petição 870160073535, de 07/12/2016, pág. 141/212

133 / 145 capacidade do dispositivo de terminal, o ambiente de comunicação ou congêneres. Mesmo quando o servidor de distribuição 1002 transmitir desnecessariamente dados de alta qualidade, uma imagem de alta qualidade não é necessariamente obtenível no dispositivo de terminal e isto pode ser uma causa da ocorrência de um atraso ou um sobrefluxo. Além do mais, uma banda de comunicação pode ser desnecessariamente ocupada ou uma carga do dispositivo de terminal pode ser desnecessariamente aumentada. Ao contrário, mesmo quando o servidor de distribuição 1002 transmitir desnecessariamente dados de baixa qualidade, uma imagem com uma qualidade suficiente pode não ser obtida. Assim, o servidor de distribuição 1002 lê e transmite apropriadamente os dados codificados escalonáveis armazenados na seção de armazenamento de dados codificados escalonáveis 1001 como os dados codificados que têm uma qualidade apropriada de acordo com a capacidade do dispositivo de terminal, o ambiente de comunicação ou congêneres.

[00616] Por exemplo, a seção de armazenamento de dados codificados escalonáveis 1001 é configurada para armazenar dados codificados escalonáveis (BL + EL) 1011 em que a codificação de vídeo escalonável é realizada. Os dados codificados escalonáveis (BL + EL) 1011 são dados codificados que incluem tanto uma camada base quanto uma camada de melhoria, e são dados a partir dos quais uma imagem da camada base e uma imagem da camada de melhoria podem ser obtidas pela realização de decodificação.

[00617] O servidor de distribuição 1002 seleciona uma camada apropriada de acordo com a capacidade do dispositivo de terminal para transmitir dados, o ambiente de comunicação ou congêneres, e lê os dados a partir da camada selecionada. Por exemplo, em relação ao PC 1004 ou ao dispositivo tipo tablet 1006 que têm alta capacidade de processamento, o servidor de distribuição 1002 lê os dados codificados escalonáveis (BL + EL)

1011 a partir da seção de armazenamento de dados codificados escalonáveis

Petição 870160073535, de 07/12/2016, pág. 142/212

134 / 145

1001, e transmite os dados codificados escalonáveis (BL + EL) 1011 sem mudança. Por outro lado, por exemplo, em relação ao dispositivo AV 1005 ou ao telefone celular 1007 que têm baixa capacidade de processamento, o servidor de distribuição 1002 extrai os dados da camada base a partir dos dados codificados escalonáveis (BL + EL) 1011, e transmite os dados extraídos da camada base como dados codificados escalonáveis de baixa qualidade (BL) 1012 que são dados que têm o mesmo conteúdo dos dados codificados escalonáveis (BL + EL) 1011, mas têm qualidade inferior aos dados codificados escalonáveis (BL + EL) 1011.

[00618] Em virtude de uma quantidade de dados poder ser facilmente ajustada pelo emprego dos dados codificados escalonáveis, a ocorrência do atraso ou do sobrefluxo pode ser suprimida ou o aumento desnecessário da carga do dispositivo de terminal ou da mídia de comunicação pode ser suprimido. Além do mais, em virtude de uma redundância entre as camadas ser reduzido nos dados codificados escalonáveis (BL + EL) 1011, é possível reduzir adicionalmente a quantidade de dados em relação a quando os dados codificados de cada camada forem tratados como os dados individuais. Portanto, é possível usar mais eficientemente a região de armazenamento da seção de armazenamento de dados codificados escalonáveis 1001.

[00619] Em virtude de vários dispositivos, tais como o PC 1004 até o telefone celular 1007, serem aplicáveis como o dispositivo de terminal, o desempenho de hardware dos dispositivos de terminal difere de acordo com o dispositivo. Além do mais, em virtude de haver várias aplicações que são executadas pelo dispositivo de terminal, o desempenho de software destas também varia. Adicionalmente, em virtude de todas as redes de comunicação, incluindo com fios, sem fios ou ambas, tais como a Internet e a rede de área local (LAN), serem aplicáveis como a rede 1003 que serve como uma mídia de comunicação, o desempenho da transmissão de dados destas varia. Adicionalmente, o desempenho da transmissão de dados pode variar por

Petição 870160073535, de 07/12/2016, pág. 143/212

135 / 145 outras comunicações ou congêneres.

[00620] Portanto, o servidor de distribuição 1002 pode realizar comunicação com o dispositivo de terminal que é o destino de transmissão de dados antes de iniciar a transmissão de dados e, então, obtém informação relacionada ao desempenho do dispositivo de terminal, tais como desempenho de hardware do dispositivo de terminal ou o desempenho da aplicação (software) que é executada pelo dispositivo de terminal, e informação relacionada ao ambiente de comunicação, tal como uma largura de banda disponível da rede 1003. Então, o servidor de distribuição 1002 pode selecionar uma camada apropriada com base na informação obtida.

[00621] Também, a extração da camada pode ser realizada no dispositivo de terminal. Por exemplo, o PC 1004 pode decodificar os dados codificados escalonáveis transmitidos (BL + EL) 1011 e exibir a imagem da camada base ou exibir a imagem da camada de melhoria. Além do mais, por exemplo, o PC 1004 pode ser configurado para extrair os dados codificados escalonáveis (BL) 1012 da camada base dos dados codificados escalonáveis transmitidos (BL + EL) 1011, armazenar os dados codificados escalonáveis extraídos (BL) 1012 da camada base, transmitir para um outro dispositivo, ou decodificar e exibir a imagem da camada base.

[00622] Certamente, os números das seções de armazenamento dos dados codificados escalonáveis 1001, dos servidores de distribuição 1002, das redes 1003 e dos dispositivos de terminal são opcionais. Além do mais, embora o exemplo do servidor de distribuição 1002 que transmite os dados para o dispositivo de terminal seja supra descrito, o exemplo de uso não é limitado a este. O sistema de transmissão de dados 1000 é aplicável em qualquer sistema que seleciona e transmite uma camada apropriada de acordo com a capacidade do dispositivo de terminal, o ambiente de comunicação ou congêneres quando os dados codificados escalonáveis forem transmitidos para o dispositivo de terminal.

Petição 870160073535, de 07/12/2016, pág. 144/212

136 / 145 [Segundo sistema] [00623] Além do mais, a codificação de vídeo escalonável, por exemplo, é usada para transmissão por meio de uma pluralidade de mídias de comunicação, como em um exemplo ilustrado na figura 55.

[00624] Em um sistema de transmissão de dados 1100 ilustrado na figura 55, uma estação de difusão 1101 transmite dados codificados escalonáveis (BL) 1121 da camada base por difusão terrestre 1111. Além do mais, a estação de difusão 1101 transmite dados codificados escalonáveis (EL) 1122 da camada de melhoria por meio de qualquer rede arbitrária 1112 feita por uma rede de comunicação que é com fios, sem fios ou ambas (por exemplo, os dados são empacotados e transmitidos).

[00625] Um dispositivo de terminal 1102 tem uma função de receber a difusão terrestre 1111 que é difundida pela estação de difusão 1101 e recebe os dados codificados escalonáveis (BL) 1121 da camada base transmitidos por meio da difusão terrestre 1111. Além do mais, o dispositivo de terminal 1102 tem adicionalmente uma função de comunicação pela qual a comunicação é realizada por meio da rede 1112, e recebe os dados codificados escalonáveis (EL) 1122 da camada de melhoria transmitidos por meio da rede 1112.

[00626] Por exemplo, de acordo com uma instrução do usuário ou congêneres, o dispositivo de terminal 1102 decodifica os dados codificados escalonáveis (BL) 1121 da camada base adquiridos por meio da difusão terrestre 1111, desse modo, obtendo ou armazenando a imagem da camada base ou transmitindo a imagem da camada base para outros dispositivos.

[00627] Além do mais, por exemplo, de acordo com a instrução do usuário, o dispositivo de terminal 1102 combina os dados codificados escalonáveis (BL) 1121 da camada base adquiridos por meio da difusão terrestre 1111 e os dados codificados escalonáveis (EL) 1122 da camada de melhoria adquiridos por meio da rede 1112, desse modo, obtendo os dados codificados escalonáveis (BL + EL), obtendo ou armazenando a imagem da

Petição 870160073535, de 07/12/2016, pág. 145/212

137 / 145 camada de melhoria pela decodificação dos dados codificados escalonáveis (BL + EL), ou transmitindo a imagem da camada de melhoria para outros dispositivos.

[00628] Da forma supra descrita, os dados codificados escalonáveis, por exemplo, podem ser transmitidos por meio de diferentes mídias de comunicação para cada camada. Portanto, é possível dispersar a carga e suprimir a ocorrência do atraso ou do sobrefluxo.

[00629] Além do mais, de acordo com a situação, a mídia de comunicação usada para a transmissão para cada camada pode ser configurada para ser selecionada. Por exemplo, os dados codificados escalonáveis (BL) 1121 da camada base nos quais a quantidade de dados é comparativamente grande podem ser transmitidos por meio da mídia de comunicação que tem uma grande largura de banda e os dados codificados escalonáveis (EL) 1122 da camada de melhoria nos quais a quantidade de dados é comparativamente pequena podem ser transmitidos por meio da mídia de comunicação que tem uma pequena largura de banda. Além do mais, por exemplo, se a mídia de comunicação que transmite os dados codificados escalonáveis (EL) 1122 da camada de melhoria é a rede 1112 ou a difusão terrestre 1111 pode ser comutado de acordo com a largura de banda disponível da rede 1112. Certamente, o mesmo é verdadeiro para dados de uma camada arbitrária.

[00630] Pelo controle desta maneira, é possível suprimir adicionalmente o aumento da carga na transmissão de dados.

[00631] Certamente, o número das camadas é opcional, e o número de mídias de comunicação usadas na transmissão também é opcional. Além do mais, o número de dispositivos de terminal 1102 que são os destinos da distribuição de dados também é opcional. Adicionalmente, embora o exemplo da difusão a partir da estação de difusão 1101 tenha sido supra descrito, o exemplo de uso não é limitado a este. O sistema de transmissão de dados

Petição 870160073535, de 07/12/2016, pág. 146/212

138 / 145

1100 pode ser aplicado em qualquer sistema que divide os dados codificados escalonáveis usando uma camada como uma unidade e transmite os dados codificados escalonáveis por meio de uma pluralidade de ligações.

[Terceiro sistema] [00632] Além do mais, a codificação de vídeo escalonável é usada no armazenamento dos dados codificados como um exemplo ilustrado na figura 56.

[00633] Em um sistema de captura de imagem 1200 ilustrado na figura 56, um dispositivo de captura de imagem 1201 realiza codificação de vídeo escalonável nos dados de imagem obtidos pela captura de uma imagem de um sujeito 1211, e supre um resultado de vídeo escalonável como os dados codificados escalonáveis (BL + EL) 1221 para um dispositivo de armazenamento de dados codificados escalonáveis 1202.

[00634] O dispositivo de armazenamento de dados codificados escalonáveis 1202 armazena os dados codificados escalonáveis (BL + EL) 1221 supridos a partir do dispositivo de captura de imagem 1201 em qualidade de acordo com a situação. Por exemplo, no caso de circunstâncias normais, o dispositivo de armazenamento de dados codificados escalonáveis 1202 extrai dados da camada base a partir dos dados codificados escalonáveis (BL + EL) 1221, e armazena os dados extraídos como dados codificados escalonáveis (BL) 1222 da camada base com uma pequena quantidade de dados em baixa qualidade. Por outro lado, por exemplo, no caso de circunstâncias notáveis, o dispositivo de armazenamento de dados codificados escalonáveis 1202 armazena os dados codificados escalonáveis (BL + EL) 1221 com uma grande quantidade de dados em alta qualidade sem mudança.

[00635] Desta maneira, em virtude de o dispositivo de armazenamento de dados codificados escalonáveis 1202 poder salvar a imagem em alta qualidade apenas em um caso necessário, é possível suprimir a diminuição do valor da imagem devido à deterioração da qualidade da imagem e suprimir o

Petição 870160073535, de 07/12/2016, pág. 147/212

139 / 145 aumento da quantidade de dados, e é possível melhorar a eficiência de uso da região de armazenamento.

[00636] Por exemplo, considera-se que o dispositivo de captura de imagem 1201 é uma câmera de monitoramento. Em virtude de ser improvável que o conteúdo da imagem capturada seja importante quando um sujeito monitorado (por exemplo, um invasor) não for mostrado na imagem tratada (no caso das circunstâncias normais), a prioridade é na redução da quantidade de dados, e os dados de imagem (dados codificados escalonáveis) são armazenados em baixa qualidade. Por outro lado, em virtude de ser provável que o conteúdo da imagem tratada seja importante quando um alvo de monitoramento for mostrado como o sujeito 1211 na imagem tratada (no caso das circunstâncias notáveis), a prioridade é na qualidade da imagem, e os dados de imagem (dados codificados escalonáveis) são armazenados em alta qualidade.

[00637] Por exemplo, se o caso é o caso das circunstâncias normais ou das circunstâncias notáveis pode ser determinado pelo dispositivo de armazenamento de dados codificados escalonáveis 1202 pela análise da imagem. Além do mais, o dispositivo de captura de imagem 1201 pode ser configurado para fazer a determinação e transmitir o resultado da determinação para o dispositivo de armazenamento de dados codificados escalonáveis 1202.

[00638] Um critério de determinação se o caso é o caso das circunstâncias normais ou das circunstâncias notáveis é opcional, e o conteúdo da imagem que é o critério da determinação é opcional. Certamente, uma condição diferente do conteúdo da imagem pode ser designada como o critério de determinação. Por exemplo, comutação pode ser configurada para ser realizada de acordo com a magnitude ou a forma de onda do som gravado, por um intervalo de tempo predeterminado ou por uma instrução externa, tal como a instrução do usuário.

Petição 870160073535, de 07/12/2016, pág. 148/212

140 / 145 [00639] Além do mais, embora os dois estados das circunstâncias normais e das circunstâncias notáveis tenham sido supra descritos, o número de estados é opcional e, por exemplo, comutação pode ser configurada para ser realizada entre três ou mais estados, tais como circunstâncias normais, circunstâncias ligeiramente notáveis, circunstâncias notáveis e circunstâncias altamente notáveis. Entretanto, o limite superior do número de estados a serem comutados depende do número de camadas dos dados codificados escalonáveis.

[00640] Além do mais, o dispositivo de captura de imagem 1201 pode determinar o número de camadas da codificação de vídeo escalonável de acordo com o estado. Por exemplo, no caso das circunstâncias normais, o dispositivo de captura de imagem 1201 pode gerar os dados codificados escalonáveis (BL) 1222 da camada base com uma pequena quantidade de dados em baixa qualidade e suprir os dados para o dispositivo de armazenamento de dados codificados escalonáveis 1202. Além do mais, por exemplo, no caso das circunstâncias notáveis, o dispositivo de captura de imagem 1201 pode gerar os dados codificados escalonáveis (BL + EL) 1221 da camada base com uma grande quantidade de dados em alta qualidade e suprir os dados para o dispositivo de armazenamento de dados codificados escalonáveis 1202.

[00641] Embora a câmera de monitoramento tenha sido supra descrita como o exemplo, o uso do sistema de captura de imagem 1200 é opcional e não é limitado à câmera de monitoramento.

[00642] Adicionalmente, a presente tecnologia também pode ser aplicada em transmissão contínua HTTP, tal como MPEG DASH, em que dados codificados apropriados são selecionados em unidades de segmentos a partir de uma pluralidade de partes de dados codificados com diferentes resoluções que são preparados antecipadamente e usados. Em outras palavras, uma pluralidade de partes de dados codificados pode compartilhar informação

Petição 870160073535, de 07/12/2016, pág. 149/212

141 / 145 relacionada à codificação ou à decodificação.

[00643] Adicionalmente, nesta especificação, o exemplo no qual vários tipos de informação, tais como o indicador do tipo de parâmetro HRD, o parâmetro HRD ou buffering_period_SEl e layer_buffering_period_SEl são multiplexados em um fluxo contínuo codificado e transmitidos a partir do lado da codificação para o lado da decodificação foi descrito. Entretanto, uma técnica de transmissão da informação não é limitada a este exemplo. Por exemplo, a informação pode ser transmitida ou gravada como dados individuais associados com um fluxo contínuo de bits codificado sem ser multiplexados no fluxo contínuo codificado. Aqui, o termo associar diz respeito ao fato de que uma imagem incluída no fluxo contínuo de bits (que pode ser parte de uma imagem, tais como uma fatia ou um bloco) e informação correspondente à imagem são configuradas para ser ligadas no momento da decodificação. Isto é, a informação pode ser transmitida em um caminho de transmissão separado de uma imagem (ou fluxo contínuo de bits). Além do mais, a informação pode ser gravada em uma mídia de gravação separada (ou uma área de gravação separada da mesma mídia de gravação) da imagem (ou fluxo contínuo de bits). Adicionalmente, a informação e a imagem (ou o fluxo contínuo de bits), por exemplo, podem ser associadas uma com a outra em uma unidade arbitrária, tais como uma pluralidade de quadros, um quadro ou uma parte no quadro.

[00644] As modalidades preferidas da presente divulgação foram supra descritas em relação aos desenhos anexos, embora a presente invenção não seja limitada aos exemplos expostos, certamente. Versados na técnica podem descobrir várias alterações e modificações no escopo das reivindicações anexas, e entende-se que elas cairão naturalmente no escopo técnico da presente divulgação.

[00645] Adicionalmente, a presente tecnologia também pode ser configurada como a seguir.

Petição 870160073535, de 07/12/2016, pág. 150/212

142 / 145 (1) Um dispositivo de processamento de imagem, que inclui: uma seção de definição configurada para definir informação de parâmetro de gerenciamento de armazenamento temporário de cada camada que indica pelo menos um dentre que um parâmetro para gerenciar um armazenamento temporário de decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e que o dito parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma correspondente camada e de uma camada inferior;

uma seção de codificação configurada para codificar uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits; e uma seção de transmissão configurada para transmitir aquela informação de parâmetro de gerenciamento do armazenamento temporário definida pela seção de definição e o fluxo contínuo de bits gerado pela seção de codificação.

(2) O dispositivo de processamento de imagem, de acordo com (1), em que a camada inclui uma subcamada.

(3) O dispositivo de processamento de imagem, de acordo com (1) ou (2), em que a camada é uma visualização da codificação multivisualizações.

(4) O dispositivo de processamento de imagem, de acordo com (1) ou (2), em que a camada é uma camada de codificação de vídeo escalonável.

(5) O dispositivo de processamento de imagem, de acordo com qualquer um de (1) a (4), em que a informação de parâmetro de gerenciamento do armazenamento temporário é descrita na informação de melhoria complementar (SEI).

(6) O dispositivo de processamento de imagem, de acordo com qualquer um de (1) a (5), em que a informação de parâmetro de gerenciamento

Petição 870160073535, de 07/12/2016, pág. 151/212

143 / 145 do armazenamento temporário é descrita em buffering_period_SEI.

(7) O dispositivo de processamento de imagem, de acordo com qualquer um de (1) a (4), em que uma informação de presença / ausência de parâmetro que indica uma presença ou ausência do parâmetro para gerenciar o armazenamento temporário do decodificador que serve como o parâmetro para realizar o processo de decodificação apenas da correspondente camada é descrita em um vps (video parameter set)_extension.

(8) O dispositivo de processamento de imagem, de acordo com qualquer um de (1) a (7), em que a seção de definição define um indicador de AVC que indica que uma camada inferior àquela correspondente camada é codificada por MPEG-4 Parte 10 - Codificação Avançada de Vídeo (AVC) e a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica que o parâmetro para gerenciar o armazenamento temporário do decodificador é o parâmetro para realizar o processo de decodificação apenas da correspondente camada.

(9) Um método de processamento de imagem, que inclui:

definir, por um dispositivo de processamento de imagem, uma informação de parâmetro de gerenciamento de armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário de decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma correspondente camada e de uma camada inferior;

codificar, pelo dispositivo de processamento de imagem, uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits; e transmitir, pelo dispositivo de processamento de imagem, a informação de parâmetro de gerenciamento do armazenamento temporário definida e o fluxo contínuo de bits gerado.

Petição 870160073535, de 07/12/2016, pág. 152/212

144 / 145

Lista dos Sinais de Referência

100 dispositivo de codificação escalonável

101 seção de codificação de imagem em camada

101-1 seção de codificação de imagem da camada base

101-2,101-3 seção de codificação de imagem da camada de melhoria

102 seção de controle de codificação

116 seção de codificação sem perdas

117 armazenamento temporário de acúmulo

127 seção de definição do tipo de HRD

131 armazenamento temporário de acúmulo parcial

132 armazenamento temporário de acúmulo integral

141 seção de cálculo do parâmetro HRD da camada

142 seção de cálculo do parâmetro HRD da camada no tempo

143 seção de definição do tipo de parâmetro HRD

144 seção de definição do tipo de parâmetro HRD no tempo

200 dispositivo de decodificação escalonável

201 seção de decodificação de imagem em camada

201-1 seção de decodificação de imagem da camada base

201-2,201-3 seção de decodificação de imagem da camada de melhoria

202 seção de controle de decodificação

211 armazenamento temporário de acúmulo

212 seção de decodificação sem perdas

224 seção de decodificação do tipo de HRD

231 armazenamento temporário de acúmulo parcial

232 armazenamento temporário de acúmulo integral

241 seção de monitoramento do parâmetro HRD da camada

242 seção de monitoramento do parâmetro HRD da camada no tempo

243 seção de decodificação do tipo de parâmetro HRD

244 seção de decodificação do tipo de parâmetro HRD no tempo

Petição 870160073535, de 07/12/2016, pág. 153/212

145 / 145

301 seção de codificação sem perdas

302 seção de definição da SEI do período de armazenamento temporário

311 seção de definição do conjunto de parâmetro associado

312 armazenamento temporário do conjunto de camada

313 seção de definição da SEI do período de armazenamento temporário de camada

314 seção de designação da transmissão do parâmetro de camada

351 seção de decodificação sem perdas

352 seção de decodificação da SEI do período de armazenamento temporário

361 seção de decodificação do conjunto de parâmetro associado

362 armazenamento temporário do conjunto de camada

363 seção de decodificação da SEI do período de armazenamento temporário de camada

364 seção de recepção da transmissão do parâmetro de camada

Petição 870160073535, de 07/12/2016, pág. 154/212

Claims (9)

1. REIVINDICAÇÕES

   1. Dispositivo de processamento de imagem, caracterizado pelo fato de que compreende:

   uma seção de definição configurada para definir informação de parâmetro de gerenciamento de armazenamento temporário de cada camada que indica pelo menos um dentre que um parâmetro para gerenciar um armazenamento temporário de decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e que o dito parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma correspondente camada e de uma camada inferior;

   uma seção de codificação configurada para codificar uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits; e uma seção de transmissão configurada para transmitir aquela informação de parâmetro de gerenciamento do armazenamento temporário definida pela seção de definição e o fluxo contínuo de bits gerado pela seção de codificação.
2. 2. Dispositivo de processamento de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que a camada inclui uma subcamada.
3. 3. Dispositivo de processamento de imagem, de acordo com a reivindicação 2, caracterizado pelo fato de que a camada é uma visualização da codificação multivisualizações.
4. 4. Dispositivo de processamento de imagem, de acordo com a reivindicação 2, caracterizado pelo fato de que a camada é uma camada de codificação de vídeo escalonável.
5. 5. Dispositivo de processamento de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que a informação de parâmetro de gerenciamento do armazenamento temporário é descrita na informação de melhoria complementar (SEI).

   Petição 870160073535, de 07/12/2016, pág. 155/212
6. 6. Dispositivo de processamento de imagem, de acordo com a reivindicação 5, caracterizado pelo fato de que a informação de parâmetro de gerenciamento do armazenamento temporário é descrita em buffering_period_SEI.
7. 7. Dispositivo de processamento de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que uma informação de presença / ausência de parâmetro que indica uma presença ou ausência do parâmetro para gerenciar o armazenamento temporário do decodificador que serve como o parâmetro para realizar o processo de decodificação apenas da correspondente camada é descrita em um vps (video parameter set)_extension.
8. 8. Dispositivo de processamento de imagem, de acordo com a reivindicação 1, caracterizado pelo fato de que a seção de definição define um indicador de AVC que indica que uma camada inferior àquela correspondente camada é codificada por MPEG-4 Parte 10 - Codificação Avançada de Vídeo (AVC) e a informação de parâmetro de gerenciamento do armazenamento temporário de cada camada que indica que o parâmetro para gerenciar o armazenamento temporário do decodificador é o parâmetro para realizar o processo de decodificação apenas da correspondente camada.
9. 9. Método de processamento de imagem, caracterizado pelo fato de que compreende as etapas de:

   definir, por um dispositivo de processamento de imagem, uma informação de parâmetro de gerenciamento de armazenamento temporário de cada camada que indica pelo menos um de que um parâmetro para gerenciar um armazenamento temporário de decodificador é um parâmetro para realizar um processo de decodificação de apenas uma camada correspondente e que o parâmetro para gerenciar o armazenamento temporário do decodificador é um parâmetro para realizar um processo de decodificação de uma correspondente camada e de uma camada inferior;

   codificar, pelo dispositivo de processamento de imagem, uma imagem que tem pelo menos uma camada e gerar um fluxo contínuo de bits; e

   Petição 870160073535, de 07/12/2016, pág. 156/212 transmitir, pelo dispositivo de processamento de imagem, a informação de parâmetro de gerenciamento do armazenamento temporário definida e o fluxo contínuo de bits gerado.