BR112015006711B1 - Dispositivos de decodificação e de codificação, métodos de decodificação realizado por um dispositivo de decodificação, e, mídia de gravação - Google Patents

Dispositivos de decodificação e de codificação, métodos de decodificação realizado por um dispositivo de decodificação, e, mídia de gravação Download PDF

Info

Publication number
BR112015006711B1
BR112015006711B1 BR112015006711-5A BR112015006711A BR112015006711B1 BR 112015006711 B1 BR112015006711 B1 BR 112015006711B1 BR 112015006711 A BR112015006711 A BR 112015006711A BR 112015006711 B1 BR112015006711 B1 BR 112015006711B1
Authority
BR
Brazil
Prior art keywords
image
unit
decoding
luminance
data
Prior art date
Application number
BR112015006711-5A
Other languages
English (en)
Other versions
BR112015006711A2 (pt
Inventor
Shinobu Hattori
Hiroaki Eto
Takumi Tsuru
Kenichi Kanai
Toshiya Hamada
Original Assignee
Sony Corporation
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corporation filed Critical Sony Corporation
Publication of BR112015006711A2 publication Critical patent/BR112015006711A2/pt
Publication of BR112015006711B1 publication Critical patent/BR112015006711B1/pt

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

DISPOSITIVOS DE DECODIFICAÇÃO E DE CODIFICAÇÃO, MÉTODOS DE DECODIFICAÇÃO REALIZADO POR UM DISPOSITIVO DE DECODIFICAÇÃO, E, MÍDIA DE GRAVAÇÃO. A presente descrição refere-se a um dispositivo de decodificação, a um método de decodificação, a um dispositivo de codificação e a um método de codificação que são capazes de habilitar um lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação. Uma unidade de recepção recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem e informação de gama de cor que indica uma gama de cor da imagem a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado. Uma unidade de extração extrai os dados codificados e a informação de gama de cor a partir do fluxo contínuo codificado. Uma unidade de decodificação decodifica os dados codificados e gera a imagem. A presente descrição pode ser aplicada, por exemplo, em um dispositivo de decodificação de um esquema de codificação de vídeo de alta eficiência (HEVC).

Description

CAMPO DA INVENÇÃO
[001] A presente descrição refere-se a um dispositivo de decodificação, a um método de decodificação, a um dispositivo de codificação e a um método de codificação, e, mais particularmente, a um dispositivo de decodificação, a um método de decodificação, a um dispositivo de codificação e a um método de codificação, que são capazes de habilitar um lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
FUNDAMENTOS DA INVENÇÃO
[002] Nos últimos anos, dispositivos que se conformam com um esquema, tal como uma fase do Grupo de Especialistas de Imagem em Movimento (MPEG), no qual compressão é realizada por transformada ortogonal, tal como transformada discreta de cosseno (DCT), e compensação de movimento usando redundância específica da informação de imagem foram difundidos tanto para distribuição de informação de estações de difusão ou congêneres quanto para recepção de informação nas residências gerais.
[003] Particularmente, um esquema MPEG 2 (ISO/IEC 13818-2) é definido como um esquema de codificação de imagem de uso geral e, agora, está sendo amplamente usado para uma ampla faixa de aplicações de uso profissional e uso pelo consumidor como um padrão que converte uma imagem escaneada entrelaçada, uma imagem progressivamente escaneada, uma imagem de resolução padrão e uma imagem de alta definição. Usando o esquema MPEG 2, por exemplo, uma alta taxa de compressão e uma excelente qualidade da imagem podem ser implementadas pela alocação de uma taxa de bit de 4 a 8 Mbps no caso de uma imagem escaneada entrelaçada de uma resolução padrão com 720 x 480 pixels e uma taxa de bit de 18 a 22 MBps no caso de uma imagem escaneada entrelaçada de uma alta resolução com 1.920 x 1.088 pixels.
[004] O MPEG 2 visa, principalmente, codificação de alta qualidade adequada para difusão, mas não suporta um esquema de codificação de uma taxa de bit inferior àquela de MPEG 1, isto é, um esquema de codificação de uma alta taxa de compressão. À medida que terminais móveis são difundidos, foi considerado que uma necessidade de um esquema de codificação como este aumentará no futuro próximo e, desta maneira, um esquema de codificação MPEG 4 foi padronizado. ISO/IEC 14496-2 foi aprovado como um padrão internacional para o esquema de codificação de imagem MPEG4 em dezembro de 1998.
[005] Adicionalmente, nos últimos anos, padronização de um padrão, tal como H.26L (ITU-T Q6/16 VCEG), desenhado para codificação de imagem para videoconferência primeiramente, está sendo conduzida. Embora H.26L seja conhecido por exigir uma maior quantidade de computação para codificação e decodificação do que em um esquema de codificação, tais como MPEG 2 ou MPEG 4, H.26L também é conhecido por poder implementar codificação de alta eficiência.
[006] Adicionalmente, nos últimos anos, como uma das atividades de MPEG 4, padronização de incorporação de uma função que não é suportada por H.26L com base em H.26L e implementação de codificação de alta eficiência foram conduzidas como Modelo Conjunto de Codificação de Vídeo com Compressão Aprimorada. Esta padronização foi aprovada em nome de H.264 ou MPEG-4 Parte 10 (Codificação de Vídeo Avançada (AVC)) em março de 2003.
[007] Além do mais, como uma extensão desta, Extensão do Alcance da Fidelidade (FRExt) que inclui uma ferramenta de codificação necessária para uso profissional, tais como RGB ou YUV422 ou YUV444 ou 8 x 8 DCT, e uma matriz de quantização que são especificadas em MPEG-2 foi padronizada em fevereiro de 2005. Em decorrência disto, o esquema AVC se tornou um esquema de codificação capaz de também expressar bem um ruído de filme incluído em um filme e está sendo usado em uma ampla faixa de aplicações, tal como um BD (Disco Blu-ray (uma marca registrada)).
[008] Entretanto, nos últimos anos, há uma crescente necessidade de codificação com alta taxa de compressão capaz de comprimir uma imagem de cerca de 4.000 x 2.000 pixels, que é 4 vezes mais alta que uma imagem de alta definição, ou distribuição de uma imagem de alta definição em um ambiente de capacidade de transmissão limitada, tal como a Internet. Para este fim, uma melhoria na eficiência de codificação esteve em revisão contínua pelo Grupo de Especialistas em Codificação de Vídeo (VCEG) sob ITU-T.
[009] Atualmente, a fim de melhorar adicionalmente a eficiência de codificação para ficar mais alta que em AVC, padronização de um esquema de codificação chamado de Codificação de Vídeo de Alta Eficiência (HEVC) foi conduzida pela Equipe de Colaboração Conjunta-Codificação de Vídeo (JCTVC), que é uma organização de padronização em conjunto de ITU-T e ISO/IEC. O Documento Não Patente 1 foi emitido como um esboço na data de agosto de 2013.
[0010] Neste particular, no esquema AVC e no esquema HEVC, uma gama de cor de uma imagem alvo de codificação é definida por colour_primaries de informação de usabilidade de vídeo (VUI).
LISTA DE CITAÇÃO DOCUMENTO NÃO PATENTE
[0011] Documento Não Patente 1: Benjamin Bross, Gary J. Sullivan, Ye-Kui Wang, "Editors' proposed corrections to HEVC version 1," JCTVC- M0432_v3, 2013.4.18-4.26
SUMÁRIO DA INVENÇÃO PROBLEMAS A SEREM RESOLVIDOS PELA INVENÇÃO
[0012] Entretanto, uma gama de cor de uma imagem alvo de codificação é definida por um índice que identifica qualquer uma das gamas de cor definidas em um outro padrão. Assim, é difícil definir uma gama de cor diferente de uma gama de cor fixa como uma gama de cor de uma imagem alvo de codificação, e é difícil reconhecer precisamente uma gama de cor de uma imagem alvo de codificação em um lado de decodificação.
[0013] A presente descrição foi feita à luz do exposto, e é desejável habilitar um lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
SOLUÇÕES PARA OS PROBLEMAS
[0014] Um dispositivo de decodificação de acordo com um primeiro aspecto da presente descrição inclui: uma unidade de recepção que recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem e informação de gama de cor que indica uma gama de cor da imagem a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma unidade de extração que extrai os dados codificados e a informação de gama de cor a partir do fluxo contínuo codificado recebido pela unidade de recepção; e uma unidade de decodificação que decodifica os dados codificados extraídos pela unidade de extração e gera a imagem.
[0015] Um método de decodificação de acordo com o primeiro aspecto da presente descrição corresponde ao dispositivo de decodificação de acordo com o primeiro aspecto da presente descrição.
[0016] No primeiro aspecto da presente descrição, um fluxo contínuo codificado que inclui dados codificados de uma imagem e informação de gama de cor que indica uma gama de cor da imagem é recebido a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado, os dados codificados e a informação de gama de cor são extraídos a partir do fluxo contínuo codificado, e os dados codificados são decodificados para gerar a imagem.
[0017] Um dispositivo de codificação de acordo com um segundo aspecto da presente descrição inclui: uma unidade de codificação que codifica uma imagem e gera dados codificados; uma unidade de definição que define a informação de gama de cor que indica uma gama de cor da imagem; e uma unidade de transmissão que transmite um fluxo contínuo codificado que inclui os dados codificados gerados pela unidade de codificação e a informação de gama de cor gerada pela unidade de definição.
[0018] Um método de codificação de acordo com o segundo aspecto da presente descrição corresponde ao dispositivo de codificação de acordo com o segundo aspecto da presente descrição.
[0019] No segundo aspecto da presente descrição, uma imagem é codificada para gerar dados codificados, informação de gama de cor que indica uma gama de cor da imagem é definida, e um fluxo contínuo codificado que inclui os dados codificados e a informação de gama de cor é transmitido.
[0020] Um dispositivo de decodificação de acordo com um terceiro aspecto da presente descrição inclui: uma unidade de recepção que recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma unidade de extração que extrai os dados codificados, a informação de identificação e a razão de cobertura a partir do fluxo contínuo codificado recebido pela unidade de recepção; e uma unidade de decodificação que decodifica os dados codificados extraídos pela unidade de extração e gera a imagem.
[0021] Um método de decodificação de acordo com o terceiro aspecto da presente descrição corresponde ao dispositivo de decodificação de acordo com o terceiro aspecto da presente descrição.
[0022] No terceiro aspecto da presente descrição, um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor é recebido a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado, os dados codificados, a informação de identificação e a razão de cobertura são extraídos a partir do fluxo contínuo codificado, e os dados codificados são decodificados para gerar a imagem.
[0023] Um dispositivo de codificação de acordo com um quarto aspecto da presente descrição inclui: uma unidade de codificação que codifica uma imagem e gera dados codificados; uma unidade de definição que define a informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor; e uma unidade de transmissão que transmite um fluxo contínuo codificado que inclui os dados codificados gerados na unidade de codificação, a informação de identificação e a razão de cobertura gerada na unidade de definição.
[0024] Um método de codificação de acordo com o quarto aspecto da presente descrição corresponde ao dispositivo de codificação de acordo com o quarto aspecto da presente descrição.
[0025] No quarto aspecto da presente descrição, uma imagem é codificada para gerar dados codificados, informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor são definidas, e um fluxo contínuo codificado que inclui os dados codificados, a informação de identificação e a razão de cobertura é transmitido.
[0026] Os dispositivos de decodificação de acordo com o primeiro e o terceiro aspectos e os dispositivos de codificação de acordo com o segundo e o quarto aspectos podem ser implementados fazendo com que um computador execute um programa.
[0027] O programa executado pelo computador para implementar os dispositivos de decodificação de acordo com o primeiro e o terceiro aspectos e os dispositivos de codificação de acordo com o segundo e o quarto aspectos podem ser providos de maneira tal que o programa seja transmitido por meio de uma mídia de transmissão ou gravado em uma mídia de gravação.
[0028] O dispositivo de decodificação de acordo com o primeiro ou o terceiro aspectos e o dispositivo de codificação de acordo com o segundo ou o quarto aspectos podem ser um dispositivo independente ou podem ser um bloco interno que configura um único dispositivo.
EFEITOS DA INVENÇÃO
[0029] De acordo com o primeiro e o terceiro aspectos da presente descrição, é possível decodificar dados codificados de uma imagem. Adicionalmente, de acordo com o primeiro e o terceiro aspectos da presente descrição, é possível reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
[0030] Adicionalmente, de acordo com o segundo e o quarto aspectos da presente descrição, é possível codificar uma imagem. Adicionalmente, de acordo com o segundo e o quarto aspectos da presente descrição, é possível habilitar um lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
[0031] Os efeitos supradescritos não são necessariamente limitados, e podem incluir qualquer efeito descrito na presente descrição.
BREVE DESCRIÇÃO DOS DESENHOS
[0032] A figura 1 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de codificação de acordo com uma primeira modalidade da presente descrição.
[0033] A figura 2 é um diagrama que ilustra uma sintaxe exemplar de uma SEI colour_primaries_info.
[0034] A figura 3 é um diagrama para descrever o conteúdo da informação da SEI colour_primaries_info.
[0035] A figura 4 é um diagrama para descrever o conteúdo da informação da SEI colour_primaries_info.
[0036] A figura 5 é um diagrama que ilustra uma sintaxe exemplar de colour_primaries_info_sei_element.
[0037] A figura 6 é um diagrama para descrever o conteúdo da informação de colour_primaries_info_sei_element.
[0038] A figura 7 é um diagrama para descrever o conteúdo da informação de colour_primaries_info_sei_element.
[0039] A figura 8 é um diagrama que ilustra uma sintaxe exemplar de uma SEI ref_display_luminance_info.
[0040] A figura 9 é um diagrama para descrever o conteúdo da informação da SEI ref_display_luminance_info.
[0041] A figura 10 é um fluxograma para descrever um processo de geração do fluxo contínuo de um dispositivo de codificação.
[0042] A figura 11 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de decodificação de acordo com a primeira modalidade da presente descrição.
[0043] A figura 12 é um fluxograma para descrever um processo de geração de imagem do dispositivo de decodificação da figura 11.
[0044] A figura 13 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de codificação de acordo com uma segunda modalidade da presente descrição.
[0045] A figura 14 é um diagrama que ilustra uma sintaxe exemplar de uma SEI colour_primaries_info.
[0046] A figura 15 é um diagrama para descrever a informação da SEI colour_primaries_info.
[0047] A figura 16 é um diagrama para descrever a informação da SEI colour_primaries_info.
[0048] A figura 17 é um diagrama para descrever a informação da SEI colour_primaries_info.
[0049] A figura 18 é um diagrama para descrever a informação da SEI colour_primaries_info.
[0050] A figura 19 é um diagrama para descrever a informação da SEI colour_primaries_info.
[0051] A figura 20 é um fluxograma para descrever um processo de geração do fluxo contínuo de um dispositivo de codificação.
[0052] A figura 21 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de decodificação de acordo com a segunda modalidade da presente descrição.
[0053] A figura 22 é um fluxograma para descrever um processo de geração de imagem do dispositivo de decodificação da figura 21.
[0054] A figura 23 é um diagrama para descrever uma caixa MP4 como uma camada do sistema na qual informação de gama de cor e informação de luminância são arranjadas.
[0055] A figura 24 é um diagrama de blocos que ilustra uma configuração de hardware exemplar de um computador.
[0056] A figura 25 é um diagrama que ilustra um esquema de codificação de imagem multivisualizações exemplar.
[0057] A figura 26 é um diagrama que ilustra uma configuração exemplar de um dispositivo de codificação de imagem multivisualizações no qual a presente descrição é aplicada.
[0058] A figura 27 é um diagrama que ilustra uma configuração exemplar de um dispositivo de decodificação de imagem multivisualizações no qual a presente descrição é aplicada.
[0059] A figura 28 é um diagrama que ilustra um esquema de codificação de imagem escalonável exemplar.
[0060] A figura 29 é um diagrama para descrever codificação escalonável espacial exemplar.
[0061] A figura 30 é um diagrama para descrever codificação escalonável temporal exemplar.
[0062] A figura 31 é um diagrama para descrever codificação escalonável exemplar de uma razão de sinal por ruído.
[0063] A figura 32 é um diagrama que ilustra uma configuração exemplar de um dispositivo de codificação de imagem escalonável no qual a presente descrição é aplicada.
[0064] A figura 33 é um diagrama que ilustra uma configuração exemplar de um dispositivo de decodificação de imagem escalonável no qual a presente descrição é aplicada.
[0065] A figura 34 é um diagrama que ilustra uma configuração esquemática exemplar de um dispositivo de televisão no qual a presente descrição é aplicada.
[0066] A figura 35 é um diagrama que ilustra uma configuração esquemática exemplar de um telefone celular no qual a presente descrição é aplicada.
[0067] A figura 36 é um diagrama que ilustra uma configuração esquemática exemplar de um dispositivo de gravação/reprodução no qual a presente descrição é aplicada.
[0068] A figura 37 é um diagrama que ilustra uma configuração esquemática exemplar de um dispositivo de formação de imagem no qual a presente descrição é aplicada.
[0069] A figura 38 é um diagrama de blocos que ilustra um exemplo de aplicação de codificação escalonável.
[0070] A figura 39 é um diagrama de blocos que ilustra um outro exemplo de aplicação de codificação escalonável.
[0071] A figura 40 é um diagrama de blocos que ilustra um outro exemplo de aplicação de codificação escalonável.
[0072] A figura 41 ilustra uma configuração esquemática exemplar de um aparelho de vídeo no qual a presente descrição é aplicada.
[0073] A figura 42 ilustra uma configuração esquemática exemplar de um processador de vídeo no qual a presente descrição é aplicada.
[0074] A figura 43 ilustra uma outra configuração esquemática exemplar de um processador de vídeo no qual a presente descrição é aplicada.
MODO PARA REALIZAR A INVENÇÃO <Primeira modalidade> (Configuração exemplar do dispositivo de codificação de acordo com a primeira modalidade)
[0075] A figura 1 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de codificação de acordo com uma primeira modalidade da presente descrição.
[0076] Um dispositivo de codificação 10 da figura 1 inclui uma unidade de definição 11, uma unidade de codificação 12 e uma unidade de transmissão 13, e codifica uma imagem de acordo com um esquema com base no esquema HEVC.
[0077] Especificamente, a unidade de definição 11 do dispositivo de codificação 10 define conjuntos de parâmetro, tais como um conjunto de parâmetro de sequência (SPS), um conjunto de parâmetro de figura (PPS), uma VUI e uma informação de melhoria complementar (SEI).
[0078] Exemplos da SEI incluem uma SEI colour_primaries_info, uma SEI ref_display_luminance_info e congêneres. A SEI colour_primaries_info é uma SEI que inclui informação de gama de cor que indica um (limite de) uma gama de cor. A SEI ref_display_luminance_info é uma SEI que inclui informação de luminância (informação de gama de cor de uma exibição mestre) que indica níveis de luminância de branco, cinza e preto da exibição mestre (unidade de exibição) que exibe uma imagem alvo de codificação no momento da autoria da imagem alvo de codificação. A unidade de definição 11 provê os conjuntos de parâmetro definidos para a unidade de codificação 12.
[0079] A imagem alvo de codificação é inserida na unidade de codificação 12 em unidades de quadros. A unidade de codificação 12 codifica a imagem alvo de codificação inserida de acordo com o esquema HEVC. A unidade de codificação 12 gera um fluxo contínuo codificado com base nos dados codificados obtidos em decorrência da codificação e nos conjuntos de parâmetro providos a partir da unidade de definição 11 e provê o fluxo contínuo codificado para a unidade de transmissão 13.
[0080] A unidade de transmissão 13 transmite o fluxo contínuo codificado provido a partir da unidade de codificação 12 para um dispositivo de decodificação que será descrito posteriormente.
(Sintaxe exemplar da SEI colour_primaries_info)
[0081] A figura 2 é um diagrama que ilustra uma sintaxe exemplar da SEI colour_primaries_info.
[0082] Da forma ilustrada em uma segunda linha da figura 2, colour_primaries_info_id é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 3, colour_primaries_info_id é um ID que identifica o propósito da informação de gama de cor.
[0083] Da forma ilustrada em uma terceira linha da figura 2, colour_primaries_type é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 3, colour_primaries_type indica um tipo do espaço de cor. Por exemplo, da forma ilustrada em uma tabela da figura 3, colour_primaries_type é 1 quando um tipo do espaço de cor for um sistema de coordenadas de cor RGB e colour_primaries_type é 2 quando um tipo do espaço de cor for um sistema de coordenadas de cor XYZ.
[0084] Da forma ilustrada em uma quarta linha da figura 2, colour_primaries_info_present_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 3, colour_primaries_info_present_flag é um indicador que indica se informação de cor primária que indica uma posição da cor primária no espaço de cor na informação de gama de cor é descrita ou não na SEI colour_primaries_info. colour_primaries_info_present_flag é 1 quando a informação de cor primária for descrita e colour_primaries_info_present_flag é 0 quando a informação de cor primária não for descrita.
[0085] Da forma ilustrada em uma quinta linha da figura 2, white_point_info_present_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 3, white_point_info_present_flag é um indicador que indica se informação de branco que indica uma posição (ponto branco) de branco no espaço de cor na informação de gama de cor é descrita ou não na SEI colour_primaries_info. white_point_info_present_flag é 1 quando a informação de branco for descrita e white_point_info_present_flag é 0 quando a informação de branco não for descrita.
[0086] Da forma ilustrada nas sexta e sétima linhas da figura 2, quando colour_description_present_flag incluído em uma VUI for 1, limited_colour_gamut_boundaries_flag é descrito na SEI colour_primaries_info. Adicionalmente, colour_description_present_flag é um indicador que indica se um índice que identifica uma gama de cor definida em uma VUI em um outro padrão é descrito ou não. colour_description_present_flag é 1 quando um índice for descrito em uma VUI e colour_description_present_flag é 0 quando um índice não for descrito em uma VUI.
[0087] Adicionalmente, limited_colour_gamut_boundaries_flag é um indicador que indica se uma gama de cor de uma imagem alvo de codificação é limitada ou não a uma gama de cor identificada por um índice descrito em uma VUI, da forma ilustrada na figura 4. limited_colour_gamut_boundaries_flag é 0 quando uma gama de cor for limitada e limited_colour_gamut_boundaries_flag é 1 quando uma gama de cor não for limitada.
[0088] Da forma ilustrada nas oitava e nona linhas da figura 2, quando limited_colour_gamut_boundaries_flag for 1, limited_colour_gamut_range_in_percent é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 4, limited_colour_gamut_range_in_percent indica uma razão de cobertura de uma gama de cor de uma imagem alvo de codificação por uma gama de cor identificada por um índice descrito em uma VUI. Em outras palavras, limited_colour_gamut_range_in_percent é uma razão de uma gama de cor de uma imagem alvo de codificação por uma gama de cor identificada por um índice descrito em uma VUI.
[0089] Da forma ilustrada na décima e na décima primeira linhas da figura 2, quando colour_primaries_info_present_flag for 1, colour_primaries_order_type é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 4, colour_primaries_order_type é um tipo de uma ordem de descrição da informação de cor primária.
[0090] Por exemplo, da forma ilustrada em uma tabela da figura 4, quando o tipo do espaço de cor for o sistema de coordenadas de cor RGB, a informação de cor primária for descrita na ordem de vermelho, verde e azul, vermelho, verde e azul e, então, descrita na ordem descendente de comprimentos de onda das outras cores (por exemplo, a ordem de amarelo e ciano), colour_primaries_order_type é 1. Adicionalmente, quando o tipo do espaço de cor for o sistema de coordenadas de cor RGB e a informação de cor primária for descrita na ordem descendente de comprimentos de onda (por exemplo, a ordem de vermelho, amarelo, verde, ciano e azul), colour_primaries_order_type é 2. Quando o tipo do espaço de cor for o sistema de coordenadas de cor XYZ e a informação de cor primária for descrita na ordem de X, Y e Z, colour_primaries_order_type é 3.
[0091] Adicionalmente, da forma ilustrada em uma décima segunda linha da figura 2, quando colour_primaries_info_present_flag for 1, num_colour_primaries_minus3 é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 4, num_colour_primaries_minus3 é um valor obtido pela subtração de três do número de partes de informação de cor primária descritas na SEI colour_primaries_info.
[0092] Da forma ilustrada na décima terceira e na décima sexta linhas da figura 2, quando colour_primaries_info_present_flag for 1, informação de cor primária é descrita na SEI colour_primaries_info pelo número obtido pela adição de três em num_colour_primaries_minus3. A informação de cor primária inclui colour_primaries_info_sei_element (ColourPrimaryXSign[i], ColourPrimaryXExp[i], ColourPrimaryXMantissa[i] e ColourPrimaryXManlen[i]) que indica posições de cores primárias em uma direção X no espaço de cor e colour_primaries_info_sei_element (ColourPrimaryYSign[i], ColourPrimaryYExp[i], ColourPrimaryYMantissa[i] e ColourPrimaryYManlen[i]) que indica posições em uma direção Y.
[0093] Da forma ilustrada nas décima sétima até décima nona linhas da figura 2, quando white_point_info_present_flag for 1, informação de branco é descrita na SEI colour_primaries_info. A informação de branco inclui colour_primaries_info_sei_element (WhitePointXSign, WhitePointXExp, WhitePointXMantissa, WhitePointXManlen) que indica uma posição de branco na direção X no espaço de cor e colour_primaries_info_sei_element (WhitePointYSign, WhitePointYExp, WhitePointYMantissa, WhitePointYManlen) que indica uma posição na direção Y.
(Sintaxe exemplar de colour_primaries_info_sei_element)
[0094] A figura 5 é um diagrama que ilustra uma sintaxe exemplar de colour_primaries_info_sei_element que configura a informação de cor primária e a informação de branco.
[0095] Da forma ilustrada na figura 5, colour_primaries_info_sei_element inclui colour_primaries_info_sign, colour_primaries_info_exponent, colour_primaries_info_mantissa_len_minus1 e colour_primaries_info_mantissa.
[0096] Na figura 5, ColourPrimaryXSign[i], ColourPrimaryYSign[i], WhitePointXSign e WhitePointYSign são coletivamente referidos como "OutSign". Similarmente, ColourPrimaryXExp[i], ColourPrimaryYExp[i], WhitePointXExp e WhitePointYExp são coletivamente referidos como "OutExp" e ColourPrimaryXMantissa[i], ColourPrimaryYMantissa[i], WhitePointXMantissa e WhitePointYMantissa são coletivamente referidos como "OutMantissa". Adicionalmente, ColourPrimaryXManlen[i], ColourPrimaryYManlen[i], WhitePointXManlen e WhitePointYManlen são coletivamente referidos como "OutManLen".
[0097] Da forma ilustrada na figura 6, colour_primaries_info_sign indica um sinal de um ponto flutuante de coordenadas em uma posição de uma cor correspondente em um espaço de cor. colour_primaries_info_sign é 0 quando o sinal for positivo e colour_primaries_info_sign é 1 quando o sinal for negativo.
[0098] Da forma ilustrada na figura 6, colour_primaries_info_exponent indica um expoente de um ponto flutuante de coordenadas em uma posição de uma cor correspondente em um espaço de cor.
[0099] Da forma ilustrada na figura 6, colour_primaries_info_mantissa_len_minus1 é um valor obtido pela subtração de 1 do número de bits de colour_primaries_info_mantissa. Da forma ilustrada na figura 6, colour_primaries_info_mantissa é uma mantissa de um ponto flutuante de coordenadas de uma posição de uma cor correspondente em um espaço de cor.
[00100] Da forma supradescrita, colour_primaries_info_sei_element pode indicar coordenadas x de uma posição de uma cor correspondente em um espaço de cor. Em outras palavras, da forma ilustrada na figura 7, as coordenadas x podem ser obtidas pelas seguintes Equações (1) usando colour_primaries_info_sign, colour_primaries_info_exponent, colour_primaries_info_mantissa_len_minus1 e colour_primaries_info_mantissa.
[Fórmula Matemática 1]
[00101] Se o < e < 127, x = (-1)s * 2e-31 * (1 + n v 2V)
[00102] Se e = 0, x = (-1)s * 2-(30+V) * n ... (1)
[00103] Na Equação (1), s denota colour_primaries_info_sign e e indica colour_primaries_info_exponent. Adicionalmente, n denota colour_primaries_info_mantissa e v denota colour_primaries_info_mantissa_len_minus1.
[00104] Por exemplo, quando colour_primaries_info_sei_element for colour_primaries_info_sei_element (ColourPrimaryXSign[i], ColourPrimaryXExp[i], ColourPrimaryXMantissa[i] e ColourPrimaryXManlen[i]) que indica as coordenadas ColourPrimariesX das cores primárias na direção X no espaço de cor, ColourPrimariesXSign, que é colour_primaries_info_sign de colour_primaries_info_sei_element (ColourPrimaryXSign[i], ColourPrimaryXExp[i], ColourPrimaryXMantissa[i] e ColourPrimaryXManlen[i]) é substituído em s da Equação (1), da forma ilustrada em uma tabela da figura 7.
[00105] Adicionalmente, ColourPrimariesXExp, que é colour_primaries_info_exponent de colour_primaries_info_sei_element (ColourPrimaryXSign[i], ColourPrimaryXExp[i], ColourPrimaryXMantissa[i] e ColourPrimaryXManlen[i]) é substituído em e da Equação (1). Além do mais, ColourPrimaryXMantissa, que é colour_primaries_info_mantissa de colour_primaries_info_sei_element (ColourPrimaryXSign[i], ColourPrimaryXExp[i], ColourPrimaryXMantissa[i] e ColourPrimaryXManlen[i]) é substituído em n da Equação (1) e ColourPrimaryXManlen, que é colour_primaries_info_mantissa_len_minus1, é substituído em v. Assim, as coordenadas ColourPrimariesX das posições das cores primárias na direção X no espaço de cor são calculadas como as coordenadas x.
[00106] Similarmente, quando colour_primaries_info_sei_element for colour_primaries_info_sei_element (ColourPrimaryYSign[i], ColourPrimaryYExp[i] e ColourPrimaryYMantissa[i], ColourPrimaryYManlen[i]), as coordenadas ColourPrimariesY das posições das cores primárias na direção Y no espaço de cor são calculadas como as coordenadas x.
[00107] Quando colour_primaries_info_sei_element for colour_primaries_info_sei_element (WhitePointXSign, WhitePointXExp, WhitePointXMantissa e WhitePointXManlen), as coordenadas WhitePointX da posição de branco na direção X no espaço de cor são calculadas como as coordenadas x.
[00108] Quando colour_primaries_info_sei_element for colour_primaries_info_sei_element (WhitePointYSign, WhitePointYExp, WhitePointYMantissa e WhitePointYManlen), as coordenadas WhitePointY da posição de branco na direção Y no espaço de cor são calculadas como as coordenadas x.
(Sintaxe exemplar da SEI ref_display_luminance_info)
[00109] A figura 8 é um diagrama que ilustra uma sintaxe exemplar da SEI ref_display_luminance_info.
[00110] Da forma ilustrada em uma segunda linha da figura 8, ref_display_luminance_info_id é descrito na SEI ref_display_luminance_info. Da forma ilustrada na figura 9, ref_display_luminance_info_id é um ID que identifica o propósito da informação de luminância de branco, cinza e preto da exibição mestre (exibição de referência).
[00111] Da forma ilustrada em uma terceira linha da figura 8, ref_display_luminance_white_present_flag é descrito na SEI ref_display_luminance_info. Da forma ilustrada na figura 9, ref_display_luminance_white_present_flag é um indicador que indica se informação de luminância de branco da exibição mestre está descrita ou não na SEI ref_display_luminance_info. Quando a informação de luminância de branco da exibição mestre estiver descrita na SEI ref_display_luminance_info, ref_display_luminance_white_present_flag é 1 e quando a informação de luminância de branco da exibição mestre não estiver descrita na SEI ref_display_luminance_info, ref_display_luminance_white_present_flag é 0.
[00112] Da forma ilustrada nas quarta e quinta linhas da figura 8, mesmo para preto e cinza, similarmente, ref_display_luminance_black_present_flag e ref_display_luminance_gray_present_flag são descritos na SEI ref_display_luminance_info.
[00113] Adicionalmente, da forma ilustrada nas sexta e sétima linhas da figura 8, quando ref_display_luminance_white_present_flag for 1, ref_display_luminance_white é descrito na SEI ref_display_luminance_info. Da forma ilustrada na figura 9, ref_display_luminance_white é informação de luminância de branco.
[00114] Da forma ilustrada nas oitava e nona linhas da figura 8, para preto, similarmente, quando ref_display_luminance_black_present_flag for 1, ref_display_luminance_black que serve como informação de luminância de preto é descrito na SEI ref_display_luminance_info.
[00115] Adicionalmente, da forma ilustrada na décima e na décima primeira linhas da figura 8, mesmo para cinza, similarmente, quando ref_display_luminance_gray_present_flag for 1, ref_display_luminance_gray que serve como informação de luminância de cinza é descrito na SEI ref_display_luminance_info.
(Descrição do processamento do dispositivo de codificação)
[00116] A figura 10 é um fluxograma para descrever um processo de geração do fluxo contínuo do dispositivo de codificação 10.
[00117] Na etapa S11 da figura 10, a unidade de definição 11 do dispositivo de codificação 10 define um SPS. Na etapa S12, a unidade de definição 11 define uma VUI que inclui um índice (informação de identificação) que identifica uma gama de cor definida em um outro padrão.
[00118] Na etapa S13, a unidade de definição 11 define um PPS. Na etapa S14, a unidade de definição 11 determina se uma gama de cor de uma imagem alvo de codificação é mais estreita ou não que uma gama de cor identificada pelo índice incluído na VUI.
[00119] Quando for determinado, na etapa S14, que a gama de cor da imagem alvo de codificação é mais estreita que a gama de cor identificada pelo índice incluído na VUI, o processo prossegue para a etapa S15. Na etapa S15, a unidade de definição 11 define a SEI colour_primaries_info que inclui a informação de gama de cor da imagem alvo de codificação e o processo prossegue para a etapa S16.
[00120] Neste particular, quando for determinado, na etapa S14, que a gama de cor da imagem alvo de codificação não é mais estreita que a gama de cor identificada pelo índice incluído na VUI, a SEI colour_primaries_info que inclui a informação de gama de cor da imagem alvo de codificação não é definida. Por exemplo, a SEI colour_primaries_info que inclui limited_colour_gamut_range_in_percent é definida. Então, o processo prossegue para a etapa S16.
[00121] Na etapa S16, a unidade de definição 11 define a SEI ref_display_luminance_info que inclui a informação de luminância de branco, cinza e preto da exibição mestre. A unidade de definição 11 provê os conjuntos de parâmetro, tais como o SPS e o PPS definidos, a VUI, a SEI colour_primaries_info e a SEI ref_display_luminance_info para a unidade de codificação 12.
[00122] Na etapa S17, a unidade de codificação 12 codifica uma imagem alvo de codificação das unidades de quadro inserida a partir do exterior de acordo com o esquema HEVC. Na etapa S18, a unidade de codificação 12 gera fluxo contínuo codificado com base nos dados codificados obtidos em decorrência da codificação e nos conjuntos de parâmetro providos a partir da unidade de definição 11 e provê o fluxo contínuo codificado para a unidade de transmissão 13.
[00123] Na etapa S19, a unidade de transmissão 13 transmite o fluxo contínuo codificado provido a partir da unidade de codificação 12 para o dispositivo de decodificação que será descrito posteriormente e, então, o processo termina.
[00124] Da forma supradescrita, o dispositivo de codificação 10 define e transmite a SEI colour_primaries_info que inclui a informação de gama de cor e, assim, mesmo quando uma imagem alvo de codificação tiver uma gama de cor diferente de uma gama de cor definida em um outro padrão, é possível habilitar o lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
[00125] Adicionalmente, o dispositivo de codificação 10 define e transmite a SEI ref_display_luminance_info que inclui a informação de luminância de branco, preto e cinza e, assim, é possível habilitar o lado de decodificação a reconhecer a informação de luminância da exibição mestre.
[00126] A descrição exposta foi feita em conexão com o exemplo no qual a SEI colour_primaries_info que inclui a informação de gama de cor é definida quando a gama de cor da imagem alvo de codificação for mais estreita que a gama de cor identificada pelo índice incluído na VUI, mas a SEI colour_primaries_info que inclui a informação de gama de cor pode ser definida quando a gama de cor da imagem alvo de codificação for mais larga que a gama de cor identificada pelo índice incluído na VUI.
(Configuração exemplar do dispositivo de decodificação de acordo com a primeira modalidade)
[00127] A figura 11 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de decodificação que decodifica o fluxo contínuo codificado transmitido a partir do dispositivo de codificação 10 da figura 1 de acordo com a primeira modalidade da presente descrição.
[00128] Um dispositivo de decodificação 50 da figura 11 inclui uma unidade de recepção 51, uma unidade de extração 52, uma unidade de decodificação 53, uma unidade de ajuste 54, uma unidade de controle de exibição 55 e uma unidade de exibição 56.
[00129] A unidade de recepção 51 do dispositivo de decodificação 50 recebe o fluxo contínuo codificado transmitido a partir do dispositivo de codificação 10 da figura 1 e provê o fluxo contínuo codificado para a unidade de extração 52.
[00130] A unidade de extração 52 extrai conjuntos de parâmetro e dados codificados a partir do fluxo contínuo codificado provido a partir da unidade de recepção 51. A unidade de extração 52 provê os conjuntos de parâmetro e os dados codificados para a unidade de decodificação 53. Adicionalmente, a unidade de extração 52 provê a VUI, a SEI colour_primaries_info e a SEI ref_display_luminance_info entre os conjuntos de parâmetro para a unidade de ajuste 54.
[00131] A unidade de decodificação 53 decodifica os dados codificados providos a partir da unidade de extração 52 de acordo com o esquema HEVC. Neste momento, a unidade de decodificação 53 também consulta os conjuntos de parâmetro providos a partir da unidade de extração 52 conforme necessário. A unidade de decodificação 53 provê uma imagem obtida em decorrência da decodificação para a unidade de ajuste 54.
[00132] A unidade de ajuste 54 adquire a informação de gama de cor a partir da SEI colour_primaries_info provida a partir da unidade de extração 52 ou reconhece uma gama de cor com base no índice incluído na VUI. A unidade de ajuste 54 ajusta uma gama de cor da imagem provida a partir da unidade de decodificação 53 com base tanto em uma gama de cor indicada pela informação de gama de cor adquirida quanto na gama de cor reconhecida e em uma gama de cor da unidade de exibição 56.
[00133] Adicionalmente, a unidade de ajuste 54 adquire a informação de luminância de branco, preto e cinza a partir da SEI ref_display_luminance_info provida a partir da unidade de extração 52. A unidade de ajuste 54 ajusta uma faixa dinâmica da luminância da imagem cuja gama de cor foi ajustada com base na informação de luminância adquirida e na informação de luminância da unidade de exibição 56. A unidade de ajuste 54 provê a imagem cuja faixa dinâmica da luminância foi ajustada para a unidade de controle de exibição 55.
[00134] Aqui, o ajuste da faixa dinâmica da luminância é considerado realizado depois do ajuste da gama de cor, mas o ajuste da faixa dinâmica da luminância pode ser realizado antes do ajuste da gama de cor.
[00135] A unidade de controle de exibição 55 faz com que a imagem provida a partir da unidade de ajuste 54 seja exibida na unidade de exibição 56.
(Descrição do processamento do dispositivo de decodificação)
[00136] A figura 12 é um fluxograma para descrever um processo de geração de imagem do dispositivo de decodificação 50 da figura 11.
[00137] Na etapa S51 da figura 12, a unidade de recepção 51 do dispositivo de decodificação 50 recebe o fluxo contínuo codificado transmitido a partir do dispositivo de codificação 10 da figura 1 e provê o fluxo contínuo codificado para a unidade de extração 52.
[00138] Na etapa S52, a unidade de extração 52 extrai conjuntos de parâmetro e dados codificados a partir do fluxo contínuo codificado provido a partir da unidade de recepção 51. A unidade de extração 52 provê os conjuntos de parâmetro e os dados codificados para a unidade de decodificação 53. Adicionalmente, a unidade de extração 52 provê a VUI, a SEI colour_primaries_info e a SEI ref_display_luminance_info entre os conjuntos de parâmetro para a unidade de ajuste 54.
[00139] Na etapa S53, a unidade de decodificação 53 decodifica os dados codificados providos a partir da unidade de extração 52 de acordo com o esquema HEVC. Neste momento, a unidade de decodificação 53 consulta os conjuntos de parâmetro providos a partir da unidade de extração 52 conforme necessário. A unidade de decodificação 53 provê uma imagem obtida em decorrência da decodificação para a unidade de ajuste 54.
[00140] Na etapa S54, a unidade de ajuste 54 determina se a SEI colour_primaries_info foi provida ou não a partir da unidade de extração 52. Quando for determinado, na etapa S54, que a SEI colour_primaries_info foi provida, o processo prossegue para a etapa S55.
[00141] Na etapa S55, a unidade de ajuste 54 adquire a informação de gama de cor a partir da SEI colour_primaries_info e reconhece uma gama de cor indicada pela informação de gama de cor adquirida. Adicionalmente, quando a informação de gama de cor não for incluída na SEI colour_primaries_info, por exemplo, uma gama de cor é reconhecida com base em limited_colour_gamut_range_in_percent. Então, o processo prossegue para a etapa S57.
[00142] Neste particular, quando for determinado, na etapa S54, que a SEI colour_primaries_info não foi provida, na etapa S56, a unidade de ajuste 54 reconhece uma gama de cor definida em um outro padrão com base no índice incluído na VUI provida a partir da unidade de extração 52. Então, o processo prossegue para a etapa S57.
[00143] Na etapa S57, a unidade de ajuste 54 ajusta uma gama de cor da imagem provida a partir da unidade de decodificação 53 com base na gama de cor da unidade de exibição 56 ou na gama de cor reconhecida na etapa S55 ou na etapa S56.
[00144] Na etapa S58, a unidade de ajuste 54 adquire a informação de luminância de branco, preto e cinza a partir da SEI ref_display_luminance_info provida a partir da unidade de extração 52.
[00145] Na etapa S59, a unidade de ajuste 54 ajusta uma faixa dinâmica da luminância da imagem cuja gama de cor foi ajustada com base na informação de luminância da unidade de exibição 56 e na informação de luminância adquirida. A unidade de ajuste 54 provê a imagem cuja faixa dinâmica da luminância foi ajustada para a unidade de controle de exibição 55.
[00146] Na etapa S60, a unidade de controle de exibição 55 faz com que a imagem provida a partir da unidade de ajuste 54 seja exibida na unidade de exibição 56 e, então, o processo termina.
[00147] Da forma supradescrita, o dispositivo de decodificação 50 recebe a SEI colour_primaries_info que inclui a informação de gama de cor e, assim, pode reconhecer precisamente uma gama de cor de uma imagem alvo de codificação. Em decorrência disto, é possível otimizar uma gama de cor de uma imagem decodificada. Em outras palavras, quando uma gama de cor de uma imagem alvo de codificação tiver uma gama de cor diferente de uma gama de cor definida em um outro padrão, é possível que uma gama de cor de uma imagem decodificada seja reduzida ou ampliada em vão.
[00148] Adicionalmente, o dispositivo de decodificação 50 recebe a SEI ref_display_luminance_info que inclui a informação de luminância de branco, preto e cinza e, assim, reconhece precisamente a informação de luminância da exibição mestre. Em decorrência disto, é possível otimizar uma faixa dinâmica da luminância de uma imagem decodificada.
[00149] Além do mais, quando uma gama de cor de uma imagem alvo de codificação for maior que uma gama de cor identificada por um índice incluído na VUI, a informação de gama de cor pode não ser descrita na SEI colour_primaries_info. Neste caso, o dispositivo de decodificação 50 reconhece uma gama de cor de uma imagem alvo de codificação e ajusta uma gama de cor com base em limited_colour_gamut_range_in_percent e em uma gama de cor identificada por um índice incluído em uma VUI.
[00150] Da forma supradescrita, quando a informação de gama de cor não for descrita, o dispositivo de decodificação 50 pode reconhecer precisamente uma gama de cor de uma imagem alvo de codificação com base em limited_colour_gamut_range_in_percent, comparada a quando uma gama de cor de um alvo de codificação for definida por um índice de uma VUI.
<Segunda modalidade> (Configuração exemplar do dispositivo de codificação de acordo com a segunda modalidade)
[00151] A figura 13 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de codificação de acordo com uma segunda modalidade da presente descrição.
[00152] Entre os componentes ilustrados na figura 13, os mesmos componentes que os componentes ilustrados na figura 1 são denotados pelos mesmos números de referência. Uma descrição repetida será apropriadamente omitida.
[00153] Uma configuração de um dispositivo de codificação 70 da figura 13 difere da configuração da figura 1 em que uma unidade de definição 72 é provida em vez da unidade de definição 11 e uma unidade de ajuste de imagem 71 é novamente provida.
[00154] Uma imagem é inserida na unidade de ajuste de imagem 71 do dispositivo de codificação 70 a partir do exterior. A unidade de ajuste de imagem 71 realiza, por exemplo, uma operação de edição de uma imagem inserida a partir do exterior, ao mesmo tempo em que faz com que a imagem seja exibida na exibição mestre (não ilustrada) de acordo com um trabalho de autoria do usuário. A unidade de ajuste de imagem 71 provê informação de gama de cor de uma imagem editada e informação de luminância de branco e preto da exibição mestre (não ilustrada) para a unidade de definição 72. Adicionalmente, a unidade de ajuste de imagem 71 insere a imagem editada na unidade de codificação 12 como uma imagem alvo de codificação.
[00155] A unidade de definição 72 define um SPS, um PPS e uma VUI. Adicionalmente, a unidade de definição 72 define a SEI colour_primaries_info que inclui a informação de gama de cor e a informação de luminância providas a partir da unidade de ajuste de imagem 71. A unidade de definição 72 provê os conjuntos de parâmetro, tais como o SPS e o PPS definidos, a VUI e a SEI colour_primaries_info para a unidade de codificação 12.
(Sintaxe exemplar da SEI colour_primaries_info)
[00156] A figura 14 é um diagrama que ilustra uma sintaxe exemplar da SEI colour_primaries_info e as figuras 15 a 19 são diagramas para descrever a informação da SEI colour_primaries_info.
[00157] Da forma ilustrada na figura 14, colour_primaries_info_id é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 15, colour_primaries_info_id é um ID que identifica o propósito da informação de gama de cor.
[00158] Adicionalmente, da forma ilustrada na figura 14, colour_primaries_cancel_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 15, colour_primaries_cancel_flag é um indicador que indica se continuidade de uma SEI colour_primaries_info prévia é cancelada ou não. colour_primaries_cancel_flag é 1 quando a continuidade da SEI colour_primaries_info prévia for cancelada e ele é 0 quando a continuidade da SEI colour_primaries_info prévia não for cancelada.
[00159] Da forma ilustrada na figura 14, quando colour_primaries_cancel_flag for 0, colour_primaries_persistence_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 15, colour_primaries_persistence_flag é um indicador que indica se a informação de gama de cor e a informação de luminância incluídas na SEI colour_primaries_info são aplicadas ou não em uma pluralidade de figuras consecutivas. colour_primaries_persistence_flag é 1 quando a informação de gama de cor e a informação de luminância forem aplicadas em uma pluralidade de figuras consecutivas e ele é 0 quando a informação de gama de cor e a informação de luminância forem aplicadas em apenas uma figura.
[00160] Adicionalmente, da forma ilustrada na figura 14, white_level_display_luminance_present_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 16, white_level_display_luminance_present_flag é um indicador que indica se white_level_display_luminance é descrito ou não na SEI colour_primaries_info. Da forma ilustrada na figura 19, white_level_display_luminance é a informação de luminância de branco da exibição mestre. white_level_display_luminance_present_flag é 1 quando a informação de luminância de branco da exibição mestre for descrita na SEI colour_primaries_info e white_level_display_luminance_present_flag é 0 quando a informação de luminância de branco da exibição mestre não for descrita na SEI colour_primaries_info.
[00161] Da forma ilustrada nas figuras 14 e 16, para preto, similarmente, black_level_display_luminance_present_flag é descrito na SEI colour_primaries_info.
[00162] Adicionalmente, da forma ilustrada na figura 14, colour_gamut_coverage_present_flag é descrito na SEI colour_primaries_info. Da forma ilustrada na figura 16, colour_gamut_coverage_present_flag é um indicador que indica se colour_gamut_coverage é descrito ou não na SEI colour_primaries_info. Da forma ilustrada na figura 19, colour_gamut_coverage é informação que indica uma razão de cobertura de uma gama de cor de uma imagem alvo de codificação por uma gama de cor identificada por um índice descrito em uma VUI. colour_gamut_coverage_present_flag é 1 quando colour_gamut_coverage for descrito na SEI colour_primaries_info e colour_gamut_coverage_present_flag é 0 quando colour_gamut_coverage não for descrito na SEI colour_primaries_info.
[00163] Da forma ilustrada nas figuras 14 e 17, colour_primary_Red_x que indica uma cromaticidade de vermelho na direção X no sistema de coordenadas de cor CIE na informação de gama de cor e colour_primary_Red_y que indica uma cromaticidade de vermelho na direção Y também são descritos na SEI colour_primaries_info. Da forma ilustrada nas figuras 14 e 18, para verde, azul e branco, similarmente, colour_primary_Green_x, colour_primary_Green_y, colour_primary_Blue_x, colour_primary_Blue_y, white_point_x e white_point_y são descritos na SEI colour_primaries_info como a informação de gama de cor.
[00164] A informação de gama de cor é descrita usando um ponto fixo de 16 bits. Em outras palavras, a informação de gama de cor é considerada transmitida a partir da unidade de ajuste de imagem 71 ou congêneres, por exemplo, através de dados de identificação de exibição Estendidos (EDID) da Interface Multimídia em Alta Definição (HDMI) (uma marca registrada) nos quais um tamanho da informação transmissível é limitado. Adicionalmente, o requerente propôs atualmente metadados relacionados a uma gama de cor descritos usando um ponto fixo como Comissão Eletrotécnica Internacional (IEC) 61966-12-2. Assim, a fim de não mudar o tamanho da informação de gama de cor ou a fim de fazer com que os metadados propostos sejam usados como a informação de gama de cor, a informação de gama de cor é descrita usando um ponto fixo.
[00165] Adicionalmente, a informação de gama de cor de acordo com a primeira modalidade também pode ser descrita usando um ponto fixo de 16 bits.
[00166] Da forma ilustrada na figura 14, quando white_level_display_luminance_present_flag for 1, white_level_display_luminance é descrito na SEI colour_primaries_info. Quando black_level_display_luminance_present_flag for 1, blak_level_display_luminance é descrito. Da forma ilustrada na figura 19, blak_level_display_luminance é a informação de luminância de preto da exibição mestre.
[00167] Da forma supradescrita, white_level_display_luminance e blak_level_display_luminance são descritos na SEI colour_primaries_info. Em outras palavras, o requerente propôs atualmente metadados relacionados a luminância que incluem informação de luminância de branco e preto como IEC 61966-12-2. Assim, a fim de fazer com que os metadados propostos sejam usados como white_level_display_luminance e blak_level_display_luminance, white_level_display_luminance e blak_level_display_luminance são descritos na SEI colour_primaries_info.
[00168] Adicionalmente, da forma ilustrada na figura 14, quando colour_gamut_coverage_present_flag for 1, colour_gamut_coverage é descrito na SEI colour_primaries_info.
(Descrição do processamento do dispositivo de codificação)
[00169] A figura 20 é um fluxograma para descrever um processo de geração do fluxo contínuo do dispositivo de codificação 70.
[00170] Na etapa S80 da figura 20, a unidade de ajuste de imagem 71 realiza uma operação de edição de uma imagem inserida a partir do exterior, ao mesmo tempo em que faz com que a imagem seja exibida na exibição mestre (não ilustrada) de acordo com o trabalho de autoria do usuário. A unidade de ajuste de imagem 71 provê informação de gama de cor de uma imagem editada e informação de luminância de branco e preto da exibição mestre (não ilustrada) para a unidade de definição 72. Adicionalmente, a unidade de ajuste de imagem 71 insere a imagem editada na unidade de codificação 12 como uma imagem alvo de codificação.
[00171] Um processo das etapas S81 a S83 é o mesmo processo das etapas S11 a S13 da figura 10 e, assim, uma descrição deste é omitida.
[00172] Na etapa S84, a unidade de definição 72 define a SEI colour_primaries_info que inclui a informação de gama de cor da imagem alvo de codificação e a informação de luminância da exibição mestre providas a partir da unidade de ajuste de imagem 71.
[00173] Um processo das etapas S85 a S87 é o mesmo processo das etapas S17 a S19 da figura 20 e, assim, uma descrição deste é omitida.
[00174] Da forma supradescrita, o dispositivo de codificação 70 define e transmite a SEI colour_primaries_info que inclui a informação de gama de cor e, assim, mesmo quando uma imagem alvo de codificação tiver uma gama de cor diferente de uma gama de cor definida em um outro padrão, é possível habilitar o lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
[00175] Adicionalmente, o dispositivo de codificação 70 define white_level_display_luminance e black_level_display_luminance na SEI colour_primaries_info e transmite a SEI colour_primaries_info e, assim, é possível habilitar o lado de decodificação a reconhecer a informação de luminância da exibição mestre.
(Configuração exemplar do dispositivo de decodificação de acordo com a segunda modalidade)
[00176] A figura 21 é um diagrama de blocos que ilustra uma configuração exemplar de um dispositivo de decodificação que decodifica o fluxo contínuo codificado transmitido a partir do dispositivo de codificação 70 da figura 13 de acordo com a segunda modalidade da presente descrição.
[00177] Entre os componentes ilustrados na figura 21, os mesmos componentes que os componentes ilustrados na figura 11 são denotados pelos mesmos números de referência. Uma descrição repetida será apropriadamente omitida.
[00178] Uma configuração de um dispositivo de decodificação 90 da figura 21 difere da configuração da figura 11 em que uma unidade de extração 91, uma unidade de ajuste 92 e uma unidade de controle de exibição 93 são providas em vez da unidade de extração 52, da unidade de ajuste 54 e da unidade de controle de exibição 55.
[00179] A unidade de extração 91 do dispositivo de decodificação 90 da figura 21 extrai conjuntos de parâmetro e dados codificados a partir do fluxo contínuo codificado provido a partir da unidade de recepção 51. A unidade de extração 91 provê os conjuntos de parâmetro e os dados codificados para a unidade de decodificação 53. Adicionalmente, a unidade de extração 91 provê a VUI e a SEI colour_primaries_info entre os conjuntos de parâmetro para a unidade de ajuste 92 e provê a SEI colour_primaries_info para a unidade de controle de exibição 93.
[00180] A unidade de ajuste 92 adquire a informação de gama de cor e colour_gamut_coverage a partir da SEI colour_primaries_info provida a partir da unidade de extração 91. Adicionalmente, a unidade de ajuste 92 reconhece uma gama de cor com base em um índice incluído na VUI provida a partir da unidade de extração 91. A unidade de ajuste 92 ajusta a gama de cor da imagem provida a partir da unidade de decodificação 53 com base tanto na gama de cor indicada pela informação de gama de cor adquirida e na gama de cor reconhecida, na gama de cor com base em colour_gamut_coverage quanto na gama de cor da unidade de exibição 56. A unidade de ajuste 92 provê a imagem cuja gama de cor foi ajustada para a unidade de controle de exibição 93.
[00181] A unidade de controle de exibição 93 adquire a informação de luminância de branco e preto a partir da SEI colour_primaries_info provida a partir da unidade de extração 91. A unidade de controle de exibição 93 ajusta uma faixa dinâmica da luminância da imagem da gama de cor ajustada provida a partir da unidade de ajuste 92 com base na informação de luminância adquirida e na informação de luminância da unidade de exibição 56. A unidade de controle de exibição 93 provê a imagem cuja faixa dinâmica da luminância foi ajustada para ser exibida na unidade de exibição 56.
(Descrição do processamento do dispositivo de decodificação)
[00182] A figura 22 é um fluxograma para descrever um processo de geração de imagem do dispositivo de decodificação 90 da figura 21.
[00183] Na etapa S101 da figura 22, a unidade de recepção 51 do dispositivo de decodificação 90 recebe o fluxo contínuo codificado transmitido a partir do dispositivo de codificação 70 da figura 13 e provê o fluxo contínuo codificado para a unidade de extração 91.
[00184] Na etapa S102, a unidade de extração 91 extrai conjuntos de parâmetro e dados codificados a partir do fluxo contínuo codificado provido a partir da unidade de recepção 51. A unidade de extração 91 provê os conjuntos de parâmetro e os dados codificados para a unidade de decodificação 53. Adicionalmente, a unidade de extração 91 provê a VUI e a SEI colour_primaries_info entre os conjuntos de parâmetro para a unidade de ajuste 92 e provê a SEI colour_primaries_info para a unidade de controle de exibição 93.
[00185] Na etapa S103, a unidade de decodificação 53 decodifica os dados codificados providos a partir da unidade de extração 91 de acordo com o esquema HEVC. Neste momento, a unidade de decodificação 53 consulta os conjuntos de parâmetro providos a partir da unidade de extração 91 conforme necessário. A unidade de decodificação 53 provê uma imagem obtida em decorrência da decodificação para a unidade de ajuste 92.
[00186] Na etapa S104, a unidade de ajuste 92 reconhece uma gama de cor definida em um outro padrão com base em um índice incluído na VUI provida a partir da unidade de extração 91.
[00187] Na etapa S105, a unidade de ajuste 92 determina se a SEI colour_primaries_info foi provida ou não a partir da unidade de extração 91. Quando for determinado, na etapa S105, que a SEI colour_primaries_info foi provida, o processo prossegue para a etapa S106.
[00188] Na etapa S106, a unidade de ajuste 92 adquire a informação de gama de cor a partir da SEI colour_primaries_info e reconhece uma gama de cor indicada pela informação de gama de cor adquirida. Adicionalmente, quando a informação de gama de cor não for incluída na SEI colour_primaries_info, por exemplo, uma gama de cor é reconhecida com base em colour_gamut_coverage e na gama de cor reconhecida na etapa S104. Então, o processo prossegue para a etapa S107.
[00189] Neste particular, quando for determinado, na etapa S105, que a SEI colour_primaries_info não foi provida, o processo prossegue para a etapa S107.
[00190] Na etapa S107, a unidade de ajuste 92 ajusta uma gama de cor da imagem provida a partir da unidade de decodificação 53 com base na gama de cor da unidade de exibição 56 ou na gama de cor reconhecida na etapa S104 ou na etapa S106.
[00191] Na etapa S108, a unidade de controle de exibição 93 adquire a informação de luminância de branco e preto a partir da SEI colour_primaries_info provida a partir da unidade de extração 91. Na etapa S109, a unidade de controle de exibição 93 ajusta uma faixa dinâmica da luminância da imagem da gama de cor ajustada provida a partir da unidade de ajuste 92 com base na informação de luminância da unidade de exibição 56 e na informação de luminância adquirida.
[00192] Na etapa S110, a unidade de controle de exibição 93 provê a imagem cuja faixa dinâmica da luminância foi ajustada para ser exibida na unidade de exibição 56 e, então, o processo termina.
[00193] Da forma supradescrita, o dispositivo de decodificação 90 recebe a SEI colour_primaries_info que inclui a informação de gama de cor e, assim, pode reconhecer precisamente uma gama de cor de uma imagem alvo de codificação. Em decorrência disto, é possível otimizar uma gama de cor de uma imagem decodificada. Em outras palavras, quando uma gama de cor de uma imagem alvo de codificação tiver uma gama de cor diferente de uma gama de cor definida em um outro padrão, é possível que uma gama de cor de uma imagem decodificada seja reduzida ou ampliada em vão.
[00194] Por exemplo, quando uma gama de cor da unidade de exibição 56 for maior que uma gama de cor de uma imagem alvo de codificação, o dispositivo de decodificação 90 pode exibir uma imagem decodificada sem ajustar uma gama de cor da imagem decodificada. Em decorrência disto, é possível fazer com que uma imagem desejada por um operador em autoria seja exibida na unidade de exibição 56.
[00195] Adicionalmente, o dispositivo de decodificação 90 pode exibir uma imagem decodificada de alta qualidade pelo ajuste de uma gama de cor de uma imagem decodificada com base em uma gama de cor precisamente reconhecida.
[00196] Além do mais, já que white_level_display_luminance e blak_level_display_luminance também são incluídos na SEI colour_primaries_info, o dispositivo de decodificação 90 pode reconhecer precisamente a informação de luminância da exibição mestre. Em decorrência disto, é possível otimizar uma faixa dinâmica da luminância de uma imagem decodificada.
[00197] A descrição exposta foi feita em conexão com o exemplo no qual a informação de gama de cor e a informação de luminância são arranjadas na SEI, mas a informação de gama de cor e a informação de luminância podem ser arranjadas em uma camada do sistema.
<Exemplo no qual informação de gama de cor e informação de luminância são arranjadas na caixa MP4> (Descrição de caixa MP4 na qual informação de gama de cor e informação de luminância são arranjadas)
[00198] A figura 23 é um diagrama para descrever uma caixa MP4 como uma camada do sistema na qual a informação de gama de cor e a informação de luminância são arranjadas.
[00199] Da forma ilustrada na figura 23, quando a informação de gama de cor e a informação de luminância forem arranjadas na caixa MP4, uma caixa Caixa de Informação de Cores Primárias (tinf) que armazena ColourPrimariesInfo como a informação de gama de cor e a informação de luminância é novamente definida. A caixa tinf é armazenada em (uma caixa stbl armazenada em) uma caixa trak ou uma caixa track fragment (caixa traf).
[00200] ColourPrimariesInfo tem uma configuração similar à SEI colour_primaries_info da figura 2 e à SEI ref_display_luminance_info da figura 8 ou à SEI colour_primaries_info da figura 14, exceto em que padding_value para alinhamento de byte é inserido.
[00201] A presente descrição pode ser aplicada mesmo no esquema AVC.
<Terceira modalidade> (Descrição do computador de acordo com a presente descrição)
[00202] A supradescrita série de processos pode ser executada por hardware ou software. Quando a série de processos for executada por software, um programa que configura o software é instalado em um computador. Aqui, exemplos do computador incluem um computador incorporado em hardware dedicado e um computador pessoal de uso geral que inclui vários programas instalados em si e é capaz de executar vários tipos de funções.
[00203] A figura 24 é um diagrama de blocos que ilustra uma configuração de hardware exemplar de um computador que executa a supradescrita série de processos por um programa.
[00204] Em um computador, uma unidade de processamento central (CPU) 201, uma memória exclusiva de leitura (ROM) 202 e uma memória de acesso aleatório (RAM) 203 são conectadas umas nas outras por meio de um barramento 204.
[00205] Uma interface de entrada/saída (I/O) 205 é adicionalmente conectada no barramento 204. Uma unidade de inserção 206, uma unidade de transmissão 207, uma unidade de armazenamento 208, uma unidade de comunicação 209 e uma unidade de disco 210 são conectadas na interface I/O 205.
[00206] A unidade de inserção 206 inclui um teclado, um mouse, um microfone e congêneres. A unidade de transmissão 207 inclui uma tela, um alto-falante e congêneres. A unidade de armazenamento 208 inclui um disco rígido, uma memória não volátil e congêneres. A unidade de comunicação 209 inclui uma interface de rede ou congêneres. A unidade de disco 210 aciona uma mídia removível 211, tais como um disco magnético, um disco óptico, um disco magneto-óptico ou uma memória semicondutora.
[00207] No computador com a configuração exposta, a CPU 201 executa a supradescrita série de processos, por exemplo, pelo carregamento do programa armazenado na unidade de armazenamento 208 na RAM 203 através da interface I/O 205 e do barramento 204 e execução do programa.
[00208] Por exemplo, o programa executado pelo computador (a CPU 201) pode ser gravado na mídia removível 211 como uma mídia acondicionada ou congêneres e provido. Adicionalmente, o programa pode ser provido através de uma mídia de transmissão com fios ou sem fios, tais como uma rede de área local (LAN), a Internet, ou difusão por satélite digital.
[00209] No computador, a mídia removível 211 é montada na unidade de disco 210 e, então, o programa pode ser instalado na unidade de armazenamento 208 através da interface I/O 205. Adicionalmente, o programa pode ser recebido pela unidade de comunicação 209 por meio de uma mídia de transmissão com fios ou sem fios e, então, instalado na unidade de armazenamento 208. Além do mais, o programa pode ser instalado na ROM 202 ou na unidade de armazenamento 208 antecipadamente.
[00210] Adicionalmente, o programa pode ser um programa no qual os processos são cronologicamente realizados na ordem descrita nesta descrição ou pode ser um programa no qual os processos são realizados em paralelo ou em sincronismos necessários, tais como sincronismos de chamada.
<Quarta modalidade> (Aplicação na codificação de imagem multivisualizações e na decodificação de imagem multivisualizações)
[00211] A supradescrita série de processos pode ser aplicada na codificação de imagem multivisualizações e na decodificação de imagem multivisualizações. A figura 25 ilustra um esquema de codificação de imagem multivisualizações exemplar.
[00212] Da forma ilustrada na figura 25, uma imagem multivisualizações inclui imagens de uma pluralidade de visualizações. A pluralidade de visualizações da imagem multivisualizações inclui uma visualização base na qual codificação e decodificação são realizadas usando apenas uma imagem de sua própria visualização sem usar imagens de outras visualizações e uma visualização não base na qual codificação e decodificação são realizadas usando imagens de outras visualizações. Como a visualização não base, uma imagem de uma visualização base pode ser usada e uma imagem de uma outra visualização não base pode ser usada.
[00213] Quando a imagem multivisualizações da figura 25 for codificada e decodificada, uma imagem de cada visualização é codificada e decodificada, mas a técnica de acordo com a primeira modalidade pode ser aplicada na codificação e na decodificação das respectivas visualizações. Desta maneira, uma gama de cor de uma imagem alvo de codificação pode ser precisamente reconhecida em um lado de decodificação.
[00214] Além do mais, os indicadores ou os parâmetros usados na técnica de acordo com a primeira modalidade podem ser compartilhados na codificação e na decodificação das respectivas visualizações. Mais especificamente, por exemplo, os elementos de sintaxe da SEI colour_primaries_info ou da SEI ref_display_luminance_info podem ser compartilhados na codificação e na decodificação das respectivas visualizações. Certamente, qualquer outra informação necessária pode ser compartilhada na codificação e na decodificação das respectivas visualizações.
[00215] Desta maneira, é possível impedir a transmissão de informação redundante e reduzir uma quantidade (taxa de bit) de informação a ser transmitida (isto é, é possível impedir que a eficiência de codificação se degrade).
(Dispositivo de codificação de imagem multivisualizações)
[00216] A figura 26 é um diagrama que ilustra um dispositivo de codificação de imagem multivisualizações que realiza a supradescrita codificação de imagem multivisualizações. Um dispositivo de codificação de imagem multivisualizações 600 inclui uma unidade de codificação 601, uma unidade de codificação 602 e uma unidade de multiplexação 603, da forma ilustrada na figura 26.
[00217] A unidade de codificação 601 codifica uma imagem de visualização base e gera um fluxo contínuo codificado da imagem de visualização base. A unidade de codificação 602 codifica uma imagem de visualização não base e gera um fluxo contínuo codificado da imagem de visualização não base. A unidade de multiplexação 603 realiza multiplexação do fluxo contínuo codificado da imagem de visualização base gerado pela unidade de codificação 601 e do fluxo contínuo codificado da imagem de visualização não base gerado pela unidade de codificação 602 e gera um fluxo contínuo codificado da imagem multivisualizações.
[00218] O dispositivo de codificação 10 (figura 1) pode ser aplicado como a unidade de codificação 601 e a unidade de codificação 602 do dispositivo de codificação de imagem multivisualizações 600. Em outras palavras, é possível habilitar um lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação quando a codificação de cada visualização for realizada. Adicionalmente, a unidade de codificação 601 e a unidade de codificação 602 podem realizar codificação usando os mesmos indicadores ou parâmetros (por exemplo, elementos de sintaxe relacionados a processamento interimagens) (isto é, podem compartilhar os indicadores ou os parâmetros) e, assim, é possível impedir que a eficiência de codificação degrade.
(Dispositivo de decodificação de imagem multivisualizações)
[00219] A figura 27 é um diagrama que ilustra um dispositivo de decodificação de imagem multivisualizações que realiza a supradescrita decodificação de imagem multivisualizações. Um dispositivo de decodificação de imagem multivisualizações 610 inclui uma unidade de demultiplexação 611, uma unidade de decodificação 612 e uma unidade de decodificação 613, da forma ilustrada na figura 27.
[00220] A unidade de demultiplexação 611 realiza demultiplexação do fluxo contínuo codificado da imagem multivisualizações obtido pela multiplexação do fluxo contínuo codificado da imagem de visualização base e do fluxo contínuo codificado da imagem de visualização não base e extrai o fluxo contínuo codificado da imagem de visualização base e o fluxo contínuo codificado da imagem de visualização não base. A unidade de decodificação 612 decodifica o fluxo contínuo codificado da imagem de visualização base extraído pela unidade de demultiplexação 611 e obtém a imagem de visualização base. A unidade de decodificação 613 decodifica o fluxo contínuo codificado da imagem de visualização não base extraído pela unidade de demultiplexação 611 e obtém a imagem de visualização não base.
[00221] O dispositivo de decodificação 50 (figura 11) pode ser aplicado como a unidade de decodificação 612 e a unidade de decodificação 613 do dispositivo de decodificação de imagem multivisualizações 610. Em outras palavras, uma gama de cor de uma imagem alvo de codificação pode ser precisamente reconhecida quando a decodificação de cada visualização for realizada. Adicionalmente, a unidade de decodificação 612 e a unidade de decodificação 613 podem realizar decodificação usando os mesmos indicadores ou parâmetros (por exemplo, elementos de sintaxe relacionados a processamento interimagens) (isto é, podem compartilhar os indicadores ou os parâmetros) e, assim, é possível impedir que a eficiência de codificação degrade.
<Quinta modalidade> (Aplicação na codificação de imagem escalonável e na decodificação de imagem escalonável)
[00222] A supradescrita série de processos pode ser aplicada na codificação de imagem escalonável e na decodificação de imagem escalonável (codificação escalonável e decodificação escalonável). A figura 28 ilustra um esquema de codificação de imagem escalonável exemplar.
[00223] A codificação de imagem escalonável (codificação escalonável) é um esquema no qual uma imagem é dividida em uma pluralidade de camadas (hierarquizada) de forma que dados de imagem tenham uma função escalonável para um certo parâmetro e codificação seja realizada em cada camada. A decodificação de imagem escalonável (decodificação escalonável) é decodificação correspondente à codificação de imagem escalonável.
[00224] Da forma ilustrada na figura 28, para hierarquização de uma imagem, uma imagem é dividida em uma pluralidade de imagens (camadas) com base em um certo parâmetro com uma função escalonável. Em outras palavras, uma imagem hierarquizada (uma imagem escalonável) inclui imagens de uma pluralidade de camadas que diferem em um valor do certo parâmetro de uma para a outra. A pluralidade de camadas da imagem escalonável incluem uma camada base na qual codificação e decodificação são realizadas usando apenas uma imagem de sua própria camada sem usar imagens de outras camadas e camadas não base (que também são referidas como "camadas de melhoria") nas quais codificação e decodificação são realizadas usando imagens de outras camadas. Como a camada não base, uma imagem da camada base pode ser usada e uma imagem de qualquer outra camada não base pode ser usada.
[00225] No geral, a camada não base é configurada com dados (dados diferenciais) de uma imagem diferencial entre sua própria imagem e uma imagem de uma outra camada, de forma que a redundância seja reduzida. Por exemplo, quando uma imagem for hierarquizada em duas camadas, isto é, uma camada base e uma camada não base (que também é referida como uma camada de melhoria), uma imagem de uma qualidade inferior a uma imagem original é obtida quando somente dados da camada base forem usados e uma imagem original (isto é, uma imagem de alta qualidade) é obtida quando tanto os dados da camada base quanto os dados da camada não base forem combinados.
[00226] Como uma imagem é hierarquizada como exposto, imagens de várias qualidades podem ser obtidas dependendo da situação. Por exemplo, para um terminal com uma baixa capacidade de processamento, tal como um terminal móvel, informação de compressão da imagem apenas da camada base é transmitida e uma imagem em movimento de baixas resoluções espacial e temporal ou uma baixa qualidade é reproduzida e, para um terminal com uma alta capacidade de processamento, tais como uma televisão ou um computador pessoal, informação de compressão da imagem da camada de melhoria, bem como da camada base, é transmitida e uma imagem em movimento de altas resoluções espacial e temporal ou uma alta qualidade é reproduzida. Em outras palavras, sem realizar o processo de transcodificação, informação de compressão da imagem de acordo com uma capacidade de um terminal ou uma rede pode ser transmitida a partir de um servidor.
[00227] Quando a imagem escalonável ilustrada na figura 28 for codificada e decodificada, imagens de respectivas camadas são codificadas e decodificadas, mas a técnica de acordo com a primeira modalidade pode ser aplicada na codificação e na decodificação das respectivas camadas. Desta maneira, uma gama de cor de uma imagem alvo de codificação pode ser precisamente reconhecida no lado de decodificação.
[00228] Além do mais, os indicadores ou os parâmetros usados na técnica de acordo com a primeira modalidade podem ser compartilhados na codificação e na decodificação das respectivas camadas. Mais especificamente, por exemplo, os elementos de sintaxe da SEI colour_primaries_info ou da SEI ref_display_luminance_info podem ser compartilhados na codificação e na decodificação das respectivas camadas. Certamente, qualquer outra informação necessária pode ser compartilhada na codificação e na decodificação das respectivas visualizações.
[00229] Desta maneira, é possível impedir a transmissão de informação redundante e reduzir uma quantidade (taxa de bit) de informação a ser transmitida (isto é, é possível impedir que a eficiência de codificação se degrade).
(Parâmetro escalonável)
[00230] Na codificação de imagem escalonável e na decodificação de imagem escalonável (a codificação escalonável e a decodificação escalonável), todo parâmetro tem uma função escalonável. Por exemplo, uma resolução espacial pode ser usada como o parâmetro (escalonabilidade espacial), da forma ilustrada na figura 29. No caso da escalonabilidade espacial, respectivas camadas têm diferentes resoluções de imagem. Em outras palavras, neste caso, cada figura é hierarquizada em duas camadas, isto é, uma camada base de uma resolução espacialmente inferior àquela de uma imagem original e uma camada de melhoria que é combinada com a camada base para obter uma resolução espacial original, da forma ilustrada na figura 29. Certamente, o número de camadas é um exemplo e cada figura pode ser hierarquizada em um número de camadas arbitrário.
[00231] Como um outro parâmetro com tal escalonabilidade, por exemplo, uma resolução temporal pode ser aplicada (escalonabilidade temporal), da forma ilustrada na figura 30. No caso da escalonabilidade temporal, respectivas camadas com diferentes taxas de quadro. Em outras palavras, neste caso, cada figura é hierarquizada em duas camadas, isto é, uma camada base de uma taxa de quadro inferior àquela de uma imagem em movimento original e uma camada de melhoria que é combinada com a camada base para obter uma taxa de quadro original, da forma ilustrada na figura 30. Certamente, o número de camadas é um exemplo e cada figura pode ser hierarquizada em um número de camadas arbitrário.
[00232] Como um outro parâmetro com tal escalonabilidade, por exemplo, uma razão de sinal por ruído (SNR) pode ser aplicada (escalonabilidade da SNR). No caso da escalonabilidade da SNR, respectivas camadas com diferentes SNRs. Em outras palavras, neste caso, cada figura é hierarquizada em duas camadas, isto é, uma camada base de uma SNR inferior àquela de uma imagem original e uma camada de melhoria que é combinada com a camada base para obter uma SNR original, da forma ilustrada na figura 31. Certamente, o número de camadas é um exemplo e cada figura pode ser hierarquizada em um número de camadas arbitrário.
[00233] Um parâmetro diferente dos supradescritos exemplos pode ser aplicado como um parâmetro com escalonabilidade. Por exemplo, uma profundidade de bit pode ser usada como um parâmetro com escalonabilidade (escalonabilidade da profundidade de bit). No caso da escalonabilidade da profundidade de bit, respectivas camadas têm diferentes profundidades de bit. Neste caso, por exemplo, a camada base (camada base) inclui uma imagem de 8 bits e uma imagem de 10 bits pode ser obtida pela adição da camada de melhoria na camada base.
[00234] Como um outro parâmetro com escalonabilidade, por exemplo, um formato de croma pode ser usado (escalonabilidade de croma). No caso da escalonabilidade de croma, respectivas camadas têm diferentes formatos de croma. Neste caso, por exemplo, a camada base (camada base) inclui uma imagem componente de um formato 4:2:0 e uma imagem componente de um formato 4:2:2 pode ser obtida pela adição da camada de melhoria na camada base.
(Dispositivo de codificação de imagem escalonável)
[00235] A figura 32 é um diagrama que ilustra um dispositivo de codificação de imagem escalonável que realiza a supradescrita codificação de imagem escalonável. Um dispositivo de codificação de imagem escalonável 620 inclui uma unidade de codificação 621, uma unidade de codificação 622 e uma unidade de multiplexação 623, da forma ilustrada na figura 32.
[00236] A unidade de codificação 621 codifica uma imagem da camada base e gera um fluxo contínuo codificado da imagem da camada base. A unidade de codificação 622 codifica uma imagem da camada não base e gera um fluxo contínuo codificado da imagem da camada não base. A unidade de multiplexação 623 realiza multiplexação do fluxo contínuo codificado da imagem da camada base gerado pela unidade de codificação 621 e do fluxo contínuo codificado da imagem da camada não base gerado pela unidade de codificação 622 e gera um fluxo contínuo codificado da imagem escalonável.
[00237] O dispositivo de codificação 10 (figura 1) pode ser aplicado como a unidade de codificação 621 e a unidade de codificação 622 do dispositivo de codificação de imagem escalonável 620. Em outras palavras, é possível habilitar o lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação quando a codificação de cada camada for realizada. Adicionalmente, a unidade de codificação 621 e a unidade de codificação 622 podem realizar, por exemplo, controle de um processo do filtro de intraprevisão usando os mesmos indicadores ou parâmetros (por exemplo, elementos de sintaxe relacionados a processamento interimagens) (isto é, podem compartilhar os indicadores ou os parâmetros) e, assim, é possível impedir que a eficiência de codificação degrade.
(Dispositivo de decodificação de imagem escalonável)
[00238] A figura 33 é um diagrama que ilustra um dispositivo de decodificação de imagem escalonável que realiza a supradescrita decodificação de imagem escalonável. Um dispositivo de decodificação de imagem escalonável 630 inclui uma unidade de demultiplexação 631, uma unidade de decodificação 632 e uma unidade de decodificação 633, da forma ilustrada na figura 33.
[00239] A unidade de demultiplexação 631 realiza demultiplexação do fluxo contínuo codificado da imagem escalonável obtido pela multiplexação do fluxo contínuo codificado da imagem da camada base e do fluxo contínuo codificado da imagem da camada não base e extrai o fluxo contínuo codificado da imagem da camada base e o fluxo contínuo codificado da imagem da camada não base. A unidade de decodificação 632 decodifica o fluxo contínuo codificado da imagem da camada base extraído pela unidade de demultiplexação 631 e obtém a imagem da camada base. A unidade de decodificação 633 decodifica o fluxo contínuo codificado da imagem da camada não base extraído pela unidade de demultiplexação 631 e obtém a imagem da camada não base.
[00240] O dispositivo de decodificação 50 (figura 11) pode ser aplicado como a unidade de decodificação 632 e a unidade de decodificação 633 do dispositivo de decodificação de imagem escalonável 630. Em outras palavras, uma gama de cor de uma imagem alvo de codificação pode ser precisamente reconhecida quando decodificação de cada camada for realizada. Adicionalmente, a unidade de decodificação 612 e a unidade de decodificação 613 podem realizar decodificação usando os mesmos indicadores ou parâmetros (por exemplo, elementos de sintaxe relacionados a processamento interimagens) (isto é, podem compartilhar os indicadores ou os parâmetros) e, assim, é possível impedir que a eficiência de codificação degrade.
<Sexta modalidade> (Configuração exemplar do dispositivo de televisão)
[00241] A figura 34 ilustra uma configuração esquemática de um dispositivo de televisão no qual a presente tecnologia é aplicada. Um dispositivo de televisão 900 inclui uma antena 901, um sintonizador 902, um demultiplexador 903, um decodificador 904, uma unidade de processamento do sinal de vídeo 905, uma unidade de exibição 906, uma unidade de processamento do sinal de áudio 907, um alto-falante 908 e uma unidade de I/F externa 909. O dispositivo de televisão 900 inclui adicionalmente uma unidade de controle 910, uma unidade de I/F do usuário 911 e congêneres.
[00242] O sintonizador 902 sintoniza em um canal desejado a partir de um sinal de difusão recebido pela antena 901, realiza demodulação e transmite um fluxo contínuo de bits codificado obtido para o demultiplexador 903.
[00243] O demultiplexador 903 extrai pacotes de vídeo ou de áudio de um programa de um alvo de visualização a partir do fluxo contínuo de bits codificado e transmite dados dos pacotes extraídos para o decodificador 904. O demultiplexador 903 provê dados dos pacotes de dados, tal como um guia eletrônico de programa (EPG), para a unidade de controle 910. Adicionalmente, quando embaralhamento tiver sido realizado, desembaralhamento é realizado pelo demultiplexador ou congêneres.
[00244] O decodificador 904 realiza um processo de decodificação para decodificar os pacotes e transmite dados de vídeo e dados de áudio gerados pelo processo de decodificação para a unidade de processamento do sinal de vídeo 905 e a unidade de processamento do sinal de áudio 907.
[00245] A unidade de processamento do sinal de vídeo 905 realiza um processo de cancelamento de ruído ou processamento de vídeo de acordo com uma definição do usuário nos dados de vídeo. A unidade de processamento do sinal de vídeo 905 gera dados de vídeo de um programa a ser exibido na unidade de exibição 906, dados de imagem de acordo com processamento com base em uma aplicação provida por meio de uma rede ou congêneres. A unidade de processamento do sinal de vídeo 905 gera dados de vídeo para exibir, por exemplo, uma tela de menu usada para selecionar um item e faz com que os dados de vídeo sejam sobrepostos em dados de vídeo de um programa. A unidade de processamento do sinal de vídeo 905 gera um sinal de acionamento com base nos dados de vídeo gerados como exposto e aciona a unidade de exibição 906.
[00246] A unidade de exibição 906 aciona um dispositivo de exibição (por exemplo, um dispositivo de tela de cristal líquido ou congêneres) com base no sinal de acionamento provido a partir da unidade de processamento do sinal de vídeo 905 e faz com que um vídeo do programa ou congêneres sejam exibidos.
[00247] A unidade de processamento do sinal de áudio 907 realiza um certo processo, tal como um processo de cancelamento de ruído nos dados de áudio, realiza um processo de conversão digital para analógico (D/A) e um processo de amplificação nos dados de áudio processados e provê dados resultantes para o alto-falante 908 para transmitir um som.
[00248] A unidade de I/F externa 909 é uma interface para uma conexão com um dispositivo externo ou uma rede e realiza transmissão e recepção de dados, tais como dados de vídeo ou dados de áudio.
[00249] A unidade de I/F do usuário 911 é conectada com a unidade de controle 910. A unidade de I/F do usuário 911 inclui um comutador de operação, uma unidade de recepção do sinal de controle remoto e congêneres e provê um sinal de operação de acordo com a operação do usuário para a unidade de controle 910.
[00250] A unidade de controle 910 inclui uma unidade de processamento central (CPU), uma memória e congêneres. A memória armazena um programa executado pela CPU, vários tipos de dados necessários quando a CPU realizar processamento, dados de EPG, dados adquiridos por meio de uma rede e congêneres. O programa armazenado na memória é lido e executado pela CPU em um certo sincronismo, tal como um sincronismo no qual o dispositivo de televisão 900 é ativado. A CPU executa o programa e controla as respectivas unidades de maneira tal que o dispositivo de televisão 900 seja operado de acordo com a operação do usuário.
[00251] O dispositivo de televisão 900 é provido com um barramento 912 que conecta o sintonizador 902, o demultiplexador 903, a unidade de processamento do sinal de vídeo 905, a unidade de processamento do sinal de áudio 907, a unidade de I/F externa 909 e congêneres com a unidade de controle 910.
[00252] No dispositivo de televisão com a configuração exposta, o decodificador 904 é provido com a função do dispositivo de decodificação (método de decodificação) de acordo com a presente aplicação. Assim, é possível reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
<Sétima modalidade> (Configuração exemplar do telefone celular)
[00253] A figura 35 ilustra uma configuração esquemática de um telefone celular no qual a presente tecnologia é aplicada. Um telefone celular 920 inclui uma unidade de comunicação 922, um codec de voz 923, uma unidade de câmera 926, uma unidade de processamento de imagem 927, uma unidade de multiplexação/demultiplexação 928, uma unidade de gravação/reprodução 929, uma unidade de exibição 930 e uma unidade de controle 931. Estas unidades são conectadas umas com as outras por meio de um barramento 933.
[00254] Adicionalmente, uma antena 921 é conectada na unidade de comunicação 922 e um alto-falante 924 e um microfone 925 são conectados no codec de voz 923. Adicionalmente, uma unidade operacional 932 é conectada na unidade de controle 931.
[00255] O telefone celular 920 realiza vários tipos de operações, tais como transmissão e recepção de um sinal de voz, transmissão e recepção de um correio eletrônico ou dados de imagem, captura de imagem ou gravação de dados em vários modos, tais como um modo de chamada de voz e um modo de comunicação de dados.
[00256] No modo de chamada de voz, um sinal de voz gerado pelo microfone 925 é convertido para dados de voz através do codec de voz 923, comprimido e, então, provido para a unidade de comunicação 922. A unidade de comunicação 922 realiza, por exemplo, um processo de modulação e um processo de transformação de frequência dos dados de voz e gera um sinal de transmissão. Adicionalmente, a unidade de comunicação 922 provê o sinal de transmissão para a antena 921 de forma que o sinal de transmissão seja transmitido para uma estação base (não ilustrada). Adicionalmente, a unidade de comunicação 922 realiza um processo de amplificação, um processo de transformação de frequência e um processo de demodulação de um sinal de recepção recebido através da antena 921 e provê os dados de voz obtidos para o codec de voz 923. O codec de voz 923 descomprime os dados de voz, converte os dados comprimidos para um sinal de voz analógico e transmite o sinal de voz analógico para o alto-falante 924.
[00257] No modo de comunicação de dados, quando transmissão de correio for realizada, a unidade de controle 931 recebe dados de texto inseridos pela operação da unidade operacional 932 e faz com que o texto inserido seja exibido na unidade de exibição 930. Adicionalmente, a unidade de controle 931 gera dados de correio, por exemplo, com base em uma instrução do usuário inserida através da unidade operacional 932 e provê os dados de correio para a unidade de comunicação 922. A unidade de comunicação 922 realiza, por exemplo, um processo de modulação e um processo de transformação de frequência dos dados de correio e transmite um sinal de transmissão obtido através da antena 921. Adicionalmente, a unidade de comunicação 922 realiza, por exemplo, um processo de amplificação, um processo de transformação de frequência e um processo de demodulação de um sinal de recepção recebido através da antena 921 e restaura os dados de correio. Os dados de correio são providos para a unidade de exibição 930 de forma que conteúdo de correio seja exibido.
[00258] O telefone celular 920 pode armazenar os dados de correio recebidos em uma mídia de armazenamento através da unidade de gravação/reprodução 929. A mídia de armazenamento é uma mídia de armazenamento regravável arbitrária. Exemplos da mídia de armazenamento incluem uma memória semicondutora, tal como uma RAM ou uma memória flash interna, um disco rígido, um disco magnético, um disco magneto-óptico, um disco óptico e uma mídia removível, tais como uma memória do barramento serial universal (USB) ou um cartão de memória.
[00259] No modo de comunicação de dados, quando dados de imagem forem transmitidos, dados de imagem gerados através da unidade de câmera 926 são providos para a unidade de processamento de imagem 927. A unidade de processamento de imagem 927 realiza um processo de codificação para codificar os dados de imagem e gera dados codificados.
[00260] A unidade de multiplexação/demultiplexação 928 multiplexa os dados codificados gerados através da unidade de processamento de imagem 927 e os dados de voz providos a partir do codec de voz 923 de acordo com um certo esquema e provê dados resultantes para a unidade de comunicação 922. A unidade de comunicação 922 realiza, por exemplo, um processo de modulação e um processo de transformação de frequência dos dados multiplexados e transmite um sinal de transmissão obtido através da antena 921. Adicionalmente, a unidade de comunicação 922 realiza, por exemplo, um processo de amplificação, um processo de transformação de frequência e um processo de demodulação de um sinal de recepção recebido através da antena 921 e restaura dados multiplexados. Os dados multiplexados são providos para a unidade de multiplexação/demultiplexação 928. A unidade de multiplexação/demultiplexação 928 demultiplexa os dados multiplexados e provê os dados codificados e os dados de voz para a unidade de processamento de imagem 927 e o codec de voz 923. A unidade de processamento de imagem 927 realiza um processo de decodificação para decodificar os dados codificados e gera dados de imagem. Os dados de imagem são providos para a unidade de exibição 930 de forma que uma imagem recebida seja exibida. O codec de voz 923 converte os dados de voz em um sinal de voz analógico, provê o sinal de voz analógico para o alto- falante 924 e transmite uma voz recebida.
[00261] No telefone celular com a configuração exposta, a unidade de processamento de imagem 927 é provida com a função do dispositivo de codificação e do dispositivo de decodificação (o método de codificação e o método de decodificação) de acordo com a presente aplicação. Assim, é possível habilitar o lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação. Adicionalmente, é possível reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
<Oitava modalidade> (Configuração exemplar do dispositivo de gravação/reprodução)
[00262] A figura 36 ilustra uma configuração esquemática de um dispositivo de gravação/reprodução no qual a presente tecnologia é aplicada. Um dispositivo de gravação/reprodução 940 grava, por exemplo, dados de áudio e dados de vídeo de um programa de difusão recebido em uma mídia de gravação e provê os dados gravados para o usuário em um sincronismo de acordo com a instrução do usuário. Adicionalmente, o dispositivo de gravação/reprodução 940 pode adquirir, por exemplo, dados de áudio ou dados de vídeo a partir de um outro dispositivo e fazer com que os dados adquiridos sejam gravados em uma mídia de gravação. Além do mais, o dispositivo de gravação/reprodução 940 decodifica e transmite os dados de áudio ou os dados de vídeo gravados na mídia de gravação, de forma que uma exibição de imagem ou uma transmissão de som possam ser realizadas em um dispositivo de monitor.
[00263] O dispositivo de gravação/reprodução 940 inclui um sintonizador 941, uma unidade de I/F externa 942, um codificador 943, uma unidade de disco rígido (HDD) 944, uma unidade de disco 945, um seletor 946, um decodificador 947, uma unidade de exibição na tela (OSD) 948, uma unidade de controle 949 e uma unidade de I/F do usuário 950.
[00264] O sintonizador 941 sintoniza em um canal desejado a partir de um sinal de difusão recebido através de uma antena (não ilustrada). O sintonizador 941 demodula um sinal de recepção do canal desejado e transmite um fluxo contínuo de bits codificado obtido para o seletor 946.
[00265] A unidade de I/F externa 942 é configurada com pelo menos uma de uma interface IEEE1394, uma interface de rede, uma interface USB, uma interface de memória flash e congêneres. A unidade de I/F externa 942 é uma interface para uma conexão com um dispositivo externo, uma rede, um cartão de memória e congêneres, e recebe dados, tais como dados de vídeo e dados de áudio, para serem gravados.
[00266] O codificador 943 termina dados de vídeo ou dados de áudio não codificados providos a partir da unidade de I/F externa 942 de acordo com um certo esquema, e transmite um fluxo contínuo de bits codificado para o seletor 946.
[00267] A unidade de HDD 944 grava dados de conteúdo, tais como um vídeo ou um som, vários tipos de programas e outros dados em um disco rígido interno e lê dados gravados a partir do disco rígido no momento da reprodução ou congêneres.
[00268] A unidade de disco 945 grava um sinal em um disco óptico montado e reproduz um sinal a partir do disco óptico. Exemplos do disco óptico incluem um disco DVD (DVD-Vídeo, DVD-RAM, DVD-R, DVD- RW, DVD+R, DVD+RW e congêneres) e um disco Blu-ray (uma marca registrada).
[00269] Quando um vídeo ou um som forem gravados, o seletor 946 seleciona qualquer um de um fluxo contínuo de bits codificado provido o sintonizador 941 e de um fluxo contínuo de bits codificado provido a partir do codificador 943 e provê o fluxo contínuo de bits codificado selecionado tanto para a unidade de HDD 944 quanto para a unidade de disco 945. Adicionalmente, quando um vídeo ou um som forem reproduzidos, o seletor 946 provê o fluxo contínuo de bits codificado transmitido a partir da unidade de HDD 944 ou da unidade de disco 945 para o decodificador 947.
[00270] O decodificador 947 realiza o processo de decodificação para decodificar o fluxo contínuo de bits codificado. O decodificador 947 provê dados de vídeo gerados pela realização do processo de decodificação para a unidade OSD 948. Adicionalmente, o decodificador 947 transmite dados de áudio gerados pela realização do processo de decodificação.
[00271] A unidade OSD 948 gera dados de vídeo usados para exibição, por exemplo, uma tela de menu usada, por exemplo, para selecionar um item e transmitir os dados de vídeo a serem sobrepostos nos dados de vídeo transmitidos a partir do decodificador 947.
[00272] A unidade de I/F do usuário 950 é conectada na unidade de controle 949. A unidade de I/F do usuário 950 inclui um comutador de operação, uma unidade de recepção do sinal de controle remoto e congêneres, e provê um sinal de operação de acordo com a operação do usuário para a unidade de controle 949.
[00273] A unidade de controle 949 é configurada com uma CPU, uma memória e congêneres. A memória armazena um programa executado pela CPU e vários tipos de dados necessários quando a CPU realizar processamento. O programa armazenado na memória é lido e executado pela CPU em um certo sincronismo, tal como um sincronismo no qual o dispositivo de gravação/reprodução 940 é ativado. A CPU executa o programa e controla as respectivas unidades de maneira tal que o dispositivo de gravação/reprodução 940 seja operado de acordo com a operação do usuário.
[00274] No dispositivo de gravação/reprodução com a configuração exposta, o decodificador 947 é provido com a função do dispositivo de decodificação (método de decodificação) de acordo com a presente aplicação. Assim, é possível reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
<Nona modalidade> (Configuração exemplar do dispositivo de formação de imagem)
[00275] A figura 37 ilustra uma configuração esquemática de um dispositivo de formação de imagem no qual a presente tecnologia é aplicada. Um dispositivo de formação de imagem 960 fotografa um sujeito e faz com que uma imagem do sujeito seja exibida em uma unidade de exibição ou grava dados de imagem em uma mídia de gravação.
[00276] O dispositivo de formação de imagem 960 inclui um bloco óptico 961, uma unidade de formação de imagem 962, uma unidade de processamento do sinal da câmera 963, uma unidade de processamento de dados de imagem 964, uma unidade de exibição 965, uma unidade de I/F externa 966, uma unidade de memória 967, uma unidade de mídia 968, uma unidade OSD 969 e uma unidade de controle 970. Adicionalmente, uma unidade de I/F do usuário 971 é conectada na unidade de controle 970. Além do mais, a unidade de processamento de dados de imagem 964, a unidade de I/F externa 966, a unidade de memória 967, a unidade de mídia 968, a unidade OSD 969, a unidade de controle 970 e congêneres são conectadas umas nas outras por meio de um barramento 972.
[00277] O bloco óptico 961 é configurado com uma lente de foco, um mecanismo de diafragma e congêneres. O bloco óptico 961 forma uma imagem óptica de um sujeito em um plano de formação de imagem da unidade de formação de imagem 962. A unidade de formação de imagem 962 é configurada com um sensor de imagem CCD ou um sensor de imagem CMOS, e gera um sinal elétrico de acordo com uma imagem óptica obtida por conversão fotoelétrica e provê o sinal elétrico para a unidade de processamento do sinal da câmera 963.
[00278] A unidade de processamento do sinal da câmera 963 realiza vários tipos de processos do sinal da câmera, tais como correção joelho, correção de gama e correção de cor no sinal elétrico provido a partir da unidade de formação de imagem 962. A unidade de processamento do sinal da câmera 963 provê os dados de imagem que foram sujeitos aos processos do sinal da câmera para a unidade de processamento de dados de imagem 964.
[00279] A unidade de processamento de dados de imagem 964 realiza o processo de codificação para codificar os dados de imagem providos a partir da unidade de processamento do sinal da câmera 963. A unidade de processamento de dados de imagem 964 provê dados codificados gerados pela realização do processo de codificação para a unidade de I/F externa 966 ou a unidade de mídia 968. Adicionalmente, a unidade de processamento de dados de imagem 964 realiza o processo de decodificação para decodificar dados codificados providos a partir da unidade de I/F externa 966 ou da unidade de mídia 968. A unidade de processamento de dados de imagem 964 provê dados de imagem gerados pela realização do processo de decodificação para a unidade de exibição 965. Adicionalmente, a unidade de processamento de dados de imagem 964 realiza um processo de provisão dos dados de imagem providos a partir da unidade de processamento do sinal da câmera 963 para a unidade de exibição 965, ou provê dados de exibição adquiridos a partir da unidade OSD 969 para a unidade de exibição 965 para serem sobrepostos nos dados de imagem.
[00280] A unidade OSD 969 gera uma tela de menu que inclui um símbolo, um texto ou um diagrama ou dados de exibição, tal como um ícone, e transmite a tela de menu gerada ou os dados de exibição para a unidade de processamento de dados de imagem 964.
[00281] A unidade de I/F externa 966 é configurada, por exemplo, com um terminal I/O USB ou congêneres e conectada com uma impressora quando uma imagem for impressa. Adicionalmente, uma unidade de disco é conectada na unidade de I/F externa 966 conforme necessário, uma mídia removível, tais como um disco magnético ou um disco óptico, é apropriadamente montada e um programa de computador lido a partir da mídia removível é instalado conforme necessário. Além do mais, a unidade de I/F externa 966 é conectada em uma certa rede, tais como uma LAN ou a Internet, e inclui uma interface de rede. A unidade de controle 970 pode ler dados codificados a partir da unidade de mídia 968, por exemplo, de acordo com uma instrução dada através da unidade de I/F do usuário 971 e provê os dados codificados lidos para um outro dispositivo conectado por meio de uma rede através da unidade de I/F externa 966. Adicionalmente, a unidade de controle 970 pode adquirir dados codificados ou dados de imagem providos a partir de um outro dispositivo por meio de uma rede através da unidade de I/F externa 966 e prover os dados codificados ou os dados de imagem adquiridos para a unidade de processamento de dados de imagem 964.
[00282] Como uma mídia de gravação acionada pela unidade de mídia 968, por exemplo, uma mídia removível legível/gravável arbitrária, tais como um disco magnético, um disco magneto-óptico, um disco óptico ou uma memória semicondutora, é usada. Adicionalmente, a mídia de gravação pode ser um dispositivo de fita, um disco ou um cartão de memória independente de um tipo de uma mídia removível. Certamente, a mídia de gravação pode ser um cartão de circuito integrado sem contato (IC) ou congêneres.
[00283] Adicionalmente, a unidade de mídia 968 pode ser integrada com a mídia de gravação para configurar uma mídia de armazenamento não portátil, tais como uma HDD interna ou uma unidade em estado sólido (SSD).
[00284] A unidade de controle 970 é configurada com uma CPU. A unidade de memória 967 armazena um programa executado pela unidade de controle 970, vários tipos de dados necessários quando a unidade de controle 970 realizar processamento e congêneres. O programa armazenado na unidade de memória 967 é lido e executado pela unidade de controle 970 em um certo sincronismo, tal como um sincronismo no qual o dispositivo de formação de imagem 960 é ativado. A unidade de controle 970 executa o programa e controla as respectivas unidades, de maneira tal que o dispositivo de formação de imagem 960 seja operado de acordo com a operação do usuário.
[00285] No dispositivo de formação de imagem com a configuração exposta, a unidade de processamento de dados de imagem 964 é provida com a função do dispositivo de decodificação (método de decodificação) de acordo com a presente aplicação. Assim, é possível habilitar o lado de decodificação a reconhecer precisamente uma gama de cor de uma imagem alvo de codificação. Adicionalmente, é possível reconhecer precisamente uma gama de cor de uma imagem alvo de codificação.
<Aplicações da codificação escalonável> (Primeiro sistema)
[00286] A seguir, exemplos de aplicação concreta de dados codificados escalonáveis gerados pela codificação escalonável serão descritos. A codificação escalonável é usada para seleção de dados a serem transmitidos, por exemplo, da forma ilustrada na figura 38.
[00287] Em um sistema de transmissão de dados 1000 ilustrado na figura 38, um servidor de distribuição 1002 lê dados codificados escalonáveis armazenados em uma unidade de armazenamento de dados codificados escalonáveis 1001 e distribui os dados codificados escalonáveis para dispositivos de terminal, tais como um computador pessoal 1004, um dispositivo AV 1005, um dispositivo tipo tablet 1006 e um telefone celular 1007 por meio de uma rede 1003.
[00288] Neste momento, o servidor de distribuição 1002 seleciona dados codificados de alta qualidade apropriados de acordo com as capacidades dos dispositivos de terminal ou um ambiente de comunicação e transmite os dados codificados de alta qualidade selecionados. Embora o servidor de distribuição 1002 transmita desnecessariamente dados de alta qualidade, os dispositivos de terminal não necessariamente obtêm uma imagem de alta qualidade, e um atraso ou um sobrefluxo podem ocorrer. Adicionalmente, uma banda de comunicação pode ser desnecessariamente ocupada e uma carga de um dispositivo de terminal pode ser desnecessariamente aumentada. Por outro lado, embora o servidor de distribuição 1002 transmita desnecessariamente dados de baixa qualidade, é improvável que os dispositivos de terminal obtenham uma imagem de uma qualidade suficiente. Assim, o servidor de distribuição 1002 lê dados codificados escalonáveis armazenados na unidade de armazenamento de dados codificados escalonáveis 1001 como dados codificados de uma qualidade apropriada para a capacidade do dispositivo de terminal ou um ambiente de comunicação e, então, transmite os dados lidos.
[00289] Por exemplo, considera-se que a unidade de armazenamento de dados codificados escalonáveis 1001 armazena dados codificados escalonáveis (BL + EL) 1011 que são codificados pela codificação escalonável. Os dados codificados escalonáveis (BL + EL) 1011 são dados codificados que incluem tanto uma camada base quanto uma camada de melhoria e tanto uma imagem da camada base quanto uma imagem da camada de melhoria podem ser obtidas pela decodificação dos dados codificados escalonáveis (BL + EL) 1011.
[00290] O servidor de distribuição 1002 seleciona uma camada apropriada de acordo com a capacidade de um dispositivo de terminal para o qual dados são transmitidos ou de um ambiente de comunicação, e lê dados a partir da camada selecionada. Por exemplo, para o computador pessoal 1004 ou o dispositivo tipo tablet 1006 com uma alta capacidade de processamento, o servidor de distribuição 1002 lê os dados codificados de alta qualidade escalonáveis (BL + EL) 1011 a partir da unidade de armazenamento de dados codificados escalonáveis 1001 e transmite os dados codificados escalonáveis (BL + EL) 1011 sem mudança. Por outro lado, por exemplo, para o dispositivo AV 1005 ou o telefone celular 1007 com uma baixa capacidade de processamento, o servidor de distribuição 1002 extrai dados da camada base a partir dos dados codificados escalonáveis (BL + EL) 1011 e transmite dados codificados escalonáveis (BL) 1012 que têm o mesmo conteúdo dos dados codificados escalonáveis (BL + EL) 1011, mas com qualidade inferior aos dados codificados escalonáveis (BL + EL) 1011.
[00291] Da forma supradescrita, uma quantidade de dados pode ser facilmente ajustada usando dados codificados escalonáveis e, assim, é possível impedir a ocorrência de um atraso ou um sobrefluxo e impedir que uma carga de um dispositivo de terminal ou de uma mídia de comunicação aumente desnecessariamente. Adicionalmente, os dados codificados escalonáveis (BL + EL) 1011 têm reduzida a redundância entre camadas e, assim, é possível reduzir uma quantidade de dados para ficar menor do que quando dados individuais forem usados como dados codificados de cada camada. Assim, é possível usar mais eficientemente uma área de memória da unidade de armazenamento de dados codificados escalonáveis 1001.
[00292] Adicionalmente, vários dispositivos, tais como o computador pessoal 1004 até o telefone celular 1007, podem ser aplicados como o dispositivo de terminal e, assim, o desempenho de hardware dos dispositivos de terminal difere de acordo com cada dispositivo. Adicionalmente, já que várias aplicações podem ser executadas pelos dispositivos de terminal, software tem várias capacidades. Além do mais, todas as redes da linha de comunicação que incluem cada uma ou ambas de uma rede com fios e uma rede sem fios, tais como a Internet ou uma rede de área local (LAN), podem ser aplicadas como a rede 1003 que serve como uma mídia de comunicação e, assim, várias capacidades de transmissão de dados são providas. Além do mais, uma mudança pode ser feita por uma outra comunicação ou congêneres.
[00293] Neste particular, o servidor de distribuição 1002 pode ser configurado para realizar comunicação com um dispositivo de terminal que serve como um destino de transmissão de dados antes de iniciar a transmissão de dados e obter informação relacionada a uma capacidade de um dispositivo de terminal, tal como desempenho de hardware, de um dispositivo de terminal ou um desempenho de uma aplicação (software) executada por um dispositivo de terminal e informação relacionada a um ambiente de comunicação, tal como uma largura de banda disponível da rede 1003. Então, o servidor de distribuição 1002 pode selecionar uma camada apropriada com base na informação obtida.
[00294] Adicionalmente, a extração da camada pode ser realizada em um dispositivo de terminal. Por exemplo, o computador pessoal 1004 pode decodificar os dados codificados escalonáveis transmitidos (BL + EL) 1011 e exibir a imagem da camada base ou a imagem da camada de melhoria. Adicionalmente, por exemplo, o computador pessoal 1004 pode extrair os dados codificados escalonáveis (BL) 1012 da camada base a partir dos dados codificados escalonáveis transmitidos (BL + EL) 1011, armazenar os dados codificados escalonáveis (BL) 1012 da camada base, transferir os dados codificados escalonáveis (BL) 1012 da camada base para um outro dispositivo, decodificar os dados codificados escalonáveis (BL) 1012 da camada base e exibir a imagem da camada base.
[00295] Certamente, o número das unidades de armazenamento de dados codificados escalonáveis 1001, o número dos servidores de distribuição 1002, o número das redes 1003 e o número dos dispositivos de terminal são arbitrários. A descrição exposta foi feita em conexão com o exemplo no qual o servidor de distribuição 1002 transmite dados para os dispositivos de terminal, mas o exemplo de aplicação não é limitado a este exemplo. O sistema de transmissão de dados 1000 pode ser aplicado em qualquer sistema no qual, quando dados codificados gerados pela codificação escalonável forem transmitidos para um dispositivo de terminal, uma camada apropriada é selecionada de acordo com uma capacidade de um dispositivo de terminal ou um ambiente de comunicação e os dados codificados são transmitidos.
(Segundo sistema)
[00296] A codificação escalonável é usada para transmissão usando uma pluralidade de mídias de comunicação, por exemplo, da forma ilustrada na figura 39.
[00297] Em um sistema de transmissão de dados 1100 ilustrado na figura 39, uma estação de difusão 1101 transmite dados codificados escalonáveis (BL) 1121 de uma camada base através da difusão terrestre 1111. Adicionalmente, a estação de difusão 1101 transmite dados codificados escalonáveis (EL) 1122 de uma camada de melhoria (por exemplo, empacota os dados codificados escalonáveis (EL) 1122 e, então, transmite pacotes resultantes) por meio de uma rede arbitrária 1112 configurada com uma rede de comunicação que inclui cada uma ou ambas de uma rede com fios e de uma rede sem fios.
[00298] Um dispositivo de terminal 1102 tem uma função de recepção para receber a difusão terrestre 1111 difundida pela estação de difusão 1101 e recebe os dados codificados escalonáveis (BL) 1121 da camada base transmitidos através da difusão terrestre 1111. O dispositivo de terminal 1102 tem adicionalmente uma função de comunicação para realizar comunicação por meio da rede 1112 e recebe os dados codificados escalonáveis (EL) 1122 da camada de melhoria transmitidos por meio da rede 1112.
[00299] O dispositivo de terminal 1102 decodifica os dados codificados escalonáveis (BL) 1121 da camada base adquiridos através da difusão terrestre 1111, por exemplo, de acordo com a instrução do usuário ou congêneres, obtém a imagem da camada base, armazena a imagem obtida e transmite a imagem obtida para um outro dispositivo.
[00300] Adicionalmente, o dispositivo de terminal 1102 combina os dados codificados escalonáveis (BL) 1121 da camada base adquiridos através da difusão terrestre 1111 com os dados codificados escalonáveis (EL) 1122 da camada de melhoria adquiridos através da rede 1112, por exemplo, de acordo com a instrução do usuário ou congêneres, obtém os dados codificados escalonáveis (BL + EL), decodifica os dados codificados escalonáveis (BL + EL) para obter a imagem da camada de melhoria, armazena a imagem obtida e transmite a imagem obtida para um outro dispositivo.
[00301] Da forma supradescrita, é possível transmitir dados codificados escalonáveis das respectivas camadas, por exemplo, através de mídia de comunicação diferente. Assim, é possível distribuir uma carga e é possível impedir a ocorrência de um atraso ou um sobrefluxo.
[00302] Adicionalmente, é possível selecionar uma mídia de comunicação usada para transmissão para cada camada de acordo com a situação, transmissão. Por exemplo, os dados codificados escalonáveis (BL) 1121 da camada base com uma quantidade de dados relativamente grande podem ser transmitidos através de uma mídia de comunicação com uma grande largura de banda e os dados codificados escalonáveis (EL) 1122 da camada de melhoria com uma quantidade de dados relativamente pequena podem ser transmitidos através de uma mídia de comunicação com uma pequena largura de banda. Adicionalmente, por exemplo, uma mídia de comunicação para transmitir os dados codificados escalonáveis (EL) 1122 da camada de melhoria podem ser comutados entre a rede 1112 e a difusão terrestre 1111 de acordo com uma largura de banda disponível da rede 1112. Certamente, o mesmo se aplica nos dados de uma camada arbitrária.
[00303] Como controle é realizado como exposto, é possível suprimir adicionalmente um aumento em uma carga na transmissão de dados.
[00304] Certamente, o número de camadas é arbitrário e o número de mídias de comunicação usadas para transmissão também é arbitrário. Adicionalmente, o número dos dispositivos de terminal 1102 que servem como um destino da distribuição de dados também é arbitrário. A descrição exposta foi realizada em conexão com o exemplo de difusão a partir da estação de difusão 1101 e o exemplo de aplicação não é limitado a este exemplo. O sistema de transmissão de dados 1100 pode ser aplicado em qualquer sistema no qual dados codificados gerados pela codificação escalonável são divididos em dois ou mais em unidades de camadas e transmitidos através de uma pluralidade de linhas.
(Terceiro sistema)
[00305] A codificação escalonável é usada para armazenamento de dados codificados, por exemplo, da forma ilustrada na figura 40.
[00306] Em um sistema de formação de imagem 1200 ilustrado na figura 40, um dispositivo de formação de imagem 1201 fotografa um sujeito 1211, realiza a codificação escalonável nos dados de imagem obtidos e provê dados codificados escalonáveis (BL + EL) 1221 para um dispositivo de armazenamento dos dados codificados escalonáveis 1202.
[00307] O dispositivo de armazenamento dos dados codificados escalonáveis 1202 armazena os dados codificados escalonáveis (BL + EL) 1221 providos a partir do dispositivo de formação de imagem 1201 em uma qualidade de acordo com a situação. Por exemplo, durante um tempo normal, o dispositivo de armazenamento dos dados codificados escalonáveis 1202 extrai dados da camada base a partir dos dados codificados escalonáveis (BL + EL) 1221 e armazena os dados extraídos como dados codificados escalonáveis (BL) 1222 da camada base com uma pequena quantidade de dados em uma baixa qualidade. Por outro lado, por exemplo, durante um tempo de observação, o dispositivo de armazenamento dos dados codificados escalonáveis 1202 armazena os dados codificados escalonáveis (BL + EL) 1221 com uma grande quantidade de dados em uma alta qualidade sem mudança.
[00308] Desta maneira, o dispositivo de armazenamento dos dados codificados escalonáveis 1202 pode armazenar uma imagem em uma alta qualidade apenas quando necessário e, assim, é possível suprimir um aumento em uma quantidade de dados e melhorar a eficiência de uso de uma área de memória, ao mesmo tempo em que se suprime uma redução em um valor de uma imagem ocasionada pela deterioração da qualidade.
[00309] Por exemplo, o dispositivo de formação de imagem 1201 é uma câmera de monitoramento. Quando o alvo de monitoramento (por exemplo, intruso) não for mostrado em uma imagem fotografada (durante um tempo normal), é provável que conteúdo da imagem fotografada seja irrelevante e, assim, uma redução em uma quantidade de dados é priorizada e dados de imagem (dados codificados escalonáveis) são armazenados em uma baixa qualidade. Por outro lado, quando um alvo de monitoramento for mostrado em uma imagem fotografada como o sujeito 1211 (durante um tempo de observação), é provável que conteúdo da imagem fotografada seja relevante e, assim, uma qualidade da imagem é priorizada e dados de imagem (dados codificados escalonáveis) são armazenados em uma alta qualidade.
[00310] Pode-se determinar se este é o tempo normal ou o tempo de observação, por exemplo, pela análise de uma imagem através do dispositivo de armazenamento dos dados codificados escalonáveis 1202. Adicionalmente, o dispositivo de formação de imagem 1201 pode realizar a determinação e transmitir o resultado da determinação para o dispositivo de armazenamento dos dados codificados escalonáveis 1202.
[00311] Adicionalmente, um critério de determinação se este é o tempo normal ou o tempo de observação é arbitrário, e conteúdo de uma imagem que serve como o critério de determinação é arbitrário. Certamente, uma condição diferente do conteúdo de uma imagem pode ser um critério de determinação. Por exemplo, comutação pode ser realizada de acordo com a magnitude ou uma forma de onda de um som gravado, comutação pode ser realizada em certos intervalos de tempo ou comutação pode ser realizada de acordo com uma instrução externa, tal como a instrução do usuário.
[00312] A descrição exposta foi realizada em conexão com o exemplo no qual comutação é realizada entre dois estados do tempo normal e do tempo de observação, mas o número de estados é arbitrário. Por exemplo, comutação pode ser realizada entre três ou mais estados, tais como um tempo normal, um tempo de observação de baixo nível, um tempo de observação, um tempo de observação de alto nível e congêneres. Aqui, um limite superior do número de estados a serem comutados depende do número de camadas dos dados codificados escalonáveis.
[00313] Adicionalmente, o dispositivo de formação de imagem 1201 pode decidir o número de camadas para a codificação escalonável de acordo com um estado. Por exemplo, durante o tempo normal, o dispositivo de formação de imagem 1201 pode gerar os dados codificados escalonáveis (BL) 1222 da camada base com uma pequena quantidade de dados em uma baixa qualidade e prover os dados codificados escalonáveis (BL) 1222 da camada base para o dispositivo de armazenamento dos dados codificados escalonáveis 1202. Adicionalmente, por exemplo, durante o tempo de observação, o dispositivo de formação de imagem 1201 pode gerar os dados codificados escalonáveis (BL + EL) 1221 da camada base com uma grande quantidade de dados em uma alta qualidade e prover os dados codificados escalonáveis (BL + EL) 1221 da camada base para o dispositivo de armazenamento dos dados codificados escalonáveis 1202.
[00314] A descrição exposta foi feita em conexão com o exemplo de uma câmera de monitoramento, mas o propósito do sistema de formação de imagem 1200 é arbitrário e não limitado a uma câmera de monitoramento.
<Décima modalidade> (Outras modalidades)
[00315] As modalidades expostas foram descritas em conexão com o exemplo do dispositivo, o sistema ou congêneres de acordo com a presente tecnologia, mas a presente tecnologia não é limitada aos exemplos expostos e pode ser implementada como qualquer componente montado no dispositivo ou o dispositivo que configura o sistema, por exemplo, um processador que serve como uma (integração em larga escala) LSI do sistema ou congêneres, um módulo que usa uma pluralidade de processadores ou congêneres, uma unidade que usa uma pluralidade de módulos ou congêneres, um conjunto (isto é, alguns componentes do dispositivo) no qual qualquer outra função é adicionalmente adicionada em uma unidade ou congêneres.
(Configuração exemplar de conjunto de vídeo)
[00316] Um exemplo no qual a presente tecnologia é implementada como um conjunto será descrito em relação à figura 41. A figura 41 ilustra uma configuração esquemática exemplar de um aparelho de vídeo no qual a presente tecnologia é aplicada.
[00317] Nos últimos anos, funções de dispositivos eletrônicos têm se tornado diversas e, quando alguns componentes são implementados como venda, provisão ou congêneres no desenvolvimento ou fabricação, há muitos casos nos quais uma pluralidade de componentes com funções relevantes são combinados e implementados como um conjunto com uma pluralidade de funções, bem como casos nos quais uma implementação é realizada como um componente com uma única função.
[00318] Um aparelho de vídeo 1300 ilustrado na figura 41 é uma configuração multifuncionalizada na qual um dispositivo com uma função relacionada à codificação de imagem e/ou à decodificação de imagem é combinado com um dispositivo com qualquer outra função relacionada à função.
[00319] Da forma ilustrada na figura 41, o aparelho de vídeo 1300 inclui um grupo de módulo, tais como um módulo de vídeo 1311, uma memória externa 1312, um módulo de gerenciamento de energia 1313 e um módulo de interface inicial 1314 e um dispositivo com funções relevantes, tais como uma conectividade 1321, uma câmera 1322 e um sensor 1323.
[00320] Um módulo é uma parte com múltiplas funções nas quais diversas funções de parte relevantes são integradas. Uma configuração física concreta é arbitrária, mas, por exemplo, ela é configurada de maneira tal que uma pluralidade de processos com respectivas funções, elementos de circuito eletrônico, tais como um resistor e um capacitor, e outros dispositivos sejam arranjados e integrados em um substrato de fiação. Adicionalmente, um novo módulo pode ser obtido pela combinação de um outro módulo ou um processador com um módulo.
[00321] No caso do exemplo da figura 41, o módulo de vídeo 1311 é uma combinação de componentes com funções relacionadas ao processamento de imagem e inclui um processador de aplicação, um processador de vídeo, um modem de banda larga 1333 e um módulo de radiofrequência (RF) 1334.
[00322] Um processador é aquele no qual uma configuração com uma certa função é integrada em um chip semicondutor através do Sistema Em um Chip (SoC) e também refere-se, por exemplo, a uma LSI (Integração em Larga Escala) do sistema ou congêneres. A configuração com a certa função pode ser um circuito lógico (configuração de hardware), pode ser uma CPU, uma ROM, uma RAM e um programa (configuração de software) executado usando a CPU, a ROM e a RAM e pode ser uma combinação de uma configuração de hardware e uma configuração de software. Por exemplo, um processador pode incluir um circuito lógico, uma CPU, uma ROM, uma RAM e congêneres, algumas funções podem ser implementadas através do circuito lógico (componente de hardware) e as outras funções podem ser implementadas através de um programa (componente de software) executado pela CPU.
[00323] O processador de aplicação 1331 da figura 41 é um processador que executa uma aplicação relacionada ao processamento de imagem. Uma aplicação executada pelo processador de aplicação 1331 pode não apenas realizar um processo de cálculo, mas, também, controlar componentes no interior e no exterior do módulo de vídeo 1311, tal como o processador de vídeo 1332, conforme necessário, a fim de implementar uma certa função.
[00324] O processador de vídeo 1332 é um processo com uma função relacionada à codificação de imagem e/ou à decodificação de imagem.
[00325] O modem de banda larga 1333 é um processador (ou módulo) que realiza um processo relacionado a comunicação em banda larga com fios e/ou sem fios que é realizada por meio da linha de banda larga, tal como a Internet, ou uma rede da linha de telefonia pública. Por exemplo, o modem de banda larga 1333 converte dados (sinal digital) a serem transmitidos em um sinal analógico, por exemplo, através da modulação digital, demodula um sinal analógico recebido e converte o sinal analógico em dados (sinal digital). Por exemplo, o modem de banda larga 1333 pode realizar modulação e demodulação digital em informação arbitrária, tais como dados de imagem processados pelo processador de vídeo 1332, um fluxo contínuo no qual dados de imagem são codificados, um programa de aplicação ou dados de definição.
[00326] O módulo de RF 1334 é um módulo que realiza um processo de transformação de frequência, um processo de modulação/demodulação, um processo de amplificação, um processo de filtragem e congêneres em um sinal de radiofrequência (RF) que passou por transcepção através de uma antena. Por exemplo, o módulo de RF 1334 realiza, por exemplo, transformação de frequência em um sinal de banda base gerado pelo modem de banda larga 1333 e gera um sinal RF. Adicionalmente, por exemplo, o módulo de RF 1334 realiza, por exemplo, transformação de frequência em um sinal RF recebido através do módulo de interface inicial 1314 e gera um sinal de banda base.
[00327] Adicionalmente, uma linha pontilhada 1341, isto é, o processador de aplicação 1331 e o processador de vídeo 1332 podem ser integrados em um único processador, da forma ilustrada na figura 41.
[00328] A memória externa 1312 é instalada fora do módulo de vídeo 1311, e um módulo com um dispositivo de armazenamento usado pelo módulo de vídeo 1311. O dispositivo de armazenamento da memória externa 1312 pode ser implementado por qualquer configuração física, mas é comumente usado para armazenar grande capacidade de dados, tais como dados de imagem das unidades de quadro e, assim, é desejável implementar o dispositivo de armazenamento da memória externa 1312 usando um chip de memória semicondutora de capacidade relativamente grande, tal como uma memória de acesso aleatório dinâmica (DRAM).
[00329] O módulo de gerenciamento de energia 1313 gerencia e controla o suprimento de energia para o módulo de vídeo 1311 (os respectivos componentes no módulo de vídeo 1311).
[00330] O módulo de interface inicial 1314 é um módulo que provê uma função de interface inicial (um circuito de uma extremidade transceptora em um lado da antena) para o módulo de RF 1334. Da forma ilustrada na figura 41, o módulo de interface inicial 1314 inclui, por exemplo, uma unidade de antena 1351, um filtro 1352 e uma unidade de amplificação 1353.
[00331] A unidade de antena 1351 inclui uma antena que realiza transcepção de um sinal de rádio e uma configuração periférica. A unidade de antena 1351 transmite um sinal provido a partir da unidade de amplificação 1353 como um sinal de rádio e provê um sinal de rádio recebido para o filtro 1352 como um sinal elétrico (sinal RF). O filtro 1352 realiza, por exemplo, um processo de filtragem em um sinal RF recebido através da unidade de antena 1351 e provê um sinal RF processado para o módulo de RF 1334. A unidade de amplificação 1353 amplifica o sinal RF provido a partir do módulo de RF 1334 e provê o sinal RF amplificado para a unidade de antena 1351.
[00332] A conectividade 1321 é um módulo com uma função relacionada a uma conexão com o exterior. Uma configuração física da conectividade 1321 é arbitrária. Por exemplo, a conectividade 1321 inclui uma configuração com uma função de comunicação diferente de um padrão de comunicação suportado pelo modem de banda larga 1333, um terminal I/O externo ou congêneres.
[00333] Por exemplo, a conectividade 1321 pode incluir um módulo com uma função de comunicação com base em um padrão de comunicação sem fios, tais como Bluetooth (uma marca registrada), IEEE 802.11 (por exemplo, Fidelidade Sem Fios (Wi-Fi) (uma marca registrada)), Comunicação de Campo Próximo (NFC), Associação de Dados Infravermelho (IrDA), uma antena que realiza transcepção de um sinal que satisfaz o padrão ou congêneres. Adicionalmente, por exemplo, a conectividade 1321 pode incluir um módulo com uma função de comunicação com base em um padrão de comunicação com fios, tais como Barramento Serial Universal (USB), ou Interface Multimídia em Alta Definição (HDMI) (uma marca registrada), ou um terminal que satisfaz o padrão. Além do mais, por exemplo, a conectividade 1321 pode incluir qualquer outra função de transmissão de dados (sinal) ou congêneres, tal como um terminal I/O analógico.
[00334] Adicionalmente, a conectividade 1321 pode incluir um dispositivo de um destino de transmissão de dados (sinal). Por exemplo, a conectividade 1321 pode incluir uma unidade de disco (incluindo um disco rígido, uma unidade em estado sólido (SSD), um Armazenamento Anexado em Rede (NAS) ou congêneres, bem como uma unidade de disco de uma mídia removível) que lê/grava dados em uma mídia de gravação, tais como um disco magnético, um disco óptico, um disco magneto-óptico ou uma memória semicondutora. Além do mais, a conectividade 1321 pode incluir um dispositivo de transmissão (um monitor, um alto-falante ou congêneres) que transmite uma imagem ou um som.
[00335] A câmera 1322 é um módulo com uma função de fotografar um sujeito e obter dados de imagem do sujeito. Por exemplo, dados de imagem obtidos pela fotografia da câmera 1322 são providos para e codificados pelo processador de vídeo 1332.
[00336] O sensor 1323 é um módulo com uma função de sensor arbitrária, tais como um som sensor, um sensor ultrassônico, um sensor óptico, um sensor de iluminância, um sensor infravermelho, um sensor de imagem, um sensor de rotação, um sensor de ângulo, um sensor de velocidade angular, um sensor de velocidade, um sensor de aceleração, um sensor de inclinação, um sensor de identificação magnética, um sensor de choque ou um sensor de temperatura. Por exemplo, dados detectados pelo sensor 1323 são providos para o processador de aplicação 1331 e usados por uma aplicação ou congêneres.
[00337] Uma configuração supradescrita como um módulo pode ser implementada como um processador e uma configuração descrita como um processador pode ser implementada como um módulo.
[00338] No aparelho de vídeo 1300 com a configuração exposta, a presente tecnologia pode ser aplicada no processador de vídeo 1332 como será descrito posteriormente. Assim, o aparelho de vídeo 1300 pode ser implementado como um conjunto no qual a presente tecnologia é aplicada.
(Configuração exemplar do processador de vídeo)
[00339] A figura 42 ilustra uma configuração esquemática exemplar do processador de vídeo 1332 (figura 41) no qual a presente tecnologia é aplicada.
[00340] No caso do exemplo da figura 42, o processador de vídeo 1332 tem uma função de receber uma entrada de um sinal de vídeo e de um sinal de áudio e codificar o sinal de vídeo e o sinal de áudio de acordo com um certo esquema e uma função de decodificar dados de vídeo e dados de áudio codificados e reproduzir e transmitir um sinal de vídeo e um sinal de áudio.
[00341] O processador de vídeo 1332 inclui uma unidade de processamento de inserção de vídeo 1401, uma primeira unidade de ampliação/redução de imagem 1402, uma segunda unidade de ampliação/redução de imagem 1403, uma unidade de processamento de transmissão de vídeo 1404, uma memória de quadro 1405 e uma unidade de controle de memória 1406, da forma ilustrada na figura 42. O processador de vídeo 1332 inclui adicionalmente um motor de codificação/decodificação 1407, armazena temporariamente do fluxo contínuo elementar (ES) de vídeo 1408A e 1408B e armazena temporariamente do ES de áudio 1409A e 1409B. O processador de vídeo 1332 inclui adicionalmente um codificador de áudio 1410, um decodificador de áudio 1411, uma unidade de multiplexação (multiplexador (MUX)) 1412, uma unidade de demultiplexação (demultiplexador (DMUX)) 1413 e um armazenamento temporário de fluxo contínuo 1414.
[00342] Por exemplo, a unidade de processamento de inserção de vídeo 1401 adquire um sinal de vídeo inserido a partir da conectividade 1321 (figura 41) ou congêneres e converte o sinal de vídeo em dados de imagem digitais. A primeira unidade de ampliação/redução de imagem 1402 realiza, por exemplo, um processo de conversão de formato e um processo de ampliação/redução de imagem nos dados de imagem. A segunda unidade de ampliação/redução de imagem 1403 realiza um processo de ampliação/redução de imagem nos dados de imagem de acordo com um formato de um destino para o qual os dados de imagem são transmitidos através da unidade de processamento de transmissão de vídeo 1404 ou realiza o processo de conversão de formato e o processo de ampliação/redução de imagem que são idênticos àqueles da primeira unidade de ampliação/redução de imagem 1402 nos dados de imagem. A unidade de processamento de transmissão de vídeo 1404 realiza conversão de formato e conversão em um sinal analógico nos dados de imagem e transmite um sinal de vídeo reproduzido, por exemplo, para a conectividade 1321 (figura 41) ou congêneres.
[00343] A memória de quadro 1405 é uma memória de dados de imagem que é compartilhada pela unidade de processamento de inserção de vídeo 1401, pela primeira unidade de ampliação/redução de imagem 1402, pela segunda unidade de ampliação/redução de imagem 1403, pela unidade de processamento de transmissão de vídeo 1404 e pelo motor de codificação/decodificação 1407. A memória de quadro 1405 é implementada, por exemplo, como uma memória semicondutora, tal como uma DRAM.
[00344] A unidade de controle de memória 1406 recebe um sinal síncrono a partir do motor de codificação/decodificação 1407 e controla o acesso de gravação/leitura à memória de quadro 1405 de acordo com uma agenda de acesso para a memória de quadro 1405 gravada em uma tabela de gerenciamento de acesso 1406A. A tabela de gerenciamento de acesso 1406A é atualizada através da unidade de controle de memória 1406 de acordo com o processamento executado pelo motor de codificação/decodificação 1407, pela primeira unidade de ampliação/redução de imagem 1402, pela segunda unidade de ampliação/redução de imagem 1403 ou congêneres.
[00345] O motor de codificação/decodificação 1407 realiza um processo de codificação para codificar dados de imagem e um processo de decodificação para decodificar um fluxo contínuo de vídeo que compreende dados obtidos pela codificação de dados de imagem. Por exemplo, o motor de codificação/decodificação 1407 codifica dados de imagem lidos a partir da memória de quadro 1405 e grava sequencialmente os dados de imagem codificados no armazenamento temporário do ES de vídeo 1408A como um fluxo contínuo de vídeo. Adicionalmente, por exemplo, o motor de codificação/decodificação 1407 lê sequencialmente o fluxo contínuo de vídeo a partir do armazenamento temporário do ES de vídeo 1408B, decodifica sequencialmente o fluxo contínuo de vídeo e sequencialmente os dados de imagem decodificados na memória de quadro 1405. O motor de codificação/decodificação 1407 usa a memória de quadro 1405 como uma área de trabalho no momento da codificação ou da decodificação. Adicionalmente, o motor de codificação/decodificação 1407 transmite o sinal síncrono para a unidade de controle de memória 1406, por exemplo, em um sincronismo no qual o processamento de cada macrobloco inicia.
[00346] O armazenamento temporário do ES de vídeo 1408A armazena temporariamente o fluxo contínuo de vídeo gerado pelo motor de codificação/decodificação 1407 e, então, provê o fluxo contínuo de vídeo para a unidade de multiplexação (MUX) 1412. O armazenamento temporário do ES de vídeo 1408B armazena temporariamente o fluxo contínuo de vídeo provido a partir da unidade de demultiplexação (DMUX) 1413 e, então, provê o fluxo contínuo de vídeo para o motor de codificação/decodificação 1407.
[00347] O armazenamento temporário do ES de áudio 1409A armazena temporariamente um fluxo contínuo de áudio gerado pelo codificador de áudio 1410 e, então, provê o fluxo contínuo de áudio para a unidade de multiplexação (MUX) 1412. O armazenamento temporário do ES de áudio 1409B armazena temporariamente um fluxo contínuo de áudio provido a partir da unidade de demultiplexação (DMUX) 1413 e, então, provê o fluxo contínuo de áudio para o decodificador de áudio 1411.
[00348] Por exemplo, o codificador de áudio 1410 converte um sinal de áudio inserido, por exemplo, a partir da conectividade 1321 (figura 41) ou congêneres em um sinal digital e codifica o sinal digital de acordo com um certo esquema, tal como um esquema de áudio MPEG ou um esquema AudioCode número 3 (AC3). O codificador de áudio 1410 grava sequencialmente o fluxo contínuo de áudio que compreende dados obtidos pela codificação do sinal de áudio no armazenamento temporário do ES de áudio 1409A. O decodificador de áudio 1411 decodifica o fluxo contínuo de áudio provido a partir do armazenamento temporário do ES de áudio 1409B, realiza, por exemplo, conversão em um sinal analógico e provê um sinal de áudio reproduzido, por exemplo, para a conectividade 1321 (figura 41) ou congêneres.
[00349] A unidade de multiplexação (MUX) 1412 realiza multiplexação do fluxo contínuo de vídeo e do fluxo contínuo de áudio. Um método de multiplexação (isto é, um formato de um fluxo contínuo de bits gerado pela multiplexação) é arbitrário. Adicionalmente, no momento da multiplexação, a unidade de multiplexação (MUX) 1412 pode adicionar certa informação de cabeçalho ou congêneres no fluxo contínuo de bits. Em outras palavras, a unidade de multiplexação (MUX) 1412 pode converter um formato do fluxo contínuo pela multiplexação. Por exemplo, a unidade de multiplexação (MUX) 1412 multiplexa o fluxo contínuo de vídeo e o fluxo contínuo de áudio a serem convertidos em um fluxo contínuo de transporte que é um fluxo contínuo de bits de um formato de transferência. Adicionalmente, por exemplo, a unidade de multiplexação (MUX) 1412 multiplexa o fluxo contínuo de vídeo e o fluxo contínuo de áudio a serem convertidos em dados (dados de arquivo) de um formato de arquivo de gravação.
[00350] A unidade de demultiplexação (DMUX) 1413 demultiplexa o fluxo contínuo de bits obtido pela multiplexação do fluxo contínuo de vídeo e do fluxo contínuo de áudio por um método correspondente à multiplexação realizada pela unidade de multiplexação (MUX) 1412. Em outras palavras, a unidade de demultiplexação (DMUX) 1413 extrai o fluxo contínuo de vídeo e o fluxo contínuo de áudio (separa o fluxo contínuo de vídeo e o fluxo contínuo de áudio) do fluxo contínuo de bits lido a partir do armazenamento temporário de fluxo contínuo 1414. Em outras palavras, a unidade de demultiplexação (DMUX) 1413 pode realizar conversão (conversão inversa da conversão realizada pela unidade de multiplexação (MUX) 1412) de um formato de um fluxo contínuo através da demultiplexação. Por exemplo, a unidade de demultiplexação (DMUX) 1413 pode adquirir o fluxo contínuo de transporte provido, por exemplo, a partir a conectividade 1321 ou do modem de banda larga 1333 (ambos na figura 41) através do armazenamento temporário de fluxo contínuo 1414 e converter o fluxo contínuo de transporte em um fluxo contínuo de vídeo e um fluxo contínuo de áudio através da demultiplexação. Adicionalmente, por exemplo, a unidade de demultiplexação (DMUX) 1413 pode adquirir dados de arquivo lidos a partir de vários tipos de mídia de gravação (figura 41), por exemplo, pela conectividade 1321 através do armazenamento temporário de fluxo contínuo 1414 e converter os dados de arquivo em um fluxo contínuo de vídeo e um fluxo contínuo de áudio pela demultiplexação.
[00351] O armazenamento temporário de fluxo contínuo 1414 armazena temporariamente o fluxo contínuo de bits. Por exemplo, o armazenamento temporário de fluxo contínuo 1414 armazena temporariamente o fluxo contínuo de transporte provido a partir da unidade de multiplexação (MUX) 1412 e provê o fluxo contínuo de transporte, por exemplo, para a conectividade 1321 ou o modem de banda larga 1333 (ambos na figura 41) em um certo sincronismo ou com base em uma solicitação externa ou congêneres.
[00352] Adicionalmente, por exemplo, o armazenamento temporário de fluxo contínuo 1414 armazena temporariamente dados de arquivo providos a partir da unidade de multiplexação (MUX) 1412, provê os dados de arquivo, por exemplo, para a conectividade 1321 (figura 41) ou congêneres em um certo sincronismo ou com base em uma solicitação externa ou congêneres e faz com que os dados de arquivo sejam gravados em vários tipos de mídia de gravação.
[00353] Além do mais, o armazenamento temporário de fluxo contínuo 1414 armazena temporariamente o fluxo contínuo de transporte adquirido, por exemplo, através da conectividade 1321 ou do modem de banda larga 1333 (ambos na figura 41) e provê o fluxo contínuo de transporte para a unidade de demultiplexação (DMUX) 1413 em um certo sincronismo ou com base em uma solicitação externa ou congêneres.
[00354] Adicionalmente, o armazenamento temporário de fluxo contínuo 1414 armazena temporariamente dados de arquivo lidos a partir de vários tipos de mídia de gravação, por exemplo, na conectividade 1321 (figura 41) ou congêneres e provê os dados de arquivo para a unidade de demultiplexação (DMUX) 1413 em um certo sincronismo ou com base em uma solicitação externa ou congêneres.
[00355] A seguir, uma operação do processador de vídeo 1332 com a configuração exposta será descrita. O sinal de vídeo inserido no processador de vídeo 1332, por exemplo, a partir da conectividade 1321 (figura 41) ou congêneres é convertido em dados de imagem digitais de acordo com um certo esquema, tal como um esquema 4:2:2 Y/Cb/Cr, na unidade de processamento de inserção de vídeo 1401 e sequencialmente gravado na memória de quadro 1405. Os dados de imagem digitais são lidos na primeira unidade de ampliação/redução de imagem 1402 ou na segunda unidade de ampliação/redução de imagem 1403, sujeitos a um processo de conversão de formato para realização de uma conversão de formato em um certo esquema, tal como um esquema 4:2:0 Y/Cb/Cr, e um processo de ampliação/redução e gravados na memória de quadro 1405 novamente. Os dados de imagem são codificados pelo motor de codificação/decodificação 1407 e gravados no armazenamento temporário do ES de vídeo 1408A como um fluxo contínuo de vídeo.
[00356] Adicionalmente, um sinal de áudio inserido no processador de vídeo 1332 a partir da conectividade 1321 (figura 41) ou congêneres é codificado pelo codificador de áudio 1410 e gravado no armazenamento temporário do ES de áudio 1409A como um fluxo contínuo de áudio.
[00357] O fluxo contínuo de vídeo do armazenamento temporário do ES de vídeo 1408A e o fluxo contínuo de áudio do armazenamento temporário do ES de áudio 1409A são lidos e multiplexados pela unidade de multiplexação (MUX) 1412 e convertidos em um fluxo contínuo de transporte, dados de arquivo ou congêneres. O fluxo contínuo de transporte gerado pela unidade de multiplexação (MUX) 1412 é temporariamente armazenado no armazenamento temporário de fluxo contínuo 1414 e, então, transmitido para uma rede externa, por exemplo, através da conectividade 1321 ou do modem de banda larga 1333 (ambos na figura 41). Adicionalmente, os dados de arquivo gerados pela unidade de multiplexação (MUX) 1412 são temporariamente armazenados no armazenamento temporário de fluxo contínuo 1414, então, transmitidos, por exemplo, para a conectividade 1321 (figura 41) ou congêneres e gravados em vários tipos de mídia de gravação.
[00358] Adicionalmente, o fluxo contínuo de transporte inserido no processador de vídeo 1332 a partir de uma rede externa, por exemplo, através da conectividade 1321 ou do modem de banda larga 1333 (ambos na figura 41) é temporariamente armazenado no armazenamento temporário de fluxo contínuo 1414 e, então, demultiplexado pela unidade de demultiplexação (DMUX) 1413. Adicionalmente, os dados de arquivo que são lidos a partir de vários tipos de mídia de gravação, por exemplo, na conectividade 1321 (figura 41) ou congêneres e, então, inseridos no processador de vídeo 1332 são temporariamente armazenados no armazenamento temporário de fluxo contínuo 1414 e, então, demultiplexados pela unidade de demultiplexação (DMUX) 1413. Em outras palavras, o fluxo contínuo de transporte ou os dados de arquivo inseridos no processador de vídeo 1332 são demultiplexados no fluxo contínuo de vídeo e no fluxo contínuo de áudio através da unidade de demultiplexação (DMUX) 1413.
[00359] O fluxo contínuo de áudio é provido para o decodificador de áudio 1411 através do armazenamento temporário do ES de áudio 1409B e decodificado e, então, um sinal de áudio é reproduzido. Adicionalmente, o fluxo contínuo de vídeo é gravado no armazenamento temporário do ES de vídeo 1408B, lido sequencialmente e decodificado pelo motor de codificação/decodificação 1407 e gravado na memória de quadro 1405. Os dados de imagem decodificados são sujeitos ao processo de ampliação/redução realizado pela segunda unidade de ampliação/redução de imagem 1403 e gravados na memória de quadro 1405. Então, os dados de imagem decodificados são lidos na unidade de processamento de transmissão de vídeo 1404, sujeitos ao processo de conversão de formato para realizar conversão de formato para um certo esquema, tal como um esquema 4:2:2 Y/Cb/Cr, e convertidos em um sinal analógico e, então, um sinal de vídeo é reproduzido.
[00360] Quando a presente tecnologia for aplicada no processador de vídeo 1332 com a configuração exposta, é preferível que as modalidades expostas da presente tecnologia sejam aplicadas no motor de codificação/decodificação 1407. Em outras palavras, por exemplo, o motor de codificação/decodificação 1407, preferivelmente, tem a função do dispositivo de codificação ou do dispositivo de decodificação de acordo com a primeira modalidade. Desta maneira, o processador de vídeo 1332 pode obter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12.
[00361] Adicionalmente, no motor de codificação/decodificação 1407, a presente tecnologia (isto é, as funções dos dispositivos de codificação de imagem ou dos dispositivos de decodificação de imagem de acordo com a modalidade exposta) pode ser implementada por cada um ou ambos de hardware, tal como um circuito lógico, ou software, tal como um programa embutido.
(Uma outra configuração exemplar do processador de vídeo)
[00362] A figura 43 ilustra uma outra configuração esquemática exemplar do processador de vídeo 1332 (figura 41) no qual a presente tecnologia é aplicada. No caso do exemplo da figura 43, o processador de vídeo 1332 tem uma função de codificação e decodificação de dados de vídeo de acordo com um certo esquema.
[00363] Mais especificamente, o processador de vídeo 1332 inclui uma unidade de controle 1511, uma interface de exibição 1512, um motor de exibição 1513, um motor de processamento de imagem 1514 e uma memória interna 1515, da forma ilustrada na figura 43. O processador de vídeo 1332 inclui adicionalmente um motor do codec 1516, uma interface de memória 1517, uma unidade de multiplexação/demultiplexação (MUX DMUX) 1518, uma interface de rede 1519 e uma interface de vídeo 1520.
[00364] A unidade de controle 1511 controla uma operação de cada unidade de processamento no processador de vídeo 1332, tais como a interface de exibição 1512, o motor de exibição 1513, o motor de processamento de imagem 1514 e o motor do codec 1516.
[00365] A unidade de controle 1511 inclui, por exemplo, uma CPU principal 1531, uma CPU subordinada 1532 e um controlador de sistema 1533, da forma ilustrada na figura 43. A CPU principal 1531 executa, por exemplo, um programa para controlar uma operação de cada unidade de processamento no processador de vídeo 1332. A CPU principal 1531 gera um sinal de controle, por exemplo, de acordo com o programa e provê o sinal de controle para cada unidade de processamento (isto é, controla uma operação de cada unidade de processamento). A CPU subordinada 1532 desempenha um papel complementar da CPU principal 1531. Por exemplo, a CPU subordinada 1532 executa um processo filho ou uma sub-rotina de um programa executado pela CPU principal 1531. O controlador de sistema 1533 controla as operações da CPU principal 1531 e da CPU subordinada 1532, por exemplo, designa um programa executado pela CPU principal 1531 e pela CPU subordinada 1532.
[00366] A interface de exibição 1512 transmite dados de imagem, por exemplo, para a conectividade 1321 (figura 41) ou congêneres sob controle da unidade de controle 1511. Por exemplo, a interface de exibição 1512 converte dados de imagem de dados digitais em um sinal analógico e transmite o sinal analógico, por exemplo, para o dispositivo de monitor da conectividade 1321 (figura 41) como um sinal de vídeo reproduzido ou transmite os dados de imagem dos dados digitais, por exemplo, para o dispositivo de monitor da conectividade 1321 (figura 41).
[00367] O motor de exibição 1513 realiza vários tipos de processos de conversão, tais como um processo de conversão de formato, um processo de conversão de tamanho e um processo de conversão de gama de cor, nos dados de imagem sob controle da unidade de controle 1511 para se conformar, por exemplo, com uma especificação de hardware do dispositivo de monitor que exibe a imagem.
[00368] O motor de processamento de imagem 1514 realiza certo processamento de imagem, tal como um processo de filtragem, para melhorar uma qualidade da imagem nos dados de imagem sob controle da unidade de controle 1511.
[00369] A memória interna 1515 é uma memória que é instalada no processador de vídeo 1332 e compartilhada pelo motor de exibição 1513, pelo motor de processamento de imagem 1514 e pelo motor do codec 1516. A memória interna 1515 é usada para transferência de dados realizada, por exemplo, entre o motor de exibição 1513, o motor de processamento de imagem 1514 e o motor do codec 1516. Por exemplo, a memória interna 1515 armazena dados providos a partir do motor de exibição 1513, do motor de processamento de imagem 1514 ou do motor do codec 1516 e provê os dados para o motor de exibição 1513, o motor de processamento de imagem 1514, ou o motor do codec 1516 conforme necessário (por exemplo, de acordo com uma solicitação). A memória interna 1515 pode ser implementada por qualquer dispositivo de armazenamento, mas, já que a memória interna 1515 é principalmente usada para armazenamento de dados em pequena capacidade, tais como dados de imagem de unidades de bloco ou parâmetros, é desejável implementar a memória interna 1515 usando uma memória semicondutora que tem capacidade relativamente pequena (por exemplo, comparada com a memória externa 1312) e alta velocidade de resposta, tal como uma memória de acesso aleatório estática (SRAM).
[00370] O motor do codec 1516 realiza processamento relacionado a codificação e decodificação dos dados de imagem. Um esquema de codificação/decodificação suportado pelo motor do codec 1516 é arbitrário, e um ou mais esquemas podem ser suportados pelo motor do codec 1516. Por exemplo, o motor do codec 1516 pode ter uma função de codec para suportar uma pluralidade de esquemas de codificação/decodificação e realizar codificação de dados de imagem ou decodificação de dados codificados usando um esquema selecionado a partir dos esquemas.
[00371] No exemplo ilustrado na figura 43, o motor do codec 1516 inclui, por exemplo, um MPEG-2 Vídeo 1541, um AVC/H.264 1542, um HEVC/H.265 1543, um HEVC/H.265 (Escalonável) 1544, um HEVC/H.265 (Multivisualizações) 1545 e um MPEG-DASH 1551 como blocos funcionais de processamento relacionado a um codec.
[00372] O MPEG-2 Vídeo 1541 é um bloco funcional de codificação ou de decodificação de dados de imagem de acordo com um esquema MPEG- 2. O AVC/H.264 1542 é um bloco funcional de codificação ou de decodificação de dados de imagem de acordo com um esquema AVC. O HEVC/H.265 1543 é um bloco funcional de codificação ou de decodificação de dados de imagem de acordo com um esquema HEVC. O HEVC/H.265 (Escalonável) 1544 é um bloco funcional de realização de codificação escalonável ou de decodificação escalonável nos dados de imagem de acordo com um esquema HEVC. O HEVC/H.265 (Multivisualizações) 1545 é um bloco funcional de realização de codificação multivisualizações ou decodificação multivisualizações nos dados de imagem de acordo com um esquema HEVC.
[00373] O MPEG-DASH 1551 é um bloco funcional de transmissão e recepção de dados de imagem de acordo com uma Transmissão contínua Adaptativa Dinâmica em MPEG sobre HTTP (MPEG-DASH). O MPEG- DASH é uma técnica de transmissão contínua de um vídeo usando um Protocolo de Transferência em Hiper Texto (HTTP) e tem um recurso para selecionar partes de dados codificados apropriadas a partir de uma pluralidade de partes de dados codificados que diferem em uma resolução previamente preparada ou congêneres em unidades de segmentos e transmitir a selecionada. O MPEG-DASH 1551 realiza a geração de um fluxo contínuo em conformidade com um padrão, controle de transmissão do fluxo contínuo e congêneres e usa o MPEG-2 Vídeo 1541 ou o HEVC/H.265 (Multivisualizações) 1545 para codificação e decodificação dos dados de imagem.
[00374] A interface de memória 1517 é uma interface para a memória externa 1312. Dados providos a partir do motor de processamento de imagem 1514 ou do motor do codec 1516 são providos para a memória externa 1312 através da interface de memória 1517. Adicionalmente, dados lidos a partir da memória externa 1312 são providos para o processador de vídeo 1332 (o motor de processamento de imagem 1514 ou o motor do codec 1516) através da interface de memória 1517.
[00375] A unidade de multiplexação/demultiplexação (MUX DMUX) 1518 realiza multiplexação e demultiplexação de vários tipos de dados relacionados a uma imagem, tais como um fluxo contínuo de bits de dados codificados, dados de imagem e um sinal de vídeo. O método de multiplexação/demultiplexação é arbitrário. Por exemplo, no momento da multiplexação, a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 pode não apenas combinar uma pluralidade de dados em um, mas, também, adicionar certa informação de cabeçalho ou congêneres nos dados. Adicionalmente, no momento da demultiplexação, a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 pode não apenas dividir dados em uma pluralidade de dados, mas, também, adicionar certa informação de cabeçalho ou congêneres em cada um dos dados divididos. Em outras palavras, a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 pode converter um formato de dados através da multiplexação e da demultiplexação. Por exemplo, a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 pode multiplexar um fluxo contínuo de bits a ser convertido em um fluxo contínuo de transporte que serve como um fluxo contínuo de bits de um formato de transferência ou dados (dados de arquivo) de um formato de arquivo de gravação. Certamente, conversão inversa também pode ser realizada através de demultiplexação.
[00376] A interface de rede 1519 é uma interface, por exemplo, para o modem de banda larga 1333 ou a conectividade 1321 (ambos na figura 41). A interface de vídeo 1520 é uma interface, por exemplo, para a conectividade 1321 ou a câmera 1322 (ambas na figura 41).
[00377] A seguir, uma operação exemplar do processador de vídeo 1332 será descrita. Por exemplo, quando o fluxo contínuo de transporte for recebido a partir da rede externa, por exemplo, através da conectividade 1321 ou do modem de banda larga 1333 (ambos na figura 41), o fluxo contínuo de transporte é provido para a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 através da interface de rede 1519, demultiplexado e, então, decodificado pelo motor do codec 1516. Dados de imagem obtidos pela decodificação do motor do codec 1516 são sujeitos a certo processamento de imagem realizado, por exemplo, pelo motor de processamento de imagem 1514, sujeitos a certa conversão realizada pelo motor de exibição 1513 e providos, por exemplo, para a conectividade 1321 (figura 41) ou congêneres através da interface de exibição 1512 e, então, a imagem é exibida no monitor. Adicionalmente, por exemplo, dados de imagem obtidos pela decodificação do motor do codec 1516 são codificados pelo motor do codec 1516 novamente, multiplexados pela unidade de multiplexação/demultiplexação (MUX DMUX) 1518 para serem convertidos em dados de arquivo, transmitidos, por exemplo, para a conectividade 1321 (figura 41) ou congêneres através da interface de vídeo 1520 e, então, gravados em vários tipos de mídia de gravação.
[00378] Além do mais, por exemplo, dados de arquivo dos dados codificados obtidos pela codificação de dados de imagem lidos a partir de uma mídia de gravação (não ilustrada) através da conectividade 1321 (figura 41) ou congêneres são providos para a unidade de multiplexação/demultiplexação (MUX DMUX) 1518 através da interface de vídeo 1520 e demultiplexados e decodificados pelo motor do codec 1516. Dados de imagem obtidos pela decodificação do motor do codec 1516 são sujeitos a certo processamento de imagem realizado pelo motor de processamento de imagem 1514, sujeitos a certa conversão realizada pelo motor de exibição 1513 e providos, por exemplo, para a conectividade 1321 (figura 41) ou congêneres através da interface de exibição 1512 e, então, a imagem é exibida no monitor. Adicionalmente, por exemplo, dados de imagem obtidos pela decodificação do motor do codec 1516 são codificados pelo motor do codec 1516 novamente, multiplexados pela unidade de multiplexação/demultiplexação (MUX DMUX) 1518 para serem convertidos em um fluxo contínuo de transporte, providos, por exemplo, para a conectividade 1321 ou o modem de banda larga 1333 (ambos na figura 41) através da interface de rede 1519 e transmitidos para um outro dispositivo (não ilustrado).
[00379] Adicionalmente, transferência de dados de imagem ou outros dados entre as unidades de processamento no processador de vídeo 1332 é realizada, por exemplo, usando a memória interna 1515 ou a memória externa 1312. Além do mais, o módulo de gerenciamento de energia 1313 controla, por exemplo, suprimento de energia para a unidade de controle 1511.
[00380] Quando a presente tecnologia for aplicada no processador de vídeo 1332 com a configuração exposta, é desejável aplicar as modalidades expostas da presente tecnologia no motor do codec 1516. Em outras palavras, por exemplo, é preferível que o motor do codec 1516 tenha um bloco funcional de implementação do dispositivo de codificação e do dispositivo de decodificação de acordo com a primeira modalidade. Além do mais, por exemplo, como o motor do codec 1516 opera como exposto, o processador de vídeo 1332 pode ter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12.
[00381] Adicionalmente, no motor do codec 1516, a presente tecnologia (isto é, as funções dos dispositivos de codificação de imagem ou dos dispositivos de decodificação de imagem de acordo com a modalidade exposta) pode ser implementada por qualquer um ou ambos de hardware, tal como um circuito lógico, ou de software, tal como um programa embutido.
[00382] As duas configurações exemplares do processador de vídeo 1332 foram supradescritas, mas a configuração do processador de vídeo 1332 é arbitrária e pode ter qualquer configuração diferente das duas configurações exemplares expostas. Adicionalmente, o processador de vídeo 1332 pode ser configurado com um único chip semicondutor ou pode ser configurado com uma pluralidade de chips semicondutores. Por exemplo, o processador de vídeo 1332 pode ser configurado com uma LSI tridimensionalmente empilhada na qual uma pluralidade de semicondutores é empilhada. Adicionalmente, o processador de vídeo 1332 pode ser implementado por uma pluralidade de LSIs.
(Exemplos de aplicação em dispositivos)
[00383] O aparelho de vídeo 1300 pode ser incorporado em vários tipos de dispositivos que processam dados de imagem. Por exemplo, o aparelho de vídeo 1300 pode ser incorporado no dispositivo de televisão 900 (figura 34), no telefone celular 920 (figura 35), no dispositivo de gravação/reprodução 940 (figura 36), no dispositivo de formação de imagem 960 (figura 37) ou congêneres. À medida que o aparelho de vídeo 1300 é incorporado, os dispositivos podem ter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12.
[00384] Adicionalmente, o aparelho de vídeo 1300 também pode ser incorporado em um dispositivo de terminal, tais como o computador pessoal 1004, o dispositivo AV 1005, o dispositivo tipo tablet 1006 ou o telefone celular 1007, no sistema de transmissão de dados 1000 da figura 38, a estação de difusão 1101 ou o dispositivo de terminal 1102 no sistema de transmissão de dados 1100 da figura 39 ou o dispositivo de formação de imagem 1201 ou o dispositivo de armazenamento dos dados codificados escalonáveis 1202 no sistema de formação de imagem 1200 da figura 40. À medida que o aparelho de vídeo 1300 é incorporado, os dispositivos podem ter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12.
[00385] Adicionalmente, mesmo cada componente do aparelho de vídeo 1300 pode ser implementado como um componente no qual a presente tecnologia é aplicada quando o componente incluir o processador de vídeo 1332. Por exemplo, apenas o processador de vídeo 1332 pode ser implementado como um processador de vídeo no qual a presente tecnologia é aplicada. Adicionalmente, por exemplo, os processadores indicados pela linha pontilhada 1341, como exposto, o módulo de vídeo 1311 ou congêneres podem ser implementados, por exemplo, como um processador ou um módulo nos quais a presente tecnologia é aplicada. Adicionalmente, por exemplo, uma combinação do módulo de vídeo 1311, da memória externa 1312, do módulo de gerenciamento de energia 1313 e do módulo de interface inicial 1314 pode ser implementada como uma unidade de vídeo 1361 na qual a presente tecnologia é aplicada. Estas configurações podem ter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12.
[00386] Em outras palavras, uma configuração que inclui o processador de vídeo 1332 pode ser incorporada em vários tipos de dispositivos que processam dados de imagem, similarmente ao caso do aparelho de vídeo 1300. Por exemplo, o processador de vídeo 1332, os processadores indicados pela linha pontilhada 1341, o módulo de vídeo 1311 ou a unidade de vídeo 1361 podem ser incorporados no dispositivo de televisão 900 (figura 34), no telefone celular 920 (figura 35), no dispositivo de gravação/reprodução 940 (figura 36), no dispositivo de formação de imagem 960 (figura 37), no dispositivo de terminal, tais como o computador pessoal 1004, o dispositivo AV 1005, o dispositivo tipo tablet 1006 ou o telefone celular 1007 no sistema de transmissão de dados 1000 da figura 38, na estação de difusão 1101 ou no dispositivo de terminal 1102 no sistema de transmissão de dados 1100 da figura 39, no dispositivo de formação de imagem 1201 ou no dispositivo de armazenamento dos dados codificados escalonáveis 1202 no sistema de formação de imagem 1200 da figura 40 ou congêneres. Adicionalmente, como a configuração na qual a presente tecnologia é aplicada, os dispositivos podem ter os mesmos efeitos que os efeitos supradescritos em relação às figuras 1 a 12, similarmente ao aparelho de vídeo 1300.
[00387] Na presente descrição, a descrição foi feita em conexão com o exemplo no qual vários tipos de informação, tais como a informação de gama de cor e a informação de luminância, são multiplexados em dados codificados e transmitidos de um lado de codificação para um lado de decodificação. Entretanto, a técnica de transmissão da informação não é limitada a este exemplo. Por exemplo, a informação pode ser transmitida ou gravada como dados individuais associados com dados codificados sem ser multiplexados em dados codificados. Aqui, um termo "associado" significa que uma imagem (ou uma parte de uma imagem, tais como uma fatia ou um bloco) incluída em um fluxo contínuo de bits pode ser ligada com a informação correspondente à imagem no momento da decodificação. Em outras palavras, a informação pode ser transmitida através de um caminho de transmissão diferente de dados codificados. Adicionalmente, a informação pode ser gravada em uma mídia de gravação (ou uma diferente área de gravação da mesma mídia de gravação) diferente dos dados codificados. Além do mais, a informação e os dados codificados podem ser associados uns com os outros, por exemplo, em unidades de uma pluralidade de quadros, quadros, ou unidades arbitrárias, tais como partes de um quadro.
[00388] Na presente descrição, um sistema representa um conjunto de uma pluralidade de componentes (dispositivos, módulos (partes) e congêneres) e todos os componentes não precisam ser necessariamente arranjados em um único alojamento. Assim, tanto uma pluralidade de dispositivos que são arranjados em alojamentos individuais e conectados uns com os outros por meio de uma rede quanto um único dispositivo que inclui uma pluralidade de módulos arranjados em um único alojamento são considerados como um sistema.
[00389] Os efeitos descritos na presente descrição são meramente exemplos e outros efeitos podem ser obtidos.
[00390] Adicionalmente, uma modalidade da presente descrição não é limitada às modalidades expostas e várias mudanças podem ser feitas em um escopo que não foge da essência da presente descrição.
[00391] Por exemplo, a presente descrição pode ter uma configuração de computação em nuvem na qual uma função é compartilhada e processada conjuntamente por uma pluralidade de dispositivos por meio de uma rede.
[00392] As etapas supradescritas em relação ao fluxograma podem ser realizadas por um único dispositivo ou podem ser compartilhadas e realizadas por uma pluralidade de dispositivos.
[00393] Além do mais, quando uma pluralidade de processos for incluída em uma única etapa, a pluralidade de processos incluídos na única etapa pode ser realizada por um único dispositivo ou podem ser compartilhados e realizados por uma pluralidade de dispositivos.
[00394] A presente descrição também pode ter as seguintes configurações. (1) Um dispositivo de decodificação, que inclui: uma unidade de recepção que recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem e informação de gama de cor que indica uma gama de cor da imagem a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma unidade de extração que extrai os dados codificados e a informação de gama de cor a partir do fluxo contínuo codificado recebido pela unidade de recepção; e uma unidade de decodificação que decodifica os dados codificados extraídos pela unidade de extração e gera a imagem. (2) O dispositivo de decodificação de acordo com (1), que inclui adicionalmente uma unidade de ajuste que ajusta a gama de cor da imagem gerada pela unidade de decodificação com base na informação de gama de cor extraída pela unidade de extração. (3) O dispositivo de decodificação de acordo com (2), em que o fluxo contínuo codificado inclui informação de luminância que indica a luminância de uma unidade de exibição que exibe a imagem em um momento de autoria da imagem, a unidade de extração extrai a informação de luminância a partir do fluxo contínuo codificado, e a unidade de ajuste ajusta uma faixa dinâmica da luminância da imagem gerada pela unidade de decodificação com base na informação de luminância extraída pela unidade de extração. (4) O dispositivo de decodificação de acordo com (3), em que a informação de luminância indica a luminância de branco e preto da unidade de exibição. (5) Um método de decodificação realizado por um dispositivo de decodificação, que inclui: uma etapa de recepção para receber um fluxo contínuo codificado que inclui dados codificados de uma imagem e informação de gama de cor que indica uma gama de cor da imagem a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma etapa de extração para extrair os dados codificados e a informação de gama de cor a partir do fluxo contínuo codificado recebido na etapa de recepção; e uma etapa de decodificação para decodificar os dados codificados extraídos na etapa de extração e gerar a imagem. (6) Um dispositivo de codificação, que inclui: uma unidade de codificação que codifica uma imagem e gera dados codificados; uma unidade de definição que define a informação de gama de cor que indica uma gama de cor da imagem; e uma unidade de transmissão que transmite um fluxo contínuo codificado que inclui os dados codificados gerados pela unidade de codificação e a informação de gama de cor gerada pela unidade de definição. (7) O dispositivo de codificação de acordo com (6), em que a unidade de definição define a informação de luminância que indica a luminância de uma unidade de exibição que exibe a imagem em um momento de autoria da imagem, e a unidade de transmissão transmite um fluxo contínuo codificado que inclui os dados codificados, a informação de gama de cor e a informação de luminância. (8) O dispositivo de codificação de acordo com (7), em que a informação de luminância indica a luminância de branco e preto da unidade de exibição. (9) Um método de codificação realizado por um dispositivo de codificação, que inclui: uma etapa de codificação para codificar uma imagem e gerar dados codificados; uma etapa de definição para definir a informação de gama de cor que indica uma gama de cor da imagem; e uma etapa de transmissão para transmitir um fluxo contínuo codificado que inclui os dados codificados gerados na etapa de codificação e a informação de gama de cor gerada na etapa de definição. (10) Dispositivo de decodificação, que inclui: uma unidade de recepção que recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma unidade de extração que extrai os dados codificados, a informação de identificação e a razão de cobertura a partir do fluxo contínuo codificado recebido pela unidade de recepção; e uma unidade de decodificação que decodifica os dados codificados extraídos pela unidade de extração e gera a imagem. (11) O dispositivo de decodificação de acordo com (10), que inclui adicionalmente uma unidade de ajuste que ajusta a gama de cor da imagem gerada pela unidade de decodificação com base na informação de identificação e na razão de cobertura extraída pela unidade de extração. (12) O dispositivo de decodificação de acordo com (11), em que o fluxo contínuo codificado inclui informação de luminância que indica a luminância de uma unidade de exibição que exibe a imagem em um momento de autoria da imagem, a unidade de extração extrai a informação de luminância a partir do fluxo contínuo codificado, e a unidade de ajuste ajusta uma faixa dinâmica da luminância da imagem gerada pela unidade de decodificação com base na informação de luminância extraída pela unidade de extração. (13) O dispositivo de decodificação de acordo com (12), em que a informação de luminância indica a luminância de branco e preto da unidade de exibição. (14) Um método de decodificação realizado por um dispositivo de decodificação, que inclui: uma etapa de recepção para receber um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor a partir de um dispositivo de codificação que transmite o fluxo contínuo codificado; uma etapa de extração para extrair os dados codificados, a informação de identificação e a razão de cobertura a partir do fluxo contínuo codificado recebido na etapa de recepção; e uma etapa de decodificação para decodificar os dados codificados extraídos na etapa de extração e gerar a imagem. (15) Um dispositivo de codificação, que inclui: uma unidade de codificação que codifica uma imagem e gera dados codificados; uma unidade de definição que define a informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor; e uma unidade de transmissão que transmite um fluxo contínuo codificado que inclui os dados codificados gerados pela unidade de codificação, a informação de identificação e a razão de cobertura gerada pela unidade de definição. (16) O dispositivo de codificação de acordo com (15), em que a unidade de definição define a informação de luminância que indica a luminância de uma unidade de exibição que exibe a imagem em um momento de autoria da imagem, e a unidade de transmissão transmite um fluxo contínuo codificado que inclui os dados codificados, a informação de gama de cor e a informação de luminância. (17) O dispositivo de codificação de acordo com (16), em que a informação de luminância indica a luminância de branco e preto da unidade de exibição. (18) Um método de codificação realizado por um dispositivo de codificação, que inclui: uma etapa de codificação para codificar uma imagem e gerar dados codificados; uma etapa de definição para definir a informação de identificação que identifica uma certa gama de cor e uma razão de cobertura de uma gama de cor da imagem pela certa gama de cor; e uma etapa de transmissão para transmitir um fluxo contínuo codificado que inclui os dados codificados gerados na etapa de codificação, a informação de identificação e a razão de cobertura gerada na etapa de definição. LISTA DOS SINAIS DE REFERÊNCIA 10 Dispositivo de codificação 11 Unidade de definição 12 Unidade de codificação 13 Unidade de transmissão 50 Dispositivo de decodificação 51 Unidade de recepção 52 Unidade de extração 53 Unidade de decodificação 54 Unidade de ajuste 70 Dispositivo de codificação 72 Unidade de definição 90 Dispositivo de decodificação 91 Unidade de extração 92 Unidade de ajuste

Claims (15)

1. Dispositivo de decodificação (50), caracterizado pelo fato de que compreende: uma unidade de recepção (51) que recebe um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de cores primárias, indicando uma coordenada de pelo menos uma cor primária de uma primeira unidade de exibição que exibiu a imagem em um momento de autoria da imagem, e informação de luminância que indica luminância de uma certa cor da primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem a partir de um dispositivo de codificação (10) que transmite o fluxo contínuo codificado; uma unidade de extração (52) que extrai os dados codificados, a informação de cores primárias e a informação de luminância a partir do fluxo contínuo codificado recebido pela unidade de recepção (51); uma unidade de decodificação (53) que decodifica os dados codificados extraídos pela unidade de extração (52) e gera a imagem; e uma unidade de ajuste (54) para ajustar um espaço de cor da imagem gerada com base na informação de cores primárias, em que a primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem é diferente de uma segunda unidade de exibição que exibe a imagem gerada pela unidade de decodificação.
2. Dispositivo de decodificação (50) de acordo com a reivindicação 1, caracterizado pelo fato de que compreende adicionalmente: uma unidade de ajuste (54) que ajusta uma faixa dinâmica da luminância da imagem gerada pela unidade de decodificação (53) com base na informação de luminância extraída pela unidade de extração (52).
3. Dispositivo de decodificação (50) de acordo com a reivindicação 2, caracterizado pelo fato de que a informação de luminância indica a luminância de pelo menos uma cor de branco e preto da unidade de exibição.
4. Dispositivo de decodificação (50) de acordo com a reivindicação 3, caracterizado pelo fato de que a informação de luminância indica a luminância de branco e preto da unidade de exibição.
5. Método de decodificação realizado por um dispositivo de decodificação, caracterizado pelo fato de que compreende: uma etapa de recepção (S51) para receber um fluxo contínuo codificado que inclui dados codificados de uma imagem, informação de cores primárias, indicando uma coordenada de pelo menos uma cor primária de uma primeira unidade de exibição que exibiu a imagem em um momento de autoria da imagem e informação de luminância que indica luminância de uma certa cor da primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem a partir de um dispositivo de codificação (10) que transmite o fluxo contínuo codificado; uma etapa de extração (S52) para extrair os dados codificados, a informação de cores primárias e a informação de luminância a partir do fluxo contínuo codificado recebido na etapa de recepção; e uma etapa de decodificação (S53) para decodificar os dados codificados extraídos na etapa de extração e gerar a imagem; e uma etapa de ajuste para ajustar um espaço de cor da imagem gerada com base na informação de cores primárias, em que a primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem é diferente de uma segunda unidade de exibição que exibe a imagem gerada pela unidade de decodificação.
6. Método de decodificação de acordo com a reivindicação 5, caracterizado pelo fato de que compreende adicionalmente: uma etapa de ajuste (S59) para ajustar uma faixa dinâmica da imagem gerada na etapa de decodificação com base na informação de luminância extraída na etapa de extração.
7. Método de decodificação de acordo com a reivindicação 6, caracterizado pelo fato de que a informação de luminância indica luminância de pelo menos uma cor de branco e preto da unidade de exibição.
8. Método de decodificação de acordo com a reivindicação 7, caracterizado pelo fato de que a informação de luminância indica a luminância de branco e preto da unidade de exibição.
9. Dispositivo de codificação (10), caracterizado pelo fato de que compreende: uma unidade de codificação (12) que codifica uma imagem e gera dados codificados; uma unidade de definição (11) que define informação de cores primárias, indicando uma coordenada de pelo menos uma cor primária de uma primeira unidade de exibição que exibiu a imagem em um momento de autoria da imagem e a informação de luminância que indica luminância de uma certa cor da primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem; e uma unidade de transmissão (13) que transmite um fluxo contínuo codificado que inclui os dados codificados gerados pela unidade de codificação (12), informação de cores primárias e a informação de luminância gerada pela unidade de definição (11).
10. Dispositivo de codificação (10) de acordo com a reivindicação 9, caracterizado pelo fato de que a informação de luminância indica a luminância de pelo menos uma cor de branco e preto da unidade de exibição.
11. Dispositivo de codificação (10) de acordo com a reivindicação 10, caracterizado pelo fato de que a informação de luminância indica a luminância de branco e preto da unidade de exibição.
12. Mídia de gravação, caracterizada pelo fato de que tem gravada na mesma um fluxo contínuo codificado incluindo dados codificados de uma imagem, informação de cores primárias, indicando uma coordenada de pelo menos uma cor primária de uma primeira unidade de exibição que exibiu a imagem em um momento de autoria da imagem e informação de luminância indicando luminância de uma certa cor da primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem, a mídia de gravação configurando um sistema de decodificação de imagem junto com um dispositivo de decodificação em que a imagem é gerada por extração dos dados codificados, informação de cores primárias e a informação de luminância do fluxo contínuo codificado e decodificação dos dados codificados extraídos em uma unidade de decodificação do dispositivo de decodificação; e ajustar um espaço de cor da imagem gerada com base na informação de cores primárias, em que a primeira unidade de exibição que exibiu a imagem no momento de autoria da imagem é diferente de uma segunda unidade de exibição que exibe a imagem gerada pela unidade de decodificação.
13. Mídia de gravação de acordo com a reivindicação 12, caracterizada pelo fato de que uma faixa dinâmica da imagem é ajustada no dispositivo de decodificação com base na informação de luminância.
14. Mídia de gravação de acordo com a reivindicação 13, caracterizada pelo fato de que a informação de luminância indica luminância de pelo menos uma cor de branco e preto da unidade de exibição.
15. Mídia de gravação de acordo com a reivindicação 14, caracterizado pelo fato de que a informação de luminância indica luminância de branco e preto da unidade de exibição.
BR112015006711-5A 2013-09-03 2014-08-25 Dispositivos de decodificação e de codificação, métodos de decodificação realizado por um dispositivo de decodificação, e, mídia de gravação BR112015006711B1 (pt)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2013-182578 2013-09-03
JP2013182578 2013-09-03
JP2013-272944 2013-12-27
JP2013272944 2013-12-27
PCT/JP2014/072104 WO2015033809A1 (ja) 2013-09-03 2014-08-25 復号装置および復号方法、並びに符号化装置および符号化方法

Publications (2)

Publication Number Publication Date
BR112015006711A2 BR112015006711A2 (pt) 2017-07-04
BR112015006711B1 true BR112015006711B1 (pt) 2023-03-14

Family

ID=52628287

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112015006711-5A BR112015006711B1 (pt) 2013-09-03 2014-08-25 Dispositivos de decodificação e de codificação, métodos de decodificação realizado por um dispositivo de decodificação, e, mídia de gravação

Country Status (10)

Country Link
EP (2) EP3783900A1 (pt)
JP (2) JP6651848B2 (pt)
KR (1) KR20160052459A (pt)
CN (2) CN104662911B (pt)
BR (1) BR112015006711B1 (pt)
IN (1) IN2015DN01681A (pt)
MX (1) MX343609B (pt)
MY (1) MY184223A (pt)
TW (2) TWI646828B (pt)
WO (1) WO2015033809A1 (pt)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6289900B2 (ja) * 2013-12-27 2018-03-07 株式会社東芝 放送信号送信装置
US20160309154A1 (en) * 2015-04-17 2016-10-20 Qualcomm Incorporated Dynamic range adjustment for high dynamic range and wide color gamut video coding
US10244249B2 (en) 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
JP6817961B2 (ja) * 2015-12-14 2021-01-20 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 三次元データ符号化方法、三次元データ復号方法、三次元データ符号化装置及び三次元データ復号装置
CN112702529B (zh) * 2020-12-29 2022-07-08 杭州海康机器人技术有限公司 云台相机配置方法、装置及可读存储介质和电子设备

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6775417B2 (en) * 1997-10-02 2004-08-10 S3 Graphics Co., Ltd. Fixed-rate block-based image compression with inferred pixel values
US8218625B2 (en) * 2004-04-23 2012-07-10 Dolby Laboratories Licensing Corporation Encoding, decoding and representing high dynamic range images
WO2006106453A1 (en) * 2005-04-04 2006-10-12 Koninklijke Philips Electronics N.V. Color conversion unit for reduced fringing
US8417099B2 (en) * 2005-08-26 2013-04-09 Panasonic Corporation Multiplexing method and recording medium
CN100596200C (zh) * 2007-04-27 2010-03-24 华为技术有限公司 图像压缩方法及图像编码器
WO2010023884A1 (ja) * 2008-08-29 2010-03-04 パナソニック株式会社 色信号変換装置、映像表示装置、色信号変換方法、映像表示方法及び画像データ
JP4697557B2 (ja) * 2009-01-07 2011-06-08 ソニー株式会社 符号化装置、符号化方法、記録媒体及び画像処理装置
WO2010105036A1 (en) * 2009-03-13 2010-09-16 Dolby Laboratories Licensing Corporation Layered compression of high dynamic range, visual dynamic range, and wide color gamut video
TWI521973B (zh) * 2011-04-15 2016-02-11 杜比實驗室特許公司 高動態範圍影像的編碼、解碼及表示
TWI606718B (zh) * 2012-01-03 2017-11-21 杜比實驗室特許公司 規定視覺動態範圍編碼操作及參數

Also Published As

Publication number Publication date
BR112015006711A2 (pt) 2017-07-04
MX343609B (es) 2016-11-14
IN2015DN01681A (pt) 2015-07-03
WO2015033809A1 (ja) 2015-03-12
EP3783900A1 (en) 2021-02-24
KR20160052459A (ko) 2016-05-12
TWI713355B (zh) 2020-12-11
EP2966869A4 (en) 2017-01-11
JP6651848B2 (ja) 2020-02-19
MX2015002589A (es) 2015-07-09
CN110012297B (zh) 2022-03-01
JP2020036368A (ja) 2020-03-05
JPWO2015033809A1 (ja) 2017-03-02
EP2966869A1 (en) 2016-01-13
TW201921940A (zh) 2019-06-01
TW201524200A (zh) 2015-06-16
CN104662911A (zh) 2015-05-27
MY184223A (en) 2021-03-27
JP6881555B2 (ja) 2021-06-02
TWI646828B (zh) 2019-01-01
EP2966869B1 (en) 2020-11-18
CN110012297A (zh) 2019-07-12
CN104662911B (zh) 2019-05-10

Similar Documents

Publication Publication Date Title
US10798398B2 (en) Decoding device and decoding method, encoding device, and encoding method
JP6202330B2 (ja) 復号装置および復号方法、並びに符号化装置および符号化方法
US10779009B2 (en) Image decoding device and method
JP6881555B2 (ja) 復号装置および復号方法
US20160227253A1 (en) Decoding device, decoding method, encoding device and encoding method
US10148959B2 (en) Image coding device and method, and image decoding device and method
EP3039869B1 (en) Decoding device, decoding method, encoding device, and encoding method
US10893279B2 (en) Decoding apparatus and decoding method, and coding apparatus and coding method
US20200288123A1 (en) Image processing apparatus and image processing method
BR112019013978A2 (pt) Dispositivo e método de processamento de imagem.
WO2015053116A1 (ja) 復号装置および復号方法、並びに、符号化装置および符号化方法
US10666959B2 (en) Image coding apparatus and method, and image decoding apparatus and method
BR112015011910B1 (pt) Dispositivo e método de decodificação, dispositivo de codificação, e, mídia legível por computador

Legal Events

Date Code Title Description
B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 25/08/2014, OBSERVADAS AS CONDICOES LEGAIS

B16C Correction of notification of the grant [chapter 16.3 patent gazette]

Free format text: REFERENTE A RPI 2723 DE 14/03/2023, QUANTO AO ITEM (54) TITULO.