BR112015030894B1

BR112015030894B1 - Dispositivo codificador, transmissor e receptor

Info

Publication number: BR112015030894B1
Application number: BR112015030894-5A
Authority: BR
Inventors: Ikuo Tsukagoshi
Original assignee: Sony Corporation
Priority date: 2013-09-12
Filing date: 2014-08-08
Publication date: 2023-03-14
Also published as: EP3046328B1; EP3046328A4; JP5971443B1; JP2018137807A; US20160373790A1; JP6330816B2; JPWO2015037373A1; RU2675051C2; CN105324999A; JP5971442B1; JP2016167877A; JP6540856B2; EP3046328A1; RU2015153140A3; BR112015030894A2; US10356450B2; JP2016167880A; JP5971444B1; CN105324999B; JP2016167879A

Abstract

DISPOSITIVO CODIFICADOR, TRANSMISSOR E RECEPTOR A presente invenção torna possível garantir facilmente continuidade de exibição no lado receptor quando dados de vídeo tendo uma parte de comutação de taxa de quadro são entregues. Dados de vídeo tendo uma parte de comutação a partir dos dados de imagem codificados em uma primeira sequência para dados de imagem codificados em uma segunda sequência tendo uma taxa de quadro diferente daquele da primeira sequência são gerados. Estes dados de vídeo são codificados de modo que a temporização final de exibição da última imagem parada dos dados de imagem codificados na primeira sequência e a temporização inicial de exibição da primeira imagem parada dos dados de imagem codificados na segunda sequência são as mesmas temporizações.

Description

Campo Técnico

[001] A tecnologia presente refere-se a um dispositivo de codificação, um dispositivo de transmissão, e um dispositivo de recepção, e particularmente a um dispositivo de codificação que gera dados de vídeo tendo uma parte comutada de taxa de quadro, e similar.

Técnica de Fundamento

[002] A taxa de quadro dos serviços de difusão atuais está definida a, por exemplo, 29,97 Hz. Há, porém, uma possibilidade que um serviço de difusão adotando outra taxa de quadro também será provido no futuro (por exemplo, se refira à Literatura de Patente 1). Nesse caso, uma situação na qual dados de vídeo tendo uma parte comutada de taxa de quadro no meio de dados são distribuídos também é considerada.

Lista de Citação Literatura de Patente Literatura de Patente 1: JP 2011-172164A Sumário da Invenção Problema Técnico

[003] Um objetivo da tecnologia presente é, quando dados de vídeo tendo uma parte comutada de taxa de quadro são distribuídos, habilitar um lado de recepção garantir facilmente uma continuidade de exibição.

Solução para o Problema

[004] Um conceito da tecnologia presente é um dispositivo de transmissão incluindo: uma unidade de codificação de imagem configurada para gerar dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de transmissão configurada para transmitir um recipiente em um formato predeterminado que inclui os dados de vídeo gerados. A unidade de codificação de imagem executa codificação de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência.

[005] Na tecnologia presente, dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência são gerados. Neste caso, na unidade de codificação de imagem, codificação é executada de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência.

[006] A unidade de transmissão transmite um recipiente em um formato predeterminado que inclui os dados de vídeo descritos acima. O recipiente pode ser, por exemplo, uma transferência contínua de transporte (MPEG-2 TS) que foi empregado em padrões de difusão digital. Além disso, o recipiente pode ser, por exemplo, MP4 que foi usado em distribuição na Internet e similar, ou um recipiente em um formato diferente disso.

[007] Na tecnologia presente como acima, codificação é executada de um modo que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Assim, por exemplo, um lado de recepção pode garantir facilmente uma continuidade de exibição entre a primeira sequência e a segunda sequência.

[008] Na tecnologia presente, por exemplo, a unidade de codificação de imagem pode executar codificação de um modo que os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas de decodificação até exibição. Executando codificação desta maneira, por exemplo, o lado de recepção pode evitar uma falha de buffer.

[009] Na tecnologia presente, por exemplo, a unidade de codificação de imagem pode executar codificação de um modo que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada a uma temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência a uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência. Executando codificação desta maneira, por exemplo, o lado de recepção pode garantir facilmente uma continuidade em temporizações de decodificação da primeira sequência e da segunda sequência, e pode evitar leitura tardia da primeira imagem parada da segunda sequência.

[0010] Na tecnologia presente, por exemplo, uma unidade de inserção de informação configurada para inserir informação indicando se ou não há uma mudança em uma taxa de quadro em cada pedaço de dados de imagem codificados de cada imagem parada dos dados de vídeo pode ser incluída ademais. Neste caso, por exemplo, quando a informação indica que há uma mudança na taxa de quadro, informação indicando um valor da taxa de quadro mudada pode ser adicionada à informação precedente. Inserindo a informação desta maneira, o lado de recepção pode averiguar facilmente o ponto da mudança da primeira sequência para a segunda sequência.

[0011] Na tecnologia presente, por exemplo, uma unidade de inserção de informação configurada para inserir informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência em um pacote contendo os dados de vídeo pode ser ademais incluída. Neste caso, por exemplo, a unidade de inserção de informação pode inserir a informação de notificação em um campo de extensão de um pacote de PES que inclui dados de imagem codificados de cada imagem parada em sua carga útil. Inserindo a informação de notificação desta maneira, o lado de recepção pode averiguar facilmente a mudança da primeira sequência para a segunda sequência.

[0012] Neste caso, por exemplo, a informação de notificação pode incluir informação indicando se ou não há uma descontinuidade em uma mudança de um valor de um tempo de decodificação. Então, quando a informação indica que há uma descontinuidade, por exemplo, o valor de contagem decrescente do número de imagens paradas até a imagem parada ao qual a descontinuidade ocorreu pode ser adicionado à informação.

[0013] Além disso, neste caso, por exemplo, a informação de notificação pode incluir informação indicando se ou não um intervalo de tempo de exibição de cada imagem parada está trocado. Então, quando a informação indica troca, por exemplo, o valor de contagem decrescente do número de imagens paradas até a troca pode ser adicionado à informação precedente.

[0014] Na tecnologia presente, por exemplo, uma unidade de inserção de informação configurada para inserir informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência em uma camada do recipiente pode ser incluída ademais. Neste caso, por exemplo, a informação de notificação pode incluir informação sobre uma taxa de imagem parada da primeira sequência e uma taxa de imagem parada da segunda sequência. Inserindo a informação de notificação dessa maneira, o lado de recepção pode averiguar facilmente a mudança da primeira sequência para a segunda sequência.

[0015] Outro conceito da tecnologia presente é um dispositivo de recepção incluindo: uma unidade de recepção configurada para receber um recipiente em um formato predeterminado que inclui dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência. Os dados de vídeo são codificados de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência. O dispositivo de recepção ademais inclui uma unidade de decodificação de imagem configurada para decodificar os dados de vídeo incluídos no recipiente recebido para obter dados de imagem com uma continuidade de exibição entre a primeira sequência e a segunda sequência mantida.

[0016] Na tecnologia presente, a unidade de recepção recebe o recipiente no formato predeterminado. Este recipiente inclui os dados de vídeo tendo a parte comutada dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência tendo a taxa de quadro diferente da primeira sequência. Além disso, a unidade de decodificação de imagem decodifica os dados de vídeo incluídos no recipiente recebido e obtém os dados de imagem com a continuidade de exibição entre a primeira sequência e a segunda sequência mantida.

[0017] Aqui, os dados de vídeo são codificados de um modo que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Assim, a continuidade de exibição entre a primeira sequência e a segunda sequência pode ser garantida facilmente.

[0018] Na tecnologia presente, por exemplo, antes da mesma temporização, a unidade de decodificação de imagem pode decodificar dados de imagem codificados de cada imagem parada da segunda sequência a uma temporização sincronizada com uma temporização de decodificação de dados de imagem codificados de cada imagem parada da primeira sequência. Neste caso, implementação na qual dois sinais de sincronização vertical assíncronos são gerados simultaneamente pode ser evitada.

[0019] Na tecnologia presente, por exemplo, informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência pode ser inserida em pelo menos um de um pacote contendo os dados de vídeo e uma camada do recipiente. Um processo da unidade de decodificação de imagem pode ser controlado baseado na informação de notificação.

[0020] Outro conceito da tecnologia presente é um dispositivo de recepção incluindo: uma unidade de recepção configurada para receber dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de processamento configurada para processar os dados de vídeo recebidos. Os dados de vídeo são codificados de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência.

[0021] Na tecnologia presente, a unidade de recepção recebe os dados de vídeo tendo a parte comutada dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência tendo a taxa de quadro diferente da primeira sequência. Além disso, a unidade de processamento processa os dados de vídeo recebidos.

[0022] Neste caso, os dados de vídeo são codificados de um modo que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Por conseguinte, por exemplo, uma continuidade de exibição entre a primeira sequência e a segunda sequência pode ser garantida facilmente.

[0023] Estes dados de vídeo podem ser codificados de um modo que, por exemplo, os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas de decodificação até exibição. Além disso, por exemplo, os dados de vídeo podem ser codificados de um modo que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada à temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência a uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência.

Efeitos Vantajosos da Invenção

[0024] De acordo com a tecnologia presente, um lado de recepção pode garantir facilmente uma continuidade de exibição. Deveria ser notado que os efeitos descritos aqui não são necessariamente limitativos, e qualquer efeito descrito na descrição presente pode ser exibido.

Descrição Breve dos Desenhos

[0025] Figura 1 é um diagrama de bloco mostrando um exemplo de configuração de um sistema de transmissão e recepção de uma modalidade.

[0026] Figura 2 é um diagrama de bloco mostrando um exemplo de configuração de um dispositivo de transmissão.

[0027] Figura 3 é um diagrama mostrando um exemplo de controle de HRD de um codificador para garantir uma continuidade de exibição.

[0028] Figura 4 é um diagrama mostrando um exemplo de controle de HRD do codificador.

[0029] Figura 5 é um diagrama mostrando um exemplo de estrutura de uma interface para inserir informação renovação temporal SEI e um exemplo de estrutura de "temporal_refresh_information()".

[0030] Figura 6 é um diagrama mostrando conteúdo de informação principal do exemplo de estrutura de "temporal_refresh_information()".

[0031] Figura 7 é um diagrama de bloco mostrando um exemplo de configuração de um codificador.

[0032] Figura 8 é um diagrama mostrando um exemplo de um fluxo de processo do codificador.

[0033] Figura 9 é um diagrama mostrando um exemplo de estrutura de dados de campo de extensão de PES (pes_extension_field_data) e conteúdo de informação principal disso.

[0034] Figura 10 é um diagrama mostrando um exemplo de estrutura de informação de descontinuidade temporal "temporal_discontinuity_information()".

[0035] Figura 11 é um diagrama mostrando conteúdo de informação principal do exemplo de estrutura de informação de descontinuidade temporal "temporal_discontinuity_information()".

[0036] Figura 12 é um diagrama mostrando um exemplo de conversão de informação relativa a uma continuidade de exibição na hora de troca de uma primeira sequência (sequência A) para uma segunda sequência (sequência B).

[0037] Figura 13 é um diagrama mostrando um exemplo de estrutura de um descritor de parâmetro de vídeo "Video_parameter_descriptor".

[0038] Figura 14 é um diagrama mostrando conteúdo de informação principal do exemplo de estrutura do descritor de parâmetro de vídeo "Video_parameter_descriptor".

[0039] Figura 15 é um diagrama de bloco mostrando um exemplo de configuração de um multiplexador.

[0040] Figura 16 é um diagrama mostrando um exemplo de um fluxo de processo de um multiplexador.

[0041] Figura 17 é um diagrama mostrando um exemplo de configuração de uma transferência contínua de transporte TS.

[0042] Figura 18 é um diagrama de bloco mostrando um exemplo de configuração de um dispositivo de recepção.

[0043] Figura 19 é um diagrama de bloco mostrando um exemplo de configuração de um desmultiplexador.

[0044] Figura 20 é um diagrama mostrando um exemplo de um fluxo de processo do desmultiplexador.

[0045] Figura 21 é um diagrama de bloco mostrando um exemplo de configuração de um decodificador.

[0046] Figura 22 é um diagrama para descrever um exemplo de uma temporização de troca de um sinal de sincronização vertical Vsync.

[0047] Figura 23 é um diagrama para descrever outro exemplo da temporização de troca do sinal de sincronização vertical Vsync.

[0048] Figura 24 é um diagrama mostrando um exemplo de controle de HRD de um codificador para garantir uma continuidade de exibição e continuidade de decodificação.

Descrição das Modalidades

[0049] Em seguida, modalidades para implementar esta tecnologia (em seguida chamadas "modalidades") serão descritas. Note que descrição será provida na ordem seguinte. 1. Modalidade 2. Exemplo modificado

<1. Modalidade> [Sistema de transmissão e recepção]

[0050] Figura 1 mostra um exemplo de configuração de um sistema de transmissão e recepção 10 como uma modalidade. Este sistema de transmissão e recepção 10 está configurado para ter um dispositivo de transmissão 100 e um dispositivo de recepção 200.

[0051] O dispositivo de transmissão 100 transmite uma transferência contínua de transporte TS que é um recipiente fazendo a transferência contínua ser levada em ondas de difusão. Esta transferência contínua de transporte TS inclui uma transferência contínua de vídeo com uma parte comutada de taxa de quadro, isto é, uma parte que é comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência.

[0052] Codificação de, por exemplo, H.264/AVC, H.265/HEVC, ou similar é assumida ser executada. Aqui, a codificação é executada tal que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Por conseguinte, um lado de recepção, por exemplo, pode garantir facilmente uma continuidade de exibição entre a primeira sequência e a segunda sequência.

[0053] Informação indicando se ou não há uma mudança em uma taxa de quadro é inserida em dados de imagem codificados de cada imagem parada de uma transferência contínua de vídeo. Por conseguinte, o lado de recepção pode averiguar facilmente, por exemplo, o ponto da mudança da primeira sequência para a segunda sequência.

[0054] Além disso, informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência é inserida em um pacote contendo a transferência contínua de vídeo, por exemplo, em um pacote de PES. Além disso, a informação notificando da mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência é inserida em uma camada do recipiente, isto é, uma camada da transferência contínua de transporte. Por conseguinte, o lado de recepção pode averiguar facilmente, por exemplo, a mudança da primeira sequência para a segunda sequência.

[0055] O dispositivo de recepção 200 recebe a transferência contínua de transporte TS descrita acima enviada sendo levada nas ondas radiodifundidas do dispositivo de transmissão 100. O dispositivo de recepção 200 decodifica a transferência contínua de vídeo incluído na transferência contínua de transporte TS para obter dados de imagem. Como descrito acima, a transferência contínua de vídeo é codificada tal que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Assim, dados de imagem com continuidade de exibição entre a primeira sequência e a segunda sequência mantida são obtidos.

[0056] Aqui, a informação notificando da mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência é inserida em pelo menos um do pacote contendo a transferência contínua de vídeo e a camada do recipiente. Um processo de decodificação de imagem é controlado baseado nesta informação de notificação. Por exemplo, a parte comutada da primeira sequência para a segunda sequência é averiguada baseada nesta informação de notificação, e troca de um sinal de sincronização vertical sincronizado com os dados de imagem codificados da primeira sequência a um sinal de sincronização vertical sincronizado com os dados de imagem codificados da segunda sequência é executada.

[0057] Além disso, dados de imagem codificados de cada imagem parada da segunda sequência são decodificados a uma temporização sincronizada com uma temporização de decodificação de dados de imagem codificados de cada imagem parada da primeira sequência antes da mesma temporização descrita acima. Por conseguinte, por exemplo, implementação na qual dois sinais de sincronização vertical assíncronos são gerados simultaneamente pode ser evitada.

[Configuração de dispositivo de transmissão]

[0058] Figura 2 mostra um exemplo de configuração do dispositivo de transmissão 100. Este dispositivo de transmissão 100 tem uma unidade de processamento central (CPU) 101, um codificador 102, um buffer de dados comprimidos (buffer de imagem parada codificada ou cpb) 103, um multiplexador 104 e uma unidade de transmissão 105. A CPU 101 é uma unidade de controle, que controla as operações de cada unidade do dispositivo de transmissão 100.

[0059] O codificador 102 recebe uma entrada de dados de imagem descomprimidos e executa codificação nisso. O codificador 102 executa codificação em, por exemplo, H.264/AVC, H.265/HEVC, ou similar. Nesta modalidade, dados de imagem descomprimidos com uma taxa de quadro diferente são entrados ao codificador 102 de uma maneira comutada. Assim, o codificador 102 gera transferências contínuas de vídeo (dados de vídeo) com uma parte comutada de taxa de quadro, isto é, uma parte que é comutada dos dados de imagem codificados da primeira sequência aos dados de imagem codificados da segunda sequência tendo uma taxa de quadro diferente.

[0060] Aqui, o codificador 102 executa a codificação tal que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência.

[0061] Figura 3 mostra um exemplo de controle de Decodificador de Referência Hipotético (HRD) do codificador 102. Uma linha sólida como escada A representa progresso da quantidade de dados gerados em codificação, e cada degrau corresponde à unidade de uma imagem parada. A altura de cada degrau representa uma quantidade de dados gerados em codificação.

[0062] Uma temporização P0 indica uma temporização à qual o primeiro byte de dados de imagem codificados da primeira imagem parada da primeira sequência (sequência A) entra em um buffer de imagem parada codificada (cpd ou buffer de dados comprimidos). Uma temporização P1 indica uma temporização à qual o primeiro byte dos dados de imagem codificados da última imagem parada da primeira sequência entra no cpd. Uma temporização P2 indica uma temporização à qual o último byte dos dados de imagem codificados da última imagem parada da primeira sequência entra no cpd e o primeiro byte dos dados de imagem codificados da primeira imagem parada da segunda sequência (sequência B) entra no cpd.

[0063] Além disso, Ra indica uma taxa de bit de entrada dos dados de imagem codificados da primeira imagem parada da primeira sequência ao cpd. Aqui, quando a quantidade de dados dos dados de imagem codificados da primeira imagem parada da primeira sequência é fixada a Qa e os dados são assumido serem entrados no cpd durante um tempo Ta, Ra = Qa/Ta. No exemplo ilustrado, um caso no qual uma taxa de bit de entrada de dados de imagem codificados de outras imagens paradas da primeira sequência para o cpd também é fixada a Ra é mostrado.

[0064] Além disso, Rb indica uma taxa de bit de entrada dos dados de imagem codificados da primeira imagem parada da segunda sequência ao cpd.Aqui, quando a quantidade de dados dos dados de imagem codificados da primeira imagem parada da segunda sequência é fixada a Qb e os dados são assumidos serem entrados no cpd durante um tempo Tb, Rb = Qb/Tb. No exemplo ilustrado, um caso no qual uma taxa de bit de entrada de dados de imagem codificados de outras imagens paradas da segunda sequência para o cpd também é fixada a Rb é mostrado. Deveria ser notado que, embora Ra e Rb mostrem um exemplo de uma taxa de bit constante (constant_bit_rate), eles não estão limitados a isso, e a mesma abordagem é aplicada ao caso de uma taxa de bit variável (variable_bit_rate).

[0065] Uma linha sólida como escada B representa progresso da quantidade de dados consumidos em decodificação, e cada degrau corresponde à unidade de uma imagem parada. A altura de cada degrau representa a quantidade de dados consumidos em decodificação. Qcpb representa uma quantidade de ocupação do cpd. Codificação é executada tal que a quantidade de ocupação caiba dentro de um tamanho do cpb (capacidade de memória) a qualquer temporização.

[0066] No exemplo ilustrado, a primeira sequência está composta de 4 imagens paradas, que são decodificados na ordem de a0, a1, a2 e a3 e exibidos na ordem de a0, a2, a3 e a1. Neste caso, dados de imagem de cada uma das imagens paradas decodificadas são entrados a um buffer de imagem parada decodificada (dpb ou buffer de dados descomprimidos). Neste exemplo, o número de imagens paradas atrasadas depois que a primeira sequência é decodificada até que exibição disso seja começada está fixado a 2.

[0067] Cada uma das imagens paradas da primeira sequência é decodificada e exibida a uma temporização de um sinal de sincronização vertical (Vsync) com um intervalo de tempo correspondendo a uma taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas a0, a1, a2 e a3 são decodificados nas temporizações Ta(0), Ta(1), Ta(2) e Ta(3), e exibição das imagens paradas a0, a2, a3 e a1 é começada nas temporizações Ta(2), Ta(3), Ta(4) e Ta(5).

[0068] A segunda sequência está composta de 6 imagens paradas, que são decodificados na ordem de b0, b1, b2, b3, b4 e b5 e exibidos na ordem de b1, b2, b0, b4, b5 e b3. Neste caso, dados codificados de cada uma das imagens paradas decodificadas são entrados ao dpb. Neste exemplo, o número de imagens paradas atrasadas depois que a segunda sequência é decodificada até que exibição disso seja começada é fixado a 2, igual à primeira sequência. Por conseguinte, uma falha de buffer é evitada.

[0069] Cada uma das imagens paradas da segunda sequência é decodificada e exibida na temporização do sinal de sincronização vertical (Vsync) com um intervalo de tempo correspondendo a uma taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas b0, b1, b2, b3, b4 e b5 são decodificados nas temporizações Tb(0), Tb(1), Tb(2), Tb(3), Tb(4) e Tb(5) e exibição das imagens paradas b1, b2, b0, b4, b5 e b3 é começado nas temporizações Tb(2), Tb(3), Tb(4), Tb(5), Tb(6) e Tb(7).

[0070] Neste exemplo, a temporização de fim de exibição da última imagem parada da primeira sequência se torna igual à temporização de começo de exibição da primeira imagem parada da segunda sequência. Quer dizer, a temporização Ta(6) é fixada à mesma temporização como a temporização Tb(2). Por conseguinte, uma continuidade de exibição entre a primeira sequência e a segunda sequência é assegurada.

[0071] Neste momento, a temporização (Tb(0)) à qual a primeira imagem parada da segunda sequência é decodificada é uma temporização atrasada "Initial_cpb_removal_delay B" de uma temporização (P2) à qual o byte principal da primeira imagem parada da segunda sequência começa acumulando no buffer de dados comprimido (cpb). Se a temporização (Tb(0)) for fixada para ser mais tarde que a temporização (Ta(4)), leitura tardia da primeira imagem parada da segunda sequência é evitada.

[0072] Figura 4 também mostra um exemplo de controle de HRD. Este exemplo é um exemplo de comparação para o controle de HRD descrito acima mostrado na Figura 3. Neste exemplo, a temporização (Tb(0)) à qual a primeira imagem parada da segunda sequência é decodificada é fixada à mesma temporização como a temporização (Ta(4)) obtida adicionando o período de uma imagem parada da segunda sequência à temporização (Ta(3)) à qual a última imagem parada da primeira sequência é decodificada.

[0073] Neste caso, embora uma continuidade em temporizações de decodificação da primeira sequência e da segunda sequência seja assegurada, uma continuidade em exibição não é. Em outras palavras, a temporização de fim de exibição (Ta(6)) da última imagem parada da primeira sequência diverge da temporização de começo de exibição (Tb(4)) da primeira imagem parada da segunda sequência. Neste caso, é necessário atrasar a exibição da última imagem parada da primeira sequência a imediatamente antes da temporização (Tb(4)) como mostrado por P4.

[0074] Além disso, o codificador 102 insere informação que indica se ou não há uma mudança na taxa de quadro de dados de imagem codificados de cada imagem parada da transferência contínua de vídeo. O codificador 102 insere informação de renovação temporal SEI (temporal_refresh_information SEI), que define recentemente essa informação como um de prefixo SEI (Prefix_SEI).

[0075] Figura 5(a) mostra um exemplo de estrutura (sintaxe) de uma interface (I/F) para inserir a informação de renovação temporal SEI. O campo de "uuid_iso_iec_11578" tem um valor de UUID indicado por "ISO/IEC 11578:1996 Anexo A". "temporal_refresh_information()" é inserida no campo de "user_data_payload_byte".

[0076] Figura 5(b) mostra um exemplo de estrutura (sintaxe) de "temporal_refresh_information()". Figura 6 mostra conteúdo (semântica) de informação principal do exemplo de estrutura. O ID de dados de usuário predeterminados é dado no campo de 16 bits de "userdata_id". O campo de 8 bits "temporal_refresh_information_length" indica o número de bytes de "temporal_refresh_information" (contado de um elemento próximo a este elemento).

[0077] O campo de 1 bit "temporal_timing_discontinuity_flag" é uma bandeira indicando uma descontinuidade ocorrendo em informação de tempo de exibição e uma marca de tempo. "1" indica que uma descontinuidade ocorreu. "0" indica que nenhuma descontinuidade ocorreu. Quando a bandeira é "1," o campo de 8 bits "num_unit_in_tick" e o campo de 8 bits "times_scale" são apresentados.

[0078] O campo de 8 bits "num_unit_in_tick" é o número de blocos indicando um período de exibição de uma fatia ou imagem parada correspondente. O campo de 8 bits "times_scale" indica um valor de graduação de informação de tempo. Aqui, calculando "times_scale" e "num_unit_in_tick", uma taxa de quadro (frequência de quadro) pode ser obtida.

[0079] Figura 7 mostra um exemplo de configuração do codificador 102. Este codificador 102 tem uma unidade de controle de atraso de buffer 122, uma unidade de colocação de decodificador de referência hipotético (HRD) 123, uma unidade de codificação conjunto de parâmetro/SEI 124, uma unidade de codificação de fatia 125 e uma unidade de empacotamento de NAL 126.

[0080] A unidade de controle de atraso de buffer 122 calcula "initial_cpb_removal_delay", que é um valor inicial de buffering de uma sequência e "cpb_removal_delay" e "dpb_output_delay" de cada quadro para sequências dispostas cronologicamente antes e depois de troca. Neste caso, a fim de assegurar uma relação de conexão contínua de exibição entre as duas sequências, "dpb_output_delay" e "cpb_removal_delay" das duas sequências são controlados tal que uma saída de buffer de dpb da última imagem parada da sequência prévia se torne contínua serialmente em tempo com uma saída de buffer de dpb da primeira imagem parada da sequência depois (veja Figura 3).

[0081] "Initial_cpb_removal_time" indica um tempo (tempo inicial) levado quando dados de imagem codificados da imagem parada principal de um Grupo de Imagens Paradas (GOP) do cpb (buffer de dados comprimidos) são decodificados. "cpb_removal_delay" é um tempo ao qual dados de imagem codificados de cada imagem parada são tirados do cpb, e um tempo ao qual cada imagem parada é decodificada é decidido conforme "initial_cpb_removal_time". Além disso, "dpb_output_delay" indica um tempo de entrar no dpb (buffer de dados descomprimidos) para extração de dados depois da decodificação.

[0082] A unidade de colocação de HRD 123 executa colocação de HRD baseada na informação de "initial_cpb_removal_time", "cpb_removal_delay" e" dpb_output_delay" calculado pela unidade de controle de atraso de buffer 122. A unidade de codificação de conjunto de parâmetro/SEI 124 gera SEI, além de conjuntos de parâmetros tais como um conjunto de parâmetros de vídeo (VPS) e um conjunto de parâmetros de sequência (SPS) baseado na colocação de HRD ou similar.

[0083] Por exemplo, temporização de imagem parada SEI que inclui "cpb_removal_delay" e "dpb_output_delay" é gerada. Além disso, por exemplo, período de buffering SEI incluindo "initial_cpb_removal_time" é gerado. Além disso, por exemplo, informação de renovação temporal SEI (temporal_refresh_information SEI), que elucida uma temporização de troca como descrito acima é gerada.

[0084] A unidade de codificação de fatia 125 obtém dados de fatia (cabeçote de segmento de fatia e dados de segmento de fatia) codificando dados de imagem de cada imagem parada. A unidade de decodificação de fatia 125 insere "ref_idx_10_active (ref_idx_11_active), que indica um índice de uma imagem parada que é um destino de predição de uma "unidade de predição", no "cabeçote de segmento de fatia" como informação indicando um estado de predição de direção de tempo usando um buffer de quadro. Por conseguinte, durante decodificação, uma imagem parada de fonte de referência é decidida. Além disso, a unidade de decodificação de fatia 125 insere o índice de uma fatia atual no "cabeçote de segmento de fatia" como "short_term_ref_pic_set_idx" ou "it_idx_sps".

[0085] A unidade de empacotamento de NAL 126 gera dados de imagem codificados de cada imagem parada baseada nos conjuntos de parâmetros e SEI gerada pela unidade de codificação de conjunto de parâmetro /SEI 124 e os dados de fatia gerados pela unidade de codificação de fatia 125, e produz transferências contínuas de vídeo (transferências contínuas codificadas).

[0086] Figura 8 mostra um exemplo do fluxo de processo do codificador 102. O codificador 102 começa o processo na Etapa ST1, e então se move ao processo da Etapa ST2. Nesta Etapa ST2, o codificador 102 verifica um parâmetro de uma sequência dinâmica a ser codificada. Este parâmetro também inclui a taxa de quadro (frequência de quadro).

[0087] Então, o codificador 102 determina se ou não há uma mudança na taxa de quadro na sequência no Etapa ST3. Quando há uma mudança na taxa de quadro, o codificador 102 procede ao processo ou Etapa ST4. Na Etapa ST4, o codificador administra temporizações de entrada e saída de buffer antes e depois do ponto da mudança.

[0088] Neste caso, a expressão seguinte (1) está satisfeita.T_2(first_presentation) = T_1(last_presentation) + 1*(T_1 temporal distance) ... (1)

[0089] Aqui, "T_2(first_presentation)" indica uma temporização de começo de exibição da primeira imagem parada da segunda sequência. "T_1(last_presentation)" indica a temporização de começo de exibição da última imagem parada da primeira sequência. "(T_1 temporal distance) indica o intervalo de tempo entre sinais de sincronização vertical, isto é, o período de imagem parada da primeira sequência.

[0090] Depois do processo da Etapa ST4, o codificador 102 procede ao processo da Etapa ST5. Quando não há nenhuma mudança na taxa de quadro na Etapa ST3 descrita acima, o codificador 102 se move diretamente ao processo da Etapa 5. Nesta Etapa ST5, o codificador 102 executa administração de HRD em todas as imagens paradas (fatias), executa codificação das fatias, dos conjuntos de parâmetros, SEI, e similar e então configura uma transferência contínua com pacotes de NAL. Depois disso, o codificador 102 termina o processo na Etapa ST6.

[0091] Retornando à Figura 2, a buffer de dados comprimidos (cpb) 103 acumula temporariamente uma transferência contínua de vídeo incluindo os dados codificados de cada imagem parada gerada pelo codificador 102. O multiplexador 104 lê a transferência contínua de vídeo acumulado no buffer de dados comprimidos 103, os faz em pacotes de PES, ademais os faz em pacotes de transporte e os multiplexa, e por esse meio obtém uma transferência contínua de transporte TS como uma transferência contínua multiplexada.

[0092] O multiplexador 104 insere a informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência no pacote contendo a transferência contínua de vídeo, por exemplo, o pacote de PES. Nesta modalidade, no campo de uma extensão de PES do pacote de PES, informação de descontinuidade temporal(temporal_discontinuity_information) está definida.

[0093] Esta informação de descontinuidade temporal inclui informação indicando se ou não há uma descontinuidade em uma mudança de um valor de um tempo de decodificação, e quando a informação indica que há uma descontinuidade, o valor de contagem decrescente do número de imagens paradas até uma imagem parada ao qual a descontinuidade ocorreu é adicionado àquela informação. Além disso, esta informação de descontinuidade temporal inclui informação indicando se ou não um intervalo de tempo de exibição de cada de imagens paradas está trocado, e quando a informação indica troca, o valor de contagem decrescente do número de imagens paradas até a troca é adicionado à informação.

[0094] Figura 9(a) mostra um exemplo de estrutura (sintaxe) dos dados de campo de extensão de PES (pes_extension_field_data). Figura 9(b) mostra o conteúdo (semântica) de informação principal na informação de estrutura. Deveria ser notado que "PES_extension_field_length" é assumido ser dado fora da estrutura de sintaxe. O campo de 8 bits de "start_sync_byte" indica um valor de código expressando um começo de um campo de extensão.

[0095] O campo de 8 bits de "extension_field_type" indica o tipo do campo de extensão. "0x01" indica o tipo de "temporal_discontinuity_information", isto é, uma estrutura na qual informação de uma descontinuidade temporal de unidades de acesso (imagens paradas) é provida. Quando o tipo do campo de extensão é "0x01", informação de descontinuidade temporal (temporal_discontinuity_information) é inserida no campo de "data_byte".

[0096] Figura 10 mostra um exemplo de estrutura (sintaxe) de informação de descontinuidade temporal "temporal_discontinuity_information()". Figura 11 mostra conteúdo (semântica) de informação principal do exemplo de estrutura.

[0097] O campo de 1 bit de "decode_time_discontinuity_flag" é uma bandeira indicando se ou não há uma descontinuidade em uma mudança do valor do tempo de decodificação (ou marca de tempo de decodificação). "1" indica que há uma descontinuidade e "0" indica que não há nenhuma descontinuidade. O campo de 1 bit de "presentation_frequency_change_flag" é informação de bandeira indicando se ou não o intervalo de tempo de exibição de unidades de acesso está trocado. "1" indica que está trocado e "0" indica que não está trocado.

[0098] Quando "decode_time_discontinuity_flag" é "1", o campo de 8 bits de "au_count_down_to_decode_time_switching" é apresentado. Este campo indica um valor de contagem decrescente em unidades de unidades de acesso (imagens paradas) até que a descontinuidade ocorreu na variação do tempo de decodificação. Por exemplo, "0x00" indica que uma unidade de acesso correspondente é a última unidade de acesso antes do ponto de descontinuidade, e "0x01 a 0xFE" indicam os valores de unidades de acesso correspondentes contados à última unidade de acesso antes do ponto de descontinuidade.

[0099] Além disso, quando "presentation_frequency_change_flag" é "1", o campo de 8 bits de "au_count_down_to_presentation_frequency_change" é apresentado. Este campo indica um valor de contagem decrescente em unidades de unidades de acesso até que o intervalo de tempo de exibição de cada uma das unidades de acesso seja trocado. Por exemplo, "0x00" indica que uma unidade de acesso correspondente é a última unidade de acesso antes de troca do intervalo de tempo de exibição, e "0x01 a 0xFE" indicam os valores de unidades de acesso correspondentes contados à última unidade de acesso antes de troca do intervalo de tempo de exibição.

[00100] Figura 12 mostra um exemplo de conversão de informação relativa a uma continuidade de exibição na hora de trocar da primeira sequência (sequência A) para a segunda sequência (sequência B). Aqui, um período de imagem parada da primeira sequência é assumido ser "Distância de Tempo A", e um período de imagem parada da segunda sequência é assumido ser "Distância de Tempo B". Além disso, informação de bandeira de "temporal_timing_discontinuity_flag" incluída em informação de renovação temporal SEI (temporal_refresh_information SEI) e valores de contagem decrescente de "au_count_down_to_presentation_frequency_change" incluídos em informação de descontinuidade temporal (temporal_discontinuity_information) são mostrados aqui.

[00101] Além disso, o multiplexador 104 insere a informação notificando da mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência na transferência contínua de transporte TS.

[00102] Como informação específica de programa (PSI), a transferência contínua de transporte TS inclui uma tabela de mapa de programa (PMT). Esta PMT tem uma malha elementar de vídeo (malha de ES1 de vídeo) com informação relativa a cada transferência contínua de vídeo. Nesta malha elementar de vídeo, informação de um tipo de transferência contínua, um identificador de pacote (PID), e similar como também um descritor descrevendo a informação relativa à transferência contínua de vídeo estão dispostas para corresponder a cada transferência contínua de vídeo. Nesta modalidade, o multiplexador 104 insere um descritor de parâmetro de vídeo (Video_parameter_descriptor) a ser definido recentemente como um dos descritores.

[00103] Figura 13 mostra um exemplo de estrutura (sintaxe) de um descritor de parâmetro de vídeo (Video_parameter_descriptor). Além disso, Figura 14 mostra conteúdo (semântica) de informação principal do exemplo de estrutura.

[00104] O campo de 8 bits de "descriptor_tag" indica o tipo do descritor, indicando descritor de parâmetro vídeo aqui. O campo de 8 bits de "descriptor_length" indica o comprimento (tamanho) do descritor, mostrando o número de bytes sucessivos como o comprimento do descritor.

[00105] O campo de 1 bit de "resolution_change_flag" é informação de bandeira indicando se ou não há uma mudança em resolução horizontal e vertical. O campo de 1 bit de "video_frame_rate_change_flag" é um campo de 1 bit indicando se ou não há uma mudança na frequência de quadro (taxa de quadro) de uma imagem parada. O campo de 1 bit de "video_bit_depth_change_flag" é informação de bandeira indicando se ou não há uma mudança em uma largura de bit codificado. O campo de 1 bit de "color_gamut_change_flag" é informação de bandeira indicando se ou não há uma mudança em uma escala de cor de uma imagem parada codificada. O campo de 1 bit de "dynamic_range_change_flag" é informação de bandeira indicando se ou não há uma mudança na gama de brilho e escuridão de luminância.

[00106] O campo de 4 bits de "video_resolution1" indica resolução horizontal e vertical atual. O campo de 4 bits de "video_frame_rate1" indica a frequência de quadro de uma imagem parada atual. "video_bit_depth1" indica uma largura de bit codificado atual. "color_gamut1" indica uma escala de uma imagem parada codificada atualmente. "luma_dynamic_range1" indica a gama de brilho e escuridão de luminância atual.

[00107] Quando "resolution_change_flag = 1" está fixado indicando que há uma mudança em resolução horizontal e vertical, o campo de 4 bits de "video_resolution2" é apresentado. Este campo indica a resolução horizontal e vertical mudada. Além disso, quando "video_frame_rate_change_flag = 1" está fixado indicando que há uma mudança na frequência de quadro da imagem parada, o campo de 4 bits de "video_frame_rate2" é apresentado. Este campo indica a frequência de quadro mudada da imagem parada.

[00108] Além disso, quando "video_bit_depth_change_flag = 1" está fixado indicando que há uma mudança em uma largura de bit codificado, o campo de 4 bits de "video_bit_depth2" é apresentado. Este campo indica a largura de bit codificado mudada. Além disso, quando "color_gamut_change_flag =1" está fixado indicando que há uma mudança em uma escala de uma imagem parada codificada, o campo de 4 bits de "color_gamut2" é apresentado. Este campo indica a escala mudada da imagem parada codificada. Além disso, quando "dynamic_range_change_flag = 1" está fixado indicando que há uma mudança na gama de brilho e escuridão de luminância, o campo de 4 bits de "luma_dynamic_range2" é apresentado. Este campo indica a gama mudada de brilho e escuridão de luminância.

[00109] Figura 15 mostra um exemplo de configuração do multiplexador 104. O multiplexador tem uma unidade de codificação de seção 142, uma unidade de empacotamento de PES 143 e uma unidade de empacotamento de transporte 145.

[00110] A unidade de empacotamento de PES 143 lê uma transferência contínua de vídeo (transferência contínua elementar) acumulado no buffer de dados comprimidos 103 para gerar um pacote de PES. Neste momento, a unidade de empacotamento de PES 143 coloca uma marca de tempo tal como uma marca de tempo de decodificação (DTS) e uma marca de tempo de apresentação (PTS) a um cabeçote de PES baseado em informação de HRD e similar da transferência contínua de vídeo. Neste caso, "cpu_removal_delay" e "dpb_output_delay" de cada imagem parada são referidos, marcas de tempo são convertidas em cada DTS e PTS em precisão sincronizada com o tempo de um relógio de tempo de sistema (STC), e dispostas em posições predeterminadas dos cabeçotes de PES.

[00111] Além disso, neste momento, a unidade de empacotamento de PES 143 cria a informação de descontinuidade temporal descrita acima (temporal_discontinuity_information) (veja Figura 10) baseado em informação sobre uma descontinuidade temporal de imagens parados (unidades de acesso) incluídos em uma transferência contínua de vídeo. Então, a unidade de empacotamento de PES 143 insere esta informação no campo de uma extensão de PES de um pacote de PES.

[00112] A unidade de codificação de seção 142 gera vários tipos de dados de seção a serem inseridos na transferência contínua de transporte TS. Neste momento, a unidade de codificação de seção 142 também cria o descritor de parâmetro de vídeo descrito acima (Video_parameter_descriptor) (veja Figura 13) baseado, por exemplo, na informação sobre a descontinuidade temporal das imagens paradas (unidades de acesso) incluídos na transferência contínua de vídeo.

[00113] O pacote de PES gerado pela unidade de empacotamento de PES 143 é enviado à unidade de empacotamento de transporte 145. Além disso, os vários tipos de dados de seção gerados pela unidade de codificação de seção 142 também são enviados à unidade de empacotamento de transporte 145. A unidade de empacotamento de transporte 145 gera um pacote de TS que inclui o pacote de PES e dados de seção em sua carga útil, e então gera uma transferência contínua de transporte TS.

[00114] Figura 16 mostra um exemplo do fluxo de processo do multiplexador 104. O multiplexador 104 começa o processo na Etapa ST11, e então se move ao processo da Etapa ST12. Nesta Etapa ST12, o multiplexador 104 computa uma marca de tempo de informação de renovação temporal SEI, temporização de imagem parada SEI, período de buffering SEI, ou informação de HRD da transferência contínua de vídeo (transferência contínua elementar).

[00115] Então, o multiplexador 104 cria informação de descontinuidade temporal na Etapa ST13 como informação de descontinuidade, e insere a informação no campo da extensão de PES. Então, o multiplexador 104 insere a transferência contínua de vídeo (transferência contínua elementar) na carga útil de PES na Etapa ST14.

[00116] Então, o multiplexador 104 gera vários tipos de dados de seção na Etapa ST15. Como um tipo destes dados de seção, um descritor de parâmetro vídeo que indica a presença de uma mudança em um parâmetro da transferência contínua de vídeo (transferência contínua elementar) também é gerado. Então, o multiplexador 104 gera e produz um pacote de TS que inclui um pacote de PES e dados de seção em sua carga útil na Etapa ST16. Depois do processo da Etapa ST16, o multiplexador 104 termina o processo na Etapa ST17.

[00117] Figura 17 mostra um exemplo de configuração da transferência contínua de transporte TS. Esta transferência contínua de transporte TS inclui uma transferência contínua de vídeo. Em outras palavras, neste exemplo de configuração, há um pacote de PES "PES1 de vídeo" da transferência contínua de vídeo.

[00118] Dados de imagem codificados de cada imagem parada são descritos na carga útil de PES. No caso de codificação de HEVC, os dados de imagem codificados estão compostos de unidades de NAL tais como um VPS, um SPS, SEI, um PPS, P-SEI, FATIA, S-SEI, e EOS. A informação de renovação temporal SEI (temporal_refresh_information SEI) descrita acima é inserida como um do P-SEI.

[00119] Além disso, a informação de descontinuidade temporal descrita acima (temporal_continuity_information) é inserida no campo da extensão de PES de um cabeçote de PES. Deveria ser notado que um DTS e um PTS também estão dispostos no cabeçote de PES.

[00120] Além disso, a transferência contínua de transporte TS inclui uma tabela de mapa de programa (PMT) como informação específica de programa (PSI). Esta PSI é informação descrevendo a qual programa cada transferência contínua elementar incluído na transferência contínua de transporte está afiliado.

[00121] Na PMT, há uma malha de programa descrevendo informação relativa a um programa inteiro. Além disso, na PMT, há uma malha elementar tendo informação relativa a cada transferência contínua elementar. Neste exemplo de configuração, há uma malha elementar de vídeo (malha de ES1 de vídeo).

[00122] Na malha elementar de vídeo, informação do tipo de transferência contínua, um identificador de pacote (PID), e similar estão dispostos, e descritores descrevendo informação relativa à transferência contínua de vídeo também são descritos correspondendo à transferência contínua de vídeo (PES1 de vídeo). Como um dos descritores, o descritor de parâmetro de vídeo descrito acima (video_parameter_descriptor) é inserido.

[00123] Retornando à Figura 2, a unidade de transmissão 105 modula a transferência contínua de transporte TS em um esquema de modulação próprio para difusão, por exemplo, QPSK-OFDM, e transmite um sinal de modulação de RF de uma antena de transmissão.

[00124] Uma operação do dispositivo de transmissão 100 mostrado na Figura 2 será descrita brevemente. O codificador 102 recebe uma entrada de dados de imagem descomprimidos. No codificador 102, codificação em, por exemplo, H.264/AVC, H.265/HEVC, ou similar é executada nos dados de imagem. Neste caso, dados de imagem de taxas de quadro diferentes são trocados para serem entrados ao codificador 102. Assim, o codificador 102 gera uma transferência contínua de vídeo tendo uma parte comutada de taxa de quadro, isto é, uma parte que está comutada de dados de imagem codificados de uma primeira sequência a dados de imagem codificados de uma segunda sequência que têm uma taxa de quadro diferente da primeira sequência.

[00125] O codificador 102 executa codificação tal que uma temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como uma temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Além disso, o codificador 102 executa codificação tal que os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas durante o tempo de decodificação para exibição. Além disso, o codificador 102 executa codificação tal que a temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada a uma temporização mais tarde que uma temporização obtida adicionando um período de quadro dos dados de imagem codificados da primeira sequência à temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência.

[00126] Além disso, o codificador 102 insere informação indicando se ou não há uma mudança em uma taxa de quadro em cada pedaço de dados de imagem codificados de cada imagem parada da transferência contínua de vídeo. Em outras palavras, o codificador 102 insere informação de renovação temporal SEI (temporal_refresh_information SEI) (veja Figura 5(b)) nos dados de imagem codificados de cada imagem parada como um tipo de prefixo SEI (Prefix_SEI).

[00127] A transferência contínua de vídeo que é gerado pelo codificador 102, incluindo os dados codificados das imagens paradas de cada camada, é provido ao buffer de dados comprimidos (cpb) 103 e armazenado temporariamente nela. No multiplexador 104, a transferência contínua de vídeo acumulado no buffer de dados comprimidos 103 é lido, empacotado em PES, e ademais empacotado e multiplexado em transporte, e por esse meio uma transferência contínua de transporte TS é obtido como uma transferência contínua multiplexada.

[00128] O multiplexador 104 insere informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência no pacote que contém a transferência contínua de vídeo, por exemplo, um pacote de PES. Em outras palavras, informação de descontinuidade temporal (temporal_discontinuity_information) (veja Figura 10) é inserida no campo da extensão de PES do pacote de PES.

[00129] Além disso, o multiplexador 104 insere a informação notificando da mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência na transferência contínua de transporte TS. Em outras palavras, um descritor de parâmetro de vídeo (Video_parameter_descriptor) (veja Figura 13) é inserido em uma malha elementar de vídeo.

[00130] A transferência contínua de transporte TS gerado pelo multiplexador 104 é enviado à unidade de transmissão 105. Na unidade de transmissão 105, a transferência contínua de transporte TS é modulado em um esquema de modulação próprio para difusão, por exemplo, QPSK-OFDM, e um sinal de modulação de RF é transmitido de uma antena de transmissão.

[Configuração de um dispositivo de recepção]

[00131] Figura 18 mostra um exemplo de configuração do dispositivo de recepção 200. Este dispositivo de recepção 200 tem uma unidade de processamento central (CPU) 201, uma unidade de recepção 202, um desmultiplexador 203, e um buffer de dados comprimidos (buffer de imagem parada codificada ou cpb) 204. Ademais, o dispositivo de recepção 200 tem um decodificador 205, um buffer de dados descomprimidos (buffer de imagem parada decodificada ou dpb) 206, uma unidade de pós-processamento 207, uma unidade de geração de relógio 208 e um divisor de frequência 209. A CPU 201 constitui uma unidade de controle que controla as operações de cada unidade do dispositivo de recepção 200.

[00132] A unidade de recepção 202 demodula um sinal modulado em RF recebido por uma antena de recepção para adquirir a transferência contínua de transporte TS. A transferência contínua de transporte TS inclui a transferência contínua de vídeo (dados de vídeo) com a parte comutada dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência tendo a taxa de quadro diferente da primeira sequência. O desmultiplexador 203 extrai a transferência contínua de vídeo e envia a transferência contínua ao buffer de dados comprimidos (buffer de imagem parada codificada ou cpb) 204.

[00133] Figura 19 mostra um exemplo de configuração do desmultiplexador 203. O desmultiplexador 203 tem uma unidade de extração de campo de adaptação de TS 231, uma unidade de extração de informação de relógio 232, uma unidade de extração de carga útil de TS 233, uma unidade de extração de seção 234, uma unidade de extração de tabela de PSI/descritor 235 e uma unidade de extração de pacote de PES 236. Além disso, o desmultiplexador 203 tem uma unidade de extração de cabeçote de PES 237, uma unidade de extração de marca de tempo 238, uma unidade de extração de informação de descontinuidade/contagem decrescente 239 e uma unidade de extração de carga útil de PES 240.

[00134] A unidade de extração de campo de adaptação de TS 231 extrai um campo de adaptação de um pacote de TS tendo o campo de adaptação da transferência contínua de transporte TS. A unidade de extração de informação de relógio 232 extrai uma referência de relógio de programa (PCR) do campo de adaptação no qual o PCR está incluído, e envia o PCR à unidade de geração de relógio 208.

[00135] A unidade de extração de carga útil de TS 233 extrai a carga útil de TS do pacote de TS tendo a carga útil de TS da transferência contínua de transporte TS. A unidade de extração de seção 234 extrai dados de seção da carga útil de TS que inclui os dados de seção. A unidade de extração de tabela de PSI/descritor 235 analisa os dados de seção pela unidade de extração de seção 234 e extrai uma tabela de PSI ou um descritor. Então, a unidade de extração de tabela de PSI/descritor 235 envia informação de descritor à CPU 201.

[00136] Esta informação de descritor também inclui o descritor de parâmetro de vídeo descrito acima (Video_parameter_descriptor). A CPU 201 pode reconhecer uma mudança na frequência de quadro (taxa de quadro) com antecedência da informação do descritor de parâmetro de vídeo e ademais também pode reconhecer a frequência de quadro mudada.

[00137] A unidade de extração de pacote de PES 236 extrai um pacote de PES da carga útil de TS que inclui o pacote de PES. A unidade de extração de cabeçote de PES 237 extrai o cabeçote de PES do pacote de PES extraído pela unidade de extração de pacote de PES 236. A unidade de extração de marca de tempo 238 extrai marcas de tempo (DTS e PTS) inseridas no cabeçote de PES em unidades de imagens paradas e envia as marcas de tempo à CPU 201.

[00138] Além disso, a unidade de extração de informação descontinuidade/contagem decrescente 139 extrai a informação de descontinuidade temporal descrita acima(temporal_discontinuity_information) inserida na área da extensão de PES do cabeçote de PES em unidades de imagens paradas, e envia informação de descontinuidade e informação de contagem decrescente para a CPU 201.

[00139] Neste caso, quando há uma descontinuidade em uma mudança do valor de um tempo de decodificação (ou marca de tempo de decodificação), a CPU 201 pode reconhecer a descontinuidade com antecedência e ademais pode averiguar claramente progresso até que uma descontinuidade ocorra em unidades de unidades de acesso (imagens paradas) da informação de contagem decrescente (valor de contagem decrescente). Além disso, quando um intervalo de tempo de exibição de cada unidade de acesso (imagens paradas) é trocado, a CPU 201 pode reconhecer a troca com antecedência e ademais pode averiguar claramente progresso de unidades de unidades de acesso (imagens paradas) até a troca da informação de contagem decrescente (valor de contagem decrescente).

[00140] A unidade de extração de carga útil de PES 240 extrai a carga útil de PES, isto é, dados de imagem codificados de cada imagem parada, do pacote de PES extraído pela unidade de extração de pacote de PES 236 e envia os dados ao buffer de dados comprimidos (buffer de imagem parada codificada ou cpb) 204.

[00141] Figura 20 mostra um exemplo do fluxo de processo do desmultiplexador 203. O desmultiplexador 203 começa o processo na Etapa ST31 e então extrai a carga útil de TS na Etapa ST32. Então, o desmultiplexador 203 executa análise de um PID na Etapa ST33 para determinar se ou não é uma seção. Quando é determinado ser uma seção, o desmultiplexador 203 desmultiplexa um pacote atravessando um filtro de PID correspondente na Etapa ST34 para executar análise de seção.

[00142] Então, o desmultiplexador 203 analisa o descritor de parâmetro de vídeo (Video_parameter_descriptor) na Etapa ST35. Então, o desmultiplexador 203 determina se ou não há uma mudança na taxa de quadro (frequência de quadro) na Etapa ST36. Quando há uma mudança na taxa de quadro, o desmultiplexador 203 notifica o sistema, isto é, a CPU 201 da taxa de quadro mudada na Etapa ST37.

[00143] Então, o desmultiplexador 203 se move à Etapa ST38 e termina o processo. Deveria ser notado que, quando não há nenhuma mudança na taxa de quadro na Etapa ST36, o desmultiplexador 203 se move diretamente à Etapa ST38 para terminar o processo.

[00144] Além disso, quando não é uma seção na Etapa ST33, o desmultiplexador 203 extrai o pacote de PES na Etapa ST39. Então, o desmultiplexador 203 determina se ou não é o cabeçote de PES na Etapa ST40. Quando é o cabeçote de PES, o desmultiplexador 203 determina se ou não há uma mudança na taxa de quadro na análise do descritor de parâmetro de vídeo na Etapa ST41.

[00145] Quando há uma mudança na taxa de quadro, o desmultiplexador 203 determina se ou não há informação de descontinuidade temporal (temporal_discontinuity_information) no campo da extensão de PES na Etapa ST42. A determinação da Etapa ST41 é assumida coincidir com o resultado do Etapa ST36.

[00146] Quando há informação de descontinuidade temporal, o desmultiplexador 203 detecta uma descontinuidade da marca de tempo com uma bandeira de descontinuidade da informação de descontinuidade temporal e o valor de contagem decrescente, e notifica o sistema, isto é, a CPU 201 da detecção na Etapa ST43. Então, o desmultiplexador 203 se move para o processo da Etapa ST44. Deveria ser notado que, quando não há nenhuma mudança na taxa de quadro da Etapa ST41, ou quando não há nenhuma informação de descontinuidade temporal na Etapa ST42, o desmultiplexador 203 se move diretamente ao processo da Etapa ST44.

[00147] Na Etapa ST44, o desmultiplexador 203 determina se ou não há um DTS e um PTS. Quando há um DTS e um PTS, o desmultiplexador 203 se move para o processo da Etapa ST46. Por outro lado, quando não há nem DTS nem PTS, o desmultiplexador 203 gera um DTS e um PTS por interpolação na Etapa ST45, e então se move ao processo da Etapa ST46. Na Etapa ST46, o desmultiplexador 203 notifica o sistema, isto é, a CPU 201 do DTS e o PTS. Então, o desmultiplexador 203 se move à Etapa ST38 para terminar o processo.

[00148] Além disso, quando não é o cabeçote de PES na Etapa ST40, o desmultiplexador 203 extrai a carga útil de PES na Etapa ST47. Então, o desmultiplexador 203 transfere uma transferência contínua codificada para o PID para a buffer de dados comprimidos (cpb) 204 na Etapa ST48. Então, o desmultiplexador 203 se move à Etapa ST38 para terminar o processo.

[00149] Retornando à Figura 18, o buffer de dados comprimidos (cpb) 204 acumula temporariamente a transferência contínua de vídeo (transferência contínua codificada) levado pelo desmultiplexador 203. O decodificador 205 decodifica dados de imagem codificados de cada um de imagens paradas da transferência contínua de vídeo acumulado no buffer de dados comprimidos 204 a temporizações de decodificação das imagens paradas, e envia os dados ao buffer de dados descomprimidos (dpb) 206.

[00150] Aqui, a CPU 201 dá ao decodificador 205 temporizações de decodificação baseado na marca de tempo de decodificação (DTS). Deveria ser notado que, quando o decodificador 205 decodifica os dados de imagem codificados de cada imagem parada, o decodificador lê e usa dados de imagem de uma imagem parada de fonte de referência do buffer de dados descomprimidos 206.

[00151] Figura 21 mostra um exemplo de configuração do decodificador 205. Este decodificador 205 tem uma unidade de análise de pacote de NAL 251 e uma unidade de decodificação 252. A unidade de análise de pacote de NAL 251 analisa cada pacote de NAL compondo dados de imagem codificados para determinar um conjunto de parâmetros tais como um VPS, um SPS, ou um PPS, SEI, e uma fatia. A unidade de análise de pacote de NAL 251 envia cada pacote de NAL junto com o resultado de determinação para a unidade de decodificação 252.

[00152] A unidade de decodificação 252 decodifica sequencialmente dados de imagem codificados de cada uma das imagens paradas incluídas na transferência contínua de vídeo (transferência contínua codificada) enviado pela unidade de análise de pacote de NAL 251 a temporizações de decodificação, e envia os dados ao buffer de dados descomprimidos (dpb) 206. Neste caso, a unidade de decodificação 252 executa análise de informação de temporização de um VPS, um SPS, e um PPS para averiguar "general_level_idc", que é o nível da taxa de bit de uma transferência contínua inteira ou "sublayer_level_idc", que é o nível da taxa de bit de cada subcamada, e verificar se ou não decodificação pode ser executada dentro de sua capacidade de decodificação. Além disso, neste caso, a unidade de decodificação 252 analisa SEI para averiguar, por exemplo, "initial_cpb_removal_time" e "cpb_removal_delay" e verificar se uma temporização de decodificação enviada da CPU 201 é própria.

[00153] Além disso, neste caso, a unidade de decodificação 252 obtém uma taxa de quadro (frequência de quadro) de informação de "vps_num_units_in_tick" e "vps_times_scale" incluída no VPS e envia a taxa de quadro à CPU 201. Por conseguinte, a CPU 201 pode verificar a taxa de quadro de uma imagem parada que está sofrendo atualmente decodificação. Deveria ser notado que a unidade de decodificação 252 pode determinar se ou não uma imagem parada é um com uma descontinuidade em informação de tempo e uma marca de tempo analisando informação de renovação temporal SEI, e quando a imagem parada é um com uma descontinuidade, uma taxa de quadro (frequência de quadro) também pode ser obtida de informação de "num_units_in_tick" e "times_scale" incluída nessa SEI.

[00154] Ao decodificar uma fatia, a unidade de decodificação 252 adquire "ref_idx_10_active (ref_idx_11_active) do cabeçote de fatia como informação indicando um destino de predição na direção de tempo para executar predição na direção de tempo. Deveria ser notado que imagens paradas decodificadas são processadas para serem referidos por outras imagens paradas usando "short_term_ref_pic_set_idx" ou "it_idx_sps" obtidos do cabeçote de fatia como um índice.

[00155] Retornando à Figura 18, a buffer de dados descomprimidos (dpb) 206 armazena temporariamente os dados de imagem de cada imagem parada decodificada pelo decodificador 205. A unidade de pós-processamento 207 executa um processo nos dados de imagem de cada uma das imagens paradas lidas sequencialmente do buffer de dados descomprimidos (dpb) 206 a temporizações de exibição para fazer a taxa de quadro disso combinar com uma capacidade de exibição. Neste caso, as temporizações de exibição são dadas ao decodificador 205 da CPU 201 baseado em uma marca de tempo de apresentação (PTS).

[00156] Por exemplo, quando a taxa de quadro dos dados de imagem decodificados das imagens paradas é 120 fps e a capacidade de exibição é 120 fps, a unidade de pós-processamento 207 envia os dados de imagem decodificados das imagens paradas a um visor como estão. Além disso, quando, por exemplo, a taxa de quadro dos dados de imagem decodificados das imagens paradas é 120 fps e a capacidade de exibição é 60 fps, a unidade de pós-processamento 207 executa um processo de subamostragem de forma que resolução de direção de tempo seja metade daquela dos dados de imagem decodificados das imagens paradas, e envia os dados ao visor como dados de imagem de 60 fps.

[00157] Além disso, quando a taxa de quadro dos dados de imagem decodificados das imagens paradas é 60 fps e a capacidade de exibição é 120 fps, a unidade de pós-processamento 207 executa um processo de interpolação de forma que resolução de direção de tempo seja duas vezes aquela dos dados de imagem decodificados das imagens paradas, e envia os dados ao visor como dados de imagem de 120 fps. Além disso, quando, por exemplo, a taxa de quadro dos dados de imagem decodificados das imagens paradas é 60 fps e a capacidade de exibição é 60 fps, a unidade de pós- processamento 207 envia os dados de imagem decodificados das imagens paradas ao visor como estão.

[00158] A unidade de geração de relógio de CPU 201 gera um relógio do sistema STC que está sincronizado com o PCR extraído pelo desmultiplexador 203. O divisor de frequência 209 divide a frequência deste relógio do sistema STC e produz um sinal de sincronização vertical Vsync. Este sinal de sincronização vertical Vsync é provido à CPU 201 e também provido ao desmultiplexador 203, ao decodificador 205, e à unidade de pós- processamento 207, e ademais outros pontos necessários.

[00159] A frequência deste sinal de sincronização vertical Vsync é controlada de acordo com provisão de um valor de divisão de frequência (valor de divisor) da CPU 201. Nesta modalidade, a frequência do sinal de sincronização vertical Vsync é comutada para combinar com a taxa de imagem parada da primeira sequência até a temporização de começo de exibição da primeira imagem parada da segunda sequência, e combinar com a taxa de imagem parada da segunda sequência da temporização de começo de exibição.

[00160] Assim, na modalidade presente, antes da temporização de começo de exibição da primeira imagem parada da segunda sequência, dados de imagem codificados de cada imagem parada da segunda sequência são decodificados na temporização de decodificação de dados de imagem codificados de cada imagem parada da primeira sequência.

[00161] Figura 22 mostra um exemplo de uma temporização de troca do sinal de sincronização vertical Vsync. Neste exemplo ilustrado, a primeira sequência está composta de 4 imagens paradas, que são decodificados na ordem de a0, a1, a2 e a3 e exibidos na ordem de a0, a2, a3 e a1. Neste caso, o número de imagens paradas atrasadas depois que a primeira sequência é decodificada até que exibição disso seja começada está fixado a 2.

[00162] Cada uma das imagens paradas da primeira sequência é decodificada e exibida a uma temporização do sinal de sincronização vertical (Vsync) tendo um intervalo de tempo Va correspondendo a uma taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas a0, a1, a2 e a3 são decodificados a temporizações Ta(0), Ta(1), Ta(2) e Ta(3), e exibição das imagens paradas a0, a2, a3 e a1 é começada a temporizações Ta(2), Ta(3), Ta(4) e Ta(5).

[00163] A segunda sequência está composta de 7 imagens paradas, que são decodificados na ordem de b0, b1, b2, b3, b4, b5 e b6 e exibidos na ordem de b0, b2, b3, b1, b5, b6 e b3. Neste caso, o número de imagens paradas atrasadas depois que a segunda sequência é decodificada até que exibição disso seja começada está fixado a 2, igual à primeira sequência.

[00164] Temporizações de decodificação e exibição são fixadas em codificação tal que cada uma das imagens paradas da segunda sequência seja decodificada e exibida a temporizações do sinal de sincronização vertical (Vsync) tendo um intervalo de tempo Vb (< Va) correspondendo a uma taxa de quadro (frequência de quadro) disso. Nesta modalidade, porém, a frequência é comutada para combinar com a taxa de imagem parada da primeira sequência até a temporização de começo de exibição (Tb(2)) da primeira imagem parada da segunda sequência, e combinar com a taxa de imagem parada da segunda sequência dessa temporização.

[00165] Assim, antes da temporização de começo de exibição (Tb(2)) da primeira imagem parada da segunda sequência, o decodificador 205 decodifica os dados de imagem codificados de cada uma das imagens paradas (as imagens paradas b0 e b1 no exemplo ilustrado) da segunda sequência na temporização de decodificação dos dados de imagem codificados de cada imagem parada da primeira sequência com continuidade em temporizações de decodificação com a primeira sequência mantida.

[00166] Em outras palavras, as imagens paradas b0 e b1 são decodificadas nas temporizações Ta(4) e Ta(5). A imagem parada b0 pode ser decodificada até mesmo antes da temporização (Tb(0)) porque o desmultiplexador 203 extrai informação de descontinuidade temporal (temporal_discontinuity_information) da área da extensão de PES na temporização à qual o byte principal da última imagem parada da primeira sequência entra no buffer de dados comprimido (cpb) 204 na mais recente (a temporização P1 na Figura 3) e detecta informação de descontinuidade.

[00167] Além disso, como descrito acima, troca do sinal de sincronização vertical Vsync é executada na temporização de começo de exibição (Tb(2)) da primeira imagem parada da segunda sequência, isto é, na temporização de fim de exibição (Ta(6)) da última imagem parada da primeira sequência. A CPU 201 pode detectar a necessidade da troca do sinal de sincronização vertical Vsync a esta temporização da informação de descontinuidade que é a informação de descontinuidade temporal e a informação de contagem decrescente.

[00168] Figura 23 também mostra outro exemplo da temporização de troca do sinal de sincronização vertical Vsync. O exemplo da Figura 22 mostra que um ciclo de quadro (intervalo de tempo) da primeira sequência está fixado a Va e um ciclo de quadro (intervalo de tempo) da segunda sequência está fixado a Vb (< Va), mas este exemplo é o caso invertido a isso. Em outras palavras, neste exemplo, um ciclo de quadro (intervalo de tempo) da primeira sequência está fixado a Vb e um ciclo de quadro (intervalo de tempo) da segunda sequência está fixado a Va (> Vb).

[00169] No exemplo ilustrado, a primeira sequência está composta de 4 imagens paradas, que são decodificados na ordem de b0, b1, b2 e b3 e exibidos na ordem de b0, b2, b3 e b1. Neste caso, o número de imagens paradas atrasadas depois que a sequência é decodificada até que exibição disso seja começada está fixado a 2.

[00170] Cada uma das imagens paradas da primeira sequência é decodificada e exibida a uma temporização do sinal de sincronização vertical (Vsync) tendo o intervalo de tempo Vb correspondendo a uma taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas b0, b1, b2 e b3 são decodificados nas temporizações Tb(0), Tb(1), Tb(2) e Tb(3), e exibição das imagens paradas b0, b2, b3 e b1 é começada nas temporizações Tb(2), Tb(3), Tb(4) e Tb(5).

[00171] A segunda sequência está composta de 4 imagens paradas, que são decodificados na ordem de a0, a1, a2, e a3 e exibidos na ordem de a0, a2, a3 e a1. Neste caso, o número de imagens paradas atrasadas depois que a sequência é decodificada até que exibição disso seja começada está fixado a 2, igual à primeira sequência.

[00172] Temporizações de decodificação e exibição são fixadas em codificação tal que cada uma das imagens paradas da segunda sequência seja decodificada e exibida a uma temporização do sinal de sincronização vertical (Vsync) tendo o intervalo de tempo Va (> Vb) correspondendo a uma taxa de quadro (frequência de quadro) disso. Nesta modalidade, porém, a frequência é comutada para combinar com a taxa de imagem parada da primeira sequência até a temporização de começo de exibição (Ta(2)) da primeira imagem parada da segunda sequência, e combinar com a taxa de imagem parada da segunda sequência dessa temporização.

[00173] Assim, antes da temporização de começo de exibição (Ta(2)) da primeira imagem parada da segunda sequência, o decodificador 205 decodifica os dados de imagem codificados de cada uma das imagens paradas (as imagens paradas a0 e a1 no exemplo ilustrado) da segunda sequência na temporização de decodificação dos dados de imagem codificados de cada imagem parada da primeira sequência com continuidade em temporizações de decodificação com a primeira sequência mantida.

[00174] Em outras palavras, as imagens paradas a0 e a1 são decodificados nas temporizações Tb(4) e Tb(5). A imagem parada a0 pode ser decodificado até mesmo depois da temporização (Ta(0)) porque o desmultiplexador 203 extrai informação de descontinuidade temporal (temporal_discontinuity_information) da área da extensão de PES na temporização à qual o byte principal da última imagem parada da primeira sequência entra no buffer de dados comprimido (cpb) 204 no mais recente (a temporização P1 na Figura 3) e detecta informação de descontinuidade.

[00175] Além disso, troca do sinal de sincronização vertical Vsync é executada na temporização de começo de exibição (Ta(2)) da primeira imagem parada da segunda sequência, isto é, a temporização de fim de exibição (Tb(6)) da última imagem parada da primeira sequência como descrito acima. A CPU 201 pode detectar a necessidade da troca do sinal de sincronização vertical Vsync a esta temporização da informação de descontinuidade que é a informação de descontinuidade temporal e a informação de contagem decrescente.

[00176] Uma operação do dispositivo de recepção 200 mostrado na Figura 18 será descrita brevemente. A unidade de recepção 202 demodula um sinal modulado em RF recebido pela antena de recepção para adquirir a transferência contínua de transporte TS. A transferência contínua de transporte TS inclui uma transferência contínua de vídeo com uma parte comutada de dados de imagem codificados da primeira sequência para dados de imagem codificados da segunda sequência tendo uma taxa de quadro diferente da primeira sequência. Esta transferência contínua de transporte TS é enviado ao desmultiplexador 203. O desmultiplexador 203 extrai a transferência contínua de vídeo da transferência contínua de transporte TS e envia a transferência contínua ao buffer de dados comprimidos (cpb) 204 para fazer a transferência contínua ser acumulada temporariamente.

[00177] Além disso, o desmultiplexador 203 extrai a referência de relógio de programa (PCR) de um campo de adaptação de um pacote de TS. Esta PCR é provida à unidade de geração de relógio 208. A unidade de geração de relógio 208 gera o relógio do sistema STC que está sincronizado com a PCR. Então, este relógio do sistema STC sofre divisão de frequência pelo divisor de frequência 209 para obter o sinal de sincronização vertical Vsync. Este sinal de sincronização vertical Vsync é provido à CPU 201 e também a pontos necessários tais como o desmultiplexador 203, o decodificador 205 e a unidade de pós-processamento 207.

[00178] Além disso, o desmultiplexador 203 extrai um descritor tal como o descritor de parâmetro de vídeo (Video_parameter_descriptor) da transferência contínua de transporte TS e provê o descritor para a CPU 201. A CPU 201 pode reconhecer uma mudança na frequência de quadro (taxa de quadro) com antecedência da informação do descritor de parâmetro de vídeo, e ademais pode reconhecer a frequência de quadro mudada.

[00179] Além disso, o desmultiplexador 203 extrai a informação de descontinuidade temporal (temporal_discontinuity_information) inserida na área da extensão de PES do cabeçote de PES para cada imagem parada, e a informação de descontinuidade e a informação de contagem decrescente são providas à CPU 201.

[00180] Por conseguinte, quando há uma descontinuidade em uma mudança do valor de um tempo de decodificação (ou marca de tempo de decodificação), a CPU 201 pode reconhecer a descontinuidade com antecedência e ademais pode averiguar claramente progresso de unidades de unidades de acesso (imagens paradas) até que a descontinuidade ocorra da informação de contagem decrescente (valor de contagem decrescente). Além disso, quando um intervalo de tempo de exibição de cada unidade de acesso (imagem parada) é trocado, a CPU 201 pode reconhecer a troca com antecedência e ademais pode averiguar claramente progresso em unidades de unidades de acesso (imagens paradas) até a troca da informação de contagem decrescente (valor de contagem decrescente).

[00181] Além disso, o desmultiplexador 203 extrai as marcas de tempo do DTS e PTS dispostas no cabeçote de PES para cada imagem parada e as provê à CPU 201. A CPU 201 dá temporizações de decodificação e temporizações de exibição ao decodificador 205 baseado nas marcas de tempo.

[00182] O decodificador 205 decodifica dados de imagem codificados de cada uma das imagens paradas da transferência contínua de vídeo acumulados no buffer de dados comprimidos 204 nas temporizações de decodificação dos quadros e envia os dados ao buffer de dados descomprimidos (dpb) 206 para fazer os dados serem acumulados temporariamente. Neste caso, quando os dados de imagem codificados de cada uma das imagens paradas são decodificados, dados de imagem de uma imagem parada de referência visada são lidos do buffer de dados descomprimidos 206 e usados, se necessário.

[00183] Os dados de imagem de cada uma das imagens paradas lidos sequencialmente do buffer de dados descomprimidos (dpb) 206 nas temporizações de exibição são enviados à unidade de pós-processamento 207. Neste caso, a temporização de fim de exibição da última imagem parada da primeira sequência é fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada da segunda sequência.

[00184] A unidade de pós-processamento 207 executa interpolação ou subamostragem para fazer a taxa de quadro dos dados de imagem das imagens paradas combinar com a capacidade de exibição. Os dados de imagem das imagens paradas processadas pela unidade de pós-processamento 207 são providos ao visor e uma imagem dinâmica dos dados de imagem das imagens paradas é exibida.

[00185] Deveria ser notado que a frequência do sinal de sincronização vertical Vsync é comutada quando um valor de divisão de frequência (valor de divisor) provido da CPU 201 é mudado. A frequência do sinal de sincronização vertical Vsync é comutada para combinar com a taxa de imagem parada da primeira sequência até a temporização de começo de exibição da primeira imagem parada da segunda sequência e combinar com a taxa de imagem parada da segunda sequência dessa temporização. A CPU 201 reconhece esta temporização de troca baseada na informação de descontinuidade que é a informação de descontinuidade temporal e a informação de contagem decrescente.

[00186] Além disso, a frequência do sinal de sincronização vertical Vsync é fixada para combinar com a taxa de imagem parada da primeira sequência antes da temporização de começo de exibição da primeira imagem parada da segunda sequência como acima. Por esta razão, os dados de imagem codificados de cada uma das imagens paradas da segunda sequência são decodificados nas temporizações de decodificação dos dados de imagem codificados de cada uma das imagens paradas da primeira sequência antes da temporização de começo de exibição da primeira imagem parada da segunda sequência de acordo com controle da CPU 201. Este controle é possível desde que a informação de descontinuidade da informação de descontinuidade temporal é detectada.

[00187] Como descrito acima, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de transmissão executa codificação tal que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Assim, por exemplo, o lado de recepção pode garantir facilmente uma continuidade de exibição entre a primeira sequência e a segunda sequência.

[00188] Além disso, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de transmissão executa codificação tal que os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas depois de decodificação até exibição. Assim, por exemplo, o lado de recepção pode evitar uma falha de buffer que poderia ocorrer na parte comutada da primeira sequência para a segunda sequência.

[00189] Além disso, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de transmissão insere informação indicando se ou não há uma mudança em uma taxa de quadro, isto é, informação de renovação temporal SEI (temporal_refresh_information SEI) nos dados de imagem codificados de cada imagem parada da transferência contínua de vídeo. Assim, por exemplo, o lado de recepção pode averiguar facilmente o ponto da mudança da primeira sequência para a segunda sequência.

[00190] Além disso, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de transmissão insere informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência, isto é, informação de descontinuidade temporal (temporal_discontinuity_information) em um pacote contendo a transferência contínua de vídeo, por exemplo, um pacote de PES. Assim, por exemplo, o lado de recepção pode averiguar facilmente a mudança da primeira sequência para a segunda sequência, informação de tempo, informação de descontinuidade de uma marca de tempo, e informação de contagem decrescente até a mudança.

[00191] Além disso, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de transmissão insere informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência, isto é, um descritor de parâmetro de vídeo (Video_parameter_descriptor) em uma camada de um recipiente, isto é, uma camada da transferência contínua de transporte TS. Assim, por exemplo, o lado de recepção pode averiguar facilmente a mudança da primeira sequência para a segunda sequência e a taxa de quadro mudada.

[00192] Além disso, no sistema de transmissão e recepção 10 mostrado na Figura 1, o lado de recepção decodifica os dados de imagem codificados de cada uma das imagens paradas da segunda sequência na temporização de decodificação dos dados de imagem codificados de cada uma das imagens paradas da primeira sequência antes da temporização de começo de exibição da primeira imagem parada da segunda sequência. Assim, por exemplo implementação na qual dois sinais de sincronização verticais assíncronos são gerados simultaneamente pode ser evitada.

2. Exemplo modificado

[00193] Na modalidade descrita acima, o exemplo no qual o lado de recepção pode garantir facilmente uma continuidade de exibição entre a primeira sequência e a segunda sequência é mostrado. Para este fim, o lado de transmissão executa codificação tal que a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência.

[00194] Aqui, o lado de recepção é considerado garantir facilmente uma continuidade de exibição entre a primeira sequência e a segunda sequência e ademais garantir facilmente continuidade em temporizações de decodificação da primeira sequência e da segunda sequência. Para este fim, o lado de transmissão executa codificação tal que a temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada à temporização obtida adicionando o intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência à temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência.

[00195] Figura 24 mostra um exemplo de controle de decodificador de referência hipotético (HRD) do codificador 102 nesse caso. Na Figura 24, descrições detalhadas de porções correspondendo àquelas da Figura 3 descrita acima são omitidas apropriadamente.

[00196] No exemplo ilustrado, a primeira sequência está composta de 4 imagens paradas, que são decodificados na ordem de a0, a1, a2 e a3 e exibidos na ordem de a0, a2, a3 e a1. Neste caso, dados de imagem decodificados de cada imagem parada são entrados ao buffer de dados descomprimidos (buffer de imagem parada decodificada ou dpb). Neste exemplo, o número de imagens paradas atrasadas depois que a primeira sequência é decodificada até que exibição disso seja começada está fixado a 2.

[00197] Cada uma das imagens paradas da primeira sequência é decodificada e exibida a uma temporização do sinal de sincronização vertical (Vsync) tendo um intervalo de tempo correspondendo a uma taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas a0, a1, a2 e a3 são decodificadas nas temporizações Ta(0), Ta(1), Ta(2) e Ta(3), e exibição das imagens paradas a0, a2, a3 e a1 é começada nas temporizações Ta(2), Ta(3), Ta(4) e Ta(5).

[00198] A segunda sequência está composta de 6 imagens paradas, que são decodificados na ordem de b0, b1, b2, b3, b4 e b5 e exibidos na ordem de b1, b2, b0, b4, b5 e b3. Neste caso, dados codificados de cada uma das imagens paradas decodificadas são entrados ao dpb. Neste exemplo, o número de imagens paradas atrasadas depois que a segunda sequência é decodificada até que exibição disso seja começado está fixado a 2, igual à primeira sequência. Por conseguinte, uma falha de buffer é evitada.

[00199] Como no exemplo da Figura 3, a temporização de fim de exibição da última imagem parada dos dados de imagem codificados da primeira sequência é fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada dos dados de imagem codificados da segunda sequência. Em outras palavras, a temporização Ta(6) é fixada à mesma temporização como a temporização Tb(2). Por conseguinte, uma continuidade de exibição entre a primeira sequência e a segunda sequência é assegurada.

[00200] Da temporização de começo de exibição (Tb(2)) da primeira imagem parada da segunda sequência, a sequência é decodificada e exibida a temporizações do sinal de sincronização vertical (Vsync) tendo um intervalo de tempo correspondendo à taxa de quadro (frequência de quadro) disso. Por exemplo, as imagens paradas b2, b3, b4 e b5 são decodificados nas temporizações Tb(2), Tb(3), Tb(4) e Tb(5), e exibição das imagens paradas b1, b2, b0, b4, b5 e b3 é começada nas temporizações Tb(2), Tb(3), Tb(4), Tb(5), Tb(6) e Tb(7).

[00201] Além disso, antes da temporização de começo de exibição (Tb(2)) da primeira imagem do mesmo, a segunda sequência é decodificada nas temporizações do sinal de sincronização vertical (Vsync) tendo um intervalo de tempo correspondendo à primeira taxa de quadro (frequência de quadro). Neste exemplo, as imagens paradas b0 e b1 são decodificados a Tb(0) e Tb(1), sob a colocação de Tb(0) = Ta(4) e Tb(1) = Ta(5).

[00202] Neste caso, a temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência é fixada na temporização obtida adicionando o intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência na temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência. Em outras palavras, a temporização Ta(4) é fixada à mesma temporização como a temporização Tb(0). Portanto, "Initial_cpb_removal_delay B" é fixado de forma que a temporização Tb(0) seja fixada à mesma temporização como a temporização Ta(4).

[00203] Executando codificação tal que a temporização Tb(0) seja fixada à mesma temporização como a temporização Ta(4), o lado de recepção garante facilmente continuidade nas temporizações de decodificação da primeira sequência e da segunda sequência, e leitura tardia da primeira imagem parada da segunda sequência é evitada. Neste caso, o lado de recepção não necessita um processo de ajustar as temporizações de decodificação das imagens paradas da segunda sequência posicionados antes da temporização de começo de exibição da primeira imagem parada da segunda sequência como descrito nas Figuras 22 e 23 acima. Portanto, um fardo do lado de recepção também pode ser reduzido.

2. Exemplo modificado

[00204] Deveria ser notado que, embora a modalidade descrita acima mostre o sistema de transmissão e recepção 10 constituído pelo dispositivo de transmissão 100 e o dispositivo de recepção 200, uma configuração de um sistema de transmissão e recepção ao qual a tecnologia presente pode ser aplicada não está limitada a isso. Por exemplo, o dispositivo de recepção 200 pode ser configurado, por exemplo, como um conversor de TV conectado com uma interface digital tal como Interface de Multimídia de Alta Definição (HDMI) e um monitor, ou similar. Note que "HDMI" é uma marca registrada.

[00205] Além disso, a modalidade descrita acima mostra o exemplo no qual o recipiente é uma transferência contínua de transporte (MPEG-2 TS). A tecnologia presente, porém, também pode ser aplicada semelhantemente a um sistema configurado para distribuir dados a um terminal de recepção usando uma rede tal como a Internet. Em distribuição na Internet, há muitos casos de distribuição usando um recipiente em MP4 ou outros formatos. Em outras palavras, como recipientes, vários formatos incluindo transferências contínuas de transporte (MPEG-2 TS) empregados em padrões de difusão digital, MP4 usado em distribuição de Internet, e similar são equivalentes a isso.

[00206] Adicionalmente, a tecnologia presente também pode ser configurada como abaixo. (1) Um dispositivo de codificação incluindo: uma unidade de codificação de imagem configurada para gerar dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência, em que a unidade de codificação de imagem executa codificação de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência. (2) O dispositivo de codificação de acordo com (1), em que a unidade de codificação de imagem executa codificação de um modo que os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas de decodificação até exibição. (3) O dispositivo de codificação de acordo com (1) ou (2), em que a unidade de codificação de imagem executa codificação de um modo que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada a uma temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência a uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência. (4) Um dispositivo de transmissão incluindo: uma unidade de codificação de imagem configurada para gerar dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de transmissão configurada para transmitir um recipiente em um formato predeterminado que inclui os dados de vídeo gerados, em que a unidade de codificação de imagem executa codificação de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência. (5) O dispositivo de transmissão de acordo com (4), ademais incluindo: uma unidade de inserção de informação configurada para inserir informação indicando se ou não há uma mudança em uma taxa de quadro em cada pedaço de dados de imagem codificados de cada imagem parada dos dados de vídeo. (6) O dispositivo de transmissão de acordo com (5), em que, quando a informação indica que há uma mudança na taxa de quadro, informação indicando um valor de uma taxa de quadro mudada é adicionada à informação. (7) O dispositivo de transmissão de acordo com qualquer de (4) a (6), ademais incluindo: uma unidade de inserção de informação configurada para inserir informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência em um pacote contendo os dados de vídeo. (8) O dispositivo de transmissão de acordo com (7), em que a informação de notificação inclui informação indicando se ou não há uma descontinuidade em uma mudança de um valor de um tempo de decodificação. (9) O dispositivo de transmissão de acordo com (8), em que, quando a informação indica que há uma descontinuidade, um valor de contagem decrescente do número de imagens paradas até que a descontinuidade ocorra é adicionado à informação. (10) O dispositivo de transmissão de acordo com qualquer de (7) a (9), em que a informação de notificação inclui informação indicando se ou não um intervalo de tempo de exibição de cada imagem parada está trocado. (11) O dispositivo de transmissão de acordo com (10), em que, quando a informação indica troca, um valor de contagem decrescente do número de imagens paradas até a troca é adicionado à informação. (12) O dispositivo de transmissão de acordo com qualquer de (7) a (11), em que a unidade de inserção de informação insere a informação de notificação em um campo de extensão de um pacote de PES que inclui dados de imagem codificados de cada imagem parada em uma carga útil. (13) O dispositivo de transmissão de acordo com qualquer de (4) a (12), ademais incluindo: uma unidade de inserção de informação configurada para inserir informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência em uma camada do recipiente. (14) O dispositivo de transmissão de acordo com (13), em que a informação de notificação inclui informação sobre uma taxa de imagem parada da primeira sequência e uma taxa de imagem parada da segunda sequência. (15) Um dispositivo de recepção incluindo: uma unidade de recepção configurada para receber dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de processamento configurada para processar os dados de vídeo recebidos, em que os dados de vídeo são codificados de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência. (16) O dispositivo de recepção de acordo com (15), em que os dados de vídeo são codificados de um modo que os dados de imagem codificados da primeira sequência e os dados de imagem codificados da segunda sequência tenham o mesmo número de imagens paradas atrasadas de decodificação até exibição. (17) O dispositivo de recepção de acordo com (15) ou (16), em que os dados de vídeo são codificados de um modo que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência seja fixada a uma temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência a uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência. (18) Um dispositivo de recepção incluindo: uma unidade de recepção configurada para receber um recipiente em um formato predeterminado que inclui dados de vídeo tendo uma parte comutada de dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência, em que os dados de vídeo são codificados de um modo que uma temporização de fim de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência seja fixada a uma mesma temporização como uma temporização de começo de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência, e em que o dispositivo de recepção ademais inclui uma unidade de decodificação de imagem configurada para decodificar os dados de vídeo incluídos no recipiente recebido para obter dados de imagem com uma continuidade de exibição entre a primeira sequência e a segunda sequência mantida. (19) O dispositivo de recepção de acordo com (18), em que, antes da mesma temporização, a unidade de decodificação de imagem decodifica dados de imagem codificados de cada imagem parada da segunda sequência a uma temporização sincronizada com uma temporização de decodificação de dados de imagem codificados de cada imagem parada da primeira sequência. (20) O dispositivo de recepção de acordo com (18) ou (19), em que informação notificando de uma mudança dos dados de imagem codificados da primeira sequência para os dados de imagem codificados da segunda sequência é inserida em pelo menos um de um pacote contendo os dados de vídeo e uma camada do recipiente, e em que um processo da unidade de decodificação de imagem é controlado baseado na informação de notificação.

[00207] Uma característica principal da tecnologia presente é que, quando dados de vídeo tendo uma parte comutada de taxa de quadro são distribuídos, um lado de recepção pode garantir facilmente uma continuidade de exibição entre uma primeira sequência e uma segunda sequência quando codificação é executada tal que a temporização de fim de exibição da última imagem parada de dados de imagem codificados da primeira sequência seja fixada à mesma temporização como a temporização de começo de exibição da primeira imagem parada de dados de imagem codificados da segunda sequência (veja Figura 3). Lista de Sinais de Referência 10 sistema de transmissão e recepção 100 dispositivo de transmissão 101 CPU 102 codificador 103 buffer de dados comprimidos (cpb) 104 multiplexador 105 unidade de transmissão 122 unidade de controle de atraso de buffer 123 unidade de colocação de HRD 124 unidade codificação de conjunto de parâmetro/SEI 125 unidade de codificação de fatia 126 unidade de empacotamento de NAL 142 unidade de codificação de seção 143 unidade de empacotamento de PES 144 unidade de empacotamento de transporte 200 dispositivo de recepção 201 CPU 202 unidade de recepção 203 desmultiplexador 204 buffer de dados comprimidos (cpb) 205 decodificador 206 buffer de dados descomprimidos (dpb) 207 unidade pós-processamento 208 unidade de geração de relógio 209 divisor de frequência 231 unidade de extração de campo de adaptação de TS 232 unidade de extração de informação de relógio 233 unidade de extração de carga útil de TS 234 unidade de extração de seção 235 unidade de extração de tabela de PSI/descritor 236 unidade de extração de pacote de PES 237 unidade de extração de cabeçote de PES 238 unidade de extração de marca de tempo 239 unidade de extração de informação de descontinuidade/contagem decrescente 240 unidade de extração de carga útil de PES 251 unidade de análise de pacote de NAL 252 unidade de decodificação

Claims

1. Dispositivo codificador, caracterizado pelo fato de que compreende: uma unidade de codificação de imagem configurada para gerar dados de vídeo tendo uma parte comutada a partir dos dados de imagem codificados de uma primeira sequência para dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência, em que a unidade de codificação de imagem realiza codificação de uma maneira que uma temporização final de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência são definidos para uma mesma temporização como uma temporização inicial de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência, um número de imagens atrasadas após a decodificação e início da exibição da primeira sequência é definido para o mesmo que um número de imagens atrasadas após a decodificação e início da exibição da segunda sequência.

2. Dispositivo codificador de acordo com a reivindicação 1, caracterizado pelo fato de que a unidade de codificação de imagem realiza codificação de uma maneira que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência são definidos em uma temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência a uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência.

3. Dispositivo transmissor (100), caracterizado pelo fato de que compreende: uma unidade de codificação de imagem configurada para gerar dados de vídeo tendo uma parte comutada a partir dos dados de imagem codificados de uma primeira sequência aos dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de transmissão (105) configurada para transmitir um recipiente em um formato predeterminado que inclui os dados de vídeo gerados, em que a unidade de codificação de imagem realiza codificação de uma maneira que uma temporização final de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência são definidos para uma mesma temporização como uma temporização inicial de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência, um número de imagens atrasadas após a decodificação e início da exibição da primeira sequência é definido como o mesmo que um número de imagens atrasadas após a decodificação e início da exibição da segunda sequência.

4. Dispositivo transmissor (100) de acordo com a reivindicação 3, caracterizado pelo fato de que compreende adicionalmente: uma unidade de inserção de informação configurada para inserir informação indicando se existe ou não uma mudança em uma taxa de quadro em cada peça dos dados de imagem codificados de cada imagem parada dos dados de vídeo.

5. Dispositivo transmissor (100) de acordo com a reivindicação 4, caracterizado pelo fato de que, quando a informação indica que existe uma mudança na taxa de quadro, informação indicando um valor de uma taxa de quadro mudada é adicionada à informação.

6. Dispositivo transmissor (100) de acordo com a reivindicação 3, caracterizado pelo fato de que compreende adicionalmente: uma unidade de inserção de informação configurada para inserir informação notificando sobre uma mudança a partir dos dados de imagem codificados da primeira sequência aos dados de imagem codificados da segunda sequência em um pacote contendo os dados de vídeo.

7. Dispositivo transmissor (100) de acordo com a reivindicação 6, caracterizado pelo fato de que a informação inserida inclui informação indicando se existe ou não uma descontinuidade em uma mudança de um valor de um tempo de decodificação.

8. Dispositivo transmissor (100) de acordo com a reivindicação 7, caracterizado pelo fato de que, quando a informação indica que existe uma descontinuidade, um valor de contagem regressiva de um número de imagens paradas até que a descontinuidade ocorra é adicionado à informação.

9. Dispositivo transmissor (100) de acordo com a reivindicação 6, caracterizado pelo fato de que a informação inserida inclui informação indicando se um intervalo de tempo de exibição de cada imagem parada é comutado ou não.

10. Dispositivo transmissor (100) de acordo com a reivindicação 9, caracterizado pelo fato de que, quando a informação indica comutação, um valor de contagem regressiva de um número de imagens paradas até a comutação é adicionado à informação.

11. Dispositivo transmissor (100) de acordo com a reivindicação 6, caracterizado pelo fato de que a unidade de inserção de informação insere a informação de notificação em um campo de extensão de um pacote que inclui dados de imagem codificados de cada imagem parada em uma carga.

12. Dispositivo transmissor (100) de acordo com a reivindicação 3, caracterizado pelo fato de que compreende adicionalmente: uma unidade de inserção de informação configurada para inserir informação notificando sobre uma mudança a partir dos dados de imagem codificados da primeira sequência aos dados de imagem codificados da segunda sequência em uma camada do recipiente.

13. Dispositivo transmissor (100) de acordo com a reivindicação 12, caracterizado pelo fato de que a informação inserida inclui informação em uma taxa de imagem parada da primeira sequência e uma taxa de imagem parada da segunda sequência.

14. Dispositivo receptor, caracterizado pelo fato de que compreende: uma unidade receptora configurada para receber dados de vídeo tendo uma parte comutada a partir dos dados de imagem codificados de uma primeira sequência aos dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência; e uma unidade de processamento configurada para processar os dados de vídeo recebidos, em que os dados de vídeo são codificados de uma maneira que uma temporização final de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência são definidos para uma mesma temporização como uma temporização inicial de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência, um número de imagens atrasadas após a decodificação e início da exibição da primeira sequência é definido para o mesmo que um número de imagens atrasadas após a decodificação e início da exibição da segunda sequência.

15. Dispositivo receptor de acordo com a reivindicação 14, caracterizado pelo fato de que os dados de vídeo são codificados de uma maneira que uma temporização de decodificação da primeira imagem parada dos dados de imagem codificados da segunda sequência são definidos em uma temporização obtida adicionando um intervalo de tempo de uma imagem parada dos dados de imagem codificados da primeira sequência para uma temporização de decodificação da última imagem parada dos dados de imagem codificados da primeira sequência.

16. Dispositivo receptor, caracterizado pelo fato de que compreende: uma unidade receptora configurada para receber um recipiente em um formato predeterminado que inclui dados de vídeo tendo uma parte comutada a partir dos dados de imagem codificados de uma primeira sequência aos dados de imagem codificados de uma segunda sequência tendo uma taxa de quadro diferente da primeira sequência, em que os dados de vídeo são codificados de uma maneira que uma temporização final de exibição de uma última imagem parada dos dados de imagem codificados da primeira sequência são definidos para uma mesma temporização como uma temporização inicial de exibição de uma primeira imagem parada dos dados de imagem codificados da segunda sequência, um número de imagens atrasadas após a decodificação e início da exibição da primeira sequência é definido para o mesmo que um número de imagens atrasadas após a decodificação e início da exibição da segunda sequência; e em que o dispositivo receptor inclui adicionalmente uma unidade decodificadora (252) de imagem configurada para decodificar os dados de vídeo incluídos no recipiente recebido para obter dados de imagem com uma continuidade de exibição entre a primeira sequência e a segunda sequência mantida.

17. Dispositivo receptor de acordo com a reivindicação 16, caracterizado pelo fato de que, antes da mesma temporização, a unidade decodificadora (252) de imagem decodifica dados de imagem codificados de cada imagem parada da segunda sequência em uma temporização sincronizada com uma temporização de decodificação dos dados de imagem codificados de cada imagem parada da primeira sequência.

18. Dispositivo receptor de acordo com a reivindicação 16, caracterizado pelo fato de que a notificação de informação de uma mudança a partir dos dados de imagem codificados da primeira sequência aos dados de imagem codificados da segunda sequência são inseridos em pelo menos um de um pacote contendo os dados de vídeo e uma camada do recipiente, e em que um processo de decodificação da unidade decodificadora (252) de imagem é controlado com base na informação de notificação da mudança.