BR112013013486B1 - Dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, mídia legível lida por computador e sinal de imagem tridimensional - Google Patents

Dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, mídia legível lida por computador e sinal de imagem tridimensional Download PDF

Info

Publication number
BR112013013486B1
BR112013013486B1 BR112013013486-0A BR112013013486A BR112013013486B1 BR 112013013486 B1 BR112013013486 B1 BR 112013013486B1 BR 112013013486 A BR112013013486 A BR 112013013486A BR 112013013486 B1 BR112013013486 B1 BR 112013013486B1
Authority
BR
Brazil
Prior art keywords
disparity
component
dimensional image
image signal
time
Prior art date
Application number
BR112013013486-0A
Other languages
English (en)
Other versions
BR112013013486A2 (pt
Inventor
Wiebe De Haan
Original Assignee
Koninklijke Philips N.V.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=45350446&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=BR112013013486(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Koninklijke Philips N.V. filed Critical Koninklijke Philips N.V.
Publication of BR112013013486A2 publication Critical patent/BR112013013486A2/pt
Publication of BR112013013486B1 publication Critical patent/BR112013013486B1/pt

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/293Generating mixed stereoscopic images; Generating mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, programa de computador, produto de programa de computador e sinal de imagem tridimensional. a presente invenção refere-se a um dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, o sinal de imagem tridimensional compreendendo dados de imagem de múltiplas vistas, o dispositivo de fonte em 3d compreendendo uma entrada para a reepção de dados de imagem; um gerador disposto para gerar o sinal de imagem tridimensional com base nos dados de imagem, o sinal de imagem tridimensional com base nos dados de imagem, o sinal de imagem tridimensional com base nos dados de imagem, o sinal de imagem tridimensional compreendendo um primeiro componente compreendendo imagens 2d múltiplas para o uso na visualização estereoscópica, um segundo componente compreendendo a sobreposição de dados e um terceiro componente definindo a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens 2d múltiplas. a nova informação de sinalização de disparidade em um terceiro componente adicional anula a informação de sinalização de disparidade em um terceiro componente.

Description

CAMPO DA INVENÇÃO
A invenção refere-se a um método de transferência de dados de imagem em três dimensões (3D), o método compreendendo, em um dispositivo de fonte em 3D, processar os dados da imagem da fonte para gerar um sinal de exibição em 3D, o sinal de exibição em 3D compreendendo estruturas de imagem, e saída de sinal de exibição em 3D; e, em um dispositivo alvo em 3D, extrair os dados de imagem em 3D e prover uma saída baseada no sinal de exibição em 3D.
A invenção ainda se refere ao dispositivo de fonte em 3D mencionado acima, o sinal de exibição em 3D e o dispositivo alvo em 3D.
A invenção refere-se ao campo de transferência de dados de imagem tridimensional (3D), em forma comprimida, tal como, por exemplo, para uma extensão para DVB dirigida em 3D, ou não comprimida através de uma interface digital de alta velocidade, por exemplo, HDMI.
HISTÓRICO DA INVENÇÃO
Vários esquemas para exibição de imagens em três dimensões (imagens estáticas ou em movimento) são conhecidos. Um esquema bem-conhecido, simultaneamente, exibe duas imagens que são codificadas para o olho esquerdo e o olho direito por meio de diferentes polarizações ópticas, ou cores (por exemplo, vermelho e verde) . Um espectador usa um par de óculos especiais que tem lentes na frente dos olhos esquerdo e direito. As lentes são dispostas para passar somente a imagem destinada para aquele olho, isto é, o olho esquerdo vê somente a imagem destinada para aquele olho. Outra técnica de exibição estereoscópica apresenta uma imagem destinada para o olho esquerdo, e uma imagem destinada para o olho direito. O usuário usa um par de óculos especiais que é perfilado em sincronia com as imagens exibidas, de tal maneira que o obturador é aberto durante o período em que a imagem do olho esquerdo é exibida, o obturador do olho direito é aberto durante o período em que a imagem do olho direito é exibida.
Técnicas de exibição autoestereoscópica retiram a necessidade de o espectador usar óculos especiais. Um esquema usa uma exibição de painel plano com múltiplos lados montados em lentes lenticulares oblíquas na frente dos elementos de exibição. Um exemplo deste tipo de exibição é descrito no documento W007/069195 A2.
Dispositivos para dar origem aos dados de vídeo em 2D são conhecidos, por exemplo, reprodutores de vídeo como reprodutores de DVD ou decodificadores (set top boxes) que provêm sinais de vídeo digitais. O dispositivo de fonte deve ser acoplado a um dispositivo de exibição como um conjunto de TV ou monitor. Dados de imagem são transferidos a partir do dispositivo de fonte através de uma interface apropriada, preferivelmente uma interface digital de alta velocidade como HDMI. Atualmente dispositivos em 3D intensificados, como reprodutores de Blu-ray em 3D, estão entrando no mercado. Para transferir os sinais de vídeo em 3D do dispositivo de fonte para o dispositivo de exibição, novos padrões de interface digital de alta taxa de dados estão sendo desenvolvidos, por exemplo, com base em e compatíveis com, o padrão HDMI existente. Transferir sinais de imagem digital em 2D para o dispositivo de exibição, normalmente envolve enviar os dados de pixel de vídeo estrutura por estrutura, cujas estruturas devem ser exibidas sequencialmente. Tais estruturas podem representear estruturas de vídeo de um sinal de vídeo progressivo (estruturas completas) ou podem representear estruturas de vídeo de um sinal de vídeo entrelaçado (com base no entrelaçamento de linha bem- conhecido, uma estrutura provendo as linhas ímpares da próxima estrutura provendo as linhas pares para serem exibidas sequencialmente).
Da mesma maneira a distribuição do conteúdo de 2D para usuários finais é conhecida a partir de DVB. Com a introdução no mercado dos dispositivos de Blu-ray em 3D, o conteúdo estereoscópico se tornou disponível e tem havido uma chamada para também permitir a distribuição deste conteúdo por outros meios tais como cabo, ou satélite. A fim de alojar, a indústria está estendendo a estrutura de DVB para permitir a distribuição do conteúdo em 3D sobre DVB.
O documento WO2008/115222 descreve um sistema para combinar texto com conteúdo de vídeo em 3D. Para inserção do texto em linha, a localização de legendas não é conhecida de antemão. 0 mapa da profundidade atual é processado para determinar um valor de profundidade máxima, que é usado para posicionar o texto na frente do vídeo. 0 processo pode ser repetido, de tal maneira que novos valores de profundidade máxima são determinados quando energia de processamento suficiente está disponível.
SUMÁRIO DA INVENÇÃO
A presente invenção busca prover uma maneira alternativa para distribuir dados de imagem tridimensionais (3D), de uma maneira não dirigida para a técnica anterior.
As reivindicações definem realizações da presente invenção. De acordo com a invenção um dispositivo de fonte em 3D é provido para emitir um sinal de imagem tridimensional, o sinal de imagem tridimensional compreendendo dados de imagens de múltiplas visões, o dispositivo de fonte em 3D compreendendo:- uma entrada para receber os dados de imagem;- um gerador disposto para gerar o sinal de imagem tridimensional com base nos dados de imagem, o sinal de imagem tridimensional compreendendo:- um primeiro componente compreendendo múltiplas imagens em 2D para uso em visão estereoscópica;um segundo componente compreendendo dados sobrepostos;- um terceiro componente definindo informações de sinalização de disparidade para uso em dados de imagens se sobrepondo sobre as respectivas das múltiplas imagens em 2D, o terceiro componente compreendendo um parâmetro definindo informações de disparidade tendo um perfil de disparidade que varia com o tempo para prover um preditor para indicar como uma disparidade de uma sobreposição é esperada mudar com o passar do tempo; eum terceiro componente adicional, em um tempo mais tarde do sinal de imagem tridimensional do que o terceiro componente, definindo novas informações de sinalização de disparidade para uso sobrepondo dados de imagem sobre as respectivas das múltiplas imagens em 2D, o terceiro componente adicional compreendendo um parâmetro adicional definindo novas informações de disparidade tendo um novo perfil de disparidade variando com o passar do tempo para prover um preditor adicional para indicar como uma disparidade de uma sobreposição é esperada mudar com o passar de tempo,
As novas informações de sinalização de disparidade no terceiro componente adicional, invalidando as informações de sinalização de disparidade no terceiro componente.
Também de acordo com a invenção, um dispositivo alvo em 3D é provido para receber um sinal de imagem tridimensional, o sinal de imagem tridimensional compreendendo dados de imagem de múltiplas vistas, o dispositivo alvo em 3D compreendendo:um receptor para receber o sinal de imagem 5 tridimensional;- um demultiplexador para demultiplexar o sinal de imagem em três dimensões em pelo menos:um primeiro componente compreendendo múltiplas imagens em 2D para uso em visualização estereoscópica; um segundo componente compreendendo dadossobrepostos;um terceiro componente definindo informações de sinalização de disparidade para uso em dados de imagens sobrepostas sobre as respectivas das múltiplas imagens em 2D, 15 o terceiro componente, compreendendo um parâmetro definindo informações de disparidade tendo um perfil de disparidade que varia com o tempo para prover uma previsão para indicar como uma disparidade de uma sobreposição é esperada mudar com o passar do tempo; eum terceiro componente adicional, em um tempo maistarde no sinal de imagem tridimensional do que o terceiro componente, definindo novas informações de sinalização de disparidade para uso na sobreposição de dados de imagens sobre as respectivas das múltiplas imagens em 2D, o terceiro 25 componente adicional compreendendo um parâmetro adicional definindo novas informações de disparidade tendo um novo perfil de disparidade que varia com o tempo para prover um preditor adicional para indicar como a disparidade de uma sobreposição é esperada mudar com o passar do tempo,as novas informações de sinalização de disparidadeno terceiro componente adicional invalidam as informações de sinalização de disparidade no terceiro componente; e- um gerador para gerar respectivas imagens em 2D para uso na visualização estereoscópica, em que os dados sobrepostos são sobrepostos como definido dentro das informações de sinalização de disparidade.
É observado que o primeiro componente pode compreender pares estéreos.
É uma percepção dos inventores que existe uma substancial diferença entre conteúdo que é pré-autorizado, tal como discos Blu-ray em 3D, e conteúdo que é tipicamente transmitido sobre DVB; conteúdo transmitido sobre DVB muitas vezes inclui conteúdo ao vivo; tal como noticias, joqos esportivos, ou conteúdo para o qual não é financeiramente atraente justificar o custo de extensa autorização como para o conteúdo de discos Blu-ray em 3D.
Certas tarefas de autorização que não são dificeis para conteúdo ao vivo em 2D são mais dificeis de implementar para conteúdo ao vivo em 3D. Um exemplo de tal tarefa de autorização é a geração de legendas para metragem em tempo real. Enquanto que em 2D é possivel inserir legendas na realidade virtual, por geração de legenda manual ou assistida por computador, existe um fator de complicação pelo fato de que a tarefa de legendar o conteúdo em 3D provê desafios adicionais. No terceiro componente, as informações de sinalização de disparidade provêm um preditor para indicar como uma disparidade de uma sobreposição é esperada mudar com o passar do tempo. No terceiro componente adicional, o preditor adicional para indicar como uma disparidade de uma sobreposição é esperada mudar com o passar do tempo, invalida o preditor anterior.
A fim de reduzir aborrecimentos com os espectadores, as legendas necessitam ser posicionados de uma maneira de modo a não comprometer a impressão de profundidade provida pelos dados de imagem em três dimensões (3D) . Um fator de complicação adicional é o fato de que uma vez que um dispositivo alvo em 3D recebeu os dados de imagem tridimensional (3D) e gerou dados de emissão para exibir para um usuário final, o dispositivo por sua vez pode também necessita sobrepor gráficos adicionais, na forma de Exibição- na-Tela (OSD) para interface de seu usuário.
A fim de abordar essas questões a presente invenção propõe um método de gerar um sinal de imagem tridimensional, o sinal de imagem tridimensional compreendendo um primeiro componente na forma de dados de imagem de múltiplas vistas, um segundo componente representando dados para superposicionar os dados de imagem de múltiplas vistas e um terceiro componente na forma de metadados sinalizando informações de disparidade, as informações de sinalização de disparidade provendo um preditor para uma (sub) região da imagem indicando como a disparidade nesta região é esperada mudar com o passar do tempo.
Preferivelmente o preditor é um preditor único. Usando este preditor é possivel para um dispositivo alvo em 3D apropriadamente sobrepor a legenda e/ou informações gráficas, por apropriadamente deslocar a respectiva legenda e/ou informações gráficas desta maneira. Será claro para aqueles técnicos no assunto que o deslocamento dos gráficos em tal (sub)região é preferivelmente espalhado sobre vistas adjacentes; por exemplo, no caso de pares estéreos o deslocamento dos gráficos é preferivelmente distribuído igualmente entre a imagem da esquerda e a da direita.
Usando o preditor é possivel prover uma variação mais gradual da disparidade entre momentos diferentes no tempo. Além do mais, quando a revisão prova ser inexata, o que pode acontecer ao codificar a metragem viva, é possivel sinalizar um valor corretivo sem introduzir muita sobrecarga.
Preferivelmente as informações de sinalização de disparidade também provêm uma indicação do valor atual da disparidade para a região da imagem de maneira a melhorar a facilidade de acessar o fluxo em um ponto aleatório no tempo.
Em uma realização as informações de sinalização de disparidade definem um primeiro valor de disparidade para uma primeira apresentação de data e hora, e um coeficiente indicando a variação do valor de disparidade com o passar do tempo. Esse coeficiente pode ser especificado na variação de pixels ou frações de pixel por estrutura, ou alternativamente com base em um relógio de sistema disponível em ambas, a fonte de 3D e o dispositivo alvo em 3D.
Opcionalmente, o parâmetro definindo o perfil de disparidade de variação do tempo é o tempo.
Opcionalmente, o terceiro componente compreende informação definindo pelo menos dois valores de disparidade. Além disso, o terceiro componente pode definir um intervalo de tempo para uma transição de um primeiro dos pelo menos dois valores de disparidade para um segundo dos pelo menos dois valores de disparidade.
Em outra realização a informação de sinalização de disparidade define um primeiro valor de disparidade para um primeiro tempo e hora de apresentação e um segundo valor de disparidade para um segundo tempo e hora de apresentação. Esta informação também provê um dispositivo alvo em 3D com a possibilidade de determinar um valor de disparidade para exibição de informações de legenda/ gráficas. O uso de dois pontos totalmente definidos provê uma característica de segurança pelo fato de que, se uma unidade de sinalização for perdida na transmissão ou de outra maneira, a variação excessiva em disparidade pode ser evitada.
Em um refinamento adicional das informações de sinalização de disparidade o preditor pode ainda incluir um perfil de disparidade, selecionado de um conjunto de perfis predefinido, dessa maneira possibilitando apuração precisa da sinalização de disparidade. O último permite mais variações graduais, que podem ser implementadas quando o conteúdo passa através de um atraso do tempo antes de ser legendado. Opcionalmente, o terceiro componente compreende um parâmetro selecionando um dos perfis de transição de disparidade predefinidos. Opcionalmente, o perfil de transição de disparidade predefinido selecionado é parametrizado por, pelo menos, um parâmetro e o segundo componente compreende adicionalmente um parâmetro para uso definindo o perfil de disparidade que varia com o tempo.
Como será claro para os técnicos no assunto, o método de gerar um sinal tridimensional abrangendo, tem uma contrapartida na forma de um método de receber o sinal tridimensional compreendendo a informação de disparidade sinalizando metadados.
O método de receber o sinal de imagem tridimensional compreende uma etapa de utilizar o uso do terceiro componente no sinal de imagem tridimensional para superpor os dados superpostos compreendidos no segundo componente no sinal de imagem tridimensional, a partir do primeiro componente nas regiões projetadas com os valores de disparidade em linha com o componente de sinalização de disparidade.
A invenção ainda se refere a um dispositivo de fonte em 3D compreendendo: um receptor para receber dados de imagens em múltiplas vistas, um gerador para gerar um sinal de imagem tridimensional compreendendo: um primeiro componente na forma de dados de imagem de múltiplas vistas, um segundo componente representando dados para sobreposição de dados de imagem de múltiplas vistas, e um terceiro componente na forma de metadados sinalizando informações de disparidade, as informações de sinalização de disparidade provendo um único preditor para uma (sub) região da imagem indicando como a disparidade nesta região é esperada mudar no passar do tempo.
A invenção ainda se refere a um dispositivo alvo em 3D para receber o sinal tridimensional, de acordo com a invenção, compreendendo um receptor para receber o sinal tridimensional de acordo com a invenção, e um gerador de sobreposição disposto para sobrepor os dados sobrepostos compreendendo no segundo componente sobre as respectivas imagens compreendidas no primeiro componente, nas regiões projetadas como especificado nas informações de sinalização de disparidade, com as válvulas de disparidade em linha com o componente de sinalização de disparidade.
A invenção ainda se refere ao sinal de imagem tridimensional de acordo com a invenção.
A invenção ainda se refere ao software para implementar um método para gerar ou receber o sinal tridimensional de acordo com a invenção.
A invenção ainda se refere a um produto de programa de computador compreendendo instruções, que quando executadas em um computador implementam um método para gerar ou receber o sinal tridimensional de acordo com a invenção.
Embora o acima exposto tenha sido descrito com referência à transmissão de um sinal de video em 3D sobre DVB (Transmissão de Video Digital), será percebido que a invenção pode também ser aplicada dentro do contexto de outros esquemas de transmissão tais como ATSC (Comitê de Sistemas de Televisão Avançados). Da mesma maneira embora os exemplos mencionados se refiram a DVB, que inclui dados de video comprimidos, observa-se que a presente invenção é igualmente aplicável dentro do contexto de interfaces de dispositivos fisicos, tais como HDMI (Interface de Multimídia de Alta Definição) ou porta de exibição.
Em vista do acima exposto, é possivel, desse modo, que a presente invenção seja usada primeiro na interface em 3D-DVB, em que um dispositivo de fonte em 3D, na forma do transmissor, envia um primeiro sinal de imagem tridimensional, de acordo com a invenção, para um dispositivo alvo em 3D na forma de um decodif icador ("Set Top Box" - STB) . O STB pode depois, por exemplo, sobrepor um OSD sobre um sinal de chegada e pode com base no mesmo gerar um segundo sinal de imagem tridimensional, de acordo com a invenção e enviar esse sobre a interface HDMI, desse modo o STB agora atua como um dispositivo de fonte em 3D para um conjunto de televisão em 3D.
BREVE DESCRIÇÃO DOS DESENHOS
Realizações da invenção serão descritas, a titulo de exemplo somente, com referência aos desenhos anexos em que:
A figura IA, ilustra alguns dos conceitos usados ao longo do pedido, quando se referindo aos gráficos sobrepostos, incluindo regiões, sub-regiões e objetos,
A figura 1B, ilustra como os conjuntos de disparidades para uma região podem ser usados para gerar uma imagem da esquerda e da direita, respectivamente, de um par estéreo,
A figura 2 mostra o mecanismo da técnica anterior para definir disparidade para uma sobreposição,
A figura 3A, mostra como, em uma realização de acordo com a invenção, os valores de disparidade para uma sobreposição podem ser definidos,
A figura 3B, mostra como em uma realização alternativa, de acordo com a invenção, os valores de disparidade para uma sobreposição podem ser definidos,
A figura 3C, ilustra uma vantagem da presente invenção sobre a técnica anterior,
A figura 4 mostra um diagrama de bloco de um dispositivo de fonte em 3D, de acordo com a presente invenção,
A figura 5 mostra um diagrama de bloco de um dispositivo alvo em 3D, de acordo com a presente invenção,
A figura 6 mostra um sistema empregando um dispositivo de fonte em 3D e um dispositivo de baixar em 3D, de acordo com a presente invenção.
DESCRIÇÃO DAS REALIZAÇÕES PREFERIDAS
A presente invenção provê uma maneira alternativa de distribuir dados de imagem tridimensionais (3D), de uma maneira não dirigida pela técnica anterior. A presente invenção visa abordar uma distribuição de sinal de imagens tridimensionais e pode ser usada para conteúdo ao vivo como também gravados igualmente.
Ao contrário da técnica anterior, a presente invenção soluciona questões relacionadas à legendagem em tempo real. É uma percepção dos inventores que existe uma diferença substancial entre conteúdo que é pré-autorizado tal como para discos Blu-ray em 3D e conteúdo que é tipicamente transmitido sobre DVB; transmissão de conteúdo sobre DVB muitas vezes inclui conteúdos ao vivo; tais como noticias, jogos esportivos ou conteúdo para os quais não há tempo de realizar extensa autorização.
Com referência à Figura IA, a Figura 1A ilustra alguns dos conceitos ditos ao longo deste pedido quando se referindo aos gráficos sobrepostos. Dentro do contexto da presente invenção, quando se referindo à informação requerida para criar uma sobreposição para uma imagem de múltiplas vistas, esta informação é indicada como uma definição de página. Aqui a definição de página será descrita usando uma imagem de referência 400 que corresponde à área de exibição de um dispositivo de exibição, por exemplo, para um display estéreo em tempo sequencial esta área reflete a matriz de pixels do dispositivo de exibição.
A definição de página inclui, por exemplo, definições de regiões, estas definições de regiões definem regiões 405 dentro da referência da imagem 400, aqui as áreas retangulares em que gráficos podem ser sobrepostos. Além disso, estas definições de página de exemplos também incluem definições de objetos, que definem objetos 410, que podem ser sobrepostos dentro das regiões 410.
Embora o exemplo objeto 410 mostre a palavra "Texto" observa-se que tal definição de objeto pode ser uma de muitos objetos. Por exemplo, um objeto poderá ser definido como qualquer uma combinação desses listados abaixo:• uma série de textos• uma série de textos e seleção de fonte, opcionalmente com atributos adicionais definindo, por exemplo, o estilo da face, tamanho, itálico, negrito, que são conhecidos das faces em 2D convencionais. Características adicionais podem ser providas que fornecem uma série de textos com atributos de profundidade, tal como, por exemplo, um valor de profundidade de fonte, e/ou através da seleção de um estilo de fonte em relevo.• gráficos de mapas de bits, opcionalmente também tendo certa profundidade, e• gráficos de mapas de bits animados, novamente opcionalmente também tendo certa profundidade.
O exemplo adicional mostra a definição das duas chamadas sub-regiões 415, localizadas dentro de uma única região 405, e demarcadas pelas linhas pontilhadas.
A fim de apropriadamente sobrepor o objeto 410 na região 405, uma definição adicional é requerida, a definição de sinalização de disparidades, a definição de sinalização de disparidades pode ser provida na série em forma de um segmento de sinalização de disparidade.
Em sua forma mais simples o segmento de sinalização de disparidade, provido pela presente invenção, define um valor de disparidade no nivel de página. Como um resultado, por exemplo, no caso de um display estéreo, todas as 5 informações providas nas regiões sobrepostas serão deslocadas pela mesma extensão, ao gerar as imagens de esquerda e de direita.
A vantagem de usar um esquema em nivel de página é que os dispositivos, tendo funcionalidade de sobreposição, 10 podem ser mantidos relativamente simples.
Em um esquema mais avançado, a definição de sinalização de disparidade provê um valor de disparidade para as regiões e/ou as sub-regiões. Dessa maneira, sobreposições mais avançadas podem ser realizadas. Considere, por exemplo, 15 uma situação em que legendas necessitam ser providas para um diálogo em que as duas pessoas tendo o diálogo estão localizadas em posições diferentes, uma à esquerda próximo à câmera, uma à direita mais distante da câmera. O esquema de sinalização de disparidade mais avançado pode também permitir 20 este esquema mais complexo de sinalização de disparidade também permitir esse esquema de legendagem mais complexo.
Ao sobrepor gráficos tendo certa profundidade, o deslocamento das respectivas partes dos gráficos terá que ser adaptado com base em sua profundidade, entretanto isto será 25 claro para aqueles técnicos no assunto.
A Figura 1B mostra como a sinalização de disparidades, dentro de um sinal de imagem em 3D, pode ser usada para gerar, nesse caso, uma imagem da esquerda (450) e uma imagem da direita (460) . A imagem da esquerda 450 e a 30 imagem da direita 460 são baseadas na definição de página como ilustrado na figura IA. Nesse exemplo somente a região 405 compreendendo o objeto 410 é dada um valor de disparidade não zero. Consequentemente, quando gerando uma imagem da esquerda 450, neste exemplo, o objeto 410 é deslocado para a esquerda definido pelo valor de disparidade dividido por 2, e o objeto 410 é exibido na direção da direita, quando gerando a imagem da direita 450 através do valor de disparidade dividido por 2.
Será claro para a pessoa técnica no assunto que a escolha para codificar o valor de disparidade como a soma dos deslocamentos, para a imagem da esquerda e para a imagem da direita, é arbitrário e pode facilmente ser substituído por outra codificação.
Embora possa parecer direto prover uma definição de página para gráficos sobrepostos, o processo real de geração de uma definição de página é complicado pelo fato de que, por exemplo, legendas ou sobreposições não necessitam estar em sincronização com informações providas na metragem subjacente sendo sobreposta.
Por exemplo, considere uma situação em que uma pessoa particular é entrevistada em um evento ao vivó. Em certo momento o entrevistador encerra a entrevista e diz a última sentença de seu diálogo. Nesse ponto, o diretor corta para outra câmera. Entretanto, a fim do espectador ler as legendas, as legendas serão sobrepostas durante a nova cena de corte.
A fim de tratar este problema, um esquema da técnica anterior propõe ter um posicionamento das sobreposições. A Figura 2 ilustra o processo da técnica anterior. Considere, por exemplo, a situação em que a sinalização de disparidade ocorre no nivel de página. A definição de página define que no tempo t0, o valor de disparidade usado deverá ser d0, no tempo tl o valor de disparidade usado deverá ser dl, no tempo t2, o valor de disparidade usado é d2, etc. A fim de possibilitar um dispositivo alvo em 3D apropriadamente usar a informação de disparidade, a informação será enviada nos dados de imagem tridimensionais, algumas vezes antes que ela necessite ser usada, tal como no momento que deve ser usada, isto é, o par (t0, d0) terá que ser recebido pelo dispositivo alvo em 3D antes da estampa de apresentação do tempo correspondente com tl. Em outras palavras, a definição da página inteira, para aquela estampa, do tempo de apresentação tem de estar completa antes do tempo e hora da apresentação.
É uma percepção ("insight") dos inventores da presente invenção, que embora essa abordagem particular permita adaptação de, por exemplo, disparidade de legendas nas mudanças de cena, as mudanças em valores de disparidades serão mais grosseiras, como evidenciado pela etapa como mudanças em disparidade.
A fim de solucionar essa questão, os inventores delinearam uma abordagem alternativa, em que as informações de sinalização de disparidade compreendem um preditor para uma (sub) região da imagem, indicando como a disparidade nesta região é esperada mudar com o passar do tempo.
Um exemplo desse esquema é provido na figura 3A. Considere novamente a situação em que o controle de disparidade ocorre no nivel de página. Em certo momento no tempo TA, uma primeira indicação de tempo t0 é provida e um valor de disparidade associado d0. A primeira indicação de tempo refere-se a um tempo dentro do futuro próximo perto do momento atual em tempo. Adicionalmente, uma segunda indicação de tempo tl e um segundo valor de disparidade associado são providos dl.
Em um tempo mais tarde TB, as informações (tl, dl) e (t2, d2) são recebidas. Além do mais, em ainda um tempo mais tarde TC, as informações (t3, d3) e (t4, d4) são recebidas. Provendo nestas informações atualizadas o valor de atual e o próximo da disparidade, o dispositivo alvo em 3D recebendo o sinal de imagem tridimensional, pode interpolar entre esses dois momentos no tempo, desta maneira possibilitando uma interpolação linear como indicado na figura 3A.
Um esquema alternativo é provido na figura 3B, aqui efetivamente a mesma informação é provida como foi feito com referência à figura 3B, mas o formato da informação de sinalização de disparidade é diferente. Aqui, no tempo TA, três valores são providos; (t0, d0) como descrito aqui acima e c0, c0 definindo a variação de disparidade com o passar do tempo.
Deve ser notado que ambos os exemplos descritos acima com referência às figuras 3A e 3B incluem dados redundantes em que um dispositivo alvo em 3D que analisa um sinal de imagem tridimensional de entrada recebe informações redundantes; em principio todos exceto o primeiro par de dados (t0, d0) são sinalizados duas vezes. A rigor, isto não é necessário visto que um dispositivo alvo em 3D é capaz de rastrear estes valores com base nos dados recebidos.
No entanto, a fim de criar um sistema mais robusto e de encurtar o tempo necessário para acessar apropriadamente o teor pode ser benéfico algumas vezes repetir os dados.
Uma vantagem adicional da presente invenção é ilustrada na figura 3C. Considere uma vez mais aquela situação em que a sinalização de disparidade está no nivel da página. Considere, por exemplo, a situação em que um sinal de imagem tridimensional é gerado para um evento ao vivo. Em certo momento no tempo TA, antes da indicação de primeira vez t0, a disparidade no nivel de página é ajustada em d0 (t0, d) . Em vista do fato de que há uma taxa moderada de mudança na cena, espera-se que, em um momento adicional no tempo, a indicação de segunda vez tl, a disparidade no nivel de página seja dl (tl, dl). Ambos os pares são providos no segmento de sinalização de disparidade.
No entanto, no momento t0' entre t0 e tl, como um resultado de uma mudança na cena, o preditor anterior do nivel de disparidade (tl, dl) parece ser errôneo. Consequentemente, a presente invenção propõe "anular" a previsão anterior e enviar nova informação de sinalização de disparidade, a nova informação de sinalização de disparidade anulando a informação enviada anteriormente.
Da maneira acima, a presente invenção permite que previsões enviadas anteriormente sejam anuladas por novas previsões. É ainda notado que, embora no cenário acima, (t0, d0' ) está na linha entre (t0, d0) e (tl, dl) . No entanto, isto não é necessário. De fato, se a situação exigir, é possivel também inserir um salto de disparidade, embora isto deva ser feito com moderação visto que será visivel. É ainda notado que a nova previsão (tl, dl' ) neste exemplo coincide com o caso da segunda vez dl, no entanto este não precisa ser sempre o caso.
No que se refere à definição de instâncias no tempo, nota-se que pode ser possivel especificar momentos no tempo com base, por exemplo, em um relógio que está disponível em um dispositivo alvo em 3D, tal como em incrementos a 90 kHz, no entanto, também pode ter base nos números do quadro, pelo contrário. A resolução provida pelos números de quadro é suficiente para prover apropriada sinalização de disparidade.
Como descrito aqui acima, a informação de sinalização de disparidade uma vez determinada pode precisar ser segmentos de dados em pacotes para a inclusão em um sinal de imagem tridimensional. A tabela 1 provê uma descrição exemplar de um segmento de sinalização de disparidade. A tabela 1 mostra claramente que o uso da disparidade no nivel de página atualiza e/ou a disparidade da (sub) região atualiza. Como descrito acima, é possivel que dispositivos, que não suportam as atualizações da disparidade de (sub) região, ignorem estes campos e apenas suportem a disparidade no nivel de página. A disparidade no nivel de página aqui é provida no campo "page_default_disparity".
Nota-se que o segmento de sinalização de disparidade não define regiões ou objetos, mas principalmente foca na sinalização da disparidade. As sub-regiões, no entanto, podem ser definidas neste segmento a fim de permitir retrocompatibilidade com DVB.
A tabela 1 mostra que podem existir múltiplas sub- regiões disjuntas dentro de cada região. Se este for o caso, o valor de subregion_id é diferente de zero.
A subregion_disparity (com parte inteira e fracionai) se aplica à região total se a subregion_id =0. De outra maneira, existem múltiplas sub-regiões (com ID diferente maior do que zero) e para cada sub-região a disparidade é dada.
O loop da região contém toda a informação de disparidade por região e sub-região (se aplicável) que é diferente da disparidade padrão da página.
A informação de disparidade se torna aplicável no momento determinado pela apresentação do selo de tempo (PTS) suprido com o pacote PES que contém o segmento de sinalização de disparidade.
Aqui é proposto adicionar a cada valor de disparidade nos segmentos de sinalização de disparidade, um segundo (diferente) valor e um valor de período de tempo indicando quando (por exemplo, após quantos quadros) se supõe que o segundo valor seja "alcançado". Depende da implementação do dispositivo alvo em 3D calcular os valores intermediários apropriados. A implementação também pode optar por usar precisão subpixel para este ou não. Uma nova versão do segmento de sinalização de disparidade pode ser enviada para o decodificador com um PTS indicando quando ela se torna válida para possivelmente anular o estado de corrente (intermediário) dos valores de disparidade. Se a disparidade 5 for conhecida anteriormente, as atualizações podem ser sincronizadas até o momento em que a atualização anterior alcançou seu valor final. Para transmissões ao vivo, as atualizações podem ser enviadas em intervalos regulares (por exemplo, uma vez por segundo) ou elas podem ser enviadas 10 antes do fim do intervalo para corrigir a direção de corrente.
As tabelas 2 e 3 mostram uma sintaxe possivel para atualizações page_disparity_updates e subregion_disparity updates respectivamente.Tabela 1, Sintaxe do segmento de sinalização de disparidade.
Figure img0001
Figure img0002
Tabela 2, Sintaxe page_disparity_update.
Figure img0003
Na tabela 2, o intervalo pode ser especificado, por exemplo, no número de quadros até que end- page_default_disparity seja alcançado e a end_page_default_disparity corresponda com o valor de disparidade no final do intervalo.Tabela 3, sintaxe de subregion_disparity_update.
Figure img0004
Na tabela 3, o intervalo corresponde ao número de quadros até a end_subregion_default_disparity. E os valores end_subregion_ disparity_integer_part e end_subregion_ disparity_fractional_part representam a disparidade no final do intervalo com precisão de subpixel.
Embora a formatação dos dados no sinal de imagem tridimensional seja importante, a variação pode ser prevista como ilustrado abaixo pelas tabelas 4, 5 e 6,respectivamente.Tabela 4, sintaxe do segmento de sinalização de disparidade alternativa.
Figure img0005
Figure img0006
Tabela 5, sintaxe page_disparity_update alternativa.
Figure img0007
Tabela 6, sintaxe subregion_disparity_update alternativa.
Figure img0008
Com referência agora à figura 4, a figura 4 mostra um diagrama em blocos de um dispositivo de fonte em 3D 50 de acordo com a presente invenção. O dispositivo de fonte em 3D compreende três unidades funcionais; um receptor RCV disposto para receber dados de imagem de múltiplas vistas 51, uma 10 unidade de inspeção INSP para estabelecer informação profunda e uma unidade de geração GEN para a geração do sinal de imagem tridimensional. A fonte dos dados de imagem de múltiplas vistas 51 pode ser, mas. não precisa ser uma alimentação de câmera ao vivo. A presente invenção também pode ser usada com teor que se origina de uma linha de atraso do video para uma alimentação ao vivo ou um dispositivo de armazenamento convencional para aquela questão. Embora, a presente invenção seja particularmente adequada para o teor ao vivo, ela também pode ser usada para o teor pré- registrado .
Os dados de imagem de múltiplas vistas 51 podem, por exemplo, representar estéreo-video na forma de um dos pares estéreos comprimidos ou não comprimidos. Alternativamente, as múltiplas vistas compreendem mais do que duas vistas. No exemplo descrito, os dados de imagem de múltiplas vistas 51 são um fluxo de video não comprimido compreendendo pares estéreos. O bloco receptor neste caso particular também comprime os dados de imagem de múltiplas vistas de entrada 51, desse modo, formando o primeiro componente 52 compreendendo os dados de imagem de múltiplas vistas.
Os dados de imagem não comprimidos 51 são enviados a uma unidade de inspeção, a unidade de inspeção aqui é disposta para estabelecer um mapa profundo instantâneo. Alternativamente, o fluxo de entrada pode ser provido com um mapa profundo, por exemplo, estabelecido usando um descobridor de faixa ou câmera profunda. A unidade de inspeção também recebe dados de sobreposição 53 para a sobreposição dos dados de imagem de múltiplas vistas 51. Em uma implementação exemplar, os dados de sobreposição 53 são informações de legenda as quais podem ser, por exemplo, manualmente inseridas ou geradas com base no reconhecimento de fala e as quais devem ser combinadas com os dados de imagem de múltiplas vistas.
A unidade de inspeção emite um terceiro componente 56 na forma de informação de sinalização de disparidade para a inclusão no sinal tridimensional gerado 56. Visto que a unidade de inspeção tem acesso à informação profunda presente na informação de múltiplas vistas e tem informação na localização das legendas (como neste exemplo), é possivel posicionar as legendas na frente dos objetos nos dados de imagem de múltiplas vistas. Se não existir suficiente faixa de profundidade disponível para acomodar as legendas, a unidade de inspeção pode ainda prover informação de coleta 59 para o bloco de compressão a fim de, por exemplo, coletar as imagens da esquerda e da direita de modo a adotar a faixa de profundidade total. Após o que a unidade de inspeção reitera e pode preparar a informação de sinalização de disparidade para a inclusão no sinal de saida.
Subsequentemente, a unidade de geração é disposta para gerar o sinal de imagem tridimensional 56 à medida que emitido pelo dispositivo de fonte em 3D, com base no primeiro componente na forma dos dados de imagem de múltiplas vistas 52, os dados de sobreposição 53 e o segmento de sinalização de disparidade.
Será evidente àqueles técnicos no assunto que a compressão e o controle da coleta como descrito acima com referência à figura 4 adicionam as vantagens desta realização particular, mas não são essenciais à invenção.
Agora se referindo à figura 5, a figura 5 mostra um diagrama em blocos de um dispositivo alvo em 3D 60 de acordo com a presente invenção. O dispositivo alvo em 3D compreende um receptor RCV para a recepção do sinal de imagem tridimensional 56 de acordo com a presente invenção. O receptor pode, por exemplo, ser receptor DVB ou uma unidade de interface de display HDMI. O sinal de entrada 56 é subsequentemente passado através de um demultiplexador DMX que extrai os componentes respectivos do sinal de imagem tridimensional e prepara os componentes para o processamento adicional a jusante. Nesta realização exemplar, o primeiro componente recebido 61, o segundo componente recebido 62 e o terceiro componente recebido 63.
O primeiro componente recebido 61 compreende dados de imagem de múltiplas vistas, o segundo componente compreende dados de sobreposição e o terceiro componente compreende a informação de sinalização de disparidade. Estes três componentes são subsequentemente usados por um gerador GEN a fim de gerar duas imagens de saida 68 e 69 as quais correspondem com as imagens da esquerda e da direita dos respectivos pares estéreos. As imagens da esquerda e da direita podem ser geradas ao deslocar apropriadamente os objetos localizados nas regiões de acordo com a informação de sinalização de disparidade como descrito com referência às figuras IA e 1B.
Como descrito acima, um sinal de imagem tridimensional, de acordo com a presente invenção, provê informações no que se refere ao deslocamento de sobreposições sobre metragem de múltiplas vistas. Em uma realização, tal sinal de imagem tridimensional é transmitido em unicast (para um único destino) ou multicast (para um grupo especifico de dispositivos ou clientes) por um radiodifusor. O sinal pode, por exemplo, ser transmitido usando uma versão DVB-T complacente em 3D compreendendo a informação de sinalização de disparidade de acordo com a presente invenção. Quando tal sinal de imagem tridimensional é recebido por um STB e o STB usa a informação de sinalização de disparidade para sobrepor apropriadamente as legendas, o STB pode também direcionar a informação de sinalização de disparidade para outros dispositivos a jusante tais como o dispositivo de display.
No caso mencionado acima, o dispositivo de display pode usar a informação de sinalização de disparidade, por exemplo, ao gerar seu OSD, tal que o dispositivo de display OSD não colide com as imagens estéreo recebidas pela televisão (que inclui as legendas sobrepostas).
A presente invenção também pode ser usada quando o STB escolhe sobrepor adicionalmente seu OSD para as imagens estéreo, neste caso o STB deve adaptar a informação de sinalização de disparidade de acordo, tal que o dispositivo de display também pode se acomodar.
Embora a presente invenção seja explicada principalmente com referência ao conteúdo transmitido tal como usando DVB ou ATSC, também é possivel usar a presente invenção ao distribui o conteúdo pela Internet.
Agora fazendo referência à figura 7, a figura 7 mostra um sistema que emprega um dispositivo de fonte em 3D BCST e dois dispositivos alvo STB e TV2 de acordo com a presente invenção. O sinal de imagem tridimensional de acordo com a presente invenção é transmitido pelo dispositivo de fonte em 3D através de um meio 71, tal como as ondas sonoras, a internet ou uma conexão a cabo a dois dispositivos alvo STV e TV2. Neste caso, o dispositivo alvo em 3D STB é conectado por meio de uma interface de HDMI capaz em 3D ao dispositivo de display TV1.
Nota-se que o presente pedido descreve dois conceitos da presente invenção que são preferivelmente combinados. O primeiro conceito refere-se ao uso de um preditor de disparidade único em sinalização de disparidade para o uso na sobreposição em um sinal de imagem tridimensional. O uso de um preditor único tem uma vantagem principal pelo fato de que, ao sobrepor a informação sobre o conteúdo ao vivo, uma transição de disparidade leve pode ser realizada de uma maneira que não exija grandes despesas. O segundo conceito refere-se ao fato de que a presente invenção propõe usar a sinalização de disparidade usando um ou mais preditores, em que estes um ou mais preditores podem ser anulados pelos novos preditores. Desta maneira, permanece possivel usar preditores para a realização de perfis de disparidade leves, enquanto ainda provendo flexibilidade para a acomodação da metragem ao vivo. Além disso, quando apenas um único preditor é usado, um perfil de disparidade leve pode ser realizado e a penalidade de eficiência quando um preditor é anulado permanece baixa.
Embora através do texto do pedido referência seja feita à informação de disparidade, é bem-conhecido pelos técnicos no assunto que a profundidade e a disparidade estão relacionadas. De fato quando a informação estiver disponível no que se refere ao mapeamento da profundidade para a disparidade, é possivel usar a sinalização da profundidade ao invés da sinalização de disparidade.
Em vista do acima, entende-se que a sinalização de disparidade através do pedido também é considerada como incluindo a sinalização de profundidade, desde que a informação seja provida para mapear os valores de profundidade para os valores de disparidade.
No entanto, em vista da vantagem óbvia de usar a sinalização de disparidade, em que nenhuma função de mapeamento é exigida, o pedido e as reivindicações foram elaborados com referência à sinalização de disparidade apenas.
Nota-se que a invenção pode ser implementada em hardware e/ou software, usando componentes programáveis, visto que tais implementações podem ser previstas com base totalmente ou em parte no HW, ASICs, FPGAs e/ou PCs dedicados.
Outras variações às realizações reveladas podem ser entendidas e efetuadas por aqueles técnicos no assunto na prática da invenção reivindicada, de um estudo dos desenhos, da revelação e das reivindicações anexas. Nas reivindicações, a palavra "compreendendo" não exclui outros elementos ou etapas, e o artigo definido "o/a/s" não exclui umapluralidade. Um único processador ou outra unidade podem cumprir as funções de vários itens mencionados nasreivindicações. 0 mero fato de que certas medidas são 5 mencionadas em reivindicações dependentes mutuamente diferentes não indica que a combinação destas medidas não pode ser usada como vantagem. Quaisquer sinais de referência nas reivindicações devem ser interpretados como limitando o escopo.

Claims (14)

1. DISPOSITIVO DE FONTE EM 3D PARA A EMISSÃO DE UM SINAL DE IMAGEM TRIDIMENSIONAL, o sinal de imagem tridimensional compreendendo dados de imagem de múltiplas vistas, o dispositivo de fonte em 3D compreendendo:- uma entrada para a recepção dos dados da imagem;- um gerador disposto para gerar o sinal de imagem tridimensional com base nos dados da imagem, o sinal de imagem tridimensional compreendendo:um primeiro componente compreendendo para o uso na visualização estereoscópica;um segundo componente compreendendo dados de sobreposição (410);um terceiro componente que define a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas,caracterizado pelo terceiro componente compreender um parâmetro que define a informação de disparidade tendo um perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo; eem que o sinal de imagem tridimensional compreende:um terceiro componente adicional, em um momento posterior no sinal de imagem tridimensional do que o terceiro componente, definindo nova informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, o terceiro componente adicional compreendendo um parâmetro adicional definindo nova informação de disparidade que tem um novo perfil de disparidade que varia com o tempo que provê outro preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo, a nova informação de sinalização de disparidade no terceiro componente adicional anulando a informação de sinalização de disparidade em um terceiro componente.
2. DISPOSITIVO, de acordo com a reivindicação 1, caracterizado pelo terceiro componente compreender a informação de sinalização de disparidade para o uso na sobreposição de dados de sobreposição e uma região sobre aquelas respectivas das imagens em 2D múltiplas.
3. DISPOSITIVO, de acordo com a reivindicação 1 ou 2, caracterizado pelo terceiro componente permitir a sinalização para múltiplas regiões e/ou sub-regiões disjuntivas.
4. DISPOSITIVO, de acordo com a reivindicação 1, caracterizado pela informação de sinalização de disparidade para o perfil de disparidade que varia com o tempo ser provida nos segmentos de sinalização de disparidade, e em que um segmento compreende um único preditor.
5. DISPOSITIVO ALVO EM 3D PARA A RECEPÇÃO DE UM SINAL DE IMAGEM TRIDIMENSIONAL, o sinal de imagem tridimensional compreendendo dados de imagem de múltiplas vistas, o dispositivo alvo em 3D compreendendo:- um receptor para a recepção do sinal de imagem tridimensional;- um demultiplexador para a demultiplexação do sinal de imagem tridimensional no mínimo:um primeiro componente compreendendo imagens em 2D múltiplas para o uso na visualização estereoscópica;um segundo componente compreendendo dados de sobreposição (410);um terceiro componente definindo a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, caracterizado pelo terceiro componente compreender um parâmetro que define a informação de disparidade tendo um perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo; eem que o sinal de imagem tridimensional compreende: um terceiro componente adicional, em um momento posterior no sinal de imagem tridimensional do que o terceiro componente, definindo nova informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, o terceiro componente adicional compreendendo um parâmetro adicional que define nova informação de disparidade tendo um novo perfil de disparidade que varia com o tempo que provê outro preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo,a nova informação de sinalização de disparidade no terceiro componente adicional anulando a informação de sinalização de disparidade em um terceiro componente; eem que o dispositivo alvo em 3D compreende:- um gerador para a geração das respectivas imagens em 2D para o uso na visualização estereoscópica, em que os dados de sobreposição são sobrepostos como definido na informação de sinalização de disparidade.
6. DISPOSITIVO, de acordo com a reivindicação 5, caracterizado pelo terceiro componente compreender a informação de sinalização de disparidade para o uso na sobreposição de dados de sobreposição e uma região sobre aquelas respectivas das imagens em 2D múltiplas.
7. DISPOSITIVO, de acordo com qualquer uma das reivindicações 5 a 6, caracterizado pelo terceiro componente permitir a sinalização para múltiplas regiões e/ou sub- regiões disjuntivas.
8. DISPOSITIVO, de acordo com a reivindicação 5, caracterizado pela informação de sinalização de disparidade para o perfil de disparidade que varia com o tempo ser provida em segmentos de sinalização de disparidade, e em que um segmento compreende um único preditor.
9. DISPOSITIVO, de acordo com qualquer uma das reivindicações 5 a 8, caracterizado pelo receptor ser um dentre:- um receptor 3D IP TV,- um receptor 3D ATSC,- um receptor 3D-DVB,- uma interface de receptor 3D HDMI.
10. MÉTODO DE PRODUÇÃO DE UM SINAL DE IMAGEM TRIDIMENSIONAL, o método compreendendo:- recepção de dados de imagem;- geração de sinal de imagem tridimensional com base nos dados de imagem, o sinal de imagem tridimensional compreendendo:um primeiro componente compreendendo imagens em 2D múltiplas para o uso na visualização estereoscópica;um segundo componente compreendendo dados de sobreposição (410);um terceiro componente definindo a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas,caracterizado pelo terceiro componente compreender um parâmetro que define a informação de disparidade tendo um perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo; eem que o sinal de imagem tridimensional compreende: um terceiro componente adicional, em um momento posterior no sinal de imagem tridimensional do que o terceiro componente, definindo nova informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, o terceiro componente adicional compreendendo um parâmetro adicional definindo nova informação de disparidade tendo um novo perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo,a nova informação de sinalização de disparidade no terceiro componente adicional anulando a informação de sinalização de disparidade em um terceiro componente.
11. MÉTODO DE CONSUMO DE UM SINAL DE IMAGEM TRIDIMENSIONAL, o método compreendendo:- recepção do sinal de imagem tridimensional;- demultiplexação do sinal de imagem tridimensional em no mínimo:um primeiro componente compreendendo imagens em 2D múltiplas para o uso na visualização estereoscópica;um segundo componente compreendendo dados de sobreposição (410);um terceiro componente definindo a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, caracterizado pelo terceiro componente compreender um parâmetro que define a informação de disparidade tendo um perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo; eem que o sinal de imagem tridimensional compreende: um terceiro componente adicional, em um momento posterior no sinal de imagem tridimensional do que o terceiro componente, definindo nova informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, o terceiro componente adicional compreendendo um parâmetro adicional que define nova informação de disparidade tendo um novo perfil de disparidade que varia com o tempo que provê outro preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo,a nova informação de sinalização de disparidade no terceiro componente adicional anulando a informação de sinalização de disparidade em um terceiro componente e,em que o método compreende:- a geração de imagens em 2D respectivas para o uso na visualização estereoscópica, em que os dados de sobreposição são sobrepostos como definidos dentro da informação de sinalização de disparidade.
12. MÍDIA LEGÍVEL LIDA POR COMPUTADOR que armazena instruções que são executáveis por computador, caracterizada por executar o método conforme definido em qualquer uma das reivindicações 10 ou 11.
13. SINAL DE IMAGEM TRIDIMENSIONAL, compreendendo:um primeiro componente compreendendo imagens em 2D múltiplas para o uso na visualização estereoscópica;um segundo componente compreendendo dados de sobreposição (410);um terceiro componente definindo a informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas,caracterizado pelo terceiro componente compreender um parâmetro que define a informação de disparidade tendo um perfil de disparidade que varia com o tempo que provê um preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo; eem que o sinal de imagem tridimensional compreende: um terceiro componente adicional, em um momento posterior no sinal de imagem tridimensional do que o terceirocomponente, definindo nova informação de sinalização de disparidade para o uso na sobreposição de dados de imagem sobre aquelas respectivas das imagens em 2D múltiplas, o terceiro componente adicional compreendendo um parâmetro adicional que define nova informação de disparidade tendo umnovo perfil de disparidade que varia com o tempo que provê outro preditor para indicar como se espera que uma disparidade de uma sobreposição mude com o tempo,a nova informação de sinalização de disparidade no terceiro componente adicional anulando a informação de 15 sinalização de disparidade em um terceiro componente.
14. SINAL, de acordo com a reivindicação 13, caracterizado pelo primeiro componente compreender pares estéreos.
BR112013013486-0A 2010-12-03 2011-12-02 Dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, mídia legível lida por computador e sinal de imagem tridimensional BR112013013486B1 (pt)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP10193650.8 2010-12-03
EP10193650 2010-12-03
EP11164718.6 2011-05-04
EP11164718 2011-05-04
PCT/IB2011/055428 WO2012073221A1 (en) 2010-12-03 2011-12-02 Transferring of 3d image data

Publications (2)

Publication Number Publication Date
BR112013013486A2 BR112013013486A2 (pt) 2016-10-11
BR112013013486B1 true BR112013013486B1 (pt) 2021-11-23

Family

ID=45350446

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112013013486-0A BR112013013486B1 (pt) 2010-12-03 2011-12-02 Dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, mídia legível lida por computador e sinal de imagem tridimensional

Country Status (9)

Country Link
US (1) US10057559B2 (pt)
EP (1) EP2647209B1 (pt)
JP (1) JP5955851B2 (pt)
KR (1) KR101834934B1 (pt)
CN (1) CN103262547B (pt)
BR (1) BR112013013486B1 (pt)
RU (1) RU2589870C2 (pt)
TW (1) TWI538475B (pt)
WO (1) WO2012073221A1 (pt)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8737810B2 (en) * 2002-11-15 2014-05-27 Thomson Licensing Method and apparatus for cropping of subtitle elements
CN103262547B (zh) * 2010-12-03 2016-01-20 皇家飞利浦电子股份有限公司 3d图像数据的转移
JP6092525B2 (ja) * 2012-05-14 2017-03-08 サターン ライセンシング エルエルシーSaturn Licensing LLC 画像処理装置、情報処理システム、画像処理方法およびプログラム
GB201700121D0 (en) * 2017-01-05 2017-02-22 Rotem Gal System methods and computer readable storage media for conversion of two-dimensional multipile objects layouts into three dimensional layouts
US10212532B1 (en) 2017-12-13 2019-02-19 At&T Intellectual Property I, L.P. Immersive media with media device
KR102653796B1 (ko) * 2018-09-17 2024-04-01 스냅 인코포레이티드 3차원 깊이 비디오들 및 이미지들에서 쇼크웨이브들의 생성
US10764556B2 (en) * 2018-09-26 2020-09-01 Snap Inc. Depth sculpturing of three-dimensional depth images utilizing two-dimensional input selection

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE526226C2 (sv) * 2003-12-19 2005-08-02 Ericsson Telefon Ab L M Bildbehandling
ES2553883T3 (es) 2005-12-13 2015-12-14 Koninklijke Philips N.V. Dispositivo de visualización autoestereoscópica
KR101842622B1 (ko) 2007-03-16 2018-03-27 톰슨 라이센싱 3차원 콘텐츠와 텍스트를 조합하기 위한 시스템 및 방법
BRPI0911016B1 (pt) * 2008-07-24 2021-01-05 Koninklijke Philips N.V. método de provisão de um sinal de imagem tridimensional, sistema de provisão de sinal de imagem tridimensional, sinal que contém uma imagem tridimensional, mídia de armazenamento, método de renderização de uma imagem tridimensional, sistema de renderização de imagem tridimensional para renderizar uma imagem tridimensional
MY158412A (en) * 2008-07-25 2016-10-14 Koninkl Philips Electronics Nv 3d display handling of subtitles
KR20110074823A (ko) * 2008-09-30 2011-07-04 파나소닉 주식회사 3d 영상에 관한 기록매체, 재생장치, 시스템 lsi, 재생방법, 안경 및 표시장치
CN102257818B (zh) * 2008-10-17 2014-10-29 诺基亚公司 3d视频编码中运动向量的共享
US9036006B2 (en) * 2008-10-21 2015-05-19 Koninklijke Philips N.V. Method and system for processing an input three dimensional video signal
WO2010058546A1 (ja) * 2008-11-18 2010-05-27 パナソニック株式会社 立体視再生を行う再生装置、再生方法、プログラム
CN102232294B (zh) * 2008-12-01 2014-12-10 图象公司 用于呈现具有内容自适应信息的三维动态影像的方法和系统
JP5226553B2 (ja) * 2009-02-06 2013-07-03 キヤノン株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
BRPI1005691B1 (pt) 2009-02-17 2021-03-09 Koninklijke Philips N.V. método de combinação de dados de imagem tridimensional [3d] e dados gráficos auxiliares, portador de informações compreendendo dados de imagem tridimensional [3d] e dados gráficos auxiliares, dispositivo de geração de 3d para combinar dados de imagem tridimensional [3d] e dados gráficos auxiliares, dispositivo de exibição em 3d para combinar dados de imagem tridimensional [3d] e dados gráficos auxiliares
JP2012120143A (ja) 2010-11-10 2012-06-21 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
CN103262547B (zh) * 2010-12-03 2016-01-20 皇家飞利浦电子股份有限公司 3d图像数据的转移

Also Published As

Publication number Publication date
RU2589870C2 (ru) 2016-07-10
WO2012073221A1 (en) 2012-06-07
JP5955851B2 (ja) 2016-07-20
TW201242336A (en) 2012-10-16
BR112013013486A2 (pt) 2016-10-11
EP2647209B1 (en) 2017-11-01
US20130250058A1 (en) 2013-09-26
TWI538475B (zh) 2016-06-11
KR101834934B1 (ko) 2018-03-08
US10057559B2 (en) 2018-08-21
KR20130135278A (ko) 2013-12-10
JP2014507078A (ja) 2014-03-20
EP2647209A1 (en) 2013-10-09
CN103262547A (zh) 2013-08-21
CN103262547B (zh) 2016-01-20
RU2013129984A (ru) 2015-01-10

Similar Documents

Publication Publication Date Title
KR101657123B1 (ko) 방송 수신기 및 3d 자막 데이터 처리 방법
ES2435669T3 (es) Gestión de subtítulos en visualización en 3D
BR112013013486B1 (pt) Dispositivo de fonte em 3d para a emissão de um sinal de imagem tridimensional, dispositivo alvo em 3d para a recepção de um sinal de imagem tridimensional, método de produção de um sinal de imagem tridimensional, método de consumo de um sinal de imagem tridimensional, mídia legível lida por computador e sinal de imagem tridimensional
KR101651442B1 (ko) 이미지 기반 3d 비디오 포맷
JP5647242B2 (ja) 3dビデオ及び補助データの結合
RU2589307C2 (ru) Вспомогательные данные в трансляции 3d изображения
CA2747106C (en) Method and device for overlaying 3d graphics over 3d video
US20110018966A1 (en) Receiving Device, Communication System, Method of Combining Caption With Stereoscopic Image, Program, and Data Structure
US20110221873A1 (en) Extended Command Stream for Closed Caption Disparity
BRPI1005134A2 (pt) método de transferência de dados de imagem tridimensional [3d], dispositivo de geração de 3d para transferência de dados de imagem tridimensional [3d] para um dispositivo de exibição em 3d e sinal de exibição em 3d
BR122013001378A2 (pt) inserção de objetos em 3d em uma imagem estereoscópica em relativa profundidade
US20120206453A1 (en) 3d screen size compensation
CN106303573B (zh) 一种3d视频图像处理方法及服务器和客户端
KR102008818B1 (ko) 디지털 방송 신호 처리 방법 및 장치
US20130307928A1 (en) Method and apparatus for transmitting/receiving a digital broadcasting signal
EP2282550A1 (en) Combining 3D video and auxiliary data
JP2012100102A (ja) 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
EP2309764A1 (en) 3D screen size compensation
Ostermann 3D information coding

Legal Events

Date Code Title Description
B25D Requested change of name of applicant approved

Owner name: KONINKLIJKE PHILIPS N.V. (NL)

B25G Requested change of headquarter approved

Owner name: KONINKLIJKE PHILIPS N.V. (NL)

B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B15K Others concerning applications: alteration of classification

Free format text: A CLASSIFICACAO ANTERIOR ERA: H04N 13/00

Ipc: H04N 13/128 (2018.01), H04N 13/139 (2018.01), H04N

B350 Update of information on the portal [chapter 15.35 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 02/12/2011, OBSERVADAS AS CONDICOES LEGAIS.