BR112015006412B1

BR112015006412B1 - Método de geração de imagem de múltiplas vistas, e aparelho de exibição de imagem de múltiplas vistas

Info

Publication number: BR112015006412B1
Application number: BR112015006412-4A
Authority: BR
Inventors: Seung-ryong HAN; Jong-sul Min
Original assignee: Samsung Electronics Co., Ltd
Priority date: 2012-09-24
Filing date: 2013-09-24
Publication date: 2022-05-03
Also published as: MX340687B; KR20140039649A; JP2015534766A; EP2898479A1; EP2898479A4; MX2015003669A; BR112015006412A2; US9071835B2; WO2014046522A1; JP6360483B2; US20140085433A1; CN104662586A

Abstract

MÉTODO DE GERAÇÃO DE IMAGEM DE MÚLTIPLAS VISTAS, E APARELHO DE EXIBIÇÃO DE IMAGEM DE MÚLTIPLAS VISTAS É fornecido um método de geração de imagem de múltiplas vistas. O método de geração de imagem de múltiplas vistas inclui gerar uma imagem de espaço vazio utilizando informação de profundidade de uma imagem original, dividir uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um segundo plano em pelo menos um remendo, selecionar uma área tendo o valor de pixel mais similar a um segundo plano incluído no pelo menos um remendo dividido, em uma área preestabelecida da imagem original, e preencher uma área de espaço vazio no pelo menos um remendo dividido com um valor de pixel da área selecionada para gerar uma primeira imagem de vista.

Description

CAMPO TÉCNICO

[0001] Aparelhos e métodos consistentes com modalidades exemplares se referem a um método de geração de imagem de múltiplas vistas, e mais especificamente, a um método de geração de imagem de múltiplas vistas e a um aparelho de exibição de imagem de múltiplas vistas, que são capazes de gerar uma imagem de múltiplas vistas mediante geração de uma imagem de espaço vazio e preenchimento de uma área de espaço vazio.

FUNDAMENTOS DA TÉCNICA

[0002] Com o desenvolvimento de tecnologia eletrônica, vários tipos de aparelhos eletrônicos foram desenvolvidos e difundidos. Particularmente, aparelhos de exibição tais como televisões (TVs) que são alguns dos aparelhos domésticos que têm sido mais comumente usados nas residências se desenvolveram rapidamente nos últimos anos.

[0003] Com o elevado desempenho dos aparelhos de exibição, um tipo de conteúdo exibido nos aparelhos de exibição também tem sido aumentado de forma diversa. Particularmente, em anos recentes, um sistema de exibição estereoscópico no qual também se pode assistir conteúdo tridimensional (3D) foi desenvolvido e difundido.

[0004] O aparelho de exibição estereoscópico pode ser implementado com vários tipos de aparelhos de exibição tais como TVs 3D usadas nas residências assim como vários tipos de monitores, telefones portáteis, assistentes pessoais digitais (PDAs), computadores pessoais (PCs), PCs de aparelho de conversão de sinais, PCs tablet, quadros de foto digital, quiosques. Adicionalmente, a tecnologia de exibição 3D pode ser utilizada nas residências assim como em vários campos que exigem geração de imagem 3D, tal como ciência, medicina, desenho, educação, propaganda ou jogos de computador.

[0005] O sistema de exibição estereoscópico é amplamente dividido em um sistema do tipo sem óculos no qual se podem assistir imagens 3D sem os óculos e um sistema do tipo óculos no qual se podem assistir imagens 3D com os óculos.

[0006] Há aparelhos de exibição do tipo com óculos de obturador como um exemplo do sistema do tipo óculos. O tipo com óculos de obturador alternativamente produz uma imagem de olho esquerdo e uma imagem de olho direito e alternativamente abre/fecha os óculos de obturador esquerdo e direito dos óculos 3D usados por um usuário, que são interligados com as imagens, esquerda e direita, de modo que o usuário pode perceber um efeito 3D.

[0007] O sistema do tipo sem óculos é denominado sistema de auto estereoscopia. Os aparelhos de exibição 3D do tipo sem óculos fazem com que a luz correspondendo às diferentes vistas das imagens seja projetada para o olho esquerdo e para o olho direito do usuário utilizando uma técnica de barreira paralaxe ou uma lente lenticular enquanto exibindo uma imagem de múltiplas vistas espacialmente deslocada de modo que o usuário pode perceber um efeito 3D.

[0008] 0 sistema do tipo óculos pode proporcionar um efeito 3D satisfatório, porém há a inconveniência de que o usuário tem que usar os óculos. Por outro lado, o sistema do tipo sem óculos pode permitir que o usuário assista às imagens 3D sem os óculos e assim o desenvolvimento do sistema do tipo sem os óculos tem sido discutido de forma consistente.

[0009] A Figura 1 é uma vista ilustrando uma configuração de um aparelho de exibição 3D do tipo sem óculos na técnica relacionada. Com referência à Figura 1, o aparelho de exibição 3D na técnica relacionada inclui uma unidade de retro iluminação 10, um painel de formação de imagem 20 e uma unidade paralaxe 30.

[00010] A unidade paralaxe 30 pode incluir um arranjo de fendas de uma blindagem opaca que é conhecida como uma barreira de paralaxe ou um arranjo de lentes lenticulares. A Figura 1 ilustra um caso no qual a unidade de paralaxe 30 é implementada com o arranjo de lentes lenticulares.

[00011] Como mostrado na Figura 1, o painel de formação de imagem 20 inclui uma pluralidade de pixels divididos em uma pluralidade de colunas. Imagens que têm diferentes pontos de vista para as colunas são dispostas. Na Figura 1, um exemplo em que várias imagens 1, 2, 3 e 4 tendo diferentes pontos de vista são seqüencialmente arranjadas alternadamente é ilustrado. Isto é, as colunas de pixel são dispostas como grupos indicados com números 1, 2, 3 e 4. Sinais gráficos aplicados ao painel são dispostos de modo que a coluna de pixel 1 exibe uma primeira imagem e a coluna de pixel 2 exibe uma segunda imagem.

[00012] A unidade de retro iluminação 10 proporciona luz para o painel de formação de imagem 20. Por intermédio da luz provido a partir da unidade de retro iluminação 10, as imagens 1, 2, 3 e 4 formadas no painel de formação de imagem 20 são projetadas para a unidade de paralaxe 30; e a unidade de paralaxe 30 dispersa a luz das imagens 1,2, 3 e 4 projetadas e transfere a luz dispersa na direção de um espectador. Isto é, a unidade de paralaxe 30 gera pupilas de saida em uma posição do espectador, isto é, em uma distância de visualização. Uma espessura e diâmetro de uma lente lenticular quando a unidade de paralaxe 30 é implementada com o arranjo de lentes lenticulares e um espaço entre as fendas e semelhante quando a unidade de paralaxe 30 é implementada com uma barreira de paralaxe podem ser projetados de modo que as pupilas de saida geradas por cada coluna são separadas para uma distância central binocular média abaixo de 65 mm. A luz de imagens separadas forma áreas de visualização, respectivamente. Isto é, conforme mostrado na Figura 1, são formadas áreas de visualização 1, 2, 3 e 4.

[00013] Nessas condições, quando o olho esquerdo 51 do usuário é posicionado na área de visualização 3 e o olho direito 52 do usuário é posicionado na área de visualização 2, o usuário pode perceber um efeito 3D sem óculos específicos.

[00014] O sistema sem óculos (em seguida, referido como um aparelho de geração de imagem de múltiplas vistas) gera uma pluralidade de imagens de múltiplas vistas a partir de uma imagem original. Por exemplo, o aparelho de geração de imagem de múltiplas vistas pode gerar imagens que têm 9 pontos de vista diferentes entre si a partir de uma ou mais imagens originais.

[00015] Como um exemplo, pode haver um método de gerar uma imagem de espaço vazio tendo um ponto de visão constante a partir da imagem original e interpolando uma área de espaço vazio. 0 método de geração de imagem de múltiplas vistas é revelado no Pedido de Patente Coreana aberta à Inspeção Pública N° 20100040593 e 20110085469.

[00016] Contudo, o método de interpolação de área de espaço vazio na técnica relacionada é apenas um método de simplificar o preenchimento de uma área de espaço vazio com um valor de pixel de um segundo plano adjacente a ela em unidades de linhas horizontais ou reduzir um tamanho do furo. Nesse caso, uma imagem de uma porção correspondendo a uma área de espaço vazio de uma imagem de múltiplas vistas, efetivamente gerada normalmente é distorcida. Especificamente, quando uma profundidade é relativamente elevada como um caso em que um segundo plano em torno da área de espaço vazio é uma área que se projeta estruturalmente na imagem, a distorção da imagem é grave. Portanto, há a necessidade de um método de gerar uma imagem de múltiplas vistas suave mediante processamento efetivo de uma porção formando uma estrutura na imagem original.

REVELAÇÃO DA INVENÇÃO PROBLEMA TÉCNICO

[00017] Uma ou mais modalidades exemplares podem superar as desvantagens mencionadas acima e outras desvantagens não descritas acima. Contudo, entende-se que uma ou mais modalidades exemplares não são exigidas para superar as desvantagens descritas acima, e podem não superar quaisquer dos problemas descritos acima.

[00018] Uma ou mais modalidades exemplares são a de proporcionar um método de geração de imagem de múltiplas vistas e um aparelho de exibição de imagem de múltiplas vistas que são capazes de gerar uma imagem de múltiplas vistas suave mediante processamento efetivo de uma porção formando uma estrutura em uma imagem original.

SOLUÇÃO PARA O PROBLEMA

[00019] De acordo com um aspecto de uma modalidade exemplar, é provido um método de geração de imagem de múltiplas vistas. O método de geração de imagem de múltiplas vistas pode incluir: gerar uma imagem de espaço vazio utilizando informação de profundidade de uma imagem original; dividir uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um segundo plano em pelo menos um remendo; selecionar uma área tendo um valor de pixel mais similar a um segundo plano incluido no pelo menos um remendo dividido, em uma área preestabelecida da imagem original; e preencher uma área de espaço vazio no pelo menos um remendo dividido com um valor de pixel da área selecionada para gerar uma primeira imagem de vista.

[00020] A seleção pode incluir escalonar uma área que é um alvo de comparação na área preestabelecida da imagem original para pelo menos duas proporções e comparar as áreas escalonadas com o pelo menos um remendo dividido, e selecionar a área que tem o valor de pixel mais similar para o segundo plano incluido no pelo menos um remendo dividido com base em um resultado de comparação.

[00021] 0 método de geração de imagem de múltiplas vistas pode incluir ainda a geração de uma primeira imagem de espaço vazio utilizando a informação de profundidade da imagem original, gerar uma segunda imagem de espaço vazio utilizando informação de profundidade da primeira imagem de vista gerada, e gerar uma imagem de segunda vista mediante preenchimento de uma área de espaço vazio da primeira imagem de espaço vazio com um valor de pixel de uma área da segunda imagem de espaço vazio correspondendo à área de espaço vazio da primeira imagem de espaço vazio ou preenchendo uma área de espaço vazio da segunda imagem de espaço vazio com um valor de pixel de uma área da primeira imagem de espaço vazio correspondendo à área de espaço vazio da segunda imagem de espaço vazio.

[00022] A geração de uma imagem de espaço vazio pode incluir gerar a imagem de espaço vazio mediante mudança de pixels pelas distâncias preestabelecidas de acordo com os niveis de profundidades dos pixels da imagem original.

[00023] A seleção pode ser realizada preferencialmente em um remendo que tem uma grande diferença em valores de pixel entre a área de espaço vazio e o segundo plano no pelo menos um remendo dividido.

[00024] A seleção pode incluir a determinação de um grau de similaridade mediante comparação de uma cor, profundidade, e gradiente de cada porção na área preestabelecida da imagem original com aqueles do segundo plano incluídos no pelo menos um remendo dividido.

[00025] O método de geração de imagem de múltiplas vistas pode gerar uma primeira imagem de vista mediante realização repetidamente de um processo a partir da geração de uma imagem de espaço vazio para o preenchimento de uma área de espaço vazio até que as áreas de espaço vazio da imagem de espaço vazio sejam completamente preenchidas.

[00026] O método de geração de imagem de múltiplas vistas pode incluir ainda a geração de uma imagem de múltiplas vistas mediante combinação de pixels das áreas da primeira imagem de vista e da segunda imagem de vista, que são correspondentes entre si.

[00027] De acordo com outro aspecto de uma modalidade exemplar, é provido um aparelho de exibição de imagem de múltiplas vistas. 0 aparelho de exibição de imagem de múltiplas vistas pode incluir: uma unidade de recepção configurada para receber uma imagem original; um controlador que inclui um módulo de geração de imagem de espaço vazio configurado para gerar uma imagem de espaço vazio utilizando informação de profundidade da imagem original, um módulo de seleção de área similar configurado para dividir uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um segundo plano em pelo menos um remendo e selecionar uma área que tem o valor de pixel mais similar com um segundo plano incluido no pelo menos um remendo dividido, em uma área preestabelecida da imagem original, e um módulo de geração de imagem configurado para preencher uma área de espaço vazio no pelo menos um remendo dividido com um valor de pixel da área selecionada para gerar uma primeira imagem de vista; e um painel de exibição configurado para produzir a primeira imagem de vista gerada.

[00028] O módulo de seleção de área similar pode escalonar uma área que é um alvo de comparação na área preestabelecida da imagem original para pelo menos duas proporções, comparar as áreas escalonadas com o pelo menos um remendo dividido, e selecionar a área que tem o valor de pixel mais similar para o segundo plano incluído no pelo menos um remendo dividido com base em um resultado da comparação.

[00029] O módulo de geração de imagem de espaço vazio pode gerar uma primeira imagem de espaço vazio utilizando a informação de profundidade da imagem original e adicionalmente gerar uma segunda imagem de espaço vazio utilizando informação de profundidade da primeira imagem de vista gerada e o módulo de geração de imagem pode gerar uma segunda imagem de vista mediante preenchimento de uma área de espaço vazio da primeira imagem de espaço vazio com um valor de pixel de uma área da segunda imagem de espaço vazio correspondendo à área de espaço vazio da primeira imagem de espaço vazio ou preenchendo uma área de espaço vazio da segunda imagem de espaço vazio com um valor de pixel de uma área da primeira imagem de espaço vazio correspondendo à área de espaço vazio da segunda imagem de espaço vazio.

[00030] O módulo de geração de imagem de espaço vazio pode gerar a imagem de espaço vazio mediante mudança de pixels por distâncias preestabelecidas de acordo com os niveis das profundidades dos pixels da imagem original.

[00031] O módulo de seleção de área similar pode preferivelmente realizar a operação de seleção em um remendo que tem uma grande diferença em valores de pixel entre a área de espaço vazio e o segundo plano, no pelo menos um remendo dividido.

[00032] 0 módulo de seleção de área similar pode determinar um grau de similaridade mediante comparação de uma cor, profundidade, e gradiente de cada porção na área preestabelecida da imagem original com aqueles do segundo plano incluido no pelo menos um remendo dividido.

[00033] O módulo de seleção de área similar e o módulo de geração de imagem podem gerar a primeira imagem de vista mediante realização repetidamente da operação de seleção e da operação de preenchimento até que as áreas de espaço vazio da imagem de espaço vazio sejam completamente preenchidas.

[00034] O controlador pode incluir ainda um módulo de geração de imagem de múltiplas vistas configurado para gerar uma imagem de múltiplas vistas mediante combinação de pixels de áreas na primeira imagem de vista e na segunda imagem de vista, que são correspondentes mutuamente.

EFEITOS VANTAJOSOS DA INVENÇÃO

[00035] De acordo com as várias modalidades exemplares descritas acima, uma porção formando uma estrutura em uma imagem original é processada efetivamente para gerar uma imagem de múltiplas vistas suave.

[00036] Aspectos e vantagens adicionais das modalidades exemplares serão apresentados na descrição detalhada, serão óbvios a partir da descrição detalhada, ou podem ser aprendidos mediante prática das modalidades exemplares.

BREVE DESCRIÇÃO DOS DESENHOS

[00037] Os aspectos mencionados acima e/ou outros aspectos serão mais evidentes mediante descrição em detalhe das modalidades exemplares, com referência aos desenhos anexos, nos quais: A Figura 1 é um diagrama de blocos que ilustra uma configuração de um aparelho de exibição 3D do tipo sem óculos na técnica relacionada; A Figura 2 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com uma modalidade exemplar; A Figura 3 é uma vista explicando uma imagem original para gerar uma imagem de espaço vazio; A Figura 4 é uma vista ilustrando uma imagem de espaço vazio gerada; A Figura 5(A), (B) , (C) é uma vista explicando um método de preenchimento de uma imagem de espaço vazio com uma área de uma imagem original similar a um remendo; À Figura 6 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar; A Figura 7 é uma vista explicando um método de determinar uma porção que tem um alto grau de similaridade por intermédio do método da Figura 6; A Figura 8 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar; A Figura 9 é uma vista ilustrando um método de gerar uma imagem de múltiplas vistas de acordo com o método da Figura 8; A Figura 10 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar; A Figura 11 é um fluxograma que ilustra um método de gerar uma primeira imagem de vista completa de acordo com outra modalidade exemplar; A Figura 12 é uma vista que ilustra um método de geração de uma imagem completa de múltiplas vistas de acordo com outra modalidade exemplar; e As Figuras, 13 e 14, são diagramas em blocos ilustrando aparelhos de exibição de imagem de múltiplas vistas de acordo com as várias modalidades exemplares.

MODO PARA A INVENÇÃO

[00038] Em seguida, modalidades exemplares serão descritas em mais detalhe com referência aos desenhos anexos.

[00039] Na descrição a seguir, os mesmos numerais de referência são usados para os mesmos elementos quando eles são ilustrados em desenhos diferentes. As matérias definidas na descrição, tal como construção detalhada e elementos, são fornecidas para auxiliar em um entendimento abrangente das modalidades exemplares. Assim, é evidente que as modalidades exemplares podem ser realizadas sem aquelas matérias especificamente definidas. Além disso, funções ou elementos conhecidos na técnica relacionada não são descritas em detalhe uma vez que obscureceriam as modalidades exemplares com detalhe desnecessário.

[00040] A Figura 2 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com uma modalidade exemplar, a Figura 3 é uma vista explicando uma imagem original para gerar uma imagem de espaço vazio, a Figura 4 é uma vista ilustrando uma imagem de espaço vazio gerada, e a Figura 5(A), (B) , (C) é uma vista ilustrando um método de preenchimento de uma área de espaço vazio com uma área da imagem original similar a um remendo.

[00041] Com referência à Figura 2, o método de geração de imagem de múltiplas vistas de acordo com uma modalidade exemplar inclui a geração de uma imagem de espaço vazio (S210), dividindo uma região de limite em pelo menos um remendo (S220), selecionando a área mais similar a um segundo plano incluido no remendo em uma imagem original (S230), e preenchendo uma área de espaço vazio para gerar uma primeira imagem de vista (S240) .

[00042] Primeiramente, a geração da imagem de espaço vazio (S210) é um processo de gerar a imagem de espaço vazio utilizando informação de profundidade da imagem original.

[00043] Aqui, a imagem original pode ter vários tipos. Por exemplo, a imagem original pode incluir uma imagem de olho esquerdo e uma imagem de olho direito que tem disparidade entre os pixels. Nesse caso, a imagem original é constituída de dois. Por outro lado, a imagem original pode ser uma; e o mapa de profundidade representando a informação de profundidade ser usado para gerar a imagem de espaço vazio.

[00044] A informação de profundidade, que é informação indicando uma profundidade de uma imagem 3D, é informação correspondendo a um grau de disparidade binocular entre o quadro de imagem de olho esquerdo e um quadro de imagem de olho direito. 0 grau de um efeito 3D que é percebido pelo usuário é mudado de acordo com a informação de profundidade. Isto é, quando a profundidade é grande, como a disparidade binocular é elevada, os usuários percebem um efeito 3D elevado. Enquanto que quando a profundidade é pequena, quando a disparidade binocular é baixa, os usuários percebem um efeito 3D relativamente baixo. A informação de profundidade pode ser representada utilizando-se um mapa de profundidade a ser descrito posteriormente.

[00045] 0 mapa de profundidade denota uma tabela que inclui informação de profundidade para áreas respectivas de uma tela de exibição. A área pode ser dividida em unidades de pixels e pode ser definida como uma área preestabelecida maior do que as unidades de pixel. Nesse caso, a informação de profundidade pode ser uma profundidade para cada área ou cada pixel do quadro de imagem 3D. Em uma modalidade exemplar, o mapa de profundidade pode corresponder a uma imagem 2D de uma escala de cinza indicando uma profundidade para cada pixel de um quadro de imagem.

[00046] A Figura 3 ilustra um exemplo de uma imagem original e um mapa de profundidade correspondendo à imagem original. Pode ser visto que a imagem original inclui um pavilhão que é um objeto localizado mais à frente e árvores e edificações localizadas atrás do pavilhão. 0 pavilhão é um objeto localizado mais à frente e tem uma grande profundidade, enquanto que as árvores e as edificações têm uma pequena profundidade e, assim, constituem um segundo plano da imagem. Portanto, no mapa de profundidade da imagem, o pavilhão tem o valor de profundidade grande, enquanto que o segundo plano atrás do pavilhão tem a profundidade pequena.

[00047] Em seguida, será descrito um método de gerar uma imagem de espaço vazio utilizando a imagem original e o mapa de profundidade.

[00048] De acordo com uma modalidade exemplar, a imagem de espaço vazio pode ser gerada mediante mudança de pixels por distâncias preestabelecidas de acordo com os niveis das profundidades para os pixels da imagem original.

[00049] Supõe-se que uma imagem que tem um ponto de visão esquerdo é gerada com base na imagem original. A imagem que tem o ponto de visão esquerdo é a mesma que uma imagem obtida mediante rotação da imagem original por um ângulo constante para a esquerda com base no centro da imagem original. Quando a imagem é projetada sobre um plano 2D, os objetos têm que se mover por uma distância correspondendo ao ângulo constante para a direita. Nesse caso, objetos próximos se movem por uma longa distância, enquanto que objetos distantes, ou um segundo plano, se deslocam por uma distância relativamente curta. Portanto, uma imagem de múltiplas vistas é gerada.

[00050] Nesse caso, o mapa de profundidade descrito acima é utilizado. Isto é, como um pixel que tem uma profundidade grande é considerado como um objeto localizado próximo com referência ao mapa de profundidade, o pixel que tem a grande profundidade é deslocado por uma distância relativamente longa. Por outro lado, como um pixel que tem uma pequena profundidade é considerado como um objeto distante ou um segundo plano, o pixel que tem a pequena profundidade é deslocado por uma distância relativamente curta.

[00051] Como as distâncias deslocadas dos pixels constituindo o objeto são mudadas de acordo com os niveis das profundidades, os pixels na imagem original não se movem finalmente para fazer com que uma porção na qual alguma coisa não é preenchida seja gerada. A porção é referida como uma área de espaço vazio; e uma imagem que tem uma área de espaço vazio é referida como uma imagem de espaço vazio.

[00052] A Figura 4 ilustra a imagem de espaço vazio, gerada conforme descrito acima. Isto é, quando uma imagem original ilustrada em um lado superior é deslocada para a direita com relação aos pixels com referência ao mapa de profundidade, uma imagem de espaço vazio ilustrada no lado inferior é gerada.

[00053] Quando a imagem de espaço vazio é gerada, uma região de limite é dividida em pelo menos um remendo (S220) . Isto é, a região de limite na qual uma região de espaço vazio 42 da imagem de espaço vazio gerada está em contato com um segundo plano 41 é dividida em pelo menos um remendo.

[00054] Com referência à Figura 5(A), há uma área de espaço vazio em um telhado do pavilhão que é um objeto próximo da imagem original. A região de limite na qual a área de espaço vazio está em contato com um segundo plano é dividida em uma pluralidade de remendos. Cada remendo é dividido em uma área de segundo plano e uma área de espaço vazio.

[00055] Uma área que tem o valor de pixel mais similar ao segundo plano incluído no pelo menos um remendo dividido em uma área preestabelecida da imagem original (S230) . Isto é, a área que tem o valor de pixel mais similar à área de segundo plano na imagem original é determinada.

[00056] Na Figura 5(B), o remendo é comparado com as áreas A, B e C da imagem original. Então, a área A que tem o valor de pixel mais similar pode ser selecionada (vide Figura 5(C)).

[00057] Em uma modalidade exemplar, o processo de seleção pode ser realizado mediante comparação de uma cor, profundidade, e gradiente de cada porção na área preestabelecida da imagem original com aqueles no segundo plano incluido no pelo menos um remendo dividido e determinando o grau de similaridade.

[00058] Por exemplo, a cor do segundo plano pode ser representada com RGB e nesse caso, todos os valores RGB para os pixels do pelo menos um remendo podem ser adicionados, todos os valores RGB dos pixels em qualquer porção na área preestabelecida da imagem original correspondendo a eles podem ser adicionados, e dois valores adicionados podem ser comparados. Uma porção tendo a menor diferença entre os dois valores adicionados na área preestabelecida da imagem original pode ser selecionada.

[00059] Similarmente, todos os valores de profundidade para os pixels do pelo menos um remendo podem ser adicionados, todos os valores de profundidade dos pixels de qualquer porção na área preestabelecida da imagem original correspondendo a eles podem ser adicionados, e dois valores adicionados podem ser comparados. Uma porção tendo a menor diferença entre os dois valores adicionados na área preestabelecida da imagem original pode ser selecionada.

[00060] Adicionalmente, todos os valores de gradiente para os pixels do pelo menos um remendo podem ser adicionados, todos os valores de gradiente dos pixels de qualquer porção na área preestabelecida da imagem original correspondendo a eles podem ser adicionados, e dois valores adicionados podem ser comparados. Uma porção tendo a menor diferença entre os dois valores adicionados na área preestabelecida da imagem original pode ser selecionada.

[00061] A porção na área preestabelecida da imagem original pode ser comparada com o segundo plano incluido no pelo menos um remendo dividido utilizando qualquer um do valor de cor, valor de profundidade e valor de gradiente, mas todos os: valor de cor, valor de profundidade e valor de gradiente podem ser comparados. Nesse caso, a exatidão é aperfeiçoada mediante consideração de informação uniforme que pode não confirmar através apenas de qualquer um fator. Por exemplo, um padrão de cor que não pode confirmar através de apenas uma diferença entre valores adicionados de todos os valores de pixel também pode ser considerado.

[00062] Quando a porção mais similar da área preestabelecida da imagem original do remendo é determinada, a área de espaço vazio é preenchida utilizando-se uma porção para gerar a primeira imagem de vista (S240) . Isto é, a área de espaço vazio no pelo menos um remendo dividido é preenchida com o valor de pixel da área selecionada para gerar a primeira imagem de vista.

[00063] Com referência à Figura 5(C), uma área A que é a área mais similar para o remendo é selecionada e a área de espaço vazio do remendo é preenchida com um valor de pixel de uma área na área A correspondendo à área de espaço vazio.

[00064] 0 método de interpolação de área de espaço vazio na técnica relacionada é apenas um método de simplesmente preencher uma área de espaço vazio com um valor de pixel de um segundo plano adjacente à área de espaço vazio em unidades de linhas horizontais ou reduzindo um tamanho do furo. Nesse caso, uma imagem de uma porção correspondendo a uma área de espaço vazio em uma imagem de múltiplas vistas efetivamente gerada normalmente é distorcida. Especificamente, quando uma profundidade de uma área de segundo plano vizinha é relativamente elevada como um caso em que o segundo plano em torno da área de espaço vazio é uma área estruturalmente que se projeta na imagem, a distorção da imagem é grave.

[00065] Contudo, conforme descrito acima, a modalidade exemplar resolve o problema mediante divisão da região de limite entre a área de espaço vazio e o segundo plano em pelo menos um remendo, preenchendo a área de espaço vazio com pixels correspondentes da porção na imagem original, que é mais similar a cada remendo. Nesse caso, a porção formando uma estrutura na imagem original não é simplesmente preenchida com os pixels do segundo plano adjacente a ela, mas preenchido utilizando a imagem mais similar para gerar uma imagem de múltiplas vistas suave.

[00066] Contudo, em geral, como o remendo descrito acima é uma pequena porção na imagem inteira, pode haver muitos casos nos quais muitas peças de informação discrimináveis não são incluidas no remendo e assim pode haver uma pluralidade de porções similares na imagem original. Portanto, há uma necessidade de um método de determinar uma porção tendo um grau de similaridade superior à área de segundo plano do remendo entre a pluralidade de porções similares.

[00067] Em seguida, o método será descrito.

[00068] A Figura 6 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar e a Figura 7 é uma vista explicando um método de determinar uma porção que tem um alto grau de similaridade através do método da Figura 6.

[00069] Com referência à Figura 6, o método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar inclui a geração de uma imagem de espaço vazio (S610), divisão de uma região de limite em pelo menos um remendo (S620) , escalonamento de uma área que é um alvo de comparação e comparando as áreas escalonadas com o remendo (S630), selecionando uma área de uma imagem original mais similar a um segundo plano incluido no remendo com base em um resultado da comparação (S640) , e preenchendo uma imagem de espaço vazio para gerar uma primeira imagem de vista (S650).

[00070] As etapas S610, S620 e S650 são as mesmas que as etapas S210, S220 e S240 na modalidade exemplar descrita acima e assim descrição repetitiva das mesmas será omitida.

[00071] Na modalidade exemplar, quando a região de limite é dividida em pelo menos um remendo (S620) , a área, que é o alvo de comparação, em uma área preestabelecida da imagem original é escalonada para pelo menos duas proporções e as áreas escalonadas são comparadas com o pelo menos um remendo dividido (S630).

[00072] Aqui, o meio de escalonamento para multiplicar um número inteiro para uma faixa de distribuição de um valor de pixel de modo que a faixa de distribuição fique dentro de uma faixa preestabelecida. Um caso no qual a faixa preestabelecida é mais do que uma faixa de distribuição de um valor de pixel dos dados de imagem original é referido como escalonamento ascendente e como resultado de escalonamento ascendente, uma tela dos dados de imagem é ampliada para uma proporção preestabelecida. Por outro lado, um caso em que a faixa preestabelecida é menor do que uma faixa de distribuição de um valor de pixel dos dados de imagem de entrada é referido como escalonamento descendente e como o resultado de escalonamento descendente, uma tela dos dados de imagem é reduzida a uma proporção preestabelecida. No escalonamento ascendente, um valor de pixel nos dados de imagem de entrada pode combinar com uma pluralidade de valores de pixel da tela de dados de imagem como um resultado de escalonamento e assim uma resolução pode ser degradada.

[00073] Como ilustrado na Figura 7, a área da imagem original, que é o alvo de comparação, pode ser escalonada para três proporções para ser ampliada ou para ser reduzida. As imagens escalonadas para três proporções são comparadas com o pelo menos um remendo dividido, respectivamente.

[00074] Conforme descrito acima, como o remendo é uma porção muito pequena na imagem inteira, pode haver uma pluralidade de porções similares ao remendo na imagem original. A modalidade exemplar compara as porções das imagens que são escalonadas para várias proporções com o remendo para determinar uma porção que tenha o maior grau de similaridade com a área de segundo plano do remendo dentre a pluralidade de porções similares.

[00075] Com base no resultado da comparação, a área que tem o valor de pixel mais similar ao segundo plano incluído no pelo menos um remendo dividido é selecionada (S650) . O método de determinar um grau de similaridade foi descrito acima e assim descrição repetitiva do mesmo será omitida.

[00076] De acordo com a modalidade exemplar descrita acima, uma imagem de espaço vazio é gerada através de uma imagem original, uma área de espaço vazio da imagem de espaço vazio é dividida em remendos, e a área de espaço vazio é preenchida com uma imagem que tem um alto grau de similaridade na imagem original de modo que a imagem natural de múltiplas vistas sem distorção é gerada.

[00077] A imagem de múltiplas vistas final pode ser configurada de imagens para uma pluralidade de pontos de visão. As imagens podem ser geradas através do método descrito acima. Meramente, quando o número de imagens individuais é aumentado, uma quantidade de operação pode ser aumentada. Nesse caso, o método efetivo de geração de imagem de múltiplas vistas, seguinte, pode ser considerado.

[00078] A Figura 8 é um fluxograma que ilustra um método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar e a Figura 9 é uma vista explicando um método de gerar uma imagem de múltiplas vistas de acordo com o método da Figura 8.

[00079] Com referência à Figura 8, o método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar pode incluir a geração de uma imagem de espaço vazio (S810), dividir uma região de limite em pelo menos um remendo (S820), selecionar uma área de uma imagem original mais similar a um segundo plano incluído no remendo (S830), preencher uma área de espaço vazio para gerar uma primeira imagem de vista (S840), gerar uma primeira imagem de espaço vazio (S840), gerar uma segunda imagem de espaço vazio (S850), e gerar uma segunda imagem de vista (S860).

[00080] As etapas S810, S820, S830 e S840 são as mesmas que as etapas S210, S220, S230 e S240 na modalidade exemplar descrita acima e assim a sua descrição repetitiva será omitida.

[00081] Na modalidade exemplar, quando a primeira imagem de vista é gerada, uma imagem que tem um ponto de visão entre a primeira imagem de vista e a imagem original pode ser gerada. Isto é, a primeira imagem de espaço vazio que tem o ponto de visão entre a primeira imagem de vista e a imagem original é gerada utilizando informação de profundidade da imagem original (S850) . A primeira imagem de espaço vazio é gerada através do mesmo método que o método de gerar a imagem de espaço vazio descrita acima.

[00082] A segunda imagem de espaço vazio que tem o mesmo ponto de visão que a primeira imagem de espaço vazio é gerada utilizando informação de profundidade da primeira imagem de vista gerada (S860).

[00083] Nesse caso, a primeira imagem de espaço vazio é uma imagem da qual o ponto de visão é deslocado para uma primeira direção com base na imagem original, enquanto que a segunda imagem de espaço vazio é uma imagem da qual o ponto de visão é deslocado para a segunda direção diferente da primeira direção com base na primeira imagem de vista. Portanto, as áreas de espaço vazio da primeira imagem de espaço vazio e da segunda imagem de espaço vazio são geradas nas diferentes direções em relação uma à outra.

[00084] Com referência à Figura 9 da modalidade exemplar, quando uma imagem de espaço vazio é gerada a partir da imagem esquerda para gerar uma imagem de vista de número 2, pode ser que uma imagem de espaço vazio na qual uma área de espaço vazio é gerada no lado direito de um objeto seja gerada. Por outro lado, quando uma imagem de espaço vazio é gerada a partir da imagem direita (imagem original) para gerar a imagem de vista de número 2, pode ser que a imagem de espaço vazio na qual uma área de espaço vazio é gerada no lado esquerdo do objeto seja gerada.

[00085] Após duas imagens de espaço vazio ser geradas, a segunda imagem de vista é gerada mediante preenchimento da área de espaço vazio da primeira imagem de espaço vazio com um valor de pixel de uma área da segunda imagem de espaço vazio correspondendo à área de espaço vazio da primeira imagem de espaço vazio ou preenchimento da área de espaço vazio da segunda imagem de espaço vazio com um valor de pixel de uma área da primeira imagem de espaço vazio correspondendo à área de espaço vazio da segunda imagem de espaço vazio (S870) .

[00086] Como a primeira imagem de espaço vazio e a segunda imagem de espaço vazio são imagens que têm diferentes áreas de espaço vazio em relação uma à outra com respeito ao mesmo ponto de visão, uma área da segunda imagem de espaço vazio que tem um valor de pixel correspondendo à área de espaço vazio da primeira imagem de espaço vazio está presente e similarmente, uma área da primeira imagem de espaço vazio que tem um valor de pixel que corresponde à área de espaço vazio da segunda imagem de espaço vazio está presente. Portanto, as áreas de espaço vazio podem ser preenchidas utilizando os valores de pixel das áreas das diferentes imagens de espaço vazio correspondendo uma à outra.

[00087] Na Figura 9, a imagem de espaço vazio que tem a área de espaço vazio no lado esquerdo do objeto pode ser preenchida com um valor de pixel da área de outra imagem de espaço vazio correspondendo a ela. Similarmente, a imagem de espaço vazio que tem a área de espaço vazio no lado direito do objeto pode ser preenchida com um valor de pixel da área de outra imagem de espaço vazio correspondendo a ela. Um lado superior e um lado inferior da imagem sobreposta da Figura 9 representam imagens que têm diferentes áreas de espaço vazio entre si.

[00088] Quando é gerada uma imagem que tem um ponto de visão, que existe entre dois pontos de visão diferentes, a partir das imagens que têm dois pontos de visão diferentes, simplesmente, duas imagens de espaços vazios são geradas e uma área de espaço vazio de uma imagem de espaço vazio pode ser preenchida com um valor de pixel de outra imagem de espaço vazio correspondendo à área de espaço vazio daquela imagem de espaço vazio. Portanto, quando o número de imagens individuais é aumentado, a imagem de múltiplas vistas pode ser gerada rapidamente e de forma eficaz.

[00089] Por outro lado, nas modalidades exemplares descritas acima, o problema de se a etapa de selecionar qual remendo entre uma pluralidade de remendos for realizada preferivelmente pode ser causado. A Figura 10 é um fluxograma ilustrando um método de geração de imagem de múltiplas vistas para resolver o problema.

[00090] Com referência à Figura 10, o método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar pode incluir a geração de uma imagem de espaço vazio (S1010), dividir uma região de limite em pelo menos um remendo (S1020), selecionar uma área de uma imagem original mais similar a um segundo plano incluido no remendo (S1030), e preencher a área de espaço vazio para gerar uma primeira imagem de vista (S1040).

[00091] As etapas S1010, S1020, S1030 e S1040 são as mesmas que as etapas S210, S220, S230 e S240 na modalidade exemplar descrita acima e assim sua descrição repetitiva será omitida.

[00092] Meramente, na etapa S1030, a etapa de selecionar pode ser realizada preferivelmente em um remendo que tem uma grande diferença em valores de pixel entre a área de espaço vazio e o segundo plano no pelo menos um remendo dividido.

[00093] Quando a diferença nos valores de pixel entre a área de espaço vazio e o segundo plano adjacente à área de espaço vazio no pelo menos um remendo for grande, na maioria dos casos, o segundo plano adjacente forma uma estrutura em uma imagem ou o remendo tem pixels tendo grandes profundidades. Portanto, a área da imagem original similar ao remendo é selecionada mediante atribuição de prioridade ao remendo para gerar uma imagem de múltiplas vistas mais natural e efetiva.

[00094] A Figura 11 é um fluxograma ilustrando um método de gerar uma primeira imagem de vista completa de acordo com outra modalidade exemplar.

[00095] As etapas de acordo com as modalidades exemplares descritas acima são repetidas até que todas as áreas de espaço vazio da imagem de espaço vazio sejam preenchidas. Isto é, um processo de preencher uma área de espaço vazio com uma porção similar da imagem original com relação a qualquer remendo é completado, o processo descrito acima é realizado repetidamente nas regiões de limite das áreas de espaço vazio, restantes. Os processos descritos acima são realizados continuamente até que as áreas de espaço vazio sejam removidas.

[00096] O processo de gerar a primeira imagem de vista completa será descrito com referência à Figura 11. Em primeiro lugar, uma imagem de espaço vazio é gerada (S1110), uma região de limite é dividida em pelo menos um remendo (S1120), e é selecionada uma área que tem o valor de pixel mais similar a um segundo plano incluido no pelo menos um remendo dividido (S1130) . Então, uma primeira imagem de vista é gerada mediante preenchimento da área de espaço vazio com o valor de pixel da área selecionada (S1140). As etapas são realizadas continuamente até que a primeira imagem de vista completa seja gerada mediante preenchimento e remoção de todas as áreas de espaço vazio (S1150).

[00097] A Figura 12 é uma vista que explica um método de gerar uma imagem de múltiplas vistas completa de acordo com outra modalidade exemplar.

[00098] O método de geração de imagem de múltiplas vistas de acordo com outra modalidade exemplar pode incluir as etapas S810 a S860 descritas acima e incluir ainda a geração de uma imagem de múltiplas vistas mediante combinação de pixels de áreas da primeira imagem de vista e da segunda imagem de vista, que são correspondentes uma à outra.

[00099] De acordo com as várias modalidades exemplares, em primeiro lugar, uma imagem (qualquer uma de uma imagem esquerda e uma imagem direita da Figura 12) tendo o ponto de visão mais externo é gerada a partir de uma imagem original através das etapas S810 a S84 0 e uma imagem que tem um ponto de visão entre a imagem original e a imagem que tem o ponto de visão mais externo é gerada através das etapas S850 a S870.

[000100] Um programa para executar os métodos de acordo com as várias modalidades exemplares descritas acima pode ser armazenado e usado nos vários tipos de meios de gravação.

[000101] Especificamente, um código para executar os métodos descritos acima pode ser armazenado em vários tipos de meios legíveis por terminal, não transitórios tais como memórias de acesso aleatório (RAMs), memórias flash, memória de leitura (ROMs), ROMs programáveis (EPROMs), ROMs eletronicamente apagáveis e programáveis (EEPROMs), registradores, discos rígidos (HDs), discos removíveis, cartões de memória, memórias de barramento serial universal (USB), ou ROMs de disco compacto (CD-ROMs).

[000102] Em seguida, serão descritos aparelhos de exibição de imagem de múltiplas vistas 100 e 100' que realizam os métodos descritos acima.

[000103] As Figuras, 13 e 14, são diagramas em blocos ilustrando configurações nos aparelhos de exibição de imagem de múltiplas vistas 100 e 100' de acordo com as várias modalidades exemplares.

[000104] Com referência à Figura 13, o aparelho de exibição de imagem de múltiplas vistas 100 de acordo com as várias modalidades exemplares inclui uma unidade de recepção 110 configurada para receber uma imagem original, um controlador 120 incluindo um módulo de geração de imagem de espaço vazio 121, um módulo de seleção de área similar 122, e um módulo de geração de imagem 123, e uma unidade de saída 130 configurada para produzir uma primeira imagem de vista gerada. 0 módulo de geração de imagem de espaço vazio 121 gera uma imagem de espaço vazio utilizando informação de profundidade da imagem original. O módulo de seleção de área similar 122 divide uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um segundo plano em pelo menos um remendo e seleciona uma área que tem o valor de pixel mais similar para um segundo plano incluído no pelo menos um remendo dividido, em uma área preestabelecida da imagem original. 0 módulo de geração de imagem 123 preenche uma área de espaço vazio no pelo menos um remendo com o valor de pixel da área selecionada para gerar a primeira imagem de vista.

[000105] A unidade de recepção 110 recebe um conteúdo incluindo uma imagem. Especificamente, a unidade de recepção 110 recebe o conteúdo a partir de uma estação de difusão que transmite um conteúdo de programa de difusão utilizando uma rede de difusão ou a partir de um servidor de rede que transmite um arquivo de conteúdo utilizando a Internet. Alternativamente, a unidade de recepção 110 pode receber o conteúdo a partir dos vários tipos de aparelhos de reprodução de meio de gravação que são providos no aparelho de exibição de imagem de múltiplas vistas 100 ou são conectados ao aparelho de exibição de imagem de múltiplas vistas 100. Aqui, o aparelho de reprodução de meio de gravação significa um aparelho configurado para reproduzir um conteúdo armazenado nos vários tipos de meios de gravação tais como CDs, discos digitais versáteis (DVDs), HDs, discos Blu-ray, cartões de memória, ou memórias USB.

[000106] Quando o conteúdo é recebido a partir de uma estação de difusão em uma modalidade exemplar, a unidade de recepção 110 pode ser implementada para incluir uma configuração tal como um sintonizador (não mostrado), um demodulador (não mostrado), ou um equalizador (não mostrado). Quando o conteúdo é recebido a partir de uma fonte tal como um servidor de rede em outra modalidade exemplar, a unidade de recepção 110 pode ser implementada com um cartão de interface de rede (não mostrado). Alternativamente, o conteúdo é recebido a partir dos vários tipos descritos acima de aparelhos de reprodução de meio de gravação em ainda outra modalidade exemplar, a unidade de recepção 110 pode ser implementada com uma unidade de interface (não mostrada) conectada ao aparelho de reprodução de meio de gravação. Por exemplo, a unidade de recepção 110 pode ser implementada com um terminal de áudio/video (AV), um terminal composto (COMP), um terminal de interface de multimídia de alta definição (HDMI), e semelhante. Além disso, a unidade de recepção 110 pode ser implementada em vários tipos de acordo com várias modalidades exemplares.

[000107] O controlador 120 controla uma operação global do aparelho de exibição de imagem de múltiplas vistas 100, especificamente, a geração da imagem de múltiplas vistas. Conforme descrito acima, o controlador 120 inclui o módulo de geração de imagem de espaço vazio 121, o módulo de seleção de área similar 122, e o módulo de geração de imagem 123.

[000108] Em uma modalidade exemplar, o módulo de seleção de área similar 122 pode escalonar uma área, a qual é um alvo de comparação em uma área preestabelecida da imagem original, para ao menos duas proporções, comparar as áreas escalonadas com o pelo menos um remendo dividido, e selecionar uma área tendo o valor de pixel mais similar para um segundo plano incluído no pelo menos um remendo dividido com base em um resultado de comparação.

[000109] Em outra modalidade exemplar, o módulo de geração de imagem de espaço vazio 121 pode gerar ainda uma primeira imagem de espaço vazio utilizando informação de profundidade da imagem original e gerar adicionalmente uma segunda imagem de espaço vazio utilizando a informação de profundidade da primeira imagem de vista gerada, em adição à imagem de espaço vazio descrita acima. Nesse caso, o módulo de geração de imagem 123 pode adicionalmente gerar uma segunda imagem de vista mediante preenchimento de uma área de espaço vazio da primeira imagem de espaço vazio com um valor de pixel de uma área da segunda imagem de espaço vazio correspondendo à área da primeira imagem de espaço vazio ou preencher a área de espaço vazio da segunda imagem de espaço vazio com um valor de pixel de uma área da primeira imagem de espaço vazio correspondendo à área da segunda imagem de espaço vazio, em adição à primeira imagem de vista.

[000110] Em outra modalidade exemplar, o módulo de geração de imagem de espaço vazio 121 pode gerar a imagem de espaço vazio mediante deslocamento de pixels por distâncias preestabelecidas de acordo com os niveis das profundidades para os pixels da imagem original.

[000111] Em outra modalidade exemplar, o módulo de seleção de área similar 122 pode preferivelmente realizar a operação de seleção em um remendo que tem uma grande diferença em valores de pixel entre a área de espaço vazio e o segundo plano no pelo menos um remendo dividido.

[000112] Em outra modalidade exemplar, o módulo de seleção de área similar 122 pode determinar um grau de similaridade mediante comparação de uma cor, profundidade, e um gradiente de cada porção da área preestabelecida da imagem original e aqueles do segundo plano incluido no pelo menos um remendo dividido.

[000113] Em outra modalidade exemplar, o módulo de seleção de área similar 122 e o módulo de geração de imagem 123 podem gerar a primeira imagem de vista mediante repetição do processo até que as áreas de espaço vazio da imagem de espaço vazio sejam preenchidas.

[000114] Em outra modalidade exemplar, o controlador 120 pode incluir ainda um módulo de geração de imagem de múltiplas vistas configurado para gerar uma imagem de múltiplas vistas mediante combinação de pixels de áreas da primeira imagem de vista e da segunda imagem de vista correspondendo uma à outra.

[000115] A unidade de saida é configurada para produzir a primeira imagem de vista gerada. A unidade de saída 130 pode ser implementada com pelo menos um selecionado do grupo consistindo em: painéis de exibição de cristal líquido (LCD); painéis de exibição de plasma (PDPs); diodos de emissão de luz orgânica (OLEDs), dispositivos de exibição fluorescente a vácuo (VFDs); dispositivos de exibição de emissão de campo (FEDs); e dispositivos de exibição de eletro luminescência (ELDs).

[000116] Com referência à Figura 14, o aparelho de exibição de imagem de múltiplas vistas 100' de acordo com outra modalidade exemplar inclui uma unidade de recepção 110, um controlador 120, uma unidade de paralaxe 150, um painel de exibição 130, e uma unidade de retroiluminação 140.

[000117] A unidade de recepção 110, o controlador 120, e o painel de exibição (unidade de saída) 130 foram descritos acima e assim a sua descrição será omitida. Isto é, como o controlador 120 realiza a operação descrita acima, o aparelho de exibição de imagem de múltiplas vistas 100' gera a imagem de múltiplas vistas de acordo com o método de geração de imagem de múltiplas vistas, descrito acima e exibe a imagem de múltiplas vistas gerada no painel de exibição 130.

[000118] A unidade de retroiluminação 140 pode ser uma unidade de retroiluminação geral que é convencionalmente aplicada aos painéis LCD, ou uma unidade de retroiluminação sequencial em cores que é aplicada aos dispositivos de exibição LCD em cores sequenciais de cor. Isto é, o tipo da unidade de retroiluminação 140 pode ser mudado de acordo com o tipo do painel de exibição 130.

[000119] A unidade de paralaxe 150 é disposta na frente do painel de exibição 130 e dispersa a luz emitida a partir do painel de exibição 130 de acordo com as áreas de visualização. Portanto, a luz correspondendo às imagens que têm diferentes pontos de visão de acordo com as áreas de visualização é emitida. A unidade de paralaxe 150 pode ser implementada com uma barreira de paralaxe ou um arranjo de lentes lenticulares. A barreira de paralaxe é implementada com um arranjo de fendas transparentes incluindo uma pluralidade de regiões de barreira. 0 arranjo de fendas transparentes bloqueia a luz através das fendas entre as regiões de barreira para emitir luz de imagem que tem diferentes pontos de visão de acordo com as áreas de visualização. Uma largura e o passo da fenda podem ser projetados diferentemente de acordo com o número de imagens de vista incluídas na imagem de múltiplas vistas e uma distância de visualização. 0 arranjo de lentes lenticulares inclui uma pluralidade de áreas de lente. As áreas de lente são formadas para ter um tamanho que corresponde a pelo menos uma coluna de pixel e dispersam a luz de forma diferente, que transmite os pixels de cada coluna de pixel, de acordo com as áreas de visualização. Cada área de lente pode incluir uma lente circular. Os passos e os raios de curvatura das lentes podem ser projetados diferentemente de acordo com o número de imagens de vista e uma distância de visualização. A unidade de paralaxe 150 é disposta para combinar com uma direção de coluna de pixels providos no painel de exibição 130.

[000120] Um aparelho para exibir uma imagem de múltiplas vistas através da interpolação de área de espaço vazio na técnica relacionada realiza a operação através de um método de simplesmente preencher uma área de espaço vazio com um valor de pixel de um segundo plano adjacente em unidades de linhas horizontais ou um método de reduzir um tamanho de espaço vazio. Nesse caso, uma imagem de uma porção correspondendo a uma área de espaço vazio em uma imagem de múltiplas vistas efetivamente gerada é frequentemente distorcida. Especificamente, quando uma profundidade de uma área de segundo plano adjacente é relativamente elevada como um caso em que um segundo plano em torno da área de espaço vazio é uma área que se projeta estruturalmente na imagem, uma distorção da imagem é grave.

[000121] Contudo, os aparelhos de exibição de imagem de múltiplas vistas 100 e 100' de acordo com as modalidades exemplares dividem a região de limite entre a área de espaço vazio e o segundo plano em pelo menos um remendo e preenche a área de espaço vazio com pixels correspondentes da porção mais similar na imagem original para o remendo para resolver o problema. Nesse caso, a porção formando a estrutura na imagem original não é simplesmente preenchida com pixels de segundo plano adjacente, mas preenchida utilizando a imagem mais similar de modo que uma imagem de múltiplas vistas suave pode ser gerada.

[000122] Adicionalmente, quando os aparelhos de exibição de imagem de múltiplas vistas 100 e 100'' de acordo com as modalidades exemplares geram uma imagem de múltiplas vistas, os aparelhos de exibição de imagem de múltiplas vistas 100 e 100' comparam porções das imagens que são escalonadas com várias proporções com um remendo para determinar uma porção tendo um grau superior de similaridade para uma área de segundo plano do remendo entre uma pluralidade de porções similares. Isto é, uma imagem de espaço vazio é gerada através de uma imagem original, uma área de espaço vazio da imagem de espaço vazio é dividida em remendos, e a área de espaço vazio é preenchida com a imagem tendo o alto grau de similaridade na imagem original de modo que uma imagem de múltiplas vistas natural sem distorção pode ser gerada.

[000123] Quando os aparelhos de exibição de imagem de múltiplas vistas 100 e 100'' de acordo com as modalidades exemplares geram uma imagem de múltiplas vistas, se os aparelhos de exibição de imagem de múltiplas vistas 100 e 100' geram uma imagem tendo um ponto de visão que existe entre dois pontos de visão diferentes a partir das imagens que têm dois pontos de visão diferentes, simplesmente, os aparelhos de exibição de imagem de múltiplas vistas 100 e 100' geram duas imagens de espaço vazio e preenchem uma área de espaço vazio de uma imagem de espaço vazio com um valor de pixel de outra imagem de espaço vazio correspondendo à área de espaço vazio daquela imagem de espaço vazio. Portanto, quando o número de imagens individuais é aumentado, os aparelhos de exibição de imagem de múltiplas vistas 100 e 100A podem gerar de forma rápida e efetiva a imagem de múltiplas vistas.

[000124] As modalidades e vantagens exemplares precedentes são apenas exemplares e não devem ser consideradas como limitando o presente conceito inventivo. As modalidades exemplares podem ser empregadas prontamente a outros tipos de dispositivos. Além disso, a descrição das modalidades exemplares pretende ser ilustrativa, e não para limitar o escopo das reivindicações, e muitas alternativas, modificações e variações serão evidentes para aqueles versados na arte.

Claims

1. MÉTODO DE GERAÇÃO DE IMAGEM DE MÚLTIPLAS VISTAS, caracterizado por compreender: gerar uma imagem de espaço vazio utilizando informação de profundidade de uma imagem original; dividir uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um plano de fundo em uma pluralidade de remendos; selecionar pelo menos um primeiro remendo que fica disposto numa área adjacente ao plano de fundo em meio à pluralidade de remendos; selecionar pelo menos um segundo remendo possuindo um valor de pixel mais similar à uma porção de plano de fundo incluso no pelo menos um remendo, de uma área da imagem original; e preencher a área de espaço vazio do pelo menos um remendo com um valor de pixel que é o mais similar a uma porção de plano de fundo incluso no pelo menos um remendo, para gerar uma primeira imagem de vista.

2. Método de geração de imagem de múltiplas vistas, de acordo com a reivindicação 1, caracterizado por a geração da imagem de espaço vazio incluir geração da imagem de espaço vazio mediante deslocar pixels por distâncias de acordo com os níveis de profundidades dos pixels da imagem original.

3. Método de geração de imagem de múltiplas vistas, de acordo com a reivindicação 1, caracterizado por a seleção do pelo menos um remendo compreender selecionar um remendo possuindo uma grande diferença em valores de pixels entre a área de espaço vazio e a porção de plano de fundo na pluralidade de remendos como o pelo menos um primeiro remendo.

4. Método de geração de imagem de múltiplas vistas, de acordo com a reivindicação 1, caracterizado por a seleção do pelo menos um segundo remendo compreender determinar um grau de similaridade mediante comparação de uma cor, profundidade, e gradiente da porção de plano de fundo inclusa no pelo menos um primeiro remendo e o pelo menos um segundo remendo.

5. Método de geração de imagem de múltiplas vistas, de acordo com a reivindicação 1, caracterizado por a primeira imagem de vista ser gerada mediante realizar repetidamente um processo a partir da geração de uma imagem de espaço vazio para o preenchimento de uma área de espaço vazio até que as áreas de espaço vazio da imagem de espaço vazio sejam completamente preenchidas.

6. Método de geração de imagem de múltiplas vistas, de acordo com a reivindicação 4, caracterizado por os pixels possuindo níveis maiores de profundidades serem deslocados mais que os pixels possuindo níveis menores de profundidades.

7. APARELHO DE EXIBIÇÃO DE IMAGEM DE MÚLTIPLAS VISTAS, caracterizado por compreender: uma unidade de recepção configurada para receber uma imagem original; um controlador que inclui um módulo de geração de imagem de espaço vazio configurado para gerar uma imagem de espaço vazio utilizando informação de profundidade da imagem original, um módulo de seleção de área similar configurado para dividir uma região de limite na qual uma área de espaço vazio da imagem de espaço vazio gerada está em contato com um plano de fundo, numa pluralidade de remendos, selecionar pelo menos um primeiro remendo que está disposto numa área adjacente ao plano de fundo dentre a pluralidade de remendos; e selecionar pelo menos um segundo remendo possuindo um valor de pixel mais similar a uma porção de plano de fundo incluso no pelo menos um primeiro remendo, de uma área da imagem original, e um módulo gerador de imagem configurado para preencher a área de espaço vazio do pelo menos um primeiro remendo com um valor de pixel que é o mais similar à porção de plano de fundo incluso no pelo menos um segundo remendo, para gerar uma primeira imagem de vista; e um painel de exibição configurado para produzir a primeira imagem de vista gerada.

8. Aparelho de exibição de imagem de múltiplas vistas, de acordo com a reivindicação 7, caracterizado por o módulo de geração de imagem de espaço vazio gerar a imagem de espaço vazio mediante deslocamento dos pixels por distâncias preestabelecidas de acordo com os níveis de profundidades dos pixels da imagem original.

9. Aparelho de exibição de imagem de múltiplas vistas, de acordo com a reivindicação 7, caracterizado por o módulo de seleção da área similar realizar a operação de seleção em um remendo possuindo uma grande diferença em valores de pixels entre a área de espaço vazio e a porção de plano de fundo na pluralidade de remendos divididos como o pelo menos um primeiro remendo.

10. Aparelho de exibição de imagem de múltiplas vistas, de acordo com a reivindicação 7, caracterizado por o módulo de seleção de área determinar um grau de similaridade mediante comparação de uma cor, profundidade e gradiente da porção de plano de fundo inclusa no pelo menos um primeiro remendo e no pelo menos um segundo remendo.

11. Aparelho de exibição de imagem de múltiplas vistas, de acordo com a reivindicação 7, caracterizado por o módulo de seleção de área similar e o módulo de geração de imagem gerarem a primeira imagem de vista mediante realizar repetidamente a operação de seleção e a operação de preenchimento até que as áreas de espaço vazio da imagem de espaço vazio estejam completamente preenchidas.

12. Aparelho de exibição de imagem de múltiplas vistas, de acordo com a reivindicação 8, caracterizado por os pixels possuindo níveis maiores de profundidades serem deslocados mais que os pixels possuindo níveis menores de profundidades.