BRPI0212375B1 - método para estabilizar uma imagem - Google Patents

método para estabilizar uma imagem Download PDF

Info

Publication number
BRPI0212375B1
BRPI0212375B1 BRPI0212375A BR0212375A BRPI0212375B1 BR PI0212375 B1 BRPI0212375 B1 BR PI0212375B1 BR PI0212375 A BRPI0212375 A BR PI0212375A BR 0212375 A BR0212375 A BR 0212375A BR PI0212375 B1 BRPI0212375 B1 BR PI0212375B1
Authority
BR
Brazil
Prior art keywords
image
pixel
color
digital
frame
Prior art date
Application number
BRPI0212375A
Other languages
English (en)
Other versions
BR0212375A (pt
Inventor
Gene Arthur Grindstaff
Susan Heath Calvin Fletcher
Therman Ward Mckay Iii
Original Assignee
Intergraph Hardware Tech Co
Intergraph Software Tech Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intergraph Hardware Tech Co, Intergraph Software Tech Co filed Critical Intergraph Hardware Tech Co
Publication of BR0212375A publication Critical patent/BR0212375A/pt
Publication of BRPI0212375B1 publication Critical patent/BRPI0212375B1/pt

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/68Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682Vibration or motion blur correction
    • H04N23/683Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Circuits (AREA)

Abstract

"estabilização de imagem usando combinação de cor". um método para estabilização de imagem de pelo menos duas imagens digitais é mostrado. em uma modalidade como essa, uma primeira imagem digital tendo uma pluralidade de pixels e pelo menos uma segunda imagem tendo uma pluralidade de pixels são providas. cada pixel tem um endereço associado para exibição e é representativo de uma cor. um usuário do sistema provê uma faixa de combinação de cor ou o sistema provê uma faixa combinada de cor predeterminada. um pixel é selecionado na primeira imagem digital. preferencialmente, o pixel é um que represente um item na imagem que está borrado devido a um movimento do item ou parece instável, devido a um movimento de câmera. devido ao vasto número de cores disponíveis, um pixel selecionado em uma primeira imagem pode ser combinado com um pixel em uma segunda imagem em uma faixa. a faixa permite uma compensação devido a mudanças de iluminação. uma vez que o pixel na primeira imagem seja selecionado, ele pode ser comparado com todos os pixels na segunda imagem. cada pixel na segunda imagem que está na faixa de combinação de cor é salvo e a cor de pixel mais próxima do pixel da primeira imagem é selecionada. o endereço dos pixels na segunda imagem, então, é reendereçado, de modo que o endereço do pixel localizado na segunda imagem que tem a cor mais próxima do pixel na primeira imagem, agora, tenha o mesmo endereço de exibição que aquele do pixel na primeira imagem. a imagem digital reposicionada, então, é armazenada em uma memória.

Description

Relatório Descritivo da Patente de Invenção para "MÉTODO PARA ESTABILIZAR UMA IMAGEM".
Campo Técnico [001] A presente invenção refere-se à análise de imagens de vídeo e, mais especificamente, a uma estabilização de imagens de vídeo.
Fundamentos [002] A estabilização de vídeo é conhecida na técnica anterior para a minimização de instabilidade de imagem devido a um movimento de câmera, através de sistemas de retroalimentação mecânica ou através de processamento de sinal digital. As técnicas de processamento de sinal digital da técnica anterior são complicadas e, freqüen-temente, são baseadas em estimativa de movimento e análise de vetor. Essas técnicas são projetadas de modo a serem minimamente in-trusivas para um movimento na imagem e avaliam o movimento de blocos de pixels, de modo a se isolar uma instabilidade de movimento da câmera.
[003] Quando os objetos se movem nas imagens de vídeo capturadas, em oposição a um movimento de câmera, os detalhes do objeto em movimento sendo capturado, freqüentemente, são difíceis de discernir. Por exemplo, uma placa de licença de um carro em movimento, freqüentemente, é difícil de se ler, quando as imagens de vídeo capturadas são exibidas, devido à grande quantidade de movimento de quadro para quadro do carro. Em uma situação como essa, uma consideração do movimento do carro melhoraria a capacidade de se ler a placa de licença.
[004] As técnicas de estabilização de imagem tradicionais, como discutido acima, não provêem uma forma de se considerar um movimento, tal como um movimento de um carro, de modo a se tornar uma placa de licença mais legível, porque as técnicas são projetadas para permitirem que um movimento seja visível na sequência de imagens de vídeo, enquanto apenas se remove um movimento devido ao movimento da câmera.
Sumário da Invenção [005] Em uma modalidade da invenção, um método para estabilização de imagem de pelo menos duas imagens digitais é mostrado. Em uma modalidade como essa, uma primeira imagem digital tendo uma pluralidade de pixels e pelo menos uma segunda imagem tendo uma pluralidade de pixels são providas. Cada pixel tem um endereço associado para exibição e é representativo de uma cor. Um usuário do sistema provê uma faixa de combinação de cor ou o sistema provê uma faixa combinada de cor predeterminada, Um pixel é selecionado na primeira imagem digital. Preferencial mente, o pixel é um que represente um item na imagem que esteja borrado devido a um movimento do item ou que pareça instável devido a um movimento de câmera. Devido ao vasto número de cores disponíveis, um pixel selecionado em uma primeira imagem pode ser combinado com um pixel em uma segunda imagem em uma faixa. A faixa permite uma compensação devido a mudanças de iluminação. Uma vez que o pixel na primeira imagem seja selecionado, ele pode ser comparado com todos os pixels na segunda imagem. Cada pixel na primeira imagem que esteja na faixa de combinação de cor é salvo e a cor de pixel mais próxima para o pixel da primeira imagem é selecionada. O endereço dos pixels na segunda imagem, então, é reendereçado, de modo que o endereço do pixel localizado na segunda imagem que tem a cor mais próxima com o pixel na primeira imagem agora tenha o mesmo endereço de exibição que aquele do pixel na primeira imagem. A segunda imagem digital reposicionada, então, é armazenada em uma memória.
[006] Em outras modalidades, a área de imagem que é para ser pesquisada na segunda imagem pode ser selecionada por um usuário do método. Em uma outra modalidade, um ponto de alinhamento pode ser selecionado para alinhamento da primeira imagem digital e da segunda imagem digital reposicionada, de modo que o pixel do primeiro quadro esteja alinhado com o ponto de alinhamento e o pixel na segunda imagem digital esteja alinhado com o ponto de alinhamento quando exibido em um dispositivo de exibição.
[007] Uma vez que a segunda imagem digital esteja salva, a primeira imagem digital e a segunda imagem digital reposicionada podem ser exibidas seqüencialmente em um dispositivo de exibição, onde o movimento do item será minimizado.
[008] Em uma outra modalidade, uma interpolação pode ser empregada para se determinarem valores de cor para comparação em uma sequência de imagens de vídeo. Na sequência, uma imagem digital de começo e uma imagem digital de término a partir da sequência criando uma sequência de subconjunto são selecionadas. Um pixel é selecionado na imagem digital de começo e um pixel é selecionado na imagem digital de término. Uma interpolação linear é realizada entre a cor do pixel na imagem digital de começo e na cor do pixel na imagem digital de término, de modo que uma cor interpolada seja determinada para cada imagem entre a imagem digital de começo e a imagem digital de término. Para cada cor interpolada associada a uma imagem, um pixel é pesquisado para dentro daquela imagem em uma faixa predeterminada de cores. Uma vez que um pixel seja encontrado, cada imagem é reposicionada, de modo que o endereço do pixel tendo a cor interpolada seja posicionado para o endereço do pixel selecionado na imagem de começo.
[009] Em certas modalidades, a faixa de combinação de cor pode ser igual a zero, de modo que uma combinação exata precise ser encontrada. Quanto maior o número de cores representativas, tal como cor verdadeira ou 16,7 milhões de cores, maior a tendência de uma combinação de um pixel em um primeiro quadro representar a mesma localização física que aquela de um pixel em um segundo quadro tendo a mesma cor ou uma muito similar. Se uma cor não for encontrada em uma imagem que esteja em uma faixa de combinação de cor, o método pode ser padronizado para uma fórmula padronizada para reposicionamento da imagem, com base em uma informação histórica.
[0010] O método também pode ser implementado em um sistema de computador e ser realizado em um produto de programa de computador para uso com o sistema de computador, no qual o método é realizado em um código que pode ser lido em computador. Ainda, o método pode ser realizado em um sistema o qual inclui uma interface de usuário, um processador e uma memória associada. O processador inclui um módulo de interface de usuário para o recebimento de sinais da interface de usuário. Em uma configuração como essa, um usuário pode enviar sinais para o processador através da interface de usuário, indicando a sequência de vídeo a ser processada, indicando uma faixa de combinação de cor, selecionando valores de pixel, selecionando posições de alinhamento, por exemplo. O processador também inclui um módulo de localização, para a localização de um pixel em um segundo quadro tendo uma cor associada que esteja em uma faixa de cor de uma cor associada à seleção de pixel a partir do primeiro quadro de vídeo. O processador ainda inclui um módulo de reposicionamento, para reendereçamento do segundo quadro de vídeo, de modo que o pixel localizado do segundo quadro tenha um endereço que seja o mesmo endereço que a seleção de pixel do primeiro quadro de vídeo e, também, inclui um módulo de armazenamento para o armazenamento do segundo quadro de vídeo reendereçado.
Breve Descrição dos Desenhos [0011] Os aspectos da invenção serão mais prontamente compreendidos por uma referência à descrição detalhada a seguir, tomada com referência aos desenhos em anexo, nos quais: [0012] a Figura 1 é uma imagem que tem uma resolução de 800 x 600 pixels;
[0013] a Figura 2 é um fluxograma que mostra um método para estabilização de imagem através de combinação de cor realizado em conjunto com um sistema de computador;
[0014] as Figuras 3A a C mostram pixels sendo reposicionados em uma tela;
[0015] a Figura 3A mostra um primeiro quadro com um pixel selecionado;
[0016] a Figura 3B mostra um segundo quadro com um pixel marcado tendo uma cor em uma tolerância de cor do pixel selecionado na Figura 3A;
[0017] a Figura 3C mostra o segundo quadro da Figura 3B sobreposto e realinhado no primeiro quadro da Figura 3A;
[0018] a Figura 4 é um fluxograma que mostra uma outra modalidade para estabilização de imagem;
[0019] a Figura 5 é um fluxograma que mostra uma outra modalidade de estabilização de imagem que usa combinação de cor e inter-polação;
[0020] a Figura 6 mostra uma seleção de pixel em um quadro de começo e em um de término de uma sequência de vídeo;
[0021] a Figura 7A mostra uma sequência de vídeo antes da estabilização de imagem, na qual todas as imagens estão alinhadas;
[0022] a Figura 7B mostra a sequência de vídeo da Figura 7A após um realinhamento; e [0023] a Figura 8 mostra uma modalidade da invenção como um sistema.
Descrição Detalhada de Modalidades Específicas [0024] Como usado no texto a seguir, o termo "sequência de ví- deo" implica em uma representação digital de uma sequência de imagens, as quais podem ser temporalmente exibidas em um dispositivo de exibição. Tipicamente, uma sequência de vídeo contém uma pluralidade de quadros, onde cada quadro representa uma imagem separada. Os quadros ainda podem ser subdivididos de modo que os quadros sejam constituídos por uma série de pixels. Como usado na descrição a seguir, o termo "pixel" deve significar um ponto médio de uma imagem. Quanto maior o número de pixels que estiverem contidos em uma imagem, maior a resolução do vídeo. A resolução de uma imagem / um quadro, convencionalmente, é referenciada por medições de comprimento e largura do número de pixels, por exemplo, em uma resolução de 800 x 600, há 800 pixels ao longo do comprimento de uma imagem por 600 pixels ao longo da largura da imagem. Associado a cada pixel há um endereço. Por exemplo, como mostrado na Figura 1, uma imagem tendo uma resolução de 800 x 600 é apresentada, e o pixel no endereço (200, 300) é marcado com um X, onde a origem está localizada no canto esquerdo superior da tela. Como usado aqui, um quadro pode ser uma imagem completa ou uma porção de uma imagem, tal como um campo o qual inclui apenas metade de uma imagem completa.
[0025] Em uma modalidade da invenção, um método é apresentado para estabilização de imagens de vídeo de uma sequência de vídeo digital, onde a sequência de vídeo digital inclui uma pluralidade de imagens / quadros digitais. A estabilização é realizada através de uma combinação de cor de uma cor de pixel selecionada em um primeiro quadro pela pesquisa por um pixel em um segundo quadro que tem uma cor a qual cai em uma tolerância de cor. O segundo quadro, então, é alinhado com o primeiro quadro, de modo que o pixel no segundo quadro com a combinação de cor tenha o mesmo endereço de pixel que aquele do pixel selecionado para o primeiro quadro. O segundo quadro, então, é armazenado em uma memória. Esta metodologia é especialmente útil conforme a resolução e o número de cores possíveis, as quais podem ser representadas, aumentarem. Conforme o vídeo se move para formatos HDTV, os quais têm 16,7 milhões e mais cores possíveis para um valor de cor de pixel, os valores de cor de pixel se tornam mais únicos e, assim, um acompanhamento de cor é um meio mais eficaz para combinação de imagens e provisão de estabilização de imagens e considerando movimento nas imagens.
[0026] O método para estabilização de imagem através de combinação de cor é realizado em conjunto com um sistema de computador, onde o sistema de computador inclui pelo menos um visor, um dispositivo de entrada, uma memória associada e um processador. O método é explicado em detalhes mais formais com referência à Figura 2. Primeiramente, uma sequência digital é recuperada pelo processamento do sistema de computador a partir de um local de memória 200. Uma tolerância de cor é predeterminada ou acessada pelo procedimento ou o usuário é consultado para introduzir uma tolerância de cor 210. A tolerância de cor é a faixa dentro da qual uma combinação de cor pode ser julgada como ocorrendo. Um primeiro quadro da sequência de vídeo, então, é exibido para um usuário. O usuário, então, seleciona um pixel no primeiro quadro 220. Preferencialmente, o pixel é de uma cor distinta, ou o pixel é parte de um objeto, o qual se move na sequência de vídeo e parece instável, quando a sequência de vídeo é exibida. Após o pixel ser selecionado, o processador identifica a cor associada ao pixel 230. O processador, então, recupera o segundo quadro e realiza uma busca do segundo quadro para identificação de um pixel que tenha a mesma cor que aquela do pixel selecionado a partir do primeiro quadro na tolerância de cor 240. A combinação de cor pode ser realizada tomando-se a cor geral para um pixel, incluindo todos os componentes de cor ou ponderando-se os componentes de cor individuais.
Por exemplo, se a sequência de vídeo for representada em um espaço de cor R, G, B, uma combinação de cor idêntica (isto é, tendo uma tolerância de cor de 0%) poderia requerer que cada um dos valores de R, G e B fossem idênticos. A tolerância de cor pode ser a diferença geral de cor como uma percentagem. Por exemplo, uma tolerância de cor pode ser de 0,005%, onde o espaço de cor inclui 16,7 milhões de cores ou uma tolerância de cor pode requerer que cada componente de cor deva estar em uma certa tolerância de, diga-se, 10% de cada valor de R, G e B do pixel selecionado. Uma vez que um pixel no referida seja identificado, o endereço de pixel a partir do segundo quadro, então, é alinhado com o endereço de pixel do pixel selecionado do primeiro quadro 250. As Figuras 3A, B e C mostram os pixels sendo reposicionados. A Figura 3A mostra um primeiro quadro com um pixel selecionado marcado com um X, como seria exibido no dispositivo de exibição. A Figura 3B é um segundo quadro, onde um pixel que combina com o pixel selecionado do primeiro quadro é identificado com um O. A Figura 3C mostra que os pixels exibidos do segundo quadro estão reposicionados e, assim, reendereçados. Após o segundo quadro ser reposicionado e, assim, os endereços de todos os pixels do quadro serem mudados, o segundo quadro realinhado é armazenado na memória pelo processador 260. Este processo pode ser continuado para cada quadro de uma sequência de vídeo. Em uma modalidade como essa, a cor do pixel selecionado do primeiro quadro seria buscada em cada quadro subseqüente. Deve ser notado que alguns valores de pixel do segundo quadro realinhado não serão mostrados no dispositivo de exibição, porque os novos endereços desses pixels caem fora dos endereços de exibição. Ainda, alguns endereços de exibição para o segundo quadro realinhado não terão valores de cor para os pixels. Em uma modalidade, esses endereços de pixel são tornados pretos. Em algumas modalidades, valores de cor padronizados podem ser atribuídos, tais como os valores de cor de endereços de pixel adjacentes.
[0027] A metodologia pode ser definida, ainda, como mostrado na Figura 4. Como expressado acima, uma sequência de vídeo é recebida por um processador a partir de um local de memória. Um primeiro quadro é apresentado para um usuário. O usuário define uma área de busca em uma etapa de quadro de vídeo 401. Por exemplo, o usuário pode usar um dispositivo de entrada, tal como um mouse ou uma caneta de luz para indicar graficamente a área de busca. Em uma modalidade, todo o quadro de vídeo é a área de busca padronizada. Definir uma área de busca que seja menor do que toda a imagem pode ser benéfico em imagens nas quais um usuário está interessado em um elemento em particular de uma imagem. Por exemplo, se a sequência de vídeo for de um carro que esteja se afastando e o usuário estiver interessado na placa de licença do carro, o usuário pode selecionar uma subseção do quadro de vídeo. No exemplo, o usuário indicaria que a placa de licença ou uma porção do carro foi o subconjunto selecionado da imagem. A imagem exibida após um realinhamento dos quadros poderia ser todo o quadro de vídeo ou apenas o subconjunto selecionado do quadro.
[0028] Em uma sequência de vídeo na qual o objeto em movimento que se deseja tornar parado se move através de todo o quadro, uma seleção de uma subseção da imagem, tal como aquela de uma placa de licença, deve ser feita por uma curta sequência de quadros. Por exemplo, se toda a sequência for de 120 campos de vídeo (aproximadamente 2 segundos), a sequência pode ser subdividida de modo que apenas uns poucos quadros (por exemplo, 10 campos) sejam usados. O carro e a placa de licença, então, podem ser designados como a subseção da imagem para fins de comparação, uma vez que a placa de licença do carro não se moverá muitos locais de pixel pelos 10 campos. Ao se selecionar uma subseção, isso melhora as chances de os pixels de cor combinada realmente representarem o mesmo ponto físico.
[0029] O usuário também é alertado pelo sistema de computador quanto a uma tolerância de cor, a qual, como explicado acima, é a margem aceitável de erro para combinação de uma cor 402. O usuário também pode indicar um ponto de alinhamento o qual é o ponto na tela de saída do dispositivo de exibição no qual se alinha o pixel cuja cor melhor combina com a cor de acompanhamento 403. Em uma modalidade, o padrão é o centro da tela no dispositivo de exibição, embora outras posições no visor também possam ser selecionadas. O usuário também provê a cor a ser acompanhada 404. Isso é feito pela observação do primeiro quadro de vídeo e pela seleção de um pixel usando-se o dispositivo de entrada de usuário.
[0030] Para cada quadro de vídeo 420, os valores de cor para cada pixel da área de busca são comparados 430 com os valores de cor da cor de acompanhamento selecionada a partir do primeiro quadro de vídeo. Se os valores de cor para o espaço de cor (por exemplo, R, G, B) de um pixel estiverem na tolerância introduzida 440, o pixel será considerado uma combinação. O pixel no qual a soma dos valores absolutos das diferenças entre os valores de cor de vermelho, verde e azul àqueles da cor de acompanhamento for menor é identificado como o ponto de combinação de cor. Se o ponto de combinação de cor estiver na tolerância introduzida para cada um dos valores de espaço de cor associado ao pixel selecionado, o quadro é deslocado 450, de modo que o pixel identificado como a melhor combinação de cor esteja posicionado no ponto de alinhamento na tela e o quadro deslocado, então, seja escrito na memória. Se nenhuma combinação de cor for encontrada, a imagem é deslocada 460 de acordo com uma fórmula predeterminada. Por exemplo, os deslocamentos podem ser determi- nados pela análise de deslocamentos passados e pelo cálculo da média dos deslocamentos, para se determinar como alinhar o quadro dos dados de vídeo. Por exemplo, a imagem pode ser deslocada na direção x por uma média ponderada de distâncias previamente deslocadas na direção x. De modo similar, o deslocamento na direção y pode ser uma média ponderada das distâncias previamente deslocadas na direção y.
[0031] Em outras modalidades, a imagem pode ser deslocada de acordo com as fórmulas a seguir: xdiff = ((sx1-sx2) + (sx2-sx3) + (sx3-sx4))/3 * (sd); e ydiff = ((sy1-sy2) + (sy2-sy3) + (sy3-sy4))/3 * (sd); onde sx1 = deslocamento horizontal prévio; sx2 = deslocamento horizontal antes de sx1; sx3 = deslocamento horizontal antes de sx2; sx4 = deslocamento horizontal antes de sx3; sy1 = deslocamento vertical prévio; sy2 = deslocamento vertical antes de sy1; sy3 = deslocamento vertical antes de sy2; sy4 = deslocamento vertical antes de sy3; onde sd é um fator de desaceleração.
[0032] O quadro, então, é deslocado 460 por uma quantidade dada pelas equações a seguir: deslocamento horizontal = sx1 + xdiff; e deslocamento vertical = sy1 + ydiff.
[0033] O quadro deslocamento, então, é escrito 465 no armazenamento de imagem de vídeo.
[0034] Se o fluxo de entrada contiver 470 mais quadros de vídeo, o próximo quadro é processado 420. Uma vez que todos os quadros do fluxo de entrada sejam processados, a operação de acompanhamento de cor está completa.
[0035] Uma vez que todos os quadros de vídeo sejam reposicio-nados usando-se o acompanhamento de cor, a sequência de quadros pode ser temporalmente exibida em um dispositivo de exibição e, assim, um movimento da câmera ou do objeto será reduzido. Além da exibição dos quadros de vídeo de uma forma temporal, os quadros de vídeo podem ter a média linearmente calculada de modo a se prover uma imagem de definição mais alta ou uma porção de uma imagem. Por exemplo, uma placa de licença em um veículo que está se movendo e a qual não pode ser lida devido a uma instabilidade pode ser lida uma vez que a imagem esteja estabilizada. Mesmo se não, todos os quadros podem ter a média linearmente calculada em conjunto para a produção de uma imagem de resolução mais alta que pode prover uma imagem melhorada, onde a placa de licença seja legível. Ao se alinharem precisamente as imagens para uma resolução de subpixel e pelo cálculo da média das imagens em conjunto, uma imagem de resolução mais alta pode ser gerada. Isso é devido ao fato de, como várias imagens de um objeto são capturadas, cada imagem apresentar uma parte ligeiramente diferente do objeto em cada quadro. Em geral, um mínimo de três a cinco quadros é necessário para se melhorar a imagem.
[0036] Em uma outra modalidade da invenção, uma interpolação é empregada em conjunto com uma combinação de cor, como é explicado na Figura 5. Em uma modalidade como essa, uma sequência de vídeo é provida em um sistema de computador 500. A um usuário do sistema é permitido ver a sequência de vídeo em um dispositivo de exibição e selecionar um quadro de começo e um quadro de término 501. Um pixel é selecionado em ambos o quadro de começo e o quadro de término 502. Preferencialmente, o pixel no quadro de começo e no quadro de término é um pixel que é parte de um objeto para o qual uma estabilização de movimento é desejada. Por exemplo, um pixel pode ser selecionado a partir de uma imagem de vídeo de um carro que esteja se movendo. Um pixel no quadro de término deve ser selecionado, que é parte do carro, como mostrado na Figura 6. O sistema, então, interpola entre o valor de cor para o pixel selecionado no quadro de começo e o valor de cor do pixel no quadro de término 503. O método de interpolação pode ser qualquer método de interpolação conhecido por uma pessoa versada na técnica, tal como interpolação linear, bilinear e bicúbica. O método de interpolação provê valores de interpolação para cada quadro entre o quadro de começo e o quadro de término. Por exemplo, se houver quatro quadros, um valor de cor interpolado seria determinado para o segundo e o terceiro quadros. Uma vez que um valor de cor seja determinado para cada quadro entre os quadros de começo e de término, o processador começa a buscar aquele valor de cor em cada respectivo quadro 504. O processador pode usar uma faixa de combinação de cor / tolerância de cor para localização de um pixel que combine com a cor. Em uma modalidade, o processador pesquisa o primeiro pixel que tenha a cor exata e não usa uma tolerância de cor. Em uma outra modalidade, cada pixel que está na tolerância de cor é salvo em uma memória e uma medição de diferença, como descrito acima, é determinada até o pixel com a combinação de cor mais próxima ser determinado 505. Se nenhum pixel combinar, o processador emprega uma fórmula tal como aquela provida acima, ou uma outra fórmula que seja baseada em análise de tendência ou uma outra propriedade da sequência de vídeo 506. Quando um pixel tiver sido selecionado para cada quadro, os quadros após o quadro de começo incluindo o quadro de término são realinhados 507. O realinhamento requer que os endereços associados de cada pixel sejam determinados novamente, de modo que quando a sequência de vídeo for exibida em um dispositivo de exibição a localização de pixel do pixel selecionado no primeiro quadro corresponda aos pixels nos quadros subseqüentes que combinam o valor de cor. Por exemplo, como mostrado na Figura 7A, um pixel é selecionado no quadro de começo, onde os quadros remanescentes são alinhados como eles seriam normalmente exibidos. A Figura 7B mostra os quadros de vídeo realinhados de modo que os pixels de cor combinada de todos os quadros subseqüentes ao quadro de começo sejam posicionados no mesmo ponto em uma tela de exibição que o pixel selecionado a partir do quadro de começo. Este processo pode ser repetido se menos do que toda a sequência de vídeo estiver incluído entre o quadro de começo e o quadro de término.
[0037] O método para estabilização de imagem pode ser realizado como um sistema, como mostrado na Figura 8. O sistema 800 inclui um dispositivo de entrada 801, tal como um mouse, uma trackball, um teclado, etc., e um visor de vídeo 802 e um processador 803 tendo uma memória associada 804. O processador inclui vários módulos. O primeiro módulo é um módulo de interface de usuário 803A, que opera para receber sinais do dispositivo de entrada de usuário. O usuário pode introduzir uma requisição para a realização de uma estabilização de imagem em uma sequência de imagem de vídeo selecionada. O usuário pode ver o primeiro quadro da sequência de vídeo e selecionar um pixel na sequência, onde o módulo de interface de usuário 803A recebe esta informação e envia a informação para um módulo de localização 803B, que identifica a cor do pixel selecionado e acessa um segundo quadro dos dados de vídeo. O módulo de localização 803B busca os valores de dados do segundo quadro, de modo a identificar o pixel que é a combinação de cor mais próxima com o pixel selecionado no primeiro quadro. Se nenhum pixel for encontrado que esteja na faixa de cor, então, o módulo de localização 803B é padronizado para uma fórmula predeterminada, tal como aquela a qual foi descrita acima. Quando um pixel tiver sido identificado, a localização do pixel é apresentada para um módulo de reposicionamento 803C, que reende-reça todos os pixels no segundo quadro, de modo que o pixel localizado no segundo quadro tenha um novo endereço que é o mesmo endereço de exibição que o pixel selecionado no primeiro quadro. A informação de endereço juntamente com os valores de cor de pixel correspondentes são armazenados na memória por um módulo de armazenamento 803D.
[0038] Deve ser notado que os fluxogramas são usados aqui para demonstrar vários aspectos da invenção, e não devem ser construídos para limitar a presente invenção a qualquer fluxo lógico em particular ou implementação lógica. A lógica descrita pode ser dividida em diferentes blocos lógicos (por exemplo, programas, módulos, funções ou sub-rotinas), sem se mudar os resultados gerais ou, de outra forma, se desviar do verdadeiro escopo da invenção. Muitas vezes, elementos lógicos podem ser adicionados, modificados, omitidos, realizados em uma ordem diferente, ou implementados usando-se diferentes construções lógicas (por exemplo, portas lógicas, primitivos de formação de laço, lógica condicional, e outras construções lógicas), sem se mudar os resultados gerais ou de outra forma se desviar do verdadeiro escopo da invenção.
[0039] A presente invenção pode ser realizada de muitas formas diferentes, incluindo, mas de forma alguma limitada a, uma lógica de programa de computador para uso com um processador (por exemplo, um microprocessador, um microcontrolador, um processador de sinal digital, ou um computador de finalidade geral), uma lógica programável para uso com um dispositivo lógico programável (por exemplo, um Arranjo de Porta Programável de Campo (FPGA) ou um outro PLD), componentes discretos, circuitos integrados (por exemplo, um Circuito Integrado Específico de Aplicação (ASIC)), ou quaisquer outros meios, incluindo qualquer combinação dos mesmos.
[0040] Uma lógica de programa de computador implementando toda ou parte da funcionalidade previamente descrita aqui pode ser realizada de várias formas, incluindo, mas de forma alguma limitando, uma forma de código fonte, uma forma executável em computador, e várias formas intermediárias (por exemplo, formas geradas por um montador, um compilador, agente de ligação ou um localizador). Um código fonte pode incluir uma série de instruções de programa de computador implementadas em qualquer uma de várias linguagens de programação (por exemplo, um código de objeto, uma linguagem de montagem ou uma linguagem de alto nível, tais como Fortran, C, C++, JAVA ou HTML) para uso com vários sistemas operacionais ou ambientes de operação. O código fonte pode definir e usar várias estruturas de dados e mensagens de comunicação. O código fonte pode estar em uma forma executável em computador (por exemplo, através de um intérprete), ou o código fonte pode ser convertido (por exemplo, através de um tradutor, um montador ou compilador) em uma forma executável em computador.
[0041] O programa de computador pode ser fixado em qualquer forma (por exemplo, uma forma de código fonte, uma forma executável em computador, ou uma forma intermediária) de modo permanente ou transitório em um meio de armazenamento tangível, tais como um dispositivo de memória de semicondutor (por exemplo, uma RAM, uma ROM, PROM, EEPROM, ou uma RAM Flash Programável), um dispositivo de memória magnético (por exemplo, um disquete ou um disco fixo), um dispositivo de memória ótico (por exemplo, um CD-ROM), um cartão PC (por exemplo, um cartão PCMCIA), ou um outro dispositivo de memória. O programa de computador pode ser fixado em qualquer forma em um sinal que seja transmissível para um computador usando-se qualquer uma de várias tecnologias de comunicação, incluindo, mas não limitado de forma alguma a, tecnologias analógicas, tecnolo- gias digitais, tecnologias óticas, tecnologias sem fio, tecnologias de formação de rede, e tecnologias de trabalho por internet. O programa de computador pode ser distribuído em qualquer forma como um meio de armazenamento removível com documentação impressa ou eletrônica associada (por exemplo, um software compactado ou uma fita magnética), pré-carregado com um sistema de computador (por exemplo, na ROM do sistema ou no disco fixo), ou distribuído a partir de um servidor ou de um quadro de boletim eletrônico pelo sistema de comunicação (por exemplo, a Internet ou a Rede Mundial).
[0042] Uma lógica de hardware (incluindo uma lógica programável para uso com um dispositivo de lógica programável), implementando toda ou parte de funcionalidade previamente descrita aqui, pode ser projetada usando-se métodos manuais tradicionais, ou pode ser projetada, capturada, simulada ou documentada eletronicamente, usando-se várias ferramentas, tais como Desenho Auxiliado por Computador (CAD), uma linguagem de descrição de hardware (por exemplo, VHDL ou AHDL), ou uma linguagem de programação PLD (por exemplo, PA-LASM, ABEL ou CUPL).
[0043] A presente invenção pode ser realizada em outras formas específicas, sem se desviar do verdadeiro escopo da invenção. As modalidades descritas devem ser consideradas em todos os aspectos como ilustrativas e não-restritivas.

Claims (10)

1. Método para estabilizar uma imagem de uma sequência digital de imagens, onde cada imagem tem uma pluralidade de pixels, e onde cada pixel (230) tem um endereço associado para exibição e é representativo de uma cor, o método compreendendo as etapas de: selecionar uma imagem digital de começo e de uma imagem digital de término a partir da sequência criando uma sequência de subconjunto; caracterizado pelo fato de que ainda compreende as etapas de: selecionar um pixel (230) na imagem digital de começo e de um pixel (230) na imagem digital de término; interpolar entre a cor do pixel (230) na imagem digital de começo e a cor do pixel (230) na imagem digital de término, de modo que uma cor interpolada seja determinada para cada imagem entre a imagem digital de começo e a imagem digital de término; para cada cor interpolada associada a uma imagem, buscar naquela imagem, de um pixel (230) tendo a cor interpolada em uma faixa predeterminada de cores; reposicionar cada imagem entre a imagem digital de começo e a imagem digital de término, de modo que o endereço do pixel (230) tendo a cor interpolada em uma imagem seja posicionado para o endereço do pixel (230) selecionado na imagem de começo.
2. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que ainda compreende exibir pelo menos da sequência de subconjunto em um visor.
3. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que ainda compreende selecionar uma área de imagem a ser usada para a localização de um pixel (230) na segunda imagem.
4. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que ainda compreende proporcionar um ponto de alinhamento para alinhamento da primeira imagem digital e da segunda imagem digital reposicionada, de modo que o pixel (230) do primeiro quadro (220) esteja alinhado com o ponto de alinhamento e o pixel (230) na segunda imagem digital esteja alinhado com o ponto de alinhamento, quando exibidos em um dispositivo de exibição.
5. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a sequência de subconjunto inclui todas as imagens na sequência.
6. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que a faixa de combinação de cor requer uma combinação de cor idêntica.
7. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que as cores de pixel (230) são representadas em um espaço de cor tendo milhões de cores.
8. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que se um pixel (230) não estiver localizado na faixa de combinação de cor, haverá uma aplicação de uma fórmula predeterminada para reposicionamento dos pixels (230) do segundo quadro.
9. Método, de acordo com a reivindicação 1, caracterizado pelo fato de que ainda compreende receber um sinal contendo uma informação representativa de uma faixa de combinação de cor.
10. Método para estabilizar uma imagem de uma sequência de imagens de vídeo digitais seqüencialmente exibidas, onde cada imagem contém vários pixels (230), e cada pixel (230) tem uma posição de exibição associada, o método compreendendo as etapas de: receber um sinal contendo uma informação representativa de uma cor associada a um pixel (230) contido em uma primeira imagem da sequência de imagens de vídeo digitais; receber um sinal representativo de uma cor contida em uma terceira imagem digital; caracterizado pelo fato de que ainda compreende as etapas de: interpolar entre a cor na primeira imagem de vídeo digital e a cor na terceira imagem de vídeo digital para a determinação de uma cor que pode ser buscada em uma segunda imagem de vídeo digital; identificar um pixel (230) na segunda imagem de vídeo digital que tem uma distância de cor em uma faixa limite a partir da cor que pode ser buscada, onde o limite pode ser qualquer valor, incluindo zero; e reposicionar a segunda imagem, de modo que o pixel (230) na segunda imagem tendo uma distância de cor na faixa limite resida na mesma posição que o pixel (230) da primeira imagem, quando exibidos em um dispositivo de exibição.
BRPI0212375A 2001-09-07 2002-09-06 método para estabilizar uma imagem BRPI0212375B1 (pt)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US31816401P 2001-09-07 2001-09-07
PCT/US2002/028352 WO2003024095A1 (en) 2001-09-07 2002-09-06 Image stabilization using color matching

Publications (2)

Publication Number Publication Date
BR0212375A BR0212375A (pt) 2006-03-01
BRPI0212375B1 true BRPI0212375B1 (pt) 2016-05-24

Family

ID=23236945

Family Applications (3)

Application Number Title Priority Date Filing Date
BRPI0212546-3A BR0212546A (pt) 2001-09-07 2002-09-06 método, dispositivo e produto de programa de computador para a demultiplexação de imagens de vìdeo
BRPI0212375A BRPI0212375B1 (pt) 2001-09-07 2002-09-06 método para estabilizar uma imagem
BRPI0212377A BRPI0212377B1 (pt) 2001-09-07 2002-09-06 método para visualização de um primeiro objeto, método para exibição de dados de primeiro objeto e sistema para a detecção de um primeiro objeto escondido por um segundo objeto

Family Applications Before (1)

Application Number Title Priority Date Filing Date
BRPI0212546-3A BR0212546A (pt) 2001-09-07 2002-09-06 método, dispositivo e produto de programa de computador para a demultiplexação de imagens de vìdeo

Family Applications After (1)

Application Number Title Priority Date Filing Date
BRPI0212377A BRPI0212377B1 (pt) 2001-09-07 2002-09-06 método para visualização de um primeiro objeto, método para exibição de dados de primeiro objeto e sistema para a detecção de um primeiro objeto escondido por um segundo objeto

Country Status (15)

Country Link
US (6) US6654049B2 (pt)
EP (3) EP1430444B1 (pt)
KR (3) KR100919340B1 (pt)
CN (4) CN101072364B (pt)
AU (3) AU2002327612B2 (pt)
BR (3) BR0212546A (pt)
CA (3) CA2459823C (pt)
CO (3) CO5570718A2 (pt)
HK (3) HK1069470A1 (pt)
IL (4) IL160759A0 (pt)
MX (3) MXPA04002209A (pt)
NZ (3) NZ531976A (pt)
RU (3) RU2310289C2 (pt)
WO (3) WO2003024112A1 (pt)
ZA (2) ZA200401972B (pt)

Families Citing this family (65)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100919340B1 (ko) * 2001-09-07 2009-09-25 인터그래프 소프트웨어 테크놀로지스 캄파니 비디오 이미지의 역다중화 방법, 장치 및 컴퓨터 프로그램제품
US7489802B2 (en) * 2002-09-10 2009-02-10 Zeev Smilansky Miniature autonomous agents for scene interpretation
JP4307910B2 (ja) 2003-03-07 2009-08-05 富士フイルム株式会社 動画像切り出し装置および方法並びにプログラム
JP3768968B2 (ja) 2003-03-28 2006-04-19 株式会社エヌ・ティ・ティ・ドコモ 通信端末及びプログラム
JP4017578B2 (ja) * 2003-09-19 2007-12-05 三洋電機株式会社 手ぶれ補正装置、手ぶれ補正方法および手ぶれ補正プログラムを記録した記録媒体
US7840067B2 (en) * 2003-10-24 2010-11-23 Arcsoft, Inc. Color matching and color correction for images forming a panoramic image
US7616220B2 (en) * 2003-12-23 2009-11-10 Intel Corporation Spatio-temporal generation of motion blur
US7506267B2 (en) * 2003-12-23 2009-03-17 Intel Corporation Compose rate reduction for displays
KR100562119B1 (ko) * 2004-04-29 2006-03-21 삼성탈레스 주식회사 동영상의 특성을 이용한 이미지의 정렬 방법
US7671916B2 (en) * 2004-06-04 2010-03-02 Electronic Arts Inc. Motion sensor using dual camera inputs
BRPI0514613A8 (pt) 2004-08-23 2018-06-12 Intergraph Software Tech Company Estabilização de imagem em tempo real
US20060120615A1 (en) * 2004-12-06 2006-06-08 Huiqiong Wang Frame compensation for moving imaging devices
CN101228549B (zh) * 2005-03-31 2012-10-17 本田技研工业株式会社 文件管理系统、文件管理方法
US7952612B2 (en) * 2006-06-22 2011-05-31 Nokia Corporation Method and system for image construction using multiple exposures
US20090010617A1 (en) * 2007-07-05 2009-01-08 International Business Machines Corporation Method and Apparatus for Optimizing Space Allocations for Digital Video Recordings
KR101392732B1 (ko) 2007-08-20 2014-05-08 삼성전자주식회사 손떨림에 의한 움직임 추정 장치 및 방법, 그를 이용한영상 촬상 장치
KR101268987B1 (ko) * 2007-09-11 2013-05-29 삼성전자주식회사 메타데이터를 자동적으로 생성/갱신하는 멀티미디어 데이터기록 방법 및 장치
US7800652B2 (en) * 2007-12-12 2010-09-21 Cyberlink Corp. Reducing video shaking
US8503863B2 (en) * 2007-12-18 2013-08-06 Panasonic Corporation Image reproduction device, image reproduction method, and image reproduction program
US8493313B2 (en) 2008-02-13 2013-07-23 Dolby Laboratories Licensing Corporation Temporal filtering of video signals
US8260395B2 (en) * 2008-04-18 2012-09-04 Medtronic, Inc. Method and apparatus for mapping a structure
US8164655B2 (en) * 2008-05-19 2012-04-24 Spatial Cam Llc Systems and methods for concurrently playing multiple images from a storage medium
US20100026822A1 (en) * 2008-07-31 2010-02-04 Itt Manufacturing Enterprises, Inc. Multiplexing Imaging System for Area Coverage and Point Targets
JP5233708B2 (ja) * 2009-02-04 2013-07-10 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US20100235314A1 (en) * 2009-02-12 2010-09-16 Decisive Analytics Corporation Method and apparatus for analyzing and interrelating video data
US8458105B2 (en) * 2009-02-12 2013-06-04 Decisive Analytics Corporation Method and apparatus for analyzing and interrelating data
EP2355037A1 (en) * 2009-12-18 2011-08-10 Nxp B.V. Method of and system for determining an average colour value for pixels
US9183560B2 (en) 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
CN102457701B (zh) * 2010-11-02 2014-03-12 华为终端有限公司 图像显示处理方法及装置
JP4932027B1 (ja) * 2010-11-15 2012-05-16 株式会社ナナオ 映像表示方法およびそれを用いた液晶表示装置
JP6122269B2 (ja) 2011-12-16 2017-04-26 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
US10715817B2 (en) * 2012-12-19 2020-07-14 Nvidia Corporation Apparatus and method for enhancing motion estimation based on user input
US9530310B2 (en) 2013-11-01 2016-12-27 Xerox Corporation Method and system for detecting and tracking a vehicle of interest utilizing a network of traffic image-capturing units
US10733471B1 (en) 2014-06-27 2020-08-04 Blinker, Inc. Method and apparatus for receiving recall information from an image
US9558419B1 (en) 2014-06-27 2017-01-31 Blinker, Inc. Method and apparatus for receiving a location of a vehicle service center from an image
US9760776B1 (en) 2014-06-27 2017-09-12 Blinker, Inc. Method and apparatus for obtaining a vehicle history report from an image
US9754171B1 (en) 2014-06-27 2017-09-05 Blinker, Inc. Method and apparatus for receiving vehicle information from an image and posting the vehicle information to a website
US9600733B1 (en) 2014-06-27 2017-03-21 Blinker, Inc. Method and apparatus for receiving car parts data from an image
US9818154B1 (en) 2014-06-27 2017-11-14 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US9607236B1 (en) 2014-06-27 2017-03-28 Blinker, Inc. Method and apparatus for providing loan verification from an image
US9589202B1 (en) 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for receiving an insurance quote from an image
US9594971B1 (en) 2014-06-27 2017-03-14 Blinker, Inc. Method and apparatus for receiving listings of similar vehicles from an image
US9563814B1 (en) 2014-06-27 2017-02-07 Blinker, Inc. Method and apparatus for recovering a vehicle identification number from an image
US9779318B1 (en) 2014-06-27 2017-10-03 Blinker, Inc. Method and apparatus for verifying vehicle ownership from an image
US10867327B1 (en) 2014-06-27 2020-12-15 Blinker, Inc. System and method for electronic processing of vehicle transactions based on image detection of vehicle license plate
US10572758B1 (en) 2014-06-27 2020-02-25 Blinker, Inc. Method and apparatus for receiving a financing offer from an image
US9773184B1 (en) 2014-06-27 2017-09-26 Blinker, Inc. Method and apparatus for receiving a broadcast radio service offer from an image
US9892337B1 (en) 2014-06-27 2018-02-13 Blinker, Inc. Method and apparatus for receiving a refinancing offer from an image
US10540564B2 (en) 2014-06-27 2020-01-21 Blinker, Inc. Method and apparatus for identifying vehicle information from an image
US9589201B1 (en) 2014-06-27 2017-03-07 Blinker, Inc. Method and apparatus for recovering a vehicle value from an image
US10515285B2 (en) 2014-06-27 2019-12-24 Blinker, Inc. Method and apparatus for blocking information from an image
US10579892B1 (en) 2014-06-27 2020-03-03 Blinker, Inc. Method and apparatus for recovering license plate information from an image
CN104599226B (zh) * 2015-02-14 2017-05-10 安徽大学 一种大容量隐写方法
US10019737B2 (en) * 2015-04-06 2018-07-10 Lewis Beach Image processing device and method
US10033926B2 (en) 2015-11-06 2018-07-24 Google Llc Depth camera based image stabilization
CN105282400B (zh) * 2015-11-20 2018-07-13 北京理工大学 一种基于几何插值的高效视频稳定方法
US11386759B2 (en) 2016-05-09 2022-07-12 Herbert S Kobayashi Three level detector signal for multicamera video alarm system for remote monitoring and method
US10679477B2 (en) 2016-05-09 2020-06-09 Herbert S Kobayashi Multicamera video alarm system for remote monitoring and method
KR101818129B1 (ko) * 2017-04-25 2018-01-12 동국대학교 산학협력단 나선 신경망 기법을 이용한 보행자 인식 장치 및 방법
RU2741516C1 (ru) * 2017-10-09 2021-01-26 Хуавей Текнолоджиз Ко., Лтд. Способ обработки отображения и электронное устройство
US11526970B2 (en) * 2019-09-04 2022-12-13 Samsung Electronics Co., Ltd System and method for video processing with enhanced temporal consistency
JP7209653B2 (ja) * 2020-02-05 2023-01-20 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理方法、及びプログラム
CN111312127B (zh) * 2020-02-24 2023-07-28 北京京东方光电科技有限公司 旋转显示屏的显示画面调整方法及装置、旋转显示屏
US11620967B2 (en) * 2020-03-16 2023-04-04 Lewis S. Beach Image processing device and method
CN113534281A (zh) * 2020-04-14 2021-10-22 深圳市博利凌科技有限公司 用于感测物体表面之后隐藏物位置的扫描仪及方法

Family Cites Families (108)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3652790A (en) 1970-01-28 1972-03-28 Itt Search and tracking television system and method
US3891798A (en) 1971-03-19 1975-06-24 Rockwell International Corp Tracker unit
US3952151A (en) * 1973-08-13 1976-04-20 Trw Inc. Method and apparatus for stabilized reproduction of remotely-sensed images
FR2302004A5 (fr) 1973-08-31 1976-09-17 Thomson Csf Systeme de poursuite automatique d'une cible, procedant par analyse de contraste video
US3988533A (en) 1974-09-30 1976-10-26 Video Tek, Inc. Video-type universal motion and intrusion detection system
US4120004A (en) 1976-01-26 1978-10-10 Coutta John M Surveillance system
US4405940A (en) 1977-05-31 1983-09-20 Westinghouse Electric Corp. Apparatus and method for preprocessing video frame signals
NL7801727A (nl) 1978-02-16 1979-08-20 Hollandse Signaalapparaten Bv Drempelspanningsselectieschakeling.
EP0028933A3 (en) 1979-11-09 1981-06-03 Ascotts Ltd. Surveillance system
US4603430A (en) * 1984-09-21 1986-07-29 Hughes Aircraft Company Target discrimination utilizing median filters
JPS61166289A (ja) * 1985-01-18 1986-07-26 Hitachi Ltd 画像伝送システム
JP2528789B2 (ja) 1985-06-26 1996-08-28 中央電子 株式会社 映像情報管理装置
DE3750703T2 (de) * 1986-03-25 1995-03-30 Nippon Oils & Fats Co Ltd Transparenter optischer Gegenstand und Verfahren zu seiner Herstellung.
DE3634414C2 (de) * 1986-10-09 1994-12-08 Thomson Brandt Gmbh Fernsehkamera mit einem Target
JPH0695008B2 (ja) 1987-12-11 1994-11-24 株式会社東芝 監視装置
KR920010034B1 (en) 1988-03-31 1992-11-13 Toshiba Co Ltd Image track display apparatus
GB2220319B (en) * 1988-07-01 1992-11-04 Plessey Co Plc Improvements in or relating to image stabilisation
JP2563567B2 (ja) * 1989-03-20 1996-12-11 松下電器産業株式会社 揺れ補正装置
KR910004009A (ko) 1989-07-27 1991-02-28 강진구 비디오 카메라의 자동촬영장치
US5175694A (en) 1990-02-08 1992-12-29 The United States Of America As Represented By The Secretary Of The Navy Centroid target tracking system utilizing parallel processing of digital data patterns
KR100204101B1 (ko) 1990-03-02 1999-06-15 가나이 쓰도무 화상처리장치
US5030984A (en) * 1990-07-19 1991-07-09 Eastman Kodak Company Method and associated apparatus for minimizing the effects of motion in the recording of an image
JP2863818B2 (ja) * 1990-08-31 1999-03-03 工業技術院長 動画像の変化点検出方法
US5243418A (en) 1990-11-27 1993-09-07 Kabushiki Kaisha Toshiba Display monitoring system for detecting and tracking an intruder in a monitor area
DE69215733T2 (de) * 1991-04-12 1997-04-10 Victor Company Of Japan Vorrichtung zur Detektion der relativen Bewegung zwischen Inhalten von aufeinanderfolgenden Halbbildern eines Videosignals
DE69229146T2 (de) * 1991-06-25 1999-10-28 Canon Kk Verfahren und Vorrichtung zur Detektion eines Bewegungsvektors sowie Kodierungsverfahren und Vorrichtung zur Anwendung eines solchen Verfahrens und Vorrichtung
US5164827A (en) 1991-08-22 1992-11-17 Sensormatic Electronics Corporation Surveillance system with master camera control of slave cameras
US5657402A (en) * 1991-11-01 1997-08-12 Massachusetts Institute Of Technology Method of creating a high resolution still image using a plurality of images and apparatus for practice of the method
US6469746B1 (en) * 1992-12-28 2002-10-22 Sanyo Electric Co., Ltd. Multi-vision screen adapter
WO1994017636A1 (en) 1993-01-29 1994-08-04 Bell Communications Research, Inc. Automatic tracking camera control system
US5473369A (en) * 1993-02-25 1995-12-05 Sony Corporation Object tracking apparatus
ES2258311T3 (es) * 1993-06-04 2006-08-16 Sarnoff Corporation Sistema y procedimiento para la estabilizacion electronica de imagenes.
JPH0773308A (ja) * 1993-09-03 1995-03-17 Matsushita Electric Ind Co Ltd デジタル画像処理装置
JP3123587B2 (ja) 1994-03-09 2001-01-15 日本電信電話株式会社 背景差分による動物体領域抽出方法
CA2125300C (en) * 1994-05-11 1999-10-12 Douglas J. Ballantyne Method and apparatus for the electronic distribution of medical information and patient services
DE4417128A1 (de) 1994-05-16 1995-12-14 Elnic Gmbh Bilderfassungs- und -verarbeitungsverfahren insbesondere zur Steuerung von Vorrichtungen sowie zugehöriges Bilderfassungs- und -verarbeitungssystem
US5635982A (en) 1994-06-27 1997-06-03 Zhang; Hong J. System for automatic video segmentation and key frame extraction for video sequences having both sharp and gradual transitions
US20020186874A1 (en) * 1994-09-07 2002-12-12 Jeffrey H. Price Method and means for image segmentation in fluorescence scanning cytometry
JP2902966B2 (ja) * 1994-12-16 1999-06-07 三洋電機株式会社 手振れ補正装置およびそれを用いたビデオカメラ
KR960028217A (ko) 1994-12-22 1996-07-22 엘리 웨이스 움직임 검출 카메라 시스템 및 방법
JPH08186760A (ja) * 1994-12-28 1996-07-16 Philips Japan Ltd 画揺れ補正装置
JP3268953B2 (ja) 1995-02-27 2002-03-25 三洋電機株式会社 追尾領域設定装置,動きベクトル検出回路およびそれを用いた被写体追尾装置
US5821985A (en) * 1995-02-28 1998-10-13 Nec Corporation Multi-point videoconference system having a fixed control station for data transfer
JP3892059B2 (ja) 1995-03-07 2007-03-14 松下電器産業株式会社 動物体追跡装置
US5973733A (en) * 1995-05-31 1999-10-26 Texas Instruments Incorporated Video stabilization system and method
ATE241179T1 (de) 1995-09-15 2003-06-15 Interval Research Corp Verfahren zur kompression mehrerer videobilder
US6018562A (en) * 1995-11-13 2000-01-25 The United States Of America As Represented By The Secretary Of The Army Apparatus and method for automatic recognition of concealed objects using multiple energy computed tomography
KR100188116B1 (ko) * 1995-12-28 1999-06-01 김광호 손떨림 영상 안정화 회로
US6108576A (en) 1996-03-18 2000-08-22 The Research Foundation Of City College Of New York Time-resolved diffusion tomographic 2D and 3D imaging in highly scattering turbid media
CA2173677C (en) * 1996-04-09 2001-02-20 Benoit Sevigny Processing image data
US5940139A (en) * 1996-08-07 1999-08-17 Bell Communications Research, Inc. Background extraction in a video picture
US5953055A (en) 1996-08-08 1999-09-14 Ncr Corporation System and method for detecting and analyzing a queue
US5915038A (en) * 1996-08-26 1999-06-22 Philips Electronics North America Corporation Using index keys extracted from JPEG-compressed images for image retrieval
US5974111A (en) 1996-09-24 1999-10-26 Vivid Technologies, Inc. Identifying explosives or other contraband by employing transmitted or scattered X-rays
US5751378A (en) 1996-09-27 1998-05-12 General Instrument Corporation Scene change detector for digital video
US5822542A (en) 1996-10-31 1998-10-13 Sensormatic Electronics Corporation Electronic and structural components of an intelligent video information management apparatus
GB2321358A (en) 1997-01-20 1998-07-22 O E M Project Management Ltd Video security system coupled to a fax modem
JP3317176B2 (ja) * 1997-02-06 2002-08-26 松下電器産業株式会社 映像伝送装置
US6360022B1 (en) * 1997-04-04 2002-03-19 Sarnoff Corporation Method and apparatus for assessing the visibility of differences between two signal sequences
DE69837463T2 (de) * 1997-06-03 2008-01-10 Koninklijke Philips Electronics N.V. Navigation durch fernsehprogramme
JP4240554B2 (ja) * 1997-07-11 2009-03-18 ソニー株式会社 画像符号化装置および画像符号化方法、並びに画像復号化装置および画像復号化方法
US6128108A (en) * 1997-09-03 2000-10-03 Mgi Software Corporation Method and system for compositing images
JPH1185654A (ja) * 1997-09-12 1999-03-30 Matsushita Electric Ind Co Ltd 仮想wwwサーバ装置およびカメラ制御可能なwwwサーバ装置
GB2329541B (en) 1997-09-17 2002-05-29 Sony Uk Ltd Security control system
US5973723A (en) * 1997-12-12 1999-10-26 Deluca; Michael Joseph Selective commercial detector and eliminator apparatus and method
US6363380B1 (en) 1998-01-13 2002-03-26 U.S. Philips Corporation Multimedia computer system with story segmentation capability and operating program therefor including finite automation video parser
US6151336A (en) * 1998-02-11 2000-11-21 Sorrento Networks, Inc. Time division multiplexing expansion subsystem
US6795112B1 (en) * 1998-03-13 2004-09-21 General Instrument Corp. Composite video multiplexing scheme
US6847737B1 (en) * 1998-03-13 2005-01-25 University Of Houston System Methods for performing DAF data filtering and padding
US6211913B1 (en) * 1998-03-23 2001-04-03 Sarnoff Corporation Apparatus and method for removing blank areas from real-time stabilized images by inserting background information
GB9813632D0 (en) 1998-06-24 1998-08-26 Robinson Alan W Outside televised broadcast shadow compensator
US6493041B1 (en) * 1998-06-30 2002-12-10 Sun Microsystems, Inc. Method and apparatus for the detection of motion in video
US6714909B1 (en) * 1998-08-13 2004-03-30 At&T Corp. System and method for automated multimedia content indexing and retrieval
US6459822B1 (en) * 1998-08-26 2002-10-01 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Video image stabilization and registration
US6741656B1 (en) * 1998-12-16 2004-05-25 Matsushita Electric Industrial Co., Ltd. Image communication apparatus
CN1116649C (zh) * 1998-12-23 2003-07-30 皇家菲利浦电子有限公司 个性化视频分类与获取系统
EP1185106A4 (en) * 1999-01-29 2006-07-05 Mitsubishi Electric Corp METHOD FOR ENCODING IMAGE CHARACTERISTICS AND IMAGE SEARCHING METHOD
US6928233B1 (en) 1999-01-29 2005-08-09 Sony Corporation Signal processing method and video signal processor for detecting and analyzing a pattern reflecting the semantics of the content of a signal
KR100442991B1 (ko) * 1999-02-01 2004-08-04 주식회사 팬택앤큐리텔 트리구조의 동영상 색인 기술자를 이용한 검색장치 및 그 방법
CN1165174C (zh) 1999-03-16 2004-09-01 研究中心实验室(有限) 闭路电视(cctv)系统
FR2794880B1 (fr) * 1999-06-10 2001-12-14 Philippe Crochat Procede automatique de suivi d'une cible en mouvement par une camera electronique et dispositif pour sa mise en oeuvre
US6476858B1 (en) 1999-08-12 2002-11-05 Innovation Institute Video monitoring and security system
US6694064B1 (en) * 1999-11-19 2004-02-17 Positive Systems, Inc. Digital aerial image mosaic method and apparatus
US6683995B2 (en) * 1999-12-23 2004-01-27 Eastman Kodak Company Method and apparatus for correcting large defects in digital images
JP2003519410A (ja) * 1999-12-30 2003-06-17 アプライド、サイエンス、フィクシャン、インク 可視光を使用してデジタルフィルムを現像するための改良されたシステムおよび方法
AU2001239745A1 (en) * 2000-02-03 2001-08-14 Applied Science Fiction Method, system, and software for signal processing using pyramidal decomposition
US6786655B2 (en) * 2000-02-03 2004-09-07 Eastman Kodak Company Method and system for self-service film processing
WO2001057594A2 (en) * 2000-02-03 2001-08-09 Applied Science Fiction Film processing solution cartridge and method for developing and digitizing film
JP2001243477A (ja) * 2000-02-29 2001-09-07 Toshiba Corp 動画像による交通量解析装置
US6557251B2 (en) * 2000-03-10 2003-05-06 Infotech, A.G. Digital feature separation
US20040125877A1 (en) 2000-07-17 2004-07-01 Shin-Fu Chang Method and system for indexing and content-based adaptive streaming of digital video content
DE20104329U1 (de) 2001-03-14 2001-05-31 Vtq Videotronik Gmbh Überwachungseinrichtung mit Sensoren
TWI236294B (en) 2001-05-11 2005-07-11 Ulead Systems Inc Method and device for capturing digital video
US20020168091A1 (en) * 2001-05-11 2002-11-14 Miroslav Trajkovic Motion detection via image alignment
US6525658B2 (en) * 2001-06-11 2003-02-25 Ensco, Inc. Method and device for event detection utilizing data from a multiplicity of sensor sources
US6805501B2 (en) * 2001-07-16 2004-10-19 Eastman Kodak Company System and method for digital film development using visible light
US20050007452A1 (en) * 2001-09-07 2005-01-13 Mckay Therman Ward Video analyzer
KR100919340B1 (ko) * 2001-09-07 2009-09-25 인터그래프 소프트웨어 테크놀로지스 캄파니 비디오 이미지의 역다중화 방법, 장치 및 컴퓨터 프로그램제품
US6831590B1 (en) * 2001-09-12 2004-12-14 Cyterra Corporation Concealed object detection
US6816622B2 (en) * 2001-10-18 2004-11-09 Microsoft Corporation Generating resized images using ripple free image filtering
US6944331B2 (en) * 2001-10-26 2005-09-13 National Instruments Corporation Locating regions in a target image using color matching, luminance pattern matching and hue plane pattern matching
EP1316933B1 (en) 2001-11-28 2006-08-09 Matsushita Electric Industrial Co., Ltd. Home security system
US6999613B2 (en) 2001-12-28 2006-02-14 Koninklijke Philips Electronics N.V. Video monitoring and surveillance systems capable of handling asynchronously multiplexed video
WO2004066609A2 (en) 2003-01-23 2004-08-05 Intergraph Hardware Technologies Company Video content parser with scene change detector
CN101431685B (zh) * 2003-06-23 2011-05-25 索尼株式会社 处理图像的方法和设备
US7840067B2 (en) * 2003-10-24 2010-11-23 Arcsoft, Inc. Color matching and color correction for images forming a panoramic image
US7587086B2 (en) * 2004-06-04 2009-09-08 Microsoft Corporation Identifying selected pixels in a digital image
BRPI0514613A8 (pt) * 2004-08-23 2018-06-12 Intergraph Software Tech Company Estabilização de imagem em tempo real

Also Published As

Publication number Publication date
KR100919340B1 (ko) 2009-09-25
CN100559873C (zh) 2009-11-11
BR0212375A (pt) 2006-03-01
EP1428378A1 (en) 2004-06-16
US20030048947A1 (en) 2003-03-13
US7436437B2 (en) 2008-10-14
KR20040048408A (ko) 2004-06-09
KR20040054679A (ko) 2004-06-25
RU2004110722A (ru) 2005-09-27
US20080095437A1 (en) 2008-04-24
CA2459821A1 (en) 2003-03-20
ZA200401970B (en) 2007-01-31
HK1074726A1 (en) 2005-11-18
US20040061786A1 (en) 2004-04-01
WO2003030103A8 (en) 2005-01-06
BRPI0212377B1 (pt) 2015-10-27
BR0212546A (pt) 2006-05-23
CN1554073A (zh) 2004-12-08
MXPA04002209A (es) 2005-02-17
HK1073038A1 (en) 2005-09-16
IL160760A0 (en) 2004-08-31
IL160758A0 (en) 2004-08-31
CO5570718A2 (es) 2005-10-31
WO2003024112A1 (en) 2003-03-20
IL160759A (en) 2010-04-15
US20060215926A1 (en) 2006-09-28
AU2002327612B2 (en) 2008-01-17
CN101072364B (zh) 2012-05-09
RU2004110723A (ru) 2005-09-27
US7079701B2 (en) 2006-07-18
CN101072364A (zh) 2007-11-14
BR0212377A (pt) 2006-10-03
AU2002335713B2 (en) 2008-08-28
EP1430444A1 (en) 2004-06-23
RU2308816C2 (ru) 2007-10-20
ZA200401972B (en) 2004-09-15
CN1554184A (zh) 2004-12-08
EP1430444B1 (en) 2013-05-08
US7310110B2 (en) 2007-12-18
WO2003024095A1 (en) 2003-03-20
CO5580855A2 (es) 2005-11-30
US6654049B2 (en) 2003-11-25
US8233044B2 (en) 2012-07-31
US7477797B2 (en) 2009-01-13
CN100359923C (zh) 2008-01-02
EP1428389A1 (en) 2004-06-16
RU2004110724A (ru) 2005-09-27
AU2002336445B2 (en) 2007-11-01
MXPA04002210A (es) 2005-02-17
CA2459821C (en) 2011-01-11
EP1428378B1 (en) 2013-03-20
RU2308761C2 (ru) 2007-10-20
CA2459823A1 (en) 2003-03-20
KR100888095B1 (ko) 2009-03-11
US20030048282A1 (en) 2003-03-13
NZ531976A (en) 2007-07-27
US20030048359A1 (en) 2003-03-13
KR20040047814A (ko) 2004-06-05
MXPA04002211A (es) 2005-02-17
NZ531975A (en) 2007-11-30
CA2459732C (en) 2017-07-11
KR100927918B1 (ko) 2009-11-19
RU2310289C2 (ru) 2007-11-10
HK1069470A1 (en) 2005-05-20
CN1299240C (zh) 2007-02-07
NZ531974A (en) 2005-08-26
CO5650190A2 (es) 2006-06-30
CN1593061A (zh) 2005-03-09
IL160759A0 (en) 2004-08-31
CA2459732A1 (en) 2003-04-10
CA2459823C (en) 2012-04-03
WO2003030103A1 (en) 2003-04-10

Similar Documents

Publication Publication Date Title
BRPI0212375B1 (pt) método para estabilizar uma imagem
AU2002336445A1 (en) Image stabilization using color matching
JP7164706B2 (ja) 画像繋ぎ合わせ方法及び装置、車載画像処理装置、電子機器、記憶媒体
Liu et al. Video stabilization with a depth camera
JP3934151B2 (ja) 画像生成装置および画像生成方法
US7221776B2 (en) Video stabilizer
US8290212B2 (en) Super-resolving moving vehicles in an unregistered set of video frames
US9792696B2 (en) Method and apparatus for tracking the motion of image content in a video frames sequence using sub-pixel resolution motion estimation
US8068697B2 (en) Real time video stabilizer
CN101006715B (zh) 数字图像的实时稳定系统和方法
JPWO2008053765A1 (ja) 画像生成装置および画像生成方法
EP1932114A2 (en) Image processing apparatus and image processing program
US20110091131A1 (en) System and method for stabilization of fisheye video imagery
US8085986B2 (en) Image processing apparatus and method for processing images more naturally and sharply
KR20030059399A (ko) 모자이크 영상 생성장치 및 방법과 모자이크 영상 기반동영상 재생방법
US7006706B2 (en) Imaging apparatuses, mosaic image compositing methods, video stitching methods and edgemap generation methods
EP3216005B1 (en) Image processing device and method for geometric calibration of images
KR20010024416A (ko) 정적 이미지 발생 방법 및 장치
ZA200401971B (en) Image stabilization using color matching
US8897584B2 (en) Image processing apparatus and image processing method

Legal Events

Date Code Title Description
B06A Patent application procedure suspended [chapter 6.1 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 24/05/2016, OBSERVADAS AS CONDICOES LEGAIS.

B21F Lapse acc. art. 78, item iv - on non-payment of the annual fees in time

Free format text: REFERENTE A 17A ANUIDADE.

B24J Lapse because of non-payment of annual fees (definitively: art 78 iv lpi, resolution 113/2013 art. 12)

Free format text: EM VIRTUDE DA EXTINCAO PUBLICADA NA RPI 2530 DE 02-07-2019 E CONSIDERANDO AUSENCIA DE MANIFESTACAO DENTRO DOS PRAZOS LEGAIS, INFORMO QUE CABE SER MANTIDA A EXTINCAO DA PATENTE E SEUS CERTIFICADOS, CONFORME O DISPOSTO NO ARTIGO 12, DA RESOLUCAO 113/2013.