BRPI0903152A2 - método para seletivamente aplicar ajustes aos elementos contidos dentro de material de imagem capturado, cámera, e, meio legìvel por computador - Google Patents

Abstract

MéTODO PARA SELETIVAMENTE APLICAR AJUSTES AOS ELEMENTOS CONTIDOS DENTRO DE MATERIAL DE IMAGEM CAPTURADO, CáMERA, E, MEIO LEGìVEL POR COMPUTADOR. Uma câmera e método que seletivamente aplica ajustes de conteúdo de imagem aos elementos contidos no material de imagem. A título de exemplo, o método envolve o registro da entrada de tela de toque do usuário e determinação da extensão arbitrária de um elemento específico no material de imagem capturado na localização na qual a entrada de toque foi registrada. Uma vez selecionado, o elemento pode ser colocado em destaque no visor, e entrada do usuário adicional pode ser opcionalmente entrada para controlar que tipo de ajuste é para ser aplicado. Então, o elemento dentro do material de imagem capturado é processado para aplicar ajustes automáticos, ou selecionados pelo usuário, ao mencionado conteúdo do elemento em relação ao restante da imagem capturada. Os ajustes do elemento de imagem podem compreender qualquer forma convencional de edição de imagem, tal como saturação, equilíbrio do branco, exposição, dimensionamento, redução de ruído, nitidez, borrão, eliminação e assim por diante.

Description

"MÉTODO PARA SELETIVAMENTE APLICAR AJUSTES AOSELEMENTOS CONTIDOS DENTRO DE MATERIAL DE IMAGEMCAPTURADO, CÂMERA, E, MEIO LEGÍVEL POR COMPUTADOR"REFERÊNCIA CRIZADA PARA APLICAÇÕES RELACIONADAS

Não aplicável

ASSUNTO CONSIDERANDO PESQUISA OU DESENVOLVIMENTOPATROCINADA FEDERALMENTE

Não aplicável

INCORPORAÇÃO PARA REFERÊNCIA DE MATERIALAPRESENTADO EM UM DISCO COMPACTO

Não aplicável

AVISO DE MATERIAL SUJEITOS À PROTEÇÃO DE DIREITOS AUTORAIS

Uma porção do material neste documento de patente ésubmetido à proteção de direitos autorais sob as leis de direitos autorais dosEstados Unidos e de outros países. O proprietário dos direitos autorais nãotem objeção para a reprodução de fax para qualquer um dos documentos depatente ou divulgação de patente, conforme estes aparecem nos arquivos eregistros disponíveis publicamente no Escritório de Patentes e marcaRegistrada dos Estados Unidos, mas por outro lado se reserva todos quaisquerdireito autorais. O proprietário dos direitos autorais através disso não renunciaqualquer de seus direitos para ter este documento de patente mantido emsegredo, incluindo sem limitação de seus direitos nos termos de 37 C.F.R. §1.14.

FUNDAMENTOS DA INVENÇÃO

Campo da Invenção

Esta invenção pertence geralmente à câmeras e processamentode mídia e mais particularmente para interação de usuário com material deimagem capturado.2. Descrição da técnica Relacionada

Câmeras digitais e câmara de vídeo freqüentemente utilizamum visor de tela de toque para facilitar percorrer e selecionar menu. Emaplicações de câmera digital e câmara de vídeo, a porção de visor da tela detoque é ele mesma geralmente utilizada para inspecionar a cena capturadadurante ou após a reprodução do material gravado. Nesses dispositivosquando o dispositivo entra um modo de menu o usuário pode selecionar umou mais parâmetros para mudar de acordo com seus desejos. Alguns dosdispositivos de tela de toque corrente ainda permitem ao usuário efetuarvarredura ou amplifícação com base em entradas para a tela de toque.

A habilidade de mudar os aspectos das imagens capturadastipicamente envolve mudar aspectos da imagem inteira tal como exposição ecor. Alguns dispositivos fornecem recursos tais como eliminação automáticade "olho vermelho" que detectam e eliminam ou reduzem o problema. Outrosdispositivos podem permitir ao usuário mover uma região de seleção sobreuma área cuja intensidade ou cor é para ser trocada. Contudo, em cada caso aousuário é fornecido com controle limitado de modificação e melhoramento deaspectos de imagem como visto no visor associado com a tela de toque.

Conseqüentemente, há uma necessidade de fornecer controlede entrada de toque amigável para o usuário para câmeras digitais e câmara devídeo. A presente invenção preenchem aquelas necessidades assim comooutras.

SUMÁRIO BREVE DA INVENÇÃO

Um método e aparelho são descritos para utilizar ainteratividade do visor de tela de toque dentro de um dispositivo detratamento de imagem (e.g., câmera e/ou câmara de vídeo) para seletivamenteaplicar ajustes de imagem para elementos dentro do material capturado, talcomo em resposta a um único contato da tela de toque a partir do usuário. Pormotivo de simplicidade, o termo "câmera" será utilizado aqui para denotarqualquer dispositivo configurado para capturar fotografias e/ou seqüências devídeo. De acordo com o método inventivo, o usuário pode selecionarelementos dentro da cena usando o visor de tela de toque ou durante a capturado material ( imagens paradas ou vídeo) ou durante reprodução do material novisor. Em um modo preferido da invenção, entrada de seleção a partir dousuário é registrada em resposta aos aspectos ou elemento será descritoabaixo cena que foram detectados. Seleção de um ou vários elementos dentroda cena é efetuada pelo usuário em resposta tocando dentro da área doelemento conforme exibido na tela de exibição receptiva do toque. Emresposta ao processo de seleção, um ou mais elementos associados mostradosno visor são destacados e o ajuste apropriado é efetuado através doprocessamento de imagem dentro do processamento de imagem.

Em pelo menos uma implementação da invenção, o tipo decontato da tela de toque (e.g, duração, direção, padrão e assim por diante)subseqüente ao contato inicial determina a ação a ser efetuada. Em umaimplementação preferida, a duração (persistência) do contato da tela de toquedetermina o escopo da seleção e/ou a ação a ser efetuada na porção deimagem selecionada. A título de exemplo, conforme o usuário retém contatode seleção com a tela do visor (dedo pressionando a tela de toque com forçasuficiente para ser registrado), um refinamento de seleção é efetuado, talcomo ampliando a seleção, preferencialmente com destaque correspondente,até o contato de toque do usuário ser descontinuado. Para entender esterefinamento de seleção ( segmentação) considere um exemplo de objetos"agrupados" dentro de uma imagem capturada de uma sala contendo umaescrivaninha acima da qual há prateleiras contendo numerosos elementos,incluindo um bola de beisebol em um suporte de exibição. O contato dousuário é feito na tela de toque na posição da bola de beisebol, onde a bola debeisebol é selecionada primeiro, conforme o contato do usuário persiste entãoa bola de beisebol e o suporte são selecionados, e conforme contato persiste aprateleira no qual eles estão posicionados, é selecionada, e conforme ocontato persiste a escrivaninha é selecionada.

Os seguintes termos são geralmente descritos em relação parao relatório descritivo, mas não são para serem interpretados para constrangercitações específicas do relatório descritivo.

O termo "tela de toque" é considerado aqui para referir aqualquer meio de sensoriamento da posição(s) do contato de usuário ou daproximidade com uma tela de exibição. Isto será notado que sensoriamento deproximidade, como encontrado em certas mais novas telas de toque de nãocontato, fornece funcionalidade equivalente para sensoriamento da tela detoque como descrito aqui, e sentir entrada de usuário dentro de umaproximidade suficiente da tela de toque, tal como dentro de uma polegada oumenos. Por motivo de simplicidade da descrição, termos relacionando à telade toque com base em contato são adotados aqui embora cada exemplo de taldescrição se aplica igualmente em relação as telas de toque com base emproximidade.

O termo "ajuste" é geralmente ut91izado aqui para descreveruma modificação e/ou melhoramento do conteúdo de imagem associado como objeto selecionado,e/ou conteúdo da imagem adjacente. Os termos"modificação e "melhoramento" também são aqui utilizados, embora essestermos possam se considerados substancialmente como sinônimos.

O termo "elemento" descreve objetos regulares comocapturados no material de imagem visto na tela de exibição, e também sãoreferidos aqui como "objetos". Deve se apreciado que esses objetos sãomanifestados com porções da imagem tendo uma fronteira arbitráriacircunscrevendo a extensão do espaço periférico do elemento (objeto). Otermo objeto, ou elemento, é assim geralmente usado no significado pleno dapalavra, onde carros, aviões, trens, pessoas, animais , flores, árvores, livroseletrônicos, walkmans, computadores, televisores, ou qualquer outro item dematerial mostrado no visor para a imagem capturada pode ser selecionada eseu correspondente material de imagem ajustado de acordo com a invenção.

A invenção é propícia a ser englobada em um numero demaneiras, incluindo mas não limitado às seguintes descrições.

Uma modalidade da invenção é um método de aplicarseletivamente ajustes aos elementos contidos dentro do material de imagemcapturada por uma câmera (e.g., imagem parada ou seqüência de vídeo) tendoentrada de tela de toque, compreendendo: (a) registro da entrada de tela detoque do usuário em uma localização na tela de exibição na qual em elementoespecífico no material de imagem é exibida; (b) selecionar um elementoespecífico da imagem capturada em resposta ao registro da entrada de tela detoque do usuário, onde o elemento específico pode ter qualquer formaarbitrária; e (c) processar a imagem do elemento específico para aplicarajustes (e.g., dimensionamento, brilho, contraste, saturação, equilíbrio dobranco, redução de ruído, nitidez, borrão, eliminação ( remoção epreenchimento), e assim por diante) ao conteúdo do elemento em relação aorestante da imagem capturada.

Em um modo do método inventivo uma vez que a imagemoriginal é capturada, e antes da seleção de tela de toque do usuário de umaparte da imagem, a programação automaticamente começa determinandofronteiras para cada um dos múltiplos elementos contidos dentro da imagemcapturada. Nesta maneira a quantidade de processamento necessário paraassociar a entrada de toque do usuário com um objeto na tela de exibição podeser signifícantemente reduzida, onde quando da entrada de tela de toque dousuário um desses múltiplos elementos pode ser rapidamente selecionado paraefetuar um ajuste de imagem , ou para destacar o elemento em preparaçãopara ajuste de imagem.

Em um modo da invenção, a determinação de quais ajustes deimagem são para serem feitos, são automaticamente determinado em respostaà caracterização dos aspectos da imagem (e.g., brilho, contraste, equilíbrio decor, tamanho do objeto, cor de fundo, e assim por diante) do objetoespecífico, e comparando essa informação contra um conjunto de padrões oureferências (e.g., heurísticos ) da qual uma determinação de uma mudança e adimensão daquela mudança é gerada. O exemplo mostrado na FIG. 3A - 3D(descrito mais tarde) ilustra uma situação na qual o tamanho do elemento eseu forte contraste com seu entorno indicaria um elemento tendo um altaprobabilidade que o usuário o esteja selecionando porque isto não é desejadoe deve ser eliminado da imagem.

Em um modo da invenção, contato de tela de toque do usuárioé registrado para definir a seleção do objeto mostrado no visor

Em um outro modo, decidir que ajustes de imagem são paraserem feitos, é determinado em resposta as entradas de tela de toqueadicionais pelo usuário (e.g., gestos de movimento de dedos, ou menospreferencialmente outras entradas) após seleção do elemento específico paracontrolar como aquele elemento é editado dentro do material da imagemcapturada. Em adição, a determinação pode ser efetuado automaticamentecom um nível selecionado de interação ou reconhecimento a partir do usuário.Em um modo da invenção, a programação determina um conjunto de ajustespossíveis que parecem prováveis a partir do ponto de vista do usuário, (e.g.,dado por seleção do usuário e organizado pelo mais provável, dado aprioridade mais alta para baixo através de níveis mais baixos deprobabilidade), a partir do qual o usuário pode selecionar o ajuste.

Em pelo menos uma implementação da invenção, materialadicional é coletado para uso em ajuste do material de imagem capturada,e/ou o elemento capturado dentro do material da imagem. Em um modo,imagens são capturadas em uma maior resolução que a resolução dearmazenamento (e.g., tipicamente estabelecido pelo usuário) onde osresultados de edição de imagem são então convertidos para baixo, e por meiodisso, fornecendo resultados de imagem superior do que seriam obtidoseditando a imagem na resolução de armazenamento alvo. Edição de altaresolução compreende: (a) capturando e aplicando ajustes para o material deimagem em uma primeira resolução de imagem, e (b) armazenando aimagem, após o término do processamento de ajuste de imagem, e umasegunda resolução de imagem que é igual à ou menor do que a primeiraresolução de imagem; onde a segunda resolução de imagem épreferencialmente passível de ser selecionada pelo usuário ( tipicamente, ousuário pode selecionar a resolução de imagens capturadas, neste caso esta setorna a resolução na qual elas são armazenadas).

Um outro modo de informação aumentado captura imagensadicionais deslocadas no espaço e/ou tempo, e compreende: (a) capturarmaterial de imagem adicional que é temporariamente, ou espacialmenteseparado da captura do material de imagem principal (i.e., capturada emresposta à eletrônica equivalente de liberação do "obturador"); e (b) aplicarajustes para o material de imagem, ou mais preferencialmente objetos neles,em resposta ao material de imagem adicional. Preferencialmente, o processoinclui armazenar o material de imagem após edição ( ajuste) sem o materialde imagem adicional associado.

Uma modalidade da invenção é um método para seletivamenteaplicar ajustes aos elementos contidos dentro do material de imagemcapturado por uma câmera tendo entrada de tela de toque, compreendendo: (a)captura material de imagem compreendendo uma imagem parada ou se devídeo; (b) registro de entrada de tela de toque do usuário em uma localizaçãoem uma tela de exibição na qual um elemento específico no material deimagem capturado é exibido: (c) selecionar um elemento específico daimagem capturada em resposta ao registro da entrada de tela de toque dousuário, onde o elemento específico pode ter qualquer forma arbitrária; (d)gerar um destaque envolvendo o elemento específico para indicar a seleção doelemento específico; (e) controlar a aplicação de ajustes para o elementoespecífico do material de imagem capturada em resposta ao registro deentrada de tela de toque adicional na forma de gestos de movimento dosdedos; e (f) processar a imagem do elemento específico para aplicar ajustespar ao conteúdo do elemento em relação ao estando da imagem capturada.

Uma modalidade da invenção é um aparelho (câmera)compreendendo: (a) um dispositivo de captura de imagem óptica (e.g.,CMOS, CCD e assim por diante) configurado para captura material deimagem, (b) um visor óptico para visualmente exibir material de imagemcapturada; (c) uma tela de toque acoplado ao visor óptico para registrar aposição do contato do usuário quando da exibição do material de imagemcapturada; (d) um computador acoplado ao dispositivo de captura de imagemóptica, ao visor óptico e à tela de toque para capturar e exibir conteúdo deimagem e seletivamente aplicar ajustes aos elementos contidos dentro domaterial de imagem; e (e) programação executável no computador para: (e) (i)registro da entrada da tela de toque do usuário em uma localização em umatela de exibição na qual um elemento específico no material de imagemcapturada é exibido, (e) (ii) selecionar um elemento específico da imagemcapturada em resposta ao registro da entrada de tela de toque do usuário, ondeo elemento específico pode ter qualquer forma arbitrária, e (e) (iii) processar aimagem do elemento específico para aplicar ajustes para o conteúdo doelemento em relação ao restante da imagem capturada.

Uma modalidade da invenção e em um meio legível porcomputador contendo uma programa de computador executável em umcomputador dentro de uma câmera configurada com um visor e tela de toqueassociada, onde a mencionada câmera é configurada para capturar e exibirconteúdo de imagem e seletivamente aplicar ajustes do conteúdo de imagemaos elementos contidos dentro do material de imagem, compreendendo: (a)registro de entrada de tela de toque do usuário em uma localização em umatela de exibição na qual um elemento específico no material de imagemcapturada é exibida: (b) selecionar um elemento específico da imagemcapturada em resposta ao registro da entrada de tela de toque do usuário, ondeo elemento específico pode ter qualquer forma arbitrária; e (c) processar aimagem do elemento específico para aplicar ajustes ao conteúdo do elementoem relação ao restante da imagem capturada.

A presente invenção fornece um número de aspectos benéficosque podem ser implementados ou separadamente ou em qualquer combinaçãodesejada sem fugir dos presente ensinamentos.

Um aspecto da invenção é um método de modificar materialgravado dentro de um dispositivo de câmera em resposta ás simples entradasde toque a partir do usuário.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para identificação (segmentação) de elementos (objetos) dentrodo material de imagem gravado.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para selecionar um ou mais dos elementos identificados emresposta a uma entrada de tela de toque do usuário.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para modificar material de imagem selecionada automaticamenteem resposta à comparação de características desses elementos de telaselecionados em relação à imagem e a um conjunto de orientações, ou emresposta à entrada direta do usuário, ou como uma combinação demodificação automática e modificação direcionada do usuário.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para efetuar modificações de imagem/vídeo dos elementos domaterial selecionado, incluindo: eliminação, substituição, mudança de cor,saturação de cor, exposição, brilho, redução de ruído, borrão ou nitidez,efeitos especiais, posicionamento, dimensionamento, e assim por diante.Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente efetuar mistura ou suavização de imagemde mídia adjacente em resposta às modificações de imagem/vídeo deelementos selecionados.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para efetuar modificações de características dos elementosselecionados do material, incluindo; eliminação, mudanças de cor, brilho,saturação de cor, exposição, brilho, redução de ruído, borrão ou nitidez,efeitos especiais, posicionamento, resolução , dimensionamento e assim por diante.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente selecionar que ações de ajuste de objeto aefetuar, ou automaticamente propor ações de ajuste de objeto a ser efetuado,para o elemento selecionado na tela de toque.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente selecionar ou propor ação de ajuste doobjeto em resposta ao dispositivo, ou ao ajuste histórico de ajuste de uso, ouaos perfis de ajuste armazenados.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente classificar ações que podem ser efetuadaspara o elemento selecionado na tela de toque, em resposta à câmeradeterminando as mais prováveis opções de ajuste.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente selecionar ações a serem efetuadas noelemento ou na característica em resposta ao tipo de ação de toque que érecebido a partir do usuário.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para automaticamente ou pela entrada de tela de toque dousuário, ajustar orientação da imagem, tal como corrigir um horizonte.Um outro aspecto da invenção é um dispositivo de câmeratendo pelo menos um processador de computador (e.g., micro-controlador,microprocessador, DSP, processador dentro de um ASIC e assim por diante) ememória configurada para executar programação que inclui interface deusuário, funções de processamento de imagem e de exibição.

Um outro aspecto da invenção é um método de modificarimagens e vídeos capturadas que pode ser implementada em uma ampla gamade câmeras fotográficas, câmeras de vídeo, e combinação de dispositivos decaptura de fixa e vídeo que incluem uma tela sensitiva ao toque.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para captura imagens em um resolução mais alta do que aresolução armazenada selecionada, por esse meio tornando a alta resoluçãodisponível durante o processo de edição.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para armazenar imagens de sombra temporais que podem seutilizadas como material adicional e informação para melhorar seleção deobjeto assim como eliminação, modificação, ou melhoramento das porções decena associadas com o objeto selecionado.

Um outro aspecto da invenção é um dispositivo de câmeraconfigurado para armazenar imagens de sombra de deslocamento que podemser utilizadas como material adicional e informação para melhorar a seleçãode objeto assim como eliminação, modificação, ou melhoramento das porçõesde cena associadas com o objeto selecionado.

Ainda aspectos adicionais da invenção compreendem ahabilidade para incorporar os métodos dentro de qualquer dispositivoqualquer câmera fotográfica e/ou de vídeo tendo uma tela de toque,preferencialmente os recursos sendo implementados como programaçãoarmazenada em memória (ou em uma mídia acessível, ou uma mídia quepodes em resposta carregada na memória) e executada por pelo menos umdispositivo de computador dentro da câmera que captura, processa e exibe omaterial de imagem.

Aspectos adicionais da invenção serão trazidos nas seguintesporções do relatório descritivo, onde a descrição detalhada é para o propósitode totalmente divulgar modalidades preferidas da invenção sem colocarlimitações nelas.

DESCRIÇÃO BREVE DAS VÁRIAS VISÕES DOS DESENHOS

A invenção será mais totalmente entendida para referência aosseguintes desenhos que são somente para propósitos ilustrativos.

FIG. 1 é um fluxograma para modificar material gravadodentro de um dispositivo de câmera em resposta as entradas de toque deacordo com uma modalidade da presente invenção, mostrando passosopcionais requeridos assim como selecionados do processo.

FIG. 2 é um diagrama em bloco de um aparelho de câmerapara efetuar a modificação ( ajuste) de material de imagem gravado de acordocom uma modalidade da presente invenção, mostrando um computador ememória dentro do aparelho.

FIG. 3 A - 3 D é uma seqüência operacional de uma câmeracom interface de visor da tela de toque na qual um aspecto da presenteinvenção é ilustrado.

DESCRIÇÃO DETALHADA DA INVENÇÃO

Referindo mais especificamente aos desenhos, para propósitosilustrativos da presente invenção é englobado no aparelho geralmentemostrado na FIG. 1 até FIG. 3D. Será apreciado que o aparelho pode variarconforme a configuração e quanto aos detalhes das partes, e que o métodopode varia conforme os passos e seqüências específicas, sem fugir dosconceitos básicos conforme aqui divulgados.

A presente invenção é um aparelho e me que permite umusuário de um dispositivo de captura de imagem para interativamente aplicarajustes e melhoramentos na câmera para os elemento específicos dentro deuma imagem capturada. Elementos dentro da imagem são aqueles que podemser considerados para compreender um item, tal como um pássaro, carro,árvore, nuvem, lua, pessoa, animal, bastão de memória, tocador de MP3,computador, e assim por diante como discernido a partir do segundo plano.

Seleção de um elemento não é para ser confundido com a habilidade deselecionar uma região do visor, tal como através do movimento de uma caixa,onde a imagem capturada é tratada como uma única camada em segundoplano. Na presente invenção, objetos com formas muito irregulares podem serselecionados para modificação, eliminação, e melhoramento sem alterarelementos que estão geometricamente próximos, mas não do objetoselecionado. O método pode ser implementado em qualquer dispositivo decaptura de imagem digital, incluindo câmeras fotográficas, câmeras de vídeo,câmeras de mão, câmaras de vídeo, telefones celulares incorporando umacâmera, e o similar.

Por motivo de simplicidade da descrição, detalhes não sãofornecidos aqui para efetuar os passos de processamento de imagem que sãoconhecido por aqueles com qualificação simples na técnica. Por exemplo, oprocessamento de imagens com relação à cor, intensidade, resolução, efeitosde imagem e assim por diante, assim como opções para marcação e o similarsão conhecidos na técnica. A presente invenção geralmente fornece ummecanismo de acesso, seleção e aplicação dessas várias técnicas dentro doslimites de um sistema de câmera de vídeo e/ou fotográfica para fornecer umnúmero de benefícios sobre sistemas de câmera convencionais

Operação de acordo com a invenção permite ao usuárioselecionar a imagem de um objeto mostrado na tela de toque e então editaraquele objeto em resposta as diferentes configurações de controle da câmera.

A programação na câmera é configurada para determinar uma fronteira deobjeto para melhoramento com base na seleção de entrada de toque pelousuário. Uma vez selecionado, em um modo da invenção, a programação nacâmera automaticamente prediz um ou mais melhoramentos a serem feitoscom base nas propriedades da área selecionada e pode automaticamenteefetuar seleção e/ou ambos seleção e aplicação do melhoramento da imagem.Neste modo, a programação dentro da câmera efetua os ajustes desejadosenquanto apropriadamente misturando a parte corrigida da imagem com aparte não corrigida da imagem. As porções não desejadas da imagem tambémpodem ser prognosticadas, ou selecionadas pelo usuário onde essas podem serremovidas automaticamente ou conforme direcionadas pelo usuário.

O aparelho de câmera e o método de ajuste de imagem da telade toque da presente invenção fornece um número de benefícios. Um meiorápido, simples e eficiente de interação do usuário é fornecido tal que ajustesna câmera podem ser feitas para modificar porções selecionadas do materialcapturado (imagens paradas ou vídeo). A extensão da área a ser modificadanão é fixada por uma região, ou caixa dentro da qual mudanças são aplicadas,mas em pelo menos um modo da invenção em elemento é selecionado, combase nas características que definem a extensão daquele elemento, comoautomaticamente determinado, ou com ajuda do usuário. Utilizando estaabordagem, flexibilidade de ajuste adicional é fornecida a fim de alcançarresultados significativamente melhorados. A título de exemplo e nãolimitação, um usuário pode eleger mudar a iluminação (e.g.,luminosidade/escuridão) ou cores (e.g., variedade, mudança, intensidade eassim por diante) em somente certas áreas selecionadas da tela(s), comooposto aplicar os ajustes globalmente para todas as partes da cena como é aprática com base na câmera convencional.

O presente método e aparelho, também é configurado commeios de separar áreas de interesse dentro da cena. Por exemplo separarelementos em primeiro plano dos elementos em segundo plano, detectandoelementos que o usuário pode querer eliminados ou modificados e assim pordiante. Modos de segmentação da invenção incluem segmentação totalmenteautomática e segmentação com assistência do usuário. Como métodos desegmentação totalmente automática são mais difíceis de implementar,implementações preferidas da invenção podem fornecer segmentação emresposta as seleções de área do usuário e por meio disso alcançando resultadosmelhores de segmentação com menos processamento.

Métodos convencionais para efetuar ajustes na câmera sebaseiam em duas técnicas. Primeiro, é o uso de ajustes globais, nos quaistransformações são aplicadas similarmente para todos os elementos mínimosde imagem, tal como correção de exposição, correção de contraste, equilíbriodo branco (cor corrigindo matiz de iluminação não desejada), e assim pordiante. Segundo, alguns sistemas fornecem transformações espaciaislimitadas, tais como compressão de alta gama dinâmica que pode seralcançada usando seleção automática de região a ser ajustada.

Ao contrário, para sistemas convencionais, a invenção forneceum método para o usuário de um dispositivo de tratamento de imageminterativamente ajustar uma área com um único toque na cena exibida na tela.

FIG. 1 ilustra uma modalidade 10 do método inventivomostrado à título de exemplo e não de limitação. O aparelho de câmera iniciaa operação conforme o bloco 12, tal como começando a executarprogramação em um processo de controle dentro do dispositivo de câmera.

No bloco 14 as preferências do usuário são estabelecidas, tal com o usuárioselecionando modos e configurações de operação. Bloco 16 representamaterial sendo capturado de acordo com as preferências do usuário e exibidasem um tela de saída. Será apreciado que de acordo com pelo menos umaimplementação da invenção, material para modos de captura aumentados, taiscom enquadramento de sombra, também é considerado para ser coletadodentro do bloco 16. Material capturado é exibido para permitir ao usuáriorever a imagem na tela de toque do dispositivo de tratamento de imagem(câmera digital ou câmara de vídeo) e fazer mudanças de acordo com apresente invenção. No bloco 18 a programação preferencialmente analisa omaterial capturado para totalmente ou parcialmente determinar elementosdentro do material (e.g., posição, extensão, fronteiras, características), eopcionalmente no bloco 20 determinar as características da cena e anteciparqualquer ajuste que o usuário vai quer mais provavelmente fazer conforme obloco 22.

Interação de usuário com a tela de toque (e.g., pressão dosdedos do usuário ou proximidade dos dedos) é registrada no bloco 24 em umaárea de interesse na tela de toque para o qual é desejado aplicar modificaçõesou melhoramentos. O sistema da presente invenção fornece um mecanismopar ajustar objetos dentro do material de imagem capturado como mostradona tela de exibição sensitiva ao toque, tal com em resposta à interação de um dedo.

Em resposta ao passo acima, a programação na câmeraautomaticamente computa a fronteira no bloco 26 para a seleção indicada pelousuário com base na posição escolhida pelo usuário na tela epreferencialmente consequentemente anota a imagem conforme o bloco 28,tal como exibindo um auréola de destaque sobre o objeto. Será apreciado queem modos de seleção da invenção, a ação de imagem é efetuada sem anecessidade do primeiro destaque da seleção, por exemplo, no caso desimples eliminação. Em adição, dentro dos blocos 24, 26 e 28, o usuário podeentrar critério de seleção adicional e/ou corrigir ou refinar a seleção.

Ainda mais, em uma implementação ou modo, a programaçãona câmera começa determinado fronteiras de seleção imediatamente quando ousuário primeiro toca a tela. Em resposta ao contato continuado, tal como emresposta à persistência do contato, ou em resposta ao movimento de seusdedos na tela de toque, a programação de câmera ainda pode refinar a seleçãoquanto à extensão e seleção do objeto com base não somente na posiçãocorrente do dedo na tela de toque, mas também com relação as posiçõesanteriores. Em um modo, em resposta ao contato de seleção do usuário (ouproximidade) sendo mantida, a programação refina a seleção do objeto, porexemplo, cada vez mais a seleção, até o contato da tela de toque ser liberado.

Conforme a seleção é refinada, o elemento destacado ( e.g.,qualquer forma devisualmente identificar as fronteiras do elemento) é atualizado para fornecerapropriada realimentação ao usuário. Em um outro exemplo, movimentos dodedo do contato continuado ou contato adicional são usados para refinar aseleção dentro de múltiplos itens. Considere o caso de dos elementos sesobrepondo A e B, conforme o usuário toca a tela um ou ambos A e B podemser selecionados, enquanto em resposta aos movimentos dos dedos apontandoem direção a ambos A ou B, ou ainda refinando seu posicionamento pelotoque, o elemento apropriado é selecionado como elemento A, ou elemento B.

Em um modo, o usuário pode virtualmente "desenhar" o contorno do objetodesejado na tela de toque na medida necessária para o objeto desejado, para oselecionado no visor.

Em um modo da invenção, a programação é configurada paradetectar a presença de gestos de movimento de dedo com a entrada dousuário. Esses gestos de movimento de dedo têm um significado especial naseleção dos objetos e/ou operações a serem efetuadas naqueles objetos. Atítulo de exemplo, um tal gesto de toque é o arrasto de toque de um objetoselecionado par afora da área da tela de toque e assim então remover o objetoda cena. Aviso de seleção de objeto é preferencialmente efetuado durantearrasto de toque antes do objeto ser deslizado a partir da tela, assimeliminando erros de seleção. À título de um outro exemplo, em um modo dainvenção, a detecção de movimentos de dedos curtos em uma primeiradireção (e.g., para a esquerda) força a programação a diminuir o brilho para oobjeto, enquanto a detecção de um movimento de dedo curto em um direçãooposta (e.g, para a direita) força a programação a aumentar o brilho na áreaselecionada. Neste contexto, mudanças de contraste podem ser efetuados emresposta ao registro de movimentos de dedo para cima e para baixo.

Deve ser apreciado que o objetivo do movimento de dedoregistrado é em resposta a ambos padrão e velocidade, assim comoopcionalmente pressão, para aqueles telas de toque assim equipadas. Porexemplo, quando um usuário está monitorando a fronteira de um elemento datela, seus movimentos são mais lentos e seguem um padrão em uma fronteirado objeto, ao contrário, para aqueles gestos de toque são efetuados em umamaneira rápida e geralmente não vão coincidir com as fronteiras do objeto;onde a programação em pelo menos um modo discerne entre esses diferentestipos de toques para fornecer uma escolha de tela de toque de maior larguraque pode ser acessada sem a necessidade de um menu ou outro mecanismo deseleção. Também será apreciado que gestos de dedo podem ser tãoarbitrariamente complexos para fornecer qualquer número desejado defunções. Por exemplo, padrões de dedos podem compreender padrãogeométrico (e.g., meio círculo, círculo, quadrado, triângulo, etc).símbolos(e.g., ponto de confirmação, ponto de interrogação, seta simples com qualquerforma de terminação, circunflexo, etc), letras, padrões pré-determinados,padrões programados do usuário, e combinações deles.

Em um outro modo da invenção, os movimentos dos dedos(e.g., para a direita, para a esquerda, para cima e para baixo) podem direcionaro dimensionamento vertical e horizontal da imagem, tal como estreitando alargura de uma pessoa na imagem sem mudar outros elementos na imagem.

Exemplos adicionais incluem detectar movimento em outras direções (e.g.,par acima, para baixo, em diagonal , em círculo, em ângulos, e assim pordiante) para comandar a programação para efetuar outras mudanças na áreaselecionada, tal como aumentar ou diminuir contraste, controlar equilíbrio decor e tonalidade, aplicar efeitos incluindo borrão, nitidez, ruído, textura,distorção e assim por diante. À título de um outro exemplo, o aparelho éconfigurado de acordo com um modo tal que movimento de dedo rotacionalna tela de toque em um item selecionado efetua redimensionamento daexibição, por exemplo, a programação aumenta a exibição para rotações nosentido horário, ou encolhe a exibição para rotações no sentido anti-horário. Ouso de redimensionamento permite ao usuário editar a porção da tela comresolução suficiente e depois retornar de volta ao dimensionamento original.Em um outro modo, rotação pode ser utilizada para controlar a ampliação deum elemento na tela em relação a outros elementos sendo exibidos. Seráparecido que qualquer forma de processamento de imagem pode ser aplicadopela programação em resposta à detecção dessas entradas.

Com descrito no bloco 30, a ação a ser efetuada é determinadaatravés da programação em resposta ao tipo de contato de toque, oualternativamente o tipo de contato de toque em combinação com ascaracterísticas do elemento selecionado. A ação a ser efetuada podecompreender ou refinar a seleção ou efetivamente iniciar as mudanças para oobjeto selecionado. Em um modo, a seleção (segmentação) de elementos deimagem é refinada em resposta ao contato continuado, tal com aumentando(ou alternativamente encolhendo) a seleção em resposta à retenção de contatode toque no elemento selecionado. Em pelo menos um modo, a ação de editarimagem é selecionada pela programação em resposta ao tipo de entrada detoque (e.g, padrão de movimento e contato) registrado e pode ser utilizado emcombinação com qualquer características do elemento selecionado. Em ummodo da invenção, a programação automaticamente determina, em resposta àcaracterização ( e.g., cor, brilho, contraste, tonalidade), uma ou mais aços quesão prováveis de serem efetuadas par ao elemento de imagem com base narelação da área selecionada para o resto do conteúdo na cena. Por exemplo,em um modo da invenção, se uma área escura ou sombreada é apontada pelousuário, então a programação na câmera é configurada para automaticamenteescolher iluminar (aumentar exposição com) a área selecionada. Neste modo,a entrada de toque continuada pode ser utilizada pela programação paradeterminar qual daquelas ações disponíveis deve ser efetuada.

A seleção de qual pode ser feita com o objeto da imagem,preferencialmente é determinada em resposta ao tamanho, posicionamento eoutras características do elemento em comparação com o resto da imagem eum conjunto de orientações armazenadas na câmera. Por exemplo, pequenoselementos sobre a periferia de uma cena são candidatos prováveis a seremeliminados, borrados, ou ao contrário, sendo visualmente diminuídos.

Elementos centrais da imagem são mais prováveis de serem submetidos amelhoramentos efetuados, por exemplo em resposta à diferentes iluminações,cores e sombreamentos. As orientações usadas no ajuste automático, oupropostas de ajuste, podem compreender configurações pré-determinadas,histórico de ajustes (e.g., usuário ou câmera), e/ou perfis de ajustearmazenado (e.g., a partir do usuário, de um sítio da web, e assim por diante).

Em um modo da presente invenção, rotação é uma das açõesque pode ser efetuada em elementos individuais ou quando da captura da telainteira. Obviamente, rotação de um único elemento dentro da imagem requeralgum preenchimento a ser efetuado no segundo plano do objeto, similaràquele requerido quando eliminado elementos. Em adição, a captura da telade exibição inteira pode ser girada de uma quantidade desejada, tal como paracorrigir um horizonte enviesado, de acordo com um outro aspecto dainvenção. No caso da imagem inteira, o elemento específico podes emresposta considerado ter sido ajustado para cima para selecionar a imageminteira que é para ser girada em um angulo arbitrário. Em um modalidade,quando a câmera é configurada para armazenar imagens com menoselementos mínimos de imagem do que podem ser obtidos a partir dodispositivo de tratamento de imagem, a câmera retém pelo menos uma porçãodos elemento mínimo de imagem ribeirinhos (e.g., uma imagem de resoluçãototal) até o usuário completar a manipulação da imagem por controle detoque, onde a imagem resultante é em essência pegando um grupo levementediferente de elemento mínimo de imagem (desviado) a partir da maiorimagem disponível. Será apreciado que a quantidade de elementos mínimosde imagem ribeirinha disponível pode limitar a extensão da rotação daimagem sem reduzir o tamanho da imagem, por meio do que um modo dainvenção adverte o usuário quando o tamanho da imagem precisa ser reduzidoem resposta à rotação da imagem inteira. Mantendo e utilizando os elementosmínimos de imagem ribeirinhos durante a rotação permite efetuar a rotaçãoem muitos casos sem a necessidade de reduzir o tamanho da imagem ou tentarefetuar pintura complexa em todos os cantos da imagem.

Em um modo de uma ação de rotação, o usuário seleciona ummodo de rotação em resposta ao deslizamento de seu dedo em um padrãocircular na tela (ou sobre a tela) após fazer contato inicial(ou proximidadesuficiente em sensoriamento sem contato). Será apreciado que quando acâmera esta em um modo no qual a persistência de contato continuado mudao refinamento de seleção de elemento, então um gesto de rotação pode serentrado em qualquer nível de seleção, a partir de elementos rotativos únicosaté a rotação de toda a tela.

Em um modo, a ação de rotação pode ser automaticamentedeterminada pela programação em resposta à detecção do enviesado dohorizonte (e.g., o horizonte não sendo horizontal ao longo do quadro), e emum modo pode ser automaticamente executado, ou alternativamenteexecutado em resposta à seleção ou aceitação do usuário com acontece comoutras manipulações de imagem descritas aqui.

Em um modo da invenção, o usuário seleciona a rotação dohorizonte deslizando um dedo ao longo do horizonte de modo a selecionaraquele elemento, onde a programação determina a ação de ajuste do horizonteque é selecionada e assim efetua rotação da imagem conforme o usuário entãopor sua vez faz uma curva deslizando ao longo do horizonte em um arco (e.g., padrão resultante em fora parecida com um "J" de lado.

Embora o sistema possa automaticamente determinar certosaspectos para os quais mudanças podem ser efetuadas, também pode proporajustes que o usuário pode aceitar ou negar, ou permitir ao usuário selecionarum de um número de ajustes possíveis. Em uma implementação, ao usuário éopcionalmente apresentado escolhas no bloco 32 quanto ao que modificaçãoou melhoramento é para ser efetuado. Essas opções selecionadas pelo usuáriopodem ser controladas através de elementos de interface de tela não de toque(e.g., botões e puxadores) ou utilizar um envoltório sobre a tela de toque paraconter as opções passives de serem selecionadas pelo usuário. A título deexemplo e não de limitação, as opções para justes ou melhoramentos podemser um de ou uma combinação do seguinte: (a) aumentar ou diminuir asaturação na área selecionada; (b) ajustar equilíbrio do branco na áreaselecionada; (c) aumentar ou diminuir exposição na área selecionada; (d)efetuar redução de ruído na área selecionada; (e) nitidez ou borrão da áreaselecionada; (f) remover área selecionada da imagem; (g) remover áreaselecionada com a opção de substituí-la com textura obtida de uma parte dacena; e outras funções de processamento de imagem que podem ser efetuadasna porção de imagem selecionada.

Modificações e/ou melhoramentos são efetuados no bloco 34,preferencialmente em resposta à programação efetuando ajustes da imagemselecionada e apropriadamente misturando a parte corrigida da cena com aparte não corrigida da cena. As modificações podem ocorrer imediatamente,com o recurso único do usuário de desfazer a mudança a qualquer tempo maistarde, ou dentro de um período limitado de tempo, tal como enquanto aalimentação da câmera está ainda ligada e existe memória suficiente. Em ummodo da invenção, a programação no bloco 36 pode opcionalmente indagar ousuário para aceitar a modificação, ou série de modificações. A modificaçãodo material armazenado é armazenada conforme o bloco 38. Será apreciadoque conforme as modificações estão sendo feitas, a programaçãopreferencialmente armazena toda informação necessária sobre a seqüência demudanças efetuadas, onde o material modificado pode ser restaurado a suaforma original. Em um modo a função de desfazer somente está disponívelpor um período limitado, tal como durante edição de uma simples foto, ouconforme selecionado pelo usuário. Alternativamente, em um outro modo, ousuário pode decidir armazenar ambas as imagens original e modificada.

FIG. 2 ilustra uma modalidade 50 de um aparelho de câmeraconfigurado com um dispositivo de captura de imagem 52 e ópticascontroladas 54, tal como controles de foco e zoom e outros elementos detratamento de imagem opcionais conforme desejado, que são processados poruma CPU, ou controlador, 56 tendo memória 57 e memória auxiliar 60 (e.g.,bastão de memória), dentro da qual o conteúdo pode ser armazenado e a partirda qual a programação é executada para efetuar os aspectos inventivosdescritos aqui. Uma tela de exibição 62 é mostrada através da qual o materialcapturado ( vídeo e/ou imagens) pode ser exibido. Acoplado à tela de exibição62 está uma tela de toque 64 que registra o toque do usuário em resposta àexibição de imagens assim como em resposta à superposição de menus eoutras seleções de entradas de controle. O aparelho de câmera 50 também émostrado com uma interface de tela não de toque representando a entrada esaída do usuário que não está associado com a tela de toque, tal como o botãode energia, botão de gravação, controle de menu, botões de cursor, rodas deseleção, saídas de visor e outros controles de câmera convencionais.

Será apreciado que aspectos da presente invenção sãoimplementados para execução com o aparelho 50, tal como em resposta àprogramação residente na memória 58 que é executável na CPU 56. Emadição, será apreciado que aspectos da presente invenção podem serimplementados como programação armazenada em uma mídia, onde amencionada mídia pode ser acessada par execução pela CPU 56.FIG. 3A - 3D ilustram um modalidade exemplar 90 demodificação e/ou melhoramento de imagem da tela de toque de acordo com ainvenção. Devido à limitação da representação e para simplicidade, o exemploilustra a operação de uma camada pegando imagem paradas, emboraprocessamento de imagem de vídeo iria parecer do mesmo modo. O materialde imagem 92a é capturado na FIG. 3A, um elemento (objeto) da qual é umagaivota 94. Na FIG. 3B para usuário toca a tela sensitiva ao toque quando aimagem 92a é exibida, onde o toque 96 é registrado pela câmera nalocalização da gaivota 94. Na FIG. 3C em resposta à entrada do toque dousuário e características da imagem na área da gaivota 94, a extensão doobjeto gaivota 94 é determinada, selecionada e destacada 98 pelaprogramação na câmera, tal como com um contorno ou auréola contrastante.

Na FIG. 3D a modificação é completada pela programação que preenchediretamente a área da gaivota 94 fazendo-a parecer como a imagem 92b quenunca foi capturada dentro da imagem. Será apreciado que a presenteinvenção pode utilizar padrões e cores a partir da imagem original efetuando opreenchimento (pintura) do elemento de imagem eliminado, ou pode utilizarinformação adicional tal como informação pré-programada (e.g., orientações,tabelas de correção, e assim por diante), ou em resposta à informaçãoadicional disponível dentro do sistema de câmera como descrito na seçãoseguinte.

Numerosos modos e opções do presente aparelho e métodofornecem níveis aumentados de informação para melhorar a habilidade ouqualidade resultante das modificações e melhoramentos desejados para aomaterial capturado. Cada uma do seguinte pode ser considerado umaferramenta, que pode ser usada para uma única foto, em resposta ascaracterísticas de imagem de uma foto, utilizada por todas as fotos, ouutilizado em resposta à configurações selecionadas do usuário. As seguintesferramentas podem ser consideradas separadamente ou em váriascombinações uma com a outra e com os aspectos da invenção citados acima.

Edição em alta resolução é uma ferramenta de acordo comuma implementação da invenção na qual o material é captura em umresolução mais alta do que a resolução na qual ele é configurado para serarmazenado. Esta resolução mais alta é retida preferencialmente até aousuário ter sido dado um oportunidade suficiente para editar o material, apóso qual a imagem é convertida para a resolução desejada. "Oportunidadesuficiente" pode compreender, por exemplo, um período de tempo que seestende, enquanto a energia é mantida, enquanto memória suficientepermanece, até subseqüentes materiais serem editados, até o usuário entraruma direção para esguichar o material adicional, e situações similares ecombinações delas. Em edição de alta resolução, a resolução adicional étornada disponível para o processo de edição seletiva do objeto que podefornecer mais resultados benéficos. Durante a edição, a resolução adicionalpode ajudar no processo de seleção, no processo de edição, e melhorar aqualidade do resultado final mesmo quando armazenado na resoluçãoselecionada mais baixa.

Considere o seguinte exemplo usando edição de alta resolução,onde o usuário seleciona um objeto (e.g., um lua cheia) que eles queremaumentar na imagem final. A resolução extra fornecida pela captura deresolução alta está assim disponível tal que mesmo com a lua aumentada, omaterial editado após ser redimensionado para baixo para o nível de resoluçãodesejada é submetido a menos distorção e irregularidade como iria surgir a luaque tinha sido aumentada na resolução de armazenamento desejada. O usuáriotambém pode quere a imagem redimensionada após fazer seleções, tal comoapós selecionar um ou mais elementos a serem armazenados enquantoeliminando todas ou porções do segundo plano, no qual caso a imagemarmazenada é fornecida em qualidade mais alta. A densidade de bit extratambém é utilizada de forma benéfica em um modo da invenção parapreencher textura melhorada e efeitos com base nas áreas adjacentes e assimpor diante. Para formatos de armazenamento de imagem complexa(suportando resoluções diferentes na mesma imagem ou quadro), a resoluçãoadicional pode ser utilizada para permitir ao usuário selecionar porções daimagem onde resoluções mais altas são desejadas, tal como facesarredondadas em um retrato.

Enquadramento de sombra temporal é uma ferramenta deacordo com uma implementação da invenção na qual pelo menos umaimagem adicional é capturada antes ou seguindo a captura de uma imagemselecionada, assim um imagem principal é capturada com pelo menos umasombra deslocada temporariamente associada. Enquadramento de sombratemporal é preferencialmente efetuado automaticamente, em resposta àconfiguração da câmera, condições de operação, entrada de usuário oucombinação deles. A imagem adicional (ou quadros) "reflete" aquelacapturada, na medida que essas não são imagens em seus próprios direitos,(e.g., preferencialmente não tão facilmente acessíveis) mas são usadas paracoletar dados adicionais para o processo de edição. Um tipo de informaçãoque pode ser utilizada a partir da sombra é sobre movimento (e.g.,computando vetores de movimento) que simplifica a seleção do objeto. Emadição, informação específica sobre o segundo plano da imagem sobre o qualos objetos em movimento estão percorrendo é obtida.

Este processo de sombra também pode ser utilizado paraimagens coletadas com seqüências de fotografias convencionais ouseqüências de vídeo. Uma câmera pode ser configurada para tirar um númeroprogramado de fotos em uma seqüência, tal como para fotos de ação, e/oucontinuamente coletando fotos enquanto o controle do obturador estiverpressionado. Neste caso durante o processo de edição , a programação podeusar a informação de qualquer lugar na seqüência de imagem e fornecermecanismos que em resposta à detecção de diferença suficiente entre assombras, o usuário pode selecionar a que fornece a maior parte dos resultadospreferidos do processo de edição, tal como em resposta a pintura de uma áreada qual um elemento foi removido. Obviamente, quadros de vídeo podem sermanuseados em uma maneira similar ás fotografias de imagens paradas.

À título de exemplo e não de limitação sobre o uso deenquadramento de sombra temporal, considere um retrato de ação de umamigo capturado contra um segundo plano de nuvens circinal coloridas.Contudo, um jato estava passando através da cena quando a imagem foicapturada. Já que a sombra temporal é temporariamente deslocada (através doeixo do tempo), o jato está em uma posição diferente, onde a informação dosegundo plano adicional está por conseguinte disponível a partir destaimagem substituindo a imagem do jato com a exata seção de nuvem laranja,onde a seção não necessita ser estimada ou por outro lado fabricada. Estemecanismo fornece um meio de aprimorar as técnicas descritas acima parasubstituir objetos no material capturado. Será apreciado que otemporariamente dados deslocados podem ser utilizados para efetuar umnúmero de diferentes modificações e melhoramentos. Em um modo deenquadramento de sombra, flash ligeiramente diferente, configurações delentes ou câmeras são utilizadas para o melhoramento da imagem. Em ummodo da invenção em um ou mais quadros de sombra podem ser capturadosem resolução mais baixa do que a imagem principal. O uso de enquadramentode sombra temporal também aprimora a habilidade do sistema de câmera deselecionar objetos dentro da cena porque vetores de imagem podem serdeterminados em resposta à informação de imagem adicional que objetos nacena podem ser mais facilmente discernidos para fazer seleções.

Em câmeras fotográficas por exemplo, uma ou mais imagensadicionais podem ser obtida a priori, ou após , a seqüência do obturador para aimagem capturada. Essas imagens extras são preferencialmente capturadassem um aviso de câmera audível (e.g., som de obturador simulado), e podemser retidas por somente um período de tempo, como desejado, se elas não sãonecessárias para melhorar a imagem que elas estão refletindo.Freqüentemente, um recurso de olho vermelho convencional fornece um pré-flash quando o flash está sendo utilizado, onde de acordo com um modo dapresente invenção uma ou mais sombras é capturada durante esta seqüênciade iluminação de pré-flash. A coleção de imagem(s) refletida ajuda emambos, selecionar os elementos de olho vermelho na cena para posteriorcorreção, enquanto permitindo outros elementos da cena a serem utilizadosfazendo modificações e melhoramentos da imagem principal.

Em câmeras de vídeo, os quadros precedentes e subseqüentespodem ser utilizados para a sombra, e/ou quadros refletidos adicionais podemser coletados tal como entre o outros quadros (e.g., distribuídos igualmenteentre os quadros).

Enquadramento de deslocamento de sombra de umaferramenta de acordo com uma implementação da invenção da presenteinvenção, que fornece quadros refletidos que são espacialmente deslocados(e.g., lado a lado, ou sujeito à distância) da imagem principal de interesse. Jáque o usuário está tipicamente no controle do posicionamento da câmera,enquadramento de deslocamento de sombra é efetuado somente a mando de,ou pelo menos com participação do usuário. Por exemplo, um usuário tirandoum retrato vai capturar a imagem principal antes ou após mover um pouco(e.g., um a quatro pés, dependendo da distância ao objeto) para um lado ououtro e capturar uma imagem enquadrada de deslocamento de sombra.Obviamente, este recurso é mais intrusivo do usuário, ainda de novo, maisdetalhes são tornados disponíveis dos quais a imagem principal, ou umelemento selecionado, pode ser melhorado ou modificado durante o ajuste.Também será apreciado, que a informação coletada das técnicas de sombratemporal e/ou de deslocamento pode ser processada dentro da câmera deacordo com técnicas de super-resolução para aumentar a resolução da fotoprincipal ou porções delas.

Embora a descrição acima contenha muitos detalhes, esses nãodevem ser interpretados como limitando o escopo da invenção mas commeramente fornecendo ilustrações de algumas das modalidadespresentemente preferidas desta invenção. Por conseguinte, será apreciado queo escopo da presente invenção engloba totalmente outras modalidades quepodem se tornar óbvio para aqueles com qualificação na técnica, e que oescopo da presente invenção é consequentemente para ser limitado por nadooutra do que as reivindicações anexas, nas quais referência a um elemento nosingular não é pretendido significar "um e somente um" ao menos queexplicitamente assim colocado, mas mais propriamente "um ou mais". Todosos equivalentes estruturais e funcionais para os elementos da modalidadepreferida descrita acima que são conhecidos para aqueles de qualificaçãosimples na técnica são expressamente incorporados aqui para referência e sãopretendidos para serem englobados pelas presentes reivindicações. Maisainda, não é necessário para um dispositivo ou método endereçar cada um etodo problema pretendido para ser resolvido pela presente invenção, para quepossa ser englobado pelas presentes reivindicações. Ainda mais, nenhumelemento, componente, ou passo de método na presente divulgação épretendido ser dedicado ao público , independente do fato de que o elemento,componente, ou passo do método seja explicitamente citado nasreivindicações. Nenhum elemento da reivindicação é para ser interpretado sobas disposições de 35 U.S.C. 112 sexto parágrafo, ao menos que o elementoseja expressamente citado usando a frase "meios para".

Claims (20)

1. Método para seletivamente aplicar ajustes aos elementoscontidos dentro de material de imagem capturado através de uma câmeratendo entrada de tela de toque, caracterizado pelo fato de compreender:- registro da entrada de tela de toque do usuário em umalocalização em uma tela de exibição no qual um elemento específico nomaterial de imagem capturado é exibido;- selecionar um elemento específico da imagem capturada emresposta ao registro da entrada de tela de toque do usuário, onde o elementoespecífico pode ter qualquer forma arbitrária; e- processar a imagem do mencionado elemento específico paraaplicar ajustes ao mencionado conteúdo do elemento em relação ao restanteda imagem capturada.

2. Método de acordo com a reivindicação 1, caracterizado pelofato de que o material de imagem capturado compreende uma imagem paradaou seqüência de vídeo.

3. Método de acordo com a reivindicação 1, caracterizado pelofato de compreender adicionalmente determinar as fronteiras para múltiploselementos contidos dentro da imagem capturada antes do registro da entradade tela de toque do usuário direcionada a um daqueles múltiplos elementos.

4. Método de acordo com a reivindicação 1, caracterizado pelofato de que os mencionados ajustes para o mencionado elemento dentro domencionado material de imagem são selecionados de um grupo de ajustes deimagens consistindo de: dimensionamento, brilho, contraste, saturação,equilíbrio do branco, redução de ruído, nitidez, borrão, e eliminação.

5. Método de acordo com a reivindicação 1, caracterizado pelofato de que o mencionado processamento do mencionado material de imagempara o mencionado elemento específico aplica ajustes que foramautomaticamente determinados em resposta à caracterização dos aspectos daimagem do mencionado elemento específico.

6. Método de acordo com a reivindicação 1, caracterizado pelofato de compreender ainda refinar a mencionada seleção do elementoespecífico em resposta ao registro de entrada de tela de toque continuada.

7. Método de acordo com a reivindicação 1, caracterizado pelofato de compreender ainda entrar gestos de movimento de dedo após a seleçãodo mencionado elemento específico para controlar edição do elementoespecífico dentro do material de imagem capturado.

8. Método de acordo com a reivindicação 7, caracterizado pelofato de que o brilho e contraste do elemento dento do material de imagem étrocado em resposta aos mencionados gestos de movimento do dedocompreendendo deslizar o dedo para à direita, para á esquerda, para cima epara baixo.

9. Método de acordo com a reivindicação 1, caracterizado pelofato de compreender ainda redimensionar a exibição para o elementoselecionado em resposta aos gestos de movimento do dedo.

10. Método de acordo com a reivindicação 9, caracterizadopelo fato de que o redimensionamento é efetuado em resposta a umdeslizamento do dedo circular.

11. Método de acordo com a reivindicação 1, caracterizadopelo fato de compreender ainda gerar uma indicação visual que o elementoespecífico foi selecionado.

12. Método de acordo com a reivindicação 11, caracterizadopelo fato de que a mencionada indicação visual compreende um destaqueenvolvendo o mencionado elemento dentro do material de imagem capturado.

13. Método de acordo com a reivindicação 1, caracterizadopelo fato de compreender ainda:- capturar e aplicar ajustes ao material de imagem em umprimeira resolução de imagem, e- armazenar a imagem, após o termino do processamento deajuste da imagem, em uma segunda resolução de imagem que é igual oumenor do que a mencionada primeira resolução de imagem;onde a segunda mencionada resolução de imagem é passívelde ser selecionada pelo usuário

14. Método de acordo com a reivindicação 1, caracterizadopelo fato de compreender ainda:capturar material de imagem adicional que étemporariamente, ou espacialmente separado da captura do mencionadomaterial de imagem; e- aplicar ajustes para o mencionado material de imagem emresposta ao mencionado material de imagem adicional.

15. Método de acordo com a reivindicação 14,caracterizado pelo fato de compreender ainda armazenar o mencionadomaterial de imagem após o término do processamento de ajuste de imagem,sem armazenar o material de imagem adicional associado.

16. Método para seletivamente aplicar ajustes aos elementoscontidos dentro de material de imagem capturado através de uma câmeratendo entrada de tela de toque, caracterizado pelo fato de compreender:- capturar material de imagem compreendendo uma imagemparada ou seqüência de vídeo;- registro da entrada de tela de toque do usuário em umalocalização em uma tela de exibição no qual um elemento específico nomaterial de imagem capturado é exibido;- selecionar um elemento específico da imagem capturada emresposta ao registro da entrada de tela de toque do usuário, onde o elementoespecífico pode ter qualquer forma arbitrária;- gerar um destaque envolvendo o mencionado elementoespecífico para indicar a seleção do mencionado elemento específico;- refinar a mencionada seleção do elemento específico emresposta ao registro de entrada de tela de toque persistente;- controlar a aplicação de ajustes para o mencionado elementoespecífico do material de imagem capturado em resposta ao registro daentrada de tela de toque do usuário adicional na forma de gestos demovimento do dedo; e- processar a imagem do mencionado elemento específico paraaplicar ajustes ao mencionado conteúdo do elemento em relação ao restanteda imagem capturada.

17. Método de acordo com a reivindicação 16, caracterizadopelo fato de compreender ainda:- capturar e aplicar ajustes ao material de imagem em umprimeira resolução de imagem, e- armazenar a imagem, após o termino do processamento deajuste da imagem, em uma segunda resolução de imagem que é igual oumenor do que a mencionada primeira resolução de imagem;onde a segunda mencionada resolução de imagem é passívelde ser selecionada pelo usuário.

18. Método de acordo com a reivindicação 16, caracterizadopelo fato de compreender ainda:capturar material de imagem adicional que étemporariamente, ou espacialmente separado da captura do mencionadomaterial de imagem;- aplicar ajustes para o mencionado material de imagem emresposta ao mencionado material de imagem adicional; e- armazenar o mencionado material de imagem após o términodo processamento de ajuste de imagem sem armazenar o material de imagemadicional associado.

19. Câmera, caracterizada pelo fato de compreender:- um dispositivo de captura de imagem óptica configurado paracapturar material de imagem;- um visor óptico para visualmente exibir o material deimagem capturado;- uma tela de toque acoplada ao mencionado visor óptico pararegistrar a posição do contato do usuário quando da exibição do mencionadomaterial de imagem capturado;- um computador acoplado ao mencionado dispositivo decaptura de imagem óptica, o mencionado visor óptico e a mencionada tela detoque para capturar e exibir conteúdo de imagem e seletivamente aplicarajustes aos elementos contidos dentro do material de imagem; e- programação executável no mencionado computador para:- registro da entrada de tela de toque do usuário em umalocalização em uma tela de exibição na qual um elemento específico nomaterial de imagem capturado é exibido,- selecionar um elemento específico do material de imagemcapturado em resposta ao registro da entrada de tela de toque do usuário, ondeo elemento específico pode ter qualquer forma arbitrária, e- processar a imagem do mencionado elemento específico paraaplicar ajustes ao mencionado conteúdo do elemento em relação ao restanteda imagem capturada.

20. Meio legível por computador contendo um programa decomputador executável em um computador dentro de uma câmeraconfigurada com um visor e tela de toque associada para capturar e exibirconteúdo de imagem e seletivamente aplicar ajustes do conteúdo da imagemaos elementos contidos dentro do material de imagem, caracterizado pelo fatode compreender:- registro da entrada de tela de toque do usuário em umalocalização em uma tela de exibição na qual um elemento específico nomaterial de imagem capturado é exibido;- selecionar um elemento específico do material de imagemcapturado em resposta ao registro da entrada de tela de toque do usuário, ondeo elemento específico pode ter qualquer forma arbitrária, e- processar a imagem do mencionado elemento específico paraaplicar ajustes ao mencionado conteúdo do elemento em relação ao restanteda imagem capturada.