BR112016027262B1 - Sistema e método para determinar a resolução de imagem - Google Patents
Sistema e método para determinar a resolução de imagem Download PDFInfo
- Publication number
- BR112016027262B1 BR112016027262B1 BR112016027262-5A BR112016027262A BR112016027262B1 BR 112016027262 B1 BR112016027262 B1 BR 112016027262B1 BR 112016027262 A BR112016027262 A BR 112016027262A BR 112016027262 B1 BR112016027262 B1 BR 112016027262B1
- Authority
- BR
- Brazil
- Prior art keywords
- scene
- resolution
- interest
- image
- imaging device
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 102
- 238000003384 imaging method Methods 0.000 claims abstract description 71
- 230000001419 dependent effect Effects 0.000 claims description 40
- 230000015654 memory Effects 0.000 claims description 38
- 238000001514 detection method Methods 0.000 claims description 12
- 230000008569 process Effects 0.000 description 55
- 230000006870 function Effects 0.000 description 22
- 230000003936 working memory Effects 0.000 description 19
- 238000003860 storage Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 10
- 230000003247 decreasing effect Effects 0.000 description 4
- 244000025254 Cannabis sativa Species 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000009826 distribution Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000002245 particle Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000005352 clarification Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010924 continuous production Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 238000007620 mathematical function Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004091 panning Methods 0.000 description 1
- 239000004576 sand Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/194—Segmentation; Edge detection involving foreground-background segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/65—Control of camera operation in relation to power supply
- H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
sistema e método para determinar a resolução de imagem. são revelados sistemas e métodos para determinar de forma dedutiva uma configuração de resolução para um dispositivo de imagens com base em uma ou mais características de uma cena. as características podem incluir o tamanho de faces primárias ou de primeiro plano dentro da cena, uma quantidade máxima de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena ou um nível de bateria de um dispositivo eletrônico
Description
[0001] Os sistemas e métodos revelados aqui referem-se geralmente à determinação automática e dedutiva de uma resolução de imagem ideal.
[0002] Os usuários muitas vezes definem as suas câmaras para fotografar com a resolução mais elevada, porque não sabem quando podem realmente precisar dos pixels extras para um zoom ou panorâmica posterior. Uma desvantagem de fotografar com resolução máxima é que os arquivos são naturalmente maiores e até mesmo nos telefones celulares de hoje, essas imagens e vídeo podem encher o armazenamento rapidamente. As modalidades aqui discutidas ilustram sistemas e métodos para determinar a resolução para cada foto de forma dedutiva, com base em um ou mais de vários fatores.
[0003] Os sistemas, métodos e dispositivos da revelação, cada, tem vários aspectos inovadores, nenhum único dos quais é somente responsável para os atributos desejáveis aqui descritos. As combinações das inovações, aspectos e características aqui descritos podem ser incorporadas em várias modalidades dos sistemas, métodos e dispositivos, e essas combinações não estão limitadas pelos exemplos das modalidades aqui descritas.
[0004] As modalidades e inovações aqui descritas referem-se aos sistemas e métodos que podem ser executados em um processador em um dispositivo eletrônico para obter uma imagem em uma resolução “ideal”, essa resolução dependendo de um ou mais de vários fatores. Esses fatores podem incluir, mas não estão limitados ao tamanho das faces primárias dentro de uma cena, a quantidade máxima de conteúdo de alta frequência na cena, as condições de iluminação da cena e a duração da bateria do dispositivo. Uma experiência intuitiva do usuário é apresentada para permitir que o usuário selecione um ou mais fatores a serem usados na determinação de uma resolução ideal da imagem de captura.
[0005] Em algumas modalidades, a câmera é selecionada e apontada para uma cena. A cena pode conter várias regiões de interesse (ROIs), por exemplo, faces identificadas por uma função de detecção de face ou objetos identificados por uma função de rastreamento de objetos. O tamanho de uma ou mais das regiões de interesse, como uma percentagem do campo de visão total, pode ser determinado. Com base no tamanho de uma ou mais regiões de interesse, uma configuração de resolução de câmera pode ser aumentada ou diminuída para fornecer uma imagem de qualidade mais alta determinada com a configuração de resolução mais baixa. Em algumas modalidades, pode ser utilizada uma quantidade máxima de conteúdo de alta frequência dentro da cena para determinar se uma definição de resolução de câmera deve ser aumentada ou diminuída. Em algumas modalidades, pode ser determinada uma condição de iluminação da cena. Se a condição de iluminação for determinada como sendo uma condição de baixa luminosidade, uma definição de resolução da câmera pode ser aumentada e a compartimentação CCD utilizada para diminuir a razão de sinal/ruído e aumentar a qualidade da imagem. Em algumas modalidades, uma definição de resolução de câmera pode ser diminuída ou aumentada com base no nível de carga da bateria da câmera.
[0006] Um aspecto refere-se a um sistema para determinar de forma dedutiva uma resolução de captura de imagem, incluindo um módulo de controle configurado para determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e capturar uma imagem da cena na configuração de resolução dependente de cena. O módulo de controle pode ser configurado ainda para configurar uma resolução de captura de imagem padrão, e o módulo de controle pode ainda ser configurado para determinar uma configuração de resolução dependente de cena com base em um ou mais tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. O sistema pode incluir ainda um dispositivo de imagem que compreende um sensor de imagem e sendo que o módulo de controle é ainda configurado para operar o dispositivo de imagem em um modo de visualização. Em algumas modalidades, o módulo de controle pode ser configurado ainda para determinar regiões de interesse dentro da cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos. Em alguma modalidade, o controle pode ser ainda configurado para classificar as regiões de interesse como regiões de primeiro plano ou de fundo de interesse com base em uma área de pixels de cada região de interesse. Em outras modalidades, o módulo de controle é ainda configurado para aumentar uma definição de resolução se a área de pixels de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em outras modalidades, o módulo de controle é ainda configurado para aumentar uma definição de resolução se a área de pixels de uma região de primeiro plano de interesse for inferior a 8% de um campo de vista total do sensor de imagem. Em algumas modalidades, o módulo de controle é ainda configurado para identificar uma quantidade mínima de conteúdo de alta frequência na cena pela varredura da cena para as bordas utilizando uma transformada rápida de Fourier ou janela deslizante. Em algumas modalidades, o módulo de controle é ainda configurado para acessar uma tabela de consulta para determinar um aumento para uma resolução com base na quantidade de conteúdo de alta frequência com a cena. Em outras modalidades, o módulo de controle é ainda configurado para determinar uma condição de iluminação de uma cena e aumentar um ajuste de resolução com base na condição de iluminação. Em algumas modalidades, o módulo de controle é um componente de uma aplicativo de câmera para um dispositivo móvel.
[0007] Em outro aspecto, um método para determinar de forma dedutiva uma resolução de captura de imagem inclui as etapas de determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e capturar uma imagem da cena na configuração de resolução dependente de cena. Em algumas modalidades, o método inclui ainda as etapas de configurar uma resolução de captura de imagem padrão e determinar uma configuração de resolução dependente de cena com base em uma ou mais características de tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em algumas modalidades, o método inclui ainda a etapa de operar um dispositivo de imagem em um modo de pré- visualização. Em outras modalidades, o método inclui ainda a etapa de determinar regiões de interesse dentro de uma cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos. Em outras modalidades, o método inclui ainda a etapa de classificar as regiões de interesse como regiões de primeiro plano ou de fundo de interesse com base em uma área de pixels de cada região de interesse. Em algumas modalidades, o método inclui ainda a etapa de aumentar uma definição de resolução se a área de pixel de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em outras modalidades, o método inclui ainda a etapa de identificar uma quantidade mínima de conteúdo de alta frequência na cena pela varredura da cena para as bordas utilizando uma transformada rápida de Fourier ou janela deslizante. Em outras modalidades, o método inclui ainda a etapa de aumentar uma configuração de resolução com base na quantidade do conteúdo de alta frequência com a cena. Em algumas modalidades, o dispositivo de imagem é configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
[0008] Ainda em outro aspecto, um equipamento para determinar de forma dedutiva uma resolução de captura de imagem inclui meios para determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e meios para capturar uma imagem da cena na configuração de resolução dependente de cena. Em algumas modalidades, o equipamento inclui ainda meios para determinar uma configuração de resolução dependente de cena com base em um ou mais dos tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em outras modalidades, o equipamento inclui ainda meios para configurar uma resolução de captura de imagem padrão.
[0009] Em outro aspecto, uma mídia legível por computador não-transitória armazena instruções que, quando executadas, fazem com que pelo menos um processador de computador físico realize um método de determinação dedutiva de uma resolução de captura de imagem baseada em características de uma cena. O método pode incluir as etapas de determinar uma definição de resolução dependente da cena com base em uma ou mais características da cena e capturar uma imagem da cena na configuração de resolução dependente de cena. Em outras modalidades, o método pode incluir ainda as etapas de configurar uma resolução de captura de imagem padrão e determinar uma configuração de resolução dependente de cena com base em uma ou mais características de tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em algumas modalidades, o método pode ainda incluir a etapa de operar um dispositivo de imagem em um modo de pré-visualização. Em outras modalidades, o método pode incluir ainda as etapas de determinar regiões de interesse dentro de uma cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos e classificar as regiões de interesse como regiões de interesse de primeiro plano ou de fundo com base em uma área de pixel de cada região de interesse. Em algumas modalidades, o método pode incluir ainda a etapa de aumentar uma definição de resolução se a área de pixel de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em algumas modalidades, o método pode incluir ainda as etapas de identificar uma quantidade máxima de conteúdo de alta frequência na cena pela varredura da cena para bordas usando uma transformada rápida de Fourier ou janela deslizante e aumentando uma configuração de resolução com base na quantidade de conteúdo de alta frequência dentro da cena. Em algumas modalidades, o dispositivo de imagem é configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
[0010] Os aspectos revelados serão doravante descritos em conjunto com os desenhos anexos, fornecidos para ilustrar e não para limitar os aspectos revelados, sendo que referências similares denotam elementos similares.
[0011] A Figura 1 é um diagrama em bloco que ilustra um sistema que implementa alguns elementos operacionais para determinar uma resolução para um dispositivo de imagem.
[0012] A Figura 2 é um fluxograma que ilustra uma modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
[0013] A Figura 3 é um fluxograma que ilustra outra modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
[0014] A Figura 4 é um fluxograma que ilustra ainda outra modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
[0015] Para facilidade de referência, um dispositivo ou um componente de um dispositivo, que pode ser usado para capturar uma imagem ou tirar uma foto, ou capturar imagens (por exemplo, vídeo) pode às vezes ser mencionado aqui como uma câmera ou um sistema de formação de imagens. Tipicamente, câmeras incorporadas em um dispositivo inteligente (por exemplo, telefones celulares, laptops, câmeras, tablets ou outros dispositivos móveis) podem ser definidas, ou configuradas para, capturar uma imagem em um de vários níveis de resolução. Por exemplo, um usuário pode definir a câmera para capturar imagens na resolução mais elevada se planejar imprimir ou exibir a imagem, ou o usuário pode ajustar a câmera para capturar imagens em uma resolução mais baixa se planejar simplesmente enviar por e-mail ou compartilhar a imagem através de mídia social. Muitas vezes o usuário ajusta a resolução da câmera para capturar uma imagem na resolução mais elevada sem compreender totalmente as desvantagens para captura de imagens nesse nível de resolução ou que esse nível de resolução pode não ser necessário para toda imagem. Como usado aqui, os métodos e sistemas discutidos abaixo fornecem soluções para determinar uma resolução ótima de imagem com base em um ou mais fatores da cena, e pode sugerir uma definição de resolução para o usuário ou automaticamente ajustar a resolução.
[0016] Em algumas modalidades, o processo de determinação de resolução proposto orienta um processador a determinar um ajuste de resolução com base em um ou mais fatores, por exemplo, iluminação (por exemplo, iluminação ambiente de uma cena, detecção de rosto, teor de frequência elevada de um nível de carga de bateria de cena do sistema de formação de imagens, ou uso de imagem pretendida determinado automaticamente ou como indicado pelo usuário. Esse ajuste de resolução pode ser automaticamente determinado para cada imagem capturada ou pode ser um ajuste opcional sugerido ao usuário. O usuário pode selecionar uma resolução para a imagem antes da captura de imagem ou pode ajustar a câmera para automaticamente ajustar a resolução de captura de imagem. Quando a câmera é ativada para capturar a imagem, a imagem pode ser capturada no ajuste de resolução manualmente entrado pelo usuário ou determinado automaticamente pelo processador. Em algumas modalidades, após captura de uma imagem pelo sistema de formação de imagens, o sistema pode receber uma entrada a partir do usuário, que determina resolução de imagem (por exemplo, para armazenar a imagem).
[0017] É observado que os exemplos podem ser descritos como um processo, que é mostrado como um fluxograma, um diagrama de fluxo, um diagrama de estado finito, um diagrama de estrutura, ou um diagrama de blocos. Embora um fluxograma possa descrever as operações como um processo sequencial, muitas das operações podem ser executadas em paralelo, ou simultaneamente, e o processo pode ser repetido. Além disso, a ordem das operações pode ser reorganizada. Além disso, a ordem das operações pode ser rearranjada. Um processo é encerrado quando suas operações são concluídas. Um processo pode corresponder a um método, uma função, um procedimento, uma sub-rotina, um subprograma, etc. Quando um processo corresponde a uma função de software, a sua conclusão corresponde a um retorno da função para a função de chamada ou a função principal.
[0018] As modalidades podem ser implementadas em Sistema-em-Chip (SoC), ou hardware externo, software, firmware ou qualquer combinação dos mesmos. Aqueles versados na técnica entenderão que informações e sinais podem ser representados usando qualquer de uma variedade de tecnologias e técnicas diferentes. Por exemplo, dados, instruções, comandos, informações, sinais, bits, símbolos, e chips que podem ser referidos em toda a descrição acima podem ser representados por tensões, correntes, ondas eletromagnéticas, campos magnéticos ou partículas, campos ópticos ou partículas, ou qualquer combinação dos mesmos.
[0019] Na descrição a seguir, detalhes específicos são dados para fornecer uma compreensão completa dos exemplos. No entanto, será evidente para aqueles versados na técnica que estes exemplos podem ser praticados sem estes detalhes específicos. Por exemplo, componentes/dispositivos elétricos podem ser mostrados em diagramas de blocos para não obscurecer os exemplos em detalhe desnecessário. Em outras instâncias, tais componentes, outras estruturas e técnicas podem ser mostradas em detalhe para explicar adicionalmente os exemplos.
[0020] A Figura 1 ilustra um exemplo de um sistema de formação de imagens 100 configurado para determinar uma resolução (ótima) para uma imagem, com base em um ou mais de um número de fatores. A modalidade ilustrada não pretende ser limitadora, porém é ao invés ilustrativa de certos componentes em algumas modalidades. O sistema 100 pode incluir uma variedade de outros componentes para outras funções que não são mostardas para clareza dos componentes ilustrados.
[0021] O sistema de formação de imagens 100 pode incluir um dispositivo de imagem 110 e um display eletrônico 130. Certas modalidades de display eletrônico 130 podem ser qualquer tecnologia de display de painel plano, por exemplo, um LED, LCD, plasma ou tela de projeção. O display eletrônico 130 pode ser acoplado ao processador 120 para receber informações para exibição visual para um usuário. Tais informações podem incluir, porém não são limitadas a, representações visuais de arquivos armazenados em um local de memória, aplicativos de software instalados no processador 120, interfaces de usuário, e objetos de conteúdo acessíveis por rede.
[0022] O dispositivo de imagem 110 pode empregar um ou uma combinação de sensores de formação de imagens. O sistema de formação de imagens 100 pode incluir ainda um processador 120 ligado ao dispositivo de imagem 110. Uma memória de trabalho 135, display eletrônico 130 e memória de programa 140 estão também em comunicação com o processador 120. O sistema de formação de imagens 100 pode ser um dispositivo móvel, um tablet, computador laptop ou telefone celular.
[0023] O processador 120 pode ser uma unidade de processamento de propósito geral ou pode ser um processador especialmente projetado para aplicações de formação de imagens para um dispositivo eletrônico portátil. Como mostrado, o processador 120 é conectado a, e em comunicação de dados com, memória de programa 140 e uma memória de trabalho 135. Em algumas modalidades, a memória de trabalho 135 pode ser incorporada no processador 120, por exemplo, memória cache. A memória de trabalho 135 pode ser também um componente separado a partir do processador 120 e acoplado ao processador 120, por exemplo, um ou mais componentes RAM ou DRAM. Em outras palavras, embora a Figura 1 ilustre dois componentes de memória, incluindo componente de memória 140 compreendendo vários módulos e uma memória separada 135 compreendendo uma memória de trabalho, uma pessoa com conhecimentos na técnica reconheceria várias modalidades utilizando arquiteturas de memória diferentes. Por exemplo, um design pode utilizar ROM ou memória RAM estática para a armazenagem de instruções de processador implementando os módulos contidos na memória 140. As instruções de processador podem ser então carregadas em RAM para facilitar execução pelo processador. Por exemplo, a memória de trabalho 135 pode ser uma memória RAM, com instruções carregadas na memória de trabalho 135 antes da execução pelo processador 120.
[0024] Na modalidade ilustrada, a memória de programa 140 armazena um módulo de captura de imagem 145, um módulo de determinação de tamanho de recurso 150, um módulo de determinação de conteúdo de frequência elevada 155, um módulo de determinação de condição de iluminação 157, um módulo de determinação de resolução 160, sistema operacional 165, e um módulo de interface de usuário 170. Esses módulos podem incluir instruções que configuram o processador 120 para executar várias tarefas de gerenciamento de dispositivo e processamento de imagem. A memória de programa 140 pode ser qualquer mídia de armazenamento legível em computador adequada, por exemplo, uma mídia de armazenamento não transitória. A memória de trabalho 135 pode ser usada pelo processador 120 para armazenar um conjunto de trabalho de instruções de processador contidas nos módulos de memória 140. Alternativamente, a memória de trabalho 135 também pode ser usada pelo processador 120 para armazenar dados dinâmicos criados durante a operação do sistema de formação de imagens 100.
[0025] Como mencionado acima, o processador 120 pode ser configurado por vários módulos armazenados na memória 140. Em outras palavras, o processador 120 pode rodar instruções armazenadas em módulos na memória 140. O módulo de captura de imagem 145 pode incluir instruções que configuram o processador 120 para obter imagens a partir do dispositivo de imagem. Portanto, o processador 120, juntamente com módulo de captura de imagem 145, dispositivo de imagem 110, e memória de trabalho 135, representam um meio para obter dados de sensor de imagem.
[0026] Ainda com referência à Figura 1, a memória 140 pode conter também módulo de determinação de tamanho de recurso 150. O módulo de determinação de tamanho de recurso 150 pode incluir instruções que configuram o processador 120 para determinar o tamanho de recursos, por exemplo, rostos, em uma cena e classificar os recursos como recursos de primeiro plano e de segundo plano, como será descrito em detalhe adicional abaixo. Portanto, o processador 120, juntamente com o módulo de determinação de tamanho de recurso 150, memória de trabalho 135, e display eletrônico 130 representam um meio para identificar e classificar recursos em uma cena de interesse com base no tamanho dos recursos.
[0027] A memória 140 pode conter também módulo de determinação de conteúdo de frequência elevada 155. O módulo de determinação de conteúdo de frequência elevada 155 pode incluir instruções que configuram o processador 120 para executar uma função de foco automático e calcular o conteúdo de frequência elevada da imagem. Por exemplo, se a cena de interesse contiver uma área tendo um grau elevado de detalhe, por exemplo, um campo de grama, a função de foco automático do o módulo de determinação de conteúdo de frequência elevada 155 pode retornar parâmetros de foco automático correspondendo ao conteúdo de frequência elevada. Portanto, o processador 120, juntamente com o módulo de determinação de conteúdo de frequência elevada 155 e memória de trabalho 135 representam um meio para identificar uma quantidade máxima de conteúdo de frequência elevada em uma cena de interesse.
[0028] A memória 140 pode conter também módulo de determinação de condição de iluminação 157. O módulo de determinação de condição de iluminação 157 pode incluir instruções que configuram o processador 120 para executar uma função de equilíbrio de branco automática para determinar a quantidade e tipo de luz em uma cena de interesse. Por exemplo, se a função de equilíbrio de branco automático detectar uma condição de iluminação baixa, o módulo de determinação de condição de iluminação 157 pode instruir o processador 120 a filmar em uma resolução máxima, e guardar elementos de dispositivo acoplado de carga (CCD) para melhorar a relação de sinal para ruído (SNR) da imagem. Portanto, o processador 120, juntamente com o módulo de determinação de condição de iluminação 157, e memória de trabalho 135 representam um meio para identificar uma condição de iluminação de uma cena de interesse.
[0029] A memória 140 pode conter também um módulo de determinação de resolução 160. O módulo de determinação de resolução 160 ilustrado na figura 1 pode incluir instruções que configuram o processador 120 a ajustar a resolução de filmagem de uma imagem com base em dados adquiridos por outras funções do processador 120. Por exemplo, se uma função de detecção de recurso for executada em uma cena de interesse e um número de recursos de primeiro plano for identificado, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base no tamanho e número dos recursos de primeiro plano, como será descrito em maior detalhe abaixo. Portanto, o processador 120, juntamente com o módulo de determinação de tamanho de recurso 150, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em um tamanho e número de recursos detectados em uma cena de interesse.
[0030] Em outro exemplo, um usuário pode estar filmando uma imagem contendo folhas de grama ou outros recursos que incluem uma quantidade grande de detalhe (por exemplo, bordas), como detectado pelo módulo de determinação de conteúdo de frequência elevada 155. Nesse exemplo, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base na quantidade de conteúdo de frequência elevada na cena de interesse; ou diminuir a resolução para uma imagem contendo quantidade relativamente baixa de detalhe. Portanto, o processador 120, juntamente com o módulo de determinação de conteúdo de frequência elevada 155, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em uma quantidade máxima de conteúdo de frequência elevada em uma cena de interesse.
[0031] Ainda em outro exemplo, um usuário pode estar fotografando uma imagem em uma condição de pouca luz, por exemplo, em local fechado ou à noite, como detectado pelo módulo de determinação de condição de iluminação 157. Nesse exemplo, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução da captura de imagem do dispositivo de imagem 110 com base na condição de iluminação detectada da cena de interesse. Portanto, o processador 120, juntamente com o módulo de determinação de condição de iluminação 157, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em uma condição de iluminação detectada de uma cena de interesse.
[0032] A memória 140 pode conter também um módulo de interface de usuário 170. O módulo de interface de usuário 170 ilustrado na Figura 1 pode incluir instruções que configuram o processador 120 para prover uma coleção de objetos no visor e controles suaves que permitem que o usuário selecione uma resolução de captura de imagem sugerida ou reconheça uma configuração de resolução de captura de imagem automática do dispositivo de imagem. O módulo de interface de usuário 170 pode também permitir que aplicativos interajam com o resto do sistema. Um módulo de sistema operacional 170 pode também residir na memória 140 e operar com o processador 120 para gerenciar a memória e os recursos de processamento do sistema 100. Por exemplo, o sistema operacional 165 pode incluir unidades do dispositivo para gerenciar recursos de hardware, por exemplo, o display eletrônico 130 ou dispositivo de imagem 110. Em algumas modalidades, as instruções contidas no módulo de determinação de tamanho de tamanho de característica 150, módulo de determinação de conteúdo de alta frequência 155, módulo de determinação de condição de iluminação 157 e módulo de determinação de resolução 160 podem não interagir com esses recursos de hardware diretamente, mas, em vez disso, interagir por meio de sub- rotinas padrão ou APIs localizadas no sistema operacional 165. As instruções dentro do sistema operacional 165 podem então interagir diretamente com esses componentes de hardware.
[0033] O processador 120 pode gravar dados no módulo de armazenamento 125. Embora o módulo de armazenamento 125 seja graficamente representado como uma unidade de disco tradicional, o versado na técnica entenderia que múltiplas modalidades poderiam incluir um dispositivo de armazenamento com base em disco ou um de vários outros tipos de mídias de armazenamento, incluindo um disco de memória, unidade USB, unidade flash, mídia de armazenamento conectada remotamente, unidade de disco virtual ou similares.
[0034] Embora a Figura 1 represente um dispositivo que compreende componentes separados para incluir um processador, dispositivo de imagem, display eletrônico, e memória, um versado na técnica reconheceria que um ou mais desses componentes separados pode ser combinado em uma variedade de modos para obter objetivos de projeto particulares. Por exemplo, em uma modalidade alternativa, os componentes de memória podem ser combinados com componentes do processador para economizar em custos e melhorar desempenho.
[0035] Adicionalmente, embora a Figura 1 ilustre dois componentes de memória, incluindo componente de memória 140 compreendendo vários módulos e uma memória separada 135 compreendendo uma memória de trabalho, uma pessoa com conhecimentos na técnica reconheceria várias modalidades utilizando arquiteturas de memória diferentes. Por exemplo, um design pode utilizar ROM ou memória RAM estática para a armazenagem de instruções de processador implementando os módulos contidos na memória 140. Alternativamente, as instruções do processador podem ser lidas na inicialização do sistema a partir de um dispositivo de armazenamento em disco que é integrado ao sistema de imagem 100 ou conectado por meio de uma porta de dispositivo externo. As instruções de processador podem ser então carregadas em RAM para facilitar execução pelo processador. Por exemplo, a memória de trabalho 135 pode ser uma memória RAM, com instruções carregadas na memória de trabalho 135 antes da execução pelo processador 120.
[0036] Modalidades da invenção se referem a um processo para determinar uma resolução de imagem ideal, que pode incluir habilitar um modo de determinação de resolução de um dispositivo de imagem em que o sistema determina uma resolução a se usar para capturar uma imagem de uma cena com base em uma ou mais características da cena. Os exemplos podem ser descritos como um processo, que é mostrado como um fluxograma, um diagrama de fluxo, um diagrama de estado finito, um diagrama de estrutura, ou um diagrama de blocos. Embora um fluxograma possa descrever as operações como um processo sequencial, muitas das operações podem ser executadas em paralelo, ou simultaneamente, e o processo pode ser repetido. Além disso, a ordem das operações pode ser reorganizada. Além disso, a ordem das operações pode ser rearranjada. Um processo pode ser encerrado quando suas operações são concluídas. Um processo pode corresponder a um método, uma função, um procedimento, uma sub-rotina, um subprograma, etc. Quando um processo corresponde a uma função, a sua conclusão pode corresponder a um retorno da função para a função de chamada ou a função principal.
[0037] A Figura 2 ilustra um exemplo de uma modalidade de um processo 200 para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma determinação de resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em várias implementações, o processo 200 pode incluir uma ou mais características do processo adicionais, ou não incluir uma certa característica ilustrada. Em alguns exemplos, o processo 200 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software. Em algumas modalidades, pelo menos uma porção do processo 200 pode ser implementada em hardware.
[0038] O processo 200 começa no bloco de início 202 e muda para o bloco 204 sendo que a resolução de captura de imagem predefinida é definida para uma resolução predeterminada. Em algumas modalidades, uma resolução predeterminada pode ser selecionada com base, por exemplo, no tamanho do espaço de armazenamento em memória disponível no dispositivo, nas seleções anteriores do usuário de uma resolução padrão, ou nos níveis de resolução disponíveis, por exemplo, em uma resolução de ponto médio, ou um ou mais outros fatores. Por exemplo, em algumas modalidades, a resolução de captura de imagem predefinida pode ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em outras modalidades, a resolução de captura de imagem padrão pode ser configurada para qualquer fração da resolução máxima, como um oitavo, um sexto, um quarto, metade, etc.
[0039] Em seguida, o processo 200 muda para o bloco 206, sendo que o dispositivo de imagem 110 é operado em um modo de pré-visualização para visualizar a cena de interesse. Em algumas modalidades, um modo de pré- visualização pode incluir exibir em um display eletrônico, por exemplo, display eletrônico 130 (Figura 1) a cena como visualizada pela lente do dispositivo de imagem 110. O dispositivo eletrônico pode ser um dispositivo de comunicação portátil, por exemplo, um telefone celular ou “telefone inteligente”, ou um assistente de dados pessoais móvel (PDA) incluindo um computador tipo tablet. Por exemplo, o usuário pode operar a câmera de um dispositivo móvel em um modo de pré-visualização para determinar se captura ou não uma imagem. Em um outro exemplo, o usuário pode operar a câmera do dispositivo móvel em um modo de pré-visualização para determinar qual resolução usar para capturar uma imagem da cena.
[0040] O processo 200 então muda para o bloco 208, em que o processador, por exemplo o processador 120, é instruído para determinar regiões de interesse, por exemplo rostos ou objetos, dentro da cena atual. Em algumas modalidades, o processador pode usar algoritmos de detecção de rosto ou algoritmos de rastreamento de objetos para identificar possíveis regiões de interesse. Por exemplo, um algoritmo de detecção de rosto pode determinar que oito rostos aparecem dentro da cena. Em outro exemplo, um algoritmo de rastreamento de objeto pode identificar um número de itens colocados dentro de um fundo neutro, por exemplo, um balde, castelo de areia e um pássaro em uma praia. Preferivelmente, as regiões de interesse são determinadas durante o modo de pré-visualização como um processo contínuo. Preferivelmente, o processo 200 conforme rodado pelo sistema de imagem 100 não é dependente do algoritmo de detecção de rosto específico usado desde que o algoritmo selecionado possa detectar rostos adequadamente. Em algumas modalidades, um algoritmo de detecção de rostos, por exemplo, o algoritmo de detecção de rostos Viola Jones disponível em OpenCV pode ser usado. Similarmente, o processo 200 como rodado pelo sistema de imagem 100 também não é, desejavelmente, dependente do algoritmo de rastreamento de objetos desde que rastreamento de objetos preciso possa ser determinado. Uma vez que as possíveis regiões de interesse tenham sido determinadas, o processo 200 muda para o bloco 210.
[0041] No bloco 210, o processo 200 pode instruir o processador é instruído para classificar os rostos ou objetos detectados como rostos ou objetos em primeiro ou segundo plano. Em algumas modalidades, a classificação de cada rosto ou objeto como rosto ou objeto em primeiro ou segundo plano pode ter base em distribuições do tamanho do recorte de histograma. Por exemplo, distribuições do tamanho do recorte de histograma podem indicar o percentual do campo de visão (FOV) ocupado pelos rostos ou objetos em primeiro ou segundo plano. A área dos rostos e objetos em primeiro e/ou segundo plano pode ser expressa como áreas de pixel x pixel do sensor de imagem ou de uma imagem com o presente campo de visão. Os rostos ou objetos podem ser classificados como rostos ou objetos em primeiro plano com base em se o percentual do FOV ocupado pelos rostos ou objetos está acima de um limite predeterminado. Por exemplo, se três rostos ocupam 5% de todo o campo de visão (FOV) do dispositivo de imagem 110 e há oito rostos que juntos ocupam cerca de 2% do FOV, o processador determinará que há três rostos primários ou em primeiro plano. Em um exemplo, em uma imagem típica, um rosto deve ocupar pelo menos 5% ou 1/20 do FOV para ser considerado um rosto primário ou em primeiro plano. Em outras modalidades, um rosto pode ocupar pelo menos cerca de 2%, 3%, ou 4% do FOV para ser considerado um rosto primário ou em primeiro plano. Entretanto, em outras modalidades, os critérios ou limites usados para separar os rostos ou objetos primários ou em primeiro plano dos rostos ou objetos em segundo plano podem ser definidos pelo usuário.
[0042] O processo 200 em seguida muda para o bloco 212 e o processo 200 determina se deve-se aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base no tamanho do rosto ou objeto primário em comparação a um limite predeterminado. Isso pode ser feito provendo instruções ao processador para essa ação. Em algumas modalidades, se um rosto primário ocupa um percentual calculado do FOV, então o processador pode ser instruído a acessar informações armazenadas na memória para determinar a resolução para o dado tamanho de rosto, como indicado pelo bloco 212. Por exemplo, se um rosto primário ocupa um percentual calculado do FOV, então o processador pode ser instruído a acessar uma tabela de consulta (LUT) para determinar a resolução para o dado tamanho de rosto, como indicado pelo bloco 212. Em outras modalidades, a resolução para o dado tamanho de rosto pode ser determinada por uma função matemática.
[0043] Em um exemplo, para cada número especificado de bordas afiadas detectadas, como 1000, a resolução pode ser aumentada em 2 megapixels (MP). Em outras modalidades, um limite de detecção de borda afiada pode ser configurado para outros valores, como 500, 1000, 1500, 2000, etc. com cada limite associado a um aumento de resolução, como 1 MP, 2 MP, 3 MP, 4 MP, etc. Em um exemplo, se um rosto ocupa aproximadamente 15% do FOV, então a imagem será capturada na configuração de resolução padrão, que pode ser 3 megapixels (MP). Em um outro exemplo, se os rostos primários ocupam menos que 8% do FOV, então o processador pode ser instruído a ajustar a resolução de modo que a imagem é fotografada em uma resolução maior, por exemplo 5 MP.
[0044] Em um outro exemplo, se os rostos ocupam menos que 5% do FOV, o processador pode ser instruído a ajustar a resolução de modo que a imagem é fotografada em uma resolução máxima, por exemplo 10 MP. Em outras palavras, se for verificado que os rostos e/ou objetos são uma área pequena do FOV, a resolução é desejavelmente aumentada. Se os rostos e/ou objetos ocupam uma área maior do FOV, a resolução pode permanecer a mesma que a resolução padrão ou pode ser diminuída. Em cada exemplo, a resolução máxima é dependente da resolução máxima do dispositivo de imagem 110 e, portanto, diferentes limites para resolução de captura de imagem podem ser configurados com base na resolução do dispositivo de imagem 110. Uma vez que a resolução tiver sido determinada e configurada, o processo 200 muda para o bloco 214 em que o processador é instruído a capturar uma imagem da cena na resolução dependente de cena otimizada, como indicado pelo bloco 214. Uma vez que a imagem foi capturada na resolução dependente de cena, o processo 200 pode mudar para o bloco 216 e terminar.
[0045] A Figura 3 ilustra outro exemplo de uma modalidade de um processo para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em alguns exemplos, o processo 300 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software.
[0046] O processo 300 começa no bloco de início 302 e muda para o bloco 304 sendo que a resolução de imagem predefinida é definida para uma resolução predeterminada. Por exemplo, em algumas modalidades, como discutido acima, a resolução de captura de imagem predefinida poderia ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em seguida, o processo 300 muda para o bloco 306, sendo que o dispositivo de imagem 110 pode ser operado em um modo de pré-visualização para visualizar a cena de interesse para determinar se é necessária uma alteração na resolução.
[0047] O processo 300 em seguida muda para o bloco 308, sendo que o processador pode ser instruído para identificar uma quantidade máxima de conteúdo de alta frequência na imagem. A nitidez é sem dúvida o fator de qualidade de imagem fotográfica mais importante porque determina a quantidade de detalhes que um sistema de imagem pode reproduzir. A nitidez pode ser definida pelos limites ou bordas entre as zonas de tons ou cores diferentes. Utilizando um detector de nitidez, por exemplo uma Transformada Rápida de Fourier ou uma janela deslizante, uma nitidez da imagem pode ser determinada. A quantidade máxima de conteúdo de alta frequência pode ser determinada pelas pontuações de alta frequência na posição de foco automático onde a imagem é a mais nítida. Em seguida, no bloco 310, o processador pode ser instruído para determinar a resolução da imagem com base no máximo de conteúdo de alta frequência na cena. Se a quantidade de conteúdo de alta frequência na imagem for superior a um limiar predeterminado, então a resolução da imagem será aumentada. Por exemplo, se o usuário estiver tirando uma imagem de um céu azul ou do oceano, a resolução padrão ou uma resolução mais baixa pode ser suficiente. No entanto, se o usuário estiver fotografando uma imagem que tenha um conteúdo de alta frequência por exemplo lâminas de grama ou outras características de detalhe, a resolução é desejavelmente aumentada para capturar o detalhe da imagem. Em algumas modalidades, uma tabela de consulta pode ser utilizada para determinar qual a resolução deve ser utilizada para capturar imagens com várias quantidades de conteúdo de alta frequência. Uma vez determinada a resolução ideal, o processo 300 muda para o bloco 312, sendo que o processador é instruído a definir a resolução na configuração de resolução ideal, dependente da cena. Em seguida, no bloco 314, uma imagem da cena é capturada pelo dispositivo de imagem 110 na definição de resolução dependente da cena. Depois de adquirir a imagem, o processo 300 muda para o bloco 316 e termina.
[0048] A Figura 4 ilustra outro exemplo de uma modalidade de um processo para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em alguns exemplos, o processo 400 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software.
[0049] O processo 400 começa no bloco de início 402 e muda para o bloco 404 sendo que a resolução de imagem predefinida é definida para uma resolução predeterminada. Por exemplo, em algumas modalidades, como discutido acima, a resolução de captura de imagem predefinida poderia ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em seguida, o processo 400 muda para o bloco 406, sendo que o dispositivo de imagem 110 pode ser operado em um modo de pré-visualização para visualizar a cena de interesse para determinar se é necessária uma alteração na resolução.
[0050] O processo 400 em seguida muda para o bloco 408, sendo que o processador pode ser instruído para identificar uma condição de iluminação para determinar se a resolução padrão será suficiente. Em algumas modalidades, pode ser utilizado um balanço de brancos automático para determinar o nível de luz da cena. A fonte de luz detectável mínima depende do sensor de imagem do dispositivo de imagem, especificamente do tamanho do sensor de imagem. Por exemplo, com base no número de lúmens detectados, o processador pode ser instruído para ativar a compartimentação. A compartimentação, como aplicada aos dispositivos acoplados de carga (CCDs), permite que as cargas dos pixels adjacentes sejam combinadas, oferecendo benefícios como velocidades de leitura mais rápidas e razões de sinal/ruído melhoradas à custa da redução da resolução espacial. Tirar uma foto em condições de pouca luz, por exemplo, em ambientes fechados ou em um restaurante com iluminação fraca, acionará o processador para determinar o nível de resolução necessário para a condição de iluminação indicada, conforme indicado na próxima etapa, bloco 410. Uma vez determinada a resolução ideal para a dada condição de iluminação, o processo 400 muda para o bloco 412, sendo que o processador é instruído a definir a resolução na configuração de resolução ideal, dependente da cena. Se for detectada uma condição de pouca iluminação, o processador instruirá o dispositivo de imagem 110 para fotografar imagens com a resolução máxima, mas compartimenta elementos de CCD para melhorar a razão de sinal-ruído. Em seguida, no bloco 414, uma imagem da cena é capturada pelo dispositivo de imagem 110 na definição de resolução dependente da cena. Em um exemplo, a câmera pode fotografar uma cena de baixa iluminação em 40MP para criar uma imagem de 3MP. Depois de adquirir a imagem, o processo 400 muda para o bloco 416 e termina. O processo 400 pode ser usado para criar um arquivo de imagem ideal, dada uma condição de baixa iluminação, independentemente das configurações personalizadas que podem ser selecionadas.
[0051] Ainda em outro exemplo, o nível atual da bateria do dispositivo eletrônico pode desencadear uma alteração na resolução da imagem de modo a economizar a energia da bateria. Por exemplo, se o dispositivo determina que a carga atual da bateria do dispositivo pode não permitir que o dispositivo seja operado com as definições atuais até o próximo período de carga esperado, o processador pode ser instruído a baixar a resolução da imagem de modo que o dispositivo de imagem 110 adquira imagens com menor resolução para economizar a duração da bateria. Em algumas modalidades, o processador pode ser instruído a executar um aplicativo para redimensionar imagens quando o dispositivo eletrônico está plugado e carregando.
[0052] Os exemplos discutidos acima com relação aos processos 200, 300 e 400 podem ser implementados individualmente em um dispositivo eletrônico ou um ou mais dos processos podem ser implementados em conjunto. Em algumas modalidades, um ou mais dos processos ou exemplos discutidos acima para a resolução de imagem dependente da cena podem ser implementados durante as funções de captura de pré-imagem do dispositivo de imagem, por exemplo durante as funções de foco automático ou balanço de brancos automático. Em algumas modalidades, os processos de resolução dependentes de cena, como os descritos acima, podem ser implementados após a captura de imagens. Nas modalidades em que processos de resolução dependentes de cena são implementados após a captura de imagens, as imagens adquiridas podem ser redimensionadas antes do armazenamento para economizar espaço no disco.
[0053] Em algumas modalidades, onde mais de um fator é considerado para determinar a resolução, os fatores podem ser ponderados para determinar quais os fatores irão controlar, ou principalmente controlar, a resolução. Em algumas modalidades, os fatores podem ser avaliados conjuntamente uns com os outros para determinar a resolução desejada.
[0054] A menos que indicado de outro modo, qualquer revelação de uma operação de um equipamento tendo uma característica específica também é expressamente destinada a divulgar um método tendo uma característica análoga (e vice-versa) e qualquer revelação de uma operação de um equipamento de acordo com uma configuração específica também é expressamente destinada a revelar um método de acordo com uma configuração análoga (e vice-versa). O termo “configuração” pode ser usado em referência a um método, equipamento e/ou sistema, conforme indicado pelo seu contexto particular. Os termos “método”, “processo”, “procedimento” e “técnica” são usados genericamente e de forma intercambiável, a menos que o contexto específico indique o contrário. Os termos “equipamento” e “dispositivo” também são usados genericamente e de forma intercambiável, a menos que o contexto específico indique o contrário. Os termos “elemento” e “módulo” são tipicamente usados para indicar uma porção de uma configuração maior. A menos que expressamente limitado por seu contexto, o termo “sistema” é usado aqui para indicar qualquer de seus significados comuns, incluindo “um grupo de elementos que interagem para servir a um propósito comum”. Qualquer incorporação por referência de uma parte de um documento também deve ser entendida como incorporando definições de termos ou variáveis que são referenciadas dentro da porção, onde tais definições aparecem em outro lugar do documento, bem como quaisquer figuras referenciadas na porção incorporada.
[0055] Aqueles versados na técnica irão apreciar ainda que os vários blocos, módulos, circuitos, e etapas de processo lógicos ilustrativos descritos em relação às implementações aqui descritas podem ser implementados como hardware eletrônico, software de computador, ou combinações de ambos. Para ilustrar claramente esta intercambiabilidade de hardware e software, vários componentes, blocos, módulos, circuitos e etapas ilustrativas foram descritos acima, geralmente em termos da sua funcionalidade. Se tal funcionalidade é implementada como hardware ou software depende da aplicação e limitações de design específicas impostas ao sistema global. Pessoas versadas na técnica podem implementar a funcionalidade descrita de modos variados para cada solicitação particular, mas essas decisões de implementação não devem ser interpretadas como causando uma partida do escopo da presente invenção. Uma pessoa versada na técnica irá reconhecer que uma porção, ou uma parte, pode compreender alguma coisa menos que, ou igual a um todo. Por exemplo, uma porção de uma coleção de pixels pode ser referir a uma sub-coleção desses pixels.
[0056] Os vários blocos lógicos, módulos e circuitos ilustrativos descritos em ligação com as implementações apresentadas na presente invenção podem ser implementados ou executados com um processador de uso geral, um Processador de Sinal Digital (DSP), um Circuito Integrado de Aplicação Específica (ASIC), um Arranjo de Porta Programável em Campo (FPGA) ou outro dispositivo lógico programável (PLD), porta discreta ou lógica de transistor, componentes de hardware discretos, ou qualquer combinação dos mesmos concebida para executar as funções aqui descritas. Um processador de uso geral pode ser um microprocessador, mas, em alternativa, o processador pode ser qualquer processador convencional, controlador, microcontrolador, ou máquina de estados convencionais. Um processador também pode ser implementado como uma combinação de dispositivos de computação, por exemplo, uma combinação de um DSP e um microprocessador, uma pluralidade de microprocessadores, um ou mais microprocessadores em conjunto com um núcleo de DSP, ou qualquer outro tipo de configuração.
[0057] As etapas de um método ou processo descrito em relação às implementações apresentadas na presente invenção aqui podem ser incorporadas diretamente em hardware, em um módulo de software executado por um processador ou em combinação dos dois. Um módulo de software pode residir na memória RAM, memória flash, memória ROM, memória EPROM, EEPROM, registros, disco rígido, um disco amovível, um CD-ROM, ou qualquer outra forma de mídia de armazenamento não transitória conhecida na técnica. Uma mídia de armazenamento legível por computador exemplificadora é acoplada ao processador de modo que o processador possa ler informação a partir de, e gravar informação na mídia de armazenamento legível por computador. Em alternativa, a mídia de armazenamento pode ser parte integral do processador. O processador e a mídia de armazenamento podem residir em um ASIC. O ASIC pode residir em um terminal de usuário, câmera ou outro dispositivo. Em alternativa, o processador e a mídia de armazenamento podem residir como componentes distintos em um terminal de usuário, câmera ou outro dispositivo.
[0058] Os cabeçalhos são aqui incluídos para referência e para auxiliar na localização de várias seções. Estes cabeçalhos não se destinam a limitar o escopo dos conceitos descritos a este respeito. Tais conceitos podem ter aplicabilidade ao longo de toda a especificação.
[0059] A descrição anterior das implementações reveladas é fornecida para permitir que qualquer pessoa versada na técnica faça ou use a presente invenção. Várias modificações para estas implementações serão prontamente evidentes para os versados na técnica, e os princípios genéricos aqui definidos podem ser aplicados a outras implementações sem que se afaste do espírito e escopo da revelação. Assim, a presente invenção não pretende ser limitada às implementações mostradas aqui, mas deve estar de acordo com o mais vasto escopo consistente com os princípios e novas características aqui descritas.
Claims (9)
1. Aparelho para determinação dedutiva de uma resolução de captura de imagem caracterizado por compreender: meios para operar um dispositivo de imageamento em um modo de visualização em uma resolução padrão para obter uma imagem de uma cena; meios (150) para classificar uma ou mais regiões de interesses na imagem da cena como regiões de primeiro plano de interesse com base em um tamanho da região de interesse, em que o tamanho de cada região de interesse é com base em uma área de pixels de cada região de interesse; meios (160) para determinar uma configuração de resolução dependente da cena com base nos tamanhos da uma ou mais regiões de primeiro plano de interesse, em que a configuração de resolução dependente da cena é maior ou menor que a resolução padrão, em que a configuração de resolução dependente da cena é: maior que a resolução padrão se a área de pixels de uma região de primeiro plano de interesse for menor que uma porcentagem especificada do campo de visão total do dispositivo de imageamento; e menor que a resolução padrão se a área de pixels da região de primeiro plano não for menor que a porcentagem especificada do campo de visão total do dispositivo de imageamento; meios (120) para ajustar a resolução de captura de imagem para o dispositivo de imageamento para uma configuração de resolução dependente da cena; e meios (120, 135, 145) para capturar uma imagem da cena na configuração de resolução dependente da cena.
2. Aparelho, de acordo com a reivindicação 1, caracterizado por compreender adicionalmente meios (157) para determinar uma condição de iluminação da cena e/ou um nível de bateria de um dispositivo eletrônico e em que a configuração de resolução dependente da cena é adicionalmente com base na condição de iluminação determinada e/ou no nível de bateria determinado.
3. Método (200) para determinação dedutiva de uma resolução de captura de imagem, caracterizado por compreender: operar (204, 206) um dispositivo de imageamento em um modo de visualização em uma resolução padrão para obter uma imagem de uma cena; classificar (208, 210) uma ou mais regiões de interesses na imagem da cena como regiões de primeiro plano de interesse com base em um tamanho da região de interesse, em que o tamanho de cada região de interesse é com base em uma área de pixels de cada região de interesse; determinar (212) uma configuração de resolução dependente da cena com base nos tamanhos da uma ou mais regiões de interesse, em que a configuração de resolução dependente da cena é maior ou menor que a resolução padrão, em que a configuração de resolução dependente da cena é: maior que a resolução padrão se a área de pixels de uma região de primeiro plano de interesse for menor que uma porcentagem especificada do campo de visão total do dispositivo de imageamento; e menor que a resolução padrão se a área de pixels da região de primeiro plano não for menor que a porcentagem especificada do campo de visão total do dispositivo de imageamento; ajustar (212) a resolução de captura de imagem para o dispositivo de imageamento para uma configuração de resolução dependente da cena; e capturar (214) uma imagem da cena na configuração de resolução dependente da cena.
4. Método, de acordo com a reivindicação 3, caracterizado pela configuração de resolução dependente da cena é adicionalmente com base em um ou mais de um conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena, e um nível de bateria de um dispositivo eletrônico.
5. Método, de acordo com a reivindicação 3, caracterizado por compreender adicionalmente determinar regiões de interesse dentro de uma cena com o uso de um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos.
6. Método, de acordo com a reivindicação 4, caracterizado por compreender adicionalmente identificar uma quantidade máxima de conteúdo de alta frequência na cena varrendo-se a cena por bordas com o uso de uma transformada rápida de Fourier ou de uma janela deslizante.
7. Método, de acordo com a reivindicação 6, caracterizado por compreender adicionalmente aumentar uma configuração de resolução com base na quantidade de conteúdo de alta frequência com a cena.
8. Método, de acordo com a reivindicação 3, caracterizado pelo dispositivo de imageamento ser configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
9. Memória caracterizada por compreender instruções armazenadas na mesma que, quando executadas, fazem com que pelo menos um processador de computador físico de um aparelho, conforme definido na reivindicação 1, realize um método de determinação dedutiva que determina uma resolução de captura de imagem com base em recursos de uma cena conforme definido em qualquer uma das reivindicações 3 a 8.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/284,217 US9544497B2 (en) | 2014-05-21 | 2014-05-21 | System and method for determining image resolution |
US14/284,217 | 2014-05-21 | ||
PCT/US2015/029476 WO2015179129A1 (en) | 2014-05-21 | 2015-05-06 | System and method for determining image resolution |
Publications (2)
Publication Number | Publication Date |
---|---|
BR112016027262A2 BR112016027262A2 (pt) | 2017-08-15 |
BR112016027262B1 true BR112016027262B1 (pt) | 2023-11-07 |
Family
ID=53189219
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
BR112016027262-5A BR112016027262B1 (pt) | 2014-05-21 | 2015-05-06 | Sistema e método para determinar a resolução de imagem |
Country Status (7)
Country | Link |
---|---|
US (1) | US9544497B2 (pt) |
EP (1) | EP3146710B1 (pt) |
JP (1) | JP6200104B2 (pt) |
KR (1) | KR101781773B1 (pt) |
CN (1) | CN106464801B (pt) |
BR (1) | BR112016027262B1 (pt) |
WO (1) | WO2015179129A1 (pt) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150350611A1 (en) * | 2013-05-30 | 2015-12-03 | Manything Systems Limited | Methods and systems for monitoring environments using smart devices |
US9978126B2 (en) | 2014-04-30 | 2018-05-22 | Empire Technology Development Llc | Image resolution modification |
CN106062781A (zh) * | 2014-04-30 | 2016-10-26 | 英派尔科技开发有限公司 | 图像分辨率修改 |
KR102195311B1 (ko) * | 2014-09-15 | 2020-12-24 | 삼성전자주식회사 | 이미지의 잡음 특성 개선 방법 및 그 전자 장치 |
JP6356552B2 (ja) * | 2014-09-16 | 2018-07-11 | 東芝メモリ株式会社 | 情報処理装置 |
US10102590B1 (en) | 2014-10-02 | 2018-10-16 | United Services Automobile Association (Usaa) | Systems and methods for unmanned vehicle management |
US11688014B1 (en) | 2014-10-02 | 2023-06-27 | United Services Automobile Association (Usaa) | Systems and methods for unmanned vehicle management |
US10365646B1 (en) | 2015-01-27 | 2019-07-30 | United Services Automobile Association (Usaa) | Systems and methods for unmanned vehicle management |
US9939810B1 (en) | 2015-04-17 | 2018-04-10 | United Services Automobile Association | Indoor drone flight awareness system |
US10397469B1 (en) | 2015-08-31 | 2019-08-27 | Snap Inc. | Dynamic image-based adjustment of image capture parameters |
US10354386B1 (en) | 2016-01-27 | 2019-07-16 | United Services Automobile Association (Usaa) | Remote sensing of structure damage |
CN109314749B (zh) * | 2016-06-28 | 2022-04-05 | 索尼公司 | 成像设备、成像方法和程序 |
JP6685188B2 (ja) * | 2016-06-29 | 2020-04-22 | キヤノン株式会社 | 撮像装置、画像処理装置及びそれらの制御方法、プログラム |
CN107071273A (zh) * | 2017-03-01 | 2017-08-18 | 北京橙鑫数据科技有限公司 | 一种拍照指令发送方法及装置 |
US10536700B1 (en) * | 2017-05-12 | 2020-01-14 | Gopro, Inc. | Systems and methods for encoding videos based on visuals captured within the videos |
WO2019160194A1 (ko) * | 2018-02-14 | 2019-08-22 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
CN108983953B (zh) * | 2018-07-19 | 2021-02-02 | 中国联合网络通信集团有限公司 | 一种延长设备电能使用时间的装置和方法 |
WO2020144936A1 (ja) * | 2019-01-09 | 2020-07-16 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
JP7279533B2 (ja) * | 2019-06-14 | 2023-05-23 | ソニーグループ株式会社 | センサ装置、信号処理方法 |
CN110855881B (zh) * | 2019-11-01 | 2021-07-02 | RealMe重庆移动通信有限公司 | 拍摄处理方法及装置、存储介质和电子设备 |
CN110855882B (zh) * | 2019-11-01 | 2021-10-08 | RealMe重庆移动通信有限公司 | 拍摄处理方法及装置、存储介质和电子设备 |
GB2588827B (en) * | 2019-11-11 | 2022-10-12 | Advanced Risc Mach Ltd | Depth processing |
CN116074623B (zh) * | 2022-05-30 | 2023-11-28 | 荣耀终端有限公司 | 一种摄像头的分辨率选择方法和装置 |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5949483A (en) * | 1994-01-28 | 1999-09-07 | California Institute Of Technology | Active pixel sensor array with multiresolution readout |
US5828406A (en) * | 1994-12-30 | 1998-10-27 | Eastman Kodak Company | Electronic camera having a processor for mapping image pixel signals into color display pixels |
US6707487B1 (en) * | 1998-11-20 | 2004-03-16 | In The Play, Inc. | Method for representing real-time motion |
US7068316B1 (en) * | 2000-09-29 | 2006-06-27 | Ess Technology, Inc. | Selectable resolution image capture system |
JP2003204541A (ja) * | 2001-12-28 | 2003-07-18 | Nippon Signal Co Ltd:The | 映像処理方法及び映像処理装置 |
US7233354B2 (en) * | 2002-10-11 | 2007-06-19 | Hewlett-Packard Development Company, L.P. | Digital camera that adjusts resolution for low light conditions |
KR100503037B1 (ko) | 2002-11-01 | 2005-07-21 | 삼성테크윈 주식회사 | 디지털 카메라와 그의 영상정보 저장방법 |
US7574016B2 (en) * | 2003-06-26 | 2009-08-11 | Fotonation Vision Limited | Digital image processing using face detection information |
US7315631B1 (en) | 2006-08-11 | 2008-01-01 | Fotonation Vision Limited | Real-time face tracking in a digital image acquisition device |
US8482618B2 (en) | 2005-02-22 | 2013-07-09 | Hewlett-Packard Development Company, L.P. | Reduction of motion-induced blur in images |
JP2008109485A (ja) * | 2006-10-26 | 2008-05-08 | Fujifilm Corp | 撮像装置及び撮像制御方法 |
JP4979083B2 (ja) * | 2006-12-27 | 2012-07-18 | 富士フイルム株式会社 | 監視システム、監視方法、及びプログラム |
JP4895042B2 (ja) * | 2007-07-20 | 2012-03-14 | 富士フイルム株式会社 | 画像圧縮装置、画像圧縮方法、及びプログラム |
GB2454744A (en) * | 2007-11-19 | 2009-05-20 | Selex Sensors & Airborne Sys | Imaging device and method |
US8441535B2 (en) * | 2008-03-05 | 2013-05-14 | Omnivision Technologies, Inc. | System and method for independent image sensor parameter control in regions of interest |
JP5009880B2 (ja) | 2008-09-19 | 2012-08-22 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
US9042678B2 (en) | 2009-01-19 | 2015-05-26 | Nokia Corporation | Method and apparatus for reducing size of image data |
JP2010263422A (ja) * | 2009-05-07 | 2010-11-18 | Canon Inc | 情報処理装置、その動作方法及びプログラム |
US8577183B2 (en) | 2009-08-05 | 2013-11-05 | Raytheon Company | Resolution on demand |
US20110267495A1 (en) | 2010-04-29 | 2011-11-03 | Lee Warren Atkinson | Automatic Pixel Binning |
US8184069B1 (en) * | 2011-06-20 | 2012-05-22 | Google Inc. | Systems and methods for adaptive transmission of data |
JP2014072836A (ja) * | 2012-10-01 | 2014-04-21 | Olympus Imaging Corp | 撮影機器とこの撮影機器を用いて行う通信方法 |
JP6409301B2 (ja) * | 2014-03-31 | 2018-10-24 | 株式会社ニコン | 電子機器 |
-
2014
- 2014-05-21 US US14/284,217 patent/US9544497B2/en active Active
-
2015
- 2015-05-06 BR BR112016027262-5A patent/BR112016027262B1/pt active IP Right Grant
- 2015-05-06 WO PCT/US2015/029476 patent/WO2015179129A1/en active Application Filing
- 2015-05-06 EP EP15723403.0A patent/EP3146710B1/en active Active
- 2015-05-06 KR KR1020167031997A patent/KR101781773B1/ko active IP Right Grant
- 2015-05-06 CN CN201580023630.3A patent/CN106464801B/zh active Active
- 2015-05-06 JP JP2016568005A patent/JP6200104B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US20150341535A1 (en) | 2015-11-26 |
BR112016027262A2 (pt) | 2017-08-15 |
CN106464801A (zh) | 2017-02-22 |
US9544497B2 (en) | 2017-01-10 |
EP3146710A1 (en) | 2017-03-29 |
EP3146710B1 (en) | 2022-11-23 |
CN106464801B (zh) | 2018-03-13 |
JP2017516415A (ja) | 2017-06-15 |
KR20170012232A (ko) | 2017-02-02 |
KR101781773B1 (ko) | 2017-09-25 |
JP6200104B2 (ja) | 2017-09-20 |
WO2015179129A1 (en) | 2015-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
BR112016027262B1 (pt) | Sistema e método para determinar a resolução de imagem | |
US9407831B2 (en) | Intelligent auto-exposure bracketing | |
AU2016200002B2 (en) | High dynamic range transition | |
CN110505411B (zh) | 图像拍摄方法、装置、存储介质及电子设备 | |
CN107948538B (zh) | 成像方法、装置、移动终端和存储介质 | |
BR112021007094A2 (pt) | método de processamento de imagem, aparelho, e dispositivo | |
BR112016023952B1 (pt) | Sistema e método para retardar o consumo de energia pelo pós-processamento de dados de sensor | |
US9485436B2 (en) | Image processing apparatus and image processing method | |
JP2011530880A (ja) | エッジ検出を使用して奥行きデータを生成するシステム及び方法 | |
WO2010124080A1 (en) | Image capture parameter adjustment using face brightness information | |
BR112014011587B1 (pt) | Método e aparelho de controle de zoom | |
CN105376490B (zh) | 一种模式切换方法、装置及使用模式切换方法的终端设备 | |
US9300867B2 (en) | Imaging apparatus, its control method, and storage medium | |
WO2017080348A2 (zh) | 一种基于场景的拍照装置、方法、计算机存储介质 | |
CN105007410A (zh) | 一种大视角摄像头控制方法及用户终端 | |
JP2014103643A (ja) | 撮像装置及び被写体認識方法 | |
CN105467741A (zh) | 一种全景拍照方法及终端 | |
US20170126981A1 (en) | Imaging apparatus and control method of imaging apparatus | |
JP2011253099A (ja) | 焦点検出装置 | |
KR101385963B1 (ko) | 칼라 보정 기능을 갖는 이미지 처리 장치 및 칼라 보정방법 | |
JP2007243555A (ja) | 撮像装置、画像処理方法及び画像処理プログラム | |
JP2014121050A (ja) | 画像処理装置、その制御方法、および制御プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
B350 | Update of information on the portal [chapter 15.35 patent gazette] | ||
B06A | Patent application procedure suspended [chapter 6.1 patent gazette] | ||
B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 06/05/2015, OBSERVADAS AS CONDICOES LEGAIS |