BR112016027262B1 - Sistema e método para determinar a resolução de imagem - Google Patents

Sistema e método para determinar a resolução de imagem Download PDF

Info

Publication number
BR112016027262B1
BR112016027262B1 BR112016027262-5A BR112016027262A BR112016027262B1 BR 112016027262 B1 BR112016027262 B1 BR 112016027262B1 BR 112016027262 A BR112016027262 A BR 112016027262A BR 112016027262 B1 BR112016027262 B1 BR 112016027262B1
Authority
BR
Brazil
Prior art keywords
scene
resolution
interest
image
imaging device
Prior art date
Application number
BR112016027262-5A
Other languages
English (en)
Other versions
BR112016027262A2 (pt
Inventor
Babak Forutanpour
William Thomas Frantz
Shriram Ganesh
Daniel Scott Baker
Devender Akira Yamakawa
Original Assignee
Qualcomm Incorporated
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Incorporated filed Critical Qualcomm Incorporated
Publication of BR112016027262A2 publication Critical patent/BR112016027262A2/pt
Publication of BR112016027262B1 publication Critical patent/BR112016027262B1/pt

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/46Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/65Control of camera operation in relation to power supply
    • H04N23/651Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

sistema e método para determinar a resolução de imagem. são revelados sistemas e métodos para determinar de forma dedutiva uma configuração de resolução para um dispositivo de imagens com base em uma ou mais características de uma cena. as características podem incluir o tamanho de faces primárias ou de primeiro plano dentro da cena, uma quantidade máxima de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena ou um nível de bateria de um dispositivo eletrônico

Description

ANTECEDENTES Campo da Invenção
[0001] Os sistemas e métodos revelados aqui referem-se geralmente à determinação automática e dedutiva de uma resolução de imagem ideal.
DESCRIÇÃO DA TÉCNICA RELACIONADA
[0002] Os usuários muitas vezes definem as suas câmaras para fotografar com a resolução mais elevada, porque não sabem quando podem realmente precisar dos pixels extras para um zoom ou panorâmica posterior. Uma desvantagem de fotografar com resolução máxima é que os arquivos são naturalmente maiores e até mesmo nos telefones celulares de hoje, essas imagens e vídeo podem encher o armazenamento rapidamente. As modalidades aqui discutidas ilustram sistemas e métodos para determinar a resolução para cada foto de forma dedutiva, com base em um ou mais de vários fatores.
SUMÁRIO
[0003] Os sistemas, métodos e dispositivos da revelação, cada, tem vários aspectos inovadores, nenhum único dos quais é somente responsável para os atributos desejáveis aqui descritos. As combinações das inovações, aspectos e características aqui descritos podem ser incorporadas em várias modalidades dos sistemas, métodos e dispositivos, e essas combinações não estão limitadas pelos exemplos das modalidades aqui descritas.
[0004] As modalidades e inovações aqui descritas referem-se aos sistemas e métodos que podem ser executados em um processador em um dispositivo eletrônico para obter uma imagem em uma resolução “ideal”, essa resolução dependendo de um ou mais de vários fatores. Esses fatores podem incluir, mas não estão limitados ao tamanho das faces primárias dentro de uma cena, a quantidade máxima de conteúdo de alta frequência na cena, as condições de iluminação da cena e a duração da bateria do dispositivo. Uma experiência intuitiva do usuário é apresentada para permitir que o usuário selecione um ou mais fatores a serem usados na determinação de uma resolução ideal da imagem de captura.
[0005] Em algumas modalidades, a câmera é selecionada e apontada para uma cena. A cena pode conter várias regiões de interesse (ROIs), por exemplo, faces identificadas por uma função de detecção de face ou objetos identificados por uma função de rastreamento de objetos. O tamanho de uma ou mais das regiões de interesse, como uma percentagem do campo de visão total, pode ser determinado. Com base no tamanho de uma ou mais regiões de interesse, uma configuração de resolução de câmera pode ser aumentada ou diminuída para fornecer uma imagem de qualidade mais alta determinada com a configuração de resolução mais baixa. Em algumas modalidades, pode ser utilizada uma quantidade máxima de conteúdo de alta frequência dentro da cena para determinar se uma definição de resolução de câmera deve ser aumentada ou diminuída. Em algumas modalidades, pode ser determinada uma condição de iluminação da cena. Se a condição de iluminação for determinada como sendo uma condição de baixa luminosidade, uma definição de resolução da câmera pode ser aumentada e a compartimentação CCD utilizada para diminuir a razão de sinal/ruído e aumentar a qualidade da imagem. Em algumas modalidades, uma definição de resolução de câmera pode ser diminuída ou aumentada com base no nível de carga da bateria da câmera.
[0006] Um aspecto refere-se a um sistema para determinar de forma dedutiva uma resolução de captura de imagem, incluindo um módulo de controle configurado para determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e capturar uma imagem da cena na configuração de resolução dependente de cena. O módulo de controle pode ser configurado ainda para configurar uma resolução de captura de imagem padrão, e o módulo de controle pode ainda ser configurado para determinar uma configuração de resolução dependente de cena com base em um ou mais tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. O sistema pode incluir ainda um dispositivo de imagem que compreende um sensor de imagem e sendo que o módulo de controle é ainda configurado para operar o dispositivo de imagem em um modo de visualização. Em algumas modalidades, o módulo de controle pode ser configurado ainda para determinar regiões de interesse dentro da cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos. Em alguma modalidade, o controle pode ser ainda configurado para classificar as regiões de interesse como regiões de primeiro plano ou de fundo de interesse com base em uma área de pixels de cada região de interesse. Em outras modalidades, o módulo de controle é ainda configurado para aumentar uma definição de resolução se a área de pixels de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em outras modalidades, o módulo de controle é ainda configurado para aumentar uma definição de resolução se a área de pixels de uma região de primeiro plano de interesse for inferior a 8% de um campo de vista total do sensor de imagem. Em algumas modalidades, o módulo de controle é ainda configurado para identificar uma quantidade mínima de conteúdo de alta frequência na cena pela varredura da cena para as bordas utilizando uma transformada rápida de Fourier ou janela deslizante. Em algumas modalidades, o módulo de controle é ainda configurado para acessar uma tabela de consulta para determinar um aumento para uma resolução com base na quantidade de conteúdo de alta frequência com a cena. Em outras modalidades, o módulo de controle é ainda configurado para determinar uma condição de iluminação de uma cena e aumentar um ajuste de resolução com base na condição de iluminação. Em algumas modalidades, o módulo de controle é um componente de uma aplicativo de câmera para um dispositivo móvel.
[0007] Em outro aspecto, um método para determinar de forma dedutiva uma resolução de captura de imagem inclui as etapas de determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e capturar uma imagem da cena na configuração de resolução dependente de cena. Em algumas modalidades, o método inclui ainda as etapas de configurar uma resolução de captura de imagem padrão e determinar uma configuração de resolução dependente de cena com base em uma ou mais características de tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em algumas modalidades, o método inclui ainda a etapa de operar um dispositivo de imagem em um modo de pré- visualização. Em outras modalidades, o método inclui ainda a etapa de determinar regiões de interesse dentro de uma cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos. Em outras modalidades, o método inclui ainda a etapa de classificar as regiões de interesse como regiões de primeiro plano ou de fundo de interesse com base em uma área de pixels de cada região de interesse. Em algumas modalidades, o método inclui ainda a etapa de aumentar uma definição de resolução se a área de pixel de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em outras modalidades, o método inclui ainda a etapa de identificar uma quantidade mínima de conteúdo de alta frequência na cena pela varredura da cena para as bordas utilizando uma transformada rápida de Fourier ou janela deslizante. Em outras modalidades, o método inclui ainda a etapa de aumentar uma configuração de resolução com base na quantidade do conteúdo de alta frequência com a cena. Em algumas modalidades, o dispositivo de imagem é configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
[0008] Ainda em outro aspecto, um equipamento para determinar de forma dedutiva uma resolução de captura de imagem inclui meios para determinar uma definição de resolução dependente da cena com base em uma ou mais características de uma cena e meios para capturar uma imagem da cena na configuração de resolução dependente de cena. Em algumas modalidades, o equipamento inclui ainda meios para determinar uma configuração de resolução dependente de cena com base em um ou mais dos tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em outras modalidades, o equipamento inclui ainda meios para configurar uma resolução de captura de imagem padrão.
[0009] Em outro aspecto, uma mídia legível por computador não-transitória armazena instruções que, quando executadas, fazem com que pelo menos um processador de computador físico realize um método de determinação dedutiva de uma resolução de captura de imagem baseada em características de uma cena. O método pode incluir as etapas de determinar uma definição de resolução dependente da cena com base em uma ou mais características da cena e capturar uma imagem da cena na configuração de resolução dependente de cena. Em outras modalidades, o método pode incluir ainda as etapas de configurar uma resolução de captura de imagem padrão e determinar uma configuração de resolução dependente de cena com base em uma ou mais características de tamanhos de regiões de interesse da cena, uma quantidade de conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena e um nível de bateria de um dispositivo eletrônico. Em algumas modalidades, o método pode ainda incluir a etapa de operar um dispositivo de imagem em um modo de pré-visualização. Em outras modalidades, o método pode incluir ainda as etapas de determinar regiões de interesse dentro de uma cena utilizando um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos e classificar as regiões de interesse como regiões de interesse de primeiro plano ou de fundo com base em uma área de pixel de cada região de interesse. Em algumas modalidades, o método pode incluir ainda a etapa de aumentar uma definição de resolução se a área de pixel de uma região de primeiro plano de interesse for inferior a 5% de um campo de vista total do sensor de imagem. Em algumas modalidades, o método pode incluir ainda as etapas de identificar uma quantidade máxima de conteúdo de alta frequência na cena pela varredura da cena para bordas usando uma transformada rápida de Fourier ou janela deslizante e aumentando uma configuração de resolução com base na quantidade de conteúdo de alta frequência dentro da cena. Em algumas modalidades, o dispositivo de imagem é configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
BREVE DESCRIÇÃO DOS DESENHOS
[0010] Os aspectos revelados serão doravante descritos em conjunto com os desenhos anexos, fornecidos para ilustrar e não para limitar os aspectos revelados, sendo que referências similares denotam elementos similares.
[0011] A Figura 1 é um diagrama em bloco que ilustra um sistema que implementa alguns elementos operacionais para determinar uma resolução para um dispositivo de imagem.
[0012] A Figura 2 é um fluxograma que ilustra uma modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
[0013] A Figura 3 é um fluxograma que ilustra outra modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
[0014] A Figura 4 é um fluxograma que ilustra ainda outra modalidade de um processo para determinar uma resolução para um dispositivo de imagem.
DESCRIÇÃO DETALHADA
[0015] Para facilidade de referência, um dispositivo ou um componente de um dispositivo, que pode ser usado para capturar uma imagem ou tirar uma foto, ou capturar imagens (por exemplo, vídeo) pode às vezes ser mencionado aqui como uma câmera ou um sistema de formação de imagens. Tipicamente, câmeras incorporadas em um dispositivo inteligente (por exemplo, telefones celulares, laptops, câmeras, tablets ou outros dispositivos móveis) podem ser definidas, ou configuradas para, capturar uma imagem em um de vários níveis de resolução. Por exemplo, um usuário pode definir a câmera para capturar imagens na resolução mais elevada se planejar imprimir ou exibir a imagem, ou o usuário pode ajustar a câmera para capturar imagens em uma resolução mais baixa se planejar simplesmente enviar por e-mail ou compartilhar a imagem através de mídia social. Muitas vezes o usuário ajusta a resolução da câmera para capturar uma imagem na resolução mais elevada sem compreender totalmente as desvantagens para captura de imagens nesse nível de resolução ou que esse nível de resolução pode não ser necessário para toda imagem. Como usado aqui, os métodos e sistemas discutidos abaixo fornecem soluções para determinar uma resolução ótima de imagem com base em um ou mais fatores da cena, e pode sugerir uma definição de resolução para o usuário ou automaticamente ajustar a resolução.
[0016] Em algumas modalidades, o processo de determinação de resolução proposto orienta um processador a determinar um ajuste de resolução com base em um ou mais fatores, por exemplo, iluminação (por exemplo, iluminação ambiente de uma cena, detecção de rosto, teor de frequência elevada de um nível de carga de bateria de cena do sistema de formação de imagens, ou uso de imagem pretendida determinado automaticamente ou como indicado pelo usuário. Esse ajuste de resolução pode ser automaticamente determinado para cada imagem capturada ou pode ser um ajuste opcional sugerido ao usuário. O usuário pode selecionar uma resolução para a imagem antes da captura de imagem ou pode ajustar a câmera para automaticamente ajustar a resolução de captura de imagem. Quando a câmera é ativada para capturar a imagem, a imagem pode ser capturada no ajuste de resolução manualmente entrado pelo usuário ou determinado automaticamente pelo processador. Em algumas modalidades, após captura de uma imagem pelo sistema de formação de imagens, o sistema pode receber uma entrada a partir do usuário, que determina resolução de imagem (por exemplo, para armazenar a imagem).
[0017] É observado que os exemplos podem ser descritos como um processo, que é mostrado como um fluxograma, um diagrama de fluxo, um diagrama de estado finito, um diagrama de estrutura, ou um diagrama de blocos. Embora um fluxograma possa descrever as operações como um processo sequencial, muitas das operações podem ser executadas em paralelo, ou simultaneamente, e o processo pode ser repetido. Além disso, a ordem das operações pode ser reorganizada. Além disso, a ordem das operações pode ser rearranjada. Um processo é encerrado quando suas operações são concluídas. Um processo pode corresponder a um método, uma função, um procedimento, uma sub-rotina, um subprograma, etc. Quando um processo corresponde a uma função de software, a sua conclusão corresponde a um retorno da função para a função de chamada ou a função principal.
[0018] As modalidades podem ser implementadas em Sistema-em-Chip (SoC), ou hardware externo, software, firmware ou qualquer combinação dos mesmos. Aqueles versados na técnica entenderão que informações e sinais podem ser representados usando qualquer de uma variedade de tecnologias e técnicas diferentes. Por exemplo, dados, instruções, comandos, informações, sinais, bits, símbolos, e chips que podem ser referidos em toda a descrição acima podem ser representados por tensões, correntes, ondas eletromagnéticas, campos magnéticos ou partículas, campos ópticos ou partículas, ou qualquer combinação dos mesmos.
[0019] Na descrição a seguir, detalhes específicos são dados para fornecer uma compreensão completa dos exemplos. No entanto, será evidente para aqueles versados na técnica que estes exemplos podem ser praticados sem estes detalhes específicos. Por exemplo, componentes/dispositivos elétricos podem ser mostrados em diagramas de blocos para não obscurecer os exemplos em detalhe desnecessário. Em outras instâncias, tais componentes, outras estruturas e técnicas podem ser mostradas em detalhe para explicar adicionalmente os exemplos.
Visão Geral do Sistema
[0020] A Figura 1 ilustra um exemplo de um sistema de formação de imagens 100 configurado para determinar uma resolução (ótima) para uma imagem, com base em um ou mais de um número de fatores. A modalidade ilustrada não pretende ser limitadora, porém é ao invés ilustrativa de certos componentes em algumas modalidades. O sistema 100 pode incluir uma variedade de outros componentes para outras funções que não são mostardas para clareza dos componentes ilustrados.
[0021] O sistema de formação de imagens 100 pode incluir um dispositivo de imagem 110 e um display eletrônico 130. Certas modalidades de display eletrônico 130 podem ser qualquer tecnologia de display de painel plano, por exemplo, um LED, LCD, plasma ou tela de projeção. O display eletrônico 130 pode ser acoplado ao processador 120 para receber informações para exibição visual para um usuário. Tais informações podem incluir, porém não são limitadas a, representações visuais de arquivos armazenados em um local de memória, aplicativos de software instalados no processador 120, interfaces de usuário, e objetos de conteúdo acessíveis por rede.
[0022] O dispositivo de imagem 110 pode empregar um ou uma combinação de sensores de formação de imagens. O sistema de formação de imagens 100 pode incluir ainda um processador 120 ligado ao dispositivo de imagem 110. Uma memória de trabalho 135, display eletrônico 130 e memória de programa 140 estão também em comunicação com o processador 120. O sistema de formação de imagens 100 pode ser um dispositivo móvel, um tablet, computador laptop ou telefone celular.
[0023] O processador 120 pode ser uma unidade de processamento de propósito geral ou pode ser um processador especialmente projetado para aplicações de formação de imagens para um dispositivo eletrônico portátil. Como mostrado, o processador 120 é conectado a, e em comunicação de dados com, memória de programa 140 e uma memória de trabalho 135. Em algumas modalidades, a memória de trabalho 135 pode ser incorporada no processador 120, por exemplo, memória cache. A memória de trabalho 135 pode ser também um componente separado a partir do processador 120 e acoplado ao processador 120, por exemplo, um ou mais componentes RAM ou DRAM. Em outras palavras, embora a Figura 1 ilustre dois componentes de memória, incluindo componente de memória 140 compreendendo vários módulos e uma memória separada 135 compreendendo uma memória de trabalho, uma pessoa com conhecimentos na técnica reconheceria várias modalidades utilizando arquiteturas de memória diferentes. Por exemplo, um design pode utilizar ROM ou memória RAM estática para a armazenagem de instruções de processador implementando os módulos contidos na memória 140. As instruções de processador podem ser então carregadas em RAM para facilitar execução pelo processador. Por exemplo, a memória de trabalho 135 pode ser uma memória RAM, com instruções carregadas na memória de trabalho 135 antes da execução pelo processador 120.
[0024] Na modalidade ilustrada, a memória de programa 140 armazena um módulo de captura de imagem 145, um módulo de determinação de tamanho de recurso 150, um módulo de determinação de conteúdo de frequência elevada 155, um módulo de determinação de condição de iluminação 157, um módulo de determinação de resolução 160, sistema operacional 165, e um módulo de interface de usuário 170. Esses módulos podem incluir instruções que configuram o processador 120 para executar várias tarefas de gerenciamento de dispositivo e processamento de imagem. A memória de programa 140 pode ser qualquer mídia de armazenamento legível em computador adequada, por exemplo, uma mídia de armazenamento não transitória. A memória de trabalho 135 pode ser usada pelo processador 120 para armazenar um conjunto de trabalho de instruções de processador contidas nos módulos de memória 140. Alternativamente, a memória de trabalho 135 também pode ser usada pelo processador 120 para armazenar dados dinâmicos criados durante a operação do sistema de formação de imagens 100.
[0025] Como mencionado acima, o processador 120 pode ser configurado por vários módulos armazenados na memória 140. Em outras palavras, o processador 120 pode rodar instruções armazenadas em módulos na memória 140. O módulo de captura de imagem 145 pode incluir instruções que configuram o processador 120 para obter imagens a partir do dispositivo de imagem. Portanto, o processador 120, juntamente com módulo de captura de imagem 145, dispositivo de imagem 110, e memória de trabalho 135, representam um meio para obter dados de sensor de imagem.
[0026] Ainda com referência à Figura 1, a memória 140 pode conter também módulo de determinação de tamanho de recurso 150. O módulo de determinação de tamanho de recurso 150 pode incluir instruções que configuram o processador 120 para determinar o tamanho de recursos, por exemplo, rostos, em uma cena e classificar os recursos como recursos de primeiro plano e de segundo plano, como será descrito em detalhe adicional abaixo. Portanto, o processador 120, juntamente com o módulo de determinação de tamanho de recurso 150, memória de trabalho 135, e display eletrônico 130 representam um meio para identificar e classificar recursos em uma cena de interesse com base no tamanho dos recursos.
[0027] A memória 140 pode conter também módulo de determinação de conteúdo de frequência elevada 155. O módulo de determinação de conteúdo de frequência elevada 155 pode incluir instruções que configuram o processador 120 para executar uma função de foco automático e calcular o conteúdo de frequência elevada da imagem. Por exemplo, se a cena de interesse contiver uma área tendo um grau elevado de detalhe, por exemplo, um campo de grama, a função de foco automático do o módulo de determinação de conteúdo de frequência elevada 155 pode retornar parâmetros de foco automático correspondendo ao conteúdo de frequência elevada. Portanto, o processador 120, juntamente com o módulo de determinação de conteúdo de frequência elevada 155 e memória de trabalho 135 representam um meio para identificar uma quantidade máxima de conteúdo de frequência elevada em uma cena de interesse.
[0028] A memória 140 pode conter também módulo de determinação de condição de iluminação 157. O módulo de determinação de condição de iluminação 157 pode incluir instruções que configuram o processador 120 para executar uma função de equilíbrio de branco automática para determinar a quantidade e tipo de luz em uma cena de interesse. Por exemplo, se a função de equilíbrio de branco automático detectar uma condição de iluminação baixa, o módulo de determinação de condição de iluminação 157 pode instruir o processador 120 a filmar em uma resolução máxima, e guardar elementos de dispositivo acoplado de carga (CCD) para melhorar a relação de sinal para ruído (SNR) da imagem. Portanto, o processador 120, juntamente com o módulo de determinação de condição de iluminação 157, e memória de trabalho 135 representam um meio para identificar uma condição de iluminação de uma cena de interesse.
[0029] A memória 140 pode conter também um módulo de determinação de resolução 160. O módulo de determinação de resolução 160 ilustrado na figura 1 pode incluir instruções que configuram o processador 120 a ajustar a resolução de filmagem de uma imagem com base em dados adquiridos por outras funções do processador 120. Por exemplo, se uma função de detecção de recurso for executada em uma cena de interesse e um número de recursos de primeiro plano for identificado, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base no tamanho e número dos recursos de primeiro plano, como será descrito em maior detalhe abaixo. Portanto, o processador 120, juntamente com o módulo de determinação de tamanho de recurso 150, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em um tamanho e número de recursos detectados em uma cena de interesse.
[0030] Em outro exemplo, um usuário pode estar filmando uma imagem contendo folhas de grama ou outros recursos que incluem uma quantidade grande de detalhe (por exemplo, bordas), como detectado pelo módulo de determinação de conteúdo de frequência elevada 155. Nesse exemplo, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base na quantidade de conteúdo de frequência elevada na cena de interesse; ou diminuir a resolução para uma imagem contendo quantidade relativamente baixa de detalhe. Portanto, o processador 120, juntamente com o módulo de determinação de conteúdo de frequência elevada 155, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em uma quantidade máxima de conteúdo de frequência elevada em uma cena de interesse.
[0031] Ainda em outro exemplo, um usuário pode estar fotografando uma imagem em uma condição de pouca luz, por exemplo, em local fechado ou à noite, como detectado pelo módulo de determinação de condição de iluminação 157. Nesse exemplo, o processador 120 pode ser instruído pelo módulo de determinação de resolução 160 a aumentar a resolução da captura de imagem do dispositivo de imagem 110 com base na condição de iluminação detectada da cena de interesse. Portanto, o processador 120, juntamente com o módulo de determinação de condição de iluminação 157, módulo de determinação de resolução 160, e memória de trabalho 135 representam um meio para dinamicamente ajustar uma resolução de captura de imagem de um dispositivo de imagem com base em uma condição de iluminação detectada de uma cena de interesse.
[0032] A memória 140 pode conter também um módulo de interface de usuário 170. O módulo de interface de usuário 170 ilustrado na Figura 1 pode incluir instruções que configuram o processador 120 para prover uma coleção de objetos no visor e controles suaves que permitem que o usuário selecione uma resolução de captura de imagem sugerida ou reconheça uma configuração de resolução de captura de imagem automática do dispositivo de imagem. O módulo de interface de usuário 170 pode também permitir que aplicativos interajam com o resto do sistema. Um módulo de sistema operacional 170 pode também residir na memória 140 e operar com o processador 120 para gerenciar a memória e os recursos de processamento do sistema 100. Por exemplo, o sistema operacional 165 pode incluir unidades do dispositivo para gerenciar recursos de hardware, por exemplo, o display eletrônico 130 ou dispositivo de imagem 110. Em algumas modalidades, as instruções contidas no módulo de determinação de tamanho de tamanho de característica 150, módulo de determinação de conteúdo de alta frequência 155, módulo de determinação de condição de iluminação 157 e módulo de determinação de resolução 160 podem não interagir com esses recursos de hardware diretamente, mas, em vez disso, interagir por meio de sub- rotinas padrão ou APIs localizadas no sistema operacional 165. As instruções dentro do sistema operacional 165 podem então interagir diretamente com esses componentes de hardware.
[0033] O processador 120 pode gravar dados no módulo de armazenamento 125. Embora o módulo de armazenamento 125 seja graficamente representado como uma unidade de disco tradicional, o versado na técnica entenderia que múltiplas modalidades poderiam incluir um dispositivo de armazenamento com base em disco ou um de vários outros tipos de mídias de armazenamento, incluindo um disco de memória, unidade USB, unidade flash, mídia de armazenamento conectada remotamente, unidade de disco virtual ou similares.
[0034] Embora a Figura 1 represente um dispositivo que compreende componentes separados para incluir um processador, dispositivo de imagem, display eletrônico, e memória, um versado na técnica reconheceria que um ou mais desses componentes separados pode ser combinado em uma variedade de modos para obter objetivos de projeto particulares. Por exemplo, em uma modalidade alternativa, os componentes de memória podem ser combinados com componentes do processador para economizar em custos e melhorar desempenho.
[0035] Adicionalmente, embora a Figura 1 ilustre dois componentes de memória, incluindo componente de memória 140 compreendendo vários módulos e uma memória separada 135 compreendendo uma memória de trabalho, uma pessoa com conhecimentos na técnica reconheceria várias modalidades utilizando arquiteturas de memória diferentes. Por exemplo, um design pode utilizar ROM ou memória RAM estática para a armazenagem de instruções de processador implementando os módulos contidos na memória 140. Alternativamente, as instruções do processador podem ser lidas na inicialização do sistema a partir de um dispositivo de armazenamento em disco que é integrado ao sistema de imagem 100 ou conectado por meio de uma porta de dispositivo externo. As instruções de processador podem ser então carregadas em RAM para facilitar execução pelo processador. Por exemplo, a memória de trabalho 135 pode ser uma memória RAM, com instruções carregadas na memória de trabalho 135 antes da execução pelo processador 120.
Visão Geral do Método
[0036] Modalidades da invenção se referem a um processo para determinar uma resolução de imagem ideal, que pode incluir habilitar um modo de determinação de resolução de um dispositivo de imagem em que o sistema determina uma resolução a se usar para capturar uma imagem de uma cena com base em uma ou mais características da cena. Os exemplos podem ser descritos como um processo, que é mostrado como um fluxograma, um diagrama de fluxo, um diagrama de estado finito, um diagrama de estrutura, ou um diagrama de blocos. Embora um fluxograma possa descrever as operações como um processo sequencial, muitas das operações podem ser executadas em paralelo, ou simultaneamente, e o processo pode ser repetido. Além disso, a ordem das operações pode ser reorganizada. Além disso, a ordem das operações pode ser rearranjada. Um processo pode ser encerrado quando suas operações são concluídas. Um processo pode corresponder a um método, uma função, um procedimento, uma sub-rotina, um subprograma, etc. Quando um processo corresponde a uma função, a sua conclusão pode corresponder a um retorno da função para a função de chamada ou a função principal.
[0037] A Figura 2 ilustra um exemplo de uma modalidade de um processo 200 para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma determinação de resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em várias implementações, o processo 200 pode incluir uma ou mais características do processo adicionais, ou não incluir uma certa característica ilustrada. Em alguns exemplos, o processo 200 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software. Em algumas modalidades, pelo menos uma porção do processo 200 pode ser implementada em hardware.
[0038] O processo 200 começa no bloco de início 202 e muda para o bloco 204 sendo que a resolução de captura de imagem predefinida é definida para uma resolução predeterminada. Em algumas modalidades, uma resolução predeterminada pode ser selecionada com base, por exemplo, no tamanho do espaço de armazenamento em memória disponível no dispositivo, nas seleções anteriores do usuário de uma resolução padrão, ou nos níveis de resolução disponíveis, por exemplo, em uma resolução de ponto médio, ou um ou mais outros fatores. Por exemplo, em algumas modalidades, a resolução de captura de imagem predefinida pode ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em outras modalidades, a resolução de captura de imagem padrão pode ser configurada para qualquer fração da resolução máxima, como um oitavo, um sexto, um quarto, metade, etc.
[0039] Em seguida, o processo 200 muda para o bloco 206, sendo que o dispositivo de imagem 110 é operado em um modo de pré-visualização para visualizar a cena de interesse. Em algumas modalidades, um modo de pré- visualização pode incluir exibir em um display eletrônico, por exemplo, display eletrônico 130 (Figura 1) a cena como visualizada pela lente do dispositivo de imagem 110. O dispositivo eletrônico pode ser um dispositivo de comunicação portátil, por exemplo, um telefone celular ou “telefone inteligente”, ou um assistente de dados pessoais móvel (PDA) incluindo um computador tipo tablet. Por exemplo, o usuário pode operar a câmera de um dispositivo móvel em um modo de pré-visualização para determinar se captura ou não uma imagem. Em um outro exemplo, o usuário pode operar a câmera do dispositivo móvel em um modo de pré-visualização para determinar qual resolução usar para capturar uma imagem da cena.
[0040] O processo 200 então muda para o bloco 208, em que o processador, por exemplo o processador 120, é instruído para determinar regiões de interesse, por exemplo rostos ou objetos, dentro da cena atual. Em algumas modalidades, o processador pode usar algoritmos de detecção de rosto ou algoritmos de rastreamento de objetos para identificar possíveis regiões de interesse. Por exemplo, um algoritmo de detecção de rosto pode determinar que oito rostos aparecem dentro da cena. Em outro exemplo, um algoritmo de rastreamento de objeto pode identificar um número de itens colocados dentro de um fundo neutro, por exemplo, um balde, castelo de areia e um pássaro em uma praia. Preferivelmente, as regiões de interesse são determinadas durante o modo de pré-visualização como um processo contínuo. Preferivelmente, o processo 200 conforme rodado pelo sistema de imagem 100 não é dependente do algoritmo de detecção de rosto específico usado desde que o algoritmo selecionado possa detectar rostos adequadamente. Em algumas modalidades, um algoritmo de detecção de rostos, por exemplo, o algoritmo de detecção de rostos Viola Jones disponível em OpenCV pode ser usado. Similarmente, o processo 200 como rodado pelo sistema de imagem 100 também não é, desejavelmente, dependente do algoritmo de rastreamento de objetos desde que rastreamento de objetos preciso possa ser determinado. Uma vez que as possíveis regiões de interesse tenham sido determinadas, o processo 200 muda para o bloco 210.
[0041] No bloco 210, o processo 200 pode instruir o processador é instruído para classificar os rostos ou objetos detectados como rostos ou objetos em primeiro ou segundo plano. Em algumas modalidades, a classificação de cada rosto ou objeto como rosto ou objeto em primeiro ou segundo plano pode ter base em distribuições do tamanho do recorte de histograma. Por exemplo, distribuições do tamanho do recorte de histograma podem indicar o percentual do campo de visão (FOV) ocupado pelos rostos ou objetos em primeiro ou segundo plano. A área dos rostos e objetos em primeiro e/ou segundo plano pode ser expressa como áreas de pixel x pixel do sensor de imagem ou de uma imagem com o presente campo de visão. Os rostos ou objetos podem ser classificados como rostos ou objetos em primeiro plano com base em se o percentual do FOV ocupado pelos rostos ou objetos está acima de um limite predeterminado. Por exemplo, se três rostos ocupam 5% de todo o campo de visão (FOV) do dispositivo de imagem 110 e há oito rostos que juntos ocupam cerca de 2% do FOV, o processador determinará que há três rostos primários ou em primeiro plano. Em um exemplo, em uma imagem típica, um rosto deve ocupar pelo menos 5% ou 1/20 do FOV para ser considerado um rosto primário ou em primeiro plano. Em outras modalidades, um rosto pode ocupar pelo menos cerca de 2%, 3%, ou 4% do FOV para ser considerado um rosto primário ou em primeiro plano. Entretanto, em outras modalidades, os critérios ou limites usados para separar os rostos ou objetos primários ou em primeiro plano dos rostos ou objetos em segundo plano podem ser definidos pelo usuário.
[0042] O processo 200 em seguida muda para o bloco 212 e o processo 200 determina se deve-se aumentar a resolução de captura de imagem do dispositivo de imagem 110 com base no tamanho do rosto ou objeto primário em comparação a um limite predeterminado. Isso pode ser feito provendo instruções ao processador para essa ação. Em algumas modalidades, se um rosto primário ocupa um percentual calculado do FOV, então o processador pode ser instruído a acessar informações armazenadas na memória para determinar a resolução para o dado tamanho de rosto, como indicado pelo bloco 212. Por exemplo, se um rosto primário ocupa um percentual calculado do FOV, então o processador pode ser instruído a acessar uma tabela de consulta (LUT) para determinar a resolução para o dado tamanho de rosto, como indicado pelo bloco 212. Em outras modalidades, a resolução para o dado tamanho de rosto pode ser determinada por uma função matemática.
[0043] Em um exemplo, para cada número especificado de bordas afiadas detectadas, como 1000, a resolução pode ser aumentada em 2 megapixels (MP). Em outras modalidades, um limite de detecção de borda afiada pode ser configurado para outros valores, como 500, 1000, 1500, 2000, etc. com cada limite associado a um aumento de resolução, como 1 MP, 2 MP, 3 MP, 4 MP, etc. Em um exemplo, se um rosto ocupa aproximadamente 15% do FOV, então a imagem será capturada na configuração de resolução padrão, que pode ser 3 megapixels (MP). Em um outro exemplo, se os rostos primários ocupam menos que 8% do FOV, então o processador pode ser instruído a ajustar a resolução de modo que a imagem é fotografada em uma resolução maior, por exemplo 5 MP.
[0044] Em um outro exemplo, se os rostos ocupam menos que 5% do FOV, o processador pode ser instruído a ajustar a resolução de modo que a imagem é fotografada em uma resolução máxima, por exemplo 10 MP. Em outras palavras, se for verificado que os rostos e/ou objetos são uma área pequena do FOV, a resolução é desejavelmente aumentada. Se os rostos e/ou objetos ocupam uma área maior do FOV, a resolução pode permanecer a mesma que a resolução padrão ou pode ser diminuída. Em cada exemplo, a resolução máxima é dependente da resolução máxima do dispositivo de imagem 110 e, portanto, diferentes limites para resolução de captura de imagem podem ser configurados com base na resolução do dispositivo de imagem 110. Uma vez que a resolução tiver sido determinada e configurada, o processo 200 muda para o bloco 214 em que o processador é instruído a capturar uma imagem da cena na resolução dependente de cena otimizada, como indicado pelo bloco 214. Uma vez que a imagem foi capturada na resolução dependente de cena, o processo 200 pode mudar para o bloco 216 e terminar.
[0045] A Figura 3 ilustra outro exemplo de uma modalidade de um processo para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em alguns exemplos, o processo 300 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software.
[0046] O processo 300 começa no bloco de início 302 e muda para o bloco 304 sendo que a resolução de imagem predefinida é definida para uma resolução predeterminada. Por exemplo, em algumas modalidades, como discutido acima, a resolução de captura de imagem predefinida poderia ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em seguida, o processo 300 muda para o bloco 306, sendo que o dispositivo de imagem 110 pode ser operado em um modo de pré-visualização para visualizar a cena de interesse para determinar se é necessária uma alteração na resolução.
[0047] O processo 300 em seguida muda para o bloco 308, sendo que o processador pode ser instruído para identificar uma quantidade máxima de conteúdo de alta frequência na imagem. A nitidez é sem dúvida o fator de qualidade de imagem fotográfica mais importante porque determina a quantidade de detalhes que um sistema de imagem pode reproduzir. A nitidez pode ser definida pelos limites ou bordas entre as zonas de tons ou cores diferentes. Utilizando um detector de nitidez, por exemplo uma Transformada Rápida de Fourier ou uma janela deslizante, uma nitidez da imagem pode ser determinada. A quantidade máxima de conteúdo de alta frequência pode ser determinada pelas pontuações de alta frequência na posição de foco automático onde a imagem é a mais nítida. Em seguida, no bloco 310, o processador pode ser instruído para determinar a resolução da imagem com base no máximo de conteúdo de alta frequência na cena. Se a quantidade de conteúdo de alta frequência na imagem for superior a um limiar predeterminado, então a resolução da imagem será aumentada. Por exemplo, se o usuário estiver tirando uma imagem de um céu azul ou do oceano, a resolução padrão ou uma resolução mais baixa pode ser suficiente. No entanto, se o usuário estiver fotografando uma imagem que tenha um conteúdo de alta frequência por exemplo lâminas de grama ou outras características de detalhe, a resolução é desejavelmente aumentada para capturar o detalhe da imagem. Em algumas modalidades, uma tabela de consulta pode ser utilizada para determinar qual a resolução deve ser utilizada para capturar imagens com várias quantidades de conteúdo de alta frequência. Uma vez determinada a resolução ideal, o processo 300 muda para o bloco 312, sendo que o processador é instruído a definir a resolução na configuração de resolução ideal, dependente da cena. Em seguida, no bloco 314, uma imagem da cena é capturada pelo dispositivo de imagem 110 na definição de resolução dependente da cena. Depois de adquirir a imagem, o processo 300 muda para o bloco 316 e termina.
[0048] A Figura 4 ilustra outro exemplo de uma modalidade de um processo para configurar um dispositivo eletrônico que tem um dispositivo de imagem (por exemplo, dispositivo de imagem 110 ilustrado na Figura 1) para executar uma resolução de imagem dependente de cena que pode ser implementada em um ou mais dos módulos representados na Figura 1. Em alguns exemplos, o processo 400 pode ser executado em um processador, por exemplo, no processador 120 (Figura 1) e em outros componentes ilustrados na Figura 1 que são armazenados na memória 140 ou que estão incorporados em outro hardware ou software.
[0049] O processo 400 começa no bloco de início 402 e muda para o bloco 404 sendo que a resolução de imagem predefinida é definida para uma resolução predeterminada. Por exemplo, em algumas modalidades, como discutido acima, a resolução de captura de imagem predefinida poderia ser ajustada para um terço da resolução máxima do dispositivo de imagem 110. Em seguida, o processo 400 muda para o bloco 406, sendo que o dispositivo de imagem 110 pode ser operado em um modo de pré-visualização para visualizar a cena de interesse para determinar se é necessária uma alteração na resolução.
[0050] O processo 400 em seguida muda para o bloco 408, sendo que o processador pode ser instruído para identificar uma condição de iluminação para determinar se a resolução padrão será suficiente. Em algumas modalidades, pode ser utilizado um balanço de brancos automático para determinar o nível de luz da cena. A fonte de luz detectável mínima depende do sensor de imagem do dispositivo de imagem, especificamente do tamanho do sensor de imagem. Por exemplo, com base no número de lúmens detectados, o processador pode ser instruído para ativar a compartimentação. A compartimentação, como aplicada aos dispositivos acoplados de carga (CCDs), permite que as cargas dos pixels adjacentes sejam combinadas, oferecendo benefícios como velocidades de leitura mais rápidas e razões de sinal/ruído melhoradas à custa da redução da resolução espacial. Tirar uma foto em condições de pouca luz, por exemplo, em ambientes fechados ou em um restaurante com iluminação fraca, acionará o processador para determinar o nível de resolução necessário para a condição de iluminação indicada, conforme indicado na próxima etapa, bloco 410. Uma vez determinada a resolução ideal para a dada condição de iluminação, o processo 400 muda para o bloco 412, sendo que o processador é instruído a definir a resolução na configuração de resolução ideal, dependente da cena. Se for detectada uma condição de pouca iluminação, o processador instruirá o dispositivo de imagem 110 para fotografar imagens com a resolução máxima, mas compartimenta elementos de CCD para melhorar a razão de sinal-ruído. Em seguida, no bloco 414, uma imagem da cena é capturada pelo dispositivo de imagem 110 na definição de resolução dependente da cena. Em um exemplo, a câmera pode fotografar uma cena de baixa iluminação em 40MP para criar uma imagem de 3MP. Depois de adquirir a imagem, o processo 400 muda para o bloco 416 e termina. O processo 400 pode ser usado para criar um arquivo de imagem ideal, dada uma condição de baixa iluminação, independentemente das configurações personalizadas que podem ser selecionadas.
[0051] Ainda em outro exemplo, o nível atual da bateria do dispositivo eletrônico pode desencadear uma alteração na resolução da imagem de modo a economizar a energia da bateria. Por exemplo, se o dispositivo determina que a carga atual da bateria do dispositivo pode não permitir que o dispositivo seja operado com as definições atuais até o próximo período de carga esperado, o processador pode ser instruído a baixar a resolução da imagem de modo que o dispositivo de imagem 110 adquira imagens com menor resolução para economizar a duração da bateria. Em algumas modalidades, o processador pode ser instruído a executar um aplicativo para redimensionar imagens quando o dispositivo eletrônico está plugado e carregando.
[0052] Os exemplos discutidos acima com relação aos processos 200, 300 e 400 podem ser implementados individualmente em um dispositivo eletrônico ou um ou mais dos processos podem ser implementados em conjunto. Em algumas modalidades, um ou mais dos processos ou exemplos discutidos acima para a resolução de imagem dependente da cena podem ser implementados durante as funções de captura de pré-imagem do dispositivo de imagem, por exemplo durante as funções de foco automático ou balanço de brancos automático. Em algumas modalidades, os processos de resolução dependentes de cena, como os descritos acima, podem ser implementados após a captura de imagens. Nas modalidades em que processos de resolução dependentes de cena são implementados após a captura de imagens, as imagens adquiridas podem ser redimensionadas antes do armazenamento para economizar espaço no disco.
[0053] Em algumas modalidades, onde mais de um fator é considerado para determinar a resolução, os fatores podem ser ponderados para determinar quais os fatores irão controlar, ou principalmente controlar, a resolução. Em algumas modalidades, os fatores podem ser avaliados conjuntamente uns com os outros para determinar a resolução desejada.
Esclarecimentos sobre terminologia
[0054] A menos que indicado de outro modo, qualquer revelação de uma operação de um equipamento tendo uma característica específica também é expressamente destinada a divulgar um método tendo uma característica análoga (e vice-versa) e qualquer revelação de uma operação de um equipamento de acordo com uma configuração específica também é expressamente destinada a revelar um método de acordo com uma configuração análoga (e vice-versa). O termo “configuração” pode ser usado em referência a um método, equipamento e/ou sistema, conforme indicado pelo seu contexto particular. Os termos “método”, “processo”, “procedimento” e “técnica” são usados genericamente e de forma intercambiável, a menos que o contexto específico indique o contrário. Os termos “equipamento” e “dispositivo” também são usados genericamente e de forma intercambiável, a menos que o contexto específico indique o contrário. Os termos “elemento” e “módulo” são tipicamente usados para indicar uma porção de uma configuração maior. A menos que expressamente limitado por seu contexto, o termo “sistema” é usado aqui para indicar qualquer de seus significados comuns, incluindo “um grupo de elementos que interagem para servir a um propósito comum”. Qualquer incorporação por referência de uma parte de um documento também deve ser entendida como incorporando definições de termos ou variáveis que são referenciadas dentro da porção, onde tais definições aparecem em outro lugar do documento, bem como quaisquer figuras referenciadas na porção incorporada.
[0055] Aqueles versados na técnica irão apreciar ainda que os vários blocos, módulos, circuitos, e etapas de processo lógicos ilustrativos descritos em relação às implementações aqui descritas podem ser implementados como hardware eletrônico, software de computador, ou combinações de ambos. Para ilustrar claramente esta intercambiabilidade de hardware e software, vários componentes, blocos, módulos, circuitos e etapas ilustrativas foram descritos acima, geralmente em termos da sua funcionalidade. Se tal funcionalidade é implementada como hardware ou software depende da aplicação e limitações de design específicas impostas ao sistema global. Pessoas versadas na técnica podem implementar a funcionalidade descrita de modos variados para cada solicitação particular, mas essas decisões de implementação não devem ser interpretadas como causando uma partida do escopo da presente invenção. Uma pessoa versada na técnica irá reconhecer que uma porção, ou uma parte, pode compreender alguma coisa menos que, ou igual a um todo. Por exemplo, uma porção de uma coleção de pixels pode ser referir a uma sub-coleção desses pixels.
[0056] Os vários blocos lógicos, módulos e circuitos ilustrativos descritos em ligação com as implementações apresentadas na presente invenção podem ser implementados ou executados com um processador de uso geral, um Processador de Sinal Digital (DSP), um Circuito Integrado de Aplicação Específica (ASIC), um Arranjo de Porta Programável em Campo (FPGA) ou outro dispositivo lógico programável (PLD), porta discreta ou lógica de transistor, componentes de hardware discretos, ou qualquer combinação dos mesmos concebida para executar as funções aqui descritas. Um processador de uso geral pode ser um microprocessador, mas, em alternativa, o processador pode ser qualquer processador convencional, controlador, microcontrolador, ou máquina de estados convencionais. Um processador também pode ser implementado como uma combinação de dispositivos de computação, por exemplo, uma combinação de um DSP e um microprocessador, uma pluralidade de microprocessadores, um ou mais microprocessadores em conjunto com um núcleo de DSP, ou qualquer outro tipo de configuração.
[0057] As etapas de um método ou processo descrito em relação às implementações apresentadas na presente invenção aqui podem ser incorporadas diretamente em hardware, em um módulo de software executado por um processador ou em combinação dos dois. Um módulo de software pode residir na memória RAM, memória flash, memória ROM, memória EPROM, EEPROM, registros, disco rígido, um disco amovível, um CD-ROM, ou qualquer outra forma de mídia de armazenamento não transitória conhecida na técnica. Uma mídia de armazenamento legível por computador exemplificadora é acoplada ao processador de modo que o processador possa ler informação a partir de, e gravar informação na mídia de armazenamento legível por computador. Em alternativa, a mídia de armazenamento pode ser parte integral do processador. O processador e a mídia de armazenamento podem residir em um ASIC. O ASIC pode residir em um terminal de usuário, câmera ou outro dispositivo. Em alternativa, o processador e a mídia de armazenamento podem residir como componentes distintos em um terminal de usuário, câmera ou outro dispositivo.
[0058] Os cabeçalhos são aqui incluídos para referência e para auxiliar na localização de várias seções. Estes cabeçalhos não se destinam a limitar o escopo dos conceitos descritos a este respeito. Tais conceitos podem ter aplicabilidade ao longo de toda a especificação.
[0059] A descrição anterior das implementações reveladas é fornecida para permitir que qualquer pessoa versada na técnica faça ou use a presente invenção. Várias modificações para estas implementações serão prontamente evidentes para os versados na técnica, e os princípios genéricos aqui definidos podem ser aplicados a outras implementações sem que se afaste do espírito e escopo da revelação. Assim, a presente invenção não pretende ser limitada às implementações mostradas aqui, mas deve estar de acordo com o mais vasto escopo consistente com os princípios e novas características aqui descritas.

Claims (9)

1. Aparelho para determinação dedutiva de uma resolução de captura de imagem caracterizado por compreender: meios para operar um dispositivo de imageamento em um modo de visualização em uma resolução padrão para obter uma imagem de uma cena; meios (150) para classificar uma ou mais regiões de interesses na imagem da cena como regiões de primeiro plano de interesse com base em um tamanho da região de interesse, em que o tamanho de cada região de interesse é com base em uma área de pixels de cada região de interesse; meios (160) para determinar uma configuração de resolução dependente da cena com base nos tamanhos da uma ou mais regiões de primeiro plano de interesse, em que a configuração de resolução dependente da cena é maior ou menor que a resolução padrão, em que a configuração de resolução dependente da cena é: maior que a resolução padrão se a área de pixels de uma região de primeiro plano de interesse for menor que uma porcentagem especificada do campo de visão total do dispositivo de imageamento; e menor que a resolução padrão se a área de pixels da região de primeiro plano não for menor que a porcentagem especificada do campo de visão total do dispositivo de imageamento; meios (120) para ajustar a resolução de captura de imagem para o dispositivo de imageamento para uma configuração de resolução dependente da cena; e meios (120, 135, 145) para capturar uma imagem da cena na configuração de resolução dependente da cena.
2. Aparelho, de acordo com a reivindicação 1, caracterizado por compreender adicionalmente meios (157) para determinar uma condição de iluminação da cena e/ou um nível de bateria de um dispositivo eletrônico e em que a configuração de resolução dependente da cena é adicionalmente com base na condição de iluminação determinada e/ou no nível de bateria determinado.
3. Método (200) para determinação dedutiva de uma resolução de captura de imagem, caracterizado por compreender: operar (204, 206) um dispositivo de imageamento em um modo de visualização em uma resolução padrão para obter uma imagem de uma cena; classificar (208, 210) uma ou mais regiões de interesses na imagem da cena como regiões de primeiro plano de interesse com base em um tamanho da região de interesse, em que o tamanho de cada região de interesse é com base em uma área de pixels de cada região de interesse; determinar (212) uma configuração de resolução dependente da cena com base nos tamanhos da uma ou mais regiões de interesse, em que a configuração de resolução dependente da cena é maior ou menor que a resolução padrão, em que a configuração de resolução dependente da cena é: maior que a resolução padrão se a área de pixels de uma região de primeiro plano de interesse for menor que uma porcentagem especificada do campo de visão total do dispositivo de imageamento; e menor que a resolução padrão se a área de pixels da região de primeiro plano não for menor que a porcentagem especificada do campo de visão total do dispositivo de imageamento; ajustar (212) a resolução de captura de imagem para o dispositivo de imageamento para uma configuração de resolução dependente da cena; e capturar (214) uma imagem da cena na configuração de resolução dependente da cena.
4. Método, de acordo com a reivindicação 3, caracterizado pela configuração de resolução dependente da cena é adicionalmente com base em um ou mais de um conteúdo de alta frequência dentro da cena, uma condição de iluminação da cena, e um nível de bateria de um dispositivo eletrônico.
5. Método, de acordo com a reivindicação 3, caracterizado por compreender adicionalmente determinar regiões de interesse dentro de uma cena com o uso de um ou mais de um algoritmo de detecção de face ou um algoritmo de rastreio de objetos.
6. Método, de acordo com a reivindicação 4, caracterizado por compreender adicionalmente identificar uma quantidade máxima de conteúdo de alta frequência na cena varrendo-se a cena por bordas com o uso de uma transformada rápida de Fourier ou de uma janela deslizante.
7. Método, de acordo com a reivindicação 6, caracterizado por compreender adicionalmente aumentar uma configuração de resolução com base na quantidade de conteúdo de alta frequência com a cena.
8. Método, de acordo com a reivindicação 3, caracterizado pelo dispositivo de imageamento ser configurado para operar como parte de um aplicativo de câmera para um dispositivo móvel.
9. Memória caracterizada por compreender instruções armazenadas na mesma que, quando executadas, fazem com que pelo menos um processador de computador físico de um aparelho, conforme definido na reivindicação 1, realize um método de determinação dedutiva que determina uma resolução de captura de imagem com base em recursos de uma cena conforme definido em qualquer uma das reivindicações 3 a 8.
BR112016027262-5A 2014-05-21 2015-05-06 Sistema e método para determinar a resolução de imagem BR112016027262B1 (pt)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/284,217 US9544497B2 (en) 2014-05-21 2014-05-21 System and method for determining image resolution
US14/284,217 2014-05-21
PCT/US2015/029476 WO2015179129A1 (en) 2014-05-21 2015-05-06 System and method for determining image resolution

Publications (2)

Publication Number Publication Date
BR112016027262A2 BR112016027262A2 (pt) 2017-08-15
BR112016027262B1 true BR112016027262B1 (pt) 2023-11-07

Family

ID=53189219

Family Applications (1)

Application Number Title Priority Date Filing Date
BR112016027262-5A BR112016027262B1 (pt) 2014-05-21 2015-05-06 Sistema e método para determinar a resolução de imagem

Country Status (7)

Country Link
US (1) US9544497B2 (pt)
EP (1) EP3146710B1 (pt)
JP (1) JP6200104B2 (pt)
KR (1) KR101781773B1 (pt)
CN (1) CN106464801B (pt)
BR (1) BR112016027262B1 (pt)
WO (1) WO2015179129A1 (pt)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150350611A1 (en) * 2013-05-30 2015-12-03 Manything Systems Limited Methods and systems for monitoring environments using smart devices
US9978126B2 (en) 2014-04-30 2018-05-22 Empire Technology Development Llc Image resolution modification
CN106062781A (zh) * 2014-04-30 2016-10-26 英派尔科技开发有限公司 图像分辨率修改
KR102195311B1 (ko) * 2014-09-15 2020-12-24 삼성전자주식회사 이미지의 잡음 특성 개선 방법 및 그 전자 장치
JP6356552B2 (ja) * 2014-09-16 2018-07-11 東芝メモリ株式会社 情報処理装置
US10102590B1 (en) 2014-10-02 2018-10-16 United Services Automobile Association (Usaa) Systems and methods for unmanned vehicle management
US11688014B1 (en) 2014-10-02 2023-06-27 United Services Automobile Association (Usaa) Systems and methods for unmanned vehicle management
US10365646B1 (en) 2015-01-27 2019-07-30 United Services Automobile Association (Usaa) Systems and methods for unmanned vehicle management
US9939810B1 (en) 2015-04-17 2018-04-10 United Services Automobile Association Indoor drone flight awareness system
US10397469B1 (en) 2015-08-31 2019-08-27 Snap Inc. Dynamic image-based adjustment of image capture parameters
US10354386B1 (en) 2016-01-27 2019-07-16 United Services Automobile Association (Usaa) Remote sensing of structure damage
CN109314749B (zh) * 2016-06-28 2022-04-05 索尼公司 成像设备、成像方法和程序
JP6685188B2 (ja) * 2016-06-29 2020-04-22 キヤノン株式会社 撮像装置、画像処理装置及びそれらの制御方法、プログラム
CN107071273A (zh) * 2017-03-01 2017-08-18 北京橙鑫数据科技有限公司 一种拍照指令发送方法及装置
US10536700B1 (en) * 2017-05-12 2020-01-14 Gopro, Inc. Systems and methods for encoding videos based on visuals captured within the videos
WO2019160194A1 (ko) * 2018-02-14 2019-08-22 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN108983953B (zh) * 2018-07-19 2021-02-02 中国联合网络通信集团有限公司 一种延长设备电能使用时间的装置和方法
WO2020144936A1 (ja) * 2019-01-09 2020-07-16 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
JP7279533B2 (ja) * 2019-06-14 2023-05-23 ソニーグループ株式会社 センサ装置、信号処理方法
CN110855881B (zh) * 2019-11-01 2021-07-02 RealMe重庆移动通信有限公司 拍摄处理方法及装置、存储介质和电子设备
CN110855882B (zh) * 2019-11-01 2021-10-08 RealMe重庆移动通信有限公司 拍摄处理方法及装置、存储介质和电子设备
GB2588827B (en) * 2019-11-11 2022-10-12 Advanced Risc Mach Ltd Depth processing
CN116074623B (zh) * 2022-05-30 2023-11-28 荣耀终端有限公司 一种摄像头的分辨率选择方法和装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5949483A (en) * 1994-01-28 1999-09-07 California Institute Of Technology Active pixel sensor array with multiresolution readout
US5828406A (en) * 1994-12-30 1998-10-27 Eastman Kodak Company Electronic camera having a processor for mapping image pixel signals into color display pixels
US6707487B1 (en) * 1998-11-20 2004-03-16 In The Play, Inc. Method for representing real-time motion
US7068316B1 (en) * 2000-09-29 2006-06-27 Ess Technology, Inc. Selectable resolution image capture system
JP2003204541A (ja) * 2001-12-28 2003-07-18 Nippon Signal Co Ltd:The 映像処理方法及び映像処理装置
US7233354B2 (en) * 2002-10-11 2007-06-19 Hewlett-Packard Development Company, L.P. Digital camera that adjusts resolution for low light conditions
KR100503037B1 (ko) 2002-11-01 2005-07-21 삼성테크윈 주식회사 디지털 카메라와 그의 영상정보 저장방법
US7574016B2 (en) * 2003-06-26 2009-08-11 Fotonation Vision Limited Digital image processing using face detection information
US7315631B1 (en) 2006-08-11 2008-01-01 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
US8482618B2 (en) 2005-02-22 2013-07-09 Hewlett-Packard Development Company, L.P. Reduction of motion-induced blur in images
JP2008109485A (ja) * 2006-10-26 2008-05-08 Fujifilm Corp 撮像装置及び撮像制御方法
JP4979083B2 (ja) * 2006-12-27 2012-07-18 富士フイルム株式会社 監視システム、監視方法、及びプログラム
JP4895042B2 (ja) * 2007-07-20 2012-03-14 富士フイルム株式会社 画像圧縮装置、画像圧縮方法、及びプログラム
GB2454744A (en) * 2007-11-19 2009-05-20 Selex Sensors & Airborne Sys Imaging device and method
US8441535B2 (en) * 2008-03-05 2013-05-14 Omnivision Technologies, Inc. System and method for independent image sensor parameter control in regions of interest
JP5009880B2 (ja) 2008-09-19 2012-08-22 富士フイルム株式会社 撮像装置及び撮像方法
US9042678B2 (en) 2009-01-19 2015-05-26 Nokia Corporation Method and apparatus for reducing size of image data
JP2010263422A (ja) * 2009-05-07 2010-11-18 Canon Inc 情報処理装置、その動作方法及びプログラム
US8577183B2 (en) 2009-08-05 2013-11-05 Raytheon Company Resolution on demand
US20110267495A1 (en) 2010-04-29 2011-11-03 Lee Warren Atkinson Automatic Pixel Binning
US8184069B1 (en) * 2011-06-20 2012-05-22 Google Inc. Systems and methods for adaptive transmission of data
JP2014072836A (ja) * 2012-10-01 2014-04-21 Olympus Imaging Corp 撮影機器とこの撮影機器を用いて行う通信方法
JP6409301B2 (ja) * 2014-03-31 2018-10-24 株式会社ニコン 電子機器

Also Published As

Publication number Publication date
US20150341535A1 (en) 2015-11-26
BR112016027262A2 (pt) 2017-08-15
CN106464801A (zh) 2017-02-22
US9544497B2 (en) 2017-01-10
EP3146710A1 (en) 2017-03-29
EP3146710B1 (en) 2022-11-23
CN106464801B (zh) 2018-03-13
JP2017516415A (ja) 2017-06-15
KR20170012232A (ko) 2017-02-02
KR101781773B1 (ko) 2017-09-25
JP6200104B2 (ja) 2017-09-20
WO2015179129A1 (en) 2015-11-26

Similar Documents

Publication Publication Date Title
BR112016027262B1 (pt) Sistema e método para determinar a resolução de imagem
US9407831B2 (en) Intelligent auto-exposure bracketing
AU2016200002B2 (en) High dynamic range transition
CN110505411B (zh) 图像拍摄方法、装置、存储介质及电子设备
CN107948538B (zh) 成像方法、装置、移动终端和存储介质
BR112021007094A2 (pt) método de processamento de imagem, aparelho, e dispositivo
BR112016023952B1 (pt) Sistema e método para retardar o consumo de energia pelo pós-processamento de dados de sensor
US9485436B2 (en) Image processing apparatus and image processing method
JP2011530880A (ja) エッジ検出を使用して奥行きデータを生成するシステム及び方法
WO2010124080A1 (en) Image capture parameter adjustment using face brightness information
BR112014011587B1 (pt) Método e aparelho de controle de zoom
CN105376490B (zh) 一种模式切换方法、装置及使用模式切换方法的终端设备
US9300867B2 (en) Imaging apparatus, its control method, and storage medium
WO2017080348A2 (zh) 一种基于场景的拍照装置、方法、计算机存储介质
CN105007410A (zh) 一种大视角摄像头控制方法及用户终端
JP2014103643A (ja) 撮像装置及び被写体認識方法
CN105467741A (zh) 一种全景拍照方法及终端
US20170126981A1 (en) Imaging apparatus and control method of imaging apparatus
JP2011253099A (ja) 焦点検出装置
KR101385963B1 (ko) 칼라 보정 기능을 갖는 이미지 처리 장치 및 칼라 보정방법
JP2007243555A (ja) 撮像装置、画像処理方法及び画像処理プログラム
JP2014121050A (ja) 画像処理装置、その制御方法、および制御プログラム

Legal Events

Date Code Title Description
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B350 Update of information on the portal [chapter 15.35 patent gazette]
B06A Patent application procedure suspended [chapter 6.1 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 06/05/2015, OBSERVADAS AS CONDICOES LEGAIS