BR112012015711A2 - estimação de intensidade usando matriz de sensor binário com limites que variam espacialmente - Google Patents

Abstract

ESTIMAÇÃO DE INTENSIDADE USANDO MATRIZ DE SENSOR BINÁRIO COM LIMITES QUE VARIAM ESPACIALMENTE. Um aparelho inclui uma matriz que contém luz limite de sensores N de sub-difração, cada um tendo um limite de ativação de absorção de luz associado por comutar de um estado de reiniciação para um estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores. O aparelho inclui adicionalmente um processador conectado com uma memória que inclui um código de programa de computador, onde a memória e o código de programa de computador são configurados para, com o processador, fazer com que o aparelho, pelo menos, funcione estimando uma intensidade de luz que ilumina a matriz com base nas saídas elétricas da matriz.

Description

- 111 . Relatório Descritivo da Patente de Invenção para: “ESTIMAÇÃO DE INTENSIDADE

USANDO MATRIZ DE SENSOR BINÁRIO COM LIMITES QUE VARIAM ESPACIALMENTE”.

As modalidades exemplificativas e não limitantes desta invenção referem-se geralmente a sistemas, métodos, dispositivos e programas de computador e, mais especificamente, se referem a sistemas de imagem que usam uma matriz de sensor de luz compreendida de uma matriz de sensores de luz que gera um sinal de saída binário. FUNDAMENTOS: Esta seção tem o objetivo de fornecer fundamentos ou contexto para a invenção que é mencionada nas reivindicações. A descrição no presente documento pode incluir conceitos que podem ser seguidos, mas não são necessariamente os que foram anteriormente concebidos, implementados ou descritos. Portanto, a menos que indicado de forma contrária no presente documento, o que é descrito nesta seção não é técnica anterior comrelação à descrição e às reivindicações neste pedido de patente e não é admitido como sendo técnica anterior através da inclusão nesta seção.

Houve interesse recente em substituir o fotossensor CCD convencional (dispositivo acoplado de carga) por uma matriz bi-dimensional de fotossensores binários pequenos. A referência com relação a isto pode ser feita, por exemplo, em E.R. Fossum, O que fazer com Pixelsde Limite-de-Subdifração (SDL)? Proposta Para Um Sensor De Filme Digital de Gigapixel, Proc. do Workshop IEEE de 2005 em Dispositivos Acoplados de Carga e Sensores De Imagem Avançados, Karuizawa, Japão, Junho 2005; L. Sbaiz, F. Yang , E. Charbon, S. Susstrunk, M. Vetterli, A câmera de gigavisão, Proc. da IEEE Conferência Internacional em Acústica, Processamento de Fala e Sinal (ICASSP), 2009, p. 1093 - 1096; el Sbaiz, F. Yang, E. Charbon, S. Susstrunk, M. Vetterli, Reconstrução de Imagem em Câmera de Gigavisão, ICOV workshop OMNIVIS 2009.

Já que o tamanho do fotossensor binário é pequeno comparado com um fotossensor tradicional (por exemplo, um fotossensor CCD), pode ser razoavelmente assumido que um número de elementos de sensor (por exemplo, 16-256 elementos) de uma matriz de sensor binário é menor do que o do disco aéreo (por exemplo, pode ser localizado dentro do tamanho de um disco aéreo). Deste modo, também é razoável assumir que uma distribuição de fóton na matriz sensor pode ser modelada como um processo Poisson espacial bi-dimensional homogêneo. A tarefa, então, passa a ser determinar a intensidade de luz, dada a saída de matriz de sensor binário.

Um sensor binário é um simples sensor com apenas dois estados: inicialmente zero, e depois um número de fótons detectados excede algum limite pré-determinado, o estado muda para um. Os sistemas de sensores binários da técnica anterior consideraram

: 2/11 - apenas sensores binários de limite fixado.

SUMÁRIO Os problemas mencionados anteriormente, assim como outros são superados, e outras vantagens são realizadas, de acordo com as modalidades exemplificativas desta invenção.

Em um primeiro aspecto da mesma das modalidades exemplificativas desta invenção é fornecido um aparelho que compreende uma matriz que contém sensores de luz limite de sub-difração de TV, cada um tendo um limite de ativação de absorção de luz associado para comutar de um estado de reiniciação para um estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores. O aparelho compreende adicionalmente um processador conectado com uma memória incluindo o código de programa de computador, onde a memória e código de programa de computador são configurados para, com o processador, fazer com que o aparelho, pelo menos, desempenhe a estimativa da intensidade de luz que ilumina a matriz com base nas saídas elétricas da matriz.

Em um aspecto adicional da mesma, as modalidades exemplificativas desta invenção fornecem um método que compreende fornecer uma matriz que contém sensores de luz limite de sub-difração de TV, cada um tendo um limite de ativação de absorção de luz associado para comutar de um estado de reiniciação para um estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores; e estimam uma intensidade de luz que ilumina a matriz com base nas saídas elétricas da matriz. Exemplos adicionais de modalidades são fornecidos nas reivindicações de | a 30 como depositadas.

BREVE DESCRIÇÃO DOS DESENHOS Os aspectos mencionados anteriormente e outros das modalidades exemplificativas desta invenção ficam mais evidentes na Descrição Detalhada seguinte, quando lidos em conjunto com as Figuras de Desenhos em anexo, em que: A Figura 1A mostra uma vista de topo de uma matriz exemplificativa de sensores binários.

A Figura 1B mostra a ativação de sensores binários.

A Figura 2 representa graficamente: o valor de expectativa do número de sensores ativados com relação à intensidade.

A Figura 3 representa graficamente os derivativos dos valores de expectativa do número de sensores ativados com relação à intensidade.

A Figura 4 representa um tipo adequado e não limitante de conjunto de circuitos para implementar os receptores do sensor de luz da Figura 1A.

A Figura 5 mostra um diagrama em bloco de um dispositivo que pode ser

. 311 . construído para incluir o sensor de imagem de acordo com as modalidades exemplificativas desta invenção.

A Figura 6 é um diagrama de fluxo lógico que ilustra a operação de um método, e um resultado de execução de instruções de programa de computador incorporadas em uma memória legível por computador, de acordo com as modalidades exemplificativas desta invenção.

DESCRIÇÃO DETALHADA As modalidades exemplificativas desta invenção referem-se a tecnologias de sensor de luz de câmera digital, e mais especificamente ao sensor de tipo binário ("receptor") com potencialmente uma contagem muita alta de pixels ("elementos bit”), possivelmente mais de 1 bilhão ("giga"”, IO). Como mencionado acima, "binário" implica que cada tal elemento sensor ou receptor pode ter apenas dois valores possíveis: zero (não exposto) ou um (exposto). As modalidades exemplificativas desta invenção também são relacionadas aos chamados sensores ou receptores de limite de sub-difração. Isto quer dizer que a imagem projetada no receptor não é perfeitamente acurada, mas é mais ou menos "embaçada" quando comparada com o tamanho do elemento de sensor.

As modalidades exemplificativas desta invenção consideram um caso mais geral do que aqueles considerados anteriormente, onde cada sensor binário em uma matriz tem um limite fixado ou então arbitrário. O limite de cada sensor binário na matriz pode ser assumido como sendo inicialmente desconhecido.

Dois casos diferentes são considerados na descrição seguinte. Em um primeiro caso alguns dos dados de treinamento é assumido como sendo disponível, isto é, a matriz de sensor binário é testada e os valores de intensidade da luz e as saídas correspondentes da matriz de sensor binário são conectados. O limite de cada sensor binário na matriz pode, depois, ser determinado usando, por exemplo, Inferência Bayesiana. Em um segundo caso é assumido que nenhum dos dados de treinamento esteja disponível. Este segundo caso pode ser adicionalmente dividido em dois subcasos, no primeiro subcaso (de maior interesse para as modalidades exemplificativas desta invenção) a função de massa de probabilidade de limites é conhecida ou é, pelo menos, aproximada. No segundo subcaso, —nadase sabe com sobre os limites.

As modalidades exemplificativas desta invenção fazem referência e resolvem o problema da estimação da intensidade de fóton usando uma matriz finita de sensor binário. Em vez de usar uma matriz de sensores binários homogêneos, uma matriz de sensores binários com limites que variam espacialmente é fornecida.

ss Pode ser feita referência à Figura 1A para mostrar uma vista de topo de uma matriz exemplificativa 1 de sensores binários 2. Os sensores 2 são dispostos (nesta modalidade não limitante) em um padrão de grade regular definido por eixos x e y. No total há N

. 4/11 - sensores, onde N tem um valor em uma faixa de, por exempio, cerca de 10º a cerca de 10º ou maior. Associado com a matriz 1 fica um bloco de eletrônicos de leitura 3 configurado para lhe dar com os sensores 2 e ler os valores de sensores, e um processador de dados 4 conectado com um meio de armazenamento de dados incorporado como uma memória 5. A memória 5 armazena um programa de software de computador (Prog) 6 que, quando executado pelo processador de dados 4, permite que as saídas de sensor recebidas através dos eletrônicos de leitura 3 sejam processadas.

Os diversos componentes mostrados na Figura 1A podem incorporar um chip de captação de imagem (câmera), conjunto de chip ou módulo 8 que pode ser usado sozinho, ou que pode ser incorporado em outro dispositivo ou aparelho. Uma modalidade exemplificativa é mostrada na Figura 5, onde o módulo de câmera 8 da Figura 1A pode formar toda ou parte da câmera 28 que é incorporada em um equipamento de usuário (por exemplo, em um telefone celular).

A Figura 1B mostra um exemplo da ativação de alguns dos sensores binários 2. Os sensores F e H não são ativados, já que nenhum fóton colide neles. Os sensores B, C, De G são ativados (isto é, assumem um estado um de lógica), porque estes recebem (absorvem) um número de fótons igual ou maior do que seus limites de valores respectivos. Os sensores À e E permanecem inativos (isto é, permanecem no estado zero de lógica), porque estes recebem (absorvem) um número de fótons menor do que seus limites de valoresrespectivos.

Considere um caso em que o limite de cada sensor binário 2 é fixado mas não conhecido. Ademais, considere que os dados de treinamento são disponíveis, Primeiro os dados de treinamento são usados para resolver (ou estimar, dependendo na quantidade de dados) o limite de cada sensor binário 2. Depois, dada uma saída da matriz exposta de sensor binário 1, a intensidade é estimada usando o conhecimento dos limites dos sensores binários 2 e suas disposições (locais) Considere que há N sensores 2 na matriz bi-dimensional 1, enumerados de 1 a N. O estado S, de i n sensor binário é uma variável aleatória Bernoulli, e o limite T, do sensor i é uma variável aleatória positiva discreta. Considere adicionalmente que o estado de um sensor binário particular 2 é independente dos estados de outros sensores 2. A primeira tarefa é determinar o limite de cada sensor, dado um conjunto S de dados de treinamento, que compreende as saídas dos sensores binários (s- ) e as intensidades correspondentes A, onde i = LV. N e j=1,.,|/S| O limite de cada sensor 2 é determinado independentemente do limite de outros. A probabilidade que o sensor i seja ativado dado seulimiteT,=teintensidade de luz r é PIS =1/1,4)=1 MAE mo

- 51 . Daí se segue que a função de probabilidade para o limite T; pode ser escrita como PE IT =1)=TTPG, =11n,49É PG = 011,7), ; onde S é o subconjunto de S correspondente ao sensor z n. O modo do limite posterior T; do sensor i pode ser estimado através de usar, por exemplo, a estimativa de probabilidade máxima A suposição foi feita, onde os limites dos sensores 2 são independentes um dos outros. Se os limites dos sensores vizinhos não forem independentes, a teoria de campos aleatórios de Markov pode ser usada para acelerar o aprendizado (por exemplo, ver G. Winkler, Análise de imagens, Campos aleatórios e cadeia de Markov métodos Monte Carlo Springer, 2003).

Suponha agora que o limite T; do sensor binário i n é determinado para todo i = |... N. Dada a saída (Si); da matriz de sensor binário 1, uma próxima etapa é estimar a intensidade de fóton. Como antes, a função de probabilidade para intensidade X pode ser escrita como 12 PENIDATEPS 19T AS 019).

A estimativa para intensidade A pode ser obtida através de usar, por exemplo, no máximo uma estimação posterior com uma distribuição anterior.

1 p(A)x 7 .

Na análise anterior foram usados métodos Bayesianos para estimar a intensidade de fóton. Entretanto, o uso da rede neural de mecanismos antecipatórios também é adequado para a tarefa (por exemplo, ver S. Haykinn Redes Neutras: Fundação Compreensiva, Imprensa IEEE, segunda edição, 1999). Em geral, dados de treinamento disponíveis podem ser usados para treinar uma rede neural para estimar a intensidade da saída de sensor de matriz.

Considere a estimação sem o uso de dados de treinamento. Mais Especificamente, considere como determinar a intensidade, dada a saída da matriz de sensor binário 1 e a função de massa de probabilidade de limites. Este caso particular se difere de casos anteriores como os limites dos sensores binários 2 não são determinados de forma explícita. Em vez disso, o conhecimento da função de massa de probabilidade e o número de sensores ativados 2 é usado para produzir uma estimativa da intensidade.

Suponha que os limites de valores da matriz de sensor binário 1 são distribuídos de acordo com a função de massa de probabilidade pr(k) . O objetivo é determinar a intensidade, dada a saída da matriz de sensor binário 1. A probabilidade que um sensor

. 6/11 à. particular 2 seja ativado dada a intensidade À é PÍS=1/4)= Fort0PG =1|T=k,d), onde M é o limite máximo na matriz de sensor binário 1 e FiSeIlTeLA ICAO, = aprobabilidade que há /lit sensores 2 dado que a intensidade hé P(Ilitsensors | 4) = (es =1/4)' P(S=0/4)"", A estimativa máxima de probabilidade para té o valor que minimiza a equação anterior. Observe que as modalidades exemplificativas desta invenção não são limitadas ao estimador mencionado anteriormente, e que outros estimadores podem ser usados.

A Figura 2 representa graficamente: o valor de expectativa do número de sensores ativados 2 com relação à intensidade A . Para as linhas sólidas o limite de sensor permaneceu constante com os valores T=1, T=2, T=3 e T=4, e para a linha tracejada os limites de valores foram distribuídos de forma uniforme entre 1 e 4.

Na Figura 3 a performance de diferentes matrizes de sensor binário 1 é comparada.

Mais especificamente, a Figura 3 representa graficamente os derivativos do valor de expectativas do número de sensores ativados 2 com relação à intensidade À, Paraas linhas sólidas o limite de sensor permaneceu constante com os valores T=1, T=2, T=3 e T=4, e para a linha tracejada os limites de valores foram uniformemente distribuídos entre 1 es Como pode ser esperado, a matriz de sensor binário 1 onde todos os limites de valores são iguais a um, executa seu melhor modo quando a intensidade da luz é baixa. Por outro lado, quando todos os limites são iguais a quatro, a performance é boa quando a intensidade é alta, mas o matriz sensor 1 desempenha menos o que é aceitável em baixas intensidades. A matriz sensor 1 onde os limites são distribuídos de maneira uniforme combina os melhores recursos de ambos os tipos de matrizes de sensor, isto é, a matriz 1 é capaz de produzir informação mesmo quando a matriz com limite 1 é quase saturada, e a matriz 1 também é relativamente sensível a baixos níveis de intensidade, onde a matriz com todos os limites iguais a quatro é basicamente não-funcional.

O caso de uma matriz de sensor binário 1 com limites que variam espacialmente é importante. Por Exemplo, se uma matriz de sensor binário 1 com uma sensibilidade de fóton único for construída, através de usar técnicas fotolitográficas, os limites dos sensores binários 2 na matriz 1 irão variar de forma que sejam um resultado das imperfeições no processo de fabricação. Como foi mostrado acima, através de levar isto em consideração a

- 7/11 . performance da matriz de sensor binário 1 pode ser melhorada. Observe que os limites também podem variar através de propósito e com diferentes graus de controlabilidade (por exemplo, usando uma distribuição conhecida mas com locais desconhecidos). É observado adicionalmente que a informação do processo de produção pode ser alimentada no método, paramelhorara performance.

Um tipo adequado e não limitante de conjunto de circuito para implementar os receptores 2 é mostrado na Figura 4. Neste caso cada receptor 2 inclui um fotodiodo 2A conectado com um circuito comparados baseado em inversor simples 2B para quantificação de amplitude de um bit. Um limite atual ajustável pode ser usado para evitar a iniciação devido à iluminação de fundo. Um receptor (pixel) é iniciado quando a corrente de sinal (mais a corrente de fundo) excede a corrente limite |. e a voltagem U,, através de Cr, devido à corrente de descarregamento |,+|y-l, vai abaixo da voltagem limite C-Ued2) do comparador 2B. Supondo que |, é pequeno comparado com a amplitude do puíso de sinal, a sensibilidade de um pixel é determinada pela energia óptica En, necessária para descarregar uma capacidade de entrada de um pixel: Epis = (Cyi AUYSKr, onde Cr. é a capacidade total de entrada de um pixel, que compreende o fotodiodo e Capacidades de entrada de circuito, AU é a mudança de voltagem na entrada necessária para iniciar o comparador 2B, S é a resposta de fotodiodo e K; o fator de preenchimento de pixel Como exemplos não limitantes, outras abordagens possíveis incluem o uso de avalanche ou ionização de impacto para fornecer um ganho em pixel, ou o uso de pontos quantum.

Observe que como descrito até aqui, a variabilidade limite dos sensores individuais 2 na matriz 1 pode ser assumida como resultando da variabilidade inerente do processo de fabricação da matriz 1 (por exemplo, devido à diferenças na uniformidade do material, diferenças na uniformidade da máscara fotolitográfica, diferenças nos níveis de dopante, concentrações de dopante e similares). Entretanto, também fica dentro do escopo das modalidades exemplificativas, induzir intencionalmente a variabilidade limite entre os sensores 1. Isto pode ser alcançado, por exemplo, de uma maneira elétrica, como através de ajustarde forma seletiva a corrente limite mencionada acima, para fazer a diferenciação entre os sensores 1 e/ou entre grupos de sensores 1. Desta forma pode se tornar possível alterar ou ajustar de algum modo, o formato da linha tracejada mostrada nas Figuras 2 e 3.

A Figura 5 ilustra uma modalidade não limitante e exemplificativa de um dispositivo, como um equipamento de usuário (UE) 10, tanto na vista plana (esquerda) e vista —seccionada (direita). Na Figura 5 o UE 10 tem uma interface de exibição gráfica 20 e uma interface de usuário 22 ilustrada como um teclado numérico mas entendida como também

. 8/11 . compreendendo tecnologia de tela de toque na interface de exibição gráfica 20 e tecnologia de reconhecimento de voz recebida no microfone 24. Um atuador de energia 26 controla o dispositivo sendo ligado e desligado pelo usuário. O UE 10 exemplificativo inclui a câmera 28 que é mostrada como ficando virada para frente (por exemplo, para ligações de vídeo) mas pode alternativamente ou adicionalmente ser virada para trás (por exemplo, para capturar imagens e vídeo para armazenamento local). A câmera 28 é controlada por um atuador de redimensionamento 30 e opcionalmente por um atuador de zoom 30 que pode alternativamente funcionar como um ajuste de volume para auto-falante(s) 34 quando a câmera 28 não está em modo ativo.

A câmera 28 pode ser assumida como incluindo um sensor de matriz de imagem 1 que é construído e operado, de acordo com as modalidades exemplificativas desta invenção, como descrito com detalhes acima. Como mencionado acima, a câmera 28 pode incluir o módulo de câmera 8 mostrado na Figura 1 A.

Na vista seccional da Figura 5 são vistas múltiplas antenas de transmissão/recepção 36 que são tipicamente usadas para comunicação de celular. As antenas 36 podem ser de diversas marcas para o uso com outros rádios no UE. O chip de energia 38 controla a amplificação de energia em canais sendo transmitidos e/ou ficam em frente às antenas que transmitem simultaneamente onde a diversidade espacial é usada, e ambplifica os sinais recebidos. O chip de energia 38 libera o sinal recebido amplificado ao chipde frequência de rádio (RF) 40 que demodula e converte para baixo o sinal para o processamento de banda de base. O chip de banda de base (BB) 42 detecta o sinal que é depois convertido a um fluxo de bit e finalmente decodificado. Um processamento similar ocorre de modo reverso para sinais gerados no aparelho 10 e transmitidos a partir deste.

Os sinais que saem da câmera e vão em direção à câmera 28 podem passar através um processador de imagem/ívídeo 44 que codifica e decodifica os diversos quadros de imagens. Um processador de áudio separado 46 pode também estar presente controlando os sinais a partir do e para os auto-falantes 34 e o microfone 24. A interface de exibição gráfica 20 é atualizada a partir de uma memória de quadro 48 como controlada por um chip de interface de usuário 50 que pode processar sinais a partir da e para a interface de exibição 20 e/ou adicionalmente processar as entradas de usuário a partir do teclado numérico 22 e outro lugar.

Algumas modalidades do UE 10 podem também incluir um ou mais rádios secundários como um rádio de rede de área local sem fio WLAN 37 e um rádio Bluetooth 39, que pode incorporar uma antena no chip ou ser acoplado à uma antena fora do chip.

Através do aparelho ficam diversas memórias como memória de acesso aleatório RAM 43, memória somente de leitura ROM 45, e em algumas modalidades pode haver memória removível como o cartão de memória ilustrada 47 em que os diversos programas s 9/11 . 10C são armazenados. Todos estes componentes no UE 10 são normalmente ligados por um fornecimento de energia portátil como uma bateria 49. Os processadores 38, 40, 42, 44, 46, 50, se incorporados como entidades separadas em um UE 10, podem operar em uma relação escrava com o processador principal 10A, 12A, que pode então ficar em uma relação de mestre com eles. As modalidades desta invenção podem ser dispostas através de diversos chips e memórias como mostrado, ou dispostas em outro processador que combina algumas das funções descritas acima para Figura 5. Qualquer ou todos estes diversos processadores da Figura 5 acessam uma ou mais das diversas memórias, que podem ficar em um chip com o processador ou separado dele.

Os diversos circuitos integrados (por exemplo, chips 38, 40, 42, etc.) que foram descritos acima podem ser combinados em um número menor do que o descrito e, no caso mais compacto, todos podem ser incorporados fisicamente em um único chip.

Em outras modalidades o equipamento de usuário pode não ter capacidade de comunicação sem fio. Em geral o equipamento de usuário pode ser, por exemplo, um assistente digital pessoal que inclui a câmera 28, um computador pessoal (por exemplo, um computador laptop ou notebook) que inclui a câmera 28, um dispositivo de jogo que inclui a câmera 28, ou simplesmente um dispositivo de câmera digital, como diversos exemplos não limitantes.

O uso e aplicação das modalidades exemplificativas desta invenção fornece um número de efeitos e vantagens técnicas. Por Exemplo, uma matriz de sensor binário 1 que contém sensores binários 2 que tem (por natureza) limites variáveis, e que podem convencionalmente ser considerados como não usáveis já que as abordagens convencionais assumiriam algum limite de sensor conhecido (constante), podem ainda serem usados para formar imagens. Adicionalmente, através de selecionar a distribuição dos limites, mesmo no caso onde há uma variabilidade incontrolável, a performance de imagem (qualidade) da matriz 1 de sensores binários 2 pode ser melhorada.

Com base no que foi mencionado anteriormente, deve ser aparente que as modalidades exemplificativas desta invenção fornecem um método, aparelho e programa(s) . 30 de computador para estimar a intensidade da luz que ilumina uma matriz que contém os sensores de luz limite de sub-difração de TV.

A Figura 6 é um diagrama de fluxo de lógica que ilustra a operação de um método, e um resultado de execução de instruções de programa de computador, de acordo com as modalidades exemplificativas desta invenção. De acordo com estas modalidades exemplificativas um método desempenha, no Bloco 6A, uma etapa de fornecer uma matriz que contém sensores de luz limite de sub-difração de TV cada um tendo um limite de ativação de absorção de luz associado para comutar de um estado de reiniciação para um

« 10/11 . estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores. No Bloco 6B há uma etapa de estimação de uma intensidade de luz que ilumina a matriz com base nas saídas elétricas da matriz. No método como descrito no parágrafo anterior, a etapa de estimação, usa dados detreinamento para determinar o limite de ativação de absorção de luz de cada sensor e, com base nas saídas elétricas da matriz, para estimar a intensidade usando o limite determinado de ativação de absorção de luzes dos sensores e seus locais. A estimativa pode usar um método Bayesiano, ou pode usar uma rede neural de mecanismo antecipatório, onde os dados de treinamento são usados para treinar a rede neural para estimaraintensidade das saídas elétricas da matriz.

No método como descrito na Figura 6, a etapa de estimação usa a saída elétrica da matriz para determinar um número de sensores ativados e uma função de massa de probabilidade para determinar uma distribuição do limite de ativação de absorção de luzes dos sensores. A estimação da intensidade pode usar uma estimativa máxima de probabilidade.

No método como descrito nos parágrafos anteriores, onde N fica em uma faixa de cerca de 10º a cerca de 10º ou maior, e onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores de cerca de 1 a cerca de 4.

No método como descrito nos parágrafos anteriores, onde o método é executado em um módulo de câmera incorporado em um dispositivo de usuário.

Os diversos blocos mostrados na Figura 6 podem ser vistos como etapas de método, e/ou como operações que resultam da operação do código de programa de computador, e/ou como uma pluralidade de elementos de circuito lógico acoplados para executarem a(s) função(ões) associada(s).

Em geral, as diversas modalidades exemplificativas podem ser implementadas em hardware ou circuitos de propósito especial, software, lógica ou qualquer combinação dos mesmos. Por exemplo, alguns aspectos podem ser implementados em hardware, enquanto outros aspectos podem ser implementados em firmware ou software que podem ser executados por um controlador, microprocessador ou outro dispositivo de computação, emboraa invenção não seja limitada a estes. Enquanto diversos aspectos das modalidades exemplificativas desta invenção podem ser ilustradas e descritas como diagramas em blocos, fluxogramas, ou usando alguma outra representação de desenho, é bem entendido que estes blocos, aparelho, sistemas, técnicas ou métodos descritos no presente documento podem ser implementados, como exemplos, hardware, software, firmware, circuitos de propósito especial ou lógica, hardware ou controlador de propósito geral ou outros dispositivos de computação não limitantes, ou alguma combinação dos mesmos.

Deve ser, deste modo apreciado que, pelo menos, alguns aspectos das

. 11011 - modalidades exemplificativas das invenções podem ser praticados em diversos componentes como módulos e chips de circuitos integrados, e que as modalidades exemplificativas desta invenção podem ser realizadas em um aparelho que é incorporado como um circuito integrado. O circuito integrado ou circuitos, podem compreender um conjunto de circuitos (assim como possivelmente firmware) para incorporar, pelo menos, um ou mais de um processador de dados ou processadores de dados e um processador de sinal digital ou processadores que são configuráveis, para operarem, de acordo com as modalidades exemplificativas desta invenção.

Diversas modificações e adaptações às modalidades exemplificativas mencionadas anteriormente desta invenção podem se tornar parentes para aqueles versados na técnica relevante, tendo em vista a descrição feita anteriormente, quando lida em conjunto com os desenhos em anexo. Entretanto, qualquer e todas as modificações ainda ficarão no escopo das modalidades exemplificativas e não limitantes desta invenção.

Por exemplo, enquanto mostrado na Figura 1A como uma matriz bi-dimensional 1 de sensores ópticos binários 2, em outras modalidades a matriz 1 pode ser uma matriz tri- dimensional de sensores ópticos binários (isto é, pode haver sensores de imagem adicionais 2 dispostos ao longo de um eixo z da matriz 1, como descrito no pedido de patente co- dependente S.N. 12/384,549, depositado 04/06/2009, "Sensor De Imagem", Ossi M. Kalevo, Samu T. Koskinen, Terro Rissa).

Deve ser notado os termos "conectado," "acoplado," qualquer variação destes, significa qualquer conexão ou acoplamento, tanto direta quanto indireta, entre dois ou mais elementos, e pode compreender a presença de um ou mais elementos intermediários entre dois elementos que são "conectados" ou "acoplados" um ao outro. O acoplamento ou conexão entre os elementos podem ser físicos, lógicos, ou uma combinação dos mesmos.

Como empregado no presente documento, dois elementos podem ser considerados como sendo "conectados" ou "acoplados" pelo uso de um ou mais fios, cabos e/ou conexões elétricas impressas, assim como pelo uso de energia eletromagnética, como energia eletromagnética tendo comprimentos de ondas na região de frequência de rádio, a região de microondas e a região óptica (tanto visível quanto invisível), como diversos exemplos não limitantese não exaustivos.

Além disso, alguns dos recursos das diversas e não limitantes modalidades exemplificativas desta invenção, podem ser usados de forma vantajosa sem o uso correspondente de outros recursos, Deste modo, a descrição mencionada anteriormente deve ser considerada como meramente ilustrativa dos princípios, ensinamentos e — modalidades exemplificativas desta invenção, e não limitantes da mesma.

Claims (30)

: 1/4 REIVINDICAÇÕES

1. Aparelho caracterizado por compreender: uma matriz que contém N sensores de luz de limite de sub-difração, cada um tendo um limite de ativação de absorção de luz associado para comutar de um estado de reiniciação para um estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores; e um processador conectado com uma memória que inclui o código de programa de computador, onde a memória e o código de programa de computador são configurados para, com o processador, fazer com que o aparelho, pelo menos, estime uma intensidade de luzqueilumina a matriz com base em saídas elétricas da matriz.

2. Aparelho de acordo com a reivindicação 1, caracterizado por onde a estimativa usa dados de treinamento para determinar o limite de ativação de absorção de luz de cada sensor e, com base nas saídas elétricas da matriz, para determinar a intensidade usando o limite determinado de ativação de absorção de luzes dos sensores e —suaslocalizações.

3. — Aparelho de acordo com a reivindicação 2, caracterizado por onde a estimativa usa um método Bayesiano.

4. Aparelho de acordo com a reivindicação 2, caracterizado por onde a estimativa usa uma rede neural de mecanismo antecipatório, onde os dados de treinamento são usados para treinar a rede neural para estimar a intensidade das saídas elétricas da matriz.

5. Aparelho de acordo com a reivindicação 1, caracterizado por onde a estimativa usa a saída elétrica da matriz para determinar um número de sensores ativados e a função de massa de probabilidade para determinar uma distribuição do limite de ativação deabsorção de luz dos sensores.

6. Aparelho de acordo com a reivindicação 5, caracterizado por onde a estimativa da intensidade usa uma estimativa máxima de probabilidade.

7. — Aparelho de acordo com a reivindicação 1, caracterizado por onde N fica em uma faixa de cerca de 10º a cerca de 10º ou maior.

8. Aparelho de acordo com a reivindicação 1, caracterizado por onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores de cerca de 1 a cerca de 4.

8. — Aparelho de acordo com a reivindicação 1, caracterizado por ser incorporado como uma câmera em um dispositivo de usuário.

10. Método, caracterizado por compreender: fornecer uma matriz que contém N sensores de luz de limite de sub-difração cada um tendo um limite de ativação de absorção de luz associado para comutar de um estado

- 2/4 . de reiniciação para um estado ativado, onde os valores de ativação de absorção de luz ficam dentro de uma faixa de valores; e estimar uma intensidade de luz que ilumina a matriz com base nas saídas elétricas da matriz.

11. Método de acordo com a reivindicação 10, caracterizado por onde a estimativa usa dados de treinamento para determinar o limite de ativação de absorção de luz de cada sensor e, com base nas saídas elétricas da matriz, estimar a intensidade usando o limite determinado de ativação de absorção de luzes dos sensores e suas localizações.

12. — Método de acordo com a reivindicação 11, caracterizado por onde a estimativa usa um método Bayesiano.

13. “Método de acordo com a reivindicação 11, caracterizado por onde a estimativa usa uma rede neural de mecanismo antecipatório, onde os dados de treinamento são usados para treinar a rede neural para estimar a intensidade das saídas elétricas da matriz

14. Método de acordo com a reivindicação 10, caracterizado por onde a estimativa usa a saída elétrica da matriz para determinar um número de sensores ativados e a função de massa de probabilidade para determinar uma distribuição do limite de ativação de absorção de luzes dos sensores.

15. Método de acordo com a reivindicação 14, caracterizado por onde a estimativa da intensidade usa uma estimativa máxima de probabilidade.

16. — Método de acordo com a reivindicação 10, caracterizado por onde N fica em uma faixa de cerca de 10º a cerca de 10º ou maior.

17. Método de acordo com a reivindicação 10, caracterizado por onde os valores de ativaçãode absorção de luz ficam dentro de uma faixa de valores de cerca de | a cerca de 4.

18 — Método de acordo com a reivindicação 1, caracterizado por ser executado em um módulo de câmera incorporado em um dispositivo de usuário.

19. — Aparelho, caracterizado por compreender: so uma pluralidade de sensores de luz de limite de sub-difração em que cada sensor tem um limite de ativação associado para comutar de um estado de saída do sensor de um primeiro estado, para um segundo estado em que os limites de ativação de, pelo menos, alguns dos sensores são diferentes; e meios para mensurar a incidência de luz em uma pluralidade de sensores, através de interpretar os estados de saída de uma pluralidade de sensores que dependem de uma distribuição dos limites de ativação dos sensores.

20. Aparelho de acordo com a reivindicação 19, caracterizado por os meios para

. 34 . mensurar à incidência de luz em uma pluralidade de sensores através de interpretar os estados de saída da pluralidade de sensores converte uma distribuição espacial do estado de saídas para uma distribuição espacial de intensidades de luz.

21. Aparelho de acordo com a reivindicação 19 ou 20, caracterizado por compreender adicionalmente uma distribuição pré-determinada de armazenamento que mapeia cada pluralidade de sensores a um limite de ativação associado, em que os meios para medir a incidência de luz na pluralidade de sensores através de interpretar o estado de saídas da pluralidade de sensores usa a distribuição pré-determinada armazenada dos limites de ativação dos sensores.

22. Aparelho de acordo com a reivindicação 19, 20 ou 21, caracterizado por os sensores serem sensores binários que tem como estado de saídas apenas o primeiro estado e o segundo estado.

23. Aparelho como reivindicado de acordo com qualquer uma das reivindicações de 19 a 22, caracterizado por os meios para medir a incidência de luz na pluralidade de sensores determinarem uma distribuição espacial dos limites de ativação.

24, — Aparelho como reivindicado de acordo com qualquer uma das reivindicações de 19 a 23, caracterizado por os limites de ativação serem controlados.

25. Aparelho de acordo com a reivindicação 24, caracterizado por os limites de ativação serem ativamente controlados de uma maneira elétrica.

26. Aparelho como reivindicado de acordo com qualquer uma das reivindicações de 19 a 25, caracterizado por a pluralidade de sensores ser disposta e uma grelha regular.

27. Aparelho como reivindicado de acordo com qualquer uma das reivindicações de 19 a 26, caracterizado por a pluralidade de sensores ser compreendida de mais de 10º sensores,

28. Aparelho como reivindicado de acordo com qualquer uma das reivindicações de19 a 27, caracterizado por os meios para medir a incidência de luz na pluralidade de sensores através de interpretar o estado de saídas da pluralidade de sensores compreenderem um processador e uma memória que compreendem um programa de computador.

29. Aparelho, caracterizado por compreender: meios para medir a incidência de luz em uma pluralidade de sensores de luz de limite de sub-difração, onde cada sensor tem um limite de ativação associado para comutar um estado de saída do sensor a partir de um primeiro estado para um segundo estado, através de interpretar o estado de saídas da pluralidade de sensores, dependente de uma distribuição de limites de ativação dos sensores, em que os limites de ativação de, pelo menos, alguns dos sensores são diferentes;

30. Programa de computador, caracterizado por quando carregado em um

. 4/4 . processador, permitir que o processador: meça a incidência de luz em uma pluralidade de sensores de luz de limite de sub-difração, onde cada sensor tem um limite de ativação associado para comutar um estado de saída do sensor a partir de um primeiro estado para um segundo estado, através de interpretar o estado de saídas da pluralidade de sensores, dependente de uma distribuição de limites de ativação dos sensores, em que os limites de ativação de, pelo menos, alguns dos sensores são diferentes;