ES2554628T3 - Operación de corrección de atenuación de lente usando valores corregidos en base a información de brillo - Google Patents
Operación de corrección de atenuación de lente usando valores corregidos en base a información de brillo Download PDFInfo
- Publication number
- ES2554628T3 ES2554628T3 ES10730927.0T ES10730927T ES2554628T3 ES 2554628 T3 ES2554628 T3 ES 2554628T3 ES 10730927 T ES10730927 T ES 10730927T ES 2554628 T3 ES2554628 T3 ES 2554628T3
- Authority
- ES
- Spain
- Prior art keywords
- lens
- lens attenuation
- value
- brightness
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012937 correction Methods 0.000 title abstract description 29
- 238000005259 measurement Methods 0.000 abstract description 9
- 238000000034 method Methods 0.000 abstract description 3
- 238000003708 edge detection Methods 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20004—Adaptive image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
Un procedimiento (500) en un dispositivo electrónico (600) que tiene un sensor de imagen (620) y una lente (668), que comprende: recibir (502) datos de imagen desde el sensor de imagen; obtener valores de atenuación referidos a la lente desde una tabla de escenarios de corrección de atenuación de lente, en la que los valores de atenuación de lente comprenden un primer valor de atenuación de lente (315) y un segundo valor de atenuación de lente (316); identificar una pluralidad de regiones de los datos de imagen usando detección de borde, en donde la pluralidad de regiones comprende una primera región y una segunda región, en las que el valor de atenuación de lente primero y segundo está asociado, respectivamente, a la región primera y segunda; calcular (504) información de brillo de los datos de imagen, en los que la información de brillo incluye una primera medición de brillo (312) de la primera región y una segunda medición de brillo (313) de la segunda región; corregir (506) al menos el primer valor de atenuación de lente (315) y el segundo valor de atenuación de lente (316), a usar en una operación de corrección de atenuación de lente en base a información de brillo, en la que la corrección de al menos los valores de atenuación de lente primero y segundo incluye reducir al menos el valor de atenuación de lente primero y segundo, cuando una realización de la operación de corrección de atenuación de lente, usando al menos el valor de atenuación de lente primero y segundo, aumentaría un valor de brillo de un píxel por encima de un umbral de brillo, en donde la operación de corrección de atenuación de lente comprende además corregir el primer valor de atenuación de lente (315) en base a la primera medición de brillo (312) y el segundo valor de atenuación de lente (316) en base a la segunda medición de brillo (313); y realizar (508) la operación de corrección de atenuación de lente sobre los datos de imagen, usando al menos el valor corregido de atenuación de lente primero y segundo.
Description
píxeles correspondientes. Por ejemplo, según se ilustra en un gráfico 222 de información de brillo de datos corregidos, el brillo de los datos de imagen de los píxeles que representan el lado derecho de la imagen fue aumentado en un porcentaje inferior al del brillo de los datos de imagen de los píxeles que representan el lado izquierdo de la imagen.
5 Con referencia a la FIG. 3, se ilustra una realización ilustrativa de un sistema de corrección de atenuación de lente en base a información de brillo y se indica en general con 300. El sistema de corrección de atenuación de lente en base a información de brillo 300 puede ser el sistema de captura y procesamiento de imágenes 100 de la FIG. 1. En una realización específica, según se ilustra en la FIG. 3, el sistema de corrección de atenuación de lente en base a información de brillo 300 incluye una lente 391, un sensor 390 y un procesador de imágenes 368. El procesador de imágenes 368 está acoplado con el sensor 390, y el sensor 390 puede estar acoplado con la lente 391. El procesador de imágenes 368 puede incluir una memoria 308, un módulo de selección de atenuación de lente 301, un módulo de corrección de atenuación de lente en base a información de brillo 302 y un módulo de control de ganancia 304. El módulo de selección de atenuación de lente 301 determina los valores iniciales de atenuación de
15 lente, el módulo de corrección de atenuación de lente en base a información de brillo 302 corrige los valores de atenuación de lente en base a información de brillo, y el módulo de control de ganancia 304 aplica los valores corregidos de atenuación de lente a los datos de imagen después de verificar que los valores corregidos de atenuación de lente satisfacen los umbrales de ganancia superior e inferior.
El sensor 390 está configurado para capturar una imagen 350 recibida mediante la lente 391 y comunicar la imagen 350 al procesador de imágenes 368, como datos de imagen. En una realización específica, los datos de imagen incluyen información de brillo 311 de la imagen 350, además de valores individuales de píxel. Alternativamente, el procesador de imágenes 368 puede ser configurado para calcular la información de brillo 311. Según se ilustra, la información de brillo 311 puede incluir medidas de brillo para cada región de una cuadrícula 314, tales como una
25 primera medición de brillo (B1) 312 y una segunda medición de brillo (B2) 313.
En una realización específica, el módulo de corrección de atenuación de lente en base a información de brillo 302 está configurado para definir una pluralidad de regiones de la imagen 350, incluyendo una primera región definida y una segunda región definida. En una realización específica, la pluralidad de regiones corresponde a la cuadrícula 314 de regiones de tamaño esencialmente igual. En la realización ilustrada en la FIG. 3, la cuadrícula 314 incluye dieciséis regiones cuadradas de igual tamaño. Alternativamente, la cuadrícula 314 puede incluir cualquier número de regiones, y las regiones de igual tamaño pueden ser rectangulares, piramidales o de otra forma. Además, en otras realizaciones, las regiones pueden tener distintos tamaños.
35 Según se ilustra, la pluralidad de regiones (p. ej., las dieciséis regiones cuadradas de igual tamaño de la FIG. 3) están definidas antes de determinar la información de brillo de las regiones individuales. Sin embargo, en otras realizaciones, el procesador de imágenes 368 puede ser configurado para definir al menos una región de los datos de imagen. En una realización específica, al menos una región entre la pluralidad de regiones es identificada usando detección de bordes. Por ejemplo, una región puede ser identificada por contener píxeles con niveles de brillo esencialmente similares, donde los niveles de brillo esencialmente similares difieren de los niveles de brillo fuera de la región en una magnitud predeterminada.
El módulo de corrección de atenuación de lente en base a información de brillo 302 puede ser configurado para corregir al menos un valor de atenuación de lente, a usar en una operación de corrección de atenuación de lente en
45 base a la información de brillo 311. En una realización específica, la corrección de dicho al menos un valor de atenuación de lente en base a la información de brillo 311 incluye reducir dicho al menos un valor de atenuación de lente cuando una realización de la operación de corrección de atenuación de lente aumentaría un valor de brillo de un píxel por encima de un umbral de brillo. En una realización específica, el módulo de corrección de atenuación de lente en base a información de brillo 302 está configurado para corregir un primer valor de atenuación de lente (LROV1) 315 en base a la primera medición de brillo 312 de una primera región definida de la imagen 350. El módulo de corrección de atenuación de lente en base a información de brillo 302 puede ser configurado para corregir un segundo valor de atenuación de lente (LROV2) 316 en base a la segunda medición de brillo 313 de una segunda región definida de la imagen 350.
55 El módulo de control de ganancia 304 puede ser configurado para corregir dicho al menos un valor de atenuación de lente en base a un umbral de ganancia. Por ejemplo, la corrección de dicho al menos un valor de atenuación de lente en base al umbral de ganancia incluye reducir dicho al menos un valor de atenuación de lente cuando dicho al menos un valor de atenuación de lente está por encima de un umbral de ganancia superior 340. Alternativamente, la corrección de dicho al menos un valor de atenuación de lente en base al umbral de ganancia puede incluir aumentar dicho al menos un valor de atenuación de lente cuando el valor de atenuación de lente está por debajo de un umbral de ganancia inferior 341.
El módulo de control de ganancia 304 puede ser configurado para realizar la operación de corrección de atenuación de lente usando los valores corregidos de atenuación de lente. En una realización específica, la realización de la 65 operación de corrección de atenuación de lente sobre los datos de imagen incluye aumentar un valor de brillo de un píxel en los datos de imagen. El aumento del valor de brillo del píxel incluye multiplicar el valor de brillo del píxel por
7
incluye un procesador 710, tal como un procesador de señales digitales (DSP), acoplado con una memoria 732. En un ejemplo ilustrativo, el módulo de corrección de atenuación de lente en base a información de brillo 764 incluye uno o más de los módulos o sistemas de las FIGs. 1 a 3 y 6, o funciona de acuerdo a cualquiera de las realizaciones
o procedimientos de la FIG. 5, o cualquier combinación de los mismos. El módulo de corrección de atenuación de
5 lente en base a información de brillo 764 puede ser incorporado al procesador 710 o puede ser un dispositivo por separado.
En una realización, el dispositivo de comunicación inalámbrica 700 incluye una interfaz de cámara 768 que está acoplada con el procesador 710, y también está acoplada con una cámara, tal como una cámara de vídeo o cámara fija 770. Un controlador de visor 726 está acoplado con el procesador 710 y con un dispositivo visor 728. Un codificador / descodificador (CODEC) 734 puede también estar acoplado con el procesador 710. Un altavoz 736 y un micrófono 738 pueden estar acoplados con el CODEC 734. Una interfaz inalámbrica 740 puede estar acoplada con el procesador 710 y con una antena inalámbrica 742.
15 En una realización específica, el procesador 710 incluye el módulo de corrección de atenuación de lente en base a información de brillo 764 y está adaptado para recibir datos de imagen capturados por la cámara 770, para capturar información de brillo de los datos de imagen, corregir al menos un valor de atenuación de lente a usar en una operación de corrección de atenuación de lente en base a información de brillo, y realizar la operación de corrección de atenuación de lente sobre los datos de imagen, usando la funcionalidad del valor corregido de atenuación de lente con la cámara 770. Además, el módulo de corrección de atenuación de lente en base a información de brillo 764 puede comprimir una imagen procesada resultante, para que sea compatible con mecanismos de transporte y almacenamiento de menor resolución.
El procesador 710 también puede ser adaptado para generar y comprimir datos de imagen con corrección de
25 atenuación de lente en base a información de brillo, que pueden ser recibidos desde diversos orígenes. Por ejemplo, los datos de imagen pueden incluir datos de vídeo o imágenes fijas procedentes de la cámara 770, datos de imagen desde una transmisión inalámbrica recibida mediante la interfaz inalámbrica 740, o desde otros orígenes tales como un dispositivo externo acoplado mediante una interfaz (no mostrada) del bus universal en serie (USB), como ejemplos ilustrativos y no limitadores.
En una realización específica, el procesador 710 está configurado para generar datos de imagen con valores de ganancia ajustados, añadidos a los valores de píxel de la imagen, y para proporcionar los datos de imagen ajustados para su exhibición en el dispositivo visor 728. Además, el procesador 710 puede estar adicionalmente configurado para almacenar los datos de imagen en la memoria 732 o para proporcionar los datos de imagen a comunicar
35 mediante la interfaz inalámbrica 740.
El controlador de visor 726 está configurado para recibir los datos de imagen procesados y proporcionar los datos de imagen procesados al dispositivo visor 728. Además, la memoria 732 puede ser configurada para recibir y almacenar los datos de imagen procesados, y la interfaz inalámbrica 740 puede ser configurada para recibir los datos de imagen procesados, para su transmisión mediante la antena 742.
En una realización específica, el procesador de señales 710, el controlador de visor 726, la memoria 732, el CODEC 734, la interfaz inalámbrica 740 y la interfaz de cámara 768 están incluidos en un dispositivo de sistema-en-unpaquete o de sistema-en-un-chip 722. En una realización específica, un dispositivo de entrada 730 y una fuente de
45 alimentación 744 están acoplados con el dispositivo de sistema-en-un-chip 722. Además, en una realización específica, según lo ilustrado en la FIG. 6, el dispositivo visor 728, el dispositivo de entrada 730, el altavoz 736, el micrófono 738, la antena inalámbrica 742, la cámara de vídeo 770 y la fuente de alimentación 744 son externos al dispositivo de sistema-en-un-chip 722. Sin embargo, cada uno entre el dispositivo visor 728, el dispositivo de entrada 730, el altavoz 736, el micrófono 738, la antena inalámbrica 742, la cámara de vídeo 770 y la fuente de alimentación 744 puede estar acoplado con un componente del dispositivo de sistema-en-un-chip 722, tal como una interfaz o un controlador.
Los expertos en la técnica apreciarán además que los diversos bloques lógicos ilustrativos, las configuraciones, los módulos, los circuitos y las etapas de algoritmo descritos con relación a las realizaciones divulgadas en la presente
55 memoria pueden ser implementados como hardware electrónico, software de ordenador ejecutándose en un procesador, o combinaciones de ambos. Diversos componentes ilustrativos, bloques, configuraciones, módulos, circuitos y etapas han sido descritos anteriormente, en general, en términos de su funcionalidad. Si tal funcionalidad es implementada como hardware o software depende de la aplicación específica y las restricciones de diseño impuestas sobre el sistema global. Los artesanos expertos pueden implementar la funcionalidad descrita de maneras variables para cada aplicación específica, pero tales decisiones de implementación no deberían ser interpretadas como causantes de un alejamiento del ámbito de la presente divulgación.
Las etapas de un procedimiento o algoritmo descrito con relación a las realizaciones divulgadas en la presente memoria pueden ser realizadas directamente en hardware, en software que incluya instrucciones ejecutadas por un 65 procesador, o en una combinación de los dos. Un módulo de software puede residir en memoria de acceso aleatorio (RAM), memoria flash, memoria de solo lectura (ROM), memoria programable de solo lectura (PROM), memoria
12
Claims (1)
-
imagen1 imagen2
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US488737 | 2009-06-22 | ||
| US12/488,737 US8270754B2 (en) | 2009-06-22 | 2009-06-22 | Lens roll-off correction operation using values corrected based on brightness information |
| PCT/US2010/039383 WO2010151512A1 (en) | 2009-06-22 | 2010-06-21 | Lens roll-off correction operation using values corrected based on brightness information |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| ES2554628T3 true ES2554628T3 (es) | 2015-12-22 |
Family
ID=42646274
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| ES10730927.0T Active ES2554628T3 (es) | 2009-06-22 | 2010-06-21 | Operación de corrección de atenuación de lente usando valores corregidos en base a información de brillo |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US8270754B2 (es) |
| EP (1) | EP2446414B1 (es) |
| JP (1) | JP5619882B2 (es) |
| KR (1) | KR101337667B1 (es) |
| CN (1) | CN102804227B (es) |
| ES (1) | ES2554628T3 (es) |
| TW (1) | TW201110674A (es) |
| WO (1) | WO2010151512A1 (es) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102679905A (zh) * | 2012-01-10 | 2012-09-19 | 天津大学 | 像素级自适应数字光学亮度衰减方法及衰减装置 |
| US9300888B2 (en) * | 2013-10-03 | 2016-03-29 | Amlogic Co., Ltd. | Methods and systems for lens shading correction |
| JP2015099956A (ja) * | 2013-11-18 | 2015-05-28 | ソニー株式会社 | 撮像装置、情報処理装置、撮像システム及びプログラム |
| CN110248049B (zh) * | 2017-07-10 | 2021-08-13 | Oppo广东移动通信有限公司 | 移动终端及拍摄控制方法、拍摄控制装置、计算机可读存储介质 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6094508A (en) * | 1997-12-08 | 2000-07-25 | Intel Corporation | Perceptual thresholding for gradient-based local edge detection |
| JP2001054013A (ja) * | 1999-08-13 | 2001-02-23 | Fuji Photo Film Co Ltd | 撮像信号処理装置およびその処理方法 |
| JP2004038728A (ja) * | 2002-07-05 | 2004-02-05 | Noritsu Koki Co Ltd | 画像処理方法、画像処理プログラム、および、画像処理プログラムを記録した記録媒体 |
| JP4235408B2 (ja) | 2002-07-15 | 2009-03-11 | 富士フイルム株式会社 | ノイズ低減回路及び撮像装置 |
| JP2004222134A (ja) | 2003-01-17 | 2004-08-05 | Fuji Photo Film Co Ltd | 撮像装置 |
| JP4309695B2 (ja) * | 2003-05-14 | 2009-08-05 | オリンパス株式会社 | 画像処理システム、画像処理制御方法、及びプログラム |
| US7961973B2 (en) * | 2004-09-02 | 2011-06-14 | Qualcomm Incorporated | Lens roll-off correction method and apparatus |
| JP2006253892A (ja) * | 2005-03-09 | 2006-09-21 | Canon Inc | 画像処理方法及び画像処理装置 |
| JP2008053931A (ja) * | 2006-08-23 | 2008-03-06 | Fujifilm Corp | 撮像装置 |
| JP2008124793A (ja) | 2006-11-13 | 2008-05-29 | Fujifilm Corp | 撮像装置、撮像方法 |
| US8023758B2 (en) * | 2007-08-07 | 2011-09-20 | Qualcomm Incorporated | Surface mesh matching for lens roll-off correction |
| KR101014572B1 (ko) * | 2007-08-27 | 2011-02-16 | 주식회사 코아로직 | 영상 왜곡 보정 방법 및 그 보정 방법을 채용한 영상처리장치 |
-
2009
- 2009-06-22 US US12/488,737 patent/US8270754B2/en active Active
-
2010
- 2010-06-21 CN CN201080026153.3A patent/CN102804227B/zh active Active
- 2010-06-21 JP JP2012517633A patent/JP5619882B2/ja active Active
- 2010-06-21 WO PCT/US2010/039383 patent/WO2010151512A1/en active Application Filing
- 2010-06-21 EP EP10730927.0A patent/EP2446414B1/en active Active
- 2010-06-21 ES ES10730927.0T patent/ES2554628T3/es active Active
- 2010-06-21 KR KR1020127001213A patent/KR101337667B1/ko active IP Right Grant
- 2010-06-22 TW TW099120385A patent/TW201110674A/zh unknown
Also Published As
| Publication number | Publication date |
|---|---|
| EP2446414B1 (en) | 2015-09-30 |
| CN102804227A (zh) | 2012-11-28 |
| KR20120031067A (ko) | 2012-03-29 |
| CN102804227B (zh) | 2015-10-07 |
| JP5619882B2 (ja) | 2014-11-05 |
| JP2013500610A (ja) | 2013-01-07 |
| US8270754B2 (en) | 2012-09-18 |
| US20100322532A1 (en) | 2010-12-23 |
| KR101337667B1 (ko) | 2013-12-06 |
| TW201110674A (en) | 2011-03-16 |
| EP2446414A1 (en) | 2012-05-02 |
| WO2010151512A1 (en) | 2010-12-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20160005362A1 (en) | Determination Of Optical Condition And Adjustment Of Display | |
| US10855910B2 (en) | Electronic device, method, and program | |
| JP6160004B2 (ja) | シーン認識方法および装置 | |
| US20150229820A1 (en) | Electronic device and method for controlling flash | |
| US9965861B2 (en) | Method and system of feature matching for multiple images | |
| US10812767B2 (en) | White balance processing method, electronic device and computer readable storage medium | |
| JP6472869B2 (ja) | 周囲光に基づく画像調整 | |
| ES2554628T3 (es) | Operación de corrección de atenuación de lente usando valores corregidos en base a información de brillo | |
| US9386245B2 (en) | Solid-state imaging device, solid-state imaging method, and electronic apparatus | |
| US9986171B2 (en) | Method and apparatus for dual exposure settings using a pixel array | |
| EP2881915A8 (en) | Techniques for disparity estimation using camera arrays for high dynamic range imaging | |
| EP1988704A3 (en) | Image capturing system, signal processing circuit, and signal processing method | |
| TW200504582A (en) | Method and apparatus for reducing effects of dark current and defective pixels in an imaging device | |
| US20180205879A1 (en) | Image processing apparatus, image processing method, and recording medium | |
| US9666165B2 (en) | Backlight compensation method, device and terminal | |
| KR20150099302A (ko) | 전자 장치와, 그의 제어 방법 | |
| CN103945145A (zh) | 处理图像的设备和方法 | |
| US20110019019A1 (en) | Method and system for processing photograph in camera device | |
| EP2635031A3 (en) | Systems and methods for image processing | |
| US20120050586A1 (en) | Image processing apparatus, image processing method, and camera module | |
| JP2015088947A5 (es) | ||
| US20240119566A1 (en) | Image processing method and apparatus, and electronic device | |
| US9232120B2 (en) | Image processor | |
| US9432601B2 (en) | Defective pixel correcting apparatus, imaging apparatus, and method of correcting defective pixel | |
| US20130208974A1 (en) | Image processing device and image processing method |