KR20060065529A - 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 - Google Patents
디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 Download PDFInfo
- Publication number
- KR20060065529A KR20060065529A KR1020050119772A KR20050119772A KR20060065529A KR 20060065529 A KR20060065529 A KR 20060065529A KR 1020050119772 A KR1020050119772 A KR 1020050119772A KR 20050119772 A KR20050119772 A KR 20050119772A KR 20060065529 A KR20060065529 A KR 20060065529A
- Authority
- KR
- South Korea
- Prior art keywords
- value
- sensor
- values
- sensor values
- pixel
- Prior art date
Links
- 230000002950 deficient Effects 0.000 title claims abstract description 35
- 238000000034 method Methods 0.000 title claims description 21
- 238000003384 imaging method Methods 0.000 claims description 13
- 230000004044 response Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 8
- 238000001514 detection method Methods 0.000 claims 7
- 238000010586 diagram Methods 0.000 description 8
- 238000006467 substitution reaction Methods 0.000 description 5
- 208000036971 interstitial lung disease 2 Diseases 0.000 description 4
- 238000012935 Averaging Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 241001428800 Cell fusing agent virus Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 210000000653 nervous system Anatomy 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
- H04N25/683—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects by defect estimation performed on the scene signal, e.g. real time or on the fly detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
픽셀의 어레이 및 프로세서를 포함하는 디지털 이미지 센서가 제공된다. 이 픽셀의 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함한다. 프로세서는 복수의 제 1 센서값 및 복수의 제 2 센서값과 관련된 복수의 강도 비를 생성하도록 구성되며, 복수의 추정값 및 현재 센서값을 사용해서 현재 픽셀이 결함이 있는지 판정하도록 구성된다.
Description
도 1은 결함 픽셀을 검출해서 수정하는 디지털 이미징 시스템의 일 실시예를 도시하는 블록도,
도 2는 버퍼의 센서값의 예를 도시하는 도면,
도 3은 불량 픽셀 수정 모듈의 일 예를 도시하는 블록도,
도 4는 결함 픽셀을 검출해서 수정하는 방법의 일 실시예를 도시하는 흐름도,
도 5는 정보 시스템의 일 실시예를 도시하는 블록도.
본 출원은 2002년 9월 18일에 출원된 미국 특허 출원 제 10/246,124호 "METHOD FOR DETECTING AND CORRECTING DEFECTIVE PIXELS IN A DIGITAL IMAGE SENSOR"와 관련된다. 이 미국 특허 출원은 본 발명의 양수인에게 양도되었으며, 여기에 참조로서 포함된다.
많은 전자 장치가 전자 이미지 센서를 포함하고 있다. 전자 이미지 센서는 주로 CCD(전하 결합 소자) 및 CMOS-APS(상보형 금속 산화물 반도체-액티브 픽셀 센서) 중 하나이다. 각각의 전자 이미지 센서의 타입은 일정 패턴으로 배열된 광 검출기(즉, 픽셀)의 어레이를 포함한다. 각각의 픽셀은 이미지에 노출되는 것에 반응해서 광의 파장 범위의 세트 중 하나에 대해서 광의 강도를 측정한다. 이 범위의 세트는 각각 사람의 시신경계가 인지하는 색과 관련되어 있다.
불행하게도, 전자 이미지 센서가 결함 픽셀을 포함할 수 있다. 결함 픽셀이란 이미지로부터 노출된 광에 부적절하게 반응해서, 부정확한 센서값을 생성하는 픽셀이다. 결함 픽셀은 비정상적으로 높은(예컨대, 최대 한계 혹은 거의 최대의 한계의) 출력을 가진 스턱 하이 픽셀(stuck high pixel)이나, 비정상적으로 낮은(예컨대, 최저 한계 혹은 거의 최저 한계의) 출력을 가진 스턱 로우 픽셀이나, 같은 광 조건에 노출된 이웃 픽셀과는 현저히 다른 비정상적으로 민감한 픽셀이 될 수 있다.
바람직하게는 전자 이미지 센서로부터 결함 픽셀을 정확하게 검출해서 수정할 수 있어야 한다.
일 실시예는 픽셀의 어레이 및 프로세서를 포함하는 디지털 이미지 센서를 제공한다. 이 픽셀의 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함한다. 이 프로세서는 복수의 제 1 센서값 및 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하도록 구성되고, 이 프로세서는 복수의 추정값 및 현재 센서값을 사용해서 현재 픽셀이 결함인지 판정하도록 구성된다.
상세한 설명에서, 이 설명의 일부를 이루며 본 발명이 실시될 수 있는 특정 실시예를 예로서 도시하는 첨부 도면을 참조한다. 여기서, "상부", "바닥부", "전면", "후면", "선단", "후단"과 같은 방향 관련 용어는 도시된 도면의 방향을 기준으로 사용된다. 본 발명의 실시예의 구성 요소들이 많은 각각의 방향으로 위치될 수 있으므로, 이 방향 관련 용어는 예시의 목적으로 사용되는 것으로 한정하는 것은 아니다. 본 발명의 범주를 벗어나지 않고 다른 실시예가 사용될 수 있으며, 구조 또는 논리적인 변화가 있을 수 있다는 것을 이해할 것이다. 따라서, 이어지는 상세한 설명은 한정의 의미로 이루어진 것이 아니며, 본 발명의 범주는 첨부된 청구항에 의해 한정된다.
도 1은 결함 픽셀을 검출해서 수정하는 디지털 이미징 시스템(10)의 일 실시예를 도시하는 블록도이다. 디지털 이미징 시스템(10)은 복수의 픽셀(102)을 구비한 센서(100), 버퍼(110) 및 불량 픽셀 수정(BPC) 프로세서(120)를 포함한다.
센서(100)는 CCD(전하 결합 소자), CMOS-APS(상보형 금속 산화물 반도체-액티브 픽셀 센서) 또는 다른 적절한 센서를 포함한다. 센서(100)는 행 및 열로 배열된 픽셀(102)의 2차원 어레이를 포함한다. 센서(100)는 컬러 픽셀 어레이(CFA)로 덮여있어서, 각각의 픽셀(102)이 오직 하나의 색을, 즉 색의 하나의 파장 범위만을 감지할 수 있다. 일 실시예에서, CFA는 색차 색(예컨대, 적색과 청색)이 휘도 색(예컨대, 녹색)의 바둑판 형상 사이에 산재되어 있는 Bayer CFA이다. 다른 실시예에서, 다른 색 표현(예컨대, 옐로우, 시안 및 마젠타)을 사용하는 다른 CFA가 사용될 수 있다. 센서(100)는 이미지로부터의 광에 노출되는 것에 반응해서 각각의 픽셀(102)의 이미지와 관련된 센서값을 생성한다. 센서(100)는 센서값을 버퍼(110)에 제공한다.
버퍼(110)는 센서(100) 및 BPC 프로세서(120)에 동작가능하게 연결된 휘발성 또는 비휘발성 저장 장치(예컨대, RAM 또는 플래시 메모리)를 포함한다. 버퍼(110)는 BPC 프로세서(120)와 같은 기판에 집적될 수도 있고, 그 외부에 위치될 수도 있다. 버퍼(110)는 센서로부터 수신된 센서값을 저장해서 센서값을 BPC 프로세서(120)에 제공하도록 구성된다.
BPC 프로세서(120)는 여기 설명되는 기능을 수행하도록 구성된 하드웨어 또는 소프트웨어 구성 요소의 임의의 조합을 포함한다. BPC 모듈의 임의의 소프트웨어 구성 요소가 처리 시스템에 의해 수행될 수 있도록 처리 시스템이 액세스할 수 있는 휴대형 또는 비휴대형 매체에 저장될 수 있다. BPC 프로세서(120)는 센서(100)와 함께 같은 기판에 집적될 수도 있고, 그 외부에 위치될 수도 있다. BPC 프로세서(120)는 버퍼(110)로부터의 센서값을 수신해서 결함 픽셀(102)과 관련된 센서값을 검출해서 수정한다.
결함 픽셀은 이미지로부터 노출된 광에 대해서 부적절하게 응답해서 부정확한 센서값을 생성하는 픽셀(102)이다. 결함 픽셀은 비정상적으로 높은(예컨대, 최대 한계 혹은 거의 최대의 한계의) 출력을 가진 스턱 하이 픽셀(stuck high pixel)이나, 비정상적으로 낮은(예컨대, 0 혹은 거의 0) 출력을 가진 스턱 로우 픽셀이나, 같은 광 조건에 노출된 이웃 픽셀과는 현저히 다른 비정상적으로 민감한 픽셀이 될 수 있다.
동작시에, 센서(100)는 이미지로부터의 광에 노출되는 것에 반응해서 이미지와 관련된 센서값의 블록을 버퍼(110)에 제공한다. BPC 프로세서(120)는 버퍼(110)로부터의 센서값에 액세스해서 센서(100)의 결함 픽셀(102)과 관련된 센서값을 검출해서 수정하며, 이에 대해서는 더 상세하게 후술될 것이다.
도 2는 버퍼(110)의 센서값의 예를 도시하는 도면이다. 도 2에서, 버퍼(110)는 현재의 센서값의 행(202A), 현재 행(202A)에 앞선 2개의 이웃하는 센서값의 행(202B) 및 현재 행(202A)에 후속하는 센서값의 2개의 이웃하는 행(202C)을 포함한다. BPC 프로세서(120)가 보고 있는 현재 픽셀의 센서값(204)은 "Z"로 표시되어 있다. 현재 픽셀과 같은 색 평면에 있는 픽셀(102)로부터 획득된 센서값(206)은 "Xn"으로 표시되어 있고, 현재 픽셀과는 다른 색 평면에 있는 픽셀(102)로부터 획득된 센서(208)는 "Yn"으로 표시되어 있다. 센서값(206, 208)과 관련된 픽셀은 모두 현재 픽셀의 이웃하는 픽셀이라고 한다. 현재 픽셀이 결함 픽셀인지 판정하 는 데 사용되지 않는 센서값은 도시되지 않는다.
도 3에 도시된 바와 같은 BPC 프로세서(120)의 일 실시예를 설명하기 위해서 도 2에 도시된 센서값의 5×5 블록이 도시되어 있다. 도 3에서, BPC 프로세서(120)는 강도 로직(302), 추정 로직(304), 범위 로직(306), 비교 로직(308), 평균 로직(310), 임계 로직(312) 및 대치 로직(314)을 포함한다. BPC 프로세서(120)의 각각의 로직 블록의 기능이 도 4를 참조로 설명될 것이다.
도 2, 3 및 4를 함께 참조하면, 현재 픽셀 및 이웃 픽셀의 센서값은 블록(402)에 도시된 바와 같이 BPC 프로세서(120)에 의해 버퍼(110)로부터 수신된다. 더 상세하게, 이웃하는 픽셀의 센서값은 강도 로직(302)에 의해 버퍼(110)로부터 수신되고, 현재 픽셀의 센서값은 비교 로직(308) 및 대치 로직(314)에 의해 버퍼(110)로부터 수신된다.
블록(404)에 표시된 바와 같이 임계 파라미터가 BPC 프로세서(120)에 의해 설정된다. 임계 파라미터(t1, t2)가 BPC 프로세서(120) 내에서 혹은 BPC 프로세서(120) 외부에서 서로 액세스되어서 임계 로직(312)으로 제공된다.
BPC 프로세서(120)는 블록(406)에 표시된 바와 같이 다른 색의 이웃 픽셀의 강도 비를 계산한다. 더 상세하게, 강도 로직(302)은 현재 센서값과는 다른 색 평면의 이웃 픽셀의 가로, 세로 및 대각 강도 평균을 계산하고, 이 강도 평균을 사용해서 강도 비를 생성한다. 강도 로직(302)은 같은 행 및 다른 열로부터의 센서값을 사용해서 가로 강도 평균을 계산하고, 강도 로직(302)은 다른 행 및 같은 열로부터의 센서값을 사용해서 세로 강도 평균을 계산하며, 강도 로직(302)은 다른 행 및 다른 열로부터의 센서값을 사용해서 대각 강도 평균을 계산한다. 강도 로직(302)에 의해 계산된 강도 평균 및 강도 비의 예가 아래의 식 I 내지 Ⅷ에 나타나 있다. 강도 로직(302)은 강도 로직을 추정 로직(304)에 제공한다.
블록(408)에 나타난 바와 같이 BPC 프로세서(120)는 다른 색 강도 비 및 같은 색의 이웃 픽셀을 사용해서 추정값을 계산한다. 더 상세하게는 추정 로직(304)은 강도 로직(302)으로부터 강도 비를 수신해서, 다음과 같은 식 I 내지 Ⅷ을 사용해서 8개의 추정값(E1 내지 E8)을 계산한다.
식 I
식 Ⅱ
식 Ⅲ
식 Ⅳ
식 Ⅴ
식 Ⅵ
식 Ⅶ
식 Ⅷ
식 I 내지 Ⅷ에 표시된 바와 같이 추정 로직(304)은 현재 센서값과 같은 색 평면으로부터의 센서값을 현재의 센서값과는 다른 색 평면으로부터의 센서의 2개의 강도 평균의 강도 비와 곱해서 8개의 추정값(E1 내지 E8)을 계산한다. 다른 실시예에서, 강도 비는 강도 평균, 중앙값(median) 또는 최대값과 최소값을 제외한 평균을 사용해서 계산될 수 있다. 식 I 내지 Ⅷ을 사용해서 계산된 8개의 추정값(E1 내지 E8) 각각에 대해서, 식 I 내지 Ⅷ을 사용해서 계산된 추정값이 최대값을 초과하면, 평균 로직(304)은 추정값을 최대값과 같게 설정한다. 추정 로직(304)은 8개의 추정값(E1 내지 E8)을 범위 로직(306) 및 평균 로직(310)에 제공한다. 강도 비의 분모값이 0이면, 부정확한 값이 나오지 않도록 다른 값이 0을 대치할 수 있다.
블록(410)에 나타난 바와 같이 BPC 프로세서(120)는 최대값, 최소값 및 평균 추정값을 판정한다. 더 상세하게, 범위 로직(306)은 8개의 추정값(E1 내지 E8)을 추정 로직(304)으로부터 수신해서 값(E1 내지 E8)의 최소 추정값(Emin) 및 최대 추정값(Emax)을 판정한다. 범위 로직(306)은 최소 추정값(Emin) 및 최대 추정값(Emax)을 비교 로직(308)에 제공한다. 평균 로직(310)은 추정 로직(304)으로부터 8개의 추정값(E1 내지 E8)을 수신해서, 8개의 값(E1 내지 E8)의 평균 추정값(Emean)을 판정한다. 평균 추정값(Emean)은 평균, 중앙값 또는 최대값과 최소값을 제외한 평균을 포함할 수 있다. 평균 로직(310)은 평균 추정값(Emean)을 임계 로직(312) 및 대치 로직(314)에 제공한다.
블록(412)에 나타난 바와 같이 BPC 프로세서(120)는 평균 추정값 및 임계값 파라미터를 사용해서 임계값을 계산한다. 더 상세하게는 임계 로직(312)은 평균 로직(310)으로부터 평균 추정값(Emean)을 받아서 임계 파라미터(t1, t2)를 사용해서, 식 Ⅸ을 통해 임계값(Th)을 계산한다.
식 Ⅸ
임계 로직(312)은 임계값(Th)을 비교 로직(308)에 제공한다.
블록(414)에 나타난 바와 같이 BPC 프로세서(120)는 임계값을 사용해서 최대 및 최대값을 조정해서 로우값 및 하이값을 각각 판정한다. 더 상세하게, 비교 로직(308)은 다음 식 Ⅹ에 나타난 바와 같이 범위 로직(306)으로부터 수신된 최소 추정값(Emin)에서, 임계 로직(312)으로부터 수신된 임계값(Th)을 빼서 로우값을 구한다.
식 Ⅹ
또한, 비교 로직(308)은 다음 식 ⅩI에 나타난 바와 같이 임계 로직(312)으로부터 수신된 임계값(Th)에, 범위 로직(306)으로부터 수신된 최대 추정값(Emax)을 더해서 하이값을 구한다.
식 ⅩI
블록(416)에 나타난 바와 같이 BPC 프로세서(120)는 현재 센서값이 로우값보다 낮은지 판정한다. 더 상세하게 비교 로직(308)은 현재 센서값을 식 Ⅹ을 사용해서 구한 로우값과 비교해서 현재 센서값이 로우값보다 낮은지 판정한다. 현재 센서값이 로우값보다 낮다면, 현재 센서값과 관련된 픽셀(102)은 결함이 있는 것으로 판정되고, BPC 프로세서(120)는 블록(418)에 나타난 바와 같이 현재 센서값의 위치에 평균 추정값을 제공한다. 현재 센서값이 로우값보다 낮다고 평균 로직(308)이 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 생성하고, 이 결함 신호(DEF)를 대치 로직(314)에 제공한다. 결함 신호(DEF)를 수신한 것에 응답해서, 대치 로직(314)은 버퍼(110)로부터 제공된 현재 센서값(Z) 대신 평균 로직(314)으로부터 수신된 평균 추정값(Emean)을 현재 센서값(Z')으로서 제공한다.
블록(420)에 표시된 바와 같이 현재 센서값이 로우값보다 낮지 않다면, BPC 프로세서(120)는 현재 센서값이 하이값보다 높은지 판정한다. 더 상세하게 비교 로직(308)은 현재의 센서값을 식 XI를 사용해서 구해진 하이값과 비교해서 현재 센서값이 하이값보다 큰지 판정한다. 현재 센서값이 하이값보다 크면, 현재 센서값과 관련된 픽셀(102)은 결함이 있는 것으로 판정되고, 블록(418)에 나타난 바와 같이 BPC 프로세서(120)는 평균 추정값을 현재 센서값의 위치에 제공한다. 현재 센서값이 하이값보다 크다고 비교 로직(308)이 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 생성하고, 이 결함 신호(DEF)를 대치 로직(314)에 제공한다. 결함 신호(DEF)를 수신하는 것에 응답해서, 대치 로직(314)은 버퍼(110)로 부터 제공된 현재 센서값(Z) 대신 평균 로직(314)으로부터 수신된 평균 추정값(Emean)을 현재 센서값(Z')으로서 제공한다.
현재 센서값이 하이값보다 크지 않으면, 현재 센서값과 관련된 픽셀(102)은 결함이 없는 것으로 판정되고, BPC 프로세서(120)는 블록(422)에 나타난 바와 같이 현재 센서값을 제공한다. 현재 센서값이 하이값보다 크지 않다고 비교 로직(308)에서 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 대치 로직(314)에 제공하지 않는다. 따라서, 대치 로직(314)은 버퍼(110)로부터 제공된 현재 센서값(Z)을 현재 센서값(Z')으로 제공한다.
도 5는 정보 시스템(500)의 일실시예를 나타내는 블록도이다. 정보 시스템(500)은 디지털 이미징 시스템(10), 프로세싱 시스템(502) 및 하나 이상의 선택적인 기능 유닛(504)을 포함하고 있다.
정보 시스템(500)은 디지털 이미징 시스템(10)을 주 시스템으로 혹은 보조 시스템으로 내부 혹은 외부에 포함하는 임의의 시스템이 될 수 있다. 예컨대, 정보 시스템(500)은 디지털 스틸 또는 비디오 카메라, 셀룰러폰, PDA, 휴대형(예컨대, 랩톱) 또는 비휴대형(예컨대, 데스크톱 또는 서버) 컴퓨터 시스템 또는 의료용 이미징 장치가 될 수 있다.
처리 시스템(502)은 디지털 이미징 시스템(10) 및 임의의 기능 유닛(504)의 동작을 제어 또는 관리한다. 처리 시스템(502)은 디지털 이미징 시스템(10)으로부터 기능 유닛(504)으로 정보를 제공할 수 있고, 또한 기능 유닛(504)으로부터 디지 털 이미징 시스템으로 정보를 제공할 수 있다. 처리 시스템(502)은, 프로세서 또는 컨트롤러에 의해 수행가능한 소프트웨어를 저장하는 하나 이상의 프로세서 또는 컨트롤러 및 하나 이상의 저장 장치와 같은 하드웨어와 소프트웨어 구성요소의 임의의 조합을 포함할 수 있다.
기능 유닛(504)은 정보 시스템(500)의 내부 또는 외부의, 하드웨어와 소프트웨어 구성요소의 임의의 조합을 포함할 수 있다. 기능 유닛(504)의 예로는 다른 정보 시스템과 통신하도록 구성된 네트워킹 또는 통신 장치(예컨대, 모뎀 또는 셀룰러폰 송수신기) 및 디지털 이미징 시스템(10)으로부터의 이미지를 디스플레이하는 디스플레이 장치를 들 수 있다.
비록, 특정 실시예가 여기서 설명되고 개시되었지만, 당업자라면 본 발명의 범주를 벗어남없이, 다양한 대안의 및/또는 동등한 구현예가 여기 도시되고 설명된 특정 실시예를 대치할 수 있다는 것을 이해할 것이다. 본 출원은 여기 설명된 특정 실시예의 임의의 개조 또는 수정을 커버하도록 의도된 것이다. 따라서, 본 발명은 청구항 및 그 동등물에 의해서만 한정되도록 의도되었다.
본 발명을 통해서, 전자 이미지 센서로부터 결함 픽셀을 정확하게 검출해서 수정할 수 있다.
Claims (20)
- 픽셀 어레이와 프로세서를 포함하는 디지털 이미지 센서에 있어서,상기 픽셀 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 상기 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함하고,상기 프로세서는 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하도록 구성되고, 또한 상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 프로세서는 상기 복수의 제 1 센서값 중 하나를 상기 복수의 강도 비 중 하나와 곱해서 상기 복수의 추정값 각각을 생성하도록 구성되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 프로세서는 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비 각각을 생성하도록 구성되는디지털 이미지 센서.
- 제 3 항에 있어서,상기 제 1 값은 상기 복수의 제 2 센서값의 상기 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값(median)으로 이루어진 제 1 그룹으로부터 선택되고,상기 제 2 값은 상기 복수의 제 2 센서값의 상기 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 프로세서는 상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하도록 구성되는디지털 이미지 센서.
- 제 5 항에 있어서,상기 복수의 추정값 중 하나는 상기 복수의 추정값의 평균값, 최대값과 최소값을 제외한 평균값 및 중앙값으로 이루어진 그룹으로부터 선택되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 프로세서는 상기 복수의 추정값으로부터 임계값을 계산하도록 구성되고,상기 프로세서는 상기 임계값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 프로세서는 상기 복수의 추정값의 최소값 및 상기 복수의 추정값의 최 대값을 계산하도록 구성되고,상기 프로세서는 상기 최소값 및 상기 최대값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는디지털 이미지 센서.
- 제 1 항에 있어서,상기 현재 센서값, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값을 상기 어레이로부터 수신하도록 구성된 버퍼를 더 포함하되,상기 버퍼는 상기 현재 센서값, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값을 상기 프로세서에 제공하도록 구성되는디지털 이미지 센서.
- 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 2 픽셀을 포함하는 픽셀 어레이의 결함 픽셀을 검출하는 방법에 있어서,상기 복수의 제 1 센서 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하는 단계와,상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 파일이 결함이 있는지 판정하는 단계를 포함하는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 10 항에 있어서,상기 복수의 제 1 센서값 중 하나를 상기 복수의 강도 비 중 하나와 곱해서 상기 복수의 추정값 각각을 생성하는 단계를 더 포함하는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 10 항에 있어서,상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비를 계산하는 단계를 더 포함하는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 12 항에 있어서,상기 제 1 값은 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 1 그룹으로부터 선택되고,상기 제 2 값은 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 10 항에 있어서,상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하는 단계를 더 포함하는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 14 항에 있어서,상기 복수의 추정값 중 하나는 상기 복수의 추정값의 평균값, 최대값과 최소값을 제외한 평균값 및 중앙값으로 이루어진 그룹으로부터 선택되는픽셀 어레이의 결함 픽셀 검출 방법.
- 제 10 항에 있어서,상기 복수의 추정값의 최소값 및 상기 복수의 추정값의 최대값을 계산하는 단계와,상기 최소값 및 상기 최대값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정는 단계를 더 포함하는픽셀 어레이의 결함 픽셀 검출 방법.
- 디지털 이미지 시스템과 처리 시스템을 포함하는 시스템에 있어서,상기 디지털 이미지 시스템은 이미지와 관련된 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 상기 이미지와 관련된 복수의 제 1 센서값을 생성하도록 구성된 상기 제 1 색평면의 복수의 제 1 픽셀 및 상기 이미지와 관련된 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함하도록 구성되어 있으며 행 및 열로 배열된 픽셀의 어레이를 구비하고, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 계산하도록 구성되며, 상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 픽셀이 결함이 있는 판정하도록 구성되고,상기 처리 시스템은 상기 디지털 이미지 시스템으로부터 상기 이미지를 수신하도록 구성되는시스템.
- 제 17 항에 있어서,상기 디지털 이미지 시스템은 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비 각각을 생성하도록 구성되는시스템.
- 제 18 항에 있어서,상기 제 1 값은 상기 복수의 제 2 센서값의 상기 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 1 그룹으로부터 선택되고,상기 제 2 값은 상기 복수의 제 2 센서값의 상기 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는시스템.
- 제 17 항에 있어서,상기 디지털 이미지 시스템은 상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하도록 구성되는시스템.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/007,979 US7460688B2 (en) | 2004-12-09 | 2004-12-09 | System and method for detecting and correcting defective pixels in a digital image sensor |
US11/007,979 | 2004-12-09 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20060065529A true KR20060065529A (ko) | 2006-06-14 |
Family
ID=35516881
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020050119772A KR20060065529A (ko) | 2004-12-09 | 2005-12-08 | 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 |
Country Status (6)
Country | Link |
---|---|
US (1) | US7460688B2 (ko) |
JP (1) | JP2006166450A (ko) |
KR (1) | KR20060065529A (ko) |
CN (1) | CN1787615A (ko) |
GB (1) | GB2421138A (ko) |
TW (1) | TW200620979A (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101444013B1 (ko) * | 2012-03-01 | 2014-09-23 | 애플 인크. | 이미지 처리를 위한 시스템 및 방법 |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102006050864B4 (de) * | 2005-10-31 | 2015-08-20 | Hitachi Kokusai Electric Inc. | Verfahren und Vorrichtung zur Korrektur fehlerhafter Pixel für eine bildgebende Festkörpervorrichtung |
EP2028871B1 (en) | 2006-06-15 | 2018-01-24 | Godo Kaisha IP Bridge 1 | Radio transmission device and radio transmission method |
US7830565B2 (en) * | 2006-06-27 | 2010-11-09 | Motorola, Inc. | Image capture device with rolling band shutter |
US8213710B2 (en) * | 2006-11-28 | 2012-07-03 | Youliza, Gehts B.V. Limited Liability Company | Apparatus and method for shift invariant differential (SID) image data interpolation in non-fully populated shift invariant matrix |
US8040558B2 (en) | 2006-11-29 | 2011-10-18 | Youliza, Gehts B.V. Limited Liability Company | Apparatus and method for shift invariant differential (SID) image data interpolation in fully populated shift invariant matrix |
CN100573315C (zh) * | 2007-04-04 | 2009-12-23 | 鸿富锦精密工业(深圳)有限公司 | 相机模块污点测试系统及方法 |
CN101588447B (zh) * | 2008-05-23 | 2011-04-20 | 比亚迪股份有限公司 | 一种图像坏点的校正方法、系统及图像传感器 |
US8237825B2 (en) * | 2008-12-11 | 2012-08-07 | Exelis, Inc. | Pixel replacement using five nearest neighbors |
CN101770636B (zh) * | 2008-12-30 | 2012-09-26 | 比亚迪股份有限公司 | 图像噪声去除方法及装置 |
US8698015B2 (en) * | 2009-12-18 | 2014-04-15 | Intel Corporation | Compensating for multi-touch signal bias drift in touch panels |
JP5697353B2 (ja) | 2010-03-26 | 2015-04-08 | キヤノン株式会社 | 画像処理装置、画像処理装置の制御方法及びプログラム |
US8351696B2 (en) * | 2010-09-17 | 2013-01-08 | Foveon, Inc. | Correcting defective pixels in digital color images |
JP5737929B2 (ja) * | 2010-12-22 | 2015-06-17 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
TWI448154B (zh) * | 2011-01-03 | 2014-08-01 | Himax Imaging Inc | 影像感測壞像素點的檢測方法 |
JP6046927B2 (ja) * | 2011-08-09 | 2016-12-21 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
US8799647B2 (en) | 2011-08-31 | 2014-08-05 | Sonic Ip, Inc. | Systems and methods for application identification |
CN103813159B (zh) * | 2012-11-09 | 2017-04-12 | 原相科技股份有限公司 | 检测图像传感器的方法以及相关装置 |
JP6002599B2 (ja) * | 2013-02-22 | 2016-10-05 | 日本電信電話株式会社 | センサデータ統合装置、センサデータ統合方法及びプログラム |
DE102013209165A1 (de) | 2013-05-17 | 2014-11-20 | Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg | Pixelkorrekturverfahren |
GB2521408B (en) * | 2013-12-18 | 2015-12-16 | Imagination Tech Ltd | Defective pixel fixing |
US9860429B1 (en) * | 2016-06-30 | 2018-01-02 | Apple Inc. | Scaling of image data in sensor interface based on detection of defective pixels |
WO2023134846A1 (en) * | 2022-01-12 | 2023-07-20 | Dream Chip Technologies Gmbh | Method and image processor unit for detecting defective pixels |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0828811B2 (ja) | 1988-05-10 | 1996-03-21 | 富士写真フイルム株式会社 | 画像入力装置 |
US5652621A (en) * | 1996-02-23 | 1997-07-29 | Eastman Kodak Company | Adaptive color plane interpolation in single sensor color electronic camera |
US6625318B1 (en) * | 1998-11-13 | 2003-09-23 | Yap-Peng Tan | Robust sequential approach in detecting defective pixels within an image sensor |
FR2786648B1 (fr) * | 1998-11-30 | 2001-01-05 | Commissariat Energie Atomique | Procede de correction des defauts d'images issues d'un detecteur de rayons x ou y de type matriciel |
US6377702B1 (en) * | 1999-12-08 | 2002-04-23 | Sony Corporation | Color cast detection and removal in digital images |
US6603552B1 (en) * | 1999-12-22 | 2003-08-05 | Xillix Technologies Corp. | Portable system for detecting skin abnormalities based on characteristic autofluorescence |
JP2002010274A (ja) * | 2000-06-20 | 2002-01-11 | Olympus Optical Co Ltd | カラー画像処理装置 |
US6275144B1 (en) * | 2000-07-11 | 2001-08-14 | Telenetwork, Inc. | Variable low frequency offset, differential, ook, high-speed power-line communication |
US7280090B2 (en) * | 2000-12-22 | 2007-10-09 | Electronics For Imaging, Inc. | Methods and apparatus for repairing inoperative pixels in a display |
JP4485087B2 (ja) * | 2001-03-01 | 2010-06-16 | 株式会社半導体エネルギー研究所 | 半導体装置の動作方法 |
US7209168B2 (en) * | 2001-04-11 | 2007-04-24 | Micron Technology, Inc. | Defective pixel correction method and system |
US6737625B2 (en) * | 2001-06-28 | 2004-05-18 | Agilent Technologies, Inc. | Bad pixel detection and correction in an image sensing device |
US6618185B2 (en) * | 2001-11-28 | 2003-09-09 | Micronic Laser Systems Ab | Defective pixel compensation method |
JP4154156B2 (ja) * | 2002-02-08 | 2008-09-24 | ソニーマニュファクチュアリングシステムズ株式会社 | 欠陥分類検査装置 |
US7283164B2 (en) * | 2002-09-18 | 2007-10-16 | Micron Technology, Inc. | Method for detecting and correcting defective pixels in a digital image sensor |
DE602005020867D1 (de) | 2004-02-09 | 2010-06-10 | Noritsu Koki Co Ltd | Bildverarbeitungsvorrichtung und Bildverarbeitungsverfahren zur Korrektur von Bilddaten |
-
2004
- 2004-12-09 US US11/007,979 patent/US7460688B2/en active Active
-
2005
- 2005-07-25 TW TW094125108A patent/TW200620979A/zh unknown
- 2005-09-20 CN CNA2005101032689A patent/CN1787615A/zh active Pending
- 2005-11-14 GB GB0523167A patent/GB2421138A/en not_active Withdrawn
- 2005-12-02 JP JP2005349186A patent/JP2006166450A/ja not_active Withdrawn
- 2005-12-08 KR KR1020050119772A patent/KR20060065529A/ko not_active Application Discontinuation
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101444013B1 (ko) * | 2012-03-01 | 2014-09-23 | 애플 인크. | 이미지 처리를 위한 시스템 및 방법 |
US8976161B2 (en) | 2012-03-01 | 2015-03-10 | Apple Inc. | Systems and methods for image processing |
Also Published As
Publication number | Publication date |
---|---|
GB0523167D0 (en) | 2005-12-21 |
GB2421138A (en) | 2006-06-14 |
US20060126127A1 (en) | 2006-06-15 |
US7460688B2 (en) | 2008-12-02 |
JP2006166450A (ja) | 2006-06-22 |
CN1787615A (zh) | 2006-06-14 |
TW200620979A (en) | 2006-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR20060065529A (ko) | 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 | |
US7283164B2 (en) | Method for detecting and correcting defective pixels in a digital image sensor | |
CN110447061B (zh) | 亮度补偿方法、亮度补偿装置、显示装置及存储介质 | |
US7564491B2 (en) | Pixel defect detecting/correcting device and pixel defect detecting/correcting method | |
US7711261B2 (en) | Imaging device, camera and image processing method | |
US7812881B2 (en) | Imaging device, camera and image processing method | |
US8442345B2 (en) | Method and apparatus for image noise reduction using noise models | |
US7689059B2 (en) | Image processing method and image processing circuit | |
US8253828B2 (en) | Image capture device including edge direction determination unit, and image processing method for the same | |
US8269880B2 (en) | Imaging device, camera and image processing method | |
JP4194336B2 (ja) | 半導体集積回路、欠陥画素補正方法、及び画像プロセッサ | |
TW201419853A (zh) | 影像處理器及其影像壞點偵測方法 | |
TWI492621B (zh) | 適應性影像處理方法及其相關裝置 | |
US9147115B2 (en) | Method and device for detecting an object in an image | |
CN110740314B (zh) | 彩色线阵相机坏点校正方法及系统 | |
JP4523629B2 (ja) | 撮像装置 | |
US20160219231A1 (en) | Dark current gradient estimation using optically black pixels | |
US20140355872A1 (en) | Method for determining interpolating direction for color demosaicking | |
TW201540074A (zh) | 色彩校正裝置以及方法 | |
US8189094B2 (en) | Image processing apparatus and image processing method | |
CN112752041A (zh) | Cmos图像传感器的校正方法、系统及图像处理设备 | |
US20230291880A1 (en) | Image processing apparatus | |
US20240163562A1 (en) | Ambient light sensing using image sensor | |
JP2011259087A (ja) | カラーターゲット位置決定装置 | |
JP2021064853A (ja) | 欠陥画素検出方法、欠陥画素検出装置、プログラム、及びイメージセンサ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
N231 | Notification of change of applicant | ||
N231 | Notification of change of applicant | ||
N231 | Notification of change of applicant | ||
WITN | Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid |