KR20060065529A - 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 - Google Patents

디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 Download PDF

Info

Publication number
KR20060065529A
KR20060065529A KR1020050119772A KR20050119772A KR20060065529A KR 20060065529 A KR20060065529 A KR 20060065529A KR 1020050119772 A KR1020050119772 A KR 1020050119772A KR 20050119772 A KR20050119772 A KR 20050119772A KR 20060065529 A KR20060065529 A KR 20060065529A
Authority
KR
South Korea
Prior art keywords
value
sensor
values
sensor values
pixel
Prior art date
Application number
KR1020050119772A
Other languages
English (en)
Inventor
존 에이치 스탠백
쑤에메이 장
라마크리쉬나 카카랄라
본드 유 퐁 잉
Original Assignee
애질런트 테크놀로지스, 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애질런트 테크놀로지스, 인크. filed Critical 애질런트 테크놀로지스, 인크.
Publication of KR20060065529A publication Critical patent/KR20060065529A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H04N25/683Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects by defect estimation performed on the scene signal, e.g. real time or on the fly detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

픽셀의 어레이 및 프로세서를 포함하는 디지털 이미지 센서가 제공된다. 이 픽셀의 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함한다. 프로세서는 복수의 제 1 센서값 및 복수의 제 2 센서값과 관련된 복수의 강도 비를 생성하도록 구성되며, 복수의 추정값 및 현재 센서값을 사용해서 현재 픽셀이 결함이 있는지 판정하도록 구성된다.

Description

디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법 및 시스템{SYSTEM AND METHOD FOR DETECTING AND CORRECTING DEFECTIVE PIXELS IN A DIGITAL IMAGE SENSOR}
도 1은 결함 픽셀을 검출해서 수정하는 디지털 이미징 시스템의 일 실시예를 도시하는 블록도,
도 2는 버퍼의 센서값의 예를 도시하는 도면,
도 3은 불량 픽셀 수정 모듈의 일 예를 도시하는 블록도,
도 4는 결함 픽셀을 검출해서 수정하는 방법의 일 실시예를 도시하는 흐름도,
도 5는 정보 시스템의 일 실시예를 도시하는 블록도.
본 출원은 2002년 9월 18일에 출원된 미국 특허 출원 제 10/246,124호 "METHOD FOR DETECTING AND CORRECTING DEFECTIVE PIXELS IN A DIGITAL IMAGE SENSOR"와 관련된다. 이 미국 특허 출원은 본 발명의 양수인에게 양도되었으며, 여기에 참조로서 포함된다.
많은 전자 장치가 전자 이미지 센서를 포함하고 있다. 전자 이미지 센서는 주로 CCD(전하 결합 소자) 및 CMOS-APS(상보형 금속 산화물 반도체-액티브 픽셀 센서) 중 하나이다. 각각의 전자 이미지 센서의 타입은 일정 패턴으로 배열된 광 검출기(즉, 픽셀)의 어레이를 포함한다. 각각의 픽셀은 이미지에 노출되는 것에 반응해서 광의 파장 범위의 세트 중 하나에 대해서 광의 강도를 측정한다. 이 범위의 세트는 각각 사람의 시신경계가 인지하는 색과 관련되어 있다.
불행하게도, 전자 이미지 센서가 결함 픽셀을 포함할 수 있다. 결함 픽셀이란 이미지로부터 노출된 광에 부적절하게 반응해서, 부정확한 센서값을 생성하는 픽셀이다. 결함 픽셀은 비정상적으로 높은(예컨대, 최대 한계 혹은 거의 최대의 한계의) 출력을 가진 스턱 하이 픽셀(stuck high pixel)이나, 비정상적으로 낮은(예컨대, 최저 한계 혹은 거의 최저 한계의) 출력을 가진 스턱 로우 픽셀이나, 같은 광 조건에 노출된 이웃 픽셀과는 현저히 다른 비정상적으로 민감한 픽셀이 될 수 있다.
바람직하게는 전자 이미지 센서로부터 결함 픽셀을 정확하게 검출해서 수정할 수 있어야 한다.
일 실시예는 픽셀의 어레이 및 프로세서를 포함하는 디지털 이미지 센서를 제공한다. 이 픽셀의 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함한다. 이 프로세서는 복수의 제 1 센서값 및 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하도록 구성되고, 이 프로세서는 복수의 추정값 및 현재 센서값을 사용해서 현재 픽셀이 결함인지 판정하도록 구성된다.
상세한 설명에서, 이 설명의 일부를 이루며 본 발명이 실시될 수 있는 특정 실시예를 예로서 도시하는 첨부 도면을 참조한다. 여기서, "상부", "바닥부", "전면", "후면", "선단", "후단"과 같은 방향 관련 용어는 도시된 도면의 방향을 기준으로 사용된다. 본 발명의 실시예의 구성 요소들이 많은 각각의 방향으로 위치될 수 있으므로, 이 방향 관련 용어는 예시의 목적으로 사용되는 것으로 한정하는 것은 아니다. 본 발명의 범주를 벗어나지 않고 다른 실시예가 사용될 수 있으며, 구조 또는 논리적인 변화가 있을 수 있다는 것을 이해할 것이다. 따라서, 이어지는 상세한 설명은 한정의 의미로 이루어진 것이 아니며, 본 발명의 범주는 첨부된 청구항에 의해 한정된다.
도 1은 결함 픽셀을 검출해서 수정하는 디지털 이미징 시스템(10)의 일 실시예를 도시하는 블록도이다. 디지털 이미징 시스템(10)은 복수의 픽셀(102)을 구비한 센서(100), 버퍼(110) 및 불량 픽셀 수정(BPC) 프로세서(120)를 포함한다.
센서(100)는 CCD(전하 결합 소자), CMOS-APS(상보형 금속 산화물 반도체-액티브 픽셀 센서) 또는 다른 적절한 센서를 포함한다. 센서(100)는 행 및 열로 배열된 픽셀(102)의 2차원 어레이를 포함한다. 센서(100)는 컬러 픽셀 어레이(CFA)로 덮여있어서, 각각의 픽셀(102)이 오직 하나의 색을, 즉 색의 하나의 파장 범위만을 감지할 수 있다. 일 실시예에서, CFA는 색차 색(예컨대, 적색과 청색)이 휘도 색(예컨대, 녹색)의 바둑판 형상 사이에 산재되어 있는 Bayer CFA이다. 다른 실시예에서, 다른 색 표현(예컨대, 옐로우, 시안 및 마젠타)을 사용하는 다른 CFA가 사용될 수 있다. 센서(100)는 이미지로부터의 광에 노출되는 것에 반응해서 각각의 픽셀(102)의 이미지와 관련된 센서값을 생성한다. 센서(100)는 센서값을 버퍼(110)에 제공한다.
버퍼(110)는 센서(100) 및 BPC 프로세서(120)에 동작가능하게 연결된 휘발성 또는 비휘발성 저장 장치(예컨대, RAM 또는 플래시 메모리)를 포함한다. 버퍼(110)는 BPC 프로세서(120)와 같은 기판에 집적될 수도 있고, 그 외부에 위치될 수도 있다. 버퍼(110)는 센서로부터 수신된 센서값을 저장해서 센서값을 BPC 프로세서(120)에 제공하도록 구성된다.
BPC 프로세서(120)는 여기 설명되는 기능을 수행하도록 구성된 하드웨어 또는 소프트웨어 구성 요소의 임의의 조합을 포함한다. BPC 모듈의 임의의 소프트웨어 구성 요소가 처리 시스템에 의해 수행될 수 있도록 처리 시스템이 액세스할 수 있는 휴대형 또는 비휴대형 매체에 저장될 수 있다. BPC 프로세서(120)는 센서(100)와 함께 같은 기판에 집적될 수도 있고, 그 외부에 위치될 수도 있다. BPC 프로세서(120)는 버퍼(110)로부터의 센서값을 수신해서 결함 픽셀(102)과 관련된 센서값을 검출해서 수정한다.
결함 픽셀은 이미지로부터 노출된 광에 대해서 부적절하게 응답해서 부정확한 센서값을 생성하는 픽셀(102)이다. 결함 픽셀은 비정상적으로 높은(예컨대, 최대 한계 혹은 거의 최대의 한계의) 출력을 가진 스턱 하이 픽셀(stuck high pixel)이나, 비정상적으로 낮은(예컨대, 0 혹은 거의 0) 출력을 가진 스턱 로우 픽셀이나, 같은 광 조건에 노출된 이웃 픽셀과는 현저히 다른 비정상적으로 민감한 픽셀이 될 수 있다.
동작시에, 센서(100)는 이미지로부터의 광에 노출되는 것에 반응해서 이미지와 관련된 센서값의 블록을 버퍼(110)에 제공한다. BPC 프로세서(120)는 버퍼(110)로부터의 센서값에 액세스해서 센서(100)의 결함 픽셀(102)과 관련된 센서값을 검출해서 수정하며, 이에 대해서는 더 상세하게 후술될 것이다.
도 2는 버퍼(110)의 센서값의 예를 도시하는 도면이다. 도 2에서, 버퍼(110)는 현재의 센서값의 행(202A), 현재 행(202A)에 앞선 2개의 이웃하는 센서값의 행(202B) 및 현재 행(202A)에 후속하는 센서값의 2개의 이웃하는 행(202C)을 포함한다. BPC 프로세서(120)가 보고 있는 현재 픽셀의 센서값(204)은 "Z"로 표시되어 있다. 현재 픽셀과 같은 색 평면에 있는 픽셀(102)로부터 획득된 센서값(206)은 "Xn"으로 표시되어 있고, 현재 픽셀과는 다른 색 평면에 있는 픽셀(102)로부터 획득된 센서(208)는 "Yn"으로 표시되어 있다. 센서값(206, 208)과 관련된 픽셀은 모두 현재 픽셀의 이웃하는 픽셀이라고 한다. 현재 픽셀이 결함 픽셀인지 판정하 는 데 사용되지 않는 센서값은 도시되지 않는다.
도 3에 도시된 바와 같은 BPC 프로세서(120)의 일 실시예를 설명하기 위해서 도 2에 도시된 센서값의 5×5 블록이 도시되어 있다. 도 3에서, BPC 프로세서(120)는 강도 로직(302), 추정 로직(304), 범위 로직(306), 비교 로직(308), 평균 로직(310), 임계 로직(312) 및 대치 로직(314)을 포함한다. BPC 프로세서(120)의 각각의 로직 블록의 기능이 도 4를 참조로 설명될 것이다.
도 2, 3 및 4를 함께 참조하면, 현재 픽셀 및 이웃 픽셀의 센서값은 블록(402)에 도시된 바와 같이 BPC 프로세서(120)에 의해 버퍼(110)로부터 수신된다. 더 상세하게, 이웃하는 픽셀의 센서값은 강도 로직(302)에 의해 버퍼(110)로부터 수신되고, 현재 픽셀의 센서값은 비교 로직(308) 및 대치 로직(314)에 의해 버퍼(110)로부터 수신된다.
블록(404)에 표시된 바와 같이 임계 파라미터가 BPC 프로세서(120)에 의해 설정된다. 임계 파라미터(t1, t2)가 BPC 프로세서(120) 내에서 혹은 BPC 프로세서(120) 외부에서 서로 액세스되어서 임계 로직(312)으로 제공된다.
BPC 프로세서(120)는 블록(406)에 표시된 바와 같이 다른 색의 이웃 픽셀의 강도 비를 계산한다. 더 상세하게, 강도 로직(302)은 현재 센서값과는 다른 색 평면의 이웃 픽셀의 가로, 세로 및 대각 강도 평균을 계산하고, 이 강도 평균을 사용해서 강도 비를 생성한다. 강도 로직(302)은 같은 행 및 다른 열로부터의 센서값을 사용해서 가로 강도 평균을 계산하고, 강도 로직(302)은 다른 행 및 같은 열로부터의 센서값을 사용해서 세로 강도 평균을 계산하며, 강도 로직(302)은 다른 행 및 다른 열로부터의 센서값을 사용해서 대각 강도 평균을 계산한다. 강도 로직(302)에 의해 계산된 강도 평균 및 강도 비의 예가 아래의 식 I 내지 Ⅷ에 나타나 있다. 강도 로직(302)은 강도 로직을 추정 로직(304)에 제공한다.
블록(408)에 나타난 바와 같이 BPC 프로세서(120)는 다른 색 강도 비 및 같은 색의 이웃 픽셀을 사용해서 추정값을 계산한다. 더 상세하게는 추정 로직(304)은 강도 로직(302)으로부터 강도 비를 수신해서, 다음과 같은 식 I 내지 Ⅷ을 사용해서 8개의 추정값(E1 내지 E8)을 계산한다.
식 I
Figure 112005071832066-PAT00001
식 Ⅱ
Figure 112005071832066-PAT00002
식 Ⅲ
Figure 112005071832066-PAT00003
식 Ⅳ
Figure 112005071832066-PAT00004
식 Ⅴ
Figure 112005071832066-PAT00005
식 Ⅵ
Figure 112005071832066-PAT00006
식 Ⅶ
Figure 112005071832066-PAT00007
식 Ⅷ
Figure 112005071832066-PAT00008
식 I 내지 Ⅷ에 표시된 바와 같이 추정 로직(304)은 현재 센서값과 같은 색 평면으로부터의 센서값을 현재의 센서값과는 다른 색 평면으로부터의 센서의 2개의 강도 평균의 강도 비와 곱해서 8개의 추정값(E1 내지 E8)을 계산한다. 다른 실시예에서, 강도 비는 강도 평균, 중앙값(median) 또는 최대값과 최소값을 제외한 평균을 사용해서 계산될 수 있다. 식 I 내지 Ⅷ을 사용해서 계산된 8개의 추정값(E1 내지 E8) 각각에 대해서, 식 I 내지 Ⅷ을 사용해서 계산된 추정값이 최대값을 초과하면, 평균 로직(304)은 추정값을 최대값과 같게 설정한다. 추정 로직(304)은 8개의 추정값(E1 내지 E8)을 범위 로직(306) 및 평균 로직(310)에 제공한다. 강도 비의 분모값이 0이면, 부정확한 값이 나오지 않도록 다른 값이 0을 대치할 수 있다.
블록(410)에 나타난 바와 같이 BPC 프로세서(120)는 최대값, 최소값 및 평균 추정값을 판정한다. 더 상세하게, 범위 로직(306)은 8개의 추정값(E1 내지 E8)을 추정 로직(304)으로부터 수신해서 값(E1 내지 E8)의 최소 추정값(Emin) 및 최대 추정값(Emax)을 판정한다. 범위 로직(306)은 최소 추정값(Emin) 및 최대 추정값(Emax)을 비교 로직(308)에 제공한다. 평균 로직(310)은 추정 로직(304)으로부터 8개의 추정값(E1 내지 E8)을 수신해서, 8개의 값(E1 내지 E8)의 평균 추정값(Emean)을 판정한다. 평균 추정값(Emean)은 평균, 중앙값 또는 최대값과 최소값을 제외한 평균을 포함할 수 있다. 평균 로직(310)은 평균 추정값(Emean)을 임계 로직(312) 및 대치 로직(314)에 제공한다.
블록(412)에 나타난 바와 같이 BPC 프로세서(120)는 평균 추정값 및 임계값 파라미터를 사용해서 임계값을 계산한다. 더 상세하게는 임계 로직(312)은 평균 로직(310)으로부터 평균 추정값(Emean)을 받아서 임계 파라미터(t1, t2)를 사용해서, 식 Ⅸ을 통해 임계값(Th)을 계산한다.
식 Ⅸ
Figure 112005071832066-PAT00009
임계 로직(312)은 임계값(Th)을 비교 로직(308)에 제공한다.
블록(414)에 나타난 바와 같이 BPC 프로세서(120)는 임계값을 사용해서 최대 및 최대값을 조정해서 로우값 및 하이값을 각각 판정한다. 더 상세하게, 비교 로직(308)은 다음 식 Ⅹ에 나타난 바와 같이 범위 로직(306)으로부터 수신된 최소 추정값(Emin)에서, 임계 로직(312)으로부터 수신된 임계값(Th)을 빼서 로우값을 구한다.
식 Ⅹ
Figure 112005071832066-PAT00010
또한, 비교 로직(308)은 다음 식 ⅩI에 나타난 바와 같이 임계 로직(312)으로부터 수신된 임계값(Th)에, 범위 로직(306)으로부터 수신된 최대 추정값(Emax)을 더해서 하이값을 구한다.
식 ⅩI
Figure 112005071832066-PAT00011
블록(416)에 나타난 바와 같이 BPC 프로세서(120)는 현재 센서값이 로우값보다 낮은지 판정한다. 더 상세하게 비교 로직(308)은 현재 센서값을 식 Ⅹ을 사용해서 구한 로우값과 비교해서 현재 센서값이 로우값보다 낮은지 판정한다. 현재 센서값이 로우값보다 낮다면, 현재 센서값과 관련된 픽셀(102)은 결함이 있는 것으로 판정되고, BPC 프로세서(120)는 블록(418)에 나타난 바와 같이 현재 센서값의 위치에 평균 추정값을 제공한다. 현재 센서값이 로우값보다 낮다고 평균 로직(308)이 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 생성하고, 이 결함 신호(DEF)를 대치 로직(314)에 제공한다. 결함 신호(DEF)를 수신한 것에 응답해서, 대치 로직(314)은 버퍼(110)로부터 제공된 현재 센서값(Z) 대신 평균 로직(314)으로부터 수신된 평균 추정값(Emean)을 현재 센서값(Z')으로서 제공한다.
블록(420)에 표시된 바와 같이 현재 센서값이 로우값보다 낮지 않다면, BPC 프로세서(120)는 현재 센서값이 하이값보다 높은지 판정한다. 더 상세하게 비교 로직(308)은 현재의 센서값을 식 XI를 사용해서 구해진 하이값과 비교해서 현재 센서값이 하이값보다 큰지 판정한다. 현재 센서값이 하이값보다 크면, 현재 센서값과 관련된 픽셀(102)은 결함이 있는 것으로 판정되고, 블록(418)에 나타난 바와 같이 BPC 프로세서(120)는 평균 추정값을 현재 센서값의 위치에 제공한다. 현재 센서값이 하이값보다 크다고 비교 로직(308)이 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 생성하고, 이 결함 신호(DEF)를 대치 로직(314)에 제공한다. 결함 신호(DEF)를 수신하는 것에 응답해서, 대치 로직(314)은 버퍼(110)로 부터 제공된 현재 센서값(Z) 대신 평균 로직(314)으로부터 수신된 평균 추정값(Emean)을 현재 센서값(Z')으로서 제공한다.
현재 센서값이 하이값보다 크지 않으면, 현재 센서값과 관련된 픽셀(102)은 결함이 없는 것으로 판정되고, BPC 프로세서(120)는 블록(422)에 나타난 바와 같이 현재 센서값을 제공한다. 현재 센서값이 하이값보다 크지 않다고 비교 로직(308)에서 판정하는 것에 응답해서, 비교 로직(308)은 결함 신호(DEF)를 대치 로직(314)에 제공하지 않는다. 따라서, 대치 로직(314)은 버퍼(110)로부터 제공된 현재 센서값(Z)을 현재 센서값(Z')으로 제공한다.
도 5는 정보 시스템(500)의 일실시예를 나타내는 블록도이다. 정보 시스템(500)은 디지털 이미징 시스템(10), 프로세싱 시스템(502) 및 하나 이상의 선택적인 기능 유닛(504)을 포함하고 있다.
정보 시스템(500)은 디지털 이미징 시스템(10)을 주 시스템으로 혹은 보조 시스템으로 내부 혹은 외부에 포함하는 임의의 시스템이 될 수 있다. 예컨대, 정보 시스템(500)은 디지털 스틸 또는 비디오 카메라, 셀룰러폰, PDA, 휴대형(예컨대, 랩톱) 또는 비휴대형(예컨대, 데스크톱 또는 서버) 컴퓨터 시스템 또는 의료용 이미징 장치가 될 수 있다.
처리 시스템(502)은 디지털 이미징 시스템(10) 및 임의의 기능 유닛(504)의 동작을 제어 또는 관리한다. 처리 시스템(502)은 디지털 이미징 시스템(10)으로부터 기능 유닛(504)으로 정보를 제공할 수 있고, 또한 기능 유닛(504)으로부터 디지 털 이미징 시스템으로 정보를 제공할 수 있다. 처리 시스템(502)은, 프로세서 또는 컨트롤러에 의해 수행가능한 소프트웨어를 저장하는 하나 이상의 프로세서 또는 컨트롤러 및 하나 이상의 저장 장치와 같은 하드웨어와 소프트웨어 구성요소의 임의의 조합을 포함할 수 있다.
기능 유닛(504)은 정보 시스템(500)의 내부 또는 외부의, 하드웨어와 소프트웨어 구성요소의 임의의 조합을 포함할 수 있다. 기능 유닛(504)의 예로는 다른 정보 시스템과 통신하도록 구성된 네트워킹 또는 통신 장치(예컨대, 모뎀 또는 셀룰러폰 송수신기) 및 디지털 이미징 시스템(10)으로부터의 이미지를 디스플레이하는 디스플레이 장치를 들 수 있다.
비록, 특정 실시예가 여기서 설명되고 개시되었지만, 당업자라면 본 발명의 범주를 벗어남없이, 다양한 대안의 및/또는 동등한 구현예가 여기 도시되고 설명된 특정 실시예를 대치할 수 있다는 것을 이해할 것이다. 본 출원은 여기 설명된 특정 실시예의 임의의 개조 또는 수정을 커버하도록 의도된 것이다. 따라서, 본 발명은 청구항 및 그 동등물에 의해서만 한정되도록 의도되었다.
본 발명을 통해서, 전자 이미지 센서로부터 결함 픽셀을 정확하게 검출해서 수정할 수 있다.

Claims (20)

  1. 픽셀 어레이와 프로세서를 포함하는 디지털 이미지 센서에 있어서,
    상기 픽셀 어레이는 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 상기 제 1 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함하고,
    상기 프로세서는 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하도록 구성되고, 또한 상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는
    디지털 이미지 센서.
  2. 제 1 항에 있어서,
    상기 프로세서는 상기 복수의 제 1 센서값 중 하나를 상기 복수의 강도 비 중 하나와 곱해서 상기 복수의 추정값 각각을 생성하도록 구성되는
    디지털 이미지 센서.
  3. 제 1 항에 있어서,
    상기 프로세서는 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비 각각을 생성하도록 구성되는
    디지털 이미지 센서.
  4. 제 3 항에 있어서,
    상기 제 1 값은 상기 복수의 제 2 센서값의 상기 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값(median)으로 이루어진 제 1 그룹으로부터 선택되고,
    상기 제 2 값은 상기 복수의 제 2 센서값의 상기 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는
    디지털 이미지 센서.
  5. 제 1 항에 있어서,
    상기 프로세서는 상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하도록 구성되는
    디지털 이미지 센서.
  6. 제 5 항에 있어서,
    상기 복수의 추정값 중 하나는 상기 복수의 추정값의 평균값, 최대값과 최소값을 제외한 평균값 및 중앙값으로 이루어진 그룹으로부터 선택되는
    디지털 이미지 센서.
  7. 제 1 항에 있어서,
    상기 프로세서는 상기 복수의 추정값으로부터 임계값을 계산하도록 구성되고,
    상기 프로세서는 상기 임계값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는
    디지털 이미지 센서.
  8. 제 1 항에 있어서,
    상기 프로세서는 상기 복수의 추정값의 최소값 및 상기 복수의 추정값의 최 대값을 계산하도록 구성되고,
    상기 프로세서는 상기 최소값 및 상기 최대값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정하도록 구성되는
    디지털 이미지 센서.
  9. 제 1 항에 있어서,
    상기 현재 센서값, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값을 상기 어레이로부터 수신하도록 구성된 버퍼를 더 포함하되,
    상기 버퍼는 상기 현재 센서값, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값을 상기 프로세서에 제공하도록 구성되는
    디지털 이미지 센서.
  10. 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 복수의 제 1 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 1 픽셀 및 복수의 제 2 센서값을 생성하도록 구성된 제 1 색평면의 복수의 제 2 픽셀을 포함하는 픽셀 어레이의 결함 픽셀을 검출하는 방법에 있어서,
    상기 복수의 제 1 센서 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 생성하는 단계와,
    상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 파일이 결함이 있는지 판정하는 단계를 포함하는
    픽셀 어레이의 결함 픽셀 검출 방법.
  11. 제 10 항에 있어서,
    상기 복수의 제 1 센서값 중 하나를 상기 복수의 강도 비 중 하나와 곱해서 상기 복수의 추정값 각각을 생성하는 단계를 더 포함하는
    픽셀 어레이의 결함 픽셀 검출 방법.
  12. 제 10 항에 있어서,
    상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비를 계산하는 단계를 더 포함하는
    픽셀 어레이의 결함 픽셀 검출 방법.
  13. 제 12 항에 있어서,
    상기 제 1 값은 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 1 그룹으로부터 선택되고,
    상기 제 2 값은 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는
    픽셀 어레이의 결함 픽셀 검출 방법.
  14. 제 10 항에 있어서,
    상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하는 단계를 더 포함하는
    픽셀 어레이의 결함 픽셀 검출 방법.
  15. 제 14 항에 있어서,
    상기 복수의 추정값 중 하나는 상기 복수의 추정값의 평균값, 최대값과 최소값을 제외한 평균값 및 중앙값으로 이루어진 그룹으로부터 선택되는
    픽셀 어레이의 결함 픽셀 검출 방법.
  16. 제 10 항에 있어서,
    상기 복수의 추정값의 최소값 및 상기 복수의 추정값의 최대값을 계산하는 단계와,
    상기 최소값 및 상기 최대값을 사용해서 상기 현재 픽셀이 결함이 있는지 판정는 단계를 더 포함하는
    픽셀 어레이의 결함 픽셀 검출 방법.
  17. 디지털 이미지 시스템과 처리 시스템을 포함하는 시스템에 있어서,
    상기 디지털 이미지 시스템은 이미지와 관련된 현재 센서값을 생성하도록 구성된 제 1 색평면의 현재 픽셀, 상기 이미지와 관련된 복수의 제 1 센서값을 생성하도록 구성된 상기 제 1 색평면의 복수의 제 1 픽셀 및 상기 이미지와 관련된 복수의 제 2 센서값을 생성하도록 구성된 제 2 색평면의 복수의 제 2 픽셀을 포함하도록 구성되어 있으며 행 및 열로 배열된 픽셀의 어레이를 구비하고, 상기 복수의 제 1 센서값 및 상기 복수의 제 2 센서값과 관련된 복수의 강도 비를 사용해서 복수의 추정값을 계산하도록 구성되며, 상기 복수의 추정값 및 상기 현재 센서값을 사용해서 상기 현재 픽셀이 결함이 있는 판정하도록 구성되고,
    상기 처리 시스템은 상기 디지털 이미지 시스템으로부터 상기 이미지를 수신하도록 구성되는
    시스템.
  18. 제 17 항에 있어서,
    상기 디지털 이미지 시스템은 상기 복수의 제 2 센서값의 제 1 세트로부터 생성된 제 1 값을 상기 복수의 제 2 센서값의 제 2 세트로부터 생성된 제 2 값으로 나누어서 상기 복수의 강도 비 각각을 생성하도록 구성되는
    시스템.
  19. 제 18 항에 있어서,
    상기 제 1 값은 상기 복수의 제 2 센서값의 상기 제 1 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 1 그룹으로부터 선택되고,
    상기 제 2 값은 상기 복수의 제 2 센서값의 상기 제 2 세트로부터 생성된 평균, 최대값과 최소값을 제외한 평균 및 중앙값으로 이루어진 제 2 그룹으로부터 선택되는
    시스템.
  20. 제 17 항에 있어서,
    상기 디지털 이미지 시스템은 상기 현재 픽셀이 결함이 있다고 판정되는 것에 응답해서 상기 현재 센서값을 상기 복수의 추정값 중 하나로 대치하도록 구성되는
    시스템.
KR1020050119772A 2004-12-09 2005-12-08 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템 KR20060065529A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/007,979 US7460688B2 (en) 2004-12-09 2004-12-09 System and method for detecting and correcting defective pixels in a digital image sensor
US11/007,979 2004-12-09

Publications (1)

Publication Number Publication Date
KR20060065529A true KR20060065529A (ko) 2006-06-14

Family

ID=35516881

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050119772A KR20060065529A (ko) 2004-12-09 2005-12-08 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템

Country Status (6)

Country Link
US (1) US7460688B2 (ko)
JP (1) JP2006166450A (ko)
KR (1) KR20060065529A (ko)
CN (1) CN1787615A (ko)
GB (1) GB2421138A (ko)
TW (1) TW200620979A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101444013B1 (ko) * 2012-03-01 2014-09-23 애플 인크. 이미지 처리를 위한 시스템 및 방법

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006050864B4 (de) * 2005-10-31 2015-08-20 Hitachi Kokusai Electric Inc. Verfahren und Vorrichtung zur Korrektur fehlerhafter Pixel für eine bildgebende Festkörpervorrichtung
EP2028871B1 (en) 2006-06-15 2018-01-24 Godo Kaisha IP Bridge 1 Radio transmission device and radio transmission method
US7830565B2 (en) * 2006-06-27 2010-11-09 Motorola, Inc. Image capture device with rolling band shutter
US8213710B2 (en) * 2006-11-28 2012-07-03 Youliza, Gehts B.V. Limited Liability Company Apparatus and method for shift invariant differential (SID) image data interpolation in non-fully populated shift invariant matrix
US8040558B2 (en) 2006-11-29 2011-10-18 Youliza, Gehts B.V. Limited Liability Company Apparatus and method for shift invariant differential (SID) image data interpolation in fully populated shift invariant matrix
CN100573315C (zh) * 2007-04-04 2009-12-23 鸿富锦精密工业(深圳)有限公司 相机模块污点测试系统及方法
CN101588447B (zh) * 2008-05-23 2011-04-20 比亚迪股份有限公司 一种图像坏点的校正方法、系统及图像传感器
US8237825B2 (en) * 2008-12-11 2012-08-07 Exelis, Inc. Pixel replacement using five nearest neighbors
CN101770636B (zh) * 2008-12-30 2012-09-26 比亚迪股份有限公司 图像噪声去除方法及装置
US8698015B2 (en) * 2009-12-18 2014-04-15 Intel Corporation Compensating for multi-touch signal bias drift in touch panels
JP5697353B2 (ja) 2010-03-26 2015-04-08 キヤノン株式会社 画像処理装置、画像処理装置の制御方法及びプログラム
US8351696B2 (en) * 2010-09-17 2013-01-08 Foveon, Inc. Correcting defective pixels in digital color images
JP5737929B2 (ja) * 2010-12-22 2015-06-17 キヤノン株式会社 画像処理装置及び画像処理方法
TWI448154B (zh) * 2011-01-03 2014-08-01 Himax Imaging Inc 影像感測壞像素點的檢測方法
JP6046927B2 (ja) * 2011-08-09 2016-12-21 キヤノン株式会社 画像処理装置及びその制御方法
US8799647B2 (en) 2011-08-31 2014-08-05 Sonic Ip, Inc. Systems and methods for application identification
CN103813159B (zh) * 2012-11-09 2017-04-12 原相科技股份有限公司 检测图像传感器的方法以及相关装置
JP6002599B2 (ja) * 2013-02-22 2016-10-05 日本電信電話株式会社 センサデータ統合装置、センサデータ統合方法及びプログラム
DE102013209165A1 (de) 2013-05-17 2014-11-20 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Pixelkorrekturverfahren
GB2521408B (en) * 2013-12-18 2015-12-16 Imagination Tech Ltd Defective pixel fixing
US9860429B1 (en) * 2016-06-30 2018-01-02 Apple Inc. Scaling of image data in sensor interface based on detection of defective pixels
WO2023134846A1 (en) * 2022-01-12 2023-07-20 Dream Chip Technologies Gmbh Method and image processor unit for detecting defective pixels

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0828811B2 (ja) 1988-05-10 1996-03-21 富士写真フイルム株式会社 画像入力装置
US5652621A (en) * 1996-02-23 1997-07-29 Eastman Kodak Company Adaptive color plane interpolation in single sensor color electronic camera
US6625318B1 (en) * 1998-11-13 2003-09-23 Yap-Peng Tan Robust sequential approach in detecting defective pixels within an image sensor
FR2786648B1 (fr) * 1998-11-30 2001-01-05 Commissariat Energie Atomique Procede de correction des defauts d'images issues d'un detecteur de rayons x ou y de type matriciel
US6377702B1 (en) * 1999-12-08 2002-04-23 Sony Corporation Color cast detection and removal in digital images
US6603552B1 (en) * 1999-12-22 2003-08-05 Xillix Technologies Corp. Portable system for detecting skin abnormalities based on characteristic autofluorescence
JP2002010274A (ja) * 2000-06-20 2002-01-11 Olympus Optical Co Ltd カラー画像処理装置
US6275144B1 (en) * 2000-07-11 2001-08-14 Telenetwork, Inc. Variable low frequency offset, differential, ook, high-speed power-line communication
US7280090B2 (en) * 2000-12-22 2007-10-09 Electronics For Imaging, Inc. Methods and apparatus for repairing inoperative pixels in a display
JP4485087B2 (ja) * 2001-03-01 2010-06-16 株式会社半導体エネルギー研究所 半導体装置の動作方法
US7209168B2 (en) * 2001-04-11 2007-04-24 Micron Technology, Inc. Defective pixel correction method and system
US6737625B2 (en) * 2001-06-28 2004-05-18 Agilent Technologies, Inc. Bad pixel detection and correction in an image sensing device
US6618185B2 (en) * 2001-11-28 2003-09-09 Micronic Laser Systems Ab Defective pixel compensation method
JP4154156B2 (ja) * 2002-02-08 2008-09-24 ソニーマニュファクチュアリングシステムズ株式会社 欠陥分類検査装置
US7283164B2 (en) * 2002-09-18 2007-10-16 Micron Technology, Inc. Method for detecting and correcting defective pixels in a digital image sensor
DE602005020867D1 (de) 2004-02-09 2010-06-10 Noritsu Koki Co Ltd Bildverarbeitungsvorrichtung und Bildverarbeitungsverfahren zur Korrektur von Bilddaten

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101444013B1 (ko) * 2012-03-01 2014-09-23 애플 인크. 이미지 처리를 위한 시스템 및 방법
US8976161B2 (en) 2012-03-01 2015-03-10 Apple Inc. Systems and methods for image processing

Also Published As

Publication number Publication date
GB0523167D0 (en) 2005-12-21
GB2421138A (en) 2006-06-14
US20060126127A1 (en) 2006-06-15
US7460688B2 (en) 2008-12-02
JP2006166450A (ja) 2006-06-22
CN1787615A (zh) 2006-06-14
TW200620979A (en) 2006-06-16

Similar Documents

Publication Publication Date Title
KR20060065529A (ko) 디지털 이미지 센서, 픽셀 어레이의 결함 픽셀 검출 방법및 시스템
US7283164B2 (en) Method for detecting and correcting defective pixels in a digital image sensor
CN110447061B (zh) 亮度补偿方法、亮度补偿装置、显示装置及存储介质
US7564491B2 (en) Pixel defect detecting/correcting device and pixel defect detecting/correcting method
US7711261B2 (en) Imaging device, camera and image processing method
US7812881B2 (en) Imaging device, camera and image processing method
US8442345B2 (en) Method and apparatus for image noise reduction using noise models
US7689059B2 (en) Image processing method and image processing circuit
US8253828B2 (en) Image capture device including edge direction determination unit, and image processing method for the same
US8269880B2 (en) Imaging device, camera and image processing method
JP4194336B2 (ja) 半導体集積回路、欠陥画素補正方法、及び画像プロセッサ
TW201419853A (zh) 影像處理器及其影像壞點偵測方法
TWI492621B (zh) 適應性影像處理方法及其相關裝置
US9147115B2 (en) Method and device for detecting an object in an image
CN110740314B (zh) 彩色线阵相机坏点校正方法及系统
JP4523629B2 (ja) 撮像装置
US20160219231A1 (en) Dark current gradient estimation using optically black pixels
US20140355872A1 (en) Method for determining interpolating direction for color demosaicking
TW201540074A (zh) 色彩校正裝置以及方法
US8189094B2 (en) Image processing apparatus and image processing method
CN112752041A (zh) Cmos图像传感器的校正方法、系统及图像处理设备
US20230291880A1 (en) Image processing apparatus
US20240163562A1 (en) Ambient light sensing using image sensor
JP2011259087A (ja) カラーターゲット位置決定装置
JP2021064853A (ja) 欠陥画素検出方法、欠陥画素検出装置、プログラム、及びイメージセンサ

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid