KR100575444B1 - 이미지 센서의 결함픽셀 보정 장치 및 그 방법 - Google Patents

이미지 센서의 결함픽셀 보정 장치 및 그 방법 Download PDF

Info

Publication number
KR100575444B1
KR100575444B1 KR1020030059859A KR20030059859A KR100575444B1 KR 100575444 B1 KR100575444 B1 KR 100575444B1 KR 1020030059859 A KR1020030059859 A KR 1020030059859A KR 20030059859 A KR20030059859 A KR 20030059859A KR 100575444 B1 KR100575444 B1 KR 100575444B1
Authority
KR
South Korea
Prior art keywords
pixel
value
defect
image sensor
defective
Prior art date
Application number
KR1020030059859A
Other languages
English (en)
Other versions
KR20050023548A (ko
Inventor
민경철
Original Assignee
엠텍비젼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠텍비젼 주식회사 filed Critical 엠텍비젼 주식회사
Priority to KR1020030059859A priority Critical patent/KR100575444B1/ko
Publication of KR20050023548A publication Critical patent/KR20050023548A/ko
Application granted granted Critical
Publication of KR100575444B1 publication Critical patent/KR100575444B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

이미지 센서의 결함픽셀 보정 장치 및 그 방법이 개시된다. 본 발명에 따른 이미지 센서에서 결함 픽셀 보정 장치는 직렬 연결된 다수의 픽셀 레지스터들을 포함하며, 전단의 Bayer 포맷 출력을 자지는 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들을 일시 저장하고 있는 픽셀 레지스터부, 픽셀 레지스터부에 저장된 픽셀의 값 중, 픽셀 N-2 및 픽셀 N+2에 소정의 가중치를 곱하고, 곱한 결과를 픽셀 N과 비교하여 픽셀 N의 결함 여부를 판단하는 결함 판별부 및 결함 판별부에서 픽셀 N이 결함픽셀로 판별되면, 픽셀 레지스터부에 일시 저장된, 픽셀 N과 동일 색상을 갖는 픽셀들을 이용하여 픽셀 N을 보정하는 결함 보정부를 포함하는 것을 특징으로 하며, 화이트 또는 다크 결함으로 검출된 픽셀의 위치를 별도의 메모리 장치에 저장할 필요가 없으며 또한, 결함 픽셀의 검출과 동시에 보정이 이루어지므로 라인 메모리를 사용하지 않아도 된다. 따라서, 생산비용 절감 및 생산 효율을 증대시킬 수 있다.

Description

이미지 센서의 결함픽셀 보정 장치 및 그 방법{Apparatus for compensating defect pixel existing in image sensor and method thereof}
도 1은 종래의 결함픽셀 보정 장치를 개략적으로 나타내는 블록도이다.
도 2는 이미지 센서로 입력되는 RGB 신호 패턴의 일예를 나타낸다.
도 3은 본 발명에 따른 이미지 센서에서 결함픽셀 보정 장치의 일실시예를 개략적으로 나타내는 블록도이다.
도 4a 내지 도 4d는 도 3에 도시된 픽셀 레지스터부(50)로 입력되는 RGB 신호 패턴의 예들을 나타낸다.
도 5는 도 3에 도시된 결함픽셀 보정 장치의 결함판별부(60)에서 결함픽셀을 검출하는 과정을 상세히 나타내는 흐름도이다.
도 6에 결함 여부를 판별하는 기준을 나타내는 도면이다.
도 7은 도 3의 결함 판별부에서 픽셀 N의 다크 결함 여부를 판별하는 방법의 일실시예를 나타내는 흐름도이다.
본 발명은 이미지 프로세서에 관한 것으로, 특히, 이미지 센서의 결함픽셀을 검출하여 보정하는 장치 및 그 방법에 관한 것이다.
이미지 센서는 여러 개의 픽셀이 2차원 구조로 배열되어 있다. 각 픽셀은 들어오는 빛의 밝기에 따라 이를 전기 신호로 변환시키며, 이 전기 신호를 측정하면 각 픽셀에 들어오는 빛의 양을 알 수 있고, 이를 이용하여 픽셀 단위의 이미지를 구성할 수 있다.
일반적으로, 이미지 센서 제조 과정 중이 여러 가지 이유로 인하여 정상적으로 동작하지 못하는 픽셀이 발생하게 되는데, 이러한 픽셀은 빛에 대해 정상적으로 반응하지 못한다. 이처럼, 빛에 대해 정상적으로 반응하지 못하는 픽셀에서 출력되는 값을 이용하여 이미지를 재구성하면 실제와는 다른 이미지가 표현된다. 한편, 빛에 대해 정상적으로 반응하지 못하는 픽셀은 실제보다 밝게 나타나거나 혹은 실제보다 어둡게 나타나는데, 이 중 주변 픽셀과 그 차이가 커서 눈에 현저하게 띄는 픽셀을 결함픽셀이라 한다. 이 때, 실제보다 밝게 나타나는 결함픽셀을 화이트 픽셀이라 하며, 실제보다 어둡게 나타나는 결함픽셀을 다크 픽셀이라 한다. 이러한 결함픽셀은 결함픽셀 보정(Defective Pixel Compensation:DPC) 과정을 통해 빛에 대해 정상적으로 반응할 수 있도록 해야 한다. 결함픽셀 보정은 인터폴레이션 이전에 이루어지는 과정이며, 이를 위해 먼저 이미지 센서의 결함 픽셀을 검색하여 그 위치에 대한 정보를 저장해 두어야 한다. 즉, 결함픽셀을 보정하기 전에, 테스트 모드 상태에서 이미지 센서의 결함픽셀을 검색하고 이를 메모리 장치에 저장한다.
도 1은 종래의 결함픽셀 보정 장치를 개략적으로 나타내는 블록도이다.
도 1을 참조하여, 먼저, 다크 결함 픽셀 검출에 대해 설명하면, 흰색 면을 촬영하기 위한 조명아래, 이미지 센서(10)를 적정 노출로 설정하여 흰색 면을 촬영한다. 결함픽셀 검출 및 보정부(20)는 촬영된 이미지를 분석하여 소정의 화이트 임계값(white threshold)보다 낮은 픽셀이 있으면 이를 다크 픽셀로 간주하고, 해당 픽셀의 위치를 레지스터 또는 EEPROM과 같은 메모리 장치(30)에 저장한다.
다음으로, 화이트 결함 픽셀의 검출에 대해 설명하면, 검은색 면을 촬영하기 위한 조명아래, 이미지 센서(10)를 적정 노출로 설정하여 검은색 면을 촬영한다. 결함픽셀 검출 및 보정부(20)는 촬영된 이미지를 분석하여 소정의 블랙 임계값(black threshold)보다 높은 픽셀이 있으면 이를 화이트 픽셀로 간주하고, 해당 픽셀의 위치를 레지스터 또는 EEPROM과 같은 메모리 장치(30)에 저장한다.
이상에서와 같은 방법으로 결함픽셀이 검출되면, 결함픽셀 검출 및 보정부(20)는 정상 동작 시, 메모리 장치(30)에 저장된 위치의 결함픽셀의 값을 주변픽셀 값으로 대체함으로써 결함픽셀에 대한 보정이 이루어진다. 이하, 결함픽셀에 대한 종래의 보정 방법을 구체적으로 설명한다.
일반적으로, 이미지 센서로 입력되는 RGB 신호는 도 2에 도시된 예와 같이 제1열은 RGRGRG... 제2열은 GBGBGB...의 순서로 입력될 수 있으며, 홀수 열은 제1열의 반복 패턴을 가지고, 짝수 열은 제2열의 반복 패턴을 갖는다. 한편, 제1열의 최초픽셀은 RGB중 어느 하나가 올 수 있으며, 이미지 센서로 입력되는 RGB 신호는 도 2에 도시된 패턴을 포함하여 최대 4개 종류의 패턴을 가질 수 있다. 도 2를 참조하여, R33 픽셀이 결함픽셀로 검출되었다면, 다음과 세 가지 알고리듬중 한가지 를 선택하여 결함픽셀을 보정할 수 있다.
첫 번째, R33 픽셀의 값을 주변의 픽셀 값 즉, R13, R31, R35 또는 R53의 값으로 대체한다.
두 번째, R33 픽셀의 값을 주변의 4픽셀 값(R13, R31, R35 및 R53)의 조합평균값으로 대체한다.
세 번째, R33 픽셀의 값을 주변의 4픽셀 값(R13, R31, R35 및 R53)의 평균값으로 대체한다.
이상에서와 같은 알고리듬들을 이용하여, 결함픽셀 R33을 보정하기 위해 현재 라인의 픽셀값 R31 및 R35 이외에도 이전 라인의 픽셀값 R13 및 이후 라인의 픽셀값 R53을 필요로 한다. 이처럼 이전 및 이후 라인의 픽셀값들을 이용하기 위해 라인 메모리들 및 픽셀 레지스터들이 이용된다.
이상에서 설명된 바와 같이, 종래에는 결함픽셀을 보정하기 위해, 다크 픽셀을 검출하여 그 위치를 메모리 장치에 저장하고, 화이트 픽셀을 검출하여 그 위치를 메모리 장치에 저장한다. 그런 다음, 라인 메모리 및 픽셀 레지스터를 이용하여, 메모리 장치에 저장된 결함픽셀의 주변 픽셀 값들을 취하고, 이들을 이용하여 결함픽셀을 보정한다. 결과적으로, 종래에는 결함픽셀 검출 및 보정 과정이 별도로 수행되며, 이는 생산 효율을 떨어뜨리는 요인이 된다. 또한, 하드웨어적으로, 결함픽셀의 위치를 저장하는 메모리 장치와, 보정에 이용되는 픽셀값들을 얻기 위한 라인메모리 및 픽셀 레지스터가 이용되고, 상기의 보정 알고리듬을 적용하기 위해 많은 양의 하드웨어가 필요하다. 이는 장치를 복잡하게 하고, 비용이 높아지는 문제 를 초래한다.
본 발명이 이루고자 하는 기술적 과제는 결함픽셀 검출 및 보정을 동시에 수행함으로써, 비용 절감 및 생산 효율을 높일 수 있는 결함픽셀 보정 장치 및 그 방법을 제공하는 데 있다.
본 발명이 이루고자 하는 다른 기술적 과제는 상기 결함픽셀 보정 방법을 컴퓨터에서 실행 가능한 프로그램 코드를 제공하는 데 있다.
상기 과제를 이루기 위해, 본 발명에 따른 이미지 센서에서 결함 픽셀 보정 장치는 직렬 연결된 다수의 픽셀 레지스터들을 포함하며, 전단의 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들을 일시 저장하고 있는 픽셀 레지스터부, 픽셀 레지스터부에 저장된 픽셀의 값 중, 픽셀 N-2 및 픽셀 N+2에 소정의 가중치를 곱하고, 곱한 결과를 픽셀 N과 비교하여 픽셀 N의 결함 여부를 판단하는 결함 판별부 및 결함 판별부에서 픽셀 N이 결함픽셀로 판별되면, 픽셀 레지스터부에 일시 저장된, 픽셀 N과 동일 색상을 갖는 픽셀들을 이용하여 픽셀 N을 보정하는 결함 보정부를 포함하는 것이 바람직하다.
상기 과제를 이루기 위해, 이미지 센서에서 결함 픽셀을 검출하고, 검출된 결함 픽셀을 보정하는 본 발명에 따른 결함 픽셀 보정 방법은 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들 중, 픽셀 N과 동일한 색상을 갖는 픽셀 N-2 및 픽셀 N+2 각각에 제1가중치를 곱하고, 곱한 결과를 픽셀 N과 비교하여 화이트 결함 여부를 판별하는 (a)단계, 픽셀 N-2 및 픽셀 N+2 각각에 제2가중치를 곱하고, 곱한 결과를 픽셀 N과 비교하여 다크 결함 여부를 판별하는 (b)단계 및 픽셀 N이 화이트 결함 또는 다크 결함으로 판별되면, 픽셀 N의 전후로 연속되며, 픽셀 N과 동일한 색상을 갖는 픽셀들을 이용하여 픽셀 N을 보정하는 (c)단계를 포함하는 것이 바람직하다.
이하, 본 발명에 따른 이미지 센서에서 결함픽셀 보정 장치 및 방법을 첨부된 도면들을 참조하여 다음과 같이 설명한다.
도 3은 본 발명에 따른 이미지 센서에서 결함픽셀 보정 장치의 일실시예를 개략적으로 나타내는 블록도로서, 픽셀 레지스터부(50), 결함판별부(60) 및 결함보정부(70)를 포함하여 구성된다.
픽셀 레지스터부(50)는 제1 내지 제5픽셀 레지스터들(50a~50e)로 구성되며 도시되지는 않았지만, 전단의 이미지 센서로부터 순차적으로 출력되는 픽셀값들을 일시 저장하고 있다가 출력한다. 이 때, 픽셀 레지스터부(50)에 일시 저장되는 픽셀 패턴은 도 4a 내지 도 4d에 도시된 바와 같이 4가지 형태일 수 있다. 이하, 설명의 편의를 위해 픽셀 레지스터부(50)에는 도 4a와 같은 형태의 픽셀 패턴이 일시 저장된 것으로 설명한다. 이 경우, 제1, 제2, 제3, 제4 및 제5픽셀 레지스터(50a, 50b, 50c, 50d 및 50e)에는 R11, G12, R13, G14 및 R15가 픽셀 N-2, N-1, N, N+1, N+2로 각각 저장된다. 여기서, 각 픽셀의 값은 0~255 사이의 값으로 표현될 수 있으며, 픽셀 레지스터는 플립플롭으로 구현될 수 있다.
결함 판별부(60)는 제1 내지 제5픽셀 레지스터들(50a~50e) 중, 픽셀 N과 동 일 색상을 갖는, 제1픽셀 레지스터(50a)에 일시 저장된 픽셀 N-2와 제5픽셀 레지스터(50e)에 일시 저장된 픽셀 N+2을 이용하여 제3픽셀 레지스터(50c)에 일시 저장된 픽셀 N의 결함여부를 판단한다.
결함 보정부(70)는 결함 판별부(60)에서 픽셀 N이 결함픽셀로 판별되면, 픽셀 레지스터부(50)에 일시 저장된 픽셀들 중, 픽셀 N과 동일한 색상의 픽셀들 즉, 도 3의 경우 픽셀 N-2와 픽셀 N+2를 이용하여 픽셀 N을 보정한다. 구체적으로, 픽셀 N-2와 픽셀 N+2의 평균값으로 픽셀 N을 보정할 수 있다. 한편, 도 3에서는 픽셀 레지스터(50)가 5개의 픽셀 레지스터들(50a~50e)을 이용하는 것으로 도시되었으나, 그 이상을 사용할 수 있다. 예컨대, 픽셀 레지스터를 18개 사용하고 9번째 픽셀 레지스터에 저장된 픽셀의 결함을 보정할 경우, 9번째 픽셀 전후로 연속되는 동일 색상의 8개의 픽셀 중 중간 값으로 9번째 픽셀을 보정할 수 있다. 이 때, 연속하는 8개의 픽셀에서 중간값은 미디언 필터를 이용하여 쉽게 얻을 수 있다.
도 5는 도 3에 도시된 결함픽셀 보정 장치의 결함판별부(60)에서 결함픽셀을 검출하는 방법의 일실시예를 나타내는 흐름도이다. 마찬가지로, 설명의 편의를 위해 픽셀 레지스터부(50)에는 도 4a와 같은 형태의 픽셀 패턴이 일시 저장된 것으로 설명한다.
도 3 및 도 5를 참조하여, 결함 판별부(60)는 제3픽셀 레지스터(50c)에 일시 저장된 픽셀 N(=R13)의 결함 여부를 판별하기 위해, 픽셀 레지스터부(50)로부터 픽셀 N-2(=R11), N(=R13) 및 N+2(=R15)을 입력한다(제100단계).
제100단계 후에, 픽셀 N-2 및 픽셀 N+2 각각에 제1가중치를 곱하고, 곱한 결 과를 픽셀 N과 비교하여 픽셀 N의 화이트 결함 여부를 판별한다(제200단계). 여기서, 화이트 결함 판별을 위한 제1가중치(w_h)는 1.5~1.9 사이에서 설정하는 것이 바람직하다. 예를 들어, 픽셀 N이 주변 픽셀보다 1.8배 이상 밝은 값을 가질 경우 화이트 결함 픽셀로 한다면, 제1가중치(w_h)를 1.8로 설정하면 된다. 픽셀 N의 화이트 결함 여부의 판별은 도 6을 참조하여 상세히 설명될 것이다.
제200단계 후에, 픽셀 N-2 및 픽셀 N+2 각각에 제2가중치를 곱하고, 곱한 결과를 픽셀 N과 비교하여 픽셀 N의 다크 결함 여부를 판별한다(제300단계). 여기서, 다크 결함 판별을 위한 제2가중치(w_d)는 0.1~0.5 사이에서 설정하는 것이 바람직하다. 예를 들어, 픽셀 N이 주변 픽셀보다 1.8배 이상 어두운 값을 가질 경우 다크 결함 픽셀로 한다면, 제2가중치(w_d)를 0.2로 설정하면 된다. 픽셀 N의 다크 결함 여부의 판별은 도 7을 참조하여 상세히 설명될 것이다. 제100단계 및 제200단계에서 화이트 결함 판별을 위한 제1가중치 및 다크 결함 판별을 위한 제2가중치는 설계자에 의하여 임의로 선택될 수 있다.
한편, 도 5에서는 픽셀 N의 화이트 결함 여부를 판단한 후, 다크 결함 여부를 판별하는 것으로 설명하였으나, 그 순서는 바뀔 수 있다.
도 6은 도 3의 결함 판별부(60)에서 픽셀 N의 화이트 결함 여부를 판별하는 방법의 일실시예를 나타내는 흐름도이다.
도 6을 참조하여, 먼저 픽셀 N+2 및 픽셀 N-2에 제1가중치(w_h)를 각각 곱한다(제210단계). 제210단계에서, (N+2)*w_h는 A, (N-2)*w_h는 B인 것으로 각각 정한다.
제210단계 후에, 픽셀 N이 A보다 크고, B보다 큰가를 판단한다(제220단계).
제220단계에서, 픽셀 N이 A와 B 중, 어느 하나보다 크지 않다고 판단되면, 픽셀 N은 화이트 결함이 발생하지 않은 픽셀로 판단한다(제250단계). 반면, 제220단계에서, 픽셀 N이 A와 B 모두 보다 크다고 판단되면, 일단 화이트 결함 픽셀일 가능성이 있는 것으로 판단한다. 한편, 픽셀 N과 픽셀 N-2 및 픽셀 N+2의 값 차이가 크지 않을 경우, 픽셀 N이 화이트 결함이 아닌데도 제220단계의 판단 결과 화이트 결함인 것으로 검출될 수 있다. 예컨대, 픽셀 N이 결함 픽셀이 아니라는 가정하에, 픽셀 N-2=150, 픽셀 N=230, 픽셀 N+2=150이 입력되고, 가중치(w_h)가 1.5로 설정된 경우, A 및 B는 225가된다. 이 경우, 픽셀 N은 A 및 B 모두보다 크므로, 화이트 결함 픽셀로 판별된다. 즉, 픽셀 N이 정상적인 픽셀임에도 불구하고 화이트 결함이 있는 것으로 판별되는 오류가 발생된다. 만약, 제220단계에서 일차적으로 화이트 결함 픽셀인 것으로 판별되더라도, 픽셀 N과 픽셀 N-2의 차 및 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v) 예컨대, 100이상일 때만 화이트 결함 픽셀인 것으로 제한한다면 상기와 같은 판별 오류를 방지할 수 있다. 따라서, 제220단계에서 일단 화이트 픽셀인 것으로 판단되면, 픽셀 N과 픽셀 N-2의 차 및 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 큰가를 판단한다(제230단계).
제230단계에서 픽셀 N과 픽셀 N-2의 차 및 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 크다고 판단되면, 픽셀 N은 최종적으로 화이트 결함 픽셀인 것으로 판단한다(제240단계). 그러나, 제230단계에서, 픽셀 N과 픽셀 N-2의 차 또는 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 크지 않다고 판단되면, 픽셀 N은 화이트 결함 픽셀이 아닌 것으로 판단한다(제250단계). 화이트 결함 픽셀의 검출을 위한 소정의 바운더리값(v)은 실험을 통해 최적의 값으로 설정할 수 있다.
도 7은 도 3의 결함 판별부(60)에서 픽셀 N의 다크 결함 여부를 판별하는 방법의 일실시예를 나타내는 흐름도이다.
도 7을 참조하여 픽셀 N+2 및 픽셀 N-2에 다크 결함 판별을 위한 제2가중치(w_d)를 각각 곱한다(제310단계). 제110단계에서, (N+1)*w_d는 C, (N-1)*w_d는 D인 것으로 각각 정한다.
제310단계 후에, 픽셀 N이 C보다 작고, D보다 작은가를 판단한다(제320단계).
제320단계에서, 픽셀 N이 C 및 B 중 어느 하나보다 작지 않다고 판단되면, 픽셀 N은 다크 결함이 발생하지 않은 픽셀로 판단한다(제350단계). 반면, 제320단계에서, 픽셀 N이 A 및 B 모두보다 작다고 판단되면, 일단 다크 결함 픽셀일 가능성이 있는 것으로 판단한다. 한편, 픽셀 N과 픽셀 N-2 및 픽셀 N+2의 값 차이가 크지 않을 경우, 화이트 결함 여부 판별에서 설명된 것과 마찬가지로, 픽셀 N이 다크 결함이 아닌데도 제320단계의 판단 결과 다크 결함인 것으로 검출될 수 있다. 따라서, 제320단계에서 일단 다크 픽셀인 것으로 판단되면, 픽셀 N과 픽셀 N-2의 차 또는 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 큰가를 판단한다(제330단계).
제330단계에서 픽셀 N과 픽셀 N-2의 차 또는 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 크다고 판단되면, 픽셀 N은 최종적으로 다크 결함 픽셀인 것으로 판단한다(제340단계). 그러나, 제330단계에서, 픽셀 N과 픽셀 N-2의 차 또는 픽셀 N과 픽셀 N+2의 차가 소정의 바운더리값(v)보다 크지 않다고 판단되면, 픽셀 N은 화이트 결함 픽셀이 아닌 것으로 판단한다(제350단계). 다크 결함 픽셀 검출을 위한 소정의 바운더리값(v)은 실험을 통해 최적의 값으로 설정할 수 있다.
이상의 과정을 통해 픽셀 N이 다크 결함 픽셀 또는 화이트 결함 픽셀인 것으로 판단되면, 결함 보정부(70)는 전술된 바와 같은 방식에 의해 픽셀 N을 보정한다.
이상에서 설명된 바와 같이, 본 발명에 따른 이미지 센서의 결함픽셀 보정 장치 및 그 방법은 화이트 또는 다크 결함으로 검출된 픽셀의 위치를 별도의 메모리 장치에 저장할 필요가 없으며 또한, 결함 픽셀의 검출과 동시에 보정이 이루어지므로 라인 메모리를 사용하지 않아도 된다. 따라서, 생산비용 절감 및 생산 효율을 증대시킬 수 있다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이상 도면과 명세서에서 최적 실시예들이 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의 미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
상술한 바와 같이, 본 발명의 이미지 센서의 결함픽셀 보정 장치 및 그 방법에 따르면, 화이트 또는 다크 결함으로 검출된 픽셀의 위치를 별도의 메모리 장치에 저장할 필요가 없으며 또한, 결함 픽셀의 검출과 동시에 보정이 이루어지므로 라인 메모리를 사용하지 않아도 된다. 따라서, 생산비용 절감 및 생산 효율을 증대시킬 수 있다.

Claims (17)

  1. 직렬로 연결된 다수의 픽셀 레지스터를 포함하며, 전단의 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들을 일시 저장하는 픽셀 레지스터부;
    상기 픽셀 레지스터부에 저장된 상기 픽셀의 값들 중 픽셀 N-2의 값 및 픽셀 N+2의 값에 소정의 가중치를 곱한 값들과 픽셀 N의 값을 비교하여 상기 픽셀 N이 결합 픽셀에 해당하는 지를 판단하는 결함 판별부; 및
    상기 픽셀 N이 결합 픽셀에 해당하는 경우 상기 픽셀 레지스터부에 저장된 상기 픽셀의 값들 중 상기 픽셀 N과 동일한 색상을 가는 픽셀의 값들을 이용하여 상기 픽셀 N을 보정하는 결함 보정부
    를 포함하는 이미지 센서의 결함 픽셀 보정 장치.
  2. 제1항에 있어서, 상기 픽셀 레지스터부는,
    적어도 5개 이상의 픽셀 레지스터들을 포함하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  3. 제1항에 있어서, 상기 가중치는,
    화이트 결함 픽셀 검출을 위해, 1.5~1.9 사이에서 선택하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  4. 제3항에 있어서, 상기 결함 판별부는
    상기 픽셀 N이 상기 픽셀 N-2에 상기 가중치를 곱한 값 A 및 상기 픽셀 N+2에 상기 가중치를 곱한 값 B 모두보다 크고,
    상기 픽셀 N과 상기 픽셀 N-2의 차 및 상기 픽셀 N과 상기 픽셀 N+2의 차가 소정의 바운더리값보다 크면, 상기 픽셀 N을 화이트 결함 픽셀로 검출하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  5. 제1항에 있어서, 상기 가중치는,
    다크 결함 픽셀 검출을 위해, 0.1~0.5 사이에서 선택하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  6. 제5항에 있어서, 상기 결함 판별부는
    상기 픽셀 N이 상기 픽셀 N-2에 상기 가중치를 곱한 값 C 및 상기 픽셀 N+2에 상기 가중치를 곱한 값 D 모두보다 작고,
    상기 픽셀 N과 상기 픽셀 N-2의 차 및 상기 픽셀 N과 상기 픽셀 N+2의 차가 소정의 바운더리값보다 크면, 상기 픽셀 N을 다크 결함 픽셀로 검출하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  7. 제1항에 있어서, 상기 결함 보정부는,
    상기 픽셀 N-2와 상기 픽셀 N+2의 평균값으로 상기 픽셀 N을 보정하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  8. 제1항에 있어서, 상기 결함 보정부는,
    상기 픽셀 레지스터부에 저장된 픽셀들 중 상기 픽셀 N의 전후로 연속되며, 상기 픽셀 N과 동일한 색상을 갖는 픽셀들 중 중간값으로 상기 픽셀 N을 보정하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  9. 제8항에 있어서, 상기 결함 보정부는,
    상기 중간값을 필터링하는 미디엄 필터를 포함하는 것을 특징으로 하는 이미지 센서의 결함 픽셀 보정 장치.
  10. 픽셀 레지스터부, 결합 판별부 및 결함 보정부를 포함하는 이미지 센서의 결함 픽셀 보정 장치에서 이미지 센서의 결함 픽셀을 보정하는 방법에 있어서,
    상기 픽셀 레지스터부를 통해 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들을 저장하는 단계;
    상기 결합 판별부에서 상기 픽셀의 값들 중에서 픽셀 N과 동일한 색상을 갖는 픽셀 N-2의 값 및 픽셀 N+2의 값에 각각 소정의 가중치를 곱한 값과 상기 픽셀 N의 값을 비교하여 상기 픽셀 N의 결함 픽셀 여부를 판단하는 단계; 및
    상기 판단 결과 상기 픽셀 N이 결함 픽셀인 경우 상기 결함 보정부에서 상기 픽셀 레지스터부에 저장된 상기 픽셀의 값들 중 상기 픽셀 N과 동일한 색상을 가는 픽셀의 값들을 이용하여 상기 픽셀 N을 보정하는 단계
    를 포함하는 이미지 센서의 결함 픽셀 보정 방법.
  11. 제10항에 있어서,
    상기 픽셀 N의 값이 상기 픽셀 N-2의 값에 상기 가중치를 곱한 값 및 상기 픽셀 N+2의 값에 상기 가중치를 곱한 값 모두보다 크고, 상기 픽셀 N의 값과 상기 픽셀 N-2의 값의 차이와 상기 픽셀 N의 값과 상기 픽셀 N+2의 값의 차이가 소정의 바운더리 값보다 큰 경우 상기 픽셀 N은 화이트 결함 픽셀로 판단되는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  12. 제11항에 있어서,
    상기 가중치는 1.5 내지 1.9 사이에서 설정되는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  13. 제10항에 있어서,
    상기 픽셀 N의 값이 상기 픽셀 N-2의 값에 상기 가중치를 곱한 값 및 상기 픽셀 N+2의 값에 상기 가중치를 곱한 값 모두보다 작고, 상기 픽셀 N의 값과 상기 픽셀 N-2의 값의 차와 상기 픽셀 N의 값과 상기 픽셀 N+2의 값의 차가 소정의 바운더리 값보다 큰 경우 상기 픽셀 N은 다크 결함 픽셀로 판단되는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  14. 제13항에 있어서,
    상기 가중치는 0.1 내지 0.5 사이에서 설정되는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  15. 제10항에 있어서,
    상기 결함 보정부는 상기 픽셀 N-2의 값 및 상기 픽셀 N+2의 값의 평균값으로 상기 픽셀 N을 보정하는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  16. 제10항에 있어서,
    상기 결함 보정부는 상기 픽셀 N의 전후로 연속되며, 상기 픽셀 N과 동일한 색상을 가지는 적어도 2이상의 픽셀들의 값들 중 중간값으로 상기 픽셀 N을 보정하는 것
    을 특징으로 하는 이미지 센서의 결함 픽셀 보정 방법.
  17. 이미지 센서의 결함 픽셀 보정 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며 디지털 처리 장치에 의해 판독될 수 있는 기록 매체에 있어서,
    상기 이미지 센서의 결함 픽셀 보정 방법이,
    상기 픽셀 레지스터부를 통해 이미지 센서로부터 순차적으로 출력되는 픽셀의 값들을 저장하는 단계;
    상기 결합 판별부에서 상기 픽셀의 값들 중에서 픽셀 N과 동일한 색상을 갖는 픽셀 N-2의 값 및 픽셀 N+2의 값에 각각 소정의 가중치를 곱한 값과 상기 픽셀 N의 값을 비교하여 상기 픽셀 N의 결함 픽셀 여부를 판단하는 단계; 및
    상기 판단 결과 상기 픽셀 N이 결함 픽셀인 경우 상기 결함 보정부에서 상기 픽셀 레지스터부에 저장된 상기 픽셀의 값들 중 상기 픽셀 N과 동일한 색상을 가는 픽셀의 값들을 이용하여 상기 픽셀 N을 보정하는 단계
    를 포함하는 것을 특징으로 하는 기록 매체.
KR1020030059859A 2003-08-28 2003-08-28 이미지 센서의 결함픽셀 보정 장치 및 그 방법 KR100575444B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030059859A KR100575444B1 (ko) 2003-08-28 2003-08-28 이미지 센서의 결함픽셀 보정 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030059859A KR100575444B1 (ko) 2003-08-28 2003-08-28 이미지 센서의 결함픽셀 보정 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20050023548A KR20050023548A (ko) 2005-03-10
KR100575444B1 true KR100575444B1 (ko) 2006-05-03

Family

ID=37231039

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030059859A KR100575444B1 (ko) 2003-08-28 2003-08-28 이미지 센서의 결함픽셀 보정 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR100575444B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5134880B2 (ja) * 2006-07-31 2013-01-30 アプライド マテリアルズ イスラエル リミテッド 欠陥検出のための方法およびシステム
KR101133684B1 (ko) * 2010-07-07 2012-04-12 에스케이하이닉스 주식회사 이미지 센서 및 그 동작 방법
KR101133687B1 (ko) * 2010-07-07 2012-04-12 에스케이하이닉스 주식회사 이미지 센서 및 그 동작 방법

Also Published As

Publication number Publication date
KR20050023548A (ko) 2005-03-10

Similar Documents

Publication Publication Date Title
US6806902B1 (en) System and method for correcting bad pixel data in a digital camera
US7649555B2 (en) Apparatus for processing dead pixel
US7800661B2 (en) Programmable pattern matching device
US6724945B1 (en) Correcting defect pixels in a digital image
CN100474935C (zh) 像素缺陷检测和校正设备以及像素缺陷检测和校正方法
KR101980931B1 (ko) 화상 처리 장치 및 화상 처리 방법과 기록 매체
EP1401196A1 (en) Method for detecting and correcting defective pixels in a digital image sensor
JP4985403B2 (ja) 画像処理システムおよび画像処理プログラム
JP2007201530A (ja) 画素欠陥補正装置
WO2005117455A1 (ja) Ｒａｗデ－タから倍率色収差を検出する画像処理装置、画像処理プログラム、および電子カメラ
JP6046927B2 (ja) 画像処理装置及びその制御方法
JP2011071616A (ja) 画像処理装置
JP2006180099A (ja) 画素欠陥補正装置
JP5324508B2 (ja) 画像処理装置および方法，ならびに画像処理プログラム
KR100906606B1 (ko) 불량 화소 처리 방법 및 장치
KR101854432B1 (ko) 역광 프레임을 검출하고, 보정하는 방법 및 장치
KR100575444B1 (ko) 이미지 센서의 결함픽셀 보정 장치 및 그 방법
CN112581403B (zh) 一种鱼眼图像校正方法、系统及介质
US8351729B2 (en) Apparatus, method, and program for image correction
KR100581514B1 (ko) 가중치 값을 이용한 결함 픽셀 보정 장치 및 방법
KR101327790B1 (ko) 영상 보간 방법 및 장치
JP2000101924A (ja) 画像入力装置における欠陥検出補正装置
US8564680B1 (en) Method and apparatus for noise management for color data synthesis in digital image and video capture systems
CN114095721B (zh) 视频坏点检测的方法和装置、计算机可读介质
JP2004173060A (ja) ノイズ除去方法、撮像装置およびノイズ除去プログラム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment
FPAY Annual fee payment
FPAY Annual fee payment

Payment date: 20170329

Year of fee payment: 12