KR100733010B1 - 이미지 센서의 결함픽셀 보간 방법 및 장치 - Google Patents

이미지 센서의 결함픽셀 보간 방법 및 장치 Download PDF

Info

Publication number
KR100733010B1
KR100733010B1 KR1020050066993A KR20050066993A KR100733010B1 KR 100733010 B1 KR100733010 B1 KR 100733010B1 KR 1020050066993 A KR1020050066993 A KR 1020050066993A KR 20050066993 A KR20050066993 A KR 20050066993A KR 100733010 B1 KR100733010 B1 KR 100733010B1
Authority
KR
South Korea
Prior art keywords
pixel
pixel data
image sensor
defect
defective
Prior art date
Application number
KR1020050066993A
Other languages
English (en)
Other versions
KR20070012129A (ko
Inventor
양승일
Original Assignee
엠텍비젼 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엠텍비젼 주식회사 filed Critical 엠텍비젼 주식회사
Priority to KR1020050066993A priority Critical patent/KR100733010B1/ko
Publication of KR20070012129A publication Critical patent/KR20070012129A/ko
Application granted granted Critical
Publication of KR100733010B1 publication Critical patent/KR100733010B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

본 발명은 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법 및 장치에 관한 것으로서, 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값의 최소값을 선택하고, 이 최소값에 상응하는 픽셀 데이터들의 평균값을 결함 픽셀의 픽셀 데이터로 치환하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법 및 장치를 제공한다.
이미지 센서, 결함 픽셀 보간

Description

이미지 센서의 결함픽셀 보간 방법 및 장치{Method and apparatus for adjusting defect pixel in image sensor}
도 1a 내지 도 1c는 종래의 이미지 센서의 결함픽셀 보간 방법을 설명하기 위한 도면이다.
도 2는 본 발명의 제1 실시예에 따른 이미지 센서의 결함픽셀 보간 장치를 개략적으로 나타내는 블록도이다.
도 3은 도 2의 픽셀 레지스터부에 저장되는 픽셀 데이터를 나타내는 도면이다.
도 4는 본 발명의 제1 실시예에 따른 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
도 5는 본 발명의 제2 실시예에 따른 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
도 6은 본 발명의 제3 실시예에 따른 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
* 도면의 주요 부분에 대한 부호의 설명 *
10: 픽셀 레지스터부
20: 결함 판별부
30: 결함 보정부
본 발명은 이미지 센서의 출력 데이터로부터 검출된 결함 픽셀의 값을 최적 보정값으로 대체하는 이미지 센서의 결함픽셀 보간 장치 및 그 방법에 관한 것이다.
이미지 센서는 여러 개의 픽셀이 2차원 구조로 배열되어 있는 광변환 장치이다. 이미지 센서의 각 픽셀은 광학계를 통해 들어오는 빛을 그 세기에 따라 소정 레벨의 전기 신호로 변환시킨다. 변환된 전기 신호를 이용하면, 픽셀 단위의 이미지를 구성할 수 있다.
이미지 센서는 크게 CCD(charge coupled device)형과 CMOS(complementary metal oxide semiconductor)형으로 구분할 수 있다. CCD 센서는 한 반도체의 출력이 인접한 다른 반도체의 입력이 되도록 정렬되어 있는 메모리이며, 빛이나 전기에 의해 충전된다. 예를 들면, CCD 센서는 외부로부터 공급되는 빛에서 특정 파장만을 통과시키는 적색(R), 녹색(G) 및 청색(B)의 원색필터와, 원색필터에서 통과된 빛을 차지(Charged)하기 위한 적색(R), 녹색(G) 및 청색(B) 센서를 구비한다. CCD 센서는 적색(R), 녹색(G) 및 청색(B) 센서에서 차지된 빛의 양을 전기적신호로 변환함으로써 영상 데이터를 생성한다. CMOS 센서는 CMOS 로직 프로세스를 통해 제작되고 필터를 사용하지 않으므로 반도체 소자에 직접 빛을 받아들이고, 받아들인 빛을 전기적 신호로 변환함으로써 영상 데이터를 생성한다. 예를 들면, CMOS 센서는 내부의 트랜지스터 앰프에서 증폭된 X 및 Y 방향 레지스터에서 읽혀진다.
통상, 이미지 센서는 그 제조 과정 중의 여러 가지 이유로 인하여 정상적으로 동작하지 못하는 픽셀이 발생하게 된다. 이러한 픽셀은 빛에 대해 정상적으로 반응하지 못한다. 비정상적인 픽셀이 포함된 이미지 센서로부터 출력되는 영상은 실제와는 다른 영상을 표시하게 된다.
한편, 빛에 대해 정상적으로 반응하지 못하는 픽셀은 실제보다 밝게 보이거나 또는 실제보다 어둡게 보이는데, 그 중 주변 픽셀과 그 밝기의 차이가 커서 눈에 현저하게 띄는 픽셀을 결함 픽셀이라 한다. 이러한 결함 픽셀은 이미지 센서의 결함 픽셀을 검출하고 보정하는 과정을 통해 적절히 처리되어야 한다.
도 1a 내지 도 1c는 종래의 이미지 센서의 결함픽셀 보간 방법을 설명하기 위한 도면이다. 이미지 센서에 도 1a에 도시한 것과 같은 영상이 촬상된 경우, 도 1b에 도시한 것과 같은 불량 픽셀(X)이 있는 경우, 종래의 결함픽셀 보간 장치에서는 불량 픽셀(X) 주변의 픽셀값의 평균값을 구하고, 그 값을 불량 픽셀(X)의 값으로 대체시킨다.
예를 들면, 도 1c에 도시한 바와 같이, 주변 픽셀들의 값이 0, 0, 0, 80, 80, 100, 100, 100이면, 그 평균값은 57.5가 되며, 이 평균값은 불량 픽셀(X)의 값으로 대체된다.
그러나, 전술한 종래의 결함픽셀 보간 방법에 따르면, 이미지 센서에서 얻은 영상과 원본 영상을 비교할 때, 얻은 영상의 윤곽이 뭉개지는 현상이 나타난다. 따라서, 이미지 센서의 출력 영상의 품질이 떨어진다.
본 발명은 상기한 바와 같은 한계점을 감안하여 안출된 것으로서, 결함 픽셀을 중심으로 대향 위치하는 주변 픽셀 데이터들을 이용하여 보다 간편하고 정밀하게 결함픽셀의 보간작업을 수행할 수 있는 방법 및 장치를 제공하는 것을 목적으로 한다.
상술한 목적들을 달성하기 위하여 본 발명의 일 측면에 따르면, 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 장치에 있어서, 이미지 센서로부터 픽셀 데이터를 입력받아 저장하는 픽셀 레지스터부 및 상기 픽셀 레지스터부로부터 픽셀 데이터를 입력받아, 상기 이미지 센서의 결함 픽셀을 보간하는 결함 보정부를 포함하되, 상기 결함 보정부는, 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값의 최소값을 선택하고, 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 것-여기서, 상기 절대값들 중 적어도 어느 하나에는 소정의 가중치가 부여됨-을 특징으로 하는 이미지 센서의 결함픽셀 보간 장치를 제공할 수 있다.
본 발명의 다른 일 측면에 따르면, 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 장치에 있어서, 이미지 센서로부터 픽셀 데이터를 입력받아 저장하는 픽셀 레지스터부; 및 상기 픽셀 레지스터부로부터 픽셀 데이터를 입력받아, 상기 이미지 센서의 결함 픽셀을 보간하는 결함 보정부를 포함하되, 상기 결함 보정부는, 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값의 최소값을 선택하고, 상기 최소값이 소정 기준값보다 작은 경우, 상기 대상 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 장치를 제공할 수 있다.
여기에서, 상기 결함 보정부는, 상기 결함 보정부는, 상기 산출된 차의 절대값들 중 어느 하나에 소정의 가중치를 부여하는 것을 특징으로 할 수 있다.
본 발명의 다른 일측면에 따르면, 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서, (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값을 각각 산출하고, 이들 중 최소값을 선택하는 단계 및 (b) 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법을 제공할 수 있다.
또한, 본 발명의 다른 일측면에 따르면, 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서, (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값을 각각 산출하고, 이들 중 최소값을 선택하는 단계 및 (b) 상기 선택된 최소값이 소정의 기준값보다 작은 경우, 상기 대상 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법을 제공할 수 있다.
또한, 본 발명의 다른 일측면에 따르면, 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서, (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값을 각각 산출하고, 이들 중 최소값을 선택하는 단계 및 (b) 상기 선택된 최소값이 소정의 기준값보다 큰 경우, 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법을 제공할 수 있다.
여기에서, 상기 (a) 단계는, 상기 차의 절대값들을 산출한 후, 이들중 적어도 어느 하나에 소정의 가중치를 부여하는 단계를 더 포함하는 것을 더 포함하도록 특징으로 할 수 있다. 또한, 상기의 방법들 중 어느 하나의 방법을 컴퓨터에서 실행 가능한 프로그램 코드로 기록한 기록 매체를 제공할 수 있다.
이하, 본 발명에 따른 이미지 센서의 결함픽셀 보간 방법 및 장치를 첨부된 도면을 참조하여 상세히 설명하기로 한다.
도 2는 본 발명의 제1 실시예에 따른 이미지 센서의 결함픽셀 보간 장치를 개략적으로 나타내는 블록도이다.
먼저, 이미지 센서에 대하여 간단하게 설명한다. 본 발명에 적용될 수 있는 이미지 센서는 빛을 전기로 변환하여 출력하는 장치로서, 예를 들면, 이미지 센서는 빛을 전기로 변환하는 광 다이오드가 구비된 다수의 픽셀 회로와, 픽셀 회로의 출력을 증폭하는 다수의 증폭기, 및 증폭기의 출력 신호를 전달하는 다수의 버스를 포함할 수 있다. 또한, 이미지 센서는 각 픽셀 회로나 증폭기를 선택하기 위한 제어 신호를 생성하고, 생성된 제어 신호를 공급하는 주사 회로를 포함할 수 있다.
또 예를 들면, 이미지 센서는 복수의 픽셀이 행렬로 배열되어 있는 픽셀 어레이와, 픽셀 어레이의 각 행을 차례로 선택하기 위한 수직 주사 회로와, 픽셀 어레이의 각 열을 차례로 선택하기 위한 수평 주사 회로와, 신호를 출력하기 위한 출력 회로를 구비할 수 있다. 수직 주사 회로와 수평 주사 회로는 예컨대 시프트 레지스터에 의해 각각 이루어지고, 픽셀 어레이의 각 행과 열에 수직 주사 펄스 신호 및 수평 주사 펄스 신호를 1개씩 연속적으로 공급할 수 있다.
전술한 구성을 갖는 이미지 센서는 수평 주사 회로가 픽셀의 신호 전하를 캐패시터에 유지하고, 이 캐패시터의 픽셀 신호를 예컨대 MOS 트랜지스터로 구성된 수평 스위치를 통해 수평 주사 신호에 따라 출력 회로에 출력한다.
도 2를 참조하면, 본 실시예의 결함픽셀 보간 장치는 이미지 센서로부터 픽셀 데이터를 입력받아 저장하는 픽셀 레지스터부(10)와, 상기 픽셀 레지스터부로부터 픽셀 데이터를 입력받아 상기 이미지 센서의 결함 픽셀을 보간하는 결함 보정부(20)를 포함한다. 상기 결함 보정부(20)는 결함판별부(미도시)와 연결되어 결함판별부로부터 결함 픽셀에 대한 정보를 입력받을 수 있다.
픽셀 레지스터부(10)는 이미지 센서로부터 출력되는 픽셀값들을 저장하고 있다가 결함 보정부(20)로 픽셀 데이터를 출력하고, 결함 보정부(20)로부터 결함 픽셀에 대한 치환 픽셀 데이터를 입력받아 저장한 후 출력한다. 픽셀 레지스터부(10)는 복수개의 픽셀 레지스터들을 구비하는데, 도 2에서와 같이 예컨대, 5×5의 2차원 픽셀 데이터를 저장하는 (M+i,N+j)(단, i와 j는 -2, -1, 0, 1, 2 중 어느 하나임)의 픽셀 레지스터들(12)을 구비할 수 있다. 5×5의 2차원 픽셀 데이터는 도 3에 도시된 것과 같은 25개의 픽셀(R1, G2, R3, G4, R5, G6, B7, G8, B9, G10, R11, G12, R13, G14, R15, G16, B17, G18, B19, G20, R21, G22, R23, G24, R25)에 대한 데이터를 포함한다. 여기에서, R은 적색, G는 녹색 그리고 B는 청색을 각각 표시하는 픽셀을 나타낸다. 각 픽셀 레지스터(12)에 저장되는 값은 0~255 사이의 값으로 표현될 수 있으며, 각 픽셀 레지스터는 플립플롭으로 구현될 수 있다.
결함 판별부(미도시)는 이미지 센서나 픽셀 레지스터부(10) 등으로부터 픽셀 데이터를 입력받아 결함픽셀을 판별하여, 결함픽셀에 대한 정보를 결함 보정부(20) 로 전달할 수 있다. 예를 들면, 결함 판별부는 픽셀 레지스터부에 저장된 픽셀들의 값 중 결함여부를 판단하고자 하는 대상 픽셀 (M,N)의 주변 픽셀들의 값에 소정의 가중치를 곱하고, 곱한 결과가 대상 픽셀 (M,N)의 값보다 소정값 이상 작으면, 대상 픽셀 (M,N)을 화이트 결함픽셀로 판별하고, 곱한 결과가 대상 픽셀 (M,N)의 값보다 소정값 이상 크면, 대상 픽셀 (M,N)을 블랙 결함픽셀로 판별하는 등의 방법을 사용할 수 있다. 본 실시예에서 결함 판별부는 본 발명을 직접 구성하는 구성요소가 아니며 편의를 위하여 설명한 것으로서, 본 발명에서의 결함 픽셀 판별 방법은 종래의 기술이라면 어느 것이나 사용할 수 있으며 본 발명과 관련하여 특별한 제한이 있는 것은 아니다.
결함 보정부(20)는 픽셀 레지스터부(10)로부터 픽셀 데이터들을 입력받아 결함 픽셀로 판별된 대상 픽셀(M,N)을 대상 픽셀(M,N)과 동일한 색의 주변 픽셀 데이터들을 이용하여 상기 대상 픽셀(M,N)의 데이터를 보정한다.
이를 위하여 상기 결함 보정부(20)는 우선 결함 픽셀인 대상 픽셀(M,N, 도 3의 R13)의 동일한 색의 좌우 픽셀 데이터들(R11,R15)간의 차의 절대값을 구하고, 동일한 색의 상하 픽셀 데이터들(R3,R23)간의 차의 절대값을 구하고, 동일한 색의 제1 대각선 방향의 픽셀 데이터들(R1,R25)간의 차의 절대값을 구하고, 동일한 색의 제2 대각선 방향의 픽셀 데이터들(R5,R21)간의 차의 절대값을 구한다.
각각의 차의 절대값들이 계산되면, 이들을 비교하여 최소값을 구하고, 최소값에 해당하는 픽셀 데이터들의 평균값을 산출하여 이를 대상 픽셀(M,N,R13) 데이 터로 치환하게 된다.
이러한 과정을 도 4를 참조하여 보다 상세하게 설명한다. 도 4는 본 실시예에 의한 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
도 4를 참조하면, 먼저 픽셀 레지스터부(10)는 이미지 센서의 결함픽셀로 판별된 대상 픽셀(M,N)을 보간하기 위해 대상 픽셀(M,N)이 포함된 픽셀 데이터를 입력받는다(110).
다음, 결함 보정부(20)는 결함 픽셀로 판별된 대상 픽셀(M,N,도 3의 R13)과 동일한 색의 좌우 픽셀 데이터들(R11,R15)간의 차의 절대값을 구하고, 동일한 색의 상하 픽셀 데이터들(R3,R23)간의 차의 절대값을 구하고, 동일한 색의 제1 대각선 방향의 픽셀 데이터들(R1,R25)간의 차의 절대값을 구하고, 동일한 색의 제2 대각선 방향의 픽셀 데이터들(R5,R21)간의 차의 절대값 들을 구한 후, 각각의 차이에 대한 절대값을 비교하여, 이들 중에서 최소값을 구한다(120).
이를 수식으로 표현하면 다음과 같다.
ΔH=|R11-R15| (좌우 픽셀들간의 차의 절대값)
ΔV=|R3-R23| (상하 픽셀들간의 차의 절대값)
ΔNW=|R1-R25| (제1 대각선 방향의 픽셀들간의 차의 절대값)
ΔNE=|R5-R21| (제2 대각선 방향의 픽셀들간의 차의 절대값)
다음으로, 상기 구한 절대값 중 최소값에 해당하는 픽셀 데이터들의 평균값 을 산출하여 이를 대상 픽셀(M,N)의 데이터로 치환하고(130), 이를 픽셀 레지스터부(10)로 전송하며, 픽셀 레지스터부(10)는 이를 저장한 후 출력하게 된다.
이를 구체적인 수치를 들어 설명하면 다음과 같다. 도 1b에 도시된 것과 같이 결함픽셀(X)이 존재하는 경우, 결함픽셀(X)과 동일한 색의 주변 픽셀들 중 좌우, 상하, 제1 대각선 및 제2 대각선 방향의 픽셀들의 차이에 대한 절대값을 각각 계산한 후 이들을 비교하고 최소값을 갖는 픽셀들의 평균값들로 치환한다. 즉, 도 1b의 경우에는, 80-80의 절대값과 100-0의 절대값 중에서 작은값을 갖는 성분은 80-80=0, 즉 상하 픽셀들이고, 이들 픽셀의 평균값은 80+80/2=80이 되고, 이 값 80을 결함픽셀(X)의 값으로 치환함으로써, 보간 절차를 마무리하게 된다.
상기 실시예에서는 상하, 좌우 및 대각선 방향의 픽셀 데이터들을 모두 이용하는 것으로 설명하였으나, 필요한 경우 이들 중 적어도 어느 2 이상 픽셀 데이터를 선택적으로 사용할 수도 있음은 물론이다.
또한, 상기 실시예에서는 대상픽셀을 중심으로 5×5=25개의 2차원 픽셀 데이터를 사용하는 경우에 대하여 설명하였으나, 본 실시예의 방법 및 장치는 필요한 경우 7×7이나 9×9의 2차원 픽셀 데이터를 사용하는 경우에도 동일하게 적용될 수 있다.
이러한 구성에 의하여, 결함 픽셀과 동일한 색상의 주변 픽셀 데이터를 이용하여 결함 픽셀을 간편하고 효과적으로 보간할 수 있게 된다.
도 5는 본 발명의 제2 실시예에 따른 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
도 5를 참조하면, 본 실시예에 따른 결함픽셀 보간 방법은, 앞서 설명한 제1 실시예에 따른 결함픽셀 보간 방법과 동일하되, 결함 보정부(20)가 대상 픽셀 (M,N)과 동일한 색의 좌우 픽셀, 상하 픽셀, 제1 및 제2 대각선 방향 픽셀 데이터들간의 차의 절대값들에 각각 소정의 가중치를 부여하는 단계(220)를 더 포함하는 것을 특징으로 한다. 본 실시예에 의하면, 대상 픽셀 (M,N)과의 거리에 따른 차이를 보상하거나 픽셀 데이터의 특성 차로 인한 오차를 최소화할 수 있으므로, 보다 정밀한 보간 작업을 수행할 수 있다.
도 6은 본 발명의 제3 실시예에 따른 이미지 센서의 결함픽셀 보간 방법을 나타내는 흐름도이다.
도 6을 참조하면, 본 실시예에 따른 결함픽셀 보간 방법은, 앞서 설명한 제1 실시예의 결함픽셀 보간 방법과 동일하되, 결함 보정부(20)가 대상픽셀과 동일한 색의 좌우 픽셀, 상하 픽셀, 제1 및 제2 대각선 방향 픽셀 데이터들간의 차의 절대값 중에서 최소값이 소정 기준값보다 작으면, 주변 픽셀 데이터들의 총합을 같은 색 성분의 주변 픽셀들의 개수로 나눈 값으로 대상 픽셀 (M,N)의 값을 치환하는 단계를 포함하는 것을 특징으로 한다.
즉, 먼저 픽셀 레지스터부(10)는 이미지 센서의 결함픽셀로 판별된 대상 픽 셀(M,N)을 보간하기 위해 대상 픽셀(M,N)이 포함된 픽셀 데이터를 입력받고(310), 결함 보정부(20)는 결함 픽셀로 판별된 대상 픽셀(M,N,R13)과 동일한 색의 좌우 픽셀 데이터들(R11,R15)간의 차의 절대값을 구하고, 동일한 색의 상하 픽셀 데이터들(R3,R23)간의 차의 절대값을 구하고, 동일한 색의 제1 대각선 방향의 픽셀 데이터들(R1,R25)간의 차의 절대값을 구하고, 동일한 색의 제2 대각선 방향의 픽셀 데이터들(R5,R21)간의 차의 절대값 들을 구한 후, 각각의 차이에 대한 절대값을 비교하여, 이들 중에서 최소값을 구한다(320).
다음으로, 상기 구한 절대값 중 최소값이 소정의 기준값보다 작은지 여부를 판단하고(330), 소정 기준값보다 작은 경우 상기 상하, 좌우, 제1 및 제2 대각선 방향의 픽셀 데이터들의 총합들을 상기 픽셀들의 개수로 나누어서 평균값을 산출한 후, 이를 대상 픽셀(M,N)의 데이터로 치환한다(340).
소정 기준값보다 큰 경우에는 전술한 실시예와 마찬가지로 상기 구한 절대값 중 최소값에 해당하는 픽셀 데이터들의 평균값을 산출하여 이를 대상 픽셀(M,N)의 데이터로 치환한다(350).
한편, 본 발명은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현할 수 있음은 물론이다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브 예컨대, 인터 넷을 통한 전송의 형태로 구현되는 것을 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 임의의 단말을 통해 분산 방식으로 실행될 수 있다.
이상, 본 발명의 바람직한 실시예들을 참조하여 본 발명의 구성 및 작용을 설명하였으나, 본 발명은 상기 실시예들에 한정되는 것이 아님은 물론이며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면, 본 발명의 기술적 사상의 범위내에서 여러 가지 형태의 수정, 추가, 변형 실시가 가능할 것이다.
본 발명에 의하면, 결함 픽셀을 중심으로 대향 위치하는 주변 픽셀 데이터들을 이용하여 보다 간편하고 정밀하게 결함픽셀의 보간작업을 수행할 수 있는 방법 및 장치를 제공할 수 있다. 따라서, 윤곽을 유지한 채로 불량 픽셀을 보간할 수 있으며 결국 영상 품질을 좋게 할 수 있다.

Claims (8)

  1. 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 장치에 있어서,
    이미지 센서로부터 픽셀 데이터를 입력받아 저장하는 픽셀 레지스터부; 및
    상기 픽셀 레지스터부로부터 픽셀 데이터를 입력받아, 상기 이미지 센서의 결함 픽셀을 보간하는 결함 보정부
    를 포함하되,
    상기 결함 보정부는, 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값의 최소값을 선택하고, 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 것-여기서, 상기 절대값들 중 적어도 어느 하나에는 소정의 가중치가 부여됨-
    을 특징으로 하는 이미지 센서의 결함픽셀 보간 장치.
  2. 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 장치에 있어서,
    이미지 센서로부터 픽셀 데이터를 입력받아 저장하는 픽셀 레지스터부; 및
    상기 픽셀 레지스터부로부터 픽셀 데이터를 입력받아, 상기 이미지 센서의 결함 픽셀을 보간하는 결함 보정부
    를 포함하되,
    상기 결함 보정부는, 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽 셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값의 최소값을 선택하고, 상기 최소값이 소정 기준값보다 작은 경우, 상기 대상 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 것
    을 특징으로 하는 이미지 센서의 결함픽셀 보간 장치.
  3. 제2항에 있어서,
    상기 결함 보정부는, 상기 산출된 차의 절대값들 중 어느 하나에 소정의 가중치를 부여하는 것
    을 특징으로 하는 이미지 센서의 결함픽셀 보간 장치.
  4. 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서,
    (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값들을 각각 산출하는 단계-여기서, 상기 절대값들 중 적어도 어느 하나에는 소정의 가중치가 부여됨-;
    (b) 상기 산출된 차의 절대값들 중 최소값을 선택하는 단계; 및
    (c) 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계
    를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법.
  5. 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서,
    (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값들을 각각 산출하고, 이들 중 최소값을 선택하는 단계; 및
    (b) 상기 선택된 최소값이 소정의 기준값보다 작은 경우, 상기 대상 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계
    를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법.
  6. 이미지 센서의 결함픽셀을 보간하는 결함픽셀 보간 방법에 있어서,
    (a) 결함 픽셀과 동일한 색의 좌우 픽셀 데이터들, 상하 픽셀 데이터들, 제1 대각선 방향의 픽셀 데이터들 및 제2 대각선 방향의 픽셀 데이터들 중 적어도 2 이상에 대하여 차의 절대값들을 각각 산출하고, 이들 중 최소값을 선택하는 단계; 및
    (b) 상기 선택된 최소값이 소정의 기준값보다 큰 경우, 상기 최소값에 상응하는 픽셀 데이터들의 평균값을 상기 결함 픽셀의 픽셀 데이터로 치환하는 단계
    를 포함하는 것을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법.
  7. 제5항 또는 제6항에 있어서,
    상기 (a) 단계는, 상기 차의 절대값들을 산출한 후, 이들 중 적어도 어느 하나에 소정의 가중치를 부여하는 단계를 더 포함하는 것
    을 특징으로 하는 이미지 센서의 결함픽셀 보간 방법.
  8. 제4항 내지 제6항의 방법들 중 어느 하나의 방법을 컴퓨터에서 실행 가능한 프로그램 코드로 기록한 기록 매체.
KR1020050066993A 2005-07-22 2005-07-22 이미지 센서의 결함픽셀 보간 방법 및 장치 KR100733010B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020050066993A KR100733010B1 (ko) 2005-07-22 2005-07-22 이미지 센서의 결함픽셀 보간 방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020050066993A KR100733010B1 (ko) 2005-07-22 2005-07-22 이미지 센서의 결함픽셀 보간 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20070012129A KR20070012129A (ko) 2007-01-25
KR100733010B1 true KR100733010B1 (ko) 2007-06-27

Family

ID=38012650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050066993A KR100733010B1 (ko) 2005-07-22 2005-07-22 이미지 센서의 결함픽셀 보간 방법 및 장치

Country Status (1)

Country Link
KR (1) KR100733010B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100848886B1 (ko) * 2007-05-21 2008-07-29 삼성전기주식회사 영상확대장치 및 그 방법
KR100975516B1 (ko) * 2008-06-12 2010-08-11 엘지이노텍 주식회사 불량 픽셀 보정 방법
KR101696672B1 (ko) 2010-05-10 2017-01-17 삼성전자주식회사 영상 신호 처리 방법 및 이를 이용하는 영상 촬영 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040098026A (ko) * 2002-03-27 2004-11-18 톰슨 라이센싱 에스.에이. 잡음 제약된 대각 개선된 업변환

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040098026A (ko) * 2002-03-27 2004-11-18 톰슨 라이센싱 에스.에이. 잡음 제약된 대각 개선된 업변환

Also Published As

Publication number Publication date
KR20070012129A (ko) 2007-01-25

Similar Documents

Publication Publication Date Title
CN101304484B (zh) 成像装置、缺陷像素校正装置、和装置中的处理方法
US8023010B2 (en) Defective pixel correction device
CN101467444B (zh) 固态图像传感器
CN101198965A (zh) 图像传感器中的缺陷像素校正
EP2015562A1 (en) Processing device for correcting defect pixel values of an image sensor unit, image sensor unit with the processing device and method
JP2006013558A (ja) 画像処理装置、画像処理プログラム
US20060245008A1 (en) Image processing apparatus, image processing method, electronic camera, and scanner
JP4533124B2 (ja) 画素欠陥補正装置
JP2007201530A (ja) 画素欠陥補正装置
JP6282123B2 (ja) 画像処理装置、画像処理方法及びプログラム
KR100733010B1 (ko) 이미지 센서의 결함픽셀 보간 방법 및 장치
JP5600812B2 (ja) 撮像装置
CN103621070B (zh) 摄像装置及摄像装置的控制方法
JP6980492B2 (ja) 撮像装置及び撮像システム
JP4148927B2 (ja) 画素信号処理方法及び装置
KR100645856B1 (ko) 신호처리 방법 및 화상취득 장치
US7916188B2 (en) Correction approximating straight line group information generating method of multi-divided reading CCD, and correction processing device manufacturing method of multi-divided reading CCD
JP5153842B2 (ja) 画像処理装置、画像処理プログラム
US20090244321A1 (en) Multi-segment reading ccd correcting apparatus and method
JP4334484B2 (ja) 画素信号処理装置及び方法
JP2005086630A (ja) 撮像装置
JP2006229299A (ja) 画素信号処理装置及び方法
JP3408169B2 (ja) 画像データの処理方法及び画像データ処理装置
JP2005168057A (ja) 固体撮像素子の画素欠陥補正方法および装置
JP2005318642A (ja) 固体撮像素子の欠陥画素検出方法および装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]
FPAY Annual fee payment

Payment date: 20130530

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140528

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150526

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20180528

Year of fee payment: 12