KR20080078044A - 이미지 노이즈를 감소시키는 방법 및 장치 - Google Patents
이미지 노이즈를 감소시키는 방법 및 장치 Download PDFInfo
- Publication number
- KR20080078044A KR20080078044A KR1020087016605A KR20087016605A KR20080078044A KR 20080078044 A KR20080078044 A KR 20080078044A KR 1020087016605 A KR1020087016605 A KR 1020087016605A KR 20087016605 A KR20087016605 A KR 20087016605A KR 20080078044 A KR20080078044 A KR 20080078044A
- Authority
- KR
- South Korea
- Prior art keywords
- value
- pixel
- pixels
- pair
- average
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000009467 reduction Effects 0.000 title description 5
- 238000003384 imaging method Methods 0.000 claims abstract description 23
- 238000012545 processing Methods 0.000 claims description 15
- 238000012935 Averaging Methods 0.000 claims description 8
- 125000002015 acyclic group Chemical group 0.000 claims 3
- 230000002950 deficient Effects 0.000 claims 3
- 238000012937 correction Methods 0.000 abstract description 11
- 239000007787 solid Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000009499 grossing Methods 0.000 description 2
- 238000003702 image correction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/20—Image enhancement or restoration using local operators
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/30—Noise filtering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
- H04N25/683—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects by defect estimation performed on the scene signal, e.g. real time or on the fly detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Color Television Image Signal Generators (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
본 발명은 이미징 장치에서 이미지 노이즈 제거를 할 수 있는 방법 및 장치를 제공한다. 그 방법 및 실행 장치는 식별된 픽셀에 대한 인접 픽셀 쌍을 포함하는 커널을 선택하고, 보정 커널 내의 픽셀 쌍에 대한 평균 출력 신호값을 판정하며, 평균값과 식별된 픽셀의 값의 차를 판정하고, 상기 차 값을 임계값과 비교하며, 임계값 이하인 차 값을 갖는 픽셀 쌍에 대한 식별된 픽셀의 값에 선택된 평균 픽셀 쌍 값을 통합한다.
Description
본 발명은 일반적으로 고체 이미저 장치의 분야에 관한 것으로, 더욱 구체적으로는 고체 이미저 장치 내의 노이즈 감소 방법 및 장치에 관한 것이다.
전하 결합 소자(CCD), CMOS 이미저 등을 포함하는 고체 이미저가 포토 이미징 애플리케이션에 사용되어 왔다. 고체 이미저 회로는 픽셀 셀들의 초점면 어레이를 포함하고, 셀들의 각각은 광 생성 전하를 축적하는 도핑된 영역을 갖는 포토게이트, 광도체 또는 포토다이오드일 수 있는 광센서를 포함한다.
고체 이미지 센서에 대한 가장 주목할만한 문제점 중 하나는 특히 작은 픽셀 사이즈를 갖는 센서에 대한 노이즈 감소이다. 화질에 대한 노이즈의 영향은 픽셀 사이즈가 지속적으로 감소함에 따라 증가학 화질에 심각한 영향을 줄 수 있다. 특히, 노이즈는 감소된 동적 범위로 인해 더 작은 픽셀에서의 화질에 영향을 준다. 이러한 문제점을 해결하는 방법 중 하나는 제조 프로세스를 개선하는 것이지만, 그러한 개선과 관련하는 비용이 높다. 따라서, 종종 기술자들은 노이즈를 감소하는 다른 방법에 초점을 맞춘다.
이미지 노이즈 제거하는 데 사용될 수 있는 2개의 예시적인 방법이 여기에서 간단히 논의된다. 첫 번째 방법은 이미지 내의 노이즈 성분을 감소시키기 위해 로컬 저역 통과 필터를 적용함으로써 작업하는 로컬 평활 필터의 사용을 포함한다. 그러한 필터의 일반적인 예들은 평균화, 매체 및 가우스 필터를 포함한다. 로컬 평활 필터와 관련된 하나의 문제점은 그 필터가 이미지의 부분인 고주파수 성분들과 노이즈에 기인하여 생성된 성분들 간을 구별하지 못하는 것이다. 그 결과, 이들 필터는 노이즈를 제거할 뿐만 아니라 이미지의 에지를 흐려지게 한다.
두 번째 그룹의 노이즈 제거 방법은 공간 주파수 영역에서 작업한다. 이들 방법은 일반적으로 먼저 이미지 데이터를 주파수 공간으로 변환한 후(순방향 변환), 변환된 이미지를 필터하고, 마지막으로 이미지를 다시 이미지 공간으로 변환한다(역방향 변환). 그러한 필터의 일반적인 예들은 DFT 필터 및 파장 변환 필터를 포함한다. 그러나, 이미지 노이즈 제거를 위한 이들 필터의 이용은 이미지 데이터를 처리하는 데 필요한 막대한 양의 계산에 의해 방해된다. 또한, 블록 인공물 및 발진이 노이즈를 감소시키기 위해 이들 필터의 사용으로부터 초래될 수 있다. 더욱이, 이들 필터는 YUV 컬러 공간에서 최상으로 실현된다(Y는 휘도 성분이고, U 및 V는 색도 성분이다). 따라서, 이미지의 에지를 흐려지게 하지 않는 효과적인 이미지 노이즈 제거 방법 및 장치에 대한 필요 및 요구가 있다.
본 발명은 여러 개의 예시적인 실시예에서, 이미징 장치에서 이미지 노이즈 제거를 가능하게 하는 방법 및 장치에 관한 것이다.
본 발명의 예시적인 실시예에 따르면, 그 방법 및 실행 장치는 식별된 픽셀에 대한 인접 픽셀 쌍을 포함하는 커널을 선택하고, 보정 커널 내의 픽셀 쌍에 대한 평균 출력 신호값을 판정하며, 평균값과 식별된 픽셀의 값의 차를 판정하고, 상기 차 값을 임계값과 비교하며, 임계값 이하인 차 값을 갖는 픽셀 쌍에 대한 식별된 픽셀의 값에 선택된 평균 픽셀 쌍 값을 통합한다.
본 발명의 상기 및 다른 이점 및 특징은 첨부하는 도면을 참조하여 이하에 제공되는 발명의 상세한 설명으로부터 더욱 쉽게 이해될 것이다.
도 1은 픽셀 어레이와 연결하여 사용되는 종래의 마이크로렌즈 및 컬러 필터 어레이의 평면도이다.
도 2A는 본 발명에 따른 픽셀 어레이의 적색 또는 청색 픽셀에 대한 이미지 보정 커널을 도시하는 도면이다.
도 2B는 본 발명에 따른 픽셀 어레이의 녹색 픽셀에 대한 보정 커널을 도시하는 도면이다.
도 3은 도 1의 보정 커널을 더욱 상세히 도시하는 도면이다.
도 4는 본 발명의 하나의 예시적인 방법에 따라 픽셀 노이즈를 보정하는 이미지 프로세서에 의해 실행되는 방법을 도시하는 플로우차트이다.
도 5는 본 발명의 하나의 예시적인 방법에 따라 구성된 이미저를 도시하는 블록도이다.
도 6은 본 발명의 일 실시예에 따라 구성된 적어도 하나의 이미징 장치를 내장하는 프로세서 시스템을 도시하는 도면이다.
이하의 상세한 설명에서는, 본 발명이 실시될 수 있는 특정 실시예의 예시에 의해 도시하고 그 일부를 형성하는 첨부하는 도면을 참조하여 설명을 행한다. 이들 실시예는 당업자가 본 발명을 실시하는 것이 가능하도록 충분히 상세히 기재되어 있으며, 다른 실시예가 이용될 수 있고, 본 발명의 사상 및 범위로부터 벗어남 없이 구조적, 논리적, 및 전기적인 변경이 이루어질 수 있는 것을 이해할 것이다. 기재된 처리 단계의 진행은 본 발명의 실시예의 예시이지만, 단계들의 순서는 여기에 나타내는 것에 한정되는 것은 아니며, 반드시 일정한 순서로 발생하는 단계들을 제외하고, 당업계에 알려진 바와 같이 변경될 수도 있다.
여기에서 사용되는 용어 "픽셀"은 광센서 장치와 광량자를 전기 신호로 변환하는 관련 구조들을 포함하는 광-요소 유닛 셀을 지칭한다. 예시할 목적으로, 본 명세서의 도면 및 설명에는 단일의 대표적인 3개의 컬러 픽셀 어레이가 도시된다. 그러나, 본 발명은 단색 이미저 뿐만 아니라 어레이 내에 3개 이상 또는 3개 미만의 컬러 성분을 감지하는 이미저에도 적용될 수 있다. 따라서, 이하의 상세한 설명은 제한할 의도로 취해진 것이 아니라, 본 발명의 범위는 첨부하는 청구의 범위에 의해서만 한정된다.
단독으로 취해지면, 픽셀은 광의 컬러를 입사하는 하나를 다른 것과 구별하지 않고 그 출력 신호가 컬러의 식별이 아닌 수신된 광의 강도만을 나타낸다는 것을 이해해야 한다. 그러나, 여기에서 논의되는 바와 같이, 픽셀(80)은, 컬러 필터(81)(도 1)가 특정 컬러에 대응하는 특정 파장범위의 광을 픽셀(80) 상에 초점을 맞추도록 사용될 때, 컬러에 의해 지칭된다(즉, "적색 픽셀", "청색 픽셀" 등). 도 1은 입사하는 광을 초점을 맞추도록 픽셀 어레이를 덮는 베이어 패턴(Bayer pattern)으로 배열된 하나의 예시적인 종래의 컬러 필터 어레이를 도시한다. 따라서, 용어 "적색 픽셀"이 여기에서 사용될 때, 그것은 적색 컬러 필터를 통과한 광에 관련하여 수광하는 픽셀을 지칭하고, 용어 "청색 픽셀"이 여기에서 사용될 때, 그것은 청색 컬러 필터를 통과한 광에 관련하여 수광하는 픽셀을 지칭하며, 용어 "녹색 픽셀"이 여기에서 사용될 때, 그것은 녹색 컬러 필터를 통과한 광에 관련하여 수광하는 픽셀을 지칭한다.
도 2A 및 도 2B는 본 발명에 따른 보정 방법이 행해질 수 있는 식별된 대상 픽셀(32a, 32b)을 갖는 픽셀 어레이(100, 110)의 부분을 도시한다. 픽셀 어레이(100) 내의 식별된 픽셀(32a)은 적색 또는 청색 픽셀 중 어느 것일 수 있다. 픽셀 어레이(100)는 녹색 픽셀인 식별된 픽셀(32b)을 갖는다.
예시된 예들에서는, 픽셀 어레이(100)가 베이어 패턴 컬러 필터 어레이(82)(도 1)와 관련되어 있지만, 본 발명은 다른 컬러 필터 패턴으로 사용될 수도 있다고 생각된다. 컬러 필터(81)는 특정 파장 범위의 입사 광을 하부 픽셀(80) 상에 초점을 맞춘다. 베이어 패턴에서는, 도 1에 도시된 바와 같이, 다른 픽셀 어레이 로우마다 번갈아 적색(R) 및 녹색(G) 컬러의 픽셀로 이루어지는 한편, 다른 로우들은 번갈아 녹색(G) 및 청색(B) 컬러 픽셀로 이루어진다.
본 발명의 예시적인 실시예들에 따르면, 픽셀을 노이즈 제거하기 위해, 본 발명은 식별된 픽셀(32a, 32b)의 가장 가까운 인접 픽셀의 신호 값들을 이용한다. 식별된 픽셀(32a, 32b)은 현재 처리되고 있는 픽셀이다. 인접 픽셀들은 여기에서는 집합적으로, 도 2A 및 도 2B에 각각 커널(101a, 101b)로 도시된 이미지 커널이라고 지칭된다. 총 8개의 인접 픽셀이 각 커널(101a, 101b)에 포함된다. 동일한 컬러의 8개의 인접 픽셀은 식별된 픽셀(32a, 32b)에 대칭인 4개의 쌍으로 분할된다. 예시된 보정 커널(101a, 101b)은 예시이고, 다른 보정 커널이 베이어 패턴과 다른 컬러 필터 패턴을 사용하여 픽셀 어레이에 대해 선택될 수 있다는 것에 주의하라. 또한, 보정 커널은 원하는 경우, 8개 초과 또는 미만의 인접 픽셀을 포함할 수 있다.
도 2A 및 도 2B에서, 예시적인 보정 커널(101a, 101b)이 점선으로 윤곽이 그려져 있다. 커널(101a)에 있어서, 식별 대상 픽셀(32a)과 동일한 컬러를 갖는 8개의 픽셀(픽셀들 10, 12, 14, 34, 54, 52, 50 및 30)이 존재한다. 보정 커널(101a)이16개의 픽셀을 포함하는 것이 나타나 있지만, 픽셀들의 1/2은 적색 또는 청색 대상 픽셀(32a)의 노이즈 제거에 사용하는 것으로 생각되지 않는 신호를 갖는 녹색 픽셀이라는 것에 주의해야 한다. 커널(101a)을 구성하는 실제의 픽셀들은 도 3에 더욱 상세히 도시된다. 커널(101b)은 또한, 식별된 픽셀(32b)과 동일한 녹색의 컬러를 갖는 8개의 픽셀(픽셀들 12, 23, 34, 52, 41, 30 및 21)을 포함한다.
도 4를 참조하여, 이하 본 발명의 예시적인 방법(200)을 설명한다. 그 방법은 이미지 처리 회로(280)(도 5를 참조하여 이하 설명한다)에 의해 실행될 수 있다. 각 픽셀은 픽셀에서 수광되는 광량을 나타내는 값을 갖는 것을 이해해야 한다. 픽셀로부터 판독되는 신호를 표시하지만, 그 값은 판독된 아날로그 신호의 디 지탈화된 표시이다. 이들 값은 아래의 설명에서는 P(픽셀)로 나타내며, 여기에서 "P"는 값이며 "x"는 도 2A 또는 도 2B에 도시된 픽셀 번호이다. 단지 예시할 목적으로, 방법(200)이 도 2A에 도시된 바와 같이, 커널(101a) 및 픽셀(32a)을 참조하여 기재된다.
처음 단계 201에서, 처리되고 있는 픽셀(32a)이 식별된다. 이어서, 단계 202에서, 커널(101a)이 선택/식별된다. 픽셀(32a)에 대해 관련된 커널(101a)이 선택된 후에, 픽셀(32a) 주위에 대칭적으로 위치하는 각각의 커널 픽셀이 쌍을 이루고, 각 쌍에 대한 평균값 Apair가 단계 203 동안 계산된다. 커널(101a)에 대한 픽셀 쌍들은 10과 54; 12와 52; 30과 34; 및 50과 14이다. 알 수 있는 바와 같이, 그 쌍들은 식별된 픽셀(32a)의 반대 측에 있는 픽셀들을 포함한다. 예를 들면, 픽셀 쌍(12, 52)에 대해, 평균값 A1252=(P12+P52)/2가 계산된다.
단계 204에서, 각 쌍의 픽셀에 대해, 픽셀 쌍 평균값과 처리되고 있는 픽셀(32a) 사이의 차 값 Dpair가 계산된다. 예를 들면, 픽셀 쌍(12, 52)에 대해, 차 값 D1252=│A1252-P32│가 계산된다. 이어서 단계 205에서, 모든 쌍들의 차 값 Dpair가 임계값 TH와 비교된다. 임계값 TH는 예컨대, 현재의 이득 설정으로부터의 노이즈 레벨을 사용하거나 다른 적절한 방법을 사용하여 미리 설정될 수도 있다.
이어서 단계 206에서, 임계값 TH 이하인 차 값 Dpair를 갖는 픽셀 쌍의 평균값 Apair가 픽셀값 P32a와 평균화된다. 예를 들어, 픽셀 쌍(12, 52 및 30, 34)에 대 한 차 값들 D1252, D3034만 임계값 TH 이하라면, 평균값 A1252 및 A3034가 P32a에 가산되고, 그 합은 3으로 나누어져 P32a의 값을 노이즈 제거한다. 하나의 예시적인 실시예에서, P32a의 값은 모두 4개의 차 값들이 임계 이하일 때 P32a의 원래 값 및/또는 4개의 평균값을 사용하여 계산된다. 이 실시예에서는, 차 값 Dpair가 임계값 TH 이하인 경우, 그 쌍의 평균값이 합에 가산되고, 그렇지 않으면 P32a의 값이 대신 가산된다. 따라서, 가장 가까운 이웃의 모두 4개의 쌍이 임계 이하인 경우, P32a의 원래 값이 P32a의 노이즈 제거된 값을 계산하는 데 사용되지 않는다. 그러나, 예를 들어, 차 값들 중 2개만이 임계 이하인 경우에는, P32a의 값이 P32a의 노이즈 제거된 값을 계산하기 위해 2회 사용된다(즉, P32a=Apair1+Apair2+P32a+P32a). 일반적으로, 2의 멱인 다수의 값을 평균하는 것(예컨대, 2, 4, 8 값 등을 평균하는 것)은 이미저에서 계산 및 적용하기가 용이하다. 따라서, 2의 멱인 다수의 값을 평균함으로써 본 발명을 실시하는 것이 더욱 용이해진다. 그러나, 본 발명은 이들 실시에 한정되는 것이 아니라, 임의의 적절한 수의 값을 사용하여 실시될 수도 있다.
여기에 설명한 방법은 처리되는 대로 각 픽셀 신호에 대해 실행될 수 있다. 픽셀값들이 노이즈 제거됨에 따라, 사전에 노이즈 제거된 픽셀들의 값들이 다른 픽셀값들을 노이즈 제거하는 데 사용될 수 있다. 그것에 의해, 여기에 설명한 방법 및 사전에 노이즈 제거된 픽셀들의 값들이 다른 픽셀들을 노이즈 제거할 때, 방법 및 장치가 부분적으로 순환적인 방식으로 실시된다(픽셀들이 사전에 노이즈 제거된 픽셀로부터의 값들을 사용하여 노이즈 제거된다). 그러나, 본 발명은 이 실시에 한정되지 않고, 완전히 순환적인(픽셀들이 다른 노이즈 제거된 픽셀로부터의 값들을 사용하여 노이즈 제거된다) 또는 비순환적인 방식(후속 픽셀을 노이즈 제거하는 데 노이즈 제거된 픽셀이 사용되지 않는다)으로 실시될 수 있다.
상술한 방법(200)은 또한 상기 논의된 바와 같이, 픽셀(32b) 및 관련 이미지 보정 커널(101b)에 대해 실시 및 실행될 수도 있다. 예를 들면, 단계 202에서, 커널(101b)이 선택/식별된다. 관련된 커널(101b)이 픽셀(32b)에 대해 선택된 후에, 픽셀(32b) 주위에 대칭적으로 위치하는 각각의 커널 픽셀들은 쌍을 이루고, 각 쌍에 대한 평균값 Apair가 단계 203 동안 계산된다. 커널(101b)에 대한 픽셀 쌍들은 30과 34; 12와 52; 21과 43; 및 41과 23이다. 나머지 단계 204∼206은 상기 논의된 바와 같이 실행된다.
상술한 실시예들은 스퓨리어스 노이즈(즉, 6 표준 편차 보다 더 큰 노이즈)를 제거하기에 충분한 노이즈 제거를 제공할 수 없다. 따라서, 본 발명은 이미지 데이터가 스퓨리어스 노이즈를 제거하는 필터에 의해 처리된 후에 실시될 때 더 잘 이용된다.
본 발명은 상술한 실시예에 한정되는 것은 아니다. 예를 들면, 상기 방법을 구현하는 프로그램이 RAM, 플로피 디스크, 데이터 송신, 컴팩트 디스크 등을 포함할 수 있는 캐리어 매체에 저장될 수 있고, 그 후 관련 프로세서에 의해 실행될 수 있다. 예를 들어, 본 발명은 기존의 소프트웨어 애플리케이션용 플러그-인으로서 실시될 수 있거나, 기존의 소프트웨어 애플리케이션 자체에 사용될 수도 있다. 본 발명은 여기에 특정된 캐리어 매체에 한정되는 것이 아니라, 본 발명은 당업계에 알려져 있는 바와 같은 임의의 캐리어 매체를 사용하여 실시될 수도 있다.
도 5는 예시적인 CMOS 픽셀 어레이(240)를 갖는 예시적인 이미징 장치(300)를 도시한다. 어레이(240)의 로우 라인은 로우 어드레스 디코더(255)에 응답하여 로우 드라이버(245)에 의해 선택적으로 활성화된다. 칼럼 드라이버(260) 및 칼럼 어드레스 디코더(270)가 또한 이미징 장치(300)에 포함된다. 이미징 장치(300)는 어드레스 디코더(255, 270)를 제어하는 타이밍 및 제어 회로(250)에 의해 동작한다. 제어 회로(250)는 또한 로우 및 칼럼 드라이버 회로(245, 260)를 제어한다.
칼럼 드라이버(260)와 관련된 샘플 및 홀드 회로(261)는 어레이(240)의 선택된 픽셀에 대한 픽셀 리셋 신호 Vrst 및 픽셀 이미지 신호 Vsig를 판독한다. 각 픽셀에 대해 차동 증폭기(262)에 의해 차분 신호(Vrst-Vsig)가 산출되어, 아날로그-디지털 컨버터(275)(ADC)에 의해 디지털화된다. 아날로그-디지털 컨버터(275)는 디지털화된 픽셀 신호를 디지털 이미지를 형성하여 출력할 수 있는 이미지 프로세서(280)에 공급한다. 이미지 프로세서(280)는 픽셀 어레이(240)에 대해 상기 방법(200)(도 4)을 실행할 수 있는 회로를 갖는다.
도 6은 본 발명의 이미징 장치(300)(도 5)를 포함하도록 변형된 일반적인 프로세서 시스템인 시스템(1100)을 도시한다. 시스템(1100)은 이미지 센서 장치를 포함할 수 있는 디지털 회로를 갖는 시스템의 예시이다. 제한됨 없이, 그러한 시 스템은 컴퓨터 시스템, 스틸 또는 비디오 카메라 시스템, 스캐너, 머신 비전, 비디오 폰, 및 자동 초점 시스템, 또는 다른 이미저 시스템을 포함할 수 있다. 이와 달리, 증폭기(262)와 ADC(275) 사이에 위치하는 유선 회로에 의해 픽셀 어레이의 아날로그 출력에 대해 처리가 행해질 수 있다.
시스템(1100) 예컨대, 카메라 시스템은 일반적으로 마이크로프로세서와 같은 중앙 처리 장치(CPU)(1102)를 포함하여, 버스(1104)를 통해 입/출력(I/O) 장치(1106)와 통신한다. 이미징 장치(300)는 또한 버스(1104)를 통해 CPU(1102)와 통신한다. 프로세서 기반 시스템(1100)은 또한 랜덤 액세스 메모리(RAM)(1110)를 포함하고, 버스(1104)를 통해 CPU(1102)와 또한 통신하는 플래시 메모리와 같은 착탈 가능한 메모리(1115)를 포함할 수 있다. 이미징 장치(300)는 단일 집적 회로 상 또는 프로세서와 다른 칩 상에 메모리 저장장치를 갖거나 갖지 않고, CPU, 디지털 신호 프로세서, 또는 마이크로프로세서와 같은 프로세서와 조합될 수 있다.
본 발명은 현대에 알려져 있는 예시적인 실시예들과 관련하여 더욱 상세히 설명하였지만, 본 발명이 그러한 개시된 실시예에 한정되는 것이 아님을 쉽게 이해해야 한다. 오히려, 본 발명은 지금까지 설명하지 않았지만 발명의 사상 및 범위에 적합한 임의의 수의 변형, 개변, 치환 또는 등가의 배치를 통합하도록 변형될 수 있다. 예를 들어, 상기 방법은 설명한 베이어 패턴과 다른 패턴으로 픽셀에 의해 사용될 수 있고, 보정 커널이 그에 따라 조정되어야 한다. 또한, 본 발명은 사용되는 이미저 장치의 타입에 한정되는 것은 아니다. 따라서, 본 발명은 이상의 설명에 의해 한정되는 것으로 보지 않고, 첨부되는 청구항들의 범위에 의해서만 제 한된다.
Claims (42)
- 식별된 픽셀을 둘러싸는 인접 픽셀의 세트를 선택하는 단계;각 쌍의 픽셀들이 상기 식별된 픽셀의 반대 측에 있는, 상기 세트 내의 픽셀의 각 쌍에 대해, 상기 쌍의 픽셀의 평균값을 판정하는 단계;픽셀의 각 쌍에 대해, 상기 식별된 픽셀값과 상기 픽셀 쌍의 상기 평균값 사이의 차를 계산하는 단계;픽셀의 각 쌍에 대해, 상기 차 값을 미리 정해진 임계값과 비교하는 단계; 및상기 비교에 의거하여 적어도 하나의 평균값을 노이즈 제거된 식별 픽셀값에 통합하는 단계를 포함하는, 픽셀값의 노이즈 제거 방법.
- 청구항 1에 있어서, 상기 통합하는 단계는,상기 임계값 이하인 각 차 값에 대해, 상기 평균값을 상기 노이즈 제거된 식별 픽셀값에 가산하는 단계; 및상기 노이즈 제거된 식별 픽셀값에 가산된 평균 쌍 값의 수에 의거하여 평균을 획득하는 단계를 더 포함하는, 픽셀값의 노이즈 제거 방법.
- 청구항 1에 있어서, 식별된 픽셀을 둘러싸는 픽셀의 상기 세트를 선택하는 상기 단계는 결함 픽셀과 동일한 컬러를 갖는 미리 정해진 수의 가장 가까운 픽셀 을 선택하는 단계를 포함하는, 픽셀값의 노이즈 제거 방법.
- 청구항 3에 있어서, 상기 가장 가까운 픽셀의 미리 정해진 수는 8인, 픽셀값의 노이즈 제거 방법.
- 청구항 1에 있어서, 상기 방법은 순환적인 방법으로 실행되는, 픽셀값의 노이즈 제거 방법.
- 청구항 1에 있어서, 상기 방법은 비순환적인 방법으로서 실행되는, 픽셀값의 노이즈 제거 방법.
- 청구항 1에 있어서, 상기 방법은 부분적으로 순환적인 방법으로서 실행되는, 픽셀값의 노이즈 제거 방법.
- 각 픽셀이 수광된 광량을 나타내는 신호를 출력하는, 복수의 픽셀을 포함하는 픽셀 어레이; 및적어도 하나의 식별된 픽셀값을, 상기 식별된 픽셀값을 대체하는 값을 제공함으로써 노이즈 제거하는 픽셀 노이즈 제거 회로를 포함하며, 상기 값은 평균 픽셀 쌍 값에서 도출된 값을 임계값과 비교하고, 적어도 하나의 평균 픽셀 쌍 값을 평균함으로써 얻어지는, 이미징 장치.
- 청구항 8에 있어서, 상기 노이즈 제거 회로는 상기 임계값을 저장하는, 이미징 장치.
- 청구항 8에 있어서, 상기 세트는 4개의 픽셀 쌍을 포함하는, 이미징 장치.
- 청구항 8에 있어서, 상기 노이즈 제거 회로는 각 픽셀 쌍에 대해 상기 평균값을 계산하는, 이미징 장치.
- 청구항 11에 있어서, 상기 노이즈 제거 회로는 각 쌍에 대해 계산된 상기 평균값과 상기 식별된 픽셀값 사이의 차를 계산하는, 이미징 장치.
- 청구항 12에 있어서, 상기 노이즈 제거 회로는 각 차 값을 상기 임계값과 비교하는, 이미징 장치.
- 청구항 13에 있어서, 상기 노이즈 제거 회로는 상기 식별된 픽셀값 및 상기 임계값 이하인 차 값을 갖는 상기 픽셀 쌍을 통합하는 상기 식별된 픽셀에 대한 평균값을 계산하는, 이미징 장치.
- 청구항 8에 있어서, 상기 값은 상기 식별된 픽셀값 및 적어도 하나의 평균 픽셀 쌍 값을 평균함으로써 계산되는, 이미징 장치.
- 청구항 15에 있어서, 상기 식별된 픽셀값은 상기 값을 계산하는 데 1회 이상 사용되는, 이미징 장치.
- 프로세서; 및상기 프로세서에 연결되는 이미징 장치를 포함하는 처리 시스템으로서,상기 이미징 장치는,각 픽셀이 수광된 광량을 나타내는 신호를 출력하는, 복수의 픽셀을 포함하는 픽셀 어레이; 및적어도 하나의 식별된 픽셀값을, 상기 식별된 픽셀값을 대체하는 값을 제공함으로써 노이즈 제거하는 픽셀 노이즈 제거 회로를 포함하며, 상기 값은 평균 픽셀 쌍 값에서 도출된 값을 임계값과 비교하고, 적어도 하나의 평균 픽셀 쌍 값을 평균함으로써 얻어지는, 처리 시스템.
- 청구항 17에 있어서, 상기 이미징 장치는 CMOS 이미저인, 처리 시스템.
- 청구항 17에 있어서, 상기 이미징 장치는 CCD 이미저인, 처리 시스템.
- 청구항 17에 있어서, 주어진 픽셀의 값이 그 픽셀에 의해 수광되는 광량의 디지털화된 표시인, 처리 시스템.
- 청구항 17에 있어서, 상기 노이즈 제거 회로는 각 픽셀 쌍에 대해 상기 평균값을 계산하는, 처리 시스템.
- 청구항 21에 있어서, 상기 노이즈 제거 회로는 각 쌍에 대해 계산된 상기 평균값과 상기 식별된 픽셀값 사이의 차를 계산하는, 처리 시스템.
- 청구항 22에 있어서, 상기 노이즈 제거 회로는 각 차 값을 상기 임계값과 비교하는, 처리 시스템.
- 청구항 23에 있어서, 상기 노이즈 제거 회로는 상기 식별된 픽셀값 및 상기 임계값 이하인 차 값을 갖는 상기 픽셀 쌍을 통합하는 상기 식별된 픽셀에 대한 평균값을 계산하는, 처리 시스템.
- 청구항 17에 있어서, 상기 값은 상기 식별된 픽셀값 및 적어도 하나의 평균 픽셀 쌍 값을 평균함으로써 계산되는, 처리 시스템.
- 청구항 25에 있어서, 상기 식별된 픽셀값은 상기 값을 계산하는 데 1회 이상 사용되는, 처리 시스템.
- 관련 프로그램을 갖는 프로세서로서, 상기 프로그램은, 상기 프로세서가식별된 픽셀을 둘러싸는 인접 픽셀의 세트를 선택하는 단계;각 쌍의 픽셀들이 상기 식별된 픽셀의 반대 측에 있는, 상기 세트 내의 픽셀의 각 쌍에 대해, 상기 쌍의 픽셀의 평균값을 판정하는 단계;픽셀의 각 쌍에 대해, 상기 식별된 픽셀값과 상기 픽셀 쌍의 상기 평균값 사이의 차를 계산하는 단계;픽셀의 각 쌍에 대해, 상기 차 값을 미리 정해진 임계값과 비교하는 단계; 및상기 비교에 의거하여 적어도 하나의 평균값을 노이즈 제거된 식별 픽셀값에 통합하는 단계를 실행함으로써 이미지를 노이즈 제거할 수 있게 하는, 프로세서.
- 청구항 27에 있어서, 상기 통합하는 단계는,상기 임계값 이하인 각 차 값에 대해, 상기 평균값을 상기 노이즈 제거된 식별 픽셀값에 가산하는 단계; 및상기 노이즈 제거된 식별 픽셀값에 가산된 평균 쌍 값의 수에 의거하여 평균을 획득하는 단계를 더 포함하는, 방법.
- 청구항 27에 있어서, 식별된 픽셀을 둘러싸는 픽셀의 상기 세트를 선택하는 상기 단계는 결함 픽셀과 동일한 컬러를 갖는 미리 정해진 수의 가장 가까운 픽셀 을 선택하는 단계를 포함하는, 방법.
- 청구항 29에 있어서, 상기 가장 가까운 픽셀의 미리 정해진 수는 8인, 방법.
- 청구항 27에 있어서, 상기 방법은 순환적인 방법으로 실행되는, 방법.
- 청구항 27에 있어서, 상기 방법은 비순환적인 방법으로 실행되는, 방법.
- 청구항 27에 있어서, 상기 방법은 부분적으로 순환적인 방법으로 실행되는, 방법.
- 청구항 28에 있어서,상기 식별된 픽셀값을 상기 평균 계산에 통합하는 단계를 더 포함하는, 방법.
- 식별된 픽셀을 둘러싸는 인접 픽셀의 세트를 선택하는 단계;각 쌍의 픽셀들이 상기 식별된 픽셀의 반대 측에 있는, 상기 세트 내의 픽셀의 각 쌍에 대해, 상기 쌍의 픽셀의 평균값을 판정하는 단계;픽셀의 각 쌍에 대해, 상기 식별된 픽셀값과 상기 픽셀 쌍의 상기 평균값 사이의 차를 계산하는 단계;픽셀의 각 쌍에 대해, 상기 차 값을 미리 정해진 임계값과 비교하는 단계; 및상기 비교에 의거하여 적어도 하나의 평균값을 노이즈 제거된 식별 픽셀값에 통합하는 단계를 포함하는, 이미지를 노이즈 제거하도록 프로세서를 동작시키는 프로그램을 포함하는, 캐리어 매체.
- 청구항 35에 있어서, 상기 통합하는 단계는,상기 임계값 이하인 각 차 값에 대해, 상기 평균값을 상기 노이즈 제거된 식별 픽셀값에 가산하는 단계; 및상기 노이즈 제거된 식별 픽셀값에 가산된 평균 쌍 값의 수에 의거하여 평균을 획득하는 단계를 더 포함하는, 캐리어 매체.
- 청구항 35에 있어서, 식별된 픽셀을 둘러싸는 픽셀의 상기 세트를 선택하는 상기 단계는 결함 픽셀과 동일한 컬러를 갖는 미리 정해진 수의 가장 가까운 픽셀을 선택하는 단계를 포함하는, 캐리어 매체.
- 청구항 37에 있어서, 상기 가장 가까운 픽셀의 미리 정해진 수는 8인, 캐리어 매체.
- 청구항 35에 있어서, 상기 방법은 순환적인 방법으로 실행되는, 캐리어 매 체.
- 청구항 35에 있어서, 상기 방법은 비순환적인 방법으로 실행되는, 캐리어 매체.
- 청구항 35에 있어서, 상기 방법은 부분적으로 순환적인 방법으로 실행되는, 캐리어 매체.
- 청구항 36에 있어서,상기 식별된 픽셀값을 상기 평균 계산에 통합하는 단계를 더 포함하는, 캐리어 매체.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/302,120 US20070133893A1 (en) | 2005-12-14 | 2005-12-14 | Method and apparatus for image noise reduction |
US11/302,120 | 2005-12-14 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20080078044A true KR20080078044A (ko) | 2008-08-26 |
Family
ID=37875726
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020087016605A KR20080078044A (ko) | 2005-12-14 | 2006-12-12 | 이미지 노이즈를 감소시키는 방법 및 장치 |
Country Status (7)
Country | Link |
---|---|
US (1) | US20070133893A1 (ko) |
EP (1) | EP1961211A1 (ko) |
JP (1) | JP2009520403A (ko) |
KR (1) | KR20080078044A (ko) |
CN (1) | CN101356799A (ko) |
TW (1) | TW200806010A (ko) |
WO (1) | WO2007070464A1 (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140042016A (ko) * | 2012-09-26 | 2014-04-07 | 삼성전자주식회사 | 이벤트 기반 비전 센서를 이용한 근접 센서 및 근접 센싱 방법 |
US11729523B2 (en) | 2020-10-12 | 2023-08-15 | Samsung Electronics Co., Ltd. | Method of testing image sensor using frequency domain, test system performing the same and method of manufacturing image sensor using the same |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7639889B2 (en) | 2004-11-10 | 2009-12-29 | Fotonation Ireland Ltd. | Method of notifying users regarding motion artifacts based on image analysis |
US8180173B2 (en) | 2007-09-21 | 2012-05-15 | DigitalOptics Corporation Europe Limited | Flash artifact eye defect correction in blurred images using anisotropic blurring |
US8131072B2 (en) * | 2007-11-26 | 2012-03-06 | Aptina Imaging Corporation | Method and apparatus for reducing image artifacts based on aperture-driven color kill with color saturation assessment |
FR2941067B1 (fr) * | 2009-01-14 | 2011-10-28 | Dxo Labs | Controle de defauts optiques dans un systeme de capture d'images |
JP5251637B2 (ja) * | 2009-03-16 | 2013-07-31 | 株式会社リコー | ノイズ低減装置、ノイズ低減方法、ノイズ低減プログラム、記録媒体 |
JP5868090B2 (ja) * | 2011-09-20 | 2016-02-24 | 三菱電機株式会社 | 画像処理装置、画像処理方法、撮像装置、コンピュータプログラム及びコンピュータ読み取り可能な記録媒体 |
US9104941B1 (en) * | 2011-12-02 | 2015-08-11 | Marvell International Ltd. | Method and apparatus for reducing noise in a scanned image while minimizing loss of detail in the scanned image |
KR101910870B1 (ko) | 2012-06-29 | 2018-10-24 | 삼성전자 주식회사 | 잡음 제거 장치, 시스템 및 방법 |
TWI542217B (zh) | 2014-03-12 | 2016-07-11 | 瑞昱半導體股份有限公司 | 像素值校正裝置與方法 |
CN103945146B (zh) * | 2014-04-08 | 2017-05-24 | 武汉烽火众智数字技术有限责任公司 | 一种图像传感器输出降噪方法以及一种摄像设备 |
CN105096262B (zh) * | 2014-05-22 | 2018-03-27 | 安凯(广州)微电子技术有限公司 | 图像滤波方法和装置 |
CN104717401B (zh) * | 2015-03-30 | 2017-12-29 | 北京三好互动教育科技有限公司 | 一种去除奇点噪声的方法及装置 |
CN104954704B (zh) * | 2015-06-01 | 2018-08-31 | 北京华泰诺安探测技术有限公司 | 一种用于拉曼光谱仪ccd信号降噪方法 |
US11157345B2 (en) * | 2017-12-15 | 2021-10-26 | Texas Instruments Incorporated | Methods and apparatus to provide an efficient safety mechanism for signal processing hardware |
KR102600681B1 (ko) | 2019-03-26 | 2023-11-13 | 삼성전자주식회사 | 비닝을 수행하는 테트라셀 이미지 센서 |
KR20220148423A (ko) | 2021-04-29 | 2022-11-07 | 삼성전자주식회사 | 이미지의 노이즈를 감소하는 노이즈 저감 방법 및 노이즈 저감 장치 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4573070A (en) * | 1977-01-31 | 1986-02-25 | Cooper J Carl | Noise reduction system for video signals |
US4694342A (en) * | 1986-05-01 | 1987-09-15 | Eastman Kodak Company | Spatial filter useful for removing noise from video images and for preserving detail therein |
AU687045B2 (en) * | 1993-03-31 | 1998-02-19 | Luma Corporation | Managing information in an endoscopy system |
US5771318A (en) * | 1996-06-27 | 1998-06-23 | Siemens Corporate Research, Inc. | Adaptive edge-preserving smoothing filter |
US6882364B1 (en) * | 1997-12-02 | 2005-04-19 | Fuji Photo Film Co., Ltd | Solid-state imaging apparatus and signal processing method for transforming image signals output from a honeycomb arrangement to high quality video signals |
US6625325B2 (en) * | 1998-12-16 | 2003-09-23 | Eastman Kodak Company | Noise cleaning and interpolating sparsely populated color digital image using a variable noise cleaning kernel |
US6633683B1 (en) * | 2000-06-26 | 2003-10-14 | Miranda Technologies Inc. | Apparatus and method for adaptively reducing noise in a noisy input image signal |
SE516346C2 (sv) * | 2000-10-06 | 2001-12-17 | Xcounter Ab | Metod för reducering av högfrekvent brus i bilder med hjälp av medelvärdesbildning av pixlar och parvis addering av pixelpar som uppfyller ett villkor |
US6937772B2 (en) * | 2000-12-20 | 2005-08-30 | Eastman Kodak Company | Multiresolution based method for removing noise from digital images |
JP3983101B2 (ja) * | 2001-05-25 | 2007-09-26 | 株式会社リコー | 画像処理装置、画像読み取り装置、画像形成装置およびカラー複写装置 |
EP1289309B1 (en) * | 2001-08-31 | 2010-04-21 | STMicroelectronics Srl | Noise filter for Bayer pattern image data |
US6937775B2 (en) * | 2002-05-15 | 2005-08-30 | Eastman Kodak Company | Method of enhancing the tone scale of a digital image to extend the linear response range without amplifying noise |
WO2004002135A1 (ja) * | 2002-06-25 | 2003-12-31 | Matsushita Electric Industrial Co., Ltd. | 動き検出装置及びそれを用いたノイズリダクション装置 |
-
2005
- 2005-12-14 US US11/302,120 patent/US20070133893A1/en not_active Abandoned
-
2006
- 2006-12-12 KR KR1020087016605A patent/KR20080078044A/ko not_active Application Discontinuation
- 2006-12-12 WO PCT/US2006/047201 patent/WO2007070464A1/en active Application Filing
- 2006-12-12 EP EP06845193A patent/EP1961211A1/en not_active Withdrawn
- 2006-12-12 CN CNA2006800508192A patent/CN101356799A/zh active Pending
- 2006-12-12 JP JP2008545714A patent/JP2009520403A/ja not_active Withdrawn
- 2006-12-14 TW TW095146893A patent/TW200806010A/zh unknown
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20140042016A (ko) * | 2012-09-26 | 2014-04-07 | 삼성전자주식회사 | 이벤트 기반 비전 센서를 이용한 근접 센서 및 근접 센싱 방법 |
US11729523B2 (en) | 2020-10-12 | 2023-08-15 | Samsung Electronics Co., Ltd. | Method of testing image sensor using frequency domain, test system performing the same and method of manufacturing image sensor using the same |
Also Published As
Publication number | Publication date |
---|---|
TW200806010A (en) | 2008-01-16 |
CN101356799A (zh) | 2009-01-28 |
JP2009520403A (ja) | 2009-05-21 |
WO2007070464A1 (en) | 2007-06-21 |
EP1961211A1 (en) | 2008-08-27 |
US20070133893A1 (en) | 2007-06-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101000268B1 (ko) | 이미저에 대해 에지를 유지하면서 노이즈 감소를 제공하는방법 및 장치 | |
KR20080078044A (ko) | 이미지 노이즈를 감소시키는 방법 및 장치 | |
US7756355B2 (en) | Method and apparatus providing adaptive noise suppression | |
US9287316B2 (en) | Systems and methods for mitigating image sensor pixel value clipping | |
US8035704B2 (en) | Method and apparatus for processing a digital image having defective pixels | |
US8442345B2 (en) | Method and apparatus for image noise reduction using noise models | |
JP4846608B2 (ja) | 固体撮像装置 | |
US8018516B2 (en) | Solid-state image sensor and signal processing method of same | |
US20070030365A1 (en) | Correction of cluster defects in imagers | |
US7830428B2 (en) | Method, apparatus and system providing green-green imbalance compensation | |
EP1969860A1 (en) | Method and apparatus for gray value identification for white balance | |
US8400534B2 (en) | Noise reduction methods and systems for imaging devices | |
US11431924B2 (en) | Image capturing apparatus and control method thereof | |
US20090237530A1 (en) | Methods and apparatuses for sharpening images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
N231 | Notification of change of applicant | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |