KR20060124534A - 화상 신호 처리 장치 및 화상 신호 처리 방법 - Google Patents

화상 신호 처리 장치 및 화상 신호 처리 방법 Download PDF

Info

Publication number
KR20060124534A
KR20060124534A KR1020050086350A KR20050086350A KR20060124534A KR 20060124534 A KR20060124534 A KR 20060124534A KR 1020050086350 A KR1020050086350 A KR 1020050086350A KR 20050086350 A KR20050086350 A KR 20050086350A KR 20060124534 A KR20060124534 A KR 20060124534A
Authority
KR
South Korea
Prior art keywords
signal
pixel
color
level signal
image
Prior art date
Application number
KR1020050086350A
Other languages
English (en)
Other versions
KR100748196B1 (ko
Inventor
고지 오카다
Original Assignee
후지쯔 가부시끼가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후지쯔 가부시끼가이샤 filed Critical 후지쯔 가부시끼가이샤
Publication of KR20060124534A publication Critical patent/KR20060124534A/ko
Application granted granted Critical
Publication of KR100748196B1 publication Critical patent/KR100748196B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/68Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/86Camera processing pipelines; Components thereof for processing colour signals for controlling the colour saturation of colour signals, e.g. automatic chroma control circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • H04N25/633Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current by using optical black pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H04N25/671Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/72Circuits for processing colour signals for reinsertion of DC and slowly varying components of colour signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/87Camera processing pipelines; Components thereof for processing colour signals for reinsertion of DC or slowly varying components of colour signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Processing Of Color Television Signals (AREA)
  • Image Input (AREA)
  • Image Processing (AREA)
  • Color Image Communication Systems (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 색간의 감도가 다른 화소 신호에 대해서, 다이내믹 레인지를 활용할 수 있는 색 레벨 신호를 구할 수 있는 화소 신호 처리 장치 및 화소 신호 처리 방법을 제공하는 것을 과제로 한다.
화상 디바이스의 색 화소로부터 제공되는 화소 신호를 처리함에 있어서, 색 화소간의 감도를 조정하기 위해서, 색 화소마다의 화소 신호에 대한 제1 증폭도가 조정되는 제1 증폭기와, 제1 증폭기로부터 출력되는 감도 조정된 화소 신호 중 최대 신호 강도의 색 레벨 신호를, 후단의 화상 처리에 있어서의 다이내믹 레인지에 상당하는 신호 강도로 하는 제2 증폭도로 감도 조정된 화소 신호를 증폭하는 제2 증폭기와, 제2 증폭기에 의해 증폭된 화소 신호로부터 흑 레벨 신호의 성분을 감산하는 연산기를 포함한다. 색간의 감도 조정한 뒤에 화상 처리의 다이내믹 레인지까지 색 레벨 신호를 증폭할 수 있다.

Description

화소 신호 처리 장치 및 화소 신호 처리 방법{IMAGE SIGNAL PROCESSING UNIT AND METHOD}
도 1은 화상 디바이스에 있어서의 화소 배열의 개념도이다.
도 2는 화상 디바이스로부터 출력되는 출력 신호를 도시한 도면이다.
도 3은 실시형태의 화소 신호 처리 장치의 회로 블록도이다.
도 4는 제1 증폭기(CDSamp)에 의한 감도 조정을 도시하는 개념도이다.
도 5는 제2 증폭기(PGA) 및 연산기에 의한 처리를 도시하는 개념도이다.
도 6은 실시형태의 화소 신호 처리 방법의 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
1 : 화상 디바이스
2 : 유효 화소 영역
3 : 차광 영역
10 : 화소 신호 처리 장치
11 : CDS 회로
12 : 제1 증폭기(CDSamp)
13 : 제2 증폭기(PGA)
14 : 연산기
15 : A/D 변환기(ADC)
16 : D/A 변환기(DAC)
17 : 레지스터부
20 : DSP부
B : 청색 화소
G : 녹색 화소
R : 적색 화소
CR, CG, CB : 색 레벨 신호
CCDIN : 화상 디바이스로부터 출력되는 출력 신호
OBR, OBG, OBB : 흑 레벨 신호
G1R, G1G, G1B : 제1 증폭도
G2 : 제2 증폭도
특허문헌 1 : 일본 특허 공개 2001-28716호 공보(0019, 0020 단락)
본 발명은 화소 신호의 처리 장치에 관한 것으로, 특히 유효 화소 영역의 신호 레벨의 증폭에 관한 것이다.
특허문헌 1에는 픽셀 신호 이득 증폭(PxGA) 회로를 개시하고 있다. CCD로부 터 출력되는 픽셀 신호를 증폭함에 있어서, 진폭에 변동이 있는 픽셀 신호가 CDS(Correlated Double Sampling) 회로에 입력되어, CDS 회로로부터 PxGA 회로에 공급된다. PxGA 회로에서는 픽셀 신호의 각각을 각각의 색마다 개별적으로 설정 변경 가능한 이득으로 증폭하여, 픽셀 신호간의 레벨을 고르게 하도록 한다. 이들 신호를 가변 이득 증폭기로 더욱 증폭하여, 증폭된 잡음을 포함하는 증폭된 픽셀 신호를 구한다.
여기서, CCD 등의 화상 디바이스를 구성하는 각 화소로부터 CDS 회로를 거쳐 출력되는 화소 신호는 색 레벨 신호에 흑 레벨 신호가 중첩된 신호이다. 흑 레벨 신호란 차광된 상태에 있어서도 출력되어 버리는 신호이며, 암전류가 누설 전류로서 흘러서 주로 발생하는 신호이다. 암전류 등의 누설 전류는 화상 디바이스의 온도, 디바이스 구조, 제조 변동 등에 따라서 생성되는 전류이며, 화소 별로 상관없이 흐르기 때문에, CDS 회로로부터 출력되는 화소 신호는 유효한 화상 정보인 색 레벨 신호에 잡음 성분인 흑 레벨 신호가 중첩되게 된다.
특허문헌 1에서는, PxGA 회로 및 가변 이득 증폭기에 있어서, CDS 회로로부터 출력되는 화소 신호를 증폭하는데, 이 때 색 레벨 신호와 함께 흑 레벨 신호도 동시에 증폭되게 된다. 따라서, 외관상, 증폭된 화소 신호가 후단의 AD 컨버터에 있어서의 다이내믹 레인지 최대한의 신호 레벨이라고 하더라도, 이 화소 신호에는 증폭된 잡음 성분인 흑 레벨 신호를 포함하게 된다. 화상 정보로서 유효한 색 레벨 신호를 AD 컨버터에 있어서의 다이내믹 레인지 최대한으로 증폭할 수는 없으며, 전 달되는 화상 정보의 분해능이 저하되어 버릴 우려가 있다. 화상 디바이스로부터 제공되는 화상 정보가 열화되어 버릴 우려가 있어 문제가 된다.
화소 신호가 외관상 다이내믹 레인지까지 증폭되어 있기는 하지만, 색 레벨 신호와 함께 잡음 성분인 흑 레벨 신호가 중첩되어 있기 때문에, 유효한 화상 정보의 분해능이 열화되어 버릴 우려가 있어 문제가 된다.
본 발명은 상기 배경 기술에 감안하여 이루어진 것으로, 색간의 감도가 다른 색 레벨 신호에 흑 레벨 신호가 중첩되어 이루어는 화소 신호에 대해서, 색간의 색 레벨 신호의 감도를 조정한 뒤에 화상 처리 가능한 다이내믹 레인지 최대한까지 색 레벨 신호를 증폭하여, 증폭된 각 화소 신호로부터 흑 레벨 신호를 상쇄하기 때문에, 다이내믹 레인지를 완전히 활용할 수 있는 색 레벨 신호를 얻어 화상 처리가 이루어지는 화소 신호 처리 장치 및 화소 신호 처리 방법을 제공하는 것을 목적으로 한다.
상기 목적을 달성하기 위해서, 본 발명에 따른 화소 신호 처리 장치는, 화상 디바이스의 색 화소로부터 제공되는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 장치로서, 색 화소간의 감도를 조정하기 위해서, 색 화소마다의 화소 신호에 대한 제1 증폭도가 조정되는 제1 증폭기와, 제1 증폭기로부터 출력되는 감도 조정된 화소 신호 중 최대 신호 강도의 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지에 상당하는 신호 강도로 하는 제2 증폭도로 감도 조정된 화소 신호를 증폭하는 제2 증폭기와, 제2 증폭기에 의해 증폭된 화소 신호로부터 흑 레벨 신호의 성분을 감산하는 연산기를 포함하는 것을 특징으로 한다.
본 발명의 화소 신호 처리 장치에서는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리할 때, 제1 증폭기에 있어서의 제1 증폭도가 색 화소마다 조정되어 색 화소간의 감도가 조정된다. 제2 증폭기에서는, 감도 조정된 화소 신호를 제2 증폭도로 증폭한다. 또한 연산기에서는, 제2 증폭기에 의해 증폭된 화소 신호로부터 흑 레벨 신호의 성분이 감산된다. 감도 조정된 화소 신호가 제2 증폭도로 증폭되어, 색 레벨 신호에 있어서의 최대 신호 강도가 다이내믹 레인지에 상당하는 신호 강도가 되도록 화소 신호가 증폭된 뒤에, 흑 레벨 신호의 성분이 감산됨으로써, 다이내믹 레인지를 완전히 활용하는 것이 가능한 색 레벨 신호가 추출된다. 색 화소에 있어서 취득되는 유효한 화상 정보인 색 레벨 신호가 후단의 화상 처리에 있어서의 다이내믹 레인지까지 신호 증폭된다.
또, 본 발명에 따른 화소 신호 처리 방법은 화상 디바이스의 색 화소로부터 제공되는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 방법으로서, 색 화소마다 화소 신호를 개별적으로 증폭하여, 색 화소간의 감도를 조정하는 단계와, 감도 조정의 단계에 의해 구해지는 감도 조정된 화소 신호를 증폭하여, 화소 신호의 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지까지 확대히는 단계와, 감도 조정된 화소 신호를 증폭하는 단계에 의해 구해지는 화소 신호로부터 흑 레벨 신호의 성분을 감산하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 화소 신호 처리 방법에서는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리할 때, 색 화소마다 화소 신호를 개별적으로 증폭하여, 색 화소간의 감도를 조정한 뒤에, 화소 신호에 있어서의 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지까지 확대하도록 감도 조정된 화소 신호를 증폭하며, 거기로부터 흑 레벨 신호의 성분을 감산하여, 다이내믹 레인지를 완전히 활용하는 것이 가능한 신호 레벨의 색 레벨 신호를 추출한다.
이하, 본 발명의 화소 신호 처리 장치 및 화소 신호 처리 방법에 대해서 구체화된 실시형태를 도 1 내지 도 6에 기초하여 도면을 참조하면서 상세히 설명한다.
본 발명은 동화상 혹은 정지 화상을 표시함에 있어서, 화상 정보가 반복 취득되어 화상 처리가 이루어지는 경우에 적용되는 것이다. 이하, 화상 처리 장치의 일례로서 디지털 카메라를 예로 설명한다.
도 1은 디지털 카메라 등에 탑재되는 CCD 디바이스 등의 화상 디바이스로서, 하나의 화상 디바이스에, 적색 화소(R), 녹색 화소(G) 및 청색 화소(B)의 3원색의 색 화소(R, G, B)를 갖추어 화상 정보를 취득하는 단판의 화상 디바이스(1)에 대해서 화소 배열의 일례를 도시하는 개념도이다.
화상 디바이스(1)에 있어서, 유효한 화상 정보가 취득되는 색 화소(R, G, B)가 배치되어 있는 유효 화소 영역(2)에는 도 1의 가로 방향으로, 적색 화소(R) 및 녹색 화소(G)가 교대로 배치되는 가로열과, 녹색 화소(G)와 및 청색 화소(B)가 교대로 배치되는 가로열이 인접하는 가로열 사이에서 녹색 화소(G)가 세로 방향으로 늘어서지 않도록 교대로 배치되어 있다. 소위 베이어 배열(bayer array)이라 불리는 화소 배열이다.
화상 디바이스(1)는 통상, 유효 화소 영역(2)의 주연부에, 은(Ag)이나 알루미늄(Al) 등의 피막으로 차광된 차광 영역(3)을 갖추고 있다. 차광 영역(3)은 OB 영역이라고도 불리며, 빛을 통과시키지 않고 화상 정보가 취득되지 않으므로, 흑 레벨 영역이라고도 불린다. 차광 영역(OB 영역)(3)에서는 차광된 상태이며 화상 정보에 기초한 색 레벨 신호는 생성되지 않지만, 암전류가 누설 전류로서 흘러서 주로 발생하는 잡음 성분인 흑 레벨 신호가 생성된다. 암전류 등의 누설 전류는 화상 디바이스(1)의 온도, 화상 디바이스(1)의 구조, 제조 변동 등에 따라서 생성되는 전류이며, 차광 영역(OB 영역)(3), 유효 화소 영역(2) 구분 없이, 모든 화소에서 흐른다.
화상 디바이스(1)는 가로 방향으로 주사되는데, 그 때 화상 디바이스(1)로부터 출력되는 출력 신호(CCDIN)를, 적색 화소(R) 및 녹색 화소(G)가 교대로 배치되는 가로열에 관해서 도시한 파형이 도 2이다. 프리차지 기간(Pre)을 사이에 두고, 각 화소로부터 화소 신호가 출력된다. 최초의 2 사이클은 OB 영역으로부터 출력되는 흑 레벨 신호(OBR, OBG)이다. 다음 사이클에서부터 순차적으로 적색 화소(R)와 녹색 화소(G)가 교대로 출력된다. 각 색 화소(R, G)에서는, 유효한 화상 정보에 따라서 색 화소(R, G)마다 신호 강도가 다른 색 레벨 신호(CR, CG)에, 잡음 성분으로서 색 화소(R, G)간에 동등한 신호 강도를 갖는 흑 레벨 신호(OBR, OBG)가 중첩된 신호가 화소 신호로서 출력된다. 정확한 화상 정보를 구하기 위해서는, 각 색 화소 (R, G, B)에 있어서, 색 레벨 신호(CR, CG, CB)에 영향을 주지 않는 범위에서, 화소 신호로부터 흑 레벨 신호(OBR, OBG, OBB)를 제거하는 것이 중요하다.
여기서, 흑 레벨 신호(OBR, OBG, OBB)의 신호 강도는 색 화소(R, G, B) 사이에서 큰 차는 없지만, 흑 레벨 신호가 암전류 등의 누설 전류로 인해 주로 발생하고, 암전류 등의 누설 전류는 디바이스 특성에 의존할 가능성이 있으므로, 색 화소(R, G, B)마다 흑 레벨 신호(OBR, OBG, OBB)의 신호 강도가 다른 경우도 생각된다. 따라서, 화소 신호로부터 흑 레벨 신호(OBR, OBG, OBB)를 제거함에 있어서는, 색 화소(R, G, B)마다 흑 레벨 신호(OBR, OBG, OBB)를 추정하는 것이 바람직하다. 차광 영역(OB 영역)(3)에 배치하는 화소를, 동일한 가로열의 유효 화소 영역(2)의 배열에 따라서 배열함으로써, 각 색 화소(R, G, B)마다의 흑 레벨 신호(OBR, OBG, OBB)를 취득할 수 있다.
또, 차광 영역(OB 영역)(3) 중, 주사 영역 외부에 있는 화상 디바이스(1)의 상하 단부에 대해서도, 인접하는 가로열과의 관계에서 대응하는 색 화소가 배치되고 있기 때문에, 이 부분에 대해서도 흑 레벨 신호를 취득하기 위해서, 주사 영역을 확장할 수도 있다.
도 3에 도시하는 실시형태의 회로 블록도에서는, 화소 신호 처리 장치(10)와 DSP부(20)를 구비하고 있다. 화상 디바이스(1)(도 1)로부터 출력되는 출력 신호(CCDIN)는 화소 신호 처리 장치(10)에 입력된다. 출력 신호(CCDIN)는 아날로그 신호이며, 화소 신호 처리 장치(10)에 있어서, 신호 증폭 등의 아날로그 처리가 이루어진다. 아날로그 처리된 신호는 A/D 변환되어, 디지털 신호로서 DSP부(20)에 출력 된다. DSP부(20)에서는, 초점이나 노출 등의 자동 조정을 비롯한 화상 처리가 이루어진다. 화상 처리된 화소 신호는 필요에 따라서 연산 처리된 뒤에 화소 신호 처리 장치(10)로 반환된다. 이에 따라, 화소 신호 처리 장치(10)에서는, 화상 디바이스(1)로부터의 다음의 출력 신호(CCDIN)에 적격인 아날로그 처리의 조건이 설정된다.
화소 신호 처리 장치(10)에서는, 출력 신호(CCDIN)가 입력되는 CDS 회로(11)는 제1 증폭기(CDSamp)(12)에 접속되고, 제1 증폭기(CDSamp)(12)는 제2 증폭기(PGA)(13)에 접속되어 있다. 연산기(14)는 가산 단자(+)가 제2 증폭기(PGA)(13)에 접속되고, 감산 단자(-)가 D/A 변환기(DAC)(16)에 접속되어 있다. 연산기(14)의 출력은 A/D 변환기(ADC)(15)에 접속되어, A/D 변환기(ADC)(15)로부터 DSP부(20)에, A/D 변환된 색 레벨 신호가 보내진다. 또, 레지스터부(17)는 DSP부(20)에서 연산되어 화소 신호 처리 장치(10)에 있어서의 아날로그 신호 처리에 있어서 필요하게 되는 각종 파라메터가 저장된다.
레지스터(17A 내지 17C)에 저장되어 있는 파라메터는 제1 증폭기(CDSamp)(12)에 입력된다. 색 화소(R, G, B) 사이에서 다른 감도를 조정할 때의 제1 증폭기(CDSamp)(12)에서의 제1 증폭도(G1)가 저장되어 있다. 또한, 레지스터(17D)에 저장되어 있는 파라메터는 제2 증폭기(PGA)(13)에 입력된다. 화상 정보로서 유효한 색 레벨 신호를 A/D 변환기(ADC)(15)의 다이내믹 레인지까지 확대하기 위한 제2 증폭도(G2)가 저장되어 있다. 또한, 레지스터(17E 내지 17G)에 저장되어 있는 파라메터는 D/A 변환기(DAC)(16)에 입력된다. 연산기(14)에 있어서, 제1 및 제2 증폭기(12, 13)에서 증폭된 화소 신호로부터 흑 레벨 신호(OB)를 제거하기 위 해서, 차광 영역(OB 영역)(3)에서의 흑 레벨 신호(OB)가 색 화소마다 저장되어 있다.
제1 증폭기(CDSamp)(12), A/D 변환기(ADC)(15) 및 D/A 변환기(DAC)(16)에는 타이밍 신호(CLK)가 입력된다. 타이밍 신호(CLK)는 화상 디바이스(1)의 주사에 있어서 화소의 전환에 따라서 발생하는 신호이다. 또한, 연산기(14)의 인에이블 단자(EN)에는 OB 클램프 신호(CLPOB)가 부논리로 입력된다. OB 클램프 신호(CLPOB)는 화상 디바이스(1)의 차광 영역(OB 영역)(3)을 주사하는 기간에 활성화되는 신호이다. 여기서는 하이 레벨의 상태를 활성화 상태로 하여 구성되어 있다.
이어서, 상기한 구성을 갖는 화소 신호 처리 장치(10)의 동작을 설명한다. 화상 디바이스(1)로부터 출력되는 출력 신호(CCDIN)에는 2종류의 신호가 포함되어 있다. CDS 회로(11)는 각각의 신호가 출력되는 타이밍에 따라서 출력 신호(CCDIN)를 샘플링하여 이들 신호를 취득한다. 그 하나는 리셋 레벨 신호이다. 프리차지 기간(Pre)(도 2 참조)에서 샘플링되는 기준 신호이다. 다른 하나는 프리차지 기간(Pre)에 이어지는 화소 신호의 판독 기간에 있어서 샘플링되는 신호이다. 이 신호의 리셋 레벨 신호로부터의 차신호가 화소 신호가 된다. CDS 회로(11)는 도시하지 않는 타이밍 신호에 기초하여, 프리차지 기간(Pre)과 이것에 이어지는 화소 신호의 판독 기간에 출력 신호(CCDIN)를 샘플링하여, 차신호인 화소 신호를 출력한다.
CDS 회로(11)로부터 출력되는 화소 신호는 유효한 화상 정보를 나타내는 색 레벨 신호(CR, CG, CB)에 흑 레벨 신호(OBR, OBG, OBB)가 중첩된 신호이다. 또한, 색 화소(R, G, B)마다 감도가 다른 것이 일반적이다. 녹색 화소(G)에 비해, 적색 화소(R) 및 청색 화소(B)의 감도는 낮은 것이 일반적이다. 제1 증폭기(CDSamp)(12)에서는 색 화소(R, G, B)마다의 감도차를 조정하기 위해서, 색 화소(R, G, B)마다 개별적으로 제1 증폭도(G1)를 설정하여, 화소 신호를 증폭하여 감도를 조정한다.
이 조정 과정을 도 4에 도시한다. CDS 회로(11)의 출력 신호로서 모식적으로 도시되어 있는 색 화소(R, G, B)마다의 화소 신호(CR(AV)+OBR(AV), CG(AV)+OBG(AV), CB(AV)+OBB(AV))의 신호 강도는 색 레벨 신호(CR(AV), CG(AV), CB(AV))의 신호 강도가 각 색 화소(R, G, B)의 감도와 합치하는 평균적인 신호 강도를 갖는 경우를 나타내고 있다.
각 색 화소(R, G, B)의 색 레벨 신호(CR(AV), CG(AV), CB(AV))의 감도차를 조정하기 위해서, 각각의 색 레벨 신호(CR(AV), CG(AV), CB(AV))의 신호 강도를 최대의 신호 강도를 갖는 녹색 화소(G)의 색 레벨 신호(CG(AV))의 신호 강도로 조정한다. 즉, 색 레벨 신호(CR(AV), CG(AV), CB(AV))마다, DSP부(20)에 있어서 미리 연산되어, 레지스터(17A 내지 17C)에 저장되어 있는 제1 증폭도(G1R, G1G, G1B)가 설정된다.
여기서, 적색 화소(R)에 대한 증폭도(G1R)는 G1R=CG(AV)/CR(AV)로서 연산할 수 있다. 청색 화소(B)에 대한 증폭도(G1B)는 G1B=CG(AV)/CB(AV)로서 연산할 수 있다. 또한, 녹색 화소(G)에 대한 증폭도(G1G)는 G1G=CG(AV)/CG(AV)=1이다. 이들 연산은 도 6에 후술하는 바와 같이, DSP부(20)에서의 디지털 연산 처리에 의해 미리 연산해 둘 수 있다.
타이밍 신호(CLK)에 따라서, 레지스터(17A 내지 17C)를 순차 선택해 주면, 혹은 레지스터(17A 내지 17C)에 저장되어 있는 제1 증폭도(G1R, G1G, G1B)가 미리 제1 증폭기(CDSamp)(12)에 받아들여지고 있으면, 제1 증폭기(CDSamp)(12)에 있어서 제1 증폭도(G1R, G1G, G1B)를 순차 선택해 주면, 색 화소(R, G, B)마다 개별적으로 증폭이 이루어져, 제1 증폭기(CDSamp)(12)로부터 색 화소(R, G, B)마다의 감도차가 조정된 신호가 출력된다. 각 색 화소(R, G, B)의 감도와 합치하는 평균적인 신호 강도를 갖는 색 레벨 신호(CR(AV), CG(AV), CB(AV))에 대해서, 색 레벨 신호(CR(AV))는 제1 증폭도(G1R)로 증폭되고, 색 레벨 신호(CB(AV))는 제1 증폭도(G1B)로 증폭되어, 각각, 색 레벨 신호(CG(AV))와 동등한 신호 강도가 된다. 단, 동시에 흑 레벨 신호(OBR(AV), OBG(AV), OBB(AV))도 마찬가지로 증폭된다.
제1 증폭기(CDSamp)(12)로부터 출력되는 감도 조정된 화소 신호는 제2 증폭기(PGA)(13)에 입력된다. 제2 증폭기(PGA)(13)에서는 제2 증폭도(G2)에 의해 증폭이 이루어진다.
여기서, 제1 증폭기(CDSamp)(12)에 있어서 증폭되는 화소 신호는 화상 디바이스(1)의 유효 화소 영역(2)에서 취득되는 화상 정보에 따른 여러 가지 신호 강도의 분포를 갖는 신호이다. 이러한 화소 신호가, 색 화소(R, G, B)마다 개별적인 제1 증폭도(G1R, G1G, G1B)로 증폭되어 감도 조정된 화소 신호로서 도 5에 모식적으로 도시되어 있다. 이 중, 최대의 신호 강도를 갖는 색 레벨 신호(CMAX)가 후단의 A/D 변환기(ADC)(15)의 다이내믹 레인지(DR)에 일치하면, 감도 조정된 모든 화소 신호는 A/D 변환기(ADC)(15)의 변환 능력을 최대한으로 이용하여 유효하게 A/D 변환되게 된다.
제2 증폭기(PGA)(13)에서는 DSP부(20)에 있어서 미리 연산되어, 레지스터(17D)에 저장되어 있는 제2 증폭도(G2)가 증폭도로서 설정된다. 제2 증폭도(G2)는 선행하는 화상 처리에 있어서 취득된 색 레벨 신호에 기초하여, 최대의 신호 강도를 갖는 색 레벨 신호(CMAX)에 대한 A/D 변환기(ADC)(15)의 다이내믹 레인지(DR)의 비로서 연산된다. 한편, 이 경우도, 동시에 흑 레벨 신호(OB)도 제2 증폭도(G2)로 증폭된다.
제2 증폭기(PGA)(13)에 있어서 증폭된 화소 신호는 색 레벨 신호의 성분에 대해서는, 제2 증폭도(G2)에 의해 다이내믹 레인지(DR)까지의 범위에서 증폭된 신호인데, 마찬가지로 제2 증폭도(G2)에 의해 증폭된 흑 레벨 신호의 성분이 중첩된 신호이다. 따라서, A/D 변환기(ADC)(15)에 있어서 다이내믹 레인지를 완전히 활용하여 색 레벨 신호를 A/D 변환하기 위해서는 흑 레벨 신호를 감할 필요가 있다. 이것이 이루어지는 것이 연산기(14)이다.
연산기(14)에 의해 감산될 흑 레벨 신호는, 화상 디바이스(1)로부터 출력되는 화소 신호에 중첩되어 있는 흑 레벨 신호(OBR, OBG, OBB)가 제1 및 제2 증폭기(12, 13)에서 증폭된 신호이다. 이하에서는 이 신호를 증폭된 흑 레벨 신호라 부른다. 증폭된 흑 레벨 신호(OB(AV))는 도 6에 후술하는 바와 같이, DSP부(20)에서, 차광 영역(OB 영역)(3)에 있어서의 화소를 유효 화소 영역(2)에 있어서의 화소 배치에 대응시킴으로써, 차광 영역(OB 영역)(3)으로부터 취득되는 흑 레벨 신호(OBR, OBG, OBB)를, 각 색 화소(R, G, B)의 화소 신호에 대응하는 흑 레벨 신호로서 적분하여 평균화한 것이다. 미리 연산이 이루어져, 색 화소(R, G, B)마다, 레지스터 (17E 내지 17G)에 저장되어 있다.
타이밍 신호(CLK)에 따라서, 레지스터(17E 내지 17G)가 순차 선택되어 D/A 변환기(DAC)(16)에서 D/A 변환이 이루어진다. 아날로그 신호로 변환되는 증폭된 흑 레벨 신호(OB(AV))가 연산기(14)에 입력되고, 제2 증폭기(PGA)(13)로부터 출력되는 화소 신호로부터 감산됨으로써, A/D 변환기(ADC)(15)의 다이내믹 레인지까지 확대된 색 레벨 신호가 추출되어, A/D 변환기(ADC)(15)에 입력된다.
도 6에는 화소 신호 처리 방법의 흐름도를 도시한다. 처리가 시작되면, 우선, 초기화가 이루어진다(S1). 초기화란, 색 화소(R, G, B)마다의 감도 조정, 후단의 화상 처리를 위한 다이내믹 레인지까지의 확대 및 화소 신호로부터 감산되어야 할 흑 레벨 신호의 성분의 설정 등을 포함하는 초기화이다. 예컨대, 감도 조정 및 다이내믹 레인지의 확대는 하지 않고(증폭도는 1배), 감산되어야 할 흑 레벨 신호의 성분을 제로로 하는 등의 초기화가 이루어진다. 도 3의 화소 신호 처리 장치(10)에 있어서는, 레지스터(17A 내지 17D)에 저장되는 증폭도(G1, G2)가 전부 1배이며, 레지스터(17E 내지 17G)에 저장되는 흑 레벨 신호의 성분이 제로로서 초기화되는 것에 상당한다.
화상 디바이스로부터 화상 정보가 받아들여지면, 화상 처리로서, 자동 초점 맞춤(S2) 및 자동 노출 맞춤(S3) 등이 이루어져, 유효 화소 영역(2) 및 차광 영역(OB 영역)(3)에 의해 구성되는 1화면분의 화소 신호가 취득된다(S4).
취득된 화소 신호 중, 차광 영역(OB 영역)(3)으로부터 취득되는 흑 레벨 신호(OBR, OBG, OBB)에 대해서, 유효 화소 영역(2) 중 동일한 가로열에 있는 색 화소 의 배열 순서에 따른 순서로, 흑 레벨 신호(OBR, OBG, OBB)를 색 화소(R, G, B)마다 할당하여 평균화한다. 색 화소(R, G, B)마다 평균화된 흑 레벨 신호(OB(AV))를 구할 수 있다(S5). 평균화된 흑 레벨 신호(OB(AV))는 조정된 흑 레벨 신호 저장부(D1)에 저장된다. 도 3의 화소 신호 처리 장치(10)에 있어서는, 레지스터(17E 내지 17G)에 저장되는 것에 상당한다.
이어서, 화상 처리되어 구해진 색 레벨 신호(CR, CG, CB)에 대해서, 색 화소(R, G, B)마다 평균화하여, 색 레벨 신호(C(AV))를 구한다(S6). 평균화된 색 레벨 신호(C(AV)) 중, 최대 신호 강도를 갖는 색 레벨 신호(C(AV)MAX)를 추출하여(S7), 색 화소(R, G, B)마다, 평균화된 색 레벨 신호(C(AV))에 대해서, 신호 강도에 대한 최대 신호 강도의 비를 연산한다(S8). 연산 결과가 제1 증폭도(G1)(=C(AV)MAX/C(AV))이다. 제1 증폭도(G1)는 색 화소(R, G, B)마다 연산되어, 제1 증폭도(G1) 저장부(D2)에 저장된다. 도 3의 화소 신호 처리 장치(10)에 있어서는, 레지스터(17A 내지 17C)에 저장되는 것에 상당한다. 또한, 처리 S7 내지 S8이 도 4의 처리에 상당한다.
또한, 색 레벨 신호(C) 중 최대 신호 강도(CMAX)를 추출하여(S9), 최대 신호 강도(CMAX)에 대한 화상 처리의 다이내믹 레인지에 상당하는 신호 강도(DR)의 비를 연산한다(S10). 연산 결과가 제2 증폭도(G2)(=DR/CMAX)이다. 제2 증폭도(G2)는 제2 증폭도(G2) 저장부(D3)에 저장된다. 도 3의 화소 신호 처리 장치(10)에 있어서는, 레지스터(17D)에 저장되는 것에 상당한다. 또한, 처리 S9 내지 S10이 도 5의 처리에 상당한다.
이상의 처리를 한 후, 처리 S2로 되돌아가, 화상 처리가 반복된다. 화상 처리를 하기 위한 화소 신호에 대하여, 선행하는 화상 처리에서 연산된, 흑 레벨 신호(OB(AV)), 제1 증폭도(G1) 및 제2 증폭도(G2)가 이용된다. 이에 따라, 색 화소(R, G, B)마다 감도 조정이 이루어진 뒤에, 후단의 화상 처리의 다이내믹 레인지까지 화상 정보를 나타내는 색 레벨 신호의 신호 강도가 확대되어, 다이내믹 레인지를 완전히 활용한 화상 처리를 실행할 수 있다.
한편, 도 6에 도시한 흐름도는, 예컨대 도 3에 도시하는 실시형태의 회로 블록도에 있어서는, DSP부(20)에서 실행되는 화상 처리의 흐름을 도시한다.
이상 상세히 설명한 바와 같이, 본 실시형태에 따른 화소 신호 처리 장치 및 화소 신호 처리 방법에 따르면, 화소 신호로부터 흑 레벨 신호(OBR, OBG, OBB)를 제외한 색 레벨 신호(CR, CG, CB)를 증폭함으로써, A/D 변환기(ADC)(15)나 그 밖의 화상 처리에 있어서의 다이내믹 레인지(DR)까지 신호 레벨을 확대할 수 있다. A/D 변환한 후에 디지털 신호 처리에 의해 신호 강도를 확대하는 종래 기술에서는 A/D 변환기에서 변환되는 색 레벨 신호의 신호 강도가 A/D 변환기의 다이내믹 레인지에 닿지 않아, A/D 변환기가 갖는 분해능을 충분히 살릴 수 없는 데 비하여, 본 실시형태에서는, 아날로그 신호 처리인 증폭 처리에 의해, A/D 변환기의 다이내믹 레인지를 완전히 활용하는 신호 레벨까지 색 레벨 신호(C)를 확대할 수 있다.
또한, A/D 변환기(ADC)(15)에 의한 변환이나 그 밖의 화상 처리에 앞서서, 화소 신호에 있어서의 잡음 성분인 흑 레벨 신호(OBR, OBG, OBB)도 아날로그 신호 처리의 단계에서 제거된다. 유효한 화상 정보인 색 레벨 신호(CR, CG, CB)만이 최 대한으로 증폭된 상태에서, A/D 변환기(ADC)(15)나 그 밖의 화상 처리에 보내진다. 화상 디바이스(1)에 의해 제공되는 화상 정보를, 다이내믹 레인지(DR)를 완전히 활용하여 처리할 수 있어, DSP부(20)에 의한 화상 처리나 그 밖의 화상 처리에 있어서, 최대한의 분해능으로 처리할 수 있다. 화상 디바이스(1)의 능력을 최대한으로 살릴 수 있다.
여기서, 화소 신호로부터 제거되어야 하는 흑 레벨 신호(OBR, OBG, OBB)는 화상 디바이스(1)에 있어서의 차광 영역(OB 영역)(3)으로부터 취득되는 화소 신호에 의해 연산된다. 차광 영역(OB 영역)(3)에 있어서도, 유효 화소 영역(2)에서의 화소 배열과의 연속성을 가지고 화소가 배치되어 있으므로, 유효 화소 영역(2)에서의 화소 배치에 대응한 화소 위치마다 흑 레벨 신호(OBR, OBG, OBB)를 평균화해 주면, 색 화소(R, G, B)의 흑 레벨 신호(OBR, OBG, OBB)를 구할 수 있다.
또한, 색 화소(R, G, B)마다의 감도 조정은, 화소 신호로부터 색 레벨 신호(CR, CG, CB)를 추출해서 유효 화소 영역(2)의 전역에 걸쳐 평균화한 신호 강도로 비교하여 조정할 수 있다. 화소 신호에 흑 레벨 신호를 포함한 상태로 SN비의 개선이 도모되는 결과, 잡음 성분인 흑 레벨 신호도 증폭하지 않을 수 없어, 정밀도 좋게 색 화소(R, G, B)마다의 감도 조정이 불충분하게 되는 특허문헌 1에 비하여, 감도 조정의 정밀도를 향상시킬 수 있다.
한편, 본 발명은 상기 실시형태에 한정되는 것이 아니라, 본 발명의 취지를 일탈하지 않는 범위 내에서 여러 가지 개량, 변형이 가능한 것은 물론이다.
예컨대, 본 실시형태에 있어서는, 화상 디바이스로서 단판 CCD 디바이스에 관한 예를 설명했지만, 본 발명은 이것에 한정되지 않는다. 색 화소(R, G, B)마다 화상 디바이스를 갖춘, 소위 3판의 디바이스 구성을 갖는 경우에도 마찬가지로 적용할 수 있다.
여기서, 본 발명의 기술 사상에 의해, 배경 기술에 있어서의 과제를 해결하기 위한 수단을 이하에 열거한다.
(부기 1) 화상 디바이스의 색 화소로부터 제공되는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 장치로서,
상기 색 화소간의 감도를 조정하기 위해서, 상기 색 화소마다 상기 화소 신호에 대한 제1 증폭도가 조정되는 제1 증폭기와,
상기 제1 증폭기로부터 출력되는 감도 조정된 상기 화소 신호 중 최대 신호 강도의 상기 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지에 상당하는 신호 강도로 하는 제2 증폭도로 감도 조정된 상기 화소 신호를 증폭하는 제2 증폭기와,
상기 제2 증폭기에 의해 증폭된 상기 화소 신호로부터 상기 흑 레벨 신호의 성분을 감산하는 연산기를 포함하는 것을 특징으로 하는 화소 신호 처리 장치.
(부기 2) 상기 연산기의 출력 신호를 A/D 변환하는 A/D 변환기를 포함하고,
상기 후단의 화상 처리에 있어서의 다이내믹 레인지는 상기 A/D 변환기의 다이내믹 레인지인 것을 특징으로 하는 부기 1에 기재한 화소 신호 처리 장치.
(부기 3) 상기 제1 증폭도, 상기 제2 증폭도 및 상기 흑 레벨 신호 성분은 선행하여 이루어지는 상기 화상 처리 결과에 기초하여 결정되는 것을 특징으로 하 는 부기 1에 기재한 화상 신호 처리 장치.
(부기 4) 상기 화상 처리는 디지털 연산 처리이며,
상기 제1 증폭기는,
선행하여 이루어지는 상기 화상 처리에 의해, 상기 색 화소마다 평균화된 상기 색 레벨 신호에 대해서, 상기 색 화소마다의 신호 강도에 대한 최대 신호 강도의 비에 따라 상기 색 화소마다 상기 제1 증폭도가 설정되는 것을 특징으로 하는 부기 3에 기재한 화상 신호 처리 장치.
(부기 5) 상기 화상 처리는 디지털 연산 처리이며,
상기 제2 증폭기는,
선행하여 이루어지는 상기 화상 처리에 의해, 상기 색 레벨 신호 중 최대의 신호 강도에 대한 상기 다이내믹 레인지에 상당하는 신호 강도의 비에 따라 상기 제2 증폭도가 설정되는 것을 특징으로 하는 부기 3에 기재한 화상 신호 처리 장치.
(부기 6) 상기 화상 처리는 디지털 연산 처리이며,
상기 연산기는,
선행하여 이루어지는 상기 화상 처리에 의해, 상기 화상 디바이스에 있어서의 차광 영역으로부터 제공되는 상기 흑 레벨 신호를 상기 색 화소마다 평균화하여 연산되는 상기 흑 레벨 신호에 따라 감산 처리를 행하는 것을 특징으로 하는 부기 3에 기재한 화상 신호 처리 장치.
(부기 7) 상기 디지털 연산 처리에 의해 평균화되는 상기 흑 레벨 신호를 D/A 변환하는 D/A 변환기를 포함하고,
상기 연산기는 상기 제2 증폭기에 의해 증폭된 상기 화소 신호로부터 D/A 변환된 상기 흑 레벨 신호를 감산하는 아날로그 감산기를 포함하는 것을 특징으로 하는 부기 6에 기재한 화상 신호 처리 장치.
(부기 8) 상기 차광 영역은 유효 화소 영역의 주연부이며,
상기 차광 영역으로부터 제공되는 상기 흑 레벨 신호를 상기 유효 화소 영역에 있어서의 상기 색 화소의 배치 순서에 대응시켜, 상기 색 화소마다 할당하는 것을 특징으로 하는 부기 6에 기재한 화상 신호 처리 장치.
(부기 9) 상기 연산기에 의해 감삼되는 상기 흑 레벨 신호의 성분은, 상기 흑 레벨 신호를, 상기 제1 증폭기 및 상기 제2 증폭기에 의해 증폭하여 구해지는 것을 특징으로 하는 부기 1에 기재한 화상 신호 처리 장치.
(부기 10) 화상 디바이스의 색 화소로부터 제공되는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 방법으로서,
상기 색 화소마다 상기 화소 신호를 개별적으로 증폭하여 상기 색 화소간의 감도를 조정하는 단계와,
상기 감도 조정 단계에 의해 구해지는 감도 조정된 상기 화소 신호를 증폭하여 그 화소 신호의 상기 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지까지 확대하는 단계와,
상기 감도 조정된 상기 화소 신호를 증폭하는 단계에 의해 구해지는 상기 화소 신호로부터 상기 흑 레벨 신호의 성분을 감산하는 단계를 포함하는 것을 특징으로 하는 화소 신호 처 리방법.
(부기 11) 상기 후단의 화상 처리에 있어서의 다이내믹 레인지는 상기 화상 소자로부터 상기 흑 레벨 신호의 성분이 감산된 신호를 A/D 변환할 때의 다이내믹 레인지인 것을 특징으로 하는 부기 10에 기재한 화소 신호 처리 방법.
(부기 12) 상기 화상 처리는 디지털 연산 처리이며,
상기 감도 조정 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여 상기 색 화소마다 상기 색 레벨 신호의 신호 강도를 평균화하는 단계와,
평균화된 상기 색 레벨 신호에 대해서, 상기 색 화소마다의 신호 강도에 대한 최대 신호 강도의 비를 상기 색 화소마다 상기 화소 신호에 대한 제1 증폭도로서 연산하는 단계를 포함하는 것을 특징으로 하는 부기 10에 기재한 화상 신호 처리 방법.
(부기 13) 상기 화상 처리는 디지털 연산 처리이며,
상기 감도 조정된 상기 화소 신호를 증폭하는 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여,
상기 색 레벨 신호 중 최대의 신호 강도에 대한 상기 다이내믹 레인지에 상당하는 신호 강도의 비를 상기 감도 조정된 상기 화소 신호에 대한 제2 증폭도로서 연산하는 단계를 포함하는 것을 특징으로 하는 부기 10에 기재한 화상 신호 처리 방법.
(부기 14) 상기 화상 처리는 디지털 연산 처리이며,
상기 흑 레벨 신호의 성분을 감산하는 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여,
상기 화상 디바이스에 있어서의 차광 영역으로부터 제공되는 상기 흑 레벨 신호를 상기 색 화소마다 평균화하여 상기 색 화소마다 상기 흑 레벨 신호의 성분을 연산하는 단계를 포함하는 것을 특징으로 하는 부기 10에 기재한 화상 신호 처리 방법.
(부기 15) 상기 평균화된 흑 레벨 신호를 D/A 변환하는 단계를 포함하고,
상기 흑 레벨 신호의 성분을 감산하는 단계는 아날로그 연산 처리인 것을 특징으로 하는 부기 14에 기재한 화상 신호 처리 방법.
(부기 16) 상기 차광 영역으로부터 제공되는 상기 흑 레벨 신호를, 상기 유효 화소 영역에 있어서의 상기 색 화소의 배치 순서에 대응시켜, 상기 색 화소마다 할당하는 것을 특징으로 하는 부기 14에 기재한 화상 신호 처리 방법.
(부기 17) 상기 화소 신호로부터 감산되는 상기 흑 레벨 신호의 성분은 상기 흑 레벨 신호를 상기 감도 조정 단계 및 상기 감도 조정된 상기 화소 신호를 증폭하는 단계에 의해 증폭하여 구하는 것을 특징으로 하는 부기 10에 기재한 화상 신호 처리 방법.
본 발명에 따르면, 화소 신호로부터 흑 레벨 신호를 제외한 색 레벨 신호에 대해서 다이내믹 레인지까지의 증폭이 가능하게 된다. 화소 신호에 있어서의 잡음 성분인 흑 레벨 신호가 제외되어, 유효한 화상 정보인 색 레벨 신호를 최대한으로 증폭하는 것이 가능해진다. 화상 디바이스에 의해 제공되는 화상 정보를 다이내믹 레인지 최대한의 분해능으로 전달할 수 있어, 후단의 화상 처리에 있어서 최대한의 분해능으로 처리할 수 있다. 화상 디바이스의 능력을 최대한으로 살릴 수 있다.

Claims (10)

  1. 화상 디바이스의 색 화소로부터 제공되는, 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 장치로서,
    상기 색 화소간의 감도를 조정하기 위해서, 상기 색 화소마다 상기 화소 신호에 대한 제1 증폭도가 조정되는 제1 증폭기와;
    상기 제1 증폭기로부터 출력되는 감도 조정된 상기 화소 신호 중 최대 신호 강도의 상기 색 레벨 신호를, 후단의 화상 처리에 있어서의 다이내믹 레인지에 상당하는 신호 강도로 하는 제2 증폭도로 감도 조정된 상기 화소 신호를 증폭하는 제2 증폭기와;
    상기 제2 증폭기에 의해 증폭된 상기 화소 신호로부터 상기 흑 레벨 신호의 성분을 감산하는 연산기
    를 포함하는 것을 특징으로 하는 화소 신호 처리 장치.
  2. 제1항에 있어서, 상기 제1 증폭도, 상기 제2 증폭도 및 상기 흑 레벨 신호 성분은 선행하여 이루어지는 상기 화상 처리 결과에 기초하여 결정되는 것을 특징으로 하는 화상 신호 처리 장치.
  3. 제2항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 제1 증폭기는,
    선행하여 이루어지는 상기 화상 처리에 의해, 상기 색 화소마다 평균화된 상기 색 레벨 신호에 대해서, 상기 색 화소마다의 신호 강도에 대한 최대 신호 강도의 비에 따라 상기 색 화소마다 상기 제1 증폭도가 설정되는 것을 특징으로 하는 화상 신호 처리 장치.
  4. 제2항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 제2 증폭기는,
    선행하여 이루어지는 상기 화상 처리에 의해, 상기 색 레벨 신호 중 최대의 신호 강도에 대한 상기 다이내믹 레인지에 상당하는 신호 강도의 비에 따라 상기 제2 증폭도가 설정되는 것을 특징으로 하는 화상 신호 처리 장치.
  5. 제2항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 연산기는,
    선행하여 이루어지는 상기 화상 처리에 의해, 상기 화상 디바이스에 있어서의 차광 영역으로부터 제공되는 상기 흑 레벨 신호를 상기 색 화소마다 평균화하여 연산되는 상기 흑 레벨 신호에 따라 감산 처리를 행하는 것을 특징으로 하는 화상 신호 처리 장치.
  6. 제1항에 있어서, 상기 연산기에 의해 감산되는 상기 흑 레벨 신호의 성분은 상기 흑 레벨 신호를 상기 제1 증폭기 및 상기 제2 증폭기에 의해 증폭하여 구해지 는 것을 특징으로 하는 화상 신호 처리 장치.
  7. 화상 디바이스의 색 화소로부터 제공되는 색 레벨 신호에 흑 레벨 신호가 중첩된 화소 신호를 처리하는 화소 신호 처리 방법으로서,
    상기 색 화소마다 상기 화소 신호를 개별적으로 증폭하여 상기 색 화소간의 감도를 조정하는 단계와;
    상기 감도 조정 단계에 의해 구해지는 감도 조정된 상기 화소 신호를 증폭하여, 그 화소 신호의 상기 색 레벨 신호를 후단의 화상 처리에 있어서의 다이내믹 레인지까지 확대하는 단계와;
    상기 감도 조정된 상기 화소 신호를 증폭하는 단계에 의해 구해지는 상기 화소 신호로부터 상기 흑 레벨 신호의 성분을 감산하는 단계
    를 포함하는 것을 특징으로 하는 화소 신호 처리 방법.
  8. 제7항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 감도 조정 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여 상기 색 화소마다 상기 색 레벨 신호의 신호 강도를 평균화하는 단계와,
    평균화된 상기 색 레벨 신호에 대해서, 상기 색 화소마다의 신호 강도에 대한 최대 신호 강도의 비를 상기 색 화소마다 상기 화소 신호에 대한 제1 증폭도로서 연산하는 단계를 포함하는 것을 특징으로 하는 화상 신호 처리 방법.
  9. 제7항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 감도 조정된 상기 화소 신호를 증폭하는 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여,
    상기 색 레벨 신호 중 최대의 신호 강도에 대한 상기 다이내믹 레인지에 상당하는 신호 강도의 비를 상기 감도 조정된 상기 화소 신호에 대한 제2 증폭도로서 연산하는 단계를 포함하는 것을 특징으로 하는 화상 신호 처리 방법.
  10. 제7항에 있어서, 상기 화상 처리는 디지털 연산 처리이며,
    상기 흑 레벨 신호의 성분을 감산하는 단계에 앞서서, 선행하여 이루어지는 상기 화상 처리 결과에 기초하여,
    상기 화상 디바이스에 있어서의 비유효 화소 영역으로부터 제공되는 상기 흑 레벨 신호를 상기 색 화소마다 평균화하여 상기 색 화소마다 상기 흑 레벨 신호 성분을 연산하는 단계를 포함하는 것을 특징으로 하는 화상 신호 처리 방법.
KR1020050086350A 2005-05-30 2005-09-15 화상 신호 처리 장치 및 화상 신호 처리 방법 KR100748196B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005157380A JP4781013B2 (ja) 2005-05-30 2005-05-30 画素信号処理装置、および画素信号処理方法
JPJP-P-2005-00157380 2005-05-30

Publications (2)

Publication Number Publication Date
KR20060124534A true KR20060124534A (ko) 2006-12-05
KR100748196B1 KR100748196B1 (ko) 2007-08-10

Family

ID=36968986

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050086350A KR100748196B1 (ko) 2005-05-30 2005-09-15 화상 신호 처리 장치 및 화상 신호 처리 방법

Country Status (6)

Country Link
US (1) US7782368B2 (ko)
EP (1) EP1729507B1 (ko)
JP (1) JP4781013B2 (ko)
KR (1) KR100748196B1 (ko)
CN (1) CN1874429B (ko)
TW (1) TWI265728B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101536060B1 (ko) * 2013-02-28 2015-07-10 가부시끼가이샤 도시바 고체 촬상 장치 및 카메라 모듈

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102007028038B4 (de) * 2007-06-14 2019-10-31 Primes Gmbh Verfahren zur Korrektur der Diffusionseffekte in Halbleiter-Bildsensoren
JP5128889B2 (ja) * 2007-10-02 2013-01-23 オリンパス株式会社 固体撮像素子及びそれを用いた固体撮像システム
JP5106052B2 (ja) * 2007-11-08 2012-12-26 キヤノン株式会社 固体撮像素子、撮像システム、及び固体撮像素子の駆動方法
JP5188292B2 (ja) * 2008-06-30 2013-04-24 キヤノン株式会社 撮像システムおよび撮像システムの駆動方法
CN101763175B (zh) * 2008-12-23 2013-07-03 原相科技股份有限公司 位移检测装置的图像处理方法及使用该方法的位移检测装置
JP2013077945A (ja) * 2011-09-30 2013-04-25 Sony Corp 画像処理装置、補正方法、並びに、撮像装置
JP5963448B2 (ja) * 2012-01-13 2016-08-03 キヤノン株式会社 撮像装置
KR20220140267A (ko) 2021-04-09 2022-10-18 에스케이하이닉스 주식회사 이미지 센싱 장치

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR940025306A (ko) 1993-04-08 1994-11-19 이헌조 수평/수직 양방향 흑레벨 보정회로
US6750910B1 (en) * 1998-07-15 2004-06-15 Texas Instruments Incorporated Optical black and offset correction in CCD signal processing
US6433632B1 (en) 1999-06-11 2002-08-13 Analog Devices, Inc. Correlated double sampling circuit with op amp
US7123301B1 (en) * 1999-06-11 2006-10-17 Analog Devices, Inc. Pixel gain amplifier
JP4845256B2 (ja) * 2000-10-18 2011-12-28 キヤノン株式会社 画像処理装置
JP2002209222A (ja) * 2001-01-09 2002-07-26 Sanyo Electric Co Ltd 撮像装置
JP3956875B2 (ja) * 2002-03-25 2007-08-08 セイコーエプソン株式会社 固体撮像装置
JP2003298953A (ja) * 2002-03-29 2003-10-17 Seiko Epson Corp 画像処理装置および画像処理方法
JP2004208240A (ja) 2002-12-26 2004-07-22 Matsushita Electric Ind Co Ltd 撮像装置
JP4218357B2 (ja) * 2003-01-31 2009-02-04 セイコーエプソン株式会社 デジタルクランプ回路およびデジタルクランプ処理方法
JP4500106B2 (ja) * 2003-05-27 2010-07-14 オリンパス株式会社 撮像装置、及び撮像装置の調整方法
JP2005109772A (ja) * 2003-09-30 2005-04-21 Sanyo Electric Co Ltd 固体撮像素子を用いたビデオカメラ装置の黒レベル補正回路および黒レベル補正方法
KR100517363B1 (ko) 2003-11-26 2005-09-28 엘지전자 주식회사 플라즈마 디스플레이 패널의 구동장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101536060B1 (ko) * 2013-02-28 2015-07-10 가부시끼가이샤 도시바 고체 촬상 장치 및 카메라 모듈

Also Published As

Publication number Publication date
TW200642442A (en) 2006-12-01
EP1729507B1 (en) 2016-04-20
JP4781013B2 (ja) 2011-09-28
KR100748196B1 (ko) 2007-08-10
EP1729507A2 (en) 2006-12-06
CN1874429A (zh) 2006-12-06
JP2006333339A (ja) 2006-12-07
US7782368B2 (en) 2010-08-24
CN1874429B (zh) 2010-05-05
EP1729507A3 (en) 2011-09-28
US20060268358A1 (en) 2006-11-30
TWI265728B (en) 2006-11-01

Similar Documents

Publication Publication Date Title
KR100748196B1 (ko) 화상 신호 처리 장치 및 화상 신호 처리 방법
JP4976832B2 (ja) 撮像システム
US8164665B2 (en) Method and apparatus for controlling pixel sensor elements
US7911507B2 (en) Solid-state image pickup device in which the saturated signal quantity of a W pixel is controlled
US6903670B1 (en) Circuit and method for cancellation of column pattern noise in CMOS imagers
US7133073B1 (en) Method and apparatus for color interpolation
KR101194915B1 (ko) 광학적 흑 레벨 조정 회로 및 그 방법과, 화상 처리 장치
US8310577B1 (en) Method and apparatus for color compensation
EP2037668B1 (en) Image sensor apparatus and method for improved dynamic range with multiple readout circuit paths
US7645978B2 (en) Image sensing apparatus and image sensing method using image sensor having two or more different photoelectric conversion characteristics
JP2009089219A (ja) 固体撮像素子及びそれを用いた固体撮像システム
JP2007174590A (ja) 信号処理装置及び撮像装置
JP2008306565A (ja) 撮像装置及びその信号補正方法
JP2020115604A (ja) 撮像装置およびその制御方法
JP2020182057A (ja) 撮像装置、撮像方法、コンピュータプログラム及び記憶媒体
US20110007201A1 (en) Solid state imaging device suppressing blooming
JP4175100B2 (ja) 信号処理回路および信号処理方法
JP4022962B2 (ja) 信号処理回路および固体撮像素子の出力信号処理方法
JP5219775B2 (ja) 撮像素子及び撮像装置
JP4725052B2 (ja) 撮像装置
JP2009302850A (ja) 固体撮像素子のノイズ除去装置、撮像装置、固体撮像素子のノイズ除去方法
JP3603749B2 (ja) 撮像装置
JP4067728B2 (ja) 赤外線検知素子の入出力特性の補正方法
JP2005086630A (ja) 撮像装置
JP2977057B2 (ja) 固体撮像素子の信号処理装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120724

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20130719

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20140721

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20150716

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20160630

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20170719

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20180718

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20190725

Year of fee payment: 13