KR101678691B1 - 광원의 특성을 이용한 이미지 처리 장치 및 방법 - Google Patents

광원의 특성을 이용한 이미지 처리 장치 및 방법 Download PDF

Info

Publication number
KR101678691B1
KR101678691B1 KR1020100044711A KR20100044711A KR101678691B1 KR 101678691 B1 KR101678691 B1 KR 101678691B1 KR 1020100044711 A KR1020100044711 A KR 1020100044711A KR 20100044711 A KR20100044711 A KR 20100044711A KR 101678691 B1 KR101678691 B1 KR 101678691B1
Authority
KR
South Korea
Prior art keywords
light source
white balance
value
image
frequency
Prior art date
Application number
KR1020100044711A
Other languages
English (en)
Other versions
KR20110125146A (ko
Inventor
이용구
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100044711A priority Critical patent/KR101678691B1/ko
Priority to US13/106,456 priority patent/US8587690B2/en
Publication of KR20110125146A publication Critical patent/KR20110125146A/ko
Priority to US14/061,196 priority patent/US8928775B2/en
Application granted granted Critical
Publication of KR101678691B1 publication Critical patent/KR101678691B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6077—Colour balance, e.g. colour cast correction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Color Television Image Signal Generators (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

본 발명에 따른 이미지 처리 장치는 디지털 카메라의 렌즈를 통해 투영되는 영상 신호의 이미지를 처리하는 장치에 있어서, 상기 렌즈를 통해 투영되는 광신호를 전기신호로 변환하여 영상 신호를 생성 및 출력하는 이미지 센서 모듈과, 상기 이미지 센서 모듈에 근접하게 마련되며, 외부 광원의 광신호를 검출하는 수광 모듈과, 상기 수광 모듈로부터 검출된 광의 주파수를 검출하는 광원 특성 검출부와, 상기 영상 신호의 화이트 밸러스를 제어하는 화이트 밸런스 제어부와, 상기 화이트 밸런스 제어부로부터 출력되는 상기 영상 신호의 적색, 녹색, 및 청색 채널의 간섭을 제거하는 색상 보정부와, 상기 색상 보정부로부터 출력되는 상기 영상 신호에 대한 감마 보정을 수행하는 감마 보정부와, 상기 광원 특성 검출부로부터 광원의 주파수를 제공받아 상기 광원의 종류를 확인하고, 상기 광원의 종류를 고려하여 화이트 밸런스 이득을 제어하는 자동 색 조절 제어부를 포함한다.

Description

광원의 특성을 이용한 이미지 처리 장치 및 방법{APPARATUS FOR IMAGE PROCESSING USING CHARACTER OF LIGHT SOURCE AND METHOD FOR THE SAME}
본 발명은 이미지 처리 방법에 관한 것으로써, 특히 광원의 종류를 고려하여 이미지의 색상을 조절하는 자동 색 조절 방법에 관한 것이다.
일반적으로, 광원들의 종류에 따라 각각 서로 다른 색 온도를 갖는다. 사람의 시각은 주위의 조명 환경, 즉 광원이 변경되더라도 흰색을 항상 동일한 흰색으로 인식한다. 예컨대, 형광등과 같은 청색 광원 또는 백색 광원에서 인식되는 백색과 백열등과 같은 적색 광원에서 인식되는 백색을 동일한 백색으로 인식한다.
그러나, 이미지 센서는 주어진 색 온도의 반사광을 그대로 재현하도록 구현되어 있어, 광원의 색 온도를 능동적으로 적용하여 반영하지 못하고, 광원이 변화함에 따라 검출하는 백색이 변화한다. 예컨대, 백색의 물체가 낮은 색 온도의 광원에서는 적색을 띄게 되며, 높은 색 온도의 광원에서는 청색을 띄게된다. 이와 같은 다양한 색 온도를 갖는 광원에 의해 발생하는 색상 차이를 보상하기 위해 이미지 센서를 적용하는 대부분의 영상장치(예를 들어, 디지털 카메라 또는 디지털 캠코더 등)는 자동 화이트 밸런스(AWB; Auto White Balance)라는 디지털 영상처리 과정을 수행한다.
통상적으로, 자동 화이트 밸런스 처리 방법은, 이미지 센서로부터 얻은 이미지로부터 광원에 의한 변화 정도를 추정하고, 이를 보상하기 위한 이미지 센서의 각 색상에 대한 컬러 이득(Color Gain)을 결정하는 방식으로 이루어진다. 대표적인 자동 화이트 밸런스 처리 방법으로는, 입력된 영상에서 최대 RGB(Red, Greed, Blue) 값을 기준으로 백색으로 추정하는 최대 RGB 기법, 입력된 컬라 이미지의 평균 RGB 값을 회색으로 결정하고 회색을 이용하여 기준 백색을 추정하는 그레이월드(grayworld) 기법, 및 신경망을 이용하여 기준 백색을 추정하는 방법 등이 알려져 있다.
그러나 상기와 같은 종래의 자동 화이트 밸런스 방법은, 영상의 특정 부분만이 매우 밝거나 특정 색이 많이 분포하는 경우에 잘못된 백색을 추정하여 잘못된 컬러 이득을 산출하는 경우가 많으며, 이로 인해 자동 화이트 밸런스가 올바르게 수행되지 못하는 문제점을 갖는다.
본 발명은 전술한 점을 고려하여 안출된 것으로써, 광원의 특성을 이용하여 광원의 종류을 추정하고, 광원 종류에 따른 색상 정보를 조절하여 색 재현성을 향상시킬 수 있는 이미지 처리 장치 및 방법을 제공하는데 그 목적이 있다.
또한, 본 발명은 광원의 특성을 이용하여 광원의 종류를 보다 정확하게 추정할 수 있는 이미지 처리 장치 및 방법을 제공하는데 또 다른 목적이 있다.
상기한 목적을 달성하기 위하여 본 발명의 일 측면에 따른 이미지 처리 장치는 디지털 카메라의 렌즈를 통해 투영되는 영상 신호의 이미지를 처리하는 장치에 있어서, 상기 렌즈를 통해 투영되는 광신호를 전기신호로 변환하여 영상 신호를 생성 및 출력하는 이미지 센서 모듈과, 상기 이미지 센서 모듈에 근접하게 마련되며, 외부 광원의 광신호를 검출하는 수광 모듈과, 상기 수광 모듈로부터 검출된 광의 주파수를 검출하는 광원 특성 검출부와, 상기 영상 신호의 화이트 밸러스를 제어하는 화이트 밸런스 제어부와, 상기 화이트 밸런스 제어부로부터 출력되는 상기 영상 신호의 적색, 녹색, 및 청색 채널의 간섭을 제거하는 색상 보정부와, 상기 색상 보정부로부터 출력되는 상기 영상 신호에 대한 감마 보정을 수행하는 감마 보정부와, 상기 광원 특성 검출부로부터 광원의 주파수를 제공받아 상기 광원의 종류를 확인하고, 상기 광원의 종류를 고려하여 화이트 밸런스 이득을 제어하는 자동 색 조절 제어부를 포함한다.
본 발명의 다른 측면에 따른 이미지 처리 방법은 디지털 카메라의 렌즈를 통해 투영되는 영상 신호의 이미지를 처리하는 방법에 있어서, (a)외부 광원의 주파수 특성을 확인하여 상기 외부 광원의 광원 종류를 검출하는 과정과, (b)입력받은 이미지의 제1채도값을 검출하는 과정과, (c)상기 광원 종류에 따라 미리 정해진 제1임계값을 설정하는 과정과, (d)상기 제1채도 값과 상기 미리 정해진 제1임계값을 비교하는 과정과, (e)상기 채도값이 상기 미리 정해진 제1임계값보다 상대적으로 적은 값임에 대응하여, 상기 이미지에 포함된 백색을 추정하고 상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값을 설정하여, 자동 화이트 밸런스(Auto White Balence)를 수행하는 과정과, (f)상기 제1채도값이 상기 미리 정해진 제1임계값과 같거나 상대적으로 큰 값임에 대응하여, 광원에 따라 미리 정해진 디폴트 이득(Default Gain)을 적용하여 자동 화이트 밸런스를 수행하는 과정을 포함한다.
본 발명의 이미지 처리 장치 및 방법에 따르면, 광원의 특성을 이용하여 광원의 종류을 추정하고, 광원 종류에 따른 색상 정보를 조절함으로써, 정확하게 색 재현성을 향상시킬 수 있다.
또한, 광원과 광 검출장치의 특성을 고려하여 광원의 종류를 보다 정확하게 검출할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 장치의 구성을 도시하는 블록도,
도 2a, 도 2b, 및 도 2c는 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 수광 모듈의 수광 소자의 배열을 예시하는 도면,
도 3은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 수광 모듈의 배열을 예시하는 도면,
도 4는 본 발명의 일 실시예에 따른 이미지 처리장치에 구비된 수광 모듈의 상세 구성을 예시하는 구성도,
도 5는 광원의 주파수 특성을 예시하는 그래프,
도 6은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 일 예시도,
도 7은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 다른 예시도,
도 8은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 또 다른 예시도,
도 9는 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 피크 검출 회로의 상세 구성을 예시하는 회로도,
도 10은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부 배치의 일 예시도,
도 11은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부 배치의 다른 예시도,
도 12는 이미지의 색상 통계를 예시하는 그래프,
도 13은 밝기(Y)에 따른 가중치를 예시하는 도면,
도 14a 및 14b는 본 발명의 일 실시예에 따른 이미지 처리 방법 흐름도,
도 15a 및 15b는 본 발명의 다른 실시예에 따른 이미지 처리 방법 흐름도.
이하 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기 설명에서는 구체적인 특정 사항들이 나타나고 있는데 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐 이러한 특정 사항들이 본 발명의 범위 내에서 소정의 변형이나 혹은 변경이 이루어질 수 있음은 이 기술분야에서 통상의 지식을 가진 자에게는 자명하다 할 것이다.
도 1은 본 발명의 일 실시예에 따른 이미지 처리 장치의 구성을 도시하는 블록도이다. 도 1을 참조하면, 본 발명의 일 실시예에 따른 이미지 처리 장치는 주 제어부(101), 이미지 센서 모듈(110), 수광 모듈(120), 블랙레벨 조정부(131), 디지털이득 조정부(132), 렌즈 쉐이딩 보정부(133), 자동 화이트 밸런스 통계 추출인부(134), 화이트 밸런스 제어부(135), 색상 보정부(136), 감마 보정부(137), 색상정보 분석부(138), 이미지 처리부(139), 광원 특성 검출부(140), 및 자동 색 조절 제어부(150)를 구비한다.
주 제어부(101)는 이미지 처리장치에 구비된 이미지 센서 모듈(110), 수광 모듈(120), 블랙레벨 조정부(131), 디지털이득 조정부(132), 렌즈 쉐이딩 보정부(133), 자동 화이트 밸런스 통계 추출인부(134), 화이트 밸런스 제어부(135), 색상 보정부(136), 감마 보정부(137), 색상정보 분석부(138), 이미지 처리부(139), 광원 특성 검출부(140), 및 자동 색 조절 제어부(150)와 연결되며, 전체 구동을 제어한다. 주 제어부(101)는 특히 각 기능부의 동작 전원을 제어하는 제어신호, 화소 단위로 배열된 이미지 센서의 타이밍 신호 및 센서 제어신호 등을 제공한다.
이미지 센서 모듈(110)은 카메라의 렌즈를 통해 투영되는 광 신호를 전기 신호로 변환하고, 이미지를 구성하는 각 화소의 색상을 표현하기 위한 영상신호를 생성한다. 본 발명에서, 상기 영상 신호는 이미지 센서 모듈(110)의 화소 단위의 출력 값(R,G,B)을 지시하며, 상기 이미지는 화소 단위의 상기 영상 신호를 조합하여 형성되는 영상으로써, 예컨대 사진이나, 동영상에 포함되는 프레임 등일 수 있다.
나아가, 구체적으로 상기 이미지 센서 모듈(110)은 이미지의 해상도에 맞게 배열된 복수의 이미지 센서들로 이루어진 이미지 센서 어레이(111)와, 이미지 센서 모듈(110)의 동작 전원을 공급하는 전원부(113)를 구비한다. 그리고, 상기 이미지 센서 어레이(111)는 타이밍 신호 및 센서 제어신호 등에 의해 제어되며, 이미지 센서 어레이(111)의 상기 영상 신호는 상기 타이밍 신호에 맞춰 상기 블랙 레벨 조정부(131)로 출력된다.
상기 블랙 레벨 조정부(131)는 블랙 레벨 조정 값에 대응하는 오프셋(offset)을 입력받아 상기 영상 신호에 대한 블랙 레벨 조정을 수행한다. 상기 블랙 레벨은 상기 영상 신호(R,G,B)로부터 상기 오프셋을 강제로 감산한 후 노광 시간에 의해 보상으로 조정하거나 일반화된 수식에 의해 조정할 수 있다. 다른 예로써, 미리 정하여진 조정 테이블에 의해 상기 R, G, B 신호에 대한 블랙 레벨을 조정할 수 있다. 한편 상기 오프셋은 미리 측정된 블랙 레벨에 의해 정해질 수 있다. 상기 블랙 레벨은 렌즈를 통해 빛이 입사되지 않지 않도록 차광한 상태에서 출력되는 영상 신호에 의해 측정할 수 있다.
상기 블랙 레벨이 조정된 영상신호는 디지털 이득 조정부(132)로 입력되며, 디지털 이득 조정부(132)는 AE(Auto Exposure) 알고리즘에 의해 상기 블랙 레벨이 조정된 영상신호의 밝기가 일정하게 유지되도록 조절한다.
렌즈 쉐이딩 보정부(133)는 이미지의 중심과 가장자리 영역의 광량이 다르게 나타나는 렌즈 쉐이딩 현상을 보정하는 블록으로써, 상기 자동 색 온도 조절 제어부(140)로부터 렌즈 쉐이딩 설정값을 입력받아, 이미지의 중심과 가장자리 영역의 색상을 보정한다. 나아가, 렌즈 쉐이딩 보정부(133)는 자동 색 조절 제어부(150)로부터 광원 종류에 따라 다르게 설정된 쉐이딩 변수를 수신하고, 상기 수신된 변수에 맞게 이미지의 렌즈 쉐이딩을 처리한다. 이에 따라, 렌즈 쉐이딩 보정부(133)는 광원 종류에 따라 쉐이딩 정도를 다르게 적용하여 렌즈 쉐이딩 처리를 수행할 수 있다.
상기 화이트 밸런스 통계 추출부(AWB ststics)(134)는 이미지의 화이트 밸런스를 맞출 수 있도록, 이미지로부터 자동 색 조절 알고리즘에 필요한 통계적인 값을 추출하여 상기 자동 색 조절 제어부(150)에 제공한다.
상기 화이트 밸런스 제어부(135)는 흰 물체가 정확하게 흰색으로 재현될 수 있도록 영상 신호의 이득 레벨을 조정한다. 상기 화이트 밸런스 제어부(135)는 상기 영상신호의 R, G, B신호들 각각에 대해 이득 값(G 이득(GG), R 이득(GR), B 이득(GB))을 곱함으로써, 화이트 밸런스의 보정을 수행한다. 상기 이득 값(GR,GG,GB)은 상기 자동 색 조절 제어부(140)에 의해 결정된다.
색상 보정부(136)는 입력 영상 신호에 색상 보정은 색상 보정 행렬(Color Correction matrix)의 연산을 통해 색상 보정을 수행한다. 즉, 입력되는 R, G, B 채널의 신호를 이미지 센서에서 R, G, B 채널간 간섭을 제거하여 촬상 이미지의 색을 복원하기 위해 하기의 수학식 1의 연산을 통해 수행될 수 있다.
Figure 112010030680754-pat00001
여기서, R, G, B는 이미지 센서의 적색, 녹색, 청색 채널별 출력이며, R', G', B'는 R, G, B 채널간 간섭이 최소화된 적색, 녹색, 청색 채널별 신호이며, CCM은 색상 보정 행렬(Color Correction matrix)로써, 적색, 녹색, 청색 채널의 간섭을 최소화하도록 하는 3×3행렬이다.
한편, 통상적으로 감마(gamma)는 콘트라스트 상태를 나타내는 척도로 특성곡선의 경사도, 즉 농도의 변화/노광량의 변화를 말한다. 그리고 CRT 등과 같은 표시장치는 영상신호의 입력 전압에 대한 전자 빔 전류의 관계는 비선형적이며, 빔 전류에 대한 화상의 밝기는 선형적이다. 즉 영상신호의 입력 전압에 대한 화상의 밝기가 비선형적이다. 따라서 상기 감마 보정부(137)는 상기 표시장치의 비선형적인 특성을 고려하여 최종 영상신호가 선형성을 가질 수 있도록 상기 표준 영상신호에 대한 감마 보정을 수행한다. 즉 상기 감마 보정부(137)는 상기 표시장치가 가지는 비선형적인 특징을 보정한다.
상기 이미지 처리부(139)는 상기 영상신호에 대한 이미지 처리를 수행하여, 상기 영상신호로부터 이미지를 형성한다. 형성된 이미지는 디스플레이 등을 통해 표시되거나, 메모리 등에 저장된다.
한편, 본 발명의 일 실시예에 따른 이미지 장치에 구비된 수광 모듈(120)은 상기 이미지 센서 모듈(110), 특히 상기 이미지 센서 어레이(111)에 근접하게 마련되며, 외부 광원의 광신호를 검출한다. 수광 모듈(120)에 의해 검출된 광신호는 광원의 특성을 분석하는데 사용하기 위하여, 상기 광원 특성 검출부로 출력된다. 구체적으로 상기 수광 모듈(120)은 적어도 하나의 수광 소자(121), 상기 수광 소자(121) 출력 값의 이득을 조절하는 가변 이득 증폭기(VGA; Variable Gain Amplifier)(125), 및 수광 모듈(120)의 동작 전원을 공급하는 전원부(126)를 구비한다.
상기 수광 모듈(120)은 도 2a와 같이 이미지 센서 어레이(111)의 하부에 행방향으로 마련된 상기 수광 소자(121)를 구비할 수 있다. 또한, 상기 수광 모듈(120)은 도 2b와 같이 이미지 센서 어레이(111)의 상부 및 하부에 행방향으로 마련된 두 개의 수광 소자(121,122)를 구비할 수도 있다. 더 나아가, 상기 수광 모듈(120)은 도 2c와 같이 이미지 센서 어레이(111)를 둘러싸도록 이미지 센서 어레이(111)의 상부, 하부, 좌측, 및 우측에 마련된 복수의 수광 소자(121,122123,124)를 구비할 수도 있다.
또한, 상기 수광 모듈(120)은 도 1에 도시된 바와 같이, 상기 이미지 센서 모듈(110) 내부에 마련될 수 있다. 나아가, 본 발명의 일 실시예에서, 상기 수광 모듈(120)이 상기 이미지 센서 모듈(110) 내부에 마련되는 것을 예시하고 있으나, 본 발명이 이를 한정하는 것은 아니다. 상기 수광 모듈(120)은 상기 이미지에 영향을 주는 광원의 특성을 정확하게 검출할 수 있도록, 상기 이미지 센서 모듈(110)에 근접하게 마련되면 충분하며, 예컨대 도 3과 같이 상기 이미지 센서 모듈(110)의 외부에 마련될 수도 있다. 또한, 상기 수광 모듈(120)이 상기 이미지 센서 모듈(110)의 외부에 마련되는 경우, 상기 수광 소자(121)는 적어도 하나의 수광소자(127)로 대체될 수 있다.
바람직하게, 본 발명의 일 실시예에 따른 이미지 처리 장치는 상기 수광 모듈(120)의 수광 소자(121,122)를 통해 검출되는 광을 이용하여, 이미지가 촬영되는 주변의 조도를 검출하는 조도 측정기(미 도시)를 더 포함할 수 있다. 상기 조도 측정기는 상기 주 제어부(101)의 내부에 마련될 수 있다. 나아가, 수광 소자(121,122)를 통해 검출되는 광을 이용하여 조도를 측정하는 경우, 수광 소자(예컨대, 포토 다이오드(Photo Diode)의 포화에 의한 이미지 센서의 영화 방지를 위해 노출 제어를 위한 노출시간 정보, 아날로그 이득, 및 디지털 이득 등의 정보를 이용하는 보호회로를 더 구비할 수도 있다.
또한, 수광 소자(121,122)를 통해 검출되는 광을 이용하여 조도를 측정하는 경우, 가시광 영역의 조도 측정할 수 있으며, 이를 위하여, 상기 수광 모듈(120)은 가시광 영역의 조도를 검출할 수 있도록, 상기 적어도 하나의 수광 소자(121)의 전단부에 가시광 영역의 파장을 통과시킬 수 있는 광 필터를 더 포함할 수 있다. 상기 광 필터는 상기 수광 소자(121)에 직접 코팅되거나, 별도의 구조체로 마련될 수 있다. 나아가, 본 발명의 일 실시예에서 상기 수광 모듈(120)이 가시광 영역의 조도를 검출하는 것을 예시하였으나, 본 발명이 이를 한정하는 것은 아니며, 예컨대, 상기 수광 모듈(120)은 적외선 영역의 조도를 검출할 수 있다. 이에 따라, 상기 수광 모듈(120)은 상기 적어도 하나의 수광 소자(121)의 전단부에 적외선 영역의 파장을 통과시킬 수 있는 광 필터를 더 포함할 수 있다.
도 4는 본 발명의 일 실시예에 따른 이미지 처리장치에 구비된 수광 모듈의 상세 구성을 예시하는 구성도이다. 도 4를 참조하면, 상기 수광 모듈(120)은 수광 소자(121,122)에 연결된 가변 이득 증폭기(125)와, 상기 가변 이득 증폭기(125)와 병렬 연결되는 로그 증폭기(127)를 구비한다. 상기 가변 이득 증폭기(125)와 로그 증폭기(127)는, 제어신호(Ctrl)에 의해 선택적으로 구동되도록 구비된다. 구체적으로, 상기 가변 이득 증폭기(125)의 입력 및 출력단에는 각각 제1 및 제3스위치(SW1, SW3)가 마련되고, 로그 증폭기(127)의 입력 및 출력단에는 각각 제2 및 제4스위치(SW2, SW4)가 마련된다. 상기 스위치들(SW1, SW2, SW3, SW4)은 하기의 표 1에 예시되는 제어신호(Ctrl)에 의해 구동이 제어되어, 광원의 주파수 특성 측정을 위한 목적 또는 조도 측정을 위한 목적으로 사용된다.
Ctrl SW1 SW2 SW3 SW4
0 0 1 0 1
1 1 0 1 0
한편, 태양광이나, 장작불과 같은 발화에 의한 빛, 및 인공조명 등은 서로 다른 주파수 특성을 갖는다. 따라서, 광원의 주파수 특성을 분석하면, 광원을 구별 지을 수 있다.
도 5는 광원의 주파수 특성을 예시하는 그래프로써, (a)는 태양광의 주파수 특성을 예시하고, (b)는 백열전구의 주파수 특성을 예시하고, (c)는 형광등의 주파수 특성을 예시하고, (d)는 고효율 형광등(예컨대, 3파장 형광등)의 주파수 특성을 예시한다. 도 5를 참조하면, 태양광 또는 DC 전원을 사용하는 빛은 항상 일정하게 나오므로 주파수 0 Hz의 특성을 나타내고, 백열전구의 경우, 해당 국가나 지역에서 제공하는 상용전원의 주파수(50Hz 또는 60Hz)에 따라 100Hz(또는 120Hz)의 특성을 나타내고, 형광등은 사용하는 방전 기체에 따라, 방전되는 출력되는 빛의 주파수 특성은 방전특성에 의해 상용전력 주파수의 2배, 4배, 6배..2×N배에서 다양한 특성을 나타내고, 3파장 형광등과 같은 고 효율 형광등은 수십KHz 특성을 나타낸다.
이러한 특성을 이용하여, 본 발명의 광원 특성 검출부(140)는 상기 수광 모듈(120)을 통해 감지되는 신호를 통해 상기 광원의 주파수 특성을 검출하고, 그 결과를 상기 자동 색 조절 제어부(150)로 제공한다.
도 6은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 일 예시도이다. 도 6을 참조하면, 광원 특성 검출부(140)는 상기 수광 모듈(120)을 통해 감지되는 신호를 미리 정해진 주기단위로 샘플링하는 ADC(610)와, 상기 ADC(610)을 고속 프리에 변환(fast Fourier transform)하는 FFT(620)를 구비한다. 이에 따라, 자동 색 조절 제어부(150)는 광원 특성 검출부(140)에 의해 검출된 주파수가 태양광, 백열등, 형광등, 또는 고효율 형광등의 주파수를 나타내는지를 확인한다. 나아가, 형광등의 경우, 광원을 좀 더 세밀하게 분리하기 위하여, 주파수 분석을 f0, f1, ...fN 까지 활용할 수 있으며, 이때, ADC 해상도는 분리할 신호의 주파수 특성에 따라 정해지며, 샘플링 레이트(sampling rate)는 나이퀴스트 판별법(Nyquist criterion)에 따라 최소 2*fNyquist로 설정될 수 있다.
일반적으로, 고체 이미지 센서들 중 하나인 CMOS (Complementary Metal Oxide Semiconductor)센서는 라인 노광을 사용한다. 그러므로, CMOS 센서의 촬상면인 이미지 센서 어레이(111)를 구성하는 각 화소(예컨대, 포토 다이오드) 의 전하 축적을 위한 타이밍은 각 화소의 주사 타이밍에 따라 각 라인 마다 시간 차이가 있다. 이로써, 인버터 방식이 아닌 형광등을 사용하는 실내와 같이, 피사체의 밝기가 주기적으로 변화하는 환경에서 CMOS 센서를 이용하여 피사체를 촬상하는 경우, 촬상된 이미지에서 명암의 가로 줄무늬들이 생성되는 플리커 현상이 발생할 수 있다.
이러한 경우 가로 줄무늬는 도 5에서 측정된 f1의 크기와 관계하며, f1이 관찰되지 않는 경우 가로줄 무늬가 발생하지 않는다.
촬상된 이미지에서의 플리커의 발생을 억제하는 방법들 중 하나로서, CMOS 센서의 전하 축적 시간(셔터 속도) 을 광원의 명멸 주기 (blink cycle)의 정수 배로 설정하는 방법이 있다. 전하 축적 시간을 조정한 촬상 장치에서, 비록 전하 축적을 위한 타이밍이 각 화소에 따라 상이하더라도 각 화소의 전하 축적 시간 내의 광원의 광 강도 (light intensity) 변동은 균일화된다. 이로써, 플리커의 발생은 억제될 수 있다.
본 발명에서는 플리커 발생을 검출하는 단계는 다양한 방법으로 실시되고 있는 수직한 방향의 차분 이미지의 화소값의 변동기간 또는 변동 주파수에 따라 실시하지 않고, 광원 특성 검출부(140) 출력(예컨대, f1)을 이용하여 플리커를 검출한다. 즉, 본 발명의 일 실시예에 따른 이미지 처리 장치는 광원 특성 검출부(140)에서 검출된 주파수(f1)를　플리커 주파수로써 사용하여, 플리커 발생을 억제하는 전하 축적시간 제어에 활용할 수 있다. 이를 위해, 본 발명의 일 실시예에 따른 이미지 처리 장치는 광원 특성 검출부(140)에서 검출된 주파수(f1)를　전하 축적 시간으로 설정하여 플리커를 제어하는 플리커 제어부(미 도시) 더 포함할 수 있다. 예컨대, 상기 플리커 제어부는 주 제어부(101)에 마련될 수 있다.
나아가, FFT(620)의 출력이 선형 스케일이므로 상기 f0, f1, ...fN 의 주파수 분리가 용이하지 않을 수 있다. 이를 해결하기 위해, 광원 특성 검출부(140)는 FFT(620)의 출력을 로그(log) 스케일로 변환하는 로그(log) 변환기(650)를 더 포함할 수 있다.
도 7은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 다른 예시도이다. 도 7을 참조하면, 광원 특성 검출부(140)는 태양광, 백열등, 형광등, 또는 고효율 형광등의 주파수에 각각 대응하는 복수의 대역 통과 필터(711-1, 711-2, ... 711-n)와, 상기 복수의 대역 통과 필터(711-1, 711-2, ... 711-n)에 각각 연결되는 복수의 정류회로(712-1, 712-2, ... 712-n)와, 상기 정류회로(712-1, 712-2, ... 712-n)에 각각 연결되어 정류회로(712-1, 712-2, ... 712-n)의 출력 신호를 미리 정해진 주기단위로 샘플링하는 복수의 ADC(713-1, 713-2, ...713-n)를 구비한다. 또한, 광원 특성 검출부(140)는 고주파 필터(715)와, 상기 고주파 필터(715) 출력 신호의 피크 값을 검출하는 피크 검출회로(716)와, 상기 피크 검출회로(716)의 출력 신호를 미리 정해진 주기단위로 샘플링하는 ADC(717)를 구비한다.
나아가, 광원 특성 검출부(140)의 다른 예에서 상기 복수의 대역 통과 필터(711-1, 711-2, ... 711-n)에 정류회로(712-1, 712-2, ... 712-n)가 결합되는 것을 예시하였으나, 이에 대한 대안으로써, 복수의 피크 검출 회로가 구비될 수도 있다. 그리고, 상기 고주파 필터(715)에 피크 검출회로(716)가 결합되는 것을 예시하였으나, 이에 대한 대안으로써, 샘플 앤 홀드(sample and hold) 회로가 구비될 수도 있다.
도 8은 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 또 다른 예시도이다. 도 8을 참조하면, 광원 특성 검출부(140)는 도 7의 광원 특성 검출부의 다른 예시도와 유사하게, 복수의 대역 통과 필터(811-1, 811-2, ... 811-n), 복수의 정류회로(812-1, 812-2, ... 812-n), 복수의 ADC(813-1, 813-2, ...813-n), 고주파 필터(815), 피크 검출회로(816), 및 ADC(817)를 구비한다. 그리고, 도 6의 광원 특성 검출부의 일 예시도에서 예시한 바와 같이, 상기 수광 모듈(120)을 통해 감지되는 신호를 미리 정해진 주기단위로 샘플링하는 ADC(801)와, 상기 ADC(801)의 출력 신호를 고속 프리에 변환(fast Fourier transform)하여 주파수를 검출하는 FFT(805)를 구비할 수 있다. 또한, 광원 특성 검출부(140)는 FFT(805)의 출력을 로그(log) 스케일로 변환하는 로그(log) 변환기(807)를 더 포함할 수 있다.
도 7의 광원 특성 검출부에서와 마찬가지로, 상기 복수의 정류회로(812-1, 812-2, ... 812-n)에 대한 대안으로써, 복수의 피크 검출 회로가 구비될 수도 있다. 그리고, 피크 검출회로(816)에 대한 대안으로써, 샘플 앤 홀드(sample and hold) 회로가 구비될 수도 있다.
도 9는 본 발명의 일 실시예에 따른 이미지 처리 장치에 구비된 광원 특성 검출부의 피크 검출 회로의 상세 구성을 예시하는 회로도이다. 도 9를 참조하면, 현재 설정된 피크 값보다 상대적으로 더 큰 피크 값이 입력될 때까지 현재 설정된 피크 값을 유지하는 피크 검출부(910)와, 유지되는 상기 피크 값을 미리 정해진 주기단위로 리셋하는 자동 리셋 스위치(920)를 구비한다. 상기 자동 리셋 스위치(920)는 상기 주 제어부(101)로부터 미리 정해진 주기마다 리셋 제어 신호를 입력받고, 상기 피크 검출부(910)의 커패시터에 의해 유지되는 피크 값을 리셋 시키도록 동작한다. 나아가, 자동 리셋 스위치(920)의 리셋 동작 후, 중심 주파수 및 필터의 통과 대역을 고려하여 일정시간 대기시간(delay)를 가지고 신호를 취득해야 정확한 주파수 특성을 측정할 수 있다.
또한, 전술한 광원 특성 검출부(140)는, 도 10과 같이 이미지 센서 모듈(110)의 외부에 구비되거나, 도 11과 같이 이미지 센서 모듈(110)의 내부에 구비될 수 있다.
한편, 상기 자동 색 조절 제어부(150)는 이미지의 색상 통계를 이용하여 이미지의 색을 조절할 수 있다. 이를 위해, 본 발명의 이미지 처리 장치는 이미지의 색상 통계를 분석하는 색상 정보 분석부(138)를 더 구비할 수 있다.
도 12는 이미지의 색상 통계를 예시하는 도면으로써, (a)는 Cb 및 Cr 평명에서의 채도(saturation) 및 색조(Hue)의 그레이 존(Gray Zone)을 예시하고, (b)는 색조(Hue)-채도(saturation) 사이의 관계를 예시하고, (c)는 색조(Hue)-도수 사이의관계를 예시하고, (d)는 채도(saturation)-도수 사이의 관계를 예시한다.
색상 정보 분석부(138)는 도 12에 예시되는 이미지의 색상 통계를 Bayer color에서 HSV, HSI 또는 YCC (YUV, YCbCr,등등)의 색좌표를 이용하여 분석하거나, 감마 보정된 RGB color에서 HSV, HSI 또는 YCC (YUV, YCbCr,등등)의 색 좌표를 이용하여 분석할 수 있다.
또한, 색상 정보 분석부(138)는 이미지의 색상 통계를 분석하기 위하여, 밝기(Y)에 따른 가중치를 도 13과 다르게 설정하고, 이에 기초하여 이미지의 색상 통계를 분석할 수도 있다.
한편, 자동 색 조절 제어부(150)는 도 12의 (a)에서 예시하는 Ymin≤Y≤Ymax 의 그레이 존 내에 포함된 이미지의 화소에 대해 색을 조절할 수 있다. 즉, 그레이존(Gray Zone) 내에 분포되는 화소는 그레이 픽셀 카운터로 계산되고, 그레이 존 외부에 분포되는 화소에 대해서는 색조(Hue)와 채도(saturation) 등의 관계의 추출에 사용된다.
나아가, 자동 색 조절 제어부(150)는 하기에 설명되는 이미지 처리 방법에 의한 자동 색 조절을 수행한다.
도 14a 및 14b는 본 발명의 일 실시예에 따른 이미지 처리 방법 흐름도이다. 이하, 도 14를 참조하여 본 발명의 일 실시예에 따른 이미지 처리 방법의 진행 과정을 설명한다.
우선, S100단계에서, 이미지 처리 방법을 진행하는데 사용되는 파라미터들을 설정한다. 예컨대, 상기 파라미터는 화이트 밸런스 제어를 위한 화이트 밸런스 이득 값(GR, GG, GB), 색조(Hue)-채도(saturation) 상태로부터의 채도값(HS)의 임계값(HSTH), 자동 화이트 밸런스가 변경된 광원이 정상적으로 동작하기 위해 필요한 프레임 수(Frame_0), 광원의 주파수 특성(FFT_L), 및 흑체궤적(plankian locus) 색좌표에 대응하는 색조에서의 채도 값(Plank_HS)의 임계값(Plank_HSTH), 그레이 화소의 분포 정도(%) 및 단색 정도, 광원에 따라 테이블로 정의된 R, G, B 신호의 경계이득 하한(GR0, GG0, GB0), 경계이득 상한(GR1, GG1, GB1), 디폴트 이득(GRd, GGd, GBd) 등을 포함한다.
그리고, S101단계에서 주파수 특성을 이용하여 광원의 종류를 검출한다. 구체적으로, 전술한 광원 특성 검출부(140)로부터 제공되는 외부 광원의 주파수 특성을 확인하고, 상기 주파수 특성을 고려하여 광원의 종류를 검출하고, 이미지의 색 조절을 위한 광원 종류를 설정한다. 예컨대, 도 5에 도시되는 광원의 주파수 특성을 고려하여, 현재 수광 모듈(120) 등을 통해 검출되는 광원의 주파수 특성을 도 5에 도시되는 광원의 주파수 특성과 비교하여 일치하는 광원 종류를 검출한다.
다음으로, S102단계에서, 이미지를 입력받고, S103단계에서 상기 입력된 이미지의 채도(Plank_HS)를 확인한다.
한편, 입력되는 이미지의 채도가 높을 경우, 상기 이미지에 포함되는 색에 의해 자동 화이트 밸러스가 정상적으로 동작되지 않을 수 있다. 따라서, 색 온도가 상대적으로 높거나 낮을 경우, 자동 화이트 밸러스를 별도로 수행하는 것이 바람직하다. 이를 위해, S105단계에서, 흑체궤적 색 좌표에 대응하는 색조에서의 채도 값(Plank_HS)을 검출하고, 흑체궤적 색좌표에 대응하는 색조에서의 채도 값(Plank_HS)이 미리 정해진 임계값(Plank_HSTH)보다 상대적으로 작은 값을 갖는지를 확인한다. 흑체궤적 색좌표에 대응하는 색조에서의 채도 값(Plank_HS)이 미리 정해진 임계값(Plank_HSTH)과 같거나 크면 색 온도가 상대적으로 높거나 낮은 것으로 판단하여 S106단계로 진행하고, 흑체궤적 색좌표에 대응하는 색조에서의 채도 값(Plank_HS)이 미리 정해진 임계값(Plank_HSTH)보다 작으면 S107단계를 진행한다.
입력되는 이미지의 채도가 높을 경우, 상기 이미지에 포함되는 색에 의해 자동 화이트 밸러스가 정상적으로 동작되지 않을 수 있으므로, S106단계에서는 디폴트 이득(Rd, Gd, Bd)을 적용하여 자동 화이트 밸런스 처리를 수행한다.
S105단계에서, 상기 흑체궤적 색 좌표에 대응하는 색조에서의 채도 값(Plank_HS)은 본 발명의 일 실시예에 따른 이미지 장치의 색상 정보 분석부(138)로부터 제공받을 수 있다.
나아가, 광원에 따라 서로 다른 흑체궤적(plankian locus) 색좌표에 대응하는 색조에서의 채도 값(Plank_HS)이 다르게 변경될 수 있으므로, S105단계의 수행에 앞서 우선적으로 S104단계에서 광원의 종류에 따른 채도 값(Plank_HS)의 임계값(Plank_HSTH)을 설정하는 것이 바람직하다.
S107단계에서, 그레이 화소의 분포 정도(%) 및 단색 정도를 고려하여, 상기 렌즈 쉐이딩을 다르게 적용할 수 있다. 그레이 화소의 분포 정도(%) 및 단색 정도가 초기화 과정에서 정의된 임계값보다 큰 값을 가지는 경우, 렌즈 쉐이딩 보상 정도를 다르게 설정할 수 있다. 그리고, 그레이 화소의 분포 정도(%) 및 단색 정도가 초기화 과정에서 정의된 임계값과 같거나 작으면 고정값(default value)으로 렌즈 쉐이딩이 동작되도록 할 수 있다.
S108단계에서, 이미지에 포함된 백색을 추정하고, 상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값(GR, GG, GB)을 설정하여, 전술한 이미지 처리 장치의 화이트 밸런스 제어부(135)로 제공하여 자동 화이트 밸런스 처리를 수행한다. 이때 화이트 밸런스 이득값(GB, GG, GR)을 임의 변수(GRA, GGA, GBA)로 저장한다. 그리고, S108단계에서, 상기 S101단계에서 확인된 광원 종류에 대응하는 색 온도를 상기 이미지에 반영한다.
나아가, 현재 입력되는 이미지에 대한 자동 화이트 밸런스 처리를 진행하는 과정에서, 광원이 변경될 수 있다. 예컨대, 이미지 처리 장치가 구비된 카메라 또는 캠코더 등이 사용자에 의해 이동되거나, 형광등이나 백열등과 같은 조명장치가 온/오프(ON/OFF) 될 수 있다. 광원의 변경에 의해 이미지의 색온도가 변경될 수 있으므로, 다음 이미지의 입력에 앞서, 광원의 변경 여부를 확인하는 것이 바람직하다. 이에 따라, S111단계에서는, 상기 광원 특성 검출부(도 1의 140)로부터 제공되는 광원의 주파수를 확인하여, 광원이 변경되었는지를 확인한다. 광원이 변경되었을 경우 S121단계를 진행하고, 광원의 주파수가 변경되지 않았을 경우 S127단계를 통해 S112단계를 진행한다.
S111단계에서, 광원의 주파수를 기준으로 광원의 변경 여부를 확인할 수 있다. 즉, 광원의 주파수가 변경되면 광원이 변경된 것으로 판단할 수 있다. 또는 광원이 실내 광원인지 또는 실외 광원인지를 기준으로 광원의 변경 여부를 결정하는 것도 가능하다. 예컨대, 광원이 태양광인 경우 실외 광원으로 설정하고, 광원이 형광등, 백열등, 및 고효율 형광등인 경우 실내 광원으로 설정한 후, 실내 광원(또는 실외 광원)의 주파수에서 실외 광원(또는 실내 광원)의 주파수로 변경됨에 한하여 광원이 변경된 것으로 판단하고, 실내 광원의 주파수 내에서 변경되는 경우 광원이 변경되지 않은 것으로 판단할 수도 있다.
S112단계에서는 다음 이미지를 입력받는다.
이미지의 채도가 높을 경우 자동 화이트 밸런스 수행에 오류가 발생할 수 있으므로, S113단계에서는 이미지의 채도를 검출한다. 그리고, S114단계에서 이미지의 색조(Hue)-채도(saturation) 상태로부터의 채도값(HS)이 미리 정해진 임계값(HSTH)보다 상대적으로 작은 값을 갖는지를 확인하고, 상기 채도값(HS)이 미리 정해진 임계값(HSTH)보다 상대적으로 작으면 S115단계를 진행하고, 채도값(HS)이 미리 정해진 임계값(HSTH)과 같거나 상대적으로 높으면 자동 화이트 밸런스 수행에 오류가 발생할 우려가 있으므로 S116단계를 진행한다. 상기 현재 이미지의 색조(Hue)-채도(saturation) 상태로부터의 채도값(HS)은 전술한 이미지 처리 장치의 색상 정보 분석부(138)로부터 제공받을 수 있다.
S115단계에서는, 이미지에 포함된 백색을 추정하고, 상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값(GR, GG, GB)을 설정하여, 전술한 이미지 처리 장치의 화이트 밸런스 제어부(135)로 제공하여 자동 화이트 밸런스 처리를 수행한다. 이때 화이트 밸런스 이득값(GB, GG, GR)을 임의 변수(GRA, GGA, GBA)로 저장한다.
반면, S116단계에서는, 자동 화이트 밸런스의 홀트(AWB halt)를 처리한다. 즉 현재 이미지의 화이트 밸런스가 반영되지 않도록, 이전 이미지의 자동 화이트 밸런스 수행시 설정된 화이트 밸런스 이득 값(GRA, GGA, GBA)을 화이트 밸런스 제어부로 제공하여 자동 화이트 밸런스 처리를 수행한다.
한편, 광원의 변경에 따라, 이미지의 자동 화이트 밸런스 처리를 위해 S122, S123, S124, S125단계를 진행함에 있어서, 광원의 종류가 변경되고, 광원이 새로 설정되더라도 자동 화이트 밸런스에 변경된 광원의 색 온도가 바로 반영되지 않을 수 있다. 따라서, 변경된 광원의 색 온도가 반영되도록 미리 정해진 입력 이미지의 갯수만큼 자동 화이트 밸런스를 수행하는 것이 바람직하다. 이를 위해, S121단계에서는, 이미지의 갯수를 카운터 하기 위한 값(i)을 초기화한다. 그리고, 광원의 변경에 따른 자동 화이트 밸런스 처리 과정(S123,S124,S125)이 미리 정해진 입력 이미지의 갯수만큼 반복 수행되도록 이미지의 갯수를 카운터 하기 위한 값(i)을 갱신하는 S126단계와, 자동 화이트 밸런스 처리 과정(S123,S124,S125)이 미리 정해진 입력 이미지의 갯수만큼 반복 수행되었는지를 확인하는 S127단계를 수행한다.
S122단계에서는 광원의 종류를 검출하고, 이미지의 색 조절을 위한 광원 종류를 설정한다. 그리고, S123단계에서는, 자동 화이트 밸런스를 수행할 이미지를 입력받는다.
S124단계에서는, S107단계에서와 마찬가지로 광원의 종류에 따른 렌즈 쉐이딩을 반영한다.
S125단계에서는, 상기 S108단계에서와 마찬가지로, 이미지에 포함된 백색을 추정하고, 상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값(GR, GG, GB)을 설정하여, 전술한 이미지 처리 장치의 화이트 밸런스 제어부(135)로 제공하여 자동 화이트 밸런스 처리를 수행한다. 이때 화이트 밸런스 이득값(GB, GG, GR)을 임의 변수(GRA, GGA, GBA)로 저장한다.
나아가 전술한 바와 같이, 광원의 변경에 따른 자동 화이트 밸런스 처리 과정(S123,S124,S125)이 미리 정해진 입력 이미지의 갯수만큼 반복 수행되도록 S126단계에서는 이미지의 갯수를 확인하기 위한 카운터 값(i)을 현재 카운터 값에 1만큼 가산하여 갱신한 후, S117 및 S111단계를 통해 S127단계를 진행한다.
S127단계에서 카운터 값(i)이 미리 정해진 입력 이미지 갯수(Frame_0)보다 작거나 같으면 자동 화이트 밸런스 처리 과정(S123,S124,S125)의 반복 수행을 위해 S123단계로 진행하고, 카운터 값(i)이 미리 정해진 입력 이미지 갯수(Frame_0)보다 크면, 자동 화이트 밸런스 처리 과정(S123,S124,S125)을 반복하지 않고 S112단계를 진행한다.
도 15a 및 15b는 본 발명의 다른 실시예에 따른 이미지 처리 방법의 흐름도이다. 이하, 도 15a 및 15b를 참조하여 본 발명의 다른 실시예에 따른 이미지 처리 방법의 진행 과정을 설명한다. 본 발명의 다른 실시예에 따른 이미지 처리 방법은, 도 14a 및 14b와 함께 설명한 본 발명의 일 실시예에 따른 이미지 처리 방법과 동일하다. 다만, 자동 화이트 밸런스의 순응 여부를 확인하는 과정(S131,S132,S133,S134,S135,S136,S137)이 다르다. 도 15a 및 15b에서 도 14a 및 14b와 동일한 과정은 도 14a 및 14b와 동일한 참조부호를 부여하며, 이에 대한 설명은 도 도 14a 및 14b의 설명을 참조한다.
본 발명의 다른 실시예에 따른 이미지 처리 방법에서, S111단계를 통해 광원이 변경되었음을 확인하면, S122에서 광원의 종류를 검출하고, S123단계에서 이미지를 입력받는다. 그리고, S124단계에서, 상기 122단계에서 검출된 광원의 종류를 고려한 렌즈 쉐이딩을 반영한다.
S131단계에서는, 자동 화이트 밸런스의 이득 경계의 하한값(GR0, GG0, GB0) 및 상한값(GR1, GG1, GB1)을 재설정하고, S132단계에서 자동 화이트 밸런스 계산을 통하여 자동 화이트 밸런스 이득 값(GR, GG, GB)을 계산한다. S133 단계에서는, 계산된 자동 화이트 밸런스 이득 값(GR, GG, GB)이 각각 이득 경계의 상한 및 하한의 범위 내에 존재하는지를 확인한다. 즉, 계산된 자동 화이트 밸런스 이득 값(GR, GG, GB)이 각각 GR0<GR<GR1, GG0<GG<GG1, GB0<GB<GB1인지를 확인한다. 구체적으로, 자동 화이트 밸런스 이득 값(GR, GG, GB)을 다각형 형식으로 표시할 수 있으며, R,G,B이득이 다각형 범위 내에 포함될 때 와, 그렇지 않을 때로 나누어 구현할 수도 있다. 나아가, S133단계에서, 상기 자동 화이트 밸런스 이득 값(GR, GG, GB)이 각각 이득 경계의 상한 및 하한의 범위 내에 존재하면 S134단계를 수행하고, 이득 경계의 상한 및 하한의 범위 내에 존재하지 않으면 S136단계를 수행한다.
S134단계에서는, 화이트 밸런스 이득 값(GR, GG, GB)을 전술한 이미지 처리 장치의 화이트 밸런스 제어부(135)로 제공하여 자동 화이트 밸런스 처리를 수행한다. 이때 화이트 밸런스 이득값(GB, GG, GR)을 임의 변수(GRA, GGA, GBA)로 저장한다.
그리고 S135단계에서 그레이 화소의 분포 정도(%)를 사용하여 자동 화이트 밸런스의 순응 여부를 직접 확인하고, 순응이 된 경우에는 자동 화이트 밸런스 순응이 되었음을 AWB 순응 변수를 할당하여 명시한다. 이와 관련하여, S137단계에서는 AWB 순응 변수를 확인함으로써, 자동 화이트 밸런스의 순응 여부를 결정한다. 자동 화이트 밸런스가 순응되었을 경우 S107단계를 통해 이미지를 입력받아 자동 화이트 밸런스를 처리하는 과정을 진행하고, 자동 화이트 밸런스가 순응되지 않았을 경우 S123단계로 진행하여 RGB 이득 경계를 이용한 자동 화이트 밸런스 처리 과정을 진행한다.
한편, S136단계에서는, 자동 화이트 밸런스의 홀트(AWB halt)를 처리한다. 즉 현재 이미지의 화이트 밸런스가 반영되지 않도록, 이전 이미지의 자동 화이트 밸런스 수행시 설정된 화이트 밸런스 이득 값(GRA, GGA, GBA)을 화이트 밸런스 제어부로 제공하여 자동 화이트 밸런스 처리를 수행한다.
이상에서 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 수정 및 변형이 가능함은 물론이다.

Claims (26)

  1. 디지털 카메라의 렌즈를 통해 투영되는 영상 신호의 이미지를 처리하는 장치에 있어서,
    상기 렌즈를 통해 투영되는 광신호를 전기신호로 변환하여 영상 신호를 생성 및 출력하는 이미지 센서 모듈과,
    외부 광원의 광신호를 검출하는 수광 모듈과,
    상기 수광 모듈로부터 검출된 광원의 주파수를 검출하는 광원 특성 검출부와,
    상기 광원의 주파수 특성을 분석하여 상기 광원의 종류를 확인하고, 상기 광원의 종류를 근거로 상기 영상 신호의 화이트 밸런스 이득을 제어하는 자동 색 조절 제어부를 포함하며,
    상기 광원 특성 검출부는,
    상기 수광 모듈로부터 출력되는 신호를 고속 프리에 변환(Fast Fourier Transform; FFT)하는 FFT 처리부와,
    상기 FFT 처리부로부터 출력되는 값을 로그(log)변환하는 로그 변환기를 더 포함함을 특징으로 하는 장치.
  2. 제1항에 있어서, 상기 수광 모듈 및 상기 광원 특성 검출부는 상기 이미지 센서 모듈의 내부에 구비되는 것을 특징으로 하는 장치.
  3. 제1항에 있어서, 상기 수광 모듈은,
    수광 소자와,
    상기 수광 소자의 출력 값의 이득을 조절하는 가변 이득 증폭기와,
    상기 가변 이득 증폭기와 병렬 연결되는 로그 증폭기와,
    상기 수광 소자로부터 상기 가변 이득 증폭기를 통해 신호가 이동되는 제1경로 및 상기 수광 소자로부터 상기 로그 증폭기를 통해 신호가 이동되는 제2경로 중, 적어도 어느 하나의 경로를 출력단에 연결하도록 제어되는 적어도 하나의 스위치를 포함함을 특징으로 하는 장치.
  4. 제3항에 있어서, 상기 수광 모듈은,
    상기 제2경로와 연결되어 외부의 조도를 측정하는 조도 측정기를 더 포함함을 특징으로 하는 장치.
  5. 삭제
  6. 제3항에 있어서, 상기 광원 특성 검출부는
    광원의 주파수에 대응하는 미리 정해진 대역의 주파수를 통과시키는 적어도 두 개의 대역 통과 필터와,
    상기 적어도 두 개의 대역 통과 필터에 각각 연결되며, 상기 대역 통과 필터의 출력을 정류하는 적어도 두 개의 정류회로와,
    미리 정해진 고주파 대역의 신호를 통과시키는 고주파 필터와,
    상기 고주파 필터로부터 출력되는 신호의 피크(Peak) 값을 검출하는 피크 검출회로와,
    상기 적어도 두 개의 정류회로 및 상기 피크 검출회로로부터 출력되는 아날로그 신호를 디지털 신호로 변환하는 적어도 세 개의 아날로그-디지털 변환기를 포함함을 특징으로 하는 장치.
  7. 삭제
  8. 제6항에 있어서, 상기 피크 검출회로는,
    상기 대역 통과 필터의 출력 값의 피크(Peak) 값을 검출하는 피크 검출부와,
    미리 정해진 주기마다 상기 피크 검출부를 리셋(reset)하는 자동 리셋 스위치를 포함함을 특징으로 하는 장치.
  9. 제3항에 있어서, 상기 광원 특성 검출부는
    광원의 주파수에 대응하는 미리 정해진 대역의 주파수를 통과시키는 적어도 두 개의 대역 통과 필터와,
    상기 적어도 두 개의 대역 통과 필터에 각각 연결되며, 상기 대역 통과 필터의 출력 값의 피크(Peak) 값을 검출하는 적어도 두 개의 피크 검출회로와,
    미리 정해진 고주파 대역의 신호를 통과시키는 고주파 필터와,
    미리 정해진 주기 단위로 상기 고주파 필터로부터 출력 값을 유지하는 샘플앤홀드(sample and hold)회로와,
    상기 적어도 두 개의 피크 검출회로 및 상기 샘플앤홀드회로로부터 출력되는 아날로그 신호를 디지털 신호로 변환하는 적어도 세 개의 아날로그-디지털 변환기를 포함함을 특징으로 하는 장치.
  10. 삭제
  11. 제9항에 있어서, 상기 피크 검출회로는,
    상기 대역 통과 필터의 출력 값의 피크(Peak) 값을 검출하는 피크 검출부와,
    미리 정해진 주기마다 상기 피크 검출부를 리셋(reset)하는 자동 리셋 스위치를 포함함을 특징으로 하는 장치.
  12. 제1항에 있어서,
    상기 자동 색 조절 제어부로부터 렌즈 쉐이딩(Lens Shading) 보정값을 입력받고, 렌즈 쉐이딩을 처리하는 렌즈 쉐이딩 보정부를 더 포함함을 특징으로 하는 장치.
  13. 제1항에 있어서,
    이미지의 색조(Hue)-채도(saturation)관계, 색조-도수 관계, 채도-도수 관계, 및 그래이(Gray) 화소의 분포도를 포함하는 색상정보를 분석하는 색상정보 분석부를 더 포함하며,
    상기 자동 색조절 제어부는 상기 색상정보를 이용하여 화이트 밸러스 적용 여부를 확인하는 것을 특징으로 하는 장치.
  14. 제1항에 있어서,
    상기 광원 특성 검출부를 통해 출력되는 광원의 주파수를 입력받고, 상기 광원의 주파수 또는 광원의 주파수의 배수에 대응되도록 상기 이미지 센서 모듈의 전하 축적시간을 제어하는 플리커 제어부를 더 포함하는 것을 특징으로 하는 장치.
  15. 디지털 카메라의 렌즈를 통해 투영되는 영상 신호의 이미지를 처리하는 방법에 있어서,
    (a)외부 광원의 주파수 특성을 확인하여 상기 외부 광원의 광원 종류를 검출하는 과정과,
    (b)입력받은 이미지의 제1채도값을 검출하는 과정과,
    (c)상기 광원 종류에 따라 미리 정해진 제1임계값을 설정하는 과정과,
    (d)상기 제1채도값과 상기 미리 정해진 제1임계값을 비교하는 과정과,
    (e)상기 제1채도값이 상기 미리 정해진 제1임계값보다 상대적으로 적은 값임에 대응하여, 상기 이미지에 포함된 백색을 추정하고 상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값을 설정하여, 자동 화이트 밸런스(Auto White Balence)를 수행하는 과정과,
    (f)상기 제1채도값이 상기 미리 정해진 제1임계값과 같거나 상대적으로 큰 값임에 대응하여, 광원에 따라 미리 정해진 디폴트 이득(Default Gain)을 적용하여 자동 화이트 밸런스(Auto White Balence)를 수행하는 과정을 포함함을 특징으로 하는 방법.
  16. 제15항에 있어서,
    상기 자동 화이트 밸런스를 수행하는 과정 이후, 상기 외부 광원의 변경 여부를 확인하는 과정과,
    상기 외부 광원이 변경됨에 대응하여, 변경된 광원의 종류를 검출하는 과정과,
    이미지를 다시 입력받고, 상기 변경된 광원의 종류에 따라 상기 다시 입력받은 이미지에 포함된 백색을 추정하여 제2 자동 화이트 밸런스를 수행하는 과정을 더 포함함을 특징으로 하는 방법.
  17. 제16항에 있어서,
    상기 이미지를 다시 입력받기 전에, 이미지 갯수를 카운터 하기 위한 카운터값을 초기화하는 과정과,
    상기 자동 화이트 밸런스 수행 과정을 진행한 후, 상기 카운터값을 갱신하는 과정과,
    상기 갱신된 카운터 값이 미리 정해진 제3임계값보다 큰 값을 갖는지를 확인하는 과정을 더 포함하며,
    상기 갱신된 카운터 값이 상기 미리 정해진 제3임계값과 같거나 작은 값일 때, 상기 이미지를 다시 입력받는 것을 실행하는 것을 더 포함함을 특징으로 하는 방법.
  18. 제15항에 있어서,
    상기 자동 화이트 밸런스를 수행하는 과정 이후, 상기 외부 광원의 변경 여부를 확인하는 과정과,
    상기 외부 광원이 변경됨에 대응하여,
    변경된 광원의 종류를 검출하는 과정과,
    이미지를 다시 입력받는 과정과,
    자동 화이트 밸러스 처리를 위한 이득 경계의 상한값 및 하한값을 설정하는 과정과,
    상기 다시 입력받은 이미지에 포함된 백색을 추정하고, 상기 다시 입력받은 이미지에 포함된 백색을 보정하기 위한 제2 화이트 밸런스 이득 값을 확인하는 과정과,
    상기 제2 화이트 밸런스 이득 값이 상기 자동 화이트 밸러스 처리를 위한 이득 경계의 범위 내에 포함되는지를 확인하는 과정과,
    상기 제2 화이트 밸런스 이득 값이 상기 자동 화이트 밸러스 처리를 위한 이득 경계의 범위 내에 포함되면, 상기 다시 입력받은 이미지에 포함된 백색을 추정하여 자동 화이트 밸런스를 수행하는 과정과,
    상기 제2 화이트 밸런스 이득 값이 상기 자동 화이트 밸러스 처리를 위한 이득 경계의 범위 내에 포함되지 않으면, 미리 정해진 변수을 사용하여 자동 화이트 밸런스를 수행하는 자동 화이트 밸런스 홀트(halt) 과정을 더 포함함을 특징으로 하는 방법.
  19. 제15항에 있어서,
    상기 자동 화이트 밸런스를 수행하는 과정은,
    상기 이미지에 포함된 백색을 추정하는 과정과,
    상기 추정된 백색을 보정하기 위한 화이트 밸런스 이득 값을 설정하는 과정과,
    상기 화이트 밸런스 이득 값을 미리 정해진 변수로 저장하는 과정을 포함함을 특징으로 하는 방법.
  20. 제15항에 있어서,
    자동 화이트 밸런스를 수행하기 전에, 상기 외부 광원의 종류를 고려한 렌즈 쉐이딩을 반영하는 과정을 더 포함함을 특징으로 하는 방법.
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
KR1020100044711A 2010-05-12 2010-05-12 광원의 특성을 이용한 이미지 처리 장치 및 방법 KR101678691B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020100044711A KR101678691B1 (ko) 2010-05-12 2010-05-12 광원의 특성을 이용한 이미지 처리 장치 및 방법
US13/106,456 US8587690B2 (en) 2010-05-12 2011-05-12 Apparatus and method for processing image by using characteristic of light source
US14/061,196 US8928775B2 (en) 2010-05-12 2013-10-23 Apparatus and method for processing image by using characteristic of light source

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100044711A KR101678691B1 (ko) 2010-05-12 2010-05-12 광원의 특성을 이용한 이미지 처리 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20110125146A KR20110125146A (ko) 2011-11-18
KR101678691B1 true KR101678691B1 (ko) 2016-11-23

Family

ID=44911475

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100044711A KR101678691B1 (ko) 2010-05-12 2010-05-12 광원의 특성을 이용한 이미지 처리 장치 및 방법

Country Status (2)

Country Link
US (2) US8587690B2 (ko)
KR (1) KR101678691B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11483505B2 (en) 2017-11-06 2022-10-25 SK Hynix Inc. Image synchronization device and image information generation apparatus including the same

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6069825B2 (ja) * 2011-11-18 2017-02-01 ソニー株式会社 画像取得装置、画像取得方法及び画像取得プログラム
US8878957B2 (en) * 2012-04-18 2014-11-04 Texas Instruments Incorporated Method, system and computer program product for enhancing white balance of an image
US9080916B2 (en) * 2012-08-30 2015-07-14 Apple Inc. Correction factor for color response calibration
CN104981861B (zh) * 2013-02-14 2017-04-12 三菱电机株式会社 信号转换装置和方法
KR101531541B1 (ko) * 2013-05-31 2015-06-26 을지대학교 산학협력단 3색 발생광원 조절장치
KR101920816B1 (ko) * 2013-07-08 2018-11-21 한화테크윈 주식회사 쉐이딩 보정이 가능한 화이트 발란스 방법, 그리고 이에 적용되는 장치
US9615071B2 (en) * 2013-08-01 2017-04-04 Mediatek Inc. Method and apparatus for tuning camera correction setting for camera module
KR102211592B1 (ko) * 2014-03-19 2021-02-04 삼성전자주식회사 전자 장치 및 이의 영상 처리 방법
US9270961B2 (en) * 2014-07-21 2016-02-23 Samsung Electronics Co., Ltd. Color shading correction using color channel consistency
US9595086B2 (en) 2014-09-04 2017-03-14 Samsung Electronics Co., Ltd. Image processing device, image processing system and method for image processing
KR101594258B1 (ko) * 2014-09-24 2016-02-16 주식회사 넥서스칩스 컬러/조도 센서를 이용한 카메라 영상 보정/제어 장치 및 방법
KR20170014357A (ko) 2015-07-29 2017-02-08 엘지전자 주식회사 카메라를 구비하는 이동 단말기 및 그 제어방법
CN105338334B (zh) * 2015-10-30 2017-10-03 华勤通讯技术有限公司 移动终端内的照相机的校准方法和系统
CN105263010B (zh) * 2015-11-26 2017-06-06 深圳市华星光电技术有限公司 一种自动白平衡方法及系统
US10154234B2 (en) * 2016-03-16 2018-12-11 Omnivision Technologies, Inc. Image sensor with peripheral 3A-control sensors and associated imaging system
KR20180033003A (ko) * 2016-09-23 2018-04-02 삼성전자주식회사 입사광의 파장 스펙트럼을 검출하는 방법 및 이를 수행하는 전자 장치
US10475169B2 (en) 2017-11-28 2019-11-12 Adobe Inc. High dynamic range illumination estimation
JP7034742B2 (ja) * 2018-01-29 2022-03-14 キヤノン株式会社 画像形成装置、その方法およびプログラム
CN111587573B (zh) * 2018-05-30 2021-06-15 华为技术有限公司 一种图像处理方法、装置及计算机存储介质
CN109523485B (zh) * 2018-11-19 2021-03-02 Oppo广东移动通信有限公司 图像颜色校正方法、装置、存储介质及移动终端
KR20200134862A (ko) 2019-05-24 2020-12-02 삼성전자주식회사 영상 처리 방법 및 장치
US10904049B1 (en) * 2019-07-11 2021-01-26 Stmicroelectronics (Research & Development) Limited Time domain discrete transform computation
KR20220045762A (ko) * 2020-10-06 2022-04-13 주식회사 스카이시스 인공지능 영상 처리를 이용한 선박 자동 인식 및 모니터링 시스템 및 그 제공 방법
KR20220077730A (ko) 2020-12-02 2022-06-09 삼성전자주식회사 이미지 처리 방법 및 장치
JP2022134435A (ja) * 2021-03-03 2022-09-15 富士通株式会社 表示制御プログラム、表示制御方法及び表示制御装置
CN116761081A (zh) * 2021-06-07 2023-09-15 荣耀终端有限公司 一种ai自动白平衡的算法和电子设备
JP2023034920A (ja) * 2021-08-31 2023-03-13 キヤノン株式会社 撮像装置、フリッカー検出方法およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060244843A1 (en) 2005-04-29 2006-11-02 Bart Dierickx Illumination flicker detection
US20070070216A1 (en) 2005-09-28 2007-03-29 Sony Corporation Imaging apparatus, and exposure control apparatus, method, and program
JP2009060586A (ja) 2007-08-06 2009-03-19 Panasonic Corp ホワイトバランス調整装置、撮像装置、ホワイトバランス調整方法、プログラムおよび集積回路

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4879591A (en) * 1986-01-31 1989-11-07 Canon Kabushiki Kaisha Image pickup apparatus compensating an image signal for variations in color temperature
JPH11285010A (ja) * 1998-03-30 1999-10-15 Konica Corp 撮像装置
US20020176009A1 (en) * 1998-05-08 2002-11-28 Johnson Sandra Marie Image processor circuits, systems, and methods
JP2002374539A (ja) * 2001-06-15 2002-12-26 Olympus Optical Co Ltd ホワイトバランス補正可能なカメラ
US7102669B2 (en) * 2002-04-02 2006-09-05 Freescale Semiconductor, Inc. Digital color image pre-processing
JP4033140B2 (ja) * 2004-02-10 2008-01-16 カシオ計算機株式会社 撮像装置、ホワイトバランス制御方法及びホワイトバランス制御プログラム
JP4121493B2 (ja) * 2004-11-12 2008-07-23 富士フイルム株式会社 デジタルカメラとその信号処理方法及び信号処理装置
JP2006287362A (ja) * 2005-03-31 2006-10-19 Eastman Kodak Co デジタルカメラおよびホワイトバランス調整方法
JP5099701B2 (ja) * 2008-06-19 2012-12-19 シャープ株式会社 信号処理装置、信号処理方法、制御プログラム、可読記録媒体、固体撮像装置および電子情報機器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060244843A1 (en) 2005-04-29 2006-11-02 Bart Dierickx Illumination flicker detection
US20070070216A1 (en) 2005-09-28 2007-03-29 Sony Corporation Imaging apparatus, and exposure control apparatus, method, and program
JP2009060586A (ja) 2007-08-06 2009-03-19 Panasonic Corp ホワイトバランス調整装置、撮像装置、ホワイトバランス調整方法、プログラムおよび集積回路

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11483505B2 (en) 2017-11-06 2022-10-25 SK Hynix Inc. Image synchronization device and image information generation apparatus including the same

Also Published As

Publication number Publication date
KR20110125146A (ko) 2011-11-18
US20140043501A1 (en) 2014-02-13
US20110279703A1 (en) 2011-11-17
US8587690B2 (en) 2013-11-19
US8928775B2 (en) 2015-01-06

Similar Documents

Publication Publication Date Title
KR101678691B1 (ko) 광원의 특성을 이용한 이미지 처리 장치 및 방법
KR101270851B1 (ko) 적응적 렌즈 셰이딩 보정
US8988563B2 (en) Dual parallel processing of frames of raw image data
US6995791B2 (en) Automatic white balance for digital imaging
US7999978B2 (en) Matrix coefficient determining method and image input apparatus
US8111302B2 (en) White balance control apparatus and method
TWI338513B (en) Method and apparatus providing automatic color blancing for digital imaging systems
KR100304663B1 (ko) 칼라조명색온도검출방법및장치
US8319861B2 (en) Compensation for black level changes
US20150062347A1 (en) Image processing methods for visible and infrared imaging
JP2016052115A (ja) 撮像方法及び撮像装置
US20120044380A1 (en) Image capture with identification of illuminant
US20100321523A1 (en) Method, apparatus, and system for selecting pixels for automatic white balance processing
KR20140077620A (ko) 색감 복원 방법 및 장치
US9105105B2 (en) Imaging device, imaging system, and imaging method utilizing white balance correction
KR20060118352A (ko) 화상 처리 장치, 촬상 장치 및 화상 처리 프로그램
JP4352730B2 (ja) オートホワイトバランス処理装置及び方法並びに画像信号処理装置
KR20160061251A (ko) 영상 처리 장치 및 방법
KR101143834B1 (ko) 화이트 밸런스 보정 장치 및 방법
KR101867568B1 (ko) 이미지센서 자동 화이트밸런스 기반 공간 색온도 추정 시스템
KR20100104498A (ko) 하이 다이나믹 레인지 상황에 대응하는 자동 노출 제어 및 자동 화이트밸런스 방법
JP6504892B2 (ja) 撮像装置
US20050200704A1 (en) Imager and stripe noise removing method
KR100207985B1 (ko) Cie 표색계를 이용한 화이트 밸런스 조정 장치
KR20110047540A (ko) 디지털 카메라 및 그 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20191030

Year of fee payment: 4