KR101325451B1 - 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈 - Google Patents
오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈 Download PDFInfo
- Publication number
- KR101325451B1 KR101325451B1 KR1020120094105A KR20120094105A KR101325451B1 KR 101325451 B1 KR101325451 B1 KR 101325451B1 KR 1020120094105 A KR1020120094105 A KR 1020120094105A KR 20120094105 A KR20120094105 A KR 20120094105A KR 101325451 B1 KR101325451 B1 KR 101325451B1
- Authority
- KR
- South Korea
- Prior art keywords
- white balance
- color determination
- determination gate
- color
- threshold value
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 26
- 230000010354 integration Effects 0.000 claims description 50
- 230000008859 change Effects 0.000 claims description 12
- 238000003384 imaging method Methods 0.000 claims description 7
- 230000008685 targeting Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 17
- 239000003086 colorant Substances 0.000 description 5
- 230000000052 comparative effect Effects 0.000 description 4
- 230000004075 alteration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
실시 형태에 따르면, 화이트 밸런스 미세 조정 개시 지시부는 제1 임계값을 이용하여, 화이트 밸런스의 미세 조정의 개시의 가부를 판정한다. 화이트 밸런스 미세 조정 개시 지시부는 제2 임계값을 이용하여, 미세 조정의 계속의 가부를 판정한다. 제2 임계값은 제2 색 판정 게이트에 의한 미세 조정에 대해 설정된다. 제2 색 판정 게이트는 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 광원마다 획정한다.
Description
본 출원은 2011년 12월 16일에 출원된 일본 특허 출원 제2011-275640호의 우선권의 이익을 향수하고, 그 일본 특허 출원의 전체 내용은 본 출원에서 원용된다.
본 실시 형태는, 일반적으로, 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈에 관한 것이다.
통상적으로, 촬상 장치는 광원의 색 온도에 따른 화이트 밸런스 조정을 실시한다. 예를 들면, 흰 피사체가 형광등으로부터의 광으로 조사됨으로써, 녹색을 띠며 찍히는 일이 있다. 또한, 흰 피사체가 백열등으로부터의 광으로 조사됨으로써, 적색을 띠며 찍히는 경우가 있다. 촬상 장치는, 이와 같은 상황 하에서도 피사체가 본래의 색으로 촬영되도록, 화이트 밸런스 조정에 의해 색조를 보정한다. 이와 같은 화이트 밸런스 조정을 자동적으로 행하는 시스템이, 오토 화이트 밸런스 조정(AWB) 시스템이다.
AWB 시스템은 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 색 판정 게이트로서 설정한다. 색 판정 게이트는, 본래는 무채색이며 광의 영향으로 색을 띠고 있는 부분을, 유채색을 이루는 부분으로부터 선별하기 위한 기준이 된다. AWB 시스템은 색 판정 게이트에서 선별한 화소 데이터를 프레임마다 적산하여, 적산 대상으로 한 화소수로 제산함으로써, 각 프레임에 대해 1화소당의 화소 데이터의 평균값을 산출한다. AWB 시스템은, 예를 들면 색차 신호를 적산하는 경우, 산출한 평균값이 제로로 되는 화이트 밸런스 게인을 구하여, 화이트 밸런스 조정을 실시한다.
종래의 시스템에서는, 색 온도가 낮은 광원으로부터 높은 광원까지, 각종 광원색이 포함되도록 색 판정 게이트가 설정되어 있다. 이 설정에서는, 광원색 이외의 색까지 색 판정 게이트의 선별 대상에 포함되는 경우가 있다. 예를 들면, 청색이나 시안을 띠는 저채도의 색상을 갖는 피사체를 백열등 아래에서 촬영하면, 백열등에 의한 적색과 피사체의 청색이 상쇄되어 마치 무채색과 같이 되어, 색 판정 게이트의 범위에 들어가 버리는 경우가 있다. 이 예에서는, 약간 적색이 남은 상태로 화이트 밸런스가 조정되게 된다. 이와 같이, 광원색 이외의 색의 부분이 적산 대상에 포함됨으로써, 이상적인 포인트에 도달하지 않는 화이트 밸런스 조정이 이루어지게 된다.
본 발명이 해결하고자 하는 과제는, 고정밀도의 화이트 밸런스 조정을 가능하게 하는 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈을 제공하는 것이다.
일 실시 형태의 오토 화이트 밸런스 조정 시스템은, 화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하는 화이트 밸런스 조정부와, 상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하는 색 판정부와, 상기 색 판정부에 있어서 선별된 상기 화소 데이터를 적산하여, 적산 데이터를 출력하는 적산부와, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정(define)하는 제1 색 판정 게이트를 생성하는 제1 색 판정 게이트 생성부와, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하는 제2 색 판정 게이트 생성부와, 상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 지시부와, 상기 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라, 상기 색 판정부에 있어서의 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 색 판정 게이트 전환부를 포함하고,
상기 화이트 밸런스 미세 조정 개시 지시부는, 상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는 것을 특징으로 한다.
다른 실시 형태의 오토 화이트 밸런스 조정 방법은 화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하고, 상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하고, 상기 색 판정에 의해 선별된 상기 화소 데이터의 적산에 의한 적산 데이터를 출력하고, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정하는 제1 색 판정 게이트를 생성하고, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하고, 상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 신호를 출력하고, 상기 화이트 밸런스 미세 조정 개시 신호에 따라, 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 것을 포함하고,
상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는 것을 특징으로 한다.
다른 실시 형태의 카메라 모듈은 피사체로부터의 광을 도입하여, 피사체상을 결상시키는 렌즈 유닛과, 상기 피사체상을 촬상하는 이미지 센서와, 상기 이미지 센서에서의 촬상에 의해 취득된 화상 신호에 대해, 화이트 밸런스 조정을 실시하는 오토 화이트 밸런스 조정 시스템을 포함하고,
상기 오토 화이트 밸런스 조정 시스템은,
상기 화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하는 화이트 밸런스 조정부와, 상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하는 색 판정부와, 상기 색 판정부에 있어서 선별된 상기 화소 데이터를 적산하여, 적산 데이터를 출력하는 적산부와, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정하는 제1 색 판정 게이트를 생성하는 제1 색 판정 게이트 생성부와, 상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하는 제2 색 판정 게이트 생성부와, 상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 지시부와, 상기 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라, 상기 색 판정부에 있어서의 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 색 판정 게이트 전환부를 포함하고,
상기 화이트 밸런스 미세 조정 개시 지시부는 상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는 것을 특징으로 한다.
상기 구성의 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈에 따르면, 고정밀도의 화이트 밸런스 조정을 가능하게 한다.
도 1은 제1 실시 형태에 관한 AWB 시스템을 적용한 카메라 모듈의 개략 구성을 도시하는 블록도.
도 2는 AWB 시스템의 구성을 도시하는 블록도.
도 3은 색 공간에서의 색 온도 궤적 분포예를 도시하는 도면.
도 4는 제1 색 판정 게이트의 설정예를 설명하는 도면.
도 5는 광원 특정부에 있어서 광원을 특정하는 방법의 예를 설명하는 도면.
도 6은 제2 색 판정 게이트의 설정예를 설명하는 도면.
도 7은 AWB 시스템의 동작 수순을 나타내는 플로우차트.
도 8은 제1 실시 형태의 AWB 시스템에서의 적산 데이터와 임계값의 관계를 나타내는 개념도.
도 9는 제1 실시 형태의 비교예에 관한 AWB 시스템에서의 적산 데이터와 임계값의 관계를 나타내는 개념도.
도 10은 제2 실시 형태에 관한 AWB 시스템의 구성을 도시하는 블록도.
도 11은 제2 색 판정 게이트의 변화에 대해 설명하는 도면.
도 2는 AWB 시스템의 구성을 도시하는 블록도.
도 3은 색 공간에서의 색 온도 궤적 분포예를 도시하는 도면.
도 4는 제1 색 판정 게이트의 설정예를 설명하는 도면.
도 5는 광원 특정부에 있어서 광원을 특정하는 방법의 예를 설명하는 도면.
도 6은 제2 색 판정 게이트의 설정예를 설명하는 도면.
도 7은 AWB 시스템의 동작 수순을 나타내는 플로우차트.
도 8은 제1 실시 형태의 AWB 시스템에서의 적산 데이터와 임계값의 관계를 나타내는 개념도.
도 9는 제1 실시 형태의 비교예에 관한 AWB 시스템에서의 적산 데이터와 임계값의 관계를 나타내는 개념도.
도 10은 제2 실시 형태에 관한 AWB 시스템의 구성을 도시하는 블록도.
도 11은 제2 색 판정 게이트의 변화에 대해 설명하는 도면.
실시 형태에 따르면, 오토 화이트 밸런스 조정 시스템은, 화이트 밸런스 조정부, 색 판정부, 적산부, 제1 색 판정 게이트 생성부, 제2 색 판정 게이트 생성부, 화이트 밸런스 미세 조정 개시 지시부 및 색 판정 게이트 전환부를 갖는다. 화이트 밸런스 조정부는 화상 신호에 대한 화이트 밸런스 조정을 실시한다. 화이트 밸런스 조정은 화이트 밸런스 게인에 기초한다. 색 판정부는 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별한다. 적산부는 색 판정부에 있어서 선별된 화소 데이터를 적산한다. 적산부는 적산 데이터를 출력한다. 제1 색 판정 게이트 생성부는 제1 색 판정 게이트를 생성한다. 제1 색 판정 게이트는 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정한다. 제2 색 판정 게이트 생성부는 제2 색 판정 게이트를 생성한다. 제2 색 판정 게이트는 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 화이트 밸런스 게인에 따라 특정되는 광원마다 획정한다. 화이트 밸런스 미세 조정 개시 지시부는 화이트 밸런스의 미세 조정의 개시를 지시한다. 화이트 밸런스의 미세 조정은 제2 색 판정 게이트를 색 판정의 기준으로 한다. 색 판정 게이트 전환부는 색 판정부에 있어서의 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환한다. 색 판정 게이트 전환부는 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라, 색 판정의 기준을 전환한다. 화이트 밸런스 미세 조정 개시 지시부는 제1 임계값과 적산 데이터의 비교 결과에 따라, 미세 조정의 개시의 가부를 판정한다. 제1 임계값은 제1 색 판정 게이트에 의한 화이트 밸런스 조정에 대해 설정된다. 화이트 밸런스 미세 조정 개시 지시부는 제2 임계값과 적산 데이터의 비교 결과에 따라, 미세 조정의 계속의 가부를 판정한다. 제2 임계값은 제2 색 판정 게이트에 의한 미세 조정에 대해 설정된다.
이하에 첨부 도면을 참조하여, 실시 형태에 관한 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈을 상세하게 설명한다. 또한, 이들 실시 형태에 의해 본 발명이 한정되는 것은 아니다.
도 1은 제1 실시 형태에 관한 AWB 시스템을 적용한 카메라 모듈의 개략 구성을 도시하는 블록도이다. 카메라 모듈(100)은, 예를 들면 디지털 카메라이다. 카메라 모듈(100)은 디지털 카메라 이외의 전자 기기, 예를 들면 카메라가 부착된 휴대 단말기 등이어도 된다. 카메라 모듈(100)은 렌즈 유닛(101), 이미지 센서(102), 디지털 시그널 프로세서(DSP)(103), 기억부(104) 및 표시부(105)를 갖는다.
렌즈 유닛(101)은 피사체로부터의 광을 도입하여, 이미지 센서(102)에 피사체상을 결상시킨다. 이미지 센서(102)는 렌즈 유닛(101)에 의해 도입된 광을 신호 전하로 변환하여, 피사체상을 촬상한다. 이미지 센서(102)는 적(R), 녹(G), 청(B)의 신호값을 베이어 배열에 대응하는 순서로 취득함으로써 아날로그 신호를 생성하고, 얻어진 신호를 아날로그 방식으로부터 디지털 방식으로 변환한다.
DSP(103)는 이미지 센서(102)로부터의 화상 신호에 대한 다양한 처리를 실시한다. DSP(103)는 화상 처리 장치로서 기능한다. DSP(103)는 AWB 시스템(1)을 구비한다. AWB 시스템(1)은 화상 신호에 대한 화이트 밸런스 조정을 실시한다. 또한, DSP(103)는 화상 신호에 대해, 예를 들면 자동 노출 조정, 매트릭스 처리, 윤곽 강조, 휘도 압축, 감마 처리 등을 실시한다.
기억부(104)는 DSP(103)에서의 신호 처리를 거친 화상을 저장한다. 기억부(104)는 유저의 조작 등에 따라, 표시부(105)로 화상 신호를 출력한다. 표시부(105)는 DSP(103) 혹은 기억부(104)로부터 입력되는 화상 신호에 따라, 화상을 표시한다. 표시부(105)는, 예를 들면 액정 디스플레이이다.
도 2는 AWB 시스템의 구성을 도시하는 블록도이다. AWB 시스템(1)은 화이트 밸런스 조정부(11), 제1 색 판정 게이트 생성부(12), 색 판정부(13), 적산부(14), 화이트 밸런스 게인 산출부(15), 광원 특정부(22), 제2 색 판정 게이트 생성부(23), 화이트 밸런스 미세 조정 개시 지시부(24), 색 판정 게이트 전환부(25) 및 임계값 전환부(30)를 갖는다.
화이트 밸런스 조정부(11)는 화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시한다. 화이트 밸런스 조정부(11)는 화이트 밸런스 조정 전의 화상 신호(16)에 화이트 밸런스 게인(21)을 승산한다. 화이트 밸런스 조정부(11)는 그 승산 결과를, 화이트 밸런스 조정 후의 화상 신호(17)로서 출력한다.
색 판정부(13)는 화이트 밸런스 조정 전의 화상 신호(16)를 대상으로 하는 색 판정을 실시한다. 색 판정부(13)는 화이트 밸런스 게인(21)의 산출에 사용하는 화소 데이터(신호값)를, 화소마다의 색 판정에 의해 선별한다. 색 판정부(13)는 화소 데이터의 선별 결과를 적산 대상 화소 신호(19)로서 출력한다.
적산부(14)는 화이트 밸런스 조정 후의 화상 신호(17) 중, 적산 대상 화소 신호(19)에 해당하는 화소 데이터를 1프레임에 대해 적산한다. 적산부(14)는 화소 데이터의 적산 결과를 적산 데이터(20)로서 출력한다. 적산 데이터(20)는 적산에 관한 데이터이며, 예를 들면 화소 데이터의 적산값 및 그 적산한 화소수, 혹은 1화소당의 화소 데이터의 평균값으로 한다. 1화소당의 화소 데이터의 평균값은 적산값을 적산 화소수로 제산하여 얻어진다.
화이트 밸런스 게인 산출부(15)는 적산 데이터(20)를 기초로, 화이트 밸런스 게인(21)을 산출한다. AWB 시스템(1)은 1프레임의 화소 데이터로부터 산출한 화이트 밸런스 게인(21)을, 다음 프레임의 화상 신호(16)의 화이트 밸런스 조정에 사용한다.
광원 특정부(22)는 화이트 밸런스 게인 산출부(15)로부터의 화이트 밸런스 게인(21)에 따라, 촬영 시에 있어서의 광원을 특정한다. 광원 특정부(22)는 광원을 특정한 결과를, 광원 특정 신호(26)로서 출력한다.
제1 색 판정 게이트 생성부(12)는 제1 색 판정 게이트를 생성하여, 제1 색 판정 게이트 신호(18)를 출력한다. 제1 색 판정 게이트는 AWB 시스템(1)에 의한 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정하는 것으로 한다.
제2 색 판정 게이트 생성부(23)는 광원 특정부(22)에서 특정되는 광원마다, 제2 색 판정 게이트를 생성한다. 제2 색 판정 게이트는 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 화이트 밸런스 게인(21)에 따라 특정되는 광원마다 획정하는 것으로 한다. 제2 색 판정 게이트 생성부(23)는 광원 특정부(22)에서 특정된 광원에 대응하는 제2 색 판정 게이트를 광원 특정 신호(26)에 따라 선택하여, 제2 색 판정 게이트 신호(27)를 출력한다.
색 판정 게이트 전환부(25)는 제1 색 판정 게이트 신호(18)와 제2 색 판정 게이트 신호(27) 중 어느 하나를 선택하여, 색 판정 게이트 신호(29)로서 출력한다. 색 판정 게이트 전환부(25)는 색 판정부(13)에 있어서의 색 판정의 기준으로서, 제1 색 판정 게이트와 제2 색 판정 게이트를 전환한다.
화이트 밸런스 미세 조정 개시 지시부(24)는 화이트 밸런스 미세 조정 개시 신호(28)를 출력한다. 화이트 밸런스 미세 조정 개시 신호(28)는 제2 색 판정 게이트를 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하기 위한 신호로 한다. 화이트 밸런스 미세 조정 개시 지시부(24)는 적산 데이터(20)인, 예를 들면 화소 데이터의 적산값이 소정의 임계값을 하회한 것을 확인하면, 화이트 밸런스 미세 조정 개시 신호(28)를 출력한다. 색 판정 게이트 전환부(25)는 화이트 밸런스 미세 조정 개시 신호(28)가 입력되면, 색 판정 게이트 신호(29)를 제1 색 판정 게이트 신호(18)로부터 제2 색 판정 게이트 신호(27)로 전환한다.
임계값 전환부(30)는 화이트 밸런스 미세 조정 개시 지시부(24)로 임계값 신호(31)를 출력한다. 임계값 신호(31)는 화이트 밸런스 미세 조정 개시 지시부(24)에 있어서의 적산 데이터(20)와의 비교에 사용하는 임계값을 나타내는 신호로 한다. 임계값 전환부(30)는 임계값 신호(31)로 하는 제1 임계값 및 제2 임계값을 화이트 밸런스 미세 조정 개시 신호(28)에 따라 전환한다.
제1 임계값은 제1 색 판정 게이트에 의한 화이트 밸런스 조정에 대해 설정된 임계값으로 한다. 제2 임계값은 제2 색 판정 게이트에 의한 화이트 밸런스의 미세 조정에 대해 설정된 임계값으로 한다. 제2 임계값은 제1 임계값보다 큰 값으로 한다. 임계값 전환부(30)는, 예를 들면 제1 임계값 및 제2 임계값을 미리 유지한다.
도 3은 색 공간에서의 색 온도 궤적 분포예를 도시하는 도면이다. 그래프의 횡축은 색차 신호 U, 종축은 색차 신호 V로 한다. 본 실시 형태는, UV 좌표계에 있어서의 직선 위에 광원색이 플롯되는 A 광원, D 광원 및 C 광원을 상정하는 경우를 예로 든다. A 광원, D 광원, C 광원은 색 온도가 각각 약 2800K, 약 6500K, 약 6800K인 표준 광원으로 한다.
도 4는 제1 색 판정 게이트의 설정예를 설명하는 도면이다. 제1 색 판정 게이트 G1은 AWB 시스템(1)에 의한 화이트 밸런스 조정의 대상으로 하는 A 광원, D 광원 및 C 광원 중 어떤 광원색 범위라도 일괄하여 포함하도록 설정된다.
도 5는 광원 특정부에 있어서 광원을 특정하는 방법의 예를 설명하는 도면이다. 광원 특정부(22)는, 예를 들면 화이트 밸런스 게인(21)인 R 게인의 크기에 따라, A 광원, D 광원 및 C 광원 중 어느 하나를 특정한다. 예를 들면, 1배를 중심으로 하는 소정의 범위(35)에 R 게인이 포함되는 경우, 광원 특정부(22)는 D 광원을 특정한다. 범위(35)의 상한보다 큰 값의 범위(36)에 R 게인이 포함되는 경우, 광원 특정부(22)는 C 광원을 특정한다. 범위(35)의 하한보다 작은 값의 범위(37)에 R 게인이 포함되는 경우, 광원 특정부(22)는 A 광원을 특정한다.
도 6은 제2 색 판정 게이트의 설정예를 설명하는 도면이다. 제2 색 판정 게이트 생성부(23)는 A 광원, D 광원, C 광원에 대해, 각각 제2 색 판정 게이트 G2A, G2D, G2C를 생성한다. A 광원에 대한 제2 색 판정 게이트 G2A는 A 광원의 광원색을 중심으로 하여 설정된다. D 광원에 대한 제2 색 판정 게이트 G2D는 D 광원의 광원색을 중심으로 하여 설정된다. C 광원에 대한 제2 색 판정 게이트 G2C는 C 광원의 광원색을 중심으로 하여 설정된다. 제2 색 판정 게이트 G2A, G2D, G2C의 색 온도의 범위는 서로 분리시켜, 간격을 두고 설정되어 있다. 제2 색 판정 게이트 G2A, G2D, G2C의 색 온도의 범위의 간격은 적절히 설정 가능하다.
AWB 시스템(1)은 A 광원, D 광원, C 광원에 대응하는 제2 색 판정 게이트를 적용하여 화이트 밸런스의 미세 조정을 실시하는 것으로 한정되지 않는다. 제2 색 판정 게이트는 A 광원, D 광원, C 광원 이외의 광원에 대응하는 것이어도 된다. 제2 색 판정 게이트를 대응시키는 광원은 복수이면 되고, 3개 이외로 해도 된다.
도 7은 AWB 시스템의 동작 수순을 나타내는 플로우차트이다. 화이트 밸런스 조정의 개시 시에, 색 판정 게이트 전환부(25)는 제1 색 판정 게이트 신호(18)를 색 판정 게이트 신호(29)로서 출력한다.
색 판정부(13)는 제1 색 판정 게이트를 기준으로 하는 색 판정을 실시한다(스텝 S1). 색 판정부(13)는 적산 대상 화소 신호(19)를 출력한다. 적산부(14)는 화상 신호(17) 중, 적산 대상 화소 신호(19)에 해당하는 화소 데이터를 적산한다(스텝 S2). 적산부(14)는 1프레임에 대해 화소 데이터를 적산하면, 적산 데이터(20)를 출력한다.
화이트 밸런스 게인 산출부(15)는 적산 데이터(20)를 기초로, 화이트 밸런스 게인(21)을 산출한다(스텝 S3). 화이트 밸런스 조정부(11)는 화상 신호(16)에 화이트 밸런스 게인(21)을 승산한다. 광원 특정부(22)는 화이트 밸런스 게인(21)에 따라 광원을 특정한다.
화이트 밸런스 미세 조정 개시 지시부(24)는 스텝 S3에서의 적산에 의해 얻어진 적산 데이터(20)와 제1 임계값을 비교한다(스텝 S4).
적산 데이터(20)가 제1 임계값 미만인 경우(스텝 S4, 예), 화이트 밸런스 미세 조정 개시 지시부(24)는 화이트 밸런스 미세 조정 개시 신호(28)를 출력한다. 색 판정 게이트 전환부(25)는 화이트 밸런스 미세 조정 개시 신호(28)에 따라, 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환을 행한다(스텝 S5).
색 판정 게이트 전환부(25)는 광원 특정 신호(26)에 따라 제2 색 판정 게이트 생성부(23)에서 생성된 제2 색 판정 게이트를 적용한다. 색 판정 게이트 전환부(25)는 제2 색 판정 게이트 신호(27)를, 색 판정 게이트 신호(29)로서 출력한다. 이에 의해, AWB 시스템(1)은 화이트 밸런스 조정의 페이스(phase)를, 통상의 조정으로부터, 특정된 광원에 대한 미세 조정으로 이행시킨다. 화이트 밸런스 미세 조정 개시 지시부(24)는 제1 임계값과 적산 데이터(20)의 비교 결과에 따라, 화이트 밸런스의 미세 조정의 개시의 가부를 판정한다.
또한, 임계값 전환부(30)는 화이트 밸런스 미세 조정 개시 신호(28)에 따라, 제1 임계값으로부터 제2 임계값으로의 전환을 행한다(스텝 S5). 임계값 전환부(30)는 임계값 신호(31)의 출력에 의해, 제1 임계값을 제2 임계값으로 전환한다.
적산 데이터(20)가 제1 임계값 미만이 아닌 경우(스텝 S4, 아니오), AWB 시스템(1)은 다음 프레임의 화상 신호(16)에도 제1 색 판정 게이트를 적용하여, 스텝 S1로부터 스텝 S4의 수순을 반복한다.
스텝 S5에 있어서의 색 판정 게이트의 전환 및 임계값의 전환에 이어서, 색 판정부(13)는 다음 프레임의 화상 신호(16)를 대상으로 하여, 제2 색 판정 게이트를 기준으로 하는 색 판정을 실시한다(스텝 S6). 적산부(14)는 화상 신호(17) 중, 적산 대상 화소 신호(19)에 해당하는 화소 데이터를 적산한다(스텝 S7).
화이트 밸런스 게인 산출부(15)는 적산 데이터(20)를 기초로, 화이트 밸런스 게인(21)을 산출한다(스텝 S8). 화이트 밸런스 조정부(11)는 화상 신호(16)에 화이트 밸런스 게인(21)을 승산한다. 광원 특정부(22)는 화이트 밸런스 게인(21)에 따라 광원을 특정한다.
화이트 밸런스 미세 조정 개시 지시부(24)는 스텝 S3에서의 적산에 의해 얻어진 적산 데이터(20)와 제2 임계값을 비교한다(스텝 S9).
적산 데이터(20)가 제2 임계값 미만이 아닌 경우(스텝 S9, 아니오), 화이트 밸런스 미세 조정 개시 지시부(24)는 화이트 밸런스 미세 조정 개시 신호(28)를 OFF로 한다. 색 판정 게이트 전환부(25)는 화이트 밸런스 미세 조정 개시 신호(28)가 OFF로 된 것에 따라, 제2 색 판정 게이트로부터 제1 색 판정 게이트로의 전환을 행한다(스텝 S11).
또한, 임계값 전환부(30)는 화이트 밸런스 미세 조정 개시 신호(28)가 OFF로 된 것에 따라, 제2 임계값으로부터 제1 임계값으로의 전환을 행한다(스텝 S11). AWB 시스템(1)은 다음 프레임의 화상 신호(16)에도 제1 색 판정 게이트를 적용하여, 스텝 S1 이후의 수순을 반복한다.
적산 데이터(20)가 제2 임계값 미만인 경우(스텝 S9, 예), AWB 시스템(1)은 다음 프레임의 화상 신호(16)에도 제2 색 판정 게이트를 적용하여, 화이트 밸런스의 미세 조정을 계속한다(스텝 S10). 적산 데이터(20)가 제2 임계값 미만인 한, AWB 시스템(1)은 광원이 변화되지 않는 것으로 간주하여 화이트 밸런스 조정을 실시한다.
AWB 시스템(1)은 화이트 밸런스의 미세 조정을 계속하는 동안, 적산 데이터(20)가 제2 임계값 미만인지 여부를 감시한다. 적산 데이터(20)가 제2 임계값 이상으로 되면, AWB 시스템(1)은 제1 색 판정 게이트를 적용하는 화이트 밸런스 조정을 개시한다.
이와 같이, 적산 데이터(20)가 제2 임계값 이상으로 되었을 때, AWB 시스템(1)은 광원에 변화가 있었다고 간주하여, 화이트 밸런스 조정의 페이스를, 미세 조정으로부터 통상의 조정으로 복귀시킨다. 화이트 밸런스 미세 조정 개시 지시부(24)는 제2 임계값과 적산 데이터(20)의 비교 결과에 따라, 미세 조정의 계속의 가부를 판정한다.
AWB 시스템(1)은 광원마다 미리 준비된 제2 색 판정 게이트를, 화이트 밸런스의 미세 조정에 적용함으로써, 적산 대상으로 하는 화소 데이터를 촬영 시의 광원에 따라 높은 정밀도로 선별할 수 있다. AWB 시스템(1)은 광원색 이외의 색의 부분을 높은 정밀도로 적산 대상으로부터 제외 가능하게 함으로써, 고정밀도의 화이트 밸런스 조정이 가능해진다.
도 8은 제1 실시 형태의 AWB 시스템에 있어서의 적산 데이터와 임계값의 관계를 나타내는 개념도이다. 도 9는 제1 실시 형태의 비교예에 관한 AWB 시스템에 있어서의 적산 데이터와 임계값의 관계를 나타내는 개념도이다. 도 9에 나타내는 비교예에서는, AWB 시스템은 화이트 밸런스의 미세 조정의 개시 및 계속의 판정에 있어서, 색 판정 게이트의 전환에 상관없이 일정한 임계값 Th를 적용하는 것으로 한다.
도 8 및 도 9 모두, 제1 색 판정 게이트를 적용하는 경우를 좌측, 제2 색 판정 게이트를 적용하는 경우를 우측으로 하여, 색 판정 게이트의 전환에 의한 적산 데이터와 임계값의 관계의 추이를 나타내고 있다.
각 광원의 색 범위를 일괄하여 포함하는 제1 색 판정 게이트로부터, 특정한 광원의 색 범위로 한정된 제2 색 판정 게이트로 전환한 직후, 화소 데이터가 적산의 대상으로 되는 화소가 한정되게 된다. 피사체에 따라서는, 1화소당의 데이터로서 구해지는 적산 데이터는 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환에 수반하여 일단 증대하고, 그 후 수렴되도록 추이(shift)하는 경우가 있다.
도 9에 나타내는 비교예에 있어서, 어떤 프레임에 있어서의 적산 데이터 Q1이 임계값 Th 미만의 범위(41)에 포함됨으로써, 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환을 실시한 것으로 한다. 색 판정 게이트로의 전환에 수반하여, 다음의 프레임에 있어서 적산 데이터가 Q1로부터 Q2로 증대한 것으로 한다.
적산 데이터 Q2가 임계값 Th 이상의 범위(42)에 포함되게 된 경우, AWB 시스템은, 가령 광원의 변화가 없는 경우라도, 특정한 광원의 색 범위 내에서의 미세 조정을 중지하고, 전체 색 범위를 대상으로 하는 조정을 다시 하게 된다.
이와 같은 조정 페이스의 교체는 색 판정 게이트의 전환에 수반하여 Q2>Th의 관계가 성립되는 한, 반복되게 된다. 이러한 반복을 회피하기 위해, 임계값 Th로서 큰 값을 미리 설정했다고 하면, AWB 시스템은 적산 데이터 Q1이 충분히 수렴되기 이전에 미세 조정을 개시하게 된다. 이 경우, 고정밀도의 화이트 밸런스 조정이 곤란해진다.
도 8에 도시한 바와 같이, 본 실시 형태에 있어서, 어떤 프레임에 있어서의 적산 데이터 Q1이 제1 임계값 Th1 미만의 범위(41)에 포함됨으로써, 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환을 실시한 것으로 한다. 임계값 전환부(30)는 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환에 수반하여, 제1 임계값 Th1로부터 제2 임계값 Th2로의 전환을 실시한다.
화이트 밸런스 미세 조정 개시 지시부(24)는 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환에 따라, 적산 데이터 Q1, Q2와의 비교 대상으로 하는 임계값을, 제1 임계값 Th1로부터 제2 임계값 Th2로 확장시킨다. 색 판정 게이트의 전환에 수반하여, 적산 데이터가 Q1로부터 Q2로 증대해도, 확장된 제2 임계값 Th2를 적용함으로써, AWB 시스템(1)은 제2 임계값 Th2 이상의 범위(42)로의 적산 데이터 Q2의 천이를 억제시킨다. AWB 시스템(1)은 광원의 변화에 따르지 않는 적산 데이터 Q2의 증대에 대해, 제2 임계값 Th2 미만의 범위(41)에 적산 데이터 Q2를 멈추게 한다.
도 7에 나타내는 수순에 있어서, AWB 시스템(1)은 적산 데이터 Q2와 제2 임계값 Th2의 비교(스텝 S9)와, 제1 색 판정 게이트로의 전환(스텝 S11)에 이어서, 스텝 S1 이후의 수순이 과잉으로 반복되는 것을 억제시킨다. AWB 시스템(1)은 화이트 밸런스 조정의 페이스의 불필요한 교체를 효과적으로 억제시키는 것이 가능해진다.
AWB 시스템(1)은 페이스 사이의 왕래의 반복을 억제 가능하게 함으로써, 화이트 밸런스의 수렴까지의 변화를 원활하게 한다. AWB 시스템(1)은 화이트 밸런스 조정의 과정에 있어서의 화상의 변화를 원활하게 할 수 있다. AWB 시스템(1)은 페이스 사이의 왕래의 반복을 억제 가능하게 함으로써, 화이트 밸런스의 수렴에 필요로 하는 시간을 짧게 할 수 있다. 이에 의해, AWB 시스템(1)은 고정밀도의 화이트 밸런스 조정을 실시할 수 있다.
임계값 전환부(30)는 미리 설정된 제1 임계값 Th1 및 제2 임계값 Th2를 출력하는 경우로 한정되지 않는다. 임계값 전환부(30)는, 예를 들면 연산에 의해 구해진 제2 임계값 Th2를 출력하는 것으로 해도 된다. 임계값 전환부(30)는, 예를 들면 미리 설정된 제1 임계값 Th1로 소정의 계수를 승산 혹은 가산함으로써, 제2 임계값 Th2를 구한다.
또한, 임계값 전환부(30)는 색 판정 게이트 전환부(25)에 의한 제1 색 판정 게이트로부터 제2 색 판정 게이트로의 전환에 의한 적산 데이터(20)의 변화량에 따른 값을, 제1 임계값 Th1로 승산 혹은 가산해도 된다. AWB 시스템(1)은 제1 임계값 Th1에 대해 적절히 확장된 제2 임계값 Th2를 자동으로 생성하여, 화이트 밸런스 미세 조정 개시 지시부(24)에서의 판정에 사용할 수 있다. 또한, 제2 임계값 Th2를 연산에 의해 구하는 경우, 제2 임계값 Th2는 제1 임계값 Th1과 동일한 경우를 포함하는 것으로 한다.
도 10은 제2 실시 형태에 관한 AWB 시스템의 구성을 도시하는 블록도이다. 제2 실시 형태에 관한 AWB 시스템(2)은 화이트 밸런스 조정부(11), 제1 색 판정 게이트 생성부(12), 색 판정부(13), 적산부(14), 화이트 밸런스 게인 산출부(15), 화이트 밸런스 미세 조정 개시 지시부(24), 색 판정 게이트 전환부(25), 임계값 전환부(30) 및 제2 색 판정 게이트 생성부(50)를 갖는다. 제2 색 판정 게이트 생성부(50)는 제1 실시 형태에 있어서의 제2 색 판정 게이트 생성부(23) 및 광원 특정부(22)(도 2 참조) 대신에 설치되어 있다. 제1 실시 형태와 동일한 부분에는 동일한 부호를 부여하여, 중복되는 설명을 적절히 생략한다.
제2 색 판정 게이트 생성부(50)는 미리 기준으로 한 광원에 대해 제2 색 판정 게이트를 생성한다. 또한, 제2 색 판정 게이트 생성부(50)는 생성한 제2 색 판정 게이트의 색 온도 범위를, 화이트 밸런스 게인(21)에 따라 변화시킨다.
색 판정 게이트 전환부(25)는 적산 데이터(20)의 변화를 기초로, 광원이 변화된 것을 검출한다. 제2 색 판정 게이트를 기준으로 하는 미세 조정으로 화이트 밸런스의 조정을 전환한 후에, 광원이 변화된 것을 검출하면, 색 판정 게이트 전환부(25)는 화이트 밸런스를 재조정하는 동작으로서, 제1 색 판정 게이트를 기준으로 하는 조정으로의 전환을 행한다.
그 후, AWB 시스템(2)은 제1 색 판정 게이트를 기준으로 하는 화이트 밸런스 조정에 의해 광원을 특정하고, 제2 색 판정 게이트에 의한 화이트 밸런스의 미세 조정으로 다시 이행한다. 또한, 색 판정 게이트 전환부(25)가, 적산 데이터(20)의 변화에 따라 화이트 밸런스를 재조정하는 동작은 제1 실시 형태에 있어서도, 제2 실시 형태와 마찬가지로 행하는 것으로 해도 된다.
도 11은 제2 색 판정 게이트의 변화에 대해 설명하는 도면이다. 제2 색 판정 게이트 생성부(50)는 기준이 되는 제2 색 판정 게이트로서, 예를 들면 D 광원의 광원색을 중심으로 하는 범위의 제2 색 판정 게이트 G2를 생성한다. 제2 색 판정 게이트 생성부(50)는 화이트 밸런스 게인(21)에 따라, A 광원의 광원색을 중심으로 하는 범위로부터 C 광원의 광원색을 중심으로 하는 범위에 있어서 연속적으로 제2 색 판정 게이트 G2를 시프트시킨다.
AWB 시스템(2)은 미리 상정된 광원마다 뿐만 아니라, 그 광원색끼리의 중간의 색 온도에 대응하는 제2 색 판정 게이트 G2에 의한 화이트 밸런스의 미세 조정이 가능해진다. AWB 시스템(2)은 색 온도에 자유롭게 대응하여, 그 밖의 색의 부분을 적산 대상으로부터 제외함으로써, 고정밀도의 화이트 밸런스 조정이 가능해진다. AWB 시스템(2)은 복수의 광원에 대응하는 제2 색 판정 게이트를 유지하는 경우에 비해, 메모리의 규모를 작게 할 수 있다.
본 발명의 몇 개의 실시 형태를 설명하였지만, 이들 실시 형태는 예로서 제시한 것으로, 발명의 범위를 한정하는 것은 의도하고 있지 않다. 이들 신규의 실시 형태는, 그 밖의 다양한 형태로 실시되는 것이 가능하고, 발명의 요지를 일탈하지 않는 범위에서, 다양한 생략, 치환, 변경을 행할 수 있다. 이들 실시 형태나 그 변형은 발명의 범위나 요지에 포함됨과 함께, 특허 청구범위에 기재된 발명과 그 균등한 범위에 포함된다.
Claims (20)
- 오토 화이트 밸런스 조정 시스템으로서,
화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하는 화이트 밸런스 조정부와,
상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하는 색 판정부와,
상기 색 판정부에 있어서 선별된 상기 화소 데이터를 적산하여, 적산 데이터를 출력하는 적산부와,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정(define)하는 제1 색 판정 게이트를 생성하는 제1 색 판정 게이트 생성부와,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하는 제2 색 판정 게이트 생성부와,
상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 지시부와,
상기 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라, 상기 색 판정부에 있어서의 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 색 판정 게이트 전환부를 포함하고,
상기 화이트 밸런스 미세 조정 개시 지시부는 상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는, 오토 화이트 밸런스 조정 시스템. - 제1항에 있어서, 상기 제2 임계값이 상기 제1 임계값보다 큰 값인, 오토 화이트 밸런스 조정 시스템.
- 제1항에 있어서, 상기 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라 상기 제1 임계값 및 상기 제2 임계값을 전환하여, 상기 화이트 밸런스 미세 조정 개시 지시부로 출력하는 임계값 전환부를 더 포함하는, 오토 화이트 밸런스 조정 시스템.
- 제3항에 있어서, 상기 임계값 전환부는 미리 설정된 상기 제1 임계값 및 상기 제2 임계값을 출력하는, 오토 화이트 밸런스 조정 시스템.
- 제3항에 있어서, 상기 임계값 전환부는 미리 설정된 상기 제1 임계값을 사용하는 연산에 의해 상기 제2 임계값을 구하는, 오토 화이트 밸런스 조정 시스템.
- 제3항에 있어서, 상기 임계값 전환부는 상기 색 판정 게이트 전환부에서의 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로의 전환에 의한 상기 적산 데이터의 변화량에 기초하여, 상기 제2 임계값을 산출하는, 오토 화이트 밸런스 조정 시스템.
- 제1항에 있어서, 상기 화이트 밸런스 게인에 따라, 촬영 시에 있어서의 상기 광원을 특정하는 광원 특정부를 더 포함하고,
상기 제2 색 판정 게이트 생성부는 상기 광원 특정부에서 특정되는 상기 광원마다 상기 제2 색 판정 게이트를 생성하는, 오토 화이트 밸런스 조정 시스템. - 제1항에 있어서, 상기 제2 색 판정 게이트 생성부는 미리 기준으로서 설정된 상기 광원에 대한 상기 제2 색 판정 게이트를 생성하여, 상기 제2 색 판정 게이트의 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 변화시키는, 오토 화이트 밸런스 조정 시스템.
- 제8항에 있어서, 상기 제2 색 판정 게이트 생성부는 상기 제2 색 판정 게이트로 하는 색 온도의 범위를 연속적으로 시프트 가능하게 하는, 오토 화이트 밸런스 조정 시스템.
- 오토 화이트 밸런스 조정 방법으로서,
화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하고,
상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하고,
상기 색 판정에 의해 선별된 상기 화소 데이터의 적산에 의한 적산 데이터를 출력하고,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정하는 제1 색 판정 게이트를 생성하고,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하고,
상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 신호를 출력하고,
상기 화이트 밸런스 미세 조정 개시 신호에 따라, 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 것을 포함하고,
상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는, 오토 화이트 밸런스 조정 방법. - 제10항에 있어서, 상기 제2 임계값이 상기 제1 임계값보다 큰 값인, 오토 화이트 밸런스 조정 방법.
- 제10항에 있어서, 상기 화이트 밸런스 미세 조정 개시 신호에 따라 상기 제1 임계값 및 상기 제2 임계값을 전환하는 것을 더 포함하는, 오토 화이트 밸런스 조정 방법.
- 제12항에 있어서, 상기 제1 임계값 및 상기 제2 임계값이 미리 설정되어 있는, 오토 화이트 밸런스 조정 방법.
- 제12항에 있어서, 미리 설정된 상기 제1 임계값을 사용하는 연산에 의해, 상기 제2 임계값을 구하는, 오토 화이트 밸런스 조정 방법.
- 제12항에 있어서, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로의 전환에 의한 상기 적산 데이터의 변화량에 기초하여, 상기 제2 임계값을 산출하는, 오토 화이트 밸런스 조정 방법.
- 제10항에 있어서, 상기 화이트 밸런스 게인에 따라, 촬영 시에 있어서의 상기 광원을 특정하는 것을 더 포함하고,
특정되는 상기 광원마다 상기 제2 색 판정 게이트를 생성하는, 오토 화이트 밸런스 조정 방법. - 제10항에 있어서, 미리 기준으로서 설정된 상기 광원에 대한 상기 제2 색 판정 게이트를 생성하고, 상기 제2 색 판정 게이트의 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 변화시키는, 오토 화이트 밸런스 조정 방법.
- 제17항에 있어서, 상기 제2 색 판정 게이트로 하는 색 온도의 범위를 연속적으로 시프트 가능하게 하는, 오토 화이트 밸런스 조정 방법.
- 카메라 모듈로서,
피사체로부터의 광을 도입하여, 피사체상을 결상시키는 렌즈 유닛과,
상기 피사체상을 촬상하는 이미지 센서와,
상기 이미지 센서에서의 촬상에 의해 취득된 화상 신호에 대해, 화이트 밸런스 조정을 실시하는 오토 화이트 밸런스 조정 시스템을 포함하고,
상기 오토 화이트 밸런스 조정 시스템은,
상기 화상 신호에 대해, 화이트 밸런스 게인에 기초하는 화이트 밸런스 조정을 실시하는 화이트 밸런스 조정부와,
상기 화상 신호를 대상으로 하는 색 판정의 실시에 의해, 상기 화이트 밸런스 게인의 산출에 사용하는 화소 데이터를 선별하는 색 판정부와,
상기 색 판정부에 있어서 선별된 상기 화소 데이터를 적산하여, 적산 데이터를 출력하는 적산부와,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 전체 범위를 획정하는 제1 색 판정 게이트를 생성하는 제1 색 판정 게이트 생성부와,
상기 화이트 밸런스 조정의 대상으로 하는 색 온도의 범위를, 상기 화이트 밸런스 게인에 따라 특정되는 광원마다 획정하는 제2 색 판정 게이트를 생성하는 제2 색 판정 게이트 생성부와,
상기 제2 색 판정 게이트를 상기 색 판정의 기준으로 하는 화이트 밸런스의 미세 조정의 개시를 지시하는 화이트 밸런스 미세 조정 개시 지시부와,
상기 화이트 밸런스 미세 조정 개시 지시부에 의한 지시에 따라, 상기 색 판정부에 있어서의 상기 색 판정의 기준을, 상기 제1 색 판정 게이트로부터 상기 제2 색 판정 게이트로 전환하는 색 판정 게이트 전환부를 포함하고,
상기 화이트 밸런스 미세 조정 개시 지시부는 상기 제1 색 판정 게이트에 의한 상기 화이트 밸런스 조정에 대해 설정된 제1 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 개시의 가부를 판정하고, 또한 상기 제2 색 판정 게이트에 의한 상기 미세 조정에 대해 설정된 제2 임계값과 상기 적산 데이터의 비교 결과에 따라, 상기 미세 조정의 계속의 가부를 판정하는, 카메라 모듈. - 제19항에 있어서, 상기 제2 임계값이 상기 제1 임계값보다 큰 값인, 카메라 모듈.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JPJP-P-2011-275640 | 2011-12-16 | ||
JP2011275640A JP5818668B2 (ja) | 2011-12-16 | 2011-12-16 | オートホワイトバランス調整システム |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130069331A KR20130069331A (ko) | 2013-06-26 |
KR101325451B1 true KR101325451B1 (ko) | 2013-11-04 |
Family
ID=48590001
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120094105A KR101325451B1 (ko) | 2011-12-16 | 2012-08-28 | 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8817130B2 (ko) |
JP (1) | JP5818668B2 (ko) |
KR (1) | KR101325451B1 (ko) |
CN (1) | CN103167292B (ko) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103338383B (zh) * | 2013-06-25 | 2016-12-28 | 努比亚技术有限公司 | 白平衡校准的方法及装置 |
JP6234191B2 (ja) * | 2013-11-28 | 2017-11-22 | オリンパス株式会社 | マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置 |
CN106134189B (zh) * | 2014-03-31 | 2019-03-01 | 富士胶片株式会社 | 图像处理装置、摄像装置、图像处理方法及程序 |
KR102281256B1 (ko) | 2014-12-04 | 2021-07-23 | 삼성전자주식회사 | 화이트 밸런스 제어 방법 및 그 전자 장치 |
CN106101680B (zh) * | 2015-05-06 | 2018-12-25 | 小米科技有限责任公司 | 拍摄参数设置方法及装置 |
JP6563751B2 (ja) | 2015-09-09 | 2019-08-21 | 三星電子株式会社Samsung Electronics Co.,Ltd. | 画像処理装置及び画像処理方法 |
WO2017043811A1 (ko) * | 2015-09-09 | 2017-03-16 | 삼성전자 주식회사 | 화상 처리 장치 및 화상 처리 방법 |
KR102309812B1 (ko) * | 2017-03-06 | 2021-10-07 | 한화테크윈 주식회사 | 영상처리장치 및 영상처리방법 |
WO2019017081A1 (ja) | 2017-07-21 | 2019-01-24 | ソニー株式会社 | 画像処理装置と画像処理方法とプログラムおよび撮像装置 |
CN107635123B (zh) | 2017-10-30 | 2019-07-19 | Oppo广东移动通信有限公司 | 白平衡处理方法及装置、电子装置和计算机可读存储介质 |
JP2019205003A (ja) * | 2018-05-21 | 2019-11-28 | オリンパス株式会社 | 撮像装置、及び、ホワイトバランスゲインの算出方法 |
CN112313946A (zh) * | 2018-06-27 | 2021-02-02 | 华为技术有限公司 | 光源估测方法、图像处理方法和相关产品 |
JP7515271B2 (ja) * | 2020-02-28 | 2024-07-12 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
CN113473101B (zh) * | 2020-03-30 | 2023-06-30 | 浙江宇视科技有限公司 | 一种色彩校正方法、装置、电子设备和存储介质 |
CN114071106B (zh) * | 2020-08-10 | 2023-07-04 | 合肥君正科技有限公司 | 一种低功耗设备冷启动快速白平衡方法 |
CN114630095B (zh) * | 2022-03-15 | 2024-02-09 | 锐迪科创微电子(北京)有限公司 | 目标场景图像的自动白平衡方法及装置、终端 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008258902A (ja) | 2007-04-04 | 2008-10-23 | Nikon Corp | ホワイトバランス制御装置および撮像装置 |
JP2010114667A (ja) | 2008-11-06 | 2010-05-20 | Toshiba Corp | 自動ホワイトバランス調整システム |
JP2011239067A (ja) | 2010-05-07 | 2011-11-24 | Toshiba Corp | 画像処理装置 |
KR101131109B1 (ko) | 2010-05-31 | 2012-04-03 | 인하대학교 산학협력단 | 센서 특성을 고려한 화이트 검출에 의한 자동 화이트밸런스 설정방법 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3271139B2 (ja) * | 1990-03-23 | 2002-04-02 | ソニー株式会社 | ホワイトバランス制御回路 |
JP3193456B2 (ja) * | 1992-06-11 | 2001-07-30 | 株式会社日立製作所 | ホワイトバランス制御装置 |
JP3302214B2 (ja) * | 1995-04-03 | 2002-07-15 | キヤノン株式会社 | 画像入力装置 |
JP2002262298A (ja) * | 2001-03-02 | 2002-09-13 | Sony Corp | 撮像装置および方法、プログラム格納媒体、並びにプログラム |
JP4740602B2 (ja) * | 2005-01-19 | 2011-08-03 | イーストマン コダック カンパニー | オートホワイトバランス装置及びホワイトバランス調整方法 |
JP2008124928A (ja) * | 2006-11-14 | 2008-05-29 | Toshiba Corp | オートホワイトバランスシステム |
JP2009017301A (ja) * | 2007-07-05 | 2009-01-22 | Toshiba Corp | 信号処理装置 |
JP4067033B2 (ja) | 2007-08-21 | 2008-03-26 | 富士フイルム株式会社 | 画像処理装置及び方法 |
-
2011
- 2011-12-16 JP JP2011275640A patent/JP5818668B2/ja not_active Expired - Fee Related
-
2012
- 2012-08-28 KR KR1020120094105A patent/KR101325451B1/ko not_active IP Right Cessation
- 2012-08-31 CN CN201210320233.0A patent/CN103167292B/zh not_active Expired - Fee Related
- 2012-09-12 US US13/611,688 patent/US8817130B2/en not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008258902A (ja) | 2007-04-04 | 2008-10-23 | Nikon Corp | ホワイトバランス制御装置および撮像装置 |
JP2010114667A (ja) | 2008-11-06 | 2010-05-20 | Toshiba Corp | 自動ホワイトバランス調整システム |
JP2011239067A (ja) | 2010-05-07 | 2011-11-24 | Toshiba Corp | 画像処理装置 |
KR101131109B1 (ko) | 2010-05-31 | 2012-04-03 | 인하대학교 산학협력단 | 센서 특성을 고려한 화이트 검출에 의한 자동 화이트밸런스 설정방법 |
Also Published As
Publication number | Publication date |
---|---|
JP2013126222A (ja) | 2013-06-24 |
US20130155274A1 (en) | 2013-06-20 |
KR20130069331A (ko) | 2013-06-26 |
CN103167292A (zh) | 2013-06-19 |
JP5818668B2 (ja) | 2015-11-18 |
US8817130B2 (en) | 2014-08-26 |
CN103167292B (zh) | 2015-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101325451B1 (ko) | 오토 화이트 밸런스 조정 시스템, 오토 화이트 밸런스 조정 방법 및 카메라 모듈 | |
US6256062B1 (en) | Color correction apparatus for matching colors in a signal output from a first image apparatus with those from a second image apparatus | |
US7969480B2 (en) | Method of controlling auto white balance | |
US20080129860A1 (en) | Digital camera | |
JP2002027491A (ja) | 画像入力装置、ホワイトバランス調整方法、およびその方法を実行するためのプログラムを格納したコンピュータが読取可能な記録媒体 | |
US7864222B2 (en) | Automatic white balance system and automatic white balance control method | |
US8537254B2 (en) | Image signal processing device and solid-state imaging device | |
US20130057726A1 (en) | Image processing apparatus and image processing method | |
JP2010114667A (ja) | 自動ホワイトバランス調整システム | |
US9240135B2 (en) | Chromaticity adjustment for LED video screens | |
US8885062B2 (en) | Auto white balance adjustment system, auto white balance adjustment method, and camera module | |
JP5911340B2 (ja) | 撮像装置およびその制御方法 | |
US8167439B2 (en) | Image forming device | |
JP2006135601A (ja) | 撮像装置 | |
KR20110017274A (ko) | 이미지 보정 방법 | |
US8804025B2 (en) | Signal processing device and imaging device | |
US20120154625A1 (en) | Image processing apparatus, image processing method, and program recording medium | |
JP4222130B2 (ja) | ホワイトバランス制御装置及び電子機器 | |
JP2008104046A (ja) | 自動色補正機能付き撮像装置 | |
JP2009260542A (ja) | 色補正装置及び色補正方法 | |
KR20100019222A (ko) | 광센서를 이용한 자동 화이트 밸런스 조절 방법 및 장치, 및 이를 이용한 디지털 촬영 장치 | |
JP2005033332A (ja) | ホワイトバランス制御装置及び電子機器 | |
KR20060089094A (ko) | 자동 화이트 밸런스 연동형 색 공간 변환기 및 색 공간변환 방법 | |
JP2017034629A (ja) | 撮像装置およびビューファインダ | |
KR101245199B1 (ko) | 카메라용 컬러 밸런스 조절 장치 및 조절 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
LAPS | Lapse due to unpaid annual fee |