KR101317552B1

KR101317552B1 - 화이트 밸런스 조정이 가능한 촬상장치, 방법 및 기록매체

Info

Publication number: KR101317552B1
Application number: KR1020110113664A
Authority: KR
Inventors: 히로야스 기타가와; 다케시 츠카고시
Original assignee: 가시오게산키 가부시키가이샤
Priority date: 2010-11-04
Filing date: 2011-11-03
Publication date: 2013-10-16
Also published as: US20120113295A1; CN102469243A; KR20120049138A; US20140293089A1; CN102469243B

Abstract

촬상장치는 발광부와, 촬상부와, 화상 분할부와, CPU와, 화이트 밸런스 게인 산출부와, 휘도 취득부를 구비한다. 촬상부는 상기 발광부의 발광시에 상기 촬상 수단에 의해 촬상된 제 1 화상과 상기 발광부의 비발광시에 상기 촬상 수단에 의해 촬상된 제 2 화상을 취득한다. 화이트 밸런스 게인 산출부는 상기 촬상부에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득한다. 화상 분할부는 촬상부에 의해 취득된 제 1 화상 및 제 2 화상을 복수의 영역으로 분할한다. 휘도 취득부는 상기 화상 분할부에 의해 복수의 영역으로 분할된 제 1 화상 및 제 2 화상의 휘도값을 상기 복수의 영역마다 각각 취득한다. 휘도 취득부는 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출한다. 휘도 취득부는 각각 산출된 상대값 중에서, 특정의 복수의 상대값을 선택한다. 화이트 밸런스 게인 산출부는 선택된 특정의 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정한다.

Description

화이트 밸런스 조정이 가능한 촬상장치, 방법 및 기록매체{IMAGE CAPTURING APPARATUS, METHOD AND STORAGE MEDIUM CAPABLE OF ADJUSTING WHITE BALANCE}

본 발명은 촬상장치, 화이트 밸런스 조정방법 및 기록 매체에 관한 것으로, 특히, 스트로브 발광시에 촬상된 화상의 색 재현성을 보다 자연스러운 것으로 하는 기술에 관한 것이다.

종래부터 스트로브 발광시에 색 온도의 차이에 의해 생기는 부자연스러운 백색을 보다 자연스러운 색으로 보정하기 위해 화이트 밸런스가 조정되고 있다.

일본국 특개평 8-51632호 공보에는, 화이트 밸런스의 조정 수법으로 예를 들면, 스트로브 발광시의 화상과 스트로브 비발광시의 화상을 각각 복수의 영역으로 분할하고, 각각에 대응하는 영역의 휘도차에 의거하여, 분할된 영역마다 화이트 밸런스를 각각 설정한다는 수법이 알려져 있다.

일본국 특개평 8-51632호 공보

본 발명은 스트로브 발광시에 촬상된 화상의 색 재현성을 보다 자연스러운 것으로 하는 것을 목적으로 한다.

상기 목적을 달성하기 위해 청구항 1에 기재한 발명은 발광 수단과, 촬상 수단과, 상기 발광 수단의 발광시에 상기 촬상 수단에 의해 촬상된 제 1 화상과 상기 발광 수단의 비발광시에 상기 촬상 수단에 의해 촬상된 제 2 화상을 취득하는 화상 취득 수단과, 상기 화상 취득 수단에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 수단과, 상기 화상 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상을 복수의 영역으로 분할하는 분할 수단과, 상기 분할 수단에 의해 복수의 영역으로 분할된 제 1 화상 및 제 2 화상의 휘도값을, 상기 복수의 영역마다 각각 취득하는 휘도값 취득 수단과, 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 수단과, 상기 산출 수단에 의해 각각 산출된 상대값 중에서 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값을 선택하는 선택 수단과, 상기 선택 수단에 의해 선택된 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 수단을 구비하는 촬상장치인 것을 특징으로 한다.

또 상기 목적을 달성하기 위해, 청구항 2에 기재한 발명은 상기 산출 수단은 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값을 상기 제 2 화상의 영역 마다의 휘도값으로 나눈 값을 상기 상대값으로서 산출하고, 상기 선택 수단은 상기 산출 수단에 의해 각각 산출된 상대값 중에서, 값이 높은 복수의 상대값을 우선하여 선택하며, 상기 보정 수단은 상기 제 1 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상의 각 색 성분의 게인값과 상기 선택 수단에 의해 선택된 특정한 복수의 상대값에 의거하여 상기 제 1 화상의 각 색 성분의 게인값을 보정하는 촬상장치인 것을 특징으로 한다.

또 상기 목적을 달성하기 위해, 청구항 3에 기재한 발명은 상기 산출 수단에 의해 각각 산출된 상대값이 소정값 이하의 영역을 특정하는 특정 수단을 추가로 구비하고, 상기 산출 수단은 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값을 상기 제 2 화상의 영역 마다의 휘도값으로 나눈 값을 상기 상대값으로서 산출하고, 상기 선택 수단은 상기 산출 수단에 의해 각각 산출된 상대값 중에서, 값이 낮은 복수의 상대값을 우선하여 선택하며, 상기 보정 수단은 상기 선택 수단에 의해 선택된 특정한 복수의 상대값에 의거하여 상기 특정 수단에 의해 특정된 상대값에 대응하는 제 1 화상의 각 색 성분의 게인값을 보정하는 촬상장치인 것을 특징으로 한다.

또 상기 목적을 달성하기 위해, 청구항 4에 기재한 발명은 상기 화상 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상의 각 색 성분을 다른 색 공간에 있어서의 적어도 휘도 정보를 포함하는 화소 파라미터의 세트로 변환하는 변환 수단을 추가로 구비하고, 상기 보정 수단은 상기 변환 수단에 의해 변환된 화소 파라미터의 세트에 의거하여 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 추가로 보정하는 촬상장치인 것을 특징으로 한다.

또 상기 목적을 달성하기 위해, 청구항 5에 기재한 발명은 발광에 의해 밝게 된 제 1 화상과 발광에 의해 밝게 되어 있지 않은 제 2 화상을 취득하는 화상 취득 스텝과, 상기 화상 취득 스텝에서 취득된 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 스텝과, 상기 화상 취득 스텝의 처리에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상을 복수의 영역으로 각각 분할하는 분할 스텝과, 상기 분할 스텝에서 복수의 영역으로 분할된 상기 제 1 화상 및 상기 제 2 화상의 휘도값을 상기 복수의 영역마다 취득하는 휘도값 취득 스텝과, 상기 휘도값 취득 스텝에서 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 스텝과, 상기 휘도값 산출 스텝에서 각각 산출된 상대값 중에서, 특정한 복수의 상대값을 우선하여 선택하는 선택 스텝과, 상기 선택 스텝에서 선택된 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 스텝을 포함하는 화이트 밸런스 조정 방법인 것을 특징으로 한다.

또 상기 목적을 달성하기 위해, 청구항 6에 기재한 발명은 컴퓨터가 판독 가능한 기록 매체에 있어서, 발광에 의해 밝게 되었을 때에 촬상된 제 1 화상과 발광이 이루어져 있지 않을 때에 촬상된 제 2 화상을 취득하는 화상 취득 수단, 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 수단, 상기 화상 취득 수단에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상을 복수의 영역으로 분할하는 분할 수단, 상기 분할 수단에 의해 복수의 영역으로 분할된 상기 제 1 화상 및 상기 제 2 화상의 휘도값을, 상기 복수의 영역마다 취득하는 휘도값 취득 수단, 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 수단, 상기 휘도값 취득 수단에 의해 각각 산출된 상대값 중에서, 특정한 복수의 상대값을 우선하여 선택하는 선택 수단, 상기 선택 수단에 의해 선택된 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 수단으로서의 기능을 상기 컴퓨터에 실현시키는 프로그램을 기록한 기록 매체인 것을 특징으로 한다.

본 발명에 따르면, 스트로브 발광시에 촬상된 화상의 각 색 성분 마다의 휘도를 개별적으로 조정하는 경우에 생길 수 있는 특정의 색 변화가 생기지 않게 되어, 화상의 자연스러운 색 재현성을 보다 향상시킬 수 있다.

도 1은 본 발명에 관한 촬상장치의 일실시형태에 있어서의 하드웨어의 구성을 나타내는 영역도이다.
도 2는 도 1의 하드웨어의 구성을 가지는 촬상장치가 실행하는 스트로브 촬상처리의 흐름을 설명하는 흐름도이다.
도 3은 비발광시 스루화상 또는 발광시 촬상화상으로부터 8×8의 64 분할 영역이 얻어진 상태를 나타내는 모식도이다.
도 4는 발광시 스루화상 및 비발광시 촬상화상의 각 분할 영역의 휘도 비율을 저장하는 테이블의 일례를 나타내는 도면이다.
도 5는 도 1의 하드웨어의 구성을 가지는 촬상장치가 실행하는 화이트 밸런스 처리의 흐름을 설명하는 제 1 실시예의 흐름도이다.
도 6은 도 1의 하드웨어의 구성을 가지는 촬상장치가 실행하는 화이트 밸런스 처리의 흐름을 설명하는 제 2 실시예의 흐름도이다.

(제 1 실시형태)

이하, 본 발명의 제 1 실시형태에 대해 도면을 이용하여 설명한다.

도 1은 본 발명에 관한 촬상장치(1)의 일실시형태에 있어서의 하드웨어의 구성을 나타내는 영역도이다.

도 1에 나타내는 촬상장치(1)는 예를 들면 디지털카메라에 의해 구성할 수 있다.

촬상장치(1)는 CPU(Central Processing Unit)(11)와, ROM(Read Only Memory)(12)과, RAM(Random Access Memory)(13)과, 화상 처리부(14)와, 화이트 밸런스 게인 산출부(15)와, 화상 분할부(16)와, 휘도 취득부(17)와, 버스(18)와, 입출력 인터페이스(19)와, 촬상부(20)와, 발광부(21)와, 조작부(22)와, 표시부(23)와, 기억부(24), 통신부(25)와 드라이브(26)를 구비하고 있다.

CPU(11)는 ROM(12)에 기록되어 있는 프로그램, 또는, 기억부(24)로부터 RAM(13)에 로드된 프로그램에 따라서 각종 처리를 실행한다.

RAM(13)에는 CPU(11)가 각종 처리를 실행함에 있어서 필요한 데이터 등도 적절히 기억된다.

화상 처리부(14)는 DSP(Digital Signal Processor)나, VRAM(Video Random Access Memory) 등으로 구성되어 있고, CPU(11)와 협동하여 화상 데이터에 대하여 각종 화상 처리를 실시한다.

예를 들면, 화상 처리부(14)는 후술하는 촬상부(20)로부터 출력되는 촬상화상의 데이터에 대하여, 노이즈 저감, 화이트 밸런스의 조정, 손 떨림 보정 등의 화상 처리를 실시한다.

화이트 밸런스 게인 산출부(15)는 화상 처리부(14)에서 실시되는 화상 처리 중, 화이트 밸런스의 조정에 이용하는 화이트 밸런스 게인을 산출한다. 또한 화이트 밸런스 게인 산출부(15)의 보다 상세한 것에 대해서는 후술한다.

화상 분할부(16)는 화상 처리부(14)에서 실시되는 화상 처리 중, 화이트 밸런스의 조정에 이용하는 화상의 데이터를, 공간 방향으로 몇 개 영역의 데이터로 분할한다. 또한 화상 분할부(16)의 더욱 상세한 것에 대해서는 후술한다.

휘도 취득부(17)는 화상 처리부(14)에서 실시되는 화상 처리 중, 화이트 밸런스의 조정에 이용하는 화상의 데이터로부터 휘도값 등을 취득한다. 또한 휘도 취득부(17)의 보다 상세한 것에 대해서는 휘도 비교부(41)도 포함하여 후술한다.

CPU(11), ROM(12), RAM(13), 화상 처리부(14), 화이트 밸런스 게인 산출부 (15), 화상 분할부(16) 및 휘도 취득부(17)는 버스(18)를 통하여 서로 접속되어 있다. 이 버스(18)에는 또, 입출력 인터페이스(19)도 접속되어 있다. 입출력 인터페이스(19)에는 촬상부(20), 발광부(21), 조작부(22), 표시부(23), 기억부(24), 통신부(25) 및 드라이브(26)가 접속되어 있다.

촬상부(20)는 도시는 하지 않지만, 광학 렌즈부와, 이미지 센서를 구비하고 있다.

광학 렌즈부는 피사체를 촬영하기 위해 빛을 집광하는 렌즈, 예를 들면 포커스 렌즈나 줌 렌즈 등으로 구성된다.

포커스 렌즈는 이미지 센서의 수광면에 피사체상을 결상시키는 렌즈이다. 줌 렌즈는 초점거리를 일정한 범위에서 자유롭게 변화시키는 렌즈이다.

광학 렌즈부에는 또, 필요에 따라서, 초점, 노출, 화이트 밸런스 등의 설정 파라미터를 조정하는 주변 회로가 설치된다.

이미지 센서는 광전변환소자나, AFE(Analog Front End) 등으로 구성된다.

광전변환소자는 예를 들면 CMOS(Complementary Metal Oxide Semiconductor) 형의 광전변환소자 등으로 구성된다. 광전변환소자에는 광학 렌즈부로부터 피사체상이 입사된다. 그래서 광전변환소자는 피사체상을 광전변환(촬상)하여 화상신호를 일정시간 축적하고, 축적한 화상 신호를 아날로그 신호로서 AFE에 차례차례 공급한다.

AFE는 이 아날로그의 화상 신호에 대해서, A/D(Analog/Digital) 변환처리 등의 각종 신호 처리를 실행한다. 각종 신호 처리에 의해 디지털 신호가 생성되어 촬상부(20)의 출력 신호로서 출력된다.

또한 이하, 촬상부(20)의 출력신호를 「촬상화상의 데이터」라고 한다. 따라서, 촬상부(20)로부터는 촬상화상의 데이터가 출력되어 CPU(11), 화상 처리부 (14), 화이트 밸런스 게인 산출부(15) 등에 적절히 공급된다.

발광부(21)는 스트로브를 갖고, CPU(11)의 제어에 따라 스트로브를 발광시킨다. 본 제 1 실시형태에 있어서는 유저가 조작부(22)에 대한 촬상화상의 기록 지시의 조작, 예를 들면 조작부(22) 중 도시하지 않는 릴리즈 버튼의 누름 조작을 한 것을 계기로 하여 스트로브가 발광한다.

조작부(22)는 예를 들면, 도시하지 않는 릴리즈 버튼 등의 각종 구에 의해 구성되고, 유저의 지시 조작을 받아들인다.

표시부(23)는 각종 화상을 표시 가능한 디스플레이 등에 의해 구성된다.

기억부(24)는 DRAM(Dynamic Random Access Memory) 등으로 구성되고, 후술하는 스루화상, 표시 대상의 원(原)화상, 해당 원화상에 합성될 수 있는 화상 등의 각종 화상의 데이터를 기억한다.

통신부(25)는 인터넷을 포함하는 네트워크를 통하여 다른 장치(도시하지 않음)와의 사이에서 실시하는 통신을 제어한다.

드라이브(26)에는 자기 디스크, 광디스크, 광자기 디스크, 혹은 반도체 메모리 등으로 이루어지는, 착탈 가능한 미디어(removable medium)(31)가 적절히 장착된다. 드라이브(26)에 의해 착탈 가능한 미디어(31)로부터 읽어내어진 프로그램은 필요에 따라 기억부(24)에 인스톨된다. 또, 착탈 가능한 미디어(31)는 기억부(24)에 기억되어 있는 화상의 데이터 등의 각종 데이터도, 기억부(24)와 마찬가지로 기억할 수 있다.

이상, 도 1을 참조하여, 본 제 1 실시형태의 촬상장치(1)의 하드웨어의 구성에 대해 설명했다.

다음으로, 이와 같은 하드웨어의 구성을 가지는 촬상장치(1)가 실행하는 스트로브 촬상처리의 흐름에 대해 설명한다. 스트로브 촬상처리란 스트로브를 발광시켜 피사체를 촬상하고, 그 결과 얻어지는 촬상화상의 데이터에 대해 화이트 밸런스의 조정을 실시한 후에, 착탈 가능한 미디어(31) 등에 기록하기까지의 일련의 처리를 말한다.

도 2는, 도 1의 하드웨어의 구성을 가지는 촬상장치(1)가 실행하는 스트로브 촬상처리의 흐름을 설명하는 흐름도이다.

먼저, 촬상장치(1)의 동작 모드로서 본 제 1 실시형태에서는 스트로브를 발광하지 않고 피사체를 촬상하는 통상 모드와, 스트로브를 발광하여 피사체를 촬상하는 스트로브 모드가 설치되는 것으로 한다. 그리고, 유저는 조작부(22)에 대한 소정의 조작을 함으로써, 동작 모드로서 통상 모드 또는 스트로브 모드를 선택적으로 지시할 수 있는 것으로 한다.

이 경우, 스트로브 모드의 선택이 지시되면 스트로브 촬상처리는 개시한다.

스텝 S1에 있어서, CPU(11)는 스루화상의 촬상처리 및 스루화상의 표시처리를 실행한다.

즉, CPU(11)는 촬상부(20)나 화상 처리부(14)를 제어하여 촬상부(20)에 의한 촬상동작을 계속시킨다. 그리고, CPU(11)는 촬상부(20)에 의한 촬상동작이 계속되고 있는 동안, 해당 촬상부(20)로부터 순차 출력되는 촬상화상의 데이터를 메모리(기억부(24))에 일시적으로 기억시킨다. 이와 같은 일련의 처리가 여기에서 말하는「스루촬상처리」이다.

또, CPU(11)는 스루촬상처리 시에 메모리(기억부(24))에 일시적으로 기록된 각 데이터를 차례차례 읽어내어 각각에 대응하는 촬상화상을 표시부(23)에 차례차례 표시시킨다. 이와 같은 일련의 처리가, 여기에서 말하는「스루표시처리」이다. 또한 스루표시처리에 의해 표시부(23)에 표시되어 있는 촬상화상을, 이하, 「스루화상」이라고 부른다.

스텝 S2에 있어서, CPU(11)는 촬상화상의 기록지시가 있었는지 없었는지를 판단한다.

상술한 바와 같이, 유저는 조작부(22) 중 릴리즈 버튼을 누름 조작함으로써, 촬상화상의 기록 지시를 할 수 있다

따라서, 릴리즈 버튼이 누름 조작되어 있지 않은 경우에는, 스텝 S2에서 NO라고 판정되어, 처리는 스텝 S1로 되돌려진다. 즉, 릴리즈 버튼이 누름 조작되기까지의 동안, 스텝 S1 및 S2의 루프 처리가 반복하여 실행됨으로써, 스루촬상처리 및 스루표시처리가 반복하여 실행되고, 피사체의 스루화상이 리얼타임으로 표시부 (23)에 계속 표시된다.

또한 도시는 하지 않지만, 소정 시간 경과해도 아직 릴리즈 버튼이 누름 조작되지 않는 경우에는 CPU(11) 등은 스트로브 촬상처리를 강제 종료하도록 해도 좋다.

그 후, 릴리즈 버튼이 누름 조작된 경우에는, 스텝 S2에서 YES라고 판정되어, 처리는 스텝 S3으로 진행된다.

스텝 S3에 있어서, CPU(11)는 발광과 함께 피사체를 촬상하는 것을 제어한다. 상세하게는 CPU(11)는 발광부(21)을 제어하여 스트로브를 발광시키는 동시에, 촬상부(20)를 제어하여 피사체를 촬상시킨다.

이때, 촬상부(20)로부터 출력된 촬상화상의 데이터가 기록 대상의 데이터로서 기억부(24)에 일시적으로 기억된다.

스텝 S4에 있어서, CPU(11)는 스텝 S1의 스루촬상처리로 스트로브 비발광시에 피사체가 촬상된 스루화상의 데이터와, 스텝 S3의 처리로 스트로브 발광시에 피사체가 촬상된 촬상화상의 데이터를 이용하여 기록 대상의 촬상화상의 화이트 밸런스를 조정하는 처리를 실행한다.

이와 같은 스텝 S4의 처리를, 도 2의 기재에 맞추어, 이하, 「화이트 밸런스 처리」라고 한다. 또, 스텝 S1의 스루촬상처리로 스트로브 비발광 시에 피사체가 촬상된 스루화상의 데이터를, 이하, 「비발광시 스루화상의 데이터」라고 한다. 한편, 스텝 S3의 처리에서 스트로브 발광시에 피사체가 촬상된 촬상화상의 데이터를, 이하, 「발광시 촬상화상의 데이터」라고 한다.

여기에서, 기록 대상의 촬상화상의 데이터는 발광시 촬상화상의 데이터가 채용되는 것으로 한다. 다만, 발광시 촬상화상의 데이터와는 별도로, 화이트 밸런스의 설정 후, 한번 더 스트로브를 발광시켜 촬상부(20)가 피사체를 촬상한 결과 얻어지는 촬상화상의 데이터를 기록 대상으로서 채용해도 된다. 이 경우, 해당 기록 대상의 촬상화상의 데이터는 설정된 화이트 밸런스로 조정된다.

또한 화이트 밸런스 처리의 더욱 상세한 것에 대하여는 후술한다.

스텝 S5에 있어서, CPU(11)는 스텝 S4의 처리에서 화이트 밸런스 처리가 실시된, 기록 대상의 촬상화상의 데이터를 착탈 가능한 미디어(31)에 기록한다.

이에 따라, 스트로브 촬상처리는 종료된다.

이상, 스트로브 촬상처리에 대해 설명했다.

다음으로, 스트로브 촬상처리 중, 스텝 S4에서 실행되는 화이트 밸런스 처리에 대해 설명한다.

여기에서는, 우선, 화이트 밸런스 처리를 실행하기 위한 기능적 구성에 대해 설명하고, 다음으로 그 기능적 구성에 의거하여 실행되는 화이트 밸런스 처리의 흐름에 대해 설명한다.

화이트 밸런스 처리가 실행되는 경우, 도 1의 촬상장치(1) 중, 화이트 밸런스 게인 산출부(15)와, 화상 분할부(16)와, 휘도 취득부(17)가 기능한다.

화이트 밸런스 게인 산출부(15)는 비발광시 스루화상에 대한 화이트 밸런스 게인과, 발광시 촬상화상에 대한 화이트 밸런스 게인을 각각 산출한다.

상세하게는 비발광시 스루화상과 발광시 촬상화상의 각 데이터는 RGB(R:Red, G:Green, B:Blue) 성분에 의해 구성되어 있는 것으로 한다.

이 경우, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상의 화이트 밸런스 게인으로서 R성분의 게인(이하, 「SRG」라고 한다)과, G성분의 게인(이하, 「SGG」라고 한다)과, B성분의 게인(이하, 「SBG」라고 한다) 각각을 산출한다. 또한 SRG, SGG, SBG를 아울러, 이하, 「비발광시 스루화상의 RGB 성분의 게인값」이라고 한다.

또, 화이트 밸런스 게인 산출부(15)는 발광시 촬상화상의 화이트 밸런스 게인으로서 R성분의 게인(이하, 「LRG」라고 한다)과, G성분의 게인(이하, 「LGG」라고 한다)과, B성분의 게인(이하, LBG라고 한다)을 각각 산출한다. LRG, LGG, LBG를 아울러, 이하, 「발광시 촬상화상의 RGB 성분의 게인값」이라고 한다.

다음으로, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상 및 발광시 촬상화상의 RGB 성분의 각 게인값을 YUV(Y:휘도, U:휘도와 청색성분의 색 차이, V:휘도와 적색성분의 색 차이) 성분의 게인값으로 변환한다.

또한 이하, 비발광시 스루화상 및 발광시 촬상화상의 RGB 성분의 각 게인값으로부터 변환된 YUV 성분의 각 게인값을 「YUV 변환값」라고 한다.

여기에서, 비발광시 스루화상의 YUV 변환값은 Y성분의 게인(이하, SY라고 한다)과, U성분의 게인(이하, SU라고 한다)과, V성분의 게인(이하, SV라고 한다)으로 구성된다.

이 경우, 비발광시 스루화상의 YUV 변환값은 다음의 식(1)로 연산된다.

또한 식(1)의 좌변의 왼쪽부터 곱해지고 있는 3행 3열의 행렬은 즉, i행 j열 (i, j는 서로 독립한, 1 내지 3의 범위 내의 정수값)의 요소가 aij로 되어 있는 행렬은 RGB 성분을 YUV 성분으로 변환하는 변환 행렬이다.

한편, 발광시 촬상화상의 YUV 변환값은 Y성분의 게인(이하, LY라고 한다)과, U성분의 게인(이하, LU라고 한다)과, V성분의 게인(이하, LV라고 한다)으로 구성된다.

이 경우, 발광시 스루화상의 YUV 변환값은 다음의 식(2)로 연산된다.

다음으로, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상과 발광시 촬상화상의 각 분할 영역의 휘도 비율(분할 영역이나 휘도 비율은 후술한다)을 종합적으로 고려하여 발광시 촬상화상의 YUV 변환값 중, Y성분의 게인(LY)을 보정한다.

여기에서, 발광시 촬상화상의 YUV 변환값 중, 보정 후의 Y성분의 게인을 이하, 「LY´」라고 한다. 환언하면, LY에 대해서, 비발광시 스루화상과 발광시 촬상화상의 각 분할 영역의 휘도 비율을 종합적으로 고려한 웨이티드(weighted)가 이루어진 값이, LY´이다.

LY´는 예를 들면 다음의 식(3)에 의해 구할 수 있다.

식(3)에 있어서, C는 비발광시 스루화상과 발광시 촬상화상의 각 분할 영역의 휘도 비율을 종합적으로 고려한 웨이티드를 실시하기 위한 가변 계수이며, 후술하는 휘도 비교부(41)에서 연산되는 평균 휘도 비율이다.

다음으로, 화이트 밸런스 게인 산출부(15)는 식(3)에 의해 Y성분이 보정(웨이티드)된 발광시 촬상화상의 YUV 변환값을 RGB 성분의 게인값으로 역변환한다. 구체적으로는, 화이트 밸런스 게인 산출부(15)는 다음의 식(4)에 따라, 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값을 구한다.

또한 식(4)의 우변의 열 벡터가 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값을 나타내고 있다. 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값은 역변환 후의 R성분의 게인(이하, 식(4)의 기재에 아울러「LRα」라고 한다)과, 역변환 후의 G성분의 게인(이하, 식(4)의 기재에 아울러「LGα」라고 한다)과, 역변환 후의 B성분의 게인(이하, 식(4)의 기재에 아울러「LBα」라고 한다)로 구성된다.

또, 식(4)의 좌변에 있어서 왼쪽부터 곱해지고 있는 행렬은 식(1)이나 식(2)에서 이용되고 있는 변환 행렬의 역행열이다.

그리고, 화이트 밸런스 게인 산출부(15)는 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값에 의거하여 기록 대상의 촬상화상의 화이트 밸런스 설정을 실시한다.

다음으로, 촬상장치(1)가 화이트 밸런스 처리의 일부로서 상술한 식(3)에서 이용하는 평균 휘도 비율(C)을 연산하는 처리를 실행하는 경우의 기능적 구성에 대해 설명한다. 이 경우에는 화상 분할부(16)와 휘도 취득부(17)가 기능한다.

화상 분할부(16)는 비발광시 스루화상 및 발광시 촬상화상의 각 데이터를 도 3에 나타내는 바와 같이 8×8의 64 영역의 각 데이터로 각각 분할한다.

또한 본 명세서에서는, 이와 같이 화상 분할부(16)에 의해 분할된 영역이 특히, 「분할 영역」이라고 불리고 있다.

도 3은 비발광시 스루화상 또는 발광시 촬상화상으로부터 8×8의 64 분할 영역이 얻어진 상태를 나타내는 모식도이다.

동일 도면에 나타내는 바와 같이, 각 분할 영역에 대해, 특정하는 고유의 번호, 구체적으로는 좌상단의 분할영역으로부터, 수평방향은 오른쪽 방향으로, 수직방향은 아래쪽 방향을 향한 순서로, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, …, 63, 64라는 번호가 붙여져 있다. 또한 이하, 분할 영역에 붙여진 번호를, 「분할 번호」라고 한다.

분할 번호의 교부하는 방법은 비발광시 스루화상 및 발광시 촬상화상으로 통일되어 있기 때문에, 비발광시 스루화상과 발광시 촬상화상의 각각의 동일 번호의 분할 영역은 화상 전체에 있어서의, 위치, 크기 및 범위는 동일하게 되어 있다.

또한 각 분할 영역의 데이터는 예를 들면, 붙여진 번호와 대응 지어져서 테이블 방식으로 기억부에 기억되어, 관리된다.

휘도 취득부(17)는 비발광시 스루화상 및 발광시 촬상화상의 데이터로부터 휘도값을 분할 영역 단위로 취득한다.

여기에서 분할 영역은 복수의 화소로 구성되기 때문에, 분할 영역의 휘도는 해당 분할 영역을 구성하는 각 화소의 휘도에 의거하여 연산된 값, 예를 들면, 각 화소의 휘도의 평균값을 의미하는 것으로 한다.

휘도 취득부(17)에는 휘도 비교부(41)가 설치되어 있다.

휘도 비교부(41)는 발광시 스루화상 및 비발광시 촬상화상의 각 분할 영역의 휘도 비율을 산출한다.

영역 번호 k(k는 분할 총수 이하의 정(正)의 정수값이며, 64 이하의 정의 정수값)의 휘도 비율(Ck)은 다음의 식(5)에 의해 구해진다.

식(5)에 있어서, Yk´는 발광시 촬상화상의 k번째의 분할 영역의 휘도를 나타내고 있다. Yk는 비발광시 스루화상의 k번째의 분할 영역의 휘도를 나타내고 있다.

이와 같은 식(5)에 의한 휘도 비교부(41)의 연산 결과는 예를 들면 도 4에 나타내는 테이블 형식으로 기억부(24)에 기억되어, 관리된다.

도 4는 발광시 스루화상 및 비발광시 촬상화상의 각 분할 영역의 휘도 비율을 저장하는 테이블의 일례를 나타내고 있다.

도 4의 테이블은 행렬 구조를 가지고 있기 때문에, 이하, 도 4 수평방향(中橫方向) 항목의 집합체를 「행」이라고 하고, 동일 도면 수직방향(中縱方向) 항목의 집합체를 「열」이라고 칭한다. 소정의 행에는 소정의 영역 번호가 대응지어져 있다. 즉, 소정의 행에는 해당 행에 대응하는 영역 번호에 대한, 「영역 번호」, 「비발광시의 휘도」, 「발광시의 휘도」 및 「휘도 비율」이라는 항목이 각각 배치되어 있다.

위에서부터 제 K 행째(다만, 도 4의 항목명이 기재된 제일 위의 행은 제외한다. 이하 동일)의 「영역 번호」에는 영역 번호 K가 저장된다.

위에서부터 제 K 행째의 「비발광시의 휘도」에는 비발광시 스루화상의 k번째의 분할 영역의 휘도 Yk가 저장된다.

위에서부터 제 K 행째의 「발광시의 휘도」에는 발광시 촬상화상의 k번째의 분할 영역의 휘도 Yk´가 저장된다.

위에서부터 제 K 행째의「휘도 비율」에는 k번째의 휘도 비율(Ck), 즉 식(5)의 연산 결과가 저장된다.

다음으로, 휘도 비교부(41)는 전(全)분할 영역 마다의 휘도 비율을 비율이 높은 순번으로 솔트(sort)한다.

그리고, 휘도 비교부(41)는 휘도가 높은 순번으로 솔트된 각 분할 영역의 휘도 비율 중, 상위 2 내지 4번째의 휘도 비율의 평균값을, 상술한 평균 휘도 비율 (C)로서 구한다.

구체적으로는, 휘도 비교부(41)는 다음의 식(6)을 연산함으로써, 평균 휘도 비율(C)을 구한다.

식(6)에 있어서, Ct2 내지 Ct4의 각각은 상위 2 내지 4번째의 각각의 휘도 비율을 나타내고 있다.

예를 들면, 전분할 영역의 휘도 비율(C1=Y1´/Y1, C2=Y2´/Y2, C3=Y3´/Y3, …, C8=Y8´/Y8, …, C22=Y22´/Y22, …, C64=Y64´/Y64) 중, 상위 4번째까지의 휘도 비율이 다음과 같았다고 한다. 즉, 1번째:Ct1=C1=Y1´/Y1, 2번째:Ct2=C2=Y2´/Y2, 3번째:Ct3=C8=Y8´/Y8, 4번째:Ct4=C22=Y22´/Y22인 것으로 하는, 이 경우, 평균 휘도 비율(C)은 다음의 식(7)에 의해 산출된다.

이와 같이 하여 구해진 평균 휘도 비율(C)은 상술한 식(3)에 계수로서 대입되어 이용된다.

이상, 도 3 및 도 4를 참조하여 도 1의 촬상장치(1)의 기능적 구성 중, 도 2의 스텝 S4의 화이트 밸런스 처리를 실행하기 위한 기능적 구성에 대해 설명했다.

다음으로, 이와 같은 기능적 구성을 가지는 촬상장치(1)가 실행하는 스텝 S4의 화이트 밸런스 처리의 상세한 흐름에 대해 설명한다.

화이트 밸런스 처리에 있어서는 CPU(11)의 제어하에, 화이트 밸런스 게인 산출부(15) 내지 휘도 취득부(17)의 어느 쪽인가가 각 스텝의 처리를 실행한다. 다만, 이하의 설명에 있어서는 CPU(11)의 제어에 대한 설명은 생략한다.

도 5는 도 1의 촬상장치(1)가 실행하는 도 2의 스트로브 촬상처리 중, 스텝 S4의 화이트 밸런스 처리의 흐름의 상세를 설명하는 흐름도이다.

스텝 S21에 있어서, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상의 각 RGB 성분의 게인값과 발광시 촬상화상의 각 RGB 성분의 게인값을 산출한다.

상세하게는 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상의 화이트 밸런스 게인으로서, R성분의 게인인 SRG와, G성분의 게인인 SGG와, B성분의 게인인 SBG를 각각 산출한다.

또, 화이트 밸런스 게인 산출부(15)는 발광시 촬상화상의 화이트 밸런스 게인으로서 R성분의 게인인 LRG와, G성분의 게인인 LGG와, B성분의 게인인 LBG를 각각 산출한다.

스텝 S22에 있어서, 화상 분할부(16) 및 휘도 취득부(17)는 촬상화상과 스루화상을 각각 8×8 분할하여 각 화상 영역의 휘도값을 산출한다.

상세하게는, 우선, 화상 분할부(16)는 비발광시 스루화상 및 발광시 촬상화상의 각 데이터를 복수의 영역, 도 3에 나타내는 바와 같이 8×8의 64 영역의 각 데이터로 각각 분할한다.

그리고, 휘도 취득부(17)는 비발광시 스루화상 및 발광시 촬상화상의 데이터로부터 휘도값을 분할 영역 단위로 취득한다.

스텝 S23에 있어서, 휘도 비교부(41)는 발광시 스루화상 및 비발광시 촬상화상의 각 분할 영역의 휘도 비율을 산출한다. 상세하게는 휘도 비교부(41)는 상술한 식(5)를 연산함으로써, 휘도 비율을 산출한다. 이와 같은 식(5)에 의한 휘도 비교부(41)의 연산 결과는 예를 들면 도 4에 나타내는 테이블 형식으로 기억부에 기억되어, 관리된다.

스텝 S24에 있어서, 휘도 비교부(41)는 휘도 비율이 높은 쪽에서부터 2∼4번째를 선택하고, 각 휘도 비율의 평균(평균 휘도 비율)을 산출한다. 즉, 휘도 비교부(41)는 스텝 S3에 있어서 전분할 영역 마다의 휘도 비율을 비율이 높은 차례로 솔트한다. 그리고, 휘도 비교부(41)는 휘도가 높은 차례로 솔트된 각 분할 영역의 휘도 비율 중, 상위 2 내지 4번째의 휘도 비율의 평균값인 평균 휘도 비율(C)을 상술한 식(6)을 연산함으로써 구한다.

스텝 S25에 있어서, 화이트 밸런스 게인 산출부(15)는 스텝 S21에서 구한 각 RGB 성분의 게인값을 YUV 변환값으로 변환한다. 상세하게는 화이트 밸런스 게인 산출부(15)는 상술한 식(1) 및 식(2)를 연산함으로써, 스텝 S21에서 구한 비발광시 스루화상 및 발광시 촬상화상의 RGB 성분의 각 게인값을 YUV 변환값으로 변환한다.

스텝 S26에 있어서, 화이트 밸런스 게인 산출부(15)는 스텝 S24에서 구한 평균 휘도 비율에 의거하여, Y성분(LY´)의 게인값을 산출한다. 상세하게는, 화이트 밸런스 게인 산출부(15)는 스텝 S24에서 산출한 평균 휘도 비율을 이용하여 상술한 식(3)을 연산함으로써, 비발광시 스루화상과 발광시 촬상화상의 각 분할 영역의 휘도 비율을 종합적으로 고려하여 발광시 촬상화상의 YUV 변환값 중, Y성분의 게인 (LY)을 LY´로 보정한다.

스텝 S27에 있어서, 화이트 밸런스 게인 산출부(15)는 웨이티드가 가미된 YUV 변환값을 RGB 성분의 게인값으로 역변환한다. 상세하게는 화이트 밸런스 게인 산출부(15)는 상술한 식(4)에 따라서 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값을 구한다.

스텝 S28에 있어서, 화이트 밸런스 게인 산출부(15)는 산출한 RGB 성분의 게인값에 의거하여 촬상화상의 화이트 밸런스를 설정한다. 즉, 화이트 밸런스 게인 산출부(15)는 역변환 후의 발광시 촬상화상의 RGB 성분의 게인값에 의거하여 기록 대상의 촬상화상의 화이트 밸런스 설정을 실시한다. 이에 따라, 화이트 밸런스 처리를 종료하고, 스트로브 촬상처리로 되돌아가며, 처리는 도 2의 스텝 S5로 이행한다.

이상 설명한 바와 같이, 촬상장치(1)는 발광부(21)와, 촬상부(20)와, CPU(11)와, 화이트 밸런스 게인 산출부(15)와, 화상 분할부(16)와, 휘도 취득부 (17)와, 휘도 비교부(41)를 구비한다.

CPU(11)는 유저의 조작에 의해, 발광부(21)에 의한 발광에 의해 밝게 된 때의 화상인 촬상화상(발광시 촬상화상)과 해당 발광에 의한 발광이 이루어지고 있지 않을 때의 화상인 스루화상(비발광시 스루화상)을 촬상부(20)에 촬상하도록 제어한다.

화이트 밸런스 게인 산출부(15)는 발광시 촬상화상 및 비발광시 스루화상의 촬상 시에 설정된 화이트 밸런스를 조정하기 위한 각 색 성분의 게인값을 각각 산출하여 취득한다.

화상 분할부(16)는 촬상부(20)에 의해 촬상된 촬상영역을 복수 영역으로 분할한다.

휘도 취득부(17)는 발광시 촬상화상과 비발광시 스루화상에 대해서, 화상 분할부(16)에 의해 분할된 복수 영역의 휘도값을 각각 산출한다.

휘도 비교부(41)는 휘도 취득부(17)에 의해 산출된 발광시 촬상화상 영역의 휘도값을 대응하는 비발광시 스루화상 영역의 휘도값으로 나눈 값을, 상대값으로서 각각 산출한다.

휘도 비교부(41)는 휘도 비교부(41)에 의해 각각 산출된 상대값 중에서, 값이 높은 상대값을 우선하여 복수 선택한다.

화이트 밸런스 게인 산출부(15)는 산출된 발광시 촬상화상 및 비발광시 스루화상의 각 색 성분의 값과 휘도 비교부(41)에 의해 선택된 복수의 상대값에 의거하여, 발광부(21)에 의한 발광에 의해 밝게 되었을 때의 화상의 각 색 성분의 게인값을 보정한다.

이와 같이 구성되는 촬상장치(1)에 있어서는 스트로브의 발광시에 촬상된 화상에 있어서, 화상의 자연스러운 색 재현성을 향상시킬 수 있다.

또, 화이트 밸런스 게인 산출부(15)는 취득된 발광시 촬상화상 및 비발광시 스루화상의 RGB 성분을 다른 색 공간인 적어도 휘도 정보를 포함하는 화소 파라미터의 세트(YUV 변환값)로 변환한다.

또, 화이트 밸런스 게인 산출부(15)는 또한 변환된 화소 파라미터의 세트 (YUV 변환값)에 의거하여 RGB 성분의 게인값을 보정한다.

이와 같이 구성되는 촬상장치(1)에 있어서는 YUV 변환값으로 변환함으로써, 그레이 밸런스 레벨로 휘도의 조정을 실시하기 때문에, 스트로브의 발광시에 촬상된 화상의 각 색 성분 마다의 휘도를 개별적으로 조정하는 경우에 생길 수 있는 특정의 색 변화가 생기지 않게 되어, 화상의 자연스러운 색 재현성을 보다 향상시킬 수 있다.

또한 본 발명은 상술한 실시형태에 한정되는 것이 아니고, 본 발명의 목적을 달성할 수 있는 범위에서의 변형, 개량 등은 본 발명에 포함되는 것이다.

또, 상술한 실시형태에서는 휘도 비율(Ck)을 상술한 식(5)에 의해 구했지만 이것에 한정되지 않는다. 휘도 비율(Ck)은 다음의 식(8)에 의해 구할 수 있다. 이 경우, 평균 휘도 비율에는 하위 2에서부터 4번째의 휘도 비율(Ck)을 이용한다.

또, 상술한 실시형태에서는 평균 휘도 비율을 상위 2에서부터 4번째의 휘도 비율을 이용했지만 이것에 한정되지 않는다. 평균 휘도 비율에 이용하는 휘도 비율은 적어도 전휘도 비율에 있어서, 상대적으로 높은 값으로 되어 있는 것이면 좋다.

또, 상술한 실시형태에서는, 최상위의 휘도 비율을 이용하지 않도록 구성했지만, 이것에 한정되지 않는다. 최상위의 휘도 비율이 다른 휘도 비율에 비해 월등히 높은 값 등의 불안정한 값이 아니면, 최상위의 휘도 비율을 이용하도록 구성해도 좋다.

또, 상술한 실시형태에서는 화상의 분할은 비발광시 스루화상 및 발광시 촬상화상의 각 데이터를, 복수의 영역, 본 실시형태에 있어서는, 도 3에 나타내는 바와 같이, 8×8의 64 영역의 각 데이터로 각각 분할했지만 이것에 한정되지 않는다. 화상의 분할은 복수의 영역으로 분할하면 좋고, 분할수나 분할 영역의 결정은 적절히 결정 가능하다.

또, 상술의 실시형태에서는 촬상부(20)에 의해 촬상한 발광시 촬상화상 및 비발광시 스루화상을 이용하여 화이트 밸런스 처리를 실행했지만, 이것에 한정되지 않는다. 화이트 밸런스 처리는 예를 들면, CPU(11)나 화상 처리부(14)에 의해 외부로부터 취득한 촬상화상 및 스루화상을 이용해도 좋다. 또, 상술한 실시형태에서는 발광시 촬상화상과 비발광시 스루화상을 이용하여 화이트 밸런스 처리를 실행했지만 이것에 한정되지 않는, 예를 들면, 발광시 촬상화상과 비발광시 촬상화상을 이용하여 화이트 밸런스 처리를 실행해도 좋다.

(제 2 실시형태)

이하, 본 발명의 제 2 실시형태에 대해서, 도면을 이용하여 설명한다.

실시형태 2와 실시형태 1은 도 2의 스텝 S4에 있어서의 화이트 밸런스 처리의 점에서 다르다. 그래서, 실시형태 2의 설명으로서는 스텝 S4에서 실행되는 화이트 밸런스 처리에 관한 부분에 대해 설명한다.

화이트 밸런스 게인 산출부(15)는 복수의 분할 영역마다, 발광시 촬상화상의 RGB 성분의 게인값을 각각 보정한다.

여기에서, 본 제 2 실시형태에서는 복수의 분할 영역은 스트로브의 빛이 제대로 조사되고 있다고 추정되는 분할 영역(이하, 「조사 영역」이라고 한다), 또는, 그 이외의 분할 영역(이하, 「비조사 영역」이라고 한다)으로 분류된다. 또한 조사 영역과 비조사 영역의 분류 수법에 대해서는 후술한다.

이 때문에, 본 제 2 실시형태에서는 발광시 촬상화상의 RGB 성분의 게인값의 보정 수법이 조사 영역과 비조사 영역과는 다르도록 한다.

그래서, 이하, 발광시 촬상화상 중, 비조사 영역의 RGB 성분의 게인값의 보정 수법에 대해 설명한다.

비조사 영역이어도, 스트로브 광이 전혀 조사되고 있지 않은 것은 드물며, 스트로브 광의 조사 상태를 고려한 화이트 밸런스의 조정이 필요하게 된다. 이러한 조정을 가능하게 하도록, 발광시 촬상화상 중, 비조사 영역의 RGB 성분의 게인값은 다음과 같이 하여 보정된다.

화이트 밸런스 게인 산출부(15)는 비발광시 스루화상 및 발광시 촬상화상의 비조사 영역의 RGB 성분의 각 게인값을, YUV(Y:휘도, U:휘도와 청색 성분의 색 차이, V:휘도와 적색 성분의 색 차이) 성분의 게인값으로 변환한다.

또한 이하, 비발광시 스루화상 및 발광시 촬상화상의 RGB 성분의 각 게인값으로부터 변환된 YUV 성분의 각 게인값을 실시형태 1과 마찬가지로 「YUV 변환값」이라고 한다.

다음으로, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상과 발광시 촬상화상의 각 비조사 영역의 휘도 비율(휘도 비율은 후술한다)을 종합적으로 고려하여 발광시 촬상화상의 비조사 영역의 YUV 변환값 중, Y성분의 게인(LY)을 보정한다.

여기에서, 발광시 촬상화상의 비조사 영역의 YUV 변환값 중, 보정 후의 Y성분의 게인을, 이하, 「LY´」이라고 한다. 환언하면, LY에 대해서, 비발광시 스루화상과 발광시 촬상화상의 각 비조사 영역의 휘도 비율을 종합적으로 고려한 웨이티드가 이루어진 값이 LY´이다.

LY´는 예를 들면 실시형태 1과 마찬가지로 식(3)에 의해 구해진다.

화이트 밸런스 게인 산출부(15)는 식(3)에 의해 Y성분이 보정(웨이티드)된 발광시 촬상화상의 비조사 영역의 YUV 변환값을 RGB 성분의 게인값으로 역변환한다. 구체적으로는, 화이트 밸런스 게인 산출부(15)는 실시형태 1의 식(4)에 따라서 역변환 후의 발광시 촬상화상의 비조사 영역의 RGB 성분의 게인값을 구한다.

또한 식(4)의 우변의 열 벡터가 역변환 후의 발광시 촬상화상의 비조사 영역의 RGB 성분의 게인값을 나타내고 있다. 역변환 후의 발광시 촬상화상의 비조사 영역의 RGB 성분의 게인값은 역변환 후의 R성분의 게인 LRα와, 역변환 후의 G성분의 게인 LGα와, 역변환 후의 B성분의 게인 LBα로 구성된다.

이와 같이 하여, 발광시 촬상화상 중, 비조사 영역의 RGB 성분의 게인값이 보정된다.

이상, 발광시 촬상화상 중, 비조사 영역의 RGB 성분의 게인값의 보정 수법에 대해 설명했다.

또한 발광시 촬상화상 중, 조사 영역의 RGB 성분의 게인값의 보정 수법에 대해서는 특히 한정되지 않고, 예를 들면 본 실시형태에서는 후술하는 휘도 비율에 의거하는 보정 수법이 채용되고 있는 것으로 한다.

그리고, 화이트 밸런스 게인 산출부(15)는 발광시 촬상화상의 분할 영역마다에 있어서의 RGB 성분의 보정 후의 게인값에 의거하여, 기록 대상의 촬상화상의 화이트 밸런스 설정을 분할 영역마다 실시한다.

이상 설명한 바와 같이, 화이트 밸런스 게인 산출부(15)의 처리에서는 실시형태 1과 마찬가지로, 분할 영역 마다의 휘도 비율이 필요하게 된다. 이와 같은 휘도 비율의 연산 등을 실시하도록, 휘도 취득부(17)가 설치되어 있다.

즉, 휘도 취득부(17)는 비발광시 스루화상 및 발광시 촬상화상의 데이터로부터, 휘도값을 분할 영역 단위로 취득한다.

여기에서, 분할 영역은 복수의 화소로 구성되기 때문에, 분할 영역의 휘도란, 해당 분할 영역을 구성하는 각 화소의 휘도에 의거하여 연산된 값, 예를 들면, 각 화소의 휘도의 평균값을 의미하는 것으로 한다.

휘도 취득부(17)에는 휘도 비교부(41)가 설치되어 있다.

영역 번호 i(i는, 분할 총수 이하의 정의 정수값이며, 본 실시형태에서는 64 이하의 정의 정수값)의 휘도 비율(Pi)은 다음의 식(9)에 의해 구해진다.

식(9)에 있어서, Yi´는 발광시 촬상화상의 i번째의 분할 영역의 휘도를 나타내고 있다. Yi는 비발광시 스루화상의 i번째의 분할 영역의 휘도를 나타내고 있다.

본 실시형태에서는 이와 같은 식(9)에 의한 휘도 비교부(41)의 연산 결과는 예를 들면 도 4에 나타내는 테이블 형식으로 기억부(24)에 기억되어, 관리된다.

제 2 실시형태에서는 이와 같이 구해진 분할 영역 마다의 휘도 비율에 의거하여 각 분할 영역이, 비조사 영역 또는 조사 영역으로 분류된다. 구체적으로는 예를 들면 본 실시형태에서는 스트로브의 빛이 쪼여지고 있을 때의 휘도 비율 중 최저치로서 적절한 값이 임계값으로서 미리 설정되어 있다. 이 경우, 휘도 비율 (Pi)이 임계값 이하라면, i번째의 분할 영역은 비조사 영역으로 분류되고, 한편, 휘도 비율(Pi)이 임계값을 넘고 있다면, i번째의 분할 영역은 조사 영역으로 분류된다.

다음으로, 휘도 비교부(41)는 전분할 영역 마다의 휘도 비율을, 비율이 낮은 순번으로 솔트한다.

그리고, 휘도 비교부(41)는 휘도가 낮은 순번으로 솔트된 각 분할 영역의 휘도 비율 중, 하위 2 내지 4번째의 휘도 비율의 평균값을 상술한 평균 휘도 비율(C)로서 구한다.

구체적으로는, 휘도 비교부(41)는 실시형태 1과 마찬가지로 식(6)을 연산함으로써, 평균 휘도 비율(C)을 구한다.

여기에서 실시형태 2에서는 식(6)에 있어서, Ct2 내지 Ct4의 각각은 하위 2 내지 4번째의 각각의 휘도 비율을 나타내고 있다.

예를 들면, 전분할 영역의 휘도 비율(C1=Y1´/Y1, C2=Y2´/Y2, C3=Y3´/Y3, …, C8=Y8´/Y8, …, C22=Y22´/Y22, …, C64=Y64´/Y64) 중, 하위 4번째까지의 휘도 비율이 다음과 같았다고 한다. 즉, 64번째 (아래로부터 1번째):Ct1=C1=Y1´/Y1, 63번째 (아래로부터 2번째):Ct=C2=Y2´/Y2, 62번째 (아래로부터 3번째):Ct3=C8=Y8´/Y8, 61번째 (아래로부터 4번째):Ct4=C22=Y22´/Y22 이었던 것으로 하는, 이 경우, 평균 휘도 비율(C)은 실시형태 1과 마찬가지로, 식(7)에 의해 산출된다.

이상, 도 3 및 도 4를 참조하여 본 실시형태 2의 도 1의 촬상장치(1)의 기능적 구성 중, 도 2의 스텝 S4의 화이트 밸런스 처리를 실행하기 위한 기능적 구성에 대해 설명했다.

도 6은 도 1의 촬상장치(1)가 실행하는 도 2의 스트로브 촬상처리 중, 스텝 S4의 화이트 밸런스 처리의 흐름의 상세를 설명하는 흐름도이다.

스텝 S31에 있어서, 화상 분할부(16)는 비발광시 스루화상과 발광시 촬상화상의 각 데이터를 8×8의 분할 영역으로 각각 분할하고, 휘도 취득부(17)는 각 분할 영역의 휘도값을 취득한다.

스텝 S32에 있어서, 휘도 비교부(41)는 비발광시 스루화상의 휘도값과 발광시 촬상화상의 휘도값의 휘도 비율을 분할 영역마다 각각 산출한다.

상세하게는, 휘도 비교부(41)는 상술한 식(6)을 연산함으로써, i번의 분할 영역에 대한 휘도 비율(Pi)을 산출한다. 이와 같은 식(6)의 연산이 1 내지 64번의 각각에 대해서 실행되어 휘도 비율 P1 내지 P64가 산출된다.

본 실시형태에서는 이와 같은 식(6)에 의한 휘도 비교부(41)의 연산 결과는 예를 들면 도 4에 나타내는 테이블 형식으로 기억부에 분할 영역마다 기억되어, 관리된다.

스텝 S33에 있어서, 화이트 밸런스 게인 산출부(15)는 비발광시 스루화상과 발광시 촬상화상의 각 데이터에 대해서, 분할영역 마다의 RGB 성분의 게인값을 설정한다.

스텝 S34에 있어서, 화이트 밸런스 게인 산출부(15)는 처리 대상의 영역 번호 i로서 「1」을 설정한다(i=1). 즉, 본 실시형태에서는 후술하는 스텝 S35 내지 스텝 S40까지의 처리 대상이 되는 분할영역이 분할번호의 순번으로 차례차례 설정된다. 이 때문에, 처리 대상의 분할 번호 i로서 먼저 「1」이 설정된다.

스텝 S35에 있어서, 화이트 밸런스 게인 산출부(15)는 휘도 비율(Pi)이 임계값을 넘고 있는지 아닌지를 판정한다(Pi＞임계값).

휘도 비율(Pi)이 임계값보다 높은 경우란, 상술한 바와 같이, 처리 대상의 영역 번호 i의 분할 영역이 조사 영역인 경우를 의미한다. 이와 같은 경우, 스텝 S35의 처리에서 YES라고 판정되어, 처리는 스텝 S36에 진행된다.

스텝 S36에 있어서, 화이트 밸런스 게인 산출부(15)는 휘도 비율(Pi)에 의거하여 영역 번호 i의 분할 영역(조사 영역)의 RGB 성분의 게인값을 보정한다.

이에 따라, 처리는 스텝 S41로 진행된다. 다만, 스텝 S41 이후의 처리에 대해서는 후술한다.

이에 대해서, 휘도 비율(Pi)이 임계값 이하인 경우란, 상술한 바와 같이, 처리 대상의 영역 번호 i의 분할 영역이 비조사 영역인 경우를 의미한다. 이와 같은 경우, 스텝 S35의 처리에서 NO라고 판정되어, 처리는 스텝 S37에 진행된다.

그리고, 다음과 같은 스텝 S37 내지 S40의 처리가 실행되어, 영역 번호 i의 분할 영역의 RGB 성분의 게인값이 보정된다.

즉, 스텝 S37에 있어서, 휘도 비교부(41)는 스텝 S32의 처리에서 연산된 전휘도 비율 P1 내지 P64 중, 저위 2 내지 4번째의 휘도 비율에 의거하여 평균 휘도 비율(C)을 산출한다.

구체적으로는, 상술한 식(6)에 따라 평균 휘도 비율(C)이 연산된다.

또한 스텝 S37의 처리는 스텝 S35의 처리에서 첫 회에 NO라고 판정된 후에 1회만 실행하면 충분하고, 그 이후, 생략해도 상관없다.

스텝 S38에 있어서, 화이트 밸런스 게인 산출부(15)는 스텝 S33의 처리에서 설정된 게인값 중, 번호 i의 분할 영역(조사 영역)의 RGB 성분의 게인값을 YUV 변환값으로 변환한다.

상세하게는, 화이트 밸런스 게인 산출부(15)는 상술한 식(1)에 따라서 영역 번호 i의 분할 영역(비조사 영역)의 YUV 변환값이 구해진다.

스텝 S39에 있어서, 화이트 밸런스 게인 산출부(15)는 스텝 S37의 처리에서 구한 평균 휘도 비율(C)에 의거하여 발광시 촬상화상의 영역 번호 i의 분할 영역(비조사 영역)의 YUV 변환값 중, Y성분의 값을 보정함으로써, 웨이티드한 Y성분의 값을 산출한다.

상세하게는 화이트 밸런스 게인 산출부(15)는 스텝 S37의 처리에서 산출한 평균 휘도 비율(C)을 계수로서 이용하는 상술한 식(3)에 따라, 발광시 촬상화상의 영역 번호 i의 분할 영역(비조사 영역)의 YUV 변환값 중, Y성분의 게인(LY)을 게인 (LY´)으로 보정한다.

이와 같이, 비발광시 스루화상과 발광시 촬상화상의 각 분할 영역 중, 비조사 영역의 휘도 비율을 종합적으로 고려하여, 발광시 촬상화상의 영역 번호 i의 분할 영역(비조사 영역)의 YUV 변환값 중, Y성분의 게인(LY)이 보정되어, 보정 후의 Y성분의 게인(LY´)이 된다.

스텝 S40에 있어서, 화이트 밸런스 게인 산출부(15)는 영역 번호 i의 분할 영역(비조사 영역)에 대한, 웨이티드가 가미된 YUV 변환값을 RGB 성분의 게인값으로 역변환한다.

상세하게는, 화이트 밸런스 게인 산출부(15)는 상술한 식(4)에 따라서, 발광시 촬상화상의 영역 번호 i의 분할 영역(비조사 영역) 영역에 있어서의 RGB 성분의 역변환 후의 게인값을 구한다.

즉, 화이트 밸런스 게인 산출부(15)는 스텝 S39의 처리에서 웨이티드가 부가된, 발광시 촬상화상의 번호 i의 분할 영역(비조사 영역)의 YUV 변환값(LY´, LU, LV)을 R성분의 게인(LRα)과, G성분의 게인(LGα)과, B성분의 게인(LBα)으로 각각 역변환한다.

이와 같이 하여, 발광시 촬상화상의 영역 번호 i의 분할 영역의 RGB 성분의 게인값은 해당 분할 영역이 조사 영역의 경우(스텝 S35의 처리에서 YES라고 판정된 경우)에는 스텝 S36의 처리에 의해, 해당 분할 영역이 비조사 영역의 경우(스텝 S35의 처리에서 NO라고 판정된 경우)에는 스텝 S37 내지 S40의 처리에 의해, 각각 보정된다.

이에 따라 처리는 스텝 S41로 진행된다.

스텝 S41에 있어서, 화이트 밸런스 게인 산출부(15)는 영역 번호 i를 1만큼 증가한다(i=i＋1).

스텝 S42에 있어서, 화이트 밸런스 게인 산출부(15)는 영역 번호 i가 64를 넘었는지 아닌지를 판정한다.

영역 번호 i가 64를 넘고 있지 않은 경우, 즉, 발광시 촬상화상의 RGB 성분의 게인값이 보정되어 있지 않은 분할 영역이 존재하는 경우, 스텝 S42에 있어서 NO라고 판정되어, 처리는 스텝 S35로 되돌려지고 그 이후의 처리가 반복된다.

즉, 영역 번호 1 내지 64의 분할 영역의 각각에 대하여, 스텝 S35 내지 S42의 루프 처리가 그때마다 실시된다. 이 경우, 조사 영역으로 분류되는 분할 영역(스텝 S35의 처리에서 YES라고 판정되는 분할 영역)에 대해서는 스텝 S36의 처리에 의해, 발광시 촬상화상의 RGB 성분의 게인값이 보정된다. 이에 대해, 비조사 영역으로 분류되는 분할 영역(스텝 S35의 처리에서 NO라고 판정되는 분할 영역)에 대해서는 스텝 S37 내지 S40의 처리에 의해, 발광시 촬상화상의 RGB 성분의 게인값이 보정된다.

그리고, 최후의 분할 영역, 즉 영역 번호 64의 분할 영역에 대한 스텝 S41의 처리가 실행되면, 영역 번호 i는 65가 되어, 64를 넘는다. 따라서, 다음의 스텝 S42에 있어서 YES라고 판정되어, 처리는 스텝 S43으로 진행된다.

스텝 S43에 있어서, 화이트 밸런스 게인 산출부(15)는 분할 영역마다, 조사 영역에 대해서는 스텝 S36의 처리에서 보정된 RGB 성분의 게인값에 의거하여, 비조사 영역에 대해서는 스텝 S37 내지 S40의 처리로 보정된 RGB 성분의 게인값에 의거하여, 발광시 촬상화상의 화이트 밸런스를 설정한다.

이에 따라, 화이트 밸런스 처리는 종료된다. 즉, 도 2의 스텝 S4의 처리는 종료되고, 처리는 스텝 S5로 진행된다.

이상 설명한 바와 같이, 촬상장치(1)는 발광부(21)와, 촬상부(20)와, CPU(11)와, 화이트 밸런스 게인 산출부(15)와, 화상 분할부(16)와, 휘도 산출부와, 휘도 비교부(41)를 구비한다.

CPU(11)는 유저의 조작에 의해, 발광부(21)에 의한 발광에 의해 밝게 되었을 때의 화상인 발광시 촬상화상과 해당 발광부(21)에 의한 발광이 이루어지고 있지 않을 때의 화상인 비발광시 스루화상을 촬상부(20)에 촬상하도록 제어한다.

화이트 밸런스 게인 산출부(15)는 촬상 시에 설정된 발광시 촬상화상 및 비발광시 스루화상의 화이트 밸런스를 조정하기 위한 각 색 성분의 게인값을 각각 산출한다.

화상 분할부(16)는 촬상부(20)에 의해 촬상된 촬상영역을 복수의 영역으로 분할한다.

휘도 취득부(17)는 화상 분할부(16)에 의해 각각 분할된 영역의 발광시 촬상화상과 비발광시 스루화상에 대해서, 화상 분할부(16)에 의해 분할된 복수 영역의 휘도값을 각각 산출한다.

휘도 비교부(41)는 휘도 취득부(17)에 의해 산출된 발광시 촬상화상 영역의 휘도값을 비발광시 스루화상 영역의 휘도값으로 나눈 값을 상대값으로서 각각 산출한다.

화이트 밸런스 게인 산출부(15)는 휘도 비교부(41)에 의해 각각 산출된 상대값이 소정값 이하의 영역을 특정한다.

휘도 비교부(41)는 각각 산출된 상대값 중에서, 값이 낮은 상대값을 우선하여 복수 선택한다.

화이트 밸런스 게인 산출부(15)는 산출된 발광시 촬상화상 및 비발광시 스루화상의 각 색 성분의 값과 휘도 비교부(41)에 의해 선택된 복수의 상대값에 의거하여 발광시 촬상화상의 각 색 성분의 게인값을 보정한다.

또, 화이트 밸런스 게인 산출부(15)는 또한 변환된 화소 파라미터의 세트 (YUV 변환값)에 의거하여, RGB 성분의 게인값을 보정한다.

또, 상술한 실시형태에서는 휘도 비율(Pi)을 상술한 식(5)에 의해 구했지만 이것에 한정되지 않는다. 예를 들면 휘도 비율(Pi)은 다음의 식(8)에 의해 구할 수 있다. 이 경우에는, 평균 휘도 비율(C)에는 상위 2 내지 4번째의 각 휘도 비율 (Pi)이 이용된다.

또, 상술한 실시형태에서는 평균 휘도 비율을 하위 2에서부터 4번째의 휘도 비율을 이용했지만 이것에 한정되지 않는다. 평균 휘도 비율에 이용하는 휘도 비율은 적어도, 전휘도 비율에 있어서, 상대적으로 낮은 값으로 되어 있는 것이면 된다.

또, 상술한 실시형태에서는 최하위의 휘도 비율을 이용하지 않도록 구성했지만, 이것에 한정되지 않는다. 최하위의 휘도 비율이 다른 휘도 비율에 비해 월등히 낮은 값 등의 불안정한 값이 아니면, 최하위의 휘도 비율을 이용하도록 구성해도 된다.

또, 상술한 실시형태에서는, 화상의 분할은 비발광시 스루화상 및 발광시 촬상화상의 각 데이터를, 복수의 영역, 본 실시형태에 있어서는 도 3에 나타내는 바와 같이 8×8의 64 분할 영역의 각 데이터에 각각 분할했지만 이것에 한정되지 않는다. 화상의 분할은 복수의 영역으로 분할하면 되고, 분할수나 분할 영역의 결정은 적절히 결정 가능하다.

또, 상술한 실시형태에서는 촬상부(20)에 의해 촬상한 발광시 촬상화상 및 비발광시 스루화상을 이용하여 화이트 밸런스 처리를 실행했지만, 이것에 한정되지 않는다. 화이트 밸런스 처리는 예를 들면, CPU(11)나 화상 처리부(14)에 의해 외부로부터 취득한 촬상화상 및 스루화상을 이용해도 된다. 또, 상술한 실시형태에서는 발광시 촬상화상과 비발광시 스루화상을 이용해도 화이트 밸런스 처리를 실행했지만 이것에 한정되지 않는, 예를 들면, 발광시 촬상화상과 비발광시 촬상화상을 이용하여 화이트 밸런스 처리를 실행해도 된다.

또, 상술한 실시형태에서는 본 발명이 적용되는 전자 장치는 디지털카메라 등의 촬상장치(1)를 예로서 설명했지만, 특히 이것으로 한정되지 않는다. 본 발명은 상술한 화이트 밸런스 처리를 실행 가능한 전자기기 일반적으로 적용할 수 있다. 구체적으로는, 예를 들면, 본 발명은 노트형의 퍼스널 컴퓨터, 비디오 카메라, 휴대형 네비게이션 장치, 휴대전화장치, 휴대용 게임기, WEB 카메라 등에 적용 가능하다.

상술한 일련의 처리는 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다. 또 예를 들면, 상술한 일련의 처리는 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다. 환언하면, 도 1의 하드웨어의 구성은 예시에 불과하고, 특별히 한정되지 않는다. 즉, 상술한 일련의 처리를 전체적으로 실행할 수 있는 기능이 촬상장치(1)에 구비되어 있으면 충분하고, 이 기능을 실현하기 위해서 어떠한 기능 블록을 이용하는지는 특히 도 1의 예에 한정되지 않는다. 또, 1개의 기능 블록은 하드웨어 단체로 구성해도 되고, 소프트웨어 단체로 구성해도 되며, 그러한 조합으로 구성해도 된다.

일련의 처리를 소프트웨어에 의해 실행시키는 경우에는, 그 소프트웨어를 구성하는 프로그램이, 컴퓨터 등에 네트워크나 기록매체로부터 인스톨된다. 컴퓨터는 전용의 하드웨어에 넣어지고 있는 컴퓨터이어도 된다. 또, 컴퓨터는 각종의 프로그램을 인스톨함으로써, 각종의 기능을 실행하는 것이 가능한 컴퓨터, 예를 들면 범용의 퍼스널 컴퓨터이어도 된다.

이와 같은 프로그램을 포함하는 기록매체는 유저에게 프로그램을 제공하기 위해서 장치 본체와는 별도로 배포되는 도 1의 착탈 가능한 미디어(31)에 의해 구성될 뿐만 아니라, 장치 본체에 미리 넣어진 상태에서 유저에게 제공되는 기록매체 등으로 구성된다. 착탈 가능한 미디어(31)는 예를 들면, 자기 디스크(프로피 디스크를 포함한다), 광디스크, 또는 광자기 디스크 등에 의해 구성된다. 광디스크는 예를 들면, CD-ROM(Compact Disk-Read Only Memory), DVD(Digital Versatile Disk) 등에 의해 구성된다. 광학 자기 디스크는 MD(Mini-Disk) 등에 의해 구성된다. 또, 장치 본체에 미리 넣어진 상태에서 유저에게 제공되는 기록매체는 예를 들면, 프로그램이 기록되어 있는 도 1의 ROM(12)이나, 도 1의 기억부(24)에 포함되는 하드 디스크 등으로 구성된다.

또한 본 명세서에 있어서, 기록매체에 기록되는 프로그램을 기술하는 스텝은 그 순서를 따라 시계열적으로 실시되는 처리는 물론, 반드시 시계열적으로 처리되지 않아도, 병렬적 혹은 개별적으로 실행되는 처리도 포함하는 것이다.

1: 촬상장치 11: CPU
15: 화이트 밸런스 게인 산출부 16: 화상 분할부
17: 휘도 취득부 20: 촬상부
21: 발광부 41: 휘도 비교부

Claims

발광 수단과,
촬상 수단과,
상기 발광 수단의 발광시에 상기 촬상 수단에 의해 촬상된 제 1 화상과 상기 발광 수단의 비발광시에 상기 촬상 수단에 의해 촬상된 제 2 화상을 취득하는 화상 취득 수단과,
상기 화상 취득 수단에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 수단과,
상기 화상 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상을 복수의 영역으로 분할하는 분할 수단과,
상기 분할 수단에 의해 복수의 영역으로 분할된 제 1 화상 및 제 2 화상의 휘도값을, 상기 복수의 영역마다 각각 취득하는 휘도값 취득 수단과,
상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 수단과,
상기 산출 수단에 의해 각각 산출된 상대값 중에서 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값을 선택하는 선택 수단과,
상기 선택 수단에 의해 선택된 특정의 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 수단을 구비한 것을 특징으로 하는 촬상장치.
제 1 항에 있어서,
상기 산출 수단은 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값을 상기 제 2 화상의 영역 마다의 휘도값으로 나눈 값을 상기 상대값으로서 산출하고,
상기 선택 수단은 상기 산출 수단에 의해 각각 산출된 상대값 중에서, 값이 높은 쪽으로부터 복수의 상대값을 선택하며,
상기 보정 수단은 상기 게인값 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상의 각 색 성분의 게인값과 상기 선택 수단에 의해 선택된 특정의 복수의 상대값에 의거하여 상기 제 1 화상의 각 색 성분의 게인값을 보정하는 것을 특징으로 하는 촬상장치.
제 1 항에 있어서,
상기 산출 수단에 의해 각각 산출된 상대값이 소정값 이하의 영역을 특정하는 특정 수단을 추가로 구비하고,
상기 산출 수단은 상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값을 상기 제 2 화상의 영역 마다의 휘도값으로 나눈 값을 상기 상대값으로서 산출하고,
상기 선택 수단은 상기 산출 수단에 의해 각각 산출된 상대값 중에서, 값이 낮은 쪽으로부터의 복수의 상대값을 선택하며,
상기 보정 수단은 상기 선택 수단에 의해 선택된 특정의 복수의 상대값에 의거하여 상기 특정 수단에 의해 특정된 상대값에 대응하는 제 1 화상의 각 색 성분의 게인값을 보정하는 것을 특징으로 하는 촬상장치.
제 1 항에 있어서,
상기 화상 취득 수단에 의해 취득된 제 1 화상 및 제 2 화상의 각 색 성분을 다른 색 공간에 있어서의 적어도 휘도 정보를 포함하는 화소 파라미터의 세트로 변환하는 변환 수단을 추가로 구비하고,
상기 보정 수단은 상기 변환 수단에 의해 변환된 화소 파라미터의 세트에 의거하여 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 추가로 보정하는 것을 특징으로 하는 촬상장치.
발광에 의해 밝게 된 제 1 화상과 발광에 의해 밝게 되어 있지 않은 제 2 화상을 취득하는 화상 취득 스텝과,
상기 화상 취득 스텝에서 취득된 상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 스텝과,
상기 화상 취득 스텝의 처리에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상을 복수의 영역으로 각각 분할하는 분할 스텝과,
상기 분할 스텝에서 복수의 영역으로 분할된 상기 제 1 화상 및 상기 제 2 화상의 휘도값을 상기 복수의 영역마다 취득하는 휘도값 취득 스텝과,
상기 휘도값 취득 스텝에서 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 스텝과,
상기 산출 스텝에서 각각 산출된 상대값 중에서 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값을 우선하여 선택하는 선택 스텝과,
상기 선택 스텝에서 선택된 특정의 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 스텝을 포함하는 것을 특징으로 하는 화이트 밸런스 조정 방법.
컴퓨터가 판독 가능한 기록 매체에 있어서,
발광에 의해 밝게 되었을 때에 촬상된 제 1 화상과 발광이 이루어져 있지 않을 때에 촬상된 제 2 화상을 취득하는 화상 취득 수단,
상기 제 1 화상 및 상기 제 2 화상의 각 색 성분의 게인값을 각각 취득하는 게인값 취득 수단,
상기 화상 취득 수단에 의해 취득된 상기 제 1 화상 및 상기 제 2 화상을 복수의 영역으로 분할하는 분할 수단,
상기 분할 수단에 의해 복수의 영역으로 분할된 상기 제 1 화상 및 상기 제 2 화상의 휘도값을, 상기 복수의 영역마다 취득하는 휘도값 취득 수단,
상기 휘도값 취득 수단에 의해 취득된 상기 제 1 화상의 영역 마다의 휘도값과 상기 제 2 화상의 영역 마다의 휘도값의 상대값을 각각 산출하는 산출 수단,
상기 산출 수단에 의해 각각 산출된 상대값 중에서 값이 높은 쪽 또는 값이 낮은 쪽으로부터 복수의 상대값을 우선하여 선택하는 선택 수단,
상기 선택 수단에 의해 선택된 특정의 복수의 상대값에 의거하여 상기 제 1 화상의 적어도 일부 영역의 각 색 성분의 게인값을 보정하는 보정 수단으로서의 기능을 상기 컴퓨터에 실현시키는 프로그램을 기록한 것을 특징으로 하는 기록 매체.