JP2005347811A - White balance correction apparatus and white balance correction method, program and electronic camera apparatus - Google Patents

White balance correction apparatus and white balance correction method, program and electronic camera apparatus Download PDF

Info

Publication number
JP2005347811A
JP2005347811A JP2004161705A JP2004161705A JP2005347811A JP 2005347811 A JP2005347811 A JP 2005347811A JP 2004161705 A JP2004161705 A JP 2004161705A JP 2004161705 A JP2004161705 A JP 2004161705A JP 2005347811 A JP2005347811 A JP 2005347811A
Authority
JP
Grant status
Application
Patent type
Prior art keywords
pixel
coefficient
correction
white balance
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004161705A
Other languages
Japanese (ja)
Other versions
JP4433883B2 (en )
Inventor
Shohei Sakamoto
昇平 坂本
Original Assignee
Casio Comput Co Ltd
カシオ計算機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date

Links

Images

Abstract

PROBLEM TO BE SOLVED: To provide a white balance correction apparatus or the like capable of applying excellent white balance correction to an imaged image or the like in a way of not causing color deviation over the entire region of the image or the like.
SOLUTION: An image 101 is divided into a plurality of coefficient blocks 111, R, G, B values of each pixel are individually integrated by each coefficient block 111, and a correction coefficient with respect to a center pixel 112 of each coefficient block 111 is calculated on the basis of the result above. Correction coefficients of a plurality of non-center pixels 122 except the center pixel 121 are individually calculated from the correction coefficients of a plurality of the center pixels 121 existing around the non-center pixels 122 through linear interpolation on the basis of the distance (x, 1-x, y, 1-y) with respect to each center pixel 121. The white balance of each pixel is adjusted by multiplying the correction coefficient acquired by each pixel with all pixels comprising the center pixels 121 and the non-center pixels 122. Even when emission areas of different kinds of light sources exist in the image, the white balance suitable for the entire region of the image can be ensured without causing color deviation.
COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、例えばデジタルカメラに用いて好適なホワイトバランス補正装置及びホワイトバランス補正方法、プログラム、電子カメラ装置に関するものである。 The present invention is, for example, suitable white balance correction apparatus and white balance correction method using the digital camera, a program, an electronic camera device.

従来、デジタルカメラ等における撮像した画像に対するホワイトバランス補正においては、画面全体に同一のホワイトバランス補正量を設定する方法が一般的である。 Conventionally, in the white balance correction for the image taken in a digital camera or the like, a method of setting the same white balance correction on the entire screen it is common. しかし、画面内の被写体に複数の光源照射があり、その照射エリアがある程度分離されているような場合、例えば蛍光灯下の被写体に局所的に電球光源照射があったり、蛍光灯下でストロボ撮影時に、主たる被写体にはストロボ光が十分照射されているが、距離が離れていてストロボ光の届かない領域や、ストロボ光量が少なくなる周辺部分が存在するとき等のように、画面内に2種類、あるいはそれ以上の光源に支配される分離領域がある場合には、画面全域に適した補正をかけることが難しい。 However, there are a plurality of light sources irradiating the subject in the screen, in which case the irradiation area as being somewhat separated, or have locally bulb light irradiation, for example, in a fluorescent lamp object, flash photography in fluorescent light sometimes, although the flash light for main subject is sufficiently irradiated, the distance area or out of reach of the flash light away, as such when the peripheral portion of the flash exposure is reduced there, two in the screen , or if there is a separation region is dominated by the more light sources, it is difficult to make a correction appropriate for the entire screen.

これを解消するものとして、例えば下記特許文献1には、入力した画像を複数のブロック領域に分割し、ブロック毎に異なるホワイトバランス補正量を設定して、ホワイトバランス補正を施す方法が記載されている。 As to solve this problem, for example, the following Patent Document 1 divides an image inputted into a plurality of block areas, set a white balance correction amount different for each block, is described a method of applying a white balance correction there.
特開2002−271638号公報 JP 2002-271638 JP

しかしながら、上記のようにブロック毎に異なる補正量によるホワイトバランスを施す方法においては、互いに隣接するブロック同士の境界部分に色調の違い(色ずれ)が不可避的に生じ、結果的に画質が低下するという問題があった。 However, in the method of applying the white balance according to different correction amount for each block as described above, the color tone difference in the boundary portion of the block adjacent to each other (color deviation) inevitably occur, resulting in the image quality is degraded there is a problem in that.

本発明は、かかる従来の課題に鑑みてなされたものであり、撮像した画像等の全域に亙って色ずれが生じない良好なホワイトバランス補正を施すことができるホワイトバランス補正装置及びホワイトバランス補正方法、プログラム、電子カメラ装置を提供することを目的とする。 The present invention, such conventional has been made in view of the problems, white balance correction apparatus and white balance correction can be applied a good white balance correction which does not cause color shift over the entire area such as an image captured and an object method, a program, to provide an electronic camera device.

前記課題を解決するため請求項1の発明にあっては、画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の係数取得手段と、前記複数の注目画素の間に位置する前記画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の係数取得手段と、前記画像の各画素のうち、前記注目画素に対しては前記第1の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施す補正手段とを備えたものとした。 In the invention of claim 1 for solving the above problems, a first coefficient obtaining means for obtaining individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the image, of the plurality of the pixel of interest obtaining a correction coefficient for white balance of the non-target pixel in the image located between, acquired by the first coefficient acquiring means, by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel a second coefficient obtaining unit that, among the pixels of the image, the applied white balance correction based on the correction coefficient obtained by the first coefficient acquiring means with respect to the target pixel, the non-target pixel It is against was that a correcting means for performing white balance correction based on the correction coefficient obtained by the second coefficient obtaining unit.

かかる構成においては、画像が、画素毎に取得された補正係数に基づき画素毎にホワイトバランスを調整されることにより、画像内に異なる種類の光源の照射エリアが存在する場合においても、画像の全域に適したホワイトバランス補正を行うことができる。 In this configuration, an image is, by being white balance adjustment for each pixel based on the correction coefficients obtained for each pixel, when the irradiation area of ​​the different types of light sources in the image are also present, the entire area of ​​the image it is possible to perform the white balance correction suitable for. しかも、複数の注目画素の間に位置する非注目画素の補正係数が、非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得されるため、隣接する注目画素と非注目画素、又は隣接する非注目画素同士の間における画素毎の補正係数を滑らかに変化させることができる。 Moreover, the correction coefficient of the non-target pixel located between the plurality of the pixel of interest, to be acquired by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel, the target pixel adjacent and non-target pixel , or a correction coefficient for each pixel between the non-target adjacent pixels can be smoothly changed. 同時に、非注目画素の補正係数を画像に基づき直接取得する場合に比べ、ホワイトバランス補正に要するデータ処理量を削減することができる。 At the same time, compared with the case of directly acquired on the basis of the correction coefficient of the non-target pixel in the image, it is possible to reduce the amount of data processing required for the white balance correction.

また、請求項2の発明にあっては、前記複数の注目画素は、前記画像が分割された複数の係数ブロック毎に設定され、前記第1の係数取得手段は、複数の注目画素の各々の補正係数を、同一の係数ブロック内の全画素の色成分に基づき個別に取得するものとした。 Further, in the invention of claim 2, wherein the plurality of the pixel of interest, the image is set for each of a plurality of coefficients blocks divided, the first coefficient acquisition means of each of the plurality of the pixel of interest the correction factor was assumed to be acquired separately based on the color components of all pixels of the same coefficient block.

また、請求項3の発明にあっては、前記第1の係数取得手段は、画像内での位置によって異なる色情報を有する画素により構成される画像から前記複数の注目画素の補正係数を取得するものとした。 Further, in the invention of claim 3, wherein the first coefficient obtaining means obtains a pixel having the different color information by the position in the image from the image formed a correction coefficient of the plurality of the pixel of interest It was the thing.

かかる構成においては、複数の注目画素の補正係数を取得する際に扱うデータ処理量を削減することができる。 In such a configuration, it is possible to reduce the amount of data processing to be handled in obtaining a correction coefficient of a plurality of the pixel of interest.

また、請求項4の発明にあっては、前記第2の係数取得手段は、前記画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素からの距離に基づく直線補間によって取得するものとした。 Further, in the invention of claim 4, wherein the second coefficient obtaining means, a correction coefficient for white balance of the non-target pixel in the image, acquired by the first coefficient acquiring means, the non-target and it shall be obtained by linear interpolation based on the distance from the plurality of target pixels present around the pixel.

また、請求項5の発明にあっては、画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の工程と、前記複数の注目画素の間に位置する非注目画素におけるホワイトバランスの補正係数を、第1の工程で取得した、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の工程と、前記注目画素に対しては前記第1の工程によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の工程によって取得された補正係数に基づきホワイトバランス補正を施す第3の工程とを含む方法とした。 Further, in the invention of claim 5, a first step of obtaining individually the correction coefficient of the white balance of a plurality of the pixel of interest to be separated from each other in the image, no interest located between the plurality of the pixel of interest the correction coefficient of the white balance in the pixel, obtained in the first step, a second step of obtaining by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel to the pixel of interest the third step is subjecting the white balance correction based on the correction coefficient obtained by the first step, the for non target pixel subjected to white balance correction based on the correction coefficient obtained by the second step It was the method comprising the door.

かかる方法によれば、画像が、画素毎に取得された補正係数に基づき画素毎にホワイトバランスを調整されることにより、画像内に異なる種類の光源の照射エリアが存在する場合においても、画像の全域に適したホワイトバランス補正を行うことができる。 According to this method, images, by being white balance adjustment for each pixel based on the correction coefficients obtained for each pixel, when the irradiation area of ​​the different types of light sources in the image are also present, image it is possible to perform white balance correction suitable to whole. しかも、複数の注目画素の間に位置する非注目画素の補正係数が、非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得されるため、隣接する注目画素と非注目画素、又は隣接する非注目画素同士の間における画素毎の補正係数を滑らかに変化させることができる。 Moreover, the correction coefficient of the non-target pixel located between the plurality of the pixel of interest, to be acquired by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel, the target pixel adjacent and non-target pixel , or a correction coefficient for each pixel between the non-target adjacent pixels can be smoothly changed. 同時に、非注目画素の補正係数を画像に基づき直接取得する場合に比べ、ホワイトバランス補正に要するデータ処理量を削減することができる。 At the same time, compared with the case of directly acquired on the basis of the correction coefficient of the non-target pixel in the image, it is possible to reduce the amount of data processing required for the white balance correction.

また、請求項6の発明にあっては、画像処理機能を有する装置が有するコンピュータに、画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の処理と、前記複数の注目画素の間に位置する非注目画素におけるホワイトバランスの補正係数を、前記第1の処理で取得した、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の処理と、前記注目画素に対しては前記第1の処理によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の処理によって取得された補正係数に基づきホワイトバランス補正を施す第3の処理とを実行させるためのプログラムとした。 Further, in the invention of claim 6, the computer system has to have an image processing function, a first process of acquiring individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the image, the the correction coefficient of the white balance in the non-target pixel located between the plurality of the pixel of interest, acquired by the first process, to obtain by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel a second processing, the relative pixel of interest subjected to white balance correction based on the correction coefficient acquired by the first process, the correction above with respect to non-target pixel obtained by the second process and a program for executing a third process of performing the white balance correction based on the coefficient.

また、請求項7の発明にあっては、撮像手段により撮像した被写体画像を画像データとして記録媒体に記録する電子カメラにおいて、被写体画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の係数取得手段と、前記複数の注目画素の間に位置する被写体画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の係数取得手段と、被写体画像の各画素のうち、前記注目画素に対しては前記第1の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の係数取得手段によって取得された補正係 Further, in the invention of claim 7, an electronic camera for recording on a recording medium a subject image captured by the imaging means as the image data, the individual correction factors of the white balance of a plurality of the pixel of interest to be separated from each other in the object image a first coefficient obtaining means for obtaining a, a correction factor of the white balance of the non-target pixel in the subject image located between the plurality of the pixel of interest, obtained by the first coefficient acquiring means, the non-target a second coefficient obtaining means for obtaining by interpolation from the correction coefficient of the plurality of target pixels present around the pixel, among the pixels of the subject image, acquired by the first coefficient obtaining unit to the pixel of interest subjected to white balance correction based on the correction coefficients, the correction coefficient obtained by the second coefficient obtaining unit to the non-target pixel に基づきホワイトバランス補正を施す補正手段とを備えたものとした。 It was that a correcting means for performing white balance correction based on.

かかる構成においては、撮像手段により撮像された被写体画像の全画素が、画素毎に取得された補正係数に基づき画素毎にホワイトバランスを調整されることにより、被写体画像内に異なる種類の光源の照射エリアが存在する場合においても、被写体画像の全域に適したホワイトバランス補正を行うことができる。 In this configuration, all the pixels of the captured subject image by the imaging means, by being white balance adjustment for each pixel based on the correction coefficients obtained for each pixel, the irradiation of the different types of light sources in the object image even when the area is present, it is possible to perform white balance correction suitable to whole area of ​​the object image. しかも、複数の注目画素の間に位置する非注目画素の補正係数が、非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得されるため、隣接する注目画素と非注目画素、又は隣接する非注目画素同士の間における画素毎の補正係数を滑らかに変化させることができる。 Moreover, the correction coefficient of the non-target pixel located between the plurality of the pixel of interest, to be acquired by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel, the target pixel adjacent and non-target pixel , or a correction coefficient for each pixel between the non-target adjacent pixels can be smoothly changed. 同時に、非注目画素の補正係数を被写体画像に基づき直接取得する場合に比べ、ホワイトバランス補正に要するデータ処理量を削減することができる。 At the same time, compared with the case of obtaining the correction coefficient of the non-target pixel directly on the basis of the subject image, it is possible to reduce the amount of data processing required for the white balance correction.

以上のように本発明のホワイトバランス補正装置及びホワイトバランス補正方法においては、画像内に異なる種類の光源の照射エリアが存在する場合においても、画像の全域に適したホワイトバランス補正を行うことができる。 In the white balance correction apparatus and the white balance correcting method of the present invention as described above, when the irradiation area of ​​the different types of light sources in the image are also present, it is possible to perform white balance correction suitable to whole area of ​​the image . しかも、隣接する注目画素と非注目画素、又は隣接する非注目画素同士の間における画素毎の補正係数を滑らかに変化させることができるようにした。 Moreover, it was it possible to smoothly change the correction coefficient for each pixel between the non-target pixels to the target pixel and non-pixel of interest, or adjacent the adjacent. よって、撮像した画像等の全域に亙って色ずれが生じない良好なホワイトバランス補正を施すことが可能となる。 Therefore, it becomes possible to perform a good white balance correction which does not cause color shift over the entire area, such as images captured. 同時に、非注目画素の補正係数を画像に基づき直接取得する場合に比べ、ホワイトバランス補正に要するデータ処理量を削減することができるため、ホワイトバランス補正を高速に行うことができる。 At the same time, compared with the case of directly acquired on the basis of the correction coefficient of the non-target pixel in the image, it is possible to reduce the amount of data processing required for the white balance correction, it is possible to perform white balance correction at high speed.

特に、請求項3の発明においては、複数の注目画素の補正係数を取得する際に扱うデータ処理量を削減することができるようにした。 Particularly, in the invention of claim 3, which make it possible to reduce the amount of data processing to be handled in obtaining a correction coefficient of a plurality of the pixel of interest. よって、複数の注目画素の補正係数の取得に要する処理の全てをプログラム処理によって行う構成においては、複数の注目画素の補正係数を効率的に取得することができる。 Therefore, in the configuration that performs all processing required for the acquisition of the correction coefficient of the plurality of the pixel of interest by the program processing, it is possible to obtain the correction factors of a plurality of the pixel of interest efficiently.

また、本発明電子カメラ装置によれば、撮像した被写体画像の全域に亙って色ずれが生じない良好なホワイトバランス補正を施すことが可能となり、また、それを高速に行うことができる。 Further, according to the present invention an electronic camera apparatus, it is possible to perform a good white balance correction that does not cause color shift over the entire region of the captured subject image, also, it can be performed at high speed.

以下、本発明の実施の形態を図にしたがって説明する。 It will be described below with reference to FIG. Embodiments of the present invention.
(実施形態1) (Embodiment 1)
図1は、本発明の第1の実施の形態に係るデジタルカメラ1の概略構成を示すブロック図である。 Figure 1 is a block diagram showing the schematic configuration of a digital camera 1 according to a first embodiment of the present invention.

このデジタルカメラ1は、撮像素子であるCCD2により被写体を撮像し、撮像により取得した被写体画像をLCD(液晶表示装置)4に表示させるとともに、撮影操作に応じて、撮像した被写体画像を画像データに変換し画像メモリ5に記録する構成であるとともに、AE(自動露出制御)、AF(オートフォーカス)、AWB(オートホワイトバランス)の各機能を有している。 The digital camera 1 captures an image of an object by CCD2 an image pickup element, along with displaying the subject image acquired by the imaging to the LCD (liquid crystal display device) 4, according to the photographing operation, an object image captured in the image data converted with a structure to be recorded in the image memory 5, AE (automatic exposure control), AF (auto focus), has the functions of the AWB (auto white balance). なお、画像メモリ5は、カメラ本体に内蔵又は着脱自在なフラッシュメモリ等の不揮発性メモリである。 Note that the image memory 5 is a nonvolatile memory such as built-in or removable flash memory on the camera body.

CCD2は、感光部にベイヤー配列の原色フィルターが設けられたものであり、CCD2から出力されたアナログの撮像信号は、信号処理部3において各種の信号処理を施されて、最終的には輝度信号(Y信号)と色差信号(Cb信号、Cr信号)を含んだYUVデータ、すなわちデジタルの画像信号として出力される。 CCD2 is for primary color filter of Bayer array is provided in the photosensitive unit, analog image signal output from CCD2 is subjected to various signal processing in the signal processing unit 3, eventually luminance signal (Y signal) and color difference signals (Cb signal, Cr signal) YUV data including, that is, output as digital image signals.

信号処理部3から出力された画像信号は、撮影待機状態にあるときLCD4に送られて被写体画像として表示される。 Image signal output from the signal processing unit 3 is sent to LCD4 when in the shooting standby state is displayed as a subject image. また、撮影操作時には、CPU6によりJPEG等の所定フォーマットに従い圧縮され画像メモリ5に記録される。 Further, when the photographing operation is recorded in the image memory 5 are compressed in accordance with a predetermined format such as JPEG by the CPU 6. 画像メモリ5に記録された圧縮後の画像データは、必要に応じCPU6により読み出され、いったん伸張された後LCD4において静止画像、或いは動画像として再生表示される。 The compressed image data recorded in the image memory 5 is read by the CPU6 necessary, be reproduced and displayed as a still picture or moving picture in LCD4 after being temporarily decompressed.

また、デジタルカメラ1は、CPU6が上記画像データの圧縮・伸張、及び装置全体の制御に必要とする各種の制御プログラムが記録されたROM7と、CPU6の作業用メモリであるRAM8、キー入力部9、レンズ駆動部10を有している。 The digital camera 1, CPU 6 compression and decompression of the image data, and the ROM7 which various control programs are recorded that required for control of the entire apparatus, a working memory of CPU 6 RAM 8, the key input unit 9 , and a lens driving unit 10. ROM7には、CPU6に後述するホワイトバランスの補正係数取得処理を行わせることにより、CPU6を本発明の第1の係数取得手段、第2の係数取得手段として機能させるためのプログラムが格納されている。 The ROM 7, by causing the correction coefficient acquiring process of the white balance to be described later CPU 6, the first coefficient acquiring means of the present invention the CPU 6, a program for functioning as a second coefficient obtaining means is stored .

キー入力部9は、シャッターキーや、動作モードの切り替えに使用されるモード切替キー等からなり、キー操作に応じた操作信号をCPU6へ出力する。 The key input unit 9, and a shutter key, made from the mode switch key or the like used in the switching of the operation mode, and outputs an operation signal corresponding to key operation to the CPU 6. レンズ駆動部10は、CCD2の前面に配置されたフォーカスレンズを含む光学系を光軸方向に駆動するモーターや、それを制御するためのドライバー等から構成され、AF制御時におけるCPU6からの指令に基づきレンズ位置を変化させる。 The lens driving unit 10 is an optical system including a focus lens disposed in front of the CCD2 motor and driven in the optical axis direction, from the driver or the like to control it, to a command from the CPU6 during AF control changing the lens position based.

図2は、前述した信号処理部3の詳細を示すブロック図である。 Figure 2 is a block diagram showing the details of the signal processing section 3 described above. 信号処理部3は、CCD2から出力されるアナログの撮像信号が入力するアナログ処理部11と、黒レベル調整部12、色補間部13、計測部14、ホワイトバランス調整部15、ガンマ補正部19、フィルタ処理部20、YUV変換処理部21の各部から構成されている。 The signal processing unit 3 includes an analog processing unit 11 for inputting the analog image pickup signal outputted from the CCD 2, the black level adjusting unit 12, a color interpolation section 13, the measuring unit 14, a white balance adjustment unit 15, a gamma correction unit 19, and a each part of the filter processing section 20, YUV conversion processing unit 21.

アナログ処理部11は、CCD2から出力された撮像信号に含まれるCCD2の駆動ノイズを減少させる相関二重サンプリング回路(CDS回路)と、ノイズ低減後における信号のゲインを調整する自動利得制御回路(AGC回路)、ゲイン調整後の信号をデジタル信号に変換するA/D変換器を含み、CCD2から入力したアナログの撮像信号をデジタルの画像信号、すなわちベイヤーデータに変換する。 Analog processing unit 11 includes a correlated double sampling circuit for reducing the CCD2 of driving noise included in imaging signals output from CCD2 (CDS circuit), an automatic gain control circuit (AGC for adjusting the gain of the signal after noise reduction circuit), the signal after the gain adjustment includes an a / D converter for converting the digital signal, converts the analog image signal input from CCD2 digital image signal, i.e., Bayer data. 黒レベル調整部12は、デジタル化された画像信号を所定の黒レベルにクランプする。 Black level adjusting unit 12 clamps the digitized image signal to a predetermined black level.

色補間部13は、黒レベル調整部12から入力したベイヤーデータからR,G,Bの色成分について色補間を行い画素毎のR,G,Bの色成分データを生成する。 Color interpolation section 13, R from Bayer data input from the black level adjusting unit 12, G, R of each pixel performs color interpolation for the color components B, G, generates the color component data of B. 計測部14は、黒レベル調整部12から入力した1画面分のベイヤーデータ(以下、ベイヤー画像という。)101について、図3(a)に示したように、1画面を縦16×横16に分割した計256の係数ブロック111を単位として、係数ブロック111毎にベイヤーデータのR,G,B値を個別に積分し、その結果をCPU6へ出力する。 Measurement unit 14, one screen of Bayer data input from the black level adjusting unit 12 (hereinafter, referred to as Bayer image.) For 101, as shown in FIG. 3 (a), one screen vertically 16 × 16 horizontal the coefficient block 111 of the divided total 256 units, the Bayer data R, G, and B values ​​by integrating separately for each coefficient block 111, and outputs the result to CPU 6.

ホワイトバランス調整部15は本発明の補正手段であって、色補間部13で生成されたRGBデータをストアするメモリ16と、メモリ16上のRGBデータを読み出し、画素毎にホワイトバランス補正係数(以下、単に補正係数という。)をかけて、前記ガンマ補正部19へ出力するゲイン乗算回路17と、その補正係数が設定される係数レジスタ18とから構成されている。 The white balance adjustment unit 15 a correction means of the present invention, a memory 16 for storing the RGB data generated by the color interpolation section 13, reads out the RGB data in the memory 16, the white balance correction coefficient for each pixel (hereinafter , simply referred to as correction coefficients.) over the gain multiplication circuit 17 to be outputted to the gamma correction unit 19, and a coefficient register 18 for the correction coefficient is set. 係数レジスタ18に設定される補正係数は、後述する処理によってCPU6から送られる各画素に対するR画素用のゲイン(Rゲイン係数)とB画素用のゲイン(Bゲイン係数)である。 Correction coefficient set in the coefficient register 18 is the gain for the R pixel for each pixel sent from the CPU6 by processing to be described later (R gain coefficient) and gain for B pixels (B gain coefficients).

ガンマ補正部19は、ホワイトバランス調整後のRGBデータに対するガンマ特性(階調特性)の補正を行い、フィルタ処理部20は、ガンマ補正後のRGBデータに種々のフィルタ処理を施し、YUV変換処理部21は、RGBデータから輝度信号(Y)と色差信号(U、V)からなるYUVデータを画素毎に生成し、CPU6やLCD4へ出力する。 Gamma correction unit 19 performs correction of the gamma characteristic (gradation characteristic) with respect to RGB data after the white balance adjustment, the filter processing unit 20 performs various filtering RGB data after gamma correction, YUV conversion processing unit 21, a YUV data composed of brightness signals from the RGB data (Y) and color difference signals (U, V) generated for each pixel, and outputs it to the CPU6 and LCD 4.

次に、以上の構成において、CCD2が駆動されている間にCPU6が実施するホワイトバランスの補正係数取得処理に関する手順を図4のフローチャートに従って説明する。 Next, in the above configuration will be described with reference to a flowchart of FIG. 4 the steps involved correction coefficient acquiring process of white balance CPU6 is performed while the CCD2 is driven.

CPU6は、前記計測部14から入力したベイヤー画像101(図3(a))における係数ブロック111毎のRGB積分結果に基づき、係数ブロック111毎にR,Bゲイン係数を演算し(ステップSA1)、演算した各々のR、Bゲイン係数(Rgain,Bgai)を、各々の係数ブロック111の中心画素(注目画素)121の補正係数としてホワイトバランス調整部15の係数レジスタ18に設定する(ステップSA2)。 CPU6, the Bayer image 101 inputted from the measuring unit 14 on the basis of the RGB integration result for each coefficient block 111 in (FIG. 3 (a)), calculates R, and B gain coefficients for each coefficient block 111 (step SA1), computed each R, B gain coefficients (Rgain, Bgai), and sets the coefficient register 18 of the white balance adjustment section 15 as the correction coefficient of the center pixel (target pixel) 121 of each of the coefficient block 111 (step SA2). 引き続き、中心画素以外の非中心画素(非注目画素)のR,Bゲイン係数を、その画素の周囲の複数の中心画素121のR、Bゲイン係数に基づき線形補間より算出する(ステップSA3)。 Continuing, R of non-centered pixels other than the center pixel (non-target pixel), the B gain coefficient, R of the plurality of center pixel 121 surrounding the pixel, is calculated from the linear interpolation based on the B gain coefficient (step SA3).

例えば図3(b)に示したように、非中心画素122のR,Bゲイン係数をR4,B4、周辺の係数ブロック111の4つの中心画素121のRゲイン係数をR0〜R3、Bゲイン係数をB0〜B3、非中心画素122の左上の中心画素121からの距離をx,y(ただし、各々の中心画素121間の距離を1に正規化した値)として以下の式によりR,Bゲイン係数を求める。 For example, as shown in FIG. 3 (b), R non center pixel 122, B gain coefficients R4, B4, and R gain factors of the four central pixels 121 near the coefficient block 111 R0 to R3, B gain coefficients the B0-B3, a distance from the upper left of the center pixel 121 in the non-center pixel 122 x, y (provided that the distance between each of the center pixel 121 normalized values ​​to 1) R by the following equation as a, B gain determine the coefficient.
R4=(1−x)(1−y)R0+x(1−y)R1+(1−x)yR2+xyR3 R4 = (1-x) (1-y) R0 + x (1-y) R1 + (1-x) yR2 + xyR3
B4=(1−x)(1−y)B0+x(1−y)B1+(1−x)yB2+xyB3 B4 = (1-x) (1-y) B0 + x (1-y) B1 + (1-x) yB2 + xyB3

また、画像内の最外周に位置する係数ブロック111内の他の非中心画素122については、自己のブロックの中心画素121と隣接するブロックの中心画素121のR,Bゲイン係数からの距離に基づく補間によって算出する。 Further, another non-center pixel 122 in the coefficient block 111 positioned in the outermost periphery in the image, R of the central pixel 121 of the block adjacent to the central pixel 121 of the self block, based on the distance from the B gain coefficient calculated by interpolation.

そして、算出した全ての非中心画素122のR,Bゲイン係数をホワイトバランス調整部15の係数レジスタ18に設定する(ステップSA4)。 Then, set R of all non-center pixel 122 calculated, the B gain coefficients in the coefficient register 18 of the white balance adjustment unit 15 (step SA4). なお、ステップSA3において前述した補間ができない非中心画素122、すなわちベイヤー画像101の四隅に位置する各係数ブロック111における、中心画素121と、ベイヤー画像101の隅と、ベイヤー画像101の縦及び横の辺を構成する2点の計4点を頂点とする正方形領域内の非中心画素122については、中心画素121と同一のR,Bゲイン係数を設定する。 It is not possible interpolation described above in step SA3 non center pixel 122, i.e. in each coefficient block 111 located at the four corners of the Bayer image 101, the center pixel 121, a corner of the Bayer image 101, the Bayer image 101 vertical and horizontal for non-center pixel 122 of the square area whose vertices four points two points constituting the edges, to set the same R and the center pixel 121, the B gain coefficients.

これにより、画像内の全ての画素に対するR,Bゲイン係数がホワイトバランス調整部15の係数レジスタ18に設定され、ホワイトバランス調整部15においては、前述したようにゲイン乗算回路17によって、各々に設定されたR,Bゲイン係数が画素毎にかけられることによりホワイトバランス調整が行われる。 Thus, R for all pixels in the image, B gain coefficients are set in the coefficient register 18 of the white balance adjustment unit 15, in the white balance adjustment unit 15, the gain multiplying circuit 17 as described above, set each been R, B gain coefficients white balance adjustment is performed by being subjected to each pixel.

以上のように本実施の形態においては、画素毎に取得した補正係数(R,Bゲイン係数)に基づき画素毎にホワイトバランス調整を行うことから、画面内の被写体に複数の光源照射があり、その照射エリアがある程度分離されているような場合であっても、照射エリア毎に適したホワイトバランスを確保することができる。 Above in the present embodiment as described above, the obtained correction coefficient for each pixel (R, B gain coefficients) to the white balance adjustment for each pixel based on, there are a plurality of light sources irradiating the subject in the screen, even when the irradiation area as being somewhat separated, it is possible to ensure the white balance for each illumination area. 同時に、各係数ブロック111の中心画素121の補正係数を係数ブロック111毎のRGB積分結果に基づき取得し、かつ非中心画素122の補正係数を周囲の複数の中心画素121のR,Bゲイン係数から補間により取得することから、隣接する係数ブロック111同士の境界部分、及び隣接する中心画素121と非中心画素122、又は隣接する非中心画素122同士の間における画素毎のR,Bゲイン係数が滑らかに変化することとなり、上記境界部分に色ずれが生じることがない。 At the same time, R the correction coefficient obtained on the basis of the RGB integration result for each coefficient block 111, and a plurality of center pixel 121 a correction coefficient of the surrounding non-center pixel 122 of the center pixel 121 in each coefficient block 111, the B gain coefficient from be obtained by interpolation, the boundary portion between the coefficient block 111 adjacent, and adjacent center pixel 121 and the non-center pixel 122, or R for each pixel between the non-center pixel 122 adjacent to each other, B gain coefficient smoother It will be changed to, causing no color deviation in the boundary portion. したがって、画面全域に極めて良好なホワイトバランス補正を施すことができる。 Therefore, it is possible to apply a very good white balance correction in the entire screen.

しかも、非中心画素122の補正係数を複数の中心画素121のR,Bゲイン係数から補間により取得することから、例えば全画素の補正係数をベイヤー画像101等から直接取得するような場合に比べて、ホワイトバランス補正に要するデータ処理量が少ないため、画素毎にホワイトバランス調整を行っても、ホワイトバランス補正を高速に行うことができる。 Moreover, R in the plurality of center pixel 121 a correction coefficient of a non-center pixel 122, by getting by interpolation from the B gain coefficients, for example compared to when the correction coefficients of all pixels as obtained directly from the Bayer image 101 etc. since the data processing amount required for the white balance correction is small, even if the white balance adjustment for each pixel, it is possible to perform white balance correction at high speed. また、CPU6にかかる処理負担を抑えることができる。 In addition, it is possible to suppress the processing burden on the CPU6.

なお、本実施の形態においては、各係数ブロック111における中心画素121のR,Bゲイン係数を、色補間前のベイヤー画像101を構成する画素のR,G,B毎の積分値に基づき取得したが、それを色補間後の各画素におけるR,G,Bの色成分毎の積分値に基づき取得してもよい。 In this embodiment, R of the center pixel 121 in each coefficient block 111, the B gain coefficient, R of the pixels constituting the color interpolation before Bayer image 101, obtained on the basis of G, the integral value of each B but, R it in each pixel after color interpolation, G, may be obtained based on the integrated value of each color component of B. ただし、ベイヤー画像101の段階で取得した方が、係数ブロック111毎のR,G,B毎の積分値の取得時におけるデータ処理量が少なくなる(1/3となる)。 However, those who acquired at the stage of the Bayer image 101 (a 1/3) R for each coefficient block 111, G, the data processing amount at the time of acquisition of the integral value for each B is reduced.

また、本実施の形態とは異なり、計測部14の係数ブロック111毎のR,G,B値の積分処理を含めた中心画素121のR,Bゲイン係数の取得に要する全ての処理をCPU6によりプログラム処理で行う場合においては、複数の注目画素の補正係数を効率的に取得することができる。 Moreover, unlike the present exemplary aspect, R in each coefficient block 111 of the measuring part 14, G, of the center pixel 121, including the integration process of the B value R, the CPU6 all processing required for the acquisition of the B gain coefficient in case of the program processing, it is possible to obtain the correction factors of a plurality of the pixel of interest efficiently. つまりCPU6のデータ処理負担を必要最小限に止めることができる。 In other words it is possible to stop the minimum necessary data processing burden of CPU6.

また、本実施の形態においては、ベイヤー画像101を均等に256分割した係数ブロック111毎に、中心画素121のR,Bゲイン係数を取得するものを示したが、係数ブロック111の分割数や、係数ブロック111の個々の形状については適宜変更することができる。 Further, in this embodiment, each coefficient block 111 equally divided into 256 Bayer image 101, R of the center pixel 121, although the one that obtains the B gain coefficients, the division number and the coefficient block 111, the individual shape of the coefficient block 111 can be appropriately changed.

また、非中心画素122の補正係数を、その周囲に存在する複数の中心画素121からの距離に基づく線形補間によって求めるものについて説明したが、非中心画素122の補正係数をこれ以外の補間方法、例えばスプライン補間などの他の補間方法を用いて求めるようにしてもよい。 Further, the correction coefficient of the non-center pixel 122 has been described in connection with what is determined by linear interpolation based on the distance from the plurality of center pixel 121 existing around, other interpolation method of correction coefficients for the non-center pixel 122, for example it may be obtained using other interpolation method such as spline interpolation.

また、本実施の形態においては、ベイヤー画像101の係数ブロック111毎のR,G,B値の積分作業を計測部14において行い、かつその積分結果に基づき、デジタルカメラ1の全体を制御するCPU6が中心画素121のR,Bゲイン係数を取得する構成について説明したが、例えばCCD2から出力された画像信号に対する、ホワイトバランス補正を含めた種々の処理を一括して行うASIC(Application Specific Integrated Circuit)を備えた構成では、計測部14及びCPU6の上記機能等をASICにより実現しても構わない。 Further, in this embodiment, R of each coefficient block 111 of the Bayer image 101, G, the integral work of B values ​​is performed in the measuring unit 14, and based on the integration result, and controls the entire digital camera 1 CPU 6 Although but a configuration has been described for obtaining R of the center pixel 121, the B gain coefficients, for example, for an image signal output from the CCD 2, is collectively performed various processes including white balance correction ASIC (Application Specific Integrated Circuit) in the configuration with a measurement unit 14 and the CPU6 of the functions and the like may be implemented by ASIC.

また、本実施の形態においては、CCDを備えたデジタルカメラに本発明を採用した場合について説明したが、これに限らず本発明は、CMOSセンサを備えたデジタルカメラや、CCDやCMOSセンサ等の撮像素子を備えた他の撮像装置、例えばデジタルビデオカメラ、カメラ付き携帯電話機、カメラ付きPDA、カメラ付きパソコン等の種々の電子カメラ装置にも採用することができる。 Further, in the present embodiment has described the case of adopting the present invention to a digital camera having a CCD, the present invention is not limited to this, digital cameras and equipped with a CMOS sensor, CCD or the like of the CMOS sensor other imaging apparatus including an imaging device, for example a digital video camera, a camera-equipped mobile phones, camera-equipped PDA, to various electronic camera device with a camera such as a personal computer can be employed. その場合においても、前述した効果を得ることができる。 Also in this case, it is possible to obtain the effects described above.

(実施形態2) (Embodiment 2)
図5は、本発明の第2の実施の形態に係るパーソナルコンピュータ(以下、パソコン)51を示すブロック図である。 Figure 5 is a personal computer according to a second embodiment of the present invention (hereinafter, personal computer) is a block diagram showing a 51.

このパソコン51はCPU52と、CPU52に接続されたROM53、RAM54、内蔵時計55、CRTやLCD等からなる表示装置56へ送る表示信号を生成する表示回路57を備えている。 The personal computer 51 includes a CPU 52, a display circuit 57 for generating a display signal sent ROM53 connected to CPU 52, RAM 54, the display device 56 consisting of the built-in clock 55, CRT or LCD or the like. CPU52には、インターフェース58を介して入力手段であるマウス59及びキーボード60と、ハードディスク61、CD−ROMドライブ62、各種のメモリカードが直接、または所定のアダプタを介して着脱自在に装着可能なスロットを有する内蔵又は外付けのカードドライブ63が接続されている。 The CPU 52, the mouse 59 and a keyboard 60 which is an input means via an interface 58, a hard disk 61, CD-ROM drive 62, various memory cards directly, or a predetermined detachably mountable slot via an adapter internal or external card drive 63 has a are connected. ハードディスク61には、パソコン51の動作に不可欠な各種OS、及び必要に応じてCPU52に後述するホワイトバランス補正処理を実行させることにより、CPU52を本発明の第1の係数取得手段、第2の係数取得手段、補正手段として機能させるためのプログラムを含む画像処理プログラム等の各種アプリケーションプログラムがインストールされている。 The hard disk 61, integral various OS for the operation of the personal computer 51, and by executing the white balance correction process described later to CPU 52 as needed, the first coefficient acquiring means of the present invention the CPU 52, the second coefficient acquisition means, various application programs of the image processing programs including a program to function as correction means is installed.

次に、以上の構成からなるパソコン51において、画像処理プログラムが起動しているときCPU52が必要に応じて実行する画像に対するホワイトバランス補正処理の内容を図6のフローチャートにしたがって説明する。 Next, the personal computer 51 having the above configuration will be described the contents of the white balance correction process for the image CPU52 executes optionally when the image processing program is activated according to the flowchart of FIG. なお、ここでは、処理対象となる画像が、第1の実施の形態で説明したデジタルカメラのCCD2と同様に感光部にベイヤー配列の原色フィルターを有した撮像素子を備えた任意のデジタルカメラで撮影され記録された撮影画像であり、例えばメモリカードを介してカードドライブ63からハードディスク61に読み込まれているものとする。 Here, the image to be processed, taken by any digital camera having an image pickup element having a primary color filter of the Bayer array to photosensitive unit like the CCD2 of the digital camera described in the first embodiment is a recorded captured image is assumed to have been read from the card drive 63 to the hard disk 61 for example via a memory card. また、上記撮影画像のデータが、一般にRAWデータと呼ばれる撮像素子の生出力データ、つまり撮像素子における画素毎のデータ(ここでは、ベイヤーデータ)であるものとする。 Also, data of the captured image, the raw output data of the image pickup device, commonly referred to as RAW data, i.e. data (here, Bayer data) for each pixel in the image pickup device is assumed to be.

以下、説明するとCPU52は、ハードディスク61から上記画像データ、つまりベイヤーデータを読み出した後(ステップSB1)、その1画面を16×16の係数ブロック111に分割し(図3(a)参照)、ブロック毎にR,G,B値を個別に積分する(ステップSB2)。 Explaining CPU52 is the image data from the hard disk 61, that is, after reading the Bayer data (step SB1), divided into coefficient blocks 111 in the one frame 16 × 16 (see FIG. 3 (a)), block separately integrating the R, G, B values ​​for each (step SB2). そして、係数ブロック毎のRGBの各積分結果に基づき、係数ブロック毎にR,Bゲイン係数を演算し(ステップSB3)、その結果を各係数ブロックにおける中心画素121の補正係数としてRAM54等に記憶する(ステップSB4)。 Then, based on each result of integration RGB for each coefficient block, R, and B gain coefficients calculated for each coefficient block (step SB3), and stores the result in RAM54 such as correction coefficients for the center pixel 121 in each coefficient block (step SB4). 次に、1画面内における前記中心画素121を除く非中心画素122(図3(b)参照)のR,Bゲイン係数を、各々の周囲の複数の中心画素121からの距離に基づき、複数の中心画素121のR、Bゲイン係数から線形補間よって画素毎に算出し、その結果をRAM54等に記憶する(ステップSB5)。 Then, the non-center pixel 122 excluding the center pixel 121 in a single screen (see FIG. 3 (b)) R, and B gain coefficients, based on the distance from a plurality of center pixel 121 around the respective multiple R of the center pixel 121, calculated from the B gain coefficient to the linear interpolation Thus each pixel, and stores the result and the like to the RAM 54 (step SB5). なお、この線形補間よる非中心画素122のR,Bゲイン係数の具体的に算出方法については、第1の実施の形態と同様であるため説明を省略する。 Incidentally, R non center pixel 122 by the linear interpolation, the specific method of calculating the B gain coefficient is omitted because it is similar to the first embodiment.

引き続き、処理対象の画像データに色補間処理を施して、画素毎にRGBデータを生成し(ステップSB6)、生成した画素毎のR,Bデータに、ステップSB3,SB5で予め記憶しておいた画素毎のR,Bゲイン係数をかけることによって、画素毎にホワイトバランスを調整する(ステップSB7)。 Subsequently, subjected to the image data to be processed color interpolation process to generate RGB data for each pixel (step SB6), R of the generated each pixel, the B data, stored in advance in the step SB3, SB5 by multiplying R for each pixel, the B gain coefficients to adjust the white balance for each pixel (step SB7). しかる後、ホワイトバランス調整後の画素データ(画素毎のRGBデータ)からなるカラー画像を、JPEG等の所定の画像フォーマットでハードディスク61に記憶する(ステップSB8)。 Thereafter, it stores the color image composed of pixel data after the white balance adjustment (RGB data for each pixel), the hard disk 61 in a predetermined image format such as JPEG (step SB8).

したがって、本実施の形態のパソコン51においても、第1の実施の形態に示したデジタルカメラ1と同様、画面内の被写体に複数の光源照射があり、その照射エリアがある程度分離されているような場合であっても、照射エリア毎に適したホワイトバランスを確保することができる。 Therefore, also in the personal computer 51 of this embodiment, similar to the digital camera 1 shown in the first embodiment, a plurality of light sources irradiating the subject in the screen, such as the irradiation area is somewhat separated even if it is possible to secure a white balance for each illumination area. 同時に、隣接する係数ブロック111同士の境界部分に色ずれが生じることがない。 At the same time, there is no color shift in the boundary portion between the coefficient block 111 adjacent occurs. したがって、画面全域に極めて良好なホワイトバランス補正を施すことができる。 Therefore, it is possible to apply a very good white balance correction in the entire screen. しかも、画素毎にホワイトバランス調整を行っても、ホワイトバランス補正を高速に行うことができるとともに、CPU52にかかる処理負担を抑えることができる。 Moreover, even if the white balance adjustment for each pixel, it is possible to perform the white balance correction in high speed, it is possible to suppress the processing load on the CPU 52.

また、各係数ブロック111における中心画素121のR,Bゲイン係数を、色補間前のベイヤー画像101を構成する画素のR,G,B毎の積分値に基づき取得するため、複数の注目画素の補正係数を効率的に取得することができる。 Further, the center pixel 121 in each coefficient block 111 R, and B gain coefficients, of the pixels constituting the color interpolation before Bayer image 101 R, G, for obtaining on the basis of the integral value for each B, a plurality of the pixel of interest the correction factor can be efficiently acquired. つまりCPU52のデータ処理負担を必要最小限に止めることができる。 In other words it is possible to stop the minimum necessary data processing burden of the CPU52.

なお、本実施の形態においては、処理対象の撮影画像のデータがRAWデータである場合について説明したが、本発明は、RAWデータ以外の画像データを対象とする場合であっても有効であり、処理対象はJPEG形式等の他のデータ形式で記録されている画像であってもよい。 In the present embodiment, the data of the captured image to be processed has been described the case of RAW data, the present invention is effective even when the target image data other than the RAW data, processed may be an image recorded in other data format such as JPEG format. 例えばJPEG形式の画像を対象とする場合には、記録されている画像をいったん画素毎のY,Cb,Crデータに伸張し、さらにそれを画素毎のRGBデータに変換した後、変換後の各画素におけるR,G,Bの色成分毎の積分値に基づき各係数ブロック111における中心画素121のR,Bゲイン係数を取得すればよい。 For example, when the target images in the JPEG format, Y of each temporarily pixels an image recorded decompresses Cb, and Cr data, after further converts it into RGB data for each pixel, each of the converted R in the pixel, G, R of the center pixel 121 in each coefficient block 111 based on the integrated value of each color component of B, may acquire a B gain coefficients. さらに、その場合には、各係数ブロック111における中心画素121のR,Bゲイン係数を画素毎のCb,Crデータに基づき取得するようにしてもよい。 Further, that case, R of the center pixel 121 in each coefficient block 111, Cb of each pixel B gain coefficients, may be acquired on the basis of the Cr data.

また、本実施の形態においても、係数ブロック111の分割数や、係数ブロック111の個々の形状については適宜変更することができ、また、非中心画素122の補正係数を、その周囲に存在する複数の中心画素121の補正係数から、線形補間以外のスプライン補間などの他の補間方法を用いて求めるようにしてもよい。 The plurality also in the present embodiment, the division number and the coefficient block 111, can be changed as appropriate for individual shape coefficient block 111, also for the correction coefficient of the non-center pixel 122, existing around from the correction coefficient of the central pixel 121 of the may be obtained using other interpolation method such as spline interpolation other than linear interpolation.

また、本実施の形態においては、前述したように汎用的な構成を備えたパソコン51に所定の画像処理プログラムをインストールすることによって本発明のホワイトバランス補正装置を実現したものを示したが、これ以外にも、本発明は、画像処理機能、特に撮影画像に対する画像処理機能を有するものであれば、例えばデジタルカメラ等によって画像データとして記録された画像を印刷する各種方式のプリンタにも採用することができる。 Further, in this embodiment, although the one that achieves a white balance correction apparatus of the present invention by installing a predetermined image processing program to a computer 51 having a general configuration as described above, which also, the present invention relates to an image processing function, as long as it particularly has an image processing function for the captured image, for example, be employed in the printer of various types of printing an image recorded as image data by a digital camera or the like other than can. その場合においても、前述した効果を得ることができる。 Also in this case, it is possible to obtain the effects described above.

本発明の第1の実施の形態を示すデジタルカメラのブロック図である。 It is a block diagram of a digital camera of a first embodiment of the present invention. 同デジタルカメラの信号処理部の詳細を示すブロック図である。 Is a block diagram showing the details of the signal processing section of the digital camera. ベイヤー画像における係数ブロックと、中心画素及び非中心画素とを示す説明図である。 Is an explanatory view showing a coefficient block in the Bayer image, the center pixel and the non-center pixel. CPUによるホワイトバランスの補正係数取得処理の内容を示すフローチャートである。 Is a flowchart showing the contents of a correction coefficient acquiring the white balance process by the CPU. 本発明の第2の実施の形態を示すパーソナルコンピュータのブロック図である。 A second embodiment of the present invention is a block diagram of a personal computer shown. CPUによるホワイトバランス補正処理の内容を示すフローチャートである。 Is a flowchart showing the contents of the white balance correction processing by the CPU.

符号の説明 DESCRIPTION OF SYMBOLS

1 デジタルカメラ 2 CCD 1 Digital Camera 2 CCD
3 信号処理部 5 画像メモリ 6 CPU 3 the signal processing unit 5 an image memory 6 CPU
7 ROM 7 ROM
8 RAM 8 RAM
13 色補間部 14 計測部 15 ホワイトバランス調整部 16 メモリ 17 ゲイン乗算回路 18 係数レジスタ 51 パーソナルコンピュータ 52 CPU 13 color interpolation section 14 measuring unit 15 white balance adjustment unit 16 memory 17 gain multiplication circuit 18 coefficient register 51 the personal computer 52 CPU
53 ROM 53 ROM
54 RAM 54 RAM
56 表示装置 61 ハードディスク 63 カードドライブ 101 ベイヤー画像 111 係数ブロック 121 中心画素 122 非中心画素 56 display 61 hard 63 card drive 101 Bayer image 111 coefficient block 121 center pixel 122 non center pixel

Claims (7)

  1. 画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の係数取得手段と、 A first coefficient obtaining means for obtaining individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the image,
    前記複数の注目画素の間に位置する前記画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の係数取得手段と、 The correction coefficient of the white balance of the non-target pixel in the image located between the plurality of the pixel of interest, obtained by the first coefficient acquisition unit, a plurality of target pixels present around the non-target pixel a second coefficient obtaining means for obtaining by interpolation from the correction coefficient,
    前記画像の各画素のうち、前記注目画素に対しては前記第1の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施す補正手段と を備えたことを特徴とするホワイトバランス補正装置。 Among pixels of the image, the applied white balance correction based on the correction coefficient obtained by the first coefficient acquiring means with respect to the target pixel, the second coefficient obtaining for the non-target pixel white balance correction apparatus is characterized in that a correcting means for performing white balance correction based on the correction coefficient acquired by means.
  2. 前記複数の注目画素は、前記画像が分割された複数の係数ブロック毎に設定され、前記第1の係数取得手段は、複数の注目画素の各々の補正係数を、同一の係数ブロック内の全画素の色成分に基づき個別に取得することを特徴とする請求項1記載のホワイトバランス補正装置。 Wherein the plurality of the pixel of interest, the image is set for each of a plurality of coefficients blocks divided, the first coefficient acquisition unit, all the pixels of the correction coefficient of each of the plurality of the pixel of interest, the same coefficient block white balance correction apparatus according to claim 1, wherein the obtaining individually based on the color components of the.
  3. 前記第1の係数取得手段は、画像内での位置によって異なる色情報を有する画素により構成される画像から前記複数の注目画素の補正係数を取得することを特徴とする請求項1又は2記載のホワイトバランス補正装置。 Said first coefficient acquiring means, the pixels having color information different depending on the position in the image from an image composed of claim 1, wherein obtaining a correction coefficient of the plurality of the pixel of interest white balance correction device.
  4. 前記第2の係数取得手段は、前記画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素からの距離に基づく直線補間によって取得することを特徴とする請求項1,2又は3記載のホワイトバランス補正装置。 The second coefficient obtaining means, a correction coefficient for white balance of the non-target pixel in the image, acquired by the first coefficient acquisition means, from a plurality of target pixels present around the non-target pixel It is obtained by linear interpolation based on the distance the white balance correction apparatus according to claim 1, 2 or 3 wherein.
  5. 画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の工程と、 A first step of acquiring individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the image,
    前記複数の注目画素の間に位置する非注目画素におけるホワイトバランスの補正係数を、第1の工程で取得した、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の工程と、 The correction coefficient of the white balance in the non-target pixel located between the plurality of the pixel of interest, obtained in the first step, obtaining by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel a second step,
    前記注目画素に対しては前記第1の工程によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の工程によって取得された補正係数に基づきホワイトバランス補正を施す第3の工程と を含むことを特徴とするホワイトバランス補正方法。 Wherein for the pixel of interest subjected to white balance correction based on the correction coefficient obtained by the first step, the non-interest the second white balance correction based on the correction coefficient acquired by the process for the pixel white balance correction method characterized by comprising a third step of performing.
  6. 画像処理機能を有する装置が有するコンピュータに、 The computer apparatus has to have an image processing function,
    画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の処理と、 A first process of acquiring individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the image,
    前記複数の注目画素の間に位置する非注目画素におけるホワイトバランスの補正係数を、前記第1の処理で取得した、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の処理と、 Obtaining a correction coefficient for white balance in the non-target pixel located between the plurality of the pixel of interest, obtained in the first processing, by interpolation from the correction coefficient of the plurality of target pixels present around the non-target pixel and a second process of,
    前記注目画素に対しては前記第1の処理によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の処理によって取得された補正係数に基づきホワイトバランス補正を施す第3の処理と を実行させるためのプログラム。 Wherein for the pixel of interest subjected to white balance correction based on the correction coefficient acquired by the first process, the correction factors to the white balance correction based acquired by the second process for non-target pixel program for executing a third process of performing.
  7. 撮像手段により撮像した被写体画像を画像データとして記録媒体に記録する電子カメラにおいて、 An electronic camera for recording on a recording medium a subject image captured as image data by the imaging means,
    被写体画像における互いに離間する複数の注目画素のホワイトバランスの補正係数を個別に取得する第1の係数取得手段と、 A first coefficient obtaining means for obtaining individual correction coefficients for the white balance of a plurality of the pixel of interest to be separated from each other in the subject image,
    前記複数の注目画素の間に位置する被写体画像における非注目画素のホワイトバランスの補正係数を、前記第1の係数取得手段により取得された、当該非注目画素の周囲に存在する複数の注目画素の補正係数から補間によって取得する第2の係数取得手段と、 The correction coefficient of the white balance of the non-target pixel in the subject image located between the plurality of the pixel of interest, obtained by the first coefficient acquisition unit, a plurality of target pixels present around the non-target pixel a second coefficient obtaining means for obtaining by interpolation from the correction coefficient,
    被写体画像の各画素のうち、前記注目画素に対しては前記第1の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施し、前記非注目画素に対しては前記第2の係数取得手段によって取得された補正係数に基づきホワイトバランス補正を施す補正手段と を備えたことを特徴とする電子カメラ装置。 Among the pixels of the subject image, the applied white balance correction based on the correction coefficient obtained by the first coefficient acquiring unit, the second coefficient obtaining for the non-pixel of interest to the pixel of interest an electronic camera apparatus characterized by comprising a correction means for performing white balance correction based on the correction coefficient acquired by means.
JP2004161705A 2004-05-31 2004-05-31 White balance correction apparatus and white balance correction method, a program, an electronic camera device Active JP4433883B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004161705A JP4433883B2 (en) 2004-05-31 2004-05-31 White balance correction apparatus and white balance correction method, a program, an electronic camera device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004161705A JP4433883B2 (en) 2004-05-31 2004-05-31 White balance correction apparatus and white balance correction method, a program, an electronic camera device

Publications (2)

Publication Number Publication Date
JP2005347811A true true JP2005347811A (en) 2005-12-15
JP4433883B2 JP4433883B2 (en) 2010-03-17

Family

ID=35499826

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004161705A Active JP4433883B2 (en) 2004-05-31 2004-05-31 White balance correction apparatus and white balance correction method, a program, an electronic camera device

Country Status (1)

Country Link
JP (1) JP4433883B2 (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008219198A (en) * 2007-02-28 2008-09-18 Olympus Corp Image processor and image processing program
JP2008311741A (en) * 2007-06-12 2008-12-25 Canon Inc Image pickup device, its control method, and program
JP2009038611A (en) * 2007-08-02 2009-02-19 Ricoh Co Ltd Imaging device and imaging method
JP2009094997A (en) * 2007-09-18 2009-04-30 Ricoh Co Ltd Imaging apparatus, imaging method
JP2009212787A (en) * 2008-03-04 2009-09-17 Ricoh Co Ltd Imaging apparatus and imaging method
KR100959343B1 (en) 2007-03-02 2010-05-20 후지필름 가부시키가이샤 White balance correction apparatus and method
JP2010213232A (en) * 2009-02-16 2010-09-24 Ricoh Co Ltd Imaging device and imaging method
JP2010213213A (en) * 2009-03-12 2010-09-24 Ricoh Co Ltd Imaging device and imaging method
KR100987030B1 (en) 2008-09-18 2010-10-11 연세대학교 산학협력단 Method and apparatus for correcting white balance
JP2010272996A (en) * 2009-05-20 2010-12-02 Casio Computer Co Ltd Image processor and image processing program
JP2011109729A (en) * 2011-03-10 2011-06-02 Mega Chips Corp Image processing apparatus
JP2012054827A (en) * 2010-09-02 2012-03-15 Canon Inc Image processor, image processing method and program
JP2013058870A (en) * 2011-09-07 2013-03-28 Canon Inc Image processor, image processing method, and program
JP2013225909A (en) * 2013-06-21 2013-10-31 Mega Chips Corp Image processing system
US8717454B2 (en) 2009-12-24 2014-05-06 Samsung Electronics Co., Ltd. Image pickup apparatus and image pickup method for adjusting white balance to account for flash and external light sources

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8351695B2 (en) 2007-02-28 2013-01-08 Olympus Corporation Image processing apparatus, image processing program, and image processing method
JP2008219198A (en) * 2007-02-28 2008-09-18 Olympus Corp Image processor and image processing program
KR100959343B1 (en) 2007-03-02 2010-05-20 후지필름 가부시키가이샤 White balance correction apparatus and method
JP2008311741A (en) * 2007-06-12 2008-12-25 Canon Inc Image pickup device, its control method, and program
JP2009038611A (en) * 2007-08-02 2009-02-19 Ricoh Co Ltd Imaging device and imaging method
JP2009094997A (en) * 2007-09-18 2009-04-30 Ricoh Co Ltd Imaging apparatus, imaging method
JP2013034261A (en) * 2007-09-18 2013-02-14 Ricoh Co Ltd Imaging apparatus and imaging method
JP2009212787A (en) * 2008-03-04 2009-09-17 Ricoh Co Ltd Imaging apparatus and imaging method
KR100987030B1 (en) 2008-09-18 2010-10-11 연세대학교 산학협력단 Method and apparatus for correcting white balance
US8830348B2 (en) 2009-02-16 2014-09-09 Ricoh Company, Ltd. Imaging device and imaging method
JP2010213232A (en) * 2009-02-16 2010-09-24 Ricoh Co Ltd Imaging device and imaging method
US8212890B2 (en) 2009-03-12 2012-07-03 Ricoh Company, Ltd. Imaging device and imaging method
JP2010213213A (en) * 2009-03-12 2010-09-24 Ricoh Co Ltd Imaging device and imaging method
JP2010272996A (en) * 2009-05-20 2010-12-02 Casio Computer Co Ltd Image processor and image processing program
US8717454B2 (en) 2009-12-24 2014-05-06 Samsung Electronics Co., Ltd. Image pickup apparatus and image pickup method for adjusting white balance to account for flash and external light sources
US8941756B2 (en) 2010-09-02 2015-01-27 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and program
JP2012054827A (en) * 2010-09-02 2012-03-15 Canon Inc Image processor, image processing method and program
JP2011109729A (en) * 2011-03-10 2011-06-02 Mega Chips Corp Image processing apparatus
JP2013058870A (en) * 2011-09-07 2013-03-28 Canon Inc Image processor, image processing method, and program
JP2013225909A (en) * 2013-06-21 2013-10-31 Mega Chips Corp Image processing system

Also Published As

Publication number Publication date Type
JP4433883B2 (en) 2010-03-17 grant

Similar Documents

Publication Publication Date Title
US7057653B1 (en) Apparatus capable of image capturing
Lukac Single-sensor imaging: methods and applications for digital cameras
US20090091645A1 (en) Multi-exposure pattern for enhancing dynamic range of images
US6873729B2 (en) Method, apparatus and computer program product for processing image data
US20040196381A1 (en) Image processing method and apparatus
US20110169980A1 (en) Apparatus and method for obtaining high dynamic range image
US20090219419A1 (en) Peripheral Light Amount Correction Apparatus, Peripheral Light Amount Correction Method, Electronic Information Device, Control Program and Readable Recording Medium
US20090160992A1 (en) Image pickup apparatus, color noise reduction method, and color noise reduction program
JPH11161773A (en) Method for processing picture and device for inputting picture
JP2004088149A (en) Imaging system and image processing program
US20050275732A1 (en) Image capturing apparatus, image capturing method, and program
US20110199542A1 (en) Image processing apparatus and image processing method
JP2007142670A (en) Image processing system and image processing program
CN101119448A (en) Image processing apparatus, imaging apparatus, image processing method, and computer program product
US20050094896A1 (en) Image processing apparatus, image-taking system and image processing method
US20110134292A1 (en) Image processing apparatus
JP2002010108A (en) Device and method for processing image signal
JP2012065187A (en) Imaging apparatus and restored gain data generation method
US20040246350A1 (en) Image pickup apparatus capable of reducing noise in image signal and method for reducing noise in image signal
US20060139468A1 (en) Digital camera
US20090153696A1 (en) Chromatic aberration correction apparatus, image pickup apparatus, chromatic aberration amount calculation method, and chromatic aberration amount calculation program
JP2009094997A (en) Imaging apparatus, imaging method
JP2012205244A (en) Image processing device and method of controlling the same
US20060050956A1 (en) Signal processing apparatus, signal processing method, and signal processing program
US20110109754A1 (en) Image capture apparatus and image capturing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070424

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091125

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091208

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091221

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3