WO2015079795A1 - マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置 - Google Patents

マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置 Download PDF

Info

Publication number
WO2015079795A1
WO2015079795A1 PCT/JP2014/075436 JP2014075436W WO2015079795A1 WO 2015079795 A1 WO2015079795 A1 WO 2015079795A1 JP 2014075436 W JP2014075436 W JP 2014075436W WO 2015079795 A1 WO2015079795 A1 WO 2015079795A1
Authority
WO
WIPO (PCT)
Prior art keywords
white balance
area
image
color temperature
light source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2014/075436
Other languages
English (en)
French (fr)
Inventor
和徳 吉崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of WO2015079795A1 publication Critical patent/WO2015079795A1/ja
Priority to US15/164,438 priority Critical patent/US9723285B2/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control

Definitions

  • the present invention estimates color temperature in an image obtained by photographing a scene illuminated with a plurality of light sources for each divided area, and performs white balance correction, thereby realizing color reproduction without a sense of incongruity in the entire image.
  • the present invention relates to a multi-area white balance image processing program, a computer recording the multi-area white balance image processing program, and an imaging apparatus including the multi-area white balance image processing apparatus.
  • the photographing light source is outdoors during the day, its color temperature changes depending on the altitude of the sun and the atmospheric conditions. Also, the color temperature differs between the sun and the shade.
  • various artificial lights such as fluorescent lamps and incandescent lamps indoors, and the color temperature of each light source is different.
  • flash photography is taken outdoors in the daytime, a mixed light of flash illumination and external light becomes a photographing light source.
  • the flash lighting and the background artificial lighting are not mixed, but the color temperature of the light source is different in different areas in the same scene.
  • flash photography is performed indoors, light in which flash illumination and artificial illumination are mixed becomes a photographing light source.
  • human eyes adapt to color. That is, the human eye feels a white subject in the attention area white regardless of whether the light source is sunlight, artificial lighting, or a mixed light thereof.
  • the camera which is an input device in accordance with the characteristics of the human eye, is also configured to perform so-called white balance processing by adjusting RGB gain.
  • the illuminating light source is unknown until shooting, so in general, the type of illuminating illumination (color temperature of the light source) is estimated from the captured image, or the illumination is specified by the user. Correct the white balance of the entire image shot according to the type.
  • the acquired image is divided into multiple areas in order to perform white balance processing with high accuracy regardless of the color temperature of the light source in the area in the scene.
  • imaging is performed when there are irradiation areas of different types of light sources in the imaging screen.
  • the imaging screen is divided into multiple areas according to luminance information and color information Different white balance correction coefficients are set for each of the plurality of areas, and a white balance correction coefficient limit is set so that the difference between the white balance correction coefficients set for each of the plurality of areas falls within a predetermined range. It is disclosed that a white balance correction coefficient for the entire screen is generated.
  • the input image is divided into a plurality of areas prior to the white balance correction, and each divided area is divided into a plurality of areas.
  • the color temperature of the photographing light source when the mixed light source image is photographed is estimated using a light source color temperature estimating method that is generally performed.
  • each divided area is a part of the scene of the input image, the subject in each area is likely to be a single color subject, and the color temperature of the light source in the divided area is likely to be estimated to the wrong color temperature. .
  • the color temperature of the light source may be estimated incorrectly depending on the area. Can happen. For this reason, when the image is divided into a plurality of areas and the white balance processing is performed based on the estimation result of the color temperature of the light source in each area, the accurate estimated color temperature of the light source cannot be obtained, and the white balance coefficient When the optimum value of the white balance processing element such as is not determined, there is a possibility that an image having a sense of incongruity in color reproduction may be generated.
  • the method described in Patent Document 1 sets a white balance correction coefficient (that is, a control value corresponding to the color temperature of a light source) for each of a plurality of divided areas, and estimates (or sets) it in the first place. It is not assumed that the color temperature of the light source is wrong. For this reason, in the method described in Patent Document 1, although there are provided correction coefficient limits for setting a difference between correction coefficients set in a plurality of divided areas within a predetermined range, a plurality of divided areas are provided. If the color temperature of the estimated light source in the area is wrong, the white balance is adjusted using the white balance correction coefficient of each of the divided areas, which is set corresponding to the color temperature of the wrong estimated light source. When this is corrected, there is a possibility that an image with an uncomfortable color reproduction may be generated.
  • a white balance correction coefficient that is, a control value corresponding to the color temperature of a light source
  • the present invention has been made in view of the above problems in the prior art.
  • the entire captured image is divided into a plurality of areas, the color temperature of the light source in each area is estimated, and the estimated color temperature of the light source is calculated.
  • Multi-area white balance control device capable of generating an image that does not feel uncomfortable in color reproduction even when the color temperature of the light source estimated in each area is incorrect when white balance processing is performed
  • its object is to provide an imaging apparatus having recorded a computer and multi-area white balance image processing apparatus program.
  • a multi-area white balance control apparatus estimates area color means for dividing an input image into a plurality of areas and the color temperature of the light source for each area divided by the area division means.
  • Light source color temperature estimation means, area image color information calculation means for calculating image color information for each area divided by the area division means, and color temperature of the light source in each area estimated by the light source color temperature estimation means
  • white balance control means for acquiring white balance processing information for each area using the color information of the image of each area calculated by the area image color information calculation means.
  • the white balance processing information acquired by the white balance control unit is a multi-area white balance or a single area white balance.
  • white balance processing information with a high ratio of multi-area white balance is used and the color information value of the image is low
  • the white balance processing information acquired by the white balance control means is multi-area white balance and single area white This is information for white balance processing in which the ratio of the single area white balance in the balance is increased.
  • the multi-area white balance control method divides an input image into a plurality of areas, estimates a color temperature of a light source for each divided area, calculates color information of the image for each divided area, and estimates The white balance processing information for each area is acquired using the color temperature of the light source of each area and the calculated color information of the image of each area.
  • the white balance processing information is acquired when the calculated color information value of the image in the area is high and white balance processing information in which the ratio of the multi area white balance to the multi area white balance and the single area white balance is increased.
  • white balance processing information with a higher ratio of the single area white balance between the multi-area white balance and the single area white balance is acquired.
  • a computer that records a multi-area white balance control program is a computer provided in a multi-area white balance control device, wherein the computer divides an input image into a plurality of areas, the area division Light source color temperature estimating means for estimating the color temperature of the light source for each area divided by the means, area image color information calculating means for calculating color information of the image for each area divided by the area dividing means, and the light source color temperature White that acquires white balance processing information for each area using the color temperature of the light source of each area estimated by the estimation unit and the color information of the image of each area calculated by the area image color information calculation unit Multi-area white rose to function as balance control means It has recorded a scan control program.
  • the white balance processing information acquired by the white balance control unit is a multi-area white balance or a single area white balance.
  • white balance processing information with a high ratio of multi-area white balance is used and the color information value of the image is low
  • the white balance processing information acquired by the white balance control means is multi-area white balance and single area white This is information for white balance processing in which the ratio of the single area white balance in the balance is increased.
  • a multi-area white balance control program is a computer-readable multi-area white balance control program provided in a multi-area white balance control device, wherein the computer divides an input image into a plurality of areas.
  • Dividing means, light source color temperature estimating means for estimating a color temperature of a light source for each area divided by the area dividing means, and area image color information calculation for calculating color information of an image for each area divided by the area dividing means A white balance process for each area using the color temperature of the light source of each area estimated by the light source color temperature estimation means and the color information of the image of each area calculated by the area image color information calculation means Functions as a white balance control means to acquire information That.
  • the white balance processing information acquired by the white balance control unit is a multi-area white balance or a single area white balance.
  • white balance processing information with a high ratio of multi-area white balance is used and the color information value of the image is low
  • the white balance processing information acquired by the white balance control means is multi-area white balance and single area white This is information for white balance processing in which the ratio of the single area white balance in the balance is increased.
  • Multi-area white balance control apparatus when the entire captured image is divided into a plurality of areas and the color temperature of each area is estimated, even if the color temperature of the light source estimated in the individual area is incorrect, the color reproduction is uncomfortable.
  • Multi-area white balance control apparatus multi-area white balance control method, multi-area white balance control program, computer recording multi-area white balance control program, multi-area white balance image processing apparatus, multi-area white balance control program
  • An area white balance image processing method, a multi-area white balance image processing program, a computer recording the multi-area white balance image processing program, and an imaging apparatus including the multi-area white balance image processing apparatus are obtained.
  • FIG. 6 is an explanatory diagram showing an example of the estimation result of the color temperature of the light source when the input image is divided into a plurality of areas
  • (a) is a diagram showing an example of a state where the input image is divided into 6 ⁇ 6 areas; ) Is an explanatory diagram showing an example of the color temperature of the light source estimated for each area.
  • 1 is a block diagram of a digital camera including a multi-area white balance control device according to a first embodiment of the present invention.
  • FIG. 3 is an explanatory diagram showing an example of a detailed configuration of a white balance control unit in the multi-area white balance control device of FIG. 2. It is explanatory drawing which shows an example of the white balance coefficient for every area produced
  • Each white balance coefficient generation unit included in the white balance control unit of the multi-area white balance control device of FIG. 5 records each white balance coefficient with respect to the estimated color temperature of the light source applicable when generating each white balance coefficient. It is explanatory drawing which shows an example of the look-up table. It is explanatory drawing which shows the concept of the synthetic
  • the present invention divides an input image into a plurality of areas, estimates the color temperature of the light source for each divided area, calculates color information of the image for each divided area, and estimates the color temperature of the light source in each area. And white balance processing information is acquired using the calculated color information of the image of each area. If the calculated color information value of the image in the area is high, acquire white balance processing information with a higher ratio of the multi-area white balance and multi-area white balance and single-area white balance, and obtain the color information value of the image Is low, information for white balance processing in which the ratio of the single area white balance to the multi area white balance and the single area white balance is increased is acquired.
  • white balance processing information is acquired using the estimated color temperature of the light source of each area and the calculated color information of the image of each area, and the calculated image of the area If the color information value of the image is high, information for white balance processing with a high ratio of the multi-area white balance to the multi-area white balance and single area white balance is acquired. If the color information value of the image is low, the multi-area white balance information If white balance processing information with a higher ratio of single area white balance to white balance and single area white balance is acquired, even if the estimated color temperature of the light source in that area is incorrect, it will be used for white balance processing in that area. Information can be acquired as more appropriate information. As a result, when white balance processing is performed on the entire input image based on appropriate white balance processing information for each area, it is possible to generate an image that does not give a sense of incongruity to the color reproduction of the area in the entire input image. .
  • FIG. 2 is a block diagram of a digital camera provided with a multi-area AWB (auto white balance) control device according to a first embodiment of the present invention.
  • a portion surrounded by a one-dot chain line corresponds to the multi-area white balance control device according to the present embodiment
  • a portion surrounded by a two-dot chain line corresponds to the multi-area white balance image processing device.
  • the multi-area white balance control device 1 of the present embodiment includes an image area dividing unit 11 as an area dividing unit, a color temperature estimating unit 12 as a light source color temperature estimating unit, and area image color information.
  • An area color information calculation unit 13 as a calculation unit and a WB (white balance) control unit 14 as a white balance control unit are included.
  • 10 is a white balance image processing apparatus
  • 15 is a WB (white balance) gain correction unit as white balance processing means
  • 21 is a lens
  • 22 is an image sensor
  • 23 is an image captured by the image sensor 22.
  • the digital camera including the multi-area white balance control device 1 according to the present embodiment includes a control unit (not shown).
  • the control unit is separately provided with a function of storing an image captured by the image sensor 22 based on a shooting instruction in the image storage unit 23 and a function of inputting an image stored in the image storage unit 23.
  • a function of storing an image captured by the image sensor 22 based on a shooting instruction in the image storage unit 23 and a function of inputting an image stored in the image storage unit 23.
  • an image formed on the image sensor 22 through the lens 21 is picked up and stored as a digital signal in the image storage unit 23 in accordance with a shooting instruction from a control unit (not shown).
  • the image area dividing unit 11 divides the input image into a plurality of blocks having a predetermined size.
  • the color temperature estimating unit 12 estimates the color temperature of the light source for each block divided by the image area dividing unit 11.
  • the color temperature estimation unit 12 further estimates the color temperature of the light source in the single area based on the estimated color temperature of the light source in each area. A method for estimating the color temperature of the light source will be described later.
  • the area color information calculation unit 13 estimates image color information for each block divided by the image area division unit 11. A method for calculating the color information of the image will be described later.
  • the WB control unit 14 uses the color temperature of the light source of each area estimated by the color temperature estimation unit 12 and the color information of the image of each area calculated by the area color information calculation unit 13 to perform white balance processing. Get information.
  • white balance processing information in which the ratio of the multi-area white balance to the multi-area white balance and the single area white balance is increased. If the value of the color information of the image is low, white balance processing information in which the ratio of the single area white balance to the multi area white balance and the single area white balance is increased is acquired. A method for acquiring the white balance processing information will be described later.
  • the WB gain correction unit 15 corrects the white balance of the entire input image based on the white balance processing information acquired by the WB control unit 14.
  • a control unit of a digital camera (not shown) inputs image data stored in the image storage unit 23.
  • the image area dividing unit 11 divides the input image data into a plurality of blocks having a predetermined size. For convenience, in the following description, the image data is divided into 6 ⁇ 6 blocks.
  • the color temperature estimation unit 12 estimates the color temperature of the light source for each block with respect to the image of each block divided by the image area dividing unit 11, for example, by the following method.
  • the effective pixels of the image sensor are 4800 ⁇ 3600 pixels.
  • the input Bayer pattern RAW image is divided into 6 ⁇ 6 blocks by the image area dividing unit 11, and the size of each block is 800 ⁇ 600 pixels.
  • a 20 ⁇ 20 pixel range is set as one sampling point for the 800 ⁇ 600 pixel block, and R, G, By obtaining an average value of the pixel values of B, R, G, and B pixel data having a sampling point of 40 ⁇ 30 pixels down-sampled are obtained.
  • the chromaticity values (R / G, B / G) are obtained for the sampling points of 40 ⁇ 30 pixels, and the chromaticity values at the respective sampling points are plotted on, for example, the chromaticity diagram shown in FIG. Then, for example, using the color temperature area determination criteria of various light sources on the chromaticity diagram as shown in FIG. 3, the area determination of the color temperature of the light source for the points where the chromaticity values of all sampling points are plotted. And the number of plotted points belonging to the color temperature area of each light source is totaled.
  • the color temperature of the light source of the block is estimated from the order of the number of plotted points belonging to the aggregated color temperature area of each light source, for example, according to the conditions shown in Table 1 below.
  • the color temperature estimation unit 12 estimates the color temperature of the light source for all 36 blocks using the above method. Thereby, for example, the estimation result of the color temperature of the light source as shown in FIG.
  • the color temperatures of the light sources of all the blocks are estimated in this way, the color temperatures of the light sources in most blocks estimated by the color temperature estimation unit 12 are correct compared to the actual visual result. Some blocks can be wrong. If the block size is small, the subject is likely to be a subject of the same color locally, and as a result, the estimation of the color temperature of the light source by the color temperature estimation unit 12 is also likely to be erroneous.
  • the area color information calculation unit 13 applies the following to the image of each block divided by the image area division unit 11 at the same time as the estimation of the color temperature of the light source by the color temperature estimation unit 12, for example:
  • the method calculates the color information of the image for each block.
  • FIG. 4 is an explanatory diagram illustrating an example of light source saturation information calculated for each area by the area color information calculation unit 13.
  • the area color information calculation unit 13 calculates the saturation value of each block with respect to the image of each block divided into 6 ⁇ 6 by the image area division unit 11.
  • the saturation value is obtained by converting the input Bayer pattern RAW image into a color space of hue (H), saturation (S), and brightness (V) such as HSV based on the RGB information of each area. it can.
  • RGB is an input value normalized in the range from 0 to 1
  • MAX maximum input value among the three input values of R, G, and B
  • MIN minimum input value
  • the area color information calculation unit 13 may calculate the saturation average value, the standard deviation of saturation, and the like as the saturation information value from the saturation value of each area. Further, regarding the saturation of the entire screen, a flatness index or the like indicating whether or not the data change in each pixel is a flat region of a predetermined value or less is calculated as a saturation information value, as described in JP-A-2008-92447. May be.
  • FIG. 5 is an explanatory diagram showing an example of a detailed configuration of the WB control unit 14 in the multi-area white balance control device of FIG.
  • the WB control unit 14 in the example of FIG. 5 includes a single area WB coefficient generation unit 14a as a single area white balance coefficient generation unit, a multi-area white balance coefficient generation unit 14b as a multi-area white balance coefficient generation unit, and a white balance It comprises a WB selection / synthesis unit 14c as a coefficient synthesis means.
  • the single area WB coefficient generation unit 14 a generates a single area white balance coefficient based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12. More specifically, the color temperature estimation unit 12 uses, for example, the color temperature of the light source estimated for each area shown in FIG. Estimate temperature. The single area WB coefficient generation unit 14 a generates a single area white balance coefficient based on the color temperature of the light source of the single area estimated by the color temperature estimation unit 12.
  • the function for generating the white balance coefficient is G
  • the white balance coefficient can be indicated as Ga.
  • the multi-area WB coefficient generation unit 14b generates a multi-area white balance coefficient based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12. More specifically, the multi-area WB coefficient generation unit 14b uses, for example, the color temperature of the light source estimated for each area by the color temperature estimation unit 12 illustrated in FIG. In addition, multi-area white balance coefficients Ga, Gb, Gc are generated.
  • the G function indicating the white balance coefficient generated by the WB coefficient generation units 14a and 14b based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12 may be a mathematical expression. Alternatively, it may be recorded as a numerical value in a lookup table.
  • An example of a look-up table in which is recorded is shown in FIG.
  • the WB selection / synthesis unit 14c combines the multi-area white balance coefficient generated by the multi-area WB coefficient generation unit 14b and the single-area white balance coefficient generated by the single-area WB coefficient generation unit 14a to generate a white balance coefficient. calculate.
  • the WB selection / synthesis unit 14c increases the multi-area white balance coefficient and the single area white balance as the color information value of the image in the area calculated by the area color information calculation unit 13 increases. Increase the composite ratio of the multi-area white balance coefficient among the coefficients.
  • the WB selection / combination unit 14c sets the combination ratio of the multi-area white balance coefficient and the single area white balance coefficient based on the saturation evaluation value as saturation information, as shown in FIG. It is configured so that it can be determined. More specifically, for example, in the example of FIG. 8, the WB selection / synthesis unit 14 c is based on the saturation evaluation value Fs of the area calculated by the color information calculation unit 13, and the multi-area white balance coefficient and the single area white balance. Select one of the coefficients.
  • the white balance selection / synthesis unit 14c selects the multi-area white balance coefficient when the saturation evaluation value Fs is high, and single area white when the saturation evaluation value Fs is low.
  • the WB selection / combination unit 14c selects a multi-area white balance coefficient when the saturation evaluation value Fs is high, and selects a single area white balance coefficient when the saturation evaluation value is low.
  • the white balance coefficient is determined by weighting and combining the multi-area white balance coefficient and the single area white balance coefficient.
  • ⁇ and ⁇ are adjustment coefficients.
  • the WB selection / synthesis unit 14c increases the synthesis ratio of the multi-area white balance coefficient as the saturation evaluation value Fs increases.
  • the saturation evaluation value Fs is low, the WB selection / combination unit 14c uses a single area as shown in FIG. 8 in order to minimize the failure of the multi-area white balance processing in an image with low saturation. Increase the white balance coefficient weight.
  • the WB selection / synthesis unit 14c selects a single area white balance coefficient for an image that occupies many areas with low saturation.
  • the WB selection / synthesis unit 14c selects a multi-area white balance coefficient for an image that occupies many areas with high saturation.
  • the WB control unit 14 may increase the composition ratio of the light source color temperature for each area estimated by dividing into a plurality of areas as the saturation evaluation value Fs is higher.
  • the configuration of the WB control unit 14 in that case will be described later as a second embodiment.
  • the saturation evaluation value Fs is calculated from the average saturation As and saturation standard deviation Ss of each area, but the calculation of the saturation evaluation value Fs is limited to the above calculation method. Any calculation method may be used as long as it can evaluate the saturation.
  • the white balance processing information is finally obtained.
  • the WB gain correction unit 15 stores the white balance coefficient for the digital image data stored in the image storage unit 23 and input by control means (not shown).
  • the white balance processing is performed on the pixel values of the respective colors corresponding to the positions of the input images. Thereby, the white balance of the entire input image is corrected.
  • the white balance processing information acquired by the WB control unit 14 is not limited to this.
  • a white balance gain map may be generated instead of the white balance coefficient.
  • the WB control unit 14 generates a single area WB gain map generation unit 14′a as a single area white balance gain map generation unit and a multi area WB gain map generation as a multi area white balance gain map generation unit. 14'b and a WB gain map selection / synthesis unit 14'c as white balance gain map synthesis means.
  • reference numeral 14'd denotes a gain map storage unit that stores the white balance gain map synthesized by the WB gain map selection / synthesis unit 14'c.
  • the single area WB gain map generation unit 14′a generates a single area white balance gain map based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12.
  • the multi-area WB gain map generation unit 14′b generates a multi-area white balance gain map based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12.
  • the WB gain map selection / synthesis unit 14′c includes a single area white balance gain map generated by the single area WB gain map generation unit 14′a and a multi area white balance generated by the multi area WB gain map generation unit 14′b.
  • a white balance gain map is generated by combining the gain map.
  • the white balance gain map generated by the WB gain map selection / synthesis unit 14'c is stored in the gain map storage unit 14'd. Then, the WB gain correction unit 15 performs white balance processing on the digital image data stored in the image storage unit 23 and input by control means (not shown).
  • the WB gain correction unit 15 is configured to be able to enlarge and apply a white balance gain map while performing the white balance processing. In addition, when enlarging, you may comprise so that a boundary part can also be smoothed.
  • FIG. 10 is a block diagram of a digital camera provided with a multi-area white balance control device according to a second embodiment of the present invention.
  • the multi-area white balance control device 1 of this embodiment estimates a single area obtained based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12 and the color temperature of the estimated light source in each area.
  • the color temperature of the light source in each area is calculated by combining the color temperature of the light source, and the white balance coefficient is calculated based on the calculated color temperature of the light source in each area.
  • the WB control unit 14 includes a color temperature selection / synthesis unit 14 ′′ a as a color temperature synthesis unit and a WB coefficient generation unit 14 ′′ b as a white balance coefficient generation unit.
  • the color temperature selection / synthesis unit 14 ′′ a is a single area estimated light source obtained based on the color temperature of the light source in each area estimated by the color temperature estimation unit 12 and the estimated color temperature of the light source in each area. The color temperature of the light source in each area is calculated by synthesizing the color temperature. Further, the color temperature selection / combination unit 14 ′′ a, for example, the color temperature of a single area calculated from the estimated color temperature of each area shown in FIG. 1B and the estimated color temperature of the light source.
  • the correlation of the combination ratio shown in Fig. 8 and the saturation information value Fs calculated by the area color information calculation unit 13 are used, for example, the higher the saturation information value, the more estimated each area. Increase the composition ratio of the color temperature of the light source.
  • the WB coefficient generation unit 14 ′′ b generates a white balance coefficient based on the color temperature of the light source in each area calculated by the color temperature selection / synthesis unit 14 ′′ a.
  • Other configurations and operational effects are substantially the same as those of the multi-area white balance control device 1 in the examples of FIGS.
  • the WB control unit 14 may generate a white balance gain map instead of the white balance coefficient, for example, as shown in FIG.
  • the WB control unit 14 includes a color temperature selection / synthesis unit 14 ′′ ′ a as a color temperature synthesis unit and a WB gain map generation unit 14 ′′ ′ b as a white balance gain map generation unit.
  • 14 ′′ ′ d is a gain map storage unit that stores the white balance gain map generated by the WB gain map generation unit 14 ′′ ′ b.
  • the white balance gain map generated by the WB gain map generation unit 14 "'b is stored in the gain map storage unit 14"' d. Then, the WB gain correction unit 15 performs white balance processing on the digital image data stored in the image storage unit 23 and input by control means (not shown).
  • the WB gain correction unit 15 is configured to be able to enlarge and apply a white balance gain map while performing the white balance processing. In addition, when enlarging, you may comprise so that a boundary part may be smoothed.
  • the estimated color temperature of the light source of each area and the calculated color information of the image of each area are obtained. If white balance processing information is used and the calculated color information value of the image in the area is high, the multi-area white balance and the single area white balance have a higher multi-area white balance ratio. Since the information for balance processing was acquired, and when the color information value of the image is low, the information for white balance processing with a higher ratio of single area white balance between multi-area white balance and single area white balance is acquired. The estimated color temperature of the light source in the area is incorrect It can acquire the white balance processing information of the area as a more appropriate information. As a result, when white balance processing is performed on the entire input image based on appropriate white balance processing information for each area, it is possible to generate an image that does not give a sense of incongruity to the color reproduction of the area in the entire input image. .
  • the image area dividing unit 11 as an area dividing unit divides an input image into blocks having the same shape and area divided by vertical and horizontal straight lines.
  • the shape and size of each area divided by the area dividing means in the multi-area white balance control device of the present invention is not limited to this embodiment, and for example, any shape such as a triangular shape, a curved shape, etc. The shape may be sufficient and the size of each area may differ.
  • the multi-area white balance control device 1 of each embodiment includes an image area dividing unit 11 (area dividing unit), a color temperature estimating unit 12 (light source color temperature estimating unit), and an area color information calculating unit 13 (area image color information). (Calculation means) and a computer recorded on a hard disk containing a multi-area white balance control program for functioning as the WB control unit 14 (white balance control means).
  • the multi-area white balance control device 1 of this embodiment includes an image area dividing unit 11 (area dividing unit), a color temperature estimating unit 12 (light source color temperature estimating unit), and an area color information calculating unit 13 (area image color information).
  • the multi-area white balance image processing apparatus 10 of each embodiment includes a computer that includes an image area dividing unit 11 (area dividing unit), a color temperature estimating unit 12 (light source color temperature estimating unit), and an area color information calculating unit 13 (area).
  • a computer which records a multi-area white balance image processing program for functioning as an image color information calculation unit), a WB control unit 14 (white balance control unit), and a WB gain correction unit 15 (white balance processing unit). It may be configured.
  • the multi-area white balance image processing apparatus 10 includes a computer with an image area dividing unit 11 (area dividing unit), a color temperature estimating unit 12 (light source color temperature estimating unit), and an area color information calculating unit 13. (Area image color information calculation means), a WB control section 14 (white balance control means), a multi-area white balance image processing program for functioning as a WB gain correction section 15 (white balance processing means) is recorded, for example, a CD A computer-readable medium such as a ROM may be used.
  • the saturation information is used as the color information of the image of the area calculated by the area color information calculation unit 13 .
  • the area color information calculation unit 13 calculates,
  • the color information of the image in the area is not limited to the saturation information, and for example, information on Cr and Cb (color component information and chromaticity information) may be used.
  • Multi-area white balance control apparatus multi-area white balance control method, multi-area white balance control program, computer recording multi-area white balance control program, multi-area white balance image processing apparatus, multi-area white balance image processing method
  • a multi-area white balance image processing program, a computer having a multi-area white balance image processing program recorded thereon, and an imaging apparatus having a multi-area white balance image processing apparatus are so-called mixed light source image white images captured with a plurality of different light sources. This is useful in fields where balance correction is required.
  • Multi area white balance control apparatus 10
  • Multi area white balance image processing apparatus 11
  • Area division means (image area division part) 12
  • Light source color temperature estimation means (color temperature estimation unit) 13
  • area image color information calculation means (area color information calculation unit) 14
  • White balance control means (WB control unit) 14a Single area white balance coefficient generation means (single area WB coefficient generation unit) 14'a single area white balance gain map generation means (single area WB gain map generation unit) 14 "a, 14"'a Color temperature synthesis means (color temperature selection / synthesis unit) 14b
  • Multi-area white balance coefficient generation means multi-area WB coefficient generation unit) 14'b
  • Multi-area white balance gain map generation means (multi-area WB gain map generation unit) 14 "b
  • White balance coefficient generation means (WB coefficient generation unit) 14 "'b
  • White balance gain map generation means (WB gain map generation unit) 14c
  • White balance coefficient synthesis means (WB selection / synthesis unit) 14'c
  • White balance gain map synthesis means

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

【課題】撮影画像全体を複数エリアに分割して光源の色温度を推定しホワイトバランス処理を行ったときに、色再現に違和感のない画像を生成可能なマルチエリアホワイトバランス制御装置の提供。 【解決手段】入力画像を複数エリアに分割する装置１１、分割されたエリア毎に光源の色温度を推定する装置１２、分割されたエリア毎に画像の色情報を算出する装置１３、推定された各エリアの光源の色温度と算出された各エリアの画像の色情報とを用いてエリア毎のホワイトバランス処理用情報を取得する装置１４を備える。算出された当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランス、低い場合はシングルエリアホワイトバランスの比率を夫々高くしたホワイトバランス処理用情報を取得する。

Description

マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
　本発明は、複数の光源で照明されたシーンを撮影した画像における色温度を、画像を分割したエリア毎に推定し、ホワイトバランス補正を行うことで、画像全体における違和感の無い色再現を実現するためのマルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置に関する。
　撮影光源は、日中の屋外であれば太陽の高度・大気の状態などに依存してその色温度が変化する。また、日向と日陰でも色温度が異なる。
　屋内では蛍光灯や白熱灯など様々な人工照明があり、それぞれの光源の色温度が異なる。
　昼間の室外でフラッシュ撮影した場合、フラッシュ照明と外光の混合光が撮影光源となる。
　夜の室外でフラッシュ撮影した場合、フラッシュ照明と背景の人工照明とは混合しないが、同じシーンの中の異なるエリアでは、光源の色温度が異なる。
　室内でフラッシュ撮影した場合、フラッシュ照明と人工照明が混じりあった光が、撮影光源となる。
　上記のような様々な撮影光源の下では、人間の眼は色順応する。つまり、人間の眼は、光源が太陽光、人工照明、それらのミックス光の如何を問わず、注目エリアの白い被写体を白く感じる。この人間の眼の特性に合わせて入力装置であるカメラも、ＲＧＢのゲインを調整して、いわゆるホワイトバランス処理を行うように構成されている。
　しかし、カメラにとっては、撮影前まで撮影光源が未知であるため、一般的には撮影照明の種類（光源の色温度）を撮影した画像から推定したり、もしくはユーザーが指定することによって、その照明種類に合わせて撮影した画像全体のホワイトバランスを補正する。
　被写体のシーンが複数の光源によって照明された場合、シーン内におけるエリアの光源の色温度に関わらず、画像全体のホワイトバランス処理を高精度に行うためには、取得した画像を複数のエリアに分割し、分割したエリア毎に対応する光源の色温度を検出し、異なるホワイトバランス処理を行う必要がある。
　従来、複数の光源で照明されたシーンを撮影した画像のホワイトバランス処理を行う方法としては、例えば、特許文献１によれば、撮像画面内に異なる種類の光源の照射エリアが存在する場合に撮像画面全体に適切なホワイトバランスを掛けることが難しく、色ずれが生じた撮像画像になってしまうという問題を解決するために、撮像画面内を輝度情報と色情報とに応じて複数の領域に分割し、複数の領域のそれぞれに対して異なるホワイトバランス補正係数を設定し、前記複数の領域のそれぞれに対して設定されたホワイトバランス補正係数の差を、所定範囲内に収めるホワイトバランス補正係数リミットを設けて、全画面のホワイトバランス補正係数を生成することが開示されている。
特開２０１０－２１３２３２公報
　ところで、従来、複数の異種光源により撮影を行った所謂ミックス光源画像のホワイトバランス補正技術では、ホワイトバランスの補正に先立ち、入力された画像を複数のエリアに分割し、該分割されたエリアごとに、例えば、一般的に行われている光源色温度推定方法を用いて、ミックス光源画像を撮影した際の撮影光源の色温度を推定している。
　しかし、各分割エリアが入力画像のシーンの一部であるため、各エリアの被写体が単一な色の被写体になり易く、分割エリアの光源の色温度を間違った色温度に推定してしまい易い。
　例えば、図１に示すような単一照明光で撮影された画像に対して、分割した各エリアの光源の色温度を推定する場合、エリアによっては光源の色温度を間違えて推定してしまうことが起こりうる。
　このため、画像を複数のエリアに分割して、各エリアの光源の色温度の推定結果に基づいてホワイトバランス処理を行うと、正確な推定された光源の色温度が得られず、ホワイトバランス係数などのホワイトバランス処理要素の最適値が定まらないときに、色再現に違和感のある画像が生成される可能性がある。
　特許文献１に記載されている方法は、分割された複数の領域のそれぞれのホワイトバランス補正係数（即ち、光源の色温度に対応する制御値）を設定しており、そもそも推定（または設定）する光源の色温度が間違っていることが想定されていない。このため、特許文献１に記載されている方法では、分割された複数の領域にそれぞれ設定された補正係数の差を所定範囲内に収める補正係数リミットが設けられてはいるものの、分割された複数の領域の推定された光源の色温度を間違った場合、間違った推定された光源の色温度に対応して設定される、分割された複数の領域のそれぞれのホワイトバランス補正係数を用いてホワイトバランスを補正したときに、色再現に違和感のある画像が生成される可能性がある。
　本発明は、以上の従来技術における問題を鑑みてなされたものであり、撮影画像全体を複数のエリアに分割して、それぞれのエリアの光源の色温度を推定し、推定した光源の色温度を用いてホワイトバランス処理を行ったときに、個別のエリアにおいて推定した光源の色温度が間違っていても、色再現に違和感のない画像を生成することの可能なマルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置を提供することを目的としている。
　上記目的を達成するため、本発明によるマルチエリアホワイトバランス制御装置は、入力画像を複数のエリアに分割するエリア分割手段と、前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段と、前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段と、前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いて、エリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段とを備える。前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報である。
　また、本発明によるマルチエリアホワイトバランス制御方法は、入力画像を複数のエリアに分割し、分割したエリア毎に光源の色温度を推定し、分割したエリア毎に画像の色情報を算出し、推定した、各エリアの光源の色温度と、算出した、各エリアの画像の色情報とを用いてエリア毎のホワイトバランス処理用情報を取得する。ホワイトバランス処理用情報の取得は、前記算出した当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得することにより行われる。
　また、本発明によるマルチエリアホワイトバランス制御プログラムを記録したコンピュータは、マルチエリアホワイトバランス制御装置に備わるコンピュータであって、前記コンピュータを、入力画像を複数のエリアに分割するエリア分割手段、前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段、前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段、前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いて、エリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段として機能させるためのマルチエリアホワイトバランス制御プログラムを記録している。前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報である。
　また、本発明によるマルチエリアホワイトバランス制御プログラムは、マルチエリアホワイトバランス制御装置に備わるコンピュータが読み取り可能なマルチエリアホワイトバランス制御プログラムであって、前記コンピュータを、入力画像を複数のエリアに分割するエリア分割手段、前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段、前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段、前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いてエリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段として機能させる。前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報である。
　本発明によれば、撮影画像全体を複数のエリアに分割して、それぞれのエリアの色温度を推定する場合、個別のエリアにおいて推定した光源の色温度が間違っていても、色再現に違和感のない画像を生成することの可能なマルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置が得られる。
入力画像を複数のエリアに分割したときの光源の色温度の推定結果の一例を示す説明図で、(a)は入力画像を６×６のエリアに分割した状態の一例を示す図、(b)はエリア毎に推定された光源の色温度の一例を示す説明図である。 本発明の第１実施形態にかかるマルチエリアホワイトバランス制御装置を備えたデジタルカメラのブロック図である。 （Ｒ／Ｇ，Ｂ／Ｇ）色度図における被写体の色分布から光源の色温度を推定する際における、画像データにおける全ての画素を色度図上にプロットし、色度図上での予め設定した各種の光源の色温度エリア判定基準に従い、プロットした点についての光源の色温度の判定を行うための、色度図及びエリア判定基準の一例を示すグラフである。 図２のマルチエリアホワイトバランス制御装置において、入力画像がエリア分割されエリア画像色情報算出手段により、エリア毎に算出された光源の彩度情報の一例を示す説明図である。 図２のマルチエリアホワイトバランス制御装置における、ホワイトバランス制御部の詳細構成の一例を示す説明図である。 図５のマルチエリアホワイトバランス制御装置のホワイトバランス制御部に備わるマルチエリアホワイトバランス係数生成部により生成された、エリア毎のホワイトバランス係数の一例を示す説明図である。 図５のマルチエリアホワイトバランス制御装置のホワイトバランス制御部に備わる各ホワイトバランス係数生成部が夫々のホワイトバランス係数を生成する際に適用可能な推定された光源の色温度に対する各ホワイトバランス係数を記録したルックアップテーブルの一例を示す説明図である。 図５のマルチエリアホワイトバランス制御装置のホワイトバランス制御部に備わるホワイトバランス選択合成部における、マルチエリアホワイトバランス係数とシングルエリアホワイトバランス係数の合成比率の概念を示す説明図である。 図２のマルチエリアホワイトバランス制御装置における、ホワイトバランス制御部の詳細構成の変形例を示す説明図である。 本発明の第２実施形態にかかるマルチエリアホワイトバランス制御装置を備えたデジタルカメラのブロック図である。 図１０のマルチエリアホワイトバランス制御装置における、ホワイトバランス制御部の詳細構成の一例を示す説明図である。
　実施例の説明に先立ち、本発明の作用効果について説明する。
　本発明は、入力画像を複数のエリアに分割し、分割したエリア毎に光源の色温度を推定し、分割したエリア毎に画像の色情報を算出し、推定した、各エリアの光源の色温度と、算出した、各エリアの画像の色情報とを用いてホワイトバランス処理用情報を取得する。算出した当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得するようにしている。
　本発明のように、推定した、各エリアの光源の色温度と、算出した、各エリアの画像の色情報とを用いてホワイトバランス処理用情報を取得し、且つ、算出した、当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得すれば、推定した当該エリアの光源の色温度が間違っていても、当該エリアのホワイトバランス処理用情報をより適正な情報として取得することができる。その結果、各エリアの適正なホワイトバランス処理用情報に基づいて、入力画像全体のホワイトバランス処理を行ったときに、入力画像全体における当該エリアの色再現に違和感のない画像を生成することができる。
　以下、本発明の実施形態について、図面を参照して説明する。なお、以下の実施の形態は特許請求の範囲に係る本発明を限定するものではない。
第１実施形態
　図２は本発明の第１実施形態にかかるマルチエリアＡＷＢ（オートホワイトバランス）制御装置を備えたデジタルカメラのブロック図である。図２中、一点鎖線で囲んだ部分が本実施形態にかかるマルチエリアホワイトバランス制御装置、二点鎖線で囲んだ部分がマルチエリアホワイトバランス画像処理装置に対応する構成である。
　本実施形態のマルチエリアホワイトバランス制御装置１は、図２に示すように、エリア分割手段としての画像エリア分割部１１と、光源色温度推定手段としての色温度推定部１２と、エリア画像色情報算出手段としてのエリア色情報算出部１３と、ホワイトバランス制御手段としてのＷＢ（ホワイトバランス）制御部１４を有している。図２中、１０はホワイトバランス画像処理装置、１５はホワイトバランス処理手段としてのＷＢ（ホワイトバランス）ゲイン補正部、２１はレンズ、２２はイメージセンサ、２３はイメージセンサ２２が撮像した画像を記憶する画像記憶部である。なお、本実施形態のマルチエリアホワイトバランス制御装置１を備えたデジタルカメラは、図示しない制御部を備えている。制御部は、撮影指示に基づきイメージセンサ２２が撮影した画像を画像記憶部２３に記憶する機能や、画像記憶部２３に記憶されている画像を入力する機能を、夫々別個に備えている。図２の例では、図示しない制御部の撮影指示により、レンズ２１を経てイメージセンサ２２に結像された画像が撮像されデジタル信号として画像記憶部２３に記憶されている。
　画像エリア分割部１１は、入力画像を予め決められたサイズの複数のブロックに分割する。
　色温度推定部１２は、画像エリア分割部１１により分割されたブロック毎に光源の色温度を推定する。色温度推定部１２は、さらに、推定した各エリアの光源の色温度に基づき、シングルエリアの光源の色温度を推定する。なお、光源の色温度の推定方法については後述する。
　エリア色情報算出部１３は、画像エリア分割部１１によって分割されたブロック毎に画像の色情報を推定する。なお、画像の色情報の算出方法については後述する。
　ＷＢ制御部１４は、色温度推定部１２によって推定された、各エリアの光源の色温度と、エリア色情報算出部１３によって算出された、各エリアの画像の色情報とを用いてホワイトバランス処理用情報を取得する。エリア色情報算出部１３によって算出された、当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得する。なお、ホワイトバランス処理用情報の取得方法については後述する。
　ＷＢゲイン補正部１５は、ＷＢ制御部１４によって取得されたホワイトバランス処理用情報に基づき、入力画像全体のホワイトバランスを補正する。
　このように構成された本実施形態のマルチエリアホワイトバランス制御装置を用いた入力画像からホワイトバランス補正のためのホワイトバランス処理用情報を取得するまでの処理の流れを説明する。
　まず、図示しないデジタルカメラの制御部が、画像記憶部２３に記憶されている画像データを入力する。
　次いで、画像エリア分割部１１が、入力された画像データを予め決められたサイズの複数のブロックに分割する。なお、便宜上、以下の説明では画像データは６×６のブロックに分割するものとする。
　次いで、色温度推定部１２が、画像エリア分割部１１によって分割された各ブロックの画像に対して、例えば、次のような方法で、ブロック毎の光源の色温度の推定を行う。
　例えば、イメージセンサの有効画素が４８００×３６００画素であるものとする。入力されるベイヤーパターンのＲＡＷ画像は、画像エリア分割部１１により６×６のブロックに分割され、各ブロックのサイズは８００×６００画素となっている。
　光源の色温度の推定に先立ち、この８００×６００画素のブロックに対して、更に、例えば、２０×２０の画素範囲を１つのサンプリングポイントとし、２０×２０の画素範囲内にあるＲ、Ｇ、Ｂそれぞれの画素値の平均値を求めることで、ダウンサンプリングした４０×３０画素のサンプリングポイントを有するＲ、Ｇ、Ｂそれぞれの画素データを得る。
　この４０×３０画素のサンプリングポイントに対して、色度値（Ｒ／Ｇ，Ｂ／Ｇ）を求め、各サンプリングポイントの色度値を、例えば、図３に示す色度図上にプロットする。そして、例えば、図３に示すような、色度図上での各種の光源の色温度エリア判定基準を用いて、全てのサンプリングポイントの色度値をプロットした点について光源の色温度のエリア判定を行い、各光源の色温度エリアに属するプロットした点の個数を集計する。集計した各光源の色温度エリアに属するプロットした点の個数の大小の順位から、例えば、次の表１に示すような条件に従い、当該ブロックの光源の色温度を推定する。
Figure JPOXMLDOC01-appb-T000001
　色温度推定部１２は、３６個のブロック全てに対して、上記方法を用いて光源の色温度推定を行う。これにより、画像全体に対して、例えば、図１（ｂ）に示すような光源の色温度の推定結果が得られる。
　このようにして全てのブロックの光源の色温度を推定した場合、実際の目視結果と比べて、色温度推定部１２が推定した大半のブロックにおける光源の色温度は、正しいものとなるが、一部のブロックでは間違ったものとなりうる。ブロックのサイズが小さいと、局所的に同じ色の被写体になり易く、その結果、色温度推定部１２による光源の色温度の推定も間違い易くなる。
　また、エリア色情報算出部１３が、色温度推定部１２による光源の色温度の推定と同時期に、画像エリア分割部１１によって分割された各ブロックの画像に対して、例えば、次のような方法で、ブロック毎の画像の色情報の算出を行う。
　図４はエリア色情報算出部１３により、エリア毎に算出された光源の彩度情報の一例を示す説明図である。
　図４の例では、エリア色情報算出部１３は、画像エリア分割部１１によって６×６に分割された各ブロックの画像に対して、各ブロックの彩度値を算出している。
　彩度値は入力のベイヤーパターンのＲＡＷ画像から、各エリアのＲＧＢ情報をもとにＨＳＶ等の色相（Ｈ）、彩度（Ｓ）、明度（Ｖ）の色空間に変換して求めることができる。例えばＲＧＢが０から１までの範囲で規格化された入力値のとき、Ｒ、Ｇ、Ｂの三つの入力値のうち、最大の入力値をＭＡＸ、最小の入力値をＭＩＮと定義すると、ＨＳＶは夫々次式で表すことができる。
Figure JPOXMLDOC01-appb-I000002
さらに　Ｈ ＋＝３６０，　ｉｆ　Ｈ　＜　０
 
Figure JPOXMLDOC01-appb-I000003
　なお、エリア色情報算出部１３は、各エリアの彩度値から彩度平均値や彩度の標準偏差等を彩度情報値として算出しても良い。また画面全体における彩度について特開２００８－９２４４７号公報に記載の、各画素におけるデータの変化が所定値以下の平坦領域であるか否かを示す平坦度指標等を彩度情報値として算出しても良い。
　次いで、ＷＢ制御部１４は、色温度推定部１２によって推定された、各エリアの光源の色温度と、エリア色情報算出部１３によって算出された、各エリアの画像の色情報とを用いてホワイトバランス処理用情報を取得する。図５は図２のマルチエリアホワイトバランス制御装置における、ＷＢ制御部１４の詳細構成の一例を示す説明図である。
　図５の例のＷＢ制御部１４は、シングルエリアホワイトバランス係数生成手段としてのシングルエリアＷＢ係数生成部１４ａと、マルチエリアホワイトバランス係数生成手段としてのマルチエリアホＷＢ係数生成部１４ｂと、ホワイトバランス係数合成手段としてのＷＢ選択合成部１４ｃとで構成されている。
　シングルエリアＷＢ係数生成部１４ａは、色温度推定部１２によって推定された各エリアの光源の色温度に基づき、シングルエリアホワイトバランス係数を生成する。
　より詳しくは、色温度推定部１２は、例えば、図１(b)に示す、エリア毎に推定した光源の色温度を用いて、例えば、次の表２の条件で、シングルエリアの光源の色温度を推定する。シングルエリアＷＢ係数生成部１４ａは、色温度推定部１２によって推定されたシングルエリアの光源の色温度に基づき、シングルエリアホワイトバランス係数を生成する。
Figure JPOXMLDOC01-appb-T000004
　ここで、ホワイトバランス係数を生成する関数をＧとすると、図１(b)に示す、エリア毎に推定された光源の色温度を用いた場合のシングルエリアの光源の色温度はＡ、シングルエリアホワイトバランス係数は、Ｇａと示すことができる。
　マルチエリアＷＢ係数生成部１４ｂは、色温度推定部１２によって推定された各エリアの光源の色温度に基づき、マルチエリアホワイトバランス係数を生成する。
　より詳しくは、マルチエリアＷＢ係数生成部１４ｂは、例えば、図１(b)に示す、色温度推定部１２によってエリア毎に推定された光源の色温度を用いて、例えば、図６に示すように、マルチエリアホワイトバランス係数Ｇａ，Ｇｂ，Ｇｃを生成する。
　なお、色温度推定部１２によって推定された各エリアの光源の色温度に基づいて、ＷＢ係数生成部１４ａ、１４ｂが夫々生成するホワイトバランス係数を示すＧの関数は、数式であってもよいし、ルックアップテーブルに数値として記録したものであってもよい。図５のマルチエリアホワイトバランス制御装置のＷＢ制御部１４に備わる各ＷＢ係数生成部１４ａ、１４ｂが夫々のホワイトバランス係数を生成する際に適用可能な推定された光源の色温度に対する各ホワイトバランス係数を記録したルックアップテーブルの一例を図７に示す。
　ＷＢ選択合成部１４ｃは、マルチエリアＷＢ係数生成部１４ｂによって生成されたマルチエリアホワイトバランス係数とシングルエリアＷＢ係数生成部１４ａによって生成されたシングルエリアホワイトバランス係数とを合成することによりホワイトバランス係数を算出する。ここで、ＷＢ選択合成部１４ｃは、ホワイトバランス係数の算出に際し、エリア色情報算出部１３によって算出された、当該エリアの画像の色情報の値が高いほどマルチエリアホワイトバランス係数とシングルエリアホワイトバランス係数のうちマルチエリアホワイトバランス係数の合成比率を高くする。
　例えば、ＷＢ選択合成部１４ｃは、ホワイトバランス係数の算出に際し、図８に示すように、彩度情報としての彩度評価値に基づき、マルチエリアホワイトバランス係数とシングルエリアホワイトバランス係数の合成比率を決定することができるように構成されている。
　より詳しくは、例えば、図８の例では、ＷＢ選択合成部１４ｃは、色情報算出部１３によって算出された、当該エリアの彩度評価値Ｆｓに基づき、マルチエリアホワイトバランス係数とシングルエリアホワイトバランス係数のいずれかを選択する。ここで、図８(a)の例では、ホワイトバランス選択合成部１４ｃは、彩度評価値Ｆｓが高い場合はマルチエリアホワイトバランス係数を選択し、彩度評価値Ｆｓが低い場合はシングルエリアホワイトバランス係数を選択する。また、図８(b)の例では、ＷＢ選択合成部１４ｃは、彩度評価値Ｆｓが高い場合はマルチエリアホワイトバランス係数を選択し、彩度評価値が低い場合はシングルエリアホワイトバランス係数を選択するとともに、彩度評価値Ｆｓがそれらの中間値である場合はマルチエリアホワイトバランス係数とシングルエリアホワイトバランス係数のそれぞれに対応する重み付けを行い合成することによってホワイトバランス係数を決定する。
　なお、彩度評価値Ｆｓは、例えば、彩度平均値Ａｓ、彩度標準偏差Ｓｓを用いて、次式
　　　Ｆｓ（Ａｓ，Ｓｓ）＝Ａｓ＊α＋Ｓｓ＊β
を用いて算出することができる。ここで、α，βは調整係数である。ＷＢ選択合成部１４ｃは、彩度評価値Ｆｓが高いほどマルチエリアホワイトバランス係数の合成比率を高くする。一方、彩度評価値Ｆｓが低い場合は、ＷＢ選択合成部１４ｃは、彩度の低い画像でのマルチエリアホワイトバランス処理の失敗を最小限に抑えるために、図８に示すように、シングルエリアホワイトバランス係数の重み付けを高くする。
　彩度の低いエリアが多く占める画像は、複数のエリアに分割してエリア毎の光源の色温度を推定した場合、推定した光源の色温度の誤りによって、まだら模様になる可能性があり、彩度の高いエリアが多く占める画像に比べてまだら模様が目立つ。このため、ＷＢ選択合成部１４ｃは、彩度の低いエリアが多く占める画像に対しては、シングルエリアホワイトバランス係数を選択する。
　一方、彩度の高いエリアが多く占める画像に対しては、ＷＢ選択合成部１４ｃは、マルチエリアホワイトバランス係数を選択する。
　なお、ＷＢ制御部１４は、彩度評価値Ｆｓが高いほど複数のエリアに分割して推定したエリア毎の光源色温度の合成比率を高くするようにしてもよい。その場合のＷＢ制御部１４の構成については、第２実施形態として後述する。
　また、ここでは、彩度評価値Ｆｓは、各エリアの彩度の平均値Ａｓと彩度の標準偏差Ｓｓから算出しているが、彩度評価値Ｆｓの算出は、上記計算方法に限定されるものではなく、彩度を評価できる方法であれば、どのような計算方法を用いてもよい。
　例えば、シングルエリアホワイトバランス係数をＧ（single）、マルチエリアホワイトバランス係数をＧ（multi）、彩度評価値をＦｓ、合成比率をＢ（Ｆｓ）とすると、ホワイトバランス処理用情報として最終的に適用されるエリア毎のホワイトバランス係数Ｇ（area）は、次式
　　　Ｇ（area）＝Ｇ（single）＊（１－Ｂ（Ｆｓ））＋Ｇ（multi）＊Ｂ（Ｆｓ）
を用いて算出することができる。
　ＷＢ選択合成部１４ｃが全てのエリアのホワイトバランス係数を算出後、ＷＢゲイン補正部１５が、画像記憶部２３に記憶され、図示しない制御手段により入力されたデジタル画像データに対し、ホワイトバランス係数を用いて入力画像の位置に対応して、それぞれの色の画素値にホワイトバランス処理を行う。これにより、入力画像全体のホワイトバランスが補正される。
　なお、図５～図７では、ＷＢ制御部１４が、ホワイトバランス処理用情報として、ホワイトバランス係数を取得した例について説明したが、ＷＢ制御部１４が取得するホワイトバランス処理用情報は、これに限定されるものではなく、例えば、図９に示すように、ホワイトバランス係数の代わりにホワイトバランスゲインマップを生成するようにしてもよい。
　図９の例では、ＷＢ制御部１４は、シングルエリアホワイトバランスゲインマップ生成手段としてのシングルエリアＷＢゲインマップ生成部１４’ａと、マルチエリアホワイトバランスゲインマップ生成手段としてのマルチエリアＷＢゲインマップ生成部１４’ｂと、ホワイトバランスゲインマップ合成手段としてのＷＢゲインマップ選択合成部１４’ｃとを有して構成されている。図９中、１４’ｄはＷＢゲインマップ選択合成部１４’ｃが合成したホワイトバランスゲインマップを記憶するゲインマップ記憶部である。
　シングルエリアＷＢゲインマップ生成部１４’ａは、色温度推定部１２によって推定された各エリアの光源の色温度に基づき、シングルエリアホワイトバランスゲインマップを生成する。
　マルチエリアＷＢゲインマップ生成部１４’ｂは、色温度推定部１２によって推定された各エリアの光源の色温度に基づき、マルチエリアホワイトバランスゲインマップを生成する。
　ＷＢゲインマップ選択合成部１４’ｃは、シングルエリアＷＢゲインマップ生成部１４’ａによって生成されたシングルエリアホワイトバランスゲインマップとマルチエリアＷＢゲインマップ生成部１４’ｂによって生成されたマルチエリアホワイトバランスゲインマップとを合成することによりホワイトバランスゲインマップを生成する。
　ＷＢゲインマップ選択合成部１４’ｃが生成したホワイトバランスゲインマップは、ゲインマップ記憶部１４’ｄに記憶される。そして、ＷＢゲイン補正部１５が、画像記憶部２３に記憶され、図示しない制御手段により入力されたデジタル画像データに対し、ホワイトバランス処理を行う。ＷＢゲイン補正部１５は、このホワイトバランス処理を行うときに、ホワイトバランスゲインマップを補間しながら拡大して適用することができるように構成されている。なお、拡大する際に境界部分をスムージングすることもできるように構成してもよい。
第２実施形態
　図１０は本発明の第２実施形態にかかるマルチエリアホワイトバランス制御装置を備えたデジタルカメラのブロック図である。
　本実施形態のマルチエリアホワイトバランス制御装置１は、色温度推定部１２により推定された各エリアの光源の色温度と、各エリアの推定された光源の色温度に基づき得られるシングルエリアの推定された光源の色温度とを合成することにより各エリアの光源の色温度を算出し、算出した各エリアの光源の色温度に基づき、ホワイトバランス係数を算出するように構成されている。
　より詳しくは、ＷＢ制御部１４は、色温度合成手段としての色温度選択合成部１４”ａと、ホワイトバランス係数生成手段としてのＷＢ係数生成部１４”ｂとで構成されている。
　色温度選択合成部１４”ａは、色温度推定部１２によって推定された、各エリアの光源の色温度と、各エリアの推定された光源の色温度に基づき得られるシングルエリアの推定された光源の色温度とを合成することにより各エリアの光源の色温度を算出する。
　また、色温度選択合成部１４”ａは、例えば、図１(b)に示す各エリアの推定された光源の色温度と、その推定された光源の色温度から算出したシングルエリアの光源の色温度を合成する際に、図８に示した合成比率の相関とエリア色情報算出部１３により算出された彩度情報値Ｆｓを用いる。例えば、彩度情報値が高いほど各エリアの推定された光源の色温度の合成比率を高くする。
　ＷＢ係数生成部１４”ｂは、色温度選択合成部１４”ａにより算出された各エリアの光源の色温度に基づきホワイトバランス係数を生成する。
　その他の構成及び作用効果は、図５～図７の例におけるマルチエリアホワイトバランス制御装置１と略同じである。
　なお、ＷＢ制御部１４は、例えば、図１１に示すように、ホワイトバランス係数の代わりにホワイトバランスゲインマップを生成するようにしてもよい。
　図１１の例では、ＷＢ制御部１４は、色温度合成手段としての色温度選択合成部１４”’ａと、ホワイトバランスゲインマップ生成手段としてのＷＢゲインマップ生成部１４”’ｂとを有して構成されている。図１１中、１４”’ｄは、ＷＢゲインマップ生成部１４”’ｂが生成したホワイトバランスゲインマップを記憶するゲインマップ記憶部である。
　ＷＢゲインマップ生成部１４”’ｂが生成したホワイトバランスゲインマップは、ゲインマップ記憶部１４”’ｄに記憶される。そして、ＷＢゲイン補正部１５が、画像記憶部２３に記憶され、図示しない制御手段により入力されたデジタル画像データに対し、ホワイトバランス処理を行う。ＷＢゲイン補正部１５は、このホワイトバランス処理を行うときに、ホワイトバランスゲインマップを補間しながら拡大して適用することができるように構成されている。なお、拡大する際に境界部分をスムージングすることもように構成してもよい。
　第１及び第２実施形態のマルチエリアホワイトバランス制御装置１及びマルチエリアホワイトバランス制御方法によれば、推定した、各エリアの光源の色温度と、算出した、各エリアの画像の色情報とを用いてホワイトバランス処理用情報を取得し、且つ、算出した、当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得するようにしたので、推定した当該エリアの光源の色温度が間違っていても、当該エリアのホワイトバランス処理用情報をより適正な情報として取得することができる。その結果、各エリアの適正なホワイトバランス処理用情報に基づいて、入力画像全体のホワイトバランス処理を行ったときに、入力画像全体における当該エリアの色再現に違和感のない画像を生成することができる。
　なお、各実施形態のマルチエリアホワイトバランス制御装置１においては、エリア分割手段としての画像エリア分割部１１が、入力画像を縦横夫々の直線で区切られた形状及び面積の等しいブロックに分割した例で説明したが、本発明のマルチエリアホワイトバランス制御装置におけるエリア分割手段が分割する各エリアの形状・大きさは本実施形態に限定されるものではなく、例えば、三角形状、湾曲形状等どのような形状でもよいし、各エリアの大きさが異なっていてもよい。
　また、各実施形態のマルチエリアホワイトバランス制御装置１は、画像エリア分割部１１（エリア分割手段）、色温度推定部１２（光源色温度推定手段）、エリア色情報算出部１３（エリア画像色情報算出手段）、ＷＢ制御部１４（ホワイトバランス制御手段）として機能させるためのマルチエリアホワイトバランス制御プログラムを内蔵するハードディスクに記録したコンピュータで構成してもよい。
　あるいは、本実施形態のマルチエリアホワイトバランス制御装置１は、画像エリア分割部１１（エリア分割手段）、色温度推定部１２（光源色温度推定手段）、エリア色情報算出部１３（エリア画像色情報算出手段）、ＷＢ制御部１４（ホワイトバランス制御手段）として機能させるためのマルチエリアホワイトバランス制御プログラムを記録した、例えば、ＣＤ－ＲＯＭ等のコンピュータ読み取り可能な媒体で構成してもよい。
　さらに、各実施形態のマルチエリアホワイトバランス画像処理装置１０は、コンピュータを画像エリア分割部１１（エリア分割手段）、色温度推定部１２（光源色温度推定手段）、エリア色情報算出部１３（エリア画像色情報算出手段）、ＷＢ制御部１４（ホワイトバランス制御手段）、ＷＢゲイン補正部１５（ホワイトバランス処理手段）として機能させるためのマルチエリアホワイトバランス画像処理プログラムを内蔵するハードディスクに記録したコンピュータで構成してもよい。
　さらに、あるいは、各実施形態のマルチエリアホワイトバランス画像処理装置１０は、コンピュータを画像エリア分割部１１（エリア分割手段）、色温度推定部１２（光源色温度推定手段）、エリア色情報算出部１３（エリア画像色情報算出手段）、ＷＢ制御部１４（ホワイトバランス制御手段）、ＷＢゲイン補正部１５（ホワイトバランス処理手段）として機能させるためのマルチエリアホワイトバランス画像処理プログラムを記録した、例えば、ＣＤ－ＲＯＭ等のコンピュータ読み取り可能な媒体で構成してもよい。
　また、上記各実施形態においては、エリア色情報算出部１３が算出する、当該エリアの画像の色情報として、彩度情報を用いた例について説明したが、エリア色情報算出部１３が算出する、当該エリアの画像の色情報には、彩度情報に限定されるものではなく、例えば、ＣｒとＣｂの情報（色成分情報や色度情報）を用いてもよい。
　本発明のマルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置は、複数の異種光源により撮影を行った所謂ミックス光源画像のホワイトバランスを補正することが求められる分野に有用である。
１　　　　　　マルチエリアホワイトバランス制御装置
１０　　　　　マルチエリアホワイトバランス画像処理装置
１１　　　　　エリア分割手段（画像エリア分割部）
１２　　　　　光源色温度推定手段（色温度推定部）
１３　　　　　エリア画像色情報算出手段（エリア色情報算出部）
１４　　　　　ホワイトバランス制御手段（ＷＢ制御部）
１４ａ　　　　シングルエリアホワイトバランス係数生成手段（シングルエリアＷＢ係数生成部）
１４’ａ　　　シングルエリアホワイトバランスゲインマップ生成手段（シングルエリアＷＢゲインマップ生成部）
１４”ａ、１４”’ａ　　　　　色温度合成手段（色温度選択合成部）
１４ｂ　　　　マルチエリアホワイトバランス係数生成手段（マルチエリアＷＢ係数生成部）
１４’ｂ　　　マルチエリアホワイトバランスゲインマップ生成手段（マルチエリアＷＢゲインマップ生成部）
１４”ｂ　　　ホワイトバランス係数生成手段（ＷＢ係数生成部）
１４”’ｂ　　ホワイトバランスゲインマップ生成手段（ＷＢゲインマップ生成部）
１４ｃ　　　　ホワイトバランス係数合成手段（ＷＢ選択合成部）
１４’ｃ　　　ホワイトバランスゲインマップ合成手段（ＷＢゲインマップ選択合成部）
１４’ｄ、１４"'ｄ　　　　　ゲインマップ記憶部
１５　　　　　ホワイトバランス手段（ＷＢゲイン補正部）
２１　　　　　レンズ
２２　　　　　イメージセンサ
２３　　　　　画像記憶部

Claims (11)

  1. 　入力画像を複数のエリアに分割するエリア分割手段と、
    　前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段と、
    　前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段と、
    　前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いて、エリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段とを備え、
    　前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であることを特徴とするマルチエリアホワイトバランス制御装置。
  2. 　前記画像の色情報が彩度情報であることを特徴とする請求項１に記載のマルチエリアホワイトバランス制御装置。
  3. 　前記ホワイトバランス処理用情報が、ホワイトバランス係数であり、
    　前記ホワイトバランス制御手段は、
    前記光源色温度推定手段によって推定された、各エリアの光源の色温度に基づき、マルチエリアホワイトバランス係数を生成するマルチエリアホワイトバランス係数生成手段と、シングルエリアホワイトバランス係数を生成するシングルエリアホワイトバランス係数生成手段と、前記マルチエリアホワイトバランス係数生成手段によって生成されたマルチエリアホワイトバランス係数と前記シングルエリアホワイトバランス係数生成手段によって生成されたシングルエリアホワイトバランス係数とを合成することにより前記ホワイトバランス係数を算出するホワイトバランス係数合成手段とを有し、
    　前記ホワイトバランス係数合成手段は、前記ホワイトバランス係数の算出に際し、前記エリア画像色情報算出手段によって算出された、当該エリアの画像の色情報の値が高いほどマルチエリアホワイトバランス係数の合成比率を高くすることを特徴とする請求項１又は２に記載のマルチエリアホワイトバランス制御装置。
  4. 　前記ホワイトバランス処理用情報が、ホワイトバランス係数であり、
    　前記光源色温度推定手段は、さらに、前記推定した各エリアの光源の色温度に基づき、シングルエリアの光源の色温度を推定し、
    　前記ホワイトバランス制御手段は、
      前記光源色温度推定手段によって推定された、各エリアの光源の色温度と、シングルエリアの光源の色温度とを合成することにより各エリアの光源の色温度を算出する色温度合成手段と、前記色温度合成手段によって算出された前記各エリアの光源の色温度に基づき前記ホワイトバランス係数を生成するホワイトバランス係数生成手段とを有し、
    　前記色温度合成手段は、前記各エリアの光源の色温度の算出に際し、前記エリア画像色情報算出手段によって算出された、当該エリアの画像の色情報の値が高いほど前記各エリアの推定された光源の色温度の合成比率を高くすることを特徴とする請求項１又は２に記載のマルチエリアホワイトバランス制御装置。
  5. 　前記ホワイトバランス処理用情報が、ホワイトバランスゲインマップであり、
    　前記ホワイトバランス制御手段は、
      前記光源色温度推定手段によって推定された、各エリアの光源の色温度に基づき、マルチエリアホワイトバランスゲインマップを生成するマルチエリアホワイトバランスゲインマップ生成手段と、シングルエリアホワイトバランスゲインマップを生成するシングルエリアホワイトバランスゲインマップ生成手段と、前記マルチエリアホワイトバランスゲインマップ生成手段によって生成されたマルチエリアホワイトバランスゲインマップと前記シングルエリアホワイトバランスゲインマップ生成手段によって生成されたシングルエリアホワイトバランスゲインマップとを合成することにより前記ホワイトバランスゲインマップを生成するホワイトバランスゲインマップ合成手段とを有し、
    　前記ホワイトバランスゲインマップ合成手段は、前記ホワイトバランスゲインマップの生成に際し、前記エリア画像色情報算出手段によって算出された、当該エリアの画像の色情報の値が高いほどマルチエリアホワイトバランスゲインマップの合成比率を高くすることを特徴とする請求項１又は２に記載のマルチエリアホワイトバランス制御装置。
  6. 　前記ホワイトバランス処理用情報が、ホワイトバランスゲインマップであり、
    　前記ホワイトバランス制御手段は、
    　前記光源色温度推定手段によって推定された、各エリアの光源の色温度と、シングルエリアの光源の色温度とを合成することにより各エリアの光源の色温度を算出する色温度合成手段と、前記色温度合成手段が算出した前記各エリアの光源の色温度に基づき前記ホワイトバランスゲインマップを生成するホワイトバランスゲインマップ生成手段とを有し、
    　前記色温度合成手段は、前記各エリアの光源の色温度の算出に際し、前記エリア画像色情報算出手段によって算出された、当該エリアの画像の色情報の値が高いほど前記各エリアの推定された光源の色温度の合成比率を高くすることを特徴とする請求項１又は２に記載のマルチエリアホワイトバランス制御装置。
  7. 　請求項１～６のいずれかに記載のマルチエリアホワイトバランス制御装置と、
    　前記マルチエリアホワイトバランス制御装置に備わる前記ホワイトバランス制御手段によって取得された、各エリアのホワイトバランス処理用情報に基づき、該マルチエリアホワイトバランス制御装置の前記エリア分割手段が分割対象とした前記入力画像全体のホワイトバランス処理を行うホワイトバランス処理手段と
    を備えることを特徴とするマルチエリアホワイトバランス画像処理装置。
  8. 　請求項７に記載のマルチエリアホワイトバランス画像処理装置を備えた撮像装置。
  9. 　入力画像を複数のエリアに分割し、
    　分割したエリア毎に光源の色温度を推定し、
    　分割したエリア毎に画像の色情報を算出し、
    　推定した、各エリアの光源の色温度と、算出した、各エリアの画像の色情報とを用いてエリア毎のホワイトバランス処理用情報を取得し、
    　前記ホワイトバランス処理用情報の取得は、前記算出した当該エリアの画像の色情報の値が高い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得し、画像の色情報の値が低い場合はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報を取得することにより行われることを特徴とするマルチエリアホワイトバランス制御方法。
  10. 　マルチエリアホワイトバランス制御装置に備わるコンピュータであって、
    　前記コンピュータを、
    　入力画像を複数のエリアに分割するエリア分割手段、
    　前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段、
    　前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段、
    　前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いて、エリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段
    として機能させるためのマルチエリアホワイトバランス制御プログラムを記録したコンピュータにおいて、
    　前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であることを特徴とする。
  11. 　マルチエリアホワイトバランス制御装置に備わるコンピュータが読み取り可能なマルチエリアホワイトバランス制御プログラムであって、
    前記コンピュータを、
    　入力画像を複数のエリアに分割するエリア分割手段、
    　前記エリア分割手段によって分割されたエリア毎に光源の色温度を推定する光源色温度推定手段、
    　前記エリア分割手段によって分割されたエリア毎に画像の色情報を算出するエリア画像色情報算出手段、
    　前記光源色温度推定手段によって推定された各エリアの光源の色温度と、前記エリア画像色情報算出手段によって算出された各エリアの画像の色情報とを用いて、エリア毎のホワイトバランス処理用情報を取得するホワイトバランス制御手段
    として機能させるためのマルチエリアホワイトバランス制御プログラムにおいて、
    　前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が高い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちマルチエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であり、前記エリア画像色情報算出手段によって算出された当該エリアの画像の色情報の値が低い場合は、前記ホワイトバランス制御手段が取得したホワイトバランス処理用情報はマルチエリアホワイトバランスとシングルエリアホワイトバランスのうちシングルエリアホワイトバランスの比率を高くしたホワイトバランス処理用情報であることを特徴とする。
PCT/JP2014/075436 2013-11-28 2014-09-25 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置 Ceased WO2015079795A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/164,438 US9723285B2 (en) 2013-11-28 2016-05-25 Multi-area white-balance control device, multi-area white-balance control method, multi-area white-balance control program, computer in which multi-area white-balance control program is recorded, multi-area white-balance image-processing device, multi-area white-balance image-processing method, multi-area white-balance image-processing program, computer in which multi-area white-balance image-processing program is recorded, and image-capture apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013-246475 2013-11-28
JP2013246475A JP6234191B2 (ja) 2013-11-28 2013-11-28 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/164,438 Continuation US9723285B2 (en) 2013-11-28 2016-05-25 Multi-area white-balance control device, multi-area white-balance control method, multi-area white-balance control program, computer in which multi-area white-balance control program is recorded, multi-area white-balance image-processing device, multi-area white-balance image-processing method, multi-area white-balance image-processing program, computer in which multi-area white-balance image-processing program is recorded, and image-capture apparatus

Publications (1)

Publication Number Publication Date
WO2015079795A1 true WO2015079795A1 (ja) 2015-06-04

Family

ID=53198749

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2014/075436 Ceased WO2015079795A1 (ja) 2013-11-28 2014-09-25 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置

Country Status (3)

Country Link
US (1) US9723285B2 (ja)
JP (1) JP6234191B2 (ja)
WO (1) WO2015079795A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898264A (zh) * 2016-05-26 2016-08-24 努比亚技术有限公司 一种图像处理方式的获取设备和方法
US20210274102A1 (en) * 2020-02-28 2021-09-02 Canon Kabushiki Kaisha Image processing apparatus, image capture apparatus, and image processing method
CN115002437A (zh) * 2021-03-02 2022-09-02 北京小米移动软件有限公司 白平衡处理方法及装置、存储介质

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6274931B2 (ja) 2014-03-19 2018-02-07 オリンパス株式会社 マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
JP6521776B2 (ja) * 2015-07-13 2019-05-29 オリンパス株式会社 画像処理装置、画像処理方法
EP3449628B1 (en) * 2016-04-25 2022-12-14 Zhejiang Dahua Technology Co., Ltd Methods, systems, and media for image white balance adjustment
JP2019028537A (ja) * 2017-07-26 2019-02-21 キヤノン株式会社 画像処理装置および画像処理方法
CN107801012B (zh) * 2017-10-30 2019-05-17 Oppo广东移动通信有限公司 白平衡处理方法及装置、电子装置和计算机可读存储介质
CN107635123B (zh) * 2017-10-30 2019-07-19 Oppo广东移动通信有限公司 白平衡处理方法及装置、电子装置和计算机可读存储介质
CN107801013B (zh) * 2017-10-30 2019-05-17 Oppo广东移动通信有限公司 白平衡处理方法及装置、电子装置和计算机可读存储介质
JP6815345B2 (ja) * 2018-03-19 2021-01-20 株式会社東芝 画像信号処理装置、画像処理回路
US20190335150A1 (en) * 2018-04-26 2019-10-31 Qualcomm Incorporated Systems and methods for color balancing
CN110827365B (zh) * 2019-11-26 2022-08-26 Oppo广东移动通信有限公司 一种光源信息的确定方法、装置、电子设备和存储介质
CN113452980B (zh) * 2020-03-24 2023-03-14 Oppo广东移动通信有限公司 图像处理方法、终端及存储介质
CN111953955B (zh) 2020-08-26 2022-01-04 维沃移动通信有限公司 白平衡补偿方法、装置及电子设备
CN112584110B (zh) * 2020-12-01 2022-08-02 维沃移动通信有限公司 白平衡调节方法、装置、电子设备及存储介质
CN115118947B (zh) * 2021-03-23 2023-11-24 北京小米移动软件有限公司 图像的处理方法、装置、电子设备及存储介质
CN113411555B (zh) * 2021-06-08 2022-07-22 珠海市杰理科技股份有限公司 白平衡处理方法及装置、存储介质、图像捕获设备
KR102883986B1 (ko) 2021-10-14 2025-11-07 삼성전자주식회사 이미지 획득 장치 및 방법, 이를 포함하는 전자 장치
KR20240143540A (ko) 2023-03-24 2024-10-02 삼성전자주식회사 영상 획득 장치 및 그의 동작 방법
CN116614716A (zh) * 2023-05-17 2023-08-18 Oppo广东移动通信有限公司 图像处理方法、图像处理装置、存储介质及电子设备
CN119255116B (zh) * 2024-04-24 2025-11-14 荣耀终端股份有限公司 一种基于色适应的图像处理方法、电子设备及相关介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006211440A (ja) * 2005-01-31 2006-08-10 Eastman Kodak Co オートホワイトバランス装置及びホワイトバランス調整方法
JP2007228516A (ja) * 2006-02-27 2007-09-06 Fujifilm Corp 撮影装置
JP2010213232A (ja) * 2009-02-16 2010-09-24 Ricoh Co Ltd 撮像装置及び撮像方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6798449B2 (en) * 2001-01-18 2004-09-28 Kinpo Electronics, Inc. Automatic white-balance correction for digital camera
JP3513506B2 (ja) * 2002-02-20 2004-03-31 キヤノン株式会社 ホワイトバランス補正装置およびそれを搭載した撮像装置、及びホワイトバランス補正方法
JP4424216B2 (ja) * 2004-03-30 2010-03-03 セイコーエプソン株式会社 画像処理装置、画像処理方法、および、画像処理プログラム
JP4329125B2 (ja) * 2005-02-09 2009-09-09 富士フイルム株式会社 ホワイトバランス制御方法、ホワイトバランス制御装置及び撮像装置
JP4849818B2 (ja) * 2005-04-14 2012-01-11 イーストマン コダック カンパニー ホワイトバランス調整装置及び色識別装置
JP4217698B2 (ja) * 2005-06-20 2009-02-04 キヤノン株式会社 撮像装置及び画像処理方法
JP4815267B2 (ja) * 2006-05-11 2011-11-16 オリンパスイメージング株式会社 ホワイトバランス制御方法、撮像装置、及びホワイトバランス制御プログラム
JP2008092447A (ja) 2006-10-04 2008-04-17 Fuji Xerox Co Ltd 画像処理装置、画像出力装置、および画像処理方法
JP5250996B2 (ja) * 2007-04-25 2013-07-31 株式会社ニコン ホワイトバランス調整装置、撮像装置、およびホワイトバランス調整プログラム
JP4702635B2 (ja) * 2007-07-17 2011-06-15 富士フイルム株式会社 オートホワイトバランス補正値算出装置、方法およびプログラムならびに撮像装置
JP5375457B2 (ja) * 2008-09-03 2013-12-25 株式会社リコー 撮像装置及び撮像方法
JP5308792B2 (ja) * 2008-11-28 2013-10-09 オリンパス株式会社 ホワイトバランス調整装置、ホワイトバランス調整方法、ホワイトバランス調整プログラム、および、撮像装置
JP5321163B2 (ja) * 2009-03-12 2013-10-23 株式会社リコー 撮像装置及び撮像方法
JP5808142B2 (ja) * 2011-05-02 2015-11-10 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
JP5818668B2 (ja) * 2011-12-16 2015-11-18 株式会社東芝 オートホワイトバランス調整システム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006211440A (ja) * 2005-01-31 2006-08-10 Eastman Kodak Co オートホワイトバランス装置及びホワイトバランス調整方法
JP2007228516A (ja) * 2006-02-27 2007-09-06 Fujifilm Corp 撮影装置
JP2010213232A (ja) * 2009-02-16 2010-09-24 Ricoh Co Ltd 撮像装置及び撮像方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105898264A (zh) * 2016-05-26 2016-08-24 努比亚技术有限公司 一种图像处理方式的获取设备和方法
CN105898264B (zh) * 2016-05-26 2018-02-02 努比亚技术有限公司 一种图像处理方式的获取设备和方法
US20210274102A1 (en) * 2020-02-28 2021-09-02 Canon Kabushiki Kaisha Image processing apparatus, image capture apparatus, and image processing method
US11451719B2 (en) * 2020-02-28 2022-09-20 Canon Kabushiki Kaisha Image processing apparatus, image capture apparatus, and image processing method
CN115002437A (zh) * 2021-03-02 2022-09-02 北京小米移动软件有限公司 白平衡处理方法及装置、存储介质

Also Published As

Publication number Publication date
US9723285B2 (en) 2017-08-01
US20160269707A1 (en) 2016-09-15
JP2015106737A (ja) 2015-06-08
JP6234191B2 (ja) 2017-11-22

Similar Documents

Publication Publication Date Title
JP6234191B2 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
EP2426928B1 (en) Image processing apparatus, image processing method and program
JP6274931B2 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
US7969483B2 (en) White balance control method, imaging apparatus and storage medium storing white balance control program
KR101030393B1 (ko) 디지털 영상의 화이트 밸런스 조정 장치 및 방법
CN113556526B (zh) 一种基于rgbw滤光阵列的彩色夜视设备色彩增强方法
US8854709B1 (en) Automatic white balance based on dynamic mapping
JP6381404B2 (ja) 画像処理装置及び方法、及び撮像装置
CN110930341A (zh) 一种基于图像融合的低光照图像增强方法
KR101685887B1 (ko) 화상 처리 장치, 화상 처리 방법 및 화상 처리 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체
JP2012235377A (ja) 画像処理装置、画像処理方法及びプログラム
JP7307541B2 (ja) 画像処理装置、撮像装置、画像処理方法、及びプログラム
KR20070090224A (ko) 전자 색 이미지 채도 처리 방법
JP5911340B2 (ja) 撮像装置およびその制御方法
JP6345430B2 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
JP6196882B2 (ja) マルチエリアホワイトバランス制御装置、マルチエリアホワイトバランス制御方法、マルチエリアホワイトバランス制御プログラム、マルチエリアホワイトバランス制御プログラムを記録したコンピュータ、マルチエリアホワイトバランス画像処理装置、マルチエリアホワイトバランス画像処理方法、マルチエリアホワイトバランス画像処理プログラム、マルチエリアホワイトバランス画像処理プログラムを記録したコンピュータ及びマルチエリアホワイトバランス画像処理装置を備えた撮像装置
JP6583839B2 (ja) 動体監視装置、サーバ装置、および動体監視システム
JP5854716B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP2007097175A (ja) ゾーン重み付け機能を備えたホワイトバランス機構
KR101075773B1 (ko) 화이트 밸런스 조정 방법
JP2014090410A (ja) ホワイトバランス調整方法
JP2020154640A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
CN118923103A (zh) 信息处理装置、信息处理方法和记录介质
JP2015106791A (ja) 撮像装置
Garud et al. A fast color constancy scheme for automobile video cameras

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14865035

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 14865035

Country of ref document: EP

Kind code of ref document: A1