WO2018154998A1 - 画像処理装置、画像処理方法、記録媒体 - Google Patents

画像処理装置、画像処理方法、記録媒体 Download PDF

Info

Publication number
WO2018154998A1
WO2018154998A1 PCT/JP2018/000811 JP2018000811W WO2018154998A1 WO 2018154998 A1 WO2018154998 A1 WO 2018154998A1 JP 2018000811 W JP2018000811 W JP 2018000811W WO 2018154998 A1 WO2018154998 A1 WO 2018154998A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
level correction
white balance
image processing
color video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2018/000811
Other languages
English (en)
French (fr)
Inventor
高済　真哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of WO2018154998A1 publication Critical patent/WO2018154998A1/ja
Priority to US16/523,991 priority Critical patent/US11134234B2/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/73—Colour balance circuits, e.g. white balance circuits or colour temperature control

Definitions

  • the present invention relates to an image processing apparatus, an image processing method, and a recording medium that perform white balance correction on a color video signal.
  • Analog signal values can change continuously, whereas digital signals change in a predetermined quantization unit. For this reason, the RAW image data obtained by digitizing an analog image signal contains a quantization error.
  • the image processing performed on such RAW image data generally includes white balance correction processing that multiplies a different white balance gain for each color signal.
  • white balance correction processing that multiplies a different white balance gain for each color signal.
  • the magnitude of the error to be enlarged differs for each color signal, resulting in a false color in which the color balance between the color signals is shifted. May become apparent.
  • Japanese Patent Application Laid-Open No. 2015-207825 describes a technique for reducing false colors in achromatic portions.
  • some recent imaging apparatuses have a high-speed reading mode capable of reading imaging data at high speed as an imaging driving mode. For example, when performing high-speed continuous shooting, or a high-speed frame rate with smooth movement. It is used when shooting video of Such a high-speed read mode is a read mode in which the read time is shortened by suppressing the number of bits in A / D conversion lower than that in the normal read mode.
  • the false color generated in the achromatic part is more obvious than the false color generated in the chromatic part.
  • the false color generated in the target pixel is a complementary color to the colors of the peripheral pixels of the target pixel, it may be visually recognized and become apparent.
  • the false color generated in the pixel of interest is a false color that causes the hue to deviate from the color of the surrounding pixels of the pixel of interest, it is also visually recognized and made apparent There are things to do.
  • the image data read in the above-described high-speed reading mode is subjected to image processing or the like after being bit-extended to the same number of bits as the image data read in the normal reading mode.
  • the quantization error will also increase, and the false color resulting from the quantization error will become more noticeable.
  • the present invention has been made in view of the above circumstances, and provides an image processing apparatus, an image processing method, and a recording medium that can easily and effectively reduce false colors generated in a chromatic portion of a bit-extended color video signal. It is intended to provide.
  • An image processing apparatus is an image processing apparatus for processing a color video signal, and an N-bit color video signal before white balance correction is converted into an M-bit color satisfying M> N.
  • a bit extension unit that extends to a video signal
  • a level correction unit that performs level correction based on (MN) on the color video signal extended to M bits by the bit extension unit, and the level correction unit that performs the level correction
  • MN level correction based on
  • An image processing method is an image processing method for processing a color video signal, wherein an N-bit color video signal before white balance correction is converted into an M-bit image satisfying M> N.
  • a recording medium is a computer-readable recording medium that records an image processing program for causing a computer of an image processing apparatus to process a color video signal.
  • a bit extension step of extending an N-bit color video signal before white balance correction to an M-bit color video signal satisfying M> N, and the color extended to M bits by the bit extension step A level correction step for performing level correction on the video signal based on (MN), and a white balance correction step for performing white balance correction on the color video signal on which the level correction has been performed by the level correction step.
  • FIG. 1 is a block diagram illustrating a configuration of an image processing apparatus according to a first embodiment of the present invention.
  • FIG. 2 is a block diagram illustrating a configuration of an image processing unit according to the first embodiment.
  • 5 is a flowchart illustrating the operation of the image processing unit according to the first embodiment.
  • 5 is a flowchart showing Rm level correction in the first embodiment.
  • 5 is a flowchart showing Bm level correction in the first embodiment.
  • 9 is a flowchart showing a modification of Rm level correction in the first embodiment.
  • 9 is a modification of Bm level correction in the first embodiment.
  • the graph which shows the example of R signal Rwb, G signal Gm, and B signal Bwb at the time of performing white balance correction without performing level correction with the mode of bit expansion In the said Embodiment 1, the graph which shows an example when white balance correction
  • FIG. 1 is a block diagram showing the configuration of the image processing apparatus 1.
  • the image processing apparatus 1 is for processing a digital color video signal (hereinafter simply referred to as a color video signal or image data), and includes a recording medium 10 and a memory interface ( Memory I / F) 11, bus 12, SDRAM 13, image processing unit 14, JPEG processing unit 15, video codec 16, operation unit 17, flash memory 18, and microcomputer 19. Yes.
  • the recording medium 10 is configured by, for example, a memory card that can be attached to and detached from the image processing apparatus 1, and is a recording unit that stores image data (moving image data, still image data, etc.) in a nonvolatile manner. Therefore, the recording medium 10 does not need to have a configuration unique to the image processing apparatus 1.
  • the image processing apparatus 1 is described as inputting image data, for example, via the recording medium 10.
  • the present invention is not limited to this, and the image data is transmitted via a communication line or the like. It may be configured to input, and when the image processing apparatus 1 is incorporated in the imaging apparatus, it may be configured to process image data acquired by imaging with the imaging apparatus.
  • the image data is a digital color obtained by photoelectrically converting an optical image of a subject imaged by a lens using, for example, a color imaging device including a color filter with a primary color Bayer array, and further A / D converting it. It is assumed that it is an image signal, that is, so-called RAW image data.
  • the image sensor can operate in, for example, a normal readout mode and a high-speed readout mode.
  • the normal read mode is used when, for example, still image shooting is performed.
  • the high-speed readout mode is used, for example, when high-speed continuous shooting is performed, or when moving-image shooting at a high-speed frame rate with smooth motion is performed.
  • the high-speed read mode is a read mode in which the read time is shortened by suppressing the number of bits in A / D conversion lower than that in the normal read mode. That is, for example, M-bit A / D conversion is performed during normal reading, and N-bit A / D conversion is performed during high-speed reading.
  • M and N are positive integers that satisfy M> N.
  • the memory I / F 11 is a read control unit that performs control to read image data recorded on the recording medium 10, and is also a recording control unit that performs control to record image data after image processing on the recording medium 10. .
  • the bus 12 is a transfer path for transferring various data and control signals from one place in the image processing apparatus 1 to another place.
  • the bus 12 is connected to the memory I / F 11, the SDRAM 13, the image processing unit 14, the JPEG processing unit 15, the moving image codec 16, and the microcomputer 19.
  • the image data read from the recording medium 10 by the memory I / F 11 is transferred via the bus 12 and temporarily stored in the SDRAM 13.
  • the SDRAM 13 temporarily stores various data such as image data read from the recording medium 10, image data processed or being processed by the image processing unit 14, and image data processed or processed by the moving image codec 16. This is a storage unit.
  • the image processing unit 14 performs various types of image processing on the image data and creates an image for display or recording.
  • the JPEG processing unit 15 is a compression / decompression unit that compresses or decompresses still image data by JPEG processing.
  • the still image data processed by the JPEG processing unit 15 is added with a header or the like by the microcomputer 19 and is recorded as a JPEG file on the recording medium 10 via the memory I / F 11.
  • the moving image codec 16 compresses and decompresses moving image data by an appropriate processing method such as Motion JPEG or MPEG.
  • the moving image data processed by the moving image codec 16 is added with a header or the like by the microcomputer 19 and is recorded as a moving image file on the recording medium 10 via the memory I / F 11.
  • the operation unit 17 is used to perform various operation inputs to the image processing apparatus 1.
  • the image processing apparatus 1 is turned on / off, the image processing is started / finished, various parameters are set and recorded in the image processing. It is possible to perform operations such as reading and saving of image files on the medium 10.
  • a signal corresponding to the operation content is output to the microcomputer 19.
  • the flash memory 18 includes a processing program executed by the microcomputer 19 (including an image processing program that is a program for executing an image processing method by the image processing apparatus 1), and various information related to the image processing apparatus 1. , In a non-volatile manner.
  • examples of the information stored in the flash memory 18 include parameters used for image processing, tables, functions, and setting values set by the user.
  • the flash memory 18 stores a white balance gain according to the type of light source (for example, daytime sun, morning and evening sun, light bulb, fluorescent lamp, etc.). Information stored in the flash memory 18 is read by the microcomputer 19.
  • the microcomputer 19 is a control unit that controls the image processing apparatus 1 in an integrated manner. Upon receiving a user operation input from the operation unit 17, the microcomputer 19 reads parameters necessary for processing from the flash memory 18 in accordance with a processing program stored in the flash memory 18, and performs various processes according to the operation content. Run the sequence.
  • image data is read from the recording medium 10 via the memory I / F 11 under the control of the microcomputer 19 and the bus 12 Is stored in the SDRAM 13 via Further, image processing is performed by the image processing unit 14 based on the control of the microcomputer 19, and the image data after the image processing is stored in the SDRAM 13 again.
  • the image data after this image processing is displayed on a display unit such as a monitor. The user can view the image displayed on the monitor, change the setting value of the processing parameter as necessary, and execute the image processing again.
  • the image data is still image data, it is JPEG compressed by the JPEG processing unit 15, and if the image data is moving image data, it is compressed by the moving image codec 16 and is recorded as an image file as a recording medium 10. To be recorded.
  • the image processing apparatus 1 may be configured as a dedicated processing apparatus, or may be configured to cause a computer to execute an image processing program. Alternatively, the image processing apparatus 1 may be incorporated in the imaging apparatus.
  • FIG. 2 is a block diagram showing the configuration of the image processing unit 14, and FIG. 3 is a flowchart showing the operation of the image processing unit 14.
  • the image processing unit 14 includes an OB subtraction unit 21, a demosaicing processing unit 22, a bit expansion unit 23, a level correction unit 24, a white balance correction unit 25, and an achromatic color correction unit 26. And a color matrix calculation unit 27 and a gradation conversion unit 28.
  • the OB subtraction unit 21 performs subtraction of the OB component when the OB (optical black) component is included in the image data. Perform (step S1). Therefore, in the case of image data including an OB component, the OB component is also recorded on the recording medium 10 and is read out by the memory I / F 11.
  • the demosaicing processing unit 22 performs a demosaicing process (step S2). That is, in the RGB Bayer image in which only one color signal per pixel exists, the demosaicing processing unit 22 outputs the color signal of a pixel from which a certain color signal is missing and the same color signal in the vicinity of the pixel. Interpolation is performed for each missing color signal of each pixel by performing interpolation based on the color signal of the pixel that is included, thereby generating an image in which color signals of each RGB color are present per pixel.
  • the bit extension unit 23 extends the N-bit color video signal before white balance correction to an M-bit color video signal satisfying M> N (step S3). Therefore, the bit extension unit 23 does not perform special processing when the number of bits of the image data is M bits.
  • the OB subtraction unit 21 and the demosaicing processing unit 22 Whether the processed image data is N bits or M bits can be processed.
  • the image processing unit 14 in the case of each unit arranged downstream of the bit expansion unit 23, specifically in the processing order shown in FIG. 3, the level correction unit 24 and the white balance correction unit 25.
  • the achromatic color correction unit 26, the color matrix calculation unit 27, and the gradation conversion unit 28 are configured to process M-bit image data.
  • the bit extension unit 23 performs bit extension to M bits in accordance with the processing bits in the subsequent stage when the number of bits of the input image data is less than M bits (specifically, N bits). It has become.
  • the example in which the readout mode of the image sensor is the normal readout mode or the high-speed readout mode has been described as an example of the reason why the number of bits of the image data input to the image processing unit is M bits or N bits.
  • the present invention is not limited to this example.
  • a plurality of image data is acquired by different imaging devices, that is, the first image data is acquired by a first imaging device that outputs M-bit image data, and the second image data is N-bit.
  • the reason may be that the image data is acquired by the second imaging device that outputs image data.
  • the level correction unit 24 performs level correction based on (MN) on the color video signal extended to M bits by the bit extension unit 23 (step S4).
  • the level correction unit 24 expresses the power by the symbol “ ⁇ ” (hereinafter the same)
  • the level correction is performed on the color video signal within the range defined by the level correction width W (that is, the range of quantization error caused by bit expansion).
  • the level correction unit 24 assumes that the color video signal before the level correction is Lm and the color video signal after the level correction is Lc, Lm ⁇ Lc ⁇ Lm + W
  • the level of the color video signal is corrected within the range of. This correction range is appropriate when performing bit expansion by multiplying the signal value of the color video signal by the value ⁇ 2 ⁇ (MN) ⁇ .
  • the correction range is not limited to this.
  • ⁇ Lm ⁇ (W / 2) ⁇ ⁇ Lc ⁇ ⁇ Lm + (W / 2) ⁇ Range, or (Lm-W) ⁇ Lc ⁇ Lm Or the like in these cases, the range defined by the level correction width W is maintained), the color video signal may be subjected to level correction, and the like.
  • the color video signal is an R signal, a G signal, and a B signal.
  • the level correction unit 24 does not perform level correction on the G signal, and R Level correction is performed on the signal and the B signal.
  • the G signal is a luminance equivalent signal, so that the color balance is changed by level correction, but the luminance is not changed.
  • the white balance correction unit 25 performs white balance correction on the color video signal that has been level-corrected by the level correction unit 24 (step S5).
  • This white balance correction is a color balance correction for making a white subject appear white on an image.
  • the white balance correction unit 25 can cause a signal value change due to white balance correction to occur in the R signal and the B signal without causing the G signal to be generated (does not multiply the gain or set the gain to be 1). (The R signal is multiplied by the white balance gain Rgain for the R signal, and the B signal is multiplied by the white balance gain Bgain for the B signal).
  • the white balance gain corresponding to the type of light source as described above is read from the flash memory 18 by the microcomputer 19 and transmitted to the level correction unit 24 and the white balance correction unit 25. Yes.
  • the white balance correction unit 25 adaptively determines the white balance gain based on the image data
  • the white balance gain determined by the white balance correction unit 25 performs white balance correction by the white balance correction unit 25.
  • the white balance correction unit 25 transmits the signal to the level correction unit 24. In any way, the level correction unit 24 acquires the white balance gain before the white balance correction by the white balance correction unit 25 is performed.
  • the achromatic color correcting unit 26 performs a process of reducing the false color generated in the achromatic color portion of the image based on, for example, the technique described in Japanese Patent Application Laid-Open No. 2015-207825 described above (step S6). That is, in the present embodiment, the false color generated in the chromatic portion of the image (but not limited to the chromatic portion as will be described later) is reduced by the processing of the level correction unit 24, and the achromatic color of the image The false color generated in the portion is reduced by the processing of the achromatic color correction unit 26.
  • the color matrix calculation unit 27 configures the RGB signal of each pixel data constituting the image data as, for example, a matrix of 3 rows and 1 column (or may be 1 row and 3 columns), and this pixel data has a color of 3 rows and 3 columns.
  • a matrix operation is performed on the matrix to convert the color space (step S7).
  • the color matrix coefficients constituting the 3 ⁇ 3 color matrix are recorded in advance in the flash memory 18, for example.
  • the gradation conversion unit 28 performs gradation conversion on the image with gradation conversion characteristics (for example, gamma conversion characteristics) such that gradation display on the monitor is appropriate (step S8).
  • gradation conversion characteristics for example, gamma conversion characteristics
  • step S3 Since the processing order in the image processing unit 14 shown in FIG. 3 is an example, the bit extension in step S3 is performed, the level correction in step S4 is performed thereafter, and the white balance correction in step S5 is performed thereafter. Processing may be performed in other processing orders within a reasonable range except that the order is maintained.
  • FIG. 4 is a flowchart showing Rm level correction.
  • the level correction unit 24 performs the Rm level correction process shown in FIG. 4 on the R signal for each pixel, and the Bm shown in FIG. Level correction processing is performed for each pixel.
  • Rm and Bm represent the R and B signals before level correction.
  • Rc and Bc represent the R and B signals after level correction.
  • step S11 it is first determined whether or not Rm ⁇ Gm is satisfied.
  • the R signal Rwb when white balance correction is performed without performing level correction by multiplying Rm by the white balance gain Rgain for the R signal Is calculated as follows (step S12).
  • Rwb Rm ⁇ Rgain Then, it is determined whether or not Rwb ⁇ Gm is satisfied (step S13).
  • FIG. 8 is a graph showing an example of the R signal Rwb, the G signal Gm, and the B signal Bwb when white balance correction is performed without performing level correction, together with the state of bit expansion.
  • FIG. 8 shows an example where Rwb ⁇ Gm is satisfied.
  • Step S15 it is determined whether or not Rfwb> Gm is satisfied.
  • the conditions that all of Step S11, Step S13, and Step S15 are satisfied that is, Rm ⁇ Gm and Rwb ⁇ Gm and Rfwb> Gm
  • the condition that is satisfied is the first condition.
  • FIG. 9 is a graph showing an example when white balance correction is performed on the R signal level correction maximum value Rf and the level-corrected R signal Rc. 8 and 9 show an example in which the first condition is satisfied.
  • Rfwb> Gm when it is determined that Rfwb> Gm is satisfied, Rwb obtained by performing white balance correction on Rm remains less than Gm (see FIG. 8), but the maximum level correction is applied to Rm.
  • Rfwb after white balance correction is larger than Gm (see FIG. 9), that is, the magnitude relationship between Rm and Gm after white balance correction can be reversed by level correction (accordingly) , Rm and Gm are originally not so different values).
  • the saturation Sb related to B is calculated as follows (step) S16).
  • FIG. 8 illustrates an example in which Sb> ThS1 (that is, Bwb> ⁇ Gm ⁇ ThS1 ⁇ ) is satisfied and an example in which Sb ⁇ ThS2 (that is, Bwb ⁇ Gm ⁇ ThS2 ⁇ ) is satisfied. Show.
  • Rc is the range described above, Rm ⁇ Rc ⁇ Rm + W
  • the specific value can be set as desired, but specific values include an example in which the central value in the range is Rc.
  • step S18 If the process in step S18 is performed or if any of the conditions in steps S11, S13, S15, and S17 is not satisfied, the process returns to the process shown in FIG.
  • the R signal Rc that has been level-corrected by multiplying the R signal Rc that has been level-corrected by the process of step S5 is the R signal that has been subjected to level correction and then subjected to white balance correction.
  • Rcwb is calculated as shown in FIG.
  • Rgain is multiplied by the R signal Rm in the white balance correction, and Rwb is calculated.
  • FIG. 5 is a flowchart showing Bm level correction.
  • the level correction unit 24 executes the Bm level correction process shown in FIG.
  • the Bm level correction process shown in FIG. 5 is substantially the same as the Rm level correction process shown in FIG. 4 described above except that the signal to be processed is changed from the R signal to the B signal.
  • step S21 when entering the process of FIG. 5, it is first determined whether or not Bm ⁇ Gm is satisfied.
  • the B signal Bwb when white balance correction is performed without performing level correction by multiplying Bm by the white balance gain Bgain for the B signal Is calculated as follows (step S22).
  • Bwb Bm ⁇ Bgain Then, it is determined whether or not Bwb ⁇ Gm is satisfied (step S23).
  • Bm ⁇ Bc ⁇ Bm + W defined by the level correction width W described above. In this range, the B signal level is corrected, and the B signal Bc after the level correction is calculated.
  • step S25 it is determined whether or not Bfwb> Gm is satisfied.
  • the conditions that all of step S21, step S23, and step S25 are satisfied that is, Bm ⁇ Gm and Bwb ⁇ Gm and Bfwb> Gm
  • the condition that is satisfied is the second condition.
  • Bfwb> Gm Bwb obtained by performing white balance correction on Bm is still less than Gm, but the white balance is applied after performing maximum level correction on Bm.
  • the corrected Bfwb becomes larger than Gm, that is, the magnitude relationship between Bm and Gm after white balance correction can be reversed by level correction (therefore, Bm and Gm are originally much less It is not a far off value).
  • the saturation Sr related to R is calculated as follows (step) S26).
  • step S28 is performed, or when any of the conditions of step S21, step S23, step S25, and step S27 is not satisfied, the process returns to the process shown in FIG.
  • the B signal is obtained by multiplying the B signal Bc level-corrected by Bgain by the process of step S5 and performing white balance correction after level correction. Bcwb is calculated.
  • Bgain is multiplied by the B signal Bm, and Bwb is calculated.
  • the level correction unit 24 performs the R signal Rwb when white balance correction is performed without performing level correction.
  • the saturation is calculated for each pixel based on the G signal Gm and the B signal Bwb, and it is further determined whether or not the third condition that the saturation is higher than a predetermined threshold is satisfied.
  • Rc is calculated only when the above condition is satisfied, and Bc is calculated only when the second condition and the third condition are satisfied.
  • the level correction unit 24 determines whether or not the third condition related to the calculation of Rc satisfies the third condition, that the saturation related to B is higher than the first threshold value or the saturation related to the complementary color of B. It is determined whether or not the degree is higher than the second threshold, and as a determination whether or not the third condition relating to the calculation of Bc is satisfied, the saturation according to R is higher than the third threshold Or whether or not the saturation related to the R complementary color is higher than the fourth threshold value is determined.
  • FIG. 6 is a flowchart showing a modification of the Rm level correction
  • FIG. 7 is a flowchart showing a modification of the Bm level correction.
  • the process shown in FIG. 6 is obtained by omitting the processes in steps S16 and S17 from the process shown in FIG. 4, and the process shown in FIG. 7 is obtained by omitting the processes in steps S26 and S27 from the process shown in FIG. It has become. In this way, the determination as to whether or not the third condition regarding saturation is satisfied may be omitted.
  • the levels correction unit 24 determines that the pixel has the first condition Rm ⁇ Gm and Rwb ⁇ Gm and Rfwb> Gm described above. Rc is calculated only when the first condition is satisfied, and the pixel further satisfies the second condition Bm ⁇ Gm and Bwb ⁇ Gm and Bfwb> Gm. Whether or not is satisfied and Bc is calculated only when the second condition is satisfied.
  • the color video signal is the R signal, the G signal, and the B signal has been described.
  • the present invention is not limited to this.
  • the color video signal may be a complementary color signal or four colors. It may be a color video signal composed of the above signals.
  • the saturation calculated by other methods may be used. Of course.
  • the color balance of the color video signal expanded from N bits to M bits is subjected to level correction based on the bit number difference (MN) at the time of bit expansion, and then white balance correction is performed.
  • MN bit number difference
  • W [ ⁇ 2 ⁇ (MN) ⁇ -1]
  • the level correction is performed on the color video signal in the range of Lm ⁇ Lc ⁇ Lm + W, the level suitable for the bit extension by multiplying the signal value by the value ⁇ 2 ⁇ (MN) ⁇ . Correction can be performed.
  • the color video signal is an R signal, a G signal, and a B signal, and only the R signal and the B signal are subjected to level correction and white balance correction, the signal of the G signal that is a luminance equivalent signal.
  • the value does not change between level correction and white balance correction, that is, there is an advantage that white balance correction can be performed while reducing false colors without substantially changing the brightness of the image.
  • the pixel has the following first condition Rm ⁇ Gm and Rwb ⁇ Gm and Rfwb> Gm Since Rc is calculated only when the condition is satisfied, the false color component generated in the R signal by bit expansion can be reduced satisfactorily.
  • the pixel has the following second condition Bm ⁇ Gm and Bwb ⁇ Gm and Bfwb> Gm Since Bc is calculated only when the condition is satisfied, the false color component generated in the B signal due to the bit expansion can be satisfactorily reduced.
  • step S6 of FIG. 3 when a process for reducing the false color generated in the achromatic portion is separately performed, the efficiency of the process can be improved.
  • the saturation related to B is higher than the first threshold, or the saturation related to the complementary color of B is higher than the second threshold. Therefore, it is possible to effectively reduce the conspicuous false color of the type in which the false color of R is mixed into B or the complementary color of B.
  • the saturation related to R is higher than the third threshold, or the saturation related to the complementary color of R is higher than the fourth threshold. Since it is determined whether or not the high color is satisfied, the conspicuous false color of the type in which the false color of B is mixed with R or the complementary color of R can be effectively reduced.
  • each part mentioned above may be comprised as a circuit. Any circuit may be mounted as a single circuit or a combination of a plurality of circuits as long as it can perform the same function. Furthermore, an arbitrary circuit is not limited to being configured as a dedicated circuit for performing a target function, and may be configured to perform a target function by causing a general-purpose circuit to execute a processing program. . Alternatively, a processor configured as hardware may perform processing of each unit.
  • an image processing method for performing the same processing as the image processing apparatus may be used, and an image processing program for causing a computer to perform the same processing as the image processing apparatus ( A computer program), a non-temporary recording medium that can be read by a computer that records the image processing program, and the like.
  • the present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage.
  • various aspects of the invention can be formed by appropriately combining a plurality of components disclosed in the embodiment. For example, some components may be deleted from all the components shown in the embodiment.
  • constituent elements over different embodiments may be appropriately combined.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Processing Of Color Television Signals (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

カラー映像信号をＮビットからＭ（Ｍ＞Ｎ）ビットへ拡張するビット拡張部（２３）と、Ｍビットに拡張されたカラー映像信号に（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正部（２４）と、レベル補正が行われたカラー映像信号にホワイトバランス補正を行うホワイトバランス補正部（２５）と、を備える画像処理装置（１）。

Description

画像処理装置、画像処理方法、記録媒体
　本発明は、カラー映像信号にホワイトバランス補正を行う画像処理装置、画像処理方法、記録媒体に関する。
　アナログ信号は信号値が連続的に変化し得るのに対して、デジタル信号は所定の量子化単位で変化する。このために、アナログの画像信号をデジタル化して得られたＲＡＷ画像データには量子化誤差が含まれている。
　こうしたＲＡＷ画像データに対して行われる画像処理には、一般的に、色信号毎に異なるホワイトバランスゲインを乗算するホワイトバランス補正の処理が含まれている。しかし、量子化誤差が含まれているＲＡＷ画像データにホワイトバランスゲインを乗算すると、色信号毎に拡大される誤差の大きさが異なるために、色信号間のカラーバランスがずれた偽色となって顕在化することがある。
　こうした偽色は、無彩色部分において特に目立ってしまう。そこで、例えば日本国特開２０１５－２０７８２５号公報には、無彩色部分の偽色を低減する技術が記載されている。
　ところで、近年の撮像装置には、撮像駆動モードとして、撮像データを高速で読み出すことができる高速読み出しモードを備えたものがあり、例えば高速連写撮影を行う場合、あるいは動きが滑らかな高速フレームレートの動画撮影を行う場合などに利用されている。このような高速読み出しモードは、通常読み出しモードよりも、Ａ／Ｄ変換におけるビット数を低く抑えることで、読出時間の短縮を図った読み出しモードである。
　上述したような量子化誤差を色信号毎に異なるゲインで拡大することにより生じる偽色は、無彩色部分だけでなく、有彩色部分にも発生する。しかしながら、上記日本国特開２０１５－２０７８２５号公報に記載の技術では、こうした有彩色部分に生じる偽色の低減については言及されていない。
　無彩色部分に生じる偽色は、有彩色部分に生じる偽色に比べて顕在化し易い。ただし、有彩色部分であっても、注目画素に生じている偽色が、注目画素の周辺画素の色に対して補色である場合には、視覚的に認識されて顕在化することがある。あるいは、補色でなくても、注目画素に生じている偽色が、注目画素の周辺画素の色に対して色相を乖離させる偽色である場合には、同様に視覚的に認識されて顕在化することがある。
　このとき、上述した高速読み出しモードで読み出された画像データは、通常読み出しモードで読み出された画像データと同じビット数にビット拡張してから画像処理等が行われるが、ビット拡張を行うと量子化誤差も拡大してしまうことになり、量子化誤差に起因する偽色がより目立つことになる。
　本発明は上記事情に鑑みてなされたものであり、ビット拡張されたカラー映像信号の有彩色部分に生じる偽色を簡便かつ有効に低減することができる画像処理装置、画像処理方法、記録媒体を提供することを目的としている。
　本発明の一態様による画像処理装置は、カラー映像信号を処理するための画像処理装置であって、ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張部と、前記ビット拡張部によりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正部と、前記レベル補正部により前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正部と、を備える。
　本発明の他の態様による画像処理方法は、カラー映像信号を処理するための画像処理方法であって、ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張ステップと、前記ビット拡張ステップによりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正ステップと、前記レベル補正ステップにより前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正ステップと、を備える。
　本発明のさらに他の態様による記録媒体は、画像処理装置のコンピュータに、カラー映像信号を処理させるための画像処理プログラムを記録したコンピュータで読取のできる記録媒体であって、前記画像処理プログラムは以下を含む、ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張ステップと、前記ビット拡張ステップによりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正ステップと、前記レベル補正ステップにより前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正ステップ。
本発明の実施形態１の画像処理装置の構成を示すブロック図。 上記実施形態１の画像処理部の構成を示すブロック図。 上記実施形態１の画像処理部の作用を示すフローチャート。 上記実施形態１におけるＲｍレベル補正を示すフローチャート。 上記実施形態１におけるＢｍレベル補正を示すフローチャート。 上記実施形態１においてＲｍレベル補正の変形例を示すフローチャート。 上記実施形態１においてＢｍレベル補正の変形例を示すフローチャート。 上記実施形態１において、レベル補正を行うことなくホワイトバランス補正を行った場合のＲ信号Ｒｗｂ、Ｇ信号Ｇｍ、およびＢ信号Ｂｗｂの例を、ビット拡張の様子と共に示すグラフ。 上記実施形態１において、Ｒ信号のレベル補正最大値Ｒｆとレベル補正を行ったＲ信号Ｒｃとにホワイトバランス補正を行ったときの例を示すグラフ。
　以下、図面を参照して本発明の実施の形態を説明する。
［実施形態１］
　図１から図９は本発明の実施形態１を示したものであり、図１は画像処理装置１の構成を示すブロック図である。
　図１に示すように、この画像処理装置１は、デジタルのカラー映像信号（以下では単に、カラー映像信号あるいは画像データなどという）を処理するためのものであり、記録媒体１０と、メモリインタフェース（メモリＩ／Ｆ）１１と、バス１２と、ＳＤＲＡＭ１３と、画像処理部１４と、ＪＰＥＧ処理部１５と、動画コーデック１６と、操作部１７と、フラッシュメモリ１８と、マイクロコンピュータ１９と、を備えている。
　記録媒体１０は、例えば画像処理装置１に着脱できるメモリカード等により構成されていて、画像データ（動画像データ、静止画像データ等）を不揮発に記憶する記録部である。従って、記録媒体１０は、画像処理装置１に固有の構成である必要はない。
　なお、本実施形態においては、画像処理装置１が、例えば記録媒体１０を介して画像データを入力するものとして説明するが、これに限定されるものではなく、通信回線等を介して画像データを入力する構成であっても構わないし、画像処理装置１が撮像装置に組み込まれたものである場合には、撮像装置で撮像して取得された画像データを処理する構成としても良い。
　そして、画像データは、レンズにより結像された被写体の光学像を、例えば、原色ベイヤー配列のカラーフィルタを備えたカラー撮像素子により光電変換し、さらにＡ／Ｄ変換して得られたデジタルのカラー画像信号、つまりいわゆるＲＡＷ画像データであるものとする。
　このとき、撮像素子は、例えば、通常読み出しモードと、高速読み出しモードと、で動作することができるようになっている。ここに、通常読み出しモードは、例えば静止画撮影を行う場合などに用いられる。また、高速読み出しモードは、例えば高速連写撮影を行う場合、あるいは動きが滑らかな高速フレームレートの動画撮影を行う場合などに用いられる。そして、高速読み出しモードは、通常読み出しモードよりも、Ａ／Ｄ変換におけるビット数を低く抑えることで、読出時間の短縮を図った読み出しモードである。すなわち、通常読み出し時には例えばＭビットＡ／Ｄ変換が行われ、高速読み出し時にはＮビットＡ／Ｄ変換が行われるようになっている。ここに、Ｍ，Ｎは、Ｍ＞Ｎを満たす正の整数である。具体的な数値の一例を挙げれば、Ｍ＝１０、Ｎ＝８である。
　メモリＩ／Ｆ１１は、記録媒体１０に記録されている画像データを読み出す制御を行う読出制御部であり、さらに、画像処理後の画像データを記録媒体１０へ記録する制御を行う記録制御部でもある。
　バス１２は、各種のデータや制御信号を、画像処理装置１内のある場所から他の場所へ転送するための転送路である。本実施形態におけるバス１２は、メモリＩ／Ｆ１１と、ＳＤＲＡＭ１３と、画像処理部１４と、ＪＰＥＧ処理部１５と、動画コーデック１６と、マイクロコンピュータ１９と、に接続されている。
　そして、メモリＩ／Ｆ１１により記録媒体１０から読み出された画像データは、バス１２を介して転送され、ＳＤＲＡＭ１３に一旦記憶される。
　ＳＤＲＡＭ１３は、記録媒体１０から読み出された画像データ、画像処理部１４により処理されもしくは処理途中の画像データ、動画コーデック１６により処理されもしくは処理途中の画像データ、等の各種データを一時的に記憶する記憶部である。
　画像処理部１４は、画像データに各種の画像処理を行い、表示用あるいは記録用の画像を作成する。
　ＪＰＥＧ処理部１５は、静止画像データを、ＪＰＥＧ処理により圧縮または伸張する圧縮伸張部である。このＪＰＥＧ処理部１５により処理された静止画像データは、マイクロコンピュータ１９によりヘッダ等を付加されて、メモリＩ／Ｆ１１を介して記録媒体１０にＪＰＥＧファイルとして記録される。
　動画コーデック１６は、動画像データを、ＭｏｔｉｏｎＪＰＥＧやＭＰＥＧなどの適宜の処理方式で圧縮伸張するものである。この動画コーデック１６により処理された動画像データは、マイクロコンピュータ１９によりヘッダ等を付加されて、メモリＩ／Ｆ１１を介して記録媒体１０に動画像ファイルとして記録される。
　操作部１７は、この画像処理装置１に対する各種の操作入力を行うためのものであり、画像処理装置１の電源のオン／オフ、画像処理の開始／終了、画像処理における各種パラメータの設定、記録媒体１０に対する画像ファイルの読み出しや保存などを操作することができるようになっている。この操作部１７に対して操作が行われると、操作内容に応じた信号がマイクロコンピュータ１９へ出力される。
　フラッシュメモリ１８は、マイクロコンピュータ１９により実行される処理プログラム（画像処理装置１により画像処理方法を実行するためのプログラムである画像処理プログラムを含む）と、この画像処理装置１に係る各種の情報と、を不揮発に記憶する記憶媒体である。ここに、フラッシュメモリ１８が記憶する情報としては、例えば、画像処理に用いるパラメータ、テーブル、関数、あるいはユーザにより設定された設定値などが挙げられる。具体的に、フラッシュメモリ１８には、光源の種類（例えば、昼間太陽、朝夕太陽、電球、蛍光灯など）に応じたホワイトバランスゲインが記憶されている。このフラッシュメモリ１８が記憶する情報は、マイクロコンピュータ１９により読み取られる。
　マイクロコンピュータ１９は、画像処理装置１を統括的に制御する制御部である。マイクロコンピュータ１９は、操作部１７からユーザの操作入力を受けると、フラッシュメモリ１８に記憶されている処理プログラムに従って、フラッシュメモリ１８から処理に必要なパラメータ等を読み込んで、操作内容に応じた各種のシーケンスを実行する。
　例えば、対象となる画像が選択されて、画像処理の実行が開始されると、マイクロコンピュータ１９の制御に基づいて、記録媒体１０からメモリＩ／Ｆ１１を介して画像データが読み出され、バス１２を介してＳＤＲＡＭ１３に記憶される。さらに、マイクロコンピュータ１９の制御に基づいて、画像処理部１４により画像処理が行われ、画像処理後の画像データが再びＳＤＲＡＭ１３に記憶される。この画像処理後の画像データは例えばモニタなどの表示部に表示される。ユーザは、モニタに表示された画像を見て、必要に応じて処理パラメータの設定値を変更して、画像処理を再度実行することもできる。そして、画像データが静止画像データである場合にはＪＰＥＧ処理部１５によりＪＰＥＧ圧縮され、また、画像データが動画像データである場合には動画コーデック１６により動画圧縮されて、画像ファイルとして記録媒体１０に記録される。
　なお、画像処理装置１は、専用の処理装置として構成されていても良いし、コンピュータに画像処理プログラムを実行させる構成であっても構わない。あるいは、画像処理装置１は、撮像装置内に組み込まれたものであっても構わない。
　次に、図２は画像処理部１４の構成を示すブロック図、図３は画像処理部１４の作用を示すフローチャートである。
　図２に示すように、画像処理部１４は、ＯＢ減算部２１と、デモザイキング処理部２２と、ビット拡張部２３と、レベル補正部２４と、ホワイトバランス補正部２５と、無彩色補正部２６と、色マトリクス演算部２７と、階調変換部２８と、を備えている。
　そして、画像処理装置１における図示しないメイン処理から図３に示す処理に入ると、ＯＢ減算部２１は、画像データにＯＢ（オプティカル・ブラック）成分が含まれている場合に、ＯＢ成分の減算を行う（ステップＳ１）。従って、ＯＢ成分が含まれている画像データの場合には、記録媒体１０にＯＢ成分も記録されていてメモリＩ／Ｆ１１により読み出されることになる。
　デモザイキング処理部２２は、デモザイキング処理を行う（ステップＳ２）。すなわち、デモザイキング処理部２２は、１画素に付き１色の色信号のみが存在するＲＧＢベイヤー画像において、ある色信号が欠落する画素の該色信号を、該画素の近傍において同色の色信号を有する画素の色信号に基づき補間することを、各画素の各欠落色信号に対して行うことにより、１画素に付きＲＧＢ各色の色信号が存在する画像を生成する。
　ビット拡張部２３は、ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張する（ステップＳ３）。従って、ビット拡張部２３は、画像データのビット数がＭビットである場合には、特段の処理は行わない。
　ここで、画像処理部１４において、ビット拡張部２３よりも前段に配置されている各部、具体的に図３に示す処理順序の場合には、ＯＢ減算部２１およびデモザイキング処理部２２は、入力された画像データがＮビットでもＭビットでも、何れも処理することができるように構成されている。
　これに対して、画像処理部１４において、ビット拡張部２３よりも後段に配置されている各部、具体的に図３に示す処理順序の場合には、レベル補正部２４と、ホワイトバランス補正部２５と、無彩色補正部２６と、色マトリクス演算部２７と、階調変換部２８とは、Ｍビットの画像データを処理するように構成されている。
　従って、ビット拡張部２３は、入力された画像データのビット数がＭビット未満（具体的には、Ｎビット）である場合に、後段の処理ビットに合わせてＭビットへのビット拡張を行うものとなっている。
　なお、上述では、画像処理部に入力される画像データのビット数がＭビットまたはＮビットになる理由の例として、撮像素子の読出モードが通常読み出しモードまたは高速読み出しモードである例を説明したが、この例に限定されるものではない。例えば、複数の画像データが異なる撮像装置で取得されたこと、つまり、第１の画像データはＭビットの画像データを出力する第１の撮像装置により取得され、第２の画像データはＮビットの画像データを出力する第２の撮像装置により取得されたことが理由であっても構わない。
　レベル補正部２４は、ビット拡張部２３によりＭビットに拡張されたカラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行う（ステップＳ４）。レベル補正部２４は、べき乗を記号「＾」により表す（以下、同様）とすると、レベル補正幅Ｗを、例えば、
　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
により算出し、レベル補正幅Ｗにより規定される範囲（すなわち、ビット拡張により生じる量子化誤差の範囲）でカラー映像信号にレベル補正を行う。
　より具体的に、レベル補正部２４は、レベル補正を行う前のカラー映像信号をＬｍ、レベル補正を行った後のカラー映像信号をＬｃとすると、
　　Ｌｍ＜Ｌｃ≦Ｌｍ＋Ｗ
の範囲でカラー映像信号にレベル補正を行う。カラー映像信号の信号値に値｛２＾（Ｍ－Ｎ）｝を乗算することによりビット拡張を行う場合には、この補正範囲が適切である。
　ただし、その他の何らかの方法でビット数が（Ｍ－Ｎ）だけ増加するビット拡張を行う場合には、この補正範囲に限定されるものではなく、例えば、
　　｛Ｌｍ－（Ｗ／２）｝＜Ｌｃ≦｛Ｌｍ＋（Ｗ／２）｝
の範囲、あるいは、
　　（Ｌｍ－Ｗ）＜Ｌｃ≦Ｌｍ
の範囲など（これらの場合でも、レベル補正幅Ｗにより規定される範囲は維持される）でカラー映像信号にレベル補正を行う、等であっても構わない。
　本実施形態においては、カラー映像信号が、Ｒ信号、Ｇ信号、およびＢ信号である場合を想定しており、後述するように、レベル補正部２４は、Ｇ信号にレベル補正を行わず、Ｒ信号およびＢ信号にレベル補正を行うようにしている。これは、Ｇ信号が輝度相当信号であるために、レベル補正によりカラーバランスは変化させるが、輝度は変化させないようにするためである。
　ホワイトバランス補正部２５は、レベル補正部２４によりレベル補正が行われたカラー映像信号に対してホワイトバランス補正を行う（ステップＳ５）。このホワイトバランス補正は、白色の被写体が画像上においても白色に見えるようにするためのカラーバランス補正である。
　ここに、上述したように、Ｇ信号は輝度相当信号であるために、ホワイトバランス補正によりホワイトバランスは変化させるが、輝度は変化させないようにすることが好ましい。そこで、ホワイトバランス補正部２５は、ホワイトバランス補正による信号値変化を、Ｇ信号に生じさせず（ゲインを乗算しないか、あるいは乗算するゲインを１とする）、Ｒ信号およびＢ信号に生じさせ得る（Ｒ信号にはＲ信号に対するホワイトバランスゲインＲｇａｉｎを乗算し、Ｂ信号にはＢ信号に対するホワイトバランスゲインＢｇａｉｎを乗算する）。
　ここに、上述したような光源の種類に応じたホワイトバランスゲインは、マイクロコンピュータ１９によりフラッシュメモリ１８から読み出されて、レベル補正部２４とホワイトバランス補正部２５とへ送信されるようになっている。一方、ホワイトバランス補正部２５が画像データに基づき適応的にホワイトバランスゲインを決定する場合には、ホワイトバランス補正部２５により決定されたホワイトバランスゲインが、ホワイトバランス補正部２５によるホワイトバランス補正が行われる前に、ホワイトバランス補正部２５からレベル補正部２４へ送信される。こうして何れにおいてもレベル補正部２４は、ホワイトバランス補正部２５によるホワイトバランス補正が行われる前に、ホワイトバランスゲインを取得するようになっている。
　無彩色補正部２６は、画像の無彩色部分に生じる偽色の低減処理を、例えば上述した日本国特開２０１５－２０７８２５号公報に記載の技術に基づき行う（ステップＳ６）。すなわち、本実施形態においては、画像の有彩色部分（ただし、後述するように有彩色部分に限定されるものではない）に生じる偽色をレベル補正部２４の処理により低減し、画像の無彩色部分に生じる偽色を無彩色補正部２６の処理により低減するようになっている。
　色マトリクス演算部２７は、画像データを構成する各画素データのＲＧＢ信号を例えば３行１列（あるいは１行３列でも構わない）の行列として構成し、この画素データに３行３列の色マトリクスを行列演算して、色空間を変換する処理を行う（ステップＳ７）。ここに、３行３列の色マトリクスを構成する色マトリクス係数は、例えば、フラッシュメモリ１８に予め記録されている。
　階調変換部２８は、モニタでの階調表示が適切となるような階調変換特性（例えば、ガンマ変換特性など）で画像を階調変換する（ステップＳ８）。
　その後は、画像処理装置１の図示しないメイン処理にリターンする。
　なお、図３に示した画像処理部１４内における処理順序は一例であるので、ステップＳ３のビット拡張を行い、その後にステップＳ４のレベル補正を行い、その後にステップＳ５のホワイトバランス補正を行うという順序が維持される点を除き、合理的な範囲内においてその他の処理順序で処理しても構わない。
　次に、図４は、Ｒｍレベル補正を示すフローチャートである。図３のステップＳ４においてレベル補正の処理に入ると、レベル補正部２４は、Ｒ信号に関してこの図４に示すＲｍレベル補正の処理を画素毎に実行し、Ｂ信号に関して後述する図５に示すＢｍレベル補正の処理を画素毎に実行するようになっている。
　ここに、Ｒｍ，Ｂｍは、レベル補正を行う前のＲ，Ｂ信号をそれぞれ表している。また、以下においては、レベル補正を行った後のＲ，Ｂ信号をそれぞれＲｃ，Ｂｃとして表すものとする。
　図４の処理に入ると、まず、Ｒｍ＜Ｇｍが満たされているか否かを判定する（ステップＳ１１）。
　ここで、Ｒｍ＜Ｇｍが満たされていると判定された場合には、Ｒ信号に対するホワイトバランスゲインＲｇａｉｎをＲｍに乗算して、レベル補正を行うことなくホワイトバランス補正を行った場合のＲ信号Ｒｗｂを、次のように算出する（ステップＳ１２）。
　　Ｒｗｂ＝Ｒｍ×Ｒｇａｉｎ
　そして、Ｒｗｂ＜Ｇｍが満たされているか否かを判定する（ステップＳ１３）。
　ここで、図８は、レベル補正を行うことなくホワイトバランス補正を行った場合のＲ信号Ｒｗｂ、Ｇ信号Ｇｍ、およびＢ信号Ｂｗｂの例を、ビット拡張の様子と共に示すグラフである。この図８は、Ｒｗｂ＜Ｇｍが満たされている例を示している。
　ここで、Ｒｗｂ＜Ｇｍが満たされていると判定された場合には、レベル補正幅Ｗを、
　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
により算出する。レベル補正を行った後のＲ信号をＲｃとすると、レベル補正幅Ｗにより規定される
　　Ｒｍ＜Ｒｃ≦Ｒｍ＋Ｗ
の範囲でＲ信号のレベル補正が行われるようになっている。
　そこで、Ｒ信号のレベル補正最大値Ｒｆを、
　　Ｒｆ＝Ｒｍ＋Ｗ
として算出し、さらに、Ｒ信号に対するホワイトバランスゲインＲｇａｉｎをＲｆに乗算して、最大のレベル補正を行った場合のＲ信号Ｒｆｗｂを、次のように算出する（ステップＳ１４）。
　　Ｒｆｗｂ＝Ｒｆ×Ｒｇａｉｎ
　次に、Ｒｆｗｂ＞Ｇｍが満たされているか否かを判定する（ステップＳ１５）。ここに、ステップＳ１１、ステップＳ１３、およびステップＳ１５が全て満たされる条件、つまり、
　　Ｒｍ＜ＧｍかつＲｗｂ＜ＧｍかつＲｆｗｂ＞Ｇｍ
が満たされる条件は、第１の条件である。
　図９は、Ｒ信号のレベル補正最大値Ｒｆとレベル補正を行ったＲ信号Ｒｃとにホワイトバランス補正を行ったときの例を示すグラフである。図８および図９には、第１の条件が満たされる例を示している。
　ここで、Ｒｆｗｂ＞Ｇｍが満たされていると判定された場合には、Ｒｍにそのままホワイトバランス補正を行ったＲｗｂはＧｍ未満のままである（図８参照）が、Ｒｍに最大のレベル補正を行ってからホワイトバランス補正を行ったＲｆｗｂはＧｍよりも大きくなる（図９参照）ことを意味し、つまり、レベル補正によってホワイトバランス補正後のＲｍとＧｍとの大小関係が逆転し得ること（従って、ＲｍとＧｍとは、元々、それほどかけ離れた値ではないこと）を意味している。
　この図４に示す処理においては、Ｒｆｗｂ＞Ｇｍが満たされていると判定された場合に、さらに、処理対象の画素が、有彩色であるか否かを判定するようになっている。
　すなわち、まず、Ｒｍのレベル補正に関連して、有彩色であるか否かを示す指標（広い意味での彩度）として、例えば、Ｂに係る彩度Ｓｂを次のように算出する（ステップＳ１６）。
　　Ｓｂ＝Ｂｗｂ／Ｇｍ
　そして、Ｂに係る彩度が第１の閾値よりも高いことの判定として、Ｓｂ＞ＴｈＳ１（ここに、ＴｈＳ１＞１．０を満たす）であるか否かを判定し、Ｂの補色に係る彩度が第２の閾値よりも高いことの判定として、Ｓｂ＜ＴｈＳ２（ここに、ＴｈＳ２＜１．０を満たす）であるか否かを判定する（ステップＳ１７）。
　図８には、Ｓｂ＞ＴｈＳ１（すなわち、Ｂｗｂ＞｛Ｇｍ×ＴｈＳ１｝）が満たされる場合の例と、Ｓｂ＜ＴｈＳ２（すなわち、Ｂｗｂ＜｛Ｇｍ×ＴｈＳ２｝）が満たされる場合の例と、を示している。
　ここで、Ｓｂ＞ＴｈＳ１とＳｂ＜ＴｈＳ２との何れか一方が満たされると判定された場合には、
　　０＜Ｃｒ≦Ｗ
の範囲において、レベル補正量Ｃｒを設定し、
　　Ｒｃ＝Ｒｍ＋Ｃｒ
により、レベル補正を行った後のＲ信号Ｒｃを算出する（ステップＳ１８）。
　こうして、Ｒｃは、上述した範囲、
　　Ｒｍ＜Ｒｃ≦Ｒｍ＋Ｗ
において所望に設定することができるが、具体的な値としては、範囲内における中央の値をＲｃとする一例が挙げられる。
　ただし、Ｗは、（Ｍ－Ｎ）＝１，２，３，４，…に応じて、Ｗ＝１，３，７，１５…等の奇数値をとるために、Ｗの半分の値は半奇数となる。そこで、中央値に隣接する整数値の一方、
　　Ｒｃ＝Ｒｍ＋［｛２＾（Ｍ－Ｎ）｝－１＋１］／２
　　　　＝Ｒｍ＋｛２＾（Ｍ－Ｎ－１）｝
をより具体的な例として挙げておく。
　この例の場合には、ビット拡張したときのビット数の変化（Ｍ－Ｎ）＝１，２，３，４，…に応じて、
　　Ｒｃ＝（Ｒｍ＋１），（Ｒｍ＋２），（Ｒｍ＋４），（Ｒｍ＋８），…
のレベル補正を行うことになる。
　このステップＳ１８の処理を行うか、またはステップＳ１１、ステップＳ１３、ステップＳ１５、ステップＳ１７の何れかの条件が満たされない場合には、図３に示す処理にリターンする。
　ステップＳ１８の処理を行った場合には、その後のステップＳ５の処理により、レベル補正されたＲ信号Ｒｃに対してＲｇａｉｎが乗算され、レベル補正を行ってからホワイトバランス補正を行ったＲ信号であるＲｃｗｂが図９に示すように算出されることになる。一方、ステップＳ１８の処理を行わなかった場合には、ホワイトバランス補正において、Ｒ信号Ｒｍに対してＲｇａｉｎが乗算され、Ｒｗｂが算出されることになる。
　次に、図５は、Ｂｍレベル補正を示すフローチャートである。上述したように、図３のステップＳ４においてレベル補正の処理に入ると、レベル補正部２４は、Ｂ信号について、この図５に示すＢｍレベル補正の処理を画素毎に実行する。この図５に示すＢｍレベル補正の処理は、処理対象の信号がＲ信号からＢ信号になる以外は、上述した図４に示すＲｍレベル補正の処理とほぼ同様である。
　すなわち、図５の処理に入ると、まず、Ｂｍ＜Ｇｍが満たされているか否かを判定する（ステップＳ２１）。
　ここで、Ｂｍ＜Ｇｍが満たされていると判定された場合には、Ｂ信号に対するホワイトバランスゲインＢｇａｉｎをＢｍに乗算して、レベル補正を行うことなくホワイトバランス補正を行った場合のＢ信号Ｂｗｂを、次のように算出する（ステップＳ２２）。
　　Ｂｗｂ＝Ｂｍ×Ｂｇａｉｎ
　そして、Ｂｗｂ＜Ｇｍが満たされているか否かを判定する（ステップＳ２３）。
　ここで、Ｂｗｂ＜Ｇｍが満たされていると判定された場合には、上述したレベル補正幅Ｗにより規定される
　　Ｂｍ＜Ｂｃ≦Ｂｍ＋Ｗ
の範囲でＢ信号のレベル補正が行われ、レベル補正を行った後のＢ信号Ｂｃが算出されるようになっている。
　そこで、Ｂ信号のレベル補正最大値Ｂｆを、
　　Ｂｆ＝Ｂｍ＋Ｗ
として算出し、さらに、Ｂ信号に対するホワイトバランスゲインＢｇａｉｎをＢｆに乗算して、最大のレベル補正を行った場合のＢ信号Ｂｆｗｂを、次のように算出する（ステップＳ２４）。
　　Ｂｆｗｂ＝Ｂｆ×Ｂｇａｉｎ
　次に、Ｂｆｗｂ＞Ｇｍが満たされているか否かを判定する（ステップＳ２５）。ここに、ステップＳ２１、ステップＳ２３、およびステップＳ２５が全て満たされる条件、つまり、
　　Ｂｍ＜ＧｍかつＢｗｂ＜ＧｍかつＢｆｗｂ＞Ｇｍ
が満たされる条件は、第２の条件である。
　ここで、Ｂｆｗｂ＞Ｇｍが満たされていると判定された場合には、Ｂｍにそのままホワイトバランス補正を行ったＢｗｂはＧｍ未満のままであるが、Ｂｍに最大のレベル補正を行ってからホワイトバランス補正を行ったＢｆｗｂはＧｍよりも大きくなることを意味し、つまり、レベル補正によってホワイトバランス補正後のＢｍとＧｍとの大小関係が逆転し得ること（従って、ＢｍとＧｍとは、元々、それほどかけ離れた値ではないこと）を意味している。
　この図５に示す処理においては、Ｂｆｗｂ＞Ｇｍが満たされていると判定された場合に、さらに、処理対象の画素が、有彩色であるか否かを判定するようになっている。
　すなわち、まず、Ｂｍのレベル補正に関連して、有彩色であるか否かを示す指標（広い意味での彩度）として、例えば、Ｒに係る彩度Ｓｒを次のように算出する（ステップＳ２６）。
　　Ｓｒ＝Ｒｗｂ／Ｇｍ
　そして、Ｒに係る彩度が第３の閾値よりも高いことの判定として、Ｓｒ＞ＴｈＳ３（ここに、ＴｈＳ３＞１．０を満たす）であるか否かを判定し、Ｒの補色に係る彩度が第４の閾値よりも高いことの判定として、Ｓｒ＜ＴｈＳ４（ここに、ＴｈＳ４＜１．０を満たす）であるか否かを判定する（ステップＳ２７）。
　ここで、Ｓｒ＞ＴｈＳ３とＳｒ＜ＴｈＳ４との何れか一方が満たされると判定された場合には、
　　０＜Ｃｂ≦Ｗ
の範囲において、レベル補正量Ｃｂを設定し、
　　Ｂｃ＝Ｂｍ＋Ｃｂ
により、レベル補正を行った後のＢ信号Ｂｃを算出する（ステップＳ２８）。
　ここに、Ｂｃの具体的な値の一例としては、範囲内における中央の値に最も近い整数値、すなわち、
　　Ｂｃ＝Ｂｍ＋｛２＾（Ｍ－Ｎ－１）｝
が挙げられるのは、上述したＲｃの場合と同様である。
　このステップＳ２８の処理を行うか、またはステップＳ２１、ステップＳ２３、ステップＳ２５、ステップＳ２７の何れかの条件が満たされない場合には、図３に示す処理にリターンする。
　ステップＳ２８の処理を行った場合には、その後のステップＳ５の処理により、レベル補正されたＢ信号Ｂｃに対してＢｇａｉｎが乗算され、レベル補正を行ってからホワイトバランス補正を行ったＢ信号であるＢｃｗｂが算出されることになる。一方、ステップＳ２８の処理を行わなかった場合には、ホワイトバランス補正において、Ｂ信号Ｂｍに対してＢｇａｉｎが乗算され、Ｂｗｂが算出されることになる。
　こうして図４のステップＳ１６およびステップＳ１７と、図５のステップＳ２６およびステップＳ２７とにおいて説明したように、レベル補正部２４は、レベル補正を行うことなくホワイトバランス補正を行った場合のＲ信号Ｒｗｂ、Ｇ信号Ｇｍ、およびＢ信号Ｂｗｂに基づき彩度を画素毎に算出して、彩度が所定の閾値よりも高い第３の条件を満たすか否かをさらに判定し、第１の条件および第３の条件を満たす場合にのみＲｃを算出し、第２の条件および第３の条件を満たす場合にのみＢｃを算出している。
　具体的に、レベル補正部２４は、Ｒｃの算出に係る第３の条件を満たすか否かの判定として、Ｂに係る彩度が第１の閾値よりも高いこと、またはＢの補色に係る彩度が第２の閾値よりも高いことを満たすか否かを判定し、Ｂｃの算出に係る第３の条件を満たすか否かの判定として、Ｒに係る彩度が第３の閾値よりも高いこと、またはＲの補色に係る彩度が第４の閾値よりも高いことを満たすか否かを判定している。
　なお、図４および図５に示した処理においては、上述したように彩度に関する第３の条件を満たすか否かを判定して（ステップＳ１６～Ｓ１７およびステップＳ２６～Ｓ２７等参照）、第３の条件が満たされる場合にのみ、レベル補正部２４によるレベル補正を行うようにしていた。
　しかし、これに限定されるものではない。
　図６はＲｍレベル補正の変形例を示すフローチャート、図７はＢｍレベル補正の変形例を示すフローチャートである。
　図６に示す処理は、図４に示す処理からステップＳ１６およびステップＳ１７の処理を省略したもの、図７に示す処理は、図５に示す処理からステップＳ２６およびステップＳ２７の処理を省略したものとなっている。このように、彩度に関する第３の条件を満たすか否かの判定を省略しても構わない。
　図４および図５に示した処理と、図６および図７に示した処理と、の何れにおいても、ステップＳ１１、ステップＳ１３、およびステップＳ１５の処理と、ステップＳ２１、ステップＳ２３、およびステップＳ２５の処理と、は行われるために、レベル補正部２４は、画素が、上述した第１の条件
　　Ｒｍ＜ＧｍかつＲｗｂ＜ＧｍかつＲｆｗｂ＞Ｇｍ
を満たすか否かを判定し、第１の条件を満たす場合にのみＲｃを算出し、さらに画素が、上述した第２の条件
　　Ｂｍ＜ＧｍかつＢｗｂ＜ＧｍかつＢｆｗｂ＞Ｇｍ
を満たすか否かを判定し、第２の条件を満たす場合にのみＢｃを算出していることになる。
　なお、上述ではカラー映像信号が、Ｒ信号、Ｇ信号、およびＢ信号である場合を説明したが、これに限定されるものではなく、例えば、補色系の信号であっても良いし、４色以上の信号で構成されるカラー映像信号であっても構わない。
　また、上述では、Ｒに係る彩度ＳｒをＳｒ＝Ｒｗｂ／Ｇｍにより算出し、Ｂに係る彩度ＳｂをＳｂ＝Ｂｗｂ／Ｇｍにより算出したが、その他の方法で算出した彩度を用いても勿論構わない。
　このような実施形態１によれば、ＮビットからＭビットに拡張されたカラー映像信号に、ビット拡張時のビット数の差（Ｍ－Ｎ）に基づくレベル補正を行ってからホワイトバランス補正を行うようにしたために、周辺画素の参照を不要としながら（つまり、負荷の重い複雑な処理を要することなく）、ビット拡張されたカラー映像信号の有彩色部分に生じる偽色を簡便かつ有効に低減することができる。
　また、レベル補正幅Ｗ＝［｛２＾（Ｍ－Ｎ）｝－１］により規定される範囲（すなわち、ビット拡張により生じる量子化誤差の範囲）でカラー映像信号にレベル補正を行うようにしたために、過補正になることなく（つまり、副作用をほとんど生じさせることなく）、ビット拡張に起因する偽色を適切に補正することができる。
　そして、Ｌｍ＜Ｌｃ≦Ｌｍ＋Ｗの範囲でカラー映像信号にレベル補正を行うようにしたために、信号値に値｛２＾（Ｍ－Ｎ）｝を乗算することによりビット拡張を行う場合に適したレベル補正を行うことができる。
　特に、上述ではカラー映像信号を、Ｒ信号、Ｇ信号、およびＢ信号として、Ｒ信号およびＢ信号のみにレベル補正とホワイトバランス補正とを行うようにしたために、輝度相当信号であるＧ信号の信号値はレベル補正とホワイトバランス補正とにおいて変化せず、つまり画像の明るさをほぼ変化させることなく、偽色を低減してホワイトバランス補正を行うことができる利点がある。
　このとき、レベル補正幅Ｗにより規定される
　　Ｒｍ＜Ｒｃ≦Ｒｍ＋Ｗ
　　Ｂｍ＜Ｂｃ≦Ｂｍ＋Ｗ
の範囲でＲ，Ｂ信号にレベル補正を行うことで、量子化誤差の範囲に応じた適切なレベル補正をＲ，Ｂ信号に対して行うことができる。
　そして、画素が、次の第１の条件
　　Ｒｍ＜ＧｍかつＲｗｂ＜ＧｍかつＲｆｗｂ＞Ｇｍ
を満たす場合にのみＲｃを算出するようにしたために、ビット拡張によりＲ信号に生じる偽色成分を良好に低減することができる。
　また、画素が、次の第２の条件
　　Ｂｍ＜ＧｍかつＢｗｂ＜ＧｍかつＢｆｗｂ＞Ｇｍ
を満たす場合にのみＢｃを算出するようにしたために、ビット拡張によりＢ信号に生じる偽色成分を良好に低減することができる。
　さらに、図６に示したように第１の条件を満たす場合にＲｃを算出し、図７に示したように第２の条件を満たす場合にＢｃを算出するようにすれば、無彩色付近の低彩度色に生じる偽色も有効に低減することができる。
　一方、彩度が所定の閾値よりも高い第３の条件を満たすか否かをさらに判定して、第１の条件および第３の条件を満たす場合にのみＲｃを算出し、第２の条件および第３の条件を満たす場合にのみＢｃを算出する場合には、彩度が低い場合のレベル補正が不要となり、処理負荷を軽減することができる。特に、図３のステップＳ６に示したように、無彩色部分に生じる偽色の低減処理を別途行う場合には、処理の効率化を図ることができる。
　このとき、Ｒｃの算出に係る第３の条件を満たすか否かの判定として、Ｂに係る彩度が第１の閾値よりも高いこと、またはＢの補色に係る彩度が第２の閾値よりも高いことを満たすか否かを判定するようにしたために、ＢまたはＢの補色にＲの偽色が混入するタイプの、目立つ偽色を効果的に低減することができる。
　また、Ｂｃの算出に係る第３の条件を満たすか否かの判定として、Ｒに係る彩度が第３の閾値よりも高いこと、またはＲの補色に係る彩度が第４の閾値よりも高いことを満たすか否かを判定するようにしたために、ＲまたはＲの補色にＢの偽色が混入するタイプの、目立つ偽色を効果的に低減することができる。
　なお、上述した各部は、回路として構成されていてもよい。そして、任意の回路は、同一の機能を果たすことができれば、単一の回路として実装されていてもよいし、複数の回路を組み合わせたものとして実装されていても構わない。さらに、任意の回路は、目的とする機能を果たすための専用回路として構成されるに限るものではなく、汎用回路に処理プログラムを実行させることで目的とする機能を果たす構成であっても構わない。あるいは、ハードウェアとして構成されたプロセッサが、各部の処理を行うようにしてもよい。
　また、上述では主として画像処理装置について説明したが、画像処理装置と同様の処理を行う画像処理方法であってもよいし、コンピュータに画像処理装置と同様の処理を行わせるための画像処理プログラム（コンピュータプログラム）、該画像処理プログラムを記録するコンピュータにより読み取りできる一時的でない記録媒体、等であっても構わない。
　さらに、本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明の態様を形成することができる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用をすることができるのは勿論である。
　本出願は、２０１７年２月２７日に日本国に出願された特願２０１７－３４５９４号を優先権主張の基礎として出願するものであり、上記の開示内容は、本願明細書、請求の範囲、図面に引用されたものとする。

Claims (14)

  1. 　カラー映像信号を処理するための画像処理装置であって、
    　ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張部と、
    　前記ビット拡張部によりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正部と、
    　前記レベル補正部により前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正部と、
    　を備えることを特徴とする画像処理装置。
  2. 　前記レベル補正部は、べき乗を記号「＾」により表すとすると、レベル補正幅Ｗを、
    　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
    により算出し、前記レベル補正幅Ｗにより規定される範囲で前記カラー映像信号に前記レベル補正を行うことを特徴とする請求項１に記載の画像処理装置。
  3. 　前記レベル補正を行う前の前記カラー映像信号をＬｍ、前記レベル補正を行った後の前記カラー映像信号をＬｃとすると、前記レベル補正部は、
    　　Ｌｍ＜Ｌｃ≦Ｌｍ＋Ｗ
    の範囲で前記カラー映像信号に前記レベル補正を行うことを特徴とする請求項２に記載の画像処理装置。
  4. 　前記カラー映像信号は、Ｒ信号、Ｇ信号、およびＢ信号であり、
    　前記レベル補正部は、Ｇ信号に前記レベル補正を行わず、Ｒ信号およびＢ信号に前記レベル補正を行い、
    　前記ホワイトバランス補正部は、前記ホワイトバランス補正による信号値変化を、Ｇ信号に生じさせず、Ｒ信号およびＢ信号に生じさせ得ることを特徴とする請求項１に記載の画像処理装置。
  5. 　前記レベル補正を行う前のＲ，Ｂ信号をＲｍ，Ｂｍ、前記レベル補正を行った後のＲ，Ｂ信号をＲｃ，Ｂｃとし、べき乗を記号「＾」により表すとすると、前記レベル補正部は、レベル補正幅Ｗを、
    　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
    により算出し、前記レベル補正幅Ｗにより規定される
    　　Ｒｍ＜Ｒｃ≦Ｒｍ＋Ｗ
    　　Ｂｍ＜Ｂｃ≦Ｂｍ＋Ｗ
    の範囲でＲ，Ｂ信号に前記レベル補正を行うことを特徴とする請求項４に記載の画像処理装置。
  6. 　前記レベル補正部は、前記ホワイトバランス補正におけるＲ，Ｂ信号に対するホワイトバランスゲインＲｇａｉｎ，Ｂｇａｉｎを、前記ホワイトバランス補正部による前記ホワイトバランス補正が行われる前に取得して、Ｇ信号をＧｍとし、Ｒ，Ｂ信号のレベル補正最大値をＲｆ，Ｂｆとしたときに、画素毎に、
    　　Ｒｆ＝Ｒｍ＋Ｗ
    　　Ｂｆ＝Ｂｍ＋Ｗ
    　　Ｒｗｂ＝Ｒｍ×Ｒｇａｉｎ
    　　Ｂｗｂ＝Ｂｍ×Ｂｇａｉｎ
    　　Ｒｆｗｂ＝Ｒｆ×Ｒｇａｉｎ
    　　Ｂｆｗｂ＝Ｂｆ×Ｂｇａｉｎ
    を算出し、
    　前記画素が、次の第１の条件
    　　Ｒｍ＜ＧｍかつＲｗｂ＜ＧｍかつＲｆｗｂ＞Ｇｍ
    を満たすか否かを判定し、前記第１の条件を満たす場合にのみ前記Ｒｃを算出し、
    　さらに前記画素が、次の第２の条件
    　　Ｂｍ＜ＧｍかつＢｗｂ＜ＧｍかつＢｆｗｂ＞Ｇｍ
    を満たすか否かを判定し、前記第２の条件を満たす場合にのみ前記Ｂｃを算出することを特徴とする請求項５に記載の画像処理装置。
  7. 　前記レベル補正部は、前記レベル補正を行うことなく前記ホワイトバランス補正を行った場合のＲ信号Ｒｗｂ、Ｇ信号Ｇｍ、およびＢ信号Ｂｗｂに基づき彩度を画素毎に算出して、前記彩度が所定の閾値よりも高い第３の条件を満たすか否かをさらに判定し、前記第１の条件および前記第３の条件を満たす場合にのみ前記Ｒｃを算出し、前記第２の条件および前記第３の条件を満たす場合にのみ前記Ｂｃを算出することを特徴とする請求項６に記載の画像処理装置。
  8. 　前記レベル補正部は、前記Ｒｃの算出に係る前記第３の条件を満たすか否かの判定として、Ｂに係る彩度が第１の閾値よりも高いこと、またはＢの補色に係る彩度が第２の閾値よりも高いことを満たすか否かを判定し、前記Ｂｃの算出に係る前記第３の条件を満たすか否かの判定として、Ｒに係る彩度が第３の閾値よりも高いこと、またはＲの補色に係る彩度が第４の閾値よりも高いことを満たすか否かを判定することを特徴とする請求項７に記載の画像処理装置。
  9. 　カラー映像信号を処理するための画像処理方法であって、
    　ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張ステップと、
    　前記ビット拡張ステップによりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正ステップと、
    　前記レベル補正ステップにより前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正ステップと、
    　を備えることを特徴とする画像処理方法。
  10. 　前記レベル補正ステップは、べき乗を記号「＾」により表すとすると、レベル補正幅Ｗを、
    　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
    により算出し、前記レベル補正幅Ｗにより規定される範囲で前記カラー映像信号に前記レベル補正を行うことを特徴とする請求項９に記載の画像処理方法。
  11. 　前記カラー映像信号は、Ｒ信号、Ｇ信号、およびＢ信号であり、
    　前記レベル補正ステップは、Ｇ信号に前記レベル補正を行わず、Ｒ信号およびＢ信号に前記レベル補正を行い、
    　前記ホワイトバランス補正ステップは、前記ホワイトバランス補正による信号値変化を、Ｇ信号に生じさせず、Ｒ信号およびＢ信号に生じさせ得ることを特徴とする請求項９に記載の画像処理方法。
  12. 　画像処理装置のコンピュータに、カラー映像信号を処理させるための画像処理プログラムを記録したコンピュータで読取のできる記録媒体であって、前記画像処理プログラムは以下を含む、
    　ホワイトバランス補正を行う前のＮビットのカラー映像信号を、Ｍ＞Ｎを満たすＭビットのカラー映像信号に拡張するビット拡張ステップと、
    　前記ビット拡張ステップによりＭビットに拡張された前記カラー映像信号に、（Ｍ－Ｎ）に基づくレベル補正を行うレベル補正ステップと、
    　前記レベル補正ステップにより前記レベル補正が行われた前記カラー映像信号に対して前記ホワイトバランス補正を行うホワイトバランス補正ステップ。
  13. 　前記レベル補正ステップは、べき乗を記号「＾」により表すとすると、レベル補正幅Ｗを、
    　　Ｗ＝｛２＾（Ｍ－Ｎ）｝－１
    により算出し、前記レベル補正幅Ｗにより規定される範囲で前記カラー映像信号に前記レベル補正を行うことを特徴とする請求項１２に記載の記録媒体。
  14. 　前記カラー映像信号は、Ｒ信号、Ｇ信号、およびＢ信号であり、
    　前記レベル補正ステップは、Ｇ信号に前記レベル補正を行わず、Ｒ信号およびＢ信号に前記レベル補正を行い、
    　前記ホワイトバランス補正ステップは、前記ホワイトバランス補正による信号値変化を、Ｇ信号に生じさせず、Ｒ信号およびＢ信号に生じさせ得ることを特徴とする請求項１２に記載の記録媒体。
PCT/JP2018/000811 2017-02-27 2018-01-15 画像処理装置、画像処理方法、記録媒体 Ceased WO2018154998A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US16/523,991 US11134234B2 (en) 2017-02-27 2019-07-26 Image processing apparatus, image processing method, and recording medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017-034594 2017-02-27
JP2017034594A JP2018142778A (ja) 2017-02-27 2017-02-27 画像処理装置、画像処理方法、画像処理プログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/523,991 Continuation US11134234B2 (en) 2017-02-27 2019-07-26 Image processing apparatus, image processing method, and recording medium

Publications (1)

Publication Number Publication Date
WO2018154998A1 true WO2018154998A1 (ja) 2018-08-30

Family

ID=63254252

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2018/000811 Ceased WO2018154998A1 (ja) 2017-02-27 2018-01-15 画像処理装置、画像処理方法、記録媒体

Country Status (3)

Country Link
US (1) US11134234B2 (ja)
JP (1) JP2018142778A (ja)
WO (1) WO2018154998A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7348756B2 (ja) * 2019-06-21 2023-09-21 キヤノン株式会社 撮像装置、制御方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008160291A (ja) * 2006-12-21 2008-07-10 Fujifilm Corp 画像信号処理装置、画像信号処理プログラム及び撮像装置
JP2013223061A (ja) * 2012-04-16 2013-10-28 Olympus Imaging Corp 画像処理装置
JP2015207825A (ja) * 2014-04-17 2015-11-19 オリンパス株式会社 画像処理装置、画像処理方法、画像処理プログラム

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3465550B2 (ja) * 1997-09-11 2003-11-10 日産自動車株式会社 内燃機関のアイドル回転数制御装置
US6297835B1 (en) * 1998-10-05 2001-10-02 Ati International Srl Method and apparatus for processing data as different sizes
US6215468B1 (en) * 1998-11-13 2001-04-10 Philips Electronics North America Corporation Circuit for converting an 8-bit input video signal into a 10-bit gamma corrected output video signal
JP3763397B2 (ja) * 2000-03-24 2006-04-05 シャープ株式会社 画像処理装置、画像表示装置、パーソナルコンピュータ、画像処理方法
EP1746846B1 (en) 2004-04-12 2019-03-20 Nikon Corporation Image processing device having color shift-correcting function, image processing program, and electronic camera
US20100110222A1 (en) * 2004-09-03 2010-05-06 Texas Instruments Incorporated Digital camera front-end architecture

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008160291A (ja) * 2006-12-21 2008-07-10 Fujifilm Corp 画像信号処理装置、画像信号処理プログラム及び撮像装置
JP2013223061A (ja) * 2012-04-16 2013-10-28 Olympus Imaging Corp 画像処理装置
JP2015207825A (ja) * 2014-04-17 2015-11-19 オリンパス株式会社 画像処理装置、画像処理方法、画像処理プログラム

Also Published As

Publication number Publication date
US20190349557A1 (en) 2019-11-14
US11134234B2 (en) 2021-09-28
JP2018142778A (ja) 2018-09-13

Similar Documents

Publication Publication Date Title
US8488026B2 (en) Image capturing system and computer readable recording medium for recording image processing program
JP4337911B2 (ja) 撮像装置、撮像回路、および撮像方法
US9058640B2 (en) Image processing apparatus, image processing method and recording medium
US20040196381A1 (en) Image processing method and apparatus
US8427550B2 (en) Image processing device correcting image data, image sensor and image processing method
JP4360416B2 (ja) 画像圧縮方法、画像圧縮装置およびプログラム
US8823832B2 (en) Imaging apparatus
US9565411B2 (en) Image processing device, image processing method, and non-transitory computer-readable recording medium for recording image processing program
US20090167917A1 (en) Imaging device
JP2008160881A (ja) 固体撮像装置および撮像方法
JP6375806B2 (ja) 画像処理装置、方法、及び撮像装置
JP6282123B2 (ja) 画像処理装置、画像処理方法及びプログラム
US6967660B2 (en) Image processing apparatus and image processing system
US10387999B2 (en) Image processing apparatus, non-transitory computer-readable medium storing computer program, and image processing method
WO2018154998A1 (ja) 画像処理装置、画像処理方法、記録媒体
JP7830563B2 (ja) 撮像装置、撮像方法、及び撮像プログラム撮像装置、撮像方法、及び撮像プログラム
JP4767525B2 (ja) 撮像システム及び撮像処理プログラム
JP4092830B2 (ja) 画像データ圧縮方法
JP4262059B2 (ja) 色相別色補正処理回路
US10375304B2 (en) Image processing apparatus and image processing method
US8154627B2 (en) Imaging device
US20120098988A1 (en) Image processor, electronic device including image processor, and image processing method
JP2017112421A (ja) 画像処理装置、撮像装置および画像処理プログラム
KR102138331B1 (ko) 영상 처리 장치, 영상 처리 방법, 및 촬영 장치
JP2004153847A (ja) 画像入力装置の画像処理回路

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18756660

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18756660

Country of ref document: EP

Kind code of ref document: A1