JP2010118926A

JP2010118926A - Imaging device

Info

Publication number: JP2010118926A
Application number: JP2008291023A
Authority: JP
Inventors: Katsuyuki Suzuki; 克征鈴木
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2008-11-13
Filing date: 2008-11-13
Publication date: 2010-05-27
Anticipated expiration: 2028-11-13
Also published as: JP5136369B2

Abstract

<P>PROBLEM TO BE SOLVED: To correct the brightness of image data obtained by flashlight photographing properly, and to prevent subject blurring and shorten the time, from release button depression to correction. <P>SOLUTION: This imaging device includes an emission part 10 for emitting an illuminating light to a subject; an imaging element 14 for imaging a subject light for creating an image signal; a creation part 16 for creating subject image data, based on the image signal; and a correction part 20 for correcting the subject image data. The creation part 16 creates first subject image data based on the image signal created from the subject light, when the illuminating light is not emitted, and also creates second subject image data based on the image signal created from the subject light, when the illuminating light is emitted, after the first subject image data is created. The correction part 20 corrects the second subject image data, by using the first subject image data. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、フラッシュ光を用いて撮像した被写体画像データを補正する撮像装置に関するものである。 The present invention relates to an imaging apparatus that corrects subject image data captured using flash light.

フラッシュ光が照射されなかった被写体を撮像した第１の画像信号に所定の重み付け係数を乗算し、フラッシュ光が照射された被写体を撮像した第２の画像信号に所定の重み付け係数を乗算した後に、第１の画像信号と第２の画像信号とを合成して第３の画像信号を生成することにより、例えば、夜景をバックに被写体を撮影する際に、被写体にフラッシュ光以外の光源からの光が照射されている場合においても、夜景および被写体のそれぞれに最適なホワイトバランス調整がなされた撮像データを得ることができる撮像装置が知られている（例えば、特許文献１参照）。
特開２００１−３５８９８６号公報 After multiplying the first image signal obtained by imaging the subject not irradiated with flash light by a predetermined weighting coefficient, and multiplying the second image signal obtained by imaging the subject irradiated with flash light by a predetermined weighting coefficient, By synthesizing the first image signal and the second image signal to generate a third image signal, for example, when shooting a subject against a night scene, light from a light source other than flash light is emitted to the subject. There is known an imaging apparatus that can obtain imaging data in which white balance adjustment is optimal for each of a night view and a subject even when the image is irradiated (see, for example, Patent Document 1).
JP 2001-358986 A

ところで、特許文献１に記載された撮像装置においては、被写体にフラッシュ光を照射して第１の画像信号を取得した後に、フラッシュ光を照射しない状態で第２の画像信号を取得するため、両画像信号を取得する間の時間差に起因する被写体ぶれが発生するおそれがある。 By the way, in the imaging apparatus described in Patent Document 1, both the two image signals are acquired without irradiating flash light after irradiating the subject with flash light and acquiring the first image signal. There is a risk of subject blurring due to the time difference during the acquisition of the image signal.

本発明の課題は、フラッシュ撮影によって取得された画像データの明るさを適切に補正できると共に、被写体ぶれの発生を防止し、レリーズボタン押下後から補正処理までの時間を短縮することができる撮像装置を提供することである。 An object of the present invention is to provide an imaging apparatus capable of appropriately correcting the brightness of image data acquired by flash photography, preventing subject blurring, and shortening the time from the release button being pressed to the correction processing. Is to provide.

本発明の撮像装置は、被写体に対して照明光を発光する発光部と、被写体光を撮像し撮像信号を生成する撮像素子と、前記撮像信号に基づいて被写体画像データを生成する生成部と、前記被写体画像データを補正する補正部とを備え、前記生成部は、前記照明光が発光されていないときの被写体光から生成された撮像信号に基づいて第１の被写体画像データを生成すると共に、前記第１の被写体画像データの生成後、前記照明光が発光されたときの被写体光から生成された撮像信号に基づいて第２の被写体画像データを生成し、前記補正部は、前記第１の被写体画像データを使用して前記第２の被写体画像データの補正を行うことを特徴とする。 An imaging apparatus of the present invention includes a light emitting unit that emits illumination light to a subject, an imaging element that captures subject light and generates an imaging signal, a generation unit that generates subject image data based on the imaging signal, A correction unit that corrects the subject image data, and the generation unit generates first subject image data based on an imaging signal generated from the subject light when the illumination light is not emitted, After the generation of the first subject image data, second subject image data is generated based on an imaging signal generated from the subject light when the illumination light is emitted, and the correction unit is configured to generate the first subject image data. The second subject image data is corrected using subject image data.

本発明の撮像装置によれば、フラッシュ撮影によって取得された画像データの明るさを適切に補正できると共に、被写体ぶれの発生を防止し、レリーズボタン押下後から補正処理までの時間を短縮することができる。 According to the imaging apparatus of the present invention, it is possible to appropriately correct the brightness of image data acquired by flash photography, to prevent subject blurring, and to shorten the time from the release button being pressed to the correction processing. it can.

以下、図面を参照して本発明の実施の形態に係る撮像装置について説明する。図１は、この実施の形態に係る撮像装置としてのカメラ２の概略構成を示すブロック図である。図１に示すように、カメラ２は、カメラ２の各部を統括的に制御する制御部４を備えている。制御部４には、カメラ２の各部との間で制御信号を送受信するための通信回路としてのバス６が接続されており、バス６には、操作部８、発光部１０、Ａ／Ｄ変換回路１２を介して接続された撮像素子１４、画像生成部１６、画像表示部１８、画像補正部２０、バッファメモリ２２、記録媒体２４等が接続されている。 Hereinafter, an imaging apparatus according to an embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing a schematic configuration of a camera 2 as an imaging apparatus according to this embodiment. As shown in FIG. 1, the camera 2 includes a control unit 4 that comprehensively controls each unit of the camera 2. A bus 6 as a communication circuit for transmitting and receiving control signals to and from each unit of the camera 2 is connected to the control unit 4. The bus 6 has an operation unit 8, a light emitting unit 10, and A / D conversion. An image sensor 14, an image generation unit 16, an image display unit 18, an image correction unit 20, a buffer memory 22, a recording medium 24, and the like connected via the circuit 12 are connected.

操作部８は、カメラ２の本体の上部や背面に設けられた各種のスイッチやボタン等から構成されており、カメラ２の使用者（以下、撮影者という）が種々の操作／指示を手動入力する際に使用される。具体的には、カメラ２の電源のオン／オフを行うための電源スイッチ、撮影を指示するためのレリーズボタン、画像表示部１８にメニュー画面を表示させるためのメニューボタン、表示されたメニュー画面において機能設定や項目選択を行うための十字キーや決定ボタン等が設けられている。操作部８から制御部４に対して入力された操作信号は、制御部４によって制御信号に変換されてカメラ２の各部に送信される。 The operation unit 8 includes various switches and buttons provided on the upper and rear surfaces of the main body of the camera 2, and a user of the camera 2 (hereinafter referred to as a photographer) manually inputs various operations / instructions. Used when doing. Specifically, a power switch for turning on / off the power of the camera 2, a release button for instructing shooting, a menu button for displaying a menu screen on the image display unit 18, and a displayed menu screen There are provided a cross key and a decision button for function setting and item selection. An operation signal input from the operation unit 8 to the control unit 4 is converted into a control signal by the control unit 4 and transmitted to each unit of the camera 2.

カメラ２の前面に設けられた発光部１０は、フラッシュ撮影モードの選択時に撮影者によってレリーズボタンが押下されると、被写体を瞬間的に照明するフラッシュ光を発光する。ここで、フラッシュ撮影モードの選択は、制御部４によって自動的に行われてもよいし、撮影者が手動で行ってもよい。なお、発光部１０は、オートフォーカス用の赤外線光を発光する機能を備えていてもよいし、カメラ２に対して着脱可能に装着される、所謂外付けのものであってもよい。 The light emitting unit 10 provided on the front surface of the camera 2 emits flash light that momentarily illuminates the subject when the release button is pressed by the photographer when the flash photographing mode is selected. Here, the selection of the flash photographing mode may be automatically performed by the control unit 4 or may be manually performed by the photographer. The light emitting unit 10 may have a function of emitting infrared light for autofocusing, or may be a so-called external device that is detachably attached to the camera 2.

撮像素子１４は、ＣＣＤまたはＣＭＯＳ等により構成されており、カメラ２の本体の前面に設けられた撮影レンズを透過した被写体光を撮像し、撮像した像から光電変換して生成される撮像信号（蓄積電荷としてのアナログ信号）をＡ／Ｄ変換回路１２に対して出力する。撮像素子１４から出力された撮像信号は、Ａ／Ｄ変換回路１２においてゲイン調整などの処理が行われた後にアナログ信号からデジタル信号に変換され、画像生成部１６に対して出力される。 The imaging element 14 is configured by a CCD, a CMOS, or the like. The imaging element 14 captures an image of subject light that has passed through a photographing lens provided on the front surface of the camera 2 and photoelectrically converts the captured image from the captured image ( Analog signal as accumulated charge) is output to the A / D conversion circuit 12. The image pickup signal output from the image pickup element 14 is subjected to processing such as gain adjustment in the A / D conversion circuit 12 and then converted from an analog signal to a digital signal and output to the image generation unit 16.

画像生成部１６は、Ａ／Ｄ変換回路１２から出力されたデジタル信号に基づいて、被写体画像データを生成する。なお、詳細は後述するが、生成される被写体画像データには、本撮影画像データ、プレビュー画像データ、撮影前画像データの３種類が存在する。また、画像生成部１６は、被写体画像データの生成に合わせて、ホワイトバランス調整、シャープネス調整、ガンマ補正、階調調整等の画像処理を適宜行ってもよい。生成された被写体画像データは、バッファメモリ２２または記録媒体２４に対して送信されて記憶される。ここで、バッファメモリ２２は、新しい撮影前画像データを受信した場合には、既に記憶しているデータを書き換えてもよいし、蓄積して保存してもよい。また、記録媒体２４は、カメラ２に設けられた装着部（スロット）に着脱可能に装着されるメモリカード等の可搬性を有する記録媒体である。記録媒体２４には、Ｅｘｉｆ（Ｅｘｃｈａｎｇａｂｌｅｉｍａｇｅｆｉｌｅｆｏｒｍａｔ）等の所定の形式で、撮影日時等の撮影に関する情報と共に被写体画像データが記録される。 The image generation unit 16 generates subject image data based on the digital signal output from the A / D conversion circuit 12. Although details will be described later, there are three types of subject image data to be generated: main image data, preview image data, and pre-image data. The image generation unit 16 may appropriately perform image processing such as white balance adjustment, sharpness adjustment, gamma correction, and gradation adjustment in accordance with the generation of the subject image data. The generated subject image data is transmitted to and stored in the buffer memory 22 or the recording medium 24. Here, when new pre-photographing image data is received, the buffer memory 22 may rewrite already stored data or may store and store the data. The recording medium 24 is a portable recording medium such as a memory card that is detachably mounted in a mounting portion (slot) provided in the camera 2. In the recording medium 24, subject image data is recorded in a predetermined format such as Exif (Exchangeable image file format) together with information related to shooting such as shooting date and time.

画像表示部１８は、カメラ２の背面に設けられており、ＬＣＤパネルから構成されている。カメラ２が撮影モードに設定されている場合には、撮像素子１４によって撮像されたプレビュー画像（スルー画像、ライブビュー画像）が画像表示部１８に表示される。また、画像表示部１８は、記録媒体２４に記録されている画像や、メニュー画面等を表示することもできる。 The image display unit 18 is provided on the back surface of the camera 2 and includes an LCD panel. When the camera 2 is set to the shooting mode, a preview image (through image, live view image) captured by the image sensor 14 is displayed on the image display unit 18. The image display unit 18 can also display an image recorded on the recording medium 24, a menu screen, and the like.

画像補正部２０は、バッファメモリ２２に記憶されているフラッシュ撮影時に生成された被写体画像データに対して、後述する補正処理を実行する。当該補正処理が行われることにより、フラッシュ光の反射等によって明るさ（輝度）が極度に高い部分などが適切に補正された良好な撮影画像が生成される。 The image correction unit 20 performs correction processing, which will be described later, on the subject image data generated during flash photography stored in the buffer memory 22. By performing the correction process, a good captured image in which a portion with extremely high brightness (luminance) is appropriately corrected by reflection of flash light or the like is generated.

次に、撮像素子１４による撮像信号の生成、及び画像生成部１６による被写体画像データの生成について詳しく説明する。上述したように、画像生成部１６は、本撮影画像データ、プレビュー画像データ、及び撮影前画像データの３種類の被写体画像データを生成する。 Next, generation of an imaging signal by the imaging element 14 and generation of subject image data by the image generation unit 16 will be described in detail. As described above, the image generation unit 16 generates three types of subject image data: main captured image data, preview image data, and pre-photographed image data.

本撮影画像データは、撮影者によってカメラ２が備えるレリーズボタンが押下されたときに生成される被写体画像データである。レリーズボタンが押下されると、制御部４は、撮像素子１４に対して制御信号を出力して被写体光の露光を開始させる。露光が終了すると、Ａ／Ｄ変換回路１２は、撮像素子１４が有する最大の画素数（画像サイズ）または予め設定された画素数の撮像信号を取得し、デジタル信号に変換して画像生成部１６に出力する。画像生成部１６は、受信した信号に基づいて、当該画素数に対応する画素データ数から構成される本撮影画像データを生成する。ここで、発光部１０によるフラッシュ光の発光を伴わずに撮影が行われた場合には、生成された本撮影画像データは記録媒体２４へ出力されて記録される。一方、フラッシュ光の発光を伴った撮影が行われた場合には、生成された本撮影画像データはバッファメモリ２２へ一旦出力され、必要な補正が実行された後に記録媒体２４へ出力されて記録される。 The captured image data is subject image data generated when a release button provided in the camera 2 is pressed by the photographer. When the release button is pressed, the control unit 4 outputs a control signal to the image sensor 14 to start exposure of subject light. When the exposure is completed, the A / D conversion circuit 12 acquires an imaging signal having the maximum number of pixels (image size) or a preset number of pixels that the imaging element 14 has, converts the imaging signal into a digital signal, and converts it into a digital signal. Output to. Based on the received signal, the image generation unit 16 generates main captured image data including the number of pixel data corresponding to the number of pixels. Here, when shooting is performed without the flash light emitted by the light emitting unit 10, the generated captured image data is output to the recording medium 24 and recorded. On the other hand, when shooting with flash light emission is performed, the generated actual captured image data is temporarily output to the buffer memory 22, and after necessary correction is performed, it is output to the recording medium 24 for recording. Is done.

プレビュー画像データは、カメラ２が撮影モードに設定されている場合に、画像表示部１８にプレビュー画像を継続的に表示するために生成される被写体画像データである。このプレビュー画像データは、撮像素子１４から所定の時間間隔毎に読み出された撮像信号に基づいて画像生成部１６によって継続的に生成される。生成されたプレビュー画像データは、バッファメモリ２２へ出力されて一時的に記憶された後に、制御部４によって読み出されて画像表示部１８に表示される。この実施の形態に係るカメラ２においては、プレビュー画像は毎秒３０フレーム表示されるため、撮像素子１４による被写体光の露光も毎秒３０回実行される。ここで、プレビュー画像データ用の露光後には、上述の本撮影画像データの画素数の数分の１程度の画素数の撮像信号しか読み出されない。このようにして読み出される撮像信号数が削減されることにより、読み出し時間が短くなると共に、画像生成部１６に対して出力されるデジタル変換された信号のデータ量も少なくなるため、毎秒３０フレームという高速なプレビュー画像データの生成処理が可能になる。 The preview image data is subject image data generated in order to continuously display the preview image on the image display unit 18 when the camera 2 is set to the shooting mode. The preview image data is continuously generated by the image generation unit 16 based on the imaging signal read from the imaging element 14 at predetermined time intervals. The generated preview image data is output to the buffer memory 22 and temporarily stored, and then read by the control unit 4 and displayed on the image display unit 18. In the camera 2 according to this embodiment, since the preview image is displayed at 30 frames per second, exposure of subject light by the image sensor 14 is also executed 30 times per second. Here, after the exposure for the preview image data, only the image pickup signal having the number of pixels which is about a fraction of the number of pixels of the above-described main photographed image data is read out. By reducing the number of imaging signals read out in this way, the readout time is shortened and the data amount of the digitally converted signal output to the image generation unit 16 is also reduced, so that it is 30 frames per second. High-speed preview image data generation processing can be performed.

撮影前画像データは、フラッシュ撮影によって取得される本撮影画像データを補正するために生成される被写体画像データである。カメラ２がフラッシュ撮影モードに設定されている場合には、上述のプレビュー画像データが所定回数生成される毎に一の撮影前画像データが生成される。ここで、本撮影画像データの補正処理は、本撮影画像データの画素単位で実行されるため、補正用に生成される撮影前画像データは、補正対象としての本撮影画像データと同数の画素数から構成されている必要がある。従って、撮像素子１４によって生成された撮像信号の読み出しには、プレビュー画像データを生成する際に要した時間の数倍の時間が必要となる。 The pre-photographing image data is subject image data generated to correct the main photographing image data acquired by flash photographing. When the camera 2 is set to the flash photographing mode, one pre-photographing image data is generated every time the above-described preview image data is generated a predetermined number of times. Here, since the correction processing of the main captured image data is executed in units of pixels of the main captured image data, the pre-photographing image data generated for correction has the same number of pixels as the main captured image data to be corrected. It is necessary to consist of. Accordingly, the readout of the imaging signal generated by the imaging device 14 requires several times the time required to generate the preview image data.

次に図２のタイミングチャートを用いて、画像生成部１６による被写体画像データの生成処理について説明する。なお、図２は、プレビュー画像データが５回生成される毎に撮影前画像データが１回生成される場合を例にしている。ここで、ｅ_１〜ｅ_８は撮像素子１４によるプレビュー画像データの露光時間、Ｄ_１〜Ｄ_８は画像生成部１６によるプレビュー画像データの読出時間、Ｅ´は撮像素子１４による撮影前画像データの露光時間、Ｆは画像生成部１６による撮影前画像データの読出時間、Ｅは撮像素子１４による本撮影画像データの露光時間、Ｓは画像生成部１６による本撮影画像データの読出時間を示している。 Next, subject image data generation processing by the image generation unit 16 will be described with reference to the timing chart of FIG. Note that FIG. 2 shows an example in which pre-photographing image data is generated once every time preview image data is generated five times. Here, e _{1 to} e ₈ are the exposure time of the preview image data by the image sensor 14, D _{1 to} D ₈ are the read time of the preview image data by the image generation unit 16, and E ′ is the image data before photographing by the image sensor 14. The exposure time, F is the readout time of the pre-shooting image data by the image generation unit 16, E is the exposure time of the actual captured image data by the image sensor 14, and S is the readout time of the actual captured image data by the image generation unit 16. .

図２に示すように、撮像素子１４が被写体光を時間ｅ_１だけ露光して撮像信号を生成すると、画像生成部１６が読出時間Ｄ_１内に当該撮像信号に基づいて第１のプレビュー画像データを生成する。制御部４は、当該画像データに基づいて、画像表示部１８に第１のプレビュー画像を１／３０秒間だけ表示する。以下同様に、露光時間ｅ_２及び読出時間Ｄ_２内に生成された第２のプレビュー画像データに基づく第２のプレビュー画像、露光時間ｅ_３及び読出時間Ｄ_３内に生成された第３のプレビュー画像データに基づく第３のプレビュー画像、露光時間ｅ_４及び読出時間Ｄ_４内に生成された第４のプレビュー画像データに基づく第４のプレビュー画像、そして露光時間ｅ_５及び読出時間Ｄ_５内に生成された第５のプレビュー画像データに基づく第５のプレビュー画像が、それぞれ１／３０秒間ずつ順番に画像表示部１８に表示される。 As shown in FIG. 2, when the image sensor 14 exposes subject light for a time e ₁ to generate an image signal, the image generator 16 generates first preview image data based on the image signal within the readout time D ₁ . Is generated. The control unit 4 displays the first preview image for 1/30 second on the image display unit 18 based on the image data. Similarly, the second preview image based on the second preview image data generated during the exposure time e ₂ and the readout time D ₂ , and the _third preview generated during the exposure time e ₃ and the readout time D ₃ . A third preview image based on the image data, a fourth preview image based on the fourth preview image data generated within the exposure time e ₄ and the readout time D ₄ , and within an exposure time e ₅ and the readout time D ₅ A fifth preview image based on the generated fifth preview image data is displayed on the image display unit 18 in order for each 1/30 second.

ここで、一のプレビュー画像データを生成する際に要する時間は１／３０秒より短いため、画像生成部１６において生成されたプレビュー画像データが画像表示部１８に表示されるまでにはタイムラグが生じる。しかしながら、当該タイムラグは極僅かであるので、プレビュー画像を見ながら撮影を行っている撮影者によって認識されることはない。 Here, since the time required to generate one preview image data is shorter than 1/30 second, a time lag occurs before the preview image data generated by the image generation unit 16 is displayed on the image display unit 18. . However, since the time lag is very small, it is not recognized by the photographer who is photographing while viewing the preview image.

第５のプレビュー画像データの生成が終了すると、撮像素子１４は被写体光を露光時間Ｅ´だけ露光して撮影前画像データ用の撮像信号を生成する。画像生成部１６は、読出時間Ｆ内に読み出された当該撮像信号に基づいて撮影前画像データを生成する。ここで、上述したように、撮影前画像データは、プレビュー画像データの画素数の数倍の画素数を有するため、読出時間Ｆはプレビュー画像データの読出時間Ｄ_１等よりも数倍長くなる。そして、生成された撮影前画像データは、バッファメモリ２２に送信されて一時的に記憶される。 When the generation of the fifth preview image data is completed, the image sensor 14 exposes the subject light for the exposure time E ′ to generate an image signal for pre-photographing image data. The image generation unit 16 generates pre-photographing image data based on the imaging signal read within the readout time F. Here, as described above, before photographing image data, since it has a number of pixels is several times the number of pixels of the preview image data, reading time F is several times longer than the readout time D ₁ like the preview image data. The generated pre-photographing image data is transmitted to the buffer memory 22 and temporarily stored.

以上のように、図２に示す例においては、プレビュー画像データが５回生成された後に、撮影前画像データが１回生成されるまでが１サイクルとなる。従って、撮影前画像データの生成が終了すると、撮像素子１４は、再びプレビュー画像データ（第６のプレビュー画像データ）の露光を開始する（露光時間ｅ_６）。一方、各プレビュー画像が画像表示部１８に表示されるまでには上述のタイムラグが生じているため、プレビュー画像データ及び撮影前画像データの生成サイクルの終了時（読出時間Ｆの経過時）においても、画像表示部１８には第５のプレビュー画像が依然として表示されている。そして、読出時間Ｄ_６が経過して第６のプレビュー画像データが生成されると、第５のプレビュー画像の表示が終了した画像表示部１８に、２回目のサイクルの第１のプレビュー画像として第６のプレビュー画像が表示される。以上のようにしてプレビュー画像の表示が繰り返し実行されることにより、撮像素子１４及び画像生成部１６によるプレビュー画像データの生成が中断されている場合においても、画像表示部１８には１／３０秒毎に継続してプレビュー画像が表示される。 As described above, in the example shown in FIG. 2, after the preview image data is generated five times, it takes one cycle until the pre-photographing image data is generated once. Therefore, when the generation of the pre-photographing image data is completed, the image sensor 14 starts the exposure of the preview image data (sixth preview image data) again (exposure time e ₆ ). On the other hand, since the above-described time lag occurs until each preview image is displayed on the image display unit 18, the preview image data and the pre-photographing image data generation cycle is also completed (when the readout time F has elapsed). The fifth preview image is still displayed on the image display unit 18. Then, when the sixth preview image data is generated after the reading time D ₆ has elapsed, the image display unit 18 that has finished displaying the fifth preview image displays the first preview image as the first preview image in the second cycle. 6 preview images are displayed. Even when the generation of the preview image data by the image pickup device 14 and the image generation unit 16 is interrupted by repeatedly executing the display of the preview image as described above, the image display unit 18 has 1/30 seconds. A preview image is continuously displayed every time.

プレビュー画像の表示中に撮影者によってレリーズボタンが押下されると、プレビュー画像データや撮影前画像データの生成処理が中断されて、本撮影画像データの生成が開始される。例えば、図２に示すように、撮像素子１４がプレビュー画像データの露光をしている間（露光時間ｅ_７）に、撮影者によってレリーズボタンが押下されると、制御部４は、撮像素子１４によるプレビュー画像の露光を中止して、本撮影画像データの露光を開始させる（露光時間Ｅ）。露光時間Ｅが経過して撮像信号が生成されると、画像生成部１６は、読出時間Ｓ内に読み出された当該撮像信号に基づいて本撮影画像データを生成する。ここで、上述したように、本撮影画像データは、プレビュー画像データの画素数の数倍の画素数を有するため、読出時間Ｓはプレビュー画像データの読出時間Ｄ_１等よりも数倍長くなる。そして、生成された本撮影画像データは、バッファメモリ２２に対して送信されて一時的に記憶された後に補正処理が実行される。なお、読出時間Ｓが終了すると、再びプレビュー画像データ（第８のプレビュー画像データ）の露光が開始される（露光時間ｅ_８）。 When the release button is pressed by the photographer while the preview image is displayed, the generation processing of the preview image data and the pre-shooting image data is interrupted, and the generation of the main shooting image data is started. For example, as illustrated in FIG. 2, when the release button is pressed by the photographer while the image sensor 14 is exposing the preview image data (exposure time e ₇ ), the control unit 4 causes the image sensor 14 to The exposure of the preview image is stopped and the exposure of the actual captured image data is started (exposure time E). When the imaging signal is generated after the exposure time E has elapsed, the image generation unit 16 generates main captured image data based on the imaging signal read out within the readout time S. Here, as described above, the captured image data, since it has a number of pixels is several times the number of pixels of the preview image data, reading time S is several times longer than the readout time D ₁ like the preview image data. Then, the generated captured image data is transmitted to the buffer memory 22 and temporarily stored, and then correction processing is executed. When the reading time S ends, exposure of the preview image data (eighth preview image data) is started again (exposure time e ₈ ).

図３は、フラッシュ撮影時に生成された本撮影画像データに基づいて作成された撮影画像の１例である。図３に示すように、フラッシュ撮影を行った場合には、例えば、主要被写体上においてフラッシュ光が局所的に強く反射した領域Ｐや、構図内にあるガラスなどの反射物においてフラッシュ光が強く反射した領域Ｑなどの、極度に輝度が高い領域が撮影画像内に発生し、被写体の本来の色調が再現されず、ホワイトバランスも異常になる。 FIG. 3 is an example of a captured image created based on the actual captured image data generated during flash imaging. As shown in FIG. 3, when flash photography is performed, for example, the flash light is strongly reflected by a region P where the flash light is locally strongly reflected on the main subject or a reflecting object such as glass in the composition. A region with extremely high brightness, such as the region Q, occurs in the captured image, the original color tone of the subject is not reproduced, and the white balance becomes abnormal.

図４は、フラッシュ撮影時に生成された本撮影画像データに基づいて作成された撮影画像の輝度分布を示す図である。なお、図４（ａ）は撮影画像を示し、図４（ｂ）のグラフは、図４（ａ）の直線ＡＡ上に存在する画素の輝度出力を示している。 FIG. 4 is a diagram illustrating a luminance distribution of a captured image created based on main captured image data generated at the time of flash photographing. 4A shows a captured image, and the graph of FIG. 4B shows the luminance output of the pixels existing on the straight line AA of FIG. 4A.

図４（ａ）に示すように、撮影画像内に極度に明るい領域Ｒが存在している場合には、図４（ｂ）のグラフに示すように、領域Ｒ内を構成する画素データの輝度は、領域Ｒ外の領域を構成する画素データの輝度に比して極度に高いことが分かる。従って、輝度の所定の閾値としてΔｔｈを設定し、本撮影画像データを構成する各画素データの輝度をΔｔｈと比較することにより、撮影画像における高輝度領域を特定することができる。 As shown in FIG. 4A, when an extremely bright region R exists in the photographed image, the luminance of the pixel data constituting the region R as shown in the graph of FIG. Is extremely higher than the luminance of the pixel data constituting the region outside the region R. Therefore, by setting Δth as a predetermined threshold value of luminance and comparing the luminance of each pixel data constituting the actual captured image data with Δth, a high luminance region in the captured image can be specified.

次に、図５に示すフローチャートを参照して、この実施の形態に係るカメラ２において実行されるフラッシュ撮影処理について説明する。始めに、自動または手動によってフラッシュ撮影モードが設定されたことによりフラッシュ撮影が開始されると（ステップＳ１０）、制御部４は、撮影者の周囲の明るさや被写体距離などの撮影条件、撮影レンズの性能や発光部１０の照明性能などに基づいて、撮影画像内に存在する高輝度領域を判定するための閾値としてΔｔｈを設定する（ステップＳ１２）。なお、このΔｔｈは、撮影者が手動で設定してもよいし、制御部４によって自動的に設定された値を変更してもよい。また、撮影条件に変化があった場合には、新たなΔｔｈが自動的に設定されることが望ましい。 Next, with reference to the flowchart shown in FIG. 5, the flash photographing process executed in the camera 2 according to this embodiment will be described. First, when flash shooting is started by setting the flash shooting mode automatically or manually (step S10), the control unit 4 determines shooting conditions such as the brightness of the photographer and the subject distance, the shooting lens. Based on the performance, the illumination performance of the light emitting unit 10, and the like, Δth is set as a threshold for determining a high-luminance region present in the captured image (step S12). Note that Δth may be set manually by the photographer or may be changed automatically by the control unit 4. Further, it is desirable that a new Δth is automatically set when there is a change in shooting conditions.

Δｔｈの設定処理が実行されると、画像生成部１６によって所定の間隔毎にプレビュー画像データが生成され、当該画像データに基づいて、画像表示部１８にプレビュー画像が表示される（ステップＳ１４）。上述のように、撮影者によってレリーズボタンが押下されるまでは、画像表示部１８にはライブビュー画像が１／３０秒毎に更新されながら継続的に表示される。 When the Δth setting process is executed, preview image data is generated at predetermined intervals by the image generation unit 16, and a preview image is displayed on the image display unit 18 based on the image data (step S14). As described above, until the release button is pressed by the photographer, the live view image is continuously displayed on the image display unit 18 while being updated every 1/30 seconds.

一方、画像生成部１６は、プレビュー画像データの生成を数回（この実施例においては５回）行う毎に、本撮影画像の補正に使用する第１の被写体画像データとして撮影前画像データを生成する（ステップＳ１６）。この撮影前画像データは、撮影者によって撮影される本撮影画像の画素数と同等の画素数を有している必要がある。生成された撮影前画像データは、バッファメモリ２２に対して送信されて一時的に保存される（ステップＳ１８）。 On the other hand, every time the preview image data is generated several times (five times in this embodiment), the image generation unit 16 generates pre-photographing image data as the first subject image data used for correcting the main captured image. (Step S16). This pre-photographing image data needs to have the same number of pixels as the number of pixels of the main photographed image photographed by the photographer. The generated pre-photographing image data is transmitted to the buffer memory 22 and temporarily stored (step S18).

プレビュー画像を見ながら所望の構図や撮影条件を決定した撮影者によってレリーズボタンが押下されると（ステップＳ２０）、発光部１０からフラッシュ光が発光されて被写体の撮影が行われる（ステップＳ２２）。即ち、フラッシュ光が照射された被写体からの被写体光を露光した撮像素子１４が撮像信号を生成し、当該撮像信号を受信した画像生成部１６が第２の被写体画像データとしての本撮影画像データを生成する。生成された本撮影画像データは、バッファメモリ２２に送信された後に一時的に保存される（ステップＳ２４）。なお、レリーズボタンが押下されない場合には、プレビュー画像の生成と表示、及び撮影前画像データの生成と保存が繰り返し実行される。この場合においては、バッファメモリ２２に保存されている古い撮影前画像データは、新しく生成された撮影前画像データによって書き換えられる。 When the release button is pressed by the photographer who has determined the desired composition and shooting conditions while viewing the preview image (step S20), flash light is emitted from the light emitting unit 10 and the subject is shot (step S22). That is, the image sensor 14 that has exposed the subject light from the subject irradiated with the flash light generates an imaging signal, and the image generation unit 16 that has received the imaging signal generates the main captured image data as the second subject image data. Generate. The generated captured image data is temporarily stored after being transmitted to the buffer memory 22 (step S24). When the release button is not pressed, generation and display of a preview image and generation and storage of pre-photographing image data are repeatedly executed. In this case, the old pre-photographing image data stored in the buffer memory 22 is rewritten with newly generated pre-photographing image data.

本撮影画像データの保存が完了すると、画像補正部２０によって、詳細は後述する本撮影画像データの補正が実行される（ステップＳ２６）。当該補正が実行されることによって、画素データの輝度が適切に補正された本撮影画像データは、記録媒体２４へ送信されて保存される（ステップＳ２８）。 When the saving of the main image data is completed, the image correction unit 20 corrects the main image data, which will be described in detail later (step S26). By executing the correction, the captured image data in which the luminance of the pixel data is appropriately corrected is transmitted to the recording medium 24 and stored (step S28).

次に、図６に示すフローチャートを用いて、この発明の実施の形態に係るカメラ２の画像補正部２０が行う画像の補正処理、即ち、図５に示すフローチャートのステップＳ２６において実行される画像の補正処理について説明する。なお、当該補正処理は、本撮影画像における高輝度部分の判定処理と、当該高輝度部分に対する輝度調整処理との２つの処理からなる。 Next, using the flowchart shown in FIG. 6, the image correction processing performed by the image correction unit 20 of the camera 2 according to the embodiment of the present invention, that is, the image executed in step S26 of the flowchart shown in FIG. The correction process will be described. Note that the correction process includes two processes, that is, a determination process for a high-intensity part in the captured image and a luminance adjustment process for the high-intensity part.

高輝度部分の判定処理が開始されると、画像補正部２０は、バッファメモリ２２に保存されている本撮影画像データの横サイズ（画素数）Ｈ及び縦サイズＶを取得する（ステップＳ３０）。画像サイズを取得することにより、本撮影画像データを構成する各画素データの位置を、座標（ｈ，ｖ）（１≦ｈ≦Ｈ，１≦ｖ≦Ｖ）で表すことができる。まず始めに、ｈ＝１，ｖ＝１が設定され（ステップＳ３２）、座標（ｈ，ｖ）、即ち座標（１，１）にある画素データ（以降、画素データ（１，１）という）が高輝度判定の対象となる画素データとして選択されると、画素データ（１，１）の輝度値ｂが読み出される（ステップＳ３４）。次に、画像補正部２０は、輝度値ｂと予め設定された閾値であるΔｔｈとを比較する（ステップＳ３６）。 When the high-intensity portion determination process is started, the image correction unit 20 acquires the horizontal size (number of pixels) H and the vertical size V of the main captured image data stored in the buffer memory 22 (step S30). By acquiring the image size, the position of each pixel data constituting the actual captured image data can be represented by coordinates (h, v) (1 ≦ h ≦ H, 1 ≦ v ≦ V). First, h = 1 and v = 1 are set (step S32), and pixel data at the coordinates (h, v), that is, the coordinates (1, 1) (hereinafter referred to as pixel data (1, 1)). When the pixel data to be subjected to the high luminance determination is selected, the luminance value b of the pixel data (1, 1) is read (step S34). Next, the image correction unit 20 compares the luminance value b with Δth that is a preset threshold value (step S36).

輝度値ｂがΔｔｈより小さい場合には、画像補正部２０によって画素データ（１，１）の輝度の補正は必要ないと判断され、ステップＳ４２に進む。 If the luminance value b is smaller than Δth, the image correction unit 20 determines that the luminance correction of the pixel data (1, 1) is not necessary, and proceeds to step S42.

一方、輝度値ｂがΔｔｈより大きい場合には、画素データ（１，１）の輝度は補正が必要であると判定されて、撮影前画像データを構成する画素データの中の、画素データ（１，１）に対応する画素データ、即ち、撮影前画像データの座標（１，１）で表される座標位置にある画素データの輝度値ａが読み出される（ステップＳ３８）。ここで、撮影前画像データは、本撮影画像データと同数の画素数を有し、横サイズがＨかつ縦サイズがＶで構成されているため、本撮影画像データを構成する画素データのすべてに対応する画素データを有している。 On the other hand, when the luminance value b is larger than Δth, it is determined that the luminance of the pixel data (1, 1) needs to be corrected, and the pixel data (1 , 1), that is, the luminance value a of the pixel data at the coordinate position represented by the coordinates (1, 1) of the pre-photographing image data is read (step S38). Here, since the pre-shooting image data has the same number of pixels as the main shooting image data, and the horizontal size is H and the vertical size is V, all of the pixel data constituting the main shooting image data is included. It has corresponding pixel data.

次に、画像補正部２０は、読み出された輝度値ａを用いて、詳細は後述する画素単位の補正を実行する（ステップＳ４０）。当該補正が終了すると、補正を終了した画素データの座標（ｈ，ｖ）の横方向の座標ｈと、本撮影画像データの横サイズＨとの大小が比較される（ステップＳ４２）。ｈがＨより小さい場合、即ち、補正を終了した画素データが、本撮影画像データの右端に位置する画素のデータでない場合には、横方向の座標ｈに１が加算され（ステップＳ４４）、座標（ｈ＋１，ｖ）にある画素データが高輝度判定の対象となる画素データとして選択される（ステップＳ３４）。即ち、画素データ（１，１）の補正の終了後には、画素データ（２，１）が高輝度判定の対象として選択される。 Next, the image correcting unit 20 performs pixel-by-pixel correction, which will be described later in detail, using the read luminance value a (step S40). When the correction is completed, the horizontal coordinate h of the coordinate (h, v) of the pixel data for which the correction has been completed is compared with the horizontal size H of the actual captured image data (step S42). When h is smaller than H, that is, when the pixel data for which correction has been completed is not the data of the pixel located at the right end of the actual captured image data, 1 is added to the horizontal coordinate h (step S44). Pixel data at (h + 1, v) is selected as pixel data to be subjected to high luminance determination (step S34). That is, after the correction of the pixel data (1, 1) is completed, the pixel data (2, 1) is selected as a target for high brightness determination.

以上のようにしてステップＳ３４〜Ｓ４４が繰り返し実行された後に、座標（１，１）〜（Ｈ，１）で表される横方向の画素データの補正が終了すると、ステップＳ４２においてｈがＨ以上と判断されて、横方向の座標ｈが１に戻される（ステップＳ４６）。 After the steps S34 to S44 are repeatedly executed as described above, when correction of the pixel data in the horizontal direction represented by the coordinates (1, 1) to (H, 1) is completed, h is H or more in step S42. And the horizontal coordinate h is returned to 1 (step S46).

次に、ステップＳ４８においてｖとＶの大小が比較され、ｖがＶより小さいと判断された場合、即ち、補正の対象となる画素データが、本撮影画像データの上端に位置する画素のデータでない場合には、ｖに１が加算され（ステップＳ５０）、座標（１，ｖ＋１）の座標によって示される画素データが読みこまれる（ステップＳ３４）。即ち、画素データ（１，１）〜（Ｈ，１）の補正の終了後には、画素データ（１，２）が次の高輝度判定の対象として選択される。 Next, when v and V are compared in step S48 and it is determined that v is smaller than V, that is, the pixel data to be corrected is not the data of the pixel located at the upper end of the actual captured image data. In this case, 1 is added to v (step S50), and the pixel data indicated by the coordinates (1, v + 1) is read (step S34). That is, after the correction of the pixel data (1, 1) to (H, 1) is completed, the pixel data (1, 2) is selected as the next high brightness determination target.

上述と同様にステップＳ３４〜Ｓ４４が繰り返し実行され、座標（１，２）〜（Ｈ，２）で表される横方向の画素データの補正が終了すると、同様にステップＳ４２〜Ｓ５０が実行されて画素データ（１，３）が次の高輝度判定の対象として選択される（ステップＳ３４）。以降、このような処理が繰り返し実行されることにより、（Ｈ，Ｖ）で合わされる画素データまで、即ち本画像データを構成するすべての画素データに対して補正処理が実行される。画素データ（Ｈ，Ｖ）の補正が終了すると、ステップＳ４８においてｖがＶ以上であると判断されて、本撮影画像データの高輝度部分の補正処理が終了する。 Steps S34 to S44 are repeatedly executed in the same manner as described above, and when correction of the pixel data in the horizontal direction represented by coordinates (1, 2) to (H, 2) is completed, steps S42 to S50 are similarly executed. Pixel data (1, 3) is selected as a target for the next high luminance determination (step S34). Thereafter, by repeatedly executing such processing, correction processing is executed up to pixel data combined at (H, V), that is, all pixel data constituting the main image data. When the correction of the pixel data (H, V) is completed, it is determined in step S48 that v is V or more, and the correction process for the high-intensity portion of the captured image data is completed.

次に、図７に示すフローチャートを用いて画素データ単位の輝度補正処理、即ち、図６に示すフローチャートのステップＳ４０において実行される画素単位の輝度補正処理について説明する。 Next, the luminance correction processing in units of pixel data, that is, the luminance correction processing in units of pixels executed in step S40 of the flowchart shown in FIG. 6 will be described using the flowchart shown in FIG.

画像補正部２０によって画素単位の補正が開始されると、始めに算出回数を表すｉが１に設定される（ステップＳ６０）。次に、補正対象である本撮影画像データの画素データの輝度値ｂと、当該画素データに対応する撮影前画像データの画素データの輝度出力ａとを用いて、１回目に算出される平均値Ａ_１が算出される（ステップＳ６２）。次に、算出された平均値Ａ_１と予め設定された閾値であるΔｔｈとの大小が比較される（ステップＳ６４）。Ａ_１がΔｔｈより小さい場合には、Δｔｈを超えていた出力ｂがＡ_１で置き換えられて、当該画素データの補正は終了する（ステップＳ６６）。 When the pixel correction is started by the image correction unit 20, first, i representing the number of calculations is set to 1 (step S60). Next, the average value calculated for the first time using the luminance value b of the pixel data of the main image data to be corrected and the luminance output a of the pixel data of the pre-photographing image data corresponding to the pixel data. A ₁ is calculated (step S62). Next, the magnitude of the average value A ₁ was calculated Δth as a preset threshold are compared (step S64). When A ₁ is Δth smaller than an output b which exceeds the Δth is replaced by _{A 1,} the correction of the pixel data is completed (step S66).

一方、Ａ_１がΔｔｈより大きいと判断された場合には（ステップＳ６４）、ｉに１が加算された後に（ステップＳ６８）、新たな平均値Ａ_２が求められる（ステップＳ６２）。この新たな平均値は、前回算出された平均値よりも、撮影前画像データの画素データの出力ａが１回だけ多く加算された和の平均値である。新たな平均値Ａ_２が算出された後、再びＡ_２とΔｔｈとの大小関係が比較される（ステップＳ６４）。そして、Ａ_２がΔｔｈより小さいと判断されれば、輝度値ｂがＡ_２に置換されて補正は終了する（Ｓ６６）。一方、Δｔｈより大きいと判断されれば、再びｉに１が加算されて（ステップＳ６８）再度新たな平均値Ａ_３が算出されて、Δｔｈとの比較が行われる。 On the other hand, if _{the A 1} is determined to Δth larger (step S64), after 1 is added to i (step S68), a new average value _{A 2} is determined (step S62). This new average value is an average value of the sum obtained by adding the output a of the pixel data of the pre-photographing image data only once more than the previously calculated average value. After the new average value A ₂ is calculated, the magnitude relationship between A ₂ and Δth is again compared (step S64). Then, _{A 2} is when it is determined that the Δth smaller, the brightness value b is corrected is replaced by _{A 2} is terminated (S66). On the other hand, if it is determined that Δth larger, is 1 is added (step S68) again new average value A ₃ is calculated again i, compared with Δth is performed.

以上のようにして、平均値Ａ_ｉの算出処理と、輝度値ｂの置換処理が繰り返し行われることにより、本撮影画像データの補正の対象となっている画素データの輝度出力を確実にΔｔｈ未満に補正することができる。 As described above, the calculation process of the average value A _i and the replacement process of the luminance value b are repeatedly performed, so that the luminance output of the pixel data targeted for correction of the actual captured image data is surely less than Δth. Can be corrected.

この実施の形態に係るカメラによれば、フラッシュ撮影の前に取得された画像データを用いて、フラッシュ撮影によって取得された画像データの補正を行うため、フラッシュ撮影によって取得された画像データの明るさを適切に補正できると共に、被写体ぶれの発生を防止し、レリーズボタン押下後から補正処理までの時間を短縮することができる。 According to the camera of this embodiment, the image data acquired by flash shooting is corrected using the image data acquired before flash shooting, so that the brightness of the image data acquired by flash shooting is corrected. Can be appropriately corrected, subject blurring can be prevented, and the time from when the release button is pressed until the correction process can be shortened.

なお、上述のΔｔｈを赤（Ｒ）、緑（Ｇ）、青（Ｂ）成分毎に３つ設定し、本撮影画像データを構成する各画素データのＲＧＢ成分毎に輝度の判定及び補正を行ってもよい。この場合には、例えば、画素データのＲ成分に対してＲ成分用の閾値Δｔｈ_Ｒを用いて、ステップＳ１０〜Ｓ２８、Ｓ３０〜Ｓ５０、Ｓ６０〜Ｓ６８による処理が実行された後に、当該画素データのＧ成分及びＢ成分に対して、それぞれＧ成分用の閾値Δｔｈ_Ｇ及びＢ成分用の閾値Δｔｈ_Ｂを用いて上述の補正処理が実行される。 Note that the above-described Δth is set to three for each of the red (R), green (G), and blue (B) components, and the luminance is determined and corrected for each RGB component of each pixel data constituting the actual captured image data. May be. In this case, for example, after the processing of steps S10 to S28, S30 to S50, and S60 to S68 is executed using the R component threshold Δth _R for the R component of the pixel data, The above-described correction processing is executed on the G component and the B component using the threshold value Δth _G for the G component and the threshold value Δth _B for the B component, respectively.

また、本撮影画像データの画素データの輝度がＲＧＢ成分毎に補正された場合には、すべての成分に対する補正が終了した後に、本撮影画像データ全体のホワイトバランス調整を行ってもよい。この場合には、本撮影画像データ全体の輝度補正が既に完了しているため、本撮影画像内に存在する色ムラ等を効果的に調整することができる。 Further, when the luminance of the pixel data of the actual captured image data is corrected for each RGB component, the white balance adjustment of the entire actual captured image data may be performed after the correction for all components is completed. In this case, since the luminance correction of the entire actual captured image data has already been completed, color unevenness and the like existing in the actual captured image can be effectively adjusted.

実施の形態に係るカメラの概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the camera which concerns on embodiment. 実施の形態に係るカメラにおける被写体画像データの生成処理を説明するタイミングチャートである。6 is a timing chart for explaining subject image data generation processing in the camera according to the embodiment. フラッシュ撮影時の本撮影画像の一例を示す図である。It is a figure which shows an example of the real picked-up image at the time of flash photography. フラッシュ撮影時の本撮影画像の輝度分布を示す図である。It is a figure which shows the luminance distribution of the real picked-up image at the time of flash photography. 実施の形態に係るカメラにおいて行われるフラッシュ撮影時の処理を説明するフローチャートである。It is a flowchart explaining the process at the time of flash photography performed in the camera which concerns on embodiment. 実施の形態に係るカメラにおいて行われる画素データの補正判定処理を説明するフローチャートである。It is a flowchart explaining the correction determination process of the pixel data performed in the camera which concerns on embodiment. 実施の形態に係るカメラにおいて行われる画素単位の補正処理を説明するフローチャートである。It is a flowchart explaining the correction process of the pixel unit performed in the camera which concerns on embodiment.

Explanation of symbols

２…カメラ、４…制御部、６…バス、８…操作部、１０…発光部、１４…撮像素子、１６…画像生成部、１８…画像表示部、２０…画像補正部、２２…バッファメモリ、２４…記録媒体 DESCRIPTION OF SYMBOLS 2 ... Camera, 4 ... Control part, 6 ... Bus, 8 ... Operation part, 10 ... Light emission part, 14 ... Image sensor, 16 ... Image generation part, 18 ... Image display part, 20 ... Image correction part, 22 ... Buffer memory 24 Recording medium

Claims

A light emitting unit for emitting illumination light to the subject;
An image sensor that images subject light and generates an image signal;
A generating unit that generates subject image data based on the imaging signal;
A correction unit for correcting the subject image data,
The generation unit generates first subject image data based on an imaging signal generated from subject light when the illumination light is not emitted, and
After generating the first subject image data, generate second subject image data based on an imaging signal generated from the subject light when the illumination light is emitted,
The image pickup apparatus, wherein the correction unit corrects the second subject image data using the first subject image data.

The correction unit, when there is pixel data that exceeds a threshold in the pixel data constituting the second subject image data, the pixel data and the first subject image data corresponding to the pixel data An average value with the pixel data of the pixel data constituting the image data is calculated, and when the average value is equal to or less than the threshold value, correction is performed to replace the pixel data of the second subject image data with the average value. The imaging apparatus according to claim 1.

When the average value exceeds the threshold value, the correction unit calculates the calculated average value and the pixel data of the first subject image data until an average value equal to or less than the threshold value is calculated. Calculate a new average value from
The imaging apparatus according to claim 2, wherein when a new average value equal to or less than the threshold is calculated, correction is performed to replace the pixel data of the second subject image data with the new average value. .

The said correction | amendment part performs the said correction | amendment for every red, green, and blue component using the threshold value set with respect to each of the red, green, and blue component of pixel data. 3. The imaging device according to 3.

The imaging apparatus according to claim 2, wherein the correction unit performs white balance adjustment of the subject image data after completion of the correction.

The imaging apparatus according to claim 1, wherein the first subject image data is generated during reading of a preview image.

The imaging apparatus according to claim 1, further comprising a storage unit that stores a plurality of the first subject image data.

The imaging apparatus according to claim 7, wherein the correction unit performs the correction using the latest first subject image data stored in the storage unit.