JP4525717B2 - Electronic camera device and strobe color correction method - Google Patents
Electronic camera device and strobe color correction method Download PDFInfo
- Publication number
- JP4525717B2 JP4525717B2 JP2007215416A JP2007215416A JP4525717B2 JP 4525717 B2 JP4525717 B2 JP 4525717B2 JP 2007215416 A JP2007215416 A JP 2007215416A JP 2007215416 A JP2007215416 A JP 2007215416A JP 4525717 B2 JP4525717 B2 JP 4525717B2
- Authority
- JP
- Japan
- Prior art keywords
- strobe
- image
- luminance
- captured image
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Studio Devices (AREA)
- Stroboscope Apparatuses (AREA)
Description
本発明はデジタルカメラ等の電子カメラ装置に関し、特に、ストロボ撮像画像の補正技術に関する。 The present invention relates to an electronic camera device such as a digital camera, and more particularly to a technique for correcting a strobe image.
従来、光量の足りない場所での撮像は、光学カメラ(銀塩カメラ)では露光時間を長くして撮像するか、或いはストロボを発光させることで光量を補って撮像を行なっている。後者の場合、ストロボを用いると露光時間を短くできるので、暗所でもカメラを固定することなく撮像できる。 Conventionally, in an area where the amount of light is insufficient, an optical camera (silver salt camera) captures an image with a longer exposure time or compensates for the amount of light by emitting a strobe light. In the latter case, if the strobe is used, the exposure time can be shortened, so that images can be taken without fixing the camera even in a dark place.
一方、デジタルカメラ等の電子カメラ装置では、暗所(光量が不足している場所をいう)ではCCDの感度を上げて(CCDからの信号を増幅して)明るい画像を撮像する手法が用いられているが、光量の足りない場所で撮像するために撮像素子の感度を上げ過ぎると撮像された画像に電気的なノイズ成分が目立つようになり良好な画像が得られないという問題点があるので、ある程度以上暗いところでは電子カメラ装置での撮像の際ストロボを用いて光量を補い、撮像できるように構成されたものがある。 On the other hand, in an electronic camera device such as a digital camera, in a dark place (referring to a place where the amount of light is insufficient), a technique is used to pick up a bright image by increasing the sensitivity of the CCD (amplifying the signal from the CCD). However, there is a problem that if the sensitivity of the image sensor is increased too much in order to capture an image in a place where the amount of light is insufficient, an electrical noise component becomes conspicuous in the captured image and a good image cannot be obtained. In some places where the image is darker than a certain level, the electronic camera device is configured to be able to capture an image by using a strobe to compensate for the amount of light.
このような電子カメラ装置ではストロボ撮像を行うと撮像画像にストロボ光の色合いが加わり、不自然になるのでストロボ撮像の際ストロボ光の持つ色合いを打ち消して自然な色合いとする目的で一定の補正量を撮像画像全体に施していた。 In such an electronic camera device, when taking a strobe image, the color of the strobe light is added to the captured image, which is unnatural. Was applied to the entire captured image.
しかしながら、上記従来のストロボ色補正方法では一定の補正量を画像全体一律に施すためにストロボ撮像された画像中でストロボ光の影響が少ない部分では色補正が過多となり、補正によってかえって不自然な色になってしまうといった問題点があった。例えば、図5(a)に示すように比較的明るい室内で白い壁53を背景に人物51をストロボ撮影した場合、ストロボ光がちゃんとあたる人物51は色補正によって自然な色合いに撮れるが、背景の白い壁53や人物51より後にある物体52はストロボ光のあたる程度が少ないので人物51と同様の色補正(図5(b))を行うと図5(c)に示すような不自然な色合いとなる(背景が白い壁53の場合は黄ばんだ色となる。また、物体52についても色合いが不自然になる)といった問題点があった。
However, since the above-mentioned conventional strobe color correction method uniformly applies a constant correction amount to the entire image, the color correction is excessive in the portion where the effect of strobe light is small in the image captured by the strobe light. There was a problem of becoming. For example, as shown in FIG. 5A, when a
本発明は、上記従来技術の問題点および解決課題に基づいてなされたものであり、ストロボ撮像時に自然な色合の画像を得ることのできる電子カメラ装置およびストロボ色補正方法の提供を目的とする。 The present invention has been made based on the above-described problems and solutions of the prior art, and an object thereof is to provide an electronic camera device and a strobe color correction method capable of obtaining a natural color image during strobe imaging.
上記の目的を達成するために、請求項1記載の発明の電子カメラ装置は、ストロボ撮像が可能な電子カメラ装置において、非ストロボ撮像画像とストロボ撮像画像を得る撮像手段と、この撮像手段により得られる非ストロボ撮像画像の輝度とストロボ撮像画像の輝度を抽出する輝度抽出手段と、この輝度抽出手段により抽出された非ストロボ撮像画像の輝度とストロボ撮像画像の輝度との輝度差を得る輝度差取得手段と、この輝度差取得手段により得られた輝度差に比例した補正量で前記撮像手段により得られるストロボ撮像画像の色補正を行うことにより、ストロボ撮像画像に含まれるストロボ光のもつ色合いを打ち消すストロボ撮像画像補正手段と、を備え、前記非ストロボ画像は、スルー画像であり、前記撮像手段により得られるスルー画像を表示する表示手段を更に備えたことを特徴とする。
また、請求項2記載の発明は、上記請求項1記載の電子カメラ装置において、前記輝度差取得手段は前記非ストロボ撮像画像と前記ストロボ撮像画像の複数部分の輝度から各部分の輝度差を得る手段を含み、前記ストロボ撮像画像補正手段は前記各部分の輝度差に比例した複数の補正量で前記ストロボ撮像画像の複数部分の色補正を行うことを特徴とする。
In order to achieve the above object, an electronic camera device according to a first aspect of the present invention is an electronic camera device capable of strobe imaging, an imaging unit that obtains a non-strobe captured image and a strobe captured image, and an imaging unit obtained by the imaging unit. Brightness extraction means for extracting the brightness of the non-strobe captured image and the brightness of the strobe captured image, and obtaining a brightness difference to obtain a brightness difference between the brightness of the non-strobe captured image extracted by the brightness extraction means and the brightness of the strobe captured image And the color correction of the strobe image obtained by the imaging unit with a correction amount proportional to the luminance difference obtained by the luminance difference acquisition unit, thereby canceling the hue of the strobe light included in the strobe image. comprising a strobe captured image correcting means, wherein the non-flash image is through image, sul obtained by the image pickup means And further comprising a display means for displaying an image.
According to a second aspect of the present invention , in the electronic camera device according to the first aspect, the luminance difference acquisition unit obtains a luminance difference of each part from luminances of a plurality of parts of the non-strobe captured image and the strobe captured image. And the stroboscopic image correction unit performs color correction of a plurality of portions of the stroboscopic image with a plurality of correction amounts proportional to a luminance difference between the portions.
また、請求項3記載の発明は、上記請求項2記載の電子カメラ装置において、前記輝度抽出手段は、前記ストロボ撮像画像の直前または直後に前記撮像手段により得られるスルー画像の輝度とストロボ撮像画像の輝度を抽出することを特徴とする。 The invention of claim 3, wherein, in the electronic camera device of the second aspect, the luminance extraction means, brightness and flash captured image through image obtained by the imaging means immediately before or immediately after the strobe captured image The luminance is extracted.
また、請求項4記載の発明は、上記請求項1又は2記載の電子カメラ装置において、前記撮像手段は、ストロボ撮像指示により前記非ストロボ撮像画像とストロボ撮像画像を得ることを特徴とする。
また、請求項5記載の発明は、請求項1乃至4のいずれかに記載の電子カメラ装置において、上記前記ストロボ撮像画像補正手段により色補正されたストロボ撮像画像を記録する記録手段を備えたことを特徴とする。
The invention of claim 4, wherein, in the electronic camera device of the above claim 1 or 2, wherein said imaging means is characterized by obtaining the non-flash captured image and flash captured image by strobe imaging instruction.
The invention of claim 5, wherein, in the electronic camera device according to any one of claims 1 to 4, further comprising a recording means for recording the flash captured image color correction by the said flash captured image correcting means It is characterized by.
また、請求項6記載の発明は、ストロボ撮像が可能な電子カメラ装置におけるストロボ色補正方法であって、非ストロボ撮像画像とストロボ撮像画像を得る撮像ステップと、この撮像ステップにて得られる非ストロボ撮像画像の輝度とストロボ撮像画像の輝度を抽出する輝度抽出ステップと、この輝度抽出ステップにて抽出された非ストロボ撮像画像の輝度とストロボ撮像画像の輝度との輝度差を得る輝度差取得ステップと、この輝度差取得ステップにて得られた輝度差に比例した補正量で前記撮像ステップにより得られるストロボ撮像画像の色補正を行うことにより、ストロボ撮像画像に含まれるストロボ光のもつ色合いを打ち消すストロボ撮像画像補正ステップと、を含み、前記非ストロボ画像は、スルー画像であり、前記撮像ステップにより得られるスルー画像を表示する表示ステップを更に含むことを特徴とする。 Further, an invention according to claim 6, wherein a strobe color correction method definitive electronic camera apparatus capable of stroboscopic imaging, an imaging step of obtaining a non-flash captured image and flash captured image obtained in the imaging step non a luminance extracting a luminance of a strobe captured image of the strobe captured image obtained Ru brightness difference acquiring the luminance difference between the luminance brightness and flash captured image of the non-flash captured image extracted by the luminance extraction step The color of the strobe image obtained in the imaging step is corrected with a correction amount proportional to the luminance difference obtained in the step and the luminance difference acquisition step , so that the color of the strobe light included in the strobe image is obtained. includes a flash captured image correcting step of canceling, the, the non-flash image is through image, the imaging step And further comprising a display step of displaying a through image more obtained.
本発明によれば、ストロボ発光時に目的の被写体に対するストロボ光のあたり具合によってストロボ撮像画像に生じる影響を検出できることから、ストロボ撮像画像に対して精度の高い補正を行うことができる。 According to the present invention, it is possible to detect the effect on the strobe captured image due to how the strobe light strikes the target subject at the time of strobe light emission. Therefore, it is possible to perform highly accurate correction on the strobe captured image.
[回路構成例]
図1は、本発明を適用した電子カメラ装置の一実施例としてのデジタルカメラの回路構成例を示すブロック図であり、図1(a)で、デジタルカメラ100は、光学系10、ストロボ発光部11、信号変換部12、信号処理部13、DRAM14、制御部20、操作部30、表示部40、保存記録メモリ(メモリーカード)50を有している。
[Circuit configuration example]
FIG. 1 is a block diagram illustrating a circuit configuration example of a digital camera as an embodiment of an electronic camera device to which the present invention is applied. In FIG. 1A, the
光学系10は、撮像レンズ101と光量検出部102および合焦機構(図示せず)から構成され、撮像レンズ101を介して集光された被写体像の光束を後段のCCD(撮像素子)121上に結像させる。
The
ストロボ発光部11は、制御部20からシャッター押下げ信号を受け取ると極めて短い時間内に所定の光量を放出(発光)し、周辺の光量を補う。
When the strobe
信号変換部12は、CCD121、CCD駆動用タイミング信号生成回路(TG)122,CCD駆動用垂直ドライバ123,自動利得制御回路(AGC)124およびA/D変換器125を含み、前段の光学系10を介してCCD121に結像した画像を電気信号に変換し、デジタルデータ(以下、画像データ)に変換して一定の周期で出力する。AGC124はストロボ設定がされているか周辺光量が閾値(φmin〜φmax)の下限以上の場合にはCCD121からの信号の増幅率を所定値に保つが、ストロボ設定がされておらず且つ周辺光量が適正閾値(φmin〜φmax)の下限φminより低い場合にはCPUの制御によりCCD121からの信号がAGC124により増幅されてA/D変換器に与えられ、増幅の結果を制御部20で光量に変換して閾値と比較し、比較結果はAGC124にフィードバックされる。これによりCCD121からの信号は光量が適正閾値内になるまで増幅される。
The
信号処理部13は図1(b)に示すようにカラープロセス回路131およびDMAコントローラ132を有し、信号変換部12からの出力をカラープロセス処理してデジタルの輝度、色差マルチプレクス信号(YUVデータ)とし、YUVデータをDRAM14の指定領域にDMA(ダイレクトメモリーアクセス)転送する。
As shown in FIG. 1B, the
制御部20は、CPU、RAM、プログラム格納用ROMを備えたマイクロプロセッサ構成を有しており、CPUは上述の各回路等にバスラインを介して接続し、プログラム格納用ROMに格納されている制御プログラムによりデジタルカメラ100全体の制御を行なうと共に、操作部30からの状態信号に対応してデジタルカメラ100の各機能の実行制御等を行なう。また、プログラム格納用ROMはPROMやFROM(フラッシュROM)等が用いられる、制御プログラムやデジタルカメラの各処理モード用の処理プログラムの他、ストロボ色補正プログラムが格納されている。また、RAMの代りとしてDRAM14に割当てられた領域を用いるようにしてもよい。
The
操作部30は、図2に示すようにシャッターボタン35およびストロボ設定ボタン36のほか、図示しない主電源スイッチ、RECモード/再生モード切換えスイッチ、機能選択用ボタン、カーソル移動キー等のキーを構成部分としたデジタルカメラ100の操作入力手段であり、これらのキーが操作されると操作されたキーの状態に対応する状態信号が制御部20に送出される。また、プラス・マイナス(+・−)キー37に色調整キーとしての機能を割り付けてもよい。
As shown in FIG. 2, in addition to the
表示部40はVRAM(Video Random Access Memory)及び液晶画面等の表示装置から構成されており、撮像時に液晶画面に被写体画像(スルー画像)が表示されるので、液晶画面をファインダとして用いることができる。また、再生モード時には再生画像を表示できる。
The
保存記録用メモリ50はフラッシュメモリー等のリムーバブルな記録媒体からなり、画像データや画像情報を記録する。なお、実施例では保存記録メモリ50としてデジタルカメラ100の本体に着脱自在なメモリーカードを用いたが、これに限定されない。
The
[装置外観例]
図2は、図1のデジタルカメラ100の概観図であり、(a)は正面図、(b)は背面図である。デジタルカメラ100の正面には(a)に示すようにストロボ発光部11、撮像レンズ101及び光量検出部102が設けられている。また、背面には(b)に示すように表示部40の液晶画面及びストロボ表示ランプ111のほか、主電源スイッチ及びRECモード/再生モード切換えスイッチ等(図示せず)が設けられている。また、上面には、シャッターボタン35、ストロボ設定ボタン36および色調整ボタン37のほか機能選択用ボタン等のキー(図示せず)が設けられている。なお、ストロボ表示ランプ111はLED等で構成され、実施例では赤および緑の2種類の発光表示(点灯)が可能である。
[Example of equipment appearance]
2A and 2B are schematic views of the
[DRAM14の領域設定例]
図3は、図1のデジタルカメラ100の回路構成を例としたDRAM14内の各バッファ等の領域設定例を示す説明図である。本実施例では信号処理部13からの画像データ、VRAMへの画像データの出力およびデータ圧縮/伸張の際の画像データの書込/読み出しに同じDRAM14を用いている。このためにDRAM14上の画像データ記録用の領域の構成として、図3に示すようにいくつかの領域に分割したバッファを用意することで、目的に応じて各領域を設定できる。また、図3で記号141はスルー画像バッファを、142はストロボ撮像直前(或いは直後)のスルー画像を記憶する画像バッファ、143はストロボ撮像により取り込まれるストロボ撮像画像を記憶するバッファ(以下、ストロボ画像バッファ)を、144は色補正後の画像を記憶する色補正画像バッファを、145は撮像直前(あるいは直後)の輝度分布データ、ストロボ撮像時の輝度分布データ及びその差分等や定数等を記録する予備領域、146はワークエリア(作業用エリア)を示す。なお、図3の例では画像バッファ142を設けたが設けなくてもよい(図7)。また、色補正画像バッファ144を設けることなくストロボ画像バッファ143と色補正画像バッファ144を同一の画像バッファとしてもよい。
[
FIG. 3 is an explanatory diagram showing an example of setting areas of each buffer and the like in the
[輝度分布の例]
図4は、図5(a)に示す2つの被写体51,52と背景(白い壁)53を含む画像の輝度分布の説明図であり、図5はストロボ撮影及びストロボ色補正処理による撮像画像の説明図である。また、図4(a)は図5(a)の被写体のスルー画像の実際の輝度分布を示し、図4(b)は図5(a)の人物51に合焦してストロボ撮像を行なった結果のX方向の輝度分布を示し、図4(c)は図4(b)の輝度分布から図4(a)の輝度分布を差し引いた差分の分布を示し、図4(d)は図4(c)の差分をその大きさにより1〜3のランクk1、k2、k3にランク付けして示した分布図である。なお、図4の例ではX方向の輝度分布のみを示したが、実施例ではY方向の輝度分布も同様に取得する(図6、図7)。
[Example of luminance distribution]
FIG. 4 is an explanatory diagram of the luminance distribution of the image including the two
また、図5(a)はスルー画像の例を示す図であり、(b)、(c)は従来のストロボ色補正方法およびその結果の説明図である。また、(b’)、(c’)は本発明のストロボ色補正およびその結果の説明図である。 FIG. 5A is a diagram showing an example of a through image, and FIGS. 5B and 5C are explanatory diagrams of a conventional strobe color correction method and results thereof. Further, (b ') and (c') are explanatory diagrams of the strobe color correction and the result of the present invention.
[ストロボ色補正方法]
(1)本発明のストロボ色補正方法の一実施例では、図6のフローチャートのステップS6〜S9に示すように、1シャッター動作で、ストロボ撮像直前(あるいは直後)のスルー画像の撮像とストロボ撮像画像の撮像を行いそれぞれの撮像画像から輝度を取り出してそれらの差分(図4(c))の分布を得てから、輝度の差分の分布に比例する補正量を付加してストロボ光のもつ色合いを打ち消す処理を行う。
(2)また、他の実施例として、図7のフローチャートのステップT3、T5〜T8(又はT3’〜T8)に示すように、ストロボ撮像直前(あるいは撮像直後)のスルー画像の輝度分布を取得して保持(一時記憶)すると共に、ストロボ撮像画像の輝度分布を取得し、両者の輝度分布の差分の分布を得てから、輝度の差分の分布に比例する補正量を付加してストロボ光のもつ色合いを打ち消す処理を行う。
(3)また、他の実施例として、図8に示すように図6又は図7のストロボ色補正方法で得た輝度の差分の分布を2又は3程度に分類してランク付けし、ランクの同じ部分ごとに対応するストロボ色補正を施し、ユーザが再生画像を見て色合いを修正できるようにする。
なお、上述した3つの実施例において、スルー画像の輝度とストロボ撮像画像の輝度を比較してその差が所定の範囲内の部分にはストロボ色補正を行わないようにしてもよい。
[Flash color correction method]
(1) In one embodiment of the strobe color correction method of the present invention, as shown in steps S6 to S9 of the flowchart in FIG. 6, through image capturing and strobe imaging immediately before (or immediately after) the strobe imaging with one shutter operation. After taking the image and extracting the luminance from each captured image to obtain the distribution of the difference (FIG. 4 (c)), a correction amount proportional to the luminance difference distribution is added and the color of the strobe light Process to cancel.
(2) As another embodiment, as shown in steps T3 and T5 to T8 (or T3 ′ to T8) of the flowchart of FIG. 7, the luminance distribution of the through image immediately before (or immediately after) the strobe is acquired. And store (temporarily store) the brightness distribution of the strobe image, obtain the distribution of the difference between the two brightness distributions, add a correction amount proportional to the distribution of the brightness difference, and Performs processing to cancel the tint.
(3) As another embodiment, as shown in FIG. 8, the distribution of luminance differences obtained by the strobe color correction method of FIG. 6 or 7 is classified into about 2 or 3, and ranked. Strobe color correction corresponding to each part is performed so that the user can see the reproduced image and correct the hue.
In the above-described three embodiments, the brightness of the through image and the brightness of the strobe image may be compared, and the strobe color correction may not be performed on a portion where the difference is within a predetermined range.
[動作例1]
図6はストロボ撮像モード下でのデジタルカメラの動作の一例を示すフローチャートである。また、図6で、(a)はストロボ撮像直前のスルー画像を比較対象とする例であり、ステップS6〜S9がストロボ光補正処理に相当する。また、(b)はストロボ撮像直後のスルー画像を比較対象とする例である。
[Operation Example 1]
FIG. 6 is a flowchart showing an example of the operation of the digital camera under the strobe imaging mode. In FIG. 6, (a) is an example in which a through image immediately before strobe imaging is used for comparison, and steps S6 to S9 correspond to strobe light correction processing. Further, (b) is an example in which a through image immediately after the strobe imaging is used as a comparison target.
ステップS1:(ストロボ設定の有無判定)
図6で、撮像モードが選択されるとスルー画像が表示部40に表示される。ここで、ユーザは周辺の明るさか表示部40の液晶画面の明るさのいずれかからストロボ撮影が必要と判断した場合にはストロボ設定ボタン36を押す。
Step S1: (Determining whether or not the flash is set)
In FIG. 6, when the imaging mode is selected, a through image is displayed on the
撮像モードが選択されると制御部20は操作部30からの状態信号を調べてストロボ設定ボタン36が押されたか否かを判定し、ストロボ設定ボタン36が押された場合にはストロボ発光部11への電荷印加を開始すると共にストロボ表示ランプ111を点灯してS2に遷移し、そうでない場合には他の撮像モードに遷移する。ストロボ表示ランプ111はストロボ充電状態では赤、ストロボ発光可能状態では青色に点灯する。
When the imaging mode is selected, the
ステップS2:(ストロボ撮像の可否判定)
次に、制御部20は光量検出部102からの検出光量Lと撮像に必要とする光量(閾値φ)を比較し、L<φの場合にはS3に移行する。また、L≧φの場合にはストロボ撮像不要としてストロボ設定を解除しストロボ表示ランプ111による発光表示を中止すると共に、ストロボ発光部11への電荷印加を中止して通常の撮像モードに遷移する。
Step S2: (determining whether or not flash photography is possible)
Next, the
ステップS3:(撮像指示)
ストロボが発光可能状態になった以降の任意のタイミングでユーザーがシャッターボタン35を押すと、制御部20はAGC124に対してゲインを通常値(実際の光量による値)にするための制御信号を送出すると共に、ストロボ発光部11に発光指示信号を与える。
Step S3: (imaging instruction)
When the user presses the
ステップS4:(撮像:直前のスルー画像)
制御部20は、また、ストロボ発光直前のスルー画像バッファ141に取り込まれている画像(直前のスルー画像)を画像バッファ142に記憶すると共に、CCD121から取込む画像データのDRAM14上の記憶領域をストロボ画像バッファ143に切換えてS5に遷移する。
Step S4: (Imaging: the previous through image)
The
ステップS5:(撮像:ストロボ撮像画像)
上記ステップS3、S4の動作後に、CCD121からの信号の増幅率が通常値に戻され、ストロボが発光して発光量Pだけ周囲の光量を補う。CCD121からの信号はストロボ発光により補われた光量Pを加えた分増加する。また、ストロボ画像バッファ143にはストロボ撮像画像が取り込まれて記憶される。また、制御部20はCCD121から取込むデータのDRAM14上の記憶領域をスルー画像バッファ141に切換える。
Step S5: (Imaging: Strobe image)
After the operations in steps S3 and S4, the amplification factor of the signal from the
ステップS6:(スルー画像の輝度分布の取得)
次に、制御部20は画像バッファ142に記憶された撮像画像のX方向(図4(a))およびY方向の輝度分布を取得(抽出)してDRAM14の予備領域145の所定領域に記憶(上書き)する。
Step S6: (Acquisition of luminance distribution of through image)
Next, the
ステップS7:(ストロボ撮像画像の輝度分布取得)
制御部20はCCD121からストロボ画像バッファ143に取込まれたストロボ撮像画像のX方向(図4(b))およびY方向の輝度分布を取得してDRAM14の予備領域145の所定領域(スルー画像の輝度分布の記憶領域とは別の場所)に記憶(上書き)する。
Step S7: (Acquisition of luminance distribution of strobe image)
The
ステップS8:(輝度分布の差分の取得)
制御部20は上記ステップS6で得たストロボ発光直前の撮像画像の輝度分布値からステップS7で得たストロボ撮像画像の輝度分布値をそれぞれ差し引いてX方向(図4(c))およびY方向の差分の分布を取得してDRAM14の予備領域145の所定領域(ストロボ発光直前の撮像画像やストロボ撮像画像の輝度分布の記憶領域とは別の場所)に記憶する。
Step S8: (Acquisition of luminance distribution difference)
The
ステップS9:(差分に比例させたストロボ色補正)
制御部20はストロボ光のもつ色合いを打ち消すための補正色を上記ステップS6で得たX方向およびY方向の輝度の差分に比例するようにストロボ画像バッファ143に記憶されているストロボ撮像画像に合成し、その結果(ストロボ光の色合いが打ち消された画像(合成画像))を色補正画像バッファ144に記憶する。
Step S9: (Strobe color correction proportional to the difference)
The
ステップS10:(画像の保存記録処理)
上記ステップS9の処理が終了すると制御部20は色補正画像バッファ144の画像(ストロボ色補正処理後の画像)にJPEG圧縮処理を施してからメモリーカード50に撮影情報と共に保存記録する。
Step S10: (Image saving and recording process)
When the processing in step S9 is completed, the
上記ストロボ色補正処理により、ストロボ撮像画像に対してストロボ発光直前の撮像画像の輝度とストロボ撮像時の輝度の差分に比例したストロボ光の打消しが行われるので、従来のストロボ色補正の場合のようにストロボ撮像画像に対する一律的なストロボ光の打ち消し処理のようにストロボ光があたらない部分での補正過多(図5(c))が生ぜず自然な色合いのストロボ撮像画像を得ることができる(図5(c’))。 The strobe color correction process cancels the strobe light in proportion to the difference between the brightness of the captured image immediately before the strobe fires and the brightness at the time of strobe shooting. In this way, a strobe image with a natural color can be obtained without excessive correction (FIG. 5C) in a portion where the strobe light is not applied, as in the uniform cancellation of strobe light on the strobe image (see FIG. 5C). FIG. 5 (c ′)).
なお、上記動作例ではストロボ発光直前の撮像画像とストロボ撮像画像の輝度を比較する(差分をとる)ようにしたが、図6(b)に示すようにストロボ撮像画像とストロボ撮像直後の撮像画像の輝度を比較するようにしてもよい。 In the above operation example, the brightness of the captured image immediately before the flash emission is compared with the brightness of the captured flash image (difference is taken). However, as shown in FIG. 6B, the captured image and the captured image immediately after the flash are captured. You may make it compare the brightness | luminance of.
[動作例2]
図7はストロボ撮像モード下でのデジタルカメラの動作の一例を示すフローチャートである。また、図7で、(a)はストロボ撮像直前のスルー画像を比較対象とする例であり、ステップT3、T5〜T8がストロボ光補正処理に相当する。また、(b)はストロボ撮像直後のスルー画像を比較対象とする例であり、ステップT4’〜T6’がストロボ光補正処理に相当する。また、ステップT1、T2の動作は図6のステップS1、S2の動作と同様である。
[Operation example 2]
FIG. 7 is a flowchart showing an example of the operation of the digital camera under the strobe imaging mode. In FIG. 7, (a) is an example in which a through image immediately before the strobe is captured is compared, and steps T3 and T5 to T8 correspond to strobe light correction processing. Further, (b) is an example in which a through image immediately after the strobe is captured is compared, and steps T4 ′ to T6 ′ correspond to strobe light correction processing. Further, the operations in steps T1 and T2 are the same as the operations in steps S1 and S2 in FIG.
ステップT3:(スルー画像の輝度分布の取得)
図7のステップT2でストロボ撮像を要すると判定された場合には、制御部20はCCD121からスルー画像バッファ141に取込まれるスルー画像のX方向およびY方向の輝度分布を1フレームの書き換えごとに取得(抽出)してDRAM14の予備領域145の所定領域に記憶(上書き)する。輝度分布はカラープロセス回路131の出力から取り出す(抽出する)ことができる。
Step T3: (Acquisition of luminance distribution of through image)
If it is determined in step T2 in FIG. 7 that strobe imaging is required, the
ステップT4:(撮像指示)
ストロボが発光可能状態になった以降の任意のタイミングでユーザーがシャッターボタン35を押すと、制御部20はAGC124に対してゲインを通常値にするための制御信号を送出すると共に、ストロボ発光部11に発光指示信号を与え、また、CCD121から取込むデータのDRAM14上の記憶領域をストロボ画像バッファ143に切換えてT5に遷移する。
Step T4: (Imaging instruction)
When the user presses the
ステップT5:(ストロボ撮像)
上記ステップT4の動作後、CCD121からの信号の増幅率が通常値に戻され、次に、ストロボが発光して発光量Pだけ周囲の光量を補う。CCD121からの信号はストロボ発光により補われた光量Pを加えた分増加し、ストロボ画像バッファ143にはストロボ撮像画像が取り込まれる。
Step T5: (Strobe imaging)
After the operation of step T4, the amplification factor of the signal from the
ステップT6:(ストロボ撮像画像の輝度分布取得)
制御部20はCCD121からストロボ画像バッファ143に取込まれたストロボ撮像画像のX方向およびY方向の輝度分布を取得してDRAM14の予備領域145の所定領域(スルー画像の輝度分布の記憶領域とは別の場所)に記憶(上書き)する。輝度分布はカラープロセス回路131の出力から取り出すこともできる。
Step T6: (Acquisition of luminance distribution of strobe image)
The
ステップT7:(輝度分布の差分の取得)
制御部20は上記ステップT3で得た撮像直前のスルー画像の輝度分布値からステップT6で得たストロボ撮像画像の輝度分布値をそれぞれ差し引いてX方向(図4(c))およびY方向の差分の分布を取得してDRAM14の予備領域145の所定領域(スルー画像やストロボ撮像画像の輝度分布の記憶領域とは別の場所)に記憶する。
Step T7: (Acquisition of luminance distribution difference)
The
ステップT8:(差分に比例させたストロボ色補正)
制御部20はストロボ光のもつ色合いを打ち消すための補正色を上記ステップT7で得たX方向およびY方向の輝度の差分の分布に比例するようにストロボ画像バッファ143に記憶されているストロボ撮像画像に合成し、その結果(ストロボ光の色合いが打ち消された画像(合成画像))を色補正画像バッファ144に記憶する。
Step T8: (Strobe color correction proportional to the difference)
The
ステップT9:(画像記録処理)
上記ステップT8の処理が終了すると制御部20は色補正画像バッファ144の画像にJPEG圧縮処理を施してからメモリーカード50に撮影情報と共に保存記録する。
Step T9: (Image recording process)
When the processing in step T8 is completed, the
上記ストロボ色補正処理により、ストロボ撮像画像に対してストロボ撮像直前のスルー画像の輝度とストロボ撮像時の輝度の差分に比例したストロボ光の打消しが行われるので、動作例1(図6)の場合と同様に、補正過多の生じない自然な色合いのストロボ撮像画像を得ることができる。 The strobe color correction process cancels strobe light in proportion to the difference between the brightness of the through image immediately before the strobe imaging and the brightness at the time of strobe imaging with respect to the strobe captured image. Similarly to the case, it is possible to obtain a stroboscopic image having a natural hue without excessive correction.
なお、上記動作例では撮像直前のスルー画像とストロボ撮像画像の輝度を比較する(差分をとる)ようにしたが、図7(b)に示すようにストロボ撮像画像と撮像直後のスルー画像の輝度を比較するようにしてもよい。 In the above operation example, the brightness of the through image immediately before imaging is compared with the brightness of the strobe captured image (difference is taken). However, as shown in FIG. May be compared.
[動作例3]
図8はストロボ撮像モード下でのデジタルカメラの動作の一例を示すフローチャートである。本実施例は図6のステップS8及び図7のステップT7での撮像直前(或いは直後)のスルー画像の輝度とストロボ撮像画像との輝度の差分の分布をその大きさによりいくつかに分類してランク付けし、そのランクに対応するストロボ色補正を行う例である。
[Operation Example 3]
FIG. 8 is a flowchart showing an example of the operation of the digital camera under the strobe imaging mode. In this embodiment, the distribution of the difference between the brightness of the through image immediately before (or immediately after) the imaging in step S8 in FIG. 6 and step T7 in FIG. This is an example of ranking and performing strobe color correction corresponding to the rank.
ステップU1:(差分の分類)
制御部20は差分の分布を2〜3のランクに分類する。分類方法としては、例えば、差分のX方向の分布のうち最も差の多い部分と最も少ない部分の差で差分のX方向の各差分の比率を求めて高いほうから2又は3程度の数にグループ分けしてランク付けすることにより分類することができる(図4(d))。また、Y方向の分布についても同様に分類することができる。
Step U1: (Difference classification)
The
ステップU2:(画像領域のランク付け)
制御部20は上記ステップU2で得たX方向の分布のランクとY方向の分布のランクを組み合わせて、図9に示すようなランク付けされた領域(ストロボ撮像画像上で最も輝度の高いランク(K1)に属する領域、最も輝度の少ないランク(K3)に属する領域、中間ランク(K2)に属する領域)を得る。
Step U2: (Image area ranking)
The
ステップU3:(ランク付けされた領域ごとのストロボ色補正)
制御部20は上記ステップU2で得たストロボ撮像画像のランク付けされた領域(図9の例ではK1、K2、K3)のストロボ光のもつ色合いを打ち消すための補正色(輝度ランクK1、K2、K3の領域の平均輝度(又は中央値、最大値)γ1、γ2、γ3に対応した補正量δ1、δ2、δ3)を各部分領域に加え、その結果(ストロボ光の色合いが打ち消された画像(合成画像))を色補正画像バッファ144に記憶する。
Step U3: (Strobe color correction for each ranked area)
The
ステップU4:(ストロボ色補正後のストロボ撮像画像の表示)
制御部20は色補正画像バッファ144のストロボ撮像画像を取り出して表示部40に送り液晶画面上に静止画表示すると共に、図10に示すような操作案内71〜73を表示する。
Step U4: (Display of strobe image after strobe color correction)
The
ステップU5、U6:(操作内容の判定)
制御部20は操作部30からの状態信号を調べ、ユーザが確認(OK)キー(シャッターボタン35)を押した場合にはU9に遷移し、色調整キー(+・−キー)37を押した場合にはU7に遷移し、キャンセルキーを押した場合にはU4に戻る。
Steps U5 and U6: (Determination of operation content)
The
ステップU7:(部分領域の色調整操作)
上記ステップU6で色調整キー37が操作されると、制御部20はカーソルを画面上に表示する。ユーザはカーソルキーでカーソルを移動させて色調整したい部分を指定し、色調整ボタン37を操作(+/−)して色調整指示を行う。
Step U7: (Partial area color adjustment operation)
When the
ステップU8:(部分領域の色調整処理)
制御部20は操作部30からの状態信号を調べ、色調整キー37が+操作されたか−操作されたかを判定し、+操作された場合には色補正量δi(δiは領域K1〜K3のうちユーザがカーソルでポイントした部分を含む領域Kiの色補正量)を所定量増加させ、−操作の場合には色補正量δiを所定量減少させて、ポイントされた部分領域Kiに加え、その結果を色補正画像バッファ144に記憶する。
Step U8: (Partial area color adjustment processing)
The
ステップU9:(画像記録処理)
制御部20は色補正画像バッファ144の画像にJPEG圧縮処理を施してからメモリーカード50に撮影情報と共に保存記録する。
Step U9: (Image recording process)
The
上記ストロボ色補正処理により輝度を大別して分類した領域ごとにストロボ撮像画像のストロボ色補正ができるので高速なストロボ色補正処理を行うことができる。また、ランク付けした領域ごとにストロボ光の影響に対するストロボ色補正の調整が行えるので、領域ごとのストロボ色補正の結果に不自然な部分があっても簡単に調整できる。 Since the strobe color correction of the strobe image can be performed for each area classified roughly according to the luminance by the strobe color correction process, a high-speed strobe color correction process can be performed. In addition, since the strobe color correction can be adjusted for the effect of the strobe light for each ranked area, even if there is an unnatural part in the result of the strobe color correction for each area, it can be easily adjusted.
なお、上記ステップU5でランク付けされた領域の境界をカーソルでポイントした場合には境界近傍の色合いがなだらかになるようにストロボ色補正の調整を行うようにすることもできる。 If the cursor is pointed at the boundary of the area ranked in step U5, the strobe color correction can be adjusted so that the color near the boundary becomes gentle.
10 光学系(撮像手段)
12 信号変換部(撮像手段)
13 信号処理部(撮像手段)
20 制御部(画像比較手段、ストロボ撮像画像補正手段)
37 色調整キー
40 表示部
50 保存記録メモリ、メモリーカード
100 デジタルカメラ(電子カメラ装置)
131 カラープロセス回路(輝度抽出手段)
10 Optical system (imaging means)
12 Signal converter (imaging means)
13 Signal processor (imaging means)
20 control unit (image comparison means, strobe image correction means)
37
131 Color process circuit (luminance extraction means)
Claims (6)
非ストロボ撮像画像とストロボ撮像画像を得る撮像手段と、
この撮像手段により得られる非ストロボ撮像画像の輝度とストロボ撮像画像の輝度を抽出する輝度抽出手段と、
この輝度抽出手段により抽出された非ストロボ撮像画像の輝度とストロボ撮像画像の輝度との輝度差を得る輝度差取得手段と、
この輝度差取得手段により得られた輝度差に比例した補正量で前記撮像手段により得られるストロボ撮像画像の色補正を行うことにより、ストロボ撮像画像に含まれるストロボ光のもつ色合いを打ち消すストロボ撮像画像補正手段と、
を備え、
前記非ストロボ画像は、スルー画像であり、前記撮像手段により得られるスルー画像を表示する表示手段を更に備えたことを特徴とする電子カメラ装置。 In an electronic camera device capable of strobe imaging,
Imaging means for obtaining a non-strobe captured image and a strobe captured image;
A brightness extraction means for extracting the brightness of the non-strobe captured image obtained by the imaging means and the brightness of the strobe captured image;
A luminance difference obtaining unit for obtaining a luminance difference between the luminance of the non-strobe captured image and the luminance of the strobe captured image extracted by the luminance extracting unit;
The stroboscopic image that cancels the hue of the stroboscopic light contained in the stroboscopic image by performing color correction of the stroboscopic image obtained by the imaging unit with a correction amount proportional to the luminance difference obtained by the luminance difference acquisition unit Correction means;
With
The non-stroboscopic image is a through image, and further includes display means for displaying a through image obtained by the imaging means.
前記ストロボ撮像画像補正手段は前記各部分の輝度差に比例した複数の補正量で前記ストロボ撮像画像の複数部分の色補正を行うことを特徴とする請求項1記載の電子カメラ装置。 The brightness difference acquisition means includes means for obtaining a brightness difference of each part from the brightness of a plurality of parts of the non-strobe captured image and the strobe captured image,
2. The electronic camera apparatus according to claim 1, wherein the strobe captured image correction unit performs color correction of a plurality of portions of the strobe captured image with a plurality of correction amounts proportional to a luminance difference between the portions.
非ストロボ撮像画像とストロボ撮像画像を得る撮像ステップと、
この撮像ステップにて得られる非ストロボ撮像画像の輝度とストロボ撮像画像の輝度を抽出する輝度抽出ステップと、
この輝度抽出ステップにて抽出された非ストロボ撮像画像の輝度とストロボ撮像画像の輝度との輝度差を得る輝度差取得ステップと、
この輝度差取得ステップにて得られた輝度差に比例した補正量で前記撮像ステップにより得られるストロボ撮像画像の色補正を行うことにより、ストロボ撮像画像に含まれるストロボ光のもつ色合いを打ち消すストロボ撮像画像補正ステップと、
を含み、
前記非ストロボ画像は、スルー画像であり、前記撮像ステップにより得られるスルー画像を表示部に表示させる表示ステップを更に含むことを特徴とするストロボ色補正方法。 A strobe color correction method in an electronic camera device capable of strobe imaging,
An imaging step of obtaining a non-strobe captured image and a strobe captured image;
A luminance extraction step for extracting the luminance of the non-strobe captured image obtained in this imaging step and the luminance of the strobe captured image;
A luminance difference acquisition step for obtaining a luminance difference between the luminance of the non-strobe captured image extracted in this luminance extraction step and the luminance of the strobe captured image;
Strobe imaging that cancels the tint of the strobe light contained in the strobe image by performing color correction of the strobe image obtained in the imaging step with a correction amount proportional to the brightness difference obtained in the brightness difference acquisition step An image correction step;
Including
The non-stroboscopic image is a through image, and further includes a display step of displaying a through image obtained in the imaging step on a display unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007215416A JP4525717B2 (en) | 2007-08-22 | 2007-08-22 | Electronic camera device and strobe color correction method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007215416A JP4525717B2 (en) | 2007-08-22 | 2007-08-22 | Electronic camera device and strobe color correction method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP11934799A Division JP4081917B2 (en) | 1999-04-27 | 1999-04-27 | Electronic camera device and strobe color correction method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008011560A JP2008011560A (en) | 2008-01-17 |
JP4525717B2 true JP4525717B2 (en) | 2010-08-18 |
Family
ID=39069251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007215416A Expired - Fee Related JP4525717B2 (en) | 2007-08-22 | 2007-08-22 | Electronic camera device and strobe color correction method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4525717B2 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009300871A (en) * | 2008-06-16 | 2009-12-24 | Edm Kk | Illuminating device and method for image processing apparatus |
JP5136369B2 (en) * | 2008-11-13 | 2013-02-06 | 株式会社ニコン | Imaging device |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0851632A (en) * | 1994-05-31 | 1996-02-20 | Asahi Optical Co Ltd | White balance adjustment device |
JPH08340542A (en) * | 1995-04-13 | 1996-12-24 | Ricoh Co Ltd | Electronic still camera |
-
2007
- 2007-08-22 JP JP2007215416A patent/JP4525717B2/en not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0851632A (en) * | 1994-05-31 | 1996-02-20 | Asahi Optical Co Ltd | White balance adjustment device |
JPH08340542A (en) * | 1995-04-13 | 1996-12-24 | Ricoh Co Ltd | Electronic still camera |
Also Published As
Publication number | Publication date |
---|---|
JP2008011560A (en) | 2008-01-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4432054B2 (en) | Imaging apparatus and method | |
JP3873157B2 (en) | Electronic camera device and imaging method | |
TWI508555B (en) | Image processing apparatus and image processing method for performing image synthesis | |
US8106961B2 (en) | Image processing method, apparatus and computer program product, and imaging apparatus, method and computer program product | |
JP5281878B2 (en) | IMAGING DEVICE, LIGHTING PROCESSING DEVICE, LIGHTING PROCESSING METHOD, AND LIGHTING PROCESSING PROGRAM | |
US7808546B2 (en) | Image processing system, image capturing apparatus and system and method for detecting backlight status | |
JP4774915B2 (en) | Imaging apparatus, gradation correction method, and program | |
WO2009139154A1 (en) | Image pickup device and image pickup method | |
US20090002518A1 (en) | Image processing apparatus, method, and computer program product | |
US20070206938A1 (en) | Distance measuring apparatus and method | |
JP2021128791A (en) | Image processing apparatus, image processing method, and program | |
JP5225137B2 (en) | Imaging apparatus, image processing method, and program | |
JP4525717B2 (en) | Electronic camera device and strobe color correction method | |
JP4081917B2 (en) | Electronic camera device and strobe color correction method | |
JP4760496B2 (en) | Image data generation apparatus and image data generation method | |
JP2008298847A (en) | Photographing method and digital camera | |
JP2012119756A (en) | Imaging apparatus and white-balance control method | |
JP2009063674A (en) | Imaging apparatus and flash control method | |
JP2009124309A (en) | Image device | |
JP4885079B2 (en) | Digital camera, photographing method and photographing program | |
JP4422353B2 (en) | Electronic camera | |
JP4355859B2 (en) | Electronic camera device and imaging method | |
JP2016220031A (en) | Image processing device and image processing method | |
JP2007235531A (en) | Digital camera | |
JP5136369B2 (en) | Imaging device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090929 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100119 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100317 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100511 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100524 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130611 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |