JP2004194106A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2004194106A JP2004194106A JP2002361274A JP2002361274A JP2004194106A JP 2004194106 A JP2004194106 A JP 2004194106A JP 2002361274 A JP2002361274 A JP 2002361274A JP 2002361274 A JP2002361274 A JP 2002361274A JP 2004194106 A JP2004194106 A JP 2004194106A
- Authority
- JP
- Japan
- Prior art keywords
- image
- area
- exposure
- subject
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
【課題】夜景を背景にして被写体を長秒時露光して撮影している際に、上記被写体がぶれた場合においても、上記被写体及び背景の両方を良好に撮影できるようにする。
【解決手段】夜景をバックに人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時にわたる２回目及び３回目の露光とを行い、上記３回目の露光が終了した後で画像合成を行う際に、それぞれの露光を行って得た画像の境界領域について所定の処理を行うようにして、３回の露光を行っている間に被写体が動いた場合においても、複数枚の画像を合成した画像の境界領域に異常が発生することを良好に回避できるようにして、夜景を背景として撮影する際に被写体が多少動いた場合においても画像ぶれが発生するのを確実に防止できるようにする。
【選択図】 図１
【解決手段】夜景をバックに人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時にわたる２回目及び３回目の露光とを行い、上記３回目の露光が終了した後で画像合成を行う際に、それぞれの露光を行って得た画像の境界領域について所定の処理を行うようにして、３回の露光を行っている間に被写体が動いた場合においても、複数枚の画像を合成した画像の境界領域に異常が発生することを良好に回避できるようにして、夜景を背景として撮影する際に被写体が多少動いた場合においても画像ぶれが発生するのを確実に防止できるようにする。
【選択図】 図１
Description
【０００１】
【発明の属する技術分野】
本発明は撮像装置に関し、特に、撮影対象を照明するストロボと、所定時間露光することによって画像情報を出力する撮像素子と、上記撮像素子により生成した画像に所定の処理を施す処理機能とを備えた撮像装置に用いて好適なものである。
【０００２】
【従来の技術】
従来、夜景をバックに人物等の被写体を夜間撮影する際には、例えば、特許文献１に記載されているように、まず被写体に対してフラッシュ光を放射して撮影を行い、次に夜景に対してはフラッシュを使わず長秒時露光を行うことを可能にした多重露光カメラが開示されている。
【０００３】
また、特許文献２には、バルブモード時において、露光開始から露光終了までの経過時間を表示するカメラが開示されている。また、特許文献３には、情報伝達手段と発光手段や発音手段により、視覚や聴覚による表示が可能なカメラ装置が開示されている。
【０００４】
【特許文献１】
特開平４-２１５６３３号公報
【特許文献２】
特開昭６０-１２２８４４号公報
【特許文献３】
特開２０００-０３９６５８号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上記従来例では、長秒時の撮影を行う場合には、結局のところ被写体自体ができる限り動かないようにしなければ、綺麗な画像を撮影することを可能にするという保証はなかった。被写体が長秒時の露光中に動かずにいるようなことは実際上には不可能に近く、どうしても被写体がぶれた画像になってしまいかねない問題があった。
【０００６】
本発明は上述の問題点にかんがみてなされたもので、夜景を背景にして被写体を長秒時露光して撮影している際に、上記被写体がぶれた場合においても、上記被写体及び背景の両方を良好に撮影できるようにすることを目的とする。
【０００７】
【課題を解決するための手段】
本発明の撮像装置は、撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出手段と、上記特定領域抽出手段によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成手段と、上記撮影画像生成手段が上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御手段とを有することを特徴としている。
【０００８】
本発明は上記技術手段よりなるので、夜景を背景にして人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時の２回目の露光と、３回目の露光とを行う。そして、上記３回目の露光を終了した後で画像合成を行う際に、上記被写体と上記背景との境界領域に所定の処理を行うことにより、上記露光中に被写体が動いた場合においても、複数枚の画像を合成した際に画像の境界領域に異常が起こることを回避できるようにして、上記被写体のぶれが撮影画像に発生しないようにすることを可能とする。
【０００９】
【発明の実施の形態】
次に、添付図面を参照しながら本発明の撮像装置の実施の形態について説明する。
図１は、実施の形態に関わる電子スチルカメラの構成を示すブロック図である。
図１において、１は撮影レンズ、２は絞り機能を具備するシャッタ、３はＣＣD等により光学像を電気信号に変換する撮像素子、４はガンマ補正等の公知のカメラ信号処理を行うプロセス回路、５はプロセス回路４のアナログ信号をデジタル信号化するA／D変換器、６は適応離散コサイン変換（ADT）等により画像データの圧縮を行う画像圧縮回路、７は上記画像圧縮回路６により圧縮を施した画像データと上記画像圧縮回路６をバイパスした画像データ（圧縮を行っていない）との伝送を切り換える切り替えスイッチである。
【００１０】
８は外部音声入力用のマイク、９は上記マイク８より出力される音声信号のノイズを低減するノイズ低減回路、１０は上記ノイズ低減回路９のアナログ出力をデジタル信号化するＡ／Ｄ変換器、１１は適応差分ＰＣＭ（ＤＰＣＭ）等によりデータ圧縮する音声圧縮回路、１２は音声圧縮回路１１により圧縮を施した音声データと上記音声圧縮回路１１をバイパスした音声データとの伝送を切り換える切換スイッチである。
【００１１】
１３はバッファメモリである。上記バッファメモリ１３は、画像データ（映像信号）及び又は音声データ（音声信号）を一時記憶し、後述するメモリ制御回路３９により上記信号を所望の速度で読み出し可能なメモリである。
【００１２】
１４はＡ／Ｄ変換器５及び１０、画像圧縮回路６、音声圧縮回路１１、切換スイッチ７及び１２、バッファメモリ１３を制御するメモリ制御回路である。画像データを圧縮する場合は圧縮回路６により、圧縮画像データを圧縮しない場合はＡ／Ｄ変換器５から出力される画像データが、メモリ制御回路１４の制御下でバッファメモリ１３に書き込まれる。
【００１３】
音声データを圧縮する場合は圧縮回路１１により圧縮音声データが、圧縮しない場合はＡ／Ｄ変換器１０から出力される音声データが、メモリ制御回路１４の制御下でバッファメモリ１３に書き込まれる。
【００１４】
１５はメモリカード１６、ハードディスク１７或は外部機器とのインターフェース（Ｉ／Ｆ）、１８はメモリカード１６、或はハードディスク１７とカメラ本体との電気的接続を行うカメラ本体側のコネクタである。
【００１５】
メモリカード１６の記録領域には、管理データ領域１９と情報データ領域２０とがあり、ここに記憶される情報はメモリカード側のインターフェース２１及びコネクタ２２を介して外部から読み書きが行われる。
【００１６】
また、ライトプロテクト（書き込み禁止）２３の情報も、インターフェース２１及びコネクタ２２を介して外部に読み出し可能である。上記インターフェース２１は、ＣＰＵ、ＭＰＵ等の制御回路、ＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリ、及びＲＡＭ等により構成され、所定のプログラムに基づいてメモリカード１６の制御を行う。
【００１７】
一方、ハードディスク１７の記憶領域には、管理データ領域２４と情報データ領域２５とがあり、ここに記憶される情報はインターフェース２６及びコネクタ２７を介して外部から読み書きが行われる。上記インターフェース２６は、ＣＰＵ、ＭＰＵ等の制御回路、ＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリ、及びＲＡＭ等により構成され、所定のプログラムに基づいてハードディスク１７の制御を行う。
【００１８】
２８はシャッタ２を駆動するシャッタ駆動回路、２９は撮影レンズ１内のフォーカシングレンズを駆動するレンズ駆動回路、３０は被写体までの距離を測定する測距回路、３１は被写体の明るさを測定する測光回路、３２はフラッシュ、３３は温度検出回路であり、記録媒体の温度、凍結や露結の有無を検出する。
【００１９】
３４は電源の状態検出及び制御を行う電源制御回路、３５は電源部であり、電池、ＤＣ−ＤＣコンバータ、通電するブロックを切り換えるスイッチ等により構成されており、上記電源制御回路３４によって制御される。
【００２０】
また、電源制御回路３４は電池装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路３９の指示に基づいて電源部３５を制御している。
【００２１】
３６はカメラ動作状態（撮影枚数等）等を表示する表示装置、３７はシステム制御回路３９の撮影動作用定数、変数等を記憶する制御用メモリである。
３８は後述するシステム制御回路３９の各種の動作指示の入力をするためのスイッチ群である。スイッチ群３８には例えば、メインスイッチ４０、レリーズボタン４１の第１ストロークで閉成され、測距回路３０及び測光回路３１により測距及び測光を指示する測距測光スイッチ４２、レリーズボタン４１の第２ストロークで閉成される。
【００２２】
撮影画像のメモリカード１６或はハードディスク１７への記録を指示する記録スイッチ４３、１枚または１組の撮影を行うシングル（Ｓ）モード、連続して複数枚の又は複数組の撮影を行う連続（Ｃ）モード、及びセルフタイマ撮影モードを選択するモードスイッチ４４、画像の記録枚数、フレーム記録／フィールド記録の区別、アスペクト比、画素構成、圧縮方式、圧縮率等の画像記録方式を選択する画像モードスイッチ４５（図中では一つのスイッチとして書かれているが、複数のスイッチにより構成されている）、消去モードを選択する消去モードスイッチ４６、消去の実行を指示する消去スイッチ４７、音声記録のオン／オフを指定する音声記録のメインスイッチ４８、及び音声の記録の実行を指示する音声記録実行スイッチ４９等がある。
【００２３】
３９はスイッチ群３１の指示、カメラ本体に装着されている記録媒体の種類及び該記録媒体の状態（残り記憶容量等）検出、そのほか上述したカメラ本体の検出装置に応じてカメラ全体の制御を行うシステム制御回路である。例えば、測距回路３０の測定結果に従いレンズ駆動回路２９により撮影レンズ１のフォーカシングレンズを駆動して撮影レンズ１を合焦状態に制御する。
【００２４】
更に、システム制御回路３９は測光回路３１の測光結果により最適露光量になるようにシャッタ駆動回路２８によりシャッタ２の開放時間を決定する等の制御を行う。更に、本実施の形態の特徴的な制御を後で詳しく説明する。５０は外部機器と接続を行うコネクタである。
【００２５】
上述のように構成された本実施の形態の電子スチルカメラでは、特定領域の抽出処理、特定領域情報と複数枚の画像とから１枚の画像を生成する画像生成処理、及び所定の領域境界処理を上記システム制御回路３９が制御するようにしている。
【００２６】
以下に、モードスイッチ４４を選択して夜景モードにおける撮影（画像記録）行う様子の詳細を、図２及び図３のフローチャートを参照しながら詳細に説明する。
システム制御回路３９は、メモリ３７に記憶される被写体までの距離データを読み出し、レンズ駆動回路２９により撮影レンズ１のフォーカシングレンズを駆動して、被写体に焦点を合わせる（ステップＳ２１）。
【００２７】
また、メモリ３７に記憶される測光データに従い、シャッタ駆動回路２８によりシャッタ２を開放して撮像素子３を露光する（ステップＳ２２及びステップＳ２３）。
【００２８】
次に、フラッシュフラグによりフラッシュ３２が必要か否かを判断する（ステップＳ２４）。この判断の結果、フラッシュ３２が必要な場合にはフラッシュ３２を発光させる（ステップＳ２５）。
【００２９】
フラッシュ３２を発光させた場合は、発光終了と同時にシャッタ２を閉成して露光を終了する（ステップＳ２６、ステップＳ２７）。次に、撮像素子３から電荷信号を読み出し、プロセス回路４、A/D変換器５、スイッチ７を介して、１枚目の撮影画像の画素値を取り出す(ステップＳ２８)。
【００３０】
本実施の形態においては、所定の閾値を設け、ストロボ光の当たる被写体及びその付近は画素値が比較的高いと考える。また、撮影画像の各画素が閾値以上の値であれば被写体領域、またストロボ光の届かない背景などは画素値が低いと考えられるので、閾値以下の値であれば背景領域として、特定領域を抽出する（ステップＳ２９）。
【００３１】
次に、上記被写体領域の周囲に特定の画素の幅を持たせた判定領域を形成する（ステップＳ３０）。この判定領域は、１回目の露光で得られた被写体領域画像と、３回目の露光で得られた背景領域画像とを合成して、１枚の撮影画像を生成する際に、境界領域に画像異常が生じないようにするための制御で用いる領域である。
【００３２】
これらの３回の露光は連続して行なわれるために、画像サイズや撮影位置が異なるということはない。このため、求められた判定領域情報は３回の露光によって得られる画像情報の全てにおいて共通だと考えられる。上記した被写体領域や背景領域の特定領域に関しても、同様であるといえる。
【００３３】
領域の異常とは、長秒時の露光により被写体が動くため、１回目の露光で得られた被写体領域の外にまで、３回目の露光では被写体がはみ出てしまうことが考えられ、１回目の露光で得られた被写体領域の画像を、３回目の露光で得られた画像の被写体領域にそのまま合成することで発生する。
【００３４】
図４が、１回目の露光を行った際に得られる画像の例であるが、ストロボ光が届く手前の白色の領域１００が被写体領域、ストロボ光が届かない灰色の領域１０１が背景領域となる。そして、判定領域１０２を適用した図が、図５になる。
【００３５】
撮像素子３から電荷信号の読み出し終了時に、シャッタ２を開放して再び撮像素子３を、ｔ１秒間露光する（ステップＳ３１、ステップＳ３２）。そして、撮像素子３の露光終了を待ち（ステップＳ３３）、シャッタ２を閉成して（ステップＳ３４）、撮像素子３から電荷を読み出し(ステップＳ３５)、プロセス回路４、A/D変換器５、スイッチ７を介して、２枚目の撮影画像のデータを取り出す(ステップＳ３６)。そして、２回目露光の画像に判定領域情報を適用させる（ステップＳ３７）。
【００３６】
図６が２回目露光による画像の例になる。更に、図７が２回目露光による画像情報に判定領域１０３を適用させたものになる。２回目露光による画像情報は主に、１回目の露光による画像情報と３回目の露光による画像情報を合成する際の領域境界処理に使用する。
【００３７】
次に、撮像素子３から電荷信号読み出し終了時に、シャッタ２を開放して再び撮像素子３を、ｔ１よりも長秒時のｔ２秒間露光する（ステップＳ３８、ステップＳ３９）。撮像素子３の露光終了を待ち（ステップＳ４０）、シャッタ２を閉成して（ステップＳ４１）、撮像素子３から電荷を読み出し（ステップＳ４２）、プロセス回路４、A/D変換器５、スイッチ７を介して、３枚目の撮影画像のデータを取り出す（ステップＳ４３）。そして、３回目露光の画像情報に判定領域情報を適用させる（ステップＳ４４）。図８が３回目露光による画像の例になる。更に、図９が３回目露光による画像に判定領域１０４を適用させたものになる。
【００３８】
次に、１回目の露光による画像情報と、３回目の露光による画像情報を合成する際に境界領域における画像異常の発生を防ぐための境界領域処理を行う（ステップＳ４５）。
【００３９】
２回目、３回目の露光で得られた画像の上記判定領域１０４内における各画素の画素値が、上記画素から所定の距離内にある被写体領域の画素値に所定の誤差を含めた画素値の範囲内にあるかないかを判定する。被写体領域の画素値は、１回目の露光で得られた画像を用いる。
【００４０】
例えば、図内においては、図１１、１２の座標位置(ｘ１、ｙ１)における画素値が、図１０における同様の座標位置(ｘ１、ｙ１)からの所定距離ｒ１内にある被写体領域内の画素値に所定の誤差を含めた画素値の範囲内にあるかないかを判定するのを、判定領域全域において実行する。
【００４１】
つまり、これは、長秒時撮影において被写体４０の動きによる上記の画像異常を回避する手段であり、３回目の露光で得られた画像に１回目の露光で得られた画像を合成する際に、被写体領域の外にも被写体が写ったように見える画像の異常を回避するためである。
【００４２】
そして、２回目・３回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ２、Ｐ３が、いずれも１回目の露光で得られた画像の上記画素の位置(ｘ１、ｙ１)から所定の距離内r１内にある被写体領域の画素値Ｐ１に所定の誤差Ｃを含めた画素範囲内Ｐ１−Ｃ≦Ｐ２≦Ｐ１＋Ｃ、Ｐ１−Ｃ≦Ｐ３≦Ｐ１＋Ｃにある場合は、つまり被写体ブレが発生している画素だと考えられるので、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３は１回目の露光で得られた画像の同位置の画素値Ｐ１に置き換えられる。
【００４３】
３回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ３だけが、１回目の露光で得られた画素の前期画素の位置(ｘ１、ｙ１)から所定の距離内r１内にある被写体領域の画素値Ｐ１に所定の誤差を含めた画素範囲内Ｐ１−Ｃ≦Ｐ３≦Ｐ１＋Ｃにある場合は、つまり被写体ブレが発生している画素だと考えられるので、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３は２回目の露光で得られた画素の同位置の画素値Ｐ２に置き換えられる。画素Ｐ２は、背景が綺麗に撮影できていると考えられるからである。
【００４４】
２回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ２だけが、１回目の露光で得られた画素の前期画素の位置(ｘ１、ｙ１)から所定の距離ｒ１内にある被写体領域の画素値Ｐ１に所定の誤差を含めた画素範囲内Ｐ１−Ｃ≦Ｐ２≦Ｐ１＋Ｃにある場合は、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３の置き換えはしない。画素Ｐ３は背景が綺麗に撮影できていると考えられるからである。
【００４５】
このようにして、３回目の露光で得られた画像の上記判定領域内における全画素の判定が終了した画像の背景領域部分と、１回目の露光で得られた画像の被写体領域部分を合成することで、１枚の撮影画像が完成する（ステップＳ４６）。
【００４６】
それをバッファメモリ１３に書き込み、撮影動作を終了する（ステップＳ４７）。以上説明した処理が、図２及び図３おける撮影（画像記録）の動作処理である。
【００４７】
（本発明の他の実施の形態）
本発明は複数の機器から構成されるシステムに適用しても１つの機器からなる装置に適用しても良い。
【００４８】
また、上述した実施の形態の機能を実現するように各種のデバイスを動作させるように、上記各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、上記実施の形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って上記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
【００４９】
また、この場合、上記ソフトウェアのプログラムコード自体が上述した実施の形態の機能を実現することになり、そのプログラムコード自体、およびそのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記憶媒体は本発明を構成する。かかるプログラムコードを記憶する記憶媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
【００５０】
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施の形態で説明した機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等の共同して上述の実施の形態で示した機能が実現される場合にもかかるプログラムコードは本発明の実施の形態に含まれることは言うまでもない。
【００５１】
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合にも本発明に含まれる。
【００５２】
本発明の実施態様の例を以下に列挙する。
〔実施態様１〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出手段と、上記特定領域抽出手段によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成手段と、上記撮影画像生成手段が上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御手段とを有することを特徴とする撮像装置。
【００５３】
〔実施態様２〕 上記特定領域抽出手段は、撮影画像における画素値を判定し、上記照明手段から放射された光が当たる主被写体及びその付近は画素値が比較的高いと考えて主被写体領域と判定するとともに、上記照明手段から放射された光が届かないことにより画素値が低い領域を背景領域と判定して、上記特定領域の情報を抽出することを特徴とする実施態様１に記載の撮像装置。
【００５４】
〔実施態様３〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置を用いて行う撮像方法であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出処理と、上記特定領域抽出処理によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成処理と、上記撮影画像生成処理において上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御処理とを行うことを特徴とする撮像方法。
【００５５】
〔実施態様４〕 上記特定領域抽出処理においては、撮影画像における画素値を判定し、上記照明手段から放射された光が当たる主被写体及びその付近は画素値が比較的高いと考えて主被写体領域と判定するとともに、上記照明手段から放射された光が届かないことにより画素値が低い領域を背景領域と判定して、特定領域の情報を抽出することを特徴とする実施態様３に記載の撮像方法。
【００５６】
〔実施態様５〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置を用いて行う撮像方法を実行するためのプログラムであって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出処理と、上記特定領域抽出処理によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成処理と、上記撮影画像生成処理において上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御処理とをコンピュータに実行させることを特徴とするコンピュータプログラム。
【００５７】
〔実施態様６〕 上記コンピュータプログラムを読み取り可能に記録したことを特徴とするコンピュータ読み取り可能なプログラム。
【００５８】
【発明の効果】
以上説明してきたように、本発明によれば、夜景をバックに人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時にわたる２回目及び３回目の露光とを行い、上記３回目の露光が終了した後で画像合成を行う際に、それぞれの露光を行って得た画像の境界領域について所定の処理を行うようにしたので、上記３回の露光を行っている間に被写体が動いた場合においても、複数枚の画像を合成した画像の境界領域に異常が発生することを良好に回避することができ、夜景を背景として被写体を撮影する際に上記被写体が多少動いた場合においても画像ぶれが発生するのを確実に防止することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態を示し、本発明に関わる電子スチルカメラのブロック図である。
【図２】本実施の形態に関わる撮影手順を説明するフローチャートである。
【図３】本実施の形態に関わる撮影手順を説明するフローチャートである。
【図４】１回目の露光で得られる被写体領域と、背景領域を示した例を示す図である。
【図５】１回目の露光で得られる画像に判定領域を加味した例を示す図である。
【図６】２回目の露光で得られる画像を示した例を示す図である。
【図７】２回目の露光で得られる画像に判定領域を加味した例を示した図である。
【図８】３回目の露光で得られる画像を示した例を示した図である。
【図９】３回目の露光で得られる画像に判定領域を加味した例を示した図である。
【図１０】１回目の露光で得られた画像に、領域境界処理をする際の位置とその範囲を示した例を示した図である。
【図１１】２回目の露光で得られた画像に、領域境界処理をする際の位置を示した例を示した図である。
【図１２】３回目の露光で得られた画像に、領域境界処理をする際の位置を示した例を示した図である。
【符号の説明】
１ 撮影レンズ
２ シャッタ
３ 撮像素子
４ プロセス回路
５ A／D変換器
６ 画像圧縮回路
７ 切り替えスイッチ
８ マイク
９ ノイズ低減回路
１０ A/D変換器
１１ 音声圧縮回路
１２ 切り替えスイッチ
１３ バッファメモリ
１４ メモリ制御回路
１５ メモリカード
１６ インターフェース（I／F）
１７ ハードディスク
１８ コネクタ
１９ 管理データ領域
２０ 情報データ領域
２１ インターフェース（I／F）
２２ コネクタ
２３ ライトプロテクト
２４ 管理データ領域
２５ 情報データ領域
２６ インターフェース（I/F）
２７ コネクタ
２８ シャッタ駆動回路
２９ レンズ駆動回路
３０ 測距回路
３１ 測光回路
３２ フラッシュ
３３ 温度検出回路
３４ 電源制御回路
３５ 電源部
３６ 表示装置
３７ 制御用メモリ
３８ スイッチ群
３９ システム制御回路
４０ メインスイッチ
４１ レリーズボタン
４２ 測距測光スイッチ
４３ 記録スイッチ
４４ モードスイッチ
４５ 画像モードスイッチ
４６ 消去モードスイッチ
４７ 消去スイッチ
４８ 音声記録メインスイッチ
４９ 音声記録実行スイッチ
５０ コネクタ
【発明の属する技術分野】
本発明は撮像装置に関し、特に、撮影対象を照明するストロボと、所定時間露光することによって画像情報を出力する撮像素子と、上記撮像素子により生成した画像に所定の処理を施す処理機能とを備えた撮像装置に用いて好適なものである。
【０００２】
【従来の技術】
従来、夜景をバックに人物等の被写体を夜間撮影する際には、例えば、特許文献１に記載されているように、まず被写体に対してフラッシュ光を放射して撮影を行い、次に夜景に対してはフラッシュを使わず長秒時露光を行うことを可能にした多重露光カメラが開示されている。
【０００３】
また、特許文献２には、バルブモード時において、露光開始から露光終了までの経過時間を表示するカメラが開示されている。また、特許文献３には、情報伝達手段と発光手段や発音手段により、視覚や聴覚による表示が可能なカメラ装置が開示されている。
【０００４】
【特許文献１】
特開平４-２１５６３３号公報
【特許文献２】
特開昭６０-１２２８４４号公報
【特許文献３】
特開２０００-０３９６５８号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上記従来例では、長秒時の撮影を行う場合には、結局のところ被写体自体ができる限り動かないようにしなければ、綺麗な画像を撮影することを可能にするという保証はなかった。被写体が長秒時の露光中に動かずにいるようなことは実際上には不可能に近く、どうしても被写体がぶれた画像になってしまいかねない問題があった。
【０００６】
本発明は上述の問題点にかんがみてなされたもので、夜景を背景にして被写体を長秒時露光して撮影している際に、上記被写体がぶれた場合においても、上記被写体及び背景の両方を良好に撮影できるようにすることを目的とする。
【０００７】
【課題を解決するための手段】
本発明の撮像装置は、撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出手段と、上記特定領域抽出手段によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成手段と、上記撮影画像生成手段が上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御手段とを有することを特徴としている。
【０００８】
本発明は上記技術手段よりなるので、夜景を背景にして人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時の２回目の露光と、３回目の露光とを行う。そして、上記３回目の露光を終了した後で画像合成を行う際に、上記被写体と上記背景との境界領域に所定の処理を行うことにより、上記露光中に被写体が動いた場合においても、複数枚の画像を合成した際に画像の境界領域に異常が起こることを回避できるようにして、上記被写体のぶれが撮影画像に発生しないようにすることを可能とする。
【０００９】
【発明の実施の形態】
次に、添付図面を参照しながら本発明の撮像装置の実施の形態について説明する。
図１は、実施の形態に関わる電子スチルカメラの構成を示すブロック図である。
図１において、１は撮影レンズ、２は絞り機能を具備するシャッタ、３はＣＣD等により光学像を電気信号に変換する撮像素子、４はガンマ補正等の公知のカメラ信号処理を行うプロセス回路、５はプロセス回路４のアナログ信号をデジタル信号化するA／D変換器、６は適応離散コサイン変換（ADT）等により画像データの圧縮を行う画像圧縮回路、７は上記画像圧縮回路６により圧縮を施した画像データと上記画像圧縮回路６をバイパスした画像データ（圧縮を行っていない）との伝送を切り換える切り替えスイッチである。
【００１０】
８は外部音声入力用のマイク、９は上記マイク８より出力される音声信号のノイズを低減するノイズ低減回路、１０は上記ノイズ低減回路９のアナログ出力をデジタル信号化するＡ／Ｄ変換器、１１は適応差分ＰＣＭ（ＤＰＣＭ）等によりデータ圧縮する音声圧縮回路、１２は音声圧縮回路１１により圧縮を施した音声データと上記音声圧縮回路１１をバイパスした音声データとの伝送を切り換える切換スイッチである。
【００１１】
１３はバッファメモリである。上記バッファメモリ１３は、画像データ（映像信号）及び又は音声データ（音声信号）を一時記憶し、後述するメモリ制御回路３９により上記信号を所望の速度で読み出し可能なメモリである。
【００１２】
１４はＡ／Ｄ変換器５及び１０、画像圧縮回路６、音声圧縮回路１１、切換スイッチ７及び１２、バッファメモリ１３を制御するメモリ制御回路である。画像データを圧縮する場合は圧縮回路６により、圧縮画像データを圧縮しない場合はＡ／Ｄ変換器５から出力される画像データが、メモリ制御回路１４の制御下でバッファメモリ１３に書き込まれる。
【００１３】
音声データを圧縮する場合は圧縮回路１１により圧縮音声データが、圧縮しない場合はＡ／Ｄ変換器１０から出力される音声データが、メモリ制御回路１４の制御下でバッファメモリ１３に書き込まれる。
【００１４】
１５はメモリカード１６、ハードディスク１７或は外部機器とのインターフェース（Ｉ／Ｆ）、１８はメモリカード１６、或はハードディスク１７とカメラ本体との電気的接続を行うカメラ本体側のコネクタである。
【００１５】
メモリカード１６の記録領域には、管理データ領域１９と情報データ領域２０とがあり、ここに記憶される情報はメモリカード側のインターフェース２１及びコネクタ２２を介して外部から読み書きが行われる。
【００１６】
また、ライトプロテクト（書き込み禁止）２３の情報も、インターフェース２１及びコネクタ２２を介して外部に読み出し可能である。上記インターフェース２１は、ＣＰＵ、ＭＰＵ等の制御回路、ＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリ、及びＲＡＭ等により構成され、所定のプログラムに基づいてメモリカード１６の制御を行う。
【００１７】
一方、ハードディスク１７の記憶領域には、管理データ領域２４と情報データ領域２５とがあり、ここに記憶される情報はインターフェース２６及びコネクタ２７を介して外部から読み書きが行われる。上記インターフェース２６は、ＣＰＵ、ＭＰＵ等の制御回路、ＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリ、及びＲＡＭ等により構成され、所定のプログラムに基づいてハードディスク１７の制御を行う。
【００１８】
２８はシャッタ２を駆動するシャッタ駆動回路、２９は撮影レンズ１内のフォーカシングレンズを駆動するレンズ駆動回路、３０は被写体までの距離を測定する測距回路、３１は被写体の明るさを測定する測光回路、３２はフラッシュ、３３は温度検出回路であり、記録媒体の温度、凍結や露結の有無を検出する。
【００１９】
３４は電源の状態検出及び制御を行う電源制御回路、３５は電源部であり、電池、ＤＣ−ＤＣコンバータ、通電するブロックを切り換えるスイッチ等により構成されており、上記電源制御回路３４によって制御される。
【００２０】
また、電源制御回路３４は電池装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路３９の指示に基づいて電源部３５を制御している。
【００２１】
３６はカメラ動作状態（撮影枚数等）等を表示する表示装置、３７はシステム制御回路３９の撮影動作用定数、変数等を記憶する制御用メモリである。
３８は後述するシステム制御回路３９の各種の動作指示の入力をするためのスイッチ群である。スイッチ群３８には例えば、メインスイッチ４０、レリーズボタン４１の第１ストロークで閉成され、測距回路３０及び測光回路３１により測距及び測光を指示する測距測光スイッチ４２、レリーズボタン４１の第２ストロークで閉成される。
【００２２】
撮影画像のメモリカード１６或はハードディスク１７への記録を指示する記録スイッチ４３、１枚または１組の撮影を行うシングル（Ｓ）モード、連続して複数枚の又は複数組の撮影を行う連続（Ｃ）モード、及びセルフタイマ撮影モードを選択するモードスイッチ４４、画像の記録枚数、フレーム記録／フィールド記録の区別、アスペクト比、画素構成、圧縮方式、圧縮率等の画像記録方式を選択する画像モードスイッチ４５（図中では一つのスイッチとして書かれているが、複数のスイッチにより構成されている）、消去モードを選択する消去モードスイッチ４６、消去の実行を指示する消去スイッチ４７、音声記録のオン／オフを指定する音声記録のメインスイッチ４８、及び音声の記録の実行を指示する音声記録実行スイッチ４９等がある。
【００２３】
３９はスイッチ群３１の指示、カメラ本体に装着されている記録媒体の種類及び該記録媒体の状態（残り記憶容量等）検出、そのほか上述したカメラ本体の検出装置に応じてカメラ全体の制御を行うシステム制御回路である。例えば、測距回路３０の測定結果に従いレンズ駆動回路２９により撮影レンズ１のフォーカシングレンズを駆動して撮影レンズ１を合焦状態に制御する。
【００２４】
更に、システム制御回路３９は測光回路３１の測光結果により最適露光量になるようにシャッタ駆動回路２８によりシャッタ２の開放時間を決定する等の制御を行う。更に、本実施の形態の特徴的な制御を後で詳しく説明する。５０は外部機器と接続を行うコネクタである。
【００２５】
上述のように構成された本実施の形態の電子スチルカメラでは、特定領域の抽出処理、特定領域情報と複数枚の画像とから１枚の画像を生成する画像生成処理、及び所定の領域境界処理を上記システム制御回路３９が制御するようにしている。
【００２６】
以下に、モードスイッチ４４を選択して夜景モードにおける撮影（画像記録）行う様子の詳細を、図２及び図３のフローチャートを参照しながら詳細に説明する。
システム制御回路３９は、メモリ３７に記憶される被写体までの距離データを読み出し、レンズ駆動回路２９により撮影レンズ１のフォーカシングレンズを駆動して、被写体に焦点を合わせる（ステップＳ２１）。
【００２７】
また、メモリ３７に記憶される測光データに従い、シャッタ駆動回路２８によりシャッタ２を開放して撮像素子３を露光する（ステップＳ２２及びステップＳ２３）。
【００２８】
次に、フラッシュフラグによりフラッシュ３２が必要か否かを判断する（ステップＳ２４）。この判断の結果、フラッシュ３２が必要な場合にはフラッシュ３２を発光させる（ステップＳ２５）。
【００２９】
フラッシュ３２を発光させた場合は、発光終了と同時にシャッタ２を閉成して露光を終了する（ステップＳ２６、ステップＳ２７）。次に、撮像素子３から電荷信号を読み出し、プロセス回路４、A/D変換器５、スイッチ７を介して、１枚目の撮影画像の画素値を取り出す(ステップＳ２８)。
【００３０】
本実施の形態においては、所定の閾値を設け、ストロボ光の当たる被写体及びその付近は画素値が比較的高いと考える。また、撮影画像の各画素が閾値以上の値であれば被写体領域、またストロボ光の届かない背景などは画素値が低いと考えられるので、閾値以下の値であれば背景領域として、特定領域を抽出する（ステップＳ２９）。
【００３１】
次に、上記被写体領域の周囲に特定の画素の幅を持たせた判定領域を形成する（ステップＳ３０）。この判定領域は、１回目の露光で得られた被写体領域画像と、３回目の露光で得られた背景領域画像とを合成して、１枚の撮影画像を生成する際に、境界領域に画像異常が生じないようにするための制御で用いる領域である。
【００３２】
これらの３回の露光は連続して行なわれるために、画像サイズや撮影位置が異なるということはない。このため、求められた判定領域情報は３回の露光によって得られる画像情報の全てにおいて共通だと考えられる。上記した被写体領域や背景領域の特定領域に関しても、同様であるといえる。
【００３３】
領域の異常とは、長秒時の露光により被写体が動くため、１回目の露光で得られた被写体領域の外にまで、３回目の露光では被写体がはみ出てしまうことが考えられ、１回目の露光で得られた被写体領域の画像を、３回目の露光で得られた画像の被写体領域にそのまま合成することで発生する。
【００３４】
図４が、１回目の露光を行った際に得られる画像の例であるが、ストロボ光が届く手前の白色の領域１００が被写体領域、ストロボ光が届かない灰色の領域１０１が背景領域となる。そして、判定領域１０２を適用した図が、図５になる。
【００３５】
撮像素子３から電荷信号の読み出し終了時に、シャッタ２を開放して再び撮像素子３を、ｔ１秒間露光する（ステップＳ３１、ステップＳ３２）。そして、撮像素子３の露光終了を待ち（ステップＳ３３）、シャッタ２を閉成して（ステップＳ３４）、撮像素子３から電荷を読み出し(ステップＳ３５)、プロセス回路４、A/D変換器５、スイッチ７を介して、２枚目の撮影画像のデータを取り出す(ステップＳ３６)。そして、２回目露光の画像に判定領域情報を適用させる（ステップＳ３７）。
【００３６】
図６が２回目露光による画像の例になる。更に、図７が２回目露光による画像情報に判定領域１０３を適用させたものになる。２回目露光による画像情報は主に、１回目の露光による画像情報と３回目の露光による画像情報を合成する際の領域境界処理に使用する。
【００３７】
次に、撮像素子３から電荷信号読み出し終了時に、シャッタ２を開放して再び撮像素子３を、ｔ１よりも長秒時のｔ２秒間露光する（ステップＳ３８、ステップＳ３９）。撮像素子３の露光終了を待ち（ステップＳ４０）、シャッタ２を閉成して（ステップＳ４１）、撮像素子３から電荷を読み出し（ステップＳ４２）、プロセス回路４、A/D変換器５、スイッチ７を介して、３枚目の撮影画像のデータを取り出す（ステップＳ４３）。そして、３回目露光の画像情報に判定領域情報を適用させる（ステップＳ４４）。図８が３回目露光による画像の例になる。更に、図９が３回目露光による画像に判定領域１０４を適用させたものになる。
【００３８】
次に、１回目の露光による画像情報と、３回目の露光による画像情報を合成する際に境界領域における画像異常の発生を防ぐための境界領域処理を行う（ステップＳ４５）。
【００３９】
２回目、３回目の露光で得られた画像の上記判定領域１０４内における各画素の画素値が、上記画素から所定の距離内にある被写体領域の画素値に所定の誤差を含めた画素値の範囲内にあるかないかを判定する。被写体領域の画素値は、１回目の露光で得られた画像を用いる。
【００４０】
例えば、図内においては、図１１、１２の座標位置(ｘ１、ｙ１)における画素値が、図１０における同様の座標位置(ｘ１、ｙ１)からの所定距離ｒ１内にある被写体領域内の画素値に所定の誤差を含めた画素値の範囲内にあるかないかを判定するのを、判定領域全域において実行する。
【００４１】
つまり、これは、長秒時撮影において被写体４０の動きによる上記の画像異常を回避する手段であり、３回目の露光で得られた画像に１回目の露光で得られた画像を合成する際に、被写体領域の外にも被写体が写ったように見える画像の異常を回避するためである。
【００４２】
そして、２回目・３回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ２、Ｐ３が、いずれも１回目の露光で得られた画像の上記画素の位置(ｘ１、ｙ１)から所定の距離内r１内にある被写体領域の画素値Ｐ１に所定の誤差Ｃを含めた画素範囲内Ｐ１−Ｃ≦Ｐ２≦Ｐ１＋Ｃ、Ｐ１−Ｃ≦Ｐ３≦Ｐ１＋Ｃにある場合は、つまり被写体ブレが発生している画素だと考えられるので、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３は１回目の露光で得られた画像の同位置の画素値Ｐ１に置き換えられる。
【００４３】
３回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ３だけが、１回目の露光で得られた画素の前期画素の位置(ｘ１、ｙ１)から所定の距離内r１内にある被写体領域の画素値Ｐ１に所定の誤差を含めた画素範囲内Ｐ１−Ｃ≦Ｐ３≦Ｐ１＋Ｃにある場合は、つまり被写体ブレが発生している画素だと考えられるので、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３は２回目の露光で得られた画素の同位置の画素値Ｐ２に置き換えられる。画素Ｐ２は、背景が綺麗に撮影できていると考えられるからである。
【００４４】
２回目の露光で得られた画像の上記判定領域内における画素(ｘ１、ｙ１)の画素値Ｐ２だけが、１回目の露光で得られた画素の前期画素の位置(ｘ１、ｙ１)から所定の距離ｒ１内にある被写体領域の画素値Ｐ１に所定の誤差を含めた画素範囲内Ｐ１−Ｃ≦Ｐ２≦Ｐ１＋Ｃにある場合は、３回目の露光で得られた画像の(ｘ１、ｙ１)における画素値Ｐ３の置き換えはしない。画素Ｐ３は背景が綺麗に撮影できていると考えられるからである。
【００４５】
このようにして、３回目の露光で得られた画像の上記判定領域内における全画素の判定が終了した画像の背景領域部分と、１回目の露光で得られた画像の被写体領域部分を合成することで、１枚の撮影画像が完成する（ステップＳ４６）。
【００４６】
それをバッファメモリ１３に書き込み、撮影動作を終了する（ステップＳ４７）。以上説明した処理が、図２及び図３おける撮影（画像記録）の動作処理である。
【００４７】
（本発明の他の実施の形態）
本発明は複数の機器から構成されるシステムに適用しても１つの機器からなる装置に適用しても良い。
【００４８】
また、上述した実施の形態の機能を実現するように各種のデバイスを動作させるように、上記各種デバイスと接続された装置あるいはシステム内のコンピュータに対し、上記実施の形態の機能を実現するためのソフトウェアのプログラムコードを供給し、そのシステムあるいは装置のコンピュータ（ＣＰＵあるいはＭＰＵ）に格納されたプログラムに従って上記各種デバイスを動作させることによって実施したものも、本発明の範疇に含まれる。
【００４９】
また、この場合、上記ソフトウェアのプログラムコード自体が上述した実施の形態の機能を実現することになり、そのプログラムコード自体、およびそのプログラムコードをコンピュータに供給するための手段、例えばかかるプログラムコードを格納した記憶媒体は本発明を構成する。かかるプログラムコードを記憶する記憶媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。
【００５０】
また、コンピュータが供給されたプログラムコードを実行することにより、上述の実施の形態で説明した機能が実現されるだけでなく、そのプログラムコードがコンピュータにおいて稼働しているＯＳ（オペレーティングシステム）あるいは他のアプリケーションソフト等の共同して上述の実施の形態で示した機能が実現される場合にもかかるプログラムコードは本発明の実施の形態に含まれることは言うまでもない。
【００５１】
さらに、供給されたプログラムコードがコンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合にも本発明に含まれる。
【００５２】
本発明の実施態様の例を以下に列挙する。
〔実施態様１〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出手段と、上記特定領域抽出手段によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成手段と、上記撮影画像生成手段が上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御手段とを有することを特徴とする撮像装置。
【００５３】
〔実施態様２〕 上記特定領域抽出手段は、撮影画像における画素値を判定し、上記照明手段から放射された光が当たる主被写体及びその付近は画素値が比較的高いと考えて主被写体領域と判定するとともに、上記照明手段から放射された光が届かないことにより画素値が低い領域を背景領域と判定して、上記特定領域の情報を抽出することを特徴とする実施態様１に記載の撮像装置。
【００５４】
〔実施態様３〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置を用いて行う撮像方法であって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出処理と、上記特定領域抽出処理によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成処理と、上記撮影画像生成処理において上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御処理とを行うことを特徴とする撮像方法。
【００５５】
〔実施態様４〕 上記特定領域抽出処理においては、撮影画像における画素値を判定し、上記照明手段から放射された光が当たる主被写体及びその付近は画素値が比較的高いと考えて主被写体領域と判定するとともに、上記照明手段から放射された光が届かないことにより画素値が低い領域を背景領域と判定して、特定領域の情報を抽出することを特徴とする実施態様３に記載の撮像方法。
【００５６】
〔実施態様５〕 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置を用いて行う撮像方法を実行するためのプログラムであって、上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出処理と、上記特定領域抽出処理によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成処理と、上記撮影画像生成処理において上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御処理とをコンピュータに実行させることを特徴とするコンピュータプログラム。
【００５７】
〔実施態様６〕 上記コンピュータプログラムを読み取り可能に記録したことを特徴とするコンピュータ読み取り可能なプログラム。
【００５８】
【発明の効果】
以上説明してきたように、本発明によれば、夜景をバックに人物等の被写体を撮影する際に、照明手段から放射された光を用いた１回目の露光と、長秒時にわたる２回目及び３回目の露光とを行い、上記３回目の露光が終了した後で画像合成を行う際に、それぞれの露光を行って得た画像の境界領域について所定の処理を行うようにしたので、上記３回の露光を行っている間に被写体が動いた場合においても、複数枚の画像を合成した画像の境界領域に異常が発生することを良好に回避することができ、夜景を背景として被写体を撮影する際に上記被写体が多少動いた場合においても画像ぶれが発生するのを確実に防止することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態を示し、本発明に関わる電子スチルカメラのブロック図である。
【図２】本実施の形態に関わる撮影手順を説明するフローチャートである。
【図３】本実施の形態に関わる撮影手順を説明するフローチャートである。
【図４】１回目の露光で得られる被写体領域と、背景領域を示した例を示す図である。
【図５】１回目の露光で得られる画像に判定領域を加味した例を示す図である。
【図６】２回目の露光で得られる画像を示した例を示す図である。
【図７】２回目の露光で得られる画像に判定領域を加味した例を示した図である。
【図８】３回目の露光で得られる画像を示した例を示した図である。
【図９】３回目の露光で得られる画像に判定領域を加味した例を示した図である。
【図１０】１回目の露光で得られた画像に、領域境界処理をする際の位置とその範囲を示した例を示した図である。
【図１１】２回目の露光で得られた画像に、領域境界処理をする際の位置を示した例を示した図である。
【図１２】３回目の露光で得られた画像に、領域境界処理をする際の位置を示した例を示した図である。
【符号の説明】
１ 撮影レンズ
２ シャッタ
３ 撮像素子
４ プロセス回路
５ A／D変換器
６ 画像圧縮回路
７ 切り替えスイッチ
８ マイク
９ ノイズ低減回路
１０ A/D変換器
１１ 音声圧縮回路
１２ 切り替えスイッチ
１３ バッファメモリ
１４ メモリ制御回路
１５ メモリカード
１６ インターフェース（I／F）
１７ ハードディスク
１８ コネクタ
１９ 管理データ領域
２０ 情報データ領域
２１ インターフェース（I／F）
２２ コネクタ
２３ ライトプロテクト
２４ 管理データ領域
２５ 情報データ領域
２６ インターフェース（I/F）
２７ コネクタ
２８ シャッタ駆動回路
２９ レンズ駆動回路
３０ 測距回路
３１ 測光回路
３２ フラッシュ
３３ 温度検出回路
３４ 電源制御回路
３５ 電源部
３６ 表示装置
３７ 制御用メモリ
３８ スイッチ群
３９ システム制御回路
４０ メインスイッチ
４１ レリーズボタン
４２ 測距測光スイッチ
４３ 記録スイッチ
４４ モードスイッチ
４５ 画像モードスイッチ
４６ 消去モードスイッチ
４７ 消去スイッチ
４８ 音声記録メインスイッチ
４９ 音声記録実行スイッチ
５０ コネクタ
Claims (1)
- 撮影対象からの光を光電変換して画像情報を生成する撮像素子と、上記撮影対象を照明する照明手段とを備えた撮像装置であって、
上記照明手段で上記撮影対象を照明して所定時間露光して上記撮像素子から得られる第１の画像情報と、上記照明手段による照明を行わずに所定時間露光して上記撮像素子から得られる第２の画像情報とから特定領域の情報を抽出する特定領域抽出手段と、
上記特定領域抽出手段によって抽出された特定領域の情報に基づいて、上記第１の画像の主被写体領域と、上記第２の画像における少なくとも１つ以上の背景領域とで撮影画像を生成する撮影画像生成手段と、
上記撮影画像生成手段が上記撮影画像を生成する際に、上記主被写体領域と上記背景領域との境界領域に所定の処理を施すための境界領域制御手段とを有することを特徴とする撮像装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002361274A JP2004194106A (ja) | 2002-12-12 | 2002-12-12 | 撮像装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002361274A JP2004194106A (ja) | 2002-12-12 | 2002-12-12 | 撮像装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2004194106A true JP2004194106A (ja) | 2004-07-08 |
Family
ID=32760092
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002361274A Pending JP2004194106A (ja) | 2002-12-12 | 2002-12-12 | 撮像装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2004194106A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007032156A1 (ja) | 2005-09-16 | 2007-03-22 | Fujitsu Limited | 画像処理方法及び画像処理装置 |
| JP2009512038A (ja) * | 2005-10-12 | 2009-03-19 | アクティブ オプティクス ピーティーワイ リミテッド | 複数の画像フレームに基づいて結合画像を生成する方法 |
| US7940325B2 (en) | 2007-08-23 | 2011-05-10 | Samsung Electronics Co., Ltd | Apparatus and method of capturing images having optimized quality under night scene conditions |
| JP2015040972A (ja) * | 2013-08-21 | 2015-03-02 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 |
| KR20150021899A (ko) * | 2013-08-21 | 2015-03-03 | 캐논 가부시끼가이샤 | 촬상장치 및 그 제어 방법 |
-
2002
- 2002-12-12 JP JP2002361274A patent/JP2004194106A/ja active Pending
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007032156A1 (ja) | 2005-09-16 | 2007-03-22 | Fujitsu Limited | 画像処理方法及び画像処理装置 |
| US8340464B2 (en) | 2005-09-16 | 2012-12-25 | Fujitsu Limited | Image processing method and image processing device |
| JP2009512038A (ja) * | 2005-10-12 | 2009-03-19 | アクティブ オプティクス ピーティーワイ リミテッド | 複数の画像フレームに基づいて結合画像を生成する方法 |
| US7940325B2 (en) | 2007-08-23 | 2011-05-10 | Samsung Electronics Co., Ltd | Apparatus and method of capturing images having optimized quality under night scene conditions |
| JP2015040972A (ja) * | 2013-08-21 | 2015-03-02 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム、並びに記憶媒体 |
| KR20150021899A (ko) * | 2013-08-21 | 2015-03-03 | 캐논 가부시끼가이샤 | 촬상장치 및 그 제어 방법 |
| KR101670222B1 (ko) | 2013-08-21 | 2016-10-28 | 캐논 가부시끼가이샤 | 촬상장치 및 그 제어 방법 |
| US10313604B2 (en) | 2013-08-21 | 2019-06-04 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
| US10506173B2 (en) | 2013-08-21 | 2019-12-10 | Canon Kabushiki Kaisha | Image capturing apparatus and control method thereof |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4569389B2 (ja) | 撮像装置、画像処理方法及びプログラム | |
| JP4999306B2 (ja) | 撮像装置、撮影方法及びプログラム | |
| JP4350616B2 (ja) | 撮像装置及びその制御方法 | |
| JP2007281547A (ja) | 撮像装置，及び撮像方法 | |
| KR100739585B1 (ko) | 촬상장치 및 그 제어방법 | |
| JP2006197243A (ja) | 撮像装置及び撮像方法及びプログラム及び記憶媒体 | |
| JP2007082049A (ja) | 撮像装置及びそのプログラム | |
| JP2009077272A (ja) | 撮像装置及びそのプログラム | |
| JP4911645B2 (ja) | ストロボを有するカメラ | |
| JP4822004B2 (ja) | 撮影装置及びそのプログラム | |
| JP5246590B2 (ja) | 撮像装置、画像生成方法及びプログラム | |
| JP5298396B2 (ja) | 電子カメラおよび画像処理システム | |
| JP2001245249A (ja) | デジタルカメラ | |
| JP2005086488A (ja) | 電子スチルカメラおよび画像処理プログラム | |
| JP2004194106A (ja) | 撮像装置 | |
| JP5320795B2 (ja) | 撮像装置 | |
| JP2006253810A (ja) | 撮像装置 | |
| JP2007228532A (ja) | 撮像装置及びそのプログラム | |
| JP2010081430A (ja) | 撮像装置及びその制御方法及びプログラム | |
| JP4359074B2 (ja) | ストロボを有するカメラ | |
| JP2007173985A (ja) | 撮像装置及び撮像方法及びプログラム及び記憶媒体 | |
| JP4912680B2 (ja) | カメラシステム、カメラおよび外部フラッシュ | |
| JP2007336355A (ja) | 撮影装置 | |
| JP2006295708A (ja) | 撮像装置及びその制御方法 | |
| JP2001223977A (ja) | デジタルカメラ |