JP6503907B2 - 撮影装置、撮影制御装置、撮影制御方法、及び撮影制御プログラム - Google Patents

Description

本発明は、撮影装置、撮影制御装置、撮影制御方法、及び撮影制御プログラムに関する。

従来、画像合成に用いる複数の画像を撮影（撮像）する撮影装置が提案されている。例えば、特許文献１に開示された画像入力装置（つまり、撮影装置）では、撮像素子（つまり、イメージセンサ）に対する光軸を水平および垂直方向にずらして取り込むことによって、画像合成に用いる複数の画像が撮影されている。具体的には、レンズ制御部による光軸移動制御により、原点画像と水平方向１／２画素ずらし画像と垂直方向１／２画素ずらし画像と水平・垂直方向１／２画素ずらし画像との４枚の画像信号が、メモリ部に順次格納される。そして、格納が完了すると、レンズ部はレンズ制御部の制御に従い再び原点に戻る。そして、原点位置の画像信号が再び演算部に送出される。演算部では所定の評価関数に従い、再入力された原点での画像信号とメモリ部に格納された原点での画像信号との差分評価を行い、この評価結果を無効判定部に出力する。無効判定部は、入力された評価結果である差分絶対値和とあらかじめ決められたしきい値とを比較し、差分絶対値和が上記しきい値よりも大きい場合に格納された４枚分の画像信号からなる高解像度静止画像信号を無効と判定し、全体制御部に通知する。全体制御部は、無効判定部から無効通知を受けると、格納済みの高解像度の静止画像が無効であることを外部に通知するとともに、再入力のための制御動作を実行する。

特開平８−２６５５２２号公報

しかしながら、上記の特許文献１の画像入力装置では、レンズ部が最初に原点に存在するときの原点画像と画素ずらしによって再びレンズ部が原点に存在するときの原点画像とを用いて、無効判定を行っているので、「無効である」と判定された場合、再度５枚の画像を撮影することになる。すなわち、「５枚の撮影」を１セットとして「リトライ処理」が実行されるので、結果として、高解像度の合成画像が得られるまでに要する撮影回数が増加してしまう可能性がある。このため、画像入力装置における演算量が増大し、また撮影者にとってはシャッターチャンスを逃すことにもなりかねない。

また、原点画像以外の画像（画素ずらし画像）において「撮影条件」が変動した場合（撮影対象物が動いてしまった場合、カメラに振動が加わった場合、障害物が発生した場合、照度変化（フリッカー）が発生した場合など）であっても、特許文献１の画像入力装置では、「無効である」とは判定されず（撮影条件の変動が「無効である」かの判定に考慮されず）、結果として、合成画像の画質が悪くなる可能性がある。

本発明は、以上の問題意識に基づいてなされたものであり、撮影回数を極力抑えつつ高画質の合成画像を生成することができる、制御装置、撮影装置、制御方法、及び制御プログラムを得ることを目的とする。

本発明の撮影装置は、その１つの態様では、光学要素を含む撮影光学系により形成された被写体像を電気的な画素信号に変換するイメージセンサと、画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、前記イメージセンサと前記光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる撮影制御部と、を具備し、前記撮影制御部は、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する。

前記撮影制御部は、前記各相対位置において、前記取得画像が前記使用適格要件を満たすまで再撮影を繰り返させ、前記使用適格要件が満たされた場合、前記使用適格要件を満たした前記取得画像を前記使用画像セットの構成画像として保持すると共に、次の前記相対位置に前記イメージセンサと前記光学要素の一方又は両方を移動させることができる。

前記使用適格判定パラメータは、判定対象画像領域におけるＲＧＢを含み、前記撮影制御部は、前記基準画像の前記判定対象画像領域におけるＲＧＢ値と前記比較画像の前記判定対象画像領域におけるＲＧＢ値との差が判定閾値以上である場合、前記使用適格要件を満たさないと判定することができる。

前記使用適格判定パラメータは、判定対象画像領域におけるＲＧＢを含み、前記撮影制御部は、前記基準画像の前記判定対象画像領域における輝度ヒストグラムと前記比較画像の前記判定対象画像領域における輝度ヒストグラムとの第１差値が第１判定閾値より小さいこと、及び、前記基準画像の前記判定対象画像領域におけるＲＧＢ値と前記比較画像の前記判定対象画像領域におけるＲＧＢ値との第２差値が第２判定閾値より小さいことの両方が満たされた場合、前記使用適格要件を満たすと判定し、前記第１差値が前記第１判定閾値以上であること、及び、前記第２差値が前記第２判定閾値以上であることの少なくとも一方が満たされた場合、前記使用適格要件を満たさないと判定することができる。

前記撮影制御部は、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、複数の判定対象画像領域のそれぞれについて、前記基準画像の使用適格判定パラメータの値と前記比較画像の使用適格判定パラメータの値との差を算出し、前記算出した差が第３判定閾値以上である前記判定対象画像領域の総和領域の、前記比較画像の全画像領域に対する割合を算出し、前記算出した割合が第４判定閾値より小さい場合、前記使用適格要件を満たすと判定し、前記算出した割合が前記第４判定閾値以上である場合、前記使用適格要件を満たさないと判定することができる。

本発明の撮影装置は、前記使用画像セットの画像が得られた段階で、前記得られた使用画像セットを用いて合成画像を生成する合成画像生成部をさらに具備し、前記合成画像生成部は、前記使用適格要件を満たした場合、前記算出された差が前記第３判定閾値以上である前記判定対象画像領域に対応する、前記合成画像における部分領域の画像を、前記基準画像における対応部分領域の画像で置き換えることができる。

本発明の撮影制御装置は、その１つの態様では、画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる、撮影制御装置であって、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御部を具備する。

本発明の撮影制御方法は、その１つの態様では、画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる、撮影制御方法であって、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御ステップを具備する。

本発明の撮影制御プログラムは、その１つの態様では、画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる撮影制御装置又は撮影制御方法の撮影制御プログラムであって、撮影制御部に、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御ステップを実行させる。

本発明によれば、撮影回数を極力抑えつつ高画質の合成画像を生成することができる、撮影装置、撮影制御装置、撮影制御方法、及び撮影制御プログラムを得られる。

第１実施形態のデジタルカメラ（撮影装置）の要部構成を示すブロック図である。 像振れ補正装置の要部構成を示すブロック図である。 像振れ補正装置の構成を示す側面図である。 第１実施形態のＤＳＰ（制御装置）の内部構成を示す機能ブロック図である。 図５（Ａ）〜図５（Ｄ）は本実施形態の「ＲＲＳ撮影モード」の一例を示す概念図である。 第１実施形態のデジタルカメラの処理動作を示すフローチャートである。 図６に示したフローチャート中の使用適格要件の判定処理を示すフローチャートである。 第３実施形態のＤＳＰ（制御装置）の内部構成を示す機能ブロック図である。 第３実施形態の表示画像の説明に供する図である 第３実施形態の表示画像の説明に供する図（変形例１）である。 第３実施形態の表示画像の説明に供する図（変形例２）である。

以下に、本発明の開示する制御装置、撮影装置、制御方法、及び制御プログラムの実施形態を図面に基づいて詳細に説明する。なお、この実施形態により本発明の開示する制御装置、撮影装置、制御方法、及び制御プログラムが限定されるものではない。また、実施形態において同一の機能を有する構成には同一の符号を付し、重複する説明は省略される。

≪第１実施形態≫
［撮影装置の構成例］
図１は、第１実施形態の撮影装置の要部構成を示す図である。図２は、像振れ補正装置の要部構成を示すブロック図である。図３は、像振れ補正装置の構成を示す側面図である。

図１に示すように、デジタルカメラ１０は、ボディ本体２０と、このボディ本体２０に着脱可能（レンズ交換可能）な撮影レンズ３０とを備えている。撮影レンズ３０は、被写体側（図１中の左側）から像面側（図１中の右側）に向かって順に、撮影レンズ群（撮影光学系、移動部材、振れ補正部材）３１と、絞り（撮影光学系）３２とを備えている。ボディ本体２０は、被写体側（図１中の左側）から像面側（図１中の右側）に向かって順に、シャッタ（撮影光学系）２１と、イメージセンサ（撮像部、移動部材、振れ補正部材）２２とを備えている。またボディ本体２０は、撮影レンズ３０への装着状態で絞り３２とシャッタ２１を駆動制御する絞り／シャッタ駆動回路２３を備えている。撮影レンズ群３１から入射し、絞り３２とシャッタ２１を通った被写体光束による被写体像が、イメージセンサ２２の受光面上に形成される。イメージセンサ２２の受光面上に形成された被写体像は、マトリックス状に配置された検出色の異なる多数の画素によって、電気的な画素信号に変換され、画像データ（時系列に撮影した複数の画像データ）としてＤＳＰ（制御装置）４０に出力される。ＤＳＰ４０は、イメージセンサ２２から入力した画像データに所定の画像処理を施して、これをＬＣＤ２４に表示し、画像メモリ２５に記憶する。なお、図１では、撮影レンズ群３１が単レンズからなるように描いているが、実際の撮影レンズ群３１は、例えば、固定レンズ、変倍時に移動する変倍レンズ、フォーカシング時に移動するフォーカシングレンズなどの複数枚のレンズを有している。

図示は省略しているが、イメージセンサ２２は、パッケージと、このパッケージに収納される固体撮像素子チップと、この固体撮像素子チップを密封保護するようにパッケージに固定される蓋部材とを含む複数の構成要素からなる。本明細書において、「イメージセンサ２２を駆動する」とは、「イメージセンサ２２の複数の構成要素のうち被写体光束が通過する少なくとも一部を駆動する」ことを意味する。

撮影レンズ３０は、撮影レンズ群３１の解像力（ＭＴＦ）情報や絞り３２の開口径（絞り値）情報などの各種情報を記憶した通信用メモリ３３を搭載している。撮影レンズ３０をボディ本体２０に装着した状態では、通信用メモリ３３が記憶した各種情報がＤＳＰ４０に読み込まれる。

ボディ本体２０は、ＤＳＰ４０に接続させて、撮影操作スイッチ２６を備えている。撮影操作スイッチ２６は、電源スイッチやレリーズスイッチなどの各種スイッチからなる。

ボディ本体２０は、ＤＳＰ４０に接続させて、ジャイロセンサ（振れ検出部）２７を備えている。ジャイロセンサ２７は、ボディ本体２０に加わる移動角速度（Ｘ軸とＹ軸周り）を検出することで、該ボディ本体２０の光軸直交平面内の振れを示す振れ検出信号を検出する。

図１〜図３に示すように、イメージセンサ２２は、撮影光学系の光軸Ｚと直交するＸ軸方向とＹ軸方向（直交二方向）に移動可能に像振れ補正装置５０に搭載されている。像振れ補正装置５０は、ボディ本体２０のシャーシなどの構造物に固定される固定支持基板５１と、イメージセンサ２２を固定した、固定支持基板５１に対してスライド可能な可動ステージ５２と、固定支持基板５１の可動ステージ５２との対向面に固定した磁石Ｍ１、Ｍ２、Ｍ３と、固定支持基板５１に可動ステージ５２を挟んで各磁石Ｍ１、Ｍ２、Ｍ３と対向させて固定した、各磁石Ｍ１、Ｍ２、Ｍ３との間に磁気回路を構成する磁性体からなるヨークＹ１、Ｙ２、Ｙ３と、可動ステージ５２に固定した、前記磁気回路の磁界内において電流を受けることにより駆動力を発生する駆動用コイルＣ１、Ｃ２、Ｃ３を有している。駆動用コイルＣ１、Ｃ２、Ｃ３に交流駆動信号（交流電圧）を流す（印加する）ことにより、固定支持基板５１に対して可動ステージ５２（イメージセンサ２２）が光軸直交平面内で駆動するようになっている。駆動用コイルＣ１、Ｃ２、Ｃ３に流す交流駆動信号は、ＤＳＰ４０による制御の下、イメージセンサ駆動回路６０によって生成される。

本実施形態では、磁石Ｍ１、ヨークＹ１及び駆動用コイルＣ１からなる磁気駆動手段と、磁石Ｍ２、ヨークＹ２及び駆動用コイルＣ２からなる磁気駆動手段（２組の磁気駆動手段）とがイメージセンサ２２の長手方向（水平方向、Ｘ軸方向）に所定間隔で配置され、磁石Ｍ３、ヨークＹ３及び駆動用コイルＣ３からなる磁気駆動手段（１組の磁気駆動手段）がイメージセンサ２２の長手方向と直交する短手方向（鉛直（垂直）方向、Ｙ軸方向）に配置されている。

さらに固定支持基板５１には、各駆動用コイルＣ１、Ｃ２、Ｃ３の近傍（中央空間部）に、磁石Ｍ１、Ｍ２、Ｍ３の磁力を検出して可動ステージ５２（イメージセンサ２２）の光軸直交平面内の位置を示すホール出力信号（位置検出信号）を出力（検出）するホールセンサ（位置検出部）Ｈ１、Ｈ２、Ｈ３が配置されている。ホールセンサＨ１、Ｈ２により可動ステージ５２（イメージセンサ２２）のＹ軸方向位置及び傾き（回転）が検出され、ホールセンサＨ３により可動ステージ５２（イメージセンサ２２）のＸ軸方向位置が検出される。ＤＳＰ４０は、イメージセンサ駆動回路６０を介して、ジャイロセンサ２７が検出したボディ本体２０の光軸直交平面内の振れを示す振れ検出信号と、ホールセンサＨ１、Ｈ２、Ｈ３が出力したイメージセンサ２２の光軸直交平面内の位置を示すホール出力信号とに基づいて、像振れ補正装置５０によってイメージセンサ２２を光軸直交平面内で駆動する。これにより、イメージセンサ２２上への被写体像の結像位置を変位させて、手振れに起因する像振れを補正することができる。

本実施形態のデジタルカメラ１０は、像振れ補正装置５０を利用して、イメージセンサ２２（イメージセンサユニット）を撮影光学系の光軸Ｚと直交する平面内で微細に移動させながら時系列に複数回の撮影を行い、その画像を１枚に合成（画像の単純な加算ではなくデータ上の画像処理による特殊演算を行っての合成）することで、超高精細（高画質、高精度）な画像を生成する撮影モード（マルチショット合成モード）を搭載している。以下ではこの撮影モードを「ＲＲＳ（リアル・レゾリューション・システム）撮影モード」と呼ぶ。ボディ本体２０は、図１に示すように、ＤＳＰ４０に接続させて、「ＲＲＳ撮影モード」を行うか否か、更にはその詳細を設定するためのＲＲＳ撮影モード設定部２８を備えている。

「ＲＲＳ撮影モード（マルチショット合成モード）」では、１画素あたり１つの色情報のみを取得する従来のベイヤ方式と異なり、１画素毎にＲＧＢ各色の情報を得ることで、細部までのディティールや色再現に優れた極めて高精細な画像を描き出すことができる。また、モアレや偽色が発生することが無く、ノイズを低減する効果が得られる。

図４は、第１実施形態のＤＳＰ（制御装置）４０の内部構成を示す機能ブロック図である。図４において、ＤＳＰ（制御装置）４０は、撮影制御部４０Ａと、合成画像生成部４０Ｂとを含んでいる。

撮影制御部４０Ａは、マルチショット画像合成に用いる複数の撮影画像から成る「使用画像セット」を撮影する「撮影処理」を制御している。この「撮影処理」では、イメージセンサ２２と撮影光学系に含まれる光学要素（例えば、撮影レンズ群３１の少なくとも一部）との間の「基準位置」から光軸方向と異なる方向（例えば、光軸方向と直交する方向）のそれぞれ異なる複数の「相対位置」に、イメージセンサ２２及び上記の光学要素（例えば、撮影レンズ群３１）を順次相対移動させている。

図５（Ａ）〜図５（Ｄ）は本実施形態の「ＲＲＳ撮影モード（マルチショット合成モード）」の一例を示す概念図である。同図において、イメージセンサ２２は、受光面にマトリックス状に所定の画素ピッチで配置された多数の画素を備え、各画素の前面にベイヤ配列のカラーフィルタＲ、Ｇ（Ｇｒ、Ｇｂ）、Ｂのいずれかが配置されている。特に、ベイヤ配列のカラーフィルタは、「基本単位」に１つのＲ画素と２つのＧ画素と１つのＢ画素とを含んでいる。各画素は、前面のカラーフィルタＲ、Ｇ（Ｇｒ、Ｇｂ）、Ｂを透過して入射した被写体光線の色を検出、つまり、色成分（色帯域）の光を光電変換し、その強さ（輝度）に応じた電荷を蓄積する。より具体的に、図５（Ａ）の基準位置で１枚の画像を撮影し、そこからイメージセンサ２２を１画素ピッチだけ下方に移動（相対移動）させた図５（Ｂ）の位置で１枚の画像を撮影し、そこからイメージセンサ２２を１画素ピッチだけ右方に移動させた図５（Ｃ）の位置で１枚の画像を撮影し、そこからイメージセンサ２２を１画素ピッチだけ上方に移動させた図５（Ｄ）の位置で１枚の画像を撮影し、最後に図５（Ａ）の基準位置に戻る。すなわち、本明細書では、例えば、図５（Ａ）に示した位置を「基準位置」と呼び、図５（Ｂ）〜（Ｄ）に示した位置を「相対位置」と呼んでいる。そして、「基準位置」及び複数の「相対位置」は、上記の「基本単位」の４つの画素（つまり、１つのＲ画素、２つのＧ画素、及び１つのＢ画素）にそれぞれ対応している。このように、イメージセンサ２２を光軸直交平面内で１画素ピッチの正方形を描くように駆動しながら時系列に撮影した４枚の画像（ＲＡＷ画像データ）が「使用画像セット」として、ＤＳＰ（制御装置）４０に入力される。

そして、撮影制御部４０Ａは、各相対位置において撮影された画像をイメージセンサ２２から取得する度に、当該取得画像が「使用画像セット」の一構成画像としての「使用適格要件」を満たすか否かを判定する。この「使用適格要件」については後に詳しく説明する。

そして、撮影制御部４０Ａは、各相対位置において、取得画像が使用適格要件を満たすまで「再撮影」を繰り返させ、使用適格要件が満たされた場合、使用適格要件を満たした取得画像を使用画像セットの構成画像として保持すると共に、次の相対位置にイメージセンサ２２及び上記の光学要素を相対移動させる。なお、撮影制御部４０Ａは、「再撮影」の回数が所定回数に到達した場合には、例えば、実行中のマルチショット合成処理のフローを停止し、そのフローを最初から自動的に実行するようにしてもよいし、又は、そのフローの再実行をするか否かをユーザに問い合わせる表示をＬＣＤ２４に表示させてもよい。すなわち、「再撮影」の回数に上限値が設定されていてもよい。

例えば、撮影制御部４０Ａは、基準位置における取得画像又は複数の相対位置のうち現時点の相対位置よりも前の相対位置における取得画像を「基準画像」とし、現時点の相対位置における取得画像を比較画像とする。すなわち、例えば、現時点が図５（Ｃ）で示した相対位置の場合、図５（Ａ）に示した基準位置における取得画像、又は、図５（Ｂ）で示した相対位置における取得画像を「基準画像」とし、図５（Ｃ）で示した相対位置における取得画像を「比較画像」とする。そして、撮影制御部４０Ａは、基準画像の「使用適格判定パラメータ」の値と比較画像の「使用適格判定パラメータ」の値との差のレベルに基づいて、現時点の相対位置における取得画像が使用適格要件を満たすか否かを判定する。「使用適格判定パラメータ」は、例えば、判定対象画像領域における輝度ヒストグラム、及び、判定対象画像領域におけるＲＧＢ値の少なくとも一方を含む。

合成画像生成部４０Ｂは、撮影制御部４０Ａにおいて使用画像セットを構成するすべての構成画像が得られた段階で、得られた使用画像セットを用いて合成画像を生成する。

ここで、上記の「使用適格要件」は、例えば、基準画像の判定対象画像領域（以下では、「第１判定対象画像領域」と呼ぶ）における輝度ヒストグラムと比較画像の第１判定対象画像領域における輝度ヒストグラムとの「第１差値」が「第１判定閾値」より小さいこと、及び、基準画像の判定対象画像領域（以下では、「第２判定対象画像領域」と呼ぶ）におけるＲＧＢ値と比較画像の第２判定対象画像領域におけるＲＧＢ値との「第２差値」が「第２判定閾値」より小さいことの両方が満たされることである。すなわち、「第１差値」が「第１判定閾値」以上であること、及び、「第２差値」が「第２判定閾値」以上であることの少なくとも一方が満たされた場合、使用適格要件が満たされないと判定される。上記の「第１判定対象画像領域」及び「第２判定対象画像領域」は、それぞれ、基準画像と比較画像との比較に用いられる単位領域であり、基準画像及び比較画像の中の各「１画素」であってもよいし、又は、複数画素を含む各「画素ブロック」であってもよい。

［撮影装置の動作例］
以上の構成を有するデジタルカメラ（撮影装置）１０の処理動作の一例について説明する。図６は、第１実施形態のデジタルカメラの処理動作を示すフローチャートである。図７は、図６に示したフローチャート中の使用適格要件の判定処理を示すフローチャートである。図６及び図７に示したフローチャートは、特に、ＤＳＰ（制御装置）４０による処理動作が示されている。このＤＳＰ（制御装置）４０による処理動作は、メモリに記憶されている制御プログラムがＤＳＰ（制御装置）４０に読み出されることにより実現される。

ステップＳ１では、ＤＳＰ（制御装置）４０は、デジタルカメラ（撮影装置）１０（特に、上記の撮影光学系及びイメージセンサ２２）に対して、上記の「基準位置」（例えば、図５（Ａ）に示した位置）で撮影させる。そして、ＤＳＰ（制御装置）４０は、上記の「基準位置」で撮影された画像を取得する。

ステップＳ２では、ＤＳＰ（制御装置）４０は、イメージセンサ２２及び上記の光学要素（例えば、撮影レンズ群３１の少なくとも一部）を、次の相対位置（例えば、図５（Ｂ）に示した位置）へ相対移動させる。

ステップＳ３では、ＤＳＰ（制御装置）４０は、デジタルカメラ（撮影装置）１０（特に、上記の撮影光学系及びイメージセンサ２２）に対して、現在の相対位置（例えば、図５（Ｂ）に示した位置）で撮影させる。そして、ＤＳＰ（制御装置）４０は、現在の相対位置（例えば、図５（Ｂ）に示した位置）で撮影された画像を取得する。

ステップＳ４では、ＤＳＰ（制御装置）４０は、「使用適格要件の判定処理」、つまり、使用適格要件が満たされるか否かについての判定処理を実行する。使用適格要件が満たされない場合（ステップＳ４：ＮＯ）、ステップＳ５で、ＤＳＰ（制御装置）４０は、デジタルカメラ（撮影装置）１０（特に、上記の撮影光学系及びイメージセンサ２２）に対して、現在の相対位置での「再撮影」をさせる。すなわち、ＤＳＰ（制御装置）４０は、デジタルカメラ（撮影装置）１０（特に、上記の撮影光学系及びイメージセンサ２２）に対して、「リトライ処理」を実行させる。一方、使用適格要件が満たされた場合（ステップＳ４：ＹＥＳ）、ステップＳ６で、ＤＳＰ（制御装置）４０は、使用適格要件を満たした取得画像を使用画像セットの構成画像として保持する。

ここで、「使用適格要件の判定処理」の詳細について、図７を参照して説明する。

ステップＳ１１では、ＤＳＰ（制御装置）４０は、基準画像の第１判定対象画像領域における輝度ヒストグラムと、比較画像の第１判定対象画像領域における輝度ヒストグラムとを、それぞれ算出する。

ステップＳ１２では、ＤＳＰ（制御装置）４０は、基準画像の第１判定対象画像領域における輝度ヒストグラムと、比較画像の第１判定対象画像領域における輝度ヒストグラムとの差（つまり、上記の「第１差値」）を算出する。

ステップＳ１３では、ＤＳＰ（制御装置）４０は、算出した「第１差値」が「第１判定閾値」よりも小さいか否かを判定する。

「第１差値」が「第１判定閾値」よりも小さい場合（ステップＳ１３：ＹＥＳ）、ステップＳ１４で、ＤＳＰ（制御装置）４０は、基準画像の第２判定対象画像領域におけるＲＧＢ値と、比較画像の第２判定対象画像領域におけるＲＧＢ値とを、それぞれ算出する。

ステップＳ１５では、ＤＳＰ（制御装置）４０は、基準画像の第２判定対象画像領域におけるＲＧＢ値と、比較画像の第２判定対象画像領域におけるＲＧＢ値との差（つまり、上記の「第２差値」）を算出する。

ステップＳ１６では、ＤＳＰ（制御装置）４０は、算出した「第２差値」が「第２判定閾値」よりも小さいか否かを判定する。

算出した「第２差値」が「第２判定閾値」よりも小さい場合（ステップＳ１６：ＹＥＳ）、ＤＳＰ（制御装置）４０は、処理ステップを図６のステップＳ６へ進ませて、使用適格要件を満たした取得画像を使用画像セットの構成画像として保持する。

一方、算出した「第２差値」が「第２判定閾値」以上である場合（ステップＳ１６：ＮＯ）、ＤＳＰ（制御装置）４０は、処理ステップを図６のステップＳ５へ進ませて、現在の相対位置での「再撮影」を実行する。また、算出した「第１差値」が「第１判定閾値」以上である場合（ステップＳ１３：ＮＯ）も、ＤＳＰ（制御装置）４０は、処理ステップを図６のステップＳ５へ進ませて、現在の相対位置での「再撮影」を実行する。

図６の説明に戻り、ステップＳ７では、ＤＳＰ（制御装置）４０は、使用画像セットのすべての構成画像が揃ったか否かを判定する。

使用画像セットのすべての構成画像が未だ揃っていない場合（ステップＳ７：ＮＯ）、ステップＳ２に戻り、ＤＳＰ（制御装置）４０は、イメージセンサ２２及び上記の光学要素（例えば、撮影レンズ群３１）を、次の相対位置（例えば、図５（Ｃ）に示した位置）へ相対移動させる。ＤＳＰ（制御装置）４０は、使用画像セットのすべての構成画像が揃うまで（ステップＳ７：ＮＯ）、ステップＳ２〜ステップＳ７の処理ループを繰り返させる。

使用画像セットのすべての構成画像が揃った場合（ステップＳ７：ＹＥＳ）、ＤＳＰ（制御装置）４０は、得られた使用画像セットを用いて、画像合成処理を実行、つまり、合成画像を生成する。

以上のように第１実施形態によれば、ＤＳＰ（制御装置）４０において、撮影制御部４０Ａは、各相対位置において撮影された画像を取得する度に、当該取得画像が「使用画像セット」の一構成画像としての使用適格要件を満たすか否かを判定する。

このＤＳＰ（制御装置）４０の構成により、各相対位置で撮影された１枚の画像毎に、つまり、「１枚の撮影」単位で、「リトライ処理」、つまり「再撮影」を実行させることができる。これにより、「５枚の撮影」を１セットとしてリトライ処理を実行していた従来技術と比べて、使用画像セットのすべての構成画像が揃うまでに行われる撮影回数を低減することができる。また、各相対位置で撮影された１枚の画像毎に使用適格要件が満たされるか否かを判定するので、すべての相対位置で撮影された画像が使用適格要件の判定処理の対象となる。これにより、使用適格要件にマッチしない取得画像を画像合成処理の対象から確実に除外することができるので、結果として、合成画像の画質劣化を防止することができる。

なお、以上の説明では、「使用適格要件」を、基準画像の第１判定対象画像領域における輝度ヒストグラムと比較画像の第１判定対象画像領域における輝度ヒストグラムとの「第１差値」が「第１判定閾値」より小さいこと、及び、基準画像の第２判定対象画像領域におけるＲＧＢ値と比較画像の第２判定対象画像領域におけるＲＧＢ値との「第２差値」が「第２判定閾値」より小さいことの両方が満たされることであるものとして説明を行ったが、これに限定されるものではない。例えば、「使用適格要件」は、基準画像の第１判定対象画像領域における輝度ヒストグラムと比較画像の第１判定対象画像領域における輝度ヒストグラムとの「第１差値」が「第１判定閾値」より小さいことだけであってもよいし、又は、基準画像の第２判定対象画像領域におけるＲＧＢ値と比較画像の第２判定対象画像領域におけるＲＧＢ値との「第２差値」が「第２判定閾値」より小さいことだけであってもよい。

≪第２実施形態≫
第２実施形態は、第１実施形態のように、基準画像の「使用適格判定パラメータ」の値と比較画像の「使用適格判定パラメータ」の値との差が判定閾値以上である場合に一律に「リトライ処理」を実行するのではなく、基準画像の「使用適格判定パラメータ」の値と比較画像の「使用適格判定パラメータ」の値との差が判定閾値以上である場合であっても、所定条件が満たされる場合には、比較画像を画像合成に用いる実施形態に関する。なお、第２実施形態のデジタルカメラ（撮影装置）の構成は、第１実施形態のデジタルカメラ（撮影装置）１０の構成と同様なので、図１から図４を参照して説明する。

第２実施形態のＤＳＰ（制御装置）４０において、撮影制御部４０Ａは、複数の判定対象画像領域のそれぞれについて、基準画像の使用適格判定パラメータの値と比較画像の使用適格判定パラメータの値との差を算出する。

そして、撮影制御部４０Ａは、算出した差が「第３判定閾値」以上である判定対象画像領域の「総和領域」の、比較画像の全画像領域に対する割合を算出する。

そして、撮影制御部４０Ａは、算出した割合が「第４判定閾値」より小さい場合、使用適格要件が満たされたと判定する一方、算出した割合が「第４判定閾値」以上である場合、使用適格要件が満たされないと判定する。

ここで、算出した差が「第３判定閾値」以上である判定対象画像領域は、上記の「撮影条件」が変動した領域に相当する。また、上記の「総和領域」の、比較画像の全画像領域に対する割合は、比較画像の全画像領域において上記の「撮影条件」が変動した領域が占める割合に相当する。比較画像の全画像領域において上記の「撮影条件」が変動した領域が占める割合が大きい場合、つまり、当該割合が「第４判定閾値」以上である場合、この比較画像を画像合成に用いることは難しい。一方、比較画像の全画像領域において上記の「撮影条件」が変動した領域が占める割合が小さい場合、つまり、当該割合が「第４判定閾値」より小さい場合、比較画像の全画像領域において上記の「撮影条件」が変動していない領域を画像合成に用いることは有効である。このため、第２実施形態の撮影制御部４０Ａは、算出した割合が「第４判定閾値」より小さい場合、使用適格要件が満たされたと判定している。ここで、上記の「撮影条件」の変動が手ぶれやフリッカーに起因する場合、上記の「撮影条件」が変動した領域は、比較画像の大部分の画像領域に亘る傾向にある。このため、上記の「撮影条件」の変動が手ぶれやフリッカーに起因する場合、上記算出した割合は「第４判定閾値」以上となる傾向にある。また、上記の「撮影条件」の変動が被写体ぶれや露出の差に起因する場合、上記の「撮影条件」が変動した領域は、比較画像の一部の画像領域にのみ現れる傾向にある。このため、上記の「撮影条件」の変動が被写体ぶれや露出の差に起因する場合、上記算出した割合は「第４判定閾値」より小さくなる傾向にある。

そして、合成画像生成部４０Ｂは、使用適格要件が満たされた場合、算出された差が「第３判定閾値」以上である判定対象画像領域に対応する、合成画像における部分領域の画像を、基準画像における対応部分領域の画像で置き換える。

以上のように第２実施形態によれば、ＤＳＰ（制御装置）４０において、撮影制御部４０Ａは、複数の判定対象画像領域のそれぞれについて、基準画像の使用適格判定パラメータの値と比較画像の使用適格判定パラメータの値との差を算出する。そして、撮影制御部４０Ａは、算出した差が第３判定閾値以上である判定対象画像領域の総和領域の、比較画像の全画像領域に対する割合を算出する。そして、撮影制御部４０Ａは、算出した割合が第４判定閾値より小さい場合、使用適格要件が満たされたと判定する。

このＤＳＰ（制御装置）４０の構成により、比較画像において上記の「撮影条件」が変動した領域が現れた場合に一律に「リトライ処理」を実行するのではなく、比較画像において上記の「撮影条件」が変動していない領域の割合が小さい場合には、この比較画像を画像合成に用いることができる。これにより、使用画像セットのすべての構成画像が揃うまでに行われる撮影回数をさらに低減することができる。

また、第２実施形態のＤＳＰ（制御装置）４０において、撮影制御部４０Ａは、使用適格要件が満たされた場合、算出した差が第３判定閾値以上である判定対象画像領域に対応する、合成画像における部分領域の画像を、基準画像における対応部分領域の画像で置き換える。

このＤＳＰ（制御装置）４０の構成により、比較画像において算出した差が第３判定閾値以上である判定対象画像領域に対応する、合成画像における部分領域、つまり、合成画像の画質が落ちていると推測される領域を、基準画像における対応部分領域の画像で置き換えることができるので、結果として、合成画像の画質劣化を防止することができる。

≪第３実施形態≫
第３実施形態は、基準位置及び複数の相対位置でそれぞれ撮影された複数の撮影画像を、「相対移動」と同期してＬＣＤ（表示部）２４にそれぞれ表示させる。なお、第３実施形態のデジタルカメラ（撮影装置）の構成は、第１実施形態のデジタルカメラ（撮影装置）１０の構成と同様なので、図１から図３を参照して説明する。

図８は、第３実施形態のＤＳＰ（制御装置）の内部構成を示す機能ブロック図である。図８において、第３実施形態のＤＳＰ（制御装置）４０'は、第１実施形態乃至第３実施形態で説明した撮影制御部４０Ａと合成画像生成部４０Ｂに加えて、表示制御部４０Ｃを有している。

例えば、第１実施形態で説明したように、撮影制御部４０Ａは、各相対位置において撮影された画像をイメージセンサ２２から取得する度に、当該取得画像が「使用画像セット」の一構成画像としての「使用適格要件」を満たすか否かを判定する。そして、撮影制御部４０Ａは、各相対位置において、取得画像が使用適格要件を満たすまで「再撮影」を繰り返させ、使用適格要件が満たされた場合、使用適格要件を満たした取得画像を使用画像セットの構成画像として保持すると共に、次の相対位置にイメージセンサ２２及び上記の光学要素を相対移動させる。

このため、各相対位置における撮影回数（取得画像の数）は不明である。従って、１セットの撮影がいつ開始されいつ終了するのかについて、ユーザが認識することは困難である。この問題は、特に、撮影処理でメカ動作を伴わない電子シャッタが用いられる場合に顕著となる。このため、１セットの撮影中であるにもかかわらず、ユーザが誤って撮影装置を動かしてしまう（例えば、構図を変更してしまう、三脚から取り外してしまう等）可能性がある。この場合、１セットの撮影画像を合成した合成画像は、品質が著しく低下した失敗画像になってしまう可能性がある。

そこで、表示制御部４０Ｃは、「表示制御処理」を実行する。この「表示制御処理」として、表示制御部４０Ｃは、例えば、基準位置及び複数の相対位置でそれぞれ撮影された複数の撮影画像を、「相対移動」に応じてＬＣＤ（表示部）２４にそれぞれ表示させる。「相対移動に応じて表示」とは、例えば、タイミングに関して言えば、第１の位置で撮影した撮影画像を、第１の位置から次の第２の位置への移動タイミング自体及び第２の位置での撮影処理や画像処理の所定タイミングで表示させることを意味する。すなわち、第１の位置で撮影した撮影画像を、第１の位置から次の第２の位置への移動タイミングと所定の関係を有するタイミングにおいて表示できればよいので、「相対移動に応じて表示」は「相対移動と同期して表示」を含む概念である。また、例えば、表示制御部４０Ｃは、画像セットを構成する撮影画像の数、及び、現時点で既に得られている撮影画像の数をユーザが認識可能な態様で、各撮影画像をＬＣＤ（表示部）２４に表示させる。

例えば、表示制御部４０Ｃは、ＬＣＤ（表示部）２４の表示画面に対して複数の「部分画面領域」を設定する。また、表示制御部４０Ｃは、この複数の「部分画面領域」と、基準位置及び複数の相対位置とを、それぞれ対応付けておく。すなわち、例えば、ＬＣＤ（表示部）２４の表示画面上の各「部分画面領域」は、上記のカラーフィルタの基本単位における各画素に対応している。そして、表示制御部４０Ｃは、図９に示すように、基準位置及び複数の相対位置で得られた複数の撮影画像を、基準位置及び複数の相対位置に対応する複数の部分画面領域にそれぞれ表示させる。図９（Ａ）は、基準位置での撮影完了後で１番目の相対位置での撮影中にＬＣＤ（表示部）２４に表示される表示画像であり、図９（Ｂ）は、１番目の相対位置での撮影完了後で２番目の相対位置での撮影中に表示される表示画像であり、図９（Ｃ）は、２番目の相対位置での撮影完了後で３番目の相対位置での撮影中に表示される表示画像であり、図９（Ｄ）は、３番目の相対位置での撮影完了後で画像合成処理中に表示される表示画像である。

具体的には、表示制御部４０Ｃは、撮影制御部４０Ａによって制御される「相対移動のパターン」と同じパターン（表示パターン）で、基準位置及び３つの相対位置で得られた４枚の撮影画像を順次表示させている。すなわち、イメージセンサ２２及び上記の光学要素（例えば、撮影レンズ群３１）のうちの一方の移動に応じて、各位置で撮影された静止画像が順次追加表示されて、表示画像が順次変化する。例えば、表示制御部４０Ｃは、図５で示したように「相対移動のパターン」が時計回りであれば、ＬＣＤ（表示部）２４の表示画面が４分割された４つの部分画面領域に対して、基準位置及び３つの相対位置で得られた４枚の撮影画像を時計回りで順次表示させている。この「表示パターン」は、これに限定されるものではなく、例えば、イメージセンサ２２の移動方向にマッチさせて、基準位置及び３つの相対位置で得られた４枚の撮影画像を反時計回りで順次表示させてもよいし、基準位置及び３つの相対位置で得られた４枚の撮影画像を表示位置の軌跡が「Ｚ」を描くように順次表示させてもよい。また、「表示パターン」は、ＬＣＤ（表示部）２４の表示画面が縦又は横に４分割された４つの部分画面領域に対して、基準位置及び３つの相対位置で得られた４枚の撮影画像を、例えば、上（下）から又は右（左）から順番に表示させてもよい。

ここで、１つの相対位置で「再撮影」が複数回繰り返される場合、表示制御部４０Ｃは、その相対位置に対応する部分画面領域に表示される撮影画像を再撮影画像で順次更新する。これにより、どの相対位置で「再撮影」が繰り返されているのかユーザに認識させることができる。すなわち、マルチショット合成モードの撮影処理の進行具合をユーザに確実に認識させることができる。さらに、１つの相対位置で「再撮影」する前に（つまり、ステップＳ５の前に）、「使用適格要件」が満たされなかったことをユーザに報知して、その後に「再撮影」を行ってもよい。又は、１つの相対位置で「再撮影」する前に（つまり、ステップＳ５の前に）、「使用適格要件が満たされませんでした。再撮影しますか？」等のメッセージをＬＣＤ（表示部）２４に表示し、この表示に応じてユーザによって再撮影指示操作が為された場合に、「再撮影」を行ってもよい。

以上のように第３実施形態によれば、ＤＳＰ（制御装置）４０'において、表示制御部４０Ｃは、基準位置及び複数の相対位置でそれぞれ撮影された複数の撮影画像を、「相対移動」に応じてＬＣＤ（表示部）２４にそれぞれ表示させる。

このＤＳＰ（制御装置）４０'の構成により、マルチショット合成モードの撮影処理で電子シャッタが用いられる場合であっても、ユーザに、１セットの撮影がいつ開始されいつ終了するのかについて認識させることができる。この結果として、１セットの撮影中にユーザが撮影装置を動かしてしまう可能性が低くなり、１セットの撮影画像ひいては合成画像の画質（品質）を向上させることができる。

例えば、表示制御部４０Ｃは、ＬＣＤ（表示部）２４の表示画面に複数の部分画面領域を設定し、基準位置及び複数の相対位置で得られた複数の撮影画像を、基準位置及び複数の相対位置に対応する複数の部分画面領域にそれぞれ表示させる。

このＤＳＰ（制御装置）４０'の構成により、マルチショット合成モードの撮影処理の進行具合をユーザに確実に認識させることができる。

表示制御部４０Ｃは、１つの相対位置で「再撮影」が複数回繰り返される場合、その相対位置に対応する部分画面領域に表示される撮影画像を再撮影画像で順次更新する。

このＤＳＰ（制御装置）４０'の構成により、どの相対位置で「再撮影」が繰り返されているのかユーザに認識させることができる。すなわち、マルチショット合成モードの撮影処理の進行具合をユーザに確実に認識させることができる。

また、例えば、表示制御部４０Ｃは、相対移動のパターンに対応する表示パターンで、複数の撮影画像をＬＣＤ（表示部）２４に表示させる。

このＤＳＰ（制御装置）４０の構成により、マルチショット処理の動きにマッチした態様で、マルチショット合成モードの撮影処理の進行具合をユーザに確実に認識させることができる。すなわち、ユーザは、マルチショット処理において移動部材（イメージセンサと光学要素の少なくとも一方）がどのような軌跡を描いているのかを擬似的に把握することができる。

（変形例１）
表示制御部４０Ｃは、基準位置及び複数の相対位置で得られた複数の撮影画像を、一部重なるように一方向に表示位置をずらしながらＬＣＤ（表示部）２４の表示画面に表示させてもよい。

例えば、表示制御部４０Ｃは、図１０に示すように、基準位置及び複数の相対位置にそれぞれ対応する複数の部分画面領域を、一方向にずらして一部重なるように、ＬＣＤ（表示部）２４の表示画面に設定する。そして、表示制御部４０Ｃは、基準位置及び複数の相対位置で得られた複数の撮影画像を、基準位置及び複数の相対位置に対応する複数の部分画面領域に順次表示する。図１０（Ａ）は、基準位置での撮影完了後で１番目の相対位置での撮影中にＬＣＤ（表示部）２４に表示される表示画像であり、図１０（Ｂ）は、１番目の相対位置での撮影完了後で２番目の相対位置での撮影中に表示される表示画像であり、図１０（Ｃ）は、２番目の相対位置での撮影完了後で３番目の相対位置での撮影中に表示される表示画像であり、図１０（Ｄ）は、３番目の相対位置での撮影完了後で画像合成処理中に表示される表示画像である。

（変形例２）
表示制御部４０Ｃは、基準位置及び前記複数の相対位置で得られた複数の撮影画像に「半透明化処理」をそれぞれ施し、得られた複数の半透明画像をＬＣＤ（表示部）２４に重畳表示させてもよい。「半透明化処理」とは、撮影画像の透過率を調整して半透明画像を生成する処理である。ここでは、４枚の半透明画像を重畳表示させることを前提としているので、表示制御部４０Ｃは、一例として、４枚の半透明画像を重畳表示したときに透過率の総和が１００％となるように、各半透明画像の透過率を２５％（＝１／４［％］）としてもよい。

例えば、表示制御部４０Ｃは、図１１に示すように、得られた複数の半透明画像を、表示位置をずらしながらＬＣＤ（表示部）２４に重畳表示させる。図１１（Ａ）は、基準位置での撮影完了後で１番目の相対位置での撮影中にＬＣＤ（表示部）２４に表示される表示画像であり、図１１（Ｂ）は、１番目の相対位置での撮影完了後で２番目の相対位置での撮影中に表示される表示画像であり、図１１（Ｃ）は、２番目の相対位置での撮影完了後で３番目の相対位置での撮影中に表示される表示画像であり、図１１（Ｄ）は、３番目の相対位置での撮影完了後で画像合成処理中に表示される表示画像である。表示位置のずれ量は、特に限定されるものではないが、例えば、上記の「相対移動のパターン」に応じた量であってもよい。すなわち、上記の「相対移動のパターン」が１画素ピッチで相対移動するパターンである場合、表示位置のズレ量を「１画素ピッチ」としてもよい。又は、表示位置のズレ量を「１画素ピッチ」より大きくしてもよい。

≪他の実施形態≫
［１］第１実施形態乃至第３実施形態では、ＲＲＳ撮影モードにおいて、イメージセンサ２２を光軸直交平面内で１画素ピッチの正方形を描くように駆動しながら撮影した４枚の画像を「複数の撮影画像から成る使用画像セット」とした場合を例示して説明した。しかし、イメージセンサ２２の駆動軌跡及び駆動ピッチ並びに「複数の撮影画像から成る使用画像セット」の枚数や表示態様には自由度があり、種々の設計変更が可能である。例えば、第３実施形態で説明した様に、画像セットの構成画像の枚数分の分割表示が行われてもよいし、画像セットの構成画像を順番に繰り返し表示させてもよい。またイメージセンサ２２を駆動する方向は、撮影光学系の光軸と直交する平面内に限定されず、撮影光学系の光軸と異なる方向であればよい。さらに「複数の撮影画像から成る使用画像セット」は、ＲＲＳ撮影モードで撮影（取得）したものに限定されず、同一の被写体について撮影条件を変えながら連続的に撮影したものであればよい。

［２］第１実施形態乃至第３実施形態では、イメージセンサ２２を「移動部材」として、このイメージセンサ２２を光軸直交平面内で駆動する態様を例示して説明したが、本発明はこれに限定されるものではない。例えば、撮影レンズ群（撮影光学系）３１の少なくとも一部をなす光学要素を「移動部材」として、この光学要素を撮影レンズ３０内に設けたボイスコイルモータによって光軸直交平面内で駆動する態様も可能である。あるいは、イメージセンサ２２と撮影レンズ群（撮影光学系）３１の少なくとも一部をなす光学要素の双方を「移動部材」として、これらを光軸直交平面内で駆動する態様も可能である。

［３］第１実施形態乃至第３実施形態では、ＤＳＰ４０とイメージセンサ駆動回路６０を別々の構成要素（ブロック）として描いているが、これらを単一の構成要素（ブロック）として実現する態様も可能である。

［４］第１実施形態乃至第３実施形態では、像振れ補正装置５０の構成として、固定支持基板５１に磁石Ｍ１、Ｍ２、Ｍ３及びヨークＹ１、Ｙ２、Ｙ３を固定し、可動ステージ５２に駆動用コイルＣ１、Ｃ２、Ｃ３を固定した場合を例示して説明したが、この位置関係を逆にして、可動ステージに磁石及びヨークを固定し、固定支持基板に駆動用コイルを固定する態様も可能である。

［５］第１実施形態乃至第３実施形態では、ボディ本体２０と撮影レンズ３０を着脱可能（レンズ交換可能）とする態様を例示して説明したが、ボディ本体２０と撮影レンズ３０を着脱不能（レンズ交換不能）とする態様も可能である。

［６］第１実施形態乃至第３実施形態では、デジタルカメラ１０が所謂ミラーレスカメラであることを前提として説明を行ったが、これに限定されるものではなく、所謂可動ミラーを有する一眼レフカメラであってもよい。第１実施形態乃至第３実施形態で開示の技術を一眼レフカメラに適用した場合、基準位置における撮影準備のとき又はその前に、可動ミラーを観察位置から撮影位置にアップさせ、シャッタを全開させて、この状態で基準位置において１枚、その後異なる相対位置において３枚撮影する。全ての撮影が終了したとき又はその後に、シャッタを全閉させて、可動ミラーを観察位置にダウンさせる。

１０ デジタルカメラ（撮影装置）
２０ ボディ本体
２１ シャッタ（撮影光学系）
２２ イメージセンサ（撮像部、移動部材、振れ補正部材）
Ｒ Ｇ（Ｇｒ、Ｇｂ） Ｂ カラーフィルタ
２３ 絞り／シャッタ駆動回路
２４ ＬＣＤ（表示部）
２５ 画像メモリ
２６ 撮影操作スイッチ
２７ ジャイロセンサ（振れ検出部）
２８ ＲＲＳ撮影モード設定部
３０ 撮影レンズ
３１ 撮影レンズ群（撮影光学系、移動部材、振れ補正部材）
３２ 絞り（撮影光学系）
３３ 通信用メモリ
４０，４０' ＤＳＰ（制御装置）
４０Ａ 撮影制御部
４０Ｂ 合成画像生成部
４０Ｃ 表示制御部
５０ 像振れ補正装置
５１ 固定支持基板
５２ 可動ステージ
Ｍ１ Ｍ２ Ｍ３ 磁石
Ｙ１ Ｙ２ Ｙ３ ヨーク
Ｃ１ Ｃ２ Ｃ３ 駆動用コイル
Ｈ１ Ｈ２ Ｈ３ ホールセンサ（位置検出部）
６０ イメージセンサ駆動回路

Claims (9)

1. 光学要素を含む撮影光学系により形成された被写体像を電気的な画素信号に変換するイメージセンサと、
   画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、前記イメージセンサと前記光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる撮影制御部と、
   を具備し、
   前記撮影制御部は、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する、
   ことを特徴とする撮影装置。
2. 請求項１記載の撮影装置において、
   前記撮影制御部は、前記各相対位置において、前記取得画像が前記使用適格要件を満たすまで再撮影を繰り返させ、前記使用適格要件が満たされた場合、前記使用適格要件を満たした前記取得画像を前記使用画像セットの構成画像として保持すると共に、次の前記相対位置に前記イメージセンサと前記光学要素の一方又は両方を移動させる、撮影装置。
3. 請求項１又は請求項２記載の撮影装置において、
   前記使用適格判定パラメータは、判定対象画像領域におけるＲＧＢを含み、
   前記撮影制御部は、前記基準画像の前記判定対象画像領域におけるＲＧＢ値と前記比較画像の前記判定対象画像領域におけるＲＧＢ値との差が判定閾値以上である場合、前記使用適格要件を満たさないと判定する、撮影装置。
4. 請求項１又は請求項２記載の撮影装置において、
   前記使用適格判定パラメータは、判定対象画像領域におけるＲＧＢを含み、
   前記撮影制御部は、
   前記基準画像の前記判定対象画像領域における輝度ヒストグラムと前記比較画像の前記判定対象画像領域における輝度ヒストグラムとの第１差値が第１判定閾値より小さいこと、及び、前記基準画像の前記判定対象画像領域におけるＲＧＢ値と前記比較画像の前記判定対象画像領域におけるＲＧＢ値との第２差値が第２判定閾値より小さいことの両方が満たされた場合、前記使用適格要件を満たすと判定し、
   前記第１差値が前記第１判定閾値以上であること、及び、前記第２差値が前記第２判定閾値以上であることの少なくとも一方が満たされた場合、前記使用適格要件を満たさないと判定する、撮影装置。
5. 請求項１又は請求項２記載の撮影装置において、
   前記撮影制御部は、
   前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、複数の判定対象画像領域のそれぞれについて、前記基準画像の使用適格判定パラメータの値と前記比較画像の使用適格判定パラメータの値との差を算出し、
   前記算出した差が第３判定閾値以上である前記判定対象画像領域の総和領域の、前記比較画像の全画像領域に対する割合を算出し、
   前記算出した割合が第４判定閾値より小さい場合、前記使用適格要件を満たすと判定し、
   前記算出した割合が前記第４判定閾値以上である場合、前記使用適格要件を満たさないと判定する、撮影装置。
6. 請求項５記載の撮影装置において、
   前記使用画像セットの画像が得られた段階で、前記得られた使用画像セットを用いて合成画像を生成する合成画像生成部をさらに具備し、
   前記合成画像生成部は、前記使用適格要件を満たした場合、前記算出された差が前記第３判定閾値以上である前記判定対象画像領域に対応する、前記合成画像における部分領域の画像を、前記基準画像における対応部分領域の画像で置き換える、撮影装置。
7. 画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる、撮影制御装置であって、
   前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御部を具備することを特徴とする撮影制御装置。
8. 画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる、撮影制御方法であって、
   前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御ステップを具備することを特徴とする撮影制御方法。
9. 画像合成に用いる複数の撮影画像から成る使用画像セットを撮影する撮影処理を制御し、前記撮影処理では、イメージセンサと光学要素との間の基準位置から光軸方向と異なる方向のそれぞれ異なる複数の相対位置に、前記イメージセンサと前記光学要素の一方又は両方を移動させる撮影制御装置又は撮影制御方法の撮影制御プログラムであって、
   撮影制御部に、前記基準位置における取得画像又は前記複数の相対位置のうち現時点の前記相対位置よりも前の前記相対位置における取得画像を基準画像とし、前記現時点の相対位置における取得画像を比較画像として、前記基準画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値と前記比較画像の判定対象画像領域における輝度ヒストグラムを含む使用適格判定パラメータの値との差が判定閾値以上である場合、前記比較画像が前記使用画像セットとしての使用適格要件を満たさないと判定する撮影制御ステップを実行させることを特徴とする撮影制御プログラム。

Images