JP2011250336A - 画像処理装置、画像処理方法およびプログラム - Google Patents

画像処理装置、画像処理方法およびプログラム Download PDF

Info

Publication number
JP2011250336A
JP2011250336A JP2010123732A JP2010123732A JP2011250336A JP 2011250336 A JP2011250336 A JP 2011250336A JP 2010123732 A JP2010123732 A JP 2010123732A JP 2010123732 A JP2010123732 A JP 2010123732A JP 2011250336 A JP2011250336 A JP 2011250336A
Authority
JP
Japan
Prior art keywords
image
images
continuous shooting
unit
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010123732A
Other languages
English (en)
Other versions
JP5521786B2 (ja
Inventor
Yohei Takada
洋平 高田
Hisashige Sogawa
久茂 祖川
Tsuyoshi Kishimoto
剛司 岸本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2010123732A priority Critical patent/JP5521786B2/ja
Priority to CN2011101210484A priority patent/CN102263896A/zh
Priority to US13/106,174 priority patent/US8711229B2/en
Publication of JP2011250336A publication Critical patent/JP2011250336A/ja
Application granted granted Critical
Publication of JP5521786B2 publication Critical patent/JP5521786B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/676—Bracketing for image capture at varying focusing conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

【課題】合焦状態が良好な画像を適切に選択する。
【解決手段】撮像部１８１は、像倍率が一定の条件を満たす場合には、時系列で連続する一連の画像を生成する連写撮像動作により複数の画像を生成する。合焦判定部１３０は、複数の画像のそれぞれについて位相差検出方式による焦点検出によりフォーカスのズレ量を算出する。画像選択部１９０は、連写撮像動作により生成された複数の画像のうちから合焦の度合いが最も高い画像をフォーカスのズレ量に基づいて選択する。
【選択図】図１

Description

本発明は、画像処理装置に関し、特に連写撮像動作により生成された複数の画像のうちから画像を選択する画像処理装置および画像処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
近年、人物等の被写体を撮像して撮像画像を生成し、この生成された撮像画像を記録するデジタルスチルカメラ等の撮像装置が普及している。また、この撮像装置として、連続撮像（連写）機能を備える撮像装置が広く普及している。
この連写機能を用いて複数の撮像画像を記録しておくことにより、その複数の撮像画像の中にユーザが目的とする撮像画像が含まれていることを期待することができる。しかしながら、複数の撮像画像から、目的とする撮像画像をユーザ自身が手動操作で選ぶ場合には、この手動操作が煩雑となるおそれがある。そこで、例えば、フォーカスブラケットにより撮像した複数の画像に対して合焦状態を評価するための評価エリアを設定し、その設定した評価エリアにおける合焦状態が良好な画像を選択して記録する撮像装置が提案されている（例えば、特許文献１参照。）。
特開２００４−１３５０２９号公報（図３）
上記の撮像装置では、撮像画像に対して評価エリアを設定してコントラスト方式により合焦の度合いを解析することにより、合焦状態が良好な画像を選択することができる。
しかしながら、このような撮像装置では、コントラスト方式により解析する際に他の撮像画像との比較を必要とする。このため、評価エリアにおける物体が著しく変動するような場合においては、比較する評価エリアの画像同士が著しく異なることにより、適切な撮像画像が選択されない場合がある。例えば、撮像対象物を大きく拡大して撮像する場合（いわゆる、マクロ撮影）においては、被写界深度が浅い。このため、風などで撮像対象物が少しでも動くと被写体の大きな変化を起こす。これにより、合焦状態が良好な画像が複数の画像に含まれている場合においても、他の画像との比較が困難になることにより、適切に選択されない可能性が考えられる。
本発明はこのような状況に鑑みてなされたものであり、合焦状態が良好な画像を適切に選択することを目的とする。
本発明は、上記課題を解決するためになされたものであり、その第１の側面は、時系列で連続する一連の画像を生成する連写撮像動作により生成された複数の画像であって、上記複数の画像の各々を生成する際における分割された被写体の像の間のズレ量に基づいて検出されたフォーカスのズレ量が画像ごとに関連付けられている複数の画像を入力する入力部と、上記複数の画像のうちから合焦の度合いが最も高い画像を、上記フォーカスのズレ量に基づいて選択する選択部とを具備する画像処理装置および画像処理方法ならびに当該方法をコンピュータに実行させるプログラムである。これにより、連写撮像動作により生成された複数の画像のうちから合焦の度合いが最も高い画像を、位相差検出方式による焦点検出により算出されたフォーカスのズレ量に基づいて選択させるという作用をもたらす。
また、この第１の側面において、上記フォーカスのズレ量を、位相差検出による焦点検出により算出するズレ量算出部をさらに具備するようにしてもよい。これにより、位相差検出による焦点検出方式によりフォーカスのズレ量を算出させるという作用をもたらす。
また、この第１の側面において、被写体を撮像して画像を生成する撮像部と、上記位相差検出方式による焦点検出によりフォーカスを制御するフォーカス制御部と、上記連写撮像動作により複数の画像が生成される際には、当該複数の画像の撮像動作開始から撮像動作終了までの期間における上記フォーカス制御を停止させる制御部とをさらに具備するようにしてもよい。これにより、連写撮像動作により生成される複数の画像の撮像開始から撮像終了までの期間におけるフォーカスを固定させるという作用をもたらす。
また、この第１の側面において、被写体を撮像して画像を生成する撮像部と、焦点距離と被写体距離とに基づいて像倍率を算出する像倍率算出部と、上記算出された像倍率が一定の条件を満たす場合には、撮像モードとして、上記連写撮像動作を行う連写モードを設定する設定部とをさらに具備するようにしてもよい。これにより、像倍率が一定の条件を満たす場合には、撮像モードとして、上記連写撮像動作を行う連写モードを設定させるという作用をもたらす。この場合において、上記設定部は、上記算出された像倍率が所定の像倍率を基準にして大きいことを上記一定の条件にして、上記連写モードを設定するようにしてもよい。これにより、像倍率が所定の像倍率を基準にして大きい場合には、連写モードを設定させるという作用をもたらす。また、この場合において、上記画像処理装置の固定の有無を判定する判定部をさらに具備し、上記設定部は、上記像倍率が上記一定の条件を満たすとともに、上記画像処理装置が固定されていることが判定された場合にのみ上記連写モードを設定するようにしてもよい。これにより、像倍率が一定の条件を満たすとともに、画像処理装置が固定されていることが判定された場合にのみ連写モードを設定させるという作用をもたらす。また、この場合において、上記設定部は、上記像倍率が上記一定の条件を満たすとともに、上記複数の画像を撮像する際のシャッタスピードが所定の速度を基準にして速い場合にのみ上記連写モードを設定するようにしてもよい。これにより、像倍率が一定の条件を満たすとともに、シャッタスピードが所定の速度を基準にして速い場合にのみ連写モードを設定させるという作用をもたらす。
また、本発明の第２の側面は、被写体を撮像して画像を生成する撮像部と、焦点距離と被写体距離とに基づいて像倍率を算出する像倍率算出部と、上記算出された像倍率が一定の条件を満たす場合には、撮像のモードとして、時系列で連続する一連の画像を生成する連写撮像動作により複数の画像を生成する連写モードを設定する設定部とを具備する撮像装置である。これにより、像倍率が一定の条件を満たす場合には、撮像モードとして、上記連写撮像動作を行う連写モードを設定させるという作用をもたらす。
本発明によれば、合焦状態が良好な画像を適切に選択することができるという優れた効果を奏し得る。
本発明の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。 本発明の第１の実施の形態における像倍率算出部１４０により算出される像倍率の説明を示す概念図である。 本発明の第１の実施の形態における連写判定部１６０により連写することが判定された場合の撮像画像の一例を示す概念図である。 本発明の第１の実施の形態における連写判定部１６０により単写することが判定された場合の撮像画像の一例を示す概念図である。 本発明の第１の実施の形態における画像選択部１９０による画像選択の一例を示す概念図である。 本発明の第１の実施の形態において、連写により撮像された撮像画像を全て記録する設定がされている場合における記録部１８４に記録される画像管理情報の一例を示す概念図である。 本発明の第１の実施の形態における表示部１８６に表示される設定画面であって、連写による撮像画像の保存方法を設定する設定画面の一例を示す概念図である。 本発明の第１の実施の形態における撮像装置１００による撮像処理手順例を示すフローチャートである。 本発明の第１の実施の形態における連写撮像処理（ステップＳ９１０）の処理手順例を示すフローチャートである。 本発明の第２の実施の形態における撮像装置３００の機能構成例を示すブロック図である。 本発明の第２の実施の形態における連写判定部１６１により連写することが判定された場合の一例を示す概念図である。 本発明の第２の実施の形態における連写判定部１６１により単写することが判定された場合の一例を示す概念図である。 本発明の第２の実施の形態における撮像装置３００による撮像処理手順例を示すフローチャートである。 本発明の第３の実施の形態における撮像装置５００の機能構成例を示すブロック図である。 本発明の第３の実施の形態における撮像装置５００による撮像処理手順例を示すフローチャートである。
以下、本発明を実施するための形態（以下、実施の形態と称する）について説明する。説明は以下の順序により行う。
１．第１の実施の形態（撮像制御：像倍率情報に基づいて画像を選択する例）
２．第２の実施の形態（撮像制御：像倍率情報および固定情報に基づいて画像を選択する例）
３．第３の実施の形態（撮像制御：像倍率情報およびシャッタスピード情報に基づいて画像を選択する例）
＜１．第１の実施の形態＞
［撮像装置の機能構成例］
図１は、本発明の第１の実施の形態における撮像装置１００の機能構成例を示すブロック図である。
撮像装置１００は、鏡筒１１０と、操作受付部１２０と、制御部１２５と、合焦判定部１３０と、レンズ駆動量生成部１７１と、レンズ駆動部１７２と、像倍率算出部１４０と、連写判定部１６０とを備える。また、撮像装置１００は、撮像部１８１と、画像信号処理部１８２と、画像選択部１９０と、記録制御部１８３と、記録部１８４と、表示制御部１８５と、表示部１８６とを備える。
なお、本発明の第１の実施の形態では、撮像装置１００は、ＡＦ−Ａ（オートフォーカス−オート：Auto Focus - Auto）モードで動作していることを想定する。なお、ＡＦ−Ａは、Ａｕｔｏｍａｔｉｃ ＡＦとも称される。ここで、ＡＦ−Ａモードとは、オートフォーカスでフォーカスを一度合わせた際（合焦した際）に、フォーカスをその位置で固定しておくモードと、合焦対象物の動きに応じてフォーカスを合わせ続ける（合焦させ続ける）モードとを自動的に切り替えるモードである。なお、フォーカスをその位置で固定しておくモードは、ＡＦ−Ｓ（Single）モードと称され、フォーカスの調整対象物の動きに応じてフォーカスを再合焦させるモードは、ＡＦ−Ｃ（Continuous）と称される。また、ＡＦ−ＳはＳｉｎｇｌｅ−ｓｈｏｔ ＡＦとも称され、ＡＦ−ＣはＣｏｎｔｉｎｕｏｕｓ ＡＦとも称される。また、本発明の実施の形態では、フォーカスを合わせることをフォーカシングと称する。
鏡筒１１０は、撮像部１８１への入射光を光学的に制御するレンズ群および絞りなどが備え付けられている部位である。この鏡筒１１０には、説明の便宜上、ズームレンズ１１１およびフォーカスレンズ１１２のみが示されている。
ズームレンズ１１１は、鏡筒１１０の中を光軸方向に移動することにより焦点距離を変動させて、撮影される画像における被写体の倍率を調整するものである。
フォーカスレンズ１１２は、鏡筒１１０の中を光軸方向に移動することによりフォーカスを調整するものである。
操作受付部１２０は、ユーザからの操作を受け付けるものである。この操作受付部１２０は、例えば、シャッターボタンが半押しされた場合には、その半押しに関する信号を、操作信号として制御部１２５に供給する。また、操作受付部１２０は、例えば、シャッターボタンが全押しされた場合には、その全押しに関する信号を、操作信号として制御部１２５に供給する。
制御部１２５は、撮像装置１００における各部動作を制御するものである。また、制御部１２５は、撮影モードがＡＦ−Ａモードである場合において、シャッターボタンの半押しに関する操作信号が供給された場合には、連写（連続撮像）をするべきか否か判定させるための情報（連写判定開始情報）を、連写判定部１６０に供給する。また、制御部１２５は、シャッターボタンの全押しに関する操作信号が供給された場合には、撮像の開始に関する信号（撮像開始信号）を、撮像部１８１および記録制御部１８３に供給する。また、制御部１２５は、表示部１８６における表示を制御する信号（表示制御信号）を表示制御部１８５に供給する。
合焦判定部１３０は、フォーカスを合わせる対象の物体（合焦対象物）に対してフォーカスが合っているか否か判定するものである。この合焦判定部１３０は、位相差検出方式により実現される。ここで、位相差検出方式とは、撮像レンズを通過した光を瞳分割して１対の像を形成し、その形成された像の間隔（像の間のズレ量）を計測（位相差を検出）することによって合焦の度合いを検出する焦点検出方法である。合焦判定部１３０は、フォーカシングを行う領域（フォーカスエリア）における物体に対して合焦している場合には、合焦していることを示す情報を合焦判定結果情報として、レンズ駆動量生成部１７１に供給する。また、この合焦判定部１３０は、フォーカスエリアにおける物体にフォーカスが合っていない場合には、フォーカスのズレの量（デフォーカス量）を算出し、その算出したデフォーカス量を示す情報を合焦判定結果情報とする。
また、合焦判定部１３０は、撮像部１８１において連写により撮像画像（記録用に撮像される画像）が生成される際には、それぞれの撮像画像が生成される際におけるデフォーカス量を算出する。そして、合焦判定部１３０は、その算出したデフォーカス量を示す情報（画像デフォーカス情報）を画像選択部１９０に供給する。
レンズ駆動量生成部１７１は、フォーカスレンズ１１２の駆動量を示す駆動量信号を生成するものである。このレンズ駆動量生成部１７１は、フォーカスが合っている場合には、フォーカスレンズ１１２の現在の位置を維持させる駆動量信号を生成する。また、レンズ駆動量生成部１７１は、フォーカスがズレている場合には、デフォーカス量を示す合焦判定結果情報およびフォーカスレンズ１１２の位置情報に基づいて、フォーカスレンズ１１２の駆動量（移動距離）を算出する。そして、レンズ駆動量生成部１７１は、その算出した駆動量だけフォーカスレンズ１１２を移動させる（制御させる）ための駆動量信号を生成する。
また、レンズ駆動量生成部１７１は、ＡＦ−Ａモードにおいてシャッターボタンが半押しされている際に、連写判定部１６０から連写を示す連写判定情報が供給された場合には、フォーカスレンズ１１２の現在の位置を維持させる駆動量信号を生成する。その後、シャッターボタンが全押しされると、レンズ駆動量生成部１７１は、連写による複数の画像の撮像が終わるまでフォーカスレンズ１１２の現在の位置を維持させる。すなわち、複数の画像の撮像動作開始から撮像動作終了までの間のフォーカスが固定（制御が停止）される。なお、レンズ駆動量生成部１７１および合焦判定部１３０は、特許請求の範囲に記載のズレ量算出部、フォーカス制御部および制御部の一例である。
レンズ駆動部１７２は、鏡筒１１０におけるレンズを駆動するものである。このレンズ駆動部１７２は、例えば、レンズ駆動量生成部１７１から供給される駆動量信号に基づいて、フォーカスレンズ１１２を移動させる。レンズ駆動部１７２は、例えば、ＰＩＤ（Proportional Integral Differential）制御方式により、レンズ駆動モータを駆動させる。またレンズ駆動部１７２は、鏡筒１１０におけるレンズの位置を検出し、その検出した位置を示す情報（レンズ位置情報）をレンズ駆動量生成部１７１および像倍率算出部１４０に供給する。
像倍率算出部１４０は、像倍率を算出するものである。ここで、像倍率とは、撮像素子に写される像の大きさと、被写体の大きさとの比率である。この像倍率算出部１４０は、駆動量信号に従ってフォーカスレンズ１１２を駆動した後の被写体距離および焦点距離を、レンズの現在位置および駆動量信号に基づいて算出する。そして、像倍率算出部１４０は、算出した被写体距離および焦点距離に基づいて像倍率を算出する。この像倍率算出部１４０は、算出した像倍率を示す情報（像倍率情報）を連写判定部１６０に供給する。なお、像倍率算出部１４０による像倍率の算出については、図２を参照して説明する。
連写判定部１６０は、複数の枚数の画像を連続で撮像（連写）するか否かを判定するものである。この連写判定部１６０は、制御部１２５から連写判定開始情報が供給された場合には、像倍率算出部１４０から供給された像倍率情報により特定される像倍率が所定（一定）の条件を満たすか否かに基づいて、連写するか否かを判定する。例えば、連写判定部１６０は、像倍率情報により特定される像倍率が所定の閾値（例えば、１／１０）を超える場合には、連写すると判定する。また、像倍率情報により特定される像倍率が所定の閾値（例えば、１／１０）を超えない場合には、１枚の画像だけを撮像（単写）すると判定する。すなわち、連写判定部１６０は、単写により撮像する単写モードと、連写により撮像する連写モードとが撮像モードとしてある撮像装置において、像倍率が所定（一定）の条件を満たす場合には、撮像モードとして連写モードを設定する。この連写判定部１６０は、判定結果を示す連写判定情報を、レンズ駆動量生成部１７１および撮像部１８１に供給する。なお、連写判定部１６０による判定については、図２乃至図４を参照して説明する。なお、連写判定部１６０は、特許請求の範囲に記載の設定部の一例である。
撮像部１８１は、被写体からの入射光を電気信号に光電変換して画像信号を生成するものである。この撮像部１８１は、例えば、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサやＣＣＤ（Charge Coupled Device）センサなどをイメージセンサ（撮像素子）として備えることにより実現される。この撮像部１８１は、連写判定部１６０から供給される連写判定情報に基づいて、連写および単写のいずれかで撮像画像を生成する。また、撮像部１８１は、制御部１２５から供給される撮像開始信号に基づいて、被写体を撮像して撮像画像を生成する動作を開始する。例えば、撮像部１８１は、連写判定部１６０から連写を示す連写判定情報が供給されている場合において撮像開始信号が供給されると、所定枚数の画像を連写により生成する。一方、撮像部１８１は、単写を示す連写判定情報が供給されている場合において撮像開始信号が供給されると、１枚の画像を単写により生成する。撮像部１８１は、生成した画像（撮像画像）を、１つの画像（フレーム）単位で画像信号処理部１８２に供給する。
画像信号処理部１８２は、撮像部１８１から供給されるフレーム単位の画像信号に所定の信号処理を施して、記録部１８４に保持させる画像データと、表示部１８６に表示させる画像データとを生成するものである。この画像信号処理部１８２は、信号処理をした画像信号のうち記録部１８４に保持させる画像データを、記録制御部１８３に供給する。また、画像信号処理部１８２は、信号処理をした画像信号のうち表示部１８６に表示させる画像データを表示制御部１８５に供給する。
画像選択部１９０は、連写により撮像された複数の（一連の）撮像画像から１枚の撮像画像を選択するものである。この画像選択部１９０は、撮像部１８１から供給された一連の撮像画像と、合焦判定部１３０から供給されたそれぞれの撮像画像に対応する画像デフォーカス情報とに基づいて、合焦の度合いが最も高い撮像画像を選択する。そして、画像選択部１９０は、選択した撮像画像を識別する選択画像識別情報を生成し、一連の撮像画像の画像データおよび画像デフォーカス情報とともにその生成した選択画像識別情報を記録制御部１８３に供給する。なお、画像選択部１９０は、特許請求の範囲に記載の入力部および選択部の一例である。
記録制御部１８３は、記録部１８４における画像データの記録の制御を行うものである。この記録制御部１８３は、連写により撮像された撮像画像を全て記録する設定がされている場合には、一連の撮像画像の画像データ、画像デフォーカス情報および選択画像識別情報に基づいて、これらの画像を管理するための情報（画像管理情報）を生成する。そして、記録制御部１８３は、一連の撮像画像の画像データおよび画像管理情報を記録部１８４に記録する。また、記録制御部１８３は、連写により撮像された撮像画像のうち画像選択部１９０により選択された撮像画像のみを記録する設定がされている場合には、選択画像識別情報に基づいて選択された撮像画像を識別し、その撮像画像を記録部１８４に記録する。
記録部１８４は、記録制御部１８３から供給された画像データおよび画像管理情報を記録するものである。例えば、この記録部１８４は、メモリカードにより実現される。
表示制御部１８５は、表示部１８６においてユーザに視聴させる表示の出力を制御するものである。この表示制御部１８５は、例えば、制御部１２５からライブビュー（撮像素子が受光している被写体の像のリアルタイム画像）を表示させるための信号が供給されている場合には、表示部１８６においてライブビューを表示させるための画像を生成する。また、撮像装置１００の機能の設定画面を表示させるための信号が制御部１２５から供給されている場合には、表示部１８６において機能設定画面を表示させるための画像を生成する。表示制御部１８５は、生成した画像に関する画像データを表示部１８６に供給する。
表示部１８６は、画像を表示するものである。この表示部１８６は、例えば、カラー液晶パネルにより実現される。この表示部１８６は、撮像された画像、記録済みの画像およびモードの設定画面などを表示する。
［像倍率算出部による像倍率算出例］
図２は、本発明の第１の実施の形態における像倍率算出部１４０により算出される像倍率の説明を示す概念図である。
同図（ａ）には、像倍率が低い場合における被写界深度が示されている。同図（ａ）には、撮像部１８１を構成する撮像素子３１１と、鏡筒１１０におけるレンズ群を１つのレンズで模式的に示すレンズ３１２とが示されている。また、同図（ａ）には、撮像素子３１１における画素回路の許容錯乱円の直径（許容錯乱円Ｄ１）と、レンズ３１２の有効口径（有効口径Ｄ２）と、焦点距離（焦点距離Ｄ３）と、被写体距離（被写体距離Ｄ４）とが示されている。さらに、同図（ａ）には、前方被写界深度（前方被写界深度Ｄ５）と、後方被写界深度（後方被写界深度Ｄ６）と、被写界深度（被写界深度Ｄ７）と、３つの被写体（被写体Ａ１乃至Ａ３）とが示されている。
なお、被写体Ａ１は、撮像素子３１１における撮像面において合焦する撮像対象物である。
被写体Ａ２は、被写体Ａ１よりレンズに対して前方の位置（レンズに近い位置）にある撮像対象物である。この被写体Ａ２は、撮像面の後ろ（レンズ遠い位置）で合焦するため撮像面における像が錯乱円となるものの、撮像面における像の錯乱円が許容錯乱円の直径（許容錯乱円Ｄ１）と同様となるため合焦しているように撮像される撮像対象物である。なお、前方被写界深度Ｄ５は、被写体Ａ２と被写体Ａ１との間の距離を示している。
被写体Ａ３は、被写体Ａ１よりレンズに対して後方の位置（レンズに遠い位置）にある撮像対象物である。この被写体Ａ３は、撮像面の前（レンズに近い位置）で合焦するため撮像面における像が錯乱円となるものの、撮像面における像の錯乱円が許容錯乱円の直径（許容錯乱円Ｄ１）と同様となるため合焦しているように撮像される撮像対象物である。なお、後方被写界深度Ｄ６は、被写体Ａ３と被写体Ａ１との間の距離を示している。
同図（ｂ）には、像倍率が高い場合における被写界深度が示されている。なお、ここでは、同図（ａ）において示した撮像素子３１１およびレンズ３１２を用いて高い像倍率にしたことを想定する。すなわち、撮像素子３１１における許容錯乱円の直径およびレンズ３１２の有効口径は同図（ａ）と同様である。また、同図（ｂ）には、焦点距離（焦点距離Ｄ１３）と、被写体距離（被写体距離Ｄ１４）と、前方被写界深度（前方被写界深度Ｄ１５）とが示されている。さらに、同図（ｂ）には、後方被写界深度（後方被写界深度Ｄ１６）と、被写界深度（被写界深度Ｄ１７）と、３つの被写体（被写体Ａ１１乃至Ａ１３）とが示されている。なお、同図（ｂ）において示すことは、同図（ａ）において示していることと対応するため、ここでは、同図（ａ）との違いについて説明する。
同図（ｂ）における被写体距離（被写体距離Ｄ１４）は、同図（ａ）において示した被写体距離（被写体距離Ｄ４）と比較して、距離が短くなっている。また、同図（ｂ）における前方被写界深度（前方被写界深度Ｄ１５）、後方被写界深度（後方被写界深度Ｄ１６）、被写界深度（被写界深度Ｄ１７）も、同図（ａ）において示したそれぞれと比較して、距離が短くなっている。すなわち、同図（ａ）および同図（ｂ）には、像倍率が高くなると、被写界深度が浅くなることが示されている。
次に、被写界深度について説明する。被写界深度Ｔは、前方被写界深度Ｔｆと後方被写界深度Ｔｒとを合算することにより求めることができる。前方被写界深度Ｔｆは、次の式１により求めることができる。また、後方被写界深度Ｔｒは、次の式２により求めることができる。
Ｔｆ＝δＦＬ２／（ｆ２＋δＦＬ） ・・・式１
Ｔｒ＝δＦＬ２／（ｆ２−δＦＬ） ・・・式２
ここで、δは、許容錯乱円の直径である。許容錯乱円δは、同図（ａ）において、許容錯乱円Ｄ１として示されている。また、ｆは、焦点距離である。焦点距離ｆは、同図（ａ）および（ｂ）において、焦点距離Ｄ３およびＤ１３として示されている。
また、Ｆは、レンズのＦ値である。このレンズのＦ値Ｆは、焦点距離ｆをレンズの有効口径（有効口径Ｄ）で除算（Ｆ＝ｆ／Ｄ）することにより求めることができる。なお有効口径Ｄは、同図（ａ）において、有効口径Ｄ２として示されている。なお、Ｌは、被写体距離である。被写体距離Ｌは、同図（ａ）および（ｂ）において、被写体距離Ｄ４およびＤ１４として示されている。
上述の式１および式２に示すように、被写体距離Ｌが短くなる（レンズに被写体が近づく）ほど、被写界深度Ｔは浅くなる（分子が小さくなる）。また、焦点距離ｆが長い（ズームする）ほど、被写界深度Ｔは浅くなる（分母が大きくなる）。すなわち、近くのものを高倍率（ズーム）で撮像しようとする（例えば、マクロ撮影）ほど、被写界深度Ｔは浅くなる。
続いて、像倍率算出部１４０が算出する像倍率ついて説明する。像倍率Ｍは、次の式３に基づいて求められる。
Ｍ＝ｆ／Ｌ ・・・式３
まず、像倍率算出部１４０は、フォーカスレンズ１１２の現在の位置およびフォーカスレンズ１１２の駆動量に基づいて、被写体距離（被写体距離Ｌ）および焦点距離（焦点距離ｆ）を算出する。そして、像倍率算出部１４０は、上述の式３を用いて像倍率Ｍを算出する。
上述の式３に示すように、像倍率Ｍは、被写体距離Ｌが短くなるほど大きくなる。また、像倍率Ｍは、焦点距離ｆが長いほど大きくなる。すなわち、上述の式１および式２からわかるように、この像倍率Ｍの値が大きくなるほど被写界深度は浅くなる。
同図（ａ）および（ｂ）において示すように、像倍率が大きいことは被写界深度が浅いことを意味する。すなわち、像倍率が大きいと被写界深度が浅いため、合焦対象物が動いている場合には、合焦しにくくなる。連写判定部１６０は、この合焦しにくい状態を像倍率により検出し、そして、合焦しにくいことを検出した場合には連写と判定する。
［連写による撮像例］
図３は、本発明の第１の実施の形態における連写判定部１６０により連写することが判定された場合の撮像画像の一例を示す概念図である。
ここでは、説明の容易のため、連写の場合における撮像画像の枚数は３枚であることを想定する。
同図には、連写の場合における撮像のタイミング（撮像タイミング）と、その撮像タイミングにおいて撮像された撮像画像とが模式的に示されている。
同図では、時間軸の上に、シャッターボタンを半押ししたタイミング（半押しタイミングＢ１）と、全押ししたタイミング（全押しタイミングＢ２）と、その全押しによる撮像のタイミング（シャッタータイミングＳ１乃至Ｓ３）とが示されている。また、同図では、撮像された画像（撮像画像２３１乃至２３３）が示されている。
ここで、連写判定部１６０による連写の判定について説明する。まず、操作受付部１２０において、シャッターボタンが半押しされる（半押しタイミングＢ１）と、合焦判定部１３０により、フォーカスエリアにおける合焦対象物に対して合焦判定が行われ、デフォーカス量が算出される。そして、その算出されたデフォーカス量を示す合焦判定結果情報に基づいてレンズ駆動量生成部１７１およびレンズ駆動部１７２によりフォーカスレンズ１１２が移動され、フォーカスが一致する。続いて、移動されたフォーカスレンズ１１２の位置に基づいて、新たに合焦判定が行われ、フォーカスのズレの発生が定期的にチェックされる。
このときに、像倍率算出部１４０は、レンズの現在位置およびフォーカスレンズ１１２の駆動量に基づいて、被写体距離（被写体距離Ｌ）および焦点距離（焦点距離ｆ）を算出する。そして、像倍率算出部１４０は、図２において示した式３を用いて像倍率を算出し、その算出した像倍率を示す像倍率情報を連写判定部１６０に供給する。
そして、連写判定部１６０は、像倍率を閾値と比較して、像倍率が閾値を超えていると解析した場合に、連写を示す連写判定情報を、レンズ駆動量生成部１７１および撮像部１８１に供給する。これにより、シャッターボタンが半押しされている状態（半押しタイミングＢ１から全押しタイミングＢ２までの期間）において、連写をするための判定が完了する。
そして、シャッターボタンが全押しされる（全押しタイミングＢ２）と、フォーカスがその全押しのタイミングにおける合焦位置に固定され、その後、予め設定された所定枚数の画像が連写で生成される。なお、この画像の生成の際に、合焦判定部１３０は、デフォーカス量を取得して、その取得したデフォーカス量を画像デフォーカス情報として画像選択部１９０に供給する。すなわち、同図では、全押しタイミングＢ２でシャッターボタンが全押しされると、３枚の画像（撮像画像２３１乃至２３３）およびそれぞれの画像のデフォーカス量が、フォーカスを固定しながらの撮像により生成される。そして、画像選択部１９０により、生成された複数の画像から１枚の画像が選択される。
このように、撮像装置１００は、連写判定を行うモード（ＡＦ−Ａモード）において、像倍率が閾値を超えている場合には、フォーカスを固定して連写を行うことにより複数の撮像画像を生成する。
［単写による撮像例］
図４は、本発明の第１の実施の形態における連写判定部１６０により単写することが判定された場合の撮像画像の一例を示す概念図である。
同図には、図３において示したものと比較できるようにして、単写の場合における撮像タイミングと、撮像画像とが模式的に示されている。
図４では、時間軸の上に、シャッターボタンを半押ししたタイミング（半押しタイミングＢ１１）と、全押ししたタイミング（全押しタイミングＢ１２）と、その全押しによる撮像のタイミング（シャッタータイミングＳ１１）とが示されている。また、図４では、シャッタータイミングＳ１１において撮像された画像（撮像画像２５１）が示されている。
ここで、連写判定部１６０による単写の判定について、図３において説明した連写の判定と比較しながら簡単に説明する。半押しタイミングＢ１１から全押しタイミングＢ１２までの期間において、連写判定部１６０は、像倍率と閾値とを比較して、像倍率が閾値よりも低いと解析した場合に、単写を示す連写判定情報をレンズ駆動量生成部１７１および撮像部１８１に供給する。これにより、シャッターボタンが半押しされている状態（半押しタイミングＢ１１から全押しタイミングＢ１２までの期間）において、単写をするための判定が完了する。
そして、シャッターボタンが全押しされる（全押しタイミングＢ１２）と、１枚の画像（撮像画像２５１）が単写で生成される。
このように、撮像装置１００は、連写判定を行うモード（ＡＦ−Ａモード）において、像倍率が閾値を超えていない場合には単写を行うことにより１枚の撮像画像を生成する。
［画像選択部による画像選択の一例］
図５は、本発明の第１の実施の形態における画像選択部１９０による画像選択の一例を示す概念図である。
ここでは、１回の連写によって６枚の撮像画像を生成したことを想定して説明する。
同図には、画像選択部１９０による画像選択の方法を模式的に説明するための表が示されている。この表には画像選択の処理対象となる６枚の撮像画像を識別するための画像識別情報２６１と、各撮像画像を撮像した際のフォーカスのズレ量であるデフォーカス量２６２とが示されている。また、画像選択部１９０により選択された撮像画像を識別する選択画像識別情報２６３が示されている。
ここで、画像選択部１９０による撮像画像の選択について、同図を参照しながら説明する。
連写が行われると、撮像部１８１により生成された複数の撮像画像は画像信号処理部１８２を介して、画像選択部１９０に供給される。また、この撮像画像の供給とともに、撮像画像を生成した際のデフォーカス量が画像選択部１９０に供給される。そして、画像選択部１９０は、デフォーカス量に基づいて、複数の画像から合焦の度合いが最も高い画像を選択する。これにより、デフォーカス量が最も小さい撮像画像（画像識別情報の＃６が示す撮像画像）が選択され、この画像が選択されたことを示す選択画像識別情報が生成される。
そして、画像選択部１９０は、一連の撮像画像の画像データおよびデフォーカス量とともに、その生成した選択画像識別情報を記録制御部１８３に供給する。
なお、記録制御部１８３においては、選択された撮像画像のみを記録する設定がされている場合には、選択された撮像画像を選択画像識別情報に基づいて識別し、その識別した撮像画像を記録部１８４に記録する。一方、連写により撮像された撮像画像を全て記録する設定がされている場合には、画像管理情報を生成し、一連の撮像画像の画像データおよび画像管理情報を記録部１８４に記録する。
［記録部に記録される画像管理情報の一例］
図６は、本発明の第１の実施の形態において、連写により撮像された撮像画像を全て記録する設定がされている場合における記録部１８４に記録される画像管理情報の一例を示す概念図である。
ここでは、記録制御部１８３は、説明の便宜上、連写ごとに異なる枚数の撮像画像を生成したことを想定する。１回目の連写は６枚の撮像画像を生成し、２回目の連写は４枚の撮像画像を生成し、３回目の連写は５枚の撮像画像を生成したものとする。
同図には、連写により生成された撮像画像の画像データを管理するための画像管理情報２７０が模式的に示されている。この画像管理情報２７０には、連写の回数ごとに画像データを分類するためのグループ識別情報２７１と、記録部１８４に記録されている画像を識別するための画像識別情報２７２とが示されている。また、この画像管理情報２７０には、それぞれの画像データのデフォーカス量２７３と、各連写の回数ごとの合焦の度合いが最も高い画像を示す選択画像情報２７４とが示されている。
グループ識別情報２７１は、連写により撮像された一連の撮像画像を１つのグループとして識別するための識別情報である。
画像識別情報２７２は、撮像画像を識別するための識別情報である。
デフォーカス量２７３は、連写により撮像された撮像画像における合焦対象物に対するフォーカスの一致の度合いを識別するための識別情報である。例えば、デフォーカス量は、合焦を示すデフォーカス量を「０」として、フォーカスのズレの量を正または負の数値で示す値ある。このデフォーカス量は、ユーザが撮像画像を整理する際などにおいて、フォーカスのズレ量を認識するために用いられる。
選択画像情報２７４は、同一のグループに属する複数の撮像画像のうち、合焦対象物に対してフォーカスが最も合っている撮像画像を識別するための識別情報である。例えば、選択画像情報２７４は、選択画像は２進数の「１」の値（同図では○で表す）であり、その他の画像は「０」の値（同図では−で表す）である情報である。
この画像管理情報２７０を画像データとともに記録部１８４に保持することによって、連写により撮像された撮像画像を全て記録する場合において、デフォーカス量に基づいて選択された画像を容易に識別することができる。
［連写による撮像画像の保存方法を設定する設定画面例］
図７は、本発明の第１の実施の形態における表示部１８６に表示される設定画面であって、連写による撮像画像の保存方法を設定する設定画面の一例を示す概念図である。
同図では、連写による撮像画像からフォーカスが最も合っている撮像画像を選択し、その選択した撮像画像のみを記録部１８４に記録する機能を、「画像自動抽出」機能と称して説明する。
同図には、連写による撮像画像の保存方法を設定するための表示画面（設定画面２８０）が示されている。この設定画面２８０には、現在の表示により設定される機能のカテゴリーをユーザに視覚的に示すためのタブが表示される領域（タブ表示領域２８４）が示されている。また、設定画面２８０には、現在の設定画面において設定している機能（画像自動抽出）を示す領域（機能表示領域２８２）が示されている。さらに、設定画面２８０には、現在の設定画面において設定している機能の設定内容（画像自動抽出のオンオフ）を示す領域（設定内容表示領域２８３）が示されている。
この設定画面２８０が表示部１８６に表示されている場合において、ユーザは、機能表示領域２８２に示されている機能（画像自動抽出）のオンオフを設定することができる。具体的には、設定内容表示領域２８３に示されている選択表示（丸）を「入」にして決定することにより、連写が実行された場合には連写による複数の撮像画像から１枚の画像が選択され、その選択された画像のみが記録部１８４に記録される設定を行うことができる。また、選択表示（丸）を「切」にして決定することにより、連写が実行された場合には連写による複数の撮像画像の全てが画像管理情報とともに記録部１８４に記録される設定を行うことができる。
［撮像装置の動作例］
次に、本発明の第１の実施の形態における撮像装置１００の動作について図面を参照して説明する。
図８は、本発明の第１の実施の形態における撮像装置１００による撮像処理手順例を示すフローチャートである。
まず、撮像モードがＡＦ−Ａモードであるか否かが、制御部１２５により判断される（ステップＳ９０１）。そして、ＡＦ−Ａモードでないと判断された場合には（ステップＳ９０１）、その設定されている撮像モードに応じた撮像処理により被写体が撮像され（ステップＳ９０２）、撮像処理手順は終了する。
一方、ＡＦ−Ａモードであると判断された場合には（ステップＳ９０１）、シャッターボタンが半押しされているか否かが、制御部１２５により判断される（ステップＳ９０３）。そして、シャッターボタンが半押しされていないと判断された場合には（ステップＳ９０３）、ステップＳ９０３に戻り、シャッターボタンが半押しされるまで待機する。
一方、シャッターボタンが半押しされたと判断された場合には（ステップＳ９０３）、フォーカスが合焦対象物に合わせられるフォーカシングが、合焦判定部１３０、レンズ駆動量生成部１７１およびレンズ駆動部１７２により行われる（ステップＳ９０４）。続いて、このフォーカシングの際におけるレンズ位置およびレンズの駆動量に基づいて、像倍率が像倍率算出部１４０により算出される（ステップＳ９０５）。その後、その算出された像倍率に基づいて、像倍率が一定の条件（閾値を超える大きさ）を満たすことにより連写で撮像するか否かが、連写判定部１６０により判定される（ステップＳ９０６）。
そして、像倍率が閾値を超える大きさでなく単写により撮像すると判断された場合には（ステップＳ９０６）、シャッターボタンが全押しされたか否かが制御部１２５により判断される（ステップＳ９０７）。そして、シャッターボタンは全押しされていない（シャッターボタンから指が離された）と判断された場合には（ステップＳ９０７）、ステップＳ９０３に戻る。
一方、シャッターボタンは全押しされたと判断された場合には（ステップＳ９０７）、１枚だけ画像が撮像される単写撮像処理が行われ（ステップＳ９０８）、撮像処理手順は終了する。
一方、像倍率が閾値を超える大きさであり連写により撮像すると判断された場合には（ステップＳ９０６）、シャッターボタンは全押しされたか否かが制御部１２５により判断される（ステップＳ９０９）。そして、シャッターボタンは全押しされていない（シャッターボタンから指が離された）と判断された場合には（ステップＳ９０９）、ステップＳ９０３に戻る。
一方、シャッターボタンは全押しされたと判断された場合には（ステップＳ９０９）、所定枚数の画像が撮像される連写撮像処理が行われ（ステップＳ９１０）、撮像処理手順は終了する。なお、連写撮像処理（ステップＳ９１０）については、図９を参照して説明する。
図９は、本発明の第１の実施の形態における連写撮像処理（ステップＳ９１０）の処理手順例を示すフローチャートである。
まず、フォーカスレンズ１１２の位置が、シャッターボタンが全押しされたタイミングの合焦位置に固定される（ステップＳ９１１）。次に、撮像部１８１により被写体が撮像され、撮像画像が生成される（ステップＳ９１２）。その後、撮像画像に関するデフォーカス量が、合焦判定部１３０により算出される（ステップＳ９１３）。そして、生成された撮像画像および算出されたデフォーカス量が一時的に保持される（ステップＳ９１４）。
続いて、連写により所定枚数の撮像画像を生成したか否かが、撮像部１８１により判断される（ステップＳ９１５）。そして、所定枚数の撮像画像を生成していないと判断された場合には（ステップＳ９１５）、ステップＳ９１２に戻る。
一方、所定枚数の撮像画像が生成されたと判断された場合には（ステップＳ９１５）、デフォーカス量に基づいて、所定枚数の撮像画像から１枚の撮像画像が、画像選択部１９０により選択される（ステップＳ９１６）。続いて、１枚の撮像画像を記録する設定がされているか否かが、記録制御部１８３により判断される（ステップＳ９１７）。そして、１枚の撮像画像を記録する設定がされていないと判断された場合には（ステップＳ９１７）、全ての撮像画像が１つのグループとして記録部１８４に記録される（ステップＳ９１８）。なお、ステップＳ９１６は、特許請求の範囲に記載の入力手順および選択手順の一例である。
一方、１枚の撮像画像を記録する設定がされている場合には（ステップＳ９１７）、画像選択部１９０により選択された１枚の画像が記録部１８４に記録される（ステップＳ９１９）。
このように、本発明の第１の実施の形態によれば、被写体を連写で撮像するか否かを像倍率に基づいて自動的に判定することができる。さらに、この判定に基づいて連写されて複数の撮像画像が生成された場合には、位相差検出方式を用いて複数の撮像画像ごとに検出されたデフォーカス量に基づいて、合焦状態が最も良好な画像を選択することができる。
なお、本発明の第１の実施の形態の撮像装置１００は、具体例には、次に示すような場合において、効果的に利用することができる。屋外で花などをマクロ撮影（高い像倍率）する場合において、ユーザは遠近感（パースペクティブ）を演出するため、ズーム倍率を上げたり絞りを開いたりすることにより被写界深度を浅くして撮像することが多い。このときに、花が風で揺れると、被写界深度が浅いがためにフォーカスが著しくズレる。このズレに対してオートフォーカスで合焦させようとすると、花の揺れに対してフォーカシングを行い続けるために、フォーカスが合って欲しい場所にフォーカスを合わせて撮像することが難しくなる。
このような場合において、撮像装置１００は、像倍率に基づいて、フォーカスの位置を固定して連写する撮像を自動的に行う。これにより、ユーザが目的とする撮像画像の取得の可能性を向上させることができる。また、撮像装置１００は、位相差検出方式により検出した撮像画像のデフォーカス量に基づいて、最もフォーカスが合っている撮像画像を選択する。これにより、ユーザが目的とする撮像画像を自動的に選択（抽出）することができる。
なお、本発明の第１の実施の形態においては、撮像装置１００はＡＦ−Ａモードの際の像倍率に基づいて連写する例について説明したが、これに限定されるものではない。モードに関しては、オートフォーカスによりフォーカス位置を決定するモードであればよい。
また、撮像装置１００は、像倍率のみで連写を判断したが、これに限定されるものではない。例えば、像倍率に加えて絞りの状態（Ｆ値）を連写判定の条件に加えることにより、フォーカスのズレ易さをさらに細かく判定することができる。また、撮像装置に接写（マクロ撮影）のためのマクロモードが備えられている場合において、撮影モードがこのマクロモードに設定されていることを条件に連写モードを設定するようにしてもよい。
＜２．第２の実施の形態＞
本発明の第１の実施の形態では、被写体を連写で撮像するか否かを像倍率に基づいて自動的に判定する例について説明した。なお、この例においては、像倍率が高いと自動的に連写するため、場合によると、突然の連写により驚いたユーザがカメラを動かしてしまう可能性がある。
そこで、本発明の第２の実施の形態では、像倍率の検出に加えて、撮像装置の固定の有無を検出して連写判定をする撮像装置の例について、図１０乃至図１３を参照して説明する。
［撮像装置の機能構成例］
図１０は、本発明の第２の実施の形態における撮像装置３００の機能構成例を示すブロック図である。
この撮像装置３００は、図１において示した撮像装置１００の連写判定部１６０に代えて、連写判定部１６１を備える。さらに、撮像装置３００は、三脚検出部３１０を備える。この図１０では、連写判定部１６１および三脚検出部３１０に着目して説明する。
三脚検出部３１０は、撮像装置３００が固定されているか否かを検出するものである。この三脚検出部３１０は、例えば、ジャイロセンサが生成する角速度の時間的遷移に基づいて、撮像装置３００が三脚などにより固定されているか否かを検出する。三脚検出部３１０は、三脚により固定されているか否かを示す情報（装置固定情報）を、連写判定部１６１に供給する。なお、三脚検出部３１０は、特許請求の範囲に記載の判定部の一例である。
連写判定部１６１は、図１において示した連写判定部１６０と同様に、複数の枚数の画像を連続で撮像（連写）するか否かを判定するものである。この連写判定部１６１は、制御部１２５から連写判定開始情報が供給された場合には、像倍率算出部１４０から供給された像倍率情報および三脚検出部３１０から供給された装置固定情報に基づいて、連写するか否かを判定する。例えば、連写判定部１６１は、像倍率情報により特定される像倍率が閾値を超えているとともに、装置固定情報が三脚による固定を示している場合には、連写すると判断する。また、像倍率情報により特定される像倍率が閾値を超えていても、装置固定情報が三脚による固定を示していない場合には、単写すると判定する。また、像倍率情報により特定される像倍率が閾値を超えていない場合には、単写すると判定する。連写判定部１６１は、判定結果を示す連写判定情報を、レンズ駆動量生成部１７１および撮像部１８１に供給する。なお、連写判定部１６１による判定については、図１１および図１２を参照して説明する。
なお、三脚検出部３１０は、ジャイロセンサが生成する角速度の時間的遷移に基づいて固定を検出したが、これに限定されるものではない。例えば、撮像装置における三脚が接続されるところに配置されたスイッチにより三脚が検出されるようにしてもよい。
［連写による撮像例］
図１１は、本発明の第２の実施の形態における連写判定部１６１により連写することが判定された場合の一例を示す概念図である。
同図（ａ）には、撮像装置３００と、撮像装置３００を固定している三脚（三脚４１０）と、撮像の対象物（撮像対象物）である花（花４１１）とが示されている。この同図（ａ）では、撮像装置３００を三脚４１０で固定しながら花４１１を接写（マクロ撮影）している様子が示されている。同図（ａ）に示すような接写をしている場合において、連写判定部１６１は、像倍率が閾値を超えていることおよび撮像装置３００が固定されていることに基づいて、連写すると判定する。
同図（ｂ）には、連写の場合における撮像タイミングと撮像画像とが模式的に示されている。なお、同図（ｂ）の説明については、連写判定部１６１による連写の判定以外は図３の説明と略同様のものであるため、ここでの説明を省略する。
ここで、連写判定部１６１による連写の判定について説明する。シャッターボタンが半押しされる（半押しタイミングＢ２１）と、像倍率算出部１４０による像倍率の算出とともに、三脚検出部３１０による三脚の検出が行われる。三脚検出部３１０は、角速度の時間遷移から撮像装置３００は固定されている（三脚が装着されている）ことを検出し、固定を示す装置固定情報を連写判定部１６１に供給する。
そして、連写判定部１６１は、像倍率および装置固定情報に基づいて連写すると判定する。続いて、シャッターボタンが全押しされる（全押しタイミングＢ２２）と、フォーカスがその全押しのタイミングにおける合焦位置に固定され、そして、３枚の画像（撮像画像４３１乃至４３３）がデフォーカス量とともに連写で生成される。
このように、撮像装置３００は、像倍率が閾値を超えているとともに、撮像装置３００が固定されている状況において、フォーカスを固定して自動的に連写を行うことにより複数の撮像画像を生成する。
［単写による撮像例］
図１２は、本発明の第２の実施の形態における連写判定部１６１により単写することが判定された場合の一例を示す概念図である。
同図（ａ）には、撮像装置３００と、撮像装置３００を手で保持している人物（人物４３１）と、撮像対象物である花（花４１１）とが示されている。この同図（ａ）では、人物４３１が撮像装置３００を手で支えながら花４１１を接写している様子が示されている。同図（ａ）に示すような接写をしようとしている場合において、連写判定部１６１は、像倍率が閾値を超えていることと、撮像装置３００が固定されていない（例えば、角速度から手ブレを検出）こととに基づいて、単写すると判定する。
同図（ｂ）には、単写の場合における撮像タイミングと、シャッタータイミングＳ３１において撮像された撮像画像とが模式的に示されている。なお、同図（ｂ）の説明については、連写判定部１６１による連写の判定以外は図４の説明と略同様のものであるため、ここでの説明を省略する。
ここで、連写判定部１６１による単写の判定について、図１１において説明した連写の判定と比較しながら簡単に説明する。半押しタイミングＢ３１から全押しタイミングＢ３２までの期間において、連写判定部１６１は、像倍率が閾値を超えているものの、撮像装置３００が固定されていないと解析する。そして、連写判定部１６１は、単写を示す連写判定情報を、レンズ駆動量生成部１７１および撮像部１８１に供給する。続いて、シャッターボタンが全押しされる（全押しタイミングＢ３２）と、１枚の画像（撮像画像４５１）が単写で生成される。
このように、撮像装置３００は、像倍率が閾値を超えていても撮像装置が固定されていない場合には単写を行い、１枚の撮像画像を生成する。
［撮像装置の動作例］
次に、本発明の第２の実施の形態における撮像装置３００の動作について図面を参照して説明する。
図１３は、本発明の第２の実施の形態における撮像装置３００による撮像処理手順例を示すフローチャートである。この処理手順は、図８の変形例であり、撮像装置が三脚により固定されているか否かに応じて撮像処理を変更する点が異なる。また、この点以外については、図８と同一であるため、図８と共通する部分については、同一の符号を付してこれらの説明の一部を省略する。
像倍率が一定の条件（閾値を超える大きさ）を満たすと判定された後に（ステップＳ９０６）、撮像装置が固定されているか否かが、装置固定情報に基づいて連写判定部１６１により判定される（ステップＳ９３１）。そして、撮像装置が固定されていないと判定された場合には（ステップＳ９３１）、ステップＳ９０７に進む。
一方、撮像装置が固定されていると判定された場合には（ステップＳ９３１）、ステップＳ９０９に進む。
このように、本発明の第２の実施の形態によれば、被写体を連写で撮像するか否かを、像倍率および撮像装置の固定状況に基づいて自動的に判定することができる。これにより、連写に起因するユーザへの影響（ユーザが驚いてカメラを動かす等）を軽減することができる。
＜３．第３の実施の形態＞
本発明の第２の実施の形態では、被写体を連写で撮像するか否かを、三脚による固定の有無および像倍率に基づいて自動的に判定する例について説明した。なお、第１および第２の実施の形態の例においては、シャッタスピードが遅い場合（露光時間が長い場合）において連写すると、被写体ブレが発生してボヤけた撮像画像を複数生成することになり、無駄な撮像を繰り返すことになる。
そこで、本発明の第３の実施の形態では、シャッタスピード（露光時間）に応じて連写を設定することができる撮像装置の例について、図１４および図１５を参照して説明する。
［撮像装置の機能構成例］
図１４は、本発明の第３の実施の形態における撮像装置５００の機能構成例を示すブロック図である。
この撮像装置５００は、図１において示した撮像装置１００の連写判定部１６０に代えて、連写判定部１６２を備える。さらに、撮像装置５００は、露出算出部５１０を備える。この図１４では、連写判定部１６２および露出算出部５１０に着目して説明する。
また、同図では、レンズ駆動部１７２は露出算出部５１０から供給される絞り値に関する情報に基づいて、絞りを制御することを想定する。また、撮像部１８１は、露出算出部５１０から供給されるシャッタスピードに関する情報に基づいてシャッタスピードを制御することを想定する。
露出算出部５１０は、被写体からの入射光および撮像素子の感度の設定に基づいて、シャッタスピードおよび絞り値を算出するものである。この露出算出部５１０は、算出した絞り値に関する情報をレンズ駆動部１７２に供給する。また、露出算出部５１０は、算出したシャッタスピードに関する情報（シャッタスピード情報）を、連写判定部１６２および撮像部１８１に供給する。
連写判定部１６２は、図１において示した連写判定部１６０と同様に、複数の枚数の画像を連写するか否かを判定するものである。この連写判定部１６２は、制御部１２５から連写判定開始情報が供給された場合には、像倍率算出部１４０から供給された像倍率情報および露出算出部５１０から供給されたシャッタスピード情報に基づいて、連写するか否か判断する。例えば、連写判定部１６２は、像倍率情報により特定される像倍率が像倍率の閾値を超えているとともに、シャッタスピード情報が示すシャッタスピードがシャッタスピードの閾値を超えていない場合（シャッタスピードが速い場合）には、連写すると判断する。また、像倍率が閾値を超えていて、シャッタスピードも閾値を超えていえる場合（シャッタスピードが遅い場合）には、単写すると判定する。また、像倍率が閾値を超えていない場合には、単写すると判定する。連写判定部１６２は、判定結果を示す連写判定情報を、レンズ駆動量生成部１７１および撮像部１８１に供給する。
［撮像装置の動作例］
次に、本発明の第３の実施の形態における撮像装置５００の動作について図面を参照して説明する。
図１５は、本発明の第３の実施の形態における撮像装置５００による撮像処理手順例を示すフローチャートである。この処理手順は、図８の変形例であり、シャッタスピードが閾値を超えているか否かに応じて撮像処理を変更する点が異なる。また、この点以外については、図８と同一であるため、図８と共通する部分については、同一の符号を付してこれらの説明の一部を省略する。
像倍率が一定の条件（閾値を超える大きさ）を満たすと判定された後に（ステップＳ９０６）、シャッタスピードが一定の条件（閾値よりも小さい）を満たしているか否かが、連写判定部１６２により判定される（ステップＳ９４１）。そして、一定の条件を満たしていない（閾値を超えている）と判断された場合には（ステップＳ９４１）、ステップＳ９０７に進む。
一方、一定の条件を満たしている（閾値よりも小さい）と判定された場合には（ステップＳ９４１）、ステップＳ９０９に進む。
このように、本発明の第３の実施の形態によれば、被写体を連写で撮像するか否かを、像倍率およびシャッタスピードに基づいて自動的に判定することができる。これにより、例えば、手ブレが起こるような遅いシャッタスピードで撮像する場合（例えば、手ブレの警告アイコンが表示部１８６に表示される）においては、単写により被写体を撮像することができる。
このように、本発明の実施の形態では、位相差検出方式を用いて合焦状態が良好な画像を選択することができる。
なお、本発明の実施の形態は本発明を具現化するための一例を示したものであり、本発明の実施の形態において明示したように、本発明の実施の形態における事項と、特許請求の範囲における発明特定事項とはそれぞれ対応関係を有する。同様に、特許請求の範囲における発明特定事項と、これと同一名称を付した本発明の実施の形態における事項とはそれぞれ対応関係を有する。ただし、本発明は実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において実施の形態に種々の変形を施すことにより具現化することができる。
また、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。この記録媒体として、例えば、ＣＤ（Compact Disc）、ＭＤ（MiniDisc）、ＤＶＤ（Digital Versatile Disk）、メモリカード、ブルーレイディスク（Blu-ray Disc（登録商標））等を用いることができる。
１００ 撮像装置
１１０ 鏡筒
１１１ ズームレンズ
１１２ フォーカスレンズ
１２０ 操作受付部
１２５ 制御部
１３０ 合焦判定部
１４０ 像倍率算出部
１６０、１６１、１６２ 連写判定部
１７１ レンズ駆動量生成部
１７２ レンズ駆動部
１８１ 撮像部
１８２ 画像信号処理部
１８３ 記録制御部
１８４ 記録部
１８５ 表示制御部
１８６ 表示部
１９０ 画像選択部

Claims (10)

  1. 時系列で連続する一連の画像を生成する連写撮像動作により生成された複数の画像であって、前記複数の画像の各々を生成する際における分割された被写体の像の間のズレ量に基づいて検出されたフォーカスのズレ量が画像ごとに関連付けられている複数の画像を入力する入力部と、
    前記複数の画像のうちからフォーカスのズレ量が最も小さい画像を選択する選択部と
    を具備する画像処理装置。
  2. 前記フォーカスのズレ量を、位相差検出による焦点検出により算出するズレ量算出部をさらに具備する請求項１記載の画像処理装置。
  3. 被写体を撮像して画像を生成する撮像部と、
    前記フォーカスのズレ量に基づいてフォーカスを制御するフォーカス制御部と、
    前記連写撮像動作により複数の画像が生成される際には、当該複数の画像の撮像動作開始から撮像動作終了までの期間における前記フォーカス制御を停止させる制御部と
    をさらに具備する請求項２記載の画像処理装置。
  4. 被写体を撮像して画像を生成する撮像部と、
    焦点距離と被写体距離とに基づいて像倍率を算出する像倍率算出部と、
    前記算出された像倍率が一定の条件を満たす場合には、撮像モードとして、前記連写撮像動作を行う連写モードを設定する設定部と
    をさらに具備する請求項１記載の画像処理装置。
  5. 前記設定部は、前記算出された像倍率が所定の像倍率を基準にして大きいことを前記一定の条件にして、前記連写モードを設定する請求項４記載の画像処理装置。
  6. 前記画像処理装置の固定の有無を判定する判定部をさらに具備し、
    前記設定部は、前記像倍率が前記一定の条件を満たすとともに、前記画像処理装置が固定されていることが判定された場合にのみ前記連写モードを設定する請求項４記載の画像処理装置。
  7. 前記設定部は、前記像倍率が前記一定の条件を満たすとともに、前記複数の画像を撮像する際のシャッタスピードが所定の速度を基準にして速い場合にのみ前記連写モードを設定する請求項４記載の画像処理装置。
  8. 被写体を撮像して画像を生成する撮像部と、
    焦点距離と被写体距離とに基づいて像倍率を算出する像倍率算出部と、
    前記算出された像倍率が一定の条件を満たす場合には、撮像のモードとして、時系列で連続する一連の画像を生成する連写撮像動作により複数の画像を生成する連写モードを設定する設定部と
    を具備する撮像装置。
  9. 時系列で連続する一連の画像を生成する連写撮像動作により生成された複数の画像であって、前記複数の画像の各々を生成する際における分割された被写体の像の間のズレ量に基づいて検出されたフォーカスのズレ量が画像ごとに関連付けられている複数の画像を入力する入力手順と、
    前記複数の画像のうちからフォーカスの合っている度合いが最も高い画像を、前記フォーカスのズレ量に基づいて選択する選択手順と
    を具備する画像処理方法。
  10. 時系列で連続する一連の画像を生成する連写撮像動作により生成された複数の画像であって、前記複数の画像の各々を生成する際における分割された被写体の像の間のズレ量に基づいて検出されたフォーカスのズレ量が画像ごとに関連付けられている複数の画像を入力する入力手順と、
    前記複数の画像のうちからフォーカスの合っている度合いが最も高い画像を、前記フォーカスのズレ量に基づいて選択する選択手順と
    をコンピュータに実行させるプログラム。
JP2010123732A 2010-05-31 2010-05-31 画像処理装置、画像処理方法およびプログラム Expired - Fee Related JP5521786B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2010123732A JP5521786B2 (ja) 2010-05-31 2010-05-31 画像処理装置、画像処理方法およびプログラム
CN2011101210484A CN102263896A (zh) 2010-05-31 2011-05-11 图像处理单元、图像处理方法和程序
US13/106,174 US8711229B2 (en) 2010-05-31 2011-05-12 Image processing unit, image processing method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010123732A JP5521786B2 (ja) 2010-05-31 2010-05-31 画像処理装置、画像処理方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2011250336A true JP2011250336A (ja) 2011-12-08
JP5521786B2 JP5521786B2 (ja) 2014-06-18

Family

ID=45010331

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010123732A Expired - Fee Related JP5521786B2 (ja) 2010-05-31 2010-05-31 画像処理装置、画像処理方法およびプログラム

Country Status (3)

Country Link
US (1) US8711229B2 (ja)
JP (1) JP5521786B2 (ja)
CN (1) CN102263896A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015049370A (ja) * 2013-09-02 2015-03-16 株式会社ニコン 撮像装置
JP2015118338A (ja) * 2013-12-19 2015-06-25 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
JP2018074361A (ja) * 2016-10-28 2018-05-10 キヤノン株式会社 撮像装置、撮像方法およびプログラム

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8970738B2 (en) * 2011-06-30 2015-03-03 Nokia Corporation Arrangement for macro photography
JP5959871B2 (ja) * 2012-02-15 2016-08-02 キヤノン株式会社 撮像装置、その制御方法、および制御プログラム
CN104185981A (zh) * 2013-10-23 2014-12-03 华为终端有限公司 从连拍图像中选择图像的方法和终端
CN104361070B (zh) * 2014-11-11 2018-05-08 惠州Tcl移动通信有限公司 节省存储空间的连拍照片存储方法、照片还原方法及系统
CN104967786B (zh) * 2015-07-10 2019-03-12 广州三星通信技术研究有限公司 图像选择方法及装置
CN105894031A (zh) * 2016-03-31 2016-08-24 青岛海信移动通信技术股份有限公司 一种照片选择的方法及装置
WO2020195215A1 (ja) 2019-03-25 2020-10-01 日本電気株式会社 画像処理装置および画像処理方法
EP4047923A4 (en) * 2020-12-22 2022-11-23 Samsung Electronics Co., Ltd. ELECTRONIC DEVICE COMPRISING A CAMERA AND THEIR METHOD
CN115209052B (zh) * 2022-07-08 2023-04-18 维沃移动通信（深圳）有限公司 图像筛选方法、装置、电子设备及存储介质

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030063322A1 (en) * 2001-10-01 2003-04-03 Ayumi Itoh Image taking apparatus
JP2004135029A (ja) * 2002-10-10 2004-04-30 Fuji Photo Film Co Ltd デジタルカメラ
JP4293089B2 (ja) * 2004-08-05 2009-07-08 ソニー株式会社 撮像装置、撮像制御方法およびプログラム
JP2008009341A (ja) * 2006-06-30 2008-01-17 Sony Corp オートフォーカス装置、撮像装置及びオートフォーカス方法
JP4727534B2 (ja) * 2006-08-28 2011-07-20 富士フイルム株式会社 撮像装置
JP4898475B2 (ja) * 2007-02-05 2012-03-14 富士フイルム株式会社 撮影制御装置、撮影装置、及び撮影制御方法
JP5005570B2 (ja) * 2008-02-04 2012-08-22 株式会社リコー 画像処理装置およびプログラム
JP5317562B2 (ja) * 2008-07-17 2013-10-16 キヤノン株式会社 位相差検出装置、撮像装置、位相差検出方法、位相差検出プログラム
EP2335551B1 (en) * 2008-10-22 2014-05-14 Fujifilm Corporation Endoscope apparatus and control method therefor
US8558940B2 (en) * 2008-11-27 2013-10-15 Nikon Corporation Image sensor and image-capturing device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015049370A (ja) * 2013-09-02 2015-03-16 株式会社ニコン 撮像装置
JP2015118338A (ja) * 2013-12-19 2015-06-25 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
JP2018074361A (ja) * 2016-10-28 2018-05-10 キヤノン株式会社 撮像装置、撮像方法およびプログラム

Also Published As

Publication number Publication date
US8711229B2 (en) 2014-04-29
JP5521786B2 (ja) 2014-06-18
US20110292235A1 (en) 2011-12-01
CN102263896A (zh) 2011-11-30

Similar Documents

Publication Publication Date Title
JP5521786B2 (ja) 画像処理装置、画像処理方法およびプログラム
US9888182B2 (en) Display apparatus
JP4886210B2 (ja) 撮像装置
JP5231277B2 (ja) 撮像装置、撮像方法
JP2011248159A (ja) 撮像装置、撮像システム、撮像装置の制御方法およびプログラム
JP2007192859A (ja) 合焦制御装置、及び撮像装置
JP6154081B2 (ja) 撮影装置、撮影装置本体、及びレンズ鏡筒
JP2010045625A (ja) 撮像装置
JP2008262049A (ja) オートフォーカス装置、撮像装置及びオートフォーカス方法
JP2008135812A (ja) 撮像装置、撮像方法、およびプログラム
US9591202B2 (en) Image processing apparatus and image processing method for generating recomposed images
JP6808340B2 (ja) レンズ制御装置、制御方法
JP5403111B2 (ja) 画像追尾装置
JP2002122776A (ja) オートフォーカス制御装置、それを備えたデジタルスチルカメラとデジタルビデオカメラおよびオートフォーカス制御方法、並びにオートフォーカス制御プログラムを記録した記録媒体
JP2011118021A (ja) 撮像装置及びその制御方法
JP2014134697A (ja) 撮像装置
JP2011013499A (ja) 撮像装置
JP4933347B2 (ja) 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP2019106725A (ja) 撮像装置
JP6329400B2 (ja) 画像処理装置、画像処理方法およびプログラム、並びに撮像装置
JP6504693B2 (ja) 撮像装置、操作支援方法及び操作支援プログラム
JP2004287455A (ja) 撮像装置及びそのピント表示方法
JP5135813B2 (ja) 光学系駆動装置およびカメラ
JP3661233B2 (ja) 撮像装置及びそのピント表示方法
KR101176840B1 (ko) 촬영장치 및 이에 적용되는 자동 초점 검출방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130403

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140311

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140324

LAPS Cancellation because of no payment of annual fees