JP2013150159A - 撮像装置 - Google Patents

Abstract

【課題】消費電力を抑制しつつ、ライブビューの表示間隔を制御してシャッターチャンスを増大させると共に、違和感の無いライブビュー表示を行う。
【解決手段】 撮像装置は、被写体を撮像する撮像部と、撮像された画像データを画像処理する画像処理部と、前記画像処理部で画像処理された画像データに基づく表示を行う表示部と、ユーザによって撮影準備が行われたことを検出する撮影準備検出部と、前記撮影準備検出部の検出結果に基づいて、ユーザによる撮影に先立って、ライブビュー表示のフレームレートを決定するフレームレート決定部と、前記撮像部、前記画像処理部及び前記表示部を制御して、前記フレームレート決定部において決定されたフレームレートでのライブビュー表示を可能にする制御部とを具備する。
【選択図】図１

Description

本発明は、高速なフレームレートのライブビュー機能を有する撮像装置に関する。

近年、デジタルカメラなどの撮影機能付き携帯機器（撮像装置）が普及している。この種の撮像装置においては、撮像する画像を確認するためにライブビュー機能を搭載したものがある。ライブビュー機能は、撮影待機中において、レンズを通して撮影される撮像画像（ライブビュー）を表示パネルの画面上に表示する機能であり、光学的なファインダを備えていない場合でも、撮影する被写体や画角を確認することができる。しかも、ライブビューモードでは、実際の撮影時と同様の撮影処理と画像処理とを繰り返して表示を行っており、ライブビューの明るさや色合い、コントラストは、実際に撮影した得られる画像と同様であり、光学的なファインダでは実現できない最終的な仕上がりの確認を撮影前に行うことができる。

特開２００２−３００４５７号公報

ところで、ライブビューでは、撮影処理と画像処理とを経て表示が行われることから、被写体からの光学像の入射からライブビューの表示までには一定の遅延時間を要する。特に、撮影、画像処理、表示処理が同期して行われる撮像装置においては、ライブビューの表示間隔の整数倍で遅延が生じる。

この遅延によって、比較的早く動く被写体については、ライブビュー表示上の位置と実際の位置とのずれが大きくなりやすく、シャッターチャンスを逃す虞が生じる。

そこで、この遅延を短くするために、ライブビューの表示間隔を短くする、即ち表示フレームレートを高くする方法が考えられる。しかしながら、フレームレートを高くすると、単位時間当たりに必要な撮影処理及び画像処理の回数が増加し、消費電力が増大するという問題があった。

なお、特許文献１においては、フォーカス動作中において、撮影範囲の一部分のみを撮影し画像処理を行ってライブビュー表示し、それ以外の部分はフリーズ画とすることで、高速なフォーカス処理を実現する方法が記載されている。

しかしながら、特許文献１の提案においては、ライブビューにおける一部の画像は静止したままである。このため、特にスポーツのような動きの激しいシーンを撮影する場合等において、被写体を見逃してシャッターチャンスを逃しやすくなってしまう。また、ライブビューとして違和感のある表示になってしまうという問題もある。

本発明は、消費電力を抑制しつつ、ライブビューの表示間隔を制御してシャッターチャンスを増大させると共に、違和感の無いライブビュー表示を行うことができる撮像装置を提供することを目的とする。

本発明に係る撮像装置は、被写体を撮像する撮像部と、撮像された画像データを画像処理する画像処理部と、前記画像処理部で画像処理された画像データに基づく表示を行う表示部と、ユーザによって撮影準備が行われたことを検出する撮影準備検出部と、前記撮影準備検出部の検出結果に基づいて、ユーザによる撮影に先立って、ライブビュー表示のフレームレートを決定するフレームレート決定部と、前記撮像部、前記画像処理部及び前記表示部を制御して、前記フレームレート決定部において決定されたフレームレートでのライブビュー表示を可能にする制御部とを具備する。

また、本発明に係る撮像装置は、被写体を撮像する撮像部と、撮像された画像データを画像処理する画像処理部と、前記画像処理部で画像処理された画像データに基づく表示を行う表示部と、前記撮像部によって撮像された撮像画像中の被写体の動きの度合いに対応する被写体影響度を求める被写体影響度検出部と、前記被写体影響度検出部の検出結果に基づいて、ライブビューのフレームレートを決定するフレームレート決定部と、前記撮像部、前記画像処理部及び前記表示部を制御して、前記フレームレート決定部において決定されたフレームレートでのライブビュー表示を可能にする制御部とを具備する。

本発明によれば、消費電力を抑制しつつ、ライブビューの表示間隔を制御してシャッターチャンスを増大させると共に、違和感の無いライブビュー表示を行うことができるという効果を有する。

本発明の第１の実施の形態に係る撮像装置の回路構成を示すブロック図。 カメラ制御を示すフローチャート。 図２中のステップＳ１１におけるフレームレート制御を示すフローチャート。 ユーザの指と表示パネルとの位置関係を示す説明図。 ユーザの指４５と表示パネル３９との位置関係を示す説明図。 ユーザの指４５と表示パネル３９との位置関係を示す説明図。 第１の実施の形態の変形例において採用されるフレームレート制御を示すフローチャート。 第２の実施の形態において採用されるフレームレート制御を示すフローチャート。 第３の実施の形態において採用されるフレームレート制御を示すフローチャート。 第４の実施の形態において採用されるフレームレート制御を示すフローチャート。 第５の実施の形態において採用されるフレームレート制御を示すフローチャート。 第６の実施の形態において採用されるフレームレート制御を示すフローチャート。

以下、図面を参照して本発明の実施の形態について詳細に説明する。

（第１の実施の形態）
図１は本発明の第１の実施の形態に係る撮像装置の回路構成を示すブロック図である。

撮像装置を構成するカメラ部本体２０には、交換式レンズ１０が着脱自在に取り付けられている。交換式レンズ１０は、レンズ１２を有しており、レンズ１２は被写体からの光学像を絞り１３を介してカメラ部本体２０に導く。レンズ１２としては、フォーカス機能を有していてもよく、また、ズーム機能を有していてもよい。ドライバ１４は、レンズ制御部１５に制御されて、フォーカスレンズやズームレンズを駆動すると共に、絞り１３を駆動することができるようになっている。

レンズ制御部１５は、Ｉ／Ｆ２１を介してカメラ部本体２０の制御部２７との間で情報の送受を行う。レンズ制御部１５は、カメラ部本体２０の制御部２７との間の通信が確立すると、メモリ１６に格納されているレンズに関する情報を制御部２７に送信することができる。これにより、カメラ部本体２０の制御部２７は、交換式レンズ１０のズーム倍率、焦点距離、明るさナンバー等を認識することができる。なお、本実施の形態においては交換式レンズ１０に限らず種々の交換式レンズ或いは交換できない固定式のレンズを採用してもよい。

交換式レンズ１０からの被写光学像は、シャッタ２２を介して撮像素子２３に入射される。撮像素子２３は、ＣＣＤやＣＭＯＳセンサ等によって構成され、制御部２７に制御されて、入射光を光電変換して画像信号をアナログ処理部２４に出力する。アナログ処理部２４は、入力された画像信号に対してノイズ除去や増幅処理等を行って、Ａ／Ｄ変換部２５に出力する。Ａ／Ｄ変換部２５は、入力された画像信号をデジタル信号に変換し、バス２６を介して作業用のＳＤＲＡＭ３０に与えて記憶させる。

制御部２７は、ＳＤＲＡＭ３０に記憶されている例えばＲＡＷデータ等の画像信号を読み出して、画像処理部３１に与える。画像処理部３１は、所定の信号処理、例えば、同時化処理、色信号生成処理、ホワイトバランス処理、γ変換処理、マトリックス変換処理、その他各種のデジタル処理を行って、処理後の画像信号をＳＤＲＡＭ３０に格納する。

ＡＥ処理部３２は、ＳＤＲＡＭ３０に記憶された画像を読み出して露出制御用のＡＥ評価値を算出して、ＡＥ信号を出力する。このＡＥ信号は制御部２７によって交換式レンズ１０のレンズ制御部１５に供給される。これにより、レンズ制御部１５は、絞り１３等を駆動して、露出制御を行う。

ＡＦ処理部３３は、ＳＤＲＡＭ３０に記憶された画像を読み出してフォーカス制御用のＡＦ評価値を算出して、ＡＦ信号を出力する。このＡＦ信号は制御部２７によって交換式レンズ１０のレンズ制御部１５に供給される。これにより、レンズ制御部１５は、レンズ１２等を駆動して、フォーカス制御を行う。

カメラ部本体２０には、画像圧縮伸張部３４が設けられている。画像圧縮伸張部３４は、制御部２７によってＳＤＲＡＭ３０に記憶されている画像信号が与えられて圧縮処理を行う。制御部２７は、圧縮後の画像信号をメモリＩ／Ｆ３６に与えて記録させることができる。メモリＩ／Ｆ３６は、入力された圧縮画像信号をメモリカード等の記録媒体３７に記録すると共に、記録媒体３７に記録されている画像信号を読み出す。画像圧縮伸張部３４はメモリＩ／Ｆ３６によって読み出された画像信号を伸張処理することができる。

また、カメラ部本体２０には表示駆動部３８が設けられている。表示駆動部３８は、表示パネル３９を駆動して、各種表示を行う。制御部２７は、表示パネル３９の画像表示を制御する表示制御部（図示せず）を有しており、ＳＤＲＡＭ３０に記憶されている画像処理後の画像信号を表示駆動部３８に与えて、画像処理後の画像を表示パネル３９上に表示させる。

なお、制御部２７は、ＳＤＲＡＭ３０に記憶されている撮像画像だけでなく、メモリＩ／Ｆ３６からの再生画像についても表示パネル３９に与えて、これらの画像を表示させることもできるようになっている。更に、制御部２７は、カメラ部本体２０に対する各種操作を行うためのメニュー表示等を表示パネル３９に表示させることもできるようになっている。表示パネル３９は、カメラ部本体２０の例えば背面に設けられており、撮影者は、撮影時に表示パネル３９の表示画面を視認可能になっている。表示パネル３９としては、ＬＣＤパネル等を採用可能である。

また、カメラ部本体２０には、操作部２８及びタッチパネル４０も配設されている。操作部２８は、カメラ部本体２０に設けられた撮影開始終了ボタンや撮影モード設定等の図示しない各種スイッチに対するユーザ操作に基づく操作信号を発生して、制御部２７に出力するようになっている。タッチパネル４０は、ユーザのタッチ操作に基づく操作信号を発生して、制御部２７に出力するようになっている。制御部２７は、操作信号に基づいて、各部を制御する。なお、制御部２７は、タイマー機能を有しており、各種時間を計測することができるようになっている。

なお、タッチパネル４０を表示パネル３９の表示画面上に配設することも可能である。タッチパネル４０は、ユーザが指で指し示した位置に応じた操作信号を発生する。タッチパネル４０を表示パネル３９の表示画面上に設けた場合には、ユーザは、表示パネル３９の表示画面上に表示された各種コマンドボタンを、タッチパネル４０により指示することができる。これにより、タッチパネル４０は表示パネル３９の表示画面上に表示された各種コマンドボタンに対応した操作信号を制御部２７に出力することができる。

なお、撮影準備検出部としてのタッチパネル４０は、例えば静電容量方式を採用して、タッチパネル４０の表面とユーザの指との間の距離に応じた出力を出力することができるようになっており、制御部２７は、ユーザの指とタッチパネル４０の表面との距離を段階的に検出することができるようになっている。

本実施の形態においては、制御部２７は、各部を制御して、ライブビューモードを設定可能である。制御部２７は、各部を制御して、例えば、露光、画像取り込み、画像処理等に関する各種の同期制御を行う。即ち、制御部２７は、絞り１３の絞り量の制御、撮像素子２３の感度の制御、撮像素子２３の電子シャッタによる露光制御等の撮影処理を行うと共に、これらの撮影処理に同期して、画像処理及び表示処理を行って、ライブビューを実現する。更に、制御部２７は、撮影処理、画像処理及び表示処理の処理速度を制御することで、ライブビューのフレームレートを制御可能である。

制御部２７は、フレームレート変更制御部３５の変更指示に従って、ライブビューにおけるフレームレートを変更するようになっている。フレームレート変更制御部３５は、例えば、ユーザの撮影準備のための操作を検出して、検出結果に基づいてフレームレートの変更を指示するようになっている。

フレームレート変更制御部３５は、ユーザの指が、表示パネル３９の表面に対してどの程度近づいたかをタッチパネル４０の出力によって検出することで、ユーザの撮影準備の操作を検出することができる。フレームレート変更制御部３５は、検出結果に応じてフレームレートの変更を指示する。例えば、フレームレート変更制御部３５は、ユーザの指とパネル表面との距離が例えば１ｃｍ以下の近接した距離であるか、１〜３ｃｍの中間距離であるか、それ以上の離間距離であるかに基づいて、ユーザの撮影準備の段階を検出し、各段階に応じてフレームレートの変更を指示する。なお、フレームレート変更制御部３５は、表示パネル３９上に表示された撮影を指示するボタン（以下、撮影ボタンという）とユーザの指との距離に基づいてフレームレートの変更を指示してもよい。

また、カメラ部本体２０には、撮影準備検出部としての姿勢判定部４１も設けられている。姿勢判定部４１は、加速度センサ等によって構成することができ、カメラ部本体２０の姿勢、重力方向やブレ等を検出する。姿勢判定部４１は、検出結果を制御部２７に出力する。

次に、このように構成された実施の形態の動作について図２及び図３のフローチャートを参照して説明する。図２はカメラ制御を示し、図３は図２中のステップＳ１１におけるフレームレート制御を示している。また、図４はユーザの指と表示パネルとの位置関係を示す説明図である。

カメラ部本体２０の電源がオンになると、図２のステップＳ１において、初期化が行われる。制御部２７は各部の初期設定を行うと共に、交換式レンズ１０のレンズ制御部１５との間で通信を行う。この初期設定において、後述する記録中フラグはオフに初期設定される。

制御部２７は、ステップＳ２において、再生ボタンが操作されたか否かを判定する。再生ボタンが操作された場合には、制御部２７は、ステップＳ３において、再生モードに移行し、ユーザが選択した画像の再生を行う。

再生ボタンが操作されていない場合には、制御部２７は、次のステップＳ４においてメニューボタンが操作されたか否かを判定する。メニューボタンが操作された場合には、制御部２７は、表示駆動部３８を制御して、メニュー画面を表示パネル３９上に表示させて、カメラ設定を可能にする。ユーザのメニュー操作に従って、制御部２７は、各種カメラ設定を行う（ステップＳ５）。

メニューボタンの操作も行われていない場合には、制御部２７は、次のステップＳ６において動画記録の開始又は終了を指示するための動画ボタンが操作されたか否かを判定する。動画ボタンが操作されていない場合には、制御部２７は、次のステップＳ１０を介してステップＳ１１に処理を移行して、後述するフレームレート制御を行う。

次に、制御部２７は、ステップＳ１２，Ｓ１４において、撮影を指示するボタン、例えば、カメラ部本体２０に設けられた図示しないレリーズボタンに対する押下操作や表示パネル３９上に表示された撮影ボタンに対するタッチ操作によって、第１遷移状態になったか否か、第２遷移状態になったか否かを判定する。制御部２７は、例えば、レリーズボタンが半押しされた場合には第１遷移状態になったものと判定し、レリーズボタンが全押しされた場合には第２遷移状態になったものと判定する。

第１，第２遷移状態のいずれにもなっていない場合には、制御部２７は、ステップＳ１７〜Ｓ２０の処理によって、ライブビュー表示を行う。即ち、撮影待機状態においては、ステップＳ１７において露出制御が行われる。制御部２７及びレンズ制御部１５は、絞り及び感度を制御する。更に、制御部２７は、撮像素子２３を制御して、露光時間を設定する。

被写体からの光は、レンズ１２、絞り１３及びシャッタ２２を介して撮像素子２３の撮像面に入射し、光電変換されて、画像信号が撮像素子２３から出力される。この画像信号は、アナログ処理部２４により増幅され、Ａ／Ｄ変換部２５によってデジタル信号に変換された後、ＳＤＲＡＭ３０に記憶される。

制御部２７は、ＳＤＲＡＭ３０に記憶された画像信号を画像処理部３１に与え、画像処理部３１はこの画像信号に対して各種の画像信号処理を施す。画像処理された画像信号は、表示駆動部３８に供給されて、表示パネル３９の画面上にライブビューが表示される。なお、ステップＳ１７〜Ｓ２０の各処理は、ステップＳ１１において決定されたフレームレートで行われる。

ここで、動画ボタンが操作されるものとする。この場合には、制御部２７は、ステップＳ６において動画ボタンの操作を検出し、記録中フラグをオン，オフ間で反転させる（ステップＳ７）。制御部２７は、ステップＳ８において記録中フラグによって動画記録中であるか否かを判定する。これにより、制御部７２は、ステップＳ６で判定した操作が動画記録の開始操作であるか、終了操作であるかを判定する。記録中フラグが動画記録中を示すオンの場合には、制御部２７は、ステップＳ９において新たに動画の記録を開始する。

制御部２７は、動画記録中においては、ライブビュー表示のフレームレート制御は行わずに、ステップＳ１０から処理をステップＳ１７に移行し、ライブビュー表示を行い、ステップＳ２１，Ｓ２２において、動画記録を継続する。また、動画記録中において、動画ボタンが操作されると、制御部２７は、ステップＳ８において記録中フラグがオフ、即ち、動画記録の終了処理と判定し、動画記録を停止して記録した画像のファイル化を行う。

ここで、静止画の撮影を行うものとする。ユーザは、表示パネル３９に表示されたライブビューを確認しながら、撮影操作を行う。本実施の形態においては、ユーザが被写体を撮影しようとする場合には、ライブビュー表示のフレームレートを高くしてシャッターチャンスを逃さないようにする。また、ユーザが被写体を撮影しようとしていない場合にはフレームレートを低くし、消費電力を抑制するようになっている。

次に、具体的なフレームレートの制御方法について説明する。

ステップＳ１１のフレームレート制御では、図３に示すフローが実施される。なお、図３は、制御部２７によって、１２０ｆｐｓ（フレーム／秒）、６０ｆｐｓ又は３０ｆｐｓの３種類のフレームレートが設定可能である例を示しているが、制御可能なフレームレートは適宜設定可能である。

フレームレート変更制御部３５は、図３のステップＳ３１において、制御部２７からの情報に基づいて、一定時間ユーザ操作が行われなかったか否かを判定する。例えば、１０〜３０秒程度の所定時間、ユーザ操作が発生しなかった場合には、フレームレート変更制御部３５は、フレームレートを低くしてもよいと判定し、フレームレートを低い３０ｆｐｓに設定する指示信号を制御部２７に出力する。これにより、制御部２７は、ステップＳ３９において、フレームレートを３０ｆｐｓに設定する。

ステップＳ３２では、ユーザと表示パネル３９の表面との間の距離が検出される。図４に示すように、カメラ部本体２０の前面には交換式レンズ１０が設けられ、カメラ部本体２０の背面には表示パネル３９が設けられている。ユーザの指４５を表示パネル３９に近接させると、表示パネル３９の表面に配設されたタッチパネル４０によって、ユーザの指４５と表示パネル３９表面との間の距離が検出される。

タッチパネル４０は、距離の検出結果をフレームレート変更制御部３５に出力する。フレームレート変更制御部３５は、ステップＳ３３において、タッチパネル４０による距離の検出結果によって、ユーザの指４５の先端と表示パネル３９表面との距離が近いか否かを判定する。例えば、フレームレート変更制御部３５は、距離の検出結果を複数の閾値と比較することで、指４５の先端とパネル表面との距離が近接距離、中間距離、離間距離のいずれであるかを検出する。

例えば、フレームレート変更制御部３５は、ステップＳ３３において、距離が１ｃｍ以下の近距離であるか否かを判定し、ステップＳ３６において、距離が１〜３ｃｍの中間距離であるか、それ以上の離間距離であるかを判定する。

図５はユーザの指４５と表示パネル３９との位置関係を示す説明図である。図５の例では、指４５の先端と表示パネル３９の表面との間の距離は、３ｃｍ以下の中間距離ｈ１である。この場合には、フレームレート変更制御部３５は、ステップＳ３６において中間距離であるものと判定して、所定の期間だけ６０ｆｐｓのフレームレートを指示する（ステップＳ３９）。フレームレート変更制御部３５は、ステップＳ３６において離間距離であるものと判定した場合には、３０ｆｐｓのフレームレートを指示する（ステップＳ３９）。

これにより、ユーザが指を表示パネル３９に近づける操作によって、ライブビュー表示のフレームレートが高くなり、表示された被写体の位置と被写体の実際の位置とが一致しやすくなって、シャッターチャンスを得やすくなる。

また、フレームレート変更制御部３５は、ステップＳ３３において、近接距離であるものと判定した場合には、次のステップＳ３４において、タッチパネル４０の出力に基づいて、ユーザの指４５がタッチパネル４０のいずれの位置に近接しているかを検出する。次に、フレームレート変更制御部３５は、ステップＳ３５において、指４５の位置が表示パネル３９の周辺において近接したか否かを判定する。

ユーザが指を表示パネル３９の中央部に近接させた場合には、ユーザの指によって中央部が覆われて表示パネル３９上のライブビュー表示を確認しずらくなる。この場合にフレームレートを高くしても無駄であると考えられる。そこで、ユーザの指がパネル周辺でない場合には、フレームレート変更制御部３５は、ステップＳ３８において、フレームレートが６０ｆｐｓとなるように、制御部２７に指示を与える。

また、ユーザが指を表示パネル３９の周辺部に近接させた場合には、フレームレート変更制御部３５は、ユーザが直ぐに撮影操作を行うものと判定する。図６はこの場合のユーザの指４５と表示パネル３９との位置関係を示す説明図である。図６の例では、指４５の先端と表示パネル３９の表面との間の距離は、１ｃｍ以下の近接距離ｈ２であり、指４５は表示パネル３９の周辺の位置に近づいている。この場合には、フレームレート変更制御部３５は、ステップＳ３７において、フレームレートが所定期間最高の１２０ｆｐｓとなるように、制御部２７に指示を与える。制御部２７がフレームレートを１２０ｆｐｓに変更することで、表示パネル３９に表示された被写体の位置と被写体の実際の位置とは十分に一致するようになり、シャッターチャンスを得やすくなる。

このように、本実施の形態においては、ユーザが指等を表示パネル３９の表面に近接させるという簡単な操作を撮影準備の操作として行うことで、ライブビュー表示のフレームレートを高くすることができ、シャッターチャンスを得やすくしている。また、ユーザが指等をパネル表面に近接させない場合には、ライブビュー表示のフレームレートが低くなるようになっており、消費電力を抑制することも可能である。

フレームレートが最も高い状態において、ユーザがレリーズボタンや撮影ボタンを操作して、第１遷移、第２遷移の状態になるものとする。なお、タッチパネル４０にタッチすることで、同様に第１遷移、第２遷移の状態になるようにしてもよい。制御部２７は、第１遷移の状態になると、図２のステップＳ１３において、自動露出、オートフォーカスを行い、第２の遷移の状態になると、ステップＳ１５において、取り込まれた画像信号に対する画像処理を行い、画像処理後の静止画を記録する（ステップＳ１６）。

ステップＳ１２〜Ｓ１６における静止画撮影処理に際して、ライブビュー表示のフレームレートは高くなっており、ユーザは、確実にシャッターチャンスを得ることができる。

また、撮影ボタンを表示パネル３９の周辺部に表示させ、この撮影ボタンに対するタッチ操作によって撮影を行う場合には、撮影ボタンをタッチしようとする操作がそのまま撮影準備操作となるので、ユーザが撮影準備操作を意識することなく、撮影操作のみによって、図３のステップＳ３７において自動的に最高フレームレートでのライブビュー表示が行われることになり、シャッターチャンスを一層容易に得ることができる。

このように本実施の形態においては、ユーザが指等を表示パネルに近接させるという撮影準備操作を検出してライブビュー表示のフレームレートを変更しており、消費電力を抑制しつつ、ライブビューの表示間隔を制御してシャッターチャンスを増大させることができる。また、ライブビュー表示は、常に表示パネルの全域に表示させることができ、違和感の無いライブビュー表示が可能である。

なお、上記実施の形態においては、ユーザの指等と表示パネルとの間の距離だけでなく、表示パネルのいずれの位置に指が近づいたかによっても、フレームレートを制御する例について説明したが、ユーザの指等と表示パネルとの間の距離のみによってフレームレートを制御するようにしてもよい。また、ユーザの指等と表示パネルとの間の距離だけでなく、ユーザの指等が表示パネルに近接する速度によってもフレームレートを制御するようにしてもよい。例えば、ユーザの指等が比較的高速に表示パネルに近接した場合には、フレームレートを低いままとする等の制御が考えられる。

（変形例）
図７は第１の実施の形態の変形例において採用されるフレームレート制御を示すフローチャートである。図７において図３と同一の手順には同一符号を付して説明を省略する。

本変形例は、フレームレート変更制御部３５におけるフレームレート制御の方法のみが図３と異なるのみである。撮像装置においては、表示パネル上に表示された被写体の顔の部分をタッチすることで、タッチされた被写体にピントを合わせた後、静止画撮影を行うものがある。本変形例はこのような場合に適している。

フレームレート変更制御部３５は、図７のステップＳ４１，Ｓ４３において、表示パネル３９のユーザの指近傍に表示されている画像部分について、被写体の相関を検出する。例えば、フレームレート変更制御部３５は、制御部２７から表示パネル３９に表示されている画像の情報が供給され、前後のフレームに対する演算によって、指近傍の画像部分の相関を求める。フレームレート変更制御部３５は、求めた相関値を所定の閾値と比較することで、指近傍の画像部分の相関が高いか低いかを判定する。

フレームレート変更制御部３５は、ステップＳ４２において相関が比較的低いと判定した場合には、制御部２７にライブビュー表示のフレームレートを３０ｆｐｓにするように指示を与え、低くないと判定した場合には、フレームレートを６０ｆｐｓにするように指示を与える。

また、フレームレート変更制御部３５は、ステップＳ４４において相関が比較的低いと判定した場合には、制御部２７にライブビュー表示のフレームレートを６０ｆｐｓにするように指示を与え、低くないと判定した場合には、フレームレートを１２０ｆｐｓにするように指示を与える。

被写体の相関が低いほど、被写体の動きが速いと考えられる。被写体の動きが速いほど、ライブビュー表示のフレームレートをより高く設定することで、シャッターチャンスを得やすくなる。逆に、被写体の相関が高いほど、被写体の動きは遅いので、ライブビュー表示のフレームレートをより低く設定して、消費電力を抑制することができる。

いま、ユーザが、表示パネル３９に表示された被写体をタッチすることで、撮影を行うものとする。ユーザが指を中間距離まで近づけることで、ステップＳ４２において、ユーザが指を近づけた画像部分の相関が低いか否かが判定される。相関が比較的高い場合には、フレームレート変更制御部３５はライブビュー表示のフレームレートを３０ｆｐｓに設定し、相関が比較的低い場合には、フレームレート変更制御部３５はライブビュー表示のフレームレートを６０ｆｐｓに設定する。

また、ユーザが指を近接距離まで近づけると、ステップＳ４４において、ユーザが指を近づけた画像部分の相関が低いか否かが判定される。相関が比較的高い場合には、フレームレート変更制御部３５はライブビュー表示のフレームレートを６０ｆｐｓに設定し、相関が比較的低い場合には、フレームレート変更制御部３５はライブビュー表示のフレームレートを１２０ｆｐｓに設定する。

こうして、動きが速い被写体の撮像時には、ライブビュー表示のフレームレートが自動的に高くなって、シャッターチャンスを確実に得ることができる。また、動きが遅い被写体の撮像時には、ライブビュー表示のフレームレートが自動的に低くなって、消費電力を抑制することができる。

（第２の実施の形態）
図８は第２の実施の形態において採用されるフレームレート制御を示すフローチャートである。図８において図３と同一の手順には同一符号を付して説明を省略する。なお、本実施の形態におけるハードウェア構成は図１と同様である。

第１の実施の形態においては、表示パネル３９の表面に指等を近づけるという操作をユーザの撮影準備操作として検出して、ライブビュー表示のフレームレートを変更した。本実施の形態は、カメラ部本体２０の姿勢によってユーザの撮影準備操作を検出して、ライブビュー表示のフレームレートを変更するものである。

カメラ部本体２０の姿勢判定部４１は、カメラ部本体２０のブレや姿勢等を検出しており、検出結果を制御部２７に出力する。

図８のステップＳ５１において、フレームレート変更制御部３５は、制御部２７から、姿勢判定部４１の判定結果が与えられて、カメラ部本体２０のブレや姿勢等を把握する。フレームレート変更制御部３５は、ステップＳ５２において、姿勢の判定結果によって、カメラ部本体２０が撮影姿勢で保持されているか否かを判定する。

フレームレート変更制御部３５は、カメラ部本体２０が撮影姿勢でないと判定した場合には、次のステップＳ５３においてブレが大きいか否かを判定する。フレームレート変更制御部３５は、姿勢判定部４１の判定結果を所定の閾値と比較することで、ブレの大小を判定し、ブレが大きい場合には、フレームレートを３０ｆｐｓに設定し（ステップＳ３９）、ブレが小さい場合には、フレームレートを６０ｆｐｓに設定する（ステップＳ３８）。また、フレームレート変更制御部３５は、撮影姿勢であるものと判定した場合には、ステップＳ３７においてフレームレートを最大の１２０ｆｐｓに設定する。

カメラ部本体２０が撮影姿勢で保持されておらず、しかもブレが大きい場合として、ユーザが撮影の意図無くカメラ部本体２０を手に持って歩いていたりすることが考えられる。この場合には、フレームレートが低く設定されるので、消費電力が抑制される。

カメラ部本体２０が撮影姿勢で保持されていないが、ブレが小さい場合として、ユーザがライブビュー表示を確認しようとしていることが考えられる。この場合には、フレームレートが中間の値に設定されるので、シャッターチャンスが得やすくなると共に、消費電力の増大を抑制することができる。

カメラ部本体２０が撮影姿勢で保持された場合には、ユーザが撮影の直前であることが考えられる。この場合には、フレームレートが最大の値に設定されるので、シャッターチャンスが増大する。

このように、本実施の形態においては、カメラ部本体の姿勢やブレ等によってユーザの撮影準備操作を検出しており、自動的にライブビュー表示のフレームレートを高くして、シャッターチャンスを増大させることが可能である。

（第３の実施の形態）
図９は第３の実施の形態において採用されるフレームレート制御を示すフローチャートである。図９において図３と同一の手順には同一符号を付して説明を省略する。なお、本実施の形態におけるハードウェア構成は図１と同様である。

本実施の形態は、撮影シーンをレンズからの情報に基づいて判定して、ライブビュー表示のフレームレートを変更するものである。

制御部２７は、レンズ制御部１５からレンズの焦点距離に関する情報及び被写体までの距離に関する情報が与えられる。レンズ制御部１５は、合焦時におけるレンズ位置によって、被写体距離を検出することができる。また、被写体距離の検出方法としては、公知の種々の採用することができ、例えば、撮影画像のコントラストとレンズの繰り出し量とに基づいて被写体距離を求めることも可能である。

フレームレート変更制御部３５は、図９のステップＳ６１，Ｓ６２において、制御部２７からの焦点距離の情報及び被写体距離の情報を取得する。フレームレート変更制御部３５は、ステップＳ６３において、望遠又は近接撮影であるか否かを判定し、ステップＳ６４において、広角かつ遠距離撮影であるか否かを判定する。

望遠又は近接撮影の場合には、撮影範囲内の被写体の動きは広角又は遠距離撮影の場合よりも大きくなる。即ち、望遠、近接、広角、遠距離等の撮影シーンに応じて、シャッターチャンスに関して被写体の影響度が変化する。そこで、フレームレート変更制御部３５は、被写体の動きによる影響（被写体影響度）が大きくなる撮影時には、ライブビュー表示におけるフレームレートを高くすることで、シャッターチャンスを増大させ、被写体影響度が比較的小さい撮影時には、ライブビュー表示におけるフレームレートを低くすることで、消費電力を抑制するようになっている。

フレームレート変更制御部３５は、望遠か否かを、焦点距離が長いか否か、例えば３５ｍｍ換算で１００ｍｍ以上であるか否かによって判定する。また、フレームレート変更制御部３５は、近接か否かを、被写体距離が短いか否か、例えば撮像面から１ｍ以内であるか否かによって判定する。

また、フレームレート変更制御部３５は、広角か否かを、焦点距離が短いか否か、例えば３５ｍｍ換算で３５ｍｍ以内であるか否かによって判定する。また、フレームレート変更制御部３５は、遠距離か否かを、被写体距離が長いか否か、例えば撮像面から５ｍを超えるか否かによって判定する。

即ち、フレームレート変更制御部３５は、望遠又は近接撮影でないと判定した場合には、次のステップＳ６４において広角かつ遠距離撮影であるか否かを判定する。フレームレート変更制御部３５は、広角かつ遠距離撮影であると判定した場合には、フレームレートを３０ｆｐｓに設定し（ステップＳ３９）、広角かつ遠距離撮影でないと判定した場合には、フレームレートを６０ｆｐｓに設定する（ステップＳ３８）。また、フレームレート変更制御部３５は、望遠又は近接撮影であるものと判定した場合には、ステップＳ３７においてフレームレートを最大の１２０ｆｐｓに設定する。

広角かつ遠距離撮影の場合には、フレームレートが低く設定されるので、消費電力が抑制される。また、望遠又は近接撮影の場合には、フレームレートが最大の値に設定されるので、シャッターチャンスが増大する。また、望遠又は近接撮影でもなく、また、広角かつ遠距離撮影でもない場合には、フレームレートが中間の値に設定されるので、シャッターチャンスが得やすくなると共に、消費電力の増大を抑制することができる。

このように、本実施の形態においては、焦点距離及び被写体距離によって撮影シーンを検出して、シャッターチャンスに関する被写体の動きの影響を判定しており、被写体の動きの影響が大きいほどライブビュー表示のフレームレートを高くすることで、消費電力を抑制しつつシャッターチャンスを増大させることができる。

（第４の実施の形態）
図１０は第４の実施の形態において採用されるフレームレート制御を示すフローチャートである。図１０において図９と同一の手順には同一符号を付して説明を省略する。なお、本実施の形態におけるハードウェア構成は図１と同様である。

本実施の形態は、撮像画像中の被写体のサイズによって、シャッターチャンスに関する被写体影響度を判定して、ライブビュー表示のフレームレートを変更するものである。

フレームレート変更制御部３５は、制御部２７からＳＤＲＡＭ３０に記憶されている画像信号が与えられ、撮像画像中の被写体を検出し、被写体のサイズを取得する（ステップＳ７１）。例えば、フレームレート変更制御部３５は、顔認識処理やペット認識処理が可能であり、被写体の顔のサイズや被写体のペットのサイズ等を取得する。次に、フレームレート変更制御部３５は、被写体のサイズと撮像画像のサイズとの比較によって、被写体が画像中に占める割合（以下、被写体割合という）を算出する（ステップＳ７２）。

フレームレート変更制御部３５は、ステップＳ７３において、被写体割合が所定の第１の割合閾値よりも大きいか否かを判定し、ステップＳ７４において、被写体割合が所定の第２の割合閾値よりも小さいか否かを判定する。なお、第１の割合閾値＞第２の割合閾値である。

被写体の同一の動きであっても、被写体割合が大きい程、撮影範囲内での被写体の動きの割合が大きくなり、シャッターチャンスに関する被写体の動きの影響が大きくなる。そこで、フレームレート変更制御部３５は、シャッターチャンスに関する被写体の動きの影響が大きくなる撮影時には、ライブビュー表示におけるフレームレートを高くすることで、シャッターチャンスを増大させ、被写体の動きの影響が比較的小さい撮影時には、ライブビュー表示におけるフレームレートを低くすることで、消費電力を抑制するようになっている。

即ち、フレームレート変更制御部３５は、被写体割合が第１の割合閾値よりも大きくないと判定した場合には、次のステップＳ７４において被写体割合が第２の割合閾値よりも小さいか否かを判定する。フレームレート変更制御部３５は、被写体割合が第２の割合閾値よりも小さいと判定した場合には、フレームレートを３０ｆｐｓに設定し（ステップＳ３９）、被写体割合が第２の割合閾値以上であると判定した場合には、フレームレートを６０ｆｐｓに設定する（ステップＳ３８）。また、フレームレート変更制御部３５は、被写体割合が第１の割合閾値よりも大きいと判定した場合には、ステップＳ３７においてフレームレートを最大の１２０ｆｐｓに設定する。

被写体割合が第２の割合閾値よりも小さい場合には、フレームレートが低く設定されるので、消費電力が抑制される。また、被写体割合が第１の割合閾値よりも大きい場合には、フレームレートが最大の値に設定されるので、シャッターチャンスが増大する。また、被写体割合が第１の割合閾値以下で第２の割合閾値以上である場合には、フレームレートが中間の値に設定されるので、シャッターチャンスが得やすくなると共に、消費電力の増大を抑制することができる。

このように、本実施の形態においては、被写体割合によって、シャッターチャンスに関する被写体の動きの影響を判定しており、被写体の動きの影響が大きいほどライブビュー表示のフレームレートを高くすることで、消費電力を抑制しつつシャッターチャンスを増大させることができる。

（第５の実施の形態）
図１１は第５の実施の形態において採用されるフレームレート制御を示すフローチャートである。図１１において図７と同一の手順には同一符号を付して説明を省略する。なお、本実施の形態におけるハードウェア構成は図１と同様である。

本実施の形態は、被写体影響度を被写体の動きから求めるものであり、被写体の動きが大きいか否かを画像の相関によって判定して、ライブビュー表示のフレームレートを変更するものである。

フレームレート変更制御部３５は、制御部２７から表示パネル３９に表示されている画像の情報が供給され、図１１のステップＳ８１において、前後のフレームに対する演算によって、フレーム相関を算出する。

フレームレート変更制御部３５は、ステップＳ８２において、フレーム相関が所定の第１の相関閾値よりも小さいか否かを判定し、ステップＳ８３において、フレーム相関が所定の第２の相関閾値よりも大きいか否かを判定する。なお、第１の相関閾値＜第２の相関閾値である。

フレーム相関が小さい程、被写体の動きが大きいと考えることができる。そこで、フレームレート変更制御部３５は、フレーム相関が比較的小さい場合には、ライブビュー表示におけるフレームレートを高くすることで、シャッターチャンスを増大させ、フレーム相関が比較的大きい場合には、ライブビュー表示におけるフレームレートを低くすることで、消費電力を抑制するようになっている。

即ち、フレームレート変更制御部３５は、フレーム相関が第１の相関閾値よりも以上であると判定した場合には、次のステップＳ８３においてフレーム相関が第２の相関閾値よりも大きいか否かを判定する。フレームレート変更制御部３５は、フレーム相関が第２の相関閾値よりも大きいと判定した場合には、フレームレートを３０ｆｐｓに設定し（ステップＳ３９）、フレーム相関が第２の相関閾値以下であると判定した場合には、フレームレートを６０ｆｐｓに設定する（ステップＳ３８）。また、フレームレート変更制御部３５は、フレーム相関が第１の相関閾値よりも小さいと判定した場合には、ステップＳ３７においてフレームレートを最大の１２０ｆｐｓに設定する。

フレーム相関が第２の相関閾値よりも大きい場合には、フレームレートが低く設定されるので、消費電力が抑制される。また、フレーム相関が第１の相関閾値よりも小さい場合には、フレームレートが最大の値に設定されるので、シャッターチャンスが増大する。また、フレーム相関が第１の相関閾値以上で第２の相関閾値以下である場合には、フレームレートが中間の値に設定されるので、シャッターチャンスが得やすくなると共に、消費電力の増大を抑制することができる。

このように、本実施の形態においては、フレーム相関によって、被写体の動きが大きいか否かを判定しており、被写体の動きの大きいほどライブビュー表示のフレームレートを高くすることで、消費電力を抑制しつつシャッターチャンスを増大させることができる。

（第６の実施の形態）
図１２は第６の実施の形態において採用されるフレームレート制御を示すフローチャートである。図１２において図３及び図７乃至図１１と同一の手順には同一符号を付して説明を省略する。なお、本実施の形態におけるハードウェア構成は図１と同様である。

本実施の形態は、上記各実施の形態を組み合わせたフレームレート制御の一例を示している。本実施例は、図３及び図７乃至図１１に示すフレームレート制御方法を組み合わせた例を示しているが、上記各実施の形態のいくつかを適宜組み合わせてもよく、組み合わせる方法は適宜設定可能である。

図１２の例では、ステップＳ５１においてブレ検出が行われ、ステップＳ５２において撮影姿勢であるか否かが判定される。撮影姿勢でない場合には、ライブビュー表示のフレームレートが最低の３０ｆｐｓに設定される。

本実施の形態においては、ステップＳ３２においてユーザの指等と表示パネル３９との間の距離が検出され、ステップＳ３３においてその距離が近いか否かが判定される。この距離判定の他に、ステップＳ８２，Ｓ６３，Ｓ３５，Ｓ７３において、シャッターチャンスに関する被写体の影響度の大きさを判定するための処理が行われる。

ステップＳ８２においては、ステップＳ８１と同様にフレーム相関を算出してフレーム相関が小さいか否かが判定され、ステップＳ６３では、ステップＳ６１，Ｓ６２と同様に、焦点距離と被写体距離を取得して望遠又は近接撮影であるか否かが判定され、ステップＳ３５では、ユーザの指が表示パネル３９の周辺に近づいたか否かが判定され、ステップＳ７３では、ステップＳ７１，Ｓ７２と同様に被写体サイズの取得と被写体割合の算出を行って被写体割合が大きいか否かが判定される。

フレームレート変更制御部３５は、ステップＳ８２，Ｓ６３において、フレーム相関が小さいか又は望遠、近接撮影の場合には、被写体影響度を大に設定する（ステップＳ９１）。また、フレームレート変更制御部３５は、ステップＳ３５，Ｓ７３において、指位置がパネル周辺であるか又は被写体割合が大きい場合には、被写体影響度を中に設定する（ステップＳ９２）。また、フレームレート変更制御部３５は、ステップＳ７３において、被写体割合が第１の閾値以下の場合には、被写体影響度を小に設定する（ステップＳ９３）。

フレームレート変更制御部３５は、ステップＳ３３において指等と表示パネル３９との間の距離が近くないと判定した場合には、次のステップＳ９５において被写体影響度が中であるか否かを判定する。また、フレームレート変更制御部３５は、ステップＳ３３において指等と表示パネル３９との間の距離が近い場合でも、次のステップＳ９４において被写体影響度が大でないと判定した場合には、ステップＳ９５の判定を行う。

ステップＳ９５において、フレームレート変更制御部３５は、被写体影響度が中でないと判定した場合には、フレームレートを３０ｆｐｓに設定し（ステップＳ３９）、被写体影響度が中の場合には、フレームレートを６０ｆｐｓに設定する（ステップＳ３８）。また、フレームレート変更制御部３５は、ステップＳ９４において、被写体影響度が大であると判定した場合には、ステップＳ３７においてフレームレートを最大の１２０ｆｐｓに設定する。

ユーザの指等が表示パネル３９に近接した場合でも、被写体影響度が小の場合には、フレームレートが低く設定されるので、消費電力が抑制される。また、ユーザの指等が表示パネル３９に近接し、且つ被写体影響度が大の場合には、フレームレートが最大の値に設定されるので、シャッターチャンスが増大する。また、被写体影響度が中の場合には、フレームレートが中間の値に設定されるので、シャッターチャンスが得やすくなると共に、消費電力の増大を抑制することができる。

このように、本実施の形態においては、種々の条件によってライブビュー表示のフレームレートを設定しており、効率的に、消費電力を抑制しつつシャッターチャンスを増大させることができる。

さらに、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。

本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。

１０…交換式レンズ、１５…レンズ制御部、２０…カメラ部本体、２３…撮像素子、２７…制御部、３１…画像処理部、３５…フレームレート変更制御部、３８…表示駆動部、３９…表示パネル、４０…タッチパネル、４１…姿勢判定部。

Claims (11)

1. 被写体を撮像する撮像部と、
   撮像された画像データを画像処理する画像処理部と、
   前記画像処理部で画像処理された画像データに基づく表示を行う表示部と、
   ユーザによって撮影準備が行われたことを検出する撮影準備検出部と、
   前記撮影準備検出部の検出結果に基づいて、ユーザによる撮影に先立って、ライブビュー表示のフレームレートを決定するフレームレート決定部と、
   前記撮像部、前記画像処理部及び前記表示部を制御して、前記フレームレート決定部において決定されたフレームレートでのライブビュー表示を可能にする制御部と
   を具備することを特徴とする撮像装置。
2. 前記撮影準備検出部は、前記ユーザと前記表示部との間の距離を検出し、
   前記フレームレート決定部は、前記ユーザと前記表示部との間の距離が近いほど前記フレームレートを高くする
   ことを特徴とする請求項１に記載の撮像装置。
3. 前記撮像部は、前記表示部に対する前記ユーザのタッチ操作によって、撮影を行う
   ことを特徴とする請求項２に記載の撮像装置。
4. 前記撮影準備検出部は、前記ユーザが前記表示部の表示領域の周辺に近づいたか否かを検出し、
   前記フレームレート決定部は、前記ユーザが前記表示部の表示領域の周辺に近づくほど前記フレームレートを高くする
   ことを特徴とする請求項２に記載の撮像装置。
5. 前記撮影準備検出部は、振動を検出し、
   前記フレームレート決定部は、前記撮影準備検出部が検出した振動が所定の閾値よりも小さい場合に前記フレームレートを高くし、それ以外の場合には前記フレームレートを低くする
   ことを特徴とする請求項１に記載の撮像装置。
6. 被写体を撮像する撮像部と、
   撮像された画像データを画像処理する画像処理部と、
   前記画像処理部で画像処理された画像データに基づく表示を行う表示部と、
   前記撮像部によって撮像された撮像画像中の被写体の動きの度合いに対応する被写体影響度を求める被写体影響度検出部と、
   前記被写体影響度検出部の検出結果に基づいて、ライブビューのフレームレートを決定するフレームレート決定部と、
   前記撮像部、前記画像処理部及び前記表示部を制御して、前記フレームレート決定部において決定されたフレームレートでのライブビュー表示を可能にする制御部と
   を具備することを特徴とする撮像装置。
7. 前記被写体影響度検出部は、焦点距離を検出し、
   前記フレームレート決定部は、前記被写体影響度検出部が検出した焦点距離が長いほど前記フレームレートを高くする
   ことを特徴とする請求項６に記載の撮像装置。
8. 前記被写体影響度検出部は、被写体距離を検出し、
   前記フレームレート決定部は、前記被写体影響度検出部が検出した被写体距離が小さいほど前記フレームレートを高くする
   ことを特徴とする請求項６に記載の撮像装置。
9. 前記被写体影響度検出部は、被写体が画角内を占める占有率を検出し、
   前記フレームレート決定部は、前記被写体影響度検出部が検出した占有率が大きいほど前記フレームレートを高くする
   ことを特徴とする請求項６に記載の撮像装置。
10. 前記被写体影響度検出部は、フレーム間の相関を検出し、
    前記フレームレート決定部は、前記被写体影響度検出部が検出した相関が小さいほど前記フレームレートを高くする
    ことを特徴とする請求項６に記載の撮像装置。
11. 一定時間ユーザーが操作しないことを検出するタイマーをさらに具備し、
    前記フレームレート決定部は、前記タイマーの出力から一定時間ユーザーが操作していないことが示された場合には、前記フレームレートを低くする
    ことを特徴とする請求項１乃至１０のいずれか１つに記載の撮像装置。

Images