JP2007013257A - 撮影装置および方法、プログラム、並びに記録媒体 - Google Patents

Abstract

【課題】 動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影する。
【解決手段】 カメラ１１は、画像を撮影する。動画像処理部１５は、カメラ１１により撮影された画像から、動画像の画像データである動画像データを生成する。静止画像処理部１４は、動画像処理部１５により動画像データを生成しているとき、カメラ１１により撮影された画像から、静止画像の画像データである静止画像データを生成する。モニタリング制御部１８は、動画像データが生成されているとき、動画像データに対応する画像を表示部２０に表示するための表示データを生成し、静止画像データが生成されたとき、静止画像データの生成を示す画像を表示部１９に表示するための表示データを生成する。本発明は、デジタルスチルカメラに適用できる。
【選択図】 図１

Description

本発明は撮影装置および方法、プログラム、並びに記録媒体に関し、特に、動画像および静止画像を撮影する撮影装置および方法、プログラム、並びに記録媒体に関する。

近年、被写体を撮影し、被写体の画像を動画像および静止画像として同時に記録できる撮影装置が使用されるようになってきた。このような撮影装置は、動画像を記録している場合、そのファインダに撮影している動画像を表示させる。

動画像を記録しながら、同時に、静止画像の記録を指示すると、撮影装置は、その瞬間に、ファインダにシャッタ幕の画像を表示させる。そして、さらに、撮影装置は、プレビューの目的で一定時間、ファインダに記録した静止画像を表示させる。

これは、使用者に、静止画像が撮影された瞬間と、記録した静止画像とを確認させるためである。

しかしながら、ファインダに、シャッタ幕の画像または記録した静止画像が表示されている期間においては、その間に記録している動画像が表示されず、使用者は、記録されている動画像を確認することができない。

従って、被写体が動いている場合、被写体がフレームアウトしても、使用者は、これを認識することができない。その結果、撮影装置の操作が遅れることになり、被写体を見失うこともあった。特に、静止画像を撮影する場合の画角と、動画像を撮影する場合の画角とが異なる場合には、静止画像を記録（撮影）しながら、被写体に追従して動画像を記録（撮影）することは、より一層困難になる。

従来、静止画記録スイッチを２段式に構成し、半押し位置に押下するとメモリに静止画像信号を取込み、この取込んだ静止画像信号をビューファインダに映出し、全押し位置まで押下するとメモリに取込んだ静止画像信号をテープに記録するようにしているものもある（例えば、特許文献１参照）。

特開平５−２９２４４４号公報

しかしながら、特許文献１に記載の発明においても、静止画記録スイッチの半押しを解除すれば、動画像の表示に戻るが、半押しをしている間は、動画像のモニタができないことに変わりはない。

さらに、特許文献１においては、いわゆるピクチャ・イン・ピクチャで、動画像および静止画像の一方をファインダの全体に表示させ、他方を小さい画像としてファインダの一部に表示させることが記載されているが、小さい画像では、画像の細部を確認することが困難となり、また、この小さい画像を大きくしてしまうと、ファインダの全体に表示されている画像の確認が困難になってしまう。

本発明はこのような状況に鑑みてなされたものであり、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影できるようにするものである。

本発明の第１の側面は、画像を撮影する撮影手段と、撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成手段と、動画像データ生成手段により動画像データを生成しているとき、撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成手段と、動画像データが生成されているとき、動画像データに対応する画像を表示するための第１の表示データを生成し、静止画像データが生成されたとき、第１の表示データの生成と並列に、静止画像データの生成を示す画像を表示するための第２の表示データを生成する表示データ生成手段とを備える撮影装置である。

本発明の第１の側面においては、画像が撮影され、撮影された画像から、動画像の画像データである動画像データが生成され、動画像データを生成しているとき、撮影された画像から、静止画像の画像データである静止画像データが生成され、動画像データが生成されているとき、動画像データに対応する画像を表示するための第１の表示データが生成され、静止画像データが生成されたとき、第１の表示データの生成と並列に、静止画像データの生成を示す画像を表示するための第２の表示データが生成される。

第１の表示データを基に、動画像データに対応する画像を表示する第１の表示手段と、第２表示データを基に、静止画像データの生成を示す画像を表示する第２の表示手段とをさらに設けることができる。

第１の表示データを基に、動画像データに対応する画像を表示し、第２表示データを基に、静止画像データの生成を示す画像を表示する表示手段をさらに設けることができる。

動画像データまたは静止画像データに応じた所定の画像を表示する状態である表示モードを選択する選択手段と、選択された表示モードに対応して、第１の表示データまたは第２の表示データを基に、表示手段への、動画像データまたは静止画像データに応じた画像の表示を制御する表示制御手段とをさらに設けることができる。

動画像の動き量を検出する動き量検出手段をさらに設け、選択手段は、検出された動き量を基に、表示モードを選択するようにすることができる。

表示データ生成手段は、シャッタ幕の画像を表示するための第２の表示データを生成するようにすることができる。

表示データ生成手段は、静止画像データから第２の表示データを生成するようにすることができる。

表示データ生成手段は、静止画像データの生成を示すアイコンを表示するための第２の表示データを生成するようにすることができる。

第１の表示データと第２の表示データとを第３の表示データに合成する合成手段と、第３の表示データを基に、画像の表示を制御する表示制御手段とをさらに設けることができる。

動画像データまたは静止画像データに応じた所定の画像を表示する状態である表示モードを選択する選択手段をさらに設け、合成手段は、第１の表示データと第２の表示データとを、選択された表示モードに応じた第３の表示データに合成するようにすることができる。

表示データ生成手段は、半透過の画像を表示させるための第２の表示データを生成し、合成手段は、第１の表示データと、半透過の画像を表示させるための第２の表示データとを第３の表示データに合成するようにすることができる。

動画像の動き量を検出する動き量検出手段をさらに設け、表示データ生成手段は、検出された動き量に応じた透過率の半透過の画像を表示させるための第２の表示データを生成するようにすることができる。

以上のように、本発明によれば、被写体に追従して動画像を撮影することができる。

また、本発明によれば、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影することができる。

以下に本発明の実施の形態を説明するが、請求項に記載の構成要件と、発明の実施の形態における具体例との対応関係を例示すると、次のようになる。この記載は、請求項に記載されている発明をサポートする具体例が、発明の実施の形態に記載されていることを確認するためのものである。従って、発明の実施の形態中には記載されているが、構成要件に対応するものとして、ここには記載されていない具体例があったとしても、そのことは、その具体例が、その構成要件に対応するものではないことを意味するものではない。逆に、具体例が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その具体例が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。

さらに、この記載は、発明の実施の形態に記載されている具体例に対応する発明が、請求項に全て記載されていることを意味するものではない。換言すれば、この記載は、発明の実施の形態に記載されている具体例に対応する発明であって、この出願の請求項には記載されていない発明の存在、すなわち、将来、分割出願されたり、補正により追加される発明の存在を否定するものではない。

請求項１に記載の撮影装置は、画像を撮影する撮影手段（例えば、図７のカメラ１１）と、撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成手段（例えば、図７の動画像処理部１５）と、動画像データ生成手段により動画像データを生成しているとき、撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成手段（例えば、図７の静止画像処理部１４）と、動画像データが生成されているとき、動画像データに対応する画像を表示するための第１の表示データを生成し、静止画像データが生成されたとき、第１の表示データの生成と並列に、静止画像データの生成を示す画像を表示するための第２の表示データを生成する表示データ生成手段（例えば、図７の表示画像処理部５１）とを備える。

請求項１３に記載の撮影方法は、画像を撮影する撮影手段（例えば、図７のカメラ１１）を備える撮影装置の撮影方法であって、撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成ステップ（例えば、図２のステップＳ１２）と、動画像データ生成ステップにおいて動画像データを生成しているとき、撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成ステップ（例えば、図２のステップＳ１６）と、動画像データが生成されているとき、動画像データに対応する画像を表示するための第１の表示データを生成する第１の表示データ生成ステップ（例えば、図１９のステップＳ２５１）と、静止画像データが生成されたとき、第１の表示データの生成と並列に、静止画像データの生成を示す画像を表示するための第２の表示データを生成する第２の表示データ生成ステップ（例えば、図１９のステップＳ２５７）とを含む。

図１は、本発明の一実施の形態の撮影装置の構成を示すブロック図である。撮影装置１は、例えば、デジタルカメラまたはデジタルビデオカメラなどであり、画像を撮影して、動画像を記録すると共に、静止画像を記録する。撮影装置１は、カメラ１１、カメラ制御部１２、共通画像処理部１３、静止画像処理部１４、動画像処理部１５、記録媒体１６、記録媒体１７、モニタリング制御部１８、表示部１９、表示部２０、および音声出力部２１を備える。

カメラ１１は、CCD（Charge Coupled Device）またはCMOS（Complementary Metal-Oxide Semiconductor）センサなどの映像を電気信号に変換する光電変換素子および光電変換素子に被写体の映像を結像させる光学系などからなり、被写体の画像を電気信号である画像信号に変換する。すなわち、カメラ１１は、被写体を撮影する。カメラ１１は、撮影の結果得られた画像信号をカメラ制御部１２に供給する。

カメラ制御部１２は、ズーム、ピント、絞り、シャッタスピードなど、カメラ１１の撮影を制御する。カメラ制御部１２は、カメラ１１から供給された、撮影の結果得られた画像信号を共通画像処理部１３に供給する。また、カメラ制御部１２は、ズーム、ピント、絞り、またはシャッタスピードなどを示す、撮影の条件を示すデータを共通画像処理部１３に供給する。

共通画像処理部１３は、撮影の結果得られた画像信号に、ノイズリダクション、歪み補正、またはホワイトバランスの処理などを適用して、これらの処理が適用された画像信号を静止画像処理部１４および動画像処理部１５に供給する。さらに、共通画像処理部１３は、ズーム、ピント、絞り、またはシャッタスピードなどの撮影の条件を示すデータを静止画像処理部１４および動画像処理部１５に供給すると共に、共通画像処理部１３において画像信号に適用されたホワイトバランスの処理に関するデータを静止画像処理部１４および動画像処理部１５に供給する。

なお、共通画像処理部１３から静止画像処理部１４に供給される画像信号と、共通画像処理部１３から動画像処理部１５に供給される画像信号とは、画角や画像のサイズ、または解像度が異なるものであっても、画角や画像のサイズ、または解像度が同じものであっても良い。

静止画像処理部１４は、共通画像処理部１３から供給された画像信号のうちの１つの静止画像に対応する画像信号に、例えば、JPEG（Joint Photographic Experts Group）方式の符号化などの静止画像を圧縮符号化する処理を適用して、画像信号から、静止画像を表示するための静止画像データを生成する。静止画像処理部１４は、生成した静止画像データを記録媒体１６に供給する。

なお、生成される静止画像データの方式は、JPEG方式に限るものではなく、JPEG2000方式など他の方式であってもよい。

また、静止画像処理部１４は、共通画像処理部１３から供給された画像信号をモニタリング制御部１８に供給する。さらに、静止画像処理部１４は、生成した静止画像データを復号して得られた画像信号をモニタリング制御部１８に供給する。さらにまた、静止画像処理部１４は、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、若しくはISO（International Organization for Standardization）感度値など撮影の条件を示すデータ、または共通画像処理部１３において画像信号に適用された処理に関するデータをモニタリング制御部１８に供給する。

動画像処理部１５は、共通画像処理部１３から供給された画像信号に、例えば、MPEG（Moving Pictures Experts Group）方式の符号化などの動画像を圧縮符号化する処理を適用して、画像信号から、動画像を表示するための動画像データを生成する。動画像処理部１５は、生成した動画像データを記録媒体１７に供給する。

なお、生成される動画像データの方式は、MPEG1、MPEG2、MPEG4、またはMPEG７などのMPEG方式に限るものではなく、他の方式であってもよい。

また、動画像処理部１５は、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号（圧縮符号化する前の元の画像信号）をモニタリング制御部１８に供給する。さらに、動画像処理部１５は、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号についての、撮影の条件を示すデータまたは共通画像処理部１３において画像信号に適用された処理に関するデータをモニタリング制御部１８に供給する。

記録媒体１６は、ハードディスク、所定のドライブに駆動される光ディスク、または半導体メモリなどからなり、静止画像処理部１４から供給された静止画像データを記録する。

記録媒体１７は、ハードディスク、所定のドライブに駆動される光ディスク、または半導体メモリなどからなり、動画像処理部１５から供給された動画像データを記録する。

なお、静止画像データおよび動画像データを１つの記録媒体に記録するようにしてもよい。

モニタリング制御部１８は、静止画像データの生成を示す画像を表示するための表示データを生成する。例えば、モニタリング制御部１８は、シャッタ幕を模した画像を表示するための表示データを生成する。また、例えば、モニタリング制御部１８は、静止画像データによって表示される画像を縮小した画像を表示するための表示データを生成する。

さらに、モニタリング制御部１８は、動画像データに対応する画像を表示するための表示データを生成する。例えば、モニタリング制御部１８は、動画像データによって表示される画像を縮小した画像を表示するための表示データを生成する。

モニタリング制御部１８は、表示制御部３１および表示制御部３２を含む。表示制御部３１は、静止画像処理部１４から供給された画像信号、または予め記憶しているデータなどを基に、カメラ１１によって撮影されている被写体の画像を表示するための表示データ、または静止画像データの生成を示す画像を表示するための表示データを生成する。また、表示制御部３１は、静止画像処理部１４から供給された撮影の条件を示すデータを基に、静止画像の撮影に関する情報を表示するための表示データを生成する。表示制御部３１は、生成した表示データを表示部１９に供給する。

表示制御部３２は、動画像処理部１５から供給された画像信号を基に、動画像データに対応する画像を表示するための表示データを生成する。また、表示制御部３２は、動画像処理部１５から供給された撮影の条件を示すデータまたは予め記憶しているデータを基に、動画像の撮影に関係する情報を表示するための表示データを生成する。表示制御部３２は、生成した表示データを表示部２０に供給する。

表示部１９は、モニタリング制御部１８から供給された表示データを基に、カメラ１１によって撮影されている被写体の画像を表示するか、または静止画像データの生成を示す画像を表示する。

表示部２０は、モニタリング制御部１８から供給された表示データを基に、動画像データに対応する画像を表示するか、または動画像の撮影に関係する情報を表示する。例えば、表示部１９または表示部２０は、LCD（Liquid Crystal Display）または有機EL（Electro Luminescence）などの表示デバイスが設けられている、いわゆるエレクトリックビューファインダである。

モニタリング制御部１８は、静止画像処理部１４において静止画像データが生成された場合、静止画像処理部１４からの信号を基に、スピーカまたはブザーなどからなる音声出力部２１に、シャッタ音を模した音声またはブザー音などを出力させる。

図２は、動画像データの記録の開始が指示された場合に実行される、撮影装置１の記録の処理を説明するフローチャートである。ステップＳ１１において、カメラ制御部１２は、カメラ１１に画像を撮影させる。すなわち、カメラ１１は、画像（被写体）を撮影して、換言すれば、被写体の画像を電気信号である画像信号に変換して、撮影の結果得られた画像信号を、カメラ制御部１２および共通画像処理部１３を介して、静止画像処理部１４および動画像処理部１５に供給する。

ステップＳ１２において、動画像処理部１５は、共通画像処理部１３から供給された画像信号への所定の処理の適用を開始して、動画像データの生成を開始する。動画像処理部１５は、生成した動画像のデータを記録媒体１７に供給する。ステップＳ１３において、記録媒体１７は、動画像処理部１５から供給された動画像データの記録を開始する。例えば、ステップＳ１３において、光ディスクである記録媒体１７を駆動するドライブが、記録媒体１７の駆動を開始し、動画像処理部１５から供給された動画像データの記録媒体１７への記録を開始する。

ステップＳ１４において、カメラ制御部１２は、使用者の操作に対応した図示せぬスイッチなどからの信号を基に、動画像の記録の停止が指示されたか否かを判定し、動画像の記録の停止が指示されていないと判定された場合、ステップＳ１５に進み、使用者の操作に対応した図示せぬシャッタボタンなどからの信号を基に、シャッタボタンが押下されて、静止画像の記録が指示されたか否かを判定する。

ステップＳ１５において、静止画像の記録が指示されたと判定された場合、ステップＳ１６に進み、静止画像処理部１４は、共通画像処理部１３から供給された画像信号に所定の処理を適用して、静止画像データを生成する。静止画像処理部１４は、生成した静止画像データを記録媒体１６に供給する。ステップＳ１７において、記録媒体１６は、静止画像処理部１４から供給された静止画像データを記録する。例えば、ステップＳ１７において、半導体メモリである記録媒体１６は、静止画像データを記録する。

ステップＳ１７の後、手続きは、ステップＳ１４に戻り、上述した処理を繰り返す。

また、ステップＳ１５において、静止画像の記録が指示されていないと判定された場合、静止画像を記録する必要はないので、ステップＳ１６およびステップＳ１７の処理はスキップされて、手続きは、ステップＳ１４に戻り、上述した処理を繰り返す。

ステップＳ１４において、動画像の記録の停止が指示されたと判定された場合、ステップＳ１８に進み、動画像処理部１５は、動画像データの生成を停止する。ステップＳ１９において、記録媒体１７は、動画像処理部１５から供給された動画像データの記録を停止して、処理は終了する。

このように、動画像データを記録しているとき、静止画像データが記録される。

次に、図３のフローチャートを参照して、動画像のモニタリングの処理を説明する。ステップＳ２１において、モニタリング制御部１８の表示制御部３２は、動画像処理部１５から供給された画像信号を基に、記録している動画像（記録している動画像データで表示される動画像に対応する動画像）を表示するための表示データの生成を開始する。すなわち、表示制御部３２は、動画像データに対応する画像を表示するための表示データの生成を開始する。また、表示制御部３２は、動画像処理部１５から供給された撮影の条件を示すデータを基に、記録開始（撮影開始）からの経過時間を示すタイムカウンタ、記録媒体１７の空き容量、図示せぬバッテリに蓄電されている電力量に対応した動画を撮影することができる時間など動画像の撮影に関係する情報を表示するための表示データを生成する。

ステップＳ２２において、表示制御部３２は、記録している動画像を表示するための表示データを表示部２０に供給し、表示部２０に、記録している動画像を表示させる。

これにより、図４で示されるように、表示部２０は、記録している動画像を、切れ目無く、継続して表示することができる。

ステップＳ２３において、表示制御部３２は、動画像の撮影に関係する情報を表示するための表示データを表示部２０に供給し、表示部２０に、動画像の撮影に関係する情報を表示させ、ステップＳ２２に戻り、上述した処理を繰り返す。

図３のフローチャートで説明される処理は、動画像データの記録が終了したとき、終了する。

次に、図５のフローチャートを参照して、静止画像のモニタリングの処理を説明する。ステップＳ３１において、モニタリング制御部１８の表示制御部３１は、静止画像処理部１４から供給された画像信号を基に、カメラ１１によって撮影されている被写体の画像を表示するための表示データを表示部１９に供給することにより、表示部１９に動画像を表示させる。

例えば、図６の左側で示されるように、表示部１９は、被写体の動画像を表示する。

なお、この場合、記録できる静止画像データの数などの静止画像の記録に関係する情報を表示部１９に表示させるようにしてもよい。

ステップＳ３２において、表示制御部３１は、静止画像処理部１４から供給された信号を基に、静止画像処理部１４によって静止画像データが生成されたか否かを判定する。ステップＳ３２において、静止画像データが生成されたと判定された場合、ステップＳ３３に進み、モニタリング制御部１８は、音声出力部２１にシャッタ音を出力させる。

ステップＳ３４において、表示制御部３１は、予め記憶しているデータを基に、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データを生成する。ステップＳ３５において、表示制御部３１は、静止画像処理部１４から供給された画像信号から生成された、カメラ１１によって撮影されている被写体の画像を表示するための表示データ、すなわち、動画像を表示するための表示データと、シャッタ幕の画像を表示するための表示データとを合成する。

ステップＳ３６において、表示制御部３１は、合成した表示データを基に、表示部１９に、動画像と合成されたシャッタ幕の画像を表示させる。

例えば、図６の左側から２番目および３番目で示されるように、静止画像処理部１４によって静止画像データが生成された場合、表示部１９は、静止画像の撮影（記録）の瞬間を示す、動画像をシャッタ幕で遮ることを模した画像を表示する。

ステップＳ３７において、表示制御部３１は、静止画像処理部１４から供給された、生成した静止画像データを復号して得られた画像信号を基に、生成した静止画像データに対応する静止画像を表示するための表示データを生成する。

ステップＳ３８において、表示制御部３１は、静止画像を表示するための表示データを表示部１９に供給して、表示部１９に、所定の時間、静止画像を表示させる。

ステップＳ３９において、表示制御部３１は、静止画像処理部１４から供給された、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、撮影の条件を示すデータを基に、静止画像の撮影に関係する情報を表示させるための表示データを生成する。表示制御部３１は、表示部１９に、静止画像の撮影に関係する情報を表示させ、ステップＳ３１に戻り、上述した処理を繰り返す。

例えば、図６の右側で示されるように、シャッタ幕の画像が表示された後に、表示部１９は、生成した静止画像データに対応する静止画像を表示し、また、静止画像の撮影に関係する情報を表示する。

ステップＳ３２において、静止画像データが生成されていないと判定された場合、静止画像データに関係する画像を表示する必要はないので、ステップＳ３１に戻り、動画像の表示の処理を繰り返す。

このように、表示部１９は、静止画像データの生成を示す画像、静止画像の撮影に必要な画像、または静止画像の撮影に関する情報などが表示される。この間、表示部２０には、記録している動画像が、切れ目無く、継続して表示される。

その結果、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影できるようになる。

なお、記録された静止画像データで表示される静止画像を確認したり、静止画像データの内容を確認するための、ヒストグラムなどを表示するプレビュー表示は、表示部１９のみによって行われる。

次に、１つの表示部を設けて、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影できるようにした撮影装置を説明する。

図７は、本発明の一実施の形態の撮影装置の他の構成を示すブロック図である。図１に示す場合と同様の部分には同一の符号を付してあり、その説明は適宜省略する。

静止画像処理部１４は、生成した静止画像データを復号して得られた画像信号を表示画像処理部５１に供給する。また、静止画像処理部１４は、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、またはISO感度値など撮影の条件を示すデータ、または共通画像処理部１３において画像信号に適用された処理に関するデータを表示画像処理部５１に供給する。

動画像処理部１５は、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号（圧縮符号化する前の元の画像信号）を表示画像処理部５１に供給する。さらに、動画像処理部１５は、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号についての、撮影の条件を示すデータまたは共通画像処理部１３において画像信号に適用された処理に関するデータを表示画像処理部５１に供給する。

表示画像処理部５１は、静止画像処理部１４または動画像処理部１５から供給されたデータを基に、静止画像データの生成を示す画像を表示するための表示データおよび動画像データに対応する画像を表示するための表示データを生成する。表示画像処理部５１は、生成した表示データをモニタリング制御部５２に供給する。

モニタリング制御部５２は、表示画像処理部５１から供給された表示データを表示部５３に供給して、表示部５３に、静止画像データの生成を示す画像または動画像データに対応する画像を表示させる。

表示部５３は、モニタリング制御部５２から供給された表示データを基に、静止画像データの生成を示す画像または動画像データに対応する画像を表示する。表示部５３は、例えば、LCDまたは有機ELなどの表示デバイスが設けられている、いわゆるエレクトリックビューファインダである。

音声出力部５４は、スピーカまたはブザーなどからなり、モニタリング制御部５２の制御の基に、シャッタ音などの、静止画像データを生成したことを使用者に報知する音声を出力する。

図８は、表示画像処理部５１の構成の例を示すブロック図である。表示画像生成部７１は、予め記憶しているデータ、または静止画像処理部１４から供給された、静止画像データを復号して得られた画像信号を基に、静止画像データの生成を示す画像を表示するための表示データを生成する。また、表示画像生成部７１は、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、若しくはISO感度値など撮影の条件を示すデータを基に、静止画像の撮影に関する情報を表示するための表示データを生成する。

表示画像生成部７２は、動画像処理部１５から供給された、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号を基に、動画像データに対応する画像を表示するための表示データを生成する。また、表示画像生成部７２は、動画像処理部１５から供給された、動画像データを生成する処理（圧縮符号化する処理）が適用された画像信号についての、撮影の条件を示すデータを基に、動画像の撮影に関係する情報を表示するための表示データを生成する。

動き量検出部７３は、静止画像処理部１４または動画像処理部１５から供給された画像信号を基に、カメラ１１によって撮影されている被写体の画像における動き量を検出する。例えば、動き量検出部７３は、ブロックマッチングまたは勾配法などの処理により、カメラ１１によって撮影されている被写体の画像における動き量を検出する。

透過率決定部７４は、使用者の選択に応じて、または検出された動き量に応じて、表示画像生成部７１によって生成される表示データで表示される画像の透過率を決定する。なお、表示画像生成部７１によって生成される表示データで表示される画像は、表示画像生成部７２によって生成される表示データで表示される画像に対して、上側の層（レイヤー）に表示されるので、透過率をより大きくした場合には、表示画像生成部７１によって生成される表示データで表示される画像がより薄く、表示画像生成部７２によって生成される表示データで表示される画像がより濃く表示される。透過率をより小さくした場合には、表示画像生成部７１によって生成される表示データで表示される画像がより濃く、表示画像生成部７２によって生成される表示データで表示される画像がより薄く表示される。

モード選択部７５は、使用者の選択に応じて、または検出された動き量に応じて、生成された動画像データまたは生成された静止画像データに応じた所定の画像を表示する状態である表示モードを選択する。

図９は、モニタリング制御部５２の構成の例を示すブロック図である。画像合成部９１は、表示画像処理部５１の表示画像生成部７１により生成された表示データと、表示画像生成部７２により生成された表示データとを、１つの最終的な表示データに合成する。

表示制御部９２は、合成された表示データを基に、表示部５３の画像または情報の表示を制御する。音声出力制御部９３は、音声出力部５４を制御して、音声出力部５４に音声を出力させる。

図７で構成が示される撮影装置１の記録の処理は、図２のフローチャートを参照して説明した処理と同様なので、その説明は省略する。

図１０は、モニタリングのモードの選択の処理を説明するフローチャートである。ステップＳ１０１において、表示画像処理部５１のモード選択部７５は、図示せぬボタン、キー、スイッチ、またはタッチパネルなどから供給されてくる、使用者の操作に応じた、使用者に選択されたモードを示す信号を取得する。ステップＳ１０２において、モード選択部７５は、選択されたモードを示す信号を基に、動画像に関係する情報のみを表示する動画像優先モードが選択されたか否かを判定し、動画像優先モードが選択されたと判定された場合、ステップＳ１０３に進み、状態を動画像優先モードとして、処理は終了する。

ステップＳ１０２において、動画像優先モードが選択されていないと判定された場合、ステップＳ１０４に進み、モード選択部７５は、選択されたモードを示す信号を基に、静止画像に関係する全ての情報を表示する静止画像優先モードが選択されたか否かを判定し、静止画像優先モードが選択されたと判定された場合、手続きは、ステップＳ１０５に進む。ステップＳ１０５において、モード選択部７５は、状態を静止画像優先モードとして、処理は終了する。

ステップＳ１０４において、静止画像優先モードが選択されていないと判定された場合、ステップＳ１０６に進み、モード選択部７５は、選択されたモードを示す信号を基に、静止画像データの生成について、シャッタ幕の画像のみを表示するシャッタ幕画像表示モードが選択されたか否かを判定し、シャッタ幕画像表示モードが選択されたと判定された場合、手続きは、ステップＳ１０７に進む。ステップＳ１０７において、モード選択部７５は、状態をシャッタ幕画像表示モードとして、処理は終了する。

ステップＳ１０６において、シャッタ幕画像表示モードが選択されていないと判定された場合、ステップＳ１０８に進み、モード選択部７５は、選択されたモードを示す信号を基に、静止画像データの生成について、静止画像データの生成を示すアイコンを表示するアイコン表示モードが選択されたか否かを判定し、アイコン表示モードが選択されたと判定された場合、手続きは、ステップＳ１０９に進む。ステップＳ１０９において、モード選択部７５は、状態をアイコン表示モードとして、処理は終了する。

ステップＳ１０８において、アイコン表示モードが選択されていないと判定された場合、ステップＳ１１０に進み、モード選択部７５は、選択されたモードを示す信号を基に、静止画像に関係する情報を半透過で表示する半透過モードが選択されたか否かを判定し、半透過モードが選択されたと判定された場合、手続きは、ステップＳ１１１に進む。ステップＳ１１１において、モード選択部７５は、状態を半透過モードとして、処理は終了する。

ステップＳ１１０において、半透過モードが選択されていないと判定された場合、まだ、モードが選択されていないので、ステップＳ１０１に戻り、上述した処理を繰り返す。

このように、動画像優先モード、静止画像優先モード、シャッタ幕画像表示モード、アイコン表示モード、または半透過表示モードのいずれか１つが選択される。

次に、図１１のフローチャートを参照して、半透過表示モードにおいて表示される、静止画像に関係する情報の透過率を決定する処理を説明する。ステップＳ１３１において、透過率決定部７４は、予めなされている設定または使用者の選択などを基に、使用者が透過率を決定するか否かを判定し、使用者が透過率を決定すると判定された場合、ステップＳ１３２に進み、図示せぬボタン、キー、スイッチ、またはタッチパネルなどから、使用者の操作に応じた、使用者が選択した透過率を示す信号を取得する。この透過率を示す信号は、透過率の割合を数値で示すもの、または濃い、少し薄い、若しくは薄いなど定性的な状態を示すものとすることができる。

ステップＳ１３３において、透過率決定部７４は、透過率を示す信号を基に、０乃至１のうちの何れかの定量的な透過率を決定し、決定した透過率のデータを記憶して、処理は終了する。

ステップＳ１３１において、使用者が透過率を決定しないと判定された場合、ステップＳ１３４に進み、透過率決定部７４は、動き量検出部７３に、静止画像処理部１４または動画像処理部１５から供給された画像信号を基に、カメラ１１によって撮影されている被写体の画像における動き量を検出させる。ステップＳ１３５において、透過率決定部７４は、検出された動き量を基に、定量的な透過率を決定し、決定した透過率のデータを記憶して、処理は終了する。

この場合、動き量がより大きい場合には、静止画像に関係する情報がより薄く表示されるように、透過率が大きくされ、動き量がより小さい場合には、静止画像に関係する情報がより濃く表示されるように、透過率が小さくされる。

従って、動き量が大きい場合でも被写体の追従が容易になり、被写体を追従する必要が少ない、動き量が小さい場合には、静止画像に関係する情報を使用者により確実に認識させることができるようになる。

次に、図１２のフローチャートを参照して、モニタリングの処理を説明する。ステップＳ１５１において、表示画像処理部５１は、状態が動画像優先モードであるか否かを判定し、動画像優先モードであると判定された場合、ステップＳ１５２に進み、表示画像処理部５１およびモニタリング制御部５２は、動画像優先の表示の処理を実行して、処理は終了する。動画像優先の表示の処理の詳細は後述する。

ステップＳ１５１において、動画像優先モードでないと判定された場合、ステップＳ１５３に進み、表示画像処理部５１は、状態が静止画像優先モードであるか否かを判定する。ステップＳ１５３において、静止画像優先モードであると判定された場合、ステップＳ１５４に進み、表示画像処理部５１およびモニタリング制御部５２は、静止画像優先の表示の処理を実行して、処理は終了する。静止画像優先の表示の処理の詳細は後述する。

ステップＳ１５３において、静止画像優先モードでないと判定された場合、ステップＳ１５５に進み、表示画像処理部５１は、状態がシャッタ幕画像表示モードであるか否かを判定する。ステップＳ１５５において、シャッタ幕画像表示モードであると判定された場合、ステップＳ１５６に進み、表示画像処理部５１およびモニタリング制御部５２は、シャッタ幕の画像を表示する表示の処理を実行して、処理は終了する。シャッタ幕の画像を表示する表示の処理の詳細は後述する。

ステップＳ１５５において、シャッタ幕画像表示モードでないと判定された場合、ステップＳ１５７に進み、表示画像処理部５１は、状態がアイコン表示モードであるか否かを判定する。ステップＳ１５７において、アイコン表示モードであると判定された場合、ステップＳ１５８に進み、表示画像処理部５１およびモニタリング制御部５２は、アイコンを表示する表示の処理を実行して、処理は終了する。アイコンを表示する表示の処理の詳細は後述する。

ステップＳ１５７において、アイコン表示モードでないと判定された場合、半透過表示モードなので、ステップＳ１５９に進み、表示画像処理部５１およびモニタリング制御部５２は、半透過の表示の処理を実行して、処理は終了する。半透過の表示の処理の詳細は後述する。

次に、図１３のフローチャートを参照して、図１２のステップＳ１５２の処理に対応する、動画像優先の表示の処理について説明する。ステップＳ１８１において、表示画像処理部５１の表示画像生成部７２は、動画像処理部１５から供給された画像信号を基に、記録している動画像を表示するための表示データの生成を開始する。すなわち、ステップＳ１８１において、表示画像生成部７２は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データの生成を開始する。動画像を表示するための表示データは、モニタリング制御部５２に供給される。

ステップＳ１８２において、表示画像生成部７２は、動画像処理部１５からの信号を基に、動画像の記録の停止が指示されたか否かを判定する。換言すれば、ステップＳ１８２において、表示画像生成部７２は、動画像処理部１５からの信号を基に、動画像データの生成の停止が指示されたか否かを判定する。

ステップＳ１８２において、動画像の記録の停止が指示されていないと判定された場合（動画像データの生成の停止が指示されていないと判定された場合）、ステップＳ１８３に進み、モニタリング制御部５２は、表示画像生成部７２から供給された表示データを基に、表示部５３に、記録している動画像を表示させる。すなわち、モニタリング制御部５２は、表示画像生成部７２から供給された表示データを基に、表示部５３に、生成している動画像データで表示される動画像に対応する動画像を表示させる。

ステップＳ１８４において、モニタリング制御部５２は、表示画像生成部７２において生成された、動画像の撮影に関係する情報を表示するための表示データを表示画像生成部７２から取得して、表示データを基に、動画像の撮影に関係する情報を表示部２０に表示させる。

ステップＳ１８５において、表示画像処理部５１は、静止画像処理部１４から供給された信号を基に、静止画像処理部１４によって静止画像データが生成されたか否かを判定する。ステップＳ１８５において、静止画像データが生成されたと判定された場合、ステップＳ１８６に進み、表示画像処理部５１は、静止画像データが生成された旨をモニタリング制御部５２に通知する。表示画像処理部５１から静止画像データが生成された旨が通知されると、モニタリング制御部５２は、音声出力部５４に、シャッタ音を出力させて、ステップＳ１８２に戻り、上述した処理を繰り返す。

ステップＳ１８５において、静止画像データが生成されていないと判定された場合、ステップＳ１８６の処理はスキップされ、手続きは、ステップＳ１８２に戻り、上述した処理を繰り返す。

ステップＳ１８２において、動画像の記録の停止が指示されたと判定された場合（動画像データの生成の停止が指示されたと判定された場合）、処理は終了する。

以上のように、図１４で示されるように、表示部５３は、記録している動画像を、切れ目無く、継続して表示することができる。

動画像優先の表示の処理は、被写体の動きが大きく、フレーミングの追従が難しい場合、またはあくまでも動画像の記録を補完するために静止画像を記録する場合など、主として動画像の記録を目的とする場合に有効である。

次に、図１５のフローチャートを参照して、図１２のステップＳ１５４の処理に対応する、静止画像優先の表示の処理について説明する。ステップＳ２０１乃至ステップＳ２０５の処理は、それぞれ、図１３のステップＳ１８１乃至ステップＳ１８５の処理と同様なのでその説明は省略する。

ステップＳ２０６において、表示画像処理部５１は、静止画像データが生成された旨をモニタリング制御部５２に通知する。表示画像処理部５１から静止画像データが生成された旨が通知されると、モニタリング制御部５２は、音声出力部５４に、シャッタ音を出力させる。

ステップＳ２０７において、表示画像生成部７１は、予め記憶しているデータを基に、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２０８において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。すなわち、ステップＳ２０８において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。

ステップＳ２０９において、表示制御部９２は、合成した表示データを基に、表示部５３に、動画像と合成されたシャッタ幕の画像を表示させる。

例えば、図１６で示されるように、表示部５３は、静止画像の撮影（記録）の瞬間を示す、動画像をシャッタ幕で遮ることを模した画像を表示する。

ステップＳ２１０において、表示画像生成部７１は、静止画像処理部１４から供給された、生成した静止画像データを復号して得られた画像信号を基に、生成した静止画像データに対応する静止画像を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２１１において、モニタリング制御部５２の表示制御部９２は、静止画像を表示するための表示データを表示部５３に供給して、表示部５３に、所定の時間、静止画像を表示させる。

ステップＳ２１２において、表示画像生成部７１は、静止画像処理部１４から供給された、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、若しくはISO感度値など撮影の条件を示すデータを基に、静止画像の撮影に関する情報を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２１３において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、静止画像の撮影に関する情報を表示するための表示データとを合成する。すなわち、ステップＳ２１３において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、静止画像の撮影に関する情報を表示するための表示データとを合成する。

ステップＳ２１４において、表示制御部９２は、所定の時間、合成した表示データを基に、表示部５３に、動画像と合成された静止画像の撮影に関する情報を表示させる。

例えば、図１６の右側で示されるように、表示部５３は、静止画像の撮影に関する情報を表示する。

ステップＳ２１４の処理の後、手続きは、ステップＳ２０２に戻り、上述した処理を繰り返す。

このように、静止画像優先の表示の処理においては、表示部５３に、静止画像データを生成すると、シャッタ幕の画像が表示され、生成した静止画像データに対応する静止画像が表示され、そして、静止画像の撮影に関する情報が表示される。

静止画像優先の表示の処理は、動きの少ない被写体を撮影する場合に有効である。被写体の動きが少ないので、静止画像優先の表示の処理において、継続して動画像データを生成しながら、静止画像の撮影に関する情報を表示しても、被写体がフレームアウトする可能性が低く、使用者は、静止画像の撮影に関する情報をより確実に認識することができる。

また、静止画像優先の表示の処理は、静止画像の記録を補完するために動画像画像を記録する場合など、主として静止画像の記録を目的とする場合に有効である。

次に、図１７のフローチャートを参照して、図１２のステップＳ１５６の処理に対応する、シャッタ幕の画像を表示する表示の処理について説明する。ステップＳ２３１乃至ステップＳ２３６の処理は、それぞれ、図１５のステップＳ２０１乃至ステップＳ２０６の処理と同様なのでその説明は省略する。

ステップＳ２３７において、表示画像生成部７１は、予め記憶しているデータを基に、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２３８において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。すなわち、ステップＳ２３８において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、シャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。

ステップＳ２３９において、表示制御部９２は、合成した表示データを基に、表示部５３に、動画像と合成されたシャッタ幕の画像を表示させる。

例えば、図１８で示されるように、表示部５３は、静止画像の撮影（記録）の瞬間を示す、動画像をシャッタ幕で遮ることを模した画像を表示する。

ステップＳ２４０において、表示画像生成部７１は、静止画像処理部１４から供給された、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、若しくはISO感度値など撮影の条件を示すデータを基に、静止画像の撮影に関する情報を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２４１において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、静止画像の撮影に関する情報を表示するための表示データとを合成する。すなわち、ステップＳ２４１において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、静止画像の撮影に関する情報を表示するための表示データとを合成する。

ステップＳ２４２において、表示制御部９２は、所定の時間、合成した表示データを基に、表示部５３に、動画像と合成された静止画像の撮影に関する情報を表示させる。

例えば、図１８の右側で示されるように、表示部５３は、静止画像の撮影に関する情報を表示する。

このように、シャッタ幕の画像を表示する表示の処理においては、シャッタ幕の画像を表示した後、生成した静止画像データに対応する静止画像を表示させることなく、即座に、動画像を表示させる。

ステップＳ２４２の処理の後、手続きは、ステップＳ２３２に戻り、上述した処理を繰り返す。

このように、シャッタ幕の画像を表示する表示の処理においては、静止画像データを生成すると、表示部５３に、シャッタ幕の画像が表示されて、その後、即座に、動画像と共に静止画像の撮影に関する情報が表示される。シャッタ幕の画像を表示する表示の処理においては、生成した静止画像データに対応する静止画像は表示されない。

従って、静止画像優先の表示の処理に比較して、動いている被写体を追従するのが容易になる。

次に、図１９のフローチャートを参照して、図１２のステップＳ１５８の処理に対応する、アイコンを表示する表示の処理について説明する。ステップＳ２５１乃至ステップＳ２５６の処理は、それぞれ、図１７のステップＳ２３１乃至ステップＳ２３６の処理と同様なのでその説明は省略する。

ステップＳ２５７において、表示画像生成部７１は、予め記憶しているデータを基に、静止画像データの生成を示すアイコンを表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２５８において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、静止画像データの生成を示すアイコンを表示するための表示データとを合成する。すなわち、ステップＳ２５８において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、静止画像データの生成を示すアイコンを表示するための表示データとを合成する。

ステップＳ２５９において、表示制御部９２は、合成した表示データを基に、表示部５３に、アイコンと動画像を表示させる。

例えば、図２０で示されるように、表示部５３は、動画像と共に、静止画像の撮影（記録）の瞬間を示す、アイコン１０１を表示する。例えば、アイコン１０１は、いわゆる35mmの銀塩フィルムのケースの形状を模したものとされる。

ステップＳ２６０乃至ステップＳ２６２の処理は、それぞれ、図１７のステップＳ２４０乃至ステップＳ２４２の処理と同様なので、その説明は省略する。

このように、アイコンを表示する表示の処理においては、表示部５３に、動画像と共に、静止画像の撮影（記録）の瞬間を示す、アイコン１０１が表示される。アイコン１０１は、表示部５３の表示面の一部に表示されるので、アイコン１０１が表示されても、使用者は、動画像のほぼ全体を見ることができる。また、アイコンを表示する表示の処理においては、アイコン１０１を表示した後、生成した静止画像データに対応する静止画像を表示させることなく、即座に、動画像を表示させる。

従って、動いている被写体の追従がさらに容易になる。

次に、図２１のフローチャートを参照して、図１２のステップＳ１５９の処理に対応する、半透過の表示の処理について説明する。ステップＳ２８１乃至ステップＳ２８６の処理は、それぞれ、図１５のステップＳ２０１乃至ステップＳ２０６の処理と同様なのでその説明は省略する。

ステップＳ２８７において、表示画像生成部７１は、予め記憶しているデータを基に、ステップＳ１３３またはステップＳ１３５の処理で決定された透過率の半透過のシャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２８８において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、半透過のシャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。すなわち、ステップＳ２８８において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、半透過のシャッタ幕の画像（シャッタ幕を模した画像）を表示するための表示データとを合成する。

なお、画像合成部９１は、半透過の画像の表示データが供給された場合、半透過の画像が上側の層（レイヤー）に表示されるように、すなわち、２つの表示データで表示される画像の双方が見えるように表示データを合成する。

ステップＳ２８９において、表示制御部９２は、合成した表示データを基に、表示部５３に、動画像と合成された半透過のシャッタ幕の画像を表示させる。

例えば、図２２で示されるように、表示部５３は、静止画像の撮影（記録）の瞬間を示す、動画像を半透過のシャッタ幕で遮ることを模した画像を表示する。シャッタ幕の画像が半透過なので、使用者は、動画像の全体を見ることができる。

ステップＳ２９０において、表示画像生成部７１は、静止画像処理部１４から供給された、生成した静止画像データを復号して得られた画像信号を基に、生成した静止画像データに対応する静止画像であって、ステップＳ１３３またはステップＳ１３５の処理で決定された透過率の半透過の静止画像を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２９１において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、半透過の静止画像を表示するための表示データとを合成する。すなわち、ステップＳ２９１において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、生成した静止画像データに対応する静止画像であって、半透過の静止画像を表示するための表示データとを合成する。ステップＳ２９２において、モニタリング制御部５２は、静止画像を表示するための表示データを表示部５３に供給して、表示部５３に、所定の時間、動画像と合成された半透過の静止画像を表示させる。

例えば、図２２で示されるように、表示部５３は、動画像と静止画像とを同時に表示することになる。従って、使用者は、静止画像と共に動画像の全体を見ることができる。

ステップＳ２９３において、表示画像生成部７１は、静止画像処理部１４から供給された、静止画像データを生成する処理（圧縮符号する処理）が適用された画像信号についての、ズーム、ピント、絞り、シャッタスピード、若しくはISO感度値など撮影の条件を示すデータを基に、ステップＳ１３３またはステップＳ１３５の処理で決定された透過率の半透過で表示される、静止画像の撮影に関する情報を表示するための表示データを生成する。表示画像生成部７１は、生成した表示データをモニタリング制御部５２に供給する。

ステップＳ２９４において、モニタリング制御部５２の画像合成部９１は、表示画像生成部７２において生成された、記録している動画像を表示するための表示データと、表示画像生成部７１において生成された、静止画像の撮影に関する情報を表示するための表示データとを合成する。すなわち、ステップＳ２９４において、画像合成部９１は、生成している動画像データで表示される動画像に対応する動画像を表示するための表示データと、半透過で表示される、静止画像の撮影に関する情報を表示するための表示データとを合成する。

ステップＳ２９５において、表示制御部９２は、所定の時間、合成した表示データを基に、表示部５３に、半透過で、動画像と合成された静止画像の撮影に関する情報を表示させる。

例えば、図２２の右側で示されるように、表示部５３は、動画像と共に、半透過で、静止画像の撮影に関する情報を表示する。

ステップＳ２９５の処理の後、手続きは、ステップＳ２８２に戻り、上述した処理を繰り返す。

このように、半透過の表示の処理においては、静止画像に関する情報が半透過で表示されるので、記録している動画像を、切れ目無く、継続して表示することができる。その結果、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影できるようになる。

なお、カメラ１１によって撮影されている被写体の画像における動き量に応じて、生成された動画像データまたは生成された静止画像データに応じた所定の画像を表示する状態である表示モードを選択することができる。

図２３は、モニタリングのモードの選択の他の処理を説明するフローチャートである。なお、以下の説明における第１の閾値乃至第４の閾値の大きさは、第１の閾値＞第２の閾値＞第３の閾値＞第４の閾値の関係を満たす。

ステップＳ３０１において、モード選択部７５は、動き量検出部７３に、静止画像処理部１４または動画像処理部１５から供給された画像信号を基に、カメラ１１によって撮影されている被写体の画像における動き量を検出させる。

ステップＳ３０２において、モード選択部７５は、動き量が第１の閾値より大きいか否かを判定し、動き量が第１の閾値より大きいと判定された場合、ステップＳ３０３に進み、状態を動画像優先モードとして、処理は終了する。

ステップＳ３０２において、動き量が第１の閾値以下であると判定された場合、ステップＳ３０４に進み、モード選択部７５は、動き量が第１の閾値以下で、第２の閾値より大きいか否かを判定し、動き量が第１の閾値以下で、第２の閾値より大きいと判定された場合、手続きは、ステップＳ３０５に進む。ステップＳ３０５において、モード選択部７５は、状態をアイコン表示モードとして、処理は終了する。

ステップＳ３０３において、動き量が第２の閾値以下であると判定された場合、ステップＳ３０６に進み、モード選択部７５は、動き量が第２の閾値以下で、第３の閾値より大きいか否かを判定し、動き量が第２の閾値以下で、第３の閾値より大きいと判定された場合、手続きは、ステップＳ３０７に進む。ステップＳ３０７において、モード選択部７５は、状態をシャッタ幕画像表示モードとして、処理は終了する。

ステップＳ３０６において、動き量が第３の閾値以下であると判定された場合、ステップＳ３０８に進み、モード選択部７５は、動き量が第３の閾値以下で、第４の閾値より大きいか否かを判定し、動き量が第３の閾値以下で、第４の閾値より大きいと判定された場合、手続きは、ステップＳ３０９に進む。ステップＳ３０９において、モード選択部７５は、状態を半透過表示モードとして、処理は終了する。

ステップＳ３０８において、動き量が第４の閾値以下であると判定された場合、ステップＳ３１０に進み、モード選択部７５は、状態を静止画像優先モードとして、処理は終了する。

このように、面倒な操作をすることなく、被写体の動きに適した表示モードを選択することができる。

以上のように、動画像および静止画像を同時に撮影する場合、被写体に追従して動画像を撮影できるようになる。

このように、動画像を表示するようにした場合には、被写体に追従して動画像を撮影することができる。また、画像を撮影し、撮影された画像から、動画像の画像データである動画像データを生成し、動画像データを生成しているとき、撮影された画像から、静止画像の画像データである静止画像データを生成し、動画像データが生成されているとき、動画像データに対応する画像を表示するための第１の表示データを生成し、静止画像データが生成されたとき、第１の表示データの生成と並列に、静止画像データの生成を示す画像を表示するための第２の表示データを生成するようにした場合には、動画像および静止画像を同時に撮影するとき、被写体に追従して動画像を撮影することができる。

なお、撮影装置は、デジタルカメラまたはデジタルビデオカメラに限らず、撮影機能を有する機器であれば足り、例えば、本発明は、パーソナルコンピュータまたはカメラ付き携帯電話機などであってもよい。

また、撮影装置は、生成した動画像データおよび静止画像データを記録媒体に記録すると説明したが、これに限らず、ネットワークなどを介して他の機器に送信するようにしてもよい。

上述した一連の処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。

図２４は、上述した一連の処理をプログラムにより実行するパーソナルコンピュータの構成の例を示すブロック図である。CPU（Central Processing Unit）４０１は、ROM（Read Only Memory）４０２、または記録部４０８に記憶されているプログラムに従って各種の処理を実行する。RAM（Random Access Memory）４０３には、CPU４０１が実行するプログラムやデータなどが適宜記憶される。これらのCPU４０１、ROM４０２、およびRAM４０３は、バス４０４により相互に接続されている。

CPU４０１にはまた、バス４０４を介して入出力インターフェース４０５が接続されている。入出力インターフェース４０５には、カメラ、キーボード、マウス、マイクロホンなどよりなる入力部４０６、１つまたは２つのディスプレイ、スピーカなどよりなる出力部４０７が接続されている。出力部４０７は、表示部１９、表示部２０、または表示部５３に対応する。CPU４０１は、入力部４０６から入力される指令に対応して各種の処理を実行する。そして、CPU４０１は、処理の結果を出力部４０７に出力する。

入出力インターフェース４０５に接続されている記録部４０８は、例えばハードディスクなどからなり、CPU４０１が実行するプログラムや各種のデータを記録する。記録部４０８は、記録媒体１６または記録媒体１７に対応する。通信部４０９は、インターネットやLANなどのネットワークを介して外部の装置と通信する。

また、通信部４０９を介してプログラムを取得し、記録部４０８に記録してもよい。

入出力インターフェース４０５に接続されているドライブ４１０は、磁気ディスク４２１、光ディスク４２２、光磁気ディスク４２３、或いは半導体メモリ４２４などが装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録部４０８に転送され、記録される。

一連の処理をさせるプログラムが格納されている記録媒体は、図２４に示すように、コンピュータとは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク４２１（フレキシブルディスクを含む）、光ディスク４２２（CD-ROM(Compact Disc-Read Only Memory)、ＤＶＤ(Digital Versatile Disc)を含む）、光磁気ディスク４２３（ＭＤ(Mini-Disc)（商標）を含む）、若しくは半導体メモリ４２４などよりなるパッケージメディアにより構成されるだけでなく、コンピュータに予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM４０２や、記録部４０８に含まれるハードディスクなどで構成される。

なお、上述した一連の処理を実行させるプログラムは、必要に応じてルータ、モデムなどのインターフェースを介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を介してコンピュータにインストールされるようにしてもよい。

また、本明細書において、記録媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

なお、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

本発明の一実施の形態の撮影装置の構成を示すブロック図である。 記録の処理を説明するフローチャートである。 動画像のモニタリングの処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 静止画像のモニタリングの処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 本発明の一実施の形態の撮影装置の他の構成を示すブロック図である。 表示画像処理部の構成の例を示すブロック図である。 モニタリング制御部の構成の例を示すブロック図である。 モニタリングのモードの選択の処理を説明するフローチャートである。 透過率の決定の処理を説明するフローチャートである。 モニタリングの処理を説明するフローチャートである。 動画像優先の表示の処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 静止画像優先の表示の処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 シャッタ幕の画像を表示する表示の処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 アイコンを表示する表示の処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 半透過の表示の処理を説明するフローチャートである。 表示部に表示される画像の例を示す図である。 モニタリングのモードの選択の他の処理を説明するフローチャートである。 パーソナルコンピュータの構成の例を示すブロック図である。

符号の説明

１ 撮影装置， １１ カメラ， １２ カメラ制御部， １３ 共通画像処理部， １４ 静止画像処理部， １５ 動画像処理部， １６ 記録媒体， １７ 記録媒体， １８ モニタリング制御部， １９ 表示部， ２０ 表示部， ２１ 音声出力部， ３１ 表示制御部， ３２ 表示制御部， ５１ 表示画像処理部， ５２ モニタリング制御部， ５３ 表示部， ５４ 音声出力部， ７１ 表示画像生成部， ７２ 表示画像生成部， ７３ 動き量検出部， ７４ 透過率決定部， ７５ モード選択部， ９１ 画像合成部， ９２ 表示制御部， ９３ 音声出力制御部， １０１ アイコン， ４０１ ＣＰＵ， ４０２ ＲＯＭ， ４０３ ＲＡＭ， ４０８ 記録部， ４２１ 磁気ディスク， ４２２ 光ディスク， ４２３ 光磁気ディスク， ４２４ 半導体メモリ

Claims (15)

1. 画像を撮影する撮影手段と、
   前記撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成手段と、
   前記動画像データ生成手段により前記動画像データを生成しているとき、前記撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成手段と、
   前記動画像データが生成されているとき、前記動画像データに対応する画像を表示するための第１の表示データを生成し、前記静止画像データが生成されたとき、前記第１の表示データの生成と並列に、前記静止画像データの生成を示す画像を表示するための第２の表示データを生成する表示データ生成手段と
   を備える撮影装置。
2. 前記第１の表示データを基に、前記動画像データに対応する画像を表示する第１の表示手段と、
   前記第２表示データを基に、前記静止画像データの生成を示す画像を表示する第２の表示手段と
   をさらに備える請求項１に記載の撮影装置。
3. 前記第１の表示データを基に、前記動画像データに対応する画像を表示し、前記第２表示データを基に、前記静止画像データの生成を示す画像を表示する表示手段をさらに備える請求項１に記載の撮影装置。
4. 前記動画像データまたは前記静止画像データに応じた所定の画像を表示する状態である表示モードを選択する選択手段と、
   選択された前記表示モードに対応して、前記第１の表示データまたは前記第２の表示データを基に、前記表示手段への、前記動画像データまたは前記静止画像データに応じた画像の表示を制御する表示制御手段と
   をさらに備える請求項３に記載の撮影装置。
5. 前記動画像の動き量を検出する動き量検出手段をさらに備え、
   前記選択手段は、検出された動き量を基に、前記表示モードを選択する
   請求項４に記載の撮影装置。
6. 前記表示データ生成手段は、シャッタ幕の画像を表示するための前記第２の表示データを生成する請求項１に記載の撮影装置。
7. 前記表示データ生成手段は、前記静止画像データから前記第２の表示データを生成する請求項１に記載の撮影装置。
8. 前記表示データ生成手段は、前記静止画像データの生成を示すアイコンを表示するための前記第２の表示データを生成する請求項１に記載の撮影装置。
9. 前記第１の表示データと前記第２の表示データとを第３の表示データに合成する合成手段と、
   前記第３の表示データを基に、画像の表示を制御する表示制御手段と
   をさらに備える請求項１に記載の撮影装置。
10. 前記動画像データまたは前記静止画像データに応じた所定の画像を表示する状態である表示モードを選択する選択手段をさらに備え、
    前記合成手段は、前記第１の表示データと前記第２の表示データとを、選択された前記表示モードに応じた前記第３の表示データに合成する
    請求項９に記載の撮影装置。
11. 表示データ生成手段は、半透過の画像を表示させるための前記第２の表示データを生成し、
    前記合成手段は、前記第１の表示データと、半透過の画像を表示させるための前記第２の表示データとを前記第３の表示データに合成する
    請求項９に記載の撮影装置。
12. 前記動画像の動き量を検出する動き量検出手段をさらに備え、
    表示データ生成手段は、検出された動き量に応じた透過率の半透過の画像を表示させるための前記第２の表示データを生成する
    請求項１１に記載の撮影装置。
13. 画像を撮影する撮影手段を備える撮影装置の撮影方法において、
    前記撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成ステップと、
    前記動画像データ生成ステップにおいて前記動画像データを生成しているとき、前記撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成ステップと、
    前記動画像データが生成されているとき、前記動画像データに対応する画像を表示するための第１の表示データを生成する第１の表示データ生成ステップと、
    前記静止画像データが生成されたとき、前記第１の表示データの生成と並列に、前記静止画像データの生成を示す画像を表示するための第２の表示データを生成する第２の表示データ生成ステップと
    を含む撮影方法。
14. 画像を撮影する撮影手段を備える撮影装置のコンピュータに、
    前記撮影手段により撮影された画像から、動画像の画像データである動画像データを生成する動画像データ生成ステップと、
    前記動画像データ生成ステップにおいて前記動画像データを生成しているとき、前記撮影手段により撮影された画像から、静止画像の画像データである静止画像データを生成する静止画像データ生成ステップと、
    前記動画像データが生成されているとき、前記動画像データに対応する画像を表示するための第１の表示データを生成する第１の表示データ生成ステップと、
    前記静止画像データが生成されたとき、前記第１の表示データの生成と並列に、前記静止画像データの生成を示す画像を表示するための第２の表示データを生成する第２の表示データ生成ステップと
    を含む処理を実行させるプログラム。
15. 請求項１４に記載のプログラムが記録されている記録媒体。

Images