JP4853932B2 - 撮影装置及びプログラム - Google Patents

Description

本発明は、動画撮影中における静止画撮影機能を有する撮影装置およびプログラムに関する。

従来、ＣＣＤ等の固体撮像素子が撮像した被写体の画像信号をデジタル信号に変換し、その画像データを記録媒体に記録するデジタルカメラにおいては、通常の静止画撮影機能に加え動画撮影機能を備えたものや、さらに静止画像や動画像と音声とを同時に記録する音声付き撮影機能を備えたものがある。

かかるデジタルカメラでは、通常、撮影モードとして静止画撮影を行う静止画撮影モードと、動画画撮影を行う動画撮影モードとを個別に設け、キー操作等のユーザー操作によってモード遷移を行う仕様となっている。

また、下記特許文献１，２には、デジタルカメラにおいて動画撮影中に静止画撮影を行う方法が開示されている。特許文献１の方法は、動画撮影中に静止画の撮影操作に応じて、動画フレーム周期で動画フレームを撮像してバッファメモリに記憶する動作を行いながら、次の動画フレームを記録する間に静止画を撮像して記録する、つまり動画撮影処理と静止画撮影処理とを並行して行うものである。

特許文献２の方法は、動画撮影中に静止画の撮影操作があったとき、動画フレームの撮像及び記憶動作をいったん中断し、その間に静止画を撮影して記録した後、動画フレームの撮像及び記憶を再開する、つまり静止画撮影を割り込み処理によって行う。そして、動画撮影が終了した時点では、静止画撮影中に記録できなかった中断期間の動画フレームに対応する補間用のフレームを別途生成して記憶しておき、動画再生時には、中断期間に補間用のフレームを表示させることにより、結果として動画撮影中の静止画撮影を可能とするものである。
特開平１１−５５６１７号公報（「００１０」及び「００１１」段落、図２参照） 特開２００１−１１１９３４号公報（「００２９」〜「００３２」段落、図１、図４参照）

しかしながら、前述したように静止画を撮影するモードと、動画を撮影するモードとが個別に設けられているデジタルカメラにおいて、動画撮影中に静止画撮影を行った場合には、静止画撮影により中断した動画撮影における動画圧縮データのファイル（動画ファィル）が、静止画撮影を挟んで２つに分割されてしまう。そのため、動画撮影により記録したファイルの管理が煩雑となり、さらに撮影した動画を再生する際には、対をなす２つの動画ファイルを連続して再生させる作業を強いられるといった問題があった。また、係る問題については、上記特許文献１，２に開示されている技術によっても解決できなかった。

本発明は、かかる従来の課題に鑑みてなされたものであり、動画撮影中に静止画撮影が行われた場合であっても、動画撮影により得られる動画データの利便性を損なうことのない撮影装置およびプログラムを提供することを目的とする。

前記課題を解決するために請求項１の発明にあっては、オートフォーカス制御による被写体への合焦処理が完了した後において、撮影者が静止画撮影の指示操作を行ったか否かを検出する検出手段と、 前記検出手段により静止画撮影の指示操作が検出されなかった場合に、オートフォーカス制御による被写体への合焦処理を再実行させる合焦制御手段と、前記検出手段により静止画撮影の指示操作が検出された際に、撮像素子により撮像して得られる画像データを静止画データとして記録する静止画撮影手段と、前記静止画撮影手段による静止画の撮像および記録が行われる際に、該静止画の撮像および記録が行われる前に報知音を発する第１の報知手段と、動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、報知音を発生することなく各動画フレームに対応する画像データを前記撮像素子により順番に撮像させるとともに、この撮像動作と平行して音声の録音動作を実行させ、この撮像動作および録音動作により得られた複数の画像データおよび音声データを音声の同時再生が可能な動画データとして記録する動画撮影手段と、前記動画撮影手段による撮像動作および録音動作が行われている最中に、前記検出手段により静止画撮影の指示操作が検出された場合に、前記録音動作を中断することなく前記動画フレームに対応する画像データの撮像動作を一時的に中断し、この中断により利用可能になった前記撮像素子を利用して前記静止画撮影手段による静止画データの撮像動作を行わせ、この静止画データの撮像動作が終了した後に、前記一時的に中断されていた前記動画撮影手段による画像データの撮像動作を再開させる割り込み処理を行う割込制御手段と、を備え、前記動画撮影手段は、前記割込制御手段による割り込み処理によって中断されることなく録音され続けている音声データに対して欠落が無いように、前記中断によって欠落した動画フレームに対応する画像データを補間して動画データを記録し、前記第１の報知手段は、前記割込制御手段による割り込み処理によって前記静止画撮影手段による静止画の撮像および記録が行われる際は、前記静止画の撮像および記録が行われる前に報知音を発生しないことを特徴とする。
また、請求項２の発明にあっては、更に、前記オートフォーカス制御による被写体への合焦処理が完了した際に、該被写体への合焦処理が完了したことを示す報知音を発する第２の報知手段と、前記動画撮影手段は、動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、オートフォーカス制御による被写体への合焦処理を繰り返し実行するとともに、前記第２の報知手段による合焦処理の完了を示す報知音を発生しないように制御することを特徴とする。
また、請求項３の発明にあっては、更に、前記検出手段により静止画撮影の指示操作が検出されなかった場合に、前記第１の報知手段による前記静止画の撮像および記録が行われる前に報知音を発生させずに、前記第２の報知手段による前記合焦処理の完了を示す報知音のみを発生させる報知音制御手段を更に備えたことを特徴とする。

また、請求項４の発明にあっては、更に、前記静止画撮影手段は、前記予め決められた期間間隔とは非同期のタイミングで静止画用の画像データを出力する処理を前記撮像素子に実行させ、前記再開制御手段は、前記撮像素子による静止画用の画像データを出力する処理が終了した後であっても、前記音声データに対して欠落が無いように補間される各動画フレームに対応するタイミングがくるまでの間は、前記撮像素子による動画フレーム用の画像データを出力する処理を再開させずに待機することを特徴とする。

また、請求項５の発明にあっては、撮影装置が有するコンピュータに、オートフォーカス制御による被写体への合焦処理が完了した後において、撮影者が静止画撮影の指示操作を行ったか否かを検出する検出処理と、前記検出処理により静止画撮影の指示操作が検出されなかった場合に、オートフォーカス制御による被写体への合焦処理を再実行させる合焦制御処理と、前記静止画撮影の指示操作が検出された際に、撮像素子により静止画データを撮像して記録する静止画撮影処理と、前記静止画の撮像および記録が行われる前に報知音を発する第１の報知処理と、動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、報知音を発生することなく各動画フレームに対応する画像データを前記撮像素子により順番に撮像させるとともに、この撮像動作と平行して音声の録音動作を実行させ、この撮像動作および録音動作により得られた複数の画像データおよび音声データを音声の同時再生が可能な動画データとして記録する動画撮影処理と、前記動画撮影動作および録音動作が行われている最中に、前記静止画撮影の指示操作が検出された場合に、前記録音動作を中断することなく前記動画フレームに対応する画像データの撮像動作を一時的に中断し、この中断により利用可能になった前記撮像素子を利用して前記静止画データの撮像動作を行わせ、この静止画データの撮像動作が終了した後に、前記一時的に中断されていた前記動画データの撮像動作を再開させる割り込み処理と、を実行させるためのプログラムであって、前記動画撮影処理は、前記割込制御手段による割り込み処理によって中断されることなく録音され続けている音声データに対して欠落が無いように、前記中断によって欠落した動画フレームに対応する画像データを補間して動画データを記録し、前記報知手段は、前記割込制御手段による割り込み処理によって前記静止画撮影手段による静止画の撮像および記録が行われる際は、前記第１の報知手段による前記静止画の撮像および記録が行われる前に報知音を発生しないことを特徴とする。

また、請求項７の発明にあっては、指定された形態の画像データを撮像して出力する撮像素子を備えた撮影装置が有するコンピュータに、撮影者が静止画撮影の指示操作を行ったタイミングを検出する検出処理と、前記検出処理により静止画撮影の指示操作が検出された際に、撮像素子により撮像して得られる画像データを静止画データとして記録する静止画撮影処理と、動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、各動画フレームに対応して予め決められたタイミングで各動画フレームに対応する画像データを前記撮像素子に順番に撮像させるとともに、この撮像動作と平行して音声の録音動作を実行させ、この撮像動作および録音動作により得られた複数の画像データおよび音声データを音声の同時再生が可能な動画データとして記録する動画撮影処理と、前記動画撮影処理による撮像動作および録音動作が行われている最中に、前記検出処理により静止画撮影の指示操作が検出された場合に、前記録音動作を中断することなく前記動画フレームに対応する画像データの撮像動作を一時的に中断し、この中断により利用可能になった前記撮像素子を利用して前記静止画撮影処理による静止画データの撮像動作を行わせ、この静止画データの撮像動作が終了した後に、前記一時的に中断されていた前記動画撮影処理による画像データの撮像動作を再開させる割り込み処理を行う割込制御処理と、を実行させるためのプログラムであって、前記動画撮影処理は、前記割込制御処理による割り込み処理によって中断されることなく録音され続けている音声データに対して欠落が無いように、前記中断によって欠落した動画フレームに対応する画像データを補間して動画データを記録し、前記静止画撮影処理は、前記動画撮影処理による撮像動作および録音動作とは非同期のタイミングで静止画用の画像データを出力する処理を前記撮像素子に実行させ、前記割込制御処理は、前記撮像素子による静止画用の画像データを出力する処理が終了した直後において、次に前記予め決められたタイミングがくるまでの間は、１つの動画フレームの期間よりも短いダミー期間を挿入することにより、前記撮像素子による動画フレーム用の画像データを出力する処理を再開させずに待機することを特徴とする。

以上説明したように請求項１の発明にあっては、静止画撮影処理によって一時的に音声付き動画撮影処理が中断された動画であっても、単一の音声付き動画ファイルとして生成される。したがって、動画撮影処理中に静止画撮影処理が行われた場合であっても、動画撮影処理により得られる動画データが分断されることがなく、ファイル管理（整理）時や音声付き動画再生時における利便性を大幅に向上させることが可能となり、更に、単独の静止画撮影においては報知音を出力するが、音声付き動画撮影中の静止画撮影においては報知音を出力しないようにしたので、単独の静止画撮影タイミングの報知を可能にしつつ、音声付き動画撮影中に音声ノイズが混入するのを防止することができ、録音処理により得られる音声データの品質を向上させることができる。

以下、本発明の一実施の形態を図にしたがって説明する。
（第１の実施の形態）
図１は、通常の静止画撮影機能に加え動画撮影機能、音声付きの動画撮影機能を備えたデジタルカメラ１の概略構成を示すブロック図である。デジタルカメラ１は、ＣＣＤ２とＤＳＰ／ＣＰＵ３とを有している。ＤＳＰ／ＣＰＵ３は、画像データの圧縮・伸張、音声データの処理を含む各種のデジタル信号処理機能を有するとともにデジタルカメラ１の各部を制御するワンチップマイコンである。

ＤＳＰ／ＣＰＵ３には、ＣＣＤ２を駆動するＴＧ（Timing Generator）４が接続されており、ＴＧ４には、ＣＣＤ２から出力される被写体の光学像に応じたアナログの撮像信号が入力するユニット回路５が接続されている。ユニット回路５は、ＣＣＤ２から出力される撮像信号を相関二重サンプリングして保持するＣＤＳ（Correlated Double Sampling）回路、その撮像信号を増幅するゲイン調整アンプ（ＡＧＣ）、増幅後の撮像信号をデジタル信号に変換するＡ／Ｄ変換器（ＡＤ）から構成されており、ＣＣＤ２の出力信号はユニット回路５を経てデジタル信号としてＤＳＰ／ＣＰＵ３に送られる。

ＤＳＰ／ＣＰＵ３には、表示装置６、キー入力部７、音声処理部８が接続されるとともに、アドレス・データバス９を介してＤＲＡＭ１０、内蔵フラッシュメモリ１１、カード・インターフェイス１２が接続されており、カード・インターフェイス１２には、デジタルカメラ１の本体の図示しないスロットルに装着された着脱自在なメモリ・カード１３が接続されている。

表示装置６はカラーＬＣＤとその駆動回路とを含み、撮影待機状態にあるときにはＣＣＤ２によって撮像された被写体画像をスルー画像として表示し、記録画像の再生時には保存用メモリであるメモリ・カード１３から読み出され伸張された記録画像（静止画又は動画）を表示する。キー入力部７はシャッターボタン、動画撮影に使用する録画開始／終了ボタン、電源キー、ＭＥＮＵキー等の複数の操作キーを含み、使用者によるキー操作に応じたキー入力信号をＤＳＰ／ＣＰＵ３に出力する。なお、シャッターボタンは半押し状態と、全押し状態とにおいて異なる出力信号が出力される２段階スイッチである。

音声処理部８は、内蔵マイク、アンプ、Ａ／Ｄ変換器、内蔵スピーカー、Ｄ／Ａ変換器等を含み、音声付きの静止画又は動画の撮影時には、内蔵マイクに入力した音声をデジタル信号に変換してＤＳＰ／ＣＰＵ３へ送る。ＤＳＰ／ＣＰＵ３へ送られた音声データはＤＲＡＭ１０に順次蓄積され、最終的には、ＤＳＰ／ＣＰＵ３によって生成された画像データと共にメモリ・カード１３に記録される。また、音声処理部８は、音声付きの静止画又は動画の再生時には、各画像に付属する音声データに基づく音声を再生して内蔵スピーカから音声出力する。また、必要に応じ、内蔵スピーカーにより各種の報知音を放音する。

ＤＲＡＭ１０は、ＣＣＤ２により撮像された後、デジタル化された被写体の画像データ等を一時記憶するバッファメモリであるとともに、ＤＳＰ／ＣＰＵ３のワーキングメモリとしても使用される。内蔵フラッシュメモリ１１には、ＤＳＰ／ＣＰＵ３による各部の制御に必要な制御プログラム、すなわちＡＦ（オートフォーカス制御）やＡＥ（自動露出制御）等を含む各種の制御に必要なプログラム、及び各制御に必要なデータが記憶されており、ＤＳＰ／ＣＰＵ３は前記プログラムに従い動作することにより、本発明の制御手段、動画ファイル生成手段、タイマ手段、報知音制御手段、特定動作制御手段として機能する。

次に、以上の構成からなるデジタルカメラ１における動作を説明する。図２〜図４は、ユーザーがＭＥＮＵキーの操作によって所定の撮影モードを設定したときのＤＳＰ／ＣＰＵ３の処理手順を示すフローチャートである。

ＤＳＰ／ＣＰＵ３は、上記撮影モードが設定されると、ＣＣＤ２による撮像を開始して被写体のスルー画像を表示装置６に表示させ（ステップＳ１）、録画開始ボタンの操作や、シャッターボタンの半押し操作があるまでの間、スルー画像の表示処理を繰り返す（ステップＳ２，Ｓ３が共にＮＯ）。その後、録画開始ボタンが操作されると（ステップＳ２でＹＥＳ）、ステップＳ１３以降の音声付き動画撮影処理に移行し、シャッターボタンの半押し操作があると（ステップＳ３でＹＥＳ）、図３に示したステップＳ４〜Ｓ１３の静止画撮影処理に移行する。

まず、静止画撮影処理について説明する。ＤＳＰ／ＣＰＵ３は、シャッターボタンの半押し操作に応じ（ステップＳ３でＹＥＳ）、ＡＦ処理及びＡＥ処理により撮影条件の設定を行う（ステップＳ４）。それが完了したら（ステップＳ５でＹＥＳ）、その旨をユーザーに知らせるため音声処理部８のスピーカによる報知音の放音、及び表示装置６によるメッセージ等の報知表示を行った後（ステップＳ６）、設定した撮影条件でＣＣＤ２による撮像を開始し、表示装置６にスルー画像を表示させる（ステップＳ７）。ここで、シャッターボタンの全押し操作がなく、シャッターボタンの半押し操作が継続されている間は、ステップＳ７へ戻りスルー画像の表示処理を継続する（ステップＳ８でＮＯ、ステップＳ９でＹＥＳ）。

その後、スルー画像を表示する間にシャッターボタンの全押し操作があると（ステップＳ８でＹＥＳ）、予め内蔵フラッシュメモリ１１に記憶されている疑似シャッター音を音声処理部８のスピーカから出力した後（ステップＳ１０）、ＣＣＤ２による被写体画像の記録用の撮像、及びその画像データの生成等の静止画撮影処理を開始する（ステップＳ１１）。すなわち、ＣＣＤ２に、比較的長い出力撮像タイミングで１画面中の偶数ラインの画素信号と、奇数ラインの画素信号を順に出力させて、全画素分のデータをバッファメモリ（ＤＲＡＭ１０）に取り込み、取り込んだ画像データを圧縮する処理を開始する。そして、それが完了したら（ステップＳ１２でＹＥＳ）、圧縮した画像データに基づく静止画ファイル（ＪＰＥＧ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＳ１３）。これにより静止画撮影処理を終了してステップＳ１へ戻る。つまり通常の静止画撮影モードでの処理と同様の、ごく一般的な処理により静止画を撮影して記録する。なお、スルー画像を表示する間にシャッターボタンの半押しが解除された場合には（ステップＳ９でＮＯ）、その時点で直ちに静止画撮影処理を終了しステップＳ１へ戻る。

次に、音声付き動画撮影処理について説明する（以下、図２及び図４参照）。ＤＳＰ／ＣＰＵ３は、前述した撮影モードの設定直後におけるスルー画像の表示状態でユーザにより録画開始ボタンが操作されると（ステップＳ２でＹＥＳ）、所定のフレームレート（１／３０秒等の固定周期）で画像（動画フレーム）を撮像しバッファメモリに記憶する動画記録処理と、音声処理部８の内蔵マイクに入力した音声の音声データへの変換、バッファメモリへの記憶といった音声録音処理とを開始する（ステップＳ１４）。なお、動画記録処理における動画フレームの撮像に際しては、ＣＣＤ２に、比較的短い出力タイミングで１画面中の奇数ラインの画素信号のみを出力させ、その奇数ラインの画素データをバッファメモリ（ＤＲＡＭ１０）に取り込み、取り込んだ画像データを所定の画素数に間引く処理を行う。

その後、シャッターボタンが半押しされたり、録画終了ボタンが操作されるまでスルー画像表示処理（ステップＳ１５）、動画記録処理および音声録音処理を継続する（ステップＳ１６，Ｓ１７が共にＮＯ）。やがて、録画終了ボタンが操作されたら（ステップＳ１７でＹＥＳ）、それまでの間にバッファメモリ上に展開されている動画データ、すなわち周期的に撮像された複数のフレーム画像と、音声データを用いて音声付き動画ファイル（ｍｏｔｉｏｎ−ｊｐｅｇ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＳ１８）。これにより音声付き動画撮影処理をいったん終了してステップＳ１へ戻る。つまり通常の音声付き動画撮影モードでの処理と同様の処理により動画を記録する。なお、音声付き動画ファイルの生成時において、音声データは動画のフレーム単位（フレーム周期）で時間軸方向に分割されてファイリングやパケット化が行われるとともに、動画ファイルのヘッダ上の時刻情報によってフレーム画像と同期化される。なお、動画ファイルとは別個に音声ファイルを生成し、これらを関連付けて記録するようにしてもよい。

一方、ＤＳＰ／ＣＰＵ３は、スルー画象表示処理、動画記録処理および音声録音処理を継続する間にシャッターボタンの半押し操作があると（ステップＳ１６でＹＥＳ）、以下の処理を実行する。なお、図５は、以下の処理に対応するデジタルカメラ１の動作を示すタイミングチャートである。

まず、ＤＳＰ／ＣＰＵ３は、経過時間の計測を開始するとともに、撮影枚数をカウントするためのカウンタの値ｎを０にリセットした後（ステップＳ１９）、その時点、つまりシャッターボタンが半押しされた時点（図５でＡＦトリガがあった時点）の動画フレーム周期が終了するタイミングで、ステップＳ１４で開始した動画記録処理を、シャッターボタンが半押しされる直前のフレームデータ（図５では「撮像ディバイス出力フレーム」）を、繰り返し使用する処理に切り替える（ステップＳ２０）。つまり後述する割り込みによる静止画撮影処理を行う間に動画フレーム周期でバッファメモリに蓄積するフレームデータを、撮像により取得されるフレームデータから、シャッターボタンが半押しされる直前のフレームデータのコピー（以下、代替フレームという）に切り替える。なお、音声録音処理はそのまま継続する。しかる後、図４に示したステップＳ２１〜Ｓ３０による以下の割り込みによる静止画撮影処理を実行する。

まず、ＣＣＤ２から出力される撮像信号に基づき静止画撮影用のＡＦ処理及びＡＥ処理を実行し、撮影条件の設定を行う（ステップＳ２１、図５では「ＡＦ動作」）。そして、撮影条件の設定が完了したら（ステップＳ２０でＹＥＳ）、前述した通常の静止画撮影処理のステップＳ６における報知音の放音や報知表示を行うことなく、設定した撮影条件でＣＣＤ２による撮像を開始しスルー画像を表示する（ステップＳ２３、図５では「静止画モニタリング用動作」）。なお、報知表示は音声録音処理に支障はないので行なうようにしてもよい。その後、シャッターボタンの全押し操作があれば（ステップＳ２４でＹＥＳ）、前述した通常の静止画撮影処理のステップＳ１０における疑似シャッター音の出力処理を行うことなく、前述したステップＳ１１と同様に、ＣＣＤ２による記録用の被写体画像の撮像、及びその画像データの生成等の静止画撮影処理を開始し（ステップＳ２５、図５では「静止画撮影用動作」）、それが完了したら（ステップＳ２６でＹＥＳ）、バッファメモリ上で画像データに基づく静止画ファイル（ＪＰＥＧ形式等のファイル）を生成し、メモリ・カード１３に記憶するとともに（ステップＳ２７）、撮影枚数を示すカウンタの値を「＋１」することによりカウントアップする（ステップＳ３１）。これにより割り込みによる静止画撮影処理を終了する。

また、ステップＳ２３でスルー画像を表示した後、シャッターボタンが全押しされるまでの間は（ステップＳ２４でＮＯ）、シャッターボタンの半押し操作が継続され、かつ前述したステップＳ１９で計測を開始した経過時間が予め決められている所定時間に達していなければ、ステップＳ２３へ戻りスルー画像の表示処理を継続する（ステップＳ２８でＹＥＳ、ステップＳ２９でＮＯ）。但し、その間にシャッターボタンの半押し操作が解除されれば（ステップＳ２８でＮＯ）、その時点で直ちに割り込みによる静止画撮影処理を終了する。また、計測中の経過時間が所定時間（例えば１０秒）に達したときには（ステップＳ２９でＹＥＳ）、動画記録処理に強制復帰させる旨のメッセージをスルー画像上に表示した後（ステップＳ３０）、割り込みによる静止画撮影処理を終了する。

その後、静止画撮影を終了した時点において、シャッターボタンが半押しされていなければ（ステップＳ３２でＮＯ）、次の動画フレーム周期の到来を待つとともに（図５の「ダミー」の期間）、それが到来した時点で（ステップＳ３４でＹＥＳ）、それまでの動画フレーム周期に合わせたタイミングで、つまりそれまでの動画フレーム周期に同期させて、通常の動画記録処理を再開する（ステップＳ３５、図５では「動画撮影用動作」）。しかる後、前述した図２のステップＳ１５へ戻り、録画終了ボタンが操作されるまでスルー画像表示処理、動画記録処理および音声録音処理を継続し（ステップＳ１６，Ｓ１７が共にＮＯ）、録画終了ボタンが操作されたら（ステップＳ１７でＹＥＳ）、それまでにバッファメモリに蓄積されている、前述した代替フレームを含む動画データと音声データを用いて音声付き動画ファイルを生成し、メモリ・カード１３に記憶する（ステップＳ１８）。

これにより、音声付き動画撮影処理をいったん終了してステップＳ１へ戻り、以後、同様の動作を撮影モードが解除されるまで繰り返す。また、ステップＳ２７で静止画撮影を終了した時点において、シャッターボタンが半押しされていたときには（ステップＳ３２でＹＥＳ）、続くステップＳ３３で撮影枚数を示すカウンタの値が「３」に達しているか否かを判断し、達していなければ動画記録処理を再開することなく、そのままステップＳ２１からの静止画撮影処理のための準備処理に移行する。

また、ステップＳ３３で撮影枚数を示すカウンタの値が「３」に達していると判断された場合は、ステップＳ３０に移行して、動画記録処理に強制復帰させる旨のメッセージをスルー画像上に表示した後、割り込みによる静止画撮影処理を終了する。

以上のように本実施の形態においては、撮影中に、割り込みによる静止画撮影処理を行って静止画を記録した場合であっても、そのとき撮影した動画は、通常の動画撮影時と同様の単一の動画ファイルとして記録される。よって、記録した動画ファイル（音声付き動画ファイル）は、そのまま通常の動画ファイルと同様に他のカメラやパーソナルコンピュータにおいて再生することができる。つまりその使用が煩雑であったり、使用環境が制限されたりすることがないという効果がある。

また、静止画撮影処理によって動画フレームの撮像動作が中断している期間においても、中断直前のフレームデータのコピー（代替フレーム）が記録されており、しかも割り込みによる静止画撮影処理の終了後には、それまでの動画フレーム周期に同期させて通常の動画撮影処理を再開するため、記録された動画の再生時間を実際の撮影時間と完全に一致させることができ、使い勝手がよい。特に、静止画撮影での中断時間が短い場合においては、より自然な動画を記録することができる。

また、動画フレームの撮像動作が中断している間においても、音声録音処理を継続して行っているため、撮影した動画の再生時には、代替フレームが再生される期間に実際の音声を聞くことができる。したがって、より自然な音声付き動画を撮影することができる。しかも、割り込みによる静止画撮影処理では、通常の静止画撮影処理における報知音や疑似シャッター音の出力が禁止されているため、上記報知音や疑似シャッター音が録音音声中に混入してしまうこともない。よって、質の良い音声付きの動画を記録することができる。

また、動画撮影処理を停止させてから再び動画撮影処理を再開するまでに、所定時間が経過してしまった場合や所定枚数分の静止画撮影を行ってしまった場合には、動画撮影処理への強制復帰を、その旨を知らせるメッセージ表示とともに行うため、動画フレームの撮像動作（動画撮影処理）が中断される時間の長期化を確実に防止することができる。よって、静止画撮影によって一時的に動画撮影が中断された場合であっても、ユーザーに、それをあまり意識させることなく、前述した代替フレームの挿入期間、つまり動画の途中で画像が停止する期間が長くならない、より一層自然な音声付き動画を記録させることができる。

なお、本実施の形態では、前述した所定時間が経過したとき、又は所定枚数分の静止画撮影を終了したとき、メッセージ表示とともに通常の動画撮影処理へ強制復帰させるようにしたが（図４のステップＳ２９，Ｓ３０，Ｓ３３，Ｓ３４，Ｓ３５）、メッセージ表示（アラーム音等の報知音でもよい）のみを行うようにしてユーザに静止画撮影操作あるいは動画撮影復帰操作を促すようにしたり、メッセージ表示を行うことなく動画撮影処理を再開するようにしてもよい。また、先にメッセージ表示し、その後更に一定時間が経過した段階で通常の動画撮影処理へ強制復帰させるようにしてもよい。

また、動画撮影中に静止画撮影が行われ、それが終了した時点でシャッターボタンが半押しされていたときには（ステップＳ３２でＹＥＳ，Ｓ３３でＮＯ）、動画撮影処理を再開することなく、そのまま静止画撮影を繰り返して（連続して）行うことができるようにしたことから、それによっても使い勝手がよい。

なお、本実施の形態では、音声付き動画撮影を行うものに本発明を適用したが、後述する第２の実施の形態のように、音声無し動画撮影に本発明を適用してもよい。

（第２の実施の形態）
次に本発明の第２の実施の形態を説明する。本実施の形態は、音声無し動画撮影に本発明を適用した場合に関するものである。

以下、図１に示したものと同様の構成を備えたデジタルカメラにおける動画撮影モードでの動作を、図６のタイミングチャートに従い説明する。なお、本実施の形態においては、動画撮影中における１回の割り込み処理において静止画撮影を２回だけ連続して行うことができる動画撮影モードが設けられ、その動作に必要なプログラムが前記内蔵フラッシュメモリ１１に格納された構成を有している。

デジタルカメラ１は、動画撮影処理中に、ユーザーによりキー入力部７の所定のボタンが押されると、それを動画静止画兼用トリガとして、それまでの（通常の）動画撮影処理を、直前のフレームデータ（図では「撮像ディバイス出力フレーム」）を繰り返し使用する処理に切り替え、それ以降は、所定のボタンが押される直前の動画用のフレームデータのコピーである代替フレームを動画フレーム周期でバッファメモリに蓄積させる。以後、割り込みによる静止画撮影モードに移行し、静止画モニタリング動作を行い表示装置６にスルー画像を表示する。

引き続き、その状態でシャッターボタンの半押し操作があると、それをＡＦトリガとして静止画撮影用のＡＦ処理及びＡＥ処理を行い（図では「ＡＦ動作」）、その後、シャッターボタンの全押し操作があると、それをシャッタートリガとして通常の静止画撮影処理を行い、バッファメモリ上において静止画ファイルを生成して、それをメモリ・カード１３に記憶する。また、このときバッファメモリ上にある静止画像データから動画用のフレームデータを生成し、動画撮影処理の停止直前の動画用のフレームデータを代替フレームとして使用する処理から、そこで生成したフレームデータを新たな代替フレームとして使用する処理に切り替える。そして、静止画モニタリング動作を再開するとともに、上記と同様の手順で２回目の静止画撮影を行った後、１回の割り込みによる静止画撮影処理を終了する。

また、割り込みによる静止画撮影処理を終了した後には、動画撮影のフレーム周期の到来を待つとともに（図の「ダミー」の期間）、それが到来した時点で通常の動画撮影処理を再開する。但し、再開直後の動画フレームについては、ＣＣＤ２の動画撮影用の動作により新たな動画フレームが得られるのを待たずに、２回目の静止画撮影で取得されたバッファメモリ上にある画像データから生成したフレームデータを使用する。そして、通常の動画撮影処理を再開した後には、録画終了ボタンが押された時点で、それまでにバッファメモリに蓄積されている、前述した２種類の代替フレームを含む各フレームデータを用いて動画ファイルを生成し、メモリ・カード１３に記憶する。

したがって、本実施の形態においても、撮影中に、割り込みによる静止画撮影処理を行って静止画を記録した場合であっても、そのとき撮影した動画は、通常の動画撮影時と同様の単一の動画ファイルとして記録される。よって、記録した動画ファイル（音声無し動画ファイル）は、そのまま通常の動画ファイルと同様に他のカメラやパーソナルコンピュータにおいて再生することができる。よって、第１の実施の形態と同様の効果が得られる。

なお、本実施の形態においては、第１の実施の形態と異なり、静止画撮影処理によって動画フレームの撮像動作が中断している期間中に記憶する代替フレームを、静止画撮影処理が終了する以前は、動画フレームの撮像動作が中断する直前のフレームデータのコピーとし、かつ静止画撮影が終了した後には、その撮像した静止画から生成したフレームデータとしているが、係る場合においても、記録された動画の再生時間を実際の撮影時間と完全に一致させることができ、使い勝手がよい。特に、静止画撮影での中断時間が短い場合においては、より自然な動画を記録することができる。なお、動画撮影処理が中断している期間中に使用される代替フレームを、静止画撮影処理により得られた静止画像データから生成した代替フレームのみとしたり、あるいは動画撮影処理の停止直前の動画用のフレームデータのみとしてもよい。

また、本実施の形態では、動画撮影中における１回の割り込み処理において静止画撮影を２回だけ連続して行うことができる動画撮影モードが設けられているものを示したが、第１の実施の形態のように、１回の割り込み処理において静止画撮影を何度でも連続して行うことができるものにおいても、本実施の形態と同様の２種類の代替フレームを含む各フレームデータを用いて動画ファイルを生成し記憶する構成としてもよい。その場合には、動画撮影中における１回の割り込み処理において静止画撮影が複数回連続して行われることにより、動画フレームの撮像動作が中断される期間が長かったときでも、撮影した動画の再生時には、静止画から生成した内容の異なる複数種の代替フレームによって被写体の動きを表現することができる。よって、より一層自然な動画を記録することが可能となる。

なお、本実施の形態においても、割り込みによる静止画撮影処理に移行した後、通常の動画撮影処理を再開するまでに所定時間が経過した場合には、通常の動画撮影処理への強制復帰を、それを教えるメッセージとともに行うようにしてもよい。

（第３の実施の形態）
次に本発明の第３の実施の形態を説明する。本実施の形態は、連写撮影機能を有したデジタルカメラに本発明を適用した場合に関するものである。
以下、図１に示したものと同様の構成を備えたデジタルカメラにおける所定の撮影モードでの動作を説明する。なお、本実施の形態においては、動画撮影中における１回の割り込み処理において連写を実行できる動画撮影モードが設けられ、その動作に必要なプログラムが前記内蔵フラッシュメモリ１１に格納された構成を有している。

図７〜図９は、ユーザーがＭＥＮＵキーの操作によって所定の撮影モードを設定したときのＤＳＰ／ＣＰＵ３の処理手順を示すフローチャートである。

ＤＳＰ／ＣＰＵ３は、上記撮影モードが設定されると、ＣＣＤ２による撮像を開始して被写体のスルー画像を表示装置６に表示させ（ステップＡ１）、録画開始ボタンの操作や、シャッターボタンの半押し操作があるまでの間、スルー画像の表示処理を繰り返す（ステップＡ２，Ａ３が共にＮＯ）。その後、録画開始ボタンが操作されると（ステップＡ２でＹＥＳ）、ステップＡ１１以降の音声付き動画撮影処理に移行し、シャッターボタンの全押し操作があると（ステップＡ３でＹＥＳ）、図８に示したステップＡ４〜Ａ１０の静止画撮影処理（連写処理）に移行する。

この静止画撮影処理について説明する。ＤＳＰ／ＣＰＵ３は、シャッターボタンの全押し操作に応じ（ステップＡ３でＹＥＳ）、先ず撮影枚数をカウントするためのカウンタをリセットしてカウンタの値を「０」にした後（ステップＡ４）、ＣＣＤ２による被写体画像の記録用の撮像、及びその画像データの生成等の静止画撮影処理を開始する（ステップＡ５）。すなわち、ＣＣＤ２に、比較的長い出力撮像タイミングで１画面中の偶数ラインの画素信号と、奇数ラインの画素信号を順に出力させて、全画素分のデータをバッファメモリ（ＤＲＡＭ１０）に取り込み、取り込んだ画像データを圧縮する処理を開始する。そして、それが完了したら（ステップＡ６でＹＥＳ）、圧縮した画像データに基づく静止画ファイル（ＪＰＥＧ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＡ７）。この静止画撮影処理が終了した後、撮影枚数を示すカウンタの値を「＋１」することによりカウントアップした後（ステップＡ８）、続くステップＡ９で撮影枚数を示すカウンタの値が「１０」に達しているか否か、つまり連写枚数が１０枚に達しているか否かを判断し、達していると判断された場合には、その時点で直ちに連写処理を強制終了してステップＡ１のスルー画象表示処理へ戻る。

また、ステップＡ９で達していないと判断された場合にはステップＡ１０に進み、シャッターボタンの全押し操作が継続されているか否かが判断され、シャッターボタンの全押しが解除されたと判断された場合には（ステップＡ１０でＮＯ）、その時点で直ちに連写処理を終了してステップＡ１のスルー画象表示処理へ戻る。

また、ステップＡ１０でシャッターボタンの全押し操作が継続されていると判断された場合には（ステップＡ１０でＹＥＳ）、ステップＡ５に戻り静止画撮影処理を開始し、以後、ステップＡ９でカウンタの値が「１０」に達したと判断されるか、あるいはステップＡ１０でシャッターボタンの全押しが解除されたと判断されるまでステップＡ５〜Ａ８の処理を繰り返すことにより連写処理が続行される。但し、シャッターボタンの全押し操作から全押しが解除されるまでの時間が極端に短い場合には連写処理を行うことなく１回のみ静止画撮影処理（単写処理）が実行される。

次に、音声付き動画撮影処理について説明する（以下、図７及び図９参照）。ＤＳＰ／ＣＰＵ３は、前述した撮影モードの設定直後におけるスルー画像の表示状態でユーザにより録画開始ボタンが操作されると（ステップＡ２でＹＥＳ）、所定のフレームレート（１／３０秒等の固定周期）で画像（動画フレーム）を撮像しバッファメモリに記憶する動画記録処理と、音声処理部８の内蔵マイクに入力した音声の音声データへの変換、バッファメモリへの記憶といった音声録音処理とを開始する（ステップＡ１１）。なお、動画記録処理における動画フレームの撮像に際しては、ＣＣＤ２に、比較的短い出力タイミングで１画面中の奇数ラインの画素信号のみを出力させ、その奇数ラインの画素データをバッファメモリ（ＤＲＡＭ１０）に取り込み、取り込んだ画像データを所定の画素数に間引く処理を行う。

その後、シャッターボタンが全押しされたり、録画終了ボタンが操作されるまでスルー画像表示処理（ステップＡ１２）、動画記録処理および音声録音処理を継続する（ステップＡ１３，Ａ１４が共にＮＯ）。やがて、録画終了ボタンが操作されたら（ステップＡ１４でＹＥＳ）、それまでの間にバッファメモリ上に展開されている動画データ、すなわち周期的に撮像された複数のフレーム画像と、音声データを用いて音声付き動画ファイル（ｍｏｔｉｏｎ−ｊｐｅｇ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＡ１５）。これにより音声付き動画撮影処理をいったん終了してステップＡ１へ戻る。つまり通常の音声付き動画撮影モードでの処理と同様の処理により動画を記録する。なお、音声付き動画ファイルの生成時において、音声データは動画のフレーム単位（フレーム周期）で時間軸方向に分割されてファイリングやパケット化が行われるとともに、動画ファイルのヘッダ上の時刻情報によってフレーム画像と同期化される。なお、動画ファイルとは別個に音声ファイルを生成し、これらを関連付けて記録するようにしてもよい。

一方、ＤＳＰ／ＣＰＵ３は、スルー画象表示処理、動画記録処理および音声録音処理を継続する間にシャッターボタンの全押し操作があると（ステップＡ１３でＹＥＳ）、以下の処理を実行する。

まず、ＤＳＰ／ＣＰＵ３は、経過時間の計測を開始するとともに、撮影枚数をカウントするためのカウンタの値ｎを０にリセットした後（ステップＡ１６）、その時点、つまりシャッターボタンが全押しされた時点の動画フレーム周期が終了するタイミングで、ステップＡ１１で開始した動画記録処理を、シャッターボタンが全押しされる直前のフレームデータを、繰り返し使用する処理に切り替える（ステップＡ１７）。つまり後述する割り込みによる静止画撮影処理（連写処理）を行う間に動画フレーム周期でバッファメモリに蓄積するフレームデータを、撮像により取得されるフレームデータから、シャッターボタンが全押しされる直前のフレームデータのコピー（以下、代替フレームという）に切り替える。なお、音声録音処理はそのまま継続する。しかる後、図９に示したステップＡ１８〜Ａ２７による以下の割り込みによる静止画撮影処理（連写処理）を実行する。

まず、前述したステップＡ５と同様に、ＣＣＤ２による記録用の被写体画像の撮像、及びその画像データの生成等の静止画撮影処理を開始し（ステップＡ１８）、それが完了したら（ステップＡ１９でＹＥＳ）、バッファメモリ上で画像データに基づく静止画ファイル（ＪＰＥＧ形式等のファイル）を生成し、メモリ・カード１３に記憶するとともに（ステップＡ２０）、撮影枚数を示すカウンタの値を「＋１」することによりカウントアップする（ステップＡ２１）。続くステップＡ２２で撮影枚数を示すカウンタの値が「３」に達しているか否か、つまり連写枚数が３枚に達しているか否かを判断し、達していると判断された場合には、動画記録処理に強制復帰させる旨のメッセージをスルー画像上に表示した後（ステップＡ２３）、割り込み処理による連写処理を終了する。ここで、割り込み処理による連写処理の最大連写枚数を、通常の連写処理の最大連写枚数１０枚よりも少ない３枚としているのは、動画撮影処理の中断時間を極力短くするためである。

また、ステップＡ２２で連写枚数が３枚に達していないと判断された場合にはステップＡ２４に進み、前述したステップＡ１６で計測を開始した経過時間が予め決められている所定時間に達したか否かが判断される。ここで、計測中の経過時間が所定時間（例えば１０秒）に達したと判断されたときには（ステップＡ２４でＹＥＳ）、動画記録処理に強制復帰させる旨のメッセージをスルー画像上に表示した後（ステップＡ２３）、割り込み処理による連写処理を終了する。

また、ステップＡ２４で経過時間が所定時間に達していないと判断された場合にはステップＡ２５に進み、シャッターボタンの全押し操作が継続されているか否かが判断され、シャッターボタンの全押しが解除されたと判断された場合には（ステップＡ２５でＮＯ）、その時点で直ちに割り込み処理による連写処理を終了する。

また、ステップＡ２５でシャッターボタンの全押し操作が継続されていると判断された場合には（ステップＡ２５でＹＥＳ）、ステップＡ１８に戻り静止画撮影処理を開始し、以後、ステップＡ２２でカウンタの値が「３」に達したと判断されるか、あるいはステップＡ２４で経過時間が所定時間に達したと判断されるか、あるいはステップＡ２５でシャッターボタンの全押しが解除されたと判断されるまでステップＡ１８〜Ａ２１の処理を繰り返すことにより連写処理が続行される。但し、シャッターボタンの全押し操作から全押しが解除されるまでの時間が極端に短い場合には連写処理を行うことなく１回のみ静止画撮影処理（単写処理）が実行される。
また、ステップＡ２２でカウンタの値が「３」に達したと判断された場合、あるいはステップＡ２４で経過時間が所定時間に達したと判断された場合、あるいはステップＡ２５でシャッターボタンの全押しが解除されたと判断された場合、ステップＡ２６に進み、次の動画フレーム周期の到来を待つとともに、それが到来した時点で（ステップＡ２６でＹＥＳ）、それまでの動画フレーム周期に合わせたタイミングで、つまりそれまでの動画フレーム周期に同期させて、通常の動画記録処理を再開する（ステップＡ２７）。しかる後、前述した図７のステップＡ１２へ戻り、録画終了ボタンが操作されるまでスルー画像表示処理、動画記録処理および音声録音処理を継続し（ステップＡ１３，Ａ１４が共にＮＯ）、録画終了ボタンが操作されたら（ステップＡ１４でＹＥＳ）、それまでにバッファメモリに蓄積されている、前述した代替フレームを含む動画データと音声データを用いて音声付き動画ファイルを生成し、メモリ・カード１３に記憶する（ステップＡ１５）。

これにより、音声付き動画撮影処理をいったん終了してステップＡ１へ戻り、以後、同様の動作を撮影モードが解除されるまで繰り返す。

以上のように本実施の形態においては、シャッターボタンの全押し操作を継続することにより静止画撮影処理を連続して実行できる、すなわち連写処理を実行できるようにしたので、割り込み処理により複数回の静止画撮影を行いたい場合に動画撮影処理の中断時間を大幅に短縮することができるという効果がある。

（第４の実施の形態）
次に本発明の第４の実施の形態を説明する。本実施の形態は、シャッターボタンの半押し操作によりＡＦ・ＡＥ処理を開始した後も動画撮影処理を続行し、シャッターボタンの全押し操作により静止画の撮影が指示された時点で動画撮影処理を停止するものである。
以下、図１に示したものと同様の構成を備えたデジタルカメラにおける所定の撮影モードでの動作を説明する。

図１０、図１１は、ユーザーがＭＥＮＵキーの操作によって所定の撮影モードを設定したときのＤＳＰ／ＣＰＵ３の処理手順を示すフローチャートである。

ＤＳＰ／ＣＰＵ３は、上記撮影モードが設定されると、ＣＣＤ２による撮像を開始して被写体のスルー画像を表示装置６に表示させ（ステップＢ１）、録画開始ボタンの操作や、シャッターボタンの半押し操作があるまでの間、スルー画像の表示処理を繰り返す（ステップＢ２，Ｂ３が共にＮＯ）。その後、録画開始ボタンが操作されると（ステップＢ２でＹＥＳ）、ステップＢ４以降の音声付き動画撮影処理に移行し、シャッターボタンの半押し操作があると（ステップＢ３でＹＥＳ）、図３に示したステップＳ４〜Ｓ１３の静止画撮影処理に移行する。

また、ＤＳＰ／ＣＰＵ３は、前述した撮影モードの設定直後におけるスルー画像の表示状態でユーザにより録画開始ボタンが操作されると（ステップＢ２でＹＥＳ）、所定のフレームレート（１／３０秒等の固定周期）で画像（動画フレーム）を撮像しバッファメモリに記憶する動画記録処理と、音声処理部８の内蔵マイクに入力した音声の音声データへの変換、バッファメモリへの記憶といった音声録音処理とを開始する（ステップＢ４）。なお、動画記録処理における動画フレームの撮像に際しては、ＣＣＤ２に、比較的短い出力タイミングで１画面中の奇数ラインの画素信号のみを出力させ、その奇数ラインの画素データをバッファメモリ（ＤＲＡＭ１０）に取り込み、取り込んだ画像データを所定の画素数に間引く処理を行う。

その後、シャッターボタンが半押しされたり、録画終了ボタンが操作されるまでスルー画像表示処理（ステップＢ５）、動画記録処理および音声録音処理を継続する（ステップＢ６，Ｂ７が共にＮＯ）。やがて、録画終了ボタンが操作されたら（ステップＢ７でＹＥＳ）、それまでの間にバッファメモリ上に展開されている動画データ、すなわち周期的に撮像された複数のフレーム画像と、音声データを用いて音声付き動画ファイル（ｍｏｔｉｏｎ−ｊｐｅｇ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＢ８）。これにより音声付き動画撮影処理をいったん終了してステップＢ１へ戻る。つまり通常の音声付き動画撮影モードでの処理と同様の処理により動画を記録する。なお、音声付き動画ファイルの生成時において、音声データは動画のフレーム単位（フレーム周期）で時間軸方向に分割されてファイリングやパケット化が行われるとともに、動画ファイルのヘッダ上の時刻情報によってフレーム画像と同期化される。なお、動画ファイルとは別個に音声ファイルを生成し、これらを関連付けて記録するようにしてもよい。

一方、ＤＳＰ／ＣＰＵ３は、スルー画象表示処理、動画記録処理および音声録音処理を継続する間にシャッターボタンの半押し操作があると（ステップＢ６でＹＥＳ）、スルー画像表示処理、動画撮影処理および音声録音処理を停止することなく、図１１に示したステップＢ９に移行し、以下の処理を実行する。

まず、ＤＳＰ／ＣＰＵ３は、ＣＣＤ２から出力される撮像信号に基づき静止画撮影用のＡＦ処理及びＡＥ処理を実行し、撮影条件の設定を行う（ステップＢ９）。そして、撮影条件の設定が完了したら（ステップＢ１０でＹＥＳ）、前述した通常の静止画撮影処理のステップＳ６における報知音の放音や報知表示を行うことなく、設定した撮影条件でＣＣＤ２による撮像を開始しスルー画像を表示する（ステップＢ１１）。なお、報知表示は音声録音処理に支障はないので行なうようにしてもよい。ここで、シャッターボタンの全押し操作がなく、シャッターボタンの半押し操作が継続されている間は、ステップＢ１１へ戻りスルー画像の表示処理を継続する（ステップＢ１２でＮＯ、ステップＢ１３でＹＥＳ）。ステップＢ１３でシャッターボタンの半押し操作が解除されたと判断された場合には、前述した図１０のステップＢ５へ戻り、録画終了ボタンが操作されるまでスルー画像表示処理、動画記録処理および音声録音処理を継続する。

また、スルー画像を表示する間にシャッターボタンの全押し操作があると（ステップＢ１２でＹＥＳ）、前述した通常の静止画撮影処理のステップＳ１０における疑似シャッター音の出力処理を行うことなく、その時点、つまりシャッターボタンが全押しされた時点の動画フレーム周期が終了するタイミングで、ステップＢ４で開始した動画記録処理を、シャッターボタンが全押しされる直前のフレームデータを、繰り返し使用する処理に切り替える（ステップＢ１４）。つまり後述する割り込みによる静止画撮影処理を行う間に動画フレーム周期でバッファメモリに蓄積するフレームデータを、撮像により取得されるフレームデータから、シャッターボタンが全押しされる直前のフレームデータのコピー（以下、代替フレームという）に切り替える。なお、音声録音処理はそのまま継続する。しかる後、前述したステップＳ１１と同様に、ＣＣＤ２による記録用の被写体画像の撮像、及びその画像データの生成等の静止画撮影処理を開始し（ステップＢ１５）、それが完了したら（ステップＢ１６でＹＥＳ）、バッファメモリ上で画像データに基づく静止画ファイル（ＪＰＥＧ形式等のファイル）を生成し、メモリ・カード１３に記憶する（ステップＢ１７）。これにより割り込みによる静止画撮影処理を終了する。

その後、次の動画フレーム周期の到来を待つとともに、それが到来した時点で（ステップＢ１８でＹＥＳ）、それまでの動画フレーム周期に合わせたタイミングで、つまりそれまでの動画フレーム周期に同期させて、通常の動画記録処理（動画撮影処理）を再開する（ステップＢ１９）。
また、ステップＢ１９で動画記録処理を再開した時点において、シャッターボタンが半押しされていたときには（ステップＢ２０でＹＥＳ）、ステップＢ９に戻り、ＡＦ・ＡＥ処理を実行し、以後、前述したステップＢ９〜Ｂ２０の処理を繰り返す。
また、ステップＢ２０でシャッターボタンが半押しされていないと判断されたときには、前述した図１０のステップＢ５へ戻り、録画終了ボタンが操作されるまでスルー画像表示処理、動画記録処理および音声録音処理を継続し（ステップＢ６，Ｂ７が共にＮＯ）、録画終了ボタンが操作されたら（ステップＢ７でＹＥＳ）、それまでにバッファメモリに蓄積されている、前述した代替フレームを含む動画データと音声データを用いて音声付き動画ファイルを生成し、メモリ・カード１３に記憶する（ステップＢ８）。

これにより、音声付き動画撮影処理をいったん終了してステップＢ１へ戻り、以後、同様の動作を撮影モードが解除されるまで繰り返す。

以上のように本実施の形態においては、シャッターボタンの半押し操作によりＡＦ・ＡＥ処理が実行された後もシャッターボタンの全押し操作により静止画の撮影が指示されるまで動画撮影処理を停止させずに継続するようにしたので、動画撮影処理の中断時間を大幅に短縮することができるという効果がある。

なお、本実施の形態では、動画撮影中にシャッターボタンが半押しされた場合にＡＦ・ＡＥ処理を実行し、その後、シャッターボタンが全押しされた場合に割り込みによる静止画撮影処理を実行する構成にしたが、シャッターボタンの半押し操作（ＡＦトリガ）を検出せずに、全押し操作（シャッタートリガ）のみを検出し、単純に動画撮影中にシャッターボタンが押下された時点でＡＦ・ＡＥ処理及び静止画撮影処理を実行する構成にしてもよい。

また、上記第１〜第４の実施の形態では、動画撮影処理を停止している間、移行直前のフレームデータ又は静止画撮影で得られたフレームデータ（代替フレーム）を動画撮影用フレーム周期で繰り返し使用（コピー）してバッファメモリ上への動画データの記録を続行（継続）するようにしたが、動画撮影処理を停止している間、完全に動画撮影に係る処理を停止させ、動画撮影終了後、動画撮影処理を停止した箇所に上記代替フレームを挿入するようにしてもよい。

また、上記第１〜第４の実施の形態では、動画撮影を中断することにより生じた欠落箇所に代替フレームを挿入するようにしたが、それを挿入せずに静止画撮影処理前後の動画データを直接つなぎ合わせて１つの動画ファイルを作成するようにしてもよい。

また、上記第１〜第４の実施の形態では、動画撮影処理を停止する直前のフレームデータ又は静止画撮影で得られた代替フレームを動画データの欠落箇所に挿入するようにしたが、動画撮影処理を再開した直後のフレームデータを欠落箇所に挿入するようにしたり、複数のフレームデータを所定の比率で合成して生成したフレームデータを動画データの欠落箇所に挿入するようにしたり、欠落箇所に挿入するフレームデータを段階的に異なる他のフレームデータに変更していくようにしてもよい。

また、上記第１〜第４の実施の形態では、動画撮影処理を再開するタイミングを動画撮影用周期に同期させるために、ダミー期間を設けて再開時期を遅延させるようにしたが、遅延させずに静止画撮影処理を終了した後、直ちに動画撮影処理を開始するようにしてもよい。

また、上記第１〜第４の実施の形態では、動画撮影機能付き電子スチルカメラに本発明を適用したが、静止画撮影機能付きムービーカメラ、カメラ付き携帯電話、カメラ付きＰＤＡ、カメラ付きパソコン等でもよく、要は、動画撮影機能と静止画撮影機能を兼ね備えた機器であれば本発明を適用することができる。

その他、本発明は上記実施の形態に限らず、その要旨を逸脱しない範囲内で種々変形して実施することが可能であるものとする。
さらに、上記実施の形態には種々の段階の発明が含まれており、開示される複数の構成要件における適宜な組合わせにより種々の発明が抽出され得る。例えば、実施の形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題の少なくとも１つが解決でき、発明の効果の欄で述べられている効果の少なくとも１つが得られる場合には、この構成要件が削除された構成が発明として抽出され得る。

本発明の第１の実施の形態を示すデジタルカメラのブロック図である。 同デジタルカメラの撮影モードでの動作を示すフローチャートである。 図２に続くフローチャートである。 図２に続くフローチャートである。 デジタルカメラによる動画撮影時のタイミングチャートである。 本発明の第２の実施の形態を示す動画撮影時のタイミングチャートである。 本発明の第３の実施の形態を示す撮影モードでの動作を示すフローチャートである。 図７に続くフローチャートである。 図７に続くフローチャートである。 本発明の第４の実施の形態を示す撮影モードでの動作を示すフローチャートである。 図１０に続くフローチャートである。

符号の説明

１ デジタルカメラ
２ ＣＣＤ
３ ＤＳＰ／ＣＰＵ
４ ＴＧ
５ ユニット回路
６ 表示装置
７ キー入力部
８ 音声処理部
９ データバス
１０ ＤＲＡＭ
１１ 内蔵フラッシュメモリ
１２ インターフェイス
１３ メモリ・カード

Claims (5)

1. オートフォーカス制御による被写体への合焦処理が完了した後において、撮影者が静止画撮影の指示操作を行ったか否かを検出する検出手段と、
   前記検出手段により静止画撮影の指示操作が検出されなかった場合に、オートフォーカス制御による被写体への合焦処理を再実行させる合焦制御手段と、
   前記検出手段により静止画撮影の指示操作が検出された際に、撮像素子により撮像して得られる画像データを静止画データとして記録する静止画撮影手段と、
   前記静止画撮影手段による静止画の撮像および記録が行われる前に報知音を発する第１の報知手段と、
   動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、報知音を発生することなく各動画フレームに対応する画像データを前記撮像素子により順番に撮像させるとともに、この撮像動作と平行して音声の録音動作を実行させ、この撮像動作および録音動作により得られた複数の画像データおよび音声データを音声の同時再生が可能な動画データとして記録する動画撮影手段と、
   前記動画撮影手段による撮像動作および録音動作が行われている最中に、前記検出手段により静止画撮影の指示操作が検出された場合に、前記録音動作を中断することなく前記動画フレームに対応する画像データの撮像動作を一時的に中断し、この中断により利用可能になった前記撮像素子を利用して前記静止画撮影手段による静止画データの撮像動作を行わせ、この静止画データの撮像動作が終了した後に、前記一時的に中断されていた前記動画撮影手段による画像データの撮像動作を再開させる割り込み処理を行う割込制御手段と、
   を備え、
   前記動画撮影手段は、前記割込制御手段による割り込み処理によって中断されることなく録音され続けている音声データに対して欠落が無いように、前記中断によって欠落した動画フレームに対応する画像データを補間して動画データを記録し、
   前記第１の報知手段は、前記割込制御手段による割り込み処理によって前記静止画撮影手段による静止画の撮像および記録が行われる際は、前記静止画の撮像および記録が行われる前に報知音を発生しないことを特徴とする撮影装置。
2. 前記オートフォーカス制御による被写体への合焦処理が完了した際に、該被写体への合焦処理が完了したことを示す報知音を発する第２の報知手段と、
   前記動画撮影手段は、動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、オートフォーカス制御による被写体への合焦処理を繰り返し実行するとともに、前記第２の報知手段による合焦処理の完了を示す報知音を発生しないように制御することを特徴とする請求項１記載の撮影装置。
3. 前記検出手段により静止画撮影の指示操作が検出されなかった場合に、前記第１の報知手段による前記静止画の撮像および記録が行われる前に報知音を発生させずに、前記第２の報知手段による前記合焦処理の完了を示す報知音のみを発生させる報知音制御手段を更に備えたことを特徴とする請求項２記載の撮影装置。
4. 前記静止画撮影手段は、前記予め決められた期間間隔とは非同期のタイミングで静止画用の画像データを出力する処理を前記撮像素子に実行させ、
   前記再開制御手段は、前記撮像素子による静止画用の画像データを出力する処理が終了した後であっても、前記音声データに対して欠落が無いように補間される各動画フレームに対応するタイミングがくるまでの間は、前記撮像素子による動画フレーム用の画像データを出力する処理を再開させずに待機することを特徴とする請求項１記載の撮影装置。
5. 撮影装置が有するコンピュータに、
   オートフォーカス制御による被写体への合焦処理が完了した後において、撮影者が静止画撮影の指示操作を行ったか否かを検出する検出処理と、
   前記検出処理により静止画撮影の指示操作が検出されなかった場合に、オートフォーカス制御による被写体への合焦処理を再実行させる合焦制御処理と、
   前記静止画撮影の指示操作が検出された際に、撮像素子により静止画データを撮像して記録する静止画撮影処理と、
   前記静止画の撮像および記録が行われる際に、該静止画の撮像および記録が行われる前に報知音を発する第１の報知処理と、
   動画撮影の開始が指示されてから動画撮影の終了が指示されるまでの間、報知音を発生することなく各動画フレームに対応する画像データを前記撮像素子により順番に撮像させるとともに、この撮像動作と平行して音声の録音動作を実行させ、この撮像動作および録音動作により得られた複数の画像データおよび音声データを音声の同時再生が可能な動画データとして記録する動画撮影処理と、
   前記動画撮影動作および録音動作が行われている最中に、前記静止画撮影の指示操作が検出された場合に、前記録音動作を中断することなく前記動画フレームに対応する画像データの撮像動作を一時的に中断し、この中断により利用可能になった前記撮像素子を利用して前記静止画データの撮像動作を行わせ、この静止画データの撮像動作が終了した後に、前記一時的に中断されていた前記動画データの撮像動作を再開させる割り込み処理と、
   を実行させるためのプログラムであって、
   前記動画撮影処理は、前記割込制御手段による割り込み処理によって中断されることなく録音され続けている音声データに対して欠落が無いように、前記中断によって欠落した動画フレームに対応する画像データを補間して動画データを記録し、
   前記報知手段は、前記割込制御手段による割り込み処理によって前記静止画撮影手段による静止画の撮像および記録が行われる際は、前記第１の報知手段による前記静止画の撮像および記録が行われる前に報知音を発生しないことを特徴とするプログラム。

Images