JP2008306587A - 撮影装置、画像記録方法およびプログラム - Google Patents

Abstract

【課題】動画と静止画とを記録時および再生時に関連づけ、画像内容の関連性の理解の容易化を図る。
【解決手段】Ｓ３では、スルー画（動画）の記録を開始する。そして、シャッタボタン１０２の全押しがあるまで、本ステップの動画の記録動作を継続する。Ｓ４では、シャッタボタン１０２の全押しに応じて静止画記録動作を行う。なお、この静止画記録動作の最中は、動画記録は中断する。Ｓ５では、静止画記録動作完了後、スルー画出力を再開する。Ｓ６では、動画の記録を再び開始する。そして、本ステップで記録された動画の総記録時間Ｔ２が、上限Ｔｍに達するまで、本ステップの動画の記録動作は継続する。
【選択図】 図２

Description

本発明は、動画と静止画の記録および動画と静止画の再生に関する。

特許文献１によると、静止画を撮影するときは動画の中の特定画像と同じタイミングで撮像を行う同期手段と、静止画と特定動画を他から識別するための符号若しくはデータを少なくとも静止画若しくは特定動画と同時に記録する記録手段を備える。また、補間すべき画像と静止画および動画の中の静止画と同じタイミングで撮影された画像と、補間すべき画像との間のタイミングで撮影された動画の中の画像を用いて、被写体の動きを追跡し、補間すべき画像と静止画との間の画素の対応を求め、補間すべき画像のデータとそれに対応する静止画のデータを用いて補間演算を行う。

特許文献２によると、コマ送り時またはインデックス再生時に静止画の画像と、動画の１コマの画像とを画像モニタに表示する場合には、静止画の画像と動画の１コマの画像の表示形態を異ならせる。即ち、静止画の画像は、写真が連想させるように白枠付きの画像として表示し、一方、動画の１コマの画像は、映画のフイルムが連想されるように１コマの左右両端にパーフォレーションを合成した画像として表示する。

特許文献３によると、コマ送り時またはインデックス再生時に動画を表示する際に、動画全体の内容が把握できるように動画に関連する画像を画像モニタに表示させる。即ち、動画を構成する全コマのうちの撮影の最初の方のコマ画像、中間のコマ画像、および最後の方のコマ画像から４画面マルチ画像を構成し、これを４コマ漫画のように表示することにより、動画再生を開始する前に、動画再生を希望する動画であるかどうかを判断することができるようにしている。
特開平０７-１４３４３９号公報 特開２００１−１９７４４５号公報 特開２００１−１９７４４７号公報

特許文献１では、無条件で同時撮影を行うため、冗長なデータになり、無駄な画像が増える。特許文献２および３では、動画と静止画を関連づけて記録しないため、動画と静止画を関連づけて再生することもできない。

本発明は、動画と静止画とを記録時および再生時に関連づけ、画像内容の関連性の理解の容易化を目的とする。

本発明に係る撮影装置は、被写体を撮影してスルー画像、記録用の静止画像または動画像を出力する撮影部と、撮影部から出力された記録用の静止画像および動画像を記録する記録部と、撮影部によるスルー画像の撮影が開始したことに応じて撮影部が撮影したスルー画像を撮影前動画像として記録するよう記録部を制御し、静止画像の撮影を開始する指示が入力されたことに応じて撮影前動画像の記録を停止するとともに静止画像を記録するよう記録部を制御し、静止画像の記録完了から所定時間が経過するまで撮影部が撮影したスルー画像を撮影後動画像として記録するよう記録部を制御し、かつ静止画と撮影前動画像および撮影後動画像とを対応づけるデータを作成して記録するよう記録部を制御する記録制御部と、を備える。

この発明によると、静止画の前後で取得されたスルー画像を動画として記録し、かつ静止画とこれらの動画が対応づけられる。そのため、静止画の前後の状況が動画で把握でき、また、静止画の内容に関連した内容の動画を対応づけて記録することができる。

撮影部が撮影したスルー画像から被写体の顔を抽出する顔抽出部をさらに備え、記録制御部は、顔抽出部が被写体の顔を抽出したスルー画像のコマ部分のみを撮影前動画像および撮影後動画像として記録するよう記録部を制御するようにしてもよい。

こうすると、動画のうち被写体が写っている重要部分に限って記録することができる。

顔抽出部は、静止画像から被写体の顔を抽出し、顔抽出部の抽出した被写体の顔から被写体の顔の同一性を識別する被写体識別部をさらに備え、記録制御部は、スルー画像のうち、被写体識別部が静止画像の顔と同一であると識別した顔の抽出されたコマ部分のみを撮影前動画像および撮影後動画像として記録するよう記録部を制御するようにしてもよい。

こうすると、静止画に写っているのと同一人物が写っている動画を静止画に対応づけて記録することができ、静止画と動画の内容の関連性がさらに高まる。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、撮影前動画像、静止画像、撮影後動画像、静止画像の順番で所定の表示装置に再生表示させるよう制御する表示制御部と、をさらに備えてもよい。

こうすると、静止画の撮影前後の状況が動画によって視覚的に認識でき、静止画と動画の関連性が容易に把握できるし、静止画表示の興趣性が高まる。

静止画像の初回の表示の際に所定の音声を再生させるよう所定の拡声装置を制御する音声制御部をさらに備えてもよい。

表示制御部は、撮影前動画像にフェードイン表示効果を付与し、撮影後動画像にフェードアウト表示効果を付与するようにしてもよい。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像を所定の表示装置に表示させるよう制御する表示制御部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像の表示に同期して撮影前動画像および撮影後動画像に付随する音声を再生させるよう所定の拡声装置を制御する音声制御部と、をさらに備えてもよい。

こうすると、静止画の表示とともに、静止画撮影前後の状況を音声で把握することができ、静止画表示の興趣性が高まる。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像とともに撮影前動画像および撮影後動画像の任意のコマを同一画面上に配置して所定の表示装置に表示させるよう制御する表示制御部をさらに備えてもよい。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像とともに撮影前動画像および撮影後動画像を同一画面上に配置した上、静止画像を所定の表示装置に表示させるよう制御するとともに撮影前動画像および撮影後動画像を所定の表示装置で再生表示させるよう制御する表示制御部をさらに備えてもよい。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像指定部から指定された静止画像に対応する撮影前動画像および撮影後動画像を所定の表示装置で順次再生表示させるよう制御する表示制御部をさらに備えてもよい。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、静止画像とともに撮影前動画像および撮影後動画像を同一画面上に並列に配置した上、静止画像を所定の表示装置に表示させるよう制御するとともに撮影前動画像および撮影後動画像を所定の表示装置で再生表示させるよう制御する表示制御部をさらに備えてもよい。

記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、静止画像指定部から指定された静止画像に撮影前動画像および撮影後動画像が対応づけられている場合、記録されている全ての静止画像を同一画面上に配置した上、指定された静止画像を他の静止画像よりも大きいサイズで所定の表示装置で表示させるよう制御する表示制御部をさらに備えてもよい。

記録制御部は、同一の静止画に対応づけて記録された静止画記録前動画と静止画記録後動画との内容を比較し、両者が同一内容であれば、静止画記録前動画と静止画記録後動画のうちいずれか一方を削除してもよい。

こうすると、内容の重複した動画を重複して記録しなくて済む。

表示制御部は、同一の静止画に対応づけて記録された静止画記録前動画と静止画記録後動画との内容を比較し、両者が同一内容であれば、静止画記録前動画と静止画記録後動画のうちいずれか一方のみを表示してもよい。

こうすると、内容の重複した動画を重複して表示しなくて済む。

本発明に係る画像記録方法は、被写体を撮影してスルー画像、記録用の静止画像または動画像を出力するステップと、スルー画像の撮影が開始したことに応じて撮影したスルー画像を撮影前動画像として記録し、静止画像の撮影を開始する指示が入力されたことに応じて撮影前動画像の記録を停止するとともに静止画像を記録し、静止画像の記録完了から所定時間が経過するまで撮影したスルー画像を撮影後動画像として記録し、かつ静止画と撮影前動画像および撮影後動画像とを対応づけるデータを作成して記録するステップと、を含む。

この画像記録方法をコンピュータに実行させるプログラムも本発明に含まれる。

この発明によると、静止画の前後で取得されたスルー画像を動画として記録し、かつ静止画とこれらの動画が対応づけられる。そのため、静止画の前後の状況が動画で把握でき、また、静止画の内容に関連した内容の動画を対応づけて記録することができる。

＜第１実施形態＞
図１はデジタルカメラ１０の機能ブロック図である。同図において、中央処理装置（ＣＰＵ）１１２は、シャッタボタン１０２、モードスイッチ１０３等の各種のボタンやキーを含む操作部１２０からの入力に基づいてデジタルカメラ１０内の各回路を統括制御する。

いま、モードスイッチ１０３によって撮影モードが設定されると、ＣＰＵ１１２は、ＬＣＤパネルを含む表示部１１０に動画（スルー画）を表示させ、撮影画角を確認可能にする。即ち、撮影レンズ１１８を通過した被写体光は、撮像素子（ＣＣＤ）１２１の受光面上に結像する。ＣＣＤ１２１は、受光面に結像された被写体光をその光量に応じた量の信号電荷に変換する。このようにして蓄積された信号電荷は、ＣＰＵ１１２の指令に従いタイミングジェネレータから与えられる駆動パルスに基づいて信号電荷に応じた電圧信号（画像信号）として順次読み出される。

ＣＣＤ１２１から出力された信号はアナログ処理部（ＣＤＳ／ＡＭＰ）１２２に送られ、ここで画素ごとのＲ，Ｇ，Ｂ信号がサンプリングホールド（相関二重サンプリング処理）され、増幅された後、Ａ／Ｄ変換器１２４に加えられる。Ａ／Ｄ変換器１２４によってデジタル信号に変換された点順次のＲ，Ｇ，Ｂ信号は、画像入力コントローラ１２６を介してメモリ（ＳＤＲＡＭ）１２８に記憶される。なお、メモリ１２８は、画像データの一時記憶領域として利用されるとともに、プログラムの展開領域およびＣＰＵ１１２の演算作業用領域として利用される。

画像信号処理回路１３０は、メモリ１２８に記憶されたＲ，Ｇ，Ｂ信号をＣＰＵ１１２の指令に従って処理する。即ち、画像信号処理回路１３０は、同時化回路（単板ＣＣＤのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含む画像処理手段として機能し、ＣＰＵ１１２からのコマンドに従ってメモリ１２８を活用しながら所定の信号処理を行う。

画像信号処理回路１３０に入力されたＲ、Ｇ、Ｂ信号は、輝度信号（Ｙ信号）および色差信号（Ｃr,Ｃb 信号）に変換されるとともに、ガンマ補正等の所定の処理が施される。画像信号処理回路１３０で処理されたＹＣ信号はＶＲＡＭ１３２に格納される。

撮影画像を表示部１１０にモニタ出力する場合、ＶＲＡＭ１３２からＹＣ信号が読み出され、ビデオエンコーダ１３４に送られる。ビデオエンコーダ１３４は、入力されたＹＣ信号を表示用の所定方式の信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換して表示部１１０に出力する。

所定のフレームレートで処理された各フレームのＹＣ信号は、ＶＲＡＭ１３２のＡ領域とＢ領域とに交互に書き込まれ、ＶＲＡＭ１３２のＡ領域およびＢ領域のうち、ＹＣ信号が書き込まれている方の領域以外の領域から、書き込まれているＹＣ信号が読み出される。このようにしてＶＲＡＭ１３２内のＹＣ信号が定期的に書き換えられ、そのＹＣ信号から生成される映像信号が表示部１１０に供給されることにより、撮像中の映像がリアルタイムに表示部１１０に表示される。ユーザは、表示部１１０に表示される映像（スルー）によって撮影画角を確認できる。

ここで、シャッタボタン１０２が半押しされると、ＡＥおよびＡＦ処理が開始される。即ち、ＣＣＤ１２１から出力された画像信号はＡ／Ｄ変換後に画像入力コントローラ１２６を介してＡＦ検出回路１３６並びにＡＥ／ＡＷＢ検出回路１３８に入力される。

ＡＥ／ＡＷＢ検出回路１３８は、１画面を複数のエリア（例えば、１６×１６）に分割し、分割エリアごとにＲＧＢ信号を積算する回路を含み、その積算値をＣＰＵ１１２に提供する。ＣＰＵ１１２は、ＡＥ／ＡＷＢ検出回路１３８から得た積算値に基づいて被写体の明るさ（被写体輝度）を検出し、撮影に適した露出値（撮影ＥＶ値）を算出する。求めた露出値と所定のプログラム線図に従い、絞り値とシャッタースピードが決定され、これに従いＣＰＵ１１２はタイミングジェネレータを介してＣＣＤ１２１の電子シャッタを制御するとともに、絞りを制御して適正な露光量を得る。

また、ＡＥ／ＡＷＢ検出回路１３８は、自動ホワイトバランス調整時には、分割エリアごとにＲＧＢ信号の色別の平均積算値を算出し、その算出結果をＣＰＵ１１２に提供する。ＣＰＵ１１２は、Ｒの積算値、Ｂの積算値、Ｇの積算値を得て、分割エリアごとにＲ／ＧおよびＢ／Ｇの比を求め、これらＲ／Ｇ、Ｂ／Ｇの値のＲ／Ｇ、Ｂ／Ｇの色空間における分布等に基づいて光源種判別を行い、判別された光源種に適したホワイトバランス調整値に従って、例えば、各比の値がおよそ１（つまり、１画面においてＲＧＢの積算比率がＲ：Ｇ：Ｂ≒１：１：１）になるように、ホワイトバランス調整回路のＲ，Ｇ，Ｂ信号に対するゲイン値（ホワイトバランス補正値）を制御し、各色チャンネルの信号に補正をかける。

また、ＡＦ制御は、例えば画像信号のＧ信号の高周波成分が極大になるように撮影レンズ１１８を移動させるコントラストＡＦが適用される。即ち、ＡＦ検出回路１３６は、Ｇ信号の高周波成分のみを通過させるハイパスフィルタ、絶対値化処理部、画面内（例えば、画面中央部）に予め設定されているフォーカス対象エリア内の信号を切り出すＡＦエリア抽出部、およびＡＦエリア内の絶対値データを積算する積算部から構成される。

ＡＦ検出回路１３６で求めた積算値のデータはＣＰＵ１１２に通知される。ＣＰＵ１１２は、モータドライバを制御して撮影レンズ１１８を移動させながら、複数のＡＦ検出ポイントで焦点評価値（ＡＦ評価値）を演算し、評価値が極大となるレンズ位置を合焦位置として決定する。そして、求めた合焦位置に撮影レンズ１１８を移動させるようにモータドライバを制御する。なお、ＡＦ評価値の演算はＧ信号を利用する態様に限らず、輝度信号（Ｙ信号）を利用してもよい。

顔検出ＡＥ／ＡＦが設定されている場合は、顔抽出制御部１４５によって特定されたスルー画像中の顔領域検出範囲内の画像データに基づいて、ＡＦ評価値を算出し、そのピークに相当するレンズ位置を合焦位置とする。従って、いわゆる全域サーチは行わず、顔領域検出範囲は、検出顔領域ないしその近傍に制限される。ＡＥ／ＡＷＢ検出回路１３８によるＥＶ値の算出範囲も検出顔領域ないしその近傍に制限される。これにより、ピントの中抜け、逆光撮影が防止される。

上記ＡＥ／ＡＦ処理が行われ、シャッタボタン１０２が全押しされることによって記録用の撮影動作がスタートする。Ｓ２オンに応動して取得された画像データは画像信号処理回路１３０において輝度／色差信号（Ｙ／Ｃ信号）に変換され、ガンマ補正等の所定の処理が施された後、メモリ１２８に格納される。

メモリ１２８に格納されたＹ／Ｃ信号は、圧縮伸長処理回路１４４によって所定のフォーマットに従って圧縮された後、メディアＩ／Ｆ１４６を介して可搬性のストレージメディア４０にExif（Exchangeable Image File Format）ファイルとして記録される。画像はExifファイルのデータ部分に記録される。

モードスイッチ１０３によって動画記録モードが設定されたときには、シャッタボタン１０２の全押し操作の連動によって録画動作がスタートし、もう一度シャッタボタン１０２を押下すると録画動作が停止する。シャッタボタン１０２を押下継続している期間、録画動作を行い、押下解除によって録画を停止するようにしてもよい。動画データは、例えばモーションＪＰＥＧ（ＭＰＥＧ）形式によってストレージメディア４０に記録される。

モードスイッチ１０３により再生モードが選択されると、ストレージメディア４０に記録されている最終の画像ファイル（最後に記録されたファイル）の圧縮データが読み出される。最後の記録に係るファイルが静止画ファイルの場合、この読み出された画像圧縮データは、圧縮伸長処理回路１４４を介して非圧縮のＹＣ信号に伸長され、ＶＲＡＭ１３２に保存される。ＶＲＡＭ１３２に保存されたＹＣ信号は、ビデオエンコーダ１３４に加えられる。ビデオエンコーダ１３４は、入力するＹＣ信号からＮＴＳＣ方式のカラー複合映像信号を作成し、これを表示部１１０に出力する。これにより、表示部１１０にはストレージメディア４０に記録されている最終コマのコマ画像が表示される。

その後、順コマ送りスイッチ（図示せず）が押されると、順方向にコマ送りされ、逆コマ送りスイッチ（図示せず）が押されると、逆方向にコマ送りされる。そして、コマ送りされたコマ位置の画像ファイルがストレージメディア４０から読み出され、上記と同様にしてコマ画像が表示部１１０に再生される。なお、最終コマのコマ画像が表示されている状態で順方向にコマ送りされると、ストレージメディア４０に記録されている１コマ目の画像ファイルが読み出され、１コマ目のコマ画像が表示部１１０に再生される。

カメラ１０は省電力を図るために、オートパワーオフ設定機能を備えている。オートパワーオフ設定が有効な場合、操作部１２０に何ら入力がない待機状態の継続時間を、カレンダー１５によって計時する。この待機状態のまま所定時間（例えば３分）が経過した場合、カメラ１０は、バックライトへの電力供給をオフにするか、あるいはカメラ１０本体の各ブロックへの電力供給をオフにする。オートパワーオフ設定は、操作部１２０への所定操作によって任意に有効化あるいは解除することもできる。

通信制御部１３９は、カメラ１０により撮影された被写体の画像信号をパーソナルコンピュータ等の外部装置に出力し、およびこのような外部装置からカメラ１０に画像信号を入力することにより、その外部装置との間のデータ通信を担う。

音声処理回路１４０は、ＣＰＵ１１２の制御に応じ、予めメモリ１２８に蓄えられている所定の音声データをアナログ音声信号に変換し、スピーカ１４１に出力する。これにより、スピーカ１４１から所定の音声が再生される。

照度検出回路１３７は、被写体の照度を検出する。被写体照度は、露光制御に用いられる。

図２は第１実施形態に係るカメラ１０の撮影処理の流れを示すフローチャートである。

Ｓ１では、動画の記録時間の上限Ｔｍの設定を、操作部１２０から受け付ける。例えば、上限を１０秒間とすることができる。

Ｓ２では、撮影モードの設定に応じ、表示部１１０へのスルー画の出力を開始する。

Ｓ３では、スルー画（動画）の記録を開始する。そして、シャッタボタン１０２の全押しがあるまで、本ステップの動画の記録動作を継続する。ただし、シャッタボタン１０２の全押しがある前の時点で既にＴ１＝Ｔｍとなった場合、記録時点の古いものから順次上書きしながら、動画記録を継続する。

Ｓ４では、シャッタボタン１０２の全押しに応じて静止画記録動作を行う。なお、この静止画記録動作の最中は、動画記録は中断する。

Ｓ５では、静止画記録動作完了後、スルー画出力を再開する。

Ｓ６では、動画の記録を再び開始する。そして、本ステップで記録された動画の総記録時間Ｔ２が、上限Ｔｍに達するまで、本ステップの動画の記録動作は継続する。

Ｓ７では、Ｓ３からＳ４までの間に撮影された動画（静止画記録前動画）の中から、顔検出された動画フレーム部分（動画コマ）を抽出し、Ｓ４で得られた静止画と対応づけてストレージメディア４０に記録する。対応づけの方法は、例えば静止画ファイル名と動画ファイル名との対応関係を規定した管理テーブルを別途作成して記録しておく。

Ｓ８では、Ｓ６で撮影された動画（静止画記録後動画）の中から、顔検出された動画フレーム部分（動画コマ）を抽出し、Ｓ４で得られた静止画と対応づけてストレージメディア４０に記録する。そして、撮影モードが解除されない限りＳ２に戻り、Ｓ２〜Ｓ８が繰り返される。こうすると、動画のうち被写体が写っている重要部分に限って静止画に対応づけて記録することができる。

なお、Ｓ７とＳ８において、同一の静止画に対応づけて記録された静止画記録前動画と静止画記録後動画との内容を比較し、両者が同一内容であれば、静止画記録前動画と静止画記録後動画のうちいずれか一方を削除してもよい。こうすると、同じ動画が重複して静止画に対応づけられて記録される無駄を防ぐことができる。

＜第２実施形態＞
図３は第２実施形態に係るカメラ１０の撮影処理の流れを示すフローチャートである。

Ｓ１１〜Ｓ１６は、Ｓ１〜Ｓ６と同様である。

Ｓ１７では、Ｓ１３からＳ１４までの間に撮影された動画（静止画記録前動画）の中から、顔検出された動画フレーム部分（動画コマ）を抽出し、さらに、その動画コマから顔領域を抽出する。また、Ｓ１４で得られた静止画から顔領域を抽出する。そして、動画コマから抽出された各顔領域と静止画から抽出された顔領域とを比較し、静止画の顔領域と一致する顔領域が抽出された動画コマを特定する。そして、特定された動画コマと静止画とを対応づけてストレージメディア４０に記録する。

なお、顔の一致判定は公知の技術を用いることができる。例えば、顔の特徴量から両者の相関値を算出し、その値に基づいて顔の一致を判定する技術（特開２０００−３００６６）を用いればよい。

Ｓ１８では、Ｓ１５からＳ１６までの間に撮影された動画（静止画記録後動画）の中から、顔検出された動画フレーム部分（動画コマ）を抽出し、さらに、その動画コマから顔領域を抽出する。また、Ｓ１４で得られた静止画から顔領域を抽出する。そして、動画コマから抽出された各顔領域と静止画から抽出された顔領域とを比較し、静止画の顔領域と一致する顔領域が抽出された動画コマを特定する。そして、特定された動画コマと静止画とを対応づけてストレージメディア４０に記録する。

こうすると、静止画に写っているのと同一人物が写っている動画を静止画に対応づけて記録することができ、静止画と動画の内容の関連性がさらに高まる。

＜第３実施形態＞
図４は第３実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。この処理は、モードスイッチ１０３で再生モードが設定されたときに開始する。

Ｓ２１では、操作部１２０の指示に応じ、静止画のコマ送り再生を行う。

Ｓ２２では、コマ送りで再生の指定された静止画に、上記第１または第２実施形態で対応づけられた動画コマが記録されているか否かを判断する。動画コマが対応づけられている場合はＳ２３、対応づけられていない場合はＳ２６に進む。

Ｓ２３では、静止画に対応づけられている静止画記録前動画の動画コマを再生する。

Ｓ２４では、静止画を所定時間（例えば５秒間）再生する。

Ｓ２５では、静止画に対応づけられている静止画記録後動画の動画コマを再生する。

Ｓ２６では、静止画を再生する。そして、新たなコマ送りが指示されたことに応じ、指定されたコマについてＳ２２〜Ｓ２６を行う。こうすると、静止画の撮影前後の状況が動画によって視覚的に認識でき、静止画と動画の関連性が容易に把握できるし、静止画表示の興趣性が高まる。

なお、静止画記録前動画と静止画記録後動画とが同一内容の場合、Ｓ２３およびＳ２５のうち一方の実行を省略し、同じ内容の動画が重複して再生表示されないようにしてもよい。

＜第４実施形態＞
図５は第４実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ３１〜Ｓ３３、Ｓ３５〜Ｓ３６は、それぞれＳ２１〜Ｓ２３、Ｓ２５〜Ｓ２６と同様である。

Ｓ３４では、静止画を所定時間（例えば５秒間）再生するとともに、所定の効果音（例えばシャッター音）を再生する。

こうすると、動画の内容と静止画の撮影タイミングの関連性が音で容易に把握できる。

＜第５実施形態＞
図６は第５実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ４１〜Ｓ４２、Ｓ４４、Ｓ４６は、それぞれＳ２１〜Ｓ２２、Ｓ２４、Ｓ２６と同様である。

Ｓ４３では、静止画に対応づけられている静止画記録前動画の動画コマにフェードイン効果（一色の状態から徐々に映像が見えている状態に移り変わる効果）を付与して再生する。

Ｓ４５では、静止画に対応づけられている静止画記録後動画の動画コマにフェードアウト効果（映像が見えている状態から徐々に一色に移り変わる効果）を付与して再生する。

こうすると、動画再生表示と静止画表示の視覚的なつながりが高まる。

＜第６実施形態＞
図７は第６実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ５１〜Ｓ５２、Ｓ５４は、それぞれＳ２１〜Ｓ２２、Ｓ２６と同様である。

Ｓ５３では、静止画とともに、当該静止画に対応づけられた動画に付随して記録されている音声を再生する。

こうすると、静止画の表示とともに、静止画撮影前後の状況を音声で把握することができ、静止画表示の興趣性が高まる。

＜第７実施形態＞
図８は第７実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ６１〜Ｓ６２、Ｓ６４は、それぞれＳ５１〜Ｓ５２、Ｓ５４と同様である。

Ｓ６３では、静止画とともに、当該静止画に対応づけられた動画の任意コマを同一画面上に再生する。

例えば図９（ａ）に示すように、画面中央部には表示指定された静止画を、同一画面の上部および下部には静止画に対応づけられた動画の任意のコマを４つずつ配置して表示する。あるいは図９（ｂ）に示すように、画面上部に指定された静止画を、同一画面の下部に静止画に対応づけられた動画の任意のコマを８つ配置して表示する。なお、どのコマを表示するかは任意であり、ランダムにコマを所定数選択して表示してもよいし、最初の所定コマから表示してもよい。あるいは、顔の抽出されたコマ、静止画と同一の顔の検出されたコマを表示してもよい。

＜第８実施形態＞
図１０は第８実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ７１〜Ｓ７２、Ｓ７４は、それぞれＳ５１〜Ｓ５２、Ｓ５４と同様である。

Ｓ７３では、静止画とともに、当該静止画に対応づけられた動画を同一画面上に再生する。

例えば図１１に示すように、画面中央部には指定されたコマの静止画を、同一画面の左側部には静止画に対応づけられた静止画記録前動画を、同一画面の右側部には静止画に対応づけられた静止画記録後動画を配置して再生する。

＜第９実施形態＞
図１２は第９実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ８１〜Ｓ８２、Ｓ８４は、それぞれＳ５１〜Ｓ５２、Ｓ５４と同様である。

Ｓ８３では、静止画に対応づけられた静止画記録前動画を再生し、その再生終了後、静止画記録後動画を再生する。

＜第１０実施形態＞
図１３は第１０実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ９１〜Ｓ９２、Ｓ９４は、それぞれＳ５１〜Ｓ５２、Ｓ５４と同様である。

Ｓ９３では、静止画とともに、当該静止画に対応づけられた動画を同一画面上に並列して表示する。

例えば図１４に示すように、静止画の左側部には当該静止画に対応づけられた静止画記録前動画を、当該静止画の当該右側部には静止画に対応づけられた静止画記録後動画を配置して表示する。

＜第１１実施形態＞
図１５は第１１実施形態に係るカメラ１０の再生処理の流れを示すフローチャートである。

Ｓ１０１〜Ｓ１０２、Ｓ１０４は、それぞれＳ５１〜Ｓ５２、Ｓ５４と同様である。

Ｓ１０３では、指定された静止画が動画と対応づけられていれば、当該静止画のサイズを変更し、他の静止画とともに同一画面上に配置して表示する。

例えば図１６に示すように、静止画に動画が対応づけられていれば、当該静止画のサイズを拡大し、その他の静止画を周囲に配置して表示する。

デジタルカメラのブロック図 第１実施形態に係る撮影処理のフローチャート 第２実施形態に係る撮影処理のフローチャート 第３実施形態に係る再生処理のフローチャート 第４実施形態に係る再生処理のフローチャート 第５実施形態に係る再生処理のフローチャート 第６実施形態に係る再生処理のフローチャート 第７実施形態に係る再生処理のフローチャート 静止画と動画とを同一画面に表示する様子を例示した図 第８実施形態に係る再生処理のフローチャート 静止画と動画とを同一画面に表示する様子を例示した図 第９実施形態に係る再生処理のフローチャート 第１０実施形態に係る再生処理のフローチャート 前動画と静止画と後動画とを同時に表示する様子を例示した図 第１１実施形態に係る再生処理のフローチャート 動画と対応づけられている静止画のサイズを拡大して表示する様子を例示した図

符号の説明

４０：ストレージメディア、１１２：ＣＰＵ、１２０：操作部、１２８：メモリ

Claims (16)

1. 被写体を撮影してスルー画像、記録用の静止画像または動画像を出力する撮影部と、
   前記撮影部から出力された記録用の静止画像および動画像を記録する記録部と、
   前記撮影部による前記スルー画像の撮影が開始したことに応じて前記撮影部が撮影したスルー画像を撮影前動画像として記録するよう前記記録部を制御し、前記静止画像の撮影を開始する指示が入力されたことに応じて前記撮影前動画像の記録を停止するとともに前記静止画像を記録するよう前記記録部を制御し、前記静止画像の記録完了から所定時間が経過するまで前記撮影部が撮影したスルー画像を撮影後動画像として記録するよう前記記録部を制御し、かつ前記静止画と前記撮影前動画像および前記撮影後動画像とを対応づけるデータを作成して記録するよう前記記録部を制御する記録制御部と、
   を備える撮影装置。
2. 前記撮影部が撮影したスルー画像から被写体の顔を抽出する顔抽出部をさらに備え、
   前記記録制御部は、前記顔抽出部が前記被写体の顔を抽出したスルー画像のコマ部分のみを撮影前動画像および撮影後動画像として記録するよう前記記録部を制御する請求項１に記載の撮影装置。
3. 前記顔抽出部は、前記静止画像から被写体の顔を抽出し、
   前記顔抽出部の抽出した被写体の顔から被写体の顔の同一性を識別する被写体識別部をさらに備え、
   前記記録制御部は、前記スルー画像のうち、前記被写体識別部が前記静止画像の顔と同一であると識別した顔の抽出されたコマ部分のみを撮影前動画像および撮影後動画像として記録するよう前記記録部を制御する請求項２に記載の撮影装置。
4. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
   前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記撮影前動画像、前記静止画像、前記撮影後動画像、前記静止画像の順番で所定の表示装置に再生表示させるよう制御する表示制御部と、
   をさらに備える請求項１〜３のいずれかに記載の撮影装置。
5. 前記静止画像の初回の表示の際に所定の音声を再生させるよう所定の拡声装置を制御する音声制御部をさらに備える請求項４に記載の撮影装置。
6. 前記表示制御部は、前記撮影前動画像にフェードイン表示効果を付与し、前記撮影後動画像にフェードアウト表示効果を付与する請求項４または５に記載の撮影装置。
7. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
   前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像を所定の表示装置に表示させるよう制御する表示制御部と、
   前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像の表示に同期して前記撮影前動画像および前記撮影後動画像に付随する音声を再生させるよう所定の拡声装置を制御する音声制御部と、
   をさらに備える請求項１〜３のいずれかに記載の撮影装置。
8. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
   前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像とともに前記撮影前動画像および前記撮影後動画像の任意のコマを同一画面上に配置して所定の表示装置に表示させるよう制御する表示制御部をさらに備える請求項１〜３のいずれかに記載の撮影装置。
9. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
   前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像とともに前記撮影前動画像および前記撮影後動画像を同一画面上に配置した上、前記静止画像を所定の表示装置に表示させるよう制御するとともに前記撮影前動画像および前記撮影後動画像を前記所定の表示装置で再生表示させるよう制御する表示制御部をさらに備える請求項１〜３のいずれかに記載の撮影装置。
10. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
    前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像指定部から指定された静止画像に対応する前記撮影前動画像および前記撮影後動画像を前記所定の表示装置で順次再生表示させるよう制御する表示制御部をさらに備える請求項１〜３のいずれかに記載の撮影装置。
11. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
    前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、前記静止画像とともに前記撮影前動画像および前記撮影後動画像を同一画面上に並列に配置した上、前記静止画像を所定の表示装置に表示させるよう制御するとともに前記撮影前動画像および前記撮影後動画像を前記所定の表示装置で再生表示させるよう制御する表示制御部をさらに備える請求項１〜３のいずれかに記載の撮影装置。
12. 前記記録部に記録されている静止画像のうち、表示すべき所望の静止画像の指定を受け付ける静止画像指定部と、
    前記静止画像指定部から指定された静止画像に前記撮影前動画像および前記撮影後動画像が対応づけられている場合、記録されている全ての静止画像を同一画面上に配置した上、前記指定された静止画像を他の静止画像よりも大きいサイズで前記所定の表示装置で表示させるよう制御する表示制御部をさらに備える請求項１〜３のいずれかに記載の撮影装置。
13. 前記記録制御部は、同一の静止画に対応づけて記録された静止画記録前動画と静止画記録後動画との内容を比較し、両者が同一内容であれば、静止画記録前動画と静止画記録後動画のうちいずれか一方を削除する請求項１〜１２のいずれかに記載の撮影装置。
14. 前記表示制御部は、同一の静止画に対応づけて記録された静止画記録前動画と静止画記録後動画との内容を比較し、両者が同一内容であれば、静止画記録前動画と静止画記録後動画のうちいずれか一方のみを表示する請求項４〜１２のいずれかに記載の撮影装置。
15. 被写体を撮影してスルー画像、記録用の静止画像または動画像を出力するステップと、
    前記スルー画像の撮影が開始したことに応じて撮影したスルー画像を撮影前動画像として記録し、前記静止画像の撮影を開始する指示が入力されたことに応じて前記撮影前動画像の記録を停止するとともに前記静止画像を記録し、前記静止画像の記録完了から所定時間が経過するまで撮影したスルー画像を撮影後動画像として記録し、かつ前記静止画と前記撮影前動画像および前記撮影後動画像とを対応づけるデータを作成して記録するステップと、
    を含む画像記録方法。
16. 請求項１５に記載の画像記録方法をコンピュータに実行させるプログラム。

Images