JP2010087722A - 撮影装置及び動画像編集方法 - Google Patents

Abstract

【課題】撮影装置において、細切れに撮影された複数の動画像を主要なシーンを逃すことなく迅速に結合編集する。
【解決手段】静止画像及び動画像を撮影可能な撮影手段と、撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置において、記録手段に記録された画像から全ての静止画像Ｐ１〜Ｐ３を検索し、検索された静止画像Ｐ１〜Ｐ３の各々に対して、各静止画像Ｐ１〜Ｐ３の撮影時刻ｔ１〜ｔ３を含む前後の予め設定された所定時間Ｔ内に撮影された動画像Ｍ１〜Ｍ１０を抽出し、抽出された２つ以上の動画像Ｍ１〜Ｍ１０を結合して１つの動画像Ｍ１００を生成する。
【選択図】図３

Description

本発明は静止画像及び動画像を撮影可能なデジタルカメラ等の撮影装置に関し、特に撮影された動画像を結合する動画像編集方法に関するものである。

従来より、静止画像と動画像の両方を撮影して記録することができるデジタルカメラ等の撮影装置が知られており、このような撮影装置によって撮影される動画像は、一般的に短い時間の、いわゆる細切れのものが多い。近年では、このように撮影された複数の動画像データを編集するために様々な方法が提案されており、この方法としては、例えば、撮影した動画像の中から、特定の被写体が記録されている部分を自動的に抽出し、この抽出した部分の動画像を結合して特定の被写体について一貫性のある１つの動画像を生成する方法や（特許文献１）、複数の動画像ファイルから、特定の人物の顔や、撮影時にズームアップされた部分、音量が所定値を超える部分等を特定して、この特定された部分を含む部分動画像を抽出し、抽出された部分動画像を結合して１つの動画像を生成する方法（特許文献２）、撮影時の電源のオン・オフのタイミング等を１区切りとする所定ブロック毎に、動画像情報を時間、画像、音声成分等に成分分けし、入力された編集条件に基づいてブロックを検出して成分を結合する方法（特許文献３）、所定の期間内に撮影された動画を記録手段に記録されている動画に結合させる方法（特許文献４）等がある。
特開平１０−２１５４３４号公報 特開２００２−１７６６１３号公報 特開２００５−３９７４７号公報 特開２００５−２７７６０９号公報

しかしながら特許文献１〜３に記載されている編集方法はいずれも動画像の情報から結合するシーンの抽出を行っているため、結合シーンを抽出するためには動画像の内容を全体的にセンシングする必要があり、結合シーンの抽出には大きな負荷を要してしまう。またこの編集方法を比較的性能が低い撮影装置で使用する場合には、上記センシング等の処理に膨大な時間を要してしまい、実用には適さない可能性がある。

また特許文献４に記載されている編集方法は、撮影されているシーンに関係なく動画像が結合されてしまうため、結合された動画像はユーザが所望しないシーンが多く含まれてしまう虞がある。

本発明はかかる事情に鑑みてなされたものであり、細切れに撮影された複数の動画像を主要なシーンを逃すことなく迅速に結合編集可能な撮影装置及び動画像編集方法を提供することを目的とするものである。

本発明の撮影装置は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
該記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とするものである。

なお本発明の撮影装置においては、前記静止画像の中から顔を検出する顔検出手段をさらに備え、
前記静止画像検索手段が、前記顔検出手段により顔が検出された前記静止画像を検索するものであってもよい。

また本発明の撮影装置においては、前記静止画像及び前記動画像の中から顔を検出する顔検出手段と、
前記顔検出手段により前記動画像の中から検出された顔が、前記顔検出手段により前記静止画像の中から検出された顔と同一の顔であるか否かを判断する顔判断手段とをさらに備え、
前記静止画像検索手段が、前記顔検出手段により顔が検出された前記静止画像を検索すするものであり、
前記動画像抽出手段が、前記顔検出手段により顔が検出され、かつ前記顔判断手段により該検出された顔が前記静止画の中から検出された顔と同一の顔であると判断された前記動画像を抽出するものであってもよい。

また本発明の撮影装置においては、前記静止画像の中から顔を検出する顔検出手段と、
該顔検出手段により顔が検出された静止画像と前記顔検出手段により顔が検出されていない静止画像とで、前記動画像を抽出する前記所定時間を異なる長さに設定する時間設定手段とを備えていてもよい。

本発明の第２の撮影装置は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
予め設定された撮影時間間隔毎に、該撮影時間間隔内に前記撮影手段により撮影された前記静止画像の枚数をカウントするカウント手段と、
該カウントされた前記静止画像の枚数に応じて長さを変更して時間を設定する時間設定手段と、
前記記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記時間設定手段により設定された設定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とするものである。

また本発明の第３の撮影装置は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
前記静止画像の撮影シーンを認識するシーン認識手段と、
該シーン認識手段により認識されたシーンに対応させて時間を設定する時間設定手段と、
前記記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記時間設定手段により設定された設定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とするものである。

なお本発明の撮影装置においては、前記撮影手段が、撮影シーンに応じて任意に撮影モードを設定可能であり、
前記シーン認識手段が、前記静止画像が撮影されたときの前記撮影モードを認識することにより該静止画像の撮影シーンを認識するものであってもよい。

また本発明の第４の撮影装置は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
該記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
該静止画像検索手段により検索された静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出する時間間隔算出手段と、
該時間間隔算出手段により算出された時間間隔が所定の閾値よりも小さいときに、前記２つの静止画像の撮影時刻を含む前記時間間隔内の撮影時刻を動画像抽出期間に設定する期間設定手段と、
該期間設定手段により設定された動画像抽出期間内に撮影された前記静止画像の各々に対して、各静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
該動画像抽出手段により抽出された２つ以上の前記動画像を、連続する前記動画像抽出期間毎に結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とするものである。

なお本発明の撮影装置においては、前記記録手段が、前記撮影手段による前記動画像の撮影毎に、該動画像の撮影開始時刻及び撮影終了時刻の情報が格納されたタグが付加された動画像ファイルを記録するものであることが好ましい。

また本発明の撮影装置においては、前記動画像を前記記録手段に記録するときに、前記動画像が撮影される直前に撮影された前記静止画像の撮影時刻から前記動画像の撮影開始時刻までの経過時間を関連付けしたファイル名を生成して付与するファイル名付与手段を備えていてもよい。

また本発明の撮影装置においては、前記撮影手段が、通常撮影モード及びワイド撮影モードで前記静止画像及び前記動画像を撮影可能なものであり、
前記動画像結合手段が、前記撮影モード毎に前記動画像を結合するものであることが好ましい。

本発明の動画像編集方法は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
予め所定時間を設定し、
前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
該検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする。

また本発明の動画像編集方法においては、前記検索された静止画像の中から顔を検出し、
該顔が検出された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出してもよい。

また本発明の動画像編集方法においては、前記検索された静止画像の中から顔を検出し、
該顔が検出された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
該抽出された動画像の中から顔を検出し、
該検出された顔が、対応する前記静止画像の中から検出された顔と同一の顔であるか否かを判断し、
同一の顔であると判断された前記動画像のみを前記抽出してもよい。

また本発明の動画像編集方法においては、顔が検出された静止画像と顔が検出されていない静止画像とで、前記所定時間を異なる長さに設定することが好ましい。

また本発明の第２の動画像編集方法は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
予め撮影時間間隔を設定し、
前記記録手段に記録された前記画像から全ての前記静止画像を検索すると共に前記設定した撮影時間間隔毎に該撮影時間間隔内に撮影された前記静止画像の枚数をカウントし、
該カウントされた前記静止画像の枚数に応じて長さを変更して時間を設定し、
前記検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記設定された時間内に撮影された前記動画像を抽出し、
該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする。

また本発明の第３の動画像編集方法は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
該検索された静止画像の撮影シーンを認識し、
該認識されたシーンに対応させて時間を設定し、
前記検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記設定された時間内に撮影された前記動画像を抽出し、
該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする。

また本発明の第４の動画像編集方法は、静止画像及び動画像を撮影可能な撮影手段と、
該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
予め所定時間を設定し、
前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
該検索された静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出し、
該算出された時間間隔が所定の閾値よりも小さいときに、前記２つの静止画像の撮影時刻を含む前記時間間隔内の撮影時刻を動画像抽出期間に設定し、
該設定された動画像抽出期間内に撮影された前記静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
該抽出した２つ以上の前記動画像を、連続する前記動画像抽出期間毎に結合して１つの動画像を生成することを特徴とする。

本発明の撮影装置及び動画像編集方法によれば、静止画像及び動画像を撮影可能な撮影手段と、撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、記録手段に記録された画像から全ての静止画像を検索し、検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された動画像を抽出し、抽出された２つ以上の動画像を結合して１つの動画像を生成するので、静止画像の撮影時刻前後に撮影された動画像を抽出するためには動画像の撮影時刻の情報のみが必要となり、各動画像の被写体や音声等の内容の情報をセンシングする必要がないため動画像の結合編集の処理を迅速に行うことができる。

また一般的にユーザが所望する主要なシーンを撮影するときには、静止画像と動画像の両方の撮影を行うことが多いので、静止画像が撮影されたシーンの前後の動画像は主要なシーンの動画像である可能性が高くなる。従って本発明の撮影装置及び動画像編集方法によれば、静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された動画像を抽出して結合するので、主要なシーンの動画像のみを結合編集することができ、例えば観光旅行等に出掛けたときに細切れに撮影された複数の動画像ファイルが撮影装置の記録手段に記録されている場合であっても主要なシーンを逃すことなく結合編集することができる。

以下、本発明にかかる撮影装置の一実施形態を、図面を参照して詳細に説明する。尚、以下の実施の形態では、本発明における撮影装置として静止画像と動画像を撮影可能なデジタルカメラを例に説明するが、本発明の適用範囲はこれに限定されず、例えば、カメラ付き携帯電話、カメラ付きＰＤＡ等、静止画像と動画像を撮影可能な電子撮像機能を備えた他の電子機器に対しても適用可能である。

ここで図１にデジタルカメラ１の機能構成を示すブロック図を示す。本実施形態のデジタルカメラ１は、図１に示す如く、デジタルカメラ１の操作系として、レリーズボタン２７や、図示しないメニュー／ＯＫボタン、ズーム／上下矢印ボタン等の操作内容をＣＰＵ３０に伝える操作部２６が設けられている。

撮影レンズ１０は被写体像を所定の結像面上（カメラ本体内部にあるＣＣＤ）に結像させるためのものであり、撮影レンズ１０を構成するものとして、フォーカスレンズ１０ａ及びズームレンズ１０ｂが設けられている。これらの各レンズは、モータとモータドライバからなるフォーカスレンズ駆動部２０ａ、ズームレンズ駆動部２０ｂによってステップ駆動され、光軸方向に移動可能な構成となっている。フォーカスレンズ駆動部２０ａは、後述するＡＦ処理部３２から出力されるフォーカス駆動量データに基づいてフォーカスレンズ１０ａをステップ駆動する。ズームレンズ駆動部２０ｂは、ズーム／上下矢印ボタン（操作部２６）の操作量データに基づいてズームレンズ１０ｂのステップ駆動を制御する。

絞り１１は、モータとモータドライバとからなる絞り駆動部２１によって駆動される。この絞り駆動部２１は、後述するＡＥ処理部３３から出力される絞り値データに基づいて絞り１１の絞り径の調整を行う。

シャッタ１２は、メカニカルシャッタであり、モータとモータドライバとからなるシャッタ駆動部２２によって駆動される。シャッタ駆動部２２は、レリーズボタン２７の押下により発生する信号と、ＡＥ処理部３３から出力されるシャッタ速度データとに応じてシャッタ１２の開閉の制御を行う。

上記光学系の後方には、撮影素子であるＣＣＤ１３を有している。ＣＣＤ１３は、多数の受光素子がマトリクス状に配置されてなる光電面を有しており、光学系を通過した被写体光が光電面に結像され、光電変換される。光電面の前方には、各画素に光を集光させるためのマイクロレンズアレイ（不図示）と、ＲＧＢ各色のフィルタが規則的に配列されてなるカラーフィルタアレイ（不図示）とが配置されている。

ＣＣＤ１３は、ＣＣＤ駆動部２３から供給される垂直転送クロック信号及び水平転送クロック信号に同期して、画素毎に蓄積された電荷を１ラインずつ読み出してシリアルなアナログ画像信号として出力する。各画素における電荷の蓄積時間、即ち露出時間は、ＣＣＤ制御部５９から与えられる電子シャッタ駆動信号によって決定される。

ＣＣＤ１３が出力するアナログ画像信号は、アナログ信号処理部１４に入力される。このアナログ信号処理部１４は、アナログ画像信号のノイズ除去を行う相関２重サンプリング回路（ＣＤＳ）と、アナログ画像信号のゲイン調整を行うオートゲインコントローラ（ＡＧＣ）と、アナログ画像信号をデジタル画像データに変換するＡ／Ｄコンバータ（ＡＤＣ）とからなる。そしてこのデジタル信号に変換されたデジタル画像データは、画素毎にＲＧＢの濃度値を持つＣＣＤ−ＲＡＷデータである。

タイミングジェネレータ２４は、タイミング信号を発生させるものであり、このタイミング信号がシャッタ駆動部２２、ＣＣＤ駆動部２３、アナログ信号処理部１４に入力されて、レリーズボタン２７の操作と、シャッタ１２の開閉、ＣＣＤ１３の電荷取り込み、アナログ信号処理部１４の処理の同期が取られる。

フラッシュ１５は、レリーズボタン２７が押下され、シャッタ１２が開いている間に、撮影に必要な光を被写体に対して瞬間的に照射するためのものである。フラッシュ制御部２５は、フラッシュ２４の発光動作を制御する。

画像入力コントローラ３１は、上記アナログ信号処理部１４から入力されたＣＣＤ−ＲＡＷデータをフレームメモリ３６に書き込む。このフレームメモリ３６は、画像データに対して後述の各種デジタル画像処理（信号処理）を行う際に使用する作業用メモリであり、例えば、一定周期のバスクロック信号に同期してデータ転送を行うＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）が使用される。

表示制御部３９は、フレームメモリ３６に格納された画像データをスルー画像として液晶モニタ４０に表示させるためのものであり、例えば、輝度（Ｙ）信号と色（Ｃ）信号を一緒にして１つの信号としたコンポジット信号に変換して、液晶モニタ４０に出力する。スルー画像は、撮影モードが選択されている間、所定時間間隔で取得されて液晶モニタ４０に表示される。撮影モードが動画像撮影モードのときには、この液晶モニタ４０に表示されたスルー画像と同じ映像が動画像として記録される。

また表示制御部３９は、外部記録メディア３８に記憶され、メディア制御部３７によって読み出された画像ファイルに含まれる画像データに基づいた画像を液晶モニタ４０に表示させる。

液晶モニタ４０は、撮影の際に被写体確認用のスルー画像が表示され、電子ビューファインダとして機能する他、撮影後の静止画や動画の再生表示、各種設定メニューの表示を行う。

ＡＦ処理部３２は、画像データに基づいて焦点位置を検出して合焦設定値（フォーカス駆動量）を決定し、フォーカス駆動量データを出力する（ＡＦ処理）。焦点位置の検出方式としては、例えば、ピントが合った状態では画像の合焦評価値（コントラスト値）が高くなるという特徴を利用して合焦位置を検出するパッシブ方式や測距センサによって被写体距離を検出し、この測距結果を使用するアクティブ方式等を適用することができる。

ＡＥ処理部３３は、画像データに基づいて被写体輝度（測光値）を測定し、測定した被写体輝度に基づいて絞り値及び露光時間（シャッタスピード）等の露光設定値を決定し、絞り値データ及び露光時間データを出力する（ＡＥ処理）。

ＡＷＢ処理部３４は、画像データに基づいて色温度 を算出し、算出した色温度 に応じて撮影時のホワイトバランスを自動調整する（ＡＷＢ処理）。なお、ＡＷＢ処理部３４は、撮影前でも、撮影後でもホワイトバランスの調整を行うことができる。

画像信号処理部４１は、本画像の画像データに対してガンマ補正処理、輪郭強調（シャープネス）処理、コントラスト処理、ノイズ低減処理等の画質補正処理を施すと共に、ＣＣＤ−ＲＡＷデータを輝度信号であるＹデータと、青色色差信号であるＣｂデータ及び赤色色差信号であるＣｒデータとからなるＹＣデータに変換するＹＣ処理を行う。

なお本画像とは、撮影者によって撮影指示がなされた時、例えばレリーズボタン２７が全押し操作された時にＣＣＤ１３から取り込まれ、アナログ信号処理部１４、画像入力コントローラ３１経由でフレームメモリ３６に格納された画像データによる静止画像や動画像である。本画像の画素数の上限はＣＣＤ１３の画素数によって決定されるが、例えば、撮影者が設定可能な画質設定（フル画素、ハーフ画素、自動画素等の設定）により、記録画素数を変更することができる。一方、スルー画像等の画素数は本画像より少なくてもよく、例えば、本画像の１／１６程度の画素数で取り込まれてもよい。

圧縮／伸長処理部３５は、画像信号処理部４１によって画質補正等の処理が行われた本画像の画像データに対して、静止画像のときにはＪＰＥＧ、動画像のときにはＭＰＥＧ等の圧縮形式で圧縮処理を行って、画像ファイルを生成する。この画像ファイルには、Ｅｘｉｆ形式等に基づいて、撮影日時や、撮影シーン等の付帯情報が格納されたタグが付加される。このとき画像ファイルのヘッダに、この画像ファイルが静止画像のものであるか、動画像のものであるかを関連付けて記録させておく。

またこの圧縮／伸長処理部３５は、再生モードにおいては外部記録メディア３８から圧縮された画像ファイルを読み出し、伸長処理を行う。伸長後の画像データは表示制御部３９に出力され、表示制御部３９は画像データに基づいた画像を液晶モニタ４０に表示する。

メディア制御部３７は、メモリカード等の外部記録メディア３８が充填されるための充填口であり外部記録メディア３８が充填されるとデータの読み取り／書き込みを行うメディアスロットに相当し、外部記録メディア３８に記憶された画像ファイル等の読み出し、又は画像ファイルの書き込みを行う。

内部メモリ４２は、デジタルカメラ１において設定される各種定数、及び、ＣＰＵ３０が実行するプログラム等を格納する。

なお本実施形態では、上記外部記録メディア３８が、撮影された静止画像や動画像を撮影毎に撮影日時と共に記録する、つまり撮影日時の情報が格納されたタグが付加された画像ファイルを記録する記録手段として機能するが、本発明においては内部メモリ４２を記録手段として機能させてもよい。なお動画像の撮影日時の情報には、撮影開始時刻と撮影終了時刻が含まれるものとする。

時計部４３は、本画像が撮影された撮影日時を計時する。

抽出時間設定部（時間設定手段）４４は、後述する動画像抽出部４６が作動する時間（所定時間）Ｔを設定する。なお時間Ｔの設定については後で詳細に説明する。

静止画像検索部（静止画像検索手段）４５は、外部記録メディア３８に記録された画像ファイルから静止画像を全て検索する。

動画像抽出部（動画像抽出手段）４６は、静止画像検索部４５によって検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の時間Ｔ内に撮影された動画像を抽出する。

動画像結合部（動画像結合手段）４７は、動画像抽出部４６によって抽出された動画像が２つ以上あるときに、この２つ以上の動画像を結合して１つの動画像を生成する。

なお本実施形態では静止画像検索部４５、動画像抽出部４６、動画像結合部４７を合わせて動画編集部４８という。

ＣＰＵ３０は、操作部の２６による操作や各機能ブロックからの信号に応じて、デジタルカメラ１の本体各部を制御する。

データバス５０は、画像入力コントローラ３１、各種処理部１４、３２〜３５、４１、フレームメモリ３６、各種制御部３７、３９、内部メモリ４２、時計部４３、抽出時間設定部４４、静止画像検索部４５、動画像抽出部４６、動画像結合部４７及びＣＰＵ３０に接続されており、このデータバス５０を介して各種信号、データの送受信が行われる。

このように構成されたデジタルカメラ１では、ユーザが操作部２６を操作することにより撮影モードが静止画像撮影モード又は動画像撮影モードに設定される。そして静止画像撮影モードのときは、ユーザが液晶モニタ４０に表示されたスルー画像で被写体の構図等を確認し、レリーズボタン２７を半押し操作するとＡＦ処理及びＡＥ処理が行われ、レリーズボタン２７が全押し操作されるとＡＦ処理及びＡＥ処理によって出力されたデータに基づいて撮影が行われ、該撮影によって取得された画像データが、静止画像の圧縮方式で圧縮されて静止画像として外部記録メディア３８に記録される。

また動画像撮影モードのときは、レリーズボタン２７が全押し操作されると、液晶モニタ４０に表示されるスルー画像、すなわちフレームメモリ３６に格納され、輝度（Ｙ）信号と色（Ｃ）信号を一緒にして１つの信号としたコンポジット信号が、動画像の圧縮方式で圧縮されて動画像として外部記録メディア３８に記憶され、再度レリーズボタン２７が全押し操作されると前記コンポジット信号の圧縮処理が停止されて動画像の記録が停止する。デジタルカメラ１では上記のようにして静止画像と動画像が撮影及び記録される。

次に、以上の構成のデジタルカメラ１における動画像の編集方法について、図面を参照して詳細に説明する。図２はデジタルカメラ１の動画像編集処理のフローチャート、図３は外部記録メディア３８に記録された画像ファイルの時系列を示す図である。なおデジタルカメラ１には予め撮影された動画像データや静止画像データの複数の画像ファイルが記録された外部記録メディア３８が挿入されているものとする。

デジタルカメラ１は、図２に示す如く、まず抽出時間設定部４４が、例えばユーザによる操作部２６からの入力に基づいて、動画像抽出部４６が動画像を抽出する時間Ｔ（例えば５分、１０分等）を予め設定する（ステップＳ１）。なおこの時間Ｔはユーザが操作部２６を操作することによって任意に変更できる。

次に静止画像検索部４５が、外部記録メディア３８に記録された画像ファイルから全ての静止画像を検索する（ステップＳ２）。このとき静止画像は、画像ファイルのヘッダに記録された静止画像であるか動画像であるかの情報から検索できるので、検索処理を素早く行うことが可能である。なお静止画像の画像ファイルと動画像の画像ファイルの判断は、例えば画像ファイルの拡張子の違いに基づいて行ってもよいし、画像ファイルの録画時間、フレームレート等の情報に基づいて行ってもよいし、一般的に使用されている公知の方法を使用することができる。

次にＣＰＵ３０が、静止画像検索部４５により静止画像が検索されたか否か、つまり外部記録メディア３８に静止画像の画像ファイルがあるか否かを判別する（ステップＳ３）。静止画像がある場合（ステップＳ３；ＹＥＳ）には、動画像抽出部４６が、各静止画像が撮影時刻を含む前後の前記時間Ｔ内に撮影された動画像を抽出する（ステップＳ４）。

ここで動画像抽出部４６による動画像の抽出方法について詳細に説明する。ステップＳ２にて静止画像検索部４５が、例えば図３に示す如く、静止画像として撮影時刻ｔ１に撮影された静止画像Ｐ１、撮影時刻ｔ２に撮影された静止画像Ｐ２、撮影時刻ｔ３に撮影された静止画像Ｐ３を検索したときには、静止画像Ｐ１、Ｐ２、Ｐ３の各々に対して、各静止画像Ｐ１、Ｐ２、Ｐ３の撮影時刻ｔ１、ｔ２、ｔ３を含む前後の時間Ｔの間に撮影された動画像を抽出する。このとき時間Ｔは、各撮影時刻ｔ１、ｔ２、ｔ３がそれぞれ中央時間に位置するように設定する。

なお図３では、撮影時刻ｔ１を含む時間Ｔは撮影時刻ｔ１の以前の時間の一部が、撮影時刻ｔ３を含む時間Ｔは撮影時刻ｔ３以降の時間の一部が図示されていないが、本実施形態においては便宜上、図示されていない時間では動画像は抽出されていないものとして以下説明する。

すると静止画像Ｐ１に対しては動画像Ｍ１、Ｍ２、Ｍ３、Ｍ４、静止画像Ｐ２に対しては動画像Ｍ５、Ｍ６、Ｍ７、Ｍ８、静止画像Ｐ３に対しては動画像Ｍ８、Ｍ９、Ｍ１０がそれぞれ抽出される。このとき動画像Ｍ８が静止画像Ｐ２とＰ３の両方に対して抽出されたことになるが、このように１つの動画像Ｍが複数の静止画像Ｐに対して抽出されたときには、いずれか１つの静止画像Ｐについてのみ動画像Ｍを抽出し、最終的には動画像Ｍ１〜Ｍ１０を１つずつ抽出する。

そして図２に示す如く、ステップＳ４にて動画像抽出部４６が上述したように動画像の抽出を行うと、次にＣＰＵ３０は動画像が２つ以上抽出されたか否かを判別し（ステップＳ５）、動画像が２つ以上抽出されていると（ステップＳ５；ＹＥＳ）、動画像結合部４７が抽出された２つ以上の動画像を結合して１つの動画像を生成し、結合された動画像を圧縮／伸長処理部３５及びメディア制御部３７を介して外部記録メディア３８に記録する（ステップＳ６）。

つまり図３に示す如く、動画像抽出部４６により上述のようにして抽出された動画像Ｍ１〜Ｍ１０を結合することにより１つの動画像Ｍ１００を生成して、この動画像Ｍ１００を記録する。なお結合された動画像の画像ファイルのヘッダに、各動画像の撮影時刻等の結合情報を記録しておいてもよい。こうすることにより、例えば結合前の動画像を外部記録メディア３８から消去してしまっても、結合された動画像から元の動画像を復元することができる。

このようにデジタルカメラ１では、静止画像Ｐの撮影時刻ｔ前後に撮影された動画像Ｍを抽出するために動画像Ｍの撮影時刻の情報のみが必要となり、各動画像Ｍの被写体や音声等の内容の情報をセンシングする必要がないため動画像Ｍの結合編集の処理を迅速に行うことができる。

また一般的にユーザが所望する主要なシーンを撮影するときには、静止画像Ｐと動画像Ｍの両方の撮影を行うことが多いので、静止画像Ｐが撮影されたシーンの前後の動画像Ｍは主要なシーンの動画像である可能性が高くなる。従って静止画像Ｐの撮影時刻ｔを含む前後の時間Ｔ内に撮影された動画像Ｍを抽出して結合することにより、主要なシーンの動画像Ｍのみを結合編集することができ、例えば観光旅行等に出掛けたときに細切れに撮影された複数の動画像ファイルが撮影装置の外部記録メディア３８に記録されている場合であっても主要なシーンを逃すことなく結合編集することができる。

一方、図２に示す如く、ステップＳ３にてＣＰＵ３０が、静止画像Ｐがないと判別した場合（ステップＳ３；ＮＯ）には、ユーザが所望する主要なシーンの動画像Ｍは撮影されていないと判断して処理を終了する。またステップＳ５にてＣＰＵ３０が動画像Ｍが２つ以上抽出されていないと判別した場合（ステップＳ５；ＮＯ）には、動画像Ｍが抽出されていないか、若しくは動画像Ｍが１つしか抽出されていないので、動画像Ｍを結合する必要がないため処理を終了する。

以上のようにしてデジタルカメラ１による動画像編集処理を行う。

次に本発明にかかる第２の実施形態のデジタルカメラ１−２について、以下図面を参照して詳細に説明する。図４はデジタルカメラ１−２の機能構成を示すブロック図、図５はデジタルカメラ１−２の動画像編集処理のフローチャートである。なお図４においては図１のデジタルカメラ１の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。また図５において図２のフローチャートと同じ処理は同じステップ番号で示して説明を省略し、異なる処理についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−２は、図１のデジタルカメラ１の機能構成にさらに顔検出部（顔検出手段）４９を備えたものである。顔検出部４９は、静止画像検索部４５によって検索された各静止画像について、それぞれ静止画像データから人物の顔を検出する。具体的には、顔に含まれる顔の特徴を有する領域（例えば肌色を有する、目を有する、顔の形状を有する等）を顔領域として検出するが、これに限定されるものではなく、一般的に使用されている公知の方法を使用することができる。

また本実施形態の静止画検索部４５−２は、顔検出部４９により顔が検出された静止画像を検索する。

次に、以上の構成のデジタルカメラ１−２における動画像の編集方法について説明する。デジタルカメラ１−２は、図５に示す如く、ステップＳ２にて静止画像検索部４５−２が検索した全ての静止画像について、顔検出部４９が静止画像毎に顔の検出を行い（ステップＳ１０）、静止画像検索部４５−２は顔検出部４９によって顔が検出された静止画像を検索する。

次にＣＰＵ３０は、静止画像検索部４５−２が顔が検出された静止画像を検索したか否かを判別し（ステップＳ１１）、顔が検出された静止画像が検索されている場合（ステップＳ１１；ＹＥＳ）には、動画像抽出部４６が、静止画像検索部４５−２によって検索された各静止画像すなわち顔が検出された各静止画像の撮影時刻を含む前後の前記時間Ｔ内に撮影された動画像を抽出する（ステップＳ１２）。

このように人の顔が撮影された静止画像の撮影時刻前後に撮影された動画像を抽出することにより、人の顔が撮影されるシーンはユーザが所望する主要シーンである可能性がより高く、人の顔が撮影されたシーンの前後の動画像も、ユーザが所望するであろう人の顔が撮影されたシーンである可能性がより高いので、人の顔が撮影されている可能性の高い、より主要なシーンのみを結合編集することができる。

次に本発明にかかる第３の実施形態のデジタルカメラ１−３について、以下図面を参照して詳細に説明する。図６はデジタルカメラ１−３の機能構成を示すブロック図、図７はデジタルカメラ１−３の動画像編集処理のフローチャートである。なお図６においては図４のデジタルカメラ１−２の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。また図７において図５のフローチャートと同じ処理は同じステップ番号で示して説明を省略し、異なる処理についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−３の顔検出部４９−３は、静止画像だけではなく動画像の画像データからも人物の顔を検出する。動画像における顔の検出は、動画像を構成するフレーム画像（静止画像）毎に行う。

またデジタルカメラ１−３は、図４のデジタルカメラ１−２の機能構成にさらに、顔判断部（顔判断手段）５０を備えている。顔判断部５０は動画像の中から検出された顔が、静止画像検索部４５−２によって検索された静止画像から検出された顔と同一の顔であるか否かを判断するものである。同一の顔であるか否かの判断は、例えば検出された顔から目の位置、口の位置等の特徴点を、静止画像で検出された顔と動画像で検出された顔の両方から検出し、互いに検出した特徴点を照合することにより行う。ここで「特徴点」とは個体（個人、個物）によってそれぞれ異なる特徴を持つものをいう。なお顔判断部５０による顔の判断は、例えば特開２００５−８４９７９号公報に記載の顔認証方法を使用することができる。

またデジタルカメラ１−３の動画像抽出部４６−３は、静止画像検索部４５によって検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の時間Ｔ内に撮影された動画像を抽出し、この抽出した動画像のうち、顔検出部４９−３によって顔が検出され、かつこの検出された顔が対応する静止画像から検出された顔と同一の顔であると顔判断部５０によって判断された動画像を最終的に抽出する。

次に、以上の構成のデジタルカメラ１−３における動画像の編集方法について説明する。デジタルカメラ１−３は、図７に示す如く、動画像抽出部４６−３が、静止画像検索部４５−２によって検索された各静止画像すなわち顔が検出された各静止画像の撮影時刻を含む前後の時間Ｔ内に撮影された動画像を抽出すると（ステップＳ１２）、顔検出部４９−３がこの抽出された各動画像の画像データから顔を検出する（ステップＳ２０）。

次に顔判断部５０が、静止画像から検出された顔と、この静止画像の撮影時刻を含む前後の時間Ｔ内に撮影された動画像から検出された顔とが同一の顔であるかを動画像毎に判断する（ステップＳ２１）。このとき動画像を構成する複数のフレーム画像のうち、少なくとも１つのフレーム画像から検出された顔が前記静止画像から検出された顔と同一であれば、同一の顔が検出された動画像として動画像抽出部４６−３が最終的に抽出する。

そしてＣＰＵ３０は、同一の顔が検出された動画像が２つ以上抽出されたか否かを判別し（ステップＳ２２）、２つ以上抽出されている場合（ステップＳ２２；ＹＥＳ）には、動画像結合部４７が抽出された２つ以上の動画像を結合して１つの動画像を生成し、結合された動画像を圧縮／伸長処理部３５及びメディア制御部３７を介して外部記録メディア３８に記録する（ステップＳ６）。

このように人の顔が撮影された静止画像の撮影時刻前後に撮影された動画像のうち静止画像から検出された顔と同一の顔が検出された動画像のみを抽出して結合するので、例えば自分の子供等、ユーザが所望する人物を主要シーンとして撮影した静止画像を記録してから、動画像の撮影を行えば、結合した動画像を自分の子供等、ユーザが所望する主要シーンの多いものにすることができる。

なお本実施形態では、外部記録メディア３８に記憶された画像ファイルの動画像データから顔を検出したが、本発明はこれに限られるものではなく、たとえば動画像を撮影するときに、撮影と並行して随時フレーム画像毎に顔検出部４９−３により顔の検出を行い、この検出結果をタグ情報として画像ファイルに付加しておいてもよい。こうすることにより動画像抽出部４６による動画像の抽出を迅速に行うことができるので、動画像の結合処理を速くすることができる。

なお顔判断部５０が、検出された顔から特徴点の検出を行い、この検出結果を上記タグ情報に加えておくことにより、動画像の結合処理をより速くすることができる。

次に本発明にかかる第４の実施形態のデジタルカメラ１−４について、以下図面を参照して詳細に説明する。図８はデジタルカメラ１−４の機能構成を示すブロック図、図９はデジタルカメラ１−４の動画像編集処理のフローチャート、図１０はデジタルカメラ１−４の外部記録メディア３８に記録された画像ファイルの時系列を示す図である。なお図８においては図４のデジタルカメラ１−２の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。また図９において図７のフローチャートと同じ処理は同じステップ番号で示して説明を省略し、異なる処理についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−４は、図８に示す如く、抽出時間設定部４４−４が図４のデジタルカメラ１−２の抽出時間設定部４４とは異なるものであり、抽出時間設定部４４−４は、顔検出部４９により顔が検出された静止画像と顔が検出されていない静止画像とで、動画像を抽出する時間Ｔを異なる長さに設定するものである。なお本実施形態の静止画像検索部４５は、図１のデジタルカメラ１と同様に外部記録メディア３８に記録された画像ファイルから静止画像を全て検索する。

次に、以上の構成のデジタルカメラ１−４における動画像の編集方法について説明する。デジタルカメラ１−４は、図９に示す如く、まず抽出時間設定部４４−４が上述のようにして顔が検出されていない静止画像に対する動画像の抽出時間Ｔａと顔が検出された静止画像に対する動画像の抽出時間Ｔｂを設定する（ステップＳ１’）。

動画像抽出時間Ｔａ、Ｔｂの設定は、図１０に示す如く、例えば静止画像検索部４５により検索された静止画像Ｐ１ａ、Ｐ２ｂ、Ｐ３ａのうち、顔検出部４９によって顔が検出された静止画像が静止画像Ｐ２ｂ、顔が検出されていない静止画像が静止画像Ｐ１ａ、Ｐ３ａである場合、静止画像Ｐ２ｂに対して動画像を抽出する時間Ｔｂを、静止画像Ｐ１ａ、Ｐ３ａに対して動画像を抽出する時間Ｔａよりも長く設定する。

そして静止画像検索部４５が検索した静止画像のうち、顔が検出された静止画像の場合（ステップＳ１１’；ＹＥＳ）には、動画像抽出部４６が、顔が検出された静止画像の前後の時間Ｔｂ内に撮影された動画像、すなわち図１０の動画像Ｍ５〜Ｍ９を抽出する（ステップＳ１２’）。

一方、顔が検出されていない静止画像の場合（ステップＳ１１’；ＮＯ）には、動画像抽出部４６が、顔が検出されていない静止画像の前後の時間Ｔａ内に撮影された動画像、すなわち図１０の動画像Ｍ１〜Ｍ４、Ｍ８〜Ｍ１０を抽出する（ステップＳ１３）。

このように静止画像の中に顔があるときには、顔がないときよりも動画像の抽出時間Ｔを長くすることにより、ユーザが所望するであろう人の顔が撮影されたシーンである可能性が高い動画像を多く抽出することができるので、人の顔が撮影されている可能性の高い、より主要なシーンのみを結合編集することができる。

次に本発明にかかる第５の実施形態のデジタルカメラ１−５について、以下図面を参照して詳細に説明する。図１１はデジタルカメラ１−５の機能構成を示すブロック図、図１２はデジタルカメラ１−５の動画像編集処理のフローチャート、図１３はデジタルカメラ１−５の外部記録メディア３８に記録された画像ファイルの時系列を示す図である。なお図１１においては図８のデジタルカメラ１−４の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。また図１２において図９のフローチャートと同じ処理は同じステップ番号で示して説明を省略し、異なる処理についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−５は、図１１に示す如く、図８の顔検出部４９を備えずに、カウント部（カウント手段）５１を備えている。カウント部５１は、予め設定された撮影時間間隔内に撮影された静止画像の枚数をカウントする。

また本実施形態の抽出時間設定部４４−５は、図８のデジタルカメラ１−４の抽出時間設定部４４−４とは異なるものであり、抽出時間設定部４４−５は、カウント部５１によりカウントされた静止画像の枚数に応じて、動画像を抽出する時間Ｔの長さを変更する。本実施形態では、枚数が多い方が、枚数が少ないよりも動画像を抽出する時間Ｔを長く設定する。なお本実施形態の静止画像検索部４５は、図１のデジタルカメラ１と同様に外部記録メディア３８に記録された画像ファイルから静止画像を全て検索する。

次に、以上の構成のデジタルカメラ１−５における動画像の編集方法について説明する。デジタルカメラ１−５は、図１２に示す如く、まずカウント部５１が図１３に示すように一定の撮影時間間隔Ｕを設定すると共に抽出時間設定部４４−５が上述のようにしてカウント部５１によりカウントされた静止画像の枚数が多いほど動画像の抽出時間Ｔが長くなるように、例えば下記式（１）を設定する（Ｓ１’’）。

抽出時間Ｔｉ＝枚数ｉ×定数Ｔａ・・・式（１）
そして外部記録メディア３８に記録された画像ファイルから全ての静止画像を検索すると共に（ステップＳ２）、カウント部５１が上記撮影時間間隔Ｕ毎に静止画像の枚数をカウントする（ステップＳ１４）。

撮影時間間隔Ｕ毎に静止画像の枚数ｉがカウントされると、抽出時間設定部４４−５が、このカウントした静止画像の枚数ｉに応じて、すなわちカウントした静止画像の枚数ｉの値を上記式（１）に代入して、撮影時間間隔Ｕ毎に動画像を抽出する抽出時間Ｔｉを決定する（ステップＳ１５）。

例えば図１３に示す如く、撮影時刻が早い撮影時間間隔Ｕ毎に、静止画像Ｐが６枚、２枚、３枚の順でカウントされた場合には、静止画像Ｐが６枚の撮影時間間隔Ｕ内では動画像を抽出する抽出時間は抽出時間Ｔ１、静止画像Ｐが２枚の撮影時間間隔Ｕ内では動画像を抽出する抽出時間は抽出時間Ｔ３、静止画像Ｐが３枚の撮影時間間隔Ｕ内では動画像を抽出する抽出時間は抽出時間Ｔ２とし、Ｔ１、Ｔ２、Ｔ３はＴ１＞Ｔ２＞Ｔ３を満たすものとする。

そして動画像抽出部４６が、撮影時間間隔Ｕ毎に、撮影時間間隔Ｕ内で撮影された各静止画像の撮影時刻前後の時間Ｔｉ内に撮影された動画像を抽出する（ステップＳ１６）。

このように一定の期間内で静止画像が多く撮影されているときには、その静止画像の撮影シーンがより重要なシーンである可能性が高くなるので、重要なシーンである可能性が高い動画像を多く抽出するために、静止画像が多く撮影されている期間では動画像の抽出時間Ｔｉが長くなるように設定する。これにより、より重要なシーンのみを結合編集することができる。

次に本発明にかかる第６の実施形態のデジタルカメラ１−６について、以下図面を参照して詳細に説明する。図１４はデジタルカメラ１−６の機能構成を示すブロック図、図１５はデジタルカメラ１−６の動画像編集処理のフローチャートである。なお図１４においては図１１のデジタルカメラ１−５の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。また図１５において図１２のフローチャートと同じ処理は同じステップ番号で示して説明を省略し、異なる処理についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−６は、図１４に示す如く、図１１のカウント部５１を備えずにシーン認識部（シーン認識手段）５２を備えている。シーン認識部５２は、デジタルカメラ１−６による静止画像の撮影時に設定された撮影のシーンモードを検出する。シーンモードは、ユーザが操作部２６を操作することにより予め設けられた複数のシーンモードから１つのモードを選択することができ、撮影シーン毎に最適な、撮影ダイナミックレンジや撮影感度、シャッタ速度等の値が自動的に設定される。このシーンモードの情報は、撮影された静止画像が画像ファイルとして記録されるときに、タグ情報に追加されて記録される。シーン認識部５２はこのタグ情報に基づいて撮影のシーンモードを認識する。

なお本発明においては、シーン認識部５２は上記に限られるものではなく、ＡＦ処理部３２、ＡＥ処理部３３、ＡＷＢ処理部３４によって検出された被写体距離データ、測光値データ、色温度データ及び顔検出結果等に基づいて画像データ中の撮影シーンを認識してもよいし、別の公知の認識方法を使用することもできる。

また本実施形態の抽出時間設定部４４−６は、図１１のデジタルカメラ１−５の抽出時間設定部４４−５とは異なるものであり、抽出時間設定部４４−６は、シーン認識部５２によって認識されたシーンモードに対応させて動画像を抽出する時間Ｔを設定する。なお本実施形態の静止画像検索部４５は、図１のデジタルカメラ１と同様に外部記録メディア３８に記録された画像ファイルから静止画像を全て検索する。

次に、以上の構成のデジタルカメラ１−６における動画像の編集方法について説明する。下記表１に、シーンモードと動画像の抽出時間Ｔの設定時間との対応を示す。デジタルカメラ１−６は、図１５に示す如く、まず抽出時間設定部４４−６が予め表１に示すようにシーンモード毎に時間を設定する（ステップＳ１’’’）。

スポーツモードやパーティモード、人物モードのときには、例えば自分の子供のサッカーの試合や、お誕生日会等で撮影するときに選択されるモードであるため、このモードで撮影された静止画像の撮影時刻の前後には、子供がたくさん撮影されている可能性が高いので、時間Ｔ１を長めに設定し、花火モードや風景モードのときには、上記モードと比較して被写体の動きがあまり激しくない可能性が高いので、このモードで撮影された静止画像の撮影時刻の前後には、動画像が撮影されている可能性が低いので時間Ｔ２は短めに設定する。なおこの設定時間Ｔ１、Ｔ２の値はユーザが任意に変更することができる。

そして外部記録メディア３８に記録された画像ファイルから全ての静止画像を検索すると共に（ステップＳ２）、モード認識部５２が、各静止画像が撮影されたシーンモードを認識する（ステップＳ１７）。次に認識されたシーンモードに基づいて、表１の対応表からシーンモード毎に動画像抽出時間Ｔ（モード）を決定する（ステップＳ１８）。

動画像抽出時間Ｔ（モード）が決定されると、次に動画像抽出部４６がシーンモード毎に静止画像の撮影時刻前後の時間Ｔ(モード)内に撮影された動画像を抽出する（ステップＳ１９）。

このように撮影のシーン毎に動画像の抽出時間Ｔ（モード）の値を変更することにより、ユーザが所望するであろう主要なシーンの動画像を多く抽出できる可能性が高くなるとともにシーンに連動した主要なシーンのみを結合編集することができる。

次に本発明にかかる第７の実施形態のデジタルカメラ１−７について、以下図面を参照して詳細に説明する。図１６はデジタルカメラ１−７の機能構成を示すブロック図、図１７はデジタルカメラ１−７の動画像編集処理のフローチャート、図１８はデジタルカメラ１−７の外部記録メディア３８に記録された画像ファイルの時系列を示す図である。なお図１６においては図１のデジタルカメラ１の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−７は、図１６に示す如く、図１のデジタルカメラ１の機能構成にさらに時間間隔算出部（時間間隔算出手段）５３が備えられている。時間間隔算出部５３は静止画像検索部４５により検索された２つ以上の静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出する。

また本実施形態の動画像抽出部４６−７は、上記時間間隔算出部５３により算出された時間間隔が所定の閾値よりも大きいときに、この時間間隔の撮影時間内に撮影された動画像を抽出する。

次に、以上の構成のデジタルカメラ１−７における動画像の編集方法について説明する。デジタルカメラ１−７は、図１７に示す如く、まず抽出時間設定部４４が、例えばユーザによる操作部２６からの入力に基づいて、動画像抽出部４６−７が動画像を抽出する時間Ｔ（例えば５分、１０分等）を予め設定する（ステップＳ３０）。なおこの時間Ｔはユーザが操作部２６を操作することによって任意に変更できる。

次に静止画像検索部４５が、外部記録メディア３８に記録された画像ファイルから全ての静止画像を検索する（ステップＳ３１）。このとき静止画像は、画像ファイルのヘッダに記録された静止画像であるか動画像であるかの情報から検索することができるので、検索処理をすばやく行うことが可能となる。なお静止画像の画像ファイルと動画像の画像ファイルの判断は、例えば画像ファイルの拡張子の違いに基づいて行ってもよいし、画像ファイルの録画時間、フレームレート等の情報に基づいて行ってもよいし、一般的に使用されている公知の方法を使用することができる。

次にＣＰＵ３０が、静止画像検索部４５により検索された静止画像が２つ以上あるか否か、つまり外部記録メディア３８に２つ以上の静止画像の画像ファイルがあるか否かを判別する（ステップＳ３２）。静止画像が２つ以上ある場合（ステップＳ３２；ＹＥＳ）には、時間間隔算出部５３が隣り合う静止画像の時間間隔をそれぞれ算出する（ステップＳ３３）。

そしてＣＰＵ３０が、時間間隔算出部５３により算出された時間間隔が所定の閾値よりも大きいか否かを判別し（ステップＳ３４）、大きい場合（ステップＳ３４；ＹＥＳ）には、動画像抽出部４６が、この時間間隔における撮影時間内に撮影された動画像を抽出する（ステップＳ３５）。

ここで動画像抽出部４６による動画像の抽出方法について詳細に説明する。ステップＳ２にて静止画像検索部４５が、例えば図１８に示す如く、静止画像として撮影時刻ｔ１に撮影された静止画像Ｐ１、撮影時刻ｔ２に撮影された静止画像Ｐ２をそれぞれ検索すると、時間間隔算出部５３は、撮影時刻ｔ１と撮影時刻ｔ２の間の時間間隔Ｑを算出する。この時間間隔Ｑが例えば、１週間や１か月等、予め任意に設定した閾値よりも大きい値のときには、この時間間隔Ｑの撮影時間内すなわち撮影時刻ｔ１から撮影時刻ｔ２の間の期間には静止画像が撮影されていないことから、図１８に示す如く、静止画像Ｐ１と静止画像Ｐ２の撮影時刻の前後の時間Ｔ内で動画像の抽出を行ったとしても、撮影時刻ｔ１や撮影時刻ｔ２から時間Ｔ／２以上離れた時刻で撮影された動画像である動画像Ｍ５〜Ｍ７を値抽出することができない。

撮影時刻ｔ１から撮影時刻ｔ２の間の期間で動画像のみが多く撮影されている場合には、多くの動画像が抽出されないために、結合された動画像には主要なシーンが含まれていない虞がある。

そこで本実施形態のデジタルカメラ１−７では、この時間間隔Ｑが予め任意に設定した閾値よりも大きい値のときに、この時間間隔Ｑにおける撮影時間内に撮影された動画像である動画像Ｍ２〜Ｍ９（図１８参照）を全て抽出するので、例えば動画像の撮影のみを繰り返し行っていた場合であっても、動画像を漏れなく抽出して結合することができる。

一方、ステップＳ３２にて静止画像が２つ以上ない場合（ステップＳ３２；ＮＯ）には、ＣＰＵ３２はさらに静止画像があるか否かを判別する（ステップＳ３６）。静止画像が１つもない場合（ステップＳ３６；ＮＯ）には、主要なシーンが撮影された動画像はないと判断して処理を終了する。なお本実施形態では静止画像がないときには処理を終了したが、外部記録メディア３８に記録された画像ファイルが全て動画像データの画像ファイルであると判断して、全ての画像データを結合するようにしてもよい。

またステップＳ３６にて、静止画像が１つある場合（ステップＳ３６；ＹＥＳ）には、この静止画像はユーザが所望する主要なシーンが撮影されている可能性が高いので、この静止画像の撮影時刻の前後の時間Ｔの間に撮影された動画像を抽出する（ステップＳ３７）。このとき時間Ｔは、各撮影時刻ｔ１、ｔ２（図１８参照）がそれぞれ中央時間に位置するように設定する。すると静止画像Ｐ１に対しては動画像Ｍ１、Ｍ２、Ｍ３、Ｍ４、静止画像Ｐ２に対しては動画像Ｍ８、Ｍ９、Ｍ１０がそれぞれ抽出される。

なお図１８では、撮影時刻ｔ１を含む時間Ｔは撮影時刻ｔ１の以前の時間の一部が、撮影時刻ｔ２を含む時間Ｔは撮影時刻ｔ２以降の時間の一部が図示されていないが、本実施形態においては便宜上、図示されていない時間では動画像は抽出されていないものとする。

以上のように動画像抽出部４６が動画像を抽出すると、図１８では動画像Ｍ２〜Ｍ４及び動画像Ｍ８、Ｍ９が、静止画像Ｐ１又は静止画像Ｐ２に対する動画像抽出時間Ｔと前記時間間隔Ｑの両方において抽出されたことになるが、このように１つの動画像Ｍが重複して抽出されたときには、いずれか１つの動画像Ｍのみを抽出し、最終的には動画像Ｍ２〜Ｍ４及び動画像Ｍ８、Ｍ９を１つずつ抽出する。

そして図１７に示す如く、ステップＳ３５又はステップＳ３７にて動画像抽出部４６−７が上述したように動画像の抽出を行うと、次にＣＰＵ３０は動画像が２つ以上抽出されたか否かを判別し（ステップＳ３８）、動画像が２つ以上抽出されていると（ステップＳ３８；ＹＥＳ）、動画像結合部４７が抽出された２つ以上の動画像を結合して１つの動画像を生成し、結合された動画像を圧縮／伸長処理部３５及びメディア制御部３７を介して外部記録メディア３８に記録する（ステップＳ３９）。

つまり図１８に示す如く、動画像抽出部４６−７により上述のようにして抽出された動画像Ｍ１〜Ｍ１０を結合することにより１つの動画像Ｍ１００を生成して、この動画像Ｍ１００を記録する。

なお本実施形態のデジタルカメラ１−７においては、上述した第２の実施形態のデジタルカメラ１−２の機能を適用することができる。この場合、静止画像検索部４５は、顔が検出された静止画像を検索し、時間間隔算出部５３は隣り合う、顔が検出された２つの静止画像の撮影時刻の時間間隔Ｑを検出する。

また本実施形態のデジタルカメラ１−７においては、上述した第３の実施形態のデジタルカメラ１−３の機能を適用することができる。この場合、静止画像検索部４５は、顔が検出された静止画像を検索し、時間間隔算出部５３は隣り合う、顔が検出された２つの静止画像の撮影時刻の時間間隔Ｑを検出して、この時間間隔Ｑが所定の閾値よりも大きい場合に、動画像抽出部４６が、この時間間隔Ｑにおける撮影時間内に撮影された動画像を抽出し、抽出された動画像のうち前記２つの静止画像で検出された顔と同一の顔がある動画像のみを最終的に抽出する。

次に本発明にかかる第８の実施形態のデジタルカメラ１−８について、以下図面を参照して詳細に説明する。図１９はデジタルカメラ１−８の機能構成を示すブロック図、図２０Ａ、図２０Ｂはデジタルカメラ１−８の動画像編集処理のフローチャート、図２１はデジタルカメラ１−８の外部記録メディア３８に記録された画像ファイルの時系列を示す図である。なお図１９においては図１のデジタルカメラ１の機能構成と同じ箇所は同符号で示して説明を省略して異なる箇所についてのみ詳細に説明する。

本実施形態のデジタルカメラ１−８は、図１９に示す如く、図１のデジタルカメラ１の機能構成にさらに時間間隔算出部（時間間隔算出手段）５３と期間設定部（期間設定手段）５４が備えられている。時間間隔算出部５３は静止画像検索部４５により検索された２つ以上の静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出し、期間設定部５４はこの算出された時間間隔の値が所定の閾値よりも小さいときに、前記２つの静止画像の撮影時刻を含む時間間隔内の撮影時刻を動画像抽出期間に設定する。

また本実施形態の動画像抽出部４６−８は、上記期間設定部５４によって設定された動画像抽出期間内に撮影された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の所定時間内に撮影された動画像を抽出する。

また本実施形態の動画像結合部４７−８は、上記動画像抽出部４６−８によって抽出された２つ以上の動画像を、連続する動画像抽出期間毎に結合して１つの動画像を生成する。

次に、以上の構成のデジタルカメラ１−８における動画像の編集方法について説明する。デジタルカメラ１−８は、図２０Ａに示す如く、まず抽出時間設定部４４が、例えばユーザによる操作部２６からの入力に基づいて、動画像抽出部４６−８が動画像を抽出する時間Ｔ（例えば５分、１０分等）を予め設定する（ステップＳ４０）。なおこの時間Ｔはユーザが操作部２６を操作することによって任意に変更できる。

次に静止画像検索部４５が、外部記録メディア３８に記録された画像ファイルから全ての静止画像を検索する（ステップＳ４１）。このとき静止画像は、画像ファイルのヘッダに記録された静止画像であるか動画像であるかの情報から検索することができるので、検索処理をすばやく行うことが可能となる。なお静止画像の画像ファイルと動画像の画像ファイルの判断は、例えば画像ファイルの拡張子の違いに基づいて行ってもよいし、画像ファイルの録画時間、フレームレート等の情報に基づいて行ってもよいし、一般的に使用されている公知の方法を使用することができる。

次にＣＰＵ３０が、静止画像検索部４５により検索された静止画像が２つ以上あるか否か、つまり外部記録メディア３８に２つ以上の静止画像の画像ファイルがあるか否かを判別する（ステップＳ４２）。静止画像が２つ以上ある場合（ステップＳ４２；ＹＥＳ）には、時間間隔算出部５３が隣り合う静止画像の時間間隔をそれぞれ算出する（ステップＳ４３）。

そしてＣＰＵ３０が、時間間隔算出部５３により算出された時間間隔が所定の閾値よりも小さいか否かを判別し（ステップＳ４４）、小さい場合（ステップＳ４４；ＹＥＳ）には、期間設定部５４は前記隣り合う静止画像の撮影時刻を含む時間間隔内の撮影時刻を動画像抽出期間に設定する（ステップＳ４５）。なお所定の閾値については、外部記録メディア３８に記録されている画像ファイルの状況等に応じてユーザが任意に設定することができる。

次に動画像抽出部４６−８が、設定された動画像抽出期間内に撮影された各静止画像の撮影時刻の前後時間Ｔ内に撮影された動画像を抽出する（ステップＳ４６）。そして次にＣＰＵ３０は、図２０Ｂに示す如く、動画像抽出部４６−８が連続する動画像抽出期間において動画像を２つ以上抽出したか否かを判別し（ステップＳ４７）、２つ以上抽出した場合（ステップＳ４７；ＹＥＳ）には、動画像結合部４７−８が、この抽出された２つ以上の動画像を連続する動画像抽出期間毎に結合して１つの動画像を生成し、結合された動画像を圧縮／伸長処理部３５及びメディア制御部３７を介して外部記録メディア３８に記録する（ステップＳ４８）。

またステップＳ４７にて動画像が２つ以上抽出されない場合（ステップＳ４７；ＮＯ）には、動画像がないか若しくは１つだけ抽出されたことになり、動画像を結合する必要がないため処理を終了する。

一方、図２０Ａに示す如く、ステップＳ４２にて外部記録メディア３８に２つ以上の静止画像がないと判別された場合（ステップＳ４２；ＮＯ）には、ＣＰＵ３０は処理をステップＳ４９へ移行して、静止画像検索部４５が静止画像を検索したか否か、すなわち外部記録メディア３８に静止画像があるか否かを判別する（ステップＳ４９）。

ＣＰＵ３０が、静止画像がないと判別した場合（ステップＳ４９；ＮＯ）には、ユーザが所望する主要なシーンの動画像は撮影されていないと判断して処理を終了し、静止画像があると判別した場合（ステップＳ４９；ＹＥＳ）には、静止画像検索部４５によって静止画像が１つだけ検索されたことになり、動画像抽出部４６−８がこの検索された静止画像の撮影時刻の前後の時間Ｔ内に撮影された動画像を抽出する（ステップＳ５０）。

またステップＳ４４にて算出された時間間隔が所定の閾値以上である場合（ステップＳ４４；ＮＯ）は、ステップＳ５０へ処理を移行して、上記と同じように動画像抽出部４６−８がこの検索された静止画像の撮影時刻の前後の時間Ｔ内に撮影された動画像を抽出する（ステップＳ５０）。

ステップＳ５０にて、動画像の抽出を行うと次に、図２０Ｂに示す如く、ＣＰＵ３０が動画像抽出部４６−８により動画像が２つ以上抽出されたか否かを判別し（ステップＳ５１）、２つ以上抽出されている場合（ステップＳ５１）には、動画像結合部４７−８が、この抽出された２つ以上の動画像を結合して１つの動画像を生成し、結合された動画像を圧縮／伸長処理部３５及びメディア制御部３７を介して外部記録メディア３８に記録する（ステップＳ５２）。

一方、動画像が２つ以上抽出されていない場合（ステップＳ５１）には、動画像がないか若しくは１つだけ抽出されたことになり、動画像を結合する必要がないため処理を終了する。

以上のような動画像の編集方法では、ステップＳ４３にて時間間隔算出部５３が隣り合う静止画像の時間間隔を算出したときに、例えば図２１に示す如く、撮影時刻の早い方から順に、時間間隔が所定の閾値よりも小さい時間間隔Ｒｓが４つ続き、次に時間間隔が所定の閾値以上の時間間隔Ｒｌが２つ続き、同様に時間間隔Ｒｓが４つ、時間間隔Ｒｌが１つ、時間間隔Ｒｓが１つの順に続くような時間間隔で静止画像の撮影が行われると、動画像結合部４７−８は、連続する動画像抽出期間毎、つまり図２１のように時間間隔Ｒｓが４つ隣り合う期間Ｄ１、期間Ｄ３を１つの期間として、この期間Ｄ１、Ｄ３内に撮影された静止画像に対して抽出された動画像を結合して、それぞれ独立した動画像を生成する。また時間間隔Ｒｓが２つ隣り合う期間Ｄ４についても、上記と同様にして独立した画像ファイルを生成する。

一方、時間間隔が所定の閾値以上の、連続した２つの時間間隔Ｒｌの中央の時刻にて撮影された静止画像Ｐは、その静止画像の撮影時刻の前後の所定時間内Ｄ２に撮影されて抽出された動画像のみを結合して１つの独立した動画像を生成する。

例えばユーザが外部記録メディア３８を初期化せずにデジタルカメラ本体に挿入したままでデジタルカメラ１−８を長期間使用するとき等に、外部記録メディア３８には、夏の旅行で撮影した静止画像と動画像の画像ファイルや、お正月に撮影した静止画像と動画像の画像ファイル等、季節に関係なく様々な画像ファイルが記録されている場合がある。

このようなときに、静止画像検索部４５によって検索された静止画像の撮影時刻の前後で撮影された動画像を全て１つの動画像に結合してしまうと、違和感のある動画像が生成されてしまう虞がある。

そこで本実施形態のデジタルカメラ１−８では、隣り合う時刻に撮影された２つの静止画像の時間間隔があいている場合には、この時間間隔で撮影期間を区画することができるので、季節毎やイベント毎に結合した動画像を生成することができる。

なお本実施形態のデジタルカメラ１−８においては、上述した第２の実施形態のデジタルカメラ１−２の機能を適用することができる。この場合、静止画像検索部４５は、顔が検出された静止画像を検索し、時間間隔算出部５３は隣り合う、顔が検出された２つの静止画像の撮影時刻の時間間隔を検出する。

また本実施形態のデジタルカメラ１−８においては、上述した第３の実施形態のデジタルカメラ１−３の機能を適用することができる。この場合、静止画像検索部４５は、顔が検出された静止画像を検索し、時間間隔算出部５３は隣り合う、顔が検出された２つの静止画像の撮影時刻の時間間隔を検出する。そしてこの時間間隔が所定の閾値よりも小さい場合に、期間設定部５４は前記隣り合う静止画像の撮影時刻を含む時間間隔内の撮影時刻を動画像抽出期間に設定し、動画像抽出部４６−８が、この動画像抽出期間における撮影時間内に撮影された動画像を抽出して、抽出された動画像のうち前記２つの静止画像で検出された顔と同一の顔がある動画像のみを最終的に抽出する。

また本実施形態のデジタルカメラ１−８においては、上述した第４、第５、第６の実施形態のデジタルカメラ１−４、１−５、１−６の機能を適用することができる。この場合、抽出時間設定部４４は、上述した第４、第５、第６の実施形態と同様に、静止画像に顔があるないか、所定の撮影時間間隔毎にカウントされた静止画像の枚数、静止画像が撮影されたシーンモードに応じて、静止画像の撮影時刻の前後の動画像を抽出する時間Ｔの長さを設定する。

また上述した第１〜８の実施形態のデジタルカメラ１、１−２〜８においては、さらにファイル名付与手段（図示は省略する）を備えていてもよい。このファイル名付与手段は、動画像を撮影して外部記録メディア３８に記録するときに、この動画像が撮影される直前の静止画像の撮影時刻から、この動画像の撮影開始時刻までの経過時間を関連付けしたファイル名を生成して付与する。具体的には、下記表２に示すように、例えば前記経過時間が５分以内の時には、０００５００００.ＪＰＧのように、経過時間を確認可能なファイル名を付与する。

こうすることにより、動画像抽出部４６が動画像を抽出するときに、抽出する時間の設定が変更しても、動画像ファイルのタグ情報などを検出しなくても容易に動画像を抽出することができる。

また上述した第１〜８の実施形態のデジタルカメラ１、１−２〜８において、４：３のアスペクト比で撮影する通常撮影モードと１６：９のアスペクト比で撮影するワイド撮影モードで撮影された動画像が、外部記録メディア３８に混在して記録されているときには、動画像結合部４７は、通常撮影モードで撮影された動画像とワイド撮影モードで撮影された動画像とを別にして、撮影モード毎に動画像を結合する。こうすることにより、結合された動画像が観にくくなるのを防止することができる。

なお本発明の撮影装置は、上述した実施形態のデジタルカメラに限られるものではなく、本発明の趣旨を逸脱しない範囲において適宜変更可能である。

第１の実施形態のデジタルカメラの機能構成を示すブロック図 第１の実施形態のデジタルカメラの動画像編集処理のフローチャート 第１の実施形態のデジタルカメラに記録された画像ファイルの時系列を示す図 第２の実施形態のデジタルカメラの機能構成を示すブロック図 第２の実施形態のデジタルカメラの動画像編集処理のフローチャート 第３の実施形態のデジタルカメラの機能構成を示すブロック図 第３の実施形態のデジタルカメラの動画像編集処理のフローチャート 第４の実施形態のデジタルカメラの機能構成を示すブロック図 第４の実施形態のデジタルカメラの動画像編集処理のフローチャート 第４の実施形態のデジタルカメラに記録された画像ファイルの時系列を示す図 第５の実施形態のデジタルカメラの機能構成を示すブロック図 第５の実施形態のデジタルカメラの動画像編集処理のフローチャート 第５の実施形態のデジタルカメラに記録された画像ファイルの時系列を示す図 第６の実施形態のデジタルカメラの機能構成を示すブロック図 第６の実施形態のデジタルカメラの動画像編集処理のフローチャート 第７の実施形態のデジタルカメラの機能構成を示すブロック図 第７の実施形態のデジタルカメラの動画像編集処理のフローチャート 第７の実施形態のデジタルカメラに記録された画像ファイルの時系列を示す図 第８の実施形態のデジタルカメラの機能構成を示すブロック図 第８の実施形態のデジタルカメラの動画像編集処理のフローチャート（その１） 第８の実施形態のデジタルカメラの動画像編集処理のフローチャート（その２） 第８の実施形態のデジタルカメラに記録された画像ファイルの時系列を示す図

符号の説明

１ デジタルカメラ（撮影手段、撮影装置）
３８ 外部記録メディア（記録手段）
４３ 時計部
４４ 抽出時間設定部（時間設定手段）
４５ 静止画像検索部（静止画像検索手段）
４６ 動画像抽出部（動画像抽出手段）
４７ 動画像結合部（動画像結合手段）
４８ 動画編集部
４９ 顔検出部（顔検出手段）
５０ 顔判断部（顔判断手段）
５１ カウント部（カウント手段）
５２ シーン認識部（シーン認識手段）
５３ 時間間隔算出部（時間間隔算出手段）
５４ 期間設定部（期間設定手段）

Claims (18)

1. 静止画像及び動画像を撮影可能な撮影手段と、
   該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
   該記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
   該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
   該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とする撮影装置。
2. 前記静止画像の中から顔を検出する顔検出手段をさらに備え、
   前記静止画像検索手段が、前記顔検出手段により顔が検出された前記静止画像を検索するものであることを特徴とする請求項1に記載の撮影装置。
3. 前記静止画像及び前記動画像の中から顔を検出する顔検出手段と、
   前記顔検出手段により前記動画像の中から検出された顔が、前記顔検出手段により前記静止画像の中から検出された顔と同一の顔であるか否かを判断する顔判断手段とをさらに備え、
   前記静止画像検索手段が、前記顔検出手段により顔が検出された前記静止画像を検索すするものであり、
   前記動画像抽出手段が、前記顔検出手段により顔が検出され、かつ前記顔判断手段により該検出された顔が前記静止画の中から検出された顔と同一の顔であると判断された前記動画像を抽出するものであることを特徴とする請求項1に記載の撮影装置。
4. 前記静止画像の中から顔を検出する顔検出手段と、
   該顔検出手段により顔が検出された静止画像と前記顔検出手段により顔が検出されていない静止画像とで、前記動画像を抽出する前記所定時間を異なる長さに設定する時間設定手段とを備えていることを特徴とする請求項１に記載の撮影装置。
5. 静止画像及び動画像を撮影可能な撮影手段と、
   該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
   予め設定された撮影時間間隔毎に、該撮影時間間隔内に前記撮影手段により撮影された前記静止画像の枚数をカウントするカウント手段と、
   該カウントされた前記静止画像の枚数に応じて長さを変更して時間を設定する時間設定手段と、
   前記記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
   該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記時間設定手段により設定された設定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
   該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とする撮影装置。
6. 静止画像及び動画像を撮影可能な撮影手段と、
   該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
   前記静止画像の撮影シーンを認識するシーン認識手段と、
   該シーン認識手段により認識されたシーンに対応させて時間を設定する時間設定手段と、
   前記記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
   該静止画像検索手段により検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記時間設定手段により設定された設定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
   該動画像抽出手段により抽出された２つ以上の前記動画像を結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とする撮影装置。
7. 前記撮影手段が、撮影シーンに応じて任意に撮影モードを設定可能であり、
   前記シーン認識手段が、前記静止画像が撮影されたときの前記撮影モードを認識することにより該静止画像の撮影シーンを認識するものであることを特徴とする請求項６に記載の撮影装置。
8. 静止画像及び動画像を撮影可能な撮影手段と、
   該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段と、
   該記録手段に記録された前記画像から全ての前記静止画像を検索する静止画像検索手段と、
   該静止画像検索手段により検索された前記静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出する時間間隔算出手段と、
   該時間間隔算出手段により算出された時間間隔が所定の閾値よりも小さいときに、前記２つの静止画像の撮影時刻を含む前記時間間隔内の撮影時刻を動画像抽出期間に設定する期間設定手段と、
   該期間設定手段により設定された動画像抽出期間内に撮影された前記静止画像の各々に対して、各静止画像の撮影時刻を含む前後の予め設定された所定時間内に撮影された前記動画像を抽出する動画像抽出手段と、
   該動画像抽出手段により抽出された２つ以上の前記動画像を、連続する前記動画像抽出期間毎に結合して１つの動画像を生成する動画像結合手段とを備えていることを特徴とする撮影装置。
9. 前記記録手段が、前記撮影手段による前記動画像の撮影毎に、該動画像の撮影開始時刻及び撮影終了時刻の情報が格納されたタグが付加された動画像ファイルを記録するものであることを特徴とする請求項１〜８いずれか１項に記載の撮影装置。
10. 前記動画像を前記記録手段に記録するときに、前記動画像が撮影される直前に撮影された前記静止画像の撮影時刻から前記動画像の撮影開始時刻までの経過時間を関連付けしたファイル名を生成して付与するファイル名付与手段を備えていることを特徴とする請求項１〜９いずれか１項に記載の撮影装置。
11. 前記撮影手段が、通常撮影モード及びワイド撮影モードで前記静止画像及び前記動画像を撮影可能なものであり、
    前記動画像結合手段が、前記撮影モード毎に前記動画像を結合するものであることを特徴とする請求項１〜１０いずれか１項に記載の撮像装置。
12. 静止画像及び動画像を撮影可能な撮影手段と、
    該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
    予め所定時間を設定し、
    前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
    該検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
    該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする動画像編集方法。
13. 前記検索された静止画像の中から顔を検出し、
    該顔が検出された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出することを特徴とする請求項１２に記載の動画像編集方法。
14. 前記検索された静止画像の中から顔を検出し、
    該顔が検出された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
    該抽出された動画像の中から顔を検出し、
    該検出された顔が、対応する前記静止画像の中から検出された顔と同一の顔であるか否かを判断し、
    同一の顔であると判断された前記動画像のみを前記抽出することを特徴とする請求項１２に記載の動画像編集方法。
15. 顔が検出された静止画像と顔が検出されていない静止画像とで、前記所定時間を異なる長さに設定することを特徴とする請求項１２〜１４いずれか１項に記載の動画像編集方法。
16. 静止画像及び動画像を撮影可能な撮影手段と、
    該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
    予め撮影時間間隔を設定し、
    前記記録手段に記録された前記画像から全ての前記静止画像を検索すると共に前記設定した撮影時間間隔毎に該撮影時間間隔内に撮影された前記静止画像の枚数をカウントし、
    該カウントされた前記静止画像の枚数に応じて長さを変更して時間を設定し、
    前記検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記設定された時間内に撮影された前記動画像を抽出し、
    該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする動画像編集方法。
17. 静止画像及び動画像を撮影可能な撮影手段と、
    該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
    前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
    該検索された静止画像の撮影シーンを認識し、
    該認識されたシーンに対応させて時間を設定し、
    前記検索された静止画像の各々に対して、各静止画像の撮影時刻を含む前後の、前記設定された時間内に撮影された前記動画像を抽出し、
    該抽出された２つ以上の前記動画像を結合して１つの動画像を生成することを特徴とする動画像編集方法。
18. 静止画像及び動画像を撮影可能な撮影手段と、
    該撮影手段により撮影された静止画像及び動画像を撮影日時と共に記録する記録手段とを備えた撮影装置における動画像編集方法において、
    予め所定時間を設定し、
    前記記録手段に記録された前記画像から全ての前記静止画像を検索し、
    該検索された静止画像のうち、隣り合う時刻に撮影された２つの静止画像の時間間隔を算出し、
    該算出された時間間隔が所定の閾値よりも小さいときに、前記２つの静止画像の撮影時刻を含む前記時間間隔内の撮影時刻を動画像抽出期間に設定し、
    該設定された動画像抽出期間内に撮影された前記静止画像の各々に対して、各静止画像の撮影時刻を含む前後の前記所定時間内に撮影された前記動画像を抽出し、
    該抽出した２つ以上の前記動画像を、連続する前記動画像抽出期間毎に結合して１つの動画像を生成することを特徴とする動画像編集方法。

Images