JP2008182683A - 撮像装置、記録・再生方法、及び、記録・再生プログラム - Google Patents

Abstract

【課題】連続撮影中でも撮影者が所望する時間間隔で連続撮影でき、また、連続撮影された画像からの所望の画像の検索を容易に行うことができるようにする。
【解決手段】通常撮影フレームレートである３０ｆｐｓでフレーム画像データを取得し、経過時間と対応付けて順次記録する（Ｓ１０５）。レバースイッチが操作されることによるフレームレートの変更が検出されたか否かを判断する（Ｓ１０６）。このフレームレート変更が検出された時点の経過時間を時計部により取得するとともに、前記撮像部から変更されたフレームレートでフレーム画像データを取得し順次記録する（Ｓ１０７）。したがって、このＳ１０７での変更されたフレームレートでフレーム画像データを取得する処理により、連続撮影においてはユーザ（撮影者）が所望する画像を取得することができる。また、再生時には、撮影時のフレームレートに対応する再生速度情報を画像に重畳させて表示する。
【選択図】図４

Description

本発明は、連続撮影機能及び再生機能を備えた撮像装置、及び、撮像装置、記録・再生方法、及び、記録・再生プログラムに関する。

従来より、デジタルカメラの中には、連続撮影機能を具備するものがある。そして、このような機能を具備するデジタルカメラは、所定の時間間隔で連続撮影された複数の画像を順次表示したり、マルチ画面表示することができる。また、近年では、特許文献１に記載されているように、連続撮影時の時間間隔を高速化する一方、連続再生表示の際は、再生表示される表示デバイスのフレームレートを考慮することで、高速連続撮影された画像について、より多彩に再生表示する機能を備えたものが提案されている（特許文献１、図４、２、第８頁参照。）。
特開２００６−３３０２２号公報

しかしながら、このような従来技術では、撮影時のフレームレートが常に一定であるため、撮影開始から終了まで、常に同一のフレームレートでの連続撮影を強いられることとなる。このため撮影者は、撮影中に重要なシーンが発生しても、そのシーンついて撮影枚数を増やすことができず、結果として撮り逃がしてしまうことがあった。また、無制限に連続撮影することが可能な場合、連続撮影された大量の画像を再生しながら確認しようとすると、本当に重要なシーンを記録した画像を検索することが困難であるという問題も生じる。

本発明は、かかる課題に鑑みてなされたものであり、連続撮影中でも撮影者が所望する時間間隔で連続撮影でき、また、連続撮影された画像からの所望の画像の検索を容易に行うことができる撮像装置、記録・再生方法、及び、記録・再生プログラムを提供することを目的とするものである。

前記課題を解決するため請求項１記載の発明にあっては、撮像手段と、所定の時間間隔で前記撮像手段を駆動させて、複数の画像を順次取得する画像取得手段と、この画像取得手段による取得中に、前記所定の時間間隔を変更する変更手段と、この変更手段によって変更された時間間隔を、そのときに取得された画像に関連付けて記憶する時間間隔記憶手段と、記録された複数の画像を順次再生する再生手段と、この再生手段による再生の際に、再生対象の画像が前記時間間隔記憶手段によって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知手段とを備えたことを特徴とする。

また、請求項２記載の発明にあっては、請求項１記載の発明に加え、前記画像取得手段による取得開始からの経過時間を計時する計時手段と、この計時手段によって計時された経過時間を前記画像取得手段によって順次取得された複数の画像と対応付けて記録する記録手段とを備え、前記時間間隔記憶手段は、前記変更手段によって変更された時間間隔と、変更時の経過情報と対応付けて記憶し、前記再生手段は、前記記録手段によって記録された複数の画像を順次再生し、前記報知手段は、前記再生手段による再生の際に、再生対象の画像に対応付けて記録された経過時間が前記時間間隔記憶手段によって記憶された変更時の経過時間に到達すると、時間間隔が変更された旨を報知することを特徴とする。

また、請求項３記載の発明にあっては、請求項２記載の発明に加え、前記所定の時間間隔を基準として、前記変更手段によって変更された時間間隔に対応する再生速度情報を記憶する再生速度情報記憶手段を更に備え、前記報知手段は、再生対象の画像に対応付けて記録された経過時間が前記時間間隔記憶手段によって記憶された変更時の経過時間に到達すると、この経過時間に対応して前記変更内容記憶手段に記憶された時間間隔に基づいて、前記再生速度情報記憶手段から対応する再生速度情報を読み出して表示する再生速度情報表示手段を含むことを特徴とする。

また、請求項４記載の発明にあっては、請求項１又は２記載の発明に加え、前記再生手段による再生中に、前記変更された時間間隔で順次取得した複数の画像間の変化の度合いを検出する検出手段と、この検出手段によって検出された変化の度合いに応じて、前記複数の画像を合成する画像合成手段とを更に備え、前記再生手段は、前記複数の画像を順次再生する際に、これら複数の画像間の合成画像が前記合成画像生成手段によって生成されている場合には、これらの複数の画像に介在させて前記合成画像を再生することを特徴とする。

また、請求項５記載の発明にあっては、請求項１乃至４いずれか記載の発明に加え、任意の位置に移動可能な操作部を更に備え、前記変更手段は、前記操作部が移動した位置に基づいて前記時間間隔を変更することを特徴とする。

また、請求項６記載の発明にあっては、請求項４記載の発明に加え、前記画像合成手段は、前記複数の画像間における注目画像の動きベクトルを算出し、この動きベクトルに基づき、画像を合成することを特徴とする。

前記課題を解決するため請求項７記載の発明にあっては、所定の時間間隔で撮像部を駆動させて、複数の画像を順次取得する画像取得ステップと、この画像取得ステップによる取得中に、前記所定の時間間隔を変更する変更ステップと、この変更ステップによって変更された時間間隔を、そのときに取得された画像に関連付けて記憶させる時間間隔記憶ステップと、記録された複数の画像を順次再生する再生ステップと、この再生ステップによる再生の際に、再生対象の画像が前記時間間隔記憶ステップによって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知ステップとを含むことを特徴とする。

前記課題を解決するため請求項８記載の発明にあっては、コンピュータを、所定の時間間隔で撮像部を駆動させて、複数の画像を順次取得する画像取得手段、この画像取得手段による取得中に、前記所定の時間間隔を変更する変更手段、この変更手段によって変更された時間間隔を、そのときに取得された画像に関連付けて記憶させる時間間隔記憶手段、記録された複数の画像を順次再生する再生手段、この再生手段による再生の際に、再生対象の画像が前記時間間隔記憶手段によって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知手段として機能させることを特徴とする。

本願発明によれば、撮影者は連続撮影時に撮影時間間隔を変更することができ、また、この連続撮影された複数の画像を順次再生する場合には、撮影時間間隔を変更した時の画像の確認を容易に行うことができるので、連続撮影中でも撮影者が所望する時間間隔で連続撮影でき、また、連続撮影された画像からの所望の画像の検索を容易に行うことができる。

以下、本発明の一実施の形態を図に従って説明する。図１（Ａ）（Ｂ）は、本実施の形態に係るデジタルカメラ１の正面図及び平面図である。このデジタルカメラ１には、図１（Ａ）に示すようにその前面に、撮像レンズ２が設けられており、上面には同図（Ｂ）に示すように、電源ＯＮ／ＯＦＦキー３、シャッターボタン４及びレバースイッチ５が設けられている。レバースイッチ５は、シャッターボタン４の周部において所定の中立位置から左右方向に回動操作可能である。そして、中立位置から例えば右方向に回動されて当該位置で停止することにより、連続撮影フレームレートを通常撮影フレームレートである３０ｆｐｓよりも低下させる信号を出力し、左方向に回動されて当該位置で停止することにより、連続撮影フレームレートを通常撮影フレームレートである３０ｆｐｓよりも上昇させる信号を出力するように構成されている。なお、背面にはＬＣＤからなる表示部１６や、撮影モードと再生モード及び撮影モードにおける静止画撮影モードと連続撮影モードとを選択的に設定するためのモード設定キー等が設けられている。

図２（Ａ）は、デジタルカメラ１の概略構成を示すブロック図である。このデジタルカメラ１は、バスライン６を介して各部に接続された制御部７を備えている。制御部７は、デジタルカメラ１の各部を制御するワンチップマイコンであって、撮影フレームレート制御部７１、再生フレームレート制御部７２、時計部７３及びクロック７４を有している。撮影フレームレート制御部７１は撮影時におけるフレームレート（時間間隔）を可変制御し、再生フレームレート制御部７２は再生時におけるフレームレートを可変制御する。時計部７３は、連続撮影モードにおいて撮影記録時間を計測する際等に用いられ、クロック７４はタイミング・ジェネレータであってＣＭＯＳ８を制御する。

ＣＭＯＳ８は、フォーカスレンズ、ズームレンズ等で構成される前記撮像レンズ２の光軸上に配置されている。ユニット回路９は、ＣＭＯＳ８から出力される被写体の光学像に応じたアナログの撮像信号が入力される回路であって、入力した撮像信号を保持するＣＤＳと、その撮像信号を増幅するゲイン調整アンプ（ＡＧＣ）、増幅された撮像信号をデジタルの撮像信号に変換するＡ／Ｄ変換器（ＡＤ）等から構成されている。ＣＭＯＳ８の出力信号はユニット回路９を経て各々デジタル信号として画像処理部１０に送られて、各種画像処理が施される。

また、バスライン６には、入力部１１、プログラムメモリ１２、ワークメモリ１３、記憶部１４及び表示ドライバ１５が接続されている。表示ドライバ１５は、デジタルカメラ１の背面に配置されている表示部１６を駆動する。入力部１１は、前記シャッターボタン４、レバースイッチ５等を含みユーザによる操作に応じたキー入力信号を制御部７に出力する。プログラムメモリ１２は、制御部７の動作プログラムや各部の制御に使用する各種データが記憶されているとともに、前記フォーカスレンズを駆動してオートフォーカス（ＡＦ）制御を実行するＡＦ制御プログラムも記憶されている。

ワークメモリ１３は、ＣＭＯＳ８により撮像された後デジタル化された被写体の画像データ等を一時保存するバッファであるとともに、制御部７のワーキングメモリとしても使用される。ワークメモリ１３に一時保存された画像データは、制御部７により圧縮（符号化）が行われ、最終的には所定のフォーマット（ＪＰＥＧ形式等）の静止画データ、あるいは複数の静止画像データを含む動画データ（Ｍｏｔｉｏｎ ＪＰＥＧ形式、ＭＰＥＧ−４形式、ＭＰＥＧ−４ ＡＶＣ形式等）としてファイル名（撮影日時を用いたファイル名）が付されて、図２（Ｂ）に示す記憶部１４のファイル格納エリア１４３に記録される。

記憶部１４には、前記ファイル格納エリア１４３とともに、管理エリア１４１及び変更情報メモリエリア１４２が設けられている。管理エリア１４１は、連続撮影モードにおいて取得される複数枚分の静止画データを一時的に記憶するエリアである。変更情報メモリエリア１４２には、図２（Ｃ）に示すように、前記ファイル名に対応して経過時間とフレームレートとが記憶される。フレームレートとは、対応する時間内における撮影フレームレートである。

つまり、図示の例においては、ファイル名「２００６１００６〜０１．ａｖｉ」の動画データは、経過時間「０２′００″７４〜０４′３０″３０」がフレームレート「５０（ｆｐｓ）」で記憶され、「２０′００″０３〜２２′３６″７７」がフレームレート「５０（ｆｐｓ）」で記憶され、「２２′３６″７７〜２４′１０″３５」がフレームレート「１００（ｆｐｓ）」で記憶されていることを意味する。

また、本実施の形態においては、「３０（ｆｐｓ）」を通常撮影フレームレートとし、この通常撮影フレームレートについては、変更情報メモリエリア１４２に記憶せず、通常撮影フレームレートとは異なるフレームレートで撮影された場合にのみ、変更情報メモリエリア１４２に記憶する。したがって、図示の例における経過時間とは、フレームレートが変更された時の経過時間であり、「０２′００″７４〜０４′３０″３０」のフレームレート「５０（ｆｐｓ）」が記憶されている前の、「００′００″００〜０２′００″７４」までや、「０２′００″７４〜０４′３０″３０」と「２０′００″０３〜２２′３６″７７」との間の「０４′３０″３０〜２０′００″０３」においては、「３０（ｆｐｓ）」の通常撮影フレームレートで撮影が行われたことを意味する。

また、プログラムメモリ１２には、前記プログラム等とともに図３に示す再生速度テーブル１２１が予め記憶されている。この再生速度テーブル１２１には、記録時フレームレート（ｆｐｓ）「１０」「３０」「５０」「１００」に各々対応して、通常再生＝３０ｆｐｓ時の再生速度情報と、スロー再生＝１０ｆｐｓ時の再生速度情報とが記憶されている。つまり、記録時フレームレートが「１０」であれば、通常再生＝３０ｆｐｓ時の再生速度は３倍速となることから再生速度情報「×３倍速（早送り）」が記憶され、スロー再生＝１０ｆｐｓ時の再生速度は１倍速となることから再生速度情報「×１倍速」が記憶されている。

次に、以上の構成からなるデジタルカメラ１の動作について説明する。前記電源ＯＮ／ＯＦＦキー３をオン操作し撮影モードを設定すると、表示部１６にスルー画像が表示された状態となる。この状態において、制御部７はプログラムメモリ１２に格納されたプログラムに従って図４のフローチャートに示す手順で処理を実行する。まず、連続撮影モードが選択されているか否かを検出し（ステップＳ１０２）、連続撮影モードの選択が検出されない場合には、静止画撮影処理に移行する（ステップＳ１０２）。

連続撮影モードの選択が検出された場合には、シャッターボタン４の操作が検出され、撮影が開始されたか否かを判断する（ステップＳ１０３）。連続撮影モードにおいてシャッターボタン４の操作が検出されたならば、時計部７３を起動して連続撮影モードにおける経過時間の計時を開始させる（ステップＳ１０４）。引き続き、ＣＭＯＳ８、ユニット回路９、画像処理部１０等で構成される撮像部から通常撮影フレームレートである３０ｆｐｓでフレーム画像データ（静止画データ）を取得して、これらのフレーム画像データに経過時間を付加してワークメモリ１３に順次記録する（ステップＳ１０５）。

次に、レバースイッチ５が操作されることによるフレームレートの変更が検出されたか否かを判断する（ステップＳ１０６）。フレームレートの変更が検出されない場合には、再度シャッターボタン４が操作されることによる撮影終了が検出されたか否かを判断する（ステップＳ１１１）。このステップＳ１１１での撮影終了が検出されない場合には、ステップＳ１０５に戻り、通常撮影フレームレート３０ｆｐｓでのフレーム画像データの取得を継続する。そして、再度シャッターボタン４が操作されることによる撮影終了が検出されステップＳ１１１からステップＳ１１２に進み、順次記録された複数のフレーム画像データをファイル化し、ファイル名を付して、記憶部１４のファイル格納エリアに記憶する（ステップＳ１１２）。

しかし、ユーザが撮影フレームレートを変更すべく、レバースイッチ５を操作すると、フレームレートの変更が検出されてステップＳ１０６の判断がＹＥＳとなり、ステップＳ１０６からステップＳ１０７に進む。そして、このフレームレート変更が検出された時点の経過時間を時計部７３により取得するとともに、前記撮像部を駆動させて変更されたフレームレートでフレーム画像データを取得し、記憶部１４の管理エリア１４１に順次記録する。

したがって、このステップＳ１０７での変更されたフレームレートでフレーム画像データを取得する処理により、連続撮影中、ユーザ（撮影者）が重要と判断したシーンについて任意にフレームレートを変更して、所望するフレーム画像データを取得することができる。

しかも、撮影フレームレートの変更は、レバースイッチ５を操作するのみでよいことから、簡単な操作により撮影フレームレートを自在に変更することができる。

また、管理エリア１４１には、記録された動画データ（複数のフレーム画像データ）に対応して、撮影フレームレートが変更された時の撮影開始からの経過時間が記録されることとなる。

引き続き、再度シャッターボタン４が操作されることによる撮影終了が検出されたか否かを判断する（ステップＳ１０８）。このステップＳ１０８での撮影終了が検出されない場合には、ステップＳ１０６に戻る。したがって、ユーザがレバースイッチ５を再度操作することなくレバースイッチ５が前回と同一の位置に変位している状態を維持していても、ステップＳ１０６の判断はＹＥＳとなり、ステップＳ１０７で経過時間と、変更されているフレームレートでフレーム画像データが取得される。無論、ユーザがレバースイッチ５を異なる位置に操作した場合にも、ステップＳ１０６の判断はＹＥＳとなり、ステップＳ１０７で変更されたフレームレートでフレーム画像データが取得される。

また、ユーザがレバースイッチ５を中立位置に戻した場合には、ステップＳ１０６の判断はＮＯとなり、撮影終了が検出されなければ、ステップＳ１０５に戻り、撮像部から通常撮影フレームレート３０ｆｐｓでフレーム画像データが取得される。

そして、ユーザがレバースイッチ５を変位させた状態で連続撮影を停止すべく、シャッターボタン４を再度操作すると、ステップＳ１０８の判断がＹＥＳとなり、ステップＳ１０８からステップＳ１０９に進む。したがって、変更されたフレームレートと経過時間とを対応付けて変更情報として記憶部１４の変更情報メモリエリア１４２に記憶する。

このとき、前述のように本実施の形態においては、「３０（ｆｐｓ）」を通常撮影フレームレートとし、この通常撮影フレームレートについては、変更情報メモリエリア１４２に記憶せず、この通常撮影フレームレートとは異なるフレームレートで撮影された場合にのみ、変更情報メモリエリア１４２に変更情報として記憶する。

よって、図５（１）〜（５）に示すように、
（１）「００′００″００〜０２′００″７４」まではレバースイッチ５を操作することなく通常撮影フレームレート「３０（ｆｐｓ）」とし、
（２）「０２′００″７４〜０４′３０″３０」まではレバースイッチ５を操作して「５０（ｆｐｓ）」を設定し、
（３）「０４′３０″３０〜２０′００″０３」まではレバースイッチ５を中立位置に戻して通常撮影フレームレート「３０（ｆｐｓ）」とし、
（４）「２０′００″０３〜２２′３６″７７」まではレバースイッチ５を操作して「５０（ｆｐｓ）」を設定し、
（５）「２２′３６″７７〜２４′１０″３５」までレバースイッチ５を操作して「１００（ｆｐｓ）」を設定し、
連続撮影を終了したとすると、
図２（Ｃ）に示すように、変更情報として、
・経過時間「０２′００″７４〜０４′３０″３０」に対応してフレームレート（ｆｐｓ）「５０」、
・経過時間「２０′００″０３〜２２′３６″７７」に対応してフレームレート（ｆｐｓ）「５０」
・経過時間「２２′３６″７７〜２４′１０″３５」に対応してフレームレート（ｆｐｓ）「１００」
が記憶されることとなる。

次に、順次記録された複数のフレーム画像データをファイル化し、変更情報と対応付けてファイル格納エリア１４３に記録する（ステップＳ１１０）。順次記録された複数のフレーム画像データをファイル化しファイル名を付して、記憶部１４のファイル格納エリア１４３に記憶するとともに、変更情報にも上記のファイル名と同一のファイル名を付す。これより、複数のフレーム画像データと変更情報とが同一のファイル名により対応付けられる。

他方、再生モードを設定すると、再生モード待機状態が形成され、制御部７はプログラムメモリ１２に格納されたプログラムに従って図６のフローチャートに示す手順で処理を実行する。まず、ユーザの操作により、ファイル格納エリア１４３からいずれかのファイルの選択が検出されたか否かを判断する（ステップＳ２０１）。ファイル選択が検出されたならば、それが連続撮影モードにて記録された複数の静止画データ（フレーム画像データ）を含むファイルの選択であるか否かを判断する（ステップＳ２０２）。上記のファイルの選択ではなく、一つの静止画データからなるファイルの選択である場合には、選択されたファイルをファイル格納エリア１４３から読み出して、ワークメモリ１３に展開する（ステップＳ２０３）。更に、この展開したファイルに基づく静止画像を表示部１６に表示する（ステップＳ２０４）。そして、キャンセル操作が検出されたか否かを判断し（ステップＳ２０５）、キャンセル操作が検出されるまで、この表示を継続する。

一方、ステップＳ２０２での判断の結果、連続撮影モードにて記録された複数の静止画データ（フレーム画像データ）を含むファイルの選択であった場合には、変更情報記憶部（変更情報メモリエリア１４２）を検索し（ステップＳ２０６）、選択されたファイルに対応付けて記録された変更情報があるか否かを判断する（ステップＳ２０７）。すなわち、前述のように変更情報には、連続撮影された複数の画像データ（フレーム画像データ）からなるファイルのファイル名と同一ファイル名が付されることから、変更情報メモリエリア１４２において選択されたファイルのファイル名を検索することにより、変更情報の有無を容易に検出することができる。

そして、ステップＳ２０７での判断の結果、変更情報が記録されていない場合、つまり当該ファイルが通常の撮影フレームレートで撮影されたものである場合には、選択されたファイルをファイル格納エリア１４３から読み出して、ワークメモリ１３に展開し（ステップＳ２０８）、表示部１６に先頭のフレーム画像データに対応する画像を表示する（ステップＳ２０９）。また、この画像を表示した状態で、再生指示が検出されたか否か（ステップＳ２１０）、及びキャンセルが検出されたか否かを判断し（ステップＳ２１１）、キャンセルが検出された場合には、リターンする。

また、再生指示が検出された場合（ステップＳ２１０；ＹＥＳ）には、前記ワークメモリ１３に展開されている複数のフレーム画像データからなる画像を撮影フレームレートと同じ再生フレームレート３０ｆｐｓで順次再生して、表示部１６に表示する（ステップＳ２１２）。また、最後のフレーム画像データに対応する画像を再生することによる再生終了を検出したか否かを判断し（ステップＳ２１３）、再生終了を検出するまでステップＳ２１２の処理を繰り返し実行する。これにより、表示部１６には、フレームレート３０ｆｐｓで順次変化する画像が再生表示されることとなる。そして、最後の画像データが再生されることにより再生終了が検出されると、ステップＳ２１６に戻って、先頭フレーム画像データに基づく画像の表示状態に移行する。

他方、ステップＳ２０７での判断の結果、選択されたファイルに対応付けて変更情報が記録されている場合には、当該変更情報を変更情報メモリエリア１４２から読み出す（ステップＳ２１４）。引き続き、選択されたファイルをファイル格納エリア１４３から読み出して、ワークメモリ１３に展開し（ステップＳ２１５）、表示部１６に先頭フレーム画像データに対応する画像を表示する（ステップＳ２１６）。また、この画像を表示した状態で、再生指示が検出されたか否か（ステップＳ２１７）、及びキャンセルが検出されたか否かを判断し（ステップＳ２１８）、キャンセルが検出された場合には、リターンする。

また、再生指示が検出された場合（ステップＳ２１７；ＹＥＳ）には、前記ワークメモリ１３に展開されている複数のフレーム画像データに対応する画像をフレームレート３０ｆｐｓでの再生を開始して、表示部１６に表示するとともに、該表示部１６の再生画像上に、撮影フレームレートと再生フレームレートとが同一（３０ｆｐｓ）であることを示す「１×」を重畳表示して報知する（ステップＳ２１９）。つまり、本実施の形態では前記ステップＳ１０５の処理により、連続撮影モードの冒頭においてはフレームレート３０ｆｐｓで撮影が行われ、また、ステップＳ２１９ではフレームレート３０ｆｐｓで再生が開始されることから、再生モードの冒頭においては、撮影フレームレートと再生フレームレートとが同一となり、これを示す「１×」を重畳表示して報知する。また、これと同時に、時計部７３を起動して再生経過時間の計時を開始させる（ステップＳ２１９）。

次に、再生対象のフレーム画像データに付加された撮影時の経過時間と変更情報に含まれる経過時間とを比較し、比較結果に基づき、再生対象のフレーム画像データに基づく画像の再生タイミングにおいて、このフレーム画像データに付加された撮影時の経過時間と変更情報に記憶された経過時間とが一致したか、すなわち、フレーム画像データに付加された撮影時の経過時間がフレームレートを変更した経過時間に到達したか否かを判断する（ステップＳ２２０）。到達したならば、撮像時に記憶した変更されたフレームレートに対応する再生速度情報を再生速度テーブル１２１（図３）より読み出す（ステップＳ２２１）。

つまり、ステップＳ２１９での処理により、再生フレームレート３０ｆｐｓで通常再生を行っているので、例えば撮像時に記録されたフレームレートが「１０ｆｐｓ」であるならば、再生速度テーブル１２１での対応する再生速度情報は、「×３倍速（早送り）」である。よって、再生速度テーブル１２１から「×３倍速（早送り）」を読み出す。また、再生フレームレート１０ｆｐｓでスロー再生を行っている場合には、例えば撮像時に記録された変更されたフレームレートが「１００ｆｐｓ」であるならば、再生速度テーブル１２１での対応する再生速度情報は、「×１／１０倍速（スロー）」である。よって、再生速度テーブル１２１から「×１／１０倍速（スロー）」を読み出す。

次に、表示部１６に順次再生表示される複数の画像間の変化が大きいか否か、その変化の度合いを検出する（ステップＳ２２２）。例えば、図７に示すように、徒競走を連続撮影した場合、（１）（２）のようなスタート直後であれば、加速されていないことから走者の動きは少ないので、時間的に隣接する画像（１）（２）間の変化は小さい。しかし、（３）（４）に示すように、走者ａが走者ｂを追い越そうとしているシーンにおいては、走者ａの加速によりその動き（動きベクトル）は大きい。したがって、このシーンを例えば５０ｆｐｓで撮影しても、１／５０秒間隔で時間的に隣接する画像（１）（２）における走者ａの動きは大きいものとなり、コマ送り的な表示状態となってしまう。

そして、ステップＳ２２２においては、時間的に隣接する（１）（２）のように画像間の変化が小さい場合にはＮＯと判断し、（３）（４）のように画像間の変化が大きい場合にはＹＥＳと判断する。より具体的には、画像（３）（４）における所定領域毎の特徴量を算出し、更に算出した画像（３）（４）に共通する特徴量毎その動きベクトルを算出する。このとき、走者ａを含む特徴算出領域（注目画像）においては、画像（３）（４）間において、所定以上の大きな動きベクトルが算出される。このように、時間的に隣接する画像（３）（４）の対応する特徴検出領域において、所定以上の動きベクトルが検出された場合、ＹＥＳと判断する。

そして、ステップＳ２２２の判断がＹＥＳであった場合には、画像を合成し、再生表示内容に重畳させて再生速度情報を表示して報知する（ステップＳ２２３）。すなわち、前述のように予め動きベクトルを算出して、画像（３）に対して画像（４）を動きベクトルの方向に、動きベクトルの大きさに応じたズレ量でずらした合成画像（３′）（４′）を生成する。更に、図７（３）（３′）（４′）（４）に示すように、合成画像（３′）（４′）を画像（３）に画像（４）間に介挿して再生を行う。

したがって、表示部１６上において（３）→（３′）→（４′）→（４）が順次再生されることにより、コマ送り的な表示状態を滑らかな動きとなる表示状態に補正することができる。

また、画像の合成は前述のように動きベクトルに基づいて行うことから、被写体の動きの大きさに応じて適切な画像を合成して表示することができる。

このとき、ステップＳ２２３における「再生表示内容に重畳させて再生速度情報を表示して報知」の処理により、図示のように、５０ｆｐｃで撮影された画像を３０ｆｐｓで再生している場合の再生速度情報１１６として「×５／３倍速（スロー）」が表示されることとなる。

また、ステップＳ２２２の判断がＮＯであった場合には、画像合成を行うことなく、単に再生表示内容に重畳させて再生速度情報を表示して報知する（ステップＳ２２４）。

次に、再生対象のフレーム画像データに付加された撮影時の経過時間に基づいて、変更情報に記憶された経過時間が終了したか否かを判断する（ステップＳ２２５）。つまり、経過時間が０２′００″７４〜０４′３０″３０」であるならば、終了時間である「４′３０″３０」が終了したか否かを判断し（ステップＳ２２５）、終了するまでステップＳ２２２からの処理を繰り返す。

更に、ユーザが再生終了操作を行うか、当該連続画像の再生が終了するかの再生終了が検出されたか否かを判断し（ステップＳ２２６）、検出された場合には、ステップＳ２１６に戻る。検出されない場合には、通常再生フレームレート３０ｆｐｓでの再生を継続するとともに、撮影フレームレートと再生フレームレートとが同一（３０ｆｐｓ）であることを示す「１×」を重畳表示して報知する（ステップＳ２２７）。

また、ステップＳ２２６と同様に再生終了が検出されたか否かを判断し（ステップＳ２２２）、検出されない場合にはステップＳ２２０からの処理を繰り返す。したがって、図２（Ｃ）に示すように、ファイル名「２００６１００６〜０１．ａｖｉ」に対応して、
・経過時間「０２′００″７４〜０４′３０″３０」
・経過時間「２０′００″０３〜２２′３６″７７」
・経過時間「２２′３６″７７〜２４′１０″３５」
が記憶されていたとすると、
・記録開始から０２′００″７４の時点（第１の変更）
・記録開始から２０′００″０３の時点（第２の変更）
・記録開始から２２′３６″７７の時点（第３の変更）
の各々においてステップＳ２２０の判断がＹＥＳとなる。

そして、１回目のステップＳ２２１の処理においては、第１の変更での撮影フレームレートである「５０ｆｐｓ」に対応する再生速度情報「×３／５倍速（スロー）」が再生速度テーブル１２１から読み出される。更に、ステップＳ２２３又はＳ２２４の処理で、再生速度情報「×３／５倍速（スロー）」が経過時間「０２′００″７４〜０４′３０″３０」において重畳表示して報知される。

また、２回目のステップＳ２２１の処理においては、第２の変更での撮影フレームレートである「５０ｆｐｓ」に対応する再生速度情報「×３／５倍速（スロー）」が再生速度テーブル１２１から読み出される。更に、ステップＳ２２３又はＳ２２４の処理で、再生速度情報「×３／５倍速（スロー）」が再生時間において重畳表示して報知されることとなる。

また、３回目のステップＳ２２１の処理においては、第３の変更での撮影フレームレートである「１００ｆｐｓ」に対応する再生速度情報「×３／１０倍速（スロー）」が再生速度テーブル１２１から読み出される。更に、ステップＳ２２３又はＳ２２４の処理で、再生速度情報「×３／１０倍速（スロー）」が再生時間において重畳表示して報知されることとなる。

したがって、本実施の形態よれば、前述のように連続撮影中、ユーザ（撮影者）が重要と判断したシーンについて任意にフレームレートを変更して、所望するフレーム画像データを取得することができるのみならず、再生時においては、表示される再生速度情報を見て、この再生速度情報に応じた注意力で画像を視認することにより、連続撮影された画像からの所望の画像の検索を容易に行うことができる。

なお、本実施の形態においてはレバースイッチ５の操作に応じて撮影時のフレームレートでのみを変更するようにしたが、図２に示した再生フレームレート制御部７２により、レバースイッチ５の操作に応じて再生時のフレームレートを変更できるようにしてもよい。すなわち、本実施の形態においては、図３に示すように、通常再生＝３０ｆｐｓ時の再生速度情報のみならず、スロー再生＝１０ｆｐｓ時の再生速度情報も再生速度テーブル１２１に記憶してある。したがって、レバースイッチ５の操作に応じて再生時のフレームレートを３０ｆｐｓと１０ｆｐｓとに変更した場合であってもこれに対応することができる。

より具体的には、変更された再生フレームレートが３０ｆｐｓと１０ｆｐｓのいずれであるかを判断し、３０ｆｐｓである場合には、前述した実施の形態と同様にステップＳ２２２１で３０ｆｐｓに対応する再生速度情報を再生速度テーブル１２１から読み出して、ステップＳ２２３又はステップＳ２２４で表示を行い、１０ｆｐｓである場合には、ステップＳ２２２１で１０ｆｐｓに対応する再生速度情報を再生速度テーブル１２１から読み出して、ステップＳ２２３又はステップＳ２２４で表示を行えばよい。

これにより、再生フレームレートを変更した場合であっても、撮影フレームレートに応じて異なる再生速度をユーザに知らしめることができる。
なお、本実施の形態においては、高速連続撮影された複数の画像（ＡＶＩ形式）の撮影・再生につて説明したが、動画撮影された動画（ＭＰＥＧ Ｈ.２６４形式）の撮影・再生であってもよい。この場合、変更情報メモリエリア１４２に記憶される内容は、その動画ファイルのファイルヘッダーの同期情報に記憶される。

図８及び図９は、本発明の他のの実施の形態を示すものである。この実施の形態は、高速連続撮影された複数の画像ファイルからＥｘｉｆ情報の「フレームレート（ｆｐｓ）」を読み出し、この読み出されたフレームレート（ｆｐｓ）に従って再生速度を制御するようにしたものである。

図８の（Ａ）において、１４０は前述した第１の実施の形態における記憶部１４に代わる本実施の形態における記憶部であり、１４４、１４４、１４４、・・・は、高速連続撮影されてこの記憶部１４０に記憶された複数の画像ファイルである。また、同図の（Ｂ）において、１４４１は画像ファイル１４４のファイルヘッダであり、１４４２はＥｘｉｆ情報記憶領域、１４４３は実画像データである。そして、Ｅｘｉｆ情報記憶領域１４４２には、高速連続撮影された画像であることを示す情報とｆｐｓ（フレームレート）とが記憶される。

図９は、本実施の形態における処理手順を示すフローチャートである。再生モードを設定すると、再生モード待機状態が形成され、制御部７はプログラムメモリ１２に格納されたプログラムに従って図９のフローチャートに示す手順で処理を実行する。まず、ユーザの操作により、ファイル格納エリア１４３からいずれかのファイルの選択が検出されたか否かを判断する（ステップＳ３０１）。ファイル選択が検出されたならば、それが連続撮影モードにて記録された複数の静止画データ（フレーム画像データ）を含むファイルの選択であるか否かを判断する（ステップＳ３０２）。上記のファイルの選択ではなく、一つの静止画データからなるファイルの選択である場合には、選択されたファイルをファイル格納エリア１４３から読み出して、ワークメモリ１３に展開する（ステップＳ３０３）。更に、この展開したファイルに基づく静止画像を表示部１６に表示する（ステップＳ３０４）。そして、キャンセル操作が検出されたか否かを判断し（ステップＳ３０５）、キャンセル操作が検出されるまで、この表示を継続する。

一方、ステップＳ３０２での判断の結果、連続撮影モードにて記録された複数の静止画データ（フレーム画像データ、画像ファイル１４４）を含むファイルの選択であった場合には、実画像データ１４４３を順次読み出して、ワークメモリ１３に展開する（ステップＳ３０６）。このとき、ワークメモリ１３に各々Ｅｘｉｆ情報記憶領域１４４２から、変更情報であるｆｐｓ（フレームレート）を読み出す。引き続き、表示部１６に先頭フレーム画像データに対応する画像を表示する（ステップＳ３０７）。また、この画像を表示した状態で、再生指示が検出されたか否か（ステップＳ３０８）、及びキャンセルが検出されたか否かを判断し（ステップＳ３０９）、キャンセルが検出された場合には、リターンする。

また、再生指示が検出された場合（ステップＳ３０８；ＹＥＳ）には、前記ワークメモリ１３に展開されている複数のフレーム画像データに対応する画像をフレームレート３０ｆｐｓでの再生を開始して、表示部１６に表示するとともに、該表示部１６の再生画像上に、撮影フレームレートと再生フレームレートとが同一（３０ｆｐｓ）であることを示す「１×」を重畳表示して報知する（ステップＳ３１０）。つまり、本実施の形態では前記ステップＳ１０５の処理により、連続撮影モードの冒頭においてはフレームレート３０ｆｐｓで撮影が行われ、また、ステップＳ３１０ではフレームレート３０ｆｐｓで再生が開始されることから、再生モードの冒頭においては、撮影フレームレートと再生フレームレートとが同一となり、これを示す「１×」を重畳表示して報知する。

次に、再生対象のが画像ファイルのフレームレートが変更されているか否かを判断する（ステップＳ３１１）。つまり、ステップＳ３１０での処理により、再生フレームレート３０ｆｐｓで通常再生を行っているので、例えば撮像時に記録されたフレームレートが「１０ｆｐｓ」であるならば、変更されていることとなりステップＳ３１２の判断はＹＥＳとなる。また、例えば撮像時に記録された変更されたフレームレートが「１００ｆｐｓ」である場合にも、変更されていることとなりステップＳ３１１の判断はＹＥＳとなる。よって、ステップＳ３１１からステップＳ３１２に進む。

そして、表示部１６に順次再生表示される複数の画像間の変化が大きいか否か、その変化の度合いを検出する（ステップＳ３１２）。例えば、前述の図７に示すように、徒競走を連続撮影した場合、（１）（２）のようなスタート直後であれば、加速されていないことから走者の動きは少ないので、時間的に隣接する画像（１）（２）間の変化は小さい。しかし、（３）（４）に示すように、走者ａが走者ｂを追い越そうとしているシーンにおいては、走者ａの加速によりその動き（動きベクトル）は大きい。したがって、このシーンを例えば５０ｆｐｓで撮影しても、１／５０秒間隔で時間的に隣接する画像（１）（２）における走者ａの動きは大きいものとなり、コマ送り的な表示状態となってしまう。

したがって、ステップＳ３１２においては、時間的に隣接する（１）（２）のように画像間の変化が小さい場合にはＮＯと判断し、（３）（４）のように画像間の変化が大きい場合にはＹＥＳと判断する。より具体的には、画像（３）（４）における所定領域毎の特徴量を算出し、更に算出した画像（３）（４）に共通する特徴量毎その動きベクトルを算出する。このとき、走者ａを含む特徴算出領域（注目画像）においては、画像（３）（４）間において、所定以上の大きな動きベクトルが算出される。このように、時間的に隣接する画像（３）（４）の対応する特徴検出領域において、所定以上の動きベクトルが検出された場合、ＹＥＳと判断する。

そして、ステップＳ３１２の判断がＹＥＳであった場合には、画像を合成し、再生表示内容に重畳させて再生速度情報を表示して報知する（ステップＳ３１３）。すなわち、前述のように予め動きベクトルを算出して、画像（３）に対して画像（４）を動きベクトルの方向に、動きベクトルの大きさに応じたズレ量でずらした合成画像（３′）（４′）を生成する。更に、図７（３）（３′）（４′）（４）に示すように、合成画像（３′）（４′）を画像（３）に画像（４）間に介挿して再生を行う。

したがって、表示部１６上において（３）→（３′）→（４′）→（４）が順次再生されることにより、コマ送り的な表示状態を滑らかな動きとなる表示状態に補正することができる。

また、画像の合成は前述のように動きベクトルに基づいて行うことから、被写体の動きの大きさに応じて適切な画像を合成して表示することができる。

このとき、ステップＳ３１３における「再生表示内容に重畳させて再生速度情報を表示して報知」の処理により、図示のように、５０ｆｐｃで撮影された画像を３０ｆｐｓで再生している場合の再生速度情報１１６として「×５／３倍速（スロー）」が表示されることとなる。

また、ステップＳ３１２の判断がＮＯであった場合には、画像合成を行うことなく、単に再生表示内容に重畳させて再生速度情報を表示して報知する（ステップＳ３１４）。

次に、ユーザが再生終了操作を行うか、当該連続画像の再生が終了するかの再生終了が検出されたか否かを判断し（ステップＳ３１５）、検出された場合には、ステップＳ３０７に戻る。検出されない場合には、通常再生フレームレート３０ｆｐｓでの再生を継続するとともに、撮影フレームレートと再生フレームレートとが同一（３０ｆｐｓ）であることを示す「１×」を重畳表示して報知する（ステップＳ３１６）。

また、ステップＳ３１５と同様に再生終了が検出されたか否かを判断する（ステップＳ３１７）。そして、検出されない場合にはステップＳ３１１からの処理を繰り返し、検出された場合には、ステップＳ３０７からの処理を実行する。

なお、実施の形態にあっては、本発明をデジタルカメラに適用した場合について説明したが、本発明はこれに限るものではなく、他にもカメラ付き携帯電話端末、カメラ付きＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ：携帯情報端末）、カメラ付きパーソナルコンピュータ、等に適用することも容易に可能であり、要は連続撮影が可能な装置であればいずれにも適用することができる。

（Ａ）は本発明の一実施の形態に係るデジタルカメラの正面図、（Ｂ）は平面図である。 同デジタルカメラのブロック図である。 再生速度テーブルを示す概念図である。 本実施の形態の撮影モードにおける処理手順を示すフローチャートである。 撮影フレームレートと撮影される画像との関係を示す説明図である。 本実施の形態の再生モードにおける処理手順を示すフローチャートである。 ステップＳ２２３の処理内容を示す説明図である。 本発明の他の実施の形態おける記憶部の構成を示す説明図である。 本発明の他の実施の形態における再生モードの処理手順を示すフローチャートである。

符号の説明

１ デジタルカメラ
２ 撮像レンズ
４ シャッターボタン
５ レバースイッチ
７ 制御部
８ ＣＭＯＳ
９ ユニット回路
１０ 画像処理部
１１ 入力部
１２ プログラムメモリ
１３ ワークメモリ
１４ 記憶部
１６ 表示部
７１ 撮影フレームレート制御部
７２ 再生フレームレート制御部
７３ 時計部
１１６ 再生速度情報
１２１ 再生速度テーブル
１４１ 管理エリア
１４２ 変更情報メモリエリア
１４３ ファイル格納エリア

Claims (8)

1. 撮像手段と、
   所定の時間間隔で前記撮像手段を駆動させて、複数の画像を順次取得する画像取得手段と、
   この画像取得手段による取得中に、前記所定の時間間隔を変更する変更手段と、
   この変更手段によって変更された時間間隔を、そのときに取得された画像に関連付けて記憶する時間間隔記憶手段と、
   記録された複数の画像を順次再生する再生手段と、
   この再生手段による再生の際に、再生対象の画像が前記時間間隔記憶手段によって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知手段と
   を備えたことを特徴とする撮像装置。
2. 前記画像取得手段による取得開始からの経過時間を計時する計時手段と、
   この計時手段によって計時された経過時間を前記画像取得手段によって順次取得された複数の画像と対応付けて記録する記録手段とを備え、
   前記時間間隔記憶手段は、前記変更手段によって変更された時間間隔と、変更時の経過情報と対応付けて記憶し、
   前記再生手段は、前記記録手段によって記録された複数の画像を順次再生し、
   前記報知手段は、前記再生手段による再生の際に、再生対象の画像に対応付けて記録された経過時間が前記時間間隔記憶手段によって記憶された変更時の経過時間に到達すると、時間間隔が変更された旨を報知することを特徴とする請求項１記載の撮像装置。
3. 前記所定の時間間隔を基準として、前記変更手段によって変更された時間間隔に対応する再生速度情報を記憶する再生速度情報記憶手段を更に備え、
   前記報知手段は、再生対象の画像に対応付けて記録された経過時間が前記時間間隔記憶手段によって記憶された変更時の経過時間に到達すると、この経過時間に対応して前記変更内容記憶手段に記憶された時間間隔に基づいて、前記再生速度情報記憶手段から対応する再生速度情報を読み出して表示する再生速度情報表示手段を含むことを特徴とする請求項２記載の撮像装置。
4. 前記再生手段による再生中に、前記変更された時間間隔で順次取得した複数の画像間の変化の度合いを検出する検出手段と、この検出手段によって検出された変化の度合いに応じて、前記複数の画像を合成する画像合成手段とを更に備え、
   前記再生手段は、前記複数の画像を順次再生する際に、これら複数の画像間の合成画像が前記合成画像生成手段によって生成されている場合には、これらの複数の画像に介在させて前記合成画像を再生することを特徴とする請求項１又は２記載の撮像装置。
5. 任意の位置に移動可能な操作部を更に備え、
   前記変更手段は、前記操作部が移動した位置に基づいて前記時間間隔を変更することを特徴とする請求項１乃至４にいずれか記載の撮像装置。
6. 前記画像合成手段は、前記複数の画像間における注目画像の動きベクトルを算出し、この動きベクトルに基づき、画像を合成することを特徴とする請求項４記載の撮像装置。
7. 所定の時間間隔で撮像部を駆動させて、複数の画像を順次取得する画像取得ステップと、
   この画像取得ステップによる取得中に、前記所定の時間間隔を変更する変更ステップと、
   この変更ステップによって変更された時間間隔を、そのときに取得された画像に関連付けて記憶させる時間間隔記憶ステップと、
   記録された複数の画像を順次再生する再生ステップと、
   この再生ステップによる再生の際に、再生対象の画像が前記時間間隔記憶ステップによって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知ステップと
   を含むことを特徴とする記録・再生方法。
8. コンピュータを、
   所定の時間間隔で撮像部を駆動させて、複数の画像を順次取得する画像取得手段、
   この画像取得手段による取得中に、前記所定の時間間隔を変更する変更手段、
   この変更手段によって変更された時間間隔を、そのときに取得された画像に関連付けて記憶させる時間間隔記憶手段、
   記録された複数の画像を順次再生する再生手段、
   この再生手段による再生の際に、再生対象の画像が前記時間間隔記憶手段によって記憶された時間間隔と関連付けられているとき、時間間隔が変更された旨を報知する報知手段
   として機能させることを特徴とする記録・再生プログラム。

Images