WO2008001850A1 - Caméra capable d'enregistrement vidéo - Google Patents

Description

明 細 書

動画撮影が可能なカメラ

技術分野

[0001] 本発明は、動画を撮影することができる動画撮影が可能なカメラに関するものであ る。

背景技術

[0002] 従来より、静止画のみならず、動画の撮影も可能なデジタルカメラが広く知られてい る。こうしたカメラには、静止画と動画を独立して撮影するものの他、動画の撮影中に 静止画を撮影することができるものも提案されている (例えば、特許文献 1参照)。

[0003] 従来のカメラにおいては、動画の撮影中に静止画撮影用のスィッチを操作したとき に、スィッチ操作のタイミングを示す識別信号を動画情報とともに記録し、静止画再 生を望む場合には、識別信号に基づいて動画情報からスィッチが操作されたときの 画像を取り出して再生するように構成されて 、る。

[0004] 特許文献 1 :特開平 2— 312364号公報

発明の開示

発明が解決しょうとする課題

[0005] し力しながら、従来のカメラでは、撮影した内容を確認するためには特別な操作が 必要であった。

課題を解決するための手段

[0006] 本発明の第 1の態様によると、撮像装置は、被写体の像を繰り返し撮像して画像情 報を得る撮像部と、画像情報の撮像期間中の任意の時刻を示すタイミング情報を記 録する記録部と、撮像期間の終了に応答して、画像情報のうちタイミング情報に対応 する画像を表示する表示部とを有する。

本発明の第 2の態様によると、第 1の態様の撮像装置において、画像情報に基づく 動画情報の撮影開始と撮影終了を指示する動画撮影指示部と、タイミング情報を発 生するタイミング情報発生部とをさらに備え、記録部は、動画撮影指示部とタイミング 情報発生部に応答して、動画情報およびタイミング情報を記録するのが好ましい。 本発明の第 3の態様によると、第 2の態様の撮像装置において、記録部によって記 録された動画情報の少なくとも一部による画像を、動画撮影の終了に応答してタイミ ング情報に基づいて表示部に表示する表示制御部をさらに有するのが好ましい。 本発明の第 4の態様によると、第 1〜3のいずれかの態様の撮像装置において、手 動操作されることによってタイミング情報発生部にタイミング情報を発生させる情報発 生操作部をさらに有するのが好ましい。

本発明の第 5の態様によると、第 4の態様の撮像装置において、画像情報に基づく 静止画の記録タイミングを指示する静止画撮影操作部を、タイミング情報発生部とし て備えるのが好ましい。

本発明の第 6の態様によると、第 5の態様の撮像装置において、記録部は、静止画 撮影操作部の操作に応答して、静止画情報を記録するのが好まし 、。

本発明の第 7の態様によると、第 6の態様の撮像装置において、記録部は、静止画 撮影操作部の操作に基づいて、動画情報とは別に静止画情報を記録するのが好ま しい。

本発明の第 8の態様によると、第 1〜7のいずれかの態様の撮像装置において、タ イミング情報は、撮影状態に基づ 、て発生するのが好ま 、。

本発明の第 9の態様によると、第 8の態様の撮像装置において、タイミング情報は、 撮影時間の経過に基づ 、て発生するのが好ま 、。

本発明の第 10の態様によると、第 6または 7の態様の撮像装置において、撮影中の 状況変化を検知する検知部をさらに有し、タイミング情報は、検知部の検知結果に基 づ 、て発生するのが好まし!/、。

本発明の第 11の態様によると、第 3〜10のいずれかの態様の撮像装置において、 表示制御部は、タイミング情報に対応する時刻を含む所定時間分の動画情報を動画 として表示部に表示させるのが好ましい。

本発明の第 12の態様によると、第 11の態様の撮像装置において、表示制御部は、 所定時間分の動画情報の再生速度を変更して動画として表示部に表示させるのが 好ましい。

本発明の第 13の態様によると、第 11または 12の態様の撮像装置において、表示 制御部は、記録された複数のタイミング情報に基づいて、それぞれのタイミング情報 に対応する時刻を含む複数の所定時間分の動画情報を抽出し、抽出した動画情報 を繋ぎ合わせて表示部に表示させるのが好ましい。

本発明の第 14の態様によると、第 11または 12の態様の撮像装置において、表示 制御部は、記録された複数のタイミング情報に基づいて、それぞれのタイミング情報 に対応する時刻を含む複数の所定時間分の動画情報を抽出し、抽出した複数の動 画情報による画像を同時に表示部に表示させるのが好ましい。

本発明の第 15の態様によると、第 1〜14のいずれかの態様の撮像装置において、 表示制御部は、タイミング情報に対応する時刻の動画情報に基づいて、所定時間に わたり、静止画を表示部に表示させるのが好ましい。

本発明の第 16の態様によると、第 15の態様の撮像装置において、表示制御部は、 記録された複数のタイミング情報に基づ 、て、それぞれのタイミング情報に対応する 時刻の静止画を所定時間間隔で順次、表示部に表示させるのが好まし 、。

本発明の第 17の態様によると、第 15または 16の態様の撮像装置において、表示 制御部は、記録された複数のタイミング情報に基づいて、それぞれのタイミング情報 に対応する時刻の静止画を、同時に表示部に表示させるのが好ま 、。

本発明の第 18の態様によると、第 1〜16のいずれかの態様の撮像装置において、 表示制御部による画像の表示中に操作可能な手動操作部をさらに備え、表示制御 部は、タイミング情報に対応する時刻を含む所定時間分の動画情報を動画として表 示部に表示させるとともに、手動操作部が操作された場合に、表示部に表示中の動 画に代えて、該動画より情報量の多い静止画を表示部に表示させるのが好ましい。 本発明の第 19の態様によると、第 1〜17のいずれかの態様の撮像装置において、 表示制御部を選択的に動作させる動作切換部をさらに備えるのが好ましい。

本発明の第 20の態様によると、撮像装置は、被写体を撮像する撮像部と、撮像部 からの画像情報に基づく動画情報の撮影開始と撮影終了を指示する動画撮影指示 部と、動画撮影指示部に応答して動画情報を記録する記録制御部と、表示部と、記 録制御部によって記録された動画情報による画像を表示部に表示させる再生制御 部と、再生制御部による表示中に操作可能な手動操作部とを有し、再生制御部は、 手動操作部が操作されたとき、表示中の動画を、該動画より情報量の多い静止画に 代えて表示部に表示する。

本発明の第 21の態様によると、画像表示方法は、被写体の像を繰り返し撮像して 画像情報を記録し、画像情報の撮像期間中の任意の時刻を示すタイミング情報を記 録し、撮像期間の終了に応答して、画像情報のうちタイミング情報に対応する画像を 表示する。

本発明の第 22の態様によると、第 21の態様の画像表示方法において、記録する 画像情報は、動画情報であるのが好ましい。

本発明の第 23の態様によると、第 21または 22の態様の画像表示方法において、 タイミング情報は、画像情報の撮影状態に応じて記録されるのが好まし 、。

本発明の第 24の態様によると、第 23の態様の画像表示方法において、タイミング 情報は、画像情報の撮影時間の経過に基づ 、て記録されるのが好ま 、。

本発明の第 25の態様によると、第 23の態様の画像表示方法において、タイミング 情報は、画像情報の撮影中の状況変化に応じて記録されるのが好ま 、。

本発明の第 26の態様によると、第 21〜25のいずれかの態様の画像表示方法にお いて、タイミング情報に対応する画像として、タイミング情報に対応する時刻を含む所 定時間分の画像情報を動画として表示するのが好ましい。

本発明の第 27の態様によると、第 26の態様の画像表示方法において、タイミング 情報に対応する画像として、所定時間分の画像情報の再生速度を変更して動画とし て表示するのが好ましい。

本発明の第 28の態様によると、第 26または 27の態様の画像表示方法において、 タイミング情報に対応する画像として、複数のタイミング情報のそれぞれに対応する 時刻を含む複数の所定時間分の画像情報をつなぎ合わせて表示するのが好ましい 本発明の第 29の態様によると、第 21または 22の態様の画像表示方法において、 タイミング情報に対応する画像として、静止画を表示するのが好ま ヽ。

発明の効果

本発明によれば、例えば動画撮影の終了に応答して、記録部に記録された動画情 報の一部がタイミング信号に基づいて表示部に表示されるから、撮影した内容を容 易に確認することが可能になる。

図面の簡単な説明

[0008] [図 1]本発明の動画撮影が可能なカメラの実施形態に関するブロック図である。

[図 2]電源'録 Z再操作部の詳細構造の一例を示す正面図である。

[図 3]撮影モードと再生モードの詳細を示す概念図である。

[図 4]図 1に示した実施形態における制御部の動作を示すフローチャートである。

[図 5]図 4のステップ S6における画像キヤプチヤー開始処理の詳細を示すフローチヤ ートである。

[図 6]図 4のステップ S7で受付可能となった動画撮影操作部の操作によってスタート する動画撮影フローである。

[図 7]図 6のステップ S34における動画記録開始処理の内容を示すフローチャートで ある。

[図 8]図 6のフローにおけるステップ S32からステップ S34、および図 7の機能を説明 するためのタイミングチャートである。

[図 9]図 6のステップ S39における静止画タイミング記録処理の内容を示すフローチヤ ートである。

[図 10]静止画タイミング記録処理に際しての動画ファイルの作成状態を示すタイミン グチャートである。

[図 11]図 9のフローにおける機能を説明するためのタイミングチャートである。

[図 12]図 4のステップ S8で受付可能となった静止画撮影操作部の操作によってスタ ートする静止画撮影フローである。

[図 13]図 4のステップ S 14で受付可能となった再生操作部の操作によってスタートす る再生フローである。

[図 14]図 6のステップ 43の動画撮影終了後表示処理の詳細を示すフローチャートで ある。

発明を実施するための最良の形態

[0009] 図 1は、本発明の好ましい実施形態に力かる動画撮影が可能なカメラ (撮像装置） のブロック図であり、制御部 1が全体の機能を統括する。電源 '録7再操作部 2は、電 源のオン Zオフ、および、録画モードと再生モードとの切換を行う手動操作部であり、 その詳細構造の一例は後述の図 2に示す。手動操作部 3は、カメラの動作モードを、 その詳細を後述の図 3に示す種々のモードに切換えるとともに、種々の信号を入力 可能な手動操作部である。

[0010] 電源 '録7再操作部 2により録画モードで電源がオンされると、撮像部 4による撮像 が開始され、撮像された動画像が出力部 5の画像表示部 6に表示される。本実施形 態においては、画像表示部 6は、液晶などによって構成された電子ビューファインダ によって構成され、カメラの背面に設けられる。撮像部 4によって撮像された動画デ ータは、同時にバッファ部 7に取り込まれる。ノ ッファ部 7は、所定時間、例えば 10秒 間分の動画データを保持可能であり、 10秒経過する都度、ノ ッファ部 7に保持される データは、次々に新しいデータに置き換えられる。このため、ノ ッファ部 7には、常に 最新の 10秒間の動画データが保持されることになる。また、録画モードで電源がオン されることにより、並行してマイクロフォン 8による音声データの取得も開始され、動画 データと関連付けられてバッファ部 7に取り込まれる。音声データも動画データと同様 にして最新 10秒間分が常にバッファ部 7に保持される。

[0011] 動画撮影操作部 9が操作されると動画撮影が開始され、バッファ部 7に保持されて いる動画データが圧縮部 10で動画圧縮されて記録部 11に記録される。このとき、バ ッファ部 7の音声データも連動して圧縮され、記録部 11に記録される。バッファ部 7に 保持されている動画データおよび音声データをどう採用して動画圧縮するかは、撮 影モードによって異なり、その詳細は後述する。

[0012] 一方、静止画撮影操作部 12が操作されると、そのタイミングにおいて撮像部 4から ノ ッファ部 7に取り込まれた静止画データが圧縮部 10で静止画圧縮され、記録部 11 に記録される。静止画撮影操作部 12が操作されたときの機能は、このような通常の 静止画記録だけでなぐ後述する種々の撮影モードがある。例えば、静止画撮影操 作部 12の操作によって、所定時間、例えば 15秒間のショートムービーを記録する機 能や、動画撮影中あるいは動画再生中に静止画撮影操作部 12を操作した際に動画 データ中に静止画タイミング信号を付加記録する機能などがある。 [0013] 動画撮影中に動画データ中に付加記録される静止画タイミング信号については、 上記のように静止画撮影操作部 12による手動操作に応じて発生させる場合の他、撮 像部 4からの画像データに基づく被写界の明るさの変化や、画像データ解析による シーンの変化、またはマイクロフォン 8からの信号による被写界の音の変化など、動画 撮影状況の変化に応じて自動的に発生させることが可能である。本実施形態にかか るカメラには、動画撮影状況の変化に応じて静止画タイミング信号を自動的に発生さ せるための撮影状況検知部 13が設けられており、撮影状況検知部 13には、撮影者 の視線変化、カメラを持つ撮影者の手の発汗の変化、撮影者の脳波など生体信号の 変化、カメラの姿勢の変化、カメラにかかる加速度の変化などを検知する複数の検知 部が含まれている。

[0014] さらに、動画撮影中に、手動操作部 3に設けられたタイミング信号発生ボタン（図示 せず)を操作して、チャプター用のタイミング信号を動画データ中に付加して記録す ることちでさる。

[0015] また、電源 '録7再操作部 2により再生モードへの切換えを行い、再生操作部 14で 再生指示を行うと、記録部 11からのサムネイルデータが画像表示部 6に表示される。 その後、再生操作部 14で、その一つを選択すると、記録部 11からの画像データが伸 張部 15で伸張され、画像が画像表示部 6に、また、音声データがあればスピーカ 16 にそれぞれ出力される。なお、再生モードについてもモード選択操作部 3で切換え可 能な種々のモードがある。

[0016] 図 2は、電源 '録7再操作部 2の詳細構造の一例を示す正面図である。電源'録 Z 再操作部 2は、スライド可能な操作ボタン 2aを有し、図 2では、この操作ボタン 2aは、 電源オフの位置にある。操作ボタン 2aが破線で示す位置 2bにスライドさせられると、 電源がオンになるとともに、カメラは撮影モードで立ち上がる。一方、操作ボタン 2aが 破線で示す位置 2cにスライドさせられると、電源がオンになるとともに、カメラは再生 モードで立ち上がる。なお、電源 '録7再操作部 2は、図 2に示すような構造に限らず 、電源のオン/オフボタンと、撮影モードおよび再生モードを切換えるモード切換え ボタンとに分けて構成してもよ 、。

[0017] 図 3は、撮影モードと再生モードの詳細を示す概念図である。図 3において、モード は大別して「撮影」モードと「再生」モードに区分され、更に、「撮影」モードは「単純静 止画」モード以下 5つのモードに細分ィ匕されている。説明の便宜上、本明細書におい ては、例えば、「撮影」モードにおける「単純静止画」モードを「単純静止画撮影モー ド」と称し、以下、他のモードにおいても、再生モードにおける細分化モードも含め、 同様の要領の読み方で表の説明を行う。

[0018] 「単純静止画撮影モード」は、静止画撮影操作部 12が操作されたタイミングで静止 画を撮影するモードであり、圧縮部 10における画像記録方式は「静止画圧縮」モード となる。なお、この際、静止画撮影タイミングの数秒前から静止画撮影タイミングの数 秒後までの間の音声データを同時に記録し、音声付静止画データとすることも可能 である。

[0019] また、動画の撮影中に、カメラの動作モードを「単純静止画撮影モード」に切り換え て、静止画を撮影することも可能である。この場合には、静止画圧縮データが記録さ れる他、静止画撮影操作部 12の操作を行った操作タイミングを示す静止画タイミング 信号が、動画撮影による動画圧縮データ中に記録される。

[0020] 「ショートムービー撮影モード」は、静止画撮影操作部 12の操作によって、その前 後の所定時間、例えば操作前 7秒、操作後 8秒の合計 15秒間のショートムービーを 記録するモードである。合計時間の長さ、および、これを操作前後にどのように配分 するかは予め選択して設定しておくことが可能である。操作前の設定時間は、ノ ッフ ァ部 7の容量限界、例えば 10秒まで可能である。また、ショートムービーの合計時間 の全てを静止画撮影操作部 12の操作後とすること、換言すれば、静止画撮影操作 部 12の操作時点力も所定時間のショートムービーの作成を開始するような設定も可 能である。圧縮部 10における画像記録方式は「動画圧縮」モードとなり、音声付動画 が記録される力 これに加え、静止画タイミング信号が動画圧縮データに付加して記 録される。

[0021] 「単純動画撮影モード」は、動画撮影操作部 9の操作によって、動画を記録するモ ードであり、本モードでは、動画撮影操作部 9が操作されたタイミングにおいて撮像 部 4からバッファ部 7に取り込まれた動画データ力も動画撮影が開始される。また、「 単純動画撮影モード」では、動画撮影操作部 9が操作されたタイミングを示す撮影操 作タイミング信号が、動画データ中に付加されて記録される。「単純動画撮影モード」 での圧縮部 10における画像記録方式は「動画圧縮」モードとなり、音声付動画が記 録される。

[0022] なお、「単純動画撮影モード」に設定された状態での動画の撮影中に、撮影モード 力 S「単純静止画撮影モード」に切り換えられた場合には、動画撮影が継続された状態 で、「単純静止画撮影モード」による静止画の撮影が可能な状態となる。

[0023] 「動画 Z手動静止画撮影モード」は、動画を撮影するとともに、その動画撮影中に、 手動操作によって静止画を撮影するモードである。「動画 Z手動静止画撮影モード」 では、「単純動画撮影モード」の場合とは異なり、撮影モードを切換えなくても、動画 の撮影中に静止画を撮影することが可能である。

[0024] 動画の撮影に際しては、動画撮影操作部 9が操作されたタイミングでバッファ部 7に 保持されて ヽる全ての音声付動画データに、動画撮影操作部 9の操作タイミング時 点からの音声付動画データを繋げた形の動画データが記録される。例えば、バッファ 部 7に、その容量一杯の動画データが保持されているとすると、動画撮影操作部 9の 操作タイミングの 10秒前力も始まる動画データが記録されることになる。圧縮部 10に おける画像記録方式は「動画圧縮」モードである。なお、「動画 Z手動静止画撮影モ ード」においても、「単純動画撮影モード」と同様に、動画撮影操作部 9が操作された タイミングを示す撮影操作タイミング信号が、動画データ中に付加されて記録される。

[0025] 一方、静止画の撮影に際しては、「単純静止画撮影モード」の場合と異なり、静止 画圧縮データが生成されることはなぐ静止画タイミング信号のみが生成され、音声 付動画データに付加して記録される。

[0026] また、「動画 Z手動静止画撮影モード」では、動画の撮影に際し、静止画タイミング 信号の発生時点の数秒前力 発生時点の数秒後までの間の所定時間分の動画圧 縮データと、その他の時間帯の動画圧縮データとが区分して生成される。これらの動 画圧縮データは、時間的には連続した動画データとなるが、動画データとしては、そ れぞれ、独立したデータとなるため、動画撮影の開始から終了までの間に、一つの動 画圧縮データが生成されるのではなぐ複数の動画圧縮データが生成される。

[0027] 「動画 Z自動静止画撮影モード」は、上記のような「動画 Z手動静止画撮影モード」 と同一の機能にさらに自動静止画撮影機能を付加したものである。すなわち、動画 撮影中に静止画撮影操作部 12の操作によって静止画タイミング信号が発生した場 合だけでなぐ動画撮影状況の変化に応じて静止画タイミング信号が自動的に発生 した場合でも、これを音声付動画圧縮データに付加して記録する。圧縮部 10におけ る画像記録方式は「動画圧縮」モードである。

[0028] これらの撮影モードの切換えは、モード選択操作部 3を操作して行う他、動画撮影 操作部 9を操作することによつても可能である。従って、例えば、「単純静止画撮影モ ード」に設定されているときに、動画撮影操作部 12を操作した場合には、カメラの動 作モードは、「単純動画撮影モード」、「動画 Z手動静止画撮影モード」または「動画 Z自動静止画撮影モード」のいずれか〖こ変更される。なお、動画撮影操作部 12が操 作されたときに、どの動画撮影モードに切り換えられるかは、予め設定しておくことが 可能である。

[0029] 以上で「撮影モード」の概略説明を終わり、次に「再生モード」について説明する。

[0030] 「静止画再生モード」は、再生操作部 14の操作によって、静止画を再生するモード である。本モードでは、「単純静止画撮影モード」において記録された静止画圧縮デ ータだけでなぐ動画圧縮データに付加された静止画タイミング信号に基づき、その タイミングでの静止画を動画圧縮データに基づいて再生することも可能である。

[0031] 「音声付静止画再生モード」は、再生操作部 14の操作によって、音声付静止画を 再生するモードであり、本モードでは、「ショートムービー撮影モード」で記録された音 声付動画データに基づく再生が行われる。具体的には、記録された静止画タイミング 信号に基づく静止画が、動画圧縮データに基づくショートムービー期間の音声ととも に再生される。また、同様の再生を「動画 Z手動静止画撮影モード」または「動画 Z 自動静止画撮影モード」で記録された音声付動画圧縮データに基づき、個々の静止 画タイミング信号を利用して行うこともできる。なお、「音声付静止画再生モード」では

、上記のように再生操作部 14の操作の都度、動画圧縮データに基づいて静止画を 作成するのに代え、後述する編集操作によって静止画が確定すれば、これを関連す る音声データとともに音声付静止画圧縮データとして再記録し、以後は再生操作部 1 4の操作で直接この音声付静止画圧縮データを再生することもできる。また、編集操 作によれば、このような音声付静止画圧縮データを「ショートムービー撮影モード」で 記録された音声付動画圧縮データ力 だけではなぐ「単純動画撮影モード」、「動画

Z手動静止画撮影モード」、「動画 Z自動静止画撮影モード」にお!、て記録された音 声付動画圧縮データから作成することもできる。更に、「音声付静止画再生モード」で は、当然ながら、再生操作部 14の操作によって、「単純静止画撮影モード」で記録さ れた音声付静止画圧縮データの再生をすることも可能である。

[0032] 「ショートムービー再生モード」は、再生操作部 14の操作によって、「ショートムービ 一撮影モード」で記録された音声付動画データに基づく再生を行うモードである。

[0033] 「ハイライト動画再生モード」は、「動画 Z手動静止画撮影モード」または「動画 Z自 動静止画撮影モード」にお ヽて記録された音声付動画圧縮データを再生するモード である。「ハイライト動画再生モード」では、動画の再生に際し、記録された動画デー タが全編再生されるのではなぐ記録されている動画データの中から、動画撮影操作 部 9の操作タイミングを基準とした所定時間分の動画データ、および、静止画タイミン グ信号を基準とした所定時間、例えば静止画タイミング信号前の 10秒と静止画タイミ ング信号後の 10秒の合計 20秒間の動画データのみが読み出され、これらが繋ぎ合 わされて連続再生される。

[0034] 「単純動画再生モード」は、「単純動画撮影モード」、「動画 Z手動静止画撮影モー ド」または「動画 z自動静止画撮影モード」にお 、て記録された音声付動画圧縮デ ータを全編再生するモードである。

[0035] いずれの動画再生モードにおいても、動画再生中に、静止画撮影操作部 12が操 作されると、静止画タイミング信号が動画データに付加されるように構成されている。

[0036] 図 4は、図 1に示した実施形態における制御部 1の動作を示すフローチャートであり 、電源オフ状態から電源オン状態になった場合の動作を示す。電源のオン Zオフは 、電源 '録7再操作部 2によって行われる力 操作ボタン 2aが図 2のオン位置 2bまた は 2cにスライドさせられていても、所定時間、カメラの無操作状態が続くと、省電設計 により回路的に電源オフになる。この状態から電源オンするには電源 ·録 Z再操作部 2を一度オフ位置に戻して再度オン位置にする場合の他、モード選択操作部 3、動 画撮影操作部 9、静止画撮影操作部 12、再生操作部 14等、他の操作部の操作によ つても電源オン状態に復帰する。

[0037] フローがスタートすると、ステップ S1で上記のいずかにより電源オン状態となるのを 待つ。オン状態が検出されると、ステップ S2に進んで無操作タイマーにリセットスター トをかける。なお、この無操作タイマーは、後のステップにおいて、ユーザによって何 らかの操作が行われた場合には、その時点で改めてリセットされ、そこからカウントが 開始される。次にステップ S3で、カメラの動作モードが撮影モード、つまり図 2の操作 ボタンの位置が 2bにあるかがチェックされる。

[0038] ステップ 3にお 、て撮影モードであった場合は、ステップ S4に進み、撮影モード初 期値設定を行う。撮影モードの設定は、電源をオフしても記憶しておくことが可能で あり、以前に設定されているモードがあれば、それを呼び出して初期値として設定す る。設定の記憶がない場合は、ステップ S4では、デフォルトで「動画 Z自動静止画撮 影モード」に設定する。次にステップ S5で、撮影モード選択操作を可能とし、モード 選択操作部 3による初期値以外の撮影モードへの変更ができるようにする。

[0039] ステップ S6では、後述する画像キヤプチヤー開始処理を行!ヽ、撮像部 4による撮像 、その画像の画像表示部 6での表示、およびバッファ部 7への動画データの蓄積を開 始する。次いでステップ S 7で、動画撮影の操作受付を可能とするとともに、ステップ S 8で、静止画撮影の操作受付を可能とする。これによつて、動画撮影操作部 9または 静止画撮影操作部 12が操作されたときに撮影が可能となる。

[0040] ステップ S9では、電源オフ操作の受付を可能にし、電源'録 Z再操作部 2の操作ボ タン 2の操作でカメラをオフできるようにする。次いで、ステップ S 10で、無操作タイマ 一がスタートして力 カメラの無操作状態が所定時間以上続いたかどうかをチェック する。所定時間経過でタイムアップとなれば、ステップ S 11に進んで電源を回路的に 才フし、ステップ S1に戻る。

[0041] 一方、ステップ S3において、撮影モードでなかったときは再生モードであるから、再 生モード初期表示処理を行い、初期画面を画像表示部 6に表示する。この初期画面 としては、例えばモード選択操作部 3や再生操作部 14の操作と関連付けられたユー ザ一インターフェース画面を表示する。次いでステップ S 13で、再生モード選択操作 を受付可能とし、モード選択操作部 3による再生モードでのモード選択操作ができる ようにする。更に、ステップ S14において、再生操作を受付可能とし、再生操作部 14 による再生操作ができるようにするとともに、ステップ S9に移行する。

[0042] 図 5は、図 4のステップ S6における画像キヤプチヤー開始処理の詳細を示すフロー チャートである。フローがスタートすると、ステップ S21で、撮像部 4による撮像を開始 する。そして、ステップ S22で、ノ ッファ部 7への音声付動画データの蓄積を開始する 。更に、ステップ S23において、撮影開始から所定時間、例えば 10秒経過した時点 でバッファ部 7に保持されているデータ（以下、「バッファ部 7に保持されているデータ 」を「バッファデータ」ということがある）を、撮影部 4から新しく入力されるデータに、順 次、上書きさせる処理を開始させて、ステップ S7に移行する。

[0043] 図 6は、図 4のステップ S7で受付可能となった動画撮影操作部 9の操作によってス タートする動画撮影フローである。動画撮影の操作が受付けられると、カメラの動作 モードが、「単純動画撮影モード」、「動画 Z手動静止画撮影モード」または「動画 Z 自動静止画撮影モード」のいずれかに設定され、フローがスタートする。フローがスタ ートすると、まず、ステップ S31において、動画撮影の操作受付の前に、カメラの動作 モードが「ショートムービー撮影モード」に設定されていたかどうかをチェックする。ス テツプ S31で、「ショートムービー撮影モード」に設定されていた場合には、ステップ S 32に進む。

[0044] ステップ S32では、「ショートムービー撮影モード」に設定された状態で静止画撮影 操作部 12を操作してから、所定時間内に動画撮影操作部 9が操作されたかどうかを チェックする。ステップ S32の判定結果が YESであれば、ステップ S33に移行し、そ のショートムービーデータを動画撮影モードで撮影した動画データにシームレスに繋 いだ動画データを作成するための処理の準備を行う。そして、ステップ S34に移行し 、動画記録開始処理を行う。ステップ S34の詳細は後述する。

[0045] なお、ステップ S32における所定時間は、「単純動画撮影モード」においては、「ショ ートムービー撮影モード」で設定されている状態で、静止画撮影操作部 12を操作し た後の設定記録時間に対応する。一方、「動画 Z手動静止画撮影モード」または「動 画 Z自動静止画撮影モード」にお 、ては、「ショートムービー撮影モード」で設定され ている状態で、静止画撮影操作部 12を操作した後の設定記録時間と、バッファ部 7 に保存されている音声付動画の時間との和になる。これらのいずれを所定時間とす るかは、ステップ S32内において撮影モードを判定し、自動的に決定する。これにつ いては、後述の図 8で詳述する。

[0046] 一方、ステップ S31で「ショートムービー撮影モード」でなかった場合には、ステップ

S31から直接ステップ S34に移行する。また、ステップ S32において、静止画撮影操 作部 12を操作してカゝら所定時間内に動画撮影操作部 9が操作されなカゝつたときは、 ステップ S32から直接ステップ S34に移行する。

[0047] ステップ S34の処理の後、ステップ S35に進み、「動画/自動静止画撮影モード」 設定であるかどうかをチェックする。該当すればステップ S36に進み、静止画タイミン グ信号の自動発生指示処理を行った後、ステップ S37に移行する。一方、該当しな ければステップ S35から直接ステップ S37に移行する。

[0048] ステップ S37では、静止画撮影操作部 12の操作を受付けたかどうかをチェックする

。受付けていなければステップ S38に移行し、静止画タイミング信号が自動発生した 力どうかをチヱックする。 自動発生があれば、ステップ S39に移行して静止画タイミン グ記録処理を行う。ステップ S39の詳細は、後述する。

[0049] 一方、ステップ S37にお 、て静止画撮影操作部 12の操作を受け付けて 、れば、こ れに基づき静止画タイミング信号が発生しているので、直接ステップ S39に移行し、 静止画タイミング記録処理を行う。

[0050] いずれの場合も処理が済めば、ステップ S40に移行する。また、ステップ S38に至 つても静止画タイミング信号が発生して ヽなければ、静止画タイミング記録処理は不 要なので、直接ステップ S40に移行する。

[0051] ステップ S40では、画像表示部 6において動画撮影中に実行すべき表示のための 処理を行う。ステップ 40における処理の詳細については、後述する。また続くステツ プ S41では、動画撮影中における記録部 11の残容量の表示処理を行う。

[0052] ステップ S41の処理が終了すると、ステップ S42に移行して動画撮影操作部 9によ つて動画撮影終了のための操作が行われたかどうかをチェックし、操作が行われてい れば、ステップ S43に移行して、動画撮影終了後の表示処理を行う。この処理が終わ れば、動画撮影処理を終了する。 [0053] 一方、ステップ S42において動画撮影の終了操作が行われていな力つた場合は、 ステップ S37に戻り、動画撮影を継続する。

[0054] 図 7は、図 6のステップ S34における動画記録開始処理の内容を示すフローチヤ一 トである。処理がスタートすると、ステップ S51で「単純動画撮影モード」設定状態であ るかどうかをチェックする。該当しなければ、「動画 Z手動静止画撮影モード」または「 動画 Z自動静止画撮影モード」であるが、この場合は、ステップ S52に進み、静止画 タイミング信号の受付を可能とする。

[0055] 次にステップ S53に進み、撮影開始から所定時間（例えば 10秒)経過するか又は 静止画タイミング信号が入るまでは、バッファデータの圧縮処理を保留する処理を開 始させる。ステップ S53の意義は、「動画 Z手動静止画撮影モード」または「動画 Z 自動静止画撮影モード」においては、撮像開始時点でバッファ部 7に保持されている 音声付画像データを、撮影開示時点力 の音声付き画像データに繋げた形の動画 データを記録する必要があるため、このようにしてバッファデータの圧縮処理を保留 することにある。

[0056] バッファデータの圧縮処理の保留時間が経過すると、ステップ S54に進み、動画撮 影操作部 9の撮影タイミングを基準とした所定時間分の動画データを圧縮して、独立 した動画圧縮データとして作成するとともに、撮影操作タイミング信号を付加する処 理をさせて動画記録開始処理を終了し、図 6のステップ S35に移行する。ステップ S5 4において、動画撮影タイミングを基準とした所定時間分の動画圧縮データを生成す るのは、動画撮影の開始前後の画像は撮影者の関心が高い部分であり、ノ、イライト 動画再生モードにおいて、この部分も再生対象とするためである。また、動画撮影操 作部 9の撮影操作タイミング信号の情報を動画ファイルに付加しておくことにより、動 画開始前後の動画部分をショートムービー記録と同様に扱うことも可能になる。

[0057] 一方、ステップ S51において「単純動画撮影モード」設定であったときは、ステップ S 55に進み、動画撮影操作部 9の操作後、速やかにバッファデータの圧縮処理を開始 させて動画記録開始処理を終了し、図 6のステップ S35に移行する。

[0058] 図 8は、図 6のフローにおけるステップ S32からステップ S34、および図 7の機能を 説明するためのタイミングチャートであり、左力 右に時間が経過するように時間軸を 設けている。図中、静止画撮影操作部 12の操作タイミングを矢印 sで、動画撮影操作 部 9の操作タイミングを矢印 mでそれぞれ示す。また、以下の説明においては、「ショ ートムービー撮影モード」に設定された状態で静止画撮影操作部 12を操作してから 、ショートムービーの撮影が終了するまでの時間を「後半時間」と称する。

[0059] 図 8の（a)、 (b)は「ショートムービー撮影モード」にお 、て静止画撮影操作部 12の 操作をした後に、「単純動画撮影モード」にて動画撮影操作部 9を操作した場合であ る。図 8の（a)は、図 6のステップ S32から直接ステップ S34に移行し、図 7では、ステ ップ S51からステップ S55に移行した場合に該当する。つまり、静止画撮影操作タイ ミング sから後半時間の経過後、すなわち、ショートムービー撮影の時間帯の経過後 に「単純動画撮影モード」にて動画撮影が開始されているため、ショートムービーと動 画は繋がらず、それぞれ、そのまま独立した動画ファイルとして記録される。

[0060] 一方、図 8の（b)は、図 6のステップ S32からステップ S33経由でステップ S34に移 行し、ステップ S34の内容を示す図 7では、ステップ S51からステップ S55に移行した 場合に該当する。つまり、静止画撮影操作タイミング sの後、後半時間の経過前、す なわち、ショートムービー撮影の時間帯の終了前に「単純動画撮影モード」にて動画 撮影が時刻 mで開始されている。この場合は、ショートムービー動画をシームレスに 繋げた動画ファイル 23を作成する。この動画ファイル 23には、静止画撮影操作部 12 が操作されたタイミングを示す静止画タイミング信号 21sと、動画撮影操作部 9が操作 されたタイミングを示す撮影操作タイミング信号 22mが付加される。これらのタイミング 信号 21s、 22mは、静止画撮影操作部 12が操作された後の所定時間内に動画撮影 操作部 9が操作されたかどうかを示す情報となる。なお、当初の時間帯どおりのショー トムービー 21も独立して作成される。

[0061] 図 8の（c)、 (d)は、モード及びフローの流れとも図 8の（a)、 (b)と共通であるが、「 ショートムービー撮影モード」において静止画タイミング前の時間帯がゼロに設定さ れている場合を示したものである。図 8の（c)は、静止画撮影操作タイミング sの後、後 半時間の経過後に「単純動画撮影モード」にて動画撮影が時刻 mで開始されて ヽる ため、ショートムービー 24と動画 22は繋がらず、それぞれ、そのまま独立した動画フ アイノレとして記録される。一方、図 8の（d)は、静止画撮影操作タイミング s後の後半時 間の経過前、すなわち、ショートムービー撮影の時間帯の終了前に「単純動画撮影 モード」にて動画撮影が時刻 mで開始されているため、ショートムービー 24と動画 22 をシームレスに繋げた動画ファイル 25が作成される。動画ファイル 25においても、動 画ファイル 23と同様に、静止画タイミング信号 24sおよび撮影操作タイミング信号 22 mが付力！]される。

[0062] 図 8の（a)、 (b)および図 8の（c)、 (d)の!、ずれの場合にお!、ても、ショートムービ 一 21、 24と動画 22がシームレスに繋がるかどうかは、図 6のステップ S32のチェック、 つまり、静止画撮影操作タイミング sの後の所定時間内に、動画撮影が開始されるか どうかで決まる。

[0063] 図 8の（e)、 (f)は、「ショートムービー撮影モード」にお 、て静止画撮影操作部 12の 操作をした後に、「動画 Z手動静止画撮影モード」または「動画 Z自動静止画撮影モ ード」にて動画撮影操作部 9を操作した場合である。なお、図 8の (e)、（f)の場合、図 6のステップ S32における「所定時間」は、ショートムービーにおける静止画撮影操作 部 12の操作タイミング s後の時間帯 21b (後半時間）と、動画撮影操作部 9の操作タイ ミング m前の時間帯 26aとの和になる。時間帯 26aは、バッファ部 7に保存され、圧縮 処理を保留されている音声付動画の時間に該当しており、「動画 Z手動静止画撮影 モード」または「動画 Z自動静止画撮影モード」における動画ファイル 26では、動画 撮影操作部 9の操作タイミング m前のこの時間帯の動画データも取り込まれるからで ある。

[0064] 図 8の（e)は、図 6のステップ S32から直接ステップ S34に移行し、図 7では、ステツ プ S51からステップ S52を経由してステップ S53に移行した場合に該当する。図 8の（ e)の場合、静止画撮影操作部 12の操作タイミング sの後、時間帯 21bと時間帯 24a の和よりも長 、時間が経過した後の時刻 mで動画撮影操作部 9が操作されて 、るた め、ショートムービー 21と動画 26は繋がらない。従って、それぞれそのまま独立した 動画ファイルとして記録される。

[0065] 一方、図 8の（f)は、図 6のステップ S32からステップ S33経由でステップ S34に移 行し、図 7では、ステップ S51からステップ S52を経由してステップ S55に移行した場 合に該当する。つまり、時間帯 21bと時間帯 24aの和の時間内の時刻 mにて動画撮 影操作部 9が操作されている。この場合は、時間帯 21bと時間帯 24の重複部分を除 いて、ショートムービー 21と動画 26をシームレスに繋げた動画ファイル 27を作成する 。なお、当初の時間帯どおりのショートムービー 21も独立して作成される。

[0066] 図 8で説明した以上の機能の意義は、当初、静止画撮影の意図で撮影を始めたと ころ、途中から動画の撮影を望んだときに、関心の高かった静止画撮影時点のデー タも含めて動画ファイルを作成することを可能にし、シームレスに静止画撮影モード 力も動画撮影モードに移行することができるようにすることにある。

[0067] 図 9は、図 6のステップ S39における静止画タイミング記録処理の内容を示すフロー チャートであり、図 10は、静止画タイミング記録処理に際しての動画ファイルの作成 状態を示すタイミングチャートである。

[0068] フローの説明に先立って、まず、静止画タイミング記録処理の概要を説明する。こ の処理は、ノ、イライト動画再生モードのために行われる処理であり、動画の撮影中に 、静止画タイミング信号を基準とした所定時間分の動画を独立した動画ファイルとし て作成することを主眼とする。このよう〖こすること〖こより、ハイライト動画再生の際に静 止画タイミング信号を基準とした所定時間分の動画のみを容易に抽出し、これらを繋 ぎ合わせて再生することを可能とする。通常、静止画タイミング前後の記録時間は、 ショートムービー撮影モードにおける静止画タイミング前後の記録時間と等しく設定 するが、異なるように設定することも可能である。

[0069] さて、図 9において静止画タイミング記録処理がスタートすると、ステップ S61で前回 の静止画タイミング信号 s の発生から所定時間（b +a )内に、今回の静止画タ イミング信号 sが発生した力どうかをチェックする。ここに、時間 aは静止画タイミング 前の所定時間であり、時間 bは静止画タイミング後の所定時間である。つまり、ステツ プ S61は、前回の静止画タイミング信号 s _の発生から時間 b _が経過し、その後さ らに、時間 aが経過して力も今回の静止画タイミング信号 sが発生した力どうか、換言 すれば、静止画タイミング信号が時間的に近接して発生し、前回の静止画タイミング 信号を基準とした所定時間分の動画と、今回の静止画タイミング信号を基準とした所 定時間分の動画とが時間的に重ならないかどうかをチェックしていることになる。

[0070] ステップ S61で、前回の静止画タイミング信号 s _の発生から所定時間（b +a ) 内に今回の静止画タイミング信号 s_nが発生していなければ、ステップ S62に進み、図 10 (a)に示されるように、今回の静止画タイミング信号 sの発生タイミングよりも時間 a だけ前からのバッファデータを取得する。そして、ステップ S63では、取得したデータ に基づき今回の動画圧縮処理を開始する。ステップ S64では、動画圧縮データに静 止画タイミング信号を記録する。

[0071] ステップ S65では、今回の静止画タイミング信号 sの発生から時間 bが経過したか どうかをチェックしており、経過して、、なければステップ S66で動画撮影が強制打ち 切りされていないかどうかをチェックする。そして、強制打ち切りがない限り、ステップ S66力らステップ S65に戻り、ステップ S65とステップ S66を繰り返しな力ら時間 bの 経過を待つ。そして、時間 bが経過すれば、ステップ S65からステップ S67に移行し 、今回の動画ファイルの作成を完了して、図 6のステップ S40に進む。

[0072] ここに、ステップ S66は、次回の静止画タイミング信号 s が近接して入った場合に n+ 1

、時間 bの経過待ちのループ力も抜け、次回の動画ファイルの作成開始を優先する ためのものである。ステップ S66において強制打ち切りを検知すれば、時間 bの経過 前であっても即座にステップ S67に移行する。

[0073] 一方、ステップ S61において、前回の静止画タイミング信号 s の発生から所定時 間（b +a )内に今回の静止画タイミング信号 sが発生したときは、前回の静止画タ イミング信号を基準とした所定時間分の動画と、今回の静止画タイミング信号を基準 とした所定時間分の動画とが時間的に重なることになる。このため、ステップ S68に移 行し、図 10 (b)に示されるように、今回の動画ファイルの作成を優先し、時間 aの開 始時点で前回の動画ファイルの作成を打ち切る。この結果、前回の動画ファイルの 静止画タイミング後の動画長さは、時間 b より短くなり、最短ではゼロになる。但し、 前回の静止画タイミングを越えて今回の動画ファイルの時間力 前回の動画ファイル の時間に食 、込むことはな 、。

[0074] 次にステップ S69で前回の静止画タイミング信号 s _の発生から時間 a以内に今 回の静止画タイミング信号 sが発生した力どうかをチェックする。図 10 (b)に示される ケースは、前回の静止画タイミング信号 s の発生から時間 aが経過した後に、今回 の静止画タイミング信号 sが発生しているため、ステップ S62に移行し、通常通り、今 回の静止画タイミング信号 s_nの発生タイミングよりも時間 a_nだけ前力 の動画ファイル の作成に入る。

[0075] 一方、図 10 (c)に示されるように、前回の静止画タイミング信号 の発生から時間 a内に今回の静止画タイミング信号 sが発生した場合には、ステップ S70に進み、前 回の静止画タイミング信号 s _の発生タイミングで、前回の動画ファイルの作成を打 ち切るとともに、前回の静止画タイミング信号 s _の発生タイミングから、今回の動画 ファイル作成のためのバッファデータを取得する。この結果、前回の動画ファイルに おける静止画タイミング後の動画長さはゼロとなり、また、今回の動画ファイルにおけ る静止画タイミング前の動画長さは時間 aより短くなる。

[0076] 図 11は、以上のような図 9のフローにおける機能を説明するためのタイミングチヤ一 トであり、左から右に時間が経過するように時間軸を設けている。図 l l (a)、（b)、 (c) におけるそれぞれの帯は、矢印 mのタイミングにて動画撮影操作部 9を操作すること によって撮影された動画を示し、太線は、独立した動画ファイルとして区切られている 部分を示す。また図中の破線は、動画撮影操作部 9の操作タイミングまたは静止画タ イミング信号が入ったタイミングを示す。

[0077] 図 11の（a)で上記の機能を具体的に説明すると、動画ファイル 31には、時刻 mに おける動画撮影操作部 9の撮影操作タイミング信号が付加されて ヽる。この動画ファ ィル 31は、ショートムービー記録と同列に扱うため、時刻 m力も所定時間が経過した ところで区切られ、一つの動画ファイルとされる。図 11においては、時間的に、動画 ファイル 31に続 、て動画ファイル 32が作成されて!、るが、この動画ファイルには静止 画タイミング信号が付加されていないため、動画ファイル 32は、動画ファイル 31とは 別の動画ファイルとして作成される。その後、時刻 siで静止画タイミング信号が入り、 静止画タイミング信号を付加した動画ファイル 33が作成されて 、る。動画ファイル 33 中の部分 33bは、静止画タイミング siから所定時間 bが経過する時点までに対応する 。続く動画ファイル 34には静止画タイミング信号が付加されていない。次に時刻 s2で 発生した静止画タイミング信号に基づきこの静止画タイミング信号を付加した動画フ アイル 35が作成されている。動画ファイル 35の作成が終わると動画ファイル 36が作 成される力 この動画ファイル 36には静止画タイミング信号が付加されていない。因 みに、「ハイライト動画再生モード」では、動画撮影操作部 9の撮影操作タイミング信 号が付加されて 、る動画ファイル 31および静止画タイミング信号が付加されて 、る動 画ファイル 33、 35等が抽出され、繋ぎ合わせて再生される。一方、静止画タイミング 信号が付加されていない動画ファイル 32、 34、 36等は、「ハイライト動画再生モード 」では、再生処理の対象から省かれる。

[0078] 以上の図 11 (a)は、図 9のフローにおいて、ステップ S61からステップ S62を経由し てステップ S63に至り、ステップ S65から直接ステップ S67に移行する動作に該当す る。

[0079] 次に図 11 (b)は、図 9のフローにおいて、動画ファイル 35に注目した場合、前回の 静止画タイミング信号 siの発生力 所定時間（b +a )以内に今回の静止画タイミ ング信号 s2が発生した結果、ステップ S61からステップ S68に進む場合に該当する。 また、前回の静止画タイミング信号 siの発生力も所定時間（a )以上経過して今回の 静止画タイミング信号 s2が発生した結果、ステップ S69からはステップ S62に進む場 合に該当している。図 11 (b)で言うと、今回の動画ファイル 35が前回の動画ファイル 33の時間帯に重複して発生している力 今回の動画ファイル 35を優先し、前回の動 画ファイル 33の作成を強制打ち切りしている。この結果、動画ファイル 33の静止画タ イミング以降の部分 33bの時間が短くなつている。この機能は、図 9のステップ S68に 該当する。

[0080] 次に図 11 (c)は、静止画タイミング信号がさらに近接して発生している場合であつ て、図 9のフローにおいて、ステップ S61からステップ S68に進んだ後、ステップ S69 力もステップ S70に進む場合に該当する。つまり、今回の動画ファイル 35の本来の 時間帯が前回の静止画タイミングよりも前の領域に食い込む状況である。図 9のフロ 一では、ステップ S69の判定結果が YESとなる場合に相当する。このような場合でも 今回の動画ファイルを優先すると、前回の静止画タイミング信号に基づく動画フアイ ルがなくなってしまう。そこで、ステップ S70では、今回の動画ファイルを前回の静止 画タイミング時点から作成するようにしている。この結果、図 11 (c)における動画ファ ィル 33は、その終端部で静止画タイミング siが来るよう作成されるとともに、動画ファ ィル 35の静止画タイミング以前の部分 35aが本来よりも短くなつている。 [0081] 図 12は、図 4のステップ S8で受付可能となった静止画撮影操作部 12の操作によつ てスタートする静止画撮影フローである。静止画操作が受け付けられると、フローがス タートし、ステップ S81において、カメラの動作モードが「単純静止画撮影モード」かど うかをチェックする。「単純静止画撮影モード」以外のモードである場合には、ステツ プ S82において動画撮影中かどうかをチェックする。ステップ S82で動画撮影中でな ければ「ショートムービー撮影モード」であることが確定するのでステップ S83に進む

[0082] ステップ S83では、静止画撮影操作部 12の操作タイミングを基準とした所定時間分 の動画データをバッファ部 7から取り込み、ステップ S84に進む。ステップ S84では、 静止画撮影操作部 12の操作後、図 6のステップ S32で設定されている時間に相当 する所定時間が経過したかどうかをチェックして ヽる。経過して 、なければステップ S 85に進み、動画撮影操作部 9の操作があるかどうかをチェックし、操作がなければス テツプ S84に戻る。以下、所定時間の経過まで、このループを繰り返す。

[0083] ステップ S85にお ヽて所定時間の経過前に動画撮影操作部 9の操作があればステ ップ S86に進み、ステップ S83で取り込んだ動画データを、動画撮影操作部 9の操作 に応じて取得される動画データにシームレスに繋げるために、前編の動画データとし て記録部 11に記録しておく。そして、ステップ S87のショートムービー記録開始に移 行する。一方、ステップ S84で動画撮影操作部 9の操作がないまま所定時間が経過 すればステップ S87に進む。

[0084] ステップ S87においては、ステップ S83で取り込んだ動画データに基づきショートム 一ビー記録を開始し、ステップ S88に進む。ここに、ステップ S88は、図 9で示した動 画撮影における静止画タイミング記録処理に対応するものである。このようにしてショ 一トム一ビーファイルを作成した後、ステップ S89に移行して静止画撮影中の残容量 表示処理を行い、静止画撮影処理を終了する。

[0085] 一方、ステップ S81において「単純静止画撮影モード」設定であった場合は、ステツ プ S90に進み、静止画圧縮で静止画ファイルを作成する。そして、ステップ S91で、 動画撮影中かどうかをチェックし、動画撮影中であれば、静止画圧縮記録と併せて、 静止画撮影部 12の操作に基づく静止画タイミング信号を動画ファイル中にも記録す るため、ステップ S88に移行する。これに対し、ステップ S91において動画撮影中で なければ直接ステップ S89に進み、静止画撮影中の残容量表示処理を行って静止 画撮影処理を終了する。

[0086] 図 13は、図 4のステップ S 14で受付可能となった再生操作部 14の操作によってス タートする再生フローである。再生操作が受け付けられると、フローがスタートし、ステ ップ S 101において、編集操作を受付可能としたあと、ステップ S 102でサムネイル表 示処理を行う。ステップ S 102では、静止画タイミング信号が記録されている動画ファ ィルにつ 、ては、静止画タイミング信号の発生時点の画像が静止画サムネイルとして 表示される。また、「動画 Z手動静止画撮影モード」または「動画 Z自動静止画撮影 モード」で動画が撮影され、動画の撮影開始から撮影終了までの間に、複数の動画 ファイルが生成されて 、る場合には、これらの動画ファイルのサムネイルを混合して 表示することが可能である。例えば、互いに異なる時間帯に撮影された動画 Aと動画 Bがあり、動画 Aの撮影に伴って静止画タイミング信号が記録された動画ファイル al 、 a2、 a3、 a4が発生し、一方で動画 Bの撮影に伴って静止画タイミング信号が記録さ れた動画ファイル bl、 b2、 b3が発生したとする。このとき、動画発生の由来に拘わら ず、動画ファイル al、 a2、 a3、 a4、 bl、 b2、 b3のサムネイルを混合して一覧表示する ことが可能である。また、これらの動画ファイルのうち力も特定の動画ファイルを所定 の検索条件で抽出し、検索条件に合致する動画ファイルのサムネイルのみを表示す ることち可會である。

[0087] ステップ S102のサムネイル表示処理によりサムネイルが表示されると、ステップ S1 03で静止画再生モードかどうかをチェックする。静止画再生モードでなければ動画 再生モードであるため、ステップ S 104に移行し、画像表示部 6に表示されているサム ネイルのうちから、静止画圧縮されたデータのサムネイル (静止画専用サムネイル）の 表示を停止する。これは、静止画圧縮されたデータのサムネイルは、静止画情報の みに対応しているため、動画再生モードに設定されている状態で、かかるサムネイル が選択されても画像データを再生することができないからである。

[0088] 静止画専用サムネイルの表示を停止すると、ステップ S105に移行し、「単純動画 再生モード」であるかどうかチェックする。「単純動画再生モード」設定であることが確 定するとステップ S106に移行し、サムネイルを選択する操作を待ち、操作があれば、 ステップ S107に移行して、選択されたサムネイル力も始まる動画データを、その終端 まで連続的に読み出して、再生処理を開始する。この際、再生対象となる動画データ 力 「動画 Z手動静止画撮影モード」または「動画 Z自動静止画撮影モード」で生成 された複数の独立した動画ファイル力 構成されるデータである場合には、それらの 複数の独立した動画ファイルが生成順序の早いものから順に再生され、切れ目のな V、連続した動画となるように再生される。

[0089] ステップ S108では、動画再生の終了を待ち、終了すればステップ S109に進んで 再生操作部 14によって再生終了の操作がなされたかをチェックする。ステップ S109 において再生終了の操作が検出されれば再生処理を終了し、検出がなければステツ プ S102に戻る。

[0090] ステップ S 105にお!/、て「単純動画再生モード」以外であればステップ S110に移行 し、サムネイルを選択する操作を待ち、操作があれば、ステップ S 107に移行して、選 択されたサムネイルに対応する動画ファイルを読出す処理を行う。「単純動画再生モ ード」以外であったときは、「ショートムービー再生モード」または「ノ、イライト動画再生 モード」のいずれか〖こ設定されているため、ステップ S111では、撮影操作タイミング 信号または静止画タイミング信号を基準とした所定時間分の動画データが記録され た動画ファイルが読出し対象とされる。

[0091] ステップ S111で読出し終了を待ち、終了すればステップ S112で「ショートムービー 再生モード」設定力どうかをチェックする。判定結果が NOであれば、「ハイライト動画 再生モード」であることが確定するので、ステップ S113に進む。ステップ S 113では、 動画撮影操作部 9の操作によって動画の撮影開始と撮影終了が指定された一連の 動画の中で、時間的に次のタイミング信号を含む動画ファイルがあるかどうかをチエツ クする。該当する動画ファイルがあればステップ S111に戻り、以下、一連の動画中の 静止画タイミング信号を含む最後の動画ファイルを読み出すまで、ステップ S111か らステップ S 114のループを繰り返す。これによつて、一連の動画中に存在する静止 画タイミング信号が記録された動画ファイルのすべてが抽出される。ステップ S114で 、これ以上、静止画タイミング信号が記録された動画ファイルがないことがわかると、 それまで抽出した動画ファイルを繋げて再生する処理を開始し、ステップ S108に移 行する。

[0092] ステップ S 113で、「ショートムービー再生モード」設定であることが確定した場合は 、選択されたサムネイルに該当する動画ファイルの読出し完了後、その動画ファイル の再生を行う処理を開始してステップ S 108に移行する。

[0093] これらに対し、ステップ S 103で静止画再生モード設定が検出された場合は、ステツ プ S115に移行し、画像表示部 6に表示されているサムネイルのうちから、撮影操作タ イミング信号または静止画タイミング信号が記録されて 、な 、動画ファイルのサムネィ ル (動画専用サムネイル)の表示を停止する。ステップ S115において、撮影操作タイ ミング信号または静止画タイミング信号が記録された動画ファイルのサムネイルを表 示対象としているのは、静止画圧縮された画像データのみならず、撮影操作タイミン グ信号または静止画タイミング信号が記録された動画ファイルからも静止画を表示す ることが可能だ力 である。

[0094] 動画専用サムネイルの表示を停止すると、ステップ S116に移行し、サムネイルを選 択する操作を待ち、操作があれば、ステップ S 117に移行して、選択されたサムネィ ルに対応する静止画の読み出しおよび表示の処理を行う。ステップ S117では、選択 されたサムネイルが静止画圧縮されたものである場合だけでなく、選択されたサムネ ィルに対応する静止画を動画ファイルから切り出しで静止画処理し、表示する処理も 行う。

[0095] 静止画の表示処理が完了すると、ステップ S118に移行し、「音声付静止画再生モ ード」設定であるかどうかをチェックする。「音声付静止画再生モード」である場合は、 ステップ S119に進み、音声データを読み出して静止画とともに再生する。ステップ S 120では、音声付静止画の再生において、音声再生が終了した力どうかを見ており、 音声の再生が終了すると、ステップ S121に進んで、同時に静止画の再生表示も終 了させる。このように、音声付静止画再生モードでは、音声の終了に伴って静止画の 表示も自動的に終了させる。

[0096] 一方、ステップ S 118において、「音声付き静止画再生モード」ではなぐ音声無し の「静止画再生モード」であることがチェックされたときは、ステップ S 122に移行する 。ステップ S122では、静止画の再生が再生操作部 14によって手動で終了操作され たかどうかを見ており、終了操作があれば、ステップ S121に移行し、静止画の再生 表示を終了する。

[0097] 図 14は、図 6のステップ 43の動画撮影終了後表示処理の詳細を示すフローチヤ一 トである。

[0098] 図 14に示されるように、動画撮影終了後表示処理がスタートすると、まず、ステップ S200において、手動操作部 3によって、自動表示モードに設定されている力否かが 判定される。

[0099] その結果、自動表示モードに設定されていると判定されたときは、ステップ S201に おいて、静止画タイミング信号が検出されたか否かが判定される。

[0100] これに対して、自動表示モードに設定されていないと判定されたときは、ステップ S2 02において、手動操作部 3による動画撮影終了後表示処理の指示があった力否か が判定される。

[0101] その結果、動画撮影終了後表示処理が指示されていないと判定されたときは、動 画撮影終了後表示処理が終了する。

[0102] 一方、ステップ S202において、動画撮影終了後表示処理が指示されていると判定 されたときは、ステップ S 201に移行する。

[0103] ステップ S201において、静止画タイミング信号が検出されたと判定されたときは、ス テツプ S203において、手動操作部 3による動画表示の指示があった力否かが判定さ れる。

[0104] その結果、動画表示が指示されていると判定されたときは、ステップ S 204において 、手動操作部 3によって動画の連続的表示が指示されている力否かが判定される。

[0105] 動画の連続的表示が指示されていると判定されたときは、ステップ S205において、 発生時刻が最も早い静止画タイミング信号に対応する静止画カゝら始まる動画が画像 表示部 6に表示され、ステップ S206において、表示タイマー（図示せず）がリセットさ れる。

[0106] 次いで、ステップ S207において、手動操作部 3が操作されて動画の表示速度の変 更が指示されたカゝ否かが判定される。 [0107] その結果、動画の表示速度の変更が指示されたときは、ステップ S208において、 動画の表示速度が変更されて、ステップ S210に移行し、一方、動画の表示速度の 変更が指示されないときは、ステップ S 209で、動画の表示速度がデフォルト値に設 定されて、ステップ S210に移行する。

[0108] ステップ S210では、設定された表示速度で、動画が画像表示部 6に表示され、表 示タイマー（図示せず）がタイムアップするまで、発生時刻が最も早い静止画タイミン グ信号に対応する静止画から始まる動画の表示が続けられる。

[0109] ステップ S211において、表示タイマーがタイムアップすると、ステップ S212で、発 生時刻が最も早い静止画タイミング信号に対応する静止画カゝら始まる動画の表示が 中止されて、ステップ S213に移行する。

[0110] ステップ S213においては、発生時刻がより遅い静止画タイミング信号がある力否か が判定される。

[0111] その結果、発生時刻がより遅い静止画タイミング信号があると判定されたときは、ス テツプ S214で、その静止画タイミング信号に対応する静止画から始まる動画が画像 表示部 6に表示され、ステップ S 206に戻る。

[0112] これに対して、ステップ S213において、発生時刻がより遅い静止画タイミング信号 力 いと判定されたときは、動画撮影終了後表示処理が終了する。

[0113] 一方、ステップ S204において、手動操作部 3によって動画の連続的表示が指示さ れていないと判定されたときは、ステップ S220において、サムネイルが画像表示部 6 に一覧表示され、各サムネイルが動画として再生される。

[0114] 次いで、ステップ S221において、表示タイマー（図示せず）がリセットされて、ステツ プ S222に移行する。

[0115] ステップ S222においては、手動操作部 3が操作されて動画の再生速度の変更が 指示された力否かが判定される。

[0116] その結果、動画の再生速度の変更が指示されたときは、ステップ S223において、動 画の再生速度が変更されて、ステップ S224に移行し、一方、動画の再生速度の変 更が指示されないときは、ステップ S225で、動画の再生速度がデフォルト値に設定 されて、ステップ S224に移行する。 [0117] ステップ S224においては、設定された再生速度で、動画が画像再生部 6に再生さ れる。

[0118] 次いで、ステップ S226に移行し、手動操作部 3の操作によるサムネイルの指定があ つたカゝ否かが判定される。

[0119] その結果、サムネイルの指定がないと判定されたときは、表示タイマー（図示せず） 力 Sタイムアップするまで、各サムネイルの動画表示が続けられ、ステップ S227で、表 示タイマーがタイムアップすると、動画撮影終了後表示処理が終了する。

[0120] これに対して、サムネイルの指定があつたと判定されたときは、ステップ S228にお いて、記録部 11から対応する画像データが読み出され、伸張部 15で伸張されて、静 止画が画像表示部 6に表示される。この時表示される静止画は、それまでに表示され ている動画よりも高解像度のものであってもよい。また、表示中の動画の画像データ よりも低!、圧縮率の静止画の画像データを用いて静止画を表示してもよ!ヽ。 V、ずれ の場合も、動画よりも情報量の多い静止画を表示することになる。

[0121] こうして表示された静止画は、表示タイマー（図示せず）がタイムアップするまで画 像表示部 6に表示され、ステップ S229で、表示タイマーがタイムアップすると、動画 撮影終了後表示処理が終了する。

[0122] 一方、ステップ S203において、手動操作部 3による動画表示の指示がないと判定 されたときは、ステップ S230において、手動操作部 3によって静止画の連続的表示 が指示されて ヽるか否かが判定される。

[0123] その結果、静止画の連続的表示が指示されていないと判定されたときは、ステップ

S231において、サムネイルが画像表示部 6に表示され、ステップ S232において、表 示タイマー（図示せず）がリセットされる。

[0124] こうして表示されたサムネイルは表示タイマーがタイムアップするまで、画像表示部

6に表示され、ステップ S233において、表示タイマーがタイムアップすると、動画撮 影終了後表示処理が終了する。

[0125] これに対して、ステップ S230において、静止画の連続的表示が指示されていると 判定されたときは、ステップ S234において、発生時刻が最も早い静止画タイミング信 号に対応する静止画データが選択される。 [0126] 次いで、ステップ S235において、表示タイマー（図示せず）がリセットされ、ステップ

S 236にお 、て、静止画が画像表示部 6に表示される。

[0127] ステップ S237において、表示タイマーがタイムアップすると、ステップ S238で、発 生時刻が最も早い静止画タイミング信号に対応する静止画の表示が中止されて、ス テツプ S239に移行する。

[0128] ステップ S239においては、発生時刻がより遅い静止画タイミング信号がある力否か が判定される。

[0129] その結果、発生時刻がより遅い静止画タイミング信号がないと判定されたときは、動 画撮影終了後表示処理が終了する。

[0130] これに対して、発生時刻がより遅い静止画タイミング信号があると判定されたときは 、ステップ S240で、その静止画タイミング信号に対応する静止画が画像表示部 6〖こ 表示され、ステップ S235〖こ戻る。

[0131] 本発明は、以上の実施形態に限定されることなぐ特許請求の範囲に記載された発 明の範囲内で種々の変更が可能であり、それらも本発明の範囲内に包含されるもの であることは 、うまでもな！/、。

[0132] 例えば、前記実施形態においては、カメラの動作モードが「動画 Z手動静止画撮 影モード」または「動画 Z自動静止画撮影モード」に設定されているときには、静止画 タイミング信号のみを記録するように構成され、静止画タイミング信号における静止画 を動画圧縮データに基づいて再生するようにしている力 静止画タイミング信号と併 せて静止画圧縮データも記録するように構成されてもょ ヽ。

[0133] また、前記実施形態においては、図 10および図 11に示されるように、静止画タイミ ング信号が記録された動画ファイルを、タイミング信号が記録されて 、な 、動画フアイ ルと区分して作成しておき、ハイライト動画再生の際に、タイミング信号が記録された 複数の動画ファイルを抽出して繋ぎ併せて再生するよう構成して 、るが、一連の動画 撮影にお ヽて静止画タイミング信号が発生しても、動画ファイルを分割して作成せず 、単に静止画タイミング信号のみを記録するに留めることも可能である。このような動 画記録に基づ!/、てハイライト動画再生を行うには、再生の際に静止画タイミング信号 前後の所定時間のタイムスタンプを一対検出し、これらのタイムスタンプの間の動画 データを抽出する。そして、複数のタイムスタンプに対応して同様の動画データを抽 出し、繋ぎ併せて再生すればよい。

[0134] さらに、前記実施形態においては、図 8に示されるように、ショートムービーと動画デ ータを繋ぎ合わせた動画データを生成するに際し、ショートムービーの動画データを 独立して生成している力 必ずしも、ショートムービーの動画データを独立して生成 する必要はない。この場合、ショートムービーの再生に際しては、ショートムービーと 動画データを繋ぎ合わせた動画データから、動画データ中に付加される静止画タイ ミング信号に基づいて所定時間分の動画データを抽出し、ショートムービー用の動画 データとして再生すればよ!ヽ。

[0135] また、必ずしも、ショートムービーと動画データを繋ぎ合わせた動画データを生成す る必要もなぐ図 10および図 11に示される場合と同様に、ショートムービーと動画デ ータを区別して生成するようにしてよい。このような構成において、ショートムービーの 後半時間内に動画撮影が開始された場合には、動画撮影の開始タイミングでショー トム一ビーの撮影を打ち切り、動画撮影の開始タイミング力 動画データを生成する ようにすればよい。

[0136] さらに、図 14に示された実施形態に力かる動画撮影終了後表示処理においては、 静止画タイミング信号が発生したときの静止画またはその静止画力 始まる動画を画 像表示部 6に表示するように構成されているが、静止画タイミング信号が発生したとき の静止画またはその静止画力 始まる動画を画像表示部 6に表示するのに加えて、 あるいは、静止画タイミング信号が発生したときの静止画またはその静止画力も始ま る動画を画像表示部 6に表示するに代えて、動画撮影操作部 9が操作されたタイミン グを示す撮影操作タイミング信号が発生したときの静止画またはその静止画カゝら始ま る動画を画像表示部 6に表示することもでき、さらには、動画の撮影中にチャプター 用のタイミング信号が発生した場合に、チャプター用のタイミング信号が発生したとき の静止画またはその静止画力も始まる動画を画像表示部 6に表示することもできる。

[0137] 次の優先権基礎出願の開示内容は引用文としてここに組み込まれる。

日本国特許出願 2006年第 181529号（2006年 6月 30日出願）

Claims

請求の範囲

[1] 被写体の像を繰り返し撮像して画像情報を得る撮像部と、

前記画像情報の撮像期間中の任意の時刻を示すタイミング情報を記録する記録部 と、

前記撮像期間の終了に応答して、前記画像情報のうち前記タイミング情報に対応 する画像を表示する表示部とを有する撮像装置。

[2] 請求項 1による撮像装置において、

前記画像情報に基づく動画情報の撮影開始と撮影終了を指示する動画撮影指示 部と、

前記タイミング情報を発生するタイミング情報発生部とをさらに備え、

前記記録部は、前記動画撮影指示部と前記タイミング情報発生部に応答して、前 記動画情報および前記タイミング情報を記録する撮像装置。

[3] 請求項 2による撮像装置において、

前記記録部によって記録された前記動画情報の少なくとも一部による画像を、前記 動画撮影の終了に応答して前記タイミング情報に基づ!/、て前記表示部に表示する 表示制御部をさらに有する撮像装置。

[4] 請求項 1〜3のいずれかによる撮像装置において、

手動操作されることによって前記タイミング情報発生部に前記タイミング情報を発生 させる情報発生操作部をさらに有する撮像装置。

[5] 請求項 4による撮像装置において、

前記画像情報に基づく静止画の記録タイミングを指示する静止画撮影操作部を、 前記タイミング情報発生部として備える撮像装置。

[6] 請求項 5による撮像装置において、

前記記録部は、前記静止画撮影操作部の操作に応答して、静止画情報を記録す る撮像装置。

[7] 請求項 6による撮像装置において、

前記記録部は、前記静止画撮影操作部の操作に基づいて、前記動画情報とは別 に前記静止画情報を記録する撮像装置。

[8] 請求項 1〜7のいずれかによる撮像装置において、

前記タイミング情報は、撮影状態に基づ!ヽて発生する撮像装置。

[9] 請求項 8による撮像装置において、

前記タイミング情報は、撮影時間の経過に基づいて発生する撮像装置。

[10] 請求項 6または 7による撮像装置において、

撮影中の状況変化を検知する検知部をさらに有し、

前記タイミング情報は、前記検知部の検知結果に基づ!、て発生する撮像装置。

[11] 請求項 3〜： LOの 、ずれかによる撮像装置にぉ 、て、

前記表示制御部は、前記タイミング情報に対応する時刻を含む所定時間分の前記 動画情報を動画として前記表示部に表示させる撮像装置。

[12] 請求項 11による撮像装置において、

前記表示制御部は、前記所定時間分の動画情報の再生速度を変更して動画とし て前記表示部に表示させる撮像装置。

[13] 請求項 11または 12による撮像装置において、

前記表示制御部は、記録された複数の前記タイミング情報に基づいて、それぞれ のタイミング情報に対応する時刻を含む複数の前記所定時間分の動画情報を抽出 し、抽出した動画情報を繋ぎ合わせて前記表示部に表示させる撮像装置。

[14] 請求項 11または 12による撮像装置において、

前記表示制御部は、記録された複数の前記タイミング情報に基づいて、それぞれ のタイミング情報に対応する時刻を含む複数の前記所定時間分の動画情報を抽出 し、抽出した複数の動画情報による画像を同時に前記表示部に表示させる撮像装置

[15] 請求項 1〜14のいずれかによる撮像装置において、

前記表示制御部は、前記タイミング情報に対応する時刻の前記動画情報に基づ 、 て、所定時間にわたり、静止画を前記表示部に表示させる撮像装置。

[16] 請求項 15による撮像装置において、

前記表示制御部は、記録された複数の前記タイミング情報に基づいて、それぞれ のタイミング情報に対応する時刻の静止画を所定時間間隔で順次、前記表示部に 表示させる撮像装置。

[17] 請求項 15または 16による撮像装置において、

前記表示制御部は、記録された複数の前記タイミング情報に基づいて、それぞれ のタイミング情報に対応する時刻の静止画を、同時に前記表示部に表示させる撮像 装置。

[18] 請求項 1〜16のいずれかによる撮像装置において、

前記表示制御部による前記画像の表示中に操作可能な手動操作部をさらに備え、 前記表示制御部は、前記タイミング情報に対応する時刻を含む所定時間分の動画 情報を動画として前記表示部に表示させるとともに、前記手動操作部が操作された 場合に、前記表示部に表示中の前記動画に代えて、該動画より情報量の多い静止 画を前記表示部に表示させる撮像装置。

[19] 請求項 1〜17のいずれかによる撮像装置において、

前記表示制御部を選択的に動作させる動作切換部をさらに備える撮像装置。

[20] 被写体を撮像する撮像部と、

前記撮像部からの画像情報に基づく動画情報の撮影開始と撮影終了を指示する 動画撮影指示部と、

前記動画撮影指示部に応答して前記動画情報を記録する記録制御部と、 表示部と、

前記記録制御部によって記録された前記動画情報による画像を前記表示部に表 示させる再生制御部と、

前記再生制御部による表示中に操作可能な手動操作部とを有し、

前記再生制御部は、前記手動操作部が操作されたとき、表示中の動画を、該動画 より情報量の多い静止画に代えて前記表示部に表示する撮像装置。

[21] 被写体の像を繰り返し撮像して画像情報を記録し、

前記画像情報の撮像期間中の任意の時刻を示すタイミング情報を記録し、 前記撮像期間の終了に応答して、前記画像情報のうち前記タイミング情報に対応 する画像を表示する画像表示方法。

[22] 請求項 21による画像表示方法において、 前記記録する画像情報は、動画情報である画像表示方法。

[23] 請求項 21または 22による画像表示方法において、

前記タイミング情報は、前記画像情報の撮影状態に応じて記録される画像表示方 法。

[24] 請求項 23による画像表示方法において、

前記タイミング情報は、前記画像情報の撮影時間の経過に基づ!、て記録される画 像表示方法。

[25] 請求項 23による画像表示方法において、

前記タイミング情報は、前記画像情報の撮影中の状況変化に応じて記録される画 像表示方法。

[26] 請求項 21〜25のいずれかによる画像表示方法において、

前記タイミング情報に対応する画像として、前記タイミング情報に対応する時刻を含 む所定時間分の前記画像情報を動画として表示する画像表示方法。

[27] 請求項 26による画像表示方法において、

前記タイミング情報に対応する画像として、前記所定時間分の画像情報の再生速 度を変更して動画として表示する画像表示方法。

[28] 請求項 26または 27による画像表示方法において、

前記タイミング情報に対応する画像として、複数の前記タイミング情報のそれぞれ に対応する時刻を含む複数の前記所定時間分の画像情報をつなぎ合わせて表示 する画像表示方法。

[29] 請求項 21または 22による画像表示方法において、

前記タイミング情報に対応する画像として、静止画を表示する画像表示方法。