JP4541610B2 - 画像処理装置、画像処理方法、プログラム、記憶媒体 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、動画の撮影を行う、もしくは、静止画及び／又は動画を再生する画像処理装置、画像処理方法、プログラム、記憶媒体に関するものである。
【０００２】
【従来の技術】
静止画の撮影を行うデジタルカメラにおいては、モーションＪＰＥＧフォーマットを用いた動画撮影機能が搭載され始めている。また、デジタルビデオカメラにおいても、動画撮影中に任意のタイミングで静止画撮影を行うことができる機能がある機種も一部にある。これらの機能を搭載したカメラを使うことによって、撮影シーンや目的に応じて静止画撮影と動画撮影を使い分けることができ、利用者は好みに応じた撮影データ形式を選ぶことができる。
【０００３】
【発明が解決しようとする課題】
しかしながら、デジタルカメラにおける撮影機能は、静止画撮影か動画撮影かのどちらかを一意的に決めた上で撮影を行うものであり、静止画と動画を同時に記録することはできない。また、デジタルカメラで使用されている記録メディアは、コンパクトフラッシュカード（以下ＣＦカードと呼ぶ）やスマートメディアカード（以下ＳＭカードと呼ぶ）などの半導体メモリカードが主であり、記録容量にも限りがあり市販価格も安くはない。従って、モーションＪＰＥＧによる動画撮影では、長時間のデータの記録や、複数の動画データを記録することが難しい。
【０００４】
また、デジタルビデオカメラでは連続した動画撮影中に任意に静止画撮影が可能であるが、動画データはテープメディアへストリームデータとして記録され、静止画データはテープ上、または別の記録メディアに保存される。テープ上に静止画が記録されるような場合には静止画記録の時間帯だけ動画が途切れて記録されるという問題がある。また、別の記録メディアに保存される場合には、記録メディアが分かれているため、あとで動画と静止画の対応を取りにくいという欠点がある。
【０００５】
本発明は以上の問題に鑑みて成されたものであり、静止画とこの静止画の前後数フレーム分の動画を撮影し、撮影された静止画と動画を関連づけて保持する画像処理装置及びその方法を提供することを目的とする。
【０００６】
また、本発明は更に、撮影された静止画とこの静止画の前後数フレームの動画を再生表示する画像処理装置及び画像処理方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明の目的を達成するために、例えば本発明の画像処理装置は以下の構成を備える。
【０００８】
すなわち、連続的なフレーム画像から動画データを作成し、記録媒体に記録可能な画像処理装置であって、
連続的なフレーム画像を入力する入力手段と、
前記入力手段によるフレーム画像の入力中に、静止画像の記録指示を受け付ける指示手段と、
前記指示手段により前記記録指示を受け付けたことに応じて、前記入力手段により入力されたフレーム画像に基づいて静止画像を生成し、該静止画像を静止画像ファイルとして前記記録媒体に記録させる第１の記録制御手段と、
前記静止画像に対応するフレーム画像の前に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第２の記録制御手段と、
前記静止画像に対応するフレーム画像の後に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第３の記録制御手段と、
前記記録媒体に記録された静止画像ファイルの静止画像を表示手段に表示させると共に、該静止画像ファイルに関連する動画ファイルが前記記録媒体に記録されている場合には、前記第２の記録制御手段により前記記録媒体に記録された動画データに基づく画像と、前記第３の記録制御手段により前記記録媒体に記録された動画データに基づく画像と、を前記表示手段に表示させる表示制御手段と
を備えることを特徴とする。
【００１１】
【発明の実施の形態】
以下添付図面を参照して、本発明を好適な実施形態に従って詳細に説明する。
【００１２】
［第１の実施形態］
本実施形態では、静止画、動画の撮影が可能なカメラモジュールを搭載しており、撮影されたデータで、静止画像はＪＰＥＧ圧縮、動画像はＭＰＥＧ４圧縮データとして格納できる画像処理装置について説明する。
【００１３】
図１は、本実施形態における画像処理装置の基本構成を示すブロック図である。同図において、１０１はＣＰＵ（中央演算処理装置）であり、本画像処理装置の動作はこのＣＰＵ１０１により制御される。ＣＰＵ１０１には、静止画コーディック部１０２、動画コーディック部１０３、画像処理部１０４、後述の制御プログラムを記憶しているＲＯＭ（リードオンリーメモリ）１０６、ＲＡＭ（ランダムアクセスメモリ）１０７、データ格納部１０８、タブレットコントロール部１０９、ＬＣＤコントロール部１１１、シャッターＳＷ１１３、制御キー群１１４、電源を供給するためのＤＣ／ＤＣコンバータ１１５、タイマ１１７がそれぞれ接続されている。
【００１４】
そして、画像処理部１０４にはカメラ部１０５、タブレットコントロール部１０９には手書きタブレット１１０、ＬＣＤコントロール部１１１には表示部（ＴＦＴカラー液晶等の表示画面とその駆動部）１１２が接続されている。また、ＤＣ／ＤＣコンバータ１１５には電池１１６から電源が供給されている。表示部１１２と手書きタブレット１１０は、表示部１１２の上部に透明タブレット１１０が積層された一体構造となっており、表示部１１２に表示されているグラフィックデータを参照しながら、対応する位置をペンタッチすることにより後述の各種制御操作ができるようになっている。
【００１５】
ＣＰＵ１０１はＲＯＭ１０６内の制御プログラムに基づいて各種制御を行う。
これらの制御の中には以下のようなものが含まれる。
【００１６】
・画像処理部１０４から出力された動画および静止画の撮影画像信号を読み込み、ＲＡＭ１０７へＤＭＡ転送を行う処理
・ＲＡＭ１０７よりＬＣＤコントロール部へ動画、及び静止画のデータをＤＭＡ転送する処理
・画像処理部１０４から送られてきた画像データをＪＰＥＧ圧縮またはＭＰＥＧ圧縮処理して、ファイル形式でデータ格納部１０４へ格納する処理
・ＪＰＥＧ圧縮、ＭＰＥＧ圧縮処理を行うために静止画コーディック部１０２、動画コーディック部１０３を駆動する処理
・手書きタブレット１１０から入力された情報に従った各種アプリケーションの実行
・シャッターＳＷ１１４の操作に伴う撮影動作の指示
・アプリケーション実行中の制御キー群１１５による制御指示による、対応する制御処理の実行
・各素子への電源の供給をコントロールするための制御信号を、ＤＣ／ＤＣコンバーター１１７に対して出力する処理
また、ＲＡＭ１０７は画像展開エリア１０７ａ、ワークエリア１０７ｂ、ＶＲＡＭ１０７ｃ、動画バッファ１０７ｄ、一時退避エリア１０７ｅを備えている。画像展開エリア１０７ａは、画像処理部１０４より連続的に送られてくる撮影画像（ＹＵＶデジタル信号）やデータ格納部１０８から読み出されたＪＰＥＧ圧縮画像データ、およびＭＰＥＧ圧縮画像データの一部を一時的に格納するためのテンポラリバッファとして、あるいは、画像圧縮処理、伸張処理のための画像専用ワークエリアとして使用される。ワークエリア１０７ｂは、各種プログラムのためのワークエリアで、ＣＰＵ１０１で実行される各種アプリケーションプログラムが使用するものである。ＶＲＡＭ１０７ｃは表示部１１２へ表示する表示データを格納するＶＲＡＭとして使用される。動画バッファ１０７ｄは、動画コーディック部１０３によって動画圧縮されたフレームデータを所定時間分だけ一時的に格納しておく領域である。また、一時退避エリア１０７ｅは各種データを一時退避させるためのエリアである。
【００１７】
データ格納部１０８は、画像データ格納エリア１０８ａとして利用され、ＪＰＥＧ圧縮された撮影静止画データ、およびＭＰＥＧ圧縮された撮影動画データ、さらにアプリケーションより参照される各種付属データ等のファイル、および、フォルダなどを格納しておくための領域として使用される。本実施形態ではデータ格納部１０８としてフラッシュメモリは構成されるが、これに限定されるものではない。
【００１８】
カメラ部１０５は、レンズ群、ＣＣＤ、ＣＣＤコントロール部などを含んでいる。レンズ群は被写体像を光学的にＣＣＤへ投影するために複数枚のレンズで構成されており、ＣＣＤ（光電変換素子）はレンズ群によって投影された撮影画像をアナログ電気信号に変換するための素子である。また、ＣＣＤコントロール部は、ＣＣＤに転送クロック信号やシャッター信号を供給するためのタイミングジェネレータ、ＣＣＤ出力信号のノイズ除去、ゲイン処理を行うための回路、さらに、アナログ信号を１０ビットデジタル信号に変換するためのＡ／Ｄ変換回路などを含んでいる。
【００１９】
また、画像処理部１０４は、カメラ部１０５より出力された１０ビットデジタル信号をガンマ変換、色空間変換、また、ホワイトバランス、ＡＥ、フラッシュ補正等の画像処理を行い、ＹＵＶ（４：２：２）フォーマット、あるいはＹＵＶ（４：２：０）フォーマットの各８ビットデジタル信号出力を行うものである。
【００２０】
静止画コーディック部１０２は、カメラ部１０５、画像処理部１０４によって得られた静止画データ（ＹＵＶデジタル画像データ）に対してＪＰＥＧ圧縮処理を行い、ＪＰＥＧ静止画データを作成するためのＪＰＥＧエンコーダ（作成された静止画データはデータ格納部１０８の画像データ格納エリア１０８ａに格納される）と、この静止画コーディック部１０２によってＪＰＥＧエンコードされ、データ格納部１０８に格納されている静止画データを受け取り、ＪＰＥＧ伸張処理によってＹＵＶデジタル静止画データへ変換するためのＪＰＥＧデコーダを含んでいる。
【００２１】
また、動画コーディック部１０３は、カメラ部１０５、画像処理部１０４により得られた動画データ（ＹＵＶデジタル画像データ）に対してＭＰＥＧ圧縮処理を行い、ＭＰＥＧ動画データを作成するためのＭＰＥＧエンコーダ（作成された動画データはデータ格納部１０８の画像データ格納エリア１０８ａに格納される）と、この動画コーディック部１０３によってＭＰＥＧエンコードされ、データ格納部１０８に格納されている動画データを受け取り、ＭＰＥＧ伸張処理によってＹＵＶデジタル動画データへ変換するためのＭＰＥＧデコーダを含んでいる。
【００２２】
タブレットコントロール部１０９は、手書きタブレット１１０の駆動制御とペンタッチにより手書きタブレット１１０から入力された各種情報をデジタル信号へ変換してＣＰＵ１０１へ転送するための制御を行う。
【００２３】
ＬＣＤコントロール部１１１は、画像処理部１０４から転送されたＹＵＶデジタル画像データ、あるいはデータ格納部１０８中の画像ファイルに対してＪＰＥＧおよびＭＰＥＧ伸張を行ったＹＵＶデジタル画像データを受け取り、ＲＧＢデジタル信号へ変換したあと表示部１１２へ出力する処理、あるいは、ＶＲＡＭ１０７ｃに格納されているＲＧＢデジタルデータを同様に表示部１１２へ出力する処理を行う。表示部１１２は画像を表示するための表示器であり、撮影時の電子ビューファインダーとして撮影画像のモニター画像の出力、あるいは撮影された静止画、動画のデータの再生表示、さらにアプリケーション動作時のＧＵＩ画面の出力などが行われる。この表示部は本実施形態ではＶＧＡ規格（６４０×４８０ドット）ＴＦＴ液晶表示装置とする。
【００２４】
シャッターＳＷ１１３は、撮影動作の開始を指示するためのシャッターである。このシャッターＳＷ１１３はスイッチの押下圧によって２段階のスイッチポジションが有り、１段目のポジション（弱押下圧−以下「半押しポジション」と呼ぶ）の検出で、ホワイトバランス、ＡＥ等のカメラ設定のロック動作が行われ、２段目のポジション（強押下圧−以下「シャッターＯＮポジション」と呼ぶ）の検出で、撮影が行われる。
【００２５】
制御キー群１１４は、アプリケーション実行中におけるオペレーションをタブレットからのペン入力に限定せずに、簡単な機能の制御が行えるようにした補助的キーであり、たとえば、カーソルキー、スクロールキー、決定キー、キャンセルキーなどを含んでいる。
【００２６】
電池１１６はリチャーチャブルの２次電池あるいは乾電池である。また、ＤＣ／ＤＣコンバータ１１５は、電池１１６からの電源供給を受け、昇圧、レギュレーションを行うことにより複数の電源を作り出し、ＣＰＵ１０１を初めとする各素子に必要な電圧の電源を供給している。このＤＣ／ＤＣコンバータ１１５はＣＰＵ１０１からの制御信号により、各々の電圧の供給の開始、停止を制御できる。
【００２７】
タイマー１１７は、動画撮影時間を計測するためものであり、タイマー値をセットした後起動するとタイマーカウントが始まり、セットしたタイマー値になるとタイムアップ信号がＣＰＵ１０１に伝えられる。
【００２８】
以上の構成を備える本実施形態における画像処理装置の動作を、図２に示す同処のフローチャートを用いて以下、説明する。図２は、本実施形態における画像処理装置が行うメインの処理のフローチャートである。
【００２９】
同図において、ステップＳ２０１で本体の電源が投入されると、ステップＳ２０２において、現在のモードが再生モードかどうかのチェックを行う。ここで再生モードの場合には処理をステップＳ２０３に移行し、ステップＳ２０３において、本体に格納されている静止画像、動画像データの再生処理を実行する。この再生処理の詳細については、後述する。また、ステップＳ２０２において再生モードでない場合には処理をステップＳ２０４に移行し、ステップＳ２０４において、内蔵のカメラモジュールによる静止画像、動画像の撮影処理が実行される。この撮影処理の詳細についても、後述する。また、ステップＳ２０４において撮影モードではない場合には処理をステップＳ２０６に移行し、ステップＳ２０６において、その他の処理が実行される。その他の処理とは、例えば、画像処理装置本体のシステム設定や環境設定などの管理用アプリケーションなどである。
【００３０】
ステップＳ２０３、Ｓ２０５、Ｓ２０６のそれぞれの処理が終了すると、ステップＳ２０７において、電源ＯＦＦ操作が実行されたかどうかのチェックを行う。電源ＯＦＦ操作が実行されている場合には、ステップＳ２０８において、電源ＯＦＦ処理が実行される。また、電源ＯＦＦ操作でない場合には、モード切り替え操作が実行されているものとみなし、再び、ステップＳ２０２の再生モードかどうかのチェック処理へ戻る。
【００３１】
次に、上述のステップＳ２０３における静止画、動画再生処理の詳細な説明を図３を用いて以下、説明する。図３は、ステップＳ２０３における処理の詳細を表すフローチャートである。
【００３２】
同図においてまず、ステップＳ３０１で、データ格納部１０８に格納されている各種静止画に対応するサムネイル画像データの一覧表示を行い、オペレーターによる操作が行われるまでウエイトしている。このサムネイル画像データは、静止画像データに対してサムネイルサイズ（８０×６０ｄｏｔ）への縮小処理を行い、ＪＰＥＧ圧縮して作成されたデータである。表示例についての詳細は後述する。
【００３３】
オペレーターによる画像の選択操作は、表示部１１２と一体になっているタブレット１１０に対するペン操作によって指定されたり、制御キー群１１４に含まれる上下左右カーソルキーの操作によるフォーカス移動と決定キーによって行うことができる。ここで、ステップＳ３０２において、サムネイル画像が選択された場合には、ステップＳ３０３において、選択されたサムネイル画像に対応する動画データが存在しているかどうかのチェックを行う。このチェック方法についての詳細は後述する。動画像が存在している場合には処理をステップＳ３０４に移行する。
【００３４】
ステップＳ３０４においてはまず、選択されたサムネイル画像に対応する静止画データをデータ格納部１０８から読み出し、読み出された静止画データを静止画コーディック部１０２によりＪＰＥＧ伸張処理し、伸張された静止画データをＱＶＧＡサイズ（３２０ｘ２４０ｄｏｔ）に縮小処理を行った後表示を行う。さらにステップＳ３０５において、選択表示された静止画像に対応する動画データをデータ格納部１０８より読み出し、動画コーディック部１０３によるＭＰＥＧ伸張処理が実行され、さらにＱＱＶＧＡサイズ（１６０ｘ１２０ｄｏｔ）に縮小処理を行った後、動画再生処理が行われる。つまり、静止画表示、動画再生表示がひとつの画面で同時に行われるものである。これらの表示例についての詳細も後述する。
【００３５】
ここで、ステップＳ３０６において、表示されている静止画データをペン操作、あるいはカーソルキー操作によって指示された場合には処理をステップＳ３０７に移行する。ステップＳ３０７では、この静止画データをＶＧＡサイズで画面全体に表示が行われる。また、同様に、ステップＳ３０８において、再生されている動画データが指示された場合には、動画データをやはりＶＧＡサイズで画面全体に再生表示が行われる。それから、ステップＳ３１０において、ステップＳ３０７、Ｓ３０８における再生表示の状態で、この画面がペンタッチされると、再びステップＳ３０４以降の静止画、動画の同時再生画面の処理へ戻る。また、ステップＳ３１１において、ペンタッチ操作などにより「戻る」指示がなされた場合には、再びステップＳ３０１のサムネイル画像データの一覧表示へ戻る。
【００３６】
また、ステップＳ３０３において、選択された画像に対応する動画データが存在していない場合には、ステップＳ３１２において、選択された画像に対応する静止画データをデータ格納部１０８から読み出し、静止画コーディック部１０２によるＪＰＥＧ伸張処理が実行され、伸張された静止画データをＶＧＡサイズ（６４０ｘ４８０ｄｏｔ）で画面全体に表示が行われる。それからこの画面がペンタッチされると、再びステップＳ３０１のサムネイル画像データの一覧表示へ戻る。
【００３７】
また、ステップＳ３０２において、画像の選択が行われなかった場合には、ステップＳ３１４において、削除操作、つまり後述の削除ボタンアイコンへのペンタッチが行われた場合には、ステップＳ３１５において、画像データの削除処理が行われる。
【００３８】
次に、上述のステップＳ２０５における静止画、動画の撮影処理の詳細な説明を図４を用いて以下説明する。図４は、ステップＳ２０５における処理の詳細を表すフローチャートである。
【００３９】
同図において、ステップＳ４０１では、まず動画撮影モードかどうかのチェックを行い、動画撮影モードの場合には、ステップＳ４０２以降の動画撮影処理へ進む。また、動画撮影モードでない場合には通常の静止画撮影モードということで、ステップＳ４１６以降の静止画撮影処理へ進む。ここで、動画撮影モードとは、静止画の撮影（キャプチャー）時に、前後の任意の時間分の動画を同時に撮影し、記録するような動作モードのことである。
【００４０】
動画撮影処理では、まずステップＳ４０２において、カメラ部１０５から画像処理部１０４を通じて出力される１フレーム分のＹＵＶデジタル画像データを、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む処理を行う。次にステップＳ４０３において、キャプチャー指示がなされたかどうか、つまりシャッターＳＷ１１３が押された（シャッターＳＷ１１３がシャッターＯＮポジションの状態）かどうかのチェックを行い、ここでキャプチャー指示がなされた場合には、ステップＳ４０６以降の処理へ進む。また、キャプチャー指示がない場合には、ステップＳ４０４において、ステップＳ４０２で取り込んだ１フレーム分の画像データに対して、動画コーディック部１０３によってＭＰＥＧ圧縮処理が実行され、ＭＰＥＧ圧縮された１フレーム分のデータは、ステップＳ４０５において、動画バッファ１０７ｄへ一時的に格納される。動画バッファ１０７ｄはリングバッファとなっており、新しいフレームのＭＰＥＧ圧縮データが作成されるたびに、バッファの最終位置に順次追加され、バッファがいっぱいになると古いフレームデータから捨てられていく。バッファのサイズは動画記録時間の設定に応じて任意に可変とすることができる。
【００４１】
また、ステップＳ４０３において、キャプチャー指示がなされた場合には、ステップＳ４０６において、静止画キャプチャー処理、つまり、ステップＳ４０２で取り込んだ１フレーム分の画像データに対して、静止画コーディック部１０２によってＪＰＥＧ圧縮処理が実行される。次にステップＳ４０７において、時間計測のためにタイマー１１７にタイマー値（動画撮影時間）をセットし、タイマー１１７をスタートさせる処理を実行する。このタイマー値の設定方法は特には限定しないが例えば、制御キー群１１４に含まれる「左右」のカーソルキーを用いてその値を増減させ（増減させた値は表示部１１２に表示されている）、決定キーを押下することで設定しても良い。
【００４２】
ステップＳ４０８では、ステップＳ４０２と同様に、カメラ部１０５から画像処理部１０４を通じて出力される１フレーム分のＹＵＶデジタル画像データを、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む処理を行う。さらにステップＳ４０９において、ステップＳ４０４と同様に、ステップＳ４０８で取り込んだ１フレーム分の画像データに対して、動画コーディック部１０３によってＭＰＥＧ圧縮処理が実行される。ＭＰＥＧ圧縮された１フレーム分のデータは、ステップＳ４１０において、動画バッファ１０７ｄの最後尾へ追加格納される。それからステップＳ４１１において、ステップＳ４０７で起動したタイマー１１７がタイムアップしたかどうかをチェックし、まだタイムアップしていない場合、つまり、動画撮影時間がまだ残っている場合には、再びステップＳ４０８へ戻り、フレームデータのＭＰＥＧ圧縮処理を繰り返す。
【００４３】
ステップＳ４１１においてタイマー１１７がタイムアップした場合には、ステップＳ４１２において、まず、ステップＳ４０６でＪＰＥＧ圧縮されたデータに対して、所定のＪＰＥＧヘッダなどのデータを付加し、ＪＰＥＧファイルとして画像データ格納エリア１０８ａに保存する処理を実行する。同時にステップＳ４１３において、キャプチャーされた静止画データに対して縮小処理を行い、さらにＪＰＥＧ圧縮処理によるサムネイルデータの作成を行い、同様にＪＰＥＧファイルとして画像データ格納エリア１０８ａに保存する。次に、ステップＳ４１４において、ステップＳ４０５、Ｓ４１０において格納されている複数フレームのＭＰＥＧ圧縮データに対して、所定のＭＰＥＧヘッダーなどのデータを付加し、ＭＰＥＧファイルとして画像データ格納エリア１０８ａに同様に保存する処理を実行する。これらのＪＰＥＧファイル、ＭＰＥＧファイルは同じファイル名で、拡張子がそれぞれ「．ＪＰＧ」「．ＭＰ４」として保存される。以上のような処理の流れにより、ＪＰＥＧ静止画ファイルとその前後の任意の時間のＭＰＥＧ動画ファイルとして、同じファイル名で関連付けられて作成されることとなる。
【００４４】
また、サムネイルデータには、作成するのに用いた静止画データのファイル名の情報を付加する（ステップＳ４１３における処理）。このようにすることで、ステップＳ３０３においてサムネイル画像を選択すると、選択されたサムネイル画像のデータに付加された情報を参照することで、静止画データ（動画像データ）のファイル名を特定できるので、特定したファイル名と同じファイル名を有する動画データが存在するか否かのチェックを行うことができる。以下、サムネイルデータから対応する静止画データや動画データを特定する、もしくはその存在のチェックを行う際にはこのようにして行う。
【００４５】
それから、ステップＳ４１５において、オペレーターによる終了操作が行われた場合には（例えば画面に「メイン画面に戻る」アイコンを設け、このアイコンをペンタッチした場合には）、撮影処理を終了する。終了操作が行われなかった場合には、ステップＳ４０２へ戻り、フレームデータの読み込み処理が再び開始される。
【００４６】
一方、ステップＳ４０１において動画撮影モードでない場合、ステップＳ４１６において、カメラ部１０５から画像処理部１０４を通じて出力されるＹＵＶデジタル画像データを、連続的に表示部１１２へ出力する処理が行われ、電子ビューファインダーによる撮影対象画像のモニター表示となる。ここで、ステップＳ４１７において、キャプチャー指示がなされたかどうか、つまりシャッターＳＷ１１３が押された（シャッターＳＷ１１３がシャッターＯＮポジションの状態）かどうかのチェックを行い、ここでキャプチャー指示がなされた場合には、ステップＳ４１８において、静止画キャプチャー処理が行われる。つまり、シャッターＳＷ１１３が押下された時点で表示部１１２に表示されている１フレームの画像データをＲＡＭ１０７の画像展開エリア１０７ａに格納する処理が実行される。次にステップＳ４１９において、画像展開エリア１０７ａに格納されている１フレーム画像データに対して、静止画コーディック部１０２によってＪＰＥＧ圧縮処理が実行される。ＪＰＥＧ圧縮された１フレーム分のデータは、ステップＳ４２０において画像データ格納部１０８へＪＰＥＧファイルとして上述の通り作成され、格納される。そして、ステップＳ４２１において、キャプチャーされた静止画データに対して縮小処理を行い、さらにＪＰＥＧ圧縮処理によるサムネイルデータの作成を行い、同様にＪＰＥＧファイルとして画像データ格納エリア１０８ａに保存する。このとき、サムネイルデータには静止画データのファイル名の情報を添付する。そして、ステップＳ４２２において、オペレータによる終了操作が行われた場合には、撮影処理を終了する。終了操作が行われなかった場合には、ステップＳ４１６へ戻り、電子ビューファインダーによるモニター処理が再び開始される。
【００４７】
図５は、ステップＳ３０１におけるサムネイル画像データの一覧表示の画面表示例を表わす図である。同図に示す画面は表示部１１２に表示される。このサムネイル画像データは、データ格納部１０８に格納されている各種静止画に対応するサムネイル静止画像であり、８０×６０ｄｏｔの縮小画像のＪＰＥＧ圧縮データである。また、これらは、図４を用いて説明したように、静止画撮影処理の過程で同時作成され、データ格納部１０８に格納されるものである。
【００４８】
同図において、５０１はサムネイル画像の一覧表示領域であり、各静止画像データに対するサムネイル静止画データが、作成された日時順（この順序に限定されるものではない）に格子状に並べて表示されている。この表示領域において、５０２は動画データを持つ（拡張子は異なるが、同じファイル名の動画像データが存在する）静止画データに対するサムネイル画像データが表示される領域で、対象画像が動画データを持つことを示すマーク５０４が重ねて表示されている。しかし、動画像を持つ静止画を示す方法は同図に示すマークによる方法に限定されるものではない。
【００４９】
また、５０３は静止画データのみのデータに対するサムネイル画像データが表示される領域であり、対象画像が動画データを持っていないのでマーク表示は行われない。このマーク表示５０４が表示されているかどうかを見ることにより、オペレータはサムネイル画像に対応するデータが動画データを持つ静止画データなのかどうかを容易に判断することができる。
【００５０】
５０５はサムネイル画像データのひとつが指定されている状態であることを表わすためのフォーカス表示である。このフォーカス表示は、制御キー群１１４に含まれる上下左右カーソルキーを操作することにより、上下、左右に任意に移動することができ、フォーカスをあてて決定キーを押下、または、フォーカスが当たっているサムネイル画像領域をペンによりタッチすることで、フォーカスが当たっているサムネイル画像の選択を行うことができる。あるいはペンによって、表示画面上の任意のサムネイル画像が表示されている領域をダブルタッチしても、同様にサムネイル画像の選択を行うことができる。
【００５１】
５０６、５０７はそれぞれ上下スクロールを指示する矢印表示を表わす部分であり、サムネイル画像データが１画面に入りきれない場合には、この矢印をペンタッチするとサムネイル画像一覧が上スクロール、下スクロールするものである。
【００５２】
また、５０８は削除ボタンアイコンである。このアイコンをペンタッチすると、選択されている画像（フォーカスの当たっている画像）の削除を実行する。
【００５３】
次に、図６に、図５に示すサムネイル画像一覧表示から動画データを持つ静止画データに対するサムネイル画像が選択された場合の画面表示例を表わす。図６に示す画面は表示部１１２に表示される。
【００５４】
同図において６０１は静止画表示領域で、選択されたサムネイル画像に対応する静止画像データを読み出し、ＪＰＥＧ伸張処理を行った後縮小処理を行い、ＱＶＧＡサイズ（３２０ｘ２４０ｄｏｔ）でこの領域に表示する。また、６０２は静止画像データに対応する動画像データの再生表示が行われる領域で、対象となる動画像データを読み出し、ＭＰＥＧ伸張処理を行った後縮小処理を行い、ＱＱＶＧＡサイズ（１６０ｘ１２０ｄｏｔ）でこの領域に連続的に動画再生表示を行う。
【００５５】
６０３は「戻る」アイコンの表示領域であり、このアイコンをペンタッチすることにより、図５のサムネイル一覧表示へ戻る。また、６０４は再生ボタンアイコンの表示領域であり、このアイコンをペンタッチすることにより、動画再生がスタートする。さらに、６０５は停止ボタンアイコンの表示領域であり、このアイコンをペンタッチすることにより、動画再生が停止する。
【００５６】
この画面において、静止画表示領域６０１をペンタッチすると、ＶＧＡサイズ（６４０ｘ４８０ｄｏｔ）で画面いっぱいに静止画データが表示される。また、動画表示領域６０２をペンタッチすると、本来記録されている動画サイズで動画データが再生表示される。
【００５７】
本実施形態では、静止画としてＪＰＥＧ圧縮によるデジタルデータ、動画としてＭＰＥＧ４圧縮によるデジタルデータを例にあげ説明したが、他の静止画、動画圧縮方式、あるいは非圧縮によるデータを利用しても同様な効果が得られるのは言うまでもない。例えば、静止画としては、ＲＧＢビットマップデータ、ＧＩＦ圧縮データ、ＰＩＮＧ圧縮データなど各種フォーマット、また、動画としては、静止画より圧縮率の高いＭＰＥＧ１、ＭＰＥＧ２圧縮データなども含まれる。
【００５８】
さらに本実施形態では、アプリケーションを実行するためのオペレーションとして、手書きタブレットをペン操作することによって行うような場合について説明したが、これに限定されず、キー操作によるオペレーションでもよい。例えば、サムネイル画像の指定、選択などの操作は、上下左右カーソルキーによってフォーカス枠を移動させることにより、選択されているサムネイル画像を切り替え、さらに決定キーで選択されたサムネイル画像データを指定するようなユーザーインターフェースも考えられる。
【００５９】
［第２の実施形態］
第１の実施形態は、静止画データの圧縮方式としてＪＰＥＧ圧縮、動画データの圧縮方式としてＪＰＥＧよりも圧縮率の高いＭＰＥＧ圧縮を用いた。しかし、これに限定されるものではなく、動画データの格納ファイルサイズを小さくするためには、画質を落として圧縮率を上げる方法だけではなく、画像の大きさを縮小する方法も考えられる。本実施形態では、フレームデータの取り込み時に画素数を間引きして、画像の縮小処理を行った後に動画圧縮処理を行うような実施形態について説明する。
【００６０】
図７は、本実施形態における静止画、動画データの撮影処理の詳細を表わすフローチャートである。
【００６１】
同図においてステップＳ７０１、Ｓ７０２，Ｓ７０３は夫々、ステップＳ４０１，Ｓ４０２，Ｓ４０３と同じ処理である。そして、ステップＳ７０３において、キャプチャー指示がなされた場合には、ステップＳ７０７以降の処理へ進む。また、キャプチャー指示がない場合には、ステップＳ７０４において、ステップＳ７０２で取り込んだ１フレーム分の画像データに対して、縮小処理を行い、ＱＱＶＧＡサイズ（１６０ｘ１２０ｄｏｔ）の画像データへ変換する処理を実行する。そしてステップＳ７０５において、縮小された画像データに対して、静止画コーディック部１０２によってＪＰＥＧ圧縮処理が実行される。ＪＰＥＧ圧縮された１フレーム分のデータは、ステップＳ７０６において、動画バッファ１０７ｄへ一時的に格納される。
【００６２】
また、ステップＳ７０３において、キャプチャー指示がなされた場合には、ステップＳ７０７において、静止画キャプチャー処理、つまり、ステップＳ７０２で取り込んだ１フレーム分の画像データに対して、静止画コーディック部１０２によってＪＰＥＧ圧縮処理が実行される。次にステップＳ７０８において、時間計測のためにタイマー１１７にタイマー値（動画撮影時間）をセットし、タイマーをスタートさせる処理を実行する。
【００６３】
ステップＳ７０９では、ステップＳ７０２と同様に、カメラ部１０５から画像処理部１０４を通じて出力される１フレーム分のＹＵＶデジタル画像データを、ＲＡＭ１０７の画像展開エリア１０７ａに取り込む処理を行う。さらにステップＳ７１０において、ステップＳ７０４と同様に、ステップＳ７０９で取り込んだ１フレーム分の画像データに対して、縮小処理を行い、ＱＱＶＧＡサイズ（１６０ｘ１２０ｄｏｔ）の画像データへ変換する処理を実行する。そしてステップＳ７１１において、縮小された画像データに対して、静止画コーディック部１０３によってＪＰＥＧ圧縮処理が実行され、ＪＰＥＧ圧縮された１フレーム分のデータは、ステップＳ７１２において、動画バッファ１０７ｄの最後尾へ追加格納される。それからステップＳ７１３において、ステップＳ７０８で起動したタイマー１１７がタイムアップしたかどうかをチェックし、まだタイムアップしていない場合、つまり、動画撮影時間がまだ残っている場合には、再びステップＳ７０９へ戻り、フレームデータのＪＰＥＧ圧縮処理を繰り返す。
【００６４】
ステップＳ７１３においてタイマー１１７がタイムアップした場合には、ステップＳ７１４において、まず、ステップＳ７０７でＪＰＥＧ圧縮されたデータに対して、所定のＪＰＥＧヘッダーなどのデータを付加し、ＪＰＥＧファイルとして画像データ格納エリア１０８ａに保存する処理を実行する。同時にキャプチャーされた静止画データに対して縮小処理を行い、さらにステップＳ７１５において、ＪＰＥＧ圧縮処理によるサムネイルデータの作成を行い、同様に画像データ格納エリア１０８ａに保存される。次に、ステップＳ７１６において、ステップＳ７０６、Ｓ７１２において格納されている複数フレームのＪＰＥＧ圧縮データに対して、所定のＪＰＥＧヘッダーやファイルフォーマットに関するデータなどを付加し、Ｍｏｔｉｏｎ−ＪＰＥＧ（以下Ｍ−ＪＰＥＧと呼ぶ）ファイルとして画像データ格納エリア１０８ａに同様に保存する処理を実行する。これらのＪＰＥＧファイル、Ｍ−ＪＰＥＧファイルは同じファイル名で、拡張子がそれぞれ「．ＪＰＧ」「．ＭＪＰＧ」として保存される。以上のような処理の流れにより、１つのＪＰＥＧ静止画ファイルとその前後の任意の時間のＭ−ＪＰＥＧ動画ファイルとして、同じファイル名で関連付けられて作成されることとなる。
【００６５】
また第１の実施形態と同様に、サムネイルデータには、このデータを作成するのに用いた静止画データのファイル名の情報を付加する。このようにすることで、サムネイルデータを選択すると、選択されたサムネイルデータに付加された情報を参照することで、動画像データのファイル名を特定できるので、特定したファイル名と同じファイル名を有する動画データが存在するか否かのチェックを行うことができる。
【００６６】
それから、ステップＳ７１７において、ステップＳ４１５と同様に、オペレーターによる終了操作が行われた場合には、撮影処理を終了する。終了操作が行われなかった場合には、ステップＳ７０２へ戻り、フレームデータの読み込み処理が再び開始される。
【００６７】
ステップＳ７０１の動画撮影モードのチェックにおいて、動画撮影モードでない場合には、ステップＳ７１８において、通常の静止画撮影処理が実行される。
処理の内容は、ステップＳ４１６〜Ｓ４２２と同様の処理である。
【００６８】
［第３の実施形態］
本実施形態では、削除アイコンが操作された場合の処理（ステップＳ３１５における処理）について説明する。
【００６９】
図８は、ステップＳ３１５における削除処理の詳細を表わすフローチャートである。同図において、ステップＳ８０１では、削除指定されたサムネイルデータに対して、動画データが存在するかどうかをチェックする。チェックする方法としては第１の実施形態でも説明したように、指定したサムネイルデータに付加された情報を参照して、ファイル名を特定し、特定したファイル名の動画像データが存在するか否かをチェックする。
【００７０】
動画データが存在した場合、ステップＳ８０２において、削除モードの選択メニュー表示を行う。この削除モードとは、動画データ、静止画データをすべて削除するような「全削除モード」、および動画データのみを削除するような「動画削除モード」の２つのモードであり、これらのモードがメニュー表示されている。ここで、ステップＳ８０３において、全削除モードが選択された場合には、ステップＳ８０４において、まず指定されたサムネイルデータに対応する動画データファイルを読み出し、その削除処理が実行される。続いてステップＳ８０５において、動画データと関連付けられた静止画データファイル（同じファイル名で拡張子が．ＪＰＧのファイル）を読み出し、その削除処理が実行される。また、削除された動画データ、静止画データに対応するサムネイルデータに付加された情報も同様に削除し、処理が終了する。
【００７１】
ステップＳ８０３において、全削除モードが選択されなかった場合には、ステップＳ８０６において、動画削除モードが選択されたかどうかをチェックし、選択された場合には、ステップＳ８０７において、ステップＳ８０４と同様に動画データファイルの削除処理が実行され、処理を終了する。また、ステップＳ８０６において、動画削除モードが選択されなかった場合には、ステップＳ８０８において、削除キャンセル操作が行われたかどうかをチェックし、キャンセル操作が行われた場合には、削除処理を終了し、行われなかった場合には再びオペレータによる操作アクション待ちへ戻る。また、ステップＳ８０１において、動画データが存在しなかった場合には、ステップＳ８０５において、静止画データファイルを読み出し、その削除処理を実行し終了する。
【００７２】
［第４の実施形態］
第１乃至３の実施形態では、図５で示したサムネイル画像データの一覧表示においては、静止画データに対するサムネイル画像のみが一覧表示されるだけであった。
【００７３】
本実施形態では、サムネイル画像一覧表示において、静止画データ、および動画データの所定フレームのサムネイル画像が同時に一覧表示されるような実施形態について説明する。
【００７４】
図９は、本実施形態による、サムネイル画像データの一覧表示の画面表示例を表わす図である。このサムネイル静止画データは、データ格納部１０８に格納されている各種静止画に対応するサムネイル画像と、動画に対応するサムネイル画像であり、図４において説明したように、静止画撮影処理の過程で同時作成され、データ格納部１０８に格納されているものである。また、動画サムネイルデータについては、サムネイル表示の際に、データ格納部１０８に格納されている動画データを読み出し、所定のフレームに対してサムネイルサイズに縮小処理を行った後、静止画サムネイルデータとして表示を行っている。
【００７５】
図９において９０１はサムネイル画像の一覧表示領域であり、静止画像データ、あるいは動画データが作成された日時順に格子状に並べて表示されている。この表示領域において、９０２は静止画データに対するサムネイルデータが表示されている部分であり、１２０×９０ｄｏｔのサムネイルサイズである。また、９０３、９０４は動画データに対するサムネイルデータが表示されている部分であり、９０３は動画の先頭フレームに対するサムネイルデータ、９０４は動画の最終フレームに対するサムネイルデータを示している。しかしこれに限定されるものではなく、任意のフレームに対するサムネイルデータでもよい。この動画に対するサムネイルデータは６０×４５ｄｏｔのサムネイルサイズとなっている。また、９０５は静止画サムネイルのみが表示されている領域を示しており、このデータには動画データが存在してないことを示すものである。
【００７６】
９０６、９０７はそれぞれ上下スクロールを指示する矢印表示を表わす部分であり、サムネイル画像データが１画面に入りきれない場合には、この矢印をペンタッチするとサムネイル画像一覧が上スクロール、下スクロールするものである。
【００７７】
また、９０８は削除ボタンアイコンである。このアイコンをペンタッチすると、選択されている画像の削除を実行する。
【００７８】
［第５の実施形態］
第１乃至４の実施形態では、静止画データ、動画データの関連付けは、同じファイル名で拡張子を違えたファイルとすることにより行っていた。しかし、撮影データ間の関連付けについてはこれに限定されるものではなく、例えば、それぞれ別の名称で保存されたファイルに対して、その関連を記述した管理ファイルなどを作成することによっても実現できる。この管理ファイルの構成例を図１０に示す。同図において同行に記載された静止画データのファイル、動画データのファイルが関連したものであることを示す。また、静止画データ、動画データを多重化した上で一つのファイルに保存するような方法も考えられることは言うまでもない。
【００７９】
また、サムネイルデータにおいても、第１乃至４の実施形態では、静止画データ、動画データのファイル名を添付することで、選択したサムネイルデータに対応する静止画データ、動画データを特定することができたが、これに限定されるものではない。つまり、上述の管理ファイルにこのサムネイルデータを含ませ、サムネイルデータ、静止画データ、動画データの夫々の関連づけを行っても良い。具体的には図１０に例示した管理ファイルの構成において、対応する静止画データのファイル、もしくは動画データのファイルと同行にサムネイル画像のファイル名を記載すればよい。また上述の通り、サムネイルデータ、静止画データ、動画データを１つのファイルに多重化してもよい。
【００８０】
尚、以上の管理ファイル、もしくはサムネイルデータ、静止画データ、動画データを一つのファイルに多重化する処理は、ＣＰＵ１０１により、行われる。
【００８１】
［その他の実施の形態］
さらに、本発明は上記実施形態を実現するための装置及び方法のみに限定されるものではなく、上記システム又は装置内のコンピュータ（CPUあるいはMPU）に、上記実施形態を実現するためのソフトウエアのプログラムコードを供給し、このプログラムコードに従って上記システムあるいは装置のコンピュータが上記各種デバイスを動作させることにより上記実施形態を実現する場合も本発明の範疇に含まれる。
【００８２】
またこの場合、前記ソフトウエアのプログラムコード自体が上記実施形態の機能を実現することになり、そのプログラムコード自体、及びそのプログラムコードをコンピュータに供給するための手段、具体的には上記プログラムコードを格納した記憶媒体は本発明の範疇に含まれる。
【００８３】
この様なプログラムコードを格納する記憶媒体としては、例えばフロッピーディスク、ハードディスク、光ディスク、光磁気ディスク、CD-ROM、磁気テープ、不揮発性のメモリカード、ROM等を用いることができる。
【００８４】
また、上記コンピュータが、供給されたプログラムコードのみに従って各種デバイスを制御することにより、上記実施形態の機能が実現される場合だけではなく、上記プログラムコードがコンピュータ上で稼働しているOS(オペレーティングシステム)、あるいは他のアプリケーションソフト等と共同して上記実施形態が実現される場合にもかかるプログラムコードは本発明の範疇に含まれる。
【００８５】
更に、この供給されたプログラムコードが、コンピュータの機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに格納された後、そのプログラムコードの指示に基づいてその機能拡張ボードや機能格納ユニットに備わるCPU等が実際の処理の一部または全部を行い、その処理によって上記実施形態が実現される場合も本発明の範疇に含まれる。
【００８６】
【発明の効果】
以上説明したように、本発明によれば、静止画（フレーム画像）、前記静止画のサムネイル画像、及び前記静止画に対応する動画像とを夫々関連づけて格納することができるので、関連する前記動画像、前記静止画、サムネイル画像を瞬時に再生することができる。また、前記再生処理により所望する動画像データのサーチを瞬時に行うことができるという効果も奏する。
【図面の簡単な説明】
【図１】本発明の第１の実施形態における画像処理装置の基本構成を示すブロック図である。
【図２】本発明の第１の実施形態における画像処理装置が行うメインの処理のフローチャートである。
【図３】ステップＳ２０３における静止画、動画の再生処理の詳細を示すフローチャートである。
【図４】ステップＳ２０５における静止画、動画の撮影処理の詳細を示すフローチャートである。
【図５】ステップＳ３０１におけるサムネイル画像データの一覧表示の画面表示例を表す図である。
【図６】図５に示すサムネイル画像一覧表示から動画データを持つ静止画データに対するサムネイル画像が選択された場合の画面表示例を示す図である。
【図７】本発明の第２の実施形態における静止画、動画データの撮影処理の詳細を表すフローチャートである。
【図８】ステップＳ３１５における削除処理の詳細を表すフローチャートである。
【図９】本発明の第４の実施形態におけるサムネイル画像データの一覧表示の画面表示例を表す図である。
【図１０】本発明の第５の実施形態における管理ファイルの構成を示す図である。

Claims (11)

1. 連続的なフレーム画像から動画データを作成し、記録媒体に記録可能な画像処理装置であって、
   連続的なフレーム画像を入力する入力手段と、
   前記入力手段によるフレーム画像の入力中に、静止画像の記録指示を受け付ける指示手段と、
   前記指示手段により前記記録指示を受け付けたことに応じて、前記入力手段により入力されたフレーム画像に基づいて静止画像を生成し、該静止画像を静止画像ファイルとして前記記録媒体に記録させる第１の記録制御手段と、
   前記静止画像に対応するフレーム画像の前に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第２の記録制御手段と、
   前記静止画像に対応するフレーム画像の後に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第３の記録制御手段と、
   前記記録媒体に記録された静止画像ファイルの静止画像を表示手段に表示させると共に、該静止画像ファイルに関連する動画ファイルが前記記録媒体に記録されている場合には、前記第２の記録制御手段により前記記録媒体に記録された動画データに基づく画像と、前記第３の記録制御手段により前記記録媒体に記録された動画データに基づく画像と、を前記表示手段に表示させる表示制御手段と
   を備えることを特徴とする画像処理装置。
2. 前記表示制御手段は、前記記録媒体に記録された静止画像ファイルの静止画像を表示手段に表示させると共に、該静止画像ファイルに関連する動画ファイルが前記記録媒体に記録されている場合には、前記第２の記録制御手段により前記記録媒体に記録された動画データの先頭フレームのフレーム画像に基づく画像と、前記第３の記録制御手段により前記記録媒体に記録された動画データの最終フレームのフレーム画像に基づく画像と、を前記表示手段に表示させることを特徴とする請求項１に記載の画像処理装置。
3. 前記第２の記録制御手段は、前記静止画像に対応するフレーム画像の前の所定期間に前記入力手段が入力した連続的なフレーム画像に基づく動画データを前記記録媒体に記録させ、
   前記第３の記録制御手段は、前記静止画像に対応するフレーム画像の後の所定期間に前記入力手段が入力した連続的なフレーム画像に基づく動画データを前記記録媒体に記録させる
   ことを特徴とする請求項１または２に記載の画像処理装置。
4. 前記所定期間は変更可能であり、前記第２の記録制御手段および前記第３の記録制御手段は、変更された期間に対応する連続的なフレーム画像に基づいて生成された動画データを記録させることを特徴とする請求項３に記載の画像処理装置。
5. 更に、
   モードを判定する判定手段を備え、
   静止画像記録モードであると前記判定手段が判定した場合、前記指示手段により記録指示を受け付けたことに応じて、前記第１の記録制御手段は、静止画像ファイルを前記記録媒体に記録させ、
   動画記録モードであると前記判定手段が判定した場合、前記指示手段により記録指示を受け付けたことに応じて、前記第１の記録制御手段、前記第２の記録制御手段、および、前記第３の記録制御手段は、静止画像ファイルおよび動画ファイルを前記記録媒体に記録させる
   ことを特徴とする請求項１ないし４のいずれか１項に記載の画像処理装置。
6. 前記第２の記録制御手段および前記第３の記録制御手段は、前記１つのフレーム画像の前に入力された連続的なフレーム画像に基づく動画データ及び前記１つのフレーム画像の後に入力された連続的なフレーム画像に基づく動画データ、を前記静止画像ファイルに関連する１つの動画ファイルとして前記記録媒体に記録させることを特徴とする請求項１ないし５のいずれか１項に記載の画像処理装置。
7. 前記静止画像ファイルと、該静止画像ファイルに関連する前記１つの動画ファイルとは、拡張子は異なるがファイル名は同じであることを特徴とする請求項６に記載の画像処理装置。
8. 前記入力手段は、撮像手段により撮像して得られたフレーム画像を入力することを特徴とする請求項１ないし７のいずれか１項に記載の画像処理装置。
9. 連続的なフレーム画像から動画データを作成し、記録媒体に記録可能な画像処理装置が行う画像処理方法であって、
   連続的なフレーム画像を入力する入力工程と、
   前記入力工程でのフレーム画像の入力中に、静止画像の記録指示を受け付ける指示工程と、
   前記指示工程で前記記録指示を受け付けたことに応じて、前記入力工程で入力されたフレーム画像に基づいて静止画像を生成し、該静止画像を静止画像ファイルとして前記記録媒体に記録させる第１の記録制御工程と、
   前記静止画像に対応するフレーム画像の前に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第２の記録制御工程と、
   前記静止画像に対応するフレーム画像の後に入力された連続的なフレーム画像に基づく動画データを、前記静止画像ファイルに関連する動画ファイルとして前記記録媒体に記録させる第３の記録制御工程と、
   前記記録媒体に記録された静止画像ファイルの静止画像を表示手段に表示させると共に、該静止画像ファイルに関連する動画ファイルが前記記録媒体に記録されている場合には、前記第２の記録制御工程で前記記録媒体に記録された動画データに基づく画像と、前記第３の記録制御工程で前記記録媒体に記録された動画データに基づく画像と、を前記表示手段に表示させる表示制御工程と
   を備えることを特徴とする画像処理方法。
10. コンピュータを、請求項１乃至８の何れか１項に記載の画像処理装置が有する各手段として機能させるためのコンピュータプログラム。
11. 請求項１０に記載のコンピュータプログラムを格納した、コンピュータ読み取り可能な記憶媒体。

Images