JP4962384B2 - 画像処理装置 - Google Patents

Description

本発明は、画像処理装置に関するものである。

近年では、デジタルカメラを用いて動画と静止画とを撮影できるため、撮影シーンに応じて、動画と静止画とを使い分けて撮影するシーンが存在している。例えば、運動会など動きのあるシーンでは動画で撮影し、集合写真などの動きのないシーンでは静止画で撮影されている。

また、かかるデジタルカメラで撮影した動画（動画をフレーム単位で抽出したフレーム画像）と静止画とが混在した画像一覧を、印刷出力したり、ディスプレイに表示する装置も提案されている。例えば、次の特許文献１には、動画と静止画とを区別可能な態様でディスプレイ７に表示するプリントシステムが記載されている。

一方、かかるフレーム画像や静止画は、デジタル画像であるため、色補正をすることができ、かかる色補正をする方法が各種提案されている。そのため、ユーザにとっては、かかる色補正がされた後の画像一覧と、色補正をする前の画像一覧とを見比べた上で、最終的に印刷出力する画像を決定したいという要望があった。
特開２００５−１３０２５４号公報（段落第「００３６」、図９）

しかしながら、上述した特許文献１に記載されているプリントシステムにおいて、かかるユーザの要望に応えるためには、補正前の画像一覧をディスプレイ７に表示した後、画面を切換え、補正後の画像一覧をディスプレイ７に表示する必要があった。また、かかる画像一覧を記録用紙に印刷出力する場合にも、補正前の画像一覧を一の記録用紙に印刷し、その一の記録用紙とは別の記録用紙に、補正後の画像一覧を印刷する必要があった。

そのため、補正前の画像一覧と補正後の画像一覧とを比較するには、別々画面上、別々の記録用紙上で両者を比較しなければならず、両者を比較し難いという問題点があった。

本発明は、上記の問題点を解決するためになされたものであり、補正前の画像一覧と補正後の画像一覧とを比較し易い画像一覧を同一の出力面上に出力することができる画像処理装置を提供することを目的としている。

この目的を達成するために、態様１記載の画像処理装置は、複数の画像ファイルを取得する取得手段と、その取得手段によって取得された画像ファイルの各々が示す画像について画像品質を補正する補正手段と、その補正手段によって補正された補正後画像の各々と、その補正後画像の各々に対応する補正前画像の各々とを合成し、二分割した一方の領域が補正される前の状態、他方の領域が補正された後の状態として構成される複数の合成画像を生成する生成手段と、その生成手段によって生成される複数の合成画像を、同一出力面上に並べて出力させる出力制御手段とを備えている。

態様２記載の画像処理装置は、態様１に記載の画像処理装置において前記生成手段は、前記一方の領域と前記他方の領域とが略二等分された合成画像を生成する。

態様３記載の画像処理装置は、態様１又は２に記載の画像処理装置において、前記取得手段は、前記画像ファイルとして、動画像ファイルと静止画像ファイルとを取得し、その取得手段によって取得された動画像ファイルからフレーム画像を抽出する抽出手段を備え、前記補正手段は、画像品質を補正する画像として、前記抽出手段から抽出されたフレーム画像と前記静止画像ファイルが示す静止画像とを補正する。

態様４記載の画像処理装置は、態様１から３のいずれかに記載の画像処理装置において、前記複数の合成画像の各々を識別し、且つ、前記合成画像を構成する一方の領域と他方の領域とを識別する識別情報を入力する入力手段と、その入力手段によって入力された識別情報に対応する画像を特定する特定手段と、前記入力手段を介して前記識別情報が入力された場合、前記特定手段によって特定された画像だけを出力させる第２の出力制御手段とを備え、前記生成手段は、前記識別情報が付加された複数の合成画像を生成し、前記出力制御手段は、前記識別情報が付加された複数の合成画像を、同一出力面上に並べて出力させる。

態様５記載の画像処理装置は、態様１から４のいずれかに記載の画像処理装置において、前記補正手段は、各画像の色について、輝度、彩度、色相のうち何れか一以上を補正する。

態様６記載の画像処理装置は、態様１から４のいずれかに記載の画像処理装置において、記録用紙に画像を記録する記録手段を備え、前記出力制御手段は、前記生成手段によって生成された複数の合成画像を、前記記録手段によって前記記録用紙の同一紙面上に記録させる。

態様７記載の画像処理装置は、態様４又は５に記載の画像処理装置において、前記第２の出力制御手段は、前記特定手段によって特定された画像だけを、前記記録手段によって前記記録用紙に記録させる。

態様１記載の画像処理装置によれば、補正手段によって補正された補正後画像は、その補正後画像の各々に対応する補正前画像の各々と合成され、二分割した一方の領域が補正される前の状態、他方の領域が補正された後の状態として構成される複数の合成画像が生成手段によって生成される。そして、その生成された複数の合成画像が出力制御手段によって同一出力面上に並べて出力される。よって、各画像の補正前の状態と、補正後の状態とを、同一出力面上に出力されている合成画像によって比較することができる。従って、補正前の画像一覧と補正後の画像一覧とを比較し易い画像一覧を同一の出力面上に出力することができるという効果がある。

態様２記載の画像処理装置によれば、態様１に記載の画像処理装置の奏する効果に加え、生成手段は、前記一方の領域と前記他方の領域とが略二等分された合成画像を生成するので、各画像の補正前の状態と、補正後の状態とを均等な領域で比較することができる。従って、補正前の画像一覧と補正後の画像一覧とを一層比較し易い画像一覧を同一の出力面上に出力することができるという効果がある。

態様３記載の画像処理装置によれば、態様１又は２に記載の画像処理装置の奏する効果に加え、補正手段は、画像品質を補正する画像として、動画像ファイルから抽出手段によって抽出されたフレーム画像と、静止画像ファイルが示す静止画像とを補正する。よって、フレーム画像の合成画像と、静止画像の合成画像との２種類の合成画像が生成手段によって生成される。そして、その生成された複数の合成画像が出力制御手段によって同一出力面上に並べて出力されるので、フレーム画像に関する補正前の状態と、補正後の状態、静止画像に関する補正前の状態と、補正後の状態とを、同一出力面上に出力されている合成画像によって比較することができる。従って、画像一覧に異なる種類の画像が含まれている場合であっても、補正前の画像一覧と補正後の画像一覧とを比較し易い画像一覧を同一の出力面上に出力することができるという効果がある。

態様４記載の画像処理装置によれば、態様１から３のいずれかに記載の画像処理装置の奏する効果に加え、生成手段によって生成される複数の合成画像には、その複数の合成画像の各々を識別し、且つ、合成画像を構成する一方の領域と他方の領域とを識別する識別情報が付加された状態で生成され、その識別情報が付加された複数の合成画像が出力制御手段によって同一出力面上に並べて出力される。そして、かかる識別情報が入力手段によって入力されると、その入力された識別情報に対応する画像が特定手段によって特定され、その特定された画像だけが第２の出力制御手段によって出力される。よって、ユーザは出力制御手段によって同一の出力面上に出力される画像一覧上で、補正前の画像一覧と補正後の画像一覧とを比較し、どちらかの画像を出力させるか選択する場合において、その画像に対応つけてられている識別情報を入力手段を介して入力することで、その画像を出力させることができる。従って、ユーザにとって、簡単な操作で、所望する画像を出力させることができるという効果がある。

態様５記載の画像処理装置によれば、態様１から４のいずれかに記載の画像処理装置の奏する効果に加え、補正手段は、各画像の色について、輝度、彩度、色相のうち何れか一以上を補正するので、各画像について、輝度、彩度、色相のうち何れか一以上が補正された補正後の状態と、補正前の状態とを同一出力面上に出力されている合成画像によって比較することができる。従って、補正前の画像一覧と、色に関して補正された補正後の画像一覧とを比較し易い画像一覧を同一の出力面上に出力することができるという効果がある。

態様６記載の画像処理装置によれば、態様１から５のいずれかに記載の画像処理装置の奏する効果に加え、出力制御手段は、生成手段によって生成された複数の合成画像を、記録手段によって記録用紙の同一紙面上に記録させるので、各画像の補正前の状態と、補正後の状態とを比較し易い画像一覧が同一の記録用紙上に記録された出力をさせることができるという効果がある。

態様７記載の画像処理装置によれば、態様４又は５に記載の画像処理装置の奏する効果に加え、第２の出力制御手段は、特定手段によって特定された画像だけを、記録手段によって記録用紙に記録させるので、ユーザが所望する画像が記録された記録用紙を出力させることができるという効果がある。

以下、本発明の好ましい実施形態について、添付図面を参照して説明する。図１は、本発明の画像処理装置の実施形態である多機能周辺装置（以下、「ＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ）」と称す）１の外観構成を示した斜視図である。このＭＦＰ１は、特に、補正前の画像一覧と補正後の画像一覧とを比較し易い画像一覧を同一の出力面上に出力することができる装置である。

このＭＦＰ１は、フォトキャプチャー機能、コピー機能、スキャナ機能、メディアキャプチャ機能などの各種機能を有する多機能周辺装置である。メディアキャプチャ機能では、後述するスロット部６に装着されたメディアカードから画像ファイルを読み出して印刷出力する処理、メディアカードから読み出した画像ファイルに対応した画像をＬＣＤ５に表示出力する処理、スキャナ機能により読み取られた画像データをメディアカードに保存する処理などを実行できる。

ＭＦＰ１の上部には、原稿を読み取るためのスキャナ２が配置されている。また、筐体内部には記録用紙に画像を印刷する装置として、所謂インクジェットプリンタで構成されたプリンタ３が内蔵されている。

また、ＭＦＰ１の前面には、スロット部６が設けられている。このスロット部６には、コンパクトフラッシュ（登録商標）、ＳＤメモリカードなどの各種メディアカードを直接挿入できるカードスロットが設けられている。

また、原稿カバー体の前方には操作パネルが設けられており、複数のキーやタッチパネルで構成される操作部４、およびＬＣＤ５を具備する。ＭＦＰ１は、ＬＣＤ５に操作手順や実行中の処理の状態を表示させると共に、操作部４の操作に対応する情報を表示させる。

図２を参照して、ＭＦＰ１の電気的構成について説明する。図２は、ＭＦＰ１の電気的構成を示すブロック図である。ＭＦＰ１は、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ＥＥＰＲＯＭ１４、スキャナ２、プリンタ３、操作部４、ＬＣＤ５、スロット部６を主に有している。

このうち、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、ＥＥＰＲＯＭ１４は、バスライン２６を介して互いに接続されている。また、スキャナ２、プリンタ３、操作部４、ＬＣＤ５、スロット部６、バスライン２６は、入出力ポート２７を介して互いに接続されている。

ＣＰＵ１１は、ＲＯＭ１２、ＲＡＭ１３やＥＥＰＲＯＭ１４に記憶される固定値やプログラムに従って、ＭＦＰ１が有している各機能の制御や、入出力ポート２７と接続された各部を制御するものである。

ＲＯＭ１２は、ＣＰＵ１１によって実行される制御プログラム１２ａを記憶すると共に、電源遮断後も内容を保持可能な不揮発性のメモリである。制御プログラム１２ａは、後述する図８〜図１５にフローチャートで示す処理を実行するためのプログラムを含んでいる。

ＲＯＭ１２には、さらに横方向画像配置数記憶領域１２ｂ、１ページ画像配置数記憶領域１２ｃが設けられている。

横方向画像配置数記憶領域１２ｂは、「横方向の配置枚数」を記憶する領域である。「横方向の配置枚数」は、画像一覧において、横一列に並べて配置可能なインデックス画像の数を示す値である。なお、本実施形態のＭＦＰ１には、予め印刷用紙サイズ（Ｌ版、Ａ４、Ｌｅｔｔｅｒなど）、および印刷モード（高精細、普通、高速など）に応じて、複数種類の「横方向の配置枚数」が記憶されており、後述する配置印刷処理（図１３参照）では、この中から適した値を読み出して用いる。

１ページ画像配置数記憶領域１２ｃは、「１ページ内画像配置数」を記憶する領域である。「１ページ内画像配置数」は、１ページ分の記録用紙に形成する画像一覧に、最大で何個分のインデックス画像を配置可能であるかを示す値である。なお、本実施形態においては、予め印刷用紙サイズおよび印刷モードに応じて、複数種類の「１ページ内画像配置数」が記憶されており、後述する配置印刷処理（図１３参照）では、この中から適した値を読み出して用いる。

ＲＡＭ１３は、ＭＦＰ１の各操作の実行時に各種のデータを一時的に記憶するためのメモリであり、抽出フレーム数記憶領域１３ａ、処理ファイル数記憶領域１３ｂ、処理画像総数記憶領域１３ｃ、生成ページ数記憶領域１３ｄ、グループ情報記憶領域１３ｇ、ファイル情報記憶領域１３ｈ、配置情報記憶領域１３ｉ、フレーム画像情報記憶領域１３ｊ、デコードデータ記憶領域１３ｋ、カウンタ記憶領域１３ｍ、画像管理情報記憶領域１３ｎが設けられている。

ここで、本実施形態で用いる用語の意味を説明する。本実施形態において、「動画像」とは、多数のフレーム画像を切り替え表示することにより再生される画像を意味している。「動画像ファイル」は、動画像を再生するためのファイルであって、例えば、ＡＶＩ動画ファイル、クイックタイム動画ファイルなどで構成される。ただし、動画像を再生可能な情報であれば、どのような形式のファイルであっても差し支えない。また、本実施形態において、「フレーム画像情報」は、動画像を構成する１のフレーム画像に対応した情報を意味している。

抽出フレーム数記憶領域１３ａは、「フレーム画像抽出枚数」を記憶する領域である。「フレーム画像抽出枚数」は、１の動画像ファイル当たり、何枚分のフレーム画像に対応したフレーム画像情報を抽出するかを示す値である。例えば、「フレーム画像抽出枚数」として「５」が記憶されている場合、ＭＦＰ１は、メディアカードに格納された動画像ファイルの各々について、１の動画像ファイル当たり、５枚のフレーム画像に対応したフレーム画像情報を抽出し、その抽出したフレーム画像情報に基づいて、１の動画像ファイル当たり、５個のインデックス画像を、画像一覧に配置する。

本実施形態のＭＦＰ１は、ユーザが操作部４から入力した任意の値を「フレーム画像抽出枚数」として、抽出フレーム数記憶領域１３ａに記憶するものとして説明するが、「フレーム画像抽出枚数」が予めＲＯＭ１２などに記憶されていても良い。

処理ファイル数記憶領域１３ｂは、「総処理ファイル数」を記憶する領域である。「総処理ファイル数」は、メディアカードに格納される静止画像ファイルと動画像ファイルの合計を示す値である。

処理画像総数記憶領域１３ｃは、「処理画像総数」を記憶する領域である。「処理画像総数」は、画像一覧内に形成するインデックス画像の総数を示す値である。生成ページ数記憶領域１３ｄは、後述する配置印刷処理（図１３参照）の実行により出力する画像一覧のページ数を示す、「生成ページ数」を記憶する領域である。

グループ情報記憶領域１３ｇ、ファイル情報記憶領域１３ｈ、配置情報記憶領域１３ｉについては、図４から図６を参照して後述する。

フレーム画像情報記憶領域１３ｊは、動画ファイルから抽出されるフレーム画像情報を格納する領域である。デコードデータ記憶領域１３ｋは、フレーム画像情報をデコード処理した結果、または、静止画像ファイルをデコード処理した結果を記憶する領域である。

カウンタ記憶領域１３ｍは、各種カウンタを記憶する領域である。ＥＥＰＲＯＭ１４は、書換可能な不揮発性のメモリである。画像管理情報記憶領域１３ｎについては、図７を参照して後述する。

図３は、ＭＦＰ１が、１ページの記録用紙に印刷出力する画像一覧２０の一例を示す図である。ＭＦＰ１は、メディアカードに静止画像ファイルと動画像ファイルとが混在している場合、図３に示すように、フレーム画像情報に対応するインデックス画像２１ａ，２１ｂ，２１ｃと、静止画像ファイルに対応するインデックス画像２２とが混在した画像一覧２０を出力する。よって、ユーザは、動画像ファイルの内容を示すインデックス画像２１ａ，２１ｂ，２１ｃと、静止画像ファイルの内容を示すインデックス画像２２とを、１ページの画像一覧２０によって、一度に視認することができ、利便性が高い。

また、各インデックス画像２１ａ，２１ｂ，２１ｃ，２２は、図中左側の領域が色補正前の状態（ハッチング模様側、散点模様側）、図中右側の領域が色補正後の状態で出力される。即ち、各インデックス画像２１ａ，２１ｂ，２１ｃ，２２は、色補正前の各インデックス画像２１ａ，２１ｂ，２１ｃ、２２と、色補正後の各インデックス画像２１ａ，２１ｂ，２１ｃ，２２とが合成された合成画像として出力される。よって、各画像の補正前の状態の画像一覧と、補正後の状態の画像一覧とを、１ページの記録用紙上で確認することができ、例えば、補正前の状態の画像一覧と、補正後の状態の画像一覧とを別々の記録用紙に出力させて両者を比較するよりもユーザにとって見比べ易い。

また、各インデックス画像２１ａ，２１ｂ，２１ｃ，２２には、各インデックス画像２１ａ，２１ｂ，２１ｃ，２２の左右の領域（補正前の状態の領域と補正後の状態の領域）と対応付けられた管理番号２５が付加されて出力される。本実施形態では、「１」から「２４」までの連続番号が、各インデックス画像２１ａ，２１ｂ，２１ｃ，２２の各領域に付加されている。そして、この画像一覧２０を視認したユーザが、各領域に割り当てられている管理番号２５を操作部４を介して入力すると、その管理番号２５によって特定される画像（補正後の画像あるいは補正前の画像）が印刷出力される。

また、ＭＦＰ１は、撮影日を条件として分類されるグループ毎に、画像一覧２０を出力するように構成されている。例えば、撮影日が異なるグループ「２００８年１月１５日」と「２００８年１月２０日」とは、それぞれ別ページとして画像一覧２０が形成される。

また、ＭＦＰ１は、画像一覧２０のヘッダ部分などに、そのグループの撮影日２３、および各グループを特定するためのグループ番号（以下、グループＮｏと記載する）２４を印刷する。よって、目的とする画像の撮影日さえ分かっていれば、その撮影日の画像一覧２０のみを閲覧すれば良く、所望の画像を容易に探し出すことができる。

図３に示す画像一覧２０は一例であるが、ＭＦＰ１は、画像一覧２０の左側から右側へ向かうにつれて、撮影日時が新しくなるような順序で、横一列分のインデックス画像が配列され、その横一列分の配列の下に、次に撮影日時が新しい横一列分のインデックス画像が配列されるように、インデックス画像の各々について配置順序を決定する。よって、多数のインデックス画像の中からでも、目的とする画像を迅速に探し当てることができる。

図４は、ファイル情報記憶領域１３ｈの構成を模式的に示す図である。図４に示すように、ファイル情報記憶領域１３ｈには、ファイルＩＤを記憶するファイルＩＤ記憶領域２０１、ファイル名を記憶するファイル名記憶領域２０２、ファイル種類を記憶するファイル種類記憶領域２０３、抽出フレーム数を記憶する抽出フレーム数記憶領域２０４、総フレーム数を記憶する総フレーム数記憶領域２０５、ｆｐｓ情報を記憶するｆｐｓ情報記憶領域２０６、ファイル日付情報を記憶するファイル日付情報記憶領域２０７、ファイル時間情報を記憶するファイル時間情報記憶領域２０８が設けられ、ファイル名、ファイル種類、抽出フレーム数、ｆｐｓ情報、ファイル日付情報、ファイル時間情報からなるファイル情報２００を、そのファイル情報２００を管理するファイルＩＤに対応付けて記憶する。ＭＦＰ１は、画像一覧２０（図３参照）における各インデックス画像の配置順序を決定するための準備処理として、メディアカード内に格納された静止画像ファイルまたは動画像ファイルの各々についてファイル情報２００を作成し、ファイル情報記憶領域１３ｈに格納する。

ファイルＩＤ記憶領域２０１は、ファイルＩＤを記憶する領域である。ファイル名記憶領域２０２は、静止画像ファイルまたは動画像ファイルのファイル名を格納する領域である。図４に示すように、各ファイル名には、拡張子が付加されている。例えば、画像ファイルがＪＰＥＧファイルである場合は拡張子「ｊｐｇ」が付加され、ＡＶＩ動画ファイルである場合は拡張子「ａｖｉ」が付加され、クイックタイム動画ファイルである場合は拡張子「ｍｏｖ」が付加される。

ファイル種類記憶領域２０３は、各画像ファイルの種類（フォーマット）を示す値を格納する領域である。画像ファイルの種類は、例えば、ファイル名に付加された拡張子に基づいて判定することができる。本実施形態では、画像ファイルの形式がＪＰＥＧファイル（拡張子ｊｐｇ）である場合、ＪＰＥＧファイルであることを示す値「０」をファイル種類記憶領域２０３に格納し、画像ファイルの形式がＡＶＩ動画ファイル（拡張子ａｖｉ）である場合、値「１」をファイル種類記憶領域２０３に格納し、画像ファイルの形式がクイックタイム動画ファイル（拡張子ｍｏｖ）である場合、値「２」をファイル種類記憶領域２０３に格納する。

なお、各画像ファイルの先頭から数バイト分に格納されている情報に基づいて画像ファイルの種類を判定することもできる。例えば、先頭から２バイトが「０ｘＦＦＤ８」であればＪＰＥＧファイルであると判定できるし、先頭から２バイトが「０ｘ４２４Ｄ」であれば、ビットマップデータであると判定することができる。これらの情報に基づいて、画像ファイルの種類を判定しても差し支えない。

抽出フレーム数記憶領域２０４は、何枚分のフレーム画像に対応したフレーム画像情報を、画像ファイルから抽出するかを示す値を記憶する領域である。静止画像ファイルの場合、抽出フレーム数記憶領域２０４には「１」が格納される。

総フレーム数記憶領域２０５は、各画像ファイルの総フレーム数を格納する領域である。動画像ファイルの場合は動画像ファイルに含まれる総フレーム数が格納され、静止画像である場合は常に１が格納される。

ｆｐｓ情報記憶領域２０６は、各画像ファイルのｆｐｓ（Ｆｒａｍｅ Ｐｅｒ Ｓｅｃｏｎｄ）情報を格納する領域である。静止画像ファイルである場合には「０」が格納される。一方、動画像ファイルである場合には、例えば、１秒間に６０フレーム画像が存在することを示す「６０」や、１秒間に３０フレーム画像が存在することを示す「３０」が、このｆｐｓ情報記憶領域２０６に格納される。

ファイル日付情報記憶領域２０７は、各画像ファイルの撮影日を表すファイル日付情報を格納する領域である。例えば、撮影日「２００８年１月１５日」は、ファイル日付情報「２００８０１１５」として表すものとする。

ファイル時間情報記憶領域２０８は、各画像ファイルの撮影時間を表すファイル時間情報を格納する領域である。例えば、撮影時間「１２時５０分４５秒」は、ファイル時間情報「１２５０４５」として表すものとする。画像ファイルが動画像ファイルの場合は、撮影開始時間を表す情報が、ファイル時間情報として格納される。

以降の説明では、各画像ファイルのヘッダに記述された情報を読み出してくることにより、総フレーム数、ｆｐｓ情報、ファイル日付情報およびファイル時間情報を取得するものとするが、他の手段により、これらの情報を取得しても良い。

本実施形態のＭＦＰ１は、ファイル情報記憶領域１３ｈに格納された各画像ファイルの固有情報に基づいて、撮影日時に従った順序で各インデックス画像が配列されるように、インデックス画像の配置順序を決定する。決定した配置順序を示す情報は、図５に示す配置情報記憶領域１３ｉに格納する。

図５は、配置情報記憶領域１３ｉの構成を模式的に示す図である。図５に示すように、配置情報記憶領域１３ｉは、ファイルＩＤ、グループＮｏ、抽出フレーム番号、画像日付情報、画像時間情報からなる配置情報３００と、その配置情報３００に対応する配置順序とを記憶する。

図５に示すように、配置情報記憶領域１３ｉには、配置順序記憶領域３０１、ファイルＩＤ記憶領域３０２、グループＮｏ記憶領域３０３、抽出フレーム番号記憶領域３０４、画像日付情報記憶領域３０５、画像時間情報記憶領域３０６、画像付加情報記憶領域３０７が設けられる。

配置情報記憶領域３０１は、配置順序を記憶する領域である。後述する配置印刷処理（図１３参照）では、配置順序に従った順序で、配置情報３００が読み出され、各配置情報３００で特定されるフレーム画像または静止画像のインデックス画像が、配置順序に従った順序で、画像一覧２０に配列される。

ファイルＩＤ記憶領域３０２は、ファイルＩＤを記憶する領域である。図４を参照して説明したように、ファイル情報記憶領域１３ｈには、ファイルＩＤとファイル名とが１対１で対応付けて記憶されているので、ファイルＩＤから、１の画像ファイルを特定することができる。

グループＮｏ記憶領域３０３は、グループＮｏを記憶する領域である。なお、グループＮｏについては、図６を参照して後述する。

抽出フレーム番号記憶領域３０４は、１の動画像ファイルにおける先頭から数えて何番目のフレーム画像情報であるかを示す「抽出フレーム番号」を、記憶する領域である。

ここで、「抽出フレーム番号」は、「総フレーム数記憶領域２０５」に記憶された動画像ファイルの総フレーム数と、「抽出フレーム数記憶領域１３ａ」に記憶された抽出フレーム数と、１の動画像から抽出されるフレーム画像の中で、何枚目のフレーム画像に相当するかを表すフレーム画像抽出数カウンタ値を用いて、例えば、下記のように算出することができる。
（抽出フレーム番号）＝［（フレーム画像抽出数カウンタ値）×（総フレーム数）÷（抽出フレーム数）］
ここで［］はガウス記号を表し、［ａ］はａを超えない最大の整数を表す。

画像日付情報記憶領域３０５は、ファイルＩＤ記憶領域３０２に格納されたファイルＩＤで特定される画像ファイルの撮影日を表す画像日付情報が格納される領域である。画像時間情報記憶領域３０６は、撮影時間を表す画像時間情報が格納される領域である。静止画像ファイルについては、ファイル情報記憶領域１３ｈの対応する領域に格納されたファイル時間情報が、この画像時間情報記憶領域３０６にコピーされる。

一方、動画像ファイルについては、その動画像ファイルから複数のフレーム画像情報が抽出されるので、フレーム画像情報毎に、撮影時間を表す画像時間情報を取得し、画像時間情報記憶領域３０６に記憶する。なお、フレーム画像情報毎の画像時間情報を算出する具体的演算例については、図９を参照して後述する。

後述する配置印刷処理（図１３参照）では、配置情報記憶領域１３ｉに記憶された配置情報３００に基づいて、インデックス画像が撮影日時に従った順序で配列された画像一覧２０（図３参照）を印刷出力する。

図６は、グループ情報記憶領域１３ｇの構成の一例を示す図である。図６に示すように、グループ情報記憶領域１３ｇには、グループ数記憶領域４０１と、グループ単位情報記憶領域４０２と、グループＮｏ記憶領域４０３とが設けられている。

グループ数記憶領域４０１は、インデックス画像を分類するために生成されたグループ数を記憶する領域である。図６に示す例では、インデックス画像を分類するために「１０」のグループが生成されたことを示している。

グループ単位情報記憶領域４０２は、グループ毎の情報を記憶する領域である。グループ単位情報記憶領域４０２には、グループＮｏ（グループ番号）を記憶する記憶領域４０３と、そのグループＮｏで特定されるグループに分類されるインデックス画像の数を記憶するグループ画像数記憶領域４０４とが設けられる。図６に示す例では、グループＮｏが「１」のグループに、「１０」個のインデックス画像が分類されることを示している。

本実施形態のＭＦＰ１は、グループ情報記憶領域１３ｇに記憶された情報に従って、グループ毎の画像一覧２０を出力する。

図７は、画像管理情報記憶領域１３ｎの構成を模式的に示す図である。この画像管理情報記憶領域１３ｎは、フレーム画像情報と静止画像ファイルとの各々に対して割り当てる管理番号を記憶する領域であり、図７に示すように、グループＮｏを記憶するグループＮｏ記憶領域５０１と、フレーム画像情報または静止画像ファイルに割り当てる管理番号（図３参照）を記憶する画像管理番号記憶領域５０２と、ファイルＩＤを記憶するファイルＩＤ記憶領域５０３と、抽出フレーム番号を記憶する抽出フレーム番号記憶領域５０４とが設けられている。

図７に示すように、本実施形態のＭＦＰ１は、同一グループに分類されるフレーム画像情報または静止画像ファイルの各々に対して、２つの管理番号を割り当てる。これにより、各管理番号を、図３で説明した通り、各インデックス画像の左右の領域に割り当てることができる。また、同一グループのインデックス画像は、同じ画像一覧２０にまとめて出力されるが、各インデックス画像の左右の領域にはグループ内で唯一の管理番号が割り当てられるため、ユーザは、同一の画像一覧２０に配置されたインデックス画像（すなわち同一グループ内のインデックス画像）を、管理番号により一意に特定することができる。

図８は、レイアウト画像印刷処理を示すフローチャートである。ＭＦＰ１は、ユーザから、画像一覧出力処理が入力されると、このレイアウト画像印刷処理を開始する。

まず、インデックス画像の配置順序を決定する配置順決定処理を実行する（Ｓ１００）。次に、インデックス画像に含める管理番号を決定する管理番号決定処理（Ｓ１５０）を実行する。そして、決定した配置順序および管理番号に従い、図３を参照して説明した画像一覧２０を出力する配置印刷処理（Ｓ２００）を実行する。以下、各処理について詳細に説明する。

図９は、配置順決定処理（Ｓ１００）を示すフローチャートである。まず、ユーザが操作部４から入力した値を、「フレーム画像抽出枚数」として抽出フレーム数記憶領域１３ａに記憶する（Ｓ１０１）。次に、メディアカード内に格納された静止画像ファイルと動画像ファイルとの合計を示す「総処理ファイル数」を算出し、処理ファイル数記憶領域１３ｂに記憶する（Ｓ１０２）。

次に、処理ファイル数カウンタ、処理画像数カウンタ、フレーム画像抽出枚数カウンタを、それぞれ０で初期化する（Ｓ１０３）。なお、これらのカウンタは、カウンタ記憶領域１３ｍ（図２参照）に設けられている。

次に、メディアカードに格納された画像ファイルのうち、１の画像ファイルを処理対象として選択し、その画像ファイルのファイル名、画像ファイルの種類を取得する。そして取得したファイル名および画像ファイルの種類を示す値を、処理ファイル数カウンタ値のファイルＩＤに対応した、ファイル名記憶領域２０２、ファイル種類記憶領域２０３（図４参照）へ、それぞれ記憶する（Ｓ１０４）。

そして、選択した画像ファイルが動画像ファイルであるか静止画像ファイルであるかを判断する（Ｓ１０５）。動画像ファイルであると判断した場合（Ｓ１０５：動画像）、その動画像ファイルのファイル日付情報、ファイル時間情報、およびｆｐｓを表すｆｐｓ情報を、その動画像ファイルのヘッダから取得する（Ｓ１０６）。

そして、処理画像数カウンタ値の配置順序に対応したファイル日付情報記憶領域２０７へファイル日付情報を記憶し、ファイル時間情報記憶領域２０８へファイル時間情報を記憶し、ｆｐｓ情報記憶領域２０６へｆｐｓ情報を記憶する（Ｓ１０７）。

次に処理画像数カウンタ値の配置順序に対応した配置情報記憶領域１３ｉ（図５参照）のファイルＩＤ記憶領域３０２へ、現時点における処理ファイル数カウンタの値を記憶する。また、現時点におけるフレーム画像抽出枚数カウンタの値から抽出フレーム番号を算出し、処理画像数カウンタ値の配置順序に対応した抽出フレーム番号記憶領域３０４へ記憶する（Ｓ１０８）。

次に、フレーム画像情報の時間情報を算出し、算出した時間情報を、画像時間情報として、配置順序に対応する画像時間情報記憶領域３０６へ記憶する（Ｓ１０９）。具体的には、まず、動画像ファイルの撮影開始時間を表すファイル時間情報をＶｉｄｅｏＴｉｍｅ、ｆｐｓ情報をＦＰＳ、フレーム画像情報の撮影時間を表す画像時間情報をＦｒａｍｅＴｉｍｅ、処理対象のフレーム画像情報を特定する抽出フレーム番号をＮとする。

そして、ファイル時間情報ＶｉｄｅｏＴｉｍｅを、以下のように、動画像時間情報ＶＴ＿Ｈｏｕｒ、動画像分情報ＶＴ＿Ｍｉｎｕｔｅ、動画像秒情報ＶＴ＿Ｓｅｃｏｎｄに分解する。

ＶＴ＿Ｈｏｕｒ＝［ＶｉｄｅｏＴｉｍｅ／１００００］
ＶＴ＿Ｍｉｎｕｔｅ＝［（ＶｉｄｅｏＴｉｍｅ−ＶＴ＿Ｈｏｕｒ×１００００）／１００］
ＶＴ＿Ｓｅｃｏｎｄ＝ＶｉｄｅｏＴｉｍｅ−（ＶＴ＿Ｈｏｕｒ×１００００＋ＶＴ＿Ｍｉｎｕｔｅ×１００）
次に、フレーム時情報Ｆｒａｍｅ＿Ｈｏｕｒ、フレーム分情報Ｆｒａｍｅ＿Ｍｉｎｕｔｅ、フレーム秒情報Ｆｒａｍｅ＿Ｓｅｃｏｎｄを、例えば、下記の数式１のように算出する。
（数式１）
ここでＣａｌ＿Ｓｅｃｏｎｄ，Ｃａｌ＿Ｍｉｎｕｔｅ，Ｃａｌ＿Ｈｏｕｒは上記情報を求めるための一時変数とする。
また、Ａ ｍｏｄ ＢはＡをＢで割った時の剰余を表す
Ｃａｌ＿Ｓｅｃｏｎｄ＝ＶＴ＿Ｓｅｃｏｎｄ＋［Ｎ／ＦＰＳ］
Ｃａｌ＿Ｍｉｎｕｔｅ＝ＶＴ＿Ｍｉｎｕｔｅ＋［Ｃａｌ＿Ｓｅｃｏｎｄ／６０］
Ｃａｌ＿Ｈｏｕｒ＝ＶＴ＿Ｈｏｕｒ＋［Ｃａｌ＿Ｍｉｎｕｔｅ／６０］
Ｆｒａｍｅ＿ｓｅｃｏｎｄ＝Ｃａｌ＿Ｓｅｃｏｎｄ ｍｏｄ ６０
Ｆｒａｍｅ＿Ｍｉｎｕｔｅ＝Ｃａｌ＿Ｍｉｎｕｔｅ ｍｏｄ ６０
Ｆｒａｍｅ＿Ｈｏｕｒ＝Ｃａｌ＿Ｈｏｕｒ ｍｏｄ ２４
以上を、例えば、下記の数式２を用いて結合し、フレーム画像情報の撮影時間を表す画像時間情報ＦｒａｍｅＴｉｍｅを算出する。
（数式２）
ＦｒａｍｅＴｉｍｅ＝Ｆｒａｍｅ＿Ｈｏｕｒ×１００００＋Ｆｒａｍｅ＿Ｍｉｎｕｔｅ×１００＋Ｆｒａｍｅ＿Ｓｅｃｏｎｄ
同様にして、動画像ファイルのファイル日付情報をＶｉｄｅｏＤａｔｅ、抽出するフレーム画像情報の画像日付情報をＦｒａｍｅＤａｔｅとすると、まずＶｉｄｅｏＤａｔｅを動画像年情報ＶＤ＿Ｙｅａｒ、動画像月情報ＶＤ＿Ｍｏｎｔｈ、動画像日情報ＶＤ＿Ｄａｙに、例えば、下記の数式３を用いて分解する。
（数式３）
ＶＤ＿Ｙｅａｒ＝［ＶｉｄｅｏＤａｔｅ／１００００］
ＶＤ＿Ｍｏｎｔｈ＝［（ＶｉｄｅｏＤａｔｅ−ＶＤ＿Ｙｅａｒ×１００００）／１００］
ＶＤ＿Ｄａｙ＝ＶｉｄｅｏＤａｔｅ−（ＶＤ＿Ｙｅａｒ×１００００＋ＶＤ＿Ｍｏｎｔｈ×１００）
次に、画像日付算出処理を実行する（Ｓ１１０）。画像日付算出処理は、フレーム年情報Ｆｒａｍｅ＿Ｙｅａｒ、フレーム月情報Ｆｒａｍｅ＿Ｍｏｎｔｈ、フレーム日情報Ｆｒａｍｅ＿Ｄａｙを算出する処理である。

図１０は、画像日付算出処理を示すフローチャートである。なお、図１０のフローチャートに示す変数Ｍは、現日付からＭ日進めることを意味する変数である。

まず、フレーム年情報Ｆｒａｍｅ＿Ｙｅａｒ、フレーム月情報Ｆｒａｍｅ＿Ｍｏｎｔｈ、フレーム日情報Ｆｒａｍｅ＿Ｄａｙに、それぞれ、動画像年情報ＶＤ＿Ｙｅａｒ、動画像月情報ＶＤ＿Ｍｏｎｔｈ、動画像日情報ＶＤ＿Ｄａｙを代入する（Ｓ１２０１）。次に、変数Ｍに、［Ｃａｌ＿Ｈｏｕｒ／２４］を代入する（Ｓ１２０２）。次にＭが０であるかを判断し（Ｓ１２０３）、肯定されると（Ｓ１２０３：Ｙｅｓ）、本処理を終了する。

一方、否定されると（Ｓ１２０３：Ｎｏ）、フレーム日情報Ｆｒａｍｅ＿Ｄａｙを判断する（Ｓ１２０４）。「１以上２７以下」と判断されると（Ｓ１２０４：１以上２７以下）、Ｆｒａｍｅ＿Ｄａｙに「１」を加算する（Ｓ１２０５）。

一方、Ｓ１２０４の判断において、「２８または２９」と判断されると（Ｓ１２０４：２８ｏｒ２９）、Ｆｒａｍｅ＿Ｍｏｎｔｈが「２」であるか否かを判断する（Ｓ１２０６）。否定される場合（Ｓ１２０６；Ｎｏ）、Ｓ１２０５の処理に移行する。

一方、肯定されると（Ｓ１２０６：Ｙｅｓ）、次に、Ｆｒａｍｅ＿Ｄａｙが「２８」であるかを判断する（Ｓ１２０８）。否定される場合（Ｓ１２０８：Ｎｏ）、Ｆｒａｍｅ＿Ｄａｙに「１」を代入し、Ｆｒａｍｅ＿Ｍｏｎｔｈに「１」を加算する（Ｓ１２１０）。

一方、Ｓ１２０８の判断が肯定されると（Ｓ１２０８：Ｙｅｓ）、Ｆｒａｍｅ＿Ｙｅａｒで示される年がうるう年か否かを判断する（Ｓ１２０９）。肯定される場合（Ｓ１２０９：Ｙｅｓ）、Ｓ１２０５の処理に進む。否定される場合（Ｓ１２０９：Ｎｏ）、Ｓ１２１０の処理に進む。

次に、Ｓ１２０４の判断において、「３０」と判断されると（Ｓ１２０４：３０）、次に、Ｆｒａｍｅ＿Ｍｏｎｔｈが４，６，９，１１のいずれかであるかを判断する（Ｓ１２１１）。肯定される場合（Ｓ１２１１：Ｙｅｓ）、Ｓ１２１０の処理に進む。

一方、否定される場合（Ｓ１２１１：Ｎｏ）、Ｆｒａｍｅ＿Ｄａｙに「１」を加算する（Ｓ１２１６）。次に、Ｓ１２０４の判断において、「３１」と判断されると（Ｓ１２０４：３１）、次に、Ｆｒａｍｅ＿Ｙｅａｒが１２であるかを判断する（Ｓ１２１５）。否定される場合（Ｓ１２１５：Ｎｏ）、Ｓ１２１６の処理に進む。

一方、肯定される場合（Ｓ１２１５：Ｙｅｓ）、Ｆｒａｍｅ＿Ｄａｙに「１」を代入し、Ｆｒａｍｅ＿Ｍｏｎｔｈに「１」を代入し、Ｆｒａｍｅ＿Ｙｅａｒに「１」を加算する（Ｓ１２１７）。

Ｓ１２０５，Ｓ１２１０，Ｓ１２１６，Ｓ１２１７の処理の後は、変数Ｍから「１」減算し（Ｓ１２１２）、Ｓ１２０３に戻る。そして、Ｓ１２０３の判断が肯定されると（Ｓ１２０３：Ｙｅｓ）、本処理を終了する。

図９に戻り説明する。図１０に示す処理で算出した値を、例えば下記の数式５を用いて結合し、フレーム画像情報の撮影日付を表す画像日付情報ＦｒａｍｅＤａｔｅを算出する。算出された画像日付情報は画像日付情報記憶領域３０５へ記憶する（Ｓ１１１）。
（数式５）
ＦｒａｍｅＤａｔｅ ＝ Ｆｒａｍｅ＿Ｙｅａｒ×１００００ ＋ Ｆｒａｍｅ＿Ｍｏｎｔｈ×１００ ＋ Ｆｒａｍｅ＿Ｄａｙ
次に、処理画像数カウンタ、およびフレーム画像抽出枚数カウンタに、それぞれ「１」を加算する（Ｓ１１３）。

次に、フレーム画像抽出枚数カウンタの値が、フレーム画像抽出枚数、すなわち、その動画像ファイルから抽出するフレーム画像情報の数以上となったか否かを判断する（Ｓ１１４）。Ｓ１１４の判断が否定される場合（Ｓ１１４：Ｎｏ）、Ｓ１０８に戻り処理を繰り返す。

一方、Ｓ１１４の判断が肯定される場合（Ｓ１１４：Ｙｅｓ）、次にフレーム画像抽出枚数カウンタを０で初期化し（Ｓ１１５）、処理ファイル数カウンタに１を加算する（Ｓ１２２）。そして、処理ファイル数カウンタの値が、メディアカードに格納される静止画像ファイルと動画像ファイルの合計を示す「総処理ファイル数」以上となったか否かを判断する（Ｓ１２３）。Ｓ１２３の判断が否定される場合（Ｓ１２３：Ｎｏ）、Ｓ１０４の処理に戻り、次の画像ファイルを処理対象として選択し、処理を繰り返す。

続いて、処理対象の画像ファイルが静止画像ファイルであると判断された場合（Ｓ１０５：静止画像）について説明する。静止画像ファイルである場合、処理画像数カウンタ値の配置順序に対応したファイルＩＤ記憶領域３０２へ、現時点における処理ファイル数カウンタの値を記憶する。また、処理画像数カウンタ値の配置順序に対応した抽出フレーム番号記憶領域３０４へ「０」を記憶する（Ｓ１１５ａ）。

次に、処理対象の静止画像ファイルのファイル日付情報およびファイル時間情報を取得する。そして、ファイル情報記憶領域１３ｈのうち、処理ファイル数カウンタ値のファイルＩＤに対応したファイル日付情報記憶領域２０７（図４参照）へ、ファイル日付情報を記憶し、同ファイルＩＤに対応したファイル時間情報記憶領域２０８へ、ファイル時間情報を記憶する（Ｓ１１７）。なお、ｆｐｓ情報記憶領域２０６には「０」を記憶する。

そして、配置情報記憶領域１３ｉ（図５参照）のうち、処理画像数カウンタ値の配置順序に対応する画像日付情報記憶領域３０５へ、処理対象の静止画像ファイルのファイル日付情報を記憶する。また、同配置順序に対応する画像時間情報記憶領域３０６へ、処理対象の静止画像ファイルのファイル時間情報を記憶する（Ｓ１１９）。そして、処理画像数カウンタに１を加算し（Ｓ１２１）、Ｓ１２２の処理に移行する。

このように、Ｓ１０１からＳ１２３の処理によれば、配置情報記憶領域１３ｉに、ファイルＩＤ、抽出フレーム番号、画像日付情報、画像時間情報が格納される。

図１１は、図９に示す配置順決定処理（Ｓ１００）の続きの部分を示すフローチャートであり、インデックス画像を分類し、撮影日時に従った配置順序にソートする処理の部分を示している。

図１１に示すように、まず、現時点における処理画像数カウンタの値を「処理画像総数」として、処理画像総数記憶領域１３ｃ（図２参照）に記憶する（Ｓ１２４）。そして、処理画像数カウンタを「０」で初期化する（Ｓ１２５）。ここで処理画像数カウンタはカウンタ記憶領域１３ｍ（図２参照）に設けられる。

次に、配置情報記憶領域１３ｉ（図５参照）の画像日付情報記憶領域３０５に記憶された、画像日付情報に従って、グループＮｏを決定する（Ｓ１２６）。具体的には、処理画像数カウンタの値の配置順序に対応する、画像日付情報記憶領域３０５の値が、既に存在するグループの値と同一の場合は、その該当するグループＮｏを、この画像情報のグループＮｏに決定し、そうでない場合は新規のグループＮｏをこの画像情報のグループＮｏとして決定する。ただしＮｏの初期値は１であり、新規のグループＮｏはそれまでで最大のグループＮｏ＋１とする。

このようにすれば、撮影日が同日であるフレーム画像情報または静止画像ファイルに対応するインデックス画像を同一グループに分類される一方で、撮影日が異なるフレーム画像情報または静止画像ファイルに対応するインデックス画像は互いに別グループに分類されることとなる。

そして、処理画像数カウンタの値の配置順序に対応する、グループＮｏ記憶領域３０３（図５参照）へ、決定したグループＮｏを記憶する（Ｓ１２７）。次に、処理画像数カウンタに「１」を加算し（Ｓ１２８）、処理画像数カウンタの値が、処理画像総数に記憶された値以上となったかを判断する（Ｓ１２９）。そして、Ｓ１２９の判断が否定される場合（Ｓ１２９：Ｎｏ）、Ｓ１２６から処理を繰り返す。

一方、Ｓ１２９の判断が肯定される場合（Ｓ１２９：Ｙｅｓ）、グループＮｏの最大値を、グループ数記憶領域４０１（図６参照）に記憶する（Ｓ１３０）。そして、グループＮｏの小さい順に、配置情報をソートする（Ｓ１３１）。なお、Ｓ１３１の処理においては、グループＮｏの小さい順に配置情報をソートすることができれば良いので、ソートアルゴリズムは特に限定するものではなく、例えば、クイックソート法やバブルソート法を用いることが可能である。

なお、図５に示す配置情報記憶領域１３ｉは、配置情報記憶領域１３ｉに記憶された配置情報が、グループＮｏの小さい順にソートされた状態を模式的に図示している。

図１１に戻り説明する。次に、同一グループＮｏに含まれることとなる画像数を算出し（Ｓ１３２）、グループＮｏと対応付けてグループ画像数記憶領域４０４へ記憶する（Ｓ１３３）。次に、グループカウンタを１で初期化する（Ｓ１３４）。このグループカウンタは、カウンタ記憶領域１３ｍ（図２参照）に設けられるカウンタである。

次に、画像時間情報の小さい順に配置情報をソートする（Ｓ１３５）。このソートはグループ単位で行う。これにより、配置情報で特定されるインデックス画像の各々について、対応する配置順序が決定する。すなわち、同一グループに分類されたインデックス内で、画像時間情報（撮影時情報）に従った配置順序を決定する。

次に、グループカウンタに１を加算し（Ｓ１３６）、グループカウンタの値がグループ数記憶領域４０１（図６参照）の値より大となったかを判断する（Ｓ１３７）。Ｓ１３７の判断が否定される場合（Ｓ１３７：Ｎｏ）、Ｓ１３５に戻り処理を繰り返す。一方、全てのグループについての処理を終了し、Ｓ１３７の判断が肯定されると（Ｓ１３７：Ｙｅｓ）、配置順決定処理（Ｓ１００）を終了する。

次に、フレーム画像情報と静止画像ファイルの各々に対し管理番号を割り当てる管理番号決定処理について説明する。

図１２は、管理番号決定処理（Ｓ１５０）を示すフローチャートである。まず、グループ管理番号カウンタを「１」で初期化し、配置順序カウンタを「０」で初期化する（Ｓ１５１）。そして、生成されたグループ数を、グループ数記憶領域４０１（図６参照）から読み出し（Ｓ１５２）、画像管理番号カウンタを「０」で初期化する（Ｓ１５３）。

次に、グループ管理番号カウンタの値に対応するグループ画像数を、グループ画像数記憶領域４０４（図６参照）から読み出し（Ｓ１５４）、次に、配置順序カウンタの値に対応するファイルＩＤ、抽出フレーム番号を、配置情報記憶領域１３ｉ（図５参照）から読み出す（Ｓ１５５）。

そして、画像管理情報記憶領域１３ｎ（図７参照）内のグループＮｏ記憶領域５０１にグループカウンタ値を、画像管理番号記憶領域５０２に画像管理番号カウンタ値の２倍の値をそれぞれ記憶する。また、読み出したファイルＩＤを画像管理情報記憶領域１３ｎ内のファイルＩＤ記憶領域５０３に、読み出した抽出フレーム番号を抽出フレーム番号記憶領域５０４に、それぞれ記憶する（Ｓ１５６）。この処理によって、ファイルＩＤと抽出フレーム番号とで特定されるフレーム画像情報または、静止画像ファイルの各々に対し、画像管理番号カウンタ値の２倍の値を、管理番号として割り当てることができる。即ち、フレーム画像情報または、静止画像ファイルの各々に、２つの管理番号を割り当てることができるので、補正された前の画像と補正された後の画像にそれぞれ別の番号を割り当てることができる。

次に、画像管理番号カウンタ、配置順序カウンタに、それぞれ「１」を加算し（Ｓ１５７）、画像管理番号カウンタ値がグループ画像数より大となったか否かを判断する（Ｓ１５８）。Ｓ１５８の判断が否定される場合（Ｓ１５８：Ｎｏ）、Ｓ１５３から処理を繰り返す。

一方、Ｓ１５８の判断が肯定される場合（Ｓ１５８：Ｙｅｓ）、画像管理番号カウンタを「１」で初期化し（Ｓ１５９）、グループ管理番号カウンタに「１」を加算する（Ｓ１６０）。次に、グループ管理番号カウンタ値がグループ数より大以上となったか否かを判断し（Ｓ１６１）、否定される場合（Ｓ１６１：Ｎｏ）、Ｓ１５３から処理を繰り返す。

そして、処理を繰り返すうちに、Ｓ１６１の判断が肯定されると（Ｓ１６１：Ｙｅｓ）、管理番号決定処理（Ｓ１５０）を終了する。

図１３は、配置印刷処理（Ｓ２００）を示すフローチャートである。図１３に示す配置印刷処理（Ｓ２００）は、図１２を参照して説明した管理番号決定処理（Ｓ１５０）に続けて実行され、画像一覧２０を記録用紙に印刷出力する処理である。

まず、画像一覧２０に配列される横一列分のインデックス画像の数を示す「横方向の配置枚数」を、横方向画像配置数記憶領域１２ｂから読み出す（Ｓ２０１）。次に、１ページ分の画像一覧２０に配置可能なインデックス画像の数を示す「１ページ内画像配置数」を、１ページ画像配置数記憶領域１２ｃから読み出す（Ｓ２０２）。

次に、グループカウンタを１で初期化し（Ｓ２０３）、ページカウンタを１で初期化する（Ｓ２０４）。ページカウンタはカウンタ記憶領域１３ｍ（図２参照）に設けられるカウンタである。

次に、グループカウンタ値のグループＮｏに対応するグループ画像数を、グループ画像数記憶領域４０４から読みだす（Ｓ２０５）。そして、読み出した「グループ画像数」と「１ページ内画像配置数」とから、処理対象のグループについて、何ページ分の画像一覧２０を印刷出力するかを示す「生成ページ数」を算出し、生成ページ数記憶領域１３ｄ（図２参照）へ記憶する（Ｓ２０６）。本実施形態では、「生成ページ数」は、例えば下記の数式６を用いて算出する。
（数式６）
（生成ページ数）＝［（グループ画像数）／（１ページ内画像配置数）］＋１
次に、グループカウンタ値の数値を画像化した画像データをプリンタに渡す（Ｓ２０６ａ）これにより、各グループ毎に、グループＮｏが付加された画像一覧２０（図３参照）を印刷出力させることができる。

次に、レイアウト画像カウンタを０で初期化し（Ｓ２０７）、１ページの記録用紙内に配置する画像の枚数ｌａｙｏｕｔ＿ｎｏを算出する（Ｓ２０８）。本実施形態においては、ｌａｙｏｕｔ＿ｎｏは、例えば下記の数式７を用いて算出する。
（数式７）
（ページカウンタ値）＜生成ページ数の時
ｌａｙｏｕｔ＿ｎｏ＝（１ページ内画像配置数）
（ページカウンタ値）≧生成ページ数の時
ｌａｙｏｕｔ＿ｎｏ＝（グループ画像数）−｛（１ページ内画像配置数）×（ページカウンタ値）｝
次に、配置順序に対応したファイルＩＤと、抽出フレーム番号とを配置情報記憶領域１３ｉから読み出す（Ｓ２０９）。そして、読み出したファイルＩＤに対応する画像ファイルが、動画像ファイルであるか静止画像ファイルであるかを判定する（Ｓ２１０）。

Ｓ２１０の判定において、動画像ファイルと判定される場合（Ｓ２１０：動画像）、次に、動画像ファイルから上記抽出フレーム番号で特定される１フレーム画像分のフレーム画像情報を抽出する（Ｓ２１１）。次に、抽出したフレーム画像情報をデコード処理し、デコードデータ記憶領域１３ｋへ格納する（Ｓ２１２）。

そして、デコード処理したフレーム画像情報に色補正を行い、色補正後のフレーム画像情報を生成する（Ｓ２１２ａ）。具体的には、下記の式によってγ補正を行い、画像を明るくするように色補正を行う。座標（ｘ，ｙ）における補正前のフレーム画像情報のピクセルをＦ（ｘ，ｙ）、色補正後のフレーム画像情報のピクセルをＦ’（ｘ，ｙ）とした場合、このＦ’（ｘ，ｙ）は、下記の式により求めることができる。

尚、下記の式においては、γが１よりも大きい程画像は明るくなり、１より小さい程暗くなる。本実施形態ではγ＝１，８とするが、このγの値は、固定値であっても、ユーザが任意に設定できるように構成しても良い。

また、色補正の方法としては、かかるγ補正に限定されるものではなく、周知の種々の方法を採用することができ、色相、輝度、彩度の何れか一以上について、色補正することもできる。

こうして、フレーム画像情報に色補正を行い、補正後のフレーム画像情報を生成した後は、補正前のフレーム画像情報と、補正後のフレーム画像情報とを合成した合成画像を生成する（Ｓ２１２ｂ）。具体的には、下記の式によって座標（ｘ，ｙ）における合成画像のピクセルＧ（ｘ，ｙ）を求める。尚、補正前のフレーム画像情報の幅をｗｉｄｔｈとする。

上記式によって、合成画像の左側領域には補正前の画像、右側領域には補正後の画像が均等に配置された合成画像を生成することができる。このように、補正前の画像と補正後の画像とを左右均等に配置した合成画像を生成することで、補正前の状態と、補正後の状態とを軽重なく、均等に見比べることができる。

尚、補正前の画像と補正画像とを配置する領域としては、かかるものに限定されるものではない。例えば、下記の式によって座標（ｘ，ｙ）における合成画像のピクセルＧ（ｘ，ｙ）を求めることで、合成画像は、補正前と補正後の画像が上下均等に配置されることになる。尚、下記の式では、補正前のフレーム画像情報の高さをｈｅｉｇｈｔとする。

次に、Ｓ２１２ｂで生成された合成画像に管理番号を付与する（２１２ｃ）。例えば、管理番号をｉｎｄｅｘＮｕｍとした場合、合成画像の左領域の下方中央に（ｉｎｄｅｘＮｕｍ−１）を画像化した画像を付加し、合成画像の右領域の下方中央に（ｉｎｄｅｘＮｕｍ）を画像化した画像を付加する。そして、その管理番号が付加された合成画像を、ＲＡＭ１３（図２参照）に設けられた配置用バッファの所定位置に配置する（Ｓ２１３）。

一方、Ｓ２１０の判定において、静止画像ファイルと判定される場合（Ｓ２１０：静止画像）、配置順序に対応したファイルＩＤで特定される静止画像ファイルをデコード処理して、デコードデータ記憶領域１３ｋへ格納する（Ｓ２１４）。

そして、Ｓ２１２ａと同様に、デコード処理した静止画像ファイルに色補正を行い、色補正後の静止画像ファイルを生成する（Ｓ２１４ａ）。そして、Ｓ２１２ｂと同様に、補正前の静止画像ファイルと補正後の静止画像ファイルとを合成した合成画像を生成し（Ｓ２１４ｂ）、Ｓ２１２ｃと同様に、その生成された合成画像に管理番号を付加して（Ｓ２１４ｃ）、管理番号を付加した合成画像を配置用バッファに配置する（Ｓ２１５）

このようにして、フレーム画像情報または静止画像ファイルのいずれかをデコード処理して配置用バッファに配置する処理を実行した後、次に、横方向に配置できる画像数の上限である「横方向の配置枚数」回分、処理を行ったか否かを判断する（Ｓ２１６）。Ｓ２１６の判断が否定される場合（Ｓ２１６：Ｎｏ）、次のデータの配置位置を示す横方向位置を更新する（Ｓ２２０）。

そして、レイアウト画像カウンタに「１」を加算し（Ｓ２２１）、レイアウト画像カウンタの値が、現在の処理対象の記録用紙に配置するインデックス画像の数「ｌａｙｏｕｔ＿ｎｏ」以上となったか否かを判断する（Ｓ２２２）。Ｓ２２２の判断が否定される場合（Ｓ２２２：Ｎｏ）、Ｓ２０９の処理に戻り、次の配置順序に対応した配置情報を処理する。

このようにして、処理を繰り返すことにより、メディアカードに格納される動画像ファイルの各々から、抽出フレーム数のフレーム画像に相当するフレーム画像情報が抽出され、配置バッファに配置される。また、メディアカードに格納される静止画像ファイルが抽出され、配置バッファに配置される。

このようにして処理を繰り返す内に、「横方向の配置枚数」回分の配置処理が実行されると、Ｓ２１６の判断が肯定されるので（Ｓ２１６：Ｙｅｓ）、次に、配置用バッファのデータをプリンタ３（図２参照）へ渡す（Ｓ２１７）。これにより、配置用バッファに配置された、横一列分のインデックス画像に対応したデータが、プリンタ３による印刷処理にかけられ、画像一覧２０を出力することができる。

そして、次の処理対象のインデックス画像の横方向配置位置を示す横方向位置を初期化し（Ｓ２１８）、また、縦方向配置位置を示す縦方向位置を更新する（Ｓ２１９）。すなわち、画像一覧２０における次の列の左端から、次のインデックス画像が配列されるように、次の配置位置が決定される。そして、上述したＳ２２１、Ｓ２２２の処理を実行する。

このようにして処理をしたインデックス画像の数が、処理対象の記録用紙に配置するインデックス数ｌａｙｏｕｔ＿ｎｏに到達すると、Ｓ２２２の判断が肯定されるので（Ｓ２２２：Ｙｅｓ）、図１４に示す次の処理に移行する。

図１４は、図１３に示す配置印刷処理（Ｓ２００）の続きを示すフローチャートであって、Ｓ２２２の判断が肯定される場合に実行される。

まず、配置用バッファに、未だ印刷処理を行っていないデータが存在するかを判断する（Ｓ２２３）。Ｓ２２３の判断が肯定される場合（Ｓ２２３：Ｙｅｓ）、その残りのデータをプリンタ３に渡し（Ｓ２２４）、プリンタ３にて印刷出力させ、Ｓ２２５の処理に移行する。ただし配置用バッファに画像が配置されない領域については印刷処理を行わない。一方、Ｓ２２３の判断が否定される場合（Ｓ２２３：Ｎｏ）、Ｓ２２４の判断をスキップし、Ｓ２２５の処理に移行する。

そして、１ページ分のデータ出力が完了したことを示す印刷完了命令をプリンタ３に渡す（Ｓ２２５）。そして、ページカウンタに「１」を加算する（Ｓ２２６）。次に、配置用バッファにおける次のデータの配置位置を示す横方向位置および縦方向位置を初期化する（Ｓ２２７）。そして、ページカウンタの値が、現在の処理対象のグループについて、何ページ分の画像一覧２０を印刷出力するかを示す「生成ページ数」より大となったかを判断する（Ｓ２２８）。Ｓ２２８の判断が否定される場合（Ｓ２２８：Ｎｏ）、図１３に示すＳ２０７の処理に戻り、同グループについて、次ページの処理を開始する。

一方、Ｓ２２８の判断が肯定される場合（Ｓ２２８：Ｙｅｓ）、グループカウンタに１を加算する（Ｓ２２９）。そして、グループカウンタの値が、グループ数記憶領域４０１に記憶された値より大となったか否かを判断する（Ｓ２３０）。Ｓ２３０の判断が否定される場合（Ｓ２３０：Ｎｏ）、Ｓ２０４に戻り、処理を繰り返す。すなわち、次のグループＮｏで特定されるグループを処理対象として処理を繰り返す。

一方、Ｓ２２８の判断が肯定される場合（Ｓ２２８：Ｙｅｓ）、配置印刷処理（Ｓ２００）を終了する。配置印刷処理（Ｓ２００）の実行により、図３を参照して説明した画像一覧２０を出力することができる。よって、各画像の補正前の状態の画像一覧と、補正後の状態の画像一覧とを、１ページの記録用紙上で確認することができ、例えば、補正前の状態の画像一覧と、補正後の状態の画像一覧とを別々の記録用紙に出力させて両者を比較するよりもユーザにとって見比べ易い画像一覧２０を出力することができる。

次に、このようにして画像一覧２０に印刷された管理番号の利用例について説明する。

図１５は、特定画像出力処理（Ｓ５００）を示すフローチャートである。この特定画像出力処理は、ユーザにより指定された画像のみを印刷出力する処理である。

まず、ユーザによって、操作部４からグループＮｏが入力されたか否かを判断する（Ｓ５０１）。Ｓ５０１の判断が否定される場合（Ｓ５０１：Ｎｏ）、本処理を終了し、肯定される場合（Ｓ５０１：Ｙｅｓ）、その入力されたグループＮｏを記憶した上で、次に、管理番号が入力されたか否かを判断する（Ｓ５０２）。Ｓ５０２の判断が否定される場合（Ｓ５０２：Ｎｏ）、本処理を終了し、肯定される場合（Ｓ５０２：Ｙｅｓ）、入力された管理番号を記憶した上で、Ｓ５０１、Ｓ５０２で入力されたグループＮｏと、管理番号から対応する画像を読み出す（Ｓ５０３）。

そして、その読み出した画像の種類を判定し（Ｓ５０４）、画像の種類が動画像である場合には（Ｓ５０４：動画像）、動画像ファイルからフレーム画像情報を抽出し（Ｓ５０５）、その抽出したフレーム画像情報をデコード処理する（Ｓ５０６）。

そして、入力された管理番号が偶数か否かを判定し（Ｓ５０７）、偶数であれば（Ｓ５０７：Ｙｅｓ）、Ｓ５０５で抽出したフレーム画像情報に対して色補正を行い（Ｓ５０８）、補正後のフレーム画像情報を配置用バッファに配置する（Ｓ５０９）。

一方、Ｓ５０７の判定において、偶数でない、奇数であると判定した場合には（Ｓ５０７：Ｎｏ）、色補正を行うことなく、Ｓ５０５で抽出したフレーム画像情報に配置用バッファに配置する（Ｓ５１０）。

また、Ｓ５０４の処理において、画像の種類が静止画像であると判定した場合には（Ｓ５０４：静止画像）、Ｓ５０３で読み出した静止画像ファイルをデコード処理する（Ｓ５１１）。

そして、入力された管理番号が偶数か否かを判定し（Ｓ５１２）、偶数であれば（Ｓ５１２：Ｙｅｓ）、静止画像ファイルに対して色補正を行い（Ｓ５５１３）、補正後の静止画像ファイルを配置用バッファに配置する（Ｓ５１４）。

一方、Ｓ５１２の判定において、偶数でない、奇数であると判定した場合には（Ｓ５１２：Ｎｏ）、色補正を行うことなく、静止画像ファイルを配置用バッファに配置する（Ｓ５１０）。

こうして、補正前または補正後のフレーム画像情報、或は、補正前または補正後の静止画像ファイルが配置用バッファに配置されると、その配置されたデータをプリンタに渡し、本処理を終了する。尚、プリンタは、そのデータに従ってユーザが特定した画像を記録用紙に出力する。

このように、ユーザは画像一覧２０が印刷出力された記録用紙から所望するインデックス画像に対応付けられた管理番号を操作部４を介して入力するという簡単な操作で、補正前の状態又は補正後の状態にかかわらず、所望する画像を記録用紙に印刷出力することができる。

以上、実施形態に基づき本発明を説明したが、本発明は上述した実施形態に何ら限定されるものではなく、本発明の趣旨を逸脱しない範囲内で種々の改良変更が可能であることは容易に推察できるものである。

例えば、本実施形態では、画像一覧２０を記録用紙に印刷出力するものとして説明したが、ＬＣＤ５など表示装置に画像一覧２０を表示出力する場合にも、本発明を適用できる。

また、本発明を、例えば、パーソナルコンピュータに適用し、ＰＣのモニターに、画像一覧２０を表示出力する場合、あるいは、パーソナルコンピュータからプリンタを制御して画像一覧を印刷出力する場合にも、本発明を適用できる。

また、上述した実施形態では、動画像ファイルおよび静止画像ファイルは、共に撮影により生成された画像ファイルであるとして説明したが、動画像ファイルおよび静止画像ファイルは、撮影以外の方法で生成されるものであっても、本発明を適用可能である。その場合は、撮影日時に代えて、ファイルの作成日時を表すファイルの生成日時情報や、ファイルの更新日時情報など、他の条件を元に、インデックス画像の配置順序を決定するように構成されても良い。

また、上述した実施形態では、メディアカード内に、静止画像ファイルと動画像ファイルとが混在している場合について説明したが、メディアカード内に動画像ファイルのみが格納されている場合にも本発明は適用可能である。

また、上述した実施形態では、着脱可能なメディアカード内に記憶されている画像情報を処理対象としていたが、ＭＦＰ１の内部メモリに格納された画像情報を処理対象とする場合にも、本発明は適用可能である。

また、上述した実施形態では、グループを分類する条件として、「撮影日」を採用したが、「撮影月」、「撮影年」、「撮影時間の近いものを同じグループとして扱う」など、様々な条件が考えられる。この条件は、あらかじめユーザが操作部４からあらかじめ設定できる形でも良いし、あらかじめ１条件固定で設定しておいても良い。

さらに、上記実施形態で説明した条件に代えて他の条件に基づいて、配置順序の決定およびインデックス画像の分類が行われても良い。例えば、ダイナミックレンジや、平均輝度、画像に顔が含まれるか否か、など、他の条件で、画像情報を分類するものであっても良い。

本発明の画像処理装置の実施形態であるＭＦＰの外観構成を示した斜視図である。 ＭＦＰの電気的構成を示すブロック図である。 ＭＦＰが出力する画像一覧の一例を示す図である。 ファイル情報記憶領域の構成を模式的に示す図である。 配置情報記憶領域の構成を模式的に示す図である。 グループ情報記憶領域の構成を模式的に示す図である。 画像管理情報記憶領域の構成を模式的に示す図である。 レイアウト画像印刷処理を示すフローチャートである。 配置順決定処理を示すフローチャートである。 画像日付算出処理を示すフローチャートである。 図９に示す配置順決定処理の続きの部分を示すフローチャートである。 管理番号決定処理を示すフローチャートである。 配置印刷処理を示すフローチャートである。 図１３に示す配置印刷処理の続きを示すフローチャートである。 特定画像印刷処理を示すフローチャートである。

符号の説明

１ ＭＦＰ（画像処理装置の一例）
３ プリンタ（記録手段の一部）
４ 操作部（入力手段）
６ スロット部（取得手段の一部）
２０ 画像一覧
２１ａ，２１ｂ，２１ｃ インデックス画像（フレーム画像の一例）
２２ インデックス画像（静止画像の一例）
Ｓ２１２ａ，Ｓ２１４ａ 補正手段の一部
Ｓ２１２ｂ，Ｓ２１４ｂ 生成手段の一部
Ｓ２２５ 出力制御手段の一部
Ｓ５０３ 特定手段の一部
Ｓ５１６ 第２の出力制御手段の一部

Claims (8)

1. 画像ファイルとして、複数のフレーム画像を含む動画像ファイルを取得する取得手段と、
   前記取得手段によって取得された動画像ファイルに含まれる前記複数のフレーム画像のうち、第１のフレーム画像と、前記第１のフレーム画像と異なる第２のフレーム画像と、に対して同一の処理を実行することによって画像品質を補正する補正手段と、
   前記補正手段によって補正された補正後画像と、前記補正後画像に対応する補正前画像とを合成し、二分割した一方の領域が補正される前の状態、他方の領域が補正された後の状態として構成される合成画像であって、前記一方の領域は、前記補正前画像の中の一の領域であり、前記他方の領域は、前記補正前画像の中の前記一の領域を除く領域を補正した領域である前記合成画像を、前記第１のフレーム画像と、前記第２のフレーム画像と、のそれぞれについて生成する生成手段と、
   前記第１のフレーム画像から生成される第１の合成画像と、前記第２のフレーム画像から生成される第２の合成画像と、を含む複数の合成画像を、同一の出力面上に出力させる出力制御手段とを備えていることを特徴とする画像処理装置。
2. 前記生成手段は、前記一方の領域と前記他方の領域とが略二等分された合成画像を生成することを特徴とする請求項１に記載の画像処理装置。
3. 前記取得手段は、前記画像ファイルとして、動画像ファイルと静止画像ファイルとを取得し、
   その取得手段によって取得された動画像ファイルからフレーム画像を抽出する抽出手段を備え、
   前記補正手段は、画像品質を補正する画像として、前記抽出手段から抽出されたフレーム画像と前記静止画像ファイルが示す静止画像とを補正することを特徴とする請求項１又は２に記載の画像処理装置。
4. 前記画像ファイルが複数取得される場合に、前記複数の画像の各々を識別し、且つ、前記複数の画像のそれぞれの合成画像を構成する一方の領域と他方の領域とを識別する識別情報を入力する入力手段と、
   その入力手段によって入力された識別情報に対応する画像を特定する特定手段と、
   前記入力手段を介して前記識別情報が入力された場合、前記特定手段によって特定された画像だけを出力させる第２の出力制御手段とを備え、
   前記生成手段は、前記識別情報が付加された複数の合成画像を生成し、
   前記出力制御手段は、前記識別情報が付加された複数の合成画像を、同一出力面上に並べて出力させることを特徴とする請求項１から３のいずれかに記載の画像処理装置。
5. 前記補正手段は、画像の色について、輝度、彩度、色相のうち何れか一以上を補正することを特徴とする請求項１から４のいずれかに記載の画像処理装置。
6. 記録用紙に画像を記録する記録手段を備え、
   前記出力制御手段は、前記生成手段によって生成された複数の合成画像を、前記記録手段によって前記記録用紙の同一紙面上に記録させることを特徴とする請求項１から５のいずれかに記載の画像処理装置。
7. 前記第２の出力制御手段は、前記特定手段によって特定された画像だけを、記録用紙の同一紙面上に記録させることを特徴とする請求項４に記載の画像処理装置。
8. 画像ファイルとして、複数のフレーム画像を含む動画像ファイルを取得する取得手段と、
   前記取得手段によって取得された動画像ファイルに含まれる前記複数のフレーム画像のうち、第１のフレーム画像と、前記第１のフレーム画像と異なる第２のフレーム画像と、に対して同一の処理を実行することによって画像品質を補正する補正手段と、
   前記取得手段によって取得された画像ファイルが示す画像について、前記補正手段によって画像品質を補正されない領域である前記画像内の第１の矩形領域と、前記補正手段によって画像品質を補正された第２の矩形領域であって前記第１の矩形領域を除く領域である前記第２の矩形領域と、から構成される出力画像を、前記第１のフレーム画像と、前記第２のフレーム画像と、のそれぞれについて生成する生成手段と、
   前記第１のフレーム画像から生成される第１の生成画像と、前記第２のフレーム画像から生成される第２の生成画像と、を含む複数の生成画像を、同一の出力面上に出力させる出力制御手段とを備えていることを特徴とする画像処理装置。

Images