JP2004320233A - 画像記録再生方法および画像記録再生装置 - Google Patents

Abstract

【課題】ユーザーとしては簡単な操作や入力によって、再生される画像がユーザーの気に入っている画像であるか否かをユーザーに提示できるようにする。
【解決手段】ユーザーは、撮影した画像が気に入ったとき、感性キーを“１”に設定する。システム制御部は、その感性キー情報を画像ファイルのユーザーコメント欄に記録するとともに、原画像１を再生した回数を当該の画像に対するアクセス頻度としてユーザーコメント欄に記録する。システム制御部は、サムネイル画像の表示時、感性キー情報が“１”（好感キー情報）とされた画像のみ、またはユーザーが指示したユーザー別のアクセス頻度が所定値以上の画像のみを、表示するとともに、そのうちのユーザーによって選択された画像の原画像１を表示する際、感性キー情報が“１”（好感キー情報）であるときには、「お気に入りの画像です」というメッセージ文を生成し、音声ナレーションを出力する。
【選択図】 図１２

Description

【０００１】
【発明の属する技術分野】
この発明は、ＤＳＣ（デジタルスチルカメラ）やカメラ付きＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）などの、画像を撮影記録し、再生する装置、および、この画像記録再生装置での画像記録再生方法に関する。
【０００２】
【従来の技術】
ＤＳＣでは、撮影された画像が、定められたファイルフォーマットの画像ファイルとして、メモリカードなどのリムーバブル（着脱可能な）記録メディアに記録される。画像ファイルには、原画像（主画像）のデータのほかに、サムネイル画像（見出し用の縮小画像）のデータが付加され、原画像のデータとリンクされる。
【０００３】
再生時には、サムネイル画像のデータによって、ディスプレイ上にサムネイル画像が配列表示され、そのうちのユーザーによって選択された画像が、原画像のデータによってディスプレイ上に表示される。
【０００４】
ユーザーは、その表示された画像を見て、画像をプリントアウトし、パーソナルコンピュータに取り込み、または不要なものは廃棄する、などの処理を行う。
【０００５】
しかし、ＤＳＣの表示画面は、もともと小さく、ＤＳＣの小型化の要請によって、さらに小さくなる傾向にある。そのため、表示された画像を見ただけでは、どのような画像であるかを確実に判断することが難しい。勿論、サムネイル画像の配列表示状態では、その判断がいっそう難しい。
【０００６】
表示画面上に、画像を解説する文字を表示することも考えられているが、画面自体が小さいので、文字も大きくできないとともに、同時に多数の文字を表示できないため、十分に解説することは困難である。
【０００７】
特許文献１（特許第３０８１３０４号公報）には、通信衛星を利用した放送のビジネスニュース番組など、特定の視聴者にのみ配信する映像番組を制作するに際して、データベースに用意されている多数の画像データから番組制作用の素材として利用する画像を迅速に検索することができるように、各画像の内容を説明する文の音声データをデータベースに蓄積しておき、この音声データによる音声ナレーションを聞いて画像の内容を判断することが示されている。
【０００８】
【特許文献１】
特許第３０８１３０４号公報。
【０００９】
【発明が解決しようとする課題】
しかしながら、上記の特許文献１に示されたような方法を、ＤＳＣによって撮影された画像に利用しようとすると、ユーザーは、撮影の都度、撮影された画像の内容を説明する文章を考え、ＤＳＣに文字を入力して、記録メディアに画像ファイルに対応づけてテキストファイルを記録し、または、文章を読み上げて、記録メディアに画像ファイルに対応づけて音声ファイルを記録しなければならず、ユーザーの負担が大きくなるだけでなく、記録メディアに記録されるファイルが多くなる。
【００１０】
そこで、この発明は、ユーザーとしては簡単な操作や入力によって、または特に操作や入力を必要とすることなく、しかも、画像ファイルとは別にテキストファイルや音声ファイルを記録することなく、再生される画像がユーザーの気に入っている画像であるか否かをユーザーに的確に提示することができ、ユーザーが自分の気に入っている画像を容易かつ確実に検索することができるようにしたものである。
【００１１】
【課題を解決するための手段】
第１の発明の画像記録再生方法は、
画像を撮影し、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する撮影記録工程と、
ユーザーの操作に基づいて、前記画像がユーザーの気に入っている画像であることを示す好感キー情報を、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録する情報記録工程と、
前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生工程と、
前記好感キー情報に基づいて、再生する画像がユーザーの気に入っている画像であることを、音声によってメッセージするメッセージ工程と、
を備えることを特徴とする。
【００１２】
第２の発明の画像記録再生方法は、
画像を撮影し、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する撮影記録工程と、
前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生工程と、
前記画像ファイルとして記録された画像の原画像を再生した回数を、当該の画像に対するアクセス頻度として、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録するとともに、当該の画像の原画像を再生するごとにカウントアップする処理工程と、
を備えることを特徴とする。
【００１３】
上記の構成の、第１の発明の画像記録再生方法では、ユーザーは、撮影された画像が自分の気に入った画像であるときには、撮影時や撮影後において、画像記録再生装置で所定のキーを操作するなどの簡単な操作を行うだけで、当該の画像の再生時、画像記録再生装置による、「お気に入りの画像です」というような音声ナレーションや「ピンポーン」というような効果音などの音声メッセージによって、当該の画像が自分の気に入っている画像であることが分かり、自分の気に入っている画像を容易かつ確実に見つけ出すことができる。
【００１４】
上記の構成の、第２の発明の画像記録再生方法では、ユーザーは、自分が気に入っている画像の原画像を何度か再生するだけで、ほかに特別の操作や入力を行うことなく、画像記録再生装置に対して、サムネイル画像の表示時にはアクセス頻度が所定値以上の画像のみを表示させるなど、アクセス頻度に応じた処理を実行させることができ、自分の気に入っている画像を容易かつ確実に見つけ出すことができる。
【００１５】
しかも、第１の発明における好感キー情報や、第２の発明におけるアクセス頻度データは、画像ファイルのファイルフォーマットで指定された領域に記録するので、画像ファイルとは別にテキストファイルや音声ファイルなどを記録する必要がない。
【００１６】
【発明の実施の形態】
〔画像記録再生装置のシステム構成：図１〕
図１は、この発明の画像記録再生装置の一実施形態のシステム構成を示し、ＤＳＣシステムとして構成した場合である。
【００１７】
このＤＳＣシステムでは、被写体画像からの光が、撮像光学系１１を介して、ＣＣＤ撮像素子やＣＭＯＳ撮像素子などの撮像素子１２に投射されて、撮像素子１２からアナログ画像信号が得られ、そのアナログ画像信号が、信号処理部１３で、サンプルホールドされ、自動利得制御された後、デジタル画像データに変換される。
【００１８】
記録再生処理部１４では、画像記録時には、この信号処理部１３からの撮影された画像のデータが圧縮される。その圧縮画像データは、システム制御部１７によって、後述のようなファイルフォーマットの画像ファイルとして、リムーバブル記録メディア２５に記録され、リムーバブル記録メディア２５から読み出される。記録再生処理部１４では、画像再生時には、この読み出された画像ファイルの圧縮画像データが伸長される。
【００１９】
その伸長後の画像データは、表示処理部１５で表示用に処理されて、液晶ディスプレイなどのディスプレイ１６に供給され、ディスプレイ１６上に再生画像が表示される。
【００２０】
さらに、後述のように、リムーバブル記録メディア２５に記録される、または記録された画像ファイルの、ファイルフォーマットで指定された領域（欄、フィールド、タグなどと称される領域）には、ユーザーによって入力される画像内容や撮影場所を示す情報、システム制御部１７によって取得される撮影属性情報、ユーザーによって設定される感性キー情報、およびシステム制御部１７によって生成されるアクセス頻度データが書き込まれ、画像再生時、これら情報から、構文構成部１８で、辞書解析および構文解析によって、画像についてのメッセージ文が生成され、さらに、そのテキストから、テキスト音声合成部１９で、テキスト音声合成によって、音声ナレーションのデータが生成され、音声ナレーションが出力される。
【００２１】
システム制御部１７は、ＣＰＵ、このＣＰＵが実行すべき処理プログラムや後述のファイルフォーマット（ファイルシステム）が記述されたプログラムメモリ、およびＣＰＵのワークエリアなどとして機能するＲＡＭなどを備えるものである。
【００２２】
システム制御部１７には、カメラ操作部２１が、インターフェース２２を介して接続され、文字入力用のキー操作入力部２３が、インターフェース２４を介して接続されるとともに、メディア用スロットに装着されたリムーバブル記録メディア２５が、メディアドライブ２６を介して接続される。
【００２３】
リムーバブル記録メディア２５としては、メモリカード、カード型ＨＤＤ（ハードディスクドライブ）、リムーバブル光ディスクなどの、書き込み可能な、または書き込み消去可能な、好ましくは大容量化された書き換え可能な、不揮発性メディアを用いる。具体的に、以下の実施形態では、メモリカードを用いる。
【００２４】
テキスト音声合成部１９で生成された音声データは、Ｄ／Ａコンバータ２７でアナログ音声信号に変換され、その音声信号が音声増幅回路２８で増幅されてスピーカ２９に供給され、スピーカ２９から音声ナレーションが出力される。
【００２５】
さらに、この実施形態のＤＳＣシステムでは、ユーザーが音声を入力し、音声ファイルとしてリムーバブル記録メディア２５に記録することができるように、マイクロホン３１が設けられる。
【００２６】
このマイクロホン３１からのアナログ音声信号は、音声増幅回路３２で増幅されて、Ａ／Ｄコンバータ３３でデジタル音声データに変換され、その音声データが、システム制御部１７に取り込まれ、記録再生処理部１４で圧縮されて、音声ファイルとしてリムーバブル記録メディア２５に記録され、再生時には、記録再生処理部１４で伸長されて、システム制御部１７からＤ／Ａコンバータ２７に送出される。
【００２７】
〔ファイルフォーマットおよび画像関連情報：図２〜図７〕
（ファイルフォーマットの概要）
携帯型の撮影画像記録メディアのフォーマットとしては、Ｅｘｉｆ（Ｅｘｃｈａｎｇｅａｂｌｅ ｉｍａｇｅ ｆｉｌｅ ｆｏｒｍａｔ：以下ではＥｘｉｆファイルフォーマットと称する）が広く使用されており、そのなかでも、ＤＳＣ用としては、ＤＣＦ（Ｄｅｓｉｇｎ ｒｕｌｅ ｆｏｒ Ｃａｍｅｒａ Ｆｉｌｅｓｙｓｔｅｍ：以下ではＤＣＦファイルシステムと称する）というファイルシステム（実体はＤＳＣ用フラッシュメモリのメディアファイルフォーマット）が広く採用されている。
【００２８】
ＤＣＦファイルシステムおよびその基本であるＥｘｉｆファイルフォーマットは、ＤＳＣの撮影画像に限らず、音声ファイルのメモリカード用フォーマットとして広く使用されている。
【００２９】
また、このＥｘｉｆファイルフォーマットおよびＤＣＦファイルシステムでは、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）やＴＩＦＦ（Ｔａｇｇｅｄ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）などの既存のフォーマットによる画像データとともに、ファイル作成日時などのファイル付属情報やサムネイル画像データを一つのファイルに記録することができる。
【００３０】
なお、「サムネイル」は、Ｅｘｉｆ規格およびＤＣＦ規格でも定義されているように、見出し用の縮小画像であるが、場合によって「サムネイル画像」と称する。また、この発明で、サムネイル画像の配列表示とは、複数のサムネイル画像を、一行または一列に配置して表示し、または行列方向に２次元に配置して表示することである。
【００３１】
以下の実施形態では、リムーバブル記録メディア２５としては、上記のようにメモリカードを用い、そのファイルフォーマットとして、ＥｘｉｆファイルフォーマットおよびＤＣＦファイルシステムを用いる。
【００３２】
画像データの圧縮方式としては、ＪＰＥＧ圧縮方式を用いるが、将来のＪＰＥＧ２０００を初めとする進歩した圧縮方式や他の圧縮方式を用いることもできる。
【００３３】
メモリカードのファイルシステムとしては、ＦＡＴ（Ｆｉｌｅ Ａｌｌｏｃａｔｉｏｎ Ｔａｂｌｅ）やＦＡＴ３２が広く使用されているが、以下の実施形態では、メディア容量が２ＧＢｙｔｅを超える場合にもアクセス可能なＦＡＴ３２ファイルシステムを用いる。
【００３４】
ただし、Ｗｉｎｄｏｗｓ（登録商標）システムがサポートするＦＡＴやＮＴＦＳ（ＮＴ Ｆｉｌｅ Ｓｙｓｔｅｍ）を用いることもでき、リムーバブル記録メディア２５として光ディスクを用いる場合には、ＵＤＦ（Ｕｎｉｖｅｒｓａｌ Ｄｉｓｃ Ｆｏｒｍａｔ）およびその静止画対応ファイルフォーマットを用いることができる。
【００３５】
Ｅｘｉｆファイルフォーマットでは、（ａ）フォルダ名は英数字番号のみであり、その開始番号は１００である、（ｂ）フォルダ名およびファイル名に２バイトコードを使用することはできない、などの制限がある。
【００３６】
（画像ファイルフォーマット：図２〜図４）
＜ＤＣＦ基本ファイル：図２および図３＞
図２に、ＤＣＦファイルシステムに準拠する画像ファイルフォーマットの一例を示し、圧縮タグ“６”で圧縮サムネイルを有し、ＤＣＦ基本ファイルとしてＤＣＦ基本主画像データとＤＣＦ基本サムネイルデータを同一ファイル内に有する場合である。この場合、ファイル拡張子は“ＪＰＧ”である。
【００３７】
図３に、ＤＣＦ基本ファイル（拡張子“ＪＰＧ”）がＤＣＦ基本主画像とＤＣＦ基本サムネイルとからなることを概略的に示す。
【００３８】
図２に示すように、ＤＣＦ基本ファイル（Ｅｘｉｆ圧縮ファイル）は、ＳＯＩ（Ｓｔａｒｔ Ｏｆ Ｉｍａｇｅ）で開始し、これに続いて、最大６４ｋＢｙｔｅサイズのＥｘｉｆ付属情報用のＡＰＰ（アプリケーション・マーカーセグメント）１、拡張データ用に必要に応じて追加されるＡＰＰ２（図では省略）、ＪＰＥＧテーブル、およびＪＰＥＧ圧縮の基本主画像データが記録され、ＥＯＩ（Ｅｎｄ Ｏｆ Ｉｍａｇｅ）で終了する。
【００３９】
ＡＰＰ１は、ＡＰＰ１マーカーで開始し、これに続いて、ＡＰＰ１データ長、Ｅｘｉｆ識別コード、ＪＰＥＧテーブル、およびＥｘｉｆＩＦＤが記録される。ＥｘｉｆＩＦＤは、後述のような構造とされる。
【００４０】
さらに、ＥｘｉｆＩＦＤに続く第１ＩＦＤで、ＪＰＥＧ圧縮データのアドレスおよびデータ長が指定され、その指定されたアドレスに、ＪＰＥＧ圧縮の基本サムネイルデータが記録される。
【００４１】
このＪＰＥＧ圧縮の基本サムネイルデータ（圧縮サムネイル）は、ＳＯＩで開始し、これに続いて、ＪＰＥＧテーブル、およびＪＰＥＧ圧縮の基本サムネイルの生ストリームデータが記録され、ＥＯＩで終了する。
【００４２】
ＥｘｉｆＩＦＤには、付属情報として、Ｅｘｉｆバージョンに関するタグ、画像データの特性に関するタグ、画像構造に関するタグ、ユーザーコメントタグ、関連ファイル情報に関するタグ、日時に関するタグ、撮影条件に関するタグ、およびＩＦＤポインタ互換性が記録される。
【００４３】
関連ファイル情報タグでは、当該の画像ファイルと関連する音声ファイルなどのファイルとの相互リンクが規定される。
【００４４】
ユーザーコメントタグでは、ＥｘｉｆＩＦＤ内のユーザーコメント欄が指定される。そのユーザーコメント欄の先頭には、ユーザーコメントの文字コードタイプが、ＡＳＣＩＩ文字８字によって指定される。日本語の場合、文字コードは、ＡＳＣＩＩ，ＵｎｉｃｏｄｅまたはＪＩＳであり、最も望ましいのは、Ｕｎｉｃｏｄｅである。
【００４５】
日本でのパーソナルコンピュータの事情によってＳｈｉｆｔＪＩＳを用いる場合には、未定義コードに指定されて使用されるので、それに対応することを考えて、コード変換部や対応する翻訳部があることが望ましい。インターネット上からダウンロードしたファイルを蓄えたＤＣＦファイルシステムのメモリカードを用いる場合にも、海外からのダウンロードへの対応を考えて、コード変換部や対応する翻訳部があることが望ましい。
【００４６】
日時タグでは、ＥｘｉｆＩＦＤ内の日時フィールドが指定され、その日時フィールドには、システム制御部１７によって決定されたファイル作成日時（撮影日時）が、撮影属性情報として記録される。
【００４７】
＜ＤＣＦ拡張画像ファイルおよびＤＣＦサムネイルファイル：図４＞
ＤＣＦファイルシステムに準拠する画像ファイルフォーマットとしては、図４に概略的に示すように、同一フォルダ内でＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルを別ファイルのペアとして対応づけることもできる。この場合のＤＣＦサムネイルファイルの拡張子は、“ＴＨＭ”である。
【００４８】
この場合には、ＤＣＦサムネイルファイル内に、ＥｘｉｆＩＦＤを有するＡＰＰ１が記録され、そのＥｘｉｆＩＦＤ内に、ユーザーコメント欄および日時フィールドが指定される。
【００４９】
＜ファイルの種類および拡張子＞
ＤＣＦファイルシステムでは、撮影専用のファイルヘッダが設けられ、ここで圧縮データの種別によって画像ファイルであることが示され、さらには、図２および図３のようにＤＣＦ基本主画像とＤＣＦ基本サムネイルを同一ファイル内に有するＪＰＥＧ圧縮ＤＣＦ基本ファイルであることを示す拡張子“ＪＰＧ”、または図４のようにＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルが別ファイルでペアとなる場合のＤＣＦサムネイルファイルであることを示す拡張子“ＴＨＭ”が記録される。
【００５０】
＜画像関連情報＞
画像ファイルのファイルフォーマットとして、以上のようなファイルフォーマットを用いる場合には、ユーザーによって入力される画像内容や撮影場所を示す文字列データ、ユーザーによって設定される感性キー情報、およびシステム制御部１７によって生成されるアクセス頻度データが、ユーザーコメントデータとして、ＥｘｉｆＩＦＤ内のユーザーコメント欄に書き込まれ、構文構成およびテキスト音声合成による音声ナレーションの生成に供されるように、ＤＳＣシステムを構成する。
【００５１】
また、撮影日時（ファイル作成日時）を示す文字列データが、システム制御部１７によって撮影属性情報として、ＥｘｉｆＩＦＤ内の日時フィールドに書き込まれ、構文構成およびテキスト音声合成による音声ナレーションの生成に供されるように、ＤＳＣシステムを構成する。
【００５２】
＜フォルダ名およびファイル名＞
フォルダ名は、Ｅｘｉｆファイルフォーマットでは、上記（ａ）（ｂ）の制限のもとに、「数字３桁＋アルファベット５文字」が認められ、ＤＣＦファイルシステムでは、１バイトコードの集合として、「英字２文字のＩＭ＋英字５文字」が推奨されている。
【００５３】
そこで、この実施形態では、図３または図４に示すように、画像ファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）とは別に、フォルダ名対照テーブルファイル９を設けて、後述のようにユーザーによって画像整理用に命名されるフォルダ名、例えば「家族」「花」「犬」などという文字列の２バイトコードと、ＤＣＦファイルシステムに準拠してシステム制御部１７によって登録される上記の「数字３桁＋アルファベット５文字」のフォルダ名、例えば「１０１ＡＡＡＡＡ」「１０２ＡＡＡＡＡ」「１０３ＡＡＡＡＡ」などというコードとをリンクさせる。
【００５４】
そして、後述のようにユーザーがユーザー命名のフォルダ名を選択したときには、システム制御部１７は、このフォルダ名対照テーブルファイル９から、その選択されたユーザー命名のフォルダ名に対応する自動登録のフォルダ名を読み出し、そのフォルダ名が付されたフォルダを呼び出すように、ＤＳＣシステムを構成する。
【００５５】
ファイル名は、ＤＣＦ基本ファイルおよびＤＣＦ拡張画像ファイルでは、「（先頭４文字の英字）＋（ファイル番号４文字）」からなるＤＣＦファイル名として、順番に並べて管理するものとされ、以下の実施形態でも、これに従う。
【００５６】
（音声ファイルフォーマット：図５）
図５に、Ｅｘｉｆ規格に準拠する音声ファイルフォーマットの一例を示し、「ＲＩＦＦ／ＷＡＶＥ ＭＰ３Ａｕｄｉｏ」の圧縮オーディオファイルの場合である。この場合、ファイル拡張子は“ＷＡＶ”または“ＭＰ３”である。
【００５７】
このＲＩＦＦファイルは、「チャンク」と呼ばれるデータブロックから構成され、最上位のＲＩＦＦチャンクでは、“ＲＩＦＦ”というチャンクＩＤ（ｃｋＩＤ）に続いて、ＲＩＦＦチャンクのチャンクサイズ（ｃｋＳｉｚｅ）、および“ＷＡＶＥ”タイプが指定され、さらに、フォーマットチャンクで、音声符号化方式や音声チャネル数などが指定される。
【００５８】
さらに、ファクトチャンクで、音声データのサンプル長が指定され、それに続いて、付属情報サブチャンクとして、ＩＮＦＯリストチャンクおよびＥｘｉｆリストチャンクが記録され、最後に、データチャンクとして、ＭＰ３圧縮形式のＷＡＶＥオーディオストリームデータが記録される。データチャンクは、チャンクＩＤ（ｃｋＩＤ）として、ＡＳＣＩＩ文字列“ｄａｔａ”（６４６１７４６１）を開始マーカーとする。
【００５９】
ＩＮＦＯリストチャンクでは、“ＬＩＳＴ”というチャンクＩＤ、ＩＮＦＯリストチャンクのチャンクサイズ、および“ＩＮＦＯ”というリストタイプの記録に続いて、音声ファイルのタイトル、ジャンル、ファイル作成年月日、コメント、アーティスト、および著作権情報が、それぞれＡＳＣＩＩ文字列で記載される。
【００６０】
Ｅｘｉｆリストチャンクでは、“ＬＩＳＴ”というチャンクＩＤ、Ｅｘｉｆリストチャンクのチャンクサイズ、および“ｅｘｉｆ”というＥｘｉｆ専用のリストタイプの記録に続いて、規格バージョン、関連画像ファイル名、音声ファイル作成日時、作成メーカー名、作成モデル名、メーカー用ノート、およびユーザーコメントｅｕｃｍというデータフィールドが記録される。
【００６１】
関連画像ファイル名は、当該の音声ファイルに関連する画像ファイルがある場合に、その画像ファイルを「ファイル名．拡張子」の形式で直接指定する（ポインタは許可されない）ものであり、音声ファイル作成日時は、当該の音声ファイルの作成日時を「年：月：日：時：分：秒．サブ秒」の形式でサブ秒まで記載するものである。
【００６２】
ユーザーコメントｅｕｃｍは、“ｅｕｃｍ”というチャンクＩＤ、およびユーザーコメントｅｕｃｍのチャンクサイズに続いて、チャンクデータ（ｃｋＤａｔａ）であるユーザーコメントが記載される。
【００６３】
このユーザーコメントでは、先頭８バイトで、ＡＳＣＩＩ大文字によって文字コードタイプが指定され、それに続いて、ユーザーコメント欄が設けられる。
【００６４】
文字コードは、Ｕｎｉｃｏｄｅが望ましい。日本でのパーソナルコンピュータの事情によってＳｈｉｆｔＪＩＳを用いる場合には、Ｕｎｄｅｆｉｎｅｄが指定される。
【００６５】
ユーザーコメント欄には、２バイトコード文字によるユーザーコメントデータとして、アーティスト名や曲名、ファイル作成日時、曲のさび部分の歌詞などが登録される。
【００６６】
（画像関連情報の書き込み読み出し制御：図６および図７）
図６に、図２および図３に示したＤＣＦ基本ファイル（拡張子“ＪＰＧ”）を用いる場合の、ユーザーコメントデータおよび撮影属性情報の書き込み読み出し制御の様子を示す。
【００６７】
この例は、ユーザーによって、画像内容として「家族」「チワワ」「モモちゃん」の各単語が入力され、撮影場所として「自宅」の単語が入力されるとともに、システム制御部１７によって、撮影日（撮影年月日）として「２００２年１１月２１日」が取得される場合である。
【００６８】
システム制御部１７は、入力された「家族」「チワワ」「モモちゃん」「自宅」の各単語に、ＦＡＴ３２ファイルシステムのクラスタ単位で文字列コードを指定して、ユーザーコメントデータの文字列データを生成し、ＤＣＦ基本ファイル内のＡＰＰ１内のＥｘｉｆＩＦＤ内のユーザーコメント欄に、アドレスで区切って記録し、撮影日時（ファイル作成日時）を、「年：月：日：時：分：秒．サブ秒」の形式でサブ秒まで取得して、同じＥｘｉｆＩＦＤ内の日時フィールドに、１６進数データの撮影属性情報として記録する。
【００６９】
感性キー情報は、ユーザーが当該の画像を気に入って、後述のような肯定的な操作をしたときには、システム制御部１７によって“１”（Ｙｅｓ，ＯＮ）に設定されて、好感キー情報（当該の画像がユーザーの気に入っている画像であることを示す情報）となり、ユーザーが後述のような非肯定的な操作をし、または特に操作をしなかったときには、システム制御部１７によって“０”（Ｎｏ，ＯＦＦ）に設定されるものである。
【００７０】
感性キー情報も、ｆａｖｏｒｉｔｅな属性情報として、ＤＣＦ基本ファイル内のＡＰＰ１内のＥｘｉｆＩＦＤ内のユーザーコメント欄に、アドレスで区切って記録される。
【００７１】
アクセス頻度とは、当該の画像の原画像を再生した回数である。画像を撮影し、画像ファイルとしてリムーバブル記録メディア２５に記録した直後の時点では、当該の画像に対するアクセス頻度は、初期値の０（ゼロ回）とされる。
【００７２】
この実施形態では、一台のＤＳＣを、数人の家族など、複数のユーザーが共用する場合を考慮して、父親、母親、子供というユーザー別にアクセス頻度をカウントするもので、例えば、父親アクセス頻度は、後述のように、あるユーザーが、再生時、父親モードを選択した上で、当該の画像の原画像を再生した場合に、システム制御部１７によって１回カウントアップされる。
【００７３】
ただし、システム制御部１７は、当該の画像の原画像を、数秒以上というような所定時間以上に渡ってディスプレイ１６上に表示した場合にのみ、ユーザーが当該の画像を鑑賞したと判断して、アクセス頻度をカウントアップし、ユーザーの操作によって、当該の画像の原画像を、所定時間に満たない時間でしかディスプレイ１６上に表示しなかった場合には、ユーザーが当該の画像を鑑賞しなかったと判断して、アクセス頻度をカウントアップしないように、ＤＳＣシステムを構成することが望ましい。
【００７４】
ユーザー別のアクセス頻度を示すデータ（カウント値）も、ＤＣＦ基本ファイル内のＡＰＰ１内のＥｘｉｆＩＦＤ内のユーザーコメント欄に、アドレスで区切って記録される。
【００７５】
これらユーザーコメントデータ（画像内容情報、撮影場所情報、感性キー情報およびユーザー別アクセス頻度データ）および撮影属性情報（撮影日時のデータ）に、ＤＣＦ基本ファイルへのポインタが付加されて、ソフトウェア処理上の登録キー情報クラス構造体が構成される。
【００７６】
ＤＣＦ基本ファイルへのポインタは、そのファイルフォーマットの論理ブロックアドレス（ＬＢＡ）または論理セクタ番号（ＬＳＮ）でベースアドレスを指定して、ＦＡＴ３２ファイルシステムのクラスタ単位でＥｘｉｆＩＦＤ内のユーザーコメント欄および日時フィールドに対して、データオブジェクト集合インスタンスの書き込み読み出しを制御するものである。
【００７７】
日時フィールドの撮影属性情報（撮影日時のデータ）は、システム制御部１７が取得し、ユーザーが記入することはできないので、ユーザーに対しては読み出し専用のパーミッション属性を持つデータである。
【００７８】
これに対して、画像内容情報、撮影場所情報および感性キー情報は、ユーザーの入力または設定によって記録されるので、書き込み読み出しの双方が可能なパーミッション属性を持つデータである。ユーザー別のアクセス頻度データも、同様に、書き込み読み出しの双方が可能なパーミッション属性を持つデータである。
【００７９】
上述したユーザー命名の２バイトコード文字列のフォルダ名も、同様に、ユーザーが変更可能なパーミッション属性を持つデータとする。
【００８０】
また、この場合のファイル拡張子“ＪＰＧ”は、ＤＣＦファイルシステムに準拠する一意のファイル拡張子であるので、ファイルを作成または削除する場合以外では、ソフトウェアによる変更が禁止される。
【００８１】
図７に、図４に示したようにＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルをペアで用いる場合の、ユーザーコメントデータおよび撮影属性情報の書き込み読み出し制御の様子を示す。
【００８２】
これは、ユーザーコメントデータ（画像内容情報、撮影場所情報、感性キー情報およびユーザー別アクセス頻度データ）および撮影属性情報（撮影日時のデータ）が、ＤＣＦサムネイルファイル（拡張子“ＴＨＭ”）内のＡＰＰ１内のＥｘｉｆＩＦＤ内のユーザーコメント欄および日時フィールドに記録され、ファイルへのポインタが、ＤＣＦサムネイルファイルへのポインタとなる点を除いて、図６に示したＤＣＦ基本ファイルを用いる場合と同じである。
【００８３】
〔ユーザーコメントデータの入力および記録：図８〜図１０〕
（キー操作入力部２３の例：図８）
画像内容や撮影場所を示す文字列の入力、および感性キーの設定は、図１に示したキー操作入力部２３によって行う。
【００８４】
図８に、キー操作入力部２３の一例を示す。この例は、携帯電話端末などのキー操作入力部と同様に、メニュー画面の開閉やメニュー項目の選択・決定などを行う操作キー２３１と、文字入力キー２３２とを備え、操作キー２３１の操作によって、文字入力キー２３２の入力モードを、同図（Ａ）のような数字入力モード、同図（Ｂ）のような仮名入力モード、または同図（Ｃ）のようなアルファベット入力モードに切り換えることができる場合である。
【００８５】
（画像内容などの入力・設定および記録：図９および図１０）
ユーザーは、以下のように、撮影時または撮影後、キー操作入力部２３での操作によって、フォルダ名を命名し、画像内容および撮影場所を入力し、感性キーを設定して、画像ファイル内に記録することができる。
【００８６】
撮影時、撮影された画像は、図９（Ａ）に示すように、原画像１としてディスプレイ１６上に表示され、ユーザーは撮影状態を確認することができる。
【００８７】
この状態で、ユーザーがキー操作入力部２３でフォルダ名のメニューを呼び出す操作をすると、図９（Ｂ）に示すように、ディスプレイ１６上に、原画像１にオーバーレイされてフォルダ名メニュー画面２が表示され、ユーザーが命名できるフォルダ名が、「家族」「花」「犬」などというように幾つか提示される。
【００８８】
ユーザーは、原画像１の内容に応じて、そのうちの一つ、例えば「犬」を選択する。これによって、システム制御部１７は、そのユーザー指定のフォルダ名に対応づけるＤＣＦファイルシステムに準拠するフォルダ名を決定し、上述したフォルダ名対照テーブルファイル９に記述する。
【００８９】
フォルダ名を指定したら、ユーザーは、ユーザーコメントデータ用の入力画面を呼び出す。これによって、フォルダ名メニュー画面２に代えて、図９（Ｃ）に示すような入力画面３が表示される。この入力画面３は、画像内容記入欄３ａ、撮影場所記入欄３ｂおよび感性キー設定欄３ｃに区分されたものとされ、その撮影場所記入欄３ｂには、「場所：」のプロンプトが表示され、感性キー設定欄３ｃには、「大切？『はい』『ふつう』」のプロンプトが表示される。
【００９０】
ユーザーは、画像内容記入欄３ａに、画像内容として、例えば「家族」「チワワ」「モモちゃん」の文字列を、各単語の間に半角スペースまたはカンマを挿入して入力し、その後、キー操作入力部２３の＃キー２３２ａを押して、入力フォーカスを撮影場所記入欄３ｂに移動させ、「場所：」のプロンプトが表示されている箇所に、撮影場所として、例えば「自宅」の文字列を入力し、その後、キー操作入力部２３の＃キー２３２ａを押して、入力フォーカスを感性キー設定欄３ｃに移動させ、カーソル操作および決定操作によって、「はい」と「ふつう」のいずれかを選択する。
【００９１】
これによって、システム制御部１７は、上述したフォルダ名対照テーブルファイル９を参照して、例えば「犬」というユーザー指定のフォルダ名に対応する「１０３ＡＡＡＡＡ」というＤＣＦファイルシステムに準拠するフォルダ名のフォルダをファイル保存先として、ユーザー入力の画像内容および撮影場所を示す文字列データ、およびユーザー設定の感性キー情報を、上述したようにＤＣＦ基本ファイル内またはＤＣＦサムネイルファイル内のユーザーコメント欄に書き込んだ上で、撮影された画像のファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）をメモリカードに記録する。
【００９２】
このとき、図９（Ｃ）に示すように、入力画面３とともに撮影日提示画面４が表示されて、既にシステム制御部１７が取得している撮影日（撮影日時）が変更不可状態で提示されることが望ましい。
【００９３】
以上は、撮影された画像を記録する場合であるが、既に画像ファイルとして記録されている画像についても、ユーザーの操作によって、その画像がディスプレイ１６上に呼び出され、入力画面３が表示されて、画像内容または撮影場所が入力され、感性キーが変更されることによって、未記録の画像内容情報または撮影場所情報が記録され、あるいは記録済みの画像内容情報、撮影場所情報または感性キー情報が書き換えられる。
【００９４】
図１０に、この画像記録後の各種情報の記録または書き換えの例を示す。この例では、ユーザーは、まず、フォルダ名のメニューを呼び出す操作をする。これによって、図１０左上に示すように、ディスプレイ１６上にフォルダ名メニュー画面２が表示される。
【００９５】
ユーザーは、そのうちから、呼び出すフォルダのフォルダ名、例えば「犬」を指示する。これによって、システム制御部１７は、上述したフォルダ名対照テーブルファイル９を参照して、例えば「犬」というユーザー指定のフォルダ名に対応する「１０３ＡＡＡＡＡ」というＤＣＦファイルシステムに準拠するフォルダ名のフォルダをファイル呼び出し先として、そのフォルダ内に記録されている各画像ファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）を、ＤＣＦファイルシステムに準拠するファイル名中のファイル番号順に読み出し、それぞれのＤＣＦ基本サムネイルまたはＤＣＦサムネイルファイルのデータによって、図１０右上に示すように、ディスプレイ１６上にサムネイル画像を配列表示する。
【００９６】
この状態で、ユーザーは、アイコン形状のサムネイル画像の一つを選択する。これによって、システム制御部１７は、その選択された画像のファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）中のＤＣＦ基本主画像またはＤＣＦ拡張画像ファイルのデータによって、図１０左下に示すように、ディスプレイ１６上に、選択された画像の原画像１を表示する。
【００９７】
次に、ユーザーは、ユーザーコメントデータ用の入力画面を呼び出す。これによって、図１０右下に示すように、ディスプレイ１６上に、原画像１にオーバーレイされて入力画面３および撮影日提示画面４が表示される。入力画面３は、画像内容記入欄３ａ、撮影場所記入欄３ｂおよび感性キー設定欄３ｃに区分されたものとされ、撮影日提示画面４には、記録済みの撮影日（撮影日時）が変更不可状態で表示される。
【００９８】
この状態で、ユーザーは、画像内容記入欄３ａに画像内容を示す文字列を入力し、または画像内容記入欄３ａに記入表示されている文字列を修正し、入力フォーカスを撮影場所記入欄３ｂに移動させて、撮影場所記入欄３ｂに撮影場所を示す文字列を入力し、または撮影場所記入欄３ｂに記入表示されている文字列を修正し、入力フォーカスを感性キー設定欄３ｃに移動させて、感性キーの設定を、「はい」から「ふつう」に、または「ふつう」から「はい」に修正する。
【００９９】
これによって、システム制御部１７は、未記録の画像内容情報または撮影場所情報を記録し、あるいは記録済みの画像内容情報、撮影場所情報または感性キー情報を書き換える。
【０１００】
〔画像の再生および音声ナレーション：図１１〜図１４〕
この実施形態では、画像記録後、ユーザーは、以下のような再生モードにおいて、画像を再生し、再生画像をディスプレイ１６上に表示させることができるとともに、構文構成部１８での構文構成およびテキスト音声合成部１９でのテキスト音声合成によって、再生画像についての音声ナレーションを出力させることができる。
【０１０１】
なお、この場合の構文構成およびテキスト音声合成の具体的方法は、後記の〔構文構成（テキスト生成）：図１５および図１６〕および〔テキスト音声合成：図１７および図１８〕で詳細に示す。
【０１０２】
さらに、この実施形態では、再生モードとして、通常モード、大切モード、父親モード、母親モードおよび子供モードが設定される。
【０１０３】
通常モードは、感性キー情報およびアクセス頻度データの如何に関係なく画像を再生する再生モードであり、大切モードは、後述のように、感性キー情報によって画像の再生を制御する再生モードであり、父親モード、母親モードまたは子供モードのユーザー別モードは、対応するユーザー別アクセス頻度データによって画像の再生を制御する再生モードである。
【０１０４】
（閲覧モード：図１１〜図１３）
サムネイル画像からユーザーによって選択された画像の原画像を再生し、ディスプレイ１６上に表示する再生モードを、ここでは閲覧モードと称する。
【０１０５】
図１１に、閲覧モードでの画像再生の例を示す。この例では、ユーザーは、まず、再生モードのメニューを呼び出す操作をする。これによって、図１１（Ａ）に示すように、ディスプレイ１６上にモード選択メニュー画面５が表示される。
【０１０６】
ユーザーは、このモード選択メニュー画面５から、上述した通常モード、大切モード、父親モード、母親モードおよび子供モードのうちのいずれかを選択した後、フォルダ名のメニューを呼び出す操作をする。これによって、図１１（Ｂ）に示すように、ディスプレイ１６上にフォルダ名メニュー画面２が表示される。
【０１０７】
ユーザーは、そのうちから、呼び出すフォルダのフォルダ名、例えば「犬」を指示する。これによって、システム制御部１７は、上述したフォルダ名対照テーブルファイル９を参照して、例えば「犬」というユーザー指定のフォルダ名に対応する「１０３ＡＡＡＡＡ」というＤＣＦファイルシステムに準拠するフォルダ名のフォルダをファイル呼び出し先として、そのフォルダ内に記録されている画像ファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）を読み出し、それぞれのＤＣＦ基本サムネイルまたはＤＣＦサムネイルファイルのデータによって、ディスプレイ１６上にサムネイル画像を配列表示する。
【０１０８】
この場合、ユーザーが通常モードを選択した場合には、そのフォルダ内の全ての画像ファイルが、ＤＣＦファイルシステムに準拠するファイル名中のファイル番号順に読み出され、図１１（Ｃ）に示すように、フォルダ内の全ての画像のサムネイル画像が、ファイル番号順に表示される。
【０１０９】
また、ユーザーが大切モードを選択した場合には、そのフォルダ内の、感性キー情報が“１”（好感キー情報）とされたｆａｖｏｒｉｔｅな属性情報を持つ画像ファイルのみが、ＤＣＦファイルシステムに準拠するファイル名中のファイル番号順に読み出され、図１１（Ｄ）に示すように、ユーザーの気に入っている画像のサムネイル画像のみが、ファイル番号順に表示される。
【０１１０】
また、ユーザーがユーザー別モード、例えば父親モードを選択した場合には、そのフォルダ内の、対応するユーザー別アクセス頻度、例えば父親アクセス頻度が、所定値（所定回）以上、例えば３（３回）以上の画像ファイルのみが、ＤＣＦファイルシステムに準拠するファイル名中のファイル番号順に読み出され、図１１（Ｅ）に示すように、ｆａｖｏｒｉｔｅな属性情報である、対応するユーザー別アクセス頻度データ、例えば父親アクセス頻度データが、所定値以上、例えば３以上の画像のサムネイル画像のみが、ファイル番号順に表示される。
【０１１１】
図１２の左上に示すように、図１１（Ｃ）（Ｄ）または（Ｅ）のようにサムネイル画像が配列表示された状態で、ユーザーは、アイコン形状のサムネイル画像の一つを選択する。これによって、システム制御部１７は、その選択された画像のファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）中のＤＣＦ基本主画像またはＤＣＦ拡張画像ファイルのデータによって、ディスプレイ１６上に、選択された画像の原画像１を表示する。
【０１１２】
同時に、このとき、システム制御部１７によって、その画像ファイルから、ユーザーコメントデータ（画像内容情報、撮影場所情報、およびｆａｖｏｒｉｔｅな属性情報である感性キー情報およびユーザー別アクセス頻度データ）および撮影属性情報（撮影日時のデータ）が読み出され、これらデータから、構文構成部１８での構文構成によって、メッセージ文が生成され、さらに、そのメッセージ文から、テキスト音声合成部１９でのテキスト音声合成によって、音声ナレーションが出力される。
【０１１３】
また、上記のようにユーザー別モードが選択された場合には、このとき、対応するユーザー別アクセス頻度が１回カウントアップされる。図１２は、父親モードが選択された場合で、父親アクセス頻度が１回カウントアップされる。
【０１１４】
図１３に、閲覧モードでの構文構成の例を示す。この例では、ユーザー指定のユーザー命名フォルダ名によって、「犬」という単語が選択され、画像内容を示す文字列データによって、「家族」「チワワ」「モモちゃん」という単語が選択されるとともに、構文パターンに付加する語として「この」「は」「の」「の」「です」という語が選択されて、「この犬は家族のチワワのモモちゃんです」というメッセージ文が生成され、音声ナレーションが出力される。
【０１１５】
また、上述したファイル種類情報またはファイル拡張子によって、記録されているファイルの種類（この場合は画像ファイル）が判別されて、「画像」という単語が選択されるとともに、撮影日時のデータによって、「２００２年」「１１月２１日」という、年と月日に分けられた単語が選択され、撮影場所を示す文字列データによって、「自宅」という単語が選択され、構文パターンに付加する語として「この」「は」「の」「に」「で」「撮影」「しました」という語が選択されて、「この画像は２００２年の１１月２１日に自宅で撮影しました」というメッセージ文が生成され、音声ナレーションが出力される。
【０１１６】
この撮影日撮影場所メッセージ中の動詞は、ファイルの種類に応じて選択されるもので、この場合には、画像データが画像ファイルとして記録されるので、動詞として「撮影」が選択される。
【０１１７】
さらに、その画像ファイルに記録されている感性キー情報が“１”（好感キー情報）である場合には、あらかじめ構文構成部１８に備えられているテンプレートによって、「お気に入りの画像です」というメッセージ文が生成され、音声ナレーションが出力される。
【０１１８】
なお、この感性メッセージについては、このように音声ナレーションを出力する代わりに、上記の画像内容メッセージや撮影日撮影場所メッセージの音声ナレーションを変調し、あるいは、システム制御部１７内のメモリに記録されている効果音の音声データによって、「ピンポーン」というような効果音を出力して、ユーザーの気に入っている画像であることを示すように、ＤＳＣシステムを構成してもよい。
【０１１９】
また、ユーザー別モードが選択された場合には、対応するユーザー別アクセス頻度が所定値以上、例えば３以上であるときには、上記の画像内容メッセージや撮影日撮影場所メッセージの音声ナレーションを半音高くし、または上記の「ピンポーン」というような効果音を半音高くするなど、再生中の画像のアクセス頻度が所定値以上であること、または再生中の画像のアクセス頻度の程度を、音声によってメッセージすると、より好ましい。
【０１２０】
（早見モード：図１４）
さらに、この実施形態では、ユーザーは、ディスプレイ１６上にサムネイル画像を順次表示させ、表示されたサムネイル画像を順次選択することによって、サムネイル画像の表示状態のまま、音声ナレーションを出力させることができる。
【０１２１】
図１４に、この早見モードで音声ナレーションを出力する場合の例を示す。
【０１２２】
この場合、ユーザーは、早見モードを選択した上で、フォルダ名のメニューを呼び出す操作をする。これによって、図１４左上に示すように、ディスプレイ１６上にフォルダ名メニュー画面２が表示される。
【０１２３】
ユーザーは、そのうちから、呼び出すフォルダのフォルダ名、例えば「犬」を指示する。これによって、システム制御部１７は、上述したフォルダ名対照テーブルファイル９を参照して、例えば「犬」というユーザー指定のフォルダ名に対応する「１０３ＡＡＡＡＡ」というＤＣＦファイルシステムに準拠するフォルダ名のフォルダをファイル呼び出し先として、そのフォルダ内に記録されている各画像ファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）を、ＤＣＦファイルシステムに準拠するファイル名中のファイル番号順に読み出し、それぞれのＤＣＦ基本サムネイルまたはＤＣＦサムネイルファイルのデータによって、ディスプレイ１６上にサムネイル画像を順次表示する。
【０１２４】
ユーザーは、その順次表示されるサムネイル画像を順次選択する。これによって、システム制御部１７は、サムネイル画像データ（ＤＣＦ基本サムネイルまたはＤＣＦサムネイルファイルのデータ）によってサムネイル画像を表示した状態で、その選択された画像のファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）から、ユーザーコメントデータ（画像内容情報、撮影場所情報、感性キー情報およびユーザー別アクセス頻度データ）および撮影属性情報（撮影日時のデータ）を読み出し、構文構成部１８での構文構成およびテキスト音声合成部１９でのテキスト音声合成によって、図１３に示した「この犬は家族のチワワのモモちゃんです」「この画像は２００２年の１１月２１日に自宅で撮影しました」「お気に入りの画像です」というようなメッセージ文を生成し、音声ナレーションを出力する。
【０１２５】
さらに、システム制御部１７は、このように構文構成部１８によって、選択された画像についてのメッセージ文を生成しつつ、次にサムネイル画像を表示すべき、すなわち次にユーザーによって選択されるべき画像のファイル（ＤＣＦ基本ファイル、またはＤＣＦ拡張画像ファイルとＤＣＦサムネイルファイルのペア）から、サムネイル画像データ（ＤＣＦ基本サムネイルまたはＤＣＦサムネイルファイルのデータ）を読み出す。
【０１２６】
これによって、選択された画像についての音声ナレーションの終了後、直ちに、次のサムネイル画像がディスプレイ１６上に表示され、ユーザーは迅速かつ円滑に同一フォルダ内の各画像の内容などを知ることができる。
【０１２７】
なお、この早見モードでも、閲覧モードと同様に、ユーザーが大切モードまたはユーザー別モードを選択することによって、サムネイル画像を表示する画像ファイルを、感性キー情報が“１”（好感キー情報）とされた画像ファイルのみ、または対応するユーザー別アクセス頻度が所定値以上の画像ファイルのみに制限するように構成すると、より好適である。
【０１２８】
〔構文構成（テキスト生成）：図１５および図１６〕
上述したように、図１の構文構成部１８では、画像ファイルから読み出されたユーザーコメントデータまたは撮影属性情報をもとに、辞書解析および構文解析を実行して、メッセージ文を生成する。
【０１２９】
図１５に、この構文構成部１８の一例を示す。ただし、図１に示したインターフェース２２および２４は省略した。
【０１３０】
システム制御部１７から構文構成部１８には、画像関連情報、カメラ状態情報およびユーザー指示情報が送出される。
【０１３１】
画像関連情報は、ユーザーコメントデータ（画像内容情報、撮影場所情報、感性キー情報およびユーザー別アクセス頻度データ）、撮影属性情報（撮影日時のデータ）、ユーザー命名のフォルダ名、ファイル種類情報、ファイル拡張子などである。
【０１３２】
カメラ状態情報は、記録モード、閲覧モード、早見モードなどのカメラモードを示す情報、使用されているアプリケーションが何語で起動されているかを示す情報、その時点の時間帯や季節を示す情報などである。
【０１３３】
ユーザー指示情報は、ユーザーによってカメラ操作部２１またはキー操作入力部２３で指示された、出力音声ナレーションの言語、速度（話速）、高さ（周波数）、音色、音量などを示す情報である。
【０１３４】
構文構成部１８は、制御部４１、情報抽出部４６およびテキスト生成部５０によって構成され、その制御部４１は、出力言語決定モジュール４２、出力内容決定モジュール４３および文体決定モジュール４４によって構成され、情報抽出部４６には、形態素境界判定部４７および翻訳装置部４８が設けられる。
【０１３５】
出力言語決定モジュール４２は、（ａ）アプリケーションの起動言語、（ｂ）ユーザー命名フォルダ名やユーザーコメントデータの文字列の言語、および（ｃ）ユーザー指定の言語から、テキスト生成部５０で生成するテキスト（メッセージ文）の言語を決定するものである。
【０１３６】
ただし、あらかじめ（ａ）（ｂ）（ｃ）の間に優先順位を設定しておいて、優先順位の高いものに従って出力言語を決定し、または、（ａ）（ｂ）（ｃ）を同一順位として、それらの間での多数決によって出力言語を決定するように構成する。
【０１３７】
（ｂ）の文字列の言語を判定する方法としては、文字列の文字コードの種別によって判定する方法、文字列の並びの特徴から判定する方法、文字列を辞書で引くことによって判定する方法などを採ることができる。
【０１３８】
出力内容決定モジュール４３は、テキスト生成部５０で生成するテキスト（メッセージ文）の内容を決定するものである。ユーザーは、ユーザー指示情報として、詳細な文を生成すべきか簡潔な文を生成すべきか、文の語数、メッセージに要する時間、および複数のメッセージを生成できる場合に生成すべき文の数や種類（画像内容メッセージ、撮影日撮影場所メッセージ、感性メッセージなど）などを指示することができるように、ＤＳＣシステムを構成する。
【０１３９】
文体決定モジュール４４は、テキスト生成部５０で生成するテキスト（メッセージ文）の文体を決定するものである。ユーザーは、ユーザー指示情報として、丁寧な文体の文を生成すべきこと、くだけた文体の文を生成すべきこと、または特定の方言の文を生成すべきことなどを指示することができるように、ＤＳＣシステムを構成する。
【０１４０】
情報抽出部４６は、入力された画像関連情報、カメラ状態情報およびユーザー指示情報から、制御部４１によって指定された情報を抽出するもので、例えば、制御部４１がユーザーコメントデータをもとにテキストを生成することを指示したときには、ユーザーコメントデータの文字列データを抽出する。
【０１４１】
具体的に、そのユーザーコメントデータの文字列が２つ以上の意味をなす単位（形態素：単語や語句）から構成されている場合、情報抽出部４６は、形態素境界判定部４７によって、その文字列の形態素境界を判定して、単語や語句を抽出する。
【０１４２】
形態素境界判定部４７での形態素境界の判定は、最長一致法または分割数最小法のような経験則による方法、文法的な接続の可能性をチェックする方法、統計的な言語モデルを使用する方法などによって実行する。
【０１４３】
また、ユーザーコメントデータの文字列が、形態素境界に空白などのデリミタを含む文字列である場合には、情報抽出部４６は、そのデリミタを手掛かりに、それぞれの単語や語句を抽出ことができる。
【０１４４】
また、ユーザーコメントデータの文字列の言語が、ユーザー指定の言語と異なる場合には、情報抽出部４６は、翻訳装置部４８の対訳辞書などによって、文字列から抽出した単語や語句をユーザー指定の言語に翻訳するように、または、単語や語句を抽出する前の文字列をユーザー指定の言語に翻訳し、翻訳後の文字列から単語や語句を抽出するように、構文構成部１８を構成することができる。
【０１４５】
テキスト生成部５０は、制御部４１からの、出力言語、出力内容および文体を指示する情報と、情報抽出部４６で抽出された単語や語句の情報とに基づいて、テキスト（メッセージ文）を生成するもので、図２６に示すように、文字列解析モジュール５１、テンプレート選択モジュール５４およびテンプレート適用モジュール５７によって構成される。
【０１４６】
文字列解析モジュール５１は、情報抽出部４６で得られた単語や語句を、ルールデータベース５２および辞書データベース５３と照らし合わせることによって、それぞれの単語や語句に、品詞情報などの言語的な情報を付与する。
【０１４７】
テキスト生成部５０でのテキスト生成は、単語や語句をテンプレートに当てはめることによって実現される。テンプレートとしては、「これは＜名詞／名詞句＞です」などが挙げられる。
【０１４８】
テンプレート選択モジュール５４は、制御部４１からの情報に基づいて、ルールデータベース５５および辞書データベース５６を用いて、適切なテンプレートを選択する。
【０１４９】
例えば、ユーザーコメントデータの画像内容を示す文字列をもとに画像内容メッセージを生成する場合には、それ用のテンプレートが選択され、撮影日および撮影場所を示す文字列をもとに撮影日撮影場所メッセージを生成する場合には、それ用のテンプレートが選択され、感性キー情報をもとに感性メッセージを生成する場合には、それ用のテンプレートが選択される。
【０１５０】
また、ユーザー指示情報に応じて、選択するテンプレートを変え、例えば、丁寧な文体の文を生成すべきことが指示された場合には、上記のように「これは＜名詞＞です」というテンプレートを選択し、くだけた文体の文を生成すべきことが指示された場合には、「これは＜名詞＞だよ」というテンプレートを選択する。
【０１５１】
テンプレート適用モジュール５７は、ルールデータベース５８および辞書データベース５９を用いて、入力された単語や語句を、テンプレート選択モジュール５４で選択されたテンプレートに当てはめて、テキスト（メッセージ文）を生成する。
【０１５２】
例えば、テンプレート選択モジュール５４で「これは＜名詞／名詞句＞です」というテンプレートが選択され、文字列解析モジュール５１によって単語や語句が名詞または名詞句であるとされた場合には、その単語や語句を、「これは＜名詞／名詞句＞です」というテンプレートの＜名詞／名詞句＞の部分に当てはめて、テキストを生成する。
【０１５３】
また、入力された単語や語句をそのまま当てはめないで、概念（ｔｈｅｓａｕｒｕｓ）辞書の、単語間の概念的な関係を示すデータを用いて、入力された単語や語句を、同じ概念の語、または上位概念を有する語などで置き換えて、テンプレートに当てはめるように、テキスト生成部５０を構成することもできる。
【０１５４】
例えば、ユーザーコメントデータの画像内容を示す文字列が「赤」「薔薇」であり、文字列解析モジュール５１で、それらが共に名詞であると解析され、テンプレート選択モジュール５４で、「これは＜“色”＞の＜“花”＞です」というテンプレート（“色”および“花”は概念）が選択された場合、概念辞書によって、赤の上位概念が色であり、「薔薇」の上位概念が花であることが分かるので、「赤」「薔薇」という単語は、選択されたテンプレートに当てはめることができると判定されて、「これは赤の薔薇です」という文が生成される。
【０１５５】
解析の結果、当該の単語や語句を、そのままテンプレートに当てはめることができないことが判明することもある。例えば、情報抽出部４６で「駅前で見かけた」という語句が抽出されたとする。この語句を解析すると、「名詞＋格助詞＋動詞＋助動詞」という品詞列が得られるが、これは、上記のテンプレートに当てはまらない。しかし、この語句に「もの」という形式名詞を追加することによって、語句全体が「駅前で見かけたもの」という名詞句になり、テンプレートに当てはめることができるようになる。このように、テンプレート適用モジュール５７では、入力された単語や語句を、選択されたテンプレートに当てはめることができるように変形する。
【０１５６】
なお、上述したカメラ状態情報によって、例えば、ＤＳＣシステムの使用時間帯に応じて、ユーザーに対する挨拶文のテキストを生成し、上記のメッセージ文に付加することもできる。
【０１５７】
〔テキスト音声合成：図１７および図１８〕
図１のテキスト音声合成部１９では、上記のように構文構成部１８で生成されたテキスト（メッセージ文）から、テキスト音声合成によって、音声ナレーション用の音声波形データを生成する。
【０１５８】
図１７に、テキスト音声合成部１９の一例を示す。上述したカメラ状態情報およびユーザー指示情報は、テキスト音声合成部１９にも送出される。
【０１５９】
この例のテキスト音声合成部１９は、言語処理部６１、韻律制御部７１および波形生成部８１によって構成される。
【０１６０】
言語処理部６１は、ルールデータベース６２および辞書データベース６３を用いて、構文構成部１８からのテキストを解析し、テキスト音声合成に必要な情報を抽出するもので、図１８に示すように、テキスト解析モジュール６４および韻律情報生成モジュール６７によって構成される。
【０１６１】
テキスト解析モジュール６４は、ルールデータベース６５および辞書データベース６６を用いて、入力テキストを解析して、形態素（単語や語句）に分割し、それぞれの形態素につき、品詞や読みなどの情報を得るものである。
【０１６２】
テキスト解析モジュール６４でのテキスト解析は、最長一致法または分割数最小法のような経験則による方法、文法的な接続の可能性をチェックする方法、統計的な言語モデルを使用する方法、正規文法や文脈文法などの文法を用いる方法などによって実行する。
【０１６３】
以上のテキスト解析によって、構文構成部１８から出力されたテキスト（メッセージ文）のそれぞれの単語や語句につき、品詞や読み、アクセント型などの情報が求められる。
【０１６４】
韻律情報生成モジュール６７は、テキスト解析モジュール６４の解析結果をもとに、ルールデータベース６８内の、ルール、統計的な言語モデル、決定木を用いて、アクセント核位置やポーズ位置の決定、フレージング処理など、入力テキストを音声で読み上げるために必要な情報を求めるものである。
【０１６５】
テキスト解析モジュール６４および韻律情報生成モジュール６７からなる言語処理部６１で得られた解析結果および情報は、音声記号列という中間的な表現形態で出力される。
【０１６６】
音声記号列は、ＩＰＡ（国際音声字母）やＳＡＭＰＡなどの一般的な発音記号を用いて記述してもよく、あるいは独自の発音記号を定めて記述してもよい。
【０１６７】
図１７の韻律制御部７１は、言語処理部６１から音声記号列を受け取り、ルールデータベース７２およびデータベース７３を用いて、それぞれの音（音素）の継続時間長および基本周波数を求めるもので、図１８に示すように、継続時間長決定モジュール７４および基本周波数決定モジュール７７によって構成される。
【０１６８】
継続時間長決定モジュール７４は、ルールデータベース７５およびデータベース７６中の、あらかじめ大量のデータから学習して得られた、音韻環境と音の継続時間長との関係を示すルールおよびデータを用いて、音声記号列を解析し、それぞれの音（音素）の長さを決定するものである。
【０１６９】
音韻環境とは、それぞれの音素の文における位置、アクセントやストレスの有無、ポーズの長さ、フレーズやアクセントの強さなどである。
【０１７０】
基本周波数決定モジュール７７は、ルールデータベース７８およびデータベース７９中の、あらかじめ大量のデータから学習して得られた、音韻環境と音の基本周波数との関係を示すルールおよびデータを用いて、音声記号列を解析し、それぞれの音（音素）のピッチを決定するものである。
【０１７１】
継続時間長決定モジュール７４および基本周波数決定モジュール７７からなる韻律制御部７１で求められたデータは、韻律データという中間的な表現形態で出力される。
【０１７２】
図１７および図１８の波形生成部８１は、韻律制御部７１から出力された韻律データに従って、音素の並び、継続時間長および基本周波数などを考慮して、素片データベース８２から適切な音声素片を選択し、必要に応じて変形を施した上で接続して、音声ナレーションの音声波形を示す音声データを生成するものである。
【０１７３】
さらに、この例では、ユーザーは、上述したユーザー指示情報によって、テキスト音声合成部１９で生成される音声ナレーションの音声波形につき、話速、声の高さ、音色、音声レベルなどを指定することができる。
【０１７４】
語の発音やアクセントは、年代によって変化するが、テキスト音声合成部１９の各部および各モジュールが、年代ごとにルール、辞書、データ、音声素片を保持し、ユーザーによって指定された年代のルール、辞書、データ、音声素片によって、解析、生成、決定などの処理を実行することによって、テキスト音声合成部１９から出力される音声ナレーションとして、ユーザーによって指定された年代の発話の特徴を反映したものが得られる。
【０１７５】
また、上述したカメラ状態情報によって、例えば、ＤＳＣシステムの使用時間帯に応じて、テキスト音声合成部１９で生成される音声ナレーションの音声波形につき、話速、声の高さ、音色、音声レベルなどを変化させ、例えば、朝には声を高くし、深夜には音声レベルを下げるなどの制御を行うことができる。また、季節や特定日に合わせて、テキスト音声合成による音声にＢＧＭを付加することもできる。
【０１７６】
図１で上述したように、テキスト音声合成部１９で生成された音声データは、Ｄ／Ａコンバータ２７でアナログ音声信号に変換され、その音声信号が音声増幅回路２８で増幅されてスピーカ２９に供給され、スピーカ２９から音声ナレーションが出力される。
【０１７７】
〔他の実施形態〕
上述した実施形態は、ユーザー入力の撮影場所を示す文字列データを、ユーザーコメントデータとして画像ファイルのユーザーコメント欄に書き込み、画像再生時、「この画像は２００２年の１１月２１日に自宅で撮影しました」というようなメッセージ文を生成し、音声ナレーションを出力する場合であるが、ＤＳＣシステムにＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）受信機を設け、または接続できるようにし、このＧＰＳ受信機で測定された撮影位置を、ユーザーコメントデータとして画像ファイルのユーザーコメント欄に書き込み、画像再生時、「この画像は２００２年の１１月２１日に北緯３５度２５分、東経１３８度５４分の場所で撮影しました」というようなメッセージ文を生成し、音声ナレーションを出力するように、システムを構成することもできる。
【０１７８】
さらに、ＤＳＣシステムまたはＣＰＵ受信機が地図メモリを備え、撮影時、その地図メモリを参照して、ＧＰＳ受信機で測定された「北緯３５度２５分、東経１３８度５４分」というような撮影位置を、「山中湖近傍」というような撮影場所に変換して、ユーザーコメントデータとして画像ファイルのユーザーコメント欄に書き込み、画像再生時、「この画像は２００２年の１１月２１日に山中湖近傍で撮影しました」というようなメッセージ文を生成し、音声ナレーションを出力するように、システムを構成することもできる。
【０１７９】
なお、上述した実施形態は、画像ファイルフォーマットとしてＥｘｉｆファイルフォーマットのＤＣＦファイルシステムを用いる場合であるが、将来的に考えられるファイルフォーマットまたはファイルシステムを用いることもできる。
【０１８０】
また、上述した実施形態は、この発明をＤＳＣに適用した場合であるが、この発明は、ＤＳＣに限らず、カメラ付きＰＤＡやカメラ付き携帯電話端末などにも適用することができる。
【０１８１】
また、カメラ一体型ポータブルディスク装置に適用する場合にも、ＤＣＦファイルシステムの拡張ファイルシステムでの実施形態と同様に、インデックスファイルが別ファイルで構成されて、外部参照ファイルとして主画像、映像、音声ファイルを持ち、さらにユーザーデータ領域を外部参照ファイルとして持ち、それらのファイルにアクセスする、Ａｕｄｉｏ＆Ｖｉｓｕａｌコンテンツファイル用のナビゲーションファイルシステムやプレイリスト、Ａｕｄｉｏ＆Ｖｉｓｕａｌコンテンツファイルへのアクセスのためのインデックスファイルシステムに用いることができる。
【０１８２】
【発明の効果】
上述したように、この発明によれば、ユーザーとしては簡単な操作や入力によって、または特に操作や入力を必要とすることなく、再生される画像がユーザーの気に入っている画像であるか否かをユーザーに的確に提示することができ、ユーザーは自分の気に入っている画像を容易かつ確実に検索することができる。
【０１８３】
しかも、音声メッセージの出力のために画像ファイルとは別の音声ファイルなどにアクセスする必要がないので、記録メディアが光ディスクのようなメディア上のシークに時間がかかるものである場合でも、画像の再生および音声メッセージの出力のためのファイルへのアクセス時間が増加することがない。
【０１８４】
さらに、画像ファイルとは別に音声ファイルなどを記録する必要がないので、ファイル書き込み回数が増加することがなく、記録メディアとして、書き込み回数に制限のあるメモリや、一括して書き込み消去を行う必要のある、例えばフラッシュメモリを用いたメモリカードを用いる場合、記録メディアを長く使用することができる。
【図面の簡単な説明】
【図１】この発明の画像記録再生装置の一実施形態のＤＳＣシステムを示す図である。
【図２】画像ファイルフォーマットの一例を示す図である。
【図３】フォルダ名対照テーブルファイルと画像ファイルの一例を示す図である。
【図４】フォルダ名対照テーブルファイルと画像ファイルの他の例を示す図である。
【図５】音声ファイルフォーマットの一例を示す図である。
【図６】画像関連情報の書き込み読み出し制御の一例を示す図である。
【図７】画像関連情報の書き込み読み出し制御の他の例を示す図である。
【図８】キー操作入力部の一例を示す図である。
【図９】ユーザーコメントデータの入力方法の一例を示す図である。
【図１０】ユーザーコメントデータの入力方法の他の例を示す図である。
【図１１】閲覧モードの説明に供する図である。
【図１２】閲覧モードの説明に供する図である。
【図１３】閲覧モードでの構文構成の説明に供する図である。
【図１４】早見モードの説明に供する図である。
【図１５】構文構成部の一例を示す図である。
【図１６】構文構成部中のテキスト生成部の一例を示す図である。
【図１７】テキスト音声合成部の一例を示す図である。
【図１８】テキスト音声合成部の各部の具体例を示す図である。
【符号の説明】
主要部については図中に全て記述したので、ここでは省略する。

Claims (16)

1. 画像を撮影し、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する撮影記録工程と、
   ユーザーの操作に基づいて、前記画像がユーザーの気に入っている画像であることを示す好感キー情報を、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録する情報記録工程と、
   前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生工程と、
   前記好感キー情報に基づいて、再生する画像がユーザーの気に入っている画像であることを、音声によってメッセージするメッセージ工程と、
   を備える画像記録再生方法。
2. 請求項１の画像記録再生方法において、
   前記メッセージ工程では、前記好感キー情報に基づいて構文構成によってメッセージ文を生成し、そのメッセージ文に基づいてテキスト音声合成によって音声ナレーションを生成する画像記録再生方法。
3. 請求項１の画像記録再生方法において、
   撮影された画像に関連する情報を、文字列データとして、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録する文字列記録工程を備え、
   前記メッセージ工程では、前記文字列データに基づいて構文構成によって画像関連メッセージ文を生成し、そのメッセージ文に基づいてテキスト音声合成によって音声ナレーションを生成し、その音声ナレーションを前記好感キー情報によって変調する画像記録再生方法。
4. 請求項１の画像記録再生方法において、
   前記メッセージ工程では、前記音声メッセージとして、あらかじめ定められた効果音を出力する画像記録再生方法。
5. 請求項１の画像記録再生方法において、
   前記画像再生工程では、サムネイル画像を再生する際、前記画像ファイル中に前記好感キー情報が記録されている画像のみを再生する画像記録再生方法。
6. 画像を撮影し、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する撮影記録工程と、
   前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生工程と、
   前記画像ファイルとして記録された画像の原画像を再生した回数を、当該の画像に対するアクセス頻度として、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録するとともに、当該の画像の原画像を再生するごとにカウントアップする処理工程と、
   を備える画像記録再生方法。
7. 請求項６の画像記録再生方法において、
   前記画像再生工程では、サムネイル画像を再生する際、前記アクセス頻度が所定値以上の画像のみを再生する画像記録再生方法。
8. 請求項６の画像記録再生方法において、
   再生する画像ファイル中に記録されているアクセス頻度データに基づいて、再生中の画像のアクセス頻度が所定値以上であること、または再生中の画像のアクセス頻度の程度を、音声によってメッセージする工程を備える画像記録再生方法。
9. 画像を撮影する撮像手段と、
   その撮影された画像を、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する画像記録手段と、
   ユーザーの操作に基づいて、前記画像がユーザーの気に入っている画像であることを示す好感キー情報を、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録する情報記録手段と、
   前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生手段と、
   前記好感キー情報に基づいて、再生される画像がユーザーの気に入っている画像であることを、音声によってメッセージするメッセージ手段と、
   を備える画像記録再生装置。
10. 請求項９の画像記録再生装置において、
    前記メッセージ手段は、前記好感キー情報に基づいて構文構成によってメッセージ文を生成し、そのメッセージ文に基づいてテキスト音声合成によって音声ナレーションを生成する画像記録再生装置。
11. 請求項９の画像記録再生装置において、
    撮影された画像に関連する情報を、文字列データとして、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録する文字列記録手段を備え、
    前記メッセージ手段は、前記文字列データに基づいて構文構成によって画像関連メッセージ文を生成し、そのメッセージ文に基づいてテキスト音声合成によって音声ナレーションを生成し、その音声ナレーションを前記好感キー情報によって変調する画像記録再生装置。
12. 請求項９の画像記録再生装置において、
    前記メッセージ手段は、前記音声メッセージとして、あらかじめ定められた効果音を出力する画像記録再生装置。
13. 請求項９の画像記録再生装置において、
    前記画像再生手段は、サムネイル画像を再生する際、前記画像ファイル中に前記好感キー情報が記録されている画像のみを再生する画像記録再生装置。
14. 画像を撮影する撮像手段と、
    その撮影された画像を、定められたファイルフォーマットの画像ファイルとして記録メディアに記録する画像記録手段と、
    前記画像ファイルとして記録された画像の原画像またはサムネイル画像を再生する画像再生手段と、
    前記画像ファイルとして記録された画像の原画像を再生した回数を、当該の画像に対するアクセス頻度として、前記画像ファイルの前記ファイルフォーマットで指定された領域に記録するとともに、当該の画像の原画像を再生するごとにカウントアップする処理手段と、
    を備える画像記録再生装置。
15. 請求項１４の画像記録再生装置において、
    前記画像再生手段は、サムネイル画像を再生する際、前記アクセス頻度が所定値以上の画像のみを再生する画像記録再生装置。
16. 請求項１４の画像記録再生装置において、
    再生される画像ファイル中に記録されているアクセス頻度データに基づいて、再生中の画像のアクセス頻度が所定値以上であること、または再生中の画像のアクセス頻度の程度を、音声によってメッセージする手段を備える画像記録再生装置。

Images