JP2007200424A - コンテンツ再生装置 - Google Patents

Abstract

【課題】 よりユーザのイメージに近い写真や音楽を自動的に選択して再生することのできるコンテンツ再生装置を提供する。
【解決手段】 音データを再生する音再生手段（１１、２９）と、画像データを再生する画像再生手段（５，２８）と、複数の画像データから再生する画像データを絞り込む画像データ絞込み手段（４７）と、画像データ絞込みに使用した絞込み条件から関連する音データを抽出する、画像・音関連付け手段（３，２３）とを有するコンテンツ再生装置（１，１７）であって、画像データ絞込み手段で絞り込んだ画像データを再生中に、画像・音関連付け手段で抽出された音データを再生するコンテンツ再生装置である。
【選択図】 図９

Description

本発明は、よりユーザのイメージに近い写真や音楽を自動的に選択し、同時に再生するコンテンツ再生装置に関する。

画像と音楽を組合わせて再生する技術としては種々の技術が知られている。
特許文献１には、複数の画像と複数の音楽を登録したプレイリストを作成・保存して、プレイリストに登録された画像と音楽を順次再生する技術が開示されている。

特許文献２には、デジタルイメージとデジタルオーディオメッセージとを対応させる表示シーケンスファイルを有し、対応するデジタルイメージとデジタルオーディオメッセージを同時に再生する技術が開示されている。

特許文献３に開示された技術では、静止画、音楽およびスタイルの各要素、またはテーマのいずれかを選択すれば、その特徴量に適合した他の要素を決定してショートフィルムを生成・保存・再生する。例えば、写真を選んだ場合は、選択された写真中の最も多い色を検出し、色に対応した音楽のテンポやスタイルの動きを求めて使用する音楽とスタイルを決定して再生する。
特開２００５−２０２０２号公報 特開平６−２０４４３号公報 特開２００５−２５７１５号公報

しかしながら、特許文献１、２に記載された技術では、ユーザは事前に画像と音楽とを関連付けし、その結果を保存しなければならない。従って、その操作が煩雑であると共に、画像と音楽との組み合わせは固定したものとなってしまう。

特許文献３に記載された技術では、実際に選択した写真中の色と、その色から自動的に選択される音楽のテンポやスタイルが、ユーザが期待するイメージと一致するとは限らないという問題がある。例えば、黒は「負け、悪魔、マイナス、不吉、恐怖、抑圧、コンプレックス、絶望」とイメージされている場合、星空や夜中の花火等はこのイメージと一致しないからである。

本発明は、かかる事情に鑑みてなされたものであって、よりユーザのイメージに近い写真や音楽を自動的に選択して再生することのできるコンテンツ再生装置を提供することを目的とする。

上記課題を解決するための、本発明に係る請求項１に記載のコンテンツ再生装置は、音データを再生する音再生手段と、画像データを再生する画像再生手段と、複数の画像データから再生する画像データを絞り込む画像データ絞込み手段と、画像データ絞込みに使用した絞込み条件から関連する音データを抽出する、画像・音関連付け手段と、を有するコンテンツ再生装置であって、画像データ絞込み手段で絞り込んだ画像データを再生中に、画像・音関連付け手段で抽出された音データを再生する。

また本発明に係る請求項２に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、画像データ絞込み手段が、撮影日に基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記撮影日に関連するリリース日または録音日をもつ音データを抽出する。

また本発明に係る請求項３に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、画像データにキーワードを設定するキーワード設定手段を更に有し、画像データ絞込み手段が、キーワードに基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するタイトルまたは歌詞をもつ音データを抽出する。

また本発明に係る請求項４に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、音データと画像データにキーワードを設定するキーワード設定手段を更に有し、画像データ絞込み手段が、キーワードに基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するキーワードをもつ音データを抽出する。

また本発明に係る請求項５に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、音データの再生履歴を保存する再生履歴手段を更に有し、画像データ絞込み手段が、画像データの撮影日に基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記撮影日に関連する前記再生履歴手段に保存された再生日をもつ音データを抽出する。

また本発明に係る請求項６に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、画像データ及び音データの再生履歴を保存する再生履歴手段を更に有し、前記画像・音関連付け手段は、画像データの過去の再生日と関連した再生日をもつ音データを抽出する。

また本発明に係る請求項７に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、個人情報を設定する個人情報設定手段を更に有し、前記画像・音関連付け手段は、画像データ絞込み手段で使用した撮影日またはキーワードと、前記個人情報設定手段で設定された個人情報とを関連付けて、その個人情報と関連する音データを抽出する。

また本発明に係る請求項８に記載のコンテンツ再生装置は、音データを再生する音再生手段と、画像データを再生する画像再生手段と、複数の音データから再生する音データを絞り込む音データ絞込み手段と、音データ絞込みに使用した絞込み条件から関連する画像データを抽出する、画像・音関連付け手段と、を有するコンテンツ再生装置であって、音データ絞込み手段で絞り込んだ音データを再生中に、画像・音関連付け手段で抽出された画像データを再生する。

また本発明に係る請求項９に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、音データ絞込み手段が、リリース年に基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記リリース年又はリリース年月に関連する撮影年又は年月をもつ画像データを抽出する。

また本発明に係る請求項１０に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、音データにキーワードを設定するキーワード設定手段を更に有し、音データ絞込み手段が、キーワードに基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するタイトルまたはキーワードをもつ画像データを抽出する。

また本発明に係る請求項１１に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、音データと画像データにキーワードを設定するキーワード設定手段を更に有し、音データ絞込み手段が、キーワードに基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードと関連するキーワードをもつ画像データを抽出する。

また本発明に係る請求項１２に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、画像データの再生履歴を保存する再生履歴手段を更に有し、音データ絞込み手段が、音データのリリース年又はリリース年月に基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記リリース年又はリリース年月に関連する前記再生履歴手段に保存された再生日をもつ画像データを抽出する。

また本発明に係る請求項１３に記載のコンテンツ再生装置は、上記記載の発明であるコンテンツ再生装置において、コンテンツ再生装置は、個人情報を設定する個人情報設定手段を更に有し、前記画像・音関連付け手段は、音データ絞込み手段で使用したリリース年またはキーワードと、前記個人情報設定手段で設定された個人情報とを関連付けて、その個人情報と関連する画像データを抽出する。

本発明のコンテンツ再生装置によれば、ユーザの気分や感性にあった画像と音楽を自動的に選択し同時に再生することができる。

［第１の実施の形態］
図１は、パーソナルコンピュータ（ＰＣ）を用いて構成したコンテンツ再生装置を示す図である。
ＰＣ１には、ハードディスク（ＨＤＤ）２、制御部３、メモリ４、表示部５、モニタ６、キーボード７、マウス８、コンパクトディスク／デジタルビデオディスク（ＣＤ／ＤＶＤ）９、ネットワーク部１０及び音再生部１１を有している。

ＨＤＤ２は、オペレーティングシステム（ＯＳ）、アプリケーションプログラム、コンテンツファイル及びデータベース（ＤＢ）を保存する。
オペレーティングシステム（ＯＳ）は、ＰＣ１を動作させるためのプラットフォームを提供する。アプリケーションプログラムは種々のコンテンツ再生動作を実現する。コンテンツファイルは、画像ファイル及び音楽ファイル等である。データベース（ＤＢ）は、画像や音楽の情報を保存する。

制御部３は、ＨＤＤ２に保存されたＯＳやアプリケーションプログラムに従ってＰＣ１の動作やコンテンツの再生等を制御する。メモリ４は、ＯＳやアプリケーション実行時の一時的な情報保持手段である。表示部５は、ＯＳやアプリケーションが表示する情報を展開・保持する。モニタ６は、表示部５で展開・保持された情報を表示する。キーボード７とマウス８は、ＯＳやアプリケーションに対して情報を入力するための操作部材である。ＣＤ／ＤＶＤ９は、ＨＤＤ２に保存する画像や音楽を入力するための記録媒体である。ネットワーク部１０は、画像や音楽を購入・ダウンロードするためにインターネット等に接続するためのインターフェースである。音再生部１１は、音楽を再生する。

またＰＣ１には、デジタルスチルカメラ（ＤＳＣ）１５、スピーカ１６及び携帯型コンテンツプレーヤー１７を接続することができる。
ＤＳＣ１５は、ＰＣ１に画像を入力する。スピーカ１６は、音楽を再生する。携帯型コンテンツプレーヤー１７は、ＰＣ１からＨＤＤ２に保存されたコンテンツやコンテンツ再生に必要な情報を受信することで、ＰＣ１と同様に画像や音楽を再生することが可能である。

図２は、携帯型コンテンツプレーヤー１７の構成を示す図である。上述のように、携帯型コンテンツプレーヤー１７を用いて本発明に係るコンテンツ再生装置を構成することができる。

プレーヤー１７は、電源スイッチ（ＳＷ）２１、プログラム記憶部２２、制御部２３、記憶部２４、メモリ２５、表示部兼入力部２６、画像再生部２７、表示部２８、音再生部２９、ボリュームスイッチ（ＳＷ）３０及びイヤフォン３１で構成される。

電源ＳＷ２１は、プレーヤー１７の電源をオン／オフする。プログラム記憶部２２は、プレーヤー１７の動作を実現するプログラムを記憶する。制御部２３は、プログラムに従ってプレーヤー１７を制御する。記憶部２４は、ＰＣ１から受信したコンテンツや情報を保存する。メモリ２５は、プログラム実行時において生成される一時的な情報を保存する。

表示部兼入力部２６は、プログラム実行に必要な情報やコンテンツを表示すると共に、プログラム実行やコンテンツ指定に必要な情報を入力する。画像再生部２７は、画像データをデコードする。表示部２８は、制御部２３で作成する情報や画像再生部２７でデコードされた画像データを保持するとともに表示を制御する。音再生部２９は、音楽を再生する。ボリュームＳＷ３０は、音量を制御する。イヤフォン３１を介してユーザは音楽を聴くことができる。

次に、ＰＣ１のＨＤＤ２に保存されているコンテンツファイルの構成及びそれらを保存するデータベースの構成について説明する。
コンテンツファイルとしては、画像ファイル３５及び音楽ファイル３６が設けられている。またデータベースとしては、画像ＤＢ３８、音楽ＤＢ３９、画像履歴ＤＢ４０及び音楽履歴ＤＢ４１が設けられている。

図３は画像ファイル３５の構成を示す図である。画像ファイル３５は、ヘッダー部３５ａと画像データ部３５ｂとで構成されている。
画像データ部３５ｂには、画像データが保存され、ヘッダー部３５ａには、画像に関する情報が保存されている。即ち、ヘッダー部３５ａには、タイトル、撮影日時、撮影者、撮影位置のＧＰＳ情報、コメント等が記述される。この他にも撮影したＤＳＣ１５に関する情報や撮影条件等が記述される。

撮影日時は、ＤＳＣ１５で撮影した時に自動的に記述される。ＤＳＣ１５がＧＰＳ機能を備えているときは、ＧＰＳ情報が撮影時に自動的に記述される。タイトル、撮影者及びコメント等の情報は、ユーザが撮影後に記述する。ユーザはこれらの情報をＤＳＣ１５を用いて記述することができ、またＰＣ１のアルバムアプリケーション、画像編集アプリケーション等を使用して記述することができる。

図４は音楽ファイル３６の構成を示す図である。音楽ファイル３６は、ヘッダー部３６ａと音楽データ部３６ｂとで構成されている。
音楽データ部３６ｂには、音楽データが保存され、ヘッダー部３６ａには、音楽に関する情報が保存されている。即ち、ヘッダー部３６ａにはタイトル、アーティスト名、アルバム名、ジャンル名、アルバム内の総曲数とアルバ内の曲順、曲の時間長、作詞者、作曲者、歌詞、コメント等が記述される。この他にもビットレート等の再生に必要な情報が記述される。

ビットレート等の再生に必要な情報は、音楽ファイル３６の作成時に録音アプリケーションにより自動的に記述される。歌詞やコメント等は、プレーヤーアプリケーション等を使用して、後からユーザが記述する。それ以外のタイトル等の情報は、音楽ファイル３６の作成時に録音アプリケーションを使用してユーザが記述するか、録音アプリケーションがインターネット上のデータベースから自動的に入手して記述する。

図５は画像ＤＢ３８の構成を示す図である。画像ファイル３５毎にＩＤ（Photo ID）が付与され、その画像ファイル３５のヘッダー部３５ａに記述されている全てまたは一部の情報と、その他の情報が保存されている。その他の情報には、ファイルパス、画像ＤＢ３８に登録した追加日時、最終再生日時、再生回数、関連付けられているキーワード、関連付けを除外するキーワードや日時情報等が含まれる。
最終再生日時は、ＰＣ１の再生アプリケーションまたは携帯型コンテンツプレーヤー１７で画像が最後に再生された日時である。再生回数は、ＰＣ１または携帯型コンテンツプレーヤー１７で画像が再生された回数である。関連性除外は、画像と音楽との関連付けた再生を除外するためのキーワードや日時情報などである。

図６は音楽ＤＢ３９の構成を示す図である。画像ＤＢ３８と同様に音楽ファイル３６毎にＩＤ（Music ID）が付与され、音楽ファイルヘッダー部３６ａの全てまたは一部の情報と、画像ＤＢと同様な追加情報が含まれている。

図７は画像履歴ＤＢ４０の構成を示す図である。画像履歴ＤＢ４０には、ＰＣ１のアプリケーションプログラムまたは携帯型コンテンツプレーヤー１７で画像を再生した場合、その再生に係る履歴情報が保存される。
なお、画像再生方法には、サムネイルで小さく複数枚同時に表示する場合と、１枚だけを大きく表示する場合、スライドショーで大きく順次表示する場合がある。本実施の形態では、１枚だけを大きく表示した場合とスライドショーで大きく順次表示した場合のみ、その再生履歴が保存される。

保存される履歴情報には、モード１、モード２、絞込み、画像ＩＤ、再生日時、音楽絞込み、音楽履歴Ｎｏ等がある。

モード１は、画像の選択者を示している。
ユーザが自分で選択した場合は、「Ｕｓｅｒ」と記述される。ＰＣ１のアプリケーションまたは携帯型コンテンツプレーヤー１７が、再生している音楽に合わせて自動的に再生した場合は、「Ａｕｔｏ」と記述される。

モード２は、画像の表示方法を示している。
ユーザが画像を１枚だけを表示させた場合は、「１」と記述される。画像をスライドショー再生した場合は、「Ｓｌｉｄｅ」と記述される。ＰＣ１のアプリケーションまたは携帯型コンテンツプレーヤー１７が、再生している音楽に合わせて自動的に画像を連続再生した場合は、「Ａｕｔｏ」と記述される。

「絞込み」は、画像を絞込んで検索する条件を示す。「画像ＩＤ」は表示した画像のＩＤを表している。「再生日時」は、画像を再生開始した日時と再生時間を表している。「音楽絞込み」は、再生している音楽に合わせて画像を自動連続再生した場合、その画像を検索するときの条件を示し、「音楽履歴Ｎｏ」は画像を再生した時に再生していた音楽の再生履歴Ｎｏを示している。

図７に示す画像履歴Ｎｏ：００００００００では、「絞込み」の記述から、日付指定で撮影日時が２００４．４．１から２００４．４．２である画像を絞り込んでサムネイル表示したことを表している。また「モード２」が“１”となっていることから、画像ＩＤ：００００００００の画像を１枚だけ大きく表示したことを示している。更に「音楽絞込み」が“Ｎｏｎｅ”であるため、音楽に関連付けて自動再生したのではないことを示している。

図７に示す画像履歴Ｎｏ：０００００００１では、「音楽絞込み」の記述から、キーワードKey_Word_1Aで音楽を絞り込んで再生している状態で、音楽に関連付けて自動的に画像を連続再生したことを示している。また「絞込み」の記述から、この時の画像絞込み条件は、音楽の絞込み条件と同じキーワードKey_Word_1Aであることを示している。更に、「再生日時」に“３”とあることから、画像ＩＤ：０００００００１を３秒表示している。また「音楽履歴Ｎｏ」によれば、音楽は再生履歴Ｎｏ：００００００００を２秒、０００００００１を１秒再生している。

なお、本実施例では再生した音楽を特定するために、「音楽履歴Ｎｏ」を介して音楽ＩＤを指定しているが、直接「音楽ＩＤ」を記述するようにしても良い。
「再生日時」は、再生開始日時と再生終了日時を記述しても良い。「絞込み」および「音楽絞込み」は、複数の条件で絞り込んでいる場合は、Date=“2004-04-01”−“2004-04-02” AND Keyword:“Key_Word_1A” と記述しても良い。これは、撮影日時が指定日時範囲で、かつ指定キーワードを含むことを表している。
また、Keyword:“Key_Word_1A” OR Keyword:“Key_Word_1B”のように記述しても良い。これは、指定したキーワードの何れかを含むことを表している。

図８は音楽履歴ＤＢ４１の構成を示す図である。ＰＣ１のアプリケーションまたは携帯型コンテンツプレーヤー１７で音楽を再生した場合、その履歴情報が保存される。
保存される履歴情報には、モード１、モード２、絞込み、音楽ＩＤ、再生日時、画像絞込み、画像履歴Ｎｏ等がある。

モード１は、音楽の選択者を示している。
ユーザが自分で選択した場合は、「Ｕｓｅｒ」と記述される。ＰＣ１のアプリケーションまたは携帯型コンテンツプレーヤー１７が、再生している画像に合わせて自動的に再生した場合は、「Ａｕｔｏ」と記述される。

モード２は、音楽の連続再生条件を示している。
絞り込んだ曲のうちユーザが選択した１曲だけを再生した場合は、「１」と記述される。全曲を再生した場合は、「Ａｌｌ」が記述される。また、リピート（繰り返し再生）はオンかオフか、シャッフル（ランダム再生）はオンかオフかが示される。

「絞込み」は、音楽を絞込んで検索したときの条件を示す。「音楽ＩＤ」は再生した音楽のＩＤを表している。「再生日時」は、音楽を再生開始した日時と再生時間を表している。「画像絞込み」は、再生している画像に合わせて音楽を自動連続再生した場合の、その音楽を検索したときの条件を示し、「画像履歴Ｎｏ」は音楽を再生した時に再生していた画像の再生履歴Ｎｏを示している。

図８に示す音楽履歴Ｎｏ：００００００００では、「絞込み」の記述から、アーティストとアルバムで絞り込んで音楽を検索したことを表している。「モード２」と「再生日時」の記述から、その検索した内の音楽ＩＤ：００００００００１曲だけをリピートオフ、シャッフルオフで１９２秒間再生したことを示している。また「画像絞込み」が“Ｎｏｎｅ”であることから、画像に関連付けて自動再生したのではないことを示している。

図８に示す音楽履歴Ｎｏ：０００００００１では、「画像絞込み」の記述からキーワードKey_Word_1Aと年２０００で画像を絞り込んで再生している状態で、画像に関連付けて自動的に音楽を連続再生したことを示している。また「絞込み」の記述から、この時の音楽の絞込み条件は、画像の絞込み条件と同じ、キーワードKey_Word_1Aである。「再生日時」と「画像履歴Ｎｏ」の記述から音楽ＩＤ：０００００００１を２４６秒間再生し、画像ＩＤ：００００００００から００００００８１を各３秒表示したことを示している。

続いて、画像再生動作について説明する。ユーザがＰＣ１のアプリケーションプログラムを起動すると、モニタ６に画像再生画面が表示される。
図９は、画像再生画面４５を示す図である。画像再生画面４５には、ツールバーエリア４６、画像絞込みエリア４７、画像再生エリア４８及び音楽再生制御エリア４９が設けられている。

ツールバーエリア４６には、写真ボタン４６ａ、音楽ボタン４６ｂ、設定ボタン４６ｃ、追加ボタン４６ｄ、削除ボタン４６ｅ、スライドショーボタン４６ｆ、プロパティボタン４６ｇ、送信ボタン４６ｈ及び「×」ボタン４６ｉが設けられている。
このそれぞれのボタンの機能については後で説明する。

画像絞込みエリア４７には、複数の画像絞込み欄４７ａ〜４７ｄが表示されている。
ユーザは、複数の画像絞込み欄４７ａ〜４７ｄのチェックボックスをチェックすることで、年月日指定、年月日範囲指定、キーワード指定、及び個人情報指定を選択することができる。また、同時に複数の絞り込み条件を選択することができる。例えば、年月日指定欄４７ａとキーワード指定欄４７ｃの両方を選択すると、両条件のＡＮＤ絞込みが可能になる。

画像再生エリア４８には、画像絞込み条件で特定された画像が表示される。
音楽再生制御エリア４９には、再生中の音楽に関する表示エリア、音楽の再生を制御するための種々のボタンが設けられている。即ち、左から再生中の音楽のタイトル名／アルバム名／アーティスト名表示４９ａ、曲の長さと再生位置表示４９ｂ、再生ボタン４９ｃ、停止ボタン４９ｄ、前曲への移動ボタン４９ｅ、次曲への移動ボタン４９ｆ、ボリューム設定スライダ４９ｇ、そして後程説明する除外ボタン４９ｈが設けられている。
なお、画像再生画面４５に音楽再生制御エリア４９が設けられているのは、画像表示と同時に音楽の再生を可能としていることによる。

次に、この画像再生画面４５での再生動作を説明する。

ユーザが画像絞込みエリア４７の年月日指定欄４７ａで、２００５年２月２０日を指定すると、画像再生エリア４８には撮影日が２００５年２月２０日の画像が検索されてサムネイル表示される。
ユーザが任意のサムネイル画像をダブルクリックすると、図１０に示す拡大画面５０が表示される。

拡大画面５０には、ツールバーエリア５１、拡大再生エリア５２及び音楽再生制御エリア５３が設けられている。
ツールバーエリア５１の中央には画像絞込み条件が表示され、拡大再生エリア５２には、ユーザが選択したサムネイル画像が拡大して表示されている。拡大再生エリア５２の両脇に設けた矢印をクリックすると前または次の画像が拡大表示される。
音楽再生制御エリア５３の構成は、図９に示す音楽再生制御エリア４９の構成と同一であるためその詳細の説明は省略する。
ツールバーエリア５１の戻るボタン５１ａを操作すると、拡大画面５０は消去されて、画像再生画面４５が表示される。また、ツールバーエリア５１の「×」ボタン５１ｃを操作するとアプリケーションプログラムを終了する。

図９のツールバーエリア４６にあるスライドショーボタン４６ｆをクリックした場合も、同様に図１０の拡大画面５０が表示される。そして、拡大再生エリア５２には、一定時間毎に拡大された画像が自動的に切り替わって表示される。

図９の画像再生エリア４８に表示されているサムネイル画像をクリックした後、ツールバーエリア４６にあるプロパティボタン４６ｇをクリックすると、図３に示す画像ファイル３５のヘッダー部３５ａに記述されている情報を確認し変更することができる。さらに図５に示す画像ＤＢ３８の情報も確認し変更することができる。

画像再生エリア４８に表示されているサムネイル画像を選択した状態で、ツールバーエリア４６にある削除ボタン４６ｅをクリックすると選択した画像を削除することができる。
またサムネイル画像を選択した状態で、ツールバーエリア４６にある送信ボタン４６ｈをクリックすると、その画像を他のＰＣへ送信することができ、ＣＤまたはＤＶＤに書き込むことができる。
更に、ツールバーエリア４６にある追加ボタン４６ｄをクリックするとＣＤ／ＤＶＤまたはＤＳＣ１５から画像を取り込むことができる。

ツールバーエリア４６にある設定ボタン４６ｃをクリックするとプルダウンメニュー（不図示）が表示される。ユーザはプルダウンメニューから「個人設定」または「自動再生設定」を選択できる。

ユーザが「個人設定」を選択すると、図１２に示す個人設定ファイル５５がポップアップ表示される。ユーザは、個人設定ファイル５５から名前、生年月日および図示する各種情報を入力することができる。
各種項目毎に表示されている（追加）ボタンをクリックすると、新たな情報を追加入力することができる。また、削除したい情報を選択して（削除）ボタンをクリックすると、選択した情報を削除することができる。
個人設定ファイル５５の最下段に設けられたＯＫボタンをクリックすると、修正された内容で個人情報ＤＢ（不図示）を更新する。ＣＡＮＣＥＬボタンをクリックすると、修正された内容を破棄する。

図９に示す画像絞込み条件の内、個人情報指定４７ｄは、個人設定ファイル５５の情報に基づいて絞込みを行うものである。具体的に説明する。
ユーザが絞込み条件で個人情報指定４７ｄを選択し、次に「学校」を選択すると、個人設定ファイル５５の「学校」に登録された情報が表示されて選択可能になる。そこでユーザが第二中学校を選択すると、撮影年月日が１９７９年４月８日から１９８２年３月２４日迄で、キーワードに野球が設定されている画像、または撮影位置が指定済みの関連場所付近の画像が検索され、画像再生エリア４８にサムネイル表示される。なお「関連場所」には図示しない別画面を用いてＧＰＳ情報が設定されている。

ユーザがプルダウンメニューから「自動再生設定」を選択すると、図１３に示す自動再生設定ファイル５６がポップアップ表示される。ユーザは、自動再生設定ファイル５６の表示画面から自動再生実行の有無やその条件を設定できる。また、関連する音楽または曲が見つからなかった場合の再生条件も指定できる。
自動再生設定では、画像再生時に関連する音楽を自動再生するかどうかを設定することができる。また、音楽再生時に関連する画像を自動再生するかどうかを設定することができる。
関連するかどうかの条件として、個人情報、特定の撮影日時、キーワード等を指定することができる。

特に、「お気に入り」というキーワードが設定された音楽または画像を再生できる。音楽を指定する場合は特定のプレイリスト、ジャンル、アーティスト、アルバム、キーワード等を指定することができる。画像を指定する場合は、特定の撮影日時やキーワード等を指定することができる。

次に、音楽再生動作について説明する。ユーザが図９の画像再生画面４５で、ツールバーエリア４６の音楽ボタン４６ｂを操作すると、モニタ６に音楽再生画面が表示される。
図１１は、音楽再生画面６０を示す図である。音楽再生画面６０には、ツールバーエリア６１、音楽絞込みエリア６２、音楽再生エリア６３及び音楽再生制御エリア６４が設けられている。

ツールバーエリア６１には、写真ボタン６１ａ、音楽ボタン６１ｂ、設定ボタン６１ｃ、追加ボタン６１ｄ、削除ボタン６１ｅ、ＣＤボタン６１ｆ、プロパティボタン６１ｇ、送信ボタン６１ｈ及び「×」ボタン６１ｉが備えられている。

写真ボタン６１ａを操作すると画像再生画面４５を表示することができる。従って、写真ボタン６１ａと音楽ボタン４６ｂによって、画像再生画面４５と音楽再生画面６０とを交互に切り替えて表示することができる。
ＣＤボタン６１ｆを操作すると、ＣＤ音楽データの再生や、ＣＤ音楽データをＭＰ３やＷＭＡといった音楽ファイルに変換して追加することができる。この詳細の説明は省略する。

プロパティボタン６１ｇを操作すると、図４に示す音楽ファイル３６のヘッダー部３６ａに記述されている情報を確認し変更することができる。更に図６に示す音楽ＤＢ３９の情報を確認し変更することができる。
またプロパティボタン６１ｇの操作によって、図示はしないが、画像での設定とは別にリピート設定とシャッフル設定を行うことができる。
リピート設定では、「リピート無し」、「１曲リピート」、「全曲リピート」を設定することができる。「リピート無し」は絞り込まれた曲を全て再生したら終了する。「１曲リピート」は指定された曲の再生を繰り返す。「全曲リピート」は絞り込まれた曲全ての再生を繰り返す。
シャッフル設定では、「シャッフルオフ」、「シャッフルオン」を設定することができる。「シャッフルオフ」は絞り込まれた曲をリストに従って先頭から再生する。「シャッフルオン」は絞り込まれた曲をランダムに再生する。

ツールバーエリア６１の他のボタンは、画像再生画面４５での説明と同様であるためその詳細の説明は省略する。

音楽絞込みエリア６２には、複数の絞込み指定欄が設けられている。即ち、項目指定欄６２ａ、詳細指定欄６２ｂ、キーワード指定欄６２ｃ、個人情報指定欄６２ｄが設けられている。

項目指定欄６２ａで操作することによって、プレイリスト、ジャンル、アーティスト、アルバム及びリリース年で絞込み検索をすることができる。
プレイリストをクリックするとその下の詳細指定欄６２ｂに選択可能なプレイリスト名一覧が表示される。この一覧から再生したいプレイリスト名をクリックすると、項目指定欄６２ａのプレイリスト項目に選択したプレイリスト名が表示されて、他の項目は“すべて”となる。
ジャンル項目を選択すると同様に詳細指定欄６２ｂに、登録されている音楽のジャンル名とともに“すべて”が表示される。ユーザが表示されているジャンル名または“すべて”を選択すると、項目指定欄６２ａのジャンル項目に選択したジャンル名または“すべて”が表示される。同時にプレイリスト項目は「未選択」と表示される。

項目指定欄６２ａの他の項目であるアーティスト、アルバム及びリリース年についても上述の「ジャンル」の動作と同様に処理が行われる。
なお、複数の項目が指定されている場合は各項目のＡＮＤ検索となる。

図１１の音楽再生画面６０では、項目指定欄６２ａのジャンル項目とリリース年項目が“すべて”で、Ａｒｔｉｓｔ１というアーティストのＡｌｂｕｍ１というアルバムが選択されていることが示されている。
そして、その結果、音楽再生エリア６３にはＡｌｂｕｍ１に登録されている楽曲が表示されている。

なお、図９に示す画像再生画面４５と同様に、キーワード指定欄６２ｃや個人情報指定欄６２ｄで操作して音楽を絞り込むことが可能である。
また画像再生画面４５および音楽再生画面６０において、画像再生エリア４８の画像または音楽再生エリア６３の音楽名の上にキーワードをＤｒａｇ＆Ｄｒｏｐすると、その画像または音楽にキーワードを設定することができる。
更に、図示しないプロパティ画面でキーワードの追加と削除をすることができる。

次に、本コンテンツ再生装置におけるコンテンツの再生処理について、図１４乃至図３６を参照しつつ説明する。なお、以下には、コンテンツの再生に関する主な処理機能について説明する。従って、以下の処理に記載されていない機能であっても、上述の図１乃至図１３において説明された機能は本コンテンツ再生装置の機能に含まれる。

図１４はアプリケーションの動作を示す概略のフロー図である。
アプリケーションを起動するとステップＳ１００１で各種ＤＢをＨＤＤ２からメモリ４に読み込む。ステップＳ１００２で画像モードか音楽モードかを確認し、画像モードならばステップＳ１００３で画像モードにおける再生処理を実行し、音楽モードならばステップＳ１００４で音楽モードおける再生処理を実行する。
なお、アプリケーション起動時は、前回アプリケーションが最後に実行していたモードでの再生処理を最初に実行する。

ステップＳ１００５で、終了が指定されたかどうかを確認する。ステップＳ１００５でＮｏの場合、即ち、終了が指定されたのではなくモードの変更が指定された場合は、ステップＳ１００２に戻って変更されたモードでの再生処理を実行する。ステップＳ１００５でＹｅｓの場合、即ち、終了が指定された場合はステップＳ１００６で更新された各種ＤＢの値をメモリ４からＨＤＤ２に保存して終了する。

なお、最後に実行したモード、この後の説明で出てくる絞込み条件等の情報の保存も、各種ＤＢと同様にメモリ４で更新し、アプリケーション終了時にＨＤＤ２に保存する。そして、アプリケーション起動時にＨＤＤ２からメモリ４に読込みを行う。

図１５は画像モードにおける再生処理動作を示す概略のフロー図である。
図９の画像再生画面４５において実行可能な機能のうち、本発明に関わる機能のみについて以下のフローで説明する。

ステップＳ１１０１で画像再生画面４５を表示する。ステップＳ１１０２で最後に指定した絞込条件を現在の絞込条件として画像絞込エリア４７に表示し、ステップＳ１１０３で絞り込まれた画像のサムネイルを表示する。
ステップＳ１１０４で絞込条件が変更されたかどうかを確認する。ステップＳ１１０４でＹｅｓの場合、即ち絞込条件が変更された場合は、ステップＳ１１０５で絞込み条件を新しく指定された条件に更新する。そして、ステップＳｌ１０３に戻ってサムネイル表示を更新する。

ステップＳ１１０６ではサムネイル画像がダブルクリックされて拡大表示が指定されたかどうかを確認する。ステップＳ１１０６でＹｅｓの場合、即ち、拡大表示が指定された場合は、ステップＳ１１０７で拡大表示処理（図１６）を実行する。
ステップＳ１１０８では上部のスライドショーボタンが押されてスライドショーが指定されたかどうかを確認する。ステップＳ１１０６でＹｅｓの場合、即ち、スライドショーが指定された場合は、ステップＳ１１０９でスライドショー処理（図１７）を実行する。

ステップＳ１１１０では、ツールバーエリア４６の音楽ボタン４６ｂ若しくは、「×（終了）」ボタン４６ｉが押されたかどうかを確認する。ステップＳ１１１０でＹｅｓの場合、即ち、押された場合はこの画像モード処理を終了し、図１４にリターンする。ステップＳ１１１０でＮｏの場合、即ち、押されていない場合はステップＳ１１０４に戻って、上述の処理を繰り返して実行する。

図１６は拡大表示処理の概略の手順を示すフロー図である。
ステップＳ１２０１で、図１０に示す拡大画面５０をポップアップ画面として全画面表示する。この時点ではまだ画像は表示しない。ステップＳ１２０２で音楽再生中かどうかを確認する。ステップＳ１２０２でＹｅｓの場合、即ち、音楽再生中ならばステップＳ１２０５に進む。

ステップＳ１２０２でＮｏの場合、即ち、音楽再生中でなければステップＳ１２０３において、図１３に示す自動再生設定ファイル５６で画像再生時の音楽自動再生が許可になっているかどうかを確認する。
ステップＳ１２０３でＮｏの場合、即ち、許可になっていなければステップＳ１２０５に進む。ステップＳ１２０３でＹｅｓの場合、即ち、許可になっていればステップＳ１２０４で音楽自動再生処理（図１８、図１９）を実行する。
なお、音楽再生画面６０で音楽を選択・再生開始した状態で画像モードに移ると、画像を表示したまま音楽の再生が続けられる。この音楽の再生・停止等は、画像再生画面４５の音楽再生制御エリア４９の各ボタンの操作で制御することができる。

ステップＳ１２０５において、画像再生画面４５の画像再生エリア４８でダブルクリックした画像を特定し、ステップＳ１２０６で特定した画像を拡大画面５０の拡大再生エリア５２に拡大して表示する。
ステップＳ１２０７では、画面中央左の←（前）ボタンが押されたかどうかを確認する。ステップＳ１２０７でＹｅｓの場合、即ち、押された場合はステップＳ１２０８で拡大表示する画像を前の画像に設定してステップＳ１２０６で画像を更新する。
同様にステップＳ１２０９では、画面中央右の→（次）ボタンが押されたかどうかを確認する。ステップＳ１２０９でＹｅｓの場合、即ち、ボタンが押された場合はステップＳ１２１０で拡大表示する画像を次の画像に設定してステップＳ１２０６で画像を更新する。

ステップＳ１２１１では、拡大画面５０のツールバーエリア５１の戻るボタン５１ａ若しくは、「×（終了）」ボタン５１ｃが押されたかどうかを確認する。ステップＳ１２１１でＮｏの場合、即ち、押されていない場合はステップＳ１２０７に戻って、上述の処理を繰り返して実行する。ステップＳ１２１１でＹｅｓの場合、即ち、押された場合はステップＳ１２１２の処理に進む。

ステップＳ１２１２において、ステップＳ１２０４で音楽の自動再生を実行中かどうか確認する。ステップＳ１２１２でＹｅｓの場合、即ち、実行中の場合は、ステップＳ１２１３で音楽再生を停止する。そしてステップＳ１２１４で図１０の拡大画面５０を閉じて終了し、図１５に戻る。
なお、拡大画面５０が閉じられると、拡大表示指定時の画像再生画面４５が表示される。

図１７はスライドショー処理の概略の手順を示すフロー図である。
ステップＳ１３０１で、図１０に示す拡大画面５０をポップアップ画面として全画面表示する。この時点ではまだ画像は表示しない。また拡大表示と違って画面の左右に配されていた←→ボタンは表示しない。
ステップＳ１３０２からステップＳ１３０６は、図１６のステップＳ１２０２からステップＳ１２０６と同じであるため、詳細の説明は省略する。

ステップＳ１３０７において、ステップＳ１３０６で画像の表示を開始してから所定時間経過したかどうかを確認する。ステップＳ１３０７でＹｅｓの場合、即ち、所定時間経過した場合は、ステップＳ１３０８で次の画像を指定してステップＳ１３０６に戻り画像を更新する。
なお、この所定時間はアプリケーションで固定した値であっても良いし、ユーザが指定できるようにしても良い。図７に示す画像履歴Ｎｏ：００００００１の「再生日時」および図８に示す音楽履歴Ｎｏ：００００００１の「画像履歴Ｎｏ」では、この所定時間は３秒としている。

ステップＳ１３０９では、ツールバーエリア５１の戻るボタン５１ａ若しくは、「×（終了）」ボタン５１ｃが押されたかどうかを確認する。ステップＳ１３０９でＮｏの場合、即ち、押されていない場合はステップＳ１３０７に戻って、上述の処理を繰り返して実行する。ステップＳ１３０９でＹｅｓの場合、即ち、押された場合はステップＳ１３１０の処理に進む。

ステップＳ１３１０において、ステップＳ１３０４で音楽の自動再生を実行中かどうかを確認する。ステップＳ１３１０でＹｅｓの場合、即ち、実行中の場合は、ステップＳ１３１１で音楽再生を停止する。ステップＳ１３１２で図１０の画面を閉じて終了し、図１５に戻る。

図１８、図１９は音楽自動再生処理の手順を示すフロー図である。
音楽自動再生処理は、図１６のステップＳ１２０４または図１７のステップＳ１３０４で音楽自動再生タスクを起動することで、実行が開始される。そして、図１６のステップＳ１２１３または図１７のステップＳ１３１１で音楽自動再生の停止が指定されると、音楽自動再生の実行が終了する。

ステップＳ１４０１で、画像の絞込みは年月日指定かどうかを調べる。なお、ここでは同時にキーワード指定はされていないとする。ステップＳ１４０１でＹｅｓの場合、即ち、年月日指定の場合は、ステップＳ１４０２で、音楽関連付け（１）の処理（図２０）を実行する。そして実行後、ステップＳ１４０８に進む。

ステップＳ１４０３で、画像の絞込みはキーワード指定かどうかを調べる。なお、ここでは同時に年月日指定はされていないとする。ステップＳ１４０３でＹｅｓの場合、即ち、キーワード指定の場合は、ステップＳ１４０４で、音楽関連付け（２）の処理（図２１）を実行する。そして実行後、ステップＳ１４０８に進む。

ステップＳ１４０５で画像の絞込みは年月日指定とキーワード指定の両方かどうかを確認する。ステップＳ１４０５でＹｅｓの場合、即ち、年月日指定とキーワード指定の両方の場合は、ステップＳ１４０６で音楽関連付け（３）の処理（図２２）を実行する。そして実行後、ステップＳ１４０８に進む。
ステップＳ１４０５でＮｏの場合、即ち、それ以外の指定（個人情報指定）の場合は、ステップＳ１４０７で音楽関連付け（４）の処理（図２３）を実行する。そして実行後、ステップＳ１４０８に進む。

図１９のステップＳ１４０８では、音楽関連付け（１）処理〜音楽関連付け（４）処理の内のいずれかの処理で画像と関連付けられた音楽の再生を開始する。ステップＳ１４０９で音楽１曲の再生が終了したかどうかを確認する。ステップＳ１４０９でＹｅｓの場合、即ち、終了した場合はステップＳ１４１０で次曲を設定してステップＳ１４０８で再生を開始する。

ステップＳ１４１１において、除外ボタン４９ｈが押されたかどうかを確認する。ステップＳ１４１１でＹｅｓの場合、即ち、押された場合はステップＳ１４１２で音楽の再生を停止する。そして、ステップＳ１４１３において、図６に示す音楽ＤＢ３９の関連性除外に記述されている絞込条件を考慮して、ステップＳ１４１４で次曲を設定してステップＳ１４０８で再生を開始する。

なお、本実施例では画像を絞り込んだ条件のみを音楽ＤＢ３９に追加したが、音楽を絞り込んだ条件のみ追加するようにしても良い。また、画像を絞り込んだ条件と音楽を絞り込んだ条件のセットで追加するようにしても良い。

ステップＳ１４１５において、音楽自動再生の停止が指定されたどうかを確認する。ステップＳ１４１５でＹｅｓの場合、即ち、指定された場合はステップＳ１４１６で音楽の再生を終了して、音楽自動再生を終了する。

図２０は、音楽関連付け（１）の処理、即ち、画像選択に年月日のみの指定をしたときの音楽関連付け処理の手順を示すフロー図である。

ステップＳ１５０１において、図１３に示す自動再生設定ファイル５６の“個人情報を使用する”が有効になっているかどうかを確認する。ステップＳ１５０１でＹｅｓの場合、即ち、有効になっていれば、ステップＳ１５０２で画像の絞り込みに使用した年月日と図１２に示す個人設定ファイル５５に登録されている各種年月日との関連性を確認する。例えば、両年月日が一致するか、或いは一方が他方に含まれるといった関連性があるかどうかを確認する。
ステップＳ１５０２でＹｅｓの場合、即ち、関連するものがあれば、ステップＳ１５０３において関連する個人情報の年月日とキーワードを使用して関連する音楽を検索してリストを作成する。

ステップＳ１５０４において、ステップＳ１５０３で再生する音楽があったかどうかを確認する。ステップＳ１５０４でＹｅｓの場合、即ち、条件に適合した音楽があったときは本処理を終了して図１８に戻る。

例えば、年月日指定が２０００年１０月１５日だった場合は、図１２に示す個人設定ファイル５５の“生年月日”と月日が一致することから、田中太郎の誕生日と関連付けることができる。そこで誕生日或いはパーティーというキーワードが付けられた音楽を選択することができる。

なお、誕生日等では前後数日ずれた日にパーティーが行われる可能性があるので、例えば前後１週間ずれた場合でも関連付けるようにしても良い。また図１３に示す自動再生設定ファイル５６で指定した関連キーワードが含まれる画像がある場合のみ、指定した年月日と個人情報とを関連付けるようにしても良い。

例えば、年月日指定が１９８１年８月１日〜１９８１年８月２日の場合ならば、“イベント”の“野球大会”と関連付けられることができる。その場合は野球、試合、優勝、パーティーといったキーワードが付けられた音楽を選択することができる。

図１２に示す個人設定ファイル５５の情報に“音楽関連付け条件”という項目を追加して、例えば野球大会ならば“１９８１年ＡＮＤ（野球ＯＲ試合ＯＲ優勝ＯＲパーティー）”や“（期間の年）ＡＮＤ（キーワードの何れかを含む）”といったように年月日やキーワードの両方を使用して指定できるようにしても良い。或いは“（全てのキーワードを含む）”といったようなキーワードの使い方を指定できるようにしても良い。

例えば、入学式や卒業式の日まで覚えていないため１９７３年４月１日〜１９７９年３月３１日と指定する場合もある。このような場合でも第一小学校に関連付けられるようにしても良い。

また、備考に“毎年”となっている場合は、“生年月日”の場合と同様に月日で関連付けても良い。

また、複数の個人情報と関連付けられる場合は、全てを利用するようにしても良いし、音楽の再生開始前に使用する音楽リストをユーザが選択するようにしても良いし、図１２に示す個人設定ファイル５５の個人情報に優先順位を設定できるようにしても良い。

ステップ１５０４でＮｏの場合、即ち、条件に適合した音楽が無い場合、ステップＳ１５０５において、図１３に示す自動再生設定ファイル５６に記述されている設定項目“年月日絞込み時に共通のキーワードがあれば使用する”が有効になっているかどうかを確認する。ステップＳ１５０５がＹｅｓの場合、即ち、有効になっていれば、ステップＳ１５０６において、絞り込まれた画像の全てに共通するキーワードがあるかどうかを確認する。

ステップＳ１５０６がＹｅｓの場合、即ち、共通するキーワードがあればステップＳ１５０７において、指定された年月日の年内にリリースされた音楽で且つ共通キーワードが設定されている音楽を検索してリストを作成する。
ステップＳ１５０８において、ステップＳ１５０７で再生する音楽が検索できたかどうかを確認し、ステップＳ１５０８でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了して図１８に戻る。

なお、全ての画像に共通するキーワードが複数ある場合は、共通する全てのキーワードを含む音楽とする。また全ての画像に共通するキーワードが無い場合は、半分以上の画像に含まれるキーワードや最も多くの画像に使用されているキーワードを使用するようにしても良い。
また、同年内にリリースされた音楽だけではなく、同年内、同年月或いは同年月日にＤＢに追加された音楽を選択するようにしても良い。本実施例ではリリース年となっているが年月または年月日でも良い。

ステップＳ１５０８でＮｏの場合、即ち、再生する音楽がなければ、ステップＳ１５０９において、指定された年月日の年内にリリースされた音楽を検索してリストを作成する。ステップＳ１５１０において、ステップＳ１５０９で再生する音楽があったかどうかを確認する。ステップＳ１５１０でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了して図１８に戻る。

ステップＳ１５１０でＮｏの場合、即ち、再生する音楽がなければ、ステップＳ１５１１において、図１３に示す自動再生設定ファイル５６に記述されている設定項目“関連する音楽がなかった場合に再生する曲”に指定された条件の音楽を検索してリストを作成する。ステップＳ１５１２において、ステップＳ１５１１で再生する音楽があったかどうかを確認する。ステップＳ１５１２でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了して図１８に戻る。
ステップＳ１５１２でＮｏの場合、即ち、それでも再生する音楽が無い場合は、ステップＳ１５１３において、全ての曲を対象とした音楽リストを作成して、本処理を終了する。

図２１は、音楽関連付け（２）の処理、即ち、画像選択にキーワードのみを指定をしたときの音楽関連付け処理の手順を示すフロー図である。
ステップＳ１６０１において、指定されたキーワードを持つ音楽を検索してリストを作成する。ステップＳ１６０２において、ステップＳ１６０１で再生する音楽があったかどうかを確認する。ステップＳ１６０２でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了して図１８に戻る。

ステップＳ１６０３からステップＳ１６０５の処理は、図２０の音楽関連付け（１）処理のステップＳ１５１１からステップＳ１５１３と同じである。従って、その詳細の説明は省略する。

図２２は、音楽関連付け（３）の処理、即ち、画像選択に年月日指定とキーワード指定の両方を含むときの音楽関連付け処理の手順を示すフロー図である。
ステップＳ１７０１において、指定された年月日の年内にリリースされ且つ指定されたキーワードを持つ音楽を検索してリストを作成する。ステップＳ１７０２において、ステップＳ１７０１で再生する音楽があったかどうかを確認する。ステップＳ１７０２でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了して図１８に戻る。

ステップＳ１７０３は、図２０のステップＳ１５０９と同じである。ステップＳ１７０５は、図２１のステップＳ１６０１と同じである。ステップＳ１７０７からステップＳ１７０９は、図２０のステップＳ１５１１からステップＳ１５１３と同じである。従って、その詳細の説明は省略する。

なお、本実施例ではステップＳ１７０３で年月日を優先したが、キーワードを優先しても良い。

図２３は、音楽関連付け（４）の処理、即ち、画像選択が個人情報指定であるときの音楽関連付け処理の手順を示すフロー図である。
ステップＳ１８０１において、指定された個人情報を使用して音楽リストを作成する。音楽を選択する方法は図２０のステップＳ１５０３の場合と同じである。ステップＳ１８０３からステップＳ１８０５は、図２０のステップＳ１５１１からステップＳ１５１３と同じである。従って、その詳細の説明は省略する。

このように本実施の形態では、画像の絞込条件に従って関連付ける音楽の選択方法を変えることで、“ユーザが見る画像＝ユーザの気分”に合った音楽を自動的に再生することができる。

また画像と音楽の年月日だけではなく、キーワードを組合わせて関連付けることで、より関連性の高い音楽を選択することができる。更に個人情報と関連付けることで、個人の思い出、イベントと関連付けをしやすくなる。

本実施の形態では音楽を除外する機能を有しているので、次回同じ条件で画像を選択した場合は、自動再生する音楽から“除外した曲＝ユーザが画像と音楽のイメージが一致していないと判断した曲”を外すことができる。

本実施の形態ではキーワードを使用したがキーワードに代えてアルバムを使用しても良い。その場合はアルバム名をキーワードと置き換えれば本実施の形態と同様な効果を得ることができる。またアルバムにキーワードを設定するようにしても良い。

なお、キーワードとアルバムでは相違する内容があるので、アルバムに適用する際にはその点を考慮する必要がある。例えば、概念上の相違としては、キーワードでは、画像にキーワードを貼り付けるのに対して、アルバムでは画像をアルバムに貼り付けるという違いがある。またキーワードの場合は１つのキーワードを複数の画像に設定できるが、アルバムの場合は１枚の画像は１つのアルバムにしか貼り付けられない（複数のアルバムに貼り付ける場合は画像のコピーを作成して貼り付ける）という違いがある点に留意する。

本実施の形態では、拡大表示またはスライドショー終了時に音楽を停止しているが、拡大表示またはスライドショーを終了しても音楽再生を続けていても良い。
例えば、次のときまで音楽の自動再生を続けても良い。図９の画像再生画面４５で音楽の停止ボタンが押されたとき。画像の絞込み条件が指定されたとき。別の絞込み条件で拡大表示やスライドショーが指示されたとき。図１１の音楽再生画面６０に移動したとき。音楽再生画面６０で選択した音楽リストの音楽再生が指示されたとき。アプリケーションが終了するとき。

［画像と音楽の関連付けのバリエーション１］
バリエーション１では、画像と音楽の関連付けに、画像と音楽の再生履歴を用いる点が第１の実施の形態と異なっている。従って、第１の実施の形態と同一の部位には同一の符号を付してその詳細の説明を省略する。

図７の画像履歴ＤＢ４０に保存されている履歴情報によれば、画像履歴Ｎｏ：０００００００１では、キーワードKeyword_1Aで絞り込んだ画像ＩＤ：０００００００１を再生した場合に、音楽履歴Ｎｏ：００００００００と０００００００１で特定される音楽を再生している。従って、図８の音楽履歴ＤＢ４１を参照して音楽ＩＤ：００００００００と０００００００１の音楽を再生していることがわかる。

そこで再度キーワードKeyword_1Aで画像を絞り込んだ場合は、過去に同じ画像群を再生している時に聴いていた音楽ＩＤ：００００００００と０００００００１を再生することで、過去の行動＝思い出と関連付けた画像と音楽の再生を行うことができる。

図２４は、音楽関連付け（２）の処理、即ち、キーワードのみで画像を絞り込んだときの音楽関連付け処理の手順を示すフロー図である。
ステップＳ１９０１において、指定されたキーワードと同じ“絞込み”条件の再生履歴を図７の画像履歴ＤＢ４０から検索する。そして、該当する画像履歴に記述されている音楽履歴のＮｏに基づいて図８の音楽履歴４１を調べ、同じキーワードで過去に再生された音楽を検索してリストを作成する。

ステップＳ１９０２において、ステップＳ１９０１で再生する音楽が検索できたかどうかを確認する。ステップＳ１９０２でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了する。
ステップＳ１９０３からステップＳ１９０７は、図２１のステップＳ１６０１からステップＳ１６０５と同じである。従って、その詳細の説明は省略する。

図２４で説明した方法は、年月日のみ、年月日とキーワード両方、または個人情報で画像を絞り込んだ場合も適用することができる。即ち、画像の絞込み条件が図７の画像履歴ＤＢ４０の“絞込み”と一致すれば同様に関連付けることができる。

このように同じ条件で過去に画像を再生した時に聴いていた曲を自動的に再生することができるので、ユーザの過去の動作（＝思い出）と関連付けた画像と音楽の再生を行うことができる。

なお、その音楽が除外された場合は、図８の音楽履歴Ｎｏに記述しないようにしても良い。
また、モード１がＡｕｔｏ（音楽に関連付けて画像を自動再生）の場合よりも、Ｕｓｅｒ（ユーザが画像と音楽の両方を指定した場合）の場合を優先するようにしても良いし、Ｕｓｅｒのもののみ関連付けに使用するようにしても良い。
さらに、本実施の形態では音楽履歴Ｎｏを用いているが、音楽を特定できるものならば音楽履歴Ｎｏに代えて音楽ＩＤ、ファイルパス、タイトル等を用いても良い。

［画像と音楽の関連付けのバリエーション２］
バリエーション２では、バリエーション１と同様に画像と音楽の関連付けに、画像と音楽の再生履歴を用いているが、その処理内容が異なっている。
バリエーション１で検索される音楽は、絞り込んだ画像を過去に再生した年月日と同じ年月日に再生した音楽である。そこで、再生年月日を基に音楽を検索することもできる。

図３５は、音楽関連付け（１）の処理、即ち、画像選択に年月日のみを指定したときの音楽関連付け処理の手順を示すフロー図である。
ステップＳ２９０１において、絞込みに使用した撮影年月日と同じ年月日に再生した音楽を図８の音楽履歴ＤＢ４１から検索してリストを作成する。ステップＳ２９０２において、ステップＳ２９０１で再生する音楽があったかどうかを確認する。ステップＳ２９０２でＹｅｓの場合、即ち、再生する音楽があれば本処理を終了する。
ステップＳ２９０３からステップＳ２９１５は、図２０のステップＳ１５０１からステップＳ１５１３と同じである。従って、その詳細の説明は省略する。

このように画像を撮影した日に聴いていた曲を自動的に再生することができるので、ユーザの過去の動作＝思い出と関連付けた画像と音楽の再生を行うことができる。

バリエーション２では撮影年月日と同じ年月日に再生した音楽としたが、同じ年月または同じ年でも構わない。また撮影年月日と同じ年月日、年月または年に音楽ＤＢに登録した音楽を再生しても良い。

また、同じ条件で過去に複数回再生している場合は、最近に再生した年月日の音楽だけを再生しても良いし、複数の年月日を画面に表示してユーザが使用する年月日を選択できるようにしても良い。全ての年月日で再生されている音楽だけを再生しても良いし、再生回数が多いトップ１０曲だけを再生するようにしても良い。

次に音楽モードにおける再生処理動作、即ち、図１１に示す音楽再生画面６０で音楽の再生を開始したときに、関連する画像を自動再生する動作を説明する。

図２５は、音楽モードにおける再生処理動作を示す概略のフロー図である。以下には、図１１の音楽再生画面６０で実行可能な機能のうち、本発明に関わる機能のみについて以下のフローで説明する。

ステップＳ２００１において、音楽再生画面６０を表示する。この時点では絞込み条件と音楽の一覧は表示しない。ステップＳ２００２で最後に指定した条件を現在の絞込条件として音楽絞込エリア６２に表示し、ステップＳ２００３で絞り込まれた音楽の一覧を表示する。

ステップＳ２００４において絞込条件が変更されたかを確認する。ステップＳ２００４でＹｅｓの場合、即ち、絞込条件が変更された場合は、ステップＳ２００５において絞込み条件を新しく指定された条件に更新する。そして、ステップＳ２００３に戻って音楽の一覧を更新する。

ステップＳ２００６において、再生ボタン６４cが押されたかどうかを確認し、ステップＳ２００６でＹｅｓの場合、即ち、再生ボタン６４cが押されたときは、ステップＳ２００７で再生リストを作成する。
この時シャッフルがオフならば、作成する再生リストの音楽は、ステップＳ２００３で表示した一覧と同じ順序となる。一方、シャッフルがオンならば、作成する再生リストの音楽は、ステップＳ２００３で表示した音楽の順序をランダムに並べ替えたものになる。

ステップＳ２００８において、再生する曲を再生リストの先頭曲に設定する。そして、ステップＳ２００９において、音楽の再生を開始する。

ステップＳ２０１０において、図１３の自動再生設定ファイル５６で音楽再生時の画像自動再生が許可になっているかどうかを確認する。ステップＳ２０１０でＹｅｓの場合、即ち、音楽再生時の画像自動再生が許可になっていれば、ステップＳ２０１１で画像自動再生処理（図２６、図２７）を実行する。

ステップＳ２０１２において、停止ボタン６４ｄが押されたかどうかを確認する。ステップＳ２０１２でＹｅｓの場合、即ち、停止ボタン６４ｄが押されていれば、ステップＳ２０１３で再生を停止する。

ステップＳ２０１４において前ボタンが押されているかどうかを確認する。ステップＳ２０１４でＹｅｓの場合、即ち、前ボタンが押されていれば、ステップＳ２０１５で再生する曲を前曲に設定して、ステップＳ２００９で再生を開始する。

ステップＳ２０１６において、次ボタンが押されているかどうかを確認する。ステップＳ２０１６でＹｅｓの場合、即ち、次ボタンが押されていれば、ステップＳ２０１７で再生する曲を次曲に設定して、ステップＳ２００９で再生を開始する。

ステップＳ２０１８において、ツールバーエリア６１の写真ボタン６１ａ若しくは、「×（終了）」ボタン６１ｉが押されたかどうかを確認する。ステップＳ２０１８でＹｅｓの場合、即ち、いずれかのボタンが押された場合は図１４に戻り、画像モードヘの変更を実行するかアプリケーションの終了を実行する。
ステップＳ２０１８でＮｏの場合、即ち、いずれのボタンも押されていない場合はステップＳ２００４に戻り、上述の処理を繰り返して実行する。

図２６、図２７は、画像自動再生処理の手順を示すフロー図である。
ステップＳ２１０１において、絞込み条件にリリース年またはアルバムが含まれるかどうかを確認する。ステップＳ２１０１でＹｅｓの場合、即ち、含まれる場合は、選択されたリリース年またはアルバムのリリース年を絞込みに用いる年としてステップＳ２１０２において、画像関連付け（１）の処理（図２８）を実行する。

ステップＳ２１０３において、キーワードのみの指定かどうかを確認する。ステップＳ２１０３でＹｅｓの場合、即ち、キーワードのみの指定の場合は、ステップＳ２１０４で画像関連付け（２）処理（図２９）を実行する。そして、ステップ２１１２へと進む。

ステップＳ２１０５において、リリース年とキーワードの両方の指定かどうかを確認する。ステップＳ２１０５でＹｅｓの場合、即ち、指定が両方の場合は、ステップＳ２１０６で画像関連付け（３）処理（図３０）を実行する。そして、ステップ２１１２へと進む。

ステップＳ２１０７において、個人情報指定かどうかを確認する。ステップＳ２１０７でＹｅｓの場合、即ち、個人情報指定の場合は、ステップＳ２１０８で画像関連付け（４）処理（図３１）を実行する。そして、ステップ２１１２へと進む。

ステップＳ２１０９において、プレイリスト指定かどうかを確認する。ステップＳ２１０９でＹｅｓの場合、即ち、プレイリスト指定の場合は、ステップＳ２１１０で画像関連付け（５）処理（図３２）を実行する。そして、ステップ２１１２へと進む。

それ以外の場合、即ち、すべての曲、ジャンルやアーティスト指定の場合は、ステップＳ２１１１において、画像関連付け（６）処理（図３３）を実行する。そして、ステップ２１１２へと進む。

図２７のステップＳ２１１２において、図１０に示す拡大画面５０でスライドショーを開始する。
ステップＳ２１１３において、画像表示時間が所定時間を越えたかどうかを確認する。ステップＳ２１１３でＹｅｓの場合、即ち、所定時間を超えた場合は、ステップＳ２１１４で再生する画像を次の画像に設定して、ステップＳ２１１２に戻って再生を開始する。

ステップＳ２１１３でＮｏの場合、即ち、所定時間が経過していない場合は、ステップＳ２１１５において、除外ボタン５３ｈが押されたかどうかを確認する。ステップＳ２１１５でＹｅｓの場合、即ち、除外ボタン５３ｈが押された場合は、ステップＳ２１１６において、図５に示す画像ＤＢ３８の“関連性除外”に音楽を絞り込んだ条件を追加して新たな画像リストを作成する。そして、ステップＳ２１１７において、次画像を設定してステップＳ２１１２で再生を開始する。

ステップＳ２１１８では、図１０拡大画面５０において、停止ボタン５３ｄが押されて音楽再生停止を指示されたか、戻るボタン５１ａを押されてスライドショー中止を指示されたか、「×」ボタン５１ｃを押されてアプリケーションの終了が指示されたかを確認する。ステップＳ２１１８でＹｅｓの場合、即ち、何れかのボタン操作で画像自動再生が停止になった場合は、ステップＳ２１１９において、画像自動再生を停止して本処理を終了する。

図２８は、画像関連付け（１）の処理、即ち、絞込み条件にキーワードを含まない年指定をしたときの音楽関連付け処理を示すフロー図である。
ここで、年は、“リリース年”で選択した年、または“アルバム”で選択したアルバムのリリース年をいう。

ステップＳ２２０１において、図１３に示す自動再生設定ファイル５６の“個人情報を使用する”が有効になっているかどうかを確認する。ステップＳ２２０１がＹｅｓの場合、即ち、当該項目が有効になっていれば、ステップＳ２２０２において、指定したリリース年またはアルバムのリリース年と図１２に示す個人設定ファイル５５の個人設定に登録されている各種年月日とが関連性を有するかどうかを確認する。
ここで、それぞれの年月日が一致する或いは一方の期間に他方の年月日が含まれる場合には関連性があるものとする。ステップＳ２２０２でＹｅｓの場合、即ち、関連するものがあれば、ステップＳ２２０３において、関連する個人情報の年月日とキーワードを使用して関連する画像を検索し、該当する画像のリストを作成する。

ステップＳ２２０４において、ステップＳ２２０３で再生する画像があったかどうかを確認する。ステップＳ２２０４がＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして図２６に戻る。

例えば、リリース年指定が１９８０年だった場合は、図１２に示す個人設定ファイル５５の項目“学校”にある情報“第二中学校”と、項目“活動”にある情報“第七チーム”が一致する。項目“学校”を優先させるとすると、期間が１９７９年４月８日〜１９８２年３月２４日に撮影された画像を検索してリストを作成する。

なお、項目“活動”を優先させると期間が１９７９年４月１５日〜１９８１年１０月１５日に撮影されて、野球というキーワードが付けられた画像を検索してリストを作成する。
複数の項目が一致した場合、項目の優先順位を別途ユーザが設定できるようにしても良いし、すべての項目を使用するようにしても良い。

ステップＳ２２０５において、図１３に示す自動再生設定ファイル５６の“年月日絞込み時に共通のキーワードがあれば使用する”が有効になっているかどうかを確認する。ステップＳ２２０５でＹｅｓの場合、即ち、当該項目が有効になっていれば、ステップＳ２２０６において、絞り込まれた画像の全てに共通するキーワードがあるかどうかを確認する。

ステップＳ２２０６でＹｅｓの場合、即ち、共通するキーワードがあれば、ステップＳ２２０７において、指定されたリリース年内に撮影された画像で且つ共通キーワードが設定されている画像を検索してそのリストを作成する。
ステップＳ２２０８において、ステップＳ２２０７で再生する画像があったかどうかを確認し、ステップＳ２２０８でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

なお、全ての音楽に共通するキーワードが複数ある場合は、共通する全てのキーワードを含む画像を検索する。全ての音楽に共通するキーワードが無い場合は、半分以上の音楽に含まれるキーワードや最も多くの音楽に使用されているキーワードを使用するようにしても良い。

また、同年内に撮影された画像だけではなく、同年内にＤＢに追加された画像を選択するようにしても良い。本実施例ではリリース年となっているが年月または年月日でも良い。

ステップＳ２２０９において、指定されたリリース年に撮影された画像を検索して、その画像のリストを作成する。ステップＳ２２１０において、ステップＳ２２０９で再生する画像があったかどうかを確認する。ステップＳ２２１０でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２２１１において、図１３に示す自動再生設定ファイル５６の“関連する画像がなかった場合に再生する画像”に指定された条件の画像を検索して、該当する画像のリストを作成する。ステップＳ２２１２において、ステップＳ２２１１で再生する画像があったかどうかを確認する。
ステップＳ２２１２でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２２１２でＮｏの場合、即ち、再生する画像が無い場合は、ステップＳ２２１３において、全ての画像のリストを作成して終了する。そして、図２６に戻る。

図２９は、画像関連付け（２）の処理、即ち、画像選択にキーワードのみを指定した時の画像関連付けの手順を示すフロー図である。
ステップＳ２３０１において、指定されたキーワードを持つ画像を検索してその画像のリストを作成する。ステップＳ２３０２において、ステップＳ２３０１で再生する画像があったかどうかを確認する。ステップＳ２３０２でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。
ステップＳ２３０３からステップＳ２３０５は、図２０のステップＳ２２１１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。なお、画像検索においては、プレイリスト名をキーワードとして扱っても良い。

図３０は、画像関連付け（３）の処理、即ち、音楽選択にリリース年指定とキーワード指定の両方を含む時の画像関連付けの手順を示すフロー図である。
ステップＳ２４０１において、指定されたリリース年に撮影され且つ指定されたキーワードを持つ画像を検索して当該画像のリストを作成する。ステップＳ２４０２において、ステップＳ２４０１で再生する画像があったかどうかを確認する。ステップＳ２４０２でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして図２６に戻る。
ステップＳ２４０３は、図２８のステップＳ２２０９と同じである。ステップＳ２４０５は、図２９のステップＳ２３０１と同じである。ステップＳ２４０７からステップＳ２４０９は、図２８のステップＳ２２１１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。

なお、本実施例ではステップＳ２４０３でリリース年を優先したが、キーワードを優先しても良い。

図３１は、画像関連付け（４）の処理、即ち、音楽選択が個人情報指定時の画像関連付けの手順を示すフロー図である。
ステップＳ２５０１において、指定された個人情報を使用して画像リストを作成する。画像の選択方法は、図２８のステップＳ２２０３の場合と同じである。ステップＳ２５０３からステップＳ２５０５は、図２８のステップＳ２２１１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。

図３２は、画像関連付け（５）の処理、即ち、音楽選択がプレイリスト指定時の画像関連付けの手順を示すフロー図である。
なお、プレイリスト指定時はプレイリストの作成年月日を使用する。

ステップＳ２６０１において、図１３に示す自動再生設定ファイル５６の項目“個人情報を使用する”が有効になっているかどうかを確認する。ステップＳ２６０１でＹｅｓの場合、即ち、当該項目が有効になっていれば、ステップＳ２６０２において、プレイリストの作成年月日と図１２に示す個人設定ファイル５５に登録されている各種年月日が関連性があるかどうかを確認する。
ここで、それぞれの年月日が一致する或いは一方の期間に他方の年月日が含まれる場合には関連性があるものとする。ステップＳ２６０２でＹｅｓの場合、即ち、関連するものがあれば、ステップＳ２６０３において、関連する個人情報の年月日とキーワードを使用して関連する画像を検索し、その画像リストを作成する。

ステップＳ２６０４において、ステップＳ２６０３で再生する画像があったかどうかを確認する。ステップＳ２６０４でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。なお、画像を選択する方法は図２８のステップＳ２２０３の場合と同じである。
ステップＳ２６０４でＮｏの場合、即ち、再生する画像がなければ、ステップＳ２６０５において、プレイリストの作成年月日と同じ年月日に撮影した画像を検索してその画像のリストを作成する。

ステップＳ２６０６において、ステップＳ２６０５で再生する画像があったかどうかを確認する。ステップＳ２６０６でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２６０７において、プレイリストの作成年月日の年月と同じ年月に撮影した画像を検索してその画像リストを作成する。ステップＳ２６０８において、ステップＳ２６０７で再生する画像があったかどうかを確認する。ステップＳ２６０８でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２６０９において、プレイリストの作成年月日の年と同じ年に撮影した画像を検索して、その画像のリストを作成する。ステップＳ２６１０において、ステップＳ２６０９で再生する画像があったかどうかを確認する。ステップＳ２６１０でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２６１１からステップＳ２６１３は、図２８のステップＳ２２１１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。

なお、プレイリストにキーワードが設定されている場合は、キーワードで画像と関連付けても良い。

図３３は、画像関連付け（６）の処理、即ち、音楽選択にジャンルまたはアーティスト指定をした時の画像関連付けの手順を示すフロー図である。

ステップＳ２７０１において、図７に示す画像履歴ＤＢ４０の“音楽絞込み”を検索して、音楽選択に指定したジャンルまたはアーティストの曲を再生しながら再生した画像を検索してリストを作成する。
ステップＳ２７０２において、ステップＳ２７０１で再生する画像があったかどうかを確認する。ステップＳ２７０２でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２７０２でＮｏの場合、即ち、再生する画像がなければ、ステップＳ２７０３において、絞り込まれた音楽の全てに共通するキーワードがあるかどうかを確認する。ステップＳ２７０３でＹｅｓの場合、即ち、共通するキーワードがあれば、ステップＳ２７０４で共通キーワードが設定されている画像を検索してその画像のリストを作成する。

ステップＳ２７０５において、ステップＳ２７０４で再生する画像があったかどうかを確認する。ステップＳ２７０５でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。そして、図２６に戻る。

ステップＳ２７０６からステップＳ２７０８は、図２８のステップＳ２２１１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。

なお、ステップＳ２７０１でリスト化された画像は、今回絞り込んだ音楽を過去に再生した年月日と同じ年月日に再生した画像ということでもある。
同じ条件で過去に複数回再生している場合は、最近に再生した年月日の画像だけを再生しても良いし、複数の年月日を画面に表示してユーザが使用する年月日を選択できるようにしても良い。また、全ての年月日で再生されている画像だけを再生しても良いし、再生回数が多いトップ２０枚だけを再生するようにしても良い。

このように本発明においては、音楽の絞込条件に従って関連付ける画像の選択方法を変えることで、“ユーザが聴く音楽＝ユーザの気分”に合った画像を自動的に再生することができる。
また音楽と画像の年月日だけではなく、キーワードを使用して関連付けることで、より関連性の高い画像を選択することができる。更に個人情報と関連付けることで、個人の思い出、イベントと関連付けをしやすくなる。

本実施の形態では画像を除外する機能を有しているので、次回同じ条件で音楽を選択した場合は、自動再生する画像から“除外した画像＝ユーザが画像と音楽のイメージが一致していないと判断した画像”を外すことができる。

本実施の形態ではキーワードの一致検索に画像ＤＢ３８及び音楽ＤＢ３９の“キーワード”項目を使用したが、図３に示す画像ファイル３５のタイトルやコメント、図４に示す音楽ファイル３６のタイトル、歌詞やコメントに基づいてキーワードを検索しても良い。

また、音楽を音楽ＤＢ３９に追加するときに、ヘッダー情報に既存キーワードが含まれているかどうかを確認し、含まれていれば音楽ＤＢ３９の“キーワード”項目に追加するようにしても良い。この動作は、画像の追加時も同様に処理することができる。

図３４は、音楽を音楽ＤＢ３９に追加する手続きを示すフロー図である。
なお、音楽ＤＢ３９には音楽情報が追加されるが、音楽ファイルそのものは音楽ＤＢ３９には追加しない。

ステップＳ２８０１において、取り込む音楽ファイルが保存されているデバイスを確認する。ステップＳ２８０１でＹｅｓの場合、即ち、音楽ファイルがアプリケーションを実行するＰＣ１のＨＤＤ２にあるか、ＣＤ／ＤＶＤ９またはＤＳＣ１５のリムーバブルメディアや他のＰＣにあれば、ステップＳ２８０２において、ＨＤＤ２に音楽ファイルをコピーする。
リムーバブルメディアや他のＰＣにあると、リムーバブルメディアが取り外されている場合や、他のＰＣが接続されていない場合にその音楽ファイルを再生することができない。そこでＨＤＤ２にコピーするのである。

ステップＳ２８０３において、取り込む音楽にＩＤを付与して、ヘッダー情報から得られるタイトル等の情報、ファイルパス、追加日時等の情報を音楽ＤＢ３９に追加する。ステップＳ２８０４ではタイトル、歌詞、コメントに既存のキーワードが含まれているかどうかを確認する。ステップＳ２８０４でＹｅｓの場合、即ち、既存のキーワードが含まれていれば、ステップＳ２８０５において、含まれていたキーワードを“キーワード”項目に追加して本処理を終了する。

なお、本実施の形態では音楽ＤＢ３９には歌詞が含まれていないが、歌詞も音楽ＤＢ３９に記述するようにしても良い。

［画像と音楽の関連付けバリエーション３］
バリエーション３では、画像の絞込に年を用いる点が上述の音楽モードにおける再生処理の形態と異なっている。

図３６は、画像関連付け（１）の処理、即ち、音楽のリリース年と画像の過去の再生年月日を関連付けた場合の手続きを示すフロー図である。
ステップＳ３００１において、絞込みに使用したリリース年と同じ年に再生した画像を図７に示す画像履歴ＤＢ４０から検索してその画像リストを作成する。ステップＳ３００２において、ステップＳ３００１で再生する画像があったかどうかを確認する。ステップＳ３００２でＹｅｓの場合、即ち、再生する画像があれば本処理を終了する。
ステップＳ３００３からステップＳ３０１５は、図２８のステップＳ２２０１からステップＳ２２１３と同じである。従って、その詳細の説明は省略する。

このようにその音楽がリリースされた年（ＰＣ、ＴＶ、ラジオ等でその年に良く聴いた年）に再生した画像（その年に撮影した画像が多い）を自動的に再生することができるので、ユーザの過去の動作（＝思い出）と関連付けた画像と音楽の再生を行うことができる。

再生する画像が多い場合は、最も多い画像に設定されているキーワードを検索して、そのキーワードの画像のみを再生するようにしても良いし、最も多く再生された画像のトップ３０枚でも良い。
本実施の形態ではリリース年を使用したが、リリース年月またはリリース年月日の場合は、同じ年月または同じ年月日に再生された画像としても良い。
本発明では自動的に画像または音楽を再生したが、ユーザに再生可否を確認してから再生するようにしても良い。

以上説明したように、本実施の形態のコンテンツ再生装置によれば、画像を撮影した年にリリースされた音楽を再生する等で、画像と音楽をユーザの過去の記憶に関連付けることができる。また、ユーザが画像と音楽に設定したキーワードを用いることで、画像と音楽を、ユーザのイメージに関連付けることができる。従って、ユーザの気分や感性にあった画像と音楽を同時に再生することができる。

なお、上述の実施の形態で説明した各機能は、ハードウエアを用いて構成しても良く、また、ソフトウエアを用いて各機能を記載したプログラムをコンピュータに読み込ませて実現しても良い。また、各機能は、適宜ソフトウエア、ハードウエアのいずれかを選択して構成するものであっても良い。

更に、各機能は図示しない記録媒体に格納したプログラムをコンピュータに読み込ませることで実現させることもできる。ここで本実施の形態における記録媒体は、プログラムを記録でき、かつコンピュータが読み取り可能な記録媒体であれば、その記録形式は何れの形態であってもよい。

なお、この発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。

パーソナルコンピュータを用いて構成したコンテンツ再生装置を示す図。 携帯型コンテンツプレーヤーの構成を示す図。 画像ファイルの構成を示す図。 音楽ファイルの構成を示す図。 画像ＤＢの構成を示す図。 音楽ＤＢの構成を示す図。 画像履歴ＤＢの構成を示す図。 音楽履歴ＤＢの構成を示す図。 画像再生画面を示す図。 拡大画面を示す図。 音楽再生画面を示す図。 個人設定ファイルを示す図。 自動再生設定ファイルを示す図。 アプリケーションの動作を示す概略のフロー図。 画像モードにおける再生処理動作を示す概略のフロー図。 拡大表示処理の概略の手順を示すフロー図。 スライドショー処理の概略の手順を示すフロー図。 音楽自動再生処理の手順を示すフロー図。 音楽自動再生処理の手順を示すフロー図。 音楽関連付け（１）の処理の手順を示すフロー図。 音楽関連付け（２）の処理の手順を示すフロー図。 音楽関連付け（３）の処理の手順を示すフロー図。 音楽関連付け（４）の処理の手順を示すフロー図。 音楽関連付け（２）の処理の手順を示すフロー図。 音楽モードにおける再生処理動作を示す概略のフロー図。 画像自動再生処理の手順を示すフロー図。 画像自動再生処理の手順を示すフロー図。 画像関連付け（１）の処理の手順を示すフロー図。 画像関連付け（２）の処理の手順を示すフロー図。 画像関連付け（３）の処理の手順を示すフロー図。 画像関連付け（４）の処理の手順を示すフロー図。 画像関連付け（５）の処理の手順を示すフロー図。 画像関連付け（６）の処理の手順を示すフロー図。 音楽を音楽ＤＢに追加する手続きを示すフロー図。 音楽関連付け（１）の処理の手順を示すフロー図。 画像関連付け（１）の処理の手順を示すフロー図。

符号の説明

１…パーソナルコンピュータ、２…ＨＤＤ、３…制御部、５…表示部、６…モニタ、１１…音再生部、１５…デジタルスチルカメラ、１７…携帯型コンテンツプレーヤー、２３…制御部、２４…記憶部、２６…表示部兼入力部、２７…画像再生部、２８…表示部、２９…音再生部、３５…画像ファイル、３６…音楽ファイル、３８…画像ＤＢ、３９…音楽ＤＢ、４０…画像履歴ＤＢ、４１…音楽履歴ＤＢ、４５…画像再生画面、４７…画像絞込みエリア、４８…画像再生エリア、５０…拡大画面、５５…個人設定ファイル、５６…自動再生設定ファイル、６０…音楽再生画面、６２…音楽絞込みエリア、６３…音楽再生エリア、４２…コンテンツ購入画面。

Claims (13)

1. 音データを再生する音再生手段と、
   画像データを再生する画像再生手段と、
   複数の画像データから再生する画像データを絞り込む画像データ絞込み手段と、
   画像データ絞込みに使用した絞込み条件から関連する音データを抽出する、画像・音関連付け手段と、
   を有するコンテンツ再生装置であって、
   画像データ絞込み手段で絞り込んだ画像データを再生中に、画像・音関連付け手段で抽出された音データを再生することを特徴とするコンテンツ再生装置。
2. 画像データ絞込み手段が、撮影日に基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記撮影日に関連するリリース日または録音日をもつ音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
3. コンテンツ再生装置は、画像データにキーワードを設定するキーワード設定手段を更に有し、
   画像データ絞込み手段が、キーワードに基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するタイトルまたは歌詞をもつ音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
4. コンテンツ再生装置は、音データと画像データにキーワードを設定するキーワード設定手段を更に有し、
   画像データ絞込み手段が、キーワードに基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するキーワードをもつ音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
5. コンテンツ再生装置は、音データの再生履歴を保存する再生履歴手段を更に有し、
   画像データ絞込み手段が、画像データの撮影日に基づいて画像データを絞り込む場合、前記画像・音関連付け手段は、前記撮影日に関連する前記再生履歴手段に保存された再生日をもつ音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
6. コンテンツ再生装置は、画像データ及び音データの再生履歴を保存する再生履歴手段を更に有し、
   前記画像・音関連付け手段は、画像データの過去の再生日と関連した再生日をもつ音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
7. コンテンツ再生装置は、個人情報を設定する個人情報設定手段を更に有し、
   前記画像・音関連付け手段は、画像データ絞込み手段で使用した撮影日またはキーワードと、前記個人情報設定手段で設定された個人情報とを関連付けて、その個人情報と関連する音データを抽出することを特徴とする請求項１に記載のコンテンツ再生装置。
8. 音データを再生する音再生手段と、
   画像データを再生する画像再生手段と、
   複数の音データから再生する音データを絞り込む音データ絞込み手段と、
   音データ絞込みに使用した絞込み条件から関連する画像データを抽出する、画像・音関連付け手段と、
   を有するコンテンツ再生装置であって、
   音データ絞込み手段で絞り込んだ音データを再生中に、画像・音関連付け手段で抽出された画像データを再生することを特徴とするコンテンツ再生装置。
9. 音データ絞込み手段が、リリース年に基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記リリース年又はリリース年月に関連する撮影年又は年月をもつ画像データを抽出することを特徴とする請求項８に記載のコンテンツ再生装置。
10. コンテンツ再生装置は、音データにキーワードを設定するキーワード設定手段を更に有し、
    音データ絞込み手段が、キーワードに基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードに関連するタイトルまたはキーワードをもつ画像データを抽出することを特徴とする請求項８に記載のコンテンツ再生装置。
11. コンテンツ再生装置は、音データと画像データにキーワードを設定するキーワード設定手段を更に有し、
    音データ絞込み手段が、キーワードに基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記キーワードと関連するキーワードをもつ画像データを抽出することを特徴とする請求項８に記載のコンテンツ再生装置。
12. コンテンツ再生装置は、画像データの再生履歴を保存する再生履歴手段を更に有し、
    音データ絞込み手段が、音データのリリース年又はリリース年月に基づいて音データを絞り込む場合、前記画像・音関連付け手段は、前記リリース年又はリリース年月に関連する前記再生履歴手段に保存された再生日をもつ画像データを抽出することを特徴とする請求項８に記載のコンテンツ再生装置。
13. コンテンツ再生装置は、個人情報を設定する個人情報設定手段を更に有し、
    前記画像・音関連付け手段は、音データ絞込み手段で使用したリリース年またはキーワードと、前記個人情報設定手段で設定された個人情報とを関連付けて、その個人情報と関連する画像データを抽出することを特徴とする請求項８に記載のコンテンツ再生装置。

Images