JP2006109151A - 画像記録装置及び電子アルバム作成システム - Google Patents

Abstract

【課題】撮影時の状況と関連の深い音声を撮影画像に容易に対応付けられるようにすること。
【解決手段】被写体を撮影して画像情報データを出力する撮影手段と、上記撮影手段から出力された画像情報データを記録する記録手段とを持つ画像記録装置であって、上記撮影手段による撮影時及びその前後の時間において、該画像記録装置の周囲にある再生装置から再生されている音声を検出し、それに対応する音声情報データを出力する音声情報データ検出手段と、上記音声情報データ検出手段から出力された音声情報データを上記画像データに対応付けする制御手段とを設ける。
【選択図】 図１

Description

本発明は、画像記録装置及び電子アルバム作成システムに関し、特にユーザーが撮影した画像を音楽と組み合わせて再生できる電子アルバムを作成する場合に好適な画像記録装置及び電子アルバム作成システムに関する。

近年、デジタルカメラの普及が進んでいる。デジタルカメラは、被写体像をデジタル画像に変換する為、パーソナルコンピューター等のデジタル情報処理装置に画像データを送信することができる。そのため、さまざまな応用可能性が考えられる。

一方、近年ＤＶＤ等の大容量記録媒体が普及するにつれ、このような大容量記録媒体に多くの情報を効率的に記録することによって、マルチメディア仕様の電子アルバムを作成する傾向がある。しかし、現在こうしたトレンドに対して、上記電子アルバムの作成プロセスの自動化の技術がまだまだ追いついていないと言える。

また、撮影画像の再生の際に、画像を単にモニタ上に再生するだけでは、テレビの様に画像と音声の両方を備えた再生表示に比べると、比較的地味な再生表示となり退屈しがちである。

そこで、ユーザーの撮影した画像に対して、適当な音楽等を組み合わせ、よりユーザーを楽しませることのできる技術が求められていた。

従来、このようにユーザーの撮影画像データと、他のデータを組み合わせる技術としては、下記のものが知られている。例えば特許文献１には、旅行先での撮影画像と予め用意されている素材データ（文字データ・画像データ・音声情報データ等）とを組み合わせる技術が開示されている。また、特許文献２には、ユーザーの撮影画像データと撮影場所を示す地図画像とを対応付けて出力する技術が開示されている。
特開２００３−１２５３４６号公報 特開平９−１３９９０６号公報

しかしながら、上記特許文献１に開示された技術では、たしかに撮影画像と音楽を組み合わせてはいるが、予め用意された素材データを用いる為、その音楽が必ずしも撮影時のユーザーの思い出にうまく合うとは言えない。従って、画像再生時に組み合わされる音楽が、ユーザーの聞きなれない音楽又は撮影画像の思い出にそぐわない音楽となってしまう可能性がある。また、そのような音楽と撮影画像が組み合わされてしまった場合、画像の持つ大切な思い出のイメージを損ねてしまう可能性が生じてしまう。

よって、撮影画像に音楽を組み合わせる場合は、その撮影画像にとってもユーザーにとっても関連が深い音楽である必要がある。例えば、撮影時にユーザーが実際に聞いていた音楽、或いはそれに類する音楽を用いた方が間違いも無く、より効果的でもあると言える。

なお、従来でもデジタルカメラを用いた動画撮影においては、周囲に流れている音声も同時に収録可能であった。しかし、デジタルカメラに付属されているマイクロフォンの性能面の問題もあり、デジタルカメラでの動画撮影時に録音される音声には高音質を期待できない。画像再生時に音楽を流す場合は、当然ながら、より高音質の方が好ましく、また効果的であるとも言える。

また、上記特許文献２に開示された技術では、撮影画像データとその撮影場所を示す地図画像データとを組み合わせて出力して、どこで撮影されたものかを容易に確認できるが、撮影画像の鑑賞に関しては何ら工夫されていない。

本発明は、上記事情に鑑みてなされたもので、撮影時の状況と関連の深い音声を撮影画像に容易に対応付けることを可能とし、以て、それら撮影画像を高音質の音声と組み合わせて再生できる電子アルバムを作成可能とする画像記録装置及び電子アルバム作成システムを提供することを目的とする。

上記の目的を達成するために、本発明の第１の態様による画像記録装置は、被写体を撮影して画像情報データを出力する撮影手段と、上記撮影手段から出力された画像情報データを記録する記録手段とを持つ画像記録装置であって、上記撮影手段による撮影時及びその前後の時間において、該画像記録装置の周囲にある再生装置から再生されている音声を検出し、それに対応する音声情報データを出力する音声情報データ検出手段と、上記音声情報データ検出手段から出力された音声情報データを上記画像データに対応付けする制御手段と、を具備することを特徴とする。

上記の目的を達成するために、本発明の第２の態様による画像記録装置は、楽曲データを記録する第１の記録手段と、上記第１の記録手段に記録された楽曲データを音声として再生する再生手段と、所定の撮影指示操作に応じて被写体を撮影して画像情報データを出力する撮影手段と、上記撮影手段から出力された画像情報データを記録する第２の記録手段と、上記撮影手段への撮影指示操作が行なわれた時刻及びその前後の時間に上記再生手段が再生している音声を検出して、その音声に相当する音声情報データを上記撮影手段からの画像情報データと対応付けて上記第２の記録手段に記録する制御を行う制御手段と、を具備することを特徴とする。

上記の目的を達成するために、本発明の第３の態様による電子アルバム作成システムは、画像記録装置で撮影した日時を参照して、その日時に放送された音楽に相当する楽曲データを検索し、上記画像記録装置で撮影された画像情報データと上記検索した楽曲データとを関連付けた電子アルバムを作成することを特徴とする。

上記の目的を達成するために、本発明の第４の態様による電子アルバム作成システムは、本発明の第１の態様による画像記録装置と、上記画像記録装置とインターネットを介して通信可能であり、楽曲データが格納されているデータベースを有する基地局と、上記インターネットを介した上記基地局との通信により、上記画像記録装置の上記記録手段に記録された上記画像情報データに対応付けられた音声情報データに関連する楽曲データをダウンロードし、上記記録手段に記録された画像情報データと上記ダウンロードした楽曲データとを関連付けて記録した電子アルバムを作成するアルバム作成手段と、を具備することを特徴とする。

上記の目的を達成するために、本発明の第５の態様による電子アルバム作成システムは、画像撮影時及びその前後の時間の周囲の音声を検出する音声検出手段と、画像撮影動作及び上記音声検出手段の音声検出動作の制御を行う制御手段とを有する画像記録装置と、放送局から無線又は有線によって配信された楽曲データを受信する受信手段と、上記受信手段により取得した楽曲データを記録しておくサーバーと、所望の楽曲データを上記サーバーから検索及び取得すると共に、その取得した楽曲データと上記画像記録装置の撮影動作によって得られた画像情報データとを関連付けて記録した電子アルバムを作成するアルバム作成制御手段と、を具備し、上記アルバム作成制御手段は、上記画像記録装置の音声検出手段によって検出した音声に関連する楽曲データを上記サーバーから検索して取得することを特徴とする。

上記の目的を達成するために、本発明の第６の態様による電子アルバム作成システムは、本発明の第２の態様による画像記録装置と、上記画像記録装置の上記第２の記録手段に記録された上記画像情報データに対応付けられた音声情報データに関連する上記第１の記録手段に記録されている楽曲データを、上記第２の記録手段に記録されている画像情報データと関連付けて記録した電子アルバムを作成するアルバム作成手段と、を具備することを特徴とする電子アルバム作成システム。

本発明によれば、撮影時の状況と関連の深い音声、例えば撮影時に流れていた音楽又はそれに類する音楽と撮影画像とを容易に対応付けることが可能となり、以て、それら撮影画像を高音質の音声と組み合わせて再生できる電子アルバムが作成可能となって、その撮影画像の鑑賞時に撮影当時の雰囲気を思い出しながらの再生を可能とする画像記録装置及び電子アルバム作成システムを提供することができる。

［第１実施形態］
以下、図面を参照して本発明の第１実施形態に係る画像記録装置及び電子アルバム作成システムを説明する。

図１は、本発明の第１実施形態に係る画像記録装置及び電子アルバム作成システムの構成を示す図である。同図における破線内部は画像記録装置を示す。なお、本実施形態では、画像記録装置として、例えばデジタルカメラを想定している。

以下、図１を用いて本発明の第１実施形態を説明する。

同図に示すように、本実施形態の電子アルバム作成システムは、画像記録装置（デジタルカメラ）２と、音声再生手段４と、インターネット６、基地局８及び基地局８の有するデータベース１０とからなる。

画像記録装置（デジタルカメラ）２は、マイクロフォン（図示せず）を有する録音手段１２を具備し、該マイクロフォンにより取得した音声情報データを、上記録音手段により記録手段１４に記録できる。また、撮影手段１６による画像情報データも上記記録手段１４に記録できる。

また、記録手段１４への記録は、ユーザーによるスイッチ１８ａの制御に基づく撮影開始信号や時計２０からの所定時間計時タイミング等により、制御手段１８が行う。

この実施形態では、再生された音楽を検出するために、画像記録装置（デジタルカメラ）２がマイクロフォンを有する録音手段１２を具備し、撮影手段１６からの画像情報データと共に音声情報データも記録手段１４に記録可能となっている。

また、音声再生手段４は、スピーカー２２と音声プレーヤー２３とを有し、スイッチ４ａによって動作開始し、音楽を再生する。この際の音源としての音声情報データは、例えば、再生プレーヤー２３に入れられた各種メディアを用いる。なお、インターネット６を介して基地局８から送られてくるデータを上記音声再生手段４内に設けられた不図示の記録手段（音源メディア）内に記録させたものを再生したり、音声再生手段４に付属しているアンテナ４ｂで受信した放送局等からの音声情報データを再生しても、もちろんよい。

また、画像記録装置（デジタルカメラ）２は、更に通信手段２４を具備し、これを介してインターネット６と接続し、基地局８のコンピューター及びデータベース１０と通信可能となっている。これにより、画像記録装置（デジタルカメラ）２は、音声情報データや画像情報データ等をインターネット６、基地局８、データベース１０及びメモリ２６と送受信できる。なお、通信手段２４は有線・無線のどちらでもよい。

さらに、制御手段１８により、上述のように取得した音声情報データ及び記録手段１４内の画像情報データをもとに、電子アルバム２８を作成することができる。このように作成する電子アルバム２８は、例えばＤＶＤやビデオＣＤ等のように、映像と音声が所定のフォーマットで記録できるメディアを用いる。また、アルバムはこうしたメディアの形としなくてもよく、例えば基地局８が有するメモリ２６内に画像と音声を関連付けて記録し、必要に応じて検索可能にしても良い。

また、同図に示すように、基地局８はデータベース１０を有し、このデータベース１０の中に多数の楽曲データが格納されている。

例えば、上記音声再生手段４が一般の音楽プレーヤーである場合に、上記音声再生手段４の再生する音楽を、上記画像記録装置２内の上記録音手段１２により上記記録手段１４に録音し、その録音された音声情報データに含まれるフレーズを持つ楽曲データを、上記データベース１０から、インターネット６経由で選定可能とする。また、上記音声再生手段４の再生音声の音源がラジオのように放送局から放送されたものであれば、その放送時間のプログラムデータを用いて、上記データベース１０から、その時の放送楽曲の楽曲データを検索可能にすることができる。

上述のように、フレーズから曲名を検索できるシステムは知られており、その曲名の把握により、当該楽曲の楽曲データがインターネット６経由で画像記録装置（デジタルカメラ）２に送られる。その後、制御手段１８がその楽曲データと撮影データである画像情報データとを組み合わせて、電子アルバム２８を作成する。なお、電子アルバム２８の作成方法としては、上述のように取得可能な楽曲データ及び画像情報データを用いて、上記画像記録装置（デジタルカメラ）２とは別の機器を使用して電子アルバム２８を作成してもよい。また、基地局８内のメモリ２６にアルバムを作成しても、もちろんよい。

なお、ドライブ時等の自動車を利用する場合においては、図２（ａ）に示すように自動車３０の外部にカメラ３２ａを取り付けて、上記自動車３０の周囲の風景を撮影してもよい。また、図２（ｂ）のように自動車３０内の様子を撮影可能なカメラ３２ｂを設置して車内の風景を撮影してもよい。ここで、上記カメラ３２ａ及びカメラ３２ｂは、図１における第２撮影手段３２であると想定している。よって、上記カメラ３２ａ及びカメラ３２ｂの取得した情報は、図１に示すように通信手段２４を介して記録手段１４に入力できるようにしてもよい。つまり、画像記録装置（デジタルカメラ）２においては、通信手段２４を介して、第２撮影手段３２による画像情報データを、記録手段１４に入力する事となる。

また、自動車３０内にはナビゲーションシステム用表示手段３４を有していると想定している。よって、上記ナビゲーションシステム用表示手段３４により、カメラ３２ａのカメラから取得した画像を確認することができるようになっている。また、自動車内の音声再生手段（カーステレオ等）４の音声はスピーカー２２により再生されて、画像記録装置（デジタルカメラ）２内の、マイクロフォン（図示せず）を有する録音手段１２により、記録手段１４に記録される。

以下、本発明の第１実施形態に係る画像記録装置（デジタルカメラ）２の動作について、図３（ａ）のフローチャートを用いて説明する。

画像記録装置（デジタルカメラ）２の撮影動作は、制御手段１８により図３（ａ）のような制御でなされる。Ｓ１において、画像記録装置（デジタルカメラ）２の有する時計２０をスタートさせる。なお、時計２０は常時動いていてもよいが、説明を分かりやすくする為にステップに取り入れた。上記時計により、所定時間の経過が判定可能となる。よって、これを用いてＳ２において、所定時間の経過を判定する。ある一定の時間が経過するごとに（例えば５分おき、１０分おきに）、マイクによる所定時間の録音を行う（Ｓ３）。

さらに、Ｓ４にて、その場に音楽が流れているか否かを判定する。ここで、音楽が流れていると判定した場合はＹ分岐してＳ５へ進む。続くＳ５において、特徴的なフレーズの有無が判断される。特徴的なフレーズが検出されれば、Ｓ５をＹ分岐してＳ６へ進む。一方、Ｓ４にて音楽が流れていないと判定した場合は、Ｎ分岐して再びＳ２へ進み、所定時間経過の判定ステップからやり直す。Ｓ６においては、その時刻と音楽情報データ（特徴的なフレーズ等）を対応付けて記録する。このステップにより、図３（ｂ）に示されるような、時刻情報の付加された音声情報データが形成される。一方、特徴的なフレーズがない場合には、Ｓ５をＳ７にＮ分岐して、録音時間を延長する。続くＳ８では、撮影指示が為されたか否かを判断するステップであり、撮影指示が為された場合は、Ｓ１０にＹ分岐する。一方、撮影指示が為されない場合は、Ｓ７での録音時間の延長に伴って所望時間録音を続け、再びＳ５へ進む。

なお、撮影を行う場合は、Ｓ２をＮ分岐して、撮影を行うか否かを判断するＳ９へ進み、さらにＳ１０にＹ分岐する。Ｓ１０において撮影を行った後は、続くＳ１１において時刻と画像情報データとを対応付けて記録する。このステップにより、図３（ｃ）に示されるような、時刻情報の付加された画像情報データが形成される。このＳ１１後は、Ｓ２へ進み、再び所定時間経過の判定ステップから始める。また、Ｓ９をＮ分岐する場合（撮影を行わない場合）も、Ｓ２へ進み、再び所定時間経過の判定ステップから始める。

上述のように撮影された画像は、図４乃至図６の一連のフローチャートに示される制御により電子アルバム化される。

まず、Ｓ１２は、図３（ｃ）のような時刻情報の付加された、記録手段１４に記録されている画像情報データから、時刻を検出するステップである（制御手段１８により行われる）。続くＳ１３において、Ｓ１２において検出された時刻の前後の時間に記録された音声情報データを、通信手段２４がインターネット６を介して基地局８に送信する。基地局８は、受信した音声情報データを基にデータベース１０を検索し（Ｓ１４）、受信した音声情報データに対応するフレーズを持つ音楽の楽曲データの有無を判定する（Ｓ１５）。

Ｓ１５において、基地局８により、対応するフレーズを持つ楽曲データが有ると判定される場合、Ｓ１５をＳ１６にＹ分岐する。Ｓ１６においては、基地局８が、上述の対応するフレーズを持つ楽曲データを通信手段２４へ送信し、更に制御手段１８が電子アルバム２８上にて上記楽曲データと画像情報データとを関連付ける。続くＳ１７において、制御手段１８がアルバム作成の為の次の画像の画像情報データを選択し（Ｓ１７）、Ｓ１８において、次画像情報データの有無を判断する。ここで、次画像情報データが無いと判断された場合はＳ５０にＮ分岐し、制御手段１８が、メディア等への書き込みを行うステップであるアルバム化を実行して終了する。しかし、次画像情報データが有る場合はＳ６０へ進む。

一方、Ｓ１５にて対応する楽曲データが無いと判断される場合、次画像の画像情報データの選択へと移る（Ｓ２０）。続くＳ２１は、制御手段１８による次画像情報データの有無の判断であり、次画像情報データが有る場合はＹ分岐してＳ３１へ進む（無いと判断される場合は、後述）。Ｓ３１においては、上記選択した次画像情報データより撮影時を表す時刻情報を検出する（制御手段１８により行われる）。続くＳ３２において、撮影時刻の前後の時間に記録された音声情報データを通信手段２４によりインターネット６を介して基地局８へ送信する。これを受けて、基地局８は、データベース１０を検索し（Ｓ３３）、対応するフレーズを持つ音楽の楽曲データの有無を判定する（Ｓ３４）。

Ｓ３４にて、対応するフレーズを持つ楽曲データが有ると、基地局８が判定した場合、Ｙ分岐してＳ３５へ進む。Ｓ３５では、Ｓ３４にて検索された対応するフレーズを持つ楽曲の楽曲データを、画像記録装置２に送信し、画像記録装置２内の制御手段１８により、その楽曲データと対応する画像情報データとの関連付けを行う（Ｓ３５）。この際に、先にＳ１５にて関連付けできなかった画像情報データも同じ楽曲データと関連付けしてしまってもよい。その後、Ｓ３６の次画像の画像情報データの選択に移る。続くＳ３７において、制御手段１８が次画像情報データの有無の判断をする。次画像情報データが無い場合は、Ｓ３７で次画像情報データ無しと判断されＳ５０へＮ分岐して、制御手段１８がアルバム化を実行し、終了する。しかし、次画像情報データがある場合は、Ｙ分岐してＳ６０へと進む（図５のフローチャートへ進む）。

一方、Ｓ３４にて対応するフレーズを持つ楽曲データが見つからなかった場合は、Ｎ分岐してＳ４１へ進む。Ｓ４１において、アルバム作成の為の次の画像の画像情報データを選択する。続くＳ４２において、制御手段１８が次画像情報データの有無を判断する。このＳ４２において次画像情報データが無いと判断された場合（Ｎ分岐）、及び上述のＳ２１において次画像情報データが無いと判断された場合（Ｎ分岐）は、Ｓ２２へ進んで、制御手段１８が対応音楽無しの画像情報データとデフォルト楽曲の楽曲データとの関連付けを行ってアルバム化する。なお、デフォルト楽曲データとしては、画像記録装置（デジタルカメラ）２の記録手段１４に記録してあるものでも、基地局８及びインターネット６を介してデータベース１０から送信されるものでもよい。一方、Ｓ４２において次画像情報データが有ると判断された場合は、再びＳ３１へ進み、上述の画像情報データからの時刻検出ステップから、楽曲データと画像情報データとの関連付けステップまでの一連のステップを再び行う。

上述のように楽曲データと画像情報データとが関連付けされたあとも、さらに次の画像の画像情報データがある場合は、Ｓ１８，Ｓ３７をＳ６０に分岐する（図５のフローチャートへ進む）。

まず、Ｓ６０においては、制御手段１８が画像情報データより撮影時を表す時刻情報を検出する。続くＳ６１において、撮影時刻の前後の時間に記録された音声情報データを、通信手段２４がインターネット６を介して基地局８へ送信する。この音声情報データを受信して、基地局８はデータベース１０を検索し（Ｓ６２）、対応するフレーズを持つ楽曲の楽曲データの有無を判定する（Ｓ６３）。つまり、Ｓ６０〜Ｓ６３までのステップは、Ｓ１２〜Ｓ１５，Ｓ３１〜Ｓ３４のステップと同様の動作内容のステップであると言える。

Ｓ６３において、基地局８により、対応するフレーズを持つ楽曲の楽曲データが無いと判断された場合は、Ｎ分岐してＳ７１へ進み、制御手段１８の制御により、既に検索されている楽曲データと該画像情報データとを関連付けてしまう。このような関連付けは、Ｓ７２〜Ｓ７３により、全ての画像情報データが楽曲データと関連付けされるまで繰り返される。

しかしながら、同じ楽曲データにあまりにも多くの画像情報データが関連付けられた場合は、図７（ａ）のように、１つの楽曲の中で頻繁に画像を切り換え再生する電子アルバムとなってしまう。そのような再生は、快適な鑑賞にはあまり適さない。よって、Ｓ７４（Ｓ７４乃至Ｓ７８は、図６のフローチャート参照）において関連付けられた楽曲の楽曲データの長さに対する画像情報データ数が適切か否かの判定を行う。この判定は、関連付けられた楽曲データの長さと画像情報データ数との比率により、制御手段１８が判定する。ここでは、再生する楽曲データの長さを画像情報データ数で割り、それにより求まった値と所定時間との比率により判定する。

このＳ７４において、Ｙ分岐する場合は、楽曲データの長さに対する画像情報データ数が適切である場合なので、Ｓ７８へ進んで、通常の長さのバージョンの楽曲の楽曲データと画像情報データとを関連付ける。

このようなＳ７４での判定により、Ｓ７４においてＮ分岐する場合はＳ７５へ進み、制御手段１８が、関連付けられた楽曲データの長さに対する画像情報データ数が多いか否かの判定を行う。ここで、Ｎ分岐する場合は、楽曲データの長さに対する画像情報データ数が少ない場合であるので、Ｓ７６へ進んで、ショートバージョンの楽曲の楽曲データと画像情報データとを関連付ける。逆に、Ｓ７５においてＹ分岐する場合は、楽曲データの長さに対する画像情報データ数が多い場合であるので、Ｓ７７へ進んで、ロングバージョンの楽曲の楽曲データと画像情報データとを関連付ける。ここで、データベース１０内の楽曲の楽曲データにはそれぞれ、通常の長さの楽曲の楽曲データ、ショートバージョンの楽曲の楽曲データ及びロングバージョンの楽曲の楽曲データが用意されている。なお、上述の基地局８による画像記録装置２への楽曲データ送信の際には、この３種類の長さの楽曲の楽曲データを全て送信する。また、上述の基地局８による画像記録装置２への楽曲データ送信の際には、通常の長さの楽曲の楽曲データのみを送信し、Ｓ７４のステップでの判定に応じて必要な長さのバージョンの楽曲の楽曲データを基地局８に要求し、新たに送信してもらう動作制御を行っても勿論よい。なお、楽曲の長さのバリエーションは、上述の３種に限らず更に多く用意しておいても、もちろんよい。

Ｓ７６乃至Ｓ７８のいずれかにおいて、楽曲データと画像情報データとの関連付けを行ったらＳ５０（図４のフローチャート）へと進む。Ｓ５０において、制御手段１８によるアルバム化を実行して終了する。

なお、再生楽曲の楽曲データの長さに対して画像情報データ数が多いと判断される場合は、上述のような方法ではなく、図７（ｂ）に示すように、該楽曲の第１楽章だけでなく、第２楽章をも再生することにより、電子アルバム鑑賞時にあまりに頻繁に再生画像の切り換えが行われないようにしても、もちろんよい。

一方、再生楽曲の楽曲データの長さに比べて画像情報データ数が少ない場合は、図７（ｃ）に示すように、同じ楽曲の中で何度も同じ画像の再生を繰り返すようにする事により、快適な画像切り換えタイミングにすることができる。

以下、上記Ｓ６３において、対応するフレーズを持つ楽曲の楽曲データが有ると、基地局８により判定される場合を説明する。この場合、Ｓ６３をＳ６４にＹ分岐する。Ｓ６４では、Ｓ６３にて検索された対応するフレーズを持つ楽曲の楽曲データを、画像記録装置２に送信する。Ｓ６５は、Ｓ６３において検出された対応楽曲データが、前画像の画像情報データにおける対応楽曲データと同じ楽曲データであるかを、制御手段１８が判断するステップである。Ｓ６５において、同じ楽曲データだと判断された場合はＹ分岐してＳ７１へ進む。なお、Ｓ７１以下の動作フローについては上述の通りである。

一方、Ｓ６５において、違う楽曲データだと判断された場合は、Ｓ６６へ進む。

Ｓ６６においては、制御手段１８が、前画像の画像情報データと次画像の画像情報データの撮影時刻の差を判断する。ここでは、前画像情報データと次画像情報データの撮影した日が異なる場合や、同日の撮影であっても撮影の時刻がかなり離れた場合は、Ｙ分岐してＳ６８へ進む。Ｓ６８では、前の楽曲データと次の楽曲データを適当なタイミングでフェードイン・フェードアウトさせる。続くＳ６９にて、新しい楽曲の楽曲データと次の画像の画像情報データとの関連付けを行う。

一方、Ｓ６６において、前画像情報データと次画像情報データとの撮影時刻があまり変わらないと判断された場合は、前画像の画像情報データと関連付けした楽曲データと、次画像の画像情報データとを制御手段１８が関連付けてしまう。これは、不自然な音楽切り換えになって、鑑賞のさまたげになる事を防止するための配慮である。なお、このような場合であっても、該楽曲がちょうど途切れるような場合は、それを考慮して、次の楽曲と関連付けしても、もちろんよい。

制御手段１８による、画像情報データと楽曲データとの関連付けを上記Ｓ６７又はＳ６９で終えると、Ｓ７０へ進む。Ｓ７０は、次画像の画像情報データの選択のステップである。このＳ７０からＳ７３へ進み、Ｓ７３において次画像情報データの有無を、制御手段１８が判断する。Ｓ７３において、次画像情報データが無いと判断された場合はＮ分岐してＳ７４へ進む。Ｓ７４以降のステップの内容は、上述の通りである。一方、Ｓ７３において次画像情報データが有ると判断された場合は、Ｙ分岐してＳ６０へ進み、制御手段１８による画像情報データと楽曲データとの関連付けのステップを再び実行する。

なお、上述の図４乃至図６のフローチャートは、画像記録装置２側で電子アルバム２８を作成する場合の動作制御を示しているが、画像記録装置２内の記録手段１４に格納されている画像情報データを基地局８がインターネット６を介して取得し、基地局８においてインターネット６を介して電子アルバム２８の作成を行う動作制御を行っても勿論よい。

以上説明したように、本発明の第１実施形態によれば、画像撮影時に流れていた音楽、例えばパーティーやドライブでの撮影の際に流れていた音楽、を高音質で再生しながら画像を再生する電子アルバムを作成することができるので、撮影画像の再生を思い出深く鑑賞することができ、撮影当時を回想することができるようになる。これにより、例えばパーティーやドライブなど音楽が流れている状況での撮影画像を、その音楽と組み合わせ、しかも高音質で再生するため、撮影時の雰囲気が良く伝わる画像再生を行うことができる。

また、対応する楽曲が無い画像についても、撮影時間的に隣接する画像と関連付けした楽曲を用いることにより、鑑賞の流れを中断することが無いように電子アルバムを鑑賞することができる。

さらに、再生する楽曲の長さに比して、対応する画像数が多い場合には、フローチャートで示したように様々な長さにアレンジした楽曲を用いたり、該楽曲の第２楽章またはそれに相当する部分まで使用することにより、適切な画像切り替えが行える。逆に、再生する楽曲の長さに比して、対応する画像数が少ない場合には、対応画像を繰りかえし再生する等の工夫により、適切な画像切り替えが行える。

上述のような画像再生が楽しめる電子アルバムを、特別な技術を必要とせずに、例えば自宅でインターネットに画像記録装置を接続するだけで作成することが可能となる。

［第２実施形態］
次に、本発明の第２実施形態に係る画像記録装置及び電子アルバム作成システムについて説明する。本実施形態における画像記録装置及び電子アルバム作成システムは、上記第１実施形態に比べ、より単純な構成で本発明の目的を達成可能とする。なお、上記第１実施形態に係る画像記録装置及び電子アルバム作成システムと同様の構成部分については、図示及び説明は省略する。

以下、図面を用いて本実施形態に係る画像記録装置及び電子アルバム作成システムについて説明する。

図８（ａ）に示すように、本実施形態においては、画像記録装置（デジタルカメラ）２と音声再生手段４に、それぞれ時計２ａ，４ａを具備させる。

画像記録装置（デジタルカメラ）２については、同図に示すようにスイッチ２ｂを設ける。これにより、撮影時であってもレリーズ動作のスイッチ操作（スイッチ２ｂの操作）に応じて、時計２ａの出力により撮影時刻を記録できるようになっている。

また、音声再生手段４については、同図に示すようにスイッチ４ｂを設け、その操作により、音楽再生をした時刻及び再生した楽曲を特定するための情報を音声情報データとして記録できるようにする。なお、音声再生手段４としては、例えばＨＤＤプレーヤーのように録音再生共にできるものを用いてもよいし、ＣＤやＤＶＤ等の音源メディアの再生専用機であっても曲目情報や時刻情報のみを音声情報データとして記録できるようなメモリを備えた装置であればよい。

本実施形態における構成としては、図８（ｂ）に示すように、ＤＶＤレコーダー３６を制御可能である画像記録装置２内の制御手段１８が、画像記録装置（デジタルカメラ）２及び音声再生手段４のそれぞれの時刻情報を参照しつつ、電子アルバムの作成を行うシステムとなっている。ここでは、本実施形態の理解を容易にする為に、同図における制御手段１８を画像記録装置２とは別体として描いている。なお、同図に示すような、画像記録装置２と制御手段１８とを別体とする構成を採っても勿論よい。その場合、制御手段１８は、パーソナルコンピューター等で実現される。また、同図に示すように、制御手段１８には操作のためのスイッチ１８ａが設けられている。本実施形態においては、上述の構成のシステムを図９に示すフローチャートのように動作制御することにより、アルバム作成を行う。以下、図９のフローチャートを用いて説明する。

まず、Ｓ８１において、画像記録装置（デジタルカメラ）２に撮影画像に対応して記録されている時刻情報を用いて音声再生手段４を検索し、撮影時に再生されていた楽曲の音声情報データを検出する。

続くＳ８２は、画像撮影時に再生されていたＣＤやＤＶＤ等の音源メディアが音声再生手段４にセッティングされているか否かを判断するステップである。上記メディアが音声再生手段４にセッティングされていれば、Ｙ分岐してＳ８６へ進む。Ｓ８６においては、所定のタイミングで画像再生が行われるように、撮影画像の画像情報データと上記検出した音声情報に対応する上記音源メディア上の楽曲データとを関連付けし、アルバム化する。一方、上記メディアが音声再生手段４にセッティングされていない場合はＳ８３へ進む。

Ｓ８３では、撮影画像に対応する音源メディアがセッティングされていない旨の警告が為される。該警告の方法としては、画像記録装置２の具備する表示手段（図示せず）を用いての警告表示、または音声再生手段４の具備するスピーカー２２を用いての警告音等により行う。

続くＳ８４では、音源メディアが音声再生手段４にセッティングされたか否かを判断する。ここで、Ｓ８３で為される警告にも関わらずユーザーが該音源メディアのセットが為されていない場合は、Ｓ８４をＮ分岐してＳ８５へ進む。Ｓ８５では、インターネット６から、上記検出した音声情報データに対応する楽曲の楽曲データをダウンロードし、それをＳ８６で画像情報データと関連付けする。

なお、画像記録装置（デジタルカメラ）２と記録手段１４とを、容易に分離可能な構造とし、さらに音声再生手段４（カーステレオ）には、上記記録手段１４を挿入することのできるスロットを具備させる場合、以下に示すように、より簡単な電子アルバム作りができるシステムが可能となる。この場合は、ＣＤやＤＶＤ等の音源メディア３８に収録されている音楽を、音声再生手段４が再生しつつ、記録手段１４内の撮影画像を、ナビゲーションシステム用表示手段３４に表示するシステムとする。また、このシステムを採る場合は、図１１に示すフローチャートに従った動作制御を行う。以下、図１１のフローチャートを用いて説明する。

まず、撮影が終わった後の記録手段１４を画像記録装置（デジタルカメラ）２から取り出して音声再生手段（カーステレオ）４にセッティングする。次に、記録手段１４内の撮影画像をナビゲーションシステム用表示手段３４に順次再生するようにする（Ｓ９１）。それと共に、音声再生手段（カーステレオ）４内のメディア３８の音楽を再生する（Ｓ９２）。

続くＳ９３において、その音楽の楽曲データと撮影画像の画像情報データとの関連付けの可否を、ユーザーのスイッチ１８ａによる操作により、制御手段１８が判断する。その関連付けでよいと判断した場合は、ユーザーによるスイッチ１８ａの操作で、Ｓ９３において楽曲データと画像情報データとを実際に関連付けし、記録手段１４に記録していく（Ｓ９３をＳ９４へＹ分岐）。

一方、Ｓ９３において、その関連付けが不適当であると判断した場合は、Ｓ９３をＮ分岐してＳ９５の音楽の切り換え選択へ進む。ここで、ユーザーによる所定のスイッチ操作により音楽切り替えが選択された場合は、Ｓ９６へ進み音楽の切り替えを行う。なお、音楽の切り替え方法は、メディア３８の交換あるいは当該メディア３８のトラックの切り替えにより行う。

以上説明したように、本発明の第２実施形態によれば、複雑な検索を必要としない極めてシンプルな構成で、撮影画像と対応する音楽とを関連付けた電子アルバムの作成が可能となり、あとで撮影画像を思い出深く鑑賞することができるようになる。さらに、図１０に示した構成を採り、図１１に示したフローチャートによる動作制御を行えば、例えば旅行の帰りにカメラの記録用メディアをカーステレオに入れておくだけで、画像と関連深い音楽とが関連付けられた電子アルバムが簡単に作成できる。

また、上記画像記録装置（デジタルカメラ）２と音声再生手段４とを一体化させて、図８（ａ）に破線で囲んで示すように、一つの画像記録装置４０としても良い。この場合には、画像記録装置４０は、図１２に示すフローチャートに示すように動作する。

まず、Ｓ１０１において計時をスタートする。次に、Ｓ１０２において音楽再生をスタートする。なお、画像の撮影はＳ１０２で音楽再生が開始された後に行われるので、Ｓ１０１において行われる計時は、時刻のみの通常の計時だけでなく、再生音楽の演奏時間の計時もスタートさせる。

続くＳ１０３では、撮影するか否かを判断する。撮影を行う場合は、必ずＳ１０３をＳ１０４に分岐して、撮影時の時刻及び撮影画像を記録する。また、Ｓ１０５ではその時再生されている音楽ソフトの内容（例えば、ＣＤのトラックナンバーや、該トラックの演奏時間等）を音声情報データとして合わせて記録するようにする。また、Ｓ１０５での記録の際に該楽曲のフレーズの一部も記録しておけば、実際の電子アルバム作成時に、万が一音源メディアが取り替えられてしまった場合であっても、警告を行って、ユーザーに注意を促すことができる。

一方、撮影が為されない場合には、Ｓ１０３をＮ分岐してＳ１０７へ進む。Ｓ１０７は、曲目変更操作を行うか否かのステップである。ここで、Ｙ分岐すればＳ１０８へ進み、ユーザー好みの楽曲へ曲目変更を行うことができる。

このように画像記録装置２と音声再生手段４とを１つにまとめた装置である画像記録装置４０を用いることで、図１３に示すようにカメラマンが自分の好きな曲を聴きながら、撮影を楽しむことができる。従って、ユーザー好みの作品イメージを反映した電子アルバムを作成することができる。この結果は、簡単に電子アルバム化されるので後で、モデルと一緒に画像と音楽を合わせた電子アルバムを鑑賞し、イメージを合わせてさらにすぐれた作品作りにつなげる事が可能となる。

また、このような画像記録装置４０によって、ユーザーは音楽によって触発され、創造性に満ちた撮影を楽しむことができる。

［第３実施形態］
次に、本発明の第３実施形態に係る画像記録装置及び電子アルバム作成システムについて説明する。なお、前述の第１実施形態に係る画像記録装置及び電子アルバム作成システムと同様の構成部分については、図示及び説明は省略する。以下、図面を用いて本実施形態に係る画像記録装置、及び電子アルバム作成システムについて説明する。

例えば、カーステレオでラジオの音楽を聞くような状況、あるいは、有線放送の音楽を流していた状況では、もとの音源データを検索する事が可能であるので、それを利用した楽曲データを作成することが可能である。

例えば、図１４に示すように、旅行等の時に自動車３０内に配された音声再生手段（カーステレオ）４で聞いたラジオ等の放送局８ａからの音楽を、以下のように再度音源として利用する。

即ち、ユーザーがドライブ中、ラジオ等の放送局８ａから放送されている音楽の楽曲データを、受信手段４２を介してホームサーバー４４に記録しておく。

そして、ドライブから帰宅後、そのドライブ中に撮影した画像記録装置（デジタルカメラ）２の記録手段１４内の画像情報データに付属している時刻情報を、アルバム作成制御手段１８ｃに出力する。なお、出力の方法としては、アルバム作成制御手段１８ｃが記録手段１４を接続するスロットを有している場合は、それを利用する形で出力してもよい。ここで、上記アルバム作成制御手段１８ｃは、上記ホームサーバー４４と受信手段４２を介しての放送局８ａとの通信、及び楽曲データと画像情報データとの関連付け等のアルバム作成に関する動作及び制御を行うものである。なお、図１４においては、アルバム作成制御手段１８ｃは、画像記録装置２の外部に設けられているが、画像記録装置(デジタルカメラ)の制御手段にその機能を担わせても勿論よい。

次に、上記ホームサーバー４４に記録してあるラジオ受信結果である楽曲データを、アルバム作成制御手段１８ｃが検索する。ここで、ドライブ時等の撮影時刻に流されていた楽曲データが検出された場合は、該楽曲データをアルバム作成制御手段１８ｃに送信させ、それに対応する画像記録装置（デジタルカメラ）２の記録手段１４の画像情報データと関連付けしてアルバム化する。

なお、ホームサーバー４４を持たずとも、上述のようなアルバム化は可能である。そのような場合、図１５に示すようにラジオ等の放送局８ａにサーバー４５を具備させる。そして、音声再生手段（カーステレオ）４で聞いた音楽を画像記録装置（デジタルカメラ）２の記録手段１４からアルバム作成制御手段１８ｃが判定した検索用データに基づいて、ラジオ等の放送局８ａから有線又はインターネット６経由でドライブ等の画像撮影時間に流されていた音楽の楽曲データを配信する。このようにして取得した音楽の楽曲データと撮影画像の画像情報データとを関連付けすることにより、アルバム化することとなる。

図１６は、本実施形態に係る電子アルバム作成システムの制御フローチャート例である。

まず、Ｓ１１０は上記アルバム作成制御手段１８ｃを介してユーザーがアルバムを作る為の画像を指定するステップである。続くＳ１１１において、その画像の画像情報データより撮影日時を検出する。さらにＳ１１２において、その撮影日時に対応する放送内容を一覧表示する。なお、放送内容の一覧表示は放送局から送ってもらってもよいし、ホームサーバー４４が有る場合にはそのホームサーバー内のデータより検索してもよい。

続くＳ１１３は、ユーザーが選択したデータを放送局に対して配信要求を行うステップである（ホームサーバー内のデータを読み出すのみでもよい）。Ｓ１１４では、送信されてきた楽曲データをもとに画像再生の際のＢＧＭを作成し（Ｓ１１４）、更に画像情報データを関連付けて（Ｓ１１５）、電子アルバム作成が終了する。なお、該電子アルバムは、通常、前述の第１実施形態（図１の構成参照）で示したように画像記録装置(デジタルカメラ)２の制御手段１８に接続されたアルバム２８内に作成されるが、画像記録装置(デジタルカメラ)２内の記録手段１４内に作成しても勿論よい。

なお、本実施形態により作成した電子アルバム２８の鑑賞方法として、以下の構成を採る再生鑑賞システムが考えられる。まず、図１７に示すようにステレオスピーカー２２ａ、送信手段４６、プロジェクタ４８、スクリーン５０及び電子アルバム２８とで再生システムを構成する。ここで、送信手段４６は、電子アルバム２８の楽曲データをステレオスピーカー２２ａに送信するためのものである。

同図に示すように、撮影画像の画像データはプロジェクタ４８によりスクリーン５０へ投影され、それに関連付けられた楽曲データは送信手段４６により電子アルバム２８からステレオスピーカー２２ａへ送信され、ステレオスピーカー２２ａにより再生される。

以上説明したように、本発明の第３実施形態によれば、放送局の持つ豊富な音源を利用し、カーステレオで楽しんだ後も、アルバム作成時に同様の音楽を利用でき、誰もが容易に音楽を付した電子アルバムを作ることができる。しかも、高音質の音楽を用いることができるので、高品質の電子アルバム作成が可能となる。つまり、画像再生時に最適で高音質な音楽を付加することができるので、画像再生時に撮影時の思い出を追体験することによって、より深い鑑賞ができるようになる。

なお、５．１ｃｈ対応の音楽再生などは、ビデオカメラによる録音によるものでは不可能だったが、本実施形態によれば上述の再生鑑賞システムにより容易に実施可能となる。

また、再生鑑賞システムを上述のように構成することにより、より高品質な電子アルバム鑑賞が可能となる。

以上、本発明の実施形態について説明したが、本発明は上述した実施形態以外にも、本発明の要旨を逸脱しない範囲で種々の変形実施が可能である。

本発明の第１実施形態に係る画像記録装置及び電子アルバム作成システムの構成を示す図である。 （ａ）は、自動車の外部にカメラを取り付けて、上記自動車の周囲の風景を撮影している様子を示す図である。（ｂ）は、自動車内の様子を撮影可能なカメラを設置して車内の風景を撮影している様子を示す図である。 （ａ）は、画像記録装置（デジタルカメラ）を制御するフローチャート示す図である。（ｂ）は、音声情報データの構成を示す図である。（ｃ）は、画像情報データの構成を示す図である。 撮影された画像を電子アルバム化する動作を説明するための一連のフローチャートの第１の部分を示す図である。 撮影された画像を電子アルバム化する動作を説明するための一連のフローチャートの第２の部分を示す図である。 撮影された画像を電子アルバム化する動作を説明するための一連のフローチャートの第３の部分を示す図である。 再生楽曲の楽曲データ長さと撮影画像の画像情報データの数との比率によって、様々な再生方法を示した図である。 （ａ）は、本発明の第２実施形態における画像記録装置と音声再生手段を示す図である。（ｂ）は、第２実施形態に係る電子アルバム作成システムの構成を示す図である。 第２実施形態に係る電子アルバム作成システムの動作制御を示すフローチャートを示す図である。 画像記録装置（デジタルカメラ）の記録手段を挿入することのできるスロットを、カーステレオに具備させた場合の電子アルバム作成システムの構成を表す図である。 図１０に示す電子アルバム作成システムの動作制御を示すフローチャートである。 第２実施形態の変形例に係る画像記録装置の動作制御を表すフローチャートである。 画像記録装置を用いて、ユーザーが自分の好きな曲を聴きながら撮影をしている様子を表す図である。 本発明の第３実施形態に係る電子アルバム作成システムの構成を示す図である。 第３実施形態の変形例に係る電子アルバム作成システムの構成を示す図である。 図１５の電子アルバム作成システムの制御フローチャート例である。 電子アルバムの再生鑑賞システムの構成を表した図である。

符号の説明

１…アルバム作成制御手段、 ２…画像記録装置、 ２ｂ…スイッチ、 ４…音声再生手段、 ４ａ…スイッチ、 ４ｂ…アンテナ、 ６…インターネット、 ８…基地局、 ８ａ…ラジオ放送局、 ８ｂ…サーバー、 １０…データベース、 １２…録音手段、 １４…記録手段、 １６…撮影手段、 １８…制御手段、 １８ａ…スイッチ、 １８ｃ…アルバム作成制御手段、 ２２…スピーカー、 ２２ａ…ステレオスピーカー、 ２３…再生プレーヤー、 ２４…通信手段、 ２６…メモリ、 ２８…電子アルバム、 ３０…自動車、 ３２…第２撮影手段、 ３２ａ，３２ｂ…カメラ、 ３４…ナビゲーションシステム用表示手段、 ３６…ＤＶＤレコーダー、 ３８…メディア、 ４０…画像記録装置、 ４２…受信手段、 ４４…ホームサーバー、 ４５…サーバー ４６…送信手段、 ４８…プロジェクタ、 ５０…スクリーン。

Claims (12)

1. 被写体を撮影して画像情報データを出力する撮影手段と、上記撮影手段から出力された画像情報データを記録する記録手段とを持つ画像記録装置であって、
   上記撮影手段による撮影時及びその前後の時間において、該画像記録装置の周囲にある再生装置から再生されている音声を検出し、それに対応する音声情報データを出力する音声情報データ検出手段と、
   上記音声情報データ検出手段から出力された音声情報データを上記画像データに対応付けする制御手段と、
   を具備することを特徴とする画像記録装置。
2. 上記再生装置は、カーステレオであることを特徴とする請求項１に記載の画像記録装置。
3. 上記記録手段は、上記画像情報データとともに上記音声情報データを記録することを特徴とする請求項１に記載の画像記録装置。
4. 時計機能を有する計時手段を更に具備し、
   上記記録手段は、上記計時手段の出力により、上記画像情報データ及び音声情報データの取得時刻を記録することを特徴とする請求項３に記載の画像記録装置。
5. 上記制御手段は、上記記録手段に記録された上記画像情報データ及び音声情報データの取得時刻に基づいて、上記画像情報データと音声情報データとの対応付けを行うことを特徴とする請求項４に記載の画像記録装置。
6. 楽曲データを記録する第１の記録手段と、
   上記第１の記録手段に記録された楽曲データを音声として再生する再生手段と、
   所定の撮影指示操作に応じて被写体を撮影して画像情報データを出力する撮影手段と、
   上記撮影手段から出力された画像情報データを記録する第２の記録手段と、
   上記撮影手段への撮影指示操作が行なわれた時刻及びその前後の時間に上記再生手段が再生している音声を検出して、その音声に相当する音声情報データを上記撮影手段からの画像情報データと対応付けて上記第２の記録手段に記録する制御を行う制御手段と、
   を具備することを特徴とする画像記録装置。
7. 画像記録装置で撮影した日時を参照して、その日時に放送された音楽に相当する楽曲データを検索し、上記画像記録装置で撮影された画像情報データと上記検索した楽曲データとを関連付けた電子アルバムを作成することを特徴とする電子アルバム作成システム。
8. 請求項１に記載の画像記録装置と、
   上記画像記録装置とインターネットを介して通信可能であり、楽曲データが格納されているデータベースを有する基地局と、
   上記インターネットを介した上記基地局との通信により、上記画像記録装置の上記記録手段に記録された上記画像情報データに対応付けられた音声情報データに関連する楽曲データをダウンロードし、上記記録手段に記録された画像情報データと上記ダウンロードした楽曲データとを関連付けて記録した電子アルバムを作成するアルバム作成手段と、
   を具備することを特徴とする電子アルバム作成システム。
9. 上記画像記録装置の上記制御手段は、上記電子アルバム作成手段の機能を備えることを特徴とする請求項８に記載の電子アルバム作成システム。
10. 画像撮影時及びその前後の時間の周囲の音声を検出する音声検出手段と、画像撮影動作及び上記音声検出手段の音声検出動作の制御を行う制御手段とを有する画像記録装置と、
    放送局から無線又は有線によって配信された楽曲データを受信する受信手段と、
    上記受信手段により取得した楽曲データを記録しておくサーバーと、
    所望の楽曲データを上記サーバーから検索及び取得すると共に、その取得した楽曲データと上記画像記録装置の撮影動作によって得られた画像情報データとを関連付けて記録した電子アルバムを作成するアルバム作成制御手段と、
    を具備し、
    上記アルバム作成制御手段は、上記画像記録装置の音声検出手段によって検出した音声に関連する楽曲データを上記サーバーから検索して取得することを特徴とする電子アルバム作成システム。
11. 請求項６に記載の画像記録装置と、
    上記画像記録装置の上記第２の記録手段に記録された上記画像情報データに対応付けられた音声情報データに関連する上記第１の記録手段に記録されている楽曲データを、上記第２の記録手段に記録されている画像情報データと関連付けて記録した電子アルバムを作成するアルバム作成手段と、
    を具備することを特徴とする電子アルバム作成システム。
12. 上記第１の記録手段は、当該画像記録装置に対して着脱自在な、楽曲データを記録した音源メディアを含み、
    上記電子アルバム作成手段は、上記撮影手段への撮影指示操作が行なわれた時刻及びその前後の時間に装着されていた音源メディアが上記画像記録装置に装着されているか否かを判定する音源メディア特定手段を含むことを特徴とする請求項１１に記載の電子アルバム作成システム。

Images