JP2007202025A - 音楽画像送信装置、カメラ、送信制御方法 - Google Patents

Abstract

【課題】作成した音楽画像組み合わせデータを離れた場所にいる人にも簡単に提供できるような音楽画像送信装置やその方法を提供する。
【解決手段】ＰＣ１２により実現される画像音楽送信装置１は、音楽画像の組み合わせ再生に係るデータを外部の機器に送信する送信部２４と、この送信を制御する制御部２１を備え、この制御部２１は、前記音楽画像の組み合わせ再生に係るデータとして、再生される音楽を指定する音楽指定データ２２ｂ（曲目データ）と、この音楽に対応して再生される画像の画像データと、この音楽に対応して再生される画像の変化を制御する制御プログラム（再生プログラム）用の制御指示データ２２ａを、記憶部２２から読み出して、メールに添付して携帯電話に送信させる。
【選択図】図３

Description

この発明は、音楽と画像の組合再生の技術に関し、この組合わせデータの作成や組合わせデータの送信等を制御する技術に関する。

静止画像を鑑賞する際に単に画像だけを見ても飽きる事が多いので、画像に音楽を付けて再生させる提案は以前から色々から行われている。例えば本出願人も、撮影画像に音声情報を付随して記録させるカメラに付いて提案している（特許文献１）。

一方、最近は画像がほとんどデジタル化されているが、このようなデジタル画像は、ＰＣ（Personal Computer）を用いて、ユーザーが撮影した画像に音楽を付けて楽しむことが行われる。例えば、装飾画像と撮影画像との合成画像データや動画、音楽データを付加した撮影画像データを簡単にえるシステムが提案されている（特許文献２）。
特開平１０−１９７９４３号 特開２００２−３６８９２２号

ＰＣ等を使って音楽画像の組み合わせを作成すると、それを自分で楽しむだけでなく、遠隔にいる友人等にも送信したいという希望がでる。また近年画像や音楽を取り扱える携帯電話が普及しているので、この携帯電話でデータを受信して楽しめれば誰でも楽しむことができるので、受信装置としてはこの携帯電話を利用したい。一方、作成者がＰＣで画像データ、音楽データと、これらを組み合わせるデータの３つのデータを作成し、そしてこれを送信するのも手間がかかる作業である。そして、これを受信した者もそれらを組み合わせる作業をしなければならない。このように音楽と画像の組み合わせ再生を、当人だけでなく、友人等に送って手軽に楽しむには、まだまだ課題も多い。

上記課題に鑑み、本願発明は、作成した音楽画像組み合わせデータを離れた場所にいる人にも簡単に提供できるような音楽画像送信装置、カメラ及び送信制御方法等を提供することを目的とする。

前述の目的を達成するために、この発明の音楽画像再生装置は、音楽画像の組み合わせ再生に係るデータを外部の機器に送信する送信部と、この送信を制御する制御部を備え、前記制御部は、前記音楽画像の組み合わせ再生に係るデータとして、再生される音楽を指定する音楽指定データと、この音楽に対応して再生される画像の画像データと、この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを送信させることを特徴とする。

また、上記音楽画像再生装置では、前記制御部は、制御指示データとして、音楽のどのタイミングでどの画像を再生するかのデータ及び画像切換えパターンのデータを少なくとも送信させることを特徴とする。

また、上記音楽画像再生装置では、前記制御部は、音楽指定データとして、音楽を配信するプロバイダのデータおよび曲目データを少なくとも送信させることを特徴とする。

さらに、この発明のカメラは、被写体像を撮影する撮像部と、画像を表示する表示部と、音楽画像の組み合わせ再生に係る画像を撮影するテンプレート撮影のときに、このテンプレート撮影をするためのテンプレート表示として、記録メディアから比較用のサンプル画像を読み出して、このサンプル画像と撮像部によるモニタ画像を並列的に前記表示部に表示させる制御部と、を備えることを特徴とする。

また、この発明の送信制御方法は、音楽画像の組み合わせ再生に係るデータを外部に送信するための送信制御方法において、前記音楽画像の組み合わせ再生に係るデータとして、再生される音楽を指定する音楽指定データと、この音楽に対応して再生される画像の画像データと、この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを、送信させることを特徴とする。

この発明によれば、作成した音楽画像組み合わせデータを離れた場所にいる人にも簡単に提供できるような音楽画像送信装置、カメラおよび送信制御方法等を提供することができる。

以下本発明を実施するための最良の形態を図面を参照して説明する。

実施例１に係る音楽画像送信装置を図１から図９を用いて説明する。
例えば旅行に行った時には、その土地ゆかりの音楽を聴きながら画像を見るとかあるいはドライブの時に撮影した写真をそのときカーステレオでかかっていた音楽を聴きながら鑑賞すると、より雰囲気がもり上がる。こうした記憶はその時一緒にいた人とは共有しやすいし、また他の人にとっても単に映像だけを見せるよりもはるかに変化にとんだ情緒的な鑑賞が可能となる。しかし、こうしたＢＧＭは単に流れていればよいというものでなく、映像と合っていなければならず、同じ音楽と映像でもどのタイミングでどの映像に切換わるとかの指定も重要である。

そこで、音楽と画像を同時に再生する場合に、単に再生するだけでなく、このような要望を満足するような音楽と画像の再生方法についてをまず説明する。

図１は、画像の切換えパターンを説明する図である。再生される音楽に同期して画像をいろいろなパターンで切換えながら再生する。同図（Ａ）は、再生される音楽の楽譜の一部を示す図である。同図（Ｂ）は、音楽とともに切り換えられながら再生される画像の一例である。同図（Ｃ）は、音楽にあわせて切り換えられる画像のその切換えパターンを示す図である。

図１（Ａ）のような音楽が再生されるとする。そしてこの音楽の例えば２小節ごとのタイミングで再生される画像がＢ１、Ｂ２、Ｂ３、Ｂ４の順番に切換える。そして、この画像の切換えの仕方として、単に切換わるのではなく、画像Ｂ１から画像Ｂ２に切りかわるときには同図（Ｃ）Ｃ１で示すようにスライド式に切換わる。次に画像Ｂ２から画像Ｂ３に切り替わるときにはＣ２のように画像２から画像３が浮かび上がるように切換わる。さらに、画像Ｂ３から画像Ｂ４に切換わるときにはＣ３で示すようにＢ３の画像が矢印ｂの方向に縮小していくように切換わる。このように様々な切換わりパターンを持たせることによって、変化を持った効率的な鑑賞を促すことができる。以下で、このような音楽画像が組み合わせをアルバムまたは音楽画像一体アルバムと呼ぶ。

図２は、音楽画像の組み合わせデータを他人に提供するシステムを示す図である。これにより作成された画像音楽の組み合わせ（アルバム）を多くのメンバで楽しむことができる。

ＰＣ（Personal coｍputer）１２は第１プロバイダ１３とインターネット回線１７とを介して、受信ユーザー１５ａ、１５ｂの携帯電話１６ａ、１６ｂと結ばれている。送信ユーザー１０がカメラ１１を用いて撮影した画像やその他のデータをＰＣ１２を使って受信ユーザー１５ａ、１５ｂに送信できる。ここで、ＰＣ１２は、専用のアプリケーションソフトがインストールされて音楽画像送信装置として動作する。

図３に音楽画像送信装置１として動作する機能をブロック図で示す。音楽画像送信装置１は、音楽画像送信装置１の全体を制御する制御部２１、画像データ等が記憶される記憶部２２、入力指示用の操作部２３、データを外部機器に送信させる送信部２４、指示内容や画像を表示する表示部２５が設けられる。記憶部２２には音楽データと画像データ２２ｃ及び後述する制御指示データ２２ａと音楽指定データ２３ｂ等が記憶される。操作部２３は、例えばマウスやキーボードである。送信部２４は、例えばＵＳＢ（Universal Serial Bus ）Ｉ/Ｆ（Interface）やＩＥＥＥ１３９４Ｉ/Ｆである。

送信ユーザー１０がカメラ１１を用いて撮影した画像を音楽画像送信装置１であるＰＣ１２を使って音楽と組み合わせ、音楽画像を組み合わせたデータ（以下テンプレートデータと呼ぶ）を作成する。このテンプレートデータには、前述の画像データ２２ｃと制御指示データ２２ａと音楽指定データ２２ｂが含まれる。そして音楽指定データ２２ｂには、曲目データが含まれる。

そして、送信ユーザー１０が作成したテンプレートデータを送信部２４から受信ユーザー１５ａ、１５bの携帯電話１６ａ、１６ｂに送信する。例えばテンプレートデータを送信メールに添付しても良い。ただしこのテンプレートデータに音楽データそのものは含まれてない。送信されたテンプレートデータは、まず、送信ユーザー１０の契約している第１プロバイダ１３のサーバに送信され記録される。そして、このテンプレートデータは、第１プロバイダ１３を経由して、受信ユーザー１５ａ、１５bがそれぞれ持っている携帯電話１６ａ、１６ｂに転送される。一方、テンプレートデータの音楽指定データ２３に含まれる曲目データが、第１プロバイダ１３から第２プロバイダ１４に自動的に送信される。ここで、第２プロバイダ１４は音楽の音源を管理するプロバイダである。曲目データを受信した第２プロバイダ１４により、該当する音楽データが受信ユーザー１５ａ、１５bの携帯電話１６ａ、１６ｂに送信される。

ここで、音楽データを、送信ユーザー１０から送信させるのではなく、第２プロバイダ１４から送信させるようにした理由を説明する。画像データは、送信ユーザー１０自身がカメラ１１を用いて撮影したものなので、著作権の問題はなく、コピーも自由である。しかし、音楽は一般的に他の人（プロ）の演奏したものを使うことが多く、これは著作権にかかわるので、送信ユーザー１０から受信ユーザー１５ａ、１５ｂに勝手にコピーして送信することは違法な行為に当たる。そこで、本発明のように、音楽データそのものは、その音源を管理する特定のプロバイダ１４から直接受信ユーザーの携帯電話１６ａに送信するようにすることで、権利に抵触することが防止される。またこうすれば、音質の劣化も避けられる。

送信した音楽データの料金の支払いルートの例を３つ説明する。１つに、送信ユーザー１０が、矢印Ｓで示すように第１プロバイダ１３経由で第２プロバイダ１４に支払う。２つ目は、送信ユーザー１０が、矢印Ｔで示すように第２プロバイダ１４に直接支払う。最後は、受信ユーザー１５ａ，ｂが第２プロバイダ１４に直接支払う。等々がある。

これにより、受信ユーザー１５ａ、１５bは、各自の携帯電話１６ａ、１６ｂによって送信ユーザー１０の作成した音楽画像を楽しむことができる。これは大型の液晶ディスプレイを搭載するなどして近年発達した携帯の画像処理技術を利用すれば可能なので、詳細な技術は省略する。

次に、図２で説明した送信ユーザー１０がＰＣ２０を用いて、音楽と画像と画像切換えパターンを組み合わせた音楽画像組合わせデータ（以下テンプレートデータと呼ぶ）を作成し、作成されたテンプレートデータを送信させる手順についての詳細を説明する。

図４は、音楽画像送信装置１によるこの音楽画像組合わせデータの作成および送信手順を説明するフローチャートである。
送信画像としては、カメラ１１に保存されている画像または音楽画像送信装置１（ＰＣ２０）に保存されている画像いずれでも使用することもできる。カメラ１１の画像を利用するときは、カメラ１１から通信により画像を入手するようにする。そこでまず送信ユーザー１０によりカメラ１１へ通信操作がなされたかを判断する（ステップＳ１１）。

カメラ１１と通信操作がされないときは（ステップＳ１１Ｎ）、次に音楽画像送信装置１で音楽画像組合わせデータが作成される操作がされたかを判断する（ステップＳ１３）。このデータ作成後はこのデータの送信操作がされる訳なので、作成する操作がされないときは、作成データを送信する操作がされたかを判断する（ステップＳ３０）。ステップＳ１１、１３，３０いずれの操作も無いときにはステップＳ１１に戻りこのループを巡回する。

カメラ１１と通信操作が検出されたのちは（ステップＳ１１Ｙ）、送信ユーザー１０によりカメラ１１に候補画像が保存されているかが判断され、候補画像があるときはその画像を音楽画像送信装置１に入力させる（ステップＳ１２Ｙ）。そしてステップＳ１６に進む。一方、送信ユーザー１０によりカメラ１１に候補画像がないと判断されたときには（ステップＳ１２N）、ステップＳ１４に進み、音楽画像送信装置１内に保存されている画像を送信画像に使用する。 一方、カメラ１１との通信がなく（ステップＳ１１Ｎ）、送信ユーザー１０によりテンプレートデータを作成する指示がなされたときも（ステップＳ１３Ｙ）、ステップS１４に進む。

ここで、音楽画像送信装置１内に保存されている画像を送信画像に使用するため、音楽画像送信装置１の記憶部２２に保存されている画像（画像データ２２ｃ)を一覧表示をさせる（ステップＳ１４）。この一覧表示についてを説明する。図５は、表示部２５の画面に表示される曲名と画像の一覧の例である。画面左に曲名が表示され、右に縮小画像で表示される。この一覧を見ながらの送信ユーザー１０の指示により、送信させる画像が選択され（ステップＳ１５）、送信させる音楽を選択されるステップＳ１６）。また、カメラ１１から通信された画像を送信に使用するときは、図５の右列の画像には、カメラ１１から入手した画像が表示される。

次に、表示される画像タイミングを調整する手順をステップS１７以降で説明する。図６は、画像表示タイミングの修正用タイミングチャートの表示例である。音楽に画像を機械的に単純に割り振っただけでは、画像やその切換えが実際の音楽の曲想に対応していない可能性があるので、特別なタイミングチャートを表示させ、確認や修正を簡単に行わせる。図６で示すような音楽と画像の時間的な関係を示すタイミングチャートを、表示部２５に表示させる。まずデフォルトの画面としては、単純に選択された曲目の音楽の再生時間を選択された画像の数で等分割に割って表示させる（ステップS１７）。

このタイミングチャートは、横軸に時間、縦軸に音量で表した音楽情報とどの画像がどのタイミングで表示されるかを並べて表示させたものである。横軸が時間軸ｔである。音量カーブｍは指定された音楽の時間に対する音量変化を示す。下の画像の列は、音楽に対応して、切換わる画像ｐ１、ｐ２・・・を順番に示す。そして、ｔ１、ｔ２・・・は、この画像の切換る時間を示し、デフォルトでは等間隔である。また、再生ポイント表示印ｑは、送信ユーザー１０が画像の切換わりを表示させたいときに、その部分を指示するためのポイント印である。送信ユーザー１０が、再生ポイント表示印ｑをマウスなどで動かすとその部分が実際に再生させる。その部分の画像の切換わりが音楽再生とともに目視でチェックできる。本例では、ｔ２以降が再生される。

図４のフローに戻る。この切換え部の再生の指示があったかを判断する（ステップＳ１８）。この再生指示があった判断すると（ステップＳ１８Y）、再生ポイント表示印ｑの位置に応じてその部分を再生する（ステップＳ１９）。送信ユーザー１０はこれを見て聴いて確認する。そして、送信ユーザー１０から画像に切換えタイミングの修正指示があったかを判断する（ステップＳ２０）。修正指示があったら（ステップＳ２０Ｙ）、指示に対応して切換えタイミングを修正する（ステップＳ２１）。例えば図６の矢印のように、ｔ２の切換えタイミングをｔ２ｂにずらして、好みの切換わりの位置に調整する（図６のｔ２ｂ）。これで、画像ｐ２から画像ｐ３に切換わるタイミングを遅くしたことになる。

また、切換えタイミングの修正がないとき（ステップＳ２０Ｎ）は、さらに画像の変更や切換えパターンの変更の指示がないかを判断する。まず画像変更の指示の有無を判断する（ステップＳ２３）。画像が気に入らない時は、送信ユーザー１０から画像変更指示がされ（ステップＳ２３Ｙ）、指示に応じて画像選択を行う（ステップＳ２４）。たとえば、図７で示すようにマウス操作で、画像ｐ３を画像ｐ９に差し替え操作される。

同様に切換えパターンの変更の指示の有無を判断し（ステップＳ２５）、指示に応じて切換えパターン変更を行う（ステップＳ２６）。そして、ステップ１８に戻り、このループを繰り返す。

一方、切換え部再生がされない時や切換えが変更が終了したときは（ステップS１８N）、ステップS２２に進む。ステップS２２で、曲目データ、表示画像、切換えタイミング及び切換えパターンが決定され、テンプレートデータとして作成され、記憶部２２に記録される。曲目データは音楽指定データ２２ｂに含まれ、切換えタイミング及び切換えパターンは制御指示データ２２ａに含まれる。

このようにして画像の切換えがステップS１８、Ｓ１９でチェックできるの、好みの効果となるようなテンプレートデータが作成できる。また、音楽指定データ２２ｂには、音楽をダウンロードさせるプロバイダを指定するプロバイダデータを含めても良い。

図７はインターネット上の音楽検索サービスによる検索を簡単に示すフローチャートである。インターネット上に音楽検索サービスが用意されていれば、、この音楽画像送信装置１（ＰＣ１２）でこの音楽検索サービスを利用することができる。このフローチャートによりこの音楽検索サービスを説明する。図４のステップS２２で、音楽画像送信装置１から曲目データを音楽検索サービス会社のサイトに送信する。音楽検索サービス会社では、送信された曲目データを解析して、その曲のプロバイダデータ（アドレス）（ステップS４１）と、曲目指定データ（ステップS４２）を検索して、これを音楽画像送信装置１に返信する。音楽画像送信装置１では、受信したプロバイダデータと曲目指定データをテンプレートデータの音楽指定データ２２ｂに組み込めばよい。

図４のフローに戻る。組み合わせのデータの作成が終了すると、送信する処理に進む。送信ユーザー１０による送信指示の有無を判断する（ステップS３０）。送信指示があると（ステップS３０Y）、送信ユーザー１０の指示（アドレス指定）に従って送り先を指定する（ステップS３１）。音楽ダウンロードに対応するデータやアドレスが適切かを判断し（ステップS３２）、送信データ等がないときや不適切なときには（ステップS３２N）、警告を発して（ステップS３５）、送信処理を終了する。

送信データが適切なときは（ステップS３２Y）、画像と各データ（音楽の曲目指定（プロバイダ指定）や、切換えタイミングや切換えパターン）なるテンプレートデータを、単独あるいはメールに添付して送信相手に送信する（ステップS３３）。あわせて、音楽のダウンロード時の料金を送信ユーザー１０自身が支払うかあるいは受信者が支払うかを指定
可能にして、その支払いに関するデータも送信する（ステップS３４）。

なお、これまでは音楽画像送信装置１についてを、専用アプリケーションによって動作するＰＣ２０の機能として説明してきたが、これに限られることはなく、例えばデジタルカメラにハードウェアとして搭載してよい。

図８は、受信側である携帯電話１６ａの制御部の動作処理を示すフローチャートである。まず、受信ユーザー１５ａの携帯電話１６ａの制御部は、何れか受信したか（ステップＳ５１）あるいはダイヤル操作がされたかを判断する（ステップＳ５２）。まず、受信したことを判断すると（ステップＳ５１Ｙ）、ブザーや振動で通知したことを受信ユーザー１５ａに知らせる（ステップＳ５４）。

そして、メールの受信ではなく、受信ユーザー１５ａによりダイヤル操作がされたと判断したときには（ステップＳ５２Ｙ）、そのダイヤルのデータに従って電話接続を行う（ステップＳ５３）。一方、受信もダイヤル操作もされないときはステップＳ１に戻り、このループを繰り返す。

そして、受信ユーザー１５ａが、図４のフローチャートで説明したテンプレートデータが添付されたメールを、第１プロバイダ１３を介して受信したとする。ステップＳ５１でメールが受信されると、届いたメールに対して受信ユーザー１５ａによりこれを開く操作が行なわれたかを判断する（ステップＳ５５）。メールを開く操作がされなければ（ステップＳ５５Ｎ）、ステップＳ１に戻る。メールを開く操作がされたら（ステップＳ５５Ｙ）、携帯電話１６ａ内部のメモリにそのメールに添付された画像を記録させる（ステップＳ５６）。さらに画像として表示部に再生させる（ステップＳ５７）。ただし、この段階ではまだ単に画像を順次見ることができるだけである。

上述したようにメールには、テンプレートデータとして音楽指定データも添付されている。そこで、さらに受信ユーザー１５aが音楽も受信したいと希望する時は、その旨を操作を行う。そして、その操作が行われたかを判断する（ステップＳ５８）。操作が行われたら、指定された曲目の音楽データを送信させる旨の内容を第２プロバイダ１４に送信させる（ステップＳ５８Ｙ）。一方、操作が行われないとき（ステップＳ５８Ｎ）にはステップ１に戻る。そして、音源を管理する第２プロバイダ１４は、その旨の内容を受け取り、そして 指定された曲の音楽データと事業情報を携帯電話１６ａに送信する。

携帯電話１６ａでは、第２プロバイダ１４から送信された音楽データと事業情報を受信し、メモリに記録させる（ステップＳ５９）。そして、送信された音楽を再生しながら、この音楽にあわせて送信された画像を送信された切換えパターンに応じて再生ができるようになる（ステップS６０）。この音楽画像の再生については、以下図９で詳細に説明する。以上のような処理によって、受信ユーザー１５ａが自分の携帯電話１６ａで、受信された音楽画像を再生して楽しむことができる。

次に、上記ステップＳ６０で述べた音楽画像の再生に関する処理についてを説明する。図９は携帯電話にインストールされたテンプレートプログラムによる音楽再生の処理手順を示すフローチャートである。

このような音楽（ＢＧＭ）付きの画像を表示する機器（本例では携帯電話１６ａに相当）で、受信した音楽と画像を同期させて再生するプログラムをテンプレートプログラム（再生用プログラム）と呼ぶ。なお、このようなプログラムは、音楽画像の再生アプリケーションソフトとして所定サイトに用意しておき、携帯電話でアクセスしてダウンロードできるようにしておいてもよい。

まず受信ユーザー１５ａが音楽画像再生を選択する操作をしたかを判断する（ステップＳ７１）。この形式の再生が選択されると（ステップＳ７１ＹＥＳ）、図３のフローで送信されたメールに添付されていたテンプレートデータを取り込む（ステップＳ７２）。テンプレートデータには、再生時に用いる音楽の曲目、ｎ番目に再生される画像のファイル名Ｐｎ、ｎ番目に再生される画像の表示時間を示す表示タイミングＴｎ、切換えパターンを示す切換えパターンデータＣｎ等の各種データが含まれる。曲目は音楽指定データ２２ｂに含まれる。画像のファイル名Ｐｎ、表示タイミングＴｎおよび切換えパターンデータＣｎは、制御指示データ２２ａに含まれる。

これらのデータを用いて、ステップＳ７３以降のフローを実行する。まず、指定された音楽の再生を開始する（ステップＳ７３）。音楽再生と同時に曲にあわせて絵を切換えるためのタイマＴを開始させる（ステップＳ７４）。続いて画像切換え用のカウンタnを「０」にリセットする（ステップＳ７５）。さらにカウンタnを 「＋１」インクリメントする（ステップＳ７６）。そして、ｎ番目の画像Ｐｎをｎ番目の切換え方法Ｃｎで切換えつつ表示していく。そして、タイマＴがタイミングＴnに達するか（ステップＳ７８）、あるいは終了指示の割り込みがあったかを判断する（ステップＳ７９）。終了指示の割り込みがなければタイミングＴnに達するまでステップＳ７８、７９をループする。そして、タイマＴが画像の切換えタイミングＴｎに達すれば（ステップＳ７８Y）ステップＳ７６に戻り、カウンタｎをインクリメントして、画像を次の画像に切換えを行う。一方、終了指示の割り込みがあったら、終了処理を行う。

以上のように画像表示の切換えを、音楽の終了やユーザーの終了操作があるまで継続するので、鑑賞ユーザーは音の流れに身を委ねつつ、画像の変化を楽しむことができる。音楽と画像を組み合わせて再生することで、ユーザーに創造的な喜びをもたらし、他のひとに見せることができるような完成度の作品化を可能にすることによって、よりよいものを作ろうという向上心が芽生え、作る人の腕が上がると、鑑賞する人もより楽しめるという良い方向に帰還がかかるようになる。

図１０から図１４を用いて実施例２を説明する。実施例２では、メモリに記憶されたテンプレート表示データを利用して、簡単に音楽画像の組み合わせ用の画像を作成するカメラについてを説明する。実施例１では図４のステップ１２でカメラでの候補画像の有無を判断したが、実施例２では旅先でも撮影時等にアルバム作りを行うことができるカメラを提供する。これにより、帰宅後にこのカメラをコンピュータに接続するだけで、簡単に音楽と画像を一体化したアルバムを他のメンバに送信することができる。

図１０は、実施例２が適用されるカメラ１０１の概観図である。このカメラ１０１は、本体側面に記録メディア１０２を着脱自在に備える。このカメラでは、この記録メディア１０２にいくつかの曲目候補と画像切換えパターンを含むテンプレートデータおよび後述するテンプレート表示データ等を格納している。

図１１は、このカメラ１０１の概略構成を示す機能ブロック図である。カメラ１０１には、被写体像を結像する撮影レンズ１１１、結像される被写体像を光電変換して画像信号を出力する撮像素子１１２、画像信号に色補正・コントラスト補正等各種処理を施し圧縮する画像処理部１１３、画像処理された画像データを記録する記録メディア１０２、カメラ背面に備えられ画像を表示する画像表示部１１６等が備えられる。撮影レンズ１１１や撮像素子１１２から撮像部が構成される。

また記録メディア１０２には、音楽画像データ１０２ｃと、サンプル・テンプレート表示データ１０２ｂが記録されている。音楽画像データ１０２ｃは、撮影された画像データや取り込まれた音楽のデータである。サンプル・テンプレート表示データ１０２ｂのサンプルデータとは、プロが撮影した推奨画像であるサンプル画像のデータを意味し、テンプレート表示データは図１２で表示する画面を作成するためのデータである。いずれも詳細は後述する。また、作成されたテンプレートデータは、記録メディア１０２にテンプレートデータ１０２ａとして記録される。また、画像表示部１１６には、ＬＣＤからなり、モニタ画像１１６ａとサンプル画像１１６ｂが画面上で分けられて表示される。

また、カメラ１０１には記録された音声信号を処理する音声処理部１１８、音声信号を出力するスピーカ１１９も備えられる。そして、カメラ１０１には、撮影や画像再生あるいは音声記録再生等でカメラ全体を制御するＣＰＵ１１５、その操作指示をＣＰＵに通知する操作部１１７が備えられる。

図１２は、テンプレート撮影時に表示部１１６に表示されるテンプレート表示である。ここでテンプレート表示とは、被写体のモニタ画像１１６ａの横にプロが撮影した推奨画像であるサンプル画像１１６ｂが配置された画面の表示をいう。そしてテンプレート撮影とは、このテンプレート表示を見ながら撮影することをいう。図１２に示すように、テンプレート表示画面の右側に撮影中のモニタ画像１１６ａが表示され、画面左側に見本としてプロの撮影したサンプル画像１１６ｂが表示される。また、画面上部には音楽の音量カーブ１１６ｃも表示される。

図１３は、テンプレート撮影の手順を示すフローチャートである。まず、記録メディア１０２のサンプル・テンプレート表示データ１０２ｂからサンプル画像とテンプレート表示データを読み出して画像表示部に表示させる（ステップＳ１０１）。撮影者によりサンプル画像が指定される（ステップＳ１０２）。指定されたサンプル画像と撮影されているモニタ画像を、図１２に示すように表示させる（ステップＳ１０３）。そして、レリース操作を待つ（ステップＳ１０４）。レリース操作があれば（ステップＳ１０４Ｙ）、その画像をデジタル信号に変換して、色補正、コントラスト補正を行って圧縮して、記録メディア１０２に記録する（ステップＳ１０５）。音楽画像データ１０２ｃの画像データとして記録される。その後、サンプル画像として複数画像が格納されているので、１枚撮影するだけで終わらせず、次にどのような画像を撮影するべきか画面上に指示するようにしてもよい。またどうしても撮影できない画像、例えばサンプル画像は晴れた山並みであるがユーザーが旅行したときは曇っていて見えないような場合、サンプルの画像をそのまま利用してもよい。

また、撮影画像と音楽の効果をみるときは、記録メディア１０２に記録された音楽データ１０２ｃを音声処理部１１８で音声処理し、スピーカ１１９で再生しつつ、記録された画像を画像表示部１１６のモニタ画像１１６ｂの領域に表示させて確認すればよい。
このようにメディア内に本発明の特徴たる音楽データやテンプレートデータを記録しておき、それを購入したユーザーがそこに入った画像や音楽を参考にしつつ、メディアの空いた領域に撮影画像を蓄えていく方式も、いろいろＰＣからダウンロードしなくてよいので、ユーザーにとって使いやすいシステムとなる。

図１４は、テンプレート撮影における主にＣＰＵ１１５による制御処理を説明するフローチャートである。図１３で説明した処理手順の詳細を説明するフローチャートである。このカメラでは、通常撮影およびテンプレート撮影の２つ撮影モードと音声入力モード、及び再生モードおよび再生モードの一部としてテンプレート確認モードが設けられている。以下この順番に沿ってフローチャートを説明する。

まず撮影モードに設定されているかを判断する（ステップS１１１）。撮影モード設定時（ステップS１１１Y）は、さらに撮影の種類がテンプレート撮影か通常撮影かいずれに設定されているかを判断する（ステップS１１２）。撮影者の操作によっていずれの種類かに切換えられる。テンプレート撮影ではないときは（ステップS１１２N）は、通常撮影として撮影者のレリース操作を待つ（ステップS１１３）。レリース操作があったときは（ステップS１１３Y）、撮影（ステップS１１４）および記録（ステップS１１５）を実行する。

一方、ユーザーによりテンプレート撮影が選択されたときは（ステップS１１２Y）、以下のテンプレート撮影を実行する。図１２で示したテンプレート表示を画像表示部１１６に表示させる（ステップＳ１１６）。まず、音楽のどのタイミングで表示させるかを選択する（ステップＳ１１７）。次に適当なサンプル画像１１６ｂを選択して表示させる（ステップＳ１１８）。撮影者はサンプル画像１１６ｂを見ながら、似たようなシーンを選び構図を選ぶ。そしてレリースの操作を待つ（ステップＳ１１９）。レリース操作があったときは（ステップS１１９Y）、撮影（ステップS１２０）及び記録（ステップS１２１）を実行する。さらに、画像とあわせてどのタイミングで表示する画像であるかを示す画像ナンバーデータを記録する（ステップＳ１２２）。

一方、撮影モード以外では、音声入力モードや再生モードがある。ユーザーにより音声入力モードが設定されたときは（ステップＳ１２３Ｙ）、ＰＣを経由して、音楽を入力（ダウンロード）して記録することができる（ステップＳ１２４）。

また、ユーザーにより再生モードが設定されたときは（ステップＳ１２５Ｙ）、ユーザーが指定したメモリ内の画像を再生表示させることができる（ステップＳ１２６）。前述では、テンプレート撮影時に画像をどのタイミングで表示させるかを画像ナンバーで指定したが（ステップＳ１２２）、再生時に画像ＮＯを変更したり付加するようにしてもよい（ステップＳ１２７）。このときは、ステップＳ１２２に進む。付加の指示がなく（ステップＳ１２７Ｎ）、終了操作もなければステップＳ１２６に戻る。終了操作があれば（ステップＳ１２８Ｙ）、終了処理を実行する。

また、このカメラではさらに、音楽と画像を同時再生して、音楽と画像の切換え効果を確認することができる。これがテンプレート確認モードである。再生モードでなければ（ステップＳ１２５Ｎ）、テンプレート確認モードであるかを判断する（ステップＳ１２９）。いずれでもなければ、ステップＳ１１１に戻る。テンプレート確認モードが設定されたと判断すると（ステップＳ１２９Ｙ）、まずカメラに記憶されている音楽の曲目を選択させる（ステップＳ１３０）。選択された曲を再生する（ステップＳ１３１）。そして設定されたタイミングで撮影された画像を、おすすめの切換えパターンで画像を切り換えながら表示する（ステップＳ１３２）。切換えパターンの選択については特に説明しなかったが、選択されているときはその選択された切換えパターンを使用する。

一方、音楽再生の必要がなく画像の一覧表示の指示があったときは（ステップＳ１３３Ｙ）、音楽再生を停止させ（ステップＳ１３４）、切換え表示される全ての画像の一覧表示をさせる（ステップＳ１３５）。

以上のような手順を行うことにより、ユーザーは、カメラに記録された音楽と画像の切換え表示を確認し、いくつかのパターンから自分の好みのものを選びそれに従って撮影を行うことによって、本発明の特徴たる音楽画像一体アルバムを簡単に作ることができる。
また、サンプル画像を表示することで、すでにプロの映像作家が作成しメモリに記録したパターンに従って同様の構図や色調の写真撮影をすればよく、素人でも高い完成度の作品を作ることが出来る。この作例（サンプル画像）は、ＰＣ経由でダウンロードして記録メディア１０２に入れてもよい。

実施例２では、曲目とその音楽を供給する音楽配信会社のアドレスデータを、テンプレートデータ内の音楽指定データの一部としてメールに添付することを説明した。実施例３では、新たな音楽の供給のシステム例を紹介する。図１５は、この音楽の供給のシステムの全体を示す図である。

送信者１５１のＰＣ１５５がネットワーク１５９とこのネットワークに繋がるプロバイダ１５６を介して受信者１５８の携帯電話１５７に接続される。さらにこのネットワーク１５９には、音楽配信会社１５４のサーバーも接続されている。

そして音楽配信会社１５４のサーバーから第１節のみまたはメロディのみ収録されたサンプル音楽が、送信者１５１に供給される。なぜなら、有節歌曲の場合は、基本的に同じメロディによって別の歌詞が歌われるので，第１節のみのサンプル音楽データを音楽配信会社が供給してコマーシャルがわりにすることが有効だからである。そして送信者１５１はサンプル音楽をカメラ１５２の記録メディア１５３を記憶しておく。そして、送信者１５１はカメラ１５２でサンプル音楽をカメラ１５２で撮影した画像に組み合わせる操作をする。この組み合わせ操作は、図１４で説明した手順と音楽が一部分であること意外は同じでなので、省略する。

そして、この組み合わせたデータ（テンプレートデータ）をＰＣ１５５からメールに添付して、受信者１５８の携帯電話１５７に送信する。ここで、テンプレートデータ中の音楽の情報は、それを配信する音楽配信会社のアドレスや曲指定データである。テンプレートデータが添付されたメールは、ネットワーク１５９を介し、所定のプロバイダ１５６を経由して携帯電話１５７に送信される。メールを開いた受信者１５８で、音楽配信を希望する受信者１５８により所定の操作がされると、配信する会社のアドレスにより携帯電話１５７から音楽配信会社１５４にアクセスがされる。音楽配信会社１５４から曲指定データに対応する曲が携帯電話１５７に送信され、携帯電話１５７のメモリにダウンロードされる。または、メロディのみメールに添付して送信して、受信者１５８が全曲を聞きたい場合に、自分で音楽配信会社１５４からダウンロードさせるようにしてもよい。

以上の実施例１，２、３から、以下の発明が抽出される。
１）音楽画像の組み合わせ再生に係るデータを外部の機器に送信する送信部２４と、
この送信を制御する制御部２１を備え、
前記制御部は、前記音楽画像の組み合わせ再生に係るデータとして、
再生される音楽を指定する音楽指定データ２２ｂと、
この音楽に対応して再生される画像の画像データ２２ｃと、
この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データ２２ａを、送信させる
ことを特徴とする画像音楽送信装置１。

２）被写体像を撮影する撮像部（レンズ１１１、撮像素子１１３）と、
画像を表示する表示部１１６と、
音楽画像の組み合わせ再生に係る画像を撮影するテンプレート撮影のときに、このテンプレート撮影をするためのテンプレート表示として、記録メディアから比較用のサンプル画像を読み出して、このサンプル画像と撮像部によるモニタ画像を並列的に前記表示部に表示させる制御部（ＣＰＵ１１５）と、を備える
ことを特徴とするカメラ。

３）前記音楽画像の組み合わせ再生に係るデータを外部に送信するための送信制御方法において、
前記音楽画像の組み合わせ再生に係るデータとして、
再生される音楽を指定する音楽指定データ２２ｂと、
この音楽に対応して再生される画像の画像データ２２ｃと、
この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データ２２ａを、送信させる
ことを特徴とする送信制御方法。

なお、以上の実施例１，２では、制御部２１とＣＰＵ１１５の制御処理はソフトウェア処理で実行されることを説明したが、その全部または一部をハードウェアで構成しても当然よい。

また、以上の実施例で示す制御処理は、それぞれ上記機能を実行するソフトウェアのプログラムが制御部２１、ＣＰＵ１１５に供給され、供給されたプログラムに従って上記動作させることによって実現されるものである。従って、上記ソフトウェアのプログラム自体が上述した実施の形態の機能を実現することになり、そのプログラム自体は本発明を構成する。また、そのプログラムを格納する記録媒体も本発明を構成する。記録媒体としては、フラッシュメモリ、ＣＤ−ＲＯＭの他にも、ＤＶＤ等の光学記録媒体、ＭＤ等の磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリー等を用いることができる。

さらに、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。

本発明の実施例１に係る画像の切換えパターンを示す図 実施例１において、音楽画像の組み合わせデータを他人に提供するシステムを示す図 実施例１において、音楽画像送信装置として動作する機能を示すブロック図 実施例１において、音楽画像送信装置によるこの音楽画像組合わせデータの作成および送信手順を説明するフローチャート。 実施例１において、表示部の画面に表示される曲名と画像の一覧の例 実施例１において、画像表示タイミングの修正用タイミングチャートの表示例 実施例１において、インターネット上の音楽検索サービスによる検索を簡単に示すフローチャート 実施例１において、携帯電話の制御部の動作処理を示すフローチャート 実施例１において、携帯電話にインストールされたテンプレートプログラムによる音楽再生の処理手順を示すフローチャート 実施例２において、発明が適用されるカメラの概観図 実施例２において、カメラの概略構成を示す機能ブロック図 実施例２において、テンプレート撮影時に表示部に表示されるテンプレート表示を示す図 実施例２において、テンプレート撮影の概略手順を示すフローチャート 実施例２において、テンプレート撮影の詳細手順を示すフローチャート 実施例３において、音楽供給のシステムの全体を示す図である

符号の説明

１…音楽画像表示装置、１０…送信ユーザー、１１…デジタルカメラ、１２…ＰＣ、１３…第１プロバイダ、１４…第２プロバイダ、１５ａ，１５ｂ…受信ユーザー、１６ａ，１６ｂ…携帯電話、１７…インターネット回線、
２１…制御部、２２…記憶部、２２ａ…制御指示データ、２２ｂ…音楽指定データ、２３…操作部、
２４…送信部、
１０１…デジタルカメラ、１０２…記録メディア、１０２ａ…テンプレートデータ、１０２ｂ…サンプル・テンプレート表示データ、１０２ｃ…音楽画像データ、１１１…撮影レンズ、１１２…撮像素子、１１３…画像処理部、１１５…ＣＰＵ、１１６…表示部、１１６ａ…サンプル画像、１１６ｂ…モニタ画像、１１７…操作部、
１１８…音声処理部、１１９…スピーカ
１５１…送信者、１５２…デジタルカメラ、１５３…記録メディア、１５４…音楽配信会社、１５５…ＰＣ、
１５６…プロバイダ、１５７…携帯電話、１５８…受信者
ｍ…音量カーブ、ｑ…再生ポイント表示印

Claims (10)

1. 音楽画像の組み合わせ再生に係るデータを外部の機器に送信する送信部と、
   この送信を制御する制御部を備え、
   前記制御部は、前記音楽画像の組み合わせ再生に係るデータとして、
   再生される音楽を指定する音楽指定データと、
   この音楽に対応して再生される画像の画像データと、
   この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを、送信させる
   ことを特徴とする画像音楽送信装置。
2. 前記制御部は、制御指示データとして、音楽のどのタイミングでどの画像を再生するかのデータ及び画像切換えパターンのデータを少なくとも送信させる
   ことを特徴とする請求項１に記載の画像音楽送信装置。
3. 前記制御部は、音楽指定データとして、音楽を配信するプロバイダのデータおよび曲目データを少なくとも送信させる
   ことを特徴とする請求項１に記載の音楽画像送信装置。
4. 画像を表示する表示部を備え、
   前記制御部は、さらに、前記音楽画像の組み合わせ再生に係るデータに基づき、再生される音楽の音量の時間的変化を示す線図とこの音楽の時間的変化に対応して再生される画像を合わせて表示部に表示させる
   ことを特徴とする請求項１に記載の音楽画像送信装置。
5. 前記制御部は、前記音楽画像の組み合わせ再生に係るデータを、メールに添付してインターネット回線に送信させる
   ことを特徴とする請求項１に記載の音楽画像送信装置。
6. 被写体像を撮影する撮像部と、
   画像を表示する表示部と、
   音楽画像の組み合わせ再生に係る画像を撮影するテンプレート撮影のときに、このテンプレート撮影をするためのテンプレート表示として、記録メディアから比較用のサンプル画像を読み出して、このサンプル画像と撮像部によるモニタ画像を並列的に前記表示部に表示させる制御部と、を備える
   ことを特徴とするカメラ。
7. 前記制御部は、前記テンプレート表示として、再生される音楽の音量の時間的変化を示す線図を前記モニタ画像とサンプル画像とともに表示させる
   ことを特徴とする請求項６に記載のカメラ。
8. 音楽画像の組み合わせ再生に係るデータを外部に送信するための送信制御方法において、
   前記音楽画像の組み合わせ再生に係るデータとして、
   再生される音楽を指定する音楽指定データと、
   この音楽に対応して再生される画像の画像データと、
   この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを、送信させる
   ことを特徴とする送信制御方法。
9. 音楽画像の組み合わせ再生に係るデータを外部に送信するための送信制御方法をコンピュータに実行させるプログラムにおいて、
   前記送信制御方法は、
   前記音楽画像の組み合わせ再生に係るデータとして、
   再生される音楽を指定する音楽指定データと、
   この音楽に対応して再生される画像の画像データと、
   この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを、送信させる
   ことを特徴とするプログラム。
10. 音楽画像の組み合わせ再生に係るデータを外部に送信するための送信制御方法をコンピュータに実行させるプログラムを記憶したコンピュータ読取可能な記録媒体において、
    前記送信制御方法は、
    前記音楽画像の組み合わせ再生に係るデータとして、
    再生される音楽を指定する音楽指定データと、
    この音楽に対応して再生される画像の画像データと、
    この音楽に対応して再生される画像の変化を制御する制御プログラム用の制御指示データを、送信させる
    ことを特徴とするコンピュータ読取可能な記録媒体。
    
    
    
    

Images