JP2006350592A

JP2006350592A - 音楽情報提供装置

Info

Publication number: JP2006350592A
Application number: JP2005174568A
Authority: JP
Inventors: Takeshi Shiraki; 毅白木
Original assignee: Hitachi Engineering Co Ltd
Current assignee: Hitachi Engineering Co Ltd
Priority date: 2005-06-15
Filing date: 2005-06-15
Publication date: 2006-12-28

Abstract

【課題】携帯電話を用いて撮影した画像に映されたオブジェクトに関する音楽情報を簡単に入手できる音楽情報提供装置を提供する。
【解決手段】携帯電話通信網に有線データ通信回線を用いて接続される音楽情報提供サーバと、携帯電話通信網に無線データ通信回線で接続される複数の携帯電話で構成される音楽情報提供装置であって、各携帯電話には位置取得手段と方位取得手段と写真撮影手段を有するものを使用するようにし、音楽情報提供サーバ内に、携帯電話から送信された位置と方位及び写真画像とサーバ内に保持するオブジェクト情報を利用して写真画像内に映されたオブジェクトを特定するオブジェクトマッチング手段と、携帯電話から送信された写真画像内に特定されたオブジェクト名称に関連する音楽情報を検索する音楽情報検索手段と、を設けて構成した。
【選択図】図１

Description

本発明は、音楽情報提供装置に係り、特に携帯電話と携帯電話通信網を経由して接続する音楽情報提供サーバで構成する音楽情報提供装置に関する。

従来から携帯電話通信網に有線又は無線で接続された音楽情報提供サーバ及び無線で接続された携帯電話を用い、携帯電話より入力したキーワードで、音楽情報提供サーバ内の格納音楽データから音楽情報を検索し、該当する音楽情報を携帯電話に提供する音楽情報提供装置が知られている。

例えば、特許文献１には、携帯電話で音楽情報を再生するとき、携帯電話より音楽情報のキーワードを音楽情報提供サーバに送信し、音楽情報提供サーバ内でキーワードに合致する音楽情報を検索し、携帯電話に提供することが記載されている。また、特許文献２には、マイクからの音声入力（キーワード）をユーザ端末でデジタル信号に変換し、このデジタル信号を音楽情報提供サーバで音声認識処理した後、これにより音楽情報を検索して検索結果をユーザ端末に提供し、ユーザ端末で選択した音楽情報を音楽情報提供サーバから提供すること記載されている。

特開２００２−１２３２７２号公報特開２００２−３４１８８０号公報

特許文献１及び２の音楽情報提供装置では、ユーザによる携帯電話の操作により音楽情報検索のためのキーワードを入力しているが、キーワード入力の省力化やより有効なキーワードの自動選択などのアイデアも多数あり、音楽情報検索の効率化や有用化という点で一定の効果をあげている。

しかし、これら従来の音楽情報提供装置おいては、音楽情報提供サービスのユーザが楽曲検索に使用するキーワードを知っていることや、携帯電話に登録済みである必要があり、未知の地域へ旅行中のユーザが地域や建築物や名所旧跡などユーザにとって未知の地域情報に関連する音楽情報を検索したい場合、ユーザは地域や建築物や名所旧跡などに関する音楽情報を検索するに足るキーワードを容易に知りえないため、このような未知の地域情報に関連する音楽情報検索には利用できないという問題が存在する。

本発明の目的は、携帯電話を用いて撮影した画像に映されたオブジェクトに関する音楽情報を簡単に入手できるようにし、これによりオブジェクトに関する検索キーワードの調査と、携帯電話に入力する手間を削減することができ、また操作を簡単にして音楽情報検索を容易に利用できる音楽情報提供装置を提供することにある。

本発明は、携帯電話通信網に有線データ通信回線を用いて接続される音楽情報提供サーバと、前記携帯電話通信網に無線データ通信回線で接続される複数の携帯電話で構成され、前記各携帯電話には位置取得手段と方位取得手段と写真撮影手段を有する音楽情報提供装置において、前記音楽情報提供サーバ内には、携帯電話から送信された位置と方位及び写真画像とサーバ内に保持するオブジェクト情報を利用して写真画像内に映されたオブジェクトを特定するオブジェクトマッチング手段と、携帯電話から送信された写真画像内に特定されたオブジェクト名称に関連する音楽情報を検索する音楽情報検索手段と、を設けて音楽情報提供装置を構成するようにしている。

本発明によれば、携帯電話を用いて撮影した画像に映されたオブジェクトについての音楽情報を簡単に入手できるため、オブジェクトに関する検索キーワードの調査と携帯電話に入力する手間を削減することができる。また、操作が簡単になる為、音楽情報検索を気軽に利用することができるため、旅行先などで地域や建築物や名所旧跡などに関する音楽の歴史的文化的な知識の造詣を深めることが可能となる。

本発明の音楽情報提供装置は、有償若しくは無償のサービスとして提供することが可能である。

以下、本発明を実施するための最良の形態を具体的な実施例によって説明する。

図１は、本発明の一実施例である音楽情報提供装置の構成図を示しており、音楽情報提供装置１は、携帯電話通信網４で接続される音楽情報提供サーバ２と携帯電話３とで構成されている。携帯電話通信網４は、有線データ通信回線５を使用して音楽情報提供サーバ２と、無線データ通信回線６を使用して携帯電話３と接続されている。

音楽情報提供サーバ２は、内部に写真画像を受信する受信手段２５、受信した写真画像に関するオブジェクト情報を格納するオブジェクト格納手段２３、オブジェクト格納手段２３からオブジェクトを検索するオブジェクト検索手段２２、オブジェクト検索手段２２を使用して検索したオブジェクトと受信手段２５を使用して携帯電話３より受信した写真画像をマッチングするオブジェクトマッチング手段２１、音楽情報を格納する音楽情報格納手段２７、マッチングしたオブジェクト情報から音楽情報を検索する音楽情報検索手段２４、音楽情報を携帯電話に送信する送信手段２６を備えて構成される。

本発明の携帯電話３は、具体的には写真撮影手段（カメラ）と方位取得手段（ＧＰＳ：ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ）付のものを使用する。この携帯電話３は、図１に示す如く自位置を取得する位置取得手段３１と、撮影する方向を取得するため内蔵された電子コンパスなどの方位取得手段３２と、写真画像を撮影する写真撮影手段３３と、撮影した写真画像及び位置や方位を送信する送信手段３４と、音楽情報提供サーバ２が加工した写真画像を受信する受信手段３５と、写真撮影手段３３で撮影した写真画像及び音楽情報提供サーバ２が加工して受信手段３５を経由して受信した音楽情報を表示する表示手段３６とで構成している。

本発明の音楽情報提供装置を適用した一実施例のシステム構成図を図２に示しており、音楽情報提供装置１は、音楽情報提供サーバ２と複数の携帯電話３で構成され、音楽情報提供サーバ２と携帯電話３は、携帯電話通信網４を経由して接続されている。音楽情報提供サーバ２と携帯電話通信網４は、有線データ通信回線５で、携帯電話通信網４と携帯電話は、無線データ通信回線６で接続されている。

以下、図１、図２に示す実施例の動作を、図３、図５、図７に示すフロー図及び図４、図６、図８を参照して説明する。

図３は、携帯電話３が写真撮影を行って音楽情報提供サーバ２に送信し、音楽情報提供サーバ２内で画像を処理し、携帯電話３に音楽情報を送信して提供情報を表示する音楽情報提供装置１全体のフローである。携帯電話３は、内蔵されたＧＰＳなどの位置取得手段３１を使用して自位置を測定し（ステップＳ１）、携帯電話３に内蔵された方位取得手段３２を使用して写真撮影手段３３が撮影する方向を測位し（ステップＳ２）、携帯電話３に内蔵された写真撮影手段３３で写真画像を撮影する（ステップＳ３）。

この時点で撮影した画像は、山や建物などのオブジェクトが映し出されている。しかし、オブジェクトの名称がオブジェクトそのものに明示されていることは少なく、撮影者は土地勘と呼ばれる特に地域についての知識がない場合に、これらのオブジェクトについて名称すら知ることはできず、これらオブジェクトに関する音楽情報を入手することは困難である。ここで、携帯電話３で写真撮影してそのまま表示手段に表示した例を、図４に示している。そこで、携帯電話３はステップＳ１で測定した自位置とステップＳ２で測定した方位及びステップＳ３で撮影した写真画像を表示手段３６に表示すると同時に、送信手段３４で音楽情報提供サーバ２へ送信する（ステップＳ４）。

音楽情報提供サーバ２の受信手段２５を使用して受信した位置と方位及び写真画像は、オブジェクトマッチング手段２１に送信され、オブジェクトマッチング手段２１において写真画像に映されたオブジェクトをオブジェクトマッチングにより特定し（ステップＳ５）、このオブジェクトに関する音楽情報の検索が行われる（ステップＳ６）。検索された音楽情報は、送信手段２６と携帯電話通信網４と受信手段３５を経て携帯電話３送信される（ステップＳ７）。携帯電話３では、受信した音楽情報を表示手段３６に表示又は再生する（ステップＳ８）。

次に、図５を用いてオブジェクトマッチング（ステップＳ５）の要部を説明する。音楽情報提供装置１では、携帯電話３からの写真画像待ち状態（ステップＳ１１）にあるが、受信手段２５が位置と写真画像を受信すると（ステップＳ１２）及び（ステップＳ１３）、位置及び方位を使用してオブジェクト検索手段２２を使用してオブジェクトの検索を行い（ステップＳ１４）、検索されたオブジェクトの数の分（ステップＳ１５）写真画像とのマッチングを行う（ステップＳ１６）。

検索されたオブジェクト一覧の例を、図６に示している。建物や塔などのオブジェクト種別、オブジェクトの名称、オブジェクトの存在する経緯度座標、オブジェクトの種別が建物の場合には階数、オブジェクトの高さなどが格納されており、写真画像とのマッチングの際に利用することができる。

マッチングの具体的方法は、既知のテンプレートマッチングが有名であり、さらに分類すると残差マッチング、正規化相関法、位相限定相関法、幾何マッチング法、ベクトル相関法、一般化ハフ変換法などが用いられ、オブジェクトの重なりや隠れに影響を受けにくいベクトル相関法が高いマッチング精度を確保する上で有力候補となる。

次に、写真画像とオブジェクトがマッチした場合、オブジェクト一覧の当該オブジェクトにチェックを入れる（ステップＳ１７）。図６では、日立ビル、東京タワー、丸中倉庫の３件がマッチしており、画像マッチ列に○印が記されている。そして、チェックの入ったオブジェクト名称を使用して音楽情報を検索する（ステップＳ１８）。検索結果の例である音楽情報一覧を図７に示しており、この例では日立ビル、東京タワー、丸中倉庫の３つのキーワード中、東京タワーというキーワードに該当する音楽情報のレコードが７件検索されている。各レコードには、予めいくつかのキーワードが登録されており、このキーワードとの全又は部分一致により音楽情報レコードが検索されている。ここで、音楽情報は例えば、楽曲名称のほかに、種別、楽曲に関する情報が存在するアドレス（ＵＲＬ：ＵｎｉｆｏｒｍＲｅｓｏｕｃｅＬｏｃａｔｏｒ）、音楽そのもののダウンロード可否などの情報を持たせることができる。

次に、音楽情報を携帯電話に表示した例を図８に示しており、ここでは図７に示した検索された音楽情報の中でダウンロード可能な赤い東京タワーと東京タワーエレジーのみ表示している。そして曲名の右にそれぞれ再生というボタンを配置し、ボタンが押されたときにその楽曲をダウンロードし、携帯電話３で再生できるようにしている。楽曲をダウンロードし再生する手段は、各携帯電話により異なるが、プログラム可能な携帯電話で公開されているプログラミングインターフェイスを利用することができる。

本発明の一実施例を示す音楽情報提供装置の構成図である。本発明の実施例のシステム構成図である。本発明の音楽情報提供装置の処理フローである。携帯電話の撮影画像の表示例である。音楽情報生成処理の要部の処理フローである。本発明の音楽情報提供装置でのオブジェクト検索結果一覧である。検索結果の例を示す音楽情報一覧である。携帯電話における画面表示例である。

符号の説明

１…音楽情報提供装置、２…音楽情報提供サーバ、３…携帯電話、
４…携帯電話通信網、５…有線データ通信回線、６…無線データ通信回線、２１…オブジェクトマッチング手段、２２…オブジェクト検索手段、２３…オブジェクト格納手段、２４…音楽情報検索手段、２５…受信手段、２６…送信手段、２７…音楽情報格納手段、３１…位置取得手段、３２…方位取得手段、３３…写真撮影手段、３４…送信手段、３５…受信手段、３６…表示手段。

Claims

携帯電話通信網に有線データ通信回線を用いて接続される音楽情報提供サーバと、前記携帯電話通信網に無線データ通信回線で接続される複数の携帯電話で構成され、前記各携帯電話には位置取得手段と方位取得手段と写真撮影手段を有する音楽情報提供装置において、前記音楽情報提供サーバ内には、携帯電話から送信された位置と方位及び写真画像とサーバ内に保持するオブジェクト情報を利用して写真画像内に映されたオブジェクトを特定するオブジェクトマッチング手段と、携帯電話から送信された写真画像内に特定されたオブジェクト名称に関連する音楽情報を検索する音楽情報検索手段と、を設けて構成したことを特徴とする音楽情報提供装置。