JP4340411B2 - 曲を識別する方法 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、曲を識別する方法、及び、このような方法を実施する分析装置に関わる。
【０００２】
【従来の技術】
多くの人は、例えば、ディスコ、飲食店、デパート等のような公共の場所において、又は、ラジオで音楽を聞き、例えば、ＣＤ又はインターネットを通じて音楽ファイルとしてその曲を入手できるようパフォーマー及び／又は作曲家、並びに、題名を知りたいと思うことをしばしば経験する。関連する人は、後の段において所望の曲の所与の一部だけ、例えば、歌詞及び／又はメロディーの所与の一部だけをしばしば覚えている。専門店の非常に精通しているスタッフと連絡をとれるほど非常に運がよいとき、店のスタッフのメンバーにとりわけ、これら音楽の一部を歌うかハミングし、又は、歌詞の一部を伝えてもよく、それにより、関連するスタッフのメンバーは、曲を識別し題名及びパフォーマーを教えることができる。これは、しかしながら、多くの場合、店員自身が題名を知らないか覚えていないため、又は、例えば、インターネットを通じて注文するときのように直接話せるスタッフがいないため可能でない。
【０００３】
【発明が解決しようとする課題】
本発明は、曲を自動的に識別する方法、及び、この方法を実施する適当な装置を提供することを目的とする。
【０００４】
【課題を解決するための手段】
この目的は、請求項１及び１３記載の発明によって夫々達成される。
【０００５】
本発明によると、識別されるべき曲のメロディー及び／又は歌詞の少なくとも一部、例えば、最初の小節又は繰り返しが分析装置に供給される。この分析装置では、メロディー及び／又は歌詞の一部と、分析装置に既知の他の曲又はその一部との間で異なる一致度が決定される。これに関して、分析装置は、アクセスでき、題名、パフォーマー、作曲家等のような関連データが問い合わせされ得る全ての曲を知っている。これら曲は、一つの又は幾つかのデータバンクに記憶されてもよい。ネットワーク例えば、インターネットを通じて分析装置によって問い合わせされ得る、例えば、個々のプロダクション会社の異なるデータバンクに関係し得る。
【０００６】
一致の度合いは、既知の曲（又は、その一部）とメロディー及び／又は歌詞の一部を比較する一方で例えば、一つ以上の異なるサンプル分類アルゴリズムを使用することによって決定される。最も簡単な場合これは、メロディー及び／又は歌詞の一部と入手できる既知の曲との間の簡単な相関関係である。これは、分析装置に既知の「正しい」曲の速さと一致する一定の速さから始めることができるよう識別されるべき曲の元の一部が供給されるとき少なくとも可能である。
【０００７】
決定された一致度に基づき、既知の曲の少なくとも一つは、メロディー及び／又は歌詞の一部の入力と決められた最小限の一致度を有する曲がいずれにしても見つかる限り選択される。
【０００８】
その後、例えば、題名、パフォーマー、作曲家のような識別データ又は他の情報が供給される。代わりに、又は、追加的に、選択された曲自体が供給される。例えば、このような音響出力は、曲を確認するために行われてもよい。ユーザが供給された曲を聴くと、探していた曲であるか否かを再度確認さえしてもよく、このときだけ識別データを供給する。例えば、どの曲との間でも決められた最小限の一致度が無い為どの曲も選択されないとき、例えば、「識別が可能でない」といったテキストがこの情報に従って供給される。
【０００９】
一曲だけでなく、複数の曲及び／又はそれらの識別データを供給することも可能であることが好ましく、これら複数の曲及び／又はそれらの識別データに対して多くの適合性が決定され、又は、供給するためにこれら曲の及び／又はそれらの識別データを提供する。つまり、最も多くの一致度がある題名だけでなく、ｎ（ｎ＝１、２、３、．．．）の最も類似する題名も供給され、ユーザは、確認目的のために連続する題名を聞くことができ、又は、ｎの題名全ての識別データが供給され得ることを意味する。
【００１０】
特に好ましい実施例では、一致度を決定するためにメロディー及び／又は歌詞の一部の所与の特徴的な特性が抽出される。これら決定された特徴的な特性からメロディー及び／又は歌詞の一部を特徴付ける特徴的な特性の組が決定される。このような特徴的な特性の組は、各曲の「指紋」に類似する。特徴的な特性の組は、分析装置に既知の曲を夫々特徴付ける特徴的な特性の組と比較される。これは、処理されるべきデータ量がかなり小さく、方法全体を早めるといった利点を有する。更に、データバンクは、この場合全ての情報を有する完全な曲又は曲の一部分を記憶する必要はもはやないが、特徴的な特性の特定の組だけが記憶され、要求されるメモリ場所はかなり小さくなる。
【００１１】
有利には、メロディー及び歌詞の一部入力が音声認識システムに供給される。関連する歌詞も抽出され得、音声認識システムに別々に供給されてもよい。この音声認識システムでは、認識された単語及び／又は文は、異なる曲の歌詞と比較される。このために歌詞は、当然のことながらデータバンク中に特徴的な特性として記憶されるべきである。音声認識を早めるためには、音声認識システムが関連する言語に対して必要なライブラリーにアクセスすることだけが必要で他の言語のライブラリーを不必要に探さなくてよいよう、予め歌詞の一部入力の言語が示されていると適当である。
【００１２】
例えば、認識されたリズム及び／又は音程を記憶された曲の特徴的なリズム及び／又は音程と比較し、このようにしてメロディーに関して対応する曲を見つける音楽認識システムにメロディー及び歌詞の一部が供給されてもよい。
【００１３】
メロディー及び歌詞を別々に分析し、両方から所与の曲を別々に探すことも例えば、可能である。その後、メロディーを介して見つけられた曲が歌詞を介して見つけられた曲に対応するか否かが比較される。さもなければ、一つ以上の曲が異なる方法を通じて見つけられる曲から最も類似する曲として選択される。この場合、所与の方法を通じて見つけられた曲がどの確率で正しく選択された曲であるかが確認される重み付けが実施されてもよい。
【００１４】
歌詞のない一つのメロディー或いはメロディーの一部、又は、関連するメロディーの無い曲の歌詞或いは歌詞の一部だけを供給することも可能である。
【００１５】
本発明によると、このような方法を実施する分析装置は、識別されるべき曲のメロディー及び／又は歌詞の一部を供給する手段を有するべきである。更に、幾つかの曲又はその一部を有するデータバンクを有するメモリ、又は、少なくともこのようなメモリにアクセスする手段、例えば、他のインターネットメモリへのアクセスのためのインターネット接続を含むべきである。更に、この分析装置は、メロディー及び／又は歌詞の一部と異なる曲又はその一部との間で一致度を決定する比較装置、並びに、決定された一致度を参照して少なくとも一つの曲を選択する選択装置とを必要とする。最後に、分析装置は、選択された曲の識別データ及び／又は選択された曲自体を供給する手段を有する。
【００１６】
本発明による方法を実施するこのような分析装置は、例えば、メロディー及び／又は歌詞の一部を供給する手段としてマイクロホンを有する自己支持型装置として形成されてもよく、マイクロホンを用いてユーザは知っている歌詞を伝えても歌ってもよく、又は、対応するメロディーを口笛で吹いてもハミングしてもよい。当然のことながら曲は、マイクロホンの前で再生されてもよい。この場合、出力手段は、音響出力装置、例えば、選択された曲又は複数の選択された曲が完全に又は部分的に確認のために再生されるラウドスピーカを有することが好ましい。識別データは、この音響出力装置を介して音響的に供給されてもよい。しかしながら、分析装置は、代わりに又は追加的に、光学出力装置、例えば、識別データを上に示すディスプレイも有し得る。分析装置は、供給されるように提供された曲を選択するために曲の出力を確認し、又は、識別のために有用な追加情報、例えば、歌詞の言語等を供給する対応する作動装置も有することが好ましい。このような自給自足型装置は、例えば、消費者に勧めるために使用され得るメディア店にあり得る。
【００１７】
特に好ましい実施例では、メロディー及び／又は歌詞の一部を供給する分析装置は、端末装置から対応するデータを受信するインタフェースを有する。同様にして、識別データ及び／又は選択された曲を供給する手段は、対応するデータを端末装置に伝送するインタフェースを用いて実現される。この場合、分析装置は、全ての任意の位置にあってもよい。ユーザは、メロディー又は歌詞の一部を通信端末装置に供給し、通信ネットワークを介して分析装置に伝送し得る。
【００１８】
有利には、メロディー及び／又は歌詞が供給される通信端末装置は、移動式通信端末装置、例えば、モバイル電話機である。このようなモバイル電話機は、マイクロホン並びにここではモバイル無線ネットワークである通信ネットワークを介して記録された音響信号を任意の数の他の装置に伝送する要求された手段を有する。この方法は、ユーザが例えば、ディスコ或いはデパートのバックグラウンドミュージックとして曲を聴くと、自身のモバイル電話機を通じて分析装置と接続をすぐに確立することができ、モバイル電話機を介して現在の曲を分析装置に「再生」し得るといった利点を有する。元の音楽のこのような一部を用いると、ユーザ自身によって歌われる或いは伝えられる、かなり変形され得る音楽及び／又は歌詞の一部を用いるよりも識別がはるかに容易である。
【００１９】
選択された曲又はその一部の識別データ及び音響出力の供給も対応するインタフェースを通じて行われ、このインタフェースを介して関連するデータがユーザ端末に伝送される。この端末は、同じ端末装置、例えば、メロディー及び／又は歌詞の一部が供給されるユーザのモバイル電話機でもよい。これは、オンラインで、又は、オフラインで行われてもよい。例えば、確認するための選択された曲又は複数の選択された曲或いはその一部は、端末装置のラウドスピーカを介して供給される。題名及びパフォーマーのような識別データ、並びに、可能性として選択可能な出力提供物が例えば、端末装置のディスプレイ上のＳＭＳを用いて伝送されてもよい。
【００２０】
提供される曲の選択及び分析装置のための他の制御コマンド又は追加情報は、従来の操作制御、例えば、端末装置のキーボードを用いて行われ得る。
【００２１】
しかしながら、データは、対応する音声インタフェース、即ち、音声認識及び音声出力システムを分析装置中に必要とする自然音声ダイアログを介して供給されてもよい。
【００２２】
或いは、検索は、オフラインで、即ち、メロディー及び／又は歌詞の一部を入力した後、及び、他のコマンド並びに情報を入力した後に行われてもよく、ユーザ又は分析装置が分析装置との接続を遮断する。分析装置は、結果を見つけた後、例えば、ＳＭＳを介して又は音声チャネルを通じての呼を介してこの結果をユーザの通信端末装置に返す。
【００２３】
このようなオフライン方法では、ユーザは、他の別の通信端末装置、例えば、自身のホームコンピュータ又は結果が伝送される電子メールアドレスを示すことも可能である。結果は、ＨＴＭＬ文書の形態又は同様の形態で伝送され得る。伝送アドレス、即ち、結果が伝送されるべき通信端末装置のアドレスの標識は、メロディー及び／又は歌詞の一部を入力する前又は後のいずれかに対応するコマンド及び標識によって行われてもよい。しかしながら、関連するユーザが要求されるデータが記憶される分析装置を操作するサービスプロバイダと予め明確に登録することも可能である。
【００２４】
特に好ましい実施例では、選択された曲又は関連する識別データに加えて、関連する選択された曲に類似する、更なる曲又はそれらの識別データが供給又は供給するために提供されることが随意に可能である。つまり、例えば、ユーザ自身の好みによる更なる題名をユーザが知ることができるように認識された題名のスタイルに類似するスタイルを有する追加情報として曲の題名が示され、この更なる題名の曲をユーザが買う可能性がある。
【００２５】
２つの異なる曲の間の類似度は、例えば、非常に強い又は弱いベース、メロディー内の所与の周波数の変動等のような音響心理学的範囲に基づいて決定されてもよい。２つの曲の間で類似性を決定するための代わりの可能性は、傾聴経験及び／又は市場分析、例えば、消費者の行動分析によって設定される範囲マトリクスを使用することである。
【００２６】
【発明の実施の形態】
本発明の上記及び他の面は、以下に説明する実施例を参照して明らかになり明確になる。
【００２７】
図１に示す方法では、ユーザは、分析装置１と通信するためにモバイル電話機２を使用する。このためにユーザの近くにある任意の音源５によって現在再生されているメロディー及び／又は歌詞の一部ＭＡは、モバイル電話機２のマイクロホンによって検出される。メロディー及び／又は歌詞の一部ＭＡは、モバイル電話網を介して分析装置１に伝送され、この分析装置１はモバイル電話網と、又は、固定の電話回線網と相当する接続を有しなくてはならず、従ってこの電話回線網を介してユーザによってダイヤルされ得る。
【００２８】
原則として、よりよい伝送の質を実現するために変更されてもよい市販のモバイル電話機２が使用されてもよい。モバイル電話機２を介して分析装置１を制御することは、モバイル電話機２上のキー（図示せず）を手段として対応するメニュー制御を介して実現されてもよい。しかしながら、音声制御されたメニューも使用され得る。
【００２９】
所与の特徴的な特性は、得られたメロディー及び／又は歌詞の一部ＭＡから分析装置１によって抽出される。メロディー及び／又は歌詞の一部ＭＡを特徴付ける特徴的な特性の組は、これら決定された特徴的な特性から決定される。分析装置１は、データバンクを有するメモリ４と通信し、このデータバンクは、異なる曲を夫々特徴付ける特徴的な特性の対応する組ＭＳを有する。このデータバンクは、関係のある関連する曲の題名及びパフォーマーのような要求される識別データも有する。メロディー及び／又は歌詞の一部ＭＡの特徴的な特性の特徴的な組をメモリ４のデータバンクに記憶される特徴的な特性ＭＳの組と比較するために、比較されるべき特徴的な特性の組の間で相関係数が分析装置１によって決定される。これら相関係数の値は、特徴的な特性の関係のある組の間の一致度を表示する。つまり、メモリ４に記憶される特徴的な特性の組ＭＳの最大の相関係数は、モバイル電話機２に供給されるメロディー及び／又は歌詞の一部ＭＡと最も一致する曲と関連する。この曲は、関連する識別された曲として選択され、関連する識別データＩＤはモバイル電話機２に分析装置１によってオンラインで伝送され、モバイル電話機２上、例えば、ディスプレイ上に表示される。
【００３０】
メロディー及び／又は歌詞の一部ＭＡが音源５によって直接的に供給される上記方法では、通常の音声又はサンプル認識と比較して、識別のために供給されるメロディー及び／又は歌詞の一部と選択されるべき関係のある正確な曲との間で少なくとも固定の共通の時間フレームが考えられ得るよう、曲が略同じ速さで常に再生されることが考えられる限り識別は簡略化される。
【００３１】
図２は、識別がオフラインで行われる僅かに異なる方法を示す。
【００３２】
識別されるべき曲又はこの曲のメロディー及び／又は歌詞の一部ＭＡもユーザのモバイル電話機２に外部の音源５を通じて供給され、その後情報が分析装置１に伝送される。更に、メロディー及び／又は歌詞の一部を特徴付ける特徴的な特性の組ＭＳを予め決定することによるこの種類の分析は、第１の実施例と同様に行われる。
【００３３】
しかしながら、図１の実施例と比較して、識別の結果は、ユーザのモバイル電話機２に返されない。その代わりに、この結果は、インターネットを介する電子メール或いはＨＴＭＬページとしてユーザのＰＣ３又はユーザによって示されるＰＣ或いは電子メールアドレスに送られる。
【００３４】
識別データに加えて、関連する曲ＭＴ自体又は少なくともその一部も、ユーザが確認のためにこの曲を聞くことができるよう、ＰＣに伝送される。曲を特徴付ける特徴的な特性の組と共にこれら曲ＭＴ（又はその一部）はメモリ４に記憶される。
【００３５】
検索した曲が入っているＣＤのための注文用紙、広告材料、又は、追加情報が更に送られてもよい。追加情報、例えば、識別された題名に類似する更なる題名がユーザに送られてもよい。
【００３６】
類似度は、図３に示すような範囲マトリクスＡＭを介して決定される。この範囲マトリクスＡＭの要素Ｍは類似度係数、即ち、２つの曲間の類似の尺度を示す値である。当然のことながら曲は、自身に百パーセント類似し１．０の値が対応するフィールドにプロットされる。関連する例では、題名１、題名３、並びに題名５の曲が特に類似する。反対に、題名４又は題名６の曲は、題名１の曲と全く似ていない。従って、曲が題名１として識別されたユーザは、題名３及び５の曲を追加的に提供される。
【００３７】
このような範囲マトリクスＭＡもメモリ４に記憶され得る。範囲マトリクスは、例えば、比較的大きい試験聴衆との主観的な傾聴経験に基づき、又は、消費者の行動分析に基づいて決定されてもよい。
【００３８】
分析装置１は、任意の位置に配置されてもよい。この装置は、従来のモバイル電話機との接続のために必要なインタフェース、又は、インターネット接続だけを有するべきである。分析装置１は、図中統一性のある装置として示される。当然のことながら分析装置１の異なる機能は、ネットワークで一緒に接続されている、異なる装置の中で分散されてもよい。分析装置の機能は、適当なコンピュータのソフトウェア又は、十分な計算又は記憶容量を有するサーバの形態で大部分が又は完全に実現されてもよい。統一性のあるデータバンクを有する単一の中央メモリ４を使用する必要もないが、異なる位置にあり例えば、インターネット又は別のネットワークを介して分析装置１によってアクセスされ得る多数のメモリが使用されてもよい。この場合、異なる音楽プロダクション及び／又は販売会社が夫々の曲を夫々の独自のデータバンクに記憶し、分析装置にこれら異なるデータバンクにアクセスさせ得ることが特に可能である。異なる曲の特徴的な情報を特徴的な特性の組に減らすとき、特徴的な特性が同じ方法を用いて曲から抽出され、且つ、特徴的な特性の組がこのようにして互換性を実現するよう同じ方法で構成されることが有効に確実にされる。
【００３９】
本発明による方法により、ユーザは、所望の音楽を購入するのに必要なデータを簡単に捕捉し、現在再生している音楽を迅速に識別することが可能となる。更に、この方法によりユーザは、個人的な好みに相当する更なる曲に関しても通知され得る。この方法は、潜在的な消費者にその消費者が興味を持つ正確な音楽を提供し、所望のターゲット群をひきつけられる限り音楽販売会社に有利である。
【図面の簡単な説明】
【図１】必要なデータを入力及び出力するためのモバイル電話機を用いてオンライン検索するための本発明による方法を示す図である。
【図２】必要なデータを入力するためにモバイル電話機を使用し、結果として生ずるデータを出力するためにＰＣを使用する、オフライン検索するための本発明による方法を示す図である。
【図３】異なる曲の間で類似性を決定する範囲マトリクスを示す図である。
【符号の説明】
１ 分析装置
２ モバイル電話機
３ ＰＣ
４ メモリ
５ 音源

Claims (14)

1. 識別されるべき曲のメロディー及び／又は歌詞の少なくとも一部を接続を介して分析装置に供給する段階と、
   上記メロディー及び／又は歌詞の一部と、上記分析装置にとって既知の曲又は上記既知の曲の一部との間で一致度を決定する段階と、
   決められた最小限の一致度がある限りにおいて、上記決定された一致度を参照して、少なくとも一つの上記既知の曲を選択する段階と、
   上記選択された曲の識別データを結果として供給する段階、及び／又は、上記選択された曲自体の少なくとも一部を結果として供給する段階、若しくは、曲が選択されない限りにおいて、曲が選択されなかったことを示す情報を結果として供給する段階と
   を有する、曲を識別する方法であって、
   上記メロディー及び／又は歌詞の少なくとも一部が上記分析装置へ供給された後、上記分析装置、あるいは上記メロディー及び／又は歌詞の少なくとも一部を入力するユーザは、上記分析装置との上記接続を遮断し、上記分析装置は、上記結果を決定した後、該結果を上記ユーザのユーザ指定の通信端末装置へ供給する、ことを特徴とする方法。
2. 最大の一致度が決定された複数の曲及び／又は上記複数の曲の識別データが供給されることを特徴とする請求項１記載の方法。
3. 上記一致度を決定することに関して、上記メロディー及び／又は歌詞の一部の所与の特徴的な特性が抽出され、決定された特徴的な特性からメロディー及び／又は歌詞の一部を特徴付ける特徴的な特性の組が決定され、上記特徴的な特性の特徴付けの組が上記既知の曲を特徴付ける特徴的な特性の組と比較されることを特徴とする請求項１又２記載の方法。
4. 上記メロディー及び／又は歌詞の一部の上記特徴的な特性の特徴付けの組とデータバンク中に記憶される特徴的な特性の組とを比較することに関して、比較されるべき上記特徴的な特性の組の間で相関係数が決定され、上記相関係数の値は、特徴的な特性の関連する組の間の一致度を表示することを特徴とする請求項３記載の方法。
5. 供給されるメロディー及び／又は歌詞の一部、若しくは、それによって抽出される歌詞は、音声認識システムに供給され、
   上記音声認識システム中で認識される単語及び／又は文は、異なる曲の歌詞と比較されることを特徴とする請求項１乃至４のうちいずれか一項記載の方法。
6. 上記メロディー及び／又は歌詞の一部が供給される上記通信端末装置は、モバイル通信端末装置であることを特徴とする請求項１記載の方法。
7. 上記選択された曲及び／又は上記選択された曲の識別データは、上記メロディー及び／又は歌詞の一部が与えられる上記通信端末装置に返されることを特徴とする請求項１又は６記載の方法。
8. 上記選択された曲及び／又は関連する識別データに加えて、少なくとも、上記選択された曲に類似する更なる曲及び／又は上記更なる曲の識別データが供給されることを特徴とする請求項１乃至７のうちいずれか一項記載の方法。
9. ２つの曲の間の類似度は、傾聴経験及び／又は市場分析（消費者の行動分析）を用いて設定されるマトリクスに基づいて決定され、
   前記マトリクスは、２つの曲の間の上記類似度の程度を示す値を有する、ことを特徴とする請求項８記載の方法。
10. 識別されるべき曲のメロディー及び／又は歌詞の少なくとも一部を接続を介して分析装置に供給する手段と、
    異なる曲又は上記異なる曲の一部を含むデータバンクを有するメモリ、あるいは、少なくともこのようなメモリにアクセスする手段と、
    上記メロディー及び／又は歌詞の一部と、異なる曲又は上記異なる曲の一部との間で一致度を決定する比較装置と、
    決められた最小限の一致度がある限りにおいて、上記決定された一致度を参照して、少なくとも一つの曲を選択する選択装置と、
    上記選択された曲の識別データ及び／又は上記選択された曲自体を結果として供給する手段と
    を有する、請求項１乃至９のうちいずれか一項記載の方法を実施する分析装置であって、
    上記メロディー及び／又は歌詞の少なくとも一部が上記分析装置へ供給された後、上記分析装置、あるいは上記メロディー及び／又は歌詞の少なくとも一部を入力するユーザは、上記分析装置との上記接続を遮断し、上記分析装置は、上記結果を決定した後、該結果を上記ユーザのユーザ指定の通信端末装置へ供給する、ことを特徴とする分析装置。
11. 上記分析装置は、上記メロディー及び／又は歌詞の一部の所与の特徴的な特性を抽出し、上記メロディー及び／又は歌詞の一部を特徴付ける特徴的な特性の組を上記決定された特徴的な特性から決定する手段を有し、
    上記メモリのデータバンクは、上記曲を夫々特徴付ける特徴的な特性の対応する組を有することを特徴とする請求項１０記載の分析装置。
12. 上記メロディー及び／又は歌詞の一部を供給する手段は、マイクロホンを有し、
    上記識別データ及び／又は上記選択された曲を供給する手段は、音響出力ユニット及び／又は光学出力ユニットを有することを特徴とする請求項１０又は１１記載の分析装置。
13. 上記メロディー及び／又は歌詞の一部を供給する手段は、端末装置から対応するデータを受信するインタフェースを有し、
    上記識別データ及び／又は上記選択された曲を供給する手段は、対応するデータを端末装置に伝送するインタフェースを有することを特徴とする請求項１０乃至１２のうちいずれか一項記載の分析装置。
14. 上記選択された曲に類似する更なる曲を選択する手段によって特徴付けられる請求項１０乃至１３のうちいずれか一項記載の分析装置。

Images