JP5432264B2 - コレクションプロファイルの生成及びコレクションプロファイルに基づく通信のための装置及び方法 - Google Patents

コレクションプロファイルの生成及びコレクションプロファイルに基づく通信のための装置及び方法 Download PDF

Info

Publication number
JP5432264B2
JP5432264B2 JP2011524234A JP2011524234A JP5432264B2 JP 5432264 B2 JP5432264 B2 JP 5432264B2 JP 2011524234 A JP2011524234 A JP 2011524234A JP 2011524234 A JP2011524234 A JP 2011524234A JP 5432264 B2 JP5432264 B2 JP 5432264B2
Authority
JP
Japan
Prior art keywords
collection
profile
information
media data
entity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011524234A
Other languages
English (en)
Other versions
JP2012511189A (ja
Inventor
ダグフィン バッハ
セバスチャン シュミット
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bach Tech AS
Original Assignee
Bach Tech AS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bach Tech AS filed Critical Bach Tech AS
Publication of JP2012511189A publication Critical patent/JP2012511189A/ja
Application granted granted Critical
Publication of JP5432264B2 publication Critical patent/JP5432264B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/683Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/635Filtering based on additional data, e.g. user or group profiles
    • G06F16/637Administration of user profiles, e.g. generation, initialization, adaptation or distribution
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/63Querying
    • G06F16/638Presentation of query results
    • G06F16/639Presentation of query results using playlists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/60Information retrieval; Database structures therefor; File system structures therefor of audio data
    • G06F16/68Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、メディアデータの処理に関し、特に、メディアデータの特徴描写及びその使用に関する。
MP3再生機又はMP4再生機などといった携帯型のメディアデータ再生機が、ますます一般的になってきている。さらに、最新のオーディオ符号化ツールによって得られる高いデータ圧縮率により、個々のオーディオ又はビデオファイルについてのストレージの要件が少なくなってきている。同時に、メモリの価格も低下してきている。これらのメモリは、携帯型のビデオ又はオーディオ再生機において使用されるチップメモリ又はハードディスクであってもよい。これらのメモリの価格がますます低下しているため、ユーザは、ますます多くの様々なメディア・データ・アイテムを自身の再生機に保存することができる。
さらに、オーディオ及び/又はビデオの再生機能は、専用のオーディオ又はビデオ再生機に限らず、携帯電話機、PDA、ナビゲーション装置などといったさらに多くの携帯デバイスにおいて利用可能である。当然ながら、ノート型コンピュータも、完全なオーディオ/ビデオ再生機能を有しており、当然ながら、巨大なハードディスク資源ゆえに、ほぼ無限の記憶容量を有している。
以上に鑑み、ユーザは、オーディオファイル又はビデオファイルなどのメディア・データ・アイテムを自身の電子データキャリアにますます大量に保存し、これらの増大するデータベースを管理するための作業が、ますます難しくなっている。多くの携帯デバイスは、1つのオーディオファイルについて、そのオーディオファイルのタイトル、オーディオファイルを演じている作家又はバンド、オーディオファイルの属するアルバム、及び例えばそのオーディオファイルの再生時間を示すID3タグをサポートしている。これらの情報アイテムを、携帯型の再生機によって読み出し、携帯型の再生機によって表示し、例えばユーザによる再生リストの編集を補助するために使用することができる。
さらに、MPEG−7規格は、さらなるメタデータをオーディオファイルに含めることを定義している。これらのオーディオ・ファイル・メタデータは、テンポ、毎分のビート数、など、メディア・データ・アイテムのオーディオコンテンツに関する追加の特徴を含んでいる。これらの特徴は、メディア・データ・アイテムをさらによりコンテンツに関連した方法で特徴描写するために使用することができ、これらの特徴は、オーディオファイルにおいて、テキストファイルでの検索機能に匹敵するような検索能力に最終的に到達するための基礎を形成する。
電子記憶デバイス上のメディア・データ・アイテムの具体的な選択は、各ユーザが自身の固有の個人的な電子記憶デバイスに様々なメディア・データ・アイテムをロードするため、ユーザごとに極めて特有な個々のコレクションを呈する。従って、メディア・データ・アイテムのコレクションは、この電子メディア・データ記憶デバイスのユーザを特徴付ける極めて個人的な問題である。
本発明の目的は、ユーザの特徴付けに基づいて電子データ処理装置が所定の作業を実行できるように、ユーザを特徴付ける概念を提供することである。
この目的は、コレクションプロファイルを生成するための請求項1に記載の装置、第1エンティティから第2エンティティへと情報を通信するための請求項13に記載の装置、コレクションプロファイルを生成するための請求項17に記載の方法、第1エンティティから第2エンティティへと情報を通信するための請求項18に記載の方法、又は請求項19に記載のコンピュータプログラムによって達成される。
本発明は、種々のメディアデータのコレクションの所有者(又は一般的には種々のメディアデータのコレクションが保存された電子記憶デバイスのユーザ)の特徴を描写するという目的のために、電子記憶デバイス上のメディア・データ・アイテムの極めてユーザ特有(特に個人特有)のコレクション(又は一般的には特定のユーザによって所有された種々のメディア・データ・アイテムからなるコレクション)を好都合に利用できるという知見に基づいている。第1段階において、メディア・データ・アイテムのコンテンツを記述する種々の特徴が、複数のメディア・データ・アイテムについて抽出される。第2の段階において、複数のメディア・データ・アイテムの前記抽出された特徴を結合するか、又は抽出され重み付け(例えば1とは異なりかつ0とも異なる係数で乗算)された特徴を結合することによって、プロファイル生成器はコレクションプロファイル、即ちコレクションのコンテンツの定量的なフィンガープリントを表す定量的なコレクションプロファイルを生成する。
この定量的なフィンガープリントは、オーディオデータに基づいて生成される場合には、「音楽DNA」と称することもできる。なぜならば、この音楽DNAは、種々のメディア・データ・アイテムからなるコレクションの特徴を個別に描写するからである。種々のメディア・データ・アイテムからなるコレクションは、種々のメディア・データ・アイテムからなるコレクションを生成した各人ごとに異なるため、各メディア・データ・コレクションについての定量的なフィンガープリントは、他のメディア・データ・アイテム又は他のメディア・アイテム・コレクションからの定量的なフィンガープリントとは相違する。
一般に、定量的なフィンガープリントである本発明のコレクションプロファイルは、フィンガープリントの2つの異なりかつ矛盾する要件を満たす。一方では、フィンガープリントの保存に必要な記憶容量が過大にならないように、フィンガープリントが必要とするデータ量を可能な限り少なくしなければならず、さらに重要なことは、データベースにおけるこのフィンガープリントの使い方に関する処理(データベースにおいて、類似のプロファイル又はフィンガープリントを見つけるため、このフィンガープリントを他の対応するフィンガープリントと照合する)の要件が、フィンガープリントが小さいほど小さくなる。
他方では、フィンガープリントは、このフィンガープリントによって示されるアイテムに関して可能な限り特徴的でなければならない。フィンガープリントがユーザコレクションに関して特徴的であることを保証するため、フィンガープリントは、例えば純粋なハッシュ法や他の損失の多い圧縮によって導出されるのではなく、メディアデータのコンテンツを表す特徴から導出される。その結果、フィンガープリントは、追加的情報を持たずにメディア・データ・ファイルだけを表現することにはならず、代わりに、例えばメディア・データ・アイテムの波形又はビット構造などよりもむしろメディア・データ・アイテムのコンテンツを実際に表現するようになる。
従って、本発明のコレクションプロファイルは、電子データ機器による処理を受ける能力を提供するものであり、この能力は、コレクションプロファイルが、その定量性によりデータベース照合作業などにおいて処理が可能である、定量的なフィンガープリントであるという事実に基づいている。他方では、そのフィンガープリントが、一実施形態においては個別の各特徴について一種の平均となるメディア・データ・コレクションのコンテンツを表現するように、有用な幾つかのコンテンツの特徴から導出されるため、そのフィンガープリントは、平均化された複数の異なる特徴のコレクション又はベクトルで構成される。
重要な点は、フィンガープリントは、特定の波形又は特定のビット構造を示すのではなく、種々のメディア・データ・アイテムからなるコレクションにおけるユーザのメディア嗜好、即ちオーディオ嗜好又はビデオ嗜好などを示すという点である。
本発明のこのコレクションプロファイルは、単一ファイルのメタデータを表現するのではなく、多数の異なるメディア・データ・アイテムからなるコレクションのためのメタデータを表現するものであり、多数の様々な目的に使用することができる。その全てに共通する目的とは、コレクションプロファイルとデータベースアプリケーション内のコレクションプロファイルの所定の使用方法とに基づき、電子データ処理装置の所定の通信動作を実行することであり、その結果、ユーザが前記コレクションプロファイル(例えばメディア・データ・アイテムがオーディオファイルである場合には、音楽DNAと称することもできる)によって表される自分のメディア嗜好に最適な行為を実行し又は所定のサービスを受られるようにすることである。
次に、本発明の好ましい実施形態を、添付の図面を参照して詳しく説明する。
コレクションプロファイルを生成するための本発明の一実施形態による装置の概略を示す。 第1エンティティから第2エンティティへと情報を通信するための装置のブロック図を概略図にて示す。 メディアコレクションについての情報を有し、かつメディア・データ・コレクションを記憶した記憶デバイスについての情報を有する出力コレクションプロファイルを生成するための好ましいプロセスを示す。 音楽DNAを生成するための種々の特徴ベクトルの例示的な処理及び照合を目的とした音楽DNAのさらなる処理を示す。 図4aから得られた照合作業の結果リストを示す。 信頼度値のマッピングを説明するために、距離−対−並べ替え後の結果リストのメディアアイテム番号の図を示す。 信頼度値が使用される本発明の照合作業の好ましい実施形態を説明するフロー図を示す。 1つのグループ又は部屋のために選択されたオーディオ作品を再生することを目的としたコレクションプロファイルの所定の使用方法を示す。 ユーザが自身のコレクションプロファイルに基づいてユーザグループに加入することができる別の実施のシナリオを示す。 あるユーザの音楽DNAが、そのユーザに一致するメディアアイテムを提供するか又はそのユーザのメディアデータの嗜好に関係する製品若しくはサービスの広告を提供するために使用される、別の実施例を示す。 あるユーザの音楽DNAがそのユーザの現在の嗜好又は外的状況に応じて修正され、そのユーザが修正後のコレクションプロファイルを使用して自身のプロファイルから一致するメディアアイテムを発見することができる、別の実施のシナリオを示す。 ユーザDNAの概略図を示す。 ユーザのコレクションプロファイルへと結合可能な定性的特徴及び定量的特徴の概要を示す。 メタデータが組み合わされたオーディオファイルの概略図を示す。 所定のコレクションプロファイルに関係する製品が選択されて広告される、応用シナリオの説明を示す。 種々のメディア・データ・アイテムからなるコレクションを生成するための装置の概略図を示す。 メディア・データ・アイテムのメディアメタデータ部分のデータ書式を示す。
図1は、種々のメディア・データ・アイテム45a、45b、45c、45dからなるコレクション45のコレクションプロファイル50を生成するための装置の好ましい実施形態を概略的な方法で示す。好ましくは、これらのメディア・データ・アイテムは携帯デバイスの記憶手段40に保存され、この携帯デバイスは、携帯電話機、オーディオデータ再生機、ビデオデータ再生機、携帯情報端末(PDA)、ノートブック、ナビゲーション装置、又はメディア・データ・ファイルを保存する能力(メモリスティックなど)を有する同種の装置(オーディオデータ又はビデオデータの再生能力を有しても有さなくてもよい)を含むことができる。さらに、このコレクションは、記憶デバイス上の全てのメディア・データ・アイテムを含んでも良く、記憶デバイス上のメディア・データ・アイテムの所定の一部だけを含んでもよく、又は1人の同じユーザによって所有されるパーソナルコンピュータ、ノートブック、携帯型再生機など、ユーザの所有する幾つかの異なるデバイスの記憶要素を含むこともできる。しかしながら、ユーザのメディア・データ・アイテムを保存する電子記憶デバイスが全て互いに同期している場合には、非常に洗練されたユーザDNAを有するコレクションプロファイルを導出するために、一つのデバイスを持つだけで充分である。
この装置は、コレクションの複数のメディア・データ・アイテムについて、各メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴11を抽出するための特徴抽出器10を備えている。従って、特徴抽出器10がメディア・データ・アイテムを順番に処理し、異なる特徴F1、F2・・・Fiを各メディア・データ・アイテムについて導出する。一実施形態においては、特徴抽出器10がメディア・データ・アイテムを実際に分析して、メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴を導出する。他のより好ましい実施形態においては、図1に参照番号45で示されるように、メディア・データ・アイテムに既にメタデータが組み合わされており、特徴抽出器は、1つのメディア・データ・アイテムについて少なくとも2つの異なる特徴F1、F2を抽出するために、メディア・データ・アイテムのメタデータ部分を分析及び評価するだけでよい。特徴抽出器10によって抽出された全ての特徴は、コレクションプロファイルを生成するためのプロファイル生成器20へと供給される。プロファイル生成器は、メディア・データ・コレクションのコンテンツの定量的なフィンガープリントがコレクションプロファイルによって表現されるように、複数のメディア・データ・アイテムについて、抽出された特徴を結合するか、又は抽出された特徴を重み付けした上で結合する。メディア・データ・ファイルがオーディオファイルである場合、コレクションプロファイルはユーザの音楽DNAであり、ここで、通常は生物学におけるデオキシリボ核酸を意味する用語「DNA」は、ユーザの音楽嗜好の極めて個人的なユーザ固有の特徴描写を表す。
ユーザのコレクションプロファイル50を後の使用のために保存することができ、又は情報ハンドラ60を介して別のエンティティへと送信することができ、さらにはデータベースにおける照合作業の実行に使用することもできる。このデータベースは、他のユーザのコレクションプロファイル又はオーディオ・データ・アイテムのフィンガープリントを含むことができ、例えばコレクションプロファイルに最もよく一致するオーディオ・データ・アイテムの特定を行うことができる。一般に、情報ハンドラ60は、コレクションプロファイルのユーザ又はコレクションプロファイルのユーザとの通信が可能である別のエンティティに、所定のメッセージ/サービスなどを提供するために、コレクションプロファイルに基づく或る方法でアクション65を実行する。
好ましい実施形態においては、プロファイル生成器20が、抽出された特徴及び抽出され重み付けされた特徴の加算、減算、乗算、又は除算を使用して、定量的なコレクションプロファイルを生成するように動作することができる。具体的には、同じコンテンツに属する特徴がそれら同士で結合され、最終的にプロファイル生成器によって得られるコレクションプロファイルが、特徴抽出器によって抽出された特徴の数と同一数のコレクションプロファイル構成要素を有する。
図2は、第1エンティティから第2エンティティへと情報を通信するための本発明の好ましい実施形態による装置を示している。この通信装置は、第1エンティティに位置する第1コレクションの第1コレクションプロファイルについての情報を生成し、又は第2エンティティに位置する第2コレクションの第2コレクションプロファイルについての情報を生成する、コレクションプロファイル情報生成器70を備えている。具体的には、コレクションプロファイルは、コレクションのコンテンツの定量的なフィンガープリントを表す。請求項1に関連して検討されるように、コレクションプロファイル情報生成器70は、図1の装置と同じ構成要素を備えることができる。上記に代えて、コレクションプロファイル情報生成器70は、コレクションプロファイル保存部から以前に生成されたコレクションプロファイルを取り出すことができ、その保存されたコレクションプロファイルを、図2のコレクションプロファイル情報生成器70とは別の図1による装置によって生成することができる。
さらに、図2に示されている装置は、図1の情報ハンドラ60に対応する情報ハンドラを備えている。なぜなら、図2の装置60は、図1の対応する構成要素60と同様の入力を受け取るからである。情報ハンドラは、第1エンティティ又は第2エンティティへと、第1コレクションプロファイル又は第2コレクションプロファイルに基づく情報を送信するように動作することができる。上記に代えて、情報ハンドラ60は、通信のための装置が第1エンティティ又は第2エンティティのいずれに位置しているかに応じて、第1エンティティ又は第2エンティティから第1コレクションプロファイル又は第2コレクションプロファイルに基づくメッセージを受信するように動作することができる。具体的には、図2に示した通信のための装置が第1エンティティに位置する場合、第2エンティティへの送信が行われ、第2エンティティからの受信が行われる。しかしながら、図2に示した装置が第2エンティティに位置する場合、第1エンティティへの送信が行われ、又は第1エンティティからの受信が行われる。
次に、音楽DNAなどのコレクションプロファイルを出力するように、この順序又は同様の順序で実行される好ましい一連の動作を示すために、図3をさらに詳しく説明する。
ステップ81において、オーディオファイルの特徴が抽出される。ステップ81において実行される動作は、図1の符号10によって実行される手順に相当する。ステップ82において、所定個数の極値が除去される。即ち、読み取り又は抽出のエラーが存在しても最終的なコレクションプロファイルに過剰に影響することがないように、全てのオーディオファイルの抽出された特徴から、幾つかの最大値又は極値が除去される。
図3に参照番号82で示されている除去のステップの後で、ステップ83に示されているとおり、生のコレクションプロファイルが計算される。この目的のために、異なるオーディオファイルの対応する特徴が結合され、ステップ83の後で定量的な生のコレクションプロファイルが得られる。次に、ステップ84において、生のコレクションプロファイル又は個々の特徴がユーザ嗜好の入力85に応じて重み付けされる。この実施形態においては、ユーザが幾つかの嗜好の細目を入力することができ、それによりユーザが自身のコレクションプロファイル/音楽DNAを操作することができる。所定の嗜好が種々の特徴の所定の重み付け係数に対応するように、この重み付けを特定の方法で生のコレクションプロファイルに対して実行することができる。上記に代えて、ステップ83による結合の前に個々の特徴の重み付けを行うことができる。このようにして、ユーザが好みのメディア・データ・アイテムに1よりも大きい重み付け係数を適用し、恐らくは他の全てのメディア・データ・アイテムに1よりも小さい重み付け係数を適用することによって、特定のメディア・データ・アイテムのユーザプロファイルへの影響を大きくすることができる。
さらなる好ましい実施形態においては、ステップ84の出力は、使用挙動(usage behavior)の入力部87を介してブロック86へと入力される使用挙動の統計に基づいて、ステップ86において精製される。ステップ86は、コレクションプロファイルが「生きている」ことを、コレクションプロファイルがユーザの傾向の変化に連れて変化することで保証する。ここでも、使用挙動の統計に基づくプロファイルの精製は、ステップ83の出力である生のコレクションプロファイル、又はステップ84の出力である重み付け済みの生のコレクションプロファイルを使用して行うことができる。上記に代えて、図3に示すように、頻繁に使用される特定のメディア・データ・アイテムの特徴ベクトルが使用頻度の少ないメディア・データ・アイテムの特徴ベクトルに比べて強調されるように、抽出された特徴に重み付けすることによって、使用挙動の統計を考慮することができる。さらに、最後の使用から現時刻までの時間を考慮に入れ、メディア・データ・アイテムがより最近に使用されたという事実があれば、このメディア・データ・アイテムを最近は使用されていないメディア・データ・アイテムに比べて強調してもよい。
ステップ86の出力は、特定の最新かつユーザ嗜好が加味されたコレクションプロファイルであり、好ましくは、ステップ88に示されるとおり、携帯デバイス及び/又は通信サービス提供者についての情報を付加することによって、さらに改善される。具体的には、携帯電話機の製造者又はノートブックの製造者など、電子記憶デバイスが作動可能に接続されたデバイスの製造者についての情報を、ユーザのコレクションへと追加することができ、さらには通信提供者についての情報も、好ましくは追加することができ、図5a〜図5cに関して説明される多数のアプリケーションにとって有用な出力のコレクションプロファイル89をもたらすことができる。
別の実施形態においては、ステップ83の出力を、追加のステップ84、86、88のいずれも必要とせずに、そのまま使用することができる。さらには、ステップ84、86、88のうちの1つ又は2つだけをステップ83の出力へと適用して、出力コレクションプロファイルを提供することができる。
さらなる好ましい実施形態においては、出力コレクションプロファイル/ユーザDNAの生成が自動的な方法で行われる。この目的のために、コレクション内の全ての歌曲から適切なDNAタグ(メタデータ)の抽出が実行される。次に、そのタグが類似の特徴について分析され、外れ値が排除される。次に、高レベルのタグがユーザ嗜好に基づいて重み付けされるが、この方法は、好ましくは個々の特徴ベクトルが結合の前に重み付けされる図3の代替案に相当する。さらに、このプロファイルは使用挙動の統計を使用することによって精製される。使用頻度とは別に、この特徴も、あるムードが他のムードよりも好まれることを可能にする。
続いて、例示的なコレクションプロファイルの決定を、図4aに関連して説明する。参照番号100は、図1では参照番号45で示す種々のメディア・データ・アイテムについて抽出された特徴のコレクションを示している。具体的には、行100aが図1に参照番号45aで示されている1番目のオーディオファイルの5つの異なる特徴F1〜F5のメタデータを示している。同様に、項目100bは図1のブロック45の2番目のメディア・データ・アイテムについて抽出された特徴を示している。
所定のプロファイルが計算されるメディア・データ・アイテムの組、即ちコレクションが、参照番号100で図4aの5つの例示的なメディア・データ・アイテムによって表されている。5つの特徴の全てが0〜10の間に広がるある数値範囲にて与えられる定量的な特徴であることを、図4aから見て取ることができる。図4aの実施形態においては、定量的な特徴の各々が0〜10の間に広がる同じ数値範囲を有している。しかしながら、他の実施形態においては、ある特徴の数値範囲が負の値を含んでもよい。さらには、異なる特徴の数値範囲が互いに異なってもよい。例えば、第1の特徴が0〜100の間の数値範囲を有し、第2の特徴が−10〜+10の間の数値範囲を有し、以下同様であってよい。
コレクション100の生の音楽DNA、即ち生のコレクションプロファイルを計算するために、全てのアイテムの対応する特徴F1が合計され、平均が計算される。算術平均が計算されている例示的な場合においては、この操作は、個々の特徴F1の加算と参加者の数によるその後の除算とを含む。第1の特徴F1についての結果は4.4である。同様に、対応する特徴F2〜F5についての平均が計算され、それらの値は、この実施形態では4.2、3.0、0.2及び8.2である。一実施形態においては、これらの平均からなるベクトル、即ちベクトル(4.4;4.2;3.0;0.2;8.2)がコレクションプロファイル又は音楽DNA(メディア・データ・アイテムがオーディオファイルである場合)である。
コレクションプロファイルの構成要素は、個々の特徴F1〜F5に対応する。従って、コレクションプロファイルは、5つの特徴がコレクションプロファイルに寄与しているため、5つの構成要素を有する。所定のアプリケーションに依るが、コレクションプロファイルの構成要素の数はこれより少なくてもよい。その場合、例えばコレクションプロファイルは構成要素を3つだけ有し、第1の構成要素が第1の特徴F1と第2の特徴F2との間の平均に相当し、第2の構成要素が第3の特徴F3と第4の特徴F4との間の平均に相当し、第3の構成要素が第5の特徴F5に相当するように、個々の構成要素を平均することもできる。
さらには、各DNA構成要素が元の特徴と同じ数値範囲を有することが図4aの例から明らかになる。しかしながら、DNA構成要素は特徴の間の平均を表すため、DNA構成要素の数値範囲は個々の特徴の数値範囲よりも小さくなることもできる。
音楽DNAの構成要素の数が、音楽DNAの抽出に用いられた個々の特徴の数と同一である図4aの例では、音楽DNAと特徴ベクトルとの間の距離を参照番号110に示される通り容易に計算することができる。この実施形態において、距離の値Dは、所定の音楽DNAと所定の特徴ベクトルとの間の幾何学的距離に相当する。特徴ベクトル、即ちメディア・データ・アイテムのメタデータが定量的なベクトルであり、音楽DNAも定量的なベクトルであるため、定量的な距離の値Dを、各特徴ベクトルと音楽DNAとの間で計算することができる。例示的な式が参照番号110に提示されているが、非2次距離、さらに高次の距離、対数距離などといった他の距離の値も適用可能である。
一致又は非一致の判断を、例示的には参照番号110にて計算される距離の値Dが所定の距離よりも小さい場合に行うことができる。この所定の距離はユーザが設定することが可能であり、所定の検索における照合のヒット数を決定する。さらには、あるメディア・データ・アイテムがセット内の他の全ての特徴ベクトル内の最小の距離Dをもたらす特徴ベクトルを有する場合に、音楽DNAとメディア・データ・アイテムとの間の一致を決定することもできる。
音楽DNAは、特徴ベクトルに類似した外観を有するため、特に有用である。従って、一致するメディア・データ・アイテムを発見するため、音楽DNAを複数のメディア・データ・アイテムと容易に比較することができ、代替的又は追加的に、音楽DNAを複数の異なる音楽DNAと比較することができる。従って、ある音楽DNAが他の音楽DNAと一致する場合の照合手順は、ある音楽DNAがメディア・データ・アイテムの特徴ベクトルに一致する場合の照合手順と同一である。
次に、列112を参照すると、ユーザの音楽DNAとユーザのコレクション100の全ての音楽アイテムとの間の距離の値Dが示されている。例えば、所定の距離が1.0に設定された場合、メディア・データ・アイテム1、2、3が一致するアイテムであると特定される。しかしながら、最も良好に一致するメディアファイルだけが抽出されるという選択が行われる場合、ID番号2を有するメディア・データ・アイテムがデータベース照合作業の結果として選択される、と考えられる。
図3のステップ84又は86に関連して説明したとおり、数値即ち音楽DNAの構成要素を操作するために、使用挙動又はユーザの嗜好を使用することができる。使用挙動を導入するための1つの方法は、最近再生されたもの又は頻繁に再生されたものの重みが、最近は再生されていないもの又は稀にしか再生されないものに比べて大きくなるように、生の音楽DNAを計算するための平均化の前に、特徴ベクトル100a、100bの重み付けを行うことであろう。
上記に代えて、計算された音楽DNAのそれぞれの構成要素を重み付けすることによって、ユーザの嗜好を考慮することができる。例えば、或る特徴(特徴F2など)がオーディオ作品のパーカッシブ性を表している場合において、高いパーカッシブ性を有しかつ他の特徴については自身の音楽DNAに一致する作品をユーザが望むときには、ユーザは自身の特有の音楽嗜好を幾つかの方法で実現することができる。1つの方法は、最終的に種々のメディア・データ・アイテムの特徴F2が追加の重み付け/精製によってさらに大きな値を有するように、各特徴ベクトルのパーカッシブ性を合成的に増加させることであろう。
上記に代えて、パーカッシブ性の平均、即ち図4aの参照番号100における値4.2を、ユーザが例えば8.4へと増加させることができる。その結果、自動的に、距離の値の計算がより高いパーカッシブ性を有するヒットをもたらす。例えば、ユーザが4.2に近いパーカッシブ性を有するオーディオ作品の選択を望む場合に、1よりも大きい重み付け係数によって第2の特徴に重みを持たせるように、ユーザは参照番号110の距離の値の計算Dを操作することができる。その結果、第2の特徴が距離の計算において他の特徴よりも優遇され、データベース照合作業の結果が第2の特徴F2が良好に一致する作品を優先する。
あるムードの音楽を優先するために、幾つかの特徴に対し、所定の重み付け係数によって集合的に影響を与えることができる。この目的のため、幾つかの特定の特徴について所定のムードを所定の重み付け係数へとマッピングするテーブルが好ましい。このように、特徴ベクトル又は音楽DNA又は距離の計算における上述のような変更は、上述のように単一の係数を使用して実行できるだけでなく、好ましくは異なる係数の集合体を使用して実行することができる。
図4bは、DNAの構成要素に影響を与え若しくは与えずに、又は距離の計算において特定の重み付け係数を使用し若しくは使用せずに、例えば照合規則110を使用することによって実行された照合作業の結果リストを示している。1つの照合作業がデータベース100において実行されるとき、1つの距離が各メディアアイテムについて得られ、典型的には、幾つかのメディアアイテムが良好に一致し、他のメディアアイテムはあまり一致しない。従って、照合作業の結果リストを、最小の距離を有するメディアアイテムが最初のメディアアイテムとなり、2番目に小さい距離を有するメディアアイテムが番号2となるような並べ替え済みのリストとして提示することができる。
図4cは、距離−対−並べ替え済みの結果リストにおける番号の図を示しており、図4bの表形式の結果リスト又は図4cの図形式の結果リストから、距離に関してメディアアイテム5とメディアアイテム6との間に所定の隔たりが存在することが明らかである。具体的には、番号1〜番号5の間のメディアアイテムが互いに非常に近い0.6〜2.2の間の距離を有する一方で、メディアアイテム番号6の距離はメディア番号5の距離よりも遥かに大きい。
好ましい実施形態によれば、信頼度しきい値(confidence threshold)が決定される。一般に、この信頼度しきい値を決定するために、並び替え済みのリストにおける或るメディアアイテムから並べ替え済みのリストにおける次のメディアアイテムまでの距離の変化が割り出され、この変化(即ち、2つの隣接する距離の間の差)があるしきい値よりも大きくなると、図4cに示されるように信頼度しきい値が決定される。
次に、この好ましい実施形態によれば、信頼度値(confidence measure)が信頼度しきい値を下回る距離を有する全てのメディアアイテムへとマッピングされ、しきい値を上回る距離を有する全てのメディアアイテムの信頼度値が0に設定される。これは、図4bの最後の列に示されているようなマッピングをもたらし、この例における信頼度値のマッピングのためのマッピング規則は、ある線形マッピング規則として示される。
しかしながら、他の実施例においては、信頼度値をメディアアイテムへとマッピングするために、圧縮、対数又は一般的には非線形のマッピング規則もある。さらに、信頼度しきい値の決定を、2つの隣接するメディアアイテムの間の距離の増分と、この増分が生じる距離を下回る距離を有するメディアアイテムの個数との混合など、別の基準に基づいて実行することができる。他の基準として、距離の増分と、所定のしきい値を下回るメディアアイテムの個数と、距離の絶対値との混合を挙げることができる。例えば、2という距離しきい値を下回る距離を有する全てのメディアアイテムが、0%を上回る信頼度値を受け取るように予め設定することができる。一般に、信頼度値の働きは、定量的なコレクションプロファイルを使用することによって得られる統計的に無関係なデータから、ユーザを解放することである。換言すると、ユーザが現在の検索において該当のメディアアイテムに関心を持っていないと確実に言えるような大きい距離を有する距離の値又は並べ替え済みの結果リストにおける「ヒット」に対して、ユーザは関心を有していない。他方では、0〜100%の間の信頼度値をマッピングすることにより、ユーザにとって使い易く、ユーザが照合作業の結果の有用性を素早く判断できるツールが提供可能となる。
図4dは、図4a、図4b、図4cの例を一般的な形態で生成するための方法又は装置として実現することができる手順のフロー図を示している。
ステップ420において、照合作業は、コレクション内の各メディアアイテムについて距離D(i)を計算することを含む。
続くステップ421において、結果リストは、図4bに例示的に示されているように、D(i)が小さい値から大きい値へと増加するように並び替えられる。
ステップ422において、信頼度しきい値THが決定される。さらに、信頼度しきい値THの距離D(TH)が決定される。図4cの実施形態においては、信頼度しきい値THは、信頼度しきい値に等しいか又は信頼度しきい値を下回るメディアアイテムの現在の番号である5に等しい。当該しきい値における距離は、図4cの実施形態においては2.2に等しい。
ステップ423において、信頼度値が、しきい値距離を下回る距離を有する各メディアアイテムについてマッピングされる。結果リストにおける番号がしきい値以下である各アイテムiについて信頼度の値を得るために、線形マッピング規則が、図4cに参照番号419で示されている。
ステップ424においては、しきい値以下の番号を有するメディアアイテムだけを含みかつ各メディアアイテムに信頼度値が組み合わされた、最終的な結果リストが使用される。この最終的な結果リストについて、様々な使用方法が存在する。第1実施例においては、この結果リストを後の使用のために保存することができる。別の使用シナリオにおいては、プレイリストにおける番号1が再生され、次に番号2が再生され、次いで番号3が再生されるように、この結果リストをそのまま再生することができる。この再生は、信頼度値が0%である最初のメディアアイテム(図4bの実施形態においては番号5のメディアアイテム)が再生されるまで行われる。別の使用シナリオは、最終的な結果リスト内でランダムに再生することであり、この最終的な結果リストのメディアアイテムだけが信頼度値の順序に影響されないランダムな順序で再生される。さらなる使用シナリオは、この最終的な結果リストを、ランダムなプレイリストとは異なる任意の種類のプレイリストの生成に使用することである。
図6は、好ましくはユーザの音楽コレクションから自動的に生成される洗練されたユーザプロファイルである例示的なユーザDNAを示す。図6のユーザDNAは、この実施形態においてはオーディオ作品のジャンルを示す定性的特徴120aを含み、さらに定量的特徴120bを含む。従って、好ましい実施形態においては、定量的特徴120bが使用され、さらに定性的特徴120aが加えられる。実施例に応じて、特定の最大値122を照合作業から除外しても、又は照合作業に含めてもよい。従って、データベースにおける照合作業を、エネルギー強という特徴及び明るい色合いという特徴を除外して行うことができ、又はユーザの指示に応じて、これらの極値を使用してもよい。
この特徴は、一方では抽出エラーを最小にし、他方では、楽曲の選択がある支配的特徴によって、ユーザがデータベース照合作業にこの支配的特徴を含めたいと望む場合を除き、完全に支配されないように保証する。
次に、好ましいメタデータの実施例を説明する。
MPEG−7はコンテンツについてのXMLフォーマットされた情報を提供するが、MPEG−7においては、このデータがオーディオコンテンツ自体に直接結び付けられている訳でも、オーディオコンテンツ自体に埋め込まれている訳でもない。MP7ファイルフォーマットは、オーディオコンテンツ及び記述メタデータの両者を結合して埋め込むことで両者のギャップを閉じ、MPEG−7エンリッチファイルを取得する。
図8は、MP3ファイル、MP4ファイル(AACファイル)、WMAファイル、AC3ファイル等へのMPEG−7データの埋め込みを示す。
上記目的のため、オーディオコンテンツ部分190が通常通りに設けられ、メタデータ部分200が追加される。このメタデータ部分200は、パブリックMPEG−7部分200a及びプレミアムMPEG−7部分200bを有するID3−V2部分であってもよい。パブリック部分200aは、ジャンル、音楽の音色、スピーチ音楽の区別など、自由なアクセスのための基本的タグの選択を含むことができる。プレミアムMPEG−7部分200bは、サブジャンルについての情報、並びにテンポ/BPM(毎分のビート数)、パーカッシブ性、ボーカル検出、アグレッシブ性、キー、ムード、セグメンテーション及びソロ楽器などについての特徴など、プレミアムユーザのための追加のタグを含む。これらのコンテンツに関する特徴は予め計算され、第2の部分200bへと導入されている。好ましくは、第2の部分200bはプレミアムユーザ(即ちこの部分を使用する特定の権利を有するか、又はこの部分の使用について支払いを済ませたユーザ)だけがこの部分を使用できるように暗号化され、非プレミアムユーザは第1の部分200aだけを使用できる。しかしながら、パブリック部分は、アーティスト、タイトル、アルバム等のような記述メタデータを少なくとも含む。
一般に、本発明によるファイルフォーマットは、好ましくはMP3、AAC又はWMAなどのMPEGオーディオ部分であるオーディオ記録部分190を含む。メタデータ部分は、好ましくはアーティスト、タイトル、アルバム等といった標準的なメタデータを含むID3−V2(バージョン2)フォーマットである。
パブリックメタデータ部分200aは、MPEG−7に従い、ジャンル、音楽の音色、スピーチ音楽の区別など、推薦及び先進ナビゲーションのためのMPEG−7 XMLで保存された、オープンにアクセス可能なメタデータを含む。
追加のメタデータ部分200bは、パブリックMPEG−7メタデータを超えるさらなるメタデータを含む。これらのメタデータは、公開鍵暗号化形式で保存され、プレミアム契約者及び解読鍵(decryption key)を入手したオペレータ又は配布者だけがアクセスすることができる。
アクセス権のレベルに応じて、サブジャンル、テンポ/BPM、パーカッシブ性、ボーカル検出、アグレッシブ性、キー、ムード、セグメンテーション、ソロ楽器等のような高度なタグ、及びP2P(ピア−トゥ−ピア)ライセンス情報が提供され、又は作品のトレースを可能にする特徴が提供される。
図7は、定性的特徴及び定量的特徴を含む特徴の概要を示す。定性的特徴は、ジャンル、サブジャンル、スピーチ/音楽の区別、ID3データである。定量的特徴は、テンポ/ビートの判定、パーカッシブ性、音楽の音色、ボーカル検出、アグレッシブ性、セグメンテーション、キー、ムード、ソロ楽器、及び音声状(soundslike)フィンガープリントである。
図8に参照番号200aで示すパブリックMPEG−7タグは、上述したようにMPEG−7 XMLフォーマットで保存されたオープンにアクセス可能なメタデータである。この部分は、ジャンル、音楽の色、スピーチ音楽の区別など、高度な検索のために楽曲の特徴を記述する高度なタグの選択を含んでいる。さらに、この部分200aは、基本的なタグベースの推薦及び先進ナビゲーションのための基礎を提供する。さらに、部分200aの情報は、基本的な自動プレイリスト生成のための基礎を提供する。
プレミアム部分/第2の部分200bに含まれる情報は、メロディ、サブジャンル、テンポ/BPM、パーカッシブ性、ボーカル検出、アグレッシブ性、キー、ムード、セグメンテーション、ソロ楽器など、先進の高レベルのタグと低レベルのオーディオフィンガープリント情報とを含む。
この部分の情報は、第1の部分200aの情報よりも正確な検索とナビゲーションとを可能にする。さらに、第2の部分200bの情報は、楽曲のセグメンテーションとセグメントベースの検索及び比較とを提供する。また、その情報は、正確な推薦及び賢いプレイリスト生成のための基礎を可能にする。好ましくは、部分200bの情報は公開鍵暗号化形式で保存され、従ってプレミアム契約者だけしかアクセスすることができない。
さらに、プレミアム消費者、権利保有者、オペレータなど、様々なレベルのアクセス制限を設けることができる。さらに、部分200bはライセンス及び販売の情報を含んでおり、この部分が作品のピア−トゥ−ピアの流通及びトレースをさらに可能にする。さらに、第2の部分200bの洗練された高レベルのタグをカバーバージョン及び盗作の発見に使用することができる。
一般にMPEG−7は、情報の意味の解釈をある程度までサポートするマルチメディア・コンテンツ・データを記述するための規格である、マルチメディアコンテンツの記述インターフェイスである。MPEG−1は、記憶メディアへのビデオ及びオーディオの保存と再生のためのものである。MPEG−2は、デジタルテレビにおける保存と再生のためのものである。MPEG−4は、コンテンツをオブジェクトとして符号化し、それらのオブジェクトの個別又は集合的な操作を可能にする。MPEG−7は、コンテンツの特徴を記述するための規格であり、MPEG−21は、デジタル権利の管理のためのものである。
好ましくは、MPEG−7によって高度化された楽曲の抽出及び生成は、以下の主たるステップによって実行される。
第1のステップにおいて、オーディオ素材が復号化され、利用可能なID3情報がインポートされる。
第2のステップにおいて、オーディオ素材が周波数帯及び短時間フレームへと分割される。
第3のステップにおいて、変調スペクトル、ノイズ類似性などのような各フレームの低レベルの特徴の計算が実行される。
第4のステップにおいて、低レベルの推薦のための音声状のフィンガープリントが生成される。
次のステップにおいて、楽曲のセグメンテーションが、コーラス、バース、イントロ及びソロを区別するための自己類似性情報を介して計算される。
さらなるステップにおいて、楽曲の全体又は各セグメントについて、高レベルの特徴が低レベルの特徴に基づいて計算される。
次に、最後のステップにおいて、抽出されたデータがオーディオファイルに埋め込まれ、MPEG−7によって高度化された楽曲が生成される。
具体的には、第1の部分200aにおいては未だ利用できない新規な特徴情報が図8の部分200bへと挿入される。
一般に、種々のメディア・データ・アイテムのコレクションを生成するための本発明の好ましい実施形態による装置が図10に示されている。この装置は、複数のメディア・データ・アイテムについて、各メディア・データ・アイテムのコンテンツに記載された少なくとも2つの異なる特徴をそれらのメディア・データ・アイテムから抽出するための特徴抽出器300を備えている。具体的には、特徴抽出器は、上述した高レベル特徴などのような特徴を正確に計算することができる。これらの特徴は、その柔軟性及び多様性ゆえに、メタデータ部分200へ保存されるために可変量のビットを必要とする。柔軟性及び将来の適応性を得るために、メタデータ生成器310が設けられる。メタデータ生成器は、複数のメディア・データ・アイテムの各メディア・データ・アイテムについてメタデータ部分200を生成する。ここでメタデータ生成器は、図11に示すようなメタデータヘッダ320を生成し、各特徴によって表現されるコンテンツの特徴についての情報を生成し、メタデータヘッダに組み合わされるメタデータペイロード部分330を生成するように構成されている。メタデータペイロード部分は、各メディア・データ・アイテムについての少なくとも2つの異なる特徴を有している。従って、図11の実施形態において、ヘッダ320は、ペイロード部分全体の長さ情報を含んでいるか、又は各特徴について個々の長さ情報を個別に含んでいる。さらに、同期マークの実装などのように、ある特徴についての情報がどこで終了し、他の特徴についての情報がどこで開始するかを示す、他の方法も有用である。
さらに、追加の特徴を加える将来の拡張可能性を許容するために、各特徴の意味についての情報、即ちF1が例えばムードの特徴であって、F2が例えばアグレッシブ性の特徴であるなどの情報を同様に含めることができる。この情報は、標準化された順序で含めることができ、又はメタデータヘッダ320に明示的に含めることができる。
図11と図8とを比較すれば、メタデータヘッダ320とメタデータペイロード部分330とが一緒に第2の部分200bを構成していることに注目すべきである。上記に代えて、メタデータヘッダ320は、第1の部分200a及び第2の部分200bに関するヘッダであってよい。この場合には、第2の部分200bがメタデータヘッダ320を含むと考えられ、図8の第1の部分200aに含まれる情報、即ちパブリックタグが、所定のフォーマットにおいてメタデータペイロード部分330の前でもメタデータペイロード部分330の後でもよい追加のメタデータペイロード部分を形成すると考えられる。
好ましくは、メタデータヘッダは、図11に示されていないメタデータペイロード部分の追加フィールドについての情報、即ちアクセス情報、ライセンス及び販売の情報、又はメタデータ情報に関するメディア・データ・ファイルの使用又は配布方法に関する任意の追加情報、などをさらに含む。このシナリオにおいては、メタデータヘッダ320が、上記のような追加のメタデータペイロード部分のフィールドについて追加の長さ情報及び記述情報をも含むと考えられる。
好ましい実施形態においては、特徴抽出器は、コレクションに新規に保存されたメディア・データ・アイテムを検出する。次に、プロファイル生成器20は、以前に収集されたプロファイルを取り出し、この以前に収集されたプロファイルを新規に保存されたメディア・データ・アイテムの特徴に基づいて操作し、更新済みのコレクションプロファイルを生成する。この特徴は、ユーザが新たなアイテムを1つだけ追加した場合に、新たなプロファイルを完全に計算するための時間及びリソースの量を削減できる。一実施形態においては、プロファイルの計算がバックグラウンドで行われ、即ちユーザがデバイスを使用しておらず、デバイスが休止状態にあるときに行われる。この場合、ユーザが自身のデバイスの使用を希望すれば、プロファイルの計算が停止させられるため、ユーザは直ちにデバイスの完全な演算能力を享受できるようになる。
次に、図2及び図5a〜図5cを参照し、本発明のコレクションプロファイルを2つのエンティティ間の通信に好都合に使用できる複数の方法を説明する。一般に、図2に示されているように、第1エンティティから第2エンティティへと情報を通信するための本発明の装置は、メタデータアイテムのコレクションからコレクションプロファイルを実際に計算するか、又は予め計算されたプロファイル情報を無線又はケーブルインターフェイスを介して受信する、コレクションプロファイル情報生成器70を備えている。コレクションプロファイル情報生成器がコレクションプロファイルを実際に計算する第1の可能性は、コレクションプロファイル情報生成器が第1エンティティに位置しており、かつコレクションプロファイルが第1エンティティから導出されたものである。予め計算されたコレクションプロファイルが無線又はケーブルインターフェイスを介して項目70によって受信される代替案においては、コレクションプロファイルが第1エンティティ内のメディア・データ・アイテムのコレクションを反映しており、項目70は第2エンティティに位置している。
情報ハンドラ60は、コレクションプロファイルを使用して、一致する特徴ベクトルを有するメディア・データ・アイテムを発見するか、又は一致するコレクションプロファイルを有するユーザ又はユーザグループを発見する。前者の場合には、コレクションプロファイルがメディア・データ・アイテムの複数の異なる特徴ベクトルと比較され、後者の場合には、項目70から得られたコレクションプロファイルが他のエンティティの複数のコレクションプロファイルと比較される。
上記照合作業に基づき情報が送信又は受信されるが、この情報は必ずしも照合結果又はコレクションプロファイルを含む必要はなく、コレクションプロファイルの照合作業に応答して決定された任意の製品/サービス又は製品/サービスに関する任意の情報に関係することができる。
図5aに示された一実施形態においては、コレクションプロファイル情報生成器がバー、ロビー若しくはその他のオーディオ聴取室のサウンドプロセッサ/発生部に位置するか、又は所定のインターネットユーザグループのためにストリーミングデータを提供する。従って、コレクションプロファイル情報生成器70は第2エンティティを表し、参照番号500で示されているように一つのユーザグループ又は部屋内のユーザからプロファイルを収集する。1グループ又は一部屋内のユーザは第1エンティティを表す。
ステップ502において、図2の情報ハンドラ60によって表される第2エンティティの装置が、ステップ500で受信されたユーザからのプロファイル間の平均プロファイルを計算する。次に、ステップ504に示されるとおり、平均プロファイルから、この平均プロファイルに一致するオーディオ作品がデータベースにおいて検索される。特に、図4aに関連して述べたデータベース照合作業が、一方では平均プロファイルを使用し、他方では特徴ベクトルのコレクション又はオーディオデータベースを使用することによって、一致するオーディオ作品を発見すべく実行される。次にステップ506において、前記ユーザグループ又は部屋について選択されたオーディオ作品が再生され、インターネットのユーザグループのシナリオが考慮される場合にはストリーミングされる。
図5bは、全てのステップが第1エンティティ、即ちユーザの場所において実行されるコレクションプロファイルの好都合な使用のための別の実施形態を示している。具体的には、ユーザが、図5bに参照番号510で示されている自身のメディア・データ・アイテムのコレクションを分析することによって、自身のユーザプロファイルを決定する。計算された自身のコレクションプロファイルに基づいて、ユーザは、参照番号512で示されているように、種々のグループプロファイルを自身のプロファイルと照合することによって、適切なユーザグループを発見する。この実施形態において、図2の情報ハンドラ60によって実行されるステップ512における照合作業の結果は、最良な一致結果を出力するだけである。なぜなら、それこそユーザが求めているものだからである。換言すると、ユーザは、同一又は極めて類似した音楽嗜好を有するメンバーからなるユーザグループへの加入を望んでいる。
次に、既にステップ512を実行した図2の情報ハンドラ60が、ステップ514に示されるように加入要求メッセージを選択されたユーザグループへと送信する。しかしながら、代替案としては、ユーザはステップ510において決定された自身のユーザプロファイルを遠隔のユーザグループ照合サービスへと送信してもよい。即ち、ユーザプロファイルの決定510が第1エンティティにおいて実行され、ステップ512で実行されるユーザグループ照合サービスが第2エンティティにおいて実行されるが、ステップ514は異なる方法で実行されても良い。即ち(ユーザから)遠隔の第2エンティティが、一致したユーザグループの情報をユーザへと送信しても良い。
コレクションプロファイルの好都合な使用方法のさらなる代替案が、図5cに示されている。図5cの各ステップは、ユーザプロファイルの出所たるエンティティとは異なるエンティティにおいて実行される。ステップ520において、異なるエンティティのユーザプロファイルが無線又はケーブル伝送などを用いて決定される。次いで、一致するオーディオ/ビデオ・データ・アイテムが、ステップ530に示される通り、自身のデータベースにおいて検索及び発見される。このステップは、他のエンティティのユーザプロファイルを受信したエンティティと同じエンティティで実行される。ステップ540では、ステップ530において発見された一致するアイテムが他のエンティティへ送信される。ステップ520〜540からなるこの構成は、メディア・データ・アイテムのピア−トゥ−ピアでの流通に使用することができ、前記他のエンティティは、その選択が当該他のエンティティのユーザDNAに基づいて行われたという事実に基づき、当該他のエンティティの好みを満たすメタデータアイテムだけを確実に受信することができる。
同様の手順が、ステップ550及び560によって示されている。ステップ550において、あるエンティティは、遠隔のエンティティのユーザプロファイルを使用して、そのユーザプロファイルに一致する製品/サービスを発見することができる。この目的のため、利用可能な各製品/サービスが所定の特徴ベクトルを有する場合に、図2の情報ハンドラ60は図4aの距離に関する照合作業と同様であってよい照合作業を実行する。上記に代えて、最も一致する製品/サービスを発見するために、ユーザプロファイルを参照テーブルなどの所定の機能へと入力してもよい。
次に、ステップ560において、一致した製品又は一致したサービスについての広告が情報ハンドラ60によって前記他のエンティティへと届けられる。このようにして、前記他のエンティティのユーザDNAに基づいて、特定の製品又はサービスに絞った広告が決定され、前記他のエンティティへと送られる。
本発明の好ましい実施形態によれば、本発明のコレクションプロファイルがコミュニティの構築における新たな次元を可能にする。本発明のユーザプロファイルは、ピア−トゥーピア(スーパー配信)のネットワークにおけるファイルのセルフプッシュ、音楽バー/クラブにおける来訪者のための個別仕様の背景、及びコミュニティインターネットラジオ(ストリーミング/プロドキャスティング)など、種々の個別仕様のサービスを可能にする。
上記のようなBach DNAコミュニティは、図5cの符号550及び560に関して述べたように、Bach DNAのプロファイルに一致する製品を有している広告主にとって興味深い対象となりうる。
上述の好ましい使用シナリオにおいては、音楽DNAが、第1エンティティから第2エンティティへの通信メッセージを操作/トリガ/決定するために常に使用されており、これら2つのエンティティは様々な地理的場所に位置するユーザ/人物/デバイスであった。次に、図5dは、ユーザDNAが、ユーザ自身によってユーザ自身のプレイリストを生成するために使用され、より一般的に言えば、ユーザ自身の娯楽のために再生/表示すべきメディアアイテムを位置づけるために使用される実施形態を示している。
この目的のため、ステップ581に示されるとおり、ユーザは自身のコレクションのコレクションプロファイルを取り出す。一実施例においては、このコレクションプロファイルは、ユーザが自身のコレクションから最小の距離を有するメディアアイテムを見つけるために、照合作業において使用される。上記に代えて、ユーザが、自身のコレクションから、この自身のコレクションについて信頼度値が示された図4cに関連して述べたような最終的な結果リストを決定することもできる。この実施例においては、図1の情報ハンドラ60又は図2の情報ハンドラ60がユーザのデータベースの照合のために音楽DNAを使用し、その結果は、ユーザの娯楽のためのユーザ自身のコレクションからのプレイリストの生成又はメディアアイテムの再生(レンダリング)、即ち照合作業を実行したユーザデバイスによるプレイリストの生成又はメディアアイテムの再生である。
しかしながら、図5dの好ましい実施形態においては、ステップ582に示すように、ユーザが自身のコレクションのコレクションプロファイルを修正して修正プロファイルを得る。この修正は、ユーザが自身の現在の好みを設定できるように、ユーザによって実行することができる。例えば、ユーザがアグレッシブな心的状態にある場合、ユーザは、よりアグレッシブであるが依然としてユーザのプロファイルに似ているプロファイルが生成されるように、自身の生のコレクションプロファイルを修正することができる。最終的に、この修正されたプロファイルを使用して、ステップ583に示すような照合作業が実行されると、当然ながらよりアグレッシブであるが、それでもなお依然としてユーザの自身の音楽嗜好に適うメディアアイテムを、ユーザは楽しむことができる。従って、ユーザは、例えばアグレッシブな楽曲(audio track)を聴くだけでなく、一方ではよりアグレッシブであり、他方では依然としてユーザの全体的な好みに適う特性を有する極めて特定的な楽曲を聴くことができる。
ステップ582においてコレクションプロファイルを修正するための他の代替案は、外的状況である。外的状況は、例えば1日の内のある時刻であってもよく、例えば1日の内の朝又は晩に、ユーザの音楽再生機がステップ581の生のコレクションプロファイルに基づいて異なる音楽DNAを計算することができる。
別の外的状況は、1週間内の曜日であってよく、例えば日曜日又は土曜日において、例えば火曜日又は水曜日と比べ、異なる修正プロファイルを計算することができる。
さらなる外的状況は、例えばユーザが欧州、アジア又は米国に居るときにユーザの修正DNAが相違するように、地理的場所であってよい。
上記修正されたプロファイルに基づいて、自身のメディアコレクションにおける照合作業がステップ583に示される通りに行われ、照合結果をユーザ自身の娯楽として再生できるように、この照合作業の結果がステップ584において使用され、又は所定のメディアアイテムを所定の順序で再生するようにユーザのメディアデバイスにおいてプレイリストを生成するために使用される。
Bach DNAは、独特なコミュニティを計算/生成すべく消費者同士を接続し、アーティスト同士を接続し、アーティストを消費者に接続する通信のシナリオにおいて使用される。このサービスは、消費者とアーティストとを接続する図8の部分200bに含まれる好都合なBach DNAタグを使用するためにエンドユーザ、インターネットサービス提供者又は広告主によって支払われる、料金に基づくことができる。
均一料金(義務又は自発)に基づくダウンロード及びストリーミングなどの購読モデル、又は広告に基づくサービスが、エンドユーザが音楽に無制限にアクセスし、かつ自分の個人的なDNAに合わせて誂えることを可能にする。
本発明のユーザDNAによって、ある消費者が類似の音楽DNAを持つ他の消費者及びアーティストのいるコミュニティにおいて、音楽の再配布(共有)を行うことができるようにする購読システムへのスーパー配信拡張が可能になる。
Bach DNAコミュニティは、Bach DNAのプロファイルに一致した製品を有する広告主にとって興味深い対象となり、1回のクリックにこれまで以上の高い価値を与えるであろう。そのような状況が図9に示されており、リラックス、興奮、幸福、怒り、恐れ、悲哀、悲しみ等のある心的状態(mood)に、図9に示されているある製品が関連付けられている。心的状態は、ある明示的な特徴であっても良いし、種々の特徴を結合することによって計算することもできる。この場合、コレクション・プロファイル・ベクトルの所定の構成要素を所定の方法で結合するためのある規則が、所定の数値をもたらし、この数値が所定の心的状態へとマッピングされる。ある製品のある心的状態への関連付けを表を用いて行なっても良く、所定の製品が認識された後で所定の広告を選択することは簡単である。
上記のようにして、BachユーザDNAとBach DNAタグとは、完全に個人的な音楽の推薦のための鍵となる。
ショップのシステム及びコミュニティは、ユーザDNAを比較し、適合する音楽嗜好を有する楽曲、アーティスト、及び他のユーザへと結び付けることができる。
「この商品を購入された方は・・・も購入されています」などの統計に基づく既存のソリューションと異なり、DNA手法は、真にユーザに対応し、主流以外でも機能し、常に最新の推薦を可能にする手段を提供する。
BachユーザDNAを、ピア−トゥ−ピア(スーパー配信)のシナリオにおける自動的な音楽の推薦又はファイルのセルフプッシュなどの幾つかの独特なサービスを提供するためにユーザグループへと適用することができる。他のサービスは、コミュニティにおける音楽の嗜好及びストリームの分析であり、さらなるサービスは、そのような嗜好に適合する(コミュニティ)インターネットラジオのためのライブ・ラジオ・ストリームの自動生成であり、さらには既に述べた顧客のプロファイルに応じたバー又はクラブにおける背景音楽のためのライブ・ラジオ・ストリームの自動生成である。
図3の符号88に関連して既に述べたように、顧客のハンドセットに保存された音楽コレクションの音楽DNAプロファイルを追加の有用な情報によって豊かにすることが、本発明の特徴である。そのような追加の情報は、例えばハンドセットの銘柄、ハンドセットの型式、ハンドセットを通信システム又は本発明の照合サービスへと接続する携帯電話会社である。従って、ハンドセットの銘柄及び型式ならびに携帯電話会社が、好ましくはリアルタイムで特定される。新たなオンライン音楽の世界において、ハンドセットはCDを引き継ぐ新たなキャリアである。従って、ハンドセットの特徴及び接続事業者が、好ましくは顧客の音楽DNAプロファイルに含められる。その利点は、ハンドセットの種類と音楽プロファイルの種類との間の相関関係を発見する点にある。この発見は、デジタル権利管理に関するMPEG−21規格が現実となれば、一段と高い価値をもたらす。本発明のDNAをサウンドトラックの識別タイトル及びプロデューサ/権利保有者で補うID3 V2タグと同様に、ハンドセットの特性タグは、キャリアの種類及びキャリアの製造者の名称を識別するであろう。
ユーザの音楽DNA/コレクションプロファイルは、一致するユーザグループの発見、一致する広告の発見、又はユーザの好みに一致する楽曲の発見に関係するだけでなく、ユーザに関する他の問題にも対応する、ユーザにとって刺激的なアプリケーションのシナリオを可能にする。さらに音楽DNAは、例えば2人の個人がそれぞれの音楽DNAを交換する場合に、完全に新しいシナリオを開拓することを可能にする。この状況においては、第1エンティティが第2の別のエンティティの世界を体験する立場に置かれ、このことが、特に両方のユーザがお互いについてさらに知ろうと望む場合に、両方のユーザに驚くべき体験をもたらすことができる。従って、音楽DNAは、親友関係(alter ego situation)を構築及び体験するうえで鍵となる特徴を形成することができる。
上述した実施形態は、本発明の原理の単なる例示にすぎない。本明細書において説明された構成及び細部の変更及び変種が、当業者にとって明らかであることを理解すべきである。従って、本発明は、以下の特許請求の範囲の技術的範囲によってのみ限定され、本明細書の実施形態の説明及び解説として提示された具体的詳細には限定されない。
本発明のユーザコレクションプロファイルを、ユーザプロファイルが表示され、又はデータベースの照合又は通信メッセージに使用されるように、プログラム可能なコンピュータシステムと協働するデジタル記憶媒体又は機械で読み取ることができるキャリア、特に電子的に読み取り可能な制御信号が保存されてなるディスク、DVD、又はCDに、保存することができる。
本発明の方法の特定の実施の要件に応じて、本発明の方法をハードウェア又はソフトウェアにて実現することができる。本発明の方法が実行されるように、プログラマブルなコンピュータシステムと協働する電子的に読み取り可能な制御信号が保存されたデジタル記憶媒体、特にディスク、DVD、又はCDを使用して行うことができる。従って、広義には、本発明は、プログラムコードを機械で読み取ることができるキャリアに保存してなるコンピュータプログラム製品であって、当該コンピュータプログラム製品がコンピュータ上で動作するときに前記プログラムコードが本発明の方法を実行するように作動させられるコンピュータプログラム製品である。換言すると、本発明の方法は、コンピュータ上で動作するときに本発明の方法のうちの少なくとも1つを実行するためのプログラムコードを有するコンピュータプログラムである。
−備考−
(請求項11)
オーディオファイルである種々のメディア・データ・アイテム(45)からなるコレクションのコレクションプロファイル(50)を生成するための装置であって、
前記コレクションの複数のメディア・データ・アイテムから、各メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴を抽出する特徴抽出器(10)と、
前記複数のメディア・データ・アイテムについて抽出された特徴又は抽出され重み付けされた特徴を結合することで、前記コレクションのコンテンツの定量的なフィンガープリントを表すコレクションプロファイルを生成するプロファイル生成器(20)と、を備える装置において、
前記プロファイル生成器(20)は、このプロファイル生成器によって記録された音楽嗜好に関する情報又はユーザの挙動に関する情報から導出された重みを用いて前記抽出された特徴を重み付けし、かつその抽出され重み付けされた特徴を結合することで前記コレクションプロファイルを取得する、装置。
(請求項19)
オーディオファイルである種々のメディア・データ・アイテム(45)からなるコレクションのコレクションプロファイル(50)を生成するための方法であって、
前記コレクションの複数のメディア・データ・アイテムから、各メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴を抽出するステップ(10)と、
プロファイル生成器を用いて、前記複数のメディア・データ・アイテムについて抽出された特徴又は抽出され重み付けされた特徴を結合することで、前記コレクションのコンテンツの定量的なフィンガープリントを表すコレクションプロファイルを生成するステップ(20)と、を備える方法において、
前記プロファイルを生成するステップ(20)は、前記プロファイル生成器によって記録された音楽嗜好に関する情報又はユーザの挙動に関する情報から導出された重みを用いて前記抽出された特徴を重み付けし、かつその抽出され重み付けされた特徴を結合することで前記コレクションプロファイルを取得する、方法。

Claims (17)

  1. オーディオファイルである種々のメディア・データ・アイテム(45)からなるコレクションのコレクションプロファイル(50)を生成するための装置であって、
    前記コレクションの複数のメディア・データ・アイテムから、各メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴を抽出する特徴抽出器(10)と、
    前記コレクションのコンテンツの定量的なフィンガープリントを表すコレクションプロファイルを生成するプロファイル生成器(20)と、
    種々のオーディオファイルからなるコレクションのユーザの挙動(87)又は音楽嗜好(85)に関する情報を受け取るための入力部と、を備え、
    前記プロファイル生成器(20)は、前記複数のメディア・データ・アイテムについて抽出された特徴又は抽出され重み付けされた特徴を結合することで、前記ユーザの挙動に関する情報又は音楽嗜好に関する情報を含まない生のコレクションプロファイル(83)を生成し、かつ前記音楽嗜好又は前記ユーザの挙動に関する情報から導出された重みを用いて前記生のコレクションプロファイルを重み付けすることで、前記コレクションプロファイルを取得し、
    前記複数のメディア・データ・アイテムの各メディア・データ・アイテムはデータ部分(190)及び関連のメタデータ部分(200)を有し、そのメタデータ部分は前記少なくとも2つの異なる特徴を持ち、
    前記特徴抽出器(10)は前記メタデータ部分を分析し、そのメタデータ部分から前記特徴を読み出し、
    前記メタデータ部分は第1の非暗号化部分(200a)と第2の暗号化部分(200b)とを有し、
    前記特徴抽出器(10)は暗号解読キーを取り出して前記第2の暗号化部分(200b)を解読し、
    前記プロファイル生成器(20)は、前記コレクションプロファイルの生成のために、前記非暗号化部分から抽出された特徴よりもさらに多くの前記暗号化部分から抽出された特徴を使用し、
    前記第2の暗号化部分(200b)は、前記第1の非暗号化部分(200a)に含まれた特徴よりもさらに詳しくメディア・データ・アイテムのコンテンツを描写する特徴を含む、装置。
  2. 前記プロファイル生成器は、前記抽出された特徴又は抽出され重み付けされた特徴の加算、減算、乗算又は除算を使用して、前記定量的なコレクションプロファイルを生成する、請求項1に記載の装置。
  3. 前記コレクションは、メディア・データ・アイテムのための記憶手段を有する携帯デバイス(40)に保存され、
    前記プロファイル生成器(20)は、前記携帯デバイスの製造者に関する情報、前記携帯デバイスの個々の型式に関する情報又は通信サービス提供者に関する情報を、前記コレクションプロファイルに追加(88)する、請求項1又は2に記載の装置。
  4. 前記コンテンツを描写する特徴は、エネルギー強、エネルギー中、エネルギー低、明るい音色、暗い音色、テンポ/ビート、パーカッシブ性、ミュージックカラー、ボーカル検出、アグレッシブ性、セグメンテーション、キー、ムード、ソロ楽器、又はフィンガープリントに関する情報を含む、請求項1乃至のいずれか一項に記載の装置。
  5. 前記プロファイル生成器(20)は、前記抽出された特徴を類似の特徴について分析し、又は極値(82)を持つ特徴を除外する、請求項1乃至のいずれか一項に記載の装置。
  6. 前記特徴抽出器は前記コレクションに新たに保存されたメディア・データ・アイテムを検出し、
    前記プロファイル生成器(20)は、以前に収集されたプロファイルを取り出し、前記新たに保存されたメディア・データ・アイテムの特徴に基づいて前記以前に収集されたプロファイルを操作して、更新済みのコレクションプロファイルを生成する、請求項1乃至のいずれか一項に記載の装置。
  7. 前記第1の特徴は第1のコンテンツ特性を第1の数値範囲内の第1数によって描写しており、
    前記第2の特徴は第2の別のコンテンツ特性を第2の数値範囲内の第2数によって描写しており、
    前記プロファイル生成器(20)は、前記複数のメディア・データ・ファイルの前記第1数を結合して結合済第1数を取得し、
    前記プロファイル生成器(20)は、前記複数のメディア・データ・ファイルの前記第2数を結合して結合済第2数を取得し、
    前記結合済第1数又はこの結合済第1数から導出された導出済第1数と、前記結合済第2数又はこの結合済第2数から導出された導出済第2数とを有するベクトルが、前記コンテンツのプロファイルを構成する、請求項1乃至8のいずれか一項に記載の装置。
  8. 前記結合済の数は、対応する特徴の数値範囲と同一範囲内又は対応する特徴の数値範囲よりも小さい数値範囲内の数である、請求項に記載の装置。
  9. 第1エンティティから第2エンティティへと情報を通信するための装置において、
    前記第1エンティティに位置する第1コレクションの第1コレクションプロファイルに関する情報を生成し、又は第2エンティティに位置する第2コレクションの第2コレクションプロファイルに関する情報を生成するコレクションプロファイル情報生成器であって、前記第1又は第2のコレクションプロファイルは第1エンティティ又は第2エンティティに位置するメタデータファイルの対応するコレクションのコンテンツの定量的なフィンガープリントを表現している、コレクションプロファイル情報生成器(70)と、
    前記第1コレクションプロファイル又は前記第2コレクションプロファイルを照合作業において使用し、前記照合作業若しくはコレクションプロファイルに基づく情報を送信するか、又は照合作業若しくは前記コレクションプロファイルに基づくメッセージを受信する、情報ハンドラ(60)と、を備え、
    前記第1又は第2のコレクションプロファイルは、請求項1に記載のコレクションプロファイルを生成する装置によって生成されることを特徴とする装置。
  10. 請求項に記載の装置であって、
    前記装置は前記第1エンティティを表す携帯デバイスであり、
    前記装置は前記第1コレクションプロファイルを生成し、
    前記情報ハンドラは、前記第1コレクションプロファイルに関する情報を含むメッセージを前記第2エンティティへと送信する、装置。
  11. 請求項に記載の装置であって、
    前記装置は前記第1エンティティを表すデバイスであって、前記第1コレクションプロファイルに関する情報を決定(70)し、
    前記情報ハンドラ(60)は、
    前記第1コレクションプロファイルに類似するコレクションプロファイルを有するユーザを含むユーザグループに関する情報を取り出し、ユーザグループへの加入を要求するメッセージを前記第2エンティティへと送信(514)するか、
    類似のプロファイルを有するユーザに関する情報を取り出し、前記第1エンティティに関する情報又は第1コレクションからのメディア・データ・アイテムを含むメッセージを前記第2エンティティへと送信(540)するか、
    コレクションプロファイルに関連付けられた製品又はサービスに対して誂えられた広告に関する情報を取り出し、前記コレクションプロファイルに対して誂えられた広告を要求するメッセージを広告主へと送信し、若しくは製品についての広告を別のエンティティへと配信(560)するか、又は
    一致するプロファイルを求めて保存済みのメディア・データ・アイテムを遠隔から分析し、その一致するプロファイルを有するメディア・データ・アイテムのダウンロードを選択的に要求する、装置。
  12. 前記コレクションプロファイル情報生成器(70)は、前記第2エンティティの周囲の限られた空間に位置するか又はネットワーク・ユーザ・グループ(500)の中に位置する複数のエンティティのプロファイルに関する情報を、ケーブル又は無線通信装置を介して受け取り、
    前記情報ハンドラ(60)は前記複数の第1エンティティについての結合済プロファイルを計算(502)し、
    前記情報ハンドラ(60)は前記結合済プロファイルに一致するメディア・データ・アイテムを選択(504)し、
    前記情報ハンドラ(60)は、前記限られた空間において前記選択されたメディア・データ・アイテムを再生するか、又は前記ネットワーク・ユーザ・グループへの前記選択されたメディア・データ・アイテムのデータストリーミングを生じさせる(506)、請求項乃至11のいずれか一項に記載の装置。
  13. 前記情報ハンドラ(60)は、前記照合作業から結果リストを計算(420、421)し、該結果リストから選択された一群のメディアアイテムについて信頼度値をマッピング(422、423)し、マッピングされた信頼度値を有する最終的な結果リストを、ユーザへのデータ送信に使用(424)する、請求項9乃至12のいずれか一項に記載の装置。
  14. 前記コレクションプロファイル情報生成器(17)が前記第1エンティティのコレクションプロファイルを取り出し、
    前記情報ハンドラ(60)が、前記第1エンティティのユーザの現在の嗜好又は外的状況に基づいて、前記コレクションプロファイルを修正(582)し、
    前記情報ハンドラ(60)が、前記第1エンティティのメディアコレクションにおいて、前記修正済プロファイルを用いて照合作業を実行(583)し、
    前記情報ハンドラ(60)が、前記第1エンティティにおいて前記照合作業の結果を再生し、又は前記照合作業の結果に基づいて前記第1エンティティにおいてプレイリストを生成(584)する、請求項に記載の装置。
  15. オーディオファイルである種々のメディア・データ・アイテム(45)からなるコレクションのコレクションプロファイル(50)を生成するための方法であって、
    特徴抽出器を用いて、前記コレクションの複数のメディア・データ・アイテムから、各メディア・データ・アイテムのコンテンツを描写する少なくとも2つの異なる特徴を抽出するステップ(10)と、
    プロファイル生成器を用いて、前記コレクションのコンテンツの定量的なフィンガープリントを表すコレクションプロファイルを生成するステップ(20)と、
    入力部から種々のオーディオファイルからなるコレクションのユーザの挙動(87)又はの音楽嗜好(85)に関する情報を受け取るステップとを含み、
    前記プロファイルを生成するステップは、前記複数のメディア・データ・アイテムについて抽出された特徴又は抽出され重み付けされた特徴を結合することで、前記ユーザの挙動に関する情報又は音楽嗜好に関する情報を含まない生のコレクションプロファイル(83)を生成するサブステップと、前記音楽嗜好又は前記ユーザの挙動に関する情報から導出された重みを用いて前記生のコレクションプロファイルを重み付けするサブステップとを用いて前記コレクションプロファイルを取得
    前記複数のメディア・データ・アイテムの各メディア・データ・アイテムはデータ部分(190)及び関連のメタデータ部分(200)を有し、そのメタデータ部分は前記少なくとも2つの異なる特徴を持ち、
    前記特徴を抽出するステップ(10)は前記メタデータ部分を分析し、そのメタデータ部分から前記特徴を読み出し、
    前記メタデータ部分は第1の非暗号化部分(200a)と第2の暗号化部分(200b)とを有し、
    前記特徴を抽出するステップ(10)は暗号解読キーを取り出して前記第2の暗号化部分(200b)を解読し、
    前記コレクションプロファイルを生成するステップ(20)は、前記コレクションプロファイルの生成のために、前記非暗号化部分から抽出された特徴よりもさらに多くの前記暗号化部分から抽出された特徴を使用し、
    前記第2の暗号化部分(200b)は、前記第1の非暗号化部分(200a)に含まれた特徴よりもさらに詳しくメディア・データ・アイテムのコンテンツを描写する特徴を含む、方法。
  16. 第1エンティティから第2エンティティへと情報を通信する方法において、
    前記第1エンティティに位置する第1コレクションの第1コレクションプロファイルに関する情報を生成し、又は第2エンティティに位置する第2コレクションの第2コレクションプロファイルに関する情報を生成するステップであって、前記コレクションプロファイルは第1エンティティ又は第2エンティティに位置するメタデータファイルの対応するコレクションのコンテンツの定量的なフィンガープリントを表現しているステップ(70)と、
    前記第1コレクションプロファイル又は前記第2コレクションプロファイルを照合作業において使用するステップ(60)と、
    前記照合作業若しくはコレクションプロファイルに基づく情報を送信するか、又は照合作業若しくは前記コレクションプロファイルに基づくメッセージを受信するステップと、
    を含み、
    前記第1又は第2のコレクションプロファイルは請求項15に記載のコレクションプロファイルを生成する方法によって生成される、方法。
  17. コンピュータ上で動作するときに請求項15又は16に記載の方法を実行するためのプログラムコードを有するコンピュータプログラム。
JP2011524234A 2008-08-28 2009-08-20 コレクションプロファイルの生成及びコレクションプロファイルに基づく通信のための装置及び方法 Expired - Fee Related JP5432264B2 (ja)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US9252808P 2008-08-28 2008-08-28
US61/092,528 2008-08-28
EP08015229.1 2008-08-28
EP08015229 2008-08-28
EP08022058A EP2159720A1 (en) 2008-08-28 2008-12-18 Apparatus and method for generating a collection profile and for communicating based on the collection profile
EP08022058.5 2008-12-18
PCT/EP2009/006042 WO2010022890A1 (en) 2008-08-28 2009-08-20 Apparatus and method for generating a collection profile and for communicating based on the collection profile

Publications (2)

Publication Number Publication Date
JP2012511189A JP2012511189A (ja) 2012-05-17
JP5432264B2 true JP5432264B2 (ja) 2014-03-05

Family

ID=41165520

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011524234A Expired - Fee Related JP5432264B2 (ja) 2008-08-28 2009-08-20 コレクションプロファイルの生成及びコレクションプロファイルに基づく通信のための装置及び方法

Country Status (9)

Country Link
US (2) US8407224B2 (ja)
EP (2) EP2159720A1 (ja)
JP (1) JP5432264B2 (ja)
KR (1) KR20110055698A (ja)
CN (1) CN102165440A (ja)
AU (1) AU2009287066A1 (ja)
CA (1) CA2735290A1 (ja)
TW (1) TW201022971A (ja)
WO (1) WO2010022890A1 (ja)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011221133A (ja) * 2010-04-06 2011-11-04 Sony Corp 情報処理装置、クライアント装置、サーバ装置、リスト生成方法、リスト取得方法、リスト提供方法、及びプログラム
US20120023403A1 (en) * 2010-07-21 2012-01-26 Tilman Herberger System and method for dynamic generation of individualized playlists according to user selection of musical features
US20130237317A1 (en) * 2012-03-12 2013-09-12 Samsung Electronics Co., Ltd. Method and apparatus for determining content type of video content
US20130332462A1 (en) * 2012-06-12 2013-12-12 David Paul Billmaier Generating content recommendations
US20140031961A1 (en) * 2012-07-26 2014-01-30 Google Inc. Method and System for Generating Location-Based Playlists
CN103581235B (zh) * 2012-07-27 2016-02-24 腾讯科技(深圳)有限公司 一种闪屏推送方法及服务器
US9639597B2 (en) 2012-10-30 2017-05-02 FHOOSH, Inc. Collecting and classifying user information into dynamically-updated user profiles
US20140172429A1 (en) * 2012-12-14 2014-06-19 Microsoft Corporation Local recognition of content
US9875304B2 (en) 2013-03-14 2018-01-23 Aperture Investments, Llc Music selection and organization using audio fingerprints
US11271993B2 (en) 2013-03-14 2022-03-08 Aperture Investments, Llc Streaming music categorization using rhythm, texture and pitch
US10623480B2 (en) 2013-03-14 2020-04-14 Aperture Investments, Llc Music categorization using rhythm, texture and pitch
US9639871B2 (en) 2013-03-14 2017-05-02 Apperture Investments, Llc Methods and apparatuses for assigning moods to content and searching for moods to select content
US10225328B2 (en) 2013-03-14 2019-03-05 Aperture Investments, Llc Music selection and organization using audio fingerprints
US10061476B2 (en) 2013-03-14 2018-08-28 Aperture Investments, Llc Systems and methods for identifying, searching, organizing, selecting and distributing content based on mood
US10242097B2 (en) 2013-03-14 2019-03-26 Aperture Investments, Llc Music selection and organization using rhythm, texture and pitch
CN105229684B (zh) * 2013-03-15 2021-02-19 布莱恩·麦克法登 用于控制和优化信息交换中的用户之间信息分布的系统
WO2014153133A1 (en) * 2013-03-18 2014-09-25 The Echo Nest Corporation Cross media recommendation
US9361353B1 (en) * 2013-06-27 2016-06-07 Amazon Technologies, Inc. Crowd sourced digital content processing
US20150039612A1 (en) * 2013-08-05 2015-02-05 LHSG Co. Storage-based data analytics knowledge management system
US10042894B2 (en) * 2013-10-31 2018-08-07 Microsoft Technology Licensing, Llc Temporal-based professional similarity
US20150178282A1 (en) * 2013-12-23 2015-06-25 Yahoo! Inc. Fast and dynamic targeting of users with engaging content
US20220147562A1 (en) 2014-03-27 2022-05-12 Aperture Investments, Llc Music streaming, playlist creation and streaming architecture
CN106416129B (zh) * 2014-04-23 2018-01-16 远程媒体有限责任公司 将综合转播和分组流社交化的智能路由同步系统和方法
US11481424B2 (en) * 2014-05-16 2022-10-25 RCRDCLUB Corporation Systems and methods of media selection based on criteria thresholds
US20160026614A1 (en) * 2014-07-24 2016-01-28 KCura Corporation Methods and apparatus for annotating documents
US10579823B2 (en) 2014-09-23 2020-03-03 Ubiq Security, Inc. Systems and methods for secure high speed data generation and access
SG11201808317XA (en) 2014-09-23 2018-10-30 Fhoosh Inc Secure high speed data storage, access, recovery, and transmission
US10353944B2 (en) * 2014-11-24 2019-07-16 RCRDCLUB Corporation User-specific media playlists
EP3796201A3 (en) * 2014-12-15 2021-04-07 Ubiq Security, Inc. Systems and methods for diffracted data retrieval
US9606766B2 (en) 2015-04-28 2017-03-28 International Business Machines Corporation Creating an audio file sample based upon user preferences
JP6141378B2 (ja) * 2015-10-09 2017-06-07 株式会社リクルートホールディングス 人材検索サーバ
US10902043B2 (en) * 2016-01-03 2021-01-26 Gracenote, Inc. Responding to remote media classification queries using classifier models and context parameters
EP3399439A1 (en) * 2017-05-04 2018-11-07 Buzzmusiq Inc. Method for recommending music in playlist and apparatus using the same
AU2019207800A1 (en) * 2018-01-10 2020-08-06 Qrs Music Technologies, Inc. Musical activity system
US11349656B2 (en) 2018-03-08 2022-05-31 Ubiq Security, Inc. Systems and methods for secure storage and transmission of a data stream
EP3742433B1 (en) * 2019-05-23 2022-05-04 Spotify AB Plagiarism risk detector and interface
US11630835B2 (en) * 2020-02-14 2023-04-18 Salesforce, Inc. Modifications of user datasets to support statistical resemblance
WO2021255550A1 (en) * 2020-06-18 2021-12-23 Nokia Technologies Oy Method and apparatus for signaling multiple media data types
AU2020475461A1 (en) * 2020-11-05 2023-06-15 Utopia Music Ag Generation of personality profiles
CA3197589A1 (en) * 2020-11-05 2022-05-12 Pierre LEBECQUE Identification of media items for target groups

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3433818B2 (ja) * 1993-03-31 2003-08-04 日本ビクター株式会社 楽曲検索装置
US5524051A (en) * 1994-04-06 1996-06-04 Command Audio Corporation Method and system for audio information dissemination using various modes of transmission
US5758257A (en) * 1994-11-29 1998-05-26 Herz; Frederick System and method for scheduling broadcast of and access to video programs and other data using customer profiles
US6112186A (en) * 1995-06-30 2000-08-29 Microsoft Corporation Distributed system for facilitating exchange of user information and opinion using automated collaborative filtering
US5872850A (en) * 1996-02-02 1999-02-16 Microsoft Corporation System for enabling information marketplace
US5915238A (en) * 1996-07-16 1999-06-22 Tjaden; Gary S. Personalized audio information delivery system
EP1151398A4 (en) * 1999-02-01 2004-04-14 Univ Columbia MULTIMEDIA ARCHIVE DESCRIPTION SYSTEM
US20050038819A1 (en) * 2000-04-21 2005-02-17 Hicken Wendell T. Music Recommendation system and method
US8326584B1 (en) * 1999-09-14 2012-12-04 Gracenote, Inc. Music searching methods based on human perception
US6192340B1 (en) * 1999-10-19 2001-02-20 Max Abecassis Integration of music from a personal library with real-time information
US6910035B2 (en) * 2000-07-06 2005-06-21 Microsoft Corporation System and methods for providing automatic classification of media entities according to consonance properties
US20020104088A1 (en) * 2001-01-29 2002-08-01 Philips Electronics North Americas Corp. Method for searching for television programs
US8006266B2 (en) * 2002-06-24 2011-08-23 Pace LLC Method for using only feedback from shows that improve the performance of the recommender system
US8053659B2 (en) * 2002-10-03 2011-11-08 Polyphonic Human Media Interface, S.L. Music intelligence universe server
US7081579B2 (en) * 2002-10-03 2006-07-25 Polyphonic Human Media Interface, S.L. Method and system for music recommendation
US20040098744A1 (en) * 2002-11-18 2004-05-20 Koninklijke Philips Electronics N.V. Creation of a stereotypical profile via image based clustering
CN1729276A (zh) 2002-12-19 2006-02-01 皇家飞利浦电子股份有限公司 用于网络下载音乐文件的方法和系统
DE602004013771D1 (de) * 2003-06-03 2008-06-26 Koninkl Philips Electronics Nv Verfahren und vorrichtung zum generieren eines nutzerprofils basierend auf spiellisten
JP2005285285A (ja) * 2004-03-30 2005-10-13 Clarion Co Ltd コンテンツ読出装置及び楽曲再生装置
US8028038B2 (en) * 2004-05-05 2011-09-27 Dryden Enterprises, Llc Obtaining a playlist based on user profile matching
EP1807775A1 (en) * 2004-09-21 2007-07-18 Koninklijke Philips Electronics N.V. Organizing content
WO2007057800A2 (en) * 2005-11-16 2007-05-24 Koninklijke Philips Electronics N.V. Method of generating and methods of filtering a user profile
US8752086B2 (en) * 2006-08-09 2014-06-10 Carson Victor Conant Methods and apparatus for sending content to a media player

Also Published As

Publication number Publication date
US20110202567A1 (en) 2011-08-18
EP2159720A1 (en) 2010-03-03
EP2318959A1 (en) 2011-05-11
KR20110055698A (ko) 2011-05-25
WO2010022890A1 (en) 2010-03-04
CA2735290A1 (en) 2010-03-04
CN102165440A (zh) 2011-08-24
AU2009287066A1 (en) 2010-03-04
JP2012511189A (ja) 2012-05-17
US8407224B2 (en) 2013-03-26
TW201022971A (en) 2010-06-16
US20120296908A1 (en) 2012-11-22

Similar Documents

Publication Publication Date Title
JP5432264B2 (ja) コレクションプロファイルの生成及びコレクションプロファイルに基づく通信のための装置及び方法
US8874247B2 (en) System and method for identifying music samples for recommendation by a user
US8583791B2 (en) Maintaining a minimum level of real time media recommendations in the absence of online friends
US8082256B2 (en) User terminal and content searching and presentation method
US8966394B2 (en) System and method for playlist generation based on similarity data
US8422490B2 (en) System and method for identifying music content in a P2P real time recommendation network
JP5143620B2 (ja) 試聴用コンテンツ配信システムおよび端末装置
WO2007067250A1 (en) Methods and systems for utilizing contextual feedback to generate and modify playlists
US20130132988A1 (en) System and method for content recommendation
JP2008117222A (ja) 情報処理装置および方法、並びにプログラム
JP4389950B2 (ja) 情報処理装置および方法、並びにプログラム
JP4730619B2 (ja) 情報処理装置および方法、並びにプログラム
US20220188062A1 (en) Skip behavior analyzer
JP4599141B2 (ja) 情報提供システム,情報提供サーバおよびコンピュータプログラム
AU2014200583A1 (en) Apparatus and method for generating a collection profile and for communicating based on the collection profile
JP5158450B2 (ja) 情報処理装置および方法、並びにプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121122

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121204

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130227

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131015

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20131105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20131205

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5432264

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees