JP2003099462A - 楽曲検索装置 - Google Patents

楽曲検索装置

Info

Publication number
JP2003099462A
JP2003099462A JP2001289792A JP2001289792A JP2003099462A JP 2003099462 A JP2003099462 A JP 2003099462A JP 2001289792 A JP2001289792 A JP 2001289792A JP 2001289792 A JP2001289792 A JP 2001289792A JP 2003099462 A JP2003099462 A JP 2003099462A
Authority
JP
Japan
Prior art keywords
music
data
musical
search
search space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001289792A
Other languages
English (en)
Other versions
JP2003099462A5 (ja
JP4622199B2 (ja
Inventor
Kazumi Arakage
和美 荒蔭
Ichiro Shishido
一郎 宍戸
Toru Shimizu
徹 清水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP2001289792A priority Critical patent/JP4622199B2/ja
Publication of JP2003099462A publication Critical patent/JP2003099462A/ja
Publication of JP2003099462A5 publication Critical patent/JP2003099462A5/ja
Application granted granted Critical
Publication of JP4622199B2 publication Critical patent/JP4622199B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】 一般的な楽音データの中から参照曲に類似す
る楽曲を検索する。 【解決手段】 曲の楽音データから楽曲の音楽的特徴を
示す特徴ベクトルを作成する音楽的特徴抽出手段103
と、楽音データに対する印象を示す感性ベクトルと特徴
ベクトルを用いて前記楽曲の検索空間を作成する検索空
間作成手段105と、入力された参照曲の検索空間上の
位置に近い位置にある楽曲を抽出することにより、参照
曲に類似する印象を有する楽曲を検索する検索手段10
7とを備えることによる。これにより、CD等の一般的
な楽音データの中からユーザの指定する参照曲に類似す
る印象を有する楽曲を検索することができる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、指定された参照曲
に類似する印象を有する楽曲を複数の楽曲の中から検
索、抽出する楽曲検索装置に係り、特に、CD(Compac
t Disk)等の一般的な楽音データの中から楽曲を検索す
ることを可能にする技術に関する。
【0002】
【従来の技術】従来より、例えばカラオケ装置等のよう
に、入力された曲名や歌手名等の検索キーワードに基づ
いて条件に合った楽曲を検索する楽曲検索装置が知られ
ているが、このような楽曲検索装置では、例えば「この
曲に似た感じの曲」といった、指定した曲(「参照曲」
という)に類似する印象の楽曲を検索することはできな
い。
【0003】このような背景から、例えば特開平2−5
4300号公報には、メロディを利用して楽曲を検索す
る楽曲検索装置が開示されている。また、例えば特開平
6−290574号公報には、楽曲の音楽的特徴から検
索のためのインデックスを作成し、このインデックスを
利用して楽曲を検索する楽曲検索装置が開示されてい
る。
【0004】一方、最近では、正準相関分析によって楽
曲の印象を示す感性語及び音楽的特徴から検索空間を作
成し、この検索空間上で類似曲を検索する楽曲検索装置
が開示されている(例えば、辻ら,「曲の局所パターン
特徴量を用いた類似曲検索・感性語による検索」,電子
情報通信学会技術報告,SP−124)。この楽曲検索
装置は、MIDI(Music Instruments Digital Interf
ace)データ中の楽曲の旋律情報を利用し、旋律情報と
感性語を正準相関分析にかけることにより類似曲検索を
行っている。
【0005】
【発明が解決しようとする課題】しかしながら、特開平
2−54300号公報に開示されているようなメロディ
を利用した楽曲検索装置は、例えば「以前耳にした曲を
検索したい」、「このメロディに似たメロディを持つ曲
を検索したい」といった検索に対しては有効的である
が、ユーザが指定した参照曲と似た印象を持つ楽曲を検
索することには対応できない。
【0006】また、特開平6−290574号公報に開
示されているような楽曲検索装置では、楽曲の印象を指
定して耳にしたことのない楽曲を検索することは可能で
あるものの、音楽的特徴とインデックスとして用いられ
る楽曲の印象との間に相関関係が無いために、音楽的特
徴と楽曲の印象との対応付けが難しい。
【0007】さらに、音楽的特徴として旋律情報を使用
し、旋律情報と感性情報とを結び付けるような楽曲検索
装置は、楽曲の印象による検索を行う場合には有効的で
あるものの、CD等に記録されている楽曲のように、M
IDIデータではない音楽データからは音楽的特徴とし
ての旋律情報を抽出することはできないために、MID
Iデータ以外の音楽データを検索の対象とすることがで
きない。
【0008】本発明は、このような問題に鑑みてなされ
たものであり、その目的とするところは、CD等の一般
的な楽音データの中からユーザの指定する参照曲に類似
する印象を有する楽曲を検索することが可能な楽曲検索
装置を提供することにある。
【0009】
【課題を解決するための手段】以上の課題を解決すべ
く、本発明に係る楽曲検索装置の特徴は、(a)楽曲の
楽音データと、楽曲の書誌データと、前記楽音データに
対する印象を示す感性ベクトルとを格納する楽曲データ
格納手段と、(b)前記楽曲データ格納手段に格納され
ている前記楽音データを、あるいは新たに前記楽曲デー
タ格納手段に追加された楽曲の楽音データを、周波数解
析することにより得られるスペクトルデータのピーク周
波数と周波数帯域毎の時間的変化とを利用して求められ
る、テンポ情報またはビート情報のうちのどちらか一
方、もしくはその両方を用いて、楽曲の音楽的特徴を示
す特徴ベクトルを作成する音楽的特徴抽出手段と、
(c)前記楽曲データ格納手段に格納されている前記感
性ベクトルと前記特徴ベクトルとを用いて前記楽曲を配
置するための検索空間を作成し、あるいは新たに追加さ
れた前記楽曲の前記特徴ベクトルとを用いて作成済みの
前記検索空間上に前記新たに追加された楽曲を配置する
検索空間作成手段と、(d)前記楽曲データ格納手段に
格納されている前記楽曲の中から検索する楽曲の参照曲
となる楽曲を選択する参照曲選択手段と、(e)選択さ
れた参照曲の前記検索空間上の位置に近い位置にある楽
曲を検索し、検索された楽曲の楽曲データと書誌データ
とを出力する検索手段とを備えることを特徴とする。
【0010】すなわち、本発明に係る楽曲検索装置の特
徴においては、楽曲の音楽的特徴を示す特徴ベクトル
と、実際に楽曲を聞いた時に得られる印象を感性語毎に
評価して得られる感性ベクトルとを用いて検索空間を作
成し、この検索空間上における参照曲の位置に近い位置
にある楽曲を類似する楽曲として抽出するので、CD等
の一般的な楽音データの中からユーザの指定する参照曲
に類似する印象を有する楽曲を検索することができる。
【0011】また、一旦検索空間が作成された後に、新
たに追加される楽曲については、特徴ベクトルのみを求
め、作成済みの検索空間に配置することで、少ない労力
で楽曲の追加を行うことができる。
【0012】また、本発明に係る楽曲検索装置において
は、楽音データのスペクトルデータからテンポ情報とビ
ート情報を抽出して特徴ベクトルを作成するので、CD
等の楽曲のようなMIDIデータではない楽音データか
らでも特徴ベクトルを作成することができる。
【0013】尚、検索空間は、感性ベクトルと特徴ベク
トルとを正準相関分析することにより、もしくは感性ベ
クトルと特徴ベクトルとを重回帰分析することにより作
成される。
【0014】
【発明の実施の形態】以下、図1〜図10を参照して、
本発明の実施の形態となる楽曲検索装置の構成及び動作
について詳しく説明する。
【0015】[楽曲検索装置の構成]図1は、本発明の
実施の形態となる楽曲検索装置の全体構成を示すブロッ
ク図である。
【0016】この実施の形態における楽曲検索装置は、
図1に示すように、楽音データ格納手段101、書誌デ
ータ格納手段102、音楽的特徴抽出手段103、感性
ベクトル格納手段104、検索空間作成手段105、参
照曲選択入力手段106、検索手段107、検索結果出
力手段108、及び楽曲データ追加手段109を備え
る。
【0017】楽音データ格納手段101は楽音データを
格納し、書誌データ格納手段102は楽音データのタイ
トルや作曲者等の書誌データ(書誌的項目)を格納す
る。尚、楽音データは、デジタル形式若しくはアナログ
形式の音響信号であり、書誌データと合わせてテープ、
ハードディスク等の読み出し可能な記憶媒体に格納され
る。
【0018】音楽的特徴抽出手段103は、楽音データ
格納手段101に格納されている楽音データのうち、事
前に学習曲として選んだ楽曲データについて周波数解析
することにより得られるスペクトルデータから音楽的特
徴を抽出し、抽出した音楽的特徴を特徴ベクトルV
として格納する。
【0019】感性ベクトル格納手段104は、楽曲を聞
いたユーザが楽曲に対して持った印象を感性語により評
価した感性語データに基づいて感性ベクトルV を作
成し、作成した感性ベクトルV を楽音データ毎に格
納する。
【0020】ここで、感性語とは、例えば「楽しい」,
「暗い」等の楽曲の印象を表す言葉であり、感性語デー
タとは、楽曲の評価者が楽曲に対して持った印象を感性
語毎に数段階に分けて付与した値を示す。
【0021】尚、この実施の形態においては、感性語と
して「美しい」,「暗い」,「落ち着く」の3つの言葉
を用意し、各感性語について「1」〜「5」の5段階評
価を行った。そして、例えば、評価者が楽曲を聞いた時
に、「楽しい」,「暗い」,「落ち着く」についてそれ
ぞれ、「4」,「1」,「3」の評価を行った場合に
は、感性ベクトルV は以下の式(1)により表現さ
れる。
【0022】
【数1】 事前に学習曲として選んだ楽曲データについて、予めこ
のような評価を行って感性ベクトルを作成し、感性ベク
トル格納手段104に格納しておく。
【0023】検索空間作成手段105は、音楽的特徴抽
出手段103内に格納された特徴ベクトルV と感性
ベクトル格納手段104内に格納された感性ベクトルV
とを正準相関分析もしくは重回帰分析にかけることに
より検索空間を作成する。また、その後、新たに追加さ
れる楽曲については、正準相関分析もしくは重回帰分析
によって求められた重み係数を用いて検索空間上に配置
する。
【0024】参照曲選択入力手段106は、ユーザの操
作に従って、検索のための手掛かりとなる参照曲を楽音
データ格納手段101に格納されている楽音データの中
から選択する。
【0025】検索手段107は、参照曲選択入力手段1
06により選択された楽曲における検索空間上の位置と
他の楽曲における検索空間上の位置との間の距離を求
め、選択された楽曲に近い位置にある楽曲を抽出する。
【0026】検索結果出力手段108は、検索手段10
7が抽出した楽曲を検索結果として表示出力し、また、
抽出された楽曲の楽音データを出力する。
【0027】楽曲データ追加手段109は、検索の対象
となる楽曲の楽音データや書誌データを新たに追加す
る。
【0028】[楽曲検索装置の動作]上記楽曲検索装置
は、大きく分けて、音楽的特徴抽出処理、検索空間作成
処理、及び検索処理により実行される。そこで、以下で
は、これらの各処理について順に詳しく説明する。
【0029】〔音楽的特徴抽出処理〕始めに、図2に示
すブロック図と図3に示すフローチャートを参照して、
音楽的特徴を抽出する処理の流れについて説明する。
【0030】音楽的特徴抽出手段103は、図2に示す
ように、時間周波数変換手段201、遅延手段202、
差分データ演算手段203、テンポ情報作成手段20
4、ビート情報作成手段205、特徴ベクトル作成手段
206を備える。
【0031】図3に示すフローチャートは、楽音データ
が時間周波数変換手段201に入力されることで開始と
なり、この音楽的特徴抽出処理はステップS1の処理に
移行する。
【0032】時間周波数変換手段201は、FFT(Fa
st Fourier Transform;高速フーリエ変換)等の手段を
用いて一定区間毎の楽音データを周波数領域のスペクト
ルパワーに変換する(ステップS1)。周波数スペクト
ルパワーに変換された楽曲データは、差分データ演算手
段203に入力されると共に、 遅延手段202にて遅
延される。
【0033】遅延手段202は、時間周波数変換手段2
01により周波数スペクトルパワーに変換された楽音デ
ータを、所定のフレーム数だけ遅延させる(ステップS
2)。尚、ここでいう「フレーム」とは時間周波数変換
を行う単位のことを意味する。
【0034】差分データ演算手段203は、遅延手段2
02が遅延されたフレーム数分だけ間隔を空けた2つの
フレームのスペクトルパワーの差分値を演算する(ステ
ップS3)。ここで、遅延フレーム数が1フレームであ
る場合、差分データ演算手段203は、隣り合う2つの
フレーム間でスペクトルパワーの差分を演算し、フレー
ムfのi番目の差分値d(i,f)は以下の式(2)により
表現される。
【0035】
【数2】 ここで、spec(i ,f)はフレームf のi番目のスペクト
ルパワーである。
【0036】テンポ情報作成手段204は、差分データ
演算手段203が出力する 差分データを用いてテンポ
情報を作成する(ステップS4)。
【0037】〈テンポ情報作成処理〉ここで、上記ステ
ップS4におけるテンポ情報作成手段204によるテン
ポ情報作成処理を、図4に示すフローチャートを参照し
て詳しく説明する。
【0038】ステップS41において、テンポ情報作成
手段204は、入力した差分データがテンポ情報を作成
するために使用する帯域であるか否かを判別する。判別
の結果、テンポ情報を作成するために使用する帯域であ
る場合にはステップS42の処理へと移行し、テンポ情
報を作成するために使用する帯域でない場合にはステッ
プS44の処理へと移行する。
【0039】ステップS42において、テンポ情報作成
手段204は、差分値d(i,f)が閾値Th以上(ここ
で、閾値Th>0とする)であるか否かを判別する。判
別の結果、閾値Th以上である場合にはステップS43
の処理へと移行し、閾値Th以下である場合にはステッ
プS44の処理へと移行する。
【0040】ステップS43において、テンポ情報作成
手段204は、スコアS(f)に差分値d(i,f)を加算し、
ステップS44の処理へと移行する。
【0041】ここで、閾値Thは正の値であるので、こ
のステップS43の処理により、フレームf よりも時
間的に後に位置するフレームf +nにおいて、特定の
周波数帯域のスペクトルパワーが大きく増加している場
合のみ、スコアS(f)に差分値が加算されることにな
る。
【0042】ステップS44の処理において、テンポ情
報作成手段204は、フレーム内の全ての差分値に対し
て上記の処理を完了したか否かを判別する。判別の結
果、完了した場合にはステップS45の処理へと移行
し、完了していない場合には再びステップS41の処理
に戻り、上記ステップS41〜ステップS44の処理を
繰り返す。
【0043】ステップS45において、テンポ情報作成
手段204は、特定区間内の全てのフレームについて上
記の処理を完了したか否かを判別する。判別の結果、完
了した場合にはステップS46の処理へと移行し、完了
していない場合にはステップS41の処理に戻る。
【0044】ここで、本明細書中における「特定区間」
とは、予め決めた位置における一定時間長のフレームを
意味する。具体的には、この実施の形態では、楽曲デー
タを時間長において3等分した各データの先頭から30
秒の区間とする。従って、一つの楽曲データについて
は、3つのテンポ情報と3つのビート情報が作成される
こととなる。
【0045】ステップS46において、テンポ情報作成
手段204は、フレームf のスコアS(f)が隣接するN
フレームのスコアの中で最大の値であるか否かを判別す
る。判別の結果、最大の値である場合にはステップS4
7に移行し、テンポ情報作成手段204は、そのフレー
ムf がビート位置にあると判断し、ビートフラグB(f)
の値を1に設定すると共にカウンタbeatの値を1増数
し、ステップS49に移行する。
【0046】一方、フレームf のスコアS(f)が隣接す
るNフレームのスコアの中で最大の値でない場合には、
ステップS48において、テンポ情報作成手段204
は、ビートフラグB(f)の値を0に設定し、ステップS
49に移行する。
【0047】ステップS49において、テンポ情報作成
手段204は、特定区間内の全てのフレームについて上
記の処理を完了したか否かを判別する。判別の結果、完
了した場合には一連のテンポ情報作成処理は終了し、音
楽的特徴抽出処理のステップS5の処理に移行する。一
方、完了していない場合には、再びステップS46の処
理に戻り、ステップS46〜ステップS49の各処理を
繰り返す。
【0048】再び、図3のフローチャートに戻り、検索
空間作成処理のステップS5以後の処理について説明す
る。
【0049】ビート情報作成手段205は、差分データ
演算手段203が出力する 差分データを用いてビート
情報を作成する(ステップS5)。
【0050】〈ビート情報作成処理〉ここで、上記ステ
ップS5におけるビート情報作成手段205によるビー
ト情報作成処理を、図5に示すフローチャートを参照し
て詳しく説明する。
【0051】ステップS51において、ビート情報作成
手段205は、ビートフラグB(f)が1であるか否かを
判別することにより、そのフレームがビート位置にある
か否かを判別する。判別の結果、ビート位置にある場合
にはステップS52の処理へと移行し、ビート位置にな
い場合にはステップS55の処理へと移行する。
【0052】ステップS52において、ビート情報作成
手段205は、差分値d(i,f)が閾値Th以上であるか
否かを判別する。判別の結果、閾値Th以上である場合
にはステップS53の処理へと移行し、閾値Th以下で
ある場合にはステップS54の処理へと移行する。
【0053】ステップS53において、ビート情報作成
手段205は、レベルLにその差分値d(i,f)を加算す
る。
【0054】ここで、前述のように閾値Thは正の値で
あるので、ステップS53の処理にて、ビート位置にあ
ると判定されたフレームfにおいて、時間的に後ろに位
置するフレームf+nでスペクトルパワーが増加してい
る場合のみ、レベルLに差分値が加算されることにな
る。
【0055】ステップS54において、ビート情報作成
手段205は、フレーム内の全ての差分値に対して上記
の処理を完了したか否かを判別する。判別の結果、完了
した場合にはステップS55の処理へと移行し、完了し
ていない場合にはこのビート情報作成処理は再度ステッ
プS52の処理に戻り、フレーム内の全ての差分値に対
して上記の処理を完了するまでステップS52〜ステッ
プS54の処理を繰り返す。
【0056】ステップS55において、ビート情報作成
手段205は、特定区間内の全てのフレームについて上
記の処理を完了したか否かを判別する。判別の結果、完
了した場合にはステップS56の処理へと移行し、完了
していない場合にはステップS51の処理に戻り、特定
区間内の全てのフレームについて上記の処理を完了する
までステップS51〜ステップS55の各処理を繰り返
す。
【0057】ステップS56において、ビート情報作成
手段205は、レベルLをカウンタbeatの値で割ること
により1ビート位置当たりの平均レベルを算出し、算出
した値をビート情報levelに設定する。これにより、一
連のビート情報作成処理は終了し、図3のステップS6
の処理に移行する。
【0058】再び図3のフローチャートに戻り、特徴ベ
クトル作成手段206は、作成されたテンポ情報とビー
ト情報とを用いて特徴ベクトルV を作成する(ステ
ップS6)。
【0059】ここで、具体的には、テンポ情報作成手段
204(ステップS4の処理)により作成された3つの
テンポ情報を[beat0,beat1,beat2]とし、ビート情報
作成手段205(ステップS5の処理)により作成され
た3つのビート情報を[level0,level1,level2]とする
と、特徴ベクトルV は、以下の式(3)により表さ
れる。
【0060】
【数3】 〔検索空間作成処理〕検索空間作成手段105は、作成
された特徴ベクトルV と感性ベクトル格納手段10
4内に格納されている感性ベクトルV とを「正準相
関分析」にかけることにより、各楽曲の正準変量が示さ
れた図6に例示するような検索空間を作成する(ステッ
プS7)。
【0061】ここで、上記検索空間は、図7に示すよう
に、各楽曲の検索空間上での座標値で表現することも可
能である。
【0062】本明細書中でいう「正準相関分析」とは、
2組の変数群[x1 ,x2 ,....,xp ]及び[y1 ,y
2 ,....,yq ]による合成変数[u=a1 x1 +a2 x2 +....+
ap xp ]及び[v=b1 y1 +b2 y2 +....+bq yq ]の相関
係数が最大となるように、重み係数[a1 ,a2 ,....,a
p ]及び[b1 ,b2 ,....,bq ]を定める方式を意味す
る。
【0063】ここで、検索のための楽曲を新規に追加す
る場合には、先ず楽曲データ追加手段109にてその楽
曲の楽音データと書誌データを追加し、次に、前述の方
法によりその楽曲の楽音データから特徴ベクトルを抽出
する。そして、抽出した特徴ベクトルと、既に求められ
ている上記重み係数を用いて、図6に例示するような検
索空間上にその楽曲を配置すれば良い。
【0064】〔検索処理〕次に、図8に示すフローチャ
ートを参照して、上記の処理により作成された検索空間
を利用して楽曲検索を行う際の処理の流れについて説明
する。
【0065】この図8に示すフローチャートは、ユーザ
が参照曲選択入力手段106を介して手がかりとする参
照曲を入力することで開始となり、ステップS11の処
理に移行する。
【0066】尚、参照曲選択入力手段106は様々な形
態が想定されるが、例えば図9(a)に示すような入力
ウィンドウ300として構成し、ユーザに楽曲名301
を直接入力させるようにしても良いし、あるいは、例え
ば図9(b)に示すような入力ウィンドウ400として
構成し、楽曲名や歌手名を50音別に指定する形態40
1として、ユーザに楽曲名を選択入力させるようにして
も良い。
【0067】検索手段107は、検索空間上にある楽曲
の位置と、指定された参照曲の位置との間の距離dを算
出することにより、検索空間上での参照曲の位置に近い
位置にある楽曲を算出する(ステップS11)。
【0068】ここで、楽曲A及び楽曲Bの検索空間上で
の座標をそれぞれ、[A(xa,ya),B(xb,yb)]とすると、
2つの楽曲間の距離dは次式(4)により表現される。
【0069】
【数4】 そして、検索結果出力手段108は、検索空間上での参
照曲の位置に近い位置にある楽曲の書誌データ及び楽曲
データを検索結果として出力する(ステップS12)。
【0070】[その他の実施の形態]次に、 検索空間
作成手段105による検索空間作成処理(ステップS
7)において、特徴ベクトルV と感性ベクトルV
とを「重回帰分析」にかけることにより検索空間を作成
する例を説明する。
【0071】重回帰分析とは、目的変数[y1 ,y2 ,y
3 ,....]と、それに影響すると考えられる2つ以上の
説明変数[x1 ,x2 ,x3 ,....]との間の関係式(次式
(5)及び(6))を求め、係数[a1 ,b1 ,c1 ,....,a
2 ,b2 ,c2 ,....]を決定するものである。
【0072】
【数5】 ここで、感性ベクトル格納手段104に格納された感性
ベクトルの各要素を目的変数[y1 ,y2 ,y3 ,....]と
し、特徴ベクトル作成手段206により作成される特徴
ベクトルV を説明変数[x1 ,x2 ,x3 ,....]に当て
はめ、それぞれの楽曲の間で相関が最大になるように、
係数[a1 ,b1 ,c1 ,....,a2 ,b2 ,c2 ,....]を求め
る。これにより、各楽曲毎に目的変数[y1 ,y2 ,y
3 ,....]の値が求まり、従って感性ベクトルと同じ次
元数の感性空間上に各楽曲を配置することができる。
【0073】検索を行う際には、検索手段107におい
て検索空間上での楽曲間の距離dを演算し、近い位置に
ある楽曲を求める。楽曲A及び楽曲Bの検索空間上での
座標をそれぞれ、[A(y1a ,y2a ,y3a ,....),B(y1b ,y
2b ,y3b ,....)]とすると、2つの楽曲間の距離dは次
式(7)により表現される。
【0074】
【数6】 また、検索のための楽曲を新規に追加する場合には、抽
出した特徴ベクトルと、既に求められている係数[a1 ,
b1 ,c1 ,....,a2 ,b2 ,c2 ,....]を用いて、目的変数
[y1 ,y2 ,y3 ,....]の値を求め、検索空間上にその楽
曲を配置すれば良い。
【0075】以上、本発明者らによってなされた発明を
適用した実施の形態について説明したが、この実施の形
態による本発明の開示の一部をなす論述及び図面により
本発明は限定されることはない。この実施の形態に基づ
いて当業者等によりなされる他の実施の形態、実施例及
び運用技術等は全て本発明の範疇に含まれることは勿論
である。
【0076】
【発明の効果】本発明によれば、楽曲の音楽的特徴を示
す特徴ベクトルと、実際に楽曲を聞いた時に得られる印
象を感性語毎に評価して得られる感性ベクトルとを用い
て検索空間を作成し、この検索空間上における参照曲の
位置に近い位置にある楽曲を類似する楽曲として抽出す
るので、CD等の一般的な楽音データの中からユーザの
指定する参照曲に類似する印象を有する楽曲を検索する
ことができる。また、一旦検索空間が作成された後に、
新たに追加される楽曲については、特徴ベクトルのみを
求め、作成済みの検索空間に配置することで、少ない労
力で楽曲の追加を行うことができる。
【0077】また、楽音データのスペクトルデータから
テンポ情報とビート情報を抽出して楽曲の特徴ベクトル
を作成するので、CD等の楽曲のようなMIDIデータ
ではない楽音データであっても楽曲の特徴ベクトルを作
成することができる。
【図面の簡単な説明】
【図1】本発明の実施の形態である楽曲検索装置の全体
構成を示すブロック図である。
【図2】図1に示す 楽曲検索装置における音楽的特徴
抽出手段の構成を示すブロック図である。
【図3】図1に示す 楽曲検索装置における検索空間作
成処理を示すフローチャート図である。
【図4】図3に示すテンポ情報作成処理を示すフローチ
ャート図である。
【図5】図3に示すビート情報作成処理を示すフローチ
ャート図である。
【図6】図1に示す 楽曲検索装置における検索空間を
示す模式図である。
【図7】図1に示す 楽曲検索装置における検索空間を
示す他の例である。
【図8】図1に示す 楽曲検索装置における検索処理を
示すフローチャートである。
【図9】図1に示す 楽曲検索装置における参照曲選択
入力手段の構成を示す模式図である。
【符号の説明】
101…楽音データ格納手段、 102…書誌データ格納手段、 103…音楽的特徴抽出手段、 104…感性ベクトル格納手段、 105…検索空間作成手段、 106…参照曲入力手段、 107…検索手段、 108…検索結果出力手段、 109…楽曲データ追加手段、 201…時間周波数変換手段、 202…遅延手段、 203…差分データ演算手段、 204…テンポ情報作成手段、 205…ビート情報作成手段、 206…特徴ベクトル作成手段
───────────────────────────────────────────────────── フロントページの続き (72)発明者 清水 徹 神奈川県横浜市神奈川区守屋町3丁目12番 地 日本ビクター株式会社内 Fターム(参考) 5B075 MM02 ND14 PR06 UU40

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 楽曲の楽音データと、楽曲の書誌データ
    と、前記楽音データに対する印象を示す感性ベクトルと
    を格納する楽曲データ格納手段と、 前記楽曲データ格納手段に格納されている前記楽音デー
    タを、あるいは新たに前記楽曲データ格納手段に追加さ
    れた楽曲の楽音データを、周波数解析することにより得
    られるスペクトルデータのピーク周波数と周波数帯域毎
    の時間的変化とを利用して求められる、テンポ情報また
    はビート情報のうちのどちらか一方、もしくはその両方
    を用いて、楽曲の音楽的特徴を示す特徴ベクトルを作成
    する音楽的特徴抽出手段と、 前記楽曲データ格納手段に格納されている前記感性ベク
    トルと前記特徴ベクトルとを用いて前記楽曲を配置する
    ための検索空間を作成し、あるいは新たに追加された前
    記楽曲の前記特徴ベクトルとを用いて作成済みの前記検
    索空間上に前記新たに追加された楽曲を配置する検索空
    間作成手段と、 前記楽曲データ格納手段に格納されている前記楽曲の中
    から検索する楽曲の参照曲となる楽曲を選択する参照曲
    選択手段と、 選択された参照曲の前記検索空間上の位置に近い位置に
    ある楽曲を検索し、検索された楽曲の楽曲データと書誌
    データとを出力する検索手段とを備えることを特徴とす
    る楽曲検索装置。
  2. 【請求項2】 請求項1に記載の楽曲検索装置におい
    て、 前記検索空間作成手段は、前記感性ベクトルと前記特徴
    ベクトルとを正準相関分析することで、もしくは前記感
    性ベクトルと前記特徴ベクトルとを重回帰分析すること
    で、前記検索空間を作成することを特徴とする楽曲検索
    装置。
JP2001289792A 2001-09-21 2001-09-21 楽曲検索装置及び楽曲検索方法 Expired - Lifetime JP4622199B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001289792A JP4622199B2 (ja) 2001-09-21 2001-09-21 楽曲検索装置及び楽曲検索方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001289792A JP4622199B2 (ja) 2001-09-21 2001-09-21 楽曲検索装置及び楽曲検索方法

Publications (3)

Publication Number Publication Date
JP2003099462A true JP2003099462A (ja) 2003-04-04
JP2003099462A5 JP2003099462A5 (ja) 2009-06-25
JP4622199B2 JP4622199B2 (ja) 2011-02-02

Family

ID=19112233

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001289792A Expired - Lifetime JP4622199B2 (ja) 2001-09-21 2001-09-21 楽曲検索装置及び楽曲検索方法

Country Status (1)

Country Link
JP (1) JP4622199B2 (ja)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005086166A1 (ja) * 2004-03-03 2005-09-15 Pioneer Corporation 楽曲同一性判別装置及び方法
WO2006038429A1 (ja) * 2004-09-30 2006-04-13 Matsushita Electric Industrial Co., Ltd. 音楽コンテンツ再生装置
WO2006109488A1 (ja) * 2005-03-31 2006-10-19 Pioneer Corporation 情報類似性判別装置及び情報類似性判別方法
JP2007033851A (ja) * 2005-07-27 2007-02-08 Sony Corp ビート抽出装置および方法、音楽同期画像表示装置および方法、テンポ値検出装置および方法、リズムトラッキング装置および方法、音楽同期表示装置および方法
JP2007226071A (ja) * 2006-02-27 2007-09-06 Dainippon Printing Co Ltd 音響信号検索装置
JP2008242052A (ja) * 2007-03-27 2008-10-09 Yamaha Corp 音楽再生制御装置
JP2008251109A (ja) * 2007-03-30 2008-10-16 Clarion Co Ltd 楽曲再生制御装置および楽曲再生方法
JP2008251093A (ja) * 2007-03-30 2008-10-16 Clarion Co Ltd 楽曲再生制御装置および再生リスト作成方法
JP2008268507A (ja) * 2007-04-19 2008-11-06 Taito Corp 楽曲情報付与サーバ、端末、及び楽曲情報付与システム
JP2009036862A (ja) * 2007-07-31 2009-02-19 Univ Chuo 音響処理のための情報処理装置、音響処理方法、プログラム、および音響検索システム
JP2009075495A (ja) * 2007-09-25 2009-04-09 Yamaha Corp 楽曲加工装置およびプログラム
JP2010054758A (ja) * 2008-08-28 2010-03-11 Sony Corp 再生装置および再生方法
US8224846B2 (en) 2008-09-30 2012-07-17 Kddi Corporation Apparatus for music retrieval, method for music retrieval, and program for music retrieval
WO2016039464A1 (ja) * 2014-09-12 2016-03-17 ヤマハ株式会社 音響解析装置
JP2016057570A (ja) * 2014-09-12 2016-04-21 ヤマハ株式会社 音響解析装置
JP2020038448A (ja) * 2018-09-03 2020-03-12 日本電信電話株式会社 情報処理装置、情報処理方法及びプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06290574A (ja) * 1993-03-31 1994-10-18 Victor Co Of Japan Ltd 楽曲検索装置
JPH10134549A (ja) * 1996-10-30 1998-05-22 Nippon Columbia Co Ltd 楽曲検索装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06290574A (ja) * 1993-03-31 1994-10-18 Victor Co Of Japan Ltd 楽曲検索装置
JPH10134549A (ja) * 1996-10-30 1998-05-22 Nippon Columbia Co Ltd 楽曲検索装置

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005086166A1 (ja) * 2004-03-03 2005-09-15 Pioneer Corporation 楽曲同一性判別装置及び方法
US7460919B2 (en) 2004-09-30 2008-12-02 Panasonic Corporation Music contents reproducing apparatus
WO2006038429A1 (ja) * 2004-09-30 2006-04-13 Matsushita Electric Industrial Co., Ltd. 音楽コンテンツ再生装置
WO2006109488A1 (ja) * 2005-03-31 2006-10-19 Pioneer Corporation 情報類似性判別装置及び情報類似性判別方法
JP2007033851A (ja) * 2005-07-27 2007-02-08 Sony Corp ビート抽出装置および方法、音楽同期画像表示装置および方法、テンポ値検出装置および方法、リズムトラッキング装置および方法、音楽同期表示装置および方法
JP2007226071A (ja) * 2006-02-27 2007-09-06 Dainippon Printing Co Ltd 音響信号検索装置
JP2008242052A (ja) * 2007-03-27 2008-10-09 Yamaha Corp 音楽再生制御装置
JP2008251109A (ja) * 2007-03-30 2008-10-16 Clarion Co Ltd 楽曲再生制御装置および楽曲再生方法
JP2008251093A (ja) * 2007-03-30 2008-10-16 Clarion Co Ltd 楽曲再生制御装置および再生リスト作成方法
JP2008268507A (ja) * 2007-04-19 2008-11-06 Taito Corp 楽曲情報付与サーバ、端末、及び楽曲情報付与システム
JP2009036862A (ja) * 2007-07-31 2009-02-19 Univ Chuo 音響処理のための情報処理装置、音響処理方法、プログラム、および音響検索システム
JP2009075495A (ja) * 2007-09-25 2009-04-09 Yamaha Corp 楽曲加工装置およびプログラム
JP2010054758A (ja) * 2008-08-28 2010-03-11 Sony Corp 再生装置および再生方法
US8224846B2 (en) 2008-09-30 2012-07-17 Kddi Corporation Apparatus for music retrieval, method for music retrieval, and program for music retrieval
WO2016039464A1 (ja) * 2014-09-12 2016-03-17 ヤマハ株式会社 音響解析装置
JP2016057570A (ja) * 2014-09-12 2016-04-21 ヤマハ株式会社 音響解析装置
JP2020038448A (ja) * 2018-09-03 2020-03-12 日本電信電話株式会社 情報処理装置、情報処理方法及びプログラム
JP7135607B2 (ja) 2018-09-03 2022-09-13 日本電信電話株式会社 情報処理装置、情報処理方法及びプログラム

Also Published As

Publication number Publication date
JP4622199B2 (ja) 2011-02-02

Similar Documents

Publication Publication Date Title
CN106095925B (zh) 一种基于声乐特征的个性化歌曲推荐方法
JP4622199B2 (ja) 楽曲検索装置及び楽曲検索方法
JP4027051B2 (ja) 楽曲登録装置、楽曲登録方法、及びそのプログラムと記録媒体
JP3433818B2 (ja) 楽曲検索装置
US7812241B2 (en) Methods and systems for identifying similar songs
Hainsworth et al. Onset detection in musical audio signals
Bosch et al. Evaluation and combination of pitch estimation methods for melody extraction in symphonic classical music
WO2007055238A1 (ja) 情報処理装置および方法、並びにプログラム
EP3489946A1 (en) Real-time jamming assistance for groups of musicians
WO2001031513A2 (en) Music search by melody input
CN110472097A (zh) 乐曲自动分类方法、装置、计算机设备和存储介质
CN110010159B (zh) 声音相似度确定方法及装置
JP2007114798A (ja) 楽曲検索装置、楽曲検索方法、及びそのプログラムと記録媒体
JP3716725B2 (ja) 音声処理装置、音声処理方法および情報記録媒体
JP2002055695A (ja) 音楽検索システム
CN113196381A (zh) 音响解析方法以及音响解析装置
Nagavi et al. An extensive analysis of query by singing/humming system through query proportion
JP4607660B2 (ja) 楽曲検索装置および楽曲検索方法
JP5085577B2 (ja) プレイリスト作成装置、楽曲再生装置、プレイリスト作成方法およびプレイリスト作成プログラム
JP3934556B2 (ja) 信号識別子の抽出方法及びその装置、信号識別子からデータベースを作成する方法及びその装置、及び、検索時間領域信号を参照する方法及びその装置
JP2007248610A (ja) 楽曲分析方法及び楽曲分析装置
JP5359786B2 (ja) 音響信号分析装置、音響信号分析方法、及び音響信号分析プログラム
JP2004531758A5 (ja)
JP5540651B2 (ja) 音響信号分析装置、音響信号分析方法、及び音響信号分析プログラム
WO2019239538A1 (ja) 音響装置およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071228

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090507

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100709

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101005

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101018

R151 Written notification of patent or utility model registration

Ref document number: 4622199

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131112

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131112

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131112

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

EXPY Cancellation because of completion of term