JP5085577B2 - Playlist creation device, music playback device, playlist creation method, and playlist creation program - Google Patents

Playlist creation device, music playback device, playlist creation method, and playlist creation program Download PDF

Info

Publication number
JP5085577B2
JP5085577B2 JP2009007765A JP2009007765A JP5085577B2 JP 5085577 B2 JP5085577 B2 JP 5085577B2 JP 2009007765 A JP2009007765 A JP 2009007765A JP 2009007765 A JP2009007765 A JP 2009007765A JP 5085577 B2 JP5085577 B2 JP 5085577B2
Authority
JP
Japan
Prior art keywords
music
music data
playlist
database
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009007765A
Other languages
Japanese (ja)
Other versions
JP2010164825A (en
Inventor
広海 石先
啓一郎 帆足
康弘 滝嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2009007765A priority Critical patent/JP5085577B2/en
Publication of JP2010164825A publication Critical patent/JP2010164825A/en
Application granted granted Critical
Publication of JP5085577B2 publication Critical patent/JP5085577B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To give a story to a play list by creating the play list considering a feature amount which is specific for a musical piece. <P>SOLUTION: The play list creation device 10 for creating the play list in which a play back order of musical piece data are predetermined, is provided with: a feature amount extraction section 12 which reads the musical data from a database 11, and extracts a plurality of kinds of feature amounts from the read musical piece data; a model construction section 13 for creating a musical piece transitional model by calculating a transitional probability when any one of musical piece data is changed to the other musical piece data, based on the extracted feature amount; a musical piece selection section 14 in which a plurality of musical piece data are selected from the database 11, based on the created musical piece transitional model and input information by a user, to make a list; and an output section 15 for displaying the listed information. <P>COPYRIGHT: (C)2010,JPO&amp;INPIT

Description

本発明は、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成装置、楽曲再生装置、プレイリスト作成方法およびプレイリスト作成プログラムに関する。   The present invention relates to a playlist creation device, a song playback device, a playlist creation method, and a playlist creation program that create a playlist that defines the playback order of song data.

従来から、例えば、特許文献1には、ユーザに対し、簡単且つ自動的にプレイリストを作成させるために、ユーザが指定したクエリ楽曲と対象楽曲のメタ情報に基づいて関連性の度合を計算し、コンテンツを利用した自動プレイリスト生成に関する技術が開示されている。具体的には、クエリ楽曲のメタ情報もしくはキーワードに対して、シソーラス辞書データベースから関連語(A)を抽出し、(A)に関連するメタデータを保持する楽曲をプレイリストに登録している。   Conventionally, for example, Patent Document 1 calculates the degree of relevance based on the query music specified by the user and the meta information of the target music in order to allow the user to create a playlist easily and automatically. A technique related to automatic playlist generation using content is disclosed. Specifically, the related word (A) is extracted from the thesaurus dictionary database for the meta information or keywords of the query music, and the music holding the metadata related to (A) is registered in the playlist.

また、特許文献2には、プレイリストを生成するために、選択された楽曲(クエリ)と、データベース内の楽曲情報(曲名、アーティスト名、アルバム名、ジャンル名など)と共通する楽曲を絞り込むことで、プレイリストを生成する、もしくは支援する技術が開示されている。   Further, in Patent Document 2, in order to generate a playlist, the selected music (query) and the music common to the music information (song name, artist name, album name, genre name, etc.) in the database are narrowed down. Thus, a technique for generating or supporting a playlist is disclosed.

また、特許文献3には、プレイリスト検索において、データベース内のプレイリストと、該当プレイリストを再生順に見たときの楽曲推移を表すストーリ情報を関連付けて、ストーリ情報の類似度でプレイリストを検索する技術が開示されている。ここで、「ストーリ情報」とは、例えば、再生楽曲のジャンル情報の順番や、テンポ情報の順番などが例として挙げられている。   Further, in Patent Document 3, in playlist search, a playlist in a database is associated with story information representing a transition of music when the corresponding playlist is viewed in playback order, and the playlist is searched based on the similarity of the story information. Techniques to do this are disclosed. Here, “story information” includes, for example, the order of genre information of reproduced music, the order of tempo information, and the like.

また、特許文献4には、協調フィルタリングを用いて、過去に生成されたプレイリストの中から生成時の聴取状況と聴取者の現在の聴取状況とが近いプレイリストを検索し、前記聴取者の現在の嗜好情報や聴取状況に適応して改変することが可能な技術が開示されている。ここで、「聴取状況」とはアノテーション収集に基づいたものであり、曲と歌詞からどのような情景を歌っているのか、どのような状況で聞きたいかという情報を利用している。   Further, Patent Document 4 uses collaborative filtering to search for a playlist in which the listening situation at the time of generation is close to the current listening situation of the listener from playlists generated in the past, and the listener's A technique that can be modified to adapt to current preference information and listening status is disclosed. Here, the “listening situation” is based on annotation collection, and uses information on what scene is sung from the song and lyrics and in what situation.

また、特許文献5には、ユーザが聞いたことのない楽曲をプレイリストに登録するために、既存のプレイリストにおける各楽曲間の順序関係度を算出し、前記楽曲間の順序関係度に基づいてプレイリストを自動生成する技術が開示されている。ここで、「順序関係」とは、既存の複数のプレイリストに共通して出現する特定の楽曲の組み合わせおよび順序に基づいて算出され、多く出現する楽曲順序の組み合わせを持つパターンを順序関係が強いと判断している。   Also, in Patent Document 5, in order to register music that the user has never heard in the playlist, the degree of order relation between the songs in the existing playlist is calculated, and based on the degree of order relation between the songs. A technique for automatically generating a playlist is disclosed. Here, the “order relation” is calculated based on a combination and order of specific music appearing in common in a plurality of existing playlists, and a pattern having a combination of music order appearing frequently has a strong order relation. Judging.

さらに、非特許文献1および2では、楽曲の音響的特徴に基づいた音楽検索システムが開示されており、また、非特許文献3および4には、音響的特徴量を抽出するツールが開示されている。   Further, Non-Patent Documents 1 and 2 disclose a music search system based on the acoustic features of music, and Non-Patent Documents 3 and 4 disclose tools for extracting acoustic features. Yes.

特開2008−217254号公報JP 2008-217254 A 特開2008−158047号公報JP 2008-158047 A 特開2007−287256号公報JP 2007-287256 A 特開2006−268100号公報JP 2006-268100 A 特開2003−178088号公報JP 2003-178088 A

K. Hoashi, et al: Feature space modification for content-based music retrieval based on user preferences, Proc. of ICASSP 2006, pp. 517-520, 2006.K. Hoashi, et al: Feature space modification for content-based music retrieval based on user preferences, Proc. Of ICASSP 2006, pp. 517-520, 2006. Yoshii, K. Goto, M. Komatani, K. Ogata, T.and Okuno, H.: Improving Efficiency and Scal-ability of Model-based Music RecommenderSystem Based on Incremental Training, Proc.ISMIR , pp.89-94, Vienna, Sep. (2007).Yoshii, K. Goto, M. Komatani, K. Ogata, T. and Okuno, H .: Improving Efficiency and Scal-ability of Model-based Music RecommenderSystem Based on Incremental Training, Proc.ISMIR, pp.89-94, Vienna , Sep. (2007). jAudio: http://sourceforge.net/projects/jaudio/jAudio: http://sourceforge.net/projects/jaudio/ MARSYAS:http://marsyas.sness.net/MARSYAS: http://marsyas.sness.net/

しかしながら、特許文献1から3に開示されている技術では、プレイリスト生成に楽曲メタ情報を用いているが、メタ情報などが整備されていないデータベースでは適用が困難である。また、仮にメタ情報が付されていたとしても、その精度が問題となる場合もある。また、特許文献4では、既存のプレイリスト自体にアノテーションが付与されていなければ利用することができず、アノテーションが付与済みの多くのプレイリストを個人が収集することは困難である。また、特許文献5では、既存のプレイリストの順序関係を用いることで、アノテーション情報等を利用する必要はないものの、既存のプレイリスト収集や、前記収集したプレイリストに共通した楽曲順序の組み合わせが少数の場合や、存在しない場合には有効なプレイリストを生成することが困難である。   However, in the techniques disclosed in Patent Documents 1 to 3, music meta information is used for generating a playlist, but it is difficult to apply to a database in which meta information or the like is not maintained. Moreover, even if meta information is added, the accuracy may be a problem. Moreover, in patent document 4, if an existing playlist itself is not provided with an annotation, it cannot be used, and it is difficult for an individual to collect a large number of playlists that have been annotated. Moreover, in Patent Document 5, although it is not necessary to use annotation information or the like by using the order relation of existing playlists, there is a combination of existing playlist collection and a common song order for the collected playlists. It is difficult to generate an effective playlist when there are a small number or when it does not exist.

このように、従来技術では、音響的な特徴を考慮して、プレイリスト内の盛り上がり、ストーリ等を考慮すること、すなわち、再生順序を考慮したプレイリストを生成することが困難である。一方、従来技術では、音楽検索システムの結果を利用してプレイリストとすることで音響的な特徴を考慮したプレイリストを生成することができるものの、そうした場合、似たような音響特徴量をもつ楽曲によって構成されたプレイリストが作成されやすく、プレイリストのストーリ性を考慮しているとは言いがたい。   As described above, in the prior art, it is difficult to generate the playlist in consideration of the swell and the story in the playlist in consideration of the acoustic characteristics, that is, the reproduction order. On the other hand, in the prior art, a playlist that takes into account the acoustic features can be generated by using the result of the music search system as a playlist, but in such a case, it has similar acoustic features. It is easy to create a playlist composed of songs, and it is difficult to say that the story of the playlist is taken into consideration.

本発明は、このような事情に鑑みてなされたものであり、楽曲固有の特徴量を参酌してプレイリストを作成することによって、プレイリストにストーリ性を持たせることができるプレイリスト作成装置、楽曲再生装置、プレイリスト作成方法およびプレイリスト作成プログラムを提供することを目的とする。   The present invention has been made in view of such circumstances, and a playlist creation device capable of giving a playlist a story by creating a playlist in consideration of the characteristic amount unique to the music, An object of the present invention is to provide a music player, a playlist creation method, and a playlist creation program.

(1)上記の目的を達成するために、本発明は、以下のような手段を講じた。すなわち、本発明のプレイリスト作成装置は、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成装置であって、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する特徴量抽出部と、前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成するモデル構築部と、前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する楽曲選択部と、前記リスト化された情報を表示する出力部と、を備えることを特徴としている。   (1) In order to achieve the above object, the present invention takes the following measures. That is, the playlist creation device of the present invention is a playlist creation device that creates a playlist in which the playback order of music data is determined, reads music data from a database, and uses a plurality of features from the read music data Based on the extracted feature quantity, a feature quantity extraction unit that extracts the quantity, calculates a transition probability when transitioning from any one piece of music data to another piece of music data in which the playback order is adjacent, A model construction unit that creates a transition model, a music selection unit that selects and lists a plurality of music data from the database based on the created music transition model and user input information, and the list And an output unit for displaying information.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others.

(2)また、本発明のプレイリスト作成装置は、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成装置であって、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する特徴量抽出部と、前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成するモデル構築部と、前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する楽曲選択部と、前記リスト化された情報を表示する出力部と、を備えることを特徴としている。   (2) Moreover, the playlist creation device of the present invention is a playlist creation device that creates a playlist in which the reproduction order of music data is determined, reads music data from a database, and a plurality of data from the read music data Based on the extracted feature quantity, a feature quantity extraction unit that extracts types of feature quantities, creates a plurality of clusters composed of at least one piece of music data, and transitions from any one cluster to another cluster Calculating a transition probability at the time of performing, and creating a cluster transition model, and selecting and listing a plurality of music data from the database based on the created cluster transition model and user input information A music selection section and an output section for displaying the listed information are provided.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。さらに、楽曲データをクラスタ化するので、同じ楽曲の組み合わせが複数存在しない場合の不都合を解消することが可能となる。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others. Furthermore, since the music data is clustered, it is possible to eliminate the inconvenience when a plurality of combinations of the same music do not exist.

(3)また、本発明のプレイリスト作成装置において、前記楽曲選択部は、楽曲間の関係度を示す楽曲関係度に基づいて、各クラスタから楽曲データを選択することを特徴としている。   (3) Further, in the playlist creation device of the present invention, the music selection unit selects music data from each cluster based on a music relation level indicating a relation level between music pieces.

このように、楽曲間の関係度を示す楽曲関係度に基づいて、各クラスタから楽曲データを選択するので、クラスタ遷移モデルを用いる場合に、望ましい楽曲を選択することが可能となる。例えば、楽曲データの特徴量の類似度が高い楽曲を選択したり、メタ情報の類似性が高い楽曲を選択したりすることができる。   In this way, music data is selected from each cluster based on the music relationship degree indicating the degree of relation between music pieces, so that it is possible to select a desired music piece when using the cluster transition model. For example, it is possible to select a music piece having a high similarity in the feature amount of the music data, or to select a music piece having a high similarity in meta information.

(4)また、本発明のプレイリスト作成装置において、前記楽曲選択部は、ユーザにより指定された楽曲およびその楽曲のプレイリスト内での順位に基づいて、前記データベースから複数の楽曲データを選択してリスト化することを特徴としている。   (4) In the playlist creation device of the present invention, the music selection unit selects a plurality of music data from the database based on the music specified by the user and the rank of the music in the playlist. It is characterized by listing.

このように、ユーザにより指定された楽曲およびその楽曲のプレイリスト内での順位に基づいて、前記データベースから複数の楽曲データを選択してリスト化するので、ユーザは、プレイリストにおける起点を指定することができる。   Thus, since a plurality of music data is selected from the database and listed based on the music specified by the user and the ranking of the music in the playlist, the user specifies the starting point in the playlist. be able to.

(5)また、本発明の楽曲再生装置は、上記のいずれかに記載のプレイリスト作成装置を備え、前記作成されたリストに基づいて、楽曲データの再生を行なうことを特徴としている。   (5) Moreover, the music reproducing device of the present invention includes any one of the playlist creating devices described above, and reproduces music data based on the created list.

これにより、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。   Thereby, even in a situation where meta information data is not maintained, a playlist having story characteristics can be created. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others.

(6)また、本発明のプレイリスト作成方法は、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成方法であって、特徴量抽出部において、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出するステップと、モデル構築部において、前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成するステップと、楽曲選択部において、前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化するステップと、出力部において、前記リスト化された情報を表示するステップと、を少なくとも含むことを特徴としている。   (6) Further, the playlist creation method of the present invention is a playlist creation method for creating a playlist in which the reproduction order of the music data is determined. In the feature quantity extraction unit, the music data is read from the database, and the reading is performed. A step of extracting a plurality of types of feature values from the recorded music data, and in the model construction unit, based on the extracted feature values, from one of the music data to another music data having an adjacent playback order Calculating a transition probability at the time of transition, creating a music transition model, and selecting a plurality of music data from the database based on the created music transition model and user input information in the music selection unit; And a step of displaying the listed information in the output unit. It is characterized in that it also comprises.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others.

(7)また、本発明のプレイリスト作成方法は、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成方法であって、特徴量抽出部において、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出するステップと、モデル構築部において、前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成するステップと、楽曲選択部において、前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化するステップと、出力部において、前記リスト化された情報を表示するステップと、を備えることを特徴としている。   (7) Further, the playlist creation method of the present invention is a playlist creation method for creating a playlist in which the reproduction order of the music data is determined. In the feature quantity extraction unit, the music data is read from the database, and the reading is performed. Extracting a plurality of types of feature values from the recorded music data, and creating a plurality of clusters composed of at least one song data based on the extracted feature values in the model construction unit, and any one of the clusters Calculating a transition probability when transitioning from one to another cluster, creating a cluster transition model, and in the music selection unit, based on the created cluster transition model and input information by the user, from the database A step of selecting and listing a plurality of music data; and It is characterized by comprising the steps of: displaying a reduction information.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。さらに、楽曲データをクラスタ化するので、同じ楽曲の組み合わせが複数存在しない場合の不都合を解消することが可能となる。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others. Furthermore, since the music data is clustered, it is possible to eliminate the inconvenience when a plurality of combinations of the same music do not exist.

(8)また、本発明のプレイリスト作成プログラムは、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成プログラムであって、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する処理と、前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成する処理と、前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する処理と、前記リスト化された情報を表示する処理と、を含む一連の処理を、コンピュータに対し読み取り可能および実行可能にコマンド化したことを特徴としている。   (8) Further, the playlist creation program of the present invention is a playlist creation program for creating a playlist in which the reproduction order of the music data is determined. The playlist creation program reads music data from a database, Based on the process of extracting the type of feature quantity, and based on the extracted feature quantity, the transition probability at the time of transition from any one piece of music data to another piece of music data whose playback order is adjacent is calculated, A process for creating a transition model, a process for selecting and listing a plurality of music data from the database based on the created music transition model and user input information, and displaying the listed information And a series of processes including the processes are converted into commands that can be read and executed by the computer. To have.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others.

(9)また、本発明のプレイリスト作成プログラムは、楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成プログラムであって、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する処理と、前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成する処理と、前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する処理と、前記リスト化された情報を表示する処理と、を含む一連の処理を、コンピュータに対し読み取り可能および実行可能にコマンド化したことを特徴としている。   (9) Further, the playlist creation program of the present invention is a playlist creation program for creating a playlist in which the reproduction order of music data is determined, and reads music data from a database. Processing for extracting types of feature quantities, and creating a plurality of clusters composed of at least one piece of music data based on the extracted feature quantities, and transitioning from any one cluster to another cluster A process for calculating a transition probability and creating a cluster transition model; a process for selecting and listing a plurality of music data from the database based on the created cluster transition model and user input information; and the list A series of processes, including the process of displaying computerized information, can be read by a computer And it is characterized in executable manner that the command of.

このように、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。さらに、楽曲データをクラスタ化するので、同じ楽曲の組み合わせが複数存在しない場合の不都合を解消することが可能となる。   In this way, based on the feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data adjacent in the playback order is calculated, a music transition model is created, and the music transition model is created. And multiple pieces of music data are selected from the database based on the information input by the user and created as a list, so even if the meta information data is not maintained, a playlist with storylines should be created. Can do. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others. Furthermore, since the music data is clustered, it is possible to eliminate the inconvenience when a plurality of combinations of the same music do not exist.

本発明によれば、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。   According to the present invention, a playlist having story characteristics can be created even in a situation where meta information data is not maintained. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. .

本実施形態に係るプレイリスト作成装置の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the playlist production apparatus which concerns on this embodiment. ユーザにより選択された基点となる楽曲データに基づいてプレイリストを生成する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which produces | generates a play list based on the music data used as the base point selected by the user. 未知楽曲データを入力した場合に楽曲遷移確率を用いたプレイリスト作成動作を示すフローチャートである。It is a flowchart which shows play list creation operation | movement using a music transition probability, when unknown music data are input. クラスタ遷移モデルを利用したプレイリスト作成動作を示すフローチャートである。It is a flowchart which shows the play list creation operation | movement using a cluster transition model. ユーザ入力部における表示および入力イメージを示す図である。It is a figure which shows the display and input image in a user input part.

以下、本発明の実施形態について図面を参照して説明する。図1は、本実施形態に係るプレイリスト作成装置の概略構成を示すブロック図である。このプレイリスト作成装置10は、データベース11、特徴量抽出部12、モデル構築部13、楽曲選択部14、出力部15、およびユーザ入力部16から構成されている。データベース11は、楽曲データと、音響的特徴量を抽出する特徴量抽出部12によって得られた特徴量を格納する。   Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram illustrating a schematic configuration of a playlist creation apparatus according to the present embodiment. The playlist creation apparatus 10 includes a database 11, a feature amount extraction unit 12, a model construction unit 13, a music selection unit 14, an output unit 15, and a user input unit 16. The database 11 stores music data and feature amounts obtained by a feature amount extraction unit 12 that extracts acoustic feature amounts.

特徴量抽出部12は、データベース11に格納されている楽曲データから、その楽曲の特徴量を抽出する。特徴量としては、例えば、テンポ、リズム、音色、音圧、音量、音色、調性などの音響に基づくパラメータを特徴量として利用することができる。具体的な手法は、非特許文献3および4に記載されているツールを利用することができる。また、必ずしも前述した特徴量に限らず、それらを推定するために必要なパラメータを利用することができる。例えば、周波数解析で用いられたスペクトル情報や、帯域ごとのパワー値などがあげられる。なお、音響的な特徴のみに限らず、その他歌詞情報などからTFIDF等を用いることによって、楽曲に固有の特徴量を抽出して利用することもできる。また、特徴量抽出部12は、必ずしも楽曲全体の特徴量を抽出必要はない。例えば、楽曲のサビ、Aメロなどの構造単位で抽出することや、先頭、末尾区間等の特徴量を抽出することができる。また、単純に楽曲名、楽曲識別番号などを利用することも可能である。   The feature amount extraction unit 12 extracts the feature amount of the music from the music data stored in the database 11. As the feature amount, for example, parameters based on sound such as tempo, rhythm, tone color, sound pressure, volume, tone color, and tonality can be used as the feature amount. As a specific method, the tools described in Non-Patent Documents 3 and 4 can be used. In addition, the feature quantities are not necessarily limited to those described above, and parameters necessary for estimating them can be used. For example, spectrum information used in frequency analysis, power value for each band, and the like can be given. It should be noted that not only the acoustic features but also other features such as TFIDF can be extracted from the lyrics information and the like, and the characteristic amount unique to the music can be extracted and used. Further, the feature amount extraction unit 12 does not necessarily need to extract the feature amount of the entire music. For example, it is possible to extract in units of structure such as rust and A melody of music, and to extract feature quantities such as the beginning and end sections. It is also possible to simply use a song name, a song identification number, or the like.

モデル構築部13は、学習データ、例えば、アルバムにおける楽曲の順序や既存プレイリストなどにおいて、楽曲に対し、特徴量抽出部12によって得られた特徴量に基づいて、楽曲遷移モデルを構築する。例えば、学習データとして市販のアルバム内の楽曲の並び順から、楽曲間の遷移確率を算出することにより、公知のN−gramモデルを生成することなどが挙げられる。N−gramとは、以下の式により、P(w1w2…wn)の推定を行なうモデルである。   The model construction unit 13 constructs a music transition model based on the feature quantity obtained by the feature quantity extraction unit 12 for the music in the learning data, for example, the order of the music in the album or the existing playlist. For example, a known N-gram model may be generated by calculating a transition probability between songs from the arrangement order of songs in a commercially available album as learning data. N-gram is a model that estimates P (w1w2... Wn) by the following equation.

Figure 0005085577

本発明では、例えば、ある学習データ内で連続したn曲目〜(n+2)曲目の特徴ベクトルをそれぞれ、s_n、s_(n+1)、s_(n+2)とすると、2−gram、3−gramモデルは、次式にて表現することができる。
Figure 0005085577

In the present invention, for example, when the feature vectors of the n-th to (n + 2) -th continuous music in certain learning data are respectively s_n, s_ (n + 1), and s_ (n + 2), the 2-gram and 3-gram models are It can be expressed by the following formula.

Figure 0005085577

ここで、P(s_n)とは、学習データ内にs_nが出現する確率を表し、
P(s_(n+1),s_n)は、特徴量s_n、と、s_(n+1)が連続して出現する確率を表している。
Figure 0005085577

Here, P (s_n) represents the probability that s_n appears in the learning data,
P (s_ (n + 1), s_n) represents the probability that the feature quantity s_n and s_ (n + 1) appear successively.

本モデルにおいて、N=2,3,…等を用いることができる。   In this model, N = 2, 3,... Can be used.

なお、上述のモデルでは、必ずしも同じ楽曲の組み合わせが複数存在するとは限らない。すなわち、特許文献5と同じ問題が存在する。しかし、楽曲単位でモデルを構築する必要はなく、事前に学習データ群に対し、クラスタリングを適用することで、楽曲間の遷移モデルの代わりに楽曲クラスタ間の遷移モデル等を利用することで改善できる。   In the above-described model, there are not always a plurality of combinations of the same music pieces. That is, the same problem as in Patent Document 5 exists. However, it is not necessary to build a model for each song, and by applying clustering to the learning data group in advance, it can be improved by using a transition model between song clusters instead of a transition model between songs .

例えば、以下のように表現することができる。   For example, it can be expressed as follows.

Figure 0005085577

ここで、N(Cn)ha学習データ内に該当クラスタに所属する楽曲が現れる頻度として表される。クラスタリングはK−means法などを適用することができる。
Figure 0005085577

Here, it is expressed as the frequency at which the music belonging to the corresponding cluster appears in the N (Cn) ha learning data. For clustering, a K-means method or the like can be applied.

このようなモデルにより、学習データに沿ったストーリ性を含有するプレイリストを生成することが可能となる。また、ユーザは起点となる楽曲を選択するだけでプレイリストを生成することができるため、メタ情報等が整備されていない場合に適応することができ、他者の情報を必要とすることもない。   With such a model, it is possible to generate a playlist that includes a story along the learning data. In addition, since the user can generate a playlist simply by selecting the starting music, it can be applied when meta information or the like is not prepared, and does not require information from others. .

また、次に来る楽曲特徴量を推定するだけでなく、ある特定の特徴量が与えられたときに、前の楽曲となる特徴量を推定することも可能であるため、ユーザは自由な再生順序位置に特定の楽曲を登録させたプレイリストを生成することができる。その際には、前述の式のすべてにおいてn+1 n+2をn−1 n−2に置き換えることで対応することが可能である。以下、n+1 n+2を用いたモデルを順連鎖モデル、n−1 n−2を用いたモデルを逆連鎖モデルと呼ぶ。   In addition to estimating the next song feature, it is also possible to estimate the feature that will be the previous song when a certain feature is given. A playlist in which specific music is registered at a position can be generated. In that case, it is possible to cope with the problem by replacing n + 1 n + 2 with n-1 n-2 in all of the above-described equations. Hereinafter, a model using n + 1 n + 2 is referred to as a forward chain model, and a model using n−1 n−2 is referred to as a reverse chain model.

ユーザ入力部16は、プレイリストを作成するために必要な楽曲およびパラメータを表示、入力することができる。例えば、再生順序の位置やプレイリスト内の楽曲総数などを指定することができる。また、自動生成されたプレイリストを修正することなども可能である。図5は、ユーザ入力部16における表示および入力イメージを示している。   The user input unit 16 can display and input music and parameters necessary for creating a playlist. For example, the position of the reproduction order, the total number of songs in the playlist, and the like can be designated. It is also possible to modify the automatically generated playlist. FIG. 5 shows a display and input image in the user input unit 16.

楽曲選択部14は、モデル構築部13によって構築された楽曲遷移モデルおよび、ユーザ入力部16によって入力された情報に基づいて、データベース11から楽曲データを抽出する。例えば、楽曲遷移モデルから得られた最大遷移確率を持つ楽曲データや、クラスタ遷移モデルから得られた遷移先クラスタから楽曲データを選択することができる。   The music selection unit 14 extracts music data from the database 11 based on the music transition model constructed by the model construction unit 13 and the information input by the user input unit 16. For example, music data having the maximum transition probability obtained from the music transition model or music data can be selected from the transition destination cluster obtained from the cluster transition model.

また、クラスタ遷移モデルを利用している場合には、楽曲関係度を用いることで、遷移先のクラスタ内から楽曲を選択することができる。楽曲関係度とは、例えば、遷移先のクラスタ内に置いて、楽曲特徴量の類似度が高い楽曲を選択することや、メタ情報の類似性を計算することで計算することができる。   When a cluster transition model is used, music can be selected from the transition destination cluster by using the degree of music relation. The music relationship degree can be calculated, for example, by selecting a music piece having a high music feature amount similarity or calculating meta information similarity in a transition destination cluster.

楽曲特徴量は、楽曲全体だけではなく、楽曲先頭・末尾区間や、楽曲の構造(Aメロ、サビ)等ごとに抽出することができる。また、楽曲特徴量としては、音色、テンポ、リズム、テキスト等の特徴量を利用することなどができ、類似度計算等は、前記特徴量群を統合したものを比較することや、各項目の類似度計算をすることができる。出力部15は、プレイリストを出力する。また、楽曲データを再生することもできる。   The music feature amount can be extracted not only for the whole music but also for each music head / end section, music structure (A melody, chorus), and the like. Further, as the music feature amount, a feature amount such as timbre, tempo, rhythm, text, etc. can be used, and similarity calculation etc. can be performed by comparing the integrated feature amount groups, Similarity calculation can be performed. The output unit 15 outputs a playlist. It is also possible to play music data.

図2は、ユーザにより選択された基点となる楽曲データに基づいてプレイリストを生成する動作を示すフローチャートである。まず、ユーザにより、プレイリストを作成するために必要な楽曲データおよびパラメータが入力されると(ステップS1)、プレイリストにおける順位が、先頭であるか、中間であるか、または末尾であるかが判定される(ステップS2)。先頭であった場合は、順連鎖モデルによる楽曲の選択が行われる(ステップS3)。そして、順連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS4)、終了していない場合は、ステップS3へ遷移する。一方、ステップS4において、順連鎖モデルによる楽曲選択が終了した場合は、ステップS5へ遷移し、プレイリストが出力される(ステップS5)。   FIG. 2 is a flowchart illustrating an operation of generating a playlist based on music data serving as a base point selected by the user. First, when music data and parameters necessary for creating a playlist are input by the user (step S1), whether the ranking in the playlist is the top, the middle, or the end. It is determined (step S2). If it is the head, the music is selected by the forward chain model (step S3). And it is judged whether the music selection by a forward chain model was complete | finished (step S4), and when not complete | finished, it transfers to step S3. On the other hand, when the music selection by the forward chain model is completed in step S4, the process proceeds to step S5, and a playlist is output (step S5).

また、ステップS2において、プレイリストにおける順位が、末尾であった場合は、逆連鎖モデルによる楽曲の選択が行われる(ステップS6)。そして、逆連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS7)、終了していない場合は、ステップS6へ遷移する。一方、ステップS7において、逆連鎖モデルによる楽曲選択が終了した場合は、ステップS5へ遷移し、プレイリストが出力される(ステップS5)。   In step S2, if the rank in the playlist is at the end, the music is selected by the reverse chain model (step S6). And it is judged whether the music selection by a reverse chain model was complete | finished (step S7), and when not complete | finished, it transfers to step S6. On the other hand, when the music selection by the reverse chain model is completed in step S7, the process proceeds to step S5, and the playlist is output (step S5).

また、ステップS2において、プレイリストにおける順位が、中間であった場合は、順連鎖モデルによる楽曲選択が行われる(ステップS8)。そして、順連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS9)、終了していない場合は、ステップS8へ遷移する。一方、ステップS9において、順連鎖モデルによる楽曲選択が終了した場合は、逆連鎖モデルによる楽曲の選択が行われる(ステップS10)。そして、逆連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS11)、終了していない場合は、ステップS10へ遷移する。一方、ステップS11において、逆連鎖モデルによる楽曲選択が終了した場合は、ステップS5へ遷移し、プレイリストが出力される(ステップS5)。   In step S2, if the rank in the play list is intermediate, music selection by the forward chain model is performed (step S8). And it is judged whether the music selection by a forward chain model was complete | finished (step S9), and when not complete | finished, it transfers to step S8. On the other hand, when the music selection by the forward chain model is completed in step S9, the music selection by the reverse chain model is performed (step S10). And it is judged whether the music selection by a reverse chain model was complete | finished (step S11), and when not complete | finished, it transfers to step S10. On the other hand, when the music selection by the reverse chain model is completed in step S11, the process proceeds to step S5, and a playlist is output (step S5).

なお、ステップS2において、プレイリストにおける順位が中間であった場合、順連鎖モデルおよび、逆連鎖モデルの順番は入れ替えることができる。例えば、順連鎖に関しては、基点となる位置から最終楽曲数までループさせ、逆連鎖に関しては開始点の楽曲までループさせることができる。   In step S2, when the rank in the playlist is intermediate, the order of the forward chain model and the reverse chain model can be switched. For example, with regard to the forward chain, it is possible to loop from the position serving as the base point to the final music number, and with respect to the reverse chain, it is possible to loop to the starting point music.

なお、図2のフローチャートは、ユーザが指定した楽曲があらかじめデータベース11に存在している場合を表しているが、例えば、データベース11に存在しない楽曲を入力することもできる。その場合には、ステップS2の前に特徴量抽出ステップを追加すればよい。   The flowchart of FIG. 2 shows a case where the music specified by the user exists in the database 11 in advance, but for example, a music that does not exist in the database 11 can be input. In that case, a feature amount extraction step may be added before step S2.

図3は、未知楽曲データを入力した場合に楽曲遷移確率を用いたプレイリスト作成動作を示すフローチャートである。まず、ユーザにより、プレイリストを作成するために必要な楽曲データ(未知の楽曲データ)およびパラメータが入力されると(ステップS20)、その楽曲データの特徴量を抽出する(ステップS21)。特徴量の抽出手法は、上記の手法を用いることができる。次に、プレイリストにおける順位が、先頭であるか、中間であるか、または末尾であるかが判定される(ステップS22)。   FIG. 3 is a flowchart showing the playlist creation operation using the music transition probability when unknown music data is input. First, when music data (unknown music data) and parameters necessary for creating a playlist are input by the user (step S20), the feature amount of the music data is extracted (step S21). The above-described method can be used as a feature amount extraction method. Next, it is determined whether the rank in the play list is the top, the middle, or the end (step S22).

ステップS22において、先頭であった場合は、順連鎖モデルによる楽曲の選択が行われる(ステップS23)。そして、順連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS24)、終了していない場合は、ステップS23へ遷移する。一方、ステップS24において、順連鎖モデルによる楽曲選択が終了した場合は、ステップS25へ遷移し、プレイリストが出力される(ステップS25)。   In step S22, if it is the head, the music is selected by the forward chain model (step S23). And it is judged whether the music selection by a forward chain model was complete | finished (step S24), and when not complete | finished, it transfers to step S23. On the other hand, when the music selection by the forward chain model is completed in step S24, the process proceeds to step S25, and the playlist is output (step S25).

また、ステップS22において、プレイリストにおける順位が、末尾であった場合は、逆連鎖モデルによる楽曲の選択が行われる(ステップS26)。そして、逆連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS27)、終了していない場合は、ステップS26へ遷移する。一方、ステップS27において、逆連鎖モデルによる楽曲選択が終了した場合は、ステップS25へ遷移し、プレイリストが出力される(ステップS25)。   In step S22, if the rank in the play list is the end, the music piece is selected by the reverse chain model (step S26). And it is judged whether the music selection by a reverse chain model was complete | finished (step S27), and when not complete | finished, it transfers to step S26. On the other hand, when the music selection by the reverse chain model is completed in step S27, the process proceeds to step S25, and a play list is output (step S25).

また、ステップS22において、プレイリストにおける順位が、中間であった場合は、順連鎖モデルによる楽曲選択が行われる(ステップS28)。そして、順連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS29)、終了していない場合は、ステップS28へ遷移する。一方、ステップS29において、順連鎖モデルによる楽曲選択が終了した場合は、逆連鎖モデルによる楽曲の選択が行われる(ステップS30)。そして、逆連鎖モデルによる楽曲選択が終了したかどうかを判断し(ステップS31)、終了していない場合は、ステップS30へ遷移する。一方、ステップS31において、逆連鎖モデルによる楽曲選択が終了した場合は、ステップS25へ遷移し、プレイリストが出力される(ステップS25)。   In step S22, if the rank in the play list is intermediate, music selection is performed using the forward chain model (step S28). And it is judged whether the music selection by a forward chain model was complete | finished (step S29), and when not complete | finished, it transfers to step S28. On the other hand, when the music selection by the forward chain model is completed in step S29, the music selection by the reverse chain model is performed (step S30). And it is judged whether the music selection by a reverse chain model was complete | finished (step S31), and when not complete | finished, it transfers to step S30. On the other hand, when the music selection by the reverse chain model is completed in step S31, the process proceeds to step S25, and a play list is output (step S25).

なお、ステップS22において、プレイリストにおける順位が中間であった場合、順連鎖モデルおよび、逆連鎖モデルの順番は入れ替えることができる。例えば、順連鎖に関しては、基点となる位置から最終楽曲数までループさせ、逆連鎖に関しては開始点の楽曲までループさせることができる。   In step S22, when the rank in the playlist is intermediate, the order of the forward chain model and the reverse chain model can be switched. For example, with regard to the forward chain, it is possible to loop from the position serving as the base point to the final music number, and with respect to the reverse chain, it is possible to loop to the starting point music.

図4は、クラスタ遷移モデルを利用したプレイリスト作成動作を示すフローチャートである。まず、ユーザにより、プレイリストを作成するために必要な楽曲データおよびパラメータが入力されると(ステップS40)、その楽曲データの特徴量を抽出する(ステップS41)。特徴量の抽出手法は、上記の手法を用いることができる。次に、プレイリストにおける順位が、先頭であるか、中間であるか、または末尾であるかが判定される(ステップS42)。   FIG. 4 is a flowchart showing the playlist creation operation using the cluster transition model. First, when music data and parameters necessary for creating a playlist are input by the user (step S40), the feature amount of the music data is extracted (step S41). The above-described method can be used as a feature amount extraction method. Next, it is determined whether the rank in the play list is the top, the middle, or the end (step S42).

ステップS42において、先頭であった場合は、順連鎖モデルによるクラスタの選択を行なう(ステップS43)。次に、関係度(楽曲関係度)に基づく楽曲の選択を行なう(ステップS44)。そして、関係度に基づく楽曲選択が終了したかどうかを判断し(ステップS45)、終了していない場合は、ステップS43へ遷移する。一方、ステップS45において、関係度に基づく楽曲選択が終了した場合は、ステップS46へ遷移し、プレイリストが出力される(ステップ46)。   In step S42, if it is the head, a cluster is selected by the forward chain model (step S43). Next, a music piece is selected based on the degree of relation (music degree of relation) (step S44). Then, it is determined whether or not the music selection based on the degree of relation has been completed (step S45). If it has not been completed, the process proceeds to step S43. On the other hand, when the music selection based on the degree of relationship is completed in step S45, the process proceeds to step S46, and a play list is output (step 46).

また、ステップS42において、プレイリストにおける順位が、末尾であった場合は、逆連鎖モデルによるクラスタの選択を行なう(ステップS47)。次に、関係度(楽曲関係度)に基づく楽曲の選択を行なう(ステップS48)。そして、関係度に基づく楽曲選択が終了したかどうかを判断し(ステップS49)、終了していない場合は、ステップS47へ遷移する。一方、ステップS49において、関係度に基づく楽曲選択が終了した場合は、ステップS46へ遷移し、プレイリストが出力される(ステップS46)。   In step S42, if the rank in the playlist is at the end, a cluster is selected by the reverse chain model (step S47). Next, the music is selected based on the degree of relation (music degree of relation) (step S48). Then, it is determined whether or not the music selection based on the degree of relationship has been completed (step S49). If it has not been completed, the process proceeds to step S47. On the other hand, when the music selection based on the degree of relationship is completed in step S49, the process proceeds to step S46, and a play list is output (step S46).

また、ステップS42において、プレイリストにおける順位が、中間であった場合は、順連鎖モデルによるクラスタの選択を行なう(ステップS50)。次に、関係度(楽曲関係度)に基づく楽曲の選択を行なう(ステップS51)。そして、関係度に基づく楽曲選択が終了したかどうかを判断し(ステップS52)、終了していない場合は、ステップS50へ遷移する。一方、ステップS52において、関係度に基づく楽曲選択が終了した場合は、逆連鎖モデルによるクラスタの選択を行なう(ステップS53)。次に、関係度に基づく楽曲選択を行なう(ステップS54)。そして、関係度に基づく楽曲選択が終了したかどうかを判断し(ステップS55)、終了していない場合は、ステップS53へ遷移する。一方、ステップS55において、関係度に基づく楽曲選択が終了した場合は、ステップS46へ遷移し、プレイリストが出力される(ステップS46)。   In step S42, if the rank in the playlist is intermediate, a cluster is selected by the forward chain model (step S50). Next, a music piece is selected based on the degree of relation (music degree of relation) (step S51). Then, it is determined whether or not the music selection based on the degree of relation has been completed (step S52), and if not completed, the process proceeds to step S50. On the other hand, when the music selection based on the degree of relation is completed in step S52, the cluster is selected by the reverse chain model (step S53). Next, music selection based on the degree of relationship is performed (step S54). Then, it is determined whether or not the music selection based on the degree of relation has been completed (step S55). If it has not been completed, the process proceeds to step S53. On the other hand, when the music selection based on the degree of relationship is completed in step S55, the process proceeds to step S46, and a playlist is output (step S46).

なお、ステップS42において、プレイリストにおける順位が中間であった場合、順連鎖モデルおよび、逆連鎖モデルの順番は入れ替えることができる。例えば、順連鎖に関しては、基点となる位置から最終楽曲数までループさせ、逆連鎖に関しては開始点の楽曲までループさせることができる。   In step S42, when the rank in the playlist is intermediate, the order of the forward chain model and the reverse chain model can be switched. For example, with regard to the forward chain, it is possible to loop from the position serving as the base point to the final music number, and with respect to the reverse chain, it is possible to loop to the starting point music.

以上説明したように、本実施形態によれば、特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成し、その楽曲遷移モデルと、ユーザによる入力情報とに基づいて、データベースから複数の楽曲データを選択してリスト化するので、メタ情報データが整備されていない状況においても、ストーリ性を持たせたプレイリストを作成することができる。また、楽曲固有の特徴量を統計的にモデル化するので、複数組の楽曲や、特定の楽曲を含む多くのサンプルを用いる必要がなく、利便性の高いプレイリストを提供することが可能となる。例えば、他人のプレイリストを収集するよりも、手元にあるアルバムの順序から統計モデルを構築することができるなどの利点がある。さらに、楽曲データをクラスタ化するので、同じ楽曲の組み合わせが複数存在しない場合の不都合を解消することが可能となる。   As described above, according to the present embodiment, based on the feature amount, the transition probability at the time of transition from any one piece of music data to another piece of music data whose playback order is adjacent is calculated, and the music transition A model is created, and multiple song data are selected from the database and listed based on the song transition model and user input information, so even in situations where meta information data is not maintained, You can create your own playlist. In addition, since the characteristic quantities unique to the music are statistically modeled, it is not necessary to use a plurality of sets of music or many samples including specific music, and it is possible to provide a highly convenient playlist. . For example, there is an advantage that a statistical model can be constructed from the order of albums at hand rather than collecting playlists of others. Furthermore, since the music data is clustered, it is possible to eliminate the inconvenience when a plurality of combinations of the same music do not exist.

10 プレイリスト作成装置
11 データベース
12 特徴量抽出部
13 モデル構築部
14 楽曲選択部
15 出力部
16 ユーザ入力部
DESCRIPTION OF SYMBOLS 10 Playlist production apparatus 11 Database 12 Feature-value extraction part 13 Model construction part 14 Music selection part 15 Output part 16 User input part

Claims (9)

楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成装置であって、
データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する特徴量抽出部と、
前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成するモデル構築部と、
前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する楽曲選択部と、
前記リスト化された情報を表示する出力部と、を備えることを特徴とするプレイリスト作成装置。
A playlist creation device for creating a playlist that defines the playback order of music data,
A feature value extraction unit that reads out music data from a database and extracts a plurality of types of feature values from the read music data;
Based on the extracted feature amount, a model construction unit that calculates a transition probability when transitioning from any one piece of music data to another piece of music data in which the reproduction order is adjacent, and creates a music transition model;
A music selection unit that selects and lists a plurality of music data from the database based on the created music transition model and input information by the user;
And an output unit for displaying the listed information.
楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成装置であって、
データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する特徴量抽出部と、
前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成するモデル構築部と、
前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する楽曲選択部と、
前記リスト化された情報を表示する出力部と、を備えることを特徴とするプレイリスト作成装置。
A playlist creation device for creating a playlist that defines the playback order of music data,
A feature value extraction unit that reads out music data from a database and extracts a plurality of types of feature values from the read music data;
Based on the extracted feature amount, create a plurality of clusters composed of at least one piece of music data, calculate a transition probability when transitioning from any one cluster to another cluster, A model building part to be created;
Based on the created cluster transition model and input information by the user, a music selection unit that selects and lists a plurality of music data from the database;
And an output unit for displaying the listed information.
前記楽曲選択部は、楽曲間の関係度を示す楽曲関係度に基づいて、各クラスタから楽曲データを選択することを特徴とする請求項2記載のプレイリスト作成装置。   3. The playlist creation apparatus according to claim 2, wherein the music selection unit selects music data from each cluster based on a music relation degree indicating a relation degree between music pieces. 前記楽曲選択部は、ユーザにより指定された楽曲およびその楽曲のプレイリスト内での順位に基づいて、前記データベースから複数の楽曲データを選択してリスト化することを特徴とする請求項1から請求項3のいずれかに記載のプレイリスト作成装置。   The music selection section selects and lists a plurality of music data from the database based on a music specified by a user and a rank of the music in a playlist. Item 4. The playlist creation device according to any one of items 3 to 4. 請求項1から請求項4のいずれかに記載のプレイリスト作成装置を備え、前記作成されたリストに基づいて、楽曲データの再生を行なうことを特徴とする楽曲再生装置。   5. A music reproducing apparatus comprising the playlist creating apparatus according to claim 1, wherein music data is reproduced based on the created list. 楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成方法であって、
特徴量抽出部において、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出するステップと、
モデル構築部において、前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成するステップと、
楽曲選択部において、前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化するステップと、
出力部において、前記リスト化された情報を表示するステップと、を少なくとも含むことを特徴とするプレイリスト作成方法。
A playlist creation method for creating a playlist that defines a playback order of music data,
In the feature quantity extraction unit, reading out music data from a database, and extracting a plurality of types of feature quantities from the read music data;
In the model construction unit, based on the extracted feature amount, the transition probability when transitioning from any one piece of music data to another piece of music data in which the playback order is adjacent is calculated, and a music transition model is created Steps,
In the music selection unit, based on the created music transition model and user input information, selecting and listing a plurality of music data from the database;
The output section includes at least a step of displaying the listed information.
楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成方法であって、
特徴量抽出部において、データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出するステップと、
モデル構築部において、前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成するステップと、
楽曲選択部において、前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化するステップと、
出力部において、前記リスト化された情報を表示するステップと、を備えることを特徴とするプレイリスト作成方法。
A playlist creation method for creating a playlist that defines a playback order of music data,
In the feature quantity extraction unit, reading out music data from a database, and extracting a plurality of types of feature quantities from the read music data;
The model construction unit creates a plurality of clusters composed of at least one piece of music data based on the extracted feature amount, and calculates a transition probability when transitioning from any one cluster to another cluster. Creating a cluster transition model;
In the music selection unit, based on the created cluster transition model and user input information, selecting and listing a plurality of music data from the database;
And a step of displaying the listed information in an output unit.
楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成プログラムであって、
データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する処理と、
前記抽出された特徴量に基づいて、いずれか一つの楽曲データから再生順序が隣接する他の一つの楽曲データへ遷移するときの遷移確率を算出し、楽曲遷移モデルを作成する処理と、
前記作成された楽曲遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する処理と、
前記リスト化された情報を表示する処理と、を含む一連の処理を、コンピュータに対し読み取り可能および実行可能にコマンド化したことを特徴とするプレイリスト作成プログラム。
A playlist creation program for creating a playlist that defines the playback order of music data,
A process of reading music data from the database and extracting a plurality of types of feature values from the read music data;
Based on the extracted feature amount, a process of calculating a transition probability when transitioning from any one piece of music data to another piece of music data in which the playback order is adjacent, and creating a music transition model;
Based on the created music transition model and user input information, a process of selecting and listing a plurality of music data from the database;
A playlist creation program characterized in that a series of processes including the process of displaying the listed information is converted into a command that can be read and executed by a computer.
楽曲データの再生順序を定めたプレイリストを作成するプレイリスト作成プログラムであって、
データベースから楽曲データを読み出し、前記読み出した楽曲データから、複数種類の特徴量を抽出する処理と、
前記抽出された特徴量に基づいて、少なくとも一つの楽曲データからなる複数のクラスタを作成し、いずれか一つのクラスタから他の一つのクラスタへ遷移するときの遷移確率を算出し、クラスタ遷移モデルを作成する処理と、
前記作成されたクラスタ遷移モデルおよびユーザによる入力情報に基づいて、前記データベースから複数の楽曲データを選択してリスト化する処理と、
前記リスト化された情報を表示する処理と、を含む一連の処理を、コンピュータに対し読み取り可能および実行可能にコマンド化したことを特徴とするプレイリスト作成プログラム。
A playlist creation program for creating a playlist that defines the playback order of music data,
A process of reading music data from the database and extracting a plurality of types of feature values from the read music data;
Based on the extracted feature amount, create a plurality of clusters composed of at least one piece of music data, calculate a transition probability when transitioning from any one cluster to another cluster, Process to create,
Based on the created cluster transition model and user input information, a process of selecting and listing a plurality of music data from the database;
A playlist creation program characterized in that a series of processes including the process of displaying the listed information is converted into a command that can be read and executed by a computer.
JP2009007765A 2009-01-16 2009-01-16 Playlist creation device, music playback device, playlist creation method, and playlist creation program Active JP5085577B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009007765A JP5085577B2 (en) 2009-01-16 2009-01-16 Playlist creation device, music playback device, playlist creation method, and playlist creation program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009007765A JP5085577B2 (en) 2009-01-16 2009-01-16 Playlist creation device, music playback device, playlist creation method, and playlist creation program

Publications (2)

Publication Number Publication Date
JP2010164825A JP2010164825A (en) 2010-07-29
JP5085577B2 true JP5085577B2 (en) 2012-11-28

Family

ID=42581029

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009007765A Active JP5085577B2 (en) 2009-01-16 2009-01-16 Playlist creation device, music playback device, playlist creation method, and playlist creation program

Country Status (1)

Country Link
JP (1) JP5085577B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6880992B2 (en) * 2017-04-27 2021-06-02 富士通株式会社 Evaluation method, evaluation device and evaluation program
US11972746B2 (en) * 2018-09-14 2024-04-30 Bellevue Investments Gmbh & Co. Kgaa Method and system for hybrid AI-based song construction
WO2022215250A1 (en) * 2021-04-09 2022-10-13 AlphaTheta株式会社 Music selection device, model creation device, program, music selection method, and model creation method

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003178088A (en) * 2001-12-07 2003-06-27 Sharp Corp Device and method for play list preparation, information regenerative apparatus and program recording medium
JP2004117632A (en) * 2002-09-25 2004-04-15 Matsushita Electric Ind Co Ltd Play list generator, music player, music delivery system, method therefor, program, and recording medium
JP4597714B2 (en) * 2005-03-01 2010-12-15 Kddi株式会社 Information retrieval apparatus and method, and computer program
JP4775626B2 (en) * 2005-04-15 2011-09-21 ソニー株式会社 Information processing apparatus and method, and program
JP4882918B2 (en) * 2007-08-21 2012-02-22 ソニー株式会社 Information processing apparatus, information processing method, and computer program
JP4331230B2 (en) * 2007-09-12 2009-09-16 株式会社第一興商 Online karaoke system, host device

Also Published As

Publication number Publication date
JP2010164825A (en) 2010-07-29

Similar Documents

Publication Publication Date Title
Burgoyne et al. Music information retrieval
Rubin et al. Content-based tools for editing audio stories
Goto et al. Songle: A Web Service for Active Music Listening Improved by User Contributions.
Lidy et al. On the suitability of state-of-the-art music information retrieval methods for analyzing, categorizing and accessing non-western and ethnic music collections
US7788279B2 (en) System and method for storing and retrieving non-text-based information
Casey et al. Content-based music information retrieval: Current directions and future challenges
JP4344499B2 (en) Search music database
US6528715B1 (en) Music search by interactive graphical specification with audio feedback
JP4274221B2 (en) Information processing apparatus and method, program, and recording medium
JP2003519845A (en) Music search engine
CN102053998A (en) Method and system device for retrieving songs based on voice modes
JP2009508156A (en) Music analysis
JP2006106818A (en) Music retrieval device, music retrieval method and music retrieval program
JP2011165131A (en) Information processor, method, and program
JP2010066366A (en) Music information processing device, music distribution system and music information processing method
Atli et al. Audio feature extraction for exploring Turkish makam music
JP5085577B2 (en) Playlist creation device, music playback device, playlist creation method, and playlist creation program
Bayle et al. Kara1k: A karaoke dataset for cover song identification and singing voice analysis
Weiß et al. Wagner Ring Dataset: A complex opera scenario for music processing and computational musicology
CN101488128B (en) Music search method and system based on rhythm mark
Leman Musical audio-mining
Müller New developments in music information retrieval
Risk et al. Melodic Similarity in Traditional French-Canadian Instrumental Dance Tunes.
Arentz et al. Retrieving musical information based on rhythm and pitch correlations
EP3996084B1 (en) Determining relations between music items

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110826

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120706

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120807

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120905

R150 Certificate of patent or registration of utility model

Ref document number: 5085577

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150914

Year of fee payment: 3