JP2015079110A - 音響解析装置 - Google Patents
音響解析装置 Download PDFInfo
- Publication number
- JP2015079110A JP2015079110A JP2013216008A JP2013216008A JP2015079110A JP 2015079110 A JP2015079110 A JP 2015079110A JP 2013216008 A JP2013216008 A JP 2013216008A JP 2013216008 A JP2013216008 A JP 2013216008A JP 2015079110 A JP2015079110 A JP 2015079110A
- Authority
- JP
- Japan
- Prior art keywords
- matrix
- analysis
- coefficient
- genre
- basis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Auxiliary Devices For Music (AREA)
Abstract
Description
図1は、本発明の第1実施形態に係る音響解析装置100の構成図である。図1に例示される通り、音響解析装置100には信号供給装置12と表示装置14とが接続される。信号供給装置12は、音響信号AXを音響解析装置100に供給する。音響信号AXは、音響解析装置100による解析の対象となる音響(以下「解析対象音」という)の波形を表す信号である。第1実施形態では、楽曲を構成する複数の演奏パートの演奏音(歌唱者の音声や楽器の楽音)の混合音を解析対象音として想定する。可搬型または内蔵型の記録媒体から音響信号AXを取得して音響解析装置100に供給する再生装置や、配信サーバ装置から配信(例えばストリーミング配信)された楽曲の音響信号AXを通信網から受信して音響解析装置100に供給する通信装置が、信号供給装置12として好適に採用される。なお、信号供給装置12を音響解析装置100と一体に構成することも可能である。
数式(1)および図5から理解される通り、第1実施形態の行列解析部34は、参照基底行列B[g]と解析係数行列Y[g]との行列積B[g]Y[g]をジャンル毎の区分加重値wA[g]のもとで加重加算した結果(数式(1)の右辺)が音響信号AXの解析特性行列Xに近似するように、区分加重値wA[g](wA[1]〜wA[G])と解析係数行列Y[g](Y[1]〜Y[G])とをジャンル毎に算定する。具体的には、行列解析部34は、区分加重値wA[1]〜wA[G]を適用したG個の行列積B[1]Y[1]〜B[G]Y[G]の加重和が解析特性行列Xに近付くように各区分加重値wA[g]と各解析係数行列Y[g]とを反復的に更新する学習処理で、各ジャンルの区分加重値wA[g]と解析係数行列Y[g]とを一括的に算定する。区分加重値wA[g]および解析係数行列Y[g]の更新式は、非負値行列因子分解に適用される既存の更新式の導出と同様に、例えば区分加重値wA[1]〜wA[G]を適用したG個の行列積B[1]Y[1]〜B[G]Y[G]の加重和と音響信号AXの解析特性行列Xとの差分に相当する評価関数が最小化される(評価関数の微分値がゼロになる)という条件から導出される。
数式(2)および図7から理解される通り、第1実施形態の係数算定部36は、参照基底行列B[g]と参照係数行列Z[g,s]との行列積B[g]Z[g,s]をジャンル毎の区分加重値wB[g,s]のもとで加重加算した結果(数式(2)の右辺)が特定ジャンルの参照信号ARの参照特性行列R[γ,s]に近似するように、G個の区分加重値wB[1,s]〜wB[G,s]とG個の参照係数行列Z[1,s]〜Z[G,s]とを算定する。図6に例示される通り、基礎データQ[γ]のうち1個の参照特性行列R[γ,s]に対応する単位データq[γ,s]は、参照特性行列R[γ,s]から算定されたG個の区分加重値wB[1,s]〜wB[G,s]とG個の参照係数行列Z[1,s]〜Z[G,s]とを包含する。
本発明の第2実施形態について説明する。第2実施形態は、第1実施形態の音響解析装置100を利用した電子楽器である。なお、以下に例示する各形態において作用や機能が第1実施形態と同様である要素については、第1実施形態の説明で参照した符号を流用して各々の詳細な説明を適宜に省略する。
第1実施形態では、区分加重値wA[1]〜wA[G]を適用したG個の行列積B[1]Y[1]〜B[G]Y[G]の加重和と音響信号AXの解析特性行列Xとの差分に相当する評価関数が最小化されるという条件から導出された更新式の演算で区分加重値wA[g]と解析係数行列Y[g]とをジャンル毎に算定したが、階層化NMFの解法は以上の例示に限定されない。第3実施形態は、階層化NMFの処理に変分ベイズ法を適用した形態である。
以上の各形態は多様に変形され得る。具体的な変形の態様を以下に例示する。以下の例示から任意に選択された2以上の態様は適宜に併合され得る。
Claims (5)
- 複数の参照音を分類した複数の区分について、前記区分内の参照音の周波数特性を表す複数の基底ベクトルを含む前記区分毎の参照基底行列と、前記参照基底行列の各基底ベクトルの加重値の時間変動を表す複数の係数ベクトルを含む解析係数行列との行列積を、前記区分毎の第1区分加重値のもとで加重加算した結果が、解析対象音の周波数特性の時系列を表す解析特性行列に近似するように、前記第1区分加重値と前記解析係数行列とを前記区分毎に算定する行列解析手段
を具備する音響解析装置。 - 前記参照音の周波数特性の時系列を表す複数の参照特性行列を、前記参照基底行列と、当該参照基底行列の各基底ベクトルの加重値の時間変動を表す複数の係数ベクトルを含む参照係数行列とに分解したときの当該参照係数行列と、前記行列解析手段が算定した前記解析係数行列とを比較する特性比較手段
を具備する請求項1の音響解析装置。 - 前記特性比較手段は、前記参照基底行列と前記参照係数行列との行列積を前記区分毎の第2区分加重値のもとで加重加算した結果が前記参照特性行列に近似するように、前記第2区分加重値と前記参照係数行列とを前記区分毎に算定したときの当該各参照係数行列を、前記行列解析手段が算定した前記解析係数行列と比較する
請求項2の音響解析装置。 - 前記特性比較手段は、前記複数の区分のうち前記行列解析手段が前記区分毎に算定した第1区分加重値に応じて選択された特定区分内の複数の参照音の各々について、当該参照音の前記参照係数行列と、前記行列解析手段が前記特定区分について算定した解析係数行列とを比較する
請求項2または請求項3の音響解析装置。 - 前記複数の参照音は、音楽的なスタイルが相違する各楽曲の伴奏音であり、前記楽曲のジャンル毎に前記複数の区分に分類され、
前記特定区分のジャンルの名称と前記特性比較手段による比較結果に応じて選択された参照音のスタイルの名称とを表示装置に表示させる表示制御手段を具備する
請求項4の音響解析装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013216008A JP6197569B2 (ja) | 2013-10-17 | 2013-10-17 | 音響解析装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2013216008A JP6197569B2 (ja) | 2013-10-17 | 2013-10-17 | 音響解析装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2015079110A true JP2015079110A (ja) | 2015-04-23 |
| JP6197569B2 JP6197569B2 (ja) | 2017-09-20 |
Family
ID=53010571
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2013216008A Expired - Fee Related JP6197569B2 (ja) | 2013-10-17 | 2013-10-17 | 音響解析装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6197569B2 (ja) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019026236A1 (ja) * | 2017-08-03 | 2019-02-07 | Pioneer DJ株式会社 | 楽曲解析装置および楽曲解析プログラム |
| US10297241B2 (en) | 2016-03-07 | 2019-05-21 | Yamaha Corporation | Sound signal processing method and sound signal processing apparatus |
| WO2020084787A1 (en) * | 2018-10-26 | 2020-04-30 | Nec Corporation | A source separation device, a method for a source separation device, and a non-transitory computer readable medium |
| WO2020224107A1 (zh) * | 2019-05-05 | 2020-11-12 | 平安科技(深圳)有限公司 | 音乐风格分类方法、装置、计算机设备及存储介质 |
| JPWO2021059473A1 (ja) * | 2019-09-27 | 2021-04-01 | ||
| JPWO2022168638A1 (ja) * | 2021-02-05 | 2022-08-11 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010197596A (ja) * | 2009-02-24 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | 信号解析装置、信号解析方法、プログラム、及び記録媒体 |
| JP2012163918A (ja) * | 2011-02-09 | 2012-08-30 | Sony Corp | 音声信号処理装置、および音声信号処理方法、並びにプログラム |
| JP2013033196A (ja) * | 2011-07-07 | 2013-02-14 | Nara Institute Of Science & Technology | 音響処理装置 |
-
2013
- 2013-10-17 JP JP2013216008A patent/JP6197569B2/ja not_active Expired - Fee Related
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010197596A (ja) * | 2009-02-24 | 2010-09-09 | Nippon Telegr & Teleph Corp <Ntt> | 信号解析装置、信号解析方法、プログラム、及び記録媒体 |
| JP2012163918A (ja) * | 2011-02-09 | 2012-08-30 | Sony Corp | 音声信号処理装置、および音声信号処理方法、並びにプログラム |
| JP2013033196A (ja) * | 2011-07-07 | 2013-02-14 | Nara Institute Of Science & Technology | 音響処理装置 |
Non-Patent Citations (2)
| Title |
|---|
| ANDRE HOLZAPFEL AND YANNIS STYLIANOU: "Musical Genre Classification Using Nonnegative Matrix Factorization-based Features", IEEE TRANSACTIONS ON AUDIO, SPEECH, AND LANGUAGE PROCESSING, vol. 16, no. 2, JPN6017026903, February 2008 (2008-02-01), pages 424 - 434, XP011200219, ISSN: 0003602935, DOI: 10.1109/TASL.2007.909434 * |
| KONSTANTIN MARKOV AND TOMOKO MATSUI: "NONNEGATIVE MATRIX FACTORIZATION BASED SELF-TAUGHT LEARNING WITH APPLICATION TO MUSIC GENRE CLASSIFI", IEEE INTERNATIONAL WORKSHOP ON MACHINE LEARNING FOR SIGNAL PROCESSING (MLSP), 2012, JPN6017026904, 23 September 2012 (2012-09-23), ISSN: 0003602936 * |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10297241B2 (en) | 2016-03-07 | 2019-05-21 | Yamaha Corporation | Sound signal processing method and sound signal processing apparatus |
| WO2019026236A1 (ja) * | 2017-08-03 | 2019-02-07 | Pioneer DJ株式会社 | 楽曲解析装置および楽曲解析プログラム |
| JPWO2019026236A1 (ja) * | 2017-08-03 | 2020-07-16 | AlphaTheta株式会社 | 楽曲解析装置および楽曲解析プログラム |
| WO2020084787A1 (en) * | 2018-10-26 | 2020-04-30 | Nec Corporation | A source separation device, a method for a source separation device, and a non-transitory computer readable medium |
| JP2022505682A (ja) * | 2018-10-26 | 2022-01-14 | 日本電気株式会社 | ソース分離装置、ソース分離装置の方法、およびプログラム |
| WO2020224107A1 (zh) * | 2019-05-05 | 2020-11-12 | 平安科技(深圳)有限公司 | 音乐风格分类方法、装置、计算机设备及存储介质 |
| WO2021059473A1 (ja) * | 2019-09-27 | 2021-04-01 | ヤマハ株式会社 | 音響解析方法、音響解析装置およびプログラム |
| JPWO2021059473A1 (ja) * | 2019-09-27 | 2021-04-01 | ||
| CN114402389A (zh) * | 2019-09-27 | 2022-04-26 | 雅马哈株式会社 | 音响解析方法、音响解析装置及程序 |
| JP7120468B2 (ja) | 2019-09-27 | 2022-08-17 | ヤマハ株式会社 | 音響解析方法、音響解析装置およびプログラム |
| US12105752B2 (en) | 2019-09-27 | 2024-10-01 | Yamaha Corporation | Audio analysis method, audio analysis device and non-transitory computer-readable medium |
| JPWO2022168638A1 (ja) * | 2021-02-05 | 2022-08-11 | ||
| WO2022168638A1 (ja) * | 2021-02-05 | 2022-08-11 | ヤマハ株式会社 | 音響解析システム、電子楽器および音響解析方法 |
| JP7552740B2 (ja) | 2021-02-05 | 2024-09-18 | ヤマハ株式会社 | 音響解析システム、電子楽器および音響解析方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP6197569B2 (ja) | 2017-09-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6197569B2 (ja) | 音響解析装置 | |
| EP3723080B1 (en) | Music classification method and beat point detection method, storage device and computer device | |
| JP5454317B2 (ja) | 音響解析装置 | |
| US9620130B2 (en) | System and method for processing sound signals implementing a spectral motion transform | |
| US9087500B2 (en) | Note sequence analysis apparatus | |
| US9257111B2 (en) | Music analysis apparatus | |
| EP2551843A1 (en) | Music analysis apparatus | |
| JP2009031486A (ja) | 演奏音の類似度を評価する方法、装置およびプログラム | |
| US20120300950A1 (en) | Management of a sound material to be stored into a database | |
| US11322124B2 (en) | Chord identification method and chord identification apparatus | |
| JP6743425B2 (ja) | 音信号処理方法および音信号処理装置 | |
| US12105752B2 (en) | Audio analysis method, audio analysis device and non-transitory computer-readable medium | |
| CN110959172B (zh) | 演奏解析方法、演奏解析装置以及存储介质 | |
| JP2017111268A (ja) | 技法判定装置 | |
| JP6044119B2 (ja) | 音響解析装置およびプログラム | |
| JP2013164584A (ja) | 音響処理装置 | |
| JP2014134688A (ja) | 音響解析装置 | |
| WO2022070639A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| JP6733487B2 (ja) | 音響解析方法および音響解析装置 | |
| JP2015200685A (ja) | アタック位置検出プログラムおよびアタック位置検出装置 | |
| JP2017161572A (ja) | 音信号処理方法および音信号処理装置 | |
| CN108780634A (zh) | 声音信号处理方法及声音信号处理装置 | |
| CN116762124A (zh) | 音响解析系统、电子乐器及音响解析方法 | |
| JP2017058596A (ja) | 自動アレンジ装置及びプログラム | |
| WO2019008625A1 (ja) | 信号処理装置、信号処理方法およびプログラムを記憶する記憶媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20150410 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160823 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170626 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170725 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170807 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6197569 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| LAPS | Cancellation because of no payment of annual fees |
