JP2015045731A5 - 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム - Google Patents
音響信号のアライメント装置、アライメント方法及びコンピュータプログラム Download PDFInfo
- Publication number
- JP2015045731A5 JP2015045731A5 JP2013176659A JP2013176659A JP2015045731A5 JP 2015045731 A5 JP2015045731 A5 JP 2015045731A5 JP 2013176659 A JP2013176659 A JP 2013176659A JP 2013176659 A JP2013176659 A JP 2013176659A JP 2015045731 A5 JP2015045731 A5 JP 2015045731A5
- Authority
- JP
- Japan
- Prior art keywords
- spectrum
- performance
- spectra
- evaluation value
- constituting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004590 computer program Methods 0.000 title claims description 5
- 230000000875 corresponding Effects 0.000 claims description 4
- 238000001228 spectrum Methods 0.000 claims 68
- 238000011156 evaluation Methods 0.000 claims 22
- 238000004364 calculation method Methods 0.000 claims 5
- 238000000034 method Methods 0.000 claims 1
- 239000000470 constituent Substances 0.000 description 2
Description
本発明は上記問題に対処するためになされたもので、その目的は、楽譜データを用いることなく複数の演奏のアライメントを計算可能なアライメント装置、アライメント方法及びコンピュータプログラムであって、前記複数の演奏を音響信号として評価したときの差が大きくても高精度にアライメントを計算できるアライメント装置、アライメント方法及びコンピュータプログラムを提供することにある。なお、下記本発明の各構成要件の記載においては、本発明の理解を容易にするために、実施形態の対応箇所の符号を括弧内に記載しているが、本発明の各構成要件は、実施形態の符号によって示された対応箇所の構成に限定解釈されるべきものではない。
Claims (6)
- 楽曲を構成する複数の演奏パートを演奏した第1の演奏、及び前記複数の演奏パートのうちの一部の演奏パートを演奏した第2の演奏をそれぞれ表わす音響信号をそれぞれ記録した第1及び第2の音響データを分析して、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント装置であって、
前記第2の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルと前記第1の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルとからなる一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルを超える周波数成分を有するとき第1の重みが付され、前記一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルに包含されるとき前記第1の重みよりも小さな第2の重みが付されるように設定された尺度を用いて前記一組のスペクトルの類似性に関する評価値を計算する評価値計算手段と、
前記類似性に関する評価値を用いて前記一組のスペクトルの系列の評価値を計算するとともに、前記一組のスペクトルの系列の評価値が所定の基準を満たす前記一組のスペクトルの系列を推定することにより、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント計算手段と、
を備えたことを特徴とするアライメント装置。 - 請求項1に記載のアライメント装置において、
前記評価値計算手段は、
前記一組のスペクトルのうちの第1の演奏のスペクトル及び第2の演奏のスペクトルのうちの一方の各周波数成分を他方の各周波数成分に対して相対的に周波数軸方向にシフトさせるピッチシフト手段と、
前記各周波数成分のシフト量に応じた評価値を前記一組のスペクトルの類似性に関する評価値に加算する加算手段と、をさらに備えたことを特徴とするアライメント装置。 - 請求項1又は2に記載のアライメント装置において、
前記一組のスペクトルの類似性に関する評価値は、前記一組のスペクトルの距離であり、
前記尺度は、前記一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルを超える周波数成分を有するとき、前記第1の演奏のスペクトルから見た前記第2の演奏のスペクトルの距離が、前記第2の演奏のスペクトルから見た前記第1の演奏のスペクトルの距離よりも大きくなり、前記一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルに包含されるとき、前記第1の演奏のスペクトルから見た前記第2の演奏のスペクトルの距離が、前記第2の演奏のスペクトルから見た前記第1の演奏のスペクトルの距離よりも小さくなる非対称の距離尺度であり、
前記一組のスペクトルの系列の評価値は、前記距離の総和であることを特徴とするアライメント装置。 - 請求項1又は2に記載のアライメント装置において、
前記一組のスペクトルの類似性に関する評価値は、前記尺度に対応する確率分布における前記第2の演奏のスペクトルの観測尤度であり、
前記一組のスペクトルの系列の評価値は、前記第1の演奏のスペクトルと前記第2の演奏のスペクトルの組み合わせによって分類された状態の系列として記述された確率モデルの尤度であることを特徴とするアライメント装置。 - 楽曲を構成する複数の演奏パートを演奏した第1の演奏、及び前記複数の演奏パートのうちの一部の演奏パートを演奏した第2の演奏をそれぞれ表わす音響信号をそれぞれ記録した第1及び第2の音響データを分析して、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント方法であって、
前記第2の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルと前記第1の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルとからなる一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルを超える周波数成分を有するとき第1の重みが付され、前記一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルに包含されるとき前記第1の重みよりも小さな第2の重みが付されるように設定された尺度を用いて前記一組のスペクトルの類似性に関する評価値を計算する評価値計算ステップと、
前記類似性に関する評価値を用いて前記一組のスペクトルの系列の評価値を計算するとともに、前記一組のスペクトルの系列の評価値が所定の基準を満たす前記一組のスペクトルの系列を推定することにより、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント計算ステップと、
を含むことを特徴とするアライメント方法。 - 楽曲を構成する複数の演奏パートを演奏した第1の演奏、及び前記複数の演奏パートのうちの一部の演奏パートを演奏した第2の演奏をそれぞれ表わす音響信号をそれぞれ記録した第1及び第2の音響データを分析して、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント処理をコンピュータに実行させるコンピュータプログラムであって、
前記第2の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルと前記第1の演奏のスペクトログラムを構成する複数のスペクトルのうちの1つのスペクトルとからなる一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルを超える周波数成分を有するとき第1の重みが付され、前記一組のスペクトルのうちの第2の演奏のスペクトルが第1の演奏のスペクトルに包含されるとき前記第1の重みよりも小さな第2の重みが付されるように設定された尺度を用いて前記一組のスペクトルの類似性に関する評価値を計算する評価値計算ステップと、
前記類似性に関する評価値を用いて前記一組のスペクトルの系列の評価値を計算するとともに、前記一組のスペクトルの系列の評価値が所定の基準を満たす前記一組のスペクトルの系列を推定することにより、前記第1及び第2の演奏をそれぞれ構成する各楽音の発音タイミングを対応付けるアライメント計算ステップと、
を含むことを特徴とするコンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013176659A JP6281211B2 (ja) | 2013-08-28 | 2013-08-28 | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013176659A JP6281211B2 (ja) | 2013-08-28 | 2013-08-28 | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015045731A JP2015045731A (ja) | 2015-03-12 |
JP2015045731A5 true JP2015045731A5 (ja) | 2017-03-30 |
JP6281211B2 JP6281211B2 (ja) | 2018-02-21 |
Family
ID=52671292
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013176659A Expired - Fee Related JP6281211B2 (ja) | 2013-08-28 | 2013-08-28 | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6281211B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109478398B (zh) | 2016-07-22 | 2023-12-26 | 雅马哈株式会社 | 控制方法以及控制装置 |
JP7243026B2 (ja) | 2018-03-23 | 2023-03-22 | ヤマハ株式会社 | 演奏解析方法、演奏解析装置およびプログラム |
JP6489261B2 (ja) * | 2018-04-10 | 2019-03-27 | ヤマハ株式会社 | 音響解析方法および音響解析装置 |
CN113657184B (zh) * | 2021-07-26 | 2023-11-07 | 广东科学技术职业学院 | 一种钢琴弹奏指法的评估方法及装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4323029B2 (ja) * | 1999-10-21 | 2009-09-02 | ヤマハ株式会社 | 音声処理装置およびカラオケ装置 |
JP4479701B2 (ja) * | 2006-08-08 | 2010-06-09 | ヤマハ株式会社 | 楽曲練習支援装置、動的時間整合モジュールおよびプログラム |
JP5088030B2 (ja) * | 2007-07-26 | 2012-12-05 | ヤマハ株式会社 | 演奏音の類似度を評価する方法、装置およびプログラム |
JP5046211B2 (ja) * | 2008-02-05 | 2012-10-10 | 独立行政法人産業技術総合研究所 | 音楽音響信号と歌詞の時間的対応付けを自動で行うシステム及び方法 |
-
2013
- 2013-08-28 JP JP2013176659A patent/JP6281211B2/ja not_active Expired - Fee Related
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11366850B2 (en) | Audio matching based on harmonogram | |
JP5454317B2 (ja) | 音響解析装置 | |
JP2015512528A5 (ja) | ||
JP2015045731A5 (ja) | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム | |
WO2015025053A3 (en) | Method and system for authenticating using a quartz oscillator | |
WO2018049982A1 (zh) | 一种为动画配乐的方法及装置 | |
JP5560861B2 (ja) | 楽曲解析装置 | |
JP2012226080A5 (ja) | ||
CN105118352A (zh) | 一种全自动乐器演奏纠错方法 | |
JP2009198581A (ja) | 音響処理装置およびプログラム | |
TW201633293A (zh) | 聲頻訊號的雜訊偵測方法與裝置 | |
JP2015036710A5 (ja) | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム | |
JP2019020631A5 (ja) | 楽曲解析方法、楽曲解析装置およびプログラム | |
JP2015079151A (ja) | 楽曲判別装置、楽曲判別装置の判別方法、プログラム | |
JP2016180816A5 (ja) | 電子鍵盤楽器、共鳴音発生装置、方法、プログラムおよび電子楽器 | |
CN104217731A (zh) | 一种快速识别独奏乐曲乐谱的方法 | |
US9668075B2 (en) | Estimating parameter values for a lumped parameter model of a loudspeaker | |
JP6281211B2 (ja) | 音響信号のアライメント装置、アライメント方法及びコンピュータプログラム | |
JP2011175182A5 (ja) | 情報処理装置およびその処理方法 | |
WO2019224909A1 (ja) | パラメータ選択方法、パラメータ選択プログラム、及び情報処理装置 | |
JP2018146928A5 (ja) | ||
JP2014048398A (ja) | 音響信号解析装置、方法、及びプログラム | |
JP2015200685A (ja) | アタック位置検出プログラムおよびアタック位置検出装置 | |
JP2012027196A (ja) | 信号分析装置、方法、及びプログラム | |
JP2018054854A5 (ja) |