JP2806048B2 - 自動採譜装置 - Google Patents
自動採譜装置Info
- Publication number
- JP2806048B2 JP2806048B2 JP1143391A JP1143391A JP2806048B2 JP 2806048 B2 JP2806048 B2 JP 2806048B2 JP 1143391 A JP1143391 A JP 1143391A JP 1143391 A JP1143391 A JP 1143391A JP 2806048 B2 JP2806048 B2 JP 2806048B2
- Authority
- JP
- Japan
- Prior art keywords
- fundamental frequency
- frequency
- music
- extracting
- automatic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Auxiliary Devices For Music (AREA)
Description
【０００１】
【産業上の利用分野】本発明は、音楽信号を楽譜もしく
は楽譜に相当する符号に変換する自動採譜装置に係り、
特に、音楽信号を各楽器毎のパートに分離する装置に関
する。
は楽譜に相当する符号に変換する自動採譜装置に係り、
特に、音楽信号を各楽器毎のパートに分離する装置に関
する。
【０００２】
【従来の技術】従来、複数の楽器によって演奏された音
楽の採譜は、音楽的知識を有する採譜者によって行われ
てきた。また、単音からなる音楽を採譜したり、あるい
は鍵盤の押された情報から採譜を行う装置は提案されて
いるが、採譜可能な楽器数には制約があった。
楽の採譜は、音楽的知識を有する採譜者によって行われ
てきた。また、単音からなる音楽を採譜したり、あるい
は鍵盤の押された情報から採譜を行う装置は提案されて
いるが、採譜可能な楽器数には制約があった。
【０００３】
【発明が解決しようとする課題】上記従来の採譜装置で
は、単一の楽器により演奏された音楽信号を採譜するよ
うに構成されていたため、複数の楽器により演奏された
音楽信号を各パートに分離し、採譜を行うことはできな
いという問題があった。本発明は、上述した問題点を解
決するもので、取り込んだ音楽信号を周波数分析し、そ
の結果より基本周波数を抽出し、それに基づいて楽器毎
のパートに分離して採譜することを可能とした自動採譜
装置を提供することを目的としている。
は、単一の楽器により演奏された音楽信号を採譜するよ
うに構成されていたため、複数の楽器により演奏された
音楽信号を各パートに分離し、採譜を行うことはできな
いという問題があった。本発明は、上述した問題点を解
決するもので、取り込んだ音楽信号を周波数分析し、そ
の結果より基本周波数を抽出し、それに基づいて楽器毎
のパートに分離して採譜することを可能とした自動採譜
装置を提供することを目的としている。
【０００４】
【課題を解決するための手段】上記目的を達成するため
に請求項１の発明は、音楽信号を楽譜もしくは楽譜に相
当する符号に変換する採譜装置において、複数の楽器に
より演奏された音楽信号を標本化して取り込む信号取り
込み手段と、取り込まれた音楽信号に対して周波数分析
を行う周波数分析手段と、周波数分析を行った結果より
基本周波数を抽出する基本周波数抽出手段と、各基本周
波数を楽器毎のパートに分離するパート分離手段と、各
パートの基本周波数から音階を算出し楽譜に変換する符
号化手段を備えたものである。また、請求項２の発明
は、上記において、所定の時間内に含まれる全ての基本
周波数に対し、前記周波数分析手段により得られた１か
らＮ倍音のパワー値を、Ｎ次元ベクトルとし抽出する倍
音ベクトル抽出手段と、前記時間内の全ての倍音ベクト
ルに対し、所定数のグループにクラスタリングを行うク
ラスタリング手段とを備え、各グループにクラスタリン
グされた倍音ベクトルに対する基本周波数を、各パート
の基本周波数として出力する自動採譜装置である。ま
た、請求項３の発明は、上記のクラスタリング手段がＫ
平均アルゴリズムを行うものである。
に請求項１の発明は、音楽信号を楽譜もしくは楽譜に相
当する符号に変換する採譜装置において、複数の楽器に
より演奏された音楽信号を標本化して取り込む信号取り
込み手段と、取り込まれた音楽信号に対して周波数分析
を行う周波数分析手段と、周波数分析を行った結果より
基本周波数を抽出する基本周波数抽出手段と、各基本周
波数を楽器毎のパートに分離するパート分離手段と、各
パートの基本周波数から音階を算出し楽譜に変換する符
号化手段を備えたものである。また、請求項２の発明
は、上記において、所定の時間内に含まれる全ての基本
周波数に対し、前記周波数分析手段により得られた１か
らＮ倍音のパワー値を、Ｎ次元ベクトルとし抽出する倍
音ベクトル抽出手段と、前記時間内の全ての倍音ベクト
ルに対し、所定数のグループにクラスタリングを行うク
ラスタリング手段とを備え、各グループにクラスタリン
グされた倍音ベクトルに対する基本周波数を、各パート
の基本周波数として出力する自動採譜装置である。ま
た、請求項３の発明は、上記のクラスタリング手段がＫ
平均アルゴリズムを行うものである。
【０００５】
【作用】請求項１記載の構成によれば、信号取り込み手
段は複数の楽器により演奏された音楽信号を標本化して
取り込み、周波数分析手段はこの取り込まれた音楽信号
に対して周波数分析を行い、基本周波数抽出手段はこの
結果より基本周波数を抽出する。パート分離手段は各基
本周波数を楽器毎のパートに分離し、符号化手段は各パ
ートの基本周波数から音階を算出し楽譜に変換する。請
求項２記載の構成によれば、倍音ベクトル抽出手段は、
ある一定の時間内に含まれる全ての基本周波数に対し周
波数分析手段により得られた１からＮ倍音のパワー値を
Ｎ次元ベクトルとし抽出する。クラスタリング手段は、
前記ベクトル抽出手段により抽出された全てのベクトル
に対して所定数のグループに、Ｋ平均アルゴリズム（Ｋ
−ｍｅａｎｓ法）などのクラスタリング手法によりクラ
スタリングを行い、各グループにクラスタリングされた
倍音ベクトルに対する基本周波数を、各パートの基本周
波数として出力する。
段は複数の楽器により演奏された音楽信号を標本化して
取り込み、周波数分析手段はこの取り込まれた音楽信号
に対して周波数分析を行い、基本周波数抽出手段はこの
結果より基本周波数を抽出する。パート分離手段は各基
本周波数を楽器毎のパートに分離し、符号化手段は各パ
ートの基本周波数から音階を算出し楽譜に変換する。請
求項２記載の構成によれば、倍音ベクトル抽出手段は、
ある一定の時間内に含まれる全ての基本周波数に対し周
波数分析手段により得られた１からＮ倍音のパワー値を
Ｎ次元ベクトルとし抽出する。クラスタリング手段は、
前記ベクトル抽出手段により抽出された全てのベクトル
に対して所定数のグループに、Ｋ平均アルゴリズム（Ｋ
−ｍｅａｎｓ法）などのクラスタリング手法によりクラ
スタリングを行い、各グループにクラスタリングされた
倍音ベクトルに対する基本周波数を、各パートの基本周
波数として出力する。
【０００６】
【実施例】以下、本発明を具体化した一実施例を図面を
参照して説明する。図１は本発明による自動採譜装置の
ブロック図である。本装置は、音楽信号が入力されるオ
ーディオ・アンプ１と、ローパス・フィルタ２と、Ａ／
Ｄ変換装置３と、Ｉ／Ｏポート４と、基本周波数を抽出
し、それより各楽器毎のパートに分離し、楽譜へ変換す
る処理等を行うＣＰＵ５と、ＲＡＭ６と、ＲＯＭ７と、
処理した結果を表示するデイスプレイ８とから構成され
ている。
参照して説明する。図１は本発明による自動採譜装置の
ブロック図である。本装置は、音楽信号が入力されるオ
ーディオ・アンプ１と、ローパス・フィルタ２と、Ａ／
Ｄ変換装置３と、Ｉ／Ｏポート４と、基本周波数を抽出
し、それより各楽器毎のパートに分離し、楽譜へ変換す
る処理等を行うＣＰＵ５と、ＲＡＭ６と、ＲＯＭ７と、
処理した結果を表示するデイスプレイ８とから構成され
ている。
【０００７】図２、図３は、本自動採譜装置により行わ
れる基本周波数抽出処理のための機能ブロック構成を示
す。本装置の機能要素としては、信号取り込み部２１と
周波数分析部２２と基本周波数候補抽出部２３とからな
る。信号取り込み部２１においては、入力された音楽信
号は、オーディオ・アンプ１により増幅される。この増
幅された信号は、ローパス・フィルター２に入力され、
５．５ｋＨｚ以下の成分のみが通過し、標本化時の折返
し歪みを抑えている。この出力信号はＡ／Ｄ変換装置３
により１２ｋＨｚ、１６ｂｉｔで標本化される。標本化
されたデータはＩ／Ｏポート４を介し、ＣＰＵ５に取り
込まれ、ＲＡＭ６に記憶される。周波数分析部２２で
は、ＣＰＵ５は、ＲＡＭ６より標本化されたデータを読
出し、２５ｍｓｅｃ毎を１フレームとし、１フレーム毎
に８５．３ｍｓｅｃハミング窓を掛けた後、ＦＦＴ分析
により対数パワー・スペクトルを算出する。次に、ＣＰ
Ｕ５は、算出された対数パワー・スペクトルから放物線
内挿処理によりピーク周波数を求める。図４は以上のよ
うにして求めたピーク・スペクトルを、時間軸を横軸
に、周波数軸を鍵盤番号に変換して縦軸にとり、強度を
濃淡で示したものである。
れる基本周波数抽出処理のための機能ブロック構成を示
す。本装置の機能要素としては、信号取り込み部２１と
周波数分析部２２と基本周波数候補抽出部２３とからな
る。信号取り込み部２１においては、入力された音楽信
号は、オーディオ・アンプ１により増幅される。この増
幅された信号は、ローパス・フィルター２に入力され、
５．５ｋＨｚ以下の成分のみが通過し、標本化時の折返
し歪みを抑えている。この出力信号はＡ／Ｄ変換装置３
により１２ｋＨｚ、１６ｂｉｔで標本化される。標本化
されたデータはＩ／Ｏポート４を介し、ＣＰＵ５に取り
込まれ、ＲＡＭ６に記憶される。周波数分析部２２で
は、ＣＰＵ５は、ＲＡＭ６より標本化されたデータを読
出し、２５ｍｓｅｃ毎を１フレームとし、１フレーム毎
に８５．３ｍｓｅｃハミング窓を掛けた後、ＦＦＴ分析
により対数パワー・スペクトルを算出する。次に、ＣＰ
Ｕ５は、算出された対数パワー・スペクトルから放物線
内挿処理によりピーク周波数を求める。図４は以上のよ
うにして求めたピーク・スペクトルを、時間軸を横軸
に、周波数軸を鍵盤番号に変換して縦軸にとり、強度を
濃淡で示したものである。
【０００８】基本周波数抽出部２３においては、基本周
波数の抽出を行う。具体的には、ＣＰＵ５は、以下の３
つの尺度からある分析区間内にある音が基本周波数か倍
音かを判定する。３つの尺度とは、その音の強度、
その音を基本周波数であるとした場合、その音の倍音が
ピーク・スペクトルの中に含まれているか（すなわち、
基本周波数らしさ）、その音が他の音の第ｎ次倍音
（２≦ｎ≦８）であるとした場合、基本周波数になる音
の倍音がピーク・スーペクトルの中に含まれるか（すな
わち、倍音らしさ）である。判定は、の強度が分析区
間内のピーク・スペクトルの強度から計算したしきい値
より上であり、の基本周波数らしさがあるしきい値よ
り大きく、の倍音らしさがあるしきい値より小さい場
合に、その音が基本周波数であるとする。
波数の抽出を行う。具体的には、ＣＰＵ５は、以下の３
つの尺度からある分析区間内にある音が基本周波数か倍
音かを判定する。３つの尺度とは、その音の強度、
その音を基本周波数であるとした場合、その音の倍音が
ピーク・スペクトルの中に含まれているか（すなわち、
基本周波数らしさ）、その音が他の音の第ｎ次倍音
（２≦ｎ≦８）であるとした場合、基本周波数になる音
の倍音がピーク・スーペクトルの中に含まれるか（すな
わち、倍音らしさ）である。判定は、の強度が分析区
間内のピーク・スペクトルの強度から計算したしきい値
より上であり、の基本周波数らしさがあるしきい値よ
り大きく、の倍音らしさがあるしきい値より小さい場
合に、その音が基本周波数であるとする。
【０００９】パート分離部２４は、倍音ベクトル抽出
部、クラスタリング部から構成されており、図３にその
手順を示す。倍音ベクトル抽出部は、ある一定の窓内
（本実施例では窓長を６秒とする）に含まれる基本周波
数抽出部２３により抽出された全ての基本周波数に対
し、周波数分析部２２により得られた１からＮ倍音のパ
ワー値をＮ次元ベクトルとし抽出する（Ｓ１）。例え
ば、Ｆ（）をフーリエ変換とすると、基本周波数が１０
０Ｈｚの場合、倍音ベクトル＝（１ｏｇ10Ｆ（１００Ｈ
ｚ）2 ，１ｏｇ10Ｆ（２００Ｈｚ）2 ，……，１ｏｇ10
Ｆ（１００ＮＨｚ）2 となる。クラスタリング部では、
ＣＰＵ５は、倍音ベクトル抽出により抽出された全ての
倍音ベクトルに対して所定数Ｍのグループにクラスタリ
ング処理を行う（Ｓ２）。
部、クラスタリング部から構成されており、図３にその
手順を示す。倍音ベクトル抽出部は、ある一定の窓内
（本実施例では窓長を６秒とする）に含まれる基本周波
数抽出部２３により抽出された全ての基本周波数に対
し、周波数分析部２２により得られた１からＮ倍音のパ
ワー値をＮ次元ベクトルとし抽出する（Ｓ１）。例え
ば、Ｆ（）をフーリエ変換とすると、基本周波数が１０
０Ｈｚの場合、倍音ベクトル＝（１ｏｇ10Ｆ（１００Ｈ
ｚ）2 ，１ｏｇ10Ｆ（２００Ｈｚ）2 ，……，１ｏｇ10
Ｆ（１００ＮＨｚ）2 となる。クラスタリング部では、
ＣＰＵ５は、倍音ベクトル抽出により抽出された全ての
倍音ベクトルに対して所定数Ｍのグループにクラスタリ
ング処理を行う（Ｓ２）。
【００１０】本実施例ではクラスタリング手法として
は、よく知られているＫ平均アルゴリズム（Ｋ−ｍｅａ
ｎｓ法）を利用する。同一楽器により発生された音階の
近い音の倍音ベクトルは類似していると考えられるた
め、各グループには同一楽器により発生された倍音ベク
トルがクラスタリングされる。その後、各グループに、
クラスタリングされた倍音ベクトルに対する基本周波数
を、各パートの基本周波数として出力する。以上の処理
を窓をずらしながら、採譜すべき全ての区間に対して進
める。このとき、隣接する窓の一部を重ね、重ねた部分
での同一基本周波数が、同一トラックになるように調整
する（Ｓ３）。さらに、符号化部２５において、パート
分離部２４により出力された基本周波数から、音階、音
の開始点、音の長さをもとに楽譜を作成する。本発明は
以上詳述した実施例構成に限定されるものでなく、その
趣旨を逸脱しない範囲において種々の変更を加えること
ができる。
は、よく知られているＫ平均アルゴリズム（Ｋ−ｍｅａ
ｎｓ法）を利用する。同一楽器により発生された音階の
近い音の倍音ベクトルは類似していると考えられるた
め、各グループには同一楽器により発生された倍音ベク
トルがクラスタリングされる。その後、各グループに、
クラスタリングされた倍音ベクトルに対する基本周波数
を、各パートの基本周波数として出力する。以上の処理
を窓をずらしながら、採譜すべき全ての区間に対して進
める。このとき、隣接する窓の一部を重ね、重ねた部分
での同一基本周波数が、同一トラックになるように調整
する（Ｓ３）。さらに、符号化部２５において、パート
分離部２４により出力された基本周波数から、音階、音
の開始点、音の長さをもとに楽譜を作成する。本発明は
以上詳述した実施例構成に限定されるものでなく、その
趣旨を逸脱しない範囲において種々の変更を加えること
ができる。
【００１１】
【発明の効果】以上のように本発明によれば、標本化し
て取り込んだ音楽信号より倍音ベクトルを抽出し、これ
をクラスタリングすることにより、クラスタリングされ
た倍音ベクトルに対する基本周波数を、各パートの基本
周波数として出力するようにしているので、複数の楽器
により演奏された音楽信号を各パートに分離することが
でき、また、採譜することができる。
て取り込んだ音楽信号より倍音ベクトルを抽出し、これ
をクラスタリングすることにより、クラスタリングされ
た倍音ベクトルに対する基本周波数を、各パートの基本
周波数として出力するようにしているので、複数の楽器
により演奏された音楽信号を各パートに分離することが
でき、また、採譜することができる。
【図１】 本発明の一実施例による自動採譜装置のブロ
ック構成図である。
ック構成図である。
【図２】 自動採譜装置の機能構成図である。
【図３】 パート分離部の動作を説明する流れ図であ
る。
る。
【図４】 周波数分析部により算出されたピーク・スペ
クトルの特性図である。
クトルの特性図である。
５ ＣＰＵ ２１ 信号取り込み部 ２２ 周波数分析部 ２３ 基本周波数抽出部 ２４ パート分離部 ２５ 符号化部
Claims (3)
- 【請求項１】 音楽信号を楽譜もしくは楽譜に相当する
符号に変換する採譜装置において、複数の楽器により演
奏された音楽信号を標本化して取り込む信号取り込み手
段と、取り込まれた音楽信号に対して周波数分析を行う
周波数分析手段と、周波数分析を行った結果より基本周
波数を抽出する基本周波数抽出手段と、各基本周波数を
楽器毎のパートに分離するパート分離手段と、各パート
の基本周波数から音階を算出し楽譜に変換する符号化手
段を備えたことを特徴とする自動採譜装置。 - 【請求項２】 請求項１記載の自動採譜装置において、
所定の時間内に含まれる全ての基本周波数に対し、前記
周波数分析手段により得られた１からＮ倍音のパワー値
を、Ｎ次元ベクトルとし抽出する倍音ベクトル抽出手段
と、前記時間内の全ての倍音ベクトルに対し、所定数の
グループにクラスタリングを行うクラスタリング手段と
を備え、各グループにクラスタリングされた倍音ベクト
ルに対する基本周波数を、各パートの基本周波数として
出力することを特徴とした自動採譜装置。 - 【請求項３】 請求項２記載の自動採譜装置において、
クラスタリング手段は、Ｋ平均アルゴリズムを行うもの
であることを特徴とした自動採譜装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1143391A JP2806048B2 (ja) | 1991-01-07 | 1991-01-07 | 自動採譜装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP1143391A JP2806048B2 (ja) | 1991-01-07 | 1991-01-07 | 自動採譜装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH04261592A JPH04261592A (ja) | 1992-09-17 |
| JP2806048B2 true JP2806048B2 (ja) | 1998-09-30 |
Family
ID=11777952
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1143391A Expired - Fee Related JP2806048B2 (ja) | 1991-01-07 | 1991-01-07 | 自動採譜装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2806048B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9205787B2 (en) | 2011-01-12 | 2015-12-08 | Panasonic Intellectual Property Management Co., Ltd. | Vehicle counting device and vehicle counting method |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7598447B2 (en) * | 2004-10-29 | 2009-10-06 | Zenph Studios, Inc. | Methods, systems and computer program products for detecting musical notes in an audio signal |
| GB2430073A (en) * | 2005-09-08 | 2007-03-14 | Univ East Anglia | Analysis and transcription of music |
-
1991
- 1991-01-07 JP JP1143391A patent/JP2806048B2/ja not_active Expired - Fee Related
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9205787B2 (en) | 2011-01-12 | 2015-12-08 | Panasonic Intellectual Property Management Co., Ltd. | Vehicle counting device and vehicle counting method |
Also Published As
| Publication number | Publication date |
|---|---|
| JPH04261592A (ja) | 1992-09-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8889976B2 (en) | Musical score position estimating device, musical score position estimating method, and musical score position estimating robot | |
| CN109147796B (zh) | 语音识别方法、装置、计算机设备及计算机可读存储介质 | |
| US5884260A (en) | Method and system for detecting and generating transient conditions in auditory signals | |
| Zhu et al. | Multi-stage non-negative matrix factorization for monaural singing voice separation | |
| JPH0990974A (ja) | 信号処理方法 | |
| JPS58100199A (ja) | 音声認識及び再生方法とその装置 | |
| JP5127982B2 (ja) | 音楽検索装置 | |
| CN110415730B (zh) | 一种音乐分析数据集构建方法及基于其的音高、时值提取方法 | |
| US5452398A (en) | Speech analysis method and device for suppyling data to synthesize speech with diminished spectral distortion at the time of pitch change | |
| JP2806048B2 (ja) | 自動採譜装置 | |
| KR100659884B1 (ko) | 음악에서의 비브라토 자동 검출방법 | |
| JP2871120B2 (ja) | 自動採譜装置 | |
| JP3102089B2 (ja) | 自動採譜装置 | |
| JP2806047B2 (ja) | 自動採譜装置 | |
| JPH04324499A (ja) | 音声認識装置 | |
| JP3352144B2 (ja) | 音声認識装置 | |
| US5899974A (en) | Compressing speech into a digital format | |
| JPH04323696A (ja) | 自動採譜装置 | |
| Deif et al. | Separation of vocals from monaural music recordings using diagonal median filters and practical time-frequency parameters | |
| JP2653456B2 (ja) | 自動採譜方法及び装置 | |
| JP3423233B2 (ja) | オーディオ信号処理方法および装置 | |
| JPH11143460A (ja) | 音楽演奏に含まれる旋律の分離方法、分離抽出方法および分離除去方法 | |
| Wang et al. | Single channel music source separation based on harmonic structure estimation | |
| Hossain et al. | Frequency component grouping based sound source extraction from mixed audio signals using spectral analysis | |
| KR0147185B1 (ko) | 영상가요재생시스템의 점수산정제어장치 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 19980623 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080724 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090724 Year of fee payment: 11 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100724 Year of fee payment: 12 |
|
| LAPS | Cancellation because of no payment of annual fees |