JPH05257465A

JPH05257465A - 楽器演奏者の特徴抽出再生装置

Info

Publication number: JPH05257465A
Application number: JP4103447A
Authority: JP
Inventors: Tsutomu Saito; 勉斎藤; Naoto Uchiumi; 直人内海
Original assignee: Kawai Musical Instrument Manufacturing Co Ltd
Current assignee: Kawai Musical Instrument Manufacturing Co Ltd
Priority date: 1992-03-11
Filing date: 1992-03-11
Publication date: 1993-10-08
Also published as: US5453569A

Abstract

(57)【要約】【目的】演奏者ｉの演奏上の個性を抽出した特徴データ
で楽譜Ｎを補正することにより、あたかも演奏者ｉが楽
譜Ｎを演奏したような演奏情報Ｎ（ｉ）を作成して再生
することにより、演奏者の演奏上の個性を模倣すること
を目的としている。【構成】演奏者ｉの演奏上の個性を抽出するために演奏
者ｉが楽譜Ｍを演奏した演奏情報Ｍ（ｉ）を記憶する。
その記憶した演奏情報Ｍ（ｉ）と楽譜情報Ｍとを比較す
る。比較は楽譜情報を基本とし、音符または音符に付随
した記号に関する演奏方法、強弱記号に関する演奏方
法、速度記号に関する演奏方法、曲全体の流れに関する
演奏方法に関して比較され、特徴データ（ｉ）として抽
出記憶される。その演奏者ｉの抽出記憶された特徴デー
タ（ｉ）は読み出されて任意の楽譜情報Ｎに対する補正
に利用されて前記演奏者の演奏上の特徴をもつ演奏情報
Ｎ（ｉ）を作成する。この演奏情報Ｎ（ｉ）を再生する
ことにより聴衆はあたかも前記特徴データを記憶した演
奏者ｉがその曲目Ｎを演奏したかのように聞くことがで
きる。

Description

【発明の詳細な説明】【産業上の利用分野】

【０００１】本願発明は演奏者の楽器演奏情報を記憶／
再生する装置に関する。さらに詳細には、本願発明は楽
譜情報と演奏者の楽器演奏情報とを比較して演奏者の演
奏上の個性（特徴データ）を抽出記憶し、再生の際には
その特徴データを楽譜情報に付加してから自動的に楽器
演奏を行なうものである。

【従来の技術】

【０００２】電子楽器やピアノには演奏者が演奏したの
を記憶する装置があった。その演奏情報記憶／再生装置
は任意の演奏者の演奏状態を極力そのまま記憶し、また
再生するように設計されていた。近年デジタル技術の発
展により多量の演奏情報を確実に記憶／再生することも
容易となった。

【発明が解決しようとする課題】

【０００３】このような演奏情報は例えれば録音機であ
り、マイクからアナログ楽音情報として記憶するか操作
した鍵番号と時間データのデジタル情報として記憶する
かの違いはあるが、演奏された情報をそのまま記憶／再
生するということに止どまっていた。

【０００４】従ってその演奏情報はその曲目のみを再生
するものであり、他の曲目を再生する場合には改めて録
音しなければならない。例えば著名なピアニストが曲目
Ｍを演奏した情報があるとすると、この演奏情報は曲目
Ｍに付随した情報であり曲目Ｎに関してその演奏情報を
利用しようとしてもなすすべがなかった。勿論、曲目Ｍ
やＮに関しても楽譜情報を機械的にそのまま演奏するこ
とは従来技術としてある。しかしこのような演奏は機械
的で人間味がなく直ぐに飽きてしまう。人間味とは演奏
者の個性である。

【課題を解決するための手段】

【０００５】本願発明は演奏者が演奏したことのない曲
目でもその演奏者が以前に演奏した曲から抽出記憶され
た特徴データで楽譜情報を補正することにより、演奏者
の演奏上の個性を模倣し、聴衆に自然で繊細な音楽を与
えることを目的としている。そのために本願発明は演奏
上の特徴を抽出する特徴抽出とその抽出された特徴に基
づき楽譜を補正する楽譜補正を有する。

【０００６】著名な演奏者でもその演奏方法にはかなり
の個性（演奏上の特徴）があり、その特徴データを使え
ば他の曲目であっても、対応する楽譜情報にその特徴デ
ータを付加することによりあたかもその演奏者が演奏し
たように見せ掛けることができる。本願発明における楽
器演奏者の特徴抽出装置ならびに特徴再生装置は、個人
の演奏情報とその元となる楽譜情報とを比較して特徴デ
ータを抽出記憶し、再生する際にその特徴データで楽譜
情報を補正した後に利用するようにしている。

【作用】

【０００７】演奏者の演奏の特徴を抽出するために、演
奏者の楽譜に基づく演奏情報をディジタル的に記憶す
る。その記憶された演奏情報と楽譜情報とを比較する。
比較は楽譜情報を基本とし、音符または音符に付随した
記号に対する演奏方法、強弱記号に対する演奏方法、速
度記号に対する演奏方法、曲全体の流れに対する演奏方
法等が特徴データとして抽出記憶される。演奏方法とは
押鍵／離鍵時間に関する操作タイミング、イニシャルタ
ッチ／アフタータッチに関する操作タッチ、演奏スピー
ドに関する操作テンポ等である。

【０００８】その抽出記憶された特徴データは読み出さ
れると、任意の楽譜情報に対する補正に利用することが
できる。そのため、楽譜情報を補正して作られた演奏情
報はあたかも前記演奏者が実際にその曲目を演奏したか
のように聞くことができる。

【実施例】

【０００９】図１は本願発明のブロック図である。図１
は大別して楽器演奏者の特徴抽出装置（ＥＮＣｏｄｅ
ｒ）と特徴再生装置（ＤＥＣｏｄｅｒ）とからなり、そ
れらの装置間には演奏上の特徴データを記憶する特徴デ
ータ記憶部が存在するため双方が独立した装置として機
能する。

【００１０】第１に楽器演奏者の特徴抽出装置ＥＮＣを
説明する。演奏情報検出部１０は演奏者ｉが楽譜Ｍを演
奏したときの楽器操作情報を検出してＭＩＤＩ規格に準
じた情報で出力する。この演奏情報検出部１０は通常の
電子楽器若しくは自動演奏ピアノに内蔵されている操作
状態検出手段と同等の機能を有する。

【００１１】演奏情報記憶部２０は前記演奏者ｉが楽譜
Ｍを演奏したときの楽器操作情報を受け、それに時間情
報を付加して演奏情報Ｍ（ｉ）として記憶する。前記時
間情報は直前の操作情報（イベント）からの時間間隔と
し、ミリ秒（ｍｓ）の分解能を持たせた。この時間情報
の管理方式は通常のシーケンサ（演奏情報記憶再生装
置）がテンポを基準として４分音符の１／２４分解能程
度と定義しているのに比べると無駄が多いように感じる
が、本願では演奏者が演奏途中のテンポ変更にも追従で
きることを考慮してこの方法とした。

【００１２】上記演奏情報を表現するにおいて、演奏者
ｊが楽譜Ｍを演奏したときの演奏情報はＭ（ｊ）、演奏
者ｋが楽譜Ｎを演奏したときの演奏情報はＮ（ｋ）と現
わす。

【００１３】

【表１】表１は演奏情報記憶部２０に記憶される演奏情報Ｍ
（ｉ）の記憶形式を示す。演奏情報Ｍ（ｉ）は前述如く
基本的に（時間情報＋ＭＩＤＩコード）で構成されてお
り、詳しくは直前の操作から今回の操作までの相対時間
（デルタタイム）とその操作子情報と操作量（操作スピ
ード）との組合せになっている。また相対時間（デルタ
タイム）は１バイトで０〜２５５ミリ秒しか計測できな
いので、操作と操作の間に長い時間があった場合は相対
時間情報を特別に引き伸ばすための時間継続情報を利用
する。更にこの演奏情報Ｍ（ｉ）は楽譜上の「リピー
ト」という情報を持たないので、リピートの際にはほと
んど同じＭＩＤＩコード群が繰返して検出記憶される。

【００１４】自動演奏ピアノによる演奏情報の場合、表
１はキーオン情報（イニシャルタッチを含む）、キーオ
フ情報、フットＳＷ情報、時間継続情報、終了情報の５
種類でよい。フットＳＷ情報に関してはダンパーペダル
のようにオン／オフ２段階のものとハーフペダルのよう
に多数の段階を取るものがある。

【００１５】電子楽器による演奏情報の場合、表１は上
記５種類の情報以外にＡＦタッチ（アフタータッチ）情
報、音色情報、音量情報、効果情報（ビブラート、サス
テイン、チューン等）、音響情報（リバーブ、パンニン
グ等）を必要とする。

【００１６】楽譜情報記憶部３０は楽譜上に表示される
音符や各種記号を記憶する。この楽譜情報記憶部３０に
は複数の曲目が記憶可能であるが、図１においては楽譜
情報記憶部３０から曲目Ｍが読み出されるところであ
る。

【００１７】

【表２】表２は楽譜情報記憶部３０に記憶されている楽譜情報Ｍ
の記憶形式を示す。楽譜情報Ｍは（楽譜上の時間的位置
情報＋符号コード）で構成されており、詳しくは小節の
頭からの時間を４分音符の１／２４の分解能で示す時間
情報（ステップタイム）と楽譜上の音符または記号の組
合せになっている。そのため小節の時間的な位置をを示
す情報も用意されている。

【００１８】上記楽譜情報Ｍは初期情報として同時に演
奏されるべき４つの五線符のスタートアドレス、ト音／
へ音記号、調コード、拍子コード、速度記号を記憶す
る。上記五線符のスタートアドレスを４つ用意したの
は、演奏を同時に開始する複数パートは別々の記憶位置
に独立して記憶するようにしたためである。勿諭その数
は４つに限定されるものではない。

【００１９】また上記楽譜情報Ｍは初期情報以外にメイ
ン情報として音符情報（音符に付随する情報も含む）、
強弱情報、速度情報、リピート情報、小節情報、終了情
報を有し、特に前記演奏情報と違い「リピート」情報が
存在するのでリピート演奏の情報は１箇所にしか記憶し
ていない。

【００２０】特徴データ抽出部４０はＣＰＵまたはＤＳ
Ｐを中心にＲＯＭ、ＲＡＭを使用して構成され、前記演
奏者ｉが楽譜Ｍを演奏したときの演奏情報Ｍ（ｉ）とそ
の演奏曲目の元となる楽譜情報Ｍとを読み取り、それら
の相関を調べて演奏者の演奏上の個性を特徴データ
（ｉ）として抽出する。この特徴データ（ｉ）を抽出す
るのには楽譜情報を次の４つに分類してそれぞれの分野
での演奏方法を比べる。第１：音符記号または音符に付随した記号に関する演奏第２：速度記号に関する演奏第３：強弱記号に関する演奏第４：曲全体の流れに関する演奏

【００２１】特徴データ記憶部５０は前記演奏者ｉの演
奏上の個性を特徴データ（ｉ）としてＩＣカード、磁気
ディスク、光ディスク等の外部記憶装置に記憶するもの
である。ちなみに演奏者ｊの演奏情報から抽出した特徴
データは（ｊ）、演奏者ｋの演奏情報から抽出した特徴
データは（ｋ）と表す。

【００２２】上述の演奏情報記憶部２０、楽譜情報記憶
部３０、待徴データ記憶部５０はいずれも記憶装置であ
り、読み書き自由な記憶装置ならば何でも可能である
が、これら全てを一括して磁気ディスクや光ディスクの
ような大容量で持ち運び可能な装置で代用するのが望ま
しい。なぜなら演奏情報Ｍ（ｉ）は楽譜情報Ｍと同時に
読み出す必要はなく、必要なだけ時分割で読み出して特
徴データ抽出部５０内部のＲＡＭ（ＲＡＭＰ，ＲＡＭ
Ｓ）に一時格納しておけばいい。また抽出された特徴デ
ータは内部のＲＡＭ（ＲＡＭＣ）に一時格納されるが、
時間を見計らって共通の記憶装置の特徴データ記憶エリ
アに書込めばいい。

【００２３】第２に楽器演奏者の特徴再生装置ＤＥＣを
説明する。特徴データ記憶部５０は前述の如く演奏者ｉ
の演奏上の個性を特徴データ（ｉ）として外部記憶装置
に記憶するものである。図１において特徴データ記憶部
５０が二重に描かれているのは特徴抽出装置ＥＮＣと特
徴再生装置ＤＥＣとに分割可能なことを意味する。

【００２４】楽譜情報記憶部６０は前述の楽譜情報記憶
部３０と機能的に同じである。よって特徴抽出装置ＥＮ
Ｃと特徴再生装置ＤＥＣが一つにまとめられるのであれ
ば楽譜情報記憶部３０と６０のいずれかを削除できる。
この楽譜情報記憶部６０から読み出すのは楽譜Ｍ以外の
楽譜Ｎであることが多い。勿論楽譜Ｍを読み出すことも
可能である。

【００２５】楽譜情報補正部７０はＣＰＵまたはＤＳＰ
を中心にＲＯＭ、ＲＡＭを使用して構成され、前記楽譜
情報記憶部６０から読み出した楽譜情報Ｎを前記演奏者
ｉの特徴データ（ｉ）で補正することにより、あたかも
演奏者ｉが楽譜Ｎを演奏したような演奏情報Ｎ（ｉ）を
作成する。演奏情報Ｎ（ｉ）は前述のように（時間情報
＋ＭＩＤＩコード）である。この時間情報は前述のよう
にミリ秒（ｍｓ）分解能をもつ。

【００２６】この楽譜情報補正部７０は演奏情報を作成
するにあたり４段階の処理を行なっている。第１段階で
は楽譜情報Ｎの速度記号と特徴データ（ｉ）の速度記号
に関するチェック及び曲全体の流れに対するチェック結
果に基づき曲全体のテンポシーケンスを作成する。第２
段階では楽譜情報Ｎの強弱記号と特徴データ（ｉ）の強
弱記号に関するチェック及び曲全体の流れに対するチェ
ック結果に基づき曲全体のタッチシーケンスを作成す
る。第３段階では楽譜情報Ｎの音符記号または音符に付
随した記号と特徴データ（ｉ）の音符に関するチェック
結果に基づき曲全体の音符シーケンスを作成する。第４
段階では上記テンポシーケンス、タッチシーケンス、音
符シーケンスをまとめて１つの演奏情報Ｎ（ｉ）を作成
する。

【００２７】この楽譜情報補正部７０の構成は特徴デー
タ抽出部４０と同じくＣＰＵを中心としたものである。
よって特徴抽出装置ＥＮＣと特徴再生装置ＤＥＣが一つ
にまとめられるのであれば１つのＣＰＵを共用すること
ができる。

【００２８】演奏情報記億部８０は演奏者ｉが楽譜Ｎを
演奏したような演奏情報Ｎ（ｉ）を記憶する。その記憶
された演奏情報Ｎ（ｉ）は表１の形式である。その後、
演奏情報Ｎ（ｉ）は指定されたテンポに合わせて逐次読
み出されて後述の楽器制御部に楽器操作情報として転送
される。これらの記憶並びに転送は楽譜情報補正部７０
のＣＰＵが行なう。前記楽器操作情報はＭＩＤＩ規格に
準じている。

【００２９】楽器制御部９０は前記楽器操作情報を受け
取り、付属する電子的楽音発生回路又はピアノ等の自然
楽器を駆動して発音する。この楽器制御部９０は市販の
電子楽器または市販の自動演奏ピアノで賄うことができ
る。従って、そこに内在する各種の機能例えば「演奏情
報の記憶／読出」、「発音チャンネルの割当て」、「楽
音発生回路」、「時間計測カウンタの割当て」、「鍵に
対応したソレノイドの駆動」は説明を省略する。

【００３０】表３，表４，表５，表６は特徴データを抽
出する際の各種のチェック項目並びにその抽出された特
徴データの記憶内容を示している。この特徴データは楽
譜情報に基づいた分類により大きく４つに分けられ、そ
れらが各表３〜６となっている。

【００３１】

【表３】表３は音符記号または音符に付随した記号に対する演奏
をチェックして抽出作成される特微データであり２つの
グループからなる。第１グループとして１６分音符〜２
分音符と３連符に代表される音符の連続打鍵があり、そ
の操作タイミング（押鍵タイミングや押鍵から離鍵まで
の時間）と操作タッチ（イニシャルタッチ／アフタータ
ッチ等）の各平均的データを抽出する。これは各音符単
位の演奏情報よりも連続する音符の演奏情報の方が演奏
者の特徴を現わすからである。第２グループとして音符
に付随するスタカート記号、アクセント記号、Ｐｅｄ．
（ペダル）記号、タイ記号、スラー記号があり、その操
作タイミングや操作タッチの各平均的データを抽出す
る。Ｐｅｄ．（ペダル）記号とはダンパーのオン／オフ
を指示する記号である。

【００３２】

【表４】表４は速度記号に関する演奏をチェックして抽出作成さ
れる特徴データであり２つのグループからなる。第１の
グループとしてアダージョ〜プレストに代表される演奏
テンポを瞬時に変化させる記号があり、操作テンポ（押
鍵から押鍵までの時間）の各平均的データを抽出する。
第２のグループとしてリタルダンドやアチェレランドに
代表される演奏テンポを徐々に変化させる記号があり、
その操作テンポデータの変化幅を抽出する。

【００３３】

【表５】表５は強弱記号に関する演奏をチェックして抽出作成さ
れる特徴データであり２つのグループからなる。第１の
グループとしてピアニシモ〜フォルテシモに代表される
強弱を瞬時に変化させる記号があり、その操作タッチ
（イニシャルタッチ／アフタータッチ等）の平均的デー
タを抽出する。第２のグループとしてクレシェンド、デ
クレシェンドに代表される強弱を徐々に変化させる記号
があり、その操作タッチデータの変化幅を抽出する。

【００３４】

【表６】表６は曲全体の流れに関する演奏をチェックして抽出作
成される特徴データである。これらは曲の最初部分の演
奏、リピート部分の１回目演奏、リピート部分の２回目
演奏、曲の最後部分の演奏の４部分に対して、操作テン
ポ、操作タッチの各平均的データを抽出する。この抽出
においては楽譜情報の対応部分の速度記号や強弱記号に
対して何パーセントくらいずれているのか、またそのず
れの方向はどちらか（速い／遅い、強い／弱い）を抽出
して特徴データとする。

【００３５】図２に特徴データ抽出部４０のＣＰＵが特
徴データを抽出するルーチンを示す。ステップ１００に
て特徴データを格納する内部ＲＡＭのＲＡＭＣエリアを
クリアする。これにより全レジスタＲＥＧ＋０〜３３が
クリアされ、特徴データは全て「前例なし」の状態とな
る。演奏情報が少ないときにはこの「前例なし」のとこ
ろが多くなってしまうので注意する必要がある。

【００３６】ステップ１０１にて演奏情報記憶部２０か
ら演奏情報Ｍ（ｉ）を読みだして内部ＲＡＭのＲＡＭＰ
エリアに記憶する。また、ステップ１０２にて楽譜情報
記憶部３０から楽譜情報Ｍを読みだして内部ＲＡＭのＲ
ＡＭＳエリアに記憶する。これは内部ＲＡＭの方が高速
にアクセスできるためである。特徴抽出を高速に行なう
必要がなければそれぞれの記憶部から随時読みだしても
よい。

【００３７】ステップ１０３にて特徴データをアクセス
するアドレスポインタＰＮＴを最初の特徴データ格納レ
ジスタＲＥＧ＋０に設定する。この格納レジスタ３４個
は全て連続する番地になつている。

【００３８】ステップ１０４にてポインタＰＮＴの指定
するチェック項目に対応する音符連続パターンをＲＡＭ
Ｓ（楽譜情報）の中から探す。ステップ１０５にて対応
する音符連続パターシがなければステップ１０８にジャ
ンプする。あればステップ１０６に進みＲＡＭＰ（演奏
情報）の中から対応する箇所を検出する。ステップ１０
７にてその検出された部分の操作タイミングと操作タッ
チを読みだし、特徴データとしてポインタＰＮＴの指定
するレジスタに格納する。同じパターンが複数箇所にあ
る場合はそれらの操作タイミングの平均を算出して格納
する。

【００３９】ステップ１０８にてポインタＰＮＴの内容
を＋１する。ステップ１０９にてポインタＰＮＴがＲＥ
Ｇ＋９以上か調べる。ポインタＰＮＴがＲＥＧ＋９に達
していなければステップ１０４に戻るが、ＲＥＧ＋９に
達すれば次のステップ１１０へ進む。ここまでで音符の
連続パターンに対する特徴抽出を完了したことになる。

【００４０】ステップ１１０にてポインタＰＮＴの指定
するチェック項目に対応する音符付随記号をＲＡＭＳ
（楽譜情報）の中から探す。ステップ１１１にて対応す
る音符付随記号がなければステップ１１４にジャンプす
る。あればステップ１１２に進みＲＡＭＰ（演奏情報）
の中から対応する箇所を検出する。ステップ１１３にて
その検出された部分の操作タイミングと操作タッチを読
みだし、特徴データとしてポインタＰＮＴの指定するレ
ジスタに格納する。

【００４１】ステップ１１４にてポインタＰＮＴの内容
を＋１する。ステップ１１５にてポインタＰＮＴがＲＥ
Ｇ＋１４以上か調べる。ポインタＰＮＴがＲＥＧ＋１４
に達していなければステップ１１０に戻るが、ＲＥＧ＋
１４に達すれば次のステップ１１６へ進む。ここまでで
音符に付随する記号に対する特徴抽出を完了したことに
なる。

【００４２】ステップ１１６にてポインタＰＮＴの指定
するチェック項目に対応する速度記号をＲＡＭＳ（楽譜
情報）の中から探す。ここでの速度記号とはａｄａｇｉ
ｏ，ａｎｄａｎｔｅ，ｍｏｄｅｒａｔｏ，ａｌｌｅｇｒ
ｏ，Ｐｒｅｓｔｏのいずれかを意味する。ステップ１１
７にて対応する速度記号がなければステップ１２０にジ
ャンプする。あればステップ１１８に進みＲＡＭＰ（演
奏情報）の中から対応する箇所を検出する。ステップ１
２１にてその検出された部分の操作テンポを読みだし、
特徴データとしてポインタＰＮＴの指定するレジスタ
（ＲＥＧ＋Ｎ）に格納する。

【００４３】ステップ１２０にてポインタＰＮＴの内容
を＋１する。ステップ１２１にてポインタＰＮＴがＲＥ
Ｇ＋１９以上か調ベる。ポインタＰＮＴがＲＥＧ＋１９
に達していなければステップ１１６に戻るが、ＲＥＧ＋
１９に達すれば次のステップ１２２へ進む。ここまでで
即時変化を要求する強弱記号に対する特徴抽出を完了し
たことになる。

【００４４】ステップ１２２にてポインタＰＮＴの指定
するチェック項目に対応する速度記号をＲＡＭＳ（楽譜
情報）の中から探す。ここでの速度記号とはｒｉｔ．，
ａｃｃｅｌ．，ａｔｅｍｐｏのいずれかを意味する。
ステップ１２あにて対応する速度記号がなければステッ
プ１２６にジャンプする。あればステップ１２４に進み
ＲＡＭＰ（演奏情報）の中から対応する箇所を検出す
る。ステップ１２５にてその検出された部分の最初（例
えばｒｉｔ．の開始）の操作テンポと最後（ｒｉｔ．の
終了）の操作テンポとの変化幅（差分）を算出し、特徴
データとしてポインタＰＮＴの指定するレジスタに格納
する。

【００４５】ステップ１２６にてポインタＰＮＴの内容
を＋１する。ステップ１２７にてポインタＰＮＴがＲＥ
Ｇ＋２２以上か調べる。ポインタＰＮＴがＲＥＧ＋２２
に達していなければステップ１２２に戻るが、ＲＥＧ＋
２２に達すれば次のステップ１２８へ進む。ここまでで
なめらかな変化を要求する速度記号に対する特徴抽出を
完了したことになる。

【００４６】ステップ１２８にてポインタＰＮＴの指定
するチェック項目に対応する強弱記号をＲＡＭＳ（楽譜
情報）の中から探す。ここでの強弱記号とはｐｐ，ｐ，
ｍｐ，ｍｆ，ｆ，ｆｆのうちいずれかを意味する。ステ
ップ１２９にて対応する強弱記号がなければステップ１
３２にジャンプする。あればステップ１３０に進みＲＡ
ＭＰ（演奏情報）の中から対応する箇所を検出する。ス
テップ１３１にてその検出された部分の操作タッチを読
みだし、特微データとしてポインタＰＮＴの指定するレ
ジスタに格納する。

【００４７】ステップ１３２にてポインタＰＮＴの内容
を＋１する。ステップ１３３にてポインタＰＮＴがＲＥ
Ｇ＋２８以上か調べる。ポインタＰＮＴがＲＥＧ＋２８
に達していなければステップ１２８に戻るが、ＲＥＧ＋
２８に達すれば次のステップ１３４へ進む。ここまでで
即時変化を要求する強弱記号に対する特徴抽出を完了し
たことになる。

【００４８】ステップ１３４にてポインタＰＮＴの指定
するチェック項目に対応する強弱記号をＲＡＭＳ（楽譜
情報）の中から探す。ここでの強弱記号とはクレシェン
ド、デクレシェンドのうちいずれかを意味する。ステッ
プ１３５にて対応する強弱記号がなければステップ１３
８にジャンプする。あればステップ１３６に進みＲＡＭ
Ｐ（演奏情報）の中から対応する箇所を検出する。ステ
ップ１３７にてその検出された部分の最初（例えばクレ
ッシェンド開始）の操作タッチと最後（クレッシェンド
終了）の操作タッチからタッチの変化幅を算出し、特徴
データとしてポインタＰＮＴの指定するレジスタに格納
する。

【００４９】ステップ１３８にてポインタＰＮＴの内容
を＋１する。ステップ１３９にてポインタＰＮＴがＲＥ
Ｇ＋３０以上か調べる。ポインタＰＮＴがＲＥＧ＋３０
に達していなければステップ１３４に戻るが、ＲＥＧ＋
３０に達すれば次のステップ１４０へ進む。ここまでで
なめらかな変化を要求する強弱記号に対する特徴抽出を
完了したことになる。

【００５０】ステップ１４０にてＲＡＭＳ（楽譜情報）
の曲の最初の４小節に対応するＲＡＭＰ（演奏情報）を
検出する。ステップ１４２にてその部分における操作タ
ッチを読み出すと同時に操作テンポを算出し、特徴デー
タとしてポインタＰＮＴの指定するレジスタに格納す
る。ステップ１４３にてポインタＰＮＴの内容を＋１す
る。操作タッチに関しては複数の押鍵の平均的な強さを
求め、操作テンポに関しては前記４小節を演奏するのに
掛かった時間から逆算して得る。

【００５１】ステップ１４３にてＲＡＭＳ（楽譜情報）
のリピート部分の１回目演奏の最初の４小節に対応する
ＭＥＭＰ（演奏情報）を検出する。ステップ１４４にて
その部分における操作タッチと操作テンポを算出し、特
徴データとしてポインタＰＮＴの指定するレジスタに格
納する。ステップ１４５にてポインタＰＮＴの内容を＋
１する。

【００５２】ステップ１４６にてＲＡＭＳ（楽譜情報）
のリピート部分の２回目演奏の最初の４小節に対応する
ＲＡＭＰ（演奏情報）を検出する。ステップ１４７にて
その部分における操作タッチと操作テンポを算出し、特
徴データとしてポインタＰＮＴの指定するレジスタに格
納する。ステップ１４８にてポインタＰＮＴの内容を＋
１する。

【００５３】ステップ１４９にてＲＡＭＳ（楽譜情報）
の曲の最後の４小節に対応するＲＡＭＰ（演奏情報）を
検出する。ステップ１５０にてその部分における操作タ
ッチと操作テンポを算出し、特徴データとしてポインタ
ＰＮＴの指定するレジスタに格納する。以上のステップ
１４０〜１５０にて曲全体の流れに対する特徴抽出を終
了したことになる。

【００５４】ステップ１５１にて上記抽出した特徴デー
タが格納されているＲＡＭＣ（ＲＥＧ＋０〜３３）の内
容を特徴データ記憶部５０に転送記憶する。

【００５５】図３に楽譜情報補正部７０のＣＰＵが演奏
情報を作成するルーチンを示す。ステップ２００にて特
徴データ記憶部５０から読みだした特徴データを内部Ｒ
ＡＭのＲＡＭＣエリアに格納する。ステップ２０１にて
演奏情報を記憶する内部ＲＡＭのＲＡＭＰエリアをクリ
アする。ステップ２０２にて楽譜情報記憶部６０から読
みだした楽譜情報Ｎを内部ＲＡＭのＲＡＭＳエリアに格
納する。

【００５６】ステップ２０３にてＲＡＭＳ（楽譜情報
Ｎ）の速度記号とＲＡＭＣ（特徴データ（ｉ））の速度
記号に関するチェック（ＲＥＧ＋１４〜２１）の結果に
基づき曲全体のテンポシーケンスを作成する。

【００５７】例えばＲＡＭＳ（楽譜情報Ｎ）に「ａｎｄ
ａｎｔｅ」の記号があれば、ＲＡＭＣ（特徴データ
（ｉ））のＲＥＧ＋１５の内容を参照してそのときの演
奏者ｉの使用するであろうテンポ数値を読み出す。ま
た、ＲＡＭＳ（楽譜情報Ｎ）に「ｒｉｔ．」の記号があ
れば、ＲＡＭＣ（特徴データ（ｉ））のＲＥＧ＋１９の
内容を参照して一定の遅いテンポに安定するまでの到達
時間とテンポの変化幅を読み出す。

【００５８】

【表７】このテンポシーケンスは表７のようにして記憶される。
それはテンポが変化した時間を特定する小節の頭からの
４分音符の１／９６の分解能によるステップタイムと変
化したテンポデータである。この４分音符の１／９６と
いう分解能は表２の楽譜情報の分解能に比べて４倍の制
度としている。これは音符としては表現できない程度の
微妙な演奏技術を特徴データとして記憶するためであ
る。そのため全音符の継続時間を１バイトで表現できな
くなり、小節情報の中に本当の小節の頭（小節継続情報
＝００ｈ）と小節の頭から２分音符分進んだ時間（小節
継続情報＝０１ｈ）とを分離表現できるようになってい
る。また、この記憶方式は操作上の変化を検出記憶する
のでなめらかな変化をする「ｒｉｔ．」や「ａｃｃｅ
ｌ．」等に関しては多数のテンポデータを続けて記憶す
ることになる。

【００５９】ステップ２０４にて上記作成したテンポシ
ーケンスをＲＡＭＣ（特徴データ（ｉ））の曲全体の流
れに対するチェック（ＲＥＧ＋３０〜３３）の結果に基
づき補正する。ここでの補正は各部分（曲の先頭部分、
リピート部分の１回目、リピート部分の２回目、曲の最
後部分）のテンポ情報を特徴データに記憶された内容に
基づき何パーセント分か速くまたは遅くする作業であ
る。

【００６０】ステップ２０５にてＲＡＭＳ（楽譜情報
Ｎ）の強弱記号とＲＡＭＣ（特徴データ（ｉ））の強弱
記号に関するチェック（ＲＥＧ＋２２〜２９）の結果に
基づき曲全体のタッチシーケンスを作成する。

【００６１】例えばＲＡＭＳ（楽譜情報Ｎ）に「ｍｐ」
の記号があれば、ＲＡＭＣ（特徴データ（ｉ））のＲＥ
Ｇ＋２４の内容を参照してそのときの演奏者ｉの使用す
るであろうタッチ数値を読み出す。また、ＲＡＭＳ（楽
譜情報Ｎ）に「クレシェンド」の記号があれば、ＲＡＭ
Ｃ（特徴データ（ｉ））のＲＥＧ＋１３の内容を参照し
て一定の強いタッチに安定するまでの到達時間とタッチ
の変化幅を読み出す。

【００６２】このタッチシーケンスはテンポシーケンス
と同じく表７のようにして記憶される。それはタッチが
変化した時間を特定するための小節からの４分音符の１
／９６の分解能によるステップタイムと変化したタッチ
数値である。したがってなめらかな変化をする「クレシ
ェンド」や「デクレシェンド」に関しては続けて多数の
タッチデータを記憶することになる。

【００６３】ステップ２０６にて上記作成したタッチシ
ーケンスをＲＡＭＣ（特徴データ（ｉ））の曲全体の流
れに対するチェック（ＲＥＧ＋３０〜３３）の結果に基
づき補正する。ここでの補正は各部分（曲の先頭部分、
リビート部分の１回目、リピート部分の２回目、曲の最
後部分）のテンポ情報を特徴データに記憶された内容に
基づき何パーセント分か強くまたは弱くする作業であ
る。

【００６４】ステップ２０７にてＲＡＭＳ（楽譜情報
Ｎ）の音符または音符に付随した記号とＲＡＭＣ（特徴
データ（ｉ））の音符記号関するチェック（ＲＥＧ＋０
〜８）の結果に基づき曲全体の音符シーケンスを作成す
る。

【００６５】この音符シーケンスの作成は、例えばＲＡ
ＭＳ（楽譜情報Ｎ）に「８分音符＋１６分音符」の記号
があれば、ＲＡＭＣ（特徴データ（ｉ））のＲＥＧ＋２
の内容を参照してそのときの演奏者ｉの使用するであろ
うタイミング（押鍵／離鍵時間）とタッチデータを読み
出してシーケンス上に記憶する。

【００６６】ステップ２０８にて上記音符シーケンスを
音符に付随した記号にて補正する。例えばＲＡＭＳ（楽
譜情報Ｎ）に「スラー」の記号があれば、ＲＡＭＣ（特
徴データ（ｉ））のＲＥＧ＋１３の内容を参照して、上
記音符シーケンスの対応する部分のタイミングとタッチ
を補正する。

【００６７】

【表８】表８は音符シーケンスの記憶形式を示し、それは音符が
変化した時間を特定する小節の頭からの４分音符の１／
９６の分解能によるステップタイムと変化した音符デー
タである。自動演奏ピアノによる演奏の場合には音符情
報（ゲートタイム）、フットＳＷ情報、小節情報、終了
情報で済む。電子楽器による演奏の場合にはその他にア
フタータッチ情報、音色情報、音量情報、効果情報、音
響情報等の情報が必要であり、それらに関するシーケン
スもこのときに作成する。

【００６８】ステップ２０９にて上記テンポシーケン
ス、タッチシーケンス、音符シーケンスの３つから演奏
情報Ｎ（ｉ）を作成する。このステップ２０９は新たに
作成した演奏情報Ｎ（ｉ）を表１に示す最初に記憶した
演奏情報Ｍ（ｉ）と同じ形式にするための処理である。

【００６９】表１の演奏情報Ｍ（ｉ）の記憶形式と表７
（テンポ／タッチシーケンス）や表８（音符シーケン
ス）の記憶形式との主な違いは時間情報の管理にある。
表１では先の変化からの時間を演奏テンポとは無関係な
ｍｓ（ミリ秒）単位で計測しているのに対し、表７や表
８では小節の頭からの時間を演奏テンポに基づく４分音
符の１／９６の分解能で計測している。従ってステップ
２０９の処理は主に時間情報の変換である。

【００７０】再生のみを考慮するならば、上記テンポシ
ーケンスとタッチシーケンスと音符シーケンスの独立し
たままで演奏情報Ｎ（ｉ）とすることも可能である。な
ぜならば現在の電子楽器用シーケンサにおいてもテンポ
シーケンスと音符シーケンスが別であることは周知の事
実であり、これにタッチシーケンスから出力されるタッ
チ量の変化をタッチセンスデータとして出力すれば済む
からである。

【００７１】ここで、本願発明をより具体的に説明する
ために三連符に関する楽譜情報と演奏情報の違いを取り
上げる。

【表９】表９は楽譜上に記憶された４分音符の三連符をそのまま
演奏情報化したデータとその三連符を２人の演奏者がそ
れぞれ演奏した例１，２を示している。ステップタイム
の分解能が４分音符の１／９６なので、各音符が使用す
る時間は理想的には９６ｃｋ／３で３２ｃｋとなる。そ
の３２ｃｋを更に鍵が操作されている時間（オンタイ
ム）と離されている時間（オフタイム）との比率３対１
で分割すれば表９の左端に記入されたようなデルタタイ
ム列（２４，８，２４，８，２４，８）となる。

【００７２】ところが実際の演奏ではそのタイミングが
ずれており、例えば演奏情報の例１は三連符の真中の音
符の長さが長めに演奏されたものである。このときの三
連符の３つめの音符は理論上の押鍵タイミングよりも遅
れている。

【００７３】演奏情報の例２は三連符の最初の音符の長
さが長めに演奏されたものである。このときの三連符の
２つめと３つめの音符は理論上の押鍵タイミングよりも
遅れている。

【００７４】また、実際の演奏では三連符の各音符の演
奏（押鍵）タイミングの合計は理論上のタイミングから
ずれており通常は三連符の合計の方が長くなる。このず
れも演奏者によって異なり演奏の特徴の一つになってい
る。

【００７５】更に、三連符の箇所を強調しようと三連符
の前後の音符よりも強く演奏する演奏者もあるし、三連
符中の特定の音符を意識的に強く演奏する演奏者もあ
る。従って上記のような押鍵時間だけでなくその演奏さ
れた音符に対する操作タッチ（イニシャル／アフター）
の違いが特徴となる。

【００７６】加えて、上記三連符に関して、同じ押鍵タ
イミングであつても押鍵から離鍵までの鍵を押している
時間の違いによって演奏上の効果も変わってくる。スタ
ッカート気味に演奏された場合は押鍵から離鍵までの時
間は比較的短かくなり、テヌート気味に演奏された場合
は押鍵から離鍵までの時間は比較的長くなる。

【００７７】本願発明は上記実施例に限定されず、本願
発明の趣旨を逸脱しない範囲で変更可能である。例えば
特徴データの記憶形式も例えば楽譜上の連続する音符を
中心にしたチェックでなく単独の音符に対する演奏者の
特徴を抽出することも可能である。更に本願では一つの
楽譜情報Ｍに関する特徴抽出のみで特徴データを作成し
たが、複数の楽譜演奏情報を使用することによりさらに
詳細なジャンル別の特徴抽出を行なうことも化膿であ
る。

【発明の効果】

【００７２】以上詳述したように、本願発明の楽器演奏
者の特徴抽出装置は演奏者が演奏したことのない曲目で
もその演奏者が以前に演奏した曲から抽出記憶された特
徴データで楽譜情報を補正することにより、演奏者の演
奏上の個性を模倣し、聴衆に自然で繊細な音楽を与える
ことができる。

【図面の簡単な説明】

【図１】本願発明のブロック図である。

【図２】特徴データ抽出部の流れ図である。

【図３】楽譜情報補正部の流れ図である。

【符号の説明】

１０演奏情報検出部２０演奏情報記憶部３０楽譜情報記憶部４０特徴データ抽出部５０特徴データ記憶部６０楽譜情報記憶部７０楽譜情報補正部８０演奏情報記憶部９０楽器制御部

Claims

【特許請求の範囲】

【請求項１】演奏者が楽器を演奏した情報を記憶する演
奏情報記憶手段と、前記演奏の楽譜情報を記憶する楽譜情報記憶手段と、前記演奏情報と前記楽譜情報から特徴データを抽出する
特徴データ抽出手段と、前記特徴データを記憶する特徴データ記憶手段とを具
え、演奏者の演奏上の個性を抽出記憶することを特徴とする
楽器演奏者の特徴抽出装置。
【請求項２】前記特徴データは楽譜上の各種記号に対す
る演奏者の操作タイミング、操作テンポ、操作タッチの
うち少なくとも１つを含むことを特徴とする請求項１記
載の楽器演奏者の特徴抽出装置。
【請求項３】前記特徴データは曲全体の流れに対する演
奏者の操作テンポ、操作タッチのうち少なくとも１つを
含むこと特徴とする請求項１記載の楽器演奏者の特徴抽
出装置。
【請求項４】楽譜情報を記憶する楽譜情報記憶手段と、演奏者の演奏上の個性を特徴データとして記憶した特徴
データ記憶手段と、前記特徴データに基づき前記楽譜情報を補正する楽譜情
報補正手段とを具え、演奏者の演奏上の個性を模倣した楽器演奏を再生可能と
することを特徴とする楽器演奏者の特徴再生装置。
【請求項５】前記特徴データは楽譜上の各種記号に対す
る演奏者の操作タイミング、操作テンポ、操作タッチの
うち少なくとも１つを含むことを特徴とする請求項４記
載の楽器演奏者の特徴再生装置。
【請求項６】前記特徴データは曲全体の流れに対する演
奏者の操作テンポ、操作タッチのうち少なくとも１つを
含むこと特徴とする請求項４記載の楽器演奏者の特徴再
生装置。