JP2001083969A - 再生制御装置と媒体 - Google Patents

Abstract

(57)【要約】 【課題】 オーディオデータの再生テンポを自由に変更
することの可能なオーディオデータの再生制御装置又は
プログラムを記録した媒体を提供する。 【解決手段】 オーディオデータ及び所定タイミング毎
のタイミングデータを記憶する記憶手段と、所定タイミ
ング毎のタイミング信号を入力するタイミング信号入力
手段と、前記オーディオデータ及び所定タイミング毎の
タイミングデータを読み出す読み出し手段と、前記入力
されたタイミング信号と前記読み出されたタイミングデ
ータを比較する比較手段と、前記比較結果に応じて、ピ
ッチを変えずにオーディオデータの再生テンポを制御す
る制御手段とを有する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、オーディオデータ
の再生テンポを自由に変更することの可能なオーディオ
データの再生制御装置に関する。

【０００２】

【従来の技術】サンプラー等の電子楽器や楽音信号処理
装置では、タイムストレッチ処理により、楽音のピッチ
を変化させずに楽音信号波形の時間軸の圧縮又は伸張を
行い、楽音信号の再生時間を変えることが行われてい
る。

【０００３】タイムストレッチは、音声信号を間引いた
り補間する事により、ピッチを変化させずに時間軸を圧
縮したり伸縮したりする処理である。再生時間を短くす
るには、音声信号の間引きを行い、長くするには音声信
号を補間する。

【０００４】サンプラー等の電子楽器や楽音信号処理装
置は、一曲のデータを再生する用途のものではないため
に、基本的に、テンポ情報であるタイミングデータを持
っていない。このため、一曲の再生を制御する目的での
使用は困難である。

【０００５】また、一曲のオーディオデータの再生テン
ポを変化させることの可能なオーディオデータの再生制
御装置に関して、２チャンネルテープの一方のチャンネ
ルにオーディオデータを、他方のチャンネルにオーディ
オデータの速度に関連したテンポ信号を録音し、このテ
ンポ信号と、ユーザからの所定の間隔で入力されるタッ
チ信号とを比較しテープの再生速度を制御する技術が特
開昭５５−６７９６７号に開示されている。

【０００６】

【発明が解決しようとする課題】従来のオーディオデー
タ再生制御装置のように単純に再生速度を変えると、そ
れに応じて、ピッチが変わってしまい、録音時のピッチ
と異なるものになってしまう。また、一度入力した、テ
ンポ情報を次回再生時に再現することが求められる。さ
らに、また、テンポ変化等が記載されている楽譜を認識
して、その認識結果に基づいて、再生テンポの制御をす
ることが求められる。また、サンプラーのように、ピッ
チを変えずに、再生速度が変えられるオーディオデータ
の再生制御装置が求められる。

【０００７】本発明の目的は、オーディオデータの再生
テンポを自由に変更することの可能なオーディオデータ
の再生制御装置を提供することである。

【０００８】また、本発明の他の目的は、一度入力し
た、テンポ情報を保存して、次回再生時に保存したテン
ポ情報と、オーディオデータと共にあらかじめ保存され
ているテンポ信号とを比較して、再生テンポの制御をす
ることの可能なオーディオデータの再生制御装置を提供
することである。

【０００９】さらに、本発明の他の目的は、テンポ変化
等が記載されている楽譜を認識して、その認識結果に基
づいて、再生テンポの制御をすることの可能なオーディ
オデータの再生制御装置を提供することである。

【００１０】

【課題を解決するための手段】本発明の一観点によれ
ば、オーディオデータ及び所定タイミング毎のタイミン
グデータを記憶する記憶手段と、所定タイミング毎のタ
イミング信号を入力するタイミング信号入力手段と、前
記オーディオデータ及び所定タイミング毎のタイミング
データを読み出す読み出し手段と、前記入力されたタイ
ミング信号と前記読み出されたタイミングデータを比較
する比較手段と、前記比較結果に応じて、ピッチを変え
ずに前記オーディオデータの再生テンポを制御する制御
手段とを有するオーディオデータの再生制御装置が提供
される。

【００１１】本発明の他の観点によれば、オーディオデ
ータ及び所定タイミング毎のタイミングデータを記憶す
る記憶手段と、記録媒体に記録された所定タイミング毎
のタイミング信号を再生するタイミング信号再生手段
と、前記オーディオデータ及び所定タイミング毎のタイ
ミングデータを読み出す読み出し手段と、前記再生され
たタイミング信号と前記読み出されたタイミングデータ
を比較する比較手段と、前記比較結果に応じて、ピッチ
を変えずにオーディオデータの再生テンポを制御する制
御手段とを有するオーディオデータの再生制御装置が提
供される。

【００１２】本発明の他の観点によれば、オーディオデ
ータ及び所定タイミング毎のタイミングデータを記憶す
る記憶手段と、楽譜画像を認識し、認識結果に基づいて
所定タイミング毎のタイミング信号を生成するタイミン
グ信号生成手段と、前記オーディオデータ及び所定タイ
ミング毎のタイミングデータを読み出す読み出し手段
と、前記再生されたタイミング信号と前記読み出された
タイミングデータを比較する比較手段と、前記比較結果
に応じて、ピッチを変えずに前記オーディオデータの再
生テンポを制御する制御手段とを有するオーディオデー
タの再生制御装置が提供される。

【００１３】

【発明の実施の形態】図１は、オーディオデータ再生制
御装置の構成を示すブロック図である。

【００１４】オーディオデータ再生制御装置１は、オー
ディオデータ記憶部２、読出／再生部７、タイミング入
力部３、タイミング記録／再生部４、楽譜画像入力部
５、楽譜認識／タイミング生成部６を有する。Ｄ／Ａ変
換部８を有していてもよい。

【００１５】オーディオデータ記憶部２は、オーディオ
データをＣＤ−ＲＯＭ等の光ディスクや、ＭＯ等の光磁
気ディスク、ハードディスク等の磁気ディスク、ＲＯＭ
やＲＡＭ等の半導体メモリ、磁気テープなどの記録媒体
に記憶する。

【００１６】また、記録媒体は、ネットワークを介し
て、ストリーム配信されたオーディオデータを一時的に
記憶したキャッシュメモリのようなものでもよい。スト
リーム配信は、一括ダウンロードが、一曲分又は複数曲
分のオーディオデータを一括して、他のコンピュータか
ら、ネットワークを介してダウンロードするのに対し
て、一部のデータを受信しだい再生するタイプのダウン
ロード形式である。キャッシュメモリを使用したストリ
ーム配信の場合、一曲分全体を一度には記憶しないが、
時間の経過を考慮すれば、結果的に一曲分を記憶したと
考えられる。

【００１７】オーディオデータ記憶部２は、デジタル形
式のオーディオデータを、一曲分又は複数曲分記憶す
る。オーディオデータは、波形データと、所定のタイミ
ング毎（例えば一拍毎や一小節毎）に、オーディオデー
タ中における該タイミングの位置を示すタイミングデー
タで構成される。タイミングデータの記憶形式について
は後述する。

【００１８】このオーディオデータ記憶部２が記憶する
オーディオデータは、あらかじめ記憶されたものでもよ
いし、外部から入力されたオーディオデータを記憶した
ものでもよい。さらに、ネットワークを介して他のコン
ピュータからダウンロードされたものでもよい。記憶さ
れるオーディオデータは、楽器演奏、歌唱など、一定の
テンポに基づいて再生されるものならどのようなもので
もよい。さらに、タイミングデータを持たないオーディ
オデータには、後述の方法でタイミングデータが付加さ
れる。

【００１９】読出／再生部７は、オーディオデータ記憶
部２に記憶されたオーディオデータを読み出して、出力
する。この出力は、デジタル形式のまま行ってもいい
し、アナログ形式に変換して行ってもよい。読出／再生
部７の構成については後述する。

【００２０】この際、オーディオデータの出力テンポ
は、タイミング入力部３、タイミング記録／再生部４、
楽譜認識／タイミング生成部６のいずれかからのタイミ
ング信号に基づいてリアルタイムに制御可能になってい
る。このとき、テンポは変化するが、ピッチは変化せず
元のままである。

【００２１】タイミング入力部３は、キーボードやマウ
ス等のスイッチ入力、加速度センサやジャイロセンサ等
を用いて演奏者（指揮者）が手で揺動操作するハンドコ
ントローラ又は指揮棒タイプの操作子（例えば特開平８
−３０５３３４の実施例に記載の操作子）の操作、指揮
等の動作を撮像しての画像認識、マイクなどによる音声
入力等に応じて所定タイミング毎（一拍毎あるいは一小
節毎）にタイミング信号を入力する。入力するタイミン
グを、例えば、一拍毎や一小節毎等、ユーザが任意に選
択できるようにしてもよい。タイミング入力部３で入力
されたタイミング信号は、タイミング記録／再生部４に
出力されるか、又は直接、読出／再生部７に出力され
る。また、何も入力されない場合に、前回までに入力さ
れたタイミング信号と同様の同期を持つタイミング信号
を自動的に生成できるようにしてもよい。

【００２２】タイミング記録／再生部４はタイミング入
力部３から入力されたタイミング信号を時系列的に、例
えば一曲分を記録媒体に記録し、後に記録されたタイミ
ング信号を読み出して、再生する。タイミング信号を記
録する記録媒体は、オーディオデータ記憶部２と同様の
ものである。

【００２３】なお、記録／再生されるタイミング信号
は、１つのオーディオデータに対応して１つに限らず、
タイミング信号は１つのオーディオデータに対応して複
数種類あってもよい。

【００２４】このようにすると、同じオーディオデータ
を異なるテンポで（テンポを変化させて）再生すること
が可能になる。また、あらかじめオーディオデータに対
応したタイミング信号が記憶されている場合は、それを
再生するだけのものでもよい。さらに、タイミング信号
列の再生テンポを、再生前又は再生中に、変更できるよ
うにしてもよい。

【００２５】オーディオデータ記憶部２及びタイミング
記録／再生部４に記録されるデータは、記録媒体上に、
時系列の連続する領域に記録されてもよいし、飛び飛び
の領域に散在して記憶して、別途連続するデータとして
管理してもよい。すなわち、時系列的に連続するデータ
として管理可能ならばよく、記録媒体上で連続して記録
されているか否かは問題ではない。

【００２６】楽譜画像入力部５は、スキャナ等により印
刷又は手書きの楽譜を読み取り、楽譜画像を作成して入
力する。又は、既に読み取られて、記録媒体に記録され
た楽譜画像を入力してもよい。なお、ここで読み取る楽
譜は、オーディオデータ記憶部２に記録されるオーディ
オデータに対応した楽譜である。入力された楽譜画像
は、楽譜認識／タイミング生成部６に出力される。

【００２７】楽譜認識／タイミング生成部６は、入力さ
れた楽譜画像を分析し、音符や各種音楽記号を、認識す
る。楽譜認識の技術は公知であり、例えば特開平６−３
３２４４３号の実施例に開示されている方法等によって
認識する。そして、認識した音楽記号のうち、拍子やテ
ンポ変化に関する音楽記号に基づいて、所定タイミング
毎（一拍毎や一小節毎）にタイミング信号を生成する。

【００２８】例えば、「テンポ＝１２０、４／４拍子」
と認識されたとすると、一拍毎にタイミング信号を生成
する場合は、０．５秒ごとにタイミング信号を生成し、
一小節毎の場合は、２秒ごとに生成する。また、テンポ
変化記号として、「Ｒｉｔ．（リタルダンド）」が認識
されたら、タイミング信号の周期を徐々に長くして行
き、「Ａｃｃ．（アッチェレランド）」が認識された
ら、タイミング信号の周期を徐々に短くしていく。その
他の拍子や、テンポ変化に関する記号についても、それ
らに対応するように、タイミング信号が生成される。こ
こで生成されたタイミング信号は、読出／再生部７に送
られる。なお、生成されたタイミング信号を、タイミン
グ記録／再生部４に出力して、記録媒体に記録してお
き、後程、読出／再生してもよい。

【００２９】Ｄ／Ａ変換部８は、読出／再生部７の出力
を、デジタルデータからアナログ信号に変換する。読出
／再生部７の出力は、このＤ／Ａ変換部８を介さずに、
デジタルデータのまま出力されてもよい。

【００３０】図２は、オーディオデータの記憶形式の例
を示す構成図である。

【００３１】オーディオデータＡＤの記憶形式として
は、波形サンプルデータＳＤとタイミングデータＴＤを
混在させて記憶する形式と、波形サンプルデータＳＤと
タイミングデータＴＤを別々に記憶して管理する形式
等、種々の形式を取ることができる。

【００３２】図２（ａ）は、波形サンプルデータＳＤと
タイミングデータＴＤを混在させて記憶するオーディオ
データＡＤの記憶形式の一例を示す構成図である。

【００３３】波形サンプルデータＳＤとタイミングデー
タＴＤを混在させる場合は、例えば、一拍毎あるいは一
小節毎のような所定のタイミングに対応した位置にタイ
ミングデータＴＤが記憶される。１つのタイミングデー
タＴＤ１と次のタイミングデータＴＤ２の間には、前記
所定のタイミング間隔分の波形サンプルデータＳＤが記
憶される。

【００３４】図２（ｂ）は、波形サンプルデータＳＤと
タイミングデータＴＤを別々に記憶して管理するオーデ
ィオデータＡＤの記憶形式の一例を示す構成図である。

【００３５】この形式の場合は、波形サンプルデータＳ
Ｄは連続して記憶される。そして、タイミングデータＴ
Ｄは、波形サンプルデータＳＤの配列とは別に、所定タ
イミング毎に、それぞれのタイミングに対応する波形サ
ンプルデータＳＤの位置情報を示すデータとして記憶さ
れる。この場合の位置情報は、所定タイミングに対応す
る波形サンプルデータＳＤの記憶アドレスやサンプル数
等である。

【００３６】図３は、オーディオ信号とタイミング信号
を同時に記録する方法の一例を表すブロック図である。
この例では、オーディオ信号の非可聴帯域にタイミング
信号を重畳的に記録する。

【００３７】図３（ａ）は、オーディオ信号の非可聴帯
域にタイミング信号を重畳的に記録する方法を表すブロ
ック図である。

【００３８】タイミング信号ＴＳは、例えば一拍や一小
節を一周期としたサイン波である。これを変調部１２ａ
に送り、非可聴帯域以下（例えば２０Ｈｚ）の変調波で
変調し、低域濾波器（ＬＰＦ）１３でノイズを除去した
後、ミキシング部１５へと供給する。

【００３９】オーディオ信号ＡＳは、高域濾波器（ＨＰ
Ｆ）１４で上記非可聴帯域以下（２０Ｈｚ以下）を除去
した後、ミキシング部１５へと供給される。

【００４０】変調されたタイミング信号ＴＳとオーディ
オ信号ＡＳは、ミキシング部１５でミキシングされ、Ａ
／Ｄ変換部１６ａでアナログ信号からデジタルデータへ
と変換される。その後、オーディオデータとして、オー
ディオデータ記憶部２にオーディオデータとして記憶さ
れる。

【００４１】図３（ｂ）は、上記方法で記録されたオー
ディオデータを再生する方法を表すブロック図である。

【００４２】オーディオデータ記憶部２に記憶されたオ
ーディオデータは、読み出されてＤ／Ａ変換部１６ｂに
送られ、Ｄ／Ａ変換されて、アナログ信号となる。その
後、ＨＰＦ１４及びＬＰＦ１３に送られる。

【００４３】ＨＰＦ１４に送られたアナログ信号は、非
可聴帯域以下（記録時の設定による。ここでは２０Ｈｚ
以下）を除去され、オーディオ信号ＡＳとして出力され
る。

【００４４】ＬＰＦ１３に送られたアナログ信号は、上
記非可聴帯域の信号のみを抽出され、復調部１２ｂに送
られる。復調部１２ｂでは、記録時に用いた周波数（２
０Ｈｚ）の信号でＬＰＦ１３により抽出された信号を復
調し、タイミング信号ＴＳとして出力する。

【００４５】波形データＳＤにタイミングデータＴＤを
付加する方式の例を以下に説明する。これは、上記いず
れの記憶形式で記憶する場合にも実施することが可能で
ある。また、波形データＳＤにタイミングデータＴＤを
付加する方式は以下のものに限られるものではない。

【００４６】（１）楽曲の音（楽器演奏や歌唱など）を
記録する際に、それを聞いている人の操作（例えばスイ
ッチ操作等）によりタイミング信号を発生させ、発生さ
せたタイミング信号をデータとして記録媒体に同時に記
録する方式。人の操作によりタイミング信号を発生させ
る方法としては、例えば実開平４−７７１９６の実施例
に開示されているテンポコントローラ等を用いることが
できる。

【００４７】（２）楽曲の音を一旦記録媒体に記録し、
それを再生する際に、それを聞いている人の操作（例え
ばスイッチ操作等）によりタイミング信号を発生させ、
発生させたタイミング信号をデータとして記録媒体に追
加記録する方式。

【００４８】（３）楽曲の音を一旦記録媒体に記録した
後、それを解析して所定のタイミングを自動的に抽出
し、抽出したタイミング信号をデータとして記録媒体に
追加記録する方式。自動抽出の仕方は、例えば、強拍と
次の強拍の間の時間間隔を計測して、テンポを計算する
等、種々のものが考えられる。

【００４９】（４）前記（１）から（３）で記録したタ
イミングデータを、人の操作により、前後に修正する方
式。例えば、タイミング信号を音に変換し、それを聞き
ながら修正する。また、例えば、楽曲の音とタイミング
信号を表示データに変換し、それを見ながら変換する
等、種々の方式による修正が可能である。

【００５０】図４は、読出／再生部７の構成を示すブロ
ック図である。

【００５１】読出／再生部７は、読み出し制御部９、比
較部１０を有し、さらにピッチ変換部１１を有していて
もよい。

【００５２】読み出し制御部９は、タイムストレッチ回
路を有し、オーディオデータ記憶部２から、オーディオ
データＡＤを読み出す。読み出したオーディオデータＡ
ＤのうちタイミングデータＴＤを比較部１０に送る。ま
た、比較部１０からの指示に従い、波形サンプルデータ
ＳＤを再生する。

【００５３】読み出し制御部９は、比較部１０からの指
示に対応して、再生速度を変えることができる。再生速
度を変化させるとピッチが変わってしまうので、波形デ
ータは、後段に配置されるピッチ変換部１１に送られ記
録時のピッチに修正される。

【００５４】再生速度を変化させない場合は、タイムス
トレッチ処理により、波形データの読み飛ばし、重複読
み出しを行う。この場合、波形データのピッチは変化し
ないので、ピッチ変換部１１を必要としないか、又は、
ピッチ変換部１１を介さずに出力される。

【００５５】比較部１０からの指示により、又は新たな
指示がない場合、次の指示があるまで、変更された再生
テンポを維持するため前回と同じ処理を繰り返す様にし
てもよいし、元のテンポに戻すため通常の読み出し／再
生を行う様にしてもよい。基本的に、新たな指示がくる
まで、処理を継続して行う。

【００５６】比較部１０は、タイミングデータＴＤを受
け取り、入力されたタイミング信号と比較する。比較結
果に従い、読み出し制御部９に対し、重複読み出し、読
み飛ばし、又は読み出し速度の変更等を指示する。ピッ
チ変換部１１に対しては、ピッチ変換を指示する。比較
部１０での処理については、後にフローチャートを用い
て説明する。

【００５７】ピッチ変換部１１は、比較部１０の指示に
従い、ピッチ変換処理によりピッチを変換し、記録時と
同じピッチにして波形データを出力する。ピッチ変換処
理は、対象となる音声信号や波形データを所定の周波数
で順次サンプリングして、サンプリングしたデータを、
ランダムアクセスメモリ（ＲＡＭ）に書き込み、読み出
しを行う際に書き込み時と異なる周波数で読出すことに
よりピッチを変える。比較部１０からの指示により、又
は新たな指示がない場合、次の指示があるまで、変更さ
れた再生ピッチを維持するため前回と同じ処理を繰り返
す様にしてもよいし、元のピッチに戻すため通常の再生
を行う様にしてもよい。

【００５８】図５は波形サンプルデータＳＤの読み出し
速度を一定にした場合の比較部１０が行う割り込み処理
を示すフローチャートである。当該割り込み処理は、タ
イマに応じた所定時間間隔で行われる。この時間間隔
は、任意に設定することができる。

【００５９】ステップＳＡ１では、タイミング信号の入
力の有無が検出される。所定時間内に入力があれば、
“ＹＥＳ”の矢印で示す次のステップＳＡ２に進む。所
定時間内に入力がなければ、“ＮＯ”の矢印で示すステ
ップＳＡ５に進む。入力がないときに、点線の矢印で示
すステップＳＡ６に進むようにしてもよい。ステップＳ
Ａ５又はステップＳＡ６のどちらに進むかは、ユーザが
適宜選択できるようにしてもよい。一度入力したテンポ
を、以降の再生にも反映させる場合は、ステップＳＡ５
に進むように選択し、入力したテンポが、一時的な変更
である場合は、ステップＳＡ６に進むようにすればよ
い。また、タイミング信号の入力がない場合は、破線で
示すように、ステップＳＡ７に進むようにしてもよい。

【００６０】ステップＳＡ２では、入力されたタイミン
グ信号と、それに対応する読み出し制御部９から送られ
てくるオーディオデータＡＤ中のタイミングデータＴＤ
が時間的に一致しているかが検出される。

【００６１】ここで、一致しているというのは、タイミ
ング信号とそれに対応するタイミングデータＴＤが同時
に比較部１０に入力された場合である。一致していない
というのは、タイミング信号とそれに対応するタイミン
グデータＴＤの一方が、時間的に他方よりも早く比較部
１０に入力されるか、遅れて入力される場合である。

【００６２】一致している場合は、“ＪＵＳＴ”の矢印
で示す次のステップＳＡ５に進む。タイミング信号が、
対応するタイミングデータＴＤに対して遅れて入力され
た場合は、“ＢＥＨＩＮＤ”の矢印で示すステップＳＡ
３に進む。タイミング信号が、対応するタイミングデー
タＴＤに対して先に入力された場合は、“ＦＡＳＴ”の
矢印で示すステップＳＡ４に進む。

【００６３】ステップＳＡ３では、読み出し制御部９に
対して、重複読み出しで、オーディオデータＡＤを再生
するように指示を出す。重複読み出しは、同一波形サン
プルデータを連続して読み出し、ピッチを変えずに再生
時間を長くするものである。これにより、オーディオデ
ータＡＤの再生テンポを、入力されたタイミング信号の
テンポに合わせるように遅くする。ここで行われるタイ
ムストレッチ処理は、タイミング信号とタイミングデー
タＴＤのテンポの差又は比を元に所望の再生時間を計算
して、タイミング信号のテンポにリアルタイムで合わせ
るようにする。その後、次のステップＳＡ７に進む。

【００６４】ステップＳＡ４では、読み出し制御部９に
対して、読み飛ばしで、オーディオデータＡＤを再生す
るように指示を出す。読み飛ばしは、波形サンプルデー
タＳＤの一部を、再生せずに読み飛ばすことにより、ピ
ッチを変えずに再生時間を短くするものである。これに
より、オーディオデータＡＤの再生テンポを、入力され
たタイミング信号のテンポに合わせるように早くする。
ここで行われるタイムストレッチ処理は、タイミング信
号とタイミングデータＴＤのテンポの差又は比を元に所
望の再生時間を計算して、タイミング信号のテンポにリ
アルタイムで合わせるようにする。その後、次のステッ
プＳＡ７に進む。

【００６５】ステップＳＡ５では、読み出し制御部９に
対して、前回の指示と同一の動作を行うことを指示す
る。つまり、タイミング信号の入力により変更されたテ
ンポを維持して再生を続けるということである。これ
は、例えば、前回の指示が、読み飛ばし再生をするとい
うものであった場合に、さらに多くの波形サンプルデー
タＳＤを読み飛ばすというものではなく、前回の指示で
変更した再生速度のままで再生するということである。
その後、次のステップＳＡ７に進む。

【００６６】ステップＳＡ６では、読み出し制御部９に
対して、オーディオデータＡＤを通常に再生するように
指示を出す。ここで、通常の再生とは、オーディオデー
タＡＤの記録時のテンポに従った再生のことであり、重
複読み出しあるいは読み飛ばしを行わないということで
ある。すなわち、時系列的な加工を何もしないというこ
とである。これにより、入力されたタイミング信号によ
るテンポの変更は、初期化される。その後、次のステッ
プＳＡ７に進む。

【００６７】ステップＳＡ７では、比較部処理をステッ
プＳＡ１から繰り返すため再起動する。以上の比較部処
理を繰り返すことにより、常にタイミング信号の入力を
監視することができる。また、これにより、タイミング
信号の入力があった場合は、即座に、タイミング信号の
テンポに合わせることができる。つまり、この比較部処
理により、タイミング信号の入力状況により、適宜所望
のテンポに合わせて再生することが可能になる。

【００６８】図６は、波形サンプルデータＳＤの読み出
し速度を可変にした場合の比較部１０が行う割り込み処
理を示すフローチャートである。当該割り込み処理は、
タイマに応じた所定時間間隔で行われる。この時間間隔
は、任意に設定することができる。

【００６９】ステップＳＢ１では、タイミング信号の入
力の有無が検出される。所定時間内に入力があれば、
“ＹＥＳ”の矢印で示す次のステップＳＢ２に進む。所
定時間内に入力がなければ、“ＮＯ”の矢印で示すステ
ップＳＢ７に進む。入力がないときに、点線の矢印で示
すステップＳＢ９に進むようにしてもよい。ステップＳ
Ｂ７又はステップＳＢ９のどちらに進むかは、ユーザが
適宜選択できるようにしてもよい。一度入力したテンポ
を、以降の再生にも反映させる場合は、ステップＳＢ７
に進むように選択し、入力したテンポが、一時的な変更
である場合は、ステップＳＢ９に進むようにすればよ
い。また、タイミング信号の入力がない場合は、波線で
示すように、ステップＳＢ１１に進むようにしてもよ
い。

【００７０】ステップＳＢ２では、入力されたタイミン
グ信号と、それに対応する読み出し制御部９から送られ
てくるオーディオデータＡＤ中のタイミングデータＴＤ
が時間的に一致しているかが検出される。ここで、一致
しているというのは、タイミング信号とそれに対応する
タイミングデータＴＤが同時に比較部１０に入力された
場合である。一致していないというのは、タイミング信
号とそれに対応するタイミングデータＴＤの一方が、時
間的に他方よりも早く比較部１０に入力されるか、遅れ
て入力される場合である。一致している場合は、“ＪＵ
ＳＴ”の矢印で示す次のステップＳＢ７に進む。タイミ
ング信号が、対応するタイミングデータＴＤに対して遅
れて入力された場合は、“ＢＥＨＩＮＤ”の矢印で示す
ステップＳＢ３に進む。タイミング信号が、対応するタ
イミングデータＴＤに対して先に入力された場合は、
“ＦＡＳＴ”の矢印で示すステップＳＢ５に進む。

【００７１】ステップＳＢ３では、読み出し制御部９に
対して、オーディオデータＡＤの再生速度を下げるよう
に指示を出す。これにより、オーディオデータＡＤの再
生テンポを、入力されたタイミング信号のテンポに合わ
せるように遅くする。ここでは、いわゆるタイムストレ
ッチ処理は行われず、単に再生速度を遅くするだけであ
る。このため、再生速度を遅くした分ピッチが下がるこ
とになる。これを記録時のピッチに戻すために、次のス
テップＳＢ４に進む。

【００７２】ステップＳＢ４では、ピッチ変換部１１に
対して、オーディオデータＡＤのピッチを上げるように
指示を出す。ここで出される指示は、ピッチ変換後のピ
ッチが記録時のピッチと同一になるようにピッチ変換を
行うという指示である。その後、次のステップＳＢ１１
に進む。

【００７３】ステップＳＢ５では、読み出し制御部９に
対して、オーディオデータＡＤの再生速度を上げるよう
に指示を出す。これにより、オーディオデータＡＤの再
生テンポを、入力されたタイミング信号のテンポに合わ
せるように早くする。ここでは、いわゆるタイムストレ
ッチ処理は行われず、単に再生速度を早くするだけであ
る。このため、再生速度を早くした分ピッチが上がるこ
とになる。これを記録時のピッチに戻すために、次のス
テップＳＢ６に進む。

【００７４】ステップＳＢ６では、ピッチ変換部１１に
対して、オーディオデータＡＤのピッチを下げるように
指示を出す。ここで出される指示は、ピッチ変換後のピ
ッチが記録時のピッチと同一になるようにピッチ変換を
行うという指示である。その後、次のステップＳＢ１１
に進む。

【００７５】ステップＳＢ７では、読み出し制御部９に
対して、前回の指示と同一の動作を行う又は維持するこ
とを指示する。つまり、タイミング信号の入力により変
更されたテンポを維持して再生を続けるということであ
る。これは、例えば、前回の指示が、再生速度を上げる
というものであった場合に、さらに再生速度を上げると
いうものではなく、前回の指示で変更した再生速度のま
まで再生するということである。次にステップＳＢ８に
進むステップＳＢ８では、ピッチ変換部１１に対して、
前回の指示と同一の動作を行う又は維持することを指示
する。これは、例えば、前回の指示が、ピッチを上げる
というものであった場合に、さらにピッチを上げるとい
うものではなく、前回の指示で変更したピッチのままで
再生するということである。その後、次のステップＳＢ
１１に進む。

【００７６】ステップＳＢ９では、読み出し制御部９に
対して、オーディオデータＡＤを通常に再生するように
指示を出す。ここで、通常の再生とは、オーディオデー
タＡＤの記録時のテンポに従った再生のことであり、再
生速度を変化させないということである。すなわち、時
系列的な加工を何もしないということである。これによ
り、入力されたタイミング信号によるテンポの変更は、
初期化される。さらに次のステップＳＢ１０に進む。

【００７７】ステップＳＢ１０では、ピッチ変換部１１
に対して、ピッチ変換を行わないように指示を出す。そ
の後、次のステップＳＢ１１に進む。

【００７８】ステップＳＢ１１では、比較部処理をステ
ップＳＢ１から繰り返すため再起動する。以上の比較部
処理を繰り返すことにより、常にタイミング信号の入力
を監視することができる。また、これにより、タイミン
グ信号の入力があった場合は、即座に、タイミング信号
のテンポに合わせることができる。つまり、この比較部
処理により、タイミング信号の入力状況により、適宜所
望のテンポに合わせて再生することが可能になる。

【００７９】図７は再生制御装置１を構成する汎用コン
ピュータ又はパーソナルコンピュータ２０の具体的なハ
ードウェア構成を示す図である。

【００８０】汎用コンピュータ又はパーソナルコンピュ
ータ２０の構成を説明する。バス２１には、ＣＰＵ２
２、ＲＡＭ２３、外部記憶装置２４、外部に対してＭＩ
ＤＩデータを送受信するためのＭＩＤＩインターフェー
ス２５、サウンドカード２６、ＲＯＭ２７、表示装置２
８、キーボードやスイッチやマウス等の入力手段２９、
インターネットに接続するための通信インターフェース
３０、拡張スロット３１が接続されている。

【００８１】サウンドカード２６は、バッファ２６ａと
コーデック回路２６ｂを有する。バッファ２６ａは、外
部に対して入力又は出力するためのデータをバッファリ
ングする。コーデック回路２６ｂは、Ａ／Ｄ変換器及
び、Ｄ／Ａ変換器を有し、アナログ形式とデジタル形式
両者間の変換を行うことが出来る。さらに、コーデック
回路２６ｂは、圧縮／伸張回路を有し、データの圧縮及
び伸張を行うことができる。

【００８２】外部記憶装置２４は、例えばハードディス
クドライブ、フロッピーディスクドライブ、ＣＤ−ＲＯ
Ｍドライブ、光磁気ディスクドライブ等であり、ＭＩＤ
Ｉデータ、オーディオデータ、画像データ又はコンピュ
ータプログラム等を記憶することができる。

【００８３】ＲＯＭ２７は、コンピュータプログラム及
び各種パラメータを記憶することができる。ＲＡＭ２３
は、バッファやレジスタ等のワーキングエリアを有し、
外部記憶装置２４に記憶されている内容をコピーして記
憶することができる。

【００８４】ＣＰＵ２２は、ＲＯＭ２７又はＲＡＭ２３
に記憶されているコンピュータプログラムに従って、各
種演算又は処理を行う。システムクロック３２は、時間
情報を生成する。ＣＰＵ２２はシステムクロック３２か
ら時間情報を得て、タイマ割り込み処理を行うことがで
きる。

【００８５】インターネット回線３３には、汎用コンピ
ュータ又はパーソナルコンピュータ２０の通信インター
フェース３０が接続される。通信インターフェース３０
は、インターネットにより、ＭＩＤＩデータ、オーディ
オデータ、画像データ及びコンピュータプログラム等を
送受信するためのインターフェースである。

【００８６】ＭＩＤＩインターフェース２５には、ＭＩ
ＤＩ音源３５が接続され、サウンドカード２６には、音
声出力装置３６が接続される。また、サウンドカード２
６には図示しない音声入力装置を接続してもよい。ま
た、ＭＩＤＩ音源３５を音声出力装置３６に接続しても
よい。ＣＰＵ２２は、通信インターフェース３０を介し
て、インターネット回線３３上からＭＩＤＩデータとオ
ーディオデータと画像データとコンピュータプログラム
等を受信する。

【００８７】通信インターフェース３０は、インターネ
ット用インターフェースのほか、イーサネット用インタ
ーフェース、ＩＥＥＥ１３９４規格のデジタル通信イン
ターフェース、ＲＳ−２３２Ｃ用インターフェースでも
よく、種々のネットワークに接続することができる。

【００８８】汎用コンピュータ又はパーソナルコンピュ
ータ２０は、オーディオデータの受信や再生等をするた
めのコンピュータプログラムを記憶する。コンピュータ
プログラムや各種パラメータ等を外部記憶装置２４に記
憶させておき、それをＲＡＭ２３に読み込むことによ
り、コンピュータプログラム等の追加やバージョンアッ
プ等が容易に行える。

【００８９】ＣＤ−ＲＯＭ（コンパクトディスク−リー
ド・オンリー・メモリー）ドライブは、ＣＤ−ＲＯＭに
記憶されているコンピュータプログラム等を読み出す装
置である。読み出したコンピュータプログラム等は、ハ
ードディスクにストアされる。コンピュータプログラム
の新規インストールやバージョンアップ等が容易に行え
る。

【００９０】通信インターフェース３０はＬＡＮ（ロー
カルエリアネットワーク）やインターネット、電話回線
等の通信ネットワーク３３に接続されており、該通信ネ
ットワーク３３を介して、他のコンピュータ３４と接続
される。

【００９１】外部記憶装置２４内に上記のコンピュータ
プログラム等が記憶されていない場合、コンピュータ３
４からコンピュータプログラム等をダウンロードするこ
とができる。汎用コンピュータ又はパーソナルコンピュ
ータ２０は、通信インターフェース３０及び、通信ネッ
トワーク３３を介してコンピュータ３４へコンピュータ
プログラム等のダウンロードを要求するコマンドを送信
する。

【００９２】コンピュータ３４は、このコマンドを受
け、要求されたコンピュータプログラム等を、通信ネッ
トワーク３２を介して、汎用コンピュータ又はパーソナ
ルコンピュータ２０へ配信する。汎用コンピュータ又は
パーソナルコンピュータ２０が、通信インターフェース
３０を介して、コンピュータプログラム等を受信して外
部記憶装置２４に蓄積することにより、ダウンロードが
完了する。

【００９３】なお、本実施例は、本実施例に対応するコ
ンピュータプログラム等をインストールした市販の汎用
コンピュータ又はパーソナルコンピュータ等によって、
実施させるようにしてもよい。

【００９４】その場合には、本実施例に対応するコンピ
ュータプログラム等を、ＣＤ−ＲＯＭやフロッピーディ
スク等の、コンピュータが読み込むことが出来る記憶媒
体に記憶させた状態で、ユーザに提供してもよい。

【００９５】その汎用コンピュータ又はパーソナルコン
ピュータ等が、ＬＡＮ、インターネット、電話回線等の
通信ネットワークに接続されている場合には、通信ネッ
トワークを介して、コンピュータプログラムや各種デー
タ等を汎用コンピュータ又はパーソナルコンピュータ等
に提供してもよい。

【００９６】また、オーディオデータを再生する前に、
オーディオデータ中のタイミングデータと、記録されて
いるタイミング信号とを比較し、テンポを変更したオー
ディオデータを作成した後に、該テンポ変更がなされた
オーディオデータを再生するようにしてもよい。

【００９７】以上実施例に沿って本発明を説明したが、
本発明はこれらに制限されるものではない。例えば、種
々の変更、改良、組合せ等が可能なことは当業者に自明
であろう。

【００９８】

【発明の効果】以上説明したように、本発明によれば、
オーディオデータの再生テンポをピッチを変えずに自由
に変更することが可能になる。

【００９９】また、一度入力した、テンポ情報を保存し
て、次回再生時に保存したテンポ情報と、オーディオデ
ータと共にあらかじめ保存されているテンポ信号とを比
較して、再生テンポの制御をすることが可能になる。

【０１００】さらに、テンポ変化等が記載されている楽
譜を認識して、その認識結果に基づいて、再生テンポの
制御をすることが可能になる。

【図面の簡単な説明】

【図１】オーディオデータ再生制御装置の構成を示すブ
ロック図である。

【図２】オーディオデータの記憶形式の例を示す線図で
ある。

【図３】オーディオデータの記憶方法の例を示すブロッ
ク図である。

【図４】読出／再生部の構成を示すブロック図である。

【図５】比較部での処理を示すフローチャートである。

【図６】比較部での処理を示すフローチャートである。

【図７】汎用コンピュータ又はパーソナルコンピュータ
の具体的なハードウェア構成を示すブロック図である。

【符号の説明】

１…再生制御装置、２…オーディオデータ記憶部、３…
タイミング入力部、４…タイミング記録／再生部、５…
楽譜画像入力部、６…楽譜画像認識／タイミング生成
部、７…読出／再生部、８…Ｄ／Ａ変換部、９…読み出
し制御部、１０…比較部、１１…ピッチ変換部、１２ａ
…変調部、１２ｂ…復調部、１３…ＬＰＦ、１４…ＨＰ
Ｆ、１５…ミキシング部、１６ａ…Ａ／Ｄ、１６ｂ…Ｄ
／Ａ変換部、２０…汎用コンピュータ又はパーソナルコ
ンピュータ、２１…バス、２２…ＣＰＵ、２３…ＲＡ
Ｍ、２４…外部記憶装置、２５…ＭＩＤＩインターフェ
ース、２６…サウンドカード、２６ａ…バッファ、２６
ｂ…コーデック回路、２７…ＲＯＭ、２８…表示装置、
２９…入力手段、３０…通信インターフェース３０、３
１拡張スロット…、３２…システムクロック、３３…通
信ネットワーク、３４…コンピュータ、３５…ＭＩＤＩ
音源、３６…音声出力装置

Claims (15)

【特許請求の範囲】
1. 【請求項１】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手段と、 所定タイミング毎のタイミング信号を入力するタイミン
   グ信号入力手段と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手段と、 前記入力されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手段と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手段と、を有する
   オーディオデータの再生制御装置。
2. 【請求項２】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手段と、 記録媒体に記録された所定タイミング毎のタイミング信
   号を再生するタイミング信号再生手段と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手段と、 前記再生されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手段と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手段と、を有する
   オーディオデータの再生制御装置。
3. 【請求項３】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手段と、 楽譜画像を認識し、認識結果に基づいて所定タイミング
   毎のタイミング信号を生成するタイミング信号生成手段
   と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手段と、 前記再生されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手段と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手段と、を有する
   オーディオデータの再生制御装置。
4. 【請求項４】 前記再生テンポを制御する制御手段は、
   オーディオデータの読み出し速度を一定にし、オーディ
   オデータを繰り返し読み出すか、あるいは読み飛ばすこ
   とによってピッチを変えずに再生テンポを制御する請求
   項１から３のいずれかに記載のオーディオデータの再生
   制御装置。
5. 【請求項５】 前記再生テンポを制御する制御手段は、
   オーディオデータの読み出し速度を変更し、該変更によ
   るピッチの変化分をピッチ変換によって相殺することに
   より、ピッチを変えずに再生テンポを制御する請求項１
   から３のいずれかに記載のオーディオデータの再生制御
   装置。
6. 【請求項６】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手順と、 所定タイミング毎のタイミング信号を入力するタイミン
   グ信号入力手順と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手順と、 前記入力されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手順と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手順と、を有する
   オーディオデータの再生制御手順をコンピュータに実行
   させるためのプログラムを記録した媒体。
7. 【請求項７】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手順と、 記録媒体に記録された所定タイミング毎のタイミング信
   号を再生するタイミング信号再生手順と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手順と、 前記再生されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手順と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手順と、を有する
   オーディオデータの再生制御手順をコンピュータに実行
   させるためのプログラムを記録した媒体。
8. 【請求項８】 オーディオデータ及び所定タイミング毎
   のタイミングデータを記憶する記憶手順と、 楽譜画像を認識し、認識結果に基づいて所定タイミング
   毎のタイミング信号を生成するタイミング信号生成手順
   と、 前記オーディオデータ及び所定タイミング毎のタイミン
   グデータを読み出す読み出し手順と、 前記再生されたタイミング信号と前記読み出されたタイ
   ミングデータを比較する比較手順と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
   オデータの再生テンポを制御する制御手順と、を有する
   オーディオデータの再生制御手順をコンピュータに実行
   させるためのプログラムを記録した媒体。
9. 【請求項９】 前記再生テンポを制御する制御手順は、
   オーディオデータの読み出し速度を一定にし、オーディ
   オデータを繰り返し読み出すか、あるいは読み飛ばすこ
   とによってピッチを変えずに再生テンポを制御する請求
   項６から８のいずれかに記載のオーディオデータの再生
   制御手順をコンピュータに実行させるためのプログラム
   を記録した媒体。
10. 【請求項１０】 前記再生テンポを制御する制御手順
    は、オーディオデータの読み出し速度を変更し、該変更
    によるピッチの変化分をピッチ変換によって相殺するこ
    とにより、ピッチを変えずに再生テンポを制御する請求
    項６から８のいずれかに記載のオーディオデータの再生
    制御手順をコンピュータに実行させるためのプログラム
    を記録した媒体。
11. 【請求項１１】 オーディオデータ及び所定タイミング
    毎のタイミングデータを記憶する記憶工程と、 所定タイミング毎のタイミング信号を入力するタイミン
    グ信号入力工程と、 前記オーディオデータ及び所定タイミング毎のタイミン
    グデータを読み出す読み出し工程と、 前記入力されたタイミング信号と前記読み出されたタイ
    ミングデータを比較する比較工程と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
    オデータの再生テンポを制御する制御工程と、を有する
    オーディオデータの再生制御方法。
12. 【請求項１２】 オーディオデータ及び所定タイミング
    毎のタイミングデータを記憶する記憶工程と、 記録媒体に記録された所定タイミング毎のタイミング信
    号を再生するタイミング信号再生工程と、 前記オーディオデータ及び所定タイミング毎のタイミン
    グデータを読み出す読み出し工程と、 前記再生されたタイミング信号と前記読み出されたタイ
    ミングデータを比較する比較工程と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
    オデータの再生テンポを制御する制御工程と、を有する
    オーディオデータの再生制御方法。
13. 【請求項１３】 オーディオデータ及び所定タイミング
    毎のタイミングデータを記憶する記憶工程と、 楽譜画像を認識し、認識結果に基づいて所定タイミング
    毎のタイミング信号を生成するタイミング信号生成工程
    と、 前記オーディオデータ及び所定タイミング毎のタイミン
    グデータを読み出す読み出し工程と、 前記再生されたタイミング信号と前記読み出されたタイ
    ミングデータを比較する比較工程と、 前記比較結果に応じて、ピッチを変えずに前記オーディ
    オデータの再生テンポを制御する制御工程と、を有する
    オーディオデータの再生制御方法。
14. 【請求項１４】 前記再生テンポを制御する制御工程
    は、オーディオデータの読み出し速度を一定にし、オー
    ディオデータを繰り返し読み出すか、あるいは読み飛ば
    すことによってピッチを変えずに再生テンポを制御する
    請求項１１から１３のいずれかに記載のオーディオデー
    タの再生制御方法。
15. 【請求項１５】 前記再生テンポを制御する制御工程
    は、オーディオデータの読み出し速度を変更し、該変更
    によるピッチの変化分をピッチ変換によって相殺するこ
    とにより、ピッチを変えずに再生テンポを制御する請求
    項１１から１３のいずれかに記載のオーディオデータの
    再生制御方法。