JP2000181449A

JP2000181449A - 情報処理装置および方法、並びに提供媒体

Info

Publication number: JP2000181449A
Application number: JP10355973A
Authority: JP
Inventors: Takashi Koike; 隆小池; Kenichi Imai; 憲一今井; Minoru Tsuji; 実辻
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1998-12-15
Filing date: 1998-12-15
Publication date: 2000-06-30
Also published as: US6281424B1

Abstract

(57)【要約】【課題】再生時にMIDI音響信号とオーディオ音響信号
の正確な同期を実現する。【解決手段】 MIDI再生部１１は、シンセサイザ等の音
源を有しており、入力されるMIDI演奏情報に基づいて、
順次、電子音を合成して再生し、伴奏音楽のMIDI音響信
号を生成する。生成されたMIDI音響信号は、ミキシング
部１５に供給される。オーディオ再生部１２は、入力さ
れるオーディオ情報に基づいて、オーディオ音響信号を
再生する。生成されたオーディオ音響信号は、ミキシン
グ部１５に供給される。テンポ変更時刻設定部１４は、
テンポ入力部１３から入力されるテンポ変更情報にテン
ポ変更時刻を設定する。テンポ変更時刻が設定されたテ
ンポ変更情報は、MIDI再生部１１およびオーディオ再生
部１２に供給される。ミキシング部１５は、供給された
MIDI音響信号およびオーディオ音響信号を混合して再生
信号を生成し、音量調整を行って出力する。生成された
再生信号は、スピーカ１６に供給され、スピーカ１６
は、供給された再生信号を音響として出力する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、情報処理装置およ
び方法、並びに提供媒体に関し、特に、MIDI(Musical I
nstruments Digital Interface)情報による伴奏音楽の
テンポ（曲のスピード）が変化した時に、それに同期し
てオーディオ情報のテンポも変更できるようにした情報
処理装置および方法、並びに提供媒体に関する。

【０００２】

【従来の技術】MIDI情報による伴奏音楽のテンポが変化
した時に、それに同期してコーラスの音のテンポも、ピ
ッチ（周波数）を変えることなく変化させる音楽再生装
置が、例えば、特開平８−２３４７９１号公報に開示さ
れている。この装置について、図２０を参照しながら説
明する。

【０００３】ユーザは、テンポ入力部１０１から曲のテ
ンポを入力する。テンポ入力部１０１は、入力されたテ
ンポに対応するテンポ変更信号をMIDI再生部１０２およ
びコーラス再生部１０３に供給する。

【０００４】MIDI再生部１０２は、伴奏音楽再生部１１
１から構成されており、伴奏音楽再生部１１１は、供給
された伴奏音楽情報（MIDI情報）を再生し、伴奏音楽信
号を生成する。生成された伴奏音楽信号は、ミキサ部１
０４に供給される。

【０００５】コーラス再生部１０３は、伸張部１２１、
周期性分析部１２２、単位周期データ記憶部１２３、お
よびコーラス伸張・間引部１２４から構成されている。

【０００６】伸張部１２１は、例えば、MPEG(Moving Pi
cture Experts Group)等のデータ圧縮手法で圧縮された
コーラス情報を、PCM(Pulse Code Modulation)符号化さ
れたオーディオ信号に伸張する。復号化されたコーラス
情報は、周期性分析部１２２およびコーラス伸張・間引
部１２４に供給される。

【０００７】周期性分析部１２２は、供給されたコーラ
ス情報の周期性の強い部分を認識し、その１周期を抽出
する。抽出された単位周期データは、単位周期データ記
憶部１２３に供給され、記憶される。記憶された単位周
期データは、必要に応じて読み出され、コーラス伸張・
間引部１２４に供給される。

【０００８】コーラス伸張・間引部１２４は、供給され
たテンポ変更信号および単位周期データに基づいて、コ
ーラス情報から再生コーラス信号を生成する。例えば、
テンポが変更されていない場合には、コーラス伸張・間
引部１２４は、供給されたコーラス情報にデータを付加
したり、それから一部のデータを間引いたりすることな
く、そのままオーディオ信号として出力するが、テンポ
変更信号がテンポの加速を指示している時には、その加
速量に対応する数の単位周期データを、周期性の強い部
分から間引いてテンポを速め、逆に、テンポ変更信号が
テンポの減速を指示している時には、その減速量に対応
する数の単位周期データを、周期性の強い部分に付加し
てテンポを遅くする。これにより、伴奏音楽のテンポが
変化しても、コーラスのピッチを変えることなく、コー
ラスのテンポを追従させて変化させることができる。

【０００９】ミキサ部１０４は、供給された伴奏音楽信
号とコーラス信号をミキシングする。ミキシングされた
信号は、増幅器１０５に供給される。増幅器１０５は、
供給された信号とマイクロホン１０７から入力された歌
声をミキシングし、スピーカ１０６から音響として出力
する。

【００１０】

【発明が解決しようとする課題】しかしながら、上記装
置においては、テンポを変更する際に、コーラス信号の
特性を利用しているため、それ以外の信号には適用が難
しいという課題があった。

【００１１】また、コーラス情報の復号化およびテンポ
を変更する処理に要する時間が多くなると、伴奏音楽と
の間に遅延時間が生じてしまうという課題があった。

【００１２】本発明は、このような状況に鑑みてなされ
たものであり、MIDI情報による伴奏音楽のテンポが変化
した時に、それに同期してオーディオ情報のテンポも変
更できるようにした汎用的な情報処理装置を提供すると
ともに、オーディオ情報の再生時に生じる遅延時間を補
償することを目的とする。

【００１３】

【課題を解決するための手段】請求項１に記載の情報処
理装置は、MIDI演奏情報とオーディオ情報を再生する情
報処理装置において、MIDI演奏情報を再生するMIDI再生
手段と、MIDI再生手段により生成された同期信号に同期
してオーディオ情報を再生するオーディオ再生手段と、
再生時の音楽の要素の変更情報を入力する入力手段と、
入力手段により入力された変更情報が、MIDI再生手段か
ら出力されるMIDI音響信号に反映されるまでの遅延時間
およびオーディオ再生手段から出力されるオーディオ音
響信号に反映されるまでの遅延時間を補償する補償手段
と、MIDI音響信号とオーディオ音響信号をミキシングす
るミキシング手段とを備えることを特徴とする。

【００１４】請求項３に記載の情報処理方法は、MIDI演
奏情報とオーディオ情報を再生する情報処理装置の情報
処理方法において、MIDI演奏情報を再生するMIDI再生ス
テップと、MIDI再生ステップで生成された同期信号に同
期してオーディオ情報を再生するオーディオ再生ステッ
プと、再生時の音楽の要素の変更情報を入力する入力ス
テップと、入力ステップで入力された変更情報が、MIDI
再生ステップで出力されるMIDI音響信号に反映されるま
での遅延時間およびオーディオ再生ステップで出力され
るオーディオ音響信号に反映されるまでの遅延時間を補
償する補償ステップと、MIDI音響信号とオーディオ音響
信号をミキシングするミキシングステップとを含むこと
を特徴とする。

【００１５】請求項４に記載の提供媒体は、MIDI演奏情
報とオーディオ情報を再生する情報処理装置に、MIDI演
奏情報を再生するMIDI再生ステップと、MIDI再生ステッ
プで生成された同期信号に同期してオーディオ情報を再
生するオーディオ再生ステップと、再生時の音楽の要素
の変更情報を入力する入力ステップと、入力ステップで
入力された変更情報が、MIDI再生ステップで出力される
MIDI音響信号に反映されるまでの遅延時間およびオーデ
ィオ再生ステップで出力されるオーディオ音響信号に反
映されるまでの遅延時間を補償する補償ステップと、MI
DI音響信号とオーディオ音響信号をミキシングするミキ
シングステップとを含む処理を実行させるコンピュータ
が読み取り可能なプログラムを提供することを特徴とす
る。

【００１６】請求項１に記載の情報処理装置において
は、MIDI再生手段が、MIDI演奏情報を再生し、オーディ
オ再生手段が、MIDI再生手段により生成された同期信号
に同期してオーディオ情報を再生し、入力手段が、再生
時の音楽の要素の変更情報を入力し、補償手段が、入力
手段により入力された変更情報が、MIDI再生手段から出
力されるMIDI音響信号に反映されるまでの遅延時間およ
びオーディオ再生手段から出力されるオーディオ音響信
号に反映されるまでの遅延時間を補償し、ミキシング手
段が、MIDI音響信号とオーディオ音響信号をミキシング
する。

【００１７】請求項３に記載の情報処理方法および請求
項４に記載の提供媒体においては、MIDI再生ステップ
で、MIDI演奏情報を再生し、オーディオ再生ステップ
で、MIDI再生ステップで生成された同期信号に同期して
オーディオ情報を再生し、入力ステップで、再生時の音
楽の要素の変更情報を入力し、補償ステップで、入力ス
テップで入力された変更情報が、MIDI再生ステップで出
力されるMIDI音響信号に反映されるまでの遅延時間およ
びオーディオ再生ステップで出力されるオーディオ音響
信号に反映されるまでの遅延時間を補償し、ミキシング
ステップで、MIDI音響信号とオーディオ音響信号をミキ
シングする。

【００１８】

【発明の実施の形態】以下に本発明の実施の形態を説明
するが、特許請求の範囲に記載の発明の各手段と、以下
の実施の形態との対応関係を明らかにするために、各手
段の後の括弧内に、対応する実施の形態（但し一例）を
付加して本発明の特徴を記述すると、次のようになる。
但し、勿論この記載は、各手段を記載したものに限定す
ることを意味するものではない。

【００１９】即ち、請求項１に記載の情報処理装置は、
MIDI演奏情報とオーディオ情報を再生する情報処理装置
において、MIDI演奏情報を再生するMIDI再生手段（例え
ば、図１のMIDI再生部１１）と、MIDI再生手段により生
成された同期信号に同期してオーディオ情報を再生する
オーディオ再生手段（例えば、図１のオーディオ再生部
１２）と、再生時の音楽の要素の変更情報を入力する入
力手段（例えば、図１のテンポ入力部１３）と、入力手
段により入力された変更情報が、MIDI再生手段から出力
されるMIDI音響信号に反映されるまでの遅延時間および
オーディオ再生手段から出力されるオーディオ音響信号
に反映されるまでの遅延時間を補償する補償手段（例え
ば、図１のテンポ変更時刻設定部１４）と、MIDI音響信
号とオーディオ音響信号をミキシングするミキシング手
段（例えば、図１のミキシング部１５）とを備えること
を特徴とする。

【００２０】図１は、本発明を適用した音楽再生装置１
の第１の実施の形態の構成を示すブロック図である。MI
DI再生部１１には、例えばSMF(Standard MIDI File)よ
り読み出されたMIDI演奏情報（音楽の楽譜情報のデー
タ）が入力される。MIDI再生部１１は、シンセサイザ等
の音源を有しており、入力されるMIDI演奏情報（例え
ば、伴奏音楽情報）に基づいて、順次、電子音を合成し
て再生し、伴奏音楽のMIDI音響信号を生成する。生成さ
れたMIDI音響信号は、ミキシング部１５に供給される。
尚、ここで、MIDIとは、シンセサイザや電子ピアノ等の
楽器の音源と連結して情報の交換を可能とすべく定めら
れたハードウェアとソフトウェアの規格をいう。

【００２１】オーディオ再生部１２には、MIDI演奏情報
と同期再生させるオーディオ情報（例えば、コーラス情
報）が入力される。オーディオ再生部１２は、入力され
るオーディオ情報に基づいて、オーディオ音響信号を再
生する。オーディオ情報は、例えば、PCM化したものがM
PEG等の情報圧縮手法を用いて圧縮された状態で供給さ
れ、オーディオ再生部１２は、供給されたオーディオ情
報を伸張し、復号し、再生する。生成されたオーディオ
音響信号は、ミキシング部１４に供給される。

【００２２】テンポ変更時刻設定部１４は、テンポ入力
部１３から入力されるテンポ変更情報にテンポ変更時刻
を設定する。テンポ変更時刻が設定されたテンポ変更情
報は、MIDI再生部１１およびオーディオ再生部１２に供
給される。

【００２３】ミキシング部１５は、供給されたMIDI音響
信号およびオーディオ音響信号を混合して再生信号を生
成し、音量調整を行って出力する。生成された再生信号
は、スピーカ１６に供給され、スピーカ１６は、供給さ
れた再生信号を音響として出力する。

【００２４】図２は、MIDI再生部１１の構成例を示す図
である。テンポ変更情報記憶部２１は、テンポ変更時刻
設定部１４から供給されるテンポ変更情報を記憶し、記
憶したテンポ変更情報をMIDI演奏情報変更部２２に供給
する。MIDI演奏情報変更部２２は、テンポ入力部１３か
ら供給されたテンポ変更情報に基づいて、MIDI演奏情報
を変更する。変更されたMIDI演奏情報は、音響信号変換
部２３に供給される。MIDI演奏情報変更部２２はまた、
同期信号を生成し、生成した同期信号を同期信号遅延部
２５に供給する。

【００２５】シンセサイザを内蔵する音響信号変換部２
３は、供給されたMIDI演奏情報に基づいて、順次、電子
音を合成して再生する。生成されたMIDI音響信号は、MI
DI音響信号バッファリング部２４に供給される。MIDI音
響信号バッファリング部２４は、供給されたMIDI音響信
号を一時的に格納した後、出力する。

【００２６】同期信号遅延部２５は、供給された同期信
号を所定の遅延時間だけ遅延した後に、出力する。尚、
この遅延時間は、MIDI演奏情報変更部２２から出力され
たMIDI演奏情報が音響信号変換部２３に入力される時刻
と、その情報がMIDI音響信号バッファリング部２４から
出力される時刻との間の時間（音響信号変換部２３とMI
DI音響信号バッファリング部２４の処理時間に対応する
時間）に設定される。

【００２７】図３は、オーディオ再生部１２の構成例を
示す図である。テンポ変更情報記憶部４１は、テンポ変
更時刻設定部１４から供給されるテンポ変更情報を記憶
し、記憶したテンポ変更情報をテンポ変更部４３に供給
する。オーディオ復号部４２は、供給されたオーディオ
情報（例えば、PCMまたはADPCM(Adaptive Differential
PCM)符号化されたものをMPEG Audio規格等の圧縮方式
により圧縮したオーディオ情報、または音声合成のため
のパラメータ）を復号し、オーディオ音響信号を生成す
る。生成されたオーディオ音響信号は、テンポ変更部４
３に供給される。

【００２８】テンポ変更部４３は、テンポ変更情報記憶
部４１より供給されたテンポ変更情報に基づいて、オー
ディオ復号部４２より供給されたオーディオ音響信号の
テンポを変更する。テンポが変更されたオーディオ音響
信号は、オーディオ音響信号バッファリング部４４に供
給される。

【００２９】オーディオ音響信号バッファリング部４４
は、供給されたオーディオ音響信号を一時的に格納し、
その信号をMIDI再生部１１から供給される同期信号に同
期させて出力する。

【００３０】図４は、オーディオ音響信号バッファリン
グ部４４の構成例を示す図である。データ書込部６１
は、テンポ変更部４３またはオーディオ復号部４２から
供給されたオーディオ音響信号をデータ記憶部６２に書
き込む（記憶させる）。データ読出部６３は、データ記
憶部６２に書き込まれたオーディオ音響信号を、同期信
号に同期して読み出す。

【００３１】尚、上述したMIDI音響信号バッファリング
部２４も、基本的に、図４と同様の構成とすることがで
きる。

【００３２】データ記憶部６２は、例えば、図５に示す
ようなリングバッファ構造とされている。リングバッフ
ァは、所定の容量を持った記憶回路で、データの書き込
み、および読み出しが循環的に行えるようになされてい
る。また、リングバッファは、データの書き込み位置お
よび読み出し位置を、それぞれ独立して指定することが
できる。オーディオ音響信号を取り扱う場合、図５に示
すように、データの読み出し位置は、オーディオ音響信
号の再生速度（サンプリング周波数）に対応して順次前
方（右方向）に進み、データの書き込み位置は、データ
の読み出し位置に対して常に同じ位置か、またはそれよ
りも前方に位置する（但し、データの読み出し位置を追
い越さない）。これにより、音のとぎれない再生が可能
となる。

【００３３】オーディオ音響信号バッファリング部４４
において、バッファリングするデータの時間長をＴ₄₄と
すると、その値は、データの読み出し位置と書き込み位
置との間のデータ量に相当する時間となり、その最大値
は、リングバッファの大きさに相当する時間に等しくな
る。

【００３４】次に、オーディオ音響信号のテンポを変更
する際に利用される繰り返し再生の手法について説明す
る。繰り返し再生の手法を用いた場合、テンポ変更部４
３は、オーディオ情報をＮサンプル読み込んで、Ｎ／ａ
個のサンプルを出力することにより、オーディオ音響信
号のテンポを変更する。尚、ここで、ａは本来の再生速
度からの変更率を表すパラメータであり、次の（１）式
で定義される。ａ＝再生速度／本来の再生速度・・・（１）上記（１）式より、テンポが遅くなると、ａ＜１とな
り、テンポが速くなると、ａ＞１となる。テンポが変更
されない場合は、ａ＝１となる。

【００３５】例えば、オーディオ音響信号のテンポをａ
＝２／３に変更する（テンポを遅くする）場合、テンポ
変更部４３は、オーディオ情報をＮサンプル読み込ん
で、３Ｎ／２個のサンプルを出力する。即ち、テンポ変
更部４３は、オーディオ情報をＮサンプル読み込んで、
そのサンプルを１回半ずつ繰り返し再生する。この場
合、読み込んだサンプル数より多いサンプルが出力され
ることになり、テンポを遅くすることができる。

【００３６】また、オーディオ音響信号のテンポをａ＝
２に変更する（テンポを速くする）場合、テンポ変更部
４３は、オーディオ情報をＮサンプル読み込んで、Ｎ／
２個のサンプルを出力する。即ち、テンポ変更部４３
は、オーディオ情報をＮサンプル読み込んで、半分のサ
ンプルを出力する。この場合、読み込んだサンプル数よ
り少ないサンプルが出力されることになり、テンポを速
くすることができる。

【００３７】尚、上記Ｎの値は、人がオーディオ音響を
聴く上で、違和感のない値が選定される。また、オーデ
ィオ音響信号を出力する際、クロスフェード処理、即
ち、前後のサンプルをオーバーラップさせる処理が行な
われる場合もある。

【００３８】次に、テンポが変更された場合に、MIDI再
生部１１から出力されるMIDI音響信号に、オーディオ再
生部１２から出力されるオーディオ音響信号を同期させ
るための条件について説明する。

【００３９】MIDI音響信号にオーディオ音響信号を同期
させる条件は２つある。第１の条件は、オーディオ音響
信号バッファリング部４４がMIDI再生部１１から出力さ
れる同期信号を受信したとき、直ちにオーディオ音響信
号の再生を開始することである。第２の条件は、MIDI再
生部１１から出力されるMIDI音響信号とオーディオ再生
部１２から出力されるオーディオ音響信号のテンポ変更
点が同一時刻になることである。

【００４０】例えば、図６に示すように、MIDI音響信号
にオーディオ音響信号１およびオーディオ音響信号２を
同期させて再生する場合、第１の条件は、オーディオ音
響信号バッファリング部４４が、オーディオ音響信号１
およびオーディオ音響信号２の再生を開始させるための
同期信号１および同期信号２を受信したとき、直ちにオ
ーディオ音響信号１およびオーディオ音響信号２の再生
を開始することである。第２の条件は、テンポ変更時刻
１，２，および３において、テンポをそれぞれTempo
１，Tempo２，およびTempo３に変更するとき、MIDI音響
信号のテンポ変更点と、オーディオ音響信号１およびオ
ーディオ音響信号２のテンポ変更点が同一時刻になるこ
とである。

【００４１】次に、第１の条件を満足するためのオーデ
ィオ再生部１２の処理について説明する。

【００４２】再生前に、オーディオ情報が供給される
と、オーディオ復号部４２は、供給されたオーディオ情
報の先頭の所定の部分を復号し、生成したオーディオ音
響信号をテンポ変更部４３に供給する。テンポ変更部４
３は、供給されたオーディオ音響信号のテンポを変更
し、変更後のオーディオ音響信号をオーディオ音響信号
バッファリング部４４に供給する。オーディオ音響信号
バッファリング部４４は、供給されたオーディオ音響信
号を一時的に格納する。

【００４３】以上の処理はプレデコード処理と称され
る。プレデコード処理で生成されたデータはプレデコー
ドデータ（時間長Ｔ₄₄（pre)）と称される。プレデコー
ド処理を行うことにより、オーディオ音響信号バッファ
リング部４４がMIDI再生部１１から出力される同期信号
を受信したとき、直ちに、データ読出部６３がデータ記
憶部６２からプレデコードデータを読み出し、再生を開
始することができる。

【００４４】尚、プレデコード処理を行う場合、オーデ
ィオ復号部４２およびテンポ変更部４３において、信号
分析のためのフィルタ処理を行う際、それぞれの処理結
果の先頭に不要なサンプルが付加されるが、オーディオ
復号部４２およびテンポ変更部４３は、それを出力しな
いようにする。

【００４５】プレデコードデータの生成に要する時間
は、オーディオ復号部４２およびテンポ変更部４３での
処理に要する時間を、それぞれＴ₄₂（pre)およびＴ
₄₃（pre)とすると、その和（Ｔ₄₂（pre)＋Ｔ₄₃（pre)）
となる。一般に、オーディオ再生部１２が実時間再生を
行える条件は、オーディオ復号部４２およびテンポ変更
部４３での処理速度が、オーディオ音響信号の再生速度
よりも速いか、または同じであるので、所定のデータ
（データ長Ｔ₄₄）を生成するのに要する時間は、オーデ
ィオ復号部４２およびテンポ変更部４３での処理に要す
る時間を、それぞれＴ₄₂およびＴ₄₃とすると、次の
（２）式の関係を満足する。Ｔ₄₂＋Ｔ₄₃≦Ｔ₄₄・・・（２）このとき、プレデコード時の処理時間であるＴ₄₂（pr
e)、Ｔ₄₃（pre)、およびＴ₄₄（pre)との間には、次の
（３）式の関係が成立する。Ｔ₄₂（pre)＋Ｔ₄₃（pre)≦Ｔ₄₄（pre)・・・（３）上記（３）式は、プレデコード時に、オーディオ復号部
４２およびテンポ変更部４３での処理に要する時間の合
計が、最大でＴ₄₄（pre)であることを示している。この
ことより、図７に示すように、プレデコード処理開始時
刻は、オーディオ音響信号１再生開始時刻のＴ₄₄（pre)
だけ前に設定すればよいことが分かる。

【００４６】次に、第２の条件を満足するMIDI再生部１
１、オーディオ再生部１２、およびテンポ変更時刻設定
部１４について、さらに詳しく説明する。

【００４７】テンポ変更情報がMIDI再生部１１から出力
されるMIDI音響信号に反映されるまでの遅延時間Ｄ
₁₁と、テンポ変更情報がオーディオ再生部１２から出力
されるオーディオ音響信号に反映されるまでの遅延時間
Ｄ₁₂との時間差をなくすために、テンポ変更時刻設定部
１４は、入力されたテンポ変更情報に対して、テンポ変
更情報がMIDI音響信号およびオーディオ音響信号に反映
されるまでの時間Ｔ(offset)を設定する。これにより、
従来問題になっていた遅延時間Ｄ₁₁と遅延時間Ｄ₁₂の差
を吸収することができる。尚、ここで、Ｔ(offset)は、
次の（４）式を満足するように設定される。Ｔ(offset)≧Ｄ₁₁およびＤ₁₂の最大値・・・（４）

【００４８】従って、MIDI演奏情報変更部２２に供給さ
れるテンポ変更時刻は、その時点において、MIDI音響信
号バッファリング部２４から出力されているMIDI音響信
号に対して、Ｔ(offset)だけ後の時刻となる。同様に、
テンポ変更部４３に供給されるテンポ変更時刻は、その
時点において、オーディオ音響信号バッファリング部４
４から出力されているオーディオ音響信号に対して、Ｔ
(offset)だけ後の時刻となる。このとき、（４）式よ
り、Ｔ(offset)≧Ｄ₁₁ Ｔ(offset)≧Ｄ₁₂ が成立するので、テンポ変更情報が、MIDI音響信号およ
びオーディオ音響信号に正しく反映され、MIDI音響信号
およびオーディオ音響信号のテンポ変更点が同一時刻と
なり、両者の正確な同期が取れることになる。

【００４９】テンポ変更情報記憶部２１は、供給された
テンポ変更情報を時間（Ｔ(offset)−Ｄ₁₁）だけ記憶
（遅延）した後、MIDI演奏情報変更部２２に供給する。
同様に、テンポ変更情報記憶部４１は、供給されたテン
ポ変更情報を時間（Ｔ(offset)-D₁₂）だけ記憶（遅延）
した後、テンポ変更部４３に供給する。ここで、遅延時
間Ｄ₁₁およびＤ₁₂は、それぞれ次の（５）式および
（６）式で表される。Ｄ₁₁＝Ｔ₂₂＋Ｔ₂₃＋Ｔ₂₄・・・（５）Ｄ₁₂＝Ｔ₄₃＋Ｔ₄₄・・・（６）

【００５０】尚、ここで、Ｔ₂₂およびＴ₂₃は、それぞれ
MIDI演奏情報変更部２２および音響信号変換部２３にお
けるデータの処理時間を表す。Ｔ₂₄は、MIDI音響信号バ
ッファリング部２４において、バッファリングするデー
タ長に相当する時間である。Ｔ₄₃は、テンポ変更部４３
におけるデータの処理時間である。Ｔ₄₄は、オーディオ
音響信号バッファリング部４４において、バッファリン
グするデータ長に相当する時間である。

【００５１】次に、MIDI再生部１１において、ハードウ
ェアMIDI音源を利用し、オーディオ音響信号を同期させ
る場合の回路設計手法について説明する。

【００５２】ハードウェアMIDI音源は、音響信号変換部
２３およびMIDI音響信号バッファリング部２４に相当す
る。ハードウェアMIDI音源を利用した場合、MIDI演奏情
報が入力されてからMIDI音響信号に変換されるまでに要
する時間（Ｔ₂₃＋Ｔ₂₄）はほぼ０に等しいため、Ｄ₁₁は
（５）式より、Ｄ₁₁＝Ｔ₂₂と考えてよい。（２）式よ
り、次の（７）式が導かれる。Ｔ₄₃≦Ｔ₄₄−Ｔ₄₂・・・（７）上記（７）式を（６）式に代入すると、（８）式が導か
れる。Ｄ₁₂≦（Ｔ₄₄−Ｔ₄₂）＋Ｔ₄₄・・・（８）上記（８）式より（９）式が導かれる。Ｄ₁₂≦２×Ｔ₄₄−Ｔ₄₂・・・（９）

【００５３】Ｄ₁₁の最大値はＴ₂₂、Ｄ₁₂の最大値は（２
×Ｔ₄₄）である。ここで、例えば、Ｔ(offset)を１．０
秒と設定すると、Ｔ₂₂はＴ(offset)に比べて十分小さい
ので、（４）式より次の（１０）式と（１１）式が導か
れる。Ｔ(offset)≧Ｄ₁₂の最大値・・・（１０）Ｔ(offset)≧２×Ｔ₄₄・・・（１１）

【００５４】Ｔ(offset)を１．０秒と設定した場合、上
記（１１）式より、最大でＴ₄₄＝０．５秒と設定すれば
よい。即ち、オーディオ音響信号バッファリング部４４
でバッファリングするデータ長を最大０．５秒とすれば
よい。このとき、図７において、プレデコード処理開始
時刻は、オーディオ音響信号１再生開始時刻の０．５秒
だけ前に設定すればよい。

【００５５】尚、上述したＴ(offset)の値は、勿論１．
０秒以外の値に設定してもよい。但し、Ｔ(offset)の値
をあまり小さくすると、プレデコード処理が正しく行わ
れなくなる（プレデコード長がオーディオ復号部４２の
最小出力データ長よりも短くなる）恐れがある。また、
Ｔ(offset)の値をあまり大きくすると、テンポ変更情報
がオーディオ音響信号に反映されるまでの遅延時間が大
きくなってしまうので、Ｔ(offset)の値は、それらを考
慮した値に設定される。

【００５６】次に、MIDI再生部１１において、ソフトウ
ェアMIDI音源を利用し、オーディオ音響信号を同期させ
る場合の回路設計手法について説明する。尚、ここで、
ソフトウェアMIDI音源とは、波形演算、フィルタ演算等
を行って、ソフトウェア的にハードウェア音源をエミュ
レートする音源のことを指す。

【００５７】ソフトウェアMIDI音源は、音響信号変換部
２３およびMIDI音響信号バッファリング部２４に相当す
るが、上記ハードウェアMIDI音源と比較すると、MIDI演
奏情報が入力されてからMIDI音響信号に変換されるまで
に要する時間（Ｔ₂₃＋Ｔ₂₄）が大きいため、Ｔ(offset)
の値は、Ｄ₁₁とＤ₁₂の値を比較して決定される。また、
同期信号遅延部２５で設定される遅延時間Ｄ₂₅は、次の
（１２）式で表される。Ｄ₂₅＝Ｔ₂₃＋Ｔ₂₄・・・（１２）

【００５８】次に、MIDI再生部１１の処理動作につい
て、図８のフローチャートを参照して説明する。

【００５９】先ず、MIDI音響再生が指令され、MIDI演奏
情報がMIDI演奏情報変更部２２に供給されると、ステッ
プＳ１において、MIDI演奏情報変更部２２は、MIDI再生
時のテンポの初期値を設定し、MIDI演奏情報を音響信号
変換部２３に供給する。

【００６０】次に、ステップＳ２において、音響信号変
換部２３は、供給されたMIDI演奏情報に基づいてMIDI音
響信号の生成処理を開始する。生成されたMIDI音響信号
は、MIDI音響信号バッファリング部２４に供給され、一
時的に格納された後、出力され、ミキシング部１５に供
給される。

【００６１】ユーザが、テンポ入力部１３を操作するこ
とで、テンポ変更情報がテンポ変更時刻設定部１４から
テンポ変更情報記憶部２１を介して、MIDI演奏情報変更
部２２に供給されると、ステップＳ３において、MIDI演
奏情報変更部２２は、テンポ変更情報に基づいてテンポ
変更があるか否かを判定する。

【００６２】ステップＳ３において、テンポ変更がある
と判定された場合、ステップＳ４に進み、MIDI演奏情報
変更部２２は、供給されているMIDI演奏情報に対してテ
ンポ変更処理を行い、ステップＳ５に進む。ステップＳ
３において、テンポ変更がないと判定された場合、ステ
ップＳ４の処理はスキップされ、ステップＳ５に進む。

【００６３】ステップＳ５において、MIDI演奏情報変更
部２２は、供給されたMIDI演奏情報（MIDIイベント）に
オーディオ音響信号の再生開始命令が含まれているか否
かを判定する。

【００６４】ステップＳ５において、オーディオ音響信
号の再生開始命令が含まれていると判定された場合、ス
テップＳ６に進み、MIDI演奏情報変更部２２は、同期信
号を同期信号遅延部２５に供給する。同期信号遅延部２
５は、供給された同期信号を、所定の遅延時間だけ遅延
した後、オーディオ再生部１２に供給する。ステップＳ
５において、オーディオ音響信号の再生開始命令が含ま
れていないと判定された場合、ステップＳ６の処理はス
キップされ、ステップＳ７に進む。

【００６５】ステップＳ７において、MIDI演奏情報変更
部２２は、MIDI再生が終了したか否かを判定する。ステ
ップＳ７において、MIDI再生が終了していないと判定さ
れた場合、ステップＳ３に戻り、それ以降の処理が繰り
返し実行される。ステップＳ７において、MIDI再生が終
了したと判定された場合、処理動作は終了される。

【００６６】次に、MIDI演奏情報変更部２２の処理動作
について、図９のフローチャートを参照して説明する。

【００６７】先ず、MIDI演奏情報がMIDI演奏情報変更部
２２に供給されると、ステップＳ１１において、MIDI演
奏情報変更部２２は、MIDIイベント情報を１つ読み込
み、ステップＳ１２に進む。

【００６８】ステップＳ１２において、MIDI演奏情報変
更部２２は、テンポ変更情報記憶部２１から供給される
テンポ変更時刻（テンポ変更時刻設定部１４で設定され
た時刻）が、読み込んだMIDIイベント情報の発生時刻よ
り以前であるか否かを判定する。

【００６９】ステップＳ１２において、テンポ変更時刻
がMIDIイベント情報の発生時刻より以前であると判定さ
れた場合、ステップＳ１３に進み、MIDI演奏情報変更部
２２は、MIDIイベント情報の直前（テンポ変更時刻）に
テンポ変更MIDIイベントを挿入し、ステップＳ１４に進
む。ステップＳ１２において、テンポ変更時刻がMIDIイ
ベント情報の発生時刻より以前ではない（後である）と
判定された場合、ステップＳ１３の処理はスキップさ
れ、ステップＳ１４に進む。

【００７０】ステップＳ１４において、MIDI演奏情報変
更部２２は、処理したMIDIイベント情報を出力し、ステ
ップＳ１５に進む。ステップＳ１５において、MIDI演奏
情報変更部２２は、供給されたMIDI演奏情報の再生が終
了したか否かを判定する。ステップＳ１５において、MI
DI演奏情報の再生が終了していないと判定された場合、
ステップＳ１１に戻り、それ以降の処理が繰り返し実行
される。ステップＳ１５において、MIDI演奏情報の再生
が終了したと判定された場合、処理動作は終了される。

【００７１】次に、オーディオ再生部１２の処理動作に
ついて、図１０のフローチャートを参照して説明する。

【００７２】先ず、オーディオ情報がオーディオ復号部
４２に供給されると、ステップＳ２１において、プレデ
コード処理が行われる。即ち、オーディオ復号部４２
は、供給されたオーディオ情報の先頭の所定の部分を復
号し、生成したオーディオ音響信号をテンポ変更部４３
を介して、オーディオ音響信号バッファリング部４４に
供給する。

【００７３】ステップＳ２２において、オーディオ音響
信号バッファリング部４４は、MIDI再生部１１から同期
信号が供給された否かを判定する。

【００７４】ステップＳ２２において、同期信号が供給
されていないと判定された場合、ステップＳ２２に戻
る。ステップＳ２２において、同期信号が供給されたと
判定された場合、ステップＳ２３に進み、オーディオ音
響信号バッファリング部４４は、再生を開始する。

【００７５】ステップＳ２４において、テンポ変更部４
３は、テンポ変更情報記憶部４１から供給されるテンポ
変更情報に基づいて、テンポが変更された否かを判定す
る。

【００７６】ステップＳ２４において、テンポが変更さ
れたと判定された場合、ステップＳ２５に進み、テンポ
変更部４３は、供給されたオーディオ音響信号のテンポ
を変更し、変更したオーディオ音響信号をオーディオ音
響信号バッファリング部４４を介して出力する。ステッ
プＳ２４において、テンポが変更されていないと判定さ
れた場合、ステップＳ２５の処理はスキップされ、ステ
ップＳ２６に進む。

【００７７】ステップＳ２６において、テンポ変更部４
３は、オーディオ音響信号の再生が終了したか否かを判
定する。ステップＳ２６において、オーディオ音響信号
の再生が終了していないと判定された場合、ステップＳ
２４に戻り、それ以降の処理が繰り返し実行される。ス
テップＳ２６において、オーディオ音響信号の再生が終
了したと判定された場合、処理動作は終了される。

【００７８】次に、テンポ変更部４３の処理動作につい
て、図１１のフローチャートを参照して説明する。

【００７９】オーディオ音響信号がテンポ変更部４３に
供給されると、ステップＳ３１において、テンポ変更部
４３は、テンポを初期設定し、さらにパラメータａを設
定する。尚、ここで、パラメータａは前述したように
（１）式で表される。

【００８０】ステップＳ３２において、テンポ変更部４
３は、オーディオ情報をＮサンプルだけ読み込んで、Ｎ
／ａ個のサンプルを出力する。即ち、繰り返し再生の手
法を用いてテンポを変更する。

【００８１】ステップＳ３３において、テンポ変更部４
３は、テンポ変更情報記憶部４１から供給されるテンポ
変更時刻（テンポ変更時刻設定部１４で設定された時
刻）が出力サンプルの時刻より以前であるか否かを判定
する。

【００８２】ステップＳ３３において、テンポ変更時刻
が出力サンプルの時刻より以前であると判定された場
合、ステップＳ３４に進み、テンポ変更部４３は、パラ
メータａを再度設定し、ステップＳ３５に進む。ステッ
プＳ３３において、テンポ変更時刻が出力サンプルの時
刻より以前ではないと判定された場合、ステップＳ３４
の処理はスキップされ、ステップＳ３５に進む。

【００８３】ステップＳ３５において、テンポ変更部４
３は、入力された全てのオーディオ情報の再生が終了し
たか否かを判定する。ステップＳ３５において、入力さ
れた全てのオーディオ情報の再生が終了していないと判
定された場合、ステップＳ３２に戻り、それ以降の処理
が繰り返し実行される。ステップＳ３５において、入力
された全てのオーディオ情報の再生が終了したと判定さ
れた場合、処理動作は終了される。

【００８４】尚、第１の実施の形態においては、繰り返
し再生手法を用いて、テンポを変更するようにしたが、
テンポ変更はこの方法に限定されるものではない。

【００８５】図１２は、MIDI再生部１１の他の構成例を
示す図である。図１２の構成例は、図２の構成例から同
期信号遅延部２５を削除したもので、同期信号は、MIDI
音響信号バッファリング部２４から出力される。その他
の構成は、図２における場合と同様である。

【００８６】図１３は、オーディオ再生部１２の他の構
成例を示す図である。図１３の構成例では、図３の構成
例からテンポ変更部４３が削除されている。その他の構
成は、図３における場合と同様である。この図１３の構
成は、オーディオ符号化方式に、MPEG-4 Audio規格で採
用される予定のHVXC(Harmonic Vector Excitation Codi
ng)方式を利用することにより実現可能となる。

【００８７】そして、テンポ変更情報記憶部４１は、記
憶したテンポ変更情報をオーディオ復号部４２に供給す
る。オーディオ復号部４２は、オーディオ情報を、テン
ポ変更情報に基づいて、復号し、テンポを変更したオー
ディオ音響信号を生成する。生成されたオーディオ音響
信号は、オーディオ音響信号バッファリング部４４に供
給される。オーディオ音響信号バッファリング部４４
は、供給されたオーディオ音響信号を一時的に格納し、
その信号をMIDI再生部１１から供給される同期信号に同
期させて出力する。

【００８８】以上、第１の実施の形態においては、テン
ポの変更に関して説明してきたが、次に、第２の実施の
形態において、キーの変更に関して説明する。

【００８９】図１４は、本発明を適用した音楽再生装置
１の第２の実施の形態の構成を示すブロック図である。
図１４の音楽再生装置１は、図１のテンポ入力部１３お
よびテンポ変更時刻設定部１４を、それぞれキー入力部
７１およびキー変更時刻設定部７２に変更したものであ
る。キー変更時刻設定部７２は、キー入力部７１から供
給されるキー変更情報に含まれるキー変更時刻情報に対
して、所定の遅延時間を設定する。キー変更時刻が設定
されたキー変更情報は、MIDI再生部１１およびオーディ
オ再生部１２に供給される。尚、その他の図１と対応す
る部分には同じ符号を付してあるので、その説明は省略
する。

【００９０】図１５は、図１４のMIDI再生部１１の構成
例を示す図である。図１５のMIDI再生部１１は、図２の
テンポ変更情報記憶部２１をキー変更情報記憶部８１に
変更したものである。キー変更情報記憶部８１は、キー
変更時刻設定部７２から供給されるキー変更情報を記憶
し、記憶したキー変更情報をMIDI演奏情報変更部２２に
供給する。その他の図２と対応する部分には同じ符号を
付してあるので、その説明は省略する。

【００９１】図１６は、図１４のオーディオ再生部１２
の構成例を示す図である。図１６のオーディオ再生部１
２は、図３のテンポ変更情報記憶部４１およびテンポ変
更部４３を、それぞれキー変更情報記憶部９１およびキ
ー変更部９２に変更したものである。キー変更情報記憶
部９１は、キー変更時刻設定部７２から供給されるキー
変更情報を記憶し、記憶したキー変更情報をキー変更部
９２に供給する。キー変更部９２は、供給されたキー変
更情報に基づいて、オーディオ音響信号のキーを変更す
る。キーが変更されたオーディオ音響信号は、オーディ
オ音響信号バッファリング部４４に供給される。その他
の図３と対応する部分には同じ符号を付してあるので、
その説明は省略する。

【００９２】次に、図１５のMIDI演奏情報変更部２２に
おけるキー変更の処理動作について、図１７のフローチ
ャートを参照して説明する。

【００９３】先ず、MIDI再生が指令されると、ステップ
Ｓ４１において、MIDI演奏情報変更部２２は、キーを初
期設定し、さらにパラメータｋを設定する。ここで、ｋ
は本来の再生キーからの変更率で、次の（１３）式で定
義される。ｋ＝再生周波数／本来の再生周波数・・・（１３）

【００９４】ステップＳ４２において、MIDI演奏情報変
更部２２は、MIDIイベント情報を１つ読み込み、ステッ
プＳ４３に進む。

【００９５】ステップＳ４３において、MIDI演奏情報変
更部２２は、キー変更情報記憶部８１から供給されるキ
ー変更時刻（キー変更時刻設定部７２で設定された時
刻）がMIDIイベント発生時刻より以前であるか否かを判
定する。

【００９６】ステップＳ４３において、キー変更時刻が
MIDIイベント発生時刻より以前であると判定された場
合、ステップＳ４４に進み、MIDI演奏情報変更部２２
は、パラメータｋを再度設定し、ステップＳ４５に進
む。ステップＳ４３において、キー変更時刻がMIDIイベ
ント発生時刻より以前ではないと判定された場合、パラ
メータｋの再設定処理は行われず、ステップＳ４５に進
む。

【００９７】ステップＳ４５において、MIDI演奏情報変
更部２２は、MIDIイベント情報内のキー情報をｋに基づ
いて変更し、ステップＳ４６に進む。

【００９８】ステップＳ４６において、MIDI演奏情報変
更部２２は、処理したMIDIイベント情報を出力し、ステ
ップＳ４７に進む。

【００９９】ステップＳ４７において、MIDI演奏情報変
更部２２は、入力された全てのMIDI演奏情報の再生が終
了したか否かを判定する。ステップＳ４７において、入
力された全てのMIDI演奏情報の再生が終了していないと
判定された場合、ステップＳ４２に戻り、それ以降の処
理が繰り返し実行される。ステップＳ４７において、入
力された全てのMIDI演奏情報の再生が終了したと判定さ
れた場合、処理動作は終了される。

【０１００】次に、キー変更部９２におけるキー変更の
処理動作について、図１８のフローチャートを参照して
説明する。

【０１０１】先ず、オーディオ再生が指令されると、ス
テップＳ５１において、キー変更部９２は、キーを初期
設定し、かつパラメータｋを設定する。

【０１０２】ステップＳ５２において、キー変更部９２
は、オーディオ情報をＮサンプル読み込んで、データの
補間処理および間引き処理を行い、本来の波形情報を時
間軸で圧縮または伸張したサンプルを生成する。例え
ば、キーを上げるときは、図１９に示すように、オーデ
ィオ音響信号の読み出し速度を本来の読み出し速度（サ
ンプリング速度）よりも速め、オーディオ音響信号を一
部分繰り返しながら読み出す。また、キーを下げるとき
は、オーディオ音響信号の読み出し速度を本来の読み出
し速度（サンプリング速度）よりも遅くし、オーディオ
音響信号を間隔をあけて読み出す。尚、オーディオ音響
信号の再生時間は、キーの上げ下げに関わらず、一定で
ある。キー変更部９２は、生成されたサンプルに対して
繰り返し再生手法によりキー変更を施し、Ｎ個のサンプ
ルを出力する。

【０１０３】ステップＳ５３において、キー変更部９２
は、キー変更情報記憶部９１から供給されたキー変更時
刻（キー変更時刻設定部７２で設定された時刻）が出力
サンプルの時刻より以前であるか否かを判定する。

【０１０４】ステップＳ５３において、キー変更時刻が
出力サンプルの時刻より以前であると判定された場合、
ステップＳ５４に進み、キー変更部９２は、キー変更情
報に基づいて、パラメータｋを再度設定し、ステップＳ
５５に進む。ステップＳ５３において、キー変更時刻が
出力サンプルの時刻より以前ではないと判定された場
合、パラメータｋの変更処理は行われず、ステップＳ５
５に進む。

【０１０５】ステップＳ５５において、キー変更部９２
は、入力された全てのオーディオ情報の再生が終了した
か否かを判定する。ステップＳ５５において、入力され
た全てのオーディオ情報の再生が終了していないと判定
された場合、ステップＳ５２に戻り、それ以降の処理が
繰り返し実行される。ステップＳ５５において、入力さ
れた全てのオーディオ情報の再生が終了したと判定され
た場合、処理動作は終了される。

【０１０６】尚、本発明は、上述した実施の形態に限定
されることなく、本発明の趣旨の範囲で様々な変形が可
能である。

【０１０７】また、本明細書中において、上記処理を実
行するコンピュータプログラムをユーザに提供する提供
媒体には、磁気ディスク、CD-ROMなどの情報記録媒体の
他、インターネット、ディジタル衛星などのネットワー
クによる伝送媒体も含まれる。

【０１０８】

【発明の効果】以上の如く、請求項１に記載の情報処理
装置、請求項３に記載の情報処理方法および請求項４に
記載の提供媒体によれば、入力された音楽の要素の変更
情報が、MIDI音響信号およびオーディオ音響信号に反映
されるまでの遅延時間を補償するようにしたので、MIDI
音響信号とオーディオ音響信号の正確な同期を実現する
ことが可能となる。

【図面の簡単な説明】

【図１】本発明を適用した音楽再生装置１の第１の実施
の形態の構成を示すブロック図である。

【図２】MIDI再生部１１の構成例を示す図である。

【図３】オーディオ再生部１２の構成例を示す図であ
る。

【図４】オーディオ音響信号バッファリング部４４の構
成例を示す図である。

【図５】データ記憶部６２を説明するための図である。

【図６】MIDI音響信号にオーディオ音響信号を同期させ
るための条件を説明するための図である。

【図７】プレデコード処理を説明するための図である。

【図８】MIDI再生部１１の処理動作を説明するためのフ
ローチャートである。

【図９】MIDI演奏情報変更部２２の処理動作を説明する
ためのフローチャートである。

【図１０】オーディオ再生部１２の処理動作を説明する
ためのフローチャートである。

【図１１】テンポ変更部４３の処理動作を説明するため
のフローチャートである。

【図１２】MIDI再生部１１の他の構成例を示す図であ
る。

【図１３】オーディオ再生部１２の他の構成例を示す図
である。

【図１４】本発明を適用した音楽再生装置１の第２の実
施の形態の構成を示すブロック図である。

【図１５】MIDI再生部１１の構成例を示す図である。

【図１６】オーディオ再生部１２の構成例を示す図であ
る。

【図１７】MIDI演奏情報変更部２２の処理動作を説明す
るためのフローチャートである。

【図１８】キー変更部９２の処理動作を説明するための
フローチャートである。

【図１９】オーディオ音響信号のキー変更を説明するた
めの図である。

【図２０】従来の音楽再生装置のブロック図である。

【符号の説明】

１音楽再生装置，１１ MIDI再生部，１２オー
ディオ再生部，１３テンポ入力部，１４テンポ変
更時刻設定部，１５ミキシング部，１６スピー
カ，２１，４１，テンポ変更情報記憶部，２２
MIDI演奏情報変更部，２３音響信号変換部，２４
MIDI音響信号バッファリング部，２５同期信号遅延
部，４２オーディオ復号部，４３テンポ変更
部，４４オーディオ音響信号バッファリング部，６
１データ書込部，６２データ記憶部，６３デー
タ読出部，７１キー入力部，７２キー変更時刻
設定部，８１，９１キー変更情報記憶部，９２
キー変更部

───────────────────────────────────────────────────── フロントページの続き (72)発明者辻実東京都品川区北品川６丁目７番35号ソニー株式会社内Ｆターム(参考） 5D045 BA02 5D378 JC09 LA03 LA28 MM13 MM33 MM65 MM94 QQ05 QQ27 9A001 HH34 KK45

Claims

【特許請求の範囲】

【請求項１】 MIDI演奏情報とオーディオ情報を再生す
る情報処理装置において、 MIDI演奏情報を再生するMIDI再生手段と、前記MIDI再生手段により生成された同期信号に同期して
オーディオ情報を再生するオーディオ再生手段と、再生時の音楽の要素の変更情報を入力する入力手段と、前記入力手段により入力された変更情報が、前記MIDI再
生手段から出力されるMIDI音響信号に反映されるまでの
遅延時間および前記オーディオ再生手段から出力される
オーディオ音響信号に反映されるまでの遅延時間を補償
する補償手段と、前記MIDI音響信号と前記オーディオ
音響信号をミキシングするミキシング手段とを備えるこ
とを特徴とする情報処理装置。
【請求項２】前記音楽の要素は、テンポまたはキーで
あることを特徴とする請求項１に記載の情報処理装置。
【請求項３】 MIDI演奏情報とオーディオ情報を再生す
る情報処理装置の情報処理方法において、 MIDI演奏情報を再生するMIDI再生ステップと、前記MIDI再生ステップで生成された同期信号に同期して
オーディオ情報を再生するオーディオ再生ステップと、再生時の音楽の要素の変更情報を入力する入力ステップ
と、前記入力ステップで入力された変更情報が、前記MIDI再
生ステップで出力されるMIDI音響信号に反映されるまで
の遅延時間および前記オーディオ再生ステップで出力さ
れるオーディオ音響信号に反映されるまでの遅延時間を
補償する補償ステップと、前記MIDI音響信号と前記オーディオ音響信号をミキシン
グするミキシングステップとを含むことを特徴とする情
報処理方法。
【請求項４】 MIDI演奏情報とオーディオ情報を再生す
る情報処理装置に、 MIDI演奏情報を再生するMIDI再生ステップと、前記MIDI再生ステップで生成された同期信号に同期して
オーディオ情報を再生するオーディオ再生ステップと、再生時の音楽の要素の変更情報を入力する入力ステップ
と、前記入力ステップで入力された変更情報が、前記MIDI再
生ステップで出力されるMIDI音響信号に反映されるまで
の遅延時間および前記オーディオ再生ステップで出力さ
れるオーディオ音響信号に反映されるまでの遅延時間を
補償する補償ステップと、前記MIDI音響信号と前記オーディオ音響信号をミキシン
グするミキシングステップとを含む処理を実行させるコ
ンピュータが読み取り可能なプログラムを提供すること
を特徴とする提供媒体。