JP4259422B2 - Performance control device and program - Google Patents

Performance control device and program Download PDF

Info

Publication number
JP4259422B2
JP4259422B2 JP2004229424A JP2004229424A JP4259422B2 JP 4259422 B2 JP4259422 B2 JP 4259422B2 JP 2004229424 A JP2004229424 A JP 2004229424A JP 2004229424 A JP2004229424 A JP 2004229424A JP 4259422 B2 JP4259422 B2 JP 4259422B2
Authority
JP
Japan
Prior art keywords
time
performance
performance information
data
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2004229424A
Other languages
Japanese (ja)
Other versions
JP2006047760A (en
Inventor
春喜 上原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Corp
Original Assignee
Yamaha Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Corp filed Critical Yamaha Corp
Priority to JP2004229424A priority Critical patent/JP4259422B2/en
Priority to US11/196,213 priority patent/US7332666B2/en
Publication of JP2006047760A publication Critical patent/JP2006047760A/en
Priority to US11/929,733 priority patent/US7622664B2/en
Application granted granted Critical
Publication of JP4259422B2 publication Critical patent/JP4259422B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Electrophonic Musical Instruments (AREA)

Description

本発明は、発音指示情報と発音タイミングを規定する時間情報とを含んでいる演奏情報を扱う演奏制御装置及びプログラムに関する。   The present invention relates to a performance control device and a program for handling performance information including sound generation instruction information and time information for defining sound generation timing.

従来、下記特許文献1に示される再生記録装置等のように、ピアノ等の楽器演奏練習等を目的として、記録媒体に記録された、映像情報と該映像に応じた先生の演奏による演奏情報とを同期再生し、生徒であるユーザが、再生表示される映像を見ながら、あるいは演奏情報の再生音を聴きながら、自動ピアノ等を演奏し、その演奏に応じた演奏情報(例えば、MIDI(Musical Instruments Digital Interface)規格に準拠したデータ)を所望の記憶媒体に記録できるようにした演奏制御装置が知られている。
特開2003−208169号公報
Conventionally, as in the playback and recording apparatus shown in Patent Document 1 below, for example, the practice of playing an instrument such as a piano, video information and performance information by a teacher's performance corresponding to the video, The user who is a student plays an automatic piano or the like while watching the reproduced video or listening to the playback sound of the performance information, and playing information corresponding to the performance (for example, MIDI (Musical 2. Description of the Related Art There is known a performance control apparatus that can record data conforming to the Instruments Digital Interface) standard) on a desired storage medium.
JP 2003-208169 A

しかしながら、上記特許文献1の演奏制御装置では、例えば、映像を見ながら生徒が行う演奏をMIDI等の演奏情報として記録する場合、映像において、先頭あるいは途中においても、先生の説明等のナレーションがある期間においては、演奏情報の記録は実行中なのに、生徒は通常、演奏を行わないので、発音指示情報(発音イベント)が長い時間記録されず、長時間に亘って発音が無い「発音空白時間」を有する演奏情報が記録されることになる。   However, in the performance control device disclosed in Patent Document 1, for example, when a performance performed by a student while watching a video is recorded as performance information such as MIDI, there is a narration such as the explanation of the teacher at the beginning or in the middle of the video. During the period, although performance information is being recorded, students usually do not perform, so the pronunciation instruction information (pronunciation event) is not recorded for a long time, and there is no pronunciation over a long period of time. The performance information having “” is recorded.

そして、この記録された演奏情報を、例えば、映像とは別に単独で再生する場合、発音空白時間では発音がなされないので、長時間の無音期間が生じることになる。その結果、現在が演奏情報の再生中なのかどうかもわからず、また、1つの演奏情報について、正味の演奏時間が短いのにもかかわらず、終わりまで再生するのに時間がかかり、不便であるという問題があった。   For example, when the recorded performance information is reproduced separately from the video, for example, no sound is produced during the pronunciation blank time, so that a long silence period occurs. As a result, it is not known whether the performance information is currently being played back, and it takes time to play back one piece of performance information to the end even though the net performance time is short, which is inconvenient. There was a problem.

本発明は上記従来技術の問題を解決するためになされたものであり、その目的は、長時間の発音空白時間を示す情報を有する演奏情報であっても、実際の長い発音空白時間が生じない再生を実現することができる演奏制御装置及びプログラムを提供することにある。   The present invention has been made in order to solve the above-described problems of the prior art, and an object of the present invention is to prevent an actual long pronunciation blank time from occurring even if the performance information includes information indicating a long pronunciation blank time. An object is to provide a performance control apparatus and program capable of realizing reproduction.

上記目的を達成するために本発明の請求項1の演奏制御装置は、発音指示情報と発音タイミングを規定する時間情報とを少なくとも含んでいる演奏情報を読み出す演奏情報読み出し手段と、前記演奏情報読み出し手段により読み出された演奏情報を出力する演奏情報出力制御手段と、前記読み出された演奏情報が前記演奏情報出力制御手段により出力されている最中の任意の時において、ユーザからの指定の受け付けに基づいて変換処理の実行可否を指定する指定手段とを有し、前記演奏情報出力制御手段は、前記指定手段により前記変換処理の実行許可が指定されていない場合は、前記読み出された演奏情報中の時間情報の長さにかかわらず、前記演奏情報中の発音空白時間を変換することなく前記演奏情報を出力する一方、前記指定手段により前記変換処理の実行許可が指定されている場合においては、前記指定手段により前記変換処理の実行許可が指定されたタイミング以降に前記演奏情報読み出し手段により読み出された演奏情報中の時間情報について、前記読み出された演奏情報中の時間情報が、第1の所定時間より長い発音空白時間を示すときに、該発音空白時間を、前記第1の所定時間より短い第2の所定時間に変換しつつ前記演奏情報を出力するように制御することを特徴とする。 In order to achieve the above object, a performance control apparatus according to claim 1 of the present invention comprises performance information reading means for reading performance information including at least sound generation instruction information and time information for defining sound generation timing, and the performance information reading. Performance information output control means for outputting performance information read by the means, and at any time during which the read performance information is being output by the performance information output control means Designating means for designating whether or not the conversion process can be executed based on the reception, and the performance information output control means reads the read out information when the designation means does not designate execution permission for the conversion process. Regardless of the length of the time information in the performance information, the performance information is output without converting the pronunciation blank time in the performance information. In the case where more execution permission of the conversion process is specified, the time information of the performance in the information read by the performance information reading means to the conversion after the timing in which execution permission has been designated processing by the specifying means When the time information in the read performance information indicates a pronunciation blank time longer than the first predetermined time, the pronunciation blank time is converted to a second predetermined time shorter than the first predetermined time. However, the performance information is controlled to be output.

上記目的を達成するために本発明の請求項2の演奏制御プログラムは、発音指示情報と発音タイミングを規定する時間情報とを少なくとも含んでいる演奏情報を読み出す演奏情報読み出しステップと、前記演奏情報読み出しステップにより読み出された演奏情報を出力する演奏情報出力制御ステップと、前記読み出された演奏情報が前記演奏情報出力制御ステップにより出力されている最中の任意の時において、ユーザからの指定の受け付けに基づいて変換処理の実行可否を指定する指定ステップとをコンピュータに実行させるための演奏制御プログラムであり、前記演奏情報出力制御ステップは、前記指定ステップにより前記変換処理の実行許可が指定されていない場合は、前記読み出された演奏情報中の時間情報の長さにかかわらず、前記演奏情報中の発音空白時間を変換することなく前記演奏情報を出力する一方、前記指定ステップにより前記変換処理の実行許可が指定されている場合においては、前記指定ステップにより前記変換処理の実行許可が指定されたタイミング以降に前記演奏情報読み出しステップにより読み出された演奏情報中の時間情報について、前記読み出された演奏情報中の時間情報が、第1の所定時間より長い発音空白時間を示すときに、該発音空白時間を、前記第1の所定時間より短い第2の所定時間に変換しつつ前記演奏情報を出力するように制御することを特徴とする。 In order to achieve the above object, a performance control program according to claim 2 of the present invention comprises a performance information reading step for reading performance information including at least sound generation instruction information and time information for defining sound generation timing; A performance information output control step for outputting the performance information read out by the step, and at any time when the read performance information is being output by the performance information output control step, A performance control program for causing the computer to execute a designation step for designating whether or not to execute the conversion process based on acceptance, wherein the performance information output control step is designated to permit the execution of the conversion process by the designation step. If there is not, the previous time is displayed regardless of the length of the time information in the read performance information. While outputting the performance information without converting pronunciation blank time in the performance information, when the execution permission of the conversion processing is specified by the specifying step, said conversion processing execution permission by the specifying step When the time information in the performance information read out by the performance information reading step after the designated timing indicates a pronunciation blank time longer than a first predetermined time. In addition, control is performed so that the performance information is output while the pronunciation blank time is converted into a second predetermined time shorter than the first predetermined time.

なお、請求項記載のプログラムを格納したコンピュータ読み取り可能な記憶媒体は、本発明を構成する。なお、上記括弧内の符号は例示である。 A computer-readable storage medium storing the program according to claim 2 constitutes the present invention. In addition, the code | symbol in the said parenthesis is an illustration.

本発明によれば、長時間の発音空白時間を示す情報を有する演奏情報であっても、実際の長い発音空白時間が生じない再生を実現することができる。   According to the present invention, even with performance information having information indicating a long pronunciation blank time, it is possible to realize reproduction in which an actual long pronunciation blank time does not occur.

以下、本発明の実施の形態を図面を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図1は、本発明の一実施の形態に係る演奏制御装置を含んで成る同期演奏制御システムの全体構成を示す外観図である。この同期演奏制御システムは、演奏制御装置15と自動ピアノ20とビデオ装置30とから構成される。演奏制御装置15には、電源コード16が接続されている。演奏制御装置15と自動ピアノ20とは、MIDI(Musical Instrument Digital Interface)信号用ケーブル17で通信可能に接続され、さらに、両者は電源ケーブル18で接続されている。自動ピアノ20は、鍵盤21、ペダル22等を備えた電子鍵盤楽器である。ビデオ装置30は表示装置32を備え、複合ケーブル29で演奏制御装置15に接続されている。なお、MIDI信号用ケーブル17、複合ケーブル29は一例であり、通信の手段としては、無線を含む他の手段を採用してもよい。   FIG. 1 is an external view showing the overall configuration of a synchronous performance control system including a performance control apparatus according to an embodiment of the present invention. This synchronous performance control system includes a performance control device 15, an automatic piano 20, and a video device 30. A power cord 16 is connected to the performance control device 15. The performance controller 15 and the automatic piano 20 are communicably connected via a MIDI (Musical Instrument Digital Interface) signal cable 17, and both are further connected by a power cable 18. The automatic piano 20 is an electronic keyboard instrument that includes a keyboard 21, a pedal 22, and the like. The video device 30 includes a display device 32 and is connected to the performance control device 15 by a composite cable 29. Note that the MIDI signal cable 17 and the composite cable 29 are merely examples, and other means including wireless may be adopted as means for communication.

図2は、上記同期演奏制御システムの全体構成を示すブロック図である。   FIG. 2 is a block diagram showing the overall configuration of the synchronous performance control system.

まず、演奏制御装置15は、CPU1に、バス26を介して、RAM2、ROM3、入出力インターフェイス6、バックアップRAM11、ソリッドステートリレー14、MIDIインターフェイス12、DMAC(ダイレクト・メモリ・アクセス・クロック)9、ハードティスクインターフェイス19、RTC(リアルタイム・クロック)8及びビデオ装置用インターフェイス25が接続されて構成される。   First, the performance controller 15 sends the CPU 1 via the bus 26 to the RAM 2, ROM 3, input / output interface 6, backup RAM 11, solid state relay 14, MIDI interface 12, DMAC (direct memory access clock) 9, The hard disk interface 19, the RTC (real time clock) 8, and the video device interface 25 are connected.

CPU1は、演奏制御装置15全体を制御する。RAM2は、演奏データ、テキストデータ等の各種入力情報、各種フラグやバッファデータ及び演算結果等を一時的に記憶する。ROM3は、CPU1が実行する制御プログラムや各種テーブルデータ等を記憶する。入出力インターフェイス6には、表示部5及び操作部7が接続されている。表示部5は、LCD等で構成され、RAM2に記憶されたデータ、メッセージ、楽譜等の各種情報を表示する。操作部7は、演奏制御装置15に対する各種入力指示に用いられる。   The CPU 1 controls the performance controller 15 as a whole. The RAM 2 temporarily stores various input information such as performance data and text data, various flags, buffer data, calculation results, and the like. The ROM 3 stores a control program executed by the CPU 1 and various table data. A display unit 5 and an operation unit 7 are connected to the input / output interface 6. The display unit 5 is configured by an LCD or the like, and displays various information such as data, messages, and musical scores stored in the RAM 2. The operation unit 7 is used for various input instructions to the performance control device 15.

RTC8は、タイマ割り込み処理における割り込み時間や各種時間を計時する。DMAC9は、フロッピー(登録商標)ディスク10aに記憶されたデータをフロッピー(登録商標)ディスクドライブ10を介してRAM2へ読み込む。MIDIインターフェイス12は、MIDI信号用ケーブル17を介して、演奏制御装置15と自動ピアノ20との間のMIDI信号の送受信を可能にする。電源13は、演奏制御装置15全体に電力を供給する。また、電源13は、ソリッドステートリレー14及び電源ケーブル18を介して、自動ピアノ20にも電力を供給する。上記ソリッドステートリレー14は、所定の時刻もしくは時間でCPU1が出力する指示に従って、オン状態またはオフ状態をとる。ハードティスクインターフェイス19は、供給される演奏データ等の各種データをハードディスク(HDD)35に記憶させる。   The RTC 8 measures the interrupt time and various times in the timer interrupt process. The DMAC 9 reads the data stored in the floppy (registered trademark) disk 10 a into the RAM 2 through the floppy (registered trademark) disk drive 10. The MIDI interface 12 enables transmission / reception of MIDI signals between the performance control device 15 and the automatic piano 20 via the MIDI signal cable 17. The power source 13 supplies power to the entire performance control device 15. The power supply 13 also supplies power to the automatic piano 20 via the solid state relay 14 and the power cable 18. The solid state relay 14 is turned on or off in accordance with an instruction output by the CPU 1 at a predetermined time or time. The hard disk interface 19 stores various data such as supplied performance data in a hard disk (HDD) 35.

複合ケーブル29は、ビデオ装置用インターフェイス25に接続され、自動ピアノ20とビデオ装置30との間で、映像信号、オーディオ信号、及びMIDI信号の送受信を可能とする。   The composite cable 29 is connected to the video device interface 25 and enables transmission / reception of video signals, audio signals, and MIDI signals between the automatic piano 20 and the video device 30.

ビデオ装置30は、上記表示装置32のほか、DVDまたはビデオテープ等の記録媒体31、フラッシュメモリ等の記録媒体34、及び発音装置33を備える。記録媒体31には、映像データ及びオーディオデータを含んで成るビデオデータvdが複数記憶されると共に、記録媒体34には、各ビデオデータvdに対応するMIDIの演奏データ群mdGが記憶されている。表示装置32は、ビデオデータvd中の映像データに基づく映像を表示でき、発音装置33は、ビデオデータvd中のオーディオデータに基づく楽音を発生させることができる。   In addition to the display device 32, the video device 30 includes a recording medium 31 such as a DVD or a video tape, a recording medium 34 such as a flash memory, and a sound generator 33. The recording medium 31 stores a plurality of video data vd including video data and audio data, and the recording medium 34 stores a MIDI performance data group mdG corresponding to each video data vd. The display device 32 can display a video based on the video data in the video data vd, and the sound generation device 33 can generate a musical sound based on the audio data in the video data vd.

自動ピアノ20は、発音装置23及び演奏ガイド装置24を備える。発音装置23は、いずれも図示しない音源回路、効果回路及びサウンドシステムを有し、鍵盤21による演奏音をリアルタイムに発生させるほか、演奏データに基づいて、各鍵に設けられた不図示の鍵駆動用のソレノイドを駆動することにより、演奏データに従った自動演奏音も発生させる。演奏ガイド装置24は、例えば、鍵盤21の各鍵を演奏データに従って発光させるものであり、演奏練習に用いることができる。なお、自動ピアノ20は、奏者による鍵盤21及びペダル22の動作を検出し、これに基づいて演奏制御装置15が演奏データを生成することもできるようになっている。   The automatic piano 20 includes a sounding device 23 and a performance guide device 24. The sound generation device 23 includes a tone generator circuit, an effect circuit, and a sound system (not shown). The sound generator 23 generates a performance sound from the keyboard 21 in real time, and a key drive (not shown) provided for each key based on performance data. The automatic performance sound according to the performance data is also generated by driving the solenoid. The performance guide device 24, for example, emits each key of the keyboard 21 according to performance data, and can be used for performance practice. The automatic piano 20 detects the operation of the keyboard 21 and the pedal 22 by the player, and the performance control device 15 can also generate performance data based on this.

図3は、演奏制御装置15の操作パネルの平面図である。操作パネルには、上記表示部5、操作部7が含まれる。操作部7には、電源キー、PLAY/PAUSEキー、STOPキー、CS(キャンセルスペース)キー36、SS(スキップスペース)キー37、及び上下カーソルキー27、28等、各種機能キーが含まれる。   FIG. 3 is a plan view of the operation panel of the performance control device 15. The operation panel includes the display unit 5 and the operation unit 7. The operation unit 7 includes various function keys such as a power key, a PLAY / PAUSE key, a STOP key, a CS (cancel space) key 36, an SS (skip space) key 37, and up and down cursor keys 27 and 28.

図4は、記録媒体31、34に記憶されたビデオデータvd及び演奏データ群mdGのデータ構成を示す概念図である。   FIG. 4 is a conceptual diagram showing a data structure of the video data vd and the performance data group mdG stored in the recording media 31 and 34.

ビデオデータvdは、例えば教習用に記録され、撮像した先生の演奏風景(鍵盤における指の動き等)の映像と、先生による説明等のナレーションの音声とを記録したものである。また、演奏データ群mdGは、ビデオデータvdの再生に同期させて再生すべき模範の演奏等をMIDI形式で記録したものである。演奏データ群mdGは、別途作成されたものが、事後的にビデオデータvdに対応付けされる場合もあるが、上記先生の演奏風景の撮像と並行して先生の演奏をデータ化することで対応付けされつつリアルタイムに記録される場合もある。演奏データ群mdGは、自動ピアノ20においては演奏ガイドにも利用することができる。   The video data vd is recorded for training, for example, and is recorded as an image of the teacher's performance scene (such as finger movement on the keyboard) and voice of narration such as explanation by the teacher. Further, the performance data group mdG is a record of exemplary performances and the like to be reproduced in synchronization with the reproduction of the video data vd in the MIDI format. The performance data group mdG, which is created separately, may later be associated with the video data vd, but it can be handled by converting the teacher's performance into data in parallel with the imaging of the teacher's performance scenery. Sometimes it is recorded in real time. The performance data group mdG can also be used as a performance guide in the automatic piano 20.

図4に示すように、記録媒体31は、映像トラックと2チャンネル(L/R)のオーディオトラックとを有し、ビデオデータvd中の映像データは、映像トラックに記録される。映像データは、2トラックで1フレームを構成する一般的な構造を有し、例えば、第1トラック43と第2トラック44とに1フレーム分の画像データが記録されている。また、オーディオデータは、一方の音声信号チャンネル、例えばLチャンネルにのみ一般的な態様で記録されているが、他方のチャンネル、例えばRチャンネルには記録されていない。Rチャンネルには、後述するLTCが、一定の時間間隔(例えば30ms)で多数記録されている。   As shown in FIG. 4, the recording medium 31 has a video track and a two-channel (L / R) audio track, and the video data in the video data vd is recorded on the video track. The video data has a general structure in which one frame is composed of two tracks. For example, image data for one frame is recorded on the first track 43 and the second track 44. Audio data is recorded in a general manner only on one audio signal channel, for example, the L channel, but is not recorded on the other channel, for example, the R channel. In the R channel, a large number of later-described LTCs are recorded at regular time intervals (for example, 30 ms).

一方、記録媒体34には、ビデオデータvdに対応する演奏データ群mdGが記憶されている。本実施の形態では、ビデオデータvdに対応する演奏データ群mdG中の個々の演奏データは、演奏データmd(1)、md(2)、md(3)・・・と示されるように、複数存在するものとするが、対応する演奏データは1つであってもよい。以降、個々の演奏データを「演奏データmd」と記す。個々の演奏データmdには、ファイル名、データ容量、テンポ、拍子、対応乃至関連する映像の名称等の各情報で構成される「曲情報」が付加されており、これらが一緒に記憶される。上記ファイル名の情報は、各演奏データmd毎に異なるユニークな(一意の)情報であり、例えば、当該演奏データmdを記録した装置、及び記録開始時刻等の情報を含んでいる。   On the other hand, the recording medium 34 stores a performance data group mdG corresponding to the video data vd. In the present embodiment, each piece of performance data in the performance data group mdG corresponding to the video data vd includes a plurality of performance data md (1), md (2), md (3). Although it is assumed that there is one, the corresponding performance data may be one. Hereinafter, each piece of performance data is referred to as “performance data md”. Each piece of performance data md is added with “song information” composed of information such as a file name, data capacity, tempo, time signature, name of the corresponding or related video, and these are stored together. . The file name information is unique (unique) information that differs for each piece of performance data md, and includes, for example, information about the device that recorded the piece of performance data md, the recording start time, and the like.

図4では、ビデオデータvdのシリアル再生に際し、対応して再生されるべき個々の演奏データmdが時系列的に表されているが、実際には、各演奏データmd自体に再生開始時刻の情報は無い。従って、ビデオデータvdの再生時には、演奏データmdとビデオデータvdとの対応関係を何らかの手段でとって再生を同期させる必要があるが、これは、LTCによって実現される。   In FIG. 4, the individual performance data md to be reproduced corresponding to the serial reproduction of the video data vd is shown in time series, but actually, the performance start information is included in each performance data md itself. There is no. Therefore, at the time of reproduction of the video data vd, it is necessary to synchronize the reproduction by taking the correspondence between the performance data md and the video data vd by some means, which is realized by LTC.

まず、LTCは、SMTPE(Society of Motion Picture and Television Engineers)に準拠したタイムコードであり、図4に示すように、時間情報41と、ユーザーズビットに記憶されたファイル特定情報42とを含んで成る。演奏制御装置15のハードディスク35には、ファイル特定情報42と演奏データmdとを1対1に対応付けたデータベースが予め記憶されており、ファイル特定情報42により、演奏データmdが1つ特定される。上記データベースには、例えば、ファイル特定情報42と、対応する演奏データmdのファイル名との組み合わせが複数登録されている。そして、具体的には、ビデオデータvdのシリアル再生時において、演奏制御装置15は、LTCを読み出す度に、当該LTC中のファイル特定情報42に対応する演奏データmdを、上記データベースを参照して特定し、該特定した演奏データmdを、当該LTCの読み出しタイミングで再生されるべき「再生対象の演奏データ」であるとする。   First, LTC is a time code based on SMTPE (Society of Motion Picture and Television Engineers), and includes time information 41 and file specifying information 42 stored in user bits as shown in FIG. . The hard disk 35 of the performance controller 15 stores in advance a database in which the file identification information 42 and the performance data md are associated with each other in one-to-one correspondence. The file identification information 42 identifies one piece of performance data md. . In the database, for example, a plurality of combinations of file specifying information 42 and file names of corresponding performance data md are registered. Specifically, at the time of serial reproduction of the video data vd, the performance control device 15 refers to the database for the performance data md corresponding to the file specifying information 42 in the LTC every time the LTC is read. It is assumed that the specified performance data md is “performance data to be reproduced” to be reproduced at the LTC read timing.

一方、時間情報41は、現在シリアル再生しているビデオデータvdの先頭からの時刻(絶対時間)を指定する情報であり、映像データの各フレームに対応した時、分、秒までの情報が含まれている。時間情報41により、現在、すなわち、当該LTC乃至時間情報41が読み出されたタイミングで、上記「再生対象の演奏データ」のどの時間的位置を再生すべきかが規定される。これにより、ビデオデータvdの再生に際し、対応する演奏データmdの再生の同期がとられる。   On the other hand, the time information 41 is information for designating the time (absolute time) from the beginning of the video data vd currently being serially reproduced, and includes information up to the hour, minute and second corresponding to each frame of the video data. It is. The time information 41 defines which time position of the “performance data to be reproduced” should be reproduced at the present time, that is, at the timing when the LTC or the time information 41 is read out. Thereby, when reproducing the video data vd, the reproduction of the corresponding performance data md is synchronized.

なお、時間的に隣接する2つのLTCのユーザーズビットを1組とし、1組中の2つのLTCで、対応する演奏データmdとその再生タイミングが規定されるようにしてもよい。その場合、例えば、1つのLTCのユーザーズビットが32ビットのデータであるとすると、32ビットのうちの1ビットを、同組中のLTCのうち前側のLTCか後ろ側のLTCかを区別するために用いてもよい。   Note that the user bits of two LTCs adjacent in time may be set as one set, and the corresponding performance data md and the reproduction timing thereof may be defined by two LTCs in the set. In this case, for example, if the user bits of one LTC are 32-bit data, one bit of the 32 bits is distinguished from the front LTC or the rear LTC of the LTCs in the group. You may use for.

本同期演奏制御システムを教習用に用いる一例として、本実施の形態では、生徒は、自動ピアノ20に着き、表示装置32が見えるようにビデオ装置30を設置する。そして、ビデオ装置30において、ビデオデータvdの再生をスタートさせる。すると、ビデオデータvd中の映像トラックの映像データが表示装置32に表示されると共に、ビデオデータvd中のオーディオトラックのオーディオデータ(図4の例ではLチャンネルのデータ)が発音装置33から発音される。生徒は、それらを見聞きしながら練習を行う。オーディオトラックの信号はさらに、複合ケーブル29を介して演奏制御装置15に送信され、LTCが分離される。また、ビデオデータvdの再生に同期して、後述する処理により、対応する演奏データmdがビデオ装置30の記録媒体31から読み出され、それが後述の所定の処理を経て自動ピアノ20へ送られ、自動ピアノ20の発音装置23から楽音が発生すると共に、モードによっては演奏ガイド装置24による演奏ガイドもなされる。   As an example of using this synchronized performance control system for teaching, in this embodiment, the student arrives at the automatic piano 20 and installs the video device 30 so that the display device 32 can be seen. Then, the video device 30 starts reproduction of the video data vd. Then, the video data of the video track in the video data vd is displayed on the display device 32, and the audio data of the audio track in the video data vd (L channel data in the example of FIG. 4) is generated from the sound generator 33. The Students practice while watching and listening to them. The audio track signal is further transmitted to the performance controller 15 via the composite cable 29, and the LTC is separated. Further, in synchronization with the reproduction of the video data vd, the corresponding performance data md is read from the recording medium 31 of the video apparatus 30 by a process described later, and is sent to the automatic piano 20 through a predetermined process described later. A musical tone is generated from the sound generation device 23 of the automatic piano 20, and a performance guide is also provided by the performance guide device 24 depending on the mode.

なお、これに限られず、ビデオデータvdの再生時においては、ビデオデータvd中の映像データもビデオ装置30から演奏制御装置15に送るようにしてもよく、さらには、その映像データを演奏制御装置15の表示部5で表示させてもよい。また、演奏制御装置15にも発音装置を設け、オーディオデータ及び演奏データmdも発音可能にしてもよい。あるいは、演奏制御装置15と自動ピアノ20との間でも、映像データ及びオーディオデータを送受信できるように構成し、演奏制御装置15がビデオ装置30から受信した映像データ及びオーディオデータを自動ピアノ20に送り、自動ピアノ20でビデオデータvdの表示、再生を行えるように構成してもよい。   Note that the present invention is not limited to this, and at the time of reproduction of the video data vd, the video data in the video data vd may be sent from the video device 30 to the performance control device 15, and further, the video data is sent to the performance control device. You may display on the 15 display parts 5. FIG. The performance controller 15 may also be provided with a sounding device so that audio data and performance data md can also be sounded. Alternatively, video data and audio data can be transmitted and received between the performance control device 15 and the automatic piano 20, and the video data and audio data received from the video device 30 by the performance control device 15 are sent to the automatic piano 20. The automatic piano 20 may be configured to display and reproduce the video data vd.

図5は、1つの演奏データmdのデータ構成を示す概念図である。後述する図7の変換処理の前後の状態を区別するため、元の演奏データmd−Aと、変換処理後の演奏データmd−Bとが並列して示されている。   FIG. 5 is a conceptual diagram showing the data structure of one piece of performance data md. The original performance data md-A and the performance data md-B after the conversion processing are shown in parallel to distinguish the state before and after the conversion processing in FIG.

演奏データmd−Aは、複数のイベントデータ(キーオンイベントデータKON(発音指示情報)、キーオフイベントデータKOFF、複数のタイミングデータTIME、及び末尾に配置される1つのエンドデータENDを含んだシーケンスデータ列で構成される。各イベントデータは、音高を示すデータ、発音/消音を指示するデータおよびベロシティを示すデータ(いずれも図示せず)によって構成されている。各タイミングデータTIMEは、直後に位置するイベントデータの読み出しタイミングを規定するものである。タイミングデータTIMEのうち、例えば、30000msecを超えるような非常に長い時間間隔を規定するもの(同図ではTIME45、46、47が相当する)が存在する点を除けば、演奏データmd−Aは、一般的な演奏データと変わりはない。このような非常に長い時間間隔は、演奏や教習の解説時等において、ビデオの音声のみでこれらが進められ、自動演奏が行われない時間帯に対応するものである。

図6は、演奏制御装置15のCPU1によって実行される、メイン処理のフローチャートである。まず、初期化、すなわち、所定プログラムの実行を開始し、各種レジスタ、フラグ、パラメータ、タイマ等のクリアを行う(ステップS601)。次に、記録媒体34から、すべての演奏データmdの曲情報を読み込み、それを表示部5に表示させる(ステップS602)。ここでは、曲情報のうち少なくともファイル名が表示され、例えば、上下方向に配列されて一覧表示される。当初は一番上のファイル名が反転表示され、該ファイル名に対応する演奏データmdが再生対象として選択状態とされる。
The performance data md-A is a sequence data sequence including a plurality of event data (key-on event data KON (sound generation instruction information), key-off event data KOFF, a plurality of timing data TIME, and one end data END arranged at the end. Each event data is composed of data indicating a pitch, data for instructing sound generation / mute, and data indicating a velocity (none of which is shown). Among the timing data TIME, for example, there is one that defines a very long time interval exceeding 30000 msec (corresponding to TIME 45, 46, and 47 in the figure). The performance data md-A is There is no difference from general performance data.This very long time interval corresponds to the time period when these are advanced only with video sound and automatic performance is not performed at the time of performance and instruction of teaching, etc. Is.

FIG. 6 is a flowchart of main processing executed by the CPU 1 of the performance control device 15. First, initialization, that is, execution of a predetermined program is started, and various registers, flags, parameters, timers, etc. are cleared (step S601). Next, the music information of all the performance data md is read from the recording medium 34 and displayed on the display unit 5 (step S602). Here, at least the file name is displayed in the music information, for example, arranged in a vertical direction and displayed in a list. Initially, the top file name is highlighted and the performance data md corresponding to the file name is selected as a reproduction target.

そして、上下カーソルキー27、28の操作を受け付けて、その操作に応じて反転表示を上下に移動させることで、所望の演奏データmdを選択させる(ステップS603、S604)。次に、SSキー37のオン/オフ操作に応じてスキップスペース実行フラグFSSを0/1で反転させ(ステップS605、S606)、CSキー36のオン操作があれば、現在、選択状態にある演奏データmdについて、後述する図7の変換処理を実行する(ステップS607、S608)。そして、演奏データの再生指示を受け付けて、該指示があれば再生実行フラグFRUNを0/1で反転させ(ステップS609、S610)、次に、後述する図9の信号受信処理を実行して(ステップS611)、その他処理を実行し(ステップS612)、前記ステップS603に戻る。   Then, the operation of the up and down cursor keys 27 and 28 is received, and the reverse display is moved up and down in accordance with the operation to select the desired performance data md (steps S603 and S604). Next, the skip space execution flag FSS is inverted by 0/1 according to the on / off operation of the SS key 37 (steps S605 and S606), and if the CS key 36 is turned on, the performance currently in the selected state is performed. The conversion process of FIG. 7 described later is executed for the data md (steps S607 and S608). Then, a performance data reproduction instruction is accepted, and if there is such an instruction, the reproduction execution flag FRUN is inverted by 0/1 (steps S609 and S610), and then a signal reception process of FIG. Step S611), other processing is executed (Step S612), and the process returns to Step S603.

図7は、図6のステップS608で実行される変換処理のフローチャートである。本処理は、再生対象として選択された演奏データ(図5の例では演奏データmd−A)内のデータを順次読み出し、タイミングデータTIMEの前後で区切られるデータ群を1つの区間ファイルとして、各区間ファイルを積み重ねて書き込んでいくことで、新たな演奏データ(図5の例では演奏データmd−B)を生成する処理を基本とする(ステップS709→S710→S703)。そして、タイミングデータTIMEが所定時間Tcs(例えば、30000msec)を超える場合は、新たな演奏データmd−Bに書き込む際にそのタイミングデータTIMEを削除する(ステップS705→S706→S707→S702)。   FIG. 7 is a flowchart of the conversion process executed in step S608 of FIG. In this process, data in performance data (performance data md-A in the example of FIG. 5) selected as a reproduction target is sequentially read out, and a data group divided before and after timing data TIME is set as one section file. The process is basically based on the process of generating new performance data (performance data md-B in the example of FIG. 5) by stacking and writing files (steps S709 → S710 → S703). If the timing data TIME exceeds a predetermined time Tcs (for example, 30000 msec), the timing data TIME is deleted when writing to the new performance data md-B (steps S705 → S706 → S707 → S702).

まず、スキップスペース実行フラグFSSを「0」に設定し(ステップS701)、最初の区間ファイルをオープンして(ステップS702)、演奏データmd内のデータをアドレスポインタの位置から読み出し(ステップS703)、今回読み出したデータがタイミングデータTIMEであるか否かを判別し(ステップS704)、タイミングデータTIMEであればそれが所定時間Tcsより長いか否かを判別して(ステップS705)、TIME>Tcsが成立するならば、現在オープンしている区間ファイルをクローズして(ステップS706)、アドレス歩進を行う(ステップS707)。   First, the skip space execution flag FSS is set to “0” (step S701), the first section file is opened (step S702), and the data in the performance data md is read from the position of the address pointer (step S703). It is determined whether or not the data read this time is timing data TIME (step S704). If it is timing data TIME, it is determined whether or not it is longer than a predetermined time Tcs (step S705), and TIME> Tcs is satisfied. If it is established, the currently open section file is closed (step S706), and address stepping is performed (step S707).

例えば、図5の例でいえば、最初はアドレスポインタが先頭位置にあるから、最初にオープンした第1の区間ファイル(「aaa.chap1.mdi」と呼称する)にはTIME45が入り、TIME45の長さは「40000msec」であって所定時間Tcsより長いから、aaa.chap1.mdiは直ちにクローズされる。これにより、TIME45が実質的にキャンセルされる。なお、ここで、「aaa」はファイル名の一例である。前記ステップS707の後は、前記ステップS702に戻って新たな第2の区間ファイル(aaa.chap2.mdi)をオープンし、前記ステップS703以降を同様に実行する。   For example, in the example of FIG. 5, since the address pointer is initially at the head position, the first section file (called “aaa.chap1.mdi”) opened first contains TIME45, Since the length is “40000 msec” and longer than the predetermined time Tcs, aaa. chap1. mdi is immediately closed. As a result, the TIME 45 is substantially canceled. Here, “aaa” is an example of a file name. After the step S707, the process returns to the step S702 to open a new second section file (aaa.chap2.mdi), and the steps after the step S703 are similarly executed.

そして、前記ステップS704またはS705において、今回読み出したデータがタイミングデータTIMEでないか、またはタイミングデータTIMEであっても所定時間Tcs以下である場合は、今回読み出したデータがエンドデータENDであるか否かを判別し(ステップS708)、エンドデータENDでなければ、今回読み出したデータをそのまま新たな演奏データmd−Bのシーケンスデータとして書き込み(ステップS709)、アドレス歩進を行って(ステップS710)、前記ステップS703に戻る。   In step S704 or S705, if the data read this time is not the timing data TIME, or if it is the timing data TIME and is less than or equal to the predetermined time Tcs, whether or not the data read this time is the end data END. (Step S708), and if it is not end data END, the data read this time is written as it is as sequence data of new performance data md-B (step S709), and address stepping is performed (step S710). The process returns to step S703.

図5の例でいえば、第2の区間ファイル(aaa.chap2.mdi)に、KON(C)が読み出されるので、ステップS704→S708→S709へと進み、KON(C)が書き込まれる。また、次のループでは、TIME(20msec)が読み出され、これは所定時間Tcs以下であるから、ステップS705→S708→S709へと進み、当該TIME(20msec)がそのまま書き込まれる。これを繰り返していき、TIME46が読み出されると、TIME46の長さが「55000msec」であって所定時間Tcsより長いから、aaa.chap2.mdiがクローズされる(ステップS705→S706)。その後、前記ステップS702で第3の区間ファイル(aaa.chap3.mdi)がオープンされる。このような処理が、エンドデータENDが読み出されるまで繰り返される。エンドデータENDが読み出されると、そのときオープンしている区間ファイルをクローズして(ステップS711)、本処理を終了する。   In the example of FIG. 5, since KON (C) is read into the second section file (aaa.chap2.mdi), the process proceeds from step S704 to S708 to S709, and KON (C) is written. In the next loop, TIME (20 msec) is read out, and since this is less than or equal to the predetermined time Tcs, the process proceeds from step S705 to S708 to S709, and the TIME (20 msec) is written as it is. When this is repeated and the TIME 46 is read, the length of the TIME 46 is “55000 msec”, which is longer than the predetermined time Tcs. chap2. mdi is closed (steps S705 → S706). Thereafter, the third section file (aaa.chap3.mdi) is opened in step S702. Such processing is repeated until the end data END is read. When the end data END is read, the section file that is open at that time is closed (step S711), and this process ends.

このようにして、本処理により、選択された元の演奏データmd−Aに対して、所定時間Tcsより長いタイミングデータTIMEが削除(乃至無視)された新たな演奏データmd−Bが生成され(図5参照)、この演奏データmd−Bが、元の演奏データmd−Aに代わって実際の再生対象の演奏データmdとされる。すなわち、演奏データmdが書き換えられる。   In this way, new performance data md-B in which the timing data TIME longer than the predetermined time Tcs is deleted (or ignored) is generated from the selected original performance data md-A by this processing ( The performance data md-B is used as actual performance data md to be reproduced instead of the original performance data md-A. That is, the performance data md is rewritten.

図8は、割り込み処理のフローチャートである。本処理は一定時間間隔で実行される。本処理は、再生対象の演奏データmd内のデータを順次読み出し、イベントデータを自動ピアノ20の発音装置23に順次出力(ステップS810)して楽音を発生させる処理を基本とする。その際、所定時間Tss(例えば、30000msec)より短いタイミングデータTIMEを読み出した場合は、それに応じた時間を次のイベントデータ出力まで空けるが(ステップS811、S804、S812)、タイミングデータTIMEが所定時間Tssを超える場合は、次のイベントデータ出力までの時間間隔を短く修正する(ステップS809)。   FIG. 8 is a flowchart of interrupt processing. This process is executed at regular time intervals. This process is basically based on a process of sequentially reading out the data in the performance data md to be reproduced and sequentially outputting the event data to the sound generator 23 of the automatic piano 20 (step S810) to generate a musical sound. At this time, when timing data TIME shorter than a predetermined time Tss (for example, 30000 msec) is read, the time corresponding to the time data TIME is opened until the next event data output (steps S811, S804, S812), but the timing data TIME is the predetermined time. If it exceeds Tss, the time interval until the next event data output is corrected to be short (step S809).

まず、再生実行フラグFRUN=1であるか否かを判別し(ステップS801)、FRUN=0であれば本処理を終了する一方、FRUN=1であれば、ビデオ装置30からビデオデータvd中のオーディオトラックの信号を受信することを「1」で示す受信フラグFRCVが「1」に設定されているか否かを判別する(ステップS802)。そして、FRCV=1であるときのみ、スキップスペース実行フラグFSSを「0」に設定して(ステップS803)、後述するステップS809またはS811で値が設定される、デュレーションを示すカウンタDURが「0」であるか否かを判別し(ステップS804)、DUR=0になるまでカウンタDURを1だけインクリメントする処理(ステップS812)を繰り返す一方、DUR=0になると、再生対象の演奏データmd内におけるアドレスポインタの位置のデータを読み出す(ステップS805)。   First, it is determined whether or not the reproduction execution flag FRUN = 1 (step S801). If FRUN = 0, the present process is terminated. If FRUN = 1, the video device 30 includes the video data vd in the video data vd. It is determined whether or not the reception flag FRCV indicating that the audio track signal is received is set to “1” (step S802). Only when FRCV = 1, the skip space execution flag FSS is set to “0” (step S803), and a value is set in step S809 or S811, which will be described later, and the counter DUR indicating the duration is “0”. (Step S804), and the process of incrementing the counter DUR by 1 (step S812) is repeated until DUR = 0, while when DUR = 0, the address in the performance data md to be played back is repeated. Data at the position of the pointer is read (step S805).

次に、今回読み出したデータがタイミングデータTIMEでないなら、今回のキーオン等のイベントデータを自動ピアノ20の発音装置23に出力する(ステップS806、S810)。これにより、発音装置23で順次発音がなされる。一方、今回読み出したデータがタイミングデータTIMEである場合は、FSS=1であるか否かを判別し(ステップS807)、FSS=1であればさらにそのタイミングデータTIMEが、所定時間Tssより長いか否かを判別する(ステップS808)。   Next, if the data read this time is not the timing data TIME, event data such as the current key-on is output to the sound generator 23 of the automatic piano 20 (steps S806 and S810). As a result, the sound generation device 23 generates sound sequentially. On the other hand, if the data read this time is the timing data TIME, it is determined whether or not FSS = 1 (step S807). If FSS = 1, is the timing data TIME longer than the predetermined time Tss? It is determined whether or not (step S808).

その結果、FSS=0であるかまたはTIME≦Tssである場合は、カウンタDURに当該タイミングデータTIMEの値を設定する一方(ステップS811)、TIME>Tssである場合は、カウンタDURに所定時間Tssより十分に短い所定時間Tss2(例えば3000msec)を設定する(ステップS809)。これにより、演奏データmd(n)の再生処理上においては、所定時間Tssより長いタイミングデータTIMEは、短い所定時間Tss2であるとして処理されるので、極端に長い無音時間の発生が防止される。   As a result, if FSS = 0 or TIME ≦ Tss, the value of the timing data TIME is set in the counter DUR (step S811). If TIME> Tss, the counter DUR has a predetermined time Tss. A sufficiently shorter predetermined time Tss2 (for example, 3000 msec) is set (step S809). Thereby, in the reproduction process of the performance data md (n), the timing data TIME longer than the predetermined time Tss is processed as being the short predetermined time Tss2, so that an extremely long silent time is prevented from occurring.

前記ステップS810、S809、S811の処理後は、アドレス歩進を行い(ステップS813)、本処理を終了する。   After the processing of steps S810, S809, and S811, address stepping is performed (step S813), and this processing ends.

本処理を、再生対象の演奏データmdが図5に示す演奏データmd−Aである場合を例にとって説明すると、各タイミングデータTIMEは、カウンタDURに反映される際に、所定時間Tss以下のものはそのままの長さで反映されるが、所定時間Tssより長いTIME45、46、47は、短い所定時間Tss2に修正されて反映される。   This processing will be described by taking as an example the case where the performance data md to be reproduced is the performance data md-A shown in FIG. 5. When each timing data TIME is reflected in the counter DUR, the timing data TIME is less than a predetermined time Tss. Is reflected as it is, but TIMEs 45, 46, 47 longer than the predetermined time Tss are corrected and reflected to a shorter predetermined time Tss2.

ところで、演奏データmdの再生は、所望の演奏データmdの単独再生時だけでなく、ビデオデータvdとの同期再生時も図8の処理で実現される。   By the way, the reproduction of the performance data md is realized by the process of FIG. 8 not only when the desired performance data md is reproduced alone, but also when the reproduction is synchronized with the video data vd.

図9は、図6のステップS611で実行される信号受信処理のフローチャートである。   FIG. 9 is a flowchart of the signal reception process executed in step S611 in FIG.

本処理は、主に、LTCに基づき演奏データを特定する処理(ステップS903〜S905)、特定した演奏データを再生対象の演奏データと一致させる処理(ステップS907、S910)、及び、ビデオデータvdと演奏データとの再生タイミングを同期させる処理(ステップS911、S912)を有している。   This processing mainly includes processing for specifying performance data based on LTC (steps S903 to S905), processing for matching the specified performance data with performance data to be reproduced (steps S907 and S910), and video data vd. There is a process (steps S911, S912) for synchronizing the reproduction timing with the performance data.

まず、ビデオ装置30からの入力信号を監視し、ビデオ装置30においてビデオデータvdの再生がスタートし、ビデオデータvd中のオーディオトラックの信号がビデオ装置用インターフェイス25を介して受信されたとき(ステップS901)、ステップS902以降の処理に移る。   First, an input signal from the video device 30 is monitored, and playback of the video data vd is started in the video device 30, and when an audio track signal in the video data vd is received via the video device interface 25 (step). S901), the process proceeds to step S902 and subsequent steps.

ステップS902では、受信フラグFRCVに「1」を設定し、受信された信号中にLTCがあれば、それを分離して(ステップS903、S904)、分離したLTC中のユーザーズビットに記憶されたファイル特定情報42に対応する演奏データmdを、記録媒体34に記憶されたすべての演奏データ群mdG中のすべての演奏データmdの中から1つ特定する(ステップS905)。   In step S902, the reception flag FRCV is set to “1”, and if there is LTC in the received signal, it is separated (steps S903 and S904), and the file stored in the user bits in the separated LTC is stored. One piece of performance data md corresponding to the identification information 42 is specified from all the performance data md in all the performance data groups mdG stored in the recording medium 34 (step S905).

次に、FRUN=1でない場合は(ステップS906)、上記特定された演奏データmdの先頭にアドレスポインタの位置を合わせてFRUN←1とすることで、次回ループ時における再生開始準備をして(ステップS908、S909)、ステップS911に進む。一方、FRUN=1であって(ステップS906)、上記特定された演奏データmdが、現在再生対象となっている演奏データと一致しているか否かを判別し(ステップS907)、一致していなければ、上記特定された演奏データmdを、現在の「再生対象の演奏データ」に設定して(ステップS910)、前記ステップS911に進む。   Next, when FRUN = 1 is not satisfied (step S906), the position of the address pointer is aligned with the head of the specified performance data md to set FRUN ← 1, thereby preparing for the start of reproduction in the next loop ( Steps S908 and S909) go to Step S911. On the other hand, if FRUN = 1 (step S906), it is determined whether or not the specified performance data md matches the performance data currently being reproduced (step S907). For example, the specified performance data md is set to the current “performance data to be reproduced” (step S910), and the process proceeds to step S911.

ステップS911では、上記分離したLTC中の時間情報41が示す時刻と、上記再生対象とされた演奏データmdにおける現在再生時刻(アドレスポインタの位置)とが合致するか否かを判別する。そして、合致しなければ、時間情報41が示す時刻に合わせて、演奏データmdにおけるアドレスポインタの位置を移動させる(ステップS912)。   In step S911, it is determined whether or not the time indicated by the time information 41 in the separated LTC matches the current reproduction time (position of the address pointer) in the performance data md to be reproduced. If they do not match, the position of the address pointer in the performance data md is moved in accordance with the time indicated by the time information 41 (step S912).

その後、ストップ指示があるまで上記処理を繰り返し、ストップ指示があると(ステップS913)、FRUN←0として(ステップS914)、本処理を終了する。   Thereafter, the above process is repeated until a stop instruction is issued. When there is a stop instruction (step S913), FRUN ← 0 is set (step S914), and this process ends.

本実施の形態によれば、演奏データmd中のタイミングデータTIMEが、所定時間Tss、または所定時間Tcsより長い発音空白時間を示す場合は、これを短縮または削除して再生するので、長時間の発音空白時間を有する演奏データmdであっても、実際の長い発音空白時間が生じないような再生を実現することができる。従って、現在が演奏データmdの再生中なのかどうかもわからなかったり、終わりまで再生するのに時間がかかりすぎたりという不便さが解消される。   According to the present embodiment, when the timing data TIME in the performance data md indicates a pronunciation blank time longer than the predetermined time Tss or the predetermined time Tcs, it is reproduced by shortening or deleting it. Even with the performance data md having a pronunciation blank time, it is possible to realize reproduction so that an actual long pronunciation blank time does not occur. Therefore, the inconvenience of not knowing whether or not the performance data md is currently being reproduced, or taking too much time to reproduce to the end is eliminated.

本実施の形態によればまた、ビデオデータvd中のオーディオチャンネルの1つにLTCを定期的に記録しておき、当該ビデオデータvdのシリアル再生に際し、LTCに基づき再生対象の演奏データmdを一意に特定すると共に、この特定した演奏データmdの再生タイミングをLTCに基づき規定するので、ビデオデータvdと対応する演奏データmdとを、容易な管理にて、任意の時間的位置から同期させて再生することができる。すなわち、1つのビデオデータvdに対応する演奏データmdが複数あってそれが時間的に変わる場合であっても、管理が容易である。また、ビデオデータvdを任意の途中から再生する場合においても、その時点に対応する演奏データmdを的確に特定し、且つその特定した演奏データmdの再生位置を的確に合わせて同期をとることも容易である。また、LTCは、ビデオデータvd中の音声信号チャンネルを利用して記憶されるので、構成が簡単で、汎用性も高い。   Also according to the present embodiment, LTC is periodically recorded in one of the audio channels in the video data vd, and the performance data md to be reproduced is uniquely determined based on the LTC when serially reproducing the video data vd. Since the playback timing of the specified performance data md is specified based on LTC, the video data vd and the corresponding performance data md are played back in synchronization with each other from an arbitrary time position with easy management. can do. That is, even when there are a plurality of pieces of performance data md corresponding to one video data vd and they change with time, management is easy. Further, even when the video data vd is reproduced from an arbitrary middle point, the performance data md corresponding to the point in time can be accurately specified, and the reproduction position of the specified performance data md can be accurately matched and synchronized. Easy. In addition, since LTC is stored using an audio signal channel in video data vd, the configuration is simple and versatility is high.

なお、ビデオデータvd中の音声信号チャンネルの数は、3チャンネル以上としてもよく、LTCが2つ以上の音声信号チャンネルに跨って記憶されていてもよい。あるいは、LTCは、オーディオトラックではなく、ビデオデータvd中の映像トラック(例えば、図4に示す第1、第2トラック43、44の一部分43a、44a)に記録するようにしてもよい。   Note that the number of audio signal channels in the video data vd may be three or more, and LTC may be stored across two or more audio signal channels. Alternatively, the LTC may be recorded not on an audio track but on a video track in the video data vd (for example, portions 43a and 44a of the first and second tracks 43 and 44 shown in FIG. 4).

なお、本実施の形態では、ビデオデータvdと演奏データmdとの同期再生を実現したが、対応する演奏データmdを同期させて再生するデータは、音声付きのビデオデータvdに限られず、時間進行に従って再生可能なシリアルデータであればよく、オーディオデータのみ、あるいは映像データのみとしてもよい。その場合でも、上記のように、空きのトラックを設けてLTCを記録するか、オーディオまたは映像データとLTCとを圧縮して同じトラックに記録すればよい。   In the present embodiment, the synchronized reproduction of the video data vd and the performance data md is realized. However, the data to be reproduced in synchronization with the corresponding performance data md is not limited to the video data vd with audio, and the time progress. As long as the serial data can be reproduced according to the above, only audio data or video data may be used. Even in this case, as described above, an empty track may be provided to record LTC, or audio or video data and LTC may be compressed and recorded on the same track.

なお、所定時間Tcs、Tss、Tss2の値は、例示した値に限定されず、適宜変更可能である。特に、所定時間Tss2は所定時間Tssより短ければよく、「0」であってもよい。また、図7の変換処理では、所定時間Tcsを超えたタイミングデータTIMEは削除扱いされるようにしたが、所定時間Tcsより短い値(例えば、所定時間Tss2と同じ値)に変換して新たな演奏データmdに書き込まれるように構成してもよい。   Note that the values of the predetermined times Tcs, Tss, and Tss2 are not limited to the illustrated values, and can be changed as appropriate. In particular, the predetermined time Tss2 only needs to be shorter than the predetermined time Tss, and may be “0”. In the conversion process of FIG. 7, the timing data TIME exceeding the predetermined time Tcs is treated as deleted. However, the timing data TIME is converted to a value shorter than the predetermined time Tcs (for example, the same value as the predetermined time Tss 2). You may comprise so that it may be written in the performance data md.

なお、記録媒体34に記憶された演奏データmdについて自動ピアノ20で単独再生を行う用途に限っていえば、複合ケーブル29及びビデオ装置用インターフェイス25は、自動ピアノ20が少なくともMIDI信号の受信が可能なように構成すればよい。   Note that if the performance data md stored in the recording medium 34 is limited to the purpose of reproducing the performance data md alone on the automatic piano 20, the composite cable 29 and the video device interface 25 allow the automatic piano 20 to receive at least a MIDI signal. What is necessary is just to comprise.

なお、本実施の形態では、ビデオデータvd及び演奏データ群mdGは、ビデオ装置30に記憶されているものとしたが、これに限るものではなく、演奏制御装置15がアクセス可能な場所に記憶されていればよい。例えば、演奏制御装置15自身に記憶しておいてもよい。また、ビデオデータvdと演奏データ群mdGとは、別々の場所に記憶しておきてもよく、例えば、ビデオデータvdはビデオ装置30に、演奏データ群mdGは演奏制御装置15に記憶しておいてもよい。   In the present embodiment, the video data vd and the performance data group mdG are stored in the video device 30. However, the present invention is not limited to this, and is stored in a location accessible by the performance control device 15. It only has to be. For example, it may be stored in the performance control device 15 itself. Further, the video data vd and the performance data group mdG may be stored in different places. For example, the video data vd is stored in the video device 30 and the performance data group mdG is stored in the performance control device 15. May be.

なお、本実施の形態では、同期演奏制御システムは、それぞれ別体の、演奏制御装置15と自動ピアノ20とビデオ装置30とから構成されたが、これに限るものではない。例えば、演奏制御装置15と自動ピアノ20とを一体としてもよいし、自動ピアノ20とビデオ装置30とを一体としてもよいし、三者を一体としてもよい。   In the present embodiment, the synchronized performance control system is composed of the performance control device 15, the automatic piano 20, and the video device 30 which are separate from each other. However, the present invention is not limited to this. For example, the performance control device 15 and the automatic piano 20 may be integrated, the automatic piano 20 and the video device 30 may be integrated, or the three parties may be integrated.

なお、ビデオデータvdの再生に伴い、同期再生された演奏データを聞きながら、生徒がピアノ演奏をして記録した新たな演奏データを、元の演奏データに代えて、ビデオデータvdに対応付けてもよい。その場合、元の演奏データを消去すると共に元の演奏データのファイル名を新たな演奏データに付加すればよい。あるいは、両演奏データを併存させる場合は、ビデオデータvd中のLTC中のファイル特定情報42を、新たな演奏データを特定するように書き換えてもよい。   As the video data vd is reproduced, the new performance data recorded by the student playing the piano while listening to the synchronized performance data is associated with the video data vd instead of the original performance data. Also good. In that case, the original performance data may be deleted and the file name of the original performance data may be added to the new performance data. Alternatively, when both performance data are to coexist, the file specifying information 42 in the LTC in the video data vd may be rewritten so as to specify new performance data.

なお、本発明の目的は、実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPU1やMPU等)が記憶媒体に格納されたプログラムコードを読み出して実行することによっても達成される。   Note that an object of the present invention is to supply a storage medium in which a program code of software for realizing the functions of the embodiment is recorded to a system or apparatus, and a computer (or CPU 1 or MPU) of the system or apparatus stores the storage medium. This can also be achieved by reading and executing the stored program code.

この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、プログラムコードが伝送媒体等を介して供給される場合も、プログラムコード自体が本発明を構成することになる。なお、これらの場合の記憶媒体としては、ROMのほか、フロッピー(登録商標)ディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R/RW、DVD−ROM、DVD−RAM、DVD−R/RW、DVD+RW、NV−RAM、磁気テープ、不揮発性のメモリカード、或いはネットワークを介したダウンロード等を用いることができる。   In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiment, and the storage medium storing the program code constitutes the present invention. Further, when the program code is supplied via a transmission medium or the like, the program code itself constitutes the present invention. The storage media in these cases include ROM, floppy (registered trademark) disk, hard disk, optical disk, magneto-optical disk, CD-ROM, CD-R / RW, DVD-ROM, DVD-RAM, DVD- R / RW, DVD + RW, NV-RAM, magnetic tape, nonvolatile memory card, download via a network, or the like can be used.

また、コンピュータが読み出したプログラムコードを実行することにより、上述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているOSなどが実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も本発明に含まれることは言うまでもない。さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も本発明に含まれることは言うまでもない。   Further, by executing the program code read out by the computer, not only the functions of the above-described embodiments are realized, but also the OS running on the computer based on the instruction of the program code performs the actual processing. Needless to say, the present invention includes a case where the functions of the above-described embodiment are realized by performing part or all of the above-described processing. Further, after the program code read from the storage medium is written to a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that the present invention includes a case where the CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing.

本発明の一実施の形態に係る演奏制御装置を含んで成る同期演奏制御システムの全体構成を示す外観図である。BRIEF DESCRIPTION OF THE DRAWINGS It is an external view which shows the whole structure of the synchronous performance control system containing the performance control apparatus which concerns on one embodiment of this invention. 同期演奏制御システムの全体構成を示すブロック図である。It is a block diagram which shows the whole structure of a synchronous performance control system. 演奏制御装置の操作パネルの平面図である。It is a top view of the operation panel of a performance control apparatus. 記録媒体に記憶されたビデオデータ及び演奏データ群のデータ構成を示す概念図である。It is a conceptual diagram which shows the data structure of the video data and performance data group which were memorize | stored in the recording medium. 1つの演奏データのデータ構成を示す概念図である。It is a conceptual diagram which shows the data structure of one performance data. 演奏制御装置のCPUによって実行される、メイン処理のフローチャートである。It is a flowchart of the main process performed by CPU of a performance control apparatus. 図6のステップS608で実行される変換処理のフローチャートである。It is a flowchart of the conversion process performed by FIG.6 S608. 割り込み処理のフローチャートである。It is a flowchart of an interruption process. 図6のステップS611で実行される信号受信処理のフローチャートである。It is a flowchart of the signal reception process performed by step S611 of FIG.

符号の説明Explanation of symbols

1 CPU(演奏情報読み出し手段、演奏情報出力制御手段)、 15 演奏制御装置、 20 自動ピアノ、 30 ビデオ装置、 mdG 演奏データ群、 md 演奏データ(演奏情報)、 Tss 所定時間、 Tcs 所定時間、 TIME タイミングデータ(時間情報)   1 CPU (performance information reading means, performance information output control means), 15 performance control device, 20 automatic piano, 30 video device, mdG performance data group, md performance data (performance information), Tss predetermined time, Tcs predetermined time, TIME Timing data (time information)

Claims (2)

発音指示情報と発音タイミングを規定する時間情報とを少なくとも含んでいる演奏情報を読み出す演奏情報読み出し手段と、
前記演奏情報読み出し手段により読み出された演奏情報を出力する演奏情報出力制御手段と、
前記読み出された演奏情報が前記演奏情報出力制御手段により出力されている最中の任意の時において、ユーザからの指定の受け付けに基づいて変換処理の実行可否を指定する指定手段とを有し、
前記演奏情報出力制御手段は、前記指定手段により前記変換処理の実行許可が指定されていない場合は、前記読み出された演奏情報中の時間情報の長さにかかわらず、前記演奏情報中の発音空白時間を変換することなく前記演奏情報を出力する一方、前記指定手段により前記変換処理の実行許可が指定されている場合においては、前記指定手段により前記変換処理の実行許可が指定されたタイミング以降に前記演奏情報読み出し手段により読み出された演奏情報中の時間情報について、前記読み出された演奏情報中の時間情報が、第1の所定時間より長い発音空白時間を示すときに、該発音空白時間を、前記第1の所定時間より短い第2の所定時間に変換しつつ前記演奏情報を出力するように制御することを特徴とする演奏制御装置。
Performance information reading means for reading performance information including at least sound generation instruction information and time information defining the sound generation timing;
Performance information output control means for outputting performance information read by the performance information reading means;
Designating means for designating whether or not to execute conversion processing based on acceptance of designation from the user at any time during which the read performance information is being output by the performance information output control means; ,
The performance information output control means, if the permission of execution of the conversion process is not designated by the designation means, the pronunciation in the performance information regardless of the length of the time information in the read performance information While the performance information is output without converting the blank time, when the permission of execution of the conversion process is specified by the specifying means, the timing after the timing when the permission of execution of the conversion process is specified by the specifying means For the time information in the performance information read by the performance information reading means, when the time information in the read performance information indicates a pronunciation blank time longer than a first predetermined time, the pronunciation blank A performance control apparatus that controls to output the performance information while converting a time to a second predetermined time shorter than the first predetermined time.
発音指示情報と発音タイミングを規定する時間情報とを少なくとも含んでいる演奏情報を読み出す演奏情報読み出しステップと、
前記演奏情報読み出しステップにより読み出された演奏情報を出力する演奏情報出力制御ステップと、
前記読み出された演奏情報が前記演奏情報出力制御ステップにより出力されている最中の任意の時において、ユーザからの指定の受け付けに基づいて変換処理の実行可否を指定する指定ステップとをコンピュータに実行させるための演奏制御プログラムであり、
前記演奏情報出力制御ステップは、前記指定ステップにより前記変換処理の実行許可が指定されていない場合は、前記読み出された演奏情報中の時間情報の長さにかかわらず、前記演奏情報中の発音空白時間を変換することなく前記演奏情報を出力する一方、前記指定ステップにより前記変換処理の実行許可が指定されている場合においては、前記指定ステップにより前記変換処理の実行許可が指定されたタイミング以降に前記演奏情報読み出しステップにより読み出された演奏情報中の時間情報について、前記読み出された演奏情報中の時間情報が、第1の所定時間より長い発音空白時間を示すときに、該発音空白時間を、前記第1の所定時間より短い第2の所定時間に変換しつつ前記演奏情報を出力するように制御することを特徴とする演奏制御プログラム。
A performance information reading step for reading performance information including at least sound generation instruction information and time information for defining sound generation timing;
A performance information output control step for outputting the performance information read by the performance information reading step;
A designation step for designating whether or not to execute conversion processing based on acceptance of designation from the user at any time during which the read performance information is being output by the performance information output control step; A performance control program for execution,
In the performance information output control step, if the execution permission of the conversion process is not specified in the specification step, the sound generation in the performance information is performed regardless of the length of time information in the read performance information. While the performance information is output without converting the blank time, when the permission to execute the conversion process is specified by the specifying step, the timing after the timing when the permission to execute the conversion process is specified by the specifying step For the time information in the performance information read by the performance information reading step, when the time information in the read performance information indicates a pronunciation blank time longer than a first predetermined time, the pronunciation blank Control is performed so as to output the performance information while converting the time to a second predetermined time shorter than the first predetermined time. Kanade control program.
JP2004229424A 2004-08-05 2004-08-05 Performance control device and program Active JP4259422B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2004229424A JP4259422B2 (en) 2004-08-05 2004-08-05 Performance control device and program
US11/196,213 US7332666B2 (en) 2004-08-05 2005-08-02 Performance control system, performance control apparatus, performance control method, program for implementing the method, and storage medium storing the program
US11/929,733 US7622664B2 (en) 2004-08-05 2007-10-30 Performance control system, performance control apparatus, performance control method, program for implementing the method, and storage medium storing the program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004229424A JP4259422B2 (en) 2004-08-05 2004-08-05 Performance control device and program

Publications (2)

Publication Number Publication Date
JP2006047760A JP2006047760A (en) 2006-02-16
JP4259422B2 true JP4259422B2 (en) 2009-04-30

Family

ID=36026378

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004229424A Active JP4259422B2 (en) 2004-08-05 2004-08-05 Performance control device and program

Country Status (1)

Country Link
JP (1) JP4259422B2 (en)

Also Published As

Publication number Publication date
JP2006047760A (en) 2006-02-16

Similar Documents

Publication Publication Date Title
US7622664B2 (en) Performance control system, performance control apparatus, performance control method, program for implementing the method, and storage medium storing the program
US9601029B2 (en) Method of presenting a piece of music to a user of an electronic device
JPH06124094A (en) Karaoke @(3754/24)accompaniment of recorded music) device
JPH06118979A (en) Karaoke device
JPS6228472B2 (en)
JPH06124093A (en) Karaoke @(3754/24)accompaniment of recorded music) device
JP2001215979A (en) Karaoke device
JP2017032693A (en) Video recording/playback device
CN102811330A (en) Moving image reproducer reproducing moving image in synchronization with musical piece and method thereof
JP4203750B2 (en) Electronic music apparatus and computer program applied to the apparatus
JPH1124676A (en) Karaoke (sing-along music) device
JP4259422B2 (en) Performance control device and program
JP4259423B2 (en) Synchronous performance control system, method and program
JP4270102B2 (en) Automatic performance device and program
JPH11305772A (en) Electronic instrument
JP4994890B2 (en) A karaoke device that allows you to strictly compare your recorded singing voice with a model song
JP2005099264A (en) Music playing program
JP4685226B2 (en) Automatic performance device for waveform playback
JP4161714B2 (en) Karaoke equipment
WO2011060504A1 (en) Music tuition or practice method and apparatus
JP3081096B2 (en) Karaoke equipment
JP2005223939A (en) Video reproducing apparatus
JPH04270389A (en) Vocal data display device
JP2003208166A (en) Musical sound reproducing/recording apparatus, recording apparatus, and recording method
JP2008276101A (en) Music piece reproduction system and device

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20060425

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070618

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080807

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080911

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20081014

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081204

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20081222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090120

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090202

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120220

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4259422

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130220

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140220

Year of fee payment: 5