JP2786556B2 - サウンド情報及び表示情報の発音表示装置及び発音表示方法 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、サウンド情報及び表示
情報の記憶方式並びに発音表示方式に関し、特にサウン
ドデータまたは表示データとこれに対するプログラムの
記憶方式の改良に関する。

【０００２】

【従来技術】従来、このような技術については、例えば
音楽教習具を例にとると、ＣＲＴ等のディプレイに質問
内容を表示し、これにあわせて音楽を鳴らすものがあ
る。例えば、ある曲を鳴らし、この正しい曲名１つと誤
りの曲名２つを文字列のクラフィックで表示し、正しい
ものをキーボードの数値キーの操作によって選ぶもので
ある。

【０００３】このような表示と発音の処理を実現するデ
ータとプログラムは、従来は混然一体の形で作成されて
いた。例えば、上述の曲名あての質問であれば図１２に
示すように、まずイニシャライズ用のプログラム文がい
くつか記憶され、順次「「い」の表示データをグラフィ
ックメモリの表示座標（ａ，ｂ）に書き込め」、
「「ま」の表示データをグラフィックメモリの表示座標
（ａ＋ｎ，ｂ）に書き込め」、「「鳴」の表示データを
グラフィックメモリの表示座標（ａ＋２ｎ，ｂ）に書き
込め」、「「っ」の表示データをグラフィックメモリの
表示座標（ａ＋３ｎ，ｂ）に書き込め」……の各プログ
ラム文、「「（」の表示データをグラフィックメモリの
表示座標（ｃ，ｄ）に書き込め」、「「１」の表示デー
タをグラフィックメモリの表示座標（ｃ＋ｎ，ｄ）に書
き込め」「「）」の表示データをグラフィックメモリの
表示座標（ｃ＋２ｎ，ｄ）に書き込め」「「ち」の表示
データをグラフィックメモリの表示座標（ｃ＋３ｎ，
ｄ）に書き込め」、「「ょ」の表示データをグラフィッ
クメモリの表示座標（ｃ＋４ｎ，ｄ）に書き込め」……
の各プログラム文、「レジスタＳＴをクリアせよ」、
「もしテンポカウンタからインタラプト信号ＩＮＴが与
えられればＳＴを＋１せよ」、「ＳＴがステップタイミ
ングデータＳＴ１に一致していれば、プログラムナンバ
○○に行け」、「音高ＮＴ１のサウンドデータをＭＩＤ
Ｉインターフェースに書き込め」、「音量ＢＲ１のサウ
ンドデータをＭＩＤＩインターフェースに書き込め」…
…の各プログラム文というような形となる。

【０００４】これによって、「いま鳴っている曲名は次
のうちどれですか？」と「（１）ちょうちょ」「（２）
夕やけ」「（３）おうまの親子」とが表示画面に表示さ
れ、曲の演奏が行われることになる。この図１２に示す
形は、大まかなものであり、実際には上記１つのプログ
ラム文でも複数のステップのプログラム文より構成され
ることもある。プログラム言語はＢＡＳＩＣのようなイ
ンタプリタ言語、ＣＯＢＯＬのようなコンパイラ言語等
どのようなタイプのものでもかまわない。

【０００５】

【発明が解決しようとする課題】しかしながら、上述の
ような形式のものでは、プログラムとデータとが一体不
可分に記憶されているため、設計変更、例えば、正解の
曲を変えるとき、曲のサウンドデータのほか、プログラ
ム文も変更しなければならなかった。一例として、音の
長さが変われば、「ゲートタイムデータＧＴ１待機せ
よ」のプログラム文も変更しなくてはならないからであ
る。

【０００６】本発明は、上述した課題を解決するために
なされたものであり、サウンドデータまたは表示データ
とこれに対するプログラムのそれぞれについて設計変更
を行う場合、容易に行うことができ、バリエーションの
幅を広げることを目的としている。

【０００７】

【課題を解決するための手段】上記目的を達成するため
に、本発明は、各サウンドデータまたは各表示データ
と、これに応じた各タイミングデータと、これらのデー
タに基づいて発音または表示の処理を実行するためのプ
ログラムを、上記各データとは分離して記憶したもので
ある。

【０００８】

【作用】これにより、設計変更にあたり、プログラムは
そのままで、必要なデータだけを変更すればよく、設計
変更が容易となり、バリエーションの幅が広がる。

【０００９】

【実施例】１．表示画面２０ 図１はＣＲＴ（ブラウン管）５の表示画面を示すもので
ある。この表示画面３０には、動物の右向きのグラフィ
ックパターン３１と左向きのグラフィックパターン３１
が交互に切換表示される。これにより、動物のグラフィ
ックパターン３１があたかも動いているように見られ
る。この切り換えは、曲の演奏の各楽音の発音タイミン
グと同期して行われる。

【００１０】この図１の例は質問形式で表示されてお
り、表示された３つの動物のグラフィックパターン３１
のうち、１つのみが曲の演奏に同期して切換表示され、
他の２つが同期しないで切換表示される。解答者は、こ
れに対し、曲の演奏に同期して表示内容が変化するもの
を選んで、これに応じた番号のキーをオンする。これに
対して、正解、不正解の表示が行われる。なお、ＣＲＴ
５は、液晶表示装置、プラズマディスプレイ等で代用し
てもよい。

【００１１】２．全体回路 図２は、発音表示装置の全体回路を示している。キーボ
ード３の各キーはキースキャン回路４によってスキャン
される。このスキャンにより、各キーのオン／オフを示
すデータが検出され、ＣＰＵ１１によってＲＡＭ１２に
書き込まれる。そして、それまでＲＡＭ１３に書き込ま
れていた、各キーのオン／オフを示すデータと比較さ
れ、各キーのオンイベント、オフイベントの判別がＣＰ
Ｕ１１によって行われる。

【００１２】フロッピーディスク１の１枚には、サウン
ドデータＳＤ、表示データＰＦ、タイミングデータＴ
Ｍ、入力チェックデータＥＶ等が記憶されており、フロ
ッピーディスクドライバ２を通じて一部が読み出され、
ＲＡＭ１２に記憶される。また、フロッピーディスク１
の別の１枚には、後述するフローチャートに示す各種処
理を行うための、ＣＰＵ１１が実行するプログラムＰＧ
等も記憶されており、場合により同様にしてＲＡＭ１２
に記憶される。このフロッピーディスク１は、光メモ
リ、メモリカード等の他の記憶手段で代用してもよい。

【００１３】上記各種表示データＰＦは、グラフィック
メモリ６に書き込まれ、上記ＣＲＴ５に表示される。こ
の表示データＰＦは、グラフィックパターンそのままの
イメージデータのほか、グラフィックパターンを作成す
るための情報、グラフィックジェネレータまたはキャラ
クタジェネレータを通じて変換されるコードデータ等、
種々の形態のものが含まれる。

【００１４】上記各種サウンドデータＳＤは、ＭＩＤＩ
（ミュージカルインスツルメントデジタルインタフェー
ス）インタフェース７を介し、トーンジェネレータ８へ
送られて、楽音信号が生成され、サウンドシステム９へ
送られて発音される。このトーンジェネレータ８は、時
分割処理によりポリフォニック発音が可能となってい
る。

【００１５】制御装置１０は、上述のＣＰＵ１１、ＲＡ
Ｍ１２、テンポカウンタ１４等よりなっている。この制
御装置１０は具体的には、図３に示すように構成されて
いる。

【００１６】３．制御装置１０ 図３は、制御装置１０を示している。制御装置１０の中
のＣＰＵ１１は、再生制御部２１と読み出し制御部２２
とよりなり、ＲＡＭ１２には、データバッファメモリ２
３、読み出し順テーブル２４、イメージジェネレータ２
５、イメージバッファメモリ２６、プログラムメモリ２
７、シーケンスカウンタ２８等形成される。

【００１７】読み出し順テーブル２４には、プロッピー
ディスク１内のプログラム及び各データファイルの読み
出し順を示すデータが記憶されている。この読み出し順
は例えば正解、不正解によって、次のデータを読み出し
たり、再度同じデータを繰り返すようにしたりする等で
ある。この読み出し順データに基づいて、読み出し制御
部２２は、フロッピーディスク１より各プログラム及び
各データファイルを読み出す。フロッピーディスク１内
の各データファイルの選択は、キーボード３のキー操作
等に基づく。例えば、上記質問に正解したとき、または
中止の指示があったときである。

【００１８】読み出し制御部２２によって読み出された
プログラムＰＧはプログラムメモリ２７に記憶され、順
次再生制御部２１によって読み出され、後述するフロー
チャートに示されるような処理が行われる。なお、この
プログラムＰＧはフロッピーディスク１に記憶したまま
とし、処理の進行に応じて順次読み出してもよいし、全
プログラムＰＧを一括してプログラムメモリ２７にロー
ドしてもよい。

【００１９】また、読み出し制御部２２によって読み出
された表示データＰＦ、サウンドデータＳＤ、タイミン
グデータＴＭの各データは、データバッファメモリ２３
に記憶され、順次再生制御部２１によって読み出され、
表示データＰＦ、サウンドデータＳＤ、タイミングデー
タＴＭの判別が行われる。表示データＰＦについては、
文字、図形等のコードデータの場合は、イメージジェネ
レータ２５へ送られてキャラクタデータに変換され、グ
ラフィックメモリ６に送られる。

【００２０】また、表示データＰＦの中の図１に示すよ
うな複雑なグラフィックパターン３１のグラフィックメ
モリ６については、イメージバッファメモリ２６を使っ
て輪郭線形成と色塗りが行われ、グラフィックメモリ６
に送られる。このイメージバッファメモリ２６は、グラ
フィックメモリ６に書き込まれたグラフィックデータを
一時消去して一時退避させるのにも使用される。この場
合、シェーディング処理、イルミネーション処理、トラ
ンスペアレンシー処理等を行って立体感または透明感あ
るグラフィックパターン３１を作成してもよい。

【００２１】また、サウンドデータＳＤについては、上
記ＭＩＤＩインタフェース７を介して送出され、サウン
ドデータＳＤに応じた楽音が発音される。さらに、上記
タイミングデータＴＭに基づいて、上記表示データＰＦ
に応じた表示が行われたり、サウンドデータＳＤに応じ
た発音が行われたりする。このタイミングデータＴＭ
は、サウンドデータＳＤ及び表示データＰＦの一部とと
もにシーケンスデータＳＱとして記憶されている。なお
ＭＩＤＩインタフェース７を通じて、後述する各データ
を出力することにより、外部接続電子楽器を介して音を
発音させたり、逆に入力されたデータに基づいて、後述
する表示処理または発音処理を行うようにしてもよい。

【００２２】テンポカウンタ１４は、プログラマブルタ
イマ等で構成され、フロッピーディスク１内の各データ
の中のテンポデータＴＰがセットされ、テンポデータＴ
Ｐに応じた周期で再生制御部２１にインタラプト信号Ｉ
ＮＴが送られる。このインタラプト信号ＩＮＴが送出さ
れると、上記シーケンスカウンタ２８が＋１され、時間
のカウントが行われる。シーケンスカウンタ２８のカウ
ントデータは、上記タイミングデータＴＭと比較され、
一致すると表示データＰＦまたはサウンドデータＳＤに
基づいた処理が行われる。

【００２３】４．データファイルフォーマット 図４は、フロッピーディスク１に記憶されている１つの
データファイルのフォーマットを示している。このデー
タファイルの中には、上述した表示データＰＦ、サウン
ドデータＳＤ、タイミングデータＴＭ、テンポデータＴ
Ｐ、入力チェックデータＥＶ等が含まれる。そして、こ
のデータファイルの前の部分には、後述するプログラム
ＰＧが記憶されている。

【００２４】１つのデータファイルは、複数のブロック
データよりなっている。このブロックデータの１つ１つ
が上記のシーケンスデータＳＱ、表示データＰＦ、サウ
ンドデータＳＤ、タイミングデータＴＭ、テンポデータ
ＴＰのほか、入力チェックデータＥＶとなっている。

【００２５】入力チェックデータＥＶは、上記質問の正
解データや、例えばサウンドデータＳＤに基づいて鳴ら
した演奏に対し、キーボード３のキーをこの演奏にあわ
せてオン／オフした場合に、このオン／オフが演奏と合
っているかどうかを判別するためのデータである。この
判別はタイミングについての判別のほか、音高について
の判別、音色についての判別、エフェクト内容について
の判別、音量についての判別等を含めることもできる。

【００２６】１つのデータファイルの先頭には、このデ
ータファイルがいくつのブロックデータからなっている
かを示すブロック数データｎ等が記憶されている。各デ
ータブロックは、ブロックヘッダとデータ部とよりなっ
ている。データ部には上記シーケンスデータＳＱ、表示
データＰＦ、サウンドデータＳＤ、タイミングデータＴ
Ｍ、テンポデータＴＰ、入力チェックデータＥＶの内容
が記憶されている。

【００２７】ブロックヘッダには、区分コード、データ
長、実行オケージョンコード、ブロック識別ＩＤ、ブロ
ックパラメータが記憶されている。区分コードは、上記
シーケンスデータＳＱ、表示データＰＦ、サウンドデー
タＳＤ、タイミングデータＴＭ、テンポデータＴＰ、入
力チェックデータＥＶの区別を示すコードデータであ
る。例えば、文字コードデータの表示データＰＦなら
「１」、イメージデータの表示データＰＦなら「２」、
楽譜の表示データＰＦなら「３」、シーケンスデータＳ
Ｑなら「４」、入力チェックデータＥＶなら「５」、
線、円等の図形の表示データＰＦなら「６」等である。

【００２８】データ長は、ブロックデータの長さを示す
データである。実行オケージョンコードは、当該ブロッ
クデータがタイミングデータＴＭに基づいたタイミング
で処理されるべきものかそうでないかを示す判別ビット
データである。このビットデータが“０”なら、シーケ
ンスデータを読み出す前にこれらデータに基づいた処理
が行われ、“１”ならシーケンスデータの読み出しごと
に処理されていく。ブロック識別ＩＤは、１データファ
イルの中の各ブロックデータの実行される順番を示すデ
ータである。このブロック識別ＩＤを入れ換えると、実
行手順を入れ換えることができる。

【００２９】ブロックパラメータは、ブロックデータの
タイプによって記憶される固有のデータである。このブ
ロックパラメータは、表示データＰＦであれば表示画面
３０内の表示位置の座標データ（ｘ，ｙ）や、表示モー
ド、イメージデータの高さと幅、文字コードデータの色
等であり、シーケンスデータＳＱであれば、このデータ
を使用できる音源タイプ、テンポデータＴＰ、データタ
イプ等であり、入力チェックデータＥＶであれば、デー
タフォーム等である。

【００３０】上記表示モードは、イメージデータがビッ
トマップ形式のものか、輪郭線と色塗形式のものか等々
の区別を示すフォームデータと、透過色の表示の有無、
背景色との論理演算形式等を示すアクションデータとよ
りなっている。上記音源のタイプはＭＩＤＩ方式による
楽器の区分に基づいている。上記データフォームは、番
号、メロディ、リズム、和音、単音、音別等を示してお
り、質問形式が番号による解答を求めるもの、メロディ
による解答を求めるもの等の区別を示している。

【００３１】５．ブロックデータフォーマット 図５及び図６は、上記ブロックデータフォーマットを示
している。このブロックデータフォーマットは、図１に
示す表示画面３０の表示内容と発音内容を実現する例に
応じたものである。ブロックデータ１には、図１の上方
に表示される「きょくにあわせて…」の文字コードデー
タの表示データＰＦが記憶され、ブロックデータ２に
は、図１の下方の右向の動物のグラフィックパターン３
１の表示データＰＦが記憶され、ブロックデータ３に
は、図１の下方の左向の動物のグラフィックパターン３
１の表示データＰＦが記憶され、ブロックデータ４に
は、演奏される曲のサウンドデータＳＤと表示データＰ
Ｆの一部とタイミングデータＴＭとよりなるシーケンス
データＳＱが記憶され、ブロックデータ５には、正解デ
ータ等の入力チェックデータＥＶが記憶される。

【００３２】ブロックデータ１の先頭には、上述した表
示位置の座標データ（ｘ，ｙ）等のブロックヘッダが記
憶され、データ部には、「きょくにあわせて、おどって
いるさるはどれ？」の文字コードデータの表示データＰ
Ｆが記憶されている。なお、この文字の先頭の「Ｑ．１
７」は質問ナンバすなわちデータファイルナンバを示す
もので、キーボード１で選んだ質問ナンバに応じたもの
が表示される。

【００３３】むろん、この文字もデータファイルの中に
記憶しておいてもよい。また、表示位置の座標データ
（ｘ，ｙ）は、画面上の特定位置を（０，０）とし、こ
の位置からの離間間隔に応じた座標データとなる。この
座標データ（ｘ，ｙ）は、表示画面３０の１ドットに対
応しているが、ｎドット×ｍドットの表示パートに対応
したものでもよい。

【００３４】ブロックデータ２、３の先頭には、上述し
た表示モード、イメージデータの高さ及び幅等のブロッ
クヘッダが記憶され、データ部には図１の動物のグラフ
ィックパターン３１のイメージデータの表示データＰＦ
が記憶されている。このイメージデータはビットマップ
形式のものである。なお、このイメージデータの表示デ
ータＰＦの表示位置の表示座標データ（ｘ，ｙ）は、後
述するタイミングデータＴＭの中に記憶されており、こ
こでは記憶されていないが、タイミングデータＴＭがな
いときにはここで記憶される。

【００３５】このように、ブロックデータ１の形式で
は、コード形式の表示データＰＦを処理することがで
き、ブロックデータ２、３の形式では、イメージ形式の
表示データＰＦを処理することができ、種々の表示デー
タＰＦを一括して処理することができる。

【００３６】ブロックデータ４の先頭には、上述した音
源タイプ、テンポデータＴＰ、データタイプ等のブロッ
クヘッダが記憶され、データ部には図１の発音内容と表
示内容に応じたシーケンスデータＳＱが記憶される。こ
のデータの詳しい内容は図６に示すとうりである。な
お、サウンドデータＳＤは、タイミングデータＴＭとと
もにシーケンスデータＳＱのブロックデータ内に記憶さ
れ、表示データＰＦは上記ブロックデータ１、２、３に
示すように、別のブロックデータに記憶されている。こ
れは、サウンドデータＳＤのデータ量が少ないためであ
る。むろんサウンドデータＳＤだけで、１つのブロック
データを構成してもよいし、逆に表示データＰＦのデー
タ量も少なければ、タイミングデータＴＭとともにシー
ケンスデータＳＱのブロックデータ内に記憶することも
できる。

【００３７】ブロックデータ５の先頭には、上述した番
号のデータフォーム等のブロックヘッダが記憶され、デ
ータ部には正解等の入力チェックデータＥＶが記憶され
る。この入力チェックデータＥＶはブランチ数、正解、
表示基準データ（ｘ＊，ｙ＊）、番号（１）（２）
（３）の表示位置の座標データからなっている。ブラン
チ数は質問に対する解答のブランチの数を示しており、
図１の例では３つである。正解は、この３つのブランチ
のうち正解の番号を示している。（１）（２）（３）の
表示位置の座標データは、図１の表示画面３０内に表示
される解答ブランチ番号（１）（２）（３）の表示位置
の座標データである。表示基準データ（ｘ＊，ｙ＊）
は、上記番号（１）（２）（３）等の表示の（０，０）
の基準テンポの座標を示している。

【００３８】この入力チェックデータＥＶは、上述のよ
うな番号選択のほか、以下のようなものがある。例え
ば、演奏されるメロディまたはリズムに応じて、キーボ
ード３のキーをオン／オフするような問題であれば、判
別音長データが記憶される。この判別音長データは、後
述するサウンドデータＳＤのサウンドオン／サウンドオ
フからの時間データを示しており、この時間内に上記キ
ーオン／キーオフがあれば正解となる。この判別音長デ
ータが上記タイミングデータＴＭに対し加算または減算
されて、この演算タイミングデータ以降または以前に上
記キーオン／キーオフの判別が行われる。

【００３９】また、発音される音高やコードの内容を当
てる質問であれば、正解の音高データやコードの種類に
応じた番号やコードを構成する各音高データが入力チェ
ックデータＥＶとなる。このような場合の解答は、キー
ボード３の数値キー等を代用して行われたり、本装置に
接続された電子楽器を通じて行われ、操作された音高に
応じた音高データが入力されて、正解の判別が行われ
る。

【００４０】６．タイミングデータＴＭ 図７は、上述のブロックデータ４のデータ部に記憶され
るシーケンスデータＳＱを示している。この各データ
は、次のような形式となっている。先頭から、タイミン
グデータＴＭ、コマンドデータ、識別コード、パラメー
タ部となっている。タイミングデータＴＭは、当該デー
タの処理タイミングを示している。

【００４１】コマンドデータは、処理コマンドの内容を
示すもので、例えば“９０н（нは１６進数であること
を示す記号）”は、表示データＰＦのグラフィックメモ
リ６への書き込み処理を示し、“８０н”はイメージバ
ッファメモリ２７に一時退避しておいたイメージデータ
の表示データＰＦを読み出してグラフィックメモリ６へ
書き込む処理を示し、“Ａ０н”はグラフィックメモリ
６の一部のイメージデータの表示データＰＦをイメージ
バッファメモリ２７に一時退避する処理を示し、“ＦＥ
н”はサウンドデータＳＤのオンまたはオフの処理を示
し、“ＦＣн”はこのパラメータ部の終わりを示し、
“７Ｆн”はテンポデータＴＰの変更の処理を示してい
る。

【００４２】識別コードは、上述した各ブロックデータ
１、２、３、４、５…のいずれについて実行するかを示
すもので、上述のブロックヘッダのブロック識別ＩＤが
使われる。パラメータ部は、実行される内容を示すデー
タを示しており、表示データＰＦであれば表示位置の座
標データ（ｘ，ｙ）を示し、サウンドデータＳＤであれ
ばオン／オフ、ノートナンバ（音高）、ベロシティを示
している。

【００４３】この図６は、上記図１に示された動物のグ
ラフィックパターン３１の表示内容と発音内容に応じた
ものとなっている。コマンドデータが“９０н”と“Ｆ
Ｅн”のものをみていくと、“００００”のタイミング
で“６４н”の音高の音が“７Ｆн”の音量でオンし、
“００９６”のタイミングで“６４н”の音高の音が音
量“００н”となってオフし、“００９６”のタイミン
グで“６７н”の音高の音が“７Ｆн”の音量でオン
し、“０１９２”のタイミングで“６７н”の音高の音
が音量“００н”となってオフすることになる。以後こ
れが繰り返されて“６４н”“６７н”“６４н”“６
７н”……というように演奏が行われていく。これは簡
単な演奏であり、音高の値を種々変えたりして、より変
化に富んだ演奏を行うことができる。

【００４４】これに対し、座標（ｘ１，ｙ１）に表示さ
れる図１（１）の動物のグラフィックパターン３１は、
“００００”のタイミングで右向の“２”のブロックデ
ータの表示データＰＦが表示され、“００９６”のタイ
ミングで左向の“３”のブロックデータの表示データＰ
Ｆが表示され、以後これが繰り返されて“０１９２”の
タイミングでグラフィックパターン３１は右向、“０２
８８”のタイミングでグラフィックパターン３１は左向
……というように変化していく。従って、図１（１）の
グラフィックパターン３１は、演奏と完全に同期して表
示切換が行われる。ゆえに、この場合の質問に対する正
解はこの（１）ということになる。

【００４５】このように、サウンドデータＳＤに応じた
発音と表示データＰＦに応じた表示とを同じタイミング
で同期して行うことにより、表示内容を見ているものに
臨場感を与えることができ、表現内容をより豊かにする
ことができる。

【００４６】また、座標（ｘ２，ｙ２）に表示される図
１（２）の動物のグラフィックパターン３１は、“００
００”のタイミングで右向の“２”のブロックデータの
表示データＰＦが表示され、“００６４”のタイミング
で左向の“３”のブロックデータの表示データＰＦが表
示され、以後これが繰り返されて“０１６０”のタイミ
ングでグラフィックパターン３１は右向、“０２５６”
のタイミングでグラフィックパターン３１は左向……と
いうように変化していく。従って図１（２）のグラフィ
ックパターン３１は、演奏のタイミングより早く表示切
換が行われる。ゆえに、この（２）は質問に対して不正
解ということになる。

【００４７】さらに、座標（ｘ３，ｙ３）に表示される
図１（３）の動物のグラフィックパターン３１は、“０
０００”のタイミングで右向の“２”のブロックデータ
の表示データＰＦが表示され、“０１２８”のタイミン
グで左向の“３”のブロックデータの表示データＰＦが
表示され、以後これが繰り返されて“０２２４”のタイ
ミングでグラフィックパターン３１は右向、“３２０”
のタイミングでグラフィックパターン３１は左向……と
いうように変化していく。従って図１（３）のグラフィ
ックパターン３１は、演奏のタイミングより遅く表示切
換が行われる。ゆえに、この（３）は質問に対して不正
解ということになる。

【００４８】上記右向の動物のグラフィックパターン３
１の表示データＰＦと左向の動物のグラフィックパター
ン３１の表示データＰＦとを入れ替えて表示させると
き、イメージバッファメモリ２６に一時退避させて、読
み出して再度表示させることもできる。

【００４９】７．全体処理 図８は全体処理のフローチャートを示している。この処
理は電源投入によってスタートし、再生制御部２１は、
シーケンスカウンタ２８、テンポカウンタ１４等のクリ
ア等のイニシャライズ処理を行い（ステップ０１）、フ
ロッピーディスク１のプログラムＰＧを読み出してプロ
グラムメモリ２７にロードし（ステップ０２）、背景の
グラフィックデータをフロッピーディスクより読み出
し、表示画面３０に背景を表示させる（ステップ０
３）。次いでファイルナンバデータＮをクリアし（ステ
ップ０４）、読み出し制御部２２に対し、フロッピーデ
ィスク１内の第Ｎ番目のデータファイルの読み出しを指
示する（ステップ０５）。

【００５０】次いで、読み出し制御部２２によって、フ
ロッピーディスク１内の第Ｎ番目のデータファイルが読
み出され、データバッファメモリ２３へロードされる
（ステップ０６）。そして、このロードしたデータファ
イル各ブロックデータの中の実行オケージョンコードが
“０”ものがサーチされ、このサーチしたブロックデー
タだけについて発音表示処理が行われる（ステップ０
７）。この発音表示処理は次述するステップ０８の発音
表示処理とほぼ同じである。

【００５１】次いで、残りのブロックデータの中からシ
ーケンスデータＳＱがサーチされ、このシーケンスデー
タＳＱに基づいて発音表示処理が実行される（ステップ
０８）。この発音表示処理は後述する。

【００５２】上記ステップ０１〜０８のフローチャート
に対応したプログラムＰＧは例えば図９に示すような形
で示すことができ、このプログラムＰＧはフロッピーデ
ィスク１に記憶されている。この図８のプログラムＰＧ
は分かり易くするために、簡略化して一部のみ示してい
るが、その形態は使用するプログラム言語によって種々
変化する。

【００５３】８．発音表示処理 図１０は上記ステップ０８の発音表示処理のフローチャ
ートを示している。この処理では、再生制御部２１（Ｃ
ＰＵ１１）は、上記読み出したデータファイルの中の
「４」の区分コードのブロックデータ、すなわちタイミ
ングデータＴＭの記憶されているブロックデータの中の
このタイミングデータＴＭを読み出す（ステップ１
１）。そして、このタイミングデータＴＭとシーケンス
カウンタ２８の時間データとを比較する（ステップ１
２）。図７の例でいけば、先頭のデータのタイミングデ
ータＴＭは“００００”であるから、即座に一致するこ
とになる。

【００５４】そして、上記タイミングデータＴＭの次の
コマンドデータを読み出し（ステップ１３）、このコマ
ンドデータが、“７Ｆн”のテンポデータＴＰ変更のコ
マンドか、“ＦＥн”のサウンドデータＳＤのオン／オ
フのコマンドか、“９０н”の表示データＰＦの書き込
みコマンドか、“ＦＣн”のエンドコマンドかを判別す
る（ステップ１４、１５、１６、１７）。

【００５５】テンポデータＴＰ変更のコマンドであれ
ば、テンポデータＴＰを読み出して、テンポカウンタ１
４にセットする（ステップ１８）。これにより、テンポ
データＴＰに応じた周期でインタラプト信号ＩＮＴが再
生制御部２１（ＣＰＵ１１）に与えられることになる。
この場合、処理速度を決定するクロック信号φの周波数
を変えれば、このクロック信号はテンポカウンタ１４に
与えられるので、インタラプト信号ＩＮＴの出力周期も
変わり、表示データＰＦ及びサウンドデータＳＤの処理
速度も変わることになる。

【００５６】サウンドデータＳＤのオン／オフのコマン
ドであれば、次のオン／オフデータ、ノートナンバ（音
高）、ベロシティのサウンドデータＳＤを読み出し、Ｍ
ＩＤＩインタフェース７を介してトーンジェネレータ８
に出力する（ステップ１９）。これによりサウンドデー
タＳＤに応じた発音または消音が行われる。

【００５７】表示データＰＦの書き込みコマンドであれ
ば、次の識別コードと同じブロックデータの表示データ
ＰＦを読み出し、グラフィックメモリ６に書き込む（ス
テップ２０）。これにより、表示データＰＦに応じた表
示が行われる。エンドコマンドであれば、この処理を終
え、エンドコマンドでもなければ、ステップ２１に進
む。

【００５８】ステップ２１では、シーケンスカウンタ２
８の値が＋１される（ステップ２１）。これにより、シ
ーケンスカウンタ２８の時間データがカウントされてい
くことになる。

【００５９】そして、キーボード３からのコマンド等の
入力があれば（ステップ２２）、この入力コマンドが処
理の中止を示すコマンドであれば（ステップ２３）、読
み出しデータファイルナンバデータＮを＋１して（ステ
ップ２４）、フロッピーディスク１内の第Ｎ番目のデー
タファイルを読み出し、データバッファメモリ２３へロ
ードする（ステップ２５）。

【００６０】上記ステップ２３で、処理中止のコマンド
でなければ、解答データの入力と解釈して、「５」のデ
ータブロック内の正解データを読み出し（ステップ２
６）、入力データと比較し（ステップ２７）、一致して
いれば上記ステップ２４に進む。一致していなければ、
そのまま処理を終える。

【００６１】これらステップ１１〜２７の処理は、以上
のようにしていったん終了するが、これ以降テンポカウ
ンタ１４によりインタラプト信号ＩＮＴが再生制御部２
１（ＣＰＵ１１）に与えられるごとに繰り返し実行され
る。従って、インタラプト信号ＩＮＴが与えられるごと
に、ステップ２１の処理は必ず行われて、シーケンスカ
ウンタ２８の時間データは必ずカウントされていく。

【００６２】そして、この時間データが「４」のブロッ
クデータの中のタイミングデータＴＭに一致すれば（ス
テップ１１、１２）、テンポデータＴＰのセット（ステ
ップ１４、１８）、サウンドデータＳＤに応じた発音
（ステップ１５、１９）、表示データＰＦに応じた表示
（ステップ１６、２０）が繰り返し行われる。これに対
し、正解が入力されれば（ステップ２２、２３）、正解
かどうかの判別が行われ（ステップ２６、２７）、これ
に応じてデータファイルＮが１つ進められたり、現在の
データファイルが繰り返されたりする。

【００６３】上記ステップ１１〜２７のフローチャート
に対応したプログラムＰＧは例えば図１１に示すような
形で示すことができ、このプログラムＰＧはフロッピー
ディスク１に記憶されている。この図１１のプログラム
ＰＧは分かり易くするために、簡略化して一部のみ示し
ているが、その形態は使用するプログラム言語によって
種々変化する。

【００６４】本実施例では、シーケンスデータＳＱと表
示データＰＦとも分離して記憶しているので、表示デー
タＰＦだけまたはシーケンスデータＳＱだけ変更して、
表示内容だけ変更したり、表示の変化の順番を変更した
りすることができる。シーケンスデータＳＱの中のサウ
ンドデータＳＤを変更すれば、発音内容だけ変更した
り、発音の変化の順番を変更したりすることができる。
むろん、シーケンスデータＳＱからサウンドデータＳＤ
も分離しておけば、サウンドデータＳＤの変更だけで、
発音内容だけ変更したり、発音の変化の順番を変更した
りすることができる。

【００６５】また、図１の（１）のグラフィックパター
ン３１については、表示データＰＦとサウンドデータＳ
Ｄとは、同じ値のタイミングデータＴＭに基づいて、ま
ったく同じタイミングで処理される。しかし、表示デー
タＰＦまたはサウンドデータＳＤのいずれかを増やし
て、表示データＰＦの一部がサウンドデータＳＤと同期
しないで処理されたり、サウンドデータＳＤの一部が表
示データＰＦと同期しないで処理されたりしてもよい。

【００６６】本発明は上記実施例に限定されず、本発明
の趣旨を逸脱しない範囲で種々変更可能である。例え
ば、上記サウンドデータＳＤは、「あ」「い」「う」…
…「ら」「り」「る」……「きゃ」「しゃ」「ちゃ」
「ぎゃ」「じゃ」……または「ａ」「ｉ」「ｕ」……
「ｋ」「ｓ」「ｔ」……「ｋｙ」「ｓｈ」「ｃｈ」［ｇ
ｙ」「ｊ」……の音の音声コードデータとしたり、また
はこの音声コードデータを付加して、トーンジェネレー
タ８に、この「あ」「い」「う」……の音声サウンドデ
ータも記憶しておき、曲の演奏ばかりでなく、自動的に
歌を歌うようにしてもよい。

【００６７】また、表示データＰＦは、動物のグラフィ
ックパターン３１に限られず、楽譜の音符等の各種音楽
記号のグラフィックパターン、円、方形等の図形のグラ
フィックパターン、文字、記号、図形のコードデータ
等、どのようなものでもよく、上記切換表示される複数
の表示データＰＦは、形の異なるもののほか、色の異な
るもの、模様の異なるもの等として、グラフィックパタ
ーン３１が動くように変化するほか、色が変化したり、
模様が変化したりしてもよい。さらに、シーケンスデー
タＳＱ内の表示データＰＦを特定のタイミングデータＴ
Ｍのところで新たに記憶するようにしたり、それまで記
憶していた表示データＰＦを特定のタイミングデータＴ
Ｍのところで新たに記憶しないようにしたりして、音の
進行に応じて表示画面３０内のグラフィックパターン２
１が順次現れたり消えたりするようにしてもよい。

【００６８】本願発明の実施の態様は以下の通りであ
る。 （１） 発音する音の内容を示す複数のサウンド
データを記憶するサウンド記憶手段と、 表示するグラ
フィックの内容を示す複数の表示データを記憶する表示
記憶手段と、 上記各サウンドデータの発音のタイミン
グを示すサウンドタイミングデータ、または上記各表示
データの表示のタイミングを示す表示タイミングデータ
を記憶するタイミング記憶手段と、 上記各サウンドデ
ータまたは各表示データを上記各タイミングデータに基
づいて発音または表示の処理を実行するためのプログラ
ムであって、上記各データとは分離して当該プログラム
を記憶するプログラム記憶手段とを備えたことを特徴と
するサウンド情報及び表示情報の記憶方式。 （２）
発音する音の内容を示す複数のサウンドデータを記憶す
るサウンド記憶手段と、 表示するグラフィックの内容
を示す複数の表示データを記憶する表示記憶手段と、
上記各サウンドデータの発音のタイミングを示すサウン
ドタイミングデータ、または上記各表示データの表示の
タイミングを示す表示タイミングデータを記憶するタイ
ミング記憶手段と、 上記各サウンドデータまたは各表
示データを上記各タイミングデータに基づいて発音また
は表示の処理を実行するためのプログラムであって、上
記各データとは分離して当該プログラムを記憶するプロ
グラム記憶手段と、 これら各記憶手段よりプログラム
または各データを読み出す各読み出し手段と、 この読
み出し手段によって読み出されたプログラムに基づいて
処理を行い、かつ上記読み出された各タイミングデータ
の順番に沿って、上記読み出された各サウンドデータま
たは読み出された各表示データについて、発音または表
示の処理を実行する処理手段とを備えたことを特徴とす
る発音表示方式。 （３）発音する音の内容を示す複数
のサウンドデータを記憶するサウンド記憶手段と、 上
記サウンドデータに応じた発音と同期して順次表示され
る、複数のグラフィックの内容を示す複数の表示データ
を記憶する表示記憶手段と、 上記各サウンドデータの
発音のタイミングを示すサウンドタイミングデータまた
は上記各表示データの表示のタイミングを示す表示タイ
ミングデータを記憶するタイミング記憶手段と、 上記
サウンド記憶手段よりサウンドデータを読み出し、上記
表示記憶手段より表示データを読み出し、上記タイミン
グ記憶手段よりタイミングデータを読み出す各読み出し
手段と、 時間の経過をカウントする時間カウント手段
と、 この時間カウント手段によってカウントされた時
間データと上記タイミングデータとを比較する比較手段
と、 この比較手段の比較結果に応じて、上記サウンド
データに応じた発音を行う発音手段と、 上記比較手段
の比較結果に応じて、上記表示データに応じた表示を行
う表示手段とを備えたことを特徴とする発音表示方式。
（４） 上記各サウンドデータまたは上記各表示デー
タと上記各タイミングデータとは分離されて記憶されて
いることを特徴とする請求項１、２または３記載のサウ
ンド情報及び表示情報の記憶方式並びに発音表示方式。
（５） 上記表示データまたは上記サウンドデータは、
それぞれの判別データを含み、かつ上記タイミングデー
タに対応して記憶され、上記処理手段はこのタイミング
データの順番に基づいて、上記判別データに基づいて上
記表示データまたは上記サウンドデータを判別し、上記
各サウンドデータまたは各表示データについて、発音ま
たは表示の処理を実行する手段であることを特徴とする
請求項２記載の発音表示方式。 （６） 上記各サウン
ドデータに応じた発音と上記各表示データに応じた表示
とは同じタイミングで行われることを特徴とする請求項
３記載の発音表示方式。 （７） 上記時間カウント手
段は、そのカウント速度を任意に変更可能であることを
特徴とする請求項３記載の発音表示方式。 ［発明の効
果］ 以上詳述したように、本発明は、各サウンドデー
タまたは各表示データと、これに応じた各タイミングデ
ータと、これらのデータに基づいて発音または表示の処
理を実行するためのプログラムを、上記各データとは分
離して記憶した。これにより、設計変更にあたり、プロ
グラムはそのままで、必要なデータだけを変更すればよ
く、設計変更が容易となり、バリエーションの幅が広が
る。

【図面の簡単な説明】

【図１】ＣＲＴ５の表示画面３０に表示されるグラフィ
ックパターン３１を示す図である。

【図２】発音表示装置の全体回路図である。

【図３】制御装置１０の回路図である。

【図４】フロッピーディスク１に記憶されているデータ
ファイルの１つを示す図である。

【図５】データファイルの中の各データブロックを示す
図である。

【図６】データファイルの中の各データブロックを示す
図である。

【図７】シーケンスデータＳＱのデータブロックのデー
タ部の内容を示す図である。

【図８】全体処理のフローチャートを示す図である。

【図９】全体処理のプログラムＰＧの一例を示す図であ
る。

【図１０】発音表示処理（ステップ０８）のフローチャ
ートを示す図である。

【図１１】発音表示処理のプログラムＰＧの一例を示す
図である。

【図１２】従来の発音表示処理のプログラムの一例を示
す図である。

【符号の説明】

１…フロッピーディスク、５…ＣＲＴ（ブラウン管）、
６…グラフィックメモリ、７…ＭＩＤＩインターフェー
ス、８…トーンジェネレータ、１０…制御装置、１１…
ＣＰＵ、１２…ＲＡＭ、１４…テンポカウンタ、２１…
再生制御部、２２…読み出し制御部、２３…データバッ
ファメモリ、２４…読み出し順テーブル、２５…イメー
ジジェネレータ、２６…イメージバッファメモリ、２７
…プログラムメモリ、２８…シーケンスカウンタ、３０
…表示画面、３１…グラフィックパターン。

フロントページの続き (72)発明者 木村 剛 浜松市寺島町200番地 株式会社河合楽 器製作所内 (72)発明者 今井 優子 浜松市寺島町200番地 株式会社河合楽 器製作所内 (72)発明者 池谷 由美子 浜松市寺島町200番地 株式会社河合楽 器製作所内 (72)発明者 大内 邦則 浜松市寺島町200番地 株式会社河合楽 器製作所内 (56)参考文献 特開 昭61−148493（ＪＰ，Ａ) 特開 平１−188900（ＪＰ，Ａ) 実開 昭57−116992（ＪＰ，Ｕ) (58)調査した分野(Int.Cl.⁶，ＤＢ名) G09B 15/02 G10H 1/00 101 G10H 1/36

Claims (4)

(57)【特許請求の範囲】
1. 【請求項１】出力された問題に対して、解答を行うもの
   であって、 発音する音の内容を示す複数のサウンドデータであっ
   て、上記問題に係るデータを記憶 し、 表示するグラフィックの内容を示す複数の表示データで
   あって、上記問題に係るデータを記憶し、 上記各サウンドデータの発音のタイミングを示すサウン
   ドタイミングデータ、 及び上記各表示データの表示のタイミングを示す表示タ
   イミングデータを記憶し、 上記解答をチェックするチェックデータを記憶し、 上記各サウンドデータ及び各表示データを上記各タイミ
   ングデータに基づいて発音及び表示の処理を実行するた
   めのプログラムと、上記解答を上記チェックデータに基
   づいてチェックするためのプログラムとであって、上記
   各データとは分離して当該プログラムを記憶し、 これら各プログラム及び各データを読み出し、 この読み出されたプログラムに基づき、かつ上記読み出
   された各タイミングデータの順番に沿って、上記読み出
   された各サウンドデータ及び読み出された各表示データ
   について、発音及び表示の処理を実行することにより、
   上記問題を出力し、さらに上記読み出されたチェックデ
   ータに基づいて上記解答をチェックすることを特徴とす
   るサウンド情報及び表示情報の発音表示装置。
2. 【請求項２】出力された問題に対して、解答を行うもの
   であって、 発音する音の内容を示す複数のサウンドデータであっ
   て、上記問題に係るデータを記憶 し、 表示するグラフィックの内容を示す複数の表示データで
   あって、上記問題に係るデータを記憶し、 上記各サウンドデータの発音のタイミングを示すサウン
   ドタイミングデータ、及び上記各表示データの表示のタ
   イミングを示す表示タイミングデータを記憶し、 上記解答をチェックするチェックデータを記憶し、 上記各サウンドデータ及び各表示データを上記各タイミ
   ングデータに基づいて発音及び表示の処理を実行するた
   めのプログラムと、上記解答を上記チェックデータに基
   づいてチェックするためのプログラムとであって、上記
   各データとは分離して当該プログラムを記憶し、 これら各プログラム及び各データを読み出させ、 この読み出されたプログラムに基づき、かつ上記読み出
   された各タイミングデータの順番に沿って、上記読み出
   された各サウンドデータ及び読み出された各表示データ
   について、発音及び表示の処理を実行させることによ
   り、上記問題を出力させ、さらに上記読み出されたチェ
   ックデータに基づいて上記解答をチェックさせることを
   特徴とするサウンド情報及び表示情報の発音表示方法。
3. 【請求項３】出力された問題に対して、解答を行うもの
   であって、 発音する音の内容を示す複数のサウンドデータであっ
   て、上記問題に係るデータを記憶 し、 このサウンドデータに応じた発音と同期して及び同期し
   ないで順次表示される、複数のグラフィックの内容を示
   す複数の表示データであって、上記問題に係るデータを
   記憶し、 上記各サウンドデータの発音のタイミングを示すサウン
   ドタイミングデータまたは上記各表示データの表示のタ
   イミングを示す表示タイミングデータを記憶し、 上記解答をチェックするチェックデータを記憶し、 上記サウンドデータ、上記表示データ、上記タイミング
   データ及び上記チェックデータを読み出し、 時間の経過をカウントし、 このカウントされた時間データと上記タイミングデータ
   とを比較し、 この比較結果に応じて、上記サウンドデータに応じた発
   音を行い、同じく上記比較結果に応じて、上記表示デー
   タに応じた表示を行うことにより、上記問題を出力し、 上記読み出されたチェックデータに基づいて、上記解答
   をチェックすることを特徴とするサウンド情報及び表示
   情報の発音表示装置。
4. 【請求項４】出力された問題に対して、解答を行うもの
   であって、 発音する音の内容を示す複数のサウンドデータであっ
   て、上記問題に係るデータを記憶 し、 このサウンドデータに応じた発音と同期して及び同期し
   ないで順次表示される、複数のグラフィックの内容を示
   す複数の表示データであって、上記問題に係るデータを
   記憶し、 上記各サウンドデータの発音のタイミングを示すサウン
   ドタイミングデータまたは上記各表示データの表示のタ
   イミングを示す表示タイミングデータを記憶し、 上記解答をチェックするチェックデータを記憶し、 上記サウンドデータ、上記表示データ、上記タイミング
   データ及び上記チェックデータを読み出しさせ、 時間の経過をカウントさせ、 このカウントされた時間データと上記タイミングデータ
   とを比較させ、 この比較結果に応じて、上記サウンドデータに応じた発
   音を行わせ、同じく上記比較結果に応じて、上記表示デ
   ータに応じた表示を行わせることにより、上記問題を出
   力させ、 上記読み出されたチェックデータに基づいて、上記解答
   をチェックさせることを特徴とするサウンド情報及び表
   示情報の発音表示方法。