JPH08335076A - 音楽演奏システム - Google Patents

Abstract

(57)【要約】 【目的】 操作の習熟や知識を必要とせず、使い方の自
由度が高い音楽演奏システムを提供することを目的とす
る。 【構成】 本発明にかかる音楽演奏システムは、描かれ
た絵の座標情報を入力するペン型入力装置３と、該ペン
型入力装置３から入力された座標情報を表示する表示装
置２と、ペン型入力装置３から入力された座標情報に対
応した音声信号を出力する音源装置４と、ペン型入力装
置３から入力された座標情報に基づいて表示装置２と音
源装置４とを制御する主制御装置１とを備えた構成とな
っている。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、描いた絵から音を出す
ことによる「面白さ」を提供する音楽演奏システムに関
する。

【０００２】

【従来の技術】近年、音響装置の電子化が進み、コンピ
ュータを利用した音楽演奏システムが急速に普及してき
ている。しかし、これらの音楽演奏システムは、一般的
に、作曲や編曲を楽しむことを目的としており、音楽の
知識や鍵盤操作等の演奏道具に関する長年にわたる習熟
が必要である。

【０００３】また、視覚的に音楽を表現する音楽演奏シ
ステムとしては、楽譜を図形や色に置き換えて表現する
ものや、音楽に合わせてグラフィックで描かれたキャラ
クタが動くもの等が知られている。但し、これらの音楽
演奏システムは、作曲することや音楽に合わせて絵を動
かすことを楽しむものであり、使用者が絵を描いたり、
音楽演奏をしたり、純粋に音を楽しんだりする自由度の
高い音楽演奏システムは未だ知られていない。さらに、
従来の音楽演奏システムでは、演奏するのにマウスやキ
ーボードを入力手段としている。

【０００４】

【発明が解決しようとする課題】しかしながら、鍵盤楽
器や弦楽器等を応用した従来の音楽演奏システムでは、
その操作に習熟が必要であるため、使いこなす前に使用
者の習得意欲を薄れさせてしまうという問題がある。一
方、操作が簡単なだけでは長続きせずに飽きてしまうの
で、演奏を楽しむ要素に限らず、思いがけない音の発見
を楽しむ要素や、聴覚だけでなく視覚にも訴えかける要
素等、使い方の自由度を高くする工夫が必要となる。ま
た、入力手段としてマウスを用いる場合、マウスの底面
を机やマウスパッド等の水平面に常に接触させる必要が
あり、使用者の操作の自由度が制限されると共に入力対
象を選び損じやすいという問題もある。

【０００５】本発明は、上記課題を解決するためになさ
れたものであり、操作の習熟や知識を必要とせず、使い
方の自由度が高い音楽演奏システムを提供することを目
的とする。

【０００６】

【課題を解決するための手段】請求項１の音楽演奏シス
テムは、描かれた絵の座標情報を入力する入力装置と、
該入力装置から入力された座標情報を表示する表示装置
と、前記入力装置から入力された座標情報に対応した音
声信号を出力する音源装置と、前記入力装置から入力さ
れた座標情報に基づいて前記表示装置と前記音源装置と
を制御する主制御装置とを備えたことを特徴とする。

【０００７】請求項２の音楽演奏システムは、請求項１
において、前記入力装置は、前記表示装置に設けられた
スクリーン上で描画可能であることを特徴とする。

【０００８】請求項３音楽演奏システムは、請求項２に
おいて、前記入力装置を前記表示装置のスクリーンに表
示された絵に接触させることにより、音声を発するよう
に前記主制御装置は前記音源装置を制御することを特徴
とする。

【０００９】請求項４の音楽演奏システムは、請求項２
又は３において、前記主制御装置は、前記入力装置によ
り描かれた絵の色と前記音源装置から出力される音声信
号とを対応させることを特徴とする。

【００１０】請求項５の音楽演奏システムは、請求項１
において、前記表示装置のスクリーン上に張り付け可能
なアイコンイメージを備えたことを特徴とする。

【００１１】請求項６の音楽演奏システムは、請求項５
において、外部からの音声を信号として入出力する音声
入出力装置を備え、該音声入出力装置により取り込まれ
た音声データをアイコンイメージとして定義することを
特徴とする。

【００１２】請求項７の音楽演奏システムは、請求項５
において、前記表示装置のスクリーン上に張り付けられ
た前記アイコンイメージに前記入力装置を接触させるこ
とにより、該アイコンイメージに対応した音声を発する
ように前記主制御装置は前記音源装置を制御することを
特徴とする。

【００１３】請求項８の音楽演奏システムは、請求項１
において、前記入力装置は、描画するためのペンと、該
ペンにより描画が行われるタブレットとからなるペン型
入力装置であることを特徴とする。

【００１４】請求項９の音楽演奏システムは、請求項８
において、前記タブレットに対する前記ペンの傾き及び
筆圧に応じて音色を変化させるように、前記主制御部は
前記音源装置を制御することを特徴とする。

【００１５】

【作用】本発明の音楽演奏システムによれば、入力装置
を用いて音楽演奏する前提として、色を並べたり、自由
に絵を描いたりすることで、音を聴く楽しみに加えて見
る楽しみも味わえる。また、入力装置としてペン型入力
装置を使用することで、描いた絵をペンで叩いたり、な
ぞったりして演奏操作の習熟を必要とすることなく音声
を発音させることができる。さらには音声入出力装置で
肉声を取り込み、効果音として利用することもできる。
その上、音声を演奏する際の入力操作のしにくさや失敗
も解消される。同様に、従来のお絵描きソフトにおけ
る、マウス入力での煩わしさや描き損じも解消される。

【００１６】

【実施例】以下、図面を参照しながら本発明の実施例を
詳述する。図１は、本発明にかかる音楽演奏システムの
一実施例を示す構成図である。図１に示すように、本発
明にかかる音楽演奏システムは、描画するためのペン３
ａと該ペン３ａにより描画が行われるタブレット３ｂと
からなり、かつ、その描かれた絵の座標情報を入力する
ペン型入力装置３と、該ペン型入力装置３から入力され
た座標情報を表示する表示装置２と、ペン型入力装置３
から入力された座標情報に対応した音声信号を出力する
音源装置４と、ペン型入力装置３から入力された座標情
報に基づいて表示装置２と音源装置４とを制御する主制
御装置１とを備えた構成となっている。さらに、本発明
にかかる音楽演奏システムは、外部からの音声を取り込
むマイク６と、該マイク６から取り込まれた音声を信号
として入出力する音声入出力装置５と、音源装置４及び
音声入出力装置５から出力される信号に応じて音声を発
するスピーカ７とを具備する。

【００１７】図２は、主制御装置内部のブロック図であ
る。図１及び図２を参照しながら、本発明にかかる音楽
演奏システムの動作を説明する。図２から明らかなよう
に、主制御部１は入力を２系統、出力を３系統で行う。
先ず、描画表示（Video out）を行う場合について説明
する。ペン型入力端子１１を介してペン型入力装置３か
ら入力された絵の座標情報が領域判定部１２に送信され
る。この座標情報は、領域判定部１２から表示制御部１
３へ直接送られる一方、タブレット３ｂに対するペン３
ａの筆圧及び傾斜情報は、パレット管理部１５に送られ
る。このパレット管理部１５で、ペン型入力端子１１で
指示された座標位置の色を判定し、表示制御部１３へ指
示が伝達される。そして、表示制御部１３でイメージデ
ータが作成され、Video out部１４を介して表示装置２
へ出力される。

【００１８】上述したように、ペン型入力装置３は、描
画するためのペン３ａと該ペン３ａにより描画が行われ
るタブレット３ｂとから構成された入力装置であり、使
用者がペン３ａによりタブレット３ｂ上で任意の絵を描
き、描かれた絵にペン３ａで「叩く」、「なぞる」等の
動作を行って、ペン３ａとタブレット３ｂとを接触させ
ることで、情報の入力が可能となり、楽器音、効果音、
マイク６から取り込んだ音声を音源装置４及び音声入出
力装置５を介してスピーカ７から音声が発せられる。ま
た、タブレット３ｂ上でペン３ａの筆圧を上げたり下げ
たり、あるいはペン３ａを傾斜させることで、入力情報
に変化をつけることもできる。さらに、ペン型入力装置
３は表示装置２に設けられたスクリーン上でも上記と同
様に任意の絵を描くこともできる。また、マウスと異な
り、細かい操作がペン感覚でおこなうことができる。

【００１９】本発明にかかる音楽演奏システムは、表示
装置２のスクリーン上に張り付け可能なアイコンイメー
ジ（以下、スタンプという）を具備する。スタンプを表
示する場合は、ペン型入力端子１１によって指示された
位置のスタンプの種類を領域判定部１２で判定し、スタ
ンプ・アイコン管理部１７にその判定結果を送り、スタ
ンプを表示制御部１３でイメージデータとし、Video ou
t部１４を介して表示装置２へ出力する。

【００２０】演奏音を出力（MIDI out）する場合につい
て説明する。ペン型入力端子１１を介してペン型入力装
置３から入力された絵の座標情報が領域判定部１２に送
信される。領域判定部１２は、入力された座標位置で指
示された表示スクリーン上のボタン、パレットのメニュ
ー、描かれた絵等のアイテムを判別し、パレット管理部
１５、スタンプ・アイコン管理部１７へそれぞれ指示を
出す。

【００２１】パレット管理部１５では、ペン型入力端子
１１によって指示された座標位置の色が判定され、その
色に割り当てられた音色、ペン３ａの傾き及び筆圧に基
づいた音楽演奏データが演奏データ作成部１６で作成さ
れ、この作成された演奏データはMIDI out部１９を介し
て音源装置４に出力される。

【００２２】一方、スタンプ・アイコン管理部１７で
は、ペン型入力端子１１により指示された位置のスタン
プの種類を判定し、スタンプに割り当てられたフレーズ
をフレーズ管理部１８に指定する。そして、そのスタン
プで割り当てられた音楽演奏データや効果音を演奏デー
タ作成部１６で作成し、この作成された演奏データはMI
DI out部１９を介して音源装置４に出力される。

【００２３】人間の声をスタンプに録音して楽器のよう
に演奏する（AUDIO out）場合について説明する。音声
入力部２０を介して音声入出力装置５から取り込まれた
音声は、音声ＩＤ登録部２１に送られ、音声データを登
録する。そして、その音声ＩＤをスタンプ・アイコン管
理部１７へ送り、スタンプ・アイコンに音声ＩＤを割り
当てる。音声管理部２２にスタンプに対応させた音声デ
ータを保存しておき、スタンプ管理部１７からの音声デ
ータの指定で音声管理部２２は、AUDIO out部２３を介
して音声入出力装置５に音声データを出力する。

【００２４】フレーズ管理部１８は、スタンプに割り当
てられたフレーズを管理しており、スタンプ・アイコン
管理部１７から演奏するフレーズの指定を受けて、演奏
データ作成部１６で演奏データを作成し、該演奏データ
はMIDI out部１９を介して音源装置４に出力される。ま
た、表示制御部１３は表示スクリーン上にボタン・アイ
コン・パレットメニューの配置やペン型入力端子１１の
カーソルを表示したり、使用者が描く絵を描画する役割
を有する。

【００２５】図３は本発明にかかる音楽演奏システムの
具体例を示す使用状態図である。図３に示すように、使
用者はタブレット３ｂ上でペン３ａを用いて描画し、描
かれた絵は表示装置２の表示画面２ａに入力結果が出力
され表示される。そして、演奏モードに切り換えて再び
ペン３ａでタブレット３ａ上においてその絵をなぞった
りすることにより、スピーカ７を介して音楽演奏を聴取
することができる。

【００２６】図４は本発明にかかる音楽演奏システムの
描画時における表示画面を示す図である。図４におい
て、表示画面２ａには、色パレット３０、モード切り換
え３１、フレーズスタンプ３２、消しゴム３３及び音声
入力ボタン３４が表示されている。そして、これらの色
パレット３０、モード切り換え３１、フレーズスタンプ
３２、消しゴム３３及び音声入力ボタン３４に対応する
表示がタブレット３ｂ上にも設けられている。色パレッ
ト３０は描画時の色を指定すると共に音色も指定するも
のである。例えば、緑は太鼓の音、黄色はシンバルの音
といったように予め設定しておくと共に、表示画面２ａ
に緑地に太鼓の絵を表示しておき、タブレット３ｂ上の
対応する緑の色パレットをペン３ａで選択し、タブレッ
ト３ｂ上でペン３ａにより描画すると、表示画面２ａに
は緑の描線が現れる。そして、演奏モードに切り替えた
後に再びタブレット３ｂ上でペン３ａにより前記描線を
なぞると、スピーカ７から太鼓の音が発生する。

【００２７】モード切り換え３１は現在のモードを表示
するものであり、すなわち描画モードであるか演奏モー
ドであるかを示すものである。タブレット３ｂ上の対応
するモード切り換えにペン３ａを押し当てることによ
り、モードを切り換えることができ、表示画面２ａには
各モードに対応する絵が表示される。図４のモード切り
換え３１は描画モードを示している。また、フレーズス
タンプ３２は上述の色パレットと異なり、メロディーを
選択するものである。すなわち、タブレット３ｂ上のフ
レーズスタンプのいずれかを選択して、描画した後、演
奏モードに変換してペン３ａで描かれた絵をなぞる等す
ると、単発音ではなく一定のメロディーがスピーカ７か
ら流れる。

【００２８】消しゴム３３は表示画面２ａに表示された
絵を消去する際に用いられるものである。すなわち、タ
ブレット３ｂ上の対応する消しゴムにペン３ａを接触さ
せた後に該ペン３ａでタブレット３ｂ上の絵をなぞる
と、表示画面２ａの絵が消去される。また、音声入力ボ
タン３４は外部から音声を入力する際に用いられるもの
であり、タブレット３ｂ上の対応する音声入力ボタンに
ペン３ａを接触させると、音声の入力が可能となる。

【００２９】図５は本発明にかかる音楽演奏システムの
表示画面とタブレットの使用状態を示す図である。図５
に示すように、タブレット３ｂ上には表示画面２ａに表
示されている色パレット３０、モード切り換え３１、フ
レーズスタンプ３２、消しゴム３３及び音声入力ボタン
３４に対応する色パレット４０、モード切り換え４１、
フレーズスタンプ４２、消しゴム４３及び音声入力ボタ
ン４４がそれぞれ設けられており、上述したようにタブ
レット３ｂ上でペン３ａにより種々のアイコンを選択
し、描画及び演奏を楽しむことができる。

【００３０】図６は本発明にかかる音楽演奏システムの
演奏時における表示画面を示す図である。図６より明ら
かなように、モード切り替え３１を演奏モードに変更す
ると、フレーズスタンプに代わって演奏方法を選択する
ための演奏方法選択スタンプ３５が表示画面２ａ上に映
し出される。例えば、ペン３ａを用いて演奏方法選択ス
タンプ３５の左端を選択すると、一つのドラムによる演
奏が行われる。また、タブレット３ｂ上でペン３ａを用
いて絵を叩いたり、なぞったりすることで、表示画面２
ａに表示された絵に対応した音、メロディーの演奏を聴
取することができる。なお、表示画面２ａには複数の菱
形が放射状に表示されており、これは、叩いた部分がそ
の強度により弾けるような演奏効果をもたらすことを視
覚的に表している。

【００３１】以上が、本発明にかかる音楽演奏システム
の一構成例であって、次に音楽演奏システムの利用形態
の例を示す。例えば、物語りの１場面の絵を描き、登場
人物の台詞や物語りの情景を示す効果音をスタンプに登
録し、音の出る絵本として楽しむ利用形態、打楽器系の
音色を配置し、ドラムセットの代わりとする利用形態、
背景音楽や歌に合わせて演奏を楽しむ利用形態、色々な
色を使い自由に絵を描き、その絵を叩いたり、なぞった
りして、自分の描いた絵から出る思いがけない音を楽し
む利用形態等が挙げられる。

【００３２】

【発明の効果】本発明にかかる音楽演奏システムによれ
ば、使用する楽器の音色を入力スクリーン上の色として
置き換え、使用者が色のバリエーションの中から自由に
選択し、表示スクリーン上に配置することにより、音を
聴く楽しみに加えて見る楽しみも味わうことができる。
また、使用者は表示スクリーン上に配置された色の領
域、あるいは自分で描いた絵をペン型入力装置により
「叩く」あるいは「なぞる」といった単純な動作で触れ
ることにより、演奏操作の習熟を必要とすることなく演
奏することができる。さらに、使用者が自由な絵を描
き、その絵を楽器として演奏することにより、使用者自
身の創造性を膨らませながら楽しく音と遊ぶことができ
る。

【図面の簡単な説明】

【図１】本発明にかかる音楽演奏システムの一実施例を
示す構成図である。

【図２】主制御装置内部のブロック図である。

【図３】本発明にかかる音楽演奏システムの具体例を示
す使用状態図である。

【図４】本発明にかかる音楽演奏システムの描画時にお
ける表示画面を示す図である。

【図５】本発明にかかる音楽演奏システムの表示画面と
タブレットの使用状態を示す図である。

【図６】本発明にかかる音楽演奏システムの演奏時にお
ける表示画面を示す図である。

【符号の説明】

１ 主制御装置 ２ 表示装置 ３ ペン型入力装置 ４ 音源装置

Claims (9)

【特許請求の範囲】
1. 【請求項１】 描かれた絵の座標情報を入力する入力装
   置と、該入力装置から入力された座標情報を表示する表
   示装置と、前記入力装置から入力された座標情報に対応
   した音声信号を出力する音源装置と、前記入力装置から
   入力された座標情報に基づいて前記表示装置と前記音源
   装置とを制御する主制御装置とを備えたことを特徴とす
   る音楽演奏システム。
2. 【請求項２】 前記入力装置は、前記表示装置に設けら
   れたスクリーン上で描画可能であることを特徴とする請
   求項１記載の音楽演奏システム。
3. 【請求項３】 前記入力装置を前記表示装置のスクリー
   ンに表示された絵に接触させることにより、音声を発す
   るように前記主制御装置は前記音源装置を制御すること
   を特徴とする請求項２記載の音楽演奏システム。
4. 【請求項４】 前記主制御装置は、前記入力装置により
   描かれた絵の色と前記音源装置から出力される音声信号
   とを対応させることを特徴とする請求項２又は３記載の
   音楽演奏システム。
5. 【請求項５】 前記表示装置のスクリーン上に張り付け
   可能なアイコンイメージを備えたことを特徴とする請求
   項１記載の音楽演奏システム。
6. 【請求項６】 外部からの音声を信号として入出力する
   音声入出力装置を備え、該音声入出力装置により取り込
   まれた音声データをアイコンイメージとして定義するこ
   とを特徴とする請求項５記載の音楽演奏システム。
7. 【請求項７】 前記表示装置のスクリーン上に張り付け
   られた前記アイコンイメージに前記入力装置を接触させ
   ることにより、該アイコンイメージに対応した音声を発
   するように前記主制御装置は前記音源装置を制御するこ
   とを特徴とする請求項５記載の音楽演奏システム。
8. 【請求項８】 前記入力装置は、描画するためのペン
   と、該ペンにより描画が行われるタブレットとからなる
   ペン型入力装置であることを特徴とする請求項１記載の
   音楽演奏システム。
9. 【請求項９】 前記タブレットに対する前記ペンの傾き
   及び筆圧に応じて音色を変化させるように、前記主制御
   部は前記音源装置を制御することを特徴とする請求項８
   記載の音楽演奏システム。