JP4720563B2 - Music control device - Google Patents
Music control device Download PDFInfo
- Publication number
- JP4720563B2 JP4720563B2 JP2006078132A JP2006078132A JP4720563B2 JP 4720563 B2 JP4720563 B2 JP 4720563B2 JP 2006078132 A JP2006078132 A JP 2006078132A JP 2006078132 A JP2006078132 A JP 2006078132A JP 4720563 B2 JP4720563 B2 JP 4720563B2
- Authority
- JP
- Japan
- Prior art keywords
- finger
- tone
- musical tone
- musical
- key
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
この発明は、鍵盤上方における演奏者の指の動きに応じて楽音を制御する機能を有する楽音制御装置に関する。 The present invention relates to a musical tone control apparatus having a function of controlling musical tones according to the movement of a player's finger above a keyboard.
電子鍵盤楽器において、一回の押鍵操作に応じて複数の音色を同時に発生する技術は、
例えば、特許文献1により知られている。このように、1つの演奏操作により複数の音色を同時に発音させることはレイヤー音色と呼ばれており、レイヤー音色の一例として「ピアノ+ストリングス」音色がある。
For example, it is known from
しかしながら、「ピアノ+ストリングス」のレイヤー音色を実現する場合、ピアノ音色とストリングス音色とではアタックの速さが異なるので、同時に両音色を発音開始するとストリングスが遅れて聞こえてしまう。また、実際の擦弦楽器では、弓の演奏操作を開始すると直ちに発音が開始されるのに対して、鍵盤楽器では、鍵を押す操作を開始したあと鍵を押し切った時点で発音が開始されるので、操作感覚が合わない。 However, when the layer tone of “Piano + Strings” is realized, the attack speed is different between the piano tone and the strings tone. Therefore, when the two tone colors are simultaneously started, the strings are heard with a delay. On the other hand, on an actual bowed instrument, the sound begins immediately after the bow performance operation is started, whereas on the keyboard instrument, the sound starts when the key is fully pressed after the key is pressed. The operation feeling does not match.
この発明は、このような事情に鑑み、鍵盤上方における演奏者の指の動きに応じて楽音を制御することにより、操作感覚と発生される楽音との違和感がなくなるようにすることができる楽音制御装置を提供することを目的とする。 In view of such circumstances, the present invention controls the musical sound in accordance with the movement of the player's finger above the keyboard, thereby eliminating a sense of incongruity between the operational feeling and the generated musical sound. An object is to provide an apparatus.
この発明の主たる特徴に従うと、鍵(14K)の上方(p0〜p2)における演奏者の指の位置を検出する位置検出手段(18,10;A1,A2)と、位置検出手段(18,10)により検出された指の位置に基づいて、演奏者の指が鍵(14K)に触れる時点(t1)で所定音色(第2音色)をもつ楽音(第2楽音)を発音させる(A4)楽音制御手段(1;A3〜A10)とを具備する楽音制御装置〔請求項1〕が提供される。なお、括弧書きは、理解の便のために付記した実施例の対応する参照記号や用語等を表わす。 According to the main feature of the present invention, position detecting means (18, 10; A1, A2) for detecting the position of the performer's finger above the key (14K) (p0 to p2), and position detecting means (18, 10). (A4) A musical tone having a predetermined timbre (second timbre) at the time (t1) when the performer's finger touches the key (14K) (A4) There is provided a musical tone control device comprising a control means (1; A3 to A10). Note that the parentheses indicate the corresponding reference symbols, terms, and the like of the embodiments added for convenience of understanding.
この発明による楽音制御装置において、楽音制御手段(1,A3〜A10)は、位置検出手段(18,10;A1,A2)により検出された指の位置に基づいて、演奏者の指が鍵(14K)から離れた時点(t2)で楽音(第2楽音)を消音させる(A6)〔請求項2〕ように構成することができる。また、楽音制御手段(1,A3〜A10)は、さらに、鍵(14K)の操作に応じて(ta,tb)前記音色(第2音色)とは異なる音色(第1音色)をもつ楽音(第1楽音)を発音及び消音させる(A7〜A10)〔請求項3〕ように構成することができる。 In the musical tone control device according to the present invention, the musical tone control means (1, A3 to A10) is configured such that the performer's finger is a key (based on the finger position detected by the position detection means (18, 10; A1, A2)). The musical tone (second musical tone) is muted at the time (t2) away from 14K) (A6) [Claim 2]. The musical tone control means (1, A3 to A10) further (ta, tb) musical tone (first timbre) different from the timbre (second timbre) in response to the operation of the key (14K) ( The first musical sound can be generated and silenced (A7 to A10).
この発明の主たる特徴(請求項1)によると、鍵(14K)の上方(p0〜p2)における指の動きを検出し(A1,A2)、指が鍵(14K)に触れる時点(t1)で、例えば、ストリングス系音色のように、アタックの遅い楽音特性の所定音色(第2音色)をもつ楽音(第2楽音)を発音させる(A4)ように構成している。従って、この発明によれば、実質的に鍵操作を開始したと見なし得る時点から所定音色(第2音色)の楽音(第2楽音)を発音開始させることができ、操作感覚に合った楽音が発生されるので、操作感覚と発生される楽音との違和感をなくすことができる。 According to the main feature of the present invention (Claim 1), when the finger movement above the key (14K) (p0 to p2) is detected (A1, A2) and the finger touches the key (14K) (t1) For example, a musical tone (second musical tone) having a predetermined musical tone characteristic (second musical tone) having a slow attack musical characteristic, such as a string-type musical tone, is generated (A4). Therefore, according to the present invention, a tone (second tone) having a predetermined tone color (second tone) can be started from a point at which it can be considered that the key operation has been substantially started, and a tone that matches the operation feeling can be obtained. Since it is generated, it is possible to eliminate a sense of incongruity between the operation feeling and the generated musical sound.
この発明による楽音制御装置では、鍵(14K)の上方(p0〜p2)における指の位置を検出し(A1,A2)、指が鍵(14K)から離れた時点(t2)で所定音色(第2音色)の楽音(第2楽音)を消音させる(A6)ように構成しているので、上述のように発音された所定音色(第2音色)の楽音(第2楽音)を違和感なく消音させることができる(請求項2)。 In the musical tone control apparatus according to the present invention, the position of the finger above the key (14K) (p0 to p2) is detected (A1, A2), and when the finger is separated from the key (14K) (t2), the predetermined tone color (the first tone) Since the tone (second tone) (2 tone) is muted (A6), the tone (second tone) of the predetermined tone (second tone) generated as described above is muted without any sense of incongruity. (Claim 2).
この発明による楽音制御装置では、さらに、鍵(14K)の操作に応じて(ta,tb)、例えば、ピアノ系音色のようなアタックが早く上述の音色(第2音色)とは立上りや立下りの楽音特性が異なる別の所定音色(第1音色)をもつ楽音を発音させる(A7〜A10)ように構成しているので、最初に第2音色の楽音(第2楽音)を発音させ、その後に、第2音色と異なる楽音特性の第1音色の楽音(第1楽音)を発音させることができ、例えば、「ピアノ+ストリングス」音色のようなアタックに時間差のあるようなレイヤー音色であっても、第1音色(ピアノ音色)と第2音色(ストリングス音色)の楽音のアタックを揃えることが可能になる。 In the musical tone control apparatus according to the present invention, the attack (fast sound) such as a piano-type timbre, for example, is quick and rises or falls according to the operation of the key (14K) (ta, tb). Since a musical tone having another predetermined tone color (first tone color) having different tone characteristics is generated (A7 to A10), the second tone tone (second tone) is first generated, and thereafter The tone of the first tone (first tone) having a tone characteristic different from that of the second tone can be generated, for example, a layer tone having a time difference in attack such as a “piano + strings” tone. In addition, it is possible to align the attacks of the musical sounds of the first timbre (piano timbre) and the second timbre (string timbre).
〔システムの概要〕
この発明による楽音制御装置の機能が組み込まれる電子音楽装置は、楽音制御処理を含む音楽情報処理機能を有する一種のコンピュータであり、演奏操作入力装置(鍵盤装置)を備えた電子楽器などの音楽専用機器や、演奏操作入力装置が外付けされ所定の音楽情報処理機能を有するパーソナルコンピュータ等の汎用の情報処理装置が用いられる。
[System Overview]
An electronic music apparatus incorporating the function of a musical tone control device according to the present invention is a kind of computer having a music information processing function including musical tone control processing, and is dedicated to music such as an electronic musical instrument having a performance operation input device (keyboard device). A general-purpose information processing apparatus such as a personal computer having a predetermined music information processing function, to which a device or performance operation input device is externally attached, is used.
図1は、この発明の一実施例による電子音楽装置のハードウエア構成ブロック図を示す。この電子音楽装置は、中央処理装置(CPU)1、ランダムアクセスメモリ(RAM)2、読出専用メモリ(ROM)3、外部記憶装置4、演奏操作検出回路5、設定操作検出回路6、表示回路7、音源回路8、効果回路9、指位置解析装置10、MIDIインターフェース(I/F)11、通信インターフェース(I/F)12などを備え、これらの要素1〜12はバス13を介して互いに接続される。
FIG. 1 is a block diagram showing the hardware configuration of an electronic music apparatus according to an embodiment of the present invention. This electronic music apparatus includes a central processing unit (CPU) 1, a random access memory (RAM) 2, a read only memory (ROM) 3, an external storage device 4, a performance
CPU1は、RAM2及ROM3と共にデータ処理部を構成し、楽音制御プログラムを含む所定の制御プログラムに従い、タイマによるクロックを利用して楽音制御処理を含む種々の音楽情報処理を実行する。RAM2は、これらの処理に際して必要な各種データを一時記憶するためのワーク領域として用いられる。また、ROM3には、これらの処理を実行するために、楽音制御プログラムを含む各種制御プログラム、プリセットされた楽音制御用データや演奏データ等が予め記憶される。
The
外部記憶装置4は、ハードディスク(HD)等の内蔵記憶媒体の外に、コンパクトディスク・リード・オンリィ・メモリ(CD−ROM)、フレキシブルディスク(FD)、光磁気(MO)ディスク、ディジタル多目的ディスク(DVD)、スマートメディア(登録商標)等の小型メモリカード、等々、種々の可搬性の外部記録媒体を含み、任意の外部記憶装置4に任意の制御プログラムやデータを記憶することができる。 The external storage device 4 is not only a built-in storage medium such as a hard disk (HD) but also a compact disk read only memory (CD-ROM), a flexible disk (FD), a magneto-optical (MO) disk, a digital multipurpose disk ( Various control programs and data can be stored in an arbitrary external storage device 4 including various portable external recording media such as a small memory card such as a DVD and a smart media (registered trademark).
演奏操作検出回路5は、鍵盤(14K:図2参照)などの演奏操作子(演奏操作入力装置)14の操作内容を検出し、設定操作検出回路6は、スイッチやマウス等の設定操作子(パネル操作子)15の操作内容を検出し、それぞれ、検出内容に対応する情報をデータ処理部に導入する。表示回路7は、演奏や設定に必要な各種画面を表示するLCD等のディスプレイ16や、その他インジケータ/ランプを備え、これらの表示・点灯内容をデータ処理部からの指令に従って制御し、操作子14,15の操作に対する表示援助を行う。
The performance
音源回路8は、鍵盤に対する演奏操作に基いて操作鍵に対応する楽音信号を生成し、効果回路9は、効果付与DSPを有し、音源回路8からの楽音信号に効果を付与し、何れの回路もソフトウエアを含ませることができる。両回路8,9は、楽音信号生成部を構成し、各種楽音制御パラメータに基づいて楽音信号を制御することができる。効果回路9に後置されたサウンドシステム17は、D/A変換部やアンプ、スピーカを備え、効果回路9からの楽音信号に基づく楽音を発生する。
The
また、楽音信号生成部8,9は、記憶手段3,4に記憶された演奏データに基づいて自動演奏の楽音信号を生成したり、指位置解析装置10からの指位置情報に応じて、所定の楽音特性パラメータに基づく所定の楽音信号を生成することができる。
The musical
指位置解析装置10は、これに接続される指検出装置18と共に、鍵盤上方における演奏者の各指の位置を検出する指位置検出部を構成する。指検出装置18は、鍵盤上方空間における演奏者の動作を表わす指検出データを指位置解析装置10に送り、指位置解析装置10は、指検出データを解析し、鍵盤上方において演奏者の各指の左右方向(音高方向)の位置(鍵/音高位置)及び上下方向(押離鍵方向)の位置を表わす指位置情報をシステム本体に導入することができる。
The finger
指検出装置18は、複数の撮像カメラ(図2:18C)を備えた撮像装置で構成し、指位置解析装置10は画像解析(画像認識)装置で構成することができる。この場合、これらの撮像カメラによって鍵盤の上方領域を撮像し、画像解析装置10において、撮像された指の画像データを画像処理技術により解析し、鍵盤上方において演奏している指の位置を表わす指位置情報を得ることができる。
The
また、MIDII/F11には他のMIDI音楽機器30が接続され、他の音楽機器30との間でMIDI演奏データを授受し、この電子音楽装置で利用することができる。さらに、通信I/F12には、インターネットやローカルエリアネットワーク(LAN)などの通信ネットワーク40が接続され、外部のサーバコンピュータ50等から制御プログラムや各種データ等を受信し外部記憶装置4に保存することができる。
Further, another
〔指検出機構及びその設置例〕
この発明の一実施例による電子音楽装置においては、指位置検出部の検出機構に複数の撮像カメラを用い、鍵盤上方における演奏者の指の動作を複数の撮像カメラで撮像し、カメラから得られた撮像データに基づいて、指が位置する音高や指の動きを検出し、検出した音高や動きに応じて楽音を制御することができる。図2は、この発明の一実施例による電子音楽装置において指検出機構として用いられる撮像カメラの設置例を示す。
[Finger detection mechanism and its installation example]
In the electronic music apparatus according to an embodiment of the present invention, a plurality of imaging cameras are used as the detection mechanism of the finger position detection unit, and the movements of the performer's fingers above the keyboard are captured by the plurality of imaging cameras, and obtained from the cameras. Based on the captured image data, it is possible to detect the pitch at which the finger is located and the movement of the finger, and to control the musical tone according to the detected pitch and movement. FIG. 2 shows an installation example of an imaging camera used as a finger detection mechanism in the electronic music apparatus according to one embodiment of the present invention.
この電子音楽装置の撮像データ利用に関する特徴によれば、図2のように、複数の撮像手段(カメラ)18Cにより鍵盤14Kの上方における演奏者の各指を撮像し、撮像された画像データを画像処理することにより、鍵盤14Kの上方における指の押離鍵方向(上下方向)及び鍵配列方向(左右方向/音高方向)の位置を認識し、認識された指の位置を表わす指位置情報に基づいて楽音を制御する。例えば、指位置情報の鍵配列方向位置(音高位置)に応じて、発音される楽音(第2楽音)の音高を指定すると共に、指位置情報から得られる押離鍵方向の指の動きに応じて、指定された音高をもつ楽音を発音させたり消音させたりする。また、鍵盤14Kに対する押離鍵操作により発生される別の楽音(第1楽音)の特性を制御することもできる。
According to the characteristics relating to the use of image data of the electronic music apparatus, as shown in FIG. 2, the performer's fingers above the
図2の撮像カメラの例について説明すると、電子音楽装置筐体の前面パネルの左右即ち鍵盤14の両端近傍に設けられた2台の撮像カメラ18Cを対にして指検出機構に用いる。両撮像カメラ18Cは鍵盤面からやや上方に位置し、各カメラの光軸は、水平(鍵盤面に平行)で、鍵盤14Kの中央方向に向けられており、2つのカメラそれぞれが鍵盤全域を撮像することができるように設置されている。
The example of the imaging camera in FIG. 2 will be described. Two
これに伴い、指位置解析装置10には画像解析装置が用いられ、従来から知られている画像処理技術を応用して、2つの撮像カメラ18Cで夫々撮像された2つの画像データを画像処理して各指の画像を解析し、演奏している指の左右方向(音高方向/鍵配列方向)及び上下方向(押離鍵方向/鍵盤面に垂直な方向)の位置を検出する。例えば、左右方向の位置については、同時に撮像された2つの画像データを解析することによって演奏者の各指が鍵盤14Kのどの鍵に対応した音高方向位置にあるのかを認識することができる。
Accordingly, an image analysis device is used as the finger
なお、指の位置を検出し易くするため、各撮像カメラ18Cに、生体像を明確に撮影することができる赤外線カメラを用いたり、例えば、演奏者の指爪にマニキュアを塗る、或いは、指にアタッチメントを装着する、等々、演奏者の指に特定色等のマーキングを行ったりしてもよい。また、撮像カメラ18Cは、鍵盤14K上方の所定領域を全鍵域にわたり撮像可能であればよく、カメラの位置及び数は、上述した例に限らない。例えば、1オクターブ間隔等で多くのカメラを設置してもよく、このようにすることで、指位置の検出精度を向上させることができる。また、カメラの光軸は、水平に限らず、水平軸から若干傾斜していてもよい。
In addition, in order to make it easy to detect the position of a finger, an infrared camera capable of clearly capturing a biological image is used for each
〔楽音制御の実施形態〕
この発明の一実施例による電子音楽装置においては、鍵盤上方における演奏者の指の動きを検出し、検出した指の動きに応じて鍵盤演奏に基づく楽音とは異なる音色特性の楽音を発生させることができる。図3及び図4は、この発明の一実施例による電子音楽装置における楽音制御の実施形態を説明するための図であり、この実施形態では、鍵盤上方の指位置情報から得られる指の上下動に基づいて、鍵操作による所定特性の楽音のキーオンに先立ち、他の特性の楽音を発生させる。
[Embodiment of musical tone control]
In the electronic music apparatus according to one embodiment of the present invention, the movement of the player's finger above the keyboard is detected, and a musical tone having a timbre characteristic different from the musical tone based on the keyboard performance is generated according to the detected movement of the finger. Can do. 3 and 4 are diagrams for explaining an embodiment of musical tone control in the electronic music apparatus according to one embodiment of the present invention. In this embodiment, the finger is moved up and down obtained from finger position information above the keyboard. Based on the above, prior to key-on of a musical tone having a predetermined characteristic by a key operation, musical sounds having other characteristics are generated.
この電子音楽装置による1操作2楽音発生に関する特徴によれば、指位置検出手段18,10により鍵14Kの上方(p0〜p2)における指の押離鍵方向(上下方向)の位置及び動きを検出し、検出された位置及び動きに基づいて所定のタイミングで楽音の発音及び消音を制御する。つまり、図3及び図4に示すように、指が実質的に鍵14Kに触れた(a)と見なし得るタイミングt1で第1音色(例えば、ストリングス系音色)をもつ楽音(第2楽音)の発音開始を楽音生成部8、9に指示し、押離鍵操作〔(b),(c)〕があると、第1音色とは楽音特性が異なる第2音色(例えば、ピアノ系音色)をもつ楽音(第1楽音)を発生させ(ta,tb)、さらに、指が鍵14Kから完全に離れる動きをした(d)ことを確認したタイミングt2で、第1音色の楽音(第2楽音)を消音させる。これにより、1つの演奏操作により複数の音色を同時に発音させるレイヤー音色を簡単な構成で実現することができる。
According to the feature related to the generation of one operation and two musical tones by the electronic music apparatus, the finger position detecting means 18 and 10 detect the position and movement of the finger pressing / releasing key direction (vertical direction) above the key 14K (p0 to p2). Then, the sound generation and mute are controlled at a predetermined timing based on the detected position and movement. That is, as shown in FIG. 3 and FIG. 4, the tone (second tone) having the first tone color (for example, a string tone) at the timing t1 that can be regarded as (a) when the finger substantially touches the key 14K. When the
この電子音楽装置では、楽音制御のために、鍵盤14Kの鍵盤面上方に発音意図領域Asが設定される。発音意図領域Asは、この領域を指が通過した場合に発音の意図ありとみなす領域であり、図3に示すように、鍵盤面の位置p0から所定距離だけ上方の下限位置p1と上限位置p2との間の空間をいう。例えば、位置p0〜p1間の距離は1cm程度、位置p1〜p2間の距離は2cm程度に選定される。また、楽音制御の際には、発音意図領域Asを含む鍵盤14Kの鍵盤面位置p0から上の所定の領域(鍵盤上方領域という)について、複数の撮像カメラ18Cによる同時撮影を進めていき、指位置解析装置(画像解析装置)10は、同時撮影された鍵盤上方領域の両画像データを順次解析し、鍵盤上方領域での演奏者の各指の位置を認識する。そして、データ処理部1〜3は、指位置解析装置(画像解析装置)10で認識された各指の位置を表わす指位置情報に基づいて、所定の楽音を発生するように楽音生成部8,9に指示する。
In this electronic music apparatus, a tone generation intention area As is set above the keyboard surface of the
図3及び図4に例示される実施形態では、図4(1)に示すように、演奏者の各指による鍵盤14Kに対する通常の押離鍵操作(ta,tb)に基づいて楽音生成部8,9から発生される楽音は「第1楽音」と呼ばれ、例えば、ピアノ系の音色のように、音の立上り/立下りが速い特性をもつ音色が第1楽音に与えられる。また、演奏者の各指が発音意図領域Asを通過することにより、図4(2)に示すように、第1楽音とは特性の異なる「第2楽音」が楽音生成部8,9から別個に発生され、例えば、ストリングス系の音色のように、音の立上り/立下りが遅い特性をもつ音色が第2楽音に与えられる。なお、立上り/立下りが速い/遅いとは、第1楽音と第2楽音との間の相対的な関係に基づくものである。また、少なくとも立上りの速さについて速い/遅いという関係があればよく、立下りについては速さの関係が逆になっていてもよい。
In the embodiment illustrated in FIGS. 3 and 4, as shown in FIG. 4 (1), the musical
具体的にいうと、データ処理部1〜3は、図3(a)に示すように、演奏者の指が発音意図領域Asを上から下へ通過して発音意図領域Asの下限位置p1を越したとき或いは鍵盤(例えば、白鍵であれば鍵盤面位置p0)に到達(接触)したときに、図4(2)のように、この時点t1から第2楽音を発生するように楽音生成部8,9に指示する。つまり、指が発音意図領域Asを上から下に通過すると発音意図があったとみなして、発音意図領域Asの下端p1を通ったか或いは鍵盤面p0に接触した時点t1で、鍵盤の押鍵による第1楽音とは異なる第2楽音の発生を開始させる。ここで、第2楽音の音高は、領域Asを上から下に通過する指の左右方向位置に対応する鍵盤14Kの音高とされる。
Specifically, as shown in FIG. 3A, the
なお、時点t1は、図4に示すように、仮に第1楽音が押鍵タイミングtaで発音を開始させるとした場合、第1楽音の立上りに合わせて第2楽音を立ち上がらせるに十分な第2楽音の発音開始タイミングであり、指が領域Asを通過してから鍵盤14Kに接触するまでの適当な指位置に対応し、この例では、上述のように、指が下限位置p1を通って鍵14Kに十分に近づき鍵14Kに触れようとする時点或いは鍵14Kに触れた時点が採用される。また、発音意図領域As内での指の動き、例えば、下降速度や上下左右の揺れなどに応じて、第2楽音の発音時におけるアタック、音量、音色、ピッチ等の楽音特性パラメータを制御することができる。
As shown in FIG. 4, when the first musical sound starts to be generated at the key pressing timing ta as shown in FIG. 4, the second time point sufficient to cause the second musical sound to rise at the rise of the first musical sound. This corresponds to the tone generation start timing of the musical sound, corresponding to an appropriate finger position from when the finger passes the region As until it touches the
さて、発音意図領域Asの指通過(上→下)が検出された後、図3(b)のように、鍵盤14Kの押鍵(キーオン)が演奏操作検出回路5で検出されると、データ処理部1〜3は、当該押鍵の検出時点taで第1楽音を発生するように楽音生成部8,9に指示する。さらに、図3(c)のように、時点tbで押鍵された鍵盤14Kの離鍵があると、発音していた第1楽音が消音される。この場合、鍵盤によるキーオンに先立って発生させた他の楽音(第2楽音)は、図4(2)のように、発音を持続している。そして、図3(d)のように、指が鍵盤14Kから離れて領域Asを下から上へ通過すると、消音意図があったとみなして発音意図領域Asの上端p2に達した時点t2で第2楽音を消音する。
Now, after the passage of the finger in the pronunciation intention area As (up → down) is detected, as shown in FIG. 3B, when the key operation (key-on) of the
このように、鍵盤による第1楽音のキーオンに先立ち、発音意図領域Asの通過により他の第2楽音を発生させるようにすると、例えば、第1楽音をアタックの早い「ピアノ」音色とし第2楽音をアタックの遅い「ストリングス」として、「ピアノ+ストリングス」音色のような2音色をもつ楽音を1つの演奏操作で発音させることができる。この場合、アタックの遅い第2音色を先に発音させ、その後で第1楽音を発生させることにより、第1楽音のアタック位置と第2楽音のアタック位置とをほぼ揃えることが可能になる。 Thus, prior to key-on of the first musical tone by the keyboard, when another second musical tone is generated by passing through the pronunciation intention area As, for example, the first musical tone is changed to a “piano” tone with a fast attack, and the second musical tone. Is a string with a slow attack, and a musical tone having two tones such as a “piano + strings” tone can be generated by one performance operation. In this case, it is possible to substantially match the attack position of the first musical tone and the attack position of the second musical tone by generating the second musical tone having a slow attack first and then generating the first musical tone.
一方、図3(a’)→図3(d)のように、鍵盤14Kの押鍵がないまま指が発音意図領域Asを上方向に通過した場合は、第1楽音の発音はなく、第2楽音のみが発音意図領域Asの下方向通過時点t1から発音され上方向通過時点t2で消音される。つまり、演奏者は、意図的に、図4(2)のような第2楽音のみを発生させることができる。
On the other hand, as shown in FIG. 3 (a ′) → FIG. 3 (d), when the finger passes upward in the pronunciation intention area As without any key depression of the
この場合は、鍵に触れるタイミングt1から第2音色の第2楽音を発音開始させることができ、ストリングス系音色などのアタックの遅い第2音色をもつ第2楽音の発音タイミングを演奏者の操作感覚に合わせることができ、このような発音タイミングt1で発音された第2楽音を消音タイミングt2で違和感なく消音させることができる。 In this case, the second tone of the second tone can be started to sound from the timing t1 when the key is touched, and the sound generation timing of the second tone having the second tone having a slow attack, such as a string-type tone, is determined by the player's operation feeling. Thus, the second musical sound generated at such a sound generation timing t1 can be muted without a sense of incongruity at the mute timing t2.
なお、第2楽音を発音させた後は、指が鍵盤から離れたとき或いは発音意図領域Asの下端p1を通ったときから後の指の動き、例えば、指の上昇速度や指の上下左右の揺れなどに応じて、発音中或いはリリース中(消音指示後)の第2楽音の楽音特性パラメータ(音量、音色、ピッチ等)を制御することができる。 After the second musical tone is generated, after the finger leaves the keyboard or after passing through the lower end p1 of the pronunciation intention area As, for example, the finger's ascent speed and the up / down / left / right direction of the finger The tone characteristic parameters (volume, tone color, pitch, etc.) of the second tone during sound generation or release (after a mute instruction) can be controlled in accordance with shaking.
また、離鍵によって第1楽音が消音された後、発音意図領域Asを通過することなく再度押鍵が行われた場合は、第2楽音の発音を持続したまま第1楽音を再度発音させる。この場合、第2楽音の発音持続に変えて、第2楽音を一旦消音させ、第1楽音の発音と同時に第2楽音を再発音させてもよい。また、最初から発音意図領域Asを通過することなく押鍵がなされた場合には、第1楽音及び第2楽音を同時に発音開始するようにしてもよいし、第1楽音のみを発音開始するようにしてもよい。これらの例のように、押鍵にて第2楽音を発音させた場合は、離鍵にて第2楽音を消音するのがよい。 In addition, after the first musical sound is muted by releasing the key, if the key is pressed again without passing through the pronunciation intention area As, the first musical sound is generated again while the second musical sound is continuously generated. In this case, the second musical tone may be temporarily muted instead of the second musical tone, and the second musical tone may be re-sound simultaneously with the first musical tone. Further, when a key is pressed without first passing through the pronunciation intention area As, the first musical tone and the second musical tone may be started simultaneously, or only the first musical tone may be started. It may be. As in these examples, when the second musical sound is generated by pressing the key, it is preferable to mute the second musical sound by releasing the key.
〔楽音制御処理フロー例〕
図5は、この発明の一実施例による電子音楽装置における楽音制御処理の手順例を表わすフローチャートを示す。この電子音楽装置においては、設定操作子15中の楽音制御処理開始スイッチの操作によりこの楽音制御処理がスタートし、撮像カメラ18Cによる鍵盤上方領域の撮像が開始すると共に図7の処理フローが実行され、楽音制御処理停止スイッチの操作の基づく終了指示によってこの楽音制御処理が終了する。
[Music control process flow example]
FIG. 5 is a flowchart showing an example of a procedure of musical tone control processing in the electronic music apparatus according to one embodiment of the present invention. In this electronic music apparatus, the musical tone control process is started by the operation of the musical tone control process start switch in the
まず、最初のステップA1では、CPU1は、撮像装置18から鍵盤上方領域の画像データを取り込むように画像解析装置10に指示する。次のステップA2では、画像解析装置10は、撮像装置18からの画像データに対する画像処理により演奏者の各指の上下位置及び左右(音高)位置を認識し、CPU1は、認識された各指の上下位置及び左右(音高)位置を表わす上下位置及び左右位置情報を画像解析装置10から取得する。
First, in the first step A1, the
次のステップA3では、上下位置情報に基づいて指が発音意図領域Asを上から下への方向(上→下)に通過したか否かを判定し、或る指が上→下に通過したと判定されたときは(A3=YES)、ステップA4に進む。ステップA4では、当該指の上下位置及び左右位置情報に基づいて、当該指について認識された左右(音高)位置に対応する音高を求め、当該指が発音意図領域Asの下端p1を通るか又は鍵盤14Kへの接触位置に到達するタイミング(t1)で、当該音高をもつ第2楽音の発音を開始するように、楽音生成部8、9に指示する。
In the next step A3, it is determined whether or not the finger has passed through the pronunciation intention area As in the direction from top to bottom (up to down) based on the vertical position information, and a certain finger has passed from up to down. Is determined (A3 = YES), the process proceeds to step A4. In step A4, a pitch corresponding to the left / right (pitch) position recognized for the finger is obtained based on the vertical position and left / right position information of the finger, and whether the finger passes the lower end p1 of the pronunciation intention area As. Alternatively, the
指が発音意図領域Asを上→下に通過しないと判定されたとき(A3=NO)或いはステップA4で第2楽音の発音開始を指示した後は、ステップA5で、上下位置情報に基づいて、指が発音意図領域Asを下から上への方向(下→上)に通過したか否かを判定する。ここで、指が下→上に通過したときは(A5=YES)、ステップA6に進んで、当該指の上下位置及び左右位置情報に基づいて、当該指が発音意図領域Asの上端p2に到達するタイミング(t2)で、当該指について認識された音高をもつ第2楽音を消音するように、楽音生成部8、9に指示する。
When it is determined that the finger does not pass over the pronunciation intention area As (A3 = NO) or after instructing the start of the second musical tone in step A4, in step A5, based on the vertical position information, It is determined whether or not the finger has passed through the pronunciation intention area As in the direction from the bottom to the top (from bottom to top). Here, when the finger passes from the lower side to the upper side (A5 = YES), the process proceeds to step A6, and the finger reaches the upper end p2 of the pronunciation intention area As based on the vertical position and left / right position information of the finger. At the timing (t2), the
指が発音意図領域Asを下→上に通過しないと判定されたとき(A5=NO)或いはステップA6で第2楽音の消音を指示した後は、ステップA7で、鍵盤14Kに対する押鍵操作があったか否かを判定する。ここで、押鍵操作があったときは(A7=YES)、ステップA8に進み、当該押鍵操作がなされたタイミング(ta)で、操作鍵に対応する第1楽音の発音を開始するように楽音生成部8、9に指示する。
When it is determined that the finger does not pass through the pronunciation intention area As down (up) (A5 = NO) or after the instruction to mute the second musical tone in step A6, is there a key pressing operation on the
押鍵操作がないと判定されたとき(A7=NO)或いはステップA8で第1楽音の発音開始を指示した後は、ステップA9で、鍵盤14Kに対する離鍵操作があったか否かを判定する。ここで、離鍵操作があったときは(A9=YES)、ステップA10に進んで、当該離鍵操作がなされたタイミング(tb)で、操作鍵に対応する第1楽音を消音するように楽音生成部8、9に指示する。そして、離鍵操作がないと判定されたとき(A9=NO)或いはステップA10で第1楽音の消音を指示した後は、ステップA1に戻り、終了指示があるまでステップA1〜A10の動作を繰り返す。
When it is determined that there is no key pressing operation (A7 = NO) or after the start of sound generation of the first musical tone is instructed in step A8, it is determined in step A9 whether or not a key release operation has been performed on the
〔種々の実施態様〕
以上、図面を参照しつつこの発明の好適な実施の一形態について説明したが、これは単なる一例であって、この発明は、発明の精神を逸脱しない範囲で種々の変更が可能である。例えば、実施例では、指位置の検出に撮像カメラを用いてカメラで撮像した指の画像を画像処理するようにしたが、指位置の検出方法はこのように画像を利用するものに限らない。例えば、距離センサー、レーザー反射光観測、触覚センサーなど、どのようなセンサーを用いてもよい。
[Various Embodiments]
The preferred embodiment of the present invention has been described above with reference to the drawings. However, this is merely an example, and the present invention can be variously modified without departing from the spirit of the invention. For example, in the embodiment, an image of a finger imaged by a camera is used to detect a finger position, and the finger position is image-processed. However, the finger position detection method is not limited to using an image in this way. For example, any sensor such as a distance sensor, laser reflected light observation, or tactile sensor may be used.
また、指位置解析装置(10)は、専用のハードウエアで構成してもよいし、CPU(1)によるソフトウエア処理で指位置を解析してもよい。 The finger position analysis device (10) may be configured by dedicated hardware, or may analyze the finger position by software processing by the CPU (1).
また、楽音制御処理(図5)の開始、終了は、電子音楽装置の電源スイッチのオン、オフに基づいてもよい。 Further, the start and end of the musical tone control process (FIG. 5) may be based on the on / off of the power switch of the electronic music apparatus.
また、「ピアノ+ストリングス」のレイヤー音色に限らず、アタックの速さが異なる2以上の音色を重ねて発音する音色もあれば、どのような音色でもよい。 Further, not only the “piano + strings” layer timbre, but any timbre may be used as long as it includes two or more timbres with different attack speeds.
また、アタック速さの異なるレイヤー音色に限らず、複数の楽音要素からなる単独音色であってもよい。例えば、管楽器音における立ち上がりのノイズ音(息の音など)とその後の通常音でもよい。管楽器の演奏において、ノイズ音は息を吹き込むと直ちに発音開始され、少し遅れて通常音が鳴り始めるが、この指が鍵に触れた時点でノイズ音を発生させ、鍵の操作により通常音を鳴らすようにすることで、操作感覚が合うようになる。また、ノイズ音から通常音までの時間間隔を意図的に制御するこども可能になる。更には、歌唱音源における子音(直ちに発音)と母音(少し遅れて発音)の発音に応用してもよい。 Moreover, it is not limited to layer timbres with different attack speeds, and may be a single timbre composed of a plurality of musical tone elements. For example, a rising noise sound (breathing sound or the like) in a wind instrument sound and a subsequent normal sound may be used. When playing a wind instrument, the noise sound begins to sound as soon as you breathe in, and the normal sound begins to sound with a slight delay, but when this finger touches the key, the noise sound is generated and the normal sound is generated by operating the key. By doing so, the feeling of operation comes to fit. It is also possible to intentionally control the time interval from the noise sound to the normal sound. Furthermore, the present invention may be applied to the pronunciation of consonants (pronounced immediately) and vowels (pronounced a little later) in a singing sound source.
18 撮像カメラ18Cを有する指検出装置、
p0 鍵盤14Kの上面位置、
As 鍵盤14Kの上方の位置p1〜p2間に設定される発音意図領域、
ta,tb 押鍵及び離鍵タイミング、
t1,t2 第2楽音の発音及び消音タイミング。
18 a finger detection device having an
p0 Upper surface position of
As a pronunciation intention area set between positions p1 and p2 above the
ta, tb key press and key release timing,
t1, t2 Second musical tone pronunciation and mute timing.
Claims (3)
上記位置検出手段により検出された指の位置に基づいて、演奏者の指が鍵に触れる時点で所定の音色をもつ楽音を発音させる楽音制御手段と
を具備することを特徴とする楽音制御装置。 Position detecting means for detecting the position of the performer's finger above the key;
A musical tone control device comprising: a musical tone control means for generating a musical tone having a predetermined tone color when the performer's finger touches the key based on the finger position detected by the position detecting means.
3. The musical tone control apparatus according to claim 1, wherein the musical tone control means further generates and mutes a musical tone having a tone color different from the tone color according to a key operation.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006078132A JP4720563B2 (en) | 2006-03-22 | 2006-03-22 | Music control device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006078132A JP4720563B2 (en) | 2006-03-22 | 2006-03-22 | Music control device |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007256412A JP2007256412A (en) | 2007-10-04 |
JP4720563B2 true JP4720563B2 (en) | 2011-07-13 |
Family
ID=38630742
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006078132A Expired - Fee Related JP4720563B2 (en) | 2006-03-22 | 2006-03-22 | Music control device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4720563B2 (en) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5509536B2 (en) * | 2008-04-15 | 2014-06-04 | ヤマハ株式会社 | Audio data processing apparatus and program |
JP2021107843A (en) | 2018-04-25 | 2021-07-29 | ローランド株式会社 | Electronic musical instrument system and musical instrument controller |
JP7230413B2 (en) * | 2018-10-05 | 2023-03-01 | ヤマハ株式会社 | SOUND SIGNAL GENERATOR, SOUND SIGNAL GENERATING METHOD AND SOUND SIGNAL GENERATING PROGRAM |
JP7346807B2 (en) * | 2018-10-17 | 2023-09-20 | カシオ計算機株式会社 | Electronic keyboard instruments, methods and programs |
JP6941303B2 (en) * | 2019-05-24 | 2021-09-29 | カシオ計算機株式会社 | Electronic wind instruments and musical tone generators, musical tone generators, programs |
JP7160068B2 (en) * | 2020-06-24 | 2022-10-25 | カシオ計算機株式会社 | Electronic musical instrument, method of sounding electronic musical instrument, and program |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2951682B2 (en) * | 1989-03-27 | 1999-09-20 | 荒川化学工業株式会社 | Surface sizing agent |
JP2900404B2 (en) * | 1989-06-02 | 1999-06-02 | カシオ計算機株式会社 | Sales data processing device |
JP2522061B2 (en) * | 1989-06-27 | 1996-08-07 | 日本電気株式会社 | Image display method |
JPH0786754B2 (en) * | 1993-03-16 | 1995-09-20 | ヤマハ株式会社 | Electronic keyboard instrument |
JPH07199945A (en) * | 1993-12-28 | 1995-08-04 | Yamaha Corp | Elecronic musical instrument |
JPH08305353A (en) * | 1995-04-28 | 1996-11-22 | Roland Corp | Performance data storage controller for electronic instrument |
-
2006
- 2006-03-22 JP JP2006078132A patent/JP4720563B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2007256412A (en) | 2007-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6344578B2 (en) | How to play an electronic musical instrument | |
JP5821824B2 (en) | Speech synthesizer | |
JP4720563B2 (en) | Music control device | |
JP6776788B2 (en) | Performance control method, performance control device and program | |
JP2007121355A (en) | Playing system | |
JP2004251926A (en) | Electronic musical instrument | |
JP4765705B2 (en) | Music control device | |
CN105489209A (en) | Electroacoustic musical instrument rhythm controllable method and improvement of karaoke thereof | |
JP2007322683A (en) | Musical sound control device and program | |
JP6835247B2 (en) | Data generator and program | |
JP4720564B2 (en) | Music control device | |
JP2008008946A (en) | Musical sound controller and program | |
JP6977741B2 (en) | Information processing equipment, information processing methods, performance data display systems, and programs | |
JP6268674B2 (en) | Musical sound generating device, electronic musical instrument, musical sound generating method and program | |
JP2021081601A (en) | Musical sound information output device, musical sound generation device, musical sound information generation method, and program | |
JP6410345B2 (en) | Sound preview apparatus and program | |
JP7338669B2 (en) | Information processing device, information processing method, performance data display system, and program | |
JP7331388B2 (en) | Information processing device, method, and program | |
WO2022209557A1 (en) | Electronic musical instrument, electronic musical instrument control method, and program | |
JP3991892B2 (en) | Electronic musical instruments | |
JP4978176B2 (en) | Performance device, performance realization method and program | |
JP7107720B2 (en) | fingering display program | |
JPH0753117Y2 (en) | Electronic keyboard instrument | |
JP2006178268A (en) | Musical sound controller and musical sound control program | |
WO2019092793A1 (en) | Data generating device and program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090120 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110215 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110308 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110321 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140415 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |