JP2017507349A - デジタル音楽の表現品質を高めるための装置及び方法 - Google Patents

デジタル音楽の表現品質を高めるための装置及び方法 Download PDF

Info

Publication number
JP2017507349A
JP2017507349A JP2016548113A JP2016548113A JP2017507349A JP 2017507349 A JP2017507349 A JP 2017507349A JP 2016548113 A JP2016548113 A JP 2016548113A JP 2016548113 A JP2016548113 A JP 2016548113A JP 2017507349 A JP2017507349 A JP 2017507349A
Authority
JP
Japan
Prior art keywords
key
heuristics
music
action
board
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016548113A
Other languages
English (en)
Inventor
ヅェン シィ，
ヅェン シィ，
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/CN2014/080317 external-priority patent/WO2015113360A1/en
Priority claimed from PCT/CN2014/080495 external-priority patent/WO2015113365A1/en
Application filed by Individual filed Critical Individual
Priority claimed from PCT/CN2015/070162 external-priority patent/WO2015113457A1/en
Publication of JP2017507349A publication Critical patent/JP2017507349A/ja
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/23—Input arrangements for video game devices for interfacing with the game device, e.g. specific interfaces between game controller and console
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/77—Game security or game management aspects involving data related to game devices or game servers, e.g. configuration data, software version or amount of memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04162—Control or interface arrangements specially adapted for digitisers for exchanging data with external devices, e.g. smart pens, via the digitiser sensing hardware
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0428—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by sensing at the edges of the touch surface the interruption of optical paths, e.g. an illumination plane, parallel to the touch surface which may be virtual
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10316—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves using at least one antenna particularly designed for interrogating the wireless record carriers
    • G06K7/10356—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves using at least one antenna particularly designed for interrogating the wireless record carriers using a plurality of antennas, e.g. configurations including means to resolve interference between the plurality of antennas

Abstract

【課題】本発明は、向上された表現品質のあるデジタル音楽を創作するために、静電容量センサーを使用することにより、指のダイナミックモーションを直接的にキャプチャーするための装置及び方法を開示するものであり、該静電容量センサーは、指がキーまたはキーの間のスペースに接近するが未だ触れていなく、触れて離れることにより、静電容量変化のアナログ出力を連続的に生成するように構成される。

Description

本発明はデジタル楽器に関する。より具体的には、本発明は向上された表現品質のある音楽を制作するデジタル楽器に関するものである。
アコースティック楽器は、楽器自体の素材、構造、およびアーティザンシップに由来する音声や音楽を制作する。アコースティック楽器は、ベテランプレーヤーの手中によることで、音楽の用語におけるテクスチャ、音色、アーティキュレーション及びダイナミクスの点において、または、音楽を愛する人により評価されるような彼らの表現されたニュアンス、素養、感情、若しくはインスピレーションの点において、高い表現品質の音声や音楽を創作することができる。
一方、デジタル楽器は、音声や音楽のデジタルライブラリから検索され、統合された音声と音楽を制作する。何十年にわたる努力にもかかわらず、デジタル楽器はアコースティック楽器の多くの表現品質を有することができていない。確かに、デジタル楽器で創作された音楽は、多くの効果により向上されることができる。例えば、再生される音声に、リバーブ、コーラス、ディレイ及びトレモロなどのデジタル効果を加えるために、ＭＩＤＩデータを用いることができる。しかし、ボタンは依然として、効果が使用開始される、または使用停止されるたびにプッシュされることが必要といえる。様々なテクニックが即時に、またプロフェッショナルにより音楽の演奏を表現しようとする時に使用され得る場合には、この「効果」はアコースティック楽器でプロフェッショナルにより創作される表現品質とマッチングさせることができない。従って、例えば、電子ピアノがバイオリンモードで弾かれた際に、ビブラート、或いは、ポルタメントを即時に、且つ思うままに可能とするのは困難である。
デジタルキーボード楽器の表現品質を向上させるために、一つのアプローチは、各キーの下に2つ、3つ又はより多くのセンサーを配置することである。キー押し下げの速度と力を合せたキーの音声を生成するために、キー押し下げの速度は複雑な方法でキャプチャーされ、補正される。ほとんどの場合には、音の速度と振幅の間の直接的な比例関係が採用される。このアプローチにおける表現品質の向上は、依然として各キー押し下げアクションのために、収集されるデータポイントの数により基本的に制限される。
人々は、異なる種類のセンサーを使用することにより、収集されるデータポイントの量を増やすことにも取り組んでいる。人によるシングルキーストロークのダイナミクスをより良くキャプチャーする出力であって、より連続的で、若しくはアナログな出力を生成するために、ホール効果センサー、光電センサー、圧電センサー、または圧力センサーは全て試された。これらのすべての努力において、指タッチアクションにより生成されるキー動作の結果は、より細かな粒度でキャプチャーされるが、指自体のダイナミック動作は直接キャプチャーされない。一つの制限としては、これまでの従来の技術には、実際にキーをタッチすることなく、指がキーに接近するまたは離れる際に、指のモーションをキャプチャーすることができるものがないことである。もう一つの制限としては、これまでの従来の技術には、指が二つのセンサーの物理的な界面の間のスペースをタッチする際に、指のモーションをキャプチャーすることができるものがないことである。最も多いデジタルキーボードは、ピアノ及び弦楽器を含む無数の楽器音をプレーするための機能性を有するが、これらの制限により、キーボードがキーボード楽器として演奏される際における音楽表現に若干の損失、また、キーボードが弦楽器として演奏される際における音楽表現に深刻な損失を生じさせてしまう。さらに、これらの制限は、デジタル楽器を、アコースティック楽器よりも一層シームレスに表現させるようになることには役に立たない。
簡単に言えば、キーまたは弦をタッチすることにより音を制作することと、様々なテクニックを通じて音の表現を作ることとのシームレスな統合は、アコースティック楽器にとってはとても自然なことになっている。しかし、このようなシームレスな統合は、デジタル楽器に対してまだ有効ではなく、そこには、指モーションのダイナミクス及び高機能化を直接的にキャプチャーすることができないといった従来の技術における一つの障害になるものがある。従って、デジタル楽器が、アコースティック楽器と同じようにシームレスに表現するミュージックピースを生成することができるために、楽器のベテランプレーヤーによるタッチアクションのユニークなダイナミクスは直接キャプチャーされる必要がある。
本発明では、向上された表現品質のあるデジタル音楽を創作するために、指によるタッチアクションのダイナミックモーションを直接キャプチャーするための装置及び方法を開示する。
本発明の一実施例では、音楽を生成するための装置が開示される。該装置は、各キーが音符に関連付けられるキーの配列を有するボード、プロセッサ、メモリ、メモリに保存されてプロセッサにより実行されるように構成されるプログラムにより構成される。該装置は、第二のメモリとサウンドモジュールをさらに有するものであり、第二のメモリが音楽の記述を記録してその音楽を再生するものであり、また、サウンドモジュールが音楽の記述を音楽の音声に変換させるものである。
本発明の一実施例では、一つ以上の静電容量センサーは、各キーのサーフェスの下に配置され、ここで、各静電容量センサーは、「オン」及び「オフ」のバイナリ出力をエクスポートするよりもむしろ、タッチアクションの発生による静電容量変化のアナログ出力を連続的に生成するように構成される。従って、静電容量センサーは、タッチアクションを検知することができ、該タッチアクションは、指が接近するが未だボードに触れていないこと、強い力または弱い力でボードのキーを指タッチすること、ボード上のキーの間のスペースを指タッチすること、及び指がボードから離れることを含むものであり、その全てがキーの上における指の単純な接触を超えるものである。
本発明の一実施例では、ボードによる一つ以上の指タッチアクションにおいて、静電容量センサーはタッチアクションを検知して、静電容量変化の連続的なアナログな出力を生成するように構成される。プログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成するように構成されるものであり、該プログラムがメモリに保存されてプロセッサにより実行されるものである。デジタルプロフィールのパラメータは、指と静電容量センサーの間の距離、及び指タッチの速度、加速、減速、力と時間が含まれる。前記プログラムは、タッチアクションまたは一連のタッチアクションに対応するビブラート、またはポルタメントなどの音楽演奏アクションをさらに特定する。前記プログラムは、一つ以上の音楽演奏アクションのヒューリスティックをさらに入力して、楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、タッチアクションまたは一連のタッチアクションのデジタルプロフィールを音楽の記述に変換させる。
本発明の一実施例では、一つ以上のヒューリスティックは、ビブラートヒューリスティック、ポルタメントヒューリスティック、キー押し下げヒューリスティック、レガートヒューリスティック、デタッチヒューリスティック、スタッカートヒューリスティック、スピッカートヒューリスティック及び和声ヒューリスティックを含む。
本発明は、キーをタッチすることにより音を制作することと、様々なテクニックを通じて音の表現を作ることとをシームレスに統合するものであり、それはアコースティック楽器にとってとても自然なことになり、これにより、デジタル楽器が、アコースティック楽器と同じようにシームレスに表現するミュージックピースを生成することができる。
本発明の実施例の技術的な特徴をより良く例示するために、本発明の様々な実施例は添付の図面と併せて、簡単に説明されるものである。前記図面は本発明における例示的な実施形態のためのものであるが、当業者には、本発明の原理から逸脱することなく追加の図面を得ることができることは、言うまでもない。
図１は、従来技術のデジタル楽器による演奏が困難な弦楽器のための、ある特定の音楽アーティキュレーションテクニックを示す概要図である。
図２は、本発明の一実施例における自己静電容量センサーの配列を示す概要図である。
図３Ａ〜３Ｄは、本発明の一実施例における、ある特定の音楽プレーテクニックのパフォーマンスを可能にするための、本発明の音楽装置に適用されるタッチアクションを示す概要図である。
図３Ａは、本発明の一実施例における、弦楽器の上で実行されるビブラートアクションをシミュレートする本発明の音楽装置において、実行されるビブラートアクションを示す概要図である。
図３Ｂは、本発明の一実施例における、弦楽器の上で実行されるポルタメントアクションをシミュレートする本発明の音楽装置において、実行されるポルタメントアクションを示す概要図である。
図３Ｃは、本発明の一実施例における、弦楽器の上で実行されるレガートアクションをシミュレートする本発明の音楽装置において、実行されるレガートアクションを示す概要図である。
図３Ｄは、本発明の一実施例における、弦楽器の上で実行されるスタッカートアクションをシミュレートする本発明の音楽装置において、実行されるスタッカートアクションを示す概要図である。
図４は、本発明の一実施例における、図３Ａで説明されるビブラートアクションをキャプチャーする本発明の音楽装置に、埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
図５は、本発明の一実施例における、図３Ｂで説明されるポルタメントアクションをキャプチャーする本発明の音楽装置に、埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
図６は、本発明の一実施例における、図３Ｄで説明されるスタッカートアクションをキャプチャーする本発明の音楽装置に、埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
図７は、本発明の一実施例における、キーボード楽器の上で実行される強くて速いキー押し下げアクションをシミュレートする本発明の音楽装置において、実行される強くて速いキー押し下げアクションをキャプチャーする本発明の音楽装置に、埋め込まれるシングルの静電容量センサーからのアナログ出力を示す概略図である。
図８は、本発明の一実施例における、キーボード楽器の上で実行される柔らかくて遅いキー押し下げアクションをシミュレートする本発明の音楽装置において、実行される柔らかくて遅いキー押し下げアクションをキャプチャーする本発明の音楽装置に、埋め込まれるシングルの静電容量センサーからのアナログ出力を示す概略図である。
図９は、本発明の一実施例における向上された表現品質のある音楽を生成するための装置の概略図である。
図１０は、本発明の一実施例における向上された表現品質のある音楽を生成するための方法の概略図である。
本発明は特定の実施形態を使用して説明されるものであるが、本発明は、これらの実施形態に制限されるものではない。当業者は、本発明の装置及び方法が他の多くの用途に使用され得ることを認識するであろう。また、本発明は、請求の範囲に記載の本発明の精神および範囲内において、あらゆる変更、改良、および同等の内容を含むものとする。
さらに、本発明の詳細な説明において、特定の記述は本発明の完全な理解を与えるために説明される。しかしながら、当業者には、本発明がこれらの特定の記述がなくても実施できることは明らかである。例えば、楽器ディジタル・インタフェース（ＭＩＤＩ）という用語は、技術の例として本発明で議論され、簡略にするためである。しかし、他のデジタル音楽技術及びフォーマットは同様に本発明の目的に適して採用されることができ、また本発明の範囲内に含まれる。別の例は、本発明による使用可能な楽器のフォーマットの例として機能する本発明のキーボードという用語の使用である。しかし、他の楽器フォーマットは同様に本発明の目的に適して採用され、または創造されることができ、また本発明の範囲内に含まれる。さらに別の例は、本発明の静電容量センサー技術の使用であるが、他のセンサー技術は同様に本発明の目的に適して採用され、または創造されることができ、また本発明の範囲内に含まれる。
他の例では、良く知られている方法、手順、成分、および回路は、本発明に対する明確な理解を不必要に混乱させないように、詳しく説明はされない。
本発明は、添付図面を参照することにより、よりよく理解されることができ、また、その目的と利点が、当業者により明確になるであろう。
図１は、従来技術のデジタル楽器による演奏が困難な弦楽器のための、ある特定の音楽アーティキュレーションテクニックを示す概要図である。
図１に示されるように、弦楽器のための音楽アーティキュレーションテクニックにおける五つの例が参照され、左から右に、即ち、スタッカート（１０１）、スタッカティッシモ（１０２）、マルテラート（１０３）、マルカート（１０４）及び保持音（１０５）である。全ての音楽アーティキュレーションテクニックはデジタルキーボード楽器によっては区別されにくい。
さらに、ビブラート、トレモロ、ポルタメント及び和声などの他の表現品質は、通常、デジタル楽器においてシームレスに実行されることが困難である。パフォーマンス中において、これらのテクニックは、ピッチベンドホイール、サステインペダル、モジュレーションホイールの補助を必要とし、あるいは、それは演奏者にリアルタイムでデジタル楽器のモードを切り替えさせる必要があるであろう。
図２は、本発明の一実施例における自己静電容量センサーの配列を示す概要図である。
図２に示されるように、静電容量センサーアレイ２０１は合計３２個の自己静電容量センサー２０２を有する。各自己静電容量センサー２０２は、エンド・ユーザのためのセンサー装置として、金属正方形２０３及びＬＥＤライト２０５を有し、そのうち、金属正方形２０３は自己静電容量センサー２０２の一つの電極であり、また、ＬＥＤライト２０５は前記金属正方形２０３の中心に置かれる中空正方形２０４の中心に配置されている。静電容量センサーアレイ２０１は、全ての３２個のセンサーに接続されるマイクロプロセッサ（図２に示されていない）をさらに有する。
一つ以上の自己静電容量センサー２０２がキーのサーフェスの下に配置されると、各静電容量センサー２０２は、「オン」及び「オフ」のバイナリ出力をエクスポートするよりもむしろ、キーボード上のタッチアクションの発生による静電容量変化のアナログ出力を連続的に生成するように構成される。該タッチアクションは、指が接近するが未だボードに触れていないこと、強い力または弱い力でボードのキーを指タッチすること、ボード上のキーの間のスペースを指タッチすること、及び指がボードから離れることとすることができる。ボードを指タッチすることは、キーを指タッチすること、キーの周りのエリアを指タッチすること、または、二つ以上のキーの間のエリアを指タッチすることとすることができる。
図３Ａ〜３Ｄは、本発明の一実施例における、ある特定の音楽プレーテクニックのパフォーマンスを可能にするための、本発明の音楽装置に適用されるタッチアクションを示す概要図である。
図３Ａ〜３Ｄに示されるように、ボード３０１の上に配置されるキーの配列において三つのキー３０２、３０３及び３０４が使用されている。中間のキー３０２はＮキーであり、Ｎキー３０２に隣接するキーには左側がＮ−１キー３０３であり、右側がＮ＋１キー３０４である。Ｎ−１、Ｎ、Ｎ＋１の静電容量センサーは、それぞれＮ−１キー３０３、Ｎキー３０２及びＮ＋１キー３０４のサーフェスの下に配置されている。
図３Ａは、本発明の一実施例における、弦楽器の上で実行されるビブラートアクションをシミュレートする本発明の音楽装置において、実行されるビブラートアクションを示す概要図である。本発明の本実施例では、ビブラートアクションは、Ｎキー３０２の上に指３０５を置き、指３０５がボードから離れることなく、またＮ−１キー３０３若しくはＮ＋１キー３０４に完全に到達することなく、続いてリズミカルな様式で指３０５を左に、次右に移動させることにより達成される。換言すれば、これは、アコースティック弦楽器のためのビブラートテクニックに非常に類似する指ジェスチャーである。
図３Ｂは、本発明の一実施例における、弦楽器の上で実行されるポルタメントアクションをシミュレートする本発明の音楽装置において、実行されるポルタメントアクションを示す概要図である。本発明の本実施例では、ポルタメントアクションは、滑らかな滑りモーションで、指３０５がボードから離れることなく、指３０５をＮ−１キー３０３の上に置き、続いて指３０５を右に移動させ、Ｎキー３０２を通らせてＮ＋１キー３０４に到達させることにより達成される。換言すれば、これは、アコースティック弦楽器のためのポルタメントテクニックに非常に類似する指ジェスチャーである。
図３Ｃは、本発明の一実施例における、弦楽器の上で実行されるレガートアクションをシミュレートする本発明の音楽装置において、実行されるレガートアクションを示す概要図である。本発明の本実施例では、レガートアクションは、滑らかなモーションで、キーの間で指３０５をボードから、「低いジャンプ」の様式で少し持ち上げると同時に、指３０５をＮ−１キー３０３の上に置き、続いて指３０５をＮキー３０２まで移動させ、続いて指３０５をＮ＋１キー３０５まで移動させることにより達成される。
図３Ｄは、本発明の一実施例における、弦楽器の上で実行されるスタッカートアクションをシミュレートする本発明の音楽装置において、実行されるスタッカートアクションを示す概要図である。本発明の本実施例では、スタッカートアクションは、指３０５がＮ−１センサー３０３に速く力強く接近し、触れて離れ、続いて指３０５がＮセンサー３０２に速く力強く接近し、触れて離れ、その次指３０５がＮ＋１センサー３０４に速く力強く接近し、触れて離れることにより達成される。タッチアクションが完了するたびに、指３０５は「高いジャンプ」の様式でキーの間で完全にボードから持ち上げられる。
図４は、本発明の一実施例における、図３Ａで説明されるビブラートアクションをキャプチャーする本発明の音楽装置に埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
この動作のパターンは、バイオリンまたはビオラなどの弦楽器のためのビブラートアクションの直接的なシミュレーションであり、その特性が図４のグラフィックで示される三つのセンサーの静電容量の出力によりキャプチャーされる。
Ｎ−１、Ｎ、Ｎ＋１曲線は、それぞれＮ−１センサー、Ｎセンサー、Ｎ＋１センサーの静電容量出力を表示する。Ｘ軸は時間であり、Ｙ軸は静電容量のアナログ値である。図３Ａで示されるビブラートアクションは、パターンを生成するものであり、該パターンにおいては、Ｎ−１曲線が小ピークに達し、続いてＮ曲線が大ピークに達し、続いてＮ＋１曲線が小ピークに達し、続いてＮ曲線が大ピークに達し、続いてＮ−１曲線が小ピークに達するように続いている。
本発明の一実施例では、メモリに保存されてプロセッサにより実行されるプログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成し、タッチアクションの音楽演奏アクションが弦楽器のためのビブラートアクションであることを特定し、また、ビブラートヒューリスティックを適用して、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、ビブラートアクションの記述に変換させるように構成される。
三つの曲線におけるデジタルプロフィールの特徴としては、静電容量のピーク値、静電容量変化の速度、加速及び減速、静電容量がピーク値に留まる時間、１つのサイクルを完結させるための各変化の時間が含まれることである。ビブラートアクションに関する説明は、ビブラートのメインピッチ、音量、レート、深さ及びディレイにより説明されるものである。
静電容量変化の曲線におけるデジタルプロフィールの特性をＭＩＤＩフォーマットで音楽の記述に変換させることは、以下で説明される。
音のメインピッチは、該期間を通して最も大きな静電容量出力値を生成するＮセンサーに関連するピッチである。
音量は、Ｎセンサーの静電容量出力がピーク値に達する速度、及びＮセンサーの静電容量出力の実際のピーク値により決定される。
ビブラートのレートは、全ての３つの静電容量曲線のための、静電容量変化におけるそれぞれのサイクルの時間により決定される。
ビブラートの深さは、Ｎ−１曲線及び、Ｎ曲線の振幅に関連するＮ＋１曲線の振幅により決定される。
ビブラートのディレイは、動作中のこの動作の特定のパターンと同程度で設定される。
従って、ビブラートアクションの場合に、キー上の指のダイナミックモーションは、直接キャプチャーされ、また、ＭＩＤＩフォーマットでの音楽の記述は、熟練した楽器演奏者がアコースティック楽器で実行するアクションによるだけでシームレスに生成される。
図５は、本発明の一実施例における、図３Ｂで説明されるポルタメントアクションをキャプチャーする、本発明の音楽装置に埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
この動作のパターンは、バイオリンまたはビオラなどの弦楽器のためのポルタメントアクションの直接的なシミュレーションであり、その特性が図５のグラフィックで示される三つのセンサーの静電容量の出力によりキャプチャーされる。
図４と同様に、Ｎ−１、Ｎ、Ｎ＋１曲線は、それぞれＮ−１センサー、Ｎセンサー、Ｎ＋１センサーの静電容量出力を表示する。X軸は時間であり、Y軸は静電容量のアナログ値である。図３Ｂで示されるポルタメントアクションは、パターンを生成するものであり、該パターンにおいては、Ｎ−１曲線が実質的値を維持しつつ、Ｎ−１曲線がピークに達し、続いてＮ曲線がピークに達し、Ｎ曲線が実質的値を維持しつつ、その次Ｎ＋１曲線がピークに達する。
本発明の一実施例では、メモリに保存されてプロセッサにより実行されるプログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成し、タッチアクションの音楽演奏アクションが弦楽器のためのポルタメントアクションであることを特定し、また、ポルタメントヒューリスティックを適用して、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、ポルタメントアクションの記述に変換させるように構成される。
三つの曲線におけるデジタルプロフィールの特性及び、三つの特性をＭＩＤＩフォーマットで音楽の記述に変換させることは、以下で説明される。
ポルタメントの開始ピッチは、Ｎ−１センサーに関連するピッチである。
ポルタメントの終止ピッチは、Ｎ＋１センサーに関連するピッチである。
ポルタメントの中間のいずれかの点における開始ピッチと終止ピッチの間の臨時ピッチは、この点における二つの隣接したセンサーの静電容量の相対値を考える計算、及び数学的アルゴリズムに基づき、割り当てられるピッチである。最も簡単な数学的アルゴリズムは、Ｎ−１センサーとＮセンサーまでの点の物理的距離に基づき、Ｎ−１センサーとＮセンサーの間の点で臨時ピッチを割り当てることである。該物理的距離は、ボードとの接触を維持しつつ、指がＮ−１センサーからＮセンサーまで移動する際に、Ｎ−１センサーとＮセンサーに感知された静電容量を測定し、距離に対する静電容量データの結果に基づく検量曲線を描くことによりさらに導出される。
ポルタメントの音量は、静電容量出力がピーク値に達する速度、及びＮ−１、Ｎ及びＮ＋１曲線のそれぞれの実際のピーク値により決定される。
ポルタメントのレートは、全ての三つの静電容量曲線のための、静電容量変化におけるそれぞれのサイクルの時間により決定される。
従って、ポルタメントアクションの場合に、キー上の指のダイナミックモーションは、直接キャプチャーされ、また、ＭＩＤＩフォーマットでの音楽の記述は、熟練した楽器演奏者がアコースティック楽器で実行するアクションによるだけでシームレスに生成される。
より一般的には、本発明の本実施例は、別個のキーのセットに関連する別個のピッチを有するデジタルキーボード楽器に、デジタル弦楽器のように演奏させるものであり、このデジタル弦楽器が、指をキーに滑らせる際に、段階的且つ連続的なピッチの変化を生じさせる。
図6は、本発明の一実施例における、図３Ｄで説明されるスタッカートアクションをキャプチャーする本発明の音楽装置に埋め込まれる三つの静電容量センサーのアナログ出力を示す概略図である。
この動作のパターンは、バイオリンまたはビオラなどの弦楽器のためのスタッカートアクションの直接的なシミュレーションであり、その特性が図６のグラフィックで示される三つのセンサーの静電容量の出力によりキャプチャーされる。
図５と同様に、Ｎ−１、Ｎ、Ｎ＋１曲線は、それぞれＮ−１センサー、Ｎセンサー、Ｎ＋１センサーの静電容量出力を表示する。X軸は時間であり、Y軸は静電容量のアナログ値である。
本発明の一実施例では、メモリに保存されてプロセッサにより実行されるプログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成し、タッチアクションの音楽演奏アクションが弦楽器のためのスタッカートアクションであることを特定し、また、スタッカートヒューリスティックを適用して、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、スタッカートアクションの記述に変換させるように構成される。
三つの曲線におけるデジタルプロフィールの特性及び、それに対応するＭＩＤＩ記述への変換は自明である。スタッカートアクションのデジタルプロフィールは、ポルタメントアクションのデジタルプロフィールとの対照として機能するために、ここで説明されるものである。
図７は、本発明の一実施例における、キーボード楽器の上で実行される強くて速いキー押し下げアクションをシミュレートする本発明の音楽装置において、実行される強くて速いキー押し下げアクションをキャプチャーする本発明の音楽装置に埋め込まれるシングルの静電容量センサーからのアナログ出力を示す概略図である。
キーボード楽器のための強くて速いキー押し下げアクションの特性は、図７のグラフィックで示されるセンサーの静電容量の出力によりキャプチャーされる。Ｘ軸は時間であり、Ｙ軸は静電容量のアナログ値である。
本発明の一実施例では、メモリに保存されてプロセッサにより実行されるプログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成し、タッチアクションの音楽演奏アクションがキーボード楽器のための強くて速いキー押し下げアクションであることを特定し、また、キー押し下げヒューリスティックを適用して、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、強くて速いキー押し下げアクションの記述に変換させるように構成される。
前記曲線におけるデジタルプロフィールの特性及び、この特性をＭＩＤＩフォーマットで音楽の記述に変換させることは、以下で説明される。
キー押し下げのピッチは、センサーに関連するピッチである。
キー押し下げの初期音量は、静電容量出力がしきい値に達する速度により決定される。
静電容量出力がさらに増加するとともに、一連のアフタータッチメッセージは、キー押し下げの音量を上げるためにさらに生成されるようになる。
ある期間において静電容量出力が最大値に留まる際に、一定のメッセージはさらに生成される。
静電容量出力の値が減少するとともに音量は減少するようになり、また静電容量出力がしきい値を下回る時にゼロに達する。
従って、強くて速いキー押し下げアクションの場合に、キー上の指のダイナミックモーションは直接キャプチャーされ、また、ＭＩＤＩフォーマットでの音楽の記述は、サステインペダルの補助がなく、熟練した楽器演奏者がアコースティック楽器で実行するアクションによるだけでシームレスに生成される。
図８は、本発明の一実施例における、キーボード楽器の上で実行される柔らかくて遅いキー押し下げアクションをシミュレートする本発明の音楽装置において、実行される柔らかくて遅いキー押し下げアクションをキャプチャーする本発明の音楽装置に埋め込まれるシングルの静電容量センサーからのアナログ出力を示す概略図である。
キーボード楽器のための、柔らかくて遅いキー押し下げアクションの特性は、図８のグラフィックで示されるセンサーの静電容量の出力によりキャプチャーされる。Ｘ軸は時間であり、Ｙ軸は静電容量のアナログ値である。
本発明の一実施例では、メモリに保存されてプロセッサにより実行されるプログラムは、タッチアクションの静電容量変化のデジタルプロフィールを作成し、タッチアクションの音楽演奏アクションがキーボード楽器のための柔らかくて遅いキー押し下げアクションであることを特定し、また、キー押し下げヒューリスティックを適用して、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、柔らかくて遅いキー押し下げアクションの記述に変換させるように構成される。
前記曲線におけるデジタルプロフィールの特性及び、この特性をＭＩＤＩフォーマットで音楽の記述に変換させることは、以下で説明される。
キー押し下げのピッチは、センサーに関連するピッチである。
キー押し下げの初期音量は、静電容量出力がしきい値に達する速度により決定される。
静電容量出力がさらに増加するとともに、一連のアフタータッチメッセージは、キー押し下げの音量を上げるためにさらに生成されるようになる。
ある期間において静電容量出力が最大値に留まる際に、一定のメッセージはさらに生成される。
静電容量出力の値が減少するとともに音量は減少するようになり、また静電容量出力がしきい値を下回る時にゼロに達する。
図７のグラフとは対照的に、図８の静電容量出力曲線は、最大値まで増加するまでにより長い時間がかかり、基準値まで減少するまでにもより長い時間がかかる。図８の静電容量出力曲線は、図７の曲線より低いピーク値に達する。この特性は、図７で示されるキー押し下げアクションより柔らかくて遅いといった図８で説明されるキー押し下げアクションと全て一致する。
図４から図８までの進行中のパラグラフにおける説明は、本発明の様々な実施例を例示するものであり、ビブラート（図４）、ポルタメント（図５）、スタッカート（図６）、強くて速いキー押し下げ（図７）、柔らかくて遅いキー押し下げ（図８）などの音楽演奏アクションは、本発明の装置または方法によりキャプチャーされる。本発明の他の実施例では、レガートアクション、デタッチアクション、スピッカートアクション、和声アクションなどの音楽演奏アクションはキャプチャーされ、ＭＩＤＩフォーマットで音楽の記述に変換され、そこで、それに対応するタッチアクションは、アコースティック楽器を演奏する時の指アクションと実質的に同じである。
本発明の一実施例では、キー上の柔らかくて持続的な指タッチアクションは、静電容量センサーにより検知され、また、プログラムは、タッチアクションのデジタルプロフィールを生成し、タッチアクションの音楽演奏アクションが和声アクションであることを特定し、和声ヒューリスティックをデジタルプロフィールに適用することにより、デジタルプロフィールを、和声のルートであるキーに関連する音による和声の記述に変換させる。
図９は、本発明の一実施例における向上された表現品質のある音楽を生成するための装置の概略図である。
図９に示されるように、装置９０１はキーの配列を有するキーボード９０２を含み、各キーは、一つの音符、及び二つのボタン９０３と９０４に関連されるものであり、二つのボタン９０３と９０４が、シングルのオクターブにより、キーボード全体のピッチを上げるまたは下げるといった機能を有するプラス及びマイナスのシンボルを含む。一つ以上の静電容量センサーは、キーボード９０２における各キーのサーフェスの下に配置され、各静電容量センサーは、タッチアクションの発生による静電容量変化のアナログ出力を連続的に生成することができるように構成される。装置９０１は、シミュレートされる楽器のタイプの選択を可能にする楽器選択セクション９０５、シングル音の代わりに、関連音符がルートである和音をキーボードに生成させる和音セクション９０６、テンポが生成される音楽のために設定されることを可能にするテンポセクション９０７をさらに含む。
装置９０１には、プロセッサ９０８、メモリ９０９、サウンドモジュール９１０及び一対のスピーカー９１１がさらに埋め込まれる。メモリ９０９に保存されるものは、プログラムであり、プロセッサ９０８により実行されるように構成される。タッチアクションの継続時間全体において、静電容量センサーがボードにより一つ以上の指タッチアクションを検知し、静電容量変化のアナログ出力を生成した後、プログラムは、タッチアクションのデジタルプロフィールを作成するために、一つ以上のヒューリスティックを一つ以上の指タッチアクションに適用させ、デジタルプロフィールを楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで音楽の記述に変換させる。サウンドモジュール９１０は、音楽の記述をＭＩＤＩフォーマットで音楽の音声に変換させるためのものである。
本発明の一実施例では、デジタルプロフィールから導出された一つ以上のタッチアクションのデジタルプロフィール及び音楽の記述は、将来的に再生するために、メモリ９０９の中に保存される。
図１０は、本発明の一実施例における向上された表現品質のある音楽を生成するための方法の概略図である。図１０に示されるように、その方法は以下のステップを具備する。
各キーが音符に関連付けられるキーの配列を有するボードにおいて、
ステップ１００１：静電容量センサーにより、タッチアクションまたは一連のタッチアクションを検知する。前記検知は、指により静電容量変化が起こされて、しきい値または多数のしきい値を超える各キーのサーフェスの下に配置される静電容量センサーにより感知されることにより達成される。
ステップ１００２：静電容量センサーにより静電容量変化のアナログ出力を連続的に生成する。静電容量変化がしきい値を超える限り、静電容量センサーは静電容量変化のアナログ値を感知し、出力することを続けるように構成される。
ステップ１００３：メモリに保存されてプロセッサで実行されるプログラムにより、静電容量変化を音楽の記述に変換させる。即ち、メモリに保存されたプロセッサで実行されるプログラムにより、タッチアクションまたは一連のタッチアクションの静電容量変化を楽器ディジタル・インタフェース（ＭＩＤＩ）フォーマットで、音楽の記述に変換させる。
ステップ１００３Ａ：タッチアクションまたは一連のタッチアクションの静電容量変化のデジタルプロフィールを生成する。プログラムにより、タッチアクションまたは一連のタッチアクションの静電容量変化のデジタルプロフィールを生成し、そこで、デジタルプロフィールは、距離、速度、加速、減速、力及び時間からなるグループから選択されるパラメータにより構成される。
ステップ１００３Ｂ：デジタルプロフィールが一定の音楽演奏アクションに対応することを特定する。プログラムにより、デジタルプロフィールがビブラートまたはポルタメントなどの、一定の音楽演奏アクションに対応することを特定する。
ステップ１００３Ｃ：音楽演奏アクションに関連するヒューリスティックを適用し、プログラムにより音楽の記述を生成する。

Claims (20)

  1. 音楽を生成するための装置であって、
    各キーが音符に関連付けられるキーの配列を有するボードと、
    各キーのサーフェスの下に配置される静電容量センサーと、
    プロセッサと、
    メモリと、
    メモリに保存されてプロセッサにより実行されるように構成されるプログラムと、
    を有し、
    前記各静電容量センサーは、指によるタッチアクションを検知し、タッチアクションの期間中における静電容量変化のアナログ出力を連続的に生成するように構成され、
    前記プログラムは、タッチアクションまたは一連のタッチアクションの静電容量変化を楽器ディジタル・インタフェース(MIDI)フォーマットで、音楽の記述に変換させる、
    ことを特徴とする音楽を生成するための装置。
  2. 前記静電容量センサーは、タッチアクションを検知するように構成され、
    前記タッチアクションは、指が接近するが未だボードに触れていないこと、強い力または弱い力でボードのキーを指タッチすること、ボード上のキーの間のスペースを指タッチすること、及び指がボードから離れることからなるアクションのグループから選択される、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  3. 前記プログラムは、一つ以上のヒューリスティックを適用することにより音楽の記述を生成するものであり、
    前記一つ以上のヒューリスティックは、
    ボードとの接触を維持しつつ、リズミカルな様式でキーの中心ポジションから前後に移動する主に横方向の移動で指がキーをタッチすることで特定される、タッチアクションを弦楽器のビブラートアクションとして記述されるビブラートヒューリスティックと、
    指が第一のキーをタッチし、ボードとの接触を維持しつつ第二のキーに向けて横に移動することで特定される、タッチアクションを弦楽器のためのポルタメントアクションとして記述されるポルタメントヒューリスティックと、
    を含む、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  4. 前記プログラムは、一つ以上のヒューリスティックを適用することにより音楽の記述を生成するものであり、
    前記一つ以上のヒューリスティックは、
    柔らかくて遅い主に垂直の移動で指がキーをタッチすることで特定され、前記タッチアクションをキーボード楽器のための柔らかくて遅いキー押し下げとして記述するためのキー押し下げヒューリスティックと、
    強くて速い主に垂直の移動で指がキーをタッチすることで特定され、前記タッチアクションをキーボード楽器のための強くて速いキー押し下げとして記述するためのキー押し下げヒューリスティックと、
    を含む、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  5. 前記プログラムは、一つ以上のヒューリスティックを適用することにより音楽の記述を生成するものであり、
    前記一つ以上のヒューリスティックは、
    レガートヒューリスティック、デタッチヒューリスティック、スタッカートヒューリスティック、スピッカートヒューリスティック及び和声ヒューリスティックからなるグループから選択されたヒューリスティックにより構成される、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  6. 前記プログラムは、タッチアクションまたは一連のタッチアクションの静電容量変化のデジタルプロフィールを生成するように構成され、
    前記デジタルプロフィールは、距離、速度、加速、減速、力及び時間からなるグループから選択されるパラメータにより構成される、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  7. 前記プログラムは、デジタルプロフィールが一定の音楽演奏アクションに対応することを特定するように構成される、
    ことを特徴とする請求項６に記載の音楽を生成するための装置。
  8. 前記プログラムは、音楽演奏アクションに関連するヒューリスティックを適用し、音楽の記述を生成するように構成される、
    ことを特徴とする請求項７に記載の音楽を生成するための装置。
  9. 前記ボードは一つ以上のキーをさらに有し、
    前記各キーは、和音、テンポ、臨時記号、ダイナミクスのシンボル、アーティキュレーションのシンボル、楽器の特定のタイプを表示するシンボルからなるグループから選択され、
    音楽の記述に取り込まれる音楽関連の要素に関連付けられる、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  10. 前記音楽の記述を記録してその音楽を再生する第二のメモリをさらに有する、
    ことを特徴とする請求項１に記載の音楽を生成するための装置。
  11. 音楽を生成するための方法であって、
    各キーが音符に関連付けられるキーの配列を有するボードで、各キーのサーフェスの下に配置される静電容量センサーにより、指によるタッチアクションを検知する；
    静電容量センサーにより、タッチアクションの期間中における静電容量変化のアナログ出力を連続的に生成する；
    メモリに保存されてプロセッサで実行されるプログラムにより、タッチアクションまたは一連のタッチアクションの静電容量変化を楽器ディジタル・インタフェース(ＭＩＤＩ)フォーマットで、音楽の記述に変換させる；
    ことを有する、
    ことを特徴とする音楽を生成するための方法。
  12. 前記静電容量センサーは、タッチアクションを検知するように構成され、
    前記タッチアクションは、指が接近するが未だボードに触れていないこと、強い力または弱い力でボードのキーを指タッチすること、ボードのキーの間のスペースを指タッチすること、及び指がボードから離れること、
    からなるアクションのグループから選択される、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  13. 前記プログラムにより、一つ以上のヒューリスティックを適用して音楽の記述を生成することをさらに有し、
    前記一つ以上のヒューリスティックは、
    ボードとの接触を維持しつつ、リズミカルな様式でキーの中心ポジションから前後に移動する主に横方向の移動で指がキーをタッチすることで特定される、タッチアクションを弦楽器のビブラートアクションとして記述されるビブラートヒューリスティックと、
    指が第一のキーをタッチし、ボードとの接触を維持しつつ第二のキーに向けて横に移動することで特定される、タッチアクションを弦楽器のためのポルタメントアクションとして記述されるポルタメントヒューリスティックと、
    を含む、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  14. 前記プログラムにより、一つ以上のヒューリスティックを適用して音楽の記述を生成することをさらに有し、
    前記一つ以上のヒューリスティックは、
    柔らかくて遅い主に垂直の移動で指がキーをタッチすることで特定され、前記タッチアクションをキーボード楽器のための柔らかくて遅いキー押し下げとして記述するためのキー押し下げヒューリスティックと、
    強くて速い主に垂直の移動で指がキーをタッチすることで特定され、前記タッチアクションをキーボード楽器のための強くて速いキー押し下げとして記述するためのキー押し下げヒューリスティックと、
    を含む、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  15. 前記プログラムにより、一つ以上のヒューリスティックを適用して音楽の記述を生成することをさらに有し、
    前記一つ以上のヒューリスティックは、レガートヒューリスティック、デタッチヒューリスティック、スタッカートヒューリスティック、スピッカートヒューリスティック及び和声ヒューリスティックからなるグループから選択されたヒューリスティックにより構成される、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  16. 前記プログラムにより、タッチアクションまたは一連のタッチアクションの静電容量変化のデジタルプロフィールを生成することをさらに有し、
    前記デジタルプロフィールは、距離、速度、加速、減速、力及び時間からなるグループから選択されるパラメータにより構成される、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  17. 前記プログラムにより、デジタルプロフィールが一定の音楽演奏アクションに対応することを特定することをさらに有する、
    ことを特徴とする請求項１６に記載の音楽を生成するための方法。
  18. 前記プログラムにより、音楽演奏アクションに関連するヒューリスティックを適用し、前記プログラムにより音楽の記述を生成することをさらに有する、
    ことを特徴とする請求項１７に記載の音楽を生成するための方法。
  19. 前記ボードは一つ以上のキーをさらに有し、
    前記各キーは、和音、テンポ、臨時記号、ダイナミクスのシンボル、アーティキュレーションのシンボル、楽器の特定のタイプを表示するシンボルからなるグループから選択される音楽関連の要素に関連付けられ、
    キーに関連する前記音楽関連の要素を音楽の記述に取り込むことをさらに有する、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
  20. 第二のメモリにより、前記音楽の記述を記録してその音楽を再生することをさらに有する、
    ことを特徴とする請求項１１に記載の音楽を生成するための方法。
JP2016548113A 2013-03-12 2015-01-06 デジタル音楽の表現品質を高めるための装置及び方法 Pending JP2017507349A (ja)

Applications Claiming Priority (18)

Application Number Priority Date Filing Date Title
PCT/CN2013/072481 WO2014139092A1 (en) 2013-03-12 2013-03-12 System and method for interactive board
PCT/CN2014/071850 WO2014139349A1 (en) 2013-03-12 2014-01-30 System and method for identifying an object's id and location relative to an interactive surface
CNPCT/CN2014/071850 2014-01-30
CNPCT/CN2014/072961 2014-03-06
PCT/CN2014/072961 WO2014139369A1 (en) 2013-03-12 2014-03-06 System and method for identifying object's id and location relative to interactive surface
PCT/CN2014/079891 WO2015113358A1 (en) 2013-03-12 2014-06-13 System and method for operating computer program with physical objects
CNPCT/CN2014/079892 2014-06-13
PCT/CN2014/079892 WO2015113359A1 (en) 2013-03-12 2014-06-13 System and method for identifying an object's id and location relative to an interactive surface
CNPCT/CN2014/079891 2014-06-13
PCT/CN2014/080317 WO2015113360A1 (en) 2014-01-30 2014-06-19 System and method for learning,composing,and playing music with physical objects
CNPCT/CN2014/080317 2014-06-19
CNPCT/CN2014/080495 2014-06-23
PCT/CN2014/080495 WO2015113365A1 (en) 2014-01-30 2014-06-23 System and method to recognize object's id, orientation and location relative to interactive surface
CNPCT/CN2014/090890 2014-11-12
PCT/CN2014/090890 WO2015113431A1 (en) 2014-01-30 2014-11-12 System and method for recognizing objects with continuous capacitance sensing
CNPCT/CN2014/091918 2014-11-21
PCT/CN2014/091918 WO2015113440A1 (en) 2014-01-30 2014-11-21 System and method for changing the state of user interface element marked on physical objects
PCT/CN2015/070162 WO2015113457A1 (en) 2014-01-30 2015-01-06 Apparatus and method to enhance expressive qualities of digital music

Publications (1)

Publication Number Publication Date
JP2017507349A true JP2017507349A (ja) 2017-03-16

Family

ID=51535791

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2016548114A Active JP6429336B2 (ja) 2013-03-12 2014-06-19 物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム及び方法
JP2016548134A Active JP6326143B2 (ja) 2013-03-12 2014-07-07 インタラクティブサーフェスにおける物理的オブジェクトを有するコンピュータプログラミングのためのシステム及び方法
JP2016548113A Pending JP2017507349A (ja) 2013-03-12 2015-01-06 デジタル音楽の表現品質を高めるための装置及び方法

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2016548114A Active JP6429336B2 (ja) 2013-03-12 2014-06-19 物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム及び方法
JP2016548134A Active JP6326143B2 (ja) 2013-03-12 2014-07-07 インタラクティブサーフェスにおける物理的オブジェクトを有するコンピュータプログラミングのためのシステム及び方法

Country Status (4)

Country Link
US (2) US9399174B2 (ja)
JP (3) JP6429336B2 (ja)
CN (2) CN104303133A (ja)
WO (5) WO2014139092A1 (ja)

Families Citing this family (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015113365A1 (en) * 2014-01-30 2015-08-06 Zheng Shi System and method to recognize object's id, orientation and location relative to interactive surface
CN104303133A (zh) 2013-03-12 2015-01-21 施政 互动板的系统及方法
US9555320B2 (en) * 2013-05-17 2017-01-31 Castar, Inc. System and method to identify and track objects on a surface
JP5968840B2 (ja) * 2013-07-31 2016-08-10 株式会社ベネッセコーポレーション 入力デバイスセット及び複合入力デバイスセット
WO2015113395A1 (en) * 2014-01-30 2015-08-06 Zheng Shi System and method for directing a moving object on an interactive surface
WO2016074465A1 (en) * 2014-11-12 2016-05-19 Zheng Shi System and accompanying method for interacting with card and interactive surface
CN105983228A (zh) * 2015-02-10 2016-10-05 施政 交互式平台上物体按预设路线运动系统和方法
CN108292184A (zh) * 2015-08-27 2018-07-17 施政 用于射频识别触摸面板的装置和方法
US10078127B2 (en) 2015-09-15 2018-09-18 Nxp B.V. Tracking spatial placement of HF RFID tag objects on a surface using multiple reception antennas
USD809484S1 (en) * 2015-11-18 2018-02-06 Zheng Shi Music board
JP6516883B2 (ja) * 2016-01-29 2019-05-22 シャープ株式会社 アンテナデバイス
CN107180257B (zh) * 2016-03-11 2020-05-15 施政 一种可探测装置和探测系统及探测物体的方法
CN107305444A (zh) 2016-04-19 2017-10-31 施政 探测系统和方法
CN205796543U (zh) * 2016-07-05 2016-12-14 福建蓝帽子互动娱乐科技股份有限公司 基于光线强度识别的互动装置
US10156916B2 (en) * 2016-11-25 2018-12-18 Koto Co., Ltd. Input device identification method, input device identification apparatus, and input system
CN106730907B (zh) * 2016-12-02 2022-04-22 浙江机电职业技术学院 桌面层叠平衡玩具及其使用方法
JP6877689B2 (ja) * 2017-03-27 2021-05-26 カシオ計算機株式会社 プログラミング装置及びその制御プログラム、プログラミング方法
JP6910592B2 (ja) * 2017-03-27 2021-07-28 カシオ計算機株式会社 プログラミング装置及びその制御プログラム、プログラミング方法
JP6877688B2 (ja) 2017-03-27 2021-05-26 カシオ計算機株式会社 プログラミング装置及びその制御プログラム、プログラミング方法
JP6910593B2 (ja) * 2017-03-27 2021-07-28 カシオ計算機株式会社 プログラム処理装置
GB2563585B (en) 2017-06-16 2020-05-06 Sony Interactive Entertainment Europe Ltd Board game system and method
AU2018310872B2 (en) * 2017-07-03 2021-04-01 Lai Wa WONG Device having multi-touch applications
JP6529544B2 (ja) * 2017-07-07 2019-06-12 株式会社エルイーテック 物体の接続の順序を動作の順序として特定する装置
TWI636355B (zh) * 2017-08-01 2018-09-21 群光電能科技股份有限公司 電子印章
JP6930337B2 (ja) * 2017-09-27 2021-09-01 カシオ計算機株式会社 電子機器、移動経路記録方法、およびプログラム
JP6479135B1 (ja) * 2017-10-30 2019-03-06 株式会社東芝 連携ルール設定支援システム
KR102203829B1 (ko) * 2019-05-27 2021-01-15 정용비 코딩용 카드를 이용하여 코딩로봇의 제어를 위한 알고리즘을 생성하는 코딩보드장치 및 방법
CN110327615B (zh) * 2019-06-19 2022-11-01 深圳数联天下智能科技有限公司 物体组合方式的确定方法及相关装置
CN110309893B (zh) * 2019-06-19 2023-08-01 深圳数联天下智能科技有限公司 推钮位置的确定方法及装置
CN110263591B (zh) * 2019-06-19 2022-07-15 深圳数联天下智能科技有限公司 落棋位置的确定方法及装置
CN110334785B (zh) * 2019-06-19 2023-05-09 深圳数联天下智能科技有限公司 物体移动路径的确定方法及相关装置
CN110237524B (zh) * 2019-06-19 2023-06-02 深圳数联天下智能科技有限公司 物体摆放图形的确定方法及相关装置
CN110321016B (zh) * 2019-06-19 2023-07-11 深圳数联天下智能科技有限公司 点读笔位置的确定方法及装置
JP6670491B1 (ja) * 2019-08-13 2020-03-25 杏莉沙 小林 超絶音感及び絶対音感の教材並びにこれを用いた指導方法
US20210170265A1 (en) * 2019-12-10 2021-06-10 Sydney Ella Curran Electronic toy
JP7473781B2 (ja) * 2019-12-12 2024-04-24 株式会社コト 音要素入力媒体、読取変換装置、及び、楽器システム、並びに、楽音生成方法
KR102655327B1 (ko) 2022-06-16 2024-04-04 장미화 유아의 영어 및 수학적 코딩을 위한 사고 능력을 향상시키는 교구 시스템
CN115904855B (zh) * 2023-03-02 2023-07-07 上海合见工业软件集团有限公司 基于信号动态追踪确定目标驱动源码的系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS587189A (ja) * 1981-07-03 1983-01-14 株式会社　コルグ電子 指の動きで独立したヴイブラ−トのかかる鍵盤を有する電子楽器
JPH09190186A (ja) * 1996-01-09 1997-07-22 Kawai Musical Instr Mfg Co Ltd 電子楽器の演奏情報入力装置
JP2000338977A (ja) * 1999-05-28 2000-12-08 Umeko Kato 静電容量センサを用いた電子楽器
JP2004271783A (ja) * 2003-03-07 2004-09-30 Kenzo Akazawa 電子楽器および演奏操作装置
JP2013195966A (ja) * 2012-03-22 2013-09-30 Yamaha Corp 発音制御装置、携帯情報機器及びプログラム

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4239597C2 (de) * 1991-11-26 1999-11-04 Hitachi Chemical Co Ltd Ebene Antenne mit dualer Polarisation
JP3024335B2 (ja) * 1992-01-27 2000-03-21 日本電気株式会社 プログラム生成装置およびシステム
JP2660163B2 (ja) * 1994-10-11 1997-10-08 有限会社アレフロジック アルゴリズム教育支援システム
US5659248A (en) * 1994-10-17 1997-08-19 General Electric Company Multilayer eddy current probe array for complete coverage of an inspection surface without mechanical scanning
AU5061400A (en) * 1999-06-09 2001-01-02 Innoplay Aps A device for composing and arranging music
US7059964B1 (en) * 1999-08-19 2006-06-13 Yehouda Harpaz Games grid board
JP3851481B2 (ja) * 2000-02-17 2006-11-29 株式会社タイトー 音出力装置
JP2001228963A (ja) * 2000-02-17 2001-08-24 Kaikousha:Kk パネル認識装置
FR2810164A1 (fr) * 2000-06-09 2001-12-14 Thomson Multimedia Sa Perfectionnement aux antennes source d'emission/reception d'ondes electromagnetiques pour systemes de telecommunications par satellite
JP4284855B2 (ja) * 2000-10-25 2009-06-24 ソニー株式会社 情報入出力システム及び情報入出力方法、並びにプログラム記憶媒体
CN2527324Y (zh) * 2002-03-26 2002-12-25 龙建 通过机器识别与操作的棋具
JP3938327B2 (ja) * 2002-05-13 2007-06-27 株式会社国際電気通信基礎技術研究所 作曲支援システムおよび作曲支援プログラム
JP4048939B2 (ja) * 2002-05-17 2008-02-20 ソニー株式会社 インタフェース要素体を備えた音楽装置
FR2860985B1 (fr) * 2003-10-20 2005-12-30 Numicom Ensemble ludo-educatif electronique avec des elements communicants a etiquette radiofrequence
TWM255524U (en) * 2003-12-03 2005-01-11 Tatung Co Structure of laminated microstrip reflecting-array antenna
JP2005283858A (ja) * 2004-03-29 2005-10-13 Advanced Telecommunication Research Institute International 作曲・演奏支援システム
US7205896B2 (en) * 2005-02-23 2007-04-17 G-Time Electronic Co., Ltd. RFID reader having multi-dimensional antenna array
CN200944238Y (zh) * 2006-08-30 2007-09-05 田哓彦 多功能电子门票
US20090017910A1 (en) * 2007-06-22 2009-01-15 Broadcom Corporation Position and motion tracking of an object
US7791483B2 (en) * 2007-05-29 2010-09-07 Rcd Technology Inc. Game system using RFID tags
TW200912821A (en) * 2007-09-04 2009-03-16 G Time Electronic Co Ltd Learning device and method thereof
US7623081B2 (en) 2008-01-25 2009-11-24 Mitsubishi Electric Research Laboratories, Inc. Wireless UWB connection for rotating RF antenna array
JP6043482B2 (ja) * 2008-06-03 2016-12-14 トウィードルテック リミテッド ライアビリティ カンパニー インテリジェントボードゲームシステム、ゲーム駒、インテリジェントボードゲームシステムを操作する方法、インテリジェントボードゲームをプレイする方法
MX2011001515A (es) * 2008-08-07 2011-04-21 Wal Mart Stores Inc Aparato y metodo que facilita la comunicacion entre componentes de un sistema de identificacion de radio frecuencia.
US7956271B1 (en) * 2008-10-11 2011-06-07 Alicia Jonas Musical rhythmic teaching block system
CN101637655A (zh) * 2009-02-27 2010-02-03 黄煜能 射频娱乐或教学系统
CN102039045A (zh) * 2009-10-12 2011-05-04 朱立圣 电子化棋盘类游戏系统
TW201020002A (en) * 2010-02-05 2010-06-01 Univ Chang Gung Digital chessboard and the use method for chessboard
CN201654801U (zh) * 2010-04-28 2010-11-24 深圳市华士精成科技有限公司 一种2.4g/13.56m双频rfid读卡器
JP2011239993A (ja) * 2010-05-19 2011-12-01 Yamaha Corp 発音制御装置
JP5376060B2 (ja) * 2010-07-08 2013-12-25 株式会社村田製作所 アンテナ及びｒｆｉｄデバイス
WO2013144153A1 (en) * 2012-03-30 2013-10-03 Tyco Electronics Uk Ltd Rfid reader extender
EP2657717A1 (en) 2012-04-26 2013-10-30 Koninklijke Philips N.V. Magnetic resonance imaging (MRI) radio frequency (RF) antenna array with Gysel power splitter
CN202983151U (zh) * 2012-08-09 2013-06-12 上海科斗电子科技有限公司 一种象棋棋具
CN109635608B (zh) * 2013-03-08 2022-05-31 索尼互动娱乐股份有限公司 近场无线通信rfid标签读取器和近场无线通信系统
CN104303133A (zh) 2013-03-12 2015-01-21 施政 互动板的系统及方法
US10226688B1 (en) * 2014-08-27 2019-03-12 Frank A. Camaratta, Jr. Chess pieces weighted with powdered metal

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS587189A (ja) * 1981-07-03 1983-01-14 株式会社　コルグ電子 指の動きで独立したヴイブラ−トのかかる鍵盤を有する電子楽器
JPH09190186A (ja) * 1996-01-09 1997-07-22 Kawai Musical Instr Mfg Co Ltd 電子楽器の演奏情報入力装置
JP2000338977A (ja) * 1999-05-28 2000-12-08 Umeko Kato 静電容量センサを用いた電子楽器
JP2004271783A (ja) * 2003-03-07 2004-09-30 Kenzo Akazawa 電子楽器および演奏操作装置
JP2013195966A (ja) * 2012-03-22 2013-09-30 Yamaha Corp 発音制御装置、携帯情報機器及びプログラム

Also Published As

Publication number Publication date
US20160001180A1 (en) 2016-01-07
WO2014139092A1 (en) 2014-09-18
JP2017509011A (ja) 2017-03-30
WO2014139349A1 (en) 2014-09-18
JP6429336B2 (ja) 2018-11-28
CN104303133A (zh) 2015-01-21
JP2017506781A (ja) 2017-03-09
WO2014139369A1 (en) 2014-09-18
CN205880833U (zh) 2017-01-11
US20150310238A1 (en) 2015-10-29
US9399174B2 (en) 2016-07-26
WO2015113358A1 (en) 2015-08-06
JP6326143B2 (ja) 2018-05-16
WO2015113359A1 (en) 2015-08-06

Similar Documents

Publication Publication Date Title
JP2017507349A (ja) デジタル音楽の表現品質を高めるための装置及び方法
WO2015113457A1 (en) Apparatus and method to enhance expressive qualities of digital music
US9299330B2 (en) Apparatus and method to enhance the expressive qualities of digital music
CN105027192B (zh) 增强数字音乐表现力的装置和方法
EP3039671B1 (en) Mapping gestures to music effects on a touch-keyboard .
US10170089B2 (en) Method and apparatus for lighting control of a digital keyboard musical instrument
Bresin Articulation rules for automatic music performance
US6376759B1 (en) Electronic keyboard instrument
Goebl et al. Sense in expressive music performance: Data acquisition, computational studies, and models
McPherson Buttons, handles, and keys: Advances in continuous-control keyboard instruments
Guaus et al. A left hand gesture caption system for guitar based on capacitive sensors
WO2017125006A1 (zh) 一种电声乐器节奏可控的方法及其对卡拉ok的改进
JPH03184094A (ja) 電子楽器
Dahlstedt Physical interactions with digital strings-a hybrid approach to a digital keyboard instrument
Moro et al. Performer experience on a continuous keyboard instrument
Vets et al. PLXTRM: Prediction-Led eXtended-guitar Tool for Real-time Music applications and live performance
KR101813557B1 (ko) 디지털 음악의 표현적 특성을 개선하는 장치 및 방법
JP6922943B2 (ja) 電子楽器、方法およびプログラム
JP2017167177A (ja) 楽音発生指示装置、楽音発生指示方法、楽音発生指示装置用のプログラム及び楽音発生指示装置を有する電子楽器
Godøy Thinking sound-motion objects
JP4497104B2 (ja) 電子鍵盤楽器
Granieri et al. Harnessing Ancillary Microgestures in Piano Technique: Implementing Microgestural Control Into an Expressive Keyboard-Based Hyper-Instrument
Lee et al. Use the force: Incorporating touch force sensors into mobile music interaction
JP5669646B2 (ja) 演奏評価装置、電子楽器及びプログラム
JP2007018004A (ja) 電子鍵盤楽器

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160905

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161222

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161004

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170721

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170801

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180301