JP2017509011A - 物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム及び方法 - Google Patents

Abstract

【課題】本発明は音楽を学習、作曲、触れる及び演奏するためのシステム及び方法を開示するものである。該システムは複数の物理的オブジェクトを有し、各オブジェクトは識別子を有し、音楽関連のインディケータが割り当てられる。また、該システムは、インタラクティブサーフィスの上に配置される物理的オブジェクトのインタラクティブサーフィスに関連する識別子と位置情報を、認識するように構成されるインタラクティブサーフィスを有する。さらに、構造パターンを形成するために、複数のオブジェクトがインタラクティブサーフィスの上に配置されると、プロセッサは構造パターンからミュージックピースを導出するように構成される。

Description

関連出願の相互参照

本出願は、２０１４年６月１３日に出願された、「物理的オブジェクトによりコンピュータープログラムを実行するためのシステム及び方法」と題される国際特許出願第ＰＣＴ／ＣＮ２０１４／０７９８９１号の一部継続出願であり、２０１４年３月６日に出願された、「双方向ボードに関連するオブジェクトのＩＤと位置を識別するためのシステム及び方法」と題される国際特許出願第ＰＣＴ／ＣＮ２０１４／０７２９６１号の一部継続出願であり、２０１４年１月３０日に出願された、「双方向ボードに関連するオブジェクトのＩＤと位置を識別するためのシステム及び方法」と題される国際特許出願ＰＣＴ／ＣＮ２０１４／０７１８５０号の一部継続出願であり、また、2013年3月12日に出願された、「双方向ボードのためのシステム及び方法」と題される国際特許出願第ＰＣＴ／ＣＮ２０１３／０７２４８１号の一部継続出願である。上記出願の開示全体は、参照により本明細書に組み込まれている。

本発明及びその実施例は、電子装置における音楽アプリケーションの分野に関するものであり、特にカードを用い、音楽を作曲及び演奏するインタラクティブサーフィスに関するものである。

音楽は人類の最も偉大な創造の一つである。音楽は人類生物学及び優れた数学の両方に基づき、複雑な形式、シンタックス、色及びアーティキュレーションにより表現される。

音楽を学習、作曲、触れる及び演奏することは、最も基本的な人間活動の一つである。プロの音楽家により実施され、また世界のほぼ全ての人が享受する芸術の形式以外に、多くの研究において、音楽が子供の認知発達に大いに有利であることが示されている。

２０世紀における技術の発展により、現在、音楽に触れて楽しむことの障害になるものはほとんど無い。音楽はコンサートホール及びレコーディングスタジオで演じられ、そのパフォーマンスは極めて多様な形式とチャンネルにより記録、保存及び普及される。従って、合理的に触れることを通じて、どんな音楽でも、いつでも、どんな位置でも、誰に対してもほとんど利用可能である。

しかしながら、２０世紀におけるそのような技術の発展にもかかわらず、専門家と初心者の両方にとっては、また非常に年配の人及び、音楽に対する関心を既に持った年齢が２〜３歳の子供を含む非常に若い人にとっては、音楽を学習、作曲することを支援するための改善にはまだ多くの可能性がある。

音楽を学習、作曲するには三つの主な障害になるものがあると考える。

１．必要とされるスキル
音楽を学習する最も一般的な実施形式は特定の楽器を学習することである。例えば、親はしばしばピアノ教師を雇って、子供にピアノを教えるが、音楽家は楽譜を作成するためにピアノを弾く。素人レベルでピアノを上手に弾くようになるためには、長年にわたる様々な練習、親に強制されて子供に強いられる時間、金銭、考えようによっては子供の音楽に対する強い関心、についてはいうまでもない。従って、ピアニストになるために多大な練習及び犠牲を要する。

２.利用可能なツール
一つの楽器が得意であることは、旋律とリズムのすべでの範囲において、ミュージックピースを作曲する能力が容易に与えられることではない。例えば、ピアノが得意であることは、ドラム、トランペット又はバイオリンで容易に作曲することを可能にするわけではない。アップル社の人気のソフトウェアプログラムＧａｒａｇｅＢａｎｄは、ユーザに打楽器、管楽器及び弦楽器の要素により音楽を作成することを可能にさせるが、オリジナル音楽の構造に関連するＧａｒａｇｅＢａｎｄの機能性には改善の余地が依然多くある。

３．音楽の構文
音楽の構文は非常に複雑である。和音、全音階の和音、臨時記号、長音、短調及びこれらの多くのタイプ、バリエーション、同等、および転回などの用語は、プロの音楽家ではなく、且つ音楽理論の複雑さを学んだことがない、ほとんどの子供及び大部分の成人が理解を全く超えるものである。一方で、基本的な録音を正確に説明、解析、分析、更に改良もできないなど、音楽の構文における正確な言語がなくても、マイクロホンで歌う、又はいくつかのキーを電子ピアノに打つことにより、誰でも「音楽を作成する」ことができる。

従って、音楽を学習、作成することに必要とされるスキルを大きく減らすことができ、楽器の全ての範囲を容易に利用可能とし、また、音楽構文に精通しているということよりも、音楽に関する鑑賞力と想像力に基づいて高度な構造及び複雑な構文が作成されることができるシステムを作ることが必要であると考える。

本発明は音楽を学習、作曲、触れる及び演奏するためのシステム及び方法を開示するものである。
該システムは、
構造パターンを形成するための互いに隣接して又は互いの上に配置されるように構成される複数のオブジェクトであって、それぞれ識別子を有し、音楽関連のインディケータが割り当てられる複数のオブジェクトと、
インタラクティブサーフィスであって、それに配置されるオブジェクトの識別子と位置情報を識別するように構成されるインタラクティブサーフィスと、
インタラクティブサーフィスに作動的にリンクされるプロセッサと、
プロセッサに作動的にリンクされ、識別子と音楽関連のインディケータとの間の相関関係のデータベースを保存するように構成されるメモリと、
リアルタイムのフィードバックをユーザに提供するための音響又は視覚デバイスとを有する。

本発明の一実施例では、二つ又はそれ以上のオブジェクトがインタラクティブサーフィスに配置されると、構造パターンを形成し、また、プロセッサは構造パターンからミュージックピースを導出するように構成される。

本発明の一実施例では、音楽関連のインディケータは音楽シンボル、アラビア数字、色、アイコン、図、又は音楽構文のシンボルとして解釈することができるフィギュアから導出される。音楽シンボルは、次の内の一つとすることができる。ピッチと時間を有するシングル音符、音符がルートであるシングル和音、休止符と休止符の時間、音符のピッチを変更する臨時記号、音符の時間を変更する付点又はタイ、長音和音、短調和音、三和音又は七の和音、ミュージックピースを短音階又は長音階に定義する調号、同じピッチクラスにおける音符のピッチの上がり又は下がり、及び、ミュージックピースのテクスチュア、音色、ダイナミクス、アーティキュレーションを定義し、普通に使用される、及び特定の聴衆、感情と目的のためにその音楽を高めるためのカスタムデザインされるものを含むシンボル。

音楽関連のインディケータは、複数のプログラミング機能の中から選ばれるシンボルとすることができ、以下を含む。
インディケータを構造パターンの中に編成しプロセッサによりミュージックピースに翻訳されるスタート、エンド、連続、コンディション及びジャンプ；
音楽シンボルと共に使用される際に、各シンボルのバリエーションが表示され、選択されることを許容するトグル；
一つのオブジェクトの割り当てにより第一の構造パターンを表示することを可能にし、それによりオブジェクトを第二の構造パターンの中に組み込むことができるイコールとアサイン；
電子ファイルとしてミュージックピースを管理し、複数のミュージックピースからより大きいミュージックピースの合成を可能にするレコード、検索、セーブ、キャンセル、デリート、グループ、アングループ、コネクト、ディスコネクト、統合及び分離。

また、音楽関連のインディケータは打楽器、管楽器及び弦楽器を含む楽器を表示するシンボル、及び人間の声と自然からの音を表示するシンボルとすることもできる。

本発明の一実施例では、オブジェクトの識別子はオブジェクトのユニークな光学パターンにより定義される。

前記ユニークな光学パターンは音楽注釈のマーキング、言語学又は数学的注釈のマーキング、アイコン又は図形のマーキングとすることができ、又は人間の目に見える若しくは見えない２次元若しくは３次元形状、色及びテクスチャーのユニークパターンであってもよい。このような識別子は、オブジェクト上に予め作製される、又は永久若しくは消去可能なマーキングでユーザによりオブジェクト上にマークされる。

本発明の一実施例では、カメラが付帯される、又はプロセッサに作動的にリンクされることにより、ユニークな光学パターンが認識されて、プロセッサにその情報を伝えることができる。また、プロセッサは、メモリに保存される識別子と音楽関連のインディケータとの間の相関関係のデータベースにさらにアクセスし、加えてプロセッサが認識した各識別子のために、音楽関連のインディケータをマッチングさせる。プロセッサは複数のオブジェクトにより形成され、且つ構造パターンにおける各オブジェクトの識別子及び位置と関連する音楽関連のインディケータに基づく構造パターンから、ミュージックピースをさらに導き出す。

本発明の一実施例では、オブジェクトの識別子はオブジェクトに埋め込まれるユニークな識別コード（ＵＩＤ）により定義されることもできる。

前記ＵＩＤは無線周波数識別チップ、静電容量タブのユニークなパターン、又は磁気タブのユニークなパターンによりエンコードされることができる。

この実施例において、インタラクティブサーフィスは無線周波数アンテナ、静電容量センサースイッチのアレイ、又は磁気センサースイッチのアレイにより、オブジェクトのＵＩＤを認識し、プロセッサにその情報を伝える。プロセッサはさらに、メモリに保存される識別子と音楽関連のインディケータとの間の相関関係のデータベースにさらにアクセスし、加えてプロセッサが認識した各識別子のために、音楽関連のインディケータをマッチングさせる。プロセッサは複数のオブジェクトにより形成され、且つ構造パターンにおける各オブジェクトの識別子及び位置と関連する音楽関連のインディケータに基づく構造パターンから、ミュージックピースをさらに導き出す。

オブジェクトの識別子はオブジェクトに割り当てられる音楽関連のインディケータであってもよい。

本発明の一実施例では、オブジェクトは、人間の目並びにインタラクティブサーフィスのセンサー及びアンテナの両方にとって、明確に認識できる２次元若しくは３次元の構造パターンを形成するための互いに隣接して又は互いの上に配置されるボタン、カード、ブロック、フィギュア、又は他の２次元若しくは３次元ブロック構造とされる。

本発明の一実施例では、オブジェクトはインタラクティブサーフィスの上又はインタラクティブサーフィスに隣接する物理的なシートとすることもでき、物理的なシートには音楽関連のインディケータが印刷され、プロセッサによりミュージックピースに翻訳される構造パターンに組み込まれる。

本発明の一実施例では、電子スクリーンはインタラクティブサーフィスに作動的にリンクされることができ、音楽関連のインディケータはこのような電子スクリーンで表示され、プロセッサによりミュージックピースに翻訳される構造パターンに組み込まれる。

本発明の一実施例では、知覚的アクセサリはプロセッサに作動的にリンクされて、インタラクティブなフィードバックをユーザに提供する。

いくつかの実施例では、知覚的アクセサリは、プロセッサにより生成されるミュージックピースの音声を再生することができるオーディオ装置である。

いくつかの実施例では、知覚的アクセサリは、プロセサにより生成されるミュージックピースの注釈を示すビジュアル機器であり、ここで、このような注釈は、ＡＢＣＤＥＦＧ、譜表、記号、音符、和音、休止符、小休止、臨時記号及び拍子記号などの典型的な西洋音楽シンボル、又は、Ｄｏ、Ｒｅ、Ｍｉ、Ｆａ、Ｓｏｌ、Ｌａ、Ｔｉ(又はＳｉ)などの典型的なソルフェージュ音楽シンボル、又は、１、２、３、４、５、６、７などの簡単な数字の音楽シンボルにより書かれる。

本発明の実施例における目的、原理、概念、および利点、特に、本発明の実施例が、如何にして新たな及び貴重なユーザ体験を提供するかをより良く説明するために、様々な実施例が添付の図面に関連してさらに説明される。これらの図面は、本発明の典型的な実施態様として機能するものだけであり、本発明の範囲を制限しようとするものではない。

図１は、本発明の一実施例によるシステムプロセスフローを示す概略図である。

図２は、本発明の一実施例によるシステムの概略図である。

図３は、本発明の一実施例によるシステムの概略図である。

図４は、本発明の他の実施例による、音楽シートがインタラクティブサーフィスの上に配置されるインタラクティブサーフィスのクローズアップと、音楽シートの上に整然と配置されている様々な音楽関連のインディケータが印刷されたカードのグループを示す概略図である。

図５は、本発明の一実施例による、半音階にある七つの音符のための二組のデザインを示す概略図である。

図６は、本発明の一実施例による、半音階上の半ステップで音符のピッチを変えるために用いられる二つのカードのデザインを示す概略図である。

図７は、本発明の一実施例による、半音階上のオクターブで音符のピッチを変えるために用いられる二つのカードのデザインを示す概略図である。

図８は、本発明の一実施例による、音符のリズムと時間のインディケータであるカードに印刷されるシンボルのためのデザインを示す概略図である。

図9は、本発明の一実施例による楽器カードのためのデザインを示す概略図である。

図１０は、本発明の一実施例による半音階の根音に基づく和音カードのデザインを示す概略図である。

図１１は、本発明の一実施例による、音楽シートがインタラクティブサーフィスの上に配置されるインタラクティブサーフィスのクローズアップと、和音カードを用いた音楽シートの上に整然と配置されている様々な音楽関連のインディケータが印刷されたカードのグループを示す概略図である。

図１２は、本発明の一実施例による共通のルートを基にした和音バリエーションカードのためのデザインを示す概略図である。

本開示における種々の実施例を以下で詳しく説明する。また、特定のインプリメンテーションは説明されるが、これは例示の目的だけのために行われることが理解されたい。当業者は、この発明の精神と範囲から逸脱することなく、他の要素及び構成を使用することができることを認識するものである。

図１は、本発明の一実施例によるシステムプロセスフローを示す概略図である。

図１は本発明のコアシステム及び方法を示すものである。該システムは、プロセッサ１０３とメモリーユニット１０４により構成されるコンピュータシステム１０２に、作動的にリンクされるインタラクティブサーフィス１０１により構成される。インタラクティブサーフィス１０１は、インタラクティブサーフィス１０１のコンピュータシステム１０２に作動的にリンクされるセンサー又は探知デバイス１０５をさらに有する。センサー又は探知デバイス１０５は、インタラクティブサーフィス１０１の上又は近くに配置され、オブジェクト１０６の位置及びユニークなIDを検知するように構成される。図１に説明されるシステムはさらに、コンピュータシステム１０２に作動的にリンクされるオーディオスピーカー及び/またはライティングデバイスなどのユーザフィードバック装置１０７により構成される。

図２は、図１で説明されるシステムデザインを使用して、ミュージックピースを作成するプロセスを示す本発明の一実施例によるシステムの概略図である。図２に示される実施形態においては、作成されたメロディーは、１９５９年におけるロジャーズとハマースタインのミュージカル作品「ザ・サウンド・オブ・ミュージック」からのショーチューンからの有名な「エーデルワイスメロディー」の最初の八小節のものであることが分かる。

前記メロディーを作成するために、ミュージカル関連のインディケータにより印されるカード２０２は、インタラクティブサーフィス２０１に配置される。これらのカード２０２のいくつかは、七つの音符の簡素化した数値表現を使用する音符カード２０３である。他のカード２０４は音楽リズム関連のインディケータにより印されるが（この場合の“‐”は一拍ためのインディケータを表示する）、他のいくつかのカード２０５は、音符カード２０３上のピッチを変更するために使用されるピッチ変更カードである。

図２におけるインタラクティブサーフィス２０１の下側には、プレーボタン２０６、再生ボタン２０７及び一時停止ボタン２０８を含み、ユーザと対話する機能ボタンが配置される。

図２で説明される実施例を使用することによりメロディーを作成するためには、ユーザは音楽進行ライン２０９に沿い、インタラクティブサーフィス２０１の上に音符、リズム及びピッチ変更カード２０２を配置する（音符カード２０３上に置かれるピッチ変更カード２０５を除く）。カード２０２がインタラクティブサーフィス２０１の上に適切に配置されると、センサー又は探知デバイスは、カード２０２のＵＩＤと、インタラクティブサーフィス２０１のサーフィスと向かい合うその相対位置をピックアップして、この情報をコンピュータシステムに送信する。その後、前記情報はコンピュータシステムのメモリーユニットに保存される。ユーザが音楽進行ライン２０９に沿い、インタラクティブサーフィス２０１の上により多くのカード２０２を配置する場合には、コンピュータシステムは、音符、リズム及びピッチ変更カード２０２の附属文字列をそのメモリ内に保存して、リアルタイムでユーザが作成している音楽メロディーを導き出す。

最終的に、ユーザである彼／彼女が作成した音楽カード２０２のパターンに満足すると、そのユーザは、典型的には音響スピーカにより構成される前記フィードバック装置を通じて、コンピュータシステムにユーザに対してメロディーを再生させるために、プレーボタン２０６を押すことができる。

図２で説明される実施例は、音楽作成のための良い例であるが、本発明の実施例は、より完全な及び包括的な音楽作成装置を得るために、多数のアドオンを含むこともできる。

図３は、図２と比較して高機能化したシステムの実施形態の例を示すものであり、本発明の一実施例によるシステムの概略図である。インタラクティブサーフィス３０１は、プロセッサ３０６とメモリーユニット３０７の両方により構成されるコンピュータシステム３０８に操作可能にリンクされる。カメラ３０４（同じくコンピュータシステム３０８に作動的にリンクされる）は、カメラ３０４がインタラクティブサーフィス３０１の全域の概観を捉えるように、インタラクティブサーフィス３０１の側面に取り付けられる支柱３０３の頂部にセットされる。インタラクティブサーフィスの上に配置されるカード３０５などのオブジェクトは、カメラ３０４により直ちに検知され、また、これらのカード３０５上に印刷されるインディケータは、カメラ３０４を通じて、コンピュータシステム３０８に認識される。従って、インタラクティブサーフィス３０１に関連するオブジェクトの位置及びオリエンテーション、並びに識別子（即ち、インディケータ）のタイプはコンピュータシステム３０８により認識される。さらに、コンピュータシステム３０８は、オーディオフィードバックをユーザに提供するために、スピーカシステム３０９にも作動的にリンクされる。

図３で説明される実施例において、識別子は音楽関連のインディケータと同じであるが、これはインタラクティブサーフィスのコンピュータシステムにおいて、該カードのＵＩＤをワイヤレス通信するために、該システムがカードに埋め込んだＲＦＩＤチップを使用する実施例のケースとは異なる。そのような例では、カードの位置とオリエンテーションはインタラクティブサーフィスのサーフィス中に埋め込まれるセンサーセットにより決定される。

他のシステムの実施例は、インタラクティブサーフィス上に配置されるオブジェクトのＵＩＤ、位置、およびオリエンテーション情報を、正確に検知することができるようにデザインされたセンサーアレイを有するインタラクティブサーフィスを有する。

他のシステムの実施例には、インタラクティブのサーフィスとしての電子スクリーンがある。本実施例ではコスト及び、情報発信の容易性の両方について多くの便益をユーザに提供する。

インタラクティブサーフィスのための様々な技術とデザインが存在するが、簡潔にするために、本発明では、図３（即ち、カメラを使用して、カードの識別子／インディケータ、位置、およびオリエンテーション情報を検知する）に示されるシステムデザインを使用することにより説明される。

図４は、本発明の他の実施例による、音楽シートがインタラクティブサーフィスの上に配置されるインタラクティブサーフィスのクローズアップと、音楽シートの上に整然と配置されている様々な音楽関連のインディケータが印刷されたカードのグループを示す概略図である。

図３で説明されるシステムを使用して、図４はさらに音楽シート４０２がインタラクティブサーフィス４０１の上に配置されるインタラクティブサーフィス４０１のクローズアップと、整然と音楽シート４０２の上に配置されている様々な音楽関連のインディケータが印刷される一連のカード４０３を示すものである。この特定の実施例においては、ミュージックピースは七つの音符（即ち、英字Ｃ、Ｄ、Ｅ、Ｆ、Ｇ、Ａ又はＢがそれらの上で印刷されるカード）及び他の音楽関連カードの使用により作り出されるものである。

図４に示される実施例は、簡単なメロディーを作成するために、ユーザが如何にして音楽制作エリア４１５で一連のカード４０３を配置するかを示すものである。ユーザが音楽シート４０２の上にカードを配置すると、彼らは彼らのメロディーを演奏する（プレーボタン４０４を押すことを通じる）、再生する（再生ボタン４０５を押すことを通じる）又は一時停止する（一時停止ボタン４０６を押すことを通じる）ことを進めることができる。

本発明のカード４０３は、各々がそのサーフィス上に印刷される異なる音楽関連のインディケータを有する。これらのインディケータは、種々の形式とパターンを有し、且つ異なる機能を果たすことができる。前記カードは以下のカテゴリに属するものとして説明されることが最善であり、そのカテゴリは音符、ピッチ変更、リズム、メロディー、楽器及び和音である。

１．音符カード
これらのカード４０３は、あらゆるミュージックピースのコア要素である。それらは破線４０７に沿って、図４に示される音楽シート４０２の上に配置される。

図５は、本発明の一実施例による半音階にある七つの音符のための二組のデザインを示す概略図である。

本実施例は音符カードの二つの異なるデザインを有し、そのデザインは五線譜及び文字注釈である。これらの二組のデザインは図５に示され、各組のカードが半音階にある同じ七つの音符を代表している。

図５に示されるように、左側の上部と下部二枚のカード５０１、５０２は二つのスタイルの表現で同じ音符及び中央ハを示す。上部左側のカード５０１はピッチ位置がある五線譜を使用する中央ハ音符を示し、下部左側のカード５０２はピッチ名のＣを使う同じ中央ハ音符を示す。また、図３で説明されるカメラ３０４とコンピュータシステム３０８が、これらのカードのために、これらのインディケータを識別子として認識するようにカスタムされる場合には、両方のデザインが許容されることに注意すべきである。

面白いこととしては、もしユーザが、音符カードのためにデザインされる破線４０７内に、音楽シート４０２（それ自体がインタラクティブサーフィス４０１の上に配置される）の上に、図５に示されるものと同じ順番で七つのカード（いずれかのデザインを使用する）を配置して、プレーボタン４０４を押すと、コンピュータシステムはソルフェージュＤｏ、Ｒｅ、Ｍｉ、Ｆａ、Ｓｏｌ、Ｌａ、Ｓｉのメロディーを相次いで演奏する。

２．ピッチ変更カード
これらのカード４０８、４０９は、個々の音符カード４０３のピッチを変えるために用いられる。本発明の本実施例では、これらの特定のカード４０８、４０９が個々の音符カード４０３の上に、又は重ねて配置されることを想定する。前記操作はカメラ３０４とコンピュータシステム３０８により瞬時に認識され、それに対応して、メロディーのピッチが変更されることになる。

図６は、本発明の一実施例による半音階‐臨時記号上の半ステップで音符のピッチを変えるために用いられる二つのカードのデザインを示す概略図である。

本実施例はピッチ変更カードの二つの異なるタイプを有し、前記二つのタイプは半音階上の半ステップで音符のピッチを変えるカード、及びオクターブで音符のピッチを変えるカードである。

図６における第一のカード６０１上のシンボルは、半ステップで音楽のピッチを上げるために用いられるシャープ臨時記号のためのデザインを示す概略図である。図４における第二のカード６０２上のシンボルは、半ステップでピッチを下げるために用いられるフラット臨時記号に使用されるデザインである。

図７は、本発明の一実施例による半音階上のオクターブで音符のピッチを変えるために用いられる二つのカードのデザインを示す概略図である。

図７に示されるように、第一のカード７０１上のシンボルは、オクターブで音符を高く上げるためのデザインを示す例示的な概略図であり、第二のカード７０２上のシンボルは、オクターブで音符を下げるために用いられるデザインである。

図４に戻って参照すると、本実施例において如何にして、図６と図７に示されるピッチ変更カードを使い、音符カード４０３のピッチを変えるかが理解される。インディケータがフラット臨時記号のためのシンボルとして図６に示されたこれらのカード４０８は、三つの音符カード４０３の上に配置されている。また、シンボルがオクターブで音符をより高く上げるシンボルとして、図７に示されたカード４０９は、他の音符カード４０３の上に配置されている。

実際には、音符カード４０３上のこれらのピッチ変更カード４０８、４０９を重ねると、カメラ３０４を通じて、コンピュータシステム３０８に読出されるピッチ変更カードのインディケータにより、対象となる音符のピッチが変更される。コンピュータシステム３０８は、次回ユーザがまたプレーボタン４０４又は再生ボタン４０５を押す際に、スピーカ３０９に対して、変更されたメロディーを演奏させるように命令する。

３．リズムカード
図４に示されるように、これらのカード４１０は音符４０３のリズムと時間のインディケータとして使用されるものである。本発明の本実施例では、これらの特定のカード４１０が、空行４１１を含むスペースにある個々の音符カード４０３の上に直接配置されることが想定される。破線４０７の各ボックスを埋める必要がない音符カード４０３と異なり、リズムカード４１０には、音符カードの破線４０７の上に位置する空行４１１の各ボックスを埋める必要があることは重要であることを、ここで指摘する。さらに、リズムを表示する空行４１１のボックスは、音符破線４０７上のボックスの反転でなければならない。従って、図４に示されるように、メロディーのリズムを作成するために、リズムカードは空行４１１の上に並べられる。

さらに、音楽カード４０３とピッチ変更カード４０８と同様に、インスタントのリズムカード４１０はリズム空行４１１の上に配置され、コンピュータシステム３０８は、カメラ３０４を通じて、リズムカード４１０の上に印刷されるシンボルを認識して、その情報を処理することを続行する。

本実施例はリズムカード４１０のための多くの異なるインディケータを有し、それぞれが異なる機能を有する。

図８は、本発明の一実施例による音符のリズムと時間のインディケータであるカードに印刷されるシンボルのためのデザインを示す概略図である。当業者は、図８に示されるインディケータが音符のリズムと時間を表示する国際規格（アジア諸国で広く使用される）であることが分かるものである。従って、本出願人はメロディーにおけるこれらの様々なシンボルの効果をさらに説明することはしない。

４．メロディーカード
４．１ メロディーカードへのメロディーの割り当て
ユーザは音符カード４０３、（それ自体がインタラクティブサーフィス４０１の上に配置される）ピッチ変更カード４０８及びリズムカード４１０を音楽シート４０２の上に配置し、彼／彼女が製作したメロディーセグメントに満足すると、メロディーカード４１２を使用することにより、このセグメントを保存するかを選択することができる。

図４に示されるように、これらのメロディーカード４１２は、音楽シート４０２の下部ラインに配置される。ユーザが図４に示される実施例で彼らが作成したメロディーセグメントを保存すると想定した際に、ユーザに必要とされる全てのものは、音楽シート４０２の右下部に示される正方形エリア４１３に、メロディーカード４１２を配置することである。この正方形エリア４１３に隣接するものは、シンボルが「＞」４１４のボタンであり、ここで、ユーザはボードの上で作成されたメロディーで（音符、ピッチ変更、リズムカードを使用してなるもの）、メロディーカード４１２を割り当てて正方形エリア４１３に配置する。そして、図４に示されるように、様々な音楽インディケータカードを「メロディー作成エリア」４１５（太線の正方形中のエリアに示される）の中に並べておき、その後、ユーザが６番と番号付けられたメロディーカード４１２にこのメロディーを割り当てる。

４．２複数のメロディーを一つのメロディーカードに割り当てる
上述したものと同じアプローチで、複数のメロディーを複数のメロディーカード４１２に一度割り当てることで、続いてこれらの複数のメロディーを一つのメロディーカードに割り当てることができる。

このためには、ユーザがする必要がある全てのものは、音楽シート４０２の最も低い位置の破線で示される「メロディー作成エリア」４１６の中に複数のメロディーカード４１２（それぞれにメロディーが既に割り当てられている）を順次に配置することである。次に、ユーザは、新しいメロディーカード４１２を破線４１６の右側における正方形エリア４１３の上に配置し、次に、それに隣接する「=」ボタン４１７を押すことで進める。これにより、破線４１６に配置されたメロディーカードの配列は、新しいメロディーカードに割り当てられ、完全なミュージックピースの主なテーマが作成される。

５．楽器カード
これらのカード４１８は、楽器がメロディー生成エリア４１５で作成されたメロディーを演奏するために使用されるべきであることを、コンピュータシステム３０８に対して指示を出すために用いられる。図４に参照されるように、三つの楽器カード４１８は、音楽シート４０２の最左下部にある指定された楽器割当エリア４１９に配置される。本発明の本実施例においては、四つの楽器カード４１８だけが同時に使用されて特定のメロディーを演奏することができ、また、図４に示される実施例では、ピアノ、トランペット及びギターのための楽器カード４１８が選択されている。これは、ユーザがプレーボタン４０４又は再生ボタン４０５を押した際に、メロディー作成エリア４１５で作成されたメロディーが、同時にピアノ、トランペット、及びギターの音質を使用することにより演奏されることを意味する。

図９は、本発明の一実施例による楽器カードのためのデザインを示す概略図である。

６．テンポボタン
ユーザがメロディー作成エリアで生成されたメロディーのテンポ（即ち、１分あたりの拍子数）を変更するために、ユーザは単に音楽シート４０２の右下部に位置するテンポアップ４２０又はテンポダウン４２３ボタンを押す。これらのキーとの相互作用により、メロディー作成エリア４１５で作成されたメロディーのテンポが速められる又は遅くされる。

７．キーボタン
ユーザがメロディー作成エリアで生成されたメロディーの音楽調性を変更するために、ユーザは単に音楽シート４０２の右下部に位置するキーアップ４２１又はキーダウン４２２ボタンを押す必要がある。これらのキーとの相互作用により、メロディー作成エリア４１５で作成されたメロディーの半音階の位置を上げる又は下げる。

８．和音カード
本発明の本実施例においては、和音カードを使用することにより、和音を音楽シート４０２と共に使用することも可能になる。

図１０は、本発明の一実施例による半音階の根音に基づく和音カードのデザインを示す概略図である。

図１０に示されるように、和音カードのデザインは半音階の根音に基づくものであることが分かる。これらのカードは、音符カードが図４で使用されると同じ方法で使用される。

図１１は、本発明の一実施例による、音楽シートがインタラクティブサーフィスの上に配置されるインタラクティブサーフィスのクローズアップと、和音カードを用いた音楽シートの上に整然と配置されている様々な音楽関連のインディケータが印刷されたカードのグループを示す概略図である。

図１１に示されるように、半音階の根音に基づく和音カード１１０１は、更に複雑なメロディー構造を作成するために、如何にしてメロディー作成エリアに配置されるかが分かる。

図１２は、本発明の一実施例による共通のルートを基にした和音バリエーションカードのためのデザインを示す概略図である。

図１２に示されるように、和音バリエーションカードの上で使用されるシンボルは、国際規格（例えば、ｍ‐短三和音；ａｕｇ‐増三和音；ｄｉｍ‐減三和音など）のものであり、本文献の範囲内で更に説明されるものではない。

図１１に示されるように、和音バリエーションカード１１０２はピッチ変更カード４０８が図４で使用されるとほぼ同じ方法で使用される。即ち、ユーザが特定の三和音を形成するために、和音カード１１０１の上でそれらを重ねることである。例えば、Ｇ長音の長三和音である和音カードＣ１１０３を考えると、ユーザは和音バリエーションカードｍ６１１０４を該和音カード１１０３の上に重ねるということである。その結果、Ｇ長三和音は現在Ｇ長音の六番目三和音に変換される。

９．テクスチャー変更
最後に、メロディーのテクスチャーは、指定エリア１１０６内に楽器カード１１０５を配置し、メロディー作成エリアの左側に位置する六つの楽器スタイルオプションボタン１１０７の一つを選択することにより変更されることができる。例えば、図１１に示されるように、ピアノ楽器カード１１０５は指定エリアに配置されている。このように、ユーザは、オプションボタン１１０７のいずれかを押すことにより、異なるピアノスタイルを選択することに進行することができる。例えば、オプションボタン１１０７のラベル１はグランドピアノを演奏するが、オプションボタン１１０７のラベル２は電子ピアノを演奏する、また、オプションボタン１１０７はオルガンを演奏する。

さらに、楽器カード１１０５が指定エリア１１０６に一つも配置されない場合には、ユーザは、オプションボタン１１０７のいずれかを押すことにより、六つの和音スタイル（例えば、アルペジオ、オクターブのローリングなど）のいずれかをまた選択することができる。

Claims (28)

1. 構造パターンを形成するための互いに隣接して又は互いの上に配置されるように構成される複数のオブジェクトであって、それぞれ識別子を有し、音楽関連のインディケータが割り当てられる複数のオブジェクトと、
   インタラクティブサーフィスであって、その上又は近くに配置されるオブジェクトの識別子と位置情報を識別するように構成されるインタラクティブサーフィスと、
   インタラクティブサーフィスに作動的にリンクされるプロセッサと、
   プロセッサに作動的にリンクされ、識別子と音楽関連のインディケータとの間の相関関係のデータベースを保存するように構成されるメモリと、
   を有し、
   構造パターンを形成するために複数のオブジェクトがインタラクティブサーフィスの上又は近くに配置されると、プロセッサは前記構造パターンからミュージックピースを導出するように構成される、
   ことを特徴とする物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
2. 第一のオブジェクトにおける音楽関連のインディケータは音楽シンボルを有し、
   前記プロセッサは前記第一のオブジェクトの音楽シンボル及び位置情報により、ミュージックピースを導出するように構成される、
   ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
3. 第二のオブジェクトにおける音楽関連のインディケータはプログラミングシンボルを有し、
   前記第一のオブジェクト及び前記第二のオブジェクトが前記インタラクティブサーフィスの上又は近くに配置されると、
   前記プロセッサは前記第二のオブジェクトのプログラミングシンボルにより、前記第一のオブジェクトの音楽シンボルをプログラムするように構成される、
   ことを特徴とする請求項２記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
4. 第三のオブジェクトにおける音楽関連のインディケータは楽器シンボルを有し、
   前記第一のオブジェクト及び前記第三のオブジェクトが前記インタラクティブサーフィスの上又は近くに配置されると、
   前記プロセッサは前記第一のオブジェクトの音楽シンボル、及び前記第三のオブジェクトの楽器シンボルにより、ミュージックピースを導出するように構成される、
   ことを特徴とする請求項２記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
5. 前記オブジェクトの識別子はユニークなＵＩＤ（識別コード）を有し、前記ＵＩＤは無線周波数識別チップ、静電容量タブのパターン、又は磁気タブのパターンから成るグループから選択されるデバイスによりエンコードされる、
   ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
6. 前記オブジェクトの識別子はユニークな光学パターンに相関し、
   前記インタラクティブサーフィスは、前記インタラクティブサーフィスに作動的にリンクされるカメラ又はセンサーアレイを通じて、前記ユニークな光学パターンを認識するように構成される、
   ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
7. 前記ユニークな光学パターンがオブジェクトの上に予め作製される、
   ことを特徴とする請求項６記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
8. 前記ユニークな光学パターンはユーザによるオブジェクト上のマーキングである、
   ことを特徴とする請求項６記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
9. 前記オブジェクトの識別子は前記オブジェクトに割り当てられる音楽関連のインディケータである、
   ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
10. 前記オブジェクトは、前記インタラクティブサーフィスの上に配置される物理的なシートを有する、
    ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
11. 前記オブジェクトは前記インタラクティブサーフィスに作動的にリンクされ、音楽関連のインディケータを表示するように構成される電子スクリーンをさらに有する、
    ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
12. 前記プロセッサに作動的にリンクされる知覚的アクセサリをさらに有する、
    ことを特徴とする請求項１記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
13. 前記知覚的アクセサリはオーディオ装置を有し、前記プロセッサはオーディオ装置上のミュージックピースを再生するように構成される、
    ことを特徴とする請求項１２記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
14. 前記知覚的アクセサリは表示装置を有し、前記プロセッサは表示装置上のミュージックピースの注釈を表示するように構成される、
    ことを特徴とする請求項１２記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム。
15. それぞれ識別子を有し、音楽関連のインディケータが割り当てられる複数のオプジェクトを、構造パターンを形成するためにインタラクティブサーフィスの上に互いに隣接して又は互いの上に配置する；
    オブジェクトの識別子と位置情報を識別する；
    オブジェクトの識別子から音楽関連のインディケータを導出する；
    構造パターンからミュージックピースを導出する；
    ことを特徴とする物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
16. 前記第一のオブジェクトにおける音楽関連のインディケータは音楽シンボルを有し、
    前記第一のオブジェクトの音楽シンボル及び位置情報により、ミュージックピースを導出することをさらに有する、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
17. 前記第二のオブジェクトにおける音楽関連のインディケータはプログラミングシンボルを有し、
    前記第一のオブジェクト及び前記第二のオブジェクトが前記インタラクティブサーフィスの上又は近くに配置されると、前記第二のオブジェクトのプログラミングシンボルにより、前記第一のオブジェクトの音楽シンボルをプログラムする、
    ことをさらに有する、
    ことを特徴とする請求項１６記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
18. 前記第三のオブジェクトにおける音楽関連のインディケータは楽器シンボルを有し、
    前記第一のオブジェクト及び前記第三のオブジェクトが前記インタラクティブサーフィスの上又は近くに配置されると、前記第一のオブジェクトの音楽シンボル、及び前記第三のオブジェクトの楽器シンボルにより、ミュージックピースを導出する、
    ことをさらに有する、
    ことを特徴とする請求項１６記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
19. 前記オブジェクトの識別子はユニークなＵＩＤ（識別コード）を有し、前記ＵＩＤは無線周波数識別チップ、静電容量タブのパターン、又は磁気タブのパターンから成るグループから選択されるデバイスによりエンコードされる、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
20. 前記オブジェクトの識別子はユニークな光学パターンに相関し、
    前記インタラクティブサーフィスに作動的にリンクされるカメラ又はセンサーアレイを通じて、前記ユニークな光学パターンを認識する、
    ことをさらに有する、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
21. 前記オブジェクトの上で前記ユニークな光学パターンを予め作製することをさらに有する、
    ことを特徴とする請求項２０記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
22. 前記ユニークな光学パターンを形成するために、オブジェクトをマーキングすることをさらに有する、
    ことを特徴とする請求項２０記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
23. 前記オブジェクトの識別子は前記オブジェクトに割り当てられる音楽関連のインディケータである、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
24. 前記オブジェクトは物理的なシートを有し、前記物理的なシートを前記インタラクティブサーフィスの上に配置することをさらに有する、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
25. 前記インタラクティブサーフィスに作動的にリンクされ、音楽関連のシンボルを表示する電子スクリーンをさらに有する、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
26. 前記ミュージックピースを前記知覚的アクセサリに送信することをさらに有する、
    ことを特徴とする請求項１５記載の物理的オブジェクトにより音楽の学習,作曲及び演奏するための方法。
27. 前記知覚的アクセサリはオーディオ装置を有し、前記オーディオ装置上のミュージックピースを再生することをさらに有する、
    ことを特徴とする請求項２６記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。
28. 前記知覚的アクセサリは表示装置を有し、また、前記表示装置上のミュージックピースの注釈を表示することをさらに有する、
    ことを特徴とする請求項２６記載の物理的オブジェクトにより音楽の学習、作曲及び演奏するための方法。

Images