JP2013152482A - 出力を生成するシステムおよび方法 - Google Patents

出力を生成するシステムおよび方法 Download PDF

Info

Publication number
JP2013152482A
JP2013152482A JP2013056783A JP2013056783A JP2013152482A JP 2013152482 A JP2013152482 A JP 2013152482A JP 2013056783 A JP2013056783 A JP 2013056783A JP 2013056783 A JP2013056783 A JP 2013056783A JP 2013152482 A JP2013152482 A JP 2013152482A
Authority
JP
Japan
Prior art keywords
sensor
output
signal
operating
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013056783A
Other languages
English (en)
Inventor
James Neil Helmer Richard
ジェイムズ ニール ヘルマー,リチャード
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Commonwealth Scientific and Industrial Research Organization CSIRO
Original Assignee
Commonwealth Scientific and Industrial Research Organization CSIRO
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from AU2006903501A external-priority patent/AU2006903501A0/en
Application filed by Commonwealth Scientific and Industrial Research Organization CSIRO filed Critical Commonwealth Scientific and Industrial Research Organization CSIRO
Publication of JP2013152482A publication Critical patent/JP2013152482A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/32Constructional details
    • G10H1/34Switch arrangements, e.g. keyboards or mechanical switches specially adapted for electrophonic musical instruments
    • G10H1/342Switch arrangements, e.g. keyboards or mechanical switches specially adapted for electrophonic musical instruments for guitar-like instruments with or without strings and with a neck on which switches or string-fret contacts are used to detect the notes being played
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/32Constructional details
    • G10H1/34Switch arrangements, e.g. keyboards or mechanical switches specially adapted for electrophonic musical instruments
    • G10H1/344Structural association with individual keys
    • G10H1/348Switches actuated by parts of the body other than fingers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/321Garment sensors, i.e. musical control means with trigger surfaces or joint angle sensors, worn as a garment by the player, e.g. bracelet, intelligent clothing
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2230/00General physical, ergonomic or hardware implementation of electrophonic musical tools or instruments, e.g. shape or architecture
    • G10H2230/045Special instrument [spint], i.e. mimicking the ergonomy, shape, sound or other characteristic of a specific acoustic musical instrument category
    • G10H2230/075Spint stringed, i.e. mimicking stringed instrument features, electrophonic aspects of acoustic stringed musical instruments without keyboard; MIDI-like control therefor
    • G10H2230/135Spint guitar, i.e. guitar-like instruments in which the sound is not generated by vibrating strings, e.g. guitar-shaped game interfaces
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2230/00General physical, ergonomic or hardware implementation of electrophonic musical tools or instruments, e.g. shape or architecture
    • G10H2230/045Special instrument [spint], i.e. mimicking the ergonomy, shape, sound or other characteristic of a specific acoustic musical instrument category
    • G10H2230/075Spint stringed, i.e. mimicking stringed instrument features, electrophonic aspects of acoustic stringed musical instruments without keyboard; MIDI-like control therefor
    • G10H2230/135Spint guitar, i.e. guitar-like instruments in which the sound is not generated by vibrating strings, e.g. guitar-shaped game interfaces
    • G10H2230/141Spint guitar drum, i.e. mimicking a guitar used at least partly as a percussion instrument

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

【課題】個人の演奏者の生体力学的位置または身振りによって決定されるセンサの動作位置に基づいて出力を生成するシステムと方法を提供する。
【解決手段】システムは1つ以上のセンサ21が着脱可能に取り付けられた衣服と、衣服を着た人の生体力学的位置、動き、動作または身振りに基づく信号を提供するセンサ21とを含み、送信機22がセンサ21からの信号を受け取ってコンピュータ24へ送信し、コンピュータ24は割り当てられ選択された出力である特定の位置を表わすものとして信号を認識するように校正される。適切には、出力はギターのような楽器の可聴出力であり、出力は、演奏者の生体力学的動き、動作、身振りまたは位置が実際の楽器が演奏されるときのものと似ているときに演奏されるギターの音をシミュレートする。
【選択図】図1

Description

本発明は、センサの位置に基づいて出力を生成するシステムおよび方法に関する。センサの位置は多くの変数に関連するが、好適には人間の運動または身振りに基づくものである。
本発明の1つの実施形態によれば、出力は好適には、音楽を演奏する人間の身振りに基づいて再生可能な音の形態である。
人間の運動および身振りに基づいて音を再生する電子楽器の一例は、現在フィンランドのユーレカ科学センター(Heureka Science Centre)で取り上げられている「仮想エアギター」システムである。仮想エアギターシステムは視覚認識技術を利用して、特殊な手袋を着用したユーザの手の運動および身振りをウェブカメラで観察し、身振り認識ソフトウェアで分析する。このソフトウェアは、ユーザ両手の相対的な空間位置を監視して、右手が仮想ギターの胴の上に配置され、左手が仮想ギターのフレットに配置されていると想定する。上向きおよび下向き方向の右手の運動はギターのストラミングをシミュレートするものと解釈され、右手に近づいたり離れたりする左手の運動はギターのフレットアームに沿った左手の運動をシミュレートするものと解釈される。
本システムは、ユーザが、このモデルの数学的制約内で、音を発生する実際のギターを演奏しているかのように身振りまたは行為を行うことを可能にする。しかし、光学モデルは、単一のカメラ信号源に起因する固有の複雑さを有しており、例えば、誰かの頭の背後になる場合、または何らかの他の物体がウェブカメラの視界から演奏者の手を遮る場合には、仮想エアギターを演奏することは非常に困難であろう。さらに、本出願人の見解では、他の楽器に付随するように確実に再現または再生可能な音楽の演奏において、システムが発生した音を有効に利用することは困難であろう。
本発明のシステム
本発明によれば、
各センサが2つ以上の動作位置で動作する、1つ以上のセンサと、
出力を発生する電子装置であって、該電子装置が動作位置に基づいて該または各センサから信号を受信し、該電子装置が、一旦校正されると、動作位置の間で該または各センサを動作させることによって一連の出力が発生できるような形で、該または各センサの選択された動作位置およびひいては電子装置が受信する信号が特定の出力に関連するように校正される電子装置とを含むシステムが提供される。
本明細書を通じて、出力を発生する電子装置の概念は、出力を送信、出力を再生または格納される出力を生成する電子装置を包含する。
システムは、出力が可聴出力である音楽システムの形態であることが好適である。例えば、可聴出力は、音楽または音楽の他の断片の任意の音、単一の音符、またはコード、リフ、小節として一緒に演奏される音符のグループでもよい。いかなる場合でも、可聴出力は事前録音または格納された音のサンプルであることが好適である。また、出力は、弦楽器、打楽器、金管楽器、木管楽器、歌唱または任意の合成音声を含む任意の楽器の音を再生するものでもよい。
また、可聴出力は、単一の楽器または一緒に演奏される楽器のグループによって生成される任意のノイズまたは音でもよい。
本発明の電子装置は事前録音または格納した可聴出力を有してもよいが、電子装置は希望に応じて追加の出力を受信する能力を有することが好適である。例えば、追加の出力はインターネットからダウンロードしてもよく、またディスク、CD、DVD等を含む光学コンピュータ可読媒体上で供給してもよい。
また、電子装置はセンサの動作位置に基づく出力と同時に付随する出力を発生または再生できることが好適である。例えば、電子装置は、本発明のシステムを使用して提供できる1つ以上の楽器の音声が欠如している事前録音された音楽トラックを自動的に再生してもよい。別言すれば、システムを使用して、聴取される音楽全体の一部分に固有の解釈を提供する演奏者を伴う完全な音楽の音声を提供することができる。
センサの動作位置は、指、手首、肘、肩、首、背中、腰、膝またはくるぶしの関節といった、演奏者の1つ以上の身体関節の相対角度方向の関数であることが好適である。上記で言及した身体関節の角度方向は、柔軟性、形状、寸法、個人の体重および身長を含むいくつかの要因に依存することが認識されるだろう。本発明のシステムの利点は、一旦個人が特定の生体力学的運動に合わせてシステムを校正すれば、その個人は固有の生体力学的運動を繰り返すことを通じて音を発生することを速やかに学習し、実際に、反復可能でありまたさらには本明細書で開示した楽器の多数の装置を含む他の楽器と一緒に演奏することさえ可能な音楽を演奏することができる。
システムは、人間が着用する衣服または衣類を含み、センサは衣服に固定されるかまたは組み込まれることが好適である。
センサは任意のダイヤル、キーまたは制御つまみであってもよいが、センサは、センサの様々な動作位置に応じた可変電気抵抗を提供する電気抵抗器であることが好適である。
抵抗器は、少なくとも部分的に電子装置が受信する信号の原因となる可変電気抵抗を提供することが好適である。
システムが衣服を含み、衣服に固定されたセンサが可変抵抗器の形態である状況では、可変抵抗器は、国際出願PCT/AU2006/001521(WO07/041806)の優先権書類である、「運動を検出するためのシステム」という名称の2005年10月13日付の本出願人の先行するオーストラリア国仮出願第2005905666号に記載の機構の形態であることが好適である。この仮出願および国際出願の特許明細書は直接の参照によって本明細書の記載に組み込まれる。
電子装置は、センサからの信号の値の範囲がある特定の出力に関連するように校正することが好適である。別言すれば、電子装置は好適には、センサからの信号の値の範囲を1つ以上の動作位置に関連付ける。センサからの信号およびひいては動作位置が身体関節の相対角度方向の関数である状況では、動作位置に対して選択された信号の値の範囲は、身体関節が取る方向の角度範囲に基づいているかまたはそれから導出されることが好適である。
選択された動作位置に関連するセンサからの信号の値の範囲は調整可能であることが好適である。別言すれば、各動作位置に関連する信号の範囲は、別の人間がシステムを使用する機会がある毎に校正し直すことができる。
電子装置は、各個人に対してシステムを校正し操作する設定を格納することが好適である。別言すれば、一旦演奏者が特定の生体力学的運動および望ましい出力に合わせてシステムを校正すれば、その次の演奏者がシステムを使用した後で自分用の校正を再現することができる。その上、電子装置は2人以上の演奏者が操作するセンサの信号を受信し、各演奏者からの信号に基づいて信号を発生することができる。それらの信号および、好適には多数の演奏者の生体力学的運動に基づく出力は、連続的、並行的または同時的に発生または再生してもよい。
システムは、各々2つ以上の動作位置を有する2つ以上のセンサを含むことが好適である。
システムが、各々多数の動作位置を有する2つ以上のセンサを含む時、2つのセンサを対にして、1つのセンサの動作位置の少なくとも1つが、他のセンサの動作位置の数以下の数の出力に関連するようにすることが好適である。第1のセンサが2つ以上の動作位置を有し第2のセンサが2つ以上の動作位置を有する状況では、使用する際、電子装置が、i)第2のセンサの動作位置によって識別されるかまたはii)第2のセンサの動作位置に関連する出力に一致するかの何れかである第1のセンサの動作位置に関連する特定の出力の1つを発生または再生するように、第1のセンサの少なくとも1つの動作位置は2つ以上の動作位置に関連し、第2のセンサの少なくとも1つの動作位置は第1のセンサの各動作位置に関連する2つの出力のうち1つを識別またはそれに一致する。別言すれば、可能な出力の合計数は、校正した動作位置の数の積である。例えば、各々2つの動作位置について校正した2つのセンサがあるシステムでは合計4つの出力が可能である。同様に、システムが2つのセンサを含み、一方が3つの動作位置について校正されもう一方が2つの動作位置について校正されている場合、合計6つの出力が可能である。
好適には、1つのセンサの各動作位置に関連する出力の数は他のセンサの動作位置の数に等しい。
システムは、演奏者の肘の角度位置を監視するための2つのセンサを含むことがさらに好適である。
肘および、実際には、他の身体関節の角度方向は約45〜180度の範囲内でよいが、最終的には関与する身体関節および個人の柔軟性に依存する。センサが肘の角度方向を監視する状況では、信号の値およびひいては動作位置の範囲は5〜45度にわたる角度方向を有することが好適である。角度方向の範囲とは、演奏者の肘を完全に曲げた時と完全に伸ばした時との間の任意の位置の範囲である。
各動作位置は5〜20度の範囲の角度にわたって画定されることがさらに好適である。
システムは、センサ(単数または複数)がどの動作位置に配置されているかを演奏者に伝達するフィードバック手段を含むことが好適である。
フィードバック手段は演奏者と視覚的に通信するための手段を含むことが好適である。視覚手段は一連の光、対話または画像を含む任意の形態のものでよいが、システムは、動作位置と、センサが他の動作位置に対してどの動作位置に配置されているかとに関する情報を演奏者に表示するためのモニタを含むことが好適である。フィードバック手段はこの情報を、システムの校正および/またはシステムの通常の使用の際に提供してよい。
視覚手段は出力される音声に対応する楽器またはその一部の画像を含み、センサの各動作位置は楽器を演奏する演奏者の身体の一部の動作位置をシミュレートすることが好適である。例えば、出力がギターのサンプル音である時には、フィードバック手段は、ギターのフレットボード上の演奏者の手の位置をシミュレートする視覚情報を提供することが好適である。別の例では、システムの出力はピアノの音であってもよく、この状況では、フィードバック手段は鍵盤の鍵をシミュレートする視覚情報を提供する。
また、フィードバック手段は、どの特定の出力が選択された動作位置に関連しているかを識別する情報を演奏者に伝達することも好適である。これは各動作位置に関連する様々な出力を発生または再生するシステムによって聴覚的に達成してもよいが、各動作位置に関連する出力の情報を視覚手段が表示することも可能である。例えば、視覚手段は各動作位置に関連するリフ、コード、キー、音符、または音を識別することも好適である。
動作位置に配置されたセンサと動作位置に関連する特定の出力を発生または再生する電子装置との間の遅延の期間を最小化することが好適である。これによって、システムの演奏者は少なくとも、電子装置の出力が実質上自然発生的またはセンサが動作位置に配置された直後に発生しているという知覚を確実に得ることができるようになる。
遅延期間は50ミリ秒以下、好適には20ミリ秒以下であることが好適である。
遅延期間は10ミリ秒以下であることが好適である。
電子装置は、
● 好適にはシステムを校正した際の動作位置に対するセンサの信号の値の範囲である動作位置と、
● 好適には可聴出力である出力と、
● 選択された動作位置への個々の出力の割り当てと、
の何れかまたはそれらの組み合わせに関するデータを格納するためのメモリを有することが好適である。
電子装置は、
● センサからの信号を分析するアルゴリズムの実行と、
● 信号が個々の動作位置を識別する信号の値の範囲以内にあるか否かを評価するアルゴリズムの実行と、
● センサの信号の値が変化する速度を計算し、好適には信号の変化率に基づいて可聴出力を再生する音量を決定するアルゴリズムの実行と、
の何れかまたはそれらの組み合わせに関するデータを処理するためのデータ処理ユニットを有する。
本発明によれば、
2つ以上の動作位置で人間が操作するセンサと、
出力を発生する電子装置であって、該電子装置が、センサの動作位置に基づいてセンサから信号を受信し、一旦校正されると、センサをそれぞれの動作位置に配置することによって望ましい一連の出力を発生できるような形で、センサの選択された動作位置およびひいては電子装置が受信する信号が特定の出力に関連するように校正される電子装置とを含むシステムが提供される。
本発明の実施形態によれば、個人の演奏者の生体力学的位置または身振りによって決定されるセンサの動作位置に基づいて出力を生成するシステムが提供される。システムは、1つ以上のセンサが着脱式に取り付けられ、センサが衣服を着用した人間の生体力学的位置、行為、動き、運動または身振りに基づく信号を提供する衣服と、センサから信号を受信して、選択された出力を割り当てられた個々の位置を表すものとして信号を認識するように校正されたコンピュータに信号を送信する送信機とを含む。適切には、出力はギターのような楽器の音響出力であり、出力は、演奏者の生体力学的位置、行為、動き、運動または身振りが、実際の楽器を演奏する時発生するものに類似している時再生されるギターの音声をシミュレートする。
また、本発明によれば、出力を発生または再生するシステムを操作する人間が着用する衣服であって、該衣服が、
−衣服に着脱式に取り付けられセンサの少なくとも1つが2つ以上の動作位置にわたって動作する1つ以上のセンサと、
−衣服に着脱式に取り付けられセンサから信号を受信し信号を電子装置に無線で送信する送信機とを含み、
その際センサが、衣服を着用した人間の生体力学的運動および位置に基づく信号を送信するようになっている衣服が提供される。
本発明によれば、電子楽器であって、
人間が2つ以上の動作位置にわたって操作するセンサと、
可聴出力を発生および/または再生する電子装置であって、その際該電子装置が、センサの動作位置を識別するセンサからの信号を受信し、一旦校正されると、センサをそれぞれの動作位置に配置することによって望ましい一連の可聴出力を発生および/または再生できるような形で、センサの選択された動作位置およびひいては電子装置が受信する信号が特定の出力に関連するように操作/校正される電子装置とを含む電子楽器が提供される。
本発明のシステムは任意の楽器のサンプル音声を発生または再生するために利用してよいが、ここで各々特定の楽器に関連する本発明の2つの実施形態を詳細に説明する。
ギターの実施形態
本発明の1つの実施形態によれば、システムはアコースティックまたは電気増幅のギターをシミュレートするように設定してもよい。すなわち、本実施形態によれば、センサの1つは、その信号が、例えば、各々動作位置を表す少なくとも6つの範囲に校正されるように肘の角度方向を監視することが好適である。好適には、6つの動作位置は各々1対の出力に関連し、各対がアップストラムまたはダウンストラムによって演奏されるコードの音を発生するコードを表す。このやり方でセンサの角度方向およびひいては動作位置を監視することによって、肘の運動を使用して、あたかも6つの異なるコードを選択するようにギターのフレットボードに沿って前後に摺動する手をシミュレートすることができる。便宜上、このセンサを以下フレットボードセンサと呼ぶ。
また、本実施形態によれば、以下ストラミングセンサと呼ぶ別のセンサが、ストラミングセンサからの信号が少なくとも2つの異なる動作位置に校正されるようにもう一方の肘の角度方向を監視することが好適である。すなわち、電子装置は、ストラミングセンサからの信号の値の2つの範囲が各々動作位置として選択されるように校正する。好適には、一方の動作位置が肘の方向が曲がった位置にある時を表し、もう一方の動作位置が肘の方向が延びた位置にあるときを表し、2つの動作位置は出力を割り当てられていないさらに別の範囲の角度方向によって分離されている。その上、肘が曲がった位置から伸びた位置に移動したことを表示する信号を電子装置が受信すると、電子装置は、フレットセンサからの信号によって決定される特定のコードのギターの弦のダウンストラミングに対応する出力を発生または再生することができる。同様に、肘が伸びた位置から曲がった位置に移動したことを表示する信号を電子装置が受信すると、電子装置は、フレットボードセンサの信号によって決定される特定のコードまたは音符のギターのアップストラミングに対応する音を発生または再生することができる。
本実施形態によれば、フレットボードセンサの動作位置は、ダウンストラムまたはアップストラムの何れかとして聞こえるコードの形態のコードまたは音符に関連し、システムは、ストラミングセンサからの信号がアップストラムまたはダウンストラムのどちらを識別しているかに基づいて何れかのバージョンのコードの音を出力する。さらに、ストラミングセンサからの信号の変化、すなわちストラミングアームの角度方向の変化は、特定の音声を再生するかまたは再生しないかを決めるトリガとして使用され、信号の変化率は再生される音声の音量を決定する。好適には、信号の変化率が増大すると音量は増大する。
ストラミングセンサの信号は、3つ、4つ、5つまたはそれ以上の動作位置に校正することも可能である。この状況では、各動作位置は、ギターの1本の弦を弾くこと、またはギターから音を発生する他の態様に関連する。
タンバリンの実施形態
本発明の別の実施形態によれば、システムはタンバリンをシミュレートするように設定してもよい。すなわち、本実施形態によれば、センサは、エルボーセンサからの信号が少なくとも2つの異なる位置に校正されるように肘の角度方向を監視することが好適である。1つの位置は肘の方向が曲がった位置にある時を表し、他の位置は肘の方向が伸びた位置にある時を表す。その上、肘が曲がった位置から伸びた位置に移動したことを表示する信号を電子装置が受信する時、電子装置は、タンバリンのシンバルを鳴らす音を再現またはシミュレートする音に対応する出力を発生または再生することができる。さらに、肘が曲がった位置から伸びた位置に移動したことを表示する信号を電子装置が受信する時、電子装置は、手または脚といった対象にタンバリンをぶつける音を発生または再生することができる。
本発明の方法
本発明によれば、複数の動作位置を有する1つ以上のセンサと、出力を発生または再生するための電子装置とを含むシステムを操作する方法であって、該電子装置がセンサの動作位置に基づく該または各センサからの信号を受信し、該方法が、
a)異なる動作位置の間でセンサを調整するステップと、
b)ステップa)にしたがって異なる動作位置の間でセンサを調整した時、電子装置が出力を発生または再生するように、少なくとも1つの出力を該または各センサの動作位置に割り当てるステップとを含む方法が提供される。
本方法は音楽システムを操作する方法であり、出力は可聴出力であることが好適である。好適には、可聴出力は実際の音楽の音符、コード、リフ、小節または断片のサンプルである。
ステップa)は、一連の出力を発生するように動作位置の間でセンサを操作するステップを含むことが好適である。
ステップa)は、既知の一連の出力を発生するように割り当て先の既知の出力を有する既知の動作位置の間でセンサを移動させるステップを包含することが好適である。したがって、本発明の方法は、初心者であるか経験者であるかを問わず、演奏家が楽譜に書かれた音楽を含む音楽を演奏すること、またさらにはアノテーションを実行する簡単な方法を学習することを可能にするものである。
存在するセンサが1つだけである状況では、センサの動作位置への個々の出力の割り当ては、1つの動作位置に対して1つの出力という形で行われる。
多数の動作位置を有する2つ以上のセンサが存在する状況では、2つのセンサを対にして、ステップb)が、一方のセンサの少なくとも1つの動作位置に、もう一方のセンサの動作位置の数以下の数の出力を割り当てるステップを包含するようにするのが好適である。例えば、第1のセンサが2つ以上の動作位置を有し第2のセンサが2つ以上の動作位置を有する状況では、好適には、ステップb)は、第1のセンサの少なくとも1つの動作位置に2つ以上の出力を割り当てるステップを包含し、ステップa)が実行される時、第2のセンサの動作位置によって識別される第1のセンサの動作位置の特定の出力を電子楽器が発生または再生するような形で、第2のセンサの動作位置は第1のセンサの各動作位置に関連する出力の1つを識別する。
ステップb)は、1つのセンサの各動作位置に、他のセンサの動作位置の数に等しい数の出力を割り当てるステップを包含することが好適である。
本方法は、c)電子装置が受信するセンサからの信号に基づいて個々の動作位置を画定するステップを含む。好適には、ステップc)は、電子装置が受信するセンサの信号の値の範囲として個々の動作位置を画定するステップを包含する。これらは当初製造業者によって提供しその後個人のユーザがカスタマイズすることができる。
センサの動作位置はキー、制御つまみ、スイッチ等を使用して任意の座標系で画定してよいが、あたかも楽器を演奏するかのような身振りがなされる状況で本発明を使用するためには、ステップc)は、1つ以上の身体部分の角度方向によって動作位置を画定するステップを包含することが好適である。好適には、センサの動作位置は、指、手首、肘、肩、首、背中、腰、膝、くるぶしといった1つ以上の身体関節の相対角度位置の関数である。
動作位置が信号の値の範囲によって画定され角度方向の関数である状況では、センサからの信号が身体関節の角度方向と共に変化することが好適である。
動作位置が身体関節の角度位置の関数である状況では、ステップb)は、実際の楽器を操作する際に必要となるであろう角度位置または身振りに類似した動作位置に基づく動作位置に個々の出力を割り当てるステップを包含することが好適である。例えば、本発明を使用してギターの音声を発生する時、動作位置およびひいては演奏者の腕および適切には肘の角度方向は出力の音に協調する。動作位置と出力をこのように協調させることによって、音楽の演奏は直感的になり、特に実際の楽器を演奏した経験がある演奏者にとっては実際の楽器をシミュレートするものになり、限られた経験しか持たないものにとっては学習するための方法になる。
ステップa)、b)およびc)の何れか1つまたはそれらの組み合わせは、電子装置が、
● センサが配置される動作位置、および/または、
● 個々の動作位置に割り当てられる出力
の何れか一方または両方に関する情報を演奏者に伝達する間に実行されることが好適である。
好適には、情報は視覚および/または音響発生源によって演奏者に伝達される。
視覚発生源は全ての可能な動作位置を視覚的に伝達することと、特定の時間にセンサが配置される動作位置が表示されることとが好適である。好適には、演奏者に伝達される情報は、楽器またはその一部の画像または概略例示を含み、センサの各動作位置は楽器を演奏する演奏者の身体の一部の動作位置をシミュレートする。
視覚発生源は動作位置に割り当てられた個々の出力を識別する情報を伝達することが好適である。
音声発生源は、どの特定の出力が動作位置に割り当てられているかを識別する情報を演奏者に音声で伝達する。
本方法は、d)動作位置を画定するものとして選択されたセンサからのある範囲の信号または値に関するデータを格納するステップを含む。
また、ステップd)は、動作位置に割り当てられた出力に関するデータを格納するステップをも包含することが好適である。
好適には、ステップd)によって格納されるデータは個人の演奏者に関連して格納されるので、電子装置は、1人より多い演奏者が使用する場合、格納された複数のキャリブレーション/設定を容易に切り換えることができる。
本方法は、視覚発生源が他の動作位置に対してセンサが配置される動作位置を演奏者に伝達するようなアルゴリズムを使用してセンサからの信号を分析するステップを含むことが好適である。
本方法は、信号が、ステップc)にしたがって動作位置を画定するものとして選択された信号の値の範囲以内にあるか否かを計算するアルゴリズムを使用してセンサからの信号を分析するステップを含む。
本方法は、センサの信号の値が変化する速度を計算し、そこから、好適には可聴出力を再生すべき音量を決定するアルゴリズムを使用してセンサからの信号を分析するステップを含む。
本方法は、出力のサンプルを電子装置にロードするステップを含むことが好適である。サンプルは、インターネットを含む任意の情報源および/または、適切にはCDおよびDVD等である光学コンピュータ可読媒体から獲得してもよい。
本方法は、ステップa)で再生される出力が演奏される音楽に付随するように、ステップa)が実行されるのと同時に部分的に完全な音楽を演奏するステップを含む。
また、本発明によれば、複数の動作位置を有する1つ以上のセンサと、個人の演奏者の生体力学的位置または運動に基づいて出力を発生または再生するための電子装置とを含むシステムを操作する方法であって、該方法が、
a)センサから電子装置に信号を送信するステップであって、その際センサが演奏者の生体力学的運動および位置に基づいて信号を送信するようになっているステップと、
b)異なる動作位置の間でセンサを調整した時、電子装置が望ましい出力を発生または再生するように、少なくとも1つの出力を該または各センサの動作位置に割り当てるステップとを含む方法が提供される。
本発明の方法は、
● センサが選択された動作位置に配置された時出力が発生または再生される遅延の期間、
● 少なくとも部分的に可変抵抗器によって形成され、一例として、本出願人の以前の先行する仮出願第2005905666号に示す配置の構造を有するセンサからの信号、および
● 出力はギターの音声の形態であり、2つのセンサは、各々演奏者の肘の角度方向に基づいて信号を提供し、その後実際のギターの演奏を出力するために、ステップa)およびb)、およびオプションでステップc)およびd)を実行する、
といった、「本発明のシステム」という項目の元で説明される任意の1つまたはいくつかの好適な特徴を含んでもよいことが認識されるだろう。
以下、添付の図面を参照して本発明を説明する。
演奏家の肘の角度方向に基づいてコンピュータがギターの音を再生する、本発明の好適実施形態に係るシステムの構成要素の概略例示である。 図1に例示したシステムの通信チャネルを例示するフロー図である。 演奏家への視覚的フィードバックを提供する図1に示すコンピュータのモニタのスクリーンショットである。 図3に示す「フレットアームセンサの校正」ボタンを押すことによって提供されるウィンドウのスクリーンショットである。 図3に示す「サンプルの割り当て」ボタンを押すことによって提供されるウィンドウのスクリーンショットである。 図3に示す「ストラムアームセンサの校正」ボタンを押すことによって提供されるウィンドウのスクリーンショットである。 図1に示すシステムがギターとして設定されている時コンピュータが受信する演奏家の肘の角度方向に基づく信号を示すグラフである。 4つの動作位置またはゾーンを識別する、図5に示すフレットアームの信号を示すグラフである。 2つの動作位置またはゾーンを識別する、図5に示すストラムアームの信号を示すグラフである。 10ミリ秒毎に信号の値が測定される、図9に示す2秒間、すなわち10〜12秒の期間の信号を示すグラフである。 システムの状態に関する視覚的フィードバックを提供する、図3に示すものと同様のコンピュータモニタのスクリーンショットである。
ここで、演奏家がギターの音を発生するために利用できるシステムおよび方法を参照して本発明の好適実施形態を説明する。すなわち、以下より詳細に説明するように、好適実施形態の動作は、特別に適応させた衣服を使用して監視する演奏家の肘の角度姿勢に基づいている。しかし、本発明は本質的に任意の楽器または任意の他の可聴出力の音を発生するために使用できることが認識されるだろう。さらに、本発明を使用して花火または照明による表示のような視覚出力を制御することも可能である。また、本発明の動作を制御する基礎として任意の身体関節、スイッチ、キーまたは制御ノブを使用することも本発明の範囲内である。
図1を参照すると、本発明の好適実施形態は、適切には弾性を有する布から製造した長袖で丈が短く、肘領域に配置したセンサ21を装備したシャツ20の形態の衣服を備える。また、シャツ20は、USBポートまたは同様の接続を介してコンピュータ24に結合した受信機23に信号を無線で送信する送信機22を含んでいる。コンピュータ24は、モニタおよび処理ユニットを有する任意の適切なPCまたはマッキントッシュ(登録商標)マシンでよい。必要な場合、コンピュータ24はスピーカ25および増幅器に接続する。
シャツ20の肘領域に配置したセンサ24は好適には、シャツ20に固定されて特定の形状に保持される一方フィラメントに電位差を印加する接続点に接続されている補強したフィラメントを備える可変抵抗器の形態である。フィラメントは、衣服の布が伸長および/または圧縮して変形するに連れて変化するI、Jまたはフック形、Cまたは曲線形およびX交差形といった形状で接点の間に構成される。すなわち、シャツ20を着用した人物が肘を曲げると、接点間のフィラメントの長さが変化し、したがって、電気抵抗が変化する。適切なセンサ21の構造に関するさらなる詳細は、現在国際出願PCT/AU2006/001521(WO07/041806)として審査中である本出願人の先行するオーストラリア国仮出願第2005905666号で提供されている。これらの仮出願および国際出願の特許明細書は参照によって本明細書の記載に組み込まれる。
シャツ20を演奏家が着用すると、矢印Aの方向が示すように、肘の角度姿勢の変化と、ひいては好適には電流または電圧として測定されるセンサ21からの信号の変化が、送信機22から受信機23に伝達された後、コンピュータ24に直接伝達される。センサ21からの信号は、希望に応じて、送信機22または受信機23の何れかによってアナログ信号からデジタル信号に変換される。システムの動作状態は、スピーカ25からの音およびコンピュータ24のモニタ上に提示される情報によって絶えず演奏家に伝達される。
システムの構成要素間の通信を図2のフロー図中の矢印によって示す。初め、センサ21からの信号は、送信機22および受信機22を介して、フロー図中でハードウェアインタフェースとして示すコンピュータ24に伝達される。コンピュータ24の処理ユニットは、フロー図中でPCロジックとして示す、コーディングして埋め込まれた適切なアルゴリズムまたは適切なソフトウェアを使用して、受信した信号を分析し、その分析に基づいて、コンピュータはスピーカ25を介して音響出力を再生する。音響出力は、事前に格納した任意の音響サンプルでもよいが、適切には、衣服を着用した演奏者の身振りまたは行為に少なくとも部分的に相関する音の形態である。発生した音は、望ましい音響刺激と、システムの動作状態に関するフィードバックとの両方を提供する。
さらに、動作状態およびコンピュータが実行した信号の分析も、コンピュータモニタを介して演奏家にフィードバックされる。演奏家への音および視覚によるフィードバックを図1および図2でそれぞれ破線の矢印BおよびCによって示す。
シャツ20または衣服は、センサ21が衣服の布に固定されるかまたは組み込まれた、ゆったりまたはぴったりした衣服を含む任意の衣服でよい。理想的には、センサ21および送信機22は、面ファスナー、スナップボタンまたは協働する留め金を含む適切な連結具または相互接続手段によって衣服に着脱式に取り付けられる。図1に示す実施形態の場合、センサ21は衣服の肘に着脱式に取り付けられており、各肘のセンサ21からの信号は単一の送信機22に伝達されるが、これは衣服の別の部分に着脱式に配置されており、適切には演奏者の生体力学的運動に干渉しないようにセンサ21から離れた位置にある。センサ21および送信機22は衣服に直接的または間接的に取り付けてもよく、それらが間接的に取り付けられている場合、センサ21および送信機22は、好適には、使用する時衣服に取り付ける、別個の布製基板に設置する。布製基板および衣服は、伸縮性のある、または伸縮性のない織物を含む任意の適切な織物から製造してよい。
ギターの設定
図3は、ギターの音声を発生する際助けになるテンプレートとして本出願人が開発したコンピュータモニタのスクリーンショットである。
画面の上部は、ギターのフレットアーム上の6つの動作位置と、ひいては6つの異なるコード位置を表す、番号1〜6の6つのフレットボックスを備える。フレットボックス1はギター本体に最も近いコード位置を表し、フレットボックス2はその隣のギター本体から遠い方向のコード位置を表し、以下同様に、ギター本体から最も遠いコード位置を表すフレットボックス6まで続く。図3はフレットアームが6つの異なる位置に分離されていることを示しているが、フレットボックスの数は希望に応じて12位置以上まで増大できるという意味で、このテンプレートは完全に設定可能なものである。
6つのフレットボックスのすぐ下には、三角形または矢印の記号によって6つのパートに区切られたフレットラインが配置されている。フレットラインはギターのフレットアームの長さを表し、矢印の間の各パートの長さは、実際には演奏家の肘の角度方向の範囲を表しフレットボックス1〜6に対応する。フレットラインから下向きに走る線は、各パートまたは動作位置内の最適な方向の視覚的表示を提供する。
フレットラインの右端に配置された「フレットアームセンサの校正」ボタンを押すことによって、図4に示すウィンドウが現れる。これによって、動作位置の境界および、ひいては、各コードまたは動作位置を画定する演奏家の肘の角度の範囲を個別に調整または校正できるようになる。校正処理はいくつかの方法で実現できるが、本出願人が考案したもっとも効率的な処理は、まず、図4に示す「最小」および「最大」ボタンを作動させることによって達成される、フレットセンサが完全に曲がった位置と完全に伸びた位置とにシステムを校正し、その後全範囲を必要な数の動作位置に分離または分割することである。完全に曲がった位置と完全に伸びた位置との間での動作位置の分布は均一でも不均一でもよい。望ましい場合、完全に曲がった位置と完全に伸びた位置との間の演奏者の動きの範囲に基づいて、フレットラインの各動作位置またはパートの境界を画定する矢印を、ボタンIおよびIVを使用して個別に校正してもよい。
図3の「サンプルの割り当て」ボタンを押すことによって、図5に示すウィンドウが現れる。フレット1、フレット2、〜フレット6と名前を付けた各フレットボックスについてのドロップボックスを作動させることによって、一連の事前に格納されたサンプル音を個々のフレットボックスに割り当てることができる。図5は、フレットボックス1、2、3および4に割り当てられたサンプル音が、
● パーカッションの音であるカッティング、ダウン、
● Eメジャー、
● Aメジャー、および
● Dメジャー、
であることを示す。
図3に戻ると、フレットラインの下には、ギターのストラミングアームの状態を表すストラミングアームボックスが配置されている。「ストラムアームセンサの校正」ボタンを押すことによって、図6に示すウィンドウが現れる。図6に示すウィンドウは、アップストラミングおよびダウンストラミング両方の行為に関連する「〜から」および「〜へ」のボタンを有する。本出願人は、ストラミング行為によって発生する音声をシミュレートするためには、行為として割り当てまたは解釈されず、また出力を割り当てられない範囲によって分離された肘の角度姿勢の2つの範囲にストラミングアームセンサを校正するのが最上であることを発見した。
フレットアームおよびストラミングアームのセンサからの通常の信号を図7に示す。ストラミングアームセンサからの電圧信号は細線で示されているが実質上正弦波であり、ストラミングアームの約120拍/分の動きを表している。太線はフレットアームセンサからの信号を表しており、これは通常、実際のギターのフレットアームに沿って移動する手の段階的な動きの信号である。
図8は、図7に示すフレットアームセンサの信号を例示する。さらに、図8は、角度方向の範囲および、ひいては、フレットエルボーセンサの信号の範囲に一致する4つの電圧範囲を有する。図3〜図5に関連して上記で説明した校正処理を用いることによって、フレットエルボーセンサの角度方向の動作位置を以下のように校正する。
図9は、図7に示すストラミングアームセンサからの信号を例示する。すなわち、信号は正弦波形を有する実線である。本出願人は、現実感のあるギターのストラミングの音声は、通常の腕の動きの範囲内の2つの不連続な位置またはゾーンを画定することによって発生することを発見した。図10は、角度方向の範囲および、ひいては、ストラミングアームセンサの信号の範囲によって各々画定される2つの動作ゾーンの位置を表示する。ゾーン1は3.75〜3.80ボルトの範囲であり、ゾーン2は3.95〜4.00ボルトの範囲である。コンピュータ分析が実行するアルゴリズムによって、各ゾーン内の信号の変化率を決定できるようになる。コンピュータが、動作ゾーン1は上向き方向、すなわちアップストラムで演奏されると決定し、フレットアームが、フレットアームセンサからの信号がフレットボックス3のために設定した境界内にあるような方向である状況では、再生される出力は図5で割り当てられたもの、すなわちAメジャーのアップストラムである。コンピュータが、動作ゾーンは下向き方向、すなわちダウンストラムで演奏されると決定し、フレットアームが、フレットアームセンサからの信号がフレットボックス3のために設定した境界内にあるような姿勢である状況では、再生される出力は図5で割り当てられたもの、すなわちAメジャーのダウンストラムである。同様に、フレット動作位置2および4はEメジャーおよびDメジャーとして再生され、その際ストラムアームセンサがアップストラムを検出する時はアップストラムであり、またストラムセンサがダウンストラムを検出する時はダウンストラムである。図5に示す各フレット位置についてのドロップボックスは出力を「アップ」または「ダウン」の何れかとして示しており、これは出力がアップストラミング音またはダウンストラミング音であることを意味しているが、独立したストラミングセンサが使用される状況では、各フレット位置に2つの出力、すなわち、アップストラムまたはダウンストラムのコード演奏が割り当てられる。図5のフレット4のドロップボックスに示すような「アップ」と「ダウン」のコードの区別は、ストラミングセンサが使用されず、したがって、各フレット位置についての出力の数が1つに制限される場合にのみ適用される。しかし、フレットセンサと共にストラミングセンサが使用される場合は、2つの出力、すなわち各コードのアップストラミングおよびダウンストラミングを表す音を各フレット位置に割り当てることができる。
信号がフレットボックス1〜6またはストラミングゾーン1または2の範囲内にあるか否かを決定するために使用するアルゴリズムは、アナログおよび/またはデジタルデータの分析を可能にする任意の適切なコンピュータ言語を使用して実行してもよい。本出願人は、この種の分析はデジタルデータ上でより容易に実行されることを発見した。図10は、ストラミングアームセンサからの信号を10ミリ秒毎(100Hz)にサンプリングすることによってデジタル化した、10〜12秒の期間についての図9のストラミング信号を示すグラフである。各サンプリング事象を「+」の記号で表示する。このアルゴリズムは、「+」記号の間の間隔を計算することによって各ストラミングゾーン内の電圧の変化率を分析し、それによって、アップストラミングが行われているのかまたはダウンストラミングが行われているのかを決定する。さらに、電圧の変化率を計算し、それに基づく音量の出力を再生する。本出願人は、信号をサンプリングする周波数が、演奏家に応答性音声フィードバックを与える上で重要であることを発見した。一般に、1〜50ミリ秒台の信号サンプリングレートが、実際のギターの音声をシミュレートする現実感のある形で音声の音量および表現を制御する能力を演奏家に提供する。
図11は、演奏中およびシステムのキャリブレーションの後演奏家が見るコンピュータモニタのスクリーンショットである。図3および図11には示されていないが、表示される情報の視認性を助けるため、画面はカラーであると想定する。図11の場合、フレットボックス3は他のフレットボックスと比較して影が付けられており、フレットアームの方向が、フレットセンサがフレットボックス3の範囲内にあるようなものであることを表示している。同様に、任意の特定の段階でのフレットアームセンサおよびストラミングアームセンサの動作位置に関する視覚的フィードバックを提供するフレットアームラインおよびストラミングアームボックスに沿って、明るい色のバーが連続して延び左から右に収縮している。
本出願人は、システムの出力と演奏家の肘の方向の変化との間、すなわち「動きから音へ」の期間を最小化することが重要であることを発見した。理想的には、良好な動的性能を与える「動きから音へ」の待ち時間は50ミリ秒未満、好適には10ミリ秒未満である。一般的に許容可能な待ち時間は35ミリ秒である。
待ち時間とは、
● センサの信号が送信機から伝達されるのに要する時間。これは好適実施形態では1または2ミリ秒にすぎない、
● その後コンピュータのUSBポートを通じて送信機が受信機に信号を送信するのに要する時間、
● コンピュータの中央処理装置が信号の状態に対するアルゴリズムを実行するのに要する時間、および
● 信号をスピーカに送って音を放出するのに要する時間、
の累計である。
現在利用可能な他のシステムに対する本発明の利点の1つは、動作位置に割り当てられた特定の出力に応じて、実際の楽器で同じ出力を出すための角度方向に類似または一致するように、各動作位置の角度方向の境界を調整できることである。
本発明の精神および範囲から逸脱することなく、好適実施形態に多くの変更および修正を行いうることを本発明の当業者は認識するだろう。
例えば、センサを上記で説明したような可変電気センサの形態とせずに、センサを光ファイバの形態として、ファイバが伝導する光の量および、最終的には、コンピュータが受信する信号を、身体の運動に類似するファイバの屈曲の関数とすることも可能である。
さらなる例としては、任意の身体の動きからの出力を追加の調節ユニットで処理して、既存の楽器録音および/またはエフェクトユニット等で一般的な、リバーブ、ディストーションおよびディレイといった追加のエフェクトを発生してもよい。

Claims (68)

  1. 各センサが2つ以上の動作位置で動作する、1つ以上のセンサと、
    出力を発生または生成する電子装置であって、前記電子装置が動作位置に基づいて前記または各センサから信号を受信し、前記電子装置または前記センサが、一旦校正されると、動作位置の間で前記または各センサを動作させることによって一連の出力が発生できるような形で、前記または各センサの選択された動作位置およびひいては前記電子装置が受信する信号が特定の出力に関連しまたは割り当てられるように校正される電子装置とを含むシステム。
  2. 前記電子装置またはセンサが、個人の演奏者の生体力学的運動に基づいて校正される、請求項1に記載のシステム。
  3. 望ましい出力を発生するため人間が操作するシステムであって、前記システムが、
    センサの少なくとも1つが2つ以上の動作位置にわたって動作する、1つ以上のセンサと、
    出力を発生または生成する電子装置であって、前記電子装置が動作位置に基づいて前記または各センサから信号を受信し、前記電子装置および前記センサの何れか一方または両方が、前記または各センサの選択された動作位置が前記システムを操作する人間の生体力学的運動または位置に基づくように校正され、一旦校正されると、個人の演奏者の生体力学的運動に基づいて動作位置の間で前記または各センサを操作することによって一連の出力を発生できるように、前記電子装置が受信する信号が特定の出力に関連しまたは割り当てられる電子装置とを含むシステム。
  4. 出力が視覚出力および可聴出力の何れか一方またはそれらの組み合わせの形態である、請求項3に記載のシステム。
  5. 可聴出力が事前録音された音または格納された音のサンプルである、請求項4に記載のシステム。
  6. 可聴出力が、前記センサの動作位置に関連しない付随する出力と共に発生または再生される、請求項4または5に記載のシステム。
  7. 前記センサが、前記センサの様々な動作位置に応じて可変電気抵抗を提供する電気抵抗器を含む、請求項3〜6の何れか1つに記載のシステム。
  8. 前記センサの動作位置がある範囲の値にわたって変化する信号によって画定されるように、前記電子装置またはセンサが校正される、請求項3〜7の何れか1つに記載のシステム。
  9. 前記センサの動作位置が、指、手首、肘、肩、首、背中、腰、膝またはくるぶしの関節といったものであるがそれらに制限されない演奏者の1つ以上の身体関節の角度方向の範囲によって画定される、請求項3〜8の何れか1つに記載のシステム。
  10. 選択された動作位置に関連する信号の値または値の範囲が希望に応じて調整可能でありまた異なる個人の演奏者に適合するように校正し直すことができる、請求項8または9に記載のシステム。
  11. 前記電子装置またはセンサが、各個人の演奏者について前記システムを校正した設定を格納しており、他の演奏者が前記システムを使用した後格納された設定を再現または復活することができる、請求項3〜10の何れか1つに記載のシステム。
  12. 前記システムが、前記センサがどの動作位置に配置されているかを演奏者に伝達するフィードバック手段を含む、請求項3〜11の何れか1つに記載のシステム。
  13. 前記フィードバック手段が、前記センサの動作位置を演奏者に視覚的に伝達する手段を含む、請求項12に記載のシステム。
  14. 前記フィードバック手段が、それぞれの前記センサの他の動作位置に対して、前記センサの少なくとも1つがどの動作位置に配置されているかを演奏者に表示するモニタの形態である、請求項12に記載のシステム。
  15. 前記モニタが楽器またはその一部の画像または概略例示を含み、各動作位置が、前記モニタ上に示される前記楽器を演奏する演奏者の生体力学的位置を表示またはシミュレートする、請求項14に記載のシステム。
  16. 前記フィードバック手段がまた、各動作位置に割り当てられた個々の出力を識別する情報を演奏者に伝達する、請求項12〜15の何れか1つに記載のシステム。
  17. 動作位置に配置された前記センサと望ましい出力を発生または再生する前記電子装置との間の遅延が50ミリ秒以下である、請求項3〜16の何れか1つに記載のシステム。
  18. 遅延期間が10ミリ秒以下である、請求項17に記載のシステム。
  19. 前記電子装置が、
    ● 動作位置を画定する前記センサの信号の値の範囲を含む、動作位置と、
    ● 可聴出力を含む出力と、
    ● 選択された動作位置への個々の出力の指定または割り当てと、
    の何れか1つまたはそれらの組み合わせを格納するメモリを有する、請求項3〜18の何れか1つに記載のシステム。
  20. 前記電子装置が、
    ● 前記センサからの信号を分析するアルゴリズムの実行と、
    ● 信号が、校正された動作位置を画定する信号の値の範囲以内にあるか否かを評価するアルゴリズムの実行と、
    ● センサの信号の値が変化する速度を計算し、信号の変化率に基づいて可聴出力を再生すべき音量を決定するアルゴリズムの実行と、
    の何れかまたはそれらの組み合わせに関するデータを処理するデータ処理ユニットを有する、請求項3〜19の何れか1つに記載のシステム。
  21. 前記システムが2つ以上のセンサを含み、各センサが2つ以上の動作位置を有する、請求項3〜20の何れか1つに記載のシステム。
  22. 可能な出力の合計最大数が前記センサの校正された動作位置の数の積であり、生成される出力が両方の前記センサの動作位置によって決定されるような形で、前記センサの1つの動作位置の少なくとも1つが多数の出力に関連付けられるかまたはいくつかの出力を割り当てられ、出力の数が他の前記センサの動作位置の数以下であるように前記センサの2つが校正される、請求項21に記載のシステム。
  23. 前記システムが、演奏者の肘の角度方向を監視するための2つのセンサを含む、請求項3〜22の何れか1つに記載のシステム。
  24. 動作位置が約5〜45度の範囲の角度方向を有するように、前記センサおよび/または電気装置が校正される、請求項23に記載のシステム。
  25. 動作位置が5〜20度の範囲の角度方向にわたって画定されるように、前記センサおよび/または電気装置が校正される、請求項24に記載のシステム。
  26. 前記センサの一方、すなわちフレットセンサが、演奏者の一方の肘の角度方向を監視し、各々がギターのフレットボード上の演奏者の肘の生体力学的位置を表示またはシミュレートする少なくとも6つの範囲に校正される、請求項23〜25の何れか1つに記載のシステム。
  27. 前記フレットセンサの6つの動作位置が、各対がギターのアップストラムまたはダウンストラムによって演奏されるコードの音を発生するギターのコードを表す1対の出力に関連する、請求項26に記載のシステム。
  28. もう一方のセンサ、すなわちストラミングセンサが、前記ストラミングセンサからの信号が少なくとも2つの異なる動作位置に校正されるように、もう一方の肘の角度方向を監視する、請求項26または27に記載のシステム。
  29. 動作位置の一方が、肘の方向が曲がった位置にある時を表し、もう一方が肘の方向が伸びた位置にある時を表し、2つの動作位置が、出力を割り当てられていないさらに別の範囲の角度方向によって分離されている、請求項28に記載のシステム。
  30. 肘が曲がった位置から伸びた位置に移動したことを表示する前記ストラミングセンサからの信号を前記電子装置が受信すると、前記電子装置が、前記フレットセンサからの信号によって決定される特定のコードのダウンストラミングに対応する出力を発生または再生し、前記ストラミングセンサが伸びた位置から曲がった位置に移動したことを表示する信号を前記電子装置が受信すると、前記電子装置が、前記フレットセンサの信号によって決定される特定のコードの前記ギターのアップストラミングに対応する音声を発生または再生する、請求項29に記載のシステム。
  31. 前記ストラミングセンサの変化率が、出力が再生される音量を少なくとも部分的に決定する、請求項28〜30の何れか1つに記載のシステム。
  32. 前記ストラミングセンサが3つ以上の動作位置に校正され、各動作位置が、ギターの1本の弦を弾くことを反映する出力に関連する、請求項28〜31の何れか1つに記載のシステム。
  33. 前記システムが、前記センサから信号を受信し、前記電子装置に信号を無線で送信する送信機を含む、請求項1〜32の何れか1つに記載のシステム。
  34. 前記システムが、前記センサの1つまたは各々が固定されるかまたは組み込まれた、1つ以上の布製基板を含み、前記システムの演奏者が着用する衣服に前記布製基板を着脱式に取り付けることができる、請求項1〜33の何れか1つに記載のシステム。
  35. 前記システムが、前記センサが直接的または間接的に着脱式に取り付けられており、それによって希望に応じて洗濯または完全に交換することによって再生できるようになっている衣服を含む、請求項1〜33の何れか1つに記載のシステム。
  36. 請求項33に従属する時、前記送信機が直接的または間接的に着脱式に前記衣服に取り付けられる、請求項35に記載のシステム。
  37. 複数の動作位置を有する1つ以上のセンサと、出力を発生または再生するための電子装置とを含むシステムを操作する方法であって、前記電子装置が前記センサの動作位置に基づく前記または各センサからの信号を受信し、前記方法が、
    a)異なる動作位置の間で前記センサを調整するステップと、
    b)ステップa)にしたがって異なる動作位置の間で前記センサを調整した時、前記電子装置が出力を発生または再生するように、少なくとも1つの出力を前記または各センサの動作位置に割り当てるステップとを含む方法。
  38. 複数の動作位置を有する1つ以上のセンサと、個人の演奏者の生体力学的位置または運動に基づいて出力を発生または再生するための電子装置とを含むシステムを操作する方法であって、前記方法が、
    a)前記センサから前記電子装置に信号を送信するステップであって、その際前記センサが演奏者の生体力学的運動および位置に基づいて信号を送信するようになっているステップと、
    b)異なる動作位置の間で前記センサを調整した時、前記電子装置が望ましい出力を発生または再生するように、少なくとも1つの出力を前記または各センサの動作位置に割り当てるステップとを含む方法。
  39. 出力が、実際の音楽の音符、コード、リフ、音楽の小節、または任意の断片を含む可聴出力である、請求項38に記載の方法。
  40. 前記方法が、既知の一連の出力を発生するように既知の出力を割り当てられた既知の動作位置の間で前記センサを移動させるステップを含む、請求項38または39に記載の方法。
  41. 前記方法が、個人の演奏者の選択された生体力学的位置に基づいて前記センサの動作位置を画定するように前記センサまたは電気装置を校正するステップを包含するステップc)を含む、請求項38〜40の何れか1つに記載の方法。
  42. ステップc)が、選択された生体力学的位置のある範囲にわたって個々の動作位置を画定し、ひいては、前記電子装置が受信する前記センサの信号の範囲に対して動作位置を校正するステップを包含する、請求項41に記載の方法。
  43. 生体力学的運動または位置が、指、手首、肘、肩、首、背中、腰、膝またはくるぶしといった1つ以上の身体関節の角度方向の関数である、請求項42に記載の方法。
  44. ステップb)が、実際の楽器を操作する時必要とされるであろう角度方向または身振りに類似した動作位置に基づいて出力を動作位置に割り当てるステップを包含する、請求項43に記載の方法。
  45. 前記電子装置が、
    ● 前記センサの動作位置およびこれが校正された動作位置の範囲内にあるか否か、および/または、
    ● 校正された動作位置に割り当てられた出力の種類、
    に関する情報を演奏者に伝達または提示する間に、ステップa)、b)およびc)の何れか1つまたはそれらの組み合わせが実行される、請求項41〜44の何れか1つに記載の方法。
  46. 情報が視覚および/または音声発生源によって演奏者に提示または伝達される、請求項45に記載の方法。
  47. 前記視覚発生源が、前記センサの全ての可能な動作位置および、任意の時点での、各センサが配置される動作位置を演奏者に表示する、請求項46に記載の方法。
  48. 前記視覚発生源が、楽器またはその一部の画像または概略例示を演奏者に表示するモニタであり、校正された各動作位置が、前記モニタに示された前記楽器を演奏する時演奏者が取るであろう生体力学的位置をほぼシミュレートする、請求項47に記載の方法。
  49. 前記視覚発生源が、各動作位置に割り当てられた出力の種類を識別する情報を表示する、請求項46〜48の何れか1つに記載の方法。
  50. 動作位置に割り当てられた出力の種類が、示された前記楽器を演奏する演奏者の生体力学的位置に類似した実際の楽器の出力に基づくものであるかまたは一致する、請求項48または49に記載の方法。
  51. 前記方法がさらに、動作位置を画定するものとして校正された信号または信号の値の範囲に関するデータを格納するステップを包含するステップd)を含む、請求項41〜50の何れか1つに記載の方法。
  52. ステップd)がまた、動作位置に割り当てられた出力に関するデータを格納するステップを包含する、請求項51に記載の方法。
  53. ステップd)が、動作位置および個人の演奏者に関連して各動作位置に割り当てられた出力の何れか1つまたはそれらの組み合わせに関するデータプロファイルを格納し、前記電子装置が、校正をやり直す必要なしに、1人より多い演奏者による使用を容易にするため、格納された異なるプロファイルを切り換えることができる、請求項51または52に記載の方法。
  54. 前記方法が、信号が、ステップc)にしたがって動作位置を画定またはそれに校正されたものとして選択された信号の値の範囲以内にあるか否かを計算するアルゴリズムを使用して前記センサからの信号を分析するステップを含む、請求項41〜53の何れか1つに記載の方法。
  55. 前記方法が、前記センサの信号の値の変化率を計算し、それによって可聴出力が再生される音量を決定する、請求項41〜54の何れか1つに記載の方法。
  56. 前記方法が、再生される音楽に付随するためステップa)およびb)を実行するのと同時に部分的に完全な楽曲を演奏するステップを含む、請求項41〜55の何れか1つに記載の方法。
  57. 前記システムが多数の動作位置を有する2つ以上のセンサを含み、ステップb)が、1つの前記センサの動作位置の少なくとも1つに、他の前記センサの動作位置の数以内の数の出力を割り当てるステップを包含する、請求項41〜55の何れか1つに記載の方法。
  58. 前記システムが、演奏者の肘の角度方向を監視するための2つのセンサを含む、請求項41〜57の何れか1つに記載の方法。
  59. ステップc)が、演奏者の肘の動作位置が約5〜45度の範囲の角度方向を有するように、前記センサまたは電気装置を校正するステップを包含する、請求項58に記載の方法。
  60. 動作位置が5〜20度の範囲の角度方向にわたって画定されるように、前記センサおよび/または電気装置が校正される、請求項59に記載の方法。
  61. 前記センサの一方、すなわちフレットセンサが、演奏者の一方の肘の角度方向を監視し、各々がギターのフレットボード上の演奏者の肘の生体力学的位置を表示またはシミュレートする少なくとも6つの範囲に校正される、請求項58〜60の何れか1つに記載の方法。
  62. 前記フレットセンサの6つの動作位置が、各対がギターのアップストラムまたはダウンストラムによって演奏されるコードの音を発生するギターのコードを表す1対の出力に関連する、請求項61に記載の方法。
  63. もう一方のセンサ、すなわちストラミングセンサが、前記ストラミングセンサからの信号が少なくとも2つの異なる動作位置に校正されるように、もう一方の肘の角度方向を監視する、請求項61または62に記載の方法。
  64. 動作位置の一方が、肘の方向が曲がった位置にある時を表し、もう一方が肘の方向が伸びた位置にある時を表し、2つの動作位置が、出力を割り当てられていないさらに別の範囲の角度方向によって分離されている、請求項63に記載の方法。
  65. 肘が曲がった位置から伸びた位置に移動したことを表示する前記ストラミングセンサからの信号を前記電子装置が受信すると、前記電子装置が、前記フレットセンサからの信号によって決定される特定のコードのダウンストラミングに対応する出力を発生または再生し、前記ストラミングセンサが伸びた位置から曲がった位置に移動したことを表示する信号を前記電子装置が受信すると、前記電子装置が、前記フレットセンサの信号によって決定される特定のコードの前記ギターのアップストラミングに対応する音声を発生または再生する、請求項64に記載の方法。
  66. 前記ストラミングセンサが3つ以上の動作位置に校正され、各動作位置が、
    ギターの1本の弦を弾くことを反映する出力に関連する、請求項63〜65の何れか1つに記載の方法。
  67. 出力を発生または再生するシステムを操作する人間が着用する衣服であって、前記衣服が、
    −前記衣服に着脱式に取り付けられセンサの少なくとも1つが2つ以上の動作位置にわたって動作する1つ以上のセンサと、
    −前記衣服に着脱式に取り付けられ前記センサから信号を受信し信号を電子装置に無線で送信する送信機とを含み、
    前記センサが、前記衣服を着用した人間の生体力学的運動および位置に基づく信号を送信するようになっている衣服。
  68. 前記センサおよび送信機が前記衣服の異なる部分に取り付けられ、前記センサから前記送信機に信号を伝えるより線または細線といった導電性媒体によって相互接続される、請求項67に記載の衣服。
JP2013056783A 2006-06-29 2013-03-19 出力を生成するシステムおよび方法 Pending JP2013152482A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
AU2006903501A AU2006903501A0 (en) 2006-06-29 A system and method that generates outputs
AU2006903501 2006-06-29

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2009516824A Division JP2009541801A (ja) 2006-06-29 2007-06-29 出力を生成するシステムおよび方法

Publications (1)

Publication Number Publication Date
JP2013152482A true JP2013152482A (ja) 2013-08-08

Family

ID=38845048

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2009516824A Withdrawn JP2009541801A (ja) 2006-06-29 2007-06-29 出力を生成するシステムおよび方法
JP2013056783A Pending JP2013152482A (ja) 2006-06-29 2013-03-19 出力を生成するシステムおよび方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2009516824A Withdrawn JP2009541801A (ja) 2006-06-29 2007-06-29 出力を生成するシステムおよび方法

Country Status (5)

Country Link
US (1) US8830162B2 (ja)
EP (1) EP2041740A4 (ja)
JP (2) JP2009541801A (ja)
AU (1) AU2007264413B2 (ja)
WO (1) WO2008000039A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110312032A (zh) * 2019-06-17 2019-10-08 Oppo广东移动通信有限公司 音频播放方法及相关产品

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2005299678B2 (en) * 2004-10-25 2011-04-07 Eastern Virginia Medical School System, method and medium for simulating normal and abnormal medical conditions
US20100201512A1 (en) 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
JP5430572B2 (ja) 2007-09-14 2014-03-05 インテレクチュアル ベンチャーズ ホールディング 67 エルエルシー ジェスチャベースのユーザインタラクションの処理
US8159682B2 (en) 2007-11-12 2012-04-17 Intellectual Ventures Holding 67 Llc Lens system
US8259163B2 (en) 2008-03-07 2012-09-04 Intellectual Ventures Holding 67 Llc Display with built in 3D sensing
US8696456B2 (en) * 2009-07-29 2014-04-15 Activision Publishing, Inc. Music-based video game with user physical performance
US8659658B2 (en) * 2010-02-09 2014-02-25 Microsoft Corporation Physical interaction zone for gesture-based user interfaces
KR101679239B1 (ko) * 2010-07-06 2016-11-24 삼성전자주식회사 휴대용 단말기에서 증강 현실 기법을 이용한 악기 연주를 제공하기 위한 장치 및 방법
US9173612B2 (en) 2011-02-28 2015-11-03 Rutgers, The State University Of New Jersey Gesture recognition biofeedback
US9606635B2 (en) 2013-02-15 2017-03-28 Microsoft Technology Licensing, Llc Interactive badge
KR102260721B1 (ko) * 2014-05-16 2021-06-07 삼성전자주식회사 전자 장치 및 전자 장치에서의 음악 연주 방법
JP6451926B2 (ja) * 2014-07-09 2019-01-16 カシオ計算機株式会社 楽音発生指示装置、楽音発生指示方法、プログラムおよび電子楽器
US10055948B2 (en) * 2015-11-30 2018-08-21 Nike, Inc. Apparel with ultrasonic position sensing and haptic feedback for activities
US9847079B2 (en) * 2016-05-10 2017-12-19 Google Llc Methods and apparatus to use predicted actions in virtual reality environments
WO2017196928A1 (en) 2016-05-10 2017-11-16 Google Llc Volumetric virtual reality keyboard methods, user interface, and interactions
KR101780151B1 (ko) 2016-07-08 2017-10-11 국민대학교산학협력단 음악 감상이 가능한 스마트 의복 및 그 제어방법
US9763285B1 (en) 2016-10-10 2017-09-12 At&T Intellectual Property I, L.P. Disengaging movement assistance
AT525615A1 (de) * 2021-11-04 2023-05-15 Peter Graber Oliver Vorrichtung und verfahren zur ausgabe eines akustischen signals basierend auf physiologischen daten

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01291292A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音発生制御装置
JPH01291294A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音制御装置
JPH01291291A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音制御装置
JPH0573047A (ja) * 1991-09-18 1993-03-26 Yamaha Corp 楽音発生制御装置
JPH05281968A (ja) * 1992-03-30 1993-10-29 Yamaha Corp 電子楽器
JPH07199945A (ja) * 1993-12-28 1995-08-04 Yamaha Corp 電子楽器
JPH08123418A (ja) * 1994-10-25 1996-05-17 Yamaha Corp ウェア型楽音制御装置
JPH11237878A (ja) * 1997-12-11 1999-08-31 Roland Corp 楽音信号を生成する電子楽器
JP2000267659A (ja) * 1999-03-17 2000-09-29 Yamaha Corp 動き検出用装着具
JP2004219947A (ja) * 2003-01-17 2004-08-05 Yamaha Corp 楽音編集システム

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04100097A (ja) * 1990-08-18 1992-04-02 Casio Comput Co Ltd 電子楽器
JP3398982B2 (ja) * 1992-09-02 2003-04-21 ヤマハ株式会社 電子楽器
JPH0727504A (ja) * 1993-07-14 1995-01-27 Yamaha Corp 曲げセンサ
US6539336B1 (en) * 1996-12-12 2003-03-25 Phatrat Technologies, Inc. Sport monitoring system for determining airtime, speed, power absorbed and other factors such as drop distance
US5875257A (en) * 1997-03-07 1999-02-23 Massachusetts Institute Of Technology Apparatus for controlling continuous behavior through hand and arm gestures
WO1998047426A1 (en) * 1997-04-21 1998-10-29 Virtual Technologies, Inc. Goniometer-based body-tracking device and method
US6610917B2 (en) 1998-05-15 2003-08-26 Lester F. Ludwig Activity indication, external source, and processing loop provisions for driven vibrating-element environments
JP2000020066A (ja) * 1998-06-30 2000-01-21 Yamaha Corp センサシステム
IL130818A (en) * 1999-07-06 2005-07-25 Intercure Ltd Interventive-diagnostic device
US7445550B2 (en) 2000-02-22 2008-11-04 Creative Kingdoms, Llc Magical wand and interactive play experience
WO2001086627A2 (en) * 2000-05-05 2001-11-15 Sseyo Limited Automated generation of sound sequences
US6888529B2 (en) * 2000-12-12 2005-05-03 Koninklijke Philips Electronics N.V. Control and drive circuit arrangement for illumination performance enhancement with LED light sources
JP4694705B2 (ja) 2001-02-23 2011-06-08 ヤマハ株式会社 楽音制御システム
EP1386472A4 (en) * 2001-02-27 2009-05-27 Anthrotronix Inc ROBOTIC APPARATUS AND WIRELESS TELECOMMUNICATIONS SYSTEM
US6388183B1 (en) 2001-05-07 2002-05-14 Leh Labs, L.L.C. Virtual musical instruments with user selectable and controllable mapping of position input to sound output
US7223913B2 (en) * 2001-07-18 2007-05-29 Vmusicsystems, Inc. Method and apparatus for sensing and displaying tablature associated with a stringed musical instrument
JP2003342892A (ja) * 2002-05-29 2003-12-03 Unitika Ltd 抄造用ポリイミド短繊維及びその製造方法並びに抄造物
US7565295B1 (en) * 2003-08-28 2009-07-21 The George Washington University Method and apparatus for translating hand gestures
US6969795B2 (en) * 2003-11-12 2005-11-29 Schulmerich Carillons, Inc. Electronic tone generation system and batons therefor
US7862045B2 (en) * 2004-02-10 2011-01-04 Bruce Hodge Method and apparatus for determining and retrieving positional information
JP4266370B2 (ja) * 2005-03-08 2009-05-20 Necトーキン株式会社 姿勢角度検出装置を用いた電子楽器およびその制御方法
WO2006103676A2 (en) * 2005-03-31 2006-10-05 Ronen Wolfson Interactive surface and display system
US20080136775A1 (en) * 2006-12-08 2008-06-12 Conant Carson V Virtual input device for computing

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01291292A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音発生制御装置
JPH01291294A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音制御装置
JPH01291291A (ja) * 1988-05-18 1989-11-22 Yamaha Corp 楽音制御装置
JPH0573047A (ja) * 1991-09-18 1993-03-26 Yamaha Corp 楽音発生制御装置
JPH05281968A (ja) * 1992-03-30 1993-10-29 Yamaha Corp 電子楽器
JPH07199945A (ja) * 1993-12-28 1995-08-04 Yamaha Corp 電子楽器
JPH08123418A (ja) * 1994-10-25 1996-05-17 Yamaha Corp ウェア型楽音制御装置
JPH11237878A (ja) * 1997-12-11 1999-08-31 Roland Corp 楽音信号を生成する電子楽器
JP2000267659A (ja) * 1999-03-17 2000-09-29 Yamaha Corp 動き検出用装着具
JP2004219947A (ja) * 2003-01-17 2004-08-05 Yamaha Corp 楽音編集システム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110312032A (zh) * 2019-06-17 2019-10-08 Oppo广东移动通信有限公司 音频播放方法及相关产品
CN110312032B (zh) * 2019-06-17 2021-04-02 Oppo广东移动通信有限公司 音频播放方法、装置、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
WO2008000039A1 (en) 2008-01-03
JP2009541801A (ja) 2009-11-26
US8830162B2 (en) 2014-09-09
US20090256801A1 (en) 2009-10-15
EP2041740A1 (en) 2009-04-01
AU2007264413A1 (en) 2008-01-03
EP2041740A4 (en) 2013-07-24
AU2007264413B2 (en) 2012-07-12

Similar Documents

Publication Publication Date Title
JP2013152482A (ja) 出力を生成するシステムおよび方法
US10895914B2 (en) Methods, devices, and methods for creating control signals
Miranda et al. New digital musical instruments: control and interaction beyond the keyboard
WO2020100671A1 (ja) 情報処理装置、情報処理方法及びプログラム
US20150103019A1 (en) Methods and Devices and Systems for Positioning Input Devices and Creating Control
CN112513974B (zh) 操控乐器时操纵杆张力随行程可变的输入装置及其使用方法
CN111433831A (zh) 信息处理装置、信息处理方法和程序
CN112805765B (zh) 信息处理装置
Turchet et al. Envisioning smart musical haptic wearables to enhance performers’ creative communication
Giordano et al. Design of vibrotactile feedback and stimulation for music performance
JP4665811B2 (ja) 演奏装置
Jessop The Vocal Augmentation and Manipulation Prosthesis (VAMP): A Conducting-Based Gestural Controller for Vocal Performance.
Davanzo et al. Netychords: An Accessible Digital Musical Instrument for Playing Chords using Gaze and Head Movements.
Kim et al. Developing humanoids for musical interaction
AU2012241079B2 (en) A system and method that generates outputs
Wöllner Anticipated sonic actions and sounds in performance
JP4815594B2 (ja) 演奏インターフェース
JP2023154236A (ja) 情報処理システム、情報処理方法およびプログラム
Siwiak et al. MUSIC TECHNOLOGY'S INFLUENCE ON FLUTE PEDAGOGY: A SURVEY OF THEIR INTERSECTION
Angell Combining Acoustic Percussion Performance with Gesture Control Electronics
KR20220001911A (ko) 가상 악기 장치 및 이를 포함한 가상 합주 시스템
Feitsch et al. Tangible and body-related interaction techniques for a singing voice synthesis installation
Cherukumilli Designing and Evaluating an Interface for the Composition of Vibro-Tactile Patterns Using Gestures
JP2001027896A (ja) マルチメディア・アート製作装置
Wilson Oo (30to 00 o/col_

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20131125

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140107

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140407

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20141028