TW202121394A - 從連續運動中產生聲音效果之方法及系統 - Google Patents

從連續運動中產生聲音效果之方法及系統 Download PDF

Info

Publication number
TW202121394A
TW202121394A TW109124329A TW109124329A TW202121394A TW 202121394 A TW202121394 A TW 202121394A TW 109124329 A TW109124329 A TW 109124329A TW 109124329 A TW109124329 A TW 109124329A TW 202121394 A TW202121394 A TW 202121394A
Authority
TW
Taiwan
Prior art keywords
motion
midi
movement
continuous
axis
Prior art date
Application number
TW109124329A
Other languages
English (en)
Inventor
羅夫 赫拉特
馬汀 史塔赫利
亞德里安 邁爾
Original Assignee
瑞士商麥克提克股份公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 瑞士商麥克提克股份公司 filed Critical 瑞士商麥克提克股份公司
Publication of TW202121394A publication Critical patent/TW202121394A/zh

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0033Recording/reproducing or transmission of music for electrophonic musical instruments
    • G10H1/0041Recording/reproducing or transmission of music for electrophonic musical instruments in coded form
    • G10H1/0058Transmission between separate instruments or between individual components of a musical system
    • G10H1/0066Transmission between separate instruments or between individual components of a musical system using a MIDI interface
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/428Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/54Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/814Musical performances, e.g. by evaluating the player's ability to follow a notation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • G10H1/0025Automatic or semi-automatic music composition, e.g. producing random music, applying rules from music theory or modifying a musical piece
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/02Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos
    • G10H1/04Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos by additional modulation
    • G10H1/053Means for controlling the tone frequencies, e.g. attack or decay; Means for producing special musical effects, e.g. vibratos or glissandos by additional modulation during execution only
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/46Volume control
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/201User input interfaces for electrophonic musical instruments for movement interpretation, i.e. capturing and recognizing a gesture or a specific kind of movement, e.g. to control a musical instrument
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/365Bow control in general, i.e. sensors or transducers on a bow; Input interface or controlling process for emulating a bow, bowing action or generating bowing parameters, e.g. for appropriately controlling a specialised sound synthesiser
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/391Angle sensing for musical purposes, using data from a gyroscope, gyrometer or other angular velocity or angular movement sensing device
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/395Acceleration sensing or accelerometer use, e.g. 3D movement computation by integration of accelerometer data, angle sensing with respect to the vertical, i.e. gravity sensing.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/4013D sensing, i.e. three-dimensional (x, y, z) position or movement sensing.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2230/00General physical, ergonomic or hardware implementation of electrophonic musical tools or instruments, e.g. shape or architecture
    • G10H2230/045Special instrument [spint], i.e. mimicking the ergonomy, shape, sound or other characteristic of a specific acoustic musical instrument category
    • G10H2230/051Spint theremin, i.e. mimicking electrophonic musical instruments in which tones are controlled or triggered in a touch-free manner by interaction with beams, jets or fields, e.g. theremin, air guitar, water jet controlled musical instrument, i.e. hydrolauphone
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/011Files or data streams containing coded musical information, e.g. for transmission
    • G10H2240/046File format, i.e. specific or non-standard musical file format used in or adapted for electrophonic musical instruments, e.g. in wavetables
    • G10H2240/056MIDI or other note-oriented file format
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/171Transmission of musical instrument data, control or status information; Transmission, remote access or control of music data for electrophonic musical instruments
    • G10H2240/201Physical layer or hardware aspects of transmission to or from an electrophonic musical instrument, e.g. voltage levels, bit streams, code words or symbols over a physical link connecting network nodes or instruments
    • G10H2240/211Wireless transmission, e.g. of music parameters or control data by radio, infrared or ultrasound

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

本發明係關於用於具體言之藉由透過一裝置中之一力感測器偵測一連續運動而從一連續運動中產生一聲音效果之方法及系統。展示一種用於從一連續運動中產生一聲音效果之方法。該方法包括提供一第一裝置之一步驟,其中該裝置經調適以偵測連續運動及一非運動狀態。該方法進一步包括定義至少一個第一運動參數之步驟,具體言之,該連續運動之一第一運動軸。一進一步步驟包括將至少一個第一midi頻道指派給該第一運動軸。針對該非運動狀態定義一基線值,且沿著該第一運動軸,定義有關該基線值之一值範圍。有關該基線值之此值範圍反映沿著該第一運動軸之一連續運動。接著,輸出有關該經偵測連續運動之一聲音效果。本發明之一個態樣或額外實施例包括定義至少一個第一運動參數之該步驟,其中該第一運動參數係經調適以偵測連續運動(A.1)及一非運動狀態的該第一裝置(99.1)之一空間定向之一個軸X、Y、Z上的一角範圍。

Description

從連續運動中產生聲音效果之方法及系統
本發明係關於用於具體言之藉由透過一裝置中之一力感測器偵測一連續運動而從一連續運動中產生一聲音效果之方法及系統。
本發明進一步係關於一種用於從呈若干同步化裝置之形式之一連續運動中產生一聲音效果之方法之實施方案,及一種經調適以執行該方法之電腦程式產品,其中可在能夠執行該方法之一電腦上執行該執行。進一步在獨立請求項之前言中強調本發明之該方法。
在娛樂行業中已知能夠將來源於一人之運動之一偵測力轉換為一數位信號之裝置。此等裝置(例如)配合遊戲控制器使用,其中控制器配備將一偵測運動轉變為任何類型之輸出(諸如視覺或聽覺信號)之運動感測器。多數此等裝置與一無線連接及一相關聯基地台協同工作,該基地台包括一處理器,該處理器接收無線傳輸信號且與一輸出單元(諸如一顯示器或揚聲器)工作連接用於輸出該信號。為了確保一身歷其境體驗,信號偵測與各自聲音效果之輸出之間的延時不應超過一特定臨限。
WO 2018/115488 A1描述一種將來自一感測單元之運動之一個偵測力轉換為一聽覺信號之配置及方法。此公開案之內容以引用方式包含於本文中。此文件教示一配置,其包括用於從至少一個經偵測力中產生一力信號之至少一個感測器,其中該配置包括用於此目的之一感測單元。
該配置進一步包括一處理單元,該處理單元經組態用於將力信號轉換為一數位聽覺信號。提出一midi信號作為數位聽覺信號。
文件進一步描述其揭示內容在「聲音繪畫」方面之一應用,即其中使用一或多個此等感測單元來偵測相感測單元之對於一起始位置的位置、一運動之一速度及一轉彎以及感測單元之一拍打以產生與運動型樣相對應之一實況聲音之一活動。此「聲音繪畫」可藉由用於將力信號與一預學習運動序列匹配之機器學習支援。
此外,按照本文件教示能夠將來源於一人的運動之一偵測力轉換為一數位信號用於藝術及舞蹈表演之目的之裝置之使用,期望藉由能夠將一運動型樣轉變為一特定聲音效果的裝置完全模擬一樂器。為此,一特定挑戰在於該方法如何處置連續運動,即,在一初始加速之後維持一特定進程或描述在不同加速狀態(諸如運動內之曲線或更快及更慢步伐)下之一運動型樣之運動。
因此,技術中需要提供一種能夠從一連續運動中產生一聲音效果之方法及系統,其中聲音效果提供儘可能身歷其境且克服背景技術之至少一個缺點之一娛樂體驗。
因此,本發明之一目的係提供如上文描述之克服背景技術之至少一個缺點之此一方法及系統,本發明之一進一步目的係提供一種具有至少一個裝置之系統,其能夠將該至少一個裝置之一連續運動轉換為聲音效果。
本發明之一個特定目的係藉由經調適以感測運動之裝置及用於將運動轉換為聲音效果之方法提供一樂器之一模擬。
本發明之至少一個目的已用根據獨立請求項之特性化部分之一方法及系統解決。
本發明之一個態樣係一種用於從一連續運動中產生一聲音效果之方法。該方法包括提供一第一裝置之一步驟,其中該裝置經調適以偵測連續運動及一非運動狀態。
該方法進一步包括定義至少一個第一運動參數之步驟,具體言之,該連續運動之一第一運動軸。
一進一步步驟包括將至少一個第一midi頻道指派給該第一運動軸。針對該非運動狀態定義一基線值,且沿著該第一運動軸,定義有關該基線值之一值範圍。有關該基線值之此值範圍反映沿著該第一運動軸之一連續運動。接著,輸出有關該經偵測連續運動之一聲音效果。
憑藉本發明之方法,可基於該第一裝置之該運動產生聲音效果且以實現一身歷其境體驗之一方式將所有此等聲音效果提供至一輸出裝置。
本發明之一個態樣或額外實施例包括定義至少一個第一運動參數之步驟,其中該第一運動參數係經調適以偵測連續運動(A.1)及一非運動狀態的該第一裝置(99.1)之一空間定向之一個軸X、Y、Z上的一角範圍。
在一具體實施例中,在複數個軸X、Y、Z上定義該角範圍,使得藉由該等軸定義一三維物體,具體言之自該第一裝置上之一點出發之一圓錐形。
在本發明之脈絡中,一連續運動可被理解為不因停止而中斷之一運動。該運動具有一特定起始點,一第一起始加速從該特定起始點自一運動狀態變換至一運動狀態。該連續運動可包括一系列手勢,諸如,執行一圓形運動、或一Z形運動、沿著一軸之一旋轉等等。該連續運動之一特性可為其不停止。只要運動停止,便可記錄一非運動狀態,且一重新開始之運動被視為不同於之前運動之一連續運動。為本發明起見,該連續運動及非運動狀態可被視為討論中之該裝置(即,第一裝置及/或第二裝置及/或第三裝置等)之連續運動或非運動狀態。
在本發明之脈絡中,一非運動狀態係一靜態狀態,其中未偵測到記錄有關使用者之運動之該裝置之相對加速。
針對本發明之脈絡,midi係電子樂器之一標準規格。
在本發明之一具體實施例中,該(等)裝置進一步經調適以偵測該非運動狀態之一結束及/或一開始。此可(例如)藉由為該裝置提供一力感測元件及/或用於偵測一絕對或相對運動之一感測器而達成,諸如,例如,用於量測且偵測線性加速之一加速度計、一陀螺儀、一磁力儀、GPS等。藉由具有一或多個各自力感測元件之此一裝置偵測之樣本連續運動可為手腕之輕搖、手臂之擺動、敲、拍、打、搖等。
在一進一步具體實施例中,使用該非運動狀態之一結束及/或一開始之此偵測來分別產生一midi-on及/或一midi-off信號。在一更進一步具體實施例中,使用該非運動狀態之一結束及/或一開始之偵測來產生一midi-on及/或一midi-off信號,且使該信號包括進一步資訊,諸如與該非運動狀態之該開始相關聯之該運動之一速度。此進一步資訊可用於定義所得聲音效果之音色之音量。
在本發明之一進一步實施例中,提供經調適以偵測一第二連續運動及一第二非運動狀態之該至少一個裝置。此可藉由提供一第二裝置達成。
在一特定實例中,可使用兩個裝置來同時產生兩組聲音效果,或藉由該兩個裝置經調適以例如,藉由使該第一裝置具有用於判定一音調聲之連續運動資訊且使該第二裝置具有用於判定一音調音高之連續運動資訊而一起操作以產生一特定聲音效果而產生兩組聲音效果。
在一進一步特定實例中,該第一裝置可用於產生關於音調聲之聲音效果。而該第二裝置可用於產生反映音質之聲音效果。實際上,不限制可連接裝置之數目及各裝置經定義以在同時聲音效果產生中或在協同聲音效果中產生之內容。例如,可設想藉由使用兩個裝置產生且模擬一雙手操作樂器之使用。在一進一步特定實例中,可設想調適一個裝置以產生反映彈吉他弦之聲音效果且調適一第二裝置以模擬用左手按弦。
在一具體實施例中,一音量歸於一連續運動之一速度。
在本發明之一進一步具體實施例中,在偵測到該非運動狀態之一結束之後產生一midi note-on。
在一具體實施例中,藉由一輸出裝置執行輸出。
在一進一步具體實施例中,該輸出裝置配備至少一個揚聲器或能夠建立與至少一個揚聲器之一通信。例如,可使用一處理器來從藉由該輸出裝置接收之該midi頻道及/或midi-on/midi-off信號產生一聲音效果。該輸出裝置可配備用於產生各種聲音效果之複數個揚聲器。例如,該輸出裝置可配備一低音揚聲器。該輸出裝置亦可配備用於產生該聲音效果之一視覺表示之一顯示器。此視覺表示可用於(例如)教示目的,且用於改良與用一樂器產生一聲音效果相關聯之特定運動。
在一具體實施例中,本發明之該方法進一步包括存取若干預定及儲存之聲音效果之步驟。(例如)藉由選擇待用本發明之該方法模擬之一樂器類型及/或藉由選擇一特定屬之連續運動之一特定類型聲音效果而執行該存取。亦可將一組特定聲音效果歸於根據本發明之一方法中使用之一個特定裝置。例如,進一步可自模擬自然聲音之一系列聲音效果選擇且將其等歸於一特定裝置。一進一步實例可包括將反映一特定樂器及/或人聲之使用之聲音效果歸於一第一或第二裝置。組合兩個裝置之該運動可接著導致反映基本運動之一雙音再現。
在一具體實施例中,在存取若干預定及儲存連續運動型樣及/或存取若干預定及儲存聲音效果之前應用一群集分析用於預評估一經偵測連續運動且判定一連續運動之一屬以及從該若干預定及儲存連續運動型樣及/或該若干預定及儲存聲音效果選擇該等連續運動之該特定屬之一特定類型聲音效果。
在一具體實施例中,該輸出裝置係一智慧型電話。
在一進一步具體實施例中,該輸出裝置進一步包括至少一個無線通信單元。
在本發明之一具體實施例中,該方法進一步包括用一輸出裝置接收至少一個第一midi頻道。
在一進一步具體實施例中,本發明之該方法包括自經調適以偵測連續運動及一非運動狀態之複數個裝置接收複數個midi頻道,使得從經偵測到之該複數個連續運動中產生複數個midi頻道。
在本發明之一具體實施例中,一優先級歸於藉由該輸出裝置接收之一midi連續控制器訊息(midi-continuous-controller--message)。甚至更具體言之,一優先級歸於具有最大連續運動改變之midi連續控制器訊息。
在本發明之脈絡中,連續運動之改變可被理解為反映該運動之一第一量測值與反映該運動之一第二量測值之間的改變。該第一量測值與該第二量測值之間的差愈大,歸於該midi連續控制器訊息之該優先級愈高。
在本發明之一具體實施例中,該接收係一無線接收。甚至更具體言之,該無線接收藉由短波長無線電波執行,較佳地藉由一藍芽協定執行。
在本發明之一具體實施例中,針對該連續運動定義至少一個第二軸及/或至少一個第三軸。尤其較佳地,視需要定義許多軸以完全反映三維空間中之該連續運動。
在本發明之一具體實施例中,該第一裝置經調適以偵測一連續運動及一非運動狀態且被指派給該使用者之一解剖構造平面。該聲音效果反映該解剖構造平面中之該經偵測連續運動且基於該平面預定。例如,作為定義各種平面之一方法,可定義一水平平面,其中一第一象限中之腰之上方、中間平面之右側及該水平平面之上方之所有事物與一組特定聲音效果相關聯,而該中間平面之左側及該水平平面之上方之所有運動可與另一組聲音效果相關聯。
本發明之一具體實施例在於此歸屬可針對該方法中使用之各裝置個別地執行。換言之,所產生之聲音效果依據是否在一第一象限中或在一第二象限中偵測到連續運動而不同,其中該第一象限在關於該使用者之該中間平面之右側且在該水平平面之上方且第二平面在使用者之該中間平面之左側且在該水平平面之上方。同時,可用在該使用者之該中間平面之左側及該使用者之該水平平面之上方之一第一象限及在該使用者之該中間平面之右側及該使用者之該水平平面之上方之一第二象限定義一第二裝置。
在一進一步具體實施例中,可定義一系列子平面用於進一步改良一組聲音效果。
在一特定實例中,其中使用四個裝置,每一個裝置附接至一肢端,該等裝置之各者經定義以產生取決於一第一象限之一組聲音效果,其中通常在人直立且不運動時定位該等裝置。(對於右手使用者)第一裝置之一第一象限可在該水平平面之上方且在該中間平面之右側,對於一左手使用者,一第二裝置之一第一象限可在該中間平面之左側且在該水平平面之上方。對於附接至右腿之一裝置,一第三裝置之一第一象限可在該水平平面之下方且在該中間平面之右側,且對於附接至一使用者之左腿之一第四裝置,一第四象限可在該中間平面之左側且該水平平面之下方。
在本發明之一具體實施例中,提供複數個裝置,且將使用者之一解剖構造平面指派給各裝置,且聲音效果有關該解剖構造平面中之經偵測連續運動且基於該解剖構造平面預定。
在本發明之一具體實施例中,該midi頻道係一midi-CC頻道且所有值在自0至127之範圍中。
在本發明之一具體實施例中,該基線值設定為64,且對於沿著該第一運動軸之一第一方向上之一運動,有關該基線之值範圍在自0至63之範圍中,且對於沿著該第一運動軸之一第二方向上之一運動,有關該基線值之值範圍在自65至127之範圍中。
在本發明之一進一步實施例中,提供經調適以偵測一連續運動及一非運動狀態之一第一裝置包括提供具有一處理單元之一裝置,該處理單元經調適以從藉由用於自該至少一個經偵測力產生一力信號之至少一個感測器偵測之(若干)力信號中辨識一預學習運動序列。尤其較佳地,此藉由應用一機器學習演算法且將該運動序列轉換為一數位聽覺信號(具體言之一midi信號、進一步具體言之一midi-CC及/或midi-on及/或midi-off)而執行。
在本發明之一具體實施例中,該裝置經調適以貼附至一使用者之一肢端。
在一項進一步具體實施例中,此可藉由具有該裝置之一閂鎖實現,該閂鎖可用於將該裝置貼附至一使用者之一肢端。當然,可設想用於將該裝置貼附至一使用者之一肢端之進一步方法,諸如黏著表面、Velcro等等。
憑藉本發明之該方法,提供一種方法,使用該方法,可藉由將運動(具體言之連續運動)轉變為聲音效果而模擬大量樂器。
本發明之一個進一步態樣係關於一種用於管理經調適以偵測一運動且產生一運動特定midi信號之複數個裝置之傳輸之系統。尤其較佳地,該運動特定midi信號係一midi-on音符及/或一midi-off音符及/或一midi-CC頻道,其值在0至127之範圍中。
該等傳輸係自該複數個裝置無線傳輸至一輸出單元。各信號包括可藉由該輸出單元轉換為一聲音效果之資訊。在本發明之此態樣中,各信號以一力感測與由該輸出單元輸出之間最大30毫秒之一延時輸出。尤其較佳地,一力感測與由該輸出單元輸出之間的該延時在10毫秒與20毫秒之間,甚至更佳地約為15毫秒。
針對本發明之系統,各信號經封裝於由選自由midi-on音符及/或midi-off音符及/或midi-CC頻道構成的群組之四個資訊區塊構成的一傳輸封包中。在具有含有最高變化之信號之該等傳輸係較佳的情況下確定該等傳輸封包之優先級。換言之,該系統經調適以確定含有最高數目個變化之信號之傳輸之優先級。
在一額外或替代性實施例中,確定具有midi-on資訊區塊之該等傳輸封包之優先級。換言之,該系統經調適以確定具有midi-on資訊區塊之傳輸封包之優先級。
在一具體實施例中,該系統經調適以藉由一通信協定傳輸該等傳輸。更佳地,該通信協定係一基於短波長無線電波之通信協定,諸如,例如,如相關藍芽標準中定義之一藍芽協定。
在本發明之一具體實施例中,該系統經調適以傳輸具有在1毫秒與30毫秒之間(較佳地在10毫秒與20毫秒之間,甚至更佳地15毫秒或約15毫秒)的大小之封包。更進一步較佳地,該系統經調適以傳輸最大30毫秒之傳輸封包。
對於熟習此項技術者而言,顯然上文描述之所有實施例可以互不相斥之任何組合在本發明之一實施方案中實現。
在以下章節中,本發明藉由特定實例及附圖進一步解釋,但不限於其等。熟習此項技術者可藉由研究且檢視此等實例及附圖推導進一步有利實施例。
為方便起見,在不同圖中,相同品項已用相同元件符號標記。該等附圖僅係示意性的。
圖1示意性展示可如何實施本發明之方法。此實例配合兩個裝置工作,即,一第一裝置99.1及一第二裝置99.2。此等裝置99.1、99.2由一使用者100操作。
針對此特定實例,裝置99.1、99.2可被假定為一手固持一個,或(例如)藉由一束帶貼附至左臂或右臂。在本實例中,一左手使用者100已藉由一束帶將一第一裝置99.1貼附至左手腕。第二裝置99.2亦貼附至一手腕,即,使用者100之右手腕。為便於簡化繪示,由四個象限定義運動之區域。一第一象限對應於可藉由移動左臂及左手而由第一裝置容易地存取之運動。此裝置在使用者之中間平面M之左側。此象限亦在使用者100之水平平面H之上方。第一裝置執行一連續運動A.1。本實例之方法在此簡化繪示中定義該連續運動A.1之一第一運動軸X.1。在本實例中,第一運動軸x.1對應於一笛卡爾座標系之x軸。藉由本發明,可將連續運動A.1表示為由一笛卡爾、三維座標系中之向量構成。
同時,一第二裝置執行一第二運動A.2。此運動亦可細分為複數個軸向運動,其中軸對應於一笛卡爾座標系之軸,其中一第一軸X.2及一第二軸Z.2在圖1中為繪示性目的展示。第二裝置99.2之運動亦繪示一加速,即,一連續運動之一開始。
在本發明之脈絡中,一連續運動之開始將用於產生一midi-note-on信號。同時,隨後,連續運動將用於產生一midi-CC信號。此信號用表示其中執行運動之軸之一值歸屬。該軸定義於本實例中起始運動之時間點且具有在0與127之間的一值,其中64被定義為基線,即,存在一非運動之值。取決於在沿著一軸之哪一方向上執行運動,為各自運動賦予高於或低於64之一值。
圖2展示可如何配置經調適以偵測連續運動之一裝置之樣本配置。樣本裝置10具有一殼體21,其中配置若干電組件。裝置10中心係一九軸感測器20,該九軸感測器20能夠偵測連續運動以及一非運動狀態。九軸感測器20配備若干整合式定向及運動感測器,諸如,例如,至少一加速度計(較佳地一三軸加速度計)、一陀螺儀(較佳地一三軸陀螺儀)、一地磁感測器(較佳地一三軸地磁感測器)。感測器之所需晶片組可整合於一單一接腳中。
感測器可藉由介面操作整合連接於裝置10中,該等介面用於將其連接至電源單元及控制器或處理單元。例示性裝置10進一步包括一信號處理單元16作為控制器,該信號處理單元16與九軸感測器20具有一功能性關係,且接收且處理藉由九軸感測器20提供之所有資訊。多數當代感測器配備已經調適以提供經偵測感測器資料之一第一參數化之韌體。若情況非如此,或若需要或期望進一步參數化,則信號處理單元16可經調適以提供期望或所需之參數化。
在本實例中,裝置藉由一蓄電池17供電,該蓄電池17功能性地連接至經調適以給蓄電池17無線充電之一充電電路18。為了用一充電纜線將裝置10連接至一插座,亦提供一充電連接器19。許多當前可用之充電接觸件(如本實施方案中所使用之一個接觸件)亦能夠充當一資料傳送接觸件,一充電/資料接觸件(例如,一Micro USB連接器)可在該資料傳送接觸件中與裝置10連接。為此,可在裝置10之外殼21上提供各自狹縫。
本實例亦具備一使用者介面15。在其最基本表現中,使用者介面15可為用於將裝置置於一操作狀態或關閉裝置之一簡單開/關按鈕。更複雜類型之裝置可配備一觸控螢幕,該觸控螢幕能夠提供對裝置之複數個功能之存取。此一使用者介面15可(例如)用於選擇裝置10之一操作模式,諸如,例如,待藉由裝置10模擬之特定樂器。使用者介面15亦可經調適以為裝置10提供對進一步輔助機件及裝置之存取,諸如,例如,用於將若干裝置鏈結在一起。在一特定實例中,若干裝置可歸於一特定頻道,使得若干裝置辨識屬於同一頻道之其他裝置。此可(例如)在由超過一人使用複數個裝置時用來防止裝置彼此混淆且在其等的表示中將特定類型之運動錯誤表示為音符。在此實例中,具有同一頻道之所有裝置瞭解其等(例如)屬於「1號弦樂器」,而具有另一頻道之所有裝置將其等自身識別為「2號弦樂器」。針對其他實施例,頻道可歸於一特定舞者或藝人且可在運動所歸屬之頻道之脈絡內處理該等運動。
本裝置10進一步包括一記憶體單元14,該記憶體單元14用於儲存各種樂器類型及樂器屬性。此記憶體14可特性化為一可移除類型之記憶體,諸如一SD卡,或其可固定地整合於裝置10中。該裝置進一步包括一微處理器系統13。
該裝置具有一無線連接性(諸如在本實例中,一藍芽單元12及一各自天線11)。藍芽單元12遵循藍芽標準5.0。
圖3展示若干裝置10.1、10.2、10.3可如何與若干智慧型電話30.1、30.2一起使用且藉由一雲端服務40與若干電腦41.1、41.2、41.3連接。裝置10.1、10.2、10.3藉由一無線藍芽連接性與智慧型電話30.1、30.2連接,該等智慧型電話30.1、30.2提供(例如)對操作模式及裝置10.1、10.2、10.3之能力之存取。智慧型電話可藉由一行動網路與一雲端資料庫40連接,該雲端資料庫40可提供樂器設定及音符組(如在下文之圖4a、圖4b之實例中展示)之一儲存庫且可用作電腦41.1、41.2、41.3上產生之內容之分佈系統。
藉由圖3中展示之設定,可建立不同類型之樂器組態之一分佈。
針對此實例,所有三軸運動用於笛卡爾座標系中且用於產生三個midi-CC信號用於輸出一聲音效果。在此實例中,沿著y軸之一運動用於觸發一midi-on音符及一音調且藉由一相對midi-CC頻道判定音調長度。絕對midi- CC值判定音調之音高。
一相對midi-cc訊息輸出感測器之定向改變之一速度。定向之原始位置不重要。相對midi-cc訊息反映定向之相對改變。
一絕對midi-cc訊息輸出空間中之感測器相對於x、y或z軸之一精確定向。絕對midi-cc訊息反映感測器之絕對定向,而無關於速度及定向之相對改變。
針對一弦樂器之模擬,y軸上之一相對midi-CC頻道之值藉由一左右運動判定。只要此值高於64 (例如,65或66,其中可預定臨限值),便觸發一midi-one音符。只要不觸發midi-off音符,便維持此midi-one音符。只要值保持高於64,便不觸發此。只要值達到64,便觸發一midi-off音符。若值下降至低於64,便觸發一進一步midi-on音符,只要值保持低於64,便維持該midi-on音符。此模擬運弓之精確行為。音調音高用在一實際弦樂器中將固持弦且亦用於控制音高之第二隻手及一第二裝置控制。此等經預定為與一y軸之一絕對值連接,其等可在本實例中被定義為產生高midi-cc值(只要手保持朝上)且一旦或只要一手朝下便產生低midi-cc值。此midi-cc值已與藉由相對midi-cc值觸發之midi-one音符之一音高值關聯。
針對此特定實例,八音度可映射至值0至127,且其可在一值在1或8個八音度之間時由一使用者調整或藉由裝置或軟體預定。一值設定愈多八音度,則音符之解析度可增加愈多。在一特定實例中,此意味著若許多八音度被放置於一軸(例如,Y軸)上,則達成一高解析度。所有八音度被依序放置且後續音符之間的距離係等距的。
在一替代性或額外態樣中,各音符用有關感測器或感測裝置之一定向之一特定軸上的一角範圍歸屬。例如,0度與5度之間的一角範圍歸於音符A,5度與10度之間的一角範圍歸於一音符B等。熟習此項技術者易於理解,此歸屬僅被解釋為一繪示性實例且最終對於該方法期望模擬之樂器之效能或類型係隨意的。
一快速運動產生x、y或z軸上之一高cc值或將所有其等加在一起。此cc值映射至一聲音之音量值。此導致更快運動中之聲音更響,且緩慢運動中之靜音。
提供圖4a用於繪示針對一弦樂器實施方案可在本發明之脈絡中工作之音符之一指派。音符on藉由有關運動範圍130內之操作者120在x軸上之運動控制。音高藉由y軸上之運動控制。運動範圍130內之感測裝置之定向判定輸出哪一音符。
當然,一給定拱形中配置之音符愈多,命中正確音符運動需要愈精確。圖4a中之所展示表示因此係本發明之一樣本實施方案。
音符配置於楔形扇區中,具有相對於一預定原點的一特定角度。以該特定角度定向該裝置導致歸於θ楔形向量之音符之發射。X軸上之運動產生midi note-on且一音高藉由Y軸上之運動控制。
已令人驚訝地發現,將音符歸於一操作者120之一運動範圍130內且將音符歸於感測裝置之一特定定向導致一直觀方法且可由操作者120快速學習。
經歸屬音符、note-on之定義及音高對於一弦樂器演奏者而言皆係令人驚訝地自然且直觀的,從而提供可容易地儲存且可攜帶至任何地方之一極佳訓練裝置。 實例2鋼琴
針對一鋼琴模擬,靠近或圍繞使用者之一水平平面界定一虛擬鍵盤。取決於持裝置之手之定向,演奏一不同類型之音調聲。因此,鍵盤係圍繞使用者之一虛擬鍵盤。一旦手以一臨限強度移動且在運動持續時間內保持,便用y軸上之一相對midi-CC觸發音調聲。
圖4b中之一鋼琴實施方案之各自樣本表示遵循不同於針對上文在圖4a中之弦樂器描繪之方法之一方法。
在此配置中,note-on藉由y軸上之運動判定,而音高藉由x軸上之運動控制。為了支援用於在軸向或水平軸上操作一鋼琴之鋼琴演奏者,圍繞操作者120之圓形配置在運動範圍130內被選擇為軸向且垂直於操作者。如同以上弦樂器,楔形向量定義音符。已發現此為一鋼琴模擬提供最直觀方法。 實例3吉他
針對此特定實例,圍繞固持或貼附裝置之手之手腕旋轉軸界定扇區。各弦映射至手腕之一特定位置角。例如,具有不同音調音高之五個弦可映射至一特定手腕旋轉。類似於此,使用者可藉由以類似於使手落在一真實吉他之弦上之一運動旋轉手腕而觸發聲音效果。第二隻手可用於控制各弦之音高。此可產生在空中彈吉他之一充分模擬。
10:樣本裝置 10.1:裝置 10.2:裝置 10.3:裝置 11:天線 12:藍芽單元 13:微處理器系統 14:記憶體單元 15:使用者介面 16:信號處理單元 17:蓄電池 18:充電電路 19:充電連接器 20:九軸感測器 21:殼體 30.1:智慧型電話 30.2:智慧型電話 40:雲端服務/雲端資料庫 41.1:電腦 41.2:電腦 41.3:電腦 99.1:第一裝置 99.2:第二裝置 120:操作者 130:運動範圍 A.1:連續運動 A.2:第二運動 H:水平平面 M:中間平面 X.1:第一運動軸 X.2:第一軸 Z.2:第二軸
圖1示意性描繪本發明之一實施例;
圖2係根據本發明之一裝置之示意性表示;
圖3係用於本發明之方法之一工作之一網路設定之示意性表示;
圖4a係弦樂器模擬之樣本指派,及
圖4b係鋼琴模擬之樣本指派。
99.1:第一裝置
99.2:第二裝置
A.1:連續運動
A.2:第二運動
H:水平平面
M:中間平面
X.1:第一運動軸
X.2:第一軸
Z.2:第二軸

Claims (20)

  1. 一種用於從一連續運動中產生一聲音效果之方法,其包括以下步驟: a.提供一第一裝置(99.1),其經調適以偵測連續運動(A.1)及一非運動狀態; b.界定至少一個第一運動參數,具體言之其中運動之該第一參數為該連續運動之一第一運動軸(X.1); c.將至少一個第一midi頻道指派給該第一運動參數(X.1); d.定義該非運動狀態之一基線值,且沿著該第一運動參數(X.1)定義有關該基線值且反映沿著該第一運動參數之一連續運動之一值範圍; e.輸出有關該經偵測連續運動之一聲音效果。
  2. 如請求項1之方法,其中該第一運動參數係經調適以偵測連續運動(A.1)及一非運動狀態的該第一裝置(99.1)之一空間定向之一個軸X、Y、Z上的一角範圍。
  3. 如請求項1或2中任一項之方法,其中一單一音符歸於界定相對於一操作者之一運動範圍130內之一預定原點的一特定角之一楔形扇區且該裝置經調適以偵測一特定楔形扇區內之運動且將其與該單一音符相關。
  4. 如請求項1至3中任一項之方法,其中該(等)裝置(99.1、99.2)進一步經調適以偵測該非運動狀態之一結束及/或一開始。
  5. 如請求項1至4中任一項之方法,其中提供至少一個第二裝置(99.2),其經調適以偵測一第二連續運動(A.2)及一第二非運動狀態。
  6. 如請求項1至5中任一項之方法,其中一聲音音量歸於一連續運動之一速度。
  7. 如請求項1至6中任一項之方法,其進一步包括將一midi-note-on指派給該非運動狀態之一結束。
  8. 如請求項1至7中任一項之方法,其中藉由一輸出裝置執行該輸出。
  9. 如請求項1至8中任一項之方法,其進一步包括用一輸出裝置接收至少一個第一midi頻道,具體言之自經調適以偵測連續運動(A.1、A.2;B.1、B.2;C.1;C.2)及一非運動狀態之複數個裝置(99.1、99.2)接收複數個midi頻道,使得複數個midi頻道從經偵測到之該複數個連續運動中產生。
  10. 如請求項9之方法,其中一優先級歸於藉由該輸出裝置接收之該等midi頻道,具體言之其中優先級歸於具有連續運動之最大改變之該midi頻道。
  11. 如請求項8或9中任一項之方法,其中該接收係一無線接收,具體言之,藉由短波長無線電波之一無線接收,甚至更具體言之一藍芽協定。
  12. 如請求項1至11中任一項之方法,其中針對該連續運動(A.1)定義至少一個第二軸(Y.1)及/或至少一個第三軸(Z.1)。
  13. 如請求項1至12中任一項之方法,其中經調適以偵測連續運動(A.1)及一非運動狀態的該第一裝置(99.1)被指派給使用者之一解剖構造平面(F、G、H)且有關該解剖構造平面中之該經偵測連續運動之該聲音效果為該平面(F、G、H)之一預定聲音效果。
  14. 如請求項13之方法,其中提供複數個裝置,且將該使用者之一解剖構造平面(F、G、H)指派給各裝置,且有關該解剖構造平面中之該經偵測連續運動之該聲音效果為該平面(F、G、H)之一預定聲音效果。
  15. 請求項1至13中任一項之方法,其中該midi頻道係一midi-CC頻道且值係在自0至127之範圍中之值。
  16. 如請求項15之方法,其中該基線值設定為64,且對於沿著該第一運動軸(X.1)之一第一方向(f1)上之一運動,有關該基線值之該值範圍在自0至63之範圍中,且對於沿著該第一運動軸(X.1)之一第二方向(f2)上之一運動,有關該基線值之該值範圍在自65至127之範圍中。
  17. 如請求項1至16中任一項之方法,其中a.提供經調適以偵測連續運動(A.1)及一非運動狀態之一第一裝置(99.1)包括提供具有一處理單元之一裝置,該處理單元經調適以具體言之藉由應用一機器學習演算法從藉由用於自該至少一個經偵測力產生一力信號之至少一個感測器偵測之(若干)力信號中辨識一預學習運動序列,且將該運動序列轉換為一數位聽覺信號,具體言之一MIDI信號。
  18. 如請求項1至17中任一項之方法,其中該裝置經調適以貼附至一使用者之一肢端。
  19. 如請求項1至18中任一項之方法,其中定義至少一個第二運動參數,具體言之,其中該第二運動參數係經調適以在空間中偵測連續運動(A.1)及一非運動狀態的該第一裝置(99.1)之一定向。
  20. 一種用於管理複數個裝置之傳輸之系統,該複數個裝置經調適以偵測一運動且產生一運動特定midi信號、具體言之一midi-on音符及/或一midi-off音符及/或具有在0至127之範圍中之值的一midi-cc頻道,其中 a.該等傳輸係自該複數個裝置無線傳輸至一輸出單元; b.各信號包括可藉由該輸出單元轉換為一聲音效果之資訊; c.各信號以一力感測與由該輸出單元輸出之間最大30毫秒、特具體言之在10毫秒與20毫秒之間的一延時輸出具體; d.各信號經封裝於由選自由midi-on音符及/或一midi-off音符及/或一midi-cc頻道構成的群組之四個資訊區塊構成的一傳輸封包中,及 其特徵在於 e.確定該等傳輸封包之優先級,其中具有含有最高變化之信號之該等傳輸係較佳的,及/或 f.確定具有midi-on資訊區塊之該等傳輸封包之優先級。
TW109124329A 2019-07-19 2020-07-17 從連續運動中產生聲音效果之方法及系統 TW202121394A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
PCT/EP2019/069584 WO2021013324A1 (en) 2019-07-19 2019-07-19 Emulating a virtual instrument from a continuous movement via a midi protocol
WOPCT/EP2019/069584 2019-07-19

Publications (1)

Publication Number Publication Date
TW202121394A true TW202121394A (zh) 2021-06-01

Family

ID=67551500

Family Applications (1)

Application Number Title Priority Date Filing Date
TW109124329A TW202121394A (zh) 2019-07-19 2020-07-17 從連續運動中產生聲音效果之方法及系統

Country Status (5)

Country Link
US (1) US20220270576A1 (zh)
EP (1) EP4000062A1 (zh)
KR (1) KR20220035448A (zh)
TW (1) TW202121394A (zh)
WO (1) WO2021013324A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6462264B1 (en) * 1999-07-26 2002-10-08 Carl Elam Method and apparatus for audio broadcast of enhanced musical instrument digital interface (MIDI) data formats for control of a sound generator to create music, lyrics, and speech
JP3867515B2 (ja) * 2001-05-11 2007-01-10 ヤマハ株式会社 楽音制御システムおよび楽音制御装置
CN105741639B (zh) * 2016-02-04 2019-03-01 北京千音互联科技有限公司 一种模拟弓弦类乐器的微感掌上乐器
US11393437B2 (en) 2016-12-25 2022-07-19 Mictic Ag Arrangement and method for the conversion of at least one detected force from the movement of a sensing unit into an auditory signal

Also Published As

Publication number Publication date
EP4000062A1 (en) 2022-05-25
KR20220035448A (ko) 2022-03-22
US20220270576A1 (en) 2022-08-25
WO2021013324A1 (en) 2021-01-28

Similar Documents

Publication Publication Date Title
US9542920B2 (en) Modular wireless sensor network for musical instruments and user interfaces for use therewith
US20190005733A1 (en) Extended reality controller and visualizer
CN105741639B (zh) 一种模拟弓弦类乐器的微感掌上乐器
CN102568453B (zh) 演奏装置及电子乐器
JP2018529167A (ja) オーディオファイルの頭部姿勢ミキシング
WO2020224322A1 (zh) 音乐文件的处理方法、装置、终端及存储介质
US9779710B2 (en) Electronic apparatus and control method thereof
WO2006070044A1 (en) A method and a device for localizing a sound source and performing a related action
CN105096924A (zh) 乐器及使用控制表面控制乐器和附件的方法
JP2013195645A (ja) 演奏装置、方法及びプログラム
JP5812663B2 (ja) 音楽演奏用プログラム、音楽演奏装置、音楽演奏システムおよび音楽演奏方法
CN109559720A (zh) 电子乐器及控制方法
WO2021233426A1 (zh) 乐器模拟系统
CN205486954U (zh) 一种模拟弓弦类乐器的微感掌上乐器
TW202121394A (zh) 從連續運動中產生聲音效果之方法及系統
US20230252963A1 (en) Computing Device
CN109739388B (zh) 一种基于终端的小提琴演奏方法、装置及终端
Mandanici et al. A conceptual framework for motion based music applications
US9954570B2 (en) Rotatable device
Bouillot et al. A Mobile Wireless Augmented Guitar.
Turchet et al. Smart Musical Instruments: Key Concepts and Do-It-Yourself Tutorial
JP2019128587A (ja) 演奏データの取込方法、及び楽器
Sourin Music in the air with leap motion controller
CN214504972U (zh) 一种智能乐器
Ketabdar et al. Digital music performance for mobile devices based on magnetic interaction