WO2020158661A1 - 楽器用調律器、演奏支援装置及び楽器管理装置 - Google Patents

楽器用調律器、演奏支援装置及び楽器管理装置 Download PDF

Info

Publication number
WO2020158661A1
WO2020158661A1 PCT/JP2020/002762 JP2020002762W WO2020158661A1 WO 2020158661 A1 WO2020158661 A1 WO 2020158661A1 JP 2020002762 W JP2020002762 W JP 2020002762W WO 2020158661 A1 WO2020158661 A1 WO 2020158661A1
Authority
WO
WIPO (PCT)
Prior art keywords
musical instrument
sensor
information
sensor device
tuning
Prior art date
Application number
PCT/JP2020/002762
Other languages
English (en)
French (fr)
Inventor
篤 梶原
昌甲 後藤
洋 宮島
修 新嶋
祐太 内海
松本 真
健斗 鈴木
Original Assignee
後藤ガット有限会社
群馬県
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 後藤ガット有限会社, 群馬県 filed Critical 後藤ガット有限会社
Priority to EP20749376.8A priority Critical patent/EP3920175A4/en
Priority to CN202080012074.0A priority patent/CN113474834A/zh
Publication of WO2020158661A1 publication Critical patent/WO2020158661A1/ja
Priority to US17/388,163 priority patent/US11948544B2/en

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/44Tuning means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G3/00Recording music in notation form, e.g. recording the mechanical operation of a musical instrument
    • G10G3/04Recording music in notation form, e.g. recording the mechanical operation of a musical instrument using electrical means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10GREPRESENTATION OF MUSIC; RECORDING MUSIC IN NOTATION FORM; ACCESSORIES FOR MUSIC OR MUSICAL INSTRUMENTS NOT OTHERWISE PROVIDED FOR, e.g. SUPPORTS
    • G10G7/00Other auxiliary devices or accessories, e.g. conductors' batons or separate holders for resin or strings
    • G10G7/02Tuning forks or like devices
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0008Associated control or indicating means
    • G10H1/0016Means for indicating which keys, frets or strings are to be actuated, e.g. using lights or leds
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/361Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
    • G10H1/366Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems with means for modifying or correcting the external signal, e.g. pitch correction, reverberation, changing a singer's voice
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H3/00Instruments in which the tones are generated by electromechanical means
    • G10H3/12Instruments in which the tones are generated by electromechanical means using mechanical resonant generators, e.g. strings or percussive instruments, the tones of which are picked up by electromechanical transducers, the electrical signals being further manipulated or amplified and subsequently converted to sound by a loudspeaker or equivalent instrument
    • G10H3/125Extracting or recognising the pitch or fundamental frequency of the picked up signal
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/081Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for automatic key or tonality recognition, e.g. using musical rules or a knowledge base
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/031Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal
    • G10H2210/091Musical analysis, i.e. isolation, extraction or identification of musical elements or musical parameters from a raw acoustic signal or from an encoded audio signal for performance evaluation, i.e. judging, grading or scoring the musical qualities or faithfulness of a performance, e.g. with respect to pitch, tempo or other timings of a reference performance
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2210/00Aspects or methods of musical processing having intrinsic musical character, i.e. involving musical theory or musical parameters or relying on musical knowledge, as applied in electrophonic musical tools or instruments
    • G10H2210/325Musical pitch modification
    • G10H2210/331Note pitch correction, i.e. modifying a note pitch or replacing it by the closest one in a given scale
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/005Non-interactive screen display of musical or status data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/395Acceleration sensing or accelerometer use, e.g. 3D movement computation by integration of accelerometer data, angle sensing with respect to the vertical, i.e. gravity sensing.
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2230/00General physical, ergonomic or hardware implementation of electrophonic musical tools or instruments, e.g. shape or architecture
    • G10H2230/005Device type or category
    • G10H2230/015PDA [personal digital assistant] or palmtop computing devices used for musical purposes, e.g. portable music players, tablet computers, e-readers or smart phones in which mobile telephony functions need not be used
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/095Identification code, e.g. ISWC for musical works; Identification dataset
    • G10H2240/101User identification
    • G10H2240/105User profile, i.e. data about the user, e.g. for user settings or user preferences
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2240/00Data organisation or data communication aspects, specifically adapted for electrophonic musical tools or instruments
    • G10H2240/171Transmission of musical instrument data, control or status information; Transmission, remote access or control of music data for electrophonic musical instruments
    • G10H2240/201Physical layer or hardware aspects of transmission to or from an electrophonic musical instrument, e.g. voltage levels, bit streams, code words or symbols over a physical link connecting network nodes or instruments
    • G10H2240/211Wireless transmission, e.g. of music parameters or control data by radio, infrared or ultrasound

Definitions

  • the present invention relates to a musical instrument tuning device, a performance support device, and a musical instrument management device used for tuning a musical instrument.
  • a tuning device used for tuning a musical instrument such as a guitar, a violin, a piano, a sax, a trumpet, and a flute is known (for example, refer to Patent Documents 1 and 2).
  • a conventional tuner is a power supply such as a battery for operating the entire device, a vibration sensor for detecting vibration of a musical sound caused by operation of a musical instrument, power on/off, tuning setting condition, display condition, etc.
  • Input means such as switches for inputting, display means for displaying tuning setting conditions and tuning status, calculation based on input from vibration sensor and operating means, and display information on display means
  • it is composed of a computer (CPU) for performing the operation.
  • the tuner is generally attached to the head of the stringed instrument.
  • the vibration of the musical sound generated by the operation is detected based on the output signal of the vibration sensor.
  • the frequency deviation between the detected frequency and the reference frequency is detected, and the tuning information is displayed on the display means based on the detection result. This allows the performer to tune the musical instrument while checking the tuning information displayed on the display means.
  • the sensitivity direction of the vibration sensor provided in the conventional tuner is only one axis, the sensitivity of the vibration sensor may be insufficient depending on the attitude (attached state) of the tuner attached to the musical instrument. It may not be possible to accurately capture the vibration of the musical sound generated from the.
  • the tuning device can be arranged so that the sensitivity of the vibration sensor becomes maximum with respect to the vibration of the musical sound generated from the musical instrument.
  • a countermeasure has a problem that it is not convenient for the performer because it imposes restrictions on the design of the musical instrument and the tuning instrument.
  • the vibration in the sensitivity direction of the vibration sensor may be weak at a specific frequency, and the vibration in other directions may be strong.
  • the conventional tuning device cannot accurately tune the musical instrument because the vibration sensor has a directivity in which the sensitivity is only in one axis direction.
  • Patent Documents 1 and 2 disclose a tuning device provided with a vibration sensor, these problems are not mentioned at all, and as a matter of course, a means for solving the problems is described. There is no suggestion.
  • the present invention has been made in view of such circumstances, and an object of the present invention is to provide a tuning device for musical instruments, which is easy to use and is capable of stable and accurate tuning. It is another object of the present invention to provide a performance support device and a musical instrument management device that can be realized by utilizing the functions provided in the musical instrument tuner.
  • a musical instrument tuner is a musical instrument tuner including a sensor device attached to a musical instrument and an operation device capable of mutually wirelessly communicating with the sensor device.
  • the sensor device includes an acceleration sensor having at least two detection axes, a frequency detection unit that detects, as a detection frequency, a frequency of a vibration of a musical sound generated by an operation of a musical instrument based on an output of the acceleration sensor, and a detection frequency.
  • the operating device includes a sensor-side communication unit that transmits transmission information including information about the operating device, and the operating device receives the transmission information transmitted from the sensor device, the operating-side communication unit, the display unit, and the sensor device. And a control unit that generates tuning information of the musical instrument based on the transmission information and causes the display unit to display the tuning information.
  • the acceleration sensor having two or more detection axes since the acceleration sensor having two or more detection axes is provided, it is easy to use, and stable and accurate tuning is possible.
  • a musical instrument tuner is the musical instrument tuning instrument according to the first aspect, wherein the acceleration sensor is a three-axis acceleration sensor having three detection axes.
  • a musical instrument tuner is the musical instrument tuning instrument according to the first or second aspect, wherein the operating device detects a frequency deviation between a detection frequency and a reference frequency corresponding to a note name to be tuned.
  • the deviation detecting means is further provided.
  • the operating device includes an operating unit that receives a setting operation of a tuning target, and the frequency deviation detecting unit receives the operating unit.
  • the reference frequency is set based on the setting operation.
  • a musical instrument tuner is the musical instrument tuning instrument according to the third or fourth aspect, wherein the frequency deviation detection means sets the reference frequency based on the detection frequency detected by the frequency detection means. It is a thing.
  • a musical instrument tuner is the instrumental tuning device according to any one of the third to fifth aspects, wherein the sensor device includes a posture detection unit that detects posture information of the musical instrument based on an output of the acceleration sensor.
  • the frequency deviation detection means is configured to set the reference frequency based on the attitude information detected by the attitude detection means.
  • a musical instrument tuner is a musical instrument tuner including a sensor device attached to a musical instrument and an operating device capable of mutually wirelessly communicating with the sensor device.
  • a sensor and a frequency detection means for detecting the frequency of the vibration of the musical sound generated by the operation of the musical instrument as a detection frequency based on the output of the acceleration sensor, and a posture detection for detecting the posture information of the musical instrument based on the output of the acceleration sensor.
  • Means and a sensor side communication means for transmitting the transmission information including information about the detection frequency to the operation device, the operation device, the operation side communication means for receiving the transmission information transmitted from the sensor device, the display means, And control means for generating tuning information of the musical instrument based on the transmission information received from the sensor device and displaying the tuning information on the display means.
  • the sensor-side communication unit transmits the detection signal output from the acceleration sensor to the operation device, and the operation side.
  • the communication means receives the detection signal transmitted from the sensor device, and the control means generates the performance support information for assisting the performance of the user in response to the detection signal during the performance of the musical instrument, and outputs the performance support information to the performance support information. Based on this, the display of the display means is controlled.
  • control means evaluates the performance situation in accordance with the detection signal, and causes the display means to display the evaluation result of the performance situation. It is the one.
  • a musical instrument tuner is the instrumental tuner according to the eighth or ninth aspect, wherein the control unit gives an instruction corresponding to the detection signal to an external device communicatively connected to the operation device. It is designed to be sent.
  • the control means causes the display means to display the musical score, and detects the progress status of the performance in accordance with the detection signal. However, according to the progress status of the performance, a display indicating the performance portion is displayed on the score or the page of the score is switched.
  • the sensor-side communication means transmits the detection signal output from the acceleration sensor to the operation device, and the operation device. Is further provided with a warning output means, and the control means causes the warning output means to output a warning when a motion is detected by the acceleration sensor when the musical instrument to which the sensor device is attached is not used. ..
  • the operation device further includes a warning output means
  • the control means includes a sensor device and an operation device.
  • the operation device further includes position information storage means, and the control means disconnects the link state between the sensor device and the operation device.
  • the position information of the operation device at the time of detecting the disconnection of the link state or the position information of the operation device immediately before the detection of the disconnection of the link state is acquired, and the position information storage means The position information is stored in.
  • a playing support apparatus includes a sensor device attached to a musical instrument and an operation device capable of mutually wirelessly communicating with the sensor device.
  • the sensor device outputs an acceleration sensor and an acceleration sensor.
  • Sensor side communication means for transmitting the detection signal to the operation device the operation device includes an operation side communication means for receiving the detection signal transmitted from the sensor device, a display means, and a detection signal during the playing of the musical instrument.
  • control means for generating performance support information for assisting the performance of the user and controlling the display of the display means based on the performance support information.
  • a musical instrument management apparatus includes a sensor device attached to a musical instrument and an operation device capable of mutually wirelessly communicating with the sensor device.
  • the sensor device outputs an acceleration sensor and an acceleration sensor.
  • Sensor-side communication means for transmitting the detection signal to the operating device
  • the operating device includes an operating-side communication means for receiving the detection signal transmitted from the sensor device, a warning output means, and a musical instrument to which the sensor device is attached.
  • a control means for causing the warning output means to output a warning when the motion is detected by the acceleration sensor when not used.
  • a musical instrument management apparatus includes a sensor device attached to a musical instrument and an operation device capable of mutually wirelessly communicating with the sensor device.
  • the sensor device outputs an acceleration sensor and an acceleration sensor.
  • a sensor side communication means for transmitting the detection signal to the operation device the operation device includes an operation side communication means for receiving the detection signal transmitted from the sensor device, a warning output means, a sensor device and the operation device.
  • a control unit that outputs a warning to the warning output unit when it is detected that the link state between them has been broken.
  • FIG. 1 is a block diagram showing a musical instrument tuner according to a first embodiment of the present invention.
  • FIG. 2 is a block diagram showing a sensor device according to the first embodiment of the present invention.
  • FIG. 3 is a block diagram showing an operating device according to the first embodiment of the present invention.
  • FIG. 4 is a flowchart showing a tuning method using the musical instrument tuner according to the first embodiment of the present invention.
  • FIG. 5 is a flowchart showing a performance support method according to the first embodiment of the present invention.
  • FIG. 6 is a diagram showing an example of a display showing the progress status of the performance.
  • FIG. 7 is a flowchart showing the musical instrument management method according to the first embodiment of the present invention.
  • FIG. 1 is a block diagram showing a musical instrument tuner according to a first embodiment of the present invention.
  • FIG. 2 is a block diagram showing a sensor device according to the first embodiment of the present invention.
  • FIG. 3 is a block diagram showing an operating device according to
  • FIG. 8 is a flowchart showing another example of the musical instrument management method according to the first embodiment of the present invention.
  • FIG. 9 is a block diagram showing a musical instrument tuner according to a second embodiment of the present invention.
  • FIG. 10 is a block diagram showing an operating device according to the second embodiment of the present invention.
  • FIG. 11 is a block diagram showing a server according to the second exemplary embodiment of the present invention.
  • FIG. 12 is a block diagram showing the relationship of data used in the performance support method according to the second embodiment of the present invention.
  • FIG. 13 is a flowchart showing a performance support method (performance guidance) according to the second embodiment of the present invention.
  • FIG. 14 is a block diagram showing the relationship of data used in the musical instrument management method according to the second embodiment of the present invention.
  • FIG. 15 is a flowchart showing a musical instrument management method according to the second embodiment of the present invention.
  • FIG. 1 is a block diagram showing a musical instrument tuner according to a first embodiment of the present invention.
  • the musical instrument tuner 1 includes a sensor device 10 and an operation device 50.
  • the sensor device 10 and the operation device 50 can wirelessly communicate with each other.
  • wireless LAN Local Area Network
  • WiFi registered trademark
  • Bluetooth registered trademark
  • WAN Wide Area Network
  • the sensor device 10 is attached to the musical instrument MI (see FIG. 3).
  • the musical instrument MI is a guitar
  • the sensor device 10 can be attached to its head by a clip.
  • the method of attaching the sensor device 10 to the musical instrument MI is not particularly limited, and can be selected according to the shape of the sensor device 10, the shape and type of the musical instrument.
  • the sensor device 10 may be directly attached to the musical instrument MI by an adhesive method, a screwing method, or the like, or may be indirectly attached via an attachment such as a clip.
  • the sensor device 10 converts the sound or vibration generated by the musical instrument MI into an electric signal (acoustic signal) to create transmission information, and transmits the transmission information to the operation device 50.
  • the operation device 50 demodulates the transmission information received from the sensor device 10 and acquires an acoustic signal. Then, the operation device 50 analyzes this acoustic signal, creates tuning information necessary for tuning the musical instrument MI, and displays it on the display unit 62 (see FIG. 3 ). As a result, the performer of the musical instrument MI (hereinafter referred to as the user) can tune the musical instrument MI while confirming the display of the tuning information.
  • FIG. 2 is a block diagram showing a sensor device according to the first embodiment of the present invention.
  • the sensor device 10 of this embodiment includes an acceleration sensor 12, a waveform shaping circuit 14, an arithmetic control unit 16, and a communication module 18.
  • the sensor device 10 includes a power supply unit that supplies power for operating each unit of the sensor device 10.
  • the power supply unit is composed of a primary battery or a secondary battery.
  • the acceleration sensor 12 is composed of a three-axis acceleration sensor having three detection axes (X axis, Y axis, Z axis) that are orthogonal to each other.
  • the acceleration sensor 12 has three sensors 12a, 12b, 12c corresponding to the respective detection axes, and the detection signals S x , S y , S for the respective detection axes from the respective sensors 12a, 12b, 12c.
  • z hereinafter, referred to as “output signals S x , S y , S z of the acceleration sensor 12 ”).
  • the output signals S x , S y , and S z of the acceleration sensor 12 are output to the waveform shaping circuit 14.
  • the value of this acceleration may be output as an AC value according to the frequency of vibration.
  • the acceleration sensor 12 may be a digital output type that outputs its output signals S x , S y , and S z as a digital signal, or may be an analog output type that outputs an analog signal.
  • the analog output type does not cause a delay in A/D (Analog-to-Digital) conversion, communication, etc. as compared with the digital output type, and therefore has a quick response to a change and is desirable for tuning a musical instrument.
  • an analog output type acceleration sensor 12 is used as an example.
  • the waveform shaping circuit 14 includes a band-pass filter (high-pass filter), an amplifier circuit, and the like, and filters the output signals S x , S y , and S z of the acceleration sensor 12 with a high-pass filter for each output signal, and outputs each output signal.
  • the noise component (low frequency component) contained in S x , S y , and S z is removed.
  • the waveform shaping circuit 14 amplifies each output signal by an amplifier circuit and converts it into a pulse-shaped waveform, and outputs the converted output signals S x , S y , and S z as output signals T x , T y , and T z. Output to the arithmetic control unit 16.
  • the arithmetic control unit 16 performs various processes on the output signals T x , T y , and T z of the waveform shaping circuit 14 and outputs the processed signals to the operation device 50.
  • the arithmetic control unit 16 includes a CPU (Central Processing Unit), a memory (RAM (Random Access Memory), a ROM (Read Only Memory), a non-volatile memory), an A/D converter, and other peripheral circuits.
  • the memory stores various data as well as a program for operating the CPU.
  • the arithmetic control unit 16 realizes the functions shown in FIG. 2 by the CPU executing the program stored in the memory.
  • the arithmetic control unit 16 functions as a signal selection unit 22, a frequency detection unit 24, a storage unit 30, a transmission information generation unit 32, and a posture detection unit 34.
  • Signal selection unit 22 the output signals T x, T y, T z of the waveform shaping circuit 14, the detection signal U the difference is largest output signal (the strongest signal) between the maximum value and the minimum value of the waveform amplitude And outputs the selected detection signal U to the frequency detector 24.
  • the strongest signal among the output signals T x , T y , and T z is used for tuning to suppress the influence on the mounting direction of the sensor device 10 and the characteristics of the musical instrument MI.
  • the present invention is not limited to this.
  • the combined output signal T x of the XYZ-axis, T y, the T z (e.g., addition) using a combined value obtained by the detection signal U it is possible to eliminate the need for selection of the axis ..
  • the frequency detection unit 24 detects the frequency of the detection signal U, which is the output signal of the signal selection unit 22, and outputs the detected frequency (hereinafter, referred to as “detection frequency”) F to the transmission information generation unit 32. To do. Specifically, the frequency detection unit 24 obtains the cycle of vibration by measuring the time between the zero-cross points at which the sign of the detection signal U input from the signal selection unit 22 changes. Then, the frequency detection unit 24 obtains the detection frequency from the period of this vibration and outputs it to the transmission information generation unit 32.
  • the frequency detecting section 24 is an example of the frequency detecting means of the present invention.
  • the transmission information generation unit 32 generates transmission information to be transmitted to the operating device 50 based on the detected frequency input from the frequency detection unit 24. It should be noted that the transmission information may be generated based on the cycle of vibration, and the detection frequency may be calculated on the side of the operating device 50 using information regarding the cycle of vibration.
  • the communication module 18 converts this transmission information into a communication signal and transmits it to the operation device 50.
  • the transmission information generation unit 32 and the communication module 18 are an example of the sensor side communication means of the present invention.
  • the operation device 50 receives an operation input from the user via the operation unit 56 and sets a note name (for example, a string number, a string name, etc. in the case of a guitar) to be tuned. Accept the setting operation.
  • the operation device 50 uses the transmission information transmitted from the sensor device 10 to generate tuning information related to the note name that is the tuning target, and displays the tuning information on the display unit 62. This allows the user to tune the musical instrument M1 while looking at the tuning information displayed on the display unit 62.
  • the setting operation of the pitch name or the like to be tuned is accepted via the operation unit 56, but it is also possible to use the acceleration sensor 12 as an input means to accept the setting operation. ..
  • the output signals S x , S y , and S z of the acceleration sensor 12 include accelerations that change depending on the tilt state (posture) of the sensor device 10 attached to the musical instrument, in addition to the vibration of the musical sound generated by the operation of the musical instrument.
  • the signal (gravitational acceleration) is included. Therefore, the posture detection unit 34 detects the posture information indicating the posture of the musical instrument by detecting changes in the output signals S x , S y , and S z of the acceleration sensor 12.
  • the value of the gravitational acceleration detected by the acceleration sensor 12 may be output as a DC bias value.
  • the posture detection unit 34 detects posture information indicating the posture (tilt, direction) of the musical instrument to which the sensor device 10 is attached, based on the output signals S x , S y , and S z of the acceleration sensor 12.
  • the posture information detected by the posture detection unit 34 can be transmitted to the operation device 50 via the transmission information generation unit 32.
  • the posture detection unit 34 is an example of the posture detection unit of the present invention.
  • the operation device 50 stores the relationship between the change in acceleration when the musical instrument MI is shaken up and down and the operation content.
  • the operation device 50 can receive the operation input by acquiring the change in the acceleration detected by the posture detection unit 34 of the sensor device 10 and detecting the movement of the musical instrument MI to which the sensor device 10 is attached. Further, operation input may be made possible by a combination of the posture of the sensor device 10 attached to the musical instrument MI and an operation on the musical instrument MI. For example, when the musical instrument MI is a guitar, an operation input may be made possible by a combination of the direction and tilt angle of the guitar and an operation (vibration) on a specific string.
  • angular velocity sensor (gyro sensor) in addition to the acceleration sensor 12, the behavior of the user may be detected in more detail and used for operation input.
  • FIG. 3 is a block diagram showing an operating device according to the first embodiment of the present invention.
  • the operation device 50 includes a control unit 52, a storage 54, an operation unit 56, a power supply unit 58, a display control unit 60, a display unit 62, an audio output control unit 64, a speaker 66, and
  • the communication module 68 and the external connection interface (external connection I/F) 70 are included.
  • the operation device 50 may be a dedicated device, but by applying software or a program for realizing the function according to the present embodiment to a general-purpose device such as a smart phone, a tablet terminal, a personal computer, etc. It can also be realized.
  • the control unit 52 includes a CPU that controls the operation of each unit of the operation device 50 and an SDRAM (Synchronous Dynamic Random Access Memory) used as a work area of the CPU.
  • the control unit 52 receives an operation input from the user via the operation unit 56, transmits a control signal corresponding to the operation input to each unit of the operation device 50, and controls the operation of each unit.
  • the control unit 52 functions as a tuning information generation unit 520, a performance support information generation unit 522, a motion determination unit 524, a link state detection unit 526, a position information acquisition unit 528, and a warning output unit 530.
  • the storage 54 includes a non-volatile memory that stores programs executed by the CPU and data.
  • a non-volatile memory included in the storage 54 for example, a storage device including a flash memory such as an SSD (Solid State Drive) and an eMMC (embedded Multi Media Card), and a storage device including a magnetic disk such as an HDD (Hard Disk Drive). Etc. can be used.
  • the operation unit 56 is a unit that receives an operation input from a user.
  • a touch panel provided on the surface of the display unit 62, a pointing device such as a mouse, a keyboard, or the like can be used.
  • the operation unit 56 is an example of the operation means of the present invention.
  • the power supply unit 58 includes a primary battery or a secondary battery for supplying electric power to each unit of the operation device 50.
  • the power supply unit 58 may include a power supply adapter that converts the commercial power supply into a state suitable for the operation device 50.
  • the display control unit 60 generates an image signal according to the control signal from the control unit 52 and inputs it to the display unit 62.
  • the control unit 52 and the display control unit 60 are an example of the control means of the present invention.
  • the display unit 62 is a means for displaying an operation GUI (Graphical User Interface) and an image (for example, a liquid crystal display), and displays the image according to the image signal input from the display control unit 60.
  • the display unit 62 is an example of the display unit of the present invention.
  • the voice output control unit 64 generates a voice signal according to the control signal from the control unit 52 and causes the speaker 66 to output a voice.
  • the control unit 52 may automatically disable the voice output function of the operation device 50.
  • the communication module 68 is a means for making a communication connection with the sensor device 10.
  • the communication module 68 converts the control signal output from the control unit 52 into a signal for communication and transmits the signal to the sensor device 10. Further, the communication module 68 inputs the data obtained by demodulating the signal received from the sensor device 10 to the control unit 52.
  • the communication module 68 is an example of the operating-side communication means of the present invention.
  • the operation device 50 is communicatively connected to external devices E1 and E2 such as effectors via an external connection I/F 70.
  • FIG. 3 illustrates the external device E1 connected to the operation device 50 via the musical instrument MI and the external device E2 directly connected to the operation device 50, the external device connection method and the number of connected devices. Is not limited to this.
  • the external connection I/F 70 converts the control signal from the control unit 52 into a signal for communication and transmits it to the external devices E1 and E2. Accordingly, the user can set the volume adjustment (amplification, attenuation, compression, etc.) by the effector or the like via the operation device 50. Further, the external connection I/F 70 may demodulate the information regarding the settings received from the external devices E1 and E2 and input the demodulated information to the control unit 52.
  • the communication method between the operating device 50 and the external devices E1 and E2 may be wired or wireless.
  • FIG. 4 is a flowchart showing a tuning method using the musical instrument tuner according to the first embodiment of the present invention.
  • the operating device 50 and the sensor device 10 are operated by the operating device 50 or the sensor device 10 in response to an operational input from the operating device 50 or the sensor device 10. Is set to the tuning mode for tuning.
  • the operation device 50 receives an operation input from the user and performs a tuning target setting operation (step S10).
  • the tuning target is not limited to the note name corresponding to each of the plurality of strings, but the string number or string name may be set.
  • an operation signal corresponding to the setting operation is transmitted from the operation device 50 to the sensor device 10.
  • the musical sound generated by the user's operation of the musical instrument MI is input to the sensor device 10 (step S12).
  • the acceleration sensor 12 provided in the sensor device 10 detects the vibration of the musical sound input to the sensor device 10 (step S14).
  • the output signals S x , S y , and S z of the acceleration sensor 12 are input to the signal selection unit 22 via the waveform shaping circuit 14, and the output signal having the largest difference between the maximum value and the minimum value of the waveform amplitude is for detection. Selected as signal U. Then, the frequency detection unit 24 detects the frequency of the selected detection signal U as the detection frequency F (step S16).
  • the transmission information generation unit 32 generates transmission information based on the detected frequency input from the frequency detection unit 24. Then, this transmission information is transmitted from the sensor device 10 to the operation device 50 (step S18).
  • the communication module 68 demodulates the transmission information received from the sensor device 10 and inputs it to the control unit 52. Then, the control unit 52 (tuning information generation unit 520) generates tuning information for supporting tuning by the user based on this transmission information (step S20).
  • control unit 52 acquires the detection frequency F corresponding to the operation of the musical instrument MI to which the sensor device 10 is attached from the transmission information, and outputs the sound based on the detection frequency F. Determine high and pitch.
  • control unit 52 reads out the reference frequency F 0 corresponding to the note name set as the tuning target in step S10 from the storage 54, and deviates the detected frequency F from the reference frequency F 0 (hereinafter , “Frequency deviation”) ⁇ F is detected.
  • the tuning information generation unit 520 is an example of the frequency deviation detecting means of the present invention.
  • the control unit 52 (tuning information generation unit 520) outputs the generated tuning information to the display control unit 60.
  • the display control unit 60 uses the tuning target pitch name (or string number, string name, etc.), pitch, pitch, and frequency deviation ⁇ F from the reference frequency F 0 determined from the pitch name.
  • the display unit 62 is displayed on the display unit 62 (step S22).
  • tuning information a suggestion of a specific operation on the musical instrument MI (for example, suggestion regarding which bobbin to tighten or loosen in the case of a guitar) and the like are displayed on the display unit 62.
  • the information displayed on the display unit 62 is not limited to these pieces of tuning information, and may include other pieces of tuning information.
  • step S24 when the tuning is continued, the musical sound generated by the user's operation of the musical instrument MI is input again (Yes in step S24). Then, steps S12 to S22 are repeated and the tuning information is displayed on the display unit 62 (step S22).
  • step S26 When the tuning of all the musical tones to be tuned (for example, the strings of the guitar) is completed and an instruction to end the tuning is input from the operation unit 56 of the operation device 50 (Yes in step S26), the tuning in the operation device 50 is performed. The mode ends (step S28). Then, a tuning end instruction is transmitted from the operation device 50 to the sensor device 10, and the tuning mode is also ended in the sensor device 10 (step S30).
  • the vibration of the musical sound generated by the operation of the musical instrument is detected by the acceleration sensor 12. Since the acceleration sensor 12 is composed of a three-axis acceleration sensor having three detection axes that are orthogonal to each other, the output signal of the detection axis having the highest signal strength among the output signals of the three detection axes is used to generate a musical instrument. It is possible to detect the frequency (detection frequency F) of the vibration of the musical sound generated by the operation of. As a result, the vibration of the musical sound generated from the musical instrument can be accurately captured without being affected by the mounting position or orientation of the sensor device 10 with respect to the musical instrument. Therefore, it is easy to use, and stable and accurate tuning is possible.
  • the acceleration sensor 12 is configured by a three-axis acceleration sensor, but the present invention is not limited to this, and the acceleration sensor 12 is a two-axis acceleration sensor having two detection axes orthogonal to each other. It may be configured. Also in this case, the tuning is more convenient, and stable and accurate tuning is possible, as compared with the conventional tuning machine provided with the vibration sensor having the sensitivity in only one axis direction.
  • the tuning mode is set and ended from the operation unit 56 of the operation device 50, but the acceleration sensor 12 of the sensor device 10 is used to detect a change in acceleration associated with the operation content.
  • the setting and ending of the tuning mode may be instructed.
  • setting and ending of the tuning mode may be individually instructed to the sensor device 10 and the operation device 50.
  • the data transmitted from the sensor device 10 to the operation device 50 may be, for example, the ID information of the sensor device 10, the value of each axis of the acceleration sensor 12, the cycle value of any axis of the acceleration sensor 12, and the like.
  • the operation device 50 allows the type of data to be transmitted to be the minimum necessary.
  • the detection frequency F and the frequency deviation ⁇ F are calculated from the strongest signal among the values of the three axes of the acceleration sensor 12 or the combined value of the values of each axis, and the frequency deviation ⁇ F is manipulated. It is transmitted to the device 50. As a result, the amount of data transmitted between the sensor device 10 and the operating device 50 in the tuning mode can be suppressed, and the batteries of the respective power supply units can be made to last longer.
  • FIG. 5 is a flowchart showing a performance support method according to the first embodiment of the present invention.
  • step S40 when the performance support mode is set on the operation device 50 (step S40), an instruction to set the performance support mode is transmitted to the sensor device 10.
  • the calculation control unit 16 of the sensor device 10 receives the instruction to set the performance support mode, the calculation control unit 16 starts detecting the motion during the performance (step S42).
  • the operation device 50 is in a state of waiting for the input of the operation of the musical instrument MI from the sensor device 10 (step S44).
  • the transmission information generation unit 32 detects the motion including the information of the acceleration for each XYZ axis and its time change. Generate transmission information including measurements.
  • the communication module 18 transmits this transmission information to the operation device 50 (step S48).
  • the detection signal from the acceleration sensor 12 may be used as it is as the measurement value of the movement.
  • the control unit 52 (motion determination unit 524) analyzes the measurement value of the motion received from the sensor device 10 and determines the motion of the musical instrument MI (step S50).
  • the control unit 52 (performance support information generation unit 522) generates performance support information for assisting the performance of the user according to the movement of the musical instrument MI.
  • the control unit 52 controls the display control unit 60 to control the display on the display unit 62 based on the performance support information to provide performance support to the user (step S52).
  • the control unit 52 (the performance support information generation unit 522 and the operation determination unit 524) analyzes the performance status based on the signal output from the acceleration sensor 12 of the sensor device 10, and the performance support information. Can be generated. For example, in the sensor device 10, the arithmetic control unit 16 determines an optimum value from the axis value (for example, the strongest signal) of the acceleration sensor 12 that best captures the playing situation of the musical instrument MI, or the combined value of the values of each axis. The calculated data is transmitted to the operation device 50. Here, when there is a margin in the transmission band between the sensor device 10 and the operation device 50, the sensor device 10 transmits the data of all three XYZ axes to the operation device 50, and the operation device 50 side is optimal. The value may be calculated.
  • the control unit 52 performs FFT (Fast Fourier Transform) analysis or the like using the optimum value or the data of all three axes, and determines the pitch, the state of chords, the tempo, etc. being played. calculate.
  • the control unit 52 outputs these calculated values to the display control unit 60 and causes the display unit 62 to display them. This allows the user to play or practice while referring to the calculated value displayed on the display unit 62 of the operation device 50.
  • FFT Fast Fourier Transform
  • control unit 52 reads the musical score of the music being played, and compares the calculated pitch with the pitch read from the musical score to evaluate the performance status. It is also possible to display the evaluation result of the performance status (for example, a score indicating the evaluation of the performance status or a message such as “tempo is too fast”) on the display unit 62.
  • the control unit 52 stores in advance the correspondence relationship between the movement (motion) of the musical instrument MI and the instruction content to the external devices (E1, E2) such as effectors. Keep it. Then, the control unit 52 detects the action applied to the musical instrument MI based on the signal indicating the magnitude and direction of the acceleration transmitted from the sensor device 10, and instructs the external device (E1, E2) to change the setting. Send.
  • the volume is increased, or when the head of the guitar as the musical instrument MI is shaken (acceleration or angular velocity with respect to a certain axis is cyclical). It is possible to correlate the action added to the musical instrument MI with the instruction content, such as expanding or compressing the change range of the volume when the change occurs. This allows the user to easily give instructions to external devices (E1, E2) such as effectors during a performance.
  • external devices E1, E2
  • the instruction content (for example, “the volume has been increased.” and “the change range of the volume has been expanded.”) output to the external device (E1, E2) is displayed on the display unit 62 of the operation device 50. Then, the user may be allowed to confirm whether or not the intended instruction is given.
  • the control unit 52 may display the musical score of the music being played on the display unit 62 in the performance support mode.
  • the format of the musical score data for example, PDF (Portable Document Format), PostScript, EPS (Encapsulated PostScript), ePub (electronic Publication), Music XML (eXtensible Markup Language), etc., or a proprietary format of the musical score creating software, etc. Any form of can be used.
  • score data may be stored in the storage 54 in advance, or may be acquired via the Internet or the like (see the second embodiment).
  • the control unit 52 detects the progress status of the performance in accordance with the measured value of the movement of the musical instrument MI, and, as shown in FIG. 6, superimposes and displays an image such as an arrow indicating the performance location on the score, Move it according to the progress of the performance. (3-2) Further, the control unit 52 may perform page turning of the score according to the progress status of the performance, or may return page of the score according to the movement of the musical instrument MI. (3-3) Further, the control unit 52 may increase or decrease the number of pages of the musical score displayed on one screen according to the speed of performance (for example, the number of pages increases as the performance speed increases).
  • the motion detection is performed by either the sensor device 10 or the operation device 50. You may go in.
  • the motion applied to the musical instrument MI by the user is very slow (the frequency is small) as compared with the vibration caused by the performance of the musical instrument MI (for example, the vibration of the strings). Therefore, the amount of information to be transmitted can be reduced by lowering the sampling frequency of the acceleration sensor 12 and the angular velocity sensor (for example, about 100 Hz). Also, the number of quantization bits of a signal for motion detection can be reduced from 12 bits to 8 bits.
  • the performance support of (1) and the motion detection of (2) and (3) can be realized at the same time if the transmission band between the sensor device 10 and the operation device 50 has a margin. This is because the data obtained from the acceleration sensor 12 and the angular velocity sensor can be transmitted to the operation device 50 as much as possible, and the operation device 50 can separate and use the information.
  • the absolute values of the data of the three axes of the acceleration sensor 12 may be compared and only the data of one axis having the maximum absolute value may be the analysis target. Further, when the motion is flat, only the biaxial data excluding the data having the smallest absolute value may be analyzed.
  • the arithmetic control unit 16 determines that the performance has ended (Yes in step S54), and ends the performance support mode. (Step S56). Further, the arithmetic control unit 16 transmits an instruction to end the performance support mode to the operation device 50, and ends the performance support mode in the operation device 50 (Yes in step S58 and step S60).
  • the present embodiment it is possible to facilitate the performance of the user by determining the progress status of the performance by using the acceleration sensor 12 of the musical instrument tuner 1 and controlling the display of the score.
  • the operation device 50 instructs the sensor device 10 to set the performance support mode, and on the basis of the judgment of the performance end in the sensor device 10, the performance support mode end command is issued.
  • the sensor device 10 may instruct the operation device 50 to set the performance support mode, the operation device 50 may instruct to end the performance support mode, or the sensor device 10 and the operation device 50.
  • the operation input for setting and ending the performance support mode may be individually performed.
  • FIG. 7 is a flowchart showing the musical instrument management method according to the first embodiment of the present invention.
  • step S70 when the musical instrument management mode is set in the operation device 50 (step S70), a setting instruction for the musical instrument management mode is transmitted to the sensor device 10.
  • the arithmetic control unit 16 of the sensor device 10 receives the setting instruction to the musical instrument management mode, the arithmetic control unit 16 starts detecting the movement when the musical instrument is not playing (when the musical instrument is not used, for example, when the musical instrument is stored or when the musical instrument is resting). S72).
  • the operation device 50 is in a state of waiting for the input of the operation of the musical instrument MI from the sensor device 10 (step S74).
  • the musical instrument management mode may be automatically set when, for example, it is detected that the musical instrument MI to which the sensor device 10 is attached is stored in the case.
  • the instrument management mode may be automatically set when the sensor for short range communication is detected by the sensor device 10.
  • the sensor device 10 may be provided with an optical sensor (for example, a photodiode, a solar cell, etc.).
  • the musical instrument MI to which the sensor device 10 is attached is housed in a case when the detection output from the optical sensor is less than or equal to a predetermined value or when the state of being less than or equal to the predetermined value continues for a predetermined time
  • the instrument management mode may be automatically set, or a magnet may be attached to the case in which the instrument MI is housed, a hall sensor may be attached to the sensor device 10, and the ⁇ 4> hall sensor may be installed.
  • the instrument management mode may be automatically set when the magnet of the case is detected.
  • the transmission information generation unit 32 detects the motion including the information of the acceleration for each of the XYZ axes and its time change. Generate transmission information including measurements.
  • the communication module 18 transmits this transmission information to the operation device 50 (step S78).
  • the control unit 52 (motion determining unit 524) analyzes the measurement value of the motion received from the sensor device 10 and determines the motion of the musical instrument (step S80).
  • the control unit 52 (warning output unit 530) outputs a control signal instructing the display control unit 60 and the sound output control unit 64 to output a warning.
  • a warning is displayed on the display unit 62 and a warning sound is output from the speaker 66 (step S82), and the process returns to step S74.
  • steps S80 to S82 for example, when the movement of the musical instrument MI to which the sensor device 10 is attached is detected while the musical instrument MI is stored, a warning is output to prevent the musical instrument MI from falling or moving. You can inform the user. This makes it possible to prevent the musical instrument MI from being lost or stolen.
  • step S84 when ending the musical instrument management mode and turning off the power, an instruction to turn off the power is input from the operation unit 56 of the operation device 50 (Yes in step S84), and the power of the operation device 50 is turned off (step S84). S86). Then, a power OFF instruction is transmitted from the operation device 50 to the sensor device 10 (Yes in step S88), and the power of the sensor device 10 is turned off (step S90).
  • the present embodiment it is possible to notify the user of the overturning or movement of the musical instrument MI by detecting the movement of the musical instrument MI during non-performance by using the acceleration sensor 12 of the musical instrument tuner 1. This makes it possible to prevent the musical instrument MI from being lost or stolen.
  • FIG. 8 is a flowchart showing another example of the musical instrument management method according to the first embodiment of the present invention.
  • step S100 when the musical instrument management mode is set on the operation device 50 (step S100), a setting instruction for the musical instrument management mode is transmitted to the sensor device 10.
  • the arithmetic control unit 16 of the sensor device 10 receives the instruction to set the musical instrument management mode, the arithmetic control unit 16 starts monitoring the link state (whether communication is possible or not) and enters a response request waiting state (steps S102 to S118). ).
  • the control unit 52 (link state detection unit 526) of the operation device 50 transmits a response request signal requesting a response to the sensor device 10 every predetermined time (for example, 1 second to several seconds) (step S104).
  • the response request signal reaches the sensor device 10, and the sensor device 10 sends the operation device 50 a response signal to the response request signal. Is transmitted (Yes in step S106 and step S108).
  • the response request signal and the response signal may include ID (Identification) information for identifying the operation device 50 and the sensor device 10, respectively.
  • the control unit 52 receives the response signal from the sensor device 10 (step S110) to determine whether the link state with the sensor device 10 is continuing. By repeating the processing from steps S102 to S112 every predetermined time, the link status can be continuously monitored.
  • the control unit 52 (warning output unit 530) outputs a control signal for instructing the display control unit 60 and the sound output control unit 64 to output a warning, and displays a warning on the display unit 62 and a warning sound from the speaker 66. Is output (step S114).
  • step S114 a warning is output at the time when it is detected that the communication connection between the sensor device 10 and the operation device 50 is broken (the time when the link is broken), so that the musical instrument MI may be lost or stolen due to misplacement. It becomes possible to prevent.
  • the warning output unit 530, the display unit 62, and the speaker 66 are examples of the warning output unit of the present invention.
  • control unit 52 acquires position information indicating the current position of the operation device 50, and stores the position information and warning information including information on the date and time when the link is broken in the storage 54. It is stored (step S116).
  • the position information may be acquired, for example, from the access point information of the wireless LAN connection of the operation device 50, or when the operation device 50 has a GPS (Global Positioning System) function, the GPS information may be acquired. ..
  • the storage 54 functions as the position information storage means of the present invention. Accordingly, the user can estimate the place where the musical instrument MI to which the sensor device 10 is attached is left behind by referring to the position information of the operation device 50 at the time of the broken link.
  • step S118 when the response request signal from the operation device 50 has not been received for a predetermined time (for example, several minutes) or more (Yes in step S118), a warning sound is emitted from an LED or a speaker (not shown). Output (step S120). This makes it possible to reliably prevent the operation device 50 and the musical instrument MI from being left behind.
  • the response request signal includes the position information indicating the current position of the operation device 50
  • the sensor device 10 includes the position information in the response request signal received immediately before the disconnection (Yes in step S118).
  • the position information that has been displayed may be stored in the storage unit 30 as the warning information.
  • the user can refer to the position information immediately before the broken link, so that it is possible to specify the place where the operating device 50 has been left behind after leaving it behind.
  • the sensor device 10 may store the position information at the time of the link break (Yes in step S118) in the storage unit 30 as the warning information.
  • the response signal transmitted from the sensor device 10 to the operation device 50 includes the position information of the sensor device 10, and the operation device 50 uses the response signal received immediately before the link break (No in step S110).
  • the included position information may be stored in the storage 54 as warning information.
  • the user can browse the position information of the sensor device 10 immediately before the link is broken on the operation device 50. Therefore, after forgetting the musical instrument MI to which the sensor device 10 is attached, specify the place where the instrument MI is left behind. Will be possible.
  • the power of the sensor device 10 and the operation device 50 may be turned off, or the detection of the link state may be continued. It may be performed as follows. When the link status is continuously detected, the warning output is stopped or the storage unit 30 or the storage 54 is output when the link status is restored (when there is a temporary radio disturbance or a broken link). The stored warning information may be deleted.
  • the operation device 50 gives the instrument device management mode setting instruction and the termination instruction (power OFF instruction) to the sensor device 10, but the present invention is not limited to this. ..
  • the sensor device 10 may instruct the operation device 50 to set and end the musical instrument management mode. Alternatively, the sensor device 10 and the operation device 50 may be individually input to set and end the musical instrument management mode. Good.
  • the sensor device 10 is preferably attached to a part of the parts of the musical instrument MI, for example, a head part in the case of a guitar so as not to be disassembled. As a result, it is possible to more reliably prevent the musical instrument MI from being lost or stolen.
  • the sensor device 10 is easily attached to and detached from the musical instrument MI (for example, a clip type), the sensor device 10 is housed in a musical instrument case or the like of the musical instrument MI to prevent the musical instrument MI from being lost or stolen. can do.
  • the musical instrument MI for example, a clip type
  • FIG. 9 is a block diagram showing a musical instrument tuner according to a second embodiment of the present invention
  • FIG. 10 is a block diagram showing an operating device according to the second embodiment of the present invention.
  • the musical instrument tuner 1A is communicably connected to the server 100 and the lecturer terminal 200 via a network NW (for example, the Internet or a VPN (Virtual Private Network)).
  • NW for example, the Internet or a VPN (Virtual Private Network)
  • the lecturer terminal 200 is, for example, a tablet terminal, a personal computer, a workstation, or the like.
  • it is possible to receive instruction regarding performance practice from a music instructor (hereinafter referred to as an instructor) via the server 100.
  • an instructor music instructor
  • FIG. 11 is a block diagram showing a server according to the second embodiment of the present invention.
  • the server 100 according to this embodiment includes a control unit 102, a storage 104, an operation unit 106, a display unit 108, and a communication module 110.
  • the control unit 102 includes a CPU that controls the operation of each unit of the server 100 and an SDRAM used as a work area of the CPU.
  • the control unit 102 receives an operation input from the user via the operation unit 106, transmits a control signal corresponding to the operation input to each unit of the server 100, and controls the operation of each unit.
  • the control unit 102 functions as a performance support data processing unit 112 and a musical instrument status information processing unit 114, which will be described later.
  • the storage 104 includes a non-volatile memory that stores programs and data executed by the CPU.
  • a non-volatile memory included in the storage 104 for example, a storage device including a flash memory such as SSD and eMMC, a storage device including a magnetic disk such as HDD, and the like can be used.
  • a database described below is stored in the storage 104 (see FIGS. 12 and 14).
  • the operation unit 106 is a unit that receives an operation input from a user, and includes, for example, a pointing device such as a mouse and a keyboard.
  • the display unit 108 is a means for displaying an operation GUI of the server 100 and an image (for example, a liquid crystal display), and displays an image according to an image signal input from the control unit 102.
  • the communication module 110 is a means for making a communication connection with the network NW, and performs conversion of signals input to and output from the server 100 according to the communication method of the network NW.
  • control unit 52A of the operation device 50A functions as a guidance information processing unit 532 in addition to the functions described in the first embodiment.
  • the arithmetic control unit 16 of the sensor device 10 detects from the acceleration sensor 12 via the communication module 18.
  • the transmission information including the signal is transmitted to the operation device 50A.
  • the control unit 52A (teaching information processing unit 532) of the operation device 50A uses the transmission information acquired from the sensor device 10 during the practice to generate practice result information regarding the result of the practice. Then, the control unit 52A (teaching information processing unit 532) transmits the practice result information to the server 100 together with the user identification information for identifying the user.
  • the practice result information may include, for example, (A) the evaluation of the performance situation generated in the performance support mode shown in FIG. 5 and the history thereof. Further, the practice result information may include, for example, (B) an instruction to the external device (E1, E2) such as an effector and information regarding the timing thereof. The instructor can use these pieces of information for the reaction of the user to the evaluation of the playing situation, the evaluation of the proficiency level of the effector operation, and the like.
  • the practice result information is not limited to these.
  • the control unit 102 (performance support data processing unit 112) of the server 100 receives the practice result information, identifies the instructor in charge of this user from the user identification information, and outputs the practice result information to the instructor terminal 200 of the instructor. Send.
  • the instructor uses the instructor terminal 200 to refer to the practice result information received from the server 100, creates instruction information including advice to the user, and sends it to the server 100.
  • the control unit 102 performance support data processing unit 112 of the server 100 transmits this instruction information to the operation device 50A.
  • the user can receive this instruction information from the server 100 and use it as a reference for practice. As a result, the user can receive remote music instruction at any timing without going to the music classroom.
  • the guidance information may include textual information including the score of the music the user is practicing.
  • the text information may be viewable and downloadable by the user from the server 100.
  • FIG. 12 is a block diagram showing the relationship of data used in the performance support method according to the second embodiment of the present invention.
  • a relational database including user registration information, lecturer registration information, and teaching history information is used.
  • the server 100 can use this database to support the practice practice of the performance between the user's operation device 50A and the instructor terminal 200.
  • the user registration information includes, as the user identification information, a user ID individually assigned to the user and a device ID individually assigned to the operation device (IDs of the sensor device 10 and the operation device 50A).
  • the user registration information includes user name (for example, name, etc.), user information (for example, contact information such as address, telephone number, e-mail address, etc.) as the information about the user, and the system according to the present embodiment (performance support system and musical instrument). Management system) and other personal information).
  • the instructor registration information includes the instructor ID and the instructor terminal ID, which are individually assigned to the instructor and the instructor terminal 200, as instructor identification information. Further, the instructor registration information includes instructor name (for example, full name), instructor information (for example, contact information such as address, telephone number, e-mail address, etc., information regarding use of the system according to the present embodiment, and other personal information. ) Is included.
  • the device ID and the instructor terminal ID for example, an IP (Internet Protocol) address and a MAC (Media Access Control) address can be used.
  • IP Internet Protocol
  • MAC Media Access Control
  • the user ID is stored in association with the instructor ID of the instructor in charge, and the correspondence relationship between the user and the instructor in charge of the user is specified. If there is more than one instructor for each musical instrument type for one user, the user ID and the instructor ID should be stored in association with the information indicating the type of musical instrument that the instructor is in charge of. You may
  • the instruction history information includes practice history data and instruction history data.
  • the practice history data is a collection of data regarding practice results received from the user's operation device 50A.
  • This practice result data is linked to, for example, a schedule management (calendar) application of a cloud service or a task management application, and the practice schedule and achievements (for example, tasks imposed by the instructor, practice time, or score achievement status). It is also possible to manage.
  • a cloud service may be provided via the server 100.
  • the instruction history data is a collection of instruction information transmitted from the instructor terminal 200 to the user.
  • the control unit 102 of the server 100 can call the data included in each piece of information as needed using the user ID or the instructor ID as a main key.
  • FIG. 13 is a flowchart showing a performance support method (performance guidance) according to the second embodiment of the present invention.
  • user information is registered before using the performance support function of the system (performance support system) according to the present embodiment. That is, the user information is transmitted from the operation device 50A (step S200) and registered as user registration information in the server 100 (step S202).
  • the user ID and the practice result information are transmitted from the operation device 50A to the server 100 (step S204).
  • the control unit 102 (performance support data processing unit 112) of the server 100 calls the exercise history data included in the corresponding instruction history information based on the received user ID, and accumulates the exercise result information therein. Then, the control unit 102 (performance support data processing unit 112) identifies the instructor in charge based on the received user ID, and transmits the practice result information to the instructor terminal 200 of the identified instructor (step S206).
  • the instructor browses the practice result information of the user by using the instructor terminal 200, creates instruction information (for example, information instructing the user to practice menu and music, advice to the user, etc.) and transmits it (step S208). ).
  • instruction information for example, information instructing the user to practice menu and music, advice to the user, etc.
  • the control unit 102 Upon receiving the teacher ID and the guidance information from the teacher terminal 200, the control unit 102 (performance support data processing unit 112) calls the guidance history data included in the corresponding guidance history information based on the received teacher ID, and Accumulate teaching information inside. Then, the control unit 102 (performance support data processing unit 112) specifies the target user based on the received instructor ID and transmits the guidance information to the specified user's operation device 50A (step S206). As a result, the user can display and browse the guidance information on the operation device 50A (step S212).
  • the user can receive remote music instruction without going to the music classroom.
  • FIG. 14 is a block diagram showing the relationship of data used in the musical instrument management method according to the second embodiment of the present invention.
  • the musical instrument information includes information about the musical instrument MI owned by the user, and is associated with the user registration information via the device ID of the sensor device 10 attached to the musical instrument MI.
  • the musical instrument information includes a musical instrument ID indicating the type of the musical instrument MI and status information.
  • the status information includes, for example, position information of the musical instrument MI acquired from the sensor device 10 (for example, latest position information acquired immediately before).
  • the status information may include the borrower information.
  • the status information may include a lost information flag. The lost information flag may be switched ON/OFF in response to an operation input from the operation device 50A.
  • FIG. 15 is a flowchart showing a musical instrument management method according to the second embodiment of the present invention. Note that the processes of steps S220 to S228 are the same as those in FIG.
  • the musical instrument management mode is set in the operation device 50, and an instruction to set the musical instrument management mode is transmitted to the sensor device 10.
  • the arithmetic control unit 16 of the sensor device 10 receives the setting instruction to the musical instrument management mode, the arithmetic control unit 16 enters a response request waiting state.
  • the operation device 50 transmits a response request signal requesting a response to the sensor device 10 every predetermined time (step S220).
  • the response request signal reaches the sensor device 10, and the sensor device 10 sends the operation device 50 a response signal to the response request signal. Is transmitted (step S222).
  • the display control unit 60 When the control unit 52 (warning output unit 530) detects that the response signal is no longer received by the operation device 50 (broken link) due to the failure of the response request signal or the response signal (step S224), the display control unit 60. Also, a control signal for instructing the output of a warning is output to the audio output control unit 64, and the warning display on the display unit 62 and the warning sound from the speaker 66 are output (step S226).
  • control unit 52 acquires position information indicating the current position of the operation device 50, and stores the position information and warning information including information on the date and time when the link is broken in the storage 54. It is stored (step S228).
  • control unit 52 of the operation device 50 includes, in addition to the position information and the information about the link disconnection detection date and time, owner information of the musical instrument MI to which the sensor device 10 is attached and information for specifying the musical instrument MI.
  • the status information is created and transmitted to the server 100 (step S230).
  • the control unit 102 of the server 100 Upon receiving the status information from the operation device 50, the control unit 102 of the server 100 stores it in the storage 104 (step S232). Then, the control unit 102 (musical instrument status information processing unit 114) creates public status information regarding the musical instrument MI from the received status information, and makes it viewable via the network NW or the like (step S234).
  • the public status information is, for example, the status information received from the operation device 50 from which the personal information of the user is deleted.
  • the viewable range of the public status information may be limited to, for example, the specific network NW.
  • the control unit 102 is an example of the status information acquisition unit of the present invention.
  • the present embodiment can be used for finding theft of the musical instrument MI, etc. by creating and publicizing the public status information regarding the musical instrument.
  • the control unit 102 musical instrument status information processing unit 114 discloses via the network NW the status information of the musical instrument MI for which the loss information flag is set to ON.
  • the musical instrument purchaser confirms the device ID of the operation device 50A registered in the server 100 to use it for preventing illegal trade of stolen goods. It is possible to
  • the present embodiment can be applied when renting the musical instrument MI.
  • the user can easily confirm the whereabouts of the musical instrument MI and the borrower.
  • the position information for example, access point information or GPS information
  • the position information of the musical instrument MI to which the sensor device 10 is attached may be acquired.
  • the positional information of the musical instrument MI can be confirmed using the operation device 50A, so that the musical instrument MI can be prevented from being lost.
  • the musical instrument support apparatus and system and the musical instrument management apparatus and system according to each of the above-described embodiments use the musical instrument tuning unit 1 or 1A including the acceleration sensor 12, but the sensor includes the acceleration sensor. It may be configured by a device (which does not have a tuning function). Further, the tuning method, the performance support method, and the musical instrument management method according to each of the above embodiments are software applied to a smartphone, a tablet terminal, or a personal computer, or a non-transitory tangible recording medium in which such software is stored. It is also possible to realize.
  • the acceleration sensor 12 is provided in the sensor device 10, but a microphone may be provided in addition to the acceleration sensor 12 or in place of the acceleration sensor 12. Even in this case, by collecting the sound from the musical instrument MI with the microphone, it is possible to tune and support the performance of a musical instrument such as a wind instrument, as in the above embodiments.
  • a microphone may be provided in addition to the acceleration sensor 12 or in place of the acceleration sensor 12.
  • the operating device 50 uses the acoustic signal acquired from the microphone and the output signal from the acceleration sensor 12 to determine the performance status It becomes possible to perform evaluations.
  • the musical instrument MI when used in a stationary state such as a piano, it is possible to include the function of the sensor device 10 in the operation device 50.
  • the acceleration sensor 12 having at least two detection axes is used. It is also possible to detect both vibration caused by the user's motion. In this case, it is possible to separate the two based on the difference in the frequency range of the vibration due to the musical sound and the vibration due to the motion.
  • the uniaxial acceleration sensor it is necessary to adjust the mounting direction of the acceleration sensor to the musical instrument MI.
  • the amplification factor of the output signal may be adjusted, or if the signal output from the acceleration sensor is a digital signal, signal processing such as integration may be performed.
  • Position information acquisition unit 530... Warning output unit, 532... Guidance information processing unit, 100... Server, 102... Control unit, 104... Storage, 106... Operation unit, 108... Display unit, 110... Communication module, 112... Performance support data processing unit, 114... Instrument status information processing unit, 200... Lecturer terminal, MI... Instrument, E1, E2... External device

Abstract

使い勝手が良く、安定かつ正確な調律が可能な楽器用調律器を提供する。楽器用調律器は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備える楽器用調律器であって、センサーデバイスは、少なくとも2つの検出軸を有する加速度センサーと、加速度センサーの出力に基づいて、楽器の操作により生じた楽音の振動の周波数を検出周波数として検出する周波数検出手段と、検出周波数に関する情報を含む送信情報を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された送信情報を受信する操作側通信手段と、表示手段と、センサーデバイスから受信した送信情報に基づいて、楽器の調律情報を生成して表示手段に表示させる制御手段とを備える。

Description

楽器用調律器、演奏支援装置及び楽器管理装置
 本発明は、楽器を調律するために用いる楽器用調律器、演奏支援装置及び楽器管理装置に関する。
 従来、ギター、バイオリン、ピアノ、サックス、トランペット、フルート等の楽器を調律するために用いる調律器(チューナ)が知られている(例えば、特許文献1、2参照)。
 従来の調律器は、装置全体を動作させるための電池等の電源と、楽器の操作により生じた楽音の振動を検出する振動センサーと、電源のオン/オフ、調律の設定条件、及び表示条件等を入力するためのスイッチ等の操作手段と、調律の設定条件や調律の状況を表示するための表示手段と、振動センサーや操作手段からの入力を基に計算を行い、表示手段に情報を表示させる計算機(CPU)とから構成されるのが一般的である。
 例えば、ギターのような弦楽器の場合、調律器は一般的に弦楽器のヘッド部に取り付けられる。弦楽器において調律対象となる弦が操作されると、その操作により生じた楽音の振動は振動センサーの出力信号に基づいて検出される。そして、検出された周波数と基準周波数との周波数偏差が検出され、その検出結果に基づいて調律情報が表示手段に表示される。これにより、演奏者は、表示手段に表示された調律情報を確認しながら、楽器の調律を行うことが可能となっている。
特開2010-181798号公報 特開2012-141358号公報
 しかしながら、従来の調律器に備えらえる振動センサーの感度方向は1軸のみであるため、楽器に取り付けられた調律器の姿勢(取り付け状態)によっては、振動センサーの感度が不足してしまい、楽器から発生する楽音の振動を的確に捉えられない場合がある。
 この対応策の1つとして、楽器に対する調律器の取り付け位置や向きを規定することが考えられる。これにより、楽器から発生する楽音の振動に対して振動センサーの感度が最も大きくなるように調律器を配置することが可能となる。しかし、このような対応策は、楽器や調律器におけるデザインの制約を招き、演奏者にとって使い勝手の良くないという問題がある。
 また、楽器の特性により、特定の周波数において振動センサーの感度方向の振動が弱く、他の方向の振動が強く出るような場合もある。このような場合、従来の調律器では、振動センサーの感度が1軸方向のみである指向性を有するため、楽器の調律を正確に行えないことになる。
 特許文献1、2には、振動センサーを備えた調律器が開示されているものの、これらの課題については全く言及されておらず、当然のことながら、その課題を解決するための手段については記載も示唆もない。
 本発明は、このような事情に鑑みてなされたもので、使い勝手が良く、安定かつ正確な調律が可能な楽器用調律器を提供することを目的とする。さらに、本発明は、楽器用調律器に設けられた機能を利用して実現可能な演奏支援装置及び楽器管理装置を提供することを目的とする。
 上記課題を解決するために、本発明の第1の態様に係る楽器用調律器は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備える楽器用調律器であって、センサーデバイスは、少なくとも2つの検出軸を有する加速度センサーと、加速度センサーの出力に基づいて、楽器の操作により生じた楽音の振動の周波数を検出周波数として検出する周波数検出手段と、検出周波数に関する情報を含む送信情報を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された送信情報を受信する操作側通信手段と、表示手段と、センサーデバイスから受信した送信情報に基づいて、楽器の調律情報を生成して表示手段に表示させる制御手段とを備える。
 第1の態様によれば、2つ以上の検出軸を有する加速度センサーを備えたことにより、使い勝手が良く、安定かつ正確な調律が可能となる。
 本発明の第2の態様に係る楽器用調律器は、第1の態様において、加速度センサーを3つの検出軸を有する3軸加速度センサーとしたものである。
 本発明の第3の態様に係る楽器用調律器は、第1又は第2の態様において、操作デバイスは、検出周波数と、調律対象の音名に対応する基準周波数との周波数偏差を検出する周波数偏差検出手段をさらに備えたものである。
 本発明の第4の態様に係る楽器用調律器は、第3の態様のいずれかにおいて、操作デバイスは、調律対象の設定操作を受け付ける操作手段を備え、周波数偏差検出手段は、操作手段が受け付けた設定操作に基づいて、基準周波数を設定するようにしたものである。
 本発明の第5の態様に係る楽器用調律器は、第3又は第4の態様において、周波数偏差検出手段は、周波数検出手段が検出した検出周波数に基づいて、基準周波数を設定するようにしたものである。
 本発明の第6の態様に係る楽器用調律器は、第3から第5の態様のいずれかにおいて、センサーデバイスは、加速度センサーの出力に基づいて、楽器の姿勢情報を検出する姿勢検出手段を備え、周波数偏差検出手段は、姿勢検出手段が検出した姿勢情報に基づいて、基準周波数を設定するようにしたものである。
 本発明の第7の態様に係る楽器用調律器は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備える楽器用調律器であって、センサーデバイスは、加速度センサーと、加速度センサーの出力に基づいて、楽器の操作により生じた楽音の振動の周波数を検出周波数として検出する周波数検出手段と、加速度センサーの出力に基づいて、楽器の姿勢情報を検出する姿勢検出手段と、検出周波数に関する情報を含む送信情報を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された送信情報を受信する操作側通信手段と、表示手段と、センサーデバイスから受信した送信情報に基づいて、楽器の調律情報を生成して表示手段に表示させる制御手段とを備える。
 本発明の第8の態様に係る楽器用調律器は、第1から第7の態様のいずれかにおいて、センサー側通信手段は、加速度センサーから出力された検出信号を操作デバイスに送信し、操作側通信手段は、センサーデバイスから送信された検出信号を受信し、制御手段は、楽器の演奏中における検出信号に応じて、ユーザーの演奏をアシストするための演奏支援情報を生成し、演奏支援情報に基づいて、表示手段の表示を制御するようにしたものである。
 本発明の第9の態様に係る楽器用調律器は、第8の態様において、制御手段は、検出信号に応じて演奏状況の評価を行い、演奏状況の評価の結果を表示手段に表示させるようにしたものである。
 本発明の第10の態様に係る楽器用調律器は、第8又は第9の態様において、制御手段は、操作デバイスに通信可能に接続された外部機器に対して、検出信号に応じた指示を送信するようにしたものである。
 本発明の第11の態様に係る楽器用調律器は、第8から第10の態様のいずれかにおいて、制御手段は、楽譜を表示手段に表示させ、検出信号に応じて演奏の進行状況を検出し、演奏の進行状況に応じて、楽譜上に演奏箇所を示す表示を行うか、又は楽譜のページ送りを行うようにしたものである。
 本発明の第12の態様に係る楽器用調律器は、第1から第11の態様のいずれかにおいて、センサー側通信手段は、加速度センサーから出力された検出信号を操作デバイスに送信し、操作デバイスは、警告出力手段を更に備え、制御手段は、センサーデバイスが取り付けられた楽器の不使用時に、加速度センサーによって動きが検出された場合に、警告出力手段に警告を出力させるようにしたものである。
 本発明の第13の態様に係る楽器用調律器は、第1から第11の態様のいずれかにおいて、操作デバイスは、警告出力手段を更に備え、制御手段は、センサーデバイスと操作デバイスとの間のリンク状態が切れたことを検出した場合に、警告出力手段に警告を出力させるようにしたものである。
 本発明の第14の態様に係る楽器用調律器は、第13の態様において、操作デバイスは、位置情報記憶手段を更に備え、制御手段は、センサーデバイスと操作デバイスとの間のリンク状態が切れたことを検出した場合に、リンク状態が切れたことを検出した時点の操作デバイスの位置情報、又はリンク状態が切れたことを検出する直前の操作デバイスの位置情報を取得し、位置情報記憶手段に位置情報を格納するようにしたものである。
 本発明の第15の態様に係る演奏支援装置は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備え、センサーデバイスは、加速度センサーと、加速度センサーから出力された検出信号を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された検出信号を受信する操作側通信手段と、表示手段と、楽器の演奏中における検出信号に応じて、ユーザーの演奏をアシストするための演奏支援情報を生成し、演奏支援情報に基づいて、表示手段の表示を制御する制御手段とを備える。
 本発明の第16の態様に係る楽器管理装置は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備え、センサーデバイスは、加速度センサーと、加速度センサーから出力された検出信号を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された検出信号を受信する操作側通信手段と、警告出力手段と、センサーデバイスが取り付けられた楽器の不使用時に、加速度センサーによって動きが検出された場合に、警告出力手段に警告を出力させる制御手段とを備える。
 本発明の第17の態様に係る楽器管理装置は、楽器に取り付けられるセンサーデバイスと、センサーデバイスと相互に無線通信可能な操作デバイスとを備え、センサーデバイスは、加速度センサーと、加速度センサーから出力された検出信号を操作デバイスに送信するセンサー側通信手段とを備え、操作デバイスは、センサーデバイスから送信された検出信号を受信する操作側通信手段と、警告出力手段と、センサーデバイスと操作デバイスとの間のリンク状態が切れたことを検出した場合に、警告出力手段に警告を出力させる制御手段とを備える。
 本発明によれば、使い勝手が良く、安定かつ正確な調律が可能となる。
図1は、本発明の第1の実施形態にかかる楽器用調律器を示すブロック図である。 図2は、本発明の第1の実施形態に係るセンサーデバイスを示すブロック図である。 図3は、本発明の第1の実施形態に係る操作デバイスを示すブロック図である。 図4は、本発明の第1の実施形態に係る楽器用調律器を用いた調律方法を示すフローチャートである。 図5は、本発明の第1の実施形態に係る演奏支援方法を示すフローチャートである。 図6は、演奏の進行状況を示す表示の例を示す図である。 図7は、本発明の第1の実施形態に係る楽器管理方法を示すフローチャートである。 図8は、本発明の第1の実施形態に係る楽器管理方法の別の例を示すフローチャートである。 図9は、本発明の第2の実施形態に係る楽器用調律器を示すブロック図である。 図10は、本発明の第2の実施形態に係る操作デバイスを示すブロック図である。 図11は、本発明の第2の実施形態に係るサーバーを示すブロック図である。 図12は、本発明の第2の実施形態に係る演奏支援方法で使用されるデータの関係を示すブロック図である。 図13は、本発明の第2の実施形態に係る演奏支援方法(演奏指導)を示すフローチャートである。 図14は、本発明の第2の実施形態に係る楽器管理方法で使用されるデータの関係を示すブロック図である。 図15は、本発明の第2の実施形態に係る楽器管理方法を示すフローチャートである。
 以下、添付図面に従って本発明に係る楽器用調律器、演奏支援装置及び楽器管理装置の実施の形態について説明する。
 [第1の実施形態]
 図1は、本発明の第1の実施形態にかかる楽器用調律器を示すブロック図である。
 図1に示すように、本実施形態に係る楽器用調律器1は、センサーデバイス10及び操作デバイス50を含んでいる。センサーデバイス10及び操作デバイス50は、相互に無線通信可能となっている。センサーデバイス10及び操作デバイス50との間の通信方式としては、無線LAN(Local Area Network)、WiFi(登録商標)、Bluetooth(登録商標)、WAN(Wide Area Network)等を採用可能である。
 センサーデバイス10は、楽器MI(図3参照)に取り付けられる。例えば、楽器MIがギターの場合には、センサーデバイス10は、クリップにより、そのヘッドに取り付けることが可能である。センサーデバイス10の楽器MIへの取り付け方法は特に限定されず、センサーデバイス10の形状、楽器の形状及び種類に応じて選択可能である。センサーデバイス10は、例えば、粘着剤式、ネジ止め等の方法により、楽器MIに直接取り付けられるようにしてもよいし、クリップ等のアタッチメントを介して間接的に取り付けられるようにしてもよい。
 センサーデバイス10は、楽器MIが発する音響又は振動を電気信号(音響信号)に変換して送信情報を作成し、操作デバイス50に送信する。
 操作デバイス50は、センサーデバイス10から受信した送信情報を復調して音響信号を取得する。そして、操作デバイス50は、この音響信号を解析し、楽器MIの調律に必要な調律情報を作成して表示部62(図3参照)に表示させる。これにより、楽器MIの演奏者(以下、ユーザーという。)は、調律情報の表示を確認しながら、楽器MIの調律を行うことができる。
 (センサーデバイス)
 図2は、本発明の第1の実施形態に係るセンサーデバイスを示すブロック図である。図2に示すように、本実施形態のセンサーデバイス10は、加速度センサー12と、波形成形回路14と、演算制御部16と、通信モジュール18とを備えている。また、図示は省略したが、センサーデバイス10は、センサーデバイス10の各部を動作させるための電源を供給する電源部を備えている。電源部は、一次電池または二次電池で構成される。
 加速度センサー12は、互いに直交する3つの検出軸(X軸、Y軸、Z軸)を有する3軸加速度センサーで構成される。この加速度センサー12は、各検出軸に対応した3つのセンサー12a、12b、12cを有しており、各センサー12a、12b、12cからそれぞれ対応する検出軸についての検出信号S、S、Sを出力する(以下、「加速度センサー12の出力信号S、S、S」という。)。加速度センサー12の出力信号S、S、Sは、波形成形回路14に対して出力される。この加速度の値は、振動の周波数に応じた交流値で出力されるようにしてもよい。なお、加速度センサー12は、その出力信号S、S、Sを、デジタル信号で出力するデジタル出力タイプのものでもよいし、アナログ信号で出力するアナログ出力タイプであってもよい。但し、アナログ出力タイプは、デジタル出力タイプと比べてA/D(Analog-to-Digital)変換、通信などでの遅延が生じないので、変化への応答性が速く、楽器の調律には望ましい。本実施形態では、一例として、アナログ出力タイプの加速度センサー12が用いられる。
 波形成形回路14は、バンドパスフィルタ(ハイパスフィルタ)や増幅回路などを備え、加速度センサー12の出力信号S、S、Sを出力信号毎にハイパスフィルタでフィルタ処理して、各出力信号S、S、Sに含まれるノイズ成分(低周波成分)を除去する。さらに、波形成形回路14は、出力信号毎に増幅回路で増幅してパルス状波形に変換し、変換後の出力信号S、S、Sを出力信号T、T、Tとして演算制御部16に対して出力する。
 演算制御部16は、波形成形回路14の出力信号T、T、Tに各種処理を施して、操作デバイス50に出力する。
 演算制御部16は、CPU(Central Processing Unit)、メモリー(RAM(Random Access Memory)、ROM(Read Only Memory)、不揮発性メモリー)、A/Dコンバータ、その他周辺回路などを備えている。メモリーには、CPUを動作させるためのプログラムの他、各種データが記憶される。演算制御部16は、メモリーに記憶されたプログラムがCPUによって実行されることによって、図2に示した各機能が実現される。
 演算制御部16は、信号選択部22と、周波数検出部24と、記憶部30と、送信情報生成部32と、姿勢検出部34として機能する。
 信号選択部22は、波形成形回路14の出力信号T、T、Tのうち、波形振幅の最大値と最小値との差が最も大きい出力信号(最も強い信号)を検出用信号Uとして選択して、選択した検出用信号Uを周波数検出部24に対して出力する。
 なお、本実施形態では、出力信号T、T、Tのうち最も強い信号を用いて調律を行うことで、センサーデバイス10の取付方向及び楽器MIの特性に影響を抑制するようにしたが、本発明はこれに限定されない。例えば、XYZ軸の出力信号T、T、Tを合成(例えば、加算)して得られた合成値を検出用信号Uとして用いて、軸の選択を不要とすることも可能である。
 周波数検出部24は、信号選択部22の出力信号である検出用信号Uの周波数を検出して、検出した周波数(以下、「検出周波数」という。)Fを送信情報生成部32に対して出力する。具体的には、周波数検出部24は、信号選択部22から入力された検出用信号Uの符号が変わるゼロクロス点の間の時間を計測することにより振動の周期を求める。そして、周波数検出部24は、この振動の周期から検出周波数を求めて、送信情報生成部32に出力する。周波数検出部24は、本発明の周波数検出手段の一例である。
 送信情報生成部32は、周波数検出部24から入力された検出周波数に基づいて、操作デバイス50に送信する送信情報を生成する。なお、送信情報は、振動の周期に基づいて生成するようにして、検出周波数は、この振動の周期に関する情報を用いて、操作デバイス50側で算出するようにすることも可能である。通信モジュール18は、この送信情報を通信用の信号に変換して操作デバイス50に送信する。送信情報生成部32及び通信モジュール18は、本発明のセンサー側通信手段の一例である。
 そして、後述するように、操作デバイス50は、操作部56を介してユーザーからの操作入力を受け付け、調律対象とする音名(例えば、ギターの場合、弦の番号、弦名等)を設定する設定操作を受け付ける。操作デバイス50は、センサーデバイス10から送信された送信情報を用いて、調律対象とする音名に関する調律情報を生成し、表示部62に表示させる。これにより、ユーザーは、表示部62に表示された調律情報を見ながら、楽器M1の調律を行うことができる。
 また、上記の例では、操作部56を介して、調律対象とする音名等の設定操作を受け付けたが、加速度センサー12を入力手段として用いて設定操作を受け付けるようにすることも可能である。
 加速度センサー12の出力信号S、S、Sには、それぞれ、楽器の操作により生じた楽音の振動の他に、楽器に取り付けられたセンサーデバイス10の傾き状況(姿勢)によって変化する加速度信号(重力加速度)が含まれている。そこで、姿勢検出部34は、加速度センサー12の出力信号S、S、Sの変化を検出することにより、楽器の姿勢を示す姿勢情報を検出する。なお、加速度センサー12によって検出された重力加速度の値は、直流のバイアス値として出力されるようにしてもよい。
 姿勢検出部34は、加速度センサー12の出力信号S、S、Sに基づき、センサーデバイス10が取り付けられた楽器の姿勢(傾き、向き)を示す姿勢情報を検出する。姿勢検出部34が検出した姿勢情報は、送信情報生成部32を介して操作デバイス50に送信可能となっている。姿勢検出部34は、本発明の姿勢検出手段の一例である。
 後述するように、操作デバイス50は、楽器MIを上下に振った場合等の加速度の変化と、操作内容との関係を記憶している。操作デバイス50は、センサーデバイス10の姿勢検出部34によって検出された加速度の変化を取得し、センサーデバイス10が取り付けられた楽器MIの動きを検出することにより操作入力を受け付けることが可能となる。また、楽器MIに取り付けられたセンサーデバイス10の姿勢と、楽器MIに対する操作との組み合わせにより、操作入力を可能としてもよい。例えば、楽器MIがギターの場合には、ギターの向き及び傾き角度と、特定の弦に対する操作(振動)との組み合わせにより操作入力を可能としてもよい。
 また、加速度センサー12に加えて角速度センサー(ジャイロセンサー)を設けることにより、ユーザーの挙動をより詳細に検出して、操作入力に利用できるようにしてもよい。
 (操作デバイス)
 次に、操作デバイスについて、図3を参照して説明する。図3は、本発明の第1の実施形態に係る操作デバイスを示すブロック図である。
 図3に示すように、本実施形態に係る操作デバイス50は、制御部52、ストレージ54、操作部56、電源部58、表示制御部60、表示部62、音声出力制御部64、スピーカー66、通信モジュール68及び外部接続インターフェース(外部接続I/F)70を含んでいる。操作デバイス50は、専用のデバイスであってもよいが、例えば、スマートホン、タブレット端末、パーソナルコンピューター等の汎用のデバイスに本実施形態に係る機能を実現するためのソフトウェア又はプログラムを適用することによって実現することも可能である。
 制御部52は、操作デバイス50の各部の動作を制御するCPUと、CPUの作業領域として使用されるSDRAM(Synchronous Dynamic Random Access Memory)とを含んでいる。制御部52は、操作部56を介してユーザーからの操作入力を受け付け、操作入力に応じた制御信号を操作デバイス50の各部に送信して各部の動作を制御する。制御部52は、調律情報生成部520、演奏支援情報生成部522、動作判別部524、リンク状態検出部526、位置情報取得部528及び警告出力部530として機能する。
 ストレージ54は、CPUにより実行されるプログラム及びデータを格納する不揮発性メモリーを含んでいる。ストレージ54に含まれる不揮発性メモリーとしては、例えば、SSD(Solid State Drive)、eMMC(embedded Multi Media Card)等のフラッシュメモリーを含む記憶装置、HDD(Hard Disk Drive)等の磁気ディスクを含む記憶装置等を用いることができる。ストレージ54には、調律対象の音名(音階)と周波数(基準周波数F)の対応関係を示すテーブル(例えば、A4=440Hz等)が格納される。
 操作部56は、ユーザーからの操作入力を受け付ける手段である。操作部56としては、例えば、表示部62の表面等に設けられたタッチパネル、マウス等のポインティングデバイス、キーボード等を用いることができる。操作部56は、本発明の操作手段の一例である。
 電源部58は、操作デバイス50の各部に電力を供給するための一次電池又は二次電池を含んでいる。なお、電源部58は、商用電源を操作デバイス50に適した状態に変換する電源アダプターを含んでいてもよい。
 表示制御部60は、制御部52からの制御信号に応じて画像信号を生成し、表示部62に入力する。制御部52及び表示制御部60は、本発明の制御手段の一例である。
 表示部62は、操作GUI(Graphical User Interface)、画像を表示する手段(例えば、液晶ディスプレイ)であり、表示制御部60から入力された画像信号に応じて画像を表示する。表示部62は、本発明の表示手段の一例である。
 音声出力制御部64は、制御部52からの制御信号に応じて音声信号を生成し、スピーカー66から音声を出力させる。なお、楽器用調律器1を演奏支援装置として使用する場合には、制御部52により、操作デバイス50の音声出力機能が自動的に無効化されるようにしてもよい。
 通信モジュール68は、センサーデバイス10と通信接続するための手段である。通信モジュール68は、制御部52から出力された制御信号を通信用の信号に変換して、センサーデバイス10に送信する。また、通信モジュール68は、センサーデバイス10から受信した信号を復調して得られたデータを制御部52に入力する。通信モジュール68は、本発明の操作側通信手段の一例である。
 操作デバイス50は、外部接続I/F70を介して、エフェクター等の外部機器E1及びE2と通信可能に接続されている。なお、図3には、楽器MIを介して操作デバイス50に接続される外部機器E1と、操作デバイス50に直接接続される外部機器E2が例示されているが、外部機器の接続方法及び接続台数はこれに限定されるものではない。
 外部接続I/F70は、制御部52からの制御信号を通信用の信号に変換して外部機器E1及びE2に送信する。これにより、ユーザーは、操作デバイス50を介して、エフェクター等による音量の調整(増幅、減衰、コンプレッション等)の設定を行うことができる。また、外部接続I/F70は、外部機器E1及びE2から受信した設定等に関する情報を復調して制御部52に入力するようにしてもよい。ここで、操作デバイス50と外部機器E1及びE2との間の通信方式は、有線及び無線のいずれでもよい。
 (調律モード)
 次に、楽器MIの調律を行う場合の処理の流れについて、図4を参照して説明する。図4は、本発明の第1の実施形態に係る楽器用調律器を用いた調律方法を示すフローチャートである。
 まず、楽器用調律器1のセンサーデバイス10が楽器MIに取り付けられて、調律を開始する場合、操作デバイス50又はセンサーデバイス10からの操作入力に応じて、操作デバイス50及びセンサーデバイス10が楽器MIの調律を行うための調律モードに設定される。操作デバイス50は、ユーザーからの操作入力を受け付けて、調律対象の設定操作を行う(ステップS10)。調律対象としては、楽器MIがギターの場合には、複数の弦にそれぞれ対応する音名に限らず、弦の番号又は弦名を設定するようにしてもよい。調律対象の設定操作が行われると、その設定操作に対応した操作信号が、操作デバイス50からセンサーデバイス10に対して送信される。
 次に、ユーザーによる楽器MIの操作によって生じた楽音がセンサーデバイス10に入力される(ステップS12)。このとき、センサーデバイス10に備えられる加速度センサー12は、センサーデバイス10に入力された楽音の振動を検出する(ステップS14)。
 加速度センサー12の出力信号S、S、Sは、波形成形回路14を介して信号選択部22に入力され、波形振幅の最大値と最小値との差が最も大きい出力信号が検出用信号Uとして選択される。そして、周波数検出部24において、選択された検出用信号Uの周波数が検出周波数Fとして検出される(ステップS16)。
 次に、送信情報生成部32は、周波数検出部24から入力された検出周波数に基づいて、送信情報を生成する。そして、この送信情報は、センサーデバイス10から操作デバイス50に送信される(ステップS18)。
 次に、操作デバイス50において、通信モジュール68は、センサーデバイス10から受信した送信情報を復調して制御部52に入力する。そして、制御部52(調律情報生成部520)は、この送信情報に基づいて、ユーザーによる調律を支援するための調律情報を生成する(ステップS20)。
 具体的には、制御部52(調律情報生成部520)は、センサーデバイス10が取り付けられた楽器MIの操作に対応する検出周波数Fを送信情報から取得し、この検出周波数Fに基づいて、音高及びピッチの判定を行う。
 また、制御部52(調律情報生成部520)は、ステップS10において調律対象として設定した音名に対応する基準周波数Fをストレージ54から読み出し、検出周波数Fと基準周波数Fとの偏差(以下、「周波数偏差」という。)ΔFを検出する。ここで、調律情報生成部520は、本発明の周波数偏差検出手段の一例である。
 次に、制御部52(調律情報生成部520)は、生成した調律情報を表示制御部60に出力する。表示制御部60は、楽器MIの調律情報として、調律対象の音名(又は弦の番号、弦名等)、音高、ピッチ、その音名から決定される基準周波数Fとの周波数偏差ΔF等を、表示部62に表示させる(ステップS22)。また、調律情報として、楽器MIに対する具体的な操作の示唆(例えば、ギターの場合、どの糸巻を締める又は緩めるかに関する示唆)等を表示部62に表示させる。これにより、ユーザーは、表示部62に表示された調律情報及び調律情報を参照しながら楽器MIの調律を行うことができる。なお、表示部62に表示される情報としては、これらの調律情報に限らず、他の調律情報を含んでいてもよい。
 次に、調律を継続する場合、ユーザーによる楽器MIの操作によって生じた楽音が再度入力される(ステップS24のYes)。すると、ステップS12からS22が繰り返されて、調律情報が表示部62に表示される(ステップS22)。
 調律対象の楽音等(例えば、ギターの弦)のすべてについての調律が終了し、操作デバイス50の操作部56から調律終了の指示が入力されると(ステップS26のYes)、操作デバイス50における調律モードが終了する(ステップS28)。そして、操作デバイス50からセンサーデバイス10に、調律終了の指示が送信されて、センサーデバイス10においても調律モードが終了する(ステップS30)。
 このように本実施形態によれば、楽器の操作により生じた楽音の振動は、加速度センサー12によって検出される。この加速度センサー12は、互いに直交する3つの検出軸を有する3軸加速度センサーで構成されるので、3つの検出軸の出力信号のうち最も信号強度が大きくなる検出軸の出力信号を用いて、楽器の操作により生じた楽音の振動の周波数(検出周波数F)を検出することが可能となる。これにより、楽器に対するセンサーデバイス10の取り付け位置や向きに影響されることなく、楽器から発生する楽音の振動を的確に捉えることができる。したがって、使い勝手が良く、安定かつ正確な調律が可能となる。
 なお、本実施形態では、好ましい態様の一例として、加速度センサー12を3軸加速度センサーで構成したが、これに限らず、加速度センサー12は、互いに直交する2つの検出軸を有する2軸加速度センサーで構成されていてもよい。この場合にも、1軸方向のみの感度を有する振動センサーを備えた従来の調律器に比べて、使い勝手が良く、安定かつ正確な調律が可能となる。
 また、本実施形態では、調律モードの設定及び終了を操作デバイス50の操作部56から行うようにしたが、センサーデバイス10の加速度センサー12を用いて、操作内容と関連づけられた加速度の変化を検出することにより調律モードの設定及び終了を指示するようにしてもよい。また、調律モードの設定及び終了は、センサーデバイス10及び操作デバイス50に対して個別に指示するようにしてもよい。
 また、センサーデバイス10から操作デバイス50に伝送するデータは、例えば、センサーデバイス10のID情報、加速度センサー12の各軸の値、加速度センサー12の任意の軸の周期値等を伝送することも考えられる。しかしながら、センサーデバイス10から操作デバイス50へのデータの伝送量が大きいと、センサーデバイス10の消費電力が大きくなり、センサーデバイス10の電池での稼働時間が短くなる。このため、操作デバイス50において、伝送するデータの種類を選択可能として、必要最小限とすることが好ましい。本実施形態では、センサーデバイス10において、加速度センサー12の3軸の値のうち最も強い信号、又は各軸の値の合成値からその検出周波数F及び周波数偏差ΔFを算出し、周波数偏差ΔFを操作デバイス50に伝送するようにした。これにより、調律モードにおけるセンサーデバイス10と操作デバイス50との間のデータの伝送量を抑制し、それぞれの電源部の電池を長持ちさせることができる。
 (演奏支援モード)
 ところで、楽器MIの演奏を行う場合、例えば、演奏状況を客観的に解析したり、楽器MIの音響効果を調整するためのエフェクター等の外部機器を簡易に制御することが求められている。
 本実施形態に係る楽器用調律器1は、加速度センサー12による検出信号を利用して、上記のような演奏支援に適用することが可能である。図5は、本発明の第1の実施形態に係る演奏支援方法を示すフローチャートである。
 まず、操作デバイス50において演奏支援モードが設定されると(ステップS40)、演奏支援モードへの設定指示がセンサーデバイス10に送信される。センサーデバイス10の演算制御部16は、演奏支援モードへの設定指示を受け付けると、演奏中の動作検出を開始する(ステップS42)。一方、操作デバイス50は、センサーデバイス10からの楽器MIの動作の入力待ち状態になる(ステップS44)。
 次に、センサーデバイス10の加速度センサー12により、楽器MIの動きが検出されると(ステップS46のYes)、送信情報生成部32は、XYZ軸ごとの加速度及びその時間変化の情報を含む動きの測定値を含む送信情報を生成する。通信モジュール18は、この送信情報を操作デバイス50に送信する(ステップS48)。ここで、動きの測定値としては、加速度センサー12による検出信号をそのまま用いてもよい。
 次に、操作デバイス50において、制御部52(動作判別部524)は、センサーデバイス10から受信した動きの測定値を解析して、楽器MIの動きを判別する(ステップS50)。制御部52(演奏支援情報生成部522)は、楽器MIの動きに応じて、ユーザーの演奏をアシストするための演奏支援情報を生成する。そして、制御部52(演奏支援情報生成部522)は、この演奏支援情報に基づいて、表示制御部60を制御して表示部62の表示を制御して、ユーザーに対する演奏支援を行う(ステップS52)。
 ここで、ユーザーに対する演奏のアシストの態様としては、次の(1)から(3)に列挙するものが考えられる。
 (1)演奏状況の検出
 制御部52(演奏支援情報生成部522及び動作判別部524)により、センサーデバイス10の加速度センサー12から出力された信号に基づいて演奏状況を解析して、演奏支援情報を生成することが考えられる。例えば、センサーデバイス10において、演算制御部16は、楽器MIの演奏状況をもっともよく捉えた加速度センサー12の軸の値(例えば、最も強い信号)、又は各軸の値の合成値から最適値を算出し、この最適値のデータを操作デバイス50に送信する。ここで、センサーデバイス10と操作デバイス50との間の伝送帯域に余裕がある場合には、センサーデバイス10から操作デバイス50にXYZの3軸すべてのデータを伝送して、操作デバイス50側で最適値を算出してもよい。
 次に、操作デバイス50において、制御部52は、この最適値又は3軸すべてのデータを用いてFFT(Fast Fourier Transform)解析等を行い、演奏している音程、和音の状況、及びテンポ等を算出する。制御部52は、これらの算出値を表示制御部60に出力して表示部62に表示させる。これにより、ユーザーは、操作デバイス50の表示部62に表示された算出値を参照しながら、演奏又は練習をすることが可能になる。
 (1)の例では、制御部52は、例えば、演奏中の楽曲の楽譜を読み取って、楽譜から読み取られた音程等と、上記の算出値を比較することにより、演奏状況の評価を行い、演奏状況の評価結果(例えば、演奏状況の評価を示すスコア、又は「テンポが早すぎる」等のメッセージ等)を表示部62に表示させるようにしてもよい。
 (2)エフェクター等の外部機器(E1、E2)との連携(モーション検出)
 外部機器(E1、E2)との連携を行う場合、制御部52は、楽器MIの動き(モーション)と、エフェクター等の外部機器(E1、E2)への指示内容との対応関係をあらかじめ記憶しておく。そして、制御部52は、センサーデバイス10から送信された加速度の大きさ及び向きを示す信号に基づいて楽器MIに加えられた動作を検出し、外部機器(E1、E2)に設定変更の指示を送信する。例えば、楽器MIがすばやく持ち上げられた場合(鉛直上方向の加速度が閾値以上)に音量を大きくしたり、楽器MIとしてのギターのヘッドが振られた場合(ある軸に対する加速度又は角速度が周期的に変化した場合)に音量の変化幅を拡大又は圧縮する等、楽器MIに加えられる動作と指示内容との関連づけが可能である。これにより、ユーザーは、エフェクター等の外部機器(E1、E2)に対する指示を演奏中に容易に行うことが可能になる。
 なお、外部機器(E1、E2)に出力された指示内容(例えば、「音量を上げました。」、「音量の変化幅を拡大しました。」)は、操作デバイス50の表示部62に表示して、ユーザーが意図した指示がされたかどうかを確認できるようにしてもよい。
 (3)操作デバイス50における楽譜等の表示(モーション検出)
 制御部52は、演奏支援モード時において、表示部62に演奏中の楽曲の楽譜を表示させるようにしてもよい。この場合、楽譜データの形式としては、例えば、PDF(Portable Document Format)、PostScript、EPS(Encapsulated PostScript)、ePub(electronic Publication)、Music XML(eXtensible Markup Language)等、又は楽譜作成ソフトウェアの独自フォーマット等の任意の形式を用いることができる。このような楽譜のデータは、ストレージ54にあらかじめ格納されていてもよいし、インターネット等を介して取得できるようになっていてもよい(第2の実施形態参照)。(3-1)制御部52は、楽器MIの動きの測定値に応じて演奏の進行状況を検出し、図6に示すように、演奏箇所を示す矢印等の画像を楽譜に重畳表示させ、演奏の進行状況に応じて移動させる。(3-2)また、制御部52は、演奏の進行状況に応じて楽譜のページ送りを行ったり、楽器MIの動きに応じて楽譜のページ戻しを行うようにしてもよい。(3-3)また、制御部52は、演奏の速度に応じて一画面に表示させる楽譜のページ数を増減させてもよい(例えば、演奏速度が速いほどページ数を増やす等)。
 ここで、(2)の外部機器(E1、E2)に対する指示、又は(3)の操作デバイス50における楽譜等の表示の変更指示を行う場合、モーション検出は、センサーデバイス10及び操作デバイス50のどちらで行ってもよい。モーション検出を操作デバイス50で精度よく行うためには、加速度センサー12の3軸のデータと、角速度センサー3軸のデータとを操作デバイス50に伝送することが好ましい。ユーザーが楽器MIに加えるモーションは、楽器MIの演奏による振動(例えば、弦の振動)と比較して非常に遅い(周波数が小さい)。そこで、加速度センサー12及び角速度センサーにおけるサンプリング周波数を下げる(例えば、100Hz程度)ことで伝送する情報量を減らすことが可能となる。また、モーション検出のための信号の量子化ビット数も12ビットから8ビットのように減らすことも可能である。
 また、(1)の演奏支援と(2)及び(3)のモーション検出とは、センサーデバイス10と操作デバイス50との間の伝送帯域に余裕があれば同時に実現することが可能である。これは、加速度センサー12及び角速度センサーから得られるデータを可能な限り多く操作デバイス50に伝送し、操作デバイス50側で情報を切り分けて使用することが可能であるからである。
 例えば、加速度センサー12の3軸のデータと、角速度センサー3軸のデータの合計6軸のデータが各4kHzのサンプリングレート、12ビットで伝送されている場合、モーション検出には6軸すべてのデータを20回に1回の割合で取得し、見かけ上サンプリングレートを200Hz程度にすることも可能であるし、12ビットのデータから有効な8ビットのデータのみを取り出して採用することも可能である。このとき、20回分のデータの加算平均を取ることも可能である。また、加速度センサー12から出力される各軸のデータのうち、モーション検出に同時に必要な軸のデータのみをそのまま解析することも可能である。この場合、例えば、モーションが直線的である場合には、加速度センサー12の3軸のデータの絶対値を比較して、絶対値が最大の1つの軸のデータのみを解析対象としてもよい。また、モーションが平面的である場合には、絶対値が最小のデータを除く2軸のデータのみを解析対象としてもよい。
 次に、センサーデバイス10において、加速度センサー12により動きが検出されない状態が所定時間継続した場合に、演算制御部16は、演奏が終了したと判定し(ステップS54のYes)、演奏支援モードを終了させる(ステップS56)。さらに、演算制御部16は、演奏支援モードの終了指示を操作デバイス50に送信して、操作デバイス50において演奏支援モードを終了させる(ステップS58のYes及びS60)。
 本実施形態によれば、楽器用調律器1の加速度センサー12を用いて演奏の進行状況を判定し、楽譜の表示を制御することにより、ユーザーの演奏を容易にすることが可能になる。
 なお、本実施形態では、操作デバイス50からセンサーデバイス10に対して演奏支援モードの設定指示を行う一方、センサーデバイス10における演奏終了の判定に基づいて、演奏支援モードの終了指示を行うようにしたが、本発明はこれに限定されない。センサーデバイス10から操作デバイス50に対して演奏支援モードの設定指示を行ってもよいし、操作デバイス50から演奏支援モードの終了指示を行ってもよいし、センサーデバイス10及び操作デバイス50に対して個別に演奏支援モードの設定及び終了の操作入力を行ってもよい。
 (楽器管理モード)
 ところで、楽器MIの演奏を行わない不使用時には、楽器MIが転倒したり、ユーザー以外の者によって誤って移動されることがあり得る。本実施形態に係る楽器用調律器1は、加速度センサー12及び通信機能を利用して、楽器MIの管理(不使用時の動き検出)を行うことも可能である。図7は、本発明の第1の実施形態に係る楽器管理方法を示すフローチャートである。
 まず、操作デバイス50において楽器管理モードが設定されると(ステップS70)、楽器管理モードへの設定指示がセンサーデバイス10に送信される。センサーデバイス10の演算制御部16は、楽器管理モードへの設定指示を受け付けると、非演奏時(楽器を不使用時、例えば、楽器の保管時、休憩時等)の動作検出を開始する(ステップS72)。一方、操作デバイス50は、センサーデバイス10からの楽器MIの動作の入力待ち状態になる(ステップS74)。
 なお、楽器管理モードは、例えば、センサーデバイス10が取り付けられた楽器MIがケースに格納されたことが検出された場合に、自動的に設定されるようにしてもよい。この場合、例えば、〈1〉楽器MIが一定時間制止していることをセンサーデバイス10が検出した場合、又は〈2〉楽器MIのケースに内蔵されたセンサー(例えば、RFID(Radio Frequency IDentifier)等の近距離通信用のセンサーをセンサーデバイス10が検出した場合に、楽器管理モードが自動的に設定されるようにしてもよい。また、センサーデバイス10に光センサー(例えば、フォトダイオード、太陽電池等)を設けて、〈3〉光センサーからの検出出力が所定値以下となった場合、又は所定値以下の状態が所定時間継続した場合に、センサーデバイス10が取り付けられた楽器MIがケースに収納されたとして、楽器管理モードが自動的に設定されるようにしてもよい。また、楽器MIが収納されるケースに磁石を取り付け、センサーデバイス10にホールセンサーを取り付けて、〈4〉ホールセンサーがケースの磁石を検出した場合に、楽器管理モードが自動的に設定されるようにしてもよい。
 次に、センサーデバイス10の加速度センサー12により、楽器MIの動きが検出されると(ステップS76のYes)、送信情報生成部32は、XYZ軸ごとの加速度及びその時間変化の情報を含む動きの測定値を含む送信情報を生成する。通信モジュール18は、この送信情報を操作デバイス50に送信する(ステップS78)。
 次に、操作デバイス50において、制御部52(動作判別部524)は、センサーデバイス10から受信した動きの測定値を解析して、楽器の動きを判別する(ステップS80)。そして、動きの測定値が閾値以上の場合(ステップS80のYes)、制御部52(警告出力部530)は、表示制御部60及び音声出力制御部64に警告の出力を指示する制御信号を出力し、表示部62における警告表示及びスピーカー66からの警告音の出力を行い(ステップS82)、ステップS74に戻る。ステップS80からS82では、例えば、楽器MIを保管している状況下で、センサーデバイス10が取り付けられた楽器MIの移動が検出された場合に警告を出力させることにより、楽器MIの転倒又は移動をユーザーに知らせることができる。これにより、楽器MIの紛失又は盗難を防止することが可能になる。
 次に、楽器管理モードを終了し、電源をOFFする場合には、操作デバイス50の操作部56から電源OFF指示が入力され(ステップS84のYes)、操作デバイス50の電源がOFFになる(ステップS86)。そして、操作デバイス50からセンサーデバイス10に対して、電源OFF指示が送信され(ステップS88のYes)、センサーデバイス10の電源がOFFになる(ステップS90)。
 本実施形態によれば、楽器用調律器1の加速度センサー12を用いて非演奏時に楽器MIの動きを検出することにより、楽器MIの転倒又は移動をユーザーに知らせることができる。これにより、楽器MIの紛失又は盗難を防止することが可能になる。
 また、本実施形態に係る楽器用調律器1の通信機能を、楽器MIの管理(紛失又は盗難の防止)に利用することも可能である。図8は、本発明の第1の実施形態に係る楽器管理方法の別の例を示すフローチャートである。
 まず、操作デバイス50において楽器管理モードが設定されると(ステップS100)、楽器管理モードへの設定指示がセンサーデバイス10に送信される。センサーデバイス10の演算制御部16は、楽器管理モードへの設定指示を受け付けると、リンク状態(通信が可能な状態か否か)の監視を開始し、応答要求待ち状態になる(ステップS102からS118)。
 操作デバイス50の制御部52(リンク状態検出部526)は、所定時間(例えば、1秒から数秒)ごとに、センサーデバイス10に対して応答を要求する応答要求信号を送信する(ステップS104)。センサーデバイス10と操作デバイス50との間のリンク状態が維持されている場合には、応答要求信号がセンサーデバイス10に到達し、センサーデバイス10から操作デバイス50に対して、応答要求信号に対する応答信号が送信される(ステップS106のYes及びステップS108)。ここで、応答要求信号及び応答信号には、それぞれ操作デバイス50及びセンサーデバイス10を特定するためのID(Identification)情報が含まれていてもよい。制御部52は、センサーデバイス10からの応答信号を受信することにより(ステップS110)、センサーデバイス10との間のリンク状態が継続しているか否かを判定する。ステップS102からS112までの処理を所定時間ごとに繰り返すことにより、リンク状態を継続的に監視することが可能になる。
 センサーデバイス10が取り付けられた楽器MIを置き忘れた場合等には、センサーデバイス10と操作デバイス50との間の距離が離れて通信接続が切れる。この場合、応答要求信号又は応答信号の不達により、操作デバイス50において応答信号が受信されなくなる(ステップS110のNo)。この場合、制御部52(警告出力部530)は、表示制御部60及び音声出力制御部64に警告の出力を指示する制御信号を出力し、表示部62における警告表示及びスピーカー66からの警告音の出力を行う(ステップS114)。ステップS114では、センサーデバイス10と操作デバイス50との間の通信接続が切れたことが検出された時点(リンク切れの時点)で警告が出力されるので、楽器MIの置き忘れ等による紛失及び盗難を防止することが可能になる。ここで、警告出力部530、表示部62及びスピーカー66は、本発明の警告出力手段の一例である。
 また、制御部52(位置情報取得部528)は、操作デバイス50の現在位置を示す位置情報を取得して、この位置情報と、リンク切れを検出した日時の情報を含む警告情報をストレージ54に格納する(ステップS116)。位置情報は、例えば、操作デバイス50の無線LAN接続のアクセスポイント情報から取得してもよいし、操作デバイス50がGPS(Global Positioning System)機能を有する場合には、GPS情報を取得してもよい。ここで、ストレージ54は、本発明の位置情報記憶手段として機能する。これにより、ユーザーは、リンク切れの時点の操作デバイス50の位置情報を参照することにより、センサーデバイス10が取り付けられた楽器MIを置き忘れた場所を推定することが可能になる。
 一方、センサーデバイス10において、操作デバイス50からの応答要求信号が所定時間(例えば、数分)以上受信されなかった場合には(ステップS118のYes)、不図示のLED又はスピーカー等により警告音を出力する(ステップS120)。これにより、操作デバイス50及び楽器MIの置き忘れを確実に防止することが可能になる。
 本実施形態では、楽器用調律器1の通信機能を用いて、紛失及び盗難の防止のための楽器の管理を行うことが可能になる。
 なお、本実施形態では、応答要求信号に操作デバイス50の現在位置を示す位置情報を含めておき、センサーデバイス10において、リンク切れ(ステップS118のYes)の直前に受信した応答要求信号に含まれていた位置情報を警告情報として、記憶部30に格納してもよい。これにより、ユーザーは、リンク切れの直前の位置情報を参照することができるので、操作デバイス50を置き忘れた後に、置き忘れた場所を特定することが可能になる。
 また、センサーデバイス10がGPS機能を有する場合には、センサーデバイス10において、リンク切れ(ステップS118のYes)の時点の位置情報を警告情報として記憶部30に格納してもよい。また、この場合、センサーデバイス10から操作デバイス50に送信する応答信号にセンサーデバイス10の位置情報を含めておき、操作デバイス50において、リンク切れ(ステップS110のNo)の直前に受信した応答信号に含まれていた位置情報を警告情報としてストレージ54に格納してもよい。これにより、ユーザーは、操作デバイス50において、リンク切れ直前のセンサーデバイス10の位置情報を閲覧することができるので、センサーデバイス10が取り付けられた楽器MIを置き忘れた後に、置き忘れた場所を特定することが可能になる。
 また、リンク切れが検出され、警告の出力及び警告情報の格納が実行された後は、センサーデバイス10及び操作デバイス50の電源をOFFにするようにしてもよいし、リンク状態の検出を継続して行うようにしてもよい。リンク状態の検出を継続して行う場合には、リンク状態が復活した場合(一時的な電波障害又はリンク切れであった場合)に、警告の出力を停止したり、記憶部30又はストレージ54に格納された警告情報を消去するようにしてもよい。
 また、図7及び図8に示す例では、操作デバイス50からセンサーデバイス10に対して楽器管理モードの設定指示及び終了指示(電源OFF指示)を行うようにしたが、本発明はこれに限定されない。センサーデバイス10から操作デバイス50に対して楽器管理モードの設定及び終了指示を行ってもよいし、センサーデバイス10及び操作デバイス50に対して個別に楽器管理モードの設定及び終了の操作入力を行ってもよい。
 なお、センサーデバイス10は、楽器MIの部品の一部、例えば、ギターの場合にはヘッド部等に組み付けて分解不可能としておくことが好ましい。これにより、楽器MIの紛失及び盗難をより確実に防止することができる。
 また、センサーデバイス10が楽器MIに対する着脱が容易なもの(例えば、クリップ式等)であっても、楽器MIの楽器ケース等にセンサーデバイス10を収容することにより、楽器MIの紛失及び盗難を防止することができる。
 [第2の実施形態]
 次に、本発明の第2の実施形態について説明する。なお、以下の説明では、第1の実施形態と同様の構成については、同一の符号を付して説明を省略する。
 図9は、本発明の第2の実施形態に係る楽器用調律器を示すブロック図であり、図10は、本発明の第2の実施形態に係る操作デバイスを示すブロック図である。
 図9に示すように、本実施形態に係る楽器用調律器1Aは、ネットワークNW(例えば、インターネット、VPN(Virtual Private Network)等)を通じて、サーバー100及び講師端末200との間で通信可能に接続されている。ここで、講師端末200は、例えば、タブレット端末、パーソナルコンピューター、ワークステーション等である。本実施形態では、サーバー100を介して、音楽講師(以下、講師という。)から演奏の練習に関して指導を受けることが可能となっている。さらに、本実施形態では、サーバー100を利用した楽器MIの管理を行うことが可能となっている。
 図11は、本発明の第2の実施形態に係るサーバーを示すブロック図である。図11に示すように、本実施形態に係るサーバー100は、制御部102、ストレージ104、操作部106、表示部108及び通信モジュール110を備えている。
 制御部102は、サーバー100の各部の動作を制御するCPUと、CPUの作業領域として使用されるSDRAMとを含んでいる。制御部102は、操作部106を介してユーザーからの操作入力を受け付け、操作入力に応じた制御信号をサーバー100の各部に送信して各部の動作を制御する。制御部102は、後述する演奏支援データ処理部112及び楽器ステータス情報処理部114として機能する。
 ストレージ104は、CPUにより実行されるプログラム及びデータを格納する不揮発性メモリーを含んでいる。ストレージ104に含まれる不揮発性メモリーとしては、例えば、SSD、eMMC等のフラッシュメモリーを含む記憶装置、HDD等の磁気ディスクを含む記憶装置等を用いることができる。ストレージ104には、後述のデータベースが格納される(図12及び図14参照)。
 操作部106は、ユーザーからの操作入力を受け付ける手段であり、例えば、マウス等のポインティングデバイス、キーボード等を含んでいる。
 表示部108は、サーバー100の操作GUI、画像を表示する手段(例えば、液晶ディスプレイ)であり、制御部102から入力された画像信号に応じて画像を表示する。
 通信モジュール110は、ネットワークNWと通信接続するための手段であり、ネットワークNWの通信方式にしたがって、サーバー100に入出力される信号の変換を行う。
 (演奏支援モード)
 次に、本実施形態に係る演奏支援モードについて説明する。
 図10に示すように、操作デバイス50Aの制御部52Aは、第1の実施形態で説明した機能に加えて、指導情報処理部532として機能する。
 本実施形態では、センサーデバイス10が取り付けられた楽器MIを用いて演奏の練習が行われた場合に、センサーデバイス10の演算制御部16は、通信モジュール18を介して、加速度センサー12からの検出信号を含む送信情報を操作デバイス50Aに送信する。操作デバイス50Aの制御部52A(指導情報処理部532)は、練習中にセンサーデバイス10から取得した送信情報を用いて、練習の結果に関する練習結果情報を生成する。そして、制御部52A(指導情報処理部532)は、ユーザーを特定するためのユーザー特定情報とともに、練習結果情報をサーバー100に送信する。
 ここで、練習結果情報には、例えば、(A)図5に示した演奏支援モードにおいて生成された演奏状況の評価、及びその履歴が含まれていてもよい。また、練習結果情報には、例えば、(B)エフェクター等の外部機器(E1、E2)に対する指示及びそのタイミングに関する情報が含まれていてもよい。講師は、これらの情報を、演奏状況の評価に対するユーザーの反応、及びエフェクター操作の習熟度に対する評価等に利用することが可能である。なお、練習結果情報は、これらに限定されるものではない。
 サーバー100の制御部102(演奏支援データ処理部112)は、この練習結果情報を受信して、ユーザー特定情報からこのユーザーを担当する講師を特定し、その講師の講師端末200に練習結果情報を送信する。
 講師は、講師端末200を用いて、サーバー100から受信した練習結果情報を参照しながら、ユーザーへのアドバイスを含む指導情報を作成し、サーバー100に送信する。サーバー100の制御部102(演奏支援データ処理部112)は、この指導情報を操作デバイス50Aに送信する。ユーザーは、この指導情報をサーバー100から受信して、練習の参考にすることができる。これにより、ユーザーは、音楽教室に通うことなく、任意のタイミングで、遠隔的な音楽の指導を受けることが可能になる。
 ここで、指導情報には、ユーザーが練習する楽曲の楽譜を含むテキストの情報が含まれていてもよい。また、これらのテキスト情報は、ユーザーがサーバー100から閲覧及びダウンロード可能となっていてもよい。
 図12は、本発明の第2の実施形態に係る演奏支援方法で使用されるデータの関係を示すブロック図である。
 図12に示すように、本実施形態では、ユーザー登録情報、講師登録情報及び指導履歴情報を含む関係データベースが用いられる。サーバー100は、このデータベースを用いて、ユーザーの操作デバイス50Aと講師端末200との間の演奏の練習支援を行うことが可能となっている。
 ユーザー登録情報は、ユーザー特定情報として、ユーザーに個別に割り振られたユーザーID、操作デバイスに個別に割り振られたデバイスID(センサーデバイス10及び操作デバイス50AのID)を含んでいる。ユーザー登録情報は、ユーザーに関する情報として、ユーザー名(例えば、氏名等)、ユーザー情報(例えば、住所、電話番号、電子メールアドレス等の連絡先情報、本実施形態に係るシステム(演奏支援システム及び楽器管理システム)の利用に関する情報、その他の個人情報)を含んでいる。
 講師登録情報は、講師特定情報として、講師及び講師端末200にそれぞれ個別に割り振られた講師ID及び講師端末IDを含んでいる。さらに、講師登録情報は、講師名(例えば、氏名等)、講師情報(例えば、住所、電話番号、電子メールアドレス等の連絡先情報、本実施形態に係るシステムの利用に関する情報、その他の個人情報)を含んでいる。
 ここで、デバイスID及び講師端末IDとしては、例えば、IP(Internet Protocol)アドレス、MAC(Media Access Control)アドレスを用いることができる。また、操作デバイス50A又は講師端末200がスマートホンの場合には、デバイスID及び講師端末IDとして電話番号を用いることも可能である。また、ユーザーID及び講師IDを使用せずに、デバイスIDのみでユーザー及び講師を特定することも可能である。
 指導履歴情報は、ユーザーIDがその担当講師の講師IDと関連づけられて格納されており、ユーザーと、ユーザーを担当する講師の対応関係が特定される。1人のユーザーに対して、楽器の種類ごとに複数の担当講師がいる場合には、ユーザーID及び講師IDと、その担当講師が担当する楽器の種類を示す情報が関連づけられて格納されるようにしてもよい。指導履歴情報は、練習履歴データ及び指導履歴データを含んでいる。
 練習履歴データは、ユーザーの操作デバイス50Aから受信した練習結果に関するデータを蓄積したものである。この練習結果データは、例えば、クラウドサービスの予定管理(カレンダー)アプリケーション又はタスク管理アプリケーションと連携させて、練習のスケジュール及び実績(例えば、講師から課された課題、練習時間、又はスコアの達成状況)の管理を行うことも可能である。このようなクラウドサービスは、サーバー100を介して提供されるようにしてもよい。
 指導履歴データは、講師端末200からユーザーに対して送信された指導情報を蓄積したものである。
 サーバー100の制御部102は、ユーザーID又は講師IDを主キーとして、各情報に含まれるデータを必要に応じて呼び出すことが可能となっている。
 図13は、本発明の第2の実施形態に係る演奏支援方法(演奏指導)を示すフローチャートである。
 まず、本実施形態に係るシステム(演奏支援システム)の演奏支援機能を利用するに先立って、ユーザー情報の登録が行われる。すなわち、操作デバイス50Aからユーザー情報が送信され(ステップS200)、サーバー100において、ユーザー登録情報として登録される(ステップS202)。
 次に、図5に示した演奏支援モードを用いた楽器MIの演奏の練習が終了すると、操作デバイス50Aからサーバー100に、ユーザーID及び練習結果情報が送信される(ステップS204)。
 サーバー100の制御部102(演奏支援データ処理部112)は、受信したユーザーIDに基づいて、対応する指導履歴情報に含まれる練習履歴データを呼び出して、その中に練習結果情報を蓄積する。そして、制御部102(演奏支援データ処理部112)は、受信したユーザーIDに基づいて担当講師を特定して、特定した担当講師の講師端末200に練習結果情報を送信する(ステップS206)。
 講師は、講師端末200により、ユーザーの練習結果情報を閲覧して、指導情報(例えば、ユーザーに対して練習メニュー及び楽曲を指示する情報、ユーザーに対するアドバイス等)を作成して送信する(ステップS208)。
 制御部102(演奏支援データ処理部112)は、講師端末200から講師ID及び指導情報を受信すると、受信した講師IDに基づいて、対応する指導履歴情報に含まれる指導履歴データを呼び出して、その中に指導情報を蓄積する。そして、制御部102(演奏支援データ処理部112)は、受信した講師IDに基づいて対象ユーザーを特定して、特定したユーザーの操作デバイス50Aに指導情報を送信する(ステップS206)。これにより、ユーザーは、操作デバイス50Aに指導情報を表示させて閲覧することが可能になる(ステップS212)。
 本実施形態によれば、ユーザーは、音楽教室に通うことなく、遠隔的な音楽の指導を受けることが可能となる。
 (楽器管理モード)
 次に、本実施形態に係る楽器管理モードについて説明する。
 本実施形態では、サーバー100に登録されたデバイスIDと、センサーデバイス10の通信機能を利用して、センサーデバイス10が取り付けられた楽器MIの管理を行うことが可能となっている。
 図14は、本発明の第2の実施形態に係る楽器管理方法で使用されるデータの関係を示すブロック図である。
 楽器情報は、ユーザーが所有する楽器MIに関する情報を含んでおり、楽器MIに取り付けられたセンサーデバイス10のデバイスIDを介して、ユーザー登録情報と関連づけられている。楽器情報は、デバイスIDに加えて、楽器MIの種類等を示す楽器ID及びステータス情報を含んでいる。ステータス情報は、例えば、センサーデバイス10から取得した楽器MIの位置情報(例えば、直前に取得した最新の位置情報)を含んでいる。楽器MIがレンタルされている場合には、ステータス情報は、その借用者情報を含んでいてもよい。また、ステータス情報は、紛失情報フラグを含んでいてもよい。紛失情報フラグは、操作デバイス50Aからの操作入力に応じてON/OFFが切り替えられるようにしてもよい。
 図15は、本発明の第2の実施形態に係る楽器管理方法を示すフローチャートである。なお、ステップS220からS228の処理は図8と同様であるため、説明を適宜省略する。
 まず、操作デバイス50において楽器管理モードが設定され、楽器管理モードへの設定指示がセンサーデバイス10に送信される。センサーデバイス10の演算制御部16は、楽器管理モードへの設定指示を受け付けると、応答要求待ち状態になる。
 操作デバイス50は、所定時間ごとにセンサーデバイス10に対して応答を要求する応答要求信号を送信する(ステップS220)。センサーデバイス10と操作デバイス50との間のリンク状態が維持されている場合には、応答要求信号がセンサーデバイス10に到達し、センサーデバイス10から操作デバイス50に対して、応答要求信号に対する応答信号が送信される(ステップS222)。
 制御部52(警告出力部530)は、応答要求信号又は応答信号の不達により、操作デバイス50において応答信号が受信されなくなったこと(リンク切れ)を検出すると(ステップS224)、表示制御部60及び音声出力制御部64に警告の出力を指示する制御信号を出力し、表示部62における警告表示及びスピーカー66からの警告音の出力を行う(ステップS226)。
 また、制御部52(位置情報取得部528)は、操作デバイス50の現在位置を示す位置情報を取得して、この位置情報と、リンク切れを検出した日時の情報を含む警告情報をストレージ54に格納する(ステップS228)。
 次に、操作デバイス50の制御部52は、上記位置情報及びリンク切れ検出日時の情報に加えて、センサーデバイス10が取り付けられた楽器MIの所有者情報及び楽器MIを特定するための情報を含むステータス情報を作成してサーバー100に送信する(ステップS230)。
 サーバー100の制御部102は、操作デバイス50からステータス情報を受信すると、ストレージ104に格納する(ステップS232)。そして、制御部102(楽器ステータス情報処理部114)は、受信したステータス情報から楽器MIに関する公開用のステータス情報を作成し、ネットワークNW等を介して閲覧可能にする(ステップS234)。ここで、公開用のステータス情報は、例えば、操作デバイス50から受信したステータス情報からユーザーの個人情報等を削除したものである。ステップS234では、公開用のステータス情報が閲覧可能な範囲を、例えば、特定のネットワークNW内に限定するようにしてもよい。なお、制御部102は、本発明のステータス情報取得手段の一例である。
 本実施形態によれば、紛失及び盗難の防止のための楽器の管理を行うことが可能になる。さらに、本実施形態は、楽器に関する公開用のステータス情報を作成して公開することで、楽器MIの盗難の発見等にも利用可能である。例えば、制御部102(楽器ステータス情報処理部114)は、紛失情報フラグがONに設定された楽器MIのステータス情報をネットワークNWを介して公開する。これにより、楽器MIが、楽器の中古市場に持ち込まれた場合に、楽器買い取り業者は、サーバー100に登録された操作デバイス50AのデバイスIDを確認することで、盗品の不正な取引の防止に利用することが可能である。
 さらに、本実施形態は、楽器MIをレンタルする場合にも適用することが可能である。例えば、貸し出した相手(借用者)に関する情報をステータス情報に含めておくことにより、ユーザーは、楽器MIの所在、借用者を容易に確認することが可能である。
 なお、センサーデバイス10をネットワークNWに接続可能とすることにより、センサーデバイス10が取り付けられた楽器MIの位置情報(例えば、アクセスポイント情報又はGPS情報)を取得可能としてもよい。これにより、楽器MIを置き忘れた場合でも、操作デバイス50Aを用いて楽器MIの位置情報を確認することができるので、楽器MIの紛失を防止することができる。
 [その他の実施形態]
 なお、上記の各実施形態に係る演奏支援装置及びシステム、並びに楽器管理装置及びシステムは、加速度センサー12を備えた楽器用調律器1又は1Aを利用したものであるが、加速度センサーを備えたセンサーデバイス(調律機能を備えていないもの)により構成されていてもよい。また、上記の各実施形態に係る調律方法、演奏支援方法及び楽器管理方法は、スマートホン、タブレット端末又はパーソナルコンピューターに適用するソフトウェア、又はこのようなソフトウェアが格納された非一時的な有形記録媒体により実現することも可能である。
 また、上記の各実施形態では、センサーデバイス10に加速度センサー12を設けたが、加速度センサー12に加えて又は加速度センサー12に代えて、マイクロホンを設けてもよい。この場合でも、マイクロホンにより楽器MIからの音響を収集することにより、上記の各実施形態と同様に、管楽器等の楽器の調律及び演奏支援を行うことが可能である。また、加速度センサー12とマイクロホンの両方を備える場合には、上記の各実施形態におけるモーション検出による演奏支援を行うことも可能である。
 なお、楽器MIの種類によっては、演奏操作を行う部分と、音響を発するスピーカーとが離れた位置関係となることがある。このような位置関係となる楽器MIでは、マイクロホンを備えたセンサーデバイス10を、楽器MIの演奏操作を行う部分に取り付けても、音響を収集することが困難になると考えられる。そのような場合、楽器MIからの音響を収集するマイクロホンを操作デバイス50に設けて、スピーカーからの音響を操作デバイス50のマイクロホンで収集し、ユーザーの演奏中のモーションをセンサーデバイス10の加速度センサー12により捉えるようにしてもよい。これにより、楽器演奏に伴う振動を伴わない楽器(例えば、電子楽器など)に対しても、操作デバイス50において、マイクロホンから取得した音響信号と加速度センサー12からの出力信号とを用いて演奏状況の評価等を行うことが可能になる。
 また、楽器MIがピアノ等の据え置き状態で使用される場合には、センサーデバイス10の機能を操作デバイス50に含めるようにすることも可能である。
 また、上記の各実施形態では、少なくとも2つの検出軸を有する加速度センサー12を用いたが、重力加速度を検出可能な少なくとも1軸の加速度センサーを用いて、楽器MIの演奏(楽音)による振動と、ユーザーのモーションによる振動の両方を検出することも考えられる。この場合、楽音による振動、及びモーションによる振動の周波数領域の相違に基づいて、両者を分離することが可能である。なお、1軸の加速度センサーを用いる場合には、加速度センサーの楽器MIへの取付方向を調整することが必要となるが、加速度センサーを用いて楽器MIの動きの検出することにより、加速度センサーから出力される信号の増幅率を調整したり、加速度センサーから出力される信号がデジタル信号の場合には、積算等の信号処理を行ったりしてもよい。
 1、1A…楽器用調律器、10…センサーデバイス、12…加速度センサー、14…波形成形回路、16…演算制御部、18…通信モジュール、22…信号選択部、24…周波数検出部、30…記憶部、32…送信情報生成部、34…姿勢検出部、50、50A…操作デバイス、52、52A…制御部、54…ストレージ、56…操作部、58…電源部、60…表示制御部、62…表示部、64…音声出力制御部、66…スピーカー、68…通信モジュール、70…外部接続I/F、520…調律情報生成部、522…演奏支援情報生成部、524…動作判別部、526…リンク状態検出部、528…位置情報取得部、530…警告出力部、532…指導情報処理部、100…サーバー、102…制御部、104…ストレージ、106…操作部、108…表示部、110…通信モジュール、112…演奏支援データ処理部、114…楽器ステータス情報処理部、200…講師端末、MI…楽器、E1、E2…外部機器

Claims (17)

  1.  楽器に取り付けられるセンサーデバイスと、前記センサーデバイスと相互に無線通信可能な操作デバイスとを備える楽器用調律器であって、
     前記センサーデバイスは、
     少なくとも2つの検出軸を有する加速度センサーと、
     前記加速度センサーの出力に基づいて、楽器の操作により生じた楽音の振動の周波数を検出周波数として検出する周波数検出手段と、
     前記検出周波数に関する情報を含む送信情報を前記操作デバイスに送信するセンサー側通信手段とを備え、
     前記操作デバイスは、
     前記センサーデバイスから送信された前記送信情報を受信する操作側通信手段と、
     表示手段と、
     前記センサーデバイスから受信した送信情報に基づいて、前記楽器の調律情報を生成して前記表示手段に表示させる制御手段と、
     を備える楽器用調律器。
  2.  前記加速度センサーは、3つの検出軸を有する3軸加速度センサーである、
     請求項1記載の楽器用調律器。
  3.  前記操作デバイスは、前記検出周波数と、調律対象の音名に対応する基準周波数との周波数偏差を検出する周波数偏差検出手段をさらに備える、請求項1又は2に記載の楽器用調律器。
  4.  前記操作デバイスは、前記調律対象の設定操作を受け付ける操作手段を備え、
     前記周波数偏差検出手段は、前記操作手段が受け付けた前記設定操作に基づいて、前記基準周波数を設定する、
     請求項3に記載の楽器用調律器。
  5.  前記周波数偏差検出手段は、前記周波数検出手段が検出した前記検出周波数に基づいて、前記基準周波数を設定する、
     請求項3又は4に記載の楽器用調律器。
  6.  前記センサーデバイスは、前記加速度センサーの出力に基づいて、楽器の姿勢情報を検出する姿勢検出手段を備え、
     前記周波数偏差検出手段は、前記姿勢検出手段が検出した前記姿勢情報に基づいて、前記基準周波数を設定する、
     請求項3から5のいずれか1項に記載の楽器用調律器。
  7.  楽器に取り付けられるセンサーデバイスと、前記センサーデバイスと相互に無線通信可能な操作デバイスとを備える楽器用調律器であって、
     前記センサーデバイスは、
     加速度センサーと、
     前記加速度センサーの出力に基づいて、楽器の操作により生じた楽音の振動の周波数を検出周波数として検出する周波数検出手段と、
     前記加速度センサーの出力に基づいて、楽器の姿勢情報を検出する姿勢検出手段と、
     前記検出周波数に関する情報を含む送信情報を前記操作デバイスに送信するセンサー側通信手段とを備え、
     前記操作デバイスは、
     前記センサーデバイスから送信された前記送信情報を受信する操作側通信手段と、
     表示手段と、
     前記センサーデバイスから受信した送信情報に基づいて、前記楽器の調律情報を生成して前記表示手段に表示させる制御手段と、
     を備える楽器用調律器。
  8.  前記センサー側通信手段は、前記加速度センサーから出力された検出信号を前記操作デバイスに送信し、
     前記操作側通信手段は、前記センサーデバイスから送信された前記検出信号を受信し、
     前記制御手段は、前記楽器の演奏中における前記検出信号に応じて、ユーザーの演奏をアシストするための演奏支援情報を生成し、前記演奏支援情報に基づいて、前記表示手段の表示を制御する、
     請求項1から7のいずれか1項に記載の楽器用調律器。
  9.  前記制御手段は、前記検出信号に応じて演奏状況の評価を行い、前記演奏状況の評価の結果を前記表示手段に表示させる、
     請求項8に記載の楽器用調律器。
  10.  前記制御手段は、前記操作デバイスに通信可能に接続された外部機器に対して、前記検出信号に応じた指示を送信する、
     請求項8又は9に記載の楽器用調律器。
  11.  前記制御手段は、楽譜を前記表示手段に表示させ、前記検出信号に応じて演奏の進行状況を検出し、前記演奏の進行状況に応じて、前記楽譜上に演奏箇所を示す表示を行うか、又は前記楽譜のページ送りを行う、
     請求項8から10のいずれか1項に記載の楽器用調律器。
  12.  前記センサー側通信手段は、前記加速度センサーから出力された検出信号を前記操作デバイスに送信し、
     前記操作デバイスは、警告出力手段を更に備え、
     前記制御手段は、前記センサーデバイスが取り付けられた前記楽器の不使用時に、前記加速度センサーによって動きが検出された場合に、前記警告出力手段に警告を出力させる、
     請求項1から11のいずれか1項に記載の楽器用調律器。
  13.  前記操作デバイスは、警告出力手段を更に備え、
     前記制御手段は、前記センサーデバイスと前記操作デバイスとの間のリンク状態が切れたことを検出した場合に、前記警告出力手段に警告を出力させる、
     請求項1から11のいずれか1項に記載の楽器用調律器。
  14.  前記操作デバイスは、位置情報記憶手段を更に備え、
     前記制御手段は、前記センサーデバイスと前記操作デバイスとの間のリンク状態が切れたことを検出した場合に、前記リンク状態が切れたことを検出した時点の前記操作デバイスの位置情報、又は前記リンク状態が切れたことを検出する直前の前記操作デバイスの位置情報を取得し、前記位置情報記憶手段に前記位置情報を格納する、
     請求項13に記載の楽器用調律器。
  15.  楽器に取り付けられるセンサーデバイスと、前記センサーデバイスと相互に無線通信可能な操作デバイスとを備え、
     前記センサーデバイスは、
     加速度センサーと、
     前記加速度センサーから出力された検出信号を前記操作デバイスに送信するセンサー側通信手段とを備え、
     前記操作デバイスは、
     前記センサーデバイスから送信された前記検出信号を受信する操作側通信手段と、
     表示手段と、
     前記楽器の演奏中における前記検出信号に応じて、ユーザーの演奏をアシストするための演奏支援情報を生成し、前記演奏支援情報に基づいて、前記表示手段の表示を制御する制御手段と、
     を備える演奏支援装置。
  16.  楽器に取り付けられるセンサーデバイスと、前記センサーデバイスと相互に無線通信可能な操作デバイスとを備え、
     前記センサーデバイスは、
     加速度センサーと、
     前記加速度センサーから出力された検出信号を前記操作デバイスに送信するセンサー側通信手段とを備え、
     前記操作デバイスは、
     前記センサーデバイスから送信された前記検出信号を受信する操作側通信手段と、
     警告出力手段と、
     前記センサーデバイスが取り付けられた前記楽器の不使用時に、前記加速度センサーによって動きが検出された場合に、前記警告出力手段に警告を出力させる制御手段と、
     を備える楽器管理装置。
  17.  楽器に取り付けられるセンサーデバイスと、前記センサーデバイスと相互に無線通信可能な操作デバイスとを備え、
     前記センサーデバイスは、
     加速度センサーと、
     前記加速度センサーから出力された検出信号を前記操作デバイスに送信するセンサー側通信手段とを備え、
     前記操作デバイスは、
     前記センサーデバイスから送信された前記検出信号を受信する操作側通信手段と、
     警告出力手段と、
     前記センサーデバイスと前記操作デバイスとの間のリンク状態が切れたことを検出した場合に、前記警告出力手段に警告を出力させる制御手段と、
     を備える楽器管理装置。
PCT/JP2020/002762 2019-02-01 2020-01-27 楽器用調律器、演奏支援装置及び楽器管理装置 WO2020158661A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP20749376.8A EP3920175A4 (en) 2019-02-01 2020-01-27 MUSICAL INSTRUMENT TUNING, PERFORMANCE SUPPORT DEVICE AND MUSICAL INSTRUMENT MANAGER
CN202080012074.0A CN113474834A (zh) 2019-02-01 2020-01-27 乐器用调音器、演奏辅助装置以及乐器管理装置
US17/388,163 US11948544B2 (en) 2019-02-01 2021-07-29 Musical instrument tuner, musical performance support device and musical instrument management device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-017270 2019-02-01
JP2019017270A JP7307906B2 (ja) 2019-02-01 2019-02-01 楽器用調律器

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/388,163 Continuation US11948544B2 (en) 2019-02-01 2021-07-29 Musical instrument tuner, musical performance support device and musical instrument management device

Publications (1)

Publication Number Publication Date
WO2020158661A1 true WO2020158661A1 (ja) 2020-08-06

Family

ID=71841314

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/002762 WO2020158661A1 (ja) 2019-02-01 2020-01-27 楽器用調律器、演奏支援装置及び楽器管理装置

Country Status (5)

Country Link
US (1) US11948544B2 (ja)
EP (1) EP3920175A4 (ja)
JP (1) JP7307906B2 (ja)
CN (1) CN113474834A (ja)
WO (1) WO2020158661A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021107843A (ja) * 2018-04-25 2021-07-29 ローランド株式会社 電子楽器システムおよび楽器用コントローラ
JP7307906B2 (ja) * 2019-02-01 2023-07-13 後藤ガット有限会社 楽器用調律器
JP7188337B2 (ja) * 2019-09-24 2022-12-13 カシオ計算機株式会社 サーバ装置、演奏支援方法、プログラム、および情報提供システム

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003223166A (ja) * 2002-01-30 2003-08-08 Yamaha Corp 情報処理装置およびその楽譜頁変更方法、楽譜表示用プログラムおよび記録媒体
WO2006043469A1 (ja) * 2004-10-20 2006-04-27 Seiko Instruments Inc. 無線通信式調律器
JP2010181798A (ja) 2009-02-09 2010-08-19 Seiko Instruments Inc 調律装置
JP2011145375A (ja) * 2010-01-13 2011-07-28 Korg Inc 調律器
JP2012141358A (ja) 2010-12-28 2012-07-26 Korg Inc クリップ付きチューナ
US20140090547A1 (en) * 2011-06-07 2014-04-03 University Of Florida Research Foundation, Incorporated Modular wireless sensor network for musical instruments and user interfaces for use therewith
WO2017082061A1 (ja) * 2015-11-10 2017-05-18 ヤマハ株式会社 調律推定装置、評価装置、およびデータ処理装置
JP2017194826A (ja) * 2016-04-20 2017-10-26 大日本印刷株式会社 紛失防止システム
US9812029B1 (en) * 2016-10-12 2017-11-07 Brianna Henry Evaluating a position of a musical instrument
US9824670B1 (en) * 2017-02-17 2017-11-21 Shannon Pahl Musical instrument activity monitoring system

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3646599B2 (ja) 2000-01-11 2005-05-11 ヤマハ株式会社 演奏インターフェイス
US7183480B2 (en) 2000-01-11 2007-02-27 Yamaha Corporation Apparatus and method for detecting performer's motion to interactively control performance of music or the like
JP3729019B2 (ja) 2000-03-29 2005-12-21 松下電器産業株式会社 楽器演奏教育システム
JP4367156B2 (ja) 2004-02-05 2009-11-18 ヤマハ株式会社 調律装置及びそのプログラム
JP4506619B2 (ja) 2005-08-30 2010-07-21 ヤマハ株式会社 演奏アシスト装置
EP2261896B1 (en) 2008-07-29 2017-12-06 Yamaha Corporation Performance-related information output device, system provided with performance-related information output device, and electronic musical instrument
JP2011197528A (ja) 2010-03-23 2011-10-06 Korg Inc 調律器用クリップ
CN102428831A (zh) 2011-08-31 2012-05-02 成都荣保生物科技开发有限公司 灵芝属赤灵芝新菌株
US20130174713A1 (en) * 2012-01-09 2013-07-11 Arthur David Harvey Wireless Tuning Device for Musical Instruments
JP5533915B2 (ja) 2012-03-07 2014-06-25 カシオ計算機株式会社 習熟度判定装置、習熟度判定方法及びプログラム
US9240170B2 (en) * 2012-12-03 2016-01-19 Petar Chekardzhikov Vibration-sensing stringed instrument mountable device
US9548044B2 (en) * 2012-12-03 2017-01-17 Petar Chekardzhikov Vibration-sensing music instrument mountable device
CN103729062B (zh) 2014-01-19 2017-02-08 浙江大学 一种多功能乐器同步互动系统和方法
US20160042726A1 (en) * 2014-08-08 2016-02-11 Best Case Scenario, LLC Networked sensor for musical instrument or for musical instrument case
KR20160109819A (ko) 2015-03-13 2016-09-21 삼성전자주식회사 전자 장치, 전자 장치의 현악기 연주 인식 방법 및 전자 장치의 현악기 연주 피드백 방법
JP5894309B1 (ja) 2015-04-02 2016-03-23 株式会社落し物ドットコム 逸失物発見システム
US20160372097A1 (en) * 2015-06-22 2016-12-22 Gerald Rogers Wireless musical instrument tuner
BE1023229B1 (nl) * 2015-06-30 2017-01-05 Van Den Broeck Bram Stemmen van een trommel
JP2017097750A (ja) 2015-11-27 2017-06-01 株式会社アプリックス 測位システム、無線タグ装置およびその測位方法
WO2017121049A1 (en) * 2016-01-15 2017-07-20 Findpiano Information Technology (Shanghai) Co., Ltd. Piano system and operating method thereof
WO2018012590A1 (ja) 2016-07-13 2018-01-18 ヤマハ株式会社 楽器練習システム、演奏練習実施装置、コンテンツ再生システム、及びコンテンツ再生装置
WO2018068203A1 (en) 2016-10-11 2018-04-19 Sunland Information Technology Co., Ltd. A smart detecting and feedback system for smart piano
CN207624361U (zh) 2017-08-22 2018-07-17 黄海龙 一种具有无线调音功能的智能弦乐器
KR102124326B1 (ko) * 2018-03-16 2020-06-19 주식회사 잼이지 센서기반으로 사운드를 발생시키는 악기 연주음 검출장치
JP7307906B2 (ja) * 2019-02-01 2023-07-13 後藤ガット有限会社 楽器用調律器
JP7307422B2 (ja) * 2019-02-01 2023-07-12 銀河ソフトウェア株式会社 演奏支援システム、方法及びプログラム
US11562721B2 (en) * 2020-03-13 2023-01-24 Don Gilmore Devices, Llc Wireless multi-string tuner for stringed instruments and associated method of use

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003223166A (ja) * 2002-01-30 2003-08-08 Yamaha Corp 情報処理装置およびその楽譜頁変更方法、楽譜表示用プログラムおよび記録媒体
WO2006043469A1 (ja) * 2004-10-20 2006-04-27 Seiko Instruments Inc. 無線通信式調律器
JP2010181798A (ja) 2009-02-09 2010-08-19 Seiko Instruments Inc 調律装置
JP2011145375A (ja) * 2010-01-13 2011-07-28 Korg Inc 調律器
JP2012141358A (ja) 2010-12-28 2012-07-26 Korg Inc クリップ付きチューナ
US20140090547A1 (en) * 2011-06-07 2014-04-03 University Of Florida Research Foundation, Incorporated Modular wireless sensor network for musical instruments and user interfaces for use therewith
WO2017082061A1 (ja) * 2015-11-10 2017-05-18 ヤマハ株式会社 調律推定装置、評価装置、およびデータ処理装置
JP2017194826A (ja) * 2016-04-20 2017-10-26 大日本印刷株式会社 紛失防止システム
US9812029B1 (en) * 2016-10-12 2017-11-07 Brianna Henry Evaluating a position of a musical instrument
US9824670B1 (en) * 2017-02-17 2017-11-21 Shannon Pahl Musical instrument activity monitoring system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3920175A4

Also Published As

Publication number Publication date
JP7307906B2 (ja) 2023-07-13
US11948544B2 (en) 2024-04-02
CN113474834A (zh) 2021-10-01
JP2020126102A (ja) 2020-08-20
EP3920175A1 (en) 2021-12-08
EP3920175A4 (en) 2022-03-09
US20210358462A1 (en) 2021-11-18

Similar Documents

Publication Publication Date Title
WO2020158662A1 (ja) 演奏支援システム、方法及びプログラム並びに楽器管理システム、方法及びプログラム
WO2020158661A1 (ja) 楽器用調律器、演奏支援装置及び楽器管理装置
US7702657B2 (en) Portable information processor
DK2922310T3 (en) Headset vibration detection system and method therefor
US20160372097A1 (en) Wireless musical instrument tuner
JP5270962B2 (ja) 動作検出システム
CN106959838A (zh) 音频控制方法、音频控制装置和电子装置
JP2009180687A (ja) 振動モニタリング装置、振動モニタリングシステム、サーバおよび振動センサモジュール
CN201788018U (zh) 微型传声器振膜共振频率检测仪
WO2019230687A1 (ja) 打音検査端末、打音検査システムおよび打音検査データ登録方法
JP5245669B2 (ja) 歩数計装置
JPWO2009011035A1 (ja) 立寄り場所候補情報登録装置、立寄り場所候補情報登録方法、立寄り場所候補情報登録プログラム及び記憶媒体
JPWO2009011034A1 (ja) 滞在場所接続情報登録装置、滞在場所接続情報登録方法、滞在場所接続情報登録プログラム及び記憶媒体
US20150189429A1 (en) Method and apparatus for the production of sound using a slackline
WO2018013549A1 (en) Musical activity monitor
JP2014109601A (ja) 音声処理システム、音声処理装置、音声処理方法及びプログラム
CN107808655B (zh) 音频信号处理方法、装置、电子设备及存储介质
JP2017203931A (ja) 音響特性測定装置及び音響特性測定方法
JP4569576B2 (ja) 音響測定装置
Gädeke et al. Real-time environmental emission monitoring on construction sites
JP6532284B2 (ja) 音響特性測定装置、方法およびプログラム
JP7402640B2 (ja) カラオケ装置
GB2618326A (en) Electronic device for use with an audio device
JPWO2009011037A1 (ja) 滞在エリア履歴情報登録装置、滞在エリア履歴情報登録方法、滞在エリア履歴情報登録プログラム及び記憶媒体
JP7052348B2 (ja) 情報端末、プログラム、及び情報端末の制御方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20749376

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)
NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020749376

Country of ref document: EP

Effective date: 20210901