WO2018070232A1 - 信号処理装置及び信号処理方法 - Google Patents

信号処理装置及び信号処理方法 Download PDF

Info

Publication number
WO2018070232A1
WO2018070232A1 PCT/JP2017/034552 JP2017034552W WO2018070232A1 WO 2018070232 A1 WO2018070232 A1 WO 2018070232A1 JP 2017034552 W JP2017034552 W JP 2017034552W WO 2018070232 A1 WO2018070232 A1 WO 2018070232A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal processing
sound
processing apparatus
processing device
movement
Prior art date
Application number
PCT/JP2017/034552
Other languages
English (en)
French (fr)
Inventor
稀淳 金
辰志 梨子田
鈴木　匠
将治 吉野
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to US16/330,281 priority Critical patent/US10750279B2/en
Priority to CN201780061702.2A priority patent/CN109804252B/zh
Priority to EP17861153.9A priority patent/EP3527993A4/en
Priority to JP2018544737A priority patent/JP7059933B2/ja
Publication of WO2018070232A1 publication Critical patent/WO2018070232A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01P—MEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P13/00—Indicating or recording presence, absence, or direction, of movement
    • G01P13/02—Indicating direction only, e.g. by weather vane
    • G01P13/04—Indicating positive or negative direction of a linear movement or clockwise or anti-clockwise direction of a rotational movement
    • G01P13/045—Indicating positive or negative direction of a linear movement or clockwise or anti-clockwise direction of a rotational movement with speed indication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121—Determining geometric values, e.g. centre of rotation or angular range of movement
    • A61B5/1122—Determining geometric values, e.g. centre of rotation or angular range of movement of movement trajectories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0204—Acoustic sensors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121—Determining geometric values, e.g. centre of rotation or angular range of movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/681—Wristwatch-type devices
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813—Specially adapted to be attached to a specific body part
    • A61B5/6824—Arm or wrist
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813—Specially adapted to be attached to a specific body part
    • A61B5/6829—Foot or ankle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
    • H04R2201/401—2D or 3D arrays of transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction

Definitions

  • the present disclosure relates to a signal processing device and a signal processing method.
  • the present disclosure proposes a new and improved signal processing apparatus and signal processing method capable of detecting the content of the motion from the sound generated according to the motion.
  • the direction of the movement of the part is determined from each of the sounds collected by the sound collecting part, which are generated according to the movement of the plurality of sound collecting parts arranged at predetermined positions and the part to be attached.
  • a signal processing device including a detecting unit for detecting.
  • a signal processing method is provided that includes detecting the direction of the signal.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 10 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • FIG. 2 is an explanatory diagram illustrating an example of an external appearance of a signal processing device 200.
  • Embodiment of the present disclosure > [1.1. Appearance example] Embodiments of the present disclosure will be described in detail. First, an appearance example of a signal processing device according to an embodiment of the present disclosure will be described.
  • FIG. 1 is an explanatory diagram illustrating an appearance example of a signal processing device 100 according to an embodiment of the present disclosure.
  • FIG. 1 is an explanatory diagram illustrating an appearance example of a signal processing device 100 according to an embodiment of the present disclosure.
  • an example of the appearance of the signal processing apparatus 100 according to the embodiment of the present disclosure will be described with reference to FIG.
  • the signal processing apparatus 100 is an apparatus that can be attached to a part or an object that causes a human wrist, ankle, or other movement, for example.
  • Examples of the object to which the signal processing device 100 is attached include tools used in sports, such as a bat, a racket, and a golf club.
  • the signal processing apparatus 100 includes a plurality of microphones, and determines the direction of movement in which the signal processing apparatus 100 is mounted from the level of aerodynamic sound (wind noise) collected by the microphones.
  • the signal processing device 100 includes a band 101 and a plurality of microphones 102 provided around the band 101.
  • FIG. 1 illustrates a state in which the signal processing device 100 is worn on a human wrist.
  • the microphones 102 are provided at four positions as shown in order to facilitate detection of wrist movement.
  • the number and installation positions of the microphones 102 are not limited to the example shown in FIG.
  • Each microphone 102 may be a directional microphone.
  • the directivity may be the directivity in the direction of the vertical direction from the sound collection surface of each microphone, that is, the direction of the dashed arrow in FIG. For example, when a user wearing the signal processing apparatus 100 on the wrist moves the wrist up and down or left and right, a wind noise is generated along with the movement. Since each microphone 102 has such directivity, the signal processing device 100 can detect the direction of movement from the wind noise level.
  • FIG. 2 is an explanatory diagram illustrating a functional configuration example of the signal processing device 100 according to the embodiment of the present disclosure.
  • a functional configuration example of the signal processing device 100 according to the embodiment of the present disclosure will be described with reference to FIG.
  • the signal processing device 100 includes a plurality of microphones 102, a detection unit 110, a processing unit 120, and an output unit 130.
  • the microphone 102 is provided for collecting wind noise generated according to the movement of the part where the signal processing device 100 is mounted.
  • Each microphone 102 may be a directional microphone as described above.
  • the microphones 102 output the collected sounds to the detection unit 110, respectively.
  • the detection unit 110 includes a processor such as a CPU (Central Processing Unit) and a DSP (Digital Signal Processor), and detects the content and level of sound transmitted from each microphone 102.
  • the detection unit 110 detects the direction of movement of the signal processing device 100 by detecting the content and level of the sound transmitted from the microphone 102.
  • the detection unit 110 outputs the detection result to the processing unit 120. For example, the detection unit 110 detects which microphone 102 has collected wind noise at a level exceeding a predetermined threshold.
  • the signal processing apparatus 100 is configured to be able to identify from which microphone 102 the sound sent to the detection unit 110 is sent. For example, information for identifying the microphone 102 may be added to the sound information transmitted from each microphone 102, and the microphone 102 can be identified by an interface connecting the microphone 102 and the detection unit 110. Also good.
  • the detection unit 110 detects the direction of movement of the signal processing device 100 based on the difference in the level of wind noise collected by the microphone 102. When moved in a certain direction, a high level aerodynamic sound (wind noise) is acquired from the microphone 102 provided in a direction perpendicular to the direction.
  • FIG. 3 is an explanatory diagram showing how wind noise is collected by the microphone 102 when the user wearing the signal processing apparatus 100 moves his / her arm left and right. Therefore, if there is a microphone 102 that has collected a high level of sound, it can be seen that the arm is moving in the direction shown in FIG.
  • FIG. 4 is an explanatory diagram showing how wind noise is collected by the microphone 102 when the user wearing the signal processing apparatus 100 moves his / her arm up and down. Therefore, if there is a microphone 102 that has collected a high level sound, it can be seen that the arm is moving in the direction shown in FIG.
  • the detection unit 110 detects which microphone 102 has collected a wind noise of a level exceeding a predetermined threshold, The direction of movement of the signal processing apparatus 100 can be detected.
  • the microphone 102 can collect not only wind noise but also various other sounds. However, since the frequency of wind noise is extremely limited, the detection unit 110 detects whether or not the microphone 102 has collected wind noise by detecting the presence or absence of sound having a frequency corresponding to the wind noise. Can be determined. Between the microphone 102 and the detection part 110, the filter which allows only the signal of the frequency band corresponding to a wind noise may be provided.
  • the filter may be a band pass filter or a high pass filter.
  • the signal processing apparatus 100 may have a structure in which a specific microphone 102 is provided at a specific position. For example, if the signal processing apparatus 100 has a structure in which the specific microphone 102 is located on the back side of the hand, the signal processing apparatus 100 detects the direction of movement from the sound collection level of the specific microphone 102. It will be easier to do.
  • the processing unit 120 includes, for example, a processor such as a CPU or DSP, a storage medium such as a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and the direction of movement of the signal processing device 100 detected by the detection unit 110 The process according to is executed.
  • the processing unit 120 performs sound generation according to the direction of movement, effect processing for the sound collected by the microphone 102, and the like as processing according to the direction of movement of the signal processing device 100.
  • the processing unit 120 when the user wearing the signal processing device 100 on the wrist moves in the horizontal direction with the back of the hand up, as shown in FIG. 4, the signal processing device 100 is placed on the wrist. Different sounds may be generated depending on whether the wearing user moves the back of the hand in the vertical direction. The sound generated by the processing unit 120 in this manner can be output from the output unit 130 at the subsequent stage.
  • the processing unit 120 may perform signal processing on the waveform of the sound collected by the microphone 102.
  • the effect processing performed by the processing unit 120 may include, for example, echo, reverb, low-frequency modulation, speed change (time stretch), pitch change (pitch shift), and the like.
  • sound amplification processing may also be regarded as a kind of effect processing.
  • the processing unit 120 can perform addition synthesis and subtraction synthesis with filter effects such as low-pass, high-pass, and band-pass, and oscillators (sine wave, sawtooth wave, triangular wave, rectangular wave, etc.) as effect processing.
  • the processing unit 120 may perform amplification processing on a frequency band of at least a part of the sound collected by the microphone 102 or predetermined effect processing as signal processing.
  • the processing unit 120 may specify the amplification amount for the sound collected by the microphone 102, the frequency band to be amplified, and the content of the effect processing, or may be determined automatically by the user.
  • the processing unit 120 automatically determines the amount of amplification, the frequency band to be amplified, and the content of effect processing for the sound collected by the microphone 102, for example, the detected motion content of the signal processing device 100, that is, the signal processing device. You may determine according to the content of a motion, such as a site
  • the processing unit 120 can perform processing according to the form of the output unit 130 described later. For example, when the output unit 130 is a vibrator, the processing unit 120 can generate or determine a vibration pattern according to the direction of movement of the signal processing device 100. Further, for example, when the output unit 130 is an LED (Light Emitting Diode), the processing unit 120 can generate or determine a light emission pattern according to the direction of movement of the signal processing device 100 and determine a light emission color.
  • the output unit 130 is a vibrator
  • the processing unit 120 can generate or determine a vibration pattern according to the direction of movement of the signal processing device 100.
  • the processing unit 120 can generate or determine a light emission pattern according to the direction of movement of the signal processing device 100 and determine a light emission color.
  • the output unit 130 performs output based on the signal processing performed by the processing unit 120.
  • the output unit 130 can take various forms such as a speaker, a vibrator, an LED, and a wireless communication interface.
  • the output unit 130 may output a sound generated by the processing unit 120 according to the direction of movement of the signal processing device 100. That is, the output unit 130 can output different sounds depending on the direction of movement of the signal processing apparatus 100.
  • the output unit 130 when the output unit 130 is a vibrator, the output unit 130 may vibrate with a vibration pattern generated by the processing unit 120 according to the direction of movement of the signal processing device 100. That is, the output unit 130 can output different sounds depending on the direction of movement of the signal processing apparatus 100.
  • the output unit 130 when the output unit 130 is an LED, the output unit 130 may emit light with a light emission pattern or color generated by the processing unit 120 and corresponding to the direction of movement of the signal processing device 100. That is, the output unit 130 can output different sounds depending on the direction of movement of the signal processing apparatus 100.
  • the output unit 130 may transmit a sound generated by the processing unit 120 to another device according to the direction of movement of the signal processing device 100.
  • Examples of other devices include a speaker having a wireless communication function, a personal computer, a smartphone (high-performance mobile phone), a tablet portable terminal, a portable music player, and a portable game machine.
  • the signal processing device 100 has a configuration as illustrated in FIG. 2, thereby detecting the direction of movement of a part to which the signal processing device 100 is attached without using a sensor. I can do it.
  • the signal processing apparatus 100 can take various forms other than the one shown in FIG.
  • FIG. 1 illustrates an appearance example of the signal processing apparatus 100 including four microphones 102, but the present disclosure is not limited to such an example.
  • FIG. 5 is an explanatory diagram illustrating an application example of the signal processing apparatus 100. As described above, in order to detect the movement in the horizontal direction and the vertical direction, the microphones 102 need only be provided at two places as shown in FIG.
  • FIG. 6 is an explanatory diagram illustrating an application example of the signal processing device 100.
  • FIG. 6 shows a signal processing apparatus 100 in which eight microphones 102 are arranged in a band 101 at substantially equal intervals. By providing eight microphones 102 in this way, the signal processing apparatus 100 can detect not only horizontal and vertical movements but also diagonal movements.
  • the signal processing apparatus 100 can not only detect the direction of movement of the attached part with higher accuracy, but also see the temporal change in the level of wind noise. It is possible to detect the speed of movement and the rotational angular velocity of the mounted part.
  • FIG. 7 is an explanatory diagram showing an application example of the signal processing apparatus 100.
  • FIG. 7 shows a signal processing apparatus 100 in which eight microphones 102 are arranged in a band 101 at substantially equal intervals.
  • FIG. 7 shows a state where the mounting portion of the signal processing device 100 is moving from the left to the right in the drawing. Since the level of wind noise increases as the moving speed increases, the signal processing apparatus 100 determines the moving speed of the mounting portion of the signal processing apparatus 100 from the temporal change in the level of wind noise collected by the microphone 102. I can guess.
  • FIG. 8 is an explanatory diagram showing an application example of the signal processing apparatus 100.
  • FIG. 8 shows a signal processing apparatus 100 in which eight microphones 102 are arranged in a band 101 at substantially equal intervals. Further, FIG. 8 shows a state where the mounting portion of the signal processing device 100 is rotated clockwise. Since the level of wind noise increases as the rotational angular velocity increases, the signal processing device 100 determines the rotational angular velocity of the mounting portion of the signal processing device 100 from the temporal change in the level of wind noise collected by the microphone 102. I can guess.
  • the signal processing apparatus 100 can take various forms other than those described above.
  • the object to which the signal processing device 100 is attached may be, for example, a tool used in sports, such as a bat, a racket, or a golf club. Therefore, it goes without saying that various forms can be taken according to the shape of the mounted object.
  • an example of the signal processing device 100 will be described with reference to the drawings.
  • the form of the signal processing device 100 is not limited to the one shown below.
  • 9 to 12 are explanatory diagrams showing examples of the signal processing apparatus 100.
  • FIG. 9 is an explanatory diagram showing an example of the signal processing apparatus 100 in which a plurality of microphones 102 are provided on the surface of a rod-like object.
  • FIG. 10 is an explanatory diagram illustrating an example of the signal processing apparatus 100 in which a plurality of microphones 102 are provided on the surface of a planar object.
  • the signal processing apparatus 100 also detects the level of wind noise collected by the microphone 102 provided on the rod-like or planar object, so that the signal processing apparatus 100 itself moves in the moving direction and speed, The moving direction and moving speed of the mounting part of the signal processing apparatus 100 can be estimated.
  • FIG. 11 is an explanatory diagram showing an example of the signal processing apparatus 100 in which a plurality of microphones 102 are provided on the surface of a spherical object.
  • FIG. 12 is an explanatory diagram showing an example of the signal processing apparatus 100 in which a plurality of microphones 102 are provided on the surface of a hemispherical object.
  • the signal processing device 100 also detects the moving direction and speed of the signal processing device 100 itself by detecting the level of wind noise collected by the microphone 102 provided on the spherical or hemispherical object. The moving direction and moving speed of the mounting part of the signal processing apparatus 100 can be estimated.
  • the signal processing device 100 estimates the moving direction and moving speed of the head by being mounted on the head. I can do it.
  • the positions where the microphones are provided be as evenly spaced as possible.
  • FIG. 1 and the like an example of the signal processing apparatus 100 in which the microphones 102 are provided at a plurality of positions is shown, but the present disclosure is not limited to such an example.
  • the plurality of microphones 102 may be arranged together at one position.
  • FIGS. 13 to 15 are explanatory diagrams showing examples of the signal processing apparatus 100 having a shape suitable for wearing on the wrist.
  • 13 is a plan view of the signal processing device 100
  • FIG. 14 is a side view of the signal processing device 100 as seen from one side
  • FIG. 15 is a side view of the signal processing device 100 as seen from another side.
  • FIG. 13 is a plan view of the signal processing device 100
  • FIG. 14 is a side view of the signal processing device 100 as seen from one side
  • FIG. 15 is a side view of the signal processing device 100 as seen from another side.
  • the signal processing apparatus 100 shown in FIGS. 13 to 15 is configured such that a plurality of microphones 102 are positioned on the back side of the hand when worn on the wrist.
  • the plurality of microphones 102 are covered with a cover 103.
  • the cover 103 has a shape that easily collects wind noise in the upper and lateral directions of the signal processing apparatus 100.
  • a plurality of microphones 102 are positioned so as to collect wind noises in the upper and lateral directions.
  • the cover 103 covering the plurality of microphones 102 may be provided with the output unit 130 in the configuration example of the signal processing apparatus 100 described with reference to FIG.
  • the cover 103 may include an LED whose light emission pattern or light emission color changes according to the direction of wrist movement.
  • the cover 103 may be provided with a vibrator that changes a vibration pattern and a vibration time according to the direction of wrist movement.
  • the signal processing apparatus 100 can estimate the moving direction and moving speed of the attachment site.
  • the signal processing apparatus 100 includes a plurality of microphones 102, so that it can estimate not only the moving direction and moving speed of the wearing part but also the moving direction and moving speed of an adjacent object. .
  • FIG. 16 is an explanatory diagram showing an example of the signal processing apparatus 100.
  • a plurality of microphones 102 are provided on the surface of a rod-like object as shown in FIG. Etc.
  • an aerodynamic sound is generated according to the movement.
  • the signal processing device 100 collects the aerodynamic sound with the microphone 102 and analyzes the change of the aerodynamic sound, thereby determining in which direction and how much an object such as a hand has moved on the surface of the signal processing device 100. It can be estimated whether it has moved at a speed of
  • the detection unit 110 may detect that the signal processing device 100 is moving by synthesizing wind noises collected by the plurality of microphones 102. As a result, wind noise for movement in various directions is acquired instead of wind noise for movement in a specific direction. Note that the wind noise collected by the plurality of microphones 102 may be synthesized by adding the wind noises collected by the microphones 102, or may be synthesized only at a certain level or higher. Good.
  • FIG. 17 to 22 are explanatory diagrams illustrating an external appearance example of a signal processing device 200 according to another embodiment of the present disclosure.
  • FIG. 17 is an explanatory diagram showing a plan view of the signal processing device 200.
  • FIG. 18 is an explanatory diagram showing a bottom view of the signal processing device 200.
  • 19 and 20 are explanatory views showing a front view of the signal processing device 200.
  • FIG. 21 and 22 are explanatory diagrams illustrating side views of the signal processing device 200.
  • FIG. 17 to 22 are explanatory diagrams illustrating an external appearance example of a signal processing device 200 according to another embodiment of the present disclosure.
  • FIG. 17 is an explanatory diagram showing a plan view of the signal processing device 200.
  • FIG. 18 is an explanatory diagram showing a bottom view of the signal processing device 200.
  • 19 and 20 are explanatory views showing a front view of the signal processing device 200.
  • FIG. 21 and 22 are explanatory diagrams illustrating side views of the signal processing device 200.
  • the signal processing apparatus 200 shown in FIGS. 17 to 22 analyzes the content of wind noise (aerodynamic sound) collected by a plurality of microphones, so that It is possible to analyze the moving direction and moving speed.
  • the signal processing device 200 may have the same configuration as the functional configuration example of the signal processing device 100 as illustrated in FIG. 2, for example. Therefore, for example, when a user wearing the signal processing device 200 on the wrist moves his / her wrist, the signal processing device 200 detects the difference in the level of wind noise collected by each microphone unit 202 and You can determine whether you have moved your wrist in the direction.
  • the 17 to 22 is provided with a plurality of microphone units 202 on the surface of the band unit 201 so that the user can fasten the signal processing device 200 to the wrist.
  • the signal processing device 200 is provided with a light emitting unit 204 using LEDs or the like around the microphone unit 202.
  • the signal processing device 200 is used for causing the user to turn on and off the pairing button 211 that executes pairing that is prepared for communication with other terminals and the like, and the signal processing device 200.
  • a power button 221 and an operation button 222 for operating the signal processing device 200 are provided.
  • the signal processing device 200 includes a charging terminal 231 for charging a battery (not shown) provided therein.
  • the signal processing device 200 includes a fastener 241 for fastening the band unit 201 to the arm at the tip of one band unit 201.
  • the signal processing device 200 may include a speaker. Since the signal processing device 200 includes a speaker, the signal processing device 200 can perform signal processing based on the signal waveform of wind noise collected by the microphone unit 202, and can output sound based on the signal processing from the speaker.
  • a plurality of microphone sections 202 are provided in the band section 201 (three in the example shown in FIGS. 17 to 22). Each microphone unit 202 is desirably provided at a position that is left-right symmetric when viewed in plan or side. For example, when the signal processing device 200 is worn on a human wrist and the person moves the arm on which the signal processing device 200 is worn, the microphone unit 202 collects wind noise. The microphone unit 202 can collect wind noise in various directions by being provided at different positions of the band unit 201.
  • the signal processing device 200 includes the microphone unit 202 at the position shown in FIGS. 17 to 22, so that wind noise sufficient for signal processing can be collected.
  • the microphone part 202 may have a shape protruding from the band part 201 as shown in FIG. By having a shape protruding from the band part 201, the microphone part 202 can collect more wind noise. Further, as shown in FIG. 17 and the like, the microphone unit 202 may be knurled. Since the knurled cutting process is performed, the microphone unit 202 can collect more wind noise.
  • the signal processing device 200 moves by analyzing the content of wind noise collected by the microphone without using a motion sensor that senses movement. It is possible to detect this, and to analyze the moving direction and moving speed of the part where the signal processing device 200 is mounted.
  • the signal processing devices 100 and 200 relate to the signal processing devices 100 and 200 by analyzing the content of wind noise collected by a microphone without using a motion sensor that senses movement. It is possible to estimate movement information, for example, movements of the signal processing apparatuses 100 and 200 themselves, movements of parts where the signal processing apparatuses 100 and 200 are mounted, movements of objects close to the signal processing apparatuses 100 and 200, and the like. It becomes.
  • the signal processing device according to any one of (1) to (3), further including a processing unit that performs an effect process on the sound based on the sound collected by the sound collecting unit.
  • the sound collection unit is a microphone having directivity.
  • the microphone has directivity in a direction perpendicular to a sound collection surface.
  • the detection unit estimates the speed of the movement from the sound collected by the sound collection unit.
  • the detection unit estimates a rotational angular velocity of the movement from a sound collected by the sound collection unit. (9) 9.
  • the signal processing device according to any one of (1) to (8), which is attached to a site that causes movement. (10) The signal processing apparatus according to any one of (1) to (9), wherein the sound collection unit is disposed on a circular band. (11) The signal processing apparatus according to any one of (1) to (9), wherein the sound collection unit is disposed on a rod-like object. (12) The signal processing device according to any one of (1) to (9), wherein the sound collection unit is disposed on a planar object. (13) The signal processing apparatus according to any one of (1) to (9), wherein the sound collection unit is disposed on a spherical object. (14) The signal processing apparatus according to any one of (1) to (9), wherein the sound collection unit is disposed on a hemispherical object.

Landscapes

  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Geometry (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Indicating Or Recording The Presence, Absence, Or Direction Of Movement (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

【課題】動きに応じて生じる音からその動きの内容を検出することが可能な、信号処理装置を提供する。 【解決手段】所定の位置に配置される複数の集音部と、装着される部位の動きに応じて生じ、前記集音部が集音したそれぞれの音から前記部位の動きの方向を検出する検出部と、を備える、信号処理装置が提供される。

Description

信号処理装置及び信号処理方法
　本開示は、信号処理装置及び信号処理方法に関する。
　加速度センサや角速度センサ等からなるモーションセンサが出力するセンシングデータから、そのセンサの装着部位の動きを検出する技術がある（例えば特許文献１参照）。
特開２０１５－１５９３８３号公報
　物を動かす際には空気の流れが生じる。その空気の流れを音として捉えれば、モーションセンサを使うこと無く物の動きを検出することが可能になると考えられる。
　そこで、本開示では、動きに応じて生じる音からその動きの内容を検出することが可能な、新規かつ改良された信号処理装置及び信号処理方法を提案する。
　本開示によれば、所定の位置に配置される複数の集音部と、装着される部位の動きに応じて生じ、前記集音部が集音したそれぞれの音から前記部位の動きの方向を検出する検出部と、を備える、信号処理装置が提供される。
　また本開示によれば、所定の位置に配置される複数の集音部が集音した、前記集音部が装着される部位の動きに応じて生じたそれぞれの音に基づき、前記部位の動きの方向を検出することを含む、信号処理方法が提供される。
　以上説明したように本開示によれば、動きに応じて生じる音からその動きの内容を検出することが可能な、新規かつ改良された信号処理装置及び信号処理方法を提供することが出来る。
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の実施の形態に係る信号処理装置１００の外観例を示す説明図である。 同実施の形態に係る信号処理装置１００の機能構成例を示す説明図である。 腕を左右に動かした場合における、マイク１０２による風切音の集音の様子を示す説明図である。 腕を上下に動かした場合における、マイク１０２による風切音の集音の様子を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置１００の応用例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。 信号処理装置２００の外観例を示す説明図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　なお、説明は以下の順序で行うものとする。
　１．本開示の実施の形態
　　１．１．外観例
　　１．２．機能構成例
　　１．３．応用例
　２．まとめ
　＜１．本開示の実施の形態＞
　［１．１．外観例］
　本開示の実施の形態について詳細に説明する。まず、本開示の実施の形態に係る信号処理装置の外観例を説明する。
　図１は、本開示の実施の形態に係る信号処理装置１００の外観例を示す説明図である。以下、図１を用いて本開示の実施の形態に係る信号処理装置１００の外観例について説明する。
　図１に示した本開示の実施の形態に係る信号処理装置１００は、例えば人間の手首や足首その他の動きを生じさせる部位や物体に装着されうる装置である。信号処理装置１００が装着される物体としては、例えばスポーツで使用する道具、例えばバット、ラケット、ゴルフクラブなどがあり得る。そして信号処理装置１００は、複数のマイクを備え、そのマイクが集音した空力音（風切音）のレベルから、信号処理装置１００が装着された動きの方向を判定する装置である。
　図１に示したように、本開示の実施の形態に係る信号処理装置１００は、バンド１０１と、バンド１０１の周囲に設けられる複数のマイク１０２と、を含む。図１では、信号処理装置１００が人間の手首に装着されている状態が図示されている。
　本実施形態では、マイク１０２は、図１に示したように、手首の動きを検出しやすくするために図示したような４つの位置に設けられている。マイク１０２の数及び設置位置は、図１に示した例に限定されるものでは無い。
　それぞれのマイク１０２は、指向性マイクであってもよい。その指向性は、それぞれのマイクの集音面から垂直方向に向かったもの、すなわち図１における破線の矢印の方向の指向性であってもよい。例えば手首に信号処理装置１００を装着したユーザが手首を上下又は左右に動かすと、その動きに伴って風切音が発生する。それぞれのマイク１０２がこのような指向性を有することで、その風切音のレベルから、信号処理装置１００は動きの方向を検出することができる。
　以上、図１を用いて本開示の実施の形態に係る信号処理装置１００の外観例について説明した。続いて、本開示の実施の形態に係る信号処理装置１００の機能構成例について説明する。
　［１．２．機能構成例］
　図２は、本開示の実施の形態に係る信号処理装置１００の機能構成例を示す説明図である。以下、図２を用いて本開示の実施の形態に係る信号処理装置１００の機能構成例について説明する。
　図２に示したように、本開示の実施の形態に係る信号処理装置１００は、複数のマイク１０２と、検出部１１０と、処理部１２０と、出力部１３０と、を含んで構成される。
　上述したように、マイク１０２は、信号処理装置１００が装着されている部位の動きに応じて発生する風切音を集音するために設けられている。そしてそれぞれのマイク１０２は、上述したように指向性マイクであってもよい。マイク１０２は、集音した音を検出部１１０にそれぞれ出力する。
　検出部１１０は、例えばＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）やＤＳＰ（Ｄｉｇｉｔａｌ　Ｓｉｇｎａｌ　Ｐｒｏｃｅｓｓｏｒ）などのプロセッサで構成され、それぞれのマイク１０２から送られてくる音の内容やレベルを検出する。検出部１１０は、マイク１０２から送られてくる音の内容やレベルを検出することで、信号処理装置１００の動きの方向を検出する。検出部１１０は、マイク１０２から送られてくる音の内容やレベルに基づいて信号処理装置１００の動きの方向を検出すると、その検出の結果を処理部１２０に出力する。例えば、検出部１１０は、どのマイク１０２が所定の閾値を超えるレベルの風切音を集音したかどうかを検出する。
　信号処理装置１００は、検出部１１０に送られる音がどのマイク１０２から送られてきたものであるかを識別できるよう構成されている。例えば、それぞれのマイク１０２から送られてくる音の情報に、マイク１０２を識別する情報が付加されていても良く、マイク１０２と検出部１１０とを接続するインターフェースによってマイク１０２を識別できるようにしてもよい。
　検出部１１０による信号処理装置１００の動きの方向の検出方法について説明する。検出部１１０は、マイク１０２が集音した風切音のレベルの違いによって、信号処理装置１００の動きの方向を検出する。ある方向に動かした場合、その方向と垂直方向に設けられているマイク１０２から、高いレベルの空力音（風切音）が取得される。
　図３は、信号処理装置１００を装着したユーザが腕を左右に動かした場合における、マイク１０２による風切音の集音の様子を示す説明図である。従って、高いレベルの音が集音されたマイク１０２があれば、図３に示した方向に腕が動いていることが分かる。
　また図４は、信号処理装置１００を装着したユーザが腕を上下に動かした場合における、マイク１０２による風切音の集音の様子を示す説明図である。従って、高いレベルの音が集音されたマイク１０２があれば、図４に示した方向に腕が動いていることが分かる。
　このように、高いレベルの音が集音されたマイク１０２があれば、検出部１１０は、どのマイク１０２が所定の閾値を超えるレベルの風切音を集音したかどうかを検出することにより、信号処理装置１００の動きの方向を検出することが出来る。
　マイク１０２は、風切音だけでなく、他にも様々な音を集音しうる。しかし、風切音の周波数は極めて限定的であるため、検出部１１０は、その風切音に対応する周波数の音の有無を検出することで、マイク１０２が風切音を集音したか否かを判断することができる。マイク１０２と検出部１１０との間には、風切音に対応する周波数帯の信号だけを通過させるフィルタが設けられていても良い。当該フィルタは、バンドパスフィルタであっても良く、ハイパスフィルタであっても良い。
　なお、動きの方向の検出精度を高めるために、信号処理装置１００は、特定のマイク１０２が特定の位置に設けられるような構造を有していても良い。例えば、手の甲の側に特定のマイク１０２が位置するような構造を信号処理装置１００が有していれば、信号処理装置１００は、その特定のマイク１０２の集音レベルから、動きの方向を検出することがより容易となる。
　処理部１２０は、例えばＣＰＵやＤＳＰなどのプロセッサや、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）などの記憶媒体等で構成され、検出部１１０が検出した信号処理装置１００の動きの方向に応じた処理を実行する。処理部１２０は、信号処理装置１００の動きの方向に応じた処理として、動きの方向に応じた音の生成、マイク１０２が集音した音に対するエフェクト処理などを行う。
　例えば処理部１２０は、図３の様に、信号処理装置１００を手首に装着したユーザが、手の甲を上にして水平方向に動かした場合と、図４の様に、信号処理装置１００を手首に装着したユーザが、手の甲を上にして垂直方向に動かした場合とで、異なる音を生成しても良い。そのようにして処理部１２０が生成した音は、後段の出力部１３０から出力されうる。
　また例えば、処理部１２０は、マイク１０２が集音した音の波形に対して信号処理を施しても良い。処理部１２０が行う、エフェクト処理には、例えばエコーやリバーブ、低周波による変調、速度の変化（タイムストレッチ）、音程の変化（ピッチシフト）などが含まれうる。なお、音の増幅処理もエフェクト処理の一種として捉えても良い。処理部１２０は、エフェクト処理として、ローパス、ハイパス、バンドパスなどのフィルタ効果、オシレータ（サイン波、ノコギリ波、三角波、矩形波など）との加算合成や減算合成を行いうる。処理部１２０は、信号処理として、例えばマイク１０２が集音した音の少なくとも一部の周波数帯域に対する増幅処理や、所定のエフェクト処理などを行ってもよい。
　処理部１２０は、マイク１０２が集音した音に対する増幅量や増幅する周波数帯、エフェクト処理の内容を、ユーザが指定したものとしてもよく、自動的に決定しても良い。処理部１２０は、マイク１０２が集音した音に対する増幅量や増幅する周波数帯、エフェクト処理の内容を自動的に決定する場合は、例えば検出した信号処理装置１００の動きの内容、すなわち信号処理装置１００が装着される部位や用具などの動きの内容に応じて決定しても良い。
　また処理部１２０は、後述する出力部１３０の形態に応じた処理を実施しうる。例えば、出力部１３０がバイブレータである場合、処理部１２０は、信号処理装置１００の動きの方向に応じた振動パターンを生成、または決定することが出来る。また例えば、出力部１３０がＬＥＤ（Ｌｉｇｈｔ　Ｅｍｉｔｔｉｎｇ　Ｄｉｏｄｅ）である場合、処理部１２０は、信号処理装置１００の動きの方向に応じた発光パターンを生成または決定し、発光色を決定することが出来る。
　出力部１３０は、処理部１２０が行った信号処理に基づいた出力を行う。出力部１３０は、例えば、スピーカやバイブレータ、ＬＥＤ、無線通信インターフェース等の様々な形態をとりうる。
　例えば、出力部１３０がスピーカである場合、出力部１３０は、処理部１２０が生成した、信号処理装置１００の動きの方向に応じた音を出力しても良い。すなわち、出力部１３０は、信号処理装置１００の動きの方向によって異なる音を出力することができる。
　例えば、出力部１３０がバイブレータである場合、出力部１３０は、処理部１２０が生成した、信号処理装置１００の動きの方向に応じた振動パターンで振動しても良い。すなわち、出力部１３０は、信号処理装置１００の動きの方向によって異なる音を出力することができる。
　また例えば、出力部１３０がＬＥＤである場合、出力部１３０は、処理部１２０が生成した、信号処理装置１００の動きの方向に応じた発光パターンや色で発光しても良い。すなわち、出力部１３０は、信号処理装置１００の動きの方向によって異なる音を出力することができる。
　また例えば、出力部１３０が無線通信インターフェースである場合、出力部１３０は、他の装置に対して処理部１２０が生成した、信号処理装置１００の動きの方向に応じた音を送信しても良い。他の装置としては、例えば無線通信機能を備えたスピーカ、パーソナルコンピュータ、スマートフォン（高機能携帯電話）、タブレット型携帯端末、携帯型音楽再生装置、携帯型ゲーム機などがありうる。
　本開示の実施の形態に係る信号処理装置１００は、図２に示したような構成を有することで、信号処理装置１００が装着された部位の動きの方向を、センサを用いること無く検出することが出来る。
　［１．３．応用例］
　信号処理装置１００は、図１に示したもの以外にも様々な形態をとりうる。図１には、マイク１０２を４つ備えた信号処理装置１００の外観例を示したが、本開示は係る例に限定されるものではない。図５は、信号処理装置１００の応用例を示す説明図である。上述したように、水平方向と垂直方向の動きを検出するためには、例えば図５に示したように、２カ所にマイク１０２が備えられていればよい。
　また、マイク１０２の数を増やすことで、信号処理装置１００は、装着された部位の動きの方向を、より高精度で検出することができる。図６は、信号処理装置１００の応用例を示す説明図である。図６には、バンド１０１に８個のマイク１０２が略等間隔で配置されている信号処理装置１００が示されている。このように８個のマイク１０２が設けられることで、信号処理装置１００は、水平方向と垂直方向の動きだけでなく、斜め方向の動きを検出することが可能となる。
　マイク１０２の数を増やすことで、信号処理装置１００は、装着された部位の動きの方向を、より高精度で検出することができるだけでなく、風切音のレベルの時間的変化を見ることで、装着された部位の動きの速さや回転角速度を検出することができる。
　図７は、信号処理装置１００の応用例を示す説明図である。図７には、バンド１０１に８個のマイク１０２が略等間隔で配置されている信号処理装置１００が示されている。また図７には、図の左から右へ信号処理装置１００の装着部位が移動している様子が示されている。移動速度が速ければ風切音のレベルも高くなることから、信号処理装置１００は、マイク１０２が集音した風切音のレベルの時間的変化から、信号処理装置１００の装着部位の移動速度を推測することが出来る。
　図８は、信号処理装置１００の応用例を示す説明図である。図８には、バンド１０１に８個のマイク１０２が略等間隔で配置されている信号処理装置１００が示されている。また図８には、時計回りに信号処理装置１００の装着部位が回転している様子が示されている。回転角速度が速ければ風切音のレベルも高くなることから、信号処理装置１００は、マイク１０２が集音した風切音のレベルの時間的変化から、信号処理装置１００の装着部位の回転角速度を推測することが出来る。
　信号処理装置１００は、上述したものの他にも様々な形態を取りうる。上述したように、信号処理装置１００が装着される物体としては、例えばスポーツで使用する道具、例えばバット、ラケット、ゴルフクラブなどがあり得る。従って、装着される物体の形状に応じて様々な形態を取りうることは言うまでも無い。以下では、信号処理装置１００の例を、図面を参照しながら説明するが、信号処理装置１００の形態は以下で示したものに限定されないものであることは言うまでも無いことである。図９～図１２は、信号処理装置１００の例を示す説明図である。
　図９は、棒状の物体の表面に複数のマイク１０２が設けられた信号処理装置１００の例を示す説明図である。図１０は、面状の物体の表面に複数のマイク１０２が設けられた信号処理装置１００の例を示す説明図である。このように、棒状や面状の物体に設けられたマイク１０２が集音した風切音のレベルを検出することによっても、信号処理装置１００は、信号処理装置１００そのものの移動方向や移動速度、信号処理装置１００の装着部位の移動方向や移動速度などを推測することが出来る。
　図１１は、球状の物体の表面に複数のマイク１０２が設けられた信号処理装置１００の例を示す説明図である。また図１２は、半球状の物体の表面に複数のマイク１０２が設けられた信号処理装置１００の例を示す説明図である。このように、球状や半球状の物体に設けられたマイク１０２が集音した風切音のレベルを検出することによっても、信号処理装置１００は、信号処理装置１００そのものの移動方向や移動速度、信号処理装置１００の装着部位の移動方向や移動速度などを推測することが出来る。
　例えば、ヘルメットの周囲に複数のマイク１０２が設けられている様な形状を有する場合、信号処理装置１００は、頭部に装着されることでその頭部の移動方向や移動速度などを推測することが出来る。
　それぞれの例において、マイクが設けられる位置は、なるべく等間隔となっていることが望ましい。
　図１などでは、複数の位置にマイク１０２が設けられた信号処理装置１００の例を示したが、本開示は係る例に限定されるものでは無い。複数のマイク１０２は一つの位置に纏めて配置されてもよい。
　図１３～図１５は、手首の装着に適した形状を有する信号処理装置１００の例を示す説明図である。図１３は、信号処理装置１００の平面図であり、図１４は、信号処理装置１００の一の側面から見た側面図であり、図１５は、信号処理装置１００の別の側面から見た側面図である。
　図１３～図１５で示された信号処理装置１００は、手首に装着された際に手の甲の側に複数のマイク１０２が位置するよう構成されている。また複数のマイク１０２はカバー１０３で覆われている。カバー１０３は、信号処理装置１００の上部及び横方向の風切音を集音しやすい形状となっている。図１３～図１５で示された信号処理装置１００は、上部及び横方向の風切音を集音するように複数のマイク１０２が位置している。
　なお、複数のマイク１０２を覆っているカバー１０３には、図２を用いて説明した信号処理装置１００の構成例における出力部１３０が備えられても良い。例えば、カバー１０３には、手首の動きの方向に応じて発光パターンや発光色が変化するＬＥＤが備えられても良い。また例えば、カバー１０３には、手首の動きの方向に応じて振動パターンや振動時間が変化するバイブレータが備えられても良い。
　このような形態を有することでも、信号処理装置１００は、装着部位の移動方向や移動速度などを推測することが出来る。
　さらに信号処理装置１００は、複数のマイク１０２を備えることで、装着部位の移動方向や移動速度等を推測するだけでなく、近接している物体の移動方向や移動速度等も推測することが出来る。
　図１６は、信号処理装置１００の例を示す説明図である、例えば図９に示したように棒状の物体の表面に複数のマイク１０２が設けられている場合、そのマイクの上で人間が手などを移動させると、その移動に応じて空力音が発生する。信号処理装置１００は、その空力音をマイク１０２で集音して、空力音の変化を解析することで、信号処理装置１００の表面で手などの物体がどの方向に移動したのか、またどの程度の速度で移動したのか等を推測することができる。
　また、検出部１１０は、複数のマイク１０２が集音した風切音を合成することにより、信号処理装置１００が動いていることを検出するようにしてもよい。これにより、特定の方向の動きに対する風切音ではなく、様々な方向の動きに対する風切音が取得される。なお、複数のマイク１０２が集音した風切音の合成は、各マイク１０２が集音した風切音を加え合わせて合成してもよいし、あるレベル以上のものだけ加え合わせるようにしてもよい。
　図１７～２２は、本開示の別の実施の形態に係る信号処理装置２００の外観例を示す説明図である。図１７は信号処理装置２００の平面図を示す説明図である。図１８は、信号処理装置２００の底面図を示す説明図である。図１９及び図２０は、信号処理装置２００の正面図を示す説明図である。図２１及び図２２は、信号処理装置２００の側面図を示す説明図である。
　図１７～２２に示した信号処理装置２００は、上述した信号処理装置１００と同様に、複数のマイクが集音した風切音（空力音）の内容を解析することで、装着された部位の移動方向や移動速度などを解析することが可能としている。信号処理装置２００は、例えば、図２に示したような信号処理装置１００の機能構成例と同様の構成を有しうる。従って、例えば手首に信号処理装置２００を装着したユーザがその手首を動かすと、信号処理装置２００は、それぞれのマイク部２０２で集音された風切音のレベルの違いを検出し、ユーザがどの方向に手首を動かしたかを判定することが出来る。
　図１７～２２に示した信号処理装置２００は、ユーザが信号処理装置２００を手首に留めるためバンド部２０１の表面に、複数のマイク部２０２が設けられている。また信号処理装置２００は、マイク部２０２の周囲にＬＥＤ等を用いた発光部２０４が設けられる。また信号処理装置２００は、他の端末などとの間で通信を行うための準備となるペアリングを実行するペアリングボタン２１１、信号処理装置２００の電源のオン、オフをユーザに行わせるための電源ボタン２２１、及び信号処理装置２００の操作を行う操作ボタン２２２を備える。また信号処理装置２００は、内部に備えられている図示しないバッテリを充電するための充電端子２３１を備える。また信号処理装置２００は、一方のバンド部２０１の先端に、バンド部２０１を腕に留めるための留め具２４１を備える。
　なお図１７～２２には図示していないが、信号処理装置２００はスピーカを備えていても良い。信号処理装置２００は、スピーカを備えることで、マイク部２０２が集音した風切音の信号波形に基づいた信号処理を行い、その信号処理に基づいた音をスピーカから出力することが出来る。
　マイク部２０２は、バンド部２０１に複数（図１７～２２に示した例では３つ）設けられている。それぞれのマイク部２０２は、平面や側面で見て左右対称となるような位置に設けられることが望ましい。信号処理装置２００が、例えば人間の手首に装着された状態で、その人間が、信号処理装置２００を装着した方の腕を動かすと、マイク部２０２が風切音を集音する。マイク部２０２は、バンド部２０１の異なる位置に設けられることで、様々な方向の風切音を集音することが出来る。また信号処理装置２００は、図１７～２２に示した位置にマイク部２０２を備えることで、信号処理を行うために十分な風切音の集音を可能としている。
　またマイク部２０２は、図１７等に示したように、バンド部２０１から突出している形状を有していてもよい。バンド部２０１から突出している形状を有していることで、マイク部２０２はより多くの風切音を集音することができる。またマイク部２０２には、図１７等に示したように、ローレット状の切り込み加工が施されていても良い。ローレット状の切り込み加工が施されていることで、マイク部２０２はより多くの風切音を集音することができる。
　信号処理装置２００は、このような構成を有することで、動きをセンシングするモーションセンサを用いずに、マイクで集音した風切音の内容を解析することで、信号処理装置２００が動いていることを検出したり、また、信号処理装置２００が装着された部位の移動方向や移動速度などを解析したりすることが可能となる。
　＜２．まとめ＞
　以上説明したように本開示の実施の形態によれば、複数のマイクが集音した風切音（空力音）の内容を解析することで、装着された部位の移動方向や移動速度などを解析することが可能な信号処理装置１００、２００が提供される。
　本開示の実施の形態に係る信号処理装置１００、２００は、動きをセンシングするモーションセンサを用いずに、マイクで集音した風切音の内容を解析することで、信号処理装置１００、２００に関する動きの情報、例えば信号処理装置１００、２００そのものの動き、信号処理装置１００、２００が装着された部位の動き、信号処理装置１００、２００に近接している物体の動き等を推測することが可能となる。
　各装置に内蔵されるＣＰＵ、ＲＯＭおよびＲＡＭなどのハードウェアを、上述した各装置の構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供されることが可能である。また、機能ブロック図で示したそれぞれの機能ブロックをハードウェアまたはハードウェア回路で構成することで、一連の処理をハードウェアまたはハードウェア回路で実現することもできる。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、以下のような構成も本開示の技術的範囲に属する。
（１）
　所定の位置に配置される複数の集音部と、
　装着される部位の動きに応じて生じ、前記集音部が集音したそれぞれの音から前記部位の動きの方向を検出する検出部と、
を備える、信号処理装置。
（２）
　前記検出部は、所定の閾値を超えるレベルの音を集音した前記集音部の位置に基づいて前記動きの方向を検出する、前記（１）に記載の信号処理装置。
（３）
　前記検出部は、各前記集音部が集音した音のレベルの時間的変化に基づいて前記動きの方向を検出する、前記（１）または（２）に記載の信号処理装置。
（４）
　前記集音部が集音した音に基づいて、該音に対するエフェクト処理を行う処理部を備える、前記（１）～（３）のいずれかに記載の信号処理装置。
（５）
　前記集音部は、指向性を有するマイクである、前記（１）～（４）のいずれかに記載の信号処理装置。
（６）
　前記マイクは、集音面に対して垂直方向の指向性を有する、前記（５）に記載の信号処理装置。
（７）
　前記検出部は、前記集音部が集音した音から前記動きの速度を推定する、前記（１）～（６）のいずれかに記載の信号処理装置。
（８）
　前記検出部は、前記集音部が集音した音から前記動きの回転角速度を推定する、前記（１）～（７）のいずれかに記載の信号処理装置。
（９）
　動きを生じさせる部位に装着される、前記（１）～（８）のいずれかに記載の信号処理装置。
（１０）
　前記集音部は、円形のバンド上に配置される、前記（１）～（９）のいずれかに記載の信号処理装置。
（１１）
　前記集音部は、棒状の物体上に配置される、前記（１）～（９）のいずれかに記載の信号処理装置。
（１２）
　前記集音部は、平面状の物体上に配置される、前記（１）～（９）のいずれかに記載の信号処理装置。
（１３）
　前記集音部は、球状の物体上に配置される、前記（１）～（９）のいずれかに記載の信号処理装置。
（１４）
　前記集音部は、半球状の物体上に配置される、前記（１）～（９）のいずれかに記載の信号処理装置。
（１５）
　所定の位置に配置される複数の集音部が集音した、前記集音部が装着される部位の動きに応じて生じたそれぞれの音に基づき、前記部位の動きの方向を検出することを含む、信号処理方法。
　１００　　信号処理装置
　１０２　　マイク

Claims (15)

  1. 　所定の位置に配置される複数の集音部と、
    　装着される部位の動きに応じて生じ、前記集音部が集音したそれぞれの音から前記部位の動きの方向を検出する検出部と、
    を備える、信号処理装置。
  2. 　前記検出部は、所定の閾値を超えるレベルの音を集音した前記集音部の位置に基づいて前記動きの方向を検出する、請求項１に記載の信号処理装置。
  3. 　前記検出部は、各前記集音部が集音した音のレベルの時間的変化に基づいて前記動きの方向を検出する、請求項１に記載の信号処理装置。
  4. 　前記集音部が集音した音に基づいて、該音に対するエフェクト処理を行う処理部を備える、請求項１に記載の信号処理装置。
  5. 　前記集音部は、指向性を有するマイクである、請求項１に記載の信号処理装置。
  6. 　前記マイクは、集音面に対して垂直方向の指向性を有する、請求項５に記載の信号処理装置。
  7. 　前記検出部は、前記集音部が集音した音から前記動きの速度を推定する、請求項１に記載の信号処理装置。
  8. 　前記検出部は、前記集音部が集音した音から前記動きの回転角速度を推定する、請求項１に記載の信号処理装置。
  9. 　動きを生じさせる部位に装着される、請求項１に記載の信号処理装置。
  10. 　前記集音部は、円形のバンド上に配置される、請求項１に記載の信号処理装置。
  11. 　前記集音部は、棒状の物体上に配置される、請求項１に記載の信号処理装置。
  12. 　前記集音部は、平面状の物体上に配置される、請求項１に記載の信号処理装置。
  13. 　前記集音部は、球状の物体上に配置される、請求項１に記載の信号処理装置。
  14. 　前記集音部は、半球状の物体上に配置される、請求項１に記載の信号処理装置。
  15. 　所定の位置に配置される複数の集音部が集音した、前記集音部が装着される部位の動きに応じて生じたそれぞれの音に基づき、前記部位の動きの方向を検出することを含む、信号処理方法。
PCT/JP2017/034552 2016-10-14 2017-09-25 信号処理装置及び信号処理方法 WO2018070232A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
US16/330,281 US10750279B2 (en) 2016-10-14 2017-09-25 Signal processing device and signal processing method for detection of direction of movement of a region
CN201780061702.2A CN109804252B (zh) 2016-10-14 2017-09-25 信号处理装置和信号处理方法
EP17861153.9A EP3527993A4 (en) 2016-10-14 2017-09-25 SIGNAL PROCESSING DEVICE AND SIGNAL PROCESSING METHOD
JP2018544737A JP7059933B2 (ja) 2016-10-14 2017-09-25 信号処理装置及び信号処理方法

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2016202737 2016-10-14
JP2016-202737 2016-10-14
JP2017031873 2017-02-23
JP2017-031873 2017-02-23

Publications (1)

Publication Number Publication Date
WO2018070232A1 true WO2018070232A1 (ja) 2018-04-19

Family

ID=61905590

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/034552 WO2018070232A1 (ja) 2016-10-14 2017-09-25 信号処理装置及び信号処理方法

Country Status (5)

Country Link
US (1) US10750279B2 (ja)
EP (1) EP3527993A4 (ja)
JP (1) JP7059933B2 (ja)
CN (1) CN109804252B (ja)
WO (1) WO2018070232A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS51121680A (en) * 1975-04-17 1976-10-25 Keisokki Kogyo Kk Electric wave oscillating device for measuring false speed
JP2010281279A (ja) * 2009-06-05 2010-12-16 Shimizu Corp 風力発電風車ブレードの異常判定方法、異常判定装置、及び、異常判定プログラム
JP2014121456A (ja) * 2012-12-21 2014-07-03 Yamaha Corp 運動分析装置
US9121860B1 (en) * 2013-02-28 2015-09-01 The United States Of America As Represented By The Secretary Of The Navy Acoustic airspeed measurement system and method

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7155969B2 (en) * 2003-12-10 2007-01-02 Rosemount Aerospace Inc. System for and method of acoustic and through skin air data measurement
US8055469B2 (en) * 2006-03-03 2011-11-08 Garmin Switzerland Gmbh Method and apparatus for determining the attachment position of a motion sensing apparatus
WO2010031903A1 (en) * 2008-09-17 2010-03-25 Entetrainer Oy Techniques for determining a velocity of a sport object
JP5482047B2 (ja) * 2009-09-15 2014-04-23 ソニー株式会社 速度算出装置、速度算出方法及びナビゲーション装置
IT1400363B1 (it) * 2010-06-03 2013-05-31 Magneti Marelli Spa Metodo di determinazione della velocita' di rotazione di un compressore in un motore a combustione interna
US8855341B2 (en) * 2010-10-25 2014-10-07 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for head tracking based on recorded sound signals
US20120173191A1 (en) * 2011-01-03 2012-07-05 Moeller Lothar B Airspeed And Velocity Of Air Measurement
US9635257B2 (en) * 2014-05-12 2017-04-25 Gopro, Inc. Dual-microphone camera
US9631996B2 (en) * 2014-07-03 2017-04-25 Infineon Technologies Ag Motion detection using pressure sensing
CN105979052B (zh) * 2016-06-22 2018-11-27 广东欧珀移动通信有限公司 风速测量方法及移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS51121680A (en) * 1975-04-17 1976-10-25 Keisokki Kogyo Kk Electric wave oscillating device for measuring false speed
JP2010281279A (ja) * 2009-06-05 2010-12-16 Shimizu Corp 風力発電風車ブレードの異常判定方法、異常判定装置、及び、異常判定プログラム
JP2014121456A (ja) * 2012-12-21 2014-07-03 Yamaha Corp 運動分析装置
US9121860B1 (en) * 2013-02-28 2015-09-01 The United States Of America As Represented By The Secretary Of The Navy Acoustic airspeed measurement system and method

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3527993A4 *

Also Published As

Publication number Publication date
CN109804252B (zh) 2021-10-15
CN109804252A (zh) 2019-05-24
JPWO2018070232A1 (ja) 2019-08-08
EP3527993A4 (en) 2019-09-25
EP3527993A1 (en) 2019-08-21
US20190208321A1 (en) 2019-07-04
US10750279B2 (en) 2020-08-18
JP7059933B2 (ja) 2022-04-26

Similar Documents

Publication Publication Date Title
JP6539272B2 (ja) コンピュータにより実現される方法、非一時的かつコンピュータが読み取り可能な媒体、および単一装置
JP6445539B2 (ja) 動的サンプリング
US7850526B2 (en) System for tracking user manipulations within an environment
CN110099324B (zh) 一种耳机佩戴状态的检测方法、检测装置及耳机
TWI618048B (zh) Music and video production system
JPWO2015107737A1 (ja) 情報処理装置、情報処理方法、およびプログラム
US20220351708A1 (en) Arrangement and method for the conversion of at least one detected force from the movement of a sensing unit into an auditory signal
US20180120930A1 (en) Use of Body-Area Network (BAN) as a Kinetic User Interface (KUI)
JPWO2017179423A1 (ja) 運動計測装置、情報処理装置及び運動計測方法
WO2018070232A1 (ja) 信号処理装置及び信号処理方法
CN210078765U (zh) 基于可穿戴传感器的动作捕捉识别与评估装置
TW201918831A (zh) 水中運動的姿勢矯正裝置及方法
JPWO2017061577A1 (ja) 信号処理装置、信号処理方法及びコンピュータプログラム
CN214344200U (zh) 一种人体肢体运动和器械运动模拟声音增强运动能力装置
US10758801B1 (en) Method and system for proper kicking technique
US10950138B1 (en) Drumming fitness system and method
US20230213611A1 (en) Methods, systems, and media for locating vibration signal sources
US11675435B2 (en) Electronic body percussion
CN104056443B (zh) 运动支持装置以及运动支持方法
JP4868045B2 (ja) 楽音制御システム
JP2010283708A (ja) 歩数計測機能を備えた携帯通信端末および歩数計測方法
CN116413750A (zh) 振动信号源定位方法、系统及介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17861153

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018544737

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017861153

Country of ref document: EP

Effective date: 20190514