WO2021192455A1 - 音入出力制御装置、音入出力制御方法、及びプログラム - Google Patents

音入出力制御装置、音入出力制御方法、及びプログラム Download PDF

Info

Publication number
WO2021192455A1
WO2021192455A1 PCT/JP2020/047187 JP2020047187W WO2021192455A1 WO 2021192455 A1 WO2021192455 A1 WO 2021192455A1 JP 2020047187 W JP2020047187 W JP 2020047187W WO 2021192455 A1 WO2021192455 A1 WO 2021192455A1
Authority
WO
WIPO (PCT)
Prior art keywords
sound
sound output
output devices
unit
posture
Prior art date
Application number
PCT/JP2020/047187
Other languages
English (en)
French (fr)
Inventor
丁珠 崔
熊倉　弘幸
富澤　克美
涼 宮口
英樹 竹原
成史 小俣
Original Assignee
株式会社Ｊｖｃケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｊｖｃケンウッド filed Critical 株式会社Ｊｖｃケンウッド
Priority to CN202080089941.0A priority Critical patent/CN114902694A/zh
Priority to EP20927680.7A priority patent/EP4131985A4/en
Publication of WO2021192455A1 publication Critical patent/WO2021192455A1/ja
Priority to US17/856,647 priority patent/US12022252B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1041—Mechanical or electronic switches, or control elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00—Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07—Applications of wireless loudspeakers or wireless microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments

Definitions

  • the present invention relates to a sound input / output control device, a sound input / output control method, and a program.
  • Patent Document 1 the angular orientations of the left and right earphones of the headphones are measured, and according to the measured angular orientations, whether or not the headphones are worn on the user's head, which earphone is the user's left ear. A technique for determining which of the right ear and the right ear is covered is described. Further, in Patent Document 1, it is possible to switch between music playback and standby, and to switch which earphone to output the audio signal for the left ear or the right ear according to the above determination result. Have been described.
  • full wireless earphones TWS: True Wireless Stereo
  • full wireless earphones output sound in stereo with the left and right earphones.
  • the present inventors have come up with a technique that enables an operation mode other than the normal operation mode of stereo sound output in a plurality of independently usable sound output devices such as a full wireless earphone.
  • An object of the present embodiment is to provide a sound input / output control device, a sound input / output control method, and a program that can be given a wider range of uses to a sound output device.
  • the sound input / output control device is a sound input / output control device that is independently attached to a user and controls a plurality of sound output devices that output sound to the user, and is the sound input / output control device.
  • a posture calculation unit that calculates each posture of the sound output device based on the posture signal detected in each of the above, and a change in at least two postures of the plurality of sound output devices calculated by the posture calculation unit.
  • a synchronization determination unit that determines whether or not synchronization is performed, and an operation control unit that controls each operation of the sound output device are provided, and at least two of the plurality of sound output devices are provided by the synchronization determination unit.
  • the motion control unit controls each of the sound output devices so as to perform the first operation, and the synchronization determination unit controls the plurality of the sounds.
  • the motion control unit controls each of the sound output devices so as to perform the second motion.
  • the sound input / output control method is a sound input / output control method that is independently attached to a user and controls a plurality of sound output devices that output sound to the user by the sound input / output control device.
  • the sound input / output control device calculates each posture of the sound output device based on the posture signal detected in each of the sound output devices, and at least two of the calculated plurality of the sound output devices.
  • the sound output is performed so as to perform the first operation.
  • the program according to the present embodiment is a program that causes a sound input / output control device to be independently attached to a user and execute a process of controlling a plurality of sound output devices that output sound to the user.
  • the sound input / output control device is subjected to a process of calculating each posture of the sound output device based on the posture signal detected by each of the sound output devices, and at least two postures of the plurality of calculated sound output devices.
  • the sound is performed so as to perform the first operation.
  • Each of the output devices is controlled, and when it is determined that the changes in at least two postures of the plurality of sound output devices are not synchronized, each of the sound output devices is controlled so as to perform a second operation. It is the one that executes the processing.
  • FIG. 1 is a block diagram schematically showing the configuration of the sound input / output control device 200 according to the first embodiment of the present invention.
  • the sound input / output control device 200 controls the operation of the sound output device 100 shown in FIG. Specifically, the sound input / output control device 200 is independently attached to the user and controls a plurality of sound output devices 100 that output sound to the user. As a result, the sound input / output control device 200 can give the sound output device 100 a wider range of uses.
  • the sound output device 100 is a completely independent individual earphone such as a full wireless earphone or a full wireless bone conduction earphone, and is independently attached to the left and right ears of the user, for example. That is, the plurality of sound output devices 100 are mounted on the user completely independently of each other. Usually, a full wireless earphone, a full wireless bone conduction earphone, etc. are a set of two completely independent earphones. However, in the present invention, three or more sound output devices 100 may be a set. The plurality of sound output devices 100 may be attached to the user's cheekbones or the like independently on the left and right, or may be a neck-mounted speaker or a wearable speaker. The sound output device 100 is not limited to the full wireless type, and a part thereof may be a wired connection.
  • the sound output device 100 includes a posture sensor 101, a sound output unit 102, a sound input unit 103, a communication unit 104, a mounting sensor 105, and the like.
  • the set of sound output devices 100 at least one sound output device 100 may include the sound input unit 103, and the other sound output devices 100 may not include the sound input unit 103. Further, the sound output device 100 does not have to include the mounting sensor 105. Further, all of the set of sound output devices 100 may not be provided with the sound input unit 103.
  • the attitude sensor 101 is a sensor that detects the attitude of the sound output device 100 provided with the attitude sensor 101.
  • a 3-axis orientation sensor geomagnetic sensor
  • a 3-axis angular velocity sensor geo sensor
  • GNSS Global Navigation Satellite System
  • the attitude signal detected by the attitude sensor 101 is transmitted to the sound input / output control device 200 by the communication unit 104.
  • the attitude sensor 101 is a 3-axis directional sensor
  • the attitude sensor 101 detects an attitude signal regarding the direction of the sound output device 100.
  • the attitude sensor 101 is a three-axis angular velocity sensor
  • the attitude sensor 101 detects an attitude signal related to the rotation angle of the sound output device 100 around the three axes.
  • the attitude sensor 101 When the attitude sensor 101 is a 3-axis acceleration sensor, the attitude sensor 101 detects an attitude signal related to a rotation angle around two axes orthogonal to the gravitational acceleration direction of the sound output device 100. When the attitude sensor 101 is a GNSS receiver, the attitude sensor 101 detects an attitude signal regarding the traveling direction of the sound output device 100.
  • the sound output unit 102 includes a speaker, a bone conduction speaker, or the like, and informs the user according to an audio signal acquired from a portable device such as a smartphone or a music playback device (not shown) such as a DAP (Digital Audio Player) or a CD player. Output the sound toward.
  • the audio signal from the music playback device may be received by the communication unit 104 via the sound input / output control device 200, or may be directly received by the communication unit 104 without going through the sound input / output control device 200. good.
  • the sound output unit 102 may have a form of outputting sound to the user according to the sound signal received by the communication unit 104 from the other sound output device 100.
  • the sound input unit 103 of the other sound output device 100 acquires the sound signal by collecting the sound, and the sound output unit 102 is received by the communication unit 104 from the other sound output device 100. The sound is output according to the sound signal.
  • the sound input unit 103 is a microphone or the like, and collects the voice of the user attached to the sound output device 100 to acquire a voice signal.
  • the sound input unit 103 can collect the user's voice while the user wears the sound output device 100 on his / her ear.
  • the voice signal acquired by the sound input unit 103 is transmitted by the communication unit 104 to the sound input / output control device 200 or another sound output device 100.
  • the sound input unit 103 may be provided in all the sound output devices 100 of the set of sound output devices 100, or may be provided in at least one sound output device 100. When the sound input unit 103 is provided only in one sound output device 100 of the set of sound output devices 100, the sound output device 100 provided with the sound input unit 103 is used as the master device, and another sound output device is used. 100 may be a slave device.
  • the communication unit 104 communicates between the sound output device 100 provided with the communication unit 104, another sound output device 100 and a sound input / output control device 200, or the above-mentioned music playback device (not shown).
  • Communication between the sound output devices 100 includes near field magnetic induction (NFMI) communication, wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, and NFC (Near Field). Communication) and other short-range wireless communications. Which communication is used as the communication between the sound output devices 100 may be switched according to the distance between the sound output devices 100.
  • NFMI near field magnetic induction
  • wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark)
  • infrared communication and NFC (Near Field). Communication) and other short-range wireless communications.
  • NFC Near Field
  • Communication between the sound output device 100 and the sound input / output control device 200 includes wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, short-range wireless communication such as NFC, and the like. Which communication is used as the communication between the sound output device 100 and the sound input / output control device 200 may be switched according to the distance between the sound output device 100 and the sound input / output control device 200.
  • the mounting sensor 105 is a sensor that detects that the sound output device 100 is mounted on the user. Specifically, the mounting sensor 105 is an infrared sensor, a pressure-sensitive sensor, or the like. The mounting detection signal detected by the mounting sensor 105 is transmitted to the sound input / output control device 200 by the communication unit 104.
  • the sound input / output control device 200 is independently attached to the user and controls a plurality of sound output devices 100 that output sound to the user.
  • the sound input / output control device 200 controls at least two sound output devices 100 in a set of sound output devices 100.
  • the sound input / output control device 200 includes a posture calculation unit 201, a synchronization determination unit 202, an operation control unit 203, a sound input / output processing unit 204, a communication unit 205, and the like.
  • the posture calculation unit 201 calculates each posture of the sound output device 100 based on the posture signals detected by each of the sound output devices 100. That is, the posture calculation unit 201 individually acquires a posture signal from each of the set of sound output devices 100, and calculates each posture of the sound output device 100 based on the posture signal. Specifically, when the attitude sensor 101 of the sound output device 100 is a three-axis directional sensor, the attitude calculation unit 201 calculates the direction of each sound output device 100. When the posture sensor 101 of the sound output device 100 is a 3-axis angular velocity sensor, the posture calculation unit 201 calculates the angular velocity of the movement of each sound output device 100.
  • the attitude calculation unit 201 determines the attitude of each sound output device 100 with respect to the direction of gravity or the acceleration of the movement of each sound output device 100. calculate.
  • the posture calculation unit 201 calculates the traveling direction, moving distance, and moving speed of each sound output device 100.
  • the synchronization determination unit 202 determines whether or not the changes in the attitudes of the plurality of sound output devices 100 calculated by the attitude calculation unit 201 are synchronized. That is, the synchronization determination unit 202 determines whether or not the changes in the postures of the set of sound output devices 100 calculated by the posture calculation unit 201 are synchronized.
  • the plurality of sound output devices 100 When a plurality of sound output devices 100 are attached to the left and right ears of the same user, for example, when the user is walking, the plurality of sound output devices 100 have the same speed in the front-rear direction when viewed from the user.
  • the movement in the same direction (change in posture) is detected in the vertical direction, and the movement of vibration with almost the same rhythm is detected in the vertical direction, and the change in posture is hardly detected in both the left and right directions.
  • the plurality of sound output devices 100 detect rotational movements that move in opposite directions at the same speed in the front-back and left-right directions when viewed from the user, and in the up-down direction. In both cases, almost no change in posture is detected. It is possible to determine movements at the same speed and in the same direction, or at the same speed and in opposite directions, depending on each movement such as the user lying down, jumping, or lying down, and it is determined that the changes in posture are synchronized.
  • the "change in posture” means a change from each posture of the plurality of sound output devices 100 when the plurality of sound output devices 100 are worn by the same user.
  • each direction of the sound output device 100 in which the posture calculation unit 201 is mounted so as to face, for example, the left ear and the right ear of the same user may be detected as opposite directions.
  • the synchronization determination unit 202 stores in advance the initial values of the postures when the two sound output devices 100 are attached to the right ear and the left ear of the user, and based on the initial values of the postures, the synchronization determination unit 202 is used. It is preferable to have a calibration function for correcting the posture values of the two sound output devices 100 calculated by the posture calculation unit 201. Specifically, when the posture calculation unit 201 calculates the direction of the sound output device 100, the synchronization determination unit 202 corrects the calculated value of the sound output device 100 mounted on one side by using the difference between the initial values.
  • the synchronization determination unit 202 can accurately compare the changes from the respective postures of the plurality of sound output devices 100 when the plurality of sound output devices 100 are attached to the same user.
  • the synchronization determination unit 202 also corrects other postures calculated by the posture calculation unit 201 using the initial values. Specifically, for example, when each direction of the sound output device 100 is calculated by the posture calculation unit 201, the synchronization determination unit 202 determines whether or not the changes in the directions of the plurality of sound output devices 100 match.
  • the synchronization determination unit 202 is based on whether or not the changes in the angular velocities of the movements of the plurality of sound output devices 100 match. Therefore, it is determined whether or not the changes in the postures of the plurality of sound output devices 100 are synchronized. Further, when the posture calculation unit 201 calculates the posture and the acceleration of the movement of the sound output device 100 with respect to the gravity, the synchronization determination unit 202 changes the posture and the acceleration of the movement of the plurality of sound output devices 100 with respect to the gravity.
  • the posture calculation unit 201 calculates each traveling direction of the sound output device 100, does the synchronization determination unit 202 match the changes in the traveling direction, the moving distance, and the moving speed of the plurality of sound output devices 100? Based on whether or not, it is determined whether or not the changes in the postures of the plurality of sound output devices 100 are synchronized.
  • the operation control unit 203 controls the operation of each of the set of sound output devices 100. Specifically, when the synchronization determination unit 202 determines that the changes in the postures of the plurality of sound output devices 100 are synchronized, the operation control unit 203 tells the same user of each of the sound output devices 100. Each of the sound output devices 100 is controlled so as to perform a first operation suitable for the case of being mounted, for example, an operation of reproducing an audio signal acquired from the music playback device in the stereo mode. When it is determined that the changes in posture acquired from each of the sound output devices 100 are synchronized, the operation control unit 203 performs a user-specified operation without performing the specified operation as the first operation. It may be in the form of performing or continuing normal operation.
  • the first operation does not have to be a particularly specified operation.
  • the operation control unit 203 is attached to different users of the sound output devices 100.
  • Each of the sound output devices 100 is controlled so as to perform a second operation suitable for the case, for example, an operation of reproducing the audio signal acquired from the music playback device in the monaural mode. Details of the first operation and the second operation will be described later.
  • the sound input / output control device 200 when one set of sound output devices 100 is composed of two sound output devices 100, the changes in the postures of the two sound output devices 100 are synchronized. If so, it is determined that the two sound output devices 100 are attached to the same user. Then, the sound input / output control device 200 controls the two sound output devices 100 so as to perform the first operation. Further, the sound input / output control device 200 is described in the case where one set of sound output devices 100 is composed of two sound output devices 100 and the changes in the postures of the two sound output devices 100 are not synchronized. It is determined that the sound output device 100 of the stand is attached to a different user. Then, the sound input / output control device 200 controls the two sound output devices 100 so as to perform the second operation.
  • one set of sound output devices 100 is composed of three or more sound output devices 100, and the posture of two sound output devices 100 out of one set of sound output devices 100 is changed.
  • the two sound output devices 100 are attached to the same user.
  • the sound input / output control device 200 has another sound output device 100 in the set of sound output devices 100 whose attitude changes are not synchronized, the other sound output in the set of sound output devices 100 It is determined that the device 100 is worn by a different user. Then, the sound input / output control device 200 controls the two sound output devices 100 so as to perform the first operation, and controls the other sound output devices 100 so as to perform the second operation. ..
  • the sound input / output control device 200 when one set of sound output devices 100 is composed of three or more sound output devices 100 and the changes in the postures of these sound output devices 100 are not synchronized with each other, these sound input / output control devices 200 are used. It is determined that the sound output devices 100 are all attached to different users. Then, the sound input / output control device 200 controls these sound output devices 100 so as to perform the second operation.
  • the sound input / output processing unit 204 performs predetermined processing on the sound signal received from the music playback device (not shown) by the communication unit 205 to generate a sound signal to be transmitted to each sound output device 100. For example, the sound input / output processing unit 204 generates a stereo audio signal or a monaural audio signal. Then, the audio signal generated by the sound input / output processing unit 204 is transmitted to each sound output device 100 by the communication unit 205.
  • the first operation is a stereo audio signal reproduction operation (one-person mode).
  • the sound input / output processing unit 204 When one set of sound output devices 100 are attached to different users, as a second operation, the sound input / output processing unit 204 generates a monaural sound signal, and the communication unit 205 generates a monaural sound signal. The audio signal is transmitted to each sound output device 100.
  • the second operation is a monaural audio signal reproduction operation (two-person mode).
  • the sound input / output processing unit 204 acquires the sound signal picked up by the sound input unit 103, and the communication unit 205 receives the sound signal.
  • the picked-up sound signal may be transmitted to another sound output device 100.
  • the second operation may be a communication operation (transceiver mode) between different users by the sound output device 100.
  • the transceiver mode may be one-way transmission / reception or bidirectional transmission / reception.
  • the second operation may be an operation mode in which the volume or sound quality adjustment of the audio output can be set separately, as will be described later.
  • the communication unit 205 communicates between the sound input / output control device 200, the sound output device 100, and the music playback device (not shown).
  • Communication between the sound input / output control device 200, the sound output device 100, and the music playback device is wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, and short-range wireless communication such as NFC. And so on.
  • Which communication is used as the communication between the sound input / output control device 200, the sound output device 100, and the music playback device depends on the distance between the sound input / output control device 200, the sound output device 100, and the music playback device. May be switched.
  • the sound input / output control device 200 may be integrated with a portable device such as a smartphone or a music playback device such as a DAP or a CD player.
  • the communication unit 205 communicates between the sound input / output control device 200 and the sound output device 100.
  • an application program that causes the music playback device to execute the above-mentioned functions of the sound input / output control device 200 may be installed.
  • the attitude sensor 101 two or more types of sensors such as a 3-axis orientation sensor (geomagnetic sensor), a 3-axis angular velocity sensor (gyro sensor), a 3-axis acceleration sensor, and a GNSS receiver are mounted on the sound output device 100. You may.
  • the posture sensor 101 By mounting two or more types of sensors on the sound output device 100 as the posture sensor 101, the postures of the plurality of sound output devices 100 can be detected with higher accuracy. For example, when only the 3-axis angular velocity sensor is mounted as the posture sensor 101, even if one sound output device 100 is mounted on each of the two users, the two users stay at a predetermined position. If so, the change in the angular velocity of the movement of the two sound output devices 100 becomes zero.
  • the synchronization determination unit 202 synchronizes the changes in the postures of the two sound output devices 100, and the sound input / output control device 200 is equipped with the two sound output devices 100 to the same user. I will judge that there is.
  • the attitude sensor 101 is equipped with not only a 3-axis angular velocity sensor but also a 3-axis directional sensor, if the directions facing the two users are different, the two users will be placed in a predetermined position. Even if it stays, it can be detected that the changes in the directions of the two sound output devices 100 do not match. Further, as the attitude sensor 101, only a 3-axis directional sensor or a 3-axis acceleration sensor may be mounted.
  • the posture calculation unit 201 may calculate the movement of the sound output device 100 based on the movement of the 3-axis due to the change in the position of the sound output device 100. good. Then, the synchronization determination unit 202 may determine whether or not the changes in the postures of the plurality of sound output devices 100 are synchronized based on whether or not the movements of the plurality of sound output devices 100 match. good.
  • FIG. 2 is a block diagram schematically showing a configuration of a hearable device 300 as a sound input / output control device according to a second embodiment of the present invention.
  • the hearable device 300 according to the second embodiment integrates the sound output device 100 and the sound input / output control device 200 according to the first embodiment. Therefore, the attitude sensor 301, the sound output unit 302, the sound input unit 303, the mounting sensor 304, the attitude calculation unit 305, the synchronization determination unit 306, the motion control unit 307, and the sound input / output processing unit 308 provided in the hearable device 300.
  • the functions of the above are the same as those of the attitude sensor 101, the sound output unit 102, the sound input unit 103, the mounting sensor 105, the attitude calculation unit 201, the synchronization determination unit 202, the operation control unit 203, and the sound input / output processing unit 204 shown in FIG. Is. Further, the functions of the communication unit 309 provided in the hearable device 300 are the same as those in which the functions of the communication unit 104 and the functions of the communication unit 205 shown in FIG. 1 are combined.
  • attitude sensor 301 the sound output unit 302, the sound input unit 303, the mounting sensor 304, the attitude calculation unit 305, the synchronization determination unit 306, the operation control unit 307, the sound input / output processing unit 308, and the communication unit 309.
  • Attitude sensor 101, sound output unit 102, sound input unit 103, mounting sensor 105, attitude calculation unit 201, synchronization determination unit 202, motion control unit 203, sound input / output processing unit 204, communication unit 104, communication unit 205 The description of the same function will be omitted.
  • the hearable device 300 is independently attached to the user and outputs sound to the user, similarly to the sound output device 100 according to the first embodiment.
  • the hearable device 300 is a completely independent individual earphone such as a full wireless earphone or a full wireless bone conduction earphone, and is independently attached to the left and right of the user. That is, the plurality of hearable devices 300 are attached to the user completely independently of each other.
  • a full wireless earphone, a full wireless bone conduction earphone, etc. are a set of two completely independent earphones. However, in the present invention, three or more hearable devices 300 may be a set.
  • the hearable device 300 includes a posture sensor 301, a sound output unit 302, a sound input unit 303, a mounting sensor 304, a posture calculation unit 305, a synchronization determination unit 306, and an operation. It includes a control unit 307, a sound input / output processing unit 308, a communication unit 309, and the like.
  • at least one hearable device 300 may include a sound input unit 303, a posture calculation unit 305, a synchronization determination unit 306, and an operation control unit 307, and other hears.
  • the rable device 300 does not have to include the sound input unit 303, the posture calculation unit 305, the synchronization determination unit 306, and the motion control unit 307.
  • the sound input unit 303 When only one hearable device 300 out of one set of hearable devices 300 is provided with the sound input unit 303, the attitude calculation unit 305, the synchronization determination unit 306, and the motion control unit 307, the sound input unit 303 and the attitude
  • the hearable device 300 provided with the calculation unit 305, the synchronization determination unit 306, and the operation control unit 307 may be used as the master device, and the other hearable device 300 may be used as the slave device. Further, the hearable device 300 does not have to include the mounting sensor 304.
  • the attitude signal detected by the attitude sensor 301 is input to the attitude calculation unit 305. Further, the attitude signal detected by the attitude sensor 301 is transmitted to another hearable device 300 by the communication unit 309.
  • the sound output unit 302 outputs sound to the user according to the voice signal received by the communication unit 309 from the portable device 400 as a music playback device. Further, the sound output unit 302 outputs sound to the user according to the voice signal received by the communication unit 309 from the other hearable device 300.
  • the audio signal acquired by the sound input unit 303 is transmitted to another hearable device 300 by the communication unit 309.
  • the posture calculation unit 305 calculates the posture of each of the hearable devices 300 based on the posture signal detected by the posture sensor 301 in each of the set of hearable devices 300. For example, when all of the set of hearable devices 300 are provided with the attitude calculation unit 305, the attitude calculation unit 305 is based on the attitude signal detected by the attitude sensor 301 of the hearable device 300 provided with the attitude calculation unit 305. The posture of the hearable device 300 is calculated. Then, the posture of the hearable device 300 calculated by the posture calculation unit 305 is transmitted to another hearable device 300 by the communication unit 309. Further, when the posture calculation unit 305 is provided only in one of the set of hearable devices 300, the posture calculation unit 305 is the hearable device 300 provided with the posture calculation unit 305.
  • the posture of the hearable device 300 is calculated based on the posture signal detected by the posture sensor 301. Further, the attitude calculation unit 305 calculates the attitude of the other hearable device 300 based on the attitude signal detected by the attitude sensor 301 of the other hearable device 300 received by the communication unit 309.
  • the synchronization determination unit 306 determines whether or not the changes in the postures of the pair of hearable devices 300 are synchronized based on the postures of the pair of hearable devices 300 calculated by the posture calculation unit 305. Is determined. A synchronization determination may be performed by the synchronization determination unit 306 in all of the pair of hearable devices 300. Further, when the posture calculation unit 305 and the synchronization determination unit 306 are provided only in one hearable device 300 among one set of hearable devices 300, the posture calculation unit 305 calculates from the other hearable devices 300. The posture may be transmitted to the one hearable device 300, and the synchronization determination may be performed by the synchronization determination unit 306 of the one hearable device 300.
  • the motion control unit 307 controls the motion of the hearable device 300. Operation control may be performed by the operation control unit 307 in all of the set of hearable devices 300. For example, in two hearable devices 300 of one set of hearable devices 300, when the change in the posture of one hearable device 300 and the change in the posture of the other hearable device 300 are synchronized, The operation control unit 307 of the two hearable devices 300 controls the hearable device 300 so as to perform the first operation. Further, each operation control unit 307 of the hearable device 300 other than the above two units of the set of hearable device 300 controls the hearable device 300 so as to perform the second operation.
  • the operation control unit 307 of each hearable device 300 performs the second operation. Controls the hearable device 300. If only one of the set of hearable devices 300 is provided with the posture calculation unit 305, the synchronization determination unit 306, and the motion control unit 307, the one hearable device 300
  • the motion control unit 307 may control the motion of the other hearable device 300. For example, in two hearable devices 300 of one set of hearable devices 300, when the change in the posture of one hearable device 300 and the change in the posture of the other hearable device 300 are synchronized, The motion control unit 307 controls the two hearable devices 300 so as to perform the first operation.
  • the motion control unit 307 controls the hearable devices 300 other than the above two of the pair of hearable devices 300 so as to perform the second operation. Further, when the changes in the postures of the respective hearable devices 300 are not synchronized in all of the set of hearable devices 300, the motion control unit 307 performs the second operation of the respective hearable devices 300. To control.
  • the first operation and the second operation are the same operations as those in the first embodiment.
  • the sound input / output processing unit 308 performs predetermined processing on the sound signal received by the communication unit 309 from the portable device 400 as a music playback device, and generates a sound signal to be input to the sound output unit 302. For example, when one set of hearable devices 300 includes a hearable device 300 for the right ear and a hearable device 300 for the left ear, and these hearable devices 300 are worn by the same user, the right ear The sound input / output processing unit 308 of the hearable device 300 for the right ear generates an audio signal for the right ear, and the sound input / output processing unit 308 of the hearable device 300 for the left ear generates an audio signal for the left ear. Further, when one set of hearable devices 300 is attached to different users, the sound input / output processing unit 308 of each hearable device 300 generates a monaural audio signal.
  • the communication unit 309 communicates between the hearable device 300 provided with the communication unit 309 and another hearable device 300. Further, the communication unit 309 communicates between the hearable device 300 provided with the communication unit 309 and the portable device 400 as a music playback device. Communication between the hearable devices 300 includes near-field magnetic induction communication, wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, and short-range wireless communication such as NFC. Which communication is used as the communication between the hearable devices 300 may be switched according to the distance between the hearable devices 300.
  • Communication between the hearable device 300 and the mobile device 400 includes wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, short-range wireless communication such as NFC, and the like. Which communication is used as the communication between the hearable device 300 and the portable device 400 may be switched according to the distance between the hearable device 300 and the portable device 400.
  • the music playback device may be a DAP, a CD player, or the like, as well as the portable device 400 such as a smartphone mentioned above. Further, the hearable device 300 may be integrated with the music playback device.
  • one set of sound output device 100 or one set of hearable device 300 includes two sound output devices 100 or two hearable devices 300, and one sound output device 100 or hearable device 300.
  • the case where the device 300 serves as a master device and the other sound output device 100 or the hearable device 300 serves as a slave device will be described as an example.
  • the processing flow in the sound input / output control device 200 according to the first embodiment will be described as an example.
  • the description of the processing flow in the hearable device 300 according to the second embodiment describes the attitude sensor 101, the sound output unit 102, the sound input unit 103, the mounting sensor 105, the attitude calculation unit 201, the synchronization determination unit 202, and the motion control unit 203. , Sound input / output processing unit 204, communication unit 104, and communication unit 205, respectively, with attitude sensor 301, sound output unit 302, sound input unit 303, mounting sensor 304, attitude calculation unit 305, synchronization determination unit 306, respectively.
  • the posture calculation unit 201 calculates the posture of each sound output device 100 based on the posture signals of the sound output devices 100 detected by each of the set of sound output devices 100 (step S101). That is, the posture calculation unit 201 calculates the postures of the sound output device 100 for the right ear and the sound output device 100 for the left ear.
  • the synchronization determination unit 202 determines whether or not the changes in the postures of the sound output device 100 for the right ear and the sound output device 100 for the left ear calculated by the posture calculation unit 201 are synchronized. Determine (step S102).
  • step S102 when the changes in posture of the sound output device 100 for the right ear and the sound output device 100 for the left ear are synchronized (step S102; Yes), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the one-person mode (first operation) (step S103).
  • step S104 normal operation is performed in the sound output device 100 for the right ear and the sound output device 100 for the left ear (step S104).
  • the sound input / output processing unit 204 generates a sound signal for the right ear and a sound signal for the left ear
  • the communication unit 205 transmits the sound signal for the right ear to the sound output device 100 for the right ear.
  • the voice signal for the left ear is transmitted to the sound output device 100 for the left ear.
  • the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the sound signal for the right ear
  • the sound output unit 102 of the sound output device 100 for the left ear outputs the sound to the user. Outputs sound to the user according to the voice signal for.
  • step S102 when the changes in posture of the sound output device 100 for the right ear and the sound output device 100 for the left ear are not synchronized (step S102; No), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the two-person mode (second operation) (step S105).
  • the sound output device 100 for the right ear and the sound output device 100 for the left ear play music in a monaural manner (step S106).
  • the sound input / output processing unit 204 generates a monaural sound signal
  • the communication unit 205 transmits the monaural sound signal to the sound output device 100 for the right ear and the sound output device 100 for the left ear.
  • the sound output unit 100 sound output unit 102 for the right ear and the sound output unit 102 of the sound output device 100 for the left ear each output sound to the user according to the monaural sound signal.
  • step S202 when the changes in the postures of the sound output device 100 for the right ear and the sound output device 100 for the left ear are synchronized (step S202; Yes), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the sound output mode (first operation) (step S203).
  • step S202 when the changes in posture of the sound output device 100 for the right ear and the sound output device 100 for the left ear are not synchronized (step S202; No), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the transceiver mode (second operation) (step S205).
  • the user's sound signal picked up by the microphone (sound input unit) 103 of one sound output device 100 is transmitted to the other sound output device 100, the other sound output device 100 receives the sound signal, and the other.
  • the sound output unit 102 of the sound output device 100 outputs sound to the user according to the sound signal (step S206). For example, the sound of a user wearing the sound output device 100 for the right ear is picked up by the microphone (sound input unit) 103 of the sound output device 100 for the right ear and transmitted to the sound output device 100 for the left ear. NS. Then, the sound output unit 102 of the sound output device 100 for the left ear outputs sound to the user wearing the sound output device 100 for the left ear according to the sound signal.
  • the voice of the user wearing the sound output device 100 for the left ear is picked up by the microphone (sound input unit) 103 of the sound output device 100 for the left ear and transmitted to the sound output device 100 for the right ear. Will be done.
  • the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user wearing the sound output device 100 for the right ear according to the sound signal.
  • the sound output device 100 for the right ear and the sound output device 100 for the left ear are attached to different users, the sound output device 100 for the right ear and the sound output device 100 for the left ear are combined. It can be used as a transceiver.
  • the operation control unit 203 is a sound output device so as to stop the sound output based on the sound signal by the sound output unit 102 or to reduce the volume of the sound output based on the voice signal. 100 may be controlled. Further, in the transceiver mode, the operation control unit 203 is a sound output device so as to stop the sound collection by the sound input unit 103 in either the sound output device 100 for the right ear or the sound output device 100 for the left ear. 100 may be controlled.
  • step S301, step S302, step S303, and step S305 are the processes of step S101, step S102, step S103, and step S105 of the sound input / output control method shown in FIG. 3, respectively. Since it is the same as the process, the description thereof will be omitted.
  • step S303 after the sound output devices 100 for the right ear and the left ear are controlled to operate in the one-person mode (first operation), the sound output device 100 for the right ear and the sound output for the left ear are output. Simultaneous adjustment (normal operation) of volume, sound quality, etc. is performed in the device 100 (step S304). Specifically, the sound input / output processing unit 204 generates a sound signal for the right ear and a sound signal for the left ear, and the communication unit 205 transmits the sound signal for the right ear to the sound output device 100 for the right ear. Then, the voice signal for the left ear is transmitted to the sound output device 100 for the left ear.
  • the motion control unit 203 simultaneously adjusts, for example, the volume and sound quality of the sound output unit 102 of the sound output device 100 for the right ear and the left ear so as to have substantially the same volume and sound quality. .. Then, the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the sound signal for the right ear, and the sound output unit 102 of the sound output device 100 for the left ear outputs the sound to the user. Outputs sound to the user according to the voice signal for.
  • step S305 after the sound output device 100 for the right ear and the sound output device 100 for the left ear are controlled to operate in the two-person mode (second operation), the sound output device 100 for the right ear and the sound for the left ear are used.
  • the output device 100 individually adjusts the volume and sound quality (step S306). Specifically, the sound input / output processing unit 204 generates a sound signal for the right ear and a sound signal for the left ear, and the communication unit 205 transmits the sound signal for the right ear to the sound output device 100 for the right ear. Then, the voice signal for the left ear is transmitted to the sound output device 100 for the left ear.
  • the motion control unit 203 can individually adjust the volume and sound quality of the sound output unit 102 of the sound output device 100 for the right ear and the left ear, for example.
  • the sound input / output control device 200 or the music playback device to adjust the volume and sound quality for the right ear and the volume and sound quality for the left ear on its own display unit (not shown). Display the setting screens separately.
  • the user wearing the sound output device 100 for the right ear and the user wearing the sound output device 100 for the left ear operate the respective setting screens to operate the sound output device 100 for the right ear and the sound output device 100 for the left ear.
  • the volume and sound quality of the sound output device 100 for each user can be set as desired for each user.
  • the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the sound signal for the right ear
  • the sound output unit 102 of the sound output device 100 for the left ear outputs the sound to the user. Outputs sound to the user according to the voice signal for.
  • step S402 when the changes in posture of the sound output device 100 for the right ear and the sound output device 100 for the left ear are synchronized (step S402; Yes), the process proceeds to step S103 or S203 or S303. (Step S403).
  • step S402 when the changes in posture of the sound output device 100 for the right ear and the sound output device 100 for the left ear are not synchronized (step S402; No), the motion control unit 203 is for the right ear. It is determined whether or not the sound output device 100 and the sound output device 100 for the left ear are mounted on the same side of different users (step S404). Specifically, the motion control unit 203 is based on the wearing detection signal detected by the wearing sensor 105 and the postures of the sound output devices 100 for the right ear and the left ear calculated by the posture calculating unit 201. , It is determined whether or not the sound output devices 100 for the right ear and the sound output device 100 for the left ear are mounted on the same side of different users.
  • the motion control unit 203 does not use the wearing detection signal detected by the wearing sensor 105, but is based only on the respective postures of the sound output devices 100 for the right ear and the left ear calculated by the posture calculating unit 201. You may make a judgment.
  • step S404 when the sound output device 100 for the right ear and the sound output device 100 for the left ear are mounted on different sides of different users (step S404; No), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the two-person mode (step S405). Then, the process proceeds to step S106 or S306 (step S406).
  • step S404 when the sound output device 100 for the right ear and the sound output device 100 for the left ear are mounted on the same side of different users (step S404; Yes), the motion control unit 203 is for the right ear.
  • the sound output device 100 and the sound output device 100 for the left ear are controlled to operate in the transceiver mode (step S407).
  • the user's sound signal picked up by the microphone (sound input unit) 103 of one sound output device 100 is transmitted to the other sound output device 100, the other sound output device 100 receives the sound signal, and the other.
  • the sound output unit 102 of the sound output device 100 outputs sound to the user according to the sound signal (step S408).
  • the synchronization determination unit 202 synchronizes the changes in the postures of the sound output devices 100 calculated by the posture calculation unit 201. Whether or not it is determined. Further, when the synchronization determination unit 202 determines that the changes in the postures of the sound output devices 100 are synchronized, the operation control unit 203 is mounted on the same user for each of the sound output devices 100. Each of the sound output devices 100 is controlled so as to perform the first operation suitable for the case where the sound is output. Further, when the synchronization determination unit 202 determines that the changes in the postures of the sound output devices 100 are not synchronized, the operation control unit 203 is attached to different users of the sound output devices 100.
  • Each of the sound output devices 100 is controlled so as to perform a second operation suitable for the case. Further, when the changes in the postures of the set of sound output devices 100 are not synchronized with each other, the sound input / output control device 200 determines that all of these sound output devices 100 are worn by different users. Then, the sound input / output control device 200 controls these sound output devices 100 so as to perform the second operation. Therefore, each of the sound output devices 100 is attached to different users other than the first operation, which is a normal operation such as outputting stereo sound to the plurality of sound output devices 100 independently attached to the user. A second operation suitable for the case where it is performed can also be imparted. Therefore, the sound output device 100 can be used for a wide range of purposes. The same applies to the hearable device 300 according to the second embodiment.
  • the present invention has been described as a hardware configuration, but the present invention is not limited thereto.
  • the present invention can also be realized by causing a CPU (Central Processing Unit) to execute a computer program according to the processing procedure shown in the flowcharts of FIGS. 3 to 6.
  • a CPU Central Processing Unit
  • Non-transitory computer-readable media include various types of tangible storage media (tangible storage media).
  • Examples of non-temporary computer-readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg, magneto-optical disks), CD-ROMs (Read Only Memory) CD-Rs, CDs. -R / W, including semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)).
  • the program may also be supplied to the computer by various types of temporary computer-readable media.
  • Examples of temporary computer-readable media include electrical, optical, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • Sound output device 200 Sound input / output control device 300 Hearable device (sound input / output control device) 101, 301 Posture sensor 102, 302 Sound output unit 103, 303 Sound input unit 104, 309 Communication unit 201, 305 Posture calculation unit 202, 306 Synchronization determination unit 203, 307 Operation control unit 204, 308 Sound input / output processing unit 205 , 309 Communication unit 400 Portable device (music playback device)

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Stereophonic Arrangements (AREA)
  • Selective Calling Equipment (AREA)
  • Headphones And Earphones (AREA)

Abstract

音入出力制御装置（２００）は、ユーザに独立して装着される複数の音出力装置（１００）のそれぞれの姿勢を算出する姿勢算出部（２０１）と、複数の音出力装置（１００）のうち少なくとも２つの姿勢の変化が同期しているか否かを判定する同期性判定部（２０２）と、音出力装置（１００）のそれぞれの動作を制御する動作制御部（２０３）と、当該姿勢の変化が同期している場合に、動作制御部（２０３）は、第１の動作を行うように音出力装置（１００）のそれぞれを制御し、当該姿勢の変化が同期していないと判定された場合に、動作制御部（２０３）は、第２の動作を行うように音出力装置（１００）のそれぞれを制御する。

Description

音入出力制御装置、音入出力制御方法、及びプログラム
　本発明は、音入出力制御装置、音入出力制御方法、及びプログラムに関する。
　特許文献１には、ヘッドホンの左右のイヤホンのそれぞれの角度方位を測定し、測定された当該角度方位に従って、ヘッドホンがユーザの頭部に装着されているか否か、どちらのイヤホンがユーザの左耳と右耳のどちらを覆っているかを判定する技術が記載されている。また、特許文献１には、上記の判定結果に従って、音楽の再生とスタンバイとを切り替えたり、どちらのイヤホンに左耳用と右耳用のどちらの音声信号を出力するかを切り替えたりすることが記載されている。
特開２０１９－１８００８２号公報
　また、近年、左右のイヤホンが完全にワイヤレスな、フルワイヤレスイヤホン（TWS：True Wireless Stereo）が普及しつつある。フルワイヤレスイヤホンは、左右のイヤホンによってステレオ方式で音を出力する。本発明者らは、フルワイヤレスイヤホンのように、独立して使用可能な複数の音出力装置における、ステレオ方式の音の出力という通常の動作モード以外の動作モードも可能にする技術に想到した。
　本実施形態は、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することを目的とする。
　本実施形態に係る音入出力制御装置は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出する姿勢算出部と、前記姿勢算出部によって算出された複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定する同期性判定部と、前記音出力装置のそれぞれの動作を制御する動作制御部と、を備え、前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する。
　本実施形態に係る音入出力制御方法は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、前記音入出力制御装置が、前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出し、算出した複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定し、複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御するものである。
　本実施形態に係るプログラムは、音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、前記音入出力制御装置に、前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出する処理と、算出した複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定する処理と、複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるものである。
　本実施形態によれば、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することができる。
本発明の実施の形態１に係る音入出力制御装置の構成を模式的に示すブロック図である。 本発明の実施の形態２に係る音入出力制御装置の構成を模式的に示すブロック図である。 本発明の実施の形態１又は２に係る音入出力制御方法の一例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。
　実施の形態１
　以下、図面を参照して本発明の実施の形態について説明する。
　図１は、本発明の実施の形態１に係る音入出力制御装置２００の構成を模式的に示すブロック図である。音入出力制御装置２００は、図１に示す音出力装置１００の動作を制御する。具体的には、音入出力制御装置２００は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。これにより、音入出力制御装置２００は、音出力装置１００に、より広い用途を付与することができる。
　音出力装置１００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、例えばユーザの左右の耳に独立して装着される。すなわち、複数の音出力装置１００は、互いに完全に独立して、ユーザに装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上の音出力装置１００が１組となっていてもよい。複数の音出力装置１００は、ユーザの頬骨などに左右独立して装着されてもよく、首掛けスピーカやウェアラブルスピーカであってもよい。音出力装置１００は、フルワイヤレス型に限定されず、その一部が有線接続であってもよい。
　本実施の形態１に係る音出力装置１００は、図１に示すように、姿勢センサ１０１、音出力部１０２、音入力部１０３、通信部１０４、装着センサ１０５等を備える。なお、１組の音出力装置１００のうち、少なくとも１つの音出力装置１００が音入力部１０３を備えていればよく、他の音出力装置１００は音入力部１０３を備えていなくてもよい。また、音出力装置１００は、装着センサ１０５を備えていなくてもよい。また、１組の音出力装置１００のすべてが音入力部１０３を備えない形態であってもよい。
　姿勢センサ１０１は、当該姿勢センサ１０１が備えられた音出力装置１００の姿勢を検出するセンサであり、例えば、３軸方位センサ（地磁気センサ）、３軸角速度センサ（ジャイロセンサ）、３軸加速度センサ、ＧＮＳＳ（Global Navigation Satellite System）受信機等である。姿勢センサ１０１が検出した姿勢信号は、通信部１０４によって、音入出力制御装置２００に送信される。姿勢センサ１０１が３軸方位センサである場合、姿勢センサ１０１は音出力装置１００の方角に関する姿勢信号を検出する。また、姿勢センサ１０１が３軸角速度センサである場合、姿勢センサ１０１は音出力装置１００の３軸回りの回転角に関する姿勢信号を検出する。また、姿勢センサ１０１が３軸加速度センサである場合、姿勢センサ１０１は音出力装置１００の重力加速度方向に直交する２軸回りの回転角に関する姿勢信号を検出する。また、姿勢センサ１０１がＧＮＳＳ受信機である場合、姿勢センサ１０１は音出力装置１００の進行方向に関する姿勢信号を検出する。
　音出力部１０２は、スピーカ、又は、骨伝導スピーカ等を備え、スマートフォン等の携帯機器、ＤＡＰ（Digital Audio Player)、ＣＤプレーヤ等の音楽再生装置（図示省略）から取得する音声信号に従って、ユーザに向けて音を出力する。音楽再生装置からの音声信号は、音入出力制御装置２００を介して通信部１０４によって受信されてもよいし、音入出力制御装置２００を介さずに、直接、通信部１０４によって受信されてもよい。
　また、音出力部１０２は、他の音出力装置１００から通信部１０４が受信した音声信号に従って、ユーザに向けて音を出力する形態があってもよい。具体的には、他の音出力装置１００の音入力部１０３が音声を収音することにより音声信号を取得し、音出力部１０２は、当該他の音出力装置１００から通信部１０４が受信した当該音声信号に従って、当該音声を出力する。
　音入力部１０３は、マイク等であり、音出力装置１００が装着したユーザの音声を収音して音声信号を取得する。なお、音入力部１０３は、ユーザが当該音出力装置１００を耳に装着した状態で、ユーザの音声を収音可能となっている。音入力部１０３が取得した音声信号は、通信部１０４によって、音入出力制御装置２００又は他の音出力装置１００に送信される。なお、音入力部１０３は、１組の音出力装置１００のうち、全ての音出力装置１００に備えられていてもよいし、少なくとも１つの音出力装置１００に備えられていてもよい。１組の音出力装置１００のうち、１台の音出力装置１００にのみ音入力部１０３が備えられる場合、音入力部１０３が備えられた音出力装置１００をマスター装置とし、他の音出力装置１００をスレーブ装置としてもよい。
　通信部１０４は、当該通信部１０４が備えられる音出力装置１００と、他の音出力装置１００及び音入出力制御装置２００、又は上述した音楽再生装置（図示省略）との間の通信を行う。
　音出力装置１００間の通信は、近接場磁気誘導（NFMI：Near Field Magnetic Induction）通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ（Near Field Communication）等の近距離無線通信等である。音出力装置１００間の通信として何れの通信を用いるのか、音出力装置１００間の距離に応じて切り替えられてもよい。
　音出力装置１００と音入出力制御装置２００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音出力装置１００と音入出力制御装置２００との間の通信として何れの通信を用いるのか、音出力装置１００と音入出力制御装置２００との間の距離に応じて切り替えられてもよい。
　装着センサ１０５は、音出力装置１００がユーザに装着されたことを検出するセンサである。具体的には、装着センサ１０５は、赤外線センサ、感圧センサ等である。装着センサ１０５が検出した装着検出信号は、通信部１０４によって、音入出力制御装置２００に送信される。
　音入出力制御装置２００は、上述したように、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。例えば、音入出力制御装置２００は、１組の音出力装置１００のうち、少なくとも２台の音出力装置１００を制御する。音入出力制御装置２００は、図１に示すように、姿勢算出部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部２０５等を備える。
　姿勢算出部２０１は、音出力装置１００のそれぞれにおいて検出される姿勢信号に基づいて当該音出力装置１００のそれぞれの姿勢を算出する。すなわち、姿勢算出部２０１は、１組の音出力装置１００のそれぞれから、姿勢信号を個別に取得し、当該姿勢信号に基づいて、当該音出力装置１００のそれぞれの姿勢を算出する。
　具体的には、音出力装置１００の姿勢センサ１０１が３軸方位センサである場合、姿勢算出部２０１は、それぞれの音出力装置１００の方角を算出する。また、音出力装置１００の姿勢センサ１０１が３軸角速度センサである場合、姿勢算出部２０１は、それぞれの音出力装置１００の動きの角速度を算出する。また、音出力装置１００の姿勢センサ１０１が３軸加速度センサである場合、姿勢算出部２０１は、それぞれの音出力装置１００の重力方向に対する姿勢、又は、それぞれの音出力装置１００の動きの加速度を算出する。また、姿勢センサ１０１がＧＮＳＳ受信機である場合、姿勢算出部２０１は、それぞれの音出力装置１００の進行方向や移動距離、移動速度を算出する。
　同期性判定部２０２は、姿勢算出部２０１によって算出された複数の音出力装置１００の姿勢の変化が同期しているか否かを判定する。すなわち、同期性判定部２０２は、姿勢算出部２０１が算出した１組の音出力装置１００のそれぞれの姿勢の変化が同期しているか否かを判定する。
　複数の音出力装置１００が同一のユーザの左右の耳に装着されている場合、例えばユーザが歩行している場合には、複数の音出力装置１００は、ユーザから見て前後方向に同一速度かつ同一方向の動き（姿勢の変化）を、上下方向にはほぼ同一のリズムでの振動の動きを検出し、左右方向には共にほとんど姿勢の変化を検出しない。また、たとえばユーザが首をひねる動作をした場合、複数の音出力装置１００は、ユーザから見て前後および左右方向には同一の速度で正反対方向に動くような回転の動きを検出し、上下方向には共にほとんど姿勢の変化を検出しない。ユーザがうつむく、ジャンプする、寝転がるなど、それぞれの動きによって、同一速度でかつ同一方向、または同一速度でかつ正反対方向などの動きを判定でき、これらを姿勢の変化が同期していると判定する。
　また、複数の音出力装置１００が同一のユーザの左右の耳に装着されている場合でも、斜めにひねるような動き、ユーザの左肩や右肩を中心とする回転の動きなど、速度が一致しない場合もあるため、機械学習などによって判定精度を向上させる機能を有することが好ましい。
　ここで、「姿勢の変化」とは、複数の音出力装置１００が同一のユーザに装着されている際の当該複数の音出力装置１００のそれぞれの姿勢からの変化を意味している。例えば、姿勢算出部２０１が、同一のユーザの例えば左耳と右耳に正対するように装着された音出力装置１００のそれぞれの方角は、正反対の方角として検出される可能性がある。また、ユーザの右耳の穴の軸方向と左耳の穴の軸方向とが一致していない場合もありうる。そのため、同期性判定部２０２は、２台の音出力装置１００がユーザの右耳と左耳に装着された際の姿勢の初期値を予め記憶しておき、当該姿勢の初期値に基づいて、姿勢算出部２０１によって算出された２台の音出力装置１００の姿勢の値を補正する、キャリブレーション機能を備えることが好ましい。具体的には、姿勢算出部２０１が音出力装置１００の方角を算出する場合、同期性判定部２０２は、一方に装着された音出力装置１００の算出値を上記初期値の差分を用いて補正することにより、ユーザの左右差に伴う方角差を補正して、２台の音出力装置１００が同一のユーザの右耳と左耳に装着された際に同一の姿勢であると判断できるよう校正することができる。これにより、同期性判定部２０２は、複数の音出力装置１００が同一のユーザに装着されている際の当該複数の音出力装置１００のそれぞれの姿勢からの変化を精度よく比較することができる。同様に、同期性判定部２０２は、姿勢算出部２０１によって算出された他の姿勢についても初期値を用いて補正を行う。
　具体的には、例えば、姿勢算出部２０１によって音出力装置１００のそれぞれの方角が算出された場合、同期性判定部２０２は、複数の音出力装置１００の方角の変化が一致するか否かに基づいて、複数の音出力装置１００の姿勢の変化が同期しているか否かを判定する。また、姿勢算出部２０１によって音出力装置１００のそれぞれの動きの角速度が算出された場合、同期性判定部２０２は、複数の音出力装置１００の動きの角速度の変化が一致するか否かに基づいて、複数の音出力装置１００の姿勢の変化が同期しているか否かを判定する。また、姿勢算出部２０１によって音出力装置１００のそれぞれの重力に対する姿勢や動きの加速度が算出された場合、同期性判定部２０２は、複数の音出力装置１００の重力に対する姿勢や動きの加速度の変化が一致するか否かに基づいて、複数の音出力装置１００の姿勢の変化が同期しているか否かを判定する。また、姿勢算出部２０１によって音出力装置１００のそれぞれの進行方向が算出された場合、同期性判定部２０２は、複数の音出力装置１００の進行方向や移動距離、移動速度の変化が一致するか否かに基づいて、複数の音出力装置１００の姿勢の変化が同期しているか否かを判定する。
　動作制御部２０３は、１組の音出力装置１００のそれぞれの動作を制御する。
　具体的には、同期性判定部２０２によって複数の音出力装置１００の姿勢の変化が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作、例えば音楽再生装置から取得する音声信号をステレオモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。動作制御部２０３は、音出力装置１００のそれぞれから取得された姿勢の変化が同期していると判定された場合に、特定された動作を第１の動作として行うことなく、ユーザ指定の動作を行う、または通常動作を継続する形態であってもよい。言い換えると、第１の動作は、特に指定された動作でなくともよい。
　また、同期性判定部２０２によって複数の音出力装置１００の姿勢の変化が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作、例えば音楽再生装置から取得する音声信号をモノラルモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。
　上記第１の動作及び上記第２の動作の詳細については、後述する。
　したがって、本実施の形態１に係る音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００の姿勢の変化が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御する。
　また、音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００の姿勢の変化が同期していない場合、当該２台の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うように当該２台の音出力装置１００を制御する。
　また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、１組の音出力装置１００のうち２台の音出力装置１００の姿勢の変化が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。同時に、音入出力制御装置２００は、１組の音出力装置１００のうち姿勢の変化が同期していない他の音出力装置１００がある場合、１組の音出力装置１００のうち他の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御するとともに、上記第２の動作を行うように他の音出力装置１００を制御する。
　また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、これらの音出力装置１００の姿勢の変化がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。
　音入出力処理部２０４は、通信部２０５が音楽再生装置（図示省略）から受信した音声信号に所定の処理を行って、それぞれの音出力装置１００に送信する音声信号を生成する。例えば、音入出力処理部２０４は、ステレオ方式の音声信号又はモノラル方式の音声信号を生成する。そして、音入出力処理部２０４が生成した音声信号は、通信部２０５によって、それぞれの音出力装置１００に送信される。
　例えば、１組の音出力装置１００が、右耳用の音出力装置１００、左耳用の音出力装置１００からなり、これらの音出力装置１００が同一のユーザに装着されている場合、第１の動作として、音入出力処理部２０４は、右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５は、音入出力処理部２０４が生成した右耳用の音声信号を右耳用の音出力装置１００に送信し、音入出力処理部２０４が生成した左耳用の音声信号を左耳用の音出力装置１００に送信する。言い換えると、第１の動作とは、ステレオ方式の音声信号の再生動作（一人モード）である。
　また、１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、モノラル方式の音声信号を生成し、通信部２０５は、モノラル方式の音声信号をそれぞれの音出力装置１００に送信する。言い換えると、第２の動作とは、モノラル方式の音声信号の再生動作（二人モード）である。
　１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、音入力部１０３が収音した音声信号を取得し、通信部２０５は、収音した音声信号を他の音出力装置１００に送信してもよい。言い換えると、第２の動作とは、音出力装置１００による異なるユーザ間の通信動作（トランシーバモード）であってもよい。トランシーバモードは、片方向の送受信のみであってもよく、双方向に送受信が可能であってもよい。
　第２の動作とは、後述するように、音声出力の音量または音質調整などを別個に設定可能な動作モードであってもよい。
　通信部２０５は、音入出力制御装置２００と音出力装置１００及び音楽再生装置（図示省略）との間の通信を行う。
　音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信として何れの通信を用いるのか、音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の距離に応じて切り替えられてもよい。
　なお、音入出力制御装置２００は、スマートフォン等の携帯機器、ＤＡＰ、ＣＤプレーヤ等の音楽再生装置と一体であってもよい。この場合通信部２０５は、音入出力制御装置２００と音出力装置１００との通信を行う。また、音楽再生装置に音入出力制御装置２００の上記機能を実行させるアプリーケーションプログラムがインストールされてもよい。
　また、姿勢センサ１０１として、３軸方位センサ（地磁気センサ）、３軸角速度センサ（ジャイロセンサ）、３軸加速度センサ、ＧＮＳＳ受信機等のうち２種以上のセンサが音出力装置１００に搭載されていてもよい。音出力装置１００に２種以上のセンサを姿勢センサ１０１として搭載することにより、複数の音出力装置１００の姿勢をより精度高く検出することができる。例えば、姿勢センサ１０１として、３軸角速度センサだけを搭載している場合、２人のユーザに１台ずつ音出力装置１００が装着されていたとしても当該２人のユーザが所定の位置に留まっていると、２台の音出力装置１００の動きの角速度の変化はゼロになってしまう。そのため、同期性判定部２０２は、２台の音出力装置１００の姿勢の変化は同期しており、音入出力制御装置２００は、当該２台の音出力装置１００は同一のユーザに装着されていると判断してしまう。しかし、姿勢センサ１０１として、３軸角速度センサだけでなく３軸方位センサも搭載している場合、２人のユーザの向いている方角が違っていれば、当該２人のユーザが所定の位置に留まっていたとしても、当該２台の音出力装置１００の方角の変化が一致しないことを検出することができる。
　また、姿勢センサ１０１として、３軸方位センサ又は３軸加速度センサのみが搭載されてもよい。
　また、姿勢センサ１０１として３軸加速度センサを備える場合、姿勢算出部２０１は、音出力装置１００の位置が変化することによる３軸の移動に基づいて、音出力装置１００の移動も算出してもよい。そして、同期性判定部２０２は、複数の音出力装置１００の移動が一致しているか否かに基づいて、複数の音出力装置１００の姿勢の変化が同期しているか否かを判定してもよい。
　実施の形態２
　図２は、本発明の実施の形態２に係る音入出力制御装置としてのヒアラブルデバイス３００の構成を模式的に示すブロック図である。実施の形態２に係るヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と音入出力制御装置２００とが一体化したものでる。したがって、ヒアラブルデバイス３００に備えられる、姿勢センサ３０１、音出力部３０２、音入力部３０３、装着センサ３０４、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７、音入出力処理部３０８の機能は、図１に示す姿勢センサ１０１、音出力部１０２、音入力部１０３、装着センサ１０５、姿勢算出部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４と同様である。また、ヒアラブルデバイス３００に備えられる通信部３０９の機能は、図１に示す通信部１０４の機能と通信部２０５の機能とを合わせたものと同様である。そのため、姿勢センサ３０１、音出力部３０２、音入力部３０３、装着センサ３０４、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７、音入出力処理部３０８、通信部３０９の機能のうち、姿勢センサ１０１、音出力部１０２、音入力部１０３、装着センサ１０５、姿勢算出部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５と同一の機能については、その説明を省略する。
　また、ヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と同様に、ユーザに独立して装着され、当該ユーザに向けて音を出力する。具体的には、ヒアラブルデバイス３００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、ユーザの左右に独立して装着される。すなわち、複数のヒアラブルデバイス３００は、互いに完全に独立して、ユーザに装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上のヒアラブルデバイス３００が１組となっていてもよい。
　本実施の形態２に係るヒアラブルデバイス３００は、図２に示すように、姿勢センサ３０１、音出力部３０２、音入力部３０３、装着センサ３０４、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７、音入出力処理部３０８、通信部３０９等を備える。なお、１組のヒアラブルデバイス３００のうち、少なくとも１つのヒアラブルデバイス３００が音入力部３０３、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７を備えていればよく、他のヒアラブルデバイス３００は音入力部３０３、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７を備えていなくてもよい。１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ音入力部３０３、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７が備えられる場合、音入力部３０３、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７が備えられたヒアラブルデバイス３００をマスター装置とし、他のヒアラブルデバイス３００をスレーブ装置としてもよい。
　また、ヒアラブルデバイス３００は、装着センサ３０４を備えていなくてもよい。
　姿勢センサ３０１が検出した姿勢信号は、姿勢算出部３０５に入力される。また、姿勢センサ３０１が検出した姿勢信号は、通信部３０９によって、他のヒアラブルデバイス３００に送信される。
　音出力部３０２は、音楽再生装置としての携帯機器４００から通信部３０９が受信した音声信号に従って、ユーザに向けて音を出力する。
　また、音出力部３０２は、他のヒアラブルデバイス３００から通信部３０９が受信した音声信号に従って、ユーザに向けて音を出力する。
　音入力部３０３が取得した音声信号は、通信部３０９によって、他のヒアラブルデバイス３００に送信される。
　姿勢算出部３０５は、１組のヒアラブルデバイス３００のそれぞれにおいて姿勢センサ３０１によって検出される姿勢信号に基づいてヒアラブルデバイス３００のそれぞれの姿勢を算出する。
　例えば、１組のヒアラブルデバイス３００の全てに姿勢算出部３０５が備えられる場合、姿勢算出部３０５は、当該姿勢算出部３０５が備えられるヒアラブルデバイス３００の姿勢センサ３０１が検出した姿勢信号に基づいて当該ヒアラブルデバイス３００の姿勢を算出する。そして、姿勢算出部３０５が算出した当該ヒアラブルデバイス３００の姿勢は通信部３０９によって他のヒアラブルデバイス３００に送信される。
　また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ姿勢算出部３０５が備えられる場合、当該姿勢算出部３０５は、当該姿勢算出部３０５が備えられるヒアラブルデバイス３００の姿勢センサ３０１が検出した姿勢信号に基づいて当該ヒアラブルデバイス３００の姿勢を算出する。また、当該姿勢算出部３０５は、通信部３０９が受信した他のヒアラブルデバイス３００の姿勢センサ３０１が検出した姿勢信号に基づいて当該他のヒアラブルデバイス３００の姿勢を算出する。
　同期性判定部３０６は、姿勢算出部３０５によって算出された１組のヒアラブルデバイス３００のそれぞれの姿勢に基づいて、当該１組のヒアラブルデバイス３００のそれぞれの姿勢の変化が同期しているか否かを判定する。１組のヒアラブルデバイス３００の全てにおいて、それぞれ、同期性判定部３０６による同期判定が行われてもよい。また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ姿勢算出部３０５、同期性判定部３０６が備えられる場合、他のヒアラブルデバイス３００から姿勢算出部３０５によって算出された姿勢が当該１台のヒアラブルデバイス３００に送信されて、当該１台のヒアラブルデバイス３００の同期性判定部３０６による同期判定が行われてもよい。
　動作制御部３０７は、ヒアラブルデバイス３００の動作を制御する。
　１組のヒアラブルデバイス３００の全てにおいて、それぞれ、動作制御部３０７による動作制御が行われてもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の姿勢の変化と他方のヒアラブルデバイス３００の姿勢の変化とが同期している場合、当該２台のヒアラブルデバイス３００の動作制御部３０７は、上記第１の動作を行うように当該ヒアラブルデバイス３００を制御する。また、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００のそれぞれの動作制御部３０７は、上記第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
　また、１組のヒアラブルデバイス３００の全てにおいて、それぞれのヒアラブルデバイス３００の姿勢の変化が同期していない場合、それぞれのヒアラブルデバイス３００の動作制御部３０７は、第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
　また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ姿勢算出部３０５、同期性判定部３０６、動作制御部３０７が備えられる場合、当該１台のヒアラブルデバイス３００の動作制御部３０７が、他のヒアラブルデバイス３００の動作を制御してもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の姿勢の変化と他方のヒアラブルデバイス３００の姿勢の変化とが同期している場合、動作制御部３０７は、上記第１の動作を行うように当該２台のヒアラブルデバイス３００を制御する。また、動作制御部３０７は、上記第２の動作を行うように、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００を制御する。
　また、１組のヒアラブルデバイス３００の全てにおいて、それぞれのヒアラブルデバイス３００の姿勢の変化が同期していない場合、動作制御部３０７は、第２の動作を行うようにそれぞれのヒアラブルデバイス３００を制御する。
　ここで、第１の動作と第２の動作とは、実施の形態１と同等の動作である。
　音入出力処理部３０８は、通信部３０９が音楽再生装置としての携帯機器４００から受信した音声信号に所定の処理を行って、音出力部３０２に入力する音声信号を生成する。
　例えば、１組のヒアラブルデバイス３００が、右耳用のヒアラブルデバイス３００、左耳用のヒアラブルデバイス３００からなり、これらのヒアラブルデバイス３００が同一のユーザに装着されている場合、右耳用のヒアラブルデバイス３００の音入出力処理部３０８は右耳用の音声信号を生成し、左耳用のヒアラブルデバイス３００の音入出力処理部３０８は左耳用の音声信号を生成する。
　また、１組のヒアラブルデバイス３００が異なるユーザに装着されている場合、それぞれのヒアラブルデバイス３００の音入出力処理部３０８は、モノラル方式の音声信号を生成する。
　通信部３０９は、当該通信部３０９が備えられるヒアラブルデバイス３００と他のヒアラブルデバイス３００との間の通信を行う。また、通信部３０９は、当該通信部３０９が備えられるヒアラブルデバイス３００と音楽再生装置としての携帯機器４００との間の通信を行う。
　ヒアラブルデバイス３００間の通信は、近接場磁気誘導通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００間の距離に応じて切り替えられてもよい。
　ヒアラブルデバイス３００と携帯機器４００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００と携帯機器４００との間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００と携帯機器４００との間の距離に応じて切り替えられてもよい。
　なお、音楽再生装置は、上記に挙げたスマートフォン等の携帯機器４００だけでなく、ＤＡＰ、ＣＤプレーヤ等であってもよい。また、ヒアラブルデバイス３００は、音楽再生装置と一体であってもよい。
　次に、図３乃至図６を参照しながら、本発明の実施の形態１又は２に係る音入出力制御方法の例について説明する。なお、以下の説明では、１組の音出力装置１００又は１組のヒアラブルデバイス３００が２台の音出力装置１００又は２台のヒアラブルデバイス３００からなり、一方の音出力装置１００又はヒアラブルデバイス３００がマスター装置となり、他方の音出力装置１００又はヒアラブルデバイス３００がスレーブ装置となる場合を例に挙げて説明する。
　また、以下の説明では、実施の形態１に係る音入出力制御装置２００における処理フローを例に挙げて説明する。実施の形態２に係るヒアラブルデバイス３００における処理フローの説明は、姿勢センサ１０１、音出力部１０２、音入力部１０３、装着センサ１０５、姿勢算出部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５による処理を、それぞれ、姿勢センサ３０１、音出力部３０２、音入力部３０３、装着センサ３０４、姿勢算出部３０５、同期性判定部３０６、動作制御部３０７、音入出力処理部３０８、通信部３０９による処理に読み換えれば同様となるため、その説明を省略する。
　最初に、図３に示す音入出力制御方法の例について説明する。
　まず、姿勢算出部２０１は、１組の音出力装置１００のそれぞれによって検出される音出力装置１００の姿勢信号に基づいて、それぞれの音出力装置１００の姿勢を算出する（ステップＳ１０１）。すなわち、姿勢算出部２０１は、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢を算出する。
　次に、同期性判定部２０２は、姿勢算出部２０１によって算出された、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期しているか否かを判定する（ステップＳ１０２）。
　ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期している場合（ステップＳ１０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を一人モード（第１の動作）で動作するように制御する（ステップＳ１０３）。
　そして、右耳用の音出力装置１００と左耳用の音出力装置１００において通常動作が行われる（ステップＳ１０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。
　ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期していない場合（ステップＳ１０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を二人モード（第２の動作）で動作するように制御する（ステップＳ１０５）。
　そして、右耳用の音出力装置１００と左耳用の音出力装置１００においてモノラル方式で音楽の再生が行われる（ステップＳ１０６）。具体的には、音入出力処理部２０４がモノラル方式の音声信号を生成し、通信部２０５が当該モノラル方式の音声信号を右耳用の音出力装置１００と左耳用の音出力装置１００とに送信する。そして、右耳用の音出力装置１００音出力部１０２と左耳用の音出力装置１００の音出力部１０２とが、それぞれ、当該モノラル方式の音声信号に従ってユーザに向けて音を出力する。
　次に、図４に示す音入出力制御方法の例について説明する。図４に示す音入出力制御方法において、ステップＳ２０１、ステップＳ２０２、ステップＳ２０４の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０４の処理と同様であるため、その説明を省略する。
　ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期している場合（ステップＳ２０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を音声出力モード（第１の動作）で動作するように制御する（ステップＳ２０３）。
　ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期していない場合（ステップＳ２０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００をトランシーバモード（第２の動作）で動作するように制御する（ステップＳ２０５）。
　そして、一方の音出力装置１００のマイク（音入力部）１０３で収音したユーザの音声信号が他方の音出力装置１００へ送信され、他方の音出力装置１００が当該音声信号を受信し、他方の音出力装置１００の音出力部１０２は、当該音声信号に従って、ユーザに向けて音を出力する（ステップＳ２０６）。例えば、右耳用の音出力装置１００を装着したユーザの音声が当該右耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、左耳用の音出力装置１００へ送信される。そして、左耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該左耳用の音出力装置１００を装着したユーザに向けて音を出力する。反対に、左耳用の音出力装置１００を装着したユーザの音声が当該左耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、右耳用の音出力装置１００へ送信される。そして、右耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該右耳用の音出力装置１００を装着したユーザに向けて音を出力する。これにより、右耳用の音出力装置１００と左耳用の音出力装置１００とが異なるユーザに装着された場合に、右耳用の音出力装置１００と左耳用の音出力装置１００とをトランシーバとして用いることができる。
　なお、上記トランシーバモードにおいて、動作制御部２０３は、音出力部１０２による音声信号に基づく音の出力を停止させるように、又は、音声信号に基づく音の出力の音量を低下させるように音出力装置１００を制御してもよい。また、上記トランシーバモードにおいて、動作制御部２０３は、右耳用の音出力装置１００又は左耳用の音出力装置１００の何れか一方における音入力部１０３による収音を停止させるように音出力装置１００を制御してもよい。
　次に、図５に示す音入出力制御方法の例について説明する。図５に示す音入出力制御方法において、ステップＳ３０１、ステップＳ３０２、ステップＳ３０３、ステップＳ３０５の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０３、ステップＳ１０５の処理と同様であるため、その説明を省略する。
　ステップＳ３０３において、右耳用及び左耳用の音出力装置１００が一人モード（第１の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質等の同時調整（通常動作）が行われる（ステップＳ３０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を実質的に同じ音量や音質となるように同時に調整する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。
　ステップＳ３０５において、右耳用及び左耳用の音出力装置１００が二人モード（第２の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質の個別調整が行われる（ステップＳ３０６）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を個別に調整可能とする。例えば、音入出力制御装置２００又は音楽再生装置が、自身の表示部（図示省略）に、右耳用の音量や音質を調整するための設定画面と左耳用の音量や音質を調整するための設定画面を別々に表示する。これにより、右耳用の音出力装置１００を装着したユーザ及び左耳用の音出力装置１００を装着したユーザがそれぞれの設定画面を操作することにより、右耳用の音出力装置１００と左耳用の音出力装置１００の音量や音質をそれぞれのユーザごとに好みのものに設定できる。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。
　次に、図６に示す音入出力制御方法の例について説明する。図６に示す音入出力制御方法において、ステップＳ４０１、ステップＳ４０２の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２の処理と同様であるため、その説明を省略する。
　ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期している場合（ステップＳ４０２；Ｙｅｓ）、ステップＳ１０３又はＳ２０３又はＳ３０３の処理へ進む（ステップＳ４０３）。
　ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれの姿勢の変化が同期していない場合（ステップＳ４０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００が異なるユーザの同じ側に装着されているか否かを判定する（ステップＳ４０４）。具体的には、動作制御部２０３は、装着センサ１０５によって検出された装着検出信号と、姿勢算出部２０１によって算出された右耳用及び左耳用の音出力装置１００のそれぞれの姿勢に基づいて、右耳用及び左耳用の音出力装置１００が異なるユーザの同じ側に装着されているか否かを判定する。なお、動作制御部２０３は、装着センサ１０５によって検出された装着検出信号を用いずに、姿勢算出部２０１によって算出された右耳用及び左耳用の音出力装置１００のそれぞれの姿勢のみに基づいて、判定を行ってもよい。
　ステップＳ４０４において、右耳用の音出力装置１００と左耳用の音出力装置１００とが異なるユーザの異なる側に装着されている場合（ステップＳ４０４；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を二人モードで動作するように制御する（ステップＳ４０５）。そして、ステップＳ１０６又はＳ３０６の処理へ進む（ステップＳ４０６）。
　ステップＳ４０４において、右耳用の音出力装置１００と左耳用の音出力装置１００とが異なるユーザの同じ側に装着されている場合（ステップＳ４０４；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００をトランシーバモードで動作するように制御する（ステップＳ４０７）。そして、一方の音出力装置１００のマイク（音入力部）１０３で収音したユーザの音声信号が他方の音出力装置１００へ送信され、他方の音出力装置１００が当該音声信号を受信し、他方の音出力装置１００の音出力部１０２は、当該音声信号に従って、ユーザに向けて音を出力する（ステップＳ４０８）。
　以上に説明した、実施の形態１に係る音入出力制御装置２００によれば、同期性判定部２０２によって、姿勢算出部２０１によって算出された音出力装置１００のそれぞれの姿勢の変化が同期しているか否かが判定される。また、同期性判定部２０２によって音出力装置１００のそれぞれの姿勢の変化が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作を行うように音出力装置１００のそれぞれを制御する。また、同期性判定部２０２によって音出力装置１００のそれぞれの姿勢の変化が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作を行うように音出力装置１００のそれぞれを制御する。
　また、音入出力制御装置２００は、１組の音出力装置１００の姿勢の変化がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。
　そのため、ユーザに独立して装着される複数の音出力装置１００に、ステレオ方式の音を出力する等の通常の動作である第１の動作以外の、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作も付与することができる。よって、音出力装置１００により広い用途を付与することができる。
　実施の形態２に係るヒアラブルデバイス３００も同様である。
　上述の実施の形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、図３乃至６のフローチャートに記載の処理手順を、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）にコンピュータプログラムを実行させることにより実現することも可能である。
　また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ　ｃｏｍｐｕｔｅｒ　ｒｅａｄａｂｌｅ　ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ　ｓｔｏｒａｇｅ　ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ　ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ　ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ　ｃｏｍｐｕｔｅｒ　ｒｅａｄａｂｌｅ　ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　なお、本発明は上述した実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。
　この出願は、２０２０年３月２４日に出願された日本出願特願２０２０－５２６２１を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することができる。
１００　音出力装置
２００　音入出力制御装置
３００　ヒアラブルデバイス（音入出力制御装置）
１０１、３０１　姿勢センサ
１０２、３０２　音出力部
１０３、３０３　音入力部
１０４、３０９　通信部
２０１、３０５　姿勢算出部
２０２、３０６　同期性判定部
２０３、３０７　動作制御部
２０４、３０８　音入出力処理部
２０５、３０９　通信部
４００　携帯機器（音楽再生装置）

Claims (8)

  1. 　ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、
    　前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出する姿勢算出部と、
    　前記姿勢算出部によって算出された複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定する同期性判定部と、
    　前記音出力装置のそれぞれの動作を制御する動作制御部と、
    　を備え、
    　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、
    　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御装置。
  2. 　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれにモノラル方式の音を出力させる、請求項１に記載の音入出力制御装置。
  3. 　前記音出力装置の少なくとも１つは、当該音出力装置が装着されたユーザの音声を収音する音入力部を備え、
    　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、一の前記音出力装置から当該音出力装置の前記音入力部によって収音された音声を他の前記音出力装置に出力させる、請求項１又は２に記載の音入出力制御装置。
  4. 　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれの音量を個別に調整可能とする、請求項１乃至３の何れか一項に記載の音入出力制御装置。
  5. 　前記音出力装置の少なくとも１つは、当該音出力装置が装着されたユーザの音声を収音する音入力部を備え、
    　前記同期性判定部によって複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定された場合に、前記動作制御部は、前記姿勢算出部によって算出された前記音出力装置のそれぞれの姿勢に基づいて、それぞれの前記音出力装置が異なるユーザの左耳と右耳のどちらに装着されているかを判定し、それぞれの前記音出力装置のうち少なくとも２つが異なるユーザの異なる側に装着されている場合、前記音出力装置のそれぞれにモノラル方式の音を出力させる制御、又は前記音出力装置のそれぞれの音量を個別に調整する制御の少なくとも一方を行い、それぞれの前記音出力装置が異なるユーザの同じ側に装着されている場合、一の前記音出力装置から当該音出力装置の前記音入力部によって収音された音声を他の前記音出力装置に出力させる制御を行う、請求項１乃至４の何れか一項に記載の音入出力制御装置。
  6. 　前記姿勢信号は、前記音出力装置の方角に関する信号であり、
    　前記姿勢算出部は、前記音出力装置のそれぞれの方角を算出する、請求項１乃至５の何れか一項に記載の音入出力制御装置。
  7. 　ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、
    　前記音入出力制御装置が、
    　前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出し、
    　算出した複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定し、
    　複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
    　複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御方法。
  8. 　音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、
    　前記音入出力制御装置に、
    　前記音出力装置のそれぞれにおいて検出される姿勢信号に基づいて前記音出力装置のそれぞれの姿勢を算出する処理と、
    　算出した複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期しているか否かを判定する処理と、
    　複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
    　複数の前記音出力装置のうち少なくとも２つの姿勢の変化が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるプログラム。
PCT/JP2020/047187 2020-03-24 2020-12-17 音入出力制御装置、音入出力制御方法、及びプログラム WO2021192455A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202080089941.0A CN114902694A (zh) 2020-03-24 2020-12-17 声音输入输出控制装置、声音输入输出控制方法以及程序
EP20927680.7A EP4131985A4 (en) 2020-03-24 2020-12-17 SOUND INPUT-OUTPUT CONTROL DEVICE, SOUND INPUT-OUTPUT CONTROL METHOD, AND PROGRAM
US17/856,647 US12022252B2 (en) 2020-03-24 2022-07-01 Sound input-output control apparatus, sound input-output control method, and non-transitory computer-readable medium

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020052621A JP7567183B2 (ja) 2020-03-24 2020-03-24 音入出力制御装置、音入出力制御方法、及びプログラム
JP2020-052621 2020-03-24

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/856,647 Continuation US12022252B2 (en) 2020-03-24 2022-07-01 Sound input-output control apparatus, sound input-output control method, and non-transitory computer-readable medium

Publications (1)

Publication Number Publication Date
WO2021192455A1 true WO2021192455A1 (ja) 2021-09-30

Family

ID=77886753

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/047187 WO2021192455A1 (ja) 2020-03-24 2020-12-17 音入出力制御装置、音入出力制御方法、及びプログラム

Country Status (5)

Country Link
US (1) US12022252B2 (ja)
EP (1) EP4131985A4 (ja)
JP (1) JP7567183B2 (ja)
CN (1) CN114902694A (ja)
WO (1) WO2021192455A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2023117653A (ja) * 2022-02-14 2023-08-24 ソニーセミコンダクタソリューションズ株式会社 情報処理システム、及び、情報処理方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004120313A (ja) * 2002-09-26 2004-04-15 Mitsumi Electric Co Ltd ワイヤレスヘッドセットシステム
JP2009152666A (ja) * 2007-12-18 2009-07-09 Toshiba Corp 音響出力制御装置、音響再生装置および音響出力制御方法
JP2019180082A (ja) 2016-09-23 2019-10-17 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 左右イヤホン自動判定
JP2020052621A (ja) 2018-09-26 2020-04-02 日本電気株式会社 トランザクション管理装置、トランザクション管理方法及びトランザクション管理プログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090023417A1 (en) 2007-07-19 2009-01-22 Motorola, Inc. Multiple interactive modes for using multiple earpieces linked to a common mobile handset
US20130279724A1 (en) * 2012-04-19 2013-10-24 Sony Computer Entertainment Inc. Auto detection of headphone orientation
JP6276503B2 (ja) * 2012-12-28 2018-02-07 アルパイン株式会社 オーディオ装置
JP6459684B2 (ja) * 2015-03-23 2019-01-30 カシオ計算機株式会社 情報出力装置、情報出力方法及びプログラム
US10945076B2 (en) 2016-09-23 2021-03-09 Apple Inc. Low spring-rate band
US11323793B2 (en) 2016-09-23 2022-05-03 Apple Inc. Synchronized telescoping headphones
US11102567B2 (en) 2016-09-23 2021-08-24 Apple Inc. Foldable headphones
US20180359348A1 (en) * 2017-06-13 2018-12-13 Qualcomm Incorporated Audio coding based on wireless earphone configuration
KR102060776B1 (ko) 2017-11-28 2019-12-30 삼성전자주식회사 생체 정보에 기반하여 외부 오디오 장치와 연동하여 동작하는 전자 장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004120313A (ja) * 2002-09-26 2004-04-15 Mitsumi Electric Co Ltd ワイヤレスヘッドセットシステム
JP2009152666A (ja) * 2007-12-18 2009-07-09 Toshiba Corp 音響出力制御装置、音響再生装置および音響出力制御方法
JP2019180082A (ja) 2016-09-23 2019-10-17 アップル インコーポレイテッドＡｐｐｌｅ Ｉｎｃ． 左右イヤホン自動判定
JP2020052621A (ja) 2018-09-26 2020-04-02 日本電気株式会社 トランザクション管理装置、トランザクション管理方法及びトランザクション管理プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP4131985A4

Also Published As

Publication number Publication date
CN114902694A (zh) 2022-08-12
US20220337934A1 (en) 2022-10-20
JP2021153243A (ja) 2021-09-30
JP7567183B2 (ja) 2024-10-16
EP4131985A1 (en) 2023-02-08
EP4131985A4 (en) 2023-08-30
US12022252B2 (en) 2024-06-25

Similar Documents

Publication Publication Date Title
EP2700907B1 (en) Acoustic Navigation Method
US20130259244A1 (en) Hearing device with an inertial measurement unit
JP4735993B2 (ja) 音声処理装置、音像定位位置調整方法、映像処理装置及び映像処理方法
US11586280B2 (en) Head motion prediction for spatial audio applications
US20210400420A1 (en) Inertially stable virtual auditory space for spatial audio applications
US20130322667A1 (en) Personal navigation system with a hearing device
JP2004085476A (ja) ヘッドトラッキング方法及び装置
JP2012518313A (ja) モバイル用途のための頭部追跡
TW201603589A (zh) 耳機及其聲道控制方法
WO2021192455A1 (ja) 音入出力制御装置、音入出力制御方法、及びプログラム
WO2023029143A1 (zh) 一种耳机的连接设备切换方法、系统及相关组件
US20210152971A1 (en) Method for determining distance between ears of a wearer of a sound generating object and an ear-worn, sound generating object
US20220321989A1 (en) Contextual Audio System
JP7484290B2 (ja) 移動体位置推定装置および移動体位置推定方法
US20240284140A1 (en) Cornering correction for spatial audio head tracking
JP7480544B2 (ja) 音入出力制御装置、音入出力制御方法、及びプログラム
WO2023017622A1 (ja) 情報処理装置、情報処理方法およびプログラム
CN114710726B (zh) 智能穿戴设备的中心定位方法、设备及存储介质
TWI752567B (zh) 校正系統和校正方法
US10327073B1 (en) Externalized audio modulated by respiration rate
CN114543844A (zh) 无线音频设备的音频播放处理方法、装置及无线音频设备
TW201911880A (zh) 耳機及其聲道控制方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20927680

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2020927680

Country of ref document: EP

Effective date: 20221024