JP7375644B2 - Sound input/output control device, sound input/output control method, and program - Google Patents

Sound input/output control device, sound input/output control method, and program Download PDF

Info

Publication number
JP7375644B2
JP7375644B2 JP2020052623A JP2020052623A JP7375644B2 JP 7375644 B2 JP7375644 B2 JP 7375644B2 JP 2020052623 A JP2020052623 A JP 2020052623A JP 2020052623 A JP2020052623 A JP 2020052623A JP 7375644 B2 JP7375644 B2 JP 7375644B2
Authority
JP
Japan
Prior art keywords
sound
sound output
output devices
biological information
input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020052623A
Other languages
Japanese (ja)
Other versions
JP2021153245A (en
Inventor
成史 小俣
丁珠 崔
弘幸 熊倉
克美 富澤
涼 宮口
英樹 竹原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2020052623A priority Critical patent/JP7375644B2/en
Publication of JP2021153245A publication Critical patent/JP2021153245A/en
Application granted granted Critical
Publication of JP7375644B2 publication Critical patent/JP7375644B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Stereophonic Arrangements (AREA)
  • Stereophonic System (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Selective Calling Equipment (AREA)
  • Headphones And Earphones (AREA)

Description

本発明は、音入出力制御装置、音入出力制御方法、及びプログラムに関する。 The present invention relates to a sound input/output control device, a sound input/output control method, and a program.

特許文献１には、イヤホンを装着するユーザの身体の状態を取得し、当該身体の状態に基づいて、イヤホンを密閉型から開放型に切り替える技術が記載されている。 Patent Document 1 describes a technology that acquires the physical condition of a user who wears earphones and switches the earphones from a closed type to an open type based on the body condition.

特開２０１６－０５１９１５号公報Japanese Patent Application Publication No. 2016-051915

また、近年、左右のイヤホンが完全にワイヤレスな、フルワイヤレスイヤホン（TWS：True Wireless Stereo）が普及しつつある。フルワイヤレスイヤホンは、左右のイヤホンによってステレオ方式で音を出力する。本発明者らは、フルワイヤレスイヤホンのように、独立して使用可能な複数の音出力装置における、ステレオ方式の音の出力という通常の動作モード以外の動作モードも可能にする技術に想到した。 In addition, in recent years, fully wireless earphones (TWS: True Wireless Stereo), in which the left and right earphones are completely wireless, have become popular. Fully wireless earphones output sound in stereo using the left and right earphones. The present inventors have conceived of a technology that enables operation modes other than the normal operation mode of outputting stereo sound in a plurality of sound output devices that can be used independently, such as full wireless earphones.

本発明は、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することを目的とする。 An object of the present invention is to provide a sound input/output control device, a sound input/output control method, and a program that can provide a sound output device with a wider range of uses.

本発明に係る音入出力制御装置は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する生体情報取得部と、前記生体情報取得部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期しているか否かを判定する同期性判定部と、前記音出力装置のそれぞれの動作を制御する動作制御部と、を備え、前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する。 A sound input/output control device according to the present invention is a sound input/output control device that is independently attached to a user and controls a plurality of sound output devices that output sound toward the user, and is a sound input/output control device that controls a plurality of sound output devices that output sound to the user. A biometric information acquisition unit that acquires biometric signals of the user detected by each as biometric information, and whether or not the biometric information acquired from at least two of the sound output devices by the biometric information acquisition unit are synchronized. and an operation control unit that controls the operation of each of the sound output devices. When it is determined that the information is synchronized, the operation control section controls each of the sound output devices to perform the first operation, and the synchronization determination section controls at least one of the sound output devices. If it is determined that the biological information acquired from the two devices is not synchronized, the operation control unit controls each of the sound output devices to perform the second operation.

本発明に係る音入出力制御方法は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、前記音入出力制御装置が、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御するものである。 A sound input/output control method according to the present invention is a sound input/output control method in which a sound input/output control device controls a plurality of sound output devices that are independently attached to a user and output sound to the user. , the sound input/output control device acquires biological signals of the user detected by each of the sound output devices as biological information, and the biological information acquired from at least two of the sound output devices is synchronized. and controlling each of the sound output devices to perform a first operation if it is determined that the biological information acquired from at least two of the sound output devices is synchronized. , when it is determined that the biological information acquired from at least two of the sound output devices is not synchronized, each of the sound output devices is controlled to perform a second operation.

本発明に係るプログラムは、音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、前記音入出力制御装置に、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する処理と、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定する処理と、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるものである。 A program according to the present invention is a program that causes a sound input/output control device to execute processing for controlling a plurality of sound output devices that are independently attached to a user and output sounds to the user, the program In the input/output control device, whether the process of acquiring the biological signals of the user detected by each of the sound output devices as biological information is synchronized with the biological information acquired from at least two of the sound output devices. and controlling each of the sound output devices to perform a first operation when it is determined that the biological information acquired from at least two of the sound output devices are synchronized. and controlling each of the sound output devices to perform a second operation when it is determined that the biological information acquired from at least two of the sound output devices is not synchronized. It is something that makes you

本発明によれば、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することができる。 According to the present invention, it is possible to provide a sound input/output control device, a sound input/output control method, and a program that can provide a sound output device with a wider range of uses.

本発明の実施の形態１に係る音入出力制御装置の構成を模式的に示すブロック図である。1 is a block diagram schematically showing the configuration of a sound input/output control device according to Embodiment 1 of the present invention. FIG. 本発明の実施の形態２に係る音入出力制御装置の構成を模式的に示すブロック図である。FIG. 2 is a block diagram schematically showing the configuration of a sound input/output control device according to Embodiment 2 of the present invention. 本発明の実施の形態１又は２に係る音入出力制御方法の一例を示すフローチャートである。2 is a flowchart showing an example of a sound input/output control method according to Embodiment 1 or 2 of the present invention. 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。It is a flowchart which shows another example of the sound input-output control method based on Embodiment 1 or 2 of this invention. 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。It is a flowchart which shows another example of the sound input-output control method based on Embodiment 1 or 2 of this invention. 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。It is a flowchart which shows another example of the sound input-output control method based on Embodiment 1 or 2 of this invention.

実施の形態１
以下、図面を参照して本発明の実施の形態について説明する。
図１は、本発明の実施の形態１に係る音入出力制御装置２００の構成を模式的に示すブロック図である。音入出力制御装置２００は、図１に示す音出力装置１００の動作を制御する。具体的には、音入出力制御装置２００は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。これにより、音入出力制御装置２００は、音出力装置１００に、より広い用途を付与することができる。 Embodiment 1
Embodiments of the present invention will be described below with reference to the drawings.
FIG. 1 is a block diagram schematically showing the configuration of a sound input/output control device 200 according to Embodiment 1 of the present invention. The sound input/output control device 200 controls the operation of the sound output device 100 shown in FIG. Specifically, the sound input/output control device 200 is independently attached to a user and controls a plurality of sound output devices 100 that output sound to the user. Thereby, the sound input/output control device 200 can provide the sound output device 100 with a wider range of uses.

音出力装置１００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、例えばユーザの左右の耳に独立して装着される。すなわち、複数の音出力装置１００は、互いに完全に独立して、ユーザの耳に装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上の音出力装置１００が１組となっていてもよい。複数の音出力装置１００は、ユーザの頬骨などに左右独立して装着されてもよく、首掛けスピーカやウェアラブルスピーカであってもよい。音出力装置１００は、フルワイヤレス型に限定されず、その一部が有線接続であってもよい。 The sound output device 100 is a completely independent individual earphone, such as a full wireless earphone or a full wireless bone conduction earphone, and is, for example, worn independently on the left and right ears of a user. That is, the plurality of sound output devices 100 are attached to the user's ears completely independently of each other. Normally, full wireless earphones, full wireless bone conduction earphones, etc. are a set of two completely independent earphones. However, in the present invention, three or more sound output devices 100 may be included in one set. The plurality of sound output devices 100 may be mounted independently on the left and right cheekbones of the user, or may be a neck speaker or a wearable speaker. The sound output device 100 is not limited to a fully wireless type, and a portion thereof may be connected by wire.

本実施の形態１に係る音出力装置１００は、図１に示すように、生体センサ１０１、音出力部１０２、音入力部１０３、通信部１０４等を備える。なお、１組の音出力装置１００のうち、少なくとも１つの音出力装置１００が音入力部１０３を備えていればよく、他の音出力装置１００は音入力部１０３を備えていなくてもよい。また、１組の音出力装置１００のすべてが音入力部１０３を備えない形態であってもよい。 As shown in FIG. 1, the sound output device 100 according to the first embodiment includes a biological sensor 101, a sound output section 102, a sound input section 103, a communication section 104, and the like. Note that it is sufficient that at least one sound output device 100 among the set of sound output devices 100 is provided with the sound input section 103, and the other sound output devices 100 do not need to be provided with the sound input section 103. Further, all of the sound output devices 100 in one set may not include the sound input section 103.

生体センサ１０１は、ユーザの生体信号を検出するセンサであり、例えば、脈拍センサ、血圧センサ、呼吸センサ、体温計等である。生体センサ１０１が検出した生体信号は、通信部１０４によって、音入出力制御装置２００に送信される。 The biosensor 101 is a sensor that detects a biosignal of a user, and is, for example, a pulse sensor, a blood pressure sensor, a breathing sensor, a thermometer, or the like. The biological signal detected by the biological sensor 101 is transmitted to the sound input/output control device 200 by the communication unit 104.

音出力部１０２は、スピーカ、又は、骨伝導スピーカ等を備え、スマートフォン等の携帯機器、ＤＡＰ（Digital Audio Player)、ＣＤプレーヤ等の音楽再生装置（図示省略）から取得する音声信号に従って、ユーザに向けて音を出力する。音楽再生装置からの音声信号は、音入出力制御装置２００を介して通信部１０４によって受信されてもよいし、音入出力制御装置２００を介さずに、直接、通信部１０４によって受信されてもよい。
また、音出力部１０２は、他の音出力装置１００から通信部１０４が受信した音声信号に従って、ユーザに向けて音を出力する形態があってもよい。具体的には、他の音出力装置１００の音入力部１０３が音声を収音することにより音声信号を取得し、音出力部１０２は、当該他の音出力装置１００から通信部１０４が受信した当該音声信号に従って、当該音声を出力する。 The sound output unit 102 is equipped with a speaker, a bone conduction speaker, etc., and provides audio to the user according to an audio signal obtained from a mobile device such as a smartphone, a DAP (Digital Audio Player), a music playback device (not shown) such as a CD player, etc. Outputs sound towards the target. The audio signal from the music playback device may be received by the communication unit 104 via the sound input/output control device 200, or may be directly received by the communication unit 104 without going through the sound input/output control device 200. good.
Further, the sound output unit 102 may output sound to the user according to the audio signal received by the communication unit 104 from another sound output device 100. Specifically, the sound input section 103 of the other sound output device 100 acquires the sound signal by collecting sound, and the sound output section 102 acquires the sound signal from the other sound output device 100 by the communication section 104. The audio is output according to the audio signal.

音入力部１０３は、マイク等であり、音出力装置１００を装着したユーザの音声を収音して音声信号を取得する。なお、音入力部１０３は、ユーザが当該音出力装置１００を装着した状態で、ユーザの音声を収音可能となっている。音入力部１０３が取得した音声信号は、通信部１０４によって、音入出力制御装置２００又は他の音出力装置１００に送信される。なお、音入力部１０３は、１組の音出力装置１００のうち、全ての音出力装置１００に備えられていてもよいし、少なくとも１つの音出力装置１００に備えられていてもよい。１組の音出力装置１００のうち、１台の音出力装置１００にのみ音入力部１０３が備えられる場合、音入力部１０３が備えられた音出力装置１００をマスター装置とし、他の音出力装置１００をスレーブ装置としてもよい。 The sound input unit 103 is a microphone or the like, and collects the voice of the user wearing the sound output device 100 to obtain an audio signal. Note that the sound input unit 103 is capable of collecting the user's voice while the user is wearing the sound output device 100. The audio signal acquired by the sound input section 103 is transmitted to the sound input/output control device 200 or another sound output device 100 by the communication section 104. Note that the sound input unit 103 may be included in all the sound output devices 100 of the set of sound output devices 100, or may be provided in at least one sound output device 100. When only one sound output device 100 among a set of sound output devices 100 is equipped with the sound input section 103, the sound output device 100 equipped with the sound input section 103 is set as a master device, and the other sound output devices 100 may be a slave device.

なお、１組の音出力装置１００の全てに、音入力部１０３が備えられる場合、音出力部１０２から所定長さの音（例えば、数百ミリ秒の音）を出力し、ユーザの耳の穴の中を伝搬した音（反響音）を音入力部１０３が収音して、反響音信号を取得してもよい。そして、音入力部１０３が取得した反響音信号は、通信部１０４によって、音入出力制御装置２００に送信されてもよい。この場合、音入出力制御装置２００の生体情報取得部２０１（後述）は、当該反響音信号からユーザの個人認証情報を生成し、生体情報として取得してもよい。１組の音出力装置１００の全てに音入力部１０３が備えられる場合、音入力部１０３のそれぞれが収音した音声から声紋情報を導出し、生体情報取得部２０１（後述）は、当該声紋情報号からユーザの個人認証情報を生成し、生体情報として取得してもよい。 Note that when all of a set of sound output devices 100 are equipped with the sound input unit 103, the sound output unit 102 outputs a sound of a predetermined length (for example, a sound of several hundred milliseconds), and the sound output unit 102 outputs sound of a predetermined length (for example, a sound of several hundred milliseconds) to The sound input unit 103 may collect the sound (reverberant sound) propagated inside the hole to obtain a reverberant sound signal. The echo sound signal acquired by the sound input section 103 may be transmitted to the sound input/output control device 200 by the communication section 104. In this case, the biometric information acquisition unit 201 (described later) of the sound input/output control device 200 may generate the user's personal authentication information from the echo sound signal and acquire it as biometric information. When all of a set of sound output devices 100 are equipped with sound input units 103, voiceprint information is derived from the voice collected by each of the sound input units 103, and the biometric information acquisition unit 201 (described later) extracts the voiceprint information. The user's personal authentication information may be generated from the number and obtained as biometric information.

通信部１０４は、当該通信部１０４が備えられる音出力装置１００と、他の音出力装置１００及び音入出力制御装置２００、又は上述した音楽再生装置（図示省略）との間の通信を行う。
音出力装置１００間の通信は、近接場磁気誘導（NFMI：Near Field Magnetic Induction）通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ（Near Field Communication）等の近距離無線通信等である。音出力装置１００間の通信として何れの通信を用いるのか、音出力装置１００間の距離に応じて切り替えられてもよい。
音出力装置１００と音入出力制御装置２００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音出力装置１００と音入出力制御装置２００との間の通信として何れの通信を用いるのか、音出力装置１００と音入出力制御装置２００との間の距離に応じて切り替えられてもよい。 The communication unit 104 performs communication between the sound output device 100 provided with the communication unit 104 and another sound output device 100 and sound input/output control device 200, or the above-mentioned music playback device (not shown).
Communication between the sound output devices 100 includes Near Field Magnetic Induction (NFMI) communication, wireless LAN such as Bluetooth (registered trademark), Wi-Fi (registered trademark), infrared communication, and NFC (Near Field Magnetic Induction) communication. communication), short-range wireless communication, etc. Which communication is used for communication between the sound output devices 100 may be switched depending on the distance between the sound output devices 100.
Communication between the sound output device 100 and the sound input/output control device 200 is via wireless LAN such as Bluetooth (registered trademark) or Wi-Fi (registered trademark), infrared communication, or short-range wireless communication such as NFC. Which communication is used as communication between the sound output device 100 and the sound input/output control device 200 may be switched depending on the distance between the sound output device 100 and the sound input/output control device 200.

音入出力制御装置２００は、上述したように、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。例えば、音入出力制御装置２００は、１組の音出力装置１００のうち、少なくとも２台の音出力装置１００を制御する。音入出力制御装置２００は、図１に示すように、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部２０５等を備える。 As described above, the sound input/output control device 200 is independently attached to a user and controls the plurality of sound output devices 100 that output sound to the user. For example, the sound input/output control device 200 controls at least two sound output devices 100 out of one set of sound output devices 100. As shown in FIG. 1, the sound input/output control device 200 includes a biological information acquisition section 201, a synchrony determination section 202, an operation control section 203, a sound input/output processing section 204, a communication section 205, and the like.

生体情報取得部２０１は、音出力装置１００のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する。すなわち、生体情報取得部２０１は、１組の音出力装置１００のそれぞれから、生体情報を個別に取得する。
具体的には、生体情報取得部２０１は、音出力装置１００の生体センサ１０１によって検出され通信部２０５が受信した生体信号を、生体情報として取得する。生体情報取得部２０１が取得する生体情報は、例えば、ユーザの脈拍、血圧、呼吸、体温等に関する情報である。
また、生体情報取得部２０１は、音出力装置１００の音入力部１０３が取得し通信部２０５が受信した反響音信号からユーザの個人認証情報を生成し、当該個人認証情報を生体情報として取得してもよい。生体センサ１０１は、上述した各種センサを複数組み合わせたものであってもよく、生体情報取得部２０１は、これら複数のセンサが取得する生体情報を組み合わせて取得してもよい。 The biological information acquisition unit 201 acquires the user's biological signals detected by each of the sound output devices 100 as biological information. That is, the biological information acquisition unit 201 individually acquires biological information from each of the set of sound output devices 100.
Specifically, the biological information acquisition unit 201 acquires the biological signal detected by the biological sensor 101 of the sound output device 100 and received by the communication unit 205 as biological information. The biological information acquired by the biological information acquisition unit 201 is, for example, information regarding the user's pulse, blood pressure, respiration, body temperature, and the like.
Further, the biometric information acquisition unit 201 generates the user's personal authentication information from the echo sound signal acquired by the sound input unit 103 of the sound output device 100 and received by the communication unit 205, and acquires the personal authentication information as biometric information. It's okay. The biosensor 101 may be a combination of a plurality of the various sensors described above, and the biometric information acquisition unit 201 may obtain a combination of biometric information acquired by these multiple sensors.

同期性判定部２０２は、生体情報取得部２０１によって音出力装置１００のそれぞれから取得された生体情報が同期しているか否かを判定する。すなわち、同期性判定部２０２は、生体情報取得部２０１が１組の音出力装置１００のそれぞれから個別に取得した生体情報が同期しているか否かを判定する。
具体的には、例えば、同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する生体情報が脈拍、呼吸等に関する周期性を有する情報である場合、これらの生体情報の周期が一致するか否かに基づいて、これらの生体情報が同期しているか否かを判定する。同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する血圧や脈拍の強度、呼吸の深さ、体温などが略一致しているか否かに基づいて、これらの生体情報が同期しているか否かを判定してもよい。
もしくは、同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する生体情報が上記反響音信号である場合、これらの反響音信号からユーザの個人認証情報を生成し、これらの個人認証情報が一致するか否かに基づいて、これらの生体情報が同期しているか否かを判定する。 The synchronicity determination unit 202 determines whether the biological information acquired from each of the sound output devices 100 by the biological information acquisition unit 201 is synchronized. That is, the synchronicity determination unit 202 determines whether the biological information that the biological information acquisition unit 201 has individually acquired from each of the sound output devices 100 is synchronized.
Specifically, for example, if the biological information acquired individually from each of the sound output devices 100 is information having periodicity related to pulse, respiration, etc., the synchrony determination unit 202 determines whether the periods of these biological information match. Based on whether or not the biometric information is synchronized, it is determined whether or not these biometric information are synchronized. The synchronization determination unit 202 determines whether these biological information are synchronized based on whether the blood pressure, pulse intensity, breathing depth, body temperature, etc. obtained individually from each of the sound output devices 100 substantially match. It may also be determined whether the
Alternatively, when the biometric information acquired individually from each of the sound output devices 100 is the echo sound signal, the synchronization determination unit 202 generates the user's personal authentication information from these echo sound signals and performs the personal authentication on the user. Based on whether the information matches, it is determined whether these pieces of biometric information are synchronized.

動作制御部２０３は、１組の音出力装置１００のそれぞれの動作を制御する。
具体的には、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作、例えば音楽再生装置から取得する音声信号をステレオモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。動作制御部２０３は、音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、特定された動作を第１の動作として行うことなく、ユーザ指定の動作を行う、または通常動作を継続する形態であってもよい。言い換えると、第１の動作は、特に指定された動作でなくともよい。
また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作、例えば音楽再生装置から取得する音声信号をモノラルモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。
上記第１の動作及び上記第２の動作の詳細については、後述する。 The operation control unit 203 controls the operation of each of the set of sound output devices 100.
Specifically, when the synchronization determination unit 202 determines that the biometric information acquired from each of the sound output devices 100 is synchronized, the operation control unit 203 determines that each of the sound output devices 100 is Each of the sound output devices 100 is controlled to perform a first operation suitable for the case where the sound output device 100 is worn by a user, such as an operation of reproducing an audio signal obtained from a music reproduction device in stereo mode. When it is determined that the biological information acquired from each of the sound output devices 100 is synchronized, the operation control unit 203 performs the user-specified operation without performing the specified operation as the first operation. , or may continue normal operation. In other words, the first action does not have to be a particularly designated action.
Further, when the synchronization determining unit 202 determines that the biometric information acquired from each of the sound output devices 100 is not synchronized, the operation control unit 203 determines whether each of the sound output devices 100 is worn by a different user. Each of the sound output devices 100 is controlled to perform a second operation suitable for the case where the music player is playing, for example, an operation of playing back the audio signal acquired from the music playback device in monaural mode.
Details of the first operation and the second operation will be described later.

したがって、本実施の形態１に係る音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００から個別に取得した生体情報が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御する。
また、音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００から個別に取得した生体情報が同期していない場合、当該２台の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うように当該２台の音出力装置１００を制御する。 Therefore, in the case where one set of sound output devices 100 includes two sound output devices 100, the sound input/output control device 200 according to the first embodiment is configured to individually obtain biological information from the two sound output devices 100. If the information is synchronized, it is determined that the two sound output devices 100 are worn by the same user. The sound input/output control device 200 then controls the two sound output devices 100 to perform the first operation.
Furthermore, in the case where one set of sound output devices 100 consists of two sound output devices 100, the sound input/output control device 200 is configured to control the case where the biological information individually acquired from the two sound output devices 100 is not synchronized. , it is determined that the two sound output devices 100 are worn by different users. The sound input/output control device 200 then controls the two sound output devices 100 to perform the second operation.

また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、１組の音出力装置１００のうち２台の音出力装置１００から個別に取得した生体情報が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。同時に、音入出力制御装置２００は、１組の音出力装置１００のうち生体情報が同期していない他の音出力装置１００がある場合、１組の音出力装置１００のうち他の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御するとともに、上記第２の動作を行うように他の音出力装置１００を制御する。
また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、これらの音出力装置１００から個別に取得した生体情報がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。 In addition, the sound input/output control device 200 is configured such that one set of sound output devices 100 includes three or more sound output devices 100, and the sound output devices 100 are individually acquired from two sound output devices 100 among the one set of sound output devices 100. If the biometric information is synchronized, it is determined that the two sound output devices 100 are worn by the same user. At the same time, if there is another sound output device 100 out of one set of sound output devices 100 whose biological information is not synchronized, the sound input/output control device 200 controls the 100 is determined to be worn by a different user. The sound input/output control device 200 then controls the two sound output devices 100 to perform the first operation, and controls the other sound output device 100 to perform the second operation. .
Further, in the case where the sound input/output control device 200 has one set of sound output devices 100 consisting of three or more sound output devices 100, and the biological information individually acquired from these sound output devices 100 is not synchronized, , it is determined that these sound output devices 100 are all worn by different users. The sound input/output control device 200 then controls these sound output devices 100 to perform the second operation.

音入出力処理部２０４は、通信部２０５が音楽再生装置（図示省略）から受信した音声信号に所定の処理を行って、それぞれの音出力装置１００に送信する音声信号を生成する。例えば、音入出力処理部２０４は、ステレオ方式の音声信号又はモノラル方式の音声信号を生成する。そして、音入出力処理部２０４が生成した音声信号は、通信部２０５によって、それぞれの音出力装置１００に送信される。
例えば、１組の音出力装置１００が、右耳用の音出力装置１００、左耳用の音出力装置１００からなり、これらの音出力装置１００が同一のユーザに装着されている場合、第１の動作として、音入出力処理部２０４は、右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５は、音入出力処理部２０４が生成した右耳用の音声信号を右耳用の音出力装置１００に送信し、音入出力処理部２０４が生成した左耳用の音声信号を左耳用の音出力装置１００に送信する。言い換えると、第１の動作とは、ステレオ方式の音声信号の再生動作（一人モード）である。
また、１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、モノラル方式の音声信号を生成し、通信部２０５は、モノラル方式の音声信号をそれぞれの音出力装置１００に送信する。言い換えると、第２の動作とは、モノラル方式の音声信号の再生動作（二人モード）である。
１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、音入力部１０３が収音した音声信号を取得し、通信部２０５は、収音した音声信号を他の音出力装置１００に送信してもよい。言い換えると、第２の動作とは、音出力装置１００による異なるユーザ間の通信動作（トランシーバモード）であってもよい。トランシーバモードは、片方向の送受信のみであってもよく、双方向に送受信が可能であってもよい。
第２の動作とは、後述するように、音声出力の音量または音質調整などを別個に設定可能な動作モードであってもよい。 The sound input/output processing unit 204 performs predetermined processing on the audio signal received by the communication unit 205 from the music playback device (not shown), and generates an audio signal to be transmitted to each sound output device 100. For example, the sound input/output processing unit 204 generates a stereo audio signal or a monaural audio signal. Then, the audio signal generated by the sound input/output processing section 204 is transmitted to each sound output device 100 by the communication section 205.
For example, if one set of sound output devices 100 includes a sound output device 100 for the right ear and a sound output device 100 for the left ear, and these sound output devices 100 are worn by the same user, the first As an operation, the sound input/output processing section 204 generates an audio signal for the right ear and an audio signal for the left ear, and the communication section 205 generates an audio signal for the right ear generated by the sound input/output processing section 204. The signal is transmitted to the sound output device 100 for the right ear, and the audio signal for the left ear generated by the sound input/output processing unit 204 is transmitted to the sound output device 100 for the left ear. In other words, the first operation is a stereo audio signal reproduction operation (one person mode).
Furthermore, when one set of sound output devices 100 is worn by different users, as a second operation, the sound input/output processing unit 204 generates a monaural audio signal, and the communication unit 205 generates a monaural audio signal. The audio signal is transmitted to each sound output device 100. In other words, the second operation is a monaural audio signal reproduction operation (two-player mode).
When one set of sound output devices 100 is worn by different users, as a second operation, the sound input/output processing unit 204 acquires the audio signal collected by the sound input unit 103, and the communication unit 205, The collected audio signal may be transmitted to another sound output device 100. In other words, the second operation may be a communication operation (transceiver mode) between different users by the sound output device 100. The transceiver mode may be capable of transmitting and receiving only in one direction, or may be capable of transmitting and receiving in both directions.
The second operation may be an operation mode in which the volume or sound quality of the audio output can be adjusted separately, as will be described later.

通信部２０５は、音入出力制御装置２００と音出力装置１００及び音楽再生装置（図示省略）との間の通信を行う。
音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信として何れの通信を用いるのか、音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の距離に応じて切り替えられてもよい。 The communication unit 205 performs communication between the sound input/output control device 200, the sound output device 100, and the music playback device (not shown).
Communication between the sound input/output control device 200, the sound output device 100, and the music playback device uses wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, and short-range wireless communication such as NFC. etc. The type of communication used between the sound input/output control device 200, the sound output device 100, and the music playback device depends on the distance between the sound input/output control device 200, the sound output device 100, and the music playback device. It may be switched by

なお、音入出力制御装置２００は、スマートフォン等の携帯機器、ＤＡＰ、ＣＤプレーヤ等の音楽再生装置と一体であってもよい。この場合通信部２０５は、音入出力制御装置２００と音出力装置１００との通信を行う。また、音楽再生装置に音入出力制御装置２００の上記機能を実行させるアプリーケーションプログラムがインストールされてもよい。 Note that the sound input/output control device 200 may be integrated with a mobile device such as a smartphone, a music playback device such as a DAP, or a CD player. In this case, the communication unit 205 performs communication between the sound input/output control device 200 and the sound output device 100. Further, an application program that causes the music playback device to execute the above functions of the sound input/output control device 200 may be installed.

実施の形態２
図２は、本発明の実施の形態２に係る音入出力制御装置としてのヒアラブルデバイス３００の構成を模式的に示すブロック図である。実施の形態２に係るヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と音入出力制御装置２００とが一体化したものである。したがって、ヒアラブルデバイス３００に備えられる、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７の機能は、図１に示す生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４と同様である。また、ヒアラブルデバイス３００に備えられる通信部３０８の機能は、図１に示す通信部１０４の機能と通信部２０５の機能とを合わせたものと同様である。そのため、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８の機能のうち、生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５と同一の機能については、その説明を省略する。 Embodiment 2
FIG. 2 is a block diagram schematically showing the configuration of a hearable device 300 as a sound input/output control device according to Embodiment 2 of the present invention. Hearable device 300 according to Embodiment 2 is a device in which sound output device 100 according to Embodiment 1 and sound input/output control device 200 are integrated. Therefore, the functions of the biosensor 301, the sound output section 302, the sound input section 303, the biometric information acquisition section 304, the synchrony determination section 305, the operation control section 306, and the sound input/output processing section 307 included in the hearable device 300 are as follows. , are similar to the biological sensor 101, sound output section 102, sound input section 103, biological information acquisition section 201, synchrony determination section 202, operation control section 203, and sound input/output processing section 204 shown in FIG. Further, the function of the communication unit 308 provided in the hearable device 300 is the same as the function of the communication unit 104 and the function of the communication unit 205 shown in FIG. 1 combined. Therefore, among the functions of the biosensor 301, sound output section 302, sound input section 303, bioinformation acquisition section 304, synchrony determination section 305, operation control section 306, sound input/output processing section 307, and communication section 308, the biosensor 101, sound output unit 102, sound input unit 103, biological information acquisition unit 201, synchronicity determination unit 202, operation control unit 203, sound input/output processing unit 204, communication unit 104, communication unit 205, The explanation will be omitted.

また、ヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と同様に、ユーザに独立して装着され、当該ユーザに向けて音を出力する。具体的には、ヒアラブルデバイス３００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、ユーザに独立して装着される。すなわち、複数のヒアラブルデバイス３００は、互いに完全に独立して、ユーザに装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上のヒアラブルデバイス３００が１組となっていてもよい。 Further, similarly to the sound output device 100 according to the first embodiment, the hearable device 300 is worn independently by a user and outputs sound toward the user. Specifically, the hearable device 300 is a completely independent individual earphone, such as a full wireless earphone or a full wireless bone conduction earphone, and is worn independently by the user. That is, the plurality of hearable devices 300 are worn by the user completely independently of each other. Normally, full wireless earphones, full wireless bone conduction earphones, etc. are a set of two completely independent earphones. However, in the present invention, three or more hearable devices 300 may form a set.

本実施の形態２に係るヒアラブルデバイス３００は、図２に示すように、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８等を備える。なお、１組のヒアラブルデバイス３００のうち、少なくとも１つのヒアラブルデバイス３００が音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６を備えていればよく、他のヒアラブルデバイス３００は音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６を備えていなくてもよい。１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられる場合、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられたヒアラブルデバイス３００をマスター装置とし、他のヒアラブルデバイス３００をスレーブ装置としてもよい。 As shown in FIG. 2, the hearable device 300 according to the second embodiment includes a biological sensor 301, a sound output section 302, a sound input section 303, a biological information acquisition section 304, a synchrony determination section 305, and an operation control section 306. , a sound input/output processing section 307, a communication section 308, and the like. Note that it is only necessary that at least one hearable device 300 out of one set of hearable devices 300 is provided with a sound input section 303, a biological information acquisition section 304, a synchrony determination section 305, and an operation control section 306; The hearable device 300 does not need to include the sound input section 303, the biological information acquisition section 304, the synchrony determination section 305, and the operation control section 306. If only one hearable device 300 of a set of hearable devices 300 is provided with a sound input section 303, a biological information acquisition section 304, a synchrony determination section 305, and an operation control section 306, the sound input section 303, The hearable device 300 provided with the biological information acquisition section 304, the synchronicity determination section 305, and the operation control section 306 may be used as a master device, and the other hearable devices 300 may be used as slave devices.

生体センサ３０１が検出した生体信号は、生体情報取得部３０４に入力される。また、生体センサ３０１が検出した生体信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信される。 The biological signal detected by the biological sensor 301 is input to the biological information acquisition unit 304. Further, the biosignal detected by the biosensor 301 is transmitted to another hearable device 300 by the communication unit 308.

音出力部３０２は、音楽再生装置としての携帯機器４００から通信部３０８が受信した音声信号に従って、ユーザに向けて音を出力する。
また、音出力部３０２は、他のヒアラブルデバイス３００から通信部３０８が受信した音声信号に従って、ユーザに向けて音を出力する。 The sound output unit 302 outputs sound to the user according to the audio signal received by the communication unit 308 from the mobile device 400 as a music playback device.
Further, the sound output unit 302 outputs sound to the user according to the audio signal received by the communication unit 308 from another hearable device 300.

音入力部３０３が取得した音声信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信される。
なお、１組のヒアラブルデバイス３００の全てに、音入力部３０３が備えられる場合、音入力部３０３が上記反響音信号を取得してもよい。そして、音入力部３０３が取得した反響音信号は、生体情報取得部３０４に入力される。また、音入力部３０３が取得した反響音信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信されてもよい。この場合、生体情報取得部３０４は、当該反響音信号からユーザの個人認証情報を生成し、生体情報として取得してもよい。 The audio signal acquired by the sound input unit 303 is transmitted to another hearable device 300 by the communication unit 308.
Note that when all of the set of hearable devices 300 are equipped with the sound input section 303, the sound input section 303 may acquire the echo sound signal. The echo sound signal acquired by the sound input section 303 is input to the biological information acquisition section 304. Further, the echo sound signal acquired by the sound input unit 303 may be transmitted to another hearable device 300 by the communication unit 308. In this case, the biometric information acquisition unit 304 may generate the user's personal authentication information from the echo sound signal and acquire it as biometric information.

生体情報取得部３０４は、１組のヒアラブルデバイス３００のそれぞれから、生体センサ３０１によって検出される当該ユーザの生体信号を生体情報として個別に取得する。
例えば、１組のヒアラブルデバイス３００の全てに生体情報取得部３０４が備えられる場合、生体情報取得部３０４は、当該生体情報取得部３０４が備えられるヒアラブルデバイス３００の生体センサ３０１が検出した生体信号を生体情報として取得するとともに、通信部３０８が受信した他のヒアラブルデバイス３００の生体センサ３０１が検出した生体信号も生体情報として取得する。
また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４が備えられる場合、当該生体情報取得部３０４は、当該生体情報取得部３０４が備えられるヒアラブルデバイス３００の生体センサ３０１が検出した生体信号を生体情報として取得するとともに、通信部３０８が受信した他のヒアラブルデバイス３００の生体センサ３０１が検出した生体信号も生体情報として取得する。
生体情報取得部３０４が取得する生体情報は、例えば、ユーザの脈拍、血圧、呼吸、体温等に関する情報である。また、生体情報取得部３０４は、生体センサ３０１が検出した反響音信号、及び、通信部３０８が受信した他のヒアラブルデバイス３００の反響音信号からユーザの個人認証情報を生成し、当該個人認証情報を生体情報として取得してもよい。 The biological information acquisition unit 304 individually acquires the user's biological signals detected by the biological sensor 301 from each of the pair of hearable devices 300 as biological information.
For example, when all of a set of hearable devices 300 are equipped with the biometric information acquisition unit 304, the biometric information acquisition unit 304 collects the biological information detected by the biosensor 301 of the hearable device 300 equipped with the biometric information acquisition unit 304. While acquiring the signal as biometric information, the biosignal detected by the biosensor 301 of another hearable device 300 received by the communication unit 308 is also acquired as biometric information.
Furthermore, when only one hearable device 300 of a set of hearable devices 300 is provided with the biometric information acquisition unit 304, the biometric information acquisition unit 304 is The biological signal detected by the biological sensor 301 of the device 300 is acquired as biological information, and the biological signal detected by the biological sensor 301 of another hearable device 300 received by the communication unit 308 is also acquired as biological information.
The biological information acquired by the biological information acquisition unit 304 is, for example, information regarding the user's pulse, blood pressure, respiration, body temperature, and the like. Furthermore, the biometric information acquisition unit 304 generates the user's personal authentication information from the echo sound signal detected by the biosensor 301 and the echo sound signal of another hearable device 300 received by the communication unit 308, and The information may be acquired as biometric information.

同期性判定部３０５は、生体情報取得部３０４によって１組のヒアラブルデバイス３００のそれぞれから取得された生体情報が同期しているか否かを判定する。１組のヒアラブルデバイス３００の全てにおいて、それぞれ、同期性判定部３０５による同期判定が行われてもよい。また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４、同期性判定部３０５が備えられる場合、他のヒアラブルデバイス３００から生体信号が当該１台のヒアラブルデバイス３００に送信されて、当該１台のヒアラブルデバイス３００の同期性判定部３０５による同期判定が行われてもよい。 The synchronicity determination unit 305 determines whether the biometric information acquired from each of the pair of hearable devices 300 by the biometric information acquisition unit 304 is synchronized. The synchronization determination unit 305 may perform the synchronization determination for each of the hearable devices 300 in the set. Furthermore, if only one hearable device 300 of a set of hearable devices 300 is equipped with the biometric information acquisition unit 304 and the synchrony determination unit 305, the biosignal from the other hearable devices 300 may be transmitted to the one hearable device 300. may be transmitted to one hearable device 300, and the synchronization determination unit 305 of the one hearable device 300 may perform a synchronization determination.

動作制御部３０６は、ヒアラブルデバイス３００の動作を制御する。
１組のヒアラブルデバイス３００の全てにおいて、それぞれ、動作制御部３０６による動作制御が行われてもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の生体情報と他方のヒアラブルデバイス３００の生体情報とが同期している場合、当該２台のヒアラブルデバイス３００の動作制御部３０６は、上記第１の動作を行うように当該ヒアラブルデバイス３００を制御する。また、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００のそれぞれの動作制御部３０６は、上記第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００の全てにおいて、一のヒアラブルデバイス３００の生体情報と他のヒアラブルデバイス３００の生体情報とが同期していない場合、それぞれのヒアラブルデバイス３００の動作制御部３０６は、第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられる場合、当該１台のヒアラブルデバイス３００の動作制御部３０６が、他のヒアラブルデバイス３００の動作を制御してもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の生体情報と他方のヒアラブルデバイス３００の生体情報とが同期している場合、動作制御部３０６は、上記第１の動作を行うように当該２台のヒアラブルデバイス３００を制御する。また、動作制御部３０６は、上記第２の動作を行うように、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００の全てにおいて、一のヒアラブルデバイス３００の生体情報と他のヒアラブルデバイス３００の生体情報とが同期していない場合、動作制御部３０６は、第２の動作を行うようにそれぞれのヒアラブルデバイス３００を制御する。
ここで、第１の動作、及び第２の動作とは、実施の形態１と同等の動作である。 The operation control unit 306 controls the operation of the hearable device 300.
The operation control unit 306 may control the operation of each of the hearable devices 300 in the set. For example, in two hearable devices 300 among a set of hearable devices 300, if the biometric information of one hearable device 300 and the biometric information of the other hearable device 300 are synchronized, the two The operation control unit 306 of the hearable device 300 controls the hearable device 300 to perform the first operation. Further, the operation control unit 306 of each of the hearable devices 300 other than the above-mentioned two of the set of hearable devices 300 controls the hearable device 300 to perform the above-mentioned second operation.
Furthermore, in all of a set of hearable devices 300, if the biometric information of one hearable device 300 and the biometric information of another hearable device 300 are not synchronized, the operation control unit of each hearable device 300 306 controls the hearable device 300 to perform the second operation.
Furthermore, in a case where only one hearable device 300 among a set of hearable devices 300 is provided with the biological information acquisition section 304, the synchrony determination section 305, and the operation control section 306, the one hearable device 300 The operation control unit 306 may control the operation of other hearable devices 300. For example, in two hearable devices 300 among a set of hearable devices 300, if the biometric information of one hearable device 300 and the biometric information of the other hearable device 300 are synchronized, the operation control The unit 306 controls the two hearable devices 300 to perform the first operation. Further, the operation control unit 306 controls the hearable devices 300 other than the two devices in the set of hearable devices 300 to perform the second operation.
Further, in all of a set of hearable devices 300, if the biometric information of one hearable device 300 and the biometric information of another hearable device 300 are not synchronized, the operation control unit 306 controls the second operation. Each hearable device 300 is controlled to perform the following steps.
Here, the first operation and the second operation are operations equivalent to those in the first embodiment.

音入出力処理部３０７は、通信部３０８が音楽再生装置としての携帯機器４００から受信した音声信号に所定の処理を行って、音出力部３０２に入力する音声信号を生成する。
例えば、１組のヒアラブルデバイス３００が、右耳用のヒアラブルデバイス３００、左耳用のヒアラブルデバイス３００からなり、これらのヒアラブルデバイス３００が同一のユーザに装着されている場合、右耳用のヒアラブルデバイス３００の音入出力処理部３０７は右耳用の音声信号を生成し、左耳用のヒアラブルデバイス３００の音入出力処理部３０７は左耳用の音声信号を生成する。
また、１組のヒアラブルデバイス３００が異なるユーザに装着されている場合、それぞれのヒアラブルデバイス３００の音入出力処理部３０７は、モノラル方式の音声信号を生成する。 The sound input/output processing unit 307 performs predetermined processing on the audio signal received by the communication unit 308 from the mobile device 400 serving as a music playback device, and generates an audio signal to be input to the sound output unit 302.
For example, if one set of hearable devices 300 includes a hearable device 300 for the right ear and a hearable device 300 for the left ear, and these hearable devices 300 are worn by the same user, the hearable device 300 for the right ear The sound input/output processing section 307 of the hearable device 300 for the left ear generates an audio signal for the right ear, and the sound input/output processing section 307 of the hearable device 300 for the left ear generates an audio signal for the left ear.
Further, when a set of hearable devices 300 are worn by different users, the sound input/output processing unit 307 of each hearable device 300 generates a monaural audio signal.

通信部３０８は、当該通信部３０８が備えられるヒアラブルデバイス３００と他のヒアラブルデバイス３００との間の通信を行う。また、通信部３０８は、当該通信部３０８が備えられるヒアラブルデバイス３００と音楽再生装置としての携帯機器４００との間の通信を行う。
ヒアラブルデバイス３００間の通信は、近接場磁気誘導通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００間の距離に応じて切り替えられてもよい。
ヒアラブルデバイス３００と携帯機器４００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００と携帯機器４００との間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００と携帯機器４００との間の距離に応じて切り替えられてもよい。 The communication unit 308 performs communication between the hearable device 300 provided with the communication unit 308 and other hearable devices 300 . Further, the communication unit 308 performs communication between the hearable device 300 provided with the communication unit 308 and the mobile device 400 as a music playback device.
Communication between the hearable devices 300 includes near-field magnetic induction communication, wireless LAN such as Bluetooth (registered trademark) and Wi-Fi (registered trademark), infrared communication, and short-range wireless communication such as NFC. Which communication is used for communication between the hearable devices 300 may be switched depending on the distance between the hearable devices 300.
Communication between the hearable device 300 and the mobile device 400 is via wireless LAN such as Bluetooth (registered trademark) or Wi-Fi (registered trademark), infrared communication, or short-range wireless communication such as NFC. The type of communication used between the hearable device 300 and the mobile device 400 may be switched depending on the distance between the hearable device 300 and the mobile device 400.

なお、音楽再生装置は、上記に挙げたスマートフォン等の携帯機器４００だけでなく、ＤＡＰ、ＣＤプレーヤ等であってもよい。また、ヒアラブルデバイス３００は、音楽再生装置と一体であってもよい。 Note that the music playback device is not limited to the above-mentioned mobile device 400 such as a smartphone, but may also be a DAP, a CD player, or the like. Further, the hearable device 300 may be integrated with a music playback device.

次に、図３乃至図６を参照しながら、本発明の実施の形態１又は２に係る音入出力制御方法の例について説明する。なお、以下の説明では、１組の音出力装置１００又は１組のヒアラブルデバイス３００が２台の音出力装置１００又は２台のヒアラブルデバイス３００からなり、一方の音出力装置１００又はヒアラブルデバイス３００がマスター装置となり、他方の音出力装置１００又はヒアラブルデバイス３００がスレーブ装置となる場合を例に挙げて説明する。
また、以下の説明では、実施の形態１に係る音入出力制御装置２００における処理フローを例に挙げて説明する。実施の形態２に係るヒアラブルデバイス３００における処理フローの説明は、生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５による処理を、それぞれ、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８による処理に読み換えれば同様となるため、その説明を省略する。 Next, an example of the sound input/output control method according to Embodiment 1 or 2 of the present invention will be described with reference to FIGS. 3 to 6. Note that in the following description, one set of sound output devices 100 or one set of hearable devices 300 is composed of two sound output devices 100 or two hearable devices 300, and one of the sound output devices 100 or hearable devices 300 is An example will be described in which the device 300 becomes a master device and the other sound output device 100 or hearable device 300 becomes a slave device.
Further, in the following description, the processing flow in the sound input/output control device 200 according to the first embodiment will be described as an example. The description of the processing flow in the hearable device 300 according to the second embodiment includes the biosensor 101, the sound output unit 102, the sound input unit 103, the biological information acquisition unit 201, the synchronicity determination unit 202, the operation control unit 203, the sound input unit The processing by the output processing unit 204, the communication unit 104, and the communication unit 205 is performed by the biological sensor 301, the sound output unit 302, the sound input unit 303, the biological information acquisition unit 304, the synchronicity determination unit 305, the operation control unit 306, and the sound Since the process is the same as that of the input/output processing unit 307 and the communication unit 308, the explanation thereof will be omitted.

最初に、図３に示す音入出力制御方法の例について説明する。
まず、生体情報取得部２０１は、１組の音出力装置１００のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する（ステップＳ１０１）。すなわち、生体情報取得部２０１は、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから、生体情報を個別に取得する。 First, an example of the sound input/output control method shown in FIG. 3 will be described.
First, the biological information acquisition unit 201 acquires biological signals of the user detected by each of the set of sound output devices 100 as biological information (step S101). That is, the biological information acquisition unit 201 individually acquires biological information from each of the sound output device 100 for the right ear and the sound output device 100 for the left ear.

次に、同期性判定部２０２は、生体情報取得部２０１によって、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期しているか否かを判定する（ステップＳ１０２）。 Next, the synchronization determining unit 202 determines whether the biological information acquired by the biological information acquiring unit 201 from the sound output device 100 for the right ear and the sound output device 100 for the left ear is synchronized. Determination is made (step S102).

ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期している場合（ステップＳ１０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を一人モード（第１の動作）で動作するように制御する（ステップＳ１０３）。 In step S102, if the biological information acquired from the sound output device 100 for the right ear and the sound output device 100 for the left ear are synchronized (step S102; Yes), the operation control unit 203 The left ear sound output device 100 and the left ear sound output device 100 are controlled to operate in a single person mode (first operation) (step S103).

そして、右耳用の音出力装置１００と左耳用の音出力装置１００において通常動作が行われる（ステップＳ１０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。 Then, normal operation is performed in the sound output device 100 for the right ear and the sound output device 100 for the left ear (step S104). Specifically, the sound input/output processing unit 204 generates an audio signal for the right ear and an audio signal for the left ear, and the communication unit 205 transmits the audio signal for the right ear to the sound output device 100 for the right ear. Then, the audio signal for the left ear is transmitted to the sound output device 100 for the left ear. Then, the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the audio signal for the right ear, and the sound output unit 102 of the sound output device 100 for the left ear outputs sound to the user according to the audio signal for the right ear. The device outputs sound to the user according to the audio signal for the device.

ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期していない場合（ステップＳ１０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を二人モード（第２の動作）で動作するように制御する（ステップＳ１０５）。 In step S102, if the biological information acquired from the sound output device 100 for the right ear and the sound output device 100 for the left ear are not synchronized (step S102; No), the operation control unit 203 The left ear sound output device 100 and the left ear sound output device 100 are controlled to operate in a two-person mode (second operation) (step S105).

そして、右耳用の音出力装置１００と左耳用の音出力装置１００においてモノラル方式で音楽の再生が行われる（ステップＳ１０６）。具体的には、音入出力処理部２０４がモノラル方式の音声信号を生成し、通信部２０５が当該モノラル方式の音声信号を右耳用の音出力装置１００と左耳用の音出力装置１００とに送信する。そして、右耳用の音出力装置１００音出力部１０２と左耳用の音出力装置１００の音出力部１０２とが、それぞれ、当該モノラル方式の音声信号に従ってユーザに向けて音を出力する。 Then, music is played back in monaural mode in the sound output device 100 for the right ear and the sound output device 100 for the left ear (step S106). Specifically, the sound input/output processing unit 204 generates a monaural audio signal, and the communication unit 205 transmits the monaural audio signal to the sound output device 100 for the right ear and the sound output device 100 for the left ear. Send to. Then, the sound output unit 102 of the sound output device 100 for the right ear and the sound output unit 102 of the sound output device 100 for the left ear each output sound to the user according to the monaural audio signal.

次に、図４に示す音入出力制御方法の例について説明する。図４に示す音入出力制御方法において、ステップＳ２０１、ステップＳ２０２、ステップＳ２０４の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０４の処理と同様であるため、その説明を省略する。 Next, an example of the sound input/output control method shown in FIG. 4 will be described. In the sound input/output control method shown in FIG. 4, the processes in step S201, step S202, and step S204 are the same as the processes in step S101, step S102, and step S104 in the sound input/output control method shown in FIG. 3, respectively. , the explanation thereof will be omitted.

ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期している場合（ステップＳ２０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を音声出力モード（第１の動作）で動作するように制御する（ステップＳ２０３）。 In step S202, if the biological information acquired from the sound output device 100 for the right ear and the sound output device 100 for the left ear are synchronized (step S202; Yes), the operation control unit 203 controls the sound output device 100 for the right ear. The left ear sound output device 100 and the left ear sound output device 100 are controlled to operate in the audio output mode (first operation) (step S203).

ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期していない場合（ステップＳ２０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００をトランシーバモード（第２の動作）で動作するように制御する（ステップＳ２０５）。 In step S202, if the biological information acquired from the sound output device 100 for the right ear and the sound output device 100 for the left ear are not synchronized (step S202; No), the operation control unit 203 The left ear sound output device 100 and the left ear sound output device 100 are controlled to operate in transceiver mode (second operation) (step S205).

そして、一方の音出力装置１００のマイク（音入力部）１０３で収音したユーザの音声信号が他方の音出力装置１００へ送信され、他方の音出力装置１００が当該音声信号を受信し、他方の音出力装置１００の音出力部１０２は、当該音声信号に従って、ユーザに音を出力する（ステップＳ２０６）。例えば、右耳用の音出力装置１００を装着したユーザの音声が当該右耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、左耳用の音出力装置１００へ送信される。そして、左耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該左耳用の音出力装置１００を装着したユーザに音を出力する。反対に、左耳用の音出力装置１００を装着したユーザの音声が当該左耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、右耳用の音出力装置１００へ送信される。そして、右耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該右耳用の音出力装置１００を装着したユーザに音を出力する。これにより、右耳用の音出力装置１００と左耳用の音出力装置１００とが異なるユーザに装着された場合に、右耳用の音出力装置１００と左耳用の音出力装置１００とをトランシーバとして用いることができる。 Then, the user's voice signal collected by the microphone (sound input unit) 103 of one sound output device 100 is transmitted to the other sound output device 100, the other sound output device 100 receives the voice signal, and the other sound output device 100 receives the voice signal, and The sound output unit 102 of the sound output device 100 outputs sound to the user according to the audio signal (step S206). For example, the voice of a user wearing the sound output device 100 for the right ear is collected by the microphone (sound input section) 103 of the sound output device 100 for the right ear, and is transmitted to the sound output device 100 for the left ear. Ru. Then, the sound output unit 102 of the sound output device 100 for the left ear outputs sound to the user wearing the sound output device 100 for the left ear according to the audio signal. On the other hand, the voice of the user wearing the sound output device 100 for the left ear is collected by the microphone (sound input section) 103 of the sound output device 100 for the left ear, and is transmitted to the sound output device 100 for the right ear. be done. Then, the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user wearing the sound output device 100 for the right ear according to the audio signal. As a result, when the sound output device 100 for the right ear and the sound output device 100 for the left ear are worn by different users, the sound output device 100 for the right ear and the sound output device 100 for the left ear can be It can be used as a transceiver.

なお、上記トランシーバモードにおいて、動作制御部２０３は、音出力部１０２による音声信号に基づく音の出力を停止させるように、又は、音声信号に基づく音の出力の音量を低下させるように音出力装置１００を制御してもよい。また、上記トランシーバモードにおいて、動作制御部２０３は、右耳用の音出力装置１００又は左耳用の音出力装置１００の何れか一方における音入力部１０３による収音を停止させるように音出力装置１００を制御してもよい。 In the transceiver mode, the operation control unit 203 controls the sound output device to stop the sound output unit 102 from outputting sound based on the audio signal, or to reduce the volume of sound output based on the audio signal. 100 may be controlled. Furthermore, in the transceiver mode, the operation control unit 203 controls the sound output device to stop the sound collection by the sound input unit 103 in either the right ear sound output device 100 or the left ear sound output device 100. 100 may be controlled.

次に、図５に示す音入出力制御方法の例について説明する。図５に示す音入出力制御方法において、ステップＳ３０１、ステップＳ３０２、ステップＳ３０３、ステップＳ３０５の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０３、ステップＳ１０５の処理と同様であるため、その説明を省略する。 Next, an example of the sound input/output control method shown in FIG. 5 will be described. In the sound input/output control method shown in FIG. 5, the processes in step S301, step S302, step S303, and step S305 are the same as those in step S101, step S102, step S103, and step S105 in the sound input/output control method shown in FIG. Since the process is the same as that of the process, the explanation thereof will be omitted.

ステップＳ３０３において、右耳用及び左耳用の音出力装置１００が一人モード（第１の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質等の同時調整（通常動作）が行われる（ステップＳ３０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を実質的に同じ音量や音質となるように同時に調整する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。 In step S303, after the sound output device 100 for the right ear and the sound output device 100 for the left ear are controlled to operate in the one-person mode (first operation), the sound output device 100 for the right ear and the sound output device 100 for the left ear are output. Simultaneous adjustment (normal operation) of volume, sound quality, etc. is performed in the device 100 (step S304). Specifically, the sound input/output processing unit 204 generates an audio signal for the right ear and an audio signal for the left ear, and the communication unit 205 transmits the audio signal for the right ear to the sound output device 100 for the right ear. Then, the audio signal for the left ear is transmitted to the sound output device 100 for the left ear. Further, the operation control unit 203 simultaneously adjusts, for example, the volume and sound quality of sounds output by the sound output units 102 in the sound output devices 100 for right and left ears so that the volume and sound quality are substantially the same. . Then, the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the audio signal for the right ear, and the sound output unit 102 of the sound output device 100 for the left ear outputs sound to the user according to the audio signal for the right ear. The device outputs sound to the user according to the audio signal for the device.

ステップＳ３０５において、右耳用及び左耳用の音出力装置１００が二人モード（第２の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質の個別調整が行われる（ステップＳ３０６）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を個別に調整可能とする。例えば、音入出力制御装置２００又は音楽再生装置が、自身の表示部（図示省略）に、右耳用の音量や音質を調整するための設定画面と左耳用の音量や音質を調整するための設定画面を別々に表示する。これにより、右耳用の音出力装置１００を装着したユーザ及び左耳用の音出力装置１００を装着したユーザがそれぞれの設定画面を操作することにより、右耳用の音出力装置１００と左耳用の音出力装置１００の音量や音質をそれぞれのユーザごとに好みのものに設定できる。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。 In step S305, after the sound output device 100 for the right ear and the sound output device 100 for the left ear are controlled to operate in the two-person mode (second operation), the sound output device 100 for the right ear and the sound output device 100 for the left ear are controlled to operate in the two-person mode (second operation). The volume and sound quality are individually adjusted in the output device 100 (step S306). Specifically, the sound input/output processing unit 204 generates an audio signal for the right ear and an audio signal for the left ear, and the communication unit 205 transmits the audio signal for the right ear to the sound output device 100 for the right ear. Then, the audio signal for the left ear is transmitted to the sound output device 100 for the left ear. Further, the operation control unit 203 can individually adjust the volume and sound quality of the sound output by the sound output unit 102 in the sound output device 100 for the right ear and for the left ear, for example. For example, the sound input/output control device 200 or the music playback device displays a setting screen for adjusting the volume and sound quality for the right ear and a setting screen for adjusting the volume and sound quality for the left ear on its own display unit (not shown). Display the settings screen separately. As a result, by operating the respective setting screens, a user wearing the sound output device 100 for the right ear and a user wearing the sound output device 100 for the left ear can select the sound output device 100 for the right ear and the user wearing the sound output device 100 for the left ear. Each user can set the volume and sound quality of the sound output device 100 to their preference. Then, the sound output unit 102 of the sound output device 100 for the right ear outputs sound to the user according to the audio signal for the right ear, and the sound output unit 102 of the sound output device 100 for the left ear outputs sound to the user according to the audio signal for the right ear. The device outputs sound to the user according to the audio signal for the device.

次に、図６に示す音入出力制御方法の例について説明する。図６に示す音入出力制御方法において、ステップＳ４０１の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１の処理と同様であるため、その説明を省略する。 Next, an example of the sound input/output control method shown in FIG. 6 will be described. In the sound input/output control method shown in FIG. 6, the process in step S401 is the same as the process in step S101 in the sound input/output control method shown in FIG. 3, so the description thereof will be omitted.

同期性判定部２０２は、ステップＳ１０２又はＳ２０２又はＳ３０２における同期性判定を行う前に、生体情報取得部２０１によって、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されたか否かを判定する（ステップＳ４０２）。 Before performing the synchronization determination in step S102, S202, or S302, the synchrony determination unit 202 uses the biological information acquisition unit 201 to detect the biological information from both the right ear sound output device 100 and the left ear sound output device 100. It is determined whether information has been acquired (step S402).

ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されている場合（ステップＳ４０２；Ｙｅｓ）、ステップＳ１０２又はＳ２０２又はＳ３０２の処理へ進む（ステップＳ４０３）。 In step S402, if biological information has been acquired from both the sound output device 100 for the right ear and the sound output device 100 for the left ear (step S402; Yes), the process advances to step S102, S202, or S302 ( Step S403).

ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されていない場合（ステップＳ４０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を一人モードで動作するように制御する（ステップＳ４０４）。そして、ステップＳ１０４又はＳ２０４又はＳ３０４の処理へ進む（ステップＳ４０５）。 In step S402, if biological information is not acquired from both the sound output device 100 for the right ear and the sound output device 100 for the left ear (step S402; No), the operation control unit 203 controls the sound output device 100 for the right ear. The output device 100 and the left ear sound output device 100 are controlled to operate in the one-person mode (step S404). Then, the process advances to step S104, S204, or S304 (step S405).

以上に説明した、実施の形態１に係る音入出力制御装置２００によれば、同期性判定部２０２が、生体情報取得部２０１によって音出力装置１００のそれぞれから取得された生体情報が同期しているか否かが判定する。また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作を行うように音出力装置１００のそれぞれを制御する。また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作を行うように音出力装置１００のそれぞれを制御する。
また、音入出力制御装置２００は、１組の音出力装置１００から個別に取得した生体情報がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。
そのため、ユーザの耳に独立して装着される複数の音出力装置１００に、ステレオ方式の音を出力する等の通常の動作である第１の動作以外の、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作も付与することができる。よって、音出力装置１００により広い用途を付与することができる。
実施の形態２に係るヒアラブルデバイス３００も同様である。 According to the sound input/output control device 200 according to the first embodiment described above, the synchronicity determination section 202 determines whether the biological information acquired from each of the sound output devices 100 by the biological information acquisition section 201 is synchronized. It is determined whether or not there is. Further, when the synchronicity determining unit 202 determines that the biological information acquired from each of the sound output devices 100 is synchronized, the operation control unit 203 determines that each of the sound output devices 100 is attached to the same user. Each of the sound output devices 100 is controlled to perform a first operation suitable for the case where the sound output device 100 is Further, when the synchronization determining unit 202 determines that the biometric information acquired from each of the sound output devices 100 is not synchronized, the operation control unit 203 determines whether each of the sound output devices 100 is worn by a different user. Each of the sound output devices 100 is controlled to perform a second operation suitable for the case where the sound output device 100 is
Furthermore, if the biological information individually acquired from one set of sound output devices 100 is not synchronized, the sound input/output control device 200 determines that these sound output devices 100 are worn by different users. to decide. The sound input/output control device 200 then controls these sound output devices 100 to perform the second operation.
Therefore, each of the sound output devices 100 is used by a different user, except for the first operation, which is a normal operation such as outputting stereo sound, to the plurality of sound output devices 100 that are independently attached to the user's ears. A second operation suitable for the case where the device is attached to the device can also be provided. Therefore, the sound output device 100 can be given a wider range of uses.
The same applies to the hearable device 300 according to the second embodiment.

上述の実施の形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、図３乃至６のフローチャートに記載の処理手順を、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）にコンピュータプログラムを実行させることにより実現することも可能である。 In the embodiments described above, the present invention has been described as a hardware configuration, but the present invention is not limited to this. The present invention can also be implemented by causing a CPU (Central Processing Unit) to execute a computer program by executing the processing procedures shown in the flowcharts of FIGS. 3 to 6.

また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ－ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ ｓｔｏｒａｇｅ ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。 Additionally, the programs described above can be stored and provided to a computer using various types of non-transitory computer readable media. Non-transitory computer-readable media include various types of tangible storage media. Examples of non-transitory computer-readable media include magnetic recording media (e.g., flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (e.g., magneto-optical disks), CD-ROMs (Read Only Memory) CD-Rs, CDs. - R/W, semiconductor memory (eg, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)). The program may also be provided to the computer on various types of transitory computer readable media. Examples of transitory computer-readable media include electrical signals, optical signals, and electromagnetic waves. The temporary computer-readable medium can provide the program to the computer via wired communication channels, such as electrical wires and fiber optics, or wireless communication channels.

なお、本発明は上述した実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。 Note that the present invention is not limited to the embodiments described above, and can be modified as appropriate without departing from the spirit.

１００ 音出力装置
２００ 音入出力制御装置
３００ ヒアラブルデバイス（音入出力制御装置）
１０１、３０１ 生体センサ
１０２、３０２ 音出力部
１０３、３０３ 音入力部
１０４、３０８ 通信部
２０１、３０４ 生体情報取得部
２０２、３０５ 同期性判定部
２０３、３０６ 動作制御部
２０４、３０７ 音入出力処理部
２０５、３０８ 通信部
４００ 携帯機器（音楽再生装置） 100 Sound output device 200 Sound input/output control device 300 Hearable device (sound input/output control device)
101, 301 Biosensor 102, 302 Sound output section 103, 303 Sound input section 104, 308 Communication section 201, 304 Biometric information acquisition section 202, 305 Synchrony determination section 203, 306 Operation control section 204, 307 Sound input/output processing section 205, 308 Communication Department 400 Mobile device (music playback device)

Claims (9)

ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、
前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する生体情報取得部と、
前記生体情報取得部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期しているか否かを判定する同期性判定部と、
前記音出力装置のそれぞれの動作を制御する動作制御部と、
を備え、
前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、
前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御装置。 A sound input/output control device that is independently attached to a user and controls a plurality of sound output devices that output sound toward the user,
a biological information acquisition unit that acquires biological signals of the user detected by each of the sound output devices as biological information;
a synchronization determination unit that determines whether the biological information acquired from at least two of the sound output devices by the biological information acquisition unit is synchronized;
an operation control unit that controls the operation of each of the sound output devices;
Equipped with
When the synchronization determining unit determines that the biological information acquired from at least two of the sound output devices is synchronized, the operation control unit controls the sound output device to perform a first operation. control each of the output devices,
When the synchronization determination unit determines that the biological information acquired from at least two of the sound output devices is not synchronized, the operation control unit controls the sound output device to perform a second operation. A sound input/output control device that controls each output device. 前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれにモノラル方式の音を出力させる、請求項１に記載の音入出力制御装置。 When the synchronization determination unit determines that the biological information acquired from at least two of the sound output devices is not synchronized, the operation control unit provides monaural information to each of the sound output devices. The sound input/output control device according to claim 1, which outputs sound. 前記音出力装置の少なくとも１つは、当該音出力装置が装着されたユーザの音声を収音する音入力部を備え、
前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、一の前記音出力装置から前記音入力部によって収音された音声を、他の前記音出力装置に出力させる、請求項１に記載の音入出力制御装置。 At least one of the sound output devices includes a sound input unit that picks up the voice of a user wearing the sound output device,
When the synchronization determination unit determines that the biometric information acquired from at least two of the sound output devices is not synchronized, the operation control unit controls the sound input from one of the sound output devices. The sound input/output control device according to claim 1, wherein the sound input/output control device outputs the sound picked up by the unit to the other sound output device. 前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれの音量を個別に調整可能とする、請求項１乃至３の何れか一項に記載の音入出力制御装置。 When the synchronization determination unit determines that the biological information acquired from at least two of the sound output devices is not synchronized, the operation control unit individually adjusts the volume of each of the sound output devices. The sound input/output control device according to any one of claims 1 to 3, wherein the sound input/output control device is adjustable. 前記生体情報取得部が取得する前記生体情報は、前記音出力装置が装着されたユーザの脈拍、血圧、呼吸、体温の少なくとも１つに関する情報である、請求項１乃至４の何れか一項に記載の音入出力制御装置。 5. The biological information acquired by the biological information acquisition unit is information regarding at least one of pulse, blood pressure, respiration, and body temperature of the user wearing the sound output device. The described sound input/output control device. 前記生体情報取得部が取得する前記生体情報は、前記音出力装置が装着されたユーザの耳の穴の中の音の反響性、又は、前記音出力装置が装着されたユーザの声紋に関する情報である、請求項１乃至４の何れか一項に記載の音入出力制御装置。 The biometric information acquired by the biometric information acquisition unit is information regarding the reverberation of sound in the ear canal of the user to whom the sound output device is attached, or information regarding the voiceprint of the user to whom the sound output device is attached. A sound input/output control device according to any one of claims 1 to 4. 前記音出力装置と一体的に構成される、請求項１乃至６の何れか一項に記載の音入出力制御装置。 The sound input/output control device according to any one of claims 1 to 6, configured integrally with the sound output device. ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、
前記音入出力制御装置が、
前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得し、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定し、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御方法。 A sound input/output control method in which a sound input/output control device controls a plurality of sound output devices that are independently worn by a user and output sound toward the user, the method comprising:
The sound input/output control device includes:
acquiring biosignals of the user detected by each of the sound output devices as biometric information;
determining whether the biological information acquired from at least two of the sound output devices is synchronized;
controlling each of the sound output devices to perform a first operation when it is determined that the biological information acquired from at least two of the sound output devices is synchronized;
A sound input/output control method that controls each of the sound output devices to perform a second operation when it is determined that the biological information acquired from at least two of the sound output devices is not synchronized. 音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、
前記音入出力制御装置に、
前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する処理と、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定する処理と、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるプログラム。 A program that causes a sound input/output control device to execute processing for controlling a plurality of sound output devices that are independently attached to a user and output sound to the user, the program comprising:
The sound input/output control device,
A process of acquiring biological signals of the user detected by each of the sound output devices as biological information;
a process of determining whether the biological information acquired from at least two of the sound output devices is synchronized;
controlling each of the sound output devices to perform a first operation when it is determined that the biological information acquired from at least two of the sound output devices is synchronized;
A program that executes a process of controlling each of the sound output devices to perform a second operation when it is determined that the biological information acquired from at least two of the sound output devices is not synchronized. .
JP2020052623A 2020-03-24 2020-03-24 Sound input/output control device, sound input/output control method, and program Active JP7375644B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2020052623A JP7375644B2 (en) 2020-03-24 2020-03-24 Sound input/output control device, sound input/output control method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020052623A JP7375644B2 (en) 2020-03-24 2020-03-24 Sound input/output control device, sound input/output control method, and program

Publications (2)

Publication Number Publication Date
JP2021153245A JP2021153245A (en) 2021-09-30
JP7375644B2 true JP7375644B2 (en) 2023-11-08

Family

ID=77886751

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020052623A Active JP7375644B2 (en) 2020-03-24 2020-03-24 Sound input/output control device, sound input/output control method, and program

Country Status (1)

Country Link
JP (1) JP7375644B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005156641A (en) 2003-11-20 2005-06-16 Sony Corp Playback mode control device and method
JP2015211227A (en) 2014-04-23 2015-11-24 京セラ株式会社 Reproduction device and reproduction method
JP2017126873A (en) 2016-01-14 2017-07-20 ヤマハ株式会社 Stereo earphone device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005156641A (en) 2003-11-20 2005-06-16 Sony Corp Playback mode control device and method
JP2015211227A (en) 2014-04-23 2015-11-24 京セラ株式会社 Reproduction device and reproduction method
JP2017126873A (en) 2016-01-14 2017-07-20 ヤマハ株式会社 Stereo earphone device

Also Published As

Publication number Publication date
JP2021153245A (en) 2021-09-30

Similar Documents

Publication Publication Date Title
US10412478B2 (en) Reproduction of ambient environmental sound for acoustic transparency of ear canal device system and method
US11517708B2 (en) Ear-worn electronic device for conducting and monitoring mental exercises
US11826138B2 (en) Ear-worn devices with deep breathing assistance
US11223915B2 (en) Detecting user's eye movement using sensors in hearing instruments
US10924869B2 (en) Use of periauricular muscle signals to estimate a direction of a user's auditory attention locus
US20110200213A1 (en) Hearing aid with an accelerometer-based user input
JP6791001B2 (en) Out-of-head localization filter determination system, out-of-head localization filter determination device, out-of-head localization determination method, and program
WO2014049148A1 (en) Method for adjusting parameters of a hearing aid functionality provided in a consumer electronics device
US11184723B2 (en) Methods and apparatus for auditory attention tracking through source modification
US20180124513A1 (en) Enhanced-bass open-headphone system
CN113891225A (en) Personalization of algorithm parameters of a hearing device
US11893997B2 (en) Audio signal processing for automatic transcription using ear-wearable device
KR20170131378A (en) Intelligent conversion between air conduction speakers and tissue conduction speakers
US11523229B2 (en) Hearing devices with eye movement detection
JP7375644B2 (en) Sound input/output control device, sound input/output control method, and program
KR101737270B1 (en) Automatic directional-gain control Hearing Aids aid automatic control system for direction of sound
JP2024502930A (en) System and method for self-speech detection in listening systems
Denk et al. Measuring hearing instrument sound modification using integrated ear-EEG
US11937072B2 (en) Headphones, out-of-head localization filter determination device, out-of-head localization filter determination system, out-of-head localization filter determination method, and program
US10327073B1 (en) Externalized audio modulated by respiration rate
JP7395906B2 (en) Headphones, extra-head localization filter determination device, and extra-head localization filter determination method
JP7404736B2 (en) Extra-head localization filter determination system, extra-head localization filter determination method, and program
US20240221757A1 (en) Audio signal processing for automatic transcription using ear-wearable device
JP2024518645A (en) Dynamic Seal Testing and Feedback for Audio Wearable Devices
CN116208880A (en) Method for sound signal and related equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230131

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230926

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231009

R150 Certificate of patent or registration of utility model

Ref document number: 7375644

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150