JP7251601B2 - Hearing wearable device management system, hearing wearable device management method and its program - Google Patents

Hearing wearable device management system, hearing wearable device management method and its program Download PDF

Info

Publication number
JP7251601B2
JP7251601B2 JP2021186814A JP2021186814A JP7251601B2 JP 7251601 B2 JP7251601 B2 JP 7251601B2 JP 2021186814 A JP2021186814 A JP 2021186814A JP 2021186814 A JP2021186814 A JP 2021186814A JP 7251601 B2 JP7251601 B2 JP 7251601B2
Authority
JP
Japan
Prior art keywords
information
wearer
wearable device
wearing
hearing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021186814A
Other languages
Japanese (ja)
Other versions
JP2022010351A (en
Inventor
浩明 長野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2019058454A external-priority patent/JP2020161949A/en
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2021186814A priority Critical patent/JP7251601B2/en
Publication of JP2022010351A publication Critical patent/JP2022010351A/en
Application granted granted Critical
Publication of JP7251601B2 publication Critical patent/JP7251601B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムに関し、特に、消防や救助や防衛、建設などの現場において或る程度の人数の集団が共有して聴覚ウェアラブルデバイスを利用する聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムに関する。 TECHNICAL FIELD The present invention relates to an auditory wearable device management system, an auditory wearable device management method, and an auditory wearable device management program. The present invention relates to an auditory wearable device management system, an auditory wearable device management method, and an auditory wearable device management program.

聴覚ウェアラブルデバイス(以下、「聴覚デバイス」と略記する)は、AR(Augmented Reality:拡張現実)やVR(Virtual Reality:仮想現実)に用いられる視覚デバイスなどと比べると、装着が容易であり、消防や救助や防衛、建設などの現場における聴覚デバイスの貸し借りや装着者の変更も容易である。さらに、この聴覚デバイスは、視覚を遮るものがあって視覚デバイスを使い難いような状況であっても、利用することが可能である。聴覚デバイスは、このような有用な特性を有している。 Hearing wearable devices (hereinafter abbreviated as "hearing devices") are easier to wear than visual devices used in AR (Augmented Reality) and VR (Virtual Reality), and are used in fire fighting. It is also easy to lend and borrow hearing devices and change wearers at sites such as rescue, defense, and construction. Furthermore, the hearing device can be used in situations where visual obstruction would make the use of a visual device difficult. Hearing devices have such useful properties.

一方、視覚デバイス等は一度装着されるとほぼ装着されたままの状態になるので、各個人と視覚デバイス等を紐付けた運用が可能になるのに対して、聴覚デバイスは、前述のように、その装着の容易性や現場でのデバイスの貸し借りや装着者の変更も容易であるという特性から、聴覚デバイスからその装着者を固定的に推定するのは容易ではなく、常に、装着者と聴覚デバイスとの関係は流動的であると考えなければならない。 On the other hand, once a visual device or the like is worn, it remains almost in the state of being worn. However, due to the ease of wearing the device, lending and borrowing of the device at the site, and the ease of changing the wearer, it is not easy to statically estimate the wearer from the hearing device. You have to think of your relationship with devices as fluid.

かくのごとき聴覚デバイスの特性は、或る程度の人数の集団で共有して聴覚デバイスを運用する際に特に顕著になる。また、聴覚デバイスの装着時においても、各人が自分用の聴覚デバイスを探して装着するという状況よりも、乱雑に置かれた聴覚デバイス群の中から、1つないし2つの聴覚デバイスを無作為に選択して装着することが許容されるという状況になっていることが好ましいことが多い。 Such characteristics of hearing devices become particularly noticeable when the hearing devices are shared by a group of a certain number of people. Also, when wearing a hearing device, rather than having each person find and wear their own hearing device, one or two hearing devices are randomly selected from a group of randomly placed hearing devices. It is often preferable to be in a situation where it is permissible to select and wear

さらには、消防や救助や防衛、建設などの現場を考えると、聴覚デバイスの不具合に対処する等のために、装着者間での聴覚デバイスのやり取りがなされる可能性を十分に考慮しておくことが必要になる。 Furthermore, when considering sites such as firefighting, rescue, defense, and construction, the possibility of exchanges of hearing devices between wearers in order to deal with malfunctions of hearing devices should be fully considered. becomes necessary.

また、一般に、聴覚デバイスは、視覚デバイス等に比べると、各情報をそれぞれ分離して伝える能力は相対的に低い。しかし、集団で行動している場合を想定すると、各個人宛ての情報、装着者のグループへの同報情報、集団の全員への同報情報など、複数の性格を有する情報を同時に伝達する能力が要求される。したがって、これらの情報が同時に聴覚デバイスに対して提示されることを想定して、個々の情報を識別する手段を聴覚デバイスに備えていることが重要である。 Also, in general, auditory devices have a relatively low ability to separate and transmit each piece of information, compared to visual devices and the like. However, assuming that they are acting in a group, the ability to simultaneously transmit information with multiple characteristics, such as information addressed to each individual, broadcast information to a group of wearers, and broadcast information to all members of the group. is required. Therefore, assuming that these pieces of information are presented to the hearing device at the same time, it is important that the hearing device has a means of identifying individual pieces of information.

このような用途に関連する技術として、特許文献1の特表2017-528990号公報「聴覚デバイスを介した多数の聴取環境生成技法」には、多数の会話が行われている状況下において、それらの会話を独立にレベルコントロールする技術が開示されている。また、特許文献2の国際公開第2017/061218号「音響出力装置、音響生成方法およびプログラム」には、任意の位置に音像(音源)を定位させる方法が開示されている。また、特許文献3の特開2015-136100号公報「選択可能な知覚空間的な音源の位置決めを備える聴覚装置」には、音声情報を聞き取ることができるように、音像(音源)の位置を任意の位置に変更することができる技術が開示されている。 As a technology related to such applications, Patent Document 1, Japanese Patent Publication No. 2017-528990, "Multiple Listening Environment Generation Techniques Via Hearing Devices," describes a situation in which many conversations are taking place. A technique for independently level-controlling conversations between the two is disclosed. In addition, International Publication No. 2017/061218 of Patent Document 2, "Sound output device, sound generation method and program", discloses a method of localizing a sound image (sound source) at an arbitrary position. In addition, Japanese Patent Laid-Open No. 2015-136100 of Patent Document 3, “Hearing Device with Selectable Perceptual Spatial Positioning of Sound Sources,” discloses that the position of a sound image (sound source) can be arbitrarily set so that audio information can be heard. is disclosed.

特表2017-528990号公報Japanese Patent Publication No. 2017-528990 国際公開第2017/061218号WO2017/061218 特開2015-136100号公報Japanese Unexamined Patent Application Publication No. 2015-136100

しかしながら、前記特許文献1等の本発明に関連する現状の技術においては、聴覚デバイス(聴覚ウェアラブルデバイス)を装着者個々人が固定して単体で使う場合の機能に関するものであり、或る程度の人数の集団が共有して聴覚デバイスを使う場合において聴覚デバイスの運用を適切に支援するという具体的な仕組みについては、全く考慮されていない。 However, in the current technology related to the present invention such as Patent Document 1, the hearing device (auditory wearable device) is related to the function when the wearer is fixed and used alone. There is no consideration at all for a specific mechanism to appropriately support the operation of hearing devices when a group of people share and use hearing devices.

つまり、或る程度の人数の集団で共有する聴覚デバイスを効果的に使用することを可能にするためには、前述したように、聴覚デバイスと使用者(装着者)との事前の結び付けが必要であり、さらに、運用現場において聴覚デバイスを交換したり、装着状況を変更したりするような場面に対して迅速かつ柔軟に対応することが必要になる。しかし、現状の技術においては、これらの課題を解決する具体的な技術は提示されていない。すなわち、現状の技術は、多数の音声情報が多重化して伝達されている状況下において、共有している複数の聴覚デバイスの中からいずれの聴覚デバイスを装着しても、各装着者がそれぞれに向けられた音声情報を的確に取得することを可能にするという仕組みを有していない。 In other words, in order to enable effective use of a hearing device shared by a group of a certain number of people, it is necessary to associate the hearing device with the user (wearer) in advance, as described above. Furthermore, it is necessary to respond quickly and flexibly to situations such as exchanging hearing devices or changing wearing conditions at the site of operation. However, in the current state of the art, no specific technique for solving these problems has been presented. In other words, in the current technology, in a situation where a large amount of audio information is multiplexed and transmitted, each wearer can wear any hearing device out of a plurality of shared hearing devices. It does not have a mechanism that makes it possible to accurately acquire the directed voice information.

(本開発の目的)
本開発の目的は、前述のような課題に鑑み、集団で共有する聴覚ウェアラブルデバイスを効果的に使用することを支援する聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムの提供にある。
(Purpose of this development)
In view of the above-mentioned problems, the purpose of this development is to provide a hearing wearable device management system, a hearing wearable device management method, and a hearing wearable device management program that support effective use of hearing wearable devices shared by a group. It is in.

前述の課題を解決するため、本発明による聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムは、主に、次のような特徴的な構成を採用している。 In order to solve the aforementioned problems, the hearing wearable device management system, hearing wearable device management method, and hearing wearable device management program according to the present invention mainly employ the following characteristic configuration.

(1)本発明による聴覚ウェアラブルデバイス管理システムは、
集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布し、
前記装着者と装着している前記聴覚ウェアラブルデバイスの装着状況とを紐付けて装着情報として保持している装着情報保持手段と、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御手段と、
前記配布制御情報および前記装着情報に基づいて取得した前記情報音源の音声情報の配布先および前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、該装着者が識別することが可能な形に音場形成して加工する装着者音場形成手段と、
を有していることを特徴とする。
(1) The auditory wearable device management system according to the present invention comprises:
distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group;
Wearing information holding means for holding as wearing information in association with the wearer and the wearing state of the hearing wearable device worn by the wearer;
audio information distribution control means for outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
Audio information from the information sound source for the wearer according to the distribution destination of the audio information of the information sound source acquired based on the distribution control information and the wearing information and the wearing state of the auditory wearable device of the wearer. a wearer sound field forming means for forming and processing a sound field in a form that can be identified by the wearer;
characterized by having

(2)本発明による聴覚ウェアラブルデバイス管理方法は、
集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布し、
前記装着者と装着している前記聴覚ウェアラブルデバイスの装着状況とを紐付けて装着情報として保持している装着情報保持ステップと、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御ステップと、
前記配布制御情報および前記装着情報に基づいて取得した前記情報音源の音声情報の配布先および前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、該装着者が識別することが可能な形に音場形成して加工する装着者音場形成ステップと、
を有していることを特徴とする。
(2) A hearing wearable device management method according to the present invention includes:
distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group;
A wearing information holding step of holding the wearing information of the wearer and the wearing state of the hearing wearable device worn by the wearer as wearing information;
an audio information distribution control step of outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
Audio information from the information sound source for the wearer according to the distribution destination of the audio information of the information sound source acquired based on the distribution control information and the wearing information and the wearing state of the auditory wearable device of the wearer. a wearer sound field forming step of forming and processing the sound field into a form that can be identified by the wearer;
characterized by having

(3)本発明による聴覚ウェアラブルデバイス管理プログラムは、
集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布する処理をコンピュータによって実行し、
前記装着者と装着している前記聴覚ウェアラブルデバイスの装着状況とを紐付けて装着情報として保持している装着情報保持機能と、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御機能と、
前記配布制御情報および前記装着情報に基づいて取得した前記情報音源の音声情報の配布先および前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、該装着者が識別することが可能な形に音場形成して加工する装着者音場形成機能と、
を有していることを特徴とする。
(3) The auditory wearable device management program according to the present invention is
A computer executes a process of distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group,
A wearing information holding function that associates the wearing state of the wearer with the wearing state of the hearing wearable device worn by the wearer and holds the wearing information as wearing information;
an audio information distribution control function for outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
Audio information from the information sound source for the wearer according to the distribution destination of the audio information of the information sound source acquired based on the distribution control information and the wearing information and the wearing state of the auditory wearable device of the wearer. a wearer sound field forming function that forms and processes a sound field in a form that can be identified by the wearer;
characterized by having

本発明の聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムによれば、主に、以下のような効果を奏することができる。 According to the auditory wearable device management system, auditory wearable device management method, and auditory wearable device management program of the present invention, mainly the following effects can be obtained.

第1に、集団で行動している装着者間で聴覚デバイスの貸し借りや装着状態の変化に柔軟に対応しつつ、音声情報の提供対象となる各装着者に対して当該音声情報を確実に届けることができる。その理由は、聴覚デバイスを指定して音声情報を提供するのではなく、装着者を指定して該装着者がその時点で装着している聴覚デバイスに対して音声情報を提供するからである、つまり、装着情報保持手段により、装着者と聴覚デバイスとを関連付けた(マッピングした)装着情報をキーにして、音声情報の配布動作を制御しているからである。 First, the audio information is reliably delivered to each wearer to whom the audio information is to be provided, while flexibly responding to the lending and borrowing of hearing devices and changes in wearing conditions among wearers acting in a group. be able to. The reason is that, instead of specifying a hearing device to provide audio information, a wearer is specified and audio information is provided to the hearing device that the wearer is wearing at that time. That is, the wearing information holding means controls the distributing operation of the audio information using the wearing information that associates (maps) the wearer and the hearing device as a key.

第2に、複数の音声情報が届けられる場合であっても、各装着者はそれぞれの音声情報を聞き分けることができる。その理由は、音声情報の発生源となる情報音源の属性(位置、周波数等)のみならず、該音声情報の配布先となる装着者が装着している聴覚デバイスの装着状況に連動して音声情報の音場を形成する装着者音場形成手段を備えているので、配布先の装着者が聴覚デバイスを両耳に装着しているか、左右いずれか片耳に装着しているかという聴覚デバイスの装着状況に応じてそれぞれに適した音場を形成することができるからである。 Second, each wearer is able to distinguish between different audio information even when multiple audio information is delivered. The reason for this is that not only the attributes (position, frequency, etc.) of the information sound source that is the source of the audio information, but also the hearing device that is worn by the wearer to whom the audio information is distributed. Since the wearer's sound field forming means for forming a sound field of information is provided, the wearing of the hearing device is determined by whether the wearer at the distribution destination wears the hearing device on both ears or on either the left or right ear. This is because a sound field suitable for each situation can be formed.

本発明に係る聴覚ウェアラブルデバイス管理システムのシステム構成の一例を示すシステム構成図である。1 is a system configuration diagram showing an example of a system configuration of an auditory wearable device management system according to the present invention; FIG. 図1に示した聴覚ウェアラブルデバイス管理システムの装着者音場形成手段の内部構成の一例を示すブロック構成図である。2 is a block configuration diagram showing an example of the internal configuration of a wearer sound field forming means of the auditory wearable device management system shown in FIG. 1; FIG.

以下、本発明による聴覚ウェアラブルデバイス管理システム、聴覚ウェアラブルデバイス管理方法および聴覚ウェアラブルデバイス管理プログラムの好適な実施形態について添付図を参照して説明する。なお、以下の説明においては、本発明による聴覚ウェアラブルデバイス管理システムおよび聴覚ウェアラブルデバイス管理方法について説明するが、かかる聴覚ウェアラブルデバイス管理方法をコンピュータにより実行可能な聴覚ウェアラブルデバイス管理プログラムとして実施するようにしても良いし、あるいは、聴覚ウェアラブルデバイス管理プログラムをコンピュータにより読み取り可能な記録媒体に記録するようにしても良いことは言うまでもない。また、以下の説明においては、聴覚ウェアラブルデバイスを「聴覚デバイス」と略記して記載する。さらに、以下の各図面に付した図面参照符号は、理解を助けるための一例として各要素に便宜上付記したものであり、本発明を図示の態様に限定することを意図するものではないことは言うまでもない。 Preferred embodiments of an auditory wearable device management system, an auditory wearable device management method, and an auditory wearable device management program according to the present invention will now be described with reference to the accompanying drawings. In the following description, an auditory wearable device management system and an auditory wearable device management method according to the present invention will be described. Alternatively, it goes without saying that the auditory wearable device management program may be recorded in a computer-readable recording medium. Also, in the following description, the auditory wearable device is abbreviated as “auditory device”. Furthermore, the drawing reference numerals attached to each drawing below are added to each element for convenience as an example to aid understanding, and it goes without saying that they are not intended to limit the present invention to the illustrated embodiments. stomach.

(本発明の特徴)
本発明の実施形態の説明に先立って、本発明の特徴についてその概要をまず説明する。本発明は、集団で共有する聴覚デバイスが装着者に装着された際に、聴覚デバイスを装着した装着者と両耳・片耳等の装着状況との関連付けを行うことを、主要な特徴の一つとしている。そして、情報音源からの音声情報の配布先となる装着者が装着している聴覚デバイスの両耳、片耳等の装着状況に応じて、音場定位や音量レベルや周波数などの音場を個々に形成することにより、他の音声情報と識別することが可能な形に加工された状態にして、装着者個々に伝達することも、主要な特徴の一つとしている。
(Characteristics of the present invention)
Before describing the embodiments of the present invention, the outline of the features of the present invention will be described first. One of the main characteristics of the present invention is to associate the wearer wearing the hearing device with the wearing state of both ears, one ear, etc. when the wearer wears a hearing device shared by a group. and Then, the sound field such as sound field localization, volume level and frequency is individually adjusted according to the wearing situation of the hearing device worn by the wearer who is the destination of the audio information from the information sound source. One of the main characteristics is that the information is processed into a form that can be distinguished from other audio information and transmitted to each individual wearer.

そして、集団で利用する各種の音声情報を出力する1ないし複数の情報音源それぞれに関し、音声情報の配布先を集団内の各装着者個人単位、集団内に任意に編成した装着者グループ単位、集団内全員等に分類して、それぞれの情報音源の音声情報の配布先となる装着者をあらかじめ設定することも主要な特徴の一つとしている。さらに、情報音源の配置位置等の属性を、それぞれの情報音源からの音声情報の音場の形成を適切に行うことができるように、集団の指令者や装着者グループのチーム編成者や装着者個々人によってカスタマイズすることを可能にしていることも、主要な特徴の一つとしている。 For each of the one or more information sound sources that output various types of voice information used by the group, the voice information is distributed to each individual wearer in the group, to a group of wearers arbitrarily organized in the group, and to the group. One of the main features is that the wearers to whom the voice information of each information sound source is to be distributed are set in advance by classifying them into all members and the like. In addition, attributes such as the arrangement position of the information sound source are set by the commander of the group, the team organizer of the wearer group, and the wearer so that the sound field of the voice information from each information sound source can be appropriately formed. One of the main features is that it allows customization by individuals.

而して、集団で共有する聴覚デバイスの使用環境下においても、各装着者は、聴覚デバイスの装着状況に適応して、必要とする音声情報を的確に聴取することが可能であり、かつ、現場における聴覚デバイスの貸し借りや装着状況の頻繁な変化にも柔軟に対応することが可能になるので、聴覚デバイスを効果的に使用することができるという効果を奏することができる。 Therefore, even in an environment where the hearing device is shared by a group, each wearer can adapt to the wearing situation of the hearing device and listen to the necessary audio information accurately, and Since it is possible to flexibly deal with the lending and borrowing of the hearing device in the field and frequent changes in wearing conditions, it is possible to effectively use the hearing device.

さらに、本発明の特徴を実現手段の観点から、具体的に説明すると、次の通りである。 Further, the features of the present invention will be specifically described as follows from the viewpoint of implementation means.

本発明においては、集団で共有する聴覚デバイスの運用支援方式として、聴覚デバイスを装着している個人を識別する装着者識別手段を用いて装着者および装着した聴覚デバイスの装着状況との関連付けを行い、装着情報として保持する装着情報保持手段と、装着者個人または装着者グループもしくは集団全員それぞれに対して該当する情報音源からの音声情報を配布する情報配布手段と、該情報配布手段や情報音源の属性(位置、周波数、音量レベル、位相等)や装着者の生体情報によりフィルタリングされた情報および各装着者の装着状況に応じて音場を形成する装着者音場形成手段と、を備えていることを主要な特徴としている。 In the present invention, as a method for supporting the operation of a hearing device shared by a group, the wearer identification means for identifying the individual wearing the hearing device is used to associate the wearer with the wearing state of the hearing device. , wearing information holding means for holding as wearing information; information distributing means for distributing voice information from the relevant information sound source to the individual wearer or the wearer group or all members of the group; Wearer sound field forming means for forming a sound field according to information filtered by attributes (position, frequency, volume level, phase, etc.) and biological information of the wearer, and wearing conditions of each wearer. is the main feature.

さらに、本発明においては、集団の指令者やグループの編成を行うチーム編成者等が制御や管理を行うための制御用の手段として、情報音源からの音声情報の配布先を集団の指令者等から制御する音声情報配布制御手段や、チーム編成者等により集団中の装着者グループの構成を任意に制御する装着者グループ管理手段をさらに備えていることも主要な特徴としている。 Furthermore, in the present invention, as a means for control and management by a commander of a group or a team organizer who organizes a group, the delivery destination of the voice information from the information sound source is determined by the commander of the group. It is also a main feature that it is further provided with voice information distribution control means for controlling from , and wearer group management means for arbitrarily controlling the configuration of the wearer group in the group by a team organizer or the like.

(本発明の実施形態の構成例)
次に、本発明に係る聴覚ウェアラブルデバイス管理システムのシステム構成について、その一例を、図1を参照しながら詳細に説明する。図1は、本発明に係る聴覚ウェアラブルデバイス管理システムのシステム構成の一例を示すシステム構成図であり、或る程度の人数で複数の聴覚デバイスを共有して利用する場合において各聴覚デバイスの運用を支援管理するためのシステム構成の一例を示している。
(Configuration example of embodiment of the present invention)
Next, an example of the system configuration of the auditory wearable device management system according to the present invention will be described in detail with reference to FIG. FIG. 1 is a system configuration diagram showing an example of the system configuration of a hearing wearable device management system according to the present invention. An example of a system configuration for support management is shown.

図1に示す聴覚ウェアラブルデバイス管理システム100は、集団で共有する複数の聴覚デバイス10を管理するために、装着者識別手段1、装着情報保持手段2、装着者音場形成手段3、データ配布手段4、装着者用情報選択手段5、音声情報配布制御手段6、情報配布手段7および装着者グループ管理手段8を少なくとも備えるとともに、各種の音声情報を各装着者に対して提供する1ないし複数の情報音源20を備えている。 A hearing wearable device management system 100 shown in FIG. 4. One or a plurality of wearer information selection means 5, voice information distribution control means 6, information distribution means 7, and wearer group management means 8, which provide various voice information to each wearer. An information sound source 20 is provided.

複数の各聴覚デバイス10は、それぞれ、自デバイスが装着状態にあるか否かを判別する機能を有するとともに、本実施形態においては、装着状態になると、装着している装着者を識別するための識別情報を取得する機能もさらに有している。そして、装着している状態にあると判別した場合には、聴覚デバイス10は、前記識別情報を装着者識別手段1に送信する。 Each of the plurality of hearing devices 10 has a function of determining whether or not its own device is in a worn state, and in the present embodiment, when it is in a worn state, it identifies the wearer who is wearing it. It also has a function of acquiring identification information. Then, when it is determined that the hearing device 10 is worn, the hearing device 10 transmits the identification information to the wearer identification means 1 .

装着者識別手段1は、各聴覚デバイス10から送信されてくる前記識別情報に基づき、装着者が誰であるか、また、装着されているのは右耳か左耳か等の装着状況を判別して、判別した情報を、装着している聴覚デバイス10に関する装着情報として装着情報保持手段2に格納する。 Based on the identification information transmitted from each hearing device 10, the wearer identifying means 1 determines who the wearer is and whether the wearer is wearing the right ear or the left ear. Then, the discriminated information is stored in the wearing information holding means 2 as wearing information about the hearing device 10 worn.

なお、本実施形態においては、聴覚デバイス10による装着者を識別するための前記識別情報に関し、聴覚デバイス10が収集した装着者の生体情報(例えば、耳や頭の向き・動き、血流、耳穴形状等の情報)に基づくものを想定している。しかし、聴覚デバイス10からではなく、装着者識別手段1において、音声認識手段や音声を用いたログイン情報等による装着者認証手段や装着状況を判別するための何らかの操作(例えば片耳ずつ順に聴覚デバイス10を外す等の操作)などに基づいて前記識別情報を取得するようにしても構わない。さらには、音声認識手段や装着者認証手段等により取得した情報に関して、生体情報等と併用する場合も含むことを妨げない。 In the present embodiment, regarding the identification information for identifying the wearer by the hearing device 10, the biological information of the wearer collected by the hearing device 10 (for example, orientation and movement of the ears and head, blood flow, ear holes, etc.) information such as shape). However, not from the hearing device 10, but in the wearer identification means 1, the wearer authentication means by means of voice recognition means, login information using voice, etc., and some operation for determining the wearing situation (for example, the hearing device 10 The identification information may be acquired based on an operation such as removing the . Furthermore, the information acquired by the voice recognition means, the wearer authentication means, etc. may be used together with the biometric information.

情報音源20は、聴覚デバイス10の装着者に対して提示し得る様々な音声情報を出力する音源である。また、音声情報配布制御手段6は、1ないし複数の情報音源20のうちどの情報音源の音声情報を、集団の中のどの装着者に対して配布するかを、該集団の指令者等からの指示に基づいて制御する。そして、音声情報配布制御手段6は、各情報音源20の音声情報の配布先となる装着者を指定する配布制御情報を、情報配布手段7に対して出力する。 The information sound source 20 is a sound source that outputs various audio information that can be presented to the wearer of the hearing device 10 . In addition, the voice information distribution control means 6 determines to which wearer in the group the voice information of which information sound source out of the one or more information sound sources 20 is to be distributed, from the commander or the like of the group. Control based on instructions. Then, the voice information distribution control means 6 outputs to the information distribution means 7 distribution control information specifying the wearer to whom the voice information of each information sound source 20 is to be distributed.

情報配布手段7は、音声情報配布制御手段6からの配布制御情報に基づき、各情報音源20の音声情報毎に、それぞれの配布先となる装着者を選択して、情報音源20の音声情報を該当する装着者に対して配布する。 Based on the distribution control information from the voice information distribution control means 6, the information distribution means 7 selects the wearer to whom the voice information of each information sound source 20 is to be distributed, and distributes the voice information of the information sound source 20. Distribute to applicable wearers.

ここで、情報配布手段7は、典型的には、Publish-Subscribe(出版・購読)モデルに基づくトピック、チャネルなどという形式で実装され、情報音源20の音声情報(トピック)毎に、それぞれの音声情報を聞く対象者(トピックの購読者)として設定された装着者個人や装着者全員や装着者グループに対してデータ配布という形式で音声情報を配布する。情報配布手段7による装着者個々人への音声情報および装着者全員への同報用の音声情報は装着者チャネル7aに対して送付され、一方、任意に編成された装着者グループへの同報用の音声情報は、一旦、グループチャネル7bに対して送付される。 Here, the information distribution means 7 is typically implemented in the form of topics, channels, etc. based on the Publish-Subscribe model, and for each audio information (topic) of the information sound source 20, each audio Voice information is distributed in the form of data distribution to individual wearers, all wearers, and wearer groups set as target listeners (subscribers of the topic). The voice information for individual wearers and the voice information for broadcast to all wearers by the information distribution means 7 are sent to the wearer channel 7a. is once sent to the group channel 7b.

なお、情報配布手段7による装着者個人に対しての音声情報は、各装着者個人が指定することができる装着者用情報選択手段5によっても制御され、情報配布手段7からの音声情報が送付される装着者チャネル7aを装着者用情報選択手段5によって制御して、装着者個人ごとに受け取る音声情報を選択することができる。 The voice information for the individual wearer by the information distribution means 7 is also controlled by the wearer information selection means 5 which can be specified by each wearer individually, and the voice information from the information distribution means 7 is sent. The wearer channel 7a to be received can be controlled by the wearer information selection means 5 to select voice information to be received for each individual wearer.

また、装着者グループへの同報用の音声情報については、グループチャネル7bに一旦送付されて、装着者グループ管理手段8によって配布先が制御され、装着者グループの構成員となっている装着者それぞれを宛先とする同報用の音声情報に設定されて、装着者チャネル7aに転送される。その結果、同報の配布先として指定した装着者グループの構成員全員に対して同報用の音声情報を送付することになる。ここで、集団内におけるチーム編成者等は、情報音源20の音声情報の同報配布先とする装着者グループの構成員を任意に指定して、装着者グループの構成員を管理するための装着者グループ管理手段8にあらかじめ登録している。 Further, the voice information for multi-addressing to the wearer group is once sent to the group channel 7b, the distribution destination is controlled by the wearer group management means 8, and the wearer who is a member of the wearer group is sent to the group channel 7b. It is set as voice information for broadcast addressed to each of them, and transferred to the wearer channel 7a. As a result, the voice information for multi-address is sent to all the members of the wearer group designated as the distribution destination of the multi-address. Here, the team organizer or the like in the group arbitrarily designates the members of the wearer group to whom the voice information of the information sound source 20 is to be broadcasted, and the wearer's group is equipped to manage the members of the wearer group. registered in the person group management means 8 in advance.

図1の説明に戻って、装着者音場形成手段3は、装着者チャネル7aに送付された装着者向けの音声情報に対して、該装着者が配布されてくる音声情報を他の音声情報と分離して識別することが可能な形に音場形成を施して、音場定位や周波数や音量レベル等を加工する。なお、装着者音場形成手段3は、装着者向けの音声情報を加工するに当たって、加工の対象となる情報音源20の属性(位置、周波数、音量レベル、位相等)や装着者の生体情報の他に、音声情報の配布先となる装着者が聴覚デバイス10を装着しているのは片耳装着か両耳装着かなどの装着状況を装着情報保持手段2から取得して、音場形成用に用いている。音声情報の加工が終了すると、装着者音場形成手段3は、加工した音声情報を、加工データとしてデータ配布手段4に送付する。 Returning to the description of FIG. 1, the wearer sound field forming means 3 converts the voice information distributed to the wearer to the voice information for the wearer sent to the wearer channel 7a as other voice information. The sound field is formed in a form that can be separated and identified, and the sound field localization, frequency, volume level, etc. are processed. In processing the voice information for the wearer, the wearer sound field forming means 3 processes the attributes (position, frequency, volume level, phase, etc.) of the information sound source 20 to be processed and the wearer's biological information. In addition, the wearing state of the hearing device 10, such as whether the wearer to whom the audio information is distributed wears the hearing device 10 in one ear or in both ears, is acquired from the wearing information holding means 2, and used for forming the sound field. I am using After finishing the processing of the voice information, the wearer sound field forming means 3 sends the processed voice information to the data distribution means 4 as processed data.

データ配布手段4は、装着者音場形成手段3から受け取った加工データを、配布先として指定されている装着者の聴覚デバイス10に対して配布する。ここで、データ配布手段4は、装着者音場形成手段3から加工データを受け取ると、まず、装着者と聴覚デバイス10との関連付けを保持している装着情報保持手段2にアクセスして、装着者音場形成手段3から受け取った加工データの配布先として指定されている装着者が装着している聴覚デバイス10に関する情報を取得する。しかる後、データ配布手段4は、装着者音場形成手段3から受け取った加工データを、配布先の装着者が装着している聴覚デバイス10に対して配布する。 The data distributing means 4 distributes the processed data received from the wearer sound field forming means 3 to the hearing device 10 of the wearer designated as a distribution destination. Here, when the data distributing means 4 receives the processed data from the wearer sound field forming means 3, first, the data distributing means 4 accesses the wearing information holding means 2 holding the association between the wearer and the hearing device 10, and Acquires information about the hearing device 10 worn by the wearer designated as the distribution destination of the processed data received from the human sound field forming means 3 . Thereafter, the data distributing means 4 distributes the processed data received from the wearer sound field forming means 3 to the hearing device 10 worn by the wearer of the distribution destination.

(本発明の実施形態の動作の説明)
次に、本発明の一実施形態として図1に示した聴覚ウェアラブルデバイス管理システム100の動作について詳細に説明する。
(Explanation of the operation of the embodiment of the present invention)
Next, operation of the auditory wearable device management system 100 shown in FIG. 1 as one embodiment of the present invention will be described in detail.

装着者が聴覚デバイス10を装着すると、聴覚デバイス10から当該装着者を識別する情報が装着者識別手段1に対して送信される。ここで、送信される情報は、前述したように、聴覚デバイス10によって収集された装着者の生体情報等である。聴覚デバイス10から送信されてきた情報を基にして、装着者識別手段1は、当該装着者、および、聴覚デバイス10が装着されているのが当該装着者の右耳、左耳のいずれかの耳かまたは双方の耳であるかを判別する。 When the wearer wears the hearing device 10 , information identifying the wearer is transmitted from the hearing device 10 to the wearer identification means 1 . Here, the transmitted information is the wearer's biological information collected by the hearing device 10, etc., as described above. Based on the information transmitted from the hearing device 10, the wearer identifying means 1 identifies the wearer and whether the hearing device 10 is worn on the wearer's right ear or left ear. Determine ear or both ears.

なお、かかる情報を、聴覚デバイス10からの装着者の生体情報のみでは取得することができない場合には、前述したように、音声等による利用者識別処理やログイン処理などと装着状態判定のための手続き(片方ずつ聴覚デバイス10を順に外す等)とにより、生体情報と代替するか、もしくは、生体情報と併用するようにしても良い。 If such information cannot be acquired only from the wearer's biological information from the hearing device 10, as described above, user identification processing, login processing, etc. by voice, etc., and wearing state determination are performed. Depending on the procedure (such as removing the hearing devices 10 one by one), the biometric information may be substituted or used together with the biometric information.

装着者識別手段1において判別された装着情報(聴覚デバイス10の装着者および装着状態)は、装着情報保持手段2に保持され、装着者音場形成手段3における音源生成用の情報、データ配布手段4等における装着者と聴覚デバイス10との関係判別情報として利用される。 Wearing information (wearer and wearing state of the hearing device 10) discriminated by the wearer identifying means 1 is held in the wearing information holding means 2, and information for sound source generation in the wearer sound field forming means 3 and data distributing means. 4 or the like is used as relationship determination information between the wearer and the hearing device 10 .

かくのごとき装着者識別手段1と装着情報保持手段2とを備えた構成とすることにより、聴覚デバイス10と装着者との関係は流動的となり、利用現場における聴覚デバイス10の装着状態の変更や貸し借りなどによる聴覚デバイス10の装着者の変更に対しても柔軟かつ迅速に対応することができる。 With such a configuration including the wearer identifying means 1 and the wearing information holding means 2, the relationship between the hearing device 10 and the wearer becomes fluid, and the wearing state of the hearing device 10 can be changed at the site of use. It is possible to flexibly and quickly respond to a change in the wearer of the hearing device 10 due to lending and borrowing.

装着者に提示される音声情報は、1ないし複数の情報音源20が保有する音声情報が対象になる。情報音源20としては、絶対位置情報が付随する音声情報を誘導用として用いる誘導用音源のみならず、絶対位置情報を付随していない音声情報を情報提供用として用いる情報用音源などをさらに備えていても良い。ここで、誘導用音源は、絶対位置情報が示す位置に固定して配置され、固定した位置をあらかじめ当該情報音源20の属性として設定登録する。一方、情報用音源の位置は、装着者や集団の司令者や装着者グループの管理を行うチーム編成者等により任意の位置に配置することが可能であり、配置した位置を当該情報音源20の属性として設定登録している。 The audio information presented to the wearer is audio information possessed by one or more information sound sources 20 . The information sound source 20 includes not only a guidance sound source that uses voice information accompanied by absolute position information for guidance, but also an information sound source that uses voice information not accompanied by absolute position information for providing information. can be Here, the guidance sound source is fixedly arranged at the position indicated by the absolute position information, and the fixed position is set and registered in advance as an attribute of the information sound source 20 . On the other hand, the position of the information sound source can be arranged at any position by the wearer, the commander of the group, the team organizer who manages the wearer group, etc., and the arranged position is the information sound source 20. It is set and registered as an attribute.

また、聴覚ウェアラブルデバイス管理システム100における集団の指令者等は、各情報音源20を配置した位置を示す属性や周波数・音量レベル等の属性の他に、各情報音源20に対して、集団を構成する各装着者個人宛、チーム編成者等により集団内に任意に編成した装着者グループの構成員全員宛の同報、集団を構成する装着者全員宛の同報、配布しない、などの音声情報の配布に関する属性を付与する。付与した配布に関する属性に応じて、各装着者個々に割り付けられた装着者チャネル7aに該当する情報音源20の音声情報が配布される。 In addition, the commander of the group in the auditory wearable device management system 100 configures the group for each information sound source 20 in addition to the attributes indicating the position where each information sound source 20 is arranged and the attributes such as frequency and volume level. Voice information such as addressing individual wearers, broadcast to all members of wearer groups arbitrarily organized within the group by team organizers, etc., broadcast to all wearers making up the group, non-distribution, etc. Give attributes related to the distribution of The voice information of the information sound source 20 corresponding to the wearer channel 7a assigned to each wearer is distributed in accordance with the given distribution-related attribute.

また、装着者グループの構成員全員宛の音声情報については、情報配布手段7においてグループチャネル7bに一旦配布されるが、しかる後、装着者グループ管理手段8の制御によりグループチャネル7bから装着者チャネル7aに転送して、装着者グループ管理手段8によって指定した装着者グループの各構成員(各装着者)個々に対して同じ音声情報が送付される。ここで、装着者グループのチーム編成者は、装着者グループ管理手段8の管理情報(すなわち登録した装着者グループの構成員に関する情報)を制御することによって、装着者グループの構成員の変更等に柔軟に対処することができる。 Voice information addressed to all members of the wearer group is once distributed to the group channel 7b by the information distribution means 7. 7 a , and the same voice information is sent to each member (each wearer) of the wearer group designated by the wearer group management means 8 . Here, the team organizer of the wearer group can change the members of the wearer group by controlling the management information of the wearer group management means 8 (that is, the information about the members of the registered wearer group). You can deal with it flexibly.

装着者チャネル7aに送付された音声情報は、図2に示すような内部構成を有する装着者音場形成手段3によって、他の音声情報と分離して識別することに適した形に加工される。すなわち、装着者音場形成手段3は、対象とする音声情報の発生源である情報音源20に付随する属性(位置、周波数、音量レベル、位相等)や装着者の生体情報の他に、音声情報配布制御手段6からの配布制御情報等にて指定された音声情報の配布先を示す装着者および装着情報保持手段2に保持されている装着情報が示す該装着者の装着状況に応じて、音場形成の対象とする音声情報を他の音声情報と分離して識別することに適した形に加工する。図2は、図1に示した聴覚ウェアラブルデバイス管理システム100の装着者音場形成手段3の内部構成の一例を示すブロック構成図である。 The voice information sent to the wearer's channel 7a is processed into a form suitable for separate identification from other voice information by the wearer's sound field forming means 3 having an internal configuration as shown in FIG. . That is, the wearer's sound field forming means 3 not only attributes (position, frequency, volume level, phase, etc.) associated with the information sound source 20 that is the source of the target audio information and biological information of the wearer, According to the wearing status of the wearer indicated by the wearing information held in the wearing information held in the wearing information holding means 2 and the wearer indicating the distribution destination of the voice information specified by the distribution control information etc. from the information distribution control means 6, The audio information, which is the object of sound field formation, is processed into a form suitable for being separated from other audio information and identified. FIG. 2 is a block configuration diagram showing an example of the internal configuration of the wearer's sound field forming means 3 of the auditory wearable device management system 100 shown in FIG.

ここで、装着者音場形成手段3は、前述したように、複数の各情報音源20(誘導用音源や各種の情報用音源)の音声情報に関して、音声情報配布制御手段6や装着者用情報選択手段5や装着者グループ管理手段8等によって指定された装着者が識別することが可能な形式に加工した音場を形成する手段である。したがって、装着者音場形成手段3は、一例として図2に示すように、音場選択手段31、両耳用音場形成手段32、片耳用音場形成手段33の各手段と、情報配置デフォルト設定情報34および装着者毎カスタマイズ情報35の各情報とを有して構成されている。 Here, as described above, the wearer's sound field forming means 3 controls the voice information distribution control means 6 and the wearer's information regarding the voice information of each of the plurality of information sound sources 20 (guidance sound sources and various information sound sources). It is means for forming a sound field processed into a format that can be identified by the wearer designated by the selection means 5, the wearer group management means 8, or the like. Therefore, as shown in FIG. 2 as an example, the wearer's sound field forming means 3 includes sound field selecting means 31, binaural sound field forming means 32, monaural sound field forming means 33, and an information layout default. It is composed of setting information 34 and wearer-specific customization information 35 .

音場選択手段31は、聴覚デバイス10を装着している装着者毎に、対象とする情報音源20の属性(位置、周波数、音量レベル等)の他に、情報配置デフォルト設定情報34、装着者毎カスタマイズ情報35、および、装着情報保持手段2にて保持されている聴覚デバイス10の装着情報21に基づいて、装着者向けの音場を形成する形成手段を選択する。そして、選択した形成手段すなわち両耳用音場形成手段32または片耳用音場形成手段33のいずれかを起動する。 For each wearer wearing the hearing device 10, the sound field selection means 31 selects the information layout default setting information 34, the wearer's Based on the customizing information 35 and the wearing information 21 of the hearing device 10 held in the wearing information holding means 2, a forming means for forming a sound field for the wearer is selected. Then, the selected forming means, that is, either the binaural sound field forming means 32 or the monaural sound field forming means 33 is activated.

ここで、装着情報21は、前述したように、装着者毎に、聴覚デバイス10を両耳に装着しているのか、または、左耳・右耳のいずれの耳に装着しているのかを識別する情報を有している。また、情報配置デフォルト設定情報34は、情報音源20の配置位置に関するデフォルト値を設定している情報であり、あらかじめ定めたデフォルトの位置を設定している。また、装着者毎カスタマイズ情報35は、集団の指令者や装着者グループのチーム編成者や装着者自身等からの指示に基づいて情報音源20の配置を前記デフォルト値から装着者毎にカスタマイズした位置に配置したことを示す情報である。つまり、情報配置デフォルト設定情報34および装着者毎カスタマイズ情報35により、各情報音源20の音声情報の音場が、装着者から見てどのような位置に定位しているのかを決定している。 Here, as described above, the wearing information 21 identifies for each wearer whether the hearing device 10 is worn on both ears or whether the hearing device 10 is worn on either the left ear or the right ear. have information to The information layout default setting information 34 is information that sets a default value regarding the layout position of the information sound source 20, and sets a predetermined default position. In addition, the customized information 35 for each wearer is a position where the arrangement of the information sound source 20 is customized for each wearer from the default value based on instructions from the commander of the group, the team organizer of the wearer group, or the wearer himself/herself. This is information indicating that it has been placed in the In other words, the information layout default setting information 34 and the wearer-specific customization information 35 determine what position the sound field of the audio information of each information sound source 20 is localized from the wearer's point of view.

そして、装着情報21の参照結果として、装着者が聴覚デバイス10を両耳に装着していることが分かった場合には、両耳用音場形成手段32において、情報配置デフォルト設定情報34、装着者毎カスタマイズ情報35を参照して、両耳に与える音量レベルの差により、装着者から見て各音声情報の音場が別々の位置に定位しているように各情報音源20の音声情報を加工して、右耳用データ22aと左耳用データ22bとして、データ配布手段4に対して出力される。 Then, when it is found that the wearer wears the hearing device 10 on both ears as a result of referring to the wearing information 21, the binaural sound field forming means 32 generates information arrangement default setting information 34, wearing By referring to the customized information 35 for each person, the audio information of each information sound source 20 is changed so that the sound field of each audio information is localized at different positions as seen from the wearer, depending on the difference in the volume level given to both ears. After processing, they are output to the data distributing means 4 as right ear data 22a and left ear data 22b.

一方、装着情報21の参照結果として、装着者が聴覚デバイス10を左耳または右耳のいずれかの耳に装着していることが分かった場合には、片耳用音場形成手段33において、各情報音源20からの音声情報の判別用として周波数や音量レベルが主に用いられるように各情報音源20の音声情報を加工して、片耳用データ23として、データ配布手段4に対して出力される。 On the other hand, when it is found that the wearer wears the hearing device 10 on either the left ear or the right ear as a result of referring to the wearing information 21, the one-ear sound field forming means 33 The audio information from each information sound source 20 is processed so that the frequency and the volume level are mainly used for discriminating the audio information from the information sound source 20, and is output to the data distribution means 4 as data for one ear 23. .

その結果として、装着者音場形成手段3において、以上のように、音声情報の音場が他の音声情報とは容易に識別することが可能な加工が施された加工データとして、情報音源20の音声情報が、データ配布手段4を介して、該当する聴覚デバイス10に出力されることになる。したがって、聴覚デバイス10の装着者は、データ配布手段4を介して受け取った加工データを聴取することにより、該当する情報音源20の音声情報を容易に理解することが可能になる。 As a result, in the wearer's sound field forming means 3, as described above, the information sound source 20 is processed as processed data that allows the sound field of the sound information to be easily distinguished from other sound information. is output to the corresponding hearing device 10 via the data distribution means 4. Therefore, the wearer of the hearing device 10 can easily understand the audio information of the corresponding information sound source 20 by listening to the processed data received via the data distribution means 4 .

なお、データ配布手段4は、装着情報保持手段2へアクセスして、配布先の装着者が装着している聴覚デバイス10に関する情報を取得して、装着者が装着している聴覚デバイス10に対して、装着者音場形成手段3によって作成された加工データを、該当する情報音源20からの音声情報として送付する。この結果、各情報音源20からの各種の音声情報が、配布先として指定している装着者に対して適切に認識することが可能な形式になって提示されることになる。 The data distribution means 4 accesses the wearing information holding means 2, acquires information about the hearing device 10 worn by the wearer of the distribution destination, and sends the information to the hearing device 10 worn by the wearer. Then, the processed data created by the wearer's sound field forming means 3 is sent as voice information from the corresponding information sound source 20 . As a result, various audio information from each information sound source 20 is presented in a format that can be appropriately recognized by the wearer designated as a distribution destination.

なお、情報音源20の音声情報が誘導用に用いるための絶対位置情報を属性として有し、かつ、聴覚デバイス10または別の何らかの手段の補佐によって装着者の位置や姿勢を推定することが可能な場合には、当該情報音源20は、絶対位置情報が示す位置に固定される。一方、誘導用の絶対位置情報が付随していない情報音源20(情報用音源)の場合には、当該情報音源20は、装着者や指令者等によって音場位置の自由な設定が可能であり、任意の位置に配置することができる。 It should be noted that the voice information of the information sound source 20 has absolute position information as an attribute for guidance, and the position and posture of the wearer can be estimated with the assistance of the hearing device 10 or some other means. In this case, the information sound source 20 is fixed at the position indicated by the absolute position information. On the other hand, in the case of the information sound source 20 (information sound source) not accompanied by absolute position information for guidance, the sound field position of the information sound source 20 can be freely set by the wearer or the commander. , can be placed in any position.

また、情報音源20の配置位置に関しては、通常、情報配置デフォルト設定情報34として、デフォルトの位置をあらかじめ設定しているが、前述したように、装着者毎カスタマイズ情報35により、情報音源20の配置位置を任意にカスタマイズして指定することが可能である。 As for the arrangement position of the information sound source 20, the default position is normally set in advance as the information arrangement default setting information 34. It is possible to arbitrarily customize and specify the position.

(実施形態の効果の説明)
以上に詳細に説明したように、本実施形態においては、次のような効果が得られる。
(Description of effects of the embodiment)
As described in detail above, the present embodiment provides the following effects.

第1に、集団で行動している装着者間で聴覚デバイス10の貸し借りや装着状態の変化に柔軟に対応しつつ、音声情報の提供対象となる各装着者に対して当該音声情報を確実に届けることができる。その理由は、聴覚デバイス10を指定して音声情報を送付するのではなく、装着者を指定して該装着者が装着している聴覚デバイス10に対して音声情報を送付するからである、つまり、装着情報保持手段2により、装着者と聴覚デバイス10とを関連付けた(マッピングした)装着情報をキーにして、音声情報の配布動作を制御しているからである。 Firstly, while flexibly responding to the lending and borrowing of the hearing device 10 among wearers acting in a group and changes in the wearing state, the voice information is reliably provided to each wearer to whom the voice information is to be provided. can deliver. The reason for this is that the audio information is transmitted to the hearing device 10 worn by the wearer by designating the wearer, not by designating the hearing device 10. That is, This is because the wearing information holding means 2 controls the distributing operation of the audio information using the wearing information associated (mapped) between the wearer and the hearing device 10 as a key.

第2に、複数の音声情報が届けられる場合であっても、各装着者はそれぞれの音声情報を聞き分けることができる。その理由は、音声情報の発生源となる情報音源20の属性および聴覚デバイス10の装着状況に連動して音声情報の音場を形成する装着者音場形成手段3を備えているので、情報音源の属性のみならず、聴覚デバイス10を両耳に装着しているか、左右いずれか一方の耳に装着しているかという聴覚デバイス10の装着状況に応じてそれぞれに適した音場を形成することができるからである。さらには、音声情報の発生源となる情報音源の位置に関しては、情報配置デフォルト設定情報34に、デフォルト値として、適切な配置状態をシステムの指令者等があらかじめ設定することもできるし、あるいは、装着者毎カスタマイズ情報35に、必要に応じて、装着者毎に任意にカスタマイズして随時設定することもできる。 Second, each wearer is able to distinguish between different audio information even when multiple audio information is delivered. The reason for this is that the wearer's sound field forming means 3 that forms the sound field of the audio information in conjunction with the attributes of the information sound source 20 that is the source of the audio information and the wearing state of the hearing device 10 is provided. In addition to the above attributes, it is possible to form a sound field suitable for each of the wearing conditions of the hearing device 10, such as whether the hearing device 10 is worn on both ears or on either one of the left and right ears. Because we can. Furthermore, with respect to the position of the information sound source that is the source of the voice information, the system commander or the like can preset an appropriate arrangement state as a default value in the information arrangement default setting information 34, or The customized information 35 for each wearer can be optionally customized and set for each wearer as needed.

第3に、各聴覚デバイス10の装着者を集団として構成している場合であっても、該集団を構成している各個人毎にまたは集団の全員に共通にまたは任意に編成した各装着車グループ単位の構成員全員に共通に、それぞれに応じて分類した音声情報を提供することが容易に可能である。その理由は、音声情報の配布先やグループ編成に関する管理手段として、装着者用情報選択手段5や音声情報配布制御手段6や装着者グループ管理手段8を備えているからである。 Thirdly, even if the wearers of each hearing device 10 are organized as a group, each wearing vehicle commonly or arbitrarily organized for each individual constituting the group or for all the members of the group It is possible to easily provide voice information classified according to each group member in common to all members of the group unit. The reason for this is that the wearer information selection means 5, the voice information distribution control means 6, and the wearer group management means 8 are provided as management means relating to distribution destinations of voice information and group organization.

第4に、絶対座標上に固定された音場定位と装着者相対の音場定位とのいずれかを選ぶことによって、誘導などに用いるための音声情報と個人が情報識別に用いるための音声情報とを分離した状態で併用することができ、かつ、その制御を、集団の指令者が行うのみならず、聴覚デバイス10の能力によっては、装着者側でも行うことができる。その理由は、情報音源20として絶対位置情報を付随した音声情報を用いるものと付随していない音声情報を用いる場合とを併存させ、かつ、情報音源20への絶対位置情報の付加の有無に対応した音場を形成する装着者音場形成手段3を備えているからである。 Fourthly, by selecting either the sound field localization fixed on the absolute coordinates or the sound field localization relative to the wearer, voice information for guidance or the like and voice information for the individual to use for information identification. and can be used together in a separate state, and can be controlled not only by the commander of the group, but also by the wearer depending on the capabilities of the hearing device 10. The reason for this is that the use of voice information accompanied by absolute position information as the information sound source 20 and the use of voice information not accompanied by absolute position information are allowed to coexist, and the presence or absence of addition of absolute position information to the information sound source 20 is supported. This is because the wearer's sound field forming means 3 for forming a sound field that is similar to the wearer's sound field is provided.

(本発明の他の実施形態)
前述の実施形態においては、聴覚デバイス10に限定して音声情報の識別を効果的に行う仕組みに関する実施形態について説明したが、本発明は、視覚デバイスやその他のデバイスとの連携を妨げるものではない。特に、視覚デバイスは、装着者の位置、姿勢に関するより正確な詳細情報を取得することが可能であることが多いので、図1に前述した装着者音場形成手段3との連携を図ることにより、聴覚デバイス10の装着者が受信した音声情報をより的確に識別することが可能になる。
(Another embodiment of the present invention)
In the above-described embodiment, an embodiment related to a mechanism for effectively identifying audio information is limited to the auditory device 10, but the present invention does not impede cooperation with visual devices or other devices. . In particular, the visual device is often capable of acquiring more accurate detailed information about the position and posture of the wearer. , the audio information received by the wearer of the hearing device 10 can be more accurately identified.

また、前述の実施形態においては、聴覚デバイス10として、耳に挿入するイヤホンタイプまたは耳に密着するようなヘッドホンタイプのものを想定して記載している。しかし、かかる場合に限るものではなく、音場形成と装着者識別とが可能なものであれば、聴覚デバイス10として、装着者の身体表面等に配置するものであっても良いし、装着者近傍の外部に設置するものであっても構わない。また、かくのごとき各種のタイプの聴覚デバイス10が複数混在する状況であっても構わない。 Further, in the above-described embodiment, the hearing device 10 is described assuming an earphone type that is inserted into the ear or a headphone type that is in close contact with the ear. However, the present invention is not limited to such a case. As long as it is possible to form a sound field and identify the wearer, the hearing device 10 may be arranged on the wearer's body surface or the like. It may be installed outside in the vicinity. Moreover, it does not matter if a plurality of hearing devices 10 of various types are mixed as described above.

また、前述の実施形態における各種の制御手段や管理手段や設定手段等に関しては、各装着者が保有しているスマートフォンやタブレット端末のようなスマートデバイスとの連携も容易に可能であり、例えば、音場形成に関連する各種の情報設定機能等をスマートデバイスと連動して行うように構成することができる。 In addition, various control means, management means, setting means, etc. in the above-described embodiments can easily be linked with smart devices such as smartphones and tablet terminals owned by each wearer. Various information setting functions related to sound field formation can be configured to be performed in conjunction with the smart device.

さらに、情報音源20として、多数の言語で同時に提供する機能、もしくは、ほぼリアルタイムで翻訳する機能を有する構成にし、装着者音場形成手段3において、装着者個人毎または装着者グループ単位で音声情報と言語とのマッピングを行うことにより、情報音源20の音声情報の識別をより容易化する要素をさらに付加した構成とすることも容易に可能である。 Furthermore, the information sound source 20 is configured to have a function of simultaneously providing information in a large number of languages or a function of translating in almost real time. It is also possible to easily add an element that makes it easier to identify the voice information of the information sound source 20 by mapping between the voice and the language.

以上、本発明の好適な実施形態の構成を説明した。しかし、かかる実施形態は、本発明の単なる例示に過ぎず、何ら本発明を限定するものではないことに留意されたい。本発明の要旨を逸脱することなく、特定用途に応じて種々の変形変更が可能であることが、当業者には容易に理解できよう。 The configuration of the preferred embodiment of the present invention has been described above. However, it should be noted that such embodiments are merely illustrative of the present invention and do not limit the present invention in any way. Those skilled in the art will readily appreciate that various modifications can be made for a particular application without departing from the spirit of the invention.

1 装着者識別手段
2 装着情報保持手段
3 装着者音場形成手段
4 データ配布手段
5 装着者用情報選択手段
6 音声情報配布制御手段
7 情報配布手段
7a 装着者チャネル
7b グループチャネル
8 装着者グループ管理手段
10 聴覚デバイス
20 情報音源
21 装着情報
22a 右耳用データ
22b 左耳用データ
23 片耳用データ
31 音場選択手段
32 両耳用音場形成手段
33 片耳用音場形成手段
34 情報配置デフォルト設定情報
35 装着者毎カスタマイズ情報
100 聴覚ウェアラブルデバイス管理システム
1 wearer identifying means 2 wearing information holding means 3 wearer sound field forming means 4 data distribution means 5 wearer information selection means 6 voice information distribution control means 7 information distribution means 7a wearer channel 7b group channel 8 wearer group management Means 10 hearing device 20 information sound source 21 wearing information 22a right ear data 22b left ear data 23 monaural data 31 sound field selection means 32 binaural sound field forming means 33 monaural sound field forming means 34 information arrangement default setting information 35 Customized information for each wearer 100 Hearing wearable device management system

Claims (11)

集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布し、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御手段と、
前記配布制御情報及び前記装着者と装着状況とが紐付いた装着情報に基づいて取得した前記情報音源の音声情報の配布先及び前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、前記聴覚ウェアラブルデバイスが取得した前記装着者の生体情報及び装着状況に基づいて該装着者が識別することが可能な形に音場形成して加工する装着者音場形成手段と、
前記装着者音場形成手段から受け取った加工データを、配布先の装着者が装着している聴覚ウェアラブルデバイスに、前記装着情報に基づき配布するデータ配布手段と、
を有することを特徴とする聴覚ウェアラブルデバイス管理システム。
distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group;
audio information distribution control means for outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
According to the distribution destination of the audio information of the information sound source and the wearer's wearing state of the auditory wearable device acquired based on the distribution control information and the wearing information in which the wearer and the wearing state are tied , the wearer Wearing in which voice information from the information sound source for the target is processed by forming a sound field into a form that the wearer can identify based on the wearer's biological information acquired by the hearing wearable device and the wearer's wearing situation. a sound field forming means;
data distribution means for distributing the processed data received from the wearer sound field forming means to an auditory wearable device worn by the wearer of the distribution destination based on the wearing information;
A hearing wearable device management system comprising:
前記聴覚ウェアラブルデバイスから前記装着者に装着された旨を受け取った際に、
該聴覚ウェアラブルデバイスから送付されてくる前記装着者を識別する識別情報、前記装着者が発する音声の認識結果、前記装着者の音声によるログイン情報のいずれか1ないし複数の情報に用いて、前記装着者を特定し、
かつ、
特定した該装着者が前記聴覚ウェアラブルデバイスを装着した状況を示す装着状況を識別して、
前記装着者と前記聴覚ウェアラブルデバイスの装着状況とを紐付けた装着情報として、前記装着者と装着している前記聴覚ウェアラブルデバイスの装着状況とを紐付けて前記装着情報として保持している装着情報保持手段に対して出力する装着者識別手段、
をさらに有することを特徴とする請求項1に記載の聴覚ウェアラブルデバイス管理システム。
When receiving from the hearing wearable device that it has been worn by the wearer,
identification information for identifying the wearer sent from the hearing wearable device, a recognition result of the voice uttered by the wearer, or login information by voice of the wearer identify the person
and,
Identifying a wearing state indicating a state in which the identified wearer wears the hearing wearable device,
Wearing information that associates the wearer with the wearing state of the hearing wearable device that the wearer is wearing and is held as the wearing information as wearing information that links the wearer and the wearing state of the hearing wearable device. wearer identification means for outputting to the holding means;
The hearing wearable device management system of claim 1, further comprising:
前記装着者音場形成手段は、前記情報音源からの音声情報を音場形成して加工する際に、
前記装着情報に基づいて、前記装着者が前記聴覚ウェアラブルデバイスを両耳に装着しているかまたは片耳に装着しているかを判別し、
両耳に装着していると判別した場合には、両耳に与える音量レベルの差により、前記装着者から見て各前記情報音源からの音声情報が別々の位置に定位しているように該音声情報を音場形成して加工した結果を右耳用と左耳用として出力し、
一方、片耳に装着していると判別した場合には、各前記情報音源の判別用として主として周波数や音量レベルを用いて前記情報音源それぞれからの音声情報を音場形成して加工した結果を片耳用として出力する、
ことを特徴とする請求項2に記載の聴覚ウェアラブルデバイス管理システム。
When the wearer's sound field forming means forms a sound field and processes the audio information from the information sound source,
Based on the wearing information, determining whether the wearer wears the hearing wearable device in both ears or in one ear,
When it is determined that the device is worn on both ears, the sound information from each of the information sound sources is localized at different positions as seen from the wearer due to the difference in the volume level applied to both ears. Outputs the result of sound field formation and processing of voice information for right and left ears,
On the other hand, when it is discriminated that the user wears it on one ear, the result of processing the voice information from each of the information sound sources by forming a sound field mainly using the frequency and volume level for discriminating each of the information sound sources is processed to the one ear. output for
The auditory wearable device management system according to claim 2, characterized in that:
前記音声情報配布制御手段からの前記配布制御情報に基づき、前記情報音源毎に、それぞれの配布先として、前記装着者個人毎に、前記装着者全員に共通に、または、前記装着者グループとして編成された前記装着者の構成員全員に共通に、のいずれかを選択してそれぞれの前記情報音源の音声情報を配布する情報配布手段、
をさらに有していることを特徴とする請求項1ないし3のいずれかに記載の聴覚ウェアラブルデバイス管理システム。
Based on the distribution control information from the voice information distribution control means, each information sound source is organized as a distribution destination, for each individual wearer, commonly for all wearers, or as a wearer group. information distributing means for distributing the voice information of each of the information sound sources by selecting one of the common to all the members of the wearer who received the information;
4. The auditory wearable device management system according to any one of claims 1 to 3, further comprising:
同報配布先として共通に前記情報音源の音声情報を配布する前記装着者グループを構成する前記装着者の編成を行って管理する装着者グループ管理手段、
をさらに有していることを特徴とする請求項4に記載の聴覚ウェアラブルデバイス管理システム。
Wearer group management means for organizing and managing the wearers constituting the wearer group to which the voice information of the information sound source is commonly distributed as a multicast distribution destination;
5. The hearing wearable device management system of claim 4, further comprising:
前記装着者個人毎に配布する前記情報音源の音声情報を、前記装着者個人が指定する装着者用情報選択手段、
をさらに有していることを特徴とする請求項4または5に記載の聴覚ウェアラブルデバイス管理システム。
wearer information selection means for specifying the voice information of the information sound source to be distributed to each wearer individually by the wearer;
6. The auditory wearable device management system according to claim 4 or 5, further comprising:
前記情報音源として、絶対位置情報を付随している音声情報を誘導用として用いる誘導用音源と、絶対位置情報を付随していない音声情報を情報提供用として用いる情報用音源と、を有し、
前記誘導用音源は、配置位置を固定し、固定した位置をあらかじめ前記情報音源の属性として設定登録し、
一方、前記情報用音源は、任意の位置に配置することが可能であり、任意に配置した位置を前記情報音源の属性として設定登録する、
ことを特徴とする請求項1ないし6のいずれかに記載の聴覚ウェアラブルデバイス管理システム。
As the information sound source, a guidance sound source using voice information accompanied by absolute position information for guidance and an information sound source using voice information not accompanied by absolute position information for information provision,
The guidance sound source has a fixed position, and the fixed position is set and registered in advance as an attribute of the information sound source,
On the other hand, the information sound source can be placed at any position, and the arbitrarily placed position is set and registered as an attribute of the information sound source.
The auditory wearable device management system according to any one of claims 1 to 6, characterized in that:
前記情報用音源を配置する位置としてあらかじめ定めたデフォルトの位置を設定登録する情報配置デフォルト設定情報、
を有していることを特徴とする請求項7に記載の聴覚ウェアラブルデバイス管理システム。
information placement default setting information for setting and registering a predetermined default position as a position to place the information sound source;
8. The hearing wearable device management system of claim 7, comprising:
前記生体情報は、聴覚ウェアラブルデバイスが収集した前記装着者の耳穴形状である、請求項1ないし8のいずれかに記載の聴覚ウェアラブルデバイス管理システム。 9. The auditory wearable device management system according to any one of claims 1 to 8, wherein the biological information is the ear hole shape of the wearer collected by the auditory wearable device. 集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布し、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御ステップと、
前記配布制御情報及び前記装着者と装着状況とが紐付いた装着情報に基づいて取得した前記情報音源の音声情報の配布先及び前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、前記聴覚ウェアラブルデバイスが取得した前記装着者の生体情報及び装着状況に基づいて該装着者が識別することが可能な形に音場形成して加工する装着者音場形成ステップと、
前記加工された加工データを受け取り、配布先の装着者が装着している聴覚ウェアラブルデバイスに、前記装着情報に基づき配布するデータ配布ステップと、
を有することを特徴とする聴覚ウェアラブルデバイス管理方法。
distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group;
an audio information distribution control step of outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
According to the distribution destination of the audio information of the information sound source and the wearer's wearing state of the auditory wearable device acquired based on the distribution control information and the wearing information in which the wearer and the wearing state are tied , the wearer Wearing in which voice information from the information sound source for the target is processed by forming a sound field into a form that the wearer can identify based on the wearer's biological information acquired by the hearing wearable device and the wearer's wearing situation. a sound field forming step;
a data distribution step of receiving the processed processed data and distributing it to an auditory wearable device worn by a wearer of a distribution destination based on the wearing information;
A hearing wearable device management method comprising:
集団を構成して行動する各装着者が装着している聴覚ウェアラブルデバイスに対して1ないし複数の情報音源からの音声情報を配布する処理をコンピュータによって実行し、
各前記情報音源の音声情報の配布先となる前記装着者を指定する配布制御情報を出力する音声情報配布制御機能と、
前記配布制御情報及び前記装着者と装着状況とが紐付いた装着情報に基づいて取得した前記情報音源の音声情報の配布先及び前記装着者の前記聴覚ウェアラブルデバイスの装着状況に応じて、前記装着者向けの前記情報音源からの音声情報を、前記聴覚ウェアラブルデバイスが取得した前記装着者の生体情報及び装着状況に基づいて該装着者が識別することが可能な形に音場形成して加工する装着者音場形成機能と、
前記装着者音場形成機能から受け取った加工データを、配布先の装着者が装着している聴覚ウェアラブルデバイスに、前記装着情報に基づき配布するデータ配布機能と、
を有することを特徴とする聴覚ウェアラブルデバイス管理プログラム。
A computer executes a process of distributing audio information from one or more information sources to an auditory wearable device worn by each wearer who acts as a group,
an audio information distribution control function for outputting distribution control information specifying the wearer to whom the audio information of each information sound source is to be distributed;
According to the distribution destination of the audio information of the information sound source and the wearer's wearing state of the auditory wearable device acquired based on the distribution control information and the wearing information in which the wearer and the wearing state are tied , the wearer Wearing in which voice information from the information sound source for the target is processed by forming a sound field into a form that the wearer can identify based on the wearer's biological information acquired by the hearing wearable device and the wearer's wearing situation. a human sound field forming function;
A data distribution function for distributing processed data received from the wearer sound field forming function to an auditory wearable device worn by a wearer of a distribution destination based on the wearing information;
A hearing wearable device management program comprising:
JP2021186814A 2019-03-26 2021-11-17 Hearing wearable device management system, hearing wearable device management method and its program Active JP7251601B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021186814A JP7251601B2 (en) 2019-03-26 2021-11-17 Hearing wearable device management system, hearing wearable device management method and its program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019058454A JP2020161949A (en) 2019-03-26 2019-03-26 Auditory wearable device management system, auditory wearable device management method and program therefor
JP2021186814A JP7251601B2 (en) 2019-03-26 2021-11-17 Hearing wearable device management system, hearing wearable device management method and its program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019058454A Division JP2020161949A (en) 2019-03-26 2019-03-26 Auditory wearable device management system, auditory wearable device management method and program therefor

Publications (2)

Publication Number Publication Date
JP2022010351A JP2022010351A (en) 2022-01-14
JP7251601B2 true JP7251601B2 (en) 2023-04-04

Family

ID=87852483

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021186814A Active JP7251601B2 (en) 2019-03-26 2021-11-17 Hearing wearable device management system, hearing wearable device management method and its program

Country Status (1)

Country Link
JP (1) JP7251601B2 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008182509A (en) 2007-01-25 2008-08-07 Funai Electric Co Ltd Headphone device and wireless headphone system
JP2009152666A (en) 2007-12-18 2009-07-09 Toshiba Corp Sound output control device, sound reproducing device, and sound output control method
WO2017061218A1 (en) 2015-10-09 2017-04-13 ソニー株式会社 Sound output device, sound generation method, and program
JP2018509820A (en) 2015-02-20 2018-04-05 ハーマン インターナショナル インダストリーズ インコーポレイテッド Personalized headphones
WO2018216121A1 (en) 2017-05-23 2018-11-29 Necプラットフォームズ株式会社 Earpad and earphone using same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008182509A (en) 2007-01-25 2008-08-07 Funai Electric Co Ltd Headphone device and wireless headphone system
JP2009152666A (en) 2007-12-18 2009-07-09 Toshiba Corp Sound output control device, sound reproducing device, and sound output control method
JP2018509820A (en) 2015-02-20 2018-04-05 ハーマン インターナショナル インダストリーズ インコーポレイテッド Personalized headphones
WO2017061218A1 (en) 2015-10-09 2017-04-13 ソニー株式会社 Sound output device, sound generation method, and program
WO2018216121A1 (en) 2017-05-23 2018-11-29 Necプラットフォームズ株式会社 Earpad and earphone using same

Also Published As

Publication number Publication date
JP2022010351A (en) 2022-01-14

Similar Documents

Publication Publication Date Title
US10708703B1 (en) Switching binaural sound
US20220286792A1 (en) Assistive listening device systems, devices and methods for providing audio streams within sound fields
Johnson et al. Impact of hearing aid technology on outcomes in daily life II: Speech understanding and listening effort
TW200816854A (en) Method and apparatus for creating a multi-dimensional communication space for use in a binaural audio system
JP2009043274A (en) Stereoscopic audio visual system for interactive type
TW201820315A (en) Improved audio headset device
CN104735599B (en) The hearing devices of optional aware space positioning with sound source
Johnson et al. Impact of hearing aid technology on outcomes in daily life III: Localization
US11696086B2 (en) Auditory wearable device management system, auditory wearable device management method, and program thereof
US10674259B2 (en) Virtual microphone
JP7251601B2 (en) Hearing wearable device management system, hearing wearable device management method and its program
Mariette Human factors research in audio augmented reality
Lock et al. Bone-conduction audio interface to guide people with visual impairments
JP2023536712A (en) Voice management in the operating room
US10516961B2 (en) Preferential rendering of multi-user free-viewpoint audio for improved coverage of interest
WO2023176389A1 (en) Information processing device, information processing method, and recording medium
Takaki et al. asEars: Designing and Evaluating the User Experience of Wearable Assistive Devices for Single-Sided Deafness
JP2022052798A (en) Sound processing device, sound processing method, and sound processing program
WO2024067994A1 (en) System and method for processing microphone signals
Chinnaraj et al. Speech perception in noise and localization performance of digital noise reduction algorithm in hearing aids with ear-to-ear synchronization
JP2022122533A (en) Hearing support device and system, sound source localization device, input device, computer program, and distance detection device-integrated microphone array
JP2024010864A (en) Information processing apparatus, information processing program, and information processing method
Archer-Boyd et al. Brimijoin, W. Owen (2017) The minimum monitoring signal-to-noise ratio for off-axis signals and its implications for directional hearing aids. Hearing Research. ISSN 1878-5891 (In Press)
First Companies unveil latest offerings at AAA
Davis et al. Demystifying Hearing Assistance Technology

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220913

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221114

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230221

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230306

R151 Written notification of patent or utility model registration

Ref document number: 7251601

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151