JP6014070B2 - Speaker device and conversation support system - Google Patents

Speaker device and conversation support system Download PDF

Info

Publication number
JP6014070B2
JP6014070B2 JP2014049453A JP2014049453A JP6014070B2 JP 6014070 B2 JP6014070 B2 JP 6014070B2 JP 2014049453 A JP2014049453 A JP 2014049453A JP 2014049453 A JP2014049453 A JP 2014049453A JP 6014070 B2 JP6014070 B2 JP 6014070B2
Authority
JP
Japan
Prior art keywords
voice
frequency characteristic
frequency
adjustment amount
speaker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014049453A
Other languages
Japanese (ja)
Other versions
JP2015177194A (en
Inventor
真一路 中石
真一路 中石
Original Assignee
ユニバーサル・サウンドデザイン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ユニバーサル・サウンドデザイン株式会社 filed Critical ユニバーサル・サウンドデザイン株式会社
Priority to JP2014049453A priority Critical patent/JP6014070B2/en
Publication of JP2015177194A publication Critical patent/JP2015177194A/en
Application granted granted Critical
Publication of JP6014070B2 publication Critical patent/JP6014070B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Description

本発明は、スピーカ装置、及び、会話支援システムに係り、特に、聴こえの改善に好適なスピーカ装置、及び、会話支援システムに関するものである。   The present invention relates to a speaker device and a conversation support system, and more particularly to a speaker device and a conversation support system suitable for improving hearing.

従来、音声信号を処理する技術として、例えば、難聴者による音声の理解を補助して聴こえの改善を図る技術が提案されている。   Conventionally, as a technique for processing an audio signal, for example, a technique for improving hearing by assisting a hearing-impaired person in understanding sound.

このような難聴者用の音声理解の補助技術として種々の補聴器が提案されている。補聴器は、難聴による聴こえの問題を解決することを目的とした音の増幅器であり、入力部、増幅部、出力部、電源等から構成され、増幅は電気的あるいは電子的に行われ、単純に音を拡大するだけでなく、音の感度、ダイナミックレンジ、周波数分解能、時間分解能、および方向性といった要素を考慮しながら増幅が行われる。また、必要に応じて不要な雑音をカットし、SN比を向上させることにより聴こえやすくしている。   Various hearing aids have been proposed as assistive technologies for understanding the voice for the hearing impaired. Hearing aids are sound amplifiers intended to solve hearing problems caused by hearing loss, and are composed of an input unit, an amplification unit, an output unit, a power supply, etc., and amplification is performed electrically or electronically, In addition to expanding the sound, amplification is performed taking into account factors such as sound sensitivity, dynamic range, frequency resolution, time resolution, and directionality. Moreover, unnecessary noise is cut as necessary, and the S / N ratio is improved to make it easy to hear.

近年、主流となっているデジタル補聴器は、ソフトウェア上でその特性を変更することが可能であり、調整が容易で即時に行うことができる。また、デジタル制御により高度で複雑な処理が可能となり、補聴器の飛躍的な性能向上が実現されている。   In recent years, digital hearing aids that have become the mainstream can change their characteristics on software, can be easily adjusted, and can be performed immediately. In addition, advanced and complex processing is possible by digital control, and a dramatic improvement in performance of hearing aids has been realized.

しかしながら、補聴器は、補聴器を耳に装着して音声を入力して聴取するため、間近で発せられた音声を聴取するには有効であるが、離れた場所から発生された音声は聴取し難いという問題がある。   However, hearing aids are effective for listening to sounds emitted in the immediate vicinity because they are put on the ears and listened to by inputting sound, but it is difficult to hear sounds generated from a remote place. There's a problem.

また、補聴器は、日本国内では薬事法において管理医療機器(クラスII)に指定されており、法的な規制が行われている。また、基本的に補聴器の使用にあたっては個人の聴力や使用状況に合わせた調整(フィッティング)が必要であり、特定の取り扱い店舗、専門店または医療機関で調節する必要があるといった問題がある。   Hearing aids are designated as managed medical devices (Class II) under the Pharmaceutical Affairs Law in Japan, and are legally regulated. In addition, when using a hearing aid, there is a problem that adjustment (fitting) according to an individual's hearing ability or usage is necessary, and adjustment at a specific store, specialty store, or medical institution is necessary.

特許文献1においては、難聴者が補聴器を装着、携帯する必要なく、種々の生活音を聴取することができるようにすることを目的として、ネットワークを介して接続される複数の放収音装置を備えた放収音システムが提案されている。この放収音システムでは、放収音装置に、音声を収音して音声信号を出力する収音部と、音声信号を入力し、音声を放音する放音部と、収音部が出力した音声信号を他の放収音装置に送信するとともに、他の放収音装置から音声信号を受信する通信部と、通信部が受信した音声信号を入力し、この音声信号について、聴力特性に応じた補正を行い、補正後の音声信号を放音部に入力する補正部と、を設けた構成となっている。   In Patent Document 1, a plurality of sound emission and collection devices connected via a network are provided for the purpose of enabling a hearing-impaired person to listen to various life sounds without having to wear and carry a hearing aid. Proposed sound emission and collection systems have been proposed. In this sound emission and collection system, a sound collection unit that collects sound and outputs a sound signal to the sound emission and collection device, a sound output unit that inputs the sound signal and emits the sound, and a sound collection unit outputs The audio signal is transmitted to another sound emitting and collecting device, and the communication unit that receives the audio signal from the other sound emitting and collecting device, and the audio signal received by the communication unit are input. And a correction unit that performs correction according to the input and inputs the corrected audio signal to the sound output unit.

このような構成により、収音部で収音した音声を他の放収音装置に送信し、また、他の装置から受信した音声について聴覚特性に応じた補正を行う。例えば、人間の聴覚は年齢が高くなるにつれ、高音域が中低音域に比べて聴きとり難くなる性質があるため、これを補償する補正を行う。各放収音装置においては補正後の音声が放音されるため、難聴者が補聴器を装着、携帯する必要なく、種々の生活音を聴取することができる。これらのことにより、特許文献1の技術によれば、難聴者が補聴器を装着、携帯する必要なく、種々の生活音を聴取することができる。   With such a configuration, the sound collected by the sound collection unit is transmitted to another sound emitting and collecting device, and the sound received from the other device is corrected according to the auditory characteristics. For example, human auditory sensation has a property that it becomes difficult to hear the high frequency range as compared to the middle and low frequency range as the age increases. In each sound emission and collection device, the corrected sound is emitted, so that the deaf person can listen to various life sounds without having to wear and carry a hearing aid. By these things, according to the technique of patent document 1, a hearing-impaired person can listen to various life sounds, without having to wear and carry a hearing aid.

また、特許文献2においては、難聴者が音声を聞き取りやすくすることを目的に、マイクより入力された、ひとつひとつの音声信号を、子音域と母音域に時間軸で区分し、子音域音と母音域音をそれぞれ独立した一つもしくは二つ以上の音声周波数帯域に分け、子音域音と母音域音をそれぞれ独立に増減幅処理し、難聴者に提供する技術、及び、子音域音と母音域音が1音ごとに繰り返されることに対応して、聴者側から話者に対して、話の速度を調整するためのペース信号を発生させて提供する技術が記載されている。   In Patent Document 2, for the purpose of making it easier for a hearing-impaired person to hear speech, each speech signal input from a microphone is divided into a consonant region and a vowel region on a time axis, and the consonant region sound and the vowel are separated. A technology that divides the range sound into one or more independent sound frequency bands, processes the consonant range sound and the vowel range independently, and provides them to the hearing impaired, and the consonant range and vowel range A technique for generating and providing a pace signal for adjusting the speed of the talk from the listener side to the speaker corresponding to the sound being repeated for each sound is described.

このような構成として、例えば、子音域音は高音周波数帯域側を増幅し、母音域音は高音周波数帯域側の増幅はしないといった帯域設定を、個々の難聴者が行うことにより、個々の難聴者にとってもっとも聞き取りやすい設定を行うことが可能となる。また、話者に、個々の難聴者にとってもっとも聞き取りやすいペース信号を提供し、話者には、当該ペース信号に基づく速度で話をしてもらうことにより、個々の難聴者にとってもっとも聞き取りやすい速度での聞き取りが可能となる。   As such a configuration, for example, individual deaf persons can perform band settings such that consonant sounds are amplified on the high frequency band side and vowel sounds are not amplified on the high frequency band side. It is possible to make a setting that is easy to hear for the user. Also, by providing the speaker with a pace signal that is most audible to the individual with the hearing loss and having the speaker speak at a speed based on the pace signal, the speaker can hear at the speed that is most audible to the individual with the hearing loss. Can be heard.

また、特許文献3においては、音声入力装置より入力された音声の音声認識に関する情報に基づいて入力音声に対する言語情報データを生成し、生成した言語情報データに基づき入力音声に対する文字画像データを生成して表示装置に表示する技術と共に、入力音声の周波数対スペクトル強度、高低、及び大小に関する情報(音声特徴データ)を生成し、入力音声の周波数対スペクトル強度、高低、及び大小に関する情報に基づき、色の色相、明度及び彩度を決定し、入力音声に対する色情報データを生成して、表示装置上で、文字画像データと共に、時間及び周波数を表す軸を備えた平面上に、色情報データに基づいた色を時間的変化に応じて表示する技術が記載されている。   In Patent Document 3, language information data for input speech is generated based on information related to speech recognition of speech input from a speech input device, and character image data for input speech is generated based on the generated language information data. In addition to the technology for displaying on the display device, information on the frequency vs. spectral intensity, level, and magnitude of the input speech (speech feature data) is generated. The color information data for the input voice is generated and the color information data is generated on the display device together with the character image data on a plane having axes representing time and frequency. Describes a technique for displaying the displayed color in accordance with temporal changes.

入力音声の周波数対スペクトル強度、高低、及び大小に関する情報(サウンドスペクトログラム)により、話者の個人的特徴である性別や感情などを伝達することができ、このような情報を、話者が発した言語を示す文字情報と共に表示装置に表示して難聴者に提示することにより、難聴者は、話者の話す内容を、話者の個人差や感情を含めて理解することができる。   The information (sound spectrogram) on the frequency vs. spectral intensity, height, and magnitude of the input speech can convey the speaker's personal characteristics such as gender and emotions. By displaying on the display device together with character information indicating the language and presenting it to the hearing impaired person, the hearing impaired person can understand the content of the speaker, including individual differences and emotions of the speaker.

特開2008−177745号公報JP 2008-177745 A 特開2003−250197号公報JP 2003-250197 A 特開2005−209000号公報JP 2005-209000 A

本願発明で解決しようとする問題は、上記特許文献1〜3を含めた従来の技術による音声信号の補正では、話者の音声を、聴者に聴き取り易いように補正するために多くの時間が必要となると共に、十分に聴き取り易い音声に補正することが困難な点である。   The problem to be solved by the present invention is that, in the correction of audio signals according to the prior art including the above Patent Documents 1 to 3, it takes a lot of time to correct the speaker's voice so that it can be easily heard by the listener. In addition to being necessary, it is difficult to correct to a sound that is sufficiently easy to hear.

本発明は、上記問題点を解決するためになされたものであり、話者と聴者との会話を快適に行うことを可能とすることである。   The present invention has been made to solve the above-described problems, and it is possible to comfortably carry out a conversation between a speaker and a listener.

上記目的を達成するため、本発明に係るスピーカ装置は、特定の聴者の聴力特性を表す周波数特性に応じて、特定の話者の音声の周波数特性が、音声の基準周波数特性に対応するように予め定められた、各周波数の調整量を記憶する調整量記憶手段と、前記特定の話者の音声を入力して音声信号に変換する入力手段と、前記入力手段で入力された前記音声信号を、前記調整量記憶手段で記憶された各周波数の調整量に基づいて調整する調整手段と、前記調整手段で調整された音声信号を出力する出力手段と、を備えたことを特徴とする。   In order to achieve the above object, the speaker device according to the present invention is configured such that the frequency characteristic of the voice of a specific speaker corresponds to the reference frequency characteristic of the voice according to the frequency characteristic representing the hearing characteristic of the specific listener. Adjustment amount storage means for storing adjustment amounts for each frequency, input means for inputting the voice of the specific speaker and converting it into a sound signal, and the sound signal input by the input means And adjusting means for adjusting based on the adjustment amount of each frequency stored in the adjustment amount storage means, and output means for outputting the audio signal adjusted by the adjusting means.

また、上記目的を達成するため、本発明に係る会話支援システムは、特定の聴者の聴力特性を表す周波数特性に応じて、特定の話者の音声の周波数特性が、音声の基準周波数特性に対応するように予め定められた、各周波数の調整量を記憶する調整量記憶手段、及び、前記調整量記憶手段に記憶された各周波数の調整量を送信する送信手段を有する端末装置と、前記送信手段から送信された前記各周波数の調整量を受信する受信手段、前記受信手段で受信した前記各周波数の調整量を記憶する記憶手段、前記特定の話者の音声を入力して音声信号に変換する入力手段、前記入力手段で入力された前記音声信号を、前記記憶手段で記憶された各周波数の調整量に基づいて調整する調整手段、及び、前記調整手段で調整された音声信号を出力する出力手段を有するスピーカ装置と、を備えたことを特徴とする。   In order to achieve the above object, the conversation support system according to the present invention has a frequency characteristic of a specific speaker corresponding to a reference frequency characteristic of the voice according to the frequency characteristic representing the hearing characteristic of the specific listener. A terminal device having adjustment amount storage means for storing an adjustment amount for each frequency, which is predetermined, and a transmission means for transmitting the adjustment amount for each frequency stored in the adjustment amount storage means; Receiving means for receiving the adjustment amount of each frequency transmitted from the means, storage means for storing the adjustment amount of each frequency received by the receiving means, and inputting the voice of the specific speaker and converting it into a voice signal Input means, adjusting means for adjusting the audio signal input by the input means based on the adjustment amount of each frequency stored in the storage means, and outputting the audio signal adjusted by the adjusting means Characterized by comprising a speaker unit having a power unit.

また、上記会話支援システムにおいて、前記端末装置は、特定の話者の音声の周波数特性を計測する第1の手段と、特定の聴者の聴力特性を表す周波数特性を計測する第2の手段と、予め生成された音声の基準周波数特性を記憶する基準周波数特性記憶手段と、前記第2の手段で計測された特定の聴者の聴力特性を表す周波数特性に応じて、前記第1の手段で計測された前記特定の話者の音声の周波数特性が、前記基準周波数特性記憶手段で記憶された前記基準周波数特性に対応するように調整するための各周波数の調整量を取得する調整手段と、を更に備え、前記調整量記憶手段は、前記調整手段によって取得された各周波数の調整量を記憶することを特徴とする。   In the conversation support system, the terminal device includes a first unit that measures a frequency characteristic of the voice of a specific speaker, a second unit that measures a frequency characteristic that represents the hearing characteristic of the specific listener, Reference frequency characteristic storage means for storing a reference frequency characteristic of speech generated in advance, and a frequency characteristic representing the hearing characteristic of a specific listener measured by the second means is measured by the first means. Adjusting means for acquiring an adjustment amount of each frequency for adjusting the frequency characteristics of the voice of the specific speaker so as to correspond to the reference frequency characteristics stored in the reference frequency characteristics storage means; The adjustment amount storage means stores an adjustment amount of each frequency acquired by the adjustment means.

また、上記会話支援システムにおいて、前記調整手段は、前記第1の手段で計測された前記特定の話者の音声の周波数特性を、前記基準周波数特性記憶手段で記憶された前記基準周波数特性に対応するよう調整する第1の調整手段と、前記第1の調整手段で調整された前記特定の話者の音声の周波数特性を、前記第2の手段で計測された前記特定の聴者の聴力特性を表す周波数特性に対応するよう調整する第2の調整手段と、を備えることを特徴とする。   Further, in the conversation support system, the adjustment unit corresponds to the reference frequency characteristic stored in the reference frequency characteristic storage unit, the frequency characteristic of the voice of the specific speaker measured by the first unit. A first adjusting means for adjusting the frequency characteristics of the voice of the specific speaker adjusted by the first adjusting means, and an audio characteristic of the specific listener measured by the second means. And second adjusting means for adjusting to correspond to the frequency characteristics to be expressed.

また、上記目的を達成するため、本発明に係る会話支援システムは、特定の話者の音声の周波数特性を計測する第1の手段、特定の聴者の聴力特性を表す周波数特性を計測する第2の手段、前記第1の手段で計測した前記特定の話者の音声の周波数特性及び前記第2の手段で計測した前記特定の聴者の聴力特性を表す周波数特性を、ネットワークを介して送信する第1の送信手段、前記ネットワークを介して送信されてきた情報を受信する第1の受信手段、及び、前記第1の受信手段で受信した情報を送信する第2の送信手段、を有する端末装置と、前記端末装置の前記第1の送信手段により前記ネットワークを介して送信された前記特定の話者の音声の周波数特性及び前記特定の聴者の聴力特性を表す周波数特性を受信する第2の受信手段、前記第2の受信手段で受信した前記特定の話者の音声の周波数特性を受信のたびに更新して記憶する第1の記憶手段、前記第2の受信手段で受信した前記特定の聴者の聴力特性を表す周波数特性を受信のたびに更新して記憶する第2の記憶手段、予め生成された音声の基準周波数特性を記憶する第3の記憶手段、前記第2の記憶手段で記憶された特定の聴者の聴力特性を表す周波数特性に応じて、前記第1の記憶手段で記憶された前記特定の話者の音声の周波数特性が、前記第3の記憶手段で記憶された前記基準周波数特性に対応するように調整するための各周波数の調整量を取得する調整手段、前記調整手段で取得した各周波数の調整量を記憶する第4の記憶手段、及び、前記第4の記憶手段で記憶した前記調整量を、前記ネットワークを介して前記端末装置に送信する第2の送信手段、を有する音声信号処理装置と、前記音声信号処理装置の前記第2の送信手段から前記ネットワークを介して送信されて前記第1の受信手段で受信され前記端末装置から前記第2の送信手段により出力される前記調整量を受信する第3の受信手段、前記入力手段で入力された前記調整量を記憶する第5の記憶手段、前記特定の話者の音声を入力して音声信号に変換する音声入力手段、前記音声入力手段で変換された前記音声信号を、前記第5の記憶手段で記憶された前記調整量に基づいて調整する第3の調整手段、及び、前記第3の調整手段で調整された音声信号を出力する音声出力手段、を有するスピーカ装置と、を備えたことを特徴とする。   In order to achieve the above object, the conversation support system according to the present invention is a first means for measuring the frequency characteristic of the voice of a specific speaker, and a second means for measuring a frequency characteristic representing the hearing characteristic of the specific listener. A frequency characteristic representing the frequency characteristic of the voice of the specific speaker measured by the first means and the frequency characteristic representing the hearing characteristic of the specific listener measured by the second means is transmitted via the network. A terminal device comprising: a first transmission unit; a first reception unit that receives information transmitted via the network; and a second transmission unit that transmits information received by the first reception unit; Second receiving means for receiving a frequency characteristic of the voice of the specific speaker transmitted through the network by the first transmitting means of the terminal device and a frequency characteristic representing the hearing characteristic of the specific listener First storage means for updating and storing the frequency characteristics of the voice of the specific speaker received by the second receiving means at each reception, and hearing ability of the specific listener received by the second receiving means A second storage means for updating and storing a frequency characteristic representing the characteristic each time it is received, a third storage means for storing a reference frequency characteristic of a voice generated in advance, and a specification stored in the second storage means The frequency characteristic of the voice of the specific speaker stored in the first storage unit is changed to the reference frequency characteristic stored in the third storage unit in accordance with the frequency characteristic representing the hearing characteristic of the listener. An adjustment unit that acquires an adjustment amount of each frequency for adjustment to correspond, a fourth storage unit that stores an adjustment amount of each frequency acquired by the adjustment unit, and a fourth storage unit that stores the adjustment amount The amount of adjustment is the network An audio signal processing device having a second transmission means for transmitting to the terminal device via the second transmission means of the audio signal processing device via the network and the first reception means. Third receiving means for receiving the adjustment amount received and output from the terminal device by the second transmission means, fifth storage means for storing the adjustment amount input by the input means, and the specific A voice input means for inputting a speaker's voice and converting the voice signal into a voice signal; a third voice adjusting means for adjusting the voice signal converted by the voice input means based on the adjustment amount stored in the fifth storage means; And a speaker device having an audio output means for outputting the audio signal adjusted by the third adjusting means.

本発明によれば、話者の音声特性を、聴き取り易い基準となる話者の音声特性及び聴者の聴力特性にあわせるように調整することで、音声特性の最適化を図ることができ、このように特性が最適化された音声をスピーカ等から出力することにより、聴こえの改善を図ることができ、例えば、補聴器を備えていない難聴者との会話においても、快適なコミュニケーションを実現することが可能となる。   According to the present invention, it is possible to optimize the voice characteristics by adjusting the voice characteristics of the speaker so as to match the voice characteristics of the speaker and the hearing ability of the listener, which are easy to hear. Thus, it is possible to improve the hearing by outputting sound with optimized characteristics from a speaker or the like. For example, comfortable communication can be realized even in a conversation with a hearing-impaired person who does not have a hearing aid. It becomes possible.

本発明に係るスピーカ装置を備えた会話支援システムの第1の実施の形態例を示す構成図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a block diagram which shows the 1st Embodiment of the conversation assistance system provided with the speaker apparatus based on this invention. 図1におけるタブレット端末装置及びスピーカ装置の機能構成例を示すブロック図である。It is a block diagram which shows the function structural example of the tablet terminal device in FIG. 1, and a speaker apparatus. 本発明に係る会話支援システムの第2の実施の形態例を示す構成図である。It is a block diagram which shows the 2nd Embodiment of the conversation assistance system which concerns on this invention. 図1におけるタブレット端末装置で生成された話者の周波数特性の具体例を示す説明図である。It is explanatory drawing which shows the specific example of the frequency characteristic of the speaker produced | generated with the tablet terminal device in FIG. 図1におけるタブレット端末装置で生成された難聴者の聴力特性(オージオグラム)の具体例を示す説明図である。It is explanatory drawing which shows the specific example of the hearing characteristic (audiogram) of a hard-of-hearing person produced | generated with the tablet terminal device in FIG.

以下、図を用いて本発明に係る実施の形態について説明する。まず、図1を用いて、本発明に係る音声信号処理装置を備えた会話支援システムの第1の実施の形態について説明する。   Embodiments according to the present invention will be described below with reference to the drawings. First, a first embodiment of a conversation support system provided with an audio signal processing device according to the present invention will be described with reference to FIG.

図1における会話支援システム10は、タブレット端末装置1と、マイクロフォン2、スピーカ3、及び、処理装置4(図中、「処理(マイコン)」と記載)を有するスピーカ装置5と、を備えている。   A conversation support system 10 in FIG. 1 includes a tablet terminal device 1, a microphone 2, a speaker 3, and a speaker device 5 having a processing device 4 (described as “processing (microcomputer)” in the figure). .

タブレット端末装置1は、図示していないSSD(Solid State Drive、ソリッドステートドライブ)等の記憶装置、及び、Bluetooth(登録商標)又はUSBケーブルを介してのデータの送信を行う送信機能を備えている。   The tablet terminal device 1 includes a storage device such as an SSD (Solid State Drive) (not shown) and a transmission function for transmitting data via a Bluetooth (registered trademark) or USB cable. .

タブレット端末装置1の記憶装置には、特定の聴者の聴力特性を表す周波数特性に応じて、特定の話者の音声の周波数特性が、音声の基準周波数特性に対応するように予め定められた、各周波数の調整量が記憶されてり、タブレット端末装置1の送信機能は、記憶装置で記憶された各周波数の調整量をBluetooth(登録商標)又はUSBケーブルを介してスピーカ装置5に送信する。   In the storage device of the tablet terminal device 1, the frequency characteristic of the voice of the specific speaker is determined in advance according to the frequency characteristic representing the hearing characteristic of the specific listener so as to correspond to the reference frequency characteristic of the voice. The adjustment amount of each frequency is stored, and the transmission function of the tablet terminal device 1 transmits the adjustment amount of each frequency stored in the storage device to the speaker device 5 via Bluetooth (registered trademark) or a USB cable.

なお、特定の聴者の聴力特性としてはオージオグラムがあり、また、各周波数の調整量としては、周波数毎の音圧調整量、Q値、及び、PEQ(Parametric EQ:パラメトリックイコライザ:信号クリップ防止用)等がある。   In addition, there is an audiogram as a hearing characteristic of a specific listener, and the adjustment amount of each frequency includes a sound pressure adjustment amount for each frequency, a Q value, and a PEQ (Parametric EQ: parametric equalizer: for signal clip prevention) ) Etc.

スピーカ装置5は、入力された音声を音声信号に変換するマイクロフォン2、入力された音声信号を音声に変換して出力するスピーカ3、及び、マイクロコンピュータを有する処理装置4を備えている。   The speaker device 5 includes a microphone 2 that converts input sound into a sound signal, a speaker 3 that converts the input sound signal into sound, and a processing device 4 having a microcomputer.

スピーカ装置5の処理装置4は、Bluetooth(登録商標)又はUSBケーブルを介してのデータを受信する受信機能を有しており、タブレット端末装置1から送信されてきた各周波数の調整量を受信し、受信した各周波数の調整量を内蔵されたメモリに記憶させる。   The processing device 4 of the speaker device 5 has a reception function of receiving data via Bluetooth (registered trademark) or a USB cable, and receives the adjustment amount of each frequency transmitted from the tablet terminal device 1. The received adjustment amount of each frequency is stored in a built-in memory.

スピーカ装置5のマイクロフォン2は、入力された特定の話者の音声を音声信号に変換して処理装置4に出力する。   The microphone 2 of the speaker device 5 converts the input voice of a specific speaker into an audio signal and outputs it to the processing device 4.

スピーカ装置5の処理装置4は、マイクロフォン2からの特定の話者の音声信号を、メモリで記憶された各周波数の調整量に基づいて調整する調整機能を有し、この調整機能で調整した音声信号をスピーカ3に出力する。   The processing device 4 of the speaker device 5 has an adjustment function for adjusting the sound signal of a specific speaker from the microphone 2 based on the adjustment amount of each frequency stored in the memory, and the sound adjusted by this adjustment function. The signal is output to the speaker 3.

スピーカ3は、処理装置4から入力された音声信号を音声に変換して出力する。なお、スピーカ3として、例えば、所定方向に強い方向性を有する音声ビームを形成するスピーカを用いることにより、S/N比を向上させることができる。   The speaker 3 converts the sound signal input from the processing device 4 into sound and outputs the sound. Note that the S / N ratio can be improved by using, for example, a speaker that forms a sound beam having a strong directivity in a predetermined direction as the speaker 3.

なお、本実施の形態では、タブレット端末装置1からスピーカ装置5に各周波数の調整量を送信して、スピーカ装置5で利用する構成としているが、例えば、スピーカ装置5に接続されたUSBメモリ又はSDメモリ等に各周波数の調整量を記憶しておき、スピーカ装置5単体で、音声の調整を行う構成としても良い。   In the present embodiment, the adjustment amount of each frequency is transmitted from the tablet terminal device 1 to the speaker device 5 and used by the speaker device 5. For example, a USB memory connected to the speaker device 5 or An adjustment amount of each frequency may be stored in an SD memory or the like, and the sound adjustment may be performed by the speaker device 5 alone.

次に、図2を用いて、図1におけるタブレット端末装置1及びスピーカ装置5が備える機能に関して説明する。   Next, functions of the tablet terminal device 1 and the speaker device 5 in FIG. 1 will be described with reference to FIG.

タブレット端末装置1は、CPU及び記憶装置を有しプログラム(以下、アプリともいう)に基づくコンピュータ処理を実行するものであり、アプリを実行して実現される機能として、第1の計測部1a、第2の計測部1b、調整部1c、及び、送信部1d、を備え、更に、SSD等の記憶装置からなる基準周波数特性記憶部1e及び調整量記憶部1fを備えている。   The tablet terminal device 1 has a CPU and a storage device and executes computer processing based on a program (hereinafter also referred to as an app). As functions realized by executing the app, the first measurement unit 1a, A second measurement unit 1b, an adjustment unit 1c, and a transmission unit 1d are provided, and further, a reference frequency characteristic storage unit 1e and an adjustment amount storage unit 1f including a storage device such as an SSD are provided.

なお、タブレット端末装置1における第1の計測部1a、第2の計測部1b、調整部1c、及び、送信部1dは、各々、図示していないバッファやメモリ等の記憶装置を介してデータの送受信を行う。   Note that the first measurement unit 1a, the second measurement unit 1b, the adjustment unit 1c, and the transmission unit 1d in the tablet terminal device 1 each receive data via a storage device such as a buffer or a memory (not shown). Send and receive.

また、タブレット端末装置1は、本実施の形態では、医師や看護師、又は、福祉関係者が操作するものである。   Moreover, the tablet terminal device 1 is operated by a doctor, a nurse, or a welfare person in the present embodiment.

タブレット端末装置1の第1の計測部1aは、特定の話者が予め用意した文章を読み上げたときの音声信号を取得し、取得した音声信号に基づいて、特定の話者の音声の周波数特性を計測する。第2の計測部1bは、特定の聴者の聴力の検査結果に基づいて、特定の聴者の聴力特性を表す周波数特性を計測する。   The 1st measurement part 1a of the tablet terminal device 1 acquires the audio | voice signal when a specific speaker reads the sentence prepared beforehand, Based on the acquired audio | voice signal, the frequency characteristic of the audio | voice of a specific speaker Measure. The second measuring unit 1b measures a frequency characteristic representing the hearing characteristic of the specific listener based on the test result of the specific listener's hearing ability.

基準周波数特性記憶部1eには、予め生成された音声の基準周波数特性が記憶される。   The reference frequency characteristic storage unit 1e stores a reference frequency characteristic of speech generated in advance.

調整部1cは、第2の計測部1bで計測された特定の聴者の聴力特性を表す周波数特性に応じて、第1の計測部1aで計測された特定の話者の音声の周波数特性が、基準周波数特性記憶部1eで記憶された基準周波数特性に対応するように調整するための各周波数の調整量を決定するための画面を、操作者に対して表示し、操作者による操作に応じて、第2の計測部1bで計測された特定の聴者の聴力特性を表す周波数特性に応じて、第1の計測部1aで計測された特定の話者の音声の周波数特性が、基準周波数特性記憶部1eで記憶された基準周波数特性に対応するように調整するための各周波数の調整量を取得する。   The adjusting unit 1c has the frequency characteristic of the voice of the specific speaker measured by the first measuring unit 1a according to the frequency characteristic representing the hearing characteristic of the specific listener measured by the second measuring unit 1b. A screen for determining an adjustment amount of each frequency for adjustment so as to correspond to the reference frequency characteristic stored in the reference frequency characteristic storage unit 1e is displayed to the operator, and according to an operation by the operator The frequency characteristic of the voice of the specific speaker measured by the first measurement unit 1a is stored in the reference frequency characteristic memory according to the frequency characteristic representing the hearing characteristic of the specific listener measured by the second measurement unit 1b. An adjustment amount of each frequency for adjusting to correspond to the reference frequency characteristic stored in the unit 1e is acquired.

調整量記憶部1fは、調整部1cによって取得された各周波数の調整量を記憶する。送信部1dは、調整量記憶部1fで記憶された各周波数の調整量をBluetooth(登録商標)又はUSBケーブルを介してスピーカ装置5に送信する。   The adjustment amount storage unit 1f stores the adjustment amount of each frequency acquired by the adjustment unit 1c. The transmission unit 1d transmits the adjustment amount of each frequency stored in the adjustment amount storage unit 1f to the speaker device 5 via Bluetooth (registered trademark) or a USB cable.

スピーカ装置5は、マイクロフォン2、スピーカ3、及び、処理装置4を備え、処理装置4は、CPU及び記憶装置を有しプログラム(以下、アプリともいう)に基づくコンピュータ処理を実行することで実現される機能として、受信部4a、及び、音声調整部4bを備え、更に調整量記憶部4cを備えている。   The speaker device 5 includes a microphone 2, a speaker 3, and a processing device 4. The processing device 4 includes a CPU and a storage device, and is realized by executing computer processing based on a program (hereinafter also referred to as an application). As functions, the receiver 4a and the sound adjuster 4b are provided, and an adjustment amount storage 4c is further provided.

スピーカ装置5の処理装置4における受信部4aは、タブレット端末装置1の第1の計測部1aから送信された各周波数の調整量を受信する。調整量記憶部4cは、受信部4aで受信した各周波数の調整量を記憶する。   The receiving unit 4 a in the processing device 4 of the speaker device 5 receives the adjustment amount of each frequency transmitted from the first measuring unit 1 a of the tablet terminal device 1. The adjustment amount storage unit 4c stores the adjustment amount of each frequency received by the reception unit 4a.

音声調整部4bは、イコライザ機能を備え、調整量記憶部4cで記憶された各周波数の調整量の計測・調整に用いられた特定話者と特定聴者との組による会話時に、マイクロフォン2で入力された特定話者の音声の音声信号を、調整量記憶部4cで記憶された各周波数の調整量に基づいて調整する。スピーカ3は、音声調整部4bで調整された音声信号を音声に変換して出力する。   The voice adjustment unit 4b has an equalizer function, and is input by the microphone 2 at the time of a conversation between a specific speaker and a specific listener used to measure and adjust the adjustment amount of each frequency stored in the adjustment amount storage unit 4c. The voice signal of the voice of the specified speaker is adjusted based on the adjustment amount of each frequency stored in the adjustment amount storage unit 4c. The speaker 3 converts the sound signal adjusted by the sound adjusting unit 4b into sound and outputs the sound.

なお、調整部1cは、第1の計測部1aで計測された特定の話者の音声の周波数特性を、基準周波数特性記憶部1eで記憶された基準周波数特性に対応するよう調整する第1の調整部と、第1の調整部で調整された特定の話者の音声の周波数特性を、第2の計測部1bで計測された特定の聴者の聴力特性を表す周波数特性に対応するよう調整する第2の調整部と、を備えた構成としても良い。   The adjustment unit 1c adjusts the frequency characteristic of the voice of the specific speaker measured by the first measurement unit 1a so as to correspond to the reference frequency characteristic stored in the reference frequency characteristic storage unit 1e. The frequency characteristic of the voice of the specific speaker adjusted by the adjusting unit and the first adjusting unit is adjusted so as to correspond to the frequency characteristic representing the hearing characteristic of the specific listener measured by the second measuring unit 1b. It is good also as a structure provided with the 2nd adjustment part.

また、予め聴き取り易い音声で話す話者に予め定められた文章を読んでもらい、その際の計測した周波数特性を、基準周波数特性として、基準周波数特性記憶部1eに記憶する。そして、周波数特性の調整対象となる話者に同じ文章を読ませ、その際に、第1の計測部1aで計測した周波数特性を、特定の話者の音声の周波数特性とする。   Further, a predetermined sentence is read by a speaker who speaks with a voice that is easy to hear in advance, and the frequency characteristic measured at that time is stored in the reference frequency characteristic storage unit 1e as a reference frequency characteristic. Then, the same sentence is read by the speaker whose frequency characteristic is to be adjusted, and the frequency characteristic measured by the first measuring unit 1a is used as the frequency characteristic of the voice of the specific speaker.

次に、図3を用いて、本発明に係る音声信号処理装置を備えた会話支援システムの第2の実施の形態について説明する。   Next, a second embodiment of the conversation support system including the audio signal processing device according to the present invention will be described with reference to FIG.

図3における会話支援システム30は、タブレット端末装置1Aと、マイクロフォン2A、スピーカ3A、及び、処理装置4A(図中、「処理(マイコン)」と記載)を有するスピーカ装置5Aと、インターネット等のネットワーク31を介してタブレット端末装置1Aに接続される音声信号処理装置32とを備えている。   A conversation support system 30 in FIG. 3 includes a tablet terminal device 1A, a microphone 2A, a speaker 3A, and a speaker device 5A having a processing device 4A (described as “processing (microcomputer)” in the figure), and a network such as the Internet. And an audio signal processing device 32 connected to the tablet terminal device 1 </ b> A via 31.

タブレット端末装置1Aは、図2で示した第1の計測部1a、第2の計測部1b、及び、送信部1d、を備え、更に、各々図示していない、ネットワーク31を介してのデータの送信を行う送信機能、及び、ネットワーク31を介してのデータの受信を行う受信機能を備えている。   The tablet terminal device 1A includes the first measurement unit 1a, the second measurement unit 1b, and the transmission unit 1d illustrated in FIG. 2, and each of the data via the network 31 that is not illustrated. A transmission function for transmitting data and a reception function for receiving data via the network 31 are provided.

タブレット端末装置1Aの第1の計測部1aは、特定の話者が予め用意した文章を読み上げたときの音声信号を取得し、取得した音声信号に基づいて、特定の話者の音声の周波数特性を計測する。第2の計測部1bは、特定の聴者の聴力の検査結果に基づいて、特定の聴者の聴力特性を表す周波数特性を計測する。   The first measurement unit 1a of the tablet terminal device 1A acquires an audio signal when a specific speaker reads a sentence prepared in advance, and based on the acquired audio signal, the frequency characteristics of the audio of the specific speaker Measure. The second measuring unit 1b measures a frequency characteristic representing the hearing characteristic of the specific listener based on the test result of the specific listener's hearing ability.

タブレット端末装置1Aは、具備した送信機能により、第1の計測部1aで計測した特定の話者の音声の周波数特性及び第2の計測部1bで計測した特定の聴者の聴力特性を表す周波数特性を、インターネット等のネットワーク31を介して音声信号処理装置32に送信する。   1 A of tablet terminal devices are the frequency characteristics showing the frequency characteristic of the voice of the specific speaker measured by the 1st measurement part 1a, and the auditory characteristic of the specific listener measured by the 2nd measurement part 1b with the transmission function which it comprised. Is transmitted to the audio signal processing device 32 via the network 31 such as the Internet.

タブレット端末装置1Aは具備した受信機能により、ネットワーク31を介して音声信号処理装置32から送信されてきた情報を受信する。タブレット端末装置1Aの送信部1dは、ネットワーク31を介して受信機能で受信した情報を、スピーカ装置5Aに送信する。   The tablet terminal apparatus 1 </ b> A receives information transmitted from the audio signal processing apparatus 32 via the network 31 by the reception function provided. The transmission unit 1d of the tablet terminal device 1A transmits information received by the reception function via the network 31 to the speaker device 5A.

音声信号処理装置32は、データを記憶するデータベース32a、及び、プログラムに基づくコンピュータ処理を行うサーバ32bを備えており、サーバ32bに内蔵された送信機能及び受信機能を用いてネットワーク31を介してタブレット端末装置1Aとのデータの送受信を行う。   The audio signal processing device 32 includes a database 32a for storing data, and a server 32b for performing computer processing based on a program, and a tablet via the network 31 using a transmission function and a reception function built in the server 32b. Data is transmitted to and received from the terminal device 1A.

まず、サーバ32bは、具備した受信機能により、タブレット端末装置1Aの送信機能によりネットワーク31を介して送信された特定の話者の音声の周波数特性及び特定の聴者の聴力特性を表す周波数特性を受信する。   First, the server 32b receives the frequency characteristic representing the frequency characteristic of the voice of the specific speaker and the hearing characteristic of the specific listener transmitted via the network 31 by the transmission function of the tablet terminal device 1A by the reception function provided. To do.

そして、音声信号処理装置32のデータベース32aは、ネットワーク31を介して受信した特定の話者の音声の周波数特性及び特定の聴者の聴力特性を表す周波数特性の各々を受信のたびに更新して記憶する。   Then, the database 32a of the audio signal processing device 32 updates and stores each of the frequency characteristics representing the voice characteristics of the specific speaker received through the network 31 and the frequency characteristics representing the hearing characteristics of the specific listener each time it is received. To do.

なお、データベース32aは、予め生成された音声の基準周波数特性を記憶する。   Note that the database 32a stores a reference frequency characteristic of speech generated in advance.

音声信号処理装置32のサーバ32bは、具備した調整機能により、特定の聴者及び特定の話者のペアの各々について、データベース32aで記憶された特定の聴者の聴力特性を表す周波数特性に応じて、データベース32aで記憶された特定の話者の音声の周波数特性が、データベース32aで記憶された基準周波数特性に対応するように調整するための各周波数の調整量を取得する。   The server 32b of the audio signal processing device 32 uses the adjustment function provided for each pair of the specific listener and the specific speaker according to the frequency characteristic representing the hearing characteristic of the specific listener stored in the database 32a. An adjustment amount of each frequency for adjusting the frequency characteristics of the voice of a specific speaker stored in the database 32a to correspond to the reference frequency characteristics stored in the database 32a is acquired.

音声信号処理装置32のデータベース32aは、特定の聴者及び特定の話者のペアの各々について、サーバ32bの調整機能で取得した各周波数の調整量を記憶する。   The database 32a of the audio signal processing device 32 stores the adjustment amount of each frequency acquired by the adjustment function of the server 32b for each of a specific listener and a specific speaker pair.

音声信号処理装置32のサーバ32bは、具備した送信機能により、データベース32aで記憶した、該当するペアについての調整量を、ネットワーク31を介してタブレット端末装置1Aに送信する。   The server 32b of the audio signal processing device 32 transmits the adjustment amount for the corresponding pair stored in the database 32a to the tablet terminal device 1A via the network 31 by the transmission function provided.

タブレット端末装置1Aは、具備した受信機能により、音声信号処理装置32のサーバ32bからネットワーク31を介して送信されてきた、該当するペアについての調整量を受信して、調整量記憶部1fで記憶し、記憶した調整量を、送信部1dにより、Bluetooth(登録商標)又はUSBケーブルを介してスピーカ装置5Aに送信する。   The tablet terminal device 1A receives the adjustment amount for the corresponding pair transmitted from the server 32b of the audio signal processing device 32 via the network 31 by the provided reception function, and stores it in the adjustment amount storage unit 1f. Then, the stored adjustment amount is transmitted to the speaker device 5A via the Bluetooth (registered trademark) or the USB cable by the transmission unit 1d.

スピーカ装置5Aは、処理装置4Aにおける受信部4aにより、音声信号処理装置32におけるサーバ32bの送信機能によりネットワーク31を介して送信されタブレット端末装置1Aが具備した受信機能により受信され送信部1dにより出力された調整量を受信する。   The speaker device 5A is transmitted via the network 31 by the transmission function of the server 32b in the audio signal processing device 32 by the reception unit 4a in the processing device 4A, received by the reception function provided in the tablet terminal device 1A, and output by the transmission unit 1d. The adjusted amount received is received.

スピーカ装置5Aは、受信部4aにより受信した調整量を、処理装置4Aにおける調整量記憶部4cで記憶する。   The speaker device 5A stores the adjustment amount received by the reception unit 4a in the adjustment amount storage unit 4c in the processing device 4A.

スピーカ装置5Aは、マイクロフォン2Aで、特定の話者の音声を入力して音声信号に変換すると、変換された音声信号を、処理装置4Aにおける音声調整部4bにより、調整量記憶部4cで記憶された調整量に基づいて調整し、このように調整された音声信号をスピーカ3Aにより音声に変換して出力する。   When the speaker device 5A receives the voice of a specific speaker and converts it into a voice signal by the microphone 2A, the converted voice signal is stored in the adjustment amount storage unit 4c by the voice adjustment unit 4b in the processing device 4A. The sound signal adjusted in this way is converted into sound by the speaker 3A and output.

図4は、図2のタブレット端末装置1における第1の計測部1aで計測された話者の周波数特性の具体例を示しており、横軸に周波数、縦軸に音圧(dB)が示されている。この計測では、周波数19〜19952Hz間の10バンドが選択されている。   FIG. 4 shows a specific example of the frequency characteristic of the speaker measured by the first measuring unit 1a in the tablet terminal device 1 of FIG. 2, where the horizontal axis represents frequency and the vertical axis represents sound pressure (dB). Has been. In this measurement, 10 bands between frequencies 19 to 19952 Hz are selected.

図5は、図2のタブレット端末装置1における第2の計測部1bで計測された聴者の聴力特性(オージオグラム)の具体例を示しており、横軸に周波数、縦軸に聴力レベル(dB)が示されている。図中の白抜きの丸印が右耳の気導聴力、バツ印が左耳の気導聴力、「[ 」が右耳の骨導聴力、「 ]」が左耳の骨導聴力を各々示している。各周波数に対する聴力レベル(dB)を結んだ線が上から下にいくほど聴力が低下している。   FIG. 5 shows a specific example of the hearing characteristics (audiogram) of the listener measured by the second measuring unit 1b in the tablet terminal device 1 of FIG. 2, with the horizontal axis representing frequency and the vertical axis representing hearing level (dB). )It is shown. In the figure, the white circle indicates the right ear's air conduction hearing ability, the cross indicates the left ear's air conduction hearing ability, "[" indicates the right ear bone conduction hearing ability, and "]" indicates the left ear bone conduction hearing ability. ing. The degree of hearing decreases as the line connecting the hearing level (dB) for each frequency goes from top to bottom.

以上、各図を用いて説明したように、本発明に係るスピーカ装置、及び、会話支援システムでは、会話中の話者の音声が、予め聴きやすい音声に調整された際の調整量に基づいて調整されるので、例えば、聴者が難聴者であっても、相手の音声も聴き取り易くなり、補聴器等を用いることなく、会話における快適なコミュニケーションを図ることが可能である。   As described above with reference to the drawings, in the speaker device and the conversation support system according to the present invention, based on the adjustment amount when the voice of the speaker in conversation is adjusted in advance to a voice that is easy to hear. For example, even if the listener is a hearing-impaired person, it is easy to hear the other party's voice, and comfortable communication in conversation can be achieved without using a hearing aid or the like.

なお、本発明は、各図を用いて説明した各実施の形態の例に限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能である。例えば、本実施の形態の各例では、タブレット端末装置1,1Aにおける第1の計測部1a、第2の計測部1b、及び、調整部1c等を、CPUと記憶装置を備えたコンピュータ装置のプログラムに基づく処理で実現される機能としているが、論理素子回路からなるハードウェア構成で実現することでも良い。   In addition, this invention is not limited to the example of each embodiment demonstrated using each figure, In the range which does not deviate from the summary, it can be variously changed. For example, in each example of the present embodiment, the first measurement unit 1a, the second measurement unit 1b, the adjustment unit 1c, and the like in the tablet terminal devices 1 and 1A are the same as those of a computer device including a CPU and a storage device. Although the function is realized by processing based on a program, it may be realized by a hardware configuration including a logic element circuit.

1,1A タブレット端末装置
1a 第1の計測部
1b 第2の計測部
1c 調整部
1d 送信部
1e 基準周波数特性記憶部
1f 調整量記憶部
2,2A マイクロフォン
3,3A スピーカ
4,4A 処理装置
4a 受信部
4b 音声調整部
4c 調整量記憶部
5,5A スピーカ装置
10,30 会話支援システム
31 ネットワーク
32 音声信号処理装置
32a データベース
32b サーバ
1, 1A Tablet terminal device 1a First measurement unit 1b Second measurement unit 1c Adjustment unit 1d Transmission unit 1e Reference frequency characteristic storage unit 1f Adjustment amount storage unit 2, 2A Microphone 3, 3A Speaker 4, 4A Processing device 4a Reception Unit 4b audio adjustment unit 4c adjustment amount storage unit 5, 5A speaker device 10, 30 conversation support system 31 network 32 audio signal processing device 32a database 32b server

Claims (2)

特定の聴者の聴力特性を表す周波数特性に応じて、特定の話者の音声の周波数特性が、音声の基準周波数特性に対応するように予め定められた、各周波数の調整量を記憶する調整量記憶手段、及び、前記調整量記憶手段に記憶された各周波数の調整量を送信する送信手段を有する端末装置と、
前記送信手段から送信された前記各周波数の調整量を受信する受信手段、前記受信手段で受信した前記各周波数の調整量を記憶する記憶手段、前記特定の話者の音声を入力して音声信号に変換する入力手段、前記入力手段で入力された前記音声信号を、前記記憶手段で記憶された各周波数の調整量に基づいて調整する調整手段、及び、前記調整手段で調整された音声信号を出力する出力手段を有するスピーカ装置と、
を備え
前記端末装置は、
特定の話者の音声の周波数特性を計測する第1の手段と、
特定の聴者の聴力特性を表す周波数特性を計測する第2の手段と、
予め生成された音声の基準周波数特性を記憶する基準周波数特性記憶手段と、
前記第2の手段で計測された特定の聴者の聴力特性を表す周波数特性に応じて、前記第1の手段で計測された前記特定の話者の音声の周波数特性が、前記基準周波数特性記憶手段で記憶された前記基準周波数特性に対応するように調整するための各周波数の調整量を取得する調整手段と、
を更に備え、
前記調整量記憶手段は、前記調整手段によって取得された各周波数の調整量を記憶し、
前記調整手段は、
前記第1の手段で計測された前記特定の話者の音声の周波数特性を、前記基準周波数特性記憶手段で記憶された前記基準周波数特性に対応するよう調整する第1の調整手段と、
前記第1の調整手段で調整された前記特定の話者の音声の周波数特性を、前記第2の手段で計測された前記特定の聴者の聴力特性を表す周波数特性に対応するよう調整する第2の調整手段と、を備え、前記第1の調整手段及び前記第2の調整手段による調整により、各周波数の調整量を取得する
会話支援システム。
An adjustment amount for storing an adjustment amount of each frequency, which is predetermined so that the frequency characteristic of the voice of the specific speaker corresponds to the reference frequency characteristic of the voice according to the frequency characteristic representing the hearing characteristic of the specific listener A terminal device having storage means, and transmission means for transmitting the adjustment amount of each frequency stored in the adjustment amount storage means;
Receiving means for receiving the adjustment amount of each frequency transmitted from the transmitting means, storage means for storing the adjustment amount of each frequency received by the receiving means, voice signal by inputting the voice of the specific speaker Input means for converting to the input means, adjustment means for adjusting the audio signal input by the input means based on the adjustment amount of each frequency stored in the storage means, and the audio signal adjusted by the adjustment means A speaker device having output means for outputting;
Equipped with a,
The terminal device
A first means for measuring the frequency characteristics of the voice of a specific speaker;
A second means for measuring frequency characteristics representing the hearing characteristics of a particular listener;
A reference frequency characteristic storage means for storing a reference frequency characteristic of a voice generated in advance;
According to the frequency characteristic representing the hearing characteristic of the specific listener measured by the second means, the frequency characteristic of the voice of the specific speaker measured by the first means is the reference frequency characteristic storage means. Adjusting means for acquiring an adjustment amount of each frequency for adjusting to correspond to the reference frequency characteristic stored in
Further comprising
The adjustment amount storage means stores an adjustment amount of each frequency acquired by the adjustment means,
The adjusting means includes
First adjusting means for adjusting a frequency characteristic of the voice of the specific speaker measured by the first means so as to correspond to the reference frequency characteristic stored in the reference frequency characteristic storing means;
A second frequency characteristic for adjusting the frequency characteristic of the voice of the specific speaker adjusted by the first adjusting means to correspond to the frequency characteristic representing the hearing characteristic of the specific listener measured by the second means; A conversation support system that acquires an adjustment amount of each frequency by adjustment by the first adjustment unit and the second adjustment unit .
特定の話者の音声の周波数特性を計測する第1の手段、特定の聴者の聴力特性を表す周波数特性を計測する第2の手段、前記第1の手段で計測した前記特定の話者の音声の周波数特性及び前記第2の手段で計測した前記特定の聴者の聴力特性を表す周波数特性を、ネットワークを介して送信する第1の送信手段、前記ネットワークを介して送信されてきた情報を受信する第1の受信手段、及び、前記第1の受信手段で受信した情報を送信する第2の送信手段、を有する端末装置と、
前記端末装置の前記第1の送信手段により前記ネットワークを介して送信された前記特定の話者の音声の周波数特性及び前記特定の聴者の聴力特性を表す周波数特性を受信する第2の受信手段、前記第2の受信手段で受信した前記特定の話者の音声の周波数特性を受信のたびに更新して記憶する第1の記憶手段、前記第2の受信手段で受信した前記特定の聴者の聴力特性を表す周波数特性を受信のたびに更新して記憶する第2の記憶手段、予め生成された音声の基準周波数特性を記憶する第3の記憶手段、前記第2の記憶手段で記憶された特定の聴者の聴力特性を表す周波数特性に応じて、前記第1の記憶手段で記憶された前記特定の話者の音声の周波数特性が、前記第3の記憶手段で記憶された前記基準周波数特性に対応するように調整するための各周波数の調整量を取得する調整手段、前記調整手段で取得した各周波数の調整量を記憶する第4の記憶手段、及び、前記第4の記憶手段で記憶した前記調整量を、前記ネットワークを介して前記端末装置に送信する第2の送信手段、を有する音声信号処理装置と、
前記音声信号処理装置の前記第2の送信手段から前記ネットワークを介して送信されて前記第1の受信手段で受信され前記端末装置から前記第2の送信手段により出力される前記調整量を受信する第3の受信手段、前記第3の受信手段で受信された前記調整量を記憶する第5の記憶手段、前記特定の話者の音声を入力して音声信号に変換する音声入力手段、前記音声入力手段で変換された前記音声信号を、前記第5の記憶手段で記憶された前記調整量に基づいて調整する第3の調整手段、及び、前記第3の調整手段で調整された音声信号を出力する音声出力手段、を有するスピーカ装置と、
を備えた会話支援システム。
First means for measuring frequency characteristics of voice of a specific speaker, second means for measuring frequency characteristics representing hearing characteristics of a specific listener, and voice of the specific speaker measured by the first means The first transmission means for transmitting the frequency characteristic representing the frequency characteristic of the specific listener and the frequency characteristic representing the hearing characteristic measured by the second means via the network, and receiving the information transmitted via the network A terminal device comprising: a first receiving unit; and a second transmitting unit configured to transmit information received by the first receiving unit;
Second receiving means for receiving a frequency characteristic representing the frequency characteristic of the voice of the specific speaker and the hearing characteristic of the specific listener transmitted by the first transmission means of the terminal device via the network; First storage means for updating and storing the frequency characteristics of the voice of the specific speaker received by the second receiving means at each reception, and hearing ability of the specific listener received by the second receiving means A second storage means for updating and storing a frequency characteristic representing the characteristic each time it is received, a third storage means for storing a reference frequency characteristic of a voice generated in advance, and a specification stored in the second storage means The frequency characteristic of the voice of the specific speaker stored in the first storage unit is changed to the reference frequency characteristic stored in the third storage unit in accordance with the frequency characteristic representing the hearing characteristic of the listener. Adjust to be compatible Adjustment means for acquiring the adjustment amount of each frequency for the purpose, fourth storage means for storing the adjustment amount of each frequency acquired by the adjustment means, and the adjustment amount stored in the fourth storage means, An audio signal processing device having second transmission means for transmitting to the terminal device via a network;
The adjustment amount transmitted from the second transmission unit of the audio signal processing device via the network, received by the first reception unit, and output from the terminal device by the second transmission unit is received. Third receiving means, fifth storage means for storing the adjustment amount received by the third receiving means, voice input means for inputting the voice of the specific speaker and converting it into a voice signal, the voice Third adjustment means for adjusting the audio signal converted by the input means based on the adjustment amount stored in the fifth storage means, and the audio signal adjusted by the third adjustment means A speaker device having audio output means for outputting;
Conversation support system with
JP2014049453A 2014-03-12 2014-03-12 Speaker device and conversation support system Active JP6014070B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014049453A JP6014070B2 (en) 2014-03-12 2014-03-12 Speaker device and conversation support system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2014049453A JP6014070B2 (en) 2014-03-12 2014-03-12 Speaker device and conversation support system

Publications (2)

Publication Number Publication Date
JP2015177194A JP2015177194A (en) 2015-10-05
JP6014070B2 true JP6014070B2 (en) 2016-10-25

Family

ID=54256019

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014049453A Active JP6014070B2 (en) 2014-03-12 2014-03-12 Speaker device and conversation support system

Country Status (1)

Country Link
JP (1) JP6014070B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05300595A (en) * 1992-04-21 1993-11-12 Terumo Corp Hearing aid
JP5248186B2 (en) * 2008-04-25 2013-07-31 京セラ株式会社 Mobile phone
JP6061489B2 (en) * 2012-04-27 2017-01-18 京セラ株式会社 Electronic device and sound adjustment method

Also Published As

Publication number Publication date
JP2015177194A (en) 2015-10-05

Similar Documents

Publication Publication Date Title
US9918171B2 (en) Online hearing aid fitting
US9894450B2 (en) Self-fitting of a hearing device
US9301057B2 (en) Hearing assistance system
US9107016B2 (en) Interactive hearing aid fitting system and methods
US10652674B2 (en) Hearing enhancement and augmentation via a mobile compute device
US10701495B2 (en) External device leveraged hearing assistance and noise suppression device, method and systems
JP6400796B2 (en) Listening assistance device to inform the wearer&#39;s condition
US20210375303A1 (en) Natural Ear
Flynn et al. Hearing performance benefits of a programmable power baha® sound processor with a directional microphone for patients with a mixed hearing loss
US20220201404A1 (en) Self-fit hearing instruments with self-reported measures of hearing loss and listening
CN103155409A (en) Method and system for providing hearing assistance to a user
US10511917B2 (en) Adaptive level estimator, a hearing device, a method and a binaural hearing system
US8817996B2 (en) Audio signal processing system and its hearing curve adjusting unit for assisting listening devices
DK2584795T3 (en) Method for determining a compression characteristic
KR101995670B1 (en) Personalized system of smart headphone device with oriented chatting function and method of using the same
WO2020004363A1 (en) Acoustic device and information management system
US20230179934A1 (en) System and method for personalized fitting of hearing aids
JP6014070B2 (en) Speaker device and conversation support system
ES2812799T3 (en) Method and device for setting up a specific hearing system for a user
US9204226B2 (en) Method for adjusting a hearing device as well as an arrangement for adjusting a hearing device
TWI455605B (en) Hearing signal process system for assisting listening device and hearing curve adjusting unit thereof
CN114830692A (en) System comprising a computer program, a hearing device and a stress-assessing device
Hohmann The future of hearing aid technology: Can technology turn us into superheroes?
US20130195281A1 (en) Assisting listening device having audiometry function
KR20170071364A (en) Self fitting method of hearing aid and output power of sound device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160502

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160923

R150 Certificate of patent or registration of utility model

Ref document number: 6014070

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S303 Written request for registration of pledge or change of pledge

Free format text: JAPANESE INTERMEDIATE CODE: R316303

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S803 Written request for registration of cancellation of provisional registration

Free format text: JAPANESE INTERMEDIATE CODE: R316803

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250