JP2019213001A - 補聴器及びプログラム - Google Patents
補聴器及びプログラム Download PDFInfo
- Publication number
- JP2019213001A JP2019213001A JP2018105935A JP2018105935A JP2019213001A JP 2019213001 A JP2019213001 A JP 2019213001A JP 2018105935 A JP2018105935 A JP 2018105935A JP 2018105935 A JP2018105935 A JP 2018105935A JP 2019213001 A JP2019213001 A JP 2019213001A
- Authority
- JP
- Japan
- Prior art keywords
- voice
- data
- hearing aid
- speech
- processing unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Abstract
Description
以下、第1の実施形態に係る補聴器について、図1〜図5を参照しながら説明する。
図1は、第1の実施形態に係る補聴器の全体構成を示す図である。
図1を参照しながら、補聴器1全体の構成について詳しく説明する。
なお、本実施形態に係るピンマイク10は集音の指向性が高く設定されており、装着した発話者Tより発話される音声が主としてサンプリングされるようになっている。
また、補聴器本体11は、音声サンプリングデータに基づくテキストデータをディスプレイ112に表示する。使用者Lは、ディスプレイ112に表示されるテキストデータを視認することで、補聴器1から更なる補助を受ける。
図2は、第1の実施形態に係る補聴器本体の機能構成を示す図である。
図2を参照しながら、補聴器1の補聴器本体11の機能構成について詳しく説明する。
CPU110は、予め用意されたプログラムに従って動作することで、音声サンプリングデータ取得部1100、音声認識処理部1101、音声合成処理部1102、再生処理部1103、表示処理部1104及び設定部1105としての機能を発揮する。
音声認識処理部1101は、音声サンプリングデータ取得部1100によって取得された音声サンプリングデータに対する音声認識処理(Speech to Text)を行ってテキストデータに変換する。
音声合成処理部1102は、音声認識処理部1101によって得られたテキストデータに基づく音声合成処理(Text to Speech)を行って合成音声データを生成する。
再生処理部1103は、音声合成処理部1102によって生成された合成音声データを再生してイヤホン111から出力する。
表示処理部1104は、音声認識処理部1101が生成したテキストデータをディスプレイに表示させる。
設定部1105は、使用者Lの操作に従って、合成音声データの音量、再生速度、及び、声種についての設定を変更する。
図3は、第1の実施形態に係るCPUの使用者補助時の処理フローを示す図である。
図4は、第1の実施形態に係る素片データテーブルの例を示す図である。
図3〜図4を参照しながら、第1の実施形態に係る補聴器1が実行する処理フローについて詳しく説明する。
図4に示すように素片データテーブルV1には、声種(例えば、“アナウンサー(男性)”、“一般(女性)”、“子供(男の子)”、・・)ごとに、発音の音素(“a”、“i”、“u”、・・)の波形データである素片データD3が記録されている。CPU110は、テキストデータD2に示される文字(例えば、“おはよう”)に対応する素片データD3(例えば、音素“o”、“ha”、“yo”をに対応する素片データD3)を素片データテーブルV1から抽出するとともに、これらを接続して合成音声データD4を生成する。
以上で、CPU110の一連の処理が完了する。
図5は、第1の実施形態に係る補聴器本体の設定画面の例を示す図である。
CPU110(設定部1105)は、使用者Lから所定の操作を受け付けると、図5に示す設定画面をディスプレイ112に表示させる。
設定画面には、例えば、再生される音声(合成音声データD4)の声種、再生速度、音量などの設定変更用画像が表示される。使用者Lは、ディスプレイ112をタッチ操作してこれらの設定を変更する。これにより、使用者Lは、本人にとって好みの(聞き取りやすい)、声種、再生速度、音量に所望に変更することができる。
以上に説明した構成によれば、第1の実施形態に係る補聴器1は、発話者Tが発声した音声に対し、音声認識処理を施してテキストデータに変換した後、再度、テキストデータに基づく音声合成処理によって音声を再生する。ここで、テキストデータには、発話者Tが発声した言語情報のみが抽出されるものであり、周囲のノイズを含むものではない。このように、一旦テキストデータに変換することで、ノイズが全く含まれない補助音声を提供することができる。また、音声合成処理において、使用者Lの聴覚機能に適合した補助音声を最適な声種、再生速度、音量で提供することができる。
次に、第2の実施形態に係る補聴器について、図6〜図9を参照しながら説明する。
図6は、第2の実施形態に係る補聴器本体の機能構成を示す図である。
図6を参照しながら、第2の実施形態に係る補聴器1の補聴器本体11の機能構成について詳しく説明する。
図6に示すように、第2の実施形態に係るCPU110は、第1の実施形態の各機能に加え、更に、登録部1106としての機能を発揮する。
登録部1106は、特定の発話者Tの音声を再現するための素片データを取得して、ストレージ114の素片データテーブルV2に登録する。
図7は、第2の実施形態に係るCPUの声種登録時の処理フローを示す図である。
図8は、第2の実施形態に係る素片データテーブルの例を示す図である。
図7〜図8を参照しながら、第2の実施形態に係る補聴器1が実行する処理フローについて詳しく説明する。
CPU110は、発話者Tに対し、ディスプレイ112に表示した登録用テキストを読み上げるように指示する。
図9は、第1の実施形態に係るCPUの使用者補助時の処理フローを示す図である。
図9に示す処理フローは、第1の実施形態(図3)と比較して、ステップS06の処理を含むことで相違する。以下、ステップS06の処理について詳しく説明する。
CPU110は、ステップS06で特定した素片データD3を組み合わせて音声合成処理(ステップS03)を行う。
以上に説明した構成によれば、第2の実施形態に係る補聴器1は、事前に登録された発話者T自身の音声に基づいて合成音声データを生成する。これにより、使用者Lは、発話者T本人の声と同種の補助音声を聞くことができる。したがって、発話者Tとの会話において、使用者Lにとってより違和感のない補助音声を提供することができる。
次に、第3の実施形態に係る補聴器について、図10を参照しながら説明する。
図10は、第3の実施形態に係るCPUの声種登録時の処理フローを示す図である。
第3の実施形態に係る補聴器1の機能構成は、第2の実施形態(図6)と同様であるため、詳細な説明を省略する。
第3の実施形態に係る補聴器1のCPU110(登録部1106)は、図10に示す処理フローを実行して、新たな素片データを素片データテーブルに登録する。
以上に説明した構成によれば、第3の実施形態に係る補聴器1は、種々の聴覚機能検査の結果に基づく最適な(使用者が最も聞き取りやすい)補助音声を提供することができる。
以上、第1〜第3の実施形態に係る補聴器1について詳細に説明したが、補聴器1の具体的な態様は、上述のものに限定されることはなく、要旨を逸脱しない範囲内において種々の設計変更等を加えることは可能である。
他の実施形態に係る補聴器1は、基底周波数、音色、雑音レベルなどのパラメータを調整して波形を作り、人工的な音声を作るフォルマント合成処理を行うものであってもよい。
特に、第2の実施形態に係る補聴器1の場合、例えば、以下のような機能を有していてもよい。即ち、CPU110は、発話者Tが発声した音声の内容と、音声認識処理(ステップS02)を経て取得したテキストデータの内容とが一致していたかどうかの判定入力を受け付ける。両者が一致していた場合、CPU110は、発話者Tの肉声が記録された音声サンプリングデータを、音声認識処理後のテキストデータに基づいて音素に分解し、素片データを抽出する。このようにすることで、発話者Tによって発声がなされる度に、音声合成処理(ステップS03)にて生成される合成音声を発話者T本人の肉声に近づけることができる。
10 ピンマイク
11 補聴器本体
110 CPU
1100 音声サンプリングデータ取得部
1101 音声認識処理部
1102 音声合成処理部
1103 再生処理部
1104 表示処理部
1105 設定部
1106 登録部
111 イヤホン
112 ディスプレイ
113 メモリ
114 ストレージ
115 近距離無線通信モジュール
T 発話者
L 使用者
Claims (6)
- 音声サンプリングデータを取得する音声サンプリングデータ取得部と、
前記音声サンプリングデータに対する音声認識処理を行ってテキストデータに変換する音声認識処理部と、
前記テキストデータに基づく音声合成処理を行って合成音声データを生成する音声合成処理部と、
前記合成音声データを再生して出力する再生処理部と、
を備える補聴器。 - 前記テキストデータをディスプレイに表示させる表示処理部を更に備える
請求項1に記載の補聴器。 - 使用者の操作に従って、前記合成音声データの音量、再生速度、及び、声種についての設定の少なくとも何れか一つを変更する設定部を更に備える
請求項1又は請求項2に記載の補聴器。 - 前記音声合成処理部は、
事前に登録された発話者の音声に基づいて前記合成音声データを生成する
請求項1から請求項3の何れか一項に記載の補聴器。 - 前記音声合成処理部は、予め取得しておいた使用者の聴覚機能検査結果に基づいた最適な声種で前記合成音声データを生成する
請求項1から請求項4の何れか一項に記載の補聴器。 - 補聴器のコンピュータに、
音声サンプリングデータを取得するステップと、
前記音声サンプリングデータに対する音声認識処理を行ってテキストデータに変換するステップと、
前記テキストデータに基づく音声合成処理を行って合成音声データを生成するステップと、
前記合成音声データを再生して出力するステップと、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018105935A JP6598323B1 (ja) | 2018-06-01 | 2018-06-01 | 補聴器及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018105935A JP6598323B1 (ja) | 2018-06-01 | 2018-06-01 | 補聴器及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6598323B1 JP6598323B1 (ja) | 2019-10-30 |
JP2019213001A true JP2019213001A (ja) | 2019-12-12 |
Family
ID=68383251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018105935A Active JP6598323B1 (ja) | 2018-06-01 | 2018-06-01 | 補聴器及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6598323B1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6807491B1 (ja) * | 2020-02-07 | 2021-01-06 | 株式会社テクノリンク | 補聴器用合成音声セットの修正方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000013895A (ja) * | 1998-06-23 | 2000-01-14 | Matsushita Electric Ind Co Ltd | 外部雑音に対応した補聴器 |
JP2000308198A (ja) * | 1999-02-16 | 2000-11-02 | Gm & M:Kk | 補聴器 |
JP2003195939A (ja) * | 2001-12-26 | 2003-07-11 | Toshiba Corp | プラント監視制御システム |
JP2005166009A (ja) * | 2003-11-14 | 2005-06-23 | Universal Com:Kk | クライアント端末 |
JP2008309856A (ja) * | 2007-06-12 | 2008-12-25 | Yamaha Corp | 音声認識装置及び会議システム |
JP2013007879A (ja) * | 2011-06-24 | 2013-01-10 | Panasonic Corp | 車載電子装置 |
US20170243582A1 (en) * | 2016-02-19 | 2017-08-24 | Microsoft Technology Licensing, Llc | Hearing assistance with automated speech transcription |
JP2018036320A (ja) * | 2016-08-29 | 2018-03-08 | 株式会社テクノリンク | 音処理方法、音処理装置、及びプログラム |
-
2018
- 2018-06-01 JP JP2018105935A patent/JP6598323B1/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000013895A (ja) * | 1998-06-23 | 2000-01-14 | Matsushita Electric Ind Co Ltd | 外部雑音に対応した補聴器 |
JP2000308198A (ja) * | 1999-02-16 | 2000-11-02 | Gm & M:Kk | 補聴器 |
JP2003195939A (ja) * | 2001-12-26 | 2003-07-11 | Toshiba Corp | プラント監視制御システム |
JP2005166009A (ja) * | 2003-11-14 | 2005-06-23 | Universal Com:Kk | クライアント端末 |
JP2008309856A (ja) * | 2007-06-12 | 2008-12-25 | Yamaha Corp | 音声認識装置及び会議システム |
JP2013007879A (ja) * | 2011-06-24 | 2013-01-10 | Panasonic Corp | 車載電子装置 |
US20170243582A1 (en) * | 2016-02-19 | 2017-08-24 | Microsoft Technology Licensing, Llc | Hearing assistance with automated speech transcription |
JP2018036320A (ja) * | 2016-08-29 | 2018-03-08 | 株式会社テクノリンク | 音処理方法、音処理装置、及びプログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6807491B1 (ja) * | 2020-02-07 | 2021-01-06 | 株式会社テクノリンク | 補聴器用合成音声セットの修正方法 |
WO2021157052A1 (ja) * | 2020-02-07 | 2021-08-12 | 株式会社テクノリンク | 補聴器用合成音声セットの修正方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6598323B1 (ja) | 2019-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8781836B2 (en) | Hearing assistance system for providing consistent human speech | |
Rosenblum et al. | Lip-read me now, hear me better later | |
JP6673828B2 (ja) | 自閉症における言語処理向上のための装置 | |
WO2004021738A1 (ja) | マイクロフォン、コミュニケーションインタフェースシステム | |
KR20110090066A (ko) | 청력을 검사하는 휴대용 음원재생장치 및 이를 수행하는 방법 | |
Cohen et al. | The effect of visual distraction on auditory-visual speech perception by younger and older listeners | |
JP2009178783A (ja) | コミュニケーションロボット及びその制御方法 | |
JP6599828B2 (ja) | 音処理方法、音処理装置、及びプログラム | |
JP6598323B1 (ja) | 補聴器及びプログラム | |
US11265661B1 (en) | Hearing aid comprising a record and replay function | |
Calandruccio et al. | The effectiveness of clear speech as a masker | |
WO2020079918A1 (ja) | 情報処理装置及び情報処理方法 | |
JP7218143B2 (ja) | 再生システムおよびプログラム | |
KR101783959B1 (ko) | 청력을 검사하는 휴대용 음원재생장치 및 이를 수행하는 방법 | |
JP3706112B2 (ja) | 音声合成装置及びコンピュータプログラム | |
JP2009162879A (ja) | 発声支援方法 | |
Hsu et al. | The effects of intensive voice treatment in Mandarin speakers with Parkinson's disease: Acoustic and perceptual findings | |
JP2006139162A (ja) | 語学学習装置 | |
KR102350890B1 (ko) | 휴대용 청력검사장치 | |
Jeyalakshmi et al. | Development of Speech Recognition System for Hearing Impaired in Native language | |
JPS5879400A (ja) | 補聴器 | |
JP7432879B2 (ja) | 発話トレーニングシステム | |
TWI824424B (zh) | 語意評估之助聽調整裝置及其方法 | |
WO2024024122A1 (ja) | 音声処理方法、プログラム、及び音声処理システム | |
JP5052107B2 (ja) | 音声再現装置及び音声再現方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190125 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190125 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190226 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190312 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190618 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190910 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190927 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6598323 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |