JP2018174521A - 聴覚装置、方法、及び、聴覚システム - Google Patents

聴覚装置、方法、及び、聴覚システム Download PDF

Info

Publication number
JP2018174521A
JP2018174521A JP2018025398A JP2018025398A JP2018174521A JP 2018174521 A JP2018174521 A JP 2018174521A JP 2018025398 A JP2018025398 A JP 2018025398A JP 2018025398 A JP2018025398 A JP 2018025398A JP 2018174521 A JP2018174521 A JP 2018174521A
Authority
JP
Japan
Prior art keywords
speech intelligibility
indicator
speech
input signal
hearing device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018025398A
Other languages
English (en)
Other versions
JP6965178B2 (ja
JP2018174521A5 (ja
Inventor
セーレンセン シャーロット
Soerensen Charlotte
セーレンセン シャーロット
ビー． ボルト イェスパー
B Boldt Jesper
ビー． ボルト イェスパー
クセナキ アンジェリキ
Xenaki Angeliki
クセナキ アンジェリキ
ジー． クリステンセン マッズ
G Christensen Mads
ジー． クリステンセン マッズ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GN Hearing AS
Original Assignee
GN Hearing AS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GN Hearing AS filed Critical GN Hearing AS
Publication of JP2018174521A publication Critical patent/JP2018174521A/ja
Publication of JP2018174521A5 publication Critical patent/JP2018174521A5/ja
Application granted granted Critical
Publication of JP6965178B2 publication Critical patent/JP6965178B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50—Customised settings for obtaining desired overall acoustical characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/50—Customised settings for obtaining desired overall acoustical characteristics
    • H04R25/505—Customised settings for obtaining desired overall acoustical characteristics using digital signal processing
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L13/00—Speech synthesis; Text to speech systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/90—Pitch determination of speech signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/40—Arrangements for obtaining a desired directivity characteristic
    • H04R25/405—Arrangements for obtaining a desired directivity characteristic by combining a plurality of transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/40—Arrangements for obtaining a desired directivity characteristic
    • H04R25/407—Circuits for combining signals of a plurality of transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00—Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/43—Electronic input selection or mixing based on input signal analysis, e.g. mixing or selection between microphone and telecoil or between microphones with different directivity characteristics
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00—Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/41—Detection or adaptation of hearing aid parameters or programs to listening situation, e.g. pub, forest
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2225/00—Details of deaf aids covered by H04R25/00, not provided for in any of its subgroups
    • H04R2225/43—Signal processing in hearing aids to enhance the speech intelligibility

Landscapes

  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Otolaryngology (AREA)
  • Neurosurgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

【課題】第１マイクロフォン入力信号を提供するための第１マイクロフォンを備えるセットのマイクロフォンと、入力信号を処理し、入力信号に基づいて電気出力信号を提供するためのプロセッサと、を備える聴覚装置を提供する。【解決手段】聴覚装置２は、電気出力信号をオーディオ出力信号に変換するためのレシーバ１６と、セットのマイクロフォン８、１０に動作可能に接続されているコントローラ１２と、を備える。コントローラは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するための音声明瞭度推定器１２ａを備え、音声明瞭度インジケータに基づいて、プロセッサ１４を制御する。音声明瞭度推定器は、第１音源のピッチパラメータを推定するためのピッチ推定器１２ａａを備えている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。【選択図】図１

Description

本開示は、聴覚装置、聴覚装置の動作方法、及び、聴覚システムに関する。
補聴器ユーザが直面する主な課題の１つは、「カクテルパーティ問題」のような多数の話者がいる騒がしい環境で、音声明瞭度がひどく悪化することである。一般的に、聞き取り補助器具のユーザの音声明瞭度は、特定の聞き取り環境に大きく依存する。このように、ある種の聞き取り環境で、音声強調処理スキームが有益な場合であっても、他の聞き取り環境では有害な場合がある。音声強調処理スキームは、必ずしも、あらゆる環境での音声明瞭度を高めるわけではない。
従って、背景技術の欠点を克服する聴覚装置、方法、及び、聴覚システムが必要とされている。
聴覚装置が開示されている。聴覚装置は、第１マイクロフォン入力信号を提供するための第１マイクロフォンを備えるセットのマイクロフォンと、入力信号を処理し、入力信号に基づいて、電気出力信号を提供するためのプロセッサと、を備える。聴覚装置は、電気出力信号をオーディオ出力信号に変換するためのレシーバと、セットのマイクロフォンに動作可能に接続されているコントローラと、を備える。コントローラは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するための音声明瞭度推定器を備えている。コントローラは、音声明瞭度インジケータに基づいて、プロセッサを制御するように構成されている。音声明瞭度推定器は、第１音源のピッチパラメータを推定するためのピッチ推定器を備えている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。
さらに、本開示は、聴覚装置の動作方法に関する。本方法は、聴覚装置又は聴覚システムで動作する。本方法は、音声を、第１マイクロフォン入力信号を含む１個以上のマイクロフォン入力信号に変換するステップを備える。本方法は、第１マイクロフォン入力信号に関連する音声明瞭度の指標となる音声明瞭度インジケータを取得する第１の取得ステップを備える。音声明瞭度インジケータを取得するステップは、第１音源のピッチパラメータを取得するステップを備えてもよい。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向とに基づく。本方法は、音声明瞭度インジケータに基づいて、聴覚装置を制御する制御ステップを備える。
本開示は、聴覚システムに関する。聴覚システムは、プロセッサ、インターフェース及びメモリを備える付属装置と、聴覚装置と、を備える。聴覚システムは、聴覚装置内に設けられ、第１マイクロフォン入力信号を提供するための第１マイクロフォンを備えるセットのマイクロフォンと、入力信号を処理し、入力信号に基づく電気出力信号を提供するためのプロセッサと、を備える。聴覚システムは、聴覚装置内に設けられ、電気出力信号をオーディオ出力信号に変換するためのレシーバと、セットのマイクロフォンに動作可能に接続されているコントローラと、を備える。聴覚システムは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されている。聴覚システムは、第１音源のピッチパラメータを推定するように構成されている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。
本開示の利点は、利用可能なリファレンス音声信号がなくても、音声明瞭度を評価することができることである。音声明瞭度は、有利な点として、聞き取り環境の状況を検知し、音声強調スキームをそれに適合させるために、本開示で使用される。特に、本開示は、人間の発声の基本的な態様（例えば、ピッチ）を活用し、音声明瞭度の推定の正確さを高める。
本発明の上述の特徴及び利点と、他の特徴及び利点は、添付の図面を参照しつつ、以下の例示的な実施形態の詳細な記載によって当業者には容易に明らかになるであろう。
本開示の例示的な聴覚装置を模式的に示す。 本開示の例示的な方法のフロー図である。 本開示の例示的な聴覚システムを模式的に示す。
関連するときは図面を参照しつつ、本明細書で以下に種々の例示的な実施形態及び詳細を記載する。図面は、縮尺通りに描かれていてもよく、描かれていなくてもよく、同様の構造又は機能をもつ要素は、図面全体で同様の参照番号によって表されることを注記しておくべきである。図面は、実施形態の説明を容易にすることだけを意図していることも注記しておくべきである。図面は、発明の包括的な記載であることは意図しておらず、又は、発明の範囲を限定するものであることは意図していない。これに加え、図示されている実施形態は、示されている全ての態様又は利点を有する必要はない。特定の実施形態と関連して記載される態様又は利点は、必ずしもその実施形態に限定されず、図示されていない場合であっても、又は、そのように明確に記載されていない場合であっても、任意の他の実施形態で実施することができる。
音声強調スキームを、評価済みの聞き取り環境の音声明瞭度に基づいて評価することができ、それによって、音声強調スキームが必要な場合にのみ適用されるために、聞き取り環境の自動的な明瞭度評価が、聴覚装置のユーザによって有益になり得ることが本願発明者らによって見出された。従って、本願発明者らは、聴覚装置の処理に音声明瞭度インジケータを使用することに利点を見出した。音声明瞭度を評価するために、短期客観的明瞭度（ＳＴＯＩ）測定及び正規化共分散基準値（ＮＣＭ）のような許容され得る信頼性を有しつつ音声明瞭度を予測する種々の煩わしい方法が存在する。
しかしながら、ＳＴＯＩ法及びＮＣＭ法は、煩わしい。即ち、これらの方法は全て、「きれいな」音声信号をリファレンス音声信号として入手する必要がある。「きれいな」音声信号は、リファレンス音声信号であり、音源から発せられる信号と同様の特性（例えば、音声明瞭度についての十分な情報）を示す信号である。「きれいな」音声信号は、例えば、音源が、スパウスマイクロフォン器具に取り付けられたとき、その音源によって提供され得る。しかし、大部分の実生活の状況（例えば、カクテルパーティ）では、リファレンス音声信号として「きれいな」音声信号を入手することは、ほとんどできない。
ＥＰ３０５７３３５Ａ１号には、ユーザの左耳及び右耳に、又は、ユーザの左耳の中及び右耳の中に配置されるように適合された左耳用及び右耳用の聴覚装置と、出力刺激にさらされた時に、左耳用及び右耳用のそれぞれの聴覚装置の信号処理ユニットから処理された信号ｙｌ（ｔ）、ｙｒ（ｔ）に基づいて、ユーザの予測される音声明瞭度の両耳用ＳＩ測定値を提供するための両耳用音声明瞭度予測ユニットと、を備える両耳用システムが記載されている。
しかしながら、ＥＰ３０５７３３５Ａ１号のシステムも、左耳用聴覚装置から、処理された音声信号をリファレンス音声信号として入手する必要があるという点で煩わしい。音声明瞭度の予測において、ＥＰ３０５７３３５Ａ１号の両耳用システムは、１個の聴覚装置からの処理された信号であって、リファレンス音声信号として使用される処理された信号に依存する。このような技術は、片耳用聴覚システムには適用することができない。片耳用聴覚システムでは、別の聴覚装置から、処理された信号を得ることができず、片耳用聴覚システムではリファレンス音声信号を容易に入手することができないためである。さらに、ＥＰ３０５７３３５Ａ１号のシステムは、例えば、左耳用聴覚装置からの処理された信号が、右耳用聴覚装置からの信号と同じ音声明瞭度の欠陥を有し易く、それによって、信頼性の高いリファレンス音声信号とすることができないので、最善には及ばない音声明瞭度の推定を提供する。
本開示は、聞き取り環境において、マイクロフォン入力信号及び音源のピッチパラメータに基づいて、音声明瞭度インジケータを推定することによって、聞き取り環境の音声明瞭度を煩わしくなく推定する聴覚装置を提供する。本開示は、推定された音声明瞭度インジケータを使用し、マイクロフォン入力信号の処理を制御することを目的とする。
本開示の利点は、音声明瞭度インジケータを推定するために、リファレンス音声信号にアクセスする必要がないことである。本開示は、ピッチパラメータ及びマイクロフォン入力信号に基づいて、リファレンス音声信号（即ち、音声信号の明瞭度を表すリファレンス音声信号）を再構築することができる聴覚装置、方法、及び、聴覚システムを提案する。本開示は、マイクロフォン入力信号、ピッチパラメータ、及び、到来方向を活用することによって、リファレンス音声信号を入手することができないか、又は、リファレンス音声信号にアクセスにすることができないという問題を克服する。
聴覚装置が、本明細書に開示される。聴覚装置は、補聴器であってもよく、プロセッサは、ユーザの聴力損失を補償するように構成されていてもよい。聴覚装置は、補聴器、例えば、耳掛（ＢＴＥ）型、耳穴（ＩＴＥ）型、耳道（ＩＴＣ）型、耳道レシーバ（ＲＩＣ）型、又は、耳穴レシーバ（ＲＩＴＥ）型の補聴器であってもよい。
聴覚装置は、セットのマイクロフォンを備えている。セットのマイクロフォンは、１個以上のマイクロフォンを備えていてもよい。セットのマイクロフォンは、第１マイクロフォン入力信号を提供するための第１マイクロフォン及び／又は第２マイクロフォン入力信号を提供するための第２マイクロフォンを備える。セットのマイクロフォンは、Ｎ個のマイクロフォン信号を与えるためのＮ個のマイクロフォンを備えていてもよい。ここで、Ｎは、１〜１０の範囲の整数である。１個以上の例示的な聴覚装置において、マイクロフォンの数であるＮは、２、３、４、５、又は、それよりも大きい。セットのマイクロフォンは、第３マイクロフォン入力信号を提供するための第３マイクロフォンを備えていてもよい。
聴覚装置は、入力信号、例えばマイクロフォン入力信号を処理するためのプロセッサを備えている。プロセッサは、プロセッサへの入力信号に基づいて、電気出力信号を提供する。プロセッサの入力端子は、任意的に、マイクロフォンのそれぞれの出力端子に接続される。プロセッサの１個以上のマイクロフォン入力端子は、マイクロフォンの１個以上のマイクロフォン出力端子のそれぞれに接続されていてもよい。プロセッサは、ユーザの聴力損失を補償し、入力信号に基づいて、電気出力信号を提供するように構成されていてもよい。
聴覚装置は、電気出力信号をオーディオ出力信号に変換するためのレシーバを備えている。レシーバは、電気出力信号を、聴覚装置のユーザの鼓膜に向かって進むオーディオ出力信号に変換するように構成されていてもよい。
聴覚装置は、１個以上の無線入力信号、例えば、第１無線入力信号及び／又は第２無線入力信号をアンテナ出力信号に変換するためのアンテナを、任意的に備えている。無線入力信号は、例えば、スパウスマイクロフォン器具、無線のＴＶオーディオ送信機及び／又は無線送信機と関連する分散したマイクロフォンアレイといった外部の音源に由来する。
聴覚装置は、アンテナ出力信号をトランシーバ入力信号に変換するためにアンテナに連結されている無線トランシーバを、任意的に備えている。異なる外部音源からの無線信号は、トランシーバでトランシーバ入力信号に多重化されてもよいし、又は、分離された複数のトランシーバ入力信号として、無線トランシーバの複数のトランシーバ入力端子に提供されてもよい。聴覚装置は、複数のアンテナを備えていてもよいし、及び／又は、アンテナは、１つ又は複数のアンテナモードで動作するように構成されていてもよい。トランシーバ入力信号は、第１外部音源からの第１無線信号の代表例である第１トランシーバ入力信号を備える。
聴覚装置は、コントローラを備えている。コントローラは、第１マイクロフォン及びプロセッサに動作可能に接続されていてもよい。コントローラは、第２マイクロフォンが存在する場合には、第２マイクロフォンに動作可能に接続されていてもよい。コントローラは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するための音声明瞭度推定器を備えていてもよい。コントローラは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されていてもよい。コントローラは、音声明瞭度インジケータに基づいて、プロセッサを制御するように構成されている。
音声明瞭度推定器は、第１音源のピッチパラメータを推定するためのピッチ推定器を備えていてもよい。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。第１音源の方向は、例えば、第１音源からマイクロフォンで受信したマイクロフォン入力信号が到来した方向である。例えば、コントローラ又は音声明瞭度推定器は、ピッチパラメータと第１音源の方向とに基づいて、音声明瞭度インジケータを推定するように構成されていてもよい。異なる言い方をすると、音声明瞭度インジケータは、ピッチパラメータと第１音源の方向とに基づいて、コントローラ又は音声明瞭度推定器によって予測される。この方向は、既知であってもよいし（例えば、ユーザの鼻が向いている正面の方向と仮定する）、又は、本開示のピッチパラメータと合わせて推定されてもよい。
１つ以上の例示的な聴覚装置において、プロセッサは、コントローラを備えている。１つ以上の例示的な聴覚装置において、コントローラは、プロセッサと併設されている。
１つ以上の例示的な聴覚装置において、音声明瞭度推定器は、ピッチパラメータに基づいて、再構築された音声信号を生成するためのスピーチシンセサイザを備えている。音声明瞭度インジケータは、再構築された音声信号に基づいていてもよい。再構築された音声信号は、マイクロフォン入力信号の明瞭度を表すリファレンス音声信号と認識してもよい。異なる言い方をすると、スピーチシンセサイザは、ピッチパラメータに基づいて、音声信号を再構築し、再構築された音声信号を合成するように構成されている。例えば、コントローラ又は音声明瞭度推定器は、ピッチパラメータに基づいて、再構築された音声信号を生成し、再構築された音声信号、ピッチパラメータ、及び、第１音源の方向に基づいて、音声明瞭度インジケータを推定するように構成されていてもよい。合成され、再構築された音声信号に基づいて、コントローラ又は音声明瞭度推定器によって音声明瞭度インジケータが予測されることが理解されるであろう。再構築された音声信号は、再構築されたリファレンス音声信号とされてもよい。第１音源の方向（すなわち、空間的な手掛かり）とピッチパラメータ（すなわち、時間的な手掛かり）を組み合わせることは、開示される技術が、例えば反響又は競合する話者に起因する曖昧さを解決するように、リファレンス音声信号の再構築の正確性を向上させる。
１つ以上の例示的な聴覚装置において、音声明瞭度推定器は、短期客観的明瞭度（ＳＴＯＩ）推定器を備えている。短期客観的明瞭度推定器は、再構築された音声信号と、１個以上のマイクロフォン入力信号に基づくベース音声信号と、を比較するように構成されていてもよい。短期客観的明瞭度推定器は、この比較に基づく音声明瞭度インジケータを提供するように構成されていてもよい。ベース音声信号は、１個以上のマイクロフォンから取得され、レシーバに提供される騒がしい音声信号を参照する。ベース音声信号は、１個のマイクロフォンによって捕捉されてもよいし（全方向性）、又は、（例えば、ビームフォーミングを用いて）複数のマイクロフォンによって捕捉されてもよい。例えば、音声明瞭度インジケータは、コントローラ又は音声明瞭度推定器が再構築された音声信号とベース音声とを比較すること、例えばＳＴＯＩ推定器を用いて、再構築された音声信号とベース音声とを比較することによって予測されてもよい。
１つ以上の例示的な聴覚装置において、音声明瞭度推定器は、マイクロフォン入力信号の高調波モデルパラメータを提供するためにピッチ推定器に動作可能に接続されている高調波モデル推定器を備えている。ピッチパラメータは、高調波モデルパラメータに基づいていてもよい。高調波モデルパラメータは、例えば、基本周波数、サンプリング周波数、到来方向を提供する信号であって、第１音源から１個以上のマイクロフォンへの信号の遅れ、第１音源からの信号の減衰、振幅（例えば、複素振幅）、高調波の数、高調波の実際の振幅、及び／又は、高調波の位相を備える。
１つ以上の例示的な聴覚装置において、高調波モデル推定器は、マルチチャンネル信号の高調波モデルの構造に基づいて、マイクロフォン入力信号の高調波モデルパラメータを提供するように構成されており、チャンネルはマイクロフォンに対応する。高調波モデルの構造は、空間−時間的な高調波モデルの構造とされてもよい。第１音源は、所望の音源であると考えられてもよく、周期的であると仮定されてもよい。例えば、再構築された音声は、第１音源から多くの狭帯域信号として受信したマイクロフォン入力信号と、空間−時間的な高調波モデルを用い、高調波として関連するキャリア周波数とを考慮することに基づいて、信号特性を推定することによって生成される。
１つ以上の例示的な聴覚装置において、ピッチ推定器は、高調波モデルパラメータを受信し、高調波モデルパラメータ及び対数尤度関数に基づいて、ピッチパラメータを推定するように構成されている。
１つ以上の例示的な聴覚装置において、ピッチ推定器は、対数尤度関数及び高調波モデルパラメータに基づいて、ピッチパラメータを推定するための最大尤度推定器を備えている。
開示される技術が適用される実例において、ＳＴＯＩ推定器に対する入力として再構築された音声信号を生成するために、マルチチャンネルの空間−時間的な高調波モデルが適用される。この実例では、フレーム長Ｎにおける妨害音源とバックグラウンドノイズとが合わさったものに加えられる所望のマイクロフォン入力信号を取得するために、Ｋ個のマイクロフォンが使用することが仮定される。ｋ番目のマイクロフォンについて、このマイクロフォンから得られるマイクロフォン入力信号は、データベクトルxk=[xk(0) xk(1) … xk(N-1)]T（k=0, … ,K-1）によって表すことができる。所望の音源は、周期的であると仮定され、この仮定は、有音音声の短いセグメントに対して適切な仮定である。このように、データベクトルｘkは、以下のようにモデル化することができる。
Figure 2018174521
Figure 2018174521
Figure 2018174521
Figure 2018174521
ｅkは、記録されたノイズと干渉の合計を示し；
ω0は、基本周波数であり、ｆｓは、サンプリング周波数であり；
τkは、到来方向（ＤＯＡ）を与える０番目のマイクロフォンとｋ番目のマイクロフォンとの間の入力信号の遅れであり；
βkは、ｋ番目のマイクロフォンでのマイクロフォン入力信号の減衰であり、
α=[α1… αL]Tは、ｌ番目の複素振幅であるα=Alejφlによって与えられる複素振幅であり；
Ｌは、高調波の数であり；
Ａｌ＞０及びφlは、それぞれ、ｌ番目の高調波の実際の振幅及び位相である。
開示される技術が適用される実例において、それぞれのマイクロフォン又はそれぞれのマイクロフォンのチャンネルにおいて、ノイズは、分散σk 2を有する補正されていない白色ガウスであると仮定され、複素データベクトルｘkの対数尤度関数は、（２）のように記述することができる。
Figure 2018174521
Ψは、ｘkの信号パラメータを含むベクトルを示す。この例では、白色ガウスノイズ分布は、ノイズのエントロピーを最大にし、そのため、ノイズの確率密度関数の良好な選択肢である。ピッチは、振幅α^、減衰因子βk、及び、ノイズの分散σk 2のそれぞれに関する微分によって、対数尤度関数を最大にすることによって、推定することができる。これらのパラメータは、互いに依存している。従って、最初に、βｋ及びσk 2を１に設定し、式（３）、（４）及び（５）の式の計算を繰り返すことによって推定される。推定された複素振幅は、式（３）によって表わされる。
Figure 2018174521
ｋ番目のマイクロフォンでの所望の音源の減衰の推定は、式（４）として取得することができる。
Figure 2018174521
さらに、ノイズの分散は、式（５）として見出すことができる。
Figure 2018174521
Figure 2018174521
次いで、ピッチパラメータは、最大尤度推定器を用い、式（６）として推定することができる。
Figure 2018174521
Ω０は、可能なピッチパラメータ候補のセットである。この例では、第１音源の方向は、既知であると仮定されるために、ピッチパラメータの推定が、一次元探索で行われる。このことは、さらに、計算の複雑性を抑え、他の方向からの強い干渉する高調波源に対してロバスト性のある技術を提供する。ｋ番目のマイクロフォンの再構築された音声信号は、与えられたピッチω0及び遅れτkの推定値から取得することができる。
Figure 2018174521
射影行列ΠA=A (AHA)-1AHが用いられている。
次いで、短期客観的明瞭度推定器への入力として使用される再構築された音声信号は、全てのマイクロフォンチャンネルについて再構築された音声信号を合計することによって得られる。
Figure 2018174521
これに代えて、又はこれに加えて、式（５）の分散の推定値を使用し、再構築された音声信号の重み推定を生成することができる。
１つ以上の例示的な聴覚装置において、セットのマイクロフォンは、第２マイクロフォン入力信号を提供するための第２マイクロフォンを備える。音声明瞭度推定器は、第１マイクロフォン入力信号及び第２マイクロフォン入力信号に基づいて、第１音源の方向を推定するための方向推定器を備えていてもよい。音声明瞭度インジケータは、第１音源の方向に基づいていてもよい。例えば、ピッチパラメータ及び第１音源の方向（例えば、マイクロフォン入力信号の到来方向）は、音声明瞭度推定器又はコントローラが、１つ以上のマイクロフォンによって受信される所望の周期的なマイクロフォン入力信号について、空間−時間的な高調波モデルを利用することによって、一緒に推定される。
１つ以上の例示的な聴覚装置において、聴覚装置は、音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号に適用するように構成されている。例えば、音声明瞭度インジケータが第１判定基準を満たす（例えば、音声明瞭度インジケータが、音声明瞭度が十分ではないことを示す）場合に、第１処理スキームが、音声明瞭度を向上させるようにマイクロフォン入力信号に適用される必要がある。第１処理スキームは、１つ以上の音声強調処理スキームを備えてもよい。第１処理スキームは、ユーザの聴力損失を補償するように構成された１個以上の音声強調処理を備えてもいてもよい。例えば、コントローラは、プロセッサに音声明瞭度インジケータを提供してもよく、音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号に適用するように構成されていてもよい。１つ以上の例示的な聴覚装置において、コントローラは、音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号に適用するように構成されていてもよい。
１つ以上の例示的な聴覚装置において、聴覚装置は、音声明瞭度インジケータが第１判定基準を満たさない場合に、既に適用されている処理スキームと同じ処理スキームを引き続きマイクロフォン入力信号に適用するように構成されている。例えば、音声明瞭度インジケータが第１判定基準を満たさない(即ち、音声明瞭度インジケータが、音声明瞭度が十分であることを示す)場合に、既に適用されている処理スキームと同じ処理スキームを変える必要はなく、聴覚装置又はプロセッサは、同じ処理スキームを引き続きマイクロフォン入力信号に適用してもよい。
第１判定基準は、第１明瞭度閾値に基づいていてもよい。１つ以上の例示的な聴覚装置において、音声明瞭度インジケータが第１明瞭度閾値より小さいときに、音声明瞭度インジケータが第１判定基準を満たす。例えば、第１明瞭度閾値は、７５〜９５％の範囲、例えば、８０％、８５％であってもよい。例えば、音声明瞭度インジケータが８５％より小さいときに、聴覚装置は、第１処理スキーム（例えば、ビームフォーミングスキーム）を選択し、適用する。音声明瞭度インジケータが８５％以上である場合、聴覚装置は、既に適用されている処理スキームと同じスキームの適用に進む。
１つ以上の例示的な聴覚装置において、聴覚装置は、音声明瞭度インジケータが第２判定基準を満たす場合に、第２処理スキームを選択し、第２処理スキームを第１マイクロフォン入力信号に適用するように構成されている。第２判定基準は、第２明瞭度閾値及び第３明瞭度閾値に基づいていてもよい。例えば、第２明瞭度閾値は、６０〜７５％の範囲、例えば、６５％、７０％であってもよい。例えば、第３明瞭度閾値は、７７〜８４％の範囲、例えば、８０％、８４％であってもよい。例えば、音声明瞭度インジケータが第２明瞭度閾値と第３明瞭度閾値の間にある場合、音声明瞭度インジケータは、第２判定基準を満たす。例えば、音声明瞭度インジケータが、７０％以上であるが、８０％を超えない場合、音声明瞭度インジケータは、第２判定基準を満たす。別の例は、音声明瞭度インジケータが第３判定基準を満たす場合であり、このとき、第３判定基準は、ゼロ閾値に基づく。例えば、音声明瞭度インジケータが０％に達したら、さらに狭いビームフォーミング（もっと大きな指向指数を有する）が選択され、適用される。
いずれの処理スキームが選択され、マイクロフォン入力信号に適用されるべきかを特定するために、聴覚装置によって種々の判定基準（例えば、第１判定基準、第２判定基準、第３判定基準、第４判定基準・・・）が使用されてもよいことが想定されるであろう。
第１処理スキーム及び／又は第２処理スキームは、ビームフォーミングスキーム、ノイズ低減スキーム、ゲイン制御スキーム、及び、圧縮スキームのうちの１個以上のスキームを備えていてもよい。例えば、音声明瞭度インジケータに基づいて聴覚装置によって選択される第１処理スキームは、ビームフォーミングスキームとノイズ低減スキームの組み合わせを備えていてもよい。
１つ以上の例示的な聴覚装置において、第１処理スキーム及び／又は第２処理スキームは、第１のセットのビームフォーミング係数を備える第１ビームフォーミングスキーム及び／又は第２のセットのビームフォーミング係数を備える第２ビームフォーミングスキームを備えていてもよい。
１つ以上の例示的な聴覚装置において、第１処理スキーム及び／又は第２処理スキームは、改善された信号ノイズ比を生じる１個以上のノイズ低減機能を提供するノイズ低減スキームを備えていてもよい。
１つ以上の例示的な聴覚装置において、第１処理スキーム及び／又は第２処理スキームは、圧縮スキーム及び／又はゲイン制御スキームを備えていてもよい。マイクロフォン入力信号に適用されるゲインは、聴力損失補償に基づいて制御される。本開示は、聴覚装置の動作方法に関する。この方法は、聴覚装置又は聴覚システムで行われてもよい。この方法は、音声を、第１マイクロフォン入力信号を含む１個以上のマイクロフォン入力信号に変換するステップを備える。この方法は、第１マイクロフォン入力信号に関連する音声明瞭度の指標となる音声明瞭度インジケータを取得するステップを備える。音声明瞭度インジケータを取得することは、第１音源のピッチパラメータを取得するステップを備える。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向とに基づく。この方法は、音声明瞭度インジケータに基づいて、聴覚装置を制御するステップを備える。
１つ以上の例示的な方法において、第１音源のピッチパラメータを取得するステップは、ピッチパラメータを推定することを備える。音声明瞭度インジケータを取得するステップは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度インジケータを推定するステップを備えていてもよい。
１つ以上の例示的な方法において、音声明瞭度インジケータを取得するステップは、ピッチパラメータに基づいて、再構築された音声信号を生成するステップと、再構築された音声信号に基づいて、音声明瞭度インジケータを決定するステップと、を備える。音声明瞭度インジケータを取得するステップは、例えば、短期客観的明瞭度推定器を用い、再構築された音声信号とベース音声信号を比較するステップを備えていてもよい。音声明瞭度インジケータを取得するステップは、マイクロフォン入力信号の高調波モデルパラメータを取得するステップと、高調波モデルパラメータに基づいて、ピッチパラメータを導出するステップと、を備えていてもよい。音声明瞭度インジケータを取得するステップは、マイクロフォン入力信号に基づいて、第１音源の方向を推定するステップを備えていてもよい。
１つ以上の例示的な方法において、音声明瞭度インジケータに基づいて、聴覚装置を制御するステップは、音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号に適用するステップを備える。第１判定基準は、第１明瞭度閾値に基づいていてもよい。第１処理スキームは、ビームフォーミングスキーム、ノイズ低減スキーム、ゲイン制御スキーム、及び、圧縮スキームのうち１個以上のスキームを備えていてもよい。
１つ以上の例示的な方法において、第１音源のピッチパラメータを取得するステップは、外部装置（例えば、付属装置）からピッチパラメータを受信するステップを備えていてもよい。音声明瞭度インジケータの推定が、外部装置（例えば、オンライン）で行われることが想定されてもよく、聴覚装置は、外部装置から音声明瞭度を取得するために、外部装置にマイクロフォン入力信号を提供するように構成される。
音声明瞭度インジケータの推定と、音声明瞭度インジケータに従ったマイクロフォン入力信号の処理は、外部装置（例えば、オンライン）で行われることが想定されてもよく、聴覚装置は、処理された（例えば、ノイズが低減された）マイクロフォン入力信号又はビームフォーミングパラメータを取得するために、外部装置にマイクロフォン入力信号を提供するように構成される。
本開示は、プロセッサ、インターフェース及びメモリを含む付属装置と、聴覚装置とを備える聴覚システムに関する。聴覚システムは、聴覚装置内に設けられ、第１マイクロフォン入力信号を提供するための第１マイクロフォンを含むセットのマイクロフォンと、入力信号を処理し、入力信号に基づいて、電気出力信号を提供するためのプロセッサと、を備えている。聴覚システムは、聴覚装置内に設けられ、電気出力信号をオーディオ出力信号に変換するためのレシーバと、セットのマイクロフォンに動作可能に接続されているコントローラと、を備えている。コントローラは、音声明瞭度インジケータに基づいてプロセッサを制御するように構成されている。聴覚システムは、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されている。聴覚システムは、第１音源のピッチパラメータを推定するように構成されている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。
付属装置は、聴覚装置の付属品であってもよい。付属装置は、聴覚装置とペアリングされていてもよく、その他の様式で聴覚装置に無線接続されていてもよい。聴覚システムは、聴覚装置のユーザが保持し、聴覚装置のユーザによって制御されてもよい。付属装置は、スマートフォン、スマートウォッチ又はタブレット型コンピュータであってもよい。
１つ以上の例示的な聴覚システムにおいて、付属装置は、コントローラを備えており、このコントローラは、聴覚装置のプロセッサによって遠隔からアクセスされ、音声明瞭度の推定は、聴覚装置から遠隔で、例えば、付属装置で行われる。
本明細書に開示される聴覚装置、システム、及び、方法によって、音声明瞭度インジケータを予測し、予測された音声明瞭度インジケータに従って、入力信号に適用される処理の調節が可能になる。
図面は、明確さのための略図であり、単純化されており、図面は、本発明の理解にとって不可欠な詳細を単に示すものであり、他の詳細は省略される。全体的に、同一又は対応する部分には、同じ参照番号が使用される。
図１は、本開示の例示的な聴覚装置２のブロック図である。聴覚装置２は、セットのマイクロフォンを備えている。セットのマイクロフォンは、１個以上のマイクロフォンを備えていてもよい。セットのマイクロフォンは、第１マイクロフォン入力信号９を提供するための第１マイクロフォン８、及び／又は、第２マイクロフォン入力信号１１を提供するための第２マイクロフォン１０を備える。
聴覚装置２は、第１外部音源（図１に示さない）の第１無線入力信号５をアンテナ出力信号に変換するためのアンテナ４を、任意的に備えている。聴覚装置２は、アンテナ出力信号を１個以上のトランシーバ入力信号に変換するために、アンテナ４に接続されており、かつ、第１マイクロフォン入力信号９及び第２マイクロフォン入力信号１１のそれぞれを提供するために、第１マイクロフォン８及び任意的に第２マイクロフォン１０を備えるセットのマイクロフォンに接続されている無線トランシーバ７を、任意的に備えている。
聴覚装置２は、入力信号（例えば、マイクロフォン入力信号）を処理するためのプロセッサ１４を備えている。プロセッサ１４は、プロセッサ１４に対する入力信号に基づいて、電気出力信号を提供する。
聴覚装置は、電気出力信号をオーディオ出力信号に変換するためのレシーバ１６を備えている。
聴覚装置は、コントローラ１２を備えている。コントローラ１２は、第１マイクロフォン８及びプロセッサ１４に動作可能に接続されている。コントローラ１２は、第２マイクロフォン１０に動作可能に接続されていてもよい。コントローラ１２は、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成される。コントローラ１２は、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するための音声明瞭度推定器１２ａを備えている。コントローラ１２は、音声明瞭度インジケータに基づいて、プロセッサ１４を制御するように構成されている。
音声明瞭度推定器１２ａは、第１音源のピッチパラメータを推定するためのピッチ推定器１２ａａを備えている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向とに基づく。音声明瞭度推定器１２ａは、ピッチパラメータ及び第１音源の方向に基づいて、音声明瞭度インジケータを推定するように構成されている。
プロセッサ１４は、ユーザの聴力損失を補償し、入力信号に基づいて、電気出力信号１５を提供するように構成されている。レシーバ１６は、電気出力信号１５を、聴覚装置のユーザの鼓膜に向かって進むオーディオ出力信号に変換する。
音声明瞭度推定器１２ａは、ピッチパラメータに基づいて、再構築された音声信号を生成するためのスピーチシンセサイザ１２ａｂを備えていてもよい。音声明瞭度推定器１２ａは、スピーチシンセサイザによって取得される再構築された音声信号に基づいて、音声明瞭度インジケータを推定するように構成されていてもよい。
音声明瞭度推定器１２ａは、短期客観的明瞭度（ＳＴＯＩ）推定器１２ａｃを備えていてもよい。短期客観的明瞭度推定器１２ａｃは、１個以上のマイクロフォン入力信号に基づいて、再構築された音声信号とベース音声信号とを比較し、この比較に基づいて、音声明瞭度インジケータを提供するように構成されている。例えば、短期客観的明瞭度推定器１２ａｃは、再構築された音声信号（例えば、再構築されたリファレンス音声信号）と、マイクロフォン入力信号に基づいて取得されるベース音声信号（例えば、騒がしい音声信号）と、を比較する。異なる言い方をすると、短期客観的明瞭度推定器１２ａｃは、再構築された音声信号とベース音声との相関関係を評価し、評価された相関関係を使用して、音声明瞭度インジケータをコントローラ１２又はプロセッサ１４に提供する。
音声明瞭度推定器１２ａは、マイクロフォン入力信号の高調波モデルパラメータを提供するために、ピッチ推定器１２ａａに動作可能に接続される高調波モデル推定器１２ａｄを備えていてもよい。ピッチ推定器１２ａａは、高調波モデルパラメータと、任意的に、対数尤度関数を用いて、ピッチパラメータを導出するように構成されていてもよい。
１つ以上の例示的な聴覚装置において、セットのマイクロフォン８、１０は、第２マイクロフォン入力信号１１を提供するための第２マイクロフォン１０を備える。音声明瞭度推定器１２ａは、第１マイクロフォン入力信号９及び第２マイクロフォン入力信号１１に基づいて、第１音源の方向を推定するための方向推定器１２ａｅを備えていてもよい。音声明瞭度推定器１２ａは、第１音源の方向に基づいて、音声明瞭度インジケータを導出するように構成されていてもよい。例えば、ピッチパラメータ及び第１音源の方向（例えば、マイクロフォン入力信号の到来方向）は、１個のマイクロフォンによって受信される所望のマイクロフォン入力信号のための空間−時間的な高調波モデルを利用することによって、音声明瞭度推定器１２ａで一緒に推定される。
１つ以上の例示的な聴覚装置において、聴覚装置２は、音声明瞭度インジケータが第１判定基準を満たす場合に、聴覚装置が、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号９、１１に適用するように構成されている。その反対に、音声明瞭度インジケータが第１判定基準を満たさない場合に、聴覚装置２は、既に適用されているのと同じ処理スキームを引き続きマイクロフォン入力信号に適用するように構成されている。第１判定基準は、第１明瞭度閾値に基づいていてもよい。例えば、音声明瞭度インジケータが第１明瞭度閾値より小さいときに、音声明瞭度インジケータは、第１判定基準を満たす。音声明瞭度インジケータが第１明瞭度閾値と等しいか、又は、第１明瞭度閾値より大きいときに、音声明瞭度インジケータが第１判定基準を満たすことが想定されてもよい。
１つ以上の例示的な聴覚装置において、音声明瞭度インジケータが第２判定基準を満たす場合に、聴覚装置２が、第２処理スキームを選択し、第２処理スキームを第１マイクロフォン入力信号に適用するように構成されていてもよい。１つ以上の例示的な聴覚装置において、第１処理スキーム及び／又は第２処理スキームは、ビームフォーミングスキーム、ノイズ低減スキーム、ゲイン制御スキーム、及び、圧縮スキームのうちの１個以上のスキームを備える。
聴覚装置２は、プロセッサ１４及び／又はコントローラ１２を用いて、第１処理スキーム及び／又は第２処理スキームを選択し、第１マイクロフォン入力信号９に適用するように構成されていてもよい。
図２は、本開示の聴覚装置を動作させる例示的な方法のフロー図である。聴覚装置の動作方法１００は、本開示の聴覚装置又は聴覚システムで行われてもよい。方法１００は、音を、第１マイクロフォン入力信号を備える１個以上のマイクロフォン入力信号に変換するステップ１０２を備える。この方法は、第１マイクロフォン入力信号に関連する音声明瞭度の指標となる音声明瞭度インジケータを取得するステップ１０４を備える。音声明瞭度インジケータを取得するステップ１０４は、第１音源のピッチパラメータと、任意的に、第１音源の方向を取得するステップ１０４ａを備える。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向とに基づく。この方法は、音声明瞭度インジケータに基づいて、聴覚装置を制御するステップ１０６を備える。
１つ以上の例示的な方法において、第１音源のピッチパラメータを取得するステップ１０４ａは、ピッチパラメータを推定するステップ１０４ａａを備える。音声明瞭度インジケータを取得するステップ１０４は、１個以上のマイクロフォン入力信号、ピッチパラメータ及び第１音源の方向に基づいて、音声明瞭度インジケータを推定するステップ１０４ｂを備えていてもよい。
１つ以上の例示的な方法において、音声明瞭度インジケータを取得するステップ１０４は、ピッチパラメータに基づいて、再構築された音声信号を生成するステップ１０４ｃと、再構築された音声信号に基づいて、音声明瞭度インジケータを決定するステップ１０４ｄと、を備える。音声明瞭度インジケータを取得するステップ１０４は、例えば、短期客観的明瞭度推定器を用いて、再構築された音声信号とベース音声信号を比較するステップ１０４ｅを備えていてもよい。
音声明瞭度インジケータを取得するするステップ１０４は、マイクロフォン入力信号の高調波モデルパラメータを取得するステップと、高調波モデルパラメータに基づいて、ピッチパラメータを導出するステップと、を備えていてもよい。音声明瞭度インジケータを取得するステップ１０４は、マイクロフォン入力信号に基づいて、第１音源の方向を推定するステップを備えていてもよい。
１つ以上の例示的な方法において、音声明瞭度インジケータに基づいて、聴覚装置を制御するステップ１０６は、音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、第１処理スキームをマイクロフォン入力信号に適用するステップを含む。第１判定基準は、第１明瞭度閾値に基づいていてもよい。第１処理スキームは、ビームフォーミングスキーム、ノイズ低減スキーム、ゲイン制御スキーム及び圧縮スキームのうち１個以上のスキームを備えていてもよい。
１つ以上の例示的な方法において、第１音源のピッチパラメータを取得するステップ１０４ａは、外部装置（例えば、付属装置）からピッチパラメータを受信するステップを含んでいてもよい。音声明瞭度インジケータの推定が、外部装置（例えば、オンライン）で行われることが想定されていてもよく、聴覚装置は、外部装置から音声明瞭度を取得するために、外部装置にマイクロフォン入力信号を提供するように構成される。
音声明瞭度インジケータの推定と、音声明瞭度インジケータに従ったマイクロフォン入力信号の処理は、外部装置（例えば、オンライン）で行われることが想定されていてもよく、聴覚装置は、処理された（例えば、ノイズが低減された）マイクロフォン入力信号又はビームフォーミングパラメータを取得するために、外部装置にマイクロフォン入力信号を提供するように構成される。
図３は、本開示の例示的な聴覚システム２００のブロック図である。聴覚システム２００は、プロセッサ２０４、インターフェース２０６及びメモリ２０８を含む付属装置２０２と、聴覚装置２１０とを備える。
聴覚システム２００は、聴覚装置内に配置され、第１マイクロフォン入力信号を提供するための第１マイクロフォン２１２（及び任意的に第２マイクロフォン２１４）を備えるセットのマイクロフォンと、入力信号を処理し、入力信号に基づいて、電気出力信号を提供するためのプロセッサ２１６と、を備える。聴覚システムは、聴覚装置内に配置され、電気出力信号をオーディオ出力信号に変換するためのレシーバ２１８と、セットのマイクロフォン２１２、２１４に動作可能に接続されているコントローラ１２と、を備えている。コントローラ１２は、図１に関連して開示される音声明瞭度インジケータに基づいてプロセッサを制御するように構成されている。図３のコントローラ１２は、聴覚装置２１０内に配置されている。１つ以上の例示的な聴覚システムにおいて、コントローラ１２は、付属装置２０２に配置されていてもよい。
聴覚システム２００は、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されている。例えば、聴覚装置２１０は、コントローラ１２を用い、１個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されていてもよい。１つ以上の例示的な聴覚システムにおいて、付属装置２０２は、聴覚装置２１０によって送信されたマイクロフォン入力信号を（例えば、アンテナ２２２及び無線トランシーバ２２４を介し、通信リンク２３０を利用して）受信するように構成されており、付属装置に配置されたコントローラ１２によって、１個以上のマイクロフォン入力に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するように構成されていてもよい。
聴覚システム２００は、第１音源のピッチパラメータを推定するように構成されている。音声明瞭度インジケータは、ピッチパラメータと、第１音源の方向と、に基づく。例えば、聴覚装置２１０は、コントローラ１２を用い、第１音源のピッチパラメータを推定し、ピッチパラメータと方向とに基づいて、音声明瞭度を導出するように構成されていてもよい。
１つ以上の例示的な聴覚システムにおいて、付属装置２０２は、聴覚装置２１０によって送信されたマイクロフォン入力信号を（例えば、アンテナ２２２及び無線トランシーバ２２４を介し、通信リンク２３０を利用して）受信し、コントローラ１２を用いて、第１音源のピッチパラメータを推定し、ピッチパラメータと方向とに基づいて、音声明瞭度を導出するように構成されていてもよい。
「第１」、「第２」、「第３」及び「第４」などの用語の使用は、任意の特定の順序を暗示するものではなく、個々の要素を特定するために含まれている。さらに、第１、第２などの用語の使用は、任意の順序又は重要性を示すものではなく、むしろ、ある要素を別の要素と区別するために使用される。第１及び第２との用語は、単なる標識のためにこの部分及び他の箇所で使用され、任意の特定の空間的な順序又は時間的な順序を示すことを意図したものではない。さらに、第１要素との標識は、第２の要素の存在を暗示するものではなく、その逆に、第２要素との標識は、第１の要素の存在を暗示するものではない。
特定の特徴を示し、記載してきたが、これらの特徴は、特許請求の範囲に記載された発明を限定することを意図していないことが理解され、特許請求の範囲に記載された発明の精神及び範囲から逸脱することなく種々の変更及び改変が行われてもよいことが当業者に明らかになるだろう。従って、明細書及び図面は、限定するという観点ではなく、実例であると考えるべきである。特許請求の範囲に記載された発明は、全ての代替例、改変及び均等物を包含することを意図している。
２ ：聴覚装置
４ ：アンテナ
５ ：第１無線入力信号
７ ：トランシーバ
８ ：第１マイクロフォン
９ ：第１マイクロフォン入力信号
１０ ：第２マイクロフォン
１１ ：第２マイクロフォン入力信号
１２ ：コントローラ
１２ａ ：音声明瞭度推定器
１２ａａ ：ピッチ推定器
１２ａｂ ：スピーチシンセサイザ
１２ａｃ ：短期客観的明瞭度（ＳＴＯＩ）推定器
１２ａｄ ：高調波モデル推定器
１２ａｅ ：方向推定器
１４ ：プロセッサ
１６ ：レシーバ
１００ ：聴覚装置の動作方法
１０２ ：音を１個以上のマイクロフォン入力信号に変換するステップ
１０４ ：音声明瞭度インジケータを取得するステップ
１０４ａ ：第1音源のピッチパラメータを取得するステップ
１０４ａａ：ピッチパラメータを推定するステップ
１０４ｂ ：１個以上のマイクロフォン入力信号に基づいて、音声明瞭度インジケータを推定するステップ
１０４ｃ ：ピッチパラメータに基づいて、再構築された音声信号を生成するステップ
１０４ｄ ：再構築された音声信号に基づいて、音声明瞭度インジケータを決定するステップ
１０４ｅ ：再構築された音声信号とベース音声信号を比較するステップ
１０６ ：音声明瞭度インジケータに基づいて、聴覚装置を制御するステップ
２００ ：聴覚システム
２０２ ：付属装置
２０４ ：プロセッサ
２０６ ：インターフェース
２０８ ：メモリ
２１０ ：聴覚装置
２１２ ：第１マイクロフォン
２１４ ：第２マイクロフォン
２１６ ：プロセッサ
２１８ ：レシーバ
２２２ ：アンテナ
２２４ ：トランシーバ
２３０ ：通信リンク

Claims (15)

  1. 聴覚装置であって、
    −第１マイクロフォン入力信号を提供するための第１マイクロフォンを備えるセットのマイクロフォンと；
    −入力信号を処理し、入力信号に基づいて、電気出力信号を提供するためのプロセッサと；
    −前記電気出力信号をオーディオ出力信号に変換するためのレシーバと；
    −前記セットのマイクロフォンに動作可能に接続されているコントローラと、
    を備え、
    前記コントローラは、
    １個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる音声明瞭度インジケータを推定するための音声明瞭度推定器を備えており、
    前記音声明瞭度インジケータに基づいて、前記プロセッサを制御するように構成されており、
    前記音声明瞭度推定器は、第１音源のピッチパラメータを推定するためのピッチ推定器を備えており、
    前記音声明瞭度インジケータは、前記ピッチパラメータと、前記第１音源の方向と、に基づく、
    聴覚装置。
  2. 前記音声明瞭度推定器は、前記ピッチパラメータに基づいて、再構築された音声信号を生成するためのスピーチシンセサイザを備えており、
    前記音声明瞭度インジケータは、前記再構築された音声信号に基づく、請求項１に記載の聴覚装置。
  3. 前記音声明瞭度推定器は、短期客観的明瞭度推定器を備えており、
    前記短期客観的明瞭度推定器は、前記再構築された音声信号と、前記１個以上のマイクロフォン入力信号に基づくベース音声信号と、を比較し、前記音声明瞭度インジケータを提供するように構成されている、請求項２に記載の聴覚装置。
  4. 前記音声明瞭度推定器は、前記マイクロフォン入力信号の高調波モデルパラメータを提供するために前記ピッチ推定器に動作可能に接続されている高調波モデル推定器を備えており、
    前記ピッチパラメータは、前記高調波モデルパラメータに基づく、請求項１から３のいずれか一項に記載の聴覚装置。
  5. 前記セットのマイクロフォンは、第２マイクロフォン入力信号を提供するための第２マイクロフォンを備え、
    前記音声明瞭度推定器は、前記第１マイクロフォン入力信号及び前記第２マイクロフォン入力信号に基づいて、前記第１音源の方向を推定するための方向推定器を備えており、
    前記音声明瞭度インジケータは、前記第１音源の方向に基づく、請求項１から４のいずれか一項に記載の聴覚装置。
  6. 前記音声明瞭度インジケータが第１判定基準を満たす場合に、第１処理スキームを選択し、前記第１処理スキームを前記マイクロフォン入力信号に適用するように構成されている、請求項１から５のいずれか一項に記載の聴覚装置。
  7. 前記音声明瞭度インジケータが第１判定基準を満たさない場合に、既に適用されているのと同じ処理スキームを引き続き前記マイクロフォン入力信号に適用するように構成されている、請求項１から６のいずれか一項に記載の聴覚装置。
  8. 前記第１判定基準が、第１明瞭度閾値に基づく、請求項６または７に記載の聴覚装置。
  9. 前記音声明瞭度インジケータが前記第１明瞭度閾値より小さいときに、前記音声明瞭度インジケータが前記第１判定基準を満たす、請求項８に記載の聴覚装置。
  10. 前記音声明瞭度インジケータが第２判定基準を満たす場合に、第２処理スキームを選択し、前記第２処理スキームを前記第１マイクロフォン入力信号に適用するように構成されている、請求項１から９のいずれか一項に記載の聴覚装置。
  11. 前記第１処理スキーム及び／又は前記第２処理スキームは、ビームフォーミングスキーム、ノイズ低減スキーム、ゲイン制御スキーム、及び、圧縮スキームのうちの１個以上のスキームを備える、請求項６から１０のいずれか一項に記載の聴覚装置。
  12. 聴覚装置の動作方法であって、
    −音を、第１マイクロフォン入力信号を含む１個以上のマイクロフォン入力信号に変換するステップと、
    −前記第１マイクロフォン入力信号に関連する音声明瞭度の指標となる音声明瞭度インジケータを取得するステップであって、前記音声明瞭度インジケータを取得するステップは、第１音源のピッチパラメータを取得するステップを備え、前記音声明瞭度インジケータは、前記ピッチパラメータと、前記第１音源の方向とに基づく、前記音声明瞭度インジケータを取得するステップと、
    −前記音声明瞭度インジケータに基づいて、前記聴覚装置を制御するステップと、
    を備える、方法。
  13. 前記第１音源の前記ピッチパラメータを取得するステップは、前記ピッチパラメータを推定するステップを備え、
    前記音声明瞭度インジケータを取得するステップは、前記１個以上のマイクロフォン入力信号に基づいて、前記音声明瞭度インジケータを推定するステップを備える、請求項１２に記載の方法。
  14. 前記音声明瞭度インジケータを取得するステップは、
    前記ピッチパラメータに基づいて、再構築された音声信号を生成するステップと、
    前記再構築された音声信号に基づいて、前記音声明瞭度インジケータを決定するステップと、
    を備える、請求項１２または１３に記載の方法。
  15. プロセッサ、インターフェース及びメモリを備える付属装置と、聴覚装置と、を備える聴覚システムであって、
    −前記聴覚装置内に配置され、第１マイクロフォン入力信号を提供するための第１マイクロフォンを備えるセットのマイクロフォンと；
    −入力信号を処理し、入力信号に基づいて、電気出力信号を提供するためのプロセッサと；
    −前記聴覚装置内に配置され、前記電気出力信号をオーディオ出力信号に変換するためのレシーバと；
    −前記セットのマイクロフォンに動作可能に接続されているコントローラと、を備え、
    前記コントローラは、音声明瞭度インジケータに基づいて前記プロセッサを制御するように構成されており、
    前記聴覚システムは、
    １個以上のマイクロフォン入力信号に基づいて、音声明瞭度の指標となる前記音声明瞭度インジケータを推定するように構成されており、
    第１音源のピッチパラメータを推定するように構成されており、
    前記音声明瞭度インジケータは、前記ピッチパラメータと、前記第１音源の方向と、に基づく、聴覚システム。
JP2018025398A 2017-03-02 2018-02-15 聴覚装置、方法、及び、聴覚システム Active JP6965178B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP17158989.8A EP3370440B1 (en) 2017-03-02 2017-03-02 Hearing device, method and hearing system
EP17158989.8 2017-03-02

Publications (3)

Publication Number Publication Date
JP2018174521A true JP2018174521A (ja) 2018-11-08
JP2018174521A5 JP2018174521A5 (ja) 2021-04-01
JP6965178B2 JP6965178B2 (ja) 2021-11-10

Family

ID=58227955

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018025398A Active JP6965178B2 (ja) 2017-03-02 2018-02-15 聴覚装置、方法、及び、聴覚システム

Country Status (5)

Country Link
US (1) US20180255406A1 (ja)
EP (1) EP3370440B1 (ja)
JP (1) JP6965178B2 (ja)
CN (1) CN108540912B (ja)
DK (1) DK3370440T3 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11412333B2 (en) * 2017-11-15 2022-08-09 Starkey Laboratories, Inc. Interactive system for hearing devices
EP3961624A1 (de) * 2020-08-28 2022-03-02 Sivantos Pte. Ltd. Verfahren zum betrieb einer hörvorrichtung in abhängigkeit eines sprachsignals
DE102020210919A1 (de) 2020-08-28 2022-03-03 Sivantos Pte. Ltd. Verfahren zur Bewertung der Sprachqualität eines Sprachsignals mittels einer Hörvorrichtung

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110224976A1 (en) * 2010-03-11 2011-09-15 Taal Cees H Speech intelligibility predictor and applications thereof
EP2528356A1 (en) * 2011-05-25 2012-11-28 Oticon A/s Voice dependent compensation strategy

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2736273A1 (en) * 2012-11-23 2014-05-28 Oticon A/s Listening device comprising an interface to signal communication quality and/or wearer load to surroundings
US9769576B2 (en) * 2013-04-09 2017-09-19 Sonova Ag Method and system for providing hearing assistance to a user
US20170374476A9 (en) * 2013-11-08 2017-12-28 Avraham Suhami Hearing Eyeglass System and Method
DK3057335T3 (en) 2015-02-11 2018-01-08 Oticon As HEARING SYSTEM, INCLUDING A BINAURAL SPEECH UNDERSTANDING

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110224976A1 (en) * 2010-03-11 2011-09-15 Taal Cees H Speech intelligibility predictor and applications thereof
EP2528356A1 (en) * 2011-05-25 2012-11-28 Oticon A/s Voice dependent compensation strategy

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JENSEN, JESPER RINDOM ET AL.: "STATISTICALLY EFFICIENT METHODS FOR PITCH AND DOA ESTIMATION", 2013 IEEE INTERNATIONAL CONFERENCE ON ACOUSTICS, SPEECH AND SIGNAL PROCESSING, JPN6021016445, 31 May 2013 (2013-05-31), pages 3900 - 3904, XP032508459, ISSN: 0004607339, DOI: 10.1109/ICASSP.2013.6638389 *
SORENSEN, CHARLOTTE ET AL.: "SEMI-NON-INTRUSIVE OBJECTIVE INTELLIGIBILITY MEASURE USING SPATIAL FILTERING IN HEARING AIDS", 2016 24TH EUROPEAN SIGNAL PROCESSING CONFERENCE(EUSIPCO), JPN6021016444, 2 September 2016 (2016-09-02), pages 1358 - 1362, ISSN: 0004607338 *

Also Published As

Publication number Publication date
JP6965178B2 (ja) 2021-11-10
EP3370440B1 (en) 2019-11-27
DK3370440T3 (da) 2020-03-02
CN108540912A (zh) 2018-09-14
EP3370440A1 (en) 2018-09-05
US20180255406A1 (en) 2018-09-06
CN108540912B (zh) 2021-01-26

Similar Documents

Publication Publication Date Title
CN108600907B (zh) 定位声源的方法、听力装置及听力系统
CN109040932B (zh) 传声器系统及包括传声器系统的听力装置
CN109951785B (zh) 听力装置及包括双耳降噪系统的双耳听力系统
DK3057335T3 (en) HEARING SYSTEM, INCLUDING A BINAURAL SPEECH UNDERSTANDING
US9723422B2 (en) Multi-microphone method for estimation of target and noise spectral variances for speech degraded by reverberation and optionally additive noise
JP4955676B2 (ja) 音響ビーム形成装置及び方法
US11109164B2 (en) Method of operating a hearing aid system and a hearing aid system
US10425745B1 (en) Adaptive binaural beamforming with preservation of spatial cues in hearing assistance devices
US20210335380A1 (en) Hearing device and method with non-intrusive speech intelligibility
JP6965178B2 (ja) 聴覚装置、方法、及び、聴覚システム
CN108882110B (zh) 基于语音清晰度的听力设备及相关方法
WO2020035158A1 (en) Method of operating a hearing aid system and a hearing aid system
US20160119728A1 (en) Hearing system for estimating a feedback path of a hearing device
US11438712B2 (en) Method of operating a hearing aid system and a hearing aid system
EP4075829B1 (en) A hearing device or system comprising a communication interface
US9906876B2 (en) Method for transmitting an audio signal, hearing device and hearing device system
JP2019135826A (ja) 聴覚機器と、ビームフォーミングを柔軟に制御する方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210209

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210209

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20210209

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20210309

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210511

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210702

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211005

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211020

R150 Certificate of patent or registration of utility model

Ref document number: 6965178

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150