CN111279721B - 听力装置系统和动态地呈现听力装置修改建议的方法 - Google Patents

Abstract

本发明涉及听力装置系统和动态地呈现听力装置修改建议的方法。所述听力装置系统(10)包括听力装置、在通信上联接到所述听力装置的用户界面(32)、以及用于处理心理声学模型(26)的模块。所述心理声学模型(26)被适配为基于听力相关数据来得出修改建议，其中，所述修改建议被适配为解决所述听力装置的用户的听力问题。所述听力装置系统(10)被适配为经由所述用户界面(32)向所述用户动态地呈现所述修改建议，并且被适配为将所述用户界面(32)调整为接收所述用户针对所述动态地呈现的修改建议做出的输入。

Description

听力装置系统和动态地呈现听力装置修改建议的方法

技术领域

本发明涉及用于经由用户界面向听力装置的用户动态地呈现听力装置修改建议的听力装置系统和方法。

背景技术

听力装置通常用于改善用户的听力能力或交流能力。听力装置可以利用听力装置的麦克风拾取周围的声音，处理麦克风信号，从而将听力装置的用户的听力偏好考虑在内，并且经由俗称为接收器的微型扬声器将处理后的声音信号提供到用户的听道中。听力装置还可以从诸如感应线圈或无线接口之类的另选输入接收声音。

在听力装置领域，在现有技术中已知的是，只要用户感知到听力问题并想要将其消除，就解决该听力问题。然而，用户可能想要消除各种类型的听力问题。

当今，听力装置的调试和微调可以在听力护理专业人员(HCP)的办公室中进行。在一个示例中，可以向听力护理专业人员提供用户记住并试图描述的听力问题的描述。基于该信息，听力护理专业人员尝试找到解决方案，该解决方案可能能够解决这些听力问题。然而，这种公知的调试的一个缺点可能在于，其发生在对于患者可能是不适当的时间、地点和/或情况下。这种公知的调试的另一个缺点可能在于，其发生在人工的情况下，这很难满足听力装置用户在日常生活中的需求。这种公知的调试的另一个缺点可能是，其发生在听力问题没有出现的时间、地点和/或情况下，因此只能基于患者的回顾执行调试。

在另选的方法中，听力装置的调试可以由用户自己在真实生活状况下执行。在一个示例中，可以向用户提供仅一个单个的修改器或更确切地说控件。然而，已经表明，该单个的控件的效果可能是有限的，即，仅能适当地解决一小部分听力问题。在另一示例中，可以向用户提供更多控件，例如，五个或甚至更多个。然而，向用户提供增加的数量的控件对于用户而言可能是非常具有挑战性的，因为他将很难能够知道并记住该控件中涉及的每个修改器的效果，并且可能导致试错过程。

因此，本发明的一个目的是提供解决在现有技术中获知的问题的听力装置系统。本发明的另一目的是提供经由用户界面向所述听力装置系统的听力装置的用户动态地呈现听力装置修改建议的方法。

发明内容

本发明涉及听力装置系统，该听力装置系统包括听力装置、在通信上联接到该听力装置的用户界面以及用于处理心理声学模型的模块。所述心理声学模型被适配为基于听力相关数据来得出修改建议，其中，所述修改建议被适配为解决所述听力装置的用户的听力问题。所述听力装置系统被适配为经由用户界面向用户动态地呈现修改建议，并且被适配为将用户界面调整为接收用户针对所述动态地呈现的修改建议做出的输入。

因此，提供了省去针对实际听力问题向用户呈现很多修改器的听力装置系统。更确切地说，本发明的听力装置系统针对实际听力问题提供了最适当的修改。然而，该方法需要得出关于哪种修改对实际听力问题可能最有益的信息。根据本发明，借助于心理声学模型基于听力相关数据来得出修改建议，其中，所述修改建议被适配为解决所述听力装置的用户的听力问题。一旦得出修改建议，就经由听力装置系统的用户界面将修改建议动态地呈现给用户。要注意的是，经由用户界面呈现给用户的“修改建议”可以包含例如，一个或更多个修改器，例如，显示在用户界面上的调节图标。一个或更多个修改器可以包括，例如，滑块、按钮、控制旋钮等中的一个或更多个。

在所提出的听力装置系统的实施方式中，听力相关数据是借助于数据获取装置而提供给所述心理声学模型的，所述听力相关数据包括特性数据、听力装置用户状态、分类器分析数据和声音处理单元数据中的至少一者。基于所提供的听力相关数据，心理声学模型被允许动态地预测要呈现给用户的最相关的修改建议。

在所提出的听力装置系统的实施方式中，特性数据表示听力装置和/或听力装置用户特性，所述听力装置和/或听力装置用户特性表示用户的听力损失、声耦合的类型和听力装置特性中的至少一者。特性数据可以包括但不限于关于用户的听力损失、助听器特性以及声耦合的类型的信息，该类型可以或多或少地直接或间接地取决于所使用的听力装置的类型，例如，耳后听力装置、耳内听力装置等。

在所提出的听力装置系统的实施方式中，听力装置用户状态表示至少一个当前用户状态，所述至少一个当前用户状态用于生成表示响度、尖锐度、可懂度、熟悉度和听力配能中的至少一者的预测感知维度。在一个示例中，听力装置将信号处理的当前状态提供给心理声学模型，以预测包括响度、尖锐度、可懂度、熟悉度和听力配能中的至少一者的感知维度。

在一个实施方式中，所提出的听力装置系统还包括分类器，该分类器被适配为基于对接收到的声音的分析来生成分类器分析数据，并且被适配为将所得到的分类器分析数据至少传输到心理声学模型。

在一个实施方式中，所提出的听力装置系统还包括声音处理单元(SPU)，该声音处理单元(SPU)被提供有来自分类器的分类器分析数据，所述声音处理单元(SPU)被适配为对所接收的数据执行声音处理，并且被适配为将所得到的声音处理数据传输到用于处理心理声学模型的模块。

在所提出的听力装置系统的实施方式中，所述分析基于声音的全局信号电平、频谱信号电平、信噪比(SNR)和动态特性中的至少一者。

在一个实施方式中，所提出的听力装置系统被适配为将分析的结果频繁地提供给用于处理心理声学模型的模块。在一个示例中，听力装置将分析的结果(例如，声音的全局信号电平、频谱信号电平、SNR、动态特性)频繁地提供给动态修改器的心理声学模型。

在另一实施方式中，所提出的听力装置系统被适配为在用户经由界面做出提示后，将分析的结果提供给用于处理心理声学模型的模块。在一个示例中，用户可以使听力装置开始将分析的结果(例如，声音的全局信号电平、频谱信号电平、SNR、动态特性)提供给动态修改器的心理声学模型。动态修改器可以向用户请求进一步的信息，例如，关于实际的听力活动或听力需求。

在所提出的听力装置系统的实施方式中，基于所接收的数据，用于处理心理声学模型的模块被适配为评估听力装置用户预期的、听力装置的性能和/或益处。

在所提出的听力装置系统的实施方式中，用于处理心理声学模型的模块被适配为将实际性能与至少一个参考模型进行比较。因此，用于处理心理声学模型的模块可以基于接收到的数据来为用户评估听力装置的预期性能和益处。另外，用于处理心理声学模型的模块可以将实际性能与参考模型进行比较。在一个示例中，正常听力的人的听力能力可以用作参考模型。

在所提出的听力装置系统的实施方式中，参考模型包括被定义为具有正常听力能力的人的听力能力的正常性能听力感知水平的预定义范围或被定义为至少足以进行听力活动的较低性能听力感知水平的预定义范围。

在所提出的听力装置系统的实施方式中，用于处理心理声学模型的模块被适配为得出修改建议，一旦用户请求，所述修改建议就被提供给用户以进行更好的听力支持。例如，如果心理声学模型检测到可接受的易懂性和清晰度的范围减小或甚至丢失，则心理声学模型得出修改建议，一旦客户请求更好的听力支持，就可以提供该修改建议。所提出的修改可以与由调试软件提供的微调技术中提供的修改相同。在一个示例中，在心理声学模型不能得出适当的修改的情况下，用于处理心理声学模型的模块可以通知用户，或者如果有必要可以推荐其它动作，例如，寻找安静的房间、拜访听力护理专业人员(HCP)等。

在所提出的听力装置系统的实施方式中，用于处理心理声学模型的模块被适配为基于预定的听力情况来对修改建议进行优先级排序。假定所请求的修改取决于用户的听力活动或听力需求，则心理声学模型可能需要提供不止一个修改建议。听力需求或听力活动可以或多或少与某些听力情况密切联系。在一个示例中，可以基于例如在特定的听力情况下听力任务可能发生的概率来对修改建议进行优先级排序。假定包含语音和音乐的声音情况，用户可能想要理解语音，但是可以相反地想要听音乐。因此，在这种情况下，心理声学模型可以针对感知维度“语音可懂度”提供第一修改(例如，更多波束形成器、更多噪声消除器等)，并针对感知维度“音乐欣赏”提供第二修改(例如，更多线性增益模型、更少声音清理等)。

在所提出的听力装置系统的实施方式中，用于处理心理声学模型的模块在听力装置本身中或者在在通信上联接到听力装置的至少一个外部设备中实现，该外部设备包括外部装置，尤其是智能电话、智能手表、可穿戴装置、中央网络服务器或云服务器。

在所提出的听力装置系统的实施方式中，所述界面由在通信上联接到听力装置的外部设备包含，该外部设备尤其是智能电话、智能手表和可穿戴装置中的至少一者。听力装置与外部设备之间的联接可以借助于标准化的无线连接(例如，蓝牙等)或非标准的无线连接来实现。

此外，本发明涉及经由用户界面向听力装置的用户动态地呈现听力装置修改建议的方法。所述方法包括以下步骤：借助于数据获取装置将听力相关数据提供给用于处理心理声学模型的模块；在心理声学模型中，基于听力相关数据得出修改建议；以及经由用户界面向用户动态地呈现所得出的修改建议。

在一个实施方式中，所提出的方法还包括以下步骤：基于用户经由界面针对所述动态地呈现的修改建议做出的输入来修改听力装置。

明确指出，上面提及的实施方式的任意组合是另外可能的实施方式的主题。仅排除将导致矛盾的那些实施方式。

附图说明

参照附图来进一步描述本发明，附图联合地例示了将结合以下详细描述来考虑的各种示例性实施方式。附图中示出的是：

图1示意性地描绘了根据本发明的听力装置系统；

图2a、图2b示意性地描绘了不同实施方式中的听力装置系统；以及

图3的a至e示意性地描绘了听力装置系统的动态修改。

具体实施方式

图1示出了根据本发明实施方式的听力装置系统10的图。听力装置系统10可以包括听力装置的电路以及例如外部设备，下面将对其进行更详细说明。

使用麦克风系统12来从环境接收声音。在所示示例中，麦克风系统12包括两个麦克风。尽管未示出，但是可以使用多于或少于两个麦克风。麦克风系统12将接收到的声音转换成电信号，该电信号被传送到输入单元14。作为选择，也可以将从另选输入源(AIS)(例如，远程麦克风等(未示出))接收的声音提供给输入单元14。在输入单元14中，可以对收集到的声音进行预处理。输入单元14的结果可以被提供给声音分析单元16，有时也称为“分类器”。声音分析单元16可以被适配为基于对接收到的声音的分析来生成分类器分析数据。该分析可以基于声音的全局信号电平、频谱信号电平、信噪比(SNR)和动态特性中的至少一者。

所得到的分类器分析数据可以从声音分析单元16传输到声音处理单元(SPU)18，该声音处理单元18被适配为对接收到的数据执行声音处理。所得到的声音处理数据可以从声音处理单元18传输到数据获取装置20。另选地，或作为选择，可以将所得到的分类器分析数据直接从声音分析单元16传输到数据获取装置20，即，无需声音处理单元18的干预。

数据获取装置20还可以从特性数据模块22和/或用户状态模块24获取数据，这将在下面描述。特性数据模块22被适配为生成表示听力装置和/或听力装置用户特性的特性数据，听力装置和/或听力装置用户特性表示用户的听力损失、声耦合的类型和听力装置特性中的至少一者。用户状态模块24被适配为生成表示至少一个当前用户状态的听力装置用户状态，至少一个当前用户状态用于生成表示响度、尖锐度、可懂度、熟悉度和听力配能(hearing effort)中的至少一者的预测感知维度。

回到数据获取装置20，所获取的数据(有时称为听力相关数据)被提供给用于处理心理声学模型的模块26。换句话说，模块26被提供有听力相关数据，该听力相关数据包括从特性数据模块22接收的特性数据、从用户状态模块24接收的听力装置用户状态、从声音分析单元16接收的分类器分析数据以及从声音处理单元18接收的声音处理单元数据中的至少一者。在模块26中，心理声学模型被适配为基于所接收的听力相关数据来得出修改建议，其中，所述修改建议被适配为解决听力装置的用户的听力问题。换句话说，心理声学模型26被馈送有听力相关数据，并且被用于监测和评估实际声音。一旦真实的或潜在的听力问题发生，就使用心理声学模型26来得出修改建议，该修改建议能够解决该听力问题。听力装置系统10被适配为将所得出的修改建议动态地呈现给用户，这将在下面更详细地描述。用户界面本身能够接收用户针对所述动态地呈现的修改建议做出的输入，下面也将对其进行更详细描述。

可以在权衡管理单元28中对由心理声学模型26得出的所建议的修改的结果执行权衡管理。权衡管理单元28可以检查所建议的修改是否对除了当前声音情况以外的其它声音类型也具有正面或负面影响。如果请求的修改将被永久而不是暂时地应用，则这可能是推荐的。可以将心理声学模型26的结果传送到修改建议模块30，以将修改建议提供给相关联的用户界面32，该用户界面32是听力装置系统10的一部分。该用户界面32可以包含在在通信上连接到该听力装置的外部装置(例如，智能电话、智能手表、可穿戴装置等)中。修改建议经由用户界面32动态地呈现给用户，该用户界面32还能够接收用户针对所述动态地呈现的修改建议做出的用户交互34。在一个示例中，用户界面32可以包括触摸屏，该触摸屏可以能够向用户动态地呈现修改建议以及能够接收用户针对所述呈现的修改建议做出的用户交互34。用户界面32将用户交互34提供给声音处理单元18，该声音处理单元18又基于接收到的用户进行的修改来调节输出到用户的声音。如此调节的声音被输出到听力装置的接收器36。

图2a、图2b示出了示例性实施方式中的听力装置系统10。如上所述，听力装置系统10包括听力装置本身以及外部装置100，如图2a中示意性例示的。该外部装置100可以被实施为能够向用户动态地呈现修改建议以及接收用户针对所述呈现的修改建议做出的输入的装置。该外部装置100还可以被适配为执行至少心理声学模型26、权衡管理单元28和修改建议模块30的操作，以及上述向用户呈现修改建议的能力和接收用户做出的输入的能力。换句话说，心理声学模型26、权衡管理单元28和修改建议模块30中的至少一者可以在外部装置100中实现。在一个示例中，外部装置100可以由智能电话、智能手表、可穿戴装置等包含或者更确切地说在智能电话、智能手表、可穿戴装置等中被实现。如图1所示的数据获取装置20可以分成第一数据获取装置20a(其可以被包含在听力装置中)和第二数据获取装置20b(其可以被包含在外部装置100中)。

在图2b所示的实施方式中，至少心理声学模型26、权衡管理单元28和修改建议模块30的操作可以在在通信上连接到听力装置系统10的外部服务器110(例如，网络服务器或云)中执行。换句话说，心理声学模型26、权衡管理单元28和修改建议模块30中的至少一者可以在外部服务器110中实现。尽管未示出，但是至少心理声学模型26可以在听力装置本身中实现。第一数据获取装置20a可以被包含在听力装置中，而第二数据获取装置20b可以被包含在外部装置100中。

图3的a至e以示意性修改场景或更确切地说“滑块控制”视图描绘了本发明的优点。如上所述，动态修改器可以对所建议的修改执行权衡管理，即，动态修改器检查所建议的修改是否对除了当前声音情况以外的其它声音类型也具有正面或负面影响。用于处理心理声学模型的模块被适配为将实际性能与至少一个参考模型进行比较。这些图例示了可以在根据本发明的听力装置系统(例如，如图1、图2a、图2b所示)中执行的修改场景。假定了调节“响度感知”水平310以及调节“尖锐度感知”水平320的场景。“响度感知”水平310可以在“太柔和”至“太响亮”之间的范围中调节，而“尖锐度感知”水平320可以在“太沉闷”至“太尖锐”之间的范围中调节。

在图3的a中，示出了正常听力的人的参考调节，也称为参考模型。在图中示意性地描绘为水平对齐的条的相应滑块被示出为设置在正常听力的人可以感知为“良好”的范围中(例如，在其中间)。该范围可以被称为可接受范围330，在图中示意性地例示为阴影框。处于柱形的其余部分中的任何设置可能被正常听力的人感知为“不良”，即，太响亮、太柔和、太沉闷、太尖锐等。参考模型可以包括被定义为具有正常听力能力的人的听力能力的正常性能听力感知水平的预定义范围或者被定义为至少足以进行听力活动的较低性能听力感知水平的预定义范围。

将相应的参考设置和用户在实际听力装置中所做出的设置彼此进行比较(参照图3的a、b)。在一个示例中，如图3的b所示，在该实际设置中，响度和尖锐度感知滑块分别在可接受范围330之外或确切地说远离可接受范围330。结果，预测的感知可能是“太响亮”和“太低沉”。因此，所建议的修改可以包括：“减少增益&增加高频”。

在第一调节中(参照图3的c)，在增加频率时，用户可以将尖锐度感知调节到可接受范围的中间。此外，允许用户借助于示例性例示的控制旋钮340来减小增益(响度)，如通过向下指向的箭头示例性例示的(参照图3的c)。假定该调节未被用户接受。

在第二(后续)调节中(参照图3的d)，减小增益以便进入可接受的范围，同时允许用户增加尖锐度感知水平，如通过向上指向的箭头示例性例示的。由该调节产生的设置在图3的e中例示。假定该调节被用户接受。要注意的是，在后一调节中，滑块将远离可接受范围330或更确切地说在可接受范围330外。然而，基于该场景并如图3的e所示，定制心理声学模型修改了该可接受范围330，以便至少与滑块水平重叠。这是借助于扩展或更确切地说增加可接受范围330的下限阈值来实现的(通过向下扩展可接受范围330的下限阈值而示意性例示)。在该示例性场景中，动态修改器还将记录的信息提供给心理声学模型，以便调节用于预测修改建议的算法和阈值。有利地，这些数据可以用于随着时间的推移根据客户的个人需求来定制心理声学模型。

Claims (21)

1.一种听力装置系统(10)，所述听力装置系统(10)包括听力装置、在通信上联接到所述听力装置的用户界面(32)、以及用于处理心理声学模型(26)的模块，所述心理声学模型(26)被适配为基于听力相关数据来得出修改建议，其中，所述修改建议被适配为解决所述听力装置的用户的听力问题，其中，所述听力装置系统(10)被适配为经由所述用户界面(32)向所述用户动态地呈现所述修改建议，并且将所述用户界面(32)调整为接收所述用户针对动态地呈现的所述修改建议做出的输入；

其中，所述用于处理心理声学模型(26)的模块被适配为基于预定的听力情况对修改建议进行优先级排序。

2.根据权利要求1所述的听力装置系统(10)，其中，所述听力相关数据是借助于数据获取装置(20；20a、20b)而提供给所述心理声学模型(26)的，所述听力相关数据包括特性数据、听力装置用户状态、分类器分析数据和声音处理单元数据中的至少一者。

3.根据权利要求2所述的听力装置系统(10)，其中，所述特性数据表示听力装置和/或听力装置用户特性，所述听力装置和/或听力装置用户特性表示所述用户的听力损失、声耦合的类型和听力装置特性中的至少一者。

4.根据权利要求2所述的听力装置系统(10)，其中，所述听力装置用户状态表示至少一个当前用户状态，所述至少一个当前用户状态用于生成表示响度、尖锐度、可懂度、熟悉度和听力配能中的至少一者的预测感知维度。

5.根据权利要求2所述的听力装置系统(10)，所述听力装置系统(10)还包括分类器(16)，所述分类器(16)被适配为基于对接收到的声音的分析来生成所述分类器分析数据，并且将所得到的分类器分析数据至少传输到所述心理声学模型(26)。

6.根据权利要求5所述的听力装置系统(10)，所述听力装置系统(10)还包括声音处理单元(18)，所述声音处理单元(18)被提供有来自所述分类器(16)的所述分类器分析数据，所述声音处理单元(18)被适配为对接收到的数据执行声音处理，并且将所得到的声音处理数据传输到所述用于处理心理声学模型(26)的模块。

7.根据权利要求5所述的听力装置系统(10)，其中，所述分析是基于声音的全局信号电平、频谱信号电平、信噪比(SNR)和动态特性中的至少一者。

8.根据权利要求5所述的听力装置系统(10)，所述听力装置系统(10)被适配为将所述分析的结果频繁地提供给所述用于处理心理声学模型(26)的模块。

9.根据权利要求5所述的听力装置系统(10)，所述听力装置系统(10)被适配为在所述用户经由所述用户界面(32)做出提示后，将所述分析的结果提供给所述用于处理心理声学模型(26)的模块。

10.根据权利要求1至9中任一项所述的听力装置系统(10)，其中，所述用于处理心理声学模型(26)的模块被适配为基于接收到的数据来评估听力装置用户预期的、所述听力装置的性能和/或益处。

11.根据权利要求10所述的听力装置系统(10)，其中，所述用于处理心理声学模型(26)的模块被适配为将实际性能与至少一个参考模型进行比较。

12.根据权利要求11所述的听力装置系统(10)，其中，所述参考模型包括被定义为具有正常听力能力的人的听力能力的正常性能听力感知水平的预定义范围或者被定义为至少足以进行听力活动的低性能听力感知水平的预定义范围。

13.根据权利要求12所述的听力装置系统(10)，其中，所述用于处理心理声学模型(26)的模块被适配为得出修改建议，所述修改建议一旦被所述用户请求就被提供给所述用户以进行更好的听力支持。

14.根据权利要求1至9中任一项所述的听力装置系统(10)，其中，所述用于处理心理声学模型(26)的模块在所述听力装置本身中或者在在通信上联接到所述听力装置的至少一个外部设备(110)中实现，所述至少一个外部设备(110)包括外部装置。

15.根据权利要求14所述的听力装置系统(10)，其中，所述外部装置是智能电话、可穿戴装置、中央网络服务器或云服务器。

16.根据权利要求15所述的听力装置系统(10)，其中，所述可穿戴装置包括智能手表。

17.根据权利要求1至9中任一项所述的听力装置系统(10)，其中，所述用户界面(32)由在通信上联接到所述听力装置的外部设备(110)包含。

18.根据权利要求17所述的听力装置系统(10)，其中，所述外部设备(110)是智能电话和可穿戴装置中的至少一者。

19.根据权利要求18所述的听力装置系统(10)，其中，所述可穿戴装置包括智能手表。

20.一种经由用户界面(32)向听力装置的用户动态地呈现听力装置修改建议的方法，所述方法包括：

-借助于数据获取装置(20；20a、20b)将听力相关数据提供给用于处理心理声学模型(26)的模块，

-在所述心理声学模型中，基于所述听力相关数据得出所述修改建议，以及

-经由所述用户界面(32)向所述用户动态地呈现所得出的修改建议；

其中，所述用于处理心理声学模型(26)的模块被适配为基于预定的听力情况对修改建议进行优先级排序。

21.根据权利要求20所述的方法，所述方法还包括以下步骤：基于所述用户经由所述用户界面(32)针对动态地呈现的所述修改建议做出的输入来修改所述听力装置。

Images