CN114982255A - 用于向音频数据提供方向性的听力系统及其操作方法 - Google Patents

用于向音频数据提供方向性的听力系统及其操作方法 Download PDF

Info

Publication number
CN114982255A
CN114982255A CN202080093519.2A CN202080093519A CN114982255A CN 114982255 A CN114982255 A CN 114982255A CN 202080093519 A CN202080093519 A CN 202080093519A CN 114982255 A CN114982255 A CN 114982255A
Authority
CN
China
Prior art keywords
data
orientation
handheld device
audio data
directionality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080093519.2A
Other languages
English (en)
Inventor
B·赫尔德纳
X·吉冈代
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sonova Holding AG
Original Assignee
Sonova AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sonova AG filed Critical Sonova AG
Publication of CN114982255A publication Critical patent/CN114982255A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00Stereophonic arrangements
    • H04R5/033Headphones for stereophonic communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/40Arrangements for obtaining a desired directivity characteristic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R25/00Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception
    • H04R25/55Deaf-aid sets, i.e. electro-acoustic or electro-mechanical hearing aids; Electric tinnitus maskers providing an auditory perception using an external connection, either wireless or wired

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • Otolaryngology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本公开内容涉及一种操作听力系统的方法,所述听力系统包括耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)、输出换能器(115)以及检测器装置(122、322、422、522、622),所述耳部单元被配置为被佩戴在用户的耳朵处,所述输出换能器被包括在所述耳部单元中,所述检测器装置包括多个空间分离的声音检测器(123、124、125、423、424、425、523、524、525、526、624、626)并且被配置为提供表示检测到的声音的音频数据。本公开内容还涉及一种计算机可读介质和一种对应的听力系统,所述计算机可读介质存储用于执行所述方法的指令。为了允许改进对在音频数据中提供的方向性的可调整性,本公开内容提出:在控制数据提供步骤中,在改变被配置为被握持在所述用户的手中的手持式设备(131、731)的空间取向期间基于由所述手持式设备(131、731)生成的取向数据来提供控制数据,所述取向数据指示所述手持式设备(131、731)的所述空间取向;并且在方向性提供步骤中,根据所述控制数据来向所述音频数据提供方向性。

Description

用于向音频数据提供方向性的听力系统及其操作方法
技术领域
本公开内容涉及根据权利要求1的前序部分所述的操作听力系统的方法,所述听力系统包括耳部单元和检测器装置,所述耳部单元被配置为被佩戴在用户的耳朵处,所述检测器装置包括多个空间分离的声音检测器并且被配置为提供表示检测到的声音的音频数据。本公开内容还涉及根据权利要求13的前序部分所述的计算机可读介质,所述计算机可读介质存储用于执行所述方法的指令。本公开内容还涉及根据权利要求14的前序部分所述的听力系统,所述听力系统包括所述耳部单元和所述检测器装置。
背景技术
这样的听力系统通常包括多个间隔开的声音检测器,这些声音检测器被配置为在不同的空间位置处检测声音,从而允许分辨声音检测器检测到声音的不同方向。因此,能够为表示检测到的声音的音频数据提供与检测到的声音的特定方向相对应的方向性,使得在音频数据中主要表示从该方向检测到的声音。
这种类型的听力系统能够包括远程设备,所述远程设备包括在远离耳部单元的位置处的检测器装置。在检测到声音之后,将音频数据从远程设备传输到耳部单元。在传输之后,耳部单元能够提供音频数据的方向性,或者在传输之前,远程设备能够提供音频数据的方向性,或者远程设备能够传输一部分音频数据的方向性并且听力设备能够传输另一部分音频数据的方向性。通常,音频数据是无线传输的。例如,FM(频率调制)无线电链路或数字调制技术能够用于音频数据传输。能够将远程设备提供为固定单元,所述固定单元包括用于固定定位的支撑物。例如,远程设备能够是被配置为被放置在平面上的桌面麦克风。也能够将远程设备提供为便携式单元,所述便携式单元旨在由个人(例如,正佩戴着听力设备的其他重要的听力障碍用户)佩戴。
耳部单元通常包括输出换能器,所述输出换能器被配置为基于所传输的音频数据来刺激用户的听力。输出换能器能够被实施在接收器单元中。例如,输出换能器能够是助听器的扬声器或在用户的耳朵处重现在音频数据中编码的声音的耳机,或者是基于音频数据来产生电信号以刺激听觉神经的耳蜗植入物的电极阵列。听力设备还可以包括一个或多个麦克风,从而允许用远程设备检测到的声音来补充由听力设备检测到的声音和/或在远程设备与听力设备之间切换以进行声音检测。
这样的听力系统的一些应用包括教育环境。例如,患有听觉处理障碍(APD)的儿童能够在以相对于在教室中普遍存在的背景噪声的增强水平听到由远程麦克风捕获的教师的语音的情况下受益。类似地,患有听力丧失的儿童能够在以与由在耳朵水平处佩戴的助听器检测到的教师的语音相比增强的信噪比(SNR)听到由远程麦克风捕获的教师的语音的情况下受益。一些其他应用包括涉及用户的环境中有多个声源的情形,包括例如多个对话伙伴和/或与会人员和/或其他沟通参与人员。远程麦克风从特定方向捕获所选择的参与人员或所选择的一组参与人员的语音(例如在双边对话期间选择当前向全体听众发言的说话人员或即时对话伙伴)能够因SNR提高和/或特别感兴趣的音频内容的声级增强而等同地提高言语可懂度。
然而,在许多应用中,用户希望主要重现的检测声音方向会随着时间而改变。例如,对话伙伴可能改变,或者另一感兴趣的谈话人员可能改变,或者谈话人员的位置可能改变。当多个人员聚集在桌子周围时,经常出现这样的情形。在这些情形中,希望能够向从远程设备(例如从被放置在桌子中心处的桌面麦克风)传输的音频数据提供与正佩戴着听力设备的用户的即时偏好相对应的改变的方向性。在一些情形中,例如当单个人员在安静的背景前说话时,优选方向性可以与检测到的声音具有最高级别的方向相吻合,因此可以自动确定优选方向性。然而,在许多其他情形中,例如当用户非常随意地将对话伙伴或他的倾听意图改变到环境中的另一感兴趣声源时,听力系统对优选的音频方向性的自动检测似乎是不可行的。尤其是在这种类型的情形中,允许用户以方便的方式手动选择所希望的方向性(特别是允许用户在他的环境中选择应当提供其方向性的特定目标)是有益的。
国际专利申请公布内容WO 2008/098590公开了前述类型的听力系统,所述听力系统包括听力设备和远程设备,所述听力设备被佩戴在用户的耳朵处,所述远程设备包括多个间隔开的声音检测器。每个声音检测器都包括专用的信号通道,所述信号通道提供检测到的声音的音频数据,其中,将在每条通道上提供的音频数据从远程设备无线传输到听力设备。所述听力设备包括处理器,所述处理器被配置为通过执行声学波束形成来向从多条通道接收的音频数据提供方向性。所述听力系统还包括遥控器,所述遥控器被无线连接到听力设备以用于传输控制命令。所述连接是经由与用于将音频数据从远程设备无线传输到听力设备的无线链路相同的无线链路建立的。所述遥控器包括控制元件,所述控制元件能由用户操作并且允许用户选择所形成的声学波束的宽度和方向。
然而,通过此类控制元件手动调整音频数据的方向性会很繁琐。一方面,当能够经由控制元件以相对精细的增量调整方向性时,这种调整会相当乏味,例如,当应当相对大量地调整方向性时。另一方面,当能够经由控制元件以相对大的增量调整方向性时,调整可能不太精确,并且用户可能无法获得所希望的方向性。在所有情况下,用户可能无法跟踪或不明白所执行的调整,因为(除了输出换能器在用户的耳朵处重现的改变的音频数据(这可能是模棱两可的)以外)用户无法获得方向性实际改变的指示。另外,要求额外的遥控器可能会令人烦恼,特别是考虑到用户需要其他电子设备(例如,用户每天随身携带的智能手机或其他手持式设备)的情况。此外,使用与传输音频数据的通信链路相同的通信链路来传输控制命令的遥控器可能是不利的,具体是因为不必要地建立了长的用于传输控制命令的信号路径以及控制命令传输对已建立的音频数据传输线具有不希望的依赖性。
在这种类型的其他听力系统中,检测器装置被包括在耳部单元中,或者被包括在被配置为被佩戴在用户的两只耳朵处的两个耳部单元中。然后,能够通过产生指向特定方向的声学波束的双耳声学波束形成来提供音频数据的方向性。惯性传感器(例如,加速度计)可以被实施在耳部单元中以确定用户的头部的空间取向,并且根据在用户的头部的旋转移动期间不断改变的头部取向来提供音频数据的方向性。这样的听力系统在欧洲专利申请公布内容EP 2908549 A1中进行了公开。然而,通常,用户并不希望在每次头部移动之后都调整音频数据的方向性。例如,用户可能希望使方向性保持固定在朝向对话伙伴的稳定位置处,即使用户不时地摇头或朝其他方向短暂观看时也是如此。因此,根据用户的头部取向调整方向性可能给用户带来诸多不便,甚至令人不安。
发明内容
本公开内容的目的是避免上面提到的缺点中的至少一种缺点并且提供对在音频数据中提供方向性具有改进的可调整性(特别是对方向性具有更容易和/或更精确和/或更加用户友好的可调整性)的听力系统及其操作方法。本公开内容的另外的目的是增强通过调整选择的方向性的视觉验证性。本公开内容的另一目的是使得听力系统的用户能够在他的生活中减少电子设备的数量。本公开内容的另一目的是提供更直接和/或更简单和/或直截了当的方向性调整所要求的信号路径。本公开内容的又一目的是允许通过非常简单的手动手势来控制听力系统的各种操作。本公开内容的另外的目的是使得用户能够手动选择其环境中的应当在音频数据中提供其检测声音的方向性的声源。
这些目的中的至少一个目的能够通过包括专利权利要求1的特征的操作听力设备的方法和/或包括专利权利要求13的特征的计算机可读介质和/或包括专利权利要求14的特征的听力系统来实现。通过从属权利要求和以下描述定义了有利的实施例。
因此,本公开内容提出了一种操作听力系统的方法,所述听力系统包括耳部单元、输出换能器以及检测器装置,所述耳部单元被配置为被佩戴在用户的耳朵处,所述输出换能器被包括在所述耳部单元中并且被配置为刺激所述用户的听力,所述检测器装置包括多个空间分离的声音检测器并且被配置为提供表示检测到的声音的音频数据。所述方法包括:在控制数据提供步骤中,在改变被配置为被握持在所述用户的手中的手持式设备的空间取向期间基于由所述手持式设备生成的取向数据来提供控制数据,所述取向数据指示所述手持式设备的所述空间取向。所述方法还包括:在方向性提供步骤中,根据所述控制数据来向所述音频数据提供方向性。
因此,通过根据由手持式设备生成的取向数据来控制音频数据的方向性,用户能够通过适当地操纵手持式设备的空间取向来以方便的方式调整方向性。特别地,与由用户执行的其他动作(例如,根据用户的头部的移动进行的调整)相比,通过手动旋转对手持式设备的调整能够提供更可靠和/或更容易的可控性的优点。改变手持式设备的空间取向还能够产生对音频数据的方向性的对应改变的可验证可见化,用户能够通过识别远程设备在周围空间中延伸的方向来观察到这种可视化。通过从用户出于不同目的而使用的手持式设备(例如,智能手机)获得控制数据,用户能够在没有任何额外设备的情况下对方向性进行调整。
独立地,本公开内容提出了一种存储指令的非瞬态计算机可读介质,所述指令在由处理单元运行时使所述处理单元执行所述方法。
独立地,本公开内容提出了一种听力系统,所述听力系统包括耳部单元、输出换能器以及检测器装置,所述耳部单元被配置为被佩戴在用户的耳朵处;所述输出换能器被包括在所述耳部单元中并且被配置为刺激所述用户的听力;所述检测器装置包括多个空间分离的声音检测器并且被配置为提供表示检测到的声音的音频数据。所述听力系统还包括通信端口,所述通信端口被配置为在改变被配置为被握持在所述用户的手中的手持式设备的空间取向期间从所述手持式设备接收控制数据,所述控制数据基于由所述手持式设备生成的取向数据,所述取向数据指示所述手持式设备的所述空间取向。所述听力系统还包括处理单元,所述处理单元被配置为根据所述控制数据来向所述音频数据提供方向性。
随后,描述了听力系统及其操作方法的一些实施方式的额外特征。这些特征中的每个特征都能够被单独提供或者至少与另一特征组合提供。这些特征可以对应地应用于听力系统和/或操作听力系统的方法和/或计算机可读介质的一些实施方式。特别地,听力系统的处理单元能够被配置为执行下面描述的方法的操作。
在一些实施方式中,所述方法包括:在方向确定步骤中,通过将所述取向数据与参考数据进行比较来确定所选择的方向,其中,在所述方向性提供步骤中,所述音频数据的所述方向性被提供为与所选择的方向相对应。所选择的方向可以是用户通过改变手持式设备的空间取向而选择的方向。参考数据可以指示手持式设备第一时间生成的取向数据。然后可以将手持式设备第二时间生成的取向数据与参考数据进行比较。特别地,可以独立于检测器装置的空间取向来确定手持式设备的改变的空间取向。
参考数据也可以指示取向数据与检测器装置的空间取向之间的关系。例如,参考数据可以指示手持式设备的空间取向与检测器装置的空间取向之间的差异。特别地,可以相对于检测器装置的空间取向来确定手持式设备的改变的空间取向。可以采用将取向数据与检测器装置的空间取向进行关联的参考数据来确定在检测器装置的参考系中的所选择的方向。以这种方式,可以增强所希望的方向性调整的准确性。
在一些实施方式中,所述方法包括:在初始化步骤中,基于在初始时间生成的所述取向数据来确定所述参考数据。在方向确定步骤中,可以将在初始时间之后的时间生成的取向数据与参考数据进行比较以确定所选择的方向。因此,可以将在多个随后时间生成的取向数据与参考数据进行比较以确定在每个后续时间时的所选择的方向。初始化步骤可以包括通过用户接口对初始化步骤进行初始化。例如,可以采用在手持式设备和/或耳部单元和/或被连接到手持式设备和/或耳部单元的远程设备上的用户接口。
在一些实施方式中,可以采用初始化步骤来提供将取向数据与检测器装置的空间取向进行关联的参考数据。特别地,取向数据可以经由参考数据与检测器装置的默认空间取向相关联。默认空间取向可以与在静止放置检测器装置和/或在初始时间放置检测器装置期间检测器装置的空间取向相对应。在初始化步骤期间,检测器装置可以被定位为处于默认空间取向。
检测器装置可以被提供有可见的取向特性,从而允许用户将手持式设备的空间取向与取向特性对齐。取向特性可以指示检测器装置相对于手持式设备的空间取向的默认空间取向。也可以提供指示检测器装置相对于手持式设备的多个默认空间取向的多个取向特性。在对初始化步骤进行初始化之前,能够经由用户接口从这多个取向特性中选择特定的取向特性。
取向特性可以被实施为允许识别检测器在周围环境中的空间取向的任何特征。例如,可以通过包围检测器装置的壳体来提供取向特性,所述壳体具有不对称形状,从而允许识别检测器装置在周围环境中的空间取向。视觉标记(例如,标签和/或光发射器)也可以提供取向特性,从而允许识别检测器装置在周围环境中的空间取向。可以在包围检测器装置的壳体上提供视觉标记。例如,检测器装置可以被包括在耳部单元的壳体中和/或被连接到耳部单元的远程设备的壳体中。
在一些实施方式中,参考数据是通过指示检测器装置的空间取向的取向数据来提供的。因此,可以从参考数据中导出取向数据与检测器装置的空间取向之间的关系。耳部单元和/或远程设备可以被配置为生成指示检测器装置的空间取向的取向数据。然后可以通过相对于检测器装置的至少一个声音检测器被提供在固定位置处的传感器来生成参考数据。传感器可以包括惯性传感器和/或罗盘,特别是电子罗盘。传感器可以被提供在相对于检测器装置的固定位置处。传感器可以被包括在耳部单元和/或被连接到耳部单元的远程设备中。
在一些实施方式中,在控制数据提供步骤处执行方向确定步骤,其中,控制数据被提供为使得控制数据指示所选择的方向。因此,可以通过手持式设备来确定所选择的方向,特别是通过被包括在手持式设备中的处理器来确定所选择的方向。在一些实施方式中,在控制数据提供步骤之后执行方向确定步骤,其中,控制数据被提供为使得其包括与参考数据相比较的取向数据。然后,可以通过耳部单元和/或被连接到耳部单元的远程设备来确定所选择的方向,特别是通过被包括在耳部单元和/或远程设备中的处理器来确定所选择的方向。处理单元可以包括被包括在耳部单元和/或远程设备中的处理器。处理单元还可以包括被包括在手持式设备中的处理器。在一些实施方式中,所述方法包括:通过所述手持式设备来生成所述取向数据,并且基于所述取向数据来提供所述控制数据。
控制数据提供步骤可以包括通过耳部单元和/或被连接到耳部单元的远程设备从手持式设备接收控制数据。可以经由无线连接来接收控制数据。可以经由无线连接将控制数据从手持式设备传输到耳部单元和/或被连接到耳部单元的远程设备。无线连接可以基于蓝牙协议。
在一些实施方式中,所述方法包括基于所述取向数据来确定所述手持式设备相对于预定义平面的空间取向,其中,所述方向性提供步骤是根据所述手持式设备相对于所述预定义平面的所述空间取向来执行的。预定义平面可以是手持式设备能在其中旋转的平面,其中,在方向性提供步骤中,基于在预定义平面中的旋转期间和/或之后生成的取向数据的控制数据能够控制音频数据的方向性的改变。特别地,可以根据手持式设备相对于预定义平面的空间取向来激活和/或去激活方向性提供步骤。当去激活方向性提供步骤时,在对音频数据的处理期间,可以禁止提供控制数据并且/或者可以忽略控制数据。当去激活方向性提供步骤时,可以执行不同的操作。所述不同的操作可以包括与方向性提供步骤不同的对音频数据的处理。所述不同的操作可以包括提供没有方向性的音频数据和/或具有固定方向性的音频数据和/或具有与手动用户交互无关的经自动调整的方向性的音频数据。以这种方式,可以使得用户能够通过改变手持式设备相对于预定义平面的空间取向来控制听力系统的不同功能。
在一些实施方式中,所述预定义平面与在所述方向性提供步骤中提供的所述音频数据的所述方向性所在的平面相对应。特别地,预定义平面可以与形成的声学波束的方向所在的平面相对应。因此,用户可以通过改变与提供的方向性所在的平面相平行的手持式设备的空间取向来直观地调整音频数据的方向性。此外,用户可以通过改变手持式设备相对于提供的方向性所在的平面的空间取向来控制不同的操作。预定义平面可以平行于地平面和/或法向于重力方向。
改变手持式设备相对于预定义平面的空间取向可以与能由用户操作的预定义手动手势相对应。用户可以以方便且易于记忆的方式执行这样的手动手势。例如,手动手势可以包括将手持式设备翻转180度和/或将手持式设备相对于预定义平面倾斜90度。
在一些实施方式中,在所述方向性提供步骤中,所述音频数据的所述方向性在所述取向数据的连续改变处被连续改变。因此,可以使得用户能够在用户的环境中选择应当以高精度提供其方向性的目标。
在一些实施方式中,在所述方向性提供步骤中,所述音频数据的所述方向性在所述取向数据的改变被确定为低于阈值时不被更改。因此,音频数据的方向性能够在取向数据的连续改变处被逐渐改变。能够通过阈值来定义逐渐改变。因此,通过手动用户互动进行的方向性调整可以更加稳定且不太容易发生不希望的波动(例如,用户的手抖动就会引起这种不希望的波动)。特别地,当确定取向数据的改变低于阈值时,就可以使音频数据的方向性保持恒定。当确定取向数据的改变高于阈值时,就可以调整音频数据的方向性。这种取决于阈值的调整可以通过在控制数据提供步骤中提供的控制数据来控制,并且/或者可以在方向性提供步骤中基于控制数据来确定。阈值可以与阈值角度相对应。阈值角度可以被定义为这样的角度:用户必须至少以这种角度改变手持式设备的空间取向,以便在方向性提供步骤中调整音频数据的方向性。例如,阈值角可以至少为10度,特别是至少20度。
在一些实施方式中,所述检测器装置的至少一个声音检测器被包括在所述耳部单元中。所述耳部单元可以是第一耳部单元,所述第一耳部单元被配置为被佩戴在第一耳朵处,所述听力系统还包括第二耳部单元,所述第二耳部单元被配置为被佩戴在第二耳朵处。在第一耳部单元和/或第二耳部单元中包括的检测器装置的声音检测器可以在耳朵水平处检测声音。在一些实施方式中,仅在耳朵水平处检测由音频数据表示的声音。在这种情况下,基于由手持式设备生成的取向数据的控制数据能够允许用户有利地独立于由任何头部移动引起的检测器装置的取向变化来调整方向性。然后,检测器装置可以包括被包括在耳朵单元中的至少两个声音检测器。在一些实施方式中,第一耳部单元包括第一声音检测器,并且第二耳部单元包括第二声音检测器,其中,检测器装置包括第一声音检测器和第二声音检测器。然后,可以通过双耳声学波束形成来向音频数据提供方向性。耳部单元(特别是第一耳部单元和/或第二耳部单元)还可以包括检测器装置的多个声音检测器。
在一些实施方式中,检测器装置的至少一个声音检测器被包括在远程设备中,所述远程设备被配置为将表示检测到的声音的音频数据从远离耳部单元的位置传输到耳部单元。所述声音可以是由被包括在远程设备中的检测器装置的声音检测器在远离耳朵水平的地方检测到的。在一些实施方式中,由音频数据表示的声音仅能以远离耳朵水平的地方被检测到。检测器装置然后可以包括被包括在远程设备中的至少两个声音检测器。检测器装置可以包括至少一个额外的声音检测器,所述至少一个额外的声音检测器被包括在耳部单元中,特别是被包括在第一耳部单元和/或第二耳部单元中。检测器装置也可以被完全包括在远程设备中。远程设备可以包括至少一个可见取向特性,从而允许用户将手持式设备的空间取向与取向特性对齐。
在一些实施方式中,由音频数据表示的声音仅能在耳朵水平处被检测到或者仅能在远离耳朵水平的地方被检测到。听力系统可以包括用户接口,从而允许在耳朵水平处的声音检测与远离耳朵水平的地方的声音检测之间切换。检测器装置可以包括被包括在耳部单元中的至少两个声音检测器以及被包括在远程设备中的至少两个声音检测器。
在一些实施方式中,所述远程设备包括被配置为被静止放置在平面(特别是地平面)上的支撑物。例如,远程设备可以是桌面麦克风。相对于其确定手持式设备的空间取向的预定义平面可以被定义为平行于支撑物能够被固定放置在其上的平面而延伸的平面。
通信端口可以被提供在远程设备和/或耳部单元中。通信端口可以被配置为经由与手持式设备的无线连接来接收控制数据。输出换能器可以被配置为基于被提供有方向性的音频数据(特别是基于包括音频数据的音频信号)来刺激用户的听觉。手持式设备可以包括被配置为生成取向数据的惯性传感器。例如,惯性传感器可以是加速度计,所述加速度计被配置为检测手持式设备的加速度和/或移动,基于所述加速度和/或移动,能够生成取向数据。惯性传感器还可以被配置为检测重力的方向。处理单元可以被配置为:在不同时间接收控制数据,并且在不同时间向音频数据提供方向性。不同时间可以被预定的时间间隔分开。方向性可以与通过控制数据控制的所选择的方向相对应,使得在音频数据中主要表示从所选择的方向检测到的声音。可以通过执行声学波束形成来向音频数据提供方向性。手持式设备可以被提供为智能手机和/或平板电脑和/或另一多功能设备,所述另一多功能设备能够在被放置在用户的手中时进行操作并且被配置为提供取向数据。
在一些实施方式中,所述听力系统还包括一种存储指令的非瞬态计算机可读介质,所述指令在由被包括在手持式设备中的处理器运行时使所述处理器提供所述控制数据。例如,用户可以将包含指令的应用程序从云下载到手持式设备。在一些实施方式中,听力系统包括手持式设备,其中,手持式设备包括被配置为提供控制数据的处理器。
附图说明
现在将详细参考实施例,在附图中图示了实施例中的示例。附图图示了各种实施例并且是说明书的部分。所图示的实施例仅仅是示例且并不限制本公开内容的范围。在整个附图中,相同或相似的附图标记指代相同或相似的元件。在附图中:
图1-4示意性地图示了包括听力设备和远程设备的示例性听力系统;
图5以俯视图示意性地图示了可以利用在图1或图2中图示的听力系统实施的远程设备;
图6以沿着线IV的横截面视图示意性地图示了在图3中描绘的远程设备;
图7以横截面视图示意性地图示了可以利用在图1或图2中图示的听力系统实施的另一远程设备;
图8、图9示意性地图示了其中能够应用在图1或图2中图示的听力系统的听力状况;
图10、图11示意性地图示了其中能够应用在图3或图4中图示的听力系统的听力状况;
图12-14图示了处于相对于预定义平面的不同空间取向的手持式设备;并且
图15-23图示了操作如在图1-4户图8-11中图示的听力系统的示例性方法。
具体实施方式
图1图示了听力系统101,听力系统101包括听力设备111,听力设备111被配置为被佩戴在用户的耳朵处。听力设备111可以通过任何类型的被配置为实现或增强佩戴听力设备111的用户的听力的听力设备来实施。例如,听力设备111可以通过以下设备来实施:助听器,其被配置为向用户提供放大版本的音频内容;在耳蜗植入系统中包括的声音处理器,所述耳蜗植入系统被配置为向用户提供表示音频内容的电刺激;在双模听力系统中包括的声音处理器,所述双模听力系统被配置为向用户提供表示音频内容的放大结果和电刺激这两者;或任何其他合适的听力假体。
不同类型的听力设备111也能够通过它们被佩戴在耳朵处的位置而被区分。一些听力设备(例如,耳后(BTE)助听器和耳道接收器(RIC)助听器)通常包括:耳机设备,其被配置为被至少部分地插入到耳朵的耳道中;以及额外的壳体,其被配置为被佩戴在耳道外部的佩戴位置处(特别是用户的耳朵后面)。一些其他听力设备(例如,耳塞、耳机、入耳式(ITE)助听器、耳道隐形(IIC)助听器以及完全耳道内(CIC)助听器)通常包括这样的被至少部分地佩戴在耳道内部的耳机设备,而不需要用于在不同的耳朵位置处佩戴的额外壳体。一些其他听力设备(例如,耳罩式头戴式耳机或头戴式设备)能够被配置为被佩戴在完全处于耳道外部的耳朵处。
在如图所示的示例中,听力设备111是双耳设备,所述双耳设备包括左耳单元112和右耳单元113,左耳单元112要被佩戴在用户的左耳处,右耳单元113要被佩戴在用户的右耳处。每个耳部单元112、113都包括处理器116,处理器116被通信性耦合到输出换能器115。输出换能器115可以通过任何合适的音频输出设备(例如,听力设备的扬声器或接收器或者耳蜗植入系统的输出电极)来实施。处理器116被配置为向输出换能器115提供音频输出信号。在输出换能器115重现信号之前,在相应的耳部单元112、113中包括的功率放大器(在图1中未示出)可以放大音频输出信号。处理器116可以是数字信号处理器(DSP),所述数字信号处理器(DSP)被配置为执行对音频数据的信号处理,以提供音频输出信号和/或传递预处理的音频数据作为音频输出信号。在一些其他实施方式中,仅在耳部单元112、113中的一个耳部单元中提供处理器116,其中,每个耳部单元112、113的输出换能器115被通信性耦合到处理器116。在其他实施方式中,向输出换能器115提供基于预处理的音频数据的音频输出信号,而在耳部单元112、113中的任一耳部单元中都不包括处理器。
耳部单元112、113还包括通信端口118,通信端口118被配置为经由相应的无线通信链路152、153来接收音频数据。音频数据通信端口118经由信号通道被通信性耦合到处理器116,以便为处理器116提供包含接收到的音频数据的信号D。替代地,可以提供多条信号通道,以用于向处理器116单独提供有区别的音频数据,例如,与通过不同的声音检测器检测到的声音相关联的音频数据。无线链路152、153可以是射频链路,例如,模拟频率调制(FM)链路或数字链路。可以如在专利申请公布内容WO 2008/098590中所进一步详细公开的那样实施FM链路和/或数字链路,通过引用将这些公开内容并入本文。也可以经由蓝牙协议来建立无线链路152、153。
在一些实施方式中,耳部单元112、113还包括麦克风或多个空间分离的声音检测器,所述多个空间分离的声音检测器被配置为:在耳朵水平处检测声音,并且向处理器116提供表示检测到的声音的音频数据。听力设备111可以包括可以服务于特定实施方式的额外部件或替代部件。
听力系统101还包括远程设备121,远程设备121被配置为远离用户进行操作,特别是独立于用户的任何移动进行操作。更特别地,远程设备121能够是静止设备,所述静止设备被配置为在移动声源(例如,正在说话的人)的环境中的静止位置处进行操作。远程设备121包括检测器装置122,检测器装置122包括至少两个空间分离的声音检测器123、124、125。例如,每个声音检测器123-125可以被实施为麦克风。然后检测器装置122可以被实施为麦克风阵列。声音检测器123-125被配置为在不同的空间位置处检测声音103,从而允许区分从空间位置处的不同方向检测到的声音分量。声音检测器123-125中的每个声音检测器都包括专用信号通道,所述专用信号通道递送相应的音频信号A1、A2、A3,所述相应的音频信号A1、A2、A3包含表示在相应的空间位置处检测到的声音103的音频数据。因此,信号A1-A3中的音频数据包含关于由通过声音检测器123-125检测到的音频数据表示的声音的方向的信息。信号A1-A3中的音频数据未被混合。因此,信号A1-A3被视为“原始”音频信号。
远程设备121还包括处理器126。处理器126包括DSP。处理器126经由单独的信号通道被耦合到声音检测器123-125,使得能够将信号A1-A3中的每个信号中的音频数据单独提供给处理器126。处理器126被配置为处理经由音频信号A1-A3接收到的音频数据,以便向音频数据提供方向性。方向性可以与由声音检测器123-125检测到声音的任何方向相对应。结果,在处理器126执行了信号处理之后,在音频数据中可以主要表示从该方向检测到的声音。特别地,处理器126能够被配置为执行声学波束形成,以提供表示在该方向上形成的声学波束的音频数据。为此,处理器126能够被配置为执行对原始音频信号A1-A3中的音频数据的适当混合,以产生经处理的音频数据。处理器126包括输出信号通道,在所述输出信号通道上能够递送包含被提供有方向性的音频数据的输出信号B。听力系统101的处理单元包括远程设备121的处理器126。该处理单元还可以包括耳部单元112、113的处理器116。
远程设备121还包括通信端口128,通信端口128被配置为经由相应的通信链路152、153将音频数据发送到听力设备111。音频数据通信端口128经由递送输出信号B的输出通道被通信性耦合到处理器126。因此能够将由处理器126处理的音频数据从处理器126提供到通信端口128。通信端口128被配置为经由相应的通信链路152、153将经处理的音频数据发送到耳部单元112、113的通信端口118。在接收到经处理的音频数据之后,经由输入信号通道将由通信端口118接收的音频数据作为信号D供应给处理器116。
远程设备121还包括通信端口127,通信端口127被配置为经由通信链路155从手持式设备131接收控制数据。通信链路155是无线链路。控制数据通信链路155与音频数据通信链路152、153是单独建立的。因此,能够独立于经由通信链路152、153传输的音频数据而经由通信链路155来传输控制数据。控制数据通信端口127经由控制信号通道被通信性耦合到处理器126,所述控制信号通道将包含控制数据的控制信号C递送到处理器126。处理器126被配置为向经由音频信号A1-A3接收的音频数据提供取决于控制数据的方向性。
在一些实施方式中,通信端口127被配置为经由蓝牙协议与手持式设备131建立通信链路155。在这些实施方式中,通信链路155被称为蓝牙链路。蓝牙链路155允许以可靠且方便的方式将控制数据传输到远程设备121,特别是通过符合蓝牙标准的手持式设备131的适当通信端口将控制数据传输到远程设备121,在手持式设备131中可以默认实施这种通信端口。
在改变手持式设备的空间取向时,手持式设备131被配置为被握持在用户的手中。在一些实施方式中,听力系统101还包括提供控制数据的手持式设备131。例如,手持式设备131可以是仅专门用于控制听力系统101的操作的单独单元(例如,遥控器),或者可以被配置为还提供与听力系统101的操作无关的另外的功能(例如,智能手机或平板电脑)。在一些其他实施方式中,听力系统101还包括存储指令的计算机可读介质143,该指令在由在手持式设备中包括的处理器运行时使处理器提供控制数据。特别地,计算机可读介质143能够被实施为云141中的数据库。因此可以从数据库143下载使得手持式设备的处理器能够提供控制数据的程序144。以这种方式,用户可以将用户当前用于不同目的的手持式设备(特别是智能手机或平板电脑)也应用于操作听力系统101。
手持式设备131包括取向传感器132,取向传感器132被配置为生成指示空间取向的取向数据。取向传感器132能够包括惯性传感器,特别是运动传感器(例如,加速度计)和/或旋转传感器(例如,陀螺仪和/或加速度计)。取向传感器132还能够包括光学检测器(例如,相机)。例如,光学检测器能够通过随时间生成光学检测数据并评价光学检测数据的改变而被用作运动传感器和/或旋转传感器。取向传感器132还能够包括磁力计,特别是电子罗盘,所述磁力计被配置为测量环境磁场的方向。取向数据能够包括关于手持式设备131相对于手持式设备131的参考系105和/或先前取向的空间取向的信息。参考系105能够是地球的参考系。参考系105能够被选择为与手持式设备131的预定空间取向相对应。
特别地,取向数据能够指示由手持式设备131的旋转引起的空间取向的改变,例如,如通过虚线圆形箭头104示意性指示的那样,通过在由参考系105的x轴和y轴形成的平面中绕z轴旋转引起的空间取向的改变。圆形箭头104在通过指向z轴的方向的法向向量定义的旋转平面中延伸。因此,旋转平面104可以跨越x轴和y轴。旋转平面可以被选择为与提供的经由音频信号A1-A3接收的音频数据的方向性所在的平面平行地延伸。特别地,包括形成的声学波束的方向的平面可以被选择为与旋转平面104相对应。在一些实施方式中,旋转平面104可以被选择为基本上平行于地板和/或法向于重力。为此,取向传感器132(例如,加速度计)能够被配置为检测重力的方向。
因此,能够独立于远程设备121的空间取向而提供由手持式设备131生成的取向数据,从而允许在远程设备121的静止定位期间调整依赖于取向数据的表示由声音检测器123-125检测到的声音的音频数据的方向性。此外,当听力设备111被佩戴在用户的耳朵处时,能够独立于听力设备111的空间取向(因此独立于用户的头部的瞬时取向)而生成取向数据。因此,通过旋转手持式设备131,用户能够以方便且可靠的方式调整方向性,从而避免基于对头部移动敏感的取向数据的方向性的无意改变。在这种背景中,已经发现头部旋转常常是自发的、不精确的和短期的,使得基于手持式设备的手动旋转的取向数据更适合于允许以用户友好的方式对远程检测到的声音的方向性的受控调整。
手持式设备131还包括被通信性耦合到取向传感器132的处理器136以及被通信性耦合到处理器136的通信端口137。处理器136被配置为将基于由取向传感器132生成的取向数据的控制数据提供给通信端口137。通信端口137被配置为经由控制数据通信链路155将控制数据发送到远程设备121的通信端口127。在一些实施方式中,处理器136被配置为根据取向数据来确定所选择的方向并且提供控制数据,使得控制数据指示所选择的方向。能够通过调整手持式设备131的空间取向来使所选择的方向与用户选择的方向相对应。因此,能够提供与所选择的方向相对应的音频数据的方向性。在一些实施方式中,处理器136被配置为提供控制数据,使得控制数据包括取向数据。然后,在从手持式设备131传输控制数据之后,可以通过远程设备121的处理器126和/或通过听力设备111的处理器116来确定所选择的方向。听力系统101的处理单元还可以包括手持式设备131的处理器136。
在一些实施方式中,处理器136被配置为基于所生成的取向数据来确定手持式设备131相对于预定义平面的空间取向。预定义平面可以与旋转平面104相对应。旋转平面104可以是手持式设备能在其中旋转的任何平面。在方向性提供步骤中,可以根据基于在旋转期间和/或之后生成的取向数据的控制数据来控制音频数据的方向性的改变。例如,如上所述,旋转平面104可以被预定义为平行于包括形成的声学波束的方向的平面而延伸,并且/或者可以被选择为基本上平行于地板和/或法向于重力。特别地,手持式设备131在参考系105的z轴的方向上的旋转(这可以意味着绕x轴和/或y轴和/或其线性组合旋转)能够引起手持式设备131的空间取向偏离旋转平面104。
处理器136还能够被配置为基于相对于旋转平面104的空间取向来评价手持式设备131的取向准则。例如,当手持式设备131的屏幕和/或用户接口面向基本上平行于旋转平面104的向上方向(特别是与重力相反的方向)时,可以确定取向准则得到满足。为了说明,当手持式设备131在桌面和/或地板上被放置为屏幕和/或用户接口面向上时,这样的状况可以得到满足。当手持式设备131的空间取向强烈偏离这个相对于旋转平面104的位置时(例如当手持式设备131的屏幕和/或用户接口面向下时),可以确定取向准则并未得到满足。在确定满足取向准则的情况下,可以如上所述的那样向音频数据提供取决于控制数据的方向性。在确定并未满足取向准则的情况下,处理器136能够激活不同的操作。所述不同的操作可以包括禁止根据控制数据向音频数据提供方向性和/或激活对音频数据的方向性的自动化提供和/或对表示由远程设备121检测到的声音的音频数据的重现结果进行静音。
手持式设备131还包括用户接口133,用户接口133被通信性耦合到处理器136。处理器136被配置为根据经由用户接口133接收到的用户命令来对初始化步骤进行初始化。在初始化步骤中,基于在初始时间生成的取向数据的参考数据能够由处理器136来确定。因此,参考数据能够表示在手持式设备131被放置在初始时间时的初始空间取向期间的取向数据,特别是相对于远程设备121被放置在默认空间取向时的情况的取向数据。能够采用参考数据将稍后生成的取向数据与参考数据进行比较来确定所选择的方向。
手持式设备131还包括通信端口134,通信端口134被配置为经由云通信链路159(例如,互联网链路)与云141通信。通信端口134被通信性耦合到处理器136。因此,处理器136能够从数据库143下载包括基于取向数据提供控制数据的指令的程序144。处理器136可以包括用于对程序144进行非瞬态安装和/或存储的存储器。
图2图示了听力系统201,听力系统201包括听力设备211、远程设备221和手持式设备131和/或计算机可读介质143,听力设备211被配置为被佩戴在用户的耳朵处,远程设备221被配置为远离用户进行操作,手持式设备131和/或计算机可读介质143存储程序144。远程设备221的处理器126被配置为经由相应的单独的输出信号通道将音频信号B1-B3传递到音频数据通信端口128。在一些实施方式中,音频信号B1–B3与原始音频信号A1-A3相对应,基本上不需要对由处理器126执行的音频数据进行信号处理。然后,处理器126可以被如下的任何单元所代替:所述单元被配置为将原始音频信号A1-A3基本上没有更改地转发为音频信号B1–B3。在一些其他实施方式中,处理器126被配置为:对音频信号A1-A3中的音频数据进行预处理,并且在音频信号B1-B3中输出经预处理的音频数据。
听力设备211包括左耳单元212和右耳单元213。能够经由音频数据通信链路152、153将音频信号B1-B3中包含的音频数据从远程设备221的通信端口128传输到相应的耳部单元212、213的通信端口118。经由多条信号通道将通信端口118通信性耦合到相应的耳部单元212、213的处理器116,所述多条信号通道被配置为向处理器116供应单独的音频信号D1-D3,所述音频信号D1-D3包含接收到的与单独的音频信号B1-B3相对应的音频数据。处理器116被配置为处理经由音频信号D1-D3接收到的音频数据,以便如上所述的那样结合远程设备121向音频数据提供方向性。能够在每个耳部单元212、213中不同地执行由处理器116对音频数据的处理,以便利用听力设备211的双耳配置。
耳部单元212、213还包括通信端口217,通信端口217被配置为经由相应的无线通信链路256、257从手持式设备131接收控制数据。能够在手持式设备131的通信端口137与耳部单元212、213的通信端口217之间建立通信链路256、257,所述通信链路256、257与上述通信链路155相对应。因此,通信端口217能够经由通信链路256、257来接收基于由手持式设备131生成的取向数据的控制数据。控制数据通信端口217经由控制信号通道与处理器116通信性耦合,所述控制信号通道向处理器116供应包含控制数据的控制信号C。因此,在耳朵水平处的处理器116能够根据控制数据来提供音频数据的方向性。
在一些实施方式中,远程设备221的通信端口127能够经由通信链路155来额外地接收基于由手持式设备131生成的取向数据的控制数据。远程设备221的处理器126然后可以被配置为提供对原始音频信号A1-A3的初始处理,以便根据控制数据在音频信号B1-B3中提供经预处理的音频数据。例如,在音频信号B1-B3中,可以提高信噪比(SNR),特别是通过在将音频数据传输到耳部单元212、213之前初步混合音频数据来提高信噪比(SNR)。然后,耳部单元212、213的处理器116可以进一步处理经由音频信号D1-D3接收到的经预处理的音频数据,以便向在耳朵水平处的音频数据提供方向性。
图3图示了听力系统301,听力系统301包括听力设备311和手持式设备131和/或计算机可读介质143,听力设备311被配置为被佩戴在用户的耳朵处,手持式设备131和/或计算机可读介质143存储程序144。听力设备311可以被实施为与上述听力设备111、211相对应,特别是被实施为BTE或RIC或IIC或CIC助听器,或耳蜗植入系统,或耳机或头戴式耳机。听力设备311是双耳设备,所述双耳设备包括左耳单元312和右耳单元313,左耳单元312被配置为被佩戴在用户的左耳处,右耳单元313被配置为被佩戴在用户的右耳处。左耳单元312包括构成第一声音检测器的声音检测器123。右耳单元313包括构成第二声音检测器的声音检测器124。第一声音检测器123和第二声音检测器124构成了空间分离的声检测器的检测器装置322。处理单元包括左耳单元312的处理器116和右耳单元313的处理器116。处理单元还可以包括手持式设备131的处理器136。
左耳单元312的处理器116经由第一信号通道被通信性耦合到第一声音检测器123,所述第一信号通道递送音频信号A1中的音频数据。右耳单元313的处理器116经由第二信号通道被通信性耦合到第二声音检测器124,所述第二信号通道递送音频信号A2中的音频数据。耳部单元312、313被配置为经由音频数据通信链路352来交换音频数据。每个耳部单元312、313包括通信端口317,通信端口317被配置为经由通信链路352向/从另一耳部单元312、313的通信端口317发送/接收音频数据。每个耳部单元312、313的处理器116经由相应的信号通道被通信性耦合到相应的通信端口317。因此,右耳单元313的处理器116能够经由通信链路352从左耳单元312的处理器116接收表示音频信号A1中的音频数据的音频信号E1。左耳单元312的处理器116能够经由通信链路352从右耳单元313的处理器116接收表示音频信号A2中的音频数据的音频信号E2。因此,每个耳部单元312、313的处理器116能够经由单独的音频通道来接收在音频信号A1和音频信号A2中包含的音频数据。每个耳部单元312、313的处理器116被配置为通过根据经由相应的通信链路256、257从手持式设备131接收的控制数据(特别是通过执行双耳声学波束形成)来向音频数据提供方向性。
图4图示了听力系统401,听力系统401包括听力设备411和手持式设备131和/或计算机可读介质143,听力设备411被配置为被佩戴在用户的耳朵处,手持式设备131和/或计算机可读介质143存储程序144。听力设备411包括左耳单元412和右耳单元413。左耳单元412包括检测器装置122,检测器装置122包括至少两个空间分离的声音检测器123、124、125。检测器装置122是第一检测器装置,所述第一检测器装置可以被实施为麦克风阵列。右耳单元413包括第二检测器装置422,所述第二检测器装置422包括至少两个空间分离的声音检测器423、424、425。处理单元包括左耳单元312的处理器116和/或右耳单元313的处理器116。处理单元还可以包括手持式设备131的处理器136。
左耳单元412的处理器116经由单独的信号通道被通信性耦合到声音检测器123-125,使得信号A1-A3的每个信号中的音频数据都能够被单独地供应到左耳单元412的处理器116。右耳单元413的处理器116经由单独的信号通道被通信性耦合到声音检测器423-425,使得表示由声音检测器423-425检测到的声音的音频信号A4-A6中的音频数据都能够被单独提供给右耳单元413的处理器116。左耳单元412的处理器126被配置为处理经由音频信号A1-A3接收的音频数据,以便向音频数据提供方向性。右耳单元413的处理器126被配置为处理经由音频信号A4-A6接收的音频数据,以便向音频数据提供方向性。根据经由通信链路256、257从手持式设备131接收的控制数据来提供音频数据的方向性。
在一些实施方式中,耳部单元312、313被配置为经由音频数据通信链路352来交换音频数据。然后可以在左耳单元412的处理器126与右耳单元413的处理器126之间交换信号A1-A3中的音频数据和信号A4-A6中的音频数据。因此,处理器116可以被配置为:经由相应的单独通道来接收信号A1-A6中的音频数据,并且向接收到的音频数据提供方向性,特别是通过执行双耳声学波束形成来向接收到的音频数据提供方向性。特别地,第一检测器装置122的声音检测器123-125和第二检测器装置422的声音检测器423-425可以联合形成检测器装置以用于提供表示检测到的声音的音频数据。然后,每个耳部单元312、313的处理器116能够根据从手持式设备131接收到的控制数据来向音频数据提供方向性。
图5以俯视图示意性地图示了远程设备521。图6以沿着线IV的横截面视图示意性地图示了远程设备521。远程设备521可以被设施在听力系统101中以代替远程设备121,也可以被实施在听力系统201中以代替远程设备221。远程设备521包括壳体531,壳体531包括顶面532和底面538。顶面532和底面538面向相反的方向。壳体531还包括侧面539,侧面539将顶面532和底面538的外边缘连接在一起。壳体531的内部体积由侧面539在侧向界定,由顶面532在上部界定,并且由底面538在下部界定。在所图示的示例中,壳体531是圆盘形的。底面538构成支撑物,所述支撑物被配置为被静止放置在平面上,例如被静止放置在桌面和/或地板上。由底面538定义的平面可以与由参考系105的x轴和y轴所跨越的平面相对应,如图1-4中所图示的那样,使得z轴法向于底面538。特别地,旋转平面104可以被预定义为与底面538相对应。
远程设备521还包括检测器装置522,检测器装置522包括多个空间分离的声音检测器523、524、525、526。声音检测器523-526均包括声音检测表面533、534、535、536。声音检测表面533-536被提供在壳体531的顶面532上。以这种方式,能够检测到从顶面532上的各个方向撞击的声音。声音检测表面533-536被定向为相对于底面538处于相反方向。在底面538处提供的支撑物允许以可重现的方式将声音检测表面533-536定位在与远程设备521所在的平面相距定义距离的位置处。声音检测表面533-536可以被实施为能被撞击声音激发而振动的膜。声音检测表面533-536以圆形布置间隔开。
壳体531包括至少一个可见的取向特性528、529。在所图示的示例中,示意性地指示了两个取向特性528、529。取向特性528、529能够指示远程设备521的默认空间取向。因此,取向特性528、529允许用户将手持式设备131的空间取向与远程设备521的默认空间取向对齐。取向特性528、529可以由视觉标记(例如,箭头)来提供,从而指示远程设备521的默认方向(例如,前向方向)。取向特性528、529也可以由壳体531的形状(特别是不对称形状)来提供,从而允许识别远程设备521的默认方向。取向特性528、529也可以由在壳体531处提供的发光器或另一可见特征来提供。
用户能够将远程设备521定位为取向特性528、529与他的位置相对齐。远程设备521的默认空间取向能够通过这种对齐来定义。例如,用户可以选择相对于他的身体指向前向方向的特定的取向特性528、529,以便将远程设备521定位在默认空间取向中。然后,用户可以旋转手持式设备131以将手持式设备131与取向特性528、529相对齐。例如,用户可以选择将远程设备521的前向方向(其可以由指向远离远程设备521的前面的方向来定义)与远程设备521的默认空间取向对齐,使得远程设备521的前向方向指向特定的取向特性528、529。能够利用将远程设备521的空间取向与手持式设备131的空间取向进行关联的方式将由远程设备521检测到的声音的方向与由手持式设备131生成的取向数据进行关联。因此,用户可以通过选择手持式设备131的适当空间取向来选择表示检测到的声音的音频数据的优选方向性。
在一些实施方式中,在将手持式设备131和远程设备521在空间取向方面对齐之后,用户可以经由用户接口对初始化步骤进行初始化。例如,在远程设备521上提供的用户接口527和/或手持式设备131的用户接口133可以被配置为从用户获取指令以对初始化步骤进行初始化。在初始化步骤中,能够基于由手持式设备131在初始时间生成的相对于远程设备521被放置在默认空间取向时的情况的取向数据来确定参考数据。然后,能够采用参考数据将由手持式设备131在稍后时间生成的取向数据与远程设备521的默认空间取向进行关联。因此,能够通过将由手持式设备131生成的取向数据与参考数据进行比较来确定针对音频数据的方向性的所选择的方向。
在一些其他实施方式中,可以采用参考数据,所述参考数据表示由手持式设备在第一时间生成的取向数据。然后,能够将参考数据与由手持式设备在第二时间生成的取向数据进行比较,以便确定所选择的方向。
在一些实施方式中,用户可以选择取向特性528、529,以便向远程设备521指示他的空间位置。例如,多个取向特性528、529能够以圆形被布置在远程设备521的中心周围。用户可以经由用户接口527来选择对应的取向特性528、529。取向特性528、529也可以被配置为由用户直接操纵。例如,取向特性528、529能够被实施为按钮,使得用户能够通过按下按钮来指示所选择的取向特性528、529。
图7以横截面视图示意性地图示了远程设备721。远程设备721可以被实施在听力系统101中以代替远程设备121,也可以被实施在听力系统201中以代替远程设备221。远程设备721包括检测器装置622,检测器装置622包括多个空间分离的声音检测器624、626。声音检测器624、626的声音检测表面634、636被提供在壳体531的侧面539。声音检测表面634、636被定向在不同的方向上。因此能够检测从侧面539的各个方向撞击的声音。
图8和图9示意性地图示了涉及听力系统701的用户771和聚集在桌子761周围的用户771的三个对话伙伴772、773、774的听力状况。听力系统701包括听力设备711,听力设备711包括由用户771佩戴的左耳单元712和右耳单元713以及被放置在桌子761的中心位置处的远程设备721。手持式设备731被放置在桌子761上的靠近用户771的地方。听力系统701还可以包括手持式设备731和/或存储指令的计算机可读介质,所述指令使手持式设备731提供控制数据。听力系统701可以通过听力系统101或听力系统201来实施。由桌子761的表面定义的平面可以与由参考系105的x轴和y轴跨越的平面相对应,使得z轴法向于该平面。特别地,旋转平面104可以被预定义为与桌子表面761相对应。进一步示意性说明的是通过对表示由远程设备721检测到的声音的音频数据的处理而形成声学波束751,使得提供了具有与所形成的声学波束751的方向相对应的方向性的音频数据。
在图8中图示的第一场景中,手持式设备731被定位在桌子761上,使得手持式设备731的前面735被定向在与用户771面向远程设备721的方向相同的方向上。在所图示的示例中,音频数据被提供有与由手持式设备731生成的取向数据相对应的方向性,使得声学波束751被定向在与手持式设备731的前面735的方向相同的方向上。
在图9中图示的第二场景中,手持式设备731在桌子761的平面上以直角旋转,如箭头704示意性图示的那样。结果,手持式设备731的前面735被定向的前向方向垂直于用户771面向远程设备721的方向。因此,根据基于由手持式设备731生成的取向数据的控制数据,声学波束751旋转了对应的量,使得其指向相同的方向,如箭头705示意性图示的那样。通过适当旋转手持式设备731,使得用户771能够选择对话伙伴772、773、774中的任一对话伙伴作为应当在音频数据中提供其方向性的声源。以这种方式,能够将由手持式设备731生成的取向数据用于目标选择,以便形成指向目标的声学波束。
在一些实施方式中,手持式设备731的前向方向与用户771面向远程设备721的方向的对齐(如图8中所图示的那样)能够用于基于在初始化步骤期间的初始时间生成的取向数据来确定参考数据。因此,能够将在后续时间生成的取向数据与参考数据进行比较,以确定手持式设备731相对于远程设备721的空间取向的空间取向。因此,能够相对于远程设备721的空间取向来确定手持式设备731的空间取向的改变。另外,远程设备721可以被定位为处于默认空间取向,所述默认空间取向可以通过取向特性528、529来确定。在一些其他实施方式中,可以独立于远程设备721的空间取向而比较由手持式设备731在第一时间生成的取向数据与由手持式设备731在第二时间生成的取向数据。在这两种情况下,所述比较可以用于确定由用户771选择的方向,其中,向音频数据提供了与所选择的方向相对应的方向性。
在一些实施方式中,确定手持式设备731相对于预定义平面的空间取向,其中,根据基于手持式设备相对于预定义平面的空间取向的控制数据向音频数据提供方向性。特别地,可以评价所确定的空间取向相对于预定义平面的取向准则。预定义平面可以被提供为旋转平面104。当手持式设备731指向远离桌子表面761的向上方向时,可以确定取向准则。在这种情况下,可以根据控制数据向音频数据提供方向性。当手持式设备731指向横向方向和/或朝向桌子表面761的向下方向时,可以确定取向准则没有得到满足。在这种情况下,并不根据控制数据向音频数据提供方向性。取而代之的是,可以激活不同的操作,例如,禁止根据控制数据在一个方向上进行波束751形成和/或激活对波束751的自动化转向和/或对由远程设备721检测到的声音的重现结果进行静音和/或执行提供音频数据的另一操作。因此,能够使得用户771能够以方便的方式控制听力系统701的若干功能。更特别地,用户能够通过手动手势(例如,相对于预定义平面104的空间取向手动翻转或倾斜手持式设备731)来执行对手持式设备相对于预定义平面的空间取向的改变,这种手动手势能够被毫不费力地执行并且可以很容易被用户771记住。
图10和图11示意性地图示了涉及以下情况的听力情形:用户771使用听力系统801并且对话伙伴772、773、774站立着彼此交谈。听力系统801包括听力设备811,听力设备811包括由用户771佩戴的左耳单元812和右耳单元813。用户进一步将手持式设备731握在他的一只手的手掌中。听力系统801还可以包括手持式设备731和/或存储指令的计算机可读介质,所述指令使手持式设备731提供控制数据。听力系统801可以通过听力系统301或听力系统401来实施。通过人771-774站立的表面而定义的地面平面可以与由参考系105的x轴和y轴跨越的平面相对应,使得z轴法向于该平面。特别地,旋转平面104可以被预定义为与地面平面相对应。还示意性地图示了对表示由听力设备811检测到的声音的音频数据的处理,使得向音频数据提供与所形成的声学波束851的方向相对应的方向性。
在图10中图示的第一场景中,手持式设备731被定位在用户的手中,使得手持式设备731的前面735被定向在与用户771面向其身体的前侧的方向相同的方向上。在所图示的示例中,音频数据被提供有与由手持式设备731生成的取向数据相对应的方向性,使得声学波束851被定向在与用户的身体的前侧的方向相同的方向上。
在图11中图示的第二场景中,手持式设备731平行于地面平面旋转了锐角角度,如箭头804示意性图示的那样。结果,手持式设备731的前面735被定向的前向方向指向相对于用户的身体的前侧的取向的横向方向。因此,根据基于由手持式设备731生成的取向数据的控制数据,声学波束851旋转了对应的量,使得其指向对应的横向方向,如箭头805示意性图示的那样。在所图示的示例中,用户771已经选择了对话伙伴772作为应当在音频数据中提供其方向性的目标。因此,声学波束851指向对话伙伴772。
在一些实施方式中,手持式设备731的前向方向与用户771面向其身体的前侧的方向的对齐(如图10中所图示的那样)能够用于基于在初始化步骤期间的初始时间生成的取向数据来确定参考数据。因此,能够将在后续时间生成的取向数据与参考数据进行比较,以确定手持式设备731相对于用户的身体的前侧的空间取向的空间取向。因此,能够相对于用户的身体的前侧来确定手持式设备731的空间取向的改变。在一些其他实施方式中,可以提供参考数据,所述参考数据表示由手持式设备731在第一时间生成的取向数据。然后能够将参考数据与由手持式设备732在第二时间生成的取向数据进行比较,以确定所选择的方向。因此,可以独立于用户的身体的前侧而比较如在参考数据中包括的在第一时间生成的取向数据与由手持式设备731在第二时间生成的取向数据。在这两种情况下,所述比较可以用于确定由用户771选择的方向,其中,向音频数据提供了与所选择的方向相对应的方向性。
在一些实施方式中,根据基于手持式设备731的空间取向是否是相对于预定义平面的某个范围的控制数据来向音频数据提供方向性。预定义平面可以被提供为旋转平面104。旋转平面104可以被定义为平行于地面平面的平面。因此,通过借助于手动手势改变手持式设备相对于地面平面的空间取向(例如相对于重力的方向手动翻转或倾斜手持式设备731),能够使得用户771能够开启和/或关闭听力系统801的功能,在该功能中,根据控制数据来向音频数据提供方向性。当关闭该功能时,可以如上所述替代地激活听力系统801的不同操作。
图12-14示意性地图示了处于相对于预定义平面的各种空间736、737、738取向的手持式设备731。预定义平面可以与由参考系105的x轴和y轴跨越的旋转平面104相一致。旋转平面104可以被定义为这样的平面,在该平面中能够旋转手持式设备731,以便改变与向音频数据提供其方向性相对应的所选择的方向。因此,旋转可以被定义为绕参考系105的z轴的旋转,所述z轴垂直于x轴和y轴。例如,z轴可以被定义为指向重力的方向或相对于重力的相反方向。旋转平面104可以被定义为与提供的音频数据的方向性所在的平面平行地延伸。
在图12-14中图示的示例中,手持式设备731的前向方向735指向参考系105的y轴的方向。通过绕参考系105的z轴旋转手持式设备731,前向方向735的空间取向能够在旋转平面104内的任何方向上发生变化。因此,前向方向735的空间取向可以与参考系105的y轴形成在0度至360度之间的任何角度。根据基于由手持式设备731提供的取向数据的控制数据,可以为音频数据的方向性提供相对于y轴的对应角度。
空间取向736-738能够被表征为手持式设备731相对于参考系105的z轴的不同对齐。在图12中图示的空间取向中736中,手持式设备731的顶面732指向相对于z轴的相反方向。手持式设备731的底面734与顶面732相反,因此指向z轴的方向。在图13中图示的空间取向737中,手持式设备731的侧面733指向相对于z后的相反方向。顶面732和底面734指向相对于z轴(特别是垂直于z轴)的横向方向。在图14中图示的空间取向738中,手持式设备731的底面734指向相对于z轴的相反方向。顶面732指向z轴的方向。
根据基于相对于预定义平面104的特定空间取向736-738是否是基于取向数据而确定的控制数据来向音频数据提供方向性。可以相对于预定义平面104来预定义特定的空间取向。当确定空间取向736-738偏离相对于预定义平面104的预定义空间取向时,可以禁止根据控制数据向音频数据提供方向性。取而代之的是,可以如上所述地执行听力系统701、801的不同操作。
这能够允许听力系统的用户根据控制数据和/或通过涉及手持式设备731的手动手势进行的不同操作来手动激活和/或停用向音频数据提供方向性的提供操作。特别地,手动手势能够涉及手持式设备731相对于预定义平面104的空间取向的改变。例如,手动手势可以涉及将手持式设备731从空间取向736倾斜到空间取向737,并且/或者反之亦然。手动手势也可以涉及将手持式设备731从空间取向737倾斜到空间取向738,并且/或者反之亦然。手动手势也可以涉及将手持式设备731从空间取向736翻转到空间取向738,并且/或者反之亦然。
图15图示了操作听力系统101、201、301、401、701、801的方法。在901处,在控制数据提供步骤中,基于由手持式设备131、731生成的取向数据来提供控制数据。控制数据提供可以包括通过远程设备121、521、621、721和/或听力设备111、211、311、411、711、811经由控制数据通信链路155、256、257从手持式设备131、731接收控制数据。在902处,在方向性提供步骤中,根据控制数据向表示通过检测器装置122、322、422、522、622检测到的声音的音频数据提供方向性。在一些实施方式中,该方向性是通过在远程设备121、521、621、721中包括的处理器126提供的。在一些其他实施方式中,该方向性是通过在听力设备111、211、311、411、711、811中包括的处理器116提供的。在一些其他实施方式中,该方向性是通过在远程设备121、521、621、721中包括的处理器126和在听力设备111、211、311、411、711、811中包括的处理器116部分提供的。方向性可以与通过控制数据控制的所选择的方向相对应,使得在音频数据中主要表示从所选择的方向检测到的声音。特别地,可以通过对音频数据执行声学波束形成来向音频数据提供方向性。可以通过所接收的控制数据来控制所形成的声学波束的方向。
图16图示了在听力系统101、201、301、401、701、801中提供控制数据的方法。在911处,通过利用手持式设备131、731实施的取向传感器132来生成取向数据。取向数据可以指示手持式设备131、731相对于手持式设备131、731的先前空间取向的瞬时空间取向,并且/或者取向数据可以指示手持式设备131、731相对于预定义参考系的绝对空间取向,并且/或者取向数据可以指示手持式设备131、731的空间取向的时间变化。例如,基于检测到的手持式设备131、731的移动,可以通过惯性传感器(例如,在手持式设备131、731中包括的加速度计)来提供取向数据。
在912处,在手持式设备131、731中包括的处理器131基于取向数据来确定控制数据。在一些实施方式中,所确定的控制数据包括所生成的取向数据。特别地,取向数据可以与取向数据基本对应。在一些其他实施方式中,控制数据是根据取向数据确定的,使得控制数据指示所选择的方向。所选择的方向可以指示由用户选择的方向以提供音频数据的方向性。
在913处,手持式设备131、731将控制数据经由控制数据通信链路155、256、257传输到远程设备121、521、621、721和/或听力设备111、211、311、411、711、811。在914处,远程设备121、521、621、721和/或听力设备111、211、311、411、711、811接收控制数据。可以实施包括操作911-914的方法来代替控制数据提供步骤901。除了在操作914处由听力设备111、211、311、411、711、811和/或远程设备111、211、311、411、711、811从手持式设备131、731接收控制数据以外,该方法也可以独立于听力系统101、201、701而实施。
图17图示了基于取向数据来确定所选择的方向的方法。在921处,在第一时间提供取向数据。在922处,在第二时间提供取向数据。第一时间和第二时间可以通过预定时间间隔而分开。所述预定时间间隔可以被固定为常数或随时间变化的值。随后将在第一时间提供的取向数据用作参考数据。在923处,将参考数据与在第二时间提供的取向进行比较。以这种方式,能够确定手持式设备131、731在第一时间和第二时间的空间取向之间的改变。特别地,因此可以独立于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向而确定手持式设备131、731的空间取向的改变。在924处,基于在923处的比较来确定所选择的方向。因此,还能够独立于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向而确定所选择的方向。
图18图示了基于取向数据来确定所选择的方向的另一方法。在931处,提供取向数据。在932处,提供参考数据。在933处,将取向数据与参考数据进行比较。所述比较可以包括通过参考数据来校准取向数据。参考数据包含将取向数据与听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向(特别是默认空间取向)进行关联的信息。因此,能够相对于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向来确定手持式设备131、731的空间取向的改变。在934处,基于在933处的比较来确定所选择的方向。因此,能够相对于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向对应地确定所选择的方向。
可以将包括操作931-934的方法和/或操作931-934实施为方向确定步骤。在一些实施方式中,手持式设备131、731执行方向确定步骤,使得在控制数据中能够包括所选择的方向。在一些实施方式中,方向确定步骤是至少部分地通过听力设备111、211、311、411、711、811和/或远程设备121、521、621、721来执行的,特别是在924、934处对所选择的方向的确定和/或在923、933处的比较。因此,能够向在操作902处提供的音频数据提供与所选择的方向相对应的方向性。结果,可以在音频数据中主要表示从所选择的方向检测到的声音。
在其他实施方式中,可以在不需要在923、933处与参考数据的比较的情况下基于在操作922、931处提供的取向数据来在操作924、934处确定所选择的方向。例如,可以在921、931处提供取向数据,使得取向数据指示手持式设备131、731相对于预定义参考系(例如,地球的参考系)的空间取向和/或手持式设备131、731相对于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向。因此,可以不要求如在操作921、932处所提供的与参考数据的比较来确定所选择的方向。
图19图示了确定参考数据的方法。在942处,识别对初始化步骤进行初始化的初始时间。可以在941处通过可以由用户经由用户接口先前输入的初始化命令来先前触发初始化。以这种方式,参考数据能够表示在手持式设备131、731被放置在由用户选择的空间取向期间生成的取向数据。在943处,在初始时间生成取向数据。在944处,基于在初始时间生成的取向数据来确定参考数据。因此,参考数据能够表示在手持式设备131、731在初始时间被放置的初始空间取向期间的取向数据,特别是相对于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721被放置在默认空间取向时的情况的取向数据。因此,可以将参考数据分配给听力设备111、211、311、411、711、811和/或远程设备121、521、621、721相对于手持式设备131、731的默认空间取向的默认空间取向,使得取向数据与参考数据之间的差异指示手持式设备131、731的瞬时空间取向相对于听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的默认空间取向的差异。随后可以在945处记住参考数据。因此,可以在稍后的时间在操作932处提供参考数据。
在其他实施方式中,可以自动确定和/或独立于用户交互而确定将取向数据与听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向进行关联的参考数据,使得可以不要求包括操作941-945的初始化步骤。能够通过指示检测器装置的空间取向的取向数据来提供参考数据。耳部单元和/或远程设备可以被配置为生成指示检测器装置的空间取向的取向数据。然后,传感器(特别是惯性传感器)可以生成参考数据,所述传感器被提供在相对于检测器装置的至少一个声音检测器的固定位置处。例如,可以向听力设备111、211、311、411、711、811和/或远程设备121、521、621、721提供取向传感器,所述取向传感器被配置为提供指示听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向的取向数据。然后可以将指示听力设备111、211、311、411、711、811和/或远程设备121、521、621、721的空间取向的取向数据用作参考数据。
图20图示了根据操作941-945来准备初始化步骤的方法。在951处,将手持式设备131、731和远程设备121、521、621、721的空间取向对齐。所述对齐可以包括将远程设备121、521、621、721定位在默认空间取向处。为此,可以采用取向特性528、529。所述对齐还可以包括将手持式设备131、731定位在相对于远程设备121、521、621、721的默认空间取向的初始空间取向处。听力系统101、201、701的用户可以执行操作951。随后,在952处,用户能够对与操作941相对应的参考数据的生成进行初始化。
图21图示了向音频数据提供方向性的方法。在961处,确定瞬时生成的取向数据相对于先前生成的取向数据是否发生了改变。可以对在提供控制数据之前所生成的取向数据执行所述确定和/或可以对可以基于取向数据的控制数据执行所述确定。在一些实施方式中,可以随时间确定取向数据的连续改变。
在已经确定取向数据没有改变的情况下,在964处并不控制在音频数据中提供方向性改变。在一些实施方式中,在已经确定取向数据发生改变的情况下,在965处控制在音频数据中提供的对应的方向性改变。以这种方式,在连续改变取向数据期间,在操作965处可以连续改变音频数据的方向性。在一些其他实施方式中,在已经确定取向数据发生改变的情况下,在962处确定取向数据的改变是否高于阈值。在取向数据的改变低于阈值的情况下,执行操作964,使得不改变在音频数据中提供的方向性。在取向数据的改变高于阈值的情况下,执行操作965,使得相应地改变在音频数据中提供的方向性。以这种方式,在连续改变取向数据期间,在操作965处逐渐改变音频数据的方向性。可以通过在操作853中相应地设置阈值来调整逐渐改变的量。包括操作961-965的方法可以被包括在操作902处执行的方向性提供步骤中。
图22图示了使得能够基于取向数据来控制听力系统101、201、301、401、701、801的不同操作的方法。在操作911处生成了取向数据之后,在862处确定手持式设备131、731相对于预定义平面的空间取向。预定义平面可以是旋转平面104。旋转平面104可以被预定义为被定向为平行于包括向音频数据提供的方向性所在的方向的平面和/或可以被选择为基本上平行于地面平面和/或法向于重力。在973处,确定手持式设备131、731相对于预定义平面的空间取向的取向准则是否得到满足。在取向准则得到满足的情况下,例如当手持式设备131、731的空间取向在相对于旋转平面104的预定义范围内时,在操作902处根据控制数据来向音频数据提供方向性。以这种方式,能够根据手持式设备相对于预定义平面的空间取向来执行在操作902中向音频数据提供方向性。例如,预定义范围可以包括手持式设备131、731被放置在与空间取向736-738中的任一空间取向相对应的特定空间取向中。在取向准则没有得到满足的情况下,特别是当手持式设备131、731的空间取向在相对于旋转平面104的预定义范围之外时,在974处激活不同的操作。例如,在手持式设备131、731被放置在空间取向736-738中的与取向准则得到满足时的特定空间取向不同的任一空间取向中期间,手持式设备131、731可以被放置在预定义范围之外。在974处激活的操作可以包括禁止根据手持式设备的空间取向在操作902中提供方向性和/或激活自动化方向性调整和/或禁止对音频数据的任何方向性调整和/或对音频数据的任何其他更改。
图23图示了提供表示通过远程设备121、521、621、721检测到的声音的音频数据的方法。在981处,声音检测器123-125、423-425、523-526、624、626在第一位置处检测声音。在983处,经由专用信号通道在音频信号A1-A6中提供表示检测到的声音的音频数据。在982处,另一声音检测器123-125、423-425、523-526、624、626在第二位置处检测声音。在984处,经由另一专用信号通道在另一音频信号A1-A6中提供表示检测到的声音的音频数据。将声音检测器123-125、423-425、523-526、624、626放置在不同的空间位置处能够允许根据在不同的空间位置处检测到声音的方向来检测声音。关于检测到的声音的方向的信息被包含在音频数据中。
在985处,处理单元(特别是在远程设备121、521、721中包括的处理器126和/或在听力设备111、211、711中包括的处理器116)从不同的信号通道收集音频数据。在986处,处理单元向所收集的音频数据提供方向性,特别是通过执行声学波束形成来向所收集的音频数据提供方向性。能够根据与操作902相对应的控制数据来提供方向性。特别地,方向性能够与通过控制数据控制的所选择的方向相对应,使得在音频数据中主要表示从所选择的方向检测到的声音。因此,能够在所选择的方向上形成声学波束。在音频数据中提供方向性可以包括在图21中图示的方法的操作961-965中的任一操作。此外,除了根据控制数据来控制方向性以外,在图22中图示的方法的操作862-974中的任一操作都可以用于实现用于提供音频数据的不同操作。
虽然上面已经结合特定的设备、系统和方法描述了本公开内容的原理,但是应当清楚地理解,这种描述仅仅是举例,而不是作为对本发明的范围的限制。上述优选实施例旨在说明本发明的原理,而不是限制本发明的范围。本领域技术人员可以对这些优选实施例做出各种其他实施例和修改,而在不脱离仅由权利要求限定的本发明的范围。在权利要求中,词语“包括”并不排除其他元件或步骤,词语“一”或“一个”并不排除多个。单个处理单元、处理器或控制器或其他单元可以实现在权利要求中记载的若干项的功能。虽然某些措施被记载在互不相同的从属权利要求中,但是这并不指示不能有利地使用这些措施的组合。权利要求中的任何附图标记都不应被解释为对范围的限制。

Claims (23)

1.一种操作听力系统的方法,所述听力系统包括耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)、输出换能器(115)以及检测器装置(122、322、422、522、622),所述耳部单元被配置为被佩戴在用户的耳朵处,所述输出换能器被包括在所述耳部单元中并且被配置为刺激所述用户的听力,所述检测器装置包括多个空间分离的声音检测器(123、124、125、423、424、425、523、524、525、526、624、626)并且被配置为提供表示检测到的声音的音频数据,其特征在于,
在控制数据提供步骤中,在改变被配置为被握持在所述用户的手中的手持式设备(131、731)的空间取向期间基于由所述手持式设备(131、731)生成的取向数据来提供控制数据,所述取向数据指示所述手持式设备(131、731)的所述空间取向;并且
在方向性提供步骤中,根据所述控制数据来向所述音频数据提供方向性。
2.根据权利要求1所述的方法,其特征在于,在方向确定步骤中,通过将所述取向数据与参考数据进行比较来确定所选择的方向,其中,在所述方向性提供步骤中,所述音频数据的所述方向性被提供为与所选择的方向相对应。
3.根据权利要求2所述的方法,其特征在于,所述方向确定步骤是在所述控制数据提供步骤处被执行的,其中,所述控制数据被提供为使得所述控制数据指示所选择的方向。
4.根据权利要求2或3所述的方法,其特征在于,所述方向确定步骤是在所述控制数据提供步骤之后被执行的,其中,所述控制数据被提供为使得所述控制数据包括与所述参考数据相比较的所述取向数据。
5.根据权利要求2至4中的任一项所述的方法,其特征在于,所述取向数据是由所述手持式设备(131、731)在第二时间生成的,其中,所述参考数据指示由所述手持式设备(131、731)在第一时间生成的取向数据。
6.根据权利要求2至5中的任一项所述的方法,其特征在于,所述参考数据指示所述取向数据与所述检测器装置(122、322、422、522、622)的空间取向之间的关系。
7.根据权利要求2至6中的任一项所述的方法,其特征在于,在初始化步骤中,基于在初始时间生成的所述取向数据来确定所述参考数据。
8.根据权利要求7所述的方法,其特征在于,所述初始化步骤包括由用户接口(133、527)对所述初始化步骤进行初始化。
9.根据前述权利要求中的任一项所述的方法,其特征在于,基于所述取向数据来确定所述手持式设备(133、731)相对于预定义平面(104)的空间取向,其中,所述方向性提供步骤是根据所述手持式设备(133、731)相对于所述预定义平面(104)的所述空间取向来执行的。
10.根据权利要求9所述的方法,其特征在于,所述预定义平面(104)与提供的所述音频数据的所述方向性所在的平面相对应。
11.根据前述权利要求中的任一项所述的方法,其特征在于,在所述方向性提供步骤中,所述音频数据的所述方向性在所述取向数据的连续改变处被连续改变。
12.根据权利要求1至10中的任一项所述的方法,其特征在于,在所述方向性提供步骤中,所述音频数据的所述方向性在所述取向数据的改变被确定为低于阈值时不被更改。
13.一种存储指令的计算机可读介质,所述指令在由处理单元(116、126、136)运行时使所述处理单元执行根据权利要求1至12中的任一项所述的方法。
14.一种听力系统,包括:
耳部单元(112、113、212、213、312、313、412、413、712、713、812、813),其被配置为被佩戴在用户的耳朵处;
输出换能器(115),其被包括在所述耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)中并且被配置为刺激所述用户的听力;
检测器装置(122、322、422、522、622),其包括多个空间分离的声音检测器(123、124、125、423、424、425、523、524、525、526、624、626)并且被配置为提供表示检测到的声音的音频数据;
其特征在于,
通信端口(127、217),其被配置为在改变被配置为被握持在所述用户的手中的手持式设备(131、731)的空间取向期间从所述手持式设备(131、731)接收控制数据,所述控制数据基于由所述手持式设备(131、731)生成的取向数据,所述取向数据指示所述手持式设备(131、731)的所述空间取向;以及
处理单元(116、126、136),其被配置为根据所述控制数据来向所述音频数据提供方向性。
15.根据权利要求14所述的听力系统,其特征在于,所述听力系统还包括存储指令的计算机可读介质,所述指令在由被包括在所述手持式设备(131、731)中的处理器(136)运行时使所述处理器(136)提供所述控制数据。
16.根据权利要求14或15所述的听力系统,其特征在于,所述听力系统包括所述手持式设备(131、731),其中,所述手持式设备(131、731)包括被配置为提供所述控制数据的处理器(136)。
17.根据权利要求14至16中的任一项所述的听力系统,其特征在于,所述检测器装置(122、322、422、522、622)的至少一个声音检测器(123、124、125、423、424、425、523、524、525、526、624、626)被包括在远程设备(121、521、721)中,所述远程设备(121、521、721)被配置为将表示所述检测到的声音的所述音频数据从远离所述耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)的位置传输到所述耳部单元。
18.根据权利要求17所述的听力系统,其特征在于,所述远程设备(121、521、721)包括可见取向特性(528、529),所述可见取向特性允许所述用户将所述手持式设备(131、731)的所述空间取向与所述取向特性(528、529)对齐。
19.根据权利要求17或18所述的听力系统,其特征在于,所述远程设备(121、521、721)
包括被配置为被静止放置在平面上的支撑物(538)。
20.根据权利要求14至19中的任一项所述的听力系统,其特征在于,所述检测器装置(122、322、422、522、622)的至少一个声音检测器(123、124、125、423、424、425、523、524、525、526、624、626)被包括在所述耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)中。
21.根据权利要求14至20中的任一项所述的听力系统,其特征在于,所述耳部单元(112、113、212、213、312、313、412、413、712、713、812、813)是第一耳部单元,所述第一耳部单元被配置为被佩戴在第一耳朵处并且包括第一声音检测器(123、124、125、423、424、425、523、524、525、526、624、626),所述听力系统还包括第二耳部单元(112、113、212、213、312、313、412、413、712、713、812、813),所述第二耳部单元被配置为被佩戴在第二耳朵处并且包括第二声音检测器(123、124、125、423、424、425、523、524、525、526、624、626),其中,所述检测器装置(122、322、422、522、622)包括所述第一声音检测器和所述第二声音检测器。
22.根据权利要求14至21中的任一项所述的听力系统,其特征在于,所述手持式设备(131、731)包括惯性传感器(132),所述惯性传感器被配置为生成所述取向数据。
23.根据权利要求14至22中的任一项所述的听力系统,其特征在于,所述通信端口(127、217)被配置为经由与所述手持式设备(131、731)的无线连接(155、256、257)来接收所述控制数据。
CN202080093519.2A 2020-01-17 2020-01-17 用于向音频数据提供方向性的听力系统及其操作方法 Pending CN114982255A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2020/051155 WO2021144031A1 (en) 2020-01-17 2020-01-17 Hearing system and method of its operation for providing audio data with directivity

Publications (1)

Publication Number Publication Date
CN114982255A true CN114982255A (zh) 2022-08-30

Family

ID=69182513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080093519.2A Pending CN114982255A (zh) 2020-01-17 2020-01-17 用于向音频数据提供方向性的听力系统及其操作方法

Country Status (4)

Country Link
US (1) US20230031093A1 (zh)
EP (1) EP4091341A1 (zh)
CN (1) CN114982255A (zh)
WO (1) WO2021144031A1 (zh)

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008098590A1 (en) 2007-02-14 2008-08-21 Phonak Ag Wireless communication system and method
EP2206362B1 (en) * 2007-10-16 2014-01-08 Phonak AG Method and system for wireless hearing assistance
CN103503482A (zh) * 2011-05-04 2014-01-08 峰力公司 自学式听力辅助系统及其操作方法
US8989413B2 (en) * 2011-09-14 2015-03-24 Cochlear Limited Sound capture focus adjustment for hearing prosthesis
WO2014096900A1 (en) * 2012-12-18 2014-06-26 Nokia Corporation Spatial audio apparatus
EP2809087A1 (en) * 2013-05-29 2014-12-03 GN Resound A/S An external input device for a hearing aid
EP2838210B1 (en) * 2013-08-15 2020-07-22 Oticon A/s A Portable electronic system with improved wireless communication
EP2840807A1 (en) * 2013-08-19 2015-02-25 Oticon A/s External microphone array and hearing aid using it
EP2908549A1 (en) 2014-02-13 2015-08-19 Oticon A/s A hearing aid device comprising a sensor member
DK3057337T3 (da) * 2015-02-13 2020-05-11 Oticon As Høreapparat omfattende en adskilt mikrofonenhed til at opfange en brugers egen stemme
WO2018127298A1 (en) * 2017-01-09 2018-07-12 Sonova Ag Microphone assembly to be worn at a user's chest
US20190028817A1 (en) * 2017-07-20 2019-01-24 Wizedsp Ltd. System and method for a directional speaker selection

Also Published As

Publication number Publication date
US20230031093A1 (en) 2023-02-02
EP4091341A1 (en) 2022-11-23
WO2021144031A1 (en) 2021-07-22

Similar Documents

Publication Publication Date Title
US20240121561A1 (en) Hearing aid device comprising a sensor member
US10123134B2 (en) Binaural hearing assistance system comprising binaural noise reduction
US11825272B2 (en) Assistive listening device systems, devices and methods for providing audio streams within sound fields
US20170127197A1 (en) Hearing assistance system and method
US9510112B2 (en) External microphone array and hearing aid using it
US20150181355A1 (en) Hearing device with selectable perceived spatial positioning of sound sources
CN104735599B (zh) 具有声源的可选择感知空间定位的听力装置
US9894446B2 (en) Customization of adaptive directionality for hearing aids using a portable device
EP3329692B1 (en) Clip-on microphone assembly
CN112544089B (zh) 提供具有空间背景的音频的麦克风设备
US9036845B2 (en) External input device for a hearing aid
US11166113B2 (en) Method for operating a hearing system and hearing system comprising two hearing devices
US10687157B2 (en) Head direction hearing assist switching
JP3217231U (ja) 多機能スマートヘッドフォン装置の設定システム
EP2887695B1 (en) A hearing device with selectable perceived spatial positioning of sound sources
US20230031093A1 (en) Hearing system and method of its operation for providing audio data with directivity
JP3952870B2 (ja) 音声伝送装置、音声伝送方法及びプログラム
EP2809087A1 (en) An external input device for a hearing aid
DK201370296A1 (en) An external input device for a hearing aid

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination