CN113905302A - 触发提示信息的方法、装置以及耳机 - Google Patents

Abstract

本申请实施例公开了一种触发提示信息的方法、装置以及耳机。耳机设置有多个麦克风，方法包括：获取多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，多个麦克风各自的位置不同；基于多个采集时间以及多个麦克风各自的位置，获取发出目标音频信号的声源的方位信息；触发与方位信息对应的提示信息。从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。

Description

触发提示信息的方法、装置以及耳机

技术领域

本申请涉及终端技术领域，更具体地，涉及一种触发提示信息的方法、装置以及耳机。

背景技术

很多用户习惯使用耳机听音乐或者进行语音通话，而随着耳机降噪技术的发展，用户在佩戴耳机状态下对于外界的声音感知很不明显，进而会造成用户不能及时的获取到外界声音的相关情况。

发明内容

鉴于上述问题，本申请提出了一种触发提示信息的方法、装置以及耳机，以改善上述问题。

第一方面，本申请提供了一种触发提示信息的方法，应用于耳机，所述耳机设置有多个麦克风，所述方法包括：获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同；基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息；触发与所述方位信息对应的提示信息。

第二方面，本申请提供了一种触发提示信息的装置，运行于耳机，所述耳机设置有多个麦克风，所述装置包括：到达时间获取单元，用于获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同；访问信息获取单元，用于基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息；提示单元，用于触发与所述方位信息对应的提示信息。

第三方面，本申请提供了一种耳机，包括多个麦克风、一个或多个处理器以及存储器；一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行上述的方法。

第四方面，本申请提供的一种存储有处理器可执行的程序代码的计算机可读存储介质，所述计算机可读存储介质包括存储的程序代码，其中，在所述程序代码运行时执行上述的方法。

本申请提供的一种触发提示信息的方法、装置以及耳机，在电子设备包括有多个麦克风的情况下，可以获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间。再基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，以触发与所述方位信息对应的提示信息。从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了本申请提出的一种触发提示信息的方法的的场景示意图；

图2示出了本申请实施例提出的一种触发提示信息的方法的流程图；

图3示出了本申请中麦克风所采集的音频的声音强度与采集时间的对应关系示意图；

图4示出了本申请中一种触发提示信息的的示意图；

图5示出了本申请另一实施例提出的一种触发提示信息的方法的流程图；

图6示出了本申请再一实施例提出的一种触发提示信息的方法的流程图；

图7示出了本申请中一种触发播放提示信息的示意图；

图8示出了本申请又一实施例提出的一种触发提示信息的方法的流程图；

图9示出了本申请又一实施例提出的一种触发提示信息的方法的流程图；

图10示出了本申请又一实施例提出的一种触发提示信息的方法的流程图；

图11示出了本申请实施例提出的一种触发提示信息的装置的结构框图；

图12示出了本申请实施例提出的另一种触发提示信息的装置的结构框图；

图13示出了本申请的用于执行根据本申请实施例的触发提示信息的方法的电子设备的结构框图；

图14是本申请实施例的用于保存或者携带实现根据本申请实施例的触发提示信息的方法的程序代码的存储单元。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

随着耳机技术的发展，耳机已经可以给用户带来较佳的听觉体验。因此，有越来越多的用户更倾向于选择通过耳机来欣赏音乐。但是，由而随着耳机降噪技术的发展，用户在佩戴耳机状态下对于外界的声音感知很不明显，进而会造成用户不能及时的获取到外界声音的相关情况。例如，用户正佩戴着耳机听音乐，并且用户当前可能正走到一个声音比较嘈杂的环境下，若用户在该嘈杂的环境下直接取掉耳机，则可能会造成用户的听觉受到环境中噪音的刺激。

因此，发明人提出了本申请中的一种触发提示信息的方法、装置以及耳机，在电子设备包括有多个麦克风的情况下，可以获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间。再基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，以触发与所述方位信息对应的提示信息。

从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。

下面将先对本申请所涉及的应用环境进行介绍。

如图1所示的应用场景中包括有麦克风1、麦克风2、麦克风3以及麦克风4。还包括有主控单元。其中，麦克风1、麦克风2、麦克风3以及麦克风4用于进行声音采集，主控单元则用于对麦克风1、麦克风2、麦克风3以及麦克风4各自所采集的声音进行处理，以获取得到某一声源的方位信息。例如，该处理包括获取麦克风1、麦克风2、麦克风3以及麦克风4各自采集到图1中所示声源所发出声音的到达时间，并结合麦克风1、麦克风2、麦克风3以及麦克风4各自的相对位置来计算出声源的方位信息。其中，需要说明的是，麦克风1、麦克风2、麦克风3以及麦克风4和主控单元可以均设置在同一设备上，也可以分别设置在不同的设备上。例如，麦克风1、麦克风2、麦克风3以及麦克风4和主控单元可以均设置在耳机或者智能手机。再者，也可以是，麦克风1、麦克风2、麦克风3以及麦克风4都设置在耳机，而主控单元设置在智能手机。

需要说明的是，在本申请实施例中用于进行声音采集的麦克风的数量不限于图1中所示的数量。例如，也可以是3个，还可以是比图1中所示的数量更多。再者，在本申请实施例中涉及的麦克风，可以为全向性麦克风。

下面将结合附图具体描述本申请的各实施例。

请参阅图2，本申请提供的一种触发提示信息的方法，应用于耳机，所述电子设备设置有多个麦克风，所述方法包括：

S110：获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同。

其中，在本申请实施例中，耳机可以基于声达时间差(TDOA，Time Difference ofArrival)方式来计算得到声源的位置，那么在获取声源的位置的过程中，耳机可以通过多个麦克风采集同一声源所发出声音，并根据多个麦克风各自采集到该同一声源的声音的时间差。其中，多个麦克风各自在耳机上的位置是不同的。

其中，在本申请实施例中，目标音频信号为需要进行方位信息检测的音频信号。

作为一种方式，目标音频信号可以为声音强度有突变的音频信号。需要说明的是，耳机所采集的到音频信号的强度会随着环境所存在的声源所发出的声音的强度而动态变化。例如，如图3所示，表征的是耳机的麦克风在进行声音采集的过程中，所采集的声音的声音强度与采集时间的对应关系。可以看出，声音强度会有动态的变化过程。而对用户的听觉造成影响的噪音通常为声音强度较大的声音，那么当有噪音出现时，麦克风所采集到的音频信号的强度会有明显的增大。在这种方式中，耳机可以将声音强度突然增大的音频信号作为目标音频信号。需要说明的是，在本申请实施例中，突然增大的音频信号可以理解为在指定时间长度内的增大幅度大于指定幅度的音频信号。并且，会将该突然增大的音频信号增大开始的时间作为采集到目标音频信号的时间。

作为另外一种方式，目标音频信号可以为声音强度在指定时长内持续大于指定强度的音频信号。可选的，其中的指定强度可以为用户自己设定的所能承受的最大声音强度。在这种方式下，耳机在检测到所采集到的音频信号的声音强度超过指定强度后，会开始指定时长的计时，若在该指定时长内所采集的音频信号的声音强度均大于指定强度，则可以确定采集到目标音频信号，并该计时开始时刻作为采集到目标音频信号的时间。例如，若设定的指定强度为70分贝，指定时长为5秒中，在耳机检测麦克风所采集的音频信号的强度超过70分贝的时候，开始进行计时，若在计时5秒钟内，麦克风所采集的音频信号的强度均超过70分贝，则确定采集到目标音频信号，并将采集的音频信号超过70分贝的时刻作为采集到目标音频信号的时间。

作为再一种方式，可以通过声纹比对的方式来确定目标音频信号。可选的，耳机可以从多个麦克风采集的音频信号中，获取多个麦克风各自在同一时间段内采集的音频信号，得到多个待比对音频信号；若任意两个所述待比对音频信号均包括有声纹特征相同的信号，且任意两个所述待比对音频信号所包括的声纹特征相同的信号均相同，则将所述声纹特征相同的信号作为多个麦克风各自采集到同一目标音频信号。需要说明的是，虽然多个麦克风采集到同一声源发出的声音的时间会有差别，但是该差别并不会特别大。所以通过声纹特征来获取目标音频信号的过程中，会是对麦克风在同一时间段内采集的音频信号的声纹特征进行比对。

例如，若耳机设置的多个麦克风包括有麦克风1、麦克风2以及麦克风3。其中麦克风1、麦克风2以及麦克风3在同一时间段内采集的音频信号分别为音频信号A1、音频信号A2以及音频信号A3。若音频信号A1和音频信号A2包括的声纹特征相同的信号为音频信号A4，若音频信号A1和音频信号A3包括的声纹特征相同的信号为音频信号A4，若音频信号A2和音频信号A3包括的声纹特征相同的信号为音频信号A4，则确定音频信号A4为声纹特征相同的信号，进而会将音频信号A4作为麦克风1、麦克风2以及麦克风3采集到同一目标音频信号。

其中，在本申请实施例中，获取音频信号的声纹特征的方式可以采用相关技术中的方式，本申请实施例中则不会细述。再者，在本申请实施例中，获取每个多个麦克风各自采集到同一目标音频信号的操作可以是周期性进行的。那么获取待比对音频信号的时间段的长度可以为进行目标音频信号获取的周期的周期时长。

前述介绍的获取目标音频信号的过程可以理解为针对单个麦克风采集的音频信号获取对应的目标音频信号的过程。在耳机设置有多个麦克风的情况下，可以基于前述的方式来获取到每个麦克风各自采集到的目标音频信号。并且，如前述内容介绍可知，对于每个麦克风采集到的目标音频信号都会有对应的采集到的时间。那么作为一种方式，耳机可以将对应的采集的时间处于同一个时间段的目标音频信号作为同一个目标音频信号。需要说明的是，因为多个麦克风设置在耳机中的位置不同，会造成多个麦克风采集到外部的同一声源发出的声音会有先后顺序，但是，虽然麦克风采集到外部的同一声源发出的声音会有先后顺序，但是相差的时间并不会较大。因此，可以将多个麦克风在同一个时间段内采集的目标音频信号作为多个麦克风采集的同一目标音频信号。并且，如前述图3中所示，音频信号被采集到的时间是可以被电子设备所进行记录的，而每个麦克风采集到的目标音频信号对应有采集时间，因此，在确定多个麦克风各自采集到同一目标音频信号后，则可以对应的获取到个麦克风各自采集到同一目标音频信号的时间。

S120：基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息。

在本申请实施例中，可以是通过声达时间差方式来计算得到声源的位置。那么在获取到每个麦克风采的采集同一目标音频信号的时间后，可以进一步的获取到任一两个麦克风采集该同一目标音频信号的时间的时间差，进而得到多个时间差，再结合多个麦克风的相对位置关系，则可以计算得到发出目标音频信号的声源的方位信息。其中，该方位信息可以包括声源相相对于耳机的位置。

S130：触发与所述方位信息对应的提示信息。

作为一种方式，与方向信息对应的提示信息则包括该发出目标音频信号的声源相对于耳机的位置。

作为另外一种方式，所述位置信息包括发出所述目标音频信号的声源相对所述耳机的位置，所述触发与所述方位信息对应的提示信息，包括：触发向目标方向进行移动的提示信息，所述目标方向为与发出所述目标音频信号的声源相对所述耳机的位置的相反的方向。示例性的，如图4所示，声源位于用户(佩戴耳机的用户)的背后，那么在耳机通过本申请实施例提供的方式来获取到发出目标音频信号的声源位于用户的背后的情况下，可以触发内容为向前(图4中虚线箭头所示的方向)移动的提示信息，以便可以提示用户远离发出目标音频信号的声源。

本实施例提供的一种触发提示信息的方法，在电子设备包括有多个麦克风的情况下，可以获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间。再基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，以触发与所述方位信息对应的提示信息。从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。

请参阅图5，本申请提供的一种触发提示信息的方法，应用于耳机，所述电子设备设置有多个麦克风，所述方法包括：

S210：获取所述多个麦克风各自采集到的音频信号。

S220：将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

作为一种方式，所述将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

作为一种方式，所述对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：根据所述多个麦克风各自采集到的音频信号生成矩阵，所述矩阵中包括有表征多个麦克风各自采集到的音频信号的矩阵元素；对所述矩阵元素进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为采集到的目标音频信。

其中，可以通过波束成型(Beamforming)技术将多个麦克风各自采集到的音频信号生成矩阵。

需要说明的是，在根据多个麦克风各自采集到的音频信号生成矩阵后，该矩阵中则可以包括多个麦克风各自采集到的音频信号的元素，那么在这种情况下，通过对该矩阵直接进行运算，则可以实现同时对多个麦克风各自采集到的音频信号进行处理，进而可以实现并行的对多个麦克风各自采集到的音频信号进行处理，进而可以更加快速的获取到多个麦克风采集到的同一目标音频信号。

作为一种方式，指定强度条件包括声音强度的突变程度大于指定突变程度，所述将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：将每个麦克风各自采集到的音频信号中，声音强度的突变程度大于指定突变程度的音频信号作为采集到的目标音频信号。

S230：获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同。

S240：基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息。

S250：触发与所述方位信息对应的提示信息。

本实施例提供的一种触发提示信息的方法，从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。并且，在本实施例中是对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号作为的目标音频信号，从而有利于提升所获取到的目标音频信号的信噪比，进而有利于电子设备更加准确的获取到发出目标音频信号的声源的方位信息。再者，通过将根据所述多个麦克风各自采集到的音频信号生成矩阵的方式，使得可以并行的对多个麦克风采集的音频信号进行处理，提升了处理速度。

请参阅图6，本申请提供的一种触发提示信息的方法，应用于耳机，所述电子设备设置有多个麦克风，所述方法包括：

S310：获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同。

S320：基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息。

S330：基于所述多个麦克风各自采集到所述目标音频信号，得到所述声源所发出声音的声音强度。

在本申请实施例中，可以有多种的获取到声源所发出声音的声音强度的方式。

作为一种方式，可以将多个麦克风中任意一个麦克风采集的目标音频信号的信号强度作为发出目标音频信号的声源对应发出声音的声音强度。

作为另外一种方式，所述基于所述多个麦克风各自采集到所述目标音频信号，得到所述声源所发出声音的声音强度，包括：获取所述多个麦克风各自采集到的目标音频信号的声音强度，得到多个声音强度；将所述多个声音强度的均值作为所述声源所发出声音的声音强度。

S331：检测声音强度是否大于声音阈值。

S340：若所述声音强度不小于声音阈值，触发与所述方位信息对应的提示信息。

其中，该声音阈值可以为用户设定的自己所能承受的最大声音强度的值。

S350：若所述声音强度小于声音阈值，触发与声音强度有关的提示信息。

在声音强度低于声音阈值的情况下，即使用户将耳机取下，可能也不会对用户造成干扰。所以可以只显示与声音强度有关的提示信息。可选的，该与声音强度有关的提示信息的内容可以为所计算出的声音强度。

作为一种方式，在本申请实施例中所触发提示信息的过程中，可以包括触发与耳机所连接的终端设备来进行提示信息的显示。例如，若与耳机连接的终端设备为智能手机，则可以触发该智能手机在显示屏的任一可以进行内容显示的位置显示提示信息。可选的，进行提示信息显示的位置包括智能手机的显示屏顶部的状态栏。或者可以在智能手机的顶部悬浮的显示提示信息。

作为另外一种方式，耳机可以触发音频模式的提示信息。在这种方式下，若耳机确定需要触发音频模式的提示信息，可以中断当前正在播放的音频内容，并开始播放音频模式的提示信息，然后在播放完成该音频模式的提示信息后，再恢复之前所中断的内容。示例性的，如图7所示，耳机在进行音乐内容的播放过程中在t1时刻确定会触发音频模式的提示信息，那么则会在t1时刻中断音乐内容的播放，而切换为播放音频模式的提示信息，在t2时刻完成音频模式的提示信息的播放之后，则可以恢复进行音乐内容的播放。

本实施例提供的一种触发提示信息的方法，从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。并且，在本实施例中，还可以根据获取到的声源所发出声音的声音强度来确定具体所触发的提示信息的内容，提升了提示信息的触发的灵活性。

请参阅图8，本申请提供的一种触发提示信息的方法，应用于耳机，所述电子设备设置有多个麦克风，所述方法包括：

S410：获取所述多个麦克风各自采集到音频信号。

S420：将所述多个麦克风各自采集到音频信号发送给与所述耳机连接的终端设备。

需要说明的是，耳机本身的处理资源可能比较有限。那么在耳机的处理资源本身没有进行提升的情况下，除了处理用于播放的音频信号外，再消耗耳机本身的处理资源进行声源的方位信息的计算可能会造成耳机无法较好的处理用于播放的音频信号。那么将获取到的麦克风采集的音频信号传输给终端设备进行处理，可以有效的降低计算方位信息的过程中，对于耳机的处理资源的占用。其中，用于播放的音频信号可以理解为与耳机连接的终端设备传输给耳机进行播放的音频信号。

S430：接收所述终端设备返回的多个麦克风各自采集到同一目标音频信号的时间，其中，所述多个麦克风各自采集到同一目标音频信号的时间为所述终端设备根据所述个麦克风各自采集到音频信号获取得到，其中，所述多个麦克风各自的位置不同。

在本实施例中，对于每个麦克风采集的目标音频信号的检测则由终端设备进行。其中，终端设备可以基于前述实施例中所示的获取目标音频信号获取方式来进行目标音频信号的获取，并将获取到的多个麦克风各自采集到同一目标音频信号的时间返回给耳机。

S440：基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息。

S450：触发与所述方位信息对应的提示信息。

需要说明的是，在耳机本身的处理器具有方位信息计算功能的情况下，也可以由耳机本身的处理来获取方位信息。对应的，基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，则包括：所述耳机的处理器基于所述多个采集时间以及所述多个麦克风各自的位置，计算出发出所述目标音频信号的声源的方位信息。

本实施例提供的一种触发提示信息的方法，从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。并且，在本实施例中，在耳机获取到多个麦克风各自采集的音频信号后，可以传输给与耳机连接的终端设备进行处理，并获取到终端设备进行处理后返回的多个麦克风各自采集到同一目标音频信号的时间，从而使得可以降低对于耳机的处理资源的占用，也降低了对耳机的处理能力的要求。

请参阅图9，本申请提供的一种触发提示信息的方法，应用于耳机，所述电子设备设置有多个麦克风，所述方法包括：

S510：获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同。

S520：将所述多个采集时间以及所述多个麦克风各自的位置发送给与所述耳机连接的终端设备。

需要说明的是，耳机本身的处理资源可能比较有限。那么在耳机的处理资源本身没有进行提升的情况下，除了处理用于播放的音频信号外，再消耗耳机本身的处理资源进行声源的方位信息的计算可能会造成耳机无法较好的处理用于播放的音频信号。那么将获取到的麦克风采集的音频信号传输给终端设备进行处理，可以有效的降低计算方位信息的过程中，对于耳机的处理资源的占用。其中，用于播放的音频信号可以理解为与耳机连接的终端设备传输给耳机进行播放的音频信号。

S530：接收所述终端设备返回的发出所述目标音频信号的声源的方位信息，其中，所述方位信息为所述终端设备根据所述多个采集时间以及所述多个麦克风各自的位置得到。

终端设备在接收到耳机发送的多个采集时间以及所述多个麦克风各自的位置后，则可以根据前述实施例中的方式计算得到发出所述目标音频信号的声源的方位信息，并将所计算出的目标音频信号的声源的方位信息再返回给耳机。

S540：触发与所述方位信息对应的提示信息。

本实施例提供的一种触发提示信息的方法，从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。并且，在本实施例中，可以由耳机将多个采集时间以及多个麦克风各自的位置发送给与所述耳机连接的终端设备，由终端设备来计算出声源的方位信息，从而降低对于耳机的处理资源的占用，也降低了对耳机的处理能力的要求。

需要说明的是，如前述实施例中介绍可知，在本申请的实施例中，耳机可以与终端设备协同进行计算以得到发出目标音频信号的声源的方位信息。并且，耳机可以将不同阶段对应的信息发送给终端设备。

例如，耳机可以将音频信号的采集阶段对应信息发送给终端设备。其中，音频信号的采集阶段对应信息可以包括所述多个麦克风各自采集到音频信号，那么在这种情况下，终端设备则可以对应的计算出多个麦克风各自采集到同一目标音频信号的时间，并将所计算出的时间返回给耳机，那么后续剩余的步骤则可以又由耳机来执行。

再例如，耳机可以将方位信息计算阶段对应的信息发送给终端设备。其中，方位信息计算阶段对应的信息可以包括多个采集时间以及所述多个麦克风各自的位置。则终端设备可以对应的计算出声源的方位信息，并将计算出的方位信息再放回给耳机。

那么作为一种方式，终端设备可以周期性的将终端设备当前剩余的处理资源同步给耳机，进而耳机可以根据最近获取到的终端设备的当前剩余的处理资源来确定具体是将哪个阶段的信息发送给终端设备。如前述介绍，发送不同的阶段对应的信息给终端设备，那么终端设备对应所完整的数据处理内容是不同的，进而对应所消耗的处理资源也是不同的。那么在耳机中可以存储有终端设备当前剩余的处理资源与发送信息的阶段的对应关系。那么在耳机每次开始进行声源的方位信息的计算后，可以先获取到最近获取到的终端设备的当前剩余的处理资源，然后进而基于终端设备当前剩余的处理资源与发送信息的阶段的对应关系来确定具体是将哪个阶段对应的信息发送给终端设备。例如，如图10所示，一种可选的步骤包括：

S610：响应于计算指令，触发多个麦克风开始采集音频信号，并获取最近获取到的终端设备的当前剩余的处理资源，以及基于终端设备当前剩余的处理资源与发送信息的阶段的对应关系来确定目标阶段，该目标阶段为确定的发送对应信息的阶段。

S620：若该目标阶段为音频信号的采集阶段，那么则耳机获取所述多个麦克风各自采集到音频信号；将所述多个麦克风各自采集到音频信号发送给与所述耳机连接的终端设备；接收所述终端设备返回的多个麦克风各自采集到同一目标音频信号的时间。

S630：若该目标阶段为方位信息计算阶段，则耳机将所述多个采集时间以及所述多个麦克风各自的位置发送给与所述耳机连接的终端设备；接收所述终端设备返回的发出所述目标音频信号的声源的方位信息。

请参阅图11，本申请提供的一种触发提示信息的装置600，运行于耳机，所述耳机设置有多个麦克风，所述装置600包括：

到达时间获取单元610，用于获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，其中，所述多个麦克风各自的位置不同。

访问信息获取单元620，用于基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息。

提示单元630，用于触发与所述方位信息对应的提示信息。

作为一种方式，提示单元630，具体用于触发向目标方向进行移动的提示信息，所述目标方向为与发出所述目标音频信号的声源相对所述耳机的位置的相反的方向。

作为一种方式，到达时间获取单元610，还用于从多个麦克风采集的音频信号中，获取多个麦克风各自在同一时间段内采集的音频信号，得到多个待比对音频信号；若任意两个所述待比对音频信号均包括有声纹特征相同的信号，则将所述声纹特征相同的信号作为多个麦克风各自采集到同一目标音频信号。

作为一种方式，到达时间获取单元610，还用于获取所述多个麦克风各自采集到的音频信号；将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

作为一种方式，到达时间获取单元610，具体用于对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

可选的，到达时间获取单元610，具体用于根据所述多个麦克风各自采集到的音频信号生成矩阵，所述矩阵中包括有表征多个麦克风各自采集到的音频信号的矩阵元素；对所述矩阵元素进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为采集到的目标音频信。

可选的，到达时间获取单元610，具体用于将每个麦克风各自采集到的音频信号中，声音强度的突变程度大于指定突变程度的音频信号作为采集到的目标音频信号。

如图12所示，装置600还包括：

声音强度获取单元640，用于基于所述多个麦克风各自采集到所述目标音频信号，得到所述声源所发出声音的声音强度；若所述声音强度不小于声音阈值，提示单元630，用于触发执行所述触发与所述方位信息对应的提示信息。可选的，声音强度获取单元640，具体用于获取所述多个麦克风各自采集到的目标音频信号的声音强度，得到多个声音强度；将所述多个声音强度的均值作为所述声源所发出声音的声音强度。

作为一种方式，到达时间获取单元610，具体用于获取所述多个麦克风各自采集到音频信号；将所述多个麦克风各自采集到音频信号发送给与所述耳机连接的终端设备；接收所述终端设备返回的多个麦克风各自采集到同一目标音频信号的时间，其中，所述多个麦克风各自采集到同一目标音频信号的时间为所述终端设备根据所述个麦克风各自采集到音频信号获取得到。

作为一种方式，访问信息获取单元620，具体用于将所述多个采集时间以及所述多个麦克风各自的位置发送给与所述耳机连接的终端设备；接收所述终端设备返回的发出所述目标音频信号的声源的方位信息，其中，所述方位信息为所述终端设备根据所述多个采集时间以及所述多个麦克风各自的位置得到。

本实施例提供的一种触发提示信息的方法，在电子设备包括有多个麦克风的情况下，可以获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间。再基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，以触发与所述方位信息对应的提示信息。从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，以便可以及时提取做好应对措施，进而提升了用户体验。

需要说明的是，本申请中装置实施例与前述方法实施例是相互对应的，装置实施例中各个单元的具体实施原理与前述方法实施例中的原理是相似的，装置实施例中的具体内容可以参见方法实施例，而在装置实施例中不再赘述。

下面将结合图13对本申请提供的一种电子设备进行说明。

请参阅图13，基于上述的设备控制方法、装置，本申请实施例还提供的一种可以执行前述设备控制方法的电子设备1000。电子设备1000包括相互耦合的一个或多个(图中仅示出一个)处理器105、存储器104、摄像头106以及音频采集装置108。其中，该存储器104中存储有可以执行前述实施例中内容的程序，而处理器105可以执行该存储器104中存储的程序。

其中，处理器105可以包括一个或者多个处理核。处理器105利用各种接口和线路连接整个电子设备1000内的各个部分，通过运行或执行存储在存储器104内的指令、程序、代码集或指令集，以及调用存储在存储器104内的数据，执行电子设备1000的各种功能和处理数据。可选地，处理器105可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable Logic Array，PLA)中的至少一种硬件形式来实现。处理器105可集成中央处理器(Central Processing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器105中，单独通过一块通信芯片进行实现。

存储器104可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。存储器104可用于存储指令、程序、代码、代码集或指令集。存储器104可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于实现至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等。

再者，电子设备1000除了前述所示的器件外，还可以包括网络模块110以及传感器模块112。

所述网络模块110用于实现电子设备1000与其他设备之间的信息交互，例如，传输设备控制指令、操纵请求指令以及状态信息获取指令等。而当电子设备200具体为不同的设备时，其对应的网络模块110可能会有不同。

传感器模块112可以包括至少一种传感器。具体地，传感器模块112可包括但并不限于：光传感器、运动传感器、压力传感器、红外热传感器、距离传感器、加速度传感器、以及其他传感器。

其中，压力传感器可以检测由按压在电子设备1000产生的压力的传感器。即，压力传感器检测由用户和电子设备之间的接触或按压产生的压力，例如由用户的耳朵与移动终端之间的接触或按压产生的压力。因此，压力传感器可以用来确定在用户与电子设备1000之间是否发生了接触或者按压，以及压力的大小。

其中，加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备1000姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等。另外，电子设备1000还可配置陀螺仪、气压计、湿度计、温度计等其他传感器，在此不再赘述。

音频采集装置110，用于进行音频信号采集。可选的，音频采集装置110包括有多个音频采集器件，该音频采集器件可以为麦克风。

作为一种方式，电子设备1000的网络模块为射频模块，该射频模块用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。所述射频模块可包括各种现有的用于执行这些功能的电路元件，例如，天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。例如，该射频模块可以通过发送或者接收的电磁波与外部设备进行交互。例如，射频模块可以向目标设备发送指令。

请参考图14，其示出了本申请实施例提供的一种计算机可读存储介质的结构框图。该计算机可读介质1100中存储有程序代码，所述程序代码可被处理器调用执行上述方法实施例中所描述的方法。

计算机可读存储介质1100可以是诸如闪存、EEPROM(电可擦除可编程只读存储器)、EPROM、硬盘或者ROM之类的电子存储器。可选地，计算机可读存储介质1100包括非易失性计算机可读介质(non-transitory computer-readable storage medium)。计算机可读存储介质1100具有执行上述方法中的任何方法步骤的程序代码1110的存储空间。这些程序代码可以从一个或者多个计算机程序产品中读出或者写入到这一个或者多个计算机程序产品中。程序代码1110可以例如以适当形式进行压缩。

综上所述，本申请提供的一种触发提示信息的方法、装置以及耳机，在电子设备包括有多个麦克风的情况下，可以获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间。再基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，以触发与所述方位信息对应的提示信息。从而通过上述方式使得可以通过获取多个麦克风采集同一外界声源所发出声音各自达到多个麦克风的时间以及多个麦克风各自的位置计算出外界声源的位置后，再及时的触发与外界声源的方位信息相关的提示信息，从而使得电子设备的用户能够及时的了解到外界声源的相关情况，可以帮助用户在戴上耳机状态下提高对外界的感知敏感度，以便可以及时提取做好应对措施，进而提升了用户体验。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。

应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

最后应说明的是：以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征图进行等同替换；而这些修改或者替换，并不驱使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (15)

1.一种触发提示信息的方法，其特征在于，应用于耳机，所述耳机设置有多个麦克风，所述多个麦克风各自的位置不同，所述方法包括：

获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间；

基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息；

触发与所述方位信息对应的提示信息。

2.根据权利要求1所述的方法，其特征在于，所述获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间之前还包括：

从多个麦克风采集的音频信号中，获取多个麦克风各自在同一时间段内采集的音频信号，得到多个待比对音频信号；

若任意两个所述待比对音频信号均包括有声纹特征相同的信号，且任意两个待比对音频信号所包括的声纹特征相同的信号均相同，则将所述声纹特征相同的信号作为多个麦克风各自采集到同一目标音频信号。

3.根据权利要求1所述的方法，其特征在于，所述获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间之前还包括：

获取所述多个麦克风各自采集到的音频信号；

将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

4.根据权利要求3所述的方法，其特征在于，所述将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：

对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号。

5.根据权利要求4所述的方法，其特征在于，所述对每个麦克风各自采集到的音频信号进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：

根据所述多个麦克风各自采集到的音频信号生成矩阵，所述矩阵中包括有表征多个麦克风各自采集到的音频信号的矩阵元素；

对所述矩阵元素进行延迟插入、放大和滤波，以获取到声音强度满足指定强度条件的音频信号，并将所述声音强度满足指定强度条件的音频信号作为采集到的目标音频信。

6.根据权利要求3所述的方法，其特征在于，指定强度条件包括声音强度的突变程度大于指定突变程度，所述将每个麦克风各自采集到的音频信号中，声音强度满足指定强度条件的音频信号作为每个麦克风各自采集到的目标音频信号，包括：

将每个麦克风各自采集到的音频信号中，声音强度的突变程度大于指定突变程度的音频信号作为采集到的目标音频信号。

7.根据权利要求1所述的方法，其特征在于，所述触发与所述方位信息对应的提示信息之前还包括：

基于所述多个麦克风各自采集到所述目标音频信号，得到所述声源所发出声音的声音强度；

若所述声音强度不小于声音阈值，执行所述触发与所述方位信息对应的提示信息。

8.根据权利要求7所述的方法，其特征在于，所述基于所述多个麦克风各自采集到所述目标音频信号，得到所述声源所发出声音的声音强度，包括：

获取所述多个麦克风各自采集到的目标音频信号的声音强度，得到多个声音强度；

将所述多个声音强度的均值作为所述声源所发出声音的声音强度。

9.根据权利要求1所述的方法，其特征在于，获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间，包括：

获取所述多个麦克风各自采集到音频信号；

将所述多个麦克风各自采集到音频信号发送给与所述耳机连接的终端设备；

接收所述终端设备返回的多个麦克风各自采集到同一目标音频信号的时间，其中，所述多个麦克风各自采集到同一目标音频信号的时间为所述终端设备根据所述个麦克风各自采集到音频信号获取得到。

10.根据权利要求1所述的方法，其特征在于，基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，包括：

将所述多个采集时间以及所述多个麦克风各自的位置发送给与所述耳机连接的终端设备；

接收所述终端设备返回的发出所述目标音频信号的声源的方位信息，其中，所述方位信息为所述终端设备根据所述多个采集时间以及所述多个麦克风各自的位置得到。

11.根据权利要求1所述的方法，其特征在于，基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息，包括：

所述耳机的处理器基于所述多个采集时间以及所述多个麦克风各自的位置，计算出发出所述目标音频信号的声源的方位信息。

12.根据权利要求1-11任一所述的方法，其特征在于，所述位置信息包括发出所述目标音频信号的声源相对所述耳机的位置，所述触发与所述方位信息对应的提示信息，包括：

触发向目标方向进行移动的提示信息，所述目标方向为与发出所述目标音频信号的声源相对所述耳机的位置的相反的方向。

13.一种触发提示信息的装置，其特征在于，运行于耳机，所述耳机设置有多个麦克风，所述多个麦克风各自的位置不同，所述装置包括：

到达时间获取单元，用于获取所述多个麦克风各自采集到同一目标音频信号的时间，得到多个采集时间；

访问信息获取单元，用于基于所述多个采集时间以及所述多个麦克风各自的位置，获取发出所述目标音频信号的声源的方位信息；

提示单元，用于触发与所述方位信息对应的提示信息。

14.一种耳机，其特征在于，包括多个麦克风、一个或多个处理器以及存储器；

一个或多个程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行，所述一个或多个程序配置用于执行权利要求1-12任一所述的方法。

15.一种存储有处理器可执行的程序代码的计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的程序代码，其中，在所述程序代码运行时执行权利要求1-12任一所述的方法。

Images