CN111586547A - 音频输入模组的检测方法及装置、存储介质 - Google Patents

音频输入模组的检测方法及装置、存储介质 Download PDF

Info

Publication number
CN111586547A
CN111586547A CN202010349063.3A CN202010349063A CN111586547A CN 111586547 A CN111586547 A CN 111586547A CN 202010349063 A CN202010349063 A CN 202010349063A CN 111586547 A CN111586547 A CN 111586547A
Authority
CN
China
Prior art keywords
audio input
signal
input signal
determining
channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010349063.3A
Other languages
English (en)
Other versions
CN111586547B (zh
Inventor
刘金刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Pinecone Electronic Co Ltd
Original Assignee
Beijing Xiaomi Pinecone Electronic Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Pinecone Electronic Co Ltd filed Critical Beijing Xiaomi Pinecone Electronic Co Ltd
Priority to CN202010349063.3A priority Critical patent/CN111586547B/zh
Publication of CN111586547A publication Critical patent/CN111586547A/zh
Priority to US17/026,278 priority patent/US11395079B2/en
Priority to EP20199530.5A priority patent/EP3905244B1/en
Application granted granted Critical
Publication of CN111586547B publication Critical patent/CN111586547B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00—Monitoring arrangements; Testing arrangements
    • H04R29/004—Monitoring arrangements; Testing arrangements for microphones
    • H04R29/005—Microphone arrays
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/06—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being correlation coefficients
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/21—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本公开是关于一种音频输入模组的检测方法及装置、存储介质。该方法包括：获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；根据所述目标信号与所述音频输入信号，确定对比参数值；根据所述对比参数值，确定所述音频输入模组的性能状况。通过本公开的技术方案，通过对比参数值来体现是否能够对音频信号滤波消除音频输出信号，从而确定音频输入模组的性能状态，筛选出异常的输入信号通道，便于进行收音算法的调整，具有较高的准确性和鲁棒性，适用范围广泛。

Description

音频输入模组的检测方法及装置、存储介质
技术领域
本公开涉及电子技术，尤其涉及一种音频输入模组的检测方法及装置、存储介质。
背景技术
语音交互是近年来电子设备逐渐发展的重要人机交互方式之一，如智能麦克风、语音助手等音频输入模组逐渐被广泛使用。一些音频输入模组具有多个麦克风组成的麦克风阵列，能够实现更加准确和清晰的收音效果，通过拾音算法来处理麦克风阵列的各通道接收到的音频信号。但是，音频输入模组会因为受到环境的影响、老化或者其他原因导致的损伤，从而导致拾音算法失效、不能通过语音正常唤醒设备等问题。
发明内容
本公开提供一种音频输入模组的检测方法及装置、存储介质。
根据本公开实施例的第一方面，提供一种音频输入模组的检测方法，该方法包括：
获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
根据所述目标信号与所述音频输入信号，确定对比参数值；
根据所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述根据所述音频输入模组所在的电子设备输出的音频输出信号对所述音频输入信号进行滤波，得到目标信号，包括：
通过滤波去除所述音频输入信号中与所述音频输出信号对应的信号分量，得到所述目标信号。
在一些实施例中，所述根据所述对比参数值，确定所述音频输入模组的性能状况，包括：
若所述对比参数值大于预设参数阈值，则确定所述音频输入信号对应的输入信号通道为正常通道；
若所述对比参数值小于或等于所述预设参数阈值，则确定所述音频输入信号对应的输入信号通道为第一异常通道。
在一些实施例中，所述方法还包括：
如果存在所述第一异常通道，则停用所述第一异常通道。
在一些实施例中，所述对比参数值包括：衰减因子和/或ERLE(回声衰减增益)；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
在一些实施例中，所述方法还包括：
获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
所述根据所述目标信号与所述音频输入信号，确定对比参数值，包括：
在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
在一些实施例中，所述方法还包括：
在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道；
停用所述第二异常通道。
在一些实施例中，所述方法还包括：
根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
所述根据所述对比参数值，确定所述音频输入模组的性能状况包括：
根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况，包括：
在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
在一些实施例中，所述方法还包括：
如果存在所述第三异常通道，则停用所述第三异常通道。
根据本公开实施例的第二方面，提供一种音频输入模组的检测装置，包括：
第一获取模块，用于获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
滤波模块，用于根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
第一确定模块，用于根据所述目标信号与所述音频输入信号，确定对比参数值；
第二确定模块，用于根据所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述滤波模块，具体用于：
通过滤波去除所述音频输入信号中与所述音频输出信号对应的信号分量，得到所述目标信号。
在一些实施例中，所述第二确定模块，包括：
第一确定子模块，若所述对比参数值大于预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为正常通道；
第二确定子模块，若所述对比参数值小于或等于所述预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为第一异常通道。
在一些实施例中，所述装置还包括：
第一停用模块，如果存在所述第一异常通道，则用于停用所述第一异常通道。
在一些实施例中，所述对比参数值包括：衰减因子和/或ERLE；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
在一些实施例中，所述装置还包括：
第二获取模块，用于获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
所述第一确定模块，具体用于：
在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
在一些实施例中，所述装置还包括：
第三确定模块，用于在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道；
第二停用模块，用于停用所述第二异常通道。
在一些实施例中，所述装置还包括：
第四确定模块，用于根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
所述第二确定模块，具体用于：
根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述第二确定模块，包括：
第三确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
第四确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
第五确定子模块，用于根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
在一些实施例中，所述装置还包括：
第三停用模块，如果存在所述第三异常通道，则停用所述第三异常通道。
根据本公开实施例的第三方面，提供一种音频输入模组的检测装置，所述装置至少包括：处理器和用于存储能够在所述处理器上运行的可执行指令的存储器，其中：
处理器用于运行所述可执行指令时，所述可执行指令执行上述任一项音频输入模组的检测方法中的步骤。
根据本公开实施例的第四方面，提供一种非临时性计算机可读存储介质，所述计算机可读存储介质中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现上述任一项音频输入模组的检测方法中的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果：本申请实施例的技术方案，通过在音频信号滤波消除音频输出信号的过程中确定的对比参数值，来确定输入信号通道是否能够正常滤波消除音频输出信号，从而确定音频输入模组的性能状态。通过该方法筛选出异常的输入信号通道，便于调整音频输入模组对于各输入信号通道的数据处理算法，具有较高的准确性和鲁棒性，适用范围广泛。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图一；
图2是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图二；
图3是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图三；
图4是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图四；
图5是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图五；
图6是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图六；
图7是根据一示例性实施例示出的一种音频输入模组的检测装置的结构框图；
图8是根据一示例性实施例示出的电子设备的实体结构框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种音频输入模组的检测方法的流程图，如图1所示，该方法可以应用于具有音频输入模组与音频输出模组的电子设备中，包括以下步骤：
步骤S101、获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
步骤S102、根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
步骤S103、根据所述目标信号与所述音频输入信号，确定对比参数值；
步骤S104、根据所述对比参数值，确定所述音频输入模组的性能状况。
在本公开实施例中的音频输入模组是指：具有多个接收音频信号的输入信号通道的收音装置，例如，麦克风。每个输入信号通道都能够独立地接收周围环境内的各种频率不同，强度不同的音频信号，并将音频输入信号转换为电信号。例如，麦克风阵列，由一定数目的声学传感器组成，能够对声场的空间特性进行采样并进行处理。通过拾音算法来处理音频输入模组的各个输入信号通道接收到的音频信号，在不同方位的输入信号通道同时采集音频信号时，则能够获得声音的空间信息，可以用于声源的定位等场景。
音频输入模组可以安装在电子设备上，电子设备同时具有音频输出模组，例如：智能音箱、手机以及智能电视等各种多媒体设备。在音频输入模组接收外界音频信号的输入的同时，电子设备的预设音频输出模组还可以发出声音。例如，在手机通话过程中，如果打开免提功能，则手机在接收用户发出的声音外，还同时将对方传输过来的声音播放出来；又如，智能音箱在播放音乐的同时，可以通过音频输入模组接收用户的语音指令。
基于上述电子设备使用场景，会遇到回声的问题。也就是说，音频输入模组在接收外界输入的音频信号如语音指令的同时，还会同时接收到电子设备自身播放的声音，即回声。但是由于电子设备自身可以根据播放的声音来估计音频输入模组接收到的回声，因此，电子设备可以采用滤波的方式去除回声的部分，只保留外界输入的音频信号。
在本公开实施例中，利用电子设备滤波去除回声的过程，来判断音频输入模组的性能状况。如果音频输入模组存在异常的通道，则该通道无法正常接收音频信号，那么也无法正常接收电子设备自身的音频输出信号。因此，对该输入信号通道进行滤波时，会无法正常滤除回声部分，也就导致滤波后的目标信号与音频输入信号之间并不存在较大的差异。因此，可以根据用于表示目标信号与音频输入信号之间差异的对比参数值，来确定对应的输入信号通道是否存在异常，进而确定音频输入模组的性能状况。
上述对比参数值可以通过目标信号与音频输入信号频率的比值、差值或者平方差等等来表示。根据对于音频输入模组性能的需求，还可以对上述对比参数值设置对应的阈值范围。如果对比参数值位于阈值范围之内，则认为对应的输入信号通道能够正常接收音频信号，如果对比参数值位于阈值范围以外，则认为对应的输入信号通道为异常通道。
在确认音频输入模组的各输入信号通道是否存在异常之后，可以适应性地调整拾音算法，将正常的输入信号通道作为工作通道，关闭对应的异常通道，从而提升拾音算法的准确性，进而提升音频输入模组整体的鲁棒性。
在一些实施例中，所述根据所述音频输入模组所在的电子设备输出的音频输出信号对所述音频输入信号进行滤波，得到目标信号，包括：
通过滤波去除音频输入信号中与音频输出信号对应的信号分量，得到所述目标信号。
由于电子设备的预设音频输出信号在不同的时间可能随时变化，对于音频输入模组来说，会实时接收到音频输出信号，因此，需要在电子设备音频输出信号的同时，实时对音频输入信号进行滤波。音频输入信号中包含外界的输入信号，例如用户的语音指令；还包含有音频输出信号的回声部分。
上述回声部分为音频输入信号中对应的信号分量，需要通过滤波来去除。回声部分可能包含两种类型，一种是从电子设备发出音频输出信号不经过任何反射直接进入音频输入模组，这一信号分量几乎与音频输出信号发出的时间相同步；另一种是电子设备发出的音频输出信号经过外界环境的反射，回到音频输入模组，这一信号分量则可能与音频输出信号的发出时间存在一定的时间差。
因此，在本申请实施例中，还可考虑这两种情况下音频输出信号对应的信号分量，从而进行更准确的滤波，得到目标信号。
在一些实施例中，所述根据所述对比参数值，确定所述音频输入模组的性能状况，包括：
若所述对比参数值大于预设参数阈值，则确定所述音频输入信号对应的输入信号通道为正常通道；
若所述对比参数值小于或等于所述预设参数阈值，则确定所述音频输入信号对应的输入信号通道为第一异常通道。
在本公开实施例中，根据对音频输入模组的性能需求，可以预设对比参数值的阈值范围。这里，将预设参数阈值作为判定输入信号通道是否存在异常的标准。如果对比参数值大于预设参数阈值，则说明滤波后得到的目标信号与滤波前的音频输入信号的差异较大，也就是滤除了音频输出信号对应的回声信号分量；而如果对比参数值小于或等于预设参数阈值，则说明目标信号与音频输入信号的差异较小，没有成功滤除音频输出信号对应的回声信号分量，也就是可能该输入信号通道未存在异常因而未能接收到输出音频输入模组对应的回声信号分量，或者接收到的回声信号分量较弱。
如此，就能够通过滤波得到的对比参数值来筛查音频输入模组的各输入信号通道是否存在异常，进而实时调整拾音算法。
在一些实施例中，所述方法还包括：如果存在所述第一异常通道，则停用所述第一异常通道。
这里，调整拾音算法的方式可以是至少停用包括第一异常通道的若干个输入信号通道。这里的停用可以是从硬件上关闭这些通道，断开信号通路；也可以是从算法上停用这些通道的信号。此外，可以仅停用停用第一异常通道，而维持其他通道的使用；也可以停用第一异常通道的同时，停用若干个其他通道。
例如，共有12个麦克风通道，其中1个通道为第一异常通道，那么可以将拾音算法调整为9通道的算法，停用包含第一异常通道的三个位置间隔相同的通道，从而保持拾音效果的同时，便于算法的处理。在实际应用中，可以根据实际的输入信号通道的数量和分布来确定停用哪些通道。在一些实施例中，所述对比参数值包括：衰减因子和/或ERLE；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
这里，对比参数值为通过滤波后得到的目标信号与输入信号通道接收到的原始的音频输入信号经过运算得到的，能够体现滤波前后信号的差异，进而体现滤波效果。如果滤波效果较差，则可能是由于输入信号通道存在异常。
在本公开实施例中，可以采用上述衰减因子或者ERLE来表示对比参数值。衰减银子包括音频输入信号r(n)与目标信号e(n)的比值。
如果音频输入信号r(n)与目标信号e(n)的比值远大于1，则说明目标信号e(n)与音频输入信号r(n)存在明显差异，滤波的过程有效去除了音频输入信号中的回声信号分量。而如果音频输入信号r(n)与目标信号e(n)的比值较小，例如比值为1左右，说明音频输入信号r(n)与目标信号e(n)之间差异较小，滤波的过程没有对音频输入信号产生作用，因此，可以确定对应的输入信号通道存在异常。
ERLE则包括音频输入信号r(n)与目标信号e(n)平方比的对数值，由公式(1)表示：
Figure BDA0002471201530000081
其中，E表示一帧信号或者一段信号的期望值，n表示第几帧信号。采用求对数的方式，可以将信数据转换为分贝值(db)，便于数据的运算和处理。与衰减因子类似，这里ERLE也可以体现信号滤波前后的差异，并且，ERLE的值越大，则表示滤波效果越好，值越小，则表示滤波效果越差。因此，ERLE小于预设阈值时，则可以确定对应的输入信号通道存在异常。
在一些实施例中，如图2所示，所述方法还包括：
步骤S201、获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
上述步骤S103中，所述根据所述目标信号与所述音频输入信号，确定对比参数值，包括：
步骤S202、在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
在本公开实施例中，在电子设备存在音频输出信号的同时，对音频输入信号进行滤波去除回声信号分量，在此过程中，通过监控滤波的效果来得到输入信号通道的性能好坏。也就是说，如果电子设备本身并未音频输出信号，则无法通过上述方法进行检测。
因此，这里可以先通过音频输入信号的信号能量值，来确定对应的输入信号通道是否接收到了音频信号，如果信号能量值过低，即小于预设的第一能量阈值，那么可能存在两种原因。第一，电子设备本身未音频输出信号；第二，输入信号通道存在异常，无法接收音频信号。
如果是第一种情况，则通过本申请实施例的上述方法也无法进行检测，如果是第二种情况，则通过本申请实施例的方法进行检测后会得到输入信号通道异常的结果，因此不需要进行检测。
因此，在本申请实施例中，可以仅在信号能量值大于预设的第一能量阈值时进行检测。这样，如果输入信号通道存在异常，无法正常接收音频信号，但是可能存在噪声过大等情况时，则可以通过本申请实施例中监控滤波得到的对比参数值的方法准确检测输入信号通道是否正常。这样，不仅可以提升检测的准确性，还能够提升检测效率，减少不必要的检测。
在一些实施例中，所述方法还包括：
步骤S203、在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道，并停用所述第二异常通道。
在本公开实施例中，如果上述通过能量检测的方法确定存在输入信号通道接收到的音频输入信号能量较低，而同时，电子设备自身确定存在音频输出信号，也就是说，电子设备自身确定音频输出信号的信号能量值大于第二能量阈值，而音频输入信号的能量小于或等于第一能量阈值，则说明该输入信号通道未能正常接收音频输出信号。因此，这种情况下，也可以确定音频输入模组的输入信号通道存在异常。
这里，第一能量阈值为音频输入信号的信号能量值的阈值，第二能量阈值为音频输出信号的信号能量阈值。由于音频输出信号输出后会传输至音频输入模组，可能存在一定的衰减，因此，第一能量阈值可以略小于第二能量阈值。此外，还可以根据音频输出信号的信号能量值来动态设定第一能量阈值。例如：第二能量阈值为0，即只要存在音频输出信号，就满足音频输出信号能量大于第二能量阈值。此时，如果音频输出信号的信号能量值为100，则可以对应确定第一能量阈值为80；而当音频输出信号的信号能量降低至10的时候，则对应调整第一能量阈值为8。
在另一实施例中，在所述音频输出信号的信号能量值小于或等于预设的第二能量阈值时，暂停检测。
如果电子设备自身确定音频输出信号的信号能量值较小，或者不存在任何音频输出信号，则无法通过滤波得到的对比参数值来确定输入信号通道是否存在异常。因此，可以暂停检测，在电子设备自身开始音频输出信号时，再重新启动检测。
在一些实施例中，如图3所示，所述方法还包括：
步骤S301、根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
在上述步骤S104中，所述根据所述对比参数值，确定所述音频输入模组的性能状况包括：
步骤S302、根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
在本公开实施例中，通过滤波得到的对比参数值来确定输入信号通道是否存在异常的方法具有较高的准确性，但是可能需要较长的时间，或者需要在电子设备存在音频输出信号的时段才能够进行检测。
因此，这里结合音频输入信号间的相关性检测，来提升电子设备对于音频输入模组检测的完善性。例如，可以在电子设备开机时进行相关性检测，快速得到检测结果；或者在电子设备运行过程中，每间隔一段时间采用相关性检测来筛查异常的输入信号通道。而在电子设备存在音频输出信号时，通过上述对比参数值来进一步确定各输入信号通道的性能。
在本公开实施例中，相关性检测需要至少两个输入信号通道接收到的音频输入信号，通过计算至少两组音频输入信号两两之间的相关性，来确定各输入信号通道是否正常。由于音频输入模组的各输入信号通道处于同样的环境中，因此，正常的输入信号通道能够接受到基本相同音频输入信号；而不同的输入信号通道之间的位置存在差异，也就是说，接收到的音频输入信号之间也应当存在细微的时间差或者强度差。
正常的各输入信号通道之间接收到的音频输入信号具有较高的相关程度值，而又并非完全相同。因此，通过相关程度值是否满足相关性阈值的范围，就可以快速确定各输入信号通道是否存在异常。
在一些实施例中，如图4所示，上述步骤S302中，所述根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况，包括：
步骤S401、在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
步骤S402、在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
步骤S403、根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
如果采用相关性检测的方式，确定至少两个音频输入信号两两之间的相关程度值位于上述预设相关性阈值的范围以外，则说明对应的信号通道无法正常接收音频信号，因此可确定为异常通道。此外，如果两个音频输入信号完全相同，则也可能是由于两个信号通道的接线短路等原因造成的异常，也就是强相关。因此，如果相关程度值过大，例如，相关程度值为1(相关程度值的取值范围在0到1之间)，则也可以确定这两个输入信号通道为异常通道。
而如果通过上述相关性检测的方式，得到输入信号通道为正常的结果，那么可以通过参数对比值进一步确定输入信号通道的性能状况。
通过上述方式检测各输入信号通道的性能状况后，可以进一步确定音频输入模组整体的性能状况，并调整拾音算法。
在一些实施例中，所述方法还包括：
如果存在所述第三异常通道，则停用所述第三异常通道。
如果通过上述相关性的检测，确定输入信号通道为第三异常通道，则可以通过停用第三异常通道的方式，来调整拾音算法。需要说明的是，为了保证音频输入模组拾音的效果，在停用第三异常通道的同时，还可以停用若干个与第三异常通道对应位置的正常通道，从而便于拾音算法对音频输入信号的处理。例如，共有12个麦克风通道，其中1个通道为第三异常通道，那么可以将拾音算法调整为9通道的算法，停用包含第三异常通道的三个位置间隔相同的通道，从而保持拾音效果的同时，便于算法的处理。
如果后续在电子设备的工作过程中，通过上述实施例中的方法检测确定还存在第一异常通道，或者第二异常通道，那么还可以在当前的算法基础上，进一步停用对应的通道。例如，上述示例中，共有12个麦克风通道，由于存在第三异常通道仅启用了9个通道。而这9个通道中存在1个第一异常通道，那么可将包含该第一异常通道的3个通道停用，调整为6通道算法。在实际应用中，可以根据实际的麦克风通道数目以及分布位置来确定如何调整拾音算法，停用包含第一异常通道在内的一些麦克风通道。
在一些实施例中，所述根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值，包括：
通过第一检测模式，在预定时间内确定所述至少两个音频输入信号之间的相关程度值；
和/或，
通过第二检测模式，根据所述至少两个输入信号通道中的多段音频输入信号，分别确定子相关程度值；根据所述子相关程度值的加权和，确定所述相关程度值。
在本公开实施例中，相关性检测可以包括上述两种检测模式，第一检测模式为快检测，可以用于在音频输入模组上电的一段时间内。也就是在音频输入模组一上电就可以进行检测，并在预定时间内快速得到检测结果，确定初始的拾音算法。
第二检测模式为慢检测，可以在音频输入模组开启的状态下，每隔一段时间进行一次检测，并且每次检测可以通过采集多段音频输入信号，即多个时间段的音频输入信号，并分别进行相关性检测，通过加权的方式得到最终的相关程度值。这种方法相对于快检测可以得到更加准确的结果，但是需要较长的检测时间，因此在音频输入模组开启的状态下，可以作为调整音频处理模组的拾音算法的依据。
上述两种相关性检测方法都是基于不同输入信号通道之间的相关性的，而在设备外界环境较为复杂的情况下，扔会存在误检测的情况。因此，本公开实施例中，在音频输入模组开启的状态下，同时，音频输入模组自身存在音频输出信号时，采用信号上述对比参数值来分别对各输入信号通道进行检测，提升检测的准确性，使得音频输入模组的性能具有更强的鲁棒性。
在一些实施例中，所述根据所述相关程度值，确定所述至少两个音频输入信号对应的输入信号通道是否为第三异常通道，包括：
如果采用所述第一检测模式，则根据所述相关程度值是否属于第一相关性阈值范围，确定所述至少两个音频输入信号对应的输入信号通道是否为第三异常通道；
如果采用所述第二检测模式，则根据所述相关程度值是否属于第二相关性阈值范围，确定所述至少两个音频输入信号对应的输入信号通道是否为第三异常通道；
其中，所述第二相关性阈值范围位于所述第一相关性阈值范围内。
这里，第一检测模式即上述快检测的第一相关性阈值范围比第二检测模式即上述慢检测的第二相关性阈值范围大。由于快检测的检测速度较快，且在音频输入模组一上电就进行检测，因此准确性较低，仅用于快速筛选出严重损坏的输入信号通道，因此，可以设定较大的第一相关性阈值范围。
而对于第二检测模式需要得到更加准确的检测结果，且不受限与检测的时间长短，因此可以设定较小的第二相关性阈值范围。
通过本公开实施例的上述技术方案，结合相关性检测与参考音频输出信号的检测方式，能够提升音频输入模组的检测的准确性和时效性，进而提升音频输入模组的鲁棒性。
为了便于理解本公开实施例的技术方案，本公开还提供以下示例：
为了提升麦克风阵列的鲁棒性，这里提出一种麦克风的检测方法。在拾音后检测麦克风阵列中的每个麦克风的状态，将异常的麦克风剔除。本方法可以应用于具有多麦克风拾音的设备中，通过设定的检测判断机制来查找异常的麦克风，然后对无异常的麦克风采用降级的麦克风阵列算法。例如，六麦克风设备，发现存在问题的麦克风后，可以采用四麦克风算法或两麦克风算法来使用。这里的检测判断机制可以采用麦克风间的相关性等参数，并在回声场景中查看声音信号的收敛状况，从而判断麦克风的状态。
一般对于麦克风检测采用如图5所示的方法，包括：
步骤S1、连接待测麦克风以及参考麦克风于处理单元；
步骤S2、接收扬声器的声波，待测麦克风产生第一特征点分布图，参考麦克风产生第二特征点分布图；
步骤S3、比较第一特征点分布图与第二特征点分布图，在一指定频率量化数值区间内的特征点数量差异，从而判定待测麦克风的状态。
上述特征点的分布图是通过对声音信号的波形进行采样得到的，根据特征点的分布图可以粗略地观测采集到的声波信号。对比待测麦克风与参考麦克风分别产生的特征点分布图，也就是观测两个麦克风接收到的信号波形是否存在较大的差异，如果存在较大的差异，则认为待测麦克风存在异常。
上述波形图可以是声音强度随时间的变化关系，也可以是特定频率下的信号能量值随时间的变化关系等。因此，上述特征点至少包括：在特定频率的信号能力值。
对于上述单频点对比参考麦克风进行检测的方法，只能在出厂时进行相关的检测，所以，在用户使用过程中出现问题的时候，无法及时的修正调整算法；并且仅对单个频点进行判断，不能确保所有频带都没有问题；此外，这种方式只能分析数值特征点之间的差异，不能准确的反馈麦克风的状态。
为了能够使用户在电子设备一上电就能够快速获知麦克风的状态，可以在上电时进行一次快速检测。但是由于环境的各种因素容易影响麦克风的短时特性，所以，这里提出一种快慢检测结合的方式。在电子设备刚启动时，在规定的时间内进行检查并得到一个快速检测结果。在使用过程中，采用慢检测的方式来进行检查。慢检测主要是为了能够得到一个准确的检测结果及调整方案，从而提升麦克风状态的鲁棒性。
在慢检测过程中，计算每个信号通道采集到信号的能量，如果各信号通道的能量的最小值大于设定的阈值，则进入相关性的检测，为了能够得到鲁棒性更强的检测结果，可以采用多次检测，来获得最终的检测结果。例如，每次慢检测时间设置为2秒，设置当且仅当麦克风的三次慢检测结果一致的时候，才确定检测结果，并根据检测结果调整麦克风状态，或者调整拾音算法。
此外，由于相关性检测限定于多个信号通道之间的关系，因此可能仍然存在误检测的情况。因此，这里还通过参考音来进行检测。参考音即上述实施例中，电子设备自身的音频信号输出。基于参考音，通过滤波去除音频信号输出对应的回声信号分量，可以得到目标信号。而如果信号通道存在异常，则无法正常滤波，因此可以根据该原理对各信号通道进行检测。
如图6所示，对于快检测110，是为了能够在设备上电后就能够及时得到一个结果，但是，由于此时数据较少，时间较短，所以得到的数据常常是不可靠的。因此，这里仅检测具有严重问题的麦克风状态，设定较高的阈值。
1)能量检测，如果一通道在检测时能量小于设定的阈值，则表明该通道没有接收到有效的语音信号。如图6中，进行低能量信号检测111，将信号能量值小于阈值的信号通道确定出来。
2)相关性检测一，检测每个通道信号两两间的相关性，只要出现一对麦克风信号的相关性大于阈值，则表明此时这一对麦克风正常。
3)相关性检测二，检测每个通道信号两两间的相关性，将每个麦克风的相关性求和然后与阈值进行比较，若高于阈值，则表明麦克风正常。
上述相关性检测包括图6中的强相关噪声检测112，与低相关性信号检测113。强相关噪声检测112，也就是将相关性高于阈值范围的信号通道确定出来。例如，两个信号通道接收到的信号几乎一致时，则可能发生了短路。低相关性信号检测113则是将与其他信号通道相关性较差的信号通道筛选出来，这些信号通道可能发生了异常，接收信号失真。
完成上述快检测后，得到了检测结果，然后可以根据检测结果重置麦克风状态100，调用合适的算法，从而使麦克风能够正常使用，尽可能少地减少损坏通道对麦克风整体拾音效果的干扰。
对于慢检测120，为了尽可能减小误判，慢检测需要提供稳定并准确的判断。并且可以调整慢检测的次数，如3次、5次等，也可以调整慢检测的帧长，如150帧、200帧、300帧等，这里的一帧代表一小段音频信号。还可以调整快检测的时间，例如，在1秒或2秒之内确定结果等。
1)能量检测，区别于快检测，这里通过能量检测对麦克风的信号通道进行筛选，只有在各个信号通道能量大于阈值时，才进入相关性检测。如图6中的能量阈值判断121，将信号能量大于阈值的信号通道筛选出来，并继续计算相关性122。
2)相关性检测一，检测每个通道信号两两间的相关性，只要出现一对麦克风信号的相关性大于阈值，则表明此时这一对麦克风均正常，此时设定的阈值要低于快检测中设定的阈值。
3)相关性检测二，检测每个通道信号两两间的相关性，将每个麦克风的相关性求和然后与阈值进行比较，若高于阈值，则认为麦克风正常，这里与快检测的检测方法类似，但可以设定更低的阈值。
通过上述步骤计算相关性后，确定正常信号通道123，然后判定多次检测结果为一致时，则可以基于检测结果对麦克风状态进行重置100，调用合适的算法。
在电子设备还存在音频信号输出时，则才用上述参考音检测的方法。
对于参考音检测130，包括以下两个方面：
1)衰减因子131计算，用于衡量滤波算法是否稳定收敛，也就是是否能够正常滤波。在麦克风信号通道存在异常时，衰减因子较小，因此可以作为判断依据。
2)ERLE132计算，同样用于衡量滤波算法是否稳定收敛，也就是是否能够正常滤波。同样，如果麦克风信号通道存在异常，则ERLE也会较小，因此也可以作为判断依据。
3)检测逻辑处理，在本公开实施例中，可以同时确定上述衰减因子与ERLE，如果两者都小于预定阈值133，则认为麦克风的信号通道存在异常；当然，也可以选择上述衰减因子或者ERLE中的任一参数作为依据，来确定信号通道是否存在异常。
上述方法中，引入了能量判决与相关性判决以及参考音检测的多重联合判决机制来保证检测系统的鲁棒性。从而能够有效降低误检测率，减少没有损坏的设备的用户体验；由于快检测时间较快，因此能够及时发现损坏严重的设备；同时，上述方法具有较强的鲁棒性，保证了检测结果的准确度。
图7是根据一示例性实施例示出的一种音频输入模组的检测装置的结构框图。参照图7，该装置700包括：第一获取模块701、滤波模块702、第一确定模块703和第二确定模块704，其中：
第一获取模块701，用于获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
滤波模块702，用于根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
第一确定模块703，用于根据所述目标信号与所述音频输入信号，确定对比参数值；
第二确定模块704，用于根据所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述滤波模块，具体用于：
通过滤波去除所述音频输入信号中与所述音频输出信号对应的信号分量，得到所述目标信号。
在一些实施例中，所述第二确定模块，包括：
第一确定子模块，若所述对比参数值大于预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为正常通道；
第二确定子模块，若所述对比参数值小于或等于所述预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为第一异常通道。
在一些实施例中，所述装置还包括：
第一停用模块，如果存在所述第一异常通道，则停用所述第一异常通道。
在一些实施例中，所述对比参数值包括：衰减因子和/或ERLE；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
在一些实施例中，所述装置还包括：
第二获取模块，用于获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
所述第一确定模块，具体用于：
在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
在一些实施例中，所述装置还包括：
第三确定模块，用于在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道；
第二停用模块，用于停用所述第二异常通道。
在一些实施例中，所述装置还包括：
第四确定模块，用于根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
所述第二确定模块，具体用于：
根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
在一些实施例中，所述第二确定模块，包括：
第三确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
第四确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
第五确定子模块，用于根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
在一些实施例中，所述装置还包括：
第三停用模块，如果存在所述第三异常通道，则停用所述第三异常通道。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
图8是根据一示例性实施例示出的一种电子设备800的实体结构框图。例如，电子设备800可以是移动电话、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。
参照图8，电子设备800可以包括以下一个或多个组件：处理组件801，存储器802，电源组件803，多媒体组件804，音频组件805，输入/输出(I/O)接口806，传感器组件807，以及通信组件808。
处理组件801通常控制电子设备800的整体操作，诸如与显示、电话呼叫、数据通信、相机操作和记录操作相关联的操作。处理组件801可以包括一个或多个处理器810来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件801还可以包括一个或多个模块，便于处理组件801和其他组件之间的交互。例如，处理组件801可以包括多媒体模块，以方便多媒体组件804和处理组件801之间的交互。
存储器810被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令、联系人数据、电话簿数据、消息、图片、视频等。存储器802可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器、磁盘或光盘。
电源组件803为电子设备800的各种组件提供电力。电源组件803可以包括：电源管理系统，一个或多个电源，及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件804包括在所述电子设备800和用户之间提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件804包括一个前置摄像头和/或后置摄像头。当电子设备800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和/或后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件805被配置为输出和/或输入音频信号。例如，音频组件805包括一个麦克风(MIC)，当电子设备800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器810或经由通信组件808发送。在一些实施例中，音频组件805还包括一个扬声器，用于输出音频信号。
I/O接口806为处理组件801和外围接口模块之间提供接口，上述外围接口模块可以是键盘、点击轮、按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件807包括一个或多个传感器，用于为电子设备800提供各个方面的状态评估。例如，传感器组件807可以检测到电子设备800的打开/关闭状态、组件的相对定位，例如所述组件为电子设备800的显示器和小键盘，传感器组件807还可以检测电子设备800或电子设备800的一个组件的位置改变，用户与电子设备800接触的存在或不存在，电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件807可以包括接近传感器，被配置为在没有任何的物理接触时检测附近物体的存在。传感器组件807还可以包括光感传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件807还可以包括加速度传感器、陀螺仪传感器、磁传感器、压力传感器或温度传感器。
通信组件808被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络，如WiFi、2G或3G，或它们的组合。在一个示例性实施例中，通信组件808经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件808还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术、红外数据协会(IrDA)技术、超宽带(UWB)技术、蓝牙(BT)技术或其他技术来实现。
在示例性实施例中，电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器802，上述指令可由电子设备800的处理器810执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行上述实施例中提供的任一种方法。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。
应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (22)

1.一种音频输入模组的检测方法，其特征在于，包括：
获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
根据所述目标信号与所述音频输入信号，确定对比参数值；
根据所述对比参数值，确定所述音频输入模组的性能状况。
2.根据权利要求1所述的方法，其特征在于，所述根据所述音频输入模组所在的电子设备输出的音频输出信号对所述音频输入信号进行滤波，得到目标信号，包括：
通过滤波去除所述音频输入信号中与所述音频输出信号对应的信号分量，得到所述目标信号。
3.根据权利要求1所述的方法，其特征在于，所述根据所述对比参数值，确定所述音频输入模组的性能状况，包括：
若所述对比参数值大于预设参数阈值，则确定所述音频输入信号对应的输入信号通道为正常通道；
若所述对比参数值小于或等于所述预设参数阈值，则确定所述音频输入信号对应的输入信号通道为第一异常通道。
4.根据权利要求3所述的方法，其特征在于，所述方法还包括：
如果存在所述第一异常通道，则停用所述第一异常通道。
5.根据权利要求1所述的方法，其特征在于，所述对比参数值包括：衰减因子和/或回声衰减增益ERLE；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
6.根据权利要求1至5任一所述的方法，其特征在于，所述方法还包括：
获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
所述根据所述目标信号与所述音频输入信号，确定对比参数值，包括：
在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道；
停用所述第二异常通道。
8.根据权利要求1至5任一所述的方法，其特征在于，所述方法还包括：
根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
所述根据所述对比参数值，确定所述音频输入模组的性能状况包括：
根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
9.根据权利要求7所述的方法，其特征在于，所述根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况，包括：
在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
10.根据权利要求9所述的方法，其特征在于，所述方法还包括：
如果存在所述第三异常通道，则停用所述第三异常通道。
11.一种音频输入模组的检测装置，其特征在于，包括：
第一获取模块，用于获取所述音频输入模组的至少两个输入信号通道接收到的音频输入信号；
滤波模块，用于根据所述音频输入模组所在的电子设备的预设音频输出信号，对所述音频输入信号进行滤波，得到目标信号；
第一确定模块，用于根据所述目标信号与所述音频输入信号，确定对比参数值；
第二确定模块，用于根据所述对比参数值，确定所述音频输入模组的性能状况。
12.根据权利要求11所述的装置，其特征在于，所述滤波模块，具体用于：
通过滤波去除所述音频输入信号中与所述音频输出信号对应的信号分量，得到所述目标信号。
13.根据权利要求11所述的装置，其特征在于，所述第二确定模块，包括：
第一确定子模块，若所述对比参数值大于预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为正常通道；
第二确定子模块，若所述对比参数值小于或等于所述预设参数阈值，则用于确定所述音频输入信号对应的输入信号通道为第一异常通道。
14.根据权利要求13所述的装置，其特征在于，所述装置还包括：
第一停用模块，如果存在所述第一异常通道，则用于停用所述第一异常通道。
15.根据权利要求11所述的装置，其特征在于，所述对比参数值包括：衰减因子和/或ERLE；
所述衰减因子包括：所述音频输入信号与所述目标信号的比值；
所述ERLE包括：所述音频输入信号与所述目标信号平方比的对数值。
16.根据权利要求11至15任一所述的装置，其特征在于，所述装置还包括：
第二获取模块，用于获取所述至少两个输入信号通道接收到的音频输入信号的信号能量值；
所述第一确定模块，具体用于：
在音频输入信号的所述信号能量值大于预设的第一能量阈值时，根据所述目标信号与所述音频输入信号，确定所述对比参数值。
17.根据权利要求16所述的装置，其特征在于，所述装置还包括：
第三确定模块，用于在所述音频输出信号的信号能量值大于预设的第二能量阈值，且所述音频输入信号的所述信号能量值小于或等于所述第一能量阈值时，确定所述音频输入信号对应的所述输入信号通道为第二异常通道；
第二停用模块，用于停用所述第二异常通道。
18.根据权利要求11至15任一所述的装置，其特征在于，所述装置还包括：
第四确定模块，用于根据至少两个所述音频输入信号间的相关性，确定至少两个所述音频输入信号之间的相关程度值；
所述第二确定模块，具体用于：
根据所述相关程度值和所述对比参数值，确定所述音频输入模组的性能状况。
19.根据权利要求18所述的装置，其特征在于，所述第二确定模块，包括：
第三确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以外时，确定对应的所述输入信号通道为第三异常通道；
第四确定子模块，用于在所述至少两个音频输入信号的所述相关程度值在预设相关性阈值的范围以内时，根据所述对比参数值确定所述输入信号通道的性能状况；
第五确定子模块，用于根据所述音频输入模组的各输入信号通道的性能状况，确定所述音频输入模组的性能状况。
20.根据权利要求19所述的装置，其特征在于，所述装置还包括：
第三停用模块，如果存在所述第三异常通道，则停用所述第三异常通道。
21.一种音频输入模组的检测装置，其特征在于，所述装置至少包括：处理器和用于存储能够在所述处理器上运行的可执行指令的存储器，其中：
处理器用于运行所述可执行指令时，所述可执行指令执行上述权利要求1至10任一项提供的音频输入模组的检测方法中的步骤。
22.一种非临时性计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机可执行指令，该计算机可执行指令被处理器执行时实现上述权利要求1至10任一项提供的音频输入模组的检测方法中的步骤。
CN202010349063.3A 2020-04-28 2020-04-28 音频输入模组的检测方法及装置、存储介质 Active CN111586547B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010349063.3A CN111586547B (zh) 2020-04-28 2020-04-28 音频输入模组的检测方法及装置、存储介质
US17/026,278 US11395079B2 (en) 2020-04-28 2020-09-20 Method and device for detecting audio input module, and storage medium
EP20199530.5A EP3905244B1 (en) 2020-04-28 2020-10-01 Method and device for detecting audio input module, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010349063.3A CN111586547B (zh) 2020-04-28 2020-04-28 音频输入模组的检测方法及装置、存储介质

Publications (2)

Publication Number Publication Date
CN111586547A true CN111586547A (zh) 2020-08-25
CN111586547B CN111586547B (zh) 2022-05-06

Family

ID=72127593

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010349063.3A Active CN111586547B (zh) 2020-04-28 2020-04-28 音频输入模组的检测方法及装置、存储介质

Country Status (3)

Country Link
US (1) US11395079B2 (zh)
EP (1) EP3905244B1 (zh)
CN (1) CN111586547B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2781476C1 (ru) * 2021-12-02 2022-10-12 Общество С Ограниченной Ответственностью "Яндекс" Способ тестирования микрофонов и реализующая его акустическая система

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114302309B (zh) * 2021-12-16 2024-06-25 合肥联宝信息技术有限公司 一种音频采集器的检测方法及装置
CN116095254B (zh) * 2022-05-30 2023-10-20 荣耀终端有限公司 音频处理方法和装置

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8345860B1 (en) * 2008-05-09 2013-01-01 Hellosoft India PVT. Ltd Method and system for detection of onset of near-end signal in an echo cancellation system
CN104885438A (zh) * 2012-10-31 2015-09-02 思杰系统有限公司 监视声学回声消除的性能的系统和方法
CN105554202A (zh) * 2015-09-28 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种麦克风的控制方法和装置
US20160219386A1 (en) * 2012-06-08 2016-07-28 Apple Inc. Systems and methods for determining the condition of multiple microphones
CN105979053A (zh) * 2016-04-18 2016-09-28 广东欧珀移动通信有限公司 移动终端中麦克风的检测方法、装置以及移动终端
CN108562839A (zh) * 2018-03-28 2018-09-21 鄂尔多斯市源盛光电有限责任公司 一种测试电路及其测试方法、测试系统
CN108932949A (zh) * 2018-09-05 2018-12-04 科大讯飞股份有限公司 一种参考信号获取方法及装置
CN109005272A (zh) * 2018-07-24 2018-12-14 Oppo（重庆）智能科技有限公司 语音拾取方法及相关产品
CN109286730A (zh) * 2017-07-20 2019-01-29 阿里巴巴集团控股有限公司 一种回声检测的方法、装置及系统
CN110677780A (zh) * 2019-09-26 2020-01-10 北京小米移动软件有限公司 音频输入模组的检测方法及装置、存储介质
CN110691314A (zh) * 2019-10-22 2020-01-14 苏州思必驰信息科技有限公司 线性麦克风阵列性能测试方法及夹具
CN111031463A (zh) * 2019-11-20 2020-04-17 福建升腾资讯有限公司 麦克风阵列性能评测方法、装置、设备和介质

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6687373B1 (en) * 1999-08-24 2004-02-03 Nortel Networks Limited Heusristics for optimum beta factor and filter order determination in echo canceler systems
WO2001059766A1 (en) * 2000-02-11 2001-08-16 Comsat Corporation Background noise reduction in sinusoidal based speech coding systems
JP4588191B2 (ja) * 2000-10-27 2010-11-24 パナソニック株式会社 エコーキャンセラ装置及びエコーキャンセル方法
US8379876B2 (en) * 2008-05-27 2013-02-19 Fortemedia, Inc Audio device utilizing a defect detection method on a microphone array
JP2014194437A (ja) * 2011-06-24 2014-10-09 Nec Corp 音声処理装置、音声処理方法および音声処理プログラム
WO2015041549A1 (en) * 2013-09-17 2015-03-26 Intel Corporation Adaptive phase difference based noise reduction for automatic speech recognition (asr)
JP6620675B2 (ja) * 2016-05-27 2019-12-18 パナソニックＩｐマネジメント株式会社 音声処理システム、音声処理装置及び音声処理方法
US10553222B2 (en) * 2017-03-09 2020-02-04 Qualcomm Incorporated Inter-channel bandwidth extension spectral mapping and adjustment
US11395065B2 (en) * 2019-01-07 2022-07-19 Kikago Limited Audio device, audio system, and audio processing method
US11069364B1 (en) * 2019-09-26 2021-07-20 Amazon Technologies, Inc. Device arbitration using acoustic characteristics
US11064294B1 (en) * 2020-01-10 2021-07-13 Synaptics Incorporated Multiple-source tracking and voice activity detections for planar microphone arrays

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8345860B1 (en) * 2008-05-09 2013-01-01 Hellosoft India PVT. Ltd Method and system for detection of onset of near-end signal in an echo cancellation system
US20160219386A1 (en) * 2012-06-08 2016-07-28 Apple Inc. Systems and methods for determining the condition of multiple microphones
CN104885438A (zh) * 2012-10-31 2015-09-02 思杰系统有限公司 监视声学回声消除的性能的系统和方法
CN105554202A (zh) * 2015-09-28 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种麦克风的控制方法和装置
CN105979053A (zh) * 2016-04-18 2016-09-28 广东欧珀移动通信有限公司 移动终端中麦克风的检测方法、装置以及移动终端
CN109286730A (zh) * 2017-07-20 2019-01-29 阿里巴巴集团控股有限公司 一种回声检测的方法、装置及系统
CN108562839A (zh) * 2018-03-28 2018-09-21 鄂尔多斯市源盛光电有限责任公司 一种测试电路及其测试方法、测试系统
CN109005272A (zh) * 2018-07-24 2018-12-14 Oppo（重庆）智能科技有限公司 语音拾取方法及相关产品
CN108932949A (zh) * 2018-09-05 2018-12-04 科大讯飞股份有限公司 一种参考信号获取方法及装置
CN110677780A (zh) * 2019-09-26 2020-01-10 北京小米移动软件有限公司 音频输入模组的检测方法及装置、存储介质
CN110691314A (zh) * 2019-10-22 2020-01-14 苏州思必驰信息科技有限公司 线性麦克风阵列性能测试方法及夹具
CN111031463A (zh) * 2019-11-20 2020-04-17 福建升腾资讯有限公司 麦克风阵列性能评测方法、装置、设备和介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2781476C1 (ru) * 2021-12-02 2022-10-12 Общество С Ограниченной Ответственностью "Яндекс" Способ тестирования микрофонов и реализующая его акустическая система

Also Published As

Publication number Publication date
EP3905244B1 (en) 2023-11-29
EP3905244A1 (en) 2021-11-03
US20210337331A1 (en) 2021-10-28
CN111586547B (zh) 2022-05-06
US11395079B2 (en) 2022-07-19

Similar Documents

Publication Publication Date Title
US11587574B2 (en) Voice processing method, apparatus, electronic device, and storage medium
JP6505252B2 (ja) 音声信号を処理するための方法及び装置
RU2449497C1 (ru) Оповещение пользователя о прикрытии микрофона
CN106546969B (zh) 超声波校准的方法及装置
US10027785B2 (en) Method for switching screen state of terminal, terminal thereof, and computer-readable medium thereof
CN111586547B (zh) 音频输入模组的检测方法及装置、存储介质
CN106384597B (zh) 一种音频数据处理方法、及设备
CN114040285B (zh) 耳机的前馈滤波器参数生成方法、设备、耳机及存储介质
CN110677780B (zh) 音频输入模组的检测方法及装置、存储介质
CN114363770B (zh) 通透模式下的滤波方法、装置、耳机以及可读存储介质
CN106253996B (zh) 灵敏度衰减测试方法及装置
CN112037825B (zh) 音频信号的处理方法及装置、存储介质
CN111007462A (zh) 定位方法、定位装置、定位设备及电子设备
CN112817554A (zh) 提示音控制方法、提示音控制装置及存储介质
CN113190207A (zh) 信息处理方法、装置、电子设备及存储介质
CN112447184A (zh) 语音信号处理方法及装置、电子设备、存储介质
EP4266077A1 (en) Device determining method and apparatus
CN115065921A (zh) 一种防止助听器啸叫的方法及装置
CN114040309A (zh) 风噪检测方法、装置、电子设备及存储介质
CN107172557B (zh) 喇叭及听筒极性检测方法及装置
CN112887893A (zh) 扬声器使用方法、装置及介质
CN107733535B (zh) 终端调试方法、装置及系统
CN111694539A (zh) 在听筒和扬声器之间切换的方法、装置及介质
CN113488076B (zh) 音频信号处理方法及装置
CN113450521B (zh) 入侵者的监测方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant