CN111988702B - 音频信号的处理方法、电子设备及存储介质 - Google Patents

音频信号的处理方法、电子设备及存储介质 Download PDF

Info

Publication number
CN111988702B
CN111988702B CN202010867085.9A CN202010867085A CN111988702B CN 111988702 B CN111988702 B CN 111988702B CN 202010867085 A CN202010867085 A CN 202010867085A CN 111988702 B CN111988702 B CN 111988702B
Authority
CN
China
Prior art keywords
audio signal
audio
signal
electronic device
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010867085.9A
Other languages
English (en)
Other versions
CN111988702A (zh
Inventor
舒开发
陈国明
安康
王笑峰
吴劼
朱宗霞
韩菲菲
李钉云
杨征
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Goertek Techology Co Ltd
Original Assignee
Goertek Techology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Goertek Techology Co Ltd filed Critical Goertek Techology Co Ltd
Priority to CN202010867085.9A priority Critical patent/CN111988702B/zh
Priority to US18/041,662 priority patent/US20230352039A1/en
Priority to PCT/CN2020/127351 priority patent/WO2022041485A1/zh
Publication of CN111988702A publication Critical patent/CN111988702A/zh
Application granted granted Critical
Publication of CN111988702B publication Critical patent/CN111988702B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/003—Changing voice quality, e.g. pitch or formants
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L21/0232—Processing in the frequency domain
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only 
    • H04R1/24—Structural combinations of separate transducers or of two parts of the same transducer and responsive respectively to two or more frequency ranges
    • H04R1/245—Structural combinations of separate transducers or of two parts of the same transducer and responsive respectively to two or more frequency ranges of microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1091—Details not provided for in groups H04R1/1008 - H04R1/1083
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H04R2201/107—Monophonic and stereophonic headphones with microphone for two-way hands free communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/03—Synergistic effects of band splitting and sub-band processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13—Hearing devices using bone conduction transducers

Abstract

本发明公开了一种音频信号的处理方法，包括以下步骤：获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；根据所述第一音频信号及所述第二音频信号确定分频值；根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。本发明还公开了一种电子设备及计算机可读存储介质，达成了提高电子设备采集的音频信号的质量的效果。

Description

音频信号的处理方法、电子设备及存储介质
技术领域
本发明涉及音频采集技术领域，尤其涉及音频信号的处理方法、电子设备及计算机可读存储介质。
背景技术
骨传导是一种声音传导方式，即将声音转化为不同频率的机械振动，通过人的颅骨、骨迷路、内耳淋巴液、螺旋器、听觉中枢来传递声波。相对于通过振膜产生声波的经典声音传导方式，骨传导省去了许多声波传递的步骤，能在嘈杂的环境中实现清晰的声音还原，而且声波也不会因为在空气中扩散而影响到他人。由于骨传导存在上述优势，因而出现了基于骨传导采集用户声音信号的设备。
但是，在骨传导设备中，源于骨传导传感器自身的硬件缺陷，会导致通过骨传导传感器采集的音频信号出现高频衰减严重的现象。这样导致骨传导音频采集设备采集的音频信号不完整。在相关技术中，为解决骨传导音频采集设备采集的音频信号不完整的问题，一般会在电子设备中同时设置麦克风和骨传导传感器，并设置一固定的分频点，以通过麦克风采集频率值高于固定分频点的高频音频，通过骨传导传感器采集频率值低于分频点的低频音频。但是由于不同用户，甚至同一用户佩戴电子设备时的松紧，角度，力度会有差异，骨传导传感器最佳的工作分频点也会随之改变，因此相关技术中，采用固定分频点控制电子设备的方案存在普适性较差的缺点，这样降低了电子设备采集到的音频信号的信号质量。
上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种音频信号的处理方法、电子设备及计算机可读存储介质，旨在达成提高电子设备采集的音频信号的质量的效果。
为实现上述目的，本发明提供一种音频信号的处理方法，所述音频信号的处理方法包括以下步骤：
获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；
根据所述第一音频信号及所述第二音频信号确定分频值；
根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。
可选地，所述第一音频信号以及所述第二音频信号均为时域信号，所述根据所述第一音频信号及所述第二音频信号确定分频值的步骤包括：
将所述第一音频信号及所述第二音频信号转换为频域信号；
根据转换后的所述第一音频信号和所述第二音频信号确定所述分频值。
可选地，基于傅里叶变换将所述第一音频信号及所述第二音频信号，从时域信号转换为频域信号。
可选地，所述根据转换后的所述第一音频信号和所述第二音频信号确定所述分频值的步骤包括：
计算转换为频域信号后的所述第一音频信号和所述第二音频信号的乘积的累加值；
根据所述累加值、转换后的所述第一音频信号和转换后的所述第二音频信号确定所述分频值。
可选地，所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤包括：
采集所述第一音频信号中，频率值低于所述分频值的部分，作为第一子音频输出信号；
采集所述第二音频信号中，频率值高于所述分频值的部分，作为第二子音频输出信号；
根据所述第一子音频输出信号和所述第二子音频输出信号合成所述音频输出信号。
可选地，所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤之前，还包括：
对所述第一音频信号以及所述第二音频信号进行降噪处理；
所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤包括：
根据所述分频值处理经降噪处理后的所述第一音频信号和所述第二音频信号，以得到所述电子设备的音频输出信号。
可选地，所述电子设备包括至少两个麦克风，所述获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号的步骤包括：
获取骨传导传感器接收到的第一音频信号；
根据所述至少两个麦克风接收到的至少两个麦克风音频信号获取所述第二音频信号。
此外，为实现上述目的，本发明还提供一种电子设备，所述电子设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的音频信号的处理程序，所述音频信号的处理程序被所述处理器执行时实现如上所述的音频信号的处理方法的步骤。
可选地，所述电子设备为骨传导耳机、智能穿戴设备和/或助听器。
此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有音频信号的处理程序，所述音频信号的处理程序被处理器执行时实现如上所述的音频信号的处理方法的步骤。
本发明实施例提出的一种音频信号的处理方法、电子设备及计算机可读存储介质获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号，然后根据所述第一音频信号及所述第二音频信号确定分频值，并根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。由于可以根据实时接收到的第一音频信号和第二音频信号动态确定分频值，从而使得电子设备在采集音频时，可以确保不同用户或者同一用户在不同佩戴角度，佩戴压力以及不同佩戴位置下，电子设备均可以以一个最佳的分频值工作，从而达成了提高电子设备采集到的音频信号的信号质量的效果。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图；
图2为本发明音频信号的处理方法的一实施例的流程示意图；
图3为本发明音频信号的处理方法的另一实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
由于在骨传导设备中，源于骨传导传感器自身的硬件缺陷，会导致通过骨传导传感器采集的音频信号出现高频衰减严重的现象。这样导致骨传导音频采集设备采集的音频信号不完整。在相关技术中，为解决骨传导音频采集设备采集的音频信号不完整的问题，一般会在电子设备中同时设置麦克风和骨传导传感器，并设置一固定的分频点，以通过麦克风采集频率值高于固定分频点的高频音频，通过骨传导传感器采集频率值低于分频点的低频音频。但是由于不同用户，甚至同一用户佩戴电子设备时的松紧，角度，力度会有差异，骨传导传感器最佳的工作分频点也会随之改变，因此相关技术中，采用固定分频点控制电子设备的方案存在普适性较差的缺点，这样降低了电子设备采集到的音频信号的信号质量。
为解决上述缺陷，本发明实施例提出一种音频信号的处理方法，其主要解决方案包括以下步骤：
获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；
根据所述第一音频信号及所述第二音频信号确定分频值；
根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。
由于可以根据实时接收到的第一音频信号和第二音频信号动态确定分频值，从而使得电子设备在采集音频时，可以确保不同用户或者同一用户在不同佩戴角度，佩戴压力以及不同佩戴位置下，电子设备均可以以一个最佳的分频值工作，从而达成了提高电子设备采集到的音频信号的信号质量的效果。
如图1所示，图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端可以是骨传导耳机等电子设备。
如图1所示，该终端可以包括：处理器1001，例如CPU，用户接口1003，存储器1004，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括麦克风和骨传导传感器等，可选用户接口1003还可以包括标准的有线接口、无线接口。存储器1004可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1004可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机存储介质的存储器1004中可以包括操作系统、用户接口模块以及音频信号的处理程序。
在图1所示的终端中，处理器1001可以用于调用存储器1004中存储的音频信号的处理程序，并执行以下操作：
获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；
根据所述第一音频信号及所述第二音频信号确定分频值；
根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。
进一步地，处理器1001可以调用存储器1004中存储的音频信号的处理程序，还执行以下操作：
将所述第一音频信号及所述第二音频信号转换为频域信号；
根据转换后的所述第一音频信号和所述第二音频信号确定所述分频值。
进一步地，处理器1001可以调用存储器1004中存储的音频信号的处理程序，还执行以下操作：
计算转换为频域信号后的所述第一音频信号和所述第二音频信号的乘积的累加值；
根据所述累加值、转换后的所述第一音频信号和转换后的所述第二音频信号确定所述分频值。
进一步地，处理器1001可以调用存储器1004中存储的音频信号的处理程序，还执行以下操作：
采集所述第一音频信号中，频率值低于所述分频值的部分，作为第一子音频输出信号；
采集所述第二音频信号中，频率值高于所述分频值的部分，作为第二子音频输出信号；
根据所述第一子音频输出信号和所述第二子音频输出信号合成所述音频输出信号。
进一步地，处理器1001可以调用存储器1004中存储的音频信号的处理程序，还执行以下操作：
对所述第一音频信号以及所述第二音频信号进行降噪处理；
所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤包括：
根据所述分频值处理经降噪处理后的所述第一音频信号和所述第二音频信号，以得到所述电子设备的音频输出信号。
进一步地，处理器1001可以调用存储器1004中存储的音频信号的处理程序，还执行以下操作：
获取骨传导传感器接收到的第一音频信号；
根据所述至少两个麦克风接收到的至少两个麦克风音频信号获取所述第二音频信号。
参照图2，在本发明音频信号的处理方法的一实施例中，所述音频信号的处理方法包括以下步骤：
步骤S10、获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；
步骤S20、根据所述第一音频信号及所述第二音频信号确定分频值；
步骤S30、根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。
在骨传导设备中，源于骨传导传感器自身的硬件缺陷，会导致通过骨传导传感器采集的音频信号出现高频衰减严重的现象。这样导致骨传导音频采集设备采集的音频信号不完整。在相关技术中，为解决骨传导音频采集设备采集的音频信号不完整的问题，一般会在电子设备中同时设置麦克风和骨传导传感器，并设置一固定的分频点，以通过麦克风采集频率值高于固定分频点的高频音频，通过骨传导传感器采集频率值低于分频点的低频音频。但是由于不同用户，甚至同一用户佩戴电子设备时的松紧，角度，力度会有差异，骨传导传感器最佳的工作分频点也会随之改变，因此相关技术中，采用固定分频点控制电子设备的方案存在普适性较差的缺点，这样降低了电子设备的采集到的音频数据的信号质量。
为提高电子设备采集到的音频数据的信号质量，本发明实施例提出一种音频信号的处理方法。
在本实施例中，上述音频信号的处理方法应用于电子设备，该电子设备设置有骨传导传感器以及麦克风，使得该电子设备和通过骨传导传感器和麦克风对同一语音同时采集两路音频信号(骨传导音频信号和气导音频信号)，以下将骨传导传感器采集的上述音频信号描述为第一音频信号，将麦克风采集的音频信号描述为第二音频信号。其中，所述电子设备可以是骨传导耳机、、智能穿戴设备和/或助听器等，基于骨传导原理采集音频信号的设备。当然，本实施例提出的音频信号的处理方法，也可以应用于骨传导耳机、、智能穿戴设备和/或助听器之外的其它设置有骨传导拾振器件的电子设备，以供电子设备对骨导音频进行处理，本实施例对此不作限定。
需要说明的是，该电子设备可以设置一个麦克风，也可以设置由多个麦克风组成的麦克风阵列，以通过麦克风阵列采集多个第二音频信号，从而提高麦克风音频采集系统的鲁棒性和提高麦克风采集到的气导音频信号的质量。可以理解的是，当电子设备设置有多个麦克风时，可以获取到由多个麦克风采集的多个气导音频信号。因此，当电子设备设置有多个麦克风时，可以先基于多个麦克风采集到的多个气导音频信号，生成目标第二音频信号。
示例性地，可以将多个麦克风采集的多个气导音频信号中的其中一个作为主信号，然后将除所述主信号之外的其它气导音频信号作为从信号，并通过所述从信号对上述主信号进行优化，并进而将优化后的主信号作为第二音频信号。以基于上述第二音频信号执行本实施例所述的步骤S10至步骤S30。其中，主信号的选择可以是选定多个麦克风采集到的多个气导音频信号中，信噪比最大的信号作为主信号。由于可以通过多个麦克风采集到的多个气导音频信号生成上述第二音频信号，这样使得可以降低获取到的第二音频信号的噪声，提高上述第二音频信号的信噪比。从而提高系统的鲁棒性和提高麦克风采集到的气导音频信号的质量。
为了简便说明，在本实施例中，以设置一个麦克风的电子设备为例，对本发明的权利要求限定的保护范围进行解释说明，但这并不用于限定本发明。
进一步地，电子设备可以获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号。然后根据上述第一音频信号和第二音频信号的频谱特性，确定当前时刻对应的分频值。
具体地，由于骨传导传感器和麦克风均是基于声源的在时间序列上的声波变化，将振动转换为电信号，以作为音频信号。因此，直接获取的骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号均为时域信号。所以，当获取到骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号时，可以先通过快速傅里叶变换，将上述第一音频信号和第二音频信号从时域信号转换为频域信号。然后根据转换后的所述第一音频信号和所述第二音频信号确定所述分频值。
需要说明的是，在根据转换后的所述第一音频信号和所述第二音频信号确定所述分频值时，可以先计算转换为频域信号后的所述第一音频信号和所述第二音频信号的乘积的累加值、然后根据所述累加值、转换后的所述第一音频信号和转换后的所述第二音频信号确定所述分频值。
示例性地，在本示例中，第一音频信号经傅里叶变换后，得到的频域信号为Y1(k)，第二音频信号经傅里叶变换后，得到的频域信号为Y2(k)，进而可以根据以下公式计算第一音频信号和第二音频信号在频域的相关因子corr(k):
Figure BDA0002649156020000081
然后将上述相关因子corr(k)作为上述分频值。
进一步地，当确定上述分频值后，可以根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。
具体地，当前确定上述分频值后，bandwidth-decision(带宽决定)模块中，生成一个lable(标签)文件，并将上述分频值作为该标签文件关键参数，来处理上述第一音频文件和第二音频文件。
示例性地，mix(混合)模块可以采集所述第一音频信号中，频率值低于所述分频值的部分，作为第一子音频输出信号，采集所述第二音频信号中，频率值高于所述分频值的部分，作为第二子音频输出信号，然后根据所述第一子音频输出信号和所述第二子音频输出信号合成所述音频输出信号。
可选地，所述根据所述第一音频信号及所述第二音频信号确定分频值的步骤之前，还可以先对所述第一音频信号以及所述第二音频信号进行降噪处理，然后再根据所述分频值处理经降噪处理后的所述第一音频信号和所述第二音频信号，以得到所述电子设备的音频输出信号。
在本实施例公开的技术方案中，获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号，然后根据所述第一音频信号及所述第二音频信号确定分频值，并根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号。由于可以根据实时接收到的第一音频信号和第二音频信号动态确定分频值，从而使得电子设备在采集音频时，可以确保不同用户或者同一用户在不同佩戴角度，佩戴压力以及不同佩戴位置下，电子设备均可以以一个最佳的分频值工作，从而达成了提高电子设备采集到的音频信号的信号质量的效果。
可选地，参照图3，基于上述实施例，在另一实施例中，上述步骤S30之后，还包括：
步骤S40、将所述音频输出信号作为所述音频使用终端的输入信号，其中，所述音频使用终端接收到所述输入信号时，所述音频使用终端中装载的至少一应用程序响应于所述输入信号。
在本实施例中，上述电子设备可以设置骨传导耳机，该骨传导耳机可以与音频使用终端连接。其中上述音频使用终端可以电脑、手机和/或平板电脑等智能设备。上述骨传导耳机可以作为上述音频使用终端的音频采集设备，因此，当骨传导耳机生成上述音频输出信号后，可以将该音频输出信号输出值上述音频使用终端，即将所述音频输出信号作为所述音频使用终端的输入信号。
当音频使用终端接收到上述输入信号时，所述音频使用终端中装载的至少一应用程序响应于所述输入信号。
具体地，音频使用终端可以先获取自身的使用状态，进而根据所述使用状态确定响应该输入信号的应用程序。例如，当使用状态为通话时，可以将该输入信号作为通话语音，通过通话应用响应该输入信号。在当前状态为录音状态时，可以将通过录音应用响应上述输入信号。
在本实施例公开的技术方案中，将所述音频输出信号作为所述音频使用终端的输入信号，其中，所述音频使用终端接收到所述输入信号时，所述音频使用终端中装载的至少一应用程序响应于所述输入信号，这样可以提高音频使用终端的音频输入效果。
此外，本发明实施例还提出一种电子设备，所述电子设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的音频信号的处理程序，所述音频信号的处理程序被所述处理器执行时实现如上各个实施例所述的音频信号的处理方法的步骤。
此外，本发明实施例还提出一种计算机可读存储介质，所述计算机可读存储介质上存储有音频信号的处理程序，所述音频信号的处理程序被处理器执行时实现如上各个实施例所述的音频信号的处理方法的步骤。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是骨传导耳机、智能穿戴设备和/或助听器等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (7)

1.一种音频信号的处理方法，其特征在于，所述音频信号的处理方法应用于电子设备，所述电子设备包括骨传导传感器以及麦克风，所述音频信号的处理方法包括以下步骤：
获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号；
将所述第一音频信号及所述第二音频信号转换为频域信号；
计算转换为频域信号后的所述第一音频信号和所述第二音频信号的乘积的累加值；
根据所述累加值、转换后的所述第一音频信号和转换后的所述第二音频信号确定分频值；
采集所述第一音频信号中，频率值低于所述分频值的部分，作为第一子音频输出信号；
采集所述第二音频信号中，频率值高于所述分频值的部分，作为第二子音频输出信号；
根据所述第一子音频输出信号和所述第二子音频输出信号合成音频输出信号。
2.如权利要求1所述的音频信号的处理方法，其特征在于，基于傅里叶变换将所述第一音频信号及所述第二音频信号，从时域信号转换为频域信号。
3.如权利要求1所述的音频信号的处理方法，其特征在于，所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤之前，还包括：
对所述第一音频信号以及所述第二音频信号进行降噪处理；
所述根据所述分频值处理所述第一音频信号以及所述第二音频信号，以得到所述电子设备的音频输出信号的步骤包括：
根据所述分频值处理经降噪处理后的所述第一音频信号和所述第二音频信号，以得到所述电子设备的音频输出信号。
4.如权利要求1所述的音频信号的处理方法，其特征在于，所述电子设备包括至少两个麦克风，所述获取骨传导传感器接收到的第一音频信号以及麦克风接收到的第二音频信号的步骤包括：
获取骨传导传感器接收到的第一音频信号；
根据所述至少两个麦克风接收到的至少两个麦克风音频信号获取所述第二音频信号。
5.一种电子设备，其特征在于，所述电子设备包括：麦克风、骨传导传感器、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的音频信号的处理程序，所述音频信号的处理程序被所述处理器执行时实现如权利要求1至4中任一项所述的音频信号的处理方法的步骤。
6.如权利要求5所述的电子设备，其特征在于，所述电子设备为骨传导耳机、智能穿戴设备和/或助听器。
7.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有音频信号的处理程序，所述音频信号的处理程序被处理器执行时实现如权利要求1至4中任一项所述的音频信号的处理方法的步骤。
CN202010867085.9A 2020-08-25 2020-08-25 音频信号的处理方法、电子设备及存储介质 Active CN111988702B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010867085.9A CN111988702B (zh) 2020-08-25 2020-08-25 音频信号的处理方法、电子设备及存储介质
US18/041,662 US20230352039A1 (en) 2020-08-25 2020-11-07 Audio signal processing method, electronic device and storage medium
PCT/CN2020/127351 WO2022041485A1 (zh) 2020-08-25 2020-11-07 音频信号的处理方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010867085.9A CN111988702B (zh) 2020-08-25 2020-08-25 音频信号的处理方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN111988702A CN111988702A (zh) 2020-11-24
CN111988702B true CN111988702B (zh) 2022-02-25

Family

ID=73442575

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010867085.9A Active CN111988702B (zh) 2020-08-25 2020-08-25 音频信号的处理方法、电子设备及存储介质

Country Status (3)

Country Link
US (1) US20230352039A1 (zh)
CN (1) CN111988702B (zh)
WO (1) WO2022041485A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113411698B (zh) * 2021-06-21 2022-11-25 歌尔科技有限公司 音频信号处理方法及智能音箱

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1023122A (ja) * 1996-06-28 1998-01-23 Nippon Telegr & Teleph Corp <Ntt> 通話装置
JP2007264132A (ja) * 2006-03-27 2007-10-11 Toshiba Corp 音声検出装置及びその方法
CN104934032A (zh) * 2014-03-17 2015-09-23 华为技术有限公司 根据频域能量对语音信号进行处理的方法和装置
CN109767783A (zh) * 2019-02-15 2019-05-17 深圳市汇顶科技股份有限公司 语音增强方法、装置、设备及存储介质
CN110350935A (zh) * 2019-05-27 2019-10-18 努比亚技术有限公司 音频信号输出控制方法、可穿戴设备及可读存储介质
CN110931031A (zh) * 2019-10-09 2020-03-27 大象声科（深圳）科技有限公司 一种融合骨振动传感器和麦克风信号的深度学习语音提取和降噪方法
CN110931027A (zh) * 2018-09-18 2020-03-27 北京三星通信技术研究有限公司 音频处理方法、装置、电子设备及计算机可读存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9020168B2 (en) * 2011-08-30 2015-04-28 Nokia Corporation Apparatus and method for audio delivery with different sound conduction transducers
US11240588B2 (en) * 2016-03-29 2022-02-01 Sony Corporation Sound reproducing apparatus
KR102570480B1 (ko) * 2019-01-04 2023-08-25 삼성전자주식회사 오디오 신호 처리 방법 및 이를 지원하는 전자 장치
CN110970052B (zh) * 2019-12-31 2022-06-21 歌尔光学科技有限公司 降噪方法、装置、头戴显示设备和可读存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1023122A (ja) * 1996-06-28 1998-01-23 Nippon Telegr & Teleph Corp <Ntt> 通話装置
JP2007264132A (ja) * 2006-03-27 2007-10-11 Toshiba Corp 音声検出装置及びその方法
CN104934032A (zh) * 2014-03-17 2015-09-23 华为技术有限公司 根据频域能量对语音信号进行处理的方法和装置
CN110931027A (zh) * 2018-09-18 2020-03-27 北京三星通信技术研究有限公司 音频处理方法、装置、电子设备及计算机可读存储介质
CN109767783A (zh) * 2019-02-15 2019-05-17 深圳市汇顶科技股份有限公司 语音增强方法、装置、设备及存储介质
CN110350935A (zh) * 2019-05-27 2019-10-18 努比亚技术有限公司 音频信号输出控制方法、可穿戴设备及可读存储介质
CN110931031A (zh) * 2019-10-09 2020-03-27 大象声科（深圳）科技有限公司 一种融合骨振动传感器和麦克风信号的深度学习语音提取和降噪方法

Also Published As

Publication number Publication date
US20230352039A1 (en) 2023-11-02
WO2022041485A1 (zh) 2022-03-03
CN111988702A (zh) 2020-11-24

Similar Documents

Publication Publication Date Title
CN103874000B (zh) 一种听力仪器
CN109493877B (zh) 一种助听装置的语音增强方法和装置
US20230352038A1 (en) Voice activation detecting method of earphones, earphones and storage medium
EP2765787B1 (en) A method of reducing un-correlated noise in an audio processing device
CN105491495B (zh) 基于确定性序列的反馈估计
CN112272346A (zh) 入耳检测方法、耳机及计算机可读存储介质
CN107452398B (zh) 回声获取方法、电子设备及计算机可读存储介质
CN111988702B (zh) 音频信号的处理方法、电子设备及存储介质
EP3136746B1 (en) Area-sound reproduction system and area-sound reproduction method
CN111800699B (zh) 音量调节提示方法、装置、耳机设备及存储介质
WO2020035158A1 (en) Method of operating a hearing aid system and a hearing aid system
CN112017677A (zh) 音频信号的处理方法、终端设备及存储介质
CN112785998A (zh) 信号处理方法、设备及装置
US8908892B2 (en) Method and device for frequency compression in a hearing aid
CN111757211B (zh) 降噪方法、终端设备及存储介质
JP2007512767A (ja) 雑音信号の音響計測基準に基づき呼出信号を生成する方法及びデバイス
CN114466278B (zh) 一种耳机模式对应的参数确定方法、耳机、终端和系统
CN113990283A (zh) 降噪处理方法、装置、耳机及计算机可读存储介质
CN110022514B (zh) 音频信号的降噪方法、装置、系统及计算机存储介质
CN113766385A (zh) 耳机降噪方法及装置
CN110996205A (zh) 耳机的控制方法、耳机及可读存储介质
JP3435687B2 (ja) 収音装置
US9258655B2 (en) Method and device for frequency compression with harmonic correction
US20180254056A1 (en) Sounding device, audio transmission system, and audio analysis method thereof
CN113038349B (zh) 一种音频设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant