CN107785027B - 一种音频处理方法及电子设备 - Google Patents

一种音频处理方法及电子设备 Download PDF

Info

Publication number
CN107785027B
CN107785027B CN201711047149.5A CN201711047149A CN107785027B CN 107785027 B CN107785027 B CN 107785027B CN 201711047149 A CN201711047149 A CN 201711047149A CN 107785027 B CN107785027 B CN 107785027B
Authority
CN
China
Prior art keywords
signal
audio signal
uplink
ultrasonic
uplink audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711047149.5A
Other languages
English (en)
Other versions
CN107785027A (zh
Inventor
付姝华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201711047149.5A priority Critical patent/CN107785027B/zh
Publication of CN107785027A publication Critical patent/CN107785027A/zh
Application granted granted Critical
Publication of CN107785027B publication Critical patent/CN107785027B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L2021/02082Noise filtering the noise being echo, reverberation of the speech

Abstract

本发明提供了一种音频处理方法及电子设备。其中,该音频处理方法包括:在电子设备接收到第一上行音频信号时,在第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放第二上行音频信号;采集包含第二上行音频信号的环境声音信号,并从采集到的环境声音信号中分离出第一下行音频信号和超声波信号;利用分离出的超声波信号,对第一下行音频信号进行回声抑制处理,得到第二下行音频信号;发送第二下行音频信号至通讯对端。上述技术方案,利用超声波信号抑制下行音频信号中的回声信号,从而提高语音质量。

Description

一种音频处理方法及电子设备
技术领域
本发明涉及通信技术领域,尤其涉及一种音频处理方法及电子设备。
背景技术
回声在很多电子产品及应用场景中会出现,如音视频会议、电话通信、在线音频应用等。例如,进行音视频会议时,在会议室,从远端发送来的音频信号(即上行音频信号)通过扬声器播放出来,声波被墙壁、地板和天花板等反射,这些反射波和直达波都会被会议室中的麦克风拾取,作为下行音频信号的一部分号发送至远端,形成回声;另外,从手机听筒泄露的声音也会被手机的麦风风拾取,作为近端信号的一部分发送给远端,也会形成回声。这些回声具有一定的延迟,当延迟超过50毫秒并且没有衰减或只有很小衰减时,远端的用户就会感觉到清晰的回声,如果不对回音进行处理,将会影响通话质量和用户体验。
发明内容
本发明实施例提供了一种音频处理方法及电子设备,以解决现有技术中语音通讯过程中出现回声的问题。
为了解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种音频处理方法,包括:在电子设备接收到第一上行音频信号时,在所述第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放所述第二上行音频信号;
采集包含所述第二上行音频信号的环境声音信号,并从采集到的所述环境声音信号中分离出第一下行音频信号和所述超声波信号;
利用分离出的所述超声波信号,对所述第一下行音频信号进行回声抑制处理,得到第二下行音频信号;
发送所述第二下行音频信号至通讯对端。
第二方面,本发明实施例提供了一种电子设备,包括:
第一处理模块,用于在电子设备接收到第一上行音频信号时,在所述第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放所述第二上行音频信号;
第二处理模块,用于采集包含所述第二上行音频信号的环境声音信号,并从采集到的所述环境声音信号中分离出第一下行音频信号和所述超声波信号;
第三处理模块,用于利用分离出的所述超声波信号,对所述第一下行音频信号进行回声抑制处理,得到第二下行音频信号;
发送模块,用于发送所述第二下行音频信号至通讯对端。
第三方面,本发明实施例提供了一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上所述的音频处理方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如上所述的音频处理方法的步骤。
在本发明实施例中,为了抑制麦克风采集到的上行音频信号的回声信号,在电子设备接收到上行音频信号时,在该上行音频信号中预先混入超声波信号。在该上行音频信号被播放出来后,由于超声波信号与上行音频信号混合在一起,因此会与上行音频信号的回声信号一起被麦克风采集,因此,可通过分析超声波信号的回声路径,从而确定上行音频信号的回声信号的回声路径,从而模拟生成上行音频信号的回声信号(即回声抑制信号),以利用该模拟生成的回声信号,将真正的上行音频信号的回声信号从下行音频信号中消除,提高语音质量。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1表示本发明实施例提供的音频处理方法的流程图;
图2表示本发明实施例提供的音频处理过程的示意图;
图3表示本发明实施例提供的分离出的超声波信号的示意图;
图4表示本发明实施例提供的电子设备的框图之一;
图5表示本发明实施例提供的电子设备的框图之二;
图6表示本发明实施例提供的电子设备的框图之三。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
依据本发明实施例的一个方面,提供了一种音频处理方法。
如图1所示,该音频处理方法包括:
步骤101、在电子设备接收到第一上行音频信号时,在第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放第二上行音频信号。
其中,人耳能够听到的所有声音都称之为音频。而上行音频信号为电子设备接收到的音频信号,用于播放。与上行音频信号相对的是下行音频信号,下行音频信号是电子设备要发送出去的音频信号,从麦克风采集而来。超声波信号是频率大于20kHz的声音信号,是人耳无法听到的声音信号。
本发明实施例中,在电子设备接收到上行音频信号(即第一上行音频信号)时,在上行音频信号中混入预设频率的超声波信号,并使该超声波信号与上行音频信号一起通过扬声器播放出去。其中,超声波信号的频率可根据实际需求选择,本发明实施例对此不进行限定。
由于超声波信号是人耳无法听到的声音,因此在播放混有超声波信号的上行音频信号(即第二上行音频信号)时,超声波信号是不会被人耳听到的,并不会影响上行音频信号的播放效果。又由于超声波信号的频率大于上行音频信号的频率,使得超声波信号的频率不会和上行音频信号的频率发生重叠,因此超声波信号也不会对上行音频信号产生干扰。
其中,这里所述的电子设备包括:移动终端(如手机、平板电脑、电话手表等)、台式电脑、车载电脑等。
步骤102、采集包含第二上行音频信号的环境声音信号,并从采集到的环境声音信号中分离出第一下行音频信号和超声波信号。
被播放出去的上行音频信号,可能会被电子设备上的麦克风采集,发送至通讯对端,形成回声,影响通话质量。为了抑制回声,需对麦克风采集到的上行音频信号进行处理,根据上行音频信号的回声路径,消除回声。
在本发明实施例中,为了确定上行音频信号的回声路径,采用超声波信号来检测回声路径。在步骤101中已经提到,在电子设备接收到上行音频信号时,会将一超声波信号与其进行混合,并一同播放出去,这样,被播放出去的超声波信号的回声路径就会与上行音频信号的回声路径一致,由于对超声波信号的回声分析比音频信号的回声分析,更高效、更准确、更成熟,因此可通过分析超声波信号的回声路径来确定上行音频信号的回声路径。为了确定超声波信号的回声路径,需从麦克风采集的环境声音信号中将超声波信号和下行音频信号(即第一下行音频信号,该音频信号中包括上行音频信号的回声)分离开来,从而能够对超声波信号进行分析。
步骤103、利用分离出的超声波信号,对第一下行音频信号进行回声抑制处理,得到第二下行音频信号。
本步骤是对分离出的超声波信号进行分析。在步骤101中,超声波信号随着上行音频信号被播放出来。从扬声器到麦克风被,由于声音传播需要时间,在传播过程中也可能会遇到障碍物被反射,因此会导致被麦克风采集到的该超声波信号和上行音频信号会有一定的延时和损耗。而本发明实施例则借助该超声信号,通过确定该超声波信号的回声路径,从而根据该超声波信号的回声路径,确定上行音频信号的回声路径,以对下行音频信号中的回声进行抑制,得到更干净的音频信号(即第二下行音频信号),提高通话质量。
其中,从扬声器到麦克风,由于周围环境和电子设备,可能具有一条或多条(两条及两条以上)回声路径,因此也就会产生多个上行音频信号的回声,这些回声都有可能影响通话质量,影响用户的使用体验。而本发明实施例中,由于超声波信号的回声路径与上行音频信号的回声路径一致,因此是可以通过分析超声波信号的回声路径,将上行音频信号所有的回声路径均确定出来,从而抑制多路径返回的回声,进一步提高通话质量。又由于对超声波信号的回声分析的算法开销小,因此数据处理速度较快,能够减少对麦克风采集的环境声音信号的处理时间,减小延时,且硬件资源需求低。
步骤104、发送第二下行音频信号至通讯对端。
在完成对下行音频信号的回声抑制后,得到第二下行音频信号。在该第二下行音频信号中,由于在步骤103中超声波信号和下行音频信号已被分离开来,而下行音频信号中的回声信号也已被抑制,因此该第二下行音频信号中仅有本端的声音,在将第二下行音频信号发送至通讯对端后,对端用户就能够接收到延时小、品质高且更干净的声音,提高了通话质量,提升了用户体验。
具体地,在步骤102中,为了在第一上行音频信号中混入预设频率的超声波信号,且混合后不会出现问题,在混合前,需将上行音频信号上采样到和所要混入的超声波信号相同的频率,其实现方式包括:
在电子设备接收到上行音频信号时,将第一上行音频信号上采样至与超声波信号同频的音频信号,将进行过上采样的第一上行音频信号与超声波信号进行混合,得到第二上行音频信号。
其中,所谓上采样即采样频率大于原信号的采样频率的采样。
具体地,在利用分离出的超声波信号,对第一下行音频信号进行回声抑制处理时,首先需根据超声波信号特点,获取超声波信号的回波参数,即获取超声波回声信号的延时参数和损耗参数,其中,超声波回声信号的延时参数和损耗参数与第一上行音频信号的延时参数和损耗参数可以看作相同,因此可以根据超声波回声信号的延时参数和损耗参数以及第一上行音频信号,模拟生成第一上行音频信号的回声信号(即回声抑制信号),然后利用模拟生成的回声信号消减掉上行音频信号的回声信号,得到纯净的第二下行音频信号。其实现方式包括:
获取分离出的超声波信号的延时参数和损耗参数,然后根据超声波信号的延时参数和损耗参数以及预先保存的第一上行音频信号,生成第一上行音频信号的回声抑制信号;最后利用回声抑制信号,消除第一下行音频信号中的回声信号,得到第二下行音频信号。
其中,预先保存的第一上行音频信号为在电子设备接收到第一上行音频信号时进行保存的。
进一步地,本发明实施例中,在麦克风采集到环境声音信号之后,可先检测该环境声音信号中是否存在上述预设频率的超声波信号,若在该环境声音信号中存在该超声波信号,则说明麦克风采集的环境声音信号中存在上行音频信号的回声,此时则进入从采集到的环境声音信号从分离出第一下行音频信号和超声波信号的步骤,若在该环境声音信号中存在该超声波信号,则说明麦克风采集的环境声音信号中不存在上行音频信号的回声,则不必进行回声抑制的处理,在完成其他一些对采集到的环境声音信号的处理后,则可将处理后的环境声音信号发送至通讯对端。
其中,为了进一步理解本发明实施例提供的音频处理方法,下面将结合图2,并以通过手机进行语音通话为例,对本发明实施例提供的技术方案,进行进一步地解释说明。
如图2所示,当手机接收到对端发送的语音信号(以下称为上行语音信号)时,先预先保存一份该上行语音信号,然后将该上行语音信号上采样至一预设频率,其中,该预设频率与下面所要混合的超声波信号的频率相同。
在完成上采样后,将一超声波信号混入完成上采样的上行语音信号中,然后通过手机上的扬声器(听筒或喇叭)将混有超声波信号的上行语音信号进行播放。由于人耳无法听到超声波信号,因此在上行语音信号中混入超声波信号,不会影响上行语音信号的播放效果。
播放出的上行语音信号可能会被墙壁、地板和天花板等反射,这些反射波(如图2中的路径1和路径2所示)和直达波(如图2中的路径3所示)可能会被麦克风采集,混入本端用户的语音信号(以下称为下行语音信号)中,本发明实施例为了抑制这些回声,利用混入上行语音信号中的超声波信号确定回声路径,从而生成回声抑制信号,具体过程如下所述:
对于麦克风采集的环境声音信号,通过滤波方式进行解混,即分别提取出超声波信号和下行语音信号,然后获取提取出的超声波信号的回波参数(即超声波回声信号的延时参数和损耗参数)。
其中,在获取超声波信号的回波参数时,对超声波信号进行分析,确定分离出的超声波信号中的峰值。如图3所示,图中有两个峰值(即峰值A和峰值B),这两个峰值可视为两个回声返回路径,检测这两个峰值与扬声器发送上行音频信号时的发送时间的时间间隔,得到两个回声延时,再根据每个峰值大小分别计算出一个回声损耗,即得到完整的回声路径信息。
由于上行语音信号的回声路径信息可以看作是超声波信号的回声路径信息,因此,可根据超声波信号的回声路径信息,模拟生成上行语音信号的回声信号(即回声抑制信号),然后从解混得到的下行语音信号中利用模拟生成的回声信号消减掉上行语音信号的回声信号,即得到回声抑制后的下行语音信号。
至此,则完成本发明实施例提供的对音频信号的处理过程。
综上所述,本发明实施例提供的音频处理方法,为了抑制麦克风采集到的上行音频信号的回声信号,在电子设备接收到上行音频信号时,在该上行音频信号中预先混入超声波信号。在该上行音频信号被播放出来后,由于超声波信号与上行音频信号混合在一起,因此会与上行音频信号的回声信号一起被麦克风采集,因此,可通过分析超声波信号的回声路径,从而确定上行音频信号的回声信号的回声路径,从而模拟生成上行音频信号的回声信号(即回声抑制信号),以利用该模拟生成的回声信号,将真正的上行音频信号的回声信号从下行音频信号中消除,提高语音质量。
此外,利用超声波检测回声路径,可实时探测多个回声路径,从而计算出每一路径的回声延时和回声损耗,把获取的回声延时和回声损耗应用到回声抑制中,可以高效地抑制多路径返回的回声信号,提高回声抑制的效率,使对端用户听到延时小、品质高且更纯净的声音。
依据本发明实施例的另一个方面,提供了一种电子设备。
如图4所示,该电子设备包括:
第一处理模块401,用于在电子设备接收到第一上行音频信号时,在第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放第二上行音频信号。
第二处理模块402,用于采集包含第二上行音频信号的环境声音信号,并从采集到的环境声音信号中分离出第一下行音频信号和超声波信号。
第三处理模块403,用于利用分离出的超声波信号,对第一下行音频信号进行回声抑制处理,得到第二下行音频信号。
发送模块404,用于发送第二下行音频信号至通讯对端。
进一步地,如图5所示,该第一处理模块401包括:
第一处理单元4011,用于在电子设备接收到第一上行音频信号时,将第一上行音频信号上采样至与超声波信号同频的音频信号。
第二处理单元4012,用于将进行过上采样的第一上行音频信号与超声波信号进行混合,得到第二上行音频信号。
进一步地,如图5所示,该第三处理模块403包括:
获取单元4031,用于获取分离出的超声波信号的延时参数和损耗参数。
生成单元4032,用于根据超声波信号的延时参数和损耗参数以及预先保存的第一上行音频信号,生成第一上行音频信号的回声抑制信号。
第三处理单元4033,用于利用回声抑制信号,消除第一下行音频信号中的回声信号,得到第二下行音频信号。
其中,预先保存的第一上行音频信号为在电子设备接收到第一上行音频信号时进行保存的。
进一步地,如图5所示,该获取单元4031包括:
确定子单元40311,用于确定分离出的超声波信号中的峰值。
计算单元40312,用于根据峰值,计算超声波信号的延时参数和损耗参数。
进一步地,如图5所示,该电子设备还包括:
检测模块405,用于检测环境声音信号中是否存在预设频率的超声波信号。
第四处理模块406,用于在环境声音信号中存在超声波信号时,控制第二处理模块进入从采集到的环境声音信号从分离出第一下行音频信号和超声波信号的步骤,在不存在超声波信号时,控制发送模块直接发送该环境声音信号。
综上所述,本发明实施例提供的电子设备,为了抑制麦克风采集到的上行音频信号的回声信号,在电子设备接收到上行音频信号时,先通过第一处理模块401在该上行音频信号中预先混入超声波信号。在该上行音频信号被播放出来后,由于超声波信号与上行音频信号混合在一起,因此会与上行音频信号的回声信号一起被采集,因此,可先通过第二处理模块402从采集到的环境声音信号中分离出第一下行音频信号和超声波信号,再通过第三处理模块403分析超声波信号的回声路径,从而确定上行音频信号的回声信号的回声路径,从而模拟生成上行音频信号的回声信号(即回声抑制信号),以利用该模拟生成的回声信号,将真正的上行音频信号的回声信号从下行音频信号中消除,并通过发送模块404将完成回声抑制的下行音频信号发送至通讯对端,使对端用户听到延时小、品质高且更纯净的声音,提高通话质量,提升用户体验。
此外,利用超声波检测回声路径,可实时探测多个回声路径,从而计算出每一路径的回声延时和回声损耗,把获取的回声延时和回声损耗应用到回声抑制中,可以高效地抑制多路径返回的回声信号,提高回声抑制的效率,使对端用户听到延时小、品质高且更纯净的声音。
图6为实现本发明各个实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、处理器610、以及电源611等部件。本领域技术人员可以理解,图6中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
处理器610,用于在电子设备接收到第一上行音频信号时,在第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放第二上行音频信号;采集包含第二上行音频信号的环境声音信号,并从采集到的环境声音信号中分离出第一下行音频信号和超声波信号;利用分离出的超声波信号,对第一下行音频信号进行回声抑制处理,得到第二下行音频信号;发送第二下行音频信号至通讯对端。
本发明实施例中,为了抑制麦克风采集到的上行音频信号的回声信号,在电子设备接收到上行音频信号时,在该上行音频信号中预先混入超声波信号。在该上行音频信号被播放出来后,由于超声波信号与上行音频信号混合在一起,因此会与上行音频信号的回声信号一起被麦克风采集,因此,可通过分析超声波信号的回声路径,从而确定上行音频信号的回声信号的回声路径,从而模拟生成上行音频信号的回声信号(即回声抑制信号),以利用该模拟生成的回声信号,将真正的上行音频信号的回声信号从下行音频信号中消除,提高语音质量。
应理解的是,本发明实施例中,射频单元601可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器610处理;另外,将上行的数据发送给基站。通常,射频单元601包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元601还可以通过无线通信系统与网络和其他设备通信。
电子设备通过网络模块602为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元603可以将射频单元601或网络模块602接收的或者在存储器609中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元603还可以提供与电子设备600执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元603包括扬声器、蜂鸣器以及受话器等。
输入单元604用于接收音频或视频信号。输入单元604可以包括图形处理器(Graphics Processing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元606上。经图形处理器6041处理后的图像帧可以存储在存储器609(或其它存储介质)中或者经由射频单元601或网络模块602进行发送。麦克风6042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元601发送到移动通信基站的格式输出。
电子设备600还包括至少一种传感器605,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板6061的亮度,接近传感器可在电子设备600移动到耳边时,关闭显示面板6061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器605还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元606用于显示由用户输入的信息或提供给用户的信息。显示单元606可包括显示面板6061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板6061。
用户输入单元607可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元607包括触控面板6071以及其他输入设备6072。触控面板6071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板6071上或在触控面板6071附近的操作)。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器610,接收处理器610发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板6071。除了触控面板6071,用户输入单元607还可以包括其他输入设备6072。具体地,其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板6071可覆盖在显示面板6061上,当触控面板6071检测到在其上或附近的触摸操作后,传送给处理器610以确定触摸事件的类型,随后处理器610根据触摸事件的类型在显示面板6061上提供相应的视觉输出。虽然在图6中,触控面板6071与显示面板6061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板6071与显示面板6061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元608为外部装置与电子设备600连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元608可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备600内的一个或多个元件或者可以用于在电子设备600和外部装置之间传输数据。
存储器609可用于存储软件程序以及各种数据。存储器609可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器609可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器610是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器609内的软件程序和/或模块,以及调用存储在存储器609内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器610可包括一个或多个处理单元;优选的,处理器610可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
电子设备600还可以包括给各个部件供电的电源611(比如电池),优选的,电源611可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,电子设备600包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种电子设备,包括处理器610,存储器609,存储在存储器609上并可在所述处理器610上运行的计算机程序,该计算机程序被处理器610执行时实现上述音频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述音频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。

Claims (12)

1.一种音频处理方法,其特征在于,包括:
在电子设备接收到第一上行音频信号时,在所述第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放所述第二上行音频信号;
采集包含所述第二上行音频信号的环境声音信号,并从采集到的所述环境声音信号中分离出第一下行音频信号和所述超声波信号;
利用分离出的所述超声波信号,对所述第一下行音频信号进行回声抑制处理,得到第二下行音频信号;
发送所述第二下行音频信号至通讯对端。
2.根据权利要求1所述的音频处理方法,其特征在于,所述在电子设备接收到第一上行音频信号时,在所述第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号的步骤,包括:
在所述电子设备接收到所述第一上行音频信号时,将所述第一上行音频信号上采样至与所述超声波信号同频的音频信号;
将进行过上采样的所述第一上行音频信号与所述超声波信号进行混合,得到所述第二上行音频信号。
3.根据权利要求1所述的音频处理方法,其特征在于,所述利用分离出的所述超声波信号,对所述第一下行音频信号进行回声抑制处理,得到第二下行音频信号的步骤,包括:
获取分离出的所述超声波信号的延时参数和损耗参数;
根据所述超声波信号的延时参数和损耗参数以及预先保存的所述第一上行音频信号,生成所述第一上行音频信号的回声抑制信号;
利用所述回声抑制信号,消除所述第一下行音频信号中的回声信号,得到所述第二下行音频信号;
其中,预先保存的所述第一上行音频信号为在所述电子设备接收到所述第一上行音频信号时进行保存的。
4.根据权利要求3所述的音频处理方法,其特征在于,所述获取分离出的所述超声波信号的延时参数和损耗参数的步骤,包括:
确定分离出的所述超声波信号中的峰值;
根据所述峰值,计算所述超声波信号的延时参数和损耗参数。
5.根据权利要求1所述的音频处理方法,其特征在于,在所述采集包含所述第二上行音频信号的环境声音信号的步骤之后,以及所述从采集到的所述环境声音信号中分离出第一下行音频信号和所述超声波信号步骤之前,所述音频处理方法还包括:
检测所述环境声音信号中是否存在所述预设频率的超声波信号;
在所述环境声音信号中存在所述超声波信号时,进入从采集到的所述环境声音信号从分离出第一下行音频信号和所述超声波信号的步骤,在所述环境声音信号中不存在所述超声波信号时,直接发送所述环境声音信号至通讯对端。
6.一种电子设备,其特征在于,包括:
第一处理模块,用于在电子设备接收到第一上行音频信号时,在所述第一上行音频信号中混入预设频率的超声波信号,得到第二上行音频信号,并播放所述第二上行音频信号;
第二处理模块,用于采集包含所述第二上行音频信号的环境声音信号,并从采集到的所述环境声音信号中分离出第一下行音频信号和所述超声波信号;
第三处理模块,用于利用分离出的所述超声波信号,对所述第一下行音频信号进行回声抑制处理,得到第二下行音频信号;
发送模块,用于发送所述第二下行音频信号至通讯对端。
7.根据权利要求6所述的电子设备,其特征在于,所述第一处理模块包括:
第一处理单元,用于在所述电子设备接收到所述第一上行音频信号时,将所述第一上行音频信号上采样至与所述超声波信号同频的音频信号;
第二处理单元,用于将进行过上采样的所述第一上行音频信号与所述超声波信号进行混合,得到所述第二上行音频信号。
8.根据权利要求6所述的电子设备,其特征在于,所述第三处理模块包括:
获取单元,用于获取分离出的所述超声波信号的延时参数和损耗参数;
生成单元,用于根据所述超声波信号的延时参数和损耗参数以及预先保存的所述第一上行音频信号,生成所述第一上行音频信号的回声抑制信号;
第三处理单元,用于利用所述回声抑制信号,消除所述第一下行音频信号中的回声信号,得到所述第二下行音频信号;
其中,预先保存的所述第一上行音频信号为在所述电子设备接收到所述第一上行音频信号时进行保存的。
9.根据权利要求8所述的电子设备,其特征在于,所述获取单元包括:
确定子单元,用于确定所述分离出的超声波信号中的峰值;
计算单元,用于根据所述峰值,计算所述超声波信号的延时参数和损耗参数。
10.根据权利要求6所述的电子设备,其特征在于,所述电子设备还包括:
检测模块,用于检测所述环境声音信号中是否存在所述预设频率的超声波信号;
第四处理模块,用于在所述环境声音信号中存在所述超声波信号时,控制所述第二处理模块进入所述从采集到的环境声音信号从分离出第一下行音频信号和所述超声波信号的步骤,在不存在所述超声波信号时,控制发送模块直接发送所述环境声音信号。
11.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的音频处理方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的音频处理方法的步骤。
CN201711047149.5A 2017-10-31 2017-10-31 一种音频处理方法及电子设备 Active CN107785027B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711047149.5A CN107785027B (zh) 2017-10-31 2017-10-31 一种音频处理方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711047149.5A CN107785027B (zh) 2017-10-31 2017-10-31 一种音频处理方法及电子设备

Publications (2)

Publication Number Publication Date
CN107785027A CN107785027A (zh) 2018-03-09
CN107785027B true CN107785027B (zh) 2020-02-14

Family

ID=61432205

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711047149.5A Active CN107785027B (zh) 2017-10-31 2017-10-31 一种音频处理方法及电子设备

Country Status (1)

Country Link
CN (1) CN107785027B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112789576A (zh) * 2018-12-05 2021-05-11 深圳市欢太科技有限公司 音频播放的控制方法、装置、终端及计算机可读存储介质
CN112489671B (zh) * 2020-12-18 2024-04-16 深圳市潮流网络技术有限公司 回声数据消除方法及装置、终端设备、存储介质
CN113160790A (zh) * 2021-04-08 2021-07-23 维沃移动通信有限公司 回声消除方法、装置、电子设备及存储介质
CN113808609A (zh) * 2021-09-18 2021-12-17 展讯通信(上海)有限公司 回声检测方法及装置、计算机可读存储介质、终端设备
CN114760389B (zh) * 2022-06-16 2022-09-02 腾讯科技(深圳)有限公司 语音通话方法、装置、计算机存储介质及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103988487A (zh) * 2011-11-23 2014-08-13 高通股份有限公司 基于超声波运动检测的声学回声消除
CN104995679A (zh) * 2013-02-13 2015-10-21 美国亚德诺半导体公司 信号源分离
EP2945156A1 (en) * 2014-05-14 2015-11-18 Samsung Electronics Co., Ltd Audio signal recognition method and electronic device supporting the same
US9319633B1 (en) * 2015-03-19 2016-04-19 Cisco Technology, Inc. Ultrasonic echo canceler-based technique to detect participant presence at a video conference endpoint
CN106251878A (zh) * 2016-08-26 2016-12-21 彭胜 会务语音录入设备
CN107172313A (zh) * 2017-07-27 2017-09-15 广东欧珀移动通信有限公司 提高免提通话质量的方法、装置、移动终端及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005257619A (ja) * 2004-03-15 2005-09-22 Kinki Nippon Railway Co Ltd 携帯用の超音波探傷装置
US20100131268A1 (en) * 2008-11-26 2010-05-27 Alcatel-Lucent Usa Inc. Voice-estimation interface and communication system
US20160171988A1 (en) * 2014-12-15 2016-06-16 Wire Swiss Gmbh Delay estimation for echo cancellation using ultrasonic markers

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103988487A (zh) * 2011-11-23 2014-08-13 高通股份有限公司 基于超声波运动检测的声学回声消除
CN104995679A (zh) * 2013-02-13 2015-10-21 美国亚德诺半导体公司 信号源分离
EP2945156A1 (en) * 2014-05-14 2015-11-18 Samsung Electronics Co., Ltd Audio signal recognition method and electronic device supporting the same
US9319633B1 (en) * 2015-03-19 2016-04-19 Cisco Technology, Inc. Ultrasonic echo canceler-based technique to detect participant presence at a video conference endpoint
CN106251878A (zh) * 2016-08-26 2016-12-21 彭胜 会务语音录入设备
CN107172313A (zh) * 2017-07-27 2017-09-15 广东欧珀移动通信有限公司 提高免提通话质量的方法、装置、移动终端及存储介质

Also Published As

Publication number Publication date
CN107785027A (zh) 2018-03-09

Similar Documents

Publication Publication Date Title
CN107785027B (zh) 一种音频处理方法及电子设备
CN109078319B (zh) 一种游戏界面显示方法和终端
CN108196815B (zh) 一种通话声音的调节方法和移动终端
CN108551534B (zh) 多终端语音通话的方法及装置
CN109710349B (zh) 一种截屏方法及移动终端
CN109215683B (zh) 一种提示方法及终端
CN110012143B (zh) 一种受话器控制方法及终端
CN109639863B (zh) 一种语音处理方法及装置
CN108282759B (zh) 一种业务处理方法及移动通信终端
CN110990172A (zh) 一种应用分享方法、第一电子设备及计算机可读存储介质
CN111093137B (zh) 一种音量控制方法、设备及计算机可读存储介质
CN111182118B (zh) 一种音量调节方法及电子设备
CN111083297A (zh) 一种回声消除方法及电子设备
CN108521501B (zh) 语音输入方法及移动终端、计算机可读存储介质
CN107749306B (zh) 一种振动优化的方法及移动终端
CN109873894B (zh) 一种音量调节方法及移动终端
CN111683171A (zh) 音频输出方法及电子设备
CN109639738B (zh) 语音数据传输的方法及终端设备
CN109729220B (zh) 一种用户状态的推送方法及移动终端
CN109443261B (zh) 折叠屏移动终端折叠角度的获取方法及移动终端
CN111148081A (zh) 一种信息交互方法及电子设备
CN108093119B (zh) 一种陌生来电号码的标记方法及移动终端
CN108270928B (zh) 一种语音识别的方法及移动终端
CN108419283B (zh) 一种wifi热点扫描的方法及移动终端
CN108319440B (zh) 音频输出方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant