WO2021238354A1 - 一种抵消漏音的方法及电子设备 - Google Patents

一种抵消漏音的方法及电子设备 Download PDF

Info

Publication number
WO2021238354A1
WO2021238354A1 PCT/CN2021/081390 CN2021081390W WO2021238354A1 WO 2021238354 A1 WO2021238354 A1 WO 2021238354A1 CN 2021081390 W CN2021081390 W CN 2021081390W WO 2021238354 A1 WO2021238354 A1 WO 2021238354A1
Authority
WO
WIPO (PCT)
Prior art keywords
sound signal
electronic device
earpiece
speaker
sound
Prior art date
Application number
PCT/CN2021/081390
Other languages
English (en)
French (fr)
Inventor
张宁
郭李
张雨果
朱统
苏杰
李英明
Original Assignee
华为技术有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 华为技术有限公司 filed Critical 华为技术有限公司
Publication of WO2021238354A1 publication Critical patent/WO2021238354A1/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/19Arrangements of transmitters, receivers, or complete sets to prevent eavesdropping, to attenuate local noise or to prevent undesired transmission; Mouthpieces or receivers specially adapted therefor
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17853Methods, e.g. algorithms; Devices of the filter
    • G10K11/17854Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter

Abstract

本申请公开一种抵消漏音的方法及电子设备,可以抵消电子设备的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。其中,包括听筒和扬声器的第一电子设备可通过该听筒播放第一声音信号,并通过该扬声器播放第二声音信号;该第二声音信号与第一声音信号相位相反。该方法可以应用于电子设备通过听筒播放声音信号的过程中。

Description

一种抵消漏音的方法及电子设备
本申请要求于2020年05月29日提交国家知识产权局、申请号为202010476894.7、发明名称为“一种抵消漏音的方法及电子设备”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请实施例涉及音频技术领域,尤其涉及一种抵消漏音的方法及电子设备。
背景技术
语音通信是电子设备(如手机)的一项重要功能。电子设备与其他设备交互,为用户提供语音通信功能的过程中,电子设备的受话器(也可以称为“听筒”)可以将来自其他设备的音频电信号转换成声音信号,并输出(即播放)该声音信号。
但是,在输出声音信号的过程中,可能会出现听筒漏音的问题。其中,听筒漏音可能会导致上述语音通信内容被周围的人听到,发生用户隐私的泄露,影响用户的隐私安全。
发明内容
本申请提供一种抵消漏音的方法及电子设备,可以抵消电子设备的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
第一方面,本申请提供一种抵消漏音的方法,该方法可以应用于第一电子设备,该第一电子设备包括听筒和扬声器。该方法可以包括:第一电子设备通过听筒播放第一声音信号;通过扬声器播放第二声音信号。
其中,第二声音信号与第一声音信号相位相反。可以理解,对于一个声波(即声音信号)而言,相位(phase)是该声波在一定的时刻在其波形中的位置(如波峰、波谷、或者波峰与波谷之间的点)。相位可以认为是该声波在一定的时刻处于波峰、波谷、或者波峰与波谷之间的点的标度。例如,在一定时刻,当第一声音信号处于波峰时,第二声音信号则处于波谷;当第一声音信号处于波谷时,第二声音信号则处于波峰。
并且,声源不同的两个声波(即声音信号),如果在相同时刻的幅度、频率等参数均相同,但是这两个声波的相位相反;那么,这两个声波在传播过程中,便可以相互抵消。
由此可见,通过本方案,可以抵消电子设备的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
在第一方面的一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,具体包括:第二声音信号与第一声音信号的相位差为[180°-p,180°+p]。其中,p大于或等于0°,且p小于预设角度阈值。也就是说,p可以为0°,或者1°、2°、3°等任一接近于0°的值。其中,当p=0°时,第二声音信号与第一声音信号的相位差为180°。由此可见,p越接近于0°,本方案中,抵消电子设备的听筒漏音的效果越好。
在第一方面的一种可能的设计方式中,上述听筒设置在靠近第一电子设备的顶部 的位置,扬声器设置在第一电子设备的底部。听筒和扬声器在第一电子设备上设置的位置,使得通过本方案,可抵消第一电子设备周围预设区域的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
在第一方面的另一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,用于抵消听筒在第一电子设备周围的预设区域的漏音。
其中,上述预设区域可以包括:第一直线上或第一直线附近,与第一点之间的距离大于或等于预设距离的区域。该第一点为听筒所在位置与扬声器所在位置的连线的中点。该第一直线垂直于上述连线,且第一直线经过第一点。
一般而言,当其他用户的耳朵靠近第一电子设备(如其他用户的耳朵与第一电子设备之间的距离小于预设距离)时,该其他用户可以听到第一电子设备通过听筒播放的第一声音信号。上述预设区域包括了其他用户耳朵靠近第一电子设备时,该其他用户所处的区域。因此,本申请实施例中,第一电子设备通过听筒播放第一声音信号的同时,通过扬声器播放与第一声音信号反相位的第二声音信号,可以抵消听筒在手机第一电子设备周围预设区域的漏音。如此,便可以减少语音通信内容的泄露,从而可以保护用户的隐私安全。
在第一方面的另一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,用于抵消听筒播放的预设频率的漏音。其中,人声的频率范围大致为100赫兹(Hz)-10千赫兹(KHz)。本申请的方案,在不同频率抵消漏音的效果不同,在上述预设频率是漏音抵消的效果最好。
在第一方面的另一种可能的设计方式中,上述预设频率可以包括:100Hz-1KHz。
需要注意的是,虽然采用本申请实施例的方法,只能抵消听筒播放的部分频率的漏音,或者只能针对听筒播放的部分频率的漏音产生较好的抵消效果。但是,只要可以抵消听筒播放的部分频率,那么抵消的这部分频率的漏音便不会传播到其他用户的耳中,则不会被其他用户听到。如此,即使其他用户听到另一部分频率的漏音,也无法根据这另一部分频率的漏音获知语音通信的内容,从而可以保护用户的隐私安全。
在第一方面的另一种可能的设计方式中,上述第一电子设备通过听筒播放第一声音信号,可以包括:第一电子设备在预设语音通信状态,通过听筒播放来自第二电子设备的第一声音信号。
其中,上述预设语音通信状态为:第一电子设备被用户握持,与第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态;或者,第一电子设备被用户握持,且第一电子设备靠近用户的耳朵,与第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态。
在第一方面的另一种可能的设计方式中,上述第一电子设备还包括主麦克风(microphone,MIC)。虽然上述方法中,通过扬声器102播放第二声音信号,可抵消听筒的漏音;但是,第一电子设备(如手机)的主MIC与扬声器距离较近。该扬声器所播放的第二声音信号可能会被MIC采集(或拾取)到。在这种情况下,第一电子设备向第二电子设备发送的声音信号中则会夹杂上述第二声音信号。这样,会影响用户的语音通信质量。
基于此,上述方法还可以包括:第一电子设备采用第二声音信号,抵消主MIC采 集的声音信号中来自扬声器的干扰信号;或者,第一电子设备利用自适应回波抵消(adaptive echo cancellation,AEC)原理,抵消主MIC采集的声音信号中来自扬声器的干扰信号。
在第一方面的另一种可能的设计方式中,第一电子设备可以通过第三方的即时通讯应用(也称为聊天应用)接收来自第二电子设备的语音消息。然后,第一电子设备可显示即时通讯应用的聊天界面,该聊天界面包括来自第二电子设备的语音消息。响应于用户对该语音消息的点击操作,第一电子设备被用户握持,且第一电子设备靠近用户的耳朵时,第一电子设备可通过听筒播放第一声音信号。
第二方面,本申请提供一种电子设备,该电子设备是第一电子设备,该第一电子设备包括:处理器、听筒和扬声器。其中,处理器,用于向听筒传输第一声音信号,向扬声器传输第二声音信号。该第二声音信号与第一声音信号相位相反。听筒,用于播放第一声音信号。扬声器,用于播放第二声音信号。
在第二方面的一种可能的设计方式中,上述听筒设置在靠近第一电子设备的顶部的位置,扬声器设置在第一电子设备的底部。
在第二方面的另一种可能的设计方式中,上述处理器,用于向听筒传输第一声音信号,向扬声器传输第二声音信号,包括:处理器,用于在第一电子设备在预设语音通信状态时,向听筒传输第一声音信号,向扬声器传输第二声音信号。
其中,预设语音通信状态为:第一电子设备被用户握持,与第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态;或者,第一电子设备被用户握持,且第一电子设备靠近用户的耳朵,与第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态。
在第二方面的另一种可能的设计方式中,上述第一电子设备还包括主MIC。主MIC,用于采集第一电子设备周围的声音信号。上述处理器,还用于采用第二声音信号,抵消主MIC采集的声音信号中来自扬声器的干扰信号;或者,利用自适应回波抵消AEC原理,抵消主MIC采集的声音信号中来自扬声器的干扰信号。
在第二方面的另一种可能的设计方式中,上述第一电子设备还包括:显示屏。显示屏,用于显示即时通讯应用的聊天界面,聊天界面包括来自第二电子设备的语音消息。
其中,上述处理器,用于向听筒传输第一声音信号,向扬声器传输第二声音信号,包括:处理器,用于响应于用户对语音消息的点击操作,第一电子设备被用户握持,且第一电子设备靠近用户的耳朵时,向听筒传输第一声音信号,向扬声器传输第二声音信号。
在第二方面的另一种可能的设计方式中,上述第一电子设备还包括:通信模块。该通信模块,用于接收来自第二电子设备的第一数字音频信号。
其中,上述处理器,用于向听筒传输第一声音信号,向扬声器传输第二声音信号,包括:处理器,用于将第一数字音频信号转换为第一声音信号,并向听筒传输第一声音信号;将第一数字音频信号转换为第二数字音频信号,将第二数字音频信号转换为第二声音信号,并向扬声器传输第二声音信号。
其中,第一声音信号与第二声音信号均为模拟音频信号,第二数字音频信号与第 一数字音频信号相位相反。
在第二方面的另一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,包括:第二声音信号与第一声音信号的相位差为[180°-p,180°+p]。其中,p大于或等于0°,且p小于预设角度阈值。
在第二方面的另一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,用于抵消听筒在第一电子设备周围的预设区域的漏音。
其中,预设区域包括:第一直线上或第一直线附近,与第一点之间的距离大于或等于预设距离的区域;第一点为听筒所在位置与扬声器所在位置的连线的中点;第一直线垂直于连线,且第一直线经过第一点。
在第二方面的另一种可能的设计方式中,上述第二声音信号与第一声音信号相位相反,用于抵消听筒播放的预设频率的漏音。
在第二方面的另一种可能的设计方式中,上述预设频率包括:100Hz-1KHz。
第三方面,本申请提供一种芯片系统,该芯片系统应用于包括听筒、扬声器和存储器的电子设备。该芯片系统包括一个或多个接口电路和一个或多个处理器。该接口电路和处理器通过线路互联。该接口电路用于从存储器接收信号,并向处理器发送信号,该信号包括存储器中存储的计算机指令。当处理器执行计算机指令时,电子设备执行如第一方面及其任一种可能的设计方式所述的方法。
第四方面,本申请提供一种计算机可读存储介质,包括计算机指令。当该计算机指令在电子设备上运行时,使得电子设备执行如第一方面及其任一种可能的设计方式所述的方法。
第五方面,本申请提供一种计算机程序产品,当计算机程序产品在计算机上运行时,使得计算机执行如第一方面及其任一种可能的设计方式所述的方法。
可以理解地,上述提供的第二方面及其任一种可能的设计方式所述的电子设备,第三方面所述的芯片系统,第四方面所述的计算机存储介质,第五方面所述的计算机程序产品所能达到的有益效果,可参考如第一方面及其任一种可能的设计方式中的有益效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种手机的产品形态示意图;
图2为本申请实施例提供的一种抵消漏音的方法的应用场景示意图;
图3为本申请实施例提供的一种手机的硬件结构示意图;
图4为本申请实施例提供的一种抵消漏音的方法流程图;
图5为本申请实施例提供的一种手机的音频器件的硬件结构示意图;
图6A为常规技术中手机进行语音通信过程中通过听筒播放的声音信号的波形示意图;
图6B为本申请实施例提供的一种抵消漏音的方法中,听筒播放的声音信号和扬声器播放的声音信号相互抵消之后的波形示意图;
图7为本申请实施例提供的一种手机100的预设区域的示意图;
图8为本申请实施例提供的相位相反的两个声音信号的抵消效果示意图;
图9为本申请实施例提供的一种不同频率的声音信号的抵消效果示意图;
图10为本申请实施例提供的一种听筒和扬声器之间的距离与漏音抵消效果的示意图;
图11为本申请实施例提供的一种回声抵消AEC原理示意图;
图12为本申请实施例提供的一种芯片系统的结构示意图。
具体实施方式
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例提供一种抵消漏音的方法,该方法可以应用于电子设备进行语音通信的过程中。通过该方法,可以抵消用户手持电子设备进行语音通信过程中的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
其中,上述电子设备包括听筒(也称为受话器)和扬声器(也称为喇叭)。该听筒可设置在靠近电子设备顶部的位置,该听筒用于在电子设备进行语音通信的过程中,为用户播放语音通信的对方用户的声音信号(称为第一声音信号)。上述扬声器可以是设置在电子设备底部的扬声器(speaker,SPK),可称为下SPK。
例如,如图1所示,以上述电子设备是手机100为例,手机100包括听筒101和扬声器102(即下SPK)。听筒101设置在手机100上,靠近手机100顶部的位置,扬声器102设置在手机100的底部。
请参考图2,以电子设备是手机100为例,示出本申请实施例提供的抵消漏音的方法的应用场景示意图。
如图2所示,用户A手持手机100进行语音通信的过程中,手机100的听筒101贴近用户A的耳朵。该听筒101用于播放语音通信的对方用户的第一声音信号。该第一声音信号不仅可以进入用户A的耳朵,被用户A听到;还可以向其他方向传播(即传播听筒漏音声波)。如此,该第一声音信号则可能会被位于该用户A周围、距离手机100较近的区域(即预设区域)内其他用户听到。
基于此,在进行语音通信的过程中,手机100可根据声偶极子辐射现象,控制扬声器102发出与上述第一声音信号反相位的第二声音信号(即反相位声波),以抵消上述第一声音信号在手机100周围预设区域(包括图2所示的抵消点1)的漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
其中,上述第二声音信号与第一声音信号反相位,具体是指:第二声音信号与第一声音信号的相位差约180°。其中,上述预设区域,以及在手机100进行语音通信的过程中,抵消第一声音信号在手机100周围预设区域的漏音的原理,可以参考以下实施例中的详细描述,这里不予赘述。
需要说明的是,上述电子设备(如手机100)可以包括多个扬声器。示例性的,该手机100不仅可以包括上述扬声器102(即下SPK),该手机100还可以包括另一个扬声器(称为上SPK)。例如,该上SPK可以设置在手机100的正面,靠近上述听筒101的位置。本申请实施例中,手机100可使用扬声器102(即下SPK)抵消听筒101的漏音。
示例性的,本申请实施例中的电子设备可以是手机、平板电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本,以及蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmented reality,AR)\虚拟现实(virtual reality,VR)设备等具备语音通信功能的设备,本申请实施例对该电子设备的具体形态不作特殊限制。
请参考图3,以电子设备是手机100为例,示出手机100的结构示意图。如图3所示,手机100可以包括:处理器310,外部存储器接口320,内部存储器321,通用串行总线(universal serial bus,USB)接口330,充电管理模块340,电源管理模块341,电池342,天线1,天线2,移动通信模块350,无线通信模块360,音频模块370,扬声器370A,受话器(即听筒)370B,麦克风170C,耳机接口370D,传感器模块380,按键390,马达391,指示器392,摄像头393,显示屏394,以及用户标识模块(subscriber identification module,SIM)卡接口395等。
其中,上述传感器模块可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器和骨传导传感器等传感器。
可以理解的是,本实施例示意的结构并不构成对手机100的具体限定。在另一些实施例中,手机100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器310可以包括一个或多个处理单元,例如:处理器310可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
控制器可以是手机100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器310中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器310中的存储器为高速缓冲存储器。该存储器可以保存处理器310刚用过或循环使用的指令或数据。如果处理器310需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器310的等待时间,因而提高了系统的效率。
在一些实施例中,处理器310可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuit sound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purpose input/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
可以理解的是,本实施例示意的各模块间的接口连接关系,只是示意性说明,并 不构成对手机100的结构限定。在另一些实施例中,手机100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块340用于从充电器(如无线充电器或有线充电器)接收充电输入,为电池342充电。电源管理模块341用于连接电池342,充电管理模块340与处理器310。电源管理模块341接收电池342和/或充电管理模块340的输入,为电子设备的各个器件供电。
手机100的无线通信功能可以通过天线1,天线2,移动通信模块350,无线通信模块360,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。手机100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
在一些实施例中,手机100的天线1和移动通信模块350耦合,天线2和无线通信模块360耦合,使得手机100可以通过无线通信技术与网络以及其他设备通信。上述移动通信模块350可以提供应用在手机100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块350可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块350可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。
移动通信模块350还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块350的至少部分功能模块可以被设置于处理器310中。在一些实施例中,移动通信模块350的至少部分功能模块可以与处理器310的至少部分模块被设置在同一个器件中。
无线通信模块360可以提供应用在手机100上的包括无线局域网(wireless local area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。
无线通信模块360可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块360经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器310。无线通信模块360还可以从处理器310接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
当然,上述无线通信模块360也可以支持手机100进行语音通信。例如,手机100可以通过无线通信模块360接入Wi-Fi网络,然后使用任一种可提供语音通信服务的应用程序与其他设备进行交互,为用户提供语音通信服务。例如,上述可提供语音通信服务的应用程序可以是即时通讯应用。
手机100可以通过GPU,显示屏394,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏394和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器310可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。显示屏394用于显示图像,视频等。
手机100可以通过ISP,摄像头393,视频编解码器,GPU,显示屏394以及应用处理器等实现拍摄功能。ISP用于处理摄像头393反馈的数据。在一些实施例中,ISP可以设置在摄像头393中。摄像头393用于捕获静态图像或视频。在一些实施例中,手机100可以包括1个或N个摄像头393,N为大于1的正整数。
外部存储器接口320可以用于连接外部存储卡,例如Micro SD卡,实现扩展手机100的存储能力。内部存储器321可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器310通过运行存储在内部存储器321的指令,从而执行手机100的各种功能应用以及数据处理。例如,在本申请实施例中,处理器310可以通过执行存储在内部存储器321中的指令,内部存储器321可以包括存储程序区和存储数据区。
手机100可以通过音频模块370,扬声器370A,受话器(即听筒)370B,麦克风170C,耳机接口370D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块370用于将数字音频信号转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块370还可以用于对音频信号编码和解码。在一些实施例中,音频模块370可以设置于处理器310中,或将音频模块370的部分功能模块设置于处理器310中。扬声器370A,也称“喇叭”,用于将音频电信号转换为声音信号。受话器370B,也称“听筒”,用于将音频电信号转换成声音信号。麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。耳机接口370D用于连接有线耳机。耳机接口370D可以是USB接口330,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
其中,该受话器370B(即“听筒”)可以是图1所示的听筒101。上述扬声器370A可以是图1所示的扬声器102。上述麦克风170C可以是图1所示的MIC 103,该麦克风103可以是手机100的主MIC。
示例性的,本申请实施例中,音频模块370可以将移动通信模块350和无线通信模块360接收到的音频电信号转换为声音信号(即第一声音信号)。由音频模块370的受话器370B(即“听筒”)播放该第一声音信号。如此,用户便可以听到该第一声音信号。同时该受话器370B也可能会出现漏音的情况。基于此,本申请实施例中,可以通过扬声器370A发出与上述第一声音信号反相位的第二声音信号,以抵消手机100周围预设区域的漏音。
按键390包括开机键,音量键等。马达391可以产生振动提示。指示器392可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。SIM卡接口395用于连接SIM卡。手机100可以支持1个或N个SIM卡接口,N为大于1的正整数。
以下实施例中的方法均可以在具有上述硬件结构的手机100中实现。如图1所示,手机100包括听筒101和扬声器102。
本申请实施例提供一种抵消漏音的方法,该方法可应用于手机100。该手机100是第一电子设备。如图4所示,该抵消漏音的方法可以包括S401-S402。
S401、手机100通过听筒101播放第一声音信号。
在一种应用场景中,上述第一声音信号可以是手机100中保存的任一个音频数据。例如,该第一声音信号可以是手机100中保存的录音数据或歌曲数据等。
在另一种应用场景中,手机100可以通过听筒101播放来自手机400的第一声音信号。具体的,手机100可以在预设语音通信状态,通过听筒101播放来自手机400的第一声音信号。该手机400是第二电子设备。
在一些实施例中,手机100处于预设语音通信状态具体是指:该手机100被用户握持,且该手机100与其他电子设备(如手机400)进行语音通信的状态。例如,当手机100如图2所示被用户A握持,与手机400进行语音通信时,则可以称该手机100处于预设语音通信状态。
示例性的,手机100可以通过手机100上的一个或多个传感器(如设置手机100侧边的触摸传感器或电容传感器)等,检测到手机100被用户握持。或者,手机100可以根据设置在手机100的侧边的天线的反射系数,检测到手机100被用户握持。其中,手机100检测手机100被用户握持的具体方法,可以参考常规技术中的相关介绍,本申请实施例这里不予赘述。并且,手机100检测手机100与其他电子设备进行语音通信的方法,也可以参考常规技术中的相关介绍,本申请实施例这里不予赘述。
在另一些实施例中,手机100处于预设语音通信状态具体是指:该手机100被用户握持,且该手机100靠近人体(如贴近人耳),与其他电子设备(如手机400)进行语音通信的状态。其中,手机100可以通过距离传感器、环境光传感器或温度传感器等一个或多个传感器,检测手机100是否靠近人体。例如,该距离传感器、环境光传感器或温度传感器等一个或多个传感器,可以设置在手机100的正面,靠近上述听筒101的位置。其中,手机100通过上述一个或多个传感器检测手机100是否靠近人体的具体方法,可以参考常规技术中的相关介绍,本申请实施例这里不予赘述。
由上述实施例可知:从用户(如手机A)的角度来看,手机100处于上述预设语音通信状态是指:用户A手持手机100,并使用手机100与其他用户(如用户B)进行语音通信的状态。例如,如图2、图6A或图6B所示的手机100处于上述预设语音通信状态。
需要说明的是,上述实施例中所述的,手机100处于预设语音通信状态,可以是手机100通过手机100的系统应用“电话”与其他电子设备进行语音通信的状态;还可以是手机100通过第三方的即时通讯应用(也称为聊天应用)与其他电子设备进行语音通信的状态。
在另一种应用场景中,手机100可以通过听筒101播放来自手机400的第一声音信号。具体的,手机100可以通过第三方的即时通讯应用(也称为聊天应用)接收来自手机400的语音消息;手机100可以显示即时通讯应用的聊天界面,该聊天界面包括来自手机400的语音消息;响应于用户对该语音消息的点击操作,手机100可通过听筒101播放来自手机400的第一声音信号。
例如,响应于用户对聊天应用的聊天界面中语音消息的点击操作,当该手机100靠近人体(如贴近耳朵)时,手机100可通过听筒101播放来自手机400的第一声音信号。
需要说明的是,本申请实施例中手机100通过听筒101播放来自手机400的第一声音信号的具体应用场景,包括但不限于上述应用场景,其他的应用场景这里不予赘述。
可以理解,手机100可以按照用户的选择,采用以下两种播放方式中的任一种播放方式播放来自手机400(即用户B的手机)的第一声音信号。播放方式(1):手机100通过听筒101播放来自手机400的第一声音信号。播放方式(2):手机100通过手机100的扬声器(如扬声器102)播放来自手机400的第一声音信号。需要注意的是,本申请实施例的方法,适用于手机100通过听筒101播放第一声音信号的场景,即上述播放方式(1)对应的场景。
S402、手机100通过扬声器102播放第二声音信号。该第二声音信号与第一声音信号的相位相反。
其中,上述第二声音信号和第一声音信号均为模拟音频信号。第二声音信号与第一声音信号相位相反,具体可以为:第二声音信号与第一声音信号的相位差约180°。例如,第二声音信号与第一声音信号的相位差可以为[180°-p,180°+p]。其中,p小于预设角度阈值。例如,p可以为0°,或者1°、2°、3°等任一接近于0°的值。上述预设角度阈值可以为1°、2°或者3°等任一接近于0°的值。
需要说明的是,上述第一声音信号是来自手机400的声音信号(记为声音信号1)。具体的,手机400可以采集手机400的用户B的声音信号(即模拟音频信号,记为声音信号2),然后手机400可将该声音信号2转换为数字音频信号1(即第一数字音频信号)。手机400可向手机200发送该数字音频信号1。手机200接收到该数字音频信号1之后,可将该数字音频信号1转换为声音信号(记为声音信号1,即上述第一声音信号),然后通过听筒101播放该声音信号1。
本实施例通过如图5所示的手机100的音频器件的硬件结构,介绍手机100得到第一声音信号并通过听筒101(如扬声器102)播放第一声音信号,通过扬声器102播放第二声音信号的原理。
如图5所示,手机100的音频器件可以包括音频芯片501、音频功放芯片502、音频功放芯片503、扬声器102、听筒101、主MIC 103和副MIC 504等。图5所示的音频芯片501可以通过I2S接口连接音频功放芯片502和音频功放芯片503。
其中,该音频芯片501可接收来自手机100的其他器件的数字音频信号1。该数字音频信号1(即第一数字音频信号)是手机100的通信模块(如移动通信模块350)接收来自手机400的。上述主MIC 103和副MIC 504的详细描述,可参考以下实施例中的描述,这里不予赘述。
在上述播放方式(1)中,该音频芯片501接收到上述数字音频信号1后,可向音频功放芯片503传输数字音频信号1,并向音频功放芯片502传输与该数字音频信号1反相位的数字音频信号2(即第二数字音频信号)。其中,数字音频信号1与数字音频信号2反相位,具体是指:数字音频信号1与数字音频信号2的相位相差180°。
然后,音频功放芯片503可对该数字音频信号1进行数模转换和功率放大等操作,以得到上述第一声音信号(即模拟音频信号,如声音信号1)。然后,音频功放芯片503可向听筒101传输该第一声音信号,由听筒101播放该第一声音信号。
同时,音频功放芯片503可对该数字音频信号2进行数模转换和功率放大等操作,以得到上述第二声音信号(即模拟音频信号,如声音信号2)。然后,音频功放芯片503可向扬声器102传输该第二声音信号,由扬声器102播放该第二声音信号。
本实施例通过如图6A、图6B所示的声音信号的波形示意图,说明本申请实施例中第二声音信号抵消听筒漏音的原理。
一般而言,声音信号(即声波)在没有障碍物阻挡的情况下的波形为球面波。当存在障碍物阻挡的情况下,声音信号的波形也近似于球面波。例如,请参考图6A,其示出手机100在进行语音通信过程中,通过听筒101播放的第一声音信号的波形示意图。如图6A所示,第一声音信号的波形601近似于一个球面波。
如图6A所示,当其他用户(如用户C)距离用户A较近(即用户C与用户A之间的距离小于预设距离)时,上述第一声音信号则可以传播至用户C的耳中,被用户C听到。例如,上述预设距离可以为50厘米(cm)、60cm或者55cm等任一数值。本申请实施例中以预设距离为50cm为例,介绍本申请实施例的方法。如此,则能会导致用户A隐私的泄露,影响用户A的隐私安全。本申请实施例中,在手机100通过听筒101播放第一声音信号的同时,手机100可执行S402,以抵消听筒101的漏音。
其中,第二声音信号与第一声音信号的相位相反。可以理解,对于一个声波(即声音信号)而言,相位(phase)是该声波在一定的时刻在其波形中的位置(如波峰、波谷、或者波峰与波谷之间的点)。相位可以认为是该声波在一定的时刻处于波峰、波谷、或者波峰与波谷之间的点的标度。例如,在一定时刻,当第一声音信号处于波峰时,第二声音信号则处于波谷;当第一声音信号处于波谷时,第二声音信号则处于波峰。
并且,声源不同的两个声波(即声音信号),如果在相同时刻的幅度、频率等参数均相同,但是这两个声波的相位相反;那么,这两个声波在传播过程中,在特定位置(也称为预设区域)和角度便可以相互抵消。
由图6A所示,上述第一声音信号的波形601近似于一个球面波。但是,在本申请实施例中,上述第一声音信号在传播的过程中,在一些位置(也称为预设区域)会遇到与该第一声音信号反相位的第二声音信号。此时,由于第二声音信号与第一声音信号的相位相反,该第二声音信号与第一声音信号则可以在上述预设区域相互抵消。如此,上述第一声音信号的波形在上述位置,则可能会因为第二声音信号的抵消而发生变化。例如,第一声音信号的波形由图6A所示的601变化为图6B所示的602。图6B所示的波形603是第二声音信号被第一声音信号抵消后的波形。
如图6B所示,第一声音信号与第二声音信号在传播的过程中,在图6B所示的虚线所在区域(即预设区域)可以相互抵消,从而可以减少第一声音信号在该预设区域的漏音。如此,如图6B所示,用户C处于上述抵消漏音的预设区域,因此无法听到听筒101所播放的第一声音信号,可以保护用户A的隐私不被泄露。
本申请实施例这里介绍上述预设区域,即可抵消漏音的位置。一般而言,手机100通过听筒101播放第一声音信号时,该手机100被竖屏握持。例如,手机100的听筒101与扬声器102的相对位置如图7所示。如图7所示,O点(即第一点)是听筒101和扬声器102所在位置的连线的中点;直线L(即第一直线)垂直于听筒101和扬声 器102所在位置的连线,且直线L经过O点。其中,上述预设区域可以包括图7所示的直线L上或直线L附近的白色区域。由实验数据可知:本申请实施例的方法,可抵消图7所示的直线L上或直线L附近,与O点的距离约为预设距离(如50cm)的区域的漏音。也就是说,上述预设区域可以包括图7所示的直线L上或直线L附近,与O点的距离约为预设距离(如50cm)的区域。
一般而言,当用户C的耳朵靠近手机100(如用户C的耳朵与手机100之间的距离小于预设距离)时,该用户C可以听到手机100通过听筒101播放的声音信号。上述预设区域包括了用户C耳朵靠近手机100时,该用户C(或者该用户C的耳朵)所处的区域。因此,本申请实施例中,手机100通过听筒101播放第一声音信号的同时,通过扬声器102播放与第一声音信号反相位的第二声音信号,可以抵消听筒101在手机100周围预设区域的漏音。如此,便可以减少语音通信内容的泄露,从而可以保护用户的隐私安全。
其中,人声的频率范围大致为100赫兹(Hz)-10千赫兹(KHz)。在用户A与用户B进行语音通话的过程中,用户B的声音信号(即上述第一声音信号)的频率可以是实时变化的。并且,上述第一声音信号的强度也可以是实时变化的。其中,第一声音信号的强度的单位为分贝(dB)。需要注意的是,相位相反的两个声音信号在不同频率的抵消效果可以不同。
本申请实施例这里结合图8,说明频率对相位相反的两个声音信号的抵消效果的影响。其中,图8所示的虚线801、实线802和虚线803均为监听设备模拟图7所示的用户C,在手机100的预设区域(如图7所示的直线L上的C点)所监听到的声音信号(即漏音)的变化情况。
具体的,图8所示的虚线801示出手机100仅通过听筒101播放第一声音信号的情况(简称情况1)下,监听设备在上述C点所监听到的声音信号(即漏音)的变化情况。图8所示的实线802示出手机100通过听筒101播放第一声音信号,并通过扬声器102播放第二声音信号的情况(简称情况2)下,监听设备在上述C点所监听到的声音信号(即漏音)的变化情况。图8所示的虚线803示出手机100通过扬声器102播放第二声音信号的情况(简称情况3)下,监听设备在上述C点所监听到的声音信号(即漏音)的变化情况。
对比图8所示的虚线801和虚线803可知:在上述情况1和情况3下,监听设备所监听到的声音信号的差异较小。
对比图8所示的虚线801和实线802可知:在上述情况1和情况2下,监听设备所监听到的声音信号的差异较大。如图8所示,在100Hz-1KHz(预设频率)之间,在情况2(即采用本申请的方法进行漏音抵消的情况)下,监听设备所监听到的声音信号的强度明显降低。如图8所示,实线802上,当声音信号(即漏音)的频率为300Hz时,该声音信号的强度最低,漏音抵消的效果最好。
本申请实施例这里结合图9,说明频率对相位相反的两个声音信号的抵消效果的影响。图9中的(a-1)示出手机100仅通过听筒101播放频率为100Hz的第一声音信号的情况下,第一声音信号的仿真波形示意图;图9中的(a-2)示出手机100通过听筒101播放频率为100Hz的第一声音信号,并通过扬声器102播放频率为100Hz的第 二声音信号的情况下,第一声音信号和第二声音信号的仿真波形示意图。图9中的(a-2)中虚线区域901为手机100的预设区域。
图9中的(b-1)示出手机100仅通过听筒101播放频率为500Hz的第一声音信号的情况下,第一声音信号的仿真波形示意图;图9中的(b-2)示出手机100通过听筒101播放频率为500Hz的第一声音信号,并通过扬声器102播放频率为500Hz的第二声音信号的情况下,第一声音信号和第二声音信号的仿真波形示意图。图9中的(b-2)中虚线区域902为手机100的预设区域。
图9中的(c-1)示出手机100仅通过听筒101播放频率为1KHz的第一声音信号的情况下,第一声音信号的仿真波形示意图;图9中的(c-2)示出手机100通过听筒101播放频率为1KHz的第一声音信号,并通过扬声器102播放频率为1KHz的第二声音信号的情况下,第一声音信号和第二声音信号的仿真波形示意图。图9中的(c-2)中虚线区域903为手机100的预设区域。
图9中的(d-1)示出手机100仅通过听筒101播放频率为2KHz的第一声音信号的情况下,第一声音信号的仿真波形示意图;图9中的(d-2)示出手机100通过听筒101播放频率为2KHz的第一声音信号,并通过扬声器102播放频率为2KHz的第二声音信号的情况下,第一声音信号和第二声音信号的仿真波形示意图。
对比图9中的(a-1)、图9中的(a-2)、图9中的(b-1)、图9中的(b-2)、图9中的(c-1)、图9中的(c-2)、图9中的(d-1)、图9中的(d-2)可知:采用本申请实施例的方法,可抵消手机100的预设区域内,听筒101播放的频率为100Hz、500Hz或1KHz的漏音。但是,无法抵消手机100的预设区域内,听筒101播放的频率为2KHz的漏音。
综上所述,采用本申请实施例的方法,可以抵消手机100的预设区域内,听筒101播放的部分频率的漏音。换言之,采用本申请实施例的方法,在手机100的预设区域内,对于听筒101播放的部分频率的漏音可以产生较好的抵消效果。
由上述描述可知:人声的频率范围大致为100Hz-10KHz。在用户A与用户B进行语音通话的过程中,用户B的声音信号(即上述第一声音信号)的频率是实时变化的。也就是说,在用户A与用户B进行语音通话的过程中,手机100的听筒101可能会播放100Hz-10KHz这一频率范围中任一频率的声音信号。需要注意的是,虽然采用本申请实施例的方法,只能抵消听筒101播放的部分频率的漏音,或者只能针对听筒101播放的部分频率的漏音产生较好的抵消效果;但是,只要可以抵消听筒101播放的部分频率,那么抵消的这部分频率的漏音便不会传播到其他用户(如上述用户C)的耳中,则不会被用户C听到。如此,即使用户C听到另一部分频率的漏音,也无法根据这另一部分频率的漏音获知语音通信的内容,从而可以保护用户的隐私安全。
由此可见,通过本申请实施例的方法,可以有效抵消电子设备的听筒漏音,减少语音通信内容的泄露,从而可以保护用户的隐私安全。
需要说明的是,上述第一声音信号的声源(即听筒101)与第二声音信号的声源(即扬声器102)之间的距离,会影响漏音抵消的效果。
请参考图10,其示出相位相反的两个声音信号(如声音信号a和声音信号b)的声源之间的距离分别为10毫米(mm)、100mm和158mm时,这两个声音信号的抵消效 果示意图。
如图10所示,在声音信号a和声音信号b的频率一定(如频率为100Hz、500Hz、3KHz或6KHz中任一值)的情况下,声音信号a的声源和声音信号b的声源之间的距离为10mm时,声音信号a和声音信号b的抵消效果最好。其中,图10中的黑色区域为声音信号a和声音信号b相互抵消的区域。也就是说,相位相反的两个声音信号的声源距离越近,这两个声音信号的抵消效果越好。
但是,如图10所示,声音信号a的声源和声音信号b的声源之间的距离为100mm或158mm时,声音信号a和声音信号b在预设区域也有一定的抵消效果。其中,预设区域的详细描述可参考上述实施例中的相关介绍,这里不予赘述。
其中,目前较大尺寸的手机(如屏幕尺寸较大的手机)的长度约为158mm,即设置在手机顶部的听筒与设置在手机底部的扬声器之间的距离约为158mm。由图10可知,针对这类手机,采用本申请实施例的方法,可有效抵消手机的预设区域内的听筒漏音,可以减少语音通信内容的泄露,从而可以保护用户的隐私安全。
并且,按照图10所示的抵消效果,听筒与扬声器之间的距离越小,则漏音抵消效果越好。因此,针对听筒与扬声器之间的距离小于158mm的手机,采用本申请实施例的方法,可以得到相比于图10所示158mm更好的漏音抵消效果。由此可见,针对目前各个尺寸的手机,采用本申请实施例的方法,均可有效抵消手机的预设区域内的听筒漏音,可以减少语音通信内容的泄露,从而可以保护用户的隐私安全。
在一些实施例中,手机100处于上述预设语音通信状态时,为了减少语音通信内容的泄露,只要通过听筒101播放第一声音信号,便可以通过扬声器102播放第二声音信号,以抵消听筒101在预设区域的漏音。
具体的,图5所示的音频芯片501只要通过I2S接口向音频功放芯片502发送数字音频信号1,就可以通过I2S接口向音频功放芯片503发送与数字音频信号1相位相反的数字音频信号2。如此,在音频功放芯片502将数字音频信号1转换为第一声音信号,并由听筒101播放该第一声音信号的同时;音频功放芯片503可以将数字音频信号2转换为第二声音信号,并由扬声器102播放该第二声音信号。
但是,当手机100的音量较小时,听筒漏音并不会很严重。图6A或图6B所示的用户C需要非常靠近手机100才可以听到手机100的语音通信内容。此时,用户C的窃听行为很容易被用户A发现。在这种情况下,用户A可以主动远离用户C以减少语音通信内容的泄露;而不需要通过扬声器102播放第二声音信号,以抵消听筒101在预设区域的漏音。毕竟,通过扬声器102播放第二声音信号,可能会增大手机100的功耗;该第二声音信号还可能被手机100的主MIC 103采集到,影响语音通信质量。
基于此,在另一些实施例中,手机100可以判断手机100的听筒101的当前音量是否大于预设音量阈值。如果听筒101的当前音量大于预设音量阈值,手机100则可以执行S402。如果听筒101的当前音量小于或等于预设音量阈值,手机100则不需要执行S402。
在该实施例中,手机100可以在听筒101的当前音量大于预设音量阈值的情况下,即听筒101漏音的可能性较大的情况下,通过扬声器102播放第二声音信号以抵消听筒101在预设区域的漏音。
可以理解的是,虽然执行S402通过扬声器102播放第二声音信号,可抵消听筒101的漏音;但是,如图1所示,手机100的主MIC 103与扬声器102距离较近。该扬声器102所播放的第二声音信号可能会被MIC 103采集(或拾取)到。在这种情况下,手机100向手机400发送的声音信号中则会夹杂上述第二声音信号。这样,会影响用户的语音通信质量。
在一些实施例中,手机100(如手机100的处理器,如图5所示的音频芯片的处理器)可以直接采用第二声音信号抵消主MIC 103采集的声音信号中来自扬声器102的干扰信号,以减少第二声音信号对语音通话的影响。
在另一些实施例中,手机100可以利用AEC原理,减少上述第二声音信号对语音通话的影响。
可以理解,由于手机100的主MIC 103与扬声器102距离较近,且相对位置固定;因此,扬声器102播放的第二声音信号经过一定的回声路径(称为真实回声路径)后,可被主MIC 103采集(或拾取)到。
本申请实施例中,手机100(如手机100的处理器,如图5所示的音频芯片的处理器)可使用不同的自适应滤波算法调整滤波器的权值向量,以估计出一个逼近于真实回声路径的近似回声路径,从而得到估计的回声信号(相当于主MIC 103所采集的经过真实回声路径传播的第二声音信号),并在主MIC 103所采集的混合信号(包括用户A的语音信号、环境噪声和经过真实回声路径传播的第二声音信号等)中除去估计的回声信号(相当于主MIC 103所采集的经过真实回声路径传播的第二声音信号),以消除第二声音信号对语音通话的影响。
请参考图11,其示出AEC的原理框图。图11所示的x(n)为远端信号,即扬声器102播放的第二声音信号。x(n)可经过未知的回声路径ω(n),得到y(n)=x(n)*ω(n)。其中,该未知的回声路径ω(n)可以是手机100中预先设置的一个回声路径,或者该ω(n)可以是手机100随机选择的一个回声路径。y(n)再加上观测噪声v(n),可得到期望信号d(n)=y(n)+v(n)。其中,观测噪声v(n)可以是手机100周围的环境噪声。该观测噪声v(n)可以是图5所示的手机的副MIC 504采集(或拾取)的。x(n)还可经过自适应滤波器得到估计的回声信号
Figure PCTCN2021081390-appb-000001
与期望信号d(n)相减得到误差信号
Figure PCTCN2021081390-appb-000002
Figure PCTCN2021081390-appb-000003
其中,误差信号e(n)越小,表示自适应滤波算法所估计的回声路径越接近于上述真实回声路径。
本申请实施例中,手机100可采用特定的自适应算法调整滤波器的权值向量,以使估计的回声路径
Figure PCTCN2021081390-appb-000004
逐渐接近于真实回声路径。然后,手机100便可以根据接近于真实回声路径的
Figure PCTCN2021081390-appb-000005
和第二声音信号x(n)得到估计的回声信号。最后,从主MIC 103所采集的混合信号中除去估计的回声信号,以消除第二声音信号对语音通话的影响。
需要说明的是,本申请实施例中,手机100消除第二声音信号对语音通话的影响的方法,包括但不限于上述实施例所述的方法,其他用于消除第二声音信号对语音通话的影响的方法可参考常规技术中的相关介绍,这里不予赘述。
本申请实施例提供的方法,不仅可以通过扬声器102播放的第二声音信号抵消用户手持电子设备进行语音通信过程中的听筒漏音,减少语音通信内容的泄露,保护用户的隐私安全;还可以消除上述第二声音信号对语音通话的影响,保证语音通话质量。
本申请另一些实施例提供了一种电子设备,该电子设备可以包括:处理器、存储器、听筒和扬声器。上述存储器、存储器、听筒和扬声器与处理器耦合。上述存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令。当处理器执行计算机指令时,电子设备可执行上述方法实施例中手机所执行的功能或者步骤。该电子设备的结构可以参考图3所示的手机100的结构。
其中,上述处理器可以包括图3所示的处理器310,以及图3所示的音频模块370。其中,音频模块370可以包括图5所示的音频芯片501、音频功放芯片502和音频功放芯片503。相应的图3所示的听筒370B可以是图5所示的听筒101,图3所示的麦克风370C可以包括图5所示的主MIC 103,图3所示的扬声器370A可以是图5所示的扬声器102。
本申请实施例还提供一种芯片系统,该芯片系统可以应用于包括听筒、扬声器和存储器的电子设备。该电子设备可以通过听筒播放第一声音信号,通过扬声器播放第二声音信号。
例如,图12所示的芯片系统1200可以应用于包括听筒、扬声器和存储器的电子设备。该芯片系统1200包括至少一个处理器1201和至少一个接口电路1202。处理器1201和接口电路1202可通过线路互联。例如,接口电路1202可用于从其它装置(例如电子设备的存储器)接收信号。又例如,接口电路1202可用于向其它装置(例如处理器1201)发送信号。示例性的,接口电路1202可读取存储器中存储的指令,并将该指令发送给处理器1201。当所述指令被处理器1201执行时,可使得电子设备执行上述实施例中的各个步骤。当然,该芯片系统还可以包含其他分立器件,本申请实施例对此不作具体限定。
本申请实施例还提供一种计算机存储介质,该计算机存储介质包括计算机指令,当所述计算机指令在上述电子设备上运行时,使得该电子设备执行上述方法实施例中手机100执行的各个功能或者步骤。
本申请实施例还提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行上述方法实施例中手机执行的各个功能或者步骤。
通过以上实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施 例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何在本申请揭露的技术范围内的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。

Claims (22)

  1. 一种抵消漏音的方法,其特征在于,应用于第一电子设备,所述第一电子设备包括听筒和扬声器,所述方法包括:
    所述第一电子设备通过所述听筒播放第一声音信号;
    所述第一电子设备通过所述扬声器播放第二声音信号,所述第二声音信号与所述第一声音信号相位相反。
  2. 根据权利要求1所述的方法,其特征在于,所述听筒设置在靠近所述第一电子设备的顶部的位置,所述扬声器设置在所述第一电子设备的底部。
  3. 根据权利要求1或2所述的方法,其特征在于,所述第一电子设备通过所述听筒播放第一声音信号,包括:
    所述第一电子设备在预设语音通信状态,通过所述听筒播放来自第二电子设备的所述第一声音信号;
    其中,所述预设语音通信状态为:所述第一电子设备被用户握持,与所述第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态;或者,所述第一电子设备被用户握持,且所述第一电子设备靠近所述用户的耳朵,与所述第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态。
  4. 根据权利要求3所述的方法,其特征在于,所述第一电子设备还包括主麦克风MIC;所述方法还包括:
    所述第一电子设备采用所述第二声音信号,抵消所述主MIC采集的声音信号中来自所述扬声器的干扰信号;
    或者,
    所述第一电子设备利用自适应回波抵消原理,抵消所述主MIC采集的声音信号中来自所述扬声器的干扰信号。
  5. 根据权利要求1或2所述的方法,其特征在于,在所述第一电子设备通过所述听筒播放第一声音信号之前,所述方法还包括:
    所述第一电子设备显示即时通讯应用的聊天界面,所述聊天界面包括来自第二电子设备的语音消息;
    其中,所述第一电子设备通过所述听筒播放来自第二电子设备的第一声音信号,包括:
    响应于用户对所述语音消息的点击操作,所述第一电子设备被用户握持,且所述第一电子设备靠近所述用户的耳朵时,所述第一电子设备通过所述听筒播放所述第一声音信号。
  6. 根据权利要求1-5中任一项所述的方法,其特征在于,所述第二声音信号与所述第一声音信号相位相反,包括:
    所述第二声音信号与所述第一声音信号的相位差为[180°-p,180°+p];其中,p大于或等于0°,且p小于预设角度阈值。
  7. 根据权利要求1-6中任一项所述的方法,其特征在于,所述第二声音信号与所述第一声音信号相位相反,用于抵消所述听筒在所述第一电子设备周围的预设区域的漏音;
    其中,所述预设区域包括:第一直线上或第一直线附近,与第一点之间的距离大于或等于预设距离的区域;所述第一点为所述听筒所在位置与所述扬声器所在位置的连线的中点;所述第一直线垂直于所述连线,且所述第一直线经过所述第一点。
  8. 根据权利要求1-7中任一项所述的方法,其特征在于,所述第二声音信号与所述第一声音信号相位相反,用于抵消所述听筒播放的预设频率的漏音。
  9. 根据权利要求8所述的方法,其特征在于,所述预设频率包括:100赫兹Hz-1千赫兹KHz。
  10. 一种电子设备,其特征在于,所述电子设备是第一电子设备,所述第一电子设备包括:处理器、听筒和扬声器;
    所述处理器,用于向所述听筒传输第一声音信号,向所述扬声器传输第二声音信号,所述第二声音信号与所述第一声音信号相位相反;
    所述听筒,用于播放所述第一声音信号;
    所述扬声器,用于播放所述第二声音信号。
  11. 根据权利要求10所述的电子设备,其特征在于,所述听筒设置在靠近所述第一电子设备的顶部的位置,所述扬声器设置在所述第一电子设备的底部。
  12. 根据权利要求10或11所述的电子设备,其特征在于,所述处理器,用于向所述听筒传输第一声音信号,向所述扬声器传输第二声音信号,包括:
    所述处理器,用于在所述第一电子设备在预设语音通信状态时,向所述听筒传输所述第一声音信号,向所述扬声器传输所述第二声音信号;
    其中,所述预设语音通信状态为:所述第一电子设备被用户握持,与所述第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态;或者,所述第一电子设备被用户握持,且所述第一电子设备靠近所述用户的耳朵,与所述第二电子设备通过电话应用或者即时通讯应用进行语音通信的状态。
  13. 根据权利要求12所述的电子设备,其特征在于,所述第一电子设备还包括主麦克风;
    所述主麦克风,用于采集所述第一电子设备周围的声音信号;
    所述处理器,还用于采用所述第二声音信号,抵消所述主麦克风采集的声音信号中来自所述扬声器的干扰信号;或者,利用自适应回波抵消原理,抵消所述主麦克风采集的声音信号中来自所述扬声器的干扰信号。
  14. 根据权利要求10或11所述的电子设备,其特征在于,所述第一电子设备还包括:显示屏;
    所述显示屏,用于显示即时通讯应用的聊天界面,所述聊天界面包括来自第二电子设备的语音消息;
    其中,所述处理器,用于向所述听筒传输第一声音信号,向所述扬声器传输第二声音信号,包括:
    所述处理器,用于响应于用户对所述语音消息的点击操作,所述第一电子设备被用户握持,且所述第一电子设备靠近所述用户的耳朵时,向所述听筒传输所述第一声音信号,向所述扬声器传输所述第二声音信号。
  15. 根据权利要求12-14中任一项所述的电子设备,其特征在于,所述第一电子设 备还包括:通信模块;
    所述通信模块,用于接收来自第二电子设备的第一数字音频信号;
    其中,所述处理器,用于向所述听筒传输第一声音信号,向所述扬声器传输第二声音信号,包括:
    所述处理器,用于将所述第一数字音频信号转换为所述第一声音信号,并向所述听筒传输所述第一声音信号;将所述第一数字音频信号转换为第二数字音频信号,将所述第二数字音频信号转换为所述第二声音信号,并向所述扬声器传输所述第二声音信号;
    其中,所述第一声音信号与所述第二声音信号均为所述模拟音频信号,所述第二数字音频信号与所述第一数字音频信号相位相反。
  16. 根据权利要求10-15中任一项所述的电子设备,其特征在于,所述第二声音信号与所述第一声音信号相位相反,包括:
    所述第二声音信号与所述第一声音信号的相位差为[180°-p,180°+p];其中,p大于或等于0°,且p小于预设角度阈值。
  17. 根据权利要求10-16中任一项所述的电子设备,其特征在于,所述第二声音信号与所述第一声音信号相位相反,用于抵消所述听筒在所述第一电子设备周围的预设区域的漏音;
    其中,所述预设区域包括:第一直线上或第一直线附近,与第一点之间的距离大于或等于预设距离的区域;所述第一点为所述听筒所在位置与所述扬声器所在位置的连线的中点;所述第一直线垂直于所述连线,且所述第一直线经过所述第一点。
  18. 根据权利要求10-17中任一项所述的电子设备,其特征在于,所述第二声音信号与所述第一声音信号相位相反,用于抵消所述听筒播放的预设频率的漏音。
  19. 根据权利要求18所述的电子设备,其特征在于,所述预设频率包括:100赫兹Hz-1千赫兹KHz。
  20. 一种芯片系统,其特征在于,所述芯片系统应用于包括听筒、扬声器和存储器的电子设备;所述芯片系统包括一个或多个接口电路和一个或多个处理器;所述接口电路和所述处理器通过线路互联;所述接口电路用于从所述存储器接收信号,并向所述处理器发送所述信号,所述信号包括所述存储器中存储的计算机指令;当所述处理器执行所述计算机指令时,所述电子设备执行如权利要求1-9中任一项所述的方法。
  21. 一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1-9中任一项所述的方法。
  22. 一种计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1-9中任一项所述的方法。
PCT/CN2021/081390 2020-05-29 2021-03-17 一种抵消漏音的方法及电子设备 WO2021238354A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010476894.7A CN113746975A (zh) 2020-05-29 2020-05-29 一种抵消漏音的方法及电子设备
CN202010476894.7 2020-05-29

Publications (1)

Publication Number Publication Date
WO2021238354A1 true WO2021238354A1 (zh) 2021-12-02

Family

ID=78724727

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2021/081390 WO2021238354A1 (zh) 2020-05-29 2021-03-17 一种抵消漏音的方法及电子设备

Country Status (2)

Country Link
CN (1) CN113746975A (zh)
WO (1) WO2021238354A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023202527A1 (zh) * 2022-04-22 2023-10-26 维沃移动通信有限公司 电源电路的控制方法、装置、电子设备和可读存储介质
WO2024050949A1 (zh) * 2022-09-09 2024-03-14 瑞声声学科技(深圳)有限公司 漏音消除方法和装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117714583A (zh) * 2022-09-08 2024-03-15 北京荣耀终端有限公司 一种电子设备、电子设备的参数确定方法及装置
CN115833870B (zh) * 2023-02-16 2023-06-30 荣耀终端有限公司 信号抗干扰方法及电子设备
CN116405589B (zh) * 2023-06-07 2023-10-13 荣耀终端有限公司 声音处理方法及相关装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1909566A (zh) * 2005-07-05 2007-02-07 Lg电子株式会社 防止通话期间声音泄漏的移动通信终端及其方法
US20130279716A1 (en) * 2007-05-04 2013-10-24 Klaus Hartung System and method for directionally radiating sound
CN106101350A (zh) * 2016-05-31 2016-11-09 维沃移动通信有限公司 一种移动终端及其通话方法
CN109121038A (zh) * 2018-08-30 2019-01-01 Oppo广东移动通信有限公司 一种抑制漏音的穿戴式设备、抑制漏音方法及存储介质
CN109445746A (zh) * 2018-12-28 2019-03-08 北京小米移动软件有限公司 一种电子设备
CN112118339A (zh) * 2019-06-20 2020-12-22 华为技术有限公司 电子设备、信号处理的方法和和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071119B (zh) * 2017-04-26 2019-10-18 维沃移动通信有限公司 一种声音消除方法及移动终端
CN108494918A (zh) * 2018-05-28 2018-09-04 维沃移动通信有限公司 一种移动终端
CN108989514A (zh) * 2018-07-26 2018-12-11 维沃移动通信有限公司 一种移动终端

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1909566A (zh) * 2005-07-05 2007-02-07 Lg电子株式会社 防止通话期间声音泄漏的移动通信终端及其方法
US20130279716A1 (en) * 2007-05-04 2013-10-24 Klaus Hartung System and method for directionally radiating sound
CN106101350A (zh) * 2016-05-31 2016-11-09 维沃移动通信有限公司 一种移动终端及其通话方法
CN109121038A (zh) * 2018-08-30 2019-01-01 Oppo广东移动通信有限公司 一种抑制漏音的穿戴式设备、抑制漏音方法及存储介质
CN109445746A (zh) * 2018-12-28 2019-03-08 北京小米移动软件有限公司 一种电子设备
CN112118339A (zh) * 2019-06-20 2020-12-22 华为技术有限公司 电子设备、信号处理的方法和和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023202527A1 (zh) * 2022-04-22 2023-10-26 维沃移动通信有限公司 电源电路的控制方法、装置、电子设备和可读存储介质
WO2024050949A1 (zh) * 2022-09-09 2024-03-14 瑞声声学科技(深圳)有限公司 漏音消除方法和装置

Also Published As

Publication number Publication date
CN113746975A (zh) 2021-12-03

Similar Documents

Publication Publication Date Title
WO2021238354A1 (zh) 一种抵消漏音的方法及电子设备
JP5911955B2 (ja) 電子デバイス上でのマスキング信号の生成
US20170214994A1 (en) Earbud Control Using Proximity Detection
US9779716B2 (en) Occlusion reduction and active noise reduction based on seal quality
CN111402913B (zh) 降噪方法、装置、设备和存储介质
WO2020019821A1 (zh) 麦克风堵孔检测方法及相关产品
WO2020221054A1 (zh) 一种触摸方法及电子设备
CN111050250A (zh) 降噪方法、装置、设备和存储介质
CN113395685A (zh) 蓝牙通信系统和无线通信系统
CN110602696A (zh) 通话隐私保护方法和电子设备
CN114466097A (zh) 防漏音的移动终端及移动终端的声音输出方法
CN108540659B (zh) 降低tdd噪声影响的方法、终端及计算机可读存储介质
WO2020132907A1 (zh) 一种音频数据的通信方法及电子设备
EP4096202A1 (en) Wireless sound amplification system and terminal
CN110012164B (zh) 一种设备的声音播放方法、可穿戴设备和计算机可读存储介质
WO2020019822A1 (zh) 麦克风堵孔检测方法及相关产品
CN109348021B (zh) 移动终端及音频播放方法
CN109618062B (zh) 语音交互方法、装置、设备以及计算机可读存储介质
CN112954524A (zh) 降噪方法、系统、车载终端及计算机存储介质
WO2023284403A1 (zh) 一种音频处理方法及设备
CN116233696B (zh) 气流杂音抑制方法、音频模组、发声设备和存储介质
WO2024021712A1 (zh) 一种音频播放方法及电子设备
CN115696114B (zh) 一种麦克风配置调整方法、电子设备及介质
CN114006971B (zh) 一种投屏窗口音频控制方法、设备及计算机可读存储介质
CN111798863B (zh) 消除回声的方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21813233

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21813233

Country of ref document: EP

Kind code of ref document: A1