CN117714583A - 一种电子设备、电子设备的参数确定方法及装置 - Google Patents
一种电子设备、电子设备的参数确定方法及装置 Download PDFInfo
- Publication number
- CN117714583A CN117714583A CN202211100941.3A CN202211100941A CN117714583A CN 117714583 A CN117714583 A CN 117714583A CN 202211100941 A CN202211100941 A CN 202211100941A CN 117714583 A CN117714583 A CN 117714583A
- Authority
- CN
- China
- Prior art keywords
- sound
- sound signal
- signal
- audio signal
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 75
- 230000005236 sound signal Effects 0.000 claims abstract description 841
- 238000012546 transfer Methods 0.000 claims description 196
- 238000005259 measurement Methods 0.000 claims description 183
- 230000007613 environmental effect Effects 0.000 claims description 20
- 230000003044 adaptive effect Effects 0.000 claims description 13
- 230000006870 function Effects 0.000 description 398
- 238000010586 diagram Methods 0.000 description 27
- 230000009471 action Effects 0.000 description 24
- 239000000919 ceramic Substances 0.000 description 22
- 238000004891 communication Methods 0.000 description 16
- 230000006854 communication Effects 0.000 description 16
- 238000006243 chemical reaction Methods 0.000 description 13
- 230000005238 low-frequency sound signal Effects 0.000 description 13
- 238000012545 processing Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 11
- 238000004590 computer program Methods 0.000 description 7
- 230000001427 coherent effect Effects 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 229920001621 AMOLED Polymers 0.000 description 4
- 230000001934 delay Effects 0.000 description 4
- 230000005284 excitation Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000013707 sensory perception of sound Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 230000003416 augmentation Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000003062 neural network model Methods 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/58—Anti-side-tone circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/19—Arrangements of transmitters, receivers, or complete sets to prevent eavesdropping, to attenuate local noise or to prevent undesired transmission; Mouthpieces or receivers specially adapted therefor
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本申请实施例提供了一种电子设备、电子设备的参数确定方法及装置。其中,所述电子设备,包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号;所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第一幅值补偿单元用于分别按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号。可以有效减少电子设备的漏音。
Description
技术领域
本申请涉及多媒体技术领域,特别是涉及一种电子设备、电子设备的参数确定方法及装置。
背景技术
相关技术中,随着手机的不断更新换代,屏幕在移动终端的操作面的占比越来越大,因此原本位于手机操作面的发声单元被设置在屏幕内,本文称这些发声单元为推动屏幕发声的器件,为使得用户在通话过程中能够更好的听清推动屏幕发声的器件发出的通话声音信号,推动屏幕发声的器件发出的通话声音信号的声音强度需要足够大。
而这些也导致了泄露至周围空间的声音信号的声音强度同步增大,使得位于手机周围的人也能够挺听清用户通话内容,进而导致用户隐私泄漏。
发明内容
本申请实施例的目的在于提供一种电子设备、电子设备的参数确定方法及装置,以实现减少电子设备的漏音。具体技术方案如下:
在本申请的第一方面,提供了一种电子设备,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;
所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号;
所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;
所述第一相位补偿单元和第一幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;
所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号。
在一种可能的实施例中,所述第一时延补偿函数是根据第一传递函数和第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在第一测量点抵消的时延补偿函数,所述第一传递函数是所述第一发声单元的声音信号到所述第一测量点的传递函数,所述第二传递函数是所述第二发声单元播放的声音信号到所述第一测量点的传递函数;所述第一相位补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的相位补偿函数,所述第一幅值补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的幅值补偿函数。
在一种可能的实施例中,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,
所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号;
所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;
所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;
所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
其中,第二时延补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的时延补偿函数,所述第二相位补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的相位补偿函数,所述第二幅值补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的幅值补偿函数。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;
所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;
所述底部扬声器用于根据所述第三抵消音频发出第三抵消声音信号;
其中,所述第三相位补偿函数是根据第三传递函数和第四传递函数,确定的使所述第一播放声音信号与所述第三抵消声音信号在第二测量点抵消的相位补偿函数,所述第三传递函数是所述第一发声单元的声音信号到第二测量点的传递函数,所述第四传递函数是所述底部扬声器的声音信号到第二测量点的传递函数,所述第三幅值补偿函数是根据所述第三传递函数和所述第四传递函数,确定的使所述第一播放声音信号与所述第三抵消声音信号在第二测量点抵消的幅值补偿函数,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号;
或者,
所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第四频段的音频子信号,所述第四频段的下限高于所述第三频段的上限。
在一种可能的实施例中,所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数是根据测量声音信号和叠加声音信号的声音强度调整的,所述测量声音信号是所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,所述目标频段为所述第一原始音频信号所处频段,所述叠加声音信号是根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数确定的所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加信号。
在一种可能的实施例中,所述电子设备还包括:麦克风,
测量声音信号是根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号。
在一种可能的实施例中,测量声音信号是根据反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,所述反向传递函数是测量所述第一测量点发出的声音信号到所述麦克风得到的传递函数。
在一种可能的实施例中,所述麦克风的数目为多个,所述反向传递函数是分别测量所述第一测量点发出的声音信号到每个所述麦克风得到的传递函数,所述测量声音信号是根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定得到的第一测量点处的声音信号。
在一种可能的实施例中,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
在本申请的第二方面,提供了一种电子设备的参数确定方法,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号,所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第二幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号;
所述方法包括:
确定所述第一发声单元的声音信号到第一测量点的第一传递函数和所述第二发声单元播放的声音信号到所述第一测量点的第二传递函数;
根据所述第一传递函数和所述第二传递函数,确定使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数。
在一种可能的实施例中,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号,所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
所述方法还包括:
根据所述第一传递函数和所述第二传递函数,确定使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的所述第二时延补偿函数、所述第二相位补偿函数以及所述第二幅值补偿函数。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;所述底部扬声器用于根据所述第三抵消音频信号发出第三抵消声音信号;
所述方法还包括:
确定所述第一发声单元的声音信号到第二测量点的第三传递函数和所述底部扬声器播放的声音信号到所述第二测量点的第四传递函数;
根据所述第三传递函数和所述第四传递函数,确定使所述第一播放声音信号与所述第三抵消声音信号在所述第二测量点抵消的所述第三相位补偿函数以及所述第三幅值补偿函数;
其中,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号,所述第三频段的频率下限高于第一阈值,且所述第三频段的频率上限低于第二阈值。
在一种可能的实施例中,所述方法还包括:
确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,所述目标频段为所述第一原始音频信号所处频段;
根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,确定所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加声音信号;
根据所述测量声音信号和所述叠加声音信号的声音强度,调整所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数。
在一种可能的实施例中,所述电子设备还包括:麦克风,
所述确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号,包括:
测量所述第一测量点发出的声音信号到所述麦克风的反向传递函数;
根据所述反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述麦克风的数目为多个;
所述根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号,包括:
分别测量所述第一测量点发出的声音信号到每个所述麦克风的反向传递函数;
根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
在本申请的第三方面,提供了一种电子设备的参数确定装置,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号,所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第一幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号;
所述装置包括:
传递函数确定模块,用于确定所述第一发声单元的声音信号到第一测量点的第一传递函数和所述第二发声单元播放的声音信号到所述第一测量点的第二传递函数;
补偿函数确定模块,用于根据所述第一传递函数和所述第二传递函数,确定使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数。
在一种可能的实施例中,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号,所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
所述补偿函数确定模块,还用于根据所述第一传递函数和所述第二传递函数,确定使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的所述第二时延补偿函数、所述第二相位补偿函数以及所述第二幅值补偿函数。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;所述底部扬声器用于根据所述第三抵消音频信号发出第三抵消声音信号;
所述传递函数确定模块,还用于确定所述第一发声单元的声音信号到第二测量点的第三传递函数和所述底部扬声器播放的声音信号到所述第二测量点的第四传递函数;
所述补偿函数确定模块,还用于根据所述第三传递函数和所述第四传递函数,确定使所述第一播放声音信号与所述第三抵消声音信号在所述第二测量点抵消的所述第三相位补偿函数以及所述第三幅值补偿函数;
其中,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号,所述第三频段的频率下限高于第一阈值,且所述第三频段的频率上限低于第二阈值。
在一种可能的实施例中,所述装置还包括,自适应调整模块,用于确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,所述目标频段为所述第一原始音频信号所处频段;
根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,确定所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加声音信号;
根据所述测量声音信号和所述叠加声音信号的声音强度,调整所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数。
在一种可能的实施例中,所述电子设备还包括:麦克风,
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述自适应调整模块自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
测量所述第一测量点发出的声音信号到所述麦克风的反向传递函数;
根据所述反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述麦克风的数目为多个;
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
分别测量所述第一测量点发出的声音信号到每个所述麦克风的反向传递函数;
根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
本申请实施例有益效果:
本申请提供的电子设备、电子设备的参数确定方法及装置可以使用第一时延补偿函数来调整声音信号的时延,因此第一播放音频信号和第一原始音频信号时延不同,但频率相同。第一相位补偿函数用于在保持声音信号的幅值不变的情况下调整声音信号的相位,第一幅值补偿函数用于调整声音信号的幅值,因此第一抵消音频信号的相位和幅值与第一原始音频信号不同,但频率相同,并且由于第一相位补偿函数和第一幅值补偿函数的作用,因此得到的第一抵消音频信号的时延也将与第一原始音频信号不同。因此,理论上使用合理的第一时延补偿函数,可以使得第一播放音频信号和第一抵消音频信号的频率和时延相同,且相位和幅值不同。因此根据第一播放音频信号发出的第一播放声音信号和根据第一抵消音频信号发出的第一抵消声音信号为两个相干的声音信号。而根据声学原理可知,若两个相干的声音信号在某一空间点处的相位相反、幅值相近或相同,则该两个相干的声音信号在该空间点处叠加形成的叠加声音信号的声音强度将较小甚至为0,本文称该现象为抵消。因此,通过使用合理的第一相位补偿函数和第一幅值补偿函数可以使得第一抵消声音信号抵消第一播放声音信号,从而有效减少了第一播放声音信号的泄露。
当然,实施本申请的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的实施例。
图1a为本申请提供电子设备的硬件结构示意图;
图1b为本申请实施例提供的用户使用现有技术的电子设备音频通道时声音信号的分布示意图;
图2a为本申请实施例提供的电子设备的一种结构组成示意图
图2b为本申请实施例提供的电子设备的一种结构分布示意图;
图3为本申请实施例提供的电子设备的参数确定方法的一种流程示意图;
图4为本申请实施例提供的第一测量点设置方式的一种示意图;
图5a为本申请实施例提供的电子设备的一种系统框架示意图本申请实施例提供的电子设备的Voice1的频率分布示意图;
图5b为本申请实施例提供的电子设备的Voice1的频率分布示意图;
图5c为本申请实施例提供的电子设备的Voice2和Voice1_R的频率分布示意图;
图6为本申请实施例提供的电子设备的侧视、俯视图;
图7为本申请实施例提供的电子设备外放场景中第一测量点设置方式的一种示意图;
图8为本申请实施例提供的电子设备的另一种结构示意图;
图9a为本申请实施例提供的电子设备的另一种系统框架示意图;
图9b为本申请实施例提供的电子设备的陶瓷器件和顶部扬声器发声频率分布示意图;
图10为本申请实施例提供的自适应调整补偿函数方法的一种流程示意图;
图11为本申请实施例提供的反向传递函数测量的原理示意图;
图12为本申请实施例提供的电子设备的另一种系统框架示意图;
图13为本申请实施例提供的电子设备的另一种系统框架示意图;
图14为本申请实施例提供的电子设备的另一种结构示意图;
图15为本申请提供的电子设备通过顶部扬声器和底部扬声器共同抵消推动屏幕发声的器件发出的声音信号的原理示意图;
图16为本申请实施例提供的电子设备的另一种系统框架示意图;
图17为本申请实施例提供的电子设备的参数确定装置的一种结构示意图。
具体实施方式
为了便于清楚描述本申请实施例的技术方案,在本申请的实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分。例如,第一指令和第二指令是为了区分不同的用户指令,并不对其先后顺序进行限定。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定,并且“第一”、“第二”等字样也并不限定一定不同。
需要说明的是,本申请中,“示例性地”或者“例如”等词用于表示作例子、例证或说明。本申请中被描述为“示例性地”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言,使用“示例性地”或者“例如”等词旨在以具体方式呈现相关概念。
此外,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a、b和c中的至少一项(个),可以表示:a,或b,或c,或a和b,或a和c,或b和c,或a、b和c,其中a,b,c可以是单个,也可以是多个。
下面将结合附图对本申请实施例的实施方式进行详细描述。
为了更清楚地对本申请实施例提供的电子设备进行说明,下面将对本申请实施例提供的电子设备的一种可能的应用场景进行示例性的说明。可以理解的是,以下示例仅是本申请实施例提供的电子设备的一种可能的应用场景,在其他可能的实施例中,本申请实施例提供的电子设备也可以应用于其他可能的应用场景中,以下示例对此不做任何限制。
参见图1a,图1a所示为本申请实施例提供的声音处理方法所针对的电子设备的硬件结构示意图。
电子设备包括处理器110、收发器120和显示单元170。其中,显示单元170可以包括显示屏。
可选地,该电子设备还可以包括存储器130。处理器110、收发器120和存储器130之间可以通过内部连接通路互相通信,传递控制和/或数据信号,该存储器130用于存储计算机程序,该处理器110用于从该存储器130中调用并运行该计算机程序。
可选地,电子设备还可以包括天线140,用于将收发器120输出的无线信号发送出去。
上述处理器110可以和存储器130合成一个处理装置,更常见的是彼此独立的部件,处理器110用于执行存储器130中存储的程序代码来实现上述功能。具体实现时,该存储器130也可以集成在处理器110中,或者,独立于处理器110。
除此之外,为了使得电子设备的功能更加完善,该电子设备还可以包括输入单元160、音频电路180、摄像头190和传感器101等中的一个或多个,该音频电路还可以包括扬声器182、麦克风184等。
可选地,上述电子设备还可以包括电源150,用于给电子设备中的各种器件或电路提供电源。
可以理解的是,图1a所示的电子设备中的各个模块的操作和/或功能,分别为了实现下述方法实施例中的相应流程。具体可参见下述方法实施例中的描述,为避免重复,此处适当省略详细描述。
可以理解的是,图1a所示的电子设备中的处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processing unit,GPU),图像信号处理器(imagesignalprocessor,ISP),控制器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulsecode modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头190等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频电路180耦合,实现处理器110与音频电路180之间的通信。在一些实施例中,音频电路180可以通过I2S接口向收发器120传递音频信号,实现通过蓝牙耳机接听语音通话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频电路180与收发器120可以通过PCM总线接口耦合。在一些实施例中,音频电路180也可以通过PCM接口向收发器120传递音频信号,实现通过蓝牙耳机接听语音通话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与收发器120。例如:处理器110通过UART接口与收发器120中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频电路180可以通过UART接口向收发器120传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示单元170,摄像头190等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头190通过CSI接口通信,实现电子设备的拍摄功能。处理器110和显示单元170通过DSI接口通信,实现电子设备的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头190,显示单元170,收发器120,音频电路180,传感器101等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备的结构限定。在本申请另一些实施例中,电子设备也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
可以理解的是,图1a所示的电源150用于给处理器110,存储器130,显示单元170,摄像头190,输入单元160和收发器120等供电。天线140用于发射和接收电磁波信号。电子设备中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线140复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
收发器120可以提供应用在电子设备上的包括无线局域网(wireless local areanetworks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequencymodulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。收发器120可以是集成至少一个通信处理模块的一个或多个器件。收发器120经由天线140接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。收发器120还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线140转为电磁波辐射出去。
在一些实施例中,电子设备的天线140和收发器120耦合,使得电子设备可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packetradio service,GPRS),码分多址接入(code division multiple access,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-divisioncode division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(globalpositioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidou navigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite basedaugmentation systems,SBAS)。
电子设备通过GPU,显示单元170,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示单元170和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示单元170用于显示图像,视频等。显示单元170包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic lightemittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(activematrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备可以包括1个或N个显示单元170,N为大于1的正整数。
电子设备可以通过ISP,摄像头190,视频编解码器,GPU,显示单元170以及应用处理器等实现拍摄功能。
ISP用于处理摄像头190反馈的数据。例如,录制视频时,打开摄像头,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。
ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头190中。摄像头190用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备可以包括1个或N个摄像头190,N为大于1的正整数。数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备可以支持一种或多种视频编解码器。这样,电子设备可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
存储器130可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。存储器130可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备使用过程中所创建的数据(比如音频数据,电话本等)等。此外,存储器130可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在存储器130的指令,和/或存储在设置于处理器中的存储器的指令,执行电子设备的各种功能应用以及数据处理。
电子设备可以通过音频电路180,扬声器182,麦克风184,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频电路180用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频电路180还可以用于对音频信号编码和解码。在一些实施例中,音频电路180可以设置于处理器110中,或将音频电路180的部分功能模块设置于处理器110中。
扬声器182,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备可以通过扬声器182收听音乐,或收听免提通话。
麦克风184,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过靠近麦克风184发声,将声音信号输入到麦克风184。电子设备可以设置至少一个麦克风184。在另一些实施例中,电子设备可以设置两个麦克风184,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备还可以设置三个,四个或更多麦克风184,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
电子设备,如手机、平板电脑、车载电脑等,通常支持的音频通道有三种类型,分别是蓝牙通话音频通道,蓝牙媒体音频通道,电子设备音频通道(外放音频通道和听筒音频通道)。电子设备可以通过蓝牙与具备音频播放能力的蓝牙设备,如蓝牙耳机、车载音响等,建立连接。在电子设备与蓝牙设备连接成功后,运行于电子设备的应用可以通过蓝牙音频通道将音频数据发送至蓝牙设备进行播放。
参见图1b,图1b是本申请实施例提供的用户使用现有技术的电子设备音频通道时声音信号的分布示意图。为了便于说明,下文中以电子设备为手机为例进行说明。参见图1b,由于手机的屏幕占比区域面积越来越大,使得手机的发声单元被设计在屏幕内部,如陶瓷器件183,本文将这类发声单元称为推动屏幕发声的器件,而推动屏幕发声的器件由于其材料特性在驱动发声时发出的声音信号(Voice1)的频段主要处于中、高频,而低频较弱,导致在低频声音信号较多的场景中,如通话场景,用户听到的Voice1的声音质量较低,因此在手机的顶部通过扬声器182来发出低频声音信号(Voice2)。而在用户手持手机通话的过程中,陶瓷器件183所处的屏幕位置不能与用户的耳朵紧密贴合,导致陶瓷器件183发出的Voice2有一部分会泄漏至人耳外,进而导致了用户通话时的隐私泄漏。前述中频是指下限高于第一阈值且上限低于第二阈值的频段,前述低频是指上限低于第三阈值的频段,下文中的高频是指下限高于第四阈值的频段,其中,第三阈值小于第一阈值,且第四阈值大于第二阈值。
有鉴于此,本申请提供了一种电子设备以及针对该电子设备的电子设备的参数确定方法。为了更清楚的对本申请提供的电子设备的参数确定方法进行说明,下面将首先对本申请提供的电子设备进行说明,参见图2a,图2a所示为本申请提供的电子设备的一种结构组成示意图,包括:
第一发声单元211、第二发声单元212、第一时延补偿单元221、第一相位补偿单元231和第一幅值补偿单元241;
第一时延补偿单元221,用于按照第一时延补偿函数调整第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号。第一播放音频信号为第一发声单元待播放的音频信号。
第一发声单元211,用于根据第一播放音频信号发出第一播放声音信号;
第一相位补偿单元231和第一幅值补偿单元241,用于按照第一相位补偿函数和第一幅值补偿函数调整第一原始音频信号的相位和幅值,得到第一抵消音频信号。
第二发声单元212,用于根据第一抵消音频信号发出第一抵消声音信号。
其中,第一发声单元211和第二发声单元212为电子设备上的两个不同的发声单元,以电子设备为包括推动屏幕发声的器件和顶部扬声器的手机为例,第一发声单元211为推动屏幕发声的器件和顶部扬声器中的一者,第二发声单元212为推动屏幕发声的器件和顶部扬声器中的另一者。
第一相位补偿单元231用于按照第一相位补偿函数调整输入的音频信号的相位,第一幅值补偿单元241用于按照第一幅值补偿函数调整输入的音频信号的幅值,并且在一种可能的实施例中,第一相位补偿单元231的输入为第一原始音频信号,第一幅值补偿单元241的输入为第一相位补偿单元231的输出,该示例中,第一幅值补偿单元241的输出即为第一抵消声音信号。在另一种可能的实施例中,第一幅值补偿单元241的输入为第一原始音频信号,第一相位补偿单元231的输入为第一幅值补偿单元241的输出,该示例中,第一相位补偿单元231的输出即为第一抵消声音信号。
第一时延补偿单元221可以是通过滤波器实现的,也可以是通过其他具备时延补偿功能的电路单元实现,并且第一相位补偿单元231可以是通过滤波器实现的,具体的,其可以通过IIR滤波器级联实现,也可以是通过其他具备相位补偿功能的电路单元实现,并且第一幅值补偿单元241可以是通过滤波器实现的,也可以是通过其他具备幅值补偿功能的电路单元实现。
并且,第一时延补偿单元221、第一相位补偿单元231以及第一幅值补偿单元241可以是独立于电子设备的处理器的电路单元,也可以是由电子设备的处理器虚拟出来的虚拟单元。示例性的,对于第一时延补偿单元221、第一相位补偿单元231以及第一幅值补偿单元241为电子设备的处理器虚拟出来的虚拟单元的情况,本申请提供的电子设备的结构分布如图2b所示。下文中的第二时延补偿单元、第二相位补偿单元、第三相位补偿单元、第二幅值补偿单元以及第三幅值补偿单元同理,故下文不再赘述。
该实施例中,第一时延补偿函数用于调整声音信号的时延,因此第一播放音频信号和第一原始音频信号时延不同,但频率相同。第一相位补偿函数用于在保持声音信号的幅值不变的情况下调整声音信号的相位,第一幅值补偿函数用于调整声音信号的幅值,因此第一抵消音频信号的相位和幅值与第一原始音频信号不同,但频率相同,并且由于第一相位补偿函数和第一幅值补偿函数的作用,因此得到的第一抵消音频信号的时延也将与第一原始音频信号不同。
因此,理论上使用合理的第一时延补偿函数,可以使得第一播放音频信号和第一抵消音频信号的频率和时延相同,且相位和幅值不同。因此根据第一播放音频信号发出的第一播放声音信号和根据第一抵消音频信号发出的第一抵消声音信号为两个相干的声音信号。而根据声学原理可知,若两个相干的声音信号在某一空间点处的相位相反、幅值相近或相同,则该两个相干的声音信号在该空间点处叠加形成的叠加声音信号的声音强度将较小甚至为0,本文称该现象为抵消。因此,通过使用合理的第一相位补偿函数和第一幅值补偿函数可以使得第一抵消声音信号抵消第一播放声音信号。
可见,如果能够确定得到合理的第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数,即可使得电子设备利用第二发声单元212发出的第一抵消声音信号抵消第一发声单元211发出的第一播放声音信号,从而有效减少了第一播放声音信号的泄露。
前述电子设备所使用的第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数是通过本申请提供的声音方法确定得到,并且可以是由该电子设备执行电子设备的参数确定方法确定得到该三个补偿函数,也可以是由其他设备执行电子设备的参数确定方法确定得到该三个补偿函数,本申请对此不作任何限制。
本申请提供的电子设备的参数确定方法如图3所示,包括:
S301,确定第一发声单元的声音信号到第一测量点的第一传递函数和第二发声单元播放的声音信号到第一测量点的第二传递函数。
S302,根据第一传递函数和第二传递函数,确定使第一播放声音信号与第一抵消声音信号在第一测量点抵消的第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数。
其中,在S301中,第一测量点是位于电子设备之外的测量点,该第一测量点可以根据本领域技术人员的经验设置,如将电子设备周围经常被听到电子设备通话漏音的位置作为第一测量点,该第一测量点也可以根据实际需求设置。并且,第一测量点可以是一个也可以是多个,对于多个第一测量点的情况,以电子设备为手机为例,多个第一测量点可以均匀或不均匀地分布在距离持有手机通话的用户半径为R1的水平面的圆周上。并且,多个第一测量点也可以分布在多个与持有手机通话的用户距离不等的水平面上。并且,多个第一测量点还可以分布在以持有手机通话的用户为中心半径为R2的球面上。并且,第一测量点还可以均匀或不均匀地分布在任意规则或不规则形状的感兴趣空间中。其中,R1和R2为根据经验和/或实际需求设置的预设值。
第一发声单元将需要播放的音频信号(如电子设备中传输的数字信号)转换为声音信号(即模拟信号)发出,可以理解的是,音频信号为在电子设备内部传递的信号,而声音信号为电子设备发出的信号,本文中的第一传递函数即为该音频信号与该声音信号到第一测量点形成的信号之间的映射关系。同理,本文中的第二传递函数即为第二发声单元需要播放的音频信号与第二发声单元发出的声音信号到第二测量点形成的信号之间的映射关系。为描述方便,下文中将第一传递函数即为H1(z),并将第二传递函数记为H2(z)。
可以理解的是,虽然第一发声单元与第二发声单元都位于同一电子设备上,但是第一发声单元和第二发声单元在电子设备上的位置不同(如图1b中的陶瓷器件183与扬声器182),因此,第一发声单元和第二发声单元发出的声音信号到第一测量点的声音传播路径和距离差异,而导致H1(z)和H2(z)不同。
对于仅存在一个测量点的情况,H1(z)的确定方法可以参见图4,将电子设备安装在人头模型上,使第一发声单元的发声区域朝向人耳,来模拟用户手持电子设备通话的握持姿势。在第一测量点处可以安装麦克风或其他收音装置,第一测量点与人头模型的距离为R。向电子设备的第一发声单元输入激励信号作为第一发声单元需要播放的音频信号,使得第一发声单元发出声音信号,并测量第一测量点处麦克风接收到的声音信号,以此,计算出激励信号与声音信号之间的转换关系,作为H1(z),可以理解的是,该H1(z)反映了第一发声单元的材料特性,以及第一发声单元到第一测量点的传播路径的作用特性。
对于存在多个第一测量点的情况,可以按照上述对一个第一测量点处的H1(z)的确定方法,分别根据每个第一测量点处接收到的声音信号计算出激励信号与声音信号之间的转换关系。并将所有转换关系加权求和,得到H1(z),其中,加权求和过程中各转换关系的权重可以根据本领域技术人员的经验或需求进行设置,本申请对此并不限定。
对于H2(z),其确定方法与H1(z)的确定方法类似,不同的是在测量H2(z)时,是对第二发声单元输入一个激励信号,并在第一测量点通过麦克风采集第二发声单元的声音信号的大小,具体可参见前述对与H1(z)确定方法的说明,在此不再赘述。
其中,在S302中,在确定第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数时,可以先确定第一发声单元对应的驱动信号通路和功放模型K1(z),和第二发声单元对应的驱动信号通路和功放模型K2(z),其中,可以通过向K1(z)施加一个输入信号,采集K1(z)的输出信号,根据输入信号和输出信号计算得到K1(z),同理,可以通过向K2(z)施加一个输入信号,采集K2(z)的输出信号,根据输入信号和输出信号计算得到K2(z)。并且,为便于说明,将第一时延补偿函数记为D1(z),将第一相位补偿函数记为G1(z),将第一幅值补偿函数记为G2(z)。则第一播放声音信号到第一测量点处的信号为D1(z)K1(z)H1(z),第一抵消声音信号到第一测量点处的信号为G1(z)G2(z)K2(z)H2(z)。
可以理解的是,若将第一原始音频信号记为X,则第一播放声音信号是第一原始音频信号X通过D1(z)调整时延后得到的D1(z)X,经过第一发声单元的K1(z)的作用得到K1(z)D1(z)X,并通过H1(z)传递到第一测量点形成声音信号H1(z)K1(z)D1(z)X,而第一抵消声音信号是第一原始音频信号X通过G1(z)G2(z)调整幅值和相位得到的G1(z)G2(z)X,第一抵消音频信号经过第二发声单元的K2(z)的作用得到K2(z)G1(z)G2(z)X,并通过H2(z)传递到第一测量点形成声音信号H2(z)K2(z)G1(z)G2(z)X,因此第一播放声音信号和第一抵消声音信号在第一测量点处的叠加形成的叠加声音信号为D1(z)K1(z)H1(z)X+G1(z)G2(z)K2(z)H2(z)X。
对于第一测量点,若要使得此处的第一播放声音信号与第一抵消声音信号抵消,则需要叠加声音信号的声音强度较小,即需要满足公式(1):
|D1(z)K1(z)H1(z)X+G1(z)G2(z)K2(z)H2(z)X|=g (1)
其中,g为预设目标值,并且g大于等于0,且小于预设声音强度阈值。当g=0时,公式(1)可以改写为公式(2):
D1(z)K1(z)H1(z)=-G1(z)G2(z)K2(z)H2(z) (2)
而在上式中K1(z)、H1(z)、K2(z)、H2(z)都已确定,因此,可以确定出使得公式(1)或(2)成立的D1(z)、G1(z)、G2(z),而如前述分析,使用确定出的D1(z)、G1(z)、G2(z)即可使得第一播放声音信号与第一抵消声音信号在第一测量点抵消,本申请对具体的D1(z)、G1(z)、G2(z)取值并不限定。并且,为便于计算,除上述公式(1)或公式(2)外,还可以加入其他的约束条件,如约束条件:D1(z)的时延与G1(z)、G2(z)的时延和相同。
选用该实施例,先确定第一发声单元和第二发声单元的声音信号到第一测量点的第一传递函数和第二传递函数,再根据第一传递函数和第二传递函数确定出使得第一播放声音信号和第一抵消声音信号在第一测量点抵消的第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,使得第一原始声音信号经过第一时延补偿单元的第一时延补偿函数进行时延调整而由第一发声单元发出的第一播放声音信号与第一原始声音信号经过经过第一相位补偿单元和第一幅值补偿单元的第一相位补偿函数和第二幅值补偿函数进行相位和幅值调整而由第二发声单元发出的第一抵消声音信号在第一测量点出抵消,进而在第一测量点处抵消了用户通话时的声音泄漏,避免了用户通话时的隐私泄漏。
可以理解的是,电子设备在播放音频信号的过程中,前述第二发声单元可以仅用于发出第一抵消声音信号,还可以用于发出其他声音信号。
示例性的,在一种可能的实施例中,第一发声单元为图1b中的陶瓷器件183,第二发声单元为图1b中的扬声器182,如前所述,由于陶瓷器件183发出的Voice1低频较弱,因此,通过扬声器182来发出低频声音信号,提高用户通话时的声音质量。即该示例中,第二发声单元除了用于发出用于第一抵消声音信号,还用于发出低频声音信号。该示例中,第一原始音频信号为Voice1,并且参见图5a,图5a为该示例中电子设备的系统框图,其中Voice1经过D1(z)、K1(z)和H1(z)的作用,形成第一播放声音信号并传递至第一测量点,并且Voice1经过G(z)、G2(z)的作用形成第一抵消音频信号Voice1_R,Voice1_R和Voice2经过K2(z)和H2(z)的作用,形成第一抵消声音信号和低频声音信号并传递至第一测量点,第一播放声音信号和第一抵消声音信号在第一测量点处抵消,从而减少了Voice1的泄露。
在该示例中,如图5b所示,由于Voice1为陶瓷器件183需要播放的声音信号,因此如前述分析Voice1为中、高频的音频信号,而如图5c所示,Voice2为低频的音频信号,且Voice1_R与Voice1的频段应当完全相同或部分重叠。
在另一种可能的实施例中,第一发声单元为扬声器,第二发声单元为推动屏幕发声的器件,如陶瓷器件,示例性的,仍以电子设备为手机为例,参见图6,图6为本申请所示顶部扬声器、底部扬声器和推动屏幕发声的器件在手机中的结构示意图,手机中包括底部扬声器610、顶部扬声器620以及陶瓷器件183,顶部扬声器中包括顶部出声孔621和顶部出声缝622,底部扬声器610包括底部出声孔611,在手机进行声音外放时,如播放影视作品等,会通过其底部扬声器610和顶部扬声器620共同发出声音信号,手机的顶部扬声器620在发出声音信号的过程中不仅通过手机顶部出声孔621发出声音,还通过手机的顶部出声缝622发出声音,而底部的顶部扬声器610在发出声音信号的过程中只通过底部出声孔611发出声音,因此,导致手机顶部扬声器620和底部扬声器610的出声结构不对称,进而导致用户在使用手机观看影视作品时,声音的听感不对称。
基于此,在该示例中,通过陶瓷器件183发出的第一抵消声音信号来在第一测量点抵消顶部扬声器620中顶部出声缝发出的第一播放声音信号,以此使得用户在使用手机观看影视作品时声音的听感更为对称。
如图6所示,顶部出声缝622位于陶瓷器件183与顶部出声孔621之间,且顶部出声缝622发出的声音是向靠近手机屏幕的一侧发出的发出的,因此该示例中,为使得陶瓷器件183发出的第一抵消声音信号能够有效的抵消顶部出声缝622发出的第一播放声音信号,该示例中手机播放音频信号在第一测量点处抵消的原理与图5a中Voice1被抵消的原理相同,区别仅在于该示例中,被抵消的声音信号为顶部扬声器620通过顶部出声缝622发出的声音信号。
该示例中的,第一测量点可以设置在任意位置,示例性的,在一种可能的实施例中第一测量点可以设置在用户在使用手机观看影视作品时人耳所处的位置,在另一种可能耳朵实施例中,也可以设置在位于顶部扬声器与推动屏幕发声的器件之间,且位于靠近电子设备的屏幕的一侧,即如图7所示,可以理解的是,该示例中第一测量点可以是位于陶瓷器件183与顶部扬声器620之间且位于靠近电子设备的屏幕的一侧区域的一个或多个测量点,而顶部扬声器620通过顶部出声孔621发出的声音信号已经发散到手机顶部区域,在陶瓷器件183与顶部扬声器620之间的抵消区域的第一测量点基本不能测得其发出的声音信号,因此在该区域的第一测量点测量的声音信号主要由顶部扬声器620通过顶部出声缝622发出的声音信号组成,进而基于该声音信号确定的传递函数也为顶部出声缝622到测量点的传递函数,因此,基于该传递函数确定的第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数也是针对顶部出声缝622发出的声音信号的补偿函数,进而,根据各补偿单元根据对应的补偿函数调整使陶瓷器件183发出的第一抵消声音信号和顶部出声缝622发出的第一播放声音信号,以使得第一抵消声音信号能够抵消第一播放声音信号。
并且,本领域的技术人员可以理解,陶瓷器件183由于其材料特性往往倾向于发出中、高频的声音信号,因此,该示例中,使用陶瓷器件183发出的第一抵消声音信号抵消顶部扬声器620发出的声音信号中处于中、高频的信号,即该示例中,第一播放声音信号和第一抵消声音信号为中、高频。由于人对低频的声音信号敏感度低,因此,即使在第一测量点处顶部扬声器发出的部分低频声音信号未被抵消,也不会对用户的听感造成声音不对称的感觉。
因此,选用该实施例,可以在电子设备的外放场景下通过推动屏幕发声的器件发出第一抵消声音信号来抵消顶部扬声器的顶部出声缝发出的与底部扬声器不对称的第一播放声音信号,提高了外放声音质量。
前述各示例中电子设备通过第二发声单元发出的第一抵消声音信号抵消第一播放声音信号,从而减少了第一发声单元发出的声音信号的泄露。而在一些应用场景中,不仅需要减少第一发声单元发出的声音信号的泄露,还需要减少第二发声单元发出的声音信号的泄露。
示例性的,仍以电子设备为手机,第一发声单元为手机的推动屏幕发声的器件,第二发声单元为手机的顶部扬声器为例,在一些应用场景中,为增强通话声音中的高频信号的强度,手机在通话过程中通过顶部扬声器发出通话声音中的高频信号。在这些应用场景中,还需要减少顶部扬声器发出的高频信号的泄露。
基于此,在一种可能的实施例中,电子设备如图8所示,还包括第二时延单元222、第二相位补偿单元232和第二幅值补偿单元242,
第二时延补偿单元222用于按照第二时延补偿函数调整第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号。
第二发声单元212还用于根据第二播放音频信号发出第二播放声音信号。
第二相位补偿单元232和第二幅值补偿单元242用于按照第二相位补偿函数和第二幅值补偿函数调整第二原始音频信号的相位和幅值,得到第二抵消音频信号。
第一发声单元211还用于根据第二抵消音频信号发出第二抵消声音信号。
其中,第二相位补偿单元232用于按照第二相位补偿函数调整输入的音频信号的相位,第二幅值补偿单元242用于按照第二幅值补偿函数调整输入的音频信号的幅值,并且在一种可能的实施例中,第二相位补偿单元232的输入为第二原始音频信号,第二幅值补偿单元242的输入为第二相位补偿单元232的输出,该示例中,第二幅值补偿单元242的输出即为第二抵消声音信号。在另一种可能的实施例中,第二幅值补偿单元242的输入为第二原始音频信号,第二相位补偿单元232的输入为第二幅值补偿单元242的输出,该示例中,第二相位补偿单元232的输出即为第二抵消声音信号。
如前述图2a的相关说明,选用该实施例,在使用合理的第二时延补偿函数、第二相位补偿函数以及第二幅值补偿函数的情况下,可以使得第一发声单元211发出的第二抵消声音信号抵消第二发声单元212发出的第二播放声音信号,从而减少第二发声单元212发出的声音信号的泄露。
前述电子设备所使用的第二时延补偿函数、第二相位补偿函数以及第二幅值补偿函数是通过本申请提供的声音方法确定得到,并且可以是由该电子设备执行电子设备的参数确定方法确定得到该三个补偿函数,也可以是由其他设备执行电子设备的参数确定方法确定得到该三个补偿函数,本申请对此不作任何限制。
同理于第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数的确定方法,本申请中根据第一传递函数和第二传递函数,确定使第二播放声音信号与第二抵消声音信号在第一测量点抵消的第二时延补偿函数、第二相位补偿函数以及第二幅值补偿函数。
为方便描述,下文将第二时延补偿函数记为D2(z),第二相位补偿函数记为G3(z),第二幅值补偿函数记为G4(z)。可以理解的是,若将第二原始音频信号记为Y,则第二播放声音信号是第二原始音频信号Y通过D2(z)调整时延后得到的D2(z)Y,经过第二发声单元的K2(z)的作用得到K2(z)D2(z)Y,并通过H2(z)传递到第一测量点形成声音信号H2(z)K2(z)D2(z)Y,而第二抵消声音信号是第二原始音频信号Y通过G3(z)G4(z)调整幅值和相位得到的G3(z)G4(z)Y,第二抵消音频信号经过第一发声单元的K1(z)的作用得到K1(z)G3(z)G4(z)Y,并通过H1(z)传递到第一测量点形成声音信号H1(z)K1(z)G3(z)G4(z)Y,因此第二播放声音信号和第二抵消声音信号在第一测量点处的叠加形成的叠加声音信号为D2(z)K2(z)H2(z)Y+G3(z)G4(z)K1(z)H1(z)Y。
对于第一测量点,若要使得此处的第二播放声音信号与第二抵消声音信号抵消,则需要叠加声音信号的声音强度较小,即需要满足公式(3):
|D2(z)K2(z)H2(z)Y+G3(z)G4(z)K1(z)H1(z)Y|=g (3)
当g=0时,公式(3)可以改写为公式(4):
D2(z)K2(z)H2(z)=-G3(z)G4(z)K1(z)H1(z) (4)
而在上式中K1(z)、H1(z)、K2(z)、H2(z)都已确定,因此,可以确定出使得公式(3)或(4)成立的D2(z)、G3(z)、G4(z),而如前述分析,使用确定出的D2(z)、G3(z)、G4(z)即可使得第二播放声音信号与第二抵消声音信号在第一测量点抵消,本申请对具体的D2(z)、G3(z)、G4(z)取值并不限定。并且,为便于计算,除上述公式(3)或公式(4)外,还可以加入其他的约束条件,如约束条件:D2(z)的时延与G3(z)、G4(z)的时延和相同。
为了更清楚的对前述减少第二发声单元发出的声音信号的泄露的实施例进行说明,下面以第一发声单元陶瓷器件,第二发声单元为顶部扬声器为例进行说明,参见图9a,该示例中,第一原始音频信号为Voice1,第二原始音频信号为Voice3,即通话声音中的高频信号,Voice2为通话声音中的低频信号。
第二播放音频信号和Voice2、Voice1_R经过K2(z)和H2(z)的作用,形成第二播放声音信号、低频声音信号以及第一抵消声音信号并传递至第一测量点。
并且Voice3经过G3(z)、G4(z)的作用形成第二抵消音频信号Voice3_R,Voice3_R和第一播放音频信号经过K1(z)和H1(z)的作用,形成第二抵消声音信号和第一播放声音信号并传递至第一测量点,第一播放声音信号和第一抵消声音信号在第一测量点处抵消,第二播放信号和第二抵消信号也在第一测量点处抵消,从而减少了Voice1和Voice3的泄露。
在该示例中,如前述说明由于Voice3为高频的音频信号,并且Voice3_R与Voice3的频段应当完全相同或部分重叠,因此该示例中各音频信号的频谱如图9b所示。
如前述说明,使用合理的各补偿函数是减少声音信号的泄露的前提条件,因此确定得到的各补偿函数是否准确,直接影响到能否成功减少声音信号的泄露。受限制于各种条件,如用于采集测量点处的声音信号的麦克风的性能、计算精度等,确定得到的补偿函数可能不够准确。基于此,本申请提供了一种自适应调整补偿函数的方法,可以用于自适应的调整前述任意一种或多种补偿函数,示例性的,可以用于自适应的调整前述第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数中的一个或多个函数,还可以用于自适应的调整前述第二时延补偿函数、第二相位补偿函数和第二幅值补偿函数中的一个或多个函数。
下文中为描述方便,主要对自适应的调整前述第二时延补偿函数、第二相位补偿函数和第二幅值补偿函数中的一个或多个函数的情况进行说明,对于调整其他函数的情况原理是相同的,故仅做简略说明。
参见图10,本申请提供的自适应调整补偿函数的方法包括:
S1001,确定电子设备播放音频信号时第一测量点的目标频段的声音信号,作为测量声音信号。
其中,对于自适应的调整前述第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数中的一个或多个函数的情况,目标频段为第一原始音频信号所处频段。对于自适应的调整前述第二时延补偿函数、第二相位补偿函数和第二幅值补偿函数中的一个或多个函数的情况,目标频段为第二原始音频信号所处频段。下文将测量声音信号记为C(t)。
S1002,根据第一传递函数、第二传递函数、第一时延补偿函数、第一相位补偿函数以及第一幅值补偿函数,确定第一播放声音信号和第一抵消声音信号在第一测量点的叠加声音信号。
参见前述图5a的相关说明,叠加声音信号应当为D1(z)K1(z)H1(z)X+G1(z)G2(z)K2(z)H2(z)X。对于自适应的调整前述第二时延补偿函数、第二相位补偿函数和第二幅值补偿函数中的一个或多个函数的情况,则根据第一传递函数、第二传递函数、第二时延补偿函数、第二相位补偿函数以及第二幅值补偿函数,确定第二播放声音信号和第二抵消声音信号在第一测量点的叠加声音信号。
S1003,根据测量声音信号和叠加声音信号的声音强度,调整第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数。
可以理解的是,若确定得到的第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数足够准确,则叠加声音信号应当为第一测量点处的真实声音信号,因此实际测量得到的测量声音信号应当与叠加声音信号相同,但是由于第一时延补偿函数、第一相位补偿函数和第一幅值补偿函数不够准确,因此测量声音信号应当与叠加声音信号存在一定差异,该差异能够在一定程度上反映出当前确定出的各补偿函数与准确的各补偿函数之间的差异,因此根据该差异能够将确定出的第一时延补偿函数、第一相位补偿函数和第一幅值补偿函调整的更为准确。
调整的方式根据应用场景的不同,示例性的,在一种可能的实施例中,可以通过最小均方自适应原理调整第一时延补偿函数、第一相位补偿函数和第一幅值补偿函,在另一种可能的实施例中,可以利用预先经过训练的、用于调整补偿函数的神经网络模型来调整第一时延补偿函数、第一相位补偿函数和第一幅值补偿函,本申请对此不作任何限制。
下面将结合具体的应用场景对本申请提供的自适应调整补偿函数的方法进行示例性的说明,参见图11,图11的示例中,第一发声单元为陶瓷器件,第二发声单元为顶部扬声器,该示例中,通过顶部扬声器发出的第一抵消声音信号抵消陶瓷器件发出的第一播放声音信号。
在该示例中,在第一测量点处设置一扬声器,驱动该扬声器发出目标频段的声音信号,并利用手机的顶部麦克风采集声音信号,从而计算得到扬声器发出的声音信号与手机的顶部麦克风采集该声音信号之间的转换关系,其中,顶部麦克风采集到的声音信号为麦克风在扬声器播放目标频段的声音信号时采集到的环境声音信号。
并根据该方向传递函数和顶部麦克风在电子设备播放音频信号时采集到的目标频段的环境声音信号,确定第一测量点处的声音信号,作为测量声音信号,具体的,根据该环境声音信号确定第一测量点处的声音信号的方法并不限定。
作为一种示例,对于仅存在一个第一测量点的情况,该转换关系记为反向传递函数,对于存在多个第一测量点的情况,针对每个第一测量点可以计算得到一个转换关系,对所有转换关系进行加权平均,将加权平均结果作为反向传递函数。下文将反向传递函数记为H’(z),可以理解的是,该反向传递函数H’(z)为第一测量点的扬声器到手机的麦克风的声音信号的转换关系,而实际的漏音情况需要确定的是手机的推动屏幕发声的器件和/或扬声器的漏音到第一测量点的转换关系,因此,作为一种示例,可以将该反向传递函数H’(z)取倒数来表示该转换关系,在其他的示例中,也可以使用其他的方式根据反向传递函数H’(z)确定上述转换关系,例如建立神经网络模型等,本申请对此并不限定。
可以理解的是,顶部麦克风在电子设备播放音频信号时采集到的声音信号中包括:环境音以及电子设备的回声,因此通过对采集到的声音信号进行回声滤除即可得到环境音,若电子设备所处场景中不存在除电子设备以外的其他声源,则可以将环境音视为电子设备发出的声音中未被抵消的部分,而未抵消的部分中目标频段的声音信号即为电子设备的漏音,因此可以通过带通滤波器从环境音中筛选出目标频段的环境声音信号可以视为电子设备的漏音。
而电子设备的漏音是由第一播放声音信号中未被抵消的部分传递至顶部麦克风产生的,假设将漏音记为A,则可以根据反向传递函数计算出在第一测量点处第一播放声音信号中未被抵消的部分为A/H’(z),该未被抵消的部分即为电子设备播放音频信号时第一测量点的目标频段的声音信号,即测量声音信号。
选用该实施例,可以利用电子设备的麦克风采集到的环境声音信号确定得到测量声音信号,从而使得电子设备能够根据自身的麦克风采集到环境声音信号,自适应地调整自身所使用的各补偿函数,从而进一步减少电子设备的漏音。
该实施例中,电子设备的系统框图如图12所示,其中Voice1经过D1(z)、K1(z)和H1(z)的作用,形成第一播放声音信号并传递至第一测量点,并且Voice1(通话处理1)经过G1(z)、G2(z)的作用形成第一抵消音频信号Voice1_R,Voice1_R和Voice2(通话处理2)经过K2(z)和H2(z)的作用,形成第一抵消声音信号和低频声音信号并传递至第一测量点,第一播放声音信号和第一抵消声音信号在第一测量点处抵消,从而减少了Voice1的泄露。
顶部麦克风采集到的声音信号经过回声消除和带通滤波处理得到环境声音信号,环境声音信号经过反向传递函数H’(z)的倒数的作用,得到测量声音信号,其中,对反向传递函数H’(z)。并且Voice1经过D1(z)K1(z)H1(z)的作用形成声音信号A(t),Voice_R经过K2(z)H2(z)的作用形成声音信号B(t),如前述分析可知,A(t)与B(t)之和即为第一播放声音信号和第一抵消声音信号在第一测量点的叠加声音信号,下文将A(t)与B(t)之和记为E(t),E(t)和C(t)被输入至参数生成模块,参数生成模块根据E(t)和C(t)调整D1(z)、G1(z)和G2(z)中的一个或多个函数,即执行前述S1003的步骤,其中,参数生成模块可以基于LMS(Least Mean Square,最小均方算法)自适应原理构建,也可以基于AU原理构建(例如基于实验数据训练的NN(Neural Network,神经网络)),本申请对此并不限定。
一些电子设备可能包括除顶部麦克风以外的其他麦克风,例如,一些手机中包括顶部麦克风、背部麦克风以及底部麦克风。对于这些电子设备,也可以利用其他麦克风采集到的环境声音信号确定得到测量声音信号,由于原理与顶部麦克风相同,因此在此不再赘述。
并且对于电子设备中存在多个麦克风的应用场景,可以利用多个麦克风采集到的环境声音信号确定得到测量声音信号。示例性的,如图13所示,该示例中,电子设备包括顶部麦克风、背部麦克风以及底部麦克风。
该示例中,分别测量第一测量点发出的声音信号到每个麦克风的反向传递函数,由于声音信号到背部麦克风和到底部麦克风的反向传递函数的测量方式与声音信号到顶部麦克风的反向传递函数的测量方式相同,因此测量方式可以参见前述图11所示的示例,在此不再赘述。并根据每个麦克风的反向传递函数和每个麦克风在电子设备播放音频信号时采集到的环境声音信号,确定第一测量点处的声音信号,作为测量声音信号。
该示例中,每个麦克风采集到的声音信号分别经过回声消除和带通滤波器的处理,得到每个麦克风各自采集到的环境声音信号,并叠加每个麦克风各自采集到的环境声音信号,并使用平均反向传递函数的倒数作用于叠加得到的声音信号,生成测量声音信号C(t)。其中,平均反向传递函数为对声音信号到各麦克风的反向传递函数进行加权平均得到的。
该示例中A(t)与B(t)的生成以及参数生成模块的原理与图12所示的示例相同,可以参见图12所示的示例中的相关说明,在此不再赘述。
前述各示例中描述了通过第二发声单元发出的声音信号抵消第一发声单元发出的声音信号以及通过第一发声单元发出的声音信号抵消第二发声单元发出的声音信号的情况。在一些电子设备中,不仅包括除第一发声单元和第二发声单元以外的其他发声单元,如前述图7所示的示例中,电子设备中包括第一发声单元(即顶部扬声器)、第二发声单元(陶瓷器件)外,还包括底部扬声器这一发声单元。
因此,在一些应用场景中,可以使用第二发声单元和其他发声单元发出的声音信号共同抵消第一发声单元发出的声音信号,以进一步减少电子设备的漏音。示例性的,如图14所示,在示例中,第一发声单元为陶瓷器件,第二发声单元为顶部扬声器,并且电子设备中还包括底部扬声器213、第三相位补偿单元233和第三幅值补偿单元243。
第三相位补偿单元233和第三幅值补偿单元243,用于按照第三相位补偿函数和第三幅值补偿函数调整第一原始音频信号的相位和幅值,得到第三抵消音频信号。
底部扬声器(第三发声单元)213,用于根据第三抵消音频信号发出第三抵消声音信号。
其中,第三相位补偿单元233用于按照第三相位补偿函数调整输入的音频信号的相位,第三幅值补偿单元243用于按照第三幅值补偿函数调整输入的音频信号的幅值,并且在一种可能的实施例中,第三相位补偿单元233的输入为第一原始音频信号,第三幅值补偿单元243的输入为第三相位补偿单元233的输出,该示例中,第三幅值补偿单元243的输出即为第三抵消声音信号。在另一种可能的实施例中,第三幅值补偿单元243的输入为第一原始音频信号,第三相位补偿单元233的输入为第三幅值补偿单元243的输出,该示例中,第三相位补偿单元233的输出即为第三抵消声音信号。
如前述分析,在使用合理的第三相位补偿函数和第三幅值补偿函数的情况下,第三抵消声音信号能够抵消第一播放声音信号。其中,第三相位补偿函数和第三幅值补偿函数是通过本申请提供的电子设备的参数确定方法确定得到的。下面将对如何确定得到第三相位补偿函数和第三幅值补偿函数进行示例性说明,参见图15,该示例中,在第一测量点之外还设置有第二测量点,第二测量点的设置方式可以参见第一测量点的设置方式,本申请对此不作任何限制,但是应当满足:第一测量点与顶部扬声器之间的距离小于第一测量点与底部扬声器之间的距离,第二测量点与顶部扬声器之间的距离大于第二测量点与底部扬声器之间的距离,即第一测量点更接近于顶部扬声器,第二测量点更接近于底部扬声器。
该示例中,本申请提供的电子设备的参数确定方法还包括:
S303,确定第一发声单元的声音信号到第二测量点的第三传递函数和底部扬声器播放的声音信号到第二测量点的第四传递函数。
第三传递函数与第四传递函数的确定方式与前述第一传递函数和第三传递函数相同,区别仅在于测量点由第一测量点变为第二测量点,可以参见前述S301中关于第一传递函数和第二传递函数的相关说明,在此不再赘述。下文为描述方便,将第三传递函数记为H3(z),第四传递函数记为H4(z)
S304,根据第三传递函数和第四传递函数,确定第一播放声音信号与第三抵消声音信号在第二测量点抵消的第三相位补偿函数以及第三幅值补偿函数。
为方便描述,下文将第三相位补偿函数记为G5(z),第三幅值补偿函数记为G6(z)。可以理解的是,若将第一原始音频信号记为X,则第一播放声音信号是第一原始音频信号X通过D1(z)调整时延后得到的D1(z)X,经过第一发声单元的K1(z)的作用得到K1(z)D1(z)X,并通过H3(z)传递到第二测量点形成声音信号H32(z)K1(z)D1(z)X,而第三抵消声音信号是第一原始音频信号Y通过G5(z)G6(z)调整幅值和相位得到的G5(z)G6(z)X,第三抵消音频信号经过底部扬声器的信号通路和功放模型K3(z)的作用得到K3(z)G5(z)G6(z)X,并通过H4(z)传递到第二测量点形成声音信号H4(z)K3(z)G5(z)G6(z)Y,因此第一播放声音信号和第三抵消声音信号在第二测量点处的叠加形成的叠加声音信号为D1(z)K1(z)H3(z)X+G5(z)G6(z)K3(z)H4(z)X。
对于第二测量点,若要使得此处的第一播放声音信号与第三抵消声音信号抵消,则需要叠加声音信号的声音强度较小,即需要满足公式(5):
|D1(z)K1(z)H3(z)X+G5(z)G6(z)K3(z)H4(z)X|=g (5)
当g=0时,公式(3)可以改写为公式(6):
D1(z)K1(z)H3(z)=-G5(z)G6(z)K3(z)H4(z) (6)
而在上式中D1(z)、K1(z)、H3(z)、K3(z)(确定方式同前述K1(z)和K2(z))、H4(z)都已确定,因此,可以确定出使得公式(5)或(6)成立的G3(z)、G4(z),而如前述分析,使用确定出的G5(z)、G6(z)即可使得第一播放声音信号与第三抵消声音信号在第二测量点抵消,本申请对具体的G5(z)、G6(z)取值并不限定。并且,为便于计算,除上述公式(5)或公式(6)外,还可以加入其他的约束条件,如约束条件:D1(z)的时延与G5(z)、G6(z)的时延和相同。
该示例中电子设备的系统框图如图16所示,其中Voice1经过D1(z)、K1(z)和H1(z)的作用,形成第一播放声音信号并传递至第一测量点和第二测量点,并且Voice1经过G1(z)、G2(z)的作用形成第一抵消音频信号Voice1_R1,Voice1_R1和Voice2经过K2(z)和H2(z)的作用,形成第一抵消声音信号和低频声音信号并传递至第一测量点,第一播放声音信号和第一抵消声音信号在第一测量点处抵消。
并且Voice1经过G5(z)、G6(z)的作用形成第三抵消音频信号Voice1_R2,Voice1_R2经过K3(z)和H4(z)的作用,形成第三抵消声音信号和低频声音信号并传递至第二测量点,第一播放声音信号和第三抵消声音信号在第三测量点处抵消。
选用该实施例,能够通过顶部扬声器和底部扬声器发出的抵消声音信号分别在第一测量点和第二测量点抵消推动屏幕发声的器件发出的第一播放声音信号,从而在更大的空间内抵消推动屏幕发声的器件发出的声音信号,即进一步减少了电子设备的漏音。
并且由于该示例中,Voice1_R1、Voice1_R2和Voice1的频段应当完全相同或部分重叠,因此该示例中Voice1、Voice1_R1、Voice1_R2、Voice2的频谱如图16所示。
对应于前述的电子设备的参数确定方法,本申请还提供了一种电子设备的参数确定装置,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号,所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第一幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号;
所述电子设备的参数确定装置如图17所示,包括:
传递函数确定模块1701,用于确定所述第一发声单元的声音信号到第一测量点的第一传递函数和所述第二发声单元播放的声音信号到所述第一测量点的第二传递函数;
补偿函数确定模块1702,用于根据所述第一传递函数和所述第二传递函数,确定使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数。
在一种可能的实施例中,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号,所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
所述补偿函数确定模块1702,还用于根据所述第一传递函数和所述第二传递函数,确定使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的所述第二时延补偿函数、所述第二相位补偿函数以及所述第二幅值补偿函数。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;所述底部扬声器用于根据所述第三抵消音频信号发出第三抵消声音信号;
所述传递函数确定模块1701,还用于确定所述第一发声单元的声音信号到第二测量点的第三传递函数和所述底部扬声器播放的声音信号到所述第二测量点的第四传递函数;
所述补偿函数确定模块1702,还用于根据所述第三传递函数和所述第四传递函数,确定使所述第一播放声音信号与所述第三抵消声音信号在所述第二测量点抵消的所述第三相位补偿函数以及所述第三幅值补偿函数;
其中,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
在一种可能的实施例中,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号,所述第三频段的频率下限高于第一阈值,且所述第三频段的频率上限低于第二阈值。
在一种可能的实施例中,所述装置还包括,自适应调整模块,用于确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,所述目标频段为所述第一原始音频信号所处频段;
根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,确定所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加声音信号;
根据所述测量声音信号和所述叠加声音信号的声音强度,调整所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数。
在一种可能的实施例中,所述电子设备还包括:麦克风,
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述自适应调整模块自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
测量所述第一测量点发出的声音信号到所述麦克风的反向传递函数;
根据所述反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述麦克风的数目为多个;
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
分别测量所述第一测量点发出的声音信号到每个所述麦克风的反向传递函数;
根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
在一种可能的实施例中,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
在本申请提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一电子设备的参数确定方法的步骤。
在本申请提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一电子设备的参数确定方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、计算机可读存储介质以及计算机程序产品的实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。
Claims (31)
1.一种电子设备,其特征在于,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;
所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号;
所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;
所述第一相位补偿单元和第一幅值补偿单元用于分别按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;
所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号。
2.根据权利要求1所述的电子设备,其特征在于,所述第一时延补偿函数是根据第一传递函数和第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在第一测量点抵消的时延补偿函数,所述第一传递函数是所述第一发声单元的声音信号到所述第一测量点的传递函数,所述第二传递函数是所述第二发声单元播放的声音信号到所述第一测量点的传递函数;所述第一相位补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的相位补偿函数,所述第一幅值补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的幅值补偿函数。
3.根据权利要求1所述的电子设备,其特征在于,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,
所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号;
所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;
所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;
所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
其中,第二时延补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的时延补偿函数,所述第二相位补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的相位补偿函数,所述第二幅值补偿函数是根据所述第一传递函数和所述第二传递函数,确定的使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的幅值补偿函数。
4.根据权利要求3所述的电子设备,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
5.根据权利要求1所述的电子设备,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;
所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;
所述底部扬声器用于根据所述第三抵消音频发出第三抵消声音信号;
其中,所述第三相位补偿函数是根据第三传递函数和第四传递函数,确定的使所述第一播放声音信号与所述第三抵消声音信号在第二测量点抵消的相位补偿函数,所述第三传递函数是所述第一发声单元的声音信号到第二测量点的传递函数,所述第四传递函数是所述底部扬声器的声音信号到第二测量点的传递函数,所述第三幅值补偿函数是根据所述第三传递函数和所述第四传递函数,确定的使所述第一播放声音信号与所述第三抵消声音信号在第二测量点抵消的幅值补偿函数,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
6.根据权利要求1所述的电子设备,其特征在于,
所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号;
或者,
所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第四频段的音频子信号,所述第四频段的下限高于所述第三频段的上限。
7.根据权利要求1所述的电子设备,其特征在于,所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数是根据测量声音信号和叠加声音信号的声音强度调整的,所述测量声音信号是所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,所述目标频段为所述第一原始音频信号所处频段,所述叠加声音信号是根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数确定的所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加信号。
8.根据权利要求7所述的电子设备,其特征在于,所述电子设备还包括:麦克风,
测量声音信号是根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号。
9.根据权利要求8所述的电子设备,其特征在于,
测量声音信号是根据反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,所述反向传递函数是测量所述第一测量点发出的声音信号到所述麦克风得到的传递函数。
10.根据权利要求8所述的电子设备,其特征在于,所述麦克风的数目为多个,所述反向传递函数是分别测量所述第一测量点发出的声音信号到每个所述麦克风得到的传递函数,所述测量声音信号是根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定得到的第一测量点处的声音信号。
11.根据权利要求1所述的电子设备,其特征在于,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
12.一种电子设备的参数确定方法,其特征在于,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号,所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第一幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号;
所述方法包括:
确定所述第一发声单元的声音信号到第一测量点的第一传递函数和所述第二发声单元播放的声音信号到所述第一测量点的第二传递函数;
根据所述第一传递函数和所述第二传递函数,确定使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数。
13.根据权利要求12所述的方法,其特征在于,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号,所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
所述方法还包括:
根据所述第一传递函数和所述第二传递函数,确定使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的所述第二时延补偿函数、所述第二相位补偿函数以及所述第二幅值补偿函数。
14.根据权利要求13所述的方法,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
15.根据权利要求12所述的方法,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;所述底部扬声器用于根据所述第三抵消音频信号发出第三抵消声音信号;
所述方法还包括:
确定所述第一发声单元的声音信号到第二测量点的第三传递函数和所述底部扬声器播放的声音信号到所述第二测量点的第四传递函数;
根据所述第三传递函数和所述第四传递函数,确定使所述第一播放声音信号与所述第三抵消声音信号在所述第二测量点抵消的所述第三相位补偿函数以及所述第三幅值补偿函数;
其中,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
16.根据权利要求12所述的方法,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号,所述第三频段的频率下限高于第一阈值,且所述第三频段的频率上限低于第二阈值。
17.根据权利要求12所述的方法,其特征在于,所述方法还包括:
确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,所述目标频段为所述第一原始音频信号所处频段;
根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,确定所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加声音信号;
根据所述测量声音信号和所述叠加声音信号的声音强度,调整所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数。
18.根据权利要求17所述的方法,其特征在于,所述电子设备还包括:麦克风,
所述确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号。
19.根据权利要求18所述的方法,其特征在于,
所述根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号,包括:
测量所述第一测量点发出的声音信号到所述麦克风的反向传递函数;
根据所述反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
20.根据权利要求18所述的方法,其特征在于,所述麦克风的数目为多个;
所述根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号,包括:
分别测量所述第一测量点发出的声音信号到每个所述麦克风的反向传递函数;
根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
21.根据权利要求12所述的方法,其特征在于,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
22.一种电子设备的参数确定装置,其特征在于,所述电子设备包括:第一发声单元、第二发声单元、第一时延补偿单元、第一相位补偿单元和第一幅值补偿单元;所述第一时延补偿单元用于按照第一时延补偿函数调整所述第一发声单元待播放的第一原始音频信号的时延,得到第一播放音频信号,所述第一发声单元用于根据所述第一播放音频信号发出第一播放声音信号;所述第一相位补偿单元和第一幅值补偿单元用于按照第一相位补偿函数和第一幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第一抵消音频信号;所述第二发声单元用于根据所述第一抵消音频信号发出第一抵消声音信号;
所述装置包括:
传递函数确定模块,用于确定所述第一发声单元的声音信号到第一测量点的第一传递函数和所述第二发声单元播放的声音信号到所述第一测量点的第二传递函数;
补偿函数确定模块,用于根据所述第一传递函数和所述第二传递函数,确定使所述第一播放声音信号与所述第一抵消声音信号在所述第一测量点抵消的所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数。
23.根据权利要求22所述的装置,其特征在于,所述电子设备还包括第二时延补偿单元、第二相位补偿单元和第二幅值补偿单元,所述第二时延补偿单元用于按照第二时延补偿函数调整所述第二发声单元待播放的第二原始音频信号的时延,得到第二播放音频信号,所述第二发声单元还用于根据所述第二播放音频信号发出第二播放声音信号;所述第二相位补偿单元和第二幅值补偿单元用于按照第二相位补偿函数和第二幅值补偿函数调整所述第二原始音频信号的相位和幅值,得到第二抵消音频信号;所述第一发声单元还用于根据所述第二抵消音频发出第二抵消声音信号;
所述补偿函数确定模块,还用于根据所述第一传递函数和所述第二传递函数,确定使所述第二播放声音信号与所述第二抵消声音信号在所述第一测量点抵消的所述第二时延补偿函数、所述第二相位补偿函数以及所述第二幅值补偿函数。
24.根据权利要求23所述的装置,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第一频段的音频子信号,所述第二原始音频信号为所述电子设备待播放的音频信号中处于第二频段的音频子信号,所述第二频段的下限高于所述第一频段的上限。
25.根据权利要求22所述的装置,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二音频播放单元为顶部扬声器,所述电子设备还包括底部扬声器、第三相位补偿单元和第三幅值补偿单元;所述第三相位补偿单元和第三幅值补偿单元用于按照第三相位补偿函数和第三幅值补偿函数调整所述第一原始音频信号的相位和幅值,得到第三抵消音频信号;所述底部扬声器用于根据所述第三抵消音频信号发出第三抵消声音信号;
所述传递函数确定模块,还用于确定所述第一发声单元的声音信号到第二测量点的第三传递函数和所述底部扬声器播放的声音信号到所述第二测量点的第四传递函数;
所述补偿函数确定模块,还用于根据所述第三传递函数和所述第四传递函数,确定使所述第一播放声音信号与所述第三抵消声音信号在所述第二测量点抵消的所述第三相位补偿函数以及所述第三幅值补偿函数;
其中,所述第一测量点与所述顶部扬声器之间的距离小于所述第一测量点与所述底部扬声器之间的距离,所述第二测量点与所述顶部扬声器之间的距离大于所述第二测量点与所述底部扬声器之间的距离。
26.根据权利要求22所述的装置,其特征在于,所述第一发声单元为推动屏幕发声的器件,所述第二发声单元为顶部扬声器,所述第一原始音频信号为所述电子设备待播放的音频信号中处于第三频段的音频子信号,所述第三频段的频率下限高于第一阈值,且所述第三频段的频率上限低于第二阈值。
27.根据权利要求22所述的装置,其特征在于,所述装置还包括,自适应调整模块,用于确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,所述目标频段为所述第一原始音频信号所处频段;
根据所述第一传递函数、第二传递函数、所述第一时延补偿函数、所述第一相位补偿函数以及所述第一幅值补偿函数,确定所述第一播放声音信号和所述第一抵消声音信号在所述第一测量点的叠加声音信号;
根据所述测量声音信号和所述叠加声音信号的声音强度,调整所述第一时延补偿函数、所述第一相位补偿函数和所述第一幅值补偿函数中的一个或多个函数。
28.根据权利要求27所述的装置,其特征在于,所述电子设备还包括:麦克风
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
根据所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定得到的所述第一测量点处的声音信号,作为测量声音信号。
29.根据权利要求28所述的装置,其特征在于,
所述自适应调整模块自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
测量所述第一测量点发出的声音信号到所述麦克风的反向传递函数;
根据所述反向传递函数和所述麦克风在所述电子设备播放音频信号时采集到的目标频段的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
30.根据权利要求28所述的装置,其特征在于,所述麦克风的数目为多个;
所述自适应调整模块确定所述电子设备播放音频信号时所述第一测量点的目标频段的声音信号,作为测量声音信号,包括:
分别测量所述第一测量点发出的声音信号到每个所述麦克风的反向传递函数;
根据每个所述麦克风的所述反向传递函数和每个所述麦克风在所述电子设备播放音频信号时采集到的环境声音信号,确定所述第一测量点处的声音信号,作为测量声音信号。
31.根据权利要求22所述的装置,其特征在于,所述第一发声单元为顶部扬声器,所述第二发声单元为推动屏幕发声的器件,所述第一测量点位于所述顶部扬声器与所述推动屏幕发声的器件之间,且位于靠近所述电子设备的屏幕的一侧。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211100941.3A CN117714583A (zh) | 2022-09-08 | 2022-09-08 | 一种电子设备、电子设备的参数确定方法及装置 |
PCT/CN2023/115238 WO2024051510A1 (zh) | 2022-09-08 | 2023-08-28 | 一种电子设备、电子设备的参数确定方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211100941.3A CN117714583A (zh) | 2022-09-08 | 2022-09-08 | 一种电子设备、电子设备的参数确定方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117714583A true CN117714583A (zh) | 2024-03-15 |
Family
ID=90159400
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211100941.3A Pending CN117714583A (zh) | 2022-09-08 | 2022-09-08 | 一种电子设备、电子设备的参数确定方法及装置 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN117714583A (zh) |
WO (1) | WO2024051510A1 (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1909566A (zh) * | 2005-07-05 | 2007-02-07 | Lg电子株式会社 | 防止通话期间声音泄漏的移动通信终端及其方法 |
CN112118339A (zh) * | 2019-06-20 | 2020-12-22 | 华为技术有限公司 | 电子设备、信号处理的方法和和装置 |
CN114007165A (zh) * | 2021-10-29 | 2022-02-01 | 歌尔光学科技有限公司 | 一种电子设备及其远场消声自校准方法和系统 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107369459B (zh) * | 2017-08-29 | 2019-04-12 | 维沃移动通信有限公司 | 一种音频处理方法及移动终端 |
CN113497849A (zh) * | 2020-03-20 | 2021-10-12 | 华为技术有限公司 | 一种声音的掩蔽方法、装置及终端设备 |
CN113746975A (zh) * | 2020-05-29 | 2021-12-03 | 华为技术有限公司 | 一种抵消漏音的方法及电子设备 |
CN113992772B (zh) * | 2021-10-12 | 2024-03-01 | 维沃移动通信有限公司 | 电子设备及其音频信号处理方法 |
-
2022
- 2022-09-08 CN CN202211100941.3A patent/CN117714583A/zh active Pending
-
2023
- 2023-08-28 WO PCT/CN2023/115238 patent/WO2024051510A1/zh unknown
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1909566A (zh) * | 2005-07-05 | 2007-02-07 | Lg电子株式会社 | 防止通话期间声音泄漏的移动通信终端及其方法 |
CN112118339A (zh) * | 2019-06-20 | 2020-12-22 | 华为技术有限公司 | 电子设备、信号处理的方法和和装置 |
CN114007165A (zh) * | 2021-10-29 | 2022-02-01 | 歌尔光学科技有限公司 | 一种电子设备及其远场消声自校准方法和系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2024051510A1 (zh) | 2024-03-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6505252B2 (ja) | 音声信号を処理するための方法及び装置 | |
CN110290262B (zh) | 一种通话方法及终端设备 | |
CN114697812B (zh) | 声音采集方法、电子设备及系统 | |
WO2021052110A1 (zh) | 一种提升扬声器的音质的方法及装置 | |
CN113496708B (zh) | 拾音方法、装置和电子设备 | |
US20240223689A1 (en) | Mobile terminal for preventing sound leakage and sound output method for mobile terminal | |
CN112118527A (zh) | 多媒体信息的处理方法、装置和存储介质 | |
CN113993226B (zh) | 支持双卡的终端设备中业务处理方法和装置 | |
KR20230009487A (ko) | 능동 잡음 제거 방법 및 장치 | |
US20230171337A1 (en) | Recording method of true wireless stereo earbuds and recording system | |
CN117153181B (zh) | 语音降噪方法、设备及存储介质 | |
CN113708858A (zh) | 一种信号处理方法及无线网络接入设备 | |
CN113921002A (zh) | 一种设备控制方法及相关装置 | |
CN114727212A (zh) | 音频的处理方法及电子设备 | |
CN117528370A (zh) | 信号处理方法及装置、设备控制方法及装置 | |
CN116825076B (zh) | 语音通话降噪方法、电子设备及可读存储介质 | |
WO2021232995A1 (zh) | 基于心理声学的音频编码方法及装置 | |
US20230162718A1 (en) | Echo filtering method, electronic device, and computer-readable storage medium | |
CN117714583A (zh) | 一种电子设备、电子设备的参数确定方法及装置 | |
CN114120950B (zh) | 一种人声屏蔽方法和电子设备 | |
US20230245669A1 (en) | Adaptive Echo Delay Determination Using An Out-Of-Band Acoustic Reference Signal | |
WO2022161036A1 (zh) | 天线选择方法、装置、电子设备及可读存储介质 | |
WO2022089563A1 (zh) | 一种声音增强方法、耳机控制方法、装置及耳机 | |
CN115706755A (zh) | 回声消除方法、电子设备及存储介质 | |
CN113099734B (zh) | 天线切换方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |