CN109413522B - 声音信号处理方法、声音信号处理装置及电子设备 - Google Patents
声音信号处理方法、声音信号处理装置及电子设备 Download PDFInfo
- Publication number
- CN109413522B CN109413522B CN201811326616.2A CN201811326616A CN109413522B CN 109413522 B CN109413522 B CN 109413522B CN 201811326616 A CN201811326616 A CN 201811326616A CN 109413522 B CN109413522 B CN 109413522B
- Authority
- CN
- China
- Prior art keywords
- sound signal
- processing
- microphone
- sound
- terminal equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 263
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000004891 communication Methods 0.000 claims abstract description 29
- 238000000034 method Methods 0.000 claims abstract description 29
- 238000001914 filtration Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 9
- 230000008569 process Effects 0.000 description 9
- 230000005540 biological transmission Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/08—Mouthpieces; Microphones; Attachments therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
- H04R1/222—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only for microphones
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Circuit For Audible Band Transducer (AREA)
- Telephone Function (AREA)
Abstract
本发明实施例提供的声音信号处理方法、声音信号处理装置及电子设备,涉及声音信号处理技术领域。所述方法应用于电子设备的控制器,电子设备包括设置于室内的第一麦克风和第一喇叭,以及室外的第二麦克风和第二喇叭,该方法包括:判断电子设备是否通信连接有终端设备;若未通信连接有终端设备,将获取的第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理;将进行回声消除处理和啸叫消除处理得到的声音信号发送给第一喇叭和第二喇叭进行语音播放。通过上述方法,可以根据是否通信连接有终端设备选择对应的声音信号处理方式,并在未通信连接有终端设备时同时进行回声消除处理和啸叫消除处理,以提高声音信号处理的效率。
Description
技术领域
本发明涉及声音信号处理技术领域,具体而言,涉及一种声音信号处理方法、声音信号处理装置及电子设备。
背景技术
在声音传输的过程中,有些声学路径会随着传输次数不断衰减最后消失,反馈的信号与直达信号的延时较短的称之为混响,较长的称之为回声,而有些声学路径则会随着传播次数的增加而不断增大,最后直接发出十分刺耳的声音,这种现象我们称之为啸叫。但是,经发明人研究发现,在现有技术中,没有一种方法可以根据是否通信连接有终端设备选择对应的声音信号处理方式并在同一声场中对回声和啸叫进行同时处理,从而存在着声音信号处理的效率低的问题。
发明内容
有鉴于此,本发明的目的在于提供一种声音信号处理方法、声音信号处理装置及电子设备,以改善现有技术中存在的问题。
为实现上述目的,本发明实施例采用如下技术方案:
一种声音信号处理方法,应用于电子设备的控制器,所述电子设备包括设置于室内的第一麦克风和第一喇叭,以及室外的第二麦克风和第二喇叭,所述方法包括:
判断所述电子设备是否通信连接有终端设备;
若未通信连接有所述终端设备,将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理;
将进行回声消除处理和啸叫消除处理得到的声音信号发送给所述第一喇叭和第二喇叭进行语音播放。
在本发明实施例较佳的选择中,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤包括:
获取所述第一麦克风输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号;
获取所述第二麦克风输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。
在本发明实施例较佳的选择中,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤还包括:
获取上一时刻经过处理后输出的第一声音信号,并对该第一声音信号进行延时处理;
获取上一时刻经过处理后输出的第二声音信号,并将该第二声音信号与经过延时处理的第一声音信号进行加权混音处理,以得到当前时刻的所述第一参考信号。
在本发明实施例较佳的选择中,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤还包括:
获取上一时刻经过处理后输出的第二声音信号,并对该第二声音信号进行延时处理;
获取上一时刻经过处理后输出的第一声音信号,并将该第一声音信号与经过延时处理的第二声音信号进行加权混音处理,以得到当前时刻的所述第二参考信号。
在本发明实施例较佳的选择中,所述方法还包括:
若通信连接有所述终端设备,则将所述第一麦克风和第一喇叭关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风;
若获取的声音信号属于所述终端设备,则输出该声音信号;
若获取的声音信号属于所述第二麦克风,则根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。
在本发明实施例较佳的选择中,所述根据当前时刻的第三参考信号对该声音信号进行差值处理的步骤包括:
获取上一时刻所述终端设备输出的声音信号;
根据上一时刻经过差值处理得到的声音信号对上一时刻所述终端设备输出的声音信号进行滤波处理,以得到当前时刻的所述第三参考信号。
本发明实施例还提供了一种声音信号处理装置,应用于电子设备的控制器,所述电子设备包括设置于室内的第一麦克风和第一喇叭,以及室外的第二麦克风和第二喇叭,该装置包括:
第一判断模块,用于判断是否通信连接有终端设备;
第一声音信号处理模块,用于在未通信连接有所述终端设备时,将获取的声音信号进行回声消除处理和啸叫消除处理;
语音播放模块,用于根据进行回声消除处理和啸叫消除处理得到的声音信号进行语音播放。
在本发明实施例较佳的选择中,所述第一声音信号处理模块包括:
第一声音信号处理子模块,用于获取所述第一麦克风输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号;
第二声音信号处理子模块,用于获取所述第二麦克风输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。
在本发明实施例较佳的选择中,所述装置还包括:
第二判断模块,用于在通信连接有所述终端设备时,将所述第一麦克风和第一喇叭关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风;
声音信号输出模块,用于在获取的声音信号属于所述终端设备时,输出该声音信号;
第二声音信号处理模块,用于在若获取的声音信号属于所述第二麦克风时,根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。
本发明实施例还提供了一种电子设备,包括控制器,该控制器包括存储单元、处理单元以及上述的声音信号处理装置,其中,该声音信号处理装置包括一个或多个存储于所述存储单元中并由所述处理单元执行的软件功能模块。
本发明实施例提供的声音信号处理方法、声音信号处理装置及电子设备,可以根据是否通信连接有终端设备选择对应的声音信号处理方式,并在未通信连接有终端设备时同时进行回声消除处理和啸叫消除处理,以避免现有技术中声音信号处理的效率低的问题。
进一步地,在通信连接有终端设备并且获取的声音信号属于第二麦克风时,可以根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至终端设备,以避免现有技术中输出至所述终端设备的声音信号包括回声的问题,进而避免声音信号处理的效果差的问题。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
图1为本发明实施例提供的电子设备的结构示意图。
图2为本发明实施例提供的声音信号处理方法的流程示意图。
图3为图2中的步骤S120的应用示意图。
图4为图2中的步骤S120的流程示意图。
图5为图2中的步骤S120的另一流程示意图。
图6为图2中的步骤S120的另一流程示意图。
图7为本发明实施例提供的声音信号处理方法的另一流程示意图。
图8为图7中的步骤S160的流程示意图。
图9为本发明实施例提供的声音信号处理装置的结构框图。
图10为本发明实施例提供的第一声音信号处理模块的结构框图。
图11为本发明实施例提供的声音信号处理装置的另一结构框图。
图标:10-电子设备;11-控制器;12-存储单元;13A-第一麦克风;13B-第一喇叭;13C-第二麦克风;13D-第二喇叭;14-处理单元;100-声音信号处理装置;110-第一判断模块;120-第一声音信号处理模块;121-第一声音信号处理子模块;122-第二声音信号处理子模块;130-语音播放模块;140-第二判断模块;150-声音信号输出模块;160-第二声音信号处理模块。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例只是本发明的一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。
因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。在本发明的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为只是或暗示相对重要性。
在本发明的描述中,除非另有明确的规定和限定,术语“设置”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
如图1所示,本发明实施例提供了一种电子设备10,包括控制器11,该控制器11包括存储单元12、第一麦克风13A、第一喇叭13B、第二麦克风13C、第二喇叭13D、处理单元14以及声音信号处理装置100,其中,该声音信号处理装置100包括一个或多个存储于所述存储单元12中并由所述处理单元14执行的软件功能模块。
可选地,所述电子设备10的具体形式不受限制,可以根据实际应用进行设置。在本实施例中,提供一种可行的示例,所述电子设备10可以为智能猫眼设备。
其中,所述存储单元12和处理单元14之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。所述声音信号处理装置100包括至少一个可以软件或固件(firmware)的形式存储于所述存储单元12中的软件功能模块。所述处理单元14用于执行所述存储单元12中存储的可执行的计算机程序,例如,所述声音信号处理装置100所包括的软件功能模块及计算机程序等,以实现声音信号处理。
其中,所述存储单元12可以是,但不限于,随机存取存储器(Random AccessMemory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(ProgrammableRead-Only Memory,PROM),可擦除只读存储器(Erasable Programmable Read-OnlyMemory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-OnlyMemory,EEPROM)等。其中,存储单元12用于存储程序,所述处理单元14在接收到执行指令后,执行所述程序。
所述处理单元14可能是一种集成电路芯片,具有信号的处理能力。上述的处理单元14可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以理解,图1所示的结构仅为示意,所述控制器11还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
结合图2,本发明实施例提供了一种可应用于电子设备10的所述控制器11的声音信号处理方法。其中,所述方法有关的流程所定义的方法步骤可以由所述处理单元14实现。下面将对图2所示的具体流程进行详细阐述。
步骤S110,判断所述电子设备10是否通信连接有终端设备。
可选地,所述终端设备的具体形式不受限制,可以根据实际应用需求进行设置,只要包括喇叭和麦克风并且能够与所述电子设备10建立通信连接以发送和接收声音信号即可。例如,可以包括,但不限于智能手机、个人电脑(personal computer,PC)、平板电脑、个人数字助理(personal digital assistant,PDA)、移动上网设备(mobile Internetdevice,MID)等设备。
步骤S120,若未通信连接有所述终端设备,将获取的所述第一麦克风13A和第二麦克风13C发出的声音信号进行回声消除处理和啸叫消除处理。
详细地,若所述控制器11未通信连接有所述终端设备,结合图3,实线表示声音信号的输出路径,即通过所述第一麦克风13A说话由所述第二喇叭13D播放,通过所述第二麦克风13C说话由所述第一喇叭13B播放。室内室外仅仅相隔一扇门,由于固体对声音传输效果要优于空气的声音传播,因此室内室外处于同一声场,则获取的声音信号同时包括回声信号和啸叫信号,将获取的声音信号进行回声消除处理和啸叫消除处理以提高声音信号处理的效率。
其中,检测所述声音信号的方式不受限制,可以根据实际应用需求进行设置。在本实施例中,提供一种可行的示例,通过硬件芯片FM1288进行声音信号检测,以降低处理单元14的功耗。
步骤S130,将进行回声消除处理和啸叫消除处理得到的声音信号发送给所述第一喇叭13B和第二喇叭13D进行语音播放。
在本实施例中,通过步骤S120可以得到经过回声消除处理和啸叫消除处理的声音信号,将进行回声消除处理和啸叫消除处理得到的声音信号发送给所述第一喇叭13B和第二喇叭13D进行语音播放。
通过以上设置,可以根据是否通信连接有终端设备选择对应的声音信号处理方式,并在未通信连接有终端设备时同时进行回声消除处理和啸叫消除处理,以避免现有技术中声音信号处理的效率低的问题。
可选地,执行步骤S120以进行回声消除处理和啸叫消除处理的方式不受限制,可以根据实际应用需求进行设置,只要能够进行回声和啸叫消除处理即可。在本实施例中,提供一种可行的示例,如图4所示。详细地,步骤S120可以包括步骤S121和步骤S122,以进行回声消除处理和啸叫消除处理。
步骤S121,获取所述第一麦克风13A输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号。
详细地,在本实施例中,将处理后的第一声音信号输出至所述第二喇叭13D以进行语音播放。
步骤S122,获取所述第二麦克风13C输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。
详细地,在本实施例中,将处理后的第二声音信号输出至所述第一喇叭13B以进行语音播放。
可选地,所述第一参考信号和所述第二参考信号的具体内容不受限制,可以根据实际应用需求进行设置,只要能够较为准确的对声音信号进行回声消除处理和啸叫消除处理即可。在本实施例中,在一种可行的示例中,结合图5和图6,步骤S120还可以包括步骤S123、步骤S124、步骤S125和步骤S126。
步骤S123,获取上一时刻经过处理后输出的第一声音信号,并对该第一声音信号进行延时处理。
可选地,所述进行延时处理的具体步骤不受限制,可以根据实际应用需求进行设置,只要能够消除上一时刻经过处理后输出的第一声音信号和所述第一麦克风13A输出的第一声音信号的相关性即可。
步骤S124,获取上一时刻经过处理后输出的第二声音信号,并将该第二声音信号与经过延时处理的第一声音信号进行加权混音处理,以得到当前时刻的所述第一参考信号。
可选地,所述进行加权混音处理的具体步骤不受限制,可以根据实际应用需求进行设置,在本实施例中,在一种可行的示例中,所述进行加权混音处理的步骤可以包括y(n)=a1*x1(n)+a2*x2(n)。
详细地,a1为经过处理后输出的第二声音信号的权重,a2为经过延时处理的第一声音信号的权重,所述a1和a2的具体大小不受限制,可以根据实际应用进行设置。
步骤S125,获取上一时刻经过处理后输出的第二声音信号,并对该第二声音信号进行延时处理。
可选地,所述进行延时处理的具体步骤不受限制,可以根据实际应用需求进行设置,只要能够消除上一时刻经过处理后输出的第二声音信号和所述第二麦克风13C输出的第二声音信号的相关性即可。
步骤S126,获取上一时刻经过处理后输出的第一声音信号,并将该第一声音信号与经过延时处理的第二声音信号进行加权混音处理,以得到当前时刻的所述第二参考信号。
可选地,所述进行加权混音处理的具体步骤不受限制,可以根据实际应用需求进行设置,在本实施例中,在一种可行的示例中,所述进行加权混音处理的步骤可以包括y(n)=a3*x3(n)+a4*x4(n)。
详细地,a3为经过处理后输出的第一声音信号的权重,a4为经过延时处理的第二声音信号的权重,所述a3和a4的具体大小不受限制,可以根据实际应用进行设置。
在本实施例中,通过步骤S110、步骤S120及步骤S130可以在未通信连接有终端设备时,对获取的声音信号同时进行回声消除处理和啸叫消除处理。在一种可行的示例中,结合图7,在通信连接有终端设备时,所述方法还可以包括步骤S140、步骤S150及步骤S160。
步骤S140,若通信连接有所述终端设备,则将所述第一麦克风13A和第一喇叭13B关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风13C。
详细地,若通信连接有所述终端设备,将设置于室内的所述第一麦克风13A和第一喇叭13B关闭以避免室内产生回声,通过所述终端设备与室外进行语音对讲。设置于室外的第二喇叭13D播放的声音经过多次反射,由设置于室外的第二麦克风13C采集,从而产生回声,所以需要判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风13C,以对获取的声音信号进行不同的处理。
步骤S150,若获取的声音信号属于所述终端设备,则输出该声音信号。
详细地,若获取的声音信号属于所述终端设备,上一步骤已经将设置于室内的所述第一麦克风13A和第一喇叭13B关闭以避免室内产生回声,将获取的声音信号输出至所述第二喇叭13D以进行语音播放。
步骤S160,若获取的声音信号属于所述第二麦克风13C,则根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。
详细地,所述进行差值处理的具体步骤不受限制,可以根据实际应用需求进行设置,在本实施例中,在一种可行的示例中,所述进行差值处理的步骤可以包括其中,e(n)为差值处理后的声音信号,x(n)为获取的属于所述第二麦克风13C的声音信号,d(n)为第三参考信号。
可选地,第三参考信号的具体内容不受限制,可以根据实际应用进行设置,在本实施例中,在一种可行的示例中,为了得到当前时刻的所述第三参考信号,结合图8,步骤S160可以包括步骤S161和步骤S162。
步骤S161,获取上一时刻所述终端设备输出的声音信号。
步骤S162,根据上一时刻经过差值处理得到的声音信号对上一时刻所述终端设备输出的声音信号进行滤波处理,以得到当前时刻的所述第三参考信号。
可选地,当前时刻与上一时刻的差值的具体大小不受限制,可以根据实际应用进行设置,在本实施例中,在一种可行的示例中,所述当前时刻与上一时刻的差值可以为50ms。
结合图9,本本发明实施例还提供了一种可应用于上述电子设备10的控制器11的声音信号处理装置100,可以包括第一判断模块110、第一声音信号处理模块120及语音播放模块130。
其中,所述第一判断模块110,用于判断所述电子设备10是否通信连接有终端设备。在本实施例中,所述第一判断模块110可以用于执行图2所示的步骤S110,关于所述第一判断模块110的具体描述可以参照前文对步骤S110的描述。
并且,所述第一声音信号处理模块120,用于在未通信连接有所述终端设备时,将获取的所述第一麦克风13A和第二麦克风13C发出的声音信号进行回声消除处理和啸叫消除处理。在本实施例中,所述第一声音信号处理模块120可用于执行图2所示的步骤S120,关于所述第一声音信号处理模块120的具体描述可以参照前文对步骤S120的描述。
结合图10,所述第一声音信号处理模块120可以包括第一声音信号处理子模块121和第二声音信号处理子模块122。
详细地,所述第一声音信号处理子模块121,用于获取所述第一麦克风13A输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号。在本实施例中,所述第一声音信号处理子模块121可用于执行图4所示的步骤S121,关于所述第一声音信号处理子模块121的具体描述可以参照前文对步骤S121的描述。
并且,所述第二声音信号处理子模块122,用于获取所述第二麦克风13C输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。在本实施例中,所述第二声音信号处理子模块122可用于执行图4所示的步骤S122,关于所述第二声音信号处理子模块122的具体描述可以参照前文对步骤S122的描述。
同时,所述语音播放模块130,用于将进行回声消除处理和啸叫消除处理得到的声音信号发送给所述第一喇叭13B和第二喇叭13D进行语音播放。在本实施例中,所述语音播放模块130可用于执行图2所示的步骤S130,关于所述语音播放模块130的具体描述可以参照前文对步骤S130的描述。
结合图11,所述声音信号处理装置100还可以包括第二判断模块140、声音信号输出模块150及第二声音信号处理模块160。
其中,所述第二判断模块140,用于在通信连接有所述终端设备时,将所述第一麦克风13A和第一喇叭13B关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风13C。在本实施例中,所述第二判断模块140可用于执行图7所示的步骤S140,关于所述第二判断模块140的具体描述可以参照前文对步骤S140的描述。
并且,所述声音信号输出模块150,用于在获取的声音信号属于所述终端设备时,输出该声音信号。在本实施例中,所述声音信号输出模块150可用于执行图7所示的步骤S150,关于所述声音信号输出模块150的具体描述可以参照前文对步骤S150的描述。
同时,所述第二声音信号处理模块160,用于在获取的声音信号属于所述第二麦克风13C时,根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。在本实施例中,所述第二声音信号处理模块160可用于执行图7所示的步骤S160,关于所述第二声音信号处理模块160的具体描述可以参照前文对步骤S160的描述。
综上所述,本发明实施例提供的一种声音信号处理方法、声音信号处理装置100及电子设备10,可以根据是否通信连接有终端设备选择对应的声音信号处理方式,并在未通信连接有终端设备时同时进行回声消除处理和啸叫消除处理,以避免现有技术中声音信号处理的效率低的问题。
进一步地,在通信连接有终端设备并且获取的声音信号属于第二麦克风13C时,可以根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至终端设备,以避免现有技术中输出至所述终端设备的声音信号包括回声的问题,进而避免声音信号处理的效果差的问题。
在本发明实施例所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,电子设备,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
1.一种声音信号处理方法,其特征在于,应用于电子设备的控制器,所述电子设备包括设置于室内的第一麦克风和第一喇叭,以及室外的第二麦克风和第二喇叭,所述方法包括:
判断所述电子设备是否通信连接有终端设备;
若未通信连接有所述终端设备,将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理;
将进行回声消除处理和啸叫消除处理得到的声音信号分别发送给所述第一喇叭和第二喇叭进行语音播放;
若通信连接有所述终端设备,则将所述第一麦克风和第一喇叭关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风;
若获取的声音信号属于所述终端设备,则输出该声音信号到第二喇叭进行播放;
若获取的声音信号属于所述第二麦克风,则根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。
2.根据权利要求1所述的声音信号处理方法,其特征在于,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤包括:
获取所述第一麦克风输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号;
获取所述第二麦克风输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。
3.根据权利要求2所述的声音信号处理方法,其特征在于,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤还包括:
获取上一时刻经过处理后输出的第一声音信号,并对该第一声音信号进行延时处理;
获取上一时刻经过处理后输出的第二声音信号,并将该第二声音信号与经过延时处理的第一声音信号进行加权混音处理,以得到当前时刻的所述第一参考信号。
4.根据权利要求2所述的声音信号处理方法,其特征在于,所述将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理的步骤还包括:
获取上一时刻经过处理后输出的第二声音信号,并对该第二声音信号进行延时处理;
获取上一时刻经过处理后输出的第一声音信号,并将该第一声音信号与经过延时处理的第二声音信号进行加权混音处理,以得到当前时刻的所述第二参考信号。
5.根据权利要求1所述的声音信号处理方法,其特征在于,所述根据当前时刻的第三参考信号对该声音信号进行差值处理的步骤包括:
获取上一时刻所述终端设备输出的声音信号;
根据上一时刻经过差值处理得到的声音信号对上一时刻所述终端设备输出的声音信号进行滤波处理,以得到当前时刻的所述第三参考信号。
6.一种声音信号处理装置,其特征在于,应用于电子设备的控制器,所述电子设备包括设置于室内的第一麦克风和第一喇叭,以及室外的第二麦克风和第二喇叭,该装置包括:
第一判断模块,用于判断所述电子设备是否通信连接有终端设备;
第一声音信号处理模块,用于在未通信连接有所述终端设备时,将获取的所述第一麦克风和第二麦克风发出的声音信号进行回声消除处理和啸叫消除处理;
语音播放模块,用于将进行回声消除处理和啸叫消除处理得到的声音信号分别发送给所述第一喇叭和第二喇叭进行语音播放;
第二判断模块,用于在通信连接有所述终端设备时,将所述第一麦克风和第一喇叭关闭,并判断获取的声音信号属于所述终端设备,还是属于所述第二麦克风;
声音信号输出模块,用于在获取的声音信号属于所述终端设备时,输出该声音信号到第二喇叭进行播放;
第二声音信号处理模块,用于在获取的声音信号属于所述第二麦克风时,根据当前时刻的第三参考信号对该声音信号进行差值处理,并对差值处理后的声音信号进行回声消除处理,输出经过回声消除处理后的声音信号至所述终端设备。
7.根据权利要求6所述的声音信号处理装置,其特征在于,所述第一声音信号处理模块包括:
第一声音信号处理子模块,用于获取所述第一麦克风输出的第一声音信号,根据当前时刻的第一参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第一声音信号;
第二声音信号处理子模块,用于获取所述第二麦克风输出的第二声音信号,根据当前时刻的第二参考信号对该声音信号进行回声消除处理和啸叫消除处理,并输出处理后的第二声音信号。
8.一种电子设备,其特征在于,包括控制器,该控制器包括存储单元、处理单元以及权利要求6-7任意一项所述的声音信号处理装置,其中,该声音信号处理装置包括一个或多个存储于所述存储单元中并由所述处理单元执行的软件功能模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811326616.2A CN109413522B (zh) | 2018-11-08 | 2018-11-08 | 声音信号处理方法、声音信号处理装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811326616.2A CN109413522B (zh) | 2018-11-08 | 2018-11-08 | 声音信号处理方法、声音信号处理装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109413522A CN109413522A (zh) | 2019-03-01 |
CN109413522B true CN109413522B (zh) | 2020-09-04 |
Family
ID=65472535
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811326616.2A Expired - Fee Related CN109413522B (zh) | 2018-11-08 | 2018-11-08 | 声音信号处理方法、声音信号处理装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109413522B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101820302A (zh) * | 2009-02-27 | 2010-09-01 | 比亚迪股份有限公司 | 一种回声消除装置和方法 |
CN201594894U (zh) * | 2010-01-07 | 2010-09-29 | 厦门立林科技有限公司 | 一种楼宇对讲系统 |
CN102413384A (zh) * | 2011-11-16 | 2012-04-11 | 杭州艾力特音频技术有限公司 | 一种回声消除双向语音对讲设备 |
CN102724358A (zh) * | 2012-05-28 | 2012-10-10 | 惠州Tcl移动通信有限公司 | 一种门禁对讲的实现方法、移动终端及门禁对讲机 |
CN203775193U (zh) * | 2014-01-14 | 2014-08-13 | 福建创高安防技术股份有限公司 | 对讲式门铃 |
CN203984562U (zh) * | 2014-07-22 | 2014-12-03 | 福建创高安防技术股份有限公司 | 一种楼宇对讲系统 |
CN204316670U (zh) * | 2015-01-07 | 2015-05-06 | 侯亚峰 | 一种防盗门可视对讲智能安防系统 |
CN105847742A (zh) * | 2016-03-24 | 2016-08-10 | 柳州市中晶科技有限公司 | 门禁对讲装置 |
CN106210369A (zh) * | 2016-07-15 | 2016-12-07 | 福州米立科技有限公司 | 应用于楼宇对讲系统的消除回声方法及装置 |
CN107180469A (zh) * | 2017-06-08 | 2017-09-19 | 南通京希信息技术有限公司 | 一种智能门禁室内机 |
CN107958671A (zh) * | 2017-11-22 | 2018-04-24 | 广州市六体智能科技有限公司 | 一种执法记录仪的回声消除装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN2691200Y (zh) * | 2004-04-01 | 2005-04-06 | 罗惠玲 | 一种数码音箱 |
US8903104B2 (en) * | 2013-04-16 | 2014-12-02 | Turtle Beach Corporation | Video gaming system with ultrasonic speakers |
TWI524076B (zh) * | 2015-02-11 | 2016-03-01 | 瑞昱半導體股份有限公司 | 通道測試方法及其系統 |
CN206585692U (zh) * | 2017-03-30 | 2017-10-24 | 杭州高锦科技有限公司 | 智能路由可视对讲广播系统 |
-
2018
- 2018-11-08 CN CN201811326616.2A patent/CN109413522B/zh not_active Expired - Fee Related
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101820302A (zh) * | 2009-02-27 | 2010-09-01 | 比亚迪股份有限公司 | 一种回声消除装置和方法 |
CN201594894U (zh) * | 2010-01-07 | 2010-09-29 | 厦门立林科技有限公司 | 一种楼宇对讲系统 |
CN102413384A (zh) * | 2011-11-16 | 2012-04-11 | 杭州艾力特音频技术有限公司 | 一种回声消除双向语音对讲设备 |
CN102724358A (zh) * | 2012-05-28 | 2012-10-10 | 惠州Tcl移动通信有限公司 | 一种门禁对讲的实现方法、移动终端及门禁对讲机 |
CN203775193U (zh) * | 2014-01-14 | 2014-08-13 | 福建创高安防技术股份有限公司 | 对讲式门铃 |
CN203984562U (zh) * | 2014-07-22 | 2014-12-03 | 福建创高安防技术股份有限公司 | 一种楼宇对讲系统 |
CN204316670U (zh) * | 2015-01-07 | 2015-05-06 | 侯亚峰 | 一种防盗门可视对讲智能安防系统 |
CN105847742A (zh) * | 2016-03-24 | 2016-08-10 | 柳州市中晶科技有限公司 | 门禁对讲装置 |
CN106210369A (zh) * | 2016-07-15 | 2016-12-07 | 福州米立科技有限公司 | 应用于楼宇对讲系统的消除回声方法及装置 |
CN107180469A (zh) * | 2017-06-08 | 2017-09-19 | 南通京希信息技术有限公司 | 一种智能门禁室内机 |
CN107958671A (zh) * | 2017-11-22 | 2018-04-24 | 广州市六体智能科技有限公司 | 一种执法记录仪的回声消除装置 |
Also Published As
Publication number | Publication date |
---|---|
CN109413522A (zh) | 2019-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3189521B1 (en) | Method and apparatus for enhancing sound sources | |
US8981994B2 (en) | Processing signals | |
EP2761617B1 (en) | Processing audio signals | |
US9042574B2 (en) | Processing audio signals | |
GB2495129A (en) | Selecting beamformer coefficients using a regularization signal with a delay profile matching that of an interfering signal | |
US9591405B2 (en) | Automatic audio enhancement system | |
WO2013066544A1 (en) | Processing audio signals | |
JP2016015722A5 (zh) | ||
CN106303816B (zh) | 一种信息控制方法及电子设备 | |
CN112687286A (zh) | 音频设备的降噪模型的调整方法和装置 | |
US9420371B2 (en) | User device having plurality of microphones and operating method thereof | |
CN109413522B (zh) | 声音信号处理方法、声音信号处理装置及电子设备 | |
US10504523B2 (en) | Voice processing device, voice processing method, and computer program product | |
CN112289336A (zh) | 音频信号处理方法和装置 | |
CN111624554B (zh) | 声源定位方法和装置 | |
US11269587B2 (en) | Information processing apparatus and information processing method | |
CN107889022B (zh) | 噪音抑制装置以及噪音抑制方法 | |
US11272286B2 (en) | Method, apparatus and computer program for processing audio signals | |
US20200304908A1 (en) | Processing audio signals | |
EP3029671A1 (en) | Method and apparatus for enhancing sound sources | |
CN111650560B (zh) | 声源定位方法和装置 | |
EP4379506A1 (en) | Audio zooming | |
JP4282661B2 (ja) | 拡声通話装置 | |
CN117995210A (zh) | 音频增强方法、装置、计算设备集群及可读存储介质 | |
CN113990338A (zh) | 一种音频处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200904 Termination date: 20211108 |