CN111816201B - 一种电子设备及语音信号处理方法 - Google Patents
一种电子设备及语音信号处理方法 Download PDFInfo
- Publication number
- CN111816201B CN111816201B CN202010788013.5A CN202010788013A CN111816201B CN 111816201 B CN111816201 B CN 111816201B CN 202010788013 A CN202010788013 A CN 202010788013A CN 111816201 B CN111816201 B CN 111816201B
- Authority
- CN
- China
- Prior art keywords
- signal
- microphone array
- voice
- voice signal
- signal processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title abstract description 7
- 238000000034 method Methods 0.000 claims abstract description 35
- 230000008569 process Effects 0.000 claims abstract description 25
- 238000004891 communication Methods 0.000 claims description 50
- 230000009467 reduction Effects 0.000 claims description 13
- 238000007781 pre-processing Methods 0.000 claims description 2
- 238000003491 array Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02166—Microphone arrays; Beamforming
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本申请提供一种电子设备及语音信号处理方法,每个扩展接口至少能够连接一个第二麦克风阵列,在扩展接口连接有第二麦克风阵列的情况下,第一麦克风阵列和当前与扩展接口连接的第二麦克风阵列同时处于工作状态,以同时通过第一麦克风阵列采集第一语音信号和第二麦克风阵列采集第二语音信号,第一信号处理器接收第一语音信号,第二信号处理器接收第二语音信号且能够将第二语音信号传输给第一信号处理器,实现多路语音信号的同时采集录入。并且第一信号处理器能够对第一语音信号和第二语音信号进行处理,得到第三语音信号,且将第三语音信号传输给上层应用以输出第三语音信号,实现至少通过多个信号处理器中的第一信号处理器对多路语音信号的处理。
Description
技术领域
本申请属于语音数据处理技术领域,尤其涉及一种电子设备及语音信号处理方法。
背景技术
目前麦克风阵列可布置在会议室等场所,麦克风阵列采集语音信号,由信号处理器对语音信号进行滤波、采样、模数转换和数模转换等,然后将处理后的信号发送给播放设备(如喇叭)输出。
发明内容
一方面,本申请提供一种电子设备,包括壳体、主板、第一麦克风阵列、与所述第一麦克风阵列连接的第一信号处理器和至少一个第二信号处理器;所述主板、所述第一麦克风阵列、所述第一信号处理器和所述至少一个第二信号处理器位于所述壳体中,且所述第一信号处理器和所述至少一个第二信号处理器位于所述主板上;所述主板上预留有分别连接于每个所述第二信号处理器的扩展接口,每个所述扩展接口至少能够连接一个第二麦克风阵列;
在所述扩展接口连接有所述第二麦克风阵列的情况下,所述第一麦克风阵列和当前与所述扩展接口连接的第二麦克风阵列同时处于工作状态;
所述第一麦克风阵列采集第一语音信号,所述第二麦克风阵列采集第二语音信号;所述第二信号处理器能够将所述第二语音信号传输给所述第一信号处理器,以使所述第一信号处理器对所述第一语音信号和所述第二语音信号进行处理,得到第三语音信号;
所述第一信号处理器能够将所述第三语音信号传输给所述电子设备中的上层应用以输出所述第三语音信号。
可选的,所述第二麦克风阵列能够置于噪声源所在位置;
所述第一信号处理器在确定所述第二语音信号为噪声信号的情况下,能够根据所述噪声信号的信号参数对所述第一语音信号进行降噪处理。
可选的,所述第一麦克风阵列能够采集第一用户的第一语音信号,所述第二麦克风阵列能够采集第二用户的第二语音信号;
所述第一信号处理器能够基于所述第一语音信号的信号参数和所述第二语音信号的信号参数,确定所述第一语音信号和所述第二语音信号之间的声音强度关系,以基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理。
可选的,在所述声音强度关系指示所述第一语音信号对应的第一声音与所述第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,所述第一信号处理器能够对所述第一语音信号和所述第二语音信号进行混声处理;
在所述声音强度关系指示所述第一声音与所述第二声音之间的差距大于或等于预设阈值的情况下,所述第一信号处理器能够从所述第一语音信号和所述第二语音信号中选取目标语音信号,以对所述目标语音信号进行处理。
可选的,所述第一信号处理器包括第一通信接口、第二通信接口和第三通信接口;所述第二信号处理器包括:第四通信接口和第五通信接口;
所述第一通信接口连接所述第一麦克风阵列,所述第五通信接口连接扩展接口以连接所述第二麦克风阵列,所述第二通信接口通过通信总线与所述第四通信接口连接,以接收通过所述通信总线传输的所述第二语音信号;
所述第三通信接口将所述第三语音信号传输给所述上层应用。
可选的,在所述扩展接口未连接所述第二麦克风阵列的情况下,所述第二信号处理器处于禁止状态。
可选的,在所述第二信号处理器确定所述第二语音信号为非噪声的情况下,能够对所述第二语音信号进行预处理,得到第四语音信号,将所述第四语音信号传输给所述第一信号处理器;在所述第二信号处理器确定所述第二语音信号为噪声的情况下,能够将所述第二语音信号的信号参数或所述第二语音信号传输给所述第一信号处理器。
另一方面,本申请提供一种语音信号处理方法,包括:
通过与第一信号处理器连接的第一麦克风阵列采集第一语音信号;
获取第二信号处理器传输的第二语音信号,所述第二语音信号通过扩展接口连接的第二麦克风阵列采集,所述扩展接口与所述第二信号处理器连接,在所述扩展接口连接所述第二麦克风阵列的情况下,所述第一麦克风阵列和当前与所述扩展接口连接的第二麦克风阵列同时处于工作状态;
对所述第一语音信号和所述第二语音信号进行处理,得到第三语音信号;
将所述第三语音信号传输给所述第一信号处理器所属电子设备中的上层应用以输出所述第三语音信号。
可选的,所述第二麦克风阵列能够放置在噪声源所在位置;所述对所述第一语音信号和所述第二语音信号进行处理包括:在确定所述第二语音信号为噪声信号的情况下,根据所述噪声信号的信号参数对所述第一语音信号进行降噪处理;
或者
所述第一麦克风阵列采集第一用户的第一语音信号,所述第二麦克风阵列采集第二用户的第二语音信号;所述对所述第一语音信号和所述第二语音信号进行处理包括:基于所述第一语音信号的信号参数和所述第二语音信号的信号参数,确定所述第一语音信号和所述第二语音信号之间的声音强度关系,基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理。
可选的,所述基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理包括:
在所述声音强度关系指示所述第一语音信号对应的第一声音与所述第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,对所述第一语音信号和所述第二语音信号进行混声处理;
在所述声音强度关系指示所述第一声音与所述第二声音之间的差距大于或等于预设阈值的情况下,从所述第一语音信号和所述第二语音信号中选取目标语音信号,对所述目标语音信号进行处理。
上述电子设备及语音信号处理方法,每个连接第二信号处理器的扩展接口至少能够连接一个第二麦克风阵列,在扩展接口连接有第二麦克风阵列的情况下,第一麦克风阵列和当前与扩展接口连接的第二麦克风阵列同时处于工作状态,以同时通过第一麦克风阵列采集第一语音信号和第二麦克风阵列采集第二语音信号,实现通过扩展接口方式实现至少一路第二麦克风阵列与第一麦克风阵列互联以及多路语音信号的同时采集。第一麦克风阵列采集的第一语音信号由第一信号处理器接收,第二麦克风阵列采集的第二语音信号由第二信号处理器接收,第二信号处理器能够将第二语音信号传输给第一信号处理器,实现通过至少两个信号处理器同时录入多路语音信号。
并且第一信号处理器能够对第一语音信号和第二语音信号进行处理,得到第三语音信号,且第一信号处理器能够将第三语音信号传输给电子设备中的上层应用以输出第三语音信号,实现至少通过多个信号处理器中的第一信号处理器对多路语音信号的处理。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种电子设备的结构示意图;
图2是本申请实施例提供的第一信号处理器和第二信号处理器的关系示意图;
图3是本申请实施例提供的一种语音信号处理方法的流程图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
请参见图1,其示出了本申请实施例提供的一种电子设备的可选结构,可以包括:壳体10、主板20、第一麦克风阵列30、第一信号处理器40和至少一个第二信号处理器50。
主板20、第一麦克风阵列30、第一信号处理器40和至少一个第二信号处理器50位于壳体10中,且第一信号处理器40和至少一个第二信号处理器50位于主板20上,第一信号处理器40与第一麦克风阵列30连接。主板20上预留有分别连接于每个第二信号处理器50的扩展接口60,每个扩展接口60至少能够连接一个第二麦克风阵列70。
如图1所示电子设备中,主板上预留有一个扩展接口60,扩展接口60与主板20中的第二信号处理器50连接,且通过扩展接口60至少能够连接一个第二麦克风阵列70,如果主板20上预留有至少两个扩展接口60,相对应的主板20上也会设置至少两个第二信号处理器50,以通过扩展接口60与第二信号处理器50一对一方式连接,使得每个第二信号处理器50通过各自连接的扩展接口60与一个第二麦克风阵列70连接。
在扩展接口60连接有第二麦克风阵列70的情况下,第一麦克风阵列30和当前与扩展接口60连接的第二麦克风阵列70同时处于工作状态,说明第一麦克风阵列30不会因第二麦克风阵列70连接到扩展接口60而被禁用,因此任一扩展接口60连接有第二麦克风阵列70的情况下,第一麦克风阵列30和与扩展接口60连接的第二麦克风阵列70都能够采集到语音信号。
目前电脑和手机等电子设备,电子设备中设置有麦克风并且通过一个耳机接口或者蓝牙功能外接一个具有麦克风的耳机,当电子设备通过耳机接口或者蓝牙功能外接一个麦克风时,电子设备中的麦克风处于禁用状态,使得电子设备只能通过外接的麦克风采集语音信号;当电子设备没有外接麦克风时,电子设备也只能通过自身内部设置的麦克风采集语音信号,因此目前电子设备中虽然能够外接麦克风,但是目前电子设备中只能允许一个麦克风处于工作状态,而本实施例提供的电子设备,在扩展接口60连接有第二麦克风阵列70的情况下,第一麦克风阵列30和当前与扩展接口60连接的第二麦克风阵列70同时处于工作状态,意味着第一麦克风阵列30不会因第二麦克风阵列70连接到扩展接口60而被禁用,第一麦克风阵列30和第二麦克风阵列70不会相互影响,使得在连接有第二麦克风阵列70的情况下,电子设备通过第一麦克风阵列30和第二麦克风阵列70能够同时采集多路语音信号。
其中,扩展接口60可以采用目前能够传输语音信号的通信接口,如扩展接口可以采用但不限于采用USB(Universal Serial Bus,通用串行总线)接口和HDMI(HighDefinition Multimedia Interface,高清多媒体接口)中的任意一种,与不同第二信号处理器50连接的扩展接口60的类型可以相同或者不同,对此本实施例不进行限定。
第一麦克风阵列30和第二麦克风阵列70的类型可以相同也可以不同,相对应的本实施例不限定第二麦克风阵列70的类型,例如第二麦克风阵列70可以是由卫星麦克风组成的阵列或者是由定向麦克风组成的阵列,不同扩展接口60连接的第二麦克风阵列70的类型也可以相同或者不同,不同扩展接口60连接的第二麦克风阵列70可以放置到不同位置从而能够通过多个第二麦克风阵列采集不同位置的语音信号,此外不同扩展接口60连接的第二麦克风阵列70与电子设备之间的距离也可以不同,以通过第二麦克风阵列70扩大拾音范围。
第一麦克风阵列30采集第一语音信号,第二麦克风阵列70采集第二语音信号,第一语音信号能够由第一信号处理器40接收,第二语音信号能够由第二信号处理器50接收,这样在第一麦克风阵列30和第二麦克风阵列70同时采集多路语音信号的情况下,通过第一信号处理器40和第二信号处理器50实现对多路语音信号的录入。
在本实施例中,第二信号处理器50和扩展接口60的关系可以是一对一关系,扩展接口60能够连接一个第二麦克风阵列70,那么第二信号处理器50和第二麦克风阵列70的关系也可以是一对一关系,当扩展接口60连接一个第二麦克风阵列70,与扩展接口60连接的第二信号处理器50能够接收到第二语音信号进行录入,使得任一扩展接口60连接的第二麦克风阵列70采集到的第二语音信号都能够被对应的第二信号处理器50录入。如果第二信号处理器50和扩展接口60的关系是一对多关系,例如多个扩展接口60对应一个第二信号处理器50,对应同一个第二信号处理器50的多个扩展接口60同时连接第二麦克风阵列70,可能会导致部分第二麦克风阵列70采集的第二语音信号没有被第二信号处理器50接收到,造成语音信号的丢失;如果多个第二信号处理器50对应一个扩展接口60,虽然能够保证扩展接口60连接的第二麦克风阵列70采集的第二语音信号被第二信号处理器50接收,但是会造成第二信号处理器50的浪费,提高成本,因此兼顾语音信号的完整性和成本,本实施例中第二信号处理器50和扩展接口60可以采用一对一方式进行连接。
第二信号处理器50在接收到第二语音信号后,第二信号处理器50能够将第二语音信号传输给第一信号处理器40,以使第一信号处理器40对第一语音信号和第二语音信号进行处理,得到第三语音信号。第一信号处理器40能够将第三语音信号传输给电子设备中的上层应用以输出第三语音信号,使得用户能够听到电子设备采集到的声音,例如通过上层应用将第三语音信号输出到其他电子设备中,其他电子设备和采集语音信号的电子设备可以处于不同位置中,使得使用其他电子设备的用户能够听到采集语音信号的电子设备所处位置的声音。
因第二信号处理器50能够将第二语音信号传输给第一信号处理器40,且第一信号处理器40能够将第三语音信号传输给上层应用,说明第二信号处理器50和第一信号处理器40的通信接口不同,如图2,示出了第二信号处理器50和第一信号处理器40的通信接口以及两个信号处理器的通信接口的连接关系。
在图2所示中,第一信号处理器40包括:第一通信接口401、第二通信接口402和第三通信接口403;第二信号处理器50包括:第四通信接口501和第五通信接口502。
第一通信接口401连接第一麦克风阵列30,第五通信接口502连接扩展接口60以连接第二麦克风阵列70,或者将第五通信接口502作为扩展接口60使得第二信号处理器40可以直接连接第二麦克风阵列70,达到节省接口的目的,第二通信接口402通过通信总线与第四通信接口501连接,以接收通过通信总线传输的第二语音信号,第三通信接口403将第三语音信号传输给上层应用。
也就是说第一信号处理器40和第二信号处理器50分别有一个通信接口连接麦克风阵列,第一信号处理器40和第二信号处理器50通过一个通信接口使得两个信号处理器之间能够通信,尤其是第二信号处理器50能够通过通信接口向第一信号处理器40传输第二语音信号。相对于第二信号处理器50来说,第一信号处理器40还会通过一个通信接口向上层应用传输第三语音信号,即第二信号处理器50没有向上层应用传输语音信号的功能,需要借助第一信号处理器40的通信接口向上层应用传输语音信号。
在通过通信总线传输第二语音信号过程中,第二语音信号的信号格式与通信总线要求的信号格式匹配,说明第二信号处理器50需要参照通信总线要求的信号格式对第二语音信号进行封装,例如通信总线可以是但不限于是I2C(Inter-Integrated Circuit,两线式串行总线),第二信号处理器50参照I2C要求的信号格式对第二语音信号进行封装,使得第二语音信号能够在I2C上传输。
上述电子设备中每个连接第二信号处理器50的扩展接口60至少能够连接一个第二麦克风阵列70,在扩展接口60连接有第二麦克风阵列70的情况下,第一麦克风阵列30和当前与扩展接口60连接的第二麦克风阵列70同时处于工作状态,以同时通过第一麦克风阵列30采集第一语音信号和第二麦克风阵列70采集第二语音信号,实现通过扩展接口60方式实现至少一路第二麦克风阵列70与第一麦克风阵列30互联以及多路语音信号的同时采集。第一麦克风阵列30采集的第一语音信号由第一信号处理器40接收,第二麦克风阵列70采集的第二语音信号由第二信号处理器50接收,第二信号处理器50能够将第二语音信号传输给第一信号处理器40,实现通过至少两个信号处理器同时录入多路语音信号。
并且第一信号处理器40能够对第一语音信号和第二语音信号进行处理,得到第三语音信号,且第一信号处理器40能够将第三语音信号传输给电子设备中的上层应用以输出第三语音信号,实现至少通过多个信号处理器中的第一信号处理器对多路语音信号的处理。
在本实施例中,第一信号处理器40对第一语音信号和第二语音信号进行处理的方式包括但不限于如下两种方式:
一种方式是,第二麦克风阵列70能够置于噪声源所在位置,第一信号处理器40在确定第二语音信号为噪声信号的情况下,能够根据噪声信号的信号参数对第一语音信号进行降噪处理,通过将第二麦克风阵列70置于噪声源所在位置方式使得第二信号处理器50可以准确获取到噪声信号,以更准确地确定出噪声信号的信号参数,降低环境中用户声音对噪声信号的影响,提高噪声信号的信号参数的准确度以提高降噪处理的准确度。
因为噪声信号的信号参数与描述用户声音的信号参数之间存在差异,本实施例中,第一信号处理器40基于第二语音信号的信号参数,确定第二语音信号是否为噪声信号,如果第二语音信号的信号参数与噪声信号的信号参数匹配,确定第二语音信号是噪声信号;如果第二语音信号的信号参数与噪声信号的信号参数不匹配,确定第二语音信号不是噪声信号。
又或者第一信号处理器40基于工作模式确定第二语音信号是否为噪声信号,工作模式包括第一工作模式和第二工作模式,第一工作模式用于对语音信号进行降噪处理,第二工作模式用于扩大拾音范围,如果第一信号处理器40当前工作模式为第一工作模式,确定第二语音信号是噪声信号;如果第一信号处理器40当前工作模式为第二工作模式,确定第二语音信号不是噪声信号。
另一种方式是,第一麦克风阵列30能够采集第一用户的第一语音信号,第二麦克风阵列70能够采集第二用户的第二语音信号,随第二用户与电子设备之间的距离变化可更换第二麦克风阵列70,以通过第二麦克风阵列70扩大拾音范围。
第一信号处理器40能够基于第一语音信号的信号参数和第二语音信号的信号参数,确定第一语音信号和第二语音信号之间的声音强度关系,以基于声音强度关系,对第一语音信号和第二语音信号进行处理,实现基于声音强度关系对第一语音信号和第二语音信号进行不同处理。
声音强度关系用于指示第一语音信号对应的第一声音与第二语音信号对应的第二声音之间的声音大小,例如通过声音强度关系指示第一声音与第二声音之间的声音大小是相接近还是有差距,以在第一声音与第二声音之间的声音大小相接近或者有差距的情况下,采用与声音强度关系匹配的处理方式,与声音强度关系匹配的处理方式包括如下处理方式:
在声音强度关系指示第一语音信号对应的第一声音与第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,第一信号处理器40能够对第一语音信号和第二语音信号进行混声处理,混声处理能够使得第三语音信号对应的第三声音中包含第一声音和第二声音,以还原出第一声音和第二声音。例如第一用户和第二用户处于一个会议中,且第一用户和第二用户针对会议议题进行讨论,第一麦克风阵列30能够采集到讨论过程中第一用户的第一语音信号,第二麦克风阵列70能够采集到讨论过程中第二用户的第二语音信号,第一信号处理器40得到的第三语音信号能够还原出第一用户和第二用户针对会议议题的讨论过程,使得第三语音信号能够同时包含第一用户和第二用户的声音。
在声音强度关系指示第一声音与第二声音之间的差距大于或等于预设阈值的情况下,第一信号处理器40能够从第一语音信号和第二语音信号中选取目标语音信号,以对目标语音信号进行处理,使得第一信号处理器40能够对第一语音信号和第二语音信号中的一个语音信号进行处理,如通过第一信号处理器40对目标语音信号进行滤波、采样、模数转换和数模转换等。
其中目标语音信号对应的声音强度大于没有选取为目标语音信号的语音信号对应的声音强度,例如第一语音信号对应的声音强度大于第二语音信号对应的声音强度,则将第一语音信号作为目标语音信号进行处理,之所以选择声音强度大的语音信号为目标语音信号是因为:声音强度大的语音信号说明用户可能是当前主要发声的用户,例如在一个会议中,当前主讲用户的声音强度大于聆听用户的声音强度,对这种用户的语音信号进行及时处理是必须的,所以本实施例中目标语音信号对应的声音强度大于没有选取为目标语音信号的语音信号对应的声音强度。对于预设阈值本实施例不限定其取值,可根据实际应用场景进行调整设置。
在上述电子设备中,在扩展接口60未连接第二麦克风阵列70的情况下,第二信号处理器50处于禁止状态,因为扩展接口60未连接第二麦克风阵列70,说明与该扩展接口60连接的第二信号处理器50不会接收到第二语音信号,第二信号处理器50可以关闭或待机使第二信号处理器50处于禁止状态;如果扩展接口60从未连接第二麦克风阵列70到连接上第二麦克风阵列70,与该扩展接口60连接的第二信号处理器50可以接收到第二语音信号,第二信号处理器50可以激活从关闭或待机切换至启用使第二信号处理器50处于工作状态,通过对第二信号处理器50的状态切换实现降低功耗的目的。
此外上述第二信号处理器50可以不单单是一个用于中转第二语音信号的设备,第二信号处理器50还可以具备简单的信号处理功能,例如在第二信号处理器50确定第二语音信号为非噪声的情况下,能够对第二语音信号进行预处理,得到第四语音信号,将第四语音信号传输给第一信号处理器40,例如通过第二信号处理器50对第二语音信号进行降噪处理,使得第一信号处理器40无需再对第四语音信号进行降噪处理,相当于将第一信号处理器40针对第二语音信号的降噪处理功能搬移到第一信号处理器40上,这样在第一信号处理器40对第一语音信号进行降噪处理同时可通过第二信号处理器50对第二语音信号进行降噪处理,在减少第一信号处理器40的工作量同时提高信号处理效率;在第二信号处理器50确定第二语音信号为噪声的情况下,能够将第二语音信号的信号参数或第二语音信号传输给第一信号处理器40,如果通过第二信号处理器50将第二语音信号的信号参数传输给第一信号处理器40,说明第一信号处理器40无需对第二语音信号进行分析处理以提取第二语音信号的信号参数,同样可以提高信号处理效率。
其中,第二信号处理器50确定第二语音信号为非噪声或噪声的方式可以参见上述第一信号处理器40确定第二语音信号是否为噪声信号的过程,此处不再详述。
请参见图3,其示出了本申请实施例提供的一种语音信号处理方法的流程图,可以包括以下步骤:
S101:通过与第一信号处理器连接的第一麦克风阵列采集第一语音信号。
S102:获取第二信号处理器传输的第二语音信号,第二语音信号通过扩展接口连接的第二麦克风阵列采集,扩展接口与第二信号处理器连接,在扩展接口连接第二麦克风阵列的情况下,第一麦克风阵列和当前与扩展接口连接的第二麦克风阵列同时处于工作状态。
S103:对第一语音信号和第二语音信号进行处理,得到第三语音信号。在本实施例中,对第一语音信号和第二语音信号进行处理的方式包括但不限于如下两种方式:
一种方式,第二麦克风阵列能够放置在噪声源所在位置;对第一语音信号和第二语音信号进行处理包括:在确定第二语音信号为噪声信号的情况下,根据噪声信号的信号参数对第一语音信号进行降噪处理。
另一种方式,第一麦克风阵列采集第一用户的第一语音信号,第二麦克风阵列采集第二用户的第二语音信号;对第一语音信号和第二语音信号进行处理包括:基于第一语音信号的信号参数和第二语音信号的信号参数,确定第一语音信号和第二语音信号之间的声音强度关系,基于声音强度关系,对第一语音信号和第二语音信号进行处理。
其中基于声音强度关系,对第一语音信号和第二语音信号进行处理包括:
在声音强度关系指示第一语音信号对应的第一声音与第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,对第一语音信号和第二语音信号进行混声处理;在声音强度关系指示第一声音与第二声音之间的差距大于或等于预设阈值的情况下,从第一语音信号和第二语音信号中选取目标语音信号,对目标语音信号进行处理。
对第一语音信号和第二语音信号进行处理的过程请参见上述实施例的说明,此处不再详述。
S104:将第三语音信号传输给第一信号处理器所属电子设备的上层应用以输出第三语音信号。
上述语音信号处理方法中,通过每个连接第二信号处理器的扩展接口至少能够连接一个第二麦克风阵列,在扩展接口连接有第二麦克风阵列的情况下,第一麦克风阵列和当前与扩展接口连接的第二麦克风阵列同时处于工作状态,以同时通过第一麦克风阵列采集第一语音信号和第二麦克风阵列采集第二语音信号,实现通过扩展接口方式实现至少一路第二麦克风阵列与第一麦克风阵列互联以及多路语音信号的同时采集。并且第二信号处理器能够向第一信号处理器传输第二语音信号,以对第一语音信号和第二语音信号进行处理,得到第三语音信号,将第三语音信号传输给电子设备中的上层应用以输出第三语音信号,实现至少通过多个信号处理器中的第一信号处理器对多路语音信号的处理。
需要说明的是,本说明书中的各个实施例可以采用递进的方式描述、本说明书中各实施例中记载的特征可以相互替换或者组合,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。
Claims (10)
1.一种电子设备,包括壳体、主板、第一麦克风阵列、与所述第一麦克风阵列连接的第一信号处理器和至少一个第二信号处理器;所述主板、所述第一麦克风阵列、所述第一信号处理器和所述至少一个第二信号处理器位于所述壳体中,且所述第一信号处理器和所述至少一个第二信号处理器位于所述主板上;所述主板上预留有分别连接于每个所述第二信号处理器的扩展接口,每个所述扩展接口至少能够连接一个第二麦克风阵列;
在所述扩展接口连接有所述第二麦克风阵列的情况下,所述第一麦克风阵列和当前与所述扩展接口连接的第二麦克风阵列同时处于工作状态;
所述第一麦克风阵列采集第一语音信号,所述第二麦克风阵列采集第二语音信号;所述第二信号处理器能够将所述第二语音信号传输给所述第一信号处理器,以使所述第一信号处理器对所述第一语音信号和所述第二语音信号进行处理,得到第三语音信号;
所述第一信号处理器能够将所述第三语音信号传输给所述电子设备中的上层应用以输出所述第三语音信号;
所述第一麦克风阵列能够采集第一用户的第一语音信号,所述第二麦克风阵列能够采集第二用户的第二语音信号,随所述第二用户与电子设备之间的距离变化更换对应的所述第二麦克风阵列,以通过所述第二麦克风阵列扩大拾音范围。
2.根据权利要求1所述的电子设备,所述第二麦克风阵列能够置于噪声源所在位置;
所述第一信号处理器在确定所述第二语音信号为噪声信号的情况下,能够根据所述噪声信号的信号参数对所述第一语音信号进行降噪处理。
3.根据权利要求1所述的电子设备,所述第一信号处理器能够基于所述第一语音信号的信号参数和所述第二语音信号的信号参数,确定所述第一语音信号和所述第二语音信号之间的声音强度关系,以基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理。
4.根据权利要求3所述的电子设备,在所述声音强度关系指示所述第一语音信号对应的第一声音与所述第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,所述第一信号处理器能够对所述第一语音信号和所述第二语音信号进行混声处理;
在所述声音强度关系指示所述第一声音与所述第二声音之间的差距大于或等于预设阈值的情况下,所述第一信号处理器能够从所述第一语音信号和所述第二语音信号中选取目标语音信号,以对所述目标语音信号进行处理。
5.根据权利要求1所述的电子设备,所述第一信号处理器包括第一通信接口、第二通信接口和第三通信接口;所述第二信号处理器包括:第四通信接口和第五通信接口;
所述第一通信接口连接所述第一麦克风阵列,所述第五通信接口连接扩展接口以连接所述第二麦克风阵列,所述第二通信接口通过通信总线与所述第四通信接口连接,以接收通过所述通信总线传输的所述第二语音信号;
所述第三通信接口将所述第三语音信号传输给所述上层应用。
6.根据权利要求1所述的电子设备,在所述扩展接口未连接所述第二麦克风阵列的情况下,所述第二信号处理器处于禁止状态。
7.根据权利要求1所述的电子设备,在所述第二信号处理器确定所述第二语音信号为非噪声的情况下,能够对所述第二语音信号进行预处理,得到第四语音信号,将所述第四语音信号传输给所述第一信号处理器;在所述第二信号处理器确定所述第二语音信号为噪声的情况下,能够将所述第二语音信号的信号参数或所述第二语音信号传输给所述第一信号处理器。
8.一种语音信号处理方法,包括:
通过与第一信号处理器连接的第一麦克风阵列采集第一语音信号;
获取第二信号处理器传输的第二语音信号,所述第二语音信号通过扩展接口连接的第二麦克风阵列采集,所述扩展接口与所述第二信号处理器连接,在所述扩展接口连接所述第二麦克风阵列的情况下,所述第一麦克风阵列和当前与所述扩展接口连接的第二麦克风阵列同时处于工作状态;
对所述第一语音信号和所述第二语音信号进行处理,得到第三语音信号;
将所述第三语音信号传输给所述第一信号处理器所属电子设备中的上层应用以输出所述第三语音信号;
所述第一麦克风阵列能够采集第一用户的第一语音信号,所述第二麦克风阵列能够采集第二用户的第二语音信号,随所述第二用户与电子设备之间的距离变化更换对应的所述第二麦克风阵列,以通过所述第二麦克风阵列扩大拾音范围。
9.根据权利要求8所述的方法,所述第二麦克风阵列能够放置在噪声源所在位置;所述对所述第一语音信号和所述第二语音信号进行处理包括:在确定所述第二语音信号为噪声信号的情况下,根据所述噪声信号的信号参数对所述第一语音信号进行降噪处理;
或者
所述对所述第一语音信号和所述第二语音信号进行处理包括:基于所述第一语音信号的信号参数和所述第二语音信号的信号参数,确定所述第一语音信号和所述第二语音信号之间的声音强度关系,基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理。
10.根据权利要求9所述的方法,所述基于所述声音强度关系,对所述第一语音信号和所述第二语音信号进行处理包括:
在所述声音强度关系指示所述第一语音信号对应的第一声音与所述第二语音信号对应的第二声音之间的差距小于预设阈值的情况下,对所述第一语音信号和所述第二语音信号进行混声处理;
在所述声音强度关系指示所述第一声音与所述第二声音之间的差距大于或等于预设阈值的情况下,从所述第一语音信号和所述第二语音信号中选取目标语音信号,对所述目标语音信号进行处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010788013.5A CN111816201B (zh) | 2020-08-07 | 2020-08-07 | 一种电子设备及语音信号处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010788013.5A CN111816201B (zh) | 2020-08-07 | 2020-08-07 | 一种电子设备及语音信号处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111816201A CN111816201A (zh) | 2020-10-23 |
CN111816201B true CN111816201B (zh) | 2024-05-28 |
Family
ID=72864623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010788013.5A Active CN111816201B (zh) | 2020-08-07 | 2020-08-07 | 一种电子设备及语音信号处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111816201B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107682553A (zh) * | 2017-10-10 | 2018-02-09 | 广东欧珀移动通信有限公司 | 通话信号发送方法、装置、移动终端及存储介质 |
CN108305637A (zh) * | 2018-01-23 | 2018-07-20 | 广东欧珀移动通信有限公司 | 耳机语音处理方法、终端设备及存储介质 |
CN208522979U (zh) * | 2018-04-19 | 2019-02-19 | 北京字节跳动网络技术有限公司 | 一种音频设备 |
CN111370012A (zh) * | 2020-05-27 | 2020-07-03 | 北京小米移动软件有限公司 | 一种蓝牙语音音频采集方法及系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200808087A (en) * | 2006-07-17 | 2008-02-01 | Fortemedia Inc | External microphone module |
-
2020
- 2020-08-07 CN CN202010788013.5A patent/CN111816201B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107682553A (zh) * | 2017-10-10 | 2018-02-09 | 广东欧珀移动通信有限公司 | 通话信号发送方法、装置、移动终端及存储介质 |
CN108305637A (zh) * | 2018-01-23 | 2018-07-20 | 广东欧珀移动通信有限公司 | 耳机语音处理方法、终端设备及存储介质 |
CN208522979U (zh) * | 2018-04-19 | 2019-02-19 | 北京字节跳动网络技术有限公司 | 一种音频设备 |
CN111370012A (zh) * | 2020-05-27 | 2020-07-03 | 北京小米移动软件有限公司 | 一种蓝牙语音音频采集方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111816201A (zh) | 2020-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3621068A1 (en) | Portable smart voice interaction control device, method and system | |
JP6799573B2 (ja) | 端末ブラケット及びファーフィールド音声対話システム | |
US20180332416A1 (en) | Utilizing digital microphones for low power keyword detection and noise suppression | |
US20160269844A1 (en) | Stereo headset, terminal, and audio signal processing methods thereof | |
CN1288222A (zh) | 具有麦克风阵列的语音控制系统 | |
CN104380698A (zh) | 一种通话设备及应用于通话设备的切换方法、装置 | |
CN108538297B (zh) | 一种基于无线麦克风阵列的智能语音交互方法及交互系统 | |
CN112804610B (zh) | TWS蓝牙耳机控制PC上微软Teams的方法 | |
CN111182116A (zh) | 多通道音频测试装置及测试方法 | |
CN106792321B (zh) | 一种分体式无线耳机及其通信方法 | |
CN104796692A (zh) | 一种电视机音频采集装置的回声消除测试方法及其系统 | |
CN111816201B (zh) | 一种电子设备及语音信号处理方法 | |
CN113411703B (zh) | 音频播放方法以及耳机盒、无线耳机和耳机套件 | |
WO2023231787A1 (zh) | 音频处理方法和装置 | |
CN112243182B (zh) | 拾音电路、方法及装置 | |
CN110517682B (zh) | 语音识别方法、装置、设备及存储介质 | |
CN111986715A (zh) | 一种录音系统及录音方法 | |
CN109120298B (zh) | 一种耳机远场交互方法、耳机远场交互配件及无线耳机 | |
CN109120297B (zh) | 一种耳机远场交互方法、耳机远场交互配件及无线耳机 | |
CN113823310B (zh) | 应用于平板电脑的语音打断唤醒电路 | |
CN213547829U (zh) | 麦克风的电路结构及终端 | |
CN111556406B (zh) | 音频处理方法、音频处理装置及耳机 | |
WO2021004067A1 (zh) | 一种显示装置 | |
CN210039166U (zh) | 学习机 | |
CN218301629U (zh) | 辅听装置和辅听设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |