CN108650584B - 音频装置、信息处理系统和声音处理方法 - Google Patents
音频装置、信息处理系统和声音处理方法 Download PDFInfo
- Publication number
- CN108650584B CN108650584B CN201810553316.1A CN201810553316A CN108650584B CN 108650584 B CN108650584 B CN 108650584B CN 201810553316 A CN201810553316 A CN 201810553316A CN 108650584 B CN108650584 B CN 108650584B
- Authority
- CN
- China
- Prior art keywords
- audio
- data
- electronic device
- vibration
- vibration data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2430/00—Signal processing covered by H04R, not provided for in its groups
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
公开了音频装置、信息处理系统和声音处理方法。所述音频装置,包括:音频采集器集合,包括至少一个音频采集器,设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;传感器,设置在电子设备的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及传输器,用于向所述电子设备传输第一音频数据和振动数据,其中,所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
Description
技术领域
本申请涉及声音处理的领域,更具体地说,涉及声音的回波抵消的技术领域。
背景技术
在音频采集装置(如,麦克风)采集预定距离范围内的用户语音的同时,还会采集到此时智能电视自身所播放的节目的声音。然而,对于语音控制功能而言,如果混入了智能电视自身所播放的节目的声音,将会严重影响语音识别的准确性。也就是说,在所采集到的音频数据中,需要去除智能电视自身所播放的节目的声音。
发明内容
鉴于以上情形,期望提供能够获得更准确的人声有用信号的音频装置和声音处理方法。
根据本申请的一个方面,提供了一种音频装置,包括:音频采集器集合,包括至少一个音频采集器,设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;传感器,设置在电子设备的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及传输器,用于向所述电子设备传输第一音频数据和振动数据,其中,所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
优选地,根据本申请实施例的音频装置可以进一步包括:处理器,用于基于所述传感器感测的振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据,并将所述第三音频数据作为所述音频输入。
优选地,在根据本申请实施例的音频装置中,所述第二位置为靠近所述音频输出器的位置或靠近所述音频采集器集合的位置。
根据本申请的另一方面,提供了一种信息处理系统,包括:电子设备,包括:音频输出器;以及处理器,音频装置,与所述电子设备连接,包括:音频采集器集合,包括至少一个音频采集器,设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;传感器,设置在电子设备的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及传输器,用于向所述电子设备传输第一音频数据和振动数据,其中,所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
优选地,在根据本申请实施例的信息处理系统中,所述处理器被配置为接收所述音频采集器集合采集的第一音频数据以及所述传感器感测的所述振动数据,并基于所述振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据,并将所述第三音频数据作为所述音频输入。
优选地,在根据本申请实施例的信息处理系统中,所述处理器进一步被配置为对所述音频输入执行预定处理,获得对应指令,并响应于所述对应指令而执行对应操作。
根据本申请的再一方面,提供了一种声音处理方法,应用于一音频装置,包括:通过设置在电子设备的第一位置的音频采集器集合,采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及向所述电子设备传输第一音频数据和振动数据,其中所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
优选地,根据本申请实施例的声音处理方法可以进一步包括:基于所述传感器感测的振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据;以及从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据。
优选地,根据本申请实施例的声音处理方法可以进一步包括:经由所述音频输出器依次以预定频率范围内的多个已知频率和已知振幅播放已知音频信号;以及基于依次获得的振动数据以及所述已知音频信号,确定所述对应关系集合。
优选地,在根据本申请实施例的声音处理方法中,基于所述振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述扬声器播放的所述第二音频数据的步骤进一步包括:基于所述振动数据的振幅和频率,在所述对应关系集合中查找与之对应的音频信号的幅值和频率;基于查找到的对应的音频信号的幅值和频率,还原所述第二音频数据。
在根据本申请实施例的音频装置、信息处理系统和声音处理方法中,由于与传感器所检测到的机械振动相关的振动数据最能够真实地体现所播放的音频数据,因此通过分别由音频采集器集合和传感器采集音频数据和振动数据,从根本上解决了声音回传采集的问题,能够更准确地剔除无用音频和保留有用人声,进而能够提高后续语音识别和控制的可靠性和准确性。
附图说明
图1是图示根据本申请的第一实施例的音频装置的配置的功能性框图;
图2是图示根据本申请的第二实施例的音频装置的配置的功能性框图;
图3是图示根据本申请的第三实施例的信息处理系统的配置的功能性框图;
图4是图示根据本申请的第一实施例的声音处理方法的过程的流程图;以及
图5是图示根据本申请的第二实施例的声音处理方法的过程的流程图。
具体实施方式
下面将参照附图对本申请的各个优选的实施方式进行描述。提供以下参照附图的描述,以帮助对由权利要求及其等价物所限定的本申请的示例实施方式的理解。其包括帮助理解的各种具体细节,但它们只能被看作是示例性的。因此,本领域技术人员将认识到,可对这里描述的实施方式进行各种改变和修改,而不脱离本申请的范围和精神。而且,为了使说明书更加清楚简洁,将省略对本领域熟知功能和构造的详细描述。
首先,将参照图1描述根据本申请的第一实施例的音频装置。如图1所示,音频装置100包括:音频采集器集合101、传感器102和传输器103。
音频采集器集合101包括至少一个音频采集器。例如,音频采集器集合101可以为一麦克风阵列。将音频采集器集合101设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据。这里,所述电子设备200与所述音频装置100连接,且具有音频输出器(例如,扬声器),并且能够基于音频采集器集合101采集的声音执行语音控制指令。例如,电子设备200可以为一智能电视。为了便于更好地采集不同位置的用户的语音指令,通常将音频采集器集合101设置为与所述电子设备200的输出装置同向。例如,输出装置可以是显示器,音频采集器集合101可以设置与显示器方向一致且面向用户。或者,输出装置也可以是音频输出器,音频采集器集合101可以设置与音频输出器方向一致。另外,为了便于采集不同位置的用户的语音指令,音频采集器集合101例如可以通过一根柔性线贴装在所述电子设备200的机壳靠近显示器的上边框的中心部分。
传感器102设置在电子设备200的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据。例如,传感器102可以通过陀螺仪、加速度传感器等来实现。
所述第二位置可以为所述电子设备的壳体上的任意位置。例如,所述第二位置可以位于所述电子设备的刚性材料部分,以便于更好地感测振动数据。或者,为了更好地对音频装置进行集成,更优选地,所述第二位置也可以是靠近所述音频采集器集合的位置。也就是说,可以将传感器与音频采集器集合共板,从而不增加空间且便于安装。或者,如下文中所述,鉴于在传感器所检测到的机械振动与音频数据的电信号之间进行映射,且音频输出器位置处的振动体现的是最准确的振动数据,因此更优选地,所述第二位置也可以是靠近所述音频输出器的位置。当然,如前所述,第二位置最好位于所述电子设备的刚性材料部分以便于感测振动,因此当第二位置是靠近音频输出器时,第二位置最好避开音频输出器的非刚性材料部分。
传输器103用于向所述电子设备200传输第一音频数据和振动数据。例如,传输器103可以是与电子设备USB接口连接的转换器,用于将所采集到的数据转换为适于USB接口的数据并传输至电子设备200。
例如,传输器103可以以USB MIC DONGLE的形态来实现。传输器103与音频采集器集合和传感器连接,并且通过USB接口与电子设备200的外部USB接口可拆卸地连接。也就是说,音频采集器集合、传感器和传输器作为一个整体的外部附接设备与电子设备200连接,从而根据本申请的音频装置具有更高的可移植性。
其中,所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
现有技术的做法是获取来自智能电视的芯片(SOC)的原始音频数据,并从音频采集装置采集到的音频数据中减去该原始音频数据。
然而,这样的问题在于,回波抵消(AEC)通道上获取的是SOC传送来的原始音频数据,但是后续音频处理单元(DSP)和功放单元所引进的音量/音效/音色等调整完全被忽略了。也就是说,在AEC通道上回传的声音与从电视音频输出器(扬声器)中发出的声音不一致。因此,经过回波抵消后的声音与实际的人声信号之间存在误差。从而,严重影响了语音识别和控制的准确性。
在本申请中,由于与传感器所检测到的机械振动相关的振动数据最能够真实地体现所播放的音频数据,因此通过分别由音频采集器集合和传感器采集音频数据和振动数据,从根本上解决了声音回传采集的问题,能够更准确地剔除电子设备本身所播放的音频和保留除此之外的剩余声音,不会造成误把播放声音作为输入进行识别,进而能够提高后续语音识别和控制的可靠性和准确性。
另外,由于通过传感器检测到的振动数据来还原电子设备播放的音频数据,因此电子设备不需要在音频输出器发声时还同步地将音频发送给外设,极大地简化了电子设备的主板软件设计,同时避免了更多逻辑错误(bug)的产生。
在第一实施例中,音频装置100仅负责相关数据的采集,包括音频数据的采集以及振动数据的采集,并将所采集到的数据传输到电子设备200。后续的回波抵消处理将不在音频装置100中执行。
图2示出了根据本申请的第二实施例的音频装置。如图2所示,音频装置100’包括:音频采集器集合101、传感器102、传输器103和处理器104。
音频采集器集合101包括至少一个音频采集器。例如,音频采集器集合101可以为一麦克风阵列。将音频采集器集合101设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据。这里,所述电子设备200与所述音频装置100连接,且具有音频输出器(例如,扬声器),并且能够基于音频采集器集合101采集的声音执行语音控制指令。例如,电子设备200可以为一智能电视。为了便于更好地采集不同位置的用户的语音指令,通常将音频采集器集合101设置为与所述电子设备200的输出装置同向。例如,输出装置可以是显示器,音频采集器集合101可以设置与显示器方向一致且面向用户。或者,输出装置也可以是音频输出器,音频采集器集合101可以设置与音频输出器方向一致。另外,为了便于采集不同位置的用户的语音指令,音频采集器集合101例如可以通过一根柔性线贴装在所述电子设备200的机壳靠近显示器的上边框的中心部分。
传感器102设置在电子设备200的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据。例如,传感器102可以通过陀螺仪、加速度传感器等来实现。
所述第二位置可以为所述电子设备的壳体上的任意位置。例如,所述第二位置可以位于所述电子设备的刚性材料部分,以便于更好地感测振动数据。或者,为了更好地对音频装置进行集成,更优选地,所述第二位置也可以是靠近所述音频采集器集合的位置。或者,如下文中所述,鉴于在传感器所检测到的机械振动与音频数据的电信号之间进行映射,且音频输出器位置处的振动体现的是最准确的振动数据,因此更优选地,所述第二位置也可以是靠近所述音频输出器的位置。当然,如前所述,第二位置最好位于所述电子设备的刚性材料部分以便于感测振动,因此当第二位置是靠近音频输出器时,第二位置最好避开音频输出器的非刚性材料部分。
与第一实施例不同,在第二实施例中,音频装置100’不仅负责相关数据的采集,包括音频数据的采集以及振动数据的采集,而且后续的回波抵消处理仍在音频装置100’中由处理器104执行。
处理器104基于所述传感器102感测的振动数据以及预先存储的、与所述音频采集器集合101和所述传感器102的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据,从所述音频采集器集合101采集的第一音频数据中除去所述第二音频数据以获得第三音频数据,并将所述第三音频数据作为所述音频输入。有关还原处理的具体细节将在下文中的对应方法部分描述。
最终,传输器103向所述电子设备传输经过回波抵消后的、作为有用人声信号的第三音频数据。例如,传输器103可以是与电子设备USB接口连接的转换器,用于将所处理的数据转换为适于USB接口的数据并传输至电子设备200。
例如,传输器103可以以USB MIC DONGLE的形态来实现。传输器103与音频采集器集合和传感器连接,并且通过USB接口与电子设备200的外部USB接口可拆卸地连接。也就是说,音频采集器集合、传感器和传输器作为一个整体的外部附接设备与电子设备200连接,从而根据本申请的音频装置具有更高的可移植性。
图3示出了根据本申请的第三实施例的信息处理系统。如图3所示,信息处理系统300包括音频装置100和电子设备200’。
与第一实施例中类似地,音频装置100包括:音频采集器集合101、传感器102和传输器103。
音频采集器集合101包括至少一个音频采集器。例如,音频采集器集合101可以为一麦克风阵列。将音频采集器集合101设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据。这里,所述电子设备200与所述音频装置100连接,且具有音频输出器(例如,扬声器),并且能够基于音频采集器集合101采集的声音执行语音控制指令。例如,电子设备200可以为一智能电视。为了便于更好地采集不同位置的用户的语音指令,通常将音频采集器集合101设置为与所述电子设备200的输出装置同向。例如,输出装置可以是显示器,音频采集器集合101可以设置与显示器方向一致且面向用户。或者,输出装置也可以是音频输出器,音频采集器集合101可以设置与音频输出器方向一致。另外,为了便于采集不同位置的用户的语音指令,音频采集器集合101例如可以通过一根柔性线贴装在所述电子设备200的机壳靠近显示器的上边框的中心部分。
传感器102设置在电子设备200的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据。例如,传感器102可以通过陀螺仪、加速度传感器等来实现。
所述第二位置可以为所述电子设备的壳体上的任意位置。例如,所述第二位置可以位于所述电子设备的刚性材料部分,以便于更好地感测振动数据。或者,为了更好地对音频装置进行集成,更优选地,所述第二位置也可以是靠近所述音频采集器集合的位置。或者,如下文中所述,鉴于本申请的发明构思是在传感器所检测到的机械振动与音频数据的电信号之间进行映射,且音频输出器位置处的振动体现的是最准确的振动数据,因此更优选地,所述第二位置也可以是靠近所述音频输出器的位置。当然,如前所述,第二位置最好位于所述电子设备的刚性材料部分以便于感测振动,因此当第二位置是靠近音频输出器时,第二位置最好避开音频输出器的非刚性材料部分。
传输器103用于向所述电子设备传输第一音频数据和振动数据。例如,传输器103可以是与电子设备USB接口连接的转换器,用于将所采集到的数据转换为适于USB接口的数据并传输至电子设备200。其中,所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
例如,传输器103可以以USB MIC DONGLE的形态来实现。传输器103与音频采集器集合和传感器连接,并且通过USB接口与电子设备200的外部USB接口可拆卸地连接。也就是说,音频采集器集合、传感器和传输器作为一个整体的外部附接设备与电子设备200连接,从而根据本申请的音频装置具有更高的可移植性。
在第三实施例中,音频装置100仅负责相关数据的采集,包括音频数据的采集以及振动数据的采集,并将所采集到的数据传输到电子设备200。后续的回波抵消处理将在电子设备200中执行。
电子设备200包括:音频输出器201和处理器202。
音频输出器201用于向用户输出音频。
处理器202被配置为接收所述音频采集器集合101采集的第一音频数据以及所述传感器102感测的所述振动数据,并基于所述振动数据以及预先存储的、与所述音频采集器集合101和所述传感器102的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器201播放的所述第二音频数据,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据,并将所述第三音频数据作为所述音频输入。
并且,在电子设备200中,所述处理器202进一步被配置为对所述音频输入执行预定处理,获得对应指令,并响应于所述对应指令而执行对应操作。例如,可以对所述音频输入执行语音识别处理,获得语音控制指令,并响应于该语音控制指令而执行对应的操作。
接下来,将参照图4描述根据本申请的第一实施例的声音处理方法,应用于一音频装置。如图4所示,所述声音处理方法包括以下步骤。
首先,在步骤S401,通过设置在电子设备的第一位置的音频采集器集合,采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器。
然后,在步骤S402,感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据。
最后,在步骤S403,向所述电子设备传输第一音频数据和振动数据。
其中所述第一音频数据和所述振动数据能用于确定所述采集范围内不含所述第二音频数据的音频输入。
在本申请中,由于与传感器所检测到的机械振动相关的振动数据最能够真实地体现所播放的音频数据,因此通过分别由音频采集器集合和传感器采集音频数据和振动数据,从根本上解决了声音回传采集的问题,能够更准确地剔除电子设备本身所播放的音频和保留除此之外的剩余声音,不会造成误把播放声音作为输入进行识别,进而能够提高后续语音识别和控制的可靠性和准确性。
另外,由于通过传感器检测到的振动数据来还原电子设备播放的音频数据,因此电子设备不需要在音频输出器发声时还同步地将音频发送给外设,极大地简化了电子设备的主板软件设计,同时避免了更多逻辑错误(bug)的产生。
最后,将参照图5描述根据本申请的第二实施例的声音处理方法。如图5所示,所述声音处理方法包括以下步骤。
首先,在步骤S501,通过设置在电子设备的第一位置的音频采集器集合,采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器。
然后,在步骤S502,感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据。
接下来,在步骤S503,基于所述传感器感测的振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据。
最后,在步骤S504,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据。其中所述第三音频数据作为对于所述电子设备的音频输入。
这里,预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合是通过如下方式预先获得的:
经由所述音频输出器依次以预定频率范围内的多个已知频率和已知振幅播放已知音频信号。例如,通过运行电子设备上的APP,自动地播放人耳能够听到的频段内的100Hz、1KHz、2KHz、……、18KHz的扫频信号。然后,基于依次获得的振动数据以及所述已知音频信号,确定所述对应关系集合。这里,建立的是机械振动的振幅和频率与电信号的幅值和频率之间的对应关系。
更具体来说,步骤S503中还原处理进一步包括以下步骤:
首先,基于所述振动数据的振幅和频率,在所述对应关系集合中查找与之对应的音频信号的幅值和频率;
然后,基于查找到的对应的音频信号的幅值和频率,还原所述第二音频数据。
迄今为止,已经参照图1到图5详细描述了根据本申请的各实施例的音频装置、信息处理系统和声音处理方法。在根据本申请实施例的音频装置、信息处理系统和声音处理方法中,由于与传感器所检测到的机械振动相关的振动数据最能够真实地体现所播放的音频数据,因此通过分别由音频采集器集合和传感器采集音频数据和振动数据,从根本上解决了声音回传采集的问题,能够更准确地剔除无用音频和保留有用人声,进而能够提高后续语音识别和控制的可靠性和准确性。
需要说明的是,在本说明书中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
最后,还需要说明的是,上述一系列处理不仅包括以这里所述的顺序按时间序列执行的处理,而且包括并行或分别地、而不是按时间顺序执行的处理。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本申请可借助软件加必需的硬件平台的方式来实现,当然也可以全部通过软件来实施。基于这样的理解,本申请的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例或者实施例的某些部分所述的方法。
以上对本申请进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (6)
1.一种音频装置,包括:
音频采集器集合,包括至少一个音频采集器,设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;
传感器,设置在电子设备的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;
处理器,用于基于所述传感器感测的振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据;以及
传输器,用于向所述电子设备传输所述第三音频数据;
其中预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合通过以下处理获得:
经由所述音频输出器依次以预定频率范围内的多个已知频率和已知振幅播放已知音频信号;
基于依次获得的振动数据以及所述已知音频信号,确定所述对应关系集合。
2.根据权利要求1所述的音频装置,其中所述第二位置为靠近所述音频输出器的位置或靠近所述音频采集器集合的位置。
3.一种信息处理系统,包括:
电子设备,包括:
音频输出器;以及
处理器;
音频装置,与所述电子设备连接,包括:
音频采集器集合,包括至少一个音频采集器,设置在电子设备的第一位置,用于采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;
传感器,设置在电子设备的第二位置,用于感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及
传输器,用于向所述电子设备传输第一音频数据和振动数据;
其中所述处理器被配置为接收所述音频采集器集合采集的第一音频数据以及所述传感器感测的所述振动数据,并基于所述振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据,从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据,并将所述第三音频数据作为音频输入;
其中预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合通过以下处理获得:
经由所述音频输出器依次以预定频率范围内的多个已知频率和已知振幅播放已知音频信号;
基于依次获得的振动数据以及所述已知音频信号,确定所述对应关系集合。
4.根据权利要求3所述的信息处理系统,其中所述处理器进一步被配置为对所述音频输入执行预定处理,获得对应指令,并响应于所述对应指令而执行对应操作。
5.一种声音处理方法,应用于一音频装置,包括:
经由电子设备的音频输出器依次以预定频率范围内的多个已知频率和已知振幅播放已知音频信号;以及
基于设置在电子设备的第二位置传感器依次获得的振动数据以及所述已知音频信号,确定与设置在电子设备的第一位置的音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合;
通过所述音频采集器集合,采集预定采集范围内的第一音频数据,其中,所述电子设备具有音频输出器;
感测与所述电子设备的音频输出器输出第二音频数据所引起的所述电子设备的至少部分振动相关的振动数据;以及
其中所述声音处理方法进一步包括:
基于所述传感器感测的振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据;
从所述音频采集器集合采集的第一音频数据中除去所述第二音频数据以获得第三音频数据;以及
向所述电子设备传输所述第三音频数据。
6.根据权利要求5所述的声音处理方法,其中基于所述振动数据以及预先存储的、与所述音频采集器集合和所述传感器的当前放置位置相关联的音频信号与振动数据的对应关系集合,还原经由所述音频输出器播放的所述第二音频数据的步骤进一步包括:
基于所述振动数据的振幅和频率,在所述对应关系集合中查找与之对应的音频信号的幅值和频率;
基于查找到的对应的音频信号的幅值和频率,还原所述第二音频数据。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810553316.1A CN108650584B (zh) | 2018-05-31 | 2018-05-31 | 音频装置、信息处理系统和声音处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810553316.1A CN108650584B (zh) | 2018-05-31 | 2018-05-31 | 音频装置、信息处理系统和声音处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108650584A CN108650584A (zh) | 2018-10-12 |
CN108650584B true CN108650584B (zh) | 2021-12-24 |
Family
ID=63759111
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810553316.1A Active CN108650584B (zh) | 2018-05-31 | 2018-05-31 | 音频装置、信息处理系统和声音处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108650584B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106236130A (zh) * | 2016-08-30 | 2016-12-21 | 苏州中盛纳米科技有限公司 | 一种基于mems技术的电子式听诊器 |
CN106899919A (zh) * | 2017-03-24 | 2017-06-27 | 武汉海慧技术有限公司 | 一种基于视觉麦克风技术的侦听系统及方法 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6266410B1 (en) * | 1997-06-27 | 2001-07-24 | Kabushiki Kaisha Toshiba | Speakerphone and microphone case for the same |
GB0312567D0 (en) * | 2003-06-02 | 2003-07-09 | Newlands Technology Ltd | Audio system |
KR20080015968A (ko) * | 2006-08-17 | 2008-02-21 | 엘지전자 주식회사 | 에코 제거 기능을 갖는 이동통신단말기 |
GB2456400B (en) * | 2008-01-21 | 2012-12-26 | Skype | Reducing echo in a signal to be transmitted in a communication system |
US8660676B2 (en) * | 2009-10-16 | 2014-02-25 | Microsoft Corporation | Mitigating the impact of nonlinear echos by dynamic range compression |
JP2012231331A (ja) * | 2011-04-26 | 2012-11-22 | Kyocera Corp | 携帯通信機器 |
US20140363008A1 (en) * | 2013-06-05 | 2014-12-11 | DSP Group | Use of vibration sensor in acoustic echo cancellation |
CN105261363A (zh) * | 2015-09-18 | 2016-01-20 | 深圳前海达闼科技有限公司 | 一种语音识别的方法、装置及终端 |
US9805702B1 (en) * | 2016-05-16 | 2017-10-31 | Apple Inc. | Separate isolated and resonance samples for a virtual instrument |
CN206713055U (zh) * | 2017-04-28 | 2017-12-05 | 重庆优擎科技有限公司 | 一种语音控制系统、后视镜及汽车 |
-
2018
- 2018-05-31 CN CN201810553316.1A patent/CN108650584B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106236130A (zh) * | 2016-08-30 | 2016-12-21 | 苏州中盛纳米科技有限公司 | 一种基于mems技术的电子式听诊器 |
CN106899919A (zh) * | 2017-03-24 | 2017-06-27 | 武汉海慧技术有限公司 | 一种基于视觉麦克风技术的侦听系统及方法 |
Non-Patent Citations (1)
Title |
---|
声音的传播;徐岩;《实用影音技术》;20071231;第90-94页 * |
Also Published As
Publication number | Publication date |
---|---|
CN108650584A (zh) | 2018-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102570480B1 (ko) | 오디오 신호 처리 방법 및 이를 지원하는 전자 장치 | |
CN110556127B (zh) | 语音识别结果的检测方法、装置、设备及介质 | |
AU2008240722B2 (en) | Voice and position localization | |
CN109040641B (zh) | 一种视频数据合成方法及装置 | |
CN103871419B (zh) | 一种信息处理方法及电子设备 | |
CN107948869B (zh) | 音频处理方法、装置、音响系统及存储介质 | |
CN107071683A (zh) | 无线通信耳机检测装置和方法 | |
CN111434097B (zh) | 具有气体传感器结构的电子设备 | |
WO2019147034A1 (ko) | 사운드를 제어하는 전자 장치 및 그 동작 방법 | |
US9853758B1 (en) | Systems and methods for signal mixing | |
KR102512614B1 (ko) | 오디오 개선을 지원하는 전자 장치 및 이를 위한 방법 | |
JP2017111078A (ja) | 漏水検出装置 | |
CN110659542A (zh) | 监控方法及装置 | |
CN108053832B (zh) | 音频信号处理方法、装置、电子设备及存储介质 | |
JP2019040005A (ja) | 読み上げシステム及び読み上げ方法 | |
CN108805086B (zh) | 一种媒体控制方法及音频处理装置 | |
CN108650584B (zh) | 音频装置、信息处理系统和声音处理方法 | |
JP2020034542A (ja) | 情報処理方法、情報処理装置及びプログラム | |
CN113362836A (zh) | 训练声码器方法、终端及存储介质 | |
KR20190016683A (ko) | 마이크로폰 어레이를 이용한 회의록 자동작성장치 | |
CN109346073A (zh) | 一种信息处理方法及电子设备 | |
WO2015086360A1 (en) | Method and apparatus for watermarking an audio signal | |
CN111933174A (zh) | 语音处理方法、装置、设备和系统 | |
WO2005073680A1 (en) | An apparatus for measuring and analysing sound signals | |
CN110868667B (zh) | 音响系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |