CN103813239B - 信号处理系统和信号处理方法 - Google Patents
信号处理系统和信号处理方法 Download PDFInfo
- Publication number
- CN103813239B CN103813239B CN201310560237.0A CN201310560237A CN103813239B CN 103813239 B CN103813239 B CN 103813239B CN 201310560237 A CN201310560237 A CN 201310560237A CN 103813239 B CN103813239 B CN 103813239B
- Authority
- CN
- China
- Prior art keywords
- unit
- sound
- microphone
- microphone unit
- signal processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/02—Circuits for transducers, loudspeakers or microphones for preventing acoustic reaction, i.e. acoustic oscillatory feedback
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2410/00—Microphones
- H04R2410/01—Noise reduction using microphones having different directional characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2410/00—Microphones
- H04R2410/05—Noise reduction with a separate noise microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Circuit For Audible Band Transducer (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
- Telephone Function (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
Abstract
一种不要求预先存储多个程序的信号处理系统以及一种用于信号处理系统的信号处理方法。CPU(12)从非易失性存储器(14)读取预定声音信号处理程序,经由通信I/F(11)将该程序发送至每个麦克风单元。从主机装置(1)发送的声音信号处理程序经由通信I/F(21A)被临时存储在易失性存储器(23A)中。声音信号处理部(24A)执行对应于临时存储的声音信号处理程序的处理,将与由麦克风(25A)拾取的声音相关的数字声音信号发送至主机装置(1)。在到麦克风单元(2A)的电源被切断的情况下,临时存储在易失性存储器(23A)中的声音信号处理程序被擦除。在每次启动时,麦克风单元从主机装置(1)确定地接收用于操作的声音信号处理程序,并执行操作。
Description
技术领域
本发明涉及包括麦克风单元和连接至麦克风单元的主机装置的信号处理系统。
背景技术
以往,在电话会议系统中,提出了一种设备,其中,存储多个程序,使得可以根据通信目的地选择回声消除程序。
例如,在根据JP-A-2004-242207的设备中,根据通信目的地改变其抽头长度。
此外,在根据JP-A-10-276415的电话会议设备中,通过改变在其主体上提供的DIP开关的设定,读取对于每次使用都不同的程序。
然而,在根据JP-A-2004-242207和JP-A-10-276415的设备中,多个程序必须根据预期使用的模式被预先存储。如果添加新功能,则程序重写是必须的,特别是在终端的数量增加的情况下,这会引起问题的发生。
发明内容
从而,本发明旨在提供不要求多个程序被预先存储的信号处理系统。
为了实现以上目标,根据本发明,提供根据本发明的信号处理系统,包括:
多个麦克风单元,被配置成串联连接,每个麦克风单元都具有用于拾取声音的麦克风、临时存储器、以及用于处理由麦克风拾取的声音的处理部;
主机装置,被配置成连接至多个麦克风单元之一,该主机装置具有存储用于多个麦克风单元的声音信号处理程序的非易失性存储器,并且该主机装置将从非易失性存储器读取的声音信号处理程序发送至每个麦克风单元;并且
每个麦克风单元将声音信号处理程序临时存储在临时存储器中,
其中,处理部执行对应于临时存储在临时存储器中的声音信号处理程序的处理,并且将处理后的声音发送至主机装置。
如上所述,在该信号处理系统中,没有操作程序被预先存储在终端(麦克风单元)中,而每个麦克风单元都从主机装置接收程序,并且临时存储程序,然后执行操作。因此,不必须将大量程序预先存储在麦克风单元中。而且,在添加新功能的情况下,不必须重写每个麦克风单元的程序。可以通过仅在主机装置侧修改存储在非易失性存储器中的程序,来实现新功能。
在连接多个麦克风单元的情况下,可以在所有麦克风单元中执行相同程序,但是也可以在每个麦克风单元中执行各自程序。
例如,在主机装置中提供扬声器的情况下,可以使用以下模式,其中:在最接近主机装置设置的麦克风单元中执行回声消除器程序,并且在离主机装置最远设置的麦克风单元中执行噪声消除器程序。在根据本发明的信号处理系统中,即使麦克风单元的连接位置改变,也能发送适用于每个连接位置的程序。例如,在最接近主机装置设置的麦克风单元中确定地执行回声消除器程序。因此,不要求用户意识到哪个麦克风单元应该连接至哪个位置。
而且,主机装置可以根据将被连接的麦克风单元的数量,修改将被发送的程序。在将被连接的麦克风单元的数量是一个的情况下,麦克风单元的增益被设置为高,并且在将被连接的麦克风单元的数量是多个的情况下,各个麦克风单元的增益被设置为相对较低。
另一方面,在每个麦克风单元都具有多个麦克风的情况下,还可以使用执行用于使多个麦克风用作麦克风阵列的程序的模式。
另外,可以使用以下模式,其中:主机装置通过将声音信号处理程序划分为固定单位位数据(constant unit bit data)并且按照被各个麦克风单元接收的顺序布置单位位数据,来产生串行数据,并且将串行数据发送至各个麦克风单元;每个麦克风单元都从串行数据中提取将由麦克风单元接收的单位位数据,并且接收并临时存储所提取的单位位数据;以及处理部执行与通过组合单位位数据获得的声音信号处理程序相对应的处理。通过该模式,即使由于麦克风单元的数量增加,使得将被发送的程序的数量增加,麦克风单元之间的信号线的数量也不增加。
而且,还可以使用以下模式,其中:每个麦克风单元都将处理后的声音划分为固定单位位数据,并且将单位位数据发送至被连接为较高阶单元的麦克风单元,并且各个麦克风单元协作以产生将被发送的串行数据,并且将串行数据发送至主机装置。通过该模式,即使因为麦克风单元的数量增加,使得通道的数量增加,麦克风单元之间的信号线的数量也不增加。
而且,还可以使用以下模式,其中:麦克风单元包括具有不同声音拾取方向的多个麦克风和一个声级检测器,主机装置具有扬声器,扬声器朝向每个麦克风单元发射测试声波,并且每个麦克风单元都判断被输入到多个麦克风中的每个的测试声波的声级,将用作判断的结果的声级数据划分为固定单位位数据,并且将单位位数据发送至被连接为较高阶单元的麦克风单元,由此各个麦克风单元协作以产生用于声级判断的串行数据。通过该模式,主机装置可以掌握在从扬声器到每个麦克风单元的麦克风的范围内的回声的声级。
还有,还可以使用以下模式,其中:声音信号处理程序包括用于实现回声消除器的回声消除器程序,其滤波器系数被更新,回声消除器程序具有用于确定滤波器系数的数量的滤波器系数设定部,并且主机装置基于从每个麦克风单元接收到的声级数据,改变每个麦克风单元的滤波器系数的数量,为每个麦克风单元确定用于改变滤波器系数的数量的改变参数,通过将改变参数划分为固定单位位数据并且通过按照被各个麦克风单元接收的顺序布置单位位数据,产生串行数据,并且将用于改变参数的串行数据发送至各个麦克风单元。
在该情况下,可以在最接近主机装置设置并且具有高回声声级的麦克风单元中增加滤波器系数的数量(抽头的数量),并且可以使得在远离主机装置设置并且具有低回声声级的麦克风单元中减少抽头的数量。
而且,还可以使用以下模式,其中:声音信号处理程序是回声消除器程序或用于去除噪声分量的噪声消除器程序,并且主机装置根据声级数据,将回声消除器程序或噪声消除器程序确定为将被发送至每个麦克风单元的程序。
在该情况下,可以在最接近主机装置设置并且具有高回声声级的麦克风单元中执行回声消除器,并且在远离主机装置设置并且具有低回声声级的麦克风单元中执行噪声消除器。
[本发明的有益效果]
通过本发明,不要求多个程序被预先存储,并且在添加新功能的情况下,不必须重写终端的程序。
附图说明
图1是示出根据本发明的信号处理系统的连接模式的视图。
图2A是示出主机装置的结构的框图,以及图2B是示出麦克风单元的结构的框图。
图3A是示出回声消除器的结构的视图,以及图3B是示出噪声消除器的结构的视图。
图4是示出回声抑制器的结构的视图。
图5A是示出根据本发明的信号处理系统的另一种连接模式的视图,图5B是示出主机装置的外部透视图,以及图5C是示出麦克风单元的外部透视图。
图6A是示出信号连接的示例性框图,以及图6B是示出麦克风单元的结构的示例性框图。
图7是示出用于执行串行数据和并行数据之间的转换的信号处理单元的结构的示例性框图。
图8A是示出串行数据和并行数据之间的转换的示意图,以及图8B是示出麦克风单元的信号流的视图。
图9是示出在将信号从各个麦克风单元发送至主机装置的情况下的信号流的视图。
图10是示出在将各个声音处理程序从主机装置发送至各个麦克风单元的情况下的信号流的视图。
图11是示出信号处理系统的操作的流程图。
图12是示出根据应用示例的信号处理系统的结构的框图。
图13是示出根据应用示例的外接单元的外部透视图。
图14是示出根据应用示例的外接单元的结构的框图。
图15是示出声音信号处理部的结构的框图。
图16是示出外接单元数据的数据格式的示例的视图。
图17是示出根据应用示例的主机装置的结构的框图。
图18是用于外接单元的声源追踪处理的流程图。
图19是用于主机装置的声源追踪处理的流程图。
图20是示出在发出测试声波以作出声级判断的情况下的操作的流程图。
图21是示出在指定外接单元之一的回声消除器的情况下的操作的流程图。
图22是在主机装置中配置回声抑制器的情况下的框图。
图23A和图23B是示出主机装置和外接单元的布置的修改示例的视图。
具体实施方式
图1是示出根据本发明的信号处理系统的连接模式的视图。该信号处理系统包括主机装置1和分别连接至主机装置1的多个(在本示例中是五个)麦克风单元2A至2E。
麦克风单元2A至2E分别被设置在例如具有大空间的会议室内。主机装置1从各个麦克风单元接收声音信号,并且执行各种处理。例如,主机装置1将各个麦克风单元的声音信号单独发送至经由网络连接的另一个主机装置。
图2A是示出主机装置1的结构的框图,以及图2B是示出麦克风单元2A的结构的框图。由于所有各个麦克风单元都具有相同的硬件结构,所以麦克风单元2A在图2B中作为代表被示出,并且描述其结构和功能。然而,在本实施例中,A/D转换的结构被省略,并且除非另外指出,假设各信号是数字信号,以此给出以下说明。
如图2A中所示,主机装置1具有通信接口(I/F)11、CPU12、RAM13、非易失性存储器14和扬声器102。
CPU12从非易失性存储器14读取应用程序并且将它们临时存储在RAM13中,从而执行各操作。例如,如上所述,CPU12从各个麦克风单元接收声音信号,并且将各个信号单独发送至经由网络连接的另一个主机装置。
非易失性存储器14包括闪存、硬盘驱动器(HDD)等。在非易失性存储器14中,存储声音处理程序(在本实施例中,此后称为声音信号处理程序)。声音信号处理程序是用于操作各个麦克风单元的程序。例如,多种程序可以被包括在程序中,诸如,用于实现回声消除器功能的程序、用于实现噪声消除器功能的程序、以及用于实现增益控制的程序。
CPU12从非易失性存储器14读取预定声音信号处理程序,并且经由通信I/F11,将该程序发送至每个麦克风单元。声音信号处理程序可以被嵌入在应用程序中。
麦克风单元2A具有通信I/F21A、DSP22A和麦克风(此后有时称为麦克风)25A。
DSP22A具有易失性存储器23A和声音信号处理部24A。虽然在本示例中示出易失性存储器23A被嵌入在DSP22A中的模式,但是可以独立于DSP22A提供易失性存储器23A。声音信号处理部24A用作根据本发明的处理部,并且具有将由麦克风25A拾取的声音输出为数字声音信号的功能。
从主机装置1发送的声音信号处理程序经由通信I/F21A,被临时存储在易失性存储器23A中。声音信号处理部24A执行对应于被临时存储在易失性存储器23A中的声音信号处理程序的处理,并且将与由麦克风25A拾取的声音相关的数字声音信号发送至主机装置1。例如,在从主机装置1发送回声消除器程序的情况下,声音信号处理部24A从由麦克风25A拾取的声音中去除回声分量,并且将处理后的信号发送至主机装置1。在每个麦克风单元中执行回声消除器程序的该方法优选地在用于电话会议的应用程序在主机装置1中执行的情况下合适。
在到麦克风单元2A的电源被切断的情况下,擦除临时存储在易失性存储器23A中的声音信号处理程序。在每次启动时,麦克风单元都从主机装置1确定地接收用于操作的声音信号处理程序,然后执行操作。在麦克风单元2A是经由通信I/F21A接收供电的类型(总线电源驱动)的情况下,麦克风单元2A从主机装置1接收用于操作的程序,并且仅当连接至主机装置1时执行操作。
如上所述,在主机装置1中执行用于电话会议的应用程序的情况下,执行用于回声消除的声音信号处理程序。此外,在执行用于记录的应用程序的情况下,执行用于噪声消除的声音信号处理程序。另一方面,还可以使用以下模式,其中:在执行用于声音放大的应用程序以使得从主机装置1的扬声器102输出由每个麦克风单元拾取的声音的情况下,执行用于声反馈消除的声音信号处理程序。在在主机装置1中执行用于记录的应用程序的情况下,不需要扬声器102。
将参考图3A描述回声消除器。图3A是示出在声音信号处理部24A执行回声消除器程序的情况下的结构的框图。如图3A中所示,声音信号处理部24A包括滤波器系数设定部241、自适应滤波器242和加法部243。
滤波器系数设定部241估计声传输系统(从主机装置1的扬声器102到每个麦克风单元的麦克风的声音传播路线)的传递函数,并且使用所估计的传递函数,设置自适应滤波器242的滤波器系数。
自适应滤波器242包括数字滤波器,诸如,FIR滤波器。从主机装置1,自适应滤波器242接收将被输入到主机装置1的扬声器102的辐射声音信号FE,并且使用在滤波器系数设定部241中设置的滤波器系数执行滤波,由此生成伪衰退声音信号。自适应滤波器242将所生成的伪衰退声音信号输出到加法部243。
加法部243输出通过从麦克风25A的声音拾取信号NE1中减去从自适应滤波器242输入的伪衰退声音信号获得的声音拾取信号NE1’。
基于辐射声音FE和从加法部243输出的声音拾取信号NE1’,滤波器系数设定部241使用诸如LMS算法之类的自适应算法,更新滤波器系数。然后,滤波器系数设定部241将更新后的滤波器系数设置到自适应滤波器242。
接下来,将参考图3B描述噪声消除器。图3B是示出在处理部执行噪声消除器程序的情况下的声音信号处理部24A的结构的框图。如图3B中所示,声音信号处理部24A包括FFT处理部245、噪声去除部246、估计部247和IFFT处理部248。
用于执行傅里叶变换的FFT处理部245将声音拾取信号NE’T转换为频谱NE’N。噪声去除部246去除包含在频谱NE’N中的噪声分量N’N。通过估计部247,基于频谱NE’N,估计噪声分量N’N。
估计部247执行用于估计包含在从FFT处理部245输入的频谱NE’N中的噪声分量N’N的处理。估计部247在声音信号NE’N的特定采样定时,顺序地获取频谱(此后被称为声谱)S(NE’N),并且临时存储该频谱。基于多次获得和存储的声谱S(NE’N),估计部247在噪声分量N’N的特定采样定时,估计频谱(此后称为噪声谱)S(N’N)。然后,估计部247将所估计的噪声谱S(N’N)输出到噪声去除部246。
例如,假设特定采样定时T处的噪声谱是S(N’N(T)),相同采样定时T处的声谱是S(NE’N(T)),并且在前采样定时T-1处的噪声谱是S(N’N(T-1))。而且,α和β是遗忘常数;例如,α=0.9,并且β=0.1。噪声谱S(N’N(T))可以由以下表达式1表示。
S(N'N(T))=αS(N'N(T-1))+βS(N'N(T))…表达式1
可以通过基于声谱估计噪声谱S(N’N(T)),来估计噪声分量,诸如,背景噪声。假设估计部247仅在由麦克风25A拾取的声音拾取信号的声级低(无声)的情况下,执行噪声谱估计处理。
噪声去除部246从由FFT处理部245输入的频谱NE’N中去除噪声分量N’N,并且将噪声去除之后获得的频谱CO’N输出到IFFT处理部248。更具体地,噪声去除部246计算声音信号S(NE’N)和从估计部247输入的噪声谱S(N’N)的信号声级的比率。在所计算的信号声级的比率等于阈值或更大的情况下,噪声去除部246线性地输出声谱S(NE’N)。另外,在所计算的信号声级的比率小于阈值的情况下,噪声去除部246非线性地输出声谱S(NE’N)。
用于执行反傅里叶变换的IFFT处理部248在时间轴上反变换去除噪声分量N’N之后的频谱CO’N,并且输出所生成的声音信号CO’T。
而且,声音信号处理程序可以实现用于如图4中所示的这样的回声抑制器的程序。使用该回声抑制器,来去除在图3A中所示的回声消除器的后续阶段不能由该回声消除器去除的回声分量。回声抑制器包括FFT处理部121、回声去除部122、FFT处理部123、进步度(progress degree)计算部124、回声生成部125、FFT处理部126和IFFT处理部127,如图4中所示。
FFT处理部121被用于将从回声消除器输出的声音拾取信号NE1’转换为频谱。该频谱被输出到回声去除部122和进步度计算部124。回声去除部122去除包含在输入频谱中的残留回声分量(不能通过回声消除器去除的回声分量)。通过回声生成部125生成残留回声分量。
回声生成部125基于从FFT处理部126输入的伪衰退声音信号的频谱,生成残留回声分量。通过将过去估计的残留回声分量添加至乘以预定系数的输入伪衰退声音信号的频谱,来获得残留回声分量。该预定系数由进步度计算部124设置。进步度计算部124获得从FFT处理部123输入的声音拾取信号NE1(在在前阶段由回声消除器去除回声分量之前的声音拾取信号)和从FFT处理部121输入的声音拾取信号NE1’(在在前阶段由回声消除器去除回声分量之后的声音拾取信号)的功率比(ERLE:回声往返损耗增强)。进步度计算部124基于功率比输出预定系数。例如,在自适应滤波器242的学习根本不被执行的情况下,上述预定系数被设置为1;在自适应滤波器242的学习已进行的情况下,预定系数被设置为0;当自适应滤波器242的学习进一步继续时,使得预定系数更小,并且使得残留回声分量更小。然后,回声去除部122去除通过回声生成部125计算的残留回声分量。IFFT处理部127在时间轴上反变换去除回声分量之后的频谱,并且输出所获得的声音信号。
回声消除器程序、噪声消除器程序和回声抑制器程序可以由主机装置1执行。具体地,在每个麦克风单元执行回声消除器程序的同时,主机装置执行回声抑制器程序。
在根据本实施例的信号处理系统中,可以根据将连接的麦克风单元的数量,修改将被执行的声音信号处理程序。例如,在将被连接的麦克风单元的数量为一个的情况下,麦克风单元的增益被设置为高,并且在将被连接的麦克风单元的数量为多个的情况下,各个麦克风单元的增益被设置为相对低。
另一方面,在每个麦克风单元具有多个麦克风的情况下,还可以使用执行用于使多个麦克风用作麦克风阵列的程序的模式。在该情况下,可以根据麦克风单元连接到主机装置1的顺序(位置),为每个麦克风单元设置不同参数(增益、延迟量等)。
以此方式,根据本实施例的麦克风单元可以根据主机装置1的利用,实现多种功能。甚至在实现这些多种功能的情况下,不必须将程序预先存储在麦克风单元2A中,由此没有非易失性存储器是必须的(或可以使其容量小)。
虽然易失性存储器23A RAM在本实施例中被看作临时存储器的示例,但是存储器不限于易失性存储器,假设在到麦克风单元2A的电源被切断的情况下,存储器的内容被擦除,还可以使用非易失性存储器,诸如,闪存。在该情况下,例如在到麦克风单元2A的电源被切断的情况下或者在执行电缆替换的情况下,DSP22A擦除闪存的内容。然而,在该情况下,当到麦克风单元2A的电源被切断直到DSP22A擦除闪存的内容为止时,提供电容器等,以临时保持电源。
而且,在添加假定在产品出售时不被使用的新功能的情况下,不必须重写每个麦克风单元的程序。可以通过仅修改存储在主机装置1的非易失性存储器14中的声音信号处理程序,来实现新功能。
而且,由于所有麦克风单元2A至2E都具有相同硬件,不要求用户意识到哪个麦克风单元应该连接至哪个位置。
例如,在最接近主机装置1的麦克风单元(例如,麦克风单元2A)中执行回声消除器程序并且在离主机装置1最远的麦克风单元(例如,麦克风单元2E)中执行噪声消除器程序的情况下,如果麦克风单元2A和麦克风单元2E的连接被交换,在最接近主机装置1的麦克风单元2E中确定地执行回声消除器程序,并且在离主机装置1最远的麦克风单元2A中执行噪声消除器程序。
如图1中所示,可以使用各个麦克风单元直接连接至主机装置1的星形连接模式。然而,如图5A中所示,还可以使用麦克风单元串联连接并且它们中的一个(麦克风单元2A)连接至主机装置1的级联连接模式。
在图5A中所示的示例中,主机装置1经由电缆331连接至麦克风单元2A。麦克风单元2A经由电缆341连接至麦克风单元2B。麦克风单元2B经由电缆351连接至麦克风单元2C。麦克风单元2C经由电缆361连接至麦克风单元2D。麦克风单元2D经由电缆371连接至麦克风单元2E。
图5B是示出主机装置1的外部透视图,以及图5C是示出麦克风单元2A的外部透视图。在图5C中,麦克风单元2A作为代表被示出和在以下描述。然而,所有麦克风单元都具有相同外观和结构。如图5B中所示,主机装置1具有长方体外壳101A,在外壳101A的侧面(正面)上提供扬声器102,并且在外壳101A的侧面(背面)上提供通信I/F11。麦克风单元2A具有长方体外壳201A,在外壳201A的侧面上提供麦克风25A,并且在外壳201A的正面上提供第一输入/输出端子33A和第二输入/输出端子34A。图5C示出在背面、右侧面和左侧面上提供麦克风25A,由此具有三个声音拾取方向的示例。然而,声音拾取方向不限于在本示例中使用的那些。例如,可以使用在平面图中以120度间隔布置三个麦克风25A并且在周向执行声音拾取的模式。电缆331连接至第一输入/输出端子33A,由此麦克风单元2A经由电缆331连接至主机装置1的通信I/F11。而且,电缆341连接至第二输入/输出端子34A,由此麦克风单元2A经由电缆341连接至麦克风单元2B的第一输入/输出端子33B。外壳101A和外壳201A的形状不限于长方体形状。例如,主机装置1的外壳101可以具有椭圆柱形,并且外壳201A可以具有圆柱形。
虽然根据本实施例的信号处理系统在外观上具有图5A中所示的级联连接模式,但是该系统可以在电学上实现星形连接模式。这将在以下描述。
图6A是示出信号连接的示例性框图。麦克风单元具有相同硬件结构。首先,以下通过参考图6B描述作为代表的麦克风单元2A的结构和功能。
除了图2A中所示的DSP22A之外,麦克风单元2A具有FPGA31A、第一输入/输出端子33A和第二输入/输出端子34A。
FPGA31A实现如图6B中所示的物理电路。换句话说,FPGA31A被用于将第一输入/输出端子33A的第一通道物理上连接至DSP22A。
而且,FPGA31A用于将除了第一输入/输出端子33A的第一通道之外的子通道之一物理上连接至邻近第二输入/输出端子34A的通道并且对应于该子通道的另一个通道。例如,第一输入/输出端子33A的第二通道连接至第二输入/输出端子34A的第一通道,第一输入/输出端子33A的第三通道连接至第二输入/输出端子34A的第二通道,第一输入/输出端子33A的第四通道连接至第二输入/输出端子34A的第三通道,以及第一输入/输出端子33A的第五通道连接至第二输入/输出端子34A的第四通道。第二输入/输出端子34A的第五通道不连接至任何位置。
通过这种物理电路,主机装置1的第一通道的信号(ch.1)被输入到麦克风单元2A的DSP22A。另外,如图6A中所示,将主机装置1的第二通道的信号(ch.2)从麦克风单元2A的第一输入/输出端子33A的第二通道输入到麦克风单元2B的第一输入/输出端子33B的第一通道,然后输入到麦克风单元2B的DSP22B。
将第三通道的信号(ch.3)经由麦克风单元2B的第一输入/输出端子33B的第二通道,从第一输入/输出端子33A的第三通道输入到麦克风单元2C的第一输入/输出端子33C的第一通道,然后输入到麦克风单元2C的DSP22C。
因为结构的简单性,经由麦克风单元2B的第一输入/输出端子33B的第三通道和麦克风单元2C的第一输入/输出端子33C的第二通道,将第四通道的声音信号(ch.4)从第一输入/输出端子33A的第四通道输入到麦克风单元2D的第一输入/输出端子33D的第一通道,然后输入到麦克风单元2D的DSP22D。经由麦克风单元2B的第一输入/输出端子33B的第四通道、麦克风单元2C的第一输入/输出端子33C的第三通道和麦克风单元2D的第一输入/输出端子33D的第二通道,将第五通道的声音信号(ch.5)从第一输入/输出端子33A的第五通道输入到麦克风单元2E的第一输入/输出端子33E的第一通道,然后输入到麦克风单元2E的DSP22E。
通过该结构,虽然在外观上,连接是级联连接,但是可以将各个声音信号处理程序从主机装置1发送至各个麦克风单元。在该情况下,经由电缆串联连接的麦克风单元可以根据期望被连接和断开连接,并且不必须对连接的顺序给予任何考虑。例如,在将回声消除器程序发送至最接近主机装置1的麦克风单元2A并且将噪声消除器程序发送至离主机装置1最远的麦克风单元2E的情况下,如果麦克风单元2A和麦克风单元2E的连接位置被交换,以下将描述将发送至各个麦克风单元的程序。在该情况下,麦克风单元2E的第一输入/输出端子33E经由电缆331连接至主机装置1的通信I/F11,并且第二输入/输出端子34E经由电缆341连接至麦克风单元2B的第一输入/输出端子33B。麦克风单元2A的第一输入/输出端子33A经由电缆371连接至麦克风单元2D的第二输入/输出端子34D。结果,回声消除器程序被发送至麦克风单元2E,并且噪声消除器程序被发送至麦克风单元2A。即使如上所述交换连接的顺序,也在最接近主机装置1的麦克风单元中执行回声消除器程序,并且在离主机装置1最远的麦克风单元中执行噪声消除器程序。
在识别出各个麦克风单元的连接顺序的情况下并且基于连接顺序和电缆的长度,主机装置1可以将回声消除器程序发送至离主机装置特定距离范围内的麦克风单元,并且可以将噪声消除器程序发送至位于特定距离之外的麦克风单元。关于电缆的长度,例如,在使用专用电缆的情况下,可以将关于电缆的长度的信息预先存储在主机装置中。而且,可以通过为每条电缆设置识别信息,通过存储识别信息和关于电缆的长度的信息并且通过经由正被使用的每条电缆接收识别信息,知晓正被使用的每条电缆的长度。
当主机装置1发送回声消除器程序时,优选对于接近主机装置的回声消除器,滤波器系数的数量(抽头的数量)应该被增加,以处理具有长反射的回声,并且对于远离主机装置的回声消除器,滤波器系数的数量(抽头的数量)应该被减少。
而且,甚至在生成不能通过回声抑制器去除的回声分量的情况下,可以实现用于通过将非线性处理程序(例如,上述回声抑制器程序)而不是回声消除器程序发送至离主机装置特定距离范围内的麦克风单元来去除回声分量的模式。而且,虽然在本实施例中描述了麦克风单元选择噪声消除器或回声消除器,但是可以将噪声消除器和回声消除器程序二者发送至接近主机装置1的麦克风单元,并且仅将噪声消除器程序发送至远离主机装置1的麦克风单元。
通过图6A和图6B中所示的结构,还在将声音信号从各个麦克风单元发送至主机装置1的情况下,可以从各个麦克风单元单独输出各个通道的声音信号。
另外,在本示例中,描述了使用FPGA实现物理电路的示例。然而,在不限于FPGA的情况下,可以使用任何器件,只要器件可以实现上述物理电路。例如,可以预先制备专用IC,或者可以预先进行布线。而且,在不限于物理电路的情况下,可以通过软件实现能够实现类似于FPGA31A的电路的模式。
接下来,图7是示出用于执行串行数据和并行数据之间的转换的麦克风单元的结构的示例性框图。在图7中,麦克风单元2A作为代表被示出并被描述。然而,所有麦克风单元都具有相同结构和功能。
在本示例中,麦克风单元2A具有FPGA51A,而不是图6A和图6B中所示的FPGA31A。
FPGA51A具有对应于上述FPGA31的物理电路501A、用于执行串行数据和并行数据之间的转换的第一转换部502A和第二转换部503A。
在本示例中,多个通道的声音信号通过第一输入/输出端子33A和第二输入/输出端子34A被输入和输出为串行数据。DSP22A将第一通道的声音信号作为并行数据输出到物理电路501A。
物理电路501A将从DSP22A输出的第一通道的并行数据输出到第一转换部502A。而且,物理电路501A将从第二转换部503A输出的第二通道的并行数据(对应于DSP22B的输出信号)、第三通道的并行数据(对应于DSP22C的输出信号)、第四通道的并行数据(对应于DSP22D的输出信号)和第五通道的并行数据(对应于DSP22E的输出信号)输出到第一转换部502A。
图8A是示出串行数据和并行数据之间的转换的示意图。并行数据包括用于同步的位时钟(BCK)、字时钟(WCK)和各个通道(五个通道)的信号SDO0至SDO4,如图8A的上部中所示。
串行数据包括同步信号和数据部分。数据部分包含字时钟、各个通道(五个通道)的信号SDO0至SDO4和错误校正码CRC。
将图8A的上部中所示的这样的并行数据从物理电路501A输入到第一转换部502A。第一转换部502A将并行数据转换为如图8A的下部中所示的这样的串行数据。串行数据被输出到第一输入/输出端子33A并且输入到主机装置1。主机装置1基于输入的串行数据,处理各个通道的声音信号。
另一方面,将如图8A的下部中所示的这样的串行数据从麦克风单元2B的第一转换部502B输入到第二转换部503A。第二转换部503A将串行数据转换为如图8A的上部中所示的并行数据,并且将并行数据输出到物理电路501A。
而且,如图8B中所示,通过物理电路501A,将从第二转换部503A输出的信号SDO0作为信号SDO1输出到第一转换部502A,并且将从第二转换部503A输出的信号SDO1作为信号SDO2输出到第一转换部502A,将从第二转换部503A输出的信号SDO2作为信号SDO3输出到第一转换部502A,并且将从第二转换部503A输出的信号SDO3作为信号SDO4输出到第一转换部502A。
因此,如在图6A中所示的示例的情况下,将从DSP22A输出的第一通道的声音信号(ch.1)作为第一通道的声音信号输入到主机装置1中,将从DSP22B输出的第二通道的声音信号(ch.2)作为第二通道的声音信号输入到主机装置1中,将从DSP22C输出的第三通道的声音信号(ch.3)作为第三通道的声音信号输入到主机装置1中,将从DSP22D输出的第四通道的声音信号(ch.4)作为第四通道的声音信号输入到主机装置1中,并且将从麦克风单元2E的DSP22E输出的第五通道的声音信号(ch.5)作为第五通道的声音信号输入到主机装置1中。
以下参考图9描述上述信号流。首先,麦克风单元2E的DSP22E使用声音信号处理部24A处理由其麦克风25E拾取的声音,并且将通过将处理后的声音划分为单位位数据获得的信号(信号SDO4)输出到物理电路501E。物理电路501E将信号SDO4作为第一通道的并行数据输出到第一转换部502E。第一转换部502E将并行数据转换为串行数据。如图9的最下面部分中所示,串行数据包含按照从字时钟、引导单位位数据(图中的信号SDO4)、位数据0(由图中的连字号“-”指示)和错误校正码CRC的顺序开始的数据。将这种串行数据从第一输入/输出端子33E输出并且输入到麦克风单元2D。
麦克风单元2D的第二转换部503D将输入的串行数据转换为并行数据,并且将并行数据输出到物理电路501D。然后,到第一转换部502D,物理电路501D输出包含在并行数据中的信号SDO4作为第二通道信号,并且还输出从DSP22D输入的信号SDO3作为第一通道信号。如从以上图9中的第三列中所示,第一转换部502D将并行数据转换为串行数据,其中,信号SDO3作为引导单位位数据被插入字时钟之后,并且信号SDO4被用作第二单位位数据。而且,第一转换部502D新生成错误校正码用于该情况(在信号SDO3是引导数据并且信号SDO4是第二数据的情况下),将该码附着到串行数据,并且输出串行数据。
将这种串行数据从第一输入/输出端子33D输出并且输入到麦克风单元2C。还在麦克风单元2C中执行类似于上述处理的处理。结果,麦克风单元2C输出串行数据,其中,信号SDO2作为引导单位位数据被插入字时钟之后,信号SDO3用作第二单位位数据,信号SDO4用作第三单位位数据,并且附着新错误校正码CRC。串行数据被输入到麦克风单元2B。也在麦克风单元2B中执行类似于上述处理的处理。结果,麦克风单元2B输出串行数据,其中,信号SDO1作为引导单位位数据被插入字时钟之后,信号SDO2用作第二单位位数据,信号SDO3用作第三单位位数据,信号SDO4用作第四单位位数据,并且附着新错误校正码CRC。串行数据被输入到麦克风单元2A。也在麦克风单元2A中执行类似于上述处理的处理。结果,麦克风单元2A输出串行数据,其中,信号SDO0作为引导单位位数据被插入字时钟之后,信号SDO1用作第二单位位数据,信号SDO2用作第三单位位数据,信号SDO3用作第四单位位数据,信号SDO4用作第五单位位数据,并且附着新错误校正码CRC。将串行数据输入到主机装置1。
以此方式,如在图6A中所示的示例的情况下,从DSP22A输出的第一通道的声音信号(ch.1)作为第一通道的声音信号被输入到主机装置1,从DSP22B输出的第二通道的声音信号(ch.2)作为第二通道的声音信号被输入到主机装置1,从DSP22C输出的第三通道的声音信号(ch.3)作为第三通道的声音信号被输入到主机装置1,从DSP22D输出的第四通道的声音信号(ch.4)作为第四通道的声音信号被输入到主机装置1,并且从麦克风单元2E的DSP22E输出的第五通道的声音信号(ch.5)作为第五通道的声音信号被输入到主机装置1。换句话说,每个麦克风单元都将由每个DSP处理的声音信号划分为固定单位位数据,并且将数据发送至作为较高阶单元连接在上游侧的麦克风单元,由此各个麦克风单元协作以产生将被发送的串行数据。
接下来,图10是示出在将各个声音处理程序从主机装置1发送至各个麦克风单元的情况下的信号流的视图。在该情况下,执行信号流与图9中所示的相反的处理。
首先,主机装置1通过将将从非易失性存储器14发送至每个麦克风单元的声音信号处理程序划分为固定单位位数据,通过按照被各个麦克风单元接收的顺序读取和布置单位位数据,来产生串行数据。在串行数据中,信号SDO0用作字时钟之后的引导单位位数据,信号SDO1用作第二单位位数据,信号SDO2用作第三单位位数据,信号SDO3用作第四单位位数据,信号SDO4用作第五单位位数据,并且附着错误校正码CRC。首先将串行数据输入到麦克风单元2A。在麦克风单元2A中,从串行数据中提取用作引导单位位数据的信号SDO0,并且将所提取的单位位数据输入到DSP22A并且临时存储在易失性存储器23A中。
接下来,麦克风单元2A输出串行数据,其中,信号SDO1用作字时钟之后的引导单位位数据,信号SDO2用作第二单位位数据,信号SDO3用作第三单位位数据,信号SDO4用作第四单位位数据,并且附着新错误校正码CRC。第五单位位数据是0(图中的连字号“-”)。将串行数据输入到麦克风单元2B。在麦克风单元2B中,将用作引导单位位数据的信号SOD1输入到DSP22B。然后,麦克风单元2B输出串行数据,其中,信号SDO2用作字时钟之后的引导单位位数据,信号SDO3用作第二单位位数据,信号SDO4用作第三单位位数据,并且附着新错误校正码CRC。将串行数据输入到麦克风单元2C。在麦克风单元2C中,将用作引导单位位数据的信号SDO2输入到DSP22C。然后,麦克风单元2C输出串行数据,其中,信号SDO3用作字时钟之后的引导单位位数据,信号SDO4用作第二单位位数据,并且附着新错误校正码CRC。将串行数据输入到麦克风单元2D。在麦克风单元2D中,将用作引导单位位数据的信号SDO3输入到DSP22D。然后,麦克风单元2D输出串行数据,其中,信号SDO4用作字时钟之后的引导单位位数据,并且附着新错误校正码CRC。最后,将串行数据输入到麦克风单元2E,并且将用作引导单位位数据的信号SDO4输入到DSP22E。
以此方式,将引导单位位数据(信号SDO0)确定地发送至连接到主机装置1的麦克风单元,将第二单位位数据(信号SDO1)确定地发送至第二连接的麦克风单元,将第三单位位数据(信号SDO2)确定地发送至第三连接的麦克风单元,将第四单位位数据(信号SDO3)确定地发送至第四连接的麦克风单元,并且将第五单位位数据(信号SDO4)确定地发送至第五连接的麦克风单元。
接下来,每个麦克风单元都执行与通过组合单位位数据获得的声音信号处理程序相对应的处理。而且在该情况下,经由电缆串联连接的麦克风单元可以按照期望被连接和断开连接,并且不必须对连接的顺序给予任何考虑。例如,在将回声消除器程序发送至最接近主机装置1的麦克风单元2A并且将噪声消除器程序发送至离主机装置1最远的麦克风单元2E的情况下,如果麦克风单元2A和麦克风单元2E的连接位置被交换,则将回声消除器程序发送至麦克风单元2E,并且将噪声消除器程序发送至麦克风单元2A。即使连接的顺序如上所述被交换,在最接近主机装置1的麦克风单元中执行回声消除器程序,并且在离主机装置1最远的麦克风单元中执行噪声消除器程序。
接下来,将参考图11中所示的流程图,描述启动时的主机装置1和各个麦克风单元的操作。当麦克风单元连接至主机装置1时并且当主机装置1的CPU12检测到麦克风单元的启动状态时(在S11),CPU12从非易失性存储器14读取预定声音信号处理程序(在S12),并且经由通信I/F11将该程序发送至各个麦克风单元(在S13)。此时,主机装置1的CPU12通过将声音处理程序划分为固定单位位数据并且通过按照被上述各个麦克风单元接收的顺序布置单位位数据,来产生串行数据,并且将串行数据发送至各麦克风单元。
每个麦克风单元都接收从主机装置1发送的声音信号处理程序(在S21)并且临时存储该程序(在S22)。此时,每个麦克风单元都从串行数据中提取将由该麦克风单元接收的单位位数据,并且接收并临时存储所提取的单位位数据。每个麦克风单元都组合临时存储的单位位数据,并且执行与组合的声音信号处理程序相对应的处理(在S23)。然后,每个麦克风单元发送关于所拾取的声音的数字声音信号(在S24)。此时,将通过每个麦克风单元的声音信号处理部处理的数字声音信号划分为固定单位位数据,并且发送至连接为较高阶单元的麦克风单元,并且各个麦克风单元协作以产生将被发送的串行数据,然后将将被发送的串行数据发送至主机装置。
虽然例如,在本示例中,以最小位单位执行到串行数据的转换,但是转换不限于最小位单位的转换,而是还可以执行针对每个字的转换。
而且,如果存在未连接的麦克风单元,甚至在存在没有信号的通道的情况下(在数据位是0的情况下),通道的位数据不被删除而是包含在串行数据中并且被发送。例如,在麦克风单元的数量是4的情况下,信号SDO4的位数据确定地变为0,但是信号SDO4不被删除而是作为具有位数据0的信号被发送。因此,不必须对关于哪个单元应该对应于哪个通道的连接关系给予任何考虑。另外,例如关于哪个数据应该被发送到哪个单元或者哪个数据应该从哪个单元被接收的地址信息不是必须的。即使连接的顺序被交换,也可以从各个麦克风单元输出合适的通道信号。
通过在单元之间发送串行数据的该结构,即使通道的数量增加,单元之间的信号线也不增加。虽然用于检测麦克风单元的启动状态的检测器可以通过检测电缆的连接,来检测启动状态,但是检测器可以检测在通电时连接的麦克风单元。而且,在使用期间添加新麦克风单元的情况下,检测器检测其电缆的连接,并且可以检测其启动状态。在该情况下,可以擦除所连接的麦克风单元的程序,并且将声音信号处理程序再次从主机装置发送至所有麦克风单元。
图12是示出根据应用示例的信号处理系统的结构的视图。根据应用示例的信号处理系统具有串联连接的外接单元10A至10E和连接至外接单元10A的主机装置1。图13是示出外接单元10A的外部透视图。图14是示出外接单元10A的结构的框图。在该应用示例中,主机装置1经由电缆331连接至外接单元10A。外接单元10A经由电缆341连接外接单元10B。外接单元10B经由电缆351连接至外接单元10C。外接单元10C经由电缆361连接至外接单元10D。外接单元10D经由电缆371连接至外接单元10E。外接单元10A至10E具有相同结构。因此,在以下外接单元的结构的说明中,外接单元10A被看作代表并且被描述。所有外接单元的硬件结构都相同。
外接单元10A具有与上述麦克风单元2A的结构和功能相同的结构和功能。然而,外接单元10A具有多个麦克风MICa至MICm,而不是麦克风25A。另外,在本示例中,如图15中所示,DSP22A的声音信号处理部24A具有放大器11a至11m、系数确定部120、合成部130和AGC140。
所需要的麦克风的数量可以是两个或以上,并且可以根据单个外接单元的声音拾取规格被适当地设置。从而,放大器的数量可以仅与麦克风的数量相同。例如,如果在周向使用小数量的麦克风拾取声音,则仅三个麦克风就足够。
麦克风MICa至MICm具有不同的声音拾取方向。换句话说,麦克风MICa至MICm具有预定的声音拾取方向性,并且通过使用特定方向作为主要声音拾取方向来拾取声音,由此生成声音拾取信号Sma至Smm。更具体地,例如,麦克风MICa通过使用第一特定方向作为主要声音拾取方向来拾取声音,由此生成声音拾取信号Sma。类似地,麦克风MICb通过使用第二特定方向作为主要声音拾取方向来拾取声音,由此生成声音拾取信号Smb。
麦克风MICa至MICm被安装在外接单元10A中,以使声音拾取方向性不同。换句话说,麦克风MICa至MICm被安装在外接单元10A中,以使主要声音拾取方向不同。
从麦克风MICa至MICm输出的声音拾取信号Sma至Smm分别被输入到放大器11a至11m。例如,从麦克风MICa输出的声音拾取信号Sma被输入到放大器11a,并且从麦克风MICb输出的声音拾取信号Smb被输入到放大器11b。从麦克风MICm输出的声音拾取信号Smm被输入到放大器11m。而且,声音拾取信号Sma至Smm被输入到系数确定部120。此时,声音拾取信号Sma至Smm(模拟信号)被转换为数字信号,然后被输入到放大器11a至11m。
系数确定部120检测声音拾取信号Sma至Smm的信号功率,比较声音拾取信号Sma至Smm的信号功率,并且检测具有最高功率的声音拾取信号。系数确定部120将用于被检测到具有最高功率的声音拾取信号的增益系数设置为“1”。系数确定部120将用于除了被检测到具有最高功率的声音拾取信号之外的声音拾取信号的增益系数设置为“0”。
系数确定部120将所确定的增益系数输出到放大器11a至11m。更具体地,系数确定部120将增益系数“1”输出到被检测到具有最高功率的声音拾取信号被输入到的放大器,并且将增益系数“0”输出到其他放大器。
系数确定部120检测被检测到具有最高功率的声音拾取信号的信号声级,并且生成声级信息IFo10A。系数确定部120将声级信息IFo10A输出到FPGA51A。
放大器11a至11m是其增益可以被调整的放大器。放大器11a至11m利用由系数确定部120给出的增益系数,来放大声音拾取信号Sma至Smm,并且分别生成放大后声音拾取信号Smga至Smgm。更具体地,例如,放大器11a利用来自系数确定部120的增益系数,来放大声音拾取信号Sma,并且输出放大后声音拾取信号Smga。放大器11b利用来自系数确定部120的增益系数,来放大声音拾取信号Smb,并且输出放大后声音拾取信号Smgb。放大器11m利用来自系数确定部120的增益系数,来放大声音拾取信号Smm,并且输出放大后声音拾取信号Smgm。
由于增益系数在此如上所述为“1”或“0”,被给予增益系数“1”的放大器输出声音拾取信号,同时保持其信号声级。在该情况下,放大后声音拾取信号与声音拾取信号相同。
另一方面,被给予增益系数“0”的放大器将声音拾取信号的信号声级抑制到“0”。在该情况下,放大后声音拾取信号具有信号声级“0”。
放大后声音拾取信号Smga至Smgm被输入到合成部130。合成部130是加法器,并且将放大后声音拾取信号Smga至Smgm相加,由此生成外接单元声音信号Sm10A。
在放大后声音拾取信号Smga至Smgm中,仅对应于在用作放大后声音拾取信号Smga至Smgm的起源的声音拾取信号Sma至Smm中具有最高功率的声音拾取信号的放大后声音拾取信号具有对应于声音拾取信号的信号声级,而其他放大后声音拾取信号具有信号声级“0”。
因此,通过将放大后声音拾取信号Smga至Smgm相加获得的外接单元声音信号Sm10A与被检测到具有最高功率的声音拾取信号相同。
通过上述处理,具有最高功率的声音拾取信号可以被检测到并且被输出为外接单元声音信号Sm10A。该处理可以以预定时间间隔被顺序地执行。因此,如果具有最高功率的声音拾取信号改变,换句话说,如果具有最高功率的声音拾取信号的声源移动,则用作外接单元声音信号Sm10A的声音拾取信号根据该改变和移动而改变。结果,可以基于每个麦克风的声音拾取信号追踪声源,并且输出其中来自声源的声音已经被最有效地拾取的外接单元声音信号Sm10A。
AGC140(所谓的自动增益控制放大器)利用预定增益放大外接单元声音信号Sm10A,并且将放大后的信号输出到FPGA51A。根据通信规范适当地设置将在AGC140中设置的增益。更具体地,例如,通过预先估计传输损耗并且补偿传输损耗,来设置将在AGC140中设置的增益。
通过执行该外接单元声音信号Sm10A的增益控制,可以将外接单元声音信号Sm10A从外接单元10A准确和安全地发送至主机装置1。结果,主机装置1可以准确和安全地接收外接单元声音信号Sm10A,并且可以解调该信号。
接下来,由AGC处理的外接单元声音信号Sm10A和声级信息IFo10A被输入到FPGA51A。
FPGA51A基于由AGC处理的外接单元声音信号Sm10A和声级信息IFo10A生成外接单元数据D10A,并且将该信号和信息发送至主机装置1。此时,声级信息IFo10A是与分配给相同外接单元数据的外接单元声音信号Sm10A同步的数据。
图16是示出将从每个外接单元发送到主机装置的外接单元数据的数据格式的示例的视图。外接单元数据D10A包括可以识别用作发送器的外接单元的头部DH、外接单元声音信号Sm10A和声级信息IFo10A,预定数量的位被分配给它们中的每个。例如,如图16中所示,在头部DH之后,分配具有预定数量的位的外接单元声音信号Sm10A,并且在外接单元声音信号Sm10A的位串之后,分配具有预定数量的位的声级信息IFo10A。
如在上述外接单元10A的情况下,其他外接单元10B至10E分别生成包含外接单元声音信号Sm10B至Sm10E和声级信息IFo10B至IFo10E的外接单元数据D10B至D10E,然后输出该数据。外接单元数据D10B至D10E中的每个都被划分为固定单位位数据,并且被发送至连接为较高阶单元的麦克风单元,并且各个麦克风单元协作以产生串行数据。
图17是示出在主机装置1的CPU12执行预定声音信号处理程序时实现的多种结构的框图。
主机装置1的CPU12具有多个放大器21a至21e、系数确定部220和合成部230。
来自外接单元10A至10E的外接单元数据D10A至D10E被输入到通信I/F11。通信I/F11解调外接单元数据D10A至D10E,并且获得外接单元声音信号Sm10A至Sm10E和声级信息IFo10A至IFo10E。
通信I/F11将外接单元声音信号Sm10A至Sm10E分别输出到放大器21a至21e。更具体地,通信I/F11将外接单元声音信号Sm10A输出到放大器21a,并且将外接单元声音信号Sm10B输出到放大器21b。类似地,通信I/F11将外接单元声音信号Sm10E输出到放大器21e。
通信I/F11将声级信息IFo10至IFo10E输出到系数确定部220。
系数确定部220比较声级信息IFo10A至IFo10E,并且检测最高声级信息。
系数确定部220将用于与被检测到具有最高声级的声级信息相对应的外接单元声音信号的增益系数设置为“1”。系数确定部220将用于除了与被检测到具有最高声级的声级信息相对应的外接单元声音信号之外的声音拾取信号的增益系数设置为“0”。
系数确定部220将所确定的增益系数输出到放大器21a至21e。更具体地,系数确定部220将增益系数“1”输出到与检测到具有最高声级的声级信息相对应的外接单元声音信号被输入到的放大器,并且将增益系数“0”输出到其他放大器。
放大器21a至21e是其增益可以被调整的放大器。放大器21a至21e利用由系数确定部220给出的增益系数,来放大外接单元声音信号Sm10A至Sm10E,并且分别生成放大后声音信号Smg10A至Smg10E。
更具体地,例如,放大器21a利用来自系数确定部220的增益系数来放大外接单元声音信号Sm10A,并且输出放大后声音信号Smg10A。放大器21b利用来自系数确定部220的增益系数,来放大外接单元声音信号Sm10B,并且输出放大后声音信号Smg10B。放大器21e利用来自系数确定部220的增益系数,来放大外接单元声音信号Sm10E,并且输出放大后声音信号Smg10E。
由于增益系数在此如上所述为“1”或“0”,被给予增益系数“1”的放大器输出外接单元声音信号,同时保持其信号声级。在该情况下,放大后声音信号与外接单元声音信号相同。
另一方面,被给予增益系数“0”的放大器将外接单元声音信号的信号声级抑制到“0”。在该情况下,放大后声音信号具有信号声级“0”。
放大后声音信号Smg10A至Smg10E被输入到合成部230。合成部230是加法器,并且将放大后声音信号Smg10A至Smg10E相加,由此生成追踪声音信号。
在放大后声音信号Smg10A至Smg10E中,仅与在用作放大后声音信号Smg10A至Smg10E的起源的外接单元声音信号Sm10A至Sm10E中具有最高声级的声音信号相对应的放大后声音信号具有对应于外接单元声音信号的信号声级,而其他放大后声音信号具有信号声级“0”。
因此,通过将放大后声音信号Smg10A至Smg10E相加获得的追踪声音信号与被检测到具有最高功率水平的外接单元声音信号相同。
通过上述处理,具有最高声级的外接单元声音信号可以被检测到并且被输出为追踪声音信号。该处理以预定时间间隔被顺序地执行。因此,如果具有最高声级的外接单元声音信号改变,换句话说,如果具有最高功率的外接单元声音信号的声源移动,则用作追踪声音信号的外接单元声音信号根据该改变和移动而改变。结果,可以基于每个外接单元的外接单元声音信号追踪声源,并且输出其中来自声源的声音已被最有效地拾取的追踪声音信号。
通过上述结构和处理,通过外接单元10A至10E,使用麦克风中的声音拾取信号,执行第一阶段声源追踪,并且使用主机装置1中的各个外接单元10A至10E的外接单元声音信号,执行第二阶段声源追踪。结果,可以实现使用多个外接单元10A至10E的多个麦克风MICa至MICm的声源追踪。因此,通过适当地设置外接单元10A和10E的数量和布置图案,可以可靠地执行声源追踪,而不受声音拾取范围的大小和诸如扬声器的声源的位置的影响。因此,可以以高质量拾取来自声源的声音,而不管声源的位置如何。
而且,不管安装在外接单元中的麦克风的数量如何,由外接单元10A至10E中的每个发送的声音信号的数量都是一个。因此,与所有麦克风的声音拾取信号均被发送至主机装置的情况相比,可以减少通信数据的量。例如,在安装在每个外接单元中的麦克风的数量都是m的情况下,与所有声音拾取信号都被发送至主机装置的情况相比,从每个外接单元发送至主机装置的声音数据的数量是1/m。
通过根据本实施例的上述结构和处理,在保持与在所有声音拾取信号均被发送至主机装置的情况下一样的声源追踪准确度的同时,可以减少系统的通信负载。结果,可以执行更实时的声源追踪。
图18是用于根据本发明的实施例的外接单元的声源追踪处理的流程图。虽然以下描述由单个外接单元执行的处理流,但是多个外接单元执行相同流处理。另外,由于以上描述了处理的详细内容,在以下说明中省略详细说明。
外接单元使用每个麦克风拾取声音,并且生成声音拾取信号(在S101)。外接单元检测每个麦克风的声音拾取信号的声级(在S102)。外接单元检测具有最高功率的声音拾取信号,并且生成具有最高功率的声音拾取信号的声级信息(在S103)。
外接单元确定用于每个声音拾取信号的增益系数(在S104)。更具体地,外接单元将具有最高功率的声音拾取信号的增益设置为“1”,并且将其他声音拾取信号的增益设置为“0”。
外接单元利用所确定的增益系数放大每个声音拾取信号(在S105)。外接单元合成放大后声音拾取信号,并且生成外接单元声音信号(在S106)。
外接单元对外接单元声音信号进行AGC-处理(在S107),生成包含AGC-处理后的外接单元声音信号和声级信息的外接单元数据,并且将该信号和信息输出到主机装置(在S108)。
图19是用于根据本发明的实施例的主机装置的声源追踪处理的流程图。而且,由于以上描述了处理的详细内容,在以下说明中省略详细说明。
主机装置1从每个外接单元接收外接单元数据,并且获得外接单元声音信号和声级信息(在S201)。主机装置1比较来自各个外接单元的声级信息,并且检测具有最高声级的外接单元声音信号(在S202)。
主机装置1确定用于每个外接单元声音信号的增益系数(在S203)。更具体地,主机装置1将具有最高声级的外接单元声音信号的增益设置为“1”,并且将其他外接单元声音信号的增益设置为“0”。
主机装置1通过所确定的增益系数,放大每个外接单元声音信号(在S204)。主机装置1合成放大后外接单元声音信号,并且生成追踪声音信号(在S205)。
在上述说明中,在具有最高功率的声音拾取信号的切换定时,将具有最高功率的先前声音拾取信号的增益系数从“1”设置为“0”,并且将具有最高功率的新声音拾取信号的增益系数从“0”切换至“1”。然而,这些增益系数可以以更详细的步进方式改变。例如,具有最高功率的先前声音拾取信号的增益系数从“1”逐步降低到“0”,并且具有最高功率的新声音拾取信号的增益系数从“0”逐步增加到“1”。换句话说,交叉衰落(cross-fade)处理可以被执行用于从具有最高功率的先前声音拾取信号切换至具有最高功率的新声音拾取信号。此时,将这些增益系数的总和设置为“1”。
另外,这种交叉衰落处理可以不仅应用至每个外接单元中执行的声音拾取信号的合成,还应用至在主机装置1中执行的外接单元声音信号的合成。
而且,在上述说明中,虽然描述了AGC被提供用于外接单元10A至10E中的每个的示例,但是AGC可以被提供用于主机装置1。在该情况下,主机装置1的通信I/F11可以仅被用于执行AGC的功能。
如图20的流程图中所示,主机装置1可以从扬声器102朝向每个外接单元发射测试声波,以允许每个外接单元判断测试声波的声级。
首先,当主机装置1检测外接单元的启动状态时(在S51),主机装置1从非易失性存储器14读取声级判断程序(在S52),并且经由通信I/F11将该程序发送至各个外接单元(在S53)。此时,主机装置1的CPU12通过将声级判断程序划分为固定单位位数据并且通过按照被各个外接单元接收的顺序布置单位位数据,来产生串行数据,并且将串行数据发送至外接单元。
每个外接单元都接收从主机装置1发送的声级判断程序(在S71)。声级判断程序被临时存储在易失性存储器23A中(在S72)。此时,每个外接单元都从串行数据中提取将由该外接单元接收的单位位数据,接收并且临时存储所提取的单位位数据。然后,每个外接单元都组合临时存储的单位位数据,并且执行组合的声级判断程序(在S73)。结果,声音信号处理部24实现图15中所示的结构。然而,声级判断程序仅被用于声级判断,而不要求其生成并且发送外接单元声音信号Sm10A。因此,包括放大器11a至11m、系数确定部120、合成部130和AGC140的结构不是必须的。
接下来,在从声级判断程序的发送开始经过了预定时间之后,主机装置1发射测试声波(在S54)。每个外接单元的系数确定部220都用作声级检测器,并且判断被输入到多个麦克风MICa至MICm中的每个的测试声波的声级(在S74)。系数确定部220将用作判断的结果的声级信息(声级数据)发送至主机装置1(在S75)。可以发送多个麦克风MICa至MICm中的每个的声级数据,或者可以仅发送在每个外接单元中指示最高声级的声级数据。声级数据被划分为固定单位位数据,并且被发送至连接为较高阶单元的外接单元,由此各个外接单元协作以产生用于声级判断的串行数据。
接下来,主机装置1从每个外接单元接收声级数据(在S55)。基于所接收的声级数据,主机装置1选择将被发送至各个外接单元的声音信号处理程序,并且从非易失性存储器14读取这些程序(在S56)。例如,主机装置1判断出具有高测试声波声级的外接单元具有高回声声级,从而选择回声消除器程序。而且,主机装置1判断出具有低测试声波声级的外接单元具有低回声声级,从而选择噪声消除器程序。然后,主机装置1读取该声音信号处理程序并且将该声音信号处理程序发送至各个外接单元(S57)。由于随后处理与图11的流程图中所示的相同,省略其说明。
主机装置1可以基于所接收的声级数据,改变回声消除器程序中的每个外接单元的滤波器系数的数量,并且确定用于改变每个外接单元的滤波器系数的数量的改变参数。例如,在具有高测试声波声级的外接单元中增加抽头的数量,而在具有低测试声波声级的外接单元中减少抽头的数量。在该情况下,主机装置1通过将改变参数划分为固定单位位数据,并且通过按照被各个外接单元接收的顺序布置单位位数据,来产生串行数据,并且将串行数据发送至各个外接单元。
而且,可以采用其中每个外接单元的多个麦克风MICa至MICm中的每个都具有回声消除器的模式。在该情况下,每个外接单元的系数确定部220都发送多个麦克风MICa至MICm中的每个的声级数据。
而且,每个外接单元中的麦克风的识别信息都可以包含在上述声级信息IFo10A至IFo10E中。
在该情况下,如图21中所示,当外接单元检测出具有最高功率的声音拾取信号并且生成具有最高功率的声音拾取信号的声级信息时(在S801),外接单元发送包含检测到最高功率的麦克风的识别信息的声级信息(在S802)。
然后,主机装置1从各个外接单元接收声级信息(在S901)。在选择具有最高声级的声级信息时,基于包含在所选声级信息中的麦克风的识别信息,指定麦克风,由此指定正被使用的回声消除器(在S902)。主机装置1向使用指定回声消除器的外接单元请求发送关于回声消除器的各信号(在S903)。
接下来,一旦接收到发送请求(在S803),外接单元将包括来自指定回声消除器的伪衰退声音信号、声音拾取信号NE1(在先前阶段通过回声消除器去除回声分量之前的声音拾取信号)和声音拾取信号NE1’(在先前阶段通过回声消除器去除回声分量之后的声音拾取信号)的各信号发送至主机装置1(在S804)。
主机装置1接收各信号(在S904)并且将所接收的各信号输入到回声抑制器(在S905)。结果,在回声抑制器的回声生成部125中设置对应于特定回声消除器的学习进步度的系数,由此可以生成合适的残留回声分量。
如图22中所示,可以使用在声音信号处理部24A侧提供进步度计算部124的模式。在该情况下,在图21的S903,主机装置1向使用指定回声消除器的外接单元,请求发送根据学习进步度改变的系数。在S804,外接单元读取由进步度计算部124计算的系数,并且将该系数发送至主机装置1。回声生成部125根据所接收的系数和伪衰退声音信号,生成残留回声分量。
图23A和图23B是示出关于主机装置和外接单元的布置的修改示例的视图。虽然图23A中示出的连接模式与图12中所示的相同,但是在本示例中,外接单元10C离主机装置1最远设置,并且外接单元10E最接近主机装置1设置。换句话说,将外接单元10C连接至外接单元10D的电缆361弯曲,使得外接单元10D和10E更接近主机装置1设置。
另一方面,在图23B中所示的示例中,外接单元10C经由电缆331连接至主机装置1。在该情况下,在外接单元10C处,从主机装置1发送的数据被分支并且被发送至外接单元10B和外接单元10D。另外,外接单元10C将从外接单元10B发送的数据和从外接单元10D发送的数据一起发送至主机装置1。甚至在该情况下,主机装置还连接至串联连接的多个外接单元中的一个。
虽然针对特定优选实施例来示出和描述本发明,但是可以基于本发明的教导作出多种改变和修改,这对于本领域技术人员来说是显而易见的。明显地,这样的改变和修改在由所附权利要求限定的本发明的精神、范围和目的内。
本申请基于在2012年11月12日提交的日本专利申请No.2012-248158、2012年11月13日提交的日本专利申请No.2012-249607和在2012年11月13日提交的日本专利申请No.2012-249609,其内容通过引用结合于此。
Claims (7)
1.一种信号处理系统,包括:
多个麦克风单元,被配置成串联连接,每个所述麦克风单元都具有用于拾取声音的麦克风、临时存储器、以及用于处理由所述麦克风拾取的声音的处理部;
主机装置,被配置成连接至所述多个麦克风单元之一,所述主机装置具有存储用于所述多个麦克风单元的声音信号处理程序的非易失性存储器,并且所述主机装置将从所述非易失性存储器读取的所述声音信号处理程序发送至每个麦克风单元,并且
每个麦克风单元将所述声音信号处理程序临时存储在所述临时存储器中,
其中,所述处理部执行对应于临时存储在所述临时存储器中的所述声音信号处理程序的处理,并且将处理后的声音发送至所述主机装置。
2.根据权利要求1所述的信号处理系统,其中,所述主机装置通过将所述声音信号处理程序划分为固定单位位数据并且按照分别被各麦克风单元接收的顺序布置所述单位位数据,来产生串行数据,并且将所述串行数据发送至每个麦克风单元;
其中,每个麦克风单元从所述串行数据提取将被该麦克风单元接收的单位位数据,并且接收并临时存储所提取的单位位数据;以及
其中,所述处理部执行与通过组合所述单位位数据获得的所述声音信号处理程序对应的处理。
3.根据权利要求1或2所述的信号处理系统,其中,每个麦克风单元将处理后的声音划分为固定单位位数据,并且将所述单位位数据发送至被连接为较高阶单元的麦克风单元,并且所述多个麦克风单元分别协作以产生将被发送的串行数据,并且将所述串行数据发送至所述主机装置,所述较高阶单元为串联连接的所述多个麦克风单元中位于上游侧的麦克风单元。
4.根据权利要求1或2所述的信号处理系统,每个麦克风单元都包括具有不同声音拾取方向的多个麦克风和一个声级检测器;
其中,所述主机装置具有扬声器;
其中,所述扬声器朝向每个麦克风单元发射测试声波;以及
其中,每个麦克风单元都判断被输入到每个麦克风的所述测试声波的声级,将用作所述判断的结果的声级数据划分为固定单位位数据,并且将所述单位位数据发送至连接为较高阶单元的麦克风单元,由此所述多个麦克风单元分别协作以产生用于声级判断的串行数据,所述较高阶单元为串联连接的所述多个麦克风单元中位于上游侧的麦克风单元。
5.根据权利要求1或2所述的信号处理系统,其中,所述声音信号处理程序由用于实现回声消除器的回声消除器程序形成,其滤波器系数被更新,所述回声消除器程序具有用于确定所述滤波器系数的数量的滤波器系数设定部;以及
其中,所述主机装置基于从每个麦克风单元接收的声级数据,来改变每个麦克风单元的所述滤波器系数的数量,为每个麦克风单元确定用于改变所述滤波器系数的数量的改变参数,通过将所述改变参数划分为固定单位位数据并且通过按照被所述多个麦克风单元分别接收的顺序来排列所述单位位数据,来产生串行数据,并且将用于所述改变参数的所述串行数据分别发送至所述多个麦克风单元。
6.根据权利要求5所述的信号处理系统,其中,所述声音信号处理程序是所述回声消除器程序或用于去除噪声分量的噪声消除器程序;以及
其中,所述主机装置基于所述声级数据,将所述回声消除器程序或所述噪声消除器程序确定为将被发送至每个麦克风单元的程序。
7.一种用于信号处理系统的信号处理方法,所述信号处理系统具有串联连接的多个麦克风单元和连接到所述多个麦克风单元之一的一个主机装置,每个麦克风单元都具有用于拾取声音的麦克风、临时存储器、以及用于处理由所述麦克风拾取的声音的处理部,并且所述主机装置具有存储用于所述多个麦克风单元的声音信号处理程序的非易失性存储器,所述信号处理方法包括:
当检测到所述主机装置的启动状态时,通过所述主机装置从所述非易失性存储器读取所述声音信号处理程序,并且将所述声音信号处理程序发送至每个麦克风单元;
将所述声音信号处理程序临时存储在每个麦克风单元的所述临时存储器中;以及
执行与被临时存储在所述临时存储器中的所述声音信号处理程序相对应的处理,并且将处理后的声音从每个麦克风单元发送至所述主机装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710447232.5A CN107172538B (zh) | 2012-11-12 | 2013-11-12 | 信号处理系统和信号处理方法 |
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012-248158 | 2012-11-12 | ||
JP2012248158 | 2012-11-12 | ||
JP2012249609 | 2012-11-13 | ||
JP2012-249609 | 2012-11-13 | ||
JP2012249607 | 2012-11-13 | ||
JP2012-249607 | 2012-11-13 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710447232.5A Division CN107172538B (zh) | 2012-11-12 | 2013-11-12 | 信号处理系统和信号处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103813239A CN103813239A (zh) | 2014-05-21 |
CN103813239B true CN103813239B (zh) | 2017-07-11 |
Family
ID=50681709
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310560237.0A Active CN103813239B (zh) | 2012-11-12 | 2013-11-12 | 信号处理系统和信号处理方法 |
CN201710447232.5A Active CN107172538B (zh) | 2012-11-12 | 2013-11-12 | 信号处理系统和信号处理方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710447232.5A Active CN107172538B (zh) | 2012-11-12 | 2013-11-12 | 信号处理系统和信号处理方法 |
Country Status (8)
Country | Link |
---|---|
US (3) | US9497542B2 (zh) |
EP (3) | EP3917161B1 (zh) |
JP (5) | JP6090120B2 (zh) |
KR (2) | KR101706133B1 (zh) |
CN (2) | CN103813239B (zh) |
AU (1) | AU2013342412B2 (zh) |
CA (1) | CA2832848A1 (zh) |
WO (1) | WO2014073704A1 (zh) |
Families Citing this family (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9699550B2 (en) | 2014-11-12 | 2017-07-04 | Qualcomm Incorporated | Reduced microphone power-up latency |
US9407989B1 (en) | 2015-06-30 | 2016-08-02 | Arthur Woodrow | Closed audio circuit |
JP6443554B2 (ja) * | 2015-08-24 | 2018-12-26 | ヤマハ株式会社 | 収音装置および収音方法 |
US10014137B2 (en) | 2015-10-03 | 2018-07-03 | At&T Intellectual Property I, L.P. | Acoustical electrical switch |
US9704489B2 (en) * | 2015-11-20 | 2017-07-11 | At&T Intellectual Property I, L.P. | Portable acoustical unit for voice recognition |
US10460744B2 (en) * | 2016-02-04 | 2019-10-29 | Xinxiao Zeng | Methods, systems, and media for voice communication |
DE102016113831A1 (de) * | 2016-07-27 | 2018-02-01 | Neutrik Ag | Verkabelungsanordnung |
US10387108B2 (en) * | 2016-09-12 | 2019-08-20 | Nureva, Inc. | Method, apparatus and computer-readable media utilizing positional information to derive AGC output parameters |
US10362412B2 (en) * | 2016-12-22 | 2019-07-23 | Oticon A/S | Hearing device comprising a dynamic compressive amplification system and a method of operating a hearing device |
CN106782584B (zh) * | 2016-12-28 | 2023-11-07 | 北京地平线信息技术有限公司 | 音频信号处理设备、方法和电子设备 |
KR101898798B1 (ko) * | 2017-01-10 | 2018-09-13 | 순천향대학교 산학협력단 | 다이버시티 기술을 적용한 주차보조용 초음파센서 시스템 |
CN106937009B (zh) * | 2017-01-18 | 2020-02-07 | 苏州科达科技股份有限公司 | 一种级联回声抵消系统及其控制方法及装置 |
KR102377356B1 (ko) * | 2017-01-27 | 2022-03-21 | 슈어 애쿼지션 홀딩스, 인코포레이티드 | 어레이 마이크로폰 모듈 및 시스템 |
JP7122756B2 (ja) * | 2017-06-12 | 2022-08-22 | 株式会社オーディオテクニカ | 音声信号処理装置と音声信号処理方法と音声信号処理プログラム |
JP2019047148A (ja) * | 2017-08-29 | 2019-03-22 | 沖電気工業株式会社 | 多重化装置、多重化方法およびプログラム |
JP6983583B2 (ja) * | 2017-08-30 | 2021-12-17 | キヤノン株式会社 | 音響処理装置、音響処理システム、音響処理方法、及びプログラム |
US11277518B2 (en) * | 2017-09-29 | 2022-03-15 | Dolby Laboratories Licensing Corporation | Howl detection in conference systems |
CN107818793A (zh) * | 2017-11-07 | 2018-03-20 | 北京云知声信息技术有限公司 | 一种可减少无用语音识别的语音采集处理方法及装置 |
CN107750038B (zh) * | 2017-11-09 | 2020-11-10 | 广州视源电子科技股份有限公司 | 音量调节方法、装置、设备及存储介质 |
CN107898457B (zh) * | 2017-12-05 | 2020-09-22 | 江苏易格生物科技有限公司 | 一种团体无线脑电采集装置间时钟同步的方法 |
WO2019188388A1 (ja) * | 2018-03-29 | 2019-10-03 | ソニー株式会社 | 音声処理装置、音声処理方法、及びプログラム |
CN110611537A (zh) * | 2018-06-15 | 2019-12-24 | 杜旭昇 | 利用声波传送数据的广播系统 |
CN112585993B (zh) * | 2018-07-20 | 2022-11-08 | 索尼互动娱乐股份有限公司 | 声音信号处理系统和声音信号处理装置 |
CN111114475A (zh) * | 2018-10-30 | 2020-05-08 | 北京轩辕联科技有限公司 | 用于车辆的mic切换装置及方法 |
JP7373947B2 (ja) * | 2018-12-12 | 2023-11-06 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 音響エコーキャンセル装置、音響エコーキャンセル方法及び音響エコーキャンセルプログラム |
CN109803059A (zh) * | 2018-12-17 | 2019-05-24 | 百度在线网络技术(北京)有限公司 | 音频处理方法和装置 |
KR102602942B1 (ko) * | 2019-01-07 | 2023-11-16 | 삼성전자 주식회사 | 오디오 정보 처리 장치의 위치에 기반하여 오디오 처리 알고리즘을 결정하는 전자 장치 및 방법 |
US11190871B2 (en) | 2019-01-29 | 2021-11-30 | Nureva, Inc. | Method, apparatus and computer-readable media to create audio focus regions dissociated from the microphone system for the purpose of optimizing audio processing at precise spatial locations in a 3D space |
CN110035372B (zh) * | 2019-04-24 | 2021-01-26 | 广州视源电子科技股份有限公司 | 扩声系统的输出控制方法、装置、扩声系统及计算机设备 |
JP7484105B2 (ja) | 2019-08-26 | 2024-05-16 | 大日本印刷株式会社 | チャック付き紙容器、その製造方法 |
CN110677777B (zh) * | 2019-09-27 | 2020-12-08 | 深圳市航顺芯片技术研发有限公司 | 一种音频数据处理方法、终端及存储介质 |
CN110830749A (zh) * | 2019-12-27 | 2020-02-21 | 深圳市创维群欣安防科技股份有限公司 | 一种视频通话回音消除电路、方法及会议平板 |
JP7365642B2 (ja) * | 2020-03-18 | 2023-10-20 | パナソニックIpマネジメント株式会社 | 音声処理システム、音声処理装置及び音声処理方法 |
CN111741404B (zh) * | 2020-07-24 | 2021-01-22 | 支付宝(杭州)信息技术有限公司 | 拾音设备、拾音系统和声音信号采集的方法 |
CN113068103B (zh) * | 2021-02-07 | 2022-09-06 | 厦门亿联网络技术股份有限公司 | 一种音频配件级联系统 |
EP4231663A4 (en) | 2021-03-12 | 2024-05-08 | Samsung Electronics Co., Ltd. | ELECTRONIC AUDIO INPUT DEVICE AND OPERATING METHOD THEREFOR |
CN114257921A (zh) * | 2021-04-06 | 2022-03-29 | 北京安声科技有限公司 | 拾音方法及装置、计算机可读存储介质及耳机 |
CN114257908A (zh) * | 2021-04-06 | 2022-03-29 | 北京安声科技有限公司 | 耳机的通话降噪方法及装置、计算机可读存储介质及耳机 |
CN113411719B (zh) * | 2021-06-17 | 2022-03-04 | 杭州海康威视数字技术股份有限公司 | 一种麦克风级联系统、麦克风及终端 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1482763A2 (en) * | 2003-05-26 | 2004-12-01 | Matsushita Electric Industrial Co., Ltd. | Sound field measurement device |
CN1777217A (zh) * | 2004-11-15 | 2006-05-24 | 索尼株式会社 | 麦克风系统和麦克风装置 |
CN1822709A (zh) * | 2006-03-24 | 2006-08-23 | 北京中星微电子有限公司 | 一种麦克风回声消除系统 |
Family Cites Families (65)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS596394U (ja) | 1982-07-06 | 1984-01-17 | 株式会社東芝 | 会議用マイクロホン装置 |
JPH0657031B2 (ja) | 1986-04-18 | 1994-07-27 | 日本電信電話株式会社 | 会議通話装置 |
EP0310456A3 (en) | 1987-10-01 | 1990-12-05 | Sony Magnescale, Inc. | Improvements in audio mixing |
JPH0262606A (ja) * | 1988-08-29 | 1990-03-02 | Fanuc Ltd | Cncの診断方式 |
JP2562703B2 (ja) | 1989-12-27 | 1996-12-11 | 株式会社小松製作所 | 直列制御装置のデータ入力制御装置 |
JPH04291873A (ja) | 1991-03-20 | 1992-10-15 | Fujitsu Ltd | 電話会議システム |
US5664021A (en) * | 1993-10-05 | 1997-09-02 | Picturetel Corporation | Microphone system for teleconferencing system |
JPH0983988A (ja) | 1995-09-11 | 1997-03-28 | Nec Eng Ltd | テレビ会議システム |
JPH10276415A (ja) | 1997-01-28 | 1998-10-13 | Casio Comput Co Ltd | テレビ電話装置 |
US5966639A (en) * | 1997-04-04 | 1999-10-12 | Etymotic Research, Inc. | System and method for enhancing speech intelligibility utilizing wireless communication |
JP2000115373A (ja) * | 1998-10-05 | 2000-04-21 | Nippon Telegr & Teleph Corp <Ntt> | 電話装置 |
US6785394B1 (en) * | 2000-06-20 | 2004-08-31 | Gn Resound A/S | Time controlled hearing aid |
JP2002043985A (ja) * | 2000-07-25 | 2002-02-08 | Matsushita Electric Ind Co Ltd | 音響エコーキャンセラー装置 |
JP3075809U (ja) * | 2000-08-23 | 2001-03-06 | 新世代株式会社 | カラオケ用マイク |
JP4580545B2 (ja) | 2000-12-20 | 2010-11-17 | 株式会社オーディオテクニカ | 赤外線双方向通信システム |
US20030120367A1 (en) * | 2001-12-21 | 2003-06-26 | Chang Matthew C.T. | System and method of monitoring audio signals |
JP2004128707A (ja) * | 2002-08-02 | 2004-04-22 | Sony Corp | 指向性を備えた音声受信装置およびその方法 |
JP4003653B2 (ja) | 2003-02-07 | 2007-11-07 | 松下電工株式会社 | インターホンシステム |
US7716044B2 (en) | 2003-02-07 | 2010-05-11 | Nippon Telegraph And Telephone Corporation | Sound collecting method and sound collecting device |
US7496205B2 (en) * | 2003-12-09 | 2009-02-24 | Phonak Ag | Method for adjusting a hearing device as well as an apparatus to perform the method |
KR100662187B1 (ko) | 2004-03-15 | 2006-12-27 | 오므론 가부시키가이샤 | 센서 컨트롤러 |
JP2006048632A (ja) * | 2004-03-15 | 2006-02-16 | Omron Corp | センサコントローラ |
JP3972921B2 (ja) | 2004-05-11 | 2007-09-05 | ソニー株式会社 | 音声集音装置とエコーキャンセル処理方法 |
CN1780495A (zh) * | 2004-10-25 | 2006-05-31 | 宝利通公司 | 顶蓬麦克风组件 |
JPWO2006054778A1 (ja) | 2004-11-17 | 2008-06-05 | 日本電気株式会社 | 通信システム、通信端末装置、サーバ装置及びそれらに用いる通信方法並びにそのプログラム |
JP4258472B2 (ja) * | 2005-01-27 | 2009-04-30 | ヤマハ株式会社 | 拡声システム |
US7995768B2 (en) | 2005-01-27 | 2011-08-09 | Yamaha Corporation | Sound reinforcement system |
US8335311B2 (en) | 2005-07-28 | 2012-12-18 | Kabushiki Kaisha Toshiba | Communication apparatus capable of echo cancellation |
JP4818014B2 (ja) | 2005-07-28 | 2011-11-16 | 株式会社東芝 | 信号処理装置 |
US8577048B2 (en) * | 2005-09-02 | 2013-11-05 | Harman International Industries, Incorporated | Self-calibrating loudspeaker system |
JP4701931B2 (ja) * | 2005-09-02 | 2011-06-15 | 日本電気株式会社 | 信号処理の方法及び装置並びにコンピュータプログラム |
JP2007174011A (ja) | 2005-12-20 | 2007-07-05 | Yamaha Corp | 収音装置 |
JP4929740B2 (ja) * | 2006-01-31 | 2012-05-09 | ヤマハ株式会社 | 音声会議装置 |
US20070195979A1 (en) * | 2006-02-17 | 2007-08-23 | Zounds, Inc. | Method for testing using hearing aid |
JP4844170B2 (ja) | 2006-03-01 | 2011-12-28 | ヤマハ株式会社 | 電子装置 |
US8381103B2 (en) | 2006-03-01 | 2013-02-19 | Yamaha Corporation | Electronic device |
JP4816221B2 (ja) * | 2006-04-21 | 2011-11-16 | ヤマハ株式会社 | 収音装置および音声会議装置 |
JP2007334809A (ja) * | 2006-06-19 | 2007-12-27 | Mitsubishi Electric Corp | モジュール型電子機器 |
JP4872636B2 (ja) | 2006-12-07 | 2012-02-08 | ヤマハ株式会社 | 音声会議装置、音声会議システムおよび放収音ユニット |
JP5012387B2 (ja) * | 2007-10-05 | 2012-08-29 | ヤマハ株式会社 | 音声処理システム |
JP2009188858A (ja) * | 2008-02-08 | 2009-08-20 | National Institute Of Information & Communication Technology | 音声出力装置、音声出力方法、及びプログラム |
JP4508249B2 (ja) * | 2008-03-04 | 2010-07-21 | ソニー株式会社 | 受信装置および受信方法 |
WO2009007468A2 (en) * | 2008-09-26 | 2009-01-15 | Phonak Ag | Wireless updating of hearing devices |
JP5251731B2 (ja) | 2009-05-29 | 2013-07-31 | ヤマハ株式会社 | ミキシングコンソールおよびプログラム |
US8204198B2 (en) * | 2009-06-19 | 2012-06-19 | Magor Communications Corporation | Method and apparatus for selecting an audio stream |
US20110013786A1 (en) | 2009-06-19 | 2011-01-20 | PreSonus Audio Electronics Inc. | Multichannel mixer having multipurpose controls and meters |
JP5452158B2 (ja) * | 2009-10-07 | 2014-03-26 | 株式会社日立製作所 | 音響監視システム、及び音声集音システム |
US8792661B2 (en) * | 2010-01-20 | 2014-07-29 | Audiotoniq, Inc. | Hearing aids, computing devices, and methods for hearing aid profile update |
US8615091B2 (en) * | 2010-09-23 | 2013-12-24 | Bose Corporation | System for accomplishing bi-directional audio data and control communications |
EP2442587A1 (en) * | 2010-10-14 | 2012-04-18 | Harman Becker Automotive Systems GmbH | Microphone link system |
US8670853B2 (en) * | 2010-11-19 | 2014-03-11 | Fortemedia, Inc. | Analog-to-digital converter, sound processing device, and analog-to-digital conversion method |
JP2012129800A (ja) * | 2010-12-15 | 2012-07-05 | Sony Corp | 情報理装置および方法、プログラム、並びに情報処理システム |
JP2012234150A (ja) | 2011-04-18 | 2012-11-29 | Sony Corp | 音信号処理装置、および音信号処理方法、並びにプログラム |
CN102324237B (zh) * | 2011-05-30 | 2013-01-02 | 深圳市华新微声学技术有限公司 | 麦克风阵列语音波束形成方法、语音信号处理装置及系统 |
JP5789130B2 (ja) | 2011-05-31 | 2015-10-07 | 株式会社コナミデジタルエンタテインメント | 管理装置 |
JP2012249609A (ja) | 2011-06-06 | 2012-12-20 | Kahuka 21:Kk | 害獣類侵入防止具 |
JP5701692B2 (ja) | 2011-06-06 | 2015-04-15 | 株式会社前川製作所 | 食鳥屠体の首皮取り装置及び方法 |
JP2013102370A (ja) * | 2011-11-09 | 2013-05-23 | Sony Corp | ヘッドホン装置、端末装置、情報送信方法、プログラム、ヘッドホンシステム |
JP2013110585A (ja) | 2011-11-21 | 2013-06-06 | Yamaha Corp | 音響機器 |
WO2013079993A1 (en) * | 2011-11-30 | 2013-06-06 | Nokia Corporation | Signal processing for audio scene rendering |
US20130177188A1 (en) * | 2012-01-06 | 2013-07-11 | Audiotoniq, Inc. | System and method for remote hearing aid adjustment and hearing testing by a hearing health professional |
US9204174B2 (en) * | 2012-06-25 | 2015-12-01 | Sonos, Inc. | Collecting and providing local playback system information |
US20140126740A1 (en) * | 2012-11-05 | 2014-05-08 | Joel Charles | Wireless Earpiece Device and Recording System |
US9391580B2 (en) * | 2012-12-31 | 2016-07-12 | Cellco Paternership | Ambient audio injection |
US9356567B2 (en) * | 2013-03-08 | 2016-05-31 | Invensense, Inc. | Integrated audio amplification circuit with multi-functional external terminals |
-
2013
- 2013-11-12 JP JP2013233692A patent/JP6090120B2/ja active Active
- 2013-11-12 US US14/077,496 patent/US9497542B2/en active Active
- 2013-11-12 KR KR1020157001712A patent/KR101706133B1/ko active IP Right Grant
- 2013-11-12 JP JP2013233693A patent/JP2014116931A/ja active Pending
- 2013-11-12 JP JP2013233694A patent/JP6090121B2/ja active Active
- 2013-11-12 EP EP21185333.8A patent/EP3917161B1/en active Active
- 2013-11-12 EP EP19177298.7A patent/EP3557880B1/en active Active
- 2013-11-12 CN CN201310560237.0A patent/CN103813239B/zh active Active
- 2013-11-12 EP EP13853867.3A patent/EP2882202B1/en active Active
- 2013-11-12 AU AU2013342412A patent/AU2013342412B2/en active Active
- 2013-11-12 CN CN201710447232.5A patent/CN107172538B/zh active Active
- 2013-11-12 KR KR1020177002958A patent/KR20170017000A/ko not_active Application Discontinuation
- 2013-11-12 CA CA2832848A patent/CA2832848A1/en not_active Abandoned
- 2013-11-12 WO PCT/JP2013/080587 patent/WO2014073704A1/ja active Application Filing
-
2016
- 2016-09-13 US US15/263,860 patent/US10250974B2/en active Active
-
2017
- 2017-02-09 JP JP2017021872A patent/JP6299895B2/ja active Active
- 2017-02-09 JP JP2017021878A patent/JP6330936B2/ja active Active
-
2019
- 2019-02-05 US US16/267,445 patent/US11190872B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1482763A2 (en) * | 2003-05-26 | 2004-12-01 | Matsushita Electric Industrial Co., Ltd. | Sound field measurement device |
CN1777217A (zh) * | 2004-11-15 | 2006-05-24 | 索尼株式会社 | 麦克风系统和麦克风装置 |
CN1822709A (zh) * | 2006-03-24 | 2006-08-23 | 北京中星微电子有限公司 | 一种麦克风回声消除系统 |
Also Published As
Publication number | Publication date |
---|---|
AU2013342412B2 (en) | 2015-12-10 |
CA2832848A1 (en) | 2014-05-12 |
KR101706133B1 (ko) | 2017-02-13 |
JP2017108441A (ja) | 2017-06-15 |
KR20150022013A (ko) | 2015-03-03 |
US9497542B2 (en) | 2016-11-15 |
JP2014116930A (ja) | 2014-06-26 |
EP2882202A4 (en) | 2016-03-16 |
EP3917161A1 (en) | 2021-12-01 |
JP6330936B2 (ja) | 2018-05-30 |
EP2882202A1 (en) | 2015-06-10 |
US10250974B2 (en) | 2019-04-02 |
JP6090120B2 (ja) | 2017-03-08 |
JP2014116932A (ja) | 2014-06-26 |
JP2014116931A (ja) | 2014-06-26 |
US20190174227A1 (en) | 2019-06-06 |
EP2882202B1 (en) | 2019-07-17 |
EP3917161B1 (en) | 2024-01-31 |
US20160381457A1 (en) | 2016-12-29 |
CN107172538B (zh) | 2020-09-04 |
CN107172538A (zh) | 2017-09-15 |
EP3557880A1 (en) | 2019-10-23 |
US11190872B2 (en) | 2021-11-30 |
EP3557880B1 (en) | 2021-09-22 |
JP6299895B2 (ja) | 2018-03-28 |
AU2013342412A1 (en) | 2015-01-22 |
JP2017139767A (ja) | 2017-08-10 |
KR20170017000A (ko) | 2017-02-14 |
US20140133666A1 (en) | 2014-05-15 |
CN103813239A (zh) | 2014-05-21 |
WO2014073704A1 (ja) | 2014-05-15 |
JP6090121B2 (ja) | 2017-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103813239B (zh) | 信号处理系统和信号处理方法 | |
CN103124165B (zh) | 自动增益控制 | |
US8233352B2 (en) | Audio source localization system and method | |
CN101518037A (zh) | 音频会议装置及音频会议系统 | |
US9966086B1 (en) | Signal rate synchronization for remote acoustic echo cancellation | |
CN103037290B (zh) | 音频处理装置以及音频处理方法 | |
CN104604254A (zh) | 声音处理装置、方法和程序 | |
CN107708048A (zh) | 啸叫检测方法和装置、存储介质及电子装置 | |
CN109545237B (zh) | 一种计算机可读存储介质和应用该介质的语音交互音箱 | |
CN109348392B (zh) | 一种实现麦克风阵列硬件状态检测的方法 | |
CN111142066A (zh) | 波达方向估计方法、服务器以及计算机可读存储介质 | |
CN112951261A (zh) | 声源定位方法、装置及语音设备 | |
CN112151051A (zh) | 音频数据的处理方法和装置及存储介质 | |
CN103391490A (zh) | 音频处理装置、音频处理方法以及程序 | |
CN103888861B (zh) | 麦克风阵列指向性调节方法、装置及电子设备 | |
WO2023051622A1 (zh) | 提升远场语音交互性能的方法和远场语音交互系统 | |
CN116312435B (zh) | 一种点唱机音频处理方法、装置、计算机设备及存储介质 | |
CN114630256A (zh) | 耳返延时测试方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Tian Zhongliang Inventor after: Kiichiro Sato Inventor after: Mr. Oizumi Inventor after: Inoue Takayuki Inventor before: Tian Zhongliang |