CN113921007A - 提升远场语音交互性能的方法和远场语音交互系统 - Google Patents
提升远场语音交互性能的方法和远场语音交互系统 Download PDFInfo
- Publication number
- CN113921007A CN113921007A CN202111173645.1A CN202111173645A CN113921007A CN 113921007 A CN113921007 A CN 113921007A CN 202111173645 A CN202111173645 A CN 202111173645A CN 113921007 A CN113921007 A CN 113921007A
- Authority
- CN
- China
- Prior art keywords
- distribution network
- acoustic
- sound wave
- parameters
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 85
- 230000003993 interaction Effects 0.000 title claims abstract description 53
- 238000009826 distribution Methods 0.000 claims abstract description 109
- 238000012545 processing Methods 0.000 claims abstract description 77
- 230000008569 process Effects 0.000 claims abstract description 20
- 238000004364 calculation method Methods 0.000 claims description 53
- 230000000875 corresponding effect Effects 0.000 claims description 20
- 238000004422 calculation algorithm Methods 0.000 claims description 16
- QBPPRVHXOZRESW-UHFFFAOYSA-N 1,4,7,10-tetraazacyclododecane Chemical compound C1CNCCNCCNCCN1 QBPPRVHXOZRESW-UHFFFAOYSA-N 0.000 claims description 8
- 238000004458 analytical method Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 5
- 230000002596 correlated effect Effects 0.000 claims description 5
- 230000003247 decreasing effect Effects 0.000 claims description 5
- 238000003860 storage Methods 0.000 claims description 3
- 238000005520 cutting process Methods 0.000 claims description 2
- 230000006855 networking Effects 0.000 abstract description 6
- 238000005070 sampling Methods 0.000 description 14
- 230000000737 periodic effect Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000011161 development Methods 0.000 description 4
- 238000000060 site-specific infrared dichroism spectroscopy Methods 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 238000012549 training Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 230000008030 elimination Effects 0.000 description 2
- 238000003379 elimination reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000000873 masking effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000013518 transcription Methods 0.000 description 2
- 230000035897 transcription Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- FFGPTBGBLSHEPO-UHFFFAOYSA-N carbamazepine Chemical compound C1=CC2=CC=CC=C2N(C(=O)N)C2=CC=CC=C21 FFGPTBGBLSHEPO-UHFFFAOYSA-N 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000037433 frameshift Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
Abstract
提升远场语音交互性能的方法和远场语音交互系统。该方法包括智能设备在通过声波信号联网的过程中，获取辅助配网设备通过喇叭播放出的声波，并基于该声波，计算智能设备所处空间的声学参数。进一步的，对计算出来的空间声学参数设置一定的裕度，并在该裕度范围内选择多个空间声学参数的数值，再根据空间声学参数的数值更新前端语音处理参数，并计算经过前端语音处理后的声波信号能量值，从而选出最小能量值所对应的空间声学参数作为最终的空间声学参数。将最终的空间声学参数传输至存储在本地或云端的语音识别引擎中，语音识别引擎从多个声学模型中，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
Description
技术领域
本发明主要涉及远场语音交互领域，特别是涉及一种提升远场语音交互性能的方法和远场语音交互系统。
背景技术
随着技术的不断发展，许多智能设备出现在人们的生活和工作中，比如智能音箱、智能汽车等。这些智能设备往往具有远场语音交互的功能，能够在复杂的环境中实现语音助手的功能。但是，由于用户所处的环境是复杂多变的，现有语音交互系统中的核心算法很难在所有的用户场景中均获得优异的性能。
行业内语音交互系统主要分为两种，一种是由前端的语音信号处理模块和后端的语音唤醒和识别模块组成，另一种是端到端的语音识别和唤醒系统。考虑到用户对唤醒时延以及稳定性的要求，唤醒模块一般部署在设备端。但是，由于嵌入式设备的算力有限，特别是相对于云端的算力差距较大，因此设备端的唤醒模块往往对唤醒模型的大小有所限制。
一部分厂商为了获得更好的语音交互性能，在语音识别模块采用一些自适应语音识别的方法，但是这种方法在噪声场景和本机播放场景中的性能仍需改善。
为了改善语音交互系统的效果，在远场语音交互方案设计中如果能够获取一些房间的空间声学参数，那么将大幅提升远场语音交互的性能。例如，在端到端的语音识别系统中进行语音数据集模拟时，可以指定相应的传递函数，或者在声学前端设计中可以获得最优的滤波器长度等。
中国专利CN107452372A提供了一种远场语音识别的训练方法，通过在房间内部转录的方法，从近场语音数据集中抽取一定量的进场语音数据，并采用重录的方式获取远场音频，再从远场音频中提取分段的远场语音特征，将远场语音特征和近场语音特征按照设定的比例进行混叠，最终基于混叠后的语音特征数据训练远场语音识别模型。
该专利通过对训练数据模拟的方式可以获取大量的混有房间噪声和设备混响的远场语音数据，进而训练出识别率较高的远场语音识别模型。这种方法对于提高远场语音识别性能具有一定的作用，但是，在远场语音的数据集模拟的过程中很难具有非常大的覆盖面，而每个房间由于尺寸、墙壁反射系数等的区别其空间声学参数差异较大，因此，这种转录方法不可能覆盖大部分场景。此外，语音识别的神经网络模型泛化能力能否在所有的声学环境中获得优异的结果也缺乏保障和数学解释。
中国专利CN109523999A提供了一种提升远场语音识别的前端处理方法和系统，通过对房间冲激响应信号进行计算，得到早期混响信号与晚期混响信号的分割时间点，将直达声信号和早期混响信号与语音库中干净语音信号在时域上进行卷积，得到时域目标信号；将时域目标信号和时域混合信号中除时域目标信号外的其他信号分别进行计算，得到目标信号能量和其他信号能量，通过目标信号能量和其他信号能量得到理想比值掩蔽；将时域混合信号转换成频域混合信号后，将频域混合信号的幅值和理想比值掩蔽相乘，再使用频域混合信号的相位，得到重构信号。
该专利通过在前端处理的过程中去除晚期混响来提升语音识别率，该方法在语音交互过程中具有一定的作用，但是该方法在高混响场景具有一定的劣势。由于高混响场景下干净的语音信号和带有混响声的语音信号频域相位差异明显，简单的通过增益系数乘上原始信号的幅度，然后乘上原始信号的相位，并不能够完美的恢复出干净的语音。并且，这种方法会带来非线性失真以及音乐噪声，对于依赖语音特征的语音识别模型而言，会产生一定的识别率下降。
针对上述问题，本发明提出一种提升远场语音交互性能的方法，利用智能设备在声波配网阶段发出的音频信号，计算所处空间的空间声学参数，并基于此优化远场语音交互的性能。本发明利用智能设备初始阶段的声波配网获取智能设备所处空间的空间声学参数，通过将空间声学测试与配网过程相结合，便于用户操作。此外，本发明根据空间声学参数，更新设备的声学前端语音处理算法，可以提升前端语音处理的数学建模的准确性。同时，根据空间声学参数更新云端的语音识别引擎，可以提升声学模型训练数据集的匹配度。
发明内容
针对上述问题，本发明的目的在于提供一种提升远场语音交互性能的方案。
在本发明的一方面，提供一种提升远场语音交互性能的方法，其特征在于，包括：循环N次执行以下步骤S1至S6，其中，N为不小于2的自然数：
步骤S1：在配网过程中，接收预定时间长度的配网声波信号；步骤S2：基于前端语音处理参数，对配网声波信号进行前端语音处理；其中，前端语音处理包括回声消除，前端语音处理参数包括回声消除滤波器的长度；步骤S3：计算当前循环内步骤S2中获得的经过前端语音处理的配网声波信号的能量值En；步骤S4：判断当前循环是否为第一次循环，若是，则基于步骤S1中接收的配网声波信号，计算得到初始空间声学参数Pinitial，并转至步骤S5；若否，则直接转至步骤S5；步骤S5：结合预设的上限裕度和下限裕度，确定下一次循环中的空间声学参数Pn+1的数值，使得Pn+1的数值满足(Pinitial-M1)≤Pn+1≤(Pinitial+M2)，其中n为当前循环的序号，M1为预定的下限裕度，M2为预定的上限裕度；步骤S6：利用步骤S5中得到的空间声学参数Pn+1，更新前端语音处理参数，用于下一次循环；在N次循环结束后，转至步骤S7：确定N次循环中获得的配网声波信号能量值中的最小值Emin，并将最小值Emin所对应的循环中的空间声学参数作为最终的空间声学参数。可选地，STA设备根据接收到的由单个AP设备发送的信标帧或探测响应帧，获取单个AP设备的CSI扫描能力信息。
优选地，前端语音处理参数还包括波束形成滤波器的长度。
可选地，步骤S2包括：判断当前循环是否为第一次循环，若是，则基于前端语音处理参数的初始值，对配网声波信号进行前端语音处理；若否，则基于上一次循环中更新的前端语音处理参数，对配网声波信号进行前端语音处理。
可选地，步骤S3还包括，判断当前循环是否为第N次循环，若是，则转至步骤S7。
优选地，将最终的空间声学参数传输至存储在本地或云端的语音识别引擎中，语音识别引擎从多个声学模型中，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
优选地，步骤S5中采用逐步递增的方法确定下一次循环中的空间声学参数Pn+1的数值，使得Pn+1的数值满足(Pinitial-M1)≤Pn≤Pn+1。
优选地，步骤S5中采用逐步递减的方法确定下一次循环中的空间声学参数Pn+1的数值，使得Pn+1的数值满足Pn+1≤Pn≤(Pinitial+M2)。
优选地，步骤S5中采用固定步长逐步求精的方法确定下一次循环中的空间声学参数Pn+1的数值，根据预定的下限裕度M1和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial-M1+(n-1)*S；或者根据预定的上限裕度M2和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial+M2–(n-1)*S。
可选地，步骤S4中计算得到初始空间声学参数Pinitial包括：采用稳态噪声切断法计算初始空间声学参数Pinitial。
可选地，在步骤S6中，更新前端语音处理参数包括：将回声消除滤波器的长度更新为与步骤S5中得到的空间声学参数成正相关的值。
进一步可选地，在步骤S6中，更新前端语音处理参数还包括：将波束形成滤波器的长度更新为与步骤S5中得到的空间声学参数成正相关的值。
优选地，第一次循环中计算得到的配网声波信号能量值E1对应于空间声学参数P1，其中，P1根据前端语音处理参数的初始值确定。
在本发明的另一方面，提供一种远场语音交互系统，其包括：
信号采集模块，用于在配网过程中接收配网声波信号；参数计算模块，用于基于配网声波信号，确定空间声学参数；回声消除模块，用于采用回声消除算法对配网声波信号进行回声消除处理；模型选择模块，用于基于空间声学参数，选择远场语音识别模型；语音识别模块，用于接收经过回声消除模块处理的配网声波信号，并基于模型选择模块选择的远场语音识别模型，对语音信息进行识别分析；其中，回声消除模块从参数计算模块获取空间声学参数，并根据空间声学参数确定回声消除滤波器的长度。
可选地，远场语音交互系统还包括能量计算模块，用于计算配网声波信号的能量值；其中，能量计算模块从回声消除模块获取回声消除滤波器长度以及经过回声消除模块处理的配网声波信号，计算配网声波信号的能量值。
可选地，信号采集模块为麦克风阵列；远场语音交互系统还包括波束形成模块，用于采用波束形成算法对经过回声消除模块处理的配网声波信号进行波束形成处理；其中，波束形成模块从参数计算模块获取空间声学参数，并根据空间声学参数确定波束形成滤波器的长度。
可选地，远场语音交互系统还包括能量计算模块，用于计算配网声波信号的能量值；其中，能量计算模块从波束形成模块获取波束形成滤波器长度以及经过波束形成模块处理的配网声波信号，计算配网声波信号的能量值。
可选地，远场语音交互系统还包括，参数计算模块从能量计算模块获取多个配网声波信号的能量值；确定能量计算模块中的最小的能量值，并将最小的能量值所对应的空间声学参数设置为最终的空间声学参数。
可选地，模型选择模块还包括：从参数计算模块获取最终的空间声学参数，并基于最终的空间声学参数，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
可选地，空间声学参数为房间混响系数。
可选地，参数计算模块采用稳态噪声切断法计算空间声学参数。
在本发明的又一方面，提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现提升远场语音交互性能方法。
在本发明的又一方面，提供一种终端设备，包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，处理器用于执行提升远场语音交互性能方法。
随着物联网、AI技术的快速发展，诞生了越来越多的智能硬件，如智能音箱等活跃地出现在各类智能家居场景中。在诸多智能硬件在智能家居场景中发挥智能化作用时，联网成了必须。传统的配网方式，要求设备带有具备输入功能的屏幕，从而直接在屏幕上输入无线网络的账号(SSID)和密码。而随着智能设备的逐步小型化，越来越多的智能设备不再具有可输入的屏幕。一种替代的配网方式是声波配网，利用配网辅助设备发出的声音传输数据，把无线网络的SSID和密码通过声音广播出来，智能设备通过监听声音可以获取SSID和密码，从而进行联网。基于这种声波配网的方式，本发明针对远场语音交互性能进行优化，提出一种提升远场语音交互性能的方案，其中通过在配网过程中接收的配网声波信号计算智能设备所处空间的空间声学参数，从而对远场语音交互信号进行优化。本方案可以提高空间声学参数的精确程度，以及远场语音识别的准确性。
本发明至少克服了现有技术中由于空间环境变化给远场语音识别所带来的问题，即语音识别模型与空间环境不匹配而导致语音识别效果不能得到保证。本发明通过对智能设备所处空间的声学参数进行计算，然后利用计算获得的空间声学参数对远场语音交互信号进行优化。本发明中，智能设备通过在声波配网过程中的声波信号，无需额外获取测量信号或者模拟远场语音的数据集，即可完成对空间声学参数的测量。特别是对于依赖语音识别模型的语音识别引擎而言，本发明可以在智能设备所处的声学环境发生变化时，仍能够获得优化的语音识别结果。
应理解，上述对背景技术以及发明内容概要的描述仅仅是示意性的而非限制性的。
附图说明
图1是一种远场语音交互的应用场景示意图。
图2是根据本发明一个实施例的智能设备的空间声学参数计算和前端语音处理的示意流程图。
图3是根据本发明一个实施例的远场语音交互系统300的框图。
图4是根据本发明一个实施例的远场语音交互系统400的框图。
图5是根据本发明一个实施例的远场语音交互系统500的框图。
具体实施方式
在下文中将参考附图更全面地描述本发明，附图构成本发明公开的一部分并通过图示的方式示出示例性的实施例。应理解，附图所示以及下文所述的实施例仅仅是说明性的，而不作为对本发明的限制。
在对本申请实施例的技术方案说明之前，首先结合附图对本申请实施例的远场语音交互系统进行说明。参见图1，为本申请实施例提供的一种应用场景示意图。该应用场景中包括配网辅助设备，智能设备以及语音识别引擎。本申请实施例的具体实施的过程中，配网辅助设备是具有无线收发功能的通信装置，例如可以为电脑、智能手机、平板电脑等设备；智能设备为可以为智能音箱、智能家居设备等，其具有一个或多个麦克或者麦克风阵列，用于收集语音指令；语音识别引擎，存储于远场语音交互系统的本地端智能设备或者云端，基于语音识别模型对智能设备获取的语音信号进行语音识别，从而实现语音交互功能。
结合上述如图1所示的应用场景示意图，下面介绍本申请的具体实施方案。根据本申请的技术方案，以下描述三个主要的场景。其中，场景1为智能设备的声波配网；场景2为前端语音信号处理；场景3为后端语音识别优化。
场景1：智能设备的声波配网
结合图1，以下说明智能设备利用语音信号进行声波配网。
本实施例中的智能设备在应用的起始阶段会进行声波配网，以连接到相应的网络上。其中，配网辅助设备通过发送端将要识别的字符(比如无线网络的账号SSID和密码)映射成频率，随后将每一个频率映射成相应的音节信号从而编码成音频(即配网声波信号)进行播放；智能设备接收到从配网辅助设备发出的音频信号后，解析出音频信号的频率，然后根据码表查找到频率对应的字符，从而解码出数据用于实现联网。
场景2：空间声学参数计算和前端语音处理
结合图2，介绍本实施例中智能设备的空间声学参数计算和前端语音处理。
在本实施例的一个方面，作为示例而非限制，智能设备在通过声波信号联网的过程中，获取辅助配网设备通过喇叭播放出的声波，并基于该声波，计算智能设备所处空间的声学参数。举例而言，可以采用稳态噪声切断法，通过对智能设备自身麦克风所获得的声波信号的计算获得声学参数。进一步的，对计算出来的空间声学参数设置一定的裕度，并在该裕度范围内选择多个空间声学参数的数值，再根据空间声学参数的数值更新前端语音处理参数，并计算经过前端语音处理后的声波信号能量值，从而选出最小能量值所对应的空间声学参数作为最终的空间声学参数。
在本实施例的另一个方面，作为示例而非限制，智能设备的前端语音处理方法包括回声消除，即通过回声消除滤波器对语音信号进行滤波处理。进一步的，如果智能设备采用多个麦克风或者麦克风阵列，则智能设备的前端语音处理方法还包括波束形成，即通过波束形成滤波器对语音信号进行滤波处理。应理解，此时，前端语音处理参数还包括波束形成滤波器的长度。
图2是根据本实施例的提升远场语音交互性能的方法的示意流程图。如图2所示，该方法包括：循环N次执行以下步骤S1至S6，其中，N为不小于2的自然数：
步骤S1：在配网过程中，接收预定时间长度的配网声波信号；
步骤S2：基于前端语音处理参数，对配网声波信号进行前端语音处理；其中，前端语音处理包括回声消除，前端语音处理参数包括回声消除滤波器的长度；
步骤S3：计算当前循环内步骤S2中获得的经过前端语音处理的配网声波信号的能量值En；
步骤S4：判断当前循环是否为第一次循环，若是，则基于步骤S1中接收的配网声波信号，计算得到初始空间声学参数Pinitial，并转至步骤S5；若否，则直接转至步骤S5；
步骤S5：结合预设的上限裕度和下限裕度，确定下一次循环中的空间声学参数Pn+1的数值，使得Pn+1的数值满足(Pinitial-M1)≤Pn+1≤(Pinitial+M2)，其中n为当前循环的序号，M1为预定的下限裕度，M2为预定的上限裕度；
步骤S6：利用步骤S5中得到的空间声学参数Pn+1，更新前端语音处理参数，用于下一次循环；
在N次循环结束后，转至步骤S7：确定N次循环中获得的配网声波信号能量值中的最小值Emin，并将最小值Emin所对应的循环中的空间声学参数作为最终的空间声学参数。
应当理解的是，上述步骤S2、S3与步骤S4、S5的执行顺序可以调换，即也可以先执行步骤S4、S5，再执行步骤S2、S3。
举例来讲，智能设备按照预定的时间长度(例如，1s)周期性地接收配网声波信号，例如共6个周期即周期(a)至周期(f)，执行以下步骤：
计算初始空间声学参数及计算周期(a)的能量：智能设备在接收到周期(a)的声波信号后，计算空间声学参数，其中声学参数为RT60，RT60用于衡量房间内的信号衰减程度，具体地表示信号衰减到60dB的混响时间(单位为毫秒)。应当理解的是，不同房间的墙壁材质以及空间大小会对空间声学参数产生一定的影响。
具体地，采用稳态噪声切断法计算初始空间声学参数，其步骤包括：
1.播放接受到的周期(a)的配网声波，并确保接收单元不截幅(不超过1)，且接受单元的信号短时幅度大于0.5。应当注意的是，信号幅度过小会导致难以精确识别RT60。所述配网声波信号为数字信号。
2.使用麦克风或者麦克风阵列采集声波，其中每个采样点上采集到的声波信号幅度记为y(n)，n为采样时刻的序号。其中，采样时刻根据采样率和采样周期长度确定，例如，假设采样周期长度为1秒，采样率为16000，则采样时刻为1/16000、2/16000、3/16000、…、16000/16000。
3.将声波信号幅度y(n)以帧长1024和帧移512进行分帧处理，获得yi(n)，i为帧号。其中，帧长表示采样的点数，例如帧长1024表示共1024各采样点。
4.计算每一帧的短时能量E(i)＝10×log10(∑(yi(n)×yi(n)))，其中，E(i)的单位为db。
5.计算相邻帧短时能量E(i)之间差值，ΔE(i)＝E(i)-E(i-1)。
6.当ΔE(i)接近零时，暂停播放配网声波，并且记录时刻t1，单位为毫秒，此时短时能量为Es。
7.当E(i)＝Es-60时，记录此时的时刻t2。
8.计算混响时间Δt＝t2-t1。
应理解的是，配网声波信号本身是稳定的，但是由于房间混响的因素，导致接受信号不稳定。因此，稳态噪声切断法通过观察声波信号经过多长时间才能稳定下来，以此获取房间的空间声学参数。
进一步的，对于周期(a)的声波信号，还基于前端语音处理参数(即回声消除滤波器长度，或者回声消除滤波器长度以及波束形成滤波器长度)的初始值，对配网声波信号进行前端语音处理。
更新周期(b)-周期(f)声波信号对应的空间声学参数：对初始空间声学参数设定上限裕度和下限裕度，并在下限裕度和上限裕度的范围内选择数值作为更新的空间声学参数数值。对于周期(b)-(f)的声波信号，其对应的空间声学参数依次为P2，P3，…，P6。
应理解的是，可以采用逐步递增的方法确定更新的空间声学参数Pn+1的数值，使得Pn+1的数值满足(Pinitial-M1)≤Pn≤Pn+1。
应理解的是，还可以采用逐步递减的方法确定更新的空间声学参数Pn+1的数值，使得Pn+1的数值满足Pn+1≤Pn≤(Pinitial+M2)。
应理解的是，还可以采用固定步长逐步求精的方法确定下一次循环中的空间声学参数Pn+1的数值，根据预定的下限裕度M1和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial-M1+(n-1)*S；或者根据预定的上限裕度M2和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial+M2–(n-1)*S。
更新周期(b)-周期(f)声波信号对应的滤波器长度：每次获得空间声学参数之后，利用空间声学参数更新回声消除滤波器，或者回声消除滤波器及波束形成滤波器的长度。作为示例而非限制，回声消除滤波器的长度以及波束形成滤波器的长度与空间声学参数成正相关。进一步的，回声消除滤波器的长度以及波束形成滤波器的长度与空间声学参数可以成正比例。例如，回声消除滤波器和波束形成滤波器的长度均为：智能设备的采样率fs(单位/s)×空间声学参数(单位s)。一般而言，智能设备的采样率fs＝16000/s，例如当空间声学参数为600ms时，则相应地，回声消除滤波器和波束形成滤波器的长度均为16000/s×0.6s＝9600。
应理解的是，滤波器的长度会对信号处理效果产生较大的影响，滤波器长度过长会导致产生新的噪声，例如音乐噪声，而滤波器长度过短则会影响算法性能。
周期(b)-周期(f)声波信号的前端语音处理：对于周期(b)－周期(f)的声波信号，基于更新后的前端语音处理参数，对配网声波信号进行前端语音处理。其中，前端语音处理包括回声消除，即通过回声消除滤波器对语音信号进行滤波处理，前端语音处理参数包括回声消除滤波器的长度。进一步的，如果智能设备采用多个麦克风或者麦克风阵列，则智能设备的前端语音处理还包括波束形成，即通过波束形成滤波器对语音信号进行滤波处理。应理解，此时，前端语音处理参数还包括波束形成滤波器的长度。应理解的是，前端语音处理中可以采用通常的回声消除算法，例如NLMS、LMS等。前端语音处理中可以采用通常的波束形成算法，如MVDR、GSC、DSB等。
周期(b)-周期(f)声波信号的能量计算：对于周期(b)－周期(f)的声波信号，分别利用相应的更新后前端语音处理参数对信号进行能量计算，由此计算出每个周期的能量值。即，每个周期的能量值对应于不同的声学参数和前端语音处理参数。应理解的是，所述计算每个周期的能量值方法，主要通过对采样周期信号的幅值进行累加、累加求平均值、或者一阶递归平滑实现。
最终空间声学参数的确定：确定周期(a)-周期(f)配网声波信号中声波信号能量值的最小值Emin，并将所述最小值Emin所对应的循环中的空间声学参数作为最终的空间声学参数。例如，如果最小值为周期(b)配网声波信号的能量值，则取周期(b)对应的空间声学参数P2作为最终的空间声学参数。
应当理解的是，如果能量最小值为周期(a)配网声波信号的能量值，那么最终的空间声学参数可以根据前端语音处理参数的初始值推导获得，即由前端语音处理参数与空间声学参数成正比例这一基础推导。
场景3：后端语音识别优化
声学模型更新及语音识别：将最终的空间声学参数传输至存储在本地或云端的语音识别引擎中，语音识别引擎从多个声学模型中，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
本发明相对与传统方法，将空间声学测试与语音识别算法性能优化两个独立的模块进行了整合，通过空间声学测试预估空间声学参数，然后算法逐步求精获得最终的声学参数。同时利用获得的空间声学参数去检索匹配的云端识别引擎。本方法具有相对现有方法具有更好的性能，一方面增加了声学前端算法的数学建模的正确性，另外一方面提高了声学模型训练数据集的匹配度，全面的提升了远场语音交互系统的性能。
图3示出一个实施例中的远场语音交互系统300。如图3所示，远场语音交互系统300被配置为包括：信号采集模块302、参数计算模块304、回声消除模块306、模型选择模块308和语音识别模块310，且各模块之间相互耦合。其中，信号采集模块302配置为用于在配网过程中接收配网声波信号。回声消除模块306配置为用于采用回声消除算法对配网声波信号进行回声消除处理。参数计算模块304配置为用于基于配网声波信号，确定空间声学参数。模型选择模块308配置为用于基于空间声学参数，选择远场语音识别模型。语音识别模块310配置为用于接收经过回声消除模块处理的配网声波信号，并基于模型选择模块选择的远场语音识别模型，对语音信息进行识别分析。进一步的，回声消除模块306从参数计算模块304获取空间声学参数，并根据空间声学参数确定回声消除滤波器的长度。
进一步的，图4示出一个实施例中的远场语音交互系统400。如图4所示，远场语音交互系统400被配置为包括：信号采集模块402、参数计算模块404、回声消除模块406、模型选择模块408和语音识别模块410，且各模块之间相互耦合。其中，信号采集模块402配置为用于在配网过程中接收配网声波信号。回声消除模块406配置为用于采用回声消除算法对配网声波信号进行回声消除处理。参数计算模块404配置为用于基于配网声波信号，确定空间声学参数。模型选择模块408配置为用于基于空间声学参数，选择远场语音识别模型。语音识别模块410配置为用于接收经过回声消除模块处理的配网声波信号，并基于模型选择模块选择的远场语音识别模型，对语音信息进行识别分析。进一步的，回声消除模块406从参数计算模块404获取空间声学参数，并根据空间声学参数确定回声消除滤波器的长度。远场语音交互系统400还包括能量计算模块412，用于计算配网声波信号的能量值；其中，能量计算模块412从回声消除模块获取回声消除滤波器长度以及经过回声消除模块处理的配网声波信号，计算配网声波信号的能量值。
进一步的，参数计算模块404从能量计算模块412获取多个配网声波信号的能量值；确定能量计算模块中的最小的能量值，并将最小的能量值所对应的空间声学参数设置为最终的空间声学参数。
应当理解的是，在每次智能设备开启配网时，触发运行参数计算模块404、模型选择模块408和能量计算模块412。
进一步的，模型选择模块还包括：从所述参数计算模块404获取最终的空间声学参数，并基于所述最终的空间声学参数，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
进一步的，图5示出一个实施例中的远场语音交互系统500。如图5所示，远场语音交互系统500被配置为包括：信号采集模块502、参数计算模块504、回声消除模块506、波束形成模块514、模型选择模块508和语音识别模块510，且各模块之间相互耦合。其中，信号采集模块502配置为用于在配网过程中接收配网声波信号，信号采集模块502为麦克风阵列。回声消除模块506配置为用于采用回声消除算法对配网声波信号进行回声消除处理。波束形成模块514配置为采用波束形成算法对经过回声消除模块处理的配网声波信号进行波束形成处理。参数计算模块504配置为用于基于配网声波信号，确定空间声学参数。模型选择模块508配置为用于基于空间声学参数，选择远场语音识别模型。语音识别模块510配置为用于接收经过波束形成模块处理的配网声波信号，并基于模型选择模块选择的远场语音识别模型，对语音信息进行识别分析。进一步的，回声消除模块506和波束形成模块514从参数计算模块504获取空间声学参数，并根据空间声学参数确定回声消除滤波器和波束形成的长度。远场语音交互系统500还包括能量计算模块512，用于计算配网声波信号的能量值；其中，能量计算模块512从波束形成模块获取波束形成滤波器长度以及经过波束形成模块处理的配网声波信号，计算配网声波信号的能量值。
进一步的，参数计算模块504从能量计算模块512获取多个配网声波信号的能量值；确定能量计算模块中的最小的能量值，并将最小的能量值所对应的空间声学参数设置为最终的空间声学参数。
进一步的，模型选择模块还包括：从所述参数计算模块504获取最终的空间声学参数，并基于所述最终的空间声学参数，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
但应理解，本发明的实施不限于此。本发明各实施例中的远场语音交互系统的各组件之间可以采取不同于所示的连接方式。
作为一种具体实施方式的示例，以下描述一个具体的应用示例：
智能设备分(a)-(f)共6个周期接收配网声波信号，每个周期的长度相等，可以设置为固定的时长，例如一分钟。每个周期的长度也可以设置为完成一次空间声学参数计算所用的时长计为一个周期。在本示例中，共接收6个周期的配网声波信号。应当理解的是，周期越多，理论上而言，获得的空间声学参数则越精确。
智能设备在接收到周期(a)信号，基于接收到的周期(a)信号，采用稳态噪声切断法，计算得到空间声学参数RT60＝600ms(即初始空间声学参数Pinitial)。同时，在应用稳态噪声切断法计算时，还获得了周期(a)声波信号的能量为E1。其中，回声消除滤波器和波束形成滤波器的长度采用智能设备的默认值。
在初始空间声学参数Pinitial基础上增加一定的裕度(例如120ms)，将空间声学参数P2更新为RT60＝600ms+120ms＝720ms。
使用空间声学参数P2＝720ms更新回声消除滤波器和波束形成滤波器的长度，滤波器长度均为16000/s×0.72s＝11520，其中采样率fs＝16000/s。
接着，利用更新后的回声消除滤波器和波束形成滤波器对周期(b)的信号进行前端语音处理，并计算周期(b)信号经过前端处理后的能量，获得E2。
再次，更新空间声学参数P3，P2更新为RT60＝660ms(按照递减方式)。
使用空间声学参数P3＝660ms更新回声消除滤波器和波束形成滤波器的长度，滤波器长度均为16000/s×0.66s＝10560，其中采样率fs＝16000/s。
接着，利用更新后的回声消除滤波器和波束形成滤波器对周期(c)的信号进行前端语音处理，并计算周期(c)信号经过前端处理后的能量，获得E3。
依次类推，继续更新空间声学参数P3，P4，…，P6，并相应地更新回声消除滤波器和波束形成滤波器长度，以及分别计算各周期信号经过前端处理后的能量值。
最终获得6个周期信号的能量值，并将能量值最小的周期所对应的空间声学参数为最终确定的空间声学参数(即房间混响系数RT60)，并由最终的空间声学参数确定最终的回声消除和波束形成的滤波器长度。应当理解的是，能量值最小的周期对应的声学参数、滤波器参数与房间的声学特性最为匹配，如回声消除的声学路径和空间声学参数的匹配最为适配，因此前端信号处理的效果最好。
应理解的是，每次更新空间声学参数可以在设定的裕度范围内选择。例如，更新方法可以采用逐步递减的方法依次将声学参数减小5％。本方案采用逐步求精的计算过程，在多个声学参数中选择性能最优的一个，并根据最优的声学参数确定滤波器长度。
将本地端获得最终的空间声学系数传递给云端，云端在获得这一信息之后在平台上进行声学模型的更新，选择空间声学系数相近的数据集训练出来的声学模型。
在本示例中，云端分别部署了声学参数RT60＝0.1：0.1：2(起始为0.1，步长为0.2，终点为2)的多个声学模型，即空间声学参数为0.1，0.2，0.3，0.4，…，1.9，2.0的声学模型。经过上述6个周期的计算后，最终得到的空间声学参数RT60＝0.76s，最接近0.8，因此选择RT60＝0.8的声学模型。
作为一种具体实施方式的示例，以下描述另一个具体的应用示例：
本发明在长度为8米，宽度为4米，高度为3米的混响室内部进行实验，其中智能设备采用乐鑫科技信息有限公司的ESP-Korvo双麦开发板，将开发板置于房间的中央并距离地面高度1.5米。通过声波联网阶段对空间声学参数进行更新，与原来的方法相比，本智能设备的回声消除模块能够提升5.2db的信回比，波束形成模块能够提升2.6db的信干比。同时对语音识别的语音识别率进行了测试，在云端分别部署了声学参数RT60＝0.1：0.1：2的声学模型，最终得到的空间声学参数为RT60＝0.76秒，在测试场景为三米安静场景中，通过本发明方案对空间声学参数进行更新之后，最终的语音识别率相对于其他引擎提升3.6％。
以上实施例以示例的方式给出了具体操作过程和步骤，但应理解，本发明的保护范围不限于此。
根据本发明公开的方法和设备，作为一种可选的实施方法，上述具体实施例中的任一项方法的步骤，可以使用计算机程序执行并将其存储在计算机可读存储介质上。
虽然出于本公开的目的已经描述了本发明各方面的各种实施例，但是不应理解为将本公开的教导限制于这些实施例。在一个具体实施例中公开的特征并不限于该实施例，而是可以和不同实施例中公开的特征进行组合。此外，应理解，上文所述方法步骤可以顺序执行、并行执行、合并为更少步骤、拆分为更多步骤，以不同于所述方式组合和/或省略。本领域技术人员应理解，还存在可能的更多可选实施方式和变型，可以对上述部件和构造进行各种改变和修改，而不脱离由本发明权利要求所限定的范围。
Claims (23)
1.一种提升远场语音交互性能的方法，其特征在于，包括：循环N次执行以下步骤S1至S6，其中，N为不小于2的自然数：
步骤S1：在配网过程中，接收预定时间长度的配网声波信号；
步骤S2：基于前端语音处理参数，对所述配网声波信号进行前端语音处理；其中，所述前端语音处理包括回声消除，所述前端语音处理参数包括回声消除滤波器的长度；
步骤S3：计算当前循环内步骤S2中获得的经过前端语音处理的配网声波信号的能量值En；
步骤S4：判断当前循环是否为第一次循环，若是，则基于步骤S1中接收的配网声波信号，计算得到初始空间声学参数Pinitial，并转至步骤S5；若否，则直接转至步骤S5；
步骤S5：结合预设的上限裕度和下限裕度，确定下一次循环中的空间声学参数Pn+1的数值，使得所述Pn+1的数值满足(Pinitial-M1)≤Pn+1≤(Pinitial+M2)，其中n为当前循环的序号，M1为预定的下限裕度，M2为预定的上限裕度；
步骤S6：利用步骤S5中得到的空间声学参数Pn+1，更新前端语音处理参数，用于下一次循环；
在N次循环结束后，转至步骤S7：确定N次循环中获得的配网声波信号能量值中的最小值Emin，并将所述最小值Emin所对应的循环中的空间声学参数作为最终的空间声学参数。
2.根据权利要求1中所述的方法，其特征在于，所述前端语音处理参数还包括波束形成滤波器的长度。
3.根据权利要求1中所述的方法，其特征在于，步骤S2包括：判断当前循环是否为第一次循环，若是，则基于前端语音处理参数的初始值，对所述配网声波信号进行前端语音处理；若否，则基于上一次循环中更新的前端语音处理参数，对所述配网声波信号进行前端语音处理。
4.根据权利要求1中所述的方法，其特征在于，步骤S3还包括，判断当前循环是否为第N次循环，若是，则转至步骤S7。
5.根据权利要求1中所述的方法，其特征在于，还包括：将最终的空间声学参数传输至存储在本地或云端的语音识别引擎中，所述语音识别引擎从多个声学模型中，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
6.根据权利要求1中所述的方法，其特征在于，步骤S5中采用逐步递增的方法确定下一次循环中的空间声学参数Pn+1的数值，使得所述Pn+1的数值满足(Pinitial-M1)≤Pn≤Pn+1。
7.根据权利要求1中所述的方法，其特征在于，步骤S5中采用逐步递减的方法确定下一次循环中的空间声学参数Pn+1的数值，使得所述Pn+1的数值满足Pn+1≤Pn≤(Pinitial+M2)。
8.根据权利要求1中所述的方法，其特征在于，步骤S5中采用固定步长逐步求精的方法确定下一次循环中的空间声学参数Pn+1的数值，根据预定的下限裕度M1和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial-M1+(n-1)*S；或者根据预定的上限裕度M2和步长S，确定下一次循环中的空间声学参数Pn+1的数值，其中Pn+1＝Pinitial+M2–(n-1)*S。
9.根据权利要求1所述的方法，其特征在于，所述空间声学参数为房间混响系数。
10.根据权利要求1所述的方法，其特征在于，步骤S4中计算得到初始空间声学参数Pinitial包括：采用稳态噪声切断法计算初始空间声学参数Pinitial。
11.根据权利要求1所述的方法，其特征在于，在步骤S6中，更新前端语音处理参数包括：将回声消除滤波器的长度更新为与步骤S5中得到的空间声学参数成正相关的值。
12.根据权利要求2所述的方法，其特征在于，在步骤S6中，更新前端语音处理参数还包括：将波束形成滤波器的长度更新为与步骤S5中得到的空间声学参数成正相关的值。
13.根据权利要求1所述的方法，其特征在于，第一次循环中计算得到的配网声波信号能量值E1对应于空间声学参数P1，其中，P1根据前端语音处理参数的初始值确定。
14.一种远场语音交互系统，其特征在于，包括：
信号采集模块，用于在配网过程中接收配网声波信号；
参数计算模块，用于基于所述配网声波信号，确定空间声学参数；
回声消除模块，用于采用回声消除算法对所述配网声波信号进行回声消除处理；
模型选择模块，用于基于所述空间声学参数，选择远场语音识别模型；
语音识别模块，用于接收经过回声消除模块处理的配网声波信号，并基于所述模型选择模块选择的远场语音识别模型，对所述语音信息进行识别分析；
其中，所述回声消除模块从参数计算模块获取空间声学参数，并根据所述空间声学参数确定回声消除滤波器的长度。
15.根据权利要求14所述的系统，其特征在于，还包括：
能量计算模块，用于计算配网声波信号的能量值；其中，所述能量计算模块从回声消除模块获取回声消除滤波器长度以及经过回声消除模块处理的配网声波信号，计算所述配网声波信号的能量值。
16.根据权利要求14所述的系统，其特征在于，包括：
所述信号采集模块为麦克风阵列；
还包括波束形成模块，用于采用波束形成算法对所述经过回声消除模块处理的配网声波信号进行波束形成处理；
其中，所述波束形成模块从参数计算模块获取空间声学参数，并根据所述空间声学参数确定波束形成滤波器的长度。
17.根据权利要求16所述的系统，其特征在于，还包括：
能量计算模块，用于计算配网声波信号的能量值；
其中，所述能量计算模块从波束形成模块获取波束形成滤波器长度以及经过波束形成模块处理的配网声波信号，计算所述配网声波信号的能量值。
18.根据权利要求15或17所述的系统，其特征在于，还包括，所述参数计算模块从能量计算模块获取多个配网声波信号的能量值；
确定所述能量计算模块中的最小的能量值，并将所述最小的能量值所对应的空间声学参数设置为最终的空间声学参数。
19.根据权利要求18所述的系统，其特征在于，模型选择模块还包括：从所述参数计算模块获取最终的空间声学参数，并基于所述最终的空间声学参数，选择由与最终的空间声学参数最接近的数据集训练得到的声学模型作为远场语音识别模型。
20.根据权利要求14所述的系统，其特征在于，所述空间声学参数为房间混响系数。
21.根据权利要求14所述的系统，其特征在于，所述参数计算模块采用稳态噪声切断法计算空间声学参数。
22.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至13中任一项所述的提升远场语音交互性能方法。
23.一种终端设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器用于执行如权利要求1-13任一项所述的提升远场语音交互性能方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111173645.1A CN113921007B (zh) | 2021-09-28 | 2021-09-28 | 提升远场语音交互性能的方法和远场语音交互系统 |
| PCT/CN2022/122192 WO2023051622A1 (zh) | 2021-09-28 | 2022-09-28 | 提升远场语音交互性能的方法和远场语音交互系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111173645.1A CN113921007B (zh) | 2021-09-28 | 2021-09-28 | 提升远场语音交互性能的方法和远场语音交互系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113921007A true CN113921007A (zh) | 2022-01-11 |
| CN113921007B CN113921007B (zh) | 2023-04-11 |
Family
ID=79238369
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111173645.1A Active CN113921007B (zh) | 2021-09-28 | 2021-09-28 | 提升远场语音交互性能的方法和远场语音交互系统 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113921007B (zh) |
| WO (1) | WO2023051622A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023051622A1 (zh) * | 2021-09-28 | 2023-04-06 | 乐鑫信息科技（上海）股份有限公司 | 提升远场语音交互性能的方法和远场语音交互系统 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105427860B (zh) * | 2015-11-11 | 2019-09-03 | 百度在线网络技术（北京）有限公司 | 远场语音识别方法和装置 |
| CN107680586B (zh) * | 2017-08-01 | 2020-09-29 | 百度在线网络技术（北京）有限公司 | 远场语音声学模型训练方法及系统 |
| US10872602B2 (en) * | 2018-05-24 | 2020-12-22 | Dolby Laboratories Licensing Corporation | Training of acoustic models for far-field vocalization processing systems |
| CN111341303B (zh) * | 2018-12-19 | 2023-10-31 | 北京猎户星空科技有限公司 | 一种声学模型的训练方法及装置、语音识别方法及装置 |
| CN111312269B (zh) * | 2019-12-13 | 2023-01-24 | 天津职业技术师范大学(中国职业培训指导教师进修中心) | 一种智能音箱中的快速回声消除方法 |
| CN210578573U (zh) * | 2019-12-24 | 2020-05-19 | 珠海数字动力科技股份有限公司 | 一种基于亚超声波通信的声波配网设备 |
| CN113921007B (zh) * | 2021-09-28 | 2023-04-11 | 乐鑫信息科技（上海）股份有限公司 | 提升远场语音交互性能的方法和远场语音交互系统 |
-
2021
- 2021-09-28 CN CN202111173645.1A patent/CN113921007B/zh active Active
-
2022
- 2022-09-28 WO PCT/CN2022/122192 patent/WO2023051622A1/zh unknown
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023051622A1 (zh) * | 2021-09-28 | 2023-04-06 | 乐鑫信息科技（上海）股份有限公司 | 提升远场语音交互性能的方法和远场语音交互系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023051622A1 (zh) | 2023-04-06 |
| CN113921007B (zh) | 2023-04-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6157403A (en) | Apparatus for detecting position of object capable of simultaneously detecting plural objects and detection method therefor | |
| CN103067322B (zh) | 评估单通道音频信号中的音频帧的语音质量的方法 | |
| US20080208538A1 (en) | Systems, methods, and apparatus for signal separation | |
| CN106572419B (zh) | 一种立体声音效增强系统 | |
| CN107071636B (zh) | 对带麦克风的设备的去混响控制方法和装置 | |
| WO2013068284A1 (en) | Method and apparatus for processing signals of a spherical microphone array on a rigid sphere used for generating an ambisonics representation of the sound field | |
| US11317233B2 (en) | Acoustic program, acoustic device, and acoustic system | |
| CN111383646B (zh) | 一种语音信号变换方法、装置、设备和存储介质 | |
| CN109831733A (zh) | 音频播放性能的测试方法、装置、设备和存储介质 | |
| CN101233561B (zh) | 通过根据背景噪声控制振动器的操作来增强移动通信设备中的语音可懂度 | |
| CN112820315A (zh) | 音频信号处理方法、装置、计算机设备及存储介质 | |
| CN113921007B (zh) | 提升远场语音交互性能的方法和远场语音交互系统 | |
| CN110475181B (zh) | 设备配置方法、装置、设备和存储介质 | |
| WO2022256577A1 (en) | A method of speech enhancement and a mobile computing device implementing the method | |
| CN110111802A (zh) | 基于卡尔曼滤波的自适应去混响方法 | |
| CN112151055B (zh) | 音频处理方法及装置 | |
| Gamper et al. | Predicting word error rate for reverberant speech | |
| JP2000069597A (ja) | インパルス応答測定方法 | |
| CN113327624A (zh) | 一种采用端到端时域声源分离系统进行环境噪声智能监测的方法 | |
| CN113393850A (zh) | 一种用于端到端时域声源分离系统的参数化听觉滤波器组 | |
| CN102903367A (zh) | 离线迭代的声重放系统频响均衡方法和装置 | |
| CN113055809B (zh) | 一种5.1声道信号生成方法、设备及介质 | |
| CN110246516A (zh) | 一种语音通信中小空间回声信号的处理方法 | |
| RU2782364C1 (ru) | Устройство и способ отделения источников с использованием оценки и управления качеством звука | |
| EP4350695A1 (en) | Apparatus, methods and computer programs for audio signal enhancement using a dataset |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |